¿Qué repercusión tuvo en el servicio Auditool? El resumen de este día
11 de marzo de 2020, 00:47 (hora de París): Se produce un incendio en el centro de datos de OVH Cloud en Estrasburgo. Prácticamente al instante, todo el datacenter se apaga.
Como recordatorio: este centro de datos alberga la aplicación Auditool, así como todos los datos de auditoría de algunos de nuestros clientes.
11 de marzo de 2020, 3:50: La copia de seguridad que se realiza automáticamente de forma diaria de los datos de Auditool en un segundo sitio en Francia falla, debido a la indisponibilidad del datacenter.
1 de marzo de 2020, 7:00: El incendio se controla gracias a la intervención de un centenar de bomberos. Una parte del datacenter se salva, pero cortan la electricidad y todo el datacenter sigue fuera de servicio.
11 de marzo de 2020, 8:00: Se activa el equipo de gestión de crisis de JUNE. Hacemos un balance del impacto e informamos inmediatamente a nuestros clientes del incidente. El 30% de nuestros clientes se ve afectado.
Enseguida comprendemos que los datos guardados en el datacenter de OVH serán recuperados, en el mejor de los casos, dentro de varias semanas, y en el peor, se perderán. Afortunadamente, cada licencia de Auditool incluye una copia de seguridad externa diaria.
11 de marzo de 2020, 10:00: El plan de recuperación de Auditool está activado, pero el servicio de gestión de nombres de dominio de OVH no está disponible debido a un tráfico denso. Nuestros equipos se ven obligados a esperar el restablecimiento del servicio de OVH para continuar con el plan de recuperación.
11 de marzo de 2020, 14:00: El servicio de DNS de OVH vuelve a estar operativo. Nuestros equipos replican y despliegan Auditool en un nuevo servidor. También se realizan pruebas de funcionamiento para garantizar el correcto despliegue.
11 de marzo de 2020, 16:30: Recuperación completa del servicio Auditool, el 100% de nuestros clientes tienen acceso a su espacio de Auditool, con la información de la copia de seguridad del día anterior. Auditool está ahora basado en el sitio de OVH en Gravelines, Francia. La aplicación está alojada en un servidor en Francia, con la misma política de rendimiento y protección de datos.
De esta manera, Auditool seguirá ofreciendo la misma calidad de servicio que hasta ahora, y todos nuestros compromisos de protección de datos siguen siendo válidos.
Pequeño contratiempo inesperado: los datos del día 10 de marzo se perdieron... ¡Pero no para Auditool! Gracias al modo offline de Auditool, nuestros clientes pudieron seguir trabajando en su auditoría incluso durante el tiempo de indisponibilidad y sincronizar los dos días de trabajo el 11 de marzo por la tarde.
El resultado: no se perdió ningún dato de las auditorías y casi no hubo impacto en la productividad de nuestros clientes.
Un día agitado para nuestros equipos, pero afortunadamente sin consecuencias gracias a las copias de seguridad externalizadas y a un plan de recuperación bien establecido.
¿Y ahora qué? Estamos a la espera de noticias de OVH sobre la recuperación de datos y la reanudación del servicio. Este incidente también nos ha permitido probar nuestro plan de recuperación en condiciones reales, que seguiremos mejorando.
El equipo de June Factory pide disculpas por las molestias causadas por este incidente excepcional ajeno a nuestra voluntad.
Quedamos a su disposición para cualquier consulta o reclamación.
Crédito de la foto : Twitter
