Estimados,

Primero como equipo les queremos pedir disculpas por los problemas, que los errores en la plataforma le puedan haber generado durante la tarde de ayer Miércoles 08/09.

La situación que comenzó ayer alrededor de las 14:45 de la tarde, fue generada por la sobre demandad de un servicio especifico el cual ya habíamos notado y para que no afectara a una de las bases de datos, la cual ya había presentado lentitud el martes, cambiamos una configuración lo cual impidió que se repitiera la situación del día martes, pero genero que 20 minutos después de iniciado este aumento en la carga en el servicio colapsara específicamente la base de datos MongoDB, que utilizamos para guardar los datos de los casos y mensajes. Esta carga específicamente en MongoDB, fue superior a el limite previsto que teníamos, lo cual genero que el sistema de respaldo no fuera suficiente para mantener la plataforma funcionando, con lo cual tuvimos que tomar la decisión de detener el servicio a las 16:10, restaurándolo a las 16:25, estando operativo con normalidad alrededor de las 16:40.

Como medida en adelante para evitar que este tipo de incidente no vuelva a ocurrir hemos tomado las siguientes medidas:

• Modificación de la configuración de Base de Datos principal, para así asegurarnos que en el peor de los casos la plataforma tenga lentitud, evitando llegar a el escenario que impida operar.
• Mejora en rendimiento de MongoDB, para estar mejor preparados ante un aumento en la demanda.
• Aumento en el valor de parámetros, específicamente los casos bordes de demanda, dado que los que teníamos se vieron superados.
• Seguir avanzando en mejoras enfocadas en la reducción de procesos que tienen un riesgo de generar efectos negativos en la plataforma.