Una falla de la redada ha dejado de estar fuera de línea Matrix.org HomeRerver, dejando a los usuarios del servicio de mensajería descentralizado que no puede enviar o recibir mensajes mientras los ingenieros intentan una restauración de base de datos de 55 TB.
Para ser claros, aquellos con sus propios hogares, como las organizaciones gubernamentales, no se ven afectados, pero cualquiera que use matrix.org como su homeserver habrá escuchado el sonido del silencio de la plataforma mientras el equipo trabaja para poner el servicio en línea.
Problemas comenzó en 1117 UTC el 2 de septiembre, cuando la base de datos secundaria matrix.org perdió su sistema de archivos debido a una falla de redada. La primaria cayó en 1726 UTC, y unos minutos más tarde, la organización aceptado que las cosas no eran muy saludables.
El HomeRerver Matrix.org está respaldado por una gran base de datos PostgreSQL, que causó el dolor de la organización en julio cuando una corrupción de gestación larga de parte de un índice de tabla causó problemas con las «habitaciones» en el sistema. El resultado ¿Ese intentos de unir las habitaciones fallarían, los mensajes no enviarían y aparecieron mensajes de error crípticos ocasionales?
El equipo era comprensiblemente un poco cauteloso al restaurar la base de datos y finalmente reportado: «No hemos podido restaurar el sistema de archivos primario de DB a un estado, estamos seguros de ejecutar como primario (especialmente dadas nuestras experiencias con la corrupción de DB de Postgres de quema lenta)».
La solución es una restauración completa de la instantánea de la base de datos de 55 TB seguida de una repetición de 17 horas de tráfico. Al momento de escribir este artículo, el equipo había logrado restaurar la instantánea y las posteriores copias de seguridad incrementales y estaba a punto de embarcarse en la repetición del tráfico.
Neil Johnson, director de ingeniería de Element, una plataforma de mensajería de los creadores de Matrix, dijo El registro El problema comenzó con un ejercicio de actualización de almacenamiento de rutina que salió mal. «Una serie completa de cosas sucedió exactamente en el momento equivocado al unísono, lo que llevó a la situación que vemos», dijo.
No es un gran aspecto para la organización, ya que los usuarios que confían en el Homeserver matrix.org no pueden acceder a ella. Los mensajes enviados a los usuarios de Matrix.org se colocarán hasta que el servicio esté en funcionamiento. «No habrá ninguna pérdida de datos. Eventualmente su mensaje pasará», dijo Johnson.
No hay ningún cargo por usar matrix.org y tampoco hay un acuerdo de nivel de servicio.
El incidente demuestra los beneficios de un sistema descentralizado. Los usuarios con sus propios hogares no están afectados, ni organizaciones como Element, que tienen implementaciones de clientes que utilizan la tecnología subyacente.
Un homeserver no afecta al resto, incluso uno tan visible como Matrix.org.
Matrix se ha vuelto cada vez más importante en los últimos años a medida que las organizaciones del sector público y privado buscan reducir su dependencia de los servicios de mensajería centralizada que podrían no cumplir con los requisitos de soberanía o privacidad. La interrupción de Matrix.org, aunque vergonzosa, sirve para resaltar que un enfoque descentralizado puede proteger a los usuarios de la vuditud por parte de quienes administran el servicio. ®