Informe de incidente de Google Meet del 8/1/2021

https://status.cloud.google.com/incident/zall/21001

Resumen del incidente:

250 mil usuarios de Google Meet no pudieron acceder a la página de inicio durante 20.7 horas, desde el 7/1/2021 12:17 hasta el 8/1/2021 08:58. Durante el incidente, sí era posible acceder directamente a través de Calendar y otros medios.

Causa del incidente:

El 7/1/2021 a las 12:00 se aplicó gradualmente un cambio en la nueva página de inicio de Google Meet.

El rollout comenzó a las 12:00 y empezó a ampliarse a partir de las 16:00.

Para dar soporte simultáneo a la página antigua y a la nueva, se implementó una lógica de redirección entre ambas páginas.

Por error, para algunos usuarios la lógica de redirección de la nueva página volvía a redirigir a la página visitada anteriormente, lo que generó un bucle de redirección.

Los usuarios no podían acceder a la página de inicio de Google Meet y recibían un error 502.

Respuesta:

El 8/1/2021 a las 04:49 se reportó el problema, el cambio de código se completó a las 05:03 y el incidente finalizó a las 08:58.

• Hacer que el monitoreo y las alertas de los servidores frontend lleguen más rápido a los desarrolladores.

• Mejorar la documentación para troubleshooting.

• Mejorar el código legacy.

• Actualizar la comunicación interna sobre el lanzamiento de código nuevo para mejorar la visibilidad y acelerar la resolución.