Google-Meet-Störungsbericht vom 8.1.2021

https://status.cloud.google.com/incident/zall/21001

Zusammenfassung der Störung:

Vom 7.1.2021 12:17 bis zum 8.1.2021 08:58 konnten 250.000 Google-Meet-Nutzer 20,7 Stunden lang nicht auf die Landingpage zugreifen. Während des Störungszeitraums war ein direkter Zugriff über den Kalender usw. möglich.

Ursache der Störung:

Am 7.1.2021 um 12:00 wurde die neue Änderung an der Google-Meet-Landingpage schrittweise ausgerollt.

Der Rollout begann um 12:00, ab 16:00 wurde er ausgeweitet.

Um die alte und die neue Seite gleichzeitig zu unterstützen, wurde eine Redirect-Logik implementiert, damit sie jeweils wieder aufeinander verweisen.

Durch einen Fehler leitete die Redirect-Logik der neuen Seite einige Nutzer erneut auf die zuvor besuchte Seite um, wodurch eine Redirect-Schleife entstand.

Die Nutzer konnten nicht auf die Google-Meet-Landingpage zugreifen, und es trat ein 502-Fehler auf.

Maßnahmen:

Am 8.1.2021 um 04:49 wurde das Problem gemeldet, die Codeänderung war um 05:03 abgeschlossen, und um 08:58 war die Störung behoben.

• Das Monitoring und die Alerts der Frontend-Server werden so verbessert, dass sie Entwickler schneller erreichen.

• Die Dokumentation für das Troubleshooting wird verbessert.

• Legacy-Code wird überarbeitet.

• Die interne Kommunikation zu neuen Code-Launches wird aktualisiert, um das Bewusstsein zu verbessern und eine schnellere Behebung zu fördern.