1 Punkte von GN⁺ 2025-04-18 | 1 Kommentare | Auf WhatsApp teilen
  • Mehrere Ausfälle von Zoom-Diensten am 16. April 2025 begannen mit einem Fehlschlag bei der Auflösung der Domain zoom.us; Kunden in den USA und international konnten nicht auf die Dienste zugreifen
  • Der Vorfall wurde um 11:25 Uhr PDT gemeldet und um 13:12 Uhr behoben; betroffen waren Zoom Meetings sowie die Webportale von Zoom Phone, Zoom CX und der Zoom Website
  • Es gab keine internen Produkt-, Sicherheits- oder Netzwerkausfälle bei Zoom und keinen DDoS-Angriff; Ursache war ein Kommunikationsfehler zwischen Markmonitor und GoDaddy Registry
  • Nutzer, die bereits in einem Meeting oder einem Zoom-Phone-Anruf waren, waren nicht betroffen, aber Anfragen zum Starten, Beitreten oder Planen konnten fehlschlagen, da dafür eine DNS-Abfrage erforderlich war
  • Zoom, Markmonitor und GoDaddy entfernten den Server Block und stellten den Dienst wieder her; zur Vermeidung einer Wiederholung wurde für die Domain zoom.us ein Registry Lock aktiviert

Umfang und Zeitraum des Ausfalls

  • Der Ausfall beeinträchtigte den Zugriff auf mehrere Zoom-Dienste durch einen Fehlschlag bei der Auflösung der Domain zoom.us
  • Das Serviceproblem wurde am 16. April 2025 um 11:25 Uhr PDT gemeldet und um 13:12 Uhr PDT behoben
  • Kunden in den USA und in internationalen Regionen konnten nicht auf Zoom-Dienste zugreifen
  • Betroffene Dienste:
    • Zoom Meetings
    • Web Portal von Zoom Phone - Global
    • Web Portal von Zoom CX - Global
    • Web Portal der Zoom Website

Ursache und Wiederherstellung

  • Die Domain-Nameserver von Zoom beantworteten Anfragen ordnungsgemäß
  • Die tatsächliche Ursache war ein Server Block bei GoDaddy Registry, wodurch die Domain zoom.us nicht verfügbar wurde
    • Dieser Block entstand durch einen Kommunikationsfehler zwischen Markmonitor, dem Domain-Registrar von Zoom, und GoDaddy Registry
    • In der Folge wurde die Domain zoom.us von GoDaddy Registry versehentlich in einen abgeschalteten Zustand versetzt
  • Während des Vorfalls gab es bei Zoom keine internen Produkt-, Sicherheits- oder Netzwerkausfälle und keinen DDoS-Angriff
  • Endnutzer, die bereits an einem Zoom-Meeting oder einem Zoom-Phone-Anruf teilnahmen, waren nicht betroffen
  • Aktionen zum Starten, Beitreten und Planen von Meetings erforderten eine DNS-Abfrage und konnten daher nicht erfolgreich abgeschlossen werden
  • Zoom, Markmonitor und GoDaddy identifizierten und entfernten den Server Block und stellten damit den Dienst für die Domain zoom.us wieder her
    • Da DNS-Einträge auf mehreren Ebenen zwischengespeichert werden und eine TTL gesetzt ist, dauerte es nach der Reaktivierung der Domain noch einige Minuten, bis sich die Änderung in der gesamten Internet-Infrastruktur verbreitet hatte

Vermeidung einer Wiederholung und Maßnahmen für Nutzer

  • GoDaddy Registry und Markmonitor haben zur Vermeidung einer Wiederholung einen Registry Lock für die Domain zoom.us aktiviert
    • Diese Sperre schränkt ein, dass Server-Block-Befehle auf die Domain zoom.us angewendet werden können
  • Nutzer, bei denen weiterhin Verbindungsprobleme bestehen, können den DNS-Cache leeren und anschließend erneut eine Verbindung herstellen
    • Windows: ipconfig /flushdns
    • Mac: sudo dscacheutil -flushcache; sudo killall -HUP mDNSResponder

1 Kommentare

 
GN⁺ 2025-04-18
Meinungen auf Hacker News
  • Der Wert des Dienstes von MarkMonitor wirkt deutlich gesunken. MarkMonitor bewirbt sich selbst als „seit 1999 ICANN-akkreditierter Registrar und Branchenführer“
    Der Grund, viel Geld an MarkMonitor zu zahlen, ist doch, dass sie wichtige Domains betreuen und solche Fehler vermeiden; hier hätte es für GoDaddy keinen Spielraum geben dürfen, sich einzumischen

    • GoDaddy Registry betreibt die .us-Registry, daher kann man keine .us-Domain haben, ohne dass GoDaddy beteiligt ist
      Wenn man das nicht will, hätte man .com wollen müssen, das von Verisign betrieben wird
    • Ich war neugierig, welche Domain-Registrare große Tech-Unternehmen nutzen, und habe Whois-Abfragen gemacht: Microsoft, Google, Amazon, Tesla, Netflix und Shopify nutzen alle MarkMonitor
      Apple dagegen nutzt „Nom-iq Ltd. dba COM LAUDE“, Meta-Unternehmen nutzen RegistrarSafe, Nvidia nutzt SafeNames
    • Vielleicht liegt der Grund, MarkMonitor zu bezahlen, am Ende gerade in der Fähigkeit, GoDaddy zu kontaktieren und das Problem zu lösen
      Wenn dasselbe Problem einem kleinen Startup passiert wäre, hätte GoDaddy sie vermutlich gar nicht erst ernst genommen
    • GoDaddy betreibt das Root-DNS von .us
    • Ein weiterer Wert von MarkMonitor liegt darin, Zugang zu länderspezifischen Top-Level-Domains (ccTLDs) zu verschaffen, die Anforderungen haben, die man selbst nur schwer erfüllen kann
      Wenn zum Beispiel eine tatsächliche Adresse im jeweiligen Land erforderlich ist, kann MarkMonitor mit Büros in mehreren Ländern diese Anforderung erfüllen und die ccTLD-Domain dann an Kunden verkaufen
      Die Legalität dieser Konstruktion erscheint mir etwas fragwürdig, aber ich bin kein Rechtsexperte
  • Um meinen damaligen Arbeitgeber davon zu überzeugen, Zoom abzulösen, beschloss ich zu sehen, wie viele Sicherheitslücken ich innerhalb von 2–3 Stunden finden konnte
    Nur mit binwalk und öffentlich verfügbaren Informationen fand ich in dieser Zeit 12 bestätigte Bugs; der schwerwiegendste war, dass die E-Mail für das Zurücksetzen des Passworts des GoDaddy-Kontos von zoom.us das private Gmail-Konto von CEO Eric S Yuan war
    Als ich versuchte, das Gmail-Passwort zurückzusetzen, gab es keine Zwei-Faktor-Authentifizierung; es waren nur zwei Sicherheitsfragen zu Heimatort und Telefonnummer nötig, deren Antworten sich aus öffentlichen Quellen finden ließen, sodass man einen Reset-Link erhalten und bis zur Kontrolle über die Domain zoom.us gelangen konnte
    Ich fand niemanden im Sicherheitsteam, der das auf Englisch erklären konnte, und es dauerte drei Monate, bis Zoom es bestätigte und insgesamt 800 Dollar Bug Bounty zahlte
    Immerhin führte das dazu, dass mein Arbeitgeber Zoom aufgab

    • Mich würde interessieren, wann das war. Vor ein paar Jahren hat Zoom in den USA aktiv Sicherheitspersonal eingestellt und suchte auch ein dediziertes Fuzzing-Team
      Das dürfte wohl in der frühen Phase gewesen sein, als Zoom gerade populär wurde
    • Gibst du gerade zu, ein Schwerverbrechen begangen zu haben?
  • GoDaddy ist eine so inkompetente Organisation, dass man ihnen nichts Wichtiges zur Verwaltung überlassen sollte

    • Es ist leicht, GoDaddy die Schuld zu geben, aber ein Kommunikationsversagen braucht zwei Seiten
      Genau um solche Dinge zu verhindern, zahlt man viel Geld an MarkMonitor, und MarkMonitor hätte bei GoDaddy einen festen Ansprechpartner und direkte Kommunikationskanäle haben müssen
      Selbst wenn GoDaddy anders gehandelt hat als angefordert, ist das auch ein großer Fehler auf Seiten von MarkMonitor
    • Wer hätte gedacht, dass ein Unternehmen, das Werbung mit Frauen machte, die wie Hooters-Bedienungen gekleidet waren, am Ende zu einem kompletten Clown-Auto wird
  • Vor ein paar Jahren habe ich eine .us-Top-Level-Domain genutzt, kam aber letztlich zu dem Schluss, dass ich meine Domain nicht von einem Ländercode abhängig machen sollte
    Aus demselben Grund nutze ich auch kein .io
    Das heißt nicht, dass so etwas bei generischen Top-Level-Domains unmöglich wäre, aber warum sollte man seine Marke auf diese Weise in die Hände einer Regierung legen?

    • Keine Top-Level-Domain ist frei vom Recht irgendeines Landes. Vielleicht .aq oder .su?
      Unter dieser Bedingung wäre .eu vielleicht ein besserer Kandidat, aber man kann ja frühere britische Domaininhaber fragen, wie das ausgegangen ist
      Generische Top-Level-Domains fügen nur eine zusätzliche Schicht Inkompetenz in Form einer Betreibergesellschaft hinzu, und die Regierung des Landes, in dem diese Firma sitzt, kann weiterhin eingreifen
      Zum Beispiel wird auch .nl nicht von Beamten der niederländischen Regierung betrieben, sondern meines Wissens von einer Non-Profit-Organisation, die in den 80ern von ein paar Leuten gegründet wurde
    • Zoom ist in den USA eingetragen und die meisten Mitarbeiter sitzen ebenfalls dort, steht also ohnehin bereits unter dem Einfluss der US-Regierung
      Auch eine „generische“ Top-Level-Domain wie .com fällt letztlich unter US-Gerichtsbarkeit
    • Es war Glück, .io zu meiden. .io läuft Gefahr, ganz abgeschafft zu werden
      Es ist noch nichts entschieden, aber man muss sich diese Unsicherheit nicht über den Kopf hängen
    • Meiner Regierung in Kanada vertraue ich im Allgemeinen, und bei .ca-Domains sind WHOIS-Informationen standardmäßig verborgen, was mir gefällt
      Da ich hier lebe und auch künftig hier leben werde, passt es für mich gut, eine nationale Top-Level-Domain zu verwenden, um mich und meine Arbeit zu repräsentieren
    • Buchstäblich jede Top-Level-Domain steht unter der Verwaltung irgendeiner Regierung
      Auch .com selbst unterliegt US-Gerichtsbarkeit und wird von Verisign betrieben
  • Wegen dieser Möglichkeit kaufte Fastmail fastmail.com und migrierte von der alten Domain fastmail.fm dorthin
    .fm war zwar cool, aber nach mehreren Ausfällen der .fm-Server war man offline, und seit dem Wechsel zu .com gab es solche Probleme nicht mehr

  • Es ist erstaunlich, wie viele Serviceausfälle durch Geschäfte mit GoDaddy entstehen

    • Als Zoom die Domain zoom.us bekam, betrieb vermutlich noch Neustar die .us-Registry
      GoDaddy übernahm Neustars Registry-Geschäft 2020, als alle mit anderen Dingen beschäftigt waren
    • Mich würde interessieren, ob es auch so aussieht, wenn man die Zahl der Ausfälle durch die Zahl der Kunden teilt
      Ich bin kein Kunde, habe nicht vor, aus dem Ausland Domains zu kaufen, und habe zu GoDaddy keine feste Meinung außer, dass mir der Name nicht gefällt
      Ich habe viele Horrorgeschichten gehört, frage mich aber, ob das auch ein unmittelbarer Reflex ist
  • Die Endpunkte, die der Zoom-Client aufruft, sollten Second- und Third-Level-Domains haben, und Registrar sowie Hosting-Infrastruktur sollten diversifiziert werden
    Sogar Reserve-Anycast-IP-Adressen für Service Discovery wären gut
    Angesichts der Kosten, die Unternehmen wie unseres zahlen, kann man ein solches Maß an Engineering-Vorsorge erwarten, und man kann es auch jetzt noch beheben
    #HugOps an die Mitarbeitenden, die gerade Nachtschichten zur Bewältigung leisten

    • Besonders frustrierend war, dass auch der Host für Statusprüfungen innerhalb der Domain zoom.us lag
  • Wenn der CEO von Zoom sagt: „Wir möchten für den von Ihnen verursachten weltweiten Ausfall SLA-Gutschriften erhalten“, würde GoDaddy vermutlich antworten: „Es tut uns leid. Wir können Ihnen einmalig einen 10-Dollar-Rabattcoupon für Ihren nächsten Kauf oder Ihre nächste Verlängerung anbieten.“
    Die meisten Unternehmen hoffen, dass ein entschuldigender Zoom-Call ausreicht, um Kunden zu halten, und in der Praxis funktioniert das meistens auch.
    Es wird zu wenig darüber gesprochen, wie groß die Asymmetrie zwischen SLA-Gutschriften und Umsatzauswirkungen bei Ausfällen eines bestimmten Anbieters ist – und wie sich das in Build-vs.-Buy-Entscheidungen niederschlagen sollte.

    • Wahrscheinlich will man SLA-Gutschriften nicht darauf optimieren, einen erheblichen Teil des entgangenen Umsatzes auszugleichen.
      Dafür müsste es bedeuten, dass im normalen Betrieb kaum Marge übrig bleibt.
      SLAs sind nützlicher als Mittel, um aus langfristigen Verträgen mit unzuverlässigen Anbietern herauszukommen, statt entgangenen Umsatz durch Ausfälle zu kompensieren.
    • Ich verstehe nicht, warum ein Dienst in der Größenordnung von Zoom GoDaddy nutzt.
      GoDaddy ist seit Jahren miserabel, und dass sie die ACME API für alle außer Top-Kunden blockiert haben, war für mich der letzte Tropfen.
      Ich würde ihnen niemals vertrauen.
    • Wenn Zoom ausgefallen ist, kann man nicht einmal einen entschuldigenden Zoom-Call machen.
    • Um Symmetrie herzustellen, müssten die Kosten für die Domainverlängerung nicht etwa bei 20 Dollar liegen, sondern bei mehreren Millionen Dollar, damit Entschädigungen tragbar wären.
      Wenn man das will, kauft man bei einem Versicherer eine maßgeschneiderte Police für genau diesen Vorfall und zahlt eine jährliche Prämie in ähnlicher Höhe.
      Auch bei Build vs. Buy gilt: Selbst Gebautes ist oft schlechter als Gekauftes.
      Gekaufte Produkte werden durch Bug Reports von Kunden auf der ganzen Welt laufend verbessert, während interne Tools nur selten in diesem Maß Stresstests durchlaufen und im Einsatz gehärtet werden.
    • Ich erinnere mich, dass beim CrowdStrike-Ausfall Starbucks-Gutscheine angeboten wurden. Offenbar geht es in diese Richtung.
  • Es sieht so aus, als sei bei MarkMonitor etwas passiert. Möglicherweise wurde zoom.us fälschlich als Marken-Imitation markiert, bei GoDaddy, dem Betreiber der .us-Top-Level-Domain, eine Urheberrechtsbeschwerde eingereicht, und GoDaddy könnte die Domain daraufhin gesperrt haben.

    • Möglich, aber da MarkMonitor der Registrar von Zoom ist, gibt es auch viele andere Wege, wie ein Kommunikationsfehler zwischen MarkMonitor und GoDaddy zu so einem Ergebnis führen könnte.
      Wenn MarkMonitor erwähnt worden wäre, aber sonst keinerlei Zusammenhang bestünde, wäre die Theorie mit der Urheberrechtsbeschwerde plausibler.
    • Vielleicht erinnere ich mich falsch, aber ich meine, eine automatische Service-E-Mail bekommen zu haben, dass Zoom.us durch Zoom.com ersetzt werden soll.
      Als dieser Ausfall passierte, dachte ich, sie hätten endlich die „Umstellung“ gemacht und dabei sei etwas schiefgelaufen.
      Heute habe ich auch gehört, dass der Twitter-Account @zoom_us gelöscht wurde.
    • Wenn das stimmt, ist es ein sehr klares Beispiel dafür, warum solche automatisierten Löschmaßnahmen abgelehnt werden sollten.
      Urheberrechtsbeschwerden können auf GitHub, YouTube usw. missbraucht werden und werden es tatsächlich.
      Seit wann gilt gesellschaftlich eigentlich die Schuldvermutung als Standard?
      GoDaddy ist zwar keine Regierung, aber das ist inakzeptabel.
      Ein Mensch hätte die Domain nur drei Sekunden ansehen müssen, um zu erkennen, dass es ein False Positive ist und sie nicht gelöscht werden darf.
  • Ausfallanalyse von ThousandEyes: https://www.thousandeyes.com/blog/zoom-outage-analysis-april...

    • Der Artikel listet zwar viele Fakten auf, erklärt aber nicht, was tatsächlich passiert ist.
      Er erklärt zum Beispiel, was DNS ist, aber nicht, warum der Ausfall passiert ist, und liefert nur eine Zeitleiste samt nützlichem Kontext für Leute, die gerade erst lernen, was DNS ist und wie es funktioniert.
    • Mir war überhaupt nicht klar, dass alle DNS-Abfragen für Domains wie .us über eine einzige Root-Registry laufen, bevor sie die eigentlichen Nameserver erreichen.