1 Punkte von GN⁺ 4 시간 전 | 2 Kommentare | Auf WhatsApp teilen
  • Amazons Crowdsourcing-Dienst Mechanical Turk nimmt ab dem 30. Juli 2026 keine neuen Kunden mehr auf; nur bestehende Kunden können ihn weiter nutzen
  • AWS erklärte, die Entscheidung sei nach „sorgfältiger Prüfung“ gefallen; Verbesserungen bei Sicherheit und Verfügbarkeit würden fortgesetzt, neue Funktionen jedoch nicht mehr hinzugefügt
  • Der 2005 gestartete Dienst war ein Marktplatz, auf dem einfache Aufgaben, die sich nur schwer automatisieren lassen – etwa CAPTCHA-Bearbeitung oder das Erkennen der Stimmung in Sätzen – gegen geringe Bezahlung an Menschen vergeben wurden
  • Mechanical Turk blieb im Hintergrund der KI-Industrie präsent, zusammen mit Debatten über die Ethik von Crowdsourcing-Arbeit, der Frühphase des Facebook-Cambridge-Analytica-Skandals und den Datenannotierungs-Workflows für SageMaker AI
  • Eine Analyse aus dem Jahr 2023 zeigte, dass 33–46 % der Arbeiter Aufgaben mithilfe großer Sprachmodelle erledigten, was die Verlässlichkeit von Datenannotierung und die Notwendigkeit menschlicher Beteiligung weiter infrage stellte

Stopp für Neukunden und der verbleibende Leistungsumfang

  • Die Mechanical-Turk-Website informiert darüber, dass der Dienst ab dem 30. Juli 2026 für neue Kunden geschlossen wird
  • Die Amazon-Web-Services-Dokumentation erklärt, dass diese Entscheidung nach „sorgfältiger Prüfung“ getroffen wurde
    • Bestehende Kunden können den Dienst weiterhin normal nutzen
    • AWS investiert weiter in Verbesserungen bei Sicherheit und Verfügbarkeit von Mechanical Turk
    • Es gibt keine Pläne zur Einführung neuer Funktionen
  • Der Dienst wird nicht sofort eingestellt, aber die Aufnahme neuer Kunden und die Weiterentwicklung von Funktionen kommen zum Stillstand

Mechanical Turk zwischen menschlicher Arbeit und KI

  • Mechanical Turk war ein 2005 erstmals eingeführter Crowdsourcing-Marktplatz
    • Menschen erledigten einfache Aufgaben, die sich schwer automatisieren lassen, und erhielten dafür kleine Beträge
    • Typische Beispiele sind das Lösen von CAPTCHAs oder das Erkennen der grundlegenden Stimmung eines Satzes
  • In seiner Hochphase stand der Dienst im Zentrum von Debatten über die Ethik von Crowdsourcing-Arbeit und spielte auch in der Frühphase des Facebook-Cambridge-Analytica-Skandals eine kleine Rolle
  • Ab 2018 bündelte Amazon Mechanical Turk als Teil seines SageMaker-AI-Dienstes und positionierte es als Methode, mit der Unternehmen Daten für das Training neuronaler Netze annotieren konnten
  • Auch bei Produkten, die wie KI aussehen, tatsächlich aber durch menschliche Arbeitskraft betrieben werden, spielte Mechanical Turk die Rolle eines verborgenen Helfers
    • Das passt zur ursprünglichen Geschichte des Mechanical Turk, bei dem ein versteckter menschlicher Schachspieler eine Schachmaschine vortäuschte
  • Die Beziehung zu KI-Modellen wurde mit der Zeit noch komplexer
    • Eine Analyse von 2023 kam zu dem Schluss, dass 33–46 % der Plattform-Arbeiter große Sprachmodelle nutzten, um Aufgaben zu erledigen
    • Dieses Ergebnis führte zu Fragen nach der Verlässlichkeit der auf der Plattform annotierten Daten und danach, ob Menschen weiterhin im Loop bleiben müssen
  • Nachdem Amazons Entscheidung bekannt wurde, sagte ein Reddit-Nutzer, dass Arbeiter und Forscher die Plattform wegen Bots und Betrug bereits „vor Jahren“ verlassen hätten
    • Derselbe Nutzer prognostizierte, dass irgendwann jemand bei Amazon entscheiden werde, die Mturk-Server vollständig abzuschalten, weil deren Betrieb eine Verschwendung von Zeit und Ressourcen sei

2 Kommentare

 
xguru 3 시간 전

Ist das wohl das Ende der Ära, in der man im Internet Puppenaugen anklebt? Haha

 
GN⁺ 4 시간 전
Meinungen auf Hacker News
  • Laut einer Analyse von 2023 nutzten 33–46 % der Plattformarbeiter Large Language Models für ihre Aufgaben; inzwischen scheint die KI-Nutzung der Arbeiter so stark zugenommen zu haben, dass sie Mechanical Turk selbst sinnlos macht

    • Das könnte bedeuten, dass die Seite, die Mechanical-Turk-Ergebnisse konsumiert, keine gute Möglichkeit hat, den Wert, also die Qualität, der Resultate richtig zu messen
      Wenn man sie messen könnte, sollte es egal sein, ob ein Mensch oder ein LLM die Arbeit gemacht hat
      Wenn ein LLM sie erledigt, werden sich die Kosten grob am niedrigeren Wert aus LLM-Kosten und menschlichen Kosten für diese Aufgabe orientieren
    • Schon 2012 habe ich auf diese Weise künstliche künstliche künstliche Intelligenz gemacht, um etwas Taschengeld zu verdienen
      Schön, dass diese Lücke endlich „gepatcht“ wurde ^^
    • Es scheint keinen Grund zu geben, sich darum zu kümmern, wie die Arbeit erledigt wird
      Sie muss einfach fertig werden, und ich habe anderes zu tun
  • Ich habe vor meiner Hochzeit kurz Turk ausprobiert, um etwas Taschengeld zu verdienen, aber als Methode zum Geldverdienen war es gemessen an der Zeit viel zu ineffizient
    Selbst wenn ich einen Monat lang drangeblieben bin, kamen wohl höchstens 10–20 Dollar dabei heraus

  • Vor etwa zehn Jahren kam jemand als neuer Manager zu uns, der Mechanical Turk verwaltet hatte; schon damals galt es als Sackgasse
    Amazon Security hatte angewiesen, von dem längst nicht mehr unterstützten MySQL 4.0 auf MySQL 5.x zu aktualisieren, aber ich hörte, dass die Führung trotz Sicherheitsanforderung kaum Ressourcen dafür bereitstellte
    Bei Sicherheitsanforderungen bewegen sich normalerweise alle, noch bevor sie fragen: „Wie hoch sollen wir springen?“, aber selbst da war es so, und am Ende hat die Person es wohl selbst gemacht
    Die extrem wenigen verbliebenen Mitarbeiter waren vollständig mit riesiger technischer Schuld und KTLO-Arbeit gebunden, und auch Vorschläge, das zu beheben, scheiterten an der Ressourcenhürde

  • Vielleicht entsteht ja ein High-Value-Startup, das echte Menschen in einen Raum sperrt, sie ohne Netzwerk, Bücher oder LLM rund um die Uhr per Kamera überwacht und Human Intelligence bereitstellt

    • Bitte genießen Sie alle Aufgaben gleichermaßen
    • Zuerst sollte man sich wohl die Bedingungen ansehen, unter denen Menschen dauerhaft hochwertige Ergebnisse liefern können
    • Bei 24-stündiger Isolation ohne jegliche Reize außer Arbeit frage ich mich, ob die Halluzinationsrate steigt oder sinkt
  • Ich wusste gar nicht, dass es das noch gibt
    Früher hat es mir geholfen, die „Special Forces“-Erweiterung für Battlefield 2 zu kaufen
    Ich hätte sie mir zwar ohnehin kaufen können, aber weil ich sie mit Geld bezahlt habe, das ich in meiner Freizeit mit Mechanical Turk verdient hatte, hatte es keinen Einfluss auf mein normales Einkommen

  • Das ist vielleicht das eindeutigste Beispiel für KI automatisiert Arbeit, das ich bisher gesehen habe
    Das heißt aber keineswegs, dass die Arbeiter automatisiert wurden
    Die Arbeiter können jetzt aktuelle Modelle nutzen, um bei den vielen neuen Startups für KI-Trainingsdaten komplexere Aufgaben zu erledigen
    Turk war von Anfang an nicht für komplexere Aufgaben ausgelegt; Startups, die zum Sammeln von KI-Trainingsdaten gegründet wurden, haben einfach einen großen Teil davon übernommen

  • Das ist viel eher ein Fall davon, dass ein schlechtes Produkt durch bessere Produkte veraltet ist, als eine Geschichte von KI ersetzt Jobs
    Menschliches Labeling ist ein zweiseitiger Markt, und wie jedes Marketplace-Startup weiß: Wenn man nicht beide Seiten kontinuierlich betreut, führt Qualitätsverfall zu Abwanderung, und die Plattform gerät in eine Abwärtsspirale, in der sie sich leert
    Beim Labeling muss man einzelne Aufgaben und Ermüdungsgrenzen verstehen, dafür sorgen, dass gute und konsistente Arbeit weiter in die Pipeline kommt, und die Plattform verbessern, damit die Kundenerfahrung gut ist
    AMT wurde in all diesen Punkten völlig vernachlässigt
    Die Bezahlung war miserabel, Unehrlichkeit war weit verbreitet
    Es war einfach ein schlechtes Produkt; man muss es weder verklären noch zu einer politischen Frage machen

  • Wo soll man dann Teilnehmer für Nutzerforschung finden?

  • Schade
    Mechanical Turk funktioniert besser als jede KI

    • Es ist trotzdem KI
      Nur eben eine andere Art
    • Persönlich fand ich die MT-Qualität nie gut