Google, Bing, Marginalia, Kagi, Mwmbl und ChatGPT im Vergleich

Wie schlecht ist die Qualität der Suchergebnisse?

• Es wird ein Experiment zur Qualität von Suchergebnissen vorgeschlagen. Zum Beispiel ist es wegen Content-Farmen schwierig, mit allgemeinen Begriffen wie "youtube downloader" Open-Source-Projekte wie yt-dlp zu finden.
• Viele Technikexpertinnen und -experten sind der Meinung, dass die Google-Suchergebnisse deutlich schlechter sind als noch vor zehn Jahren. Andererseits gibt es weiterhin Menschen, die behaupten, die Suchergebnisse seien nach wie vor gut.

Vergleich von Suchmaschinen und ChatGPT

• Die Suchergebnisse für drei Arten von Fragen werden mit verschiedenen Suchmaschinen und ChatGPT verglichen.
• Bei den Suchmaschinen wird der Werbeblocker deaktiviert, um die Erfahrung normaler Nutzerinnen und Nutzer nachzubilden.
• Die Qualität der Suchergebnisse wird subjektiv bewertet und unterschiedlich eingeschätzt, je nachdem, ob betrügerische Ergebnisse vorhanden sind.

Bewertung der Suchergebnisse

• Marginalia liefert manchmal brauchbare Antworten und hat den niedrigsten Anteil an betrügerischen Ergebnissen.
• Bei Mwmbl können Nutzerinnen und Nutzer das Ranking der Suchergebnisse direkt bearbeiten.
• Google neigt dazu, aktuelle YouTube-Videos zurückzugeben, die für die meisten Nutzerinnen und Nutzer kaum nützlich sind.
• ChatGPT zeigt in einem Fall eine beeindruckende Leistung, erledigt in anderen Fällen die Aufgabe angemessen oder verweigert die Beantwortung der Frage.

Probleme von Google und Bing

• Google und Bing liefern verschiedene Arten fehlerhafter Ergebnisse zurück.
• Das traditionelle Suchökosystem priorisiert eher das, was der Software-Lieferkette am meisten nützt, als das, was für die Nutzerinnen und Nutzer am vorteilhaftesten ist.

Probleme werbefinanzierter Suche

• Werbefinanzierte Suchmaschinen haben Anreize, die nicht damit übereinstimmen, den Nutzerinnen und Nutzern gute Suchergebnisse zu liefern.
• Google erschwert die Unterscheidung zwischen Werbung und tatsächlichen Suchergebnissen, was Nutzerinnen und Nutzer verwirren kann.

Das Potenzial kleiner Suchmaschinen

• Es wird die Frage aufgeworfen, ob kleine Suchmaschinen wie Marginalia Google ersetzen können oder ob mehrere kleine Suchmaschinen bessere Ergebnisse als Google liefern könnten.
• Es gibt Zweifel daran, ob der nutzerkuratierte Ansatz von Mwmbl wirksam sein wird.

Meinung von GN⁺

• Die Debatte über die Qualität von Suchergebnissen zeigt, wie stark Nutzerinnen und Nutzer von Suchmaschinen abhängig sind. Große Suchmaschinen wie Google dominieren weiterhin, doch kleine Suchmaschinen könnten in Nischenmärkten wettbewerbsfähig sein.
• Die Probleme werbefinanzierter Suchmaschinen unterstreichen, dass sie ein Hindernis dabei sein können, die Informationen zu finden, die Nutzerinnen und Nutzer wirklich wollen. Das hebt den Bedarf an alternativen Suchmaschinen zur Verbesserung der User Experience hervor.
• Dieser Artikel hilft dabei zu verstehen, wie technikaffine Nutzerinnen und Nutzer die Grenzen von Suchmaschinen überwinden und mit welchen Problemen normale Nutzerinnen und Nutzer bei Suchmaschinen konfrontiert sind.

[GN⁺]

Hacker-News-Meinungen

• Trotz Verbesserungen am Algorithmus von Marginalia Search könnte es bei den Beispielabfragen einfach Glück gewesen sein. Ich finde, dass die Ergebnisse im Vergleich zu anderen Alternativen immer noch oft hit or miss sind. Das zeigt, wie schwierig es ist, Suchqualität zu bewerten. Man muss verstehen, dass es sich um eine Keyword-Suchmaschine ohne semantisches Verständnis handelt.
• Jemand teilt seine Erfahrungen mit Kagi und schreibt, dass er nach einem Hinweis auf HN und 100 Suchanfragen ein Abo abgeschlossen hat. Bei zufälligen JS- und CSS-Suchen erscheint MDN als erstes Ergebnis, und falls nicht, kann man Spam-Seiten herunterstufen.
• Jemand gehört zu denen, die finden, dass Googles Suchergebnisse immer noch sehr gut sind. Er räumt ein, einen Werbeblocker (uBlock Origin) zu verwenden, und hat nicht vor, ihn zu deaktivieren. Er versteht zwar die Perspektive des Autors, den Werbeblocker auszuschalten, um die Suche von Nicht-Experten nachzuahmen, aber andere Tests lassen sich auch mit aktiviertem Werbeblocker durchführen. Die Erwartungen an Suchergebnisse für yt-dlp entsprechen nicht der Erfahrung von Nicht-Experten.
• Es werden Links zu verschiedenen Suchbegriffen bereitgestellt, um Kagis aktuelle Suchergebnisse mit denen für Personen ohne Account zu vergleichen.
• Jemand stimmt der Meinung des Autors zu, dass es im Web zu viel Spam gibt. Kagi leistet beim Herabstufen von Spam recht gute Arbeit, und mit speziellen Suchmodi wie "Small Web" lässt sich Spam fast vollständig entfernen.
• Suche ist schwierig, und offenbar weiß jeder, wie man Suchergebnisse manipuliert. Empfohlen werden Suchmaschinen, bei denen sich Sites effektiv anpassen lassen, etwa Kagi oder Googles programmierbare Suchmaschine. Eine Abstimmungsfunktion für Ergebnisse wirkt attraktiv, könnte aber manipuliert werden. Ein Whitelist-Ansatz hat Nachteile, dennoch wird bevorzugt, neue Domains über Social Media zu verifizieren.
• Die Behauptung, die Suchqualität habe sich verschlechtert, basiert oft auf anekdotischer Evidenz, obwohl sie überprüfbar sein sollte. Es gab Versuche, echte Belege und Kriterien vorzulegen, aber die Stichprobe ist zu klein, um daraus allgemeine Aussagen abzuleiten.
• Jemand kann nicht verstehen, warum Leute, die über ChatGPT schreiben, Version 3.5 verwenden. Im Vergleich zu GPT-4 fallen die Ergebnisse deutlich anders aus.
• Empfohlen wird, uBlacklist auszuprobieren. Das Tool kann Suchergebnisse blockieren, und Einstellungen sowie persönliche Blocklisten lassen sich mit Dropbox oder Google Drive synchronisieren. Es gibt auch ein Abo-System für Blocklisten, aber noch keinen integrierten Feed.
• Jemand stellt die Erwartung infrage, dass gute Suchergebnisse für "YouTube-Video-Download" zu yt-dlp oder zu yt-dlp mit grafischer Benutzeroberfläche führen müssten. Die meisten Menschen interessieren sich nicht für Programmierung, und daran wird deutlich, wie subjektiv Suchergebnisse sind.
• Jemand kann nicht reproduzieren, dass der Autor bei Kagi schlechte Ergebnisse erhalten hat. Für dieselben Suchbegriffe erscheinen deutlich bessere Resultate. Es wird infrage gestellt, wie der Autor überhaupt zu so schlechten Ergebnissen kam.
• Die Erwartung des Autors, dass Suchergebnisse alle denselben Linktyp zurückgeben sollten, wirkt seltsam. Eine Suche, bei der alle zehn Links auf dasselbe hinauslaufen, ist eine schlechte Suche. Suchergebnisse sollten vernünftige Vermutungen für eine gegebene Suchanfrage abdecken. Diese Sichtweise spiegelt sich auch in Metriken zur Suchmaschinenqualität wider.