3 Punkte von GN⁺ 2025-04-14 | 1 Kommentare | Auf WhatsApp teilen
  • Anubis ist eine Software, die von mehreren wichtigen Organisationen, darunter die Vereinten Nationen, verwendet wird
  • Die Software wird bei der Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, UNESCO usw. eingesetzt
  • Die Verbreitung von Anubis zeigt die Bedeutung und den Einfluss der Software
  • Der Entwickler möchte die Installation von Anubis vereinfachen und bittet dafür um finanzielle Unterstützung
  • Um das Problem des zunehmenden Bot-Traffics im Internet anzugehen, plant er, mehr Arbeit in Anubis zu investieren

Verbreitung von Anubis

  • Anubis wird von mehreren wichtigen Organisationen, darunter die Vereinten Nationen, verwendet
  • Es wird bei der Linux Kernel Mailing List, FreeBSD, SourceHut, FFmpeg, Wine, UNESCO, dem Science Olympiad Student Center, Enlightenment und GNOME's GitLab eingesetzt
  • Diese Verbreitung zeigt die Bedeutung und den Einfluss von Anubis

Sorgen und Pläne des Entwicklers

  • Er möchte die Installation von Anubis vereinfachen
  • Dafür bittet er um finanzielle Unterstützung und nimmt Spenden über Patreon entgegen
  • Um das Problem des zunehmenden Bot-Traffics im Internet anzugehen, plant er, mehr Arbeit in Anubis zu investieren
  • Falls nötig, könnte auch Personal eingestellt werden

Das Problem des Internet-Traffics

  • Es wird erwähnt, dass auf Plattformen wie YouTube der Bot-Traffic den menschlichen Traffic übersteigen könnte
  • Solche Probleme könnten im gesamten Internet auftreten
  • Es besteht das Gefühl, dass mehr Arbeit in Anubis und den damit verbundenen Technologie-Stack investiert werden muss

Persönliche Gedanken

  • Der Entwickler beschreibt die aktuelle Situation als das "surrealste Gespräch"
  • Er drückt seine Überraschung darüber aus, wie sich sein Leben verändert hat
  • Er plant, über Bluesky weitere Informationen zu teilen

1 Kommentare

 
GN⁺ 2025-04-14
Hacker-News-Kommentare
  • Es ist lustig, dass Xe etwas, das historisch als Witz oder belangloser Beitrag galt, in ein tatsächlich nützliches Produkt verwandelt hat.
  • Es ist überraschend, dass viele Websites dieses Produkt brauchen.
    • Bei einigen Git-Servern verstehe ich das Problem, dass Git-Seiten langsam werden, weil sie einen tiefen Verlauf haben, nicht gecacht sind und von langsamen Festplatten ausgeliefert werden.
  • Im Fall der UNESCO ist die Unterseite ziemlich groß und enthält Tausende von Dokumenten, besteht aber aus statischen Inhalten.
    • Ein schlecht ausgerolltes WordPress läuft auf Apache, ohne Caching, ohne Inhaltskomprimierung und ohne HTTP 2/3.
    • Man könnte es günstig auf einer kleinen Maschine betreiben, aber dafür ist Fachwissen nötig.
  • Man kann ein LLM fragen, aber wenn man nicht weiß, was man fragen soll, hilft es nicht.
  • Es dient dazu, AI-Scraping zu verhindern.
    • Anubis verwendet eine Proof-of-Work-Challenge, um sicherzustellen, dass der Client einen modernen Browser benutzt und SHA-256-Prüfsummen berechnen kann.
  • Ich finde das Anubis-Projekt cool.
    • Schade ist allerdings, dass Website-Besucher JavaScript™ aktiviert haben müssen.
    • Für statische Websites ist es nicht geeignet.
  • Es wurde eine Lösung gebaut, die auf Netzwerkebene „böse Bots“ wirksam blockiert.
    • Mithilfe der Datenbank von MaxMind sowie einer angepassten WAF und eines Reverse Proxy werden mehrere große „Big Tech / Big LLM“-Netzwerke auf ASN- (BGP-) Ebene blockiert.
  • Ich denke, die Proof-of-Work-Challenge sollte auf Protokollebene herunterverlagert werden.
    • Aus Gründen der Barrierefreiheit wäre es besser, sie als Teil von TCP zu implementieren.
  • Das Bild auf der Zwischenseite während des Wartens auf die Anubis-Prüfung ist niedlich.
    • Ich habe mich gefragt, welche Auswirkungen das auf normale Suchmaschinen hat und wie es sich mit Cloudflares Lösung zum Blockieren von AI-Crawlern vergleichen lässt.
    • Wenn man Anubis installiert und verwendet, kann es sein, dass einige Suchmaschinen die Website nicht indexieren.
    • AI-Scraper-Bots scrapen so aggressiv, dass dies eine notgedrungen gewählte Methode war.
    • In den meisten Fällen kann man sich mit Cloudflare schützen, aber wenn das nicht möglich ist, ist Anubis eine Alternative.
  • Die Bot-Erkennung braucht auf dem Handy 5 Sekunden zum Lösen.
  • Es ist wirksam, um Nutzer mit deaktiviertem JavaScript auszusperren.
  • Sieht cool aus, aber ich frage mich, wie man verhindern will, dass AI-Unternehmen die Challenge lösen, den Proof of Work abschließen und die Website trotzdem scrapen.