Search My Site – Open-Source-Suchmaschine für persönliche und unabhängige Websites

 (searchmysite.net)
3 Punkte von GN⁺ 2025-03-26 | 1 Kommentare | Auf WhatsApp teilen
  • Search My Site ist eine Suchmaschine, die echte Inhalte persönlicher Websites auffindbar macht und unabhängige Web-Inhalte in den Vordergrund stellt, die in großen Suchmaschinen leicht untergehen
  • Sie beschränkt den Index auf von Nutzern eingereichte und geprüfte Websites und funktioniert damit anders als ein Gesamt-Webindex, in dem Spam, SEO-Inhalte und Clickbait vermischt sind
  • Sie zeigt keine Werbung an und fördert werbefreie Ergebnisseiten, um Anreize zu reduzieren, die Spam und Überwachungskapitalismus begünstigen
  • Die Betriebskosten sollen statt durch Werbung über ein Modell mit Search-as-a-Service-Funktionen gedeckt werden, um Konflikte zwischen Nutzerbedürfnissen und Interessen von Werbetreibenden zu vermeiden
  • Das Projekt ist Open Source und macht Suche, Ranking und Indexierung transparent; da es kein werbebasiertes Modell zur Sammlung personenbezogener Daten nutzt, legt es großen Wert auf Privatsphäre

Suche mit Fokus auf persönliche Websites

  • searchmysite.net ist eine Boutique-Suchmaschine für persönliche Websites
    • Ziel sind persönliche und unabhängige Web-Inhalte, auch bekannt als Indieweb, Small Web oder Digital Gardens
  • Die öffentliche Suche kann genutzt werden, wenn man persönliche Erfahrungen von Menschen zu bestimmten Themen, Hobbys oder Interessen finden möchte
  • Ein wesentliches Unterscheidungsmerkmal ist, Marketing-Websites und Blog-Spam zu vermeiden, die einem bei großen Suchmaschinen häufig begegnen

Werbefreies Betriebsmodell

  • Der Index umfasst nicht das gesamte Internet, sondern nur von Nutzern eingereichte und geprüfte Websites
    • Das ist ein anderer Ansatz als ein Gesamt-Webindex, in dem Spam, Suchmaschinenoptimierungs-Inhalte und Clickbait vermischt sind
  • Es wird keine Werbung angezeigt, und werbefreie Suchergebnisseiten werden gefördert
    • Ziel ist es, Anreize zu beseitigen, die Spam und Überwachungskapitalismus begünstigen
  • Die Betriebskosten sollen nicht durch Werbung, sondern über Search as a Service-Funktionen in einem nachhaltigen, nutzerorientierten Modell gedeckt werden
  • Da die Struktur nicht auf der Sammlung personenbezogener Daten beruht, die an Werbetreibende verkauft werden, strebt sie für eine Suchmaschine ein hohes Maß an Privatsphäre an

Open Source und Community-Beteiligung

  • Der Dienst ist vollständig Open Source
    • Das erhöht die Transparenz von Suche, Ranking und Indexierung
    • Die Community kann sich stärker an der Verbesserung des Dienstes beteiligen

Verwandte Beiträge

1 Kommentare

 
GN⁺ 2025-03-26
Hacker-News-Kommentare

  • Wiby ist ebenfalls erwähnenswert. Es ist eine Suchmaschine, die ein „Web aus Webseiten wie in den frühen Tagen des Internets“ schaffen will. Die Indexierungskriterien laufen ungefähr auf einfaches HTML, eine Präferenz für nichtkommerzielle Sites, ein Minimum an dekorativen Scripts/CSS, keine aufdringliche Werbung, die Inhalte überdeckt, und den Ausschluss portalartiger Seiten hinaus, die nur zu überladenen Websites führen.
    https://wiby.me

    • Das verfolgt nicht dasselbe Ziel. Das Indexierungskriterium ist nicht „muss eine unabhängige/persönliche Site sein“, sondern „sollte eher einem schlichten HTTP-Dokument ähneln“.
      Search My Site will persönliche/unabhängige Websites sichtbar machen, während Wiby minimal gestylte Dokumente hervorheben will; die Ziele sind also unterschiedlich.

  • Es gibt auch Marginalia. Wurde früher schon mehrmals auf HN vorgestellt.
    https://marginalia-search.com/
    https://news.ycombinator.com/item?id=35611923
    https://news.ycombinator.com/item?id=31536626

  • Weitere verwandte Sites: https://nownownow.com/, https://omg.lol/, https://indieweb.org/, https://ooh.directory/, https://neocities.org/, https://aboutideasnow.com/, https://indieblog.page/, https://wiby.me/, https://80.style/
    Normalerweise crawle ich das Internet, um Seiten zu finden, und lege die Ergebnisse unter https://github.com/rumca-js/Internet-Places-Database ab. Persönliche Seiten bekommen den Tag „personal“.

    • Außerdem betreibe ich selbst https://minifeed.net/. Der Index wird bald 1.000 persönliche Blogs erreichen.

  • Mir gefällt die Einfachheit von https://pagefind.app/.

    • Ich nutze es in einem persönlichen Astro-Blog, und es ist großartig.
    • Interessant. Ist das eher eine ausgereiftere Variante von fuse.js? Ich habe fuse.js gerade notdürftig an einen statischen Jekyll-Blog drangehängt.
    • Ich mag Pagefind so sehr, dass ich es auf all meinen statischen Sites nutze.

  • Für ein Suchtool für persönliche Websites kommt mir Postgres wie eine etwas große Datenbank vor. Trotzdem sollte ich es einmal ausprobieren; wir brauchen mehr solcher Tools.

    • Postgres wird nur für die Site-Verwaltung verwendet. Es verfolgt Einreichungen, Review-Status, Abonnements usw.; der eigentliche Suchindex liegt in Apache Solr.
      Theoretisch könnte man die Verwaltungsdaten auch in Solr speichern, aber einen dokumentenorientierten Solr-Speicher als Master-Datenspeicher zu verwenden, wird normalerweise nicht empfohlen. Etwas Leichteres wie SQLite wäre ebenfalls möglich, aber das Tool ist mit Server-Deployment im Hinterkopf gebaut, und Postgres verbraucht auch nicht besonders viele Ressourcen.

  • Gefällt mir. Ich habe eine Stunde damit verloren, genau diese zufälligen, aber liebevoll gemachten persönlichen Websites anzuschauen, die das Web großartig gemacht haben.

    • Genau das versucht searchmysite.net zu tun: „Web-Surfen“ wieder zu einer unterhaltsamen Freizeitbeschäftigung zu machen.
      Als es vor fast drei Jahren auf HN auftauchte, sahen viele Leute das Suchfeld und hielten es für eine Google-Alternative; einige waren enttäuscht, als sie merkten, dass es das nicht ist. Heute scheint es nützlicher denn je zu sein, Wege zu finden, von Menschen erstellte Webinhalte statt KI-Inhalte zu entdecken.
      https://news.ycombinator.com/item?id=31395231

  • Solche Projekte sind wirklich gut, um interessante Blogs und wenig bekannte Sites zu finden. Ich nutze vor allem Marginalia Search.
    https://marginalia-search.com/

  • Sieht gut aus. Ironischerweise habe ich, wenn man bedenkt, wie Google die letzten zehn Jahre dominiert hat, stark das Gefühl, dass einer der großen Gewinner im KI-Bereich eine Backend-Suchmaschine sein wird.
    Die moderne Websuche ist zu sehr durch all die Tricks verunreinigt, mit denen man auf die erste Google-Seite kommt, und ein großer Teil guter Inhalte wird begraben. Jetzt, da große Modelle das Web aufrufen können, taucht diese Aufgeblähtheit auch in der KI-Suche auf. Wir brauchen eine ordentliche, datenorientierte Engine ohne Werbung, die sich stärker auf strukturierte Daten konzentriert als auf die Darstellung.

  • Beim Durchsehen des Projekts fand ich diesen Blogbeitrag zu den technischen Details der Suchmaschine am aufschlussreichsten:
    https://blog.searchmysite.net/posts/searchmysite.net-buildin...

  • Ich bin etwas verwirrt. Solr ist die Suchmaschine, aber es wird auch ein LLM-Modell geladen. Ich frage mich, was das LLM-Modell in dieser Lösung zusätzlich beiträgt.

    • Das LLM war für Experimente mit Retrieval-Augmented Generation gedacht, also einer „mit meiner Website chatten“-artigen Oberfläche, wobei Apache Solr als Vektorspeicher verwendet wurde.
      Um die Kosten im Rahmen zu halten, wurde mit einem kleinen selbst gehosteten LLM getestet, aber die Ergebnisse waren nicht gut genug, um die Funktion insgesamt auszurollen. Daher wurde das LLM deaktiviert und wird wahrscheinlich ganz entfernt.