- Hacker Book ist ein Projekt, das die vollständigen Daten von Hacker News von 2006 bis 2025 im SQLite-Format bewahrt
- Es besteht aus insgesamt 46.399.072 Beiträgen und 1.637 Shards und umfasst 19 Jahre HN-Geschichte
- Es ist keine serverseitige App, sondern nutzt zu WASM kompiliertes SQLite und lädt bei Bedarf nur Teile als Shards herunter, um sie anzuzeigen
- Über die Weboberfläche lassen sich Beiträge, Nutzer und Kommentare durchsuchen; sie bietet eine der Live-Struktur von HN ähnliche UI
- Zu den Top-Beiträgen gehören verschiedene Themen wie KI, Open Source, Technikgeschichte und gesellschaftliche Fragen
- Es ist eine Ressource, die Entwicklern und Forschern eine Grundlage für langfristige Datenanalysen von Internet-Technik-Communities bietet
Überblick über Hacker Book
- Hacker Book ist ein Projekt, das die vollständigen Daten von Hacker News als SQLite-Datenbank bereitstellt
- Die Daten decken den Zeitraum vom 9. Oktober 2006 bis zum 28. Dezember 2025 ab
- Insgesamt besteht es aus 46.399.072 Einträgen (items), 1.637 Shards und 8,5 GB Größe (Informationen am Seitenende)
- Die Website ist unter https://hackerbook.dosaygo.com/ erreichbar
- Die Oberfläche ähnelt Hacker News und zeigt Beitragslisten, Punkte, Anzahl der Kommentare und Autorinformationen an
Datenstruktur und Navigationsfunktionen
- Jeder Eintrag besteht aus Beitragstitel, Ursprungsdomain, Punkten, Autor, Kommentaranzahl und Erstellungszeit
- Die Navigation ist über nutzerspezifische Seiten (view=user&id=) und Detailseiten zu Beiträgen (view=item&id=) möglich
- Über den Link „More“ können seitenweise weitere Einträge geladen werden
Technische Details
- Die Daten werden im SQLite-Format bereitgestellt, sodass in einer lokalen Umgebung Abfragen und Analysen möglich sind
- Durch die Zusammenführung der vollständigen HN-Historie in einer einzigen Datenbank können Forscher oder Entwickler zeitbasierte Trendanalysen durchführen
- Die Struktur mit Datenaufteilung (Sharding) unterstützt die effiziente Verwaltung sehr großer Datenmengen
Bedeutung des Projekts
- Es fungiert als digitales Archiv zur Bewahrung von 19 Jahren angesammeltem Community-Wissen von Hacker News
- Es erhöht die Zugänglichkeit offener Daten und kann für Forschungen zur Technikgeschichte oder Community-Analysen genutzt werden
- Wie der Slogan „All the HN Belong to You“ andeutet, wird die gesamte Aufzeichnung der Community öffentlich zugänglich gemacht, damit sie jeder durchsuchen kann
Noch keine Kommentare.