- Schnelle und zuverlässige Bibliothek zum Erstellen von Crawlern für Node.js
- Puppeteer & Playwright (Headless-Browser-Crawling) + CheerIO/JSDOM (Raw-HTTP-Crawling)
- Ahmt Browser-Header und TLS-Fingerprints nach, damit der Traffic wie echter Datenverkehr aussieht
- Durch automatisierte Proxy-Rotation für großflächige Skalierung geeignet
- Aufgaben werden über Queues verarbeitet, und Dateien, Screenshots, JSON-Ergebnisse usw. lassen sich einfach in Dateien oder einer DB speichern
Noch keine Kommentare.