Verkauft von Zinn Digital
Maßgeschneiderte Python- oder Node.js-Web-Scraper für reale Websites, die JS-Rendering, Anti-Bot-Abwehrmechanismen und mehrseitige Crawls bewältigen, mit sauberer CSV-, JSON- oder Datenbank-Ausgabe, geliefert innerhalb von 2 bis 10 Tagen.
Scraper, die für echte Websites entwickelt wurden, nicht für Demos
Produktionsreife Datenextraktions-Tools werden in Python oder Node.js für Produktkataloge, Verzeichnisse, Marktplätze und dynamische Single-Page-Anwendungen erstellt. Die Ausgabe erfolgt als CSV, JSON oder wird direkt in Ihre Datenbank geschrieben.
Was abgedeckt wird
Warum es zuverlässig bleibt
Viele Scraper funktionieren beim Testen einmal und schlagen fehl, sobald eine Website ihr Markup ändert, einen User-Agent blockiert oder neue Schutzschichten hinzufügt. Die Builds stützen sich auf widerstandsfähige Selektoren, Wiederholungslogik, Proxy-Fallbacks und eine eindeutige Protokollierung. Wenn also ein Selektor bricht oder eine Seite einen Fehler anstelle von Daten zurückgibt, sehen Sie genau, welche Datensätze fehlgeschlagen sind und warum, anstatt stillschweigend leere Zeilen zu erhalten.
Verwendete Werkzeuge
Python (BeautifulSoup, Scrapy, Playwright, Selenium, Requests) und Node.js (Puppeteer, Cheerio, Playwright, Axios) für das Scraping; rotierende Proxys und User-Agent-Rotation plus Headless-Browser-Fingerprinting zur Bot-Abwehr; Speicherung in CSV, JSON, Excel, Google Sheets, PostgreSQL, MySQL, MongoDB, SQLite und Airtable; Planung über cron, GitHub Actions, AWS Lambda, Vercel Cron oder Railway; Infrastruktur auf Docker, VPS-Anbietern, AWS oder Render.
Prüfung vor der Übergabe
Jeder Build führt zuerst einen Probelauf an einer kleinen Stichprobe durch, gefolgt von einem vollständigen Durchlauf mit einer Erfolgs- und Fehlerzusammenfassung. Die Ausgabe wird mit dem erwarteten Schema abgeglichen, wobei fehlende Felder, doppelte Zeilen und Parsing-Fehler vor der Auslieferung gekennzeichnet werden.
Eigentum
Quellcode und Scraper-Zugangsdaten gehen bei der endgültigen Lieferung vollständig an Sie über. Für vertrauliche Daten oder Wettbewerbsprojekte ist auf Anfrage eine Vertraulichkeitsvereinbarung erhältlich.
Zeitpläne
Basic wird in 2 bis 3 Tagen geliefert, Standard in 5 bis 7 Tagen und Premium in 10 Tagen.
Was von Ihnen benötigt wird
Senden Sie uns die Ziel-Website und die Feldliste, und ein funktionierender Vorschau-Scraper kann innerhalb von 48 Stunden bereitgestellt werden, noch bevor eine Zahlung erforderlich ist, damit Sie zunächst echte extrahierte Daten von Ihrem eigenen Ziel sehen können.
50,99 $
Oder zahlen Sie 45,51 € · 38,11 £ zum heutigen Kurs — der Kurs wird fixiert, wenn Sie ihn in Ihren Warenkorb legen.
Single-site, single-page scraper with clean CSV or JSON output. - Full source code + setup - One target URL scraped - Up to 10 fields extracted per item - Static HTML parsing (no JS rendering) - CSV or JSON output - Deduplication + field normalization - Basic error handling and logging - Readme - 2 revisions
Geliefert in 3 Tagen
Enthaltene Revisionen: 0
125,99 $
Oder zahlen Sie 112,45 € · 94,17 £ zum heutigen Kurs — der Kurs wird fixiert, wenn Sie ihn in Ihren Warenkorb legen.
Multi-page crawl with pagination, JS rendering and anti-bot handling. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - 3 revisions
Geliefert in 7 Tagen
Enthaltene Revisionen: 0
375,99 $
Oder zahlen Sie 335,60 € · 281,04 £ zum heutigen Kurs — der Kurs wird fixiert, wenn Sie ihn in Ihren Warenkorb legen.
Full data pipeline with scheduling, database output, monitoring and dashboard. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - Priority delivery slot - Unlimited fields + custom schema mapping - Database output — PostgreSQL, MySQL, MongoDB, or SQLite - Scheduled runs — cron, GitHub Actions, AWS Lambda or Vercel - Cron Change detection between runs (new / updated / removed records) - Login-gated content support (session handling, form submission) - CAPTCHA-aware flow (manual-solve integration or third-party solver) - Docker-based deployment - Monitoring dashboard or Slack/email alerts on failure - Loom walkthrough of the full pipeline - 30 days post-delivery support - 5 revisions
Geliefert in 10 Tagen
Enthaltene Revisionen: 0
Vorab ist kein Konto erforderlich – Ihres wird beim Bezahlen erstellt. Wir verwahren das Geld, bis Sie die Arbeit abnehmen.
In vielen Fällen ja. Wir kombinieren Proxy-Rotation, User-Agent-Variationen, Drosselung und Headless-Browser-Rendering, um gängige Sperren zu umgehen. Websites mit umfangreicheren Schutzdiensten können die Kosten in die Höhe treiben, daher prüfen wir das Ziel zuerst und teilen Ihnen mit, ob es in das Standard-Preismodell passt oder ein individuelles Angebot erfordert.
Das Scraping öffentlich zugänglicher Seiten ist an den meisten Orten im Allgemeinen zulässig, hängt jedoch von den Website-Bedingungen, den betroffenen Daten und Ihrer beabsichtigten Nutzung ab. Wir arbeiten ausschließlich mit öffentlichen Seiten, umgehen keine Paywalls, vermeiden die Erfassung personenbezogener Daten und verletzen keine ausdrücklichen Anti-Scraping-Bedingungen ohne Ihre schriftliche Genehmigung und rechtliche Freigabe.
Seitenstrukturen ändern sich gelegentlich, wodurch Selektoren nicht mehr funktionieren können. Jeder Scraper enthält eine strukturierte Fehlerprotokollierung, sodass Sie benachrichtigt werden, sobald ein Feld keine Daten mehr liefert. Standard und Premium bieten Ausfallsicherheitsfunktionen wie Fallback-Selektoren und Warnmeldungen, um Ausfälle zu minimieren, und wir übernehmen alle layoutbedingten Korrekturen während der ersten 14 Tage nach der Bereitstellung kostenlos.
Ja, unter Verwendung von Puppeteer, Playwright oder Selenium zur Verarbeitung von Single-Page-Anwendungen, Lazy Loading und unendlichem Scrollen. Dies ist Teil der Pakete Standard und Premium; Basic ist auf statisches HTML beschränkt.
Ja, für Konten, die Sie besitzen oder zu deren Nutzung Sie berechtigt sind. Sitzungsverwaltung, Cookie-Verwaltung und Formularübermittlung sind in Premium enthalten. Geben Sie Anmeldedaten über einen sicheren Kanal weiter; wir bewahren diese über das Projekt hinaus nicht auf.
Wir bieten zwei Ansätze an: eine Pause zur manuellen Lösung, bei der Sie selbst eingreifen, oder einen externen Dienst zur CAPTCHA-Lösung auf eigene Kosten. Dies ist in Premium integriert und kann zu Standard hinzugefügt werden.
Ja, Premium unterstützt geplante Ausführungen über cron, GitHub Actions, AWS Lambda oder Vercel Cron. Sie wählen die Häufigkeit, ob täglich, wöchentlich, monatlich oder in einem anderen Intervall, und jede Ausführung protokolliert ihre Ergebnisse mit optionalen Fehlerbenachrichtigungen.
Die Handhabung von Ratenbegrenzungen erfolgt standardmäßig: Drosselung von Anfragen, exponentielles Backoff bei 429- und 503-Antworten sowie Anpassung der Parallelität zur Einhaltung der Grenzwerte. Sowohl Standard als auch Premium enthalten diese Logik vollständig.
Ja, direkte Einfügungen in PostgreSQL, MySQL, MongoDB, SQLite oder Airtable werden unterstützt. Die Datenbankausgabe ist Teil von Premium, während Standard CSV, JSON und Google Sheets abdeckt.
Es gibt keine feste Obergrenze; es hängt von den Ratenbegrenzungen der Website und der Größe des verfügbaren Proxy-Pools ab. Wir haben bereits Aufgaben ausgeführt, die über mehrere Tage hinweg deutlich mehr als 100.000 Datensätze abgerufen haben. Bei sehr umfangreichen Crawls empfehlen wir Proxy-Rotation und geplante Ausführungen, um Erkennungsschwellen zu vermeiden.
Sie erhalten bei der endgültigen Übergabe das vollständige Eigentum, einschließlich Quellcode, Zugangsdaten, Bereitstellungskonfiguration und aller gescrapten Daten, ohne Lizenzbeschränkungen, laufende Gebühren oder Bindungen.
Jeder Scraper wird zunächst auf einer kleinen Stichprobe ausgeführt, danach erfolgt ein vollständiger Durchlauf. Die Ausgabe wird mit dem erwarteten Schema abgeglichen, und fehlende Felder, doppelte Zeilen sowie Parsing-Fehler werden vor der Übergabe zusammen mit dem Fehlerprotokoll und einer Zusammenfassung der Erfolge und Fehlschläge markiert.