Dijual oleh Zinn Digital
Pengikis web Python atau Node.js tersuai yang dibina untuk laman web dunia sebenar, mengendalikan persembahan JS, pertahanan anti-bot dan rangkakan berbilang halaman, dengan output CSV, JSON atau pangkalan data bersih yang dihantar dalam tempoh 2 hingga 10 hari.
Pengikis yang dibina untuk tapak sebenar, bukan demo
Alat pengekstrakan data sedia pengeluaran dibina dalam Python atau Node.js untuk katalog produk, direktori, pasaran dan aplikasi satu halaman yang dinamik. Output dihantar sebagai CSV, JSON, atau ditulis terus ke dalam pangkalan data anda.
Perkara yang diliputi
Sebab ia mampu bertahan
Banyak pengikis berfungsi sekali semasa ujian dan gagal sebaik sahaja tapak web mengubah suai markup, menyekat ejen pengguna, atau menambah lapisan perlindungan baharu. Binaan kami bergantung pada pemilih yang berdaya tahan, logik percubaan semula, proksi sandaran dan pengelogan yang jelas, jadi apabila pemilih rosak atau halaman mengembalikan ralat dan bukannya data, anda dapat melihat dengan tepat rekod mana yang gagal dan puncanya, daripada menerima baris kosong tanpa pemberitahuan.
Alat yang digunakan
Python (BeautifulSoup, Scrapy, Playwright, Selenium, Requests) dan Node.js (Puppeteer, Cheerio, Playwright, Axios) untuk pengikisan; proksi berputar dan putaran ejen pengguna serta cap jari pelayar tanpa kepala untuk kerja anti-bot; storan merentasi CSV, JSON, Excel, Google Sheets, PostgreSQL, MySQL, MongoDB, SQLite dan Airtable; penjadualan melalui cron, GitHub Actions, AWS Lambda, Vercel Cron atau Railway; infrastruktur pada Docker, penyedia VPS, AWS atau Render.
Ujian sebelum penyerahan
Setiap binaan menjalankan larian percubaan pada sampel kecil terlebih dahulu, kemudian larian penuh berserta ringkasan kejayaan dan kegagalan. Output disemak berdasarkan skema yang dijangkakan, dengan medan yang hilang, baris pendua dan ralat huraian dibenderakan sebelum penghantaran.
Pemilikan
Kod sumber dan kelayakan pengikis diserahkan sepenuhnya kepada anda semasa penghantaran akhir. Perjanjian kerahsiaan (NDA) disediakan atas permintaan untuk projek data yang sensitif atau kompetitif.
Garisan masa
Asas dihantar dalam 2 hingga 3 hari, Standard dalam 5 hingga 7 hari, dan Premium dalam 10 hari.
Perkara yang diperlukan daripada anda
Hantarkan tapak sasaran dan senarai medan, dan pengikis pratonton yang berfungsi boleh disediakan dalam tempoh 48 jam, sebelum sebarang pembayaran diperlukan, supaya anda boleh melihat data sebenar yang diekstrak daripada sasaran anda sendiri terlebih dahulu.
USD 50.99
Atau bayar €45.51 · £38.11 pada kadar hari ini — kadar dikunci apabila anda menambahkannya ke bakul anda.
Single-site, single-page scraper with clean CSV or JSON output. - Full source code + setup - One target URL scraped - Up to 10 fields extracted per item - Static HTML parsing (no JS rendering) - CSV or JSON output - Deduplication + field normalization - Basic error handling and logging - Readme - 2 revisions
Dihantar dalam masa 3 hari
Semakan disertakan: 0
USD 125.99
Atau bayar €112.45 · £94.17 pada kadar hari ini — kadar dikunci apabila anda menambahkannya ke bakul anda.
Multi-page crawl with pagination, JS rendering and anti-bot handling. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - 3 revisions
Dihantar dalam masa 7 hari
Semakan disertakan: 0
USD 375.99
Atau bayar €335.60 · £281.04 pada kadar hari ini — kadar dikunci apabila anda menambahkannya ke bakul anda.
Full data pipeline with scheduling, database output, monitoring and dashboard. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - Priority delivery slot - Unlimited fields + custom schema mapping - Database output — PostgreSQL, MySQL, MongoDB, or SQLite - Scheduled runs — cron, GitHub Actions, AWS Lambda or Vercel - Cron Change detection between runs (new / updated / removed records) - Login-gated content support (session handling, form submission) - CAPTCHA-aware flow (manual-solve integration or third-party solver) - Docker-based deployment - Monitoring dashboard or Slack/email alerts on failure - Loom walkthrough of the full pipeline - 30 days post-delivery support - 5 revisions
Dihantar dalam masa 10 hari
Semakan disertakan: 0
Tiada akaun diperlukan terlebih dahulu — akaun anda dibuat semasa pembayaran. Kami memegang wang tersebut sehingga anda menerima hasil kerja.
Dalam kebanyakan kes, ya. Kami menggabungkan penggiliran proksi, variasi ejen pengguna, pendikit dan pemaparan pelayar tanpa kepala untuk melepasi sekatan biasa. Laman yang menjalankan perkhidmatan perlindungan yang lebih ketat boleh meningkatkan kos, jadi kami menyemak sasaran terlebih dahulu dan memberitahu anda sama ada ia sesuai dengan harga standard atau memerlukan sebut harga tersuai.
Mengikis (scraping) halaman yang tersedia secara umum pada kebiasaannya dibenarkan di kebanyakan tempat, namun ia bergantung pada terma tapak, data yang terlibat dan tujuan penggunaan anda. Kami hanya bekerja dengan halaman awam, tidak memintas sekatan berbayar (paywalls), mengelak daripada mengumpul data peribadi, dan tidak akan melanggar terma anti-pengikisan yang jelas tanpa kelulusan bertulis serta pelepasan undang-undang daripada anda.
Struktur halaman sememangnya boleh berubah, dan akibatnya pemilih mungkin berhenti berfungsi. Setiap pengikis menyertakan pengelogan ralat berstruktur supaya anda dimaklumkan sebaik sahaja sesuatu medan berhenti memulangkan data. Standard dan Premium menambah ciri ketahanan seperti pemilih sandaran dan amaran untuk mengehadkan gangguan, dan kami menampung sebarang pembetulan berkaitan reka letak secara percuma dalam tempoh 14 hari selepas penyerahan.
Ya, menggunakan Puppeteer, Playwright atau Selenium untuk mengendalikan aplikasi satu halaman, lazy loading dan tatalan tanpa henti. Ini adalah sebahagian daripada pakej Standard dan Premium; Basic terhad kepada HTML statik sahaja.
Ya, untuk akaun yang anda miliki atau diberi kebenaran untuk digunakan. Pengendalian sesi, pengurusan kuki dan penyerahan borang disertakan dengan Premium. Kongsi sebarang kelayakan melalui saluran yang selamat; kami tidak menyimpannya melebihi tempoh projek.
Kami menawarkan dua pendekatan: jeda penyelesaian manual dengan anda campur tangan, atau perkhidmatan penyelesaian CAPTCHA pihak ketiga atas tanggungan kos anda sendiri. Ini terbina dalam Premium dan boleh ditambahkan pada Standard.
Ya, Premium menyokong larian berjadual melalui cron, GitHub Actions, AWS Lambda atau Vercel Cron. Anda memilih kekerapan, sama ada setiap hari, mingguan, bulanan atau selang masa lain, dan setiap larian merekodkan keputusannya dengan makluman kegagalan pilihan.
Pengendalian had kadar adalah standard: pendikit permintaan, penangguhan eksponen pada respons 429 dan 503, dan penalaan keserentakan untuk kekal dalam had. Kedua-dua Standard dan Premium merangkumi logik ini sepenuhnya.
Ya, pemasukan terus ke dalam PostgreSQL, MySQL, MongoDB, SQLite atau Airtable disokong. Output pangkalan data adalah sebahagian daripada Premium, manakala Standard merangkumi CSV, JSON dan Google Sheets.
Tiada had siling yang tetap; ia bergantung pada had kadar laman web dan saiz kolam proksi yang tersedia. Kami pernah menjalankan tugas yang mengekstrak lebih daripada 100,000 rekod selama beberapa hari. Untuk perayauan yang sangat besar, kami mencadangkan penggiliran proksi dan pelaksanaan berjadual bagi mengelakkan ambang pengesanan.
Anda menerima pemilikan penuh pada penyerahan akhir, termasuk kod sumber, kelayakan, konfigurasi penggunaan dan semua data yang dikikis, tanpa sekatan pelesenan, yuran berterusan atau ikatan perkhidmatan.
Setiap pengikis dijalankan terlebih dahulu pada sampel kecil, kemudian larian lengkap. Output disemak dengan skema yang dijangkakan, dan medan yang hilang, baris pendua serta ralat penghuraian dibenderakan sebelum penyerahan, bersama-sama dengan log ralat dan ringkasan kejayaan serta kegagalan.