Zinn Digital tərəfindən satılır
Real saytlar üçün hazırlanmış, JS rendering, bota qarşı müdafiə və çoxsəhifəli taranmanı idarə edən fərdiləşdirilmiş Python və ya Node.js veb-skreyping alətləri, 2-10 gün ərzində təqdim edilən təmiz CSV, JSON və ya verilənlər bazası çıxışı ilə.
Nümayişlər üçün deyil, real saytlar üçün hazırlanmış skraperlər
Məhsul kataloqları, sorğu kitabçaları, ticarət platformaları və dinamik tək səhifəli tətbiqlər üçün istehsala hazır məlumat çıxarma alətləri Python və ya Node.js ilə qurulur. Nəticələr CSV, JSON formatında təqdim edilir və ya birbaşa verilənlər bazanıza yazılır.
Nələr daxildir
Niyə etibarlıdır
Bir çox skreper sınaq zamanı bir dəfə işləyir və sayt işarələməsini dəyişən, istifadəçi agentini bloklayan və ya yeni mühafizə qatları əlavə edən kimi sıradan çıxır. Quraşdırmalar dayanıqlı selektorlara, təkrar cəhd məntiqinə, proksi ehtiyat variantına və aydın qeydiyyata əsaslanır; beləliklə, selektor sıradan çıxdıqda və ya səhifə məlumat əvəzinə xəta qaytardıqda, səssiz boş sətirlər almaq əvəzinə hansı qeydlərin və nə üçün uğursuz olduğunu dəqiq görürsünüz.
İstifadə olunan alətlər
Skrepinq üçün Python (BeautifulSoup, Scrapy, Playwright, Selenium, Requests) və Node.js (Puppeteer, Cheerio, Playwright, Axios); bot əleyhinə işlər üçün fırlanan proksilər və istifadəçi agenti rotasiyası, üstəlik qrafik interfeyssiz brauzer barmaq izi texnologiyası; CSV, JSON, Excel, Google Sheets, PostgreSQL, MySQL, MongoDB, SQLite və Airtable üzrə yaddaşda saxlama; cron, GitHub Actions, AWS Lambda, Vercel Cron və ya Railway vasitəsilə planlaşdırma; Docker, VPS təminatçıları, AWS və ya Render üzərində infrastruktur.
Təhvildən əvvəl sınaq
Hər bir quraşdırma əvvəlcə kiçik bir nümunə üzərində sınaq yürüşü, daha sonra isə uğur və uğursuzluq xülasəsi ilə tam işə salınma həyata keçirir. Çıxış gözlənilən sxemə qarşı yoxlanılır, çatışmayan sahələr, təkrarlanan sətirlər və təhlil xətaları təhvildən əvvəl qeyd olunur.
Mülkiyyət hüququ
Mənbə kodu və skreper etimadnamələri yekun təhvil zamanı tam olaraq sizə keçir. Həssas və ya rəqabətli məlumat layihələri üçün sorğu əsasında məxfi saxlanma müqaviləsi təqdim olunur.
İcra müddəti
Basic 2-3 günə, Standard 5-7 günə, Premium isə 10 günə çatdırılır.
Sizdən tələb olunanlar
Hədəf saytı və xanaların siyahısını göndərin; hər hansı ödəniş tələb olunmazdan əvvəl 48 saat ərzində işlək bir önbaxış toplayıcısı hazırlana bilər, beləliklə, ilk öncə öz hədəfinizdən çıxarılmış real məlumatları görə bilərsiniz.
$ 50.99
Və ya bugünkü məzənnə ilə € 45.52 · £ 38.12 ödəyin — onu səbətinizə əlavə etdiyiniz zaman məzənnə sabitləşir.
Single-site, single-page scraper with clean CSV or JSON output. - Full source code + setup - One target URL scraped - Up to 10 fields extracted per item - Static HTML parsing (no JS rendering) - CSV or JSON output - Deduplication + field normalization - Basic error handling and logging - Readme - 2 revisions
3 gün ərzində çatdırılır
Daxil olan düzəlişlər: 0
$ 125.99
Və ya bugünkü məzənnə ilə € 112.47 · £ 94.20 ödəyin — onu səbətinizə əlavə etdiyiniz zaman məzənnə sabitləşir.
Multi-page crawl with pagination, JS rendering and anti-bot handling. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - 3 revisions
7 gün ərzində çatdırılır
Daxil olan düzəlişlər: 0
$ 375.99
Və ya bugünkü məzənnə ilə € 335.64 · £ 281.12 ödəyin — onu səbətinizə əlavə etdiyiniz zaman məzənnə sabitləşir.
Full data pipeline with scheduling, database output, monitoring and dashboard. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - Priority delivery slot - Unlimited fields + custom schema mapping - Database output — PostgreSQL, MySQL, MongoDB, or SQLite - Scheduled runs — cron, GitHub Actions, AWS Lambda or Vercel - Cron Change detection between runs (new / updated / removed records) - Login-gated content support (session handling, form submission) - CAPTCHA-aware flow (manual-solve integration or third-party solver) - Docker-based deployment - Monitoring dashboard or Slack/email alerts on failure - Loom walkthrough of the full pipeline - 30 days post-delivery support - 5 revisions
10 gün ərzində çatdırılır
Daxil olan düzəlişlər: 0
Əvvəlcədən hesaba ehtiyac yoxdur — hesabınız ödəniş zamanı yaradılır. Siz işi qəbul edənə qədər vəsaiti saxlayırıq.
Bir çox hallarda, bəli. Ümumi bloklamaları keçmək üçün proksi rotasiyası, istifadəçi agenti (user-agent) dəyişikliyi, sürət məhdudiyyəti və qrafik interfeyssiz brauzer renderini birləşdiririk. Daha güclü mühafizə xidmətlərindən istifadə edən saytlar xərci artıra bilər, ona görə də ilk növbədə hədəfi nəzərdən keçiririk və onun standart qiymətə uyğun olub-olmadığını və ya fərdi təklif tələb edib-etmədiyini sizə bildiririk.
İctimaiyyət üçün açıq olan səhifələrdən məlumatların toplanmasına əksər yerlərdə ümumiyyətlə icazə verilir, lakin bu, saytın şərtlərindən, cəlb olunan məlumatlardan və nəzərdə tutduğunuz istifadədən asılıdır. Biz yalnız ictimai səhifələrlə işləyirik, ödəniş divarlarını (paywall) keçmirik, şəxsi məlumatların toplanmasından çəkinirik və Sizin yazılı razılığınız və hüquqi icazəniz olmadan açıq şəkildə məlumat toplanmasını qadağan edən şərtləri pozmuruq.
Səhifə strukturları dəyişir və nəticədə selektorlar işləməyini dayandıra bilər. Hər bir skreyper strukturlaşdırılmış xəta qeydiyyatını ehtiva edir, beləliklə sahə məlumat qaytarmağı dayandıran kimi sizə bildiriş göndərilir. Standard və Premium xətaları məhdudlaşdırmaq üçün ehtiyat selektorlar və xəbərdarlıqlar kimi dayanıqlılıq funksiyaları əlavə edir və biz çatdırılmadan sonrakı 14 gün ərzində tərtibatla bağlı hər hansı düzəlişləri pulsuz şəkildə qarşılayırıq.
Bəli, tək səhifəli tətbiqləri, gecikmə ilə yüklənməni və sonsuz sürüşdürməni idarə etmək üçün Puppeteer, Playwright və ya Selenium istifadə olunur. Bu, Standard və Premium paketlərinin bir hissəsidir; Basic yalnız statik HTML ilə məhdudlaşır.
Bəli, sahib olduğunuz və ya istifadə etmək səlahiyyətiniz olan hesablar üçün. Sessiyanın idarə edilməsi, kuki idarəetməsi və formanın göndərilməsi Premium paketinə daxildir. Hər hansı etimadnaməni təhlükəsiz kanal vasitəsilə paylaşın; layihədən sonra onları saxlamırıq.
Biz iki yanaşma təklif edirik: müdaxilə etdiyiniz əl ilə həlletmə fasiləsi və ya xərcləri özünüz ödəməklə üçüncü tərəfin CAPTCHA həlletmə xidməti. Bu, Premium paketinə daxildir və Standard paketinə əlavə edilə bilər.
Bəli, Premium cron, GitHub Actions, AWS Lambda və ya Vercel Cron vasitəsilə planlaşdırılmış icraları dəstəkləyir. Tezliyi siz seçirsiniz — istər gündəlik, istər həftəlik, istər aylıq, istərsə də başqa bir interval olsun — və hər bir icra nəticələrini qeydə alır, həmçinin xəta baş verdikdə istəyə bağlı bildirişlər göndərir.
Sorğu limitinin idarə edilməsi standartdır: sorğuların tənzimlənməsi, 429 və 503 cavablarında eksponensial gözləmə müddəti və limitlər daxilində qalmaq üçün paralel icranın tənzimlənməsi. Həm Standard, həm də Premium bu məntiqi tam şəkildə ehtiva edir.
Bəli, PostgreSQL, MySQL, MongoDB, SQLite və ya Airtable bazalarına birbaşa daxiletmələr dəstəklənir. Verilənlər bazası çıxışı Premium paketinə daxildir, Standard isə CSV, JSON və Google Sheets formatlarını əhatə edir.
Heç bir sabit yuxarı hədd yoxdur; bu, saytın sorğu məhdudiyyətlərindən və mövcud proksi hovuzunun həcmindən asılıdır. Biz bir neçə gün ərzində 100 000-dən xeyli çox qeyd toplayan tapşırıqlar icra etmişik. Çox böyük həcmli taramalar üçün aşkarlanma hədlərindən yayınmaq məqsədilə proksi rotasiyasını və planlaşdırılmış icraları tövsiyə edirik.
Mənbə kodu, etimadnamələr, yerləşdirmə konfiqurasiyası və toplanmış bütün məlumatlar daxil olmaqla, lisenziya məhdudiyyətləri, davamlı ödənişlər və ya asılılıq olmadan son təhvil zamanı tam mülkiyyət hüququ əldə edirsiniz.
Hər bir skraper əvvəlcə kiçik bir nümunə üzərində, sonra isə tam şəkildə işə salınır. Nəticə gözlənilən sxemlə müqayisə edilərək yoxlanılır və təhvil verilməzdən əvvəl çatışmayan sahələr, təkrarlanan sətirlər və təhlil xətaları xəta jurnalı və uğur və uğursuzluqların xülasəsi ilə birlikdə qeyd olunur.