נמכר על ידי Zinn Digital
מגרדי רשת מותאמים אישית ב-Python או ב-Node.js שנבנו עבור אתרים אמיתיים, המתמודדים עם רינדור JS, הגנות מפני בוטים וסריקת עמודים מרובים, עם פלט נקי בפורמט CSV, JSON או מסד נתונים הנמסר בתוך 2 עד 10 ימים.
סקרייפרים שנבנו עבור אתרים אמיתיים, לא להדגמות
כלי חילוץ נתונים המוכנים לשימוש בסביבת ייצור (production) נבנים ב-Python או ב-Node.js עבור קטלוגי מוצרים, מדריכים (directories), זירות מסחר ואפליקציות עמוד יחיד (SPA) דינמיות. הפלט מתקבל כ-CSV, כ-JSON, או נכתב ישירות לתוך מסד הנתונים שלכם.
מה מכוסה
למה זה מחזיק מעמד
מגרדי נתונים רבים עובדים פעם אחת במהלך בדיקות ונכשלים ברגע שאתר משנה את מבנה הדף שלו, חוסם מזהה משתמש או מוסיף שכבות הגנה חדשות. תהליכי הבנייה מסתמכים על בוררים עמידים, מנגנון ניסיונות חוזרים, גיבוי שרתי פרוקסי ורישום יומנים ברור, כך שכאשר בורר נשבר או שדף מחזיר שגיאה במקום נתונים, אתם רואים בדיוק אילו רשומות נכשלו ומדוע, במקום לקבל שורות ריקות ללא התראה.
כלים בשימוש
Python (BeautifulSoup, Scrapy, Playwright, Selenium, Requests) ו-Node.js (Puppeteer, Cheerio, Playwright, Axios) עבור גירוד נתונים; שרתי פרוקסי מתחלפים ותחלופת מזהי משתמש לצד טביעת אצבע של דפדפן ללא ממשק עבור עבודה מול מנגנוני מניעת בוטים; אחסון באמצעות CSV, JSON, Excel, Google Sheets, PostgreSQL, MySQL, MongoDB, SQLite ו-Airtable; תזמון באמצעות cron, GitHub Actions, AWS Lambda, Vercel Cron או Railway; תשתית ב-Docker, ספקי VPS, AWS או Render.
בדיקות לפני מסירה
כל גרסת בנייה מריצה תחילה הרצה יבשה על מדגם קטן, ולאחר מכן הרצה מלאה עם סיכום הצלחות וכשלונות. הפלט נבדק מול הסכמה הצפויה, כאשר שדות חסרים, שורות כפולות ושגיאות פענוח מסומנים לפני המסירה.
בעלות
קוד המקור ופרטי הגישה של המגרד מועברים במלואם אליכם עם המסירה הסופית. הסכם סודיות זמין לפי דרישה עבור פרויקטים של נתונים רגישים או תחרותיים.
לוחות זמנים
חבילת Basic נמסרת תוך 2 עד 3 ימים, Standard תוך 5 עד 7 ימים, ו-Premium תוך 10 ימים.
מה נדרש מכם
שלחו את אתר היעד ואת רשימת השדות, וכלי חילוץ פעיל לתצוגה מקדימה יוכל להיות מוכן בתוך 48 שעות, לפני שיידרש תשלום כלשהו, כדי שתוכלו לראות תחילה נתונים אמיתיים שחולצו מהיעד שלכם.
50.99 $
או שלמו 45.53 € · 38.13 £ בשער של היום — השער ננעל כאשר אתם מוסיפים אותו לסל שלכם.
Single-site, single-page scraper with clean CSV or JSON output. - Full source code + setup - One target URL scraped - Up to 10 fields extracted per item - Static HTML parsing (no JS rendering) - CSV or JSON output - Deduplication + field normalization - Basic error handling and logging - Readme - 2 revisions
מוּשָׂ / 3 ימים
גרסאות כלולות: 0
125.99 $
או שלמו 112.49 € · 94.21 £ בשער של היום — השער ננעל כאשר אתם מוסיפים אותו לסל שלכם.
Multi-page crawl with pagination, JS rendering and anti-bot handling. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - 3 revisions
מוּשָׂ / 7 ימים
גרסאות כלולות: 0
375.99 $
או שלמו 335.70 € · 281.14 £ בשער של היום — השער ננעל כאשר אתם מוסיפים אותו לסל שלכם.
Full data pipeline with scheduling, database output, monitoring and dashboard. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - Priority delivery slot - Unlimited fields + custom schema mapping - Database output — PostgreSQL, MySQL, MongoDB, or SQLite - Scheduled runs — cron, GitHub Actions, AWS Lambda or Vercel - Cron Change detection between runs (new / updated / removed records) - Login-gated content support (session handling, form submission) - CAPTCHA-aware flow (manual-solve integration or third-party solver) - Docker-based deployment - Monitoring dashboard or Slack/email alerts on failure - Loom walkthrough of the full pipeline - 30 days post-delivery support - 5 revisions
מוּשָׂ / 10 ימים
גרסאות כלולות: 0
אין צורך בחשבון מראש — החשבון שלכם נוצר בעת התשלום. אנחנו שומרים את הכסף עד שתאשרו את העבודה.
במקרים רבים, כן. אנו משלבים סבב פרוקסי, שינוי של user-agent, הגבלת קצב ורינדור בדפדפן headless כדי לעקוף חסימות נפוצות. אתרים המפעילים שירותי הגנה כבדים יותר עשויים לייקר את העלות, ולכן אנו בודקים תחילה את היעד ומודיעים לכם אם הוא מתאים לתמחור הרגיל או דורש הצעת מחיר מותאמת אישית.
איסוף נתונים מדפים הזמינים לציבור מותר בדרך כלל ברוב המקומות, אם כי הדבר תלוי בתנאי האתר, בנתונים המעורבים ובשימוש המיועד שלכם. אנו עובדים אך ורק עם דפים ציבוריים, איננו עוקפים חומות תשלום, נמנעים מאיסוף נתונים אישיים, ולא נפר תנאים מפורשים האוסרים על איסוף נתונים ללא אישורכם בכתב ואישור משפטי.
מבני דפים אכן משתנים, וכתוצאה מכך בוררים עשויים להפסיק לפעול. כל סורק כולל רישום שגיאות מובנה כך שתקבלו הודעה ברגע ששדה מפסיק להחזיר נתונים. Standard ו-Premium מוסיפות תכונות עמידות כגון בוררים חלופיים והתראות כדי להגביל תקלות, ואנו מכסים כל תיקון הקשור למבנה העמוד ללא תשלום במהלך 14 הימים שלאחר המסירה.
כן, באמצעות שימוש ב-Puppeteer, Playwright או Selenium כדי לטפל ביישומי עמוד בודד, בטעינה עצלה (lazy loading) ובגלילה אינסופית. תכונה זו כלולה בחבילות Standard ו-Premium; חבילת Basic מוגבלת ל-HTML סטטי בלבד.
כן, עבור חשבונות שבבעלותכם או שאתם מורשים להשתמש בהם. טיפול בהפעלות, ניהול קובצי Cookie ושליחת טפסים כלולים ב-Premium. שתפו פרטי גישה דרך ערוץ מאובטח; איננו שומרים אותם מעבר לפרויקט.
אנו מציעים שתי גישות: השהיה לפתרון ידני שבה אתם מתערבים, או שירות צד שלישי לפתרון CAPTCHA על חשבונכם. אפשרות זו מובנית ב-Premium וניתן להוסיף אותה ל-Standard.
כן, Premium תומך בהפעלות מתוזמנות באמצעות cron, GitHub Actions, AWS Lambda או Vercel Cron. אתם בוחרים את התדירות, בין אם יומית, שבועית, חודשית או במרווחי זמן אחרים, וכל הפעלה מתעדת את תוצאותיה ביומן עם התראות שגיאה אופציונליות.
הטיפול בהגבלת הקצב הוא סטנדרטי: ויסות בקשות, השהיה מעריכית בתגובות 429 ו-503, והתאמת כמות הפעולות המקבילות כדי להישאר במסגרת המגבלות. גם Standard וגם Premium כוללות לוגיקה זו במלואה.
כן, הוספה ישירה אל PostgreSQL, MySQL, MongoDB, SQLite או Airtable נתמכת. פלט מסד נתונים הוא חלק מ-Premium, בעוד ש-Standard מכסה CSV, JSON ו-Google Sheets.
אין תקרת מקסימום קבועה; הדבר תלוי במגבלות הקצב של האתר ובגודל מאגר הפרוקסי הזמין. הפעלנו משימות שמשכו הרבה מעבר ל-100,000 רשומות לאורך מספר ימים. עבור סריקות גדולות במיוחד, אנו מציעים לבצע רוטציית פרוקסי והפעלות מתוזמנות כדי להימנע מספי זיהוי.
הנכם מקבלים בעלות מלאה במסירה הסופית, כולל קוד המקור, פרטי הגישה, תצורת הפריסה וכל הנתונים שנאספו, ללא מגבלות רישוי, עמלות שוטפות או כבילה לספק.
כל סקרייפר מופעל תחילה על מדגם קטן, ולאחר מכן מתבצעת הפעלה מלאה. הפלט נבדק מול הסכמה הצפויה, ושדות חסרים, שורות כפולות ושגיאות פענוח מסומנים לפני המסירה, יחד עם יומן השגיאות וסיכום של הצלחות וכישלונות.