مباع بواسطة Zinn Digital
أدوات كشط ويب مخصصة مبنية بلغة Python أو Node.js للمواقع الواقعية، تتعامل مع تصيير JS، ودفاعات مكافحة البوتات، وتصفح الصفحات المتعددة، مع مخرجات نظيفة بتنسيق CSV أو JSON أو قواعد البيانات يتم تسليمها خلال يومين إلى 10 أيام.
أدوات استخراج بيانات مبنية للمواقع الحقيقية، وليست للعروض التوضيحية
أدوات استخراج البيانات الجاهزة للإنتاج مبنية بلغة Python أو Node.js لكتالوجات المنتجات، والأدلة، والأسواق الإلكترونية، وتطبيقات الصفحة الواحدة الديناميكية. وتصل المخرجات بصيغة CSV أو JSON، أو تُكتب مباشرة في قاعدة بياناتكم.
ما تشمله الخدمة
لماذا تُثبت كفاءتها
تعمل العديد من أدوات جمع البيانات مرة واحدة فقط أثناء الاختبار ثم تفشل بمجرد أن يغير الموقع ترميزه، أو يحظر وكيل المستخدم، أو يضيف طبقات حماية جديدة. تعتمد عمليات البناء على محددات مرنة، ومنطق إعادة المحاولة، والوكيل البديل، وتسجيل دقيق للبيانات؛ لذلك عندما يتعطل محدد أو ترجع الصفحة خطأً بدلاً من البيانات، ترى بدقة السجلات التي فشلت وسبب ذلك، بدلاً من الحصول على صفوف فارغة دون تنبيه.
الأدوات المستخدمة
Python (BeautifulSoup، وScrapy، وPlaywright، وSelenium، وRequests) وNode.js (Puppeteer، وCheerio، وPlaywright، وAxios) لجمع البيانات؛ ووكلاء التدوير وتدوير وكيل المستخدم بالإضافة إلى البصمة الرقمية للمتصفحات بدون واجهة رسومية للتعامل مع أنظمة مكافحة الروبوتات؛ والتخزين عبر CSV، وJSON، وExcel، وGoogle Sheets، وPostgreSQL، وMySQL، وMongoDB، وSQLite، وAirtable؛ والجدولة من خلال cron، أو GitHub Actions، أو AWS Lambda، أو Vercel Cron، أو Railway؛ والبنية التحتية على Docker، أو مزودي VPS، أو AWS، أو Render.
الاختبار قبل التسليم
يخضع كل بناء أولاً لتشغيل تجريبي على عينة صغيرة، ثم لتشغيل كامل مع ملخص للنجاح والفشل. ويتم فحص المخرجات مقابل المخطط المتوقع، مع تحديد الحقول المفقودة والصفوف المكررة وأخطاء التحليل قبل التسليم.
الملكية
تنتقل الشفرة المصدرية وبيانات اعتماد أداة جمع البيانات بالكامل إليكم عند التسليم النهائي. تتوفر اتفاقية عدم إفصاح عند الطلب للمشاريع ذات البيانات الحساسة أو التنافسية.
الجداول الزمنية
يتم تسليم باقة Basic خلال يومين إلى 3 أيام، وباقة Standard خلال 5 إلى 7 أيام، وباقة Premium خلال 10 أيام.
ما هو مطلوب منكم
أرسلوا الموقع المستهدف وقائمة الحقول، ويمكن تجهيز أداة استخراج تجريبية تعمل خلال 48 ساعة، وذلك قبل طلب أي دفعة مالية، حتى تتمكنوا من معاينة بيانات حقيقية مستخرجة من هدفكم أولاً.
50.99 US$
أو ادفع 45.52 € · 38.12 UK£ بالسعر الحالي — يتم تثبيت السعر عند إضافته إلى سلتك.
Single-site, single-page scraper with clean CSV or JSON output. - Full source code + setup - One target URL scraped - Up to 10 fields extracted per item - Static HTML parsing (no JS rendering) - CSV or JSON output - Deduplication + field normalization - Basic error handling and logging - Readme - 2 revisions
تُسلم في 3 أيام
الإصدارات المتضمنة: 0
125.99 US$
أو ادفع 112.47 € · 94.19 UK£ بالسعر الحالي — يتم تثبيت السعر عند إضافته إلى سلتك.
Multi-page crawl with pagination, JS rendering and anti-bot handling. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - 3 revisions
تُسلم في 7 أيام
الإصدارات المتضمنة: 0
375.99 US$
أو ادفع 335.65 € · 281.09 UK£ بالسعر الحالي — يتم تثبيت السعر عند إضافته إلى سلتك.
Full data pipeline with scheduling, database output, monitoring and dashboard. - Full source code + setup - One target URL scraped - Static HTML parsing (no JS rendering) - Deduplication + field normalization - Basic error handling and logging - Readme - Structured error log + retry queue - Multi-page crawl with pagination support - JavaScript-rendered pages (Puppeteer or Playwright) - Anti-bot handling — UA rotation, headers, request throttling - Proxy rotation support - Rate-limit compliance with backoff on 429/503 - Up to 25 fields per item - Unlimited records - Output to CSV, JSON, or Google Sheets - Priority delivery slot - Unlimited fields + custom schema mapping - Database output — PostgreSQL, MySQL, MongoDB, or SQLite - Scheduled runs — cron, GitHub Actions, AWS Lambda or Vercel - Cron Change detection between runs (new / updated / removed records) - Login-gated content support (session handling, form submission) - CAPTCHA-aware flow (manual-solve integration or third-party solver) - Docker-based deployment - Monitoring dashboard or Slack/email alerts on failure - Loom walkthrough of the full pipeline - 30 days post-delivery support - 5 revisions
تُسلم في 10 أيام
الإصدارات المتضمنة: 0
لا حاجة لإنشاء حساب مسبقًا — يتم إنشاء حسابكم عند الدفع. نحتفظ بالمبلغ حتى توافقوا على العمل.
في كثير من الحالات، نعم. نحن نجمع بين تدوير البروكسي، وتغيير وكيل المستخدم، وتحديد المعدل، وعرض المتصفح بلا واجهة لتجاوز عمليات الحظر الشائعة. يمكن للمواقع التي تستخدم خدمات حماية أكثر صرامة أن ترفع التكلفة، لذلك نقوم بمراجعة الهدف أولاً وإخباركم بما إذا كان يناسب التسعير القياسي أو يحتاج إلى عرض أسعار مخصص.
يُعد جمع البيانات من الصفحات المتاحة للعامة مسموحًا به بشكل عام في معظم الأماكن، على الرغم من أنه يعتمد على شروط الموقع، والبيانات المعنية، واستخدامكم المقصود. نحن نعمل فقط مع الصفحات العامة، ولا نتجاوز جدران الدفع، ونتجنب جمع البيانات الشخصية، ولن ننتهك الشروط الصريحة المانعة لجمع البيانات دون موافقتكم المكتوبة وإذنكم القانوني.
تتغير هياكل الصفحات بالفعل، وقد تتوقف المحددات عن العمل نتيجة لذلك. تتضمن كل أداة سحب بيانات تسجيلاً مهيكلاً للأخطاء حتى يتم إخطاركم بمجرد توقف أحد الحقول عن إرجاع البيانات. تضيف باقتا Standard وPremium ميزات للمرونة مثل المحددات الاحتياطية والتنبيهات للحد من الأعطال، ونحن نغطي أي إصلاحات متعلقة بالتخطيط مجاناً خلال الـ 14 يوماً التالية للتسليم.
نعم، باستخدام Puppeteer أو Playwright أو Selenium للتعامل مع تطبيقات الصفحة الواحدة والتحميل الكسول والتمرير اللانهائي. هذا جزء من باقتي Standard وPremium؛ تقتصر باقة Basic على HTML الثابت فقط.
نعم، للحسابات التي تملكونها أو المصرح لكم باستخدامها. إدارة الجلسات وإدارة ملفات تعريف الارتباط وإرسال النماذج مشمولة في باقة Premium. يُرجى مشاركة أي بيانات اعتماد عبر قناة آمنة؛ فنحن لا نحتفظ بها بعد انتهاء المشروع.
نحن نقدم نهجين: إيقاف مؤقت للحل اليدوي حيث تتدخل بنفسك، أو خدمة تابعة لجهة خارجية لحل رموز CAPTCHA على نفقتك الخاصة. هذه الميزة مدمجة في Premium ويمكن إضافتها إلى Standard.
نعم، يدعم Premium عمليات التشغيل المجدولة عبر cron أو GitHub Actions أو AWS Lambda أو Vercel Cron. تختارون التكرار، سواء كان يوميًا أو أسبوعيًا أو شهريًا أو وفق وتيرة أخرى، وتُسجَّل نتائج كل عملية تشغيل مع تنبيهات اختيارية عند الفشل.
تعد معالجة حدود المعدل قياسية: تنظيم الطلبات، والتراجع الأسي عند الاستجابتين 429 و503، وضبط التزامن للبقاء ضمن الحدود المسموح بها. تتضمن كل من باقتي Standard وPremium هذا المنطق بالكامل.
نعم، يتم دعم عمليات الإدراج المباشر في PostgreSQL أو MySQL أو MongoDB أو SQLite أو Airtable. يعتبر إخراج قاعدة البيانات جزءًا من Premium، بينما يغطي Standard تنسيقات CSV وJSON وGoogle Sheets.
لا يوجد سقف محدد؛ فالأمر يعتمد على حدود معدل الطلبات الخاصة بالموقع وحجم مجمع خوادم البروكسي المتاح. لقد قمنا بتشغيل مهام استخرجت ما يزيد بكثير عن 100,000 سجل على مدار عدة أيام. بالنسبة لعمليات الزحف الكبيرة جدًا، نقترح تدوير خوادم البروكسي والتشغيل المجدول لتجنب تجاوز حدود الاكتشاف.
تحصلون على الملكية الكاملة عند التسليم النهائي، بما في ذلك الكود المصدري وبيانات الاعتماد وتكوين النشر وجميع البيانات المستخرجة، دون أي قيود ترخيص أو رسوم جارية أو قيود التزام.
يتم تشغيل كل أداة كشط أولاً على عينة صغيرة، ثم تشغيلها بالكامل. ويتم التحقق من المخرجات مقابل المخطط المتوقع، مع تحديد الحقول المفقودة والصفوف المكررة وأخطاء التحليل قبل التسليم، جنباً إلى جنب مع سجل الأخطاء وملخص لعمليات النجاح والفشل.