يحظر كل موقع وكل خادم نستضيفه الروبوتات الضارة وبرامج الزحف المزيفة افتراضيًا. لا يتعين عليكم تفعيل أي شيء، ولا يترتب على ذلك أي تكلفة إضافية.
ما الذي يتم حظره؟
- الروبوتات الضارة المعروفة: برامج كشط البيانات وسارقو المحتوى وأدوات البريد العشوائي والماسحات الضوئية للثغرات الأمنية التي تعلن عن نفسها بالاسم.
- برامج الزحف المزيفة: البرامج التي تتظاهر بأنها برنامج زحف معروف، مثل Googlebot أو Bingbot أو Applebot أو GPTBot أو ClaudeBot، لتجاوز دفاعاتكم. يتم رفض أي طلب يدعي أنه أحد هؤلاء ولكنه لا يأتي من عناوين الشبكة المنشورة الخاصة بتلك الشركة.
يتم الفحص مرتين: على شبكتنا الطرفية قبل أن يصل الطلب إلى خادمكم، ومرة أخرى على خادم الويب نفسه، لذا يتم فحص الطلب الذي ينتقل مباشرة إلى خادمكم أيضًا.
ما الذي لا يتم حظره أبدًا؟
برامج الزحف الحقيقية والمتحقق منها تعبر دائمًا. يتم التعرف على Googlebot وBingbot وApplebot وبرامج زحف الذكاء الاصطناعي الحقيقية (مثل GPTBot وClaudeBot) من خلال المكان الذي تأتي منه، وليس فقط من خلال الاسم الذي تقدمه، حتى يظل موقعكم في نتائج البحث وفي إجابات الذكاء الاصطناعي.
هل يمكنني حظر برامج زحف الذكاء الاصطناعي على موقعي؟
نعم، والخيار لكم لكل موقع. افتحوا المواقع، واختاروا الموقع، وافتحوا علامة التبويب CDN وابحثوا عن الأمان والتحكم في الروبوتات ← برامج زحف الذكاء الاصطناعي:
- لا توجد معاملة خاصة: يتم التعامل مع برامج زحف الذكاء الاصطناعي كأي زائر آخر.
- السماح لها: يُسمح لبرامج زحف الذكاء الاصطناعي بالمرور.
- تحديها أو حظرها: يتم اختبار برامج زحف الذكاء الاصطناعي أو رفضها عند الشبكة الطرفية. يأتي هذان الخياران مع حماية الروبوت المضمنة في خطتكم؛ ستوضح الشاشة ما إذا كانت خطتكم لا تتضمن ذلك.
نحن لا نغير هذا الإعداد أبدًا نيابة عنكم. لا يؤثر حظر الروبوتات المزيفة على هذا: لا يتم حظر برنامج زحف الذكاء الاصطناعي الحقيقي إلا إذا اخترتم حظره.
تم رفض شيء مشروع
لا تتأثر أدوات مراقبة وقت التشغيل وعمليات معاودة الاتصال بالدفع وأدوات SEO ما لم تتظاهر بأنها أحد برامج الزحف المذكورة أعلاه. إذا تم رفض خدمة تستخدمونها، فافتحوا تذكرة دعم تتضمن الوقت والعنوان الذي أتت منه وسننظر في الأمر.