חסימת מדינות, כתובות וסורקים

אלו הן שלוש הגדרות שונות עבור שלוש בעיות שונות. ניתן להגיע אליהן מהגדרות האבטחה של האתר.

מדינות

או רשימת חסימה (כולם מורשים לבקר למעט אלו) או רשימת הרשאות (אף אחד אינו מורשה לבקר למעט אלו). מדובר במתג אחד, ומומלץ לקרוא פעמיים לפני השמירה: רשימת הרשאות המכילה מדינה אחת מורידה את האתר שלכם מהאינטרנט עבור כל השאר, דבר שהוא לעיתים בדיוק מה שאתם רוצים ובמקרים אחרים גורם לאחה"צ נוראי.

ניקוי הרשימה מסיר את כל הגבלות המדינות; אין שלב נפרד של "ביטול חסימה בכל מקום".

⚠️ רשימת הרשאות תוציא אתכם מ-Google, וזהו החלק שאנשים מפספסים. מנועי חיפוש סורקים מהכתובות שלהם — Googlebot מארצות הברית, ללא קשר למיקום המבקרים שלכם — כך שרשימת הרשאות שאינה כוללת את המדינות הללו תחסום את הסורק יחד עם כל השאר, ואתר שלא ניתן לסרוק אותו נופל מהאינדקס. זה אינו מיידי וזה אינו מובן מאליו, וזה מה שהופך את זה ליקר.

לכן אנו מאפשרים למנועי חיפוש מאומתים לעבור כברירת מחדל. השאירו את המתג הזה כפי שהוא ו-Google ו-Bing ימשיכו להגיע לאתר שלכם מכל מקום שבו הם סורקים, גם עם רשימת הרשאות המציינת מדינה אחת. תוכלו לבטל את ההחרגה אם אתם באמת לא רוצים החרגות — דבר זה מחזיר את הסיכון שלעיל בדיוק כפי שתואר, והמסך מציין זאת בעת הביצוע.

⛔ ההחרגה דורשת ספק שיכול לאמת סורק, ולא כולם יכולים. אימות פירושו בדיקה שזיהוי המבקר כ-Googlebot הוא אכן Google, על פי הכתובות שלו — ולא הסתמכות על הציטוט שלו, שכל אחד יכול להעתיק. קצה ה-Cloudflare שלנו עושה זאת. Bunny, CDN77 ו-Gcore אינם עושים זאת, ולכן בהם אין שום דבר בטוח לאפשר לעבור ואנו לא מאפשרים לדבר לעבור. בספק שאינו יכול לאמת סורקים, רשימת הרשאות נושאת את הסיכון המלא שלעיל — מסך המדינות של האתר מציין באיזה מקרה אתם נמצאים, ועליכם לקרוא אותו לפני שתסתמכו על ההחרגה. העדיפו רשימת חסימה במקרה כזה.

כתובות אינדיבידואליות

עבור מטרד ספציפי — כתובת אחת שמציפה טופס, סורק תוכן (scraper) אחד. זהו הכלי הנכון עבור חופן כתובות והכלי השגוי עבור מתקפה, שמגיעה מאלפים ומחליפה אותן מהר יותר מכפי שתוכלו להקליד. עבור מקרה כזה, הגנת ה-CDN היא מה שאתם צריכים.

סורקי SEO

סורקי SEO של צד שלישי — אלה שבונים מאגרי נתונים של קישורים חוזרים — ניתנים לחסימה באופן פרטני. אנשים עושים זאת כדי למנוע ממתחרים לקטלג את פרופיל הקישורים שלהם.

אינכם יכולים להסיר את עצמכם מהאינדקס כאן. מנועי חיפוש אינם מופיעים ברשימה לבחירה, על פי תכנון: חסימת Googlebot היא החלטה עם השלכות שחורגות בהרבה ממה שמסך זה מיועד לו, ולכן המסך לא יבצע זאת. קובץ ה-robots.txt שלכם אינו מושפע מהגדרה זו ונשאר שלכם.

⚠️ הגנה זו ספציפית לבקרה זו. לכלל המדינה שלעיל יש מנגנון הגנה משלו, אך הוא מותנה — הוא מאפשר למנועי חיפוש מאומתים לעבור כברירת מחדל, ורק במיקום שבו הספק שלכם יכול לאמת אותם. אם השתמשתם בשניהם, כלל המדינה הוא עדיין זה שעלול לעלות לכם בדירוגים שלכם, לכן בדקו מה המסך שלו מדווח במקום להניח שההחרגה בתוקף.

מה אף אחד מאלה אינו מהווה

אף אחד מהם אינו תחליף לשמירה על תוכנה מעודכנת. חסימת מדינה עוצרת את התנועה מאותה מדינה; היא אינה מתקנת את התוסף שאינו מעודכן שהתנועה ניסתה לאתר.