Блокування країн, адрес і сканерів

Це три різні налаштування для трьох різних проблем. Перейдіть до них із налаштувань безпеки сайту.

Країни

Або список блокування (відвідувати можуть усі, крім них), або список дозволу (ніхто не може відвідувати, крім них). Це один перемикач, і перед збереженням його варто перечитати двічі: список дозволу, що містить лише одну країну, вимикає ваш сайт із інтернету для всіх інших, що інколи є саме тим, що вам потрібно, а інакше призводить до зіпсованого дня.

Очищення списку видаляє всі обмеження за країнами; окремого кроку «розблокувати скрізь» немає.

⚠️ Список дозволу виключить вас із Google, і це саме той нюанс, який люди пропускають. Пошукові системи сканують із власних адрес — Googlebot із Сполучених Штатів, де б не перебували ваші відвідувачі, — тому список дозволу, який не містить цих країн, заблокує сканер разом із усіма іншими, а сайт, який неможливо сканувати, випадає з індексу. Це відбувається не миттєво і неочевидно, що й робить це коштовним.

Тому ми пропускаємо перевірені пошукові системи за замовчуванням. Не чіпайте цей перемикач, і Google та Bing продовжуватимуть заходити на ваш сайт ізвідки б вони не сканували, навіть якщо у списку дозволу вказано лише одну країну. Ви можете вимкнути цей виняток, якщо щиро не хочете жодних винятків — це повертає ризик, описаний вище, у точно такому ж вигляді, про що й попереджає екран, коли ви це робите.

⛔ Для винятку потрібен провайдер, який може перевірити сканер, а це можуть робити не всі. Перевірка означає перевірку за адресами того, чи відвідувач, що називається Googlebot, справді є Google, а не віру на слово, яку кожен може скопіювати. Наш рубець Cloudflare робить це. Bunny, CDN77 і Gcore — ні, тому там немає нічого безпечного для пропуску, і ми нічого не пропускаємо. У провайдера, який не може перевіряти сканери, список дозволу несе в собі весь описаний вище ризик — екран країн сайту повідомляє вам, у якій ситуації ви перебуваєте, і ви повинні прочитати це, перш ніж покладатися на виняток. У такому разі надавайте перевагу списку блокування.

Окремі адреси

Для конкретної проблеми — одна адреса забиває форму, один скрепер. Це правильний інструмент для кількох адрес і неправильний для атаки, яка надходить із тисяч і змінює їх швидше, ніж ви можете друкувати. Для цього вам потрібен захист CDN.

SEO-сканери

Сторонні SEO-сканери — ті, що створюють бази даних зворотних посилань — можна заблокувати індивідуально. Люди роблять це, щоб конкуренти не каталогізували їхній профіль посилань.

Тут ви не можете деіндексувати себе. Пошукові системи навмисно відсутні у списку для вибору: блокування Googlebot — це рішення з наслідками, що далеко виходять за межі призначення цього екрана, тому екран цього не робитиме. Ваш файл robots.txt залишається незмінним цим налаштуванням і належить вам.

⚠️ Цей захист є специфічним для цього елемента керування. Правило країн вище має власний запобіжник, але умовний — воно пропускає перевірені пошукові системи за замовчуванням і лише там, де ваш провайдер може їх перевірити. Якщо ви використали обидва варіанти, правило країн усе одно може коштувати вам ваших позицій у рейтингу, тому перевірте, що повідомляє його екран, замість припускати, що виняток діє.

Чим усе це не є

Жодне з них не є замінником підтримки програмного забезпечення в актуальному стані. Блокування країни зупиняє трафік із цієї країни; це не виправляє застарілий плагін, який шукав цей трафік.