Блокировка стран, адресов и роботов

Это три разные настройки для трех разных проблем. Перейдите к ним из настроек безопасности сайта.

Страны

Либо список блокировки (могут заходить все, кроме указанных), либо список разрешений (не может заходить никто, кроме указанных). Это один переключатель, и его стоит перечитать дважды, прежде чем сохранять: список разрешений, содержащий одну страну, отключает ваш сайт от интернета для всех остальных, что в редких случаях именно то, что вам нужно, а в остальных — испорченный день.

Очистка списка удаляет все страновые ограничения; отдельного шага «разблокировать везде» нет.

⚠️ Список разрешений удалит вас из Google, и именно этот момент люди упускают. Поисковые роботы сканируют сайт со своих собственных адресов — Googlebot из США, где бы ни находились ваши посетители, — поэтому список разрешений, не включающий эти страны, заблокирует робота вместе со всеми остальными, а сайт, который нельзя просканировать, выпадает из индекса. Это происходит не мгновенно и неочевидно, что и делает ошибку дорогостоящей.

Поэтому мы по умолчанию пропускаем проверенные поисковые системы. Не трогайте этот переключатель, и Google со Bing продолжат обращаться к вашему сайту из мест их сканирования, даже если в списке разрешений указана всего одна страна. Вы можете отключить это исключение, если действительно не хотите никаких исключений — тогда описанный выше риск вернется в полной мере, о чем и предупреждает экран при таких действиях.

⛔ Для исключения нужен провайдер, способный проверить робота, и не все они это могут. Проверка означает сверку по адресам того, действительно ли посетитель, называющий себя Googlebot, является Google, а не слепую веру на слово, подделать которое под силу любому. Наш рубеж Cloudflare делает это. Bunny, CDN77 и Gcore — нет, поэтому в таких случаях нет безопасных способов пропустить их, и мы не пропускаем никого. У провайдера, который не может проверить роботов, список разрешений несет в себе весь описанный выше риск — экран стран для вашего сайта подскажет, в какой ситуации вы находитесь, и вам следует изучить его, прежде чем полагаться на исключение. В таком случае лучше использовать список блокировки.

Отдельные адреса

Для конкретной неприятности — один адрес бомбардирует форму, один скрапер. Это подходящий инструмент для пары адресов и неподходящий для атаки, которая идет с тысяч адресов и меняется быстрее, чем вы успеваете печатать. Для этого вам нужна защита CDN.

SEO-роботы

Сторонние SEO-роботы — те, что строят базы данных обратных ссылок — могут быть заблокированы по отдельности. Люди делают это, чтобы их профиль ссылок не каталогизировался конкурентами.

Здесь нельзя деиндексировать себя. Поисковые системы намеренно отсутствуют в списке для выбора: блокировка Googlebot — это решение с последствиями, выходящими далеко за рамки назначения данного экрана, поэтому экран делать этого не станет. Этот параметр не затрагивает ваш файл robots.txt, он остается под вашим управлением.

⚠️ Эта защита относится исключительно к этому элементу управления. У приведенного выше странового правила есть собственная система защиты, но условная — по умолчанию она пропускает проверенные поисковые системы только в том случае, если ваш провайдер может их проверить. Если вы использовали оба параметра, то именно страновое правило может стоить вам позиций в рейтинге, поэтому проверяйте отчеты на его экране, а не предполагайте, что исключение действует.

Чем все это не является

Ничто из этого не заменяет своевременное обновление программного обеспечения. Блокировка страны останавливает трафик из этой страны; это не исправляет устаревший плагин, который этот трафик вынюхивал.