Blokowanie krajów, adresów i crawlerów

Są to trzy różne ustawienia przeznaczone do rozwiązywania trzech różnych problemów. Dostęp do nich można uzyskać w ustawieniach bezpieczeństwa witryny.

Kraje

Do wyboru jest lista blokowanych (wszyscy mogą odwiedzać witrynę z wyjątkiem wskazanych) lub lista dozwolonych (nikt nie może odwiedzać witryny z wyjątkiem wskazanych). Jest to jeden przełącznik, nad którym warto zastanowić się dwa razy przed zapisaniem zmian: lista dozwolonych zawierająca tylko jeden kraj odcina dostęp do witryny wszystkim pozostałym, co w pewnych rzadkich sytuacjach jest dokładnie tym, czego się chce, a w innych oznacza bardzo trudne popołudnie.

Wyczyszczenie listy usuwa wszelkie ograniczenia krajowe; nie ma osobnego kroku polegającego na "odblokowaniu wszystkiego".

⚠️ Lista dozwolonych spowoduje usunięcie witryny z wyników wyszukiwania Google i to jest właśnie ten aspekt, który łatwo pominąć. Wyszukiwarki indeksują strony ze swoich własnych adresów — Googlebot ze Stanów Zjednoczonych, bez względu na to, skąd pochodzą Twoi odwiedzający — więc lista dozwolonych, która nie uwzględnia tych krajów, zablokuje robota indeksującego wraz ze wszystkimi innymi, a witryna, której nie można zindeksować, znika z indeksu. Nie dzieje się to natychmiast i nie jest od razu oczywiste, co właśnie czyni to rozwiązanie ryzykownym.

Dlatego domyślnie przepuszczamy zweryfikowane wyszukiwarki. Nie zmieniaj tego przełącznika, a Google i Bing będą nadal docierać do Twojej witryny z miejsc, z których ją indeksują, nawet w przypadku listy dozwolonych wskazującej tylko jeden kraj. Możesz wyłączyć ten wyjątek, jeśli naprawdę nie chcesz robić żadnych odstępstw — w takim przypadku ryzyko powraca dokładnie w wyżej opisanym zakresie, o czym ekran informuje podczas wprowadzania tej zmiany.

⛔ Wyjątek ten wymaga dostawcy potrafiącego zweryfikować robota indeksującego, a nie każdy z nich to potrafi. Weryfikacja oznacza sprawdzenie na podstawie adresów, czy odwiedzający podający się za Googlebot rzeczywiście jest Google — zamiast wierzyć mu na słowo, które każdy może skodować. Nasza krawędź Cloudflare radzi sobie z tym zadaniem. Bunny, CDN77 oraz Gcore już nie, więc w ich przypadku nie ma bezpiecznego sposobu na przepuszczenie ruchu i nikogo nie przepuszczamy. U dostawcy, który nie potrafi weryfikować robotów indeksujących, lista dozwolonych wiąże się z pełnym wyżej opisanym ryzykiem — ekran krajów dla danej witryny informuje, z jakim przypadkiem masz do czynienia, i należy zapoznać się z nim przed poleganiem na tym wyjątku. W takiej sytuacji lepiej skorzystać z listy blokowanych.

Poszczególne adresy

Rozwiązanie stosowane w przypadku konkretnej uciążliwości — jednego adresu zasypującego formularz lub jednego programu kopiującego treść. Jest to właściwe narzędzie dla garstki adresów i niewłaściwe w przypadku ataku, który nadchodzi z tysięcy źródeł i zmienia je szybciej, niż jesteś w stanie pisać. Do takich sytuacji odpowiednia jest ochrona oferowana przez CDN.

Roboty SEO

Zewnętrzne roboty SEO — te, które tworzą bazy danych linków zwrotnych — mogą być blokowane indywidualnie. Ludzie robią to, aby uniemożliwić konkurencji katalogowanie swojego profilu linków.

W tym miejscu nie można usunąć strony z indeksu. Z założenia wyszukiwarki nie znajdują się na liście do wyboru: zablokowanie programu Googlebot niesie za sobą konsekwencje wykraczające daleko poza przeznaczenie tego ekranu, dlatego ekran ten na to nie pozwoli. Plik robots.txt pozostaje nienaruszony przez to ustawienie i wciąż należy do Ciebie.

⚠️ Ta ochrona dotyczy wyłącznie tego elementu sterującego. Powyższa reguła dotycząca krajów posiada własne zabezpieczenie, ma ono jednak charakter warunkowy — domyślnie przepuszcza zweryfikowane wyszukiwarki i robi to tylko wtedy, gdy Twój dostawca potrafi je zweryfikować. Jeśli skorzystasz z obu tych rozwiązań, to reguła dotycząca krajów nadal może pozbawić Cię pozycji w rankingach, dlatego zamiast zakładać, że wyjątek jest aktywny, sprawdź informacje wyświetlane na jej ekranie.

Czym te ustawienia NIE są

Żadne z nich nie zastępuje dbania o aktualność oprogramowania. Zablokowanie kraju zatrzymuje ruch z tego kraju; nie naprawia to jednak przestarzałej wtyczki, pod kątem której ruch ten był sprawdzany.