Memblokir negara, alamat, dan perayap

Ini adalah tiga pengaturan berbeda untuk tiga masalah yang berbeda. Akses pengaturan tersebut dari pengaturan keamanan situs.

Negara

Bisa berupa daftar blokir (semua orang boleh berkunjung kecuali ini) atau daftar izin (tidak ada yang boleh berkunjung kecuali ini). Ini adalah satu sakelar, dan ada baiknya Anda membaca dua kali sebelum menyimpan: daftar izin yang berisi satu negara akan membuat situs Anda tidak dapat diakses dari internet bagi semua orang lainnya, yang terkadang memang tepat seperti yang Anda inginkan dan jika tidak, akan menjadi hari yang buruk.

Mengosongkan daftar akan menghapus setiap pembatasan negara; tidak ada langkah "buka blokir di mana saja" yang terpisah.

⚠️ Daftar izin akan mengeluarkan Anda dari Google, dan ini adalah bagian yang sering dilewatkan orang. Mesin pencari merayapi dari alamat mereka sendiri — Googlebot dari Amerika Serikat, di mana pun pengunjung Anda berada — jadi daftar izin yang tidak menyertakan negara-negara tersebut akan memblokir perayap bersama dengan semua orang lainnya, dan situs yang tidak dapat dirayapi akan terlempar dari indeks. Ini tidak terjadi seketika dan tidak terlihat jelas, yang membuatnya berdampak fatal.

Oleh karena itu, kami mengizinkan mesin pencari terverifikasi secara default. Jangan ubah sakelar itu dan Google serta Bing akan tetap dapat mengakses situs Anda dari mana pun mereka merayap, bahkan dengan daftar izin yang mencantumkan satu negara. Anda dapat menonaktifkan pengecualian tersebut jika Anda benar-benar tidak menginginkan pengecualian apa pun — hal itu akan mengembalikan risiko di atas persis seperti yang dijelaskan, dan layar akan memperingatkannya saat Anda melakukannya.

⛔ Pengecualian ini memerlukan penyedia yang dapat memverifikasi perayap, dan tidak semuanya bisa. Memverifikasi berarti memeriksa bahwa pengunjung yang menyebut dirinya Googlebot benar-benar adalah Google, berdasarkan alamatnya — bukan sekadar memercayai klaimnya, yang dapat ditiru oleh siapa saja. Edge Cloudflare kami melakukan hal ini. Bunny, CDN77, dan Gcore tidak melakukannya, jadi pada penyedia tersebut tidak ada yang aman untuk diizinkan dan kami tidak mengizinkan apa pun lewat. Pada penyedia yang tidak dapat memverifikasi perayap, daftar izin menanggung risiko penuh di atas — layar negara situs memberi tahu Anda kasus mana yang Anda alami, dan Anda harus membacanya sebelum mengandalkan pengecualian tersebut. Lebih baik pilih daftar blokir di sana.

Alamat individual

Untuk gangguan tertentu — satu alamat yang membombardir formulir, satu scraper. Ini adalah alat yang tepat untuk segelintir alamat dan alat yang salah untuk sebuah serangan, yang datang dari ribuan alamat dan berganti lebih cepat daripada yang bisa Anda ketik. Untuk itu, perlindungan CDN adalah apa yang Anda butuhkan.

Perayap SEO

Perayap SEO pihak ketiga — yang membangun basis data backlink — dapat diblokir secara individual. Orang-orang melakukan ini untuk menjaga agar profil tautan mereka tidak dikatalogkan oleh pesaing.

Anda tidak dapat menghapus indeks Anda sendiri di sini. Mesin pencari sengaja tidak dimasukkan ke dalam daftar pilihan: memblokir Googlebot adalah keputusan dengan konsekuensi yang jauh melampaui tujuan layar ini, jadi layar ini tidak akan melakukannya. robots.txt Anda tidak tersentuh oleh pengaturan ini dan tetap menjadi milik Anda.

⚠️ Perlindungan itu khusus untuk kontrol ini. Aturan negara di atas memiliki batas pengamannya sendiri, tetapi bersifat kondisional — aturan tersebut mengizinkan mesin pencari terverifikasi secara default, dan hanya jika penyedia Anda dapat memverifikasinya. Jika Anda telah menggunakan keduanya, aturan negara tetap menjadi aturan yang dapat merugikan peringkat Anda, jadi periksa apa yang dilaporkan layarnya daripada berasumsi bahwa pengecualian tersebut sedang berlaku.

Apa yang bukan merupakan fungsi dari semua ini

Tidak satu pun dari ini yang dapat menggantikan pembaruan perangkat lunak secara berkala. Memblokir suatu negara akan menghentikan lalu lintas negara tersebut; ini tidak memperbaiki plugin kedaluwarsa yang coba diselidiki oleh lalu lintas tersebut.