Ang bawat site at bawat server na aming hino-host ay humaharang sa masasamang bot at pekeng crawler bilang default. Hindi mo kailangang i-on ang anuman, at wala itong dagdag na bayad.
Ano ang hinaharang?
- Mga kilalang masasamang bot: mga scraper, magnanakaw ng content, spam tool, at vulnerability scanner na nagpapakilala sa kanilang sarili gamit ang kanilang pangalan.
- Mga pekeng crawler: mga programang nagpapanggap na isang kilalang crawler, tulad ng Googlebot, Bingbot, Applebot, GPTBot, o ClaudeBot, upang malusutan ang iyong mga depensa. Tinatanggihan ang isang kahilingang nag-aangking isa sa mga ito ngunit hindi nagmumula sa sariling inilathalang network address ng kumpanyang iyon.
Dalawang beses nagaganap ang pagsusuri: sa aming edge network bago makarating ang isang kahilingan sa iyong server, at muli sa mismong web server, kaya nasusuri rin ang isang kahilingang direktang pumupunta sa iyong server.
Ano ang hindi kailanman hinaharang?
Palaging nakakalusot ang mga totoo at na-verify na crawler. Kinikilala ang Googlebot, Bingbot, Applebot, at ang mga totoong AI crawler (tulad ng GPTBot at ClaudeBot) batay sa kanilang pinagmulan, hindi lamang sa pangalang ibinibigay nila, kaya nananatili ang iyong site sa mga resulta ng paghahanap at sa mga sagot ng AI.
Maaari ko bang i-block ang mga AI crawler sa aking site?
Oo, at nasa iyo ang desisyon para sa bawat site. Buksan ang Mga Site, piliin ang site, buksan ang tab na CDN, at hanapin ang Seguridad at pagkontrol sa bot → Mga AI crawler:
- Walang espesyal na pagtrato: tinatrato ang mga AI crawler tulad ng sinumang iba pang bisita.
- Pahintulutan sila: pinapapasok ang mga AI crawler.
- Hamunin sila o I-block sila: hinahamon o tinatanggihan ang mga AI crawler sa edge network. Kasama ang dalawang opsyong ito sa proteksyon sa bot na nakapaloob sa iyong plano; ipinapakita sa screen kung hindi ito kasama sa iyong plano.
Hindi namin kailanman babaguhin ang setting na ito para sa iyo. Hindi ito naaapektuhan ng pagharang sa mga pekeng bot: mahaharang lamang ang isang totoong AI crawler kung pipiliin mong i-block ito.
May lehitimong tinanggihan
Hindi apektado ang mga uptime monitor, payment callback, at mga SEO tool maliban kung nagpapanggap silang isa sa mga crawler sa itaas. Kung tinanggihan ang isang serbisyong iyong ginagamit, magbukas ng support ticket kasama ang oras at ang address kung saan ito nagmula at titingnan namin ito.