Svaka web-lokacija i svaki poslužitelj koje udomljujemo prema zadanim postavkama blokiraju zlonamjerne botove i lažne indeksere. Ne trebate ništa uključivati i to vas ništa dodatno ne košta.
Što se blokira?
- Poznati zlonamjerni botovi: alati za struganje podataka, kradljivci sadržaja, alati za neželjenu poštu i skeneri ranjivosti koji se predstavljaju svojim imenom.
- Lažni indekseri: programi koji se pretvaraju da su dobro poznati indekseri, poput alata Googlebot, Bingbot, Applebot, GPTBot ili ClaudeBot, kako bi zaobišli vašu zaštitu. Zahtjev koji tvrdi da je jedan od njih, ali ne dolazi s objavljenih mrežnih adresa te tvrtke, odbija se.
Provjera se provodi dvaput: na našoj rubnoj mreži prije nego što zahtjev dosegne vaš poslužitelj, te ponovno na samom web-poslužitelju, tako da se provjerava i zahtjev koji ide izravno na vaš poslužitelj.
Što se nikada ne blokira?
Pravi, verificirani indekseri uvijek prolaze. Googlebot, Bingbot, Applebot i stvarni AI indekseri (poput alata GPTBot i ClaudeBot) prepoznaju se po tome odakle dolaze, a ne samo po imenu koje navode, tako da vaša stranica ostaje u rezultatima pretraživanja i odgovorima umjetne inteligencije.
Mogu li blokirati AI indeksere na svojoj web-lokaciji?
Da, i izbor je vaš za svaku pojedinu web-lokaciju. Otvorite Web-lokacije, odaberite stranicu, otvorite karticu CDN i pronađite Sigurnost i kontrola botova → AI indekseri:
- Bez posebnog tretmana: AI indekseri tretiraju se kao i svaki drugi posjetitelj.
- Dopusti ih: AI indekserima se dopušta pristup.
- Izazovi ih ili Blokiraj ih: AI indekseri suočavaju se s provjerom ili bivaju odbijeni na rubnoj mreži. Ove dvije opcije dolaze uz zaštitu od botova uključenu u vaš paket; zaslon prikazuje ako vaš paket to ne uključuje.
Nikada ne mijenjamo ovu postavku umjesto vas. Blokiranje lažnih botova ne utječe na to: stvarni AI indekser blokira se samo ako ga odlučite blokirati.
Odbijeno je nešto legitimno
Nadzornici dostupnosti, povratni pozivi plaćanja i SEO alati nisu pogođeni osim ako se ne pretvaraju da su jedan od gore navedenih indeksera. Ako je usluga koju koristite odbijena, otvorite tiket za podršku s vremenom i adresom s koje je došla i mi ćemo to pregledati.