Сваки сајт и сваки сервер који хостујемо подразумевано блокира злонамерне ботове и лажне пописиваче (crawlers). Не морате ништа да укључујете и то вас не кошта ништа додатно.
Шта се блокира?
- Познати злонамерни ботови: алати за преузимање садржаја (scrapers), крадљивци садржаја, спам алати и скенери рањивости који се представљају својим именом.
- Лажни пописивачи: програми који се претварају да су познати пописивачи, као што су Googlebot, Bingbot, Applebot, GPTBot или ClaudeBot, како би заобишли вашу заштиту. Захтев који тврди да је један од њих, али не долази са званично објављених мрежних адреса те компаније, бива одбијен.
Провера се врши два пута: на нашој edge мрежи пре него што захтев стигне до вашег сервера, и поново на самом веб-серверу, тако да се проверава и захтев који иде директно на ваш сервер.
Шта се никада не блокира?
Прави, верификовани пописивачи увек пролазе. Googlebot, Bingbot, Applebot и прави AI пописивачи (као што су GPTBot и ClaudeBot) препознају се по томе одакле долазе, а не само по имену које наводе, тако да ваш сајт остаје у резултатима претраге и одговорима вештачке интелигенције.
Могу ли да блокирам AI пописиваче на свом сајту?
Да, и избор је на вама за сваки појединачни сајт. Отворите Сајтови, изаберите сајт, отворите картицу CDN и пронађите Безбедност и контрола ботова → AI пописивачи:
- Без посебног третмана: AI пописивачи се третирају као и сваки други посетилац.
- Дозволи им приступ: AI пописивачима је дозвољен приступ.
- Постави изазов или Блокирај их: AI пописивачи добијају безбедносни изазов или бивају одбијени на edge мрежи. Ове две опције долазе уз заштиту од ботова укључену у ваш тарифни пакет; на екрану ће бити приказано уколико ваш пакет то не укључује.
Ми никада не мењамо ово подешавање уместо вас. Блокирање лажних ботова не утиче на њега: прави AI пописивач бива блокиран само ако ви одлучите да га блокирате.
Нешто легитимно је одбијено
Сервиси за праћење доступности, повратни позиви за плаћања и SEO алати нису погођени овим мерама, осим ако се не претварају да су један од горенаведених пописивача. Ако је услуга коју користите одбијена, отворите тикет за подршку са временом и адресом са које је захтев упућен и ми ћемо то проверити.