અમે હોસ્ટ કરીએ છીએ તે દરેક સાઇટ અને દરેક સર્વર મૂળભૂત રીતે ખરાબ બૉટ્સ અને નકલી ક્રોલર્સને બ્લૉક કરે છે. તમારે કંઈપણ ચાલુ કરવાની જરૂર નથી, અને તેનો કોઈ વધારાનો ખર્ચ થતો નથી.
શું બ્લૉક કરવામાં આવે છે?
- જાણીતા ખરાબ બૉટ્સ: સ્ક્રેપર્સ, કન્ટેન્ટ ચોરો, સ્પામ ટૂલ્સ અને નબળાઈ સ્કેનર્સ જે પોતાનું નામ જાહેર કરે છે.
- નકલી ક્રોલર્સ: એવા પ્રોગ્રામ્સ જે તમારા સંરક્ષણને પાર કરવા માટે Googlebot, Bingbot, Applebot, GPTBot અથવા ClaudeBot જેવા જાણીતા ક્રોલર હોવાનો ઢોંગ કરે છે. આમાંથી એક હોવાનો દાવો કરતી વિનંતી જો તે કંપનીના પોતાના પ્રકાશિત નેટવર્ક સરનામાં પરથી ન આવતી હોય તો તેને નકારી કાઢવામાં આવે છે.
આ તપાસ બે વાર થાય છે: વિનંતી તમારા સર્વર સુધી પહોંચે તે પહેલાં અમારા એજ નેટવર્ક પર, અને ફરીથી વેબ સર્વર પર જ, જેથી તમારા સર્વર પર સીધી જતી વિનંતીની પણ તપાસ થાય.
શું ક્યારેય બ્લૉક કરવામાં આવતું નથી?
વાસ્તવિક, ચકાસાયેલ ક્રોલર્સ હંમેશાં આગળ વધે છે. Googlebot, Bingbot, Applebot અને વાસ્તવિક AI ક્રોલર્સ (જેમ કે GPTBot અને ClaudeBot) તેઓ ક્યાંથી આવે છે તેના દ્વારા ઓળખાય છે, માત્ર તેઓ જે નામ આપે છે તેનાથી નહીં, તેથી તમારી સાઇટ શોધ પરિણામોમાં અને AI જવાબોમાં રહે છે.
શું હું મારી સાઇટ પર AI ક્રોલર્સને બ્લૉક કરી શકું છું?
હા, અને દરેક સાઇટ માટે પસંદગી તમારી છે. સાઇટ્સ ખોલો, સાઇટ પસંદ કરો, CDN ટૅબ ખોલો અને સુરક્ષા અને બૉટ નિયંત્રણ → AI ક્રોલર્સ શોધો:
- કોઈ ખાસ સારવાર નહીં: AI ક્રોલર્સ સાથે અન્ય કોઈપણ મુલાકાતીની જેમ જ વ્યવહાર કરવામાં આવે છે.
- તેમને મંજૂરી આપો: AI ક્રોલર્સને પ્રવેશવા દેવામાં આવે છે.
- તેમને પડકારો અથવા તેમને બ્લૉક કરો: AI ક્રોલર્સને એજ પર પડકારવામાં આવે છે અથવા નકારવામાં આવે છે. આ બે વિકલ્પો તમારા પ્લાનમાં સમાવિષ્ટ બૉટ સુરક્ષા સાથે આવે છે; જો તમારા પ્લાનમાં તેનો સમાવેશ થતો નથી તો સ્ક્રીન તે બતાવે છે.
અમે તમારા માટે આ સેટિંગ ક્યારેય બદલતા નથી. નકલી બૉટ્સને બ્લૉક કરવાથી આને અસર થતી નથી: વાસ્તવિક AI ક્રોલર ત્યારે જ બ્લૉક થાય છે જો તમે તેને બ્લૉક કરવાનું પસંદ કરો છો.
કંઈક કાયદેસર નકારવામાં આવ્યું હતું
અપટાઇમ મોનિટર, ચુકવણી કૉલબૅક્સ અને SEO ટૂલ્સને જ્યાં સુધી તેઓ ઉપરોક્ત ક્રોલર્સમાંથી એક હોવાનો ઢોંગ ન કરે ત્યાં સુધી અસર થતી નથી. જો તમે ઉપયોગ કરો છો તે સેવા નકારવામાં આવે, તો સમય અને તે જે સરનામેથી આવી હતી તેની સાથે સપોર્ટ ટિકિટ ખોલો અને અમે તેની તપાસ કરીશું.