ഞങ്ങൾ ഹോസ്റ്റ് ചെയ്യുന്ന ഓരോ സൈറ്റും സെർവറും മോശം ബോട്ടുകളെയും വ്യാജ ക്രോളറുകളെയും സ്ഥിരസ്ഥിതിയായി തടയുന്നു. നിങ്ങൾ ഒന്നും ഓൺ ചെയ്യേണ്ടതില്ല, ഇതിന് അധിക ചെലവുമില്ല.
എന്തൊക്കെയാണ് തടയുന്നത്?
- അറിയപ്പെടുന്ന മോശം ബോട്ടുകൾ: സ്വന്തം പേര് വെളിപ്പെടുത്തി വരുന്ന സ്ക്രാപ്പറുകൾ, ഉള്ളടക്കം മോഷ്ടിക്കുന്നവർ, സ്പാം ടൂളുകൾ, സുരക്ഷാ ദൗർബല്യങ്ങൾ പരിശോധിക്കുന്ന സ്കാനറുകൾ.
- വ്യാജ ക്രോളറുകൾ: നിങ്ങളുടെ സുരക്ഷാ സംവിധാനങ്ങളെ മറികടക്കാൻ Googlebot, Bingbot, Applebot, GPTBot അല്ലെങ്കിൽ ClaudeBot പോലുള്ള പ്രമുഖ ക്രോളറുകളാണെന്ന് നടിക്കുന്ന പ്രോഗ്രാമുകൾ. ഇതിലൊന്നാണെന്ന് അവകാശപ്പെടുകയും എന്നാൽ ആ കമ്പനിയുടെ ഔദ്യോഗിക നെറ്റ്വർക്ക് വിലാസങ്ങളിൽ നിന്ന് വരാതിരിക്കുകയും ചെയ്യുന്ന അഭ്യർത്ഥനകൾ നിരസിക്കപ്പെടും.
പരിശോധന രണ്ടുതവണ നടക്കുന്നു: അഭ്യർത്ഥന നിങ്ങളുടെ സെർവറിൽ എത്തുന്നതിന് മുമ്പ് ഞങ്ങളുടെ എഡ്ജ് നെറ്റ്വർക്കിലും, തുടർന്ന് വെബ് സെർവറിൽ തന്നെയുമായി, അതിനാൽ നിങ്ങളുടെ സെർവറിലേക്ക് നേരിട്ടെത്തുന്ന അഭ്യർത്ഥനയും പരിശോധിക്കപ്പെടും.
ഒരിക്കലും തടയാത്തത് എന്തൊക്കെയാണ്?
യഥാർത്ഥവും സ്ഥിരീകരിച്ചതുമായ ക്രോളറുകൾ എല്ലായ്പ്പോഴും കടന്നുപോകും. Googlebot, Bingbot, Applebot എന്നിവയും യഥാർത്ഥ AI ക്രോളറുകളും (GPTBot, ClaudeBot പോലുള്ളവ) അവ നൽകുന്ന പേര് മാത്രമല്ല, അവ എവിടെ നിന്നാണ് വരുന്നത് എന്ന് നോക്കിയാണ് തിരിച്ചറിയപ്പെടുന്നത്, അതിനാൽ നിങ്ങളുടെ സൈറ്റ് തിരയൽ ഫലങ്ങളിലും AI ഉത്തരങ്ങളിലും നിലനിൽക്കും.
എന്റെ സൈറ്റിൽ എനിക്ക് AI ക്രോളറുകളെ തടയാനാകുമോ?
തീർച്ചയായും, ഓരോ സൈറ്റിനുമുള്ള തീരുമാനം നിങ്ങളുടേതാണ്. സൈറ്റുകൾ തുറന്ന്, സൈറ്റ് തിരഞ്ഞെടുത്ത്, CDN ടാബ് തുറന്ന്, സുരക്ഷയും ബോട്ട് നിയന്ത്രണവും → AI ക്രോളറുകൾ എന്നത് കണ്ടെത്തുക:
- പ്രത്യേക പരിഗണനയില്ല: AI ക്രോളറുകളെ മറ്റേതൊരു സന്ദർശകനെയും പോലെ പരിഗണിക്കുന്നു.
- അനുവദിക്കുക: AI ക്രോളറുകളെ കടന്നുപോകാൻ അനുവദിക്കുന്നു.
- വെല്ലുവിളിക്കുക അല്ലെങ്കിൽ തടയുക: എഡ്ജിൽ വെച്ച് AI ക്രോളറുകൾക്ക് വെല്ലുവിളി നൽകുകയോ നിരസിക്കുകയോ ചെയ്യുന്നു. ഈ രണ്ട് ഓപ്ഷനുകളും നിങ്ങളുടെ പ്ലാനിൽ ഉൾപ്പെടുത്തിയിട്ടുള്ള ബോട്ട് സംരക്ഷണത്തിനൊപ്പം വരുന്നതാണ്; നിങ്ങളുടെ പ്ലാനിൽ ഇത് ഉൾപ്പെടുന്നില്ലെങ്കിൽ സ്ക്രീൻ അത് കാണിക്കും.
ഞങ്ങൾ നിങ്ങൾക്കായി ഈ ക്രമീകരണം ഒരിക്കലും മാറ്റില്ല. വ്യാജ ബോട്ടുകളെ തടയുന്നത് ഇതിനെ ബാധിക്കില്ല: നിങ്ങൾ തടയാൻ തിരഞ്ഞെടുത്താൽ മാത്രമേ ഒരു യഥാർത്ഥ AI ക്രോളർ തടയപ്പെടുകയുള്ളൂ.
നിയമാനുസൃതമായ ഒന്ന് നിരസിക്കപ്പെട്ടു
മുകളിൽ പറഞ്ഞ ക്രോളറുകളിലൊന്നാണെന്ന് നടിക്കുന്നില്ലെങ്കിൽ അപ്ടൈം മോണിറ്ററുകൾ, പേയ്മെന്റ് കോൾബാക്കുകൾ, SEO ടൂളുകൾ എന്നിവയെ ഇത് ബാധിക്കില്ല. നിങ്ങൾ ഉപയോഗിക്കുന്ന ഒരു സേവനം നിരസിക്കപ്പെട്ടാൽ, അത് സംഭവിച്ച സമയവും അത് വന്ന വിലാസവും ഉൾപ്പെടുത്തി ഒരു പിന്തുണ ടിക്കറ്റ് തുറക്കുക, ഞങ്ങൾ അത് പരിശോധിക്കുന്നതാണ്.