ਸਾਡੇ ਦੁਆਰਾ ਹੋਸਟ ਕੀਤੀ ਜਾਣ ਵਾਲੀ ਹਰੇਕ ਸਾਈਟ ਅਤੇ ਹਰੇਕ ਸਰਵਰ ਮੂਲ ਰੂਪ ਵਿੱਚ ਖ਼ਰਾਬ ਬੋਟਾਂ ਅਤੇ ਫ਼ਰਜ਼ੀ ਕ੍ਰਾਲਰਾਂ ਨੂੰ ਬਲੌਕ ਕਰਦਾ ਹੈ। ਤੁਹਾਨੂੰ ਕੁਝ ਵੀ ਚਾਲੂ ਕਰਨ ਦੀ ਲੋੜ ਨਹੀਂ ਹੈ, ਅਤੇ ਇਸਦਾ ਕੋਈ ਵਾਧੂ ਖ਼ਰਚ ਨਹੀਂ ਹੈ।
ਕੀ ਬਲੌਕ ਕੀਤਾ ਜਾਂਦਾ ਹੈ?
- ਜਾਣੇ-ਪਛਾਣੇ ਖ਼ਰਾਬ ਬੋਟ: ਸਕ੍ਰੈਪਰ, ਸਮੱਗਰੀ ਚੋਰੀ ਕਰਨ ਵਾਲੇ, ਸਪੈਮ ਟੂਲ ਅਤੇ ਕਮਜ਼ੋਰੀ ਸਕੈਨਰ ਜੋ ਆਪਣੇ ਨਾਮ ਦੁਆਰਾ ਆਪਣੀ ਪਛਾਣ ਦਿੰਦੇ ਹਨ।
- ਫ਼ਰਜ਼ੀ ਕ੍ਰਾਲਰ: ਉਹ ਪ੍ਰੋਗਰਾਮ ਜੋ ਤੁਹਾਡੀ ਸੁਰੱਖਿਆ ਨੂੰ ਪਾਰ ਕਰਨ ਲਈ ਕਿਸੇ ਜਾਣੇ-ਪਛਾਣੇ ਕ੍ਰਾਲਰ, ਜਿਵੇਂ ਕਿ Googlebot, Bingbot, Applebot, GPTBot ਜਾਂ ClaudeBot ਹੋਣ ਦਾ ਢੌਂਗ ਕਰਦੇ ਹਨ। ਇੱਕ ਬੇਨਤੀ ਜੋ ਇਹਨਾਂ ਵਿੱਚੋਂ ਇੱਕ ਹੋਣ ਦਾ ਦਾਅਵਾ ਕਰਦੀ ਹੈ ਪਰ ਉਸ ਕੰਪਨੀ ਦੇ ਆਪਣੇ ਪ੍ਰਕਾਸ਼ਿਤ ਨੈੱਟਵਰਕ ਪਤਿਆਂ ਤੋਂ ਨਹੀਂ ਆਉਂਦੀ, ਉਸਨੂੰ ਅਸਵੀਕਾਰ ਕਰ ਦਿੱਤਾ ਜਾਂਦਾ ਹੈ।
ਜਾਂਚ ਦੋ ਵਾਰ ਹੁੰਦੀ ਹੈ: ਬੇਨਤੀ ਤੁਹਾਡੇ ਸਰਵਰ ਤੱਕ ਪਹੁੰਚਣ ਤੋਂ ਪਹਿਲਾਂ ਸਾਡੇ ਐੱਜ ਨੈੱਟਵਰਕ 'ਤੇ, ਅਤੇ ਦੁਬਾਰਾ ਵੈੱਬ ਸਰਵਰ 'ਤੇ ਹੀ, ਇਸ ਲਈ ਸਿੱਧੇ ਤੁਹਾਡੇ ਸਰਵਰ 'ਤੇ ਜਾਣ ਵਾਲੀ ਬੇਨਤੀ ਦੀ ਵੀ ਜਾਂਚ ਕੀਤੀ ਜਾਂਦੀ ਹੈ।
ਕੀ ਕਦੇ ਵੀ ਬਲੌਕ ਨਹੀਂ ਕੀਤਾ ਜਾਂਦਾ?
ਅਸਲ, ਪ੍ਰਮਾਣਿਤ ਕ੍ਰਾਲਰਾਂ ਨੂੰ ਹਮੇਸ਼ਾ ਲੰਘਣ ਦਿੱਤਾ ਜਾਂਦਾ ਹੈ। Googlebot, Bingbot, Applebot ਅਤੇ ਅਸਲ AI ਕ੍ਰਾਲਰਾਂ (ਜਿਵੇਂ ਕਿ GPTBot ਅਤੇ ClaudeBot) ਨੂੰ ਉਹਨਾਂ ਦੇ ਆਉਣ ਦੇ ਸਥਾਨ ਤੋਂ ਪਛਾਣਿਆ ਜਾਂਦਾ ਹੈ, ਨਾ ਕਿ ਸਿਰਫ਼ ਉਹਨਾਂ ਵੱਲੋਂ ਦਿੱਤੇ ਗਏ ਨਾਮ ਤੋਂ, ਤਾਂ ਜੋ ਤੁਹਾਡੀ ਸਾਈਟ ਖੋਜ ਨਤੀਜਿਆਂ ਅਤੇ AI ਜਵਾਬਾਂ ਵਿੱਚ ਬਣੀ ਰਹੇ।
ਕੀ ਮੈਂ ਆਪਣੀ ਸਾਈਟ 'ਤੇ AI ਕ੍ਰਾਲਰਾਂ ਨੂੰ ਬਲੌਕ ਕਰ ਸਕਦਾ ਹਾਂ?
ਹਾਂ, ਅਤੇ ਹਰੇਕ ਸਾਈਟ ਲਈ ਚੋਣ ਤੁਹਾਡੀ ਹੈ। ਸਾਈਟਾਂ ਖੋਲ੍ਹੋ, ਸਾਈਟ ਚੁਣੋ, CDN ਟੈਬ ਖੋਲ੍ਹੋ ਅਤੇ ਸੁਰੱਖਿਆ ਅਤੇ ਬੋਟ ਕੰਟਰੋਲ → AI ਕ੍ਰਾਲਰ ਲੱਭੋ:
- ਕੋਈ ਵਿਸ਼ੇਸ਼ ਵਿਵਹਾਰ ਨਹੀਂ: AI ਕ੍ਰਾਲਰਾਂ ਨਾਲ ਕਿਸੇ ਵੀ ਹੋਰ ਵਿਜ਼ਟਰ ਵਾਂਗ ਵਿਵਹਾਰ ਕੀਤਾ ਜਾਂਦਾ ਹੈ।
- ਉਹਨਾਂ ਨੂੰ ਆਗਿਆ ਦਿਓ: AI ਕ੍ਰਾਲਰਾਂ ਨੂੰ ਲੰਘਣ ਦਿੱਤਾ ਜਾਂਦਾ ਹੈ।
- ਉਹਨਾਂ ਨੂੰ ਚੁਣੌਤੀ ਦਿਓ ਜਾਂ ਉਹਨਾਂ ਨੂੰ ਬਲੌਕ ਕਰੋ: AI ਕ੍ਰਾਲਰਾਂ ਨੂੰ ਐੱਜ 'ਤੇ ਚੁਣੌਤੀ ਦਿੱਤੀ ਜਾਂਦੀ ਹੈ ਜਾਂ ਅਸਵੀਕਾਰ ਕਰ ਦਿੱਤਾ ਜਾਂਦਾ ਹੈ। ਇਹ ਦੋਵੇਂ ਵਿਕਲਪ ਤੁਹਾਡੇ ਪਲਾਨ ਵਿੱਚ ਸ਼ਾਮਲ ਬੋਟ ਸੁਰੱਖਿਆ ਦੇ ਨਾਲ ਆਉਂਦੇ ਹਨ; ਜੇਕਰ ਤੁਹਾਡੇ ਪਲਾਨ ਵਿੱਚ ਇਹ ਸ਼ਾਮਲ ਨਹੀਂ ਹੈ ਤਾਂ ਸਕ੍ਰੀਨ ਦਿਖਾਉਂਦੀ ਹੈ।
ਅਸੀਂ ਤੁਹਾਡੇ ਲਈ ਇਹ ਸੈਟਿੰਗ ਕਦੇ ਨਹੀਂ ਬਦਲਦੇ। ਫ਼ਰਜ਼ੀ ਬੋਟਾਂ ਨੂੰ ਬਲੌਕ ਕਰਨਾ ਇਸਨੂੰ ਪ੍ਰਭਾਵਿਤ ਨਹੀਂ ਕਰਦਾ: ਇੱਕ ਅਸਲ AI ਕ੍ਰਾਲਰ ਤਾਂ ਹੀ ਬਲੌਕ ਕੀਤਾ ਜਾਂਦਾ ਹੈ ਜੇਕਰ ਤੁਸੀਂ ਇਸਨੂੰ ਬਲੌਕ ਕਰਨਾ ਚੁਣਦੇ ਹੋ।
ਕੁਝ ਜਾਇਜ਼ ਅਸਵੀਕਾਰ ਹੋ ਗਿਆ ਸੀ
ਅਪਟਾਈਮ ਮਾਨੀਟਰ, ਭੁਗਤਾਨ ਕਾਲਬੈਕ ਅਤੇ SEO ਟੂਲ ਪ੍ਰਭਾਵਿਤ ਨਹੀਂ ਹੁੰਦੇ ਜਦੋਂ ਤੱਕ ਉਹ ਉੱਪਰ ਦਿੱਤੇ ਕ੍ਰਾਲਰਾਂ ਵਿੱਚੋਂ ਇੱਕ ਹੋਣ ਦਾ ਢੌਂਗ ਨਹੀਂ ਕਰਦੇ। ਜੇਕਰ ਤੁਹਾਡੇ ਦੁਆਰਾ ਵਰਤੀ ਜਾਣ ਵਾਲੀ ਕੋਈ ਸੇਵਾ ਅਸਵੀਕਾਰ ਹੋ ਜਾਂਦੀ ਹੈ, ਤਾਂ ਸਮੇਂ ਅਤੇ ਉਸ ਪਤੇ ਦੇ ਨਾਲ ਇੱਕ ਸਹਾਇਤਾ ਟਿਕਟ ਖੋਲ੍ਹੋ ਜਿੱਥੋਂ ਇਹ ਆਈ ਸੀ ਅਤੇ ਅਸੀਂ ਇਸਦੀ ਜਾਂਚ ਕਰਾਂਗੇ।