ਇਹ ਤਿੰਨ ਵੱਖ-ਵੱਖ ਸਮੱਸਿਆਵਾਂ ਲਈ ਤਿੰਨ ਵੱਖ-ਵੱਖ ਸੈਟਿੰਗਾਂ ਹਨ। ਸਾਈਟ ਦੀਆਂ ਸੁਰੱਖਿਆ ਸੈਟਿੰਗਾਂ ਤੋਂ ਉਹਨਾਂ ਤੱਕ ਪਹੁੰਚੋ।
ਦੇਸ਼
ਜਾਂ ਤਾਂ ਇੱਕ ਬਲਾਕ ਸੂਚੀ (ਇਹਨਾਂ ਨੂੰ ਛੱਡ ਕੇ ਹਰ ਕੋਈ ਦੇਖ ਸਕਦਾ ਹੈ) ਜਾਂ ਇੱਕ ਆਗਿਆ ਸੂਚੀ (ਇਹਨਾਂ ਨੂੰ ਛੱਡ ਕੇ ਕੋਈ ਨਹੀਂ ਦੇਖ ਸਕਦਾ)। ਇਹ ਇੱਕ ਸਵਿੱਚ ਹੈ, ਅਤੇ ਸੇਵ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ ਦੋ ਵਾਰ ਪੜ੍ਹਨਾ ਲਾਹੇਵੰਦ ਹੈ: ਇੱਕ ਦੇਸ਼ ਵਾਲੀ ਆਗਿਆ ਸੂਚੀ ਤੁਹਾਡੀ ਸਾਈਟ ਨੂੰ ਬਾਕੀ ਸਾਰਿਆਂ ਲਈ ਇੰਟਰਨੈੱਟ ਤੋਂ ਹਟਾ ਦਿੰਦੀ ਹੈ, ਜੋ ਕਦੇ-ਕਦਾਈਂ ਬਿਲਕੁਲ ਉਹੀ ਹੁੰਦਾ ਹੈ ਜੋ ਤੁਸੀਂ ਚਾਹੁੰਦੇ ਹੋ ਅਤੇ ਨਹੀਂ ਤਾਂ ਇੱਕ ਖ਼ਰਾਬ ਦੁਪਹਿਰ ਸਾਬਤ ਹੁੰਦਾ ਹੈ।
ਸੂਚੀ ਨੂੰ ਸਾਫ਼ ਕਰਨ ਨਾਲ ਹਰੇਕ ਦੇਸ਼ ਦੀ ਪਾਬੰਦੀ ਹਟ ਜਾਂਦੀ ਹੈ; ਕੋਈ ਵੱਖਰਾ "ਹਰ ਥਾਂ ਤੋਂ ਅਨਬਲਾਕ ਕਰੋ" ਕਦਮ ਨਹੀਂ ਹੈ।
⚠️ ਇੱਕ ਆਗਿਆ ਸੂਚੀ ਤੁਹਾਨੂੰ Google ਤੋਂ ਬਾਹਰ ਕਰ ਦੇਵੇਗੀ, ਅਤੇ ਇਹ ਉਹ ਹਿੱਸਾ ਹੈ ਜਿਸ ਨੂੰ ਲੋਕ ਨਜ਼ਰਅੰਦਾਜ਼ ਕਰ ਦਿੰਦੇ ਹਨ। ਖੋਜ ਇੰਜਣ ਆਪਣੇ ਖ਼ੁਦ ਦੇ ਪਤਿਆਂ ਤੋਂ ਕ੍ਰੌਲ ਕਰਦੇ ਹਨ — Googlebot ਸੰਯੁਕਤ ਰਾਜ ਤੋਂ, ਭਾਵੇਂ ਤੁਹਾਡੇ ਦਰਸ਼ਕ ਕਿਤੇ ਵੀ ਹੋਣ — ਇਸ ਲਈ ਇੱਕ ਆਗਿਆ ਸੂਚੀ ਜਿਸ ਵਿੱਚ ਉਹ ਦੇਸ਼ ਸ਼ਾਮਲ ਨਹੀਂ ਹਨ, ਬਾਕੀ ਸਾਰਿਆਂ ਦੇ ਨਾਲ ਕ੍ਰੌਲਰ ਨੂੰ ਵੀ ਬਲਾਕ ਕਰ ਦੇਵੇਗੀ, ਅਤੇ ਇੱਕ ਸਾਈਟ ਜਿਸ ਨੂੰ ਕ੍ਰੌਲ ਨਹੀਂ ਕੀਤਾ ਜਾ ਸਕਦਾ ਉਹ ਇੰਡੈਕਸ ਤੋਂ ਬਾਹਰ ਹੋ ਜਾਂਦੀ ਹੈ। ਇਹ ਤੁਰੰਤ ਨਹੀਂ ਹੁੰਦਾ ਅਤੇ ਇਹ ਸਪੱਸ਼ਟ ਨਹੀਂ ਹੁੰਦਾ, ਜੋ ਇਸਨੂੰ ਮਹਿੰਗਾ ਬਣਾਉਂਦਾ ਹੈ।
ਇਸ ਲਈ ਅਸੀਂ ਮੂਲ ਰੂਪ ਵਿੱਚ ਪ੍ਰਮਾਣਿਤ ਖੋਜ ਇੰਜਣਾਂ ਨੂੰ ਆਗਿਆ ਦਿੰਦੇ ਹਾਂ। ਉਸ ਸਵਿੱਚ ਨੂੰ ਨਾ ਛੇੜੋ ਅਤੇ Google ਅਤੇ Bing ਤੁਹਾਡੀ ਸਾਈਟ ਤੱਕ ਪਹੁੰਚਣਾ ਜਾਰੀ ਰੱਖਣਗੇ ਜਿੱਥੋਂ ਵੀ ਉਹ ਕ੍ਰੌਲ ਕਰਦੇ ਹਨ, ਭਾਵੇਂ ਇੱਕ ਦੇਸ਼ ਦਾ ਨਾਮ ਲੈਣ ਵਾਲੀ ਆਗਿਆ ਸੂਚੀ ਹੋਵੇ। ਜੇਕਰ ਤੁਸੀਂ ਸੱਚਮੁੱਚ ਕੋਈ ਛੋਟ ਨਹੀਂ ਚਾਹੁੰਦੇ ਹੋ ਤਾਂ ਤੁਸੀਂ ਇਸ ਛੋਟ ਨੂੰ ਬੰਦ ਕਰ ਸਕਦੇ ਹੋ — ਇਹ ਉੱਪਰ ਦੱਸੇ ਜੋਖਮ ਨੂੰ ਬਿਲਕੁਲ ਉਸੇ ਤਰ੍ਹਾਂ ਵਾਪਸ ਲਿਆਉਂਦਾ ਹੈ ਜਿਵੇਂ ਦੱਸਿਆ ਗਿਆ ਹੈ, ਅਤੇ ਜਦੋਂ ਤੁਸੀਂ ਅਜਿਹਾ ਕਰਦੇ ਹੋ ਤਾਂ ਸਕ੍ਰੀਨ ਇਹ ਦੱਸਦੀ ਹੈ।
⛔ ਛੋਟ ਲਈ ਇੱਕ ਅਜਿਹੇ ਪ੍ਰਦਾਤਾ ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ ਜੋ ਇੱਕ ਕ੍ਰੌਲਰ ਦੀ ਪੁਸ਼ਟੀ ਕਰ ਸਕੇ, ਅਤੇ ਉਹ ਸਾਰੇ ਅਜਿਹਾ ਨਹੀਂ ਕਰ ਸਕਦੇ। ਪੁਸ਼ਟੀ ਕਰਨ ਦਾ ਮਤਲਬ ਹੈ ਇਹ ਜਾਂਚਣਾ ਕਿ ਆਪਣੇ ਆਪ ਨੂੰ Googlebot ਕਹਿਣ ਵਾਲਾ ਵਿਜ਼ਿਟਰ ਅਸਲ ਵਿੱਚ Google ਹੀ ਹੈ, ਇਸਦੇ ਪਤਿਆਂ ਦੁਆਰਾ — ਇਸਦੇ ਸ਼ਬਦ 'ਤੇ ਭਰੋਸਾ ਨਾ ਕਰਨਾ, ਜਿਸਦੀ ਕੋਈ ਵੀ ਨਕਲ ਕਰ ਸਕਦਾ ਹੈ। ਸਾਡਾ Cloudflare edge ਇਹ ਕਰਦਾ ਹੈ। Bunny, CDN77 ਅਤੇ Gcore ਅਜਿਹਾ ਨਹੀਂ ਕਰਦੇ, ਇਸ ਲਈ ਉਹਨਾਂ 'ਤੇ ਲੰਘਣ ਦੇਣ ਲਈ ਕੁਝ ਵੀ ਸੁਰੱਖਿਅਤ ਨਹੀਂ ਹੈ ਅਤੇ ਅਸੀਂ ਕਿਸੇ ਵੀ ਚੀਜ਼ ਨੂੰ ਲੰਘਣ ਨਹੀਂ ਦਿੰਦੇ। ਅਜਿਹੇ ਪ੍ਰਦਾਤਾ 'ਤੇ ਜੋ ਕ੍ਰੌਲਰਾਂ ਦੀ ਪੁਸ਼ਟੀ ਨਹੀਂ ਕਰ ਸਕਦਾ, ਇੱਕ ਆਗਿਆ ਸੂਚੀ ਉੱਪਰ ਦਿੱਤਾ ਪੂਰਾ ਜੋਖਮ ਰੱਖਦੀ ਹੈ — ਸਾਈਟ ਦੀ ਦੇਸ਼ ਵਾਲੀ ਸਕ੍ਰੀਨ ਤੁਹਾਨੂੰ ਦੱਸਦੀ ਹੈ ਕਿ ਤੁਸੀਂ ਕਿਸ ਸਥਿਤੀ ਵਿੱਚ ਹੋ, ਅਤੇ ਛੋਟ 'ਤੇ ਭਰੋਸਾ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ ਤੁਹਾਨੂੰ ਇਸਨੂੰ ਪੜ੍ਹਨਾ ਚਾਹੀਦਾ ਹੈ। ਉੱਥੇ ਇੱਕ ਬਲਾਕ ਸੂਚੀ ਨੂੰ ਤਰਜੀਹ ਦਿਓ।
ਵਿਅਕਤੀਗਤ ਪਤੇ
ਇੱਕ ਖ਼ਾਸ ਪਰੇਸ਼ਾਨੀ ਲਈ — ਇੱਕ ਪਤਾ ਜੋ ਇੱਕ ਫ਼ਾਰਮ ਨੂੰ ਨਿਸ਼ਾਨਾ ਬਣਾ ਰਿਹਾ ਹੈ, ਇੱਕ ਸਕ੍ਰੈਪਰ। ਇਹ ਮੁੱਠੀ ਭਰ ਪਤਿਆਂ ਲਈ ਸਹੀ ਸਾਧਨ ਹੈ ਅਤੇ ਇੱਕ ਹਮਲੇ ਲਈ ਗ਼ਲਤ ਸਾਧਨ ਹੈ, ਜੋ ਹਜ਼ਾਰਾਂ ਵੱਲੋਂ ਆਉਂਦਾ ਹੈ ਅਤੇ ਉਹਨਾਂ ਨੂੰ ਤੁਹਾਡੇ ਟਾਈਪ ਕਰਨ ਨਾਲੋਂ ਤੇਜ਼ੀ ਨਾਲ ਬਦਲਦਾ ਹੈ। ਉਸ ਲਈ, CDN ਦੀ ਸੁਰੱਖਿਆ ਉਹ ਹੈ ਜੋ ਤੁਸੀਂ ਚਾਹੁੰਦੇ ਹੋ।
SEO ਕ੍ਰੌਲਰ
ਤੀਜੀ-ਧਿਰ ਦੇ SEO ਕ੍ਰੌਲਰ — ਉਹ ਜੋ ਬੈਕਲਿੰਕ ਡਾਟਾਬੇਸ ਬਣਾਉਂਦੇ ਹਨ — ਨੂੰ ਵਿਅਕਤੀਗਤ ਤੌਰ 'ਤੇ ਬਲਾਕ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਲੋਕ ਆਪਣੇ ਲਿੰਕ ਪ੍ਰੋਫਾਈਲ ਨੂੰ ਪ੍ਰਤੀਯੋਗੀਆਂ ਦੁਆਰਾ ਸੂਚੀਬੱਧ ਹੋਣ ਤੋਂ ਰੋਕਣ ਲਈ ਅਜਿਹਾ ਕਰਦੇ ਹਨ।
ਤੁਸੀਂ ਇੱਥੇ ਆਪਣੇ ਆਪ ਨੂੰ ਡੀ-ਇੰਡੈਕਸ ਨਹੀਂ ਕਰ ਸਕਦੇ। ਖੋਜ ਇੰਜਣ ਚੁਣਨ ਲਈ ਸੂਚੀ ਵਿੱਚ ਨਹੀਂ ਹਨ, ਡਿਜ਼ਾਈਨ ਦੁਆਰਾ: Googlebot ਨੂੰ ਬਲਾਕ ਕਰਨਾ ਇੱਕ ਅਜਿਹਾ ਫ਼ੈਸਲਾ ਹੈ ਜਿਸਦੇ ਨਤੀਜੇ ਇਸ ਸਕ੍ਰੀਨ ਦੇ ਉਦੇਸ਼ ਤੋਂ ਬਹੁਤ ਪਰੇ ਹਨ, ਇਸ ਲਈ ਸਕ੍ਰੀਨ ਅਜਿਹਾ ਨਹੀਂ ਕਰੇਗੀ। ਤੁਹਾਡੀ robots.txt ਇਸ ਸੈਟਿੰਗ ਦੁਆਰਾ ਅਣਛੂਹੀ ਰਹਿੰਦੀ ਹੈ ਅਤੇ ਤੁਹਾਡੀ ਹੀ ਰਹਿੰਦੀ ਹੈ।
⚠️ ਇਹ ਸੁਰੱਖਿਆ ਇਸ ਨਿਯੰਤਰਣ ਲਈ ਵਿਸ਼ੇਸ਼ ਹੈ। ਉੱਪਰ ਦਿੱਤੇ ਦੇਸ਼ ਦੇ ਨਿਯਮ ਦੀ ਆਪਣੀ ਇੱਕ ਰੋਕ ਹੈ, ਪਰ ਇੱਕ ਸ਼ਰਤੀਆ — ਇਹ ਮੂਲ ਰੂਪ ਵਿੱਚ ਪ੍ਰਮਾਣਿਤ ਖੋਜ ਇੰਜਣਾਂ ਨੂੰ ਆਗਿਆ ਦਿੰਦਾ ਹੈ, ਅਤੇ ਸਿਰਫ਼ ਉੱਥੇ ਜਿੱਥੇ ਤੁਹਾਡਾ ਪ੍ਰਦਾਤਾ ਉਹਨਾਂ ਦੀ ਪੁਸ਼ਟੀ ਕਰ ਸਕਦਾ ਹੈ। ਜੇਕਰ ਤੁਸੀਂ ਦੋਵਾਂ ਦੀ ਵਰਤੋਂ ਕੀਤੀ ਹੈ, ਤਾਂ ਦੇਸ਼ ਦਾ ਨਿਯਮ ਅਜੇ ਵੀ ਉਹੀ ਹੈ ਜੋ ਤੁਹਾਡੀ ਰੈਂਕਿੰਗ ਨੂੰ ਨੁਕਸਾਨ ਪਹੁੰਚਾ ਸਕਦਾ ਹੈ, ਇਸ ਲਈ ਇਹ ਮੰਨਣ ਦੀ ਬਜਾਏ ਕਿ ਛੋਟ ਲਾਗੂ ਹੈ, ਜਾਂਚ ਕਰੋ ਕਿ ਇਸਦੀ ਸਕ੍ਰੀਨ ਕੀ ਰਿਪੋਰਟ ਕਰਦੀ ਹੈ।
ਇਹਨਾਂ ਵਿੱਚੋਂ ਕੋਈ ਵੀ ਕੀ ਨਹੀਂ ਹੈ
ਇਹਨਾਂ ਵਿੱਚੋਂ ਕੋਈ ਵੀ ਸਾਫ਼ਟਵੇਅਰ ਨੂੰ ਅੱਪਡੇਟ ਰੱਖਣ ਦਾ ਬਦਲ ਨਹੀਂ ਹੈ। ਕਿਸੇ ਦੇਸ਼ ਨੂੰ ਬਲਾਕ ਕਰਨਾ ਉਸ ਦੇਸ਼ ਦੇ ਟ੍ਰੈਫ਼ਿਕ ਨੂੰ ਰੋਕਦਾ ਹੈ; ਇਹ ਪੁਰਾਣੇ ਪਲੱਗਇਨ ਨੂੰ ਠੀਕ ਨਹੀਂ ਕਰਦਾ ਜਿਸਦੀ ਟ੍ਰੈਫ਼ਿਕ ਜਾਂਚ ਕਰ ਰਿਹਾ ਸੀ।