দেশ, ঠিকানা এবং ক্রলার ব্লক করা হচ্ছে

এগুলি তিনটি ভিন্ন সমস্যার জন্য তিনটি ভিন্ন সেটিংস। সাইটের নিরাপত্তা সেটিংস থেকে এগুলিতে পৌঁছান।

Countries

হয় একটি ব্লকলিস্ট (এগুলি ছাড়া সবাই ভিজিট করতে পারবে) অথবা একটি অনুমোদিত তালিকা (এগুলি ছাড়া কেউ ভিজিট করতে পারবে না)। এটি একটিমাত্র সুইচ, এবং সেভ করার আগে এটি দুবার পড়ে নেওয়া উচিত: একটিমাত্র দেশ সম্বলিত একটি অনুমোদিত তালিকা বাকি সবার জন্য আপনার সাইটকে ইন্টারনেট থেকে সরিয়ে দেয়, যা মাঝে মাঝে ঠিক আপনার প্রয়োজন হতে পারে এবং অন্যথায় এটি একটি বাজে অভিজ্ঞতা হতে পারে।

তালিকাটি খালি করলে প্রতিটি দেশের বিধিনিষেধ মুছে যায়; আলাদা কোনো "সর্বত্র আনব্লক করুন" ধাপ নেই।

⚠️ একটি অনুমোদিত তালিকা আপনাকে Google থেকে সরিয়ে দেবে, এবং এই বিষয়টিই মানুষ এড়িয়ে যায়। সার্চ ইঞ্জিনগুলি তাদের নিজস্ব ঠিকানা থেকে ক্রল করে — আপনার দর্শকরা যেখানেই থাকুন না কেন, Googlebot মার্কিন যুক্তরাষ্ট্র থেকে ক্রল করে — তাই এমন একটি অনুমোদিত তালিকা যাতে এই দেশগুলি অন্তর্ভুক্ত নেই তা সবার সাথে ক্রলারকেও ব্লক করবে, এবং যে সাইট ক্রল করা যায় না তা ইনডেক্স থেকে বাদ পড়ে যায়। এটি তাত্ক্ষণিক নয় এবং এটি স্পষ্টও নয়, যা এটিকে মারাত্মক ক্ষতিকর করে তোলে।

তাই আমরা ডিফল্টভাবে যাচাইকৃত সার্চ ইঞ্জিনগুলিকে অনুমতি দিই। সেই সুইচটিতে হাত দেবেন না এবং Google ও Bing যেখান থেকেই ক্রল করুক না কেন আপনার সাইটে পৌঁছাতে থাকবে, এমনকি একটি দেশের নাম সম্বলিত একটি অনুমোদিত তালিকার ক্ষেত্রেও। আপনি যদি সত্যিই কোনো ব্যতিক্রম না চান তবে ছাড়টি বন্ধ করতে পারেন — এটি উপরে বর্ণিত ঝুঁকিটি হুবহু ফিরিয়ে আনে এবং আপনি যখন এটি করেন তখন স্ক্রিনটি তা জানিয়ে দেয়।

⛔ এই ছাড়ের জন্য এমন একজন প্রদানকারীর প্রয়োজন যিনি একটি ক্রলার যাচাই করতে পারেন, এবং তাদের সবাই তা পারে না। যাচাই করার অর্থ হলো কোনো ভিজিটর নিজেকে Googlebot বলে দাবি করলে সে সত্যিই Google কি না তা তার ঠিকানার মাধ্যমে পরীক্ষা করা — কেবল তার মুখের কথা বিশ্বাস না করা, যা যে কেউ নকল করতে পারে। আমাদের Cloudflare এজ এটি করে থাকে। Bunny, CDN77 এবং Gcore এটি করে না, তাই সেগুলিতে নিরাপদে প্রবেশ করতে দেওয়ার মতো কিছু নেই এবং আমরা কিছুই প্রবেশ করতে দিই না। যেসব প্রদানকারী ক্রলার যাচাই করতে পারে না তাদের ক্ষেত্রে একটি অনুমোদিত তালিকা উপরের সম্পূর্ণ ঝুঁকি বহন করে — সাইটের কান্ট্রি স্ক্রিনটি আপনাকে জানিয়ে দেয় আপনি কোন পরিস্থিতিতে আছেন, এবং ছাড়ের ওপর নির্ভর করার আগে আপনার এটি পড়ে নেওয়া উচিত। সেখানে একটি ব্লকলিস্ট ব্যবহারকে অগ্রাধিকার দিন।

Individual addresses

নির্দিষ্ট কোনো উৎপাতের জন্য — কোনো একটি ফর্মকে বারবার আক্রমণ করা একটি ঠিকানা, একটি স্ক্র্যাপার। এটি কয়েকটি ঠিকানার জন্য সঠিক টুল কিন্তু কোনো আক্রমণের জন্য ভুল টুল, যা হাজার হাজার ঠিকানা থেকে আসে এবং আপনার টাইপ করার চেয়েও দ্রুত সেগুলি পরিবর্তন করে। এর জন্য CDN-এর সুরক্ষাই আপনার প্রয়োজন।

SEO crawlers

তৃতীয় পক্ষের এসইও ক্রলারগুলি — যেগুলি ব্যাকলিংক ডেটাবেস তৈরি করে — সেগুলিকে এককভাবে ব্লক করা যেতে পারে। প্রতিযোগীরা যাতে তাদের লিঙ্ক প্রোফাইল ক্যাটালগ করতে না পারে সেজন্য মানুষ এটি করে থাকে।

আপনি এখানে নিজেকে ডি-ইনডেক্স করতে পারবেন না। সার্চ ইঞ্জিনগুলি বেছে নেওয়ার তালিকায় নেই, এটি উদ্দেশ্যপ্রণোদিতভাবেই করা হয়েছে: Googlebot ব্লক করা এমন একটি সিদ্ধান্ত যার পরিণতি এই স্ক্রিনটির উদ্দেশ্যের চেয়েও অনেক বেশি সুদূরপ্রসারী, তাই স্ক্রিনটি এটি করবে না। আপনার robots.txt এই সেটিং দ্বারা অপরিবর্তিত থাকে এবং আপনার নিয়ন্ত্রণেই থাকে।

⚠️ সেই সুরক্ষা বিশেষভাবে এই নিয়ন্ত্রণের জন্যই প্রযোজ্য। উপরের কান্ট্রি নিয়মের নিজস্ব একটি সুরক্ষাব্যবস্থা আছে, তবে তা শর্তসাপেক্ষ — এটি ডিফল্টভাবে যাচাইকৃত সার্চ ইঞ্জিনগুলিকে অনুমতি দেয়, এবং শুধুমাত্র সেখানেই দেয় যেখানে আপনার প্রদানকারী সেগুলিকে যাচাই করতে পারে। আপনি যদি উভয়টিই ব্যবহার করে থাকেন, তবে কান্ট্রি নিয়মটি এখনও এমন একটি বিষয় যা আপনার র‍্যাঙ্কিং হারানোর কারণ হতে পারে, তাই ছাড়টি কার্যকর রয়েছে বলে ধরে নেওয়ার চেয়ে এর স্ক্রিনে কী প্রদর্শিত হচ্ছে তা পরীক্ষা করে দেখুন।

এগুলির কোনোটিই যা নয়

এগুলির কোনোটিই সফটওয়্যার আপ-টু-ডেট রাখার বিকল্প নয়। একটি দেশকে ব্লক করা সেই দেশের ট্র্যাফিক বন্ধ করে; এটি সেই সেকেলে প্লাগইনটিকে ঠিক করে না যা ট্র্যাফিকটি অনুসন্ধান করছিল।