এসইও এবং ইন্ডেক্সিং

পৃষ্ঠাগুলি সূচীবদ্ধ করা এবং সেগুলি সেখানে রাখা: ২০২৬ সালের একজন অপারেটরের নির্দেশিকা

ইনডেক্সিং কোনো এককালীন ঘটনা নয় — এটি এমন একটি অবস্থা যা আপনাকে বজায় রাখতে হয়, এবং ২০২৬ সালে কন্টেন্টের মতোই হোস্টিং স্তরও এর একটি বড় অংশ নির্ধারণ করে।

ইনডেক্সিং হলো এমন একটি অবস্থা যা আপনি বজায় রাখেন, কোনো টিক দেওয়ার বাক্স নয়

বেশিরভাগ মানুষ ইন্ডেক্সিংকে জমা দিয়ে ভুলে যাওয়ার মতো একটি পদক্ষেপ হিসেবে বিবেচনা করেন: পৃষ্ঠা প্রকাশ করুন, ইন্ডেক্সিংয়ের অনুরোধ করুন, এটি প্রদর্শিত হতে দেখুন, এগিয়ে যান। এই মডেলটি বহু বছর ধরে ভুল ছিল এবং এটি এখন সক্রিয়ভাবে ব্যয়বহুল। সার্চ ইঞ্জিনগুলি নিয়মিতভাবে একটি URL ইন্ডেক্স করে, কয়েক সপ্তাহের জন্য রাখে, তারপর পৃষ্ঠাটি যে ক্রল বাজেট ব্যবহার করে তা প্রমাণ করতে ব্যর্থ হলে চুপচাপ বাদ দেয়। গত মাসে র‍্যাঙ্ক করা একটি পৃষ্ঠা আপনার পক্ষ থেকে কোনো ম্যানুয়াল অ্যাকশন, পেনাল্টি নোটিশ বা পরিবর্তন ছাড়াই এই মাসে ডি-ইন্ডেক্স হয়ে যেতে পারে।

নেটওয়ার্ক পরিচালনাকারী যে কারও জন্য হিসাবটি অত্যন্ত নির্মম। যদি প্রতি মাসে আপনার ইউআরএলগুলির তিন শতাংশ নিঃশব্দে ইনডেক্স থেকে বাদ পড়ে যায় এবং আপনি কেবল ম্যানুয়ালি মাঝে মাঝে পরীক্ষা করেন, তবে লিঙ্কগুলি মান প্রদান বন্ধ করার পরেই আপনি সর্বদা সেই ক্ষতিটি আবিষ্কার করবেন। যে পরিচালকরা ১০০,০০০+ পিবিএন সাইট জুড়ে নেটওয়ার্কগুলি সচল রাখেন তারা মাঝে মাঝে ইনডেক্সিং পরীক্ষা করেন না — তারা ইনডেক্সের স্থিতিকে একটি নজরদারি সংকেত হিসাবে বিবেচনা করেন, ঠিক যেভাবে আপনি আপটাইম বা ডিস্ক নিরীক্ষণ করবেন। এই গাইডের বাকি অংশটি প্রতিক্রিয়ামূলকভাবে না করে বরং সুচিন্তিতভাবে এটি করার বিষয়ে আলোচনা করে।

ক্রমাগত ইনডেক্সিং পরীক্ষা করুন এবং ড্রপ হলে সতর্কতা জারি করুন

এককালীন ইনডেক্স যাচাইকরণ আপনাকে কেবল এটি জানায় যে আজ কোনো পৃষ্ঠা ইনডেক্সে আছে কি না। এটি আগামীকালের ব্যাপারে কিছুই জানায় না। আসল কার্যকরী সংকেত হলো পরিবর্তনটি — ঠিক যে মুহূর্তে একটি ইনডেক্স করা URL নন-ইনডেক্সড হয়ে যায় — কারণ তখনই একটি ব্যাকলিংক গণনা বন্ধ হয়ে যায় এবং আয়ের মূল পৃষ্ঠার ট্রাফিকের ক্ষতি হতে শুরু করে। এক বা দুই দিনের মধ্যে সেই পরিবর্তনটি শনাক্ত করতে পারা একটি দ্রুত সমাধান এবং ধীর ও অদৃশ্য অবনতির মধ্যে পার্থক্য গড়ে দেয়।

আমাদের প্ল্যাটফর্ম আপনার সাইটগুলোতে স্বয়ংক্রিয় ইনডেক্স পরীক্ষা চালায় এবং কোনো URL বাদ পড়লে ড্রপ সংক্রান্ত সতর্কতা পাঠায়, যার ফলে লোকসানটি ত্রৈমাসিক অডিট রিপোর্টের বদলে তাৎক্ষণিক নোটিফিকেশন হিসেবে সামনে আসে। এর বাস্তবসম্মত কর্মপ্রক্রিয়া অত্যন্ত সহজ: পরীক্ষককে প্রতিটি প্রকাশিত URL নিরীক্ষণ করতে দিন, প্রতিটি ড্রপ অ্যালার্টকে অগ্রাধিকারমূলক কাজ হিসেবে বিবেচনা করুন এবং পুনরায় জমা দেওয়ার আগে কারণ নির্ণয় করুন। কোনো নির্দিষ্ট কারণে বাদ পড়া পৃষ্ঠা — যেমন কম বিষয়বস্তু, একটি সফট 404, অন্য কোথাও নির্দেশকারী ক্যানোনিকাল, টেমপ্লেটে ফেলে রাখা কোনো noindex — অন্ধভাবে পুনরায় ইনডেক্স করা হলে তা আবারও বাদ পড়বে। প্রথমে কারণটি সংশোধন করুন, তারপর পুনরায় ক্রল করার অনুরোধ জানান।

আমরা বারবার যে সাধারণ এবং সংশোধনযোগ্য কারণগুলি দেখতে পাই: ব্লুপ্রিন্টে অসাবধানতাবশত পাঠানো noindex বা robots ব্লক, জাভাস্ক্রিপ্ট প্রয়োজন হওয়ায় ক্রলারের কাছে খালি প্রদর্শিত হওয়া পৃষ্ঠাগুলি, একই উদ্দেশ্যের জন্য প্রতিদ্বন্দ্বিতাকারী প্রায়-অনুরূপ পৃষ্ঠাগুলি এবং যেগুলির দিকে কোনও অভ্যন্তরীণ লিঙ্ক নির্দেশ করছে না এমন অভিভাবকহীন URL। এগুলির সবই সনাক্তযোগ্য, এবং ম্যানুয়াল সুইপের চেয়ে স্থায়ী পরীক্ষার মাধ্যমে এগুলি ধরা অনেক বেশি সাশ্রয়ী।

এটির ওপর গড়ে তোলার আগে ডোমেনটি যাচাই করুন

ইনডেক্সিং সমস্যার অর্ধেক সমাধান প্রথম পৃষ্ঠাটি প্রকাশিত হওয়ার আগেই নির্ধারিত হয়ে যায়, ঠিক যে মুহূর্তে আপনি ডোমেনটি বেছে নেন। একটি মেয়াদোত্তীর্ণ বা নিলামের ডোমেন প্রকৃত কর্তৃত্ব বহন করতে পারে — অথবা এটি স্প্যামের ইতিহাস, একটি ম্যানুয়াল অ্যাকশন, রিডাইরেক্ট চেইন বা এমন একটি বিষয় বহন করতে পারে যার সাথে আপনি যা তৈরি করতে চান তার কোনো সম্পর্ক নেই। একটি বিষাক্ত ডোমেনে অর্থ উপার্জনকারী সাইট বা নেটওয়ার্ক নোড তৈরি করা এই বিষয়টি বোঝার জন্য সবচেয়ে ব্যয়বহুল উপায়।

চূড়ান্ত সিদ্ধান্ত নেওয়ার আগে, মেট্রিক এবং ইতিহাস একসাথে পর্যালোচনা করুন: কর্তৃত্ব এবং ব্যাকলিঙ্ক সংকেত, রেফারিং-ডোমেন প্রোফাইল, অ্যাঙ্কর-টেক্সটের বিস্তার, এবং — সবচেয়ে গুরুত্বপূর্ণ — অতীতে ডোমেনটি আসলে কী ছিল। সত্যিকারের সূচীবদ্ধ এবং পরিচ্ছন্ন, প্রাসঙ্গিক অতীতসম্পন্ন একটি ডোমেনের মূল্য এমন একটি উচ্চ-সংখ্যার ডোমেনের চেয়ে অনেক বেশি, যার ব্যাকলিঙ্কগুলি এমন পৃষ্ঠাগুলির দিকে নির্দেশ করে যা আর বিদ্যমান নেই। আমাদের অন্তর্নির্মিত ডোমেন পরীক্ষক এবং SEO মেট্রিক্স আপনাকে সেই একই ড্যাশবোর্ডের মধ্যে থেকে সম্ভাব্য ডোমেনগুলি যাচাই করতে দেয় যেখান থেকে আপনি মোতায়েন করেন, এবং আমাদের বিস্তৃত SEO টুলিং সাইটটি লাইভ হওয়ার পরেও সেই প্রেক্ষাপট ধরে রাখে।

Wayback Machine থেকে পুরোনো ডোমেইনগুলি পুনর্নির্মাণ করুন

আপনি যখন কোনো পুরনো ডোমেন তার ইতিহাসের জন্য কেনেন, তখন সূচীতে (index) দ্রুততম প্রত্যাবর্তনের পথ হলো সার্চ ইঞ্জিনগুলোকে সেই বিষয়বস্তু প্রদান করা যা তারা ইতোমধ্যে সেই URL-এ জানত। যে ডোমেনের মূল পৃষ্ঠাগুলো 404 প্রদর্শন করে, তা তার উত্তরাধিকারসূত্রে প্রাপ্ত কর্তৃত্বের সিংহভাগই অপচয় করে — ব্যাকলিংকগুলো এমন ঠিকানাকে নির্দেশ করে যা অস্তিত্বহীন, এবং ক্রলারের কাছে নতুন সাইটটিকে পুরনোটির ধারাবাহিকতা হিসেবে গণ্য করার কোনো কারণ থাকে না।

Wayback রিস্টোর পাবলিক ওয়েব-আর্কাইভ স্ন্যাপশট থেকে ডোমেনের মূল পৃষ্ঠাগুলি পুনর্নির্মাণ করে, যাতে ঐতিহাসিক URL-গুলি আবার আসল বিষয়বস্তুর দিকে নির্দেশ করে এবং ইনবাউন্ড লিঙ্কগুলি ত্রুটি কোডের পরিবর্তে সক্রিয় পৃষ্ঠাগুলিতে পৌঁছায়। এটি ব্যাকলিঙ্কগুলির প্রত্যাশিত URL কাঠামো রক্ষা করে, ক্রলারকে পুনরায় মূল্যায়নের জন্য একটি সামঞ্জস্যপূর্ণ সাইট দেয় এবং একটি পুরানো ডোমেনকে স্ক্র্যাচ থেকে তৈরি করতে যে সপ্তাহগুলি লাগে তার পরিবর্তে কয়েক দিনের মধ্যে উৎপাদনশীল করে তোলে। ইক্যুইটি পুনরুদ্ধারের জন্য প্রথমে রিস্টোর করুন, তারপর খালি ভিত্তির পরিবর্তে একটি কার্যকরী ভিত্তি থেকে সম্পাদনা এবং সম্প্রসারণ করুন।

চিহ্ন এখন একটি সূচীকরণ সংকেত

২০২৬ সালে ফুটপ্রিন্ট (footprint) সমস্যা এবং ইনডেক্সিং সমস্যার মধ্যকার পার্থক্য প্রায় মুছে গেছে। যে নেটওয়ার্ক একই আইপি রেঞ্জ, একই নেমসার্ভার, একটি মাত্র সিডিএন অ্যাকাউন্ট এবং একই ধরণের টেমপ্লেট ফিঙ্গারপ্রিন্ট শেয়ার করে, সেটি কেবল নেটওয়ার্ক হিসেবে চিহ্নিত হওয়ার ঝুঁকিতেই থাকে না — এটি সার্চ ইঞ্জিনগুলোকে এমন পৃষ্ঠাগুলির মান হ্রাস করার এবং অবশেষে ইনডেক্সিং বন্ধ করার একটি সহজ কারণ দেয় যা অন্যথায় ঠিকঠাক থাকত। হোস্টিং স্তরে আপনি যে আইসোলেশন তৈরি করেন তা প্রকৃতপক্ষে আপনার ইনডেক্সিং কৌশলেরই একটি অংশ।

চিহ্নহীন (footprint-free) হোস্টিংয়ের মূল কথা এটিই: প্রতিটি সাইটকে যেন সম্পূর্ণ স্বতন্ত্র মনে হয়। এর অর্থ হলো বণ্টিত এবং অ-সংলগ্ন আইপি, একাধিক DNS প্রদানকারী, একক শেয়ার্ড অ্যাকাউন্টের পরিবর্তে একটি খাঁটি মাল্টি-CDN পুল, এবং প্রতিটি সাইটের জন্য পৃথক আইসোলেশন যাতে একটি সাইটের কনফিগারেশন, ক্যাশ এবং প্রতিবেশীদের তথ্য থেকে অন্য সাইটগুলো সম্পর্কে কিছুই বোঝা না যায়। আমাদের ফুটপ্রিন্ট রিমুভার সেই সাধারণ মিলগুলো মুছে ফেলে যা সাইটগুলোকে পরস্পরের সাথে সম্পর্কিত হিসেবে প্রকাশ করে, আমাদের CDN পুল সামনে ClouDNS রেখে Cloudflare, bunny.net, CDN77 এবং KeyCDN-এর মাধ্যমে ডেটা ডেলিভারি ছড়িয়ে দেয়, এবং প্রতিটি সাইটের জন্য থাকা আইসোলেশন কম্পিউট স্তরে প্রতিটি প্রপার্টিকে স্বাধীন রাখে। এর কোনোটিই ভালো কনটেন্টের বিকল্প নয় — তবে এটি ভালো কনটেন্টকে অন্য সাইটের অনাকাঙ্ক্ষিত সান্নিধ্যের কারণে নিচে নেমে যাওয়া থেকে রক্ষা করে।

যে বিচ্ছিন্নতা ফুটপ্রিন্ট রক্ষা করে, তা প্রাপ্যতাও রক্ষা করে। একটি ক্রলার যা ধীর বা মাঝে মাঝে ব্যর্থ হওয়া উৎসের মুখোমুখি হয়, তা কম ক্রল করে এবং কম ইনডেক্স করে; ক্যাশের পেছনে প্রতিটি সাইট দ্রুত এবং নির্ভরযোগ্যভাবে অ্যাক্সেসযোগ্য রাখা সরাসরি ইনডেক্সিংয়ের একটি নিয়ামক, কোনো ঐচ্ছিক সুবিধা নয়।

২০২৬ সালে যে সংকেতগুলি সত্যিই গুরুত্বপূর্ণ

অপ্রয়োজনীয় কোলাহল দূর করলে দেখা যাবে যে স্থায়ী সংকেতগুলো একেবারেই চমকহীন। কোনো ক্রলার JavaScript চালনা না করেই পড়তে পারে এমন সার্ভার-রেন্ডার করা বিষয়বস্তু এখনও প্রায় যেকোনো কিছুর চেয়ে বেশি গুরুত্বপূর্ণ — কোনো বট-এর কাছে যদি পৃষ্ঠাটি খালি দেখায়, তবে পরবর্তীতে করা কোনো কিছুই সাহায্য করে না। দ্রুত এবং ক্যাশড সরবরাহ ক্রল বাজেটকে ধীরগতির মূল সার্ভারের অপেক্ষায় নষ্ট হতে না দিয়ে আপনার URL-গুলোর দিকে প্রবাহিত রাখে। আসল অভ্যন্তরীণ লিঙ্কযুক্ত পরিষ্কার এবং স্থিতিশীল URL কাঠামো পৃষ্ঠাগুলোকে পুনরায় ক্রল করার এবং ধরে রাখার একটি কারণ প্রদান করে।

এর পাশাপাশি রয়েছে কনটেন্টের সেই মৌলিক ভিত্তিগুলো যা নির্ধারণ করে যে একটি ইনডেক্স করা পেজ ইনডেক্স করা থাকবে কি না: প্রকৃত প্রাসঙ্গিকতা, প্রায়-অনুরূপ কন্টেন্টের পারস্পরিক ক্ষতিসাধন না হওয়া, সঠিক canonical এবং hreflang সংকেত, এবং এমন পেজ যা কেবল কোনো নেটওয়ার্ক ভরিয়ে তোলার বদলে প্রকৃত প্রশ্নের উত্তর দেয়। হোস্টিং লেয়ার এগুলো নিজে তৈরি করতে পারে না — তবে যেসব পেজে এগুলো রয়েছে সেগুলো যেন দ্রুত রেন্ডার হয়, নিখুঁতভাবে লোড হয়, নির্ভরযোগ্যভাবে কাজ করে এবং এমন কোনো অনাকাঙ্ক্ষিত noindex বা শেয়ার্ড footprint বহন না করে যা মানের সাথে সম্পর্কিত নয় এমন কারণে তাদের বাদ পড়ার পথ তৈরি করতে পারে, তা নিশ্চিত করতে পারে। আপনার পরিকাঠামো ঠিক রাখুন এবং কনটেন্টকে বাস্তবসম্মত করুন, তাহলে ইনডেক্স করা ধরে রাখা আর কোনো লড়াই থাকবে না।

সচরাচর জিজ্ঞাস্য

আমার পৃষ্ঠাগুলি সূচীবদ্ধ হয়েছে কিনা তা কত ঘন ঘন পরীক্ষা করা উচিত?

ধারাবাহিকভাবে, আপনার হাতে চালানো কোনো সময়সূচীর ভিত্তিতে নয়। একটি পৃষ্ঠা এক সপ্তাহে ইনডেক্স হতে পারে এবং আপনার পক্ষ থেকে কোনো পদক্ষেপ ছাড়াই পরের সপ্তাহে বাদ পড়তে পারে, তাই আপনার আসলে যে সংকেতটি প্রয়োজন তা হলো ইনডেক্স করা থেকে নন-ইনডেক্সড অবস্থায় রূপান্তর। আমাদের স্বয়ংক্রিয় ইনডেক্স যাচাইকরণ ব্যবস্থা আপনার প্রকাশিত URL-গুলি পর্যবেক্ষণ করে এবং কোনোটি বাদ পড়লে একটি ড্রপ সতর্কতা জারি করে, যাতে আপনি পরবর্তী ম্যানুয়াল অডিটের পরিবর্তে এক বা দুই দিনের মধ্যে এই ঘাটতি শনাক্ত করতে পারেন।

আমার পৃষ্ঠাটি ইনডেক্স করা হয়েছিল এবং পরে বাদ পড়েছে — প্রথমে আমার কী করা উচিত?

পুনরায় জমা দেওয়ার আগে কারণ নির্ণয় করুন। কোনো কারণে বাদ পড়া পেজের ক্ষেত্রে যাচাই না করে পুনরায় ইনডেক্স করার অনুরোধ করলে তা কেবল আবার বাদ পড়বে। অনিচ্ছাকৃত noindex বা robots ব্লক, JavaScript ছাড়া খালি প্রদর্শিত হওয়া কনটেন্ট, অন্য কোথাও নির্দেশকারী canonical, একটি soft 404, পাতলা বা ডুপ্লিকেট কনটেন্ট এবং অভ্যন্তরীণভাবে পেজটির সাথে কোনো লিঙ্ক আদৌ আছে কিনা তা পরীক্ষা করুন। সমস্যার সমাধান করুন, তারপর পুনরায় ক্রল করার অনুরোধ জানান।

নতুন করে শুরু করার পরিবর্তে কেন Wayback Machine থেকে একটি পুরনো ডোমেন পুনরুদ্ধার করবেন?

একটি পুরনো ডোমেইনের মূল্য থাকে এর ব্যাকলিংকগুলোতে, এবং সেই লিঙ্কগুলি ডোমেইনের আসল URL-গুলোর দিকে নির্দেশ করে। যদি সেই URL-গুলো এখন 404 ত্রুটি দেখায়, তবে উত্তরাধিকার সূত্রে প্রাপ্ত বেশিরভাগ কর্তৃত্ব নষ্ট হয়ে যায় এবং ক্রলারের কাছে আপনার নতুন সাইটটিকে পুরনোটির ধারাবাহিকতা হিসেবে বিবেচনা করার কোনো কারণ থাকে না। ওয়েব্যাক রিস্টোর আর্কাইভ স্ন্যাপশট থেকে ঐতিহাসিক পৃষ্ঠাগুলি পুনর্নির্মাণ করে যাতে লিঙ্কগুলি সক্রিয় সামগ্রীতে পৌঁছায় এবং ব্যাকলিংকগুলি যে URL কাঠামো আশা করে তা সংরক্ষিত থাকে।

হোস্টিং কি সত্যিই পৃষ্ঠাগুলি ইনডেক্স করা থাকার ক্ষেত্রে প্রভাব ফেলে?

হ্যাঁ, দুটি উপায়ে। প্রথমত, ফুটপ্রিন্ট: যে সাইটগুলো একই IP পরিসীমা, নেমসার্ভার, একক CDN অ্যাকাউন্ট এবং টেমপ্লেটযুক্ত ফিঙ্গারপ্রিন্ট ভাগ করে নেয়, সেগুলো সার্চ ইঞ্জিনগুলোকে এমন পৃষ্ঠাগুলির মান কমানো এবং ডি-ইনডেক্স করার সহজ সুযোগ দেয় যা অন্যথায় ভালো অবস্থানে থাকত। আর ঠিক এই কারণেই ডিস্ট্রিবিউটেড IP, একাধিক DNS সরবরাহকারী, একটি বাস্তব মাল্টি-CDN পুল এবং প্রতি-সাইট আইসোলেশন অত্যন্ত গুরুত্বপূর্ণ। দ্বিতীয়ত, ক্রলযোগ্যতা: সার্ভার-রেন্ডার করা সামগ্রী, দ্রুত ক্যাশড ডেলিভারি এবং নির্ভরযোগ্য অরিজিন আপনার URL-গুলিতে ক্রল বাজেট প্রবাহ অব্যাহত রাখে। হোস্টিং দুর্বল কন্টেন্ট ঠিক করতে পারে না, তবে এটি তার গুণমানের সাথে সম্পর্কিত নয় এমন কারণে ভালো কন্টেন্ট বাদ পড়াকে রোধ করতে পারে।

১৪ দিনের জন্য এটি বিনামূল্যে ব্যবহার করে দেখুন

১৪ দিনের জন্য বিনামূল্যে আপনার প্রথম সাইটগুলো চালু করুন — কোনো কার্ডের প্রয়োজন নেই। বিদ্যমান কোনো নেটওয়ার্ক স্থানান্তর করছেন? মাইগ্রেশন সম্পূর্ণ বিনামূল্যে এবং সীমাহীন।

বিনামূল্যে শুরু করুন