यी तीन फरक समस्याहरूका लागि तीन फरक सेटिङहरू हुन्। साइटको सुरक्षा सेटिङहरूबाट यिनमा पुग्नुहोस्।
देशहरू
कि त निषेध सूची (यी बाहेक सबैले भ्रमण गर्न सक्छन्) वा स्वीकृत सूची (यी बाहेक कसैले पनि भ्रमण गर्न सक्दैनन्)। यो एउटा स्विच हो, र तपाईंले सुरक्षित गर्नु अघि दुई पटक पढ्न लायक छ: एउटा मात्र देश समावेश भएको स्वीकृत सूचीले अरू सबैका लागि तपाईंको साइटलाई इन्टरनेटबाट हटाइदिन्छ, जुन कहिलेकाहीँ तपाईंले चाहेको कुरा हुन सक्छ तर अन्यथा एउटा नराम्रो दिन बन्न सक्छ।
सूची खाली गर्नाले हरेक देशको प्रतिबन्ध हट्छ; कुनै छुट्टै "सबैतिर अनब्लक गर्नुहोस्" चरण छैन।
⚠️ स्वीकृत सूचीले तपाईंलाई Google बाट हटाइदिनेछ, र यो त्यो भाग हो जुन मानिसहरूले छुटाउँछन्। सर्च इन्जिनहरूले आफ्नै ठेगानाहरूबाट क्रल गर्छन् — Googlebot ले संयुक्त राज्य अमेरिकाबाट, तपाईंका आगन्तुकहरू जहाँ भए पनि — त्यसैले ती देशहरू समावेश नगर्ने स्वीकृत सूचीले अरू सबैसँगै क्रलरलाई पनि ब्लक गर्नेछ, र क्रल हुन नसक्ने साइट अनुक्रमणिका (index) बाट हट्छ। यो तुरुन्तै हुँदैन र यो स्पष्ट पनि देखिँदैन, जसले गर्दा यो निकै महँगो साबित हुन सक्छ।
त्यसैले हामी पूर्वनिर्धारित रूपमा प्रमाणित सर्च इन्जिनहरूलाई अनुमति दिन्छौं। त्यो स्विचलाई त्यत्तिकै छोड्नुहोस् र Google तथा Bing ले तिनीहरूले जहाँबाट क्रल गरे पनि तपाईंको साइटमा पहुँच पाइरहन्छन्, एउटा मात्र देश तोकिएको स्वीकृत सूची भए तापनि। यदि तपाईं साँच्चै कुनै अपवाद चाहनुहुन्न भने यो छुट बन्द गर्न सक्नुहुन्छ — त्यसले माथि वर्णन गरिएको जोखिमलाई ठीक त्यसरी नै फिर्ता ल्याउँछ, र तपाईंले त्यसो गर्दा स्क्रिनले सो कुरा बताउँछ।
⛔ यो छुटका लागि क्रलर प्रमाणित गर्न सक्ने प्रदायक चाहिन्छ, र ती सबैले यो गर्न सक्दैनन्। प्रमाणीकरणको अर्थ हो कि आफूलाई Googlebot भन्ने आगन्तुक वास्तवमै Google नै हो भनी यसका ठेगानाहरू मार्फत जाँच गर्नु — यसको भनाइलाई मात्र सत्य नमान्नु, जसलाई कसैले पनि प्रतिलिपि गर्न सक्छ। हाम्रो Cloudflare edge ले यो गर्छ। Bunny, CDN77 र Gcore ले यो गर्दैनन्, त्यसैले तिनीहरूमा सुरक्षित रूपमा भित्र जान दिने केही हुँदैन र हामी केही पनि जान दिँदैनौं। क्रलरहरू प्रमाणित गर्न नसक्ने प्रदायकमा स्वीकृत सूचीले माथिको सम्पूर्ण जोखिम बोक्छ — साइटको देश स्क्रिनले तपाईं कुन अवस्थामा हुनुहुन्छ भनी बताउँछ, र छुटमा भर पर्नु अघि तपाईंले यसलाई पढ्नुपर्छ। त्यस्तो अवस्थामा बरु निषेध सूची प्रयोग गर्नुहोस्।
व्यक्तिगत ठेगानाहरू
एक विशिष्ट समस्याका लागि — एउटै ठेगानाले फारममा बारम्बार प्रहार गरिरहेको छ वा एउटा स्क्र्यापर छ। यो मुठ्ठीभर ठेगानाहरूका लागि सही उपकरण हो र आक्रमणका लागि गलत हो, जुन हजारौंबाट आउँछ र तपाईंले टाइप गर्न सक्ने गति भन्दा छिटो तिनीहरू परिवर्तन हुन्छन्। त्यसका लागि, CDN को सुरक्षा नै तपाईंलाई आवश्यक पर्ने कुरा हो।
SEO क्रलरहरू
तेस्रो-पक्ष SEO क्रलरहरू — जसले ब्याकलिङ्क डाटाबेसहरू निर्माण गर्छन् — तिनीहरूलाई व्यक्तिगत रूपमा ब्लक गर्न सकिन्छ। प्रतिस्पर्धीहरूद्वारा आफ्नो लिङ्क प्रोफाइल क्याटलग हुनबाट जोगाउन मानिसहरूले यसो गर्छन्।
तपाईंले यहाँ आफैंलाई डि-इन्डेक्स गर्न सक्नुहुन्न। सर्च इन्जिनहरू छनौट गर्नका लागि सूचीमा राखिएका छैनन्, जानीजानी: Googlebot लाई ब्लक गर्नु यो स्क्रिनको उद्देश्य भन्दा धेरै परका परिणामहरू भएको निर्णय हो, त्यसैले यो स्क्रिनले त्यसो गर्ने छैन। तपाईंको robots.txt यस सेटिङद्वारा अछुतो रहन्छ र तपाईंको नै रहन्छ।
⚠️ त्यो सुरक्षा यस नियन्त्रणका लागि मात्र विशिष्ट छ। माथिको देशको नियमको आफ्नै सुरक्षा छ, तर सर्तसहितको — यसले पूर्वनिर्धारित रूपमा प्रमाणित सर्च इन्जिनहरूलाई अनुमति दिन्छ, र केवल जहाँ तपाईंको प्रदायकले तिनीहरूलाई प्रमाणित गर्न सक्छ। यदि तपाईंले दुवै प्रयोग गर्नुभएको छ भने पनि, देशको नियम नै त्यस्तो नियम हो जसले तपाईंको वरीयता (ranking) गुमाउन सक्छ, त्यसैले छुट लागू भएको मान्नु भन्दा यसको स्क्रिनले के देखाउँछ जाँच गर्नुहोस्।
यीमध्ये कुनै पनि के होइनन्
यीमध्ये कुनै पनि सफ्टवेयरलाई अद्यावधिक राख्ने विकल्प होइनन्। देशलाई ब्लक गर्नाले त्यो देशको ट्राफिक रोकिन्छ; यसले ट्राफिकले खोजिरहेको पुरानो प्लगइनलाई ठीक गर्दैन।