ქვეყნების, მისამართების და ქროულერების დაბლოკვა

ეს სამი განსხვავებული პარამეტრია სამი სხვადასხვა პრობლემისთვის. მათზე წვდომა საიტის უსაფრთხოების პარამეტრებიდან შეგიძლიათ.

ქვეყნები

ან დაბლოკვის სია (ყველას შეუძლია შემოსვლა ამათ გარდა) ან დაშვების სია (არავის შეუძლია შემოსვლა ამათ გარდა). ეს ერთი გადამრთველია და შენახვამდე ორჯერ წაკითხვად ნამდვილად ღირს: დაშვების სია, რომელიც ერთ ქვეყანას შეიცავს, თქვენს საიტს ინტერნეტიდან თიშავს ყველა დანარჩენისთვის, რაც ხანდახან ზუსტად ისაა, რაც გსურთ, სხვა შემთხვევაში კი უსიამოვნო დღეს გაჩუქებთ.

სიის გასუფთავება ხსნის ყველა ქვეყნის შეზღუდვას; ცალკე ნაბიჯი „ყველგან განბლოკვა“ არ არსებობს.

⚠️ დაშვების სია გამოგრთავთ Google-იდან, და ეს ის ნაწილია, რაც ხალხს ავიწყდება. საძიებო სისტემები საკუთარი მისამართებიდან ახორციელებენ სკანირებას — Googlebot ამერიკის შეერთებული შტატებიდან, სადაც არ უნდა იყვნენ თქვენი ვიზიტორები — ამიტომ დაშვების სია, რომელიც ამ ქვეყნებს არ შეიცავს, დაბლოკავს რობოტს ყველასთან ერთად, ხოლო საიტი, რომლის სკანირებაც შეუძლებელია, ინდექსიდან ვარდება. ეს არ ხდება მყისიერად და არ არის აშკარა, რაც მას მეტად ძვირადღირებულს ხდის.

ამიტომ ჩვენ დამოწმებულ საძიებო სისტემებს ნაგულისხმევად ვუშვებთ. დატოვეთ ეს გადამრთველი უცვლელად და Google და Bing განაგრძობენ თქვენს საიტზე შემოსვლას იქიდან, საიდანაც ახორციელებენ სკანირებას, მაშინაც კი, თუ დაშვების სია მხოლოდ ერთ ქვეყანას შეიცავს. თქვენ შეგიძლიათ გამორთოთ გამონაკლისი, თუ ნამდვილად არ გსურთ გამონაკლისები — ეს ზემოთ აღწერილ რისკს ზუსტად აღადგენს, და ეკრანი გაცნობებთ ამას, როდესაც ამას გააკეთებთ.

⛔ გამონაკლისს სჭირდება პროვაიდერი, რომელსაც რობოტის გადამოწმება შეუძლია, და ეს ყველას არ შეუძლია. გადამოწმება ნიშნავს იმის შემოწმებას, რომ ვიზიტორი, რომელიც თავს Googlebot-ს უწოდებს, ნამდვილად Google-ია მისი მისამართების მიხედვით — და არა მისი სიტყვის ნდობას, რისი გაყალბებაც ნებისმიერს შეუძლია. ჩვენი Cloudflare edge ამას აკეთებს. Bunny, CDN77 და Gcore ამას არ აკეთებენ, ამიტომ მათზე უსაფრთხოდ გასაშვები არაფერია და ჩვენ არაფერს ვუშვებთ. პროვაიდერზე, რომელსაც რობოტების შემოწმება არ შეუძლია, დაშვების სიას ზემოთ აღწერილი სრული რისკი ახლავს — საიტის ქვეყნების ეკრანი გიჩვენებთ, რომელ შემთხვევაში ხართ, და სანამ გამონაკლისს დაეყრდნობით, ის უნდა წაიკითხოთ. იქ უპირატესობა დაბლოკვის სიას მიანიჭეთ.

ცალკეული მისამართები

კონკრეტული უსიამოვნებისთვის — ერთი მისამართი, რომელიც ფორმას ურტყამს, ერთი სკრეიპერი. ეს სწორი ხელსაწყოა რამდენიმე მისამართისთვის და არასწორია შეტევისთვის, რომელიც ათასობით მისამართიდან მოდის და მათ უფრო სწრაფად ცვლის, ვიდრე თქვენ აკრეფას მოასწრებთ. ამისთვის CDN-ის დაცვაა ის, რაც გჭირდებათ.

SEO რობოტები

მესამე მხარის SEO რობოტები — ისინი, რომლებიც უკუკავშირების (backlink) მონაცემთა ბაზებს ქმნიან — შეიძლება ინდივიდუალურად დაიბლოკოს. ადამიანები ამას აკეთებენ, რათა თავიდან აიცილონ კონკურენტების მიერ საკუთარი ბმულების პროფილის კატალოგიზაცია.

აქ საკუთარი თავის დეინდექსაციას ვერ მოახდენთ. საძიებო სისტემები განზრახ არ არის ასარჩევ სიაში: Googlebot-ის დაბლოკვა არის გადაწყვეტილება, რომლის შედეგებიც ბევრად სცილდება ამ ეკრანის დანიშნულებას, ამიტომ ეკრანი ამას არ გააკეთებს. თქვენი robots.txt ამ პარამეტრით ხელუხლებელი რჩება და თქვენს განკარგულებაშია.

⚠️ ეს დაცვა სპეციფიკურია ამ კონტროლისთვის. ზემოთ მოცემულ ქვეყნის წესს აქვს საკუთარი დამცავი ზღვარი, მაგრამ პირობითი — ის დამოწმებულ საძიებო სისტემებს ნაგულისხმევად უშვებს, და მხოლოდ იქ, სადაც თქვენს პროვაიდერს მათი გადამოწმება შეუძლია. თუ ორივე გამოიყენეთ, ქვეყნის წესი მაინც რჩება იმად, რამაც შეიძლება თქვენი რეიტინგები დაგაკარგვინოთ, ასე რომ შეამოწმეთ, რას იტყობინება მისი ეკრანი, ნაცვლად იმისა, რომ ივარაუდოთ, რომ გამონაკლისი მოქმედებს.

რას არ წარმოადგენს არცერთი მათგანი

არცერთი მათგანი არ ცვლის პროგრამული უზრუნველყოფის მუდმივ განახლებას. ქვეყნის დაბლოკვა აჩერებს ამ ქვეყნის ტრაფიკს; ის არ ასწორებს მოძველებულ პლაგინს, რომლის შემოწმებასაც ტრაფიკი ცდილობდა.