Блокиране на SEO ботове
Първокласен контрол Footprint-Free за всеки отделен сайт: блокирайте ботовете за SEO и обратни връзки — Ahrefs, Majestic, Semrush, Moz, Screaming Frog и останалите — докато търсачките запазват пълен достъп. Включено по подразбиране за линията PBN, прилагано на ниво сървър чрез User-Agent, управлявано от контролния панел и MCP. Това е играта на footprint: скрийте връзката от инструментите на конкурентите, останете индексируеми в SERP.
Стойността на частната мрежа е във връзката, която никой друг не може да види. В момента, в който инструмент за обратни връзки на конкурент може да обходи Вашия PBN сайт и да последва изходящата му връзка към Вашия основен сайт, мрежата е разкрита — и предимството е загубено.
Така че задачата е точна: блокирайте ботовете за анализ на обратни връзки, които изграждат тези графи на връзките — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot и подобните им — като същевременно оставите търсачките напълно недокоснати, тъй като сайт, който Google не може да обходи, не може да се класира. Блокирайте шпионите, запазете индексаторите.
Това е превключвател за всеки отделен сайт на линията Footprint-Free, включен по подразбиране. Поставете или премахнете отметката за всеки робот или за цяла група, запазете и системата ще запише или премахне правилата вместо вас.
Файлът robots.txt има препоръчителен характер, а агресивните ботове го игнорират — Majestic е забелязан да прави точно това. Така че същинското блокиране се извършва на сървъра, като robots.txt остава само учтив предварителен слой.
Прилагането представлява .htaccess, LiteSpeed или nginx User-Agent забрана, записана от хостинг процеса и добавката Zinn® въз основа на запазените от Вас превключватели. Това е правилото, което действително спира бота, тъй като не зависи от неговото добронамерено поведение.
Ние също така пишем robots.txt Disallow за ботовете, които го зачитат — двойно подсигуряване, така че възпитаните инструменти да бъдат отклонявани учтиво, а невъзпитаните – категорично.
Някои роботи за обхождане се крият зад фалшиви потребителски агенти. За най-сериозните нарушители можем да добавим забрани по известни IP адреси или ASN, така че робот, представящ се за браузър, все пак да не може да влезе.
Googlebot, Bingbot и другите ботове за индексиране никога не са в списъка за блокиране. Блокирането е насочено изключително към инструментите за обратни връзки, така че индексирането и класирането остават незасегнати.
Често срещано притеснение е, че блокирането на Majestic ще доведе до изчезване на показателя Trust Flow на домейна. Това няма да стане. Trust Flow и Citation Flow се изчисляват от графа на входящите обратни връзки на домейна — връзките, сочещи към него, които Majestic открива чрез обхождане на други сайтове, а не чрез обхождане на самия домейн.
Блокирането на MajesticBot на вашия PBN сайт пречи на Majestic да вижда изходящите връзки на този сайт, което е точно този footprint, който искате да бъде скрит. Това не премахва Trust Flow или Citation Flow на домейна от API на Majestic, така че нашите собствени проверки на SEO данни продължават да отчитат тези показатели нормално. Същото важи и за Ahrefs DR и Moz DA — все показатели за входящи връзки.
Роботите за SEO и обратни връзки — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot и подобни. Търсачките никога не се засягат: Googlebot, Bingbot и другите индексатори запазват пълен достъп, защото запазването на индексируемостта е целият смисъл. Можете да отмятате и премахвате отметката за всеки робот или за група, след което да запазите.
Не. Блокират се само ботовете за анализ на обратни връзки; търсачките, които класират сайта Ви, остават напълно незасегнати. Сайтът остава индексируем и подлежащ на класиране — Вие скривате графа си от връзки от инструментите на конкурентите, а не от Google.
На сървъра, чрез User-Agent — забрана чрез .htaccess, LiteSpeed или nginx — тъй като robots.txt има само препоръчителен характер и е известно, че агресивните ботове го игнорират. За спазващите правилата пишем и robots.txt Disallow, като можем да добавим и блокирания на известни IP или ASN за най-сериозните нарушители, които обхождат с фалшиви потребителски агенти. Системата автоматично записва и премахва правилата въз основа на вашите запазени превключватели.
Не. Trust Flow и Citation Flow се изчисляват от графа на входящите обратни връзки към домейна — връзки към него, открити от Majestic при обхождане на други сайтове — а не чрез обхождане на самия домейн. Блокирането на MajesticBot на сайта спира Majestic да вижда неговите изходящи връзки, което е именно този footprint, който искате да бъде скрит, но запазва показателите на домейна в API на Majestic непокътнати. Същата логика се прилага и за Ahrefs DR и Moz DA.
В линията Footprint-Free, да — блокирането на ботове е включено по подразбиране, тъй като скриването на връзката между PBN и целевия сайт (money-site) е същността на играта с footprint. Запазвате пълен контрол да регулирате кои ботове да бъдат блокирани за всеки сайт.
Започнете 14-дневен пробен период без карта и блокирайте ботовете за обратни връзки за всеки сайт, докато търсачките запазват пълен достъп — включено по подразбиране за линията Footprint-Free, управлявано от контролния панел и MCP.
Започнете безплатно