Блокиране от SEO обхождащи програми
Пърarclass контрол на база сайт за Footprint-Free: блокирайте SEO и беклинк кроулърите — Ahrefs, Majestic, Semrush, Moz, Screaming Frog и останалите — докато търсачките запазват пълен достъп. Включен по подразбиране за PBN линията, наложен на сървърно ниво по User-Agent, управляван от таблото за управление и MCP. Това е играта с отпечатъците: скрийте линка от инструментите на конкурентите, останете индексируеми в SERP.
Стойността на една приватна мрежа е връзката, която никой друг не може да види. В момента, в който инструментът за обратни връзки на конкурент може да обходи вашия PBN сайт и да последва изходящия му линк към вашия основен сайт, мрежата е изложена на риск — и предимството е загубено.
Задачата е прецизна: затворете вратата за крауърите за анализ на обратни връзки, които изграждат тези линк графи — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot и техните подобни — като същевременно оставите търсещите машини напълно непокътнати, защото сайт, който Google не може да обходи, не може да се класира. Спрете шпионерите, запазете индексаторите.
Този превключвател е за отделни сайтове в реда на Footprint-Free и е включен по подразбиране. Маркирайте или отмаркирайте всеки робот или цяла група, запазете и системата ще запише или премахне правилата вместо вас.
robots.txt е препоръчителен, а агресивните краулери го игнорират — наблюдавано е как Majestic прави точно това. Така че истинското блокиране се извършва на ниво сървър, като robots.txt служи само като допълнителен слой за учтивост.
Принудителното прилагане е .htaccess, LiteSpeed или nginx User-Agent забрана, написана от хостинг работника и плъгина Zinn® от вашите запазени превключватели. Това е правилото, което реално спира обхождащия бот, тъй като не зависи от добрата воля на бота.
Ние също така пишем Disallow правило в robots.txt за тези краулери, които го спазват — за пълна сигурност, така че послушните инструменти да бъдат учтиво отблъснати, а нарушителите — лишени от достъп.
Някои уеб обхождащи се крият зад фалшиви потребителски агенти. За най-големите нарушители можем да добавим забрани по познат IP адрес или ASN, така че обхождащ софтуер, който се представя за браузър, все пак да не бъде допуснат.
Googlebot, Bingbot и останалите индексатори никога не са в списъка с блокирани. Блокирането е насочено изключително към инструментите за обратни връзки (backlink), така че индексирането и класирането остават засегнати.
Често срещано опасение е, че блокирането на Majestic ще направи Trust Flow на даден домейн да изчезне. Това няма да стане. Trust Flow и Citation Flow се изчисляват от входящата беклінк графа на домейна — линковете, които сочат към него, които Majestic открива чрез обхождане на други сайтове, а не чрез обхождане на самия домейн.
Блокирането на MajesticBot във вашия PBN сайт спира Majestic да вижда исходящите връзки на този сайт, което е точно този footprint, който искате да скриете. Това не премахва Trust Flow или Citation Flow на домейна от API-то на Majestic, така че нашите собствени проверки на SEO данните продължават да четат тези показатели нормално. Същото важи и за Ahrefs DR и Moz DA — всички измервания на входящи връзки.
SEO и блеклинк краулърите — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot и други подобни. Търсачките никога не се засягат: Googlebot, Bingbot и останалите индексатори запазват пълен достъп, тъй като поддържането на възможност за индексиране е самата същност. Можете да маркирате и премахвате отметка от всеки краулър или група от тях и да запазите.
Не. Блокирани са само обхождащите ботове за анализ на брейклинк профила; търсещите машини, които ви класират, са напълно оставени на мира. Сайтът остава индексируем и подходящ за класиране — вие криете своя линк граф от инструментите на конкурентите, а не от Google.
На сървъра, по User-Agent — забрана в .htaccess, LiteSpeed или nginx — тъй като robots.txt е само препоръчителен и е известно, че агресивните краулери го игнорират. Ние пишем robots.txt Disallow и за спазващите правилата, и можем да добавим забрани по IP или ASN за най-лошите нарушители, които обхождат под фалшиви user-agent-и. Е двигателят пише и премахва правилата автоматично от вашите запазени превключватели.
Не. Trust Flow и Citation Flow се изчисляват от графа от входящи обратни връзки на домейна – връзки към него, открити при обхождането на други сайтове от Majestic – а не чрез обхождане на самия домейн. Блокирането на MajesticBot в сайта спира Majestic да вижда неговите изходящи връзки, което е footprint, който искате да бъде скрит, но запазва метриките на домейна в API на Majestic непокътнати. Същата логика се прилага за Ahrefs DR и Moz DA.
По линията на Footprint-Free, да — блокирането на краулъри е включено по подразбиране, тъй като скриването на връзката между PBN и основния сайт е същността на играта с отпечатъците. Запазвате пълен контрол да регулирате кои краулъри да бъдат блокирани за отделните сайтове.
Започнете 14-дневен пробен период без нужда от карта и блокирайте крауърите за обратни връзки за всеки сайт, докато търсачките запазват пълен достъп — включено по подразбиране за линията Footprint-Free, управлявано от таблото за управление и MCP.
Започни безплатно