Блокування SEO-краулерів
Пер-класний контроль Footprint-Free для кожного сайту: блокуйте SEO- та беклінк-краулери — Ahrefs, Majestic, Semrush, Moz, Screaming Frog та решту, — тоді як пошукові системи зберігають повний доступ. Увімкнено за замовчуванням для лінійки PBN, примусово застосовується на сервері за User-Agent, керується з дашборда та MCP. Це гра у відбитки: приховуйте посилання від інструментів конкурентів, залишайтеся індексованими в SERP.
Цінність приватної мережі полягає в посиланні, яке ніхто інший не бачить. Щойно інструмент конкурентів для аналізу зворотних посилань зможе просканувати ваш сайт PBN і перейти за вихідним посиланням на ваш основний сайт, мережа виявиться розкритою — і перевага зникне.
Отже, завдання полягає в наступному: закрити доступ сканерам для аналізу зворотних посилань, які будують ці графи посилань — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot та подібним до них, — залишивши пошукові системи повністю недоторканими, оскільки сайт, який Google не може просканувати, не може займати позиції в рейтингу. Блокуйте шпигунів, залишайте індексатори.
Цей перемикач наявний для кожного сайту в рядку Footprint-Free і за умовчанням увімкнений. Позначте або зніміть позначку з кожного сканера чи цілої групи, збережіть, і рушій самостійно запише або видалить правила для вас.
Файл robots.txt має рекомендаційний характер, і агресивні сканери ігнорують його — саме так неодноразово помічали поведінку Majestic. Тому справжнє блокування налаштовується на сервері, тоді як robots.txt виступає лише додатковим шаром для ввічливості.
Заборона здійснюється за допомогою правила User-Agent у .htaccess, LiteSpeed або nginx, створеного працівником хостингу та плагіном Zinn® на основі збережених вами параметрів. Це правило, яке реально зупиняє робота, оскільки воно не залежить від його сумлінності.
Ми також пишемо заборону в robots.txt для роботів, які її дотримуються — про всяк випадок, щоб ввічливих інструментів попросили піти, а з неслухняними обійшлися рішуче.
Деякі сканери приховуються за фальшивими юзер-агентами. Для найгірших порушників ми можемо додати заборони за відомими IP або ASN, щоб сканер, який прикидається браузером, все одно не зміг потрапити всередину.
Googlebot, Bingbot та інші індексатори ніколи не потрапляють до чорного списку. Блокування спрямоване виключно на інструменти для зворотних посилань, тому індексація та позиції залишаться незмінними.
Поширеним побоюванням є те, що блокування Majestic призведе до зникнення Trust Flow домену. Це не так. Trust Flow та Citation Flow обчислюються на основі графа вхідних зворотних посилань домену — посилань, що вказують на нього, які Majestic знаходить шляхом сканування інших сайтів, а не шляхом сканування самого домену.
Блокування MajesticBot на вашому сайті PBN заважає Majestic бачити вихідні посилання цього сайту, що якраз і є тим фулпринтом, який ви хочете приховати. Це не видаляє Trust Flow чи Citation Flow домену з API Majestic, тому наші власні перевірки SEO-даних продовжують зчитувати ці метрики в звичайному режимі. Те ж саме стосується Ahrefs DR та Moz DA — усіх показників вхідних посилань.
SEO- та беклінк-краулери — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot тощо. Пошукові системи залишаються недоторканими: Googlebot, Bingbot та інші індексатори зберігають повний доступ, оскільки залишатися індексованим — це і є головна мета. Ви можете вибирати або знімати вибір з кожного краулера чи групи та зберігати зміни.
Ні. Заблоковано лише сканери аналізу зворотних посилань, тоді як пошукові системи, які вас ранжують, залишаються повністю недоторканими. Сайт залишається доступним для індексування та ранжування — ви приховуєте свій граф посилань від інструментів конкурентів, а не від Google.
На рівні сервера за допомогою User-Agent — через .htaccess, LiteSpeed або заборону nginx — оскільки robots.txt є лише рекомендацією, і відомо, що агресивні сканери ігнорують його. Ми також створюємо інструкцію Disallow у robots.txt для слухняних ботів і можемо додати заборони за IP-адресами або ASN для найгірших порушників, які сканують під підробленими User-Agent. Рушій автоматично записує та видаляє правила відповідно до ваших збережених налаштувань.
Ні. Trust Flow і Citation Flow обчислюються на основі графа вхідних зворотних посилань домена (посилань на нього, виявлених Majestic під час сканування інших сайтів), а не шляхом сканування самого домена. Блокування MajesticBot на сайті зупиняє бачення Majestic його вихідних посилань, що є цифровим слідом, який ви хочете приховати, але залишає метрики домена в API Majestic незмінними. Та сама логіка застосовується до Ahrefs DR і Moz DA.
Щодо лінійки Footprint-Free, так — блокування пошукових роботів увімкнено за замовчуванням, оскільки приховування зв'язку між PBN та комерційним сайтом є основою гри з пошуковими слідами. Ви зберігаєте повний контроль над налаштуванням того, які саме роботи блокуються для кожного сайту.
Почніть 14-денний пробний період без картки та блокуйте сканери зворотних посилань для кожного сайту, тоді як пошукові системи зберігають повний доступ — за замовчуванням увімкнено для лінійки Footprint-Free, керується з панелі керування та MCP.
Почати безплатно