Blokowanie robotów SEO
Pierwszoklasowa, przypisana do każdej witryny kontrola w technologii Footprint-Free: blokuj roboty indeksujące SEO i profile linków zwrotnych – Ahrefs, Majestic, Semrush, Moz, Screaming Frog i pozostałe – podczas gdy wyszukiwarki zachowują pełny dostęp. Domyślnie włączona dla linii PBN, egzekwowana na poziomie serwera za pomocą nagłówka User-Agent, zarządzana z poziomu panelu oraz MCP. To gra w ukrywanie śladów: ukryj link przed narzędziami konkurencji, pozostań indeksowalny w wynikach wyszukiwania SERP.
Wartość prywatnej sieci tkwi w połączeniu, którego nikt inny nie widzi. W momencie, gdy narzędzie konkurencji do analizy linków zwrotnych jest w stanie przeszukać Twoją witrynę PBN i podążyć za jej linkiem wychodzącym do Twojej głównej strony zarobkowej, sieć zostaje ujawniona, a przewaga znika.
Zatem zadanie jest proste: odciąć crawlery analizujące backlinki, które budują te wykresy linków – Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i im podobne – pozostawiając jednocześnie wyszukiwarki nietknięte, ponieważ strona, której Google nie potrafi zaczytać, nie może być wysoko w wynikach wyszukiwania. Zablokuj szpiegów, zachowaj indeksatory.
To jest przełącznik dla poszczególnych stron w ramach linii Footprint-Free, włączony domyślnie. Zaznacz lub odznacz każdego crawlera albo całą grupę, zapisz, a silnik automatycznie zapisze lub usunie reguły za Ciebie.
Plik robots.txt ma charakter wyłącznie informacyjny, a agresywne boty go ignorują – zaobserwowano, że Majestic robi dokładnie to samo. Prawdziwa blokada musi więc znajdować się na serwerze, a robots.txt stanowi jedynie dodatkową warstwę grzecznościową.
Egzekwowanie polega na blokowaniu nagłówka User-Agent w pliku .htaccess, LiteSpeed lub nginx, co jest przygotowywane przez pracownika hostingu i wtyczkę Zinn® na podstawie zapisanych przełączników. Jest to reguła, która faktycznie zatrzymuje scrapera, ponieważ nie zależy od dobrej woli crawlera.
Tworzymy także wpis robots.txt Disallow dla tych crawlerów, które go przestrzegają – na wszelki wypadek, aby grzeczne narzędzia były odsyłane uprzejmie, a te niegrzeczne stanowczo.
Niektóre roboty sieciowe ukrywają się za fałszywymi identyfikatorami user-agent. W przypadku najbardziej uciążliwych możemy dodać reguły blokowania znanych adresów IP lub numerów ASN, dzięki czemu bot podający się za przeglądarkę nadal nie uzyska dostępu.
Googlebot, Bingbot i inne roboty indeksujące nigdy nie trafiają na czarną listę. Blokowanie jest skierowane wyłącznie do narzędzi do analizy linków zwrotnych, więc indeksowanie i pozycje w wynikach wyszukiwania pozostają nienaruszone.
Częstą obawą jest to, że zablokowanie Majestic sprawi, iż wskaźnik Trust Flow domeny zniknie. Tak się nie stanie. Wskaźniki Trust Flow oraz Citation Flow są wyliczane na podstawie grafu linków przychodzących do domeny – czyli odnośników, które do niej prowadzą i które Majestic odkrywa poprzez crawlowanie innych witryn, a nie poprzez crawlowanie samej domeny.
Zablokowanie MajesticBot w witrynie PBN uniemożliwia Majestic zobaczenie wychodzących linków tej strony, co jest dokładnie tym śladem, który chcesz ukryć. Nie powoduje to usunięcia wskaźników Trust Flow ani Citation Flow domeny z API Majestic, dzięki czemu nasze własne sprawdzenia danych SEO nadal odczytują te metryki normalnie. To samo dotyczy Ahrefs DR i Moz DA — wszystkie te pomiary dotyczą linków przychodzących.
Robotyindeksujące SEO i linków zwrotnych — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i tym podobne. Wyszukiwarki nie są w żaden sposób ograniczane: Googlebot, Bingbot i inni indeksatorzy zachowują pełny dostęp, ponieważ pozostanie widocznym w indeksie to nasz główny cel. Możesz zaznaczać i odznaczać każdego robota lub całą grupę, a następnie zapisać zmiany.
Nie. Blokowane są wyłącznie crawlery analizujące backlinki; wyszukiwarki, które pozycjonują Twoją stronę, pozostają nietknięte. Witryna nadal nadaje się do indeksowania i pozycjonowania — ukrywasz swój graf linków przed narzędziami konkurencji, a nie przed Google.
Na poziomie serwera, według User-Agent — poprzez regułę blokującą w .htaccess, LiteSpeed lub nginx — ponieważ plik robots.txt ma charakter wyłącznie informacyjny, a agresywne boty często go ignorują. Dla botów przestrzegających zasad również tworzymy wpis Disallow w pliku robots.txt, a w przypadku najbardziej uciążliwych, które crawlują pod fałszywymi nagłówkami User-Agent, możemy dodać blokady oparte na adresach IP lub numerach ASN. Silnik automatycznie zapisuje i usuwa reguły na podstawie zapisanych przez Ciebie ustawień.
Nie. Trust Flow i Citation Flow są obliczane na podstawie grafu linków przychodzących domeny – linków do niej, znalezionych przez Majestic crawluje inne witryny – a nie poprzez crawlowanie samej domeny. Zablokowanie MajesticBot w witrynie uniemożliwia Majestic widzenie jej linków wychodzitych, co stanowi footprint, który chcesz ukryć, ale pozostawia metryki domeny w API Majestic w nienaruszonym stanie. Ta sama zasada dotyczy Ahrefs DR i Moz DA.
W linii Footprint-Free – tak, blokowanie crawlerów jest domyślnie włączone, ponieważ ukrywanie linków między PBN a stroną zarobkową to sedno gry w Footprint-Free. Zachowujesz pełną kontrolę, aby dostosować, które crawlery są blokowane dla każdej strony.
Rozpocznij 14-dniowy okres próbny bez karty i blokuj roboty indeksujące linki zwrotne dla każdej strony, podczas gdy wyszukiwarki zachowują pełny dostęp – włączone domyślnie w linii Footprint-Free, sterowane z panelu i MCP.
Rozpocznij za darmo