Blokowanie robotów SEO
Najwyższej klasy kontrola Footprint-Free dla poszczególnych witryn: blokowanie robotów indeksujących SEO i linki zwrotne — Ahrefs, Majestic, Semrush, Moz, Screaming Frog i pozostałych — podczas gdy wyszukiwarki zachowują pełny dostęp. Domyślnie włączone dla linii PBN, wymuszane na serwerze za pomocą User-Agent, zarządzane z poziomu panelu nawigacyjnego i MCP. To gra o footprint: ukryj link przed narzędziami konkurencji, pozostań indeksowalny w wynikach SERP.
Wartość prywatnej sieci polega na linku, którego nikt inny nie może zobaczyć. W momencie, gdy narzędzie do analizy linków zwrotnych konkurenta może przeszukać twoją stronę PBN i przejść po jej linku wychodzącym do twojej strony docelowej, sieć zostaje zdemaskowana — a przewaga znika.
Zadanie jest więc precyzyjne: zablokować roboty do analizy linków zwrotnych, które budują te grafy linków — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i im podobne — pozostawiając wyszukiwarki całkowicie nienaruszone, ponieważ strona, której Google nie może zaindeksować, nie może uzyskać pozycji w rankingu. Zablokuj szpiegów, zatrzymaj roboty indeksujące.
Jest to przełącznik dla poszczególnych witryn w linii Footprint-Free, domyślnie włączony. Proszę zaznaczyć lub odznaczyć każdego crawlera bądź całą grupę i zapisać zmiany, a silnik utworzy lub usunie reguły za Państwa.
Plik robots.txt ma charakter wyłącznie doradczy, a agresywne crawlery go ignorują — zaobserwowano, że Majestic robi dokładnie to. Prawdziwa blokada odbywa się więc na serwerze, a robots.txt stanowi jedynie grzecznościową warstwę wierzchnią.
Egzekwowanie to blokada User-Agent w .htaccess, LiteSpeed lub nginx, zapisana przez proces roboczy hostingu oraz wtyczkę Zinn® na podstawie Państwa zapisanych przełączników. Jest to reguła, która rzeczywiście zatrzymuje robota sieciowego, ponieważ nie zależy od jego dobrej woli.
Tworzymy również regułę Disallow w pliku robots.txt dla robotów indeksujących, które jej przestrzegają — dmuchamy na zimne, aby narzędzia przestrzegające zasad były odprawiane uprzejmie, a te łamiące reguły — stanowczo.
Niektóre roboty indeksujące ukrywają się za fałszywymi agentami użytkownika. W przypadku najgorszych sprawców możemy dodać blokady znanych adresów IP lub ASN, dzięki czemu robot udający przeglądarkę nadal nie uzyska dostępu.
Googlebot, Bingbot i inne roboty indeksujące nigdy nie znajdują się na liście blokowanych. Blokowanie jest skierowane wyłącznie na narzędzia do linków zwrotnych, więc indeksowanie i pozycje pozostają nienaruszone.
Częstą obawą jest to, że zablokowanie Majestic spowoduje utratę Trust Flow domeny. Tak się nie stanie. Wskaźniki Trust Flow i Citation Flow są obliczane na podstawie grafu przychodzących linków zwrotnych domeny — odnośników prowadzących do niej, które Majestic odnajduje poprzez indeksowanie innych witryn, a nie poprzez indeksowanie samej domeny.
Zablokowanie MajesticBot w twojej witrynie PBN uniemożliwia Majestic zobaczenie linków wychodzących z tej witryny, co jest dokładnie tym śladem (footprint), który chcesz ukryć. Nie usuwa to wskaźników Trust Flow ani Citation Flow domeny z API Majestic, więc nasze własne testy danych SEO nadal odczytują te metryki normalnie. To samo dotyczy Ahrefs DR i Moz DA — wszystkich wskaźników linków przychodzących.
Robotly indeksujące SEO i linków zwrotnych — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i tym podobne. Wyszukiwarki nigdy nie są modyfikowane: Googlebot, Bingbot i inne roboty indeksujące zachowują pełny dostęp, ponieważ zachowanie możliwości indeksowania jest tutaj najważniejsze. Mogą Państwo zaznaczać i odznaczać poszczególne roboty lub grupy, a następnie zapisać zmiany.
Nie. Blokowane są wyłącznie roboty indeksujące do analizy linków zwrotnych; wyszukiwarki odpowiedzialne za pozycjonowanie pozostają całkowicie nienaruszone. Witryna nadal może być indeksowana i pozycjonowana — ukrywają Państwo swój profil linków przed narzędziami konkurencji, a nie przed Google.
Na serwerze, według User-Agent — blokada przez .htaccess, LiteSpeed lub nginx — ponieważ robots.txt ma jedynie charakter doradczy, a agresywne crawlery zwykle go ignorują. Tworzymy również regułę robots.txt Disallow dla botów przestrzegających zasad i możemy dodać blokady znanych adresów IP lub ASN dla najbardziej uciążliwych sprawców, którzy skanują pod fałszywymi nagłówkami user-agent. Mechanizm automatycznie zapisuje i usuwa te reguły na podstawie zapisanych przez Państwa przełączników.
Nie. Wskaźniki Trust Flow i Citation Flow są obliczane na podstawie grafu linków zwrotnych przychodzących do domeny — linków prowadzących do niej, znalezionych przez Majestic podczas indeksowania innych witryn — a nie poprzez indeksowanie samej domeny. Zablokowanie robota MajesticBot w witrynie uniemożliwia serwisowi Majestic wykrycie jej linków wychodzących, które stanowią footprint mający pozostać ukryty, lecz pozostawia nienaruszone metryki domeny w interfejsie API serwisu Majestic. Ta sama logika ma zastosowanie do wskaźników Ahrefs DR i Moz DA.
W linii Footprint-Free, tak — blokowanie crawlerów jest domyślnie włączone, ponieważ ukrywanie linku z PBN do money-site stanowi istotę gry w footprint. Zachowują Państwo pełną kontrolę nad dostosowywaniem, które crawlery mają być blokowane dla poszczególnych witryn.
Rozpocznij 14-dniowy okres próbny bez karty i blokuj roboty indeksujące linki zwrotne dla poszczególnych witryn, podczas gdy wyszukiwarki zachowują pełny dostęp — domyślnie włączone dla linii Footprint-Free, sterowane z panelu zarządzania i MCP.
Rozpocznij za darmo