Blokiranje SEO pauka
Prvoklasna, pojedinačna Footprint-Free kontrola: blokirajte SEO i beklink „crawlere“ — Ahrefs, Majestic, Semrush, Moz, Screaming Frog i ostale — dok pretraživači zadržavaju potpuni pristup. Uključeno po podrazumevanim podešavanjima za PBN liniju, sprovodi se na nivou servera putem User-Agent-a, a upravlja se sa kontrolne table i MCP-a. To je igra bez tragova: sakrijte link od alata konkurencije, ostanite indeksirani na SERP-ovima.
Vrednost privatne mreže je u vezi koju niko drugi ne može da vidi. Onog trenutka kada alat za povratne veze nekog konkurenta može da obiđe vaš PBN sajt i prati njegov odlazni link do vašeg glavnog sajta, mreža je izložena — i prednost je nestala.
Dakle, zadatak je jasan: blokirajte botove za analizu povratnih veza koji grade te grafikone veza — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i slične — dok pretraživače ostavljate potpuno netaknutima, jer sajt koji Google ne može da indeksira ne može ni da se rangira. Blokirajte špijune, zadržite indeksere.
Ovo je prekidač po sajtu na Footprint-Free liniji, koji je uključen podrazumevano. Označite ili opozovite izbor svakog skenera, ili cele grupe, sačuvajte, i sistem će pisati ili uklanjati pravila umesto vas.
robots.txt je savetodavni fajl i agresivni botovi ga ignorišu — primetđeno je da Majestic radi upravo to. Zato se pravo blokiranje vrši na nivou servera, dok robots.txt služi kao dodatni sloj kurtoazije.
Sprovođenje se vrši preko .htaccess, LiteSpeed ili nginx User-Agent zabrane, koju zapisuju hosting radnik i Zinn® dodatak na osnovu vaših sačuvanih opcija. Ovo je pravilo koje zapravo zaustavlja pretraživač, jer ne zavisi od dobre volje pretraživača.
Takođe pišemo robots.txt Disallow za botove koji ga poštuju — za svaki slučaj, tako da se pristojni alati učtivo odbiju, a oni nepristojni odlučno.
Neki web-kriparčići se kriju iza lažnih korisničkih agenata. Za one najgore možemo dodati zabrane zasnovane na poznatim IP adresama ili ASN-ovima, tako da kriparčić koji se pretvara da je pretraživač i dalje ne može da prođe.
Googlebot, Bingbot i drugi indekseri se nikada ne nalaze na crnoj listi. Blokiranje je usmereno isključivo na alate za povratne linkove, tako da indeksiranje i rangiranje ostaju netaknuti.
Uobičajena briga je da će blokiranje Majestic dovesti do nestanka metrike Trust Flow domena. Neće. Metrike Trust Flow i Citation Flow se izračunavaju na osnovu grafa dolaznih povratnih veza domena — veza koje upućuju na njega, a koje Majestic pronalazi sakupljanjem podataka sa drugih sajtova — a ne sakupljanjem podataka sa samog domena.
Blokiranje MajesticBot-a na vašem PBN sajtu sprečava Majestic da vidi odlazne veze tog sajta, što je upravo onaj footprint koji želite da sakrijete. To ne uklanja Trust Flow niti Citation Flow domena sa Majestic-ovog API-ja, tako da naše sopstvene provere SEO podataka nastavljaju da čitaju te metrike normalno. Isto važi za Ahrefs DR i Moz DA — sve mere dolaznih veza.
SEO i sEO skeneri povratnih linkova — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot i slični. Pretraživači nikada nisu blokirani: Googlebot, Bingbot i drugi indeksari zadržavaju potpuni pristup, jer je mogućnost indeksiranja i jeste poenta. Možete označiti i odznačiti svaki skener ili grupu i sačuvati promene.
Ne. Blokirani su samo radnici za analizu povratnih veza; pretraživači koji vas rangiraju ostavljeni su u potpunosti na miru. Sajt ostaje indeksirljiv i rangirljiv — sakrivate svoj grafikon veza od alata konkurencije, a ne od Google.
Na nivou servera, preko User-Agent-a — .htaccess, LiteSpeed ili nginx blokadom — zato što je robots.txt samo savetodavne prirode, a poznato je da ga agresivni sakupljači podataka ignorišu. Pišemo robots.txt Disallow i za one koji poštuju pravila, a za najgore prekršioca koji vrše indeksiranje pod lažnim user-agent-ima možemo dodati blokade po poznatim IP adresama ili ASN-ovima. Mehanizam automatski ispisuje i uklanja pravila na osnovu vaših sačuvanih opcija.
Ne. Trust Flow i Citation Flow se izračunavaju na osnovu grafa dolaznih povratnih veza domena – veza ka njemu koje Majestic pronalazi sakupljanjem podataka sa drugih sajtova – a ne sakupljanjem podataka sa samog domena. Blokiranje bot-a MajesticBot na sajtu sprečava Majestic da vidi njegove odlazne veze, što je footprint koji želite da sakrijete, ali metrike domena u Majestic API-ju ostaju netaknute. Isto važi i za Ahrefs DR i Moz DA.
Na Footprint-Free liniji, da — blokiranje crawler-a je uključeno po defaultu, jer je sakrivanje veze između PBN-a i money sajta suština footprint igre. Zadržavate potpunu kontrolu da podesite koji crawler-i su blokirani po sajtu.
Započnite 14-dnevni probni period bez unosa kartice i blokirajte botove za prikupljanje povratnih veza po sajtu dok pretraživači zadržavaju potpuni pristup — podrazumevano uključeno za Footprint-Free liniju, a kontroliše se sa kontrolne table i iz MCP-a.
Započni besplatno