SEO-crawler tiltás
Első osztályú, webhelyenkénti Footprint-Free vezérlés: blokkolja a SEO- és backlink-kúszókat – Ahrefs, Majestic, Semrush, Moz, Screaming Frog és a többit –, miközben a keresőmotorok teljes hozzáférést kapnak. A PBN-vonalon alapértelmezés szerint bekapcsolva, szerverszinten érvényesítve User-Agent alapján, a vezérlőpultról és az MCP-ről irányítva. Ez a lábnyomjáték: rejtse el a hlinket a versenytársak eszközei elől, és maradjon indexelhető a SERP-ekben.
Egy magánhálózat értéke abban a kapcsolatban rejlik, amelyet senki más nem láthat. Abban a pillanatban, amikor egy versenytárs visszamutató hivatkozásokat elemző eszköze képes feltérképezni a PBN-webhelyét, és követni tudja a pénztermelő webhelyére mutató kimenő hivatkozását, a hálózat lebukik – és az előny elillan.
A feladat tehát pontos: zárja ki a backlink-elemző crawlereket, amelyek azokat a hivatkozási gráfokat építik – Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot és társaik –, miközben a keresőmotorokat teljesen érintetlenül hagyja, mert egy olyan webhely, amelyet a Google nem tud crawl, nem tud rangsorolni. Blokkolja a kémeket, tartsa meg az indexelőket.
Ez egy webhelyenkénti kapcsoló a Footprint-Free termékcsaládon, alapértelmezés szerint bekapcsolva. Jelölje be vagy szüntesse meg az egyes keresőrobotok vagy egy egész csoport jelölését, mentse el, és a motor beírja vagy eltávolítja a szabályokat az Ön helyett.
A robots.txt csak ajánlás, az agresszív keresőrobotok pedig figyelmen kívül hagyják – a Majestic esetében is pontosan ez figyelhető meg. Így a valódi tiltás a szerveren történik, a robots.txt pedig csak egy udvariassági rétegként szolgál ezen felül.
A tiltás egy .htaccess, LiteSpeed vagy nginx User-Agent tiltás, amelyet a tárhely-munkamenet és az elmentett beállításokból származó Zinn® bővítmény hoz létre. Ez az a szabály, amely ténylegesen megállítja a keresőrobotot, mivel nem függ a keresőrobot jóindulatától.
Egy robots.txt Disallow beállítást is írunk az azt tiszteletben tartó keresőrobotok számára — biztos, ami biztos, így a szabályos eszközöket udvariasan, míg a szabálytalanokat határozottan utasítjuk vissza.
Egyes keresőrobotok hamis user-agent mögé rejtőznek. A legproblémásabb esetekben ismert IP-címek vagy ASN-ek alapján beállíthatunk tiltást, így a böngészőnek álcázott keresőrobot sem jut be.
A Googlebot, a Bingbot és a többi indexelő soha nem kerül fel a letiltási listára. A tiltás kizárólag a visszahivatkozási eszközökre irányul, így az indexelés és a helyezések érintetlenek maradnak.
Gyakori aggodalom, hogy a Majestic blokkolása a domain Trust Flow értékének eltűnését okozza. Nem fogja. A Trust Flow és a Citation Flow értékét a domain bejövő visszahivatkozási gráfjából – a rá mutató linkekből, amelyeket a Majestic más oldalak feltérképezésével talál meg – számítják ki, nem pedig magának a domainnek a feltérképezésével.
A MajesticBot blokkolása a PBN-webhelyeden megakadályozza, hogy a Majestic lássa az adott webhely kimenő linkjeit, ami pontosan az a footprint, amelyet el szeretnél rejteni. Ez nem távolítja el a domain Trust Flow vagy Citation Flow értékét a Majestic API-jából, így a saját SEO-adatellenőrzéseink továbbra is a szokásos módon tudják olvasni ezeket a metrikákat. Ugyanez vonatkozik az Ahrefs DR-re és a Moz DA-ra is – amelyek mind bejövő linkeket mérnek.
Az SEO- és visszahivatkozás-keresők — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot és hasonlók. A keresőmotorokat ez nem érinti: a Googlebot, a Bingbot és a többi indexelő teljes hozzáférést kap, mivel az indexelhetőség fenntartása a legfontosabb cél. Az egyes keresőket vagy egy csoportot bejelölheti, illetve a jelölést megszüntetheti, majd menthet.
Nem. Csak a visszahivatkozás-elemző crawlereket blokkoljuk; a rangsoroló keresőmotorokat teljesen szabadon hagyjuk. Az oldal indexelhető és rangsorolható marad – a linkgráfját a versenytársak eszközei elől rejti el, nem pedig a Google elől.
A kiszolgálón, a User-Agent alapján – egy .htaccess, LiteSpeed vagy nginx letiltással –, mivel a robots.txt csak ajánlás, és az agresszív crawlereik híresen figyelmen kívül hagyják azt. A szabálykövetők számára is írunk egy robots.txt Disallow bejegyzést, és hozzáadhatunk ismert IP- vagy ASN-alapú letiltásokat a legrosszabb elkövetőkhöz, amelyek hamis user-agentek alatt vizsgálódnak. A motor automatikusan megírja és eltávolítja a szabályokat az Ön által mentett beállítások alapján.
Nem. A Trust Flow és a Citation Flow kiszámítása egy domain bejövő backlink-gráfjából történik – a rá mutató linkekből, amelyeket a Majestic más oldalak feltérképezésével talál meg –, és nem magának a maszknak (domainnek) a feltérképezésével. A MajesticBot blokkolása a webhelyen megakadályozza, hogy a Majestic lássa a kimenő linkeket, ami a rejtendő footprint, de a domain metrikáit sértetlenül hagyja a Majestic API-ban. Ugyanez a logika vonatkozik az Ahrefs DR-re és a Moz DA-ra is.
A Footprint-Free termékcsaládon belül igen – a keresőrobotok blokkolása alapértelmezés szerint be van kapcsolva, mivel a PBN és a pénztermelő oldal közötti kapcsolat elrejtése a hálózati rejtőzködés lényege. Teljes körű irányítást kap annak testreszabásához, hogy mely keresőrobotokat blokkolja webhelyenként.
Kezdj el egy kártya nélküli 14 napos próbaidőszakot, és zárd ki a hivatkozáskeresőket oldalanként, miközben a keresőmotorok teljes hozzáférést kapnak – az alapértelmezés szerint bekapcsolt Footprint-Free vonalon, amely a vezérlőpultról és az MCP-ből vezérelhető.
Kezdje ingyen