SEO クローラーのブロック

被リンククローラーをブロック — 検索エンジンは絶対にブロックしないでください

サイトごとのファーストクラスの Footprint-Free 制御: 検索エンジンの完全なアクセスを維持しながら、SEO および被リンククローラー (Ahrefs、Majestic、Semrush、Moz、Screaming Frog など) をブロックします。PBN ラインではデフォルトで有効になっており、User-Agent によってサーバー側で適用され、ダッシュボードおよび MCP から操作できます。競合他社のツールからリンクを隠し、SERP でのインデックス登録を維持するという、フットプリント対策の決定打です。

個別のノードとして描かれた6つのサイト。それらを結ぶはずのすべてのリンクは切断されています。
  • サイトごとの切り替え各クローラーまたはグループとして
  • デフォルトでオンFootprint-Free 回線用
  • 検索エンジンに対して安全Googlebot はブロックされていません
  • サーバー適用.htaccess UA-deny + robots.txt

フットプリントのゲームを、ひとつのコントロールで

プライベートネットワークの価値は、誰にも見られないリンクにあります。競合他社の被リンクツールが貴社の PBN サイトをクロールし、マネーサイトへの発信リンクをたどることができるようになった瞬間、ネットワークは露呈し、その優位性は失われます。

したがって、行うべき作業は明確です。Google がクロールできないサイトは検索順位を上げることができないため、検索エンジンには一切手を触れず、それらのリンクグラフを構築するバックリンク分析クローラー (Ahrefs、Majestic、Semrush、Moz、Screaming Frog、BLEXBot など) を遮断することです。スパイをブロックし、インデクサーを維持してください。

これは Footprint-Free ラインのサイトごとの切り替え設定で、デフォルトで有効になっています。各クローラーまたはグループ全体のチェックをオンまたはオフにして保存すると、エンジンがお客様に代わってルールを作成または削除します。

単にリクエストされるだけでなく、サーバー上で強制適用されます

robots.txt は推奨事項に過ぎず、攻撃的なクローラーはそれを無視します。Majestic がまさにそのように動作することが確認されています。したがって、真のブロックはサーバー側で行われ、robots.txt はその上に礼儀として重ねられた層に過ぎません。

サーバーでの User-Agent 拒否

この適用は、保存された設定に基づいてホスティングワーカーと Zinn® プラグインによって書き込まれる .htaccess、LiteSpeed、または nginx の User-Agent 拒否です。これはクローラーの善意に依存しないため、実際にクローラーを停止させるルールとなります。

ルールに従うボットのための robots.txt

これを遵守するクローラーのために、robots.txt の Disallow も記述します。念には念を入れて、マナーの良いツールは丁重に断り、マナーの悪いツールは毅然と追い払います。

最悪の脅威に対する IP および ASN の拒否

一部のクローラーは偽のユーザーエージェントの背後に隠れています。最も悪質な違反者に対しては、既知の IP または ASN の拒否設定を追加できるため、ブラウザを装ったクローラーであっても侵入を防ぐことができます。

検索エンジンを常に許可

Googlebot、Bingbot、およびその他のインデクサーがブロックリストに含まれることは決してありません。ブロックはバックリンクツールのみを対象としているため、インデックス作成と掲載順位に影響はありません。

お客様の Trust Flow を維持します

Majestic をブロックするとドメインの Trust Flow が消失するのではないかという懸念がよくあります。そのようなことはありません。Trust Flow および Citation Flow は、ドメイン自体のクロールによってではなく、ドメインへのインバウンド被リンクグラフ (Majestic が他のサイトをクロールすることで検出する、そのドメインを指すリンク) から算出されます。

PBN サイトで MajesticBot をブロックすると、Majestic がそのサイトの発リンクを検出できなくなりますが、これこそが隠すべき footprint です。これにより Majestic の API からドメインの Trust Flow や Citation Flow が削除されるわけではないため、独自の SEO データチェックでも引き続きそれらの指標を通常どおり読み取ることができます。同じことが Ahrefs DR や Moz DA にも当てはまり、これらはすべて被リンクの指標です。

よくある質問

どのクローラーがブロックされますか ?

SEO およびバックリンククローラー — Ahrefs、Majestic、Semrush、Moz、Screaming Frog、BLEXBot など。検索エンジンには一切影響しません。インデックス可能な状態を維持することが最大の目的であるため、Googlebot、Bingbot、その他のインデクサーはフルアクセスを維持します。各クローラーまたはグループのチェックを付けたり外したりして保存できます。

これはランキングに悪影響を与えますか ?

いいえ。バックリンク分析のクローラーのみがブロックされ、貴社サイトをランキング付けする検索エンジンには一切影響しません。サイトは引き続きインデックスおよびランキング登録が可能です。競合他社のツールに対してリンクグラフを非表示にしているのであり、Google から隠しているのではありません。

ブロックは実際にはどのように適用されますか ?

サーバー側で User-Agent により拒否します (.htaccess、LiteSpeed、または nginx の拒否設定)。これは robots.txt に強制力がなく、悪質なクローラーがそれを無視することが知られているためです。標準に準拠するクローラー向けには robots.txt の Disallow も記述し、偽装されたユーザーエージェントで巡回する最も悪質なアクセスに対しては、既知の IP や ASN による拒否を追加することも可能です。エンジンは、保存された設定切り替えに基づいてルールを自動的に記述および削除します。

Majestic をブロックすると、Trust Flow は失われますか ?

いいえ。Trust Flow および Citation Flow は、ドメイン自体のクロールではなく、Majestic が他のサイトをクロールして検出した、そのドメインへのインバウンド被リンクグラフに基づいて計算されます。サイト上で MajesticBot をブロックすると、Majestic がその発信リンク (隠したい footprint) を認識するのを防ぐことができますが、Majestic の API におけるドメインの指標はそのまま維持されます。同じロジックが Ahrefs の DR や Moz の DA にも適用されます。

これはデフォルトで有効になっていますか ?

Footprint-Free プランでは、はい — クローラーのブロックはデフォルトで有効になっています。PBN からマネーサイトへのリンクを隠すことが footprint 対策の核心だからです。サイトごとにどのクローラーをブロックするかは、お客様ご自身で完全にコントロールしていただけます。

リンクグラフを非表示にし、インデックスを維持します

クレジットカード不要の14日間無料トライアルを開始し、検索エンジンからの完全なアクセスを維持しながらサイトごとにバックリンククローラーをブロックできます — Footprint-Free ラインではデフォルトで有効化されており、ダッシュボードおよび MCP から管理可能です。

無料で始める