مسدودسازی خزنده‌های سئو

خزنده‌های بک‌لینک را مسدود کنید — هرگز موتورهای جستجو را مسدود نکنید

یک کنترل درجه‌یک Footprint-Free برای هر سایت: خزنده‌های سئو و بک‌لینک — Ahrefs، Majestic، Semrush، Moz، Screaming Frog و مابقی — را مسدود کنید، در حالی که موتورهای جستجو دسترسی کامل خود را حفظ می‌کنند. به‌طور پیش‌فرض برای خط PBN فعال است، در سطح سرور از طریق User-Agent اعمال می‌شود و از داشبورد و MCP هدایت می‌گردد. این همان بازی footprint است: لینک را از ابزارهای رقبا پنهان کنید، در SERPها قابل ایندکس باقی بمانید.

شش سایت که به عنوان گره‌های جداگانه ترسیم شده‌اند و هر پیوندی که می‌توانست آن‌ها را به هم متصل کند، قطع شده است.
  • کلید تغییر وضعیت به ازای هر سایتهر خزنده یا به صورت گروهی
  • روشن به‌طور پیش‌فرضبرای خط Footprint-Free
  • ایمن برای موتورهای جستجوGooglebot هرگز مسدود نشده است
  • اعمال‌شده توسط سرور.htaccess UA-deny + robots.txt

بازی ردپا، در یک کنترل

ارزش یک شبکه خصوصی در لینکی است که هیچ کس دیگری نمی‌تواند آن را ببیند. لحظه‌ای که ابزار بک‌لینک یک رقیب بتواند سایت PBN شما را خزش کرده و لینک خروجی آن را به سایت اصلی شما دنبال کند، شبکه افشا می‌شود — و این مزیت از بین می‌رود.

بنابراین هدف دقیق است: مسدود کردن خزنده‌های تحلیل بک‌لینک که آن نمودارهای پیوند را می‌سازند — Ahrefs، Majestic، Semrush، Moz، Screaming Frog، BLEXBot و همتایان آن‌ها — در حالی که موتورهای جستجو کاملاً دست‌نخورده باقی بمانند، زیرا سایتی که Google نتواند آن را بخزد، نمی‌تواند رتبه کسب کند. جاسوس‌ها را مسدود کنید، نمایه‌سازها را نگه دارید.

این یک سوئیچ به ازای هر سایت در خط Footprint-Free است که به‌طور پیش‌فرض فعال است. تیک هر خزنده یا یک گروه کامل را بزنید یا بردارید، ذخیره کنید و موتور قوانین را برای شما ثبت یا حذف می‌کند.

در سطح سرور اعمال می‌شود، نه این‌که فقط درخواست شده باشد

فایل robots.txt جنبه توصیه‌ای دارد و خزنده‌های تهاجمی آن را نادیده می‌گیرند — مشاهده شده است که Majestic دقیقاً همین کار را انجام می‌دهد. بنابراین مسدودسازی واقعی در سرور انجام می‌شود و robots.txt تنها یک لایه احتیاطی و تعارفی بر روی آن است.

رد User-Agent در سرور

این اعمال از نوع رد User-Agent در .htaccess، LiteSpeed یا nginx است که توسط پردازشگر میزبانی و افزونه Zinn® بر اساس تنظیمات ذخیره‌شده شما نوشته می‌شود. این همان قانونی است که واقعاً خزنده‌ها را متوقف می‌کند، زیرا به حسن نیت خزنده وابسته نیست.

robots.txt برای موارد منطبق

ما همچنین برای خزنده‌هایی که از آن پیروی می‌کنند، یک دستور robots.txt Disallow می‌نویسیم — کار از محکم‌کاری عیب نمی‌کند، تا ابزارهای خوش‌رفتار با احترام و ابزارهای بدرفتار با قاطعیت پس زده شوند.

مسدودسازی IP و ASN برای بدترین‌ها

برخی از خزنده‌ها پشت عوامل کاربری جعلی پنهان می‌شوند. برای بدترین متخلفان، می‌توانیم مسدودسازی‌های مبتنی بر IP یا ASN شناخته‌شده را اضافه کنیم، تا خزنده‌ای که وانمود می‌کند یک مرورگر است نیز نتواند وارد شود.

موتورهای جستجو همیشه مجاز هستند

Googlebot، Bingbot و سایر نمایه‌سازها هرگز در فهرست مسدودی‌ها قرار ندارند. مسدودسازی منحصراً ابزارهای بک‌لینک را هدف قرار می‌دهد، بنابراین نمایه‌سازی و رتبه‌بندی‌ها دست‌نخورده باقی می‌مانند.

شما Trust Flow خود را حفظ می‌کنید

یک نگرانی رایج این است که مسدود کردن Majestic باعث ناپدید شدن Trust Flow یک دامنه می‌شود. این اتفاق نخواهد افتاد. Trust Flow و Citation Flow از نمودار بک‌لینک‌های ورودی دامنه محاسبه می‌شوند — یعنی پیوندهایی که به آن اشاره می‌کنند و Majestic با خزیدن در سایت‌های دیگر آن‌ها را می‌یابد — نه با خزیدن در خود دامنه.

مسدود کردن MajesticBot در سایت PBN شما مانع از مشاهده پیوندهای خروجی آن سایت توسط Majestic می‌شود، که دقیقاً همان footprint است که می‌خواهید پنهان بماند. این کار Trust Flow یا Citation Flow دامنه را از API مربوط به Majestic حذف نمی‌کند، بنابراین بررسی‌های داده‌های سئو ما همچنان این معیارها را به‌طور عادی می‌خوانند. همین امر در مورد DR در Ahrefs و DA در Moz نیز صدق می‌کند — که همگی معیارهای پیوندهای ورودی هستند.

پرسش‌های متداول

کدام خزنده‌ها مسدود می‌شوند؟

خزنده‌های سئو و بک‌لینک — Ahrefs، Majestic، Semrush، Moz، Screaming Frog، BLEXBot و موارد مشابه. موتورهای جستجو هرگز دست‌نخورده باقی می‌مانند: Googlebot، Bingbot و سایر نمایه‌سازها دسترسی کامل خود را حفظ می‌کنند، زیرا نمایه‌پذیر ماندن هدف اصلی است. شما می‌توانید تیک هر خزنده یا گروهی از آنها را علامت بزنید یا بردارید و ذخیره کنید.

آیا این موضوع به رتبه‌بندی من آسیب می‌رساند؟

خیر. فقط خزنده‌های تحلیل بک‌لینک مسدود می‌شوند؛ موتورهای جستجویی که رتبه شما را تعیین می‌کنند کاملاً دست‌نخورده باقی می‌مانند. سایت قابل ایندکس و رتبه‌بندی باقی می‌ماند — شما گراف پیوند خود را از ابزارهای رقبا مخفی می‌کنید، نه از Google.

مسدودسازی در عمل چگونه اعمال می‌شود؟

در سطح سرور، از طریق User-Agent — مسدودسازی به وسیله .htaccess، LiteSpeed یا nginx — زیرا robots.txt صرفاً جنبه توصیه‌ای دارد و خزنده‌های تهاجمی معمولاً آن را نادیده می‌گیرند. ما برای خزنده‌های مطیع نیز یک robots.txt Disallow می‌نویسیم، و می‌توانیم مسدودسازی‌های مبتنی بر IP یا ASN شناخته‌شده را برای بدترین متخلفانی که با عوامل کاربری جعلی می‌خزند اضافه کنیم. این موتور قوانین را به‌طور خودکار بر اساس کلیدهای ذخیره‌شده شما می‌نویسد و حذف می‌کند.

اگر Majestic را مسدود کنم، آیا Trust Flow خود را از دست خواهم داد؟

خیر. Trust Flow و Citation Flow از نمودار بک‌لینک‌های ورودی دامنه محاسبه می‌شوند — لینک‌هایی به آن که با خزش سایر سایت‌ها توسط Majestic یافت شده‌اند — نه با خزش خود دامنه. مسدود کردن MajesticBot در سایت مانع از مشاهده لینک‌های خروجی آن توسط Majestic می‌شود، که همان footprint مورد نظر شما برای پنهان‌سازی است، اما معیارهای دامنه را در API متعلق به Majestic دست‌نخورده باقی می‌گذارد. همین منطق در مورد Ahrefs DR و Moz DA نیز صدق می‌کند.

آیا این مورد به‌طور پیش‌فرض فعال است؟

در طرح Footprint-Free، بله — مسدودسازی خزنده‌ها به‌طور پیش‌فرض فعال است، زیرا پنهان کردن پیوند بین PBN و سایت اصلی (money-site) هسته اصلی بازی footprint محسوب می‌شود. شما کنترل کاملی برای تنظیم خزنده‌های مسدودشده در هر سایت خواهید داشت.

گراف پیوند خود را پنهان کنید، نمایه‌شده بمانید

یک دوره آزمایشی ۱۴ روزه بدون نیاز به کارت را شروع کنید و خزنده‌های بک‌لینک را به ازای هر سایت مسدود نمایید، در حالی که موتورهای جستجو دسترسی کامل خواهند داشت — این قابلیت به‌طور پیش‌فرض برای خط Footprint-Free فعال است و از داشبورد و MCP کنترل می‌شود.

رایگان شروع کنید