Chặn trình thu thập thông tin SEO
Tính năng kiểm soát Footprint-Free hàng đầu cho từng trang web: chặn các trình thu thập dữ liệu SEO và backlink — Ahrefs, Majestic, Semrush, Moz, Screaming Frog và các trình thu thập khác — trong khi các công cụ tìm kiếm vẫn giữ toàn quyền truy cập. Bật theo mặc định cho dòng PBN, được thực thi tại máy chủ theo User-Agent, điều khiển từ bảng điều khiển và MCP. Đó là cuộc chơi về dấu vết: ẩn liên kết khỏi các công cụ của đối thủ cạnh tranh, duy trì khả năng lập chỉ mục trong SERP.
Giá trị của một mạng lưới riêng tư là liên kết mà không ai khác có thể nhìn thấy. Khoảnh khắc công cụ backlink của đối thủ cạnh tranh có thể thu thập dữ liệu trang PBN của bạn và đi theo liên kết ngoài đến trang tạo doanh thu của bạn, mạng lưới sẽ bị lộ — và lợi thế không còn nữa.
Vì vậy, nhiệm vụ rất rõ ràng: chặn các trình thu thập dữ liệu phân tích liên kết ngược chuyên xây dựng các biểu đồ liên kết đó — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot và các công cụ tương tự — trong khi vẫn giữ nguyên vẹn các công cụ tìm kiếm, bởi vì một trang web mà Google không thể thu thập dữ liệu thì không thể xếp hạng. Chặn gián điệp, giữ lại các trình lập chỉ mục.
Đây là nút chuyển đổi cho từng trang web trên dòng Footprint-Free, được bật theo mặc định. Chọn hoặc bỏ chọn từng trình thu thập dữ liệu (crawler), hoặc cả một nhóm, lưu lại và hệ thống sẽ tự động viết hoặc xóa các quy tắc cho bạn.
robots.txt chỉ mang tính khuyến nghị và các trình thu thập thông tin quá mức sẽ phớt lờ nó — Majestic đã được ghi nhận là làm chính xác điều đó. Vì vậy, việc chặn thực sự diễn ra tại máy chủ, với robots.txt đóng vai trò như một lớp lịch sự ở phía trên.
Việc thực thi là lệnh từ chối User-Agent của .htaccess, LiteSpeed hoặc nginx, được ghi bởi trình xử lý dịch vụ lưu trữ và plugin Zinn® từ các nút bật tắt đã lưu của quý vị. Đây là quy tắc thực sự ngăn chặn trình thu thập dữ liệu, vì nó không phụ thuộc vào thiện chí của trình thu thập dữ liệu.
Chúng tôi cũng viết một lệnh Disallow trong robots.txt cho các trình thu thập thông tin tuân thủ lệnh này — một biện pháp phòng ngừa kép, để các công cụ hoạt động đúng chuẩn được từ chối một cách lịch sự và các công cụ hoạt động sai trái bị từ chối một cách kiên quyết.
Một số trình thu thập thông tin ẩn nấp sau các user-agent giả mạo. Đối với những trường hợp vi phạm nghiêm trọng nhất, chúng tôi có thể thêm lệnh từ chối theo IP hoặc ASN đã biết, để trình thu thập thông tin giả dạng trình duyệt vẫn không thể xâm nhập.
Googlebot, Bingbot và các trình lập chỉ mục khác không bao giờ nằm trong danh sách chặn. Việc chặn chỉ nhắm vào các công cụ liên kết ngược (backlink), vì vậy quá trình lập chỉ mục và thứ hạng hoàn toàn không bị ảnh hưởng.
Một mối lo ngại phổ biến là việc chặn Majestic sẽ làm biến mất Trust Flow của một tên miền. Điều đó sẽ không xảy ra. Trust Flow và Citation Flow được tính toán từ biểu đồ liên kết ngược trỏ đến của một tên miền — các liên kết trỏ đến tên miền đó mà Majestic tìm thấy bằng cách thu thập dữ liệu từ các trang web khác — chứ không phải bằng cách thu thập dữ liệu từ chính tên miền đó.
Việc chặn MajesticBot trên trang PBN của quý vị sẽ ngăn Majestic nhìn thấy các liên kết ra ngoài của trang đó, đây chính xác là dấu vết quý vị muốn ẩn đi. Việc này không xóa Trust Flow hoặc Citation Flow của miền khỏi API của Majestic, vì vậy quá trình kiểm tra dữ liệu SEO của chính chúng tôi vẫn tiếp tục đọc các chỉ số đó như bình thường. Điều tương tự cũng áp dụng cho Ahrefs DR và Moz DA — tất cả các thước đo liên kết đến.
Các trình thu thập dữ liệu SEO và backlink — Ahrefs, Majestic, Semrush, Moz, Screaming Frog, BLEXBot và những công cụ tương tự. Các công cụ tìm kiếm không bao giờ bị ảnh hưởng: Googlebot, Bingbot và các trình lập chỉ mục khác vẫn giữ toàn quyền truy cập, vì duy trì khả năng lập chỉ mục là toàn bộ mục đích. Bạn có thể chọn và bỏ chọn từng trình thu thập dữ liệu hoặc một nhóm, sau đó lưu lại.
Không. Chỉ có các trình thu thập thông tin phân tích liên kết ngược bị chặn; các công cụ tìm kiếm xếp hạng bạn hoàn toàn không bị ảnh hưởng. Trang web vẫn có thể được lập chỉ mục và xếp hạng — bạn đang ẩn biểu đồ liên kết của mình khỏi các công cụ của đối thủ cạnh tranh, chứ không phải khỏi Google.
Tại máy chủ, theo User-Agent — lệnh từ chối qua .htaccess, LiteSpeed hoặc nginx — vì robots.txt chỉ mang tính khuyến nghị và các trình thu thập dữ liệu hung hăng thường phớt lờ tệp này. Chúng tôi cũng viết lệnh Disallow trong robots.txt cho những trình tuân thủ, đồng thời có thể thêm lệnh từ chối theo IP hoặc ASN đã biết đối với những kẻ vi phạm nghiêm trọng nhất thu thập dữ liệu dưới các user-agents giả mạo. Hệ thống sẽ tự động ghi và xóa các quy tắc dựa trên các nút chuyển đổi đã lưu của quý vị.
Không. Trust Flow và Citation Flow được tính toán từ biểu đồ liên kết ngược trỏ đến của một miền — các liên kết trỏ đến miền đó, do Majestic tìm thấy khi thu thập dữ liệu các trang web khác — chứ không phải bằng cách thu thập dữ liệu chính miền đó. Việc chặn MajesticBot trên trang web sẽ ngăn Majestic nhìn thấy các liên kết ra ngoài của miền, đó chính là dấu vết bạn muốn ẩn, nhưng vẫn giữ nguyên các chỉ số của miền trong API của Majestic. Logic tương tự cũng áp dụng cho DR của Ahrefs và DA của Moz.
Trên dòng Footprint-Free, vâng — tính năng chặn trình thu thập dữ liệu được bật theo mặc định, vì việc ẩn liên kết từ PBN đến trang chính (money site) là cốt lõi của chiến lược xóa dấu vết SEO. Quý khách giữ toàn quyền kiểm soát để điều chỉnh những trình thu thập dữ liệu nào bị chặn cho từng trang web.
Bắt đầu dùng thử 14 ngày không cần thẻ và chặn các trình thu thập liên kết ngược trên từng trang web trong khi các công cụ tìm kiếm vẫn giữ toàn quyền truy cập — được bật theo mặc định cho dòng Footprint-Free, được kiểm soát từ bảng điều khiển và MCP.
Bắt đầu miễn phí