ນີ້ແມ່ນການຕັ້ງຄ່າສາມຢ່າງທີ່ແຕກຕ່າງກັນສຳລັບສາມບັນຫາທີ່ແຕກຕ່າງກັນ. ເຂົ້າເຖິງພວກມັນໄດ້ຈາກການຕັ້ງຄ່າຄວາມປອດໄພຂອງເວັບໄຊ.
ປະເທດຕ່າງໆ
ບໍ່ວ່າຈະເປັນ ລາຍຊື່ບລັອກ (ທຸກຄົນສາມາດເຂົ້າເບິ່ງໄດ້ ຍົກເວັ້ນປະເທດເຫຼົ່ານີ້) ຫຼື ລາຍຊື່ທີ່ອະນຸຍາດ (ບໍ່ມີໃຜສາມາດເຂົ້າເບິ່ງໄດ້ ຍົກເວັ້ນປະເທດເຫຼົ່ານີ້). ມັນແມ່ນສະວິດດຽວ, ແລະ ມັນຄຸ້ມຄ່າທີ່ຈະອ່ານສອງເທື່ອກ່ອນທີ່ທ່ານຈະບັນທຶກ: ລາຍຊື່ທີ່ອະນຸຍາດເຊິ່ງມີພຽງປະເທດດຽວຈະເຮັດໃຫ້ເວັບໄຊຂອງທ່ານຫາຍໄປຈາກອິນເຕີເນັດສຳລັບຄົນອື່ນທັງໝົດ, ເຊິ່ງບາງຄັ້ງອາດເປັນສິ່ງທີ່ທ່ານຕ້ອງການແທ້ໆ ແລະ ຖ້າບໍ່ດັ່ງນັ້ນກໍຈະເປັນຕອນບ່າຍທີ່ຮ້າຍແຮງ.
ການລຶບລາຍຊື່ຈະເປັນການຍົກເລີກການຈຳກັດປະເທດທັງໝົດ; ບໍ່ມີຂັ້ນຕອນ "ປົດບລັອກທຸກບ່ອນ" ແຍກຕ່າງຫາກ.
⚠️ ລາຍຊື່ທີ່ອະນຸຍາດຈະເຮັດໃຫ້ທ່ານຫຼຸດອອກຈາກ Google, ແລະ ນີ້ແມ່ນສ່ວນທີ່ຄົນມັກເບິ່ງຂ້າມ. ເຊີດເອັນຈິນຈະ crawl ຈາກທີ່ຢູ່ຂອງພວກມັນເອງ — Googlebot ຈາກສະຫະລັດອາເມຣິກາ, ບໍ່ວ່າຜູ້ເຂົ້າຊົມຂອງທ່ານຈະຢູ່ໃສກໍຕາມ — ດັ່ງນັ້ນ ລາຍຊື່ທີ່ອະນຸຍາດທີ່ບໍ່ໄດ້ລວມເອົາປະເທດເຫຼົ່ານັ້ນຈະບລັອກ crawler ໄປພ້ອມກັບຄົນອື່ນໆທັງໝົດ, ແລະ ເວັບໄຊທີ່ບໍ່ສາມາດ crawl ໄດ້ກໍຈະຫຼຸດອອກຈາກ index. ມັນບໍ່ໄດ້ເກີດຂຶ້ນທັນທີ ແລະ ບໍ່ໄດ້ເຫັນໄດ້ຊັດເຈນ, ເຊິ່ງນັ້ນແມ່ນສິ່ງທີ່ເຮັດໃຫ້ເກີດຄວາມເສຍຫາຍຫຼາຍ.
ດັ່ງນັ້ນ ພວກເຮົາຈຶ່ງອະນຸຍາດໃຫ້ເຊີດເອັນຈິນທີ່ໄດ້ຮັບການຢືນຢັນແລ້ວຜ່ານໄດ້ໂດຍຄ່າເລີ່ມຕົ້ນ. ປ່ອຍສະວິດນັ້ນໄວ້ຄືເກົ່າ ແລ້ວ Google ແລະ Bing ຈະຍັງຄົງເຂົ້າເຖິງເວັບໄຊຂອງທ່ານໄດ້ຈາກບ່ອນໃດກໍຕາມທີ່ພວກມັນ crawl, ເຖິງແມ່ນວ່າຈະມີລາຍຊື່ທີ່ອະນຸຍາດເຊິ່ງລະບຸພຽງປະເທດດຽວກໍຕາມ. ທ່ານສາມາດປິດການຍົກເວັ້ນໄດ້ຖ້າທ່ານບໍ່ຕ້ອງການໃຫ້ມີຂໍ້ຍົກເວັ້ນໃດໆແທ້ໆ — ນັ້ນຈະເຮັດໃຫ້ເກີດຄວາມສ່ຽງຂ້າງເທິງຄືນມາຢ່າງແນ່ນອນດັ່ງທີ່ໄດ້ອະທິບາຍໄວ້, ແລະ ໜ້າຈໍຈະແຈ້ງເຕືອນເມື່ອທ່ານເຮັດເຊັ່ນນັ້ນ.
⛔ ການຍົກເວັ້ນຕ້ອງການຜູ້ໃຫ້ບໍລິການທີ່ສາມາດຢືນຢັນ crawler ໄດ້, ແລະ ບໍ່ແມ່ນທຸກຄົນທີ່ສາມາດເຮັດໄດ້. ການຢືນຢັນໝາຍເຖິງການກວດສອບວ່າຜູ້ເຂົ້າຊົມທີ່ເອີ້ນຕົວເອງວ່າ Googlebot ນັ້ນແມ່ນ Google ແທ້ໆຫຼືບໍ່ ໂດຍອີງຕາມທີ່ຢູ່ຂອງມັນ — ບໍ່ແມ່ນການເຊື່ອຕາມຄຳອ້າງຂອງມັນ, ເຊິ່ງໃຜກໍສາມາດຮຽນແບບໄດ້. Cloudflare edge ຂອງພວກເຮົາເຮັດສິ່ງນີ້ໄດ້. Bunny, CDN77 ແລະ Gcore ບໍ່ສາມາດເຮັດໄດ້, ດັ່ງນັ້ນ ໃນລະບົບເຫຼົ່ານັ້ນຈຶ່ງບໍ່ມີສິ່ງທີ່ປອດໄພທີ່ຈະອະນຸຍາດໃຫ້ຜ່ານໄດ້ ແລະ ພວກເຮົາກໍຈະບໍ່ປ່ອຍໃຫ້ສິ່ງໃດຜ່ານໄປເລີຍ. ໃນຜູ້ໃຫ້ບໍລິການທີ່ບໍ່ສາມາດຢືນຢັນ crawlers ໄດ້, ລາຍຊື່ທີ່ອະນຸຍາດຈະມີຄວາມສ່ຽງເຕັມຮູບແບບຂ້າງເທິງ — ໜ້າຈໍປະເທດຂອງເວັບໄຊຈະບອກທ່ານວ່າທ່ານຕົກຢູ່ໃນກໍລະນີໃດ, ແລະ ທ່ານຄວນອ່ານມັນກ່ອນທີ່ຈະເພິ່ງພາການຍົກເວັ້ນ. ຄວນເລືອກໃຊ້ລາຍຊື່ບລັອກແທນໃນກໍລະນີດັ່ງກ່າວ.
ທີ່ຢູ່ສະເພາະບຸກຄົນ
ສຳລັບຄວາມລົບກວນສະເພາະເຈາະຈົງ — ທີ່ຢູ່ດຽວທີ່ສົ່ງຄຳຂໍເຂົ້າຟອມແບບຕໍ່ເນື່ອງ, scraper ດຽວ. ນີ້ແມ່ນເຄື່ອງມືທີ່ຖືກຕ້ອງສຳລັບທີ່ຢູ່ຈຳນວນໜ້ອຍໜຶ່ງ ແລະ ເປັນເຄື່ອງມືທີ່ບໍ່ຖືກຕ້ອງສຳລັບການໂຈມຕີ, ເຊິ່ງມາຈາກທີ່ຢູ່ຫຼາຍພັນບ່ອນ ແລະ ປ່ຽນແປງໄດ້ໄວກວ່າທີ່ທ່ານຈະພິມທັນ. ສຳລັບກໍລະນີນັ້ນ, ການປົກປ້ອງຂອງ CDN ແມ່ນສິ່ງທີ່ທ່ານຕ້ອງການ.
SEO crawlers
SEO crawlers ພາຍນອກ — ໂຕທີ່ສ້າງຖານຂໍ້ມູນ backlink — ສາມາດຖືກບລັອກເປັນລາຍຕົວໄດ້. ຜູ້ຄົນເຮັດສິ່ງນີ້ເພື່ອປ້ອງກັນບໍ່ໃຫ້ link profile ຂອງພວກເຂົາຖືກຈັດເກັບເຂົ້າລະບົບໂດຍຄູ່ແຂ່ງ.
ທ່ານບໍ່ສາມາດເຮັດໃຫ້ເວັບໄຊຫຼຸດຈາກ index ຢູ່ທີ່ນີ້ໄດ້. ເຊີດເອັນຈິນບໍ່ໄດ້ຢູ່ໃນລາຍຊື່ທີ່ຈະເລືອກ, ໂດຍການອອກແບບໄວ້ແລ້ວ: ການບລັອກ Googlebot ແມ່ນການຕັດສິນໃຈທີ່ມີຜົນສະທ້ອນເກີນກວ່າສິ່ງທີ່ໜ້າຈໍນີ້ຖືກສ້າງຂຶ້ນມາເພື່ອຮອງຮັບ, ດັ່ງນັ້ນ ໜ້າຈໍນີ້ຈຶ່ງຈະບໍ່ເຮັດສິ່ງນັ້ນ. robots.txt ຂອງທ່ານຈະບໍ່ຖືກແຕະຕ້ອງໂດຍການຕັ້ງຄ່ານີ້ ແລະ ຍັງຄົງເປັນຂອງທ່ານຄືເກົ່າ.
⚠️ ການປົກປ້ອງນັ້ນແມ່ນສະເພາະສຳລັບການຄວບຄຸມ ນີ້. ກົດລະບຽບປະເທດຂ້າງເທິງມີລະບົບປ້ອງກັນຂອງມັນເອງ, ແຕ່ເປັນແບບມີເງື່ອນໄຂ — ມັນອະນຸຍາດໃຫ້ເຊີດເອັນຈິນທີ່ໄດ້ຮັບການຢືນຢັນຜ່ານໄດ້ໂດຍຄ່າເລີ່ມຕົ້ນ, ແລະ ສະເພາະບ່ອນທີ່ຜູ້ໃຫ້ບໍລິການຂອງທ່ານສາມາດຢືນຢັນພວກມັນໄດ້ເທົ່ານັ້ນ. ຖ້າທ່ານໄດ້ໃຊ້ທັງສອງຢ່າງ, ກົດລະບຽບປະເທດກໍຍັງຄົງເປັນສິ່ງທີ່ສາມາດເຮັດໃຫ້ທ່ານສູນເສຍອັນດັບການຈັດລຳດັບໄດ້, ດັ່ງນັ້ນ ຈົ່ງກວດເບິ່ງສິ່ງທີ່ໜ້າຈໍຂອງມັນລາຍງານ ແທນທີ່ຈະຄິດໄປເອງວ່າການຍົກເວັ້ນນັ້ນມີຜົນບັງຄັບໃຊ້ອັດຕະໂນມັດ.
ສິ່ງທີ່ການຕັ້ງຄ່າເຫຼົ່ານີ້ບໍ່ສາມາດເຮັດໄດ້
ບໍ່ມີອັນໃດໃນນີ້ທີ່ສາມາດໃຊ້ທົດແທນການອັບເດດຊອບແວໃຫ້ໃໝ່ສະເໝີໄດ້. ການບລັອກປະເທດໃດໜຶ່ງຈະຢຸດພຽງແຕ່ການເຂົ້າຊົມຈາກປະເທດນັ້ນ; ມັນບໍ່ໄດ້ແກ້ໄຂປລັກອິນທີ່ລ້າສະໄໝເຊິ່ງການເຂົ້າຊົມນັ້ນກຳລັງພະຍາຍາມກວດສອບຫາຊ່ອງວ່າງ.