Κάθε ιστότοπος και κάθε διακομιστής που φιλοξενούμε αποκλείει από προεπιλογή τα κακόβουλα bot και τα ψεύτικα crawler. Δεν χρειάζεται να ενεργοποιήσετε τίποτα και δεν κοστίζει τίποτα επιπλέον.
Τι αποκλείεται;
- Γνωστά κακόβουλα bot: scraper, υποκλοπείς περιεχομένου, εργαλεία ανεπιθύμητης αλληλογραφίας και σαρωτές ευπαθειών που δηλώνουν το όνομά τους.
- Ψεύτικα crawler: προγράμματα που προσποιούνται ότι είναι κάποιο γνωστό crawler, όπως το Googlebot, το Bingbot, το Applebot, το GPTBot ή το ClaudeBot, για να παρακάμψουν την άμυνά σας. Ένα αίτημα που ισχυρίζεται ότι είναι ένα από αυτά, αλλά δεν προέρχεται από τις δημοσιευμένες διευθύνσεις δικτύου της ίδιας της εταιρείας, απορρίπτεται.
Ο έλεγχος πραγματοποιείται δύο φορές: στο δίκτυο κορυφής μας προτού ένα αίτημα φτάσει στον διακομιστή σας, και ξανά στον ίδιο τον διακομιστή ιστού, ώστε να ελέγχεται και ένα αίτημα που πηγαίνει απευθείας στον διακομιστή σας.
Τι δεν αποκλείεται ποτέ;
Τα πραγματικά, επαληθευμένα crawler περνούν πάντα. Το Googlebot, το Bingbot, το Applebot και τα πραγματικά crawler τεχνητής νοημοσύνης (όπως το GPTBot και το ClaudeBot) αναγνωρίζονται από την προέλευσή τους, όχι μόνο από το όνομα που δίνουν, έτσι ώστε ο ιστότοπός σας να παραμένει στα αποτελέσματα αναζήτησης και στις απαντήσεις τεχνητής νοημοσύνης.
Μπορώ να αποκλείσω τα crawler τεχνητής νοημοσύνης στον ιστότοπό μου;
Ναι, και η επιλογή είναι δική σας για κάθε ιστότοπο. Ανοίξτε το Ιστότοποι, επιλέξτε τον ιστότοπο, ανοίξτε την καρτέλα CDN και βρείτε το Ασφάλεια και έλεγχος bot → Crawler τεχνητής νοημοσύνης:
- Καμία ειδική μεταχείριση: Τα crawler τεχνητής νοημοσύνης αντιμετωπίζονται όπως κάθε άλλος επισκέπτης.
- Να επιτρέπονται: Τα crawler τεχνητής νοημοσύνης επιτρέπεται να περάσουν.
- Πρόκληση επαλήθευσης ή Αποκλεισμός: Πραγματοποιείται πρόκληση επαλήθευσης ή απόρριψη των crawler τεχνητής νοημοσύνης στο edge. Αυτές οι δύο επιλογές παρέχονται με την προστασία από bot που περιλαμβάνεται στο πρόγραμμά σας· η οθόνη εμφανίζει εάν το δικό σας δεν την περιλαμβάνει.
Δεν αλλάζουμε ποτέ αυτήν τη ρύθμιση για εσάς. Ο αποκλεισμός ψεύτικων bot δεν την επηρεάζει: ένα πραγματικό crawler τεχνητής νοημοσύνης αποκλείεται μόνο εάν επιλέξετε εσείς να το αποκλείσετε.
Κάτι νόμιμο απορρίφθηκε
Τα εργαλεία παρακολούθησης χρόνου λειτουργίας, οι επανακλήσεις πληρωμών και τα εργαλεία SEO δεν επηρεάζονται, εκτός εάν προσποιούνται ότι είναι ένα από τα παραπάνω crawler. Εάν μια υπηρεσία που χρησιμοποιείτε απορριφθεί, ανοίξτε ένα αίτημα υποστήριξης αναφέροντας την ώρα και τη διεύθυνση από την οποία προήλθε και θα το εξετάσουμε.