Chaque site et chaque serveur que nous hébergeons bloque par défaut les robots malveillants et les faux robots d’indexation. Vous n’avez rien à activer, et cela ne coûte rien de plus.
Qu’est-ce qui est bloqué ?
- Les robots malveillants connus : scrapers, voleurs de contenu, outils de spam et scanners de vulnérabilités qui s’annoncent par leur nom.
- Les faux robots d’indexation : programmes qui prétendent être un robot d’indexation bien connu, tel que Googlebot, Bingbot, Applebot, GPTBot ou ClaudeBot, pour contourner vos défenses. Toute requête qui prétend être l’un d’entre eux mais qui ne provient pas des adresses réseau publiées par cette entreprise est refusée.
La vérification est effectuée à deux reprises : sur notre réseau de périphérie avant qu’une requête n’atteigne votre serveur, puis à nouveau sur le serveur web lui-même, de sorte qu’une requête qui s’adresse directement à votre serveur soit également vérifiée.
Qu’est-ce qui n’est jamais bloqué ?
Les robots d’indexation réels et vérifiés passent toujours. Googlebot, Bingbot, Applebot et les véritables robots d’IA (tels que GPTBot et ClaudeBot) sont reconnus en fonction de leur provenance et pas seulement du nom qu’ils indiquent, de sorte que votre site reste présent dans les résultats de recherche et dans les réponses d’IA.
Puis-je bloquer les robots d’IA sur mon site ?
Oui, et le choix vous appartient pour chaque site. Ouvrez Sites, choisissez le site, ouvrez l’onglet CDN et trouvez Sécurité et contrôle des robots → Robots d’IA :
- Aucun traitement particulier : les robots d’IA sont traités comme n’importe quel autre visiteur.
- Les autoriser : les robots d’IA sont autorisés à passer.
- Les défier ou Les bloquer : les robots d’IA sont soumis à un défi ou refusés à la périphérie. Ces deux options sont fournies avec la protection contre les robots incluse dans votre offre ; l’écran indique si la vôtre ne l’inclut pas.
Nous ne modifions jamais ce paramètre à votre place. Le blocage des faux robots ne l’affecte en rien : un véritable robot d’IA n’est bloqué que si vous décidez de le bloquer.
Un élément légitime a été refusé
Les outils de surveillance de disponibilité, les rappels de paiement et les outils SEO ne sont pas affectés, sauf s’ils prétendent être l’un des robots d’indexation mentionnés ci-dessus. Si un service que vous utilisez est refusé, ouvrez un ticket d’assistance en précisant l’heure et l’adresse dont il provient, et nous l’examinerons.