En bref. Les politiques de Cloudflare fondées sur le comportement contrôlent les catégories reconnues de robots d’exploration IA, tandis qu’AI Crawl Control propose des blocages individuels et des métriques sur les requêtes.

Définition : En octobre 2026, Cloudflare présente Block AI bots comme un mécanisme de contrôle visant les robots d’exploration IA (crawlers) vérifiés qui servent à l’entraînement, ainsi que certains robots non vérifiés au comportement similaire. Les politiques qui le remplacent distinguent les activités Search, Agent et Training.

Points clés

La documentation de Block AI Bots de Cloudflare propose un blocage sur l’ensemble d’un domaine ou uniquement sur les pages où Cloudflare détecte des publicités.
Le guide de configuration d’AI Crawl Control exige un domaine connecté dont le trafic transite par le proxy de Cloudflare.
Le guide de gestion des robots d’exploration propose les actions individuelles Allow et Block pour chaque robot.
La documentation de Cloudflare sur robots.txt indique que le respect de ce fichier est volontaire et renvoie vers AI Crawl Control pour faire appliquer les restrictions d’accès.

Où se trouve le paramètre et quel est son périmètre ?

La page Block AI Bots de Cloudflare indique le chemin suivant dans le tableau de bord pour accéder aux politiques fondées sur le comportement :

Security Settings > Configure AI bot policies

Search désigne la collecte ou l’indexation de contenus en vue de réponses ultérieures. Agent désigne les activités en temps réel pour le compte d’une personne, y compris celles des robots qui récupèrent des contenus à la demande d’un assistant conversationnel. Training couvre l’entraînement et l’ajustement fin (fine-tuning) des modèles. Chaque politique cible les robots vérifiés de sa catégorie ainsi que des robots non vérifiés supplémentaires.

Le blocage des activités d’entraînement sur toute la zone, c’est-à-dire le domaine géré dans Cloudflare, s’effectue en réglant Training sur Block (on all pages). L’option Block on pages with ads repose sur la détection automatique des publicités. L’option Allow (do not block) n’ajoute aucun blocage.

La même page indique Security Settings > Block AI bots comme ancien chemin d’accès et annonce l’abandon de cet ancien réglage pour le 15 septembre 2026. Son avis de transition daté inclut les robots à usage mixte Search et Training dans les blocages liés à l’entraînement, tandis que sa note sur l’ancien réglage les exclut toujours ; la documentation reste incohérente sur le périmètre de cet ancien réglage.

Comment fonctionne le blocage individuel des robots d’exploration ?

Le guide de configuration de Cloudflare situe les contrôles individuels dans l’onglet Crawlers d’AI Crawl Control, où la colonne Action propose Block. Avec l’offre gratuite, la détection reconnaît les robots d’exploration connus qui s’identifient.

La documentation sur la gestion des robots d’exploration explique que le blocage d’un robot individuel crée ou met à jour sur le domaine une règle de pare-feu appelée règle WAF personnalisée (WAF custom rule). Cette règle peut être étendue dans WAF pour prévoir des exceptions selon le chemin d’accès. Ces contrôles individuels sont distincts du choix d’une politique fondée sur le comportement dans Security Settings.

Comment vérifier le résultat ?

Le guide de configuration de Cloudflare décrit un onglet Metrics présentant des répartitions par robot d’exploration, code de statut de réponse, nom d’hôte et chemin d’accès. Les offres gratuites y affichent les 24 dernières heures.

Le guide de gestion des robots d’exploration explique que les requêtes en échec peuvent résulter de n’importe quelle règle ou erreur de réponse. Le seul nombre de requêtes en échec ne permet donc pas d’identifier le mécanisme de blocage responsable.

Termes associés

Questions fréquentes

Puis-je bloquer l’entraînement tout en autorisant la recherche ?

Les politiques fondées sur le comportement de Cloudflare distinguent Search de Training. Les robots à usage mixte qui servent aussi à l’entraînement relèvent de la catégorie Training décrite dans la documentation.

La modification de robots.txt suffit-elle à faire appliquer un blocage ?

La documentation de Cloudflare sur robots.txt précise que le fichier exprime des préférences et que son respect est volontaire. Elle vous renvoie vers AI Crawl Control pour appliquer des blocages propres à chaque robot d’exploration.

Sources

Vérifiez comment une page se lit pour les moteurs de réponse. Ouvrir l’analyseur de score GEO

Comment bloquer les robots d’exploration IA avec le paramètre antibots de Cloudflare ?