Cloudflare fait payer chaque citation, plus le passage du robot

Cloudflare, qui protège une large part des sites web, a modifié en septembre 2026 la façon dont les robots d'IA accèdent aux contenus. Le changement le plus structurant est Pay Per Use, lancé en bêta le 30 septembre : on ne paie plus le passage d'un robot, mais chaque usage du contenu dans une réponse générée.

Trois familles de robots, quatre niveaux de contrôle

Le 16 septembre, Cloudflare a classé les robots en trois familles : la recherche, l'entraînement et les agents. Chacune dispose de quatre niveaux de contrôle. Un réglage « Disallow AI Training » ajoute une directive au robots.txt qui bloque les robots d'entraînement d'Amazon, d'Anthropic, de Meta et d'OpenAI, tout en laissant indexer Google, Apple et Microsoft.

Selon Cloudflare, moins de 1 % des sites bloquent les robots de recherche, contre 17 % qui bloquent l'entraînement. Les anciens réglages sont migrés automatiquement, et des contrôles sur les résumés IA sont annoncés pour début 2027.

Le blocage par défaut du 15 septembre

Depuis le 15 septembre, sur les pages avec publicité, Cloudflare bloque par défaut les robots d'entraînement et les agents, et laisse passer les robots de recherche. Cela concerne les nouveaux clients, les nouveaux sites et les comptes gratuits.

L'éditeur SeenSure a testé 1 046 sites, dont 746 derrière Cloudflare, le 14 puis le 16 septembre. Le refus des robots d'entraînement monte : de 19,9 % à 22,8 % pour ClaudeBot, de 18,9 % à 22,0 % pour GPTBot. Le refus des robots de recherche et des agents chute : de 16,9 % à 3,0 % pour OAI-SearchBot, de 16,4 % à 2,8 % pour ChatGPT-User. SeenSure précise ne pas pouvoir attribuer ces décisions à Cloudflare plutôt qu'aux sites.

Pay Per Use : payer la citation

Pay Per Use prend la suite de Pay Per Crawl. Une entreprise d'IA propose un prix par usage, l'éditeur accepte ou refuse dans son tableau de bord, l'acheteur déclare chaque usage par une API, et Cloudflare facture puis reverse chaque mois. L'éditeur voit quelles entreprises utilisent ses contenus et ce qu'elles rapportent.

Cloudflare justifie le changement par un constat : une page peut être explorée une fois puis citée des milliers de fois. Payer l'exploration revenait à sous-payer la citation. Ce raisonnement rejoint notre analyse du ratio entre exploration et visites renvoyées, souvent mal interprété.

Ce qu'un site doit vérifier

Si votre site est derrière Cloudflare, ouvrez les réglages des robots et vérifiez robot par robot ce qui passe. Les robots de recherche, OAI-SearchBot pour ChatGPT, Claude-User ou PerplexityBot, sont ceux qui produisent des citations : les bloquer par erreur vous retire des réponses.

Bloquer l'entraînement est un choix défendable, que nous discutons dans notre article sur GPTBot et le robots.txt. Bloquer la recherche ne l'est presque jamais pour un site qui veut être cité. Notre liste des robots d'IA indique la famille de chacun.