Cloudflare donne aux robots IA jusqu'au 15 septembre pour payer ou disparaître

3 min de lecture
Tous les articles du blog
Cloudflare donne aux robots IA jusqu'au 15 septembre pour payer ou disparaître

Une page explorée, une visite renvoyée : c'était la règle non écrite du web. Elle ne tient plus, et les chiffres le prouvent : le robot d'Anthropic ne renvoie qu'une visite pour 73 000 pages aspirées, contre une pour 14 chez Google. Cloudflare a visiblement décidé que ça suffisait.

Ce que change vraiment la politique Cloudflare sur les robots IA

À partir du 15 septembre 2026, les réglages par défaut de Cloudflare bloqueront les robots dits « mixtes » sur toutes les pages qui affichent de la publicité. Ce sont ces bots qui aspirent un site à la fois pour l'indexation, l'entraînement des modèles et les agents IA, sans laisser le propriétaire du site choisir entre les usages.

Le changement touche les nouveaux clients Cloudflare, les nouveaux sites créés par des clients existants, ainsi que tous les comptes gratuits déjà en place. Les robots de recherche restent autorisés par défaut. Les robots d'entraînement et d'agents, eux, se voient fermer la porte sur les pages monétisées, sauf réactivation manuelle.

Google, la cible à peine voilée

Cloudflare ne prononce jamais le mot « Google », mais personne n'est dupe. Googlebot indexe pour la recherche tout en nourrissant Gemini, les AI Overviews et le mode IA, et Google propose bien un robot séparé pour la recherche classique, mais aucune option ne permet d'apparaître dans le mode IA sans que le contenu serve aussi à l'entraînement.

C'est précisément cette faille que Cloudflare referme. Pour rester visible dans la recherche sans perdre l'accès à l'entraînement, Google devra désormais prouver que ses robots séparent réellement les deux usages.

Être payé, pas seulement exploré

Cloudflare rebaptise aussi son ancien outil Pay Per Crawl en Pay Per Use, et le changement n'est pas cosmétique : au lieu de facturer chaque passage de robot, les propriétaires de sites seront payés quand leur contenu apparaît réellement dans la réponse d'un chatbot IA. Ceramic.ai et You.com inaugurent le programme, et Cloudflare promet d'ouvrir la porte à d'autres entreprises d'IA.

Pourquoi cette annonce compte

Cloudflare protège environ 20 % de tout le trafic internet, ce qui transforme cette décision en réglage par défaut à l'échelle du web entier, un rapport de force qu'aucun éditeur seul n'aurait pu imposer. Pour les petits sites et rédactions aspirés des milliers de fois sans jamais rien recevoir en retour, c'est une vraie victoire.

Pour OpenAI, Anthropic et les startups qui construisent des navigateurs agentiques, c'est un compte à rebours de deux mois pour négocier, payer, ou perdre l'accès à un cinquième du web. Google, ironie du sort, a peut-être le devoir le plus compliqué à faire.

LF
Lucas Ferretti Lucas Ferretti traite des startups IA, des levées de fonds et du business de l'intelligence artificielle pour AIxploria.