Google : la directive Cloudflare Content Signals Robots.txt n'a aucun effet
John Mueller de Google a déclaré que la nouvelle directive robots.txt Content Signals inventée par Cloudflare l'année dernière n'avait « aucun effet sur les robots d'exploration ou les LLM ». Il a ajouté que cela « ajoute simplement du volume et une maintenance future à votre fichier robots.txt ». Pour autant qu'il sache, a-t-il déclaré, aucun des robots d'exploration ou LLM n'utilise les directives robots.txt de signal de contenu.
Il s'agit d'une réponse de John Mueller sur Reddit en réponse à la question « Tester si les en-têtes Content-Signal et llms.txt aident réellement à lever l'ambiguïté de l'entité Personne ».
Voici ce que John Mueller a publié :
Je suppose que quelques choses…
* Google n'utilise pas llms.txt ou llms-author.txt. Je ne connais aucun autre robot / llm confirmant qu'ils les utilisent (autres que les outils de référencement).
* AFAIK, aucun des robots d'exploration/llms n'utilise les directives robots.txt « content-signal ». Il a été constitué par un CDN, autant que je sache, il n'a aucun effet pour un robot ou un llm. Son utilisation ajoute simplement du gonflement et une maintenance future à votre fichier robots.txt. Vous pouvez également ajouter d'autres éléments arbitraires à votre fichier robots.txt, les robots utilisent simplement les directives qu'ils prennent en charge et ignorent le reste.
Comme vous l'avez peut-être entendu, Cloudflare a fixé au 15 septembre 2026 la date limite pour définir de nouvelles valeurs par défaut pour chacune de ces trois classifications. Pour tous les nouveaux domaines intégrés à Cloudflare, les catégories Formation et Agent seront bloquées par défaut sur les pages qui affichent des publicités, tandis que la recherche restera autorisée par défaut.
Cloudflare est utilisé par environ 21,3 % de tous les sites Web sur Internet en janvier 2026. Donc, si vous utilisez Cloudflare, vous devez vous assurer que vous souhaitez que cela se produise. J'ai déjà vérifié mes paramètres dans Cloudflare avant cette date limite.
Ceci étant dit, John Mueller dit clairement que Google n'a pas encore respecté la directive robots.txt de Content Signals et il donne l'impression que la société de recherche n'a pas l'intention de le faire.
Discussion sur le forum sur Reddit.
