{"id":44623,"date":"2026-07-06T09:45:00","date_gmt":"2026-07-06T09:45:00","guid":{"rendered":"https:\/\/yoannuzan.com\/content-signals-robots-txt-cloudflare-google\/"},"modified":"2026-10-15T17:05:37","modified_gmt":"2026-10-15T17:05:37","slug":"content-signals-robots-txt-cloudflare-google","status":"publish","type":"post","link":"https:\/\/www.yoannuzan.com\/content-signals-robots-txt-cloudflare-google\/","title":{"rendered":"Content-Signal dans le robots.txt : Google confirme que la directive de Cloudflare ne sert \u00e0 rien"},"content":{"rendered":"\n\n
\n \n
\n \n
\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n <\/div>\n \n
\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n
\n \n\n
<\/div>\n <\/div>\n <\/div>\n<\/div>\n \n\n
\n Notez cet article<\/span>\n <\/div>\n <\/div>\n

La directive Content-Signal ajout\u00e9e dans le robots.txt de nombreux sites prot\u00e9g\u00e9s par Cloudflare n’a aucun effet sur Google, ni, \u00e0 sa connaissance, sur les autres robots d’exploration et les LLM. C’est John Mueller, de Google, qui l’affirme, en ajoutant qu’elle alourdit inutilement le fichier et complique sa maintenance.<\/p>\n

Si vous avez activ\u00e9 ces signaux en pensant interdire l’entra\u00eenement des IA sur vos contenus tout en restant visible dans les moteurs, il est temps de v\u00e9rifier ce que contient r\u00e9ellement votre robots.txt. Voici ce que fait (et ne fait pas) cette directive, et les r\u00e9glages qui comptent vraiment.<\/p>\n

Pour comprendre le r\u00f4le du robots.txt dans l’exploration, voir aussi le budget crawl expliqu\u00e9 par Google<\/a>.<\/p>\n

Qu’est-ce que la directive Content-Signal de Cloudflare ?<\/h2>\n

Content-Signal est une ligne que Cloudflare propose d’ajouter au robots.txt pour exprimer ce que l’\u00e9diteur autorise apr\u00e8s l’exploration de ses pages : l’indexation pour la recherche, l’utilisation comme source pour des r\u00e9ponses d’IA, ou l’entra\u00eenement de mod\u00e8les. Cloudflare l’a lanc\u00e9e l’an dernier et l’a int\u00e9gr\u00e9e \u00e0 son robots.txt g\u00e9r\u00e9, ce qui explique sa pr\u00e9sence sur un tr\u00e8s grand nombre de sites.<\/p>\n

La ligne prend une forme du type Content-Signal: search=yes, ai-input=yes, ai-train=no<\/em>. Sur le papier, l’id\u00e9e est s\u00e9duisante : distinguer la recherche classique de l’usage par l’IA, ce que le robots.txt historique ne sait pas faire, puisqu’il g\u00e8re l’acc\u00e8s aux URL et non l’usage des contenus.<\/p>\n

Pourquoi Google dit qu’elle n’a aucun effet<\/h2>\n

Google ne lit pas cette directive et, selon John Mueller, aucun robot ni LLM ne l’utilise aujourd’hui. Une instruction qu’aucun robot n’interpr\u00e8te reste une simple d\u00e9claration d’intention, sans valeur technique.<\/p>\n

Le robots.txt fonctionne par convention. Un robot respecte les r\u00e8gles qu’il comprend (User-agent, Disallow, Allow, Sitemap) et ignore le reste. Content-Signal n’a pas \u00e9t\u00e9 adopt\u00e9e par les grands moteurs, elle tombe donc dans la cat\u00e9gorie des lignes ignor\u00e9es.<\/p>\n

John Mueller pointe aussi un co\u00fbt cach\u00e9 : chaque ligne inutile complique la lecture du fichier. Sur les sites que j’audite comme consultant SEO<\/a>, je vois r\u00e9guli\u00e8rement des robots.txt devenus illisibles \u00e0 force d’empiler des r\u00e8gles copi\u00e9es-coll\u00e9es, avec parfois une erreur qui bloque une section enti\u00e8re du site.<\/p>\n

\"Illustration<\/p>\n

Comment contr\u00f4ler r\u00e9ellement l’usage de vos contenus par l’IA ?<\/h2>\n

Pour contr\u00f4ler l’acc\u00e8s des IA \u00e0 vos contenus, il faut utiliser les agents utilisateurs que chaque acteur documente officiellement, et les directives de page reconnues par Google. Voici ce qui fonctionne aujourd’hui.<\/p>\n