Optimisation, , 11 min de lecture

llms.txt : qu'en font les moteurs de réponse en 2026 ? Ce qui est documenté et ce qui ne l'est pas

Proposé en septembre 2024, llms.txt est publié par Anthropic, OpenAI, Cloudflare ou Perplexity pour leur documentation. Google dit l'ignorer ; les autres moteurs n'ont rien publié de vérifiable.

Elisha BajemonIngénieur IA chez TW3 Partners, éditeur de Citead

Points clés

  • La proposition de Jeremy Howard du 3 septembre 2024 prévoit un usage à la demande, à l'inférence plutôt qu'à l'entraînement.
  • Anthropic, OpenAI, Cloudflare et Perplexity publient un llms.txt pour leur documentation ; aucun ne déclare lire ceux des autres sites.
  • Google Search Central écrit que sa recherche ignore ces fichiers, sans effet sur la visibilité.
  • Dans l'étude d'Ahrefs de juin 2026, 97 % des fichiers n'ont reçu aucune requête en mai 2026.

Par Elisha Bajemon | Publié le 22 octobre 2026

llms.txt : qu'en font les moteurs de réponse en 2026 ? Ce qui est documenté et ce qui ne l'est pas

En bref

La convention llms.txt a été proposée le 3 septembre 2024 par Jeremy Howard, sur llmstxt.org et sur le blog d'Answer.AI. Son texte prévoit un usage à la demande, au moment de l'inférence, et non pour l'entraînement des modèles. Anthropic, OpenAI, Cloudflare et Perplexity publient un fichier pour leur documentation technique, et Mintlify en génère un automatiquement. Google écrit que sa recherche ignore ce fichier ; OpenAI, Anthropic et Perplexity n'ont publié aucune page vérifiable indiquant que leurs moteurs le lisent. Dans l'étude d'Ahrefs du 15 juin 2026, 97 % des fichiers observés n'ont reçu aucune requête en mai 2026. Le fichier coûte peu et ne nuit pas ; son effet sur la citation n'est pas documenté.

Points clés

Qui a proposé llms.txt, et pour quel usage ?

La proposition est signée Jeremy Howard et datée du 3 septembre 2024 sur llmstxt.org. Le même jour, le blog d'Answer.AI publiait le texte sous le même nom : « We propose that those interested in providing LLM-friendly content add a /llms.txt file to their site. » Le fichier y est décrit comme un document Markdown donnant un bref contexte, des consignes et des liens vers des versions Markdown plus détaillées. La page llmstxt.org affiche aujourd'hui une version 2, modifiée le 10 août 2026.

Sur l'usage prévu, le texte est explicite. La spécification distingue robots.txt, qui indique aux outils automatisés les accès acceptables, et llms.txt, dont l'information « is instead used on demand, when an agent needs information about a topic while assisting a user ». L'auteur ajoute : « Our expectation was that llms.txt would mainly be useful for inference rather than training, and that is how it has been used, though training runs could take advantage of the information too. » Le fichier n'est donc ni un outil de blocage ni une déclaration d'opposition à l'entraînement.

La version 2 avance aussi un bilan d'adoption : des milliers de sites publieraient un fichier, les plateformes de documentation en généreraient un automatiquement, et « The AI labs themselves publish llms.txt files for their own developer docs: OpenAI, Anthropic, and Gemini. » Ces affirmations viennent de l'auteur de la convention ; le fichier attribué à Gemini exigeait une connexion le 22 octobre 2026. Pour la rédaction du fichier, voir « llms.txt : à quoi sert ce fichier et comment le rédiger ».

Qui publie un fichier llms.txt aujourd'hui ?

Fichiers récupérés le 22 octobre 2026, chacun au format attendu (titre, résumé, listes de liens) :

Ces fichiers portent tous sur de la documentation pour développeurs, l'usage décrit par la spécification. Aucune de ces pages ne dit que le moteur de réponse de l'éditeur lit les llms.txt des autres sites.

Pour la part de sites équipés, la seule mesure à grande échelle trouvée est l'étude d'Ahrefs du 15 juin 2026 : 28 % des 137 000 domaines utilisant Ahrefs Web Analytics publient un fichier. Les auteurs, dont les clients sont plus techniques que la moyenne du web, présentent ce chiffre comme une borne haute.

Qu'ont déclaré les moteurs de réponse ?

Google est le seul éditeur à avoir publié une position dans sa documentation. Le guide de Google Search Central consacré à l'IA générative, mis à jour le 10 juillet 2026, range les fichiers LLMS.txt parmi les éléments à ignorer pour la recherche Google : « You don't need to create new machine readable files, AI text files, markup, or Markdown to appear in Google Search (including its generative AI capabilities), as Google Search itself doesn't use them. » Il ajoute que maintenir ces fichiers pour d'autres services est « completely fine », « as Google Search ignores them ». Le journal des modifications de Search Central date cette note du 15 juin 2026, sous l'entrée « Clarifying guidance on llms.txt files ».

Les propos de John Mueller, de l'équipe Search Relations de Google, sont rapportés par la presse spécialisée et non publiés par Google. Un article de Search Engine Journal du 17 avril 2025 le cite ainsi : « AFAIK none of the AI services have said they're using LLMs.TXT (and you can tell when you look at your server logs that they don't even check for it). To me, it's comparable to the keywords meta tag ». Search Engine Roundtable rapporte le 20 janvier 2026 que la présence de fichiers llms.txt sur certaines propriétés Google n'est pas un endossement, selon une réponse de Mueller sur Bluesky, et que l'équipe Search avait retiré le fichier de sa propre documentation. Search Engine Journal du 2 juin 2026 cite une réponse sur Reddit, « the file has existed for years, yet none of the AI systems use it », et une recommandation conditionnelle : « When an AI platform that brings you clients complains that it needs the file for your site, then I'd recommend taking the time to create one. »

Pour OpenAI, Anthropic et Perplexity, nous n'avons trouvé aucune page officielle indiquant que leurs moteurs lisent llms.txt. La page d'OpenAI sur ses robots décrit OAI-SearchBot et GPTBot et ne mentionne que robots.txt comme moyen de contrôle. La page de Perplexity sur ses robots fait de même pour PerplexityBot. La page d'aide d'Anthropic indique que ses robots respectent les directives de robots.txt et ne cite pas llms.txt. En l'absence de déclaration, la seule information disponible vient des journaux serveur.

Que montrent les journaux serveur ?

Un journal serveur enregistre chaque requête avec son chemin et son agent utilisateur. Une ligne qui contient le chemin /llms.txt et une chaîne d'identification documentée constate qu'un robot identifié a demandé le fichier ; elle ne dit pas ce qu'il en a fait. OpenAI publie par exemple la chaîne d'OAI-SearchBot, terminée par « compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot », sur sa page consacrée à ses robots. Notre article sur le repérage des robots d'IA dans les journaux détaille la méthode.

L'étude d'Ahrefs applique cette lecture aux journaux de 137 000 domaines. Ses résultats pour mai 2026 : 97 % des fichiers n'ont reçu aucune requête ; 96 % des requêtes qui ont atteint un fichier venaient de robots ; parmi les outils d'IA nommés, GPTBot arrive en tête et Claude-Code en second, devant tous les robots de recherche et d'assistant ; OAI-SearchBot, PerplexityBot et le robot de recherche de Claude réunis n'ont effectué que quelques centaines de requêtes sur des milliers de sites. Aucun robot d'IA n'a demandé un fichier absent : « They never go looking. » Les auteurs précisent ne pas avoir vérifié la conformité des fichiers à la spécification.

Deux réserves : le robot le plus présent, GPTBot, collecte selon la documentation d'OpenAI du contenu susceptible de servir à l'entraînement, et le second, Claude-Code, est un agent de programmation ; l'usage par un moteur de recherche en direct reste marginal dans ces données, qui portent sur des clients Ahrefs pendant un seul mois.

Chrome audite-t-il llms.txt ?

Oui. La documentation de Lighthouse décrit un audit de la catégorie « navigation agentique » : « The llms.txt file is an emerging convention used to provide a machine-readable summary of a website's content, specifically designed for LLMs and AI agents. » Si le serveur renvoie une erreur 404, l'audit est marqué non applicable, « as providing the file is optional at the moment ». Cet audit évalue la lisibilité d'un site par un agent qui navigue ; il ne dit rien du choix des sources par un moteur de réponse. L'étude d'Ahrefs relève que cet audit a produit environ une requête sur mille parmi celles observées.

Faut-il publier un llms.txt ?

Nous recommandons de le faire, en gardant les attentes au niveau de ce qui est documenté. Le fichier ne nuit pas : Google l'écrit pour sa recherche, et aucun éditeur n'a publié de contre-indication. Il correspond à un usage réel mais étroit, la documentation technique consultée par des agents de programmation. Son effet sur la citation d'un site par ChatGPT, Perplexity ou Gemini n'est documenté nulle part, ni par les éditeurs, ni par une mesure publique.

Concrètement : placez le fichier à la racine, gardez-le court et à jour, puis surveillez dans vos journaux les requêtes sur /llms.txt. Si un robot identifié le demande régulièrement, vous saurez pour quel service il compte. Si rien ne vient, le fichier n'aura coûté que sa rédaction.

Pour une première version, le générateur gratuit de Citead lit jusqu'à 50 pages du sitemap d'un domaine et rédige un fichier conforme à llmstxt.org, à déposer à la racine du site. Il produit aussi un llms-full.txt et audite un fichier existant, sans compte.

Pour aller plus loin

Pour produire le fichier à partir de vos pages réelles, entrez votre domaine dans le générateur de llms.txt de Citead.

Sources

  1. 1.The /llms.txt file, v2, Jeremy Howard (3 septembre 2024, modifié le 10 août 2026)
  2. 2./llms.txt: a proposal to provide information to help LLMs use websites, Jeremy Howard, Answer.AI (3 septembre 2024)
  3. 3.Anthropic Developer Documentation (llms.txt), Anthropic (Fichier non daté, consulté le 22 octobre 2026)
  4. 4.OpenAI API docs (llms.txt), OpenAI (Fichier non daté, consulté le 22 octobre 2026)
  5. 5.Overview of OpenAI Crawlers, OpenAI (Page non datée, consultée le 22 octobre 2026)
  6. 6.Cloudflare Developer Documentation (llms.txt), Cloudflare (Fichier non daté, consulté le 22 octobre 2026)
  7. 7.Perplexity API documentation (llms.txt), Perplexity (Fichier non daté, consulté le 22 octobre 2026)
  8. 8.Perplexity Crawlers, Perplexity (Page non datée, consultée le 22 octobre 2026)
  9. 9.Does Anthropic crawl data from the web, and how can site owners block the crawler?, Anthropic (Page non datée, consultée le 22 octobre 2026)
  10. 10.llms.txt, Mintlify (Page non datée, consultée le 22 octobre 2026)
  11. 11.AI optimization guide, Google Search Central (Mis à jour le 10 juillet 2026)
  12. 12.Search Central updates: Clarifying guidance on llms.txt files, Google Search Central (15 juin 2026)
  13. 13.Google Says LLMs.Txt Comparable To Keywords Meta Tag, Roger Montti, Search Engine Journal (17 avril 2025)
  14. 14.Google Search Team Does Not Endorse LLMs.txt Files, Barry Schwartz, Search Engine Roundtable (20 janvier 2026)
  15. 15.Google Says LLMs.txt Is Purely Speculative, For Now, Roger Montti, Search Engine Journal (2 juin 2026)
  16. 16.llms.txt (Lighthouse, agentic browsing audits), Chrome for Developers (Page non datée, consultée le 22 octobre 2026)
  17. 17.We Analyzed 137K Sites: 97% of llms.txt Files Never Get Read, Louise Linehan, Ahrefs (15 juin 2026)
  18. 18.Générateur de llms.txt gratuit, Citead (Page non datée, consultée le 22 octobre 2026)

FAQ

Questions fréquentes

Les moteurs de réponse lisent-ils llms.txt ?

Aucun éditeur de moteur n'a publié de page le confirmant. Les journaux analysés par [Ahrefs](https://ahrefs.com/blog/llmstxt-study/) montrent des requêtes, surtout de GPTBot et de Claude-Code, sur 3 % des fichiers observés.

llms.txt remplace-t-il robots.txt ?

Non. La [spécification](https://llmstxt.org/) distingue les deux : robots.txt indique les accès acceptables, llms.txt fournit du contenu à la demande. Pour les règles d'accès, voir [« Autoriser ou bloquer GPTBot, ClaudeBot et PerplexityBot : que change votre robots.txt ? »](https://citead.com/blog/bloquer-gptbot-claudebot-perplexitybot-robots-txt).

Le fichier sert-il à l'entraînement des modèles ?

Son auteur prévoit un usage à l'inférence plutôt qu'à l'entraînement, tout en notant que des entraînements pourraient en tirer parti, selon [llmstxt.org](https://llmstxt.org/). Le fichier n'interdit rien.

Google pénalise-t-il un site qui publie un llms.txt ?

Non. Le [guide de Google Search Central](https://developers.google.com/search/docs/fundamentals/ai-optimization-guide) indique que maintenir ce fichier ne nuit ni n'aide à la visibilité dans Google Search.

Comment savoir si un robot lit mon fichier ?

Filtrez vos journaux serveur sur le chemin /llms.txt et lisez l'agent utilisateur de chaque requête. Les pages d'[OpenAI](https://developers.openai.com/api/docs/bots) et de [Perplexity](https://docs.perplexity.ai/docs/resources/perplexity-crawlers) publient les chaînes de leurs robots.

À lire ensuite

Testez une page et voyez quoi corriger en premier

L'analyse prend en général moins de 10 secondes et ne demande pas de compte.

410 000+ pages notées dans le benchmark public