Bureau avec ordinateur portable, souris et accessoires, ambiance travail de gestion de site web

llms.txt : 97 % des fichiers n’ont reçu aucun trafic bot (études Ahrefs et Common Crawl)

Sur les fichiers llms.txt analysés en mai 2026, 97 % n’ont reçu la visite d’aucun robot. Une seconde analyse, menée sur un corpus quatre fois plus large début septembre 2026, arrive à une conclusion voisine par une méthode différente : la plupart de ces fichiers n’ont pas été écrits à la main, et aucun robot n’a l’obligation de les lire. Deux organisations, deux méthodes, la même photographie d’un fichier devenu réflexe SEO en 2025 et 2026 sans qu’on sache toujours ce qu’il change concrètement.

Pour un artisan qui a ouvert sa boutique en ligne ou un cabinet de conseil qui a refait son site cette année, la question se pose en termes concrets. Beaucoup ont ajouté ce fichier en espérant apparaître dans les réponses de ChatGPT ou dans les AI Overviews de Google. Les deux études permettent de vérifier si ce calcul tient.

Qu’est-ce que le llms.txt, exactement ?

Le llms.txt est un fichier texte au format Markdown, posé à la racine d’un site à côté de robots.txt et de sitemap.xml. Il liste les pages qu’un éditeur juge utiles pour un assistant conversationnel : documentation, articles de référence, fiches produit. La proposition vient d’Answer.AI, le laboratoire cofondé par le chercheur Jeremy Howard, qui l’a publiée le 3 septembre 2024 pour résumer un site aux modèles dont la fenêtre de contexte est trop courte pour tout lire d’un coup.

Le format n’a jamais été adopté comme un standard par un organisme comme le W3C ou l’IETF, et aucune entreprise d’IA majeure ne s’est engagée à le respecter. C’est une convention volontaire, pas une règle que les robots doivent suivre. Cette nuance compte pour la suite : un fichier que personne n’est tenu de lire ne peut, par construction, ni garantir une visibilité dans une IA générative ni bloquer un robot qui ne le consulte pas.

Un fichier généré tout seul par votre CMS, la plupart du temps

Rangées de serveurs dans une salle de données, symbole des traitements automatisés à l'échelle du web
Une partie du corpus llms.txt est produite par des plateformes, sans intervention humaine.

Common Crawl, l’organisation à but non lucratif qui archive le web depuis 2008, a analysé 584 107 fichiers llms.txt collectés lors de son crawl de juillet 2026. Premier constat de l’étude, signée par l’ingénieur de recherche Malte Ostendorff : 68,27 % de ce corpus est généré automatiquement par un plugin ou un CMS, sans rédaction humaine. Wix, à lui seul, représente 241 448 fichiers, soit 41,34 % du total analysé.

Concrètement, un grand nombre de sites ont un llms.txt sans que personne, côté client, n’ait choisi une ligne de son contenu. La plateforme l’a ajouté par défaut, avec un texte généré à partir du nom du site et de sa structure de pages. Avoir un llms.txt ne veut donc pas dire qu’on a réfléchi à ce qu’on y met, une nuance qui change beaucoup de choses au moment d’évaluer si le fichier fonctionne.

Une lecture par les IA qui reste marginale

Ahrefs a publié en juin 2026 sa propre étude, fondée sur les logs de mai 2026 de 137 210 domaines. Le chiffre central : 97 % des fichiers llms.txt n’ont reçu aucun trafic bot ce mois-là. Sur les 3 % restants, les robots d’IA identifiés ne représentent que 19,5 % des requêtes. Les outils d’audit SEO à eux seuls en génèrent davantage (21,7 %), tout comme les crawlers génériques et les outils de profilage technique pris ensemble.

Autrement dit, quand un llms.txt reçoit une visite, il y a plus de chances que ce soit un outil SEO venu vérifier sa présence qu’un assistant IA venu s’en servir. Les deux périmètres ne se recouvrent pas complètement : Ahrefs mesure du trafic réel sur 137 000 domaines, Common Crawl analyse le contenu de 584 000 fichiers collectés dans un crawl. La conclusion, elle, converge : peu de fichiers sont lus, et rarement par les IA qu’ils étaient censés informer.

Ce n’est pas un robots.txt bis

Cadenas à combinaison posé sur un câble réseau, symbole du contrôle d'accès
Un cadenas ne se referme pas tout seul : llms.txt non plus ne bloque rien par défaut.

Certains propriétaires de sites traitent le llms.txt comme un second robots.txt, capable de bloquer un robot indésirable. Common Crawl a testé cette hypothèse et l’a démontée : l’étude a trouvé 32 sites qui utilisaient des règles de type interdiction dans leur llms.txt pour tenter de bloquer CCBot, le robot d’indexation de Common Crawl, alors que leur robots.txt réel, lui, l’autorisait explicitement. La conclusion de l’étude est sans ambiguïté : llms.txt n’est pas un mécanisme de contrôle d’accès, et rien n’oblige un robot à le lire.

L’étude apporte deux autres points utiles pour un lecteur prudent. D’abord, 22,56 % des fichiers analysés ne contiennent même aucun lien, alors que le format est censé en lister. Ensuite, la crainte d’un détournement massif du fichier pour orienter le comportement des IA ne se vérifie pas à l’échelle : sur 584 107 fichiers, 3 793 contiennent une forme légère d’orientation du ton ou du style, et l’étude n’a identifié qu’une poignée de cas s’apparentant à une véritable tentative d’injection de prompt. Pas de campagne d’abus organisée, à ce stade de la mesure.

Ce constat ne doit pas se confondre avec l’OKF, un autre format que Google propose de son côté : les deux initiatives répondent à des questions différentes et n’ont rien de commun en dehors de viser, chacune à sa façon, les systèmes d’IA.

Faut-il en créer un pour votre site ?

Les deux études mesurent un usage à un instant donné, celui de mai et juillet 2026 : elles ne disent pas que le llms.txt ne servira jamais à rien, seulement qu’aujourd’hui il reste très majoritairement un fichier passif, généré par défaut et peu consulté. Rien n’interdit d’en garder un si votre CMS l’a créé automatiquement, tant qu’il ne prend pas la place d’un vrai travail de SEO technique sur le reste du site.

Un exemple concret : une boutique en ligne qui tourne sur Wix a de très fortes chances d’avoir déjà un llms.txt, ajouté par la plateforme sans qu’aucune décision n’ait été prise côté client. Il n’y a rien d’urgent à corriger dans ce cas précis : ce fichier ne pèse ni sur le classement dans Google ni sur la présence dans une IA générative, faute d’être lu par l’un comme par l’autre. Le temps gagné à le peaufiner se dépense mieux sur robots.txt, le maillage interne ou la Search Console.

Le point qui mérite une vérification, pour un artisan, une boutique en ligne ou un cabinet de conseil : si votre llms.txt contient des règles de blocage, vérifiez qu’elles ne contredisent pas votre robots.txt. Les 32 cas trouvés par Common Crawl montrent qu’une contradiction entre les deux fichiers passe facilement inaperçue, avec un vrai risque de croire un robot bloqué alors qu’il ne l’est pas. Pour bloquer un robot indésirable, la règle ne change pas : elle se pose dans robots.txt, pas dans llms.txt.


Crédit photo : Pixabay.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Défiler vers le haut