llms-full.txt

llms-full.txt est une version étendue de llms.txt qui inclut le contenu intégral des pages d'un site, plutôt que de courts résumés, dans un seul fichier markdown consolidé destiné à être ingéré directement par les systèmes d'IA. Il troque la nature compacte et sélective de llms.txt contre l'exhaustivité, au prix d'un fichier bien plus volumineux.

Pourquoi c'est important

Parce que llms-full.txt regroupe le contenu complet plutôt que des liens, il supprime toute dépendance à la capacité d'un crawler IA à rendre ou récupérer correctement chaque page individuellement, ce qui compte surtout pour les sites au rendu fortement côté client ou aux accès de crawl compliqués. C'est un format complémentaire, pas un remplacement de llms.txt ou d'une bonne crawlabilité classique.

Termes associés

• llms.txt

  llms.txt est un fichier markdown placé à la racine d'un site qui résume son contenu et sa structure spécifiquement pour les systèmes d'IA et leurs crawlers, faisant office de standard technique émergent le plus proche qui existe dans ce domaine. Il offre à un système d'IA une carte organisée du site au lieu de le forcer à déduire la structure d'un crawl complet.

• Chunking (découpage en segments)

  Le chunking est la façon dont les systèmes d'IA découpent un contenu en passages plus courts, généralement de 200 à 500 tokens, avant de l'indexer et de le récupérer, ce qui signifie qu'une page est rarement évaluée comme un tout continu mais comme un ensemble de segments indépendants qui se disputent séparément la récupération.

• Balisage Schema / Données structurées

  Le balisage schema, ou données structurées, est un ensemble de métadonnées lisibles par machine intégrées à une page, le plus souvent en JSON-LD, qui indique explicitement aux crawlers ce qu'est réellement le contenu : un article, une organisation, un produit, un ensemble de questions-réponses, plutôt que de laisser cette classification à l'inférence.