Robots et accès
llms.txt
llms.txt est un fichier texte placé à la racine d'un site qui donne aux systèmes d'IA un résumé choisi de ce que le site propose et de l'emplacement de ses pages clés. C'est une convention proposée, pas une obligation, et peu coûteuse à publier.
En détail
Un bon llms.txt liste les pages qui comptent avec une ligne de description chacune, afin qu'un assistant s'oriente vite plutôt que de déduire la structure de la navigation.
Certains sites publient aussi un llms-full.txt plus long portant les faits produits complets, les tarifs et les FAQ, pour que les assistants citent avec exactitude.
Guides sur le sujet
Termes liés
robots.txt
robots.txt est un fichier placé à la racine d'un site qui indique aux robots quels chemins ils peuvent récupérer. Pour la recherche par IA, c'est le contrôle principal sur la possibilité même pour les assistants d'atteindre vos pages.
AI Crawler
Un AI crawler est un agent automatisé qui collecte des pages web pour une entreprise d'IA, soit pour nourrir l'entraînement d'un modèle, soit pour bâtir l'index de recherche dans lequel un assistant puise. Chacun s'identifie par son propre user-agent dans le robots.txt.
Données structurées
Les données structurées sont un balisage lisible par machine qui indique ce qu'est une page et ce qu'elle contient. Elles aident les moteurs à afficher des résultats enrichis et les systèmes d'IA à comprendre une page avant de décider de l'utiliser.
Prêt à dominer la recherche IA ?
Commencer maintenant
Allswap