LLMs.txtファイルとは、AIが理解しやすいよう特定の形式でマークダウンされたテキストファイルです。このファイルは、大きく二つに分けられます。
まず/llms.txtはプロジェクト名が大見出しで始まり、概要が引用文でまとめられ、その後のセクションでは見出しを使ってリンクが整理されています。特にオプショナルなセクションは重要度の低いリソースをわかりやすくしています。
/llms-full.txtは、ナビゲーションと構造を提供する/llms.txtと違い、マークダウンで完全なドキュメントの内容を含んでいます。
従来のweb標準であるsitemap.xmlやrobots.txtとは異なり、/llms.txtはAIが文脈を処理する上での制限を克服するために、非必要なマークアップやスクリプトを排除し、AIが処理しやすい構造でコンテンツを提示することが目的です。
LLMs.txtをAIシステムで使用するには、webを巡回して発見するような機能はない現行LLMに直接ファイルを提供する必要があります。これはリンクを貼り付けたり、ファイルの内容をプロンプトに直接コピーしたり、AIツールのファイルアップロード機能を使うことで実現できます。
高校生でも理解できるように、/llms.txtは人工知能が情報を処理する上で効率を上げるための重要なツールとなっています。
出典 : LLMs.txt Explained https://towardsdatascience.com/llms-txt-414d5121bcb3