GEO の技術メモ
What is LLMs.txt AI 時代のコンテンツ利用を示す書式
「llms.txt は AI 時代の robots.txt のようなものです。ここは歓迎、ここは遠慮してほしい——それを大規模言語モデルに伝えるための、ただのテキストファイルです。」
01
llms.txt とは何か
ねらいは、サイト運営者が「どう使ってよいか」をはっきり書けるようにすることです。学習・要約・書き換え・引用を許すのか、制限するのか。正式な業界標準にはまだなっていませんが、AI による コンテンツ利用と知的財産の扱いを整理したいという、切実な必要から生まれています。
robots.txt との違い
| 観点 | robots.txt | LLMs.txt |
|---|---|---|
| 相手 | 検索エンジンのクローラ(Googlebot) | 大規模言語モデル(学習、質問応答) |
| 扱える範囲 | 取得の可否(Allow / Disallow) | より込み入った行為(学習、書き換え、引用) |
| 主なねらい | インデックスの管理 | 知的財産と、AI に許す利用の範囲 |
02
書き方の例
最小の構成
# Title
> Optional description goes here
## Section name
- [Link title](https://link_url): Optional details
## Optional
- [Link title](https://link_url)
もう少し踏み込んだ書き方
- 何をしている会社か中心となる事業を書きます。たとえば「企業向け SEO とデジタルマーケティングの会社」。
- AI への申し送りどんな場面で使える内容か、対象のバージョン、出典を残してほしいという要望。
- 区分けした案内ページを「解説」「サービス」などに分け、構造が伝わるようにします。
03
なぜ llms.txt が要るのか
知的財産を守る
自前のコンテンツが際限なく学習と生成に使われ、複製され薄まっていくのを避けます。
データの扱いと安全
投稿欄や機微な情報など、AI に触れてほしくない領域をはっきり示します。
読まれ方の質
使い方をはっきり書いておくことで、誤った引用や見当違いの解釈を減らします。
サーバ負荷の調整
大規模なクロールを加減し、抑えるための手立てにもなります。
04
よくある質問
Q: llms.txt はもう正式な標準ですか ▼
まだです。いまは提案と実験の段階で、多くの AI はアクセスの可否を robots.txt で判断しています。
Q: 置かないとどうなりますか ▼
短期に直接の不利益はありません。ただし、コンテンツは言語モデルに自由に読まれ、学習と生成に使われ続けます。
Q: 言語モデルは llms.txt を守りますか ▼
各社が採用するかどうか次第です。いまはっきりしているのは、robots.txt に書かれた AI クローラ向け user-agent を守るという表明のほうです。