llms.txtは本当に効くのか ── 主要AIクローラーの挙動を確認する

期待先行で語られる新しい仕様

2024年頃から「llms.txt」というファイルが話題になっている。robots.txtのAI版とも言われ、「設置すればAIがサイトを理解しやすくなる」という文脈で語られることが多い。GEO対策の文脈で「まず置くべきもの」として紹介されることもある。

結論から書くと、現時点でのllms.txtの効果は限定的だ。本記事では、過度な期待を排して、この仕様が実際に何であり、何でないのかを整理する。

llms.txtとは何か

llms.txtは、サイトのルートに置くMarkdown形式のファイル(/llms.txt)で、AIに対してサイトの構造や重要なコンテンツの場所を案内することを目的としている。発想としては、人間向けのサイトマップやドキュメント目次のLLM版にあたる。

派生として、本文全体を結合した/llms-full.txtを置く提案もある。いずれもMarkdownなので、HTMLのノイズ(ナビゲーション、広告、スクリプト)を除いた純粋なコンテンツをAIに渡せる、という狙いがある。

仕様としては筋が通っている。問題は、それを読む側のAIが対応しているかだ。

標準ではなく、提案である

まず押さえるべき前提として、llms.txtはW3CやIETFのような標準化団体が策定した公式仕様ではない。コミュニティ発の提案であり、デファクトスタンダードを目指している段階にある。

これはrobots.txtやsitemap.xmlとは状況が異なる。robots.txtは事実上すべてのクローラーが参照する確立された慣行だが、llms.txtにはまだその地位がない。

主要AIクローラーは参照しているのか

ここが本質的な問いだ。現時点で確認できる範囲では、主要なAIクローラー(GPTBot、ClaudeBot、PerplexityBot、Google-Extendedなど)は、llms.txtを積極的にフェッチして利用しているとは言いがたい。これらのクローラーは、基本的にHTMLを直接クロールして情報を取得している。

つまり、llms.txtを設置しても、それが読まれて回答生成に使われる保証は現時点ではない。「置けばAIに読まれる」という期待は、現状では根拠が薄い。

では無意味なのか

無意味とは言い切れない。位置づけとしては「低コストな将来への投資」が妥当だ。理由は2つある。

第一に、設置コストが極めて低い。Markdownファイルを1つ置くだけで、サーバー負荷もメンテナンス負担もほぼない。将来的に主要AIが対応した場合に備えておく、という意味では合理的だ。実際、AnthropicやVercel、Stripe、Cloudflareなど一部の影響力のある企業はすでに採用しており、エコシステムが育つ可能性はある。

第二に、特定の用途では現時点でも意味を持ちうる。たとえば金融や医療のような規制産業では、AIがマーケティング用のLP(ランディングページ)ではなく、正確なファクトシートに確実にアクセスできるようにしたい、というニーズがある。そうした「AIに見せたい正確な情報源」を明示する手段として使う発想はありうる。

診断ツールでの扱い方

筆者が開発しているAI可読性診断ツールでは、llms.txtの有無を診断項目に含めているが、そのウェイトは意図的に低く設定している。理由はここまで述べた通りで、「設置されていれば加点はするが、それが決定的な要素ではない」という実態を反映するためだ。

そして診断レポートには、効果が限定的である旨を正直に記載している。GEO対策を謳うサービスの中には、llms.txtを「効く施策」として過大に売り込むものもあるが、技術的な実態と乖離した説明は、いずれ信頼を損なう。

まとめ

• llms.txtはサイト構造をAIに案内するMarkdownファイルだが、公式標準ではなくコミュニティ提案である
• 現時点で主要AIクローラーが積極的に参照している証拠は乏しく、効果は限定的
• ただし設置コストが低く、将来への備えや規制産業での正確な情報提供という文脈では意味を持ちうる
• 「置けば効く」という過大な期待は禁物。低コストな将来投資と位置づけるのが妥当

技術の世界では、期待先行で語られる仕様を冷静に評価する姿勢が重要だ。llms.txtは「無視すべきもの」でも「魔法の杖」でもなく、その中間にある。次回は、SEOとGEOの違いを技術的な観点から整理する。

---

本記事は2026年時点の主要AIクローラーの挙動に基づく。状況は変化しうるため、最新の各社ドキュメントも併せて確認されたい。