一般的なウェブサイトにとって、llms.txtファイルは2026年において、GoogleやAI検索エンジンにおいて測定可能な利益をもたらさないとAbondanceは述べている。同サイトは、2026年6月1日から11月4日までのサーバーログを分析した結果、2つのファイルが1,657件のリクエストを受け、そのうち識別されたAIボットからのものは10件のみであった。
Googleと調査結果が示すこと
llms.txtは、サイトのルートディレクトリに配置されるMarkdownファイル（簡易テキスト形式）である。これはサイトを紹介し、有用なページをリストアップする。このフォーマットはJeremy Howardによって考案され、2024年9月3日に発表された。2年後も、これは依然としてウェブ標準ではない。派生形のllms-full.txtは、全ページのコンテンツを1つのファイルにまとめたものである。これは元のフォーマットの一部ではなく、Mintlifyのようなドキュメンテーションツールに由来する。
Googleは、生成AIに関するガイドにおいて、AI機能を含む検索結果に表示されるためにテキストファイルは必要ないと断言している。同検索エンジンは「Google Search ignores them」と明言している。2026年6月15日付のポッドキャストで、John Muellerは、このファイルによってAIに発見されることを期待することは「doesn’t make any sense at all」と述べ、どのサイトも自らを最高だと紹介している点を指摘した。
調査結果も同様の方向性を示している。Ahrefsは2026年5月に137,210ドメインを分析し、28％がllms.txtを公開しており、それらのファイルの97％が1か月間に1件もリクエストを受けていないことを発見した。一方、SE Rankingは約30万ドメインとそれらがLLMで言及された回数を照合し、ファイルの存在との相関関係を全く見出せなかった。
Abondanceのログが示すこと
記録された1,657件のリクエストのうち、585件（全体の35％）はSEOツール、GEOツール、スキャナーからのものであった。Googlebotを装ったOVHサーバーが10月23日以降に289回ファイルを開いた一方で、本物のGooglebotは期間中わずか34回しか訪問しなかった。ユーザーの要求に応じてのみ動作するChatGPT-Userは、6月8日と8月25日の2回ファイルを開いた。ClaudeBotは10月21日に1回開き、OAI-SearchBot、PerplexityBot、GPTBotは一度も参照しなかった。
11月5日に公開された更新情報で重要な点が明らかになった。Abondanceのホスティングプロバイダーは、GPTBotが8月25日以降、ファイアウォールによってブロックされていたことを発見した。このファイアウォールには、そのボットとPerplexityBotの一部のアドレスが含まれていた。リストは同日中に削除され、両ボットはログに再び現れた。したがって、robots.txtでボットを許可しても、ファイアウォールやCDNが上流でブロックする可能性があるため、サイトに到達することが保証されない。
ファイルが有用性を保つケース
John Muellerは特に技術系サイトを指摘している。Google自身も開発者向けサイトでこの種のファイルを公開している。Ahrefsの調査では、AnthropicのコードエージェントであるClaude Codeが、llms.txtファイルを最も頻繁に開くAIツールの一つに挙げられている。エージェントが利用する必要があるサービスにとっては、ファイルがその方法を説明できる可能性があるが、John Muellerはこの問題は未解決であると指摘している。
