Для обычного сайта файл llms.txt не приносит измеримой пользы в 2026 году ни в Google, ни в поисковых системах на базе ИИ, утверждает Abondance. Сайт проанализировал свои серверные логи в период с 1 июня по 4 ноября 2026 года: его два файла получили 1657 запросов, из которых только 10 были от идентифицированных ИИ-ботов.
Что говорят Google и исследования
llms.txt — это файл Markdown (простой текстовый формат), размещаемый в корне сайта. В нем описывается сайт и перечисляются полезные страницы. Этот формат был предложен Джереми Ховардом и представлен 3 сентября 2024 года. Два года спустя он все еще не является веб-стандартом. Вариант llms-full.txt объединяет полное содержимое страниц в один файл. Он не является частью исходного формата и происходит от инструментов документации, таких как Mintlify.
Google утверждает в своем руководстве по генеративному ИИ, что для появления в поиске, включая ИИ-функции, никакой текстовый файл не требуется. Поисковик уточняет, что «Google Search их игнорирует». В подкасте от 15 июня 2026 года Джон Мюллер заявил, что надеяться быть обнаруженным ИИ благодаря этому файлу «не имеет никакого смысла», поскольку каждый сайт представляет себя в нем как лучший.
Исследования подтверждают эту точку зрения. Ahrefs проанализировал 137 210 доменов в мае 2026 года: 28% публикуют llms.txt, и 97% этих файлов не получили ни одного запроса за месяц. SE Ranking, со своей стороны, сопоставил около 300 000 доменов с их упоминаниями в LLM и не обнаружил корреляции с наличием этого файла.
Что показывают логи Abondance
Из 1657 зафиксированных запросов 585 поступили от SEO-инструментов, GEO-инструментов и сканеров, что составляет 35% от общего числа. Сервер OVH, выдававший себя за Googlebot, открывал файл 289 раз с 23 октября, тогда как настоящий Googlebot обращался всего 34 раза за весь период. ChatGPT-User, который работает только по запросу пользователя, открывал файл дважды — 8 июня и 25 августа. ClaudeBot открыл его один раз 21 октября, а OAI-SearchBot, PerplexityBot и GPTBot никогда к нему не обращались.
Обновление, опубликованное 5 ноября, вносит важное уточнение. Хостинг-провайдер Abondance обнаружил, что GPTBot был заблокирован с 25 августа его межсетевым экраном, который содержал адреса этого бота и некоторые адреса PerplexityBot. Список был удален в тот же день, и оба бота снова появились в логах. Таким образом, разрешение боту в robots.txt не гарантирует, что он достигнет сайта, поскольку межсетевой экран или CDN могут остановить его на более раннем этапе.
Случаи, когда файл сохраняет ценность
Джон Мюллер в первую очередь отмечает технические сайты. Google сам публикует такие файлы на своих сайтах для разработчиков. В исследовании Ahrefs среди ИИ-инструментов, наиболее часто открывающих файлы llms.txt, фигурирует Claude Code — код-агент Anthropic. Для сервиса, которым должен пользоваться агент, файл может объяснить ему, как это делать, хотя Джон Мюллер напоминает, что вопрос остается открытым.
