Коротко
- llms.txt — предложение сообщества (Джереми Ховард, сентябрь 2024) положить в корень сайта Markdown-файл с кратким обзором и ссылками на важные страницы для ИИ-агентов. Это не стандарт: обязательств читать его нет. Он не управляет доступом (для этого robots.txt) и не заменяет sitemap.xml.
- Справка Google об ИИ-функциях поиска говорит, что для AI Overviews и AI Mode не нужны особые машиночитаемые файлы и разметка; по пересказам обзоров, сотрудники Google высказывались, что файл не используется. По исследованиям, пересказанным Optimizely, большинство файлов не получает обращений ботов, а связи с цитированием не найдено; данные коммерческих компаний, это ориентиры. Подтверждений поддержки Яндексом и Алисой в найденных источниках нет.
- Рационально считать файл недорогим экспериментом: стоит для документации и баз знаний, для визиток и лендингов можно отложить. Важнее базовое SEO: доступ ботов, индексация, ответ в начале страницы, честная разметка, актуальность. Устаревший файл хуже его отсутствия.
- В статье — формат файла, исследования и позиции, сценарии, шаги создания с условным примером, доступ ИИ-ботов, проверка, десять ошибок и PDF-чек-лист на 30 пунктов.
Коротко: что такое llms.txt и нужен ли он вашему сайту
llms.txt — это предложение положить в корень сайта текстовый файл в формате Markdown: короткий обзор сайта и ссылки на самые важные страницы, написанные так, чтобы их было удобно читать нейросетям и ИИ-агентам. Идея принадлежит Джереми Ховарду и опубликована на сайте llmstxt.org в сентябре 2024 года. Это не стандарт в строгом смысле: никакая организация его не утверждала, и обязательств читать этот файл ни у кого нет.
Если нужен короткий ответ для владельца обычного коммерческого сайта, он такой:
- Для видимости в Google файл не нужен. Справка Google об ИИ-функциях поиска (AI Overviews и AI Mode) говорит, что для показа в них не нужно создавать особые машиночитаемые файлы, «ИИ-тексты» или специальную разметку. Эта справка llms.txt по имени не называет, но по пересказам обзоров Google прямо отнёс его к ненужным тактикам.
- Исследования показывают, что файл почти не запрашивают. По данным нескольких исследований (Ahrefs, Limy, Otterly, SE Ranking), приведённых в обзоре Optimizely, подавляющее большинство файлов не получает обращений от ИИ-ботов, а связи с цитированием в ИИ-ответах не нашли. Эти компании сами продают продукты по теме, поэтому цифры я называю ориентирами.
- Вреда он не приносит, если не устаревает. Файл можно сделать за час и поддерживать вместе с картой сайта. Но устаревший файл с неверными ценами и адресами хуже, чем его отсутствие.
- Гораздо важнее обычные вещи: страницы доступны роботам, ответ стоит в начале страницы, структура ясная, разметка честная, технические ошибки исправлены.
В статье: формат файла по описанию автора идеи, чем он отличается от robots.txt и sitemap.xml, что известно о его использовании, позиция Google и что нашлось про Яндекс и Алису, кому файл имеет смысл, как составить его по шагам (с условным примером), что делать для видимости в ИИ-ответах вместо или вместе с ним, как проверить и отслеживать, десять ошибок и PDF-чек-лист на 30 пунктов. Для самого файла есть наши инструменты: генератор llms.txt и проверка llms.txt.
Основа статьи — страница llmstxt.org (формат и назначение), справка Google об ИИ-функциях поиска, справка Яндекса о запрете индексирования (в том числе роботов YandexAdditional), обзоры Optimizely, SISTRIX и русскоязычные материалы (Workspace, Хабр). Важная оговорка: многие утверждения о позиции Google (слова Джона Мюллера и Гэри Иллиеса) в обзорах переданы пересказом, а не дословными цитатами, и в моих источниках нет первичной записи этих слов. Я отмечаю такие места явно. Обзоры Optimizely и SISTRIX опубликованы компаниями, которые продают инструменты по теме, а часть русскоязычных статей написана агентствами, продающими услуги по ИИ-видимости (GEO), поэтому у каждого есть свой интерес.
Что такое llms.txt и как он устроен
По описанию на llmstxt.org, идея в следующем. Страницы сайтов создаются для людей, а в их HTML много навигации, рекламы и скриптов. Агенту трудно выделить из них чистый текст, а окно контекста у модели ограничено. Файл /llms.txt даёт краткий обзор в одном месте и ссылки на подробные материалы: агент читает обзор и переходит по ссылкам, когда нужна конкретика.
Где лежит файл
В корне сайта (https://example.ru/llms.txt) или, по описанию автора, в любом подпути, например /docs/llms.txt: тогда он описывает адреса внутри своего пути, а если подходит несколько файлов, должен использоваться самый специфичный.
Структура
Файл пишется в Markdown. Автор задаёт такой порядок разделов:
- H1 с названием проекта или сайта — единственный обязательный элемент.
- Blockquote (цитата) с кратким описанием проекта.
- Обычные разделы без заголовков (абзацы, списки) с подробностями.
- Разделы H2 со списками ссылок. Каждый пункт содержит ссылку вида
[название](адрес), после которой можно поставить двоеточие и пояснение. - Раздел Optional по соглашению содержит второстепенные ссылки, которые агент может пропустить, если нужен более короткий контекст.
Чем отличается от robots.txt и sitemap.xml
| robots.txt | sitemap.xml | llms.txt | |
|---|---|---|---|
| Задача | Правила доступа для роботов | Полный список страниц для обхода | Краткий отобранный обзор для ИИ-агента |
| Формат | Текстовые директивы | XML | Markdown |
| Кому адресован | Роботам поисковиков и ботам | Роботам поисковиков | ИИ-агентам, которые помогают пользователю |
| Поддержка | Широко признан (как проверить) | Признана поисковиками | Предложение сообщества, обязательств нет |
Автор идеи подчёркивает, что llms.txt дополняет sitemap.xml и robots.txt, но не заменяет их. Он не управляет доступом: запретить или разрешить ботов он не может. Для этого по-прежнему нужен robots.txt.
Автор также рекомендует отдавать Markdown-версии страниц по тому же адресу с добавлением .md, а для их поиска использовать тег <link rel="alternate" type="text/markdown"> или HTTP-заголовок Link. Это отдельная сложная часть предложения; для обычного сайта-визитки она избыточна.
Работает ли llms.txt: что известно
Пока нет надёжных свидетельств, что файл повышает видимость сайта в ИИ-ответах. Вот что говорят исследования, пересказанные в обзоре Optimizely (источник — компания, которая продаёт решения для управления контентом и ИИ-видимости):
| Исследование | Выборка | Результат |
|---|---|---|
| SE Ranking | около 300 000 доменов | Файл есть у 10,13% доменов; чёткой связи с цитированием в ИИ-ответах не найдено |
| Limy | более 500 млн визитов ИИ-ботов за 90 дней | Файл запрашивали напрямую 408 раз |
| Otterly | более 62 100 визитов ИИ-ботов за 90 дней | 84 запроса к файлу (около 0,1%); тест на одном сайте |
| Ahrefs | 137 210 доменов, май 2026 | 97% файлов не получили ни одного запроса |
Эти цифры я не проверял по первоисточникам, они переданы с оговорками самого обзора: методики разные, один из тестов проведён на единственном сайте, а исследователи — коммерческие компании. SISTRIX в своём обзоре делает вывод в том же духе: срочной необходимости действовать нет, обычному бизнес-сайту пользы сейчас нет, а технически продвинутым сайтам с ИИ-трафиком можно провести небольшой тест. Собственного теста файла в обзоре SISTRIX нет.
Из этого следует практичное, а не идеологическое решение: рассматривайте llms.txt как недорогой эксперимент, а не как фактор роста.
Позиция Google
- Справка Google об ИИ-функциях поиска. Для показа в AI Overviews и AI Mode отдельной оптимизации не требуется: страница должна быть проиндексирована и допускать показ со сниппетом, соответствовать общим техническим требованиям поиска. Создавать новые машиночитаемые файлы, «ИИ-тексты» и особую разметку не нужно. Файл llms.txt на странице по имени не упомянут.
- Высказывания сотрудников Google (по пересказам Optimizely и SISTRIX, дословных цитат в моих источниках нет): в июле 2025 года Гэри Иллиес на Search Central Live сказал, что Google не поддерживает llms.txt и не планирует; Джон Мюллер сравнил файл со старым мета-тегом keywords — самоописанием сайта, тогда как поисковику нужнее сам сайт.
- Обзор Optimizely также сообщает о руководстве Google по оптимизации под ИИ, где (по пересказу) файл назван ненужным, и об одном исключении: экспериментальная проверка Lighthouse команды Chrome проверяет наличие llms.txt как признак готовности к «агентному» просмотру. Это пересказ; перед выводами откройте текущие материалы Google.
Практический вывод: ждать от файла эффекта в Google не стоит. Проверка Lighthouse не означает влияния на поиск.
Яндекс, Алиса и другие
В найденных мной источниках нет подтверждений, что Яндекс или Алиса читают llms.txt. Русскоязычный обзор Workspace пишет, что в публикациях часто говорят, будто ChatGPT, YandexGPT, Grok и GigaChat учитывают файл, но на декабрь 2025 года компании этого не подтвердили. Хабр-статья того же рода называет подтверждение со стороны OpenAI, Google, Anthropic и Яндекса/Сбера отсутствующим (это мнение автора-агентства). Что есть у Яндекса точно, так это управление доступом: по справке «Как запретить индексирование сайта или страниц», чтобы информация с сайта не показывалась в ответах Алисы AI, нужно запретить в robots.txt роботов YandexAdditional или YandexAdditionalBot, изменения учитываются в течение 2–14 дней. У Google за использование контента для обучения и ответов других систем Google отвечает Google-Extended в robots.txt.
Об этих правилах доступа — в разделе «Что важнее llms.txt». Проверить, как вы управляете ботами, можно в нашем списке ИИ-ботов и проверке robots.txt.
Кому имеет смысл делать llms.txt
| Тип сайта | Рекомендация | Почему |
|---|---|---|
| Документация, API-справка, продукт для разработчиков | Стоит сделать | Агенты и разработчики используют документацию; у многих платформ автоматическая генерация |
| Большая база знаний, много материалов | Можно сделать | Помогает указать агенту актуальные страницы; файл лучше генерировать из CMS |
| Интернет-магазин | Необязательный эксперимент | Обзор категорий и условий можно дать, но каталог лучше отдавать разметкой и фидами |
| Сайт-визитка, лендинг, небольшой блог | Можно отложить | Эффект не доказан; ресурсы лучше направить на контент и технику (по оценке Workspace) |
Если вы работаете с ИИ-видимостью (GEO) и готовы поддерживать файл, он будет частью эксперимента вместе с замерами. Подробнее о теме — на странице GEO-инструментов.
Как сделать llms.txt по шагам
- Определите цель. Что агент должен понимать о вашем бизнесе: чем занимаетесь, для кого, где условия, цены, контакты, документацию.
- Отберите 10–30 страниц. Не всю карту сайта, а главное: об услугах или категориях, доставка и оплата, гарантии и возврат, контакты, ответы на частые вопросы. Для магазина — главные категории, а не тысячи карточек.
- Напишите обзор. Одним-двумя абзацами: что за компания, где работает, чем отличается. Только факты, которые есть на сайте.
- Оформите по структуре. H1 с названием, цитата-описание, при необходимости пояснения, разделы H2 со списками ссылок и пояснениями, раздел Optional для второстепенного. Можно воспользоваться генератором.
- Проверьте ссылки. Каждая ссылка должна отдавать код 200 и вести на актуальную страницу: проверка ссылок, коды ответа.
- Разместите файл по адресу
/llms.txtв корне и убедитесь, что он отдаётся как текст в кодировке UTF-8: проверка llms.txt. - Настройте обновление. Лучше генерировать файл из CMS при публикации страниц, чем править вручную (совет обзора Optimizely).
Пример (условный, выдуманный) для небольшого магазина — так может выглядеть файл:
# Магазин «Тихая гавань»
> Интернет-магазин товаров для дома в Москве и области. Доставка по России, самовывоз из двух пунктов, оплата картой и при получении.
Цены на сайте указаны в рублях с НДС. Актуальные условия доставки и возврата — по ссылкам ниже.
## Каталог
- [Посуда](https://example.ru/posuda/): тарелки, кружки, наборы
- [Текстиль](https://example.ru/tekstil/): постельное бельё, пледы
## Условия
- [Доставка и оплата](https://example.ru/dostavka/): сроки, стоимость, пункты самовывоза
- [Возврат и обмен](https://example.ru/vozvrat/): срок и порядок
## Контакты
- [Контакты и адреса](https://example.ru/kontakty/): телефон, время работы
## Optional
- [О компании](https://example.ru/o-kompanii/)
Название магазина, адреса и условия в примере выдуманы: подставьте свои. Главное — каждая строка подтверждена на сайте.
А что с llms-full.txt?
Некоторые сайты также публикуют файл с полным текстом ключевых страниц (его называют llms-full.txt). На странице llmstxt.org такой файл не описан, а Optimizely лишь упоминает, что его публикуют отдельные сайты. Для большинства бизнес-сайтов он не нужен; у больших документаций он может быть удобен, но тогда его надо поддерживать так же аккуратно.
Что важнее llms.txt для видимости в ИИ-ответах
Если цель — чтобы ваш сайт цитировали в ответах нейросетей и в ИИ-обзорах поисковиков, то работает в основном обычное хорошее SEO. По справке Google и обзорам:
- Доступ для роботов. Разрешите сканирование нужным ботам в robots.txt и на уровне CDN/хостинга: частая причина «невидимости» — случайная блокировка. Решите, каких ИИ-ботов вы пускаете (поиск, обучение), и запишите правила осознанно: ИИ-боты.
- Индексация и сниппет. Для показа в ИИ-функциях Google страница должна быть проиндексирована и допускать показ со сниппетом: не закрывайте её лишними запретами (nosnippet и noindex ограничивают показ). См. «Сниппет» и «Noindex».
- Ответ в начале страницы, чёткие заголовки, списки и таблицы, текст как основной носитель смысла (Google отдельно называет текст основным).
- Честная разметка. Structured data должна соответствовать видимому тексту; разметка, придуманная «для ботов», не нужна.
- Качество и актуальность контента, внутренняя перелинковка, хороший пользовательский опыт, актуальные данные в Merchant Center и Business Profile — из списка практик Google.
- Измерение. Трафик из ИИ-функций Google входит в общий отчёт Performance в Search Console (категория «Web»). Для других систем смотрите логи сервера и источники трафика в Метрике: цели в Метрике.
Остановите привычку делать вторую версию сайта «для роботов»: обзор Optimizely предупреждает, что параллельные версии для людей и для машин рассинхронизируются, и предлагает единую модель контента, из которой генерируются страницы, ответы API и llms.txt.
Риски и ограничения
- Устаревание. Файл с неверными ценами, ссылками на 404 и закрытые страницы вредит доверию агентов и людей. Нужен регламент обновления.
- Клоакинг. Нельзя указывать в файле то, чего нет на сайте, или вести на скрытый контент (SISTRIX указывает на этот риск).
- Утечка лишнего. Не включайте закрытые страницы, личные данные и внутренние документы: файл публичный.
- Ложные ожидания. Не обещайте руководству рост трафика от файла. Измеряйте.
- Ресурсы. Поддержка файла требует времени без доказанной выгоды: оцените по честным критериям.
Как проверить и отслеживать
- Откройте файл в браузере по адресу
/llms.txt: код 200, UTF-8, читаемый Markdown. - Проверьте структуру валидатором: проверка llms.txt (H1, цитата, разделы, ссылки).
- Проверьте ссылки на коды 200 и редиректы: проверка ссылок.
- Смотрите логи. Через серверные логи или аналитику узнайте, кто и как часто запрашивает файл. Если за квартал запросов нет, эффект нулевой, и вы это знаете.
- Замеряйте цитирование. Раз в месяц проверяйте, упоминают ли вас в ответах нейросетей на ключевые вопросы, и сравнивайте до и после, понимая, что причин может быть много.
- Обновляйте вместе с релизами. Новые разделы, смена цен и условий должны попадать в файл.
Десять частых ошибок
- Считать llms.txt фактором ранжирования в Google или Яндексе.
- Использовать его вместо robots.txt для управления доступом.
- Выгрузить в файл всю карту сайта вместо отобранных страниц.
- Ссылки на 404, редиректы и закрытые страницы.
- Рекламный текст вместо фактов в описании.
- Информация в файле расходится с сайтом (старые цены и условия).
- Закрытые или личные страницы в файле.
- Файл не в корне или не в UTF-8, отдаётся не как текст.
- Не заботятся о доступе ИИ-ботов, а потом удивляются отсутствию цитирования.
- Не замеряют результат и не знают, читает ли кто-то файл.
Как работаю с ИИ-видимостью я
Я не продаю llms.txt как волшебную кнопку. В рамках SEO-аудита проверяю то, что точно влияет: доступность сайта для поисковых и ИИ-ботов, индексацию, структуру, разметку и скорость, и отдельно оцениваю, нужен ли вам llms.txt как недорогой эксперимент. Результат: PDF-отчёт на 30–50 страниц, технические задания для программистов, прогноз по трафику и заявкам и созвон, на котором я лично расскажу о найденных ошибках и отвечу на вопросы. Стоимость от 30 000 ₽, срок 3–5 рабочих дней для небольшого сайта и 7–10 для крупного магазина.
Итоговый чек-лист (короткая версия, полная в PDF)
- Понятно, что llms.txt — необязательный эксперимент, а не фактор ранжирования.
- Базовое SEO в порядке: индексация, доступ ботов, структура, разметка, скорость.
- Правила доступа ИИ-ботов записаны в robots.txt осознанно.
- Если файл делается: отобраны важные страницы, ссылки живые, содержание совпадает с сайтом.
- Файл обновляется вместе с сайтом и проверяется валидатором.
- Результат измеряется по логам и цитированию.
Частые вопросы
Что такое llms.txt?
Предложенный в сентябре 2024 года Джереми Ховардом файл в формате Markdown в корне сайта: краткий обзор и ссылки на важные страницы для ИИ-агентов. Это не утверждённый стандарт, обязательств поддерживать его ни у кого нет.
Нужен ли llms.txt для Google?
Нет. Справка Google об ИИ-функциях говорит, что для показа в AI Overviews и AI Mode не нужны особые машиночитаемые файлы и разметка. По пересказам обзоров, сотрудники Google высказывались о том, что файл не используется.
Читают ли llms.txt Яндекс и Алиса?
В найденных источниках подтверждений нет. Русскоязычные обзоры отмечают, что публикации о поддержке файла нейросетями не подтверждены компаниями. Управлять доступом ботов Яндекса можно в robots.txt (например, YandexAdditional).
Читают ли файл ChatGPT и другие нейросети?
Исследования, пересказанные Optimizely, показывают очень мало прямых обращений ботов к файлу, а связи его наличия с цитированием в ИИ-ответах не найдено. Данные получены коммерческими компаниями, поэтому относитесь к ним как к ориентиру.
Чем llms.txt отличается от robots.txt и sitemap.xml?
robots.txt задаёт правила доступа, sitemap.xml перечисляет страницы для обхода, а llms.txt даёт краткий отобранный обзор для ИИ-агента в формате Markdown. Он не управляет доступом и не заменяет два других файла.
Что должно быть в llms.txt?
По описанию автора: заголовок H1 с названием сайта, цитата с кратким описанием, при необходимости пояснения и разделы H2 со списками ссылок с пояснениями; раздел Optional для второстепенного. Только факты, подтверждённые на сайте.
Кому стоит делать llms.txt?
В первую очередь сайтам с документацией и API, большим базам знаний. Для визиток, лендингов и небольших блогов эффект не доказан, поэтому можно отложить. Магазину можно сделать как недорогой эксперимент.
Что важнее llms.txt для видимости в ИИ-ответах?
Доступ роботов, индексация и показ со сниппетом, ответ в начале страницы, понятная структура, честная разметка, качество и актуальность контента, перелинковка и скорость. Это обычное хорошее SEO.
Как проверить llms.txt?
Откройте файл по адресу /llms.txt, проверьте код 200 и UTF-8, структуру валидатором, ссылки — на коды ответа, а по логам сервера и аналитике посмотрите, запрашивает ли его кто-то.
Где скачать чек-лист?
PDF-чек-лист на 30 пунктов с приоритетами P1–P3, подсказками «как проверить» и подсчётом результата можно скачать по ссылке в статье. Он бесплатный; при цитировании укажите источник.