Что такое llms.txt и кто его придумал?
llms.txt предложен как открытая Markdown-конвенция: сайт может собрать в одном месте краткое описание и ссылки на ключевые материалы. Идея понятна для документации и больших баз знаний, где посетителю или агенту удобно быстро увидеть карту разделов.
Важно понимать статус: llms.txt — добровольная конвенция, а не официальный стандарт. Нет универсального правила, по которому поисковик, чат или агент должен запросить и учесть такой файл. Поэтому он допустим как аккуратное дополнение к сайту, но не как SEO- или AEO-обязательство.
Чем llms.txt отличается от robots.txt и sitemap.xml?
Эти три файла часто путают, хотя задачи у них разные и они не заменяют друг друга, а дополняют.
| Файл | Назначение | Формат | Аудитория |
|---|---|---|---|
robots.txt |
Запреты и разрешения: куда роботам можно, куда нельзя | Собственный текстовый синтаксис (User-agent, Disallow) | Все краулеры: поисковые и ИИ |
sitemap.xml |
Полный список URL для индексации, без пояснений | XML | Поисковые роботы (Яндекс, Google) |
llms.txt |
Необязательная смысловая карта: описание и ссылки, если конкретный потребитель её поддерживает | Markdown | Системы, которые добровольно поддержали конвенцию |
Коротко: robots.txt управляет правилами обхода, sitemap.xml помогает поисковым системам узнать о URL, а llms.txt — необязательный дополнительный файл. Для AI-видимости сначала важны доступные самостоятельные страницы и базовые требования поиска; подробнее — в статье о AEO.
Как создать llms.txt: пошагово
Структура файла зафиксирована в спецификации и намеренно проста. Порядок такой:
- H1 с названием проекта — единственный обязательный элемент. Одна строка, начинается с
#. - Blockquote-описание — абзац после
>: суть вашего бизнеса в одном-двух предложениях. Именно его модель прочитает первым. - Ключевые факты — короткий список того, что ИИ должен знать о вас: специализация, цены, география, отличия.
- Секции H2 со списками ссылок — каждая ссылка в формате
[название](URL): аннотация. Аннотация обязательна: она объясняет модели, что на странице, без перехода по ссылке. - Секция Optional (по желанию) — второстепенные ссылки, которые модель может пропустить при нехватке контекста.
Ниже — пример структуры, который можно адаптировать для документации или сайта с понятной картой разделов. Не воспринимайте его как сигнал, гарантирующий индексирование или цитирование:
# AEO-Agency
> Российское агентство Answer Engine Optimization (AEO): делаем сайты
> видимыми для нейросетей — ChatGPT, Алиса AI, GigaChat, Perplexity,
> Gemini. Аудит 8 999 ₽, внедрение под ключ, мониторинг видимости.
Ключевые факты:
- AEO-аудит по 8 категориям (доступность для ИИ-краулеров, llms.txt,
Schema.org, структура контента, FAQ, E-E-A-T, сущность бренда,
видимость в LLM) с оценкой 0–100.
- Специализация на российских нейросетях: Алиса AI, GigaChat,
DeepSeek — плюс ChatGPT и Perplexity.
- Бесплатная проверка, история замеров и экспертный аудит доступны
внутри одного продукта AEO-Agency.
## Страницы
- [Главная и услуги](https://aeo-agency.ru/): аудит, замер видимости,
внедрение AEO, сопровождение — с ценами и сроками.
- [Частые вопросы](https://aeo-agency.ru/#faq): что такое AEO,
сколько стоит, когда будет результат.
## Контакты
- Email: hello@aeo-agency.ru
Сохраните файл в кодировке UTF-8, положите в корень сайта (чтобы он открывался по адресу вашдомен.ру/llms.txt) и убедитесь, что сервер отдаёт его со статусом 200. На всё уходит около часа — большая часть времени тратится не на технику, а на формулировки.
Частые ошибки
- HTML вместо Markdown. Некоторые CMS оборачивают любой URL в шаблон страницы. llms.txt должен отдаваться как чистый текст — проверьте ответ сервера, а не только вид в браузере.
- Свалка всех ссылок подряд. Файл на 500 URL без структуры — это второй sitemap, а не карта смыслов. Отберите 10–30 действительно важных страниц.
- Ссылки без аннотаций. Голый список URL неудобен человеку и инструментам, которые решат прочитать файл. Короткое пояснение делает файл понятнее, но не создаёт обязательства его учитывать.
- Забыли обновлять. Изменились цены, услуги или адреса страниц — llms.txt должен измениться в тот же релиз. Устаревший файл хуже отсутствующего: модель уверенно перескажет неправду.
- Игнорирование политики обхода. Не меняйте robots.txt ради llms.txt автоматически. Сначала решите, какие конкретные краулеры и с какой целью вы готовы допускать, затем сверяйтесь с официальной документацией их владельцев.
Работает ли это? Честный ответ
Скажем прямо: прямых гарантий нет. Стандарт молодой, публичных подтверждений «мы учитываем llms.txt в ранжировании ответов» никто из разработчиков нейросетей не давал, а исследования влияния пока единичны и противоречивы.
Добавлять файл имеет смысл только после базовой технической проверки: важные страницы доступны, находятcя по внутренним ссылкам, корректно индексируются там, где это нужно бизнесу, а информация в них актуальна. Файл не должен становиться единственным или более «важным» источником фактов о компании.
Разметка Schema.org и llms.txt решают разные задачи. Если используется Schema.org, она должна соответствовать видимому тексту; отдельной специальной разметки или AI-файла для появления в Google AI features не требуется. Полный технический контур можно проверить в AEO-аудите.
Частые вопросы
Нужен ли llms.txt, если на сайте уже есть sitemap.xml?
llms.txt не заменяет sitemap.xml. Sitemap — поддерживаемый поисковыми системами способ сообщить о URL, а llms.txt — добровольная Markdown-конвенция без обязательной поддержки. Сначала обеспечьте доступность и индексируемость основных страниц.
Куда положить llms.txt и как проверить, что он работает?
Обычно файл кладут в корень сайта и проверяют ответ 200 без HTML-обёртки. Это подтверждает только доступность файла, а не его использование конкретной системой. Правила каждого краулера нужно проверять по официальной документации владельца.
Что такое llms-full.txt и нужен ли он обычному сайту?
llms-full.txt обычно называют расширенной версией с текстом ключевых материалов. Это также неофициальная конвенция. Не дублируйте весь сайт в одном файле без понятной цели: первичным источником для поисковых систем остаются доступные самостоятельные страницы.