В воскресенье я чистил корень nasloy.ru. Там robots.txt, карта сайта, пара забытых верификационных файлов и llms.txt. Последний я когда-то положил сам, регулярно обновляю и при этом не смог бы за две минуты объяснить заказчику, что он даёт. Объяснил бы примерно наполовину, и вторая половина звучала бы как «ну, все кладут».
Пятнадцать лет в SEO так и не отучили меня делать вещи «на всякий случай». Поэтому сел и разобрал всё заново, уже с цифрами.
Что это за файл и чем он отличается от соседей
llms.txt — обычный текстовый файл в корне сайта, написанный в markdown. Структура простая: заголовок с названием проекта, короткое описание и список ссылок на ключевые страницы. У каждой ссылки есть пояснение в одну строку. Идея в том, чтобы дать языковой модели сжатую карту сайта, а не заставлять её продираться через мегабайты HTML с меню, баннерами и скриптами.
Похоже на оглавление в книге. Мой сайт — 301 адрес в карте, а оглавление из двадцати строк читается за секунды.
Файл предложили в 2024 году как открытую инициативу. Это не стандарт и не обязательное требование, а договорённость, которую поддерживают не все. Чтобы не путаться, держу в голове такую схему:
| Файл | Для кого | Что делает |
|---|---|---|
| robots.txt | Все краулеры, включая поисковые и ИИ | Разрешает или запрещает обход разделов |
| sitemap.xml | Поисковые системы | Перечисляет все адреса для индексации |
| llms.txt | Языковые модели и ИИ-ассистенты | Даёт короткую карту главного с пояснениями |
robots.txt говорит, куда ходить нельзя. Sitemap перечисляет всё подряд. llms.txt выбирает главное и объясняет, почему оно главное. Как ИИ-краулеры обращаются с остальными двумя файлами, я подробно разбирал в статье «ИИ-краулер читает RSS и sitemap».
Что файл даёт, а чего не даёт
Начну с плохих новостей. Google официально заявлял, что не использует llms.txt для поиска. На индексацию и ранжирование файл не влияет. Позиции от него не вырастут, и сниппет не станет красивее.
Последний я когда-то положил сам, регулярно обновляю и при этом не смог бы за две минуты объяснить заказчику, что он даёт
Хорошая новость скромнее. Часть ИИ-ассистентов такие файлы читает, а ИИ-краулеры ходят по сайтам активно. У меня PerplexityBot за октябрь и ноябрь сделал 1 007 запросов, считая обращения к /robots.txt. Роботы приходят, и это факт из логов. Читают ли они именно llms.txt и что потом делают с прочитанным, по логам не видно.
Получается такой баланс: для поиска файл бесполезен, для ассистентов возможно полезен, а для отчёта клиенту пока ничего не даёт.
Как выглядит хороший llms.txt
Кривых файлов я видел больше, чем хороших. Одни люди копируют туда весь sitemap. Другие пишут на три экрана о миссии компании. Сам я держусь пяти правил:
- Короткое описание. Два-три предложения о том, что это за сайт и для кого. Без лозунгов, модели они ни к чему.
- 10–30 ключевых ссылок. Это не карта сайта. Если ссылок двести, вы просто сделали второй sitemap в худшем формате.
- Одна строка на страницу. Ссылка, двоеточие, пояснение: о чём страница и чем полезна. Абзацы под ссылками не нужны.
- Версия llms-full. Если хочется отдать модели больше, полный текст ключевых материалов кладут в отдельный llms-full.txt, а основной файл остаётся коротким.
- Ссылка на контакты. Модели нужно знать, кто стоит за сайтом и куда писать. Одна строка, а доверия заметно больше.
Скелет выглядит примерно так:
``` # nasloy.ru
Блог о SEO и веб-разработке: практика, логи, цифры.
Ключевые материалы
- Название статьи: о чём и кому пригодится
```
Если не хочется собирать файл вручную, у меня есть генератор robots.txt и llms.txt. Он делает черновик, который потом всё равно стоит прочитать глазами.
Мой файл как пример
На nasloy.ru 151 статья и 301 адрес в карте сайта. В llms.txt попадает малая часть: материалы, на которые я сам отправил бы человека, впервые зашедшего на сайт. Там описание блога, ключевые статьи с пояснениями, инструменты и контакты.
Файл отдаётся с заголовком no-store, чтобы кэш не держал старую версию. Обновляю его вместе с картой сайта, это одна задача в одном заходе. Публикую статью, обновляю sitemap и сразу решаю, заслуживает ли новый материал строки в llms.txt. Чаще всего не заслуживает.
Почему руками, а не скриптом? Скрипт отлично выгружает всё, а здесь нужен выбор. Решить, какие двадцать с небольшим материалов из 151 лучше всего описывают блог, автоматика не может. Она бы честно вписала всё, и файл превратился бы в тот самый второй sitemap. Иронично, что именно ручная работа делает файл полезным, хотя на неё уходит минут пять.
Чего ждать от файла
Немного трезвых цифр. За последние 28 дней у меня 106 кликов и 5 369 показов в поиске, это примерно 2% CTR. llms.txt к этим цифрам отношения не имеет и иметь не может, раз Google его не использует. Если цифры вырастут, причина будет в контенте, а не в текстовом файле в корне.
Тогда зачем он нужен? Затем, что ассистенты всё чаще становятся первой точкой, где человек ищет ответ. Если когда-нибудь договорённость станет нормой, сайты с аккуратной картой окажутся готовы заранее. Если не станет, я потерял пять минут на каждое обновление.
llms.txt — это ставка на будущее, а не рычаг роста. Ставка дешёвая, проигрыш по ней измеряется минутами, а выигрыш пока никто не посчитал.
Вот так я и объясняю это заказчикам. Работает лучше, чем «все кладут».
Ограничения, о которых честно говорю
Первое и главное: подтверждённых данных о влиянии файла у меня нет. Сказать, что llms.txt принёс мне трафик, я не могу. В логах нет рефереров из ИИ-ассистентов, а упоминания сайта в ответах моделей я снимаю вручную, задавая вопросы и записывая результат. Метод медленный, на статистику он не тянет.
Второе: часть моделей файл просто игнорирует. Можно сделать идеальный llms.txt, а конкретный ассистент всё равно разберёт HTML или не зайдёт вовсе.
Третье: стандарта нет. Это договорённость 2024 года, у которой нет обязательной спецификации и гарантированных читателей. Формат может поменяться, разветвиться или тихо исчезнуть. Строить на нём стратегию продвижения я бы не стал. Положить файл в корень и поддерживать его я считаю разумным, и только.
Что сделать сегодня
Откройте ваш_сайт/llms.txt в браузере. Если файла нет, соберите черновик: описание в два предложения, десять самых полезных страниц, контакты. Если файл есть, посчитайте в нём ссылки. У меня после воскресной чистки их двадцать три, и одну я вычеркнул: статья про устаревший плагин, на которую я бы сам уже никого не отправил.