LLMs.txt

Настройте основной файл `llms.txt` и дополнительные расширения, чтобы AI-системы видели именно тот контент, который вы хотите выделить.

Обзор

LLMs.txt публикует машиночитаемый файл llms.txt и при необходимости позволяет выпускать дополнительные файлы-расширения для отдельных сценариев.

Путь в админке: Airygen SEO -> Настройки -> LLMs.txt.

Этот модуль полезен, когда вы хотите точнее управлять тем, какие страницы AI-краулеры и LLM должны замечать в первую очередь, а какие материалы не стоит поднимать на уровень основного машиночитаемого входа на сайт.

Настройки

Страница разделена на вкладки Настройки, Расширения и Предпросмотр.

Вкладка Настройки

Используйте эту вкладку для основного файла llms.txt.

Основной вывод

  • Включить вывод llms.txt публикует базовый файл сайта.
  • Стратегия индексирования задаёт, как объединяются ручные Выборки и автоматический подбор материалов.
  • Режим Только выборки подходит, когда вы хотите полностью вручную определить содержимое файла.
  • Режим Выборки + авто совмещает ваши ручные разделы с автоматически подобранным контентом.
  • Режим Только авто строит файл только на основе автоматического подбора без ручных разделов.
  • Использовать ссылки на записи markdown переключает ссылки на markdown-формат, если модуль Markdown для агентов поддерживает этот тип записи.
  • Добавить в карту сайта включает /llms.txt и активные расширения в индекс XML-карты сайта.
  • Автодобавление групп кластера тем может автоматически включать группы из Тематический кластер как отдельные выделенные разделы.
  • Заголовок автозагружаемого раздела задаёт название для секции, в которую попадает автоматически загруженный контент.
  • Пользовательское объявление добавляет необязательный вводный текст под заголовком llms.txt.
  • Очистить кэш пересобирает вывод после крупных изменений в контенте или правилах выборки.

Область и исключения

  • Типы записей определяют, какие типы контента участвуют в автоматическом подборе.
  • Исключить noindex не даёт автоматически включать записи с директивой noindex.
  • Исключить защищённые паролем убирает из автоматической выборки закрытый паролем контент.
  • Минимальное количество слов помогает отсеять слишком короткие материалы из автоматического подбора.

Ручные выборки

  • Блок Выборки управляет вручную собранными разделами для основного файла.
  • Добавить выборку создаёт новый курируемый раздел.
  • У каждой выборки можно задать Заголовок, Описание и список материалов.
  • Внутри окна выборки есть области Настройки, Выбранные записи и Поиск записей.
  • Выбранные записи показывают материалы, которые уже войдут в этот раздел.
  • Поиск записей помогает быстро находить и добавлять нужные страницы и записи по заголовку.
  • Область хранения скрытых выборок подходит для временного хранения разделов, которые вы пока не хотите публиковать.

Вкладка Расширения

Используйте эту вкладку, если одного базового файла для сайта недостаточно.

  • Добавить расширение создаёт отдельную конфигурацию дополнительного файла.
  • У каждого расширения есть собственные поля Заголовок, Описание, Путь, Filename, Пользовательское объявление и переключатель Включить расширение.
  • Путь и Filename управляют тем, по какому адресу будет доступен отдельный файл расширения.
  • Каждое расширение имеет свои собственные Выборки, которые переопределяют базовую подборку, когда используется именно это расширение.
  • Внутри расширения можно хранить скрытые выборки отдельно от основного файла, чтобы готовить будущие версии без немедленной публикации.

Вкладка Предпросмотр

Используйте эту вкладку, чтобы проверить итоговый текст до живой проверки на сайте.

  • Во вкладке можно выбрать для проверки основной файл или одно из активных расширений.
  • Кнопка Предпросмотр llms.txt генерирует вывод на основе текущих настроек.
  • Область Вывод показывает итоговый текст, который будет опубликован.
  • Предпросмотр помогает проверить структуру, но финальный доступный файл всё равно стоит открыть по реальному URL после сохранения.

Как использовать

  1. Откройте Airygen SEO -> Настройки -> LLMs.txt.
  2. Включите Включить вывод llms.txt, чтобы модуль начал публиковать базовый файл.
  3. В поле Стратегия индексирования выберите режим, который соответствует вашему сценарию: полностью ручной, смешанный или полностью автоматический.
  4. Решите, нужны ли вам опции Использовать ссылки на записи markdown, Добавить в карту сайта и Автодобавление групп кластера тем, и включите только те, которые подходят вашему сайту.
  5. Заполните Заголовок автозагружаемого раздела и Пользовательское объявление, если хотите дать LLM более явный контекст и инструкции.
  6. В блоке области охвата выберите Типы записей, затем настройте исключения Исключить noindex, Исключить защищённые паролем и Минимальное количество слов.
  7. В разделе Выборки нажмите Добавить выборку, создайте курируемые разделы и для каждого заполните Заголовок, Описание и список материалов.
  8. В окне выбора используйте области Выбранные записи и Поиск записей, чтобы быстро собрать нужный набор страниц без лишнего ручного поиска в админке.
  9. Переместите временно ненужные разделы в Область хранения скрытых выборок, если хотите сохранить заготовку без публикации.
  10. Если вам нужны отдельные AI-ориентированные файлы для разных наборов контента, откройте Расширения, нажмите Добавить расширение и настройте его Заголовок, Описание, Путь, Filename и собственные Выборки.
  11. Перейдите во вкладку Предпросмотр, выберите основной файл или расширение и нажмите Предпросмотр llms.txt, чтобы внимательно проверить итоговый текст.
  12. Если после больших изменений предпросмотр показывает старое содержимое, нажмите Очистить кэш, затем снова обновите предпросмотр.
  13. Сохраните изменения и откройте на живом сайте /llms.txt, а также адреса включённых расширений, чтобы подтвердить реальный вывод.

Проверьте эти пункты после сохранения:

  • В базовом файле присутствуют только те разделы, которые вы действительно хотите показывать AI-системам.
  • Скрытые выборки не попадают в опубликованный вывод.
  • Исключения для noindex, пароля и минимального объёма текста работают так, как вы ожидали.
  • Ссылки markdown используются только там, где их поддерживает Markdown для агентов.
  • Все включённые расширения открываются по своим настроенным адресам и показывают правильное содержимое.

Преимущества SEO

LLMs.txt не заменяет стандартные SEO-файлы, но помогает представить AI-системам более чистую и осознанно собранную карту вашего контента. Это снижает вероятность того, что малополезные страницы станут главным машиночитаемым входом на сайт, и помогает направить внимание на приоритетные материалы.

Сценарии использования

Базы знаний и сайты с документацией

До: На сайте много материалов, но для AI-систем действительно важны только основные руководства, справочные статьи и страницы с ключевыми инструкциями.

После: LLMs.txt позволяет собрать такие материалы в ручные Выборки и дать LLM более понятный маршрут к действительно ценному контенту.

Команды, которым нужны разные AI-входы для разных разделов сайта

До: Одного общего llms.txt недостаточно, потому что сайт совмещает, например, документацию, блог и коммерческие страницы, а каждой группе нужен свой приоритет.

После: Вкладка Расширения помогает выпустить дополнительные файлы с собственными Выборки, путями и описаниями, не смешивая всё в одном списке.

Часто задаваемые вопросы

Заменяет ли LLMs.txt XML-карту сайта?

Нет. Это не замена sitemap, а отдельный файл инструкций для AI-систем и AI-краулеров.

Можно ли публиковать больше одного AI-ориентированного файла?

Да. Для этого используйте вкладку Расширения, где можно создать дополнительные файлы с собственными настройками и выборками.

Почему параметр Использовать ссылки на записи markdown может быть недоступен?

Этот параметр зависит от модуля Markdown для агентов. Если он не включён или не поддерживает нужный тип записи, использовать markdown-ссылки здесь не получится.