Версия 1.3.0
5 ноября 2026
Выпуск про карту сайта для нейросетей (llms.txt): файл видно до записи на сайт, в него можно не включать лишние страницы, добавить цены и наличие товаров, он обновляется сам после правки страниц. Модуль проверяет, пускает ли robots.txt ботов нейросетей на сайт.
Каким будет файл
- Кнопка «Показать, каким будет файл» собирает его по настройкам на странице, даже несохранённым, и показывает текст. На сайте ничего не меняется.
- Проверка формата llms.txt: название, описание одной фразой, в списке страниц только ссылки, адреса с доменом, без повторов, размер — с подсказкой, что поправить.
- Сравнение с файлом на сайте: сколько страниц появится, уйдёт или поменяется, со списками ссылок.
- Работает и с правом «Чтение».
Что попадёт в файл
- «Не включать в файл» — адреса страниц и разделов по одному в строке: архив, снятые с продажи товары, служебные страницы. Адрес раздела убирает и все страницы внутри, звёздочка — «любые символы». Исключённые не занимают место в лимите страниц.
- «Описание страницы в файле» — на выбор: начало анонса или текста, мета-описание для поисковиков или без описания.
- «Цены и наличие товаров» — у товаров после ссылки, например «12 500 руб., в наличии», у товара с предложениями — «от» самой низкой цены. Цена со скидками, как её видит покупатель без входа на сайт. Нейросеть сможет ответить, сколько стоит товар и есть ли он.
Обновление после правки страниц
- Галка «И сразу после правки страниц»: добавили, изменили или удалили товар, статью или раздел из отмеченных списков или заполнили мету по шаблону — через 5 минут файл пересоздастся.
- Много правок подряд, например загрузка каталога, — одно обновление раз в 5 минут, сохранение в админке не замедляется.
- С ценами в файле — обновится и после смены цены или остатка, из формы товара или обмена с 1С.
Пустят ли нейросети на сайт
- Модуль читает robots.txt сайта и для 12 ботов нейросетей (ChatGPT, Claude, Perplexity, Алиса и Нейро Яндекса, боты обучения OpenAI, Google, Apple, Common Crawl) показывает, открыты ли им главная, /llms.txt и страницы из файла.
- Если закрыто — готовые строки для конца robots.txt с кнопкой «Скопировать» и какие строки удалить. Служебные разделы, закрытые для всех ботов, остаются закрытыми.
- Ботов, которые только учат нейросети, модуль предлагает открыть отдельно — их часто закрывают нарочно. Сам robots.txt модуль не меняет.
Обновление устанавливается без ручных действий: настройки карты сайта сохраняются, новые возможности выключены, пока вы их не отметите. Файл, положенный на сайт не через модуль, по-прежнему не трогается.