Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Что умеет решение

Модуль подготавливает сайты на платформе 1С-Битрикс для работы с искусственным интеллектом и ИИ-агентами. Он собирает данные каталога, цены, технические характеристики, новости и содержимое страниц, формируя файлы llms.txt и llms-full.txt в соответствии со спецификацией llmstxt.org. Для каждой отмеченной страницы генерируется Markdown-версия, очищенная от навигационных меню, рекламных баннеров и скриптов.

Покупатели всё чаще обращаются к ИИ-агентам, таким как ChatGPT, Perplexity, Claude, Яндекс Нейро, DeepSeek, Kimi и другим, вместо традиционных поисковых систем. Они задают конкретные вопросы, например: «где купить чёрное платье до 5 000 ₽ с доставкой». Нейросеть формирует ответ исключительно на основе информации, которую она смогла прочитать и обработать. Стандартная страница интернет-магазина перегружена меню, фильтрами, баннерами и скриптами, из-за чего ключевые данные — цена и характеристики товара — теряются в структуре вёрстки.

Файл sitemap.xml предназначен для индексации адресов страниц поисковыми роботами. Файл llms.txt выполняет аналогичную функцию для нейросетей, но передаёт им не только адреса, но и структурированные названия, описания, цены и характеристики. Этот формат оптимизирован для машинного чтения без избыточных данных. Чем точнее и полнее предоставленная информация, тем выше вероятность, что ИИ-ассистент напрямую сослается на ваш сайт, а не перескажет данные с чужих ресурсов.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Файл /llms.txt представляет собой структурированную карту сайта, предназначенную для нейросетей. В нем последовательно указываются название и описание ресурса, после чего перечисляются основные разделы: каталог, новости, статьи и отдельные страницы. Каждая запись содержит ссылку и краткое пояснение. Такая структура позволяет искусственному интеллекту за считанные секунды оценить содержимое сайта и определить оптимальные маршруты для пользователей.

Модуль «Пантеон: Карта сайта для ИИ» генерирует файлы llms.txt и Markdown-версии страниц. Файл /llms-full.txt объединяет полный текст в единый документ, содержащий описания, технические характеристики, цены, единицы измерения, остатки, SEO-поля и торговые предложения. На основе этих данных искусственный интеллект формирует ответы на запросы о наличии конкретных размеров, например размера L, и указывает их стоимость.

Модуль «Пантеон»: карта сайта для ИИ. Файлы llms.txt и Markdown-версии страниц

Для каждой страницы каталога автоматически создается её Markdown-версия. Например, рядом с каталогом платьев для ночной жизни появляется файл dress-nightlife.md. В нём содержится тот же контент, что и на основной странице, но без меню, шаблонов и скриптов. Ссылка на этот файл автоматически добавляется в секцию head исходной страницы, что позволяет ИИ-агентам находить её без дополнительных подсказок.

Модуль Пантеон формирует файлы llms.txt и Markdown-версии страниц для карт сайта, предназначенных для искусственного интеллекта. На примере тестового интернет-магазина одежды показано, что система создаёт эти файлы полностью автоматически на основе установленных в административной панели флагов. Ручное редактирование кода или текста не требуется.

Модуль Пантеон формирует файл llms.txt, который служит оглавлением сайта для искусственного интеллекта. В этом файле содержатся ссылки, ведущие на Markdown-версии страниц ресурса. Это позволяет ИИ-агентам эффективно сканировать и индексировать контент в структурированном формате.

Модуль Пантеон: Карта сайта для ИИ генерирует файлы llms.txt и Markdown-версии страниц для структурирования данных. Файл llms-full.txt представляет собой карточку товара, содержащую цену, технические характеристики и доступные варианты конфигурации.

Модуль Пантеон формирует карту сайта для искусственного интеллекта, предоставляя данные в форматах llms.txt и Markdown. Markdown-версия страницы представляет собой структурированный текст, который получает ИИ-агент вместо стандартного HTML-кода. Это позволяет агентам эффективно анализировать содержимое веб-страниц без необходимости парсинга разметки.

Искусственный интеллект обрабатывает файл последовательно сверху вниз и может не прочитать его полностью при большом объёме. Порядок блоков определяет номер инфоблока на вкладке «Источник данных»: чем меньше номер, тем раньше блок идёт в файле. Внутри инфоблока сначала выводятся разделы, затем товары, сортировка которых регулируется полем «Сортировка». Финальную часть файла всегда занимают страницы сайта.

Пантеон: Карта сайта для ИИ. Форматы llms.txt и Markdown

Управление контентом через визуальные отметки

Модуль позволяет формировать выборку из инфоблоков, разделов, товаров, страниц и папок с помощью галочек, исключая необходимость написания кода. При выборе элемента автоматически включаются все вложенные объекты. Из конечного списка можно точечно исключать отдельные позиции, не затрагивая остальные.

Пантеон: Карта сайта для ИИ. Форматы llms.txt и Markdown для страниц.

Раздел о ценах, остатках и вариантах описывает отображение стоимости, единицы измерения, доступного количества и торговых предложений. Эти данные могут выводиться отдельно или в виде сводной строки, например «Размер: от 40 до 46».

Модуль Пантеон: Карта сайта для ИИ обеспечивает генерацию файлов llms.txt и Markdown-версий страниц. Система обрабатывает любые свойства, включая списки, привязки, справочники, файлы и SEO-поля, используя шаблоны инфоблока. Функционал позволяет формировать предпросмотр записи на основе данных реального товара.

Модуль «Пантеон: Карта сайта для ИИ» обеспечивает генерацию файлов llms.txt и Markdown-версий страниц. В состав модуля входят статические разделы «О компании», «Доставка», «Гарантия» и «Контакты», а также подключаемые области контента.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Настройка расписания

Модуль поддерживает гибкое планирование задач: ежедневное выполнение, выбор конкретных дней недели или ежемесячный запуск в заданное время. Для немедленного запуска процесса предусмотрена отдельная кнопка «Запустить».

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Модуль предназначен для работы с большими каталогами. Генерация файлов выполняется в фоновом режиме порциями, что исключает таймауты и предотвращает торможение сайта. Файл карты сайта обновляется целиком, что гарантирует отсутствие у ИИ возможности прочитать незавершённый или частично записанный документ.

Модуль Пантеон: Карта сайта для ИИ предоставляет выгрузки в форматах llms.txt и Markdown для нескольких сайтов. Каждая выгрузка уникальна: у каждого сайта свой набор файлов, собственный график обновления и выбранный язык подписей — русский или английский.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Статистика

Модуль отслеживает статус, размеры и даты файлов, историю запусков и общую очередь обработки для всех сайтов.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Файлы всегда создаются в кодировке UTF-8. Даже если основной сайт работает в кодировке windows-1251, файлы, предназначенные для искусственного интеллекта, автоматически формируются в UTF-8.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Управление правами доступа

Администратор определяет, какие группы пользователей имеют права только на просмотр, а какие могут запускать и настраивать выгрузки.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Для разработчиков

Модуль предоставляет события, позволяющие изменять текст Markdown-версии или отключать её генерацию для отдельных страниц.

По умолчанию в файлы и их Markdown-версии ничего не включается. В результат попадают только те элементы, которые вы явно отметили на вкладке «Источник данных».

Пантеон: Карта сайта для ИИ. Форматы llms.txt и Markdown для страниц.

Система гарантирует, что скрытая информация никогда не попадает в выдачу. Неактивные товары, записи вне дат активности, отключенные разделы и материалы, закрытые правами доступа, остаются недоступными.

Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц

Поисковые системы не считают Markdown-версии страниц дубликатами основного контента. Это обеспечивается тем, что при отдаче файлов устанавливается директива noindex и указывается канонический URL на оригинальную страницу.

Пантеон: Карта сайта для ИИ. Форматы llms.txt и Markdown

Всё работает на вашем сервере. Для генерации файлов не требуются внешние сервисы, API-ключи или платные подписки. Сайт формирует необходимые данные самостоятельно.

Модуль «Пантеон: Карта сайта для ИИ» обеспечивает генерацию файлов llms.txt и Markdown-версий страниц. Для работы требуется PHP версии 8.2 или новее с установленными расширениями dom и mbstring. Архитектура модуля построена на ядре с внедрением зависимостей уровня Drupal 7. Процесс установки автоматически проверяет наличие всех необходимых компонентов и указывает на отсутствующие зависимости.

Модуль «Информационные блоки» реализует базовую функциональность системы. Для работы с ценами, остатками и торговыми предложениями необходим модуль «Торговый каталог». Для управления статическими страницами требуется модуль «Управление структурой». При отсутствии указанных компонентов соответствующие возможности недоступны, остальные функции системы продолжают работать в штатном режиме.

Запуск по расписанию (cron) является опциональным. Если cron не настроен, задачи выполняются при ближайшем посещении сайта. Готовая строка для crontab доступна на вкладке «Расписание».

Пантеон: Карта сайта для ИИ. Форматы llms.txt и Markdown

Текст извлекается непосредственно из данных сайта: полей и свойств инфоблоков, а также исходных кодов страниц. Элементы, которые формируются исключительно шаблонами компонентов и отсутствуют в исходных данных, в итоговые файлы не включаются.

Подробная документация с иллюстрациями к каждой настройке и пятнадцатиминутная видеоинструкция размещены на сайте разработчика.

Если «Пантеон: Карта сайта для ИИ. llms.txt и Markdown-версии страниц» подходит под задачу, General iT поможет установить модуль, настроить его и проверить результат на проекте.