IndexNow: ускорение индексации в Яндекс и Bing

Что умеет решение

IndexNow — модуль для автоматического уведомления поисковых систем Яндекс и Bing о новых, изменённых или удалённых страницах сайта с использованием протокола IndexNow.

На сайте регулярно появляются новые товары, разделы и статьи, меняются цены, наличие и адреса страниц. Без автоматизации поисковые системы узнают об этих изменениях лишь через несколько недель. Новые страницы долго не попадают в выдачу, а информация об уже существующих страницах остаётся устаревшей.

Модуль отслеживает изменения в системе 1С-Битрикс и автоматически отправляет соответствующие URL через протокол IndexNow. Это ускоряет обнаружение новых страниц и повторный обход изменённых, сокращая время до обновления данных в поиске.

Преимущества модуля:

Ускорение обнаружения изменений: Яндекс и Bing оперативно получают уведомления о новых, изменённых и удалённых страницах, что ускоряет их обход и обновление поискового индекса.

Автоматизация: не требуется ручная отправка URL после публикации или изменения страниц. Модуль самостоятельно отслеживает события и формирует уведомления.

Гибкая настройка: можно выбрать конкретные сайты, инфоблоки и события, при которых необходимо отправлять уведомления.

Мониторинг отправки: история запросов, ответы поисковых систем, статистика и инструменты диагностики позволяют контролировать результаты и выявлять сбои.

Ключевые функции

1. Автоматический мониторинг изменений

Модуль отслеживает события в системе 1С-Битрикс и инициирует отправку уведомлений IndexNow при обновлении элементов или разделов инфоблоков. Поддерживаются следующие типы событий:

создание и редактирование товаров и разделов;

изменение URL-адресов;

активация или деактивация элементов;

удаление элементов и разделов;

обновление цен на товары;

изменение остатков товаров.

Например, при создании нового товара его URL автоматически помещается в очередь на отправку. При последующих изменениях страницы модуль может повторно отправить адрес в соответствии с текущими настройками.

2. Отправка URL в Яндекс и Bing

Доступны два режима работы:

прямая отправка в поисковые системы — отдельные уведомления для Яндекса и Bing;

отправка через общий сервис IndexNow — использование выбранного сервиса протокола.

При прямой отправке результаты и повторные попытки учитываются раздельно для каждой поисковой системы. Временная недоступность одного сервиса не блокирует обработку уведомлений для другого.

3. Настройка отслеживаемого контента

Пользователь выбирает сайты, инфоблоки и типы изменений, подлежащие мониторингу.

Модуль IndexNow от Вебтактика позволяет гибко настраивать отправку уведомлений для отдельных элементов и разделов, выбирая конкретные события для добавления URL в очередь. Например, можно активировать уведомления только для каталога товаров и раздела статей, исключив служебные инфоблоки. Достаточно одной настройки для всех подходящих объектов, что устраняет необходимость создания правил для каждой страницы вручную.

При изменении адреса раздела система отслеживает влияние на вложенные разделы и товары. Если URL вложенных страниц формируются на основе пути родительского каталога, их адреса автоматически обновляются. Модуль генерирует задания для всех затронутых страниц, передавая поисковым системам информацию об изменении структуры каталога вместе с обновленными вложенными URL.

Для оптимизации нагрузки URL накапливаются в очереди и отправляются пакетами до 10 000 адресов за один запрос. Это позволяет обрабатывать массовые изменения каталога без отправки отдельного HTTP-запроса к сервису поисковиков при каждом сохранении элемента. Периодичность обработки очереди настраивается, в том числе индивидуально для каждого сайта.

Инструменты модуля включают просмотр истории отправок, анализ статистики и проведение диагностики.

Модуль фиксирует историю отправки уведомлений и позволяет детально проверить статус обработки каждого URL. В административной панели отображаются: адрес страницы и домен, событие, инициировавшее отправку, дата и время действия, название поисковой системы, число попыток отправки, HTTP-код ответа и его итог, описание ошибки или причина пропуска, а также время запланированной следующей попытки. Это позволяет, например, убедиться, что URL товара был отправлен после изменения цены, узнать точное время отправки и получить ответ от поисковой системы. Инструменты диагностики помогают проверить корректность настроек IndexNow, статус ключа и доступность требуемых ресурсов. Данные об адресах и историю отправок можно выгрузить в CSV-файл для последующего анализа.

Ручная отправка URL

Позволяет отправлять отдельные страницы или списки адресов вручную без необходимости изменения содержимого инфоблоков. Этот функционал удобен после проведения SEO-аудита, обновления статических страниц или других работ, требующих повторного уведомления поисковых систем. Перед добавлением адресов в очередь выполняется их автоматическая проверка.

Исключения и проверка robots.txt

Модуль дает возможность исключать ненужные URL из отправки и учитывать ограничения, прописанные в файле robots.txt. Проверку файла robots.txt можно включать или отключать для каждого сайта отдельно.

При включённой проверке модуль соблюдает правила доступа поисковых роботов, указанные в файле robots.txt. Если этот файл временно недоступен, отправка откладывается до следующего цикла проверки.

Поддержка многосайтовости

Модуль работает в среде 1С-Битрикс с поддержкой нескольких сайтов в одной установке. Это включает ресурсы, размещённые на разных доменах или в подкаталогах. Для каждого сайта можно применять как общие настройки, так и индивидуальные параметры.

Для «IndexNow: ускорение индексации в Яндекс и Bing» команда General iT может выполнить подключение, настройку и контрольную проверку после установки.