Как работает IndexNow от Яндекса: обзор нового инструмента

IndexNow — это небольшое обновление, которое Яндекс запустил в конце октября 2021 года. Инструмент даёт возможность одновременно отправлять на индексацию от 1 до 10 000 страниц.

SEO-аналитик Сергей Кокшаров решил проверить, как функционирует IndexNow. В ходе своего эксперимента он выполнил следующие действия:

• отправил запросы для различных страниц;
• проанализировал серверные логи;
• проанализировал результаты выдачи поисковика;
• сопоставил, как работает IndexNow и инструмент «Переобход страниц», доступный в Яндекс.Вебмастере.

Обход старых страниц

SEO-аналитик отправил 35 страниц на переобход. Спустя минуту он проверил логи. Было очевидно, что поисковая система проверила ключ. Однако в течение последующих 7 часов в логах не было никаких перемен.

Специалист отправил те же страницы в «Переобход», и в тот же момент робот их все обошёл. Соответственно, старый инструмент тут выигрывает.

Обход новых страниц

В этот раз на сканирование было отправлено почти 900 новых страниц, и роботы начали их сканировать сразу же. Из 887 страниц роботы проиндексировали 834 за 10 минут.

В IndexNow есть лимит на сканирование, то есть повторный запрос можно отправлять не ранее, чем спустя 10 минут. Вероятно, именно с этим связано количество проверенных страниц. То, что вы сможете отдать за 10 минут, и будет проверено роботом.

Если подключить к индексации «Переобход», то сканирование 100 новых страниц проходит в течение одной минуты. То есть можно сказать, что в случае с первичной индексацией оба инструмента примерно равны в своих возможностях.

Индексация страницы

При создании новой страницы и добавлении её в IndexNow Яндекс сканирует её сразу же. Однако в индексе она не появляется. Сергей повторил эксперимент дважды, но ни в первом, ни во втором случае никаких изменений в индексе не наблюдалось даже спустя 45 минут.

Тогда SEO-аналитик подключил «Переобход». Спустя 13 минут страница появилась в индексе, но была помечена «57 минут назад», то есть время соответствует времени добавления страницы в IndexNow.

Следующий эксперимент дал желаемый результат. Новая странице после добавления в IndexNow появилась в индексе через 24 минуты. Что, тем не менее, всё равно уступает в скорости «Переобходу».

Контрольный эксперимент дал более внушительный результат — страница была в индексе спустя 9 минут. Однако при этом была задана частота сканирования с интервалом в 2 минуты, но поисковик проверил страницу всего дважды.

Таким образом, по этому пункту пальма первенства снова достаётся «Переобходу».

Удаление из индекса

При удалении страница получает код статуса 404. Если отправить такую страницу на сканирование в IndexNow, то буквально ничего не происходит. Поисковик её не сканирует, из индекса она не удаляется. Это показал эксперимент Сергея. При отправлении этой же страницы в «Переобход» бот сканирует её сразу, а ещё через 50 минут она исчезает из индекса.

Вывод

IndexNow подходит для обхода новых УРЛ. Со старыми лучше не экспериментировать и подключать «Переобход». Отдавать страницы надо очень быстро, так как лимит в 10 минут существенно ограничивает возможности оперативной индексации.

Работу нового инструмента пока сложно назвать стабильной, возможно, в будущем разработчики его доработают. Если использовать конструкцию 301– 200 или 301– 404, то минусы IndexNow превратятся в плюсы.