Что такое IndexNow?
Без IndexNow поисковики тратили на обнаружение и индексацию новых URL-адресов от пары дней до нескольких недель, потому что поисковые системы редко просматривают каждый URL-адрес. Такое медленное индексирование приводило к потере потенциального трафика и клиентов.
IndexNow позволяет автоматически и мгновенно уведомлять поисковые системы об изменениях на сайте, включая появление новых страниц, обновление или удаление текущих. Ждать очередного обхода роботом больше не придется, страница появляется в поиске через несколько минут.
Данный протокол повышает скорость индексации, но не делает её моментальной. Протокол выставляет правильный приоритет индексации. А роботам по-прежнему требуется время на обработку данных
Индексация зависит от качества сайта. Если сайт хороший по мнению Яндекса, то бот быстро зайдет. Если на сайте тысячи однотипных никому не нужных страниц, то IndexNow не заставит Яндекс индексировать страницы.
Примечание
Как это работает?
Статья ещё не опубликована, соответственно не проиндексирована. Проверяем в поисковой выдаче Яндекса по запросу заголовка статьи «IndexNow – мгновенная индексация в поисковиках»
В административной части сайта появится журнал. После публикации статьи, в журнале видно, что сайт автоматически уведомил поисковики о новой странице.
Через некоторое время, в нашем случае прошло минут 30, статья появляется в поисковой выдаче Яндекса. Раньше на это уходило от нескольких дней, до нескольких недель.
Вопрос — Ответ
Это выгодно поисковикам, им не нужно тратить ресурсы на содержание роботов.
Все процессы полностью автоматически, но важно, чтобы агенты были настроены на крон (cron).
Да нужен, хотя файлы sitemap служат простым способом для веб-мастеров информировать поисковые системы обо всех страницах своих сайтов, доступных для обхода контента, поисковые системы нечасто посещают файлы sitemap. С IndexNow веб-мастерам не нужно ждать, пока поисковые системы обнаружат файлы sitemap и выполнят их обход, они могут напрямую уведомлять поисковые системы о новом содержимом.
Если поисковым системам «понравится» ваш URL-адрес, поисковые системы попытаются просмотреть его, чтобы быстро получить последнее содержимое, исходя из логики планирования обхода контента и квоты обхода контента для вашего сайта.
Использование IndexNow гарантирует, что поисковые системы будут знать об изменениях на вашем сайте. Использование IndexNow не гарантирует, поисковые системы будут выполнять обход контента или индексирование веб-страниц. Может потребоваться время, чтобы изменение отразилось в поисковых системах.
Поисковые системы могут отказаться от обхода контента и индексации URL-адресов, если они не соответствуют их критерию выбора.
Он называется Indexing API, но работает не со всеми типами контента. Зато есть старые и проверенные инструменты, которые позволяют ускорить индексацию страниц — Search Console, robots.txt, sitemap. Но ходят слухи, что Гугл все же заинтересовался технологией IndexNow и начал ее тестировать. Вероятно, западный поисковик вскоре возьмет новый инструмент на вооружение.
Нет, вы должны публиковать только те URL-адреса, которые меняются (добавляются, обновляются или удаляются) с момента начала использования IndexNow.
Используйте IndexNow для отправки только URL-адресов, которые были недавно изменены (добавлены, обновлены или удалены), включая все URL-адреса, если все URL-адреса были изменены недавно. Используйте файлы sitemap, чтобы информировать поисковые системы обо всех ваших URL-адресах. Поисковые системы будут посещать файлы sitemap каждые несколько дней.
В одном запросе можно отправить до 10000 ссылок. При этом можно совершать несколько запросов для отправки нужного количества страниц. В количестве запросов какого-либо ограничения нет.
Что нужно для заказа:
Рекомендуется перевести выполнение агентов на cron, иначе отправка ссылок в Яндекс на хитах может замедлить работу сайта.
Если это не сделано, заказать услугу можно по ссылке
Если лицензия просрочена, продлить со скидкой можно по ссылке
Минимально поддерживаемая версия Битрикс - 15.
Обновить Битрикс можно по ссылке.
Минимальная версия PHP — 5.6.
Обновить PHP можно по ссылке.
Установленное расширение для PHP - cURL.
Если не установлено, настрою это в рамках заказа.