Статус страницы «Обнаружена, не проиндексирована»

Статус страницы «Обнаружена, не проиндексирована» говорит о том, что Google ещё не обошёл страницу. Он знает о странице, но отодвинул сроки её сканирования.

⚠️ Чаще всего это происходит из-за большой нагрузки на сайт или нехватки краулингового бюджета.
? Проверить справляется ли сайт с большой нагрузкой

Сэкономить краулинговый бюджет вам поможет настройка HTTP заголовка If-Modified-Since. Робот не зайдет на страницу, если с последнего посещения она не была изменена. Таким образом сэкономится краулинговый бюджет

Количество страниц

▫️ Нужны ли вам все карточки товаров и не являются ли они мусорными? Проверьте какие страницы не приносят вам никакого трафика, возможно, стоит сократить их количество. Если даже робот обойдёт такие страницы, то с большой вероятностью они не попадут в индекс.

▫️ Сократив количество контента и сгруппировав его по темам, можно увеличить его качество и качество сайта в целом.

⚠️ Если страницы нужны в поиске:

• улучшить метаданные;
  
• добавить ссылки в sitemap.xml;
  
• разместить внешние ссылки;
  
• создать теги и внедрить в них ссылки фильтров;
  
• добавить на эти страницы «Похожие товары».
  

Ускорить индексацию страниц:

• В GSC запросить перееидексацию со сканированием прямых ссылок. Таким образом googlebot обходит не только категорию, но и ссылки, которые есть на странице.
  


• Обновить Sitemap и пингануть: google.com/ping?sitemap=https ://site.com/sitemap.xml
  


• Google API. Для ускорения индексации Google рекомендуем использовать именно API. Преимущество в том, что заходит и обычный, и мобильный googlebot.
  

? Подробнее про индексирование API: developers.google.com/search/apis/indexing-api/v3/quickstart/

Как показала практика, дело действительно во времени ответа хоста при сканировании ботом, пот тут пример такого pyatilistnik.info/page-has-been-crawled-but-not-indexed-yet/