Удаление мусорных страниц

• Дублирующие страницы увеличивают общий размер сайта. Краулинговый бюджет тратится на такие страницы, а «нужные» могут не попасть в индекс.
  
• Изменение релевантности страницы в выдаче. Из-за конкурентности дублей страниц в выдачу может не попасть ни одна из них, или попадёт не та, которая планировалась.
  
• Потеря ссылочного веса страниц, которые ссылаются на дубль.
  

Поэтому можно с уверенностью сказать, что поисковые системы отрицательно относятся к дублям, но обычно, это далеко не основной фактор ранжирования. Практика показывает, что гораздо больше ценится релевантность страницы и то, насколько решается задача пользователя. Поэтому контент с низкой уникальностью вполне может ранжироваться в ТОПе.

1. Грамотная структура и навигация сайта (в том числе внутренняя перелинковка).
   
2. Правильная оптимизация метаданных на страницы сайта.
   
3. Конечно же, уникальный контент, способный заинтересовать и удержать пользователя.
   
4. Удобное юзабилити.
   
5. Техническая оптимизация сайта (ЧПУ, зеркала, служебные файлы, устранение ошибок в коде).
   
6. Адаптивность мобильной версии.
   
7. Внешняя оптимизация.
   
8. Правильный подход к аналитике изменений (позиции, ссылки, посещаемость, конкуренты).
   

• с помощью директивы disallow в файле robots.txt, если это страницы фильтров или поиска;
  
• с помощью метатега «noindex», если это внутренние страницы, например, профиль пользователя или корзина;
  
• если товара интернет-магазина временно нет в наличии, лучше сделать отметку, что этого товара сейчас нет;
  
• если страница была карточкой товара, а теперь её больше не будет, лучше использовать 301 redirect на похожий товар;
  
• если всё же необходимо удалить страницу безвозвратно, тогда удалите все внутренние ссылки на эту страницу и поставьте код ответа 410 «удалить навсегда».