Исключенные страницы из поиска
Стоит ли изучать исключенные страницы из поиска в Яндекс Вебмастере и для чего?
К примеру вы обнаружили тысячи выпадающих из поиска страниц вашего сайта, которые повторяются с определенной частотой (например, каждые 10-15 дней).
Посмотрев в панели ЯВМ, можно увидеть картину, как на скрине, все страницы выпадают заслуженно. Это редиректы, неканонические, 404, МПС и т.п.
Вопрос! Стоит ли изучать появление всех этих страниц на сайте и для чего?
Безусловно, стоит. Я считаю это рутинной частью работы SEO-специалиста.
Таким образом можно выявить технические ошибки на уровне CMS, изменения требований поисковых алгоритмов к качеству страниц, технические недочёты. В конце концов, просто не потерять трафик со страниц, которые не мониторятся по позициям, но приносят трафик по "длинному хвосту".
Простой пример из недавних: внезапно "посыпались" товарные карточки в интернет-магазине. Проверка выявила, что попросту отвалились текстовые описания из-за бага после обновления CMS. Игнорирование факта привело бы к тому, что карточки продолжили бы выпадать из индекса, а большой процент МПК - это уже фильтр на уровне хоста.
Кроме того, рекомендую регулярно сопоставлять логи посещения URL сайта поисковыми ботами с таким списком исключенных страниц, хотя бы раз в 3-6 месяцев. Можно обнаружить ряд технических ошибок, которые не вылавливаются никак иначе.