В данном случае я могу порекомендовать мировой сервис, которым я пользуюсь успешно много лет - это SEO PowerSuite (не реклама там нет партнерской программы) В данной программе предусмотрено практически все. От Анализа сайта как в целом, так и страницы, так и удит контента, конкурентов, предполагаемого трафика, сложности ключевых слов, поиск ссылок и другое. Там есть бесплатная версия, которой будет достаточно, чтобы в моменте провести анализ сайта, посмотреть ключевые слова и конкурентов. Я как раз начал цикл статей по этому софту, если для кого сложно будет в первый раз. По конкурентам дает много информации как по контенту, так и по внешним ссылкам.
Отталкиваться стоит не от парсеров, а от задач - вернее, от информации, которая вам нужна по конкурентам. Извлечь её напрямую (сиречь спарсить) едва ли возможно, это всего лишь источник данных для последующей аналитики.
Лично я... Читать далее