Анализ контента на страницах сайта

Приветствуем! Верно ли поняли, что интересует сканирование всего сайта или вы сами подаете страницы на вход?

Ну да. Ну вот наподобие seoto.me - парсер обходит сайт и говорит на каких страницах есть контент, на каких нет, где контент дублируется и на сколько % совпадает на тех или иных страницах. Очень помогает) например, есть несколько статей на одну тематику, но они не дубли. То есть смысловые дубли, но контент совпадает не полностью. Очень полезно это узнавать) Так-то можно и через сеотуми, но мне пиксель нравится больше)) хочется здесь решать все свои вопросы) А если добавите еще своих "фишек" будет еще круче!

Круто, спасибо за пояснения, да.

У нас есть такая штука прям в формате ТЗ уже, но есть некоторые тех. сложности с обходом больших сайтов... сейчас решаем их, в 2019 должны сделать.

Ещё раз спасибо за отклик и инициативу!