genjnat: Ни один из сервисов что вы запостили, не проверяет уникальность В РАМКАХ САЙТА. Т.е. не ищет дубли.
И даже общую по списку урл они вам коректно не покажут, потому что тупо не умеют корректно вычленять текст для анализа. Или только в случаях когда он начинается и заканчивается каким-то уникальным тегом.
В свое время нужно было для всего сайта не то чтоб уникальность, а просто, сам факт наличия текста и его объем определить. И я ничего не нашел.
так тут может любой текстовый анализатор помочь.
с корректным вычлененнием всего текста - да, я понял мысль, могут возникнуть сложности.
Но когда весь текст - несколько абзацев подряд, любой сервис его найдет.
Chikago: Павел Горбунов, я вот тоже пока пытаюсь вкурить. Возможно чтобы не париться со сжатиями и всякими прочими методами оптимизации скорости загрузки сайта.
genjnat: Нету их. Вы себе саму задачу представьте...
Для начала вы хрен найдете хоть один сервис/прогу, которая сможет корректно вычленить сам текст, не трогая все остальное на странице. Плюс должно проверять на уник в промышленных масштабах, плюс именно в рамках сайта... Это не считая всяких мелочей, как например учитывать настройки индексации.
Но, ищите конечно...
А добавление сайтмэпов в GWT в принципе работает как способ ускорения индексации?
Кто-нибудь может прокомментировать?
И как это решение работает со всеми страницами сайта?
посмотрите, тут объяснение ничего не даст, пока не увидишь сам.
По итогам проверки могу сказать, что действительно есть проблемы, если тексты расположены в разных блоках.
Если только 1 текстовый блок на странице (например, статья), проблем не возникает.
Лучше всего, на мой взгляд, решили эту проблему в text.ru:
можно обрамить нужный контент комментариями <!-- TEXT -->и <!-- /TEXT -->.
тогда их сервис рапознает все текстовые блоки.
не самое лучшее, но все же - решение.
А ловца ботов кто-нибудь использует?
А какая сейчас есть альтернатива - анализ контента конкурентов?
Можете использовать любой текстовый анализатор.
Простейший - у seolib.ru, самый продвинутый - у Rush-analytics.ru (И я бы использовал именно его).
Ни один из сервисов что вы запостили, не проверяет уникальность В РАМКАХ САЙТА. Т.е. не ищет дубли.
И даже общую по списку урл они вам коректно не покажут, потому что тупо не умеют корректно вычленять текст для анализа. Или только в случаях когда он начинается и заканчивается каким-то уникальным тегом.
В свое время нужно было для всего сайта не то чтоб уникальность, а просто, сам факт наличия текста и его объем определить. И я ничего не нашел.
так тут может любой текстовый анализатор помочь.
с корректным вычлененнием всего текста - да, я понял мысль, могут возникнуть сложности.
Но когда весь текст - несколько абзацев подряд, любой сервис его найдет.
Павел Горбунов, я вот тоже пока пытаюсь вкурить. Возможно чтобы не париться со сжатиями и всякими прочими методами оптимизации скорости загрузки сайта.
все равно придется париться.
Без этого никуда.
Вы ничего не нашли, и не найдете.
Ну вам-то виднее, что я нашел.
Вы же не только свою работу, но и мою лучше знаете.
Ну нашли так нашли, удачи с проверкой :)
Вот еще такой вариант нашли - http://www.siteliner.com/.
Можно пробовать.
Нету их. Вы себе саму задачу представьте...
Для начала вы хрен найдете хоть один сервис/прогу, которая сможет корректно вычленить сам текст, не трогая все остальное на странице. Плюс должно проверять на уник в промышленных масштабах, плюс именно в рамках сайта... Это не считая всяких мелочей, как например учитывать настройки индексации.
Но, ищите конечно...
Да уже нашел.
Есть такие проверки у https://content-watch.ru/ и у https://text.ru/.
Надо понять, на каком объеме они работают бесплатно.
Но для некоторых случаев подходит и проверки списка страниц. поэтому хватит и бесплатной версии.