Автоматичекий поиск дублей

[Удален]
777

Столкнулся с тем, когда дублей страниц или их частей тысячи и вручную перелопатить гугл с поиском фрагмента текста страницы на других страницах реально займет года 2:)

Есть ли софтина для поиска дублей страниц, хотя бы полностью идентичных?

На чьем-то блоге накопал запрос в поиск гугла 'www.site.ua /v'-'site.'... для поиска дублей, но выдало 2 страницы всего. Хотя идентичных страниц после этого нашел около 2к, и вижу это еще не предел)))

S
На сайте с 29.01.2006
Offline
404
#1

А зачем их все искать?

Вот обсуждали недавно, но не до чего не дообсуждались -

/ru/forum/649112

Speaker19
На сайте с 20.12.2010
Offline
224
#2

если дубли на сайте и есть и вылазят в индекс, то зачем их удалять?! они же в любом случае как-то систематизированы, а значит для них можно просто прописать общее правило в роботсе!

Дешевая и эффективная реклама ВКонтакте: сообщества, рекламные посты, аналитика. (http://adspoiler.com/r/16336752) Имеются свободные рекламные места в соц. сетях? (http://partner.apishops.com/soc.htm)
[Удален]
#3

Вы все верно подметили.

Но есть Г-но дизайнеры, которые делают такое, после чего даже в джумле черт ногу сламает+ говно писатели, которые фрагменты одной статьи разкидают по 15-ти и одну статью делают для нескольки десятков стран(переименовывая название стран только). А джумла делает дубликаты таких вот статей.

Вот тогда не до закономерностей.:)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий