Как найти на сайте страницы дубли

vbz
На сайте с 16.09.2005
Offline
149
vbz
866

Добрый день, Яндекс поменял в выдаче страницы, а Платон ответил

Проблема связана с большим количеством дублирующего контента, представленного на сайте. К примеру:

сайт/pechat-vizitok?_openstat=ZGlyZWN0LnlhbmRleC5ydTszMjY0ODA3OzI0NjY4MDY5O3lhbmRleC5ydTpwcmVtaXVt

сайт/content/pechat-vizitok

сайт/content/pechat-vizitok?_openstat=YmVndW4ucnU7NzExZGI5OGE7ODE5YzVkOGI7ZjRkYmRmMjE

В некоторых случаях наличие дублирующих страниц может некорректно обрабатываться нашим роботом. В скором времени необходимые Вам страницы вернутся в выдачу, но, чтобы избежать подобных ситуаций в будущем, рекомендую Вам

Вопросов два:

Как отловить все страницы дубли?

Посоветуйте сервис который может помочь в этом?

S
На сайте с 29.01.2006
Offline
404
#1

А зачем отлавливать все дубли? Надо выявить закономерности дублирования и запретить ненужное в robots.txt или (если возможно) отключить создание дублей.

Надо забить в поисковик любую фразу с сайта и посмотреть, сколько раз она выдается в поисковике на вашем сайте. Результат позволит судить о закономерностях дублирования. Обычно дублирование происходит из-за календаря, категорий и тегов.

vbz
На сайте с 16.09.2005
Offline
149
vbz
#2

Судя по хвостам дубли плодит , что то другое. На сайте стоит метрика, аналитикс и LI.

Max1muS
На сайте с 27.09.2008
Offline
127
#3

У меня было такое один раз. Повылазили в ЯВ ссылки с хвостом вида ?utm_source. Трафик с Яши стал падать. Позакрывал все в robots, и постепенно все стало нормально. Тут и не угадаешь, какие хвосты вылезут, поэтому не лениться время от времени заглядывать в ЯВ и смотреть, что там в индексе. Выборочно ручками пролистать, и все

vbz
На сайте с 16.09.2005
Offline
149
vbz
#4

ЯВ не показывает толком, сайт на друпале поэтому он показывает только папки.А вы не помните как сервис гроховского называется для проверки сайта на дубли?

S
На сайте с 29.01.2006
Offline
404
#5

vbz, если приведены реальные примеры и в адресах страниц не используется вопросительный знак, то запретить к индексации всё с вопросительным знаком.

Silveo
На сайте с 30.11.2010
Offline
152
#6

установите модуль Globalredirect и будет Вам счастье

Больше всего в жизни люблю: справедливость, порядочность, обязательность.
MS
На сайте с 28.06.2011
Offline
42
#7

Было такое на джумле при функции распечатать, пдф, мыло, закрыл эти штуки в robots.txt, сайт с х.з. (больше за 50т) поднялся до 16 места.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий