Как избавиться от дублированных страниц?

I
На сайте с 08.06.2004
Offline
82
568

Здравствуйте.

У меня на сайте конечная страниуа с новостью имеет адрес

домен.ru/100110/11899/

комментарии к этой странице тоже имеют адреса

домен.ru/100110/11899/?c=88083

таким образом получается, что яндекс видит много лишних страниц с дублированием контента

___________________

подскажите, как лучше решить эту проблему?

Спасибо

Статьи на сильных сайтах (/ru/forum/569354)
iapetya
На сайте с 01.02.2010
Offline
38
#1
iruy:
Здравствуйте.

У меня на сайте конечная страниуа с новостью имеет адрес
домен.ru/100110/11899/

комментарии к этой странице тоже имеют адреса
домен.ru/100110/11899/?c=88083

таким образом получается, что яндекс видит много лишних страниц с дублированием контента
___________________

подскажите, как лучше решить эту проблему?

Спасибо

Вроде так

Disallow: /*/*/?c=

firefox19
На сайте с 05.11.2009
Offline
34
#2

в robots.txt

User-agent: *

Allow: /

Disallow: /?c=

Ваши идеи - наша работа (http://yaweb.ru) Продам Сайт агентства недвижимости (/ru/forum/561489)
KoDmAn
На сайте с 24.09.2009
Offline
42
#3

Disallow: /*?*

maldivec
На сайте с 04.11.2008
Offline
160
#4

ТС, а вам что нужно, чтобы комментарии не попадали в индекс? О каком дублированном контенте идет речь?

firefox19:
в robots.txt
User-agent: *
Allow: /
Disallow: /?c=

Это, кстати, неверно.

I
На сайте с 08.06.2004
Offline
82
#5

а как верно?

maldivec
На сайте с 04.11.2008
Offline
160
#6
iruy:
а как верно?

Вы сначала ответьте, что вам нужно-то. Чтобы отдельные страницы с комментариями не индексировались?

Тогда вот так


User-agent: *
Allow: /
Disallow: */?c=
I
На сайте с 08.06.2004
Offline
82
#7

да, все верно!

iruy добавил 22.07.2010 в 16:15

а как еще сделать такое

домен.ru/100110/11899/ и домен.ru/100110/11899

воспринимаются яндексом как разные страницы... как сделать чтобы домен.ru/100110/11899 для яндекса не существовало, однако если челвоек набирает такой адрес, то загружалось домен.ru/100110/11899/ ?

Спасибо!

iruy добавил 22.07.2010 в 16:28

User-agent: *

Allow: /

Disallow: */?c=

я попробовал, яндекс всасыват комменты при таком роботсе

iruy добавил 22.07.2010 в 17:00

мне кажется надо так закрыть

Disallow: /*/*/?

или еще глобальнее

Disallow: *?

iapetya
На сайте с 01.02.2010
Offline
38
#8
iruy:
да, все верно!

iruy добавил 22.07.2010 в 16:15
а как еще сделать такое

домен.ru/100110/11899/ и домен.ru/100110/11899

Если это какая-то эксклюзивная страница, то так <meta name="robots" content="noindex,follow">

S
На сайте с 28.10.2005
Offline
296
#9

Меньше слушайте криворуких "Аптимизаторав"


Disallow: /*?c=

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий