Форум Сайтостроение Веб-строительство

robots.txt

WEB-мастер
На сайте с 23.07.2009
Offline
174
WEB-мастер
318

На сайте URLы страниц выглядят вот так:

http://site.com/tsentr-razvitiya/

http://site.com/tsentr-dva/

У них есть дубли вида:

http://site.com/tsentr-razvitiya/#more-5

http://site.com/tsentr-dva/#more-6

И еще:

http://site.com/tsentr-razvitiya/#respond

http://site.com/tsentr-dva/#respond

Как закрыть от индексации эти дубли?

Может так?

/*more*

/*respond

Лучший парсер ( https://goo.gl/aw7tPJ ) чего угодно.
gormarket
На сайте с 29.12.2010
Offline
47
gormarket
#1

"more-5" это якорь на странице http://site.com/tsentr-razvitiya/ (ссылка на ту часть страницы, где расположен элемент с атрибутом name="more-5")

Для поисковиков эта пара

http://site.com/tsentr-razvitiya/

http://site.com/tsentr-razvitiya/#more-5

не два URLа, а один (все что до символа #)

Так что забудьте про эти, как Вы их назвали "дубли страниц"

Товары и цены в магазинах Вашего города: Городской рынок (http://gormarket.ru/)
Бесплатный аудит сайтов: анализ Вопрос по robots.txt и Неканонический урл или якорь

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий