Как лучше закрывать от индексации ссылки на сайте - в роботсе или ноиндекс?

12 3
Юмиком
На сайте с 23.08.2010
Offline
86
1772

Здравствуйте!

Как лучше закрывать от индексации ссылки на сайте типа "сортировка товара по цене": через ноиндекс нофолов или в роботсе?

Robin_Bad
На сайте с 24.12.2007
Offline
85
#1

Юмиком, покажите, как у вас выглядит ссылка с сортировкой товара по цене. Сдаётся мне, её малореально будет закрыть в robots.txt :)

kosenka
На сайте с 02.12.2007
Offline
122
#2
Robin_Bad:
Юмиком, покажите, как у вас выглядит ссылка с сортировкой товара по цене. Сдаётся мне, её малореально будет закрыть в robots.txt :)

Прошу прощения, что влезаю в чужую тему, но меня тоже этот вопрос интересует.

Ссылка такая:

http://site.ru/catalog/main/document.html?sort=price

или

http://site.ru/catalog/main/document.html?sort=price.desc

Robin_Bad
На сайте с 24.12.2007
Offline
85
#3

kosenka, в вашем случае вот так:

User-agent: *

Disallow: /catalog/main/document.html?sort=price.desc

но сдаётся мне, что в общем виде это не прокатит, т.к. где-то ещё должна быть постраничная листалка - я прав?

kosenka
На сайте с 02.12.2007
Offline
122
#4
Robin_Bad:
kosenka, в вашем случае вот так:
User-agent: *
Disallow: /catalog/main/document.html?sort=price.desc

но сдаётся мне, что в общем виде это не прокатит, т.к. где-то ещё должна быть постраничная листалка - я прав?

Да, вы правы, есть постраничная листалка:

http://site.ru/catalog/main/document.html?sort=price&page=2

http://site.ru/catalog/main/document.html?sort=price.desc&page=12

и т.д.

p.s. но, помимо, сортировки по цене, есть еще сортировка по названию товара. возможно ли в robots.txt прописать так:

User-agent: *

Disallow: /catalog/*/document.html?sort=*&page=*

?

Robin_Bad
На сайте с 24.12.2007
Offline
85
#5

kosenka, вы абсолютно логично мыслите, но, к сожалению, так сделать нельзя:

http://robotstxt.org.ru/robotstxterrors#Disallow__

хотя и очень хотелось бы :)

Вообще, по вышеуказанной ссылке в простой и понятной форме есть ответы на все вопросы касательно robots.txt.

kosenka
На сайте с 02.12.2007
Offline
122
#6
Robin_Bad:
kosenka, вы абсолютно логично мыслите, но, к сожалению, так сделать нельзя:
http://robotstxt.org.ru/robotstxterrors#Disallow__
хотя и очень хотелось бы :)

Вообще, по вышеуказанной ссылке в простой и понятной форме есть ответы на все вопросы касательно robots.txt.

Ради теста добавил такое правило в robots.txt:

Disallow: /catalog/*/*?sort=*

И через Google.Вебмастер и Яндекс.Вебмастер проверил:

http://site.ru/catalog/main/document.html?sort=txt_title.desc&page=12

http://site.ru/catalog/main/document?sort=txt_title.desc&page=1

Гугловский ответ: Заблокировано по строке: Disallow: /catalog/*/*?sort=*

Яндексовский ответ: запрещен правилом /catalog/*/*?sort=*

И меня это устраивает :)

Robin_Bad
На сайте с 24.12.2007
Offline
85
#7

kosenka, ну это просто не по стандарту, поэтому как бы нет гарантий, что оно со временем не отвалится. Хотя, нет ничего более постоянного, чем временное :)

kosenka
На сайте с 02.12.2007
Offline
122
#8
Robin_Bad:
[Хотя, нет ничего более постоянного, чем временное :)

Так и живем :)

[Удален]
#9

а зачем запрещать к индексации что-то если вы на этот документ ссылаетесь, может проще не ссылаться? ;)

Robin_Bad
На сайте с 24.12.2007
Offline
85
#10

burunduk, сортировки нужны для пользователя, ему это бывает нужно. Поэтому ссылаться нужно для него. С другой стороны, для ПС такие страницы не будут представлять интереса, т.к. будут дублировать контент, поэтому их необходимо закрывать от индексации.

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий