Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Считает ли SE стр. /page/ и /page - двумя разными

N
На сайте с 24.06.2005
Offline
43
nikanet
352

На сайте мод реврайтом эмулируется ЧПУ. Одна и та же страница открывается по двум "разным" URL - /page/ и /page

Внимание, вопрос: посчитают ли поисковики два этих URL за разные или правильно поймут, что это одна и та же страница? Если да, то все ли так посчитают или есть поисковики на бронепоезде?)

И если нужно закрыть в robots.txt внутренние страницы /page/ и саму /page включительно как это сделать? 

Так:

Disallow: /page

Disallow: /page/



или достаточно так?

Disallow: /page
AN
На сайте с 05.06.2004
Offline
243
AnNik
#1

Сначала посчитают разными, со временем склеят.

nikanet:
или достаточно так?
Disallow: /page

Так и /page/ тоже окажется закрыта.

Размещу ваши баннеры на посещаемых сайтах. Места еще есть! Возможен безнал. (/ru/forum/324945) Нужны копирайтеры/рерайтеры - медики. Пишите в личку. (/ru/forum/676932)
Independence
На сайте с 29.10.2005
Offline
428
Independence
#2

Yahoo точно обращается отдельно к /page/ и к /page даже если его не просят..

N
На сайте с 24.06.2005
Offline
43
nikanet
#3
AnNik:
Сначала посчитают разными, со временем склеят.

Так и /page/ тоже окажется закрыта.

это и требуется, т.е. /page и все ее внутренние не должны сканироваться. вопрос как правильно в роботсе прописывать..

K
На сайте с 31.01.2001
Offline
737
Kost
#4

Вам уже написали.

Disallow: /page

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
N
На сайте с 24.06.2005
Offline
43
nikanet
#5

теперь понял, спасибо :)

Алексей Пешков
На сайте с 24.03.2004
Offline
47
Алексей Пешков
#6
На сайте мод реврайтом эмулируется ЧПУ. Одна и та же страница открывается по двум "разным" URL - /page/ и /page

Исправьте такое кривое ЧПУ и будет хорошо. Бронепоезд robots.txt лучше не использовать в мирных целях. ;)

a.fatman
На сайте с 15.01.2006
Offline
127
a.fatman
#7

У меня на сайте Google считал разными. По-крайней мере, pr у /page и /page/ был разным.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий