Помогите написать правило в robots.txt

E
На сайте с 10.08.2009
Offline
32
1001

есть страница на сайте, откликающаяся по 2 разным адресам:

http://itsgr.ru/services/obsluzhivanie-orgtekhniki/
http://itsgr.ru/?id=32

и индексе Яндекса оба адреса и они постоянно меняются в выдаче.

Я хочу, чтобы страница была доступна только по одному адресу. Поможет ли в данном случае правило в robots.txt?

например такое:

User-agent:*
Disallow:/?id=32

и не перестанет ли после этого правила вообще индексировать содержимое этой страницы?

Спасибо!

T.R.O.N
На сайте с 18.05.2004
Offline
314
#1
ekarnakov:
Я хочу, чтобы страница была доступна только по одному адресу. Поможет ли в данном случае правило в robots.txt?

изначально нужно сделать так, чтобы "неправильные пути" были недоступны. правила в роботсе это т.с. - полумера.

сделайте редирект с http://itsgr.ru/?id=32 на http://itsgr.ru/services/obsluzhivanie-orgtekhniki/

ekarnakov:
и не перестанет ли после этого правила вообще индексировать содержимое этой страницы?

нет, вы закрываете не страницу а путь, по которому к ней мог-бы обратится робот. Вернее сказать, Вы рекомендуете роботу не ходить по пути, который указан в Disallow

От воздержания пока никто не умер. Хотя никто и не родился! Prototype.js был написан теми, кто не знает JavaScript, для тех, кто не знает JavaScript (Richard Cornford)
J
На сайте с 11.05.2008
Offline
64
#2
ekarnakov:

User-agent:*
Disallow:/?id=32

только вместо цифры звездочку поставьте

User-agent:*
Disallow:/?id=*

а потом сюда http://webmaster.yandex.ru/robots.xml

free-date: Сегодня (http://free-date.ru/list.php)
FlyAway
На сайте с 01.06.2005
Offline
439
#3

ekarnakov, проще так:

User-agent:*

Disallow: /?

Сердюченко Андрей (http://www.serdyuchenko.ru/) Масонская ложа — SЕ-Team.ru (http://goo.gl/YIjV6h) :)
E
На сайте с 10.08.2009
Offline
32
#4
T.R.O.N:
изначально нужно сделать так, чтобы "неправильные пути" были недоступны. правила в роботсе это т.с. - полумера.
сделайте редирект с http://itsgr.ru/?id=32 на http://itsgr.ru/services/obsluzhivanie-orgtekhniki/

к сожалению, это клиентский сайт и он мне доступ не дает, считает что я его могу попячить. Их вебмастер - разработчик сайта говорит, что их цмс редирект не поддерживает и на этом заканчивает разговор. Поэтому приходится городить огород.

Спасибо T.R.O.N, jaypi так и сделаю.

K
На сайте с 31.01.2001
Offline
737
#5
jaypi:
Disallow:/?id=*

Звездочка тут никакого смысла не имеет, можно не ставить.

Редирект было бы неплохо.

Проследите, чтобы внутренние ссылки не вели на закрытые от индексации страницы, надеюсь, так оно и есть.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 26.07.2009
Offline
12
#6
Проследите, чтобы внутренние ссылки не вели на закрытые от индексации страницы

Скажите, а для чего это надо? Если контакты закрыты в роботсе и тегом meta?

C5
На сайте с 12.05.2009
Offline
20
#7
к сожалению, это клиентский сайт и он мне доступ не дает, считает что я его могу попячить.

а как без доступа вы собрались роботс прописывать?

murvuz
На сайте с 14.06.2007
Offline
191
#8
ekarnakov:
Их вебмастер - разработчик сайта говорит, что их цмс редирект не поддерживает и на этом заканчивает разговор. Поэтому приходится городить огород.

А к хтаксессу доступ есть? Если есть, то в нем можно сделать редирект.

" А не спеть ли нам песню? О любвииии..."
Григорий Селезнев
На сайте с 25.09.2001
Offline
298
#9

а в CMS нельзя влезть и сделать 301 на правильный урл ?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий