robots

D
На сайте с 03.02.2012
Offline
26
247

Доброго времени суток!

Какой директивой в robots.txt запретить к индексации несуществующую страницу <site.ru/razdel> при этом не затронув <site.ru/razdel/> (со слэшом на конце). Повесил 301 редирект со страниц без слэша на страницы со слэшом... но роботы продолжают простукивать безслэшовые.

Спасибо.

kimberlit
На сайте с 13.03.2007
Offline
370
#1

Disallow: /razdel$

Не?

D
На сайте с 03.02.2012
Offline
26
#2
kimberlit:
Disallow: /razdel$
Не?

То что подразделы будут индексироваться это я знаю... но как это повлияет на слэшовые ссылки? Стоит ли опасаться что какой либо работ выкосит нужные страницы из индекса? Я уже пол часа гуглю... решение явно подобной задачи не встречал (

kimberlit
На сайте с 13.03.2007
Offline
370
#3
delferg:
но как это повлияет на слэшовые ссылки?
delferg:
Disallow: /razdel$

Я один тут слеша не вижу?

delferg:
Я уже пол часа гуглю...

Официальные хэлпы Я и Г уже не совсем модно читать?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий