robots.txt закрыть последующие за адресом url'ы

V
На сайте с 12.04.2015
Offline
29
457

Всем доброго времени суток!

Нужно закрыть от индексации некоторые фильтры

http://domain.ru/category/subcategory/ - без фильтра

http://domain.ru/category/subcategory1/filter1...n - с фильтром

Disallow: /category/category1/*/ Это правильное правило для моей цели?

или

Disallow: /category/category1/* ?

kimberlit
На сайте с 13.03.2007
Offline
370
#1
VKonstantin:
Нужно закрыть от индексации некоторые фильтры

Disallow: */filter

Ps

VKonstantin:
Disallow: /category/category1/*/ Это правильное правило для моей цели?
или
Disallow: /category/category1/* ?

И где у тебя тут указаны "некоторые" фильтры?

V
На сайте с 12.04.2015
Offline
29
#2
kimberlit:
Disallow: */filter
Ps
И где у тебя тут указаны "некоторые" фильтры?

http://domain.ru/category/subcategory1/filter1...n - неправильно указал как генерятся в webassyst страницы с фильтрами...

http://domain.ru/category/subcategory1/opt1...n но и категории тоже генерируются opt1...n ... поэтому я откинул идею прописывать Disallow:*/opt

Но некоторые фильтры с чпу. Я думал на страницах, где фильтры однозначно не нужны

category/category1/* - это закроет от индексации, все, что следует за category/category1/ ... это не так?

Если не так, как прописывается такое правило?

kimberlit
На сайте с 13.03.2007
Offline
370
#3
VKonstantin:
Я думал на страницах, где фильтры однозначно не нужны
category/category1/* - это закроет от индексации, все, что следует за category/category1/ ... это не так?

Закроет. И саму страницу /category/category1/ тоже закроет.

VKonstantin:
http://domain.ru/category/subcategory1/filter1...n - неправильно указал как генерятся в webassyst страницы с фильтрами...
http://domain.ru/category/subcategory1/opt1...n но и категории тоже генерируются opt1...n ... поэтому я откинул идею прописывать Disallow:*/opt

Ничего не понял.

V
На сайте с 12.04.2015
Offline
29
#4
kimberlit:

Ничего не понял.

http://domain.ru/category/subcategory1/ - страница категории товара

http://domain.ru/category/opt01/ - та же страница без чпу

http://domain.ru/category/subcategory1/klassnie_tovari_s_filtrom1 - страница фильтра с чпу

http://domain.ru/category/subcategory1/opt02 - та же странциа с фильтром без чпу

---------- Добавлено 19.04.2015 в 23:07 ----------

А когда фильтров несколько применено

http://domain.ru/category/subcategory1/#filter=

Вот тут, я так понимаю то, что вы посоветовали применить?

Disallow: */filter

или

Disallow: */#filter

kimberlit
На сайте с 13.03.2007
Offline
370
#5
VKonstantin:
А когда фильтров несколько применено
http://domain.ru/category/subcategory1/#filter=
Вот тут, я так понимаю то, что вы посоветовали применить?
Disallow: */filter
или
Disallow: */#filter

Ё-моё, да дай нормальный пример урл. Сколько можно тайнописью заниматься.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий