Как исключить страницы в файле robots.txt

46

vladimir_kh

16 июля 2015, 09:48

825

домен/catalog/display/manufacturer/115/price_from/2322/price_to/6309

домен/catalog/display/manufacturer/115/sort/2/price_from/2322/price_to/6309

домен/catalog/display/category/20/subcategory/81/price_from/2778/price_to/8261

домен/catalog/display/category/20/subcategory/81/sort/2/price_from/2778/price_to/8261

домен/catalog/display/category/20/subcategory/81/sort/2/price_from/2778/price_to/8261/manu/96

91

- Romanus -

16 июля 2015, 09:53

#1

vladimir_kh, если конкретно эти страницы, то:

Disallow: /catalog/display/manufacturer/115/price_from/2322/price_to/6309

Disallow: /e-1.com.ua/catalog/display/manufacturer/115/sort/2/price_from/2322/price_to/6309

Disallow: /e-1.com.ua/catalog/display/category/20/subcategory/81/price_from/2778/price_to/8261

Disallow: /e-1.com.ua/catalog/display/category/20/subcategory/81/sort/2/price_from/2778/price_to/8261

Disallow: /e-1.com.ua/catalog/display/category/20/subcategory/81/sort/2/price_from/2778/price_to/8261/manu/96

Делаю SEO. Веду блог - Romanus.ru ( https://romanus.ru )

46

vladimir_kh

16 июля 2015, 10:05

#2

в том то и дело что не конкретно эти а страницы фильтров price_from price_to

92

Chained

16 июля 2015, 10:21

#3

Disallow: /*/price_from/

Disallow: /*/price_to/

2

247

altezzik

16 июля 2015, 10:21

#4

Disallow: */price_from/*

1

46

vladimir_kh

16 июля 2015, 10:37

#5

скажите а данную форму стоит прописывать и для User-agent: * и для User-agent: Yandex

---------- Добавлено 16.07.2015 в 14:40 ----------

спасибо я поставил и продублировал

91

- Romanus -

16 июля 2015, 10:52

#6

vladimir_kh, да, продублируйте в 2 юзер-агента

1

В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов

Маркетинг для шоколадной фабрики. На 34% выше средний чек