Форум Практика оптимизации Любые вопросы от новичков по оптимизации

вопрос по robots.txt

MT
На сайте с 23.03.2004
Offline
115
MandaT
445

профи, подскажите плиз, насколько правильна конструкция такого вида в роботс тхт:

User-agent: *

Disallow: /p2p.php/products_id

Disallow: /product_info.php/manufacturers_id/*/products_id

Host: www.xxxxxx.ru

цель не пустить роботов на страницы вида:

www.xxxxxx.ru/p2p.php/products_id/"любое число" и

www.xxxxxx.ru/product_info.php/manufacturers_id/"число"/products_id/"число"

но оставить доступной www.xxxxxx.ru/product_info.php/"число"

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#1 


User-agent: *

Disallow: /p2p.php/products_id

Disallow: /product_info.php/manufacturers_id



User-agent: Yandex

Disallow: /p2p.php/products_id

Disallow: /product_info.php/manufacturers_id

Host: www.xxxxxx.ru
[Удален]
#2

Так на будущее можно всё о robots здесь почитать /ru/forum/86666

MT
На сайте с 23.03.2004
Offline
115
MandaT
#3
kimberlit:

User-agent: *

Disallow: /p2p.php/products_id

Disallow: /product_info.php/manufacturers_id



User-agent: Yandex

Disallow: /p2p.php/products_id

Disallow: /product_info.php/manufacturers_id

Host: www.xxxxxx.ru

спасибо за ответ, но что делать если нужно оставить /product_info.php/manufacturers_id/"число"

а убрать именно это: /product_info.php/manufacturers_id/"число"/products_id/"число"

MandaT добавил 17.03.2008 в 01:16

скажите пожалуйста, вопрос по прежнему актуален:

что делать если нужно оставить /product_info.php/manufacturers_id/"число"

а убрать именно /product_info.php/manufacturers_id/"число"/products_id/"число"

MandaT добавил 17.03.2008 в 01:17

скажите пожалуйста, вопрос по прежнему актуален:

что делать если нужно оставить /product_info.php/manufacturers_id/"число"

а убрать именно /product_info.php/manufacturers_id/"число"/products_id/"число"

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий