Опять про robots.txt

Microsd
На сайте с 26.05.2010
Offline
47
596

Долго гуглил, не нашел.

Есть сайт: site.ru

Есть страница: site.ru/auto

Есть дочерние страницы этой страницы например: site.ru/auto/1, site.ru/auto/100 и т.д.

Вопрос: Как запретить все страницы начинающиеся с /auto/ (site.ru/auto/1, site.ru/auto/100 и т.д.)

Но вместе с тем разрешить индексацию страницы site.ru/auto ???

Заранее спасибо.

[Удален]
#1

Вот так:

Disallow: /auto/*

kimberlit
На сайте с 13.03.2007
Offline
370
#2

------------

83
На сайте с 08.11.2010
Offline
4
#3

а зачем запрещать индексацию?

Научитесь играть в покер, не вкладывая собственных денег! Получите бонус в $50 от PokerStrategy.com! (http://ru.pokerstrategy.com/#uPN97T)
Цахес
На сайте с 15.03.2007
Offline
205
#4
provocator:
Вот так:
Disallow: /auto/*

По умолчанию к концу каждого правила, описанного в robots.txt, приписывается спецсимвол "*".

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий