robots.txt указать диапазон(маска) файлов....

killraty
На сайте с 27.09.2004
Offline
100
1345

как указать в robots.txt маску файлов типа:

allow: /docs/pedali[0-9].*.html

нет подписи
K
На сайте с 31.01.2001
Offline
737
#1

Можете указывать как вам вздумается, но ничего этого в стандарте нет, также как и директивы allow: , поэтому работать не будет. Изучите стандарт.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
K. Ermakov
На сайте с 10.12.2004
Offline
328
#2
killraty:
как указать в robots.txt маску файлов типа

Маски только гугл поддерживает. Это его расширения стандарта. У других поисковиков маски не поддерживаются. Ссылка на стандарт дана выше.

С уважением, Константин Ермаков, absite.ru: онлайн кроссворды (http://absite.ru/); searchsuggest.ru: поисковые подсказки доставляют (http://searchsuggest.ru/).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий