robots.txt на www.dmoz.org

Unlock
На сайте с 01.08.2004
Offline
786
810

Сабж:

User-agent: *

Disallow: /cgi-bin/

Disallow: /editors/

Disallow: /World/.m

Последняя строка что означает? Почему стоит запрет на индексацию раздела?

Есть желание, - тысяча способов; нет желания, - тысяча поводов! /Петр-I/.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий