Форум Поисковые системы Яндекс

Что за зверь Win16; Dyatel; A

12
i73
На сайте с 08.03.2006
Offline
188
i73
#11

Вопрос тогда. Поясните почему он (бот) только на robots.txt только

сходил?

Seventh Son:
User-agent: *
Disallow: /admin/
Disallow: /txt/
Disallow: /phprusearch/
Disallow: /api/phplitepoll/

вроде бы все нормально.....с robots.txt

почему дальше не полез😕

SS
На сайте с 03.09.2004
Offline
141
Seventh Son
#12
i73:
почему дальше не полез

i73, значит ему именно так надо было.

«Клянусь своей жизнью и любовью к ней, что никогда не буду жить ради другого человека и никогда не попрошу и не заставлю другого человека жить ради меня» (с) Джон Галт
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий