robots.txt что не так

12
Лёлик
На сайте с 28.04.2006
Offline
54
#11
ZuS:
Kost, рамблер знает директиву хост

Будьте добры подтверждение.

Пока я нашёл только обратное : http://www.seoman.ru/FAQ/article023.html

И на http://www.rambler.ru/doc/robots.shtml не упоминается про директиву Host.

K
На сайте с 31.01.2001
Offline
737
#12
Лёлик:
Будьте добры подтверждение

1) Директиву Host придумали с участием этого форума и сотрудников Яндекса. Ссылка на обсуждение давалась много раз. Мануал, увы, только тут.

2) При решении проблемы с зеркалами мне лично подтвердили в поддержке Рамблера, что эту директиву Рамблер не понимает.

Достаточно?

При указании

User-agent: *

будет работать только для Яндекса, т.к. блок с непонятной директивой остальные должны вообще игнорировать.

Но подсовывать нарушающие стандарт блоки всем роботам считаю некорректным. Поэтому, на мой взгляд, должно быть два блока: один - для Яндекса и один - для всех остальных (если нет других нюансов).

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Avatar
На сайте с 18.05.2003
Offline
168
#13

Kost, поддерживаю. Не знает.

ZuS:
Kost, рамблер знает директиву хост

с чего вы это взяли?

Лёлик
На сайте с 28.04.2006
Offline
54
#14
Kost:
1) Директиву Host придумали с участием этого форума и сотрудников Яндекса. Ссылка на обсуждение давалась много раз. Мануал, увы, только тут.
2) При решении проблемы с зеркалами мне лично подтвердили в поддержке Рамблера, что эту директиву Рамблер не понимает.
Достаточно?

При указании
User-agent: *
будет работать только для Яндекса, т.к. блок с непонятной директивой остальные должны вообще игнорировать.
Но подсовывать нарушающие стандарт блоки всем роботам считаю некорректным. Поэтому, на мой взгляд, должно быть два блока: один - для Яндекса и один - для всех остальных (если нет других нюансов).

Моё предыдущее сообщение обращалось не к вам :)

То, что рамблер не понимает я с вами полностью согласен.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий