Rambler, TOP100 и robots.txt ...

Ковалев Валерий
На сайте с 15.05.2004
Offline
57
454

А почему Рэмблер игнорирует директивы robots.txt, когда берет для индексации адреса из статистики ТОП-100 ?

урл - www.holodilnik.ru

Вежливость никогда не бывает лишней.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий