факт
только у меня чуть по другому
я перелопачивал сайт начисто
ну и по дремучести своей аналогично запретил роботам работать...
Яндекс тут же меня выщелкнул
остальным по барабану
:)
к слову сказать
логи посмотрел
простукивалка приходит - robots стукнет и уходит :)
www.oknadil.ru
окна
так то оно так...
только вот у меня уже с неделю лежит вот такой robots
заявку на удаление сайта аналогично - неделю назад добавил...
***
User-Agent: StackRambler
Disallow: /
User-Agent: *
Disallow: /bin/
дня три назад добавил:
User-Agent: StackRambler/2.0
а рамблеру походу глубоко наплевать...
сегодня захожу на рамблер и умиляюсь :) --> Обновлено: 19.01.2006 07:26 мск
как проверить рамблер на robots?
типа Яндекса?
http://www.yandex.ru/cgi-bin/test-robots?host=
imho
надо колдовать с .htaccess
ответ удален
