s91, это поисковый сервис. Снаружи пока не доступен.
Всё же хотелось бы разобраться в чём у нас проблема, будем очень признательны, если таки пришлёте лог и список поддоменов. Обещаю не разглашать.
s91, это какой-то косяк.
Пришлите плз в личку название сайта и кусок лога с урлами. Разберёмся, пофиксим.
Кстати, а сколько у вас сайтов с разными доменами на одном IP?
Робот наш. Если кому навредил - приносим извинения. По идее не должен никого напрягать, запросы делает 1 раз в секунду не чаще, если надо реже - можно самому поставить директиву crawl-delay в robots.txt
Будут проблемы - пишите в эту ветку. Лучше с кусками логов, будем разбираться.