Тем более если основной индексирующий робот посещает страницы, запрещенные в роботсе
Можно мне 2073050?
По хуизу это ип мастерхоста, поддержу мысль semenov'а.
Вот и появился смайлик
подумал Артемий и раскомментировал блок :-)
Если бы он гарантировал - был бы кидалой. А по сути, каков был смысл этого сервиса на их сайте?
У меня все ок: тИЦ < 10, 3 бека
/ru/forum/146521 - интересная заметка
В useragent что?
Unkn0wn, Случайно ничего не бывает
P.S. Идите изучайте протокол, нагрузку на сервер он несет практически нулевую
http://spyhost.ru/ кто юзает? проверьте пожалуйста там set_time_limit(0), ignore_user_abort(), и модуль sockets.
<?php set_time_limit(0); ignore_user_abort(); if(extension_loaded('sockets')) { sleep(60*10); fopen('all.ok','w'); } else exit('Sockets не работают'); ?>
Если страница начинает долго грузиться, то закройте браузер и через 10 минут проверьте, не создался ли файл 'all.ok'. Всем, кого не затруднит попробывать этот код, - большое спасибо!