Как по логам определить кто грузит сайт?

Делается не так. Ищете момент появления товарища и смотрите, откуда его принесло.

-- 8< -------------------------------------------

94.241.3.224 - - [24/Nov/2011:11:04:49 +0400] "GET /cache/wo/bf10ad1cd8.wo1322078495.css HTTP/1.1" 200 10055 "http://psy.5igorsk.ru/prezentacii/prezentaciya-vibor-professii.html" "Mozilla/5.0 (Windows; U; Windows NT 

-- 8< -------------------------------------------

195.161.25.23 - - [24/Nov/2011:11:04:58 +0400] "GET /templates/psy_templates/images/footer_effect.png HTTP/1.1" 200 134 "http://psy.5igorsk.ru/knigi/vibor-professii-trening-dlya-podrostkov.html" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0; SLCC1; .NET CLR 2.0.50727; InfoPath.2; .NET CLR 3.5.30729; .NET CLR 3.0.30729)"

-- 8< -------------------------------------------

Ну это всё за 11:00, а нужен за 05:00 и за 23:00 (с кусками по 1-2 минуты вперёд-назад).

Вроде обычный юзер... продвинутые екплорером не пользуются :)

Вот это:

Options +FollowSymLinks

RewriteEngine On

RewriteCond %{HTTP_HOST} ^www.psy.5igorsk\.ru$ [NC]

RewriteRule ^(.*)$ http://psy.5igorsk.ru/$1 [R=301,L]

RewriteEngine On

RewriteCond %{HTTP_HOST} psy-5igorsk.1gb.ru

RewriteRule (.*) http://psy.5igorsk.ru/$1 [R=301,L]

Надо изъять из robots.txt и перенести в .htaccess

Хорс, многие боты-парсеры как раз под самым наибанальнейшим експлорером ходят. У меня сразу вызывает подозрение IE6, т.к. им уже невозможно пользоваться. А ещё встречаются всякие Windows 98SE.

OnCat,

Да я только сегодня добавил многие из них.

Пытаюсь экспериментировать.

А то чувствую что теряю сайт.

Он на протяжении последних 3 месяцев не может нормально функционировать - постоянные отключения из-за перегрузок.

Уже хостинг поменял.

не помогает.

маловато. У моего хостера 30

+ есть статистика по запросам, которые грузят процессор (кто-когда-запрос).

Хорс, Поправил.

Redje добавил 24.11.2011 в 22:56

это вряд ли.

Они просто считают по разному.

Я за свои 7,5% плачу 570 р/мес.

тоже может быть.

Вам следует попросить хостера сделать статистику загрузки процаболее подробной.

Хорошая вещь для оптимизации скриптов.

rommer,

Если дело в скриптах то почему перегруз происходит не в моменту наибольшей посещаемости? Т.е. когда эти скрипты более всего задействованы.

Redje, всё же думаю, что дело в кроне...

хотелось бы увидеть, что выдаёт crontab -l

потому что грузят проц не все скрипты, а самые мощные. 😂

Может быть, виновен даже всего лиш один скрипт, который запускается раз в пять секунд пару десятков раз.