62.213.92.4 - - [19/Oct/2012:02:22:17 +0400] "GET /хэш/sync.php?Links HTTP/1.0" 200 30605 "-" "Mozilla/5.0 (Windows; U; Windows NT 6.1; ru; rv:1.9.1.8) Gecko/20100202 Firefox/3.5.8" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:22:18 +0400] "POST /хэш/sync.php? HTTP/1.0" 200 47 "-" "Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:2.0b8pre) Gecko/20101213 Firefox/4.0b8pre" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:22:18 +0400] "POST /хэш/sync.php? HTTP/1.0" 200 47 "-" "Mozilla/5.0 (Windows; U; Windows NT 6.0; ru; rv:1.9.2) Gecko/20100115 Firefox/3.6" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:42 +0400] "GET /antiqua/?p=2699 HTTP/1.0" 200 29015 "-" "Mozilla/5.0 (Windows NT 5.1) AppleWebKit/535.1 (KHTML, like Gecko) Chrome/14.0.835.187 Safari/535.1" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:44 +0400] "GET /antiqua/?p=2042 HTTP/1.0" 200 29359 "-" "Mozilla/5.0 (X11; Linux i686; rv:6.0.2) Gecko/20100101 Firefox/6.0.2" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:44 +0400] "GET /antiqua/?p=4421 HTTP/1.0" 200 45660 "-" "Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_5_8; ru) AppleWebKit/533.18.1 (KHTML, like Gecko) Version/5.0.2 Safari/533.18.5" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:45 +0400] "GET /antiqua/?p=4420 HTTP/1.0" 200 38350 "-" "Mozilla/5.0 (Windows NT 6.1; rv:6.0.2) Gecko/20100101 Firefox/6.0.2" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:46 +0400] "GET /antiqua/?p=16 HTTP/1.0" 200 27824 "-" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; Zune 3.0)" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:47 +0400] "GET /antiqua/?p=245 HTTP/1.0" 200 27997 "-" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9) Gecko/2008052906 Firefox/3.0" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:23:48 +0400] "GET /antiqua/?p=259 HTTP/1.0" 200 36361 "-" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729; .NET4.0C; .NET4.0E)" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:24:58 +0400] "GET /antiqua/?m=20110819 HTTP/1.0" 200 21291 "-" "Mozilla/5.0 (Windows NT 5.1) AppleWebKit/535.1 (KHTML, like Gecko) Chrome/14.0.835.187 Safari/535.1" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:24:59 +0400] "GET /antiqua/?p=2004 HTTP/1.0" 200 40977 "-" "Mozilla/5.0 (Windows; U; Windows NT 6.1; ru; rv:1.9.2.13) Gecko/20101203 Firefox/3.6.13" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:25:01 +0400] "GET /antiqua/?p=2285 HTTP/1.0" 200 28630 "-" "Mozilla/5.0 (X11; U; CrOS i686 0.9.128; ru) AppleWebKit/534.10 (KHTML, like Gecko) Chrome/8.0.552.343 Safari/534.10" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:18 +0400] "GET /antiqua/?p=2799 HTTP/1.0" 200 29537 "-" "Mozilla/5.0 (Windows NT 6.1) AppleWebKit/535.1 (KHTML, like Gecko) Chrome/14.0.835.187 Safari/535.1" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:21 +0400] "GET /antiqua/?m=20110821 HTTP/1.0" 200 21276 "-" "Mozilla/5.0 (Windows; U; Windows NT 6.0; ru; rv:1.9.2) Gecko/20100115 Firefox/3.6" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:21 +0400] "GET /antiqua/?m=19910820 HTTP/1.0" 200 76865 "-" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9) Gecko/2008052906 Firefox/3.0" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:22 +0400] "GET /antiqua/?m=19910821 HTTP/1.0" 200 75350 "-" "MSIE (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727)" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:23 +0400] "GET /antiqua/?p=1019 HTTP/1.0" 200 30547 "-" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729; .NET4.0C; .NET4.0E)" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:24 +0400] "GET /antiqua/?p=1670 HTTP/1.0" 200 28914 "-" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.13) Gecko/20101203 Firefox/3.6.13 GTB7.1 ( .NET CLR 3.5.30729)" мойсайт.ru 62.213.92.4 - - [19/Oct/2012:02:26:24 +0400] "GET /antiqua/?paged=53 HTTP/1.0" 200 52733 "-" "Mozilla/5.0 (compatible; MSIE 8.0; Windows NT 5.2; Trident/4.0; Media Center PC 4.0; SLCC1; .NET CLR 3.0.04320)" мойсайт.ru
Добрый день.
В данный момент специалисты разбираются с вашей проблемой.
Обновление произведено, на текущий момент загрузчик должен создавать меньшую нагрузку.
User-agent: * Crawl-delay: 4.5
94.77.64.50 - - [18/Oct/2012:00:59:39 +0400] "GET /antiqua/?p=1186 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:39 +0400] "GET /antiqua/?p=2126 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:39 +0400] "GET /antiqua/?p=2126 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:40 +0400] "GET /antiqua/?p=2232 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:40 +0400] "GET /antiqua/?p=2232 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=771 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=771 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=698 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=857 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=1602 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=2016 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=698 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=857 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=2016 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=1602 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=163 HTTP/1.0" 94.77.64.50 - - [18/Oct/2012:00:59:42 +0400] "GET /antiqua/?p=163 HTTP/1.0"
Я передал ваше обращени в поддержку. Дело в том, что обращения с данного IP происходят не с сервера uniplace, а с rookee.ru. Так как сервис Rookee при покупке ссылки также проверяет сайт, то он создает дополнительную нагрузку на ваш сайт. На данный момент специалисты поддержки rookee.ru занимаются проблемой снижения числа обращений.---------- Добавлено 18.10.2012 в 12:13 ----------
Начисления за ссылки происходят на следующий день после покупки.---------- Добавлено 18.10.2012 в 12:15 ----------
Минимальная стоимость ссылки в системе - 1.2 рубля. Стоимость ссылки различная для разных страниц и зависит от многих параметров, включая тИЦ.
Робот всегда настраивается на большинство сайтов для обеспечения компромиса между скоростью и нагрузкой. Но в каком бы щадящем режиме он не был настроен, всегда будет часть сайтов, которым и такая нагрузка в тягость. Для этого как раз и был придуман этот параметр, он используется всеми поисковыми роботами, в том числе и Яндексом [http://help.yandex.ru/webmaster/?id=996567#1022359]
Он также поддерживается и роботом uniplace-bot.
Написал ответ по вашему сайту в личке.---------- Добавлено 16.10.2012 в 14:40 ----------
На текущий момент Uniplace - это полностью независимая система, со своими аккаунтами, никак не связанная с аккаунтами в сервисе rookee.ru. Вы можете оставить идею в сервисе reformal, мы ее обязательно рассмотрим.
Пришлите пожалуйста ваш аккаунт в системе, проверим в чем может быть проблема.---------- Добавлено 16.10.2012 в 13:48 ----------
Система управляет скоростью покупки исключительно в интересах сайта, никаких "штрафов" в ней нет - решение о покупке принимается оптимизатором. В любом случае проверим вашу ситуацию.
Ответил в личке.
Оптимизация нагрузки на сайты нашим роботом сейчас находится в стадии оперативного решения. Часть доработок уже сделана, на текущий момент на большей части сайтов видно падение нагрузки. Также обновление нашего загрузчка планируется сегодня.
Для управления частотой обращений на ваш сайт вы можете использовать директиву crawl-delay в robots.txt, например:
Вы можете ставить клиентский код не на все страницы, добавляя его только в необходимые шаблоны. Соответственно система не будет добавлять страницы без кода.
В вашем случае, из-за проблем с загрузкой робот не смог корректно проверить наличие кода, т.к. страница не отвечала. Мы сейчас исправляем логику датчика для данной ситуации.
Это сообщение предназначено только для вебмастера, поэтому система все равно отправляет на такие страницы ссылки. Проверку наличия ссылки производит другой алгоритм, посмотреть статус ссылки по нему можно в отчете по ссылкам.
На данных страницах не обнаружен код. Это сообщение только для вебмастера. На начисление денег он не влияет.
Спасибо, обязательно разберемся.