Много трафика с одного ip

ну по доступной мне статистике сайтов 10-15% от количества переходов Яндекса.

"дают 2,4% трафика" - это все относительные цифры, тем более от всех посещений (мало какие источники могут быть), а не поисковых.

Лучше давайте посмотрим динамику

Давайте посмотрим динамику по моему ресурсу: переходы с поисковых систем по данным LI.

__________________________

ну и?

"ну и" то, что mail.ru и gogo дают только 4,1% от всех поисковых переходов. При этом за последние 4 дня траффик моего ресурса составил 2,11 Гб. Из этого трафика на поисковые боты приходится 880 Мб. Бот mail.ru умудрился сгенерировать 640 Мб из этих 880 Мб, т.е. 73% от трафика ботов и 30% от трафика всего сайта. "Хорошее соотношение" - 73% трафика ботов и 4,1% поисковых переходов.

telnet76, вы платите за российский трафик? Или нагрузка от бота мешает работе сайта? Чем реальным вам мешает бот?

Нагрузкой на сервер хостера, т.к. сайт на виртуальном хостинге.

о чем спор (( ну и баньте если вам так "больно"

По теме Тематические предпочтения пользователей различных поисковых машин (хоть публикация и давняя..)

+ http://sales.mail.ru/audience.htm

Особенно интересным мне кажется http://sales.mail.ru/affinity.htm и http://sales.mail.ru/compare_press.htm

+ /ru/forum/146041

Зачем же сразу банить?

Можно ограничить. Как думаете, такого правила в robots хватит?

User-Agent: spider5.mail.ru

Crawl-delay: 60

Нагрузка - это прямая обязанность сервера и хостера :)

На вас это как влияет? Хостер машет пальчиком "ай-ай-ай"? Вынуждает перейти на более дорогой тариф, хотя в вашем тарифе не оговорена нагрузка? Или оговорена?

Вы рекламу где-нибудь покупаете? Вас не смущает то, что вы платите за 1000 показов, а приходит несколько человек? Вы отказываетесь от рекламы, так как хотите, чтобы по 1000 показов приходило человек 900? Запросы поисковика - это та же схема рекламы, бот запрашивает 1000 страниц, а с поисковика приходит несколько человек.

Кстати, суммировать go.mail.ru и gogo.ru не совсем корректно, у go.mail.ru нет "паука", это выдача Яндекса.

не знаю, не пробовал

Закрытия ссылок от индексации gogo.ru

gogo.ru как запретить индексацию?