Googlebot

Думаю, ты в этом не одинок. :) По трем сайтам действительно с недавнего времени, приходит сначала один, забирает кучку, потом часов через несколько другой....и так целый день.

Раньше наблюдалось одновременное нашествие с параллельным пожиранием.

Кстати, очень сильно активизировались боты инктоми и мсн. :) Эти бегают по сайту стаями.

Инктоми, мсн - всё это фигня! АскДживс - вот кто самая прожорливая скотина!!! За 2 дня откушал 1.4Г от месяцного лимита!! 😡

Все же приятно, если представить, ботов как маленьких и больших жучков, которые начинают ползать по сайту,... а ты за ними смотришь,.. и подталкивание 'ну давай же, скушай', 'ай молодца','сегодня ты просто ненасытен :)'...

у меня в день боты жрут 2Гига трафа :)

MSN обычно ходит один - но сьедает 5-6 тыщ страниц.

А вот гугль сегодня на три-четыре сайта снова стаей налетел. Унес 10к страниц...

Странно - может на разных датацентрах прожиралки по разному настроены?

Каждый день? Этож что ж за сайт такой? Страниц 50-70К наверное ...

сервер с дорами

Много доров видно :)

Да, все по многу жрать стали, но вот Gigabot бывает всех уделывает. Ему-то столько зачем, непойму...

наверно марку хотят держать, чем свежее контент тем больше народа будет валить на этот поисковик, этож по идее поисковик можно спроэцировать как новостной сайт, чем свежее новости, тем больше посещаемость, вот когда гугль загребёт весь рынок, вот тогда и успокоится....