Каким образом склеить старый и новый домены. Через 301-й редирект?
Так я сразу взял оба домена :) Хочу один сделать основным, а на другой поставить 301-й редирект. Значит, без дефиса все же предпочтительней?
Если я правильно понимаю, для гугла и яши нет особой разницы наличие дефиса в домене?
По телефону не буду. Разница в 1 знак между доменами не существенна?
110 > 130. Историческая тематика.
Влияет напрямую: сайт выходит за установленные лимиты нагрузки.
Нет.
Именно. Поэтому я хочу или ограничить активность бота, или запретить для индексации некоторые директории моего ресурса.
Ясно.
Сейчас посмотрю в логах.
UPD Да, это он и есть. За 6 часов (4-10 утра) просмотрел 300 страниц сайта и 4 тыс. страниц форума.
Пока что запрещу для индексации директорию форума:
User-Agent: Mail.Ru
Disallow: /forum/
Спасибо за информацию. Узнал, что: "user-agent GoGo называется Mail.Ru/1.0 и реагирует на запись User-agent: Mail.Ru в robots.txt".
telnet76 добавил 14.02.2008 в 18:35
Всем спасибо за помощь. Продолжу наблюдать за этим ботом.
Зачем же сразу банить?
Можно ограничить. Как думаете, такого правила в robots хватит?
User-Agent: spider5.mail.ru
Crawl-delay: 60
Нагрузкой на сервер хостера, т.к. сайт на виртуальном хостинге.
"ну и" то, что mail.ru и gogo дают только 4,1% от всех поисковых переходов. При этом за последние 4 дня траффик моего ресурса составил 2,11 Гб. Из этого трафика на поисковые боты приходится 880 Мб. Бот mail.ru умудрился сгенерировать 640 Мб из этих 880 Мб, т.е. 73% от трафика ботов и 30% от трафика всего сайта. "Хорошее соотношение" - 73% трафика ботов и 4,1% поисковых переходов.
Давайте посмотрим динамику по моему ресурсу: переходы с поисковых систем по данным LI.
