Вот интересно - есть немало форумов с оплатой за сообщения, такса там - от 0.5 до 3 центов (больше нигде не встречал). И вовсе непустые они...
И почему-то их читать интереснее, чем работу некоторых "профессионалов" и "команд профессионалов", рекламирующихся тут и в других местах...
Если б всё было так просто - шаред-хостинги вымерли б как класс, ибо большинство сайтов на них было б забанено.
По информации от 2ip.ru на том же ip-адресе, где висит мой сайт, еще 250 сайтов (обычный шаред-хостинг). И как, интересно, Яндекс может отличить - я еще какой-нить г-сателит склепал или хостер еще одного клиента взял?
У меня наоборот - последние два дня от Яндекса просто нашествие: и фавикон, и новый с юзер-агентом YandexBot (раньше не ходил) и даже Yandex Direct (чего этому понадобилось - вообще непонятно)
Сервер helsinki на свебе, по результатам host-tracker.com - аптайм 99.99%, страницы в индексе только увеличиваются с каждым апом.
У него есть шанс раскрутить свой домен за ваш счёт.
Однако, коли у вас выделенный сервер - обезопаситься можно в конфиге апача. Создайте дефолтный хост со страничкой "Кто зашёл - тот дурак", а для своего сайта сделайте виртуальный с вашим доменом и никто больше так никогда не сделает.
Содержимое robots.txt я привёт в первом сообщении. Туда, по вашему мнению, надо что-то добавить/изменить?
Нет, не уверен. Именно поэтому и выложил для обсуждения.
Вот об этом я не думал... Это идея, сеньк! Надо ботам меньше прав дать на форуме - тогда, если это люди, им пропадёт интеерс под ботов маскироваться!
Я не знаю, что они видят. Я вижу, что они есть в списке пользователей "посетивших форум за последние 5 мин" (там форум на phpbb3). И именно в это время они грузят форум настолько, что самому зайти с трудом удаётся (((
Evil_Programmers, бан по IP, в принципе, вариант, но он припасён на крайний случай. Их IP нигде не рекламируются и могут меняться
OnCat, сеньк, полистаю...
Я задал этот вопрос на сеошном форуме (а не на специализированном техническом) именно потому, что предположил, что есть какой-то вариант дать им отмашку "не ходить" каким-то "сеошным" способом. Техническая сторона вопроса (как то сменить сервер или оптимизировать скрипт) в данном контексте не очень в тему.
fantom771, может, лучше подумать о размещении этого железа где-нить в более или менее приличном месте? У того же своего провайдера, к примеру... Место стоит недорого, бОльшая часть цены за аренду сервера - это аренда самого сервера + его администрирование.
... или нагрузка слишком высока. Со своими штатными задачами он справляется с большим запасом и тут вопрос стоит не в том, как оптимизировать сервер/скрипт, а как убрать совершенно бесполезную нагрузку.