А где тут мошенничество? Человек все видит и все понимает на что он идет. И куда идут его деньги?
Почему это мошенничество?
Я понимаю, если бы говорилось заплати 10 у.е. и получишь 10000 уе и этого не происходит.
А тут получается обо всем сообщается человеку и он вкурсе что происходит.
Всем спасибо за советы, дальше постараюсь разобраться сам.
Ну о нагрузке я вообще речи не вел.
Меня интересует именно способ либо жестко граничить доступ бота на сайт, либо, это даже лучше, вообще как то закрыть ему доступ.
Даже лучше доступ закрыть.
Но так что бы он 100% не заходил, если я его не позову.
Вебмастер не подходит.
Т.е. реальной возможности полностью закрыть боту доступ нет? ОН в любом случае будет ползать и банить сайты?
А если ему задать частоту посещения сайта, он послушает?
кроу дилай?
Мне нужно что бы бот не ползал и не индексировал ничего, соответственно не банил итд---------- Добавлено 26.09.2014 в 19:31 ----------Ну да, не уник---------- Добавлено 26.09.2014 в 19:32 ----------Но раньше, пару месяцев назад вроде сайты держались в индексе, а счас чет больше трех дней после роста трафа банятся
Ну суть в том, что он начинает очень быстро все индексировать, страничек много, что то типа поисковика.
И через несколько дней, походу после быстрого скачка трафика, сайт банится.
Я хотел попробовать как то снизить скорость роста трафика или открывать этот доступ по своему усмотрению.
Вот посоветовали, но не понимаю по английски
http://serverfault.com/questions/237981/how-do-a-slow-recursive-delete-on-linux---------- Добавлено 28.05.2014 в 15:39 ----------Пока что уменьшил время кеша и частоту чистки.
Вроде справляется пока что.
Попозже попробую другие методы.
Я вот применил ionice
Вроде полегче, но все же сервак еле еле тянет сайты.
Грузятся очень медленно
Буду пробовать
