Garchenko: Вообщем, зашел на портал грабер, который в несколько потоков (около 40) начал стягивать портал. От нагрузки портал загнулся. Нужно ограничить количество одновременных потоков с одного IP, или как еще можно решить подобную проблему?
а ничего что браузер создает далеко не одно подключение при заходе на сайт?
domainmvd: Обьясните пожайлуста какие ссылки выводятся по запросу link:www.domain.com? У меня в панели гугла пишет Ссылок на ваш сайт - 85,
а по запросу указаному выше ничего не выводит, почему?
не показывает что б не парсили, можно в yahoo глянуть беклинки
Лууче убить его, сплошной копипаст и тырнет. УГ в этом мире станет меньше.
+1
еще одна файлопомойка =(
Боты 3-4 типов и все на одном айпи?
Сайт и так уже велик, лидер сегмента.
Ипов, а не типов =)
umka
тогда, предлагаю кислород выдавать дозами!:D
iamsens добавил 16.06.2010 в 18:08
кстати большинство "правильных" ботов можно органичивать через robots.txt
а не правильных, нужно банить в фаерволле
;7106493']обоснуйте свой ответ :)
проблема: сайт(база или хз что) загибается от большого количества подключений
решение: уменьшить количество подключений,
а если сайт начнет расти? придут боты с 3-4-х ипов
как по-мне правильнее, посмотреть что создает нагрузку, возможно оптимизировать запросы к БД, или поменять настройки СУБД, веб-сервера...
ИМХО
всеравно в корне неправильное решение вопроса
Вообщем, зашел на портал грабер, который в несколько потоков (около 40) начал стягивать портал. От нагрузки портал загнулся. Нужно ограничить количество одновременных потоков с одного IP, или как еще можно решить подобную проблему?
а ничего что браузер создает далеко не одно подключение при заходе на сайт?
а в /rescue/sh -пробивали запусать?
rm -rf english если конечно пропрет.
отбакапится.
и далее fsck
так врядле сработает
фсчк тоже может не помоч)
может там хардлинка или симлинка на каком-то уровне
в крайнем случае скриптом удалаить, а вобще чем оно Вам мешает? =-)
и еще
ls -laR
Обьясните пожайлуста какие ссылки выводятся по запросу link:www.domain.com?
У меня в панели гугла пишет Ссылок на ваш сайт - 85,
а по запросу указаному выше ничего не выводит, почему?
не показывает что б не парсили, можно в yahoo глянуть беклинки
а серверный кто-то знает?