Форум Не про работу Самое разное

Есть ли список ботов которые подлежат блокировке?

N4
На сайте с 19.09.2008
Offline
264
nikki4
1794

Открываю почту -смотрю а сайты с самого утра не работают опять...

в ТП сказали что это SMTBot - повесил сайт.

вчера еще следующие боты так же вырубили БД:

msnbot
bingbot
BLEXBot
MJ12bot
BuddhaBot
Ezooms
AhrefsBot
Baiduspider
PaperLiBot
Twitterbot
QuerySeekerSpider
meanpathbot
Mail.RU_Bot
SemrushBot
SolomonoBot
Butterfly
UnwindFetchor
rogerbot
NING
TweetmemeBot
SeznamBot
coccoc
Yeti
Moreover
TurnitinBot
METASpider
Nekstbot
SputnikBot
Nigma.ru
DotBot

за эту неделю все сайты вырубались 3 раза...

подскажите на будущее, а каких еще ботов стоит заблокировать на будущее?

Enygma
На сайте с 15.11.2009
Offline
223
Enygma
#1

держи еще в этой ветке

спину выпрями!
L
На сайте с 07.12.2007
Offline
351
Ladycharm
#2

1. Баньте ботов по мере их появления, смотрите их по логам. Банить надо по Юзерагенту и по IP. Эффективно банить IP хостингов прямо подсетями.

2. Twitterbot - полезный.

3. Если сайт не держит нагрузку от ботов, как думаете, дадут ли ПС на него большой трафик? Всё равно вы не сможете его принять...

N4
На сайте с 19.09.2008
Offline
264
nikki4
#3

Короче пришлось тариф менять на гиг памяти, 512 почему-то не хватало. в целом использовалось около 200-300, но начались какие-то скачки.

твиттер бот значит разбанить, а как насчет других. посмотрел другие - смотрю спутник, мейл, никма - может их тоже разбанить?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий