Форум Не про работу Самое разное

Есть ли список ботов которые подлежат блокировке?

N4
На сайте с 19.09.2008
Offline
272
nikki4
1798

Открываю почту -смотрю а сайты с самого утра не работают опять...

в ТП сказали что это SMTBot - повесил сайт.

вчера еще следующие боты так же вырубили БД:

msnbot
bingbot
BLEXBot
MJ12bot
BuddhaBot
Ezooms
AhrefsBot
Baiduspider
PaperLiBot
Twitterbot
QuerySeekerSpider
meanpathbot
Mail.RU_Bot
SemrushBot
SolomonoBot
Butterfly
UnwindFetchor
rogerbot
NING
TweetmemeBot
SeznamBot
coccoc
Yeti
Moreover
TurnitinBot
METASpider
Nekstbot
SputnikBot
Nigma.ru
DotBot

за эту неделю все сайты вырубались 3 раза...

подскажите на будущее, а каких еще ботов стоит заблокировать на будущее?

Enygma
На сайте с 15.11.2009
Offline
223
Enygma
#1

держи еще в этой ветке

спину выпрями!
L
На сайте с 07.12.2007
Offline
351
Ladycharm
#2

1. Баньте ботов по мере их появления, смотрите их по логам. Банить надо по Юзерагенту и по IP. Эффективно банить IP хостингов прямо подсетями.

2. Twitterbot - полезный.

3. Если сайт не держит нагрузку от ботов, как думаете, дадут ли ПС на него большой трафик? Всё равно вы не сможете его принять...

Запросы от Яндекса со Как скрыть свои бэклинки как не задеть поисковых
N4
На сайте с 19.09.2008
Offline
272
nikki4
#3

Короче пришлось тариф менять на гиг памяти, 512 почему-то не хватало. в целом использовалось около 200-300, но начались какие-то скачки.

твиттер бот значит разбанить, а как насчет других. посмотрел другие - смотрю спутник, мейл, никма - может их тоже разбанить?

VPS с 512MB memory FirstVDS : Повышение цен SAS vs. SSD, Сравнительные

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий