Dram

Рейтинг
1114
Регистрация
28.06.2008

Нда.... че то совсем печаль. Вчера был рекорд посещаемости за год, а доход 50% от того что по идее должен был быть.

Я одного не пойму - меньше доход у нас = меньше у гугла. Зачем им это надо???

png 170141.png

Посмотреть правила фаервола удобно так:

iptables -n -L -v --line-numbers

удалить например 9-е правило так

iptables -D INPUT 9

Проверить работает или нет - можно пингом с другого сервера, если у вас нет второго - пришлите IP сервера в личку, сделаю пинг со своего и пришлю результат, а его не будет ибо пинг не пройдет

---------- Добавлено 09.01.2018 в 21:20 ----------

map очень крутая штука в Nginx, я с помощью нее много че у ся накрутил :))) , например разделил логи по протоколам, логи ботов поисковиков тоже отдельно собираю и даже логи тех кто "косит" под ботов поисковиков (а есть много и таких) тоже отдельно....

Тут нужно пояснить что боты поисковиков у меня не ограничиваются, и если вдруг бот поисковика получил 503 ошибку, то тут только 2 варианта.

1. Новая подсеть которую нужно добавить в белый список (это дело можно автоматизировать, но мне не хватает тут знаний, проверяю вручную раз в мес... логи за пару тройку дней)

2. Кто-то косит под ботов поисковиков.

map $status:$http_user_agent $good_useragent {
default 0;
~*503:.*(yandexaccessibilitybot|yandexdirect|yandeximages|yahoo|mediapartners-google|yandexbot|googlebot|msnbot|bingbot|mail).* 1;
}

За год юзания этой конструкции я выявил всего 3 новых айпи поисковиков, зато косят под них ежедневно.

И это те кто прошел первый уровень (бан подсетей хостеров в фаерволе)

iccup:

Я так понял при перезагрузке сервера эти правила снова придется накатить?

Да. Можно добавить новые правила в автозагрузку, но я не стал.... чтобы была всегда возможность очистить перезагрузкой если накосячил.

iccup:
ибо боа пинтерест случайно забанил.

А это что за зверь?

iccup:
Дело в том, что я даю код для вставки изображений на других сайтах. Это используют частенько.

У меня тоже есть такой код - работает без проблем.

Это то тут при чем?

Вы блокируете входящие запросы из подсетей хостеров. А там нет людей.

Запрос картиники (вашей вставленной да другом сайте) - придет от браузера юзера, а не от сайта на котором его вставили.

P.S. прежде чем применять правила сделайте

iptables-save > /root/rules.default
ip6tables-save > /root/rules.v6default

если что-то пойдет не так , то очень быстро откатите

iptables-restore < /root/rules.default
iptables-restore < /root/rules.v6default

Не забудьте удалить из того списка подсеть с IP вашего сервера, а то будут проблемы с cron задачами

Это + это = 99% ботов идут лесом.

Пользуйтесь бесплатно :))))

ISP Manager лишняя не нужная прослойка. Даже я ни на грамм не админ и то обхожусь без нее.

iccup:
Пытался ставить ipset получил такое

А так не пробовали?

apt-get install ipset

iccup, вы закрыли свой сайт от мизерного коли-ва мусорного трафика, вот (как мне кажется) более подходящее решение /ru/forum/958253

Закрыть на уровне фаервола трафик с подсетей крупнейших хостеров мира.

Юзаю это решение более года + свою надстройку /ru/forum/comment/14885499, просадки по трафику не заметил, а вот мусорного трафика устало меньше на 90%.

Даже одна контора аналитики писала мне письмо - типа что такое, раньше парсили ваш сайт нормально, а сейчас он нормально открывается с компа, а наш сканер типа пробиться не может :)))

P.S. в вашем решении нет финальной строки

if ($bad_ip) {

return 444;

}

map $http_user_agent $bad_useragent {

default 0;

~*ia_archiver 1;

~*Curl 1;

~*libwww 1;

~*BLEXBot 1;

~*SBooksNet 1;

~*MJ12bot 1;

~*Java 1;

~*NTENTbot 1;

~*GetIntent 1;

~*SemrushBot 1;

~*HybridBot 1;

~*AhrefsBot 1;

~*SeznamBot 1;

~*DeuSu 1;

~*GrapeshotCrawler 1;

~*SentiBot 1;

~*default 1;

~*Virusdie 1;

~*WordPress 1;

~*WhatsApp 1;

~*SeopultContentAnalyzer 1;

~*WinHTTP 1;

}

+ это в каждый нужный сервер

if ($bad_bot) {

return 444;

}

Более широкий вид блокировки тут

Тему не читал - но мне кажется все многие рекламодатели на праздники приостановили компании - отсюда деффицит рекламы и пустые места.

Завтра все будет норм.

Уже писали неоднократно - блокируйте в скрипте все говнозоны типа

.bid
.site
.pw
.top
.xyz
.online
.website
.space

там один шлак

Всего: 6924