Dram

Рейтинг
1115
Регистрация
28.06.2008
Dram:
Большое спасибо, вот теперь 100% Якубовичей ушли, теперь из опасного только "Смотреть видео" и разные плееры, но лично у меня они появляются не чаще раза в сутки.

К сожалению доход снизился существенно - это не вариант, лучше чистить раз в час, чем терять 30% дохода.

Лишний костыль, читайте выше. Правильных ботов я уже отсеял - они летают у меня по сайту делая сотни тысяч запросов в сутки и ни одной ошибки. (для этого отдельный лог)

map $status:$http_user_agent $good_useragent {
default 0;
~*503:.*(yandexaccessibilitybot|yandexdirect|yandeximages|yahoo|mediapartners-google|yandexbot|googlebot|msnbot|bingbot|mail).* 1;
}



---------- Добавлено 13.02.2017 в 16:09 ----------

Dimka:
Чтобы не заблокировать новые ip ботов.

для этого и нужен отдельный лог - раз в день а то и реже смотрю туда, очень редко там кто появляется. За месяц новых айпи не встретил, только маскирующихся под ботов

Отсев ботов ПС от всего остального на 100% делает это, не зачем еще что-то мудрить

geo $whitelist {
default 0;
# ip server
155.001.356.004 1;
# боты google
64.68.80.0/21 1;
64.233.0.0/16 1;
66.102.0.0/20 1;
72.14.192.0/18 1;
209.85.128.0/17 1;
216.239.32.0/19 1;
66.249.0.0/16 1;
104.154.0.0/16 1;
# боты yandex
77.88.0.0/18 1;
87.250.224.0/19 1;
93.158.0.0/16 1;
95.108.128.0/17 1;
213.180.192.0/19 1;
141.8.0.0/16 1;
130.193.0.0/16 1;
5.255.253.0/24 1;
178.154.0.0/16 1;
37.9.118.0/24 1;
# mail.ru
217.69.0.0/16 1;
94.100.0.0/16 1;
# bingbot-msn
40.77.0.0/16 1;
207.46.0.0/16 1;
65.52.0.0/14 1;
157.55.0.0/16 1;
# Yahoo
68.180.0.0/16 1;
67.195.0.0/16 1;
69.147.64.0/18 1;
72.30.0.0/16 1;
74.6.0.0/16 1;
63.250.0.0/16 1;
# sputnik
5.143.0.0/16 1;
# opera-mini.net
82.145.216.0/22 1;
107.167.96.0/19 1;
185.26.180.0/23 1;
37.228.104.0/22 1;
82.145.208.0/21 1;
37.228.111.128/26 1;
141.0.14.0/23 1;
82.145.220.0/22 1;
141.0.12.0/23 1;
141.0.8.0/22 1;
}

map "$whitelist:$server_protocol" $limit1 {
default "";
"1:HTTP/1.0" "";
"1:HTTP/1.1" "";
"1:HTTP/2.0" "";
"0:HTTP/1.1" "$binary_remote_addr";
}

Dimka, можно вариант рабочего кода, как правильно прописать? Что на счет живых юзеров - все ли браузеры отвечают этими заголовками?

Хаагенти:
Не так. Чтобы избавиться от трансляции "журнальных" объявлений (то есть текстовых трансформированных в графические) нужно на вкладке "Показ объявлений" в разделе "Медийные объявления" отключить функцию "Оптимизированные медийные объявления: показывать функции оптимизации."

Большое спасибо, вот теперь 100% Якубовичей ушли, теперь из опасного только "Смотреть видео" и разные плееры, но лично у меня они появляются не чаще раза в сутки.

В общем по како-то непонятно причине задания крона затупили, выстроились в очередь и сожрали весь пул.

увеличение деток до

pm.max_children = 50
pm.max_requests=100

решило проблему.

Вот так вот на ровном месте, 4 часа даунтайма. Пол года все летало, а тут бац и даже перезагрузка не помогала....

redeyer, очень оперативно устранил странный необычный глю, который стоил мне пару седых волос и 4 часа даунтайма на ровном месте. Спасибо, человек реально в теме!!! Рекомендую к сотрудничеству!

В общем шлак никуда не пропал, вчера и сегодня вагон Якубовичей завезли. На оставшемся сайте тестирую и сделал вывод - включение только медийки убирает шлак на 95%, доход снижается процентов на 5-10%. Оставлю пока так.

При /* bottom: 0; пропадает все содержимое страницы в никуда, остается только див меню

Но к сожалению /* top: 0; */ приклеивает блок меню к верху закрывая <div class="top">...</div>

Мне нужно чтобы при прокрутке вверх <div id="menu">...</div> оставался приклееным к верху но как только он коснется <div class="top">...</div> то выше уже не лез.

ВСя страница

Всего: 6927