Как заблокировать bing bot/2.0 в nginx?

D

1113

Dram

28 октября 2016, 09:47

2225

Пробовал так в секцию сервер

if ($http_user_agent ~* msnbot|bingot) {
return 444;
}

Но в логах по прежнему вижу

"Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)"

получающего 200 ответ

F2

5

fr23

28 октября 2016, 09:50

#1

Dram:
Пробовал так в секцию сервер

Но в логах по прежнему вижу
получающего 200 ответ

у вас bingot в условии, b пропустили?

1

Терашоп (https://terashop.ru)

D

1113

Dram

28 октября 2016, 10:09

#2

Исправил

if ($http_user_agent ~* msnbot|bingbot) {
return 444;
}

Перезагрузил нгихс, не помогает - все равно 200 ответ

---------- Добавлено 28.10.2016 в 13:09 ----------

Сам делаю запрос

wget -U "Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)" http://www.сайт/

получаю 200 ответ

---------- Добавлено 28.10.2016 в 13:11 ----------

Полностью секция сервер у меня такая

server {
listen 80;
server_name "";
return 444;
if ($http_user_agent ~* msnbot|bingbot) {
return 444;
}
}

F2

5

fr23

28 октября 2016, 10:26

#3

У вас обработка заканчивается до условия на первом return 444;

Т.е. условие не проверяется вообще.

1

D

1113

Dram

28 октября 2016, 10:29

#4

Поднял вверх, ничего не поменялось

server {
if ($http_user_agent ~* msnbot|bingbot) {
return 444;
}
listen 80;
server_name "";
return 444;
}

115

AGHost

28 октября 2016, 10:34

#5

Не совсем ясно, зачем тогда if, если все равно в любом случае выполняется return 444;

Вероятно проблема в server_name ""; заголовок host передается. Добавьте условие в конфиг с виртуальным хостом.

1

8 лет на рынке услуг хостинга - https://agho.st (https://agho.st)

D

1113

Dram

28 октября 2016, 10:40

#6

Прописал так

server {
if ($http_user_agent ~* msnbot|bingbot) {
return 444;
}
listen 80;
}

Толку нет, с локейшеном тоже

115

AGHost

28 октября 2016, 10:47

#7

Dram, в каком блоке прописываете это? Добавьте условие в блок с виртуальным хостом.

1

F2

5

fr23

28 октября 2016, 10:49

#8

Проверил при явном указании server_name, все работает, без него или пустой строкой - не работает.

D

1113

Dram

28 октября 2016, 10:50

#9

Спасибо, теперь все получилось!

VK приобрела 70% в структуре компании-разработчика red_mad_robot

Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы