Роботы из США идут на сайт. Кто это такие?

1 234
fliger
На сайте с 17.09.2015
Offline
113
#21
Denechka:
не блокировать же все эти ip, так можно и пол-мира зарезать?

Боты из США, по моим многолетним наблюдениям, заходят с IP крупных сетей хостинг-провайдеров. Изредка - из специализированных компаний, посетители из которых никакого интереса для сайта представлять не могут. Их можно полностью блокировать (всю сеть).

D
На сайте с 29.10.2018
Offline
59
#22

Спасибо за ответы. И всё же остаются непонятки:

  • Какой конкректно негативный эффект может принести такой серенький траффик ?
  • Если этот негативный эффект незначителен - стоит ли заморачиваться с платными блокировщиками (которые, может, сами и являются источниками такого серого траффика), которые к тому-же 100% будут вносить временные задержки (на определение типа "свой-чужой")?
  • Если самому блокировать такие ip на уровне .htaccess не зарублю ли я реальных посетителей? Потому что у меня бывали такие ситуёвины - пытаешься зайти на какой-нибудь сайт (в основном буржуйский) а он не пускает, хотя и сайт живой. Т.е. админы того сайта наверное внесли мой ip в свой чёрный список, (быстрее всего пытаясь защититься от парсинга), а я как живой посетитель теперь не могу туда войти.

Примеры ip:

  • 23.94.247.182 Buffalo Прямой вход Провайдер: Openvirtuals
  • 192.103.252.10 South Bend Прямой вход Провайдер: Mydealercapitalcloud
  • 104.238.146.83 Dallas Прямой вход Провайдер: Vultr 3 Действия - 53 с
  • 104.168.117.6 Buffalo Прямой вход Провайдер: Colocrossing 3 Действия - 1 мин 10 сек
  • Вторник, 30 Октября 2018 г. - 16:48:59 IP: 192.103.252.105 South Bend Прямой вход Провайдер: Empire-technology 3 Действия - 1 мин 1 сек
  • Вторник, 30 Октября 2018 г. - 16:48:18 IP: 104.36.83.244 Dallas Прямой вход Провайдер: Неизвестно 3 Действия - 50 с
  • Вторник, 30 Октября 2018 г. - 16:47:49 IP: 155.94.66.229 Jacksonville Прямой вход Провайдер: Nativasaude 3 Действия - 49 с
  • 23.239.178.131 Kenmore Прямой вход Провайдер: Неизвестно 3 Действия - 56 с
  • Вторник, 30 Октября 2018 г. - 16:47:20 IP: 69.51.25.227 Rock Hill Прямой вход Провайдер: Неизвестно 3 Действия - 58 с
  • Вторник, 30 Октября 2018 г. - 16:43:30 IP: 198.23.230.217 Buffalo Прямой вход Провайдер: Colocrossing 3 Действия - 44 с
  • Вторник, 30 Октября 2018 г. - 16:43:03 IP: 154.50.138.61 Detroit Прямой вход Провайдер: Неизвестно 3 Действия - 1 мин 7 сек
  • Вторник, 30 Октября 2018 г. - 16:43:01 IP: 107.191.105.181 Atlanta Прямой вход Провайдер: Неизвестно 3 Действия - 51 с
  • Вторник, 30 Октября 2018 г. - 16:42:09 IP: 85.203.49.24 Chicago Прямой вход Провайдер: Неизвестно 3 Действия - 46 с
  • Вторник, 30 Октября 2018 г. - 16:40:23 IP: 149.71.205.42 Portland Прямой вход Провайдер: Неизвестно 3 Действия - 58 с

И шо характерно все они имеют разрешение типа 1024x768, операционку Windows 10, и браузер Chrome.

skapunker
На сайте с 15.01.2014
Offline
224
#23
Оптимизайка:
По статистике BotGuard таких нехороших ботов обычно около 5% от общего трафика бывает. Это вы ещё не видите более примитивных, которые вебвизор вообще не фиксирует.

Этот сервис рабочий вообще? Им можно сайт вверить?

А то отзывов найти не могу никакой информации.

fliger
На сайте с 17.09.2015
Offline
113
#24

Не туда смотрите:

23.94.0.0/15 - ColoCrossing

192.103.252.0/22 - empire-hosting.net

и т.д.

Блокируйте глобально. Реальные посетители оттуда не придут.

Оптимизайка
На сайте с 11.03.2012
Offline
396
#25
skapunker:
Этот сервис рабочий вообще? Им можно сайт вверить? А то отзывов найти не могу

Рабочий, но в личном кабинете ещё не всё доделано. Я пользуюсь для своих сайтов, мне нравится. Можете считать это отзывом :)

⭐ BotGuard (https://botguard.net) ⭐ — защита вашего сайта от вредоносных ботов, воровства контента, клонирования, спама и хакерских атак!
D
На сайте с 29.10.2018
Offline
59
#26
fliger:
Не туда смотрите:
23.94.0.0/15 - ColoCrossing
192.103.252.0/22 - empire-hosting.net
и т.д.
Блокируйте глобально. Реальные посетители оттуда не придут.

Благодарю. Попробую. Только мне надо блокировать те адреса, с которых приходят или те подсети, которые Вы указали выше? И ещё - какой конкретно вред может принести такой серый трафик?

Gigabajt
На сайте с 04.10.2010
Offline
122
#27
Denechka:
Благодарю. Попробую. Только мне надо блокировать те адреса, с которых приходят или те подсети, которые Вы указали выше? И ещё - какой конкретно вред может принести такой серый трафик?

Я на своих сайтах полностью блокировал трафик из левых стран т.к они генерили сильную нагрузку на хостинг. Трафик у меня русскоязычный, поэтому боятся было нечего. Главное правильно настроить, чтобы поисковых ботов не блокировало. Если у вас wordpress - советую плагин IQ geo block.

Лидогенерация в соц.сетях и контексте от 400 руб. за лид. Работаю с Telegram, Instagram, VK. Заказать услугу: https://impossible-studio.com
Bot Inspector
На сайте с 04.06.2018
Offline
9
#28

в связи с перманентным безумством РКН – блокировать по странам не очень разумно, многие в ру-сегменте сидят под vpn/socks с ип облачных провайдеров из других стран.

аудит трафика/детект склика и другие приключения Инспектора и Бота (/ru/forum/1007795)
skapunker
На сайте с 15.01.2014
Offline
224
#29

Блокировка по странам и диапазонам ip приведет к тому что поисковые роботы туда не зайдут. Что Гугл, что Яша

---------- Добавлено 31.10.2018 в 21:38 ----------

В общем я подключил двигатель к Botguard. Щас посмотрим как он с ними справится.

A0
На сайте с 30.06.2015
Offline
38
#30
Denechka:
И ещё - какой конкретно вред может принести такой серый трафик?

Насчет негативных эффектов:

1 Сторонние системы статистики, которые стоят на сайте могут принять такой траф за попытку накрутки.

2 Нагрузка на хостинг

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий