Незванные Боты и безопасность сайтов:

conscience
На сайте с 09.12.2007
Offline
11
1192

Не нашел рубрики "безопасность сайтов" или "для поисковиков открывать двери" ))

Сегодня странно начался день.

В логах увидел расстрельную серию из 1302 заходов по ссылкам явно ботом.

но бот какой-то новый

агент:

Mozilla/5.0 (X11; I; Linux 2.6.22-gentoo-r8 x86_64) Gecko/20071115 Firefox/2.0.0.10

Информация об IP-адресе 194.67.18.198

по данным RIPE:

inetnum: 194.67.18.0 - 194.67.18.255

netname: AGAMA

descr: Moscow, Russia

у меня уж есть blackList из 24 грязных ботов)

Кто-нить находил такую "радость" у себя на сайте?

Сниму порчу, насланную ПС-колдунами на SEO-шаманов. Продам ашманский бубен в добрые руки.
Z
На сайте с 13.07.2007
Offline
98
#1

на прошлой недели был какой то странный бот из Ижевска выкачал весь сайт, может просто воровали контент (IP-ник где то в базе лежит ).

muhtac
На сайте с 27.09.2007
Offline
29
#2

а как закрыть доступ ботам которые не с ПС?

K
На сайте с 12.07.2006
Offline
295
Kpd
#3
muhtac:
а как закрыть доступ ботам которые не с ПС?

Если у вас виртуальный хостинг, то через .htaccess (вручную добавлять ip ботов)

RA
На сайте с 29.08.2007
Offline
88
#4

Ну, если сайт статичный, типа справочника, может кто-то просто захотел сделать себе копию на локальный компьютер=) За однократное скачивание банить смысла не вижу (всё равно скачал-ведь уже, а ip может быть и динамическим).

У меня недавно какой-то южноафриканец новый сайт скачал, причём без графики, а в юзер-агенте было что-то стандартное типа WinXP + MSIE 6.0

RA
На сайте с 29.08.2007
Offline
88
#5

дубль дубль

conscience
На сайте с 09.12.2007
Offline
11
#6
muhtac:
а как закрыть доступ ботам которые не с ПС?

надо обрабатывать тройку ip - agent - uri и пропускать только корректные заходы поисковых ботов

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий