Как распознать живых посетителей?

90

las_zt

15 апреля 2006, 10:57

1340

написал свой скрипт по ведению статистики :idea: , стала проблема отличия посетителей сайта от роботов по имени агента :confused: ...

например:

Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8) Gecko/20051111 Firefox/1.5

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)

Opera/9.0 (Windows NT 5.1; U; en)

msnbot/1.0 (+http://search.msn.com/msnbot.htm)

Yandex/1.01.001 (compatible; Win16; I)

StackRambler/2.0

Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

Подскажите кто знает, заранее благодарен.

интересно по каким алгоритмам работают другие сервисы...

A

176

alexseo

15 апреля 2006, 11:08

#1

IP адрес и обращение к robots.txt

90

las_zt

15 апреля 2006, 11:30

#2

alexseo:
IP адрес и обращение к robots.txt

в сети много разных роботов, не реально наверное вести базу IP адресов роботов..

если агент обратился к robots.txt, его можно отнести к "роботам"

а что делать если робот игнорирует етот файл?

A

176

alexseo

15 апреля 2006, 11:40

#3

Скрипты клоакинга делают это очень успешно. Проверяйте по всем параметрам, но все равно не будет 100% точности, юзер агент легко подменить.

A

176

alexseo

15 апреля 2006, 11:54

#4

Вот здесь еще посмотрите http://www.iplists.com/