Логи ботов как читать?

Y
На сайте с 02.06.2003
Offline
104
1152

У нас на сайте стоит счетчик и анализатор логов webalizer. Не могу понять, как смотреть логи приходящих ботов.

В webalizer есть таблица Top 15 Total User Agents. Это оно?

Но у меня там не числится почти ничего знакомого. Вот, например, данные за декабрь:

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1)

Mozilla/4.0+(compatible;+MSIE+5.0;+Windows+98;+DigExt)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+98)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.0)

Mozilla/4.0+(compatible;+MSIE+5.01;+Windows+NT+5.0)

Mozilla/4.0+(compatible;+MSIE+5.5;+Windows+98;+Win+9x+4.90)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+Alexa+Toolbar)

Mozilla/4.0+(compatible;+MSIE+5.01;+Windows+98)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+.NET+CLR+1.1.4322)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+98;+Win+9x+4.90)

Mozilla/4.0+(compatible;+MSIE+5.5;+Windows+98)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+.NET+CLR+1.0.3705)

Mozilla/4.0+(compatible;+MSIE+5.5;+Windows+NT+5.0)

Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+FunWebProducts)

Mozilla/4.0+ (compatible;+MSIE+6.0;+Windows+NT+5.1;+AUTOSIGN+W2000+WNT+VER03)

Ищу реальную проверенную партнерку для кулинарных сайтов
E
На сайте с 01.01.2004
Offline
6
#1

Посмотрите в файле настроек вебалайзера есть возможность группировать результаты топов, в том числе и user_agent.

А так результат понятен - большинство пользуется тем, что ему подсовывают.

Y
На сайте с 02.06.2003
Offline
104
#2
А так результат понятен - большинство пользуется тем, что ему подсовывают.

В каком смысле? В смысле что вебалайзер не самый лучший выбор?

Не нашла я в нем файл настроек. Нашла только файл с данными за всю историю...

C
На сайте с 19.09.2001
Offline
120
#3

Yana, если Вы пользуетесь вебалайзером, установленным на сервере, то хостер может не давать к нему доступа. В таком случае лучше задать вопрос по настройке службе техподдержки хостера.

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
А
На сайте с 14.11.2003
Offline
150
#4
Как писал Yana
У нас на сайте стоит счетчик и анализатор логов webalizer. Не могу понять, как смотреть логи приходящих ботов.

Думаю проблема в следующем. Пропишите в файле webalizer.conf (он должен лежать в папке /webalizer/) строку...

AllAgents yes
E
На сайте с 01.01.2004
Offline
6
#5
Как писал Yana

В каком смысле? В смысле что вебалайзер не самый лучший выбор?

Нет, это я мс эксплорер упомянул всуе :)

в webalizer.conf нужно прописать нечто подобное (отредактируйте на свой вкус)

GroupAgent Mozilla/1 Mozilla/1.x

GroupAgent Mozilla/2 Mozilla/2.x

GroupAgent Mozilla/3 Mozilla/3.x

GroupAgent Netscape6/6 Netscape 6.x

GroupAgent rv:0.9 Mozilla 0.9.x/1.x

GroupAgent rv:1. Mozilla 0.9.x/1.x

GroupAgent NetCap NetCaptor

GroupAgent Opera Opera 5.x/6.x

GroupAgent 4.01; Microsoft Internet Exploder 4.x

GroupAgent 5.01; Microsoft Internet Exploder 5.01

GroupAgent 5.5; Microsoft Internet Exploder 5.5

GroupAgent 6.0; Microsoft Internet Exploder 6.x

GroupAgent 6.0b; Microsoft Internet Exploder 6.x

GroupAgent Konqueror/3 Konqueror 3.x

GroupAgent Konqueror Konqueror 2.x

GroupAgent Galeon Galeon

GroupAgent Mozilla/4.01 Netscape Navigator 4.x

GroupAgent Mozilla/4.08 Netscape Navigator 4.x

GroupAgent Mozilla/4.5 Netscape Navigator 4.x

GroupAgent Mozilla/4.6 Netscape Navigator 4.x

GroupAgent Mozilla/4.7 Netscape Navigator 4.x

GroupAgent 4.0; Microsoft Internet Exploder 4.x

GroupAgent 5.0; Microsoft Internet Exploder 5.0

GroupAgent Lynx* Lynx

Если вы файл настроек не нашли, то можно создать свой, переопределив в командной строке и делать запуск по крону. Главное, чтобы логи сервера были доступны.

man webalizer

Y
На сайте с 02.06.2003
Offline
104
#6
то хостер может не давать к нему доступа. В таком случае лучше задать вопрос по настройке службе техподдержки хостера.
webalizer.conf

Нет такого файла. Наверное, действительно хостер засекретился как обычно, а разговаривать с техподдержкой бесполезно

К
На сайте с 09.06.2004
Offline
0
#7

Привет!

Поставил сквид + вебалайзер

допустим сетка 192.168.1.0/24

пдключил к нему один комп для проверки с адр 192.168.1.100

в логах сквида все пишется

запускаю вебалайзер... получаю сообщение

Cecking 192.168.1.100....not found

законил работу, но отчет не был сформирован

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий