Анализ логов сайта

Nassa
На сайте с 14.08.2012
Offline
116
440

Здравствуйте, нужна Ваша подсказка.

Стоит задача, проанализировать логи, на предмет поисковых пауков, на какие страницы заходили, что включили в индекс, а что нет, Нужно понять для себя, какого типа страницы больше всего нравятся поисковым системам у меня на сайте.

Не могу найти программку, которая поможет мне упорядочить данные. WebLog Expert, просто показывает заходы роботов и всё, может где-то есть написанная на php с подробным мануалом. Подскажите, пожалуйста.

Спасибо

DV
На сайте с 01.05.2010
Offline
644
#1

В принципе, достаточно grep, awk, sed.

Если муторно разбираться, составить ТЗ и поручить тому, кто умеет.

VDS хостинг ( http://clck.ru/0u97l ) Нет нерешаемых задач ( https://searchengines.guru/ru/forum/806725 ) | Перенос сайтов на Drupal 7 с любых CMS. ( https://searchengines.guru/ru/forum/531842/page6#comment_10504844 )
S6
На сайте с 06.12.2011
Offline
158
SEO
#2
Nassa:
Здравствуйте, нужна Ваша подсказка.
Стоит задача, проанализировать логи, на предмет поисковых пауков, на какие страницы заходили, что включили в индекс, а что нет, Нужно понять для себя, какого типа страницы больше всего нравятся поисковым системам у меня на сайте.

Не могу найти программку, которая поможет мне упорядочить данные. WebLog Expert, просто показывает заходы роботов и всё, может где-то есть написанная на php с подробным мануалом. Подскажите, пожалуйста.

Спасибо

Экселем умеете пользоваться? Вполне достаточно для анализа логов.

Аудит сайта. Консультации.
Nassa
На сайте с 14.08.2012
Offline
116
#3

Эксель тупит так, что мама не горюй при большом количестве данных. Тогда вручную уж, блокнотом, но это не подходит. Сейчас буду смотреть что уважаемый DenisVS подсказал, спасибо

DV
На сайте с 01.05.2010
Offline
644
#4

Nassa, вот вам тема с примерами:

/ru/forum/730356

S6
На сайте с 06.12.2011
Offline
158
SEO
#5
Nassa:
при большом количестве данных

У вас big data? Я к тому, что парсинг нужных строк - утилитами, о которых упомянул выше отписавшийся товарищ, обработка - эксель.

Какая у вас посещаемость ресурса? Эксель влегкую справляется с миллионом строк целевой информации на один рабочий лист.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий