Программа сбора статистики LI или как приумножить свой трафик

Ура! После более чем четырёх суток(!) дождался-таки результатов обработки статистики за месяц сайта с посещаемостью порядка 10тыс/день. /* Конечно - без wordstat-а и позиций/точки входа - понятно, что это нереально :) */ Т.е. спарсилось то быстро, дальше висела задача, загружая одно из ядер процессора, условно порядка семидесяти часов. Итого, опять же условно - по 2 тысячи фраз в час для условно-среднего процессора (Phenom/2.2GHz). Так что не зря я выше рекомендовал не ставить сбор статистики выше тысячи... :)

На выходе получилось полторы сотни тысяч с лишним фраз, csv-файлик размером в десять мегабайт. Сразу вспомнились проблемы ограничения Excel: 65536 строк. Решилось просто - Excel 2007 и новей. :)

Не уверен, что нужно предлагать разработчикам добавить поддержку многоядерности в такую, казалось бы, простую программу :) , однако то, что стоит оптимизировать процедуры (видимо) сортировки/исключения фраз - это точно.

а программа будет работать на английском сайте , естественно с английской статистикой LI ? если да, то какие функции в ней не будут работать? за исключением статистики вордстата?

Просьба отписаться авторов софта.

Эххе. Сижу гоняю программулину. Демо версию пока. 25 запросов, т.е. максимум демоверсии с включенными функциями точек входа, вордстата и позициями делается довольно долго. Минут этак 10-15 наверное. Даже страшно представить что будет с серьезным сайтом в фулверсии.

apple_rom, Товарищ совсем напугал такими сроками. Так что я присоединяюсь и прошу разработчиков откликнуться на просьбы оптимизации программы.

Может быть там возможно воспользоваться xml например для более быстрого парсинга или еще что нибудь. В общем пока что меня скорость работы пугает и сдерживает от покупки.

victim добавил 14.10.2009 в 10:41

Еще одно пожелание. Если в настройках проекта/профиля выключены поисковики типа mail.ru aport.ru и т.д то можно не показывать в просмотре данных эти колонки? Мешают, если честно.

victim добавил 14.10.2009 в 13:03

Было бы еще неплохо совсем чтобы история так скажем проверок хранилась в программе. Ну чтобы можно быо в интерфейсе просматривать старые проверки. Типа история как в Yazzle например. Или как в Site-Auditor или Semonitor перечислять можно долго, но везде эта возможность есть, что не является минусом, а наоборот большим плюсом.

Добрый день. Для быстрой поддержки лучше всего писать на e-mail, но раз отписали в топик, попробую вам помочь. Хотя первый раз нам сообщают о подобной проблеме. У вас точно стоит NET Framework 2 и выше? Стоит ли у вас ОС отличная от Win Xp или Vista (с последними паками)?

apple_rom, знаем о подобном, в Про версии это будет исправлено, сохранение будет происходить изначально в текстовый файл, отображения данных в самой программе более не будет.

Как писал выше, отображения данных мы полностью убираем из программы.

Тот массив данных, который после окончания парсинга предоставляет программа предназначен для дальнейшей обработки (выборка, оптимизация страниц, sape и т.д.), и откровенно говоря не вижу смысла в подобной опции.

Не совсем понял, сайт статистики один же - http://www.liveinternet.ru/, выбор англоязычных ПС есть (Google, Yahoo и т.д.), все должно работать так же как и с русскими сайтами, отличий нет.

Прошу прощения за столько долго ожидание, но программист переезжал на новую квартиру, это слегка замедлило работу. В данный момент почти все модули дописаны, осталось только прикрепить к оболочке и слепить все в одно целое. Бета версии не будет, пока мы не протестируем новый билд сами, и не исправим все баги которые всплывут, до тех пор финальная версия не выйдет. Прошу набраться терпения.

Будут ли введены какие нибудь еще ограничения в демоверсию новой версии программы кроме макс. 25 запросов?

victim сейчас кроме ограничения в 25 ключевых фраз, в демо еще отсутствует сохранение. Тоже самое будет и в демо Про версии.

У всех не работает определение позиций в yandex, или это только у меня так?

После использования программы хочу сделать несколько замечаний:

1. При сохранении данных в формат txt почему-то ставятся двойные кавычки, ссылки после этого делаются нерабочими. ("<a href=""http://урл сайта"">тест анкора</a>" при сохранении в формат csv такого не замечено.

2. В программе по умолчанию ссылки делаются на сайт с www, в случае если сайт работает без www эти ссылки перенаправляются просто на главную страницу, хотелось бы чтобы был доступен экспорт с www и без www

3. Было бы не плохо, чтобы результаты анализов хранились в программе какое-то время.

у всех программа работает или у меня только облом такой - запускаю, она делает вид что работает (внизу пишется, что проверяются поисковики...) через 15 секунд конец - все проверено. и ни одного слова. Там ЛИ.ру ничего не поменяли? или мне надо пробовать переустанавливать по новой?