Скорость во многом зависит от качества связи и количества ссылок на страницах. Когда тестировали программу, гоняли её по сайту, где было более 100 ссылок на каждой странице, всего 1200 страниц и 140000 ссылок. Весь цикл (скачивание и обсчет 6-ти итераций) занял в итоге менее часа - на данный момент это лучшее, чего удалось добиться.
Многопоточность будет, но скорее всего будет в серверной версии программы, или уже в версии 2.0
Sterh добавил 09.09.2008 в 12:03
Спасибо за отзыв и активное участие в тестировании :) Задумок еще много, так что обязательно пригласим к дальнейшему тестированию :)
Ну, вообще то уже покупают... О начале тестирования и приглашении тестеров было объявлено почти месяц назад.
В демо версии и "урезать" то особо нечего.
Скрин из хелпа (на циферки внимания не обращайте - это пояснения к интерфейсу):
[ATTACH]20706[/ATTACH]
На скриншоте страницы отсортированы в порядке убывания условного веса.
Нет, изменения программа не прогнозирует, но дабавляя и закрывая ссылки довольно быстро понимаешь, что именно нужно сделать, дабы добиться наилучшего результата.
--------------------------
Да, совершенно забыл:
Все обновления до версии 2.0 (исправление выявленныз багов, глюков, учет небольших пожеланий, и т.д.) буду высылаться бесплатно!
А можно УРЛы в личку? До сего момента проблем с robots.txt замечено не было.
С кодировкой да, бывает, пока не можем понять на чем именно она спотыкается, но в большинстве случаев кодировка идет win1251, а во втором большинстве она определяется автоматом :)
Затачивайте под наиболее важное и конкурентное. Остальные можно и по внутренним раскидать.
Без www у них версия "Лайт" :) Там переключатель есть внизу.
Несложный краулер, реагирующий только на 404 ошибку, написать не сложно. Тут скорее не поисковик, а оригинальный метод продвижения проекта.
А вообще мне понравилось. Идея весьма не плохая :)
ИМХО не стОит так делать. А под низкочастотники пишите (или закажите) что-то вроде обзоров. Типа "Купить дешево квартиру в Москве - миф или схема мошенничества!?" :)
Угу, это понятно.
А если следовать этой логике, то у всех, поставивших код Сапы должен безумно вырасти трафик. 😮
Работает, и работает лучше чем одна входящая и одна исходящая
Думаю програмка выйдет к 1 сентября (это без намека на школьнегов 😆), Вам обещаю предоставить её бесплатно за отзыв :)