Создание паука/робота/краулера

D
На сайте с 19.09.2008
Offline
0
696

Необходимо разработать новое или адаптировать существующее решение.

ОС: FreeBSD или Linux. Язык: C/C++

Задача робота – обход русскоязычного сегмента Интернет, загрузка собранных данных в БД. Режим работы робота – круглосуточно, ежедневно. Требуется эффективная многопоточная реализация, позволяющая обходить до нескольких десятков млн. страниц в сутки.

Требуется исполнитель, имеющий значительный опыт разработки подобных программ!

Сроки исполнения ~ 1 месяц.

Подробности и ТЗ - по запросу, в личной переписке.

Bor-ka
На сайте с 16.11.2004
Offline
256
#1

dimitrik,

Оффтоп: может Вам лучше Вебальту купить? или ее уже купили, не в курсе.

Dreammaker
На сайте с 20.04.2006
Offline
569
#2
Bor-ka:
может Вам лучше Вебальту купить?

Тоже кстати об ней подумал был когда прочитал, правда, немного в другом ракурсе.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий