vkontakt.org - сбор базы=)

Огромная. и вместо mysql юзать pgsql

А если будете развивать свой поисковик дальше(в программном плане), то использование php без перспективно.

Я гуглил насчет этого, читал нечто нейтральное - мол, когда как - Postrege действительно быстрее?

Кстати я собирался поставить DataparkSearch (http://www.dataparksearch.org/) - это решение видимо намного лучше, но я не вполне уверен, самое ли то..

dpsearch гораздо лучше sphider, он индексирует все, а не оставляет за собой кучу ссылок, ещё я заметил что sphider проверяет robots.txt только на сайтах что ты ему указал, а не на тех которые он нашел, а dp везде смотрит robots. Индексирует гораздо быстрее. Кароче ставь его и не парься :)

Это самый лучший вариант на сегодняшний день для такого ;)

ТС спасибо за поисковик желаю Вам дальнейшего и успешного развития! Добавил сайт в форму, хотелось бы узнать придёт ли бот или у вас какая то другая система?

Troyan, Бот придёт)

B3CH3D, спасибо удачной реализации и больших Вам перспектив

о каких перспективах речь идёт?

интерес быстро пройдёт, и останется у вас банальный каталог:

Нет, если не будет поисковика, не будет и банального каталога, ибо цель - именно поисковик.