Поиск по большим объемам информации.

Такую базу в пору разнести на несколько шустрых серверов.

Штук эдак на десять :)

http://sphinxsearch.com/

А с redis кто нибудь имел дело?

На ... количестве серверов желательно. Всё зависит от задач, пхп значительно дольше работает с этим дльше чем десктоп. Единственное что могу посоветовать так это грамотно использовать индексы. Касаемо какую базу использовать - однозначно mysql, если у конторы с финансированием нет проблем, то можно закзать оптимизацию у самих mysql-евцев.

З.Ы. Сам работал максимум с 50 гигабайтными базами....

Хотя что там у вас на 20-30ТБ... вы бы хоть проект показали... либо описали содержание таблиц!

aka_Puhh, как грамотное использование индексов сможет помочь сделать полнотекстовый поиск по 20 терабайтам данных? :)

Если нужен полнотекстовый поиск, то Redis не подойдет. Как посоветовал Stek, смотрите в сторону Sphinx. Хотя даже он будет индексировать вашу базу дня 4.

Посоветую вам обратиться к специалистам, чтобы они подобрали подходящую систему и настроили ее. При таких объемах решение из коробки эффективно работать не будет.

Расскажите как грамотно использовать индексы при полнотекстовом поиске.

Ну дня 4 индексации не так много,главное скорость поиска По таким объемам информации.

Это сколько надо серверов чтоб быстрый поиск был по индексу и чтоб mysql при этом не рухныл.

Может быть oracle будет лучше справляться?

Быстрый вопрос по Sphinx

Базу пастухова на несколько гиг можно с текстового файла загнать туда ?

Или нужен конвертов ?

Или сначала в mysql (точно рухнет) а потом сфинкс натравить на мускуль ?

СПС

Мускуль тут точно не борец. ИМХО, oracle, или mssql+olap+fulltextsearch

Но тут однозначно одним сервером не обойтись.

Теперь и незнаю с чем работать mysql+sphinx или oracle.

Надо бы определиться что будет работать лучше и быстрее.