Поиск в базе

Z
На сайте с 03.01.2004
Offline
32
#21
lagif:

Наблюдение: по запросам на первом месте одна порнуха... :(

А среди кого урл поисковика распространялся ? :)

Шепните его здесь, и узнаете "большные" запросы оптимизаторов :d

I
На сайте с 26.05.2001
Offline
64
#22

Число сайтов не является показательным. С точки зрения yandex.ua в УАнете примерно 40-50 млнов страниц. Запихнуть на один сервер в принципе можно, но будет тормозить, особенно если индексация тоже на том же сервере вертится :-)

lagif:
Vyacheslav Tikhonov, Индекс... скажем так, больше гига... сайтов - сейчас под 60 тыс. (это еще не весь уанет), страниц... примерно раз в 20 больше (когда все утсаканится и индекс будет более полным - можно будет сказать точней). Естественно, контент занимает больше, чем индекс. :)
Сейчас критически не хватает оперативки...

akor, локально - имелся в виду поиск по локальному сайту, а не по Сети или ее сегменту... для таких целей mysql подойдет вряд ли.
pelvis, все верно, но хранить в БД только это - недальновидно, имхо...

Наблюдение: по запросам на первом месте одна порнуха... :(
Приходите завтра, завтра будет! (http://itman666.livejournal.com)
VT
На сайте с 27.01.2001
Offline
130
#23
Число сайтов не является показательным. С точки зрения yandex.ua в УАнете примерно 40-50 млнов страниц

Интересно было сравнить с объемом Меты и Бигмира.

Запихнуть на один сервер в принципе можно, но будет тормозить, особенно если индексация тоже на том же сервере вертится :-)

Если на этом сервере будет еще и нагрузка от запросов нескольких тысяч пользователей, то даже теоретически невозможно - памяти не хватит.

pelvis
На сайте с 01.09.2005
Offline
345
#24

lagif, это понятно, но я ведь про маленькую локалку написал

Продаю вывески. Задарма и задорого (https://www.ledsvetzavod.ru/)
I
На сайте с 26.05.2001
Offline
64
#25

Ну понятно, что это решение для 2-3 запросов в минуту.

Чтобы отвечать на несколько запросов в секунду придется поставить примерно 30 гигов ОЗУ :-)

Мета, на первый взгляд, в несколько раз меньше Яндекса.

lagif
На сайте с 15.12.2004
Offline
30
#26

Сейчас нагрузка очень маленькая: около 2000 запросов в день. Боюсь предположить, что будет, когда контора начнет поиск ракручивать... но - тормоза уже чувствуются, даже при том, что http-сервер стоит на другой машине.

Собственно, 40-50 млн. страниц - очень много. Нам не справиться с таким количеством, поэтому глубина прочтения одного сайта у нас пока ограничена (как и количество однотипных динамических страниц).

А URL - он и не скрыт. Просто непопулярен, и мне лично сейчас это очень выгодно :D Будем надеяться, что о поиске вскоре узнают :)

Это тоже пройдет...
I
На сайте с 26.05.2001
Offline
64
#27

Ну, ок, надеемся тогда, что в форуме появится тема: открыт новый украинский поисковик. И, вообще, удачи, она вам очень понадобится. Потому что это нешуточное занятие - бодаться с такими титанами как Гугль и Яндекс.

lagif:
Сейчас нагрузка очень маленькая: около 2000 запросов в день. Боюсь предположить, что будет, когда контора начнет поиск ракручивать... но - тормоза уже чувствуются, даже при том, что http-сервер стоит на другой машине.

Собственно, 40-50 млн. страниц - очень много. Нам не справиться с таким количеством, поэтому глубина прочтения одного сайта у нас пока ограничена (как и количество однотипных динамических страниц).
А URL - он и не скрыт. Просто непопулярен, и мне лично сейчас это очень выгодно :D Будем надеяться, что о поиске вскоре узнают :)
lagif
На сайте с 15.12.2004
Offline
30
#28

itman, Мы с ними не бодаемся: силы не те. :D C Яндексом, скажем, уже понемногу сотрудничаем :)

VT
На сайте с 27.01.2001
Offline
130
#29
C Яндексом, скажем, уже понемногу сотрудничаем

А, ну тогда ссылка известна - Online.ua

lagif
На сайте с 15.12.2004
Offline
30
#30

Vyacheslav Tikhonov, :D

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий