Не будь голословным. Используйте быстрые SSD-накопители, чтобы получить отчеты по входящим и исходящим ссылкам - Doorways & Cloaking

Яндекс и ядро

Xpyct10 · 2009-07-28T19:27:45.0000000Z

Записи всех типов сегодня, 28 июля 2009 года, вторник Обновление оборудования на MegaIndex сегодня, 22:28 Популярность проекта и растущие объёмы информации сделали своё. Последние 2 месяца нагрузка на старый фронт-сервер MegaIndex стабильно держалась на уровне 100%. Теперь мы успешно решили эту проблему. Производительность нового фронт-сервера в 15 раз выше, что позволит нам обрабатывать большие объемы информации и предоставлять данные более оперативно. Также был сильно оптимизирован процесс обработки страниц на индексирующих серверах. Уже совсем скоро на MegaIndex появятся более полные и свежие данные индексаторов, которые теперь будут обновлять на регулярной основе. Новые версии базы будут выгружаться 2 раза в неделю. (Текущая актуальность базы - 7 июля 2009 г.) В настоящий момент мы индексирует 3 100 000 доменов. Диапазон времени переиндексации доменов от 7 до 24 дней. К сожалению, технически мы не имеем возможности давать доступ к рабочей базе индексатора. И данная проблема связана с тем, что скорость работы даже самых быстрых винчестеров очень низка. Для генерации отчетов по входящим и исходящим ссылкам мы используем быстрые SSD-накопители, которые имеют в 10-100 раз меньшее время доступа к данным, чем обычные жесткие диски. Как раз синхронизация с этими накопителями и будет производиться 2 раза в неделю. В настоящий момент мы сканируем поисковую выдачу по 310 000 запросам. Это уже достаточно много, однако останавливаться мы на этом не будем. В настоящий момент мы собрали и обрабатываем базу всех популярных поисковых запросов. Таких мы нашли более 4 000 000 штук. Мы разработали уникальный алгоритм, который позволяет отделять реальные поисковые запросы от спама поисковой статистики. Кроме того все поисковые запросы уже тематизированы, что позволит получить наиболее полное семантическое ядро для любого сайта.

F0

9

fanarik007

28 июля 2009, 19:46

#11

-= Serafim =-:
Кому?

По-моему, ни ТС, ни все кто отвечал не поняли о чем речь шла в сабже.

ну так разъясни, не будь голословным...

101

unemployed

28 июля 2009, 19:47

#12

Для танкистов

позволяет отделять реальные поисковые запросы от спама поисковой статистики

Для генерации отчетов по входящим и исходящим ссылкам мы используем быстрые SSD-накопители

тут все написано

-S

1354

-= Serafim =-

28 июля 2009, 19:48

#13

fanarik007:
ну так разъясни, не будь голословным...

Я в предыдущем посте написал. Учитесь читать.

101

unemployed

28 июля 2009, 19:52

#14

<жуткий оффтоп>как говорил мой препод " Не слышу слова "А............"</жуткий оффтоп>

F0

9

fanarik007

28 июля 2009, 19:52

#15

_ttp://yandex.ru/yandsearch?clid=14585&text=%D0%BC%D0%B5%D0%B3%D0%B0%D0%B8%D0%BD%D0%B4%D0%B5%D0%BA%D1%81

Мдя, действительно похоже поторопились с выводами...:D

X1

104

Xpyct10

28 июля 2009, 19:55

#16

За то хоть разрядили обстановку ))

LA

105

lord_alfred

28 июля 2009, 21:09

#17

Что этот мегаиндекс делает то? Прочитал на их сайте - ничего не понял... Или может от того, что только проснулся?

F0

9

fanarik007

28 июля 2009, 21:19

#18

lord_alfred:
Что этот мегаиндекс делает то? Прочитал на их сайте - ничего не понял... Или может от того, что только проснулся?

да ты главное лицо поумнее сделай, мне помогает 😂

X1

104

Xpyct10

28 июля 2009, 21:23

#19

Вот красавцы и кто такой Умный в репу уже стукнул ??

F0

9

fanarik007

28 июля 2009, 21:31

#20

Xpyct10:
Вот красавцы и кто такой Умный в репу уже стукнул ??

Во сачки, подписываться бояться 😂 хорошо хоть мне никто не стукнул, да хотя мне по... :p

Зачем быть уникальным в мире, где все можно скопировать

Курс биткоина превысил $50 тысяч

Яндекс и ядро