MyOST: т.к. сейчас файл проекта в 500-600 мб, со словами, считаем в памяти висит, при парсинге, если еще и в 50-100 потоков парсить, то он порядка 1гб+ будет занимать.
Не обязательно всё хранить в памяти. При большом количестве запросов, их можно хранить на диске, а в память подгружать только тот кусок, который на экране у пользователя. Фактически, проект будет состоять из частей (страниц), а визуально отображаться, как сейчас (единым списком).
Xenu's Link Sleuth? Оно?
http://key-collector.reformal.ru/proj/?ia=122143
Сайты вернулись в индекс, позиции на место. Голова даже прошла. Вроде Яшку отпустило... ☝
Вот и Платончег проснулся:
http://platon.ya.ru/replies.xml?item_no=1822
😂
http://platon.ya.ru/replies.xml?item_no=1822
Key Collector нужен для подбора запросов. Сейчас это, фактически, единственный подобный полноценный софт.
CS Yazzle нужен для анализа выдачи, ссылок и т.п.
Эти программы просто для разных целей.
http://wordpress.org/extend/plugins/search.php?q=forum+crosspost
т.к. сейчас файл проекта в 500-600 мб, со словами, считаем в памяти висит, при парсинге, если еще и в 50-100 потоков парсить, то он порядка 1гб+ будет занимать.
Не обязательно всё хранить в памяти. При большом количестве запросов, их можно хранить на диске, а в память подгружать только тот кусок, который на экране у пользователя. Фактически, проект будет состоять из частей (страниц), а визуально отображаться, как сейчас (единым списком).
Постраничная разбивка данных в таблице - это хорошо или плохо, как по-вашему?
Плохо. Зачем это нужно?
Так да или нет?)
Нет.
..................
Disallow: /*?