То есть дорого? Контентом за 30 баксов всю сеть отдадут.
starfisher, какой размер БД у вас сейчас у самого большого сайта?
Агрегатор сам собирает информацию с множества сайтов, или вы одним потоком ему откуда то уже собранную закачиваете?
Если сам - сколько секунд сейчас идет работа скрипта по сбору такой информации за один раз?
P.S> просто, может у вас проблема с объемом и линейностью движка уже, а не в хостинге особо дело и нет смысла искать хостинг, можно решить вопрос исправив слегка двиг.
ТС, если ниша серо-черная, то чего вы не держите сетку своих саттелитов для ускорения таких индексаций? Тут в соответствующем разделе вам хоть под ключ сетку, хоть просто в виде контента продадут.
А что там раскрывать то? В статье всё коротко и по делу.
Колдунщика ввели, а вот как он, тот, или иной запрос приводит к нужной форме, чтобы сформировать по нужной форме серп - это уже дело десятое.
Именно в этом и гам сейчас, что колдунщик стал менять запросы, которые раньше вели на сайты, и теперь эти запросы, после колдунщика звучат иначе, и ведут на другие сайты.
В ру сегменте вчера вечером началось, сегодня усилились различия на наблюдаемых сайтах.
По желанию, софт пробует все сервисы в порядке очереди, пока не получит распознанную капчу.
На счет баз - часто выкладывают на пиратских сайтах по дешевки серьезные базы, часто скидки можно поймать, в общем ловите, не покупайте сразу у топов, по поиску мониторьте их базы, может удастся вообще за копейки нарыть.
realcrimean, всё, что написано для без капчи - пробивает без капчи, что для брейкера - для брейкера, остальное для распознавания капч по лестнице из сервисов в списке. ПО мере отваливания, базы чистят и меняют. ТОП четверка и GrindList меняют каждые 30-60 минут базы.
realcrimean, Вот тесты четырех основных провов по GSA базам, сами выберете подходящего (они и сейчас почти все четверо в топе):
https://www.inetsolutions.org/a-case-study-of-the-top-4-gsa-ser-site-lists-providers/
Плюс GrindList базы большие очень.
А наши на krutim-all выкладывают свежие почищенные, но они небольшие сами по себе 100К+ всего ресурсов.
Жесткач. Все-таки не зря я не стал возобновлять аки у этого хостера :)
Вот я решил добавить пока чужих доменов на акканут себе, в надежде быстро их по окончании зарегистрировать, чтобы анонс уже был готов нс-ов.
Но что-то удалось забрать, что-то нет, так домены и висят чужие (пока руки не доходят убрать те что не удалось забрать) - и что и что? Сервер мне лочить за это нужно? ААААА - ОРУ! Жесть, неадекваты полные.
Как по мне, с ISP 5, то все-таки проще. Шаблон дефолтный от ISP 5 все-таки более лоялен ко всем функциям хостинга, а на шареде будет много чего закрыто и запрещено.
Kuloresov, Да, сам, но устанешь в атаке. Лучше купить основную массу, а потом уже досканивать.