SERP Parser - мониторинг позиций - 2

Сколько можно заружать ключевиков, что бы программа не зависала и потом не выключалась сама

wir, сообщите в поддержку(support@serpparser.ru) подробности проблемы.

вообще-то у меня вопрос, давайте еще раз:

Сколько можно заружать ключевиков, что бы программа не зависала?

wir, вот оно что, теперь ясно. Я сейчас бегу в банк, беру кредит, закупаю парк компьютеров с разной конфигурацией, устанавливаю на них различные версии Windows, и начинаю на всех компьютерах добавлять в программу по одному ключевику, после каждого добавления буду тестировать все функции программы, обязательно сообщу как только появятся результаты.

Подождете, или сообщите в поддержку на каком количестве фраз и в каком месте зависает программа?

Добрый день.

Подскажите пожалуйста самые приемлемые настройки использования прокси, капчи и таймаутов для сбора позиций в Google и Яндекс?

На данный момент собираю 10k запросов, через 70 прокси приобретенных на Fineproxi, локальное подключение - отключено, капча распознается в Capthabot, стоит таймаут 300с. через 200 запросов. Google бан ловит практически сразу, Яндекс подбираясь к 4000 тоже отчаянно начинает ловить бан. При этом разумеется жрет неимоверное количество капч, уходит по 5-8$ за сбор позиций.

Есть ли какие нибудь более разумные варианты настройки программы или может быть следует использовать менее заезженные прокси и где их в таком случае взять?

Поделитесь своим опытом работы с большим ядром... Заранее огромное спасибо!

Поделитесь своим опытом работы с большим ядром... Заранее огромное спасибо!

Тоже этот вопрос интересует...

Alert_isi, попробуйте увеличить задержки (от 3000 до 6500), пауза 30с через 50 фраз. По капчам, Вы настройки в IE не меняли, куки не отключали?

Благодарю за ответ.

Куки не отключали, настройки IE по умолчанию. Буду пробовать увеличить тайминги по вашей рекомендации, чуть позже выложу отчет по результатам.

Хотел еще поинтересоваться, не будет ли более результативным отказаться от распознавания капчи и использовать локальное подключение + прокси (2000-3000шт.), при этом оперируя таймингами?

---------- Добавлено 22.06.2013 в 22:22 ----------

Тоже этот вопрос интересует...

С радостью помогу ))

Что именно вас интересует?

Alert_isi, к сожалению, большие объемы не снимаю, ежедневно делаю проверку всех ПС и сервисов, но на небольших объемах, до 100 фраз.

По поводу отказа от капчи - только эксперимент, зависит от качества прокси.

Плюс попробуйте отключить галочку "Разрешить работу нескольких экземпляров в одном подключении" для всех ПС (меню Инструменты\Настройки\Движки\[ПС]), это заставит программу назначить на каждый поток отдельный IP.

Hush, было пару страниц назад, лень почитать?

/ru/forum/comment/11853752