Key Collector - автоматизированная система анализа семантического ядра. Часть 4.

B
На сайте с 21.04.2011
Offline
4
#1051

Народ подскажите плиз с проблемой.

Объемы работы последнее время возросли, и прога стала выдавать в журнале следующее: 23.08.2011 18:11:39: ошибка NetworkMethods.LoadPage: The request was aborted: The connection was closed unexpectedly.

23.08.2011 18:11:39: при загрузке страницы Yandex.Wordstat [после ввода капчи]

Выполняем повторную (1) попытку загрузить информацию

Решил заюзать многопоточность и по ссылке с сайта seom.info купил на месяц http://globatel.ru/hosting/seohosting/. Купил 10 ипов, в итоге скорость конечно возросла, но постоянно выдает капчи, в итоге работать не возможно. Такое ощущение что при использовании основного ip было лучше, капчу выдавал только при сборе кеев яндекса.

Что посоветуете, покупать дополнительно Антигейт, или может еще варианты есть?

Например сервис http://seo-proxy.ru, он решит проблему только работы через несколько потоков и капчи Яндекса? или Антигейт все равно нужно покупать?

Fruit
На сайте с 15.07.2008
Offline
166
#1052

Лучше выставлять нормальные задержки между запросами и ставить работать на ночь.

B
На сайте с 21.04.2011
Offline
4
#1053
Fruit:
Лучше выставлять нормальные задержки между запросами и ставить работать на ночь.

Какие параметры задержки лучше выставлять тогда?

Проблема в том что большинство задач требуют текущего решения.

По сути программа нужна для работы в офисе с 9 до 18

Fruit
На сайте с 15.07.2008
Offline
166
#1054
basusek:
Какие параметры задержки лучше выставлять тогда?

Проблема в том что большинство задач требуют текущего решения.
По сути программа нужна для работы в офисе с 9 до 18

Это от ip'шника зависит. Мне хватает 1000 до 2000 мс в один поток, чтобы ночью работало без сбоев. Решение в офисе? Ну если это составление предложения для клиентов, то можно увеличить нижнюю планку частотности, чтобы парсилось меньше ключей.

B
На сайте с 21.04.2011
Offline
4
#1055
Fruit:
Это от ip'шника зависит. Мне хватает 1000 до 2000 мс в один поток, чтобы ночью работало без сбоев. Решение в офисе? Ну если это составление предложения для клиентов, то можно увеличить нижнюю планку частотности, чтобы парсилось меньше ключей.

Это без капчи?

В основном для клиентов, что то по внутренним проектам, как правило очередь задач на парсинг пустой не бывает, поэтому и задумался о платных доп возможностях.

[Удален]
#1056
basusek:
Это без капчи?

В основном для клиентов, что то по внутренним проектам, как правило очередь задач на парсинг пустой не бывает, поэтому и задумался о платных доп возможностях.

у меня антигейт норм справляется. 1$ за 1000 капчей вполне приемлемо.

Mastak83
На сайте с 01.09.2009
Offline
45
#1057
Mastak83:
Столкнулся с первой проблемой (аккаунты новые, логин-пароль верны, с браузера входит во всех системах):

при запуске парсинга Сеопульта, Вебэффектор или Мегаиндекса пишет:

19.08.2011 2:45:14: не удалось авторизоваться в сервисе WebEffector. Возможно, указана неправильная пара логин-пароль
19.08.2011 2:45:14: процесс сбора статистики WebEffector завершен

MyOST:
Mastak83, конфиг нужен, посмотрим где там ошибка в логинах и паролях

Выслал конфиг-файл в понедельник. Насколько долго может затянуться процесс выявления причины проблемы?

Иконки (http://www.plati.ru/asp/pay.asp?idd=1187434) для программы Key Collector (http://seom.info/tag/key-collector/)!
limoshkaa
На сайте с 31.07.2010
Offline
85
#1058

1)Запускаю парсить статику Solomona примерно хотябы 100 ключей система стоит и действие не наблюдаю.Как быть?

2)Можно ли в софте реализовать экспорт с статики яши в txt (ключ:количество запросов) как это деалет магадан.

MyOST
На сайте с 22.01.2006
Offline
559
#1059
limoshkaa:
1)Запускаю парсить статику Solomona примерно хотябы 100 ключей система стоит и действие не наблюдаю.Как быть?

что в журнале пишет?

если ничего - то работает, дальше от соломоно зависит скорость, может и часами висеть

limoshkaa:
2)Можно ли в софте реализовать экспорт с статики яши в txt (ключ:количество запросов) как это деалет магадан.

вопрос - зачем?

Ну просто ради 1-2 пользователей делать функцию - отодвинуто по приоритету будет

Mastak83:
Выслал конфиг-файл в понедельник. Насколько долго может затянуться процесс выявления причины проблемы?

до 72 часов, в зависимости от нагрузки, конкретный баг разбирается

Ваш уже в работе

Блог (http://seom.info/) | Ты уже SEO профессионал? (http://www.key-collector.ru/) Развиваем семантику более 8 лет! ()
MIND
На сайте с 08.03.2007
Offline
238
#1060
Mastak83:
Выслал конфиг-файл в понедельник. Насколько долго может затянуться процесс выявления причины проблемы?
Проверьте правильность заполнения формы:
Неверные данные

Вот что пишет эффектор, например, при попытке зайти из под акка, прописанного Вами в конфиге. Так что все верно программа подсказывает.

MIND добавил 23.08.2011 в 22:32

2)Можно ли в софте реализовать экспорт с статики яши в txt (ключ:количество запросов) как это деалет магадан.

Можно. В настройках экспорта оставляете только колонку фразы и частотности, ставите разделитель : и убираете экранирование. Вуаля.

Key Collector - автоматизированная система анализа семантического ядра (/ru/forum/863504)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий