Да, в последних версиях парсинг стал пошустрее работать, но на больших проектах тормозилово все равно присутствует, равно как и проблемы со стабильностью. Экспериментально установил, что с 40к кеев прога еще нормально (сутки-другие) держится, но с 80к кеев падает раз в сутки стабильно. Работаю под вмварью, так вместе с гостевой осью (XP) падает и хост (Ubuntu) 😮, причем падает мордой в грязь намертво. :)
Отправил в личку.
Уже пару дней, как наблюдаю при старте ошибку 403 при проверке обновлений.
Это нормально?
Бага: в настройках Wordstat при попытке ввести более чем 99 потоков путем нажатия стрелки вверх прога выдает предупреждение и иногда падает, хочет в мелкософт пожаловаться, но не всегда.
Еще один непонятный феномен: при длительном парсинге (порядка суток) больших списков по 30-50к ключевых слов, прога падает, причем так, что роняет целиком весь комп. Работаю под VMware, хост Ubuntu, гостевуха WinXP HE, так валит комп целиком и полностью, подымает его после этого только аппаратный ресет. Уже несколько раз замечал.
Хм...
globatel.ru не резолвится, купленные SEO-прокси недоступны.
Что бы это значило?
Те при десяти потоках, каждый новый запрос берет следующий прокси из всего списка и так по кругу? Те работают все 50 ипов?
Глобалтеловские. Взял 50 штук на месяц.
Вопрос по использованию прокси серверов.
В списке 50 прокси серверов, парсю вордстат в 10 потоков.
Какие из серверов при этом используются? Первые 10 по списку? Случайные 10? Прокси выбирается случайно на каждый запрос?
Anton добавил 13.04.2011 в 13:58
Тулза периодически поругивается в лог:
13.04.2011 13:48:24: процесс парсинга дополнительных частотностей начат 13.04.2011 13:50:15: Невозможно соединиться с удаленным сервером 13.04.2011 13:50:16: Невозможно соединиться с удаленным сервером 13.04.2011 13:51:01: Время ожидания операции истекло 13.04.2011 13:51:53: Время ожидания операции истекло 13.04.2011 13:51:56: Время ожидания операции истекло 13.04.2011 13:52:18: Время ожидания операции истекло 13.04.2011 13:53:30: Время ожидания операции истекло 13.04.2011 13:53:31: Время ожидания операции истекло 13.04.2011 13:53:34: Время ожидания операции истекло 13.04.2011 13:54:24: Невозможно соединиться с удаленным сервером 13.04.2011 13:55:01: Время ожидания операции истекло
Еще вопрос: а при проверке доступности прокси все запросы отправляются одновременно или по очереди?
Спасибо! Разобрался.
Тему не читал, ибо ее размер внушает... :)
Вот какой вопрос: При парсинге вордстата по списку ключей из текстового файла KC добавляет в список все, что находит в левой колонке, а мне бы только частотность проверить и список лишними ключами не портить. В настройках ничего похожего не нашел. Возможно ли это как то сделать?
Очень вовремя по теме: /ru/forum/617341
