Key Collector - автоматизированная система анализа семантического ядра. Часть 13

Одна из лучших софтин за последние множество лет в РУ так точно. Использую для выполнения больших спектров задач. Радует скорость работы с большим объёмом более 1 млн запросов для кластеризации

и вордстат, и директ

http://www.key-collector.ru/news/wordstat-direct2.php

Пожалуйста, подскажите, как ускорить парсинг? Делала анализ неявных дублей, 40 тыс.запросов через Yandex.Wordstat (лупа) парсились 15 суток. Да, 40 тыс. - цифра огромная, но это было для расширения кругозора )) Так вот 15 суток для такого объема - долго, в пределах нормы, очень медленно? Количество прокси в работе - 7 шт.

Спасибо )

Всем привет. Загрузил 2000 запросов, далее запустил через Яндекс директ проверку частотности. Проблема в капче, в среднем появляется каждый 18 запрос. Это нормально? Просто года полтора такого не было, почти без капчи все работало и быстрее.

Как вообще лучше собирать базовую частотность запроса, через яндекс директ или через лупу Ворд Стат?

лет 5 назад ссылки нормально отрабатывали, но все меняется )

конечно директ

возможно аккаунт закапчеван или ип с плохой кармой, либо просто таймауты настроены очень малые.

Тут можно гадать на счет причин, но лучше обратиться с конкретными натсройками в техподдержку.

речь о частотности? Если так, то это можно было сделать за минут 20 в худшем случае, используя четверный способ http://www.key-collector.ru/news/wordstat-direct2.php

Нашел причину. Капча слалась к английским работникам, они ее не правильно разгадывали каждый раз. После 5 капчи подряд аккаунт уходил на отдых на 30 минут, потом делал пару удачных запросов и снова капча , как он в бан не улетел за ночь )). В общем поправил и все проверилось минут за 30.

Интересно разработчики будут как-то решать вопрос для житетелей Украины, в связи с блоком Яндекса

IPv6 прокси поддерживаются?

разработчиками еще со старта программы заложены все возможности для работы в таком варианте, а именно во вкладке сеть есть настройка прокси-серверов.

Покупать за свой счет прокси-сервера для раздачи результата придется именно пользователям, т.к. это не касается программы. Программа как работала, так и работает с яндексом, то что яндекс заблокирован на Украине, увы, не вопрос разработчиков программы, нам эта сфера не подвластна.

Повторюсь, все возможности для обхода этой блокировки уже заложены в программу, с самого начала (используйте прокси-сервера), именно так сейчас и работают большинство пользователей с Украины.

для поисковой выдачи да (если о яндексе или гугле), если о вордстате и директе, то ipv6 и директ с вордстатом не дружны.

Спасибо, да, о частотности. Для работы с неявными дублями разве можно использовать этот четвертый способ? Собираем же "[!QUERY]"[YW]?

Но вот почему-то у меня даже базовая частота не собирается со скоростью 1 000 фраз/минута, как об этом говорится по вышеприведенной ссылке: "В этом случае программа использует интерфейс Yandex.Direct для получения необходимых данных, за счет чего достигается огромная скорость съема данных (до 1000 фраз в минуту для 1 потока)."