MacLorend: Что-то данные с Сеопульта опять не собираются... ((
Собирается, вроде. Возможно, были временные тех. проблемы. Если не собирается, то скиньте, пожалуйста, демо-проект (из нескольких слов, которые не пробиваются, а не нескольких тысяч) и Preferences/config.xml на почту поддержки. Спасибо
KSin: Приветствую всех. У меня со вчерашнего дня вот такая ошибка появляется в журнале событий:
02.11.2011 10:41:40: ошибка NetworkMethods.LoadPage: The operation has timed out
И Вордстат не парсится.
До апдейта 1-го числа все было ровно.
LoadPage: The operation has timed out
MIND добавил 02.11.2011 в 11:44
cybaup: Добрый день, у меня следующее предложение по работе программы (не знаю было ли уже, но напишу). При получении ключей, само сабой их нужно вычитать и удалить ключи не по теме, пустышки и т.д.
Но! Когда я хочу обновить ядро, т.е. заново все спарсить, в надежде найти новый хорошие ключи, то все старые удаленные опять попадают в список и их нужно заного чистить. Т.е. в программе сделать настройку "добавлять ранее удаленные ключи по этому слову или нет". Т.е. удаленные ключи хранить, но не отображать, чтобы сверять с ними при новом парсинге.
Уже подумывали над этим. Сделаем как опцию в настройках.
Kater-INA: MIND сегодня все отлично - тот сайт который вчера у меня напарсило всего 6000 ключей с лишним (и так 2 раза) сегодня спарсилось более 77 тыс и продолжает парситься дальше
Может, сервис лежал, или что-нибудь подобное. Такие случаи очень индивидуальны и наугад их сложно четко определить. Для точного ответа нужен полный набор исходных данных.
st-key: Подскажите, пжста, как отсортировать ключи в порядке добавления (колонка дата такого не делает)?
Сортировка по дате добавления должна помогать. Правда, сейчас внесли кое-какие изменения (ранее удаленные слова, которые позже вновь добавлялись в проект могли нарушать сортировку, т.к. для них не обновлялось время добавления).
- там непонятно как парсит сначала нормально, а потом при достижении определенного количества запросов сначала начинает медленнее парсить не по 100 запросов за один раз (ну в смысле пока там зеленая круглая штучка дергается справа внизу и список пополняется) а вот конкретно на одном из сайтов после 6800 запросов вообще по одному за раз дергаются доходит до 6814 запросов и все стопориться и через некоторое время парсинг сам собой прекращается
(например сегодня это ровно одно число завтра ровно другое)
это даже меньше дневной посещаемости сайта по нч - а мне нужно статистику спарсить за 3 мес - как раньше можно было свободно по 1300 000 -1500 000 запросов напарсить
Пример дайте, пожалуйста. А замедляется оно из– за дублей. Когда программа доходит до следующего месяца, что она там видит? У вас же не меняется каждый месяц траф на 100%? А то, что число меньше суточного трафа: у вас большая часть запросов приносит не по одному визиту.
Выставил рекомендуемые таймауты + 270 прокси и все равно та же проблема.
+ ко всему на работе у меня стоит программа и с менее жесткими таймаутами она нормально парсит
а дома не хочет и не пойму в чем проблема...
Скиньте Preferences/config.xml в личку. У меня есть сомнения по поводу Ваших прокси.
Что-то данные с Сеопульта опять не собираются... ((
Собирается, вроде. Возможно, были временные тех. проблемы. Если не собирается, то скиньте, пожалуйста, демо-проект (из нескольких слов, которые не пробиваются, а не нескольких тысяч) и Preferences/config.xml на почту поддержки. Спасибо
MIND добавил 02.11.2011 в 18:59
Вопрос остался без ответа!!
Александр ответит чуть позже.
Приветствую всех. У меня со вчерашнего дня вот такая ошибка появляется в журнале событий:
02.11.2011 10:41:40: ошибка NetworkMethods.LoadPage: The operation has timed out
И Вордстат не парсится.
До апдейта 1-го числа все было ровно.
LoadPage: The operation has timed out
MIND добавил 02.11.2011 в 11:44
Добрый день, у меня следующее предложение по работе программы (не знаю было ли уже, но напишу). При получении ключей, само сабой их нужно вычитать и удалить ключи не по теме, пустышки и т.д.
Но! Когда я хочу обновить ядро, т.е. заново все спарсить, в надежде найти новый хорошие ключи, то все старые удаленные опять попадают в список и их нужно заного чистить. Т.е. в программе сделать настройку "добавлять ранее удаленные ключи по этому слову или нет". Т.е. удаленные ключи хранить, но не отображать, чтобы сверять с ними при новом парсинге.
Уже подумывали над этим. Сделаем как опцию в настройках.
vtomas, написал Вам в личку
MIND сегодня все отлично - тот сайт который вчера у меня напарсило всего 6000 ключей с лишним (и так 2 раза) сегодня спарсилось более 77 тыс и продолжает парситься дальше
Может, сервис лежал, или что-нибудь подобное. Такие случаи очень индивидуальны и наугад их сложно четко определить. Для точного ответа нужен полный набор исходных данных.
А можно ли сменить привязку программы к компьютеру?
Да. Напишите заявку на замену с указанием нового HID на почту поддержки.
Подскажите, пжста, как отсортировать ключи в порядке добавления (колонка дата такого не делает)?
Сортировка по дате добавления должна помогать. Правда, сейчас внесли кое-какие изменения (ранее удаленные слова, которые позже вновь добавлялись в проект могли нарушать сортировку, т.к. для них не обновлялось время добавления).
при применении фильтра в KEI вылетает с ошибкой: Возникла критическая ошибка при получении данных.
dr_dimaz добавил 01.11.2011 в 01:32
да, можно и так сделать.
Спасибо. Пофиксим
MIND добавил 01.11.2011 в 05:49
В фильтрах пресеты появились это уже хорошо.
Теперь добавьте возможность использовать больше полей одновременно (сейчас только 2).
И фильтры уже будут иметь более менее неплохую функциональность.
А то получаеться старые фильтры высоко планку задрали, а этим еще к ней тянуться и тянуться.
Добавим это дело
чего то опять надежд не оправдало
- там непонятно как парсит сначала нормально, а потом при достижении определенного количества запросов сначала начинает медленнее парсить не по 100 запросов за один раз (ну в смысле пока там зеленая круглая штучка дергается справа внизу и список пополняется) а вот конкретно на одном из сайтов после 6800 запросов вообще по одному за раз дергаются доходит до 6814 запросов и все стопориться и через некоторое время парсинг сам собой прекращается
(например сегодня это ровно одно число завтра ровно другое)
это даже меньше дневной посещаемости сайта по нч - а мне нужно статистику спарсить за 3 мес - как раньше можно было свободно по 1300 000 -1500 000 запросов напарсить
Пример дайте, пожалуйста. А замедляется оно из– за дублей. Когда программа доходит до следующего месяца, что она там видит? У вас же не меняется каждый месяц траф на 100%? А то, что число меньше суточного трафа: у вас большая часть запросов приносит не по одному визиту.
MIND добавил 31.10.2011 в 23:17
Но без конкретного примера тут точно не сказать
На новой версии не удаляет созданную вкладку.. http://clip2net.com/s/1hxML
Исправлено. Спасибо