jettZ: Есть вопросы:
- Когда добавил запросы по другим регионам Google - они не обрабатывались. Самостоятельно выяснил, что нужно добавить пять звездочек в crontab для соответствующего скрипта в файле config.ini папки load. Заработало. Почему они по умолчанию отключены? Об этом в документации ни слова :(
По умолчанию эти боты отключены, так как иностранная выдача Google нужна небольшому покупателей. Это сделано, чтобы не создавать ненужной нагрузки на сервер.
jettZ:
- Почему у бота "Google Великобритания" запрос выполняется на сервер Google.com, а не .co.uk? Это тогда бот с названием "Google СтранаПоIPВашегоСервера", а не Великобритания :(
Поправим.
jettZ: - Возможно ли добавить бота "Google США"?
Возможно. Напишите в техподдержу.
jettZ: - Почему у бота yandex_xml установлено время запуска по умолчанию с 10 до 23?
Бот по умолчанию запускается с 10 утра, чтобы в дни шторма, выдача более менее утряслась.
drafter: Не понял из документации — позиции (свои и конкурентов) снимаются по тем запросам, которые вбил пользователь или дотягиваете запросы из вордстата/статистики ли?
Позиции собираются только по тем запросам, которые пользователь добавил в систему.
alekzey: После указания этих доменов, они удалятся из старой статистики?
Если нет, то как их удалить?
Inserp: Из старой статистики ничего не удаляется. А есть ли смысл в удалении? Ведь все новые актуальные отчеты будут строиться за вычетом доменов из черного списка.
Теперь удаляется, так как информацию по таким доменам сохранять нет смысла.
alekzey: Замечательно. А то ручками задалбывает :)
Сделано. Теперь можно добавлять домены в черный список прямо из отчета "Сайты конкуренты".
---
☝ Добавлен парсинг выдачи Google в зоне .CZ (Чехия).
alekzey: После указания этих доменов, они удалятся из старой статистики?
Если нет, то как их удалить?
Из старой статистики ничего не удаляется. А есть ли смысл в удалении? Ведь все новые актуальные отчеты будут строиться за вычетом доменов из черного списка. Если все-таки нужно удалить эти домены из базы данных, напишите в техподдержку. Для Вас будет написан специальный скрипт.
alekzey:
Так же можно добавить в список сайтов-конкурентов в действия с отмеченными сайтами - "В черный список", что бы в ручную не мучиться копировать?
Хорошая идея. Сделаем.
alekzey:
И еще вопрос.
Указание в черном списке, например, wikipedia.org автоматом удаляет ru.wikipedia.org или действует только на указанный домен? Или yandex.ru и video.yandex.ru
ждем, у меня тоже с гуглом проблемки.
Обновление готово, информация здесь:
http://inserp.ru/blog/info/9_Google-Antikapcha
А что еще будет?
В этом обновлении только решение проблем парсинга и правка нескольких мелких багов. Основная разработка ведется отдельной веткой.
rast добавил 29.03.2011 в 12:52
Проблема не решилась, наверно придется менять ip 😕
Погодите немного, сейчас готовится обновление с подключением antigate.com. Сегодня-завтра выложим на сайте.
Выдает по Google "Не известно количество результатов поиска". Мне не нужно чтобы собиралось кол-во результатов, мне бы позиции и все.
Ошибка "Не известно количество результатов поиска" в данном случае означает, что результаты выдачи не обнаружены.
Посмотрите, пожалуйста, информацию здесь: http://inserp.ru/blog/info/8_Problemyi-s-Google
Будет ли дорабатываться функционал, а то с ноября никаких новостей.
На данный момент ведется работа над большим обновлением.
а что делать, если в логах пишет " Страница не загружена (cервер недоступен или бан)"?
Скорее всего, поисковая система выдает капчу. Напишите в техподдержку.
с сайтами на РФ система не работает.......
когда будет поддержка РФ?
Эта задача в планах.
Пока что не все сервисы, с которых inserp получает данные, адекватно обрабатывают .рф домены.
Есть вопросы:
- Когда добавил запросы по другим регионам Google - они не обрабатывались. Самостоятельно выяснил, что нужно добавить пять звездочек в crontab для соответствующего скрипта в файле config.ini папки load. Заработало. Почему они по умолчанию отключены? Об этом в документации ни слова :(
По умолчанию эти боты отключены, так как иностранная выдача Google нужна небольшому покупателей. Это сделано, чтобы не создавать ненужной нагрузки на сервер.
- Почему у бота "Google Великобритания" запрос выполняется на сервер Google.com, а не .co.uk? Это тогда бот с названием "Google СтранаПоIPВашегоСервера", а не Великобритания :(
Поправим.
- Возможно ли добавить бота "Google США"?
Возможно. Напишите в техподдержу.
- Почему у бота yandex_xml установлено время запуска по умолчанию с 10 до 23?
Бот по умолчанию запускается с 10 утра, чтобы в дни шторма, выдача более менее утряслась.
Не понял из документации — позиции (свои и конкурентов) снимаются по тем запросам, которые вбил пользователь или дотягиваете запросы из вордстата/статистики ли?
Позиции собираются только по тем запросам, которые пользователь добавил в систему.
После указания этих доменов, они удалятся из старой статистики?
Если нет, то как их удалить?
Из старой статистики ничего не удаляется. А есть ли смысл в удалении? Ведь все новые актуальные отчеты будут строиться за вычетом доменов из черного списка.
Теперь удаляется, так как информацию по таким доменам сохранять нет смысла.
Замечательно. А то ручками задалбывает :)
Сделано. Теперь можно добавлять домены в черный список прямо из отчета "Сайты конкуренты".
---
☝ Добавлен парсинг выдачи Google в зоне .CZ (Чехия).
В Inserp Analytics добавлены новые регионы для Google, теперь можно анализировать выдачу для стран:
После указания этих доменов, они удалятся из старой статистики?
Если нет, то как их удалить?
Из старой статистики ничего не удаляется. А есть ли смысл в удалении? Ведь все новые актуальные отчеты будут строиться за вычетом доменов из черного списка. Если все-таки нужно удалить эти домены из базы данных, напишите в техподдержку. Для Вас будет написан специальный скрипт.
Так же можно добавить в список сайтов-конкурентов в действия с отмеченными сайтами - "В черный список", что бы в ручную не мучиться копировать?
Хорошая идея. Сделаем.
И еще вопрос.
Указание в черном списке, например, wikipedia.org автоматом удаляет ru.wikipedia.org или действует только на указанный домен? Или yandex.ru и video.yandex.ru
Домен и его поддомены надо указывать отдельно.