SiteControl - панель контроля за сайтами - 2

Из пожеланий:

1. Какое то избранное сделать, что бы не копать, и не выбирать из кучи запросов.

2. Сохранять настройки отображения. А то у меня слетают все время - по 10 штук показывает.

3. Версию для ipad (верстка и при смене закладки в браузере парсинг останавливается, реально сделать на стороне сервера обработку и не рвать сессию при смене вкладок самого браузера)

Подскажит, есть ли ваша система как сервис? Не хочу ничего настраивать и мучится с прокси.

Это самое большое обновление с момента начала публичной беты.

Основные силы были потрачены на изменение логики работы связки ПП с сайтами и группами, уход от представлений в модуле позиций, доработка работы с региональной выдачей Google, оптимизация скорости системы (процесс длительный, нынешний результат только начало). Более подробно ниже:

Ядро 3.22

- Yii Framework обновлен до последней версии 1.1.14.

- Доработана система кэширования

- Доработана работа маркета

- Исправлены миграции

- Мелкие правки, их очень много

Модуль — проверка позиций 3.24

- Изменена работа с профилями парсинга. Первоначальный вариант, который казался изначально хорошим гибким решением, на практике оказался очень неудобным и непонятным для пользователей.

Мы приняли решение переписать эту часть модуля, так как это касается большинства кода модуля, то переделка очень глобальная. Предупреждаем, что могут быть ОШИБКИ, перед обновлением сделайте, пожалуйста, резервную копию базы данных. Если возникли ошибки, то сразу создавайте тикеты с описанием, мы немедля исправим.

Как было: Сайт=Группа=Профиль парсинга (ПП)

Такой вариант позволял в рамках одного сайта для одного и того же запроса обновлять разные ПП через группы, тем самым в разное время обновлять их по cron.

Как стало: Сайт=ПП

Важно, что к одному сайту можно добавить любое количество ПП, один ПП можно использовать любыми сайтами.

Теперь стало все проще и логичней, а главное, в расписание можно обновлять не по ПП, а как и раньше выбрать группу+ПП, тем самым гибкость осталась.

Все должно обновиться автоматически, но на всякий случай, если у сайтов отвалятся ПП, то нужно вручную установить связь сайта с нужными ПП.

- Добавлена возможность вводить регион Google вручную.

- Добавлены навигационные меню в рамках одного сайта

- Добавлена обработка новой выдачи для yandex.ua, yandex.by, yandex.kz, если yandex начнет подмешивать новую выдачу в выдачу yandex.ru модуль это поймет и все равно снимет позиции! Это означает, что когда yandex выкатит "Острова", то все продолжит работать.

- Добавлена возможность за один раз создавать расписание для всех групп и всех ПП конкретного сайта.

- Добавлен вывод списка сайтов использующих конкретный ПП, зайдя в ПП выводится список сайтов.

- Добавлены регионы для Wordstat в отчетах

- Добавлено примечание в логи, о том, что парсинг был через cron

- Добавлен перевод в разделе "очередь"

- Добавлена возможность использовать кэш страниц для парсинга по крону

- Улучшена навигация в рамках одного сайта

- Исправлена работа с региональной выдачей Google, теперь можно указать Москва, Новосибирск и т.п. и модуль будет собирать позиции именно для этого региона. Важно, что для региональной выдачи делаются дополнительные запросы, поэтому скорость парсинга может немного уменьшится.

- Исправлено отображение ПС на графиках, теперь на графиках отображаются только ПС из профиля парсинга.

- Исправлен парсер bing (новая выдача)

- Исправлен парсер Yandex

- Исправлено кэширование

- Мелкие правки, их в разы больше чем в ядре))

Модуль — Контроль 3.33

- Добавлен новый вариант отображения сайтов, его особенность более быстрая сортировка данных на больших выборках 100к сайтов, старый вариант практически не мог этого делать. ВАЖНО, если в модуле много данных, то обновление модуля может занять значительное количество времени, вплоть до нескольких десятков минут.

- Удалены Яндекс блоги, так как Yandex закрыл сервис (история будет удалена)

- Исправлен парсер bing (новая выдача)

Начали плотно работу по улучшению работы с прокси и многопоточностью, первые тесты показывают, что скорость работы увеличивается более чем в 5 раз(!)

Ок. напишу.

Насчет 10, понял, это ошибка, исправим.

Насчет графиков не понял, должно все отображаться. Подробней опишите, где и что должно отображаться по вашему мнению.

Да, с большими объемами данных есть проблемы, создайте тикет, постараемся помочь после праздников.

Предупрежу, что импортом занимаемся с небольшими задержками.

Да, действительно по поводу старой версии ответы на тикеты очень медленные.

Тикеты по 3й версии в 95% случаев обрабатываются в течение 12-15 часов.

По поводу того, что проект загнулся, можете посмотреть частоту выхода новостей на нашем сайте и все станет понятно!

1. Добавил в пожелания.

2. Переделываем отображение полностью, если все будет хорошо, то уже в мае выкатим очень удобный вариант отображения таблиц.

3. Запускайте парсинг через крон, добавляя запросы/задания в очередь, так и быстрей и интерфейс не участвует. Адаптацию под мобильные устройства почти не делали, та как интерфейсы еще не устаканились. Приведем интерфейсы в порядок, займемся.

Нет, мы можем на своем сервере установить для Вас, но прокси все равно потребуются.

Вообще преимущество системы именно в кондефициальности данных и дешевом парсинга по отношению к онлайн аналогами. Но если будет много желающих использовать систему, как сервис, то мы готовы сделать. Естественно на это потребуется время.

При обновлении съема позиций, куда то исчезли данные по позициям, что были сняты до обновления, что за нах?

P.S. Проблема решена, нужно было назначить заново, через какую настройку (профиль) снимать.

Как исправить ошибку, или из-за чего она выскакивает:

В панели при обновлении позиций -

Error 500
Не определено свойство "PositionYandex.cacheUrl"

Здравствуйте, создайте тикет с данными, возможно с какой-то версии обновление произвелось не корректно.

Поздравляем всех с праздником Великой Победы!

В честь этого важнейшего праздника, любой может получить 50% скидку на покупку от 700 рублей.

Скидка будет действовать до 12 мая включительно, в том числе и на продление лицензий!

Чтобы получить скидку, в поле купон введите название купона "День победы" http://c2n.me/i5RXQn.png

Я пользователь, попадающий под этот пункт:

Я могу рассчитывать на куммулятивную скидку как старый пользователь + по купону? Куда вбивать купон понятно, а вот скидки как старому пользователю нигде нет.

Надеюсь на скорый ответ т.к. сегодня уже 12-е число.

Ну и багрепорт - при нажатии Купить в Лицензиях выходит страница "В корзине нет ни одного товара. Для оформления заказа добавьте товар в корзину." хотя на самом деле товар уже в корзине.

Здравствуйте, скидка для "старых" клиентов автоматическая. Скидка должна суммироваться, проверьте.

Но вообще раздавать продукт практически бесплатно цели не было!

Сегодня только 11 число ))

Об ошибке знаем, скоро исправим.

Я вообще не понимаю, как продлить лицензию. Как-то не логично все сделано. Перерыл сайт - не нашел кнопку ПРОДЛИТЬ. :( Куда засунули - не пойму. http://site-control.ru/support/documentation/update/ - ссылки на продление нет.

Куда жать-то? :)