мониторинг позиций

Проблема в том, что даже при отключенной персонализации в Яндексе, все равно Яндекс выдачу персонализирует. Случилось это в октябре (читаем топик: /ru/forum/870971).

Вот тогда мы перешли на XML. XML сейчас точнее.

Если в каком-либо сервисе позиции по проекту по Яндексу каждый день прыгают на пару позиций вверх-вниз (не в дни апдейтов), значит, сервис неточный.

SE Ranking,

я бы не назвал это персонализацией, т.к. выдача именно тасуется, в моем понимании персонализация это когда выдача зависит от предыдущих запросов или предпочтений, а тут выдача разная, даже если ее открыть в режиме инкогнито, с чистой историей поиска и без входа в аккаунт.

Если явных ошибок с разбором и настройкой серпа у сервиса нет, значит сервис просто отображает то, что ему отдает яндекс.

С чистыми куки в инкогнито выдача будет всегда одинаковая. А то что юзер в сервисе каждый день получает рандомные позиции, то это не совсем корректно. Бывает тасует и +/-15 из-за предыдущих запросов.

Тот октябрский баг был исправлен, - поддержка рапортовала.

Но, да, иногда такие вещи случаются и сейчас.

А чаще движение происходит из-за санкций (фильтр, бан, вирус на сайте), а так же из-за снятия этих санкций происходит сдвиг в ту или иную сторону. Часто штормит из-за новостных сайтов в результате обхода быстроробота и тп.

А Вы с чем сравниваете, утверждая, что XML точнее?

Цель любого сборщика - показать точно такие же позиции, что будут видеть пользователи, набирающие определенный запрос.

Иначе смысла в нем мало, только тенденцию по XML посмотреть.

Мы именно из этой цели и исходили, когда принимали решение, как собирать позиции. И поэтому реализовали именно сбор, как в режиме инкогнито, причем для каждого запроса отдельное инкогнито.

И видимо надо определить, что такое персонализация выдачи - это анализ истории поиска + текущей поисковой сессии, на основе которой выдаются индивидуальные результаты поиска (см. подробнее в статье Яндекса). Т.е. если нет истории поиска и текущей поисковой сессии (1 инкогнито для каждого запрос = нет данных для поисковой сессии), то нет и персонализированной выдачи.

По всей видимости в октябре был на самом деле баг.

Не смог удержаться от участия в этом замечательном споре 🍿

Вы сумели добиться точных ответов от системы, в которой этой самой точностью пожертвовали в угоду доступности? В таком случае вы совершили революцию в IT и претендуете на премию. Как минимум, на Шнобелевскую.

Если это - цель, то она сбором выдачи в "лоб" не достижима, вне зависимости от способа парсинга: через веб-морду или через yandex.xml

Реальные пользователи увидят совсем другие позиции, просто потому, что персонализация для них включена по дефолту (а многие даже и не догадываются о её существовании).

Да, если в сети установлен кеширующий прокси😂 В реальности - нет.

К сожалению, точность не везде одинаковая. При проверке руками и сравнения данных со данными большинства сервисов - есть сильные расхождения. Тестировал 6 сервисов. Если интересно могу в личку скинуть результаты, а то глядишь за рекламу примут.

И да, и нет. Что Вы написали верно для пользователей, которые искали что-то уже в данной тематике.

Если пользователь, скажем в первые ищет, скажем, в тематике пластиковые окна, то в первый раз ему покажется точно такая же выдача, что видна в режиме инкогнито. Уже на второй запрос (в том числе повторный поиск по этому же запросу) ему будут показывать персонализированные данные в этой тематике. Проверить это очень просто - взять и задать запрос из тематики которую Вы не искали ни разу и параллельно тоже самое набрать в инкогнито (либо в Key Analytics, если запросов будет много, так как результаты получите одни и те же).

Ребят, а еще что-то из десктопа, кроме SERP Parser, можете подсказать? И вообще пользуются ли спросом десктор ПО подобного рода или все же лучше юзать он-лайн сервис и/или таких сайтов больше?