там же есть съем позиций по мобильной выдаче
Вот кстати, интересно, кто-нибудь пользуется какими-то собственными инструментами написанными под себя?
Ну или там Python'ом/SQL'ем
Excel - это конечно очень хорошо, но собирать кучу метрик и агрегировать все для больших сайтов (от 10 000 страниц, хотя бы) - это лютый треш.
Особенно, если нужна история по данным и постоянное отслеживание групп страниц на предмет падения трафика, выявления причин падения и т.д.
Вариантов несколько:
Вручную (дешево):
- собираете список ключевиков и парсите по ним выдачу
- рассчитываете видимость по сайтам и сортируете по убыванию
Получаете список сайтов
Полуавтоматически (дороже):
- с помощью serpstat/spywords/adwodka/keysso и т.д. - берете сайт для примера и смотрите его конкурентов по семантике
Он про переиндексацию через Я.Вебмастер
Кому они нужны? Зачем?
Если бы в метатегах и тексте таких страниц хотя бы хвосты продвигались - ладно.
Но в вашем варианте такие неявные дубли только лимит индексации страниц будут отъедать
Нет, разумеется, пример - */feed-abc (первым правилом не закроется, вторым - закроется). И там про это написано:
Этот роботс сам по себе не совсем корректный, к примеру, эти строки ничем не отличаются:
Что непонятного в указанном robots?
Все что нужно знать, чтобы понимать что там написано - это смысл символов * и $, остальное - это части URL конкретного сайта
Сбор витального трафика конкурентов? Иных запросов, которые нельзя было бы развести на фильтры я не нашел
Почему эти запросы нельзя вынести в фильтры?
То что вы предлагаете - какое-то извращение напоминает. Пагинация явно не для этого нужна.
а кто сказал что это делается?
Я лишь высказываю свои мысли. Людкевич как-то слишком агрессивно порицает топовую кластеризацию, однако я не вижу других автоматических способов разбора больших ядер без подстройки алгоритма под каждую конкретную тематику и случай (этот запрос надо сюда, а эти 2 можно совместить на одной странице). Слишком много частностей и нюансов.
Как и не вижу причин НЕ использовать факторы топовой кластеризации совместно с другими факторами (с подстройкой весов).
Что может быть полезного для ПС на страницах пагинации?
Фильтры - понятно, можно какие-то запросы отдельные продвигать, но что можно продвинуть на странице с Title "Зеленые слоны - страница 123"?
Или вы имеете в виду индексацию страниц товаров через пагинацию? Эту проблему, имхо, не через пагинацию нужно решать.
