Я бы дополнительно заблокировал страницы для посещения или всем или чисто сети Яндекса через .htaccess или Cloudflare. Ниже пример Cloudflare.
Вот как для всех: (http.request.uri contains ".html?mr:referralID") or (http.request.uri contains ".html?tag=aff") or (http.request.uri contains ".html?Selected") or (http.request.uri contains ".html?authToke")
Это только пример. AS сеть яндекса: 13238
Проверьте что нужные страницы под это правило не попадают. Примерно так я запрещал Я.ботам посещать то что им не нужно.
Яндекс так и будет кошмарить.
Ему плевать на свои же рекомендации для вебмастеров.Я с ними бодался больше полугода по вопросу дублей пагинации.
Остальные каноникалы, клин парамы - им плевать.
Яндексу не плевать на robots.txt, уже проверено ни на одном сайте. А вот гуглу действительно плевать)))
Сейчас xrumer практически никак не работает, если только самому моды писать(
Вот можете попробовать онлайн https://tools.soltyk.ru/google-indexing-api.php
Похоже только свои сайты можно
Поделитесь фишкой тут https://searchengines.guru/ru/forum/1086064 , если можете
каким образом? я думал что через индекс апи можно не более 200 шт в день.
Можно для одного домена добавлять 500 пользователей, ну и соответственно ключей JSON, просто гугл аккаунтов регать нужно 42
