Вы придумываете себе совершенно ненужные задачи.
Совершенно не согласен, в карте парсер получает "очищенные" данные, которые необходимо скопировать без всякого мусора - страницы с пагинацией, фильтрами и т.д.. Если закрыть доступ(спрятать) к карте, то парсеру придется сделать существенное кол-во запросов к сайту, из-за той же пагинации. Ну а дальше все просто - превышение запросов, врубаем подмену данных.
А ничего, что кто угодно может вписать себе любой юзерагент?
Так откуда они знают, что стоит такое ограничение, обычно видят 404 ошибку и делают выводы, что сайт без карты.
Фильтра по юзерагенту будет достаточно, уже пару лет использую - проблем нет.
if (Request.UserAgent.ToLower().Contains("yandexbot") || Request.UserAgent.ToLower().Contains("googlebot"))
С августа было две метки на один сайт, но в итоге неделю назад сняли, пока все тихо.
Со второго Гс'ника сняли метку, которую наложили 22 сентября. Какой хороший сегодня день! 😁
У меня метка всё ещё весит, но ощущение, что всё таки санкции сняли.
Вам когда метку вручили? У меня с 9 августа, на 90% трафик восстановился, метка тоже висит. )))
Кто-нибудь отключил "Яндекс взгляд опросы" в показах? Если да, то дайте знать как...
Похоже эти блоки нельзя отключить, в настройках площадки внес адрес " surveys.yandex.ru " в блокировку, но все равно на сайте эти глючные блоки с 404 ошибкой, все логи заспамлены.
http.referer ne "" and not http.referer contains "yandex" and not http.referer contains "google" and not http.referer contains "svoidomen"
Вы забыли включить в правило ya.ru!
Что-то делали с сайтом? новый контент добавляли?
Много чего делал - реклама, дубли, мусор убрал и .т.п.
