Алеандр

Такая же проблема, писал относительно недавно про нее: https://searchengines.guru/ru/forum/1023224/page40#comment_17009648
Раньше такого не замечал, причем, не по всем проектам так, а только по некоторым. И ладно бы там небольшая разница, но она очень существенна. Вряд ли это из-за того, что у кого-то не сработала метрика, ведь есть обратное соотношение: вебмастер показывает, что перешло мало людей, а метрика фиксирует больше.

Сейчас вообще какой-то дикий расколбас творится по статистике и переходам, я уже перестал понимать, где боты, где реальные пользователи и какие фактические показатели у сайтов.

Так не у всех есть доступ к nginx, на хостингах, например, правила можно применить только в htaccess.

Как LEOnidUKG и сказал, утрируя, что чудес не бывает ))

А вообще, если нет косяков в проверке или обработке правила, и проверяется лог тот, что нужно, то вот так списком:

SetEnvIfNoCase User-Agent "ClaudeBot|BLEXBot|SemrushBot|AhrefsBot|MJ12bot|DotBot|SeznamBot|ZoominfoBot|MegaIndex|Exabot|VelenPublicWebCrawler|svetabot|AspiegelBot" bad_bot

<Limit GET POST HEAD>
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Limit>

Если правило из старт-поста работает, и там, похоже, что в строке могут применяться базовые регулярки, то можно попробовать

SetEnvIfNoCase User-Agent "*ClaudeBot*" bad_bot
<Limit GET POST HEAD>
    Order Allow,Deny
    Allow from all
    Deny from env=bad_bot
</Limit>

Давно что-то в вебмастер не заглядывал, тут решил пройтись по сайтам и не могу понять: на некоторых сайтах какой-то рассинхрон с отображением кликов из поиска и фактическим количеством переходов из поиска по метрике. Причем, на одном сайте показывает, что кликов за сутки чуть ли не ноль, когда их реально несколько сотен в день, а на другом сайте - наоборот, показывает, что насыпал в 2 раза больше кликов, чем фактических переходов по метрике. Это глюки или норма, куда копать, что смотреть? Вроде, по большинству сайтов, обычно, эти данные между вебмастером и метрикой сходились.

Залез в лайв статистику и логи, посмотрел, все совпадает с метрикой, но не вебмастером. Получается, вебмастер знатно так привирает в этих данных.

Что мешает поставить async / defer на загрузку тупящих скриптов? Загружается - молодец, загрузился и отработал. Не загружается - ну и ладно, без него страница продолжает загружаться как положено.

Что мешает одновременно с запуском скрипта производить дозапись в файл в логированием всех нужных параметров?

Либо, что-то не удалено, либо письма приходят не из этой формы. Чудес в этом вопросе не бывает )

Исходных данных мало, но из того, что есть, допускаю, что это банальный html в котором хочется повторяющиеся участки сайта не переписывать в каждом .html файле, а подключить их шаблоном. В этом контексте ломать там будет нечего при всем желании. Так же как и php include. А так да, если туда начать напихивать дичи без понимания - все что угодно может быть.