Что ж, покажу получившееся решение. Сайт сделан ради экспериментов, посмотрите на его антибот-защиту.
https://brw23.ru
оттуда идут боты Google Page Speed 😀 это трудно понять сеошнику?
Подписываются они, кстати, как мобильный браузер
К чему приводят боты? Есть статья, полезная, написана для людей, но с небольшим элементом рекламы, хотя.... Пока были открыты комментарии, там немало отзывов написали.
Сегодня приходит сообщение
Изменился статус в поиске у важных страниц:
Старый статус: В поискеНовый статус: Малоценная или маловостребованная страницаСтраница исключена из поиска в результате работы специального алгоритма. Если в будущем алгоритм сочтёт страницу достаточно релевантной запросам пользователей, она появится в поиске автоматически.Ознакомиться с рекомендациями
Что за сайт, магазин?
Почти. Каталог-витрина (товары, цены)
Очень долго боролся с ботами, перепробовал кучу методов, каждый день IP фильтровал, буквально по чуть-чуть улучшал статистику, но только сегодня получил результат.
Удивительный, скажу я вам, результат.
Готовым кодом не поделюсь (я жадина), но наводку дам: сделал на основе метода alaev
Еще раз говорю, логи сравните.
Сейчас не могу, у меня заблокированы и те и те.
ты не представляешь сколько ситуаций, когда нужно чтоб проходил прямой траф. на норм белом сайте это вообще нормально, что на него идут из закладок в 100500 ситуациях.
Например, в эту тему как заходят пользователи? Скорей всего большинство не из поиска.
В этой теме уже неоднократно писали: Рефер соцсетей поддельный, в логах посмотрите-один и тот же заход в метрике отображается как из соц. сетей, а в логах он же без рефера.
Накрутчики дураки что ли? Не могут для браузера указать нужный рефер?
много переходов из соцсетей с длительностью в 0:00
а что если убрать счетчики ПС гугла и яндекса и пользоваться сторонними счетчикамиПС же перестанут видеть эти заходы и отказы так как это прямые заходыХотя-бы даже экспериментально на месяц отключить чтобы увидеть точно влияют ли эти переходы в оценке сайта ПС-ами
Я ставил liveinternet, а счётчик Яндекс-метрики уже успел самоудалиться. Никак не подействовало.
Обращение к серверу метрики было, но сама метрика не успела загрузиться.