"такого товара больше нет, но вот список похожих: .... "
сейчас выдаю при этом header 404
все правильно.
ну да, 99% всего этого поведенческого мусора идет с RU.
Если исходить из того, что делать это может тот, кому это больше всех выгодно, то это ЯНДЕКС!
+ за яндекс. практической надобности постороннему человеку нету надобности валить все сайты рунета.
Живых людей там тоже хватает. Но последние 3 часа проскакивающих ботов должно стать меньше.
а конкретный ip можете указать и примерное время?
в последние 3 часа, т.е. с 12 по мск по идее этих ботов в проходящих должно быть меньше.
Пролез Metropolitan branch of OJSC MegaFon AS25159 178.176.64.0/19 с экраном 1920х1080
Было бы не плохо блокировать мобильный трафик с экранами от ПК.
а юзераген там случаем не виндовс? вчера и сегодня до обеда были какието новые боты всплески, но сейчас они тоже потиху фильтруются.
какая кликабельность, если эти боты только парсят выдачу, никуда не кликая по выдаче?
так из серпа данные что был поиск, но небыло вообще никаких кликов.
Так эти ж боты только парсят выдачу, не кликая по реальной длинной ссылке с редиректом. Потому никаких посткликовых поведениях, возвратах, ctr и т.п. - этого всего нету. Остается только метрика для передачи данных в яндекс от бота-накрутчика. Если бы кликали, то вы бы видели нормальный реферер, ну и в яндекс вебмастере была бы инфа о кликах.