К НГ пришёл)
Да причём тут праздники, когда они хоть какую-то проблему признавали? )
Уже пол года как говорят, что боты ни разу не влияют, фильтровать не надо, а просадки попадают на активность ботов чисто случайно)
На выходные % ботов явно вырос, из-за стандартного для 31-1 падения живых. У меня везде стоит ещё и свой внутренный JS-счётчик, на него тоже заходят массово
Кстати наблюдение - кривая посещаемости по времени суток ботов немного искажена, ночью заходят чаще, чем следовало ждать. Видимо один раз создали какой-то шаблон поведения и ему следуют, но он не идеален. Пару месяцев просыпался и с утра видел, что ночных больше, чем раньше, но днём рост был существенно меньше
Яндексойды громче всех кричали, что на 100% отличают накрутку ПФ своей от чужой. И по полной обосрались - какая накрутка, если даже ботов по примитивнейшим правилам в Метрике не могут увидеть. Обидно одно - когда обосрался Яндекс, страдают все остальные (вебмастера, бизнесы, рекламодатели). А они зарабатывают ещё больше на склике Директа).
У меня валят боты на 2-3 урла без реферера, отфильтровал показ Метрики, пока толку 0 по всем проектам. Вспышки прямых заходов всегда совпадают с постепенной просадкой по Яндексу (уже до 20-50%)
Зато сегодня в индекс влетели тысячи страниц пагинации, причём во многих разделах ТУПО ВСЕ - от ?p=1 до ?p=1000.
Также вошли неканонические, которые в Яндексе ещё и запрещены под noindex, follow ))
Вангую - скоро вылетят и порежет опять жёстко)
А что ещё бесит - полный индекс пагинации (при верных канониклах), типа ?page=10000, особенно последние страницы, которые давно пусты (число товаров снизилось на несколько процентов). Видимо надо бы сделать noindex, follow, но в условиях неопределёнки ХЗ, что получится))
И они циклично то влетают десятками тысяч, то вылетают. Дата посещения страниц роботом - по-прежнему начало года)) вроде и страницы в индекс вернулись, а глюки всё те же.
Есть подозрение, что они просто вернули и зафиксировали старый счётчик числа страниц в ВМ, не более того))
Тем не менее, с трафиком пока что всё ок)
Да тут не в клонах дело, порезало до нуля даже корпоративные и личные блоги, где никакого копипаста.
И опять в индекс влетают пустые страницы (категории, в которых с начала года ничего нет), у которых последнее посещение бота - начало года. Разумеется, завтра снова вылетят. И так с начала августа, в меньших маштабах правда)) В общем нет смысла искать закономерности, пока не пофиксят, явно глюки
