Вот эти запросы ботов как в стату моего сайта лезут? Я вообще не понимаю))
Такое ощущение, что вы пишете комментарии по знакомым буквам, но совершенно игнорируя смысл текста. Хотя, если цель просто набивать циферку активности и пытаться маячить в виде "специалиста", то, наверное, сойдет.
Если я верно понял, то Vladimir предлагает экономить краулинговый бюджет, чтобы бюджета хватало на индексацию именно новых страниц или страниц, где контент точно был обновлен.А делается это с помощью настройки сервера, который должен отдавать поисковым ботам спец заголовок (Last-Modified), если у страницы не было обновлений с момента прошлого посещения ботом. Если страница не обновлялась, то сервер должен ответить заголовком: 304 Not Modified.Похоже мало, кто это делает.
Я потому и спрашиваю, зачем давать советы, не владея информацией? Ни с новыми страницами, ни со старыми проблем никогда не было, для этого есть прекрасно обновляемый сайтмап и все нужные заголовки. Это лишь наблюдение, высказанное вслух, что после того, как Яндекс понизил позиции - он перестал активно обновлять индекс страниц, несмотря на то, что боты все так же прекрасно его посещают и получают контент. Нечего там экономить, не миллионы страниц )
На днях в логах понравилась неуёмная долбежка гугл-бота в одну и туже страницу на протяжении нескольких часов, которая ему отдавала 404, но он упорно не хотел этого признавать и, видимо, ждал, что контент там, все же, появится )
А у вас боты из каких стран. У меня вордфинс заблокировал 700 ботов за 5 минут. Стоит бесплатная версия, современных поведенческих ботов из россии она не блокирует. Как за него платить я не знаю. И тут как раз гур украины заявил, что проводил кибератаку на русские провайдеры. И я так понимаю, что в феврале 24 также была атака на провайдеров
Ровно такой же график на одном из моих сайтов. Единственная разница, после первого провала быстрее вышел вверх, но даты падений один в один.
А Вы что-то делали для того, чтобы трафик вернулся на 70 %? Или это произошло само по себе?