а зачем их удалять ? если они в индексе и там есть контент и их немного в отношении - то можно оставить, а если много и в индексе гоша может просесть при удалении.
Ну а так удаляют просто в 404
Их суммарно много , около 1/4 сайта - это мусорные страницы , которые делал в свое время. То есть это маленькие бредовые статьи , которые завешены рекламой (ну в общем для Дзена чисто). Очень много этих страниц постоянно вылетают из индекса (судя по консоли) , много страниц так и не заходят.
Вот и думаю что с ними делать. Оставить и забить , вроде кушать не просят . Или снести все . И что значит «удаляют просто в 404»?
если ты выдачу глянешь то по нч и микро нч уже показывает страницы сайтов у которых хостовые хорошие. то бишь если помнишь был такой апдейт когда порезало все точные вхождения из заголовка. Если частота у запроса ноль то не выдавало страницу под нее а например общую - категорию. Так вот теперь мало того что не выдает так еще из индекса удаляет ибо зачем страницы в индексе если у них не будет трафика ? )))
добывать трафик из органики и распределять его по сайту - вот что трафик животворящий делает http://joxi.ru/a2XyYyRip065GA
http://joxi.ru/E2p5n54tjO3yaA
скажу так - страницы с размножкой да еще и на двух языках , под микросуб нч (подбор автозапчасти под авто) .
Трафика за зиму насыпало много и вошло само около 4к страниц откровенного спама.
Бот в телеге тоже пашет на ура.
Скажите пожалуйста , а как правильно удалить страницы сайта ? У меня накопилось 2-3 тыс страниц , которые не имеют трафика и были созданы в свое время для дзена. Тогда они неплохо собрали , но сейчас это мусор. После удаления сайта , нужно ли как то прописывать редирект или что то подобное ?
Более эффективного общеизвестного способа, чем Cloudfare сейчас нет.
Есть программные антиботы, но эффективность их под большим сомнением, потому что в общем виде они заставляют всех проходить через какую-нибудь затейливую капчу. Это может значимо сказаться на трафике сайта.
По форме - никак, особенно если это короткие посещения. Метрика в действительности не умеет отличать пользователя и его имитацию.
По сути - вы смотрите на запись рабочей сессии и по логике действий будет понятно, что бот просто бесцельно шариться по странице. Но когда сессия короткая, здесь вы вообще можете не отличить.
Понятно. С капчой нельзя - это негативно скажется на трафике. Вообщем как я понял это борьба с ветреными мельницами. Cloudfare - там какие настройки надо поставить и как он отличает ботов от пользователей ? Надеюсь не через капчу
Спасибо , почитаю. У меня в счетчике ЛИ обычно пользователей больше на 1500 уников. Последний месяц общий трафик стал по ЛИ чутка просидать, но если смотреть через метрику и убрать ботов , все ровно. И если опять же судить по метрике , у меня просто последний месяц уменьшилась ботность
Есть ли какой то реальный способ отсечь ботов без использования cloudfare? И при этом сохранить настоящих юзеров. И как в метрике понять что это бот ? Они ведь тоже не тупые , лазят по сайту
1. Понятия не имею.
2. Li у меня не считал ботов и показывал более точные данные, чем яндекс метрика. Но я его давно убрал, так как он перестал работать в Украине (возможно сейчас работает, не знаю).
Вот нашел свой комментарий за 17 января 2021 - https://searchengines.guru/ru/forum/1029854/page273#comment_16591017
1) неужели у всех так ?
2) а счетчик ЛИ вообще же считает все подряд ?
Видимо, как обычно, кому-то дало, у кого-то забрало. У меня наоборот у ряда сайтов трафик пошёл вверх с недавнего времени.
Ссылочным плотно занимались ?
Как и чем?
Потеря трафа по сравнению с апрелем-маем примерно 25-30%
Забейте . У меня ситуация идентичная вашей. Опытным путём пришёл к выводу, что в два апдейта сайт был наказан именно за рекламу. Правда я не Яндекс поставил , а другую. Сейчас эту реклов убрал - сайт начал отходить