Ботов почти всех заблочил, остались единицы с акков мобильных операторов, пускай пыхтят, жгут электричество бакланы.
Сегодня сильно удивился, Яндекс бот сканирует полностью весь сайт (около 200 страниц).
Это нормально?
Просто эту тему раньше не мониторил.
BLEXBot - этот полностью весь сайт сразу обходит за один визит.
Вчера приходил. Заблочил.
Нет поля и нет поиска - разные вещи.
Если " https://сайт/?s={search_term_string} " отдаёт 200 - это не отключён.
Спасибо, разобрался. Действительно выдает 200, раньше над этим не задумывался.
На сайте нет поля поиска, отключен за ненадобностью.
А Гугл видит такие ссылки и ворчит в SC.
https://сайт/?s={search_term_string}
Откуда он это берет?
В SC нытьё про /?* & бла бла бла
Откуда Гугл это берет, на сайте нет никакого поиска?
СеВлад, подскажи что отключить в WP
Лет 5 уже как ЯВебмастер низкочастотки не показывает во Фразах.
А у Вас долбят бурж сайт без метрики и без РФтрафа на неРФ хостинге? (именно боты, а не просто собиратели, на которые не реагируют никакие метрики)
Меня ботная тема интересует только по одному сайтику (магазинчик), который работает по всему РФ и стоит на сервере Таймвеба.
ЗЫ Собиратели выглядят по другому, я вчера скриминлягушку направил на сайт и там сразу сотни запросов в логах появились одним массивом. Собиратели наверное бы тоже так выглядели примерно.
Сегодня пришел не просто бот, а кроллер. Весь магазик полностью обошел. ( http://webmeup-crawler.com/ )
Таблетка:
User-agent: BLEXBotDisallow: /
Антоний Казанский #:
Cайт не показывает поисковую фразу. Поисковую фразу выбирает оператор, который программирует сценарий действий бота.
В метрике в поле "фраза" отображаются фразы, по которым живые люди приходят с поиска Яндекса. Остальные визиты можно проверять на ботность. С пустым полем "фраза" может быть бот. (Гугл исключение)
Антоний все верно написал. Если бота не качать по сайтам то с вероятностью под 100% он улетит в боты, метрика его не покажет, даже если включена опция показывать с роботами.
Для этого их и качают много дней или пару недель.
И бот cможет зайти с поиска в метрику (на сайт), которая покажет поисковую фразу?
И мышкой в браузере двигать и кликать?
Если мы хотим, чтобы вы увидели это в Метрике (и пользовательская сессия зафиксировалась в Вебвизоре), то здесь надо предварительно нагуливать профиль, чтобы заход прошёл, имитировать действия мышки и т.д. - это уже задача на порядок сложнее.
Это ваши фантазии - нагуливать профиль. Если не так, то давайте изложите конкретные детали.
Метрика видит заходы людей с поиска по фразам - пофигу все ваши нагуливания профиля. Это для барана, которого нужно стричь.
