GuruSite24 #:
Если вы не понимаете саму суть, почему и откуда берутся поисковые боты - не засоряйте тему. В поиске есть ответы на нужные вопросы, не стоит превращать топик в пустую флудильню.
Блочить ботные сетки и проблемы нет - здесь многие это понимают и так делают. А другие нагоняют жуть, ничего толком не говоря.
Поисковые боты (боты через поиск) - это нонсенс. Яндекс их капчей сразу замочит.
Это у Вас еще их мало.Тут ребята светили сайты, на которые валило по 200к+ ботов ежедневно.Это все делается программно.
Верю в такие мощные програмные атаки с прямыми заходами.
А в ботов из поиска по фразе - нет.
Попробуйте таких определить если запрос идет с гугла, метрика показывает в основном запросы с яндекса.
Не совсем понимаю, как Вы можете легко определить такого бота, если не понимаете принцип работы ПФ ботов.
С Гугла и правда не могу определить.
Вернее не с Гугла, а подставленной рефкой от Гугла.
Это если совсем уж поверхностно объяснить эти моменты.Сейчас живое мясо не нужно, можно спокойно обойтись ботами.
Весь ваш пост прочитал, но для меня это слишком. Я с ботами меньше месяца борюсь. В начале октября они пришли ко мне.
Если это скрипты, то у них тогда должны быть собстенные акки в Яндексе? Или файлы куки (у ботов).
Мне кажется все проще - заказывают долбить по сайту, исполнитель долбит.
Запросто, бот просто заходит, а в значение referer подставляет google.com или ya.ru и так далее.
Таких легко определить - у них в Метрике нет поисковых запросов.
Они не из поиска приходят.
Легко и много чего еще умеют.
Это не задания, т.к для того, чтобы был эффект от накрутки, нужен регион определенный и профиль нужно правильно прокачать.
Как бот может прокачать профиль? Вот я в поиске шастаю и мой профиль прокачивается? Мне вообще без разницы мой профиль.
На секту все это похоже. Что-то утверждают и ни слова про механизмы.
Верю, что из поиска по фразе может прийти только живой человек.
Как скрипт может шастать в поиске и кликать сайты?
ЗЫ Мистика, ботов наделили сверхспособностями и никто не объясняет механизм таких чудо ботов. Еще верю, что прямозаходные боты - это живые люди, сидят на задании, ссылки кликают.
Чего выкладывать-то? Иди по гуглению на поиск ASN, вбиваете туда любой айпишник - вам дают ASN и полный список подсетей со всеми на данный момент известными подсетями
Я подзабыл, тупанул, спасибо.
Данной темой занимаюсь меньше месяца.
deny from 135.181.116.200deny from 95.217.224.30 deny from 86.110.215.66 deny from 65.108.46.177
Вот еще IP парсеров.
Спасибо - применю
Hetzner Online GmbH - здесь часто мелькает.
Может кто выложит их полную сетку?