alaev#: Арсенал пула мобильных айпи у них крайне мал.
Он мал у операторов.
xereden#: Пол года боты потихоньку подменяли собой часть трафика и постепенно их становилось больше. Сейчас от поискового, что было раньше осталась треть.
1. " Так же много ботов идёт с IP-сети, которая подписана как IPv4 address block not managed by the RIPE NCC" - данная фраза означает, что подсеть регулируется не RIPE NCC, а другой региональной регистратурой. Т.е., если по простому, адрес (по гео) не европейский и не из бСССР.
2. Автор в числе прочего упоминает блокировку по AS, но не говорит при этом, что этот метод значительно опаснее блокировке по целому диапазону IP: как правило, оператору услуг выдаётся одна автономная система, от которой анонсируются все принадлежащие ему подсети. Т.е. блокировка по AS равносильна блокировке всех ресурсов провайдера.
Разбавлю очередной раунд разборок пятничным размышлением.
Нынешняя ситуация с трафиком один в один напоминает ситуацию со ссылочным 10-15 лет назад. Тоже было много дискуссий об этической стороне вопроса, что такое чёрные ссылки, что такое белые и серые, можно ли делать дорвеи, можно ли создавать (какое кощунство) сайты только для ссылочного донорства, и т.д. и т.п.
Чем всё кончилось, известно. Сейчас эти рассуждения кажутся смешными. Инструмент должен работать, и всё. Безо всякого морализаторства.
Надеюсь, что понимание этого вывода в связи с бототрафиком к людям придёт достаточно скоро. Точнее, давно уже пора бы.
Vladimir#: Начнем с того, что это в любом случае это программа со своими плюсами и недостатками, по которым ее можно вычислять. Вопрос надо ли? Вычислять ботов, блокировать их? У всех программ, есть одно общее отличие от живого трафа - цель этой программы. Уберите цель и все, нет никакой эмуляции. "Цель" - будет всегда! - Алаев предлагает это сделать Яндексу. На что Яндекс грубо отказывается, и идет по тому же пути: борьба с ботами путем понижения, повышения сайтов, путем не учета и блокировки. Уберите цель у ботоводов и вы решите проблему. - на сайтах аналогично. На графике, все разрешено, никаких блокировок, скрытие метрики есть, но это не помогает . При этом без разницы какие бывают боты, и с каких IP они идут
Все влияние, только за счет, влияния на соседние сайты в выдаче ПС. Что приводит к выводу, что крутить ПФ придется, каким способом, это уже другой вопрос
Я не очень понял, что Вы хотели сказать, поэтому выскажу несколько соображений по поводу ботов.
Человеческое поведение сложно и многогранно только в реальном мире. Когда пользователь заходит в Сеть, возможность описания его активности автоматически сужается и деградирует на несколько порядков. Особенно если речь идёт не о видеочате, например, а о работе с сайтами и поисковыми системами.
Исчезает вербальность, исчезает возможность фиксировать эмоции, тембр голоса или мимику, резко сужается пространство интерпретации его поведения. Мы не можем сказать, что происходит по ту сторону экрана. Человек сомневается в выборе товара, или слушает музыку, или его отвлёк ребёнок, или он вспомнил о важном событии - а скрипты фиксируют лишь движение курсора на 2 миллиметра вправо и увеличенную паузу при заполнении корзины. И засчитывают так называемый "отказ". Без понимания истинной картины происходящего.
Поэтому увы, но эмулировать человека боту не просто, а очень просто. Всё сводится к набору базовых событий (набор текста, клик, скроллинг, тайминги между ними) и базовых параметров (заголовки, куки, js, плагины, установленный софт и версия системы, и пр.) с последующими их вариациями.
Это всего лишь конструктор, весьма несложный. Который просто нужно правильно собрать.
Добралась беда
Арсенал пула мобильных айпи у них крайне мал.
Он мал у операторов.
Пол года боты потихоньку подменяли собой часть трафика и постепенно их становилось больше. Сейчас от поискового, что было раньше осталась треть.
Оказывается это длится уже пол года и не только на одном, а на нескольких.
Если блокануть все ресурсы провайдера, который находится в Китае, это плохо или хорошо?
Можете заблокировать сразу все адреса APNIC по первому октету
статья - отличная
Пара технических комментариев:
1. " Так же много ботов идёт с IP-сети, которая подписана как IPv4 address block not managed by the RIPE NCC" - данная фраза означает, что подсеть регулируется не RIPE NCC, а другой региональной регистратурой. Т.е., если по простому, адрес (по гео) не европейский и не из бСССР.
2. Автор в числе прочего упоминает блокировку по AS, но не говорит при этом, что этот метод значительно опаснее блокировке по целому диапазону IP: как правило, оператору услуг выдаётся одна автономная система, от которой анонсируются все принадлежащие ему подсети. Т.е. блокировка по AS равносильна блокировке всех ресурсов провайдера.
С доге все просто. Маск что-то написал - пошел рост. Про другую напишет, пойдет спад.
Беда в том, что так с любой криптой. Нужные люди распускают приватные слухи или публичные мнения. А потом собирают сливки.
Т.е. беда в другом - что этого не понимают многочисленные "аналитики".
Разбавлю очередной раунд разборок пятничным размышлением.
Нынешняя ситуация с трафиком один в один напоминает ситуацию со ссылочным 10-15 лет назад. Тоже было много дискуссий об этической стороне вопроса, что такое чёрные ссылки, что такое белые и серые, можно ли делать дорвеи, можно ли создавать (какое кощунство) сайты только для ссылочного донорства, и т.д. и т.п.
Чем всё кончилось, известно. Сейчас эти рассуждения кажутся смешными. Инструмент должен работать, и всё. Безо всякого морализаторства.
Надеюсь, что понимание этого вывода в связи с бототрафиком к людям придёт достаточно скоро. Точнее, давно уже пора бы.
Какие?
А самый главный плюс, это возможность корректировки правил в любой момент самостоятельно.
Начнем с того, что это в любом случае это программа со своими плюсами и недостатками, по которым ее можно вычислять. Вопрос надо ли? Вычислять ботов, блокировать их? У всех программ, есть одно общее отличие от живого трафа - цель этой программы. Уберите цель и все, нет никакой эмуляции. "Цель" - будет всегда!
- Алаев предлагает это сделать Яндексу. На что Яндекс грубо отказывается, и идет по тому же пути: борьба с ботами путем понижения, повышения сайтов, путем не учета и блокировки. Уберите цель у ботоводов и вы решите проблему.
- на сайтах аналогично. На графике, все разрешено, никаких блокировок, скрытие метрики есть, но это не помогает .
При этом без разницы какие бывают боты, и с каких IP они идут
Все влияние, только за счет, влияния на соседние сайты в выдаче ПС. Что приводит к выводу, что крутить ПФ придется, каким способом, это уже другой вопрос
Я не очень понял, что Вы хотели сказать, поэтому выскажу несколько соображений по поводу ботов.
Человеческое поведение сложно и многогранно только в реальном мире. Когда пользователь заходит в Сеть, возможность описания его активности автоматически сужается и деградирует на несколько порядков. Особенно если речь идёт не о видеочате, например, а о работе с сайтами и поисковыми системами.
Исчезает вербальность, исчезает возможность фиксировать эмоции, тембр голоса или мимику, резко сужается пространство интерпретации его поведения. Мы не можем сказать, что происходит по ту сторону экрана. Человек сомневается в выборе товара, или слушает музыку, или его отвлёк ребёнок, или он вспомнил о важном событии - а скрипты фиксируют лишь движение курсора на 2 миллиметра вправо и увеличенную паузу при заполнении корзины. И засчитывают так называемый "отказ". Без понимания истинной картины происходящего.
Поэтому увы, но эмулировать человека боту не просто, а очень просто. Всё сводится к набору базовых событий (набор текста, клик, скроллинг, тайминги между ними) и базовых параметров (заголовки, куки, js, плагины, установленный софт и версия системы, и пр.) с последующими их вариациями.
Это всего лишь конструктор, весьма несложный. Который просто нужно правильно собрать.