У меня есть опасение, что, если эти дятлы поймут, что бездумно парсить больше не получится, они будут вручную это делать и заметать следы типа внутренних ссылок и картинок, что еще хуже.
Конечно, если парсят до нескольких сотен страниц, нужен другой способ.
Недооцененный комментарий. Наверно потому, что суть технологии не описана полностью.
Это мой любимый способ. Работает мощно и сурово. Против самых изощренных парсеров.
Напишу алгоритм:
1. В логах выявляем с каких именно IP парсит "пациент". Это важно, работа точечная.
2. Подготавливается список нехороших фраз, за которые банят рекламные сети. Обычно способ применятся против заграничных парсеров, поэтому речь чаще всего идет об Adsense. Как знают опытные адсенсоводы, страницы улетают в оскорбительный контент за самые невинные фразы, особенно на темы нац. меньшинств.
3. На каждой странице только для запросов с IP мастера парсинга незаметно заменяем несколько словосочетаний на наши заготовленные.
4. Контент, обогащенный правильными фразами, уходит на сайт вредителя.
Я видел как таким способом в бурже были отражены несколько самых сложных атак парсеров, которые запускали сбор с новых подсетей IP в случае блокировки старых.
Достаточно только незаметно зацепиться за паттерн IP парсящего. Даже если используются сотни IP, чаще всего они с нескольких подсетей, откуда не заходят обычные люди.
Метод называется Data Poisoning (Отравление данных). Особенно хорош, когда парсят магазины или таблицы с ценными цифровыми данными.
Парсящие, насосавшись д*рьма, только через пару недель понимают что именно они разместили на своих сайтах 😁 👍
Это у вас ...., у вас ....., у вас огромный рост расходов... Патриотизм прокачанный пропагандой - это болезнь. В нем нет ни капли здравого. Только злоба (которую вы пытаетесь приписать мне) мания величия, вера в великого кормчего, и штампы пропаганды. Созданные тупыми для недалекий.
Проблема нас, что особо злобные клоуны (не имею в виду кого-то из присутствующих), которых вы иногда принимаете за нас, на самом деле не мы.
Знавал несколько якобы злобных патриотов. Таких, которых многие западные жители, похоже, воспринимают как голос народа России. Так вот, эти поганцы попетушились и что бы вы могли подумать... сбежали из России.
Как стыдно за таких, и за то, что их принимают за нас и считают их злобные заявления нашими.
При оценке ВВП на одного жителя следует вычитать из получившегося значения долю расходов, приходящихся не на улучшение благосостояния человека, а на борьбу с факторами окружающей среды.
Если вычесть из ВВП России дополнительные (по отношению к сравниваемым регионам) расходы на строительство, обогрев и ремонт сооружений и механизмов, получится совершенно другая сумма, значительно меньшая.
Климат - один из основных сдерживающих факторов экономики РФ.
Условный эскалатор внешних факторов, по которому взбирается Россия, уверенно движется вниз.
В то время как благоприятнейшие природно-географические факторы US могли бы вытянуть к процветанию и менее грамотно управляемую страну.
Сегодня трафик выше вчерашнего, а денег на 20% меньше вчерашнего, когда было новое дно. . Я столько же получал под фильтром, когда трафик упал с 4к до 2к. Как такое вообще возможно когда с четырех тысяч хостов получаешь столько же как с двух тысяч.
Пришли посетители без денег.
На отображение рекламы для них рся потратили серверных мощностей столько, сколько получили дохода.
Вот так и получается, что возможно.
Это очень печально. Не конкретно про него. А то что они все еще не понимают. Но возможно, просто делают вид
Тяжелая, массированная, тотальная пропаганда - первый по важности и основополагающий фундамент происходящего в первой четверти XXI века.
С понимания этого тезиса может начаться правильный ход рассуждений.
Учебник по работе с условным будущим РуГПТ.
На USD завязаны огромное количество софта, стандартов и протоколов.
Заменить их примерно так же сложно, как заменить Windows с Андроидом на GNU/Linux c SymbianOS у жителей всей земли.
Или как убедить программистов всего мира писать программы с помощью 1C на русском языке.
Или как заменить метры и килограммы на ярды и унции.
По разным причинам мышление всего мира заточено под английский язык, USD и метрическую СИ.
Специалисты изучают науки, основываясь на этих базовых референсах. Они прописаны в фундаментальном мышлении и пронизывают (почти) всю ценность, созданную человечеством в рамках новой и новейшей истории.
Отменить USD и английский язык означает отменить само человечество в глобальном смысле этого слова.
Прогресс идет в прямом направлении, а не в обратном.
Что вас тут пугает?
- А я чем вас напугал? Да не тряситесь вы так! (на этом мудацкий диалог предлагаю окончить и продолжить более конструктивно).
1. Группа людей производит сомнительные инициативы. Это их продукт. Он низкого качества.
2. Если жрать, что дают, качество будет только падать и рано или поздно начнут кормить тем, что вы точно не захотите.
Технически они могут быть с 1 сентября.
Скорее всего да - массовых не будет. С этим соглашусь.
Может быть, будут сначала какие-то единичные случаи.
Сейчас систему слепили из неподходящих субстратов и пригласили первых пользователей.
Если люди начнут массово пользоваться, разработчики решат, что и так сойдёт.
А если не спешить, может быть доработают до чего-то имеющего смысл.
Люди могут побежать пользоваться этим поделием на волне паники от боязни штрафов, а это не выгодно почти никому.
Потому паники обычно стараются избегать. И не спешить.