zygy, Тут входящие ссылки.
Interra, Скорее всего все взломанные сайты автоматически линкуются между собой. Напишите в гугл, себя избавите от возможных проблем и другим поможете.
DNS это DNS, он никаким боком не относится к защите ваших сайтов от DDOS атак.
Dinozavr, Я отдельно текст и шаблон проверяю, оставляю только текст без тегов и т.д, но сам текст может быть разный на 90%
colorito, Попробовал similar_text, очень медленная функция, остальное посмотрю.
borisd, Ваш метод проверяет 10к шаблонов в секунду, на данный момент самый быстрый способ, останавливаюсь наверно на нем, для текущих задач хватит.
TF-Studio, метод шинглов к сожалению смог разогнать только до 4к шаблонов в секунду.
---
Всем спасибо за помощь :)
borisd, Я сделал псевдохеш сверяя текс и шаблон, но размер этого хеша достаточно велик и поиск по такой базе происходит очень долго. Питон к сожалению не вариант.
Возможно он имел веду станицу в ВК "введите 4 последние цифры телефона" которая часто выползает если у IP постоянно разные регионы.
Если бы их заботила окружающая среда, то они бы запретили пластмассовые бутылки любой жидкости, а не только пива 😂
P.S: Тоже не понятен смысл закона, производители будут делать или бутылки меньше или еще что придумают, а покупатели будут просто брать вместо одной 2л, 2 по 1л, проблем то...
С dle давно не работал, но ссылки в новость выводили пару лет назад, так что возможность вывести что-то в новость должна быть, спросите в соседней ветке или на форумах под dle как вывести IP адрес после текст новости.
Если грабер использует прокси, то проще писать регистратору домена, хостеру, поисковикам и т.д, чем искать методы блокировки грабера.
Но если хочется заблокировать именно грабер, то можете прямо в текст новости выводить ip адрес запросившего страницу, в 99% случаев грабер подхватит новость как есть и вы увидите на сайте грабителя IP адрес с которого был запрос, такие адреса можете заблокировать. Но если запросы через прокси, то это трата времени.
Второй вариант, это динамическая генерация html кода новости, тогда грабер просто не сможет находить нужный текст по шаблону и попросту пойдет дальше, если конечно он вручную их не копирует с вашего сайта.
Да лучше бы они страницу заблокировали, она все равно пустая, даже город не указан, там я только с женой переписываюсь, "хлеб купить ?", "смотри какой кот" и т.д, но ша в основном это все через вайбер делается, а вот группу жалко было.
Был у меня печальный опыт с в вк, после этого там ничего не создаю.
Была у меня группа, не спамилась, рекламы не было, делал от души в свободное время, вроде бы все отлично, но в один прекрасный день вижу надпись "Группа заблокированная за нарушения правил ВК", подумал наверно взломали и что-то запостили, пишу в ТП, примерно неделю выясняю какие правила нарушила группа ?, в группе рекламы не было и постов на внешние ресурсы тоже, тематика больше SEO, но в основном блог по linux, через неделю наконец-то добился ответа и просто потерял дар речи.
Что-бы понять суть, немного расскажу что к этому привело. Где-то полгода назад перед этим мне написал заказчик и попросил логотип для своей программы "обмен лайками", ну логотип я сделал и передал оригинал изображения через свой домен, работа выполнена, заказчик доволен, конец. Этот домен я использовал в ВК только для передачи скришотов в .png клиентам (ничего криминального вроде-бы ?).
Теперь вернемся к тому из за чего мою группу заблокировали, оказывается тот софт попал в черный список ВК (оно и не удивительно), но каким-то образом они обнаружили что этот логотип когда-то был на моем домене, поэтому группу и заблокировали (поскольку я этот домен использовал в ВК). Ну вроде все понятно, надо только обьяснить что это просто логотип для клиента (к тому-же в группе этот домен вообще не использовался), что тут сложного ?, но когда я сказал что это я сделал логотип для софта, меня чуть ли не послали из ВК и попросили вообще не вести никакой деятельности на ВК и не в коем случаи не выполнять заказы на фриланце связанные с ВК.
В общем еще недели 2 общения с ТП ни к чему не привели, ответ был один, "Вы создали логотип для софт нарушающего правила ВК и тем самым сами нарушили правила ВК, скажите спасибо что вашу страницу мы не заблокировали".
-----------------------------
Кроме этого было еще запросов 6 серьезных запросов в ВК и ровно 0 решений, но если попросить прислать нарисованного коня с рогами, вам его нарисуют, все что-бы вы не скучали. Для себя сделал вывод что техподдержки в ВК нету, там есть только группа клоунов которая развлекает людей когда им скучно, пишет музыку, делает рефераты и т.д, к сожалению это вся их задача в ВК.