Форум Сайтостроение Веб-строительство

Защита от парсера, гонка вооружений

1 23
юни
На сайте с 01.11.2005
Offline
903
юни
#21
wwwwww:
тот же Яндекс пока борется с парсингом Вордстата капчей и баном целых подсетей

И проверками, видимыми уже в коде страницы. И анализом поведения.

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
Ayavryk
На сайте с 11.10.2003
Offline
209
Ayavryk
#22

Если есть уверенность что SE-боты всегда представляются(?) то наверное можно

1. Проанализировать скорость и количество обращений к сайту с одного IP

2. Проанализировать загрузку со скачиваемых страниц сопутствующих данных - js,css,картинок, ajax,iframe. Маловероятно что парсеры будут 100% делать все это. Вводить десятки и сотни случайно меняющихся алгоритмов проверки, чтобы злостные парсеры затрахались.

Тынгыр, мынгыр, комсомол (http://erum.ru). Ехари, ехари, (жалобно) аяврик. /народная тунгусская песня/
[Удален]
#23

Ayavryk, да хрень все это. Я вон у юни куплю сетку за бутылку на час и все выкачаю.

юни
На сайте с 01.11.2005
Offline
903
юни
#24

Вот из-за таких, как ты, сетки и банят... не буду с вами дружить.

[Удален]
#25

юни, лан-лан у глобалтела куплю)))

Ayavryk
На сайте с 11.10.2003
Offline
209
Ayavryk
#26
Miha Kuzmin (KMY):
Ayavryk, да хрень все это. Я вон у юни куплю сетку за бутылку на час и все выкачаю.

Не верю. В реале ты эту бутылку сам выпьешь, а контент накачаешь стандартным парсером там где никто не защищает.

ЗЫ где-то здесь приводили пример статистики. Введение Ajax-защиты форм на досках объявлений-форумах снижает спам > 95%

Вывод - если стоимость взлома хоть на копейку стоит дороже выгоды от него, никто ломать не будет.

[Удален]
#27

У вас, молодой человек, параноя, я смотрю. На почве защиты непойми чего от непойми чего)

1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий