Спарсили сайт целиком, как ограничить парсинг

1 23
kxk
На сайте с 30.01.2005
Offline
990
kxk
#21
damn-doubleclick #:
Не проще подключить Cloudflare? Сегодня забаните этого, завтра появится другой, послезавтра ещё один уже более опытный.

В Cloudflare есть возможность блокировать базовый парсеров / граберов. Там же интерфейс дружелюбный для отслеживания недругов. Правда вроде бы надо заплатить 20$ в месяц за тариф Pro. 

Но это тоже не панацея, я сам обхожу свою же защиту сменив загрузчик, при этом можно настроить авто парсер, и сделать так чтобы планировщик проверял донор каждые 5-10 секунд. 

Более менее нормально работает блокировка "Likely Automated", но это уже фича Business. 
Есть разные методы борьбы с парсерами на самом деле и гораздо дешевле чем  Business  от клоуда
Ваш DEVOPS
W1
На сайте с 22.01.2021
Offline
306
#22

Для тех, кто читает только заголовки: у ТС не парсинг.

Мой форум - https://webinfo.guru –Там я всегда на связи
lutskboy
На сайте с 22.11.2013
Offline
191
#23
if ($_SERVER['HTTP_HOST'] != 'вашсайт.ру') {
        header('Location: https://вашсайт.ру');
        exit;
}

вставить в самый верх index.php файла который в корне сайта. после <?php

или cloudflare как писали выше. беспл тоже подойдет 

W1
На сайте с 22.01.2021
Offline
306
#24
lutskboy #:
вставить в самый верх index.php файла

Не сработает.

L
На сайте с 10.02.2015
Online
261
#25
Может просто кто-то в dns тому сайту прописал ваш IP?
T
На сайте с 11.08.2009
Offline
150
#26
Пару строчек на js решит проблему. Если домены разные, проверяйте текущее доменное имя и если оно не совпадает с вашим делайте редирект. При правильном детекте сайта, можно на проксирующем сайте вывести на весь экран например детородный орган и кинуть абузу хостеру. Им и хостинг грохнуть могут
1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий