сервис для запрета скачивания сайта

Там просто реферрер проверяется, и если он не содержит dreamtemplate.com, то пользователь высылается.

if (strpos($_SERVER['HTTP_REFERRER'],'dreamtemplate.com') === false)

{

echo 'гуляй лесом';

exit();

}

Мощне защита 😂

Поисковых ботов тоже отфутболивает?

Есть два варианта, простой(.htaccess) и посложнее (скриптами):

Посложнее:

Надо написать небольшой код PHP плюс использовать robots.txt.

Можно в самом начале КАЖДОЙ страницы создать ссылку

<noindex><a rel='nofollow' href='/trap.php' style='display:none;'>trap</a></noindex>

также в файле robots.txt(не уверен teleport обращает на него внимание или нет) прописать запрет на индексацию trap.php

User-agent: *
Disallow: /trap.php

PHP скрипт в trap.php - записывать в сессии инфу о том что в ловушку попал бот

session_start();
$_SESSION['bot-trap']=$_SERVER['HTTP_USER_AGENT']; //можно даже лог вести если надо
die();

Во всех скриптах (index.php...) в начале прописать, что-то типа:

session_start();
if(!empty($_SESSION['bot-trap']) || preg_match("/teleport/i", $_SERVER['HTTP_USER_AGENT'])) die('сайт закрыт для ботов');

Через .htaccess:

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^teleport\ pro
RewriteRule .* - [F]

возможно допустил где-то ошибку, на практике не проверял

а сервис есть похожий?

На PHP используя CURL парсер будет имитировать человечность (реферрер, браузер и тп)

+ втупую написать не заходить trap.php

+ можно через прокси каждый запрос

Так что от хорошего граббера вы защиты не найдете.

ну предварительно наверно User-Agent проверяется :)

Было б так все просто )

Можно еще проверять на частоту запросов. Если пользователь пробует загрузить более 3-4х страниц в секунду, то делать из этого выводы.

хм, ставить рендом sleep это правило хорошего тона для парсера :D Так, что всегда поможет.

у меня последний парсер жрет в 100 потоков, без пауз и через прокси, видимо мой парсер обладает дурным тоном :D