fliger

fliger
Рейтинг
113
Регистрация
17.09.2015
Реальна ли такая защита от парсинга
sochi-russia #:
Около 1000 строк в htaccess это дикое замедление сайта
На основании чего сделан такой вывод?
Закрыть доступ к ссылка site.ru/?ssilka через htaccess
Антоний Казанский #:

Здесь ключевое различие. В первом случае - это адрес внутренней страницы, который начинается со знака "?"

Во-втором случае - это вариант внешнего обращения

Интересное умозаключение. Откуда вы знаете, что разработчик заложил в своем скрипте, передавая в него данные через $_SERVER['QUERY_STRING']?

Как заблокировать маскирующих ботов под Яндекс
Vladimir #:
Изучаем тему - клоакинг через переводчики
Устаревшая информация. В переводчике Яндекса нет никакого iframe от слова совсем. В Гугле не смотрел.
Как заблокировать маскирующих ботов под Яндекс
Vladimir #:
Запретить iframe и нет проблем
Так сайт на https://translated.turbopages.org/ не через iframe выводится, а напрямую в теле страниц. Сейчас шаманил - никак не определишь, что Яндексбот с translated.turbopages.org на сайт заходит.
Как заблокировать маскирующих ботов под Яндекс

В обоих случаях на сайт зашел робот Яндекса:

141-8-142-38.spider.yandex.com
5-255-253-37.spider.yandex.com
Под кого он маскируется?
Реальна ли такая защита от парсинга
AfterWar #:
спарсят с вебархива
Сохранение сайта в вебархиве элементарно банится.
Странные переходы из всех соцсетей
Veserias #:
Подскажите, как именно банить ботов?
Использовать .htaccess и PHP
Блокировка в PHP доступа на сайт по HTTP_USER_AGENT
Алексанр :
Может есть способ как это реализовать в .htaccess
SetEnvIfNoCase User-Agent "^Mozilla/5\.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537\.36 (KHTML, like Gecko) Chrome/[\d\.]+ Safari/[\d\.]+$" Macintosh
Order Deny,Allow
Deny from env=Macintosh
Пустой знак вопроса на конце урла
HotLab #:
Такой же код как раз и использую, но почему-то на внутрянках он отказывается работать (

Так попробуйте (если нужен POST, добавьте его после HEAD):

RewriteCond %{THE_REQUEST} ^(?:GET|HEAD)\ /([^\?]*)\?\ HTTP/
RewriteRule ^.*$ https://site.ru/%1? [R=301,L]

Пополнение ЮМани через терминал
Had #:
Буду класть теперь в Сбере - терминалы.
Какие-то танцы с бубном. Деньги можно хранить в банке, пополняя карту через банковский банкомат/терминал. А ЮМани пополнять переводом по СБП - мгновенно и без комиссии. Периодически так делаю (расплачиваюсь везде ЮМанями). Или у вас нет банковских карт/счетов?
1... 34567891011 ...71
Всего: 707