- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Очевидно что единичную страницу от скачивания не защитить.
Интересуюсь простенькой защитой от автоскачивания ламерами через .htaccess Может кто поделится готовыми наработками ?
Я себе это представляю так: если за любые 5 секунд скачено больше 10 страниц - для ip адресса качка выдаётся forbiden (бан)
Возникает сложность с поисковиками, они то точно качают быстрее ... Насколько надёжно если в этом правиле сделать исключение для Юзерагентов интересующих меня поисковых систем ? Качают ли боты сайты с нехарактерными Юзерагентами (например Мозилой) ?
Не факт, я как то писал свой логгинг для сайта, интервал между обращениями например гуглбота был 10-15 сек (с одного хоста).
Яндекс без стеснения берет и по 20 страниц в секунду. Попробуйте так
Этим методом не решить проблему, т.к. количество обращений в единицу времени грабера к сайту можно регулировать.
Hank, могу просто список граберов в хтаксессе выкатить. Есть готовый.
Hank, могу просто список граберов в хтаксессе выкатить. Есть готовый.
буду очень признателен ...
отправил в личку.
выделил как ПХП (чтобы код не покрючило автоматом)
Вообще это в хтаксесс вписывается
Avatar, спасибо. Просто супер. 🍻
Вот вам пример защиты контента :-)))
http://images.yandex.ru/yandpage?q=1785177136&p=0&ag=ih&rpt2=simage&qs=rpt%3Dimage%26text%3D%25D0%25C4%25C4
ИМХО все эти защиты не эффективны, т.к. те кто копируют контент пользуются прокси и не одной сотней;)
Ставьте побольше ссылок внутри контента, можете получить пользу;)
beroot, не согласен. Воришки есть разного колибра.
Тех кто профессионально тырит, не так уж и много.