- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте!
Обнаружил пару месяцев назад каталог, который льёт ботов с подменой реферера на клиентские сайты, с целью последующего платного закрепления (клиентского сайта) в нём.
50% переходов (с url этого каталога в реферере) я заблокировал, но есть ещё 15% с url - http://yandex.ru/ (без параметров), остальная часть переходов - боты с url сайтов моего региона в реферере.
Как заблокировать http://yandex.ru/ без параметров, но не блокировать реальные переходы с yandex.ru (с параметрами, например, http://yandex.ru/clck/jsredir?from=yandex.ru*)?
Там должна работать обычная проверка регулярным выражением. Что-то типа
Стесняюсь спросить, а зачем блокировать? Хостинг трещит?
И блокировать надо по айпи
Стесняюсь спросить, а зачем блокировать? Хостинг трещит?
И блокировать надо по айпи
Статистику неудобно анализировать - накрученного трафика на порядок больше чем естественного.
---------- Добавлено 02.02.2017 в 12:04 ----------
Там должна работать обычная проверка регулярным выражением. Что-то типа
Спасибо за отклик, но хотелось бы точно знать, что не отсеку естественный поисковый трафик с yandex.ru.
В серверных логах и метрике, много заходов с url http://yandex.ru/ в реферере, что противоестественно - так с яндекса не заходят. Вот если бы отсечь эти заходы, но оставить с нормальными признаками...
Спасибо за отклик, но хотелось бы точно знать, что не отсеку естественный поисковый трафик с yandex.ru.
В серверных логах и метрике, много заходов с url http://yandex.ru/ в реферере, что противоестественно - так с яндекса не заходят. Вот если бы отсечь эти заходы, но оставить с нормальными признаками...
И чем плох мой вариант? Вот смотрите
Только что проверил: запросы с заголовком
получают ответ Forbidden 403
Запросы с заголовком http://yandex.ru/?test=1 и http://yandex.ru/click/ отработали нормально. Мне кажется это именно то, что вы хотите
И чем плох мой вариант? Вот смотрите
Только что проверил: запросы с заголовком
получают ответ Forbidden 403
Запросы с заголовком http://yandex.ru/?test=1 и http://yandex.ru/click/ отработали нормально. Мне кажется это именно то, что вы хотите
Спасибо!
Я не сказал, что этот вариант плох - просто, воспринял вашу фразу "Что-то типа", как "Возможно", и что ваш вариант ещё потребует эксперимента.
Ещё раз, спасибо за помощь!
Соберите данные на этих ботов, их ip, user agent. Проанализируйте, возможно вы сможете найти параметр по которому заблокируете их. Возможно они с нескольких IP всего заходят или под одним Юзерагентом
От накрутки перепишите скрипт счетчика, не учитывайте повторные хосты за сутки, если они этим пользуются.