- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Зачем быть уникальным в мире, где все можно скопировать
Почему так важна уникальность текста и как она влияет на SEO
Ingate Organic
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем привет
Сайт атакуется ботом:
User-Agent : meta-externalagent/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)
Большинство ботов успешно поддалось блокировке через Cloudflare или файл htaccess, но этот никак не сдается.
Кто с ним уже сталкивался, подскажите. пожалуйста, как его можно заблокировать?
Сайт атакуется ботом:
Что значит атакуется? Какой IP номер у робота?
как его можно заблокировать?
Настоящий робот от мордокниги полезный.
Зачем его запрещать?
Большинство ботов успешно поддалось блокировке через Cloudflare или файл htaccess, но этот никак не сдается.
А как вы их блочите?
Можно по user-agent заблочить, но это только для белых ботов, которые не меняют свои юзер-агенты и честно о них заявляют.
Настоящий робот от мордокниги полезный.
Зачем его запрещать?
Он создает огромную нагрузку на сервер
Давно уже придумано как мордокнигой парсить сайты. Отсюда и навал такой. В целом, я бы забанил заходы с фейсбука или по юзерагент, или по ASN.
Напишите, пожалуйста, как именно забанить этого бота (что и куда прописать)?
В базовом случае, для хтассесс, есть возможность банить и по айпи и по юзерагент. Так что просто загуглите, как это делается.
Откройте логи сервера и напишите сюда несколько айпи адресов, с которых приходил этот бот.
В базовом случае, для хтассесс, есть возможность банить и по айпи и по юзерагент. Так что просто загуглите, как это делается.
Если добавить это:
RewriteCond %{HTTP_USER_AGENT} meta-externalagent [NC,OR]
в файл htaccess, то должно помочь?
Если добавить это:
RewriteCond %{HTTP_USER_AGENT} meta-externalagent [NC,OR]
в файл htaccess, то должно помочь?
Зависит от версии апач на сервере, до 2,4 или после.
Попробуйте и со своим, и с этим.
Кто с ним уже сталкивался, подскажите. пожалуйста, как его можно заблокировать?
Он создает огромную нагрузку на сервер
Если этому боту отдается ошибка 302, то никакой нагрузки на сервер он не создает
Думаю вы ошиблись, 302 - это временный редирект.
403 - доступ запрещен.