- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
С роботностью пока только заблокировали следующих ботов: FriendlyCrawler/1.0|PerplexityBot|ClaudeBot|ExaSearchBot|Reflectionbot|LinkupBot|weborama-fetcher|MJ12bot|ImagesiftBot|SemrushBot/7~bl|Barkrowler/0.9|Amazonbot/0.1|msnbot/2.0b|SeznamBot/4.0|matlistan/1.0|BLEXBot/1.0|coccocbot-web/1.0
Но судя по статистике это особо не помогло. Самый главный вопрос - как с роботностью быть, что делать?
Эти роботы представляются и поэтому в метрике не отображаются. Надо через метрику смотреть время захода бота, а потом через раздел "все посетители" анализировать IP всех посетителей, зашедших в данную минуту, вычислять среди них ботов и их блокировать. У меня несколько дней назад кто-то пытался повысить ботность и с одного единственного IP за 20 минут вот так наследил:
То что их заблокировал, ничего страшного?
главное - не заблокировать поисковых ботов. все остальные боты - по желанию. кому как нравится. но keys-so-bot надо тоже заблокировать. он очень прожорливый
главное - не заблокировать поисковых ботов. все остальные боты - по желанию. кому как нравится. но keys-so-bot надо тоже заблокировать. он очень прожорливый
Я не понял, как технически блокировать ботов, о которых вы говорите?
У меня вообще список такой HeadlessChrome|AIMP|wpbot|Pinterestbot|facebookexternalhit|Facebot|Twitterbot|Applebot|Dart|Go-http-client|Screaming%20Frog%20SEO%20Spider|ChatGPT-User|OAI-SearchBot|ias-va|Re-re%20Studio|NSPlayer|BASS|DotBot|ZoominfoBot|yacybot|BLEXBot|MJ12bot|SemrushBot|AhrefsBot|UNTRUSTED|FMODStudio|Winamp|CriteoBot|CFNetwork|radio2|widget|RadioApp|keys-so-bot|t3versionsBot|Dartt|SeopultContentAnalyzer
facebookexternalhit
facebookexternalhit убрал потому что якобы без него ссылка в этой соцсети будет неаккуратная.
А cloudbot вы не блокировали?
А cloudbot вы не блокировали?
а там 600к в секунду
Берите больше! В наносекунду!!
Речь шла про суточную посещалку. С достаточно агрессивным кэшированием и внешним S3 или CDN для статики такую нагрузку выдержит и за 2-3к простенький vps.
мешает пользователям
Переживут как-нибудь.
заблокировали следующих ботов... Но судя по статистике это особо не помогло
Потому что это не поведенческие боты, а краулеры. Поведенческие притворяются обычными пользователями. Фильтровать их - это pain in the ass и скорее всего нормально не получится сделать.
За РСЯ вчера - 422 руб
Дайте ему "настояться", доход может измениться через несколько дней.