- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Не нашел рубрики "безопасность сайтов" или "для поисковиков открывать двери" ))
Сегодня странно начался день.
В логах увидел расстрельную серию из 1302 заходов по ссылкам явно ботом.
но бот какой-то новый
агент:
Mozilla/5.0 (X11; I; Linux 2.6.22-gentoo-r8 x86_64) Gecko/20071115 Firefox/2.0.0.10
Информация об IP-адресе 194.67.18.198
по данным RIPE:
inetnum: 194.67.18.0 - 194.67.18.255
netname: AGAMA
descr: Moscow, Russia
у меня уж есть blackList из 24 грязных ботов)
Кто-нить находил такую "радость" у себя на сайте?
на прошлой недели был какой то странный бот из Ижевска выкачал весь сайт, может просто воровали контент (IP-ник где то в базе лежит ).
а как закрыть доступ ботам которые не с ПС?
а как закрыть доступ ботам которые не с ПС?
Если у вас виртуальный хостинг, то через .htaccess (вручную добавлять ip ботов)
Ну, если сайт статичный, типа справочника, может кто-то просто захотел сделать себе копию на локальный компьютер=) За однократное скачивание банить смысла не вижу (всё равно скачал-ведь уже, а ip может быть и динамическим).
У меня недавно какой-то южноафриканец новый сайт скачал, причём без графики, а в юзер-агенте было что-то стандартное типа WinXP + MSIE 6.0
дубль дубль
а как закрыть доступ ботам которые не с ПС?
надо обрабатывать тройку ip - agent - uri и пропускать только корректные заходы поисковых ботов