- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Технология YandexGPT больше всего востребована в ИТ, ретейле и банках
Сервис получил новые возможности
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
5.255.253.194 - - [19/Jun/2015:21:55:43 +0000] "GET /forum/index.php?b77545c0b03f1cb HTTP/1.1" 200 9414 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
Выделенная строка все время разная. Несколько запросов в секунду. Создает паразитную нагрузку на процессор до 50%. Уже вторые сутки.
ЧЗХ?
Whois посмотрите, он вроде как не относится к Яндексу, возможно кто-то паука так замаскировал.
Обычно там прямо пишут что это Yandex LLC.
Ясно дело, это относится к Яндексу, зачем бы я тогда создавал топик
whois 5.255.253.194
% Information related to '5.255.253.0 - 5.255.253.255'
% Abuse contact for '5.255.253.0 - 5.255.253.255' is 'abuse@yandex.ru'
inetnum: 5.255.253.0 - 5.255.253.255
netname: YANDEX-5-255-253
status: ASSIGNED PA
country: RU
descr: Yandex enterprise network
admin-c: YNDX1-RIPE
tech-c: YNDX1-RIPE
remarks: INFRA-AW
mnt-by: YANDEX-MNT
created: 2013-08-05T08:01:38Z
last-modified: 2014-03-26T08:39:32Z
source: RIPE # Filtered
Выделенная строка все время разная.
А почему отдаётся 200 OK, такая страница существует?
PS: Может, "поиграть" с ботом- поотдавать ему редиректы на другие разделы форума?
Возможно, кто-то сделал страницу с такими ссылками и скормил её аддурлке. Если это действительно так, то виновника можно будет узнать в вебмастере через недельку-другую.
Crawl-delay: 0.1
Спасает
А почему отдаётся 200 OK, такая страница существует?
Это phpBB3 движок, он отдает 200 на неизвестные ему параметры, т.е. существует.
---------- Добавлено 20.06.2015 в 10:20 ----------
Возможно, кто-то сделал страницу с такими ссылками и скормил её аддурлке. Если это действительно так, то виновника можно будет узнать в вебмастере через недельку-другую.
Возможно; пока по фразе b77545c0b03f1cb ничего не ищется ни в G ни в Я.
Напишите тех поддержке http://help.yandex.com/search/robots/agent.xml?a=b
Касаемо службы поддержки Яндекса... а как туда сейчас вообще писать? Там же список типа ответов кинули... куда не кликай попадешь на дебильный совет.
У меня такая же беда с Mail-ботом была три дня. Ни Crawl-delay, ни в robots disallow не помогло. Забанил через ip, и частота запросов такая же была. Но это Mail, от Яндекс конечно не решился бы так кардинально избавиться.
Касаемо службы поддержки Яндекса... а как туда сейчас вообще писать? Там же список типа ответов кинули... куда не кликай попадешь на дебильный совет.
https://webmaster.yandex.ru/site/feedback.xml Вебмастере выбираете ваш сайт Обратная связь/Ваш вопрос по теме/потом может быть еще вопрос/ и потом открывается форма для заполнения и пишите в яндекс