Дибилоидный bing по 100500 раз скачивает страницу за обход - Форум об интернет-маркетинге
Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 12.04.2017, 11:50   #1
Профессор
 
Регистрация: 10.02.2015
Адрес: Киев
Сообщений: 874
Репутация: 3939

По умолчанию Дибилоидный bing по 100500 раз скачивает страницу за обход

За минуту одну и ту же страницу скачивает по 6 раз.
В чем соль?
livetv вне форума   Ответить с цитированием

Реклама
Старый 13.04.2017, 11:10   #2
yodda
Кандидат наук
 
Регистрация: 22.03.2017
Сообщений: 322
Репутация: 11018

По умолчанию Re: Дибилоидный bing по 100500 раз скачивает страницу за обход

В robots.txt

User-agent: bingbot
Crawl-delay: 30
yodda вне форума   Ответить с цитированием
Старый 13.04.2017, 11:13   #3
livetv
Профессор
 
Регистрация: 10.02.2015
Адрес: Киев
Сообщений: 874
Репутация: 3939

ТопикСтартер Re: Дибилоидный bing по 100500 раз скачивает страницу за обход

Ну будет скачивать страницу 6 раз за 3 минуты

На многих сайтах я вообще забанил его за ненадобностью
http://searchengines.guru/showthread.php?t=952399
livetv вне форума   Ответить с цитированием
Старый 13.04.2017, 11:14   #4
yodda
Кандидат наук
 
Регистрация: 22.03.2017
Сообщений: 322
Репутация: 11018

По умолчанию Re: Дибилоидный bing по 100500 раз скачивает страницу за обход

Зря, мне на одном сайте он приносит 30% посетителей. Причем выстрелил неожиданно
yodda вне форума   Ответить с цитированием
Старый 14.04.2017, 10:18   #5
Ingvarr
Академик
 
Аватар для Ingvarr
 
Регистрация: 26.04.2009
Сообщений: 3,515
Репутация: 149669
Социальные сети Профиль в ВКонтакте

По умолчанию Re: Дибилоидный bing по 100500 раз скачивает страницу за обход

Цитата:
Сообщение от yodda Посмотреть сообщение
Зря, мне на одном сайте он приносит 30% посетителей. Причем выстрелил неожиданно
а какой язык текстов на сайте?
__________________
ingvarr.net.ru
Ingvarr вне форума   Ответить с цитированием
Ответ




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 05:17. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны