Хостер блочит поискового бота, предлагая переехать на вдс

Красавцы!

Если что, и на VPS клиентам можно любых ботов заблокировать. +1 к домашнему серверу )

А Вас что больше возмущает ?

Что заблокировали без вашего уведомления ? -- (Так на шареде хостер имеет и право и возможность так делать)

Или за потерю поискового трафика переживаете ? -- (Так нет оттуда трафика на русские сайты)

есть такие клиенты, которым надо и bing, и всякие ноунеймы вроде aspigel, короче всякая шалупонь, которая своими запросами мешает нормальному, рядовому клиенту, а иногда очень мешает

Адрес недоступен.

В TOS хостера есть упоминание о блокировки ботов? Или в публичной оферте?

Поржал с ТС, где он пишет в поддержку про употребление... :D

Да хостеры сейчас на все имеют право. Сегодня бинг, завтра яша, послезавтра гугл блокнут. А додики деньги потом платят оптимизаторам, когда у сайта проблемы возникают.

У меня идут человек 10-20 в день. Дело ведь не конкретно, есть или нет трафик. Завтра последуют примеру бегета, который вообще запретил индексацию поисковикам из-за нагрузки.

---------- Добавлено 18.06.2020 в 13:27 ----------

Если для вас майкрософт это шалупонь, компания, у которой миллиардные сервисы, ну ставьте тогда Bolgenos.

Для вас - нормальный рядовой клиент, это ЛОХ. Которому можно сразу втюхать дедик для одностраничника и предложить "совсем дешево" раскрутку, ну чтоб улучшить видимость в поисковиках.

Можно подробнее с этого места и пруфами?

Хз. Сам портянки эти, которыми жопу подтереть не листал. Если бы было, то скорее всего, сразу бы ткнули носом, мол ниче не знаем, вон у нас в офёрте прописано, что поисковым роботам доступ закрыт, а заходить можно на свой сайт только с locahost.

Саппорт лишь извинялся.

---------- Добавлено 18.06.2020 в 13:36 ----------

А я реально подумал, что саппорт угарает. Ну как можно лочить поисковик. Да еще и по умолчанию. Зато у меня по логам тут же школота ломанулась через exit-ноды tor'a в 20 потоков парсить. Их то никто не поблочил.

---------- Добавлено 18.06.2020 в 13:43 ----------

https://talk.pr-cy.ru/topic/26571-budte-vnimatelny-s-beget/

Но, я находил на каком-то другом хостинг обзоре типо hosting101. Может уже ссылки стухли или подтерли. Там даже был офиц. коммент от бегета, сначала тоже говорили, типо переходите на свои сервера, потом вроде извинялись.

Больше интересуют мнения, чем же таким может мешать бингбот

# cat access.log-20200618 | wc -l
1668779

# cat access.log-20200618 | grep "+http://www.bing.com/bingbot.htm" | wc -l
113249

# cat access.log-20200618 | grep "+http://yandex.com/bots" | wc -l
109748