Хостинги и Онлайн-сканеры сайтов (Скриминг Фрог, Сайт Аудитор, Нетпик и пр) - кто виновать и что делать

Понятно дело блокируют, у них своя политика работы и вы в эту политику вписываетесь когда арендуете шаред хостинг.

Он ваш равно настолько насколько там ваши данные и вы исправно платите за его аренду. Условия использования определяет хостинг.

Либо переносите на  VDS-VPS, либо 

Других вариантов, простите, нет.

Все верно. Если есть клиентоориентированные хостинги - туда и уходить. А остальные - пусть со своей политикой так и сидят.

Нравится, скажем, ник-ру нагибать клиентов на платный сертификат и ру-домены по 1000 - отлично, пусть нагибают. Я своих клиентов оттуда забрал уже всех. Дело житейское

Разница в цене есть и не маленькая. Ни я ни клиент - сервера не администрируем, а значит +Х руб к процессу.

Но вопрос не в этом, это для отдельной ветки дискуссия о +/-

Идеальные клиенты - где они? И перенесут по первому требованию и оплатят все что нужно...  Работаем с чем есть и весьма за умеренные деньги. Селяви на текущий момент.

Но вопрос не в этом, вирт.хостинги адекватные есть. Цель топика - спросить у формучан про опыт работы с многостраничниками на них, в частотности сканирование Фрогом и компанией.

Вот и всё какбэ

.

А вот как ни странно.. В том году была проблема (по ней и делал топик, в стартпосте указал) - там была проблема с хостингом аналогичная.

Малец потеребил их ТП, и надо же - в этом году на виртуалке сайты по 20-30к страниц без единой ошибки Фрогом берутся..

Я думаю 1-2 раза в месяц что собственник гоняет свой сайт Фрогом на виртуалке - вообще никак не проблема ни на сотую долю процента нагрузки для хостинга

В идеале бы конечно хотелось - чтобы владелец (имеющий доступ к панели) - мог гонять сайт без проблем. А вот чужак - никак не мог. Ибо зачем конкуренту меня парсить, мне этого не надо.

Я понимаю, надо писать в спортлото на эту тему, да забыл адрес, пишу здесь...

Всё верно. Тогда задача заняться поиском таких хостингом, где этих ограничений нет и перенести сайты туда, если это для вас критически необходимо.

В отношении клиентоориентированности "тот хостинг" скажет - мы пониманием вашу проблему, но в данном случае для шаред хостинга таких возможностей нет.

Вы - правы, дело житейское. Вам нужны другие тех. условия хостинга - ищите их. 

Идеальных клиентов нет. Есть люди с конкретными проблемами и их приходится в том числе организационно решать.

Когда получается: и клиент доволен, и все в едином порыве, и все счастливы от рабочего процесса, вот тогда возникает временная иллюзия про идеального клиента. 

Заметьте. Данная техническая необходимость (для контроля и мониторинга) нужна только вам, следовательно и вам искать решение. Вы можете идти по пути персональных настроек проксей и прочих программных особенностей, а можете каким-то чудом уговорить своего клиента перейти на другой хостинг.   

Про опыт и про возможные варианты вам (в том числе и я) писали в прошлой теме.

Вы опробовали эти возможности? Про результат их применения вы ничего не написали.

Как же вам ещё помочь, если мы вам советуем, а с октября 22-го года вы так и не продвинулись в этом вопросе?

Вам нужны спец. условия. Спец. условия на выделенном сервере. На шареде их нет. Смиритесь с этим :) 

Совершенно верно. Поэтому хостинги либо (и чаще всего) блочат массовые запросы подобным способом, либо выпроваживают проблемный аккаунт с обслуживания (либо в расширение услуг, либо в сад) :)