Компания собирает данные для какого-то своего проекта, устаревший агент можно объяснить неразберихой после слияний и перестановок.
Проще всего, конечно, написать на контактный емейл с просьбой разъяснить, что это за краулер и почему он так странно представляется. Вместо этого автор темы предпочитает вопли и домыслы.
Ну, хозяин - барин. Главное, чтобы остальные поняли, о чём идёт речь.
Не знаю, что такое шапка темы. У темы есть название и первое сообщение. Ни там, ни там точная информация не указана - указана ссылка на агента и Ваши многочисленные фантазии на счёт подделок, нагло под видом и прочие домыслы.
В общем, обманывать нехорошо.
Это датацентр, а не хостинг. И далеко не Битерики. Вы же умный. Про LLC знаете. А тут и того проще.
Бедняга не понимает, что перед ним не Битерика какая-нибудь, а огромный холдинг. Кроме прочего, и пиринговый центр, и мобильный оператор, и всё на свете. А тут увидел слово "хостинг", на него сработал рефлекс.
Ничего, жизнь научит.
Дело не в гениальности, а в работе определённых участков коры головного мозга. У Вас они, видимо, развиты не так сильно.
И в любом случае для работы воображения нужна база. Чем больше и ярче, тем лучше.
Капча зависит не от рентабельности, а от технической реализации защиты. Кто, что и по каким критериям считает высокой или критической нагрузкой.
Понятно, что всё упирается в деньги в конечном итоге. Но взаимосвязь здесь не такая непосредственная, как кажется.
Это тоже вопрос архитектуры. К примеру, для такой нагрузки требуется всего пара-тройка не самых сильных машин:
Имеются в виду пиковые значения(справа вверху).
