Кто там и чего для кого собирает вообще не известно.
Для ИИ парсят сайты, в маил ру будет вкладка с продажей товаров. Всё основано будет на ИИ.
Нет ты не можешь являться SEO специалистом такого незнать.
Речь идёт о ссылочном прогоне по логам серверов.
Ему надо ссылки с GOV и EDU чтобы сайт котировался в гугле.
Учись пока SEO король тут рядом:
По логам серверов прогон знаете что такое?
Это к тому, что оттуда людей можно ждать, а не ботов?
Там нету у них в лицензии вида деятельности услуг провайдера населению.
Это вы обманываете про Компания, в саппорте ответили?
Какая компания вообще по вашим словам, хостинг этот дочерняя компания.
Мало кто этот хостинг зарегистрировал и создал, этот хостинг может заниматься совсем другими услугами к примеру размещением серверов и хостингом.
Что мы и видим, не легитимные и поддельные боты сканируют сайты, поддельные user agent и не понятно кто парсит обманно сайты.
Компания собирает данные для какого-то своего проекта, устаревший агент можно объяснить неразберихой после слияний и перестановок.
Проще всего, конечно, написать на контактный емейл с просьбой разъяснить, что это за краулер и почему он так странно представляется. Вместо этого автор темы предпочитает вопли и домыслы.
Ну, хозяин - барин. Главное, чтобы остальные поняли, о чём идёт речь.
Никакая компания не собирает данные. Обманываете. Данные собирает непонятно кто с хостинга-датацентра на поддельных ботах Mail.RU_Bot/2.0.
Это к тому, что оттуда идут боты VK / Mail :D
Это не боты VK и не маил ру.
В user agente ботов ссылка не легитимная, поддельные боты идут.
Такое ощущение, что вы хоститесь на этом хостинге M100 или имеете отношение к компании VK, другого не вижу смысла, чтобы вводить людей в заблуждение.
Это же надо пропихивать теорию, что поддельные боты с дочернего датацентра - легитимные. 😑
Не знаю, что такое шапка темы. У темы есть название и первое сообщение. Ни там, ни там точная информация не указана - указана ссылка на агента и Ваши многочисленные фантазии на счёт подделок, нагло под видом и прочие домыслы.
В общем, обманывать нехорошо.
Какого агента, вы связать двух слов не можите и всё пробуете подцепить на ровном месте.
Прошу заметить вы грязный ботовод, который портит людям сайты и ещё про обманы мне тут пишете.
Я указал IP адреса - указал.
Я указал на кого зарегистрированы IP адреса - указал.
Поддельные боты ходят с дата центра компании M100.
Учредитель VK, но компания занимается размещение серверов и хостингом, что вашему умишку ещё неясно?
Это датацентр с услугами хостинга и услугами размещения своих серверов. Тут и того проще, в шапке темы ссылка на хостинг.
Пожалуйста удалитесь с моей темы.
Бедняга не понимает, что перед ним не Битерика какая-нибудь, а огромный холдинг. Кроме прочего, и пиринговый центр, и мобильный оператор, и всё на свете. А тут увидел слово "хостинг", на него сработал рефлекс.
Ничего, жизнь научит.
Туго у вас с пониманием элементарных вещей.
В user agent бота ссылка которая не работает. Раньше mail.ru ходил с сетки mail.ru, переименовали бы сетку в LLC VK, но нет они сетку присоединили к хостингу M100 LLC.
Жизнь меня научила уже давно, я чётко различаю мошенничество и мошенников.