юни

юни
Рейтинг
933
Регистрация
01.11.2005
alaev #:
Но я понимаю, что хочется дешево и сердито, т.е. чтобы вы им сразу уронили все сервера.
Странный вывод. Никто никого ронять не хочет - напротив, и Озону, и Яндексу, и остальным парсеры желают счастья и процветания. Ведь они приносят деньги.
alaev #:
Если ваша промышленность будет рентабельна при более дорогом парсинге с меньшими нагрузками, то они вам начнут кидать капчу, как это делают яндекс или гугл.

Капча зависит не от рентабельности, а от технической реализации защиты. Кто, что и по каким критериям считает высокой или критической нагрузкой.

Понятно, что всё упирается в деньги в конечном итоге. Но взаимосвязь здесь не такая непосредственная, как кажется.

alaev #:
Ваш парсинг требует много дополнительных серверов.

Это тоже вопрос архитектуры. К примеру, для такой нагрузки требуется всего пара-тройка не самых сильных машин:


Имеются в виду пиковые значения(справа вверху).

Delysid #:
Я уже убеждён, что всё правильно делаю
Чудесно.

Повторюсь, дьявол в деталях. Так-то услуги хостинга и у федеральных провайдеров есть.

Главное потом не возмущаться, отправляя в блеклисты всех "хостеров" скопом и удивляясь, что от этого нет никакого толку. В лучшем случае.

Delysid #:
LCC это компания с ограниченной ответственностью

Вот это новость. Ещё немного, и Вы найдёте форму собственности большинства филиалов Яндекса. Правда, Чеко в этом не всегда поможет.

Только всё это не имеет отношения к делу. Адрес, который Вы дали, принадлежит LIR'у, а лир может заниматься чем угодно. Хоть ip-телефонией. Для которой, как ни странно, тоже может быть нужен датацентр. Более того, в датацентры идёт вся оптика от маршрутизаторов, которые обслуживают жилые массивы. Те, что с домашним интернетом и бесплатным доступом к онлайн-кинотеатрам на полгода.

Видите, какие чудеса.

И да, никаких "кто-то, нагло, под видом" и пр. Мейловцы и запускают. Собственными руками.

alaev #:
Но если настроить, то он все соберет

Дьявол в деталях.  389 позиций ни о чём, промышленный объём это миллионы, т.е. десятки запросов в секунду.

alaev #:
Рандомную подкатегорию всю читает.

Это сколько позиций?

В чатах парсеров больше всего жалуются именно на Озон. И на 2Гис.

Delysid :
Весь AS

Вся.

Delysid :
Проверяем что такое M100 LLC

М100 может быть просто брендом. Никаких указаний, что владелец является хостингом, нет.

LEOnidUKG #:
для ХЗ каких уже целей

Скорее всего, выкатят новый сервис через некоторое время. Или не очень новый.

У Озона одна из наиболее серьёзных защит от парсинга.
Многие провайдеры предоставляют услуги хостинга, это надо учитывать.
bb25 #:
Со слов Дурова, пока не дотягиваются

Правильная оговорка.

Со слов у всех всё в порядке. А на деле любой крупный проект сотрудничает с властями, причём с упреждением. Иначе не станет крупным.

Всего: 34981