Сервер 1тб или другое решение задачи

12
Cybr
На сайте с 10.01.2013
Offline
28
#11

Вы еще сразу просите кучу ip адресов, так как спарсить такой объем с одного адреса не выйдет.

http://mnogobyte.ru/ (http://mnogobyte.ru/)
yesRuslik
На сайте с 08.02.2009
Offline
178
#12
Алексей Викторович:
Коллеги, есть задача спарсить сайт с фотками. 10.000 авторов, по 50 фото каждый. Считали с программистом, вышел объем информации в 1 тб, примерно.
В данный момент арендую впс, с 20 гб места.
Как решить задачу?

Недорогой дедик справится с данной задачей.

С фотками дальше что будете делать?

Если задача стоит просто спарсить и хранить - можно вылить на какой-то бекап-хостинг данные и отключить сервер. Если фотки дальше будут использоваться на вашем сайте и будет прилично трафика на них, лучше сервер с SSD, чтобы не получалось затупов при отдаче такого количества статики.

Аренда выделенных серверов (http://yeshost.ru/) от 69 евро VDS сервер (http://yeshost.ru/vds) от 7.95евро Виртуальный хостинг (http://yeshost.ru/virtualhosting)от 0.95 евро Windows VDS хостинг скоро (http://yeshost.ru/vds)
R
На сайте с 28.06.2015
Offline
73
#13
CaravanTelecom:
Цены в рублях, есть бесплатный тест, дабы понять - подойдет подобное решение или нет.

Ага, только ждать сутки, пока манагер активирует его, заказать, верифицироваться по телефону и пользоваться - не получится. Видимо, забыли упомянуть, впопыхах. 😂

Рекомендую всем обнуляться ()
L
На сайте с 30.10.2015
Offline
34
#14

storage selectel можно использовать или хорошо сжимать фото

...
CaravanTelecom
На сайте с 15.09.2015
Offline
7
#15
reyicapow:
Ага, только ждать сутки, пока манагер активирует его, заказать, верифицироваться по телефону и пользоваться - не получится. Видимо, забыли упомянуть, впопыхах. 😂

Это не правда!

Действительно, необходима голосовая авторизация, и сделано это для предотвращения бесконечных тестовых регистраций от одного и того же пользователя.

Активация аккаунта менеджером происходит сразу после регистрации(в течении 5-10 минут) в рабочее время(10:00-19:00) или утром до 10:30, после того, как разберут все ночные/выходные регистрации.

Облачные решения в Москве. VPS, IaaS, защита от DDoS. http://www.caravan.ru/aero/ (http://www.caravan.ru/aero/) Обсуждение нашего сервиса здесь: /ru/forum/comment/14119174 (/ru/forum/comment/14119174)
bruder
На сайте с 03.02.2015
Offline
199
#16

Фотки точно нужны оригинальные? 2 мега легко ужмутся в очень много раз.

Считали точно правильно? В среднем по 2 мега фотки? Если да, то владельцы сайта могут быть очень недовольны, что их парсят - надо бы еще и скорость скачивания учитывать, чтобы не успели спохватиться.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий