Cybr

Cybr
Рейтинг
28
Регистрация
10.01.2013
Должность
ДЦ МногоБайт
Интересы
Работа =)
sladkydze:
У вас всё классно сделано с технической точки зрения, респект за это.

Спасибо!

sladkydze:
Я пока не встречал еще ни одного ДЦ, где было бы так сложно договориться о стоимости питания при коло.

Придите в КРОК и поторгуйтесь с ними о питании ваших блейд-корзин. Или попробуйте согласовать их размещение на ММТС-9. Если вы не встречали таких ДЦ, это не значит что их нет.

Поймите мы берем деньги не только за возможность потребить это электропитание, но и за инфраструктуру, которую нужно все время поддерживать.

Да, наверное можно сделать дешево, брать за стойку, точнее за раму из дефема по 35 тыс в месяц, из этой суммы больше половины будет электричество, а охлаждение, сама стойка, пду, и прочее прочее не учитывается никак. Те кто так дешево продают либо строили "это" не за свой счет и им не надо окупать вложения и обслуживание (госкомпании) или у них просто нет такой инфраструктуры, нет резервирования, дизелей и ИБП. По другому быть не может.

Даже себестоимость всего комплекса ежемесячных/квартальных работ по обслуживанию правильного дата-центра это уже круглая сумма. А есть и другие капитальные затраты.

Поэтому скажу так, вы можете сделать свой ДЦ с блекджеком... ☝, тьфу с резервированием всего и продавать услуги по любой цене. Но наш опыт подсказывает, что вы так делать не будете 🚬

sladkydze:
В корне не соглашусь. 2 луча в стойке в первую очередь для РЕЗЕРВИРОВАНИЯ питания. То есть допустимую реальную нагрузку надо вешать исходя из возможности выхода из строя одного из лучей. (конечно, если мы заботимся о таком параметре, как отказоустойчивость и гарантированный аптайм)
Так что говорить в вашем случае о 5 кВт на стойку (а некоторые ДЦ даже 7кВт озвучивают) совершенно неправильно. Озвучивать стоит как 2 независимых луча питания по 3.5 кВт каждый. Будет и честно и понятно.

Я же не говорю, что это ваш минус или изъян. Это особенность. Ничего плохого тут нет.

Вернемся к РЕЗЕРВИРОВАННОМУ питанию стойки, у нас схема питания куда сложнее, чем вам может показаться. И она зарезервирована в нескольких местах, а не только автоматом на стойке. На стойку подается питание от 2 автоматов, чтобы избежать пропадания питания всей стойки из-за короткого замыкания, например, при неисправности БП какого-либо сервера в стойке.

На стойки подается чистое питание 230В от системы параллельных ИБП через 2 независимых кабеля (чтобы без обесточивания стоек можно было поменять любой из кабелей).

А перед системой параллельных ИБП начинается пирамида:

на шине собрано питание от 2 линий (опять же, 2 кабеля) от АВР «А», а также с шины ДГУ;

на шине ДГУ стоит АВР «Б», который снимает питание либо с одного ДГУ, либо со второго ДГУ (в зависимости от того какой ДГУ включился, схема N+1);

на АВР «А» приходит 2 луча питания 400В от собственных понижающих трансформаторов.

Нет разделения какой луч основной, а какой резервный – питаться можно с любого трансформатора. При пропадании питания где-либо (от ДГУ, от вводов, при выходе из строя одного из ИБП, повреждении кабеля от ИБП) все равно оба ваши автомата на стойке останутся запитаны.

---------- Добавлено 26.12.2014 в 12:55 ----------

sladkydze:
Лично я бы за сервера с более чем 1 БП брал бы как за (Мощность 1 БП*Количество БП/2). Ибо в решениях с более чем 1 БП их больше 1 не по причине высокого энергопотребления, а по причине отказоустойчивости.

Иными словами, 2 сервера с одинаковой начинкой с 1 и с 2 БП в реальности будут кушать одинаково. Однако за размещение их у вас, придется платить совсем разные деньги. Я не говорю, что это плохо. Это ваша особенность. Вполне можете просить еще деньги за массу серверов, или за их цвет. Имеете полное право, как коммерческая организация.

У нас стоит оборудование с 4 блоками питания. За сколько БП брать оплату?

У нас стоит оборудование с 6 блоками питания. Сколько реально резервные, а сколько используются? За сколько БП брать оплату?

У теперь десерт: есть оборудование с 3 блоками питания. За сколько БП брать оплату?

По вашей схеме следует, что дата-центр должен за вас оплатить резервирование питания, покупку PDU для этого резервирования и прочие расходы?

Поясню немного, у нас есть тариф Порт с доступом в MSK-IX за 65круб в месяц. Это гарантированная полоса на сети MSK-IX, DataIX и клиентов W-IX. Т.е. ее можно будет грузить на все 10Г хоть круглосуточно.

Вот ссылка на список сетей, сейчас доступно больше 28 тыс сетей.

Теперь второй вариант, это акционный сервер с общей полосой 10Gbit/sec, реализован по такой схеме. Есть группа из 5 портов 10Г, и на всю группу приходит аплинк 10Гбит, который общий для всей группы.

Эта схема была реализована под одного клиента (к вопросу о лояльности), но затем от части серверов он отказался, и вот такой готовый сервер в спецпредложении. Спешите получить мощный сервер с 10Гбит каналом по цене

около 770 баксов.

Ivan Lungov:
Я тут немного порассуждаю? Можно?
У Вас под колокейшн тоже стойки наполовину пустые стоят?
Почему спрашиваю. Выше по теме, Вы писали, что берете оплату за колокейшн по мощности блока питания и делаете так, чтобы гарантировать наличие достаточного электричества в любое время. Тогда получается, что в 42 юниты, вы ставите только 14 машин по 350 Ватт или 7 машин с блоками по 700 Ватт? Т.е. Большая часть стойки у Вас стоит пустой? А смысл?

Иван, у нас есть статистика. Сервер с двумя процессорами E5 (по 95Вт), 4 модуля памяти и пара дисков 3,5" потребляет около 70Вт в обычном режиме. В пиках доходит до 165Вт. Это данные из iLO реального HP сервера. Если взять 6000Вт и поделить на 165Вт, выходит 36 таких серверов. Но ни кто не заставляет собирать стойку с коло только из двухпроцессорных серверов. Их можно миксовать, это и приходится делать, не только из за питания, но из-за длинны серверов. Предположим у вас есть клиент с 3 серверами глубинной 80см, вы их поставили вместе, заняв 3 юнита. Затем клиент забрал средний сервер. А другой клиент принес на коло сервер глубиной 50см. Если вы попробуете разместить его между серверами глубиной 80см, это будет крайне затруднительно. Именно поэтому у нас есть стойки с глубокими серверами, с короткими, и так же по загрузке PDU можно судить, куда добавить сервер двух процессорный, а куда однопроцессорный. Проблем в этом нет, это обычная логистика дата-центра при услуге коло.

Ivan Lungov:

Короче, если я припрусь к вам со своими двухпроцовыми супермикрами, которые кушают 200-250 Ватт, то смогу поставить их в одну стойку всего 20 штук, вместо, 40, как мы это делаем у себя. Как-то не очень удобно получается.

Если вы принесете сервера на коло по юнитам, то мы их разместим и проблемы не будет. Если даже они встанут так, что в стойке не влезут другие сервера, значит у вас реально большие блоки питания и вы будете платить за дополнительное питание. А если вы берете стойку, то нам в принципе все равно сколько вы включите в ней серверов. Мы даем вам два автомата по 16А, и два PDU по 16А, вы сами можете забить свою стойку серверами. Может часть из них будет выключена, или включаться они будут по очереди, чтобы избежать пиков. Могут быть настройки минимального энергопотребления, как вам угодно в пределах своей стойки.

Ivan Lungov:

Далее, 10G на стойку, нужно опять же, из-за DDoS-ов.
Если какой-то шальной DDoS-прорывается через первую линию обороны на М9, и достигает стойки, то в нашем случае, ляжет 1 сервак. В вашем случае - вся стойка.

С чего вы взяли, что у нас что-то ляжет? Если клиент взял 2Мбит, или 20Гбит, мы ему эту полосу гарантируем. И вот если клиенту из-за ддоса не хватит этой полосы то проблема будет только у этого клиента. У него забьется полоса и все. Других клиентов в той же стойке или в том же свитче это ни как не коснется. И как раз для таких случаев и существует наша защита от DDoS о чем и начиналась эта тема. В случае если у клиента (к примеру у вас со стойкой и каналом в 2Гб), включена защита, то мы флуд который идет (10-20-40Гбит) порежем еще на входе в нашу сеть. И если как вы пишите реального трафика у вас меньше 2Гб, то это идеальный вариант.

Ivan Lungov:
Качественного и доступного интернета у нас своего, обмотаться вокруг Москвы три раза. И потом, у нас своя, достаточно сложная инфраструктура, имплантировать в которую удаленный сегмент через чужой BGP стык, будет сложновато. Ок, информацию принял, подумаю, спасибо за ответы.

Иван, если вы хотите рассказать про свою сеть и инфраструктуру в нашей теме, позвольте я вам помогу.

Вот ссылка на вашу качественную инфраструктуру, вижу что в ваш mx80 включен всего один порт 10Гбит. Хотя по тексту написано, что целый месяц уже прошел с момента запуска.

И еще прокомментирую, вы написали что 2Гбита на стойку мало, и включаете уже 10Гбит на стойку. Охотно верю, с учетом того что у вас в основной роутер включено всего 10Гбит, а на той же странице заявлена пропускная способность 34Гбит/сек.

sladkydze:
Ок. Мы подключаем нагрузку в 6кВт в 1 стойке, по 3 кВт на каждую линию. И если у нас вырубается 1 линия (мало ли по какой причине), то мы тут же получаем аварийное отключение второй, рабочей линии, по перегрузке, так? Зачем такое счастье?


Условно, корзинки Dell, нашпигованные 2-сокетными лезвиями со старшими процессорами и по максимуму памяти. Там 6 блоков питания по 2500 Ватт. Реальное потребление порядка 3000Ватт.
Ну, и еще систему хранения надо ставить, она тоже ест прилично. Вполне может и полстойки-стойку занять. Это еще несколько киловатт.


Понял, учту. Спасибо.

Что тут обсуждать? У делла наверняка есть power-калькулятор как у HP, посчитайте в нем реальное потребление в максимальной комплектации и дальше уже будем думать.

Сейчас с вашей стороны это выглядит как, найти какой-то изъян и давить на него.

Я скажу вам так, если корзина потребляет 3КВт по факту, то значит в стойке встанет 2 корзины. Сколько они юнитов? Если как у HP - 10RU, то значит остальные будут пустовать.

Это как на ММТС-9. Попробуйте получить стойку с 9 или 15КВт питания, вам в 99% случаев откажут. Вы как клиент можете искать свой 1%, где такой вариант вы найдете. Но скорее всего цена там будет как наши 5 стоек.

sladkydze:

Допустим, мне потребуется разместить у вас оборудования с реальным потреблением порядка 35кВт. Т.к. 1 единица оборудования имеет реальное потребление порядка 3 кВт, то в 1 вашу стандартную стойку влезет всего 1 штука (лимит по питанию), при этом займет оно всего 8 юнитов из 42. То есть мне как, 12 стоек у вас брать?! Или есть вариант подать в стойку дополнительное питание + еще 3 раза по 16 ампер на каждую линию? Тогда как будет выглядеть ценообразование? И как с охлаждением? Осилит оно реальное тепловыделение в 12 кВт с 1 стойки?

Во-первых, на стандартную стойку мы подаем 2х16А. А это уже не 12 стоек как вы посчитали, а всего 6 ;-)

Если у вас есть телеком или серверное оборудование (а другое мы не размещаем) с большим энергопотреблением, то это как минимум повод прислать на него спецификацию и сертификаты соответствия. Мы проработаем варианты его размещения.

sladkydze:
И еще вопрос, 12 стоек, это в вашем предложении 24 гигабитных канала (соотношение 1 к 5 вход-выход). Есть вариант заменить эту толпу гигабитных линков на пару 10-гигабитных? Как это отразится на ценообразовании?
Спасибо.

Думаю на данном примере с 12 стойками, это ни как не отразится. Нам проще будет дать вам 3 порта по 10Гбит, чем 24 по 1 Гбит. Но если клиенту будет удобнее с 24-мя портами, то и так сделаем.

Считаю, лояльность должна быть на чем то основана)

Отвлеченный пример, пришел клиент, хочет взять дешевый сервер из спецпредложения (на них цена уже снижена), и начинает торговаться. Нам нет смысла снижать цену.

Другой пример, есть существующий клиент, исправно платит, документы подписывает и присылает обратно (бухгалтера таких любят), и хочет он немного изменить набор своих услуг. в 99% случаев мы идем на встречу.

И у нас есть довольные клиенты, которые с нами с первых месяцев работы.

Открою секрет, по телефону торговаться ни кто не любит, позвоните в автосалон и попробуйте получить скидку на ходовой автомобиль. в 99% случаев ничего не выйдет. А вот если вы приедете в салон, покажете свою заинтересованность, то и менеджер вам пойдет на встречу.

Понимаете куда я клоню? ;)

Вы приезжайте в гости, мы вам покажем и расскажем на чем основаны наши цены, и можно будет предметно все обсуждать.

ДЦ это не просто серверная и приходящий оптический кабель из-вне. Закупите оборудование, а затем заключите договора на обслуживание линий 10КВ, пары трансформаторов, пары дизелей, на подвоз топлива, на обслуживание ИБП, кондиционеров, чиллеров и затем попробуйте заложить это в стоимость всех своих услуг. А я потом приеду к вам в гости и попробую с вами поторговаться ;-)

В любом случае буду рад познакомится и пообщаться лично. Надеюсь и вы станете нашим ДОВОЛЬНЫМ клиентом. 🍻

2sladkydze: вы лукавите. При общении с вами обсуждались разные варианты. Мы предложили свои цены, и варианты работы, которые по всей видимости вас не устроили. Это ваше право. У нас есть прайс на сайте, при больших объемах мы готовы его обсуждать. Все всегда хотят получить хорошую качественную услугу за 3 копейки, а затем перепродать ее за 1 руб. Для любого бизнеса это как поймать жар-птицу. 🤪

Если не ошибаюсь, вы в свое время (год или больше назад) писали здесь на форуме, про возможность открытия сервиса по защите от ddos и там спрашивали сколько бы стоила качественная услуга, и тогда вы думали выступали как сервис. Сейчас мы выступаем как сервис, а вы как потенциальный клиент. Вспомните свои старые расчеты, боюсь что и сегодня они будут актуальны.

У любой услуги есть себестоимость, мы тоже покупаем каналы, а ddos их забивает, но при этом ни кто платить за канал не хочет. На рынке есть ряд предложений, клиент вправе выбирать.

ps: смею всех заверить руководитель каждый день читает, в том числе и этот форум, и в курсе всего что мы тут обсуждаем 🤣

---------- Добавлено 24.12.2014 в 22:36 ----------

pps: про vds добавлю, "свято место пусто не бывает". Любой может взять у нас серверы в аренду или принести к нам в дц свои серверы и начать предоставлять качественные услуги на качественных каналах связи с защитой от ddos. Дерзайте!

Мы дата-центр в первую очередь, услуги VDS были признаны отдельной веткой развития, которая может быть когда-либо будет реанимирована. А в данный момент времени, решено не развивать это направление. Текущие клиенты (кто уже пользуется VDS), могут продолжать ими пользоваться на прежних условиях, для них пока ничего не меняется. Но новых VDS сделать и для них нельзя.

Мы по прежнему максимально сосредоточены на предоставлении самых качественных услуг по аренде стоек, юнитов, каналов связи, и выделенных серверов. Не так давно у нас появилась адекватная (как по стоимости так и по качеству) защита от DDoS (по забиванию канала связи до сервера). Мы постоянно расширяем каналы связи, строим и запускаем новые узлы связи. В ближайшее время будет много хороших новостей! Следите за нами вконтакте и в instagram 🚬

Всего: 98