admad

admad
Рейтинг
126
Регистрация
22.06.2004
bdmalex:
А это уже на мой взгляд чистой воды теория вероятности - ваше облако не из такого же железа, что и сервер задававшего вопрос ?

Вероятность того что сломается один сервер на порядки выше чем вероятность того что одновременно сгорят пол сотни серверов в кластере.

rengen:
Не целесообразно с экономической точки зрения использовать облако с 25% и более нагрузки. Это обойдётся в 5К+ рублей. За такие деньги уже можно взять отдельную машину, покрывающую требуемые ресурсы с запасом, а если добавить ещё 5-7К то можно взять аналог машины облака (по мощности вычислительной системы, не по брендовости). Также есть колокейшен...

А если своя железка накроется? Что лучше в таком случе, облако или свой сервер?

Rengen, тесты на передачу данных еще раз проводили? Интересно, что у Вас получилось.

Romka_Kharkov:
Ваааааа, вы используете Infiniband ????? Возьмите на работу :)))))) Мы говорим про шину???? Шо за девайсы, де читать? Уже давно хочу погонять .... Тут на SE я только 1го человека встречал который тоже знает что это такое, и это не вы, значит уже двое :))) Собственно интересно где купить коммутаторы , ваши отзывы об этой технологии, она не новая , я в курсе, но применяется весьма редко в отрасли хостинга.... Я так понимаю вы RDMA используете?

Romka_Kharkov добавил 05.12.2010 в 12:29

Я понял, у вас просто не происходит выделение памяти в dom0 динамическое, у вас уже стоят ящики в которых или физически или через RDMA есть объем памяти , в таком случае естественно функции в ядре для dom0 не нужны..... А что если например надо на физической ноде (dom0) ресайзить память ? Суть облака на сколько я понимаю в почти безграничном масштабировании... т.е через какое-то время 32 GB памяти надо будет для запуска WP со всеми модулями, но при этом штатного CPU на ноде будет хватать для сотни таких WP.... :))) Есть ли у вас например возможность из вашего массива памяти выдать ну 100 GB на одну ноду? (пусть в теории).

По поводу работы... Вакансии есть на сайте в разделе "о компании".

Шина QDR. RDMA теоретически позволяет выполнить то о чем Вы говорите, но практическая реализация займет кучу времени + тестирование. Такая задача у нас скорее в рамках научного исследования числится :) и в продакшене в ближайшее время не появится.

Romka_Kharkov:
Suse значит... это domain0 ?
А что на счет CentOS? FC ? Или на гостевухи не влияет? я так понимаю раз это XEN, то ядро внутри гостевухи тоже должно понимать hot plug..?


Ознакомился. Понял о чем речь. Отдельно порадовала возможность добавления физической памяти при использовании ACPI без ребутов, магия блин :))))

Suse в Dom0, но может быть уйдем от SLES так как патчи долго ждать от них. Выбрали SLES потому, что эта ОС лучше работает с Infiniband, который мы используем для интерконнекта. Но это субъективно. CentOS в DomU потому, что более стабилен с MOD. Хотя тоже только наше мнение. Как раз ядро в DomU и должно поддерживать hotplug.

Romka_Kharkov:
Уже по взрослому, а вот GPFS я помню на AIX сталкивался, оно под Linux есть ??? или на каких осях работает система? А та как же хотелось бы ссылочку на

есть такая?

С linux GPFS тоже работает. Конкретно у нас оаботает на SLES

Проссылку не понял. Ссылку на что? На возможности ядер linux?

Romka_Kharkov:
День добрый, так понимаю вы сотрудник одной из описанных выше компаний, можете пояснить сообществу принципы работы вашего клауда, используются ли распределенные\сетевые FS? что за виртуализация?

Виртуализация: XEN

Файловая система: GPFS

Принцип работы простой. Если говорить об услуге Scale Server (топикстартер именно эту услугу описал), то для виртуального сервера выделяется опреративная память по потребностям ОС. Выделение происходит с помощью встроенной в ОС функциональности hot plug memory. Когда и сколько добавлять или забирать памяти решает контроллер кластера. Для этого контроллер собирает информацию о состоянии виртуального сервера раз в секунду. Кстати, Swap жизенно необходим при больших запросах памяти в промежутке между сбором статистики, мы крнечно оставляем запасом 100МБ свободных, но этого может не хватить при резком росте нагрузки и swap выручает до следующего выделения.

Виртуальному серверу выделяются все доступные ядра физической ноды. При этом гарантируется, что на каждые 256МБ выделенной памяти вы безусловно получите 6,25% мощности одного ядра.

Виртуальный сервер может масштабироваться в рамках физической ноды без дополнительных вмешательств со стороны. Если при масштабировании на ноде есть другие виртуалки, и недостаточно места для масштабирования, мы мигрируем последовательно и в рамках необходимого ресурса на рост маленькие и не загруженные виртуалки. Масштабирование более чем на одну ноду также возможно с помощью балансировщика, но эта услуга предоставляется в индивидуальном порядке. Сейчас, например, мы ведем переговоры по реализации проекта вычислительной инфраструктуры пресс-центра и медиабанка футбольного клуба Зенит (до 250 тыс. хостов и более 2 млн хитов в день). После реализации напишем подробности на хабре.

Это базовые сведения о работе хостинга. Если есть более конкретизированные вопросы, готов ответить на них.

rengen:
Теперь понятно кто вы и зачем вам мой ИД
ID: 4081-1
Размер свопа я определил как нулевой, т. к. мне так показал top
Сейчас вижу он показывает 5Гб

Спасибо. Попробуем диагностировать Вашу ситуацию со свопом

Vanger:
есть возможность установить верхний лимит

А также в ситуации с ddos и использованными (оплаченными) во время атаки ресурсами, вопрос можно решить индивидуально. В clodo.ru идут на встречу и делают перерасчет с возвратом денег на баланс. Мы же тоже люди, всё понимаем :)

rengen:
admad зачем? Она выключена.
Кстати, да, спасибо что напомнили, надо бы добавить к обзору, при Memory on Demand использование свопа на машине пользователя нецелесообразно, это камень в огород Селектел.

Использование Swap целесообразно. Не надо лишь допускать того что бы он активно юзался. Без swap может получиться out of memory при резком запросе большого объема оперативки. При этом мы (clodo.ru) считаем что swap не должен билинговаться, так как это инструмент, который нам помогает нам давать сервис MOD более стабильно. То что у Вас был отключен Swap диск очень странно, я специально сейчас проверил, создал виртуалку и swap вижу.

У clodo.ru swap на все виртуалки включая масштабируемые 5ГБ. Хотел попросить топикстартера скинуть ID виртуалки в приват.

Всего: 472