Создание отказоустойчивого кластера для интернет-магазина (продолжение темы)

Можем предоставить HA NSы с фэйловером - гео-распределенная сеть DNS-серверов с IP anycast, мониторинг от нескольких секунд, TTL можно также установить минимальный.

Есть ощущение, что на следующем шаге запасного сервера с копией, близкой к realtime вам будет достаточно.

Смотря для чего достаточно...

Мне нужно сделать такую систему, которая была бы устойчива к отказу одного из серверов и продолжала при этом работать без вмешательства администратора. Администратор может быть в отпуске или далеко от интернета, но магазин должен продолжать работать. Очевидно, подобное невозможно сделать на одном сервере с ручным переключением на запасной.

Я бы не заморачивался, если бы база была не транзакционной, и сделал бы все штатными средствами MongoDB. Однако приходится использовать MySQL, а там кластер как-то не радует(

Александр Фролов добавил 07.09.2011 в 09:49

Да, это может быть интересно, но мне надо сначала определиться с архитектурой системы в целом. А эти NS сколько стоят?

дешевле и надежнее будет нанять "дежурного" админа, который переключит в случае чего запросы на дублирующий сервер, нежели усложнять систему :)

надо понимать, что аварийная ситуация будет, возможно, 1-3 случая в год, а, возможно и совсем не будет.

программная часть (я о движке сайта) серьезных проектов все равно будет периодически обновляться, т.е. человека из такой системы не исключить.

К сожалению, пока мы не можем позволить себе круглосуточный штат админов - это довольно дорого. И штат должен состоять минимум из 4 весьма квалифицированных человек, чтобы они действительно обеспечивали круглосуточную работу. И еще мы должны им полностью доверять.

Что до обновления програмной части, то работы выполняются ежедневно, и это не приводит к полному останову системы на одном сервере. Видимо, и кластер не будет останавливаться из-за правки скриптов.

Усложнять архитектуру и самому не хочется, однако, видимо, это неизбежно. Кроме того, нужно еще подумать о масштабируемости системы, а на одном сервере это обеспечить нереально.

Сколько убытков принесет простой вашего сайта в течении пары часов?

Судя по тому что для вас нанять админов дорого, убыток от простоя будет не огромным.

Разработка распределенной по нескольким ДЦ отказоустойчивой системы будут стоить вряд ли дешевле чем нанять штат админов.

Учитывая сложность вашей базы данных, создание отказоустойчивой системы будет еще более дорогим.

По моему ваши опасения что выйдет из строя сервер преувеличены.

Сервер на качественных комплектующих проработает несколько лет без сбоев с высокой вероятностью.

Для маленького бюджета это достаточная надежность.

Даже яндекс, рамблер и вебмани лежат иногда. А там суточные обороты миллионы.

Вероятность сбоев каналов в ДЦ более вероятны чем сбой одного сервера.

PS

ИМХО, когда убыток от часа простоя вашего сайта превысит 5000 - 10 000 $, только тогда нужно думать об еще большей отказоустойчивости, чем дает один качественный сервер с RAID и двумя блоками питания.

Ну как бы все пытаются меня убедить, что мне не нужен ни кластер, ни масштабируемость)

Между тем задача стоит именно в создании системы, в которой выход из строя отдельных серверов не приводит к остановке работы, и которую можно мастшабировать путем добавления серверов.

Решать, нужен кластер или нет, будет заказчик исходя из бюджета, который потребуется на создание и сопровождение кластера. Бюджет зависит от архитектуры, с которой пока у меня нет полной ясности.

И в любом случае нужна масштабируемость, т.к. проект растет. Рано или поздно возможности одного сервера будут исчерпаны, так что уже сейчас нужно думать про масштабируемость. Я не знаю ни одного более или менее серьезного проекта, который бы работал на одном физическом сервере - проблема с ресурсами. На нескольких сотнях серверов - да, такие системы есть.

Мне тоже было бы интересно как сделать на заказ масштабируемую, отказоустойчивую систему под сложную базу данных за не дорого, что бы она работала без помощи админов.

Но боюсь, такое не возможно.

Был бы шанс это реализовать если делать самому и у вас много опыта.

Тогда можно было бы за несколько месяцев продумать архитектуру, создать ее и отладить

Но на заказ это сделать за недорого не получится.

Понимаете, пока я еще не получил от поставщиков решений ни одного предложения по архитектуре и ценам, так что пока непонятно, дорого это для заказчика или нет.

Есть конкретное предложение от ISP System (ISPManager Cluster), которое не проходит по причинам, упомянутым в начале топика.

У меня есть опыт в администрировании FreeBSD, думаю и с Линуксом справлюсь, а софт весь написан нашей компанией. Но нужно отработанное решение, не пробовать же все подряд. На первых порах, видимо, и буду сам заниматься, но поддержка все равно будет нужна.

Думаю, и не получите.

Дешевых, отлаженных систем ERP не существует.

В этой сфере одно исследование работы предприятия и рекомендации по выбору системы могут стоить десятки тысяч $.