Что это было с форумом

Постараюсь объяснить, что происходило такое с форумом, что заняло так много времени на восстановление. Тем более, что сами уже вроде разобрались.

Форум со всеми дополнительными сервисами вообще размещен на нескольких серверах, но с недавнего времени (с февраля) его основная часть - база и основные скрипты - размещена на одном сервере. Вечером в субботу, 22 августа, у него начал сбоить жесткий диск. Сначала ошибок было немного, постепенно в течение воскресенья, ситуация развилась. В итоге после перезагрузки диск стал мигать и сообщать о фатальных ошибках RAID.

Здесь у нас возникла путаница, поскольку изначально диск был сконфигурирован как RAID - поэтому первоначально казалось, что достаточно заменить диск или просто разобрать массив и все будет работать. Оказалось, что рейда фактически не было, был один диск, включенный в контроллер.

Соответственно, мы начали пытаться вытащить информацию с диска.

Лучше бы мы этого не делали - диск все же оказался серьезно битым, ничего из того, на что не было бэкапов, так и не вытащили. Только время потеряли. А, учитывая, что диск был сильно битым, скорость "вытаскивания" информации была никакой и эта операция заняла почти сутки.

В итоге вчера днем мы получили от датацентра сервер с начисто, уже на RAID1, установленной системой и начали конфигурировать его. Учитывая, что Lupus это делал через GPRS, скорость конфигурации стоит признать рекордной :).

Все было бы сделано быстрее, если бы не особенности работы датацентра. Если точнее - сервиса collocation компании "Петерхост". Эта компания не имеет собственного датацентра, серверы размещаются в ДЦ "Стек". Хуже того - поддержка collocation работает исключительно в рабочее время - с 10 до 19 МСК. Поэтому первый человек подошел к серверу днем в понедельник - пока на работу пришел, пока до датацентра доехал и так далее.

У меня, в-общем, нет в данном случае особых претензий к "Петерхосту" - хорошая компания, очень гибкий выбор серверов, но вот, если что-то сломается, скоростной починки может не случиться. И на админов техподдержки лучше особо не надеяться. Видимо, поэтому подключение IPMI - штатная услуга при заказе сервера :).

Сервер восстановлен из бэкапов от 22 августа, так что часть информации все же пострадала.

Поскольку сервер поднимался в авральном порядке, возможны некоторые глюки. Потерпите, пожалуйста - со временем всё донастроим и доведем до ума.