Потеря данных Hetzner (FastVPS)

Leon1010 · 2012-04-08T12:03:45.0000000Z

Хочу вам поведать свою печальную историю. И может быть, мой пост кого ни будь убережет от той-же учести. Моя история: Пол года назад (а конкретнее 23.10.2011) на сервере, который я арендую у FastVPS вышел из строя один из двух дисков, я обратился в службу поддержки, мне заменили сначала один, зазеркалили, потом сказали, что второй тоже надо менять, заменили второй, зазеркалили. В общем, к вечеру следующего дня сервер был уже снова в строю с новыми (как я думал) дисками. Через некоторое время, мне попалась на глаза статья на каком-то из SEO форумов, возможно на этом. В ней говорилось, что в DC Hetzner заменяют нерабочие диски, на такие же старые «восстановленные», выдернутые из других серверов. Надо бы поставить smart и проверить состояние дисков на всех серверах, да и удаленные бекапы уже настроить подумал я. Подумал, и благополучно забил на это дело. 04.04.2012 Обычный вечер, ничего не предвещало беды. Сижу, пишу код пытаюсь сохранить Хрен опять пытаюсь Хрен обновляю директорию в ftp-клиенте Пусто Вобще Пусто только папки, ни одного файла Пытаюсь открыть панель управления ISPmanager не открывается Пытаюсь зайти по SSH пишет create/symlink failed, no inodes free и консоль закрывается Иду в панель биллинга, отправляю сервер на программную перезагрузку жду 20 минут, не уходит Отправляю на аппаратную перезагрузку Ушел жду пол часа Не Вернулся(( Пишу в саппорт, объясняю ситуацию... Отвечают примерно следующее: «Загрузили в rescue. Проблема с дисками. Есть ли у Вас бекапы?» Меня это насторожило, раньше они про бекапы не спрашивали Далее они отправили один из дисков на замену. Когда собрали массив, сказали что есть ошибки в fstab параметров userquota и groupquota и требуется требуется провести fsck, возможна потеря данных. Согласился... На следующий день. О чудо, они там что-то сделали и сервер заработал. Но, открытие первого-же сайта на нем, повергло меня в шок. Как будто окунулся в прошлое, а точнее 19.01.2012. Судя по всему именно в этот день один из дисков в рейде просто перестал работать, но сервер продолжал работать, как будто ничего не произошло. Далее пишу им, что мол надо вернуть тот диск, этот не актуален. Мне говорят, плати 69 euro и подключим обратно. Т.к. особо выбора у меня не было, оплатил, жду положительного результата Как бы не так После длительного ожидания мне говорят: «После перезагрузок ФС на ДИСКАХ повреждена.» В тот момент я не придал особого значения слову ДИСКАХ, но уже понимал, что что-то мой ремонт очень затянулся и ожидать чего-то хорошего пожалуй уже и не стоит. На следующий день я получил от них две ссылки на архивы со всеми файлами с дисков. В первом архиве были файлы за 19 января, во втором актуальные. Но и в том и в другом явно не хватало файлов. Причем в актуальном архиве осталась уцелевшей всего лишь четверть из всех файлов. Тогда они предложили следующее: «выкупить СЛОМАНЫЙ диск за 250 евро с доставкой» (И это обычный sata II 750гб.) Тут мне сразу-же вспомнилась статья, в которой говорилось про то, что Hetzner заменяет диски на восстановленные. Тем не менее, я рассмотрел этот вариант. Нагуглил парочку серьезных контор, которые занимаются восстановлением данных, отправил им письмо, где описал ситуацию. Вот, что мне ответила одна из них: Доброго времени суток, Леонид! К сожалению, после fsck, в большинстве случаев делать уже просто нечего. Теоретически - попробовать можно. Но, как показывает практика, в подобных случаях мало чего удается сделать. А вообще странно, что датацентр проглядел выход из строя первого диска, фактически прибил ваши данные собственноручно и еще за мертвый диск пытается денег получить. Думаю, если невозможность восстановления приведет к большим убытками вашей компании, то нет повода не подать на них в суд. Криминалистических экспертиз в Европе довольно много, да и ситуация проста и понятна. С уважением, Валерий Пьянков. Конечно-же подавать в суд я ни на кого не собираюсь. К FastVPS у меня претензий нету т.к. это всего лишь посредник. Их служба поддержки сделала все, что от них зависело, по крайней мере мне так показалось. Вот Hetzner только меня огорчил качеством железа. Оба они предоставляют услуги, соразмерные их стоимости. А т.к. стоимость низкая, то и качество услуг будет на таком-же уровне. Учитывая, что там было 100 с лишним сайтов. Каждый дополнять потерянными файлами, заменять испорченные, дописывать в общем, работы там на пол года, а то и больше БЕСПЛАТНОЙ... а жить на что?... А клиенты еще вчера начали названивать, узнавать, что там с их сайтами. Говорил, что скоро все заработает Но теперь, видно, что не заработает Вот такая вот печальная история... Заключение. FastVPS даёт 100гб места на их FTP-сервере - не просто так. Не поленитесь и настройте копирование бекапов туда. Если бы я в свое время об этом позаботился, всего этого можно было бы избежать. Если служба поддержки предлагает вам провести восстановление утилитой fsck, несколько раз подумайте, готовы ли вы потерять часть данных, возможно целесообразней будет сразу забрать диск и отнести его контору, которая занимается восстановлением данных. Если вы используете ISPmanager, то по возможности старайтесь отказаться от опции «Дисковые квоты». Подозреваю, что именно из-за них вылетали диски оба раза. Если вам уже меняли диски на сервере, то это означает, что с этого дня необходимо уделять особое внимание бэкапам, потому что высока вероятность того, что вам поставили не новый диск, и замены будут только учащаться со временем, и не дай бог вам оказаться в той-же ситуации, что и я. P.S. Обычно подобные статьи я пишу в своем блоге, но теперь у меня его нет, по этому публикую здесь.

485

Romka_Kharkov

9 апреля 2012, 15:32

#41

mvolgin:
Чтобы хранить бекапы полностью совсем необязательно их полностью копировать рсинк сливает измнения после чего я их архивирую.

Я говорю , для того что бы определить инкремент, надо же с чем-то сравнивать то что на сервере и то, что на бекапе....

mvolgin:

На данные момент у меня полные архивы полных данных по каждому конкерному аккаунту. Если кому то нужен бекап он скачиват его целиков и сразу. Шас приблизительно 7 копий через 3 дня.

Вообще все уперлось в подорожание хардов: вообще программа максимум хранить целый год и каждый день и в 3х разных местах.

Как же целиком и сразу если у вас отдельно инкременты копируются? :D

Есть около 15.000 ipv4 !!! (http://onyx.net.ua/price.php#ipv4) Качественный хостинг с 2005 года - лучшее клиентам! (http://onyx.net.ua/)

M

65

mvolgin

9 апреля 2012, 15:46

#42

Сравниваться с копией от прошлого копирования. После копирования я имею полную копию которую и архивирую. Рсинк сравнивает файлы у меня и на сервере и переносит только то что надо плюс у него можно указать лимит юзания канала. Очень дешево и эффективно.

________________________ я больше не хостер ....

Копирование кампаний и групп WhatsApp начнет шифровать резервные Facebook запустил инструмент для

CM

136

Cesar_Mt

10 апреля 2012, 06:37

#43

ТС, спасибо за еще одно напоминание всем. Желаю Вам скорейшего восстановления

Яндекс Вебмастер вынес товарные фиды в отдельный раздел

Все что нужно знать о DDоS-атаках грамотному менеджеру