skyblue.me.uk

12/18: サーバーが壊れたぁ☆

サーバーが壊れたぁ☆
事態の悲惨さに笑うしかありません♪
みんなごめんね・・・。

どんな事態かというとまぁサーバーではよくある、ハードディスクの損傷による故障なんだけどね。
だいたい普通、サーバーと呼ばれて、重要なデータとか、処理を行っているコンピュータは、ハードウエアRAID5とかとか組んで、さらに週1度の完全バックアップと毎日の差分バックアップを行っているんだよね♪
だからまぁ1台HDDが壊れたからってシステムがストップしたりましてやデータが全部吹っ飛んだりなんてことはないんだよね。

でもうちのサーバは違った。
HDD1台。バックアップなし。
今考えれば馬鹿というか、何もかんがえていなかったというのか。
だいたいHDDは障害が発生する前にシステムログにディスクエラーとかで読み込み失敗とかそういう内容のエラーが発生するから、それを見てから新しいHDDに移行すればいいやとか考えてました。
今までもこれでなんの支障もなく障害をかいくぐってきたんですが・・。
今回は、エラー発生がデータベースの最適化をスケジュールしている深夜に発生したんですよ。
もうログとか救出できなかったのでわからないんですが、おそらくその最適化の最中にエラーが発生したものの、システムは処理を続行して壊れたのではないかなと。

まぁおきてしまったことは仕方ないとして、それから急いで復旧を行いました。
こういうことがあるので、RAIDとバックアップを行えるようなサーバを買ってもらい、現在はそれで運用を行ってます。
仮運用中であったこともあり、もう2,3日で障害発生前と同じ状態に復旧できる予定・・・。

みなさん、大切なデータのバックアップは忘れずにしましょう。