IT関連に従事している人なら今NTTデータがちょっとした祭りになっていることはご存知だと思います。
長期停止中のブログ「Doblog」、データの完全復旧は諦めた? – NTTデータ
最初にアナウンスされた障害情報が2009年2月8日の午前10時。そして延長の案内を何度か重ねながら、2月20日の午後6時に復旧みたいです。
障害原因はデータベースサーバのディスク故障とのことですが、RAID構成のダブルフェイルなんてのはよくある話ですので仕方がないと思いますが、さらにバックアップサーバのディスクまで故障している事態に陥っていたそうです。
バックアップサーバのディスクと簡単に書いてありますが、実際にどこのディスクだったんでしょうか。システムディスク・バックアップ用のストレージ・テープライブラリのカタログが入った領域等々・・・色々考えられます。
まあ、バックアップがバックアップとして機能していなかったのはかなり痛いですね。今日の復旧で2月4日相当のデータに戻っているとのことなので復旧担当者はこの数日間ずっとアーカイブの中から使えそうなデータをにらめっこしていたのかもしれないですね、なにはともあれお疲れ様です。
単純に機械が悪かったのか、復旧時にオペレーションを誤ったのかは謎ですが、対岸の火事ではありません、明日は我が身と気を引き締めて業務にあたらなければいけません。
そんなDoblog祭りの裏で、こんな記事が・・・
MobileMeのメールサーバトラブル顛末記〜使えない日が11日間続く
ユーザとの信頼関係が薄れそうなときこそ、真摯な態度で臨まないといけません。と常に気を引き締めているつもりでもつい緩んだ時が命取りというのを経験したり・・・