雲が消えた日の衝撃──ファーストサーバのデータ消失事故

クラウドＥＲＰ活用による経営情報管理の一元集約化は、システムの形態として理想的。 しかし、一箇所に集められた情報がすべて消えてしまったとしたら‥‥シャレになりません。 バックアップを取るということの大切さが身に染みた事件でした。

事故はこうして起きた

（脆弱性対策のための）更新プログラム自体に不具合があったことに加えて、 検証環境下での確認による防止機能が十分に働かなかったことと、 メンテナンス時のバックアップ仕様の変更が重なり、 今回のデータの消失が発生した。

被害にあった顧客件数は5698件で、ほとんどが復旧不可能な状態。ウェブサイトやメールに加え、顧客情報やスケジュールなど多種多様なデータが失われ、業務が止まった企業からは悲痛な叫びが聞こえてくる。いったい何が起きているのか。
　　　＊＊＊
　23日、ファーストサーバは複数の顧客で共有するタイプのレンタルサーバーサービスに関し、「データ復旧を行うことは不可能と判断した」と公表。顧客には「お客様で取得されておられるバックアップデータによる再構築を行っていただきますようお願い申し上げます」と呼びかけた。
　共有型ではない専用サーバーサービスについては、当初、データ復旧ソフトにより一部、回復できたとし、顧客にデータを引き渡していた。しかし、ある顧客企業から「社内の他人のメールが読めてしまう」と報告があり、確認したところ、復旧データに欠損があることが判明。22日夜、すべての復旧データの提供をとりやめた。
　　　＊＊＊
　ファーストサーバは月々の利用料金だけで手軽にサイボウズを利用できる「サイボウズ Ｏｆｆｉｃｅ９ ｆｏｒ ＡＳＰ」のパートナー企業。加えて、顧客企業が購入したパッケージ版のサイボウズを運用するサーバーとしても数百社に貸していた。このうち、メール、スケジュール、顧客管理、営業記録など、約400社のサイボウズのデータを丸ごと消失させてしまった。
　ネット上の掲示板には「顧客データもサイボウズに入れてたから、電話来ても誰が誰だかわかんないし何も答えられないし、サーバが落ちててって言い訳もできないし、会社自体が記憶喪失になったみたい」「たぶん明日は段ボールから顧客との契約書原本取り出して、電話取りながらあいうえお順に並べる作業から一日が始まります」といった書き込みがなされている。
　　　＊＊＊
　ファーストサーバによると今回、脆弱性対策のために更新プログラムを作り、いつものようにプログラムを走らせた。ところが、その更新プログラム自体に大きなバグ（不具合）があった。「ファイル削除コマンド」を停止させる記述漏れと、メンテナンスの対象となるサーバー群を指定する記述漏れがあったというのだ。
　そのバグに気づかないまま、本番環境のサーバーで更新プログラムを起動。だが更新プログラムは、対象外のサーバーでファイル削除コマンドを実行し、次々とデータを消去していった。この範囲が、顧客件数５万件のうち約5700件に及んだ。不幸はここで終わらない。
　通常なら、バックアップデータから元のデータを復元することで一両日中にウェブサイトなどは復旧する。バックアップデータは、本番環境とは違うサーバー、あるいは外部記憶装置に定期的にとっておくことが基本だ。ところがファーストサーバでは事情が違った。
　ファーストサーバにおけるセキュリティ対策では、３つのＨＤＤに同じファイルをコピーしていた。１つは「本番系」。もう１つは本番系のＨＤＤやシステムに不具合が生じた時、即座に切り替え、正常稼働を続けるための「待機系」。もう１つが、毎朝６時に本番系のデータを丸ごとコピーしておく「バックアップ系」だ。この３つが、すべて同じサーバー内に同居していた。
　あろうことか、ファイルを削除してしまう更新プログラムのバグは、本番系、待機系に加え、同じサーバー内にあるバックアップ系のＨＤＤまでをも消去するという代物だった。
　なぜ、外部にバックアップをとっておかなかったのか。ネット上では技術者を中心に、この点が指弾された。これについてファーストサーバの村竹室長は、こう話す。「おっしゃっているような一般的なバックアップというのは、我々のような低価格の料金で提供するのは難しい。サーバー内の別のディスクでとることを、我々はバックアップと考えています」
　　　＊＊＊
　同種のトラブルとしては国内最大級に発展しそうな大規模データ消失。今となってはバックアップがない企業・団体は泣き寝入りするしかなく、損害賠償も多くを見込めそうにない。日本経済新聞（2012/06/26）より

けっきょくは泣き寝入りなのか