米Googleが明かす障害復旧の舞台裏
Gmail消失事故で分かった「だからテープバックアップが必要なんだ」
米Googleで発生した2011年のメール障害。そこから得られた教訓は、実に興味深いものだった。Googleスタッフが明かした障害復旧の舞台裏を示す。
最近、英ロンドンで私の得意とするトピックである「Software-Defined Everything時代の障害復旧」についてのプレゼンテーションを準備していた。その間に私は、2014年に私の仲間が講演したセッションの動画リンクを偶然見つけた。
米ニューヨーク市で開催された富士フイルムの年次イベント「Global IT Executive Summit」で披露され、特に啓発的で興味深かったそのセッションは、米Googleのスタッフでサイトリライアビリティエンジニアであるレイモンド・ブルーム氏によるものだ。私は、全ての人にそのセッションを聞くことをお勧めする。
2011年のGmailデータ消失事故から得た教訓
これは、Googleやクラウドバックアップに関するよくある宣伝ではない。ときに私は、重要なビジネスデータの保護と障害復旧について考える。これらビジネス継続性機能には、プロセスの実施と予行演習に加え、インフラの整備や制御の仕組みなどが必要となる。近道はない。
Googleが2011年に直面したメールサービス「Gmail」の障害では、多くユーザーのメールを紛失し、それをすぐに復旧する必要があった。その障害から得た教訓は、とても興味深いとブルーム氏は言う。
ストレージ機能をソフトウェアで制御する「Software-Defined Storage(SDS)」の推奨アプローチである冗長化は、「データの完全性や永続性の保証が必要な障害復旧戦略としては、ひどく不十分だ」とブルーム氏は述べる。複製とミラーリングは障害復旧を約束しないという、単純な真実を認めることが必要だ。なるべく幾つかのデータを、できればテープにバックアップをする必要がある。そう、テープバックアップが必要なのである。
冗長性に対して人々が考えていることは、必ずしも真実ではないとブルーム氏は強調する。「ミラーリングをしているディスクでデータを5回コピーした場合、5個の不良コピーが生じる可能性がある。2011年のGmail機能停止は、冗長性は復旧戦略ではないことを示した」(同氏)。ゼロデイ攻撃を受けた場合、「データが複製されるところ全てで、データの完全性が危険にさらされる恐れがある」と同氏は語る。
冗長性は、低レベルのコンポーネント障害に対する優れた防御を提供する。だが障害からの復旧を保証するには、できればテストして復元できることが分かっているテープバックアップが必要だ――。ブルーム氏のこうした考えは、私の考えと一致する。
復元性は、Googleが実施したテープ戦略の中で重要な項目である。ブルーム氏は講演で、Googleが5本のテープにまたがるデータを展開させる方法の説明に多くの時間を割いた。同氏が説明したのは、5本のうち4本のテープが、データの読み取りに失敗する5番目のテープの内容を復元できるようにする方法である。これは、Googleで「年に何百本ものテープに起こる」(同氏)というメディア障害の対策だ。この数は、Googleが年間に使用するテープ数のほんの一部だという。
より興味深いのは、ブルーム氏が実施した、大規模な分散サーバのインフラで大量のデータをバックアップ/復元した方法だろう。「E(エクサ)バイトのデータをバックアップするのにはおよそ112年かかる」と同氏は指摘する。だがGoogleでは、分散処理の仕組みである「MapReduce」を使用し、バックアップジョブを多くのサーバに分割することで、7年でEバイト規模のバックアップができるという。意図的ではないとしても、同氏のこうした取り組みは、ビッグデータ分析や高性能クラスタコンピューティング向け技術の興味深い使用法だといえる。
「バックアップ、特にテープバックアップの取得が好きだという人はいない」とブルーム氏は認める。なお悪いことに、障害が発生してデータの復元が必要だという呼び出しを好むものもいない。
ブルーム氏は、Googleがメールの機能停止から回復したプロセスを詳しく述べた。あるとき、会社の多くのテープライブラリのうちの1つで、テープをピックアップして元に戻すロボットの1つに不具合があり、ロボットはテープを棚に戻し続けた。ブルーム氏はある技術者に電話をして、米オレゴン州のデータセンターに行って問題を解決するよう依頼した。
その技術者は当初、テープライブラリへの電力をシャットダウンすることを拒否。ライブラリを壊すことを恐れてロボットの爪からテープをむしり取り、テープドライブの挿入口に手動で挿入した。ブルーム氏の対応は傑作だった。「エンタープライズ号(米SFドラマ『スタートレック』に登場する宇宙船)の船長という私の権限において、敵対するロボットを無力化することを君に命じる」
バックアップやデータの復元性の確認に時間を費やすことを好む者はいない。だがそれこそが、企業が取り扱うデータに耐久性と完全性を確実に持たせたり、データの生成、処理、共有、保存、ネットワーク化に必要なシステムを確実かつ適切に保護する唯一の方法なのだ。
本稿著者のJon William Toigoは、IT分野で30年の経験を持つ米Toigo Partners InternationalのCEOであり、マネージングプリンシパルである。Data Management Instituteの会長を務める。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
新着ホワイトペーパー PR
-
製品資料
[株式会社キーエンス] なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは -
製品資料
[株式会社セールスフォース・ジャパン] 「CRMは設計と無関係」は本当か? PLMとの融合で実現する高速開発 -
事例
[日本ヒューレット・パッカード合同会社] AIエージェントの時代にどう備える? 「新たな働き手」を支える3要素とは -
製品資料
[日本ヒューレット・パッカード合同会社] “横並びの自動化”から脱却、AI活用で生産性と競争力を高める秘訣 -
製品資料
[サイボウズ株式会社] AIが「わざわざ使うツール」になっていない? 業務で自然に使う導線にする秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
なぜ「全社配布Copilot」は使われないのか? 失敗に学ぶAI定着
-
2
法務と開発者で「言葉が通じない」問題 トヨタやソニーが語るOSS管理の真実
-
3
【漫画付き】ひとり情シス協会が明かす、RAG導入でしくじる企業「2つの共通点」
-
4
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
5
損保ジャパンはなぜ「COBOL」を捨てなかったのか? 脱メインフレームの真相
-
6
ChatGPTは“検索しまくり”でGeminiは“淡泊”? データが明かすAIの裏側
-
7
情報漏えいはなぜ繰り返されるのか 今すぐ見直すべき「境界」
-
8
BMWも導入 78兆円市場に化ける「フィジカルAI」の衝撃
-
9
「Wi-Fi 7」経由でWindowsが乗っ取られる? 最高権限奪取の恐怖
-
10
「AI活用を前提とした業務PCへの移行」に関するアンケート
ホワイトペーパーランキング PR
-
1
不審メールの経路や見せ方に変化? 2026年夏の3事例から見えた動向と対処方法
-
2
家庭用Wi-Fiルーターの業務利用は危険? 避けるべき理由と具体的な対策
-
3
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
-
4
財務部門がAIを最大限に活用する方法 無駄のない戦略的リーダーシップへの道
-
5
LLMが兵器化? 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント
-
6
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
7
なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは
-
8
生成AIを開発に導入しても効果が見えない? 実証実験で分かった成果と課題
-
9
経産省DX指針から読み解く、受発注業務デジタル化ロードマップ
-
10
HDDを使わない「SSDオンリー」が無謀なのはなぜ?
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー