本番環境の99%を巻き込む過酷な実験
大手ECサイトがあえて本番データセンターの電源を落とす理由
放置されたサーバには設定の不備などの技術的負債が蓄積し、有事の際にシステム障害を引き起こす恐れがある。こうした不備をあぶり出すために、大手ECサイト事業者があえてシステム全体をダウンさせる取り組みとは。
複数の出品者が出店する総合EC(電子商取引)サイトの停止は、単なる利便性の低下にとどまらず、甚大な経済損失とブランド価値の毀損(きそん)を招く。ポーランドを拠点に、欧州有数の利用者数を誇るECサイト事業者のAllegroにとって、システムの停止は許されない。同社は2025年10月時点で3200個以上のマイクロサービスが稼働し、1日当たり150回のデプロイと8000回以上の設定変更が実施される巨大なシステムを運用している。
こうした複雑なシステムにおける未知の障害リスクを最小化するため、Allegroが取り組んでいるのが「Project Osiris」だ。これは、稼働中のデータセンターを意図的に停止させ、サービス継続能力を検証する「カオスエンジニアリング」の実践だ。実験では、本番環境のインフラの99%を対象とした大規模なデータセンター停止に成功し、物理的な電源遮断を伴う過酷な条件下でも、エンドユーザーへの恩恵を損なうことなく稼働し続けるレジリエンス(回復力)を証明した。
巨大なECシステムをあえて停止させるという、一見すると無謀な試みを安全に実行するために、Allegroはどのような手順を踏んでいるのか。その詳細な仕組みと、実験から得られた知見を深掘りする。
自ら本番システムを“破壊”して回復力を得る
本稿は、SRE(サイト信頼性エンジニアリング)の国際カンファレンス「SREcon25 Europe/Middle East/Africa」における講演内容を基に構成している。登壇したAllegroのサイバーセキュリティ&ITガバナンス部門エンジニアリングマネジャー、プルゼミスワフ・ララク氏は、同社が取り組むProject Osirisの具体的な手法と、そこから得られた教訓を詳細に明かした。
実験の成功を可能にするのは、「Screenplay」と呼ばれる、分単位で規定された緻密な進行計画(シナリオ)だ。実験の数カ月前から、エンジニアリングチームは経営層や関連部署と合意を形成し、大規模な販促イベントや重要な機能更新の時期を避けた実施日時を慎重に選定する。
実験当日は、専用のダッシュボードでシステム全体の健全性をリアルタイムに可視化し、異常を検出した際には即座に実験を中止して切り戻す体制を構築している。具体的には、特定データセンターへのネットワークトラフィックを他に迂回(うかい)させ、対象のシステム構成を安全に停止。その後、本番に近い負荷を疑似的にかけるキャパシティーテストを実施し、最後に再起動とトラフィックの復旧を順次実行する。この一連の工程に明確な責任者を配置することで、現場の混乱を防いでいる。
こうした過酷な検証を実施する理由は、平時には見過ごされがちな「技術的な負債」を洗い出すためだ。ララク氏は、予期しない不具合を「裏庭に潜むサソリ」と呼ぶ。実際、過去の実験では、冗長構成のデータベース群が意図せず全停止したり、コンピューティングリソースの不足によってオートスケーリングが機能しなかったりと、複数の課題が浮き彫りになった。
特に重要な発見は、長期間再起動されずに放置されていたサーバの脆弱(ぜいじゃく)性だ。360日以上稼働し続けているようなホストマシンは、設定の不備やOSのパッチ(修正プログラム)の未適用が蓄積しており、有事の再起動で正常に立ち上がらないリスクがある。データセンター全体を定期的に停止/起動させる仕組みを導入することで、こうした潜在的な欠陥を強制的に修正し、インフラ全体の安全性を底上げしている。
他社のテストとの違いは、自社のインフラ内にとどまらず、悪質なbotを遮断するセキュリティツールなどの外部ツールとの通信を意図的に遮断するテストにも踏み込んでいる点だ。サードパーティーの障害を想定した連携テストを繰り返すことで、自社では制御不能な外部要因に対してもサービスを継続できる優位性を築いている。
本番環境で意図的に障害を起こす手法は、時に人手や手間を要し、社内での調整も容易ではない。しかし、実戦形式の実験を通じてインフラへの深い理解を得ることは、実際のインシデント発生時の復旧時間を大幅に短縮する。Allegroは今後も、物理的な電源オフを含む実験の規模を拡大し、不確実な状況下でも確実に勝利できる強固なシステムを追求する方針だ。
本稿は、USENIXが2025年11月12日に公開した動画「SREcon25 Europe/Middle East/Africa - Honey, I Shrunk the Data Center!」を基に作成しました。
Copyright © ITmedia, Inc. All Rights Reserved.
本記事は制作段階でChatGPT等の生成系AIサービスを利用していますが、文責は編集部に帰属します。
関連記事
新着ホワイトペーパー PR
-
プレミアムコンテンツ
[アイティメディア株式会社] AI活用を成功に導く「オブジェクトストレージ」 NAS/SANの限界を突破するには -
プレミアムコンテンツ
[アイティメディア株式会社] 「性能ならSSD」「大容量ならHDD」はもう古い? 変わるストレージの常識 -
プレミアムコンテンツ
[アイティメディア株式会社] 「オンプレミス回帰」がまさかの失敗に クラウドをやめずに安くする最適化手法 -
事例
[発注ナビ株式会社] AI活用を成功させる企業とそうでない企業の違いとは? -
製品レビュー
[発注ナビ株式会社] システム開発「はじめの一歩」 押さえておきたい基礎知識と失敗を防ぐ方法
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
SAP移行で1900億円の赤字 「ベンダー任せ」が招くERP崩壊と回避策
-
2
「VMware vCenter」でゼロデイ悪用、PHPも修正――今朝の情シスニュース
-
3
「GPT-6.1 Terra」は半額 それでもなぜ企業はAIモデルを選べないのか?
-
4
AIに長文を入力する際の「コンテキストウィンドウ」の適切な扱い方はどれ?
-
5
「Windows Server 2028」、初のIntune対応をプレビュー PCとサーバを一元管理へ
-
6
「OpenJDK」の重大な脆弱性をAIが1時間で発見 “防御の遅れ”をどう防ぐ?
-
7
AI利用時に情報漏えいが起きた場合の適切な対応はどれ?
-
8
「nginx」のHTTP/2脆弱性(CVSS 9.2)、パッチ適用までの緊急チェックリスト
-
9
「Copilot利用率99%」デンソー驚異の定着術 3万人を動かした“社長賞”の舞台裏
-
10
なぜ「ChatGPT」連携の拡張機能が情報漏えいの入り口になるのか?
ホワイトペーパーランキング PR
-
1
「IT史に名を残すシステム障害」8選
-
2
SCS評価制度時代の「SASE選定」ガイド
-
3
Microsoft 365 Copilotを安全&効果的に活用するために必要な「2つの準備」
-
4
Microsoft 365のメールセキュリティ、3つの“死角”と追加で検討すべき対策とは
-
5
パスワード管理だけで十分? 特権アクセスを脅かす暗号鍵の放置リスクとは
-
6
すぐ分かる「AWS WAF」ガイド:特徴・運用課題・メリットを解説
-
7
マンガで解説:情シスの負担を減らす「MDRサービスのインシデント対応」の中身
-
8
「Copilot Cowork」でこう変わる AIエージェント時代の新たな働き方とは
-
9
AI活用で激化する外部・内部リスク、取引先へ波及する脅威から守る対策とは?
-
10
Microsoft 365 Copilotで実際何ができる? 回答の精度を高めるRAGとは?
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー