障害対応を阻む「組織の壁」
東京ガスが“原因不明のエラー”特定時間を10分の1に短縮した方法
クラウドインフラは便利である半面、システムが複雑化して障害時の原因究明を困難にするという負の側面を持つ。手作業での膨大なログ収集に疲弊していた東京ガスの運用現場は、この難局をどう乗り越えたのか。
社会インフラであるガスや電力の安定供給において、顧客との接点になる手続き用Webサイトの可用性は不可欠だ。東京ガスは首都圏を中心に膨大な数の顧客を抱え、人々の生活を支えている。同社ではサービス利用者の増加に伴い、大規模な受付システムをオンプレミスシステムからクラウドサービス群「Microsoft Azure」に移行した。ところがシステム構成が複雑になり、多様な外部APIとの連携が必要になる中で、障害発生時に原因究明の労力が多大になるという運用上の課題に直面していた。
この課題を克服する手段として、東京ガスはシステム全体の稼働状況を一元的に可視化する統合監視ツールを採用し、エラー調査の時間を10分の1にまで短縮した。サービスが複雑に絡み合うシステムの裏側で、いかにして迅速なトラブル解決とコスト最適化を実現したのか。
原因特定を10分の1に縮めた“共通言語”
東京ガスが導入したのは、インフラからアプリケーション、ユーザー体験を単一のシステムで網羅的に観測可能にするオブザーバビリティ(可観測性)ツール「New Relic」だ。同社が運用する受付システム「TG-WISP」(WISP:Web Interface Service Platform)は、ガスや電気の使用開始/停止手続きなどを担う重要なライフラインの入り口だ。引っ越しが集中する繁忙期には、1日平均10万件、月間で最大300万件のリクエストを処理しており、システムの停止は社会活動への影響に直結する。
システムを高度化する中で直面した課題と、それを克服した独自の仕組みは以下の通りだ。
1.フルスタック監視とトレースIDによる迅速な原因特定
従来の仕組みでは、エラーのアラートが発報された場合、連携する多数の外部システムから膨大なログを手作業で収集して分析をかけなければならなかった。しかし新たな統合監視基盤の導入により、1つの画面で全てのシステムのログを横断的に確認することが可能になった。
特筆すべきは、1件のリクエストに対する一連の処理の流れを一意に識別する「トレースID」の活用だ。この仕組みによって、インフラ担当者はアプリケーションのソースコードを読み解くことなく、処理の前後関係や通信の実態を正確に把握できるようになった。結果として問題の切り分けが迅速化し、エラー1件当たりの調査時間は従来の10分の1にまで短縮されている。機能ごとの課金体系ではないため、料金の増加を懸念することなく、必要に応じて監視機能を自由に追加して有効性を検証できる点も、優位性として評価された。
2.共通言語としてのデータが実現する運用体制
技術的な恩恵は、組織の連携プロセスにも大きな変革をもたらした。
東京ガスは、システムのプロダクトオーナーである自社に加え、運用を担うIT子会社の東京ガスiネット、開発を担当する協力会社のサーバーフリーの3社体制で業務を進めている。以前は問題が発生した際、各社が個別に観測結果を確認し、必要に応じて連絡を取り合うという分断された手順を踏んでいた。New Relic導入後は、監視システムが収集した客観的なデータを「共通言語」として活用している。アラートを契機に3社の関係者が直ちにWeb会議に集まり、同じ画面でデータを確認しながら、原因の特定から対処方針の決定までをその場で実施するスタイルに移行した。これによって、従来は問題発生から対処方針を決めるまでに3時間程度を要していた意思決定の時間が約30分へと短縮され、対処スピードが6倍に上がっている。
3.クラウド料金適正化と将来への展望
詳細な稼働状況の可視化はインフラの最適化にも寄与している。どの部分の処理が、CPUやメモリなどのリソースをどれだけ消費しているかが正確に見えるようになったため、過剰なリソース確保による無駄を排除し、データに基づいたクラウド料金の適正化が可能になった。インフラ構築を自動化する仕組みと組み合わせることで、作成した監視用の画面を他のシステムに横展開できる拡張性も備えている。
東京ガスの小川靖史氏(エネルギー事業革新部 オペレーション改革グループ チームリーダー)は、2025年1月にメインの受付システムとしてTG-WISPをリリースした直後の繁忙期にトラブルが発生した際も、New Relicによる可視化と各社のノウハウが助けになり、難局を切り抜けることができたと説明する。同社は今後、TG-WISPでの成功モデルをベースにNew Relicの適用範囲を他のシステムにも拡大し、収集したデータからトラブルの予兆を捉えるプロアクティブな対処の実現を目指している。
Copyright © ITmedia, Inc. All Rights Reserved.
本記事は制作段階でChatGPT等の生成系AIサービスを利用していますが、文責は編集部に帰属します。
関連記事
新着ホワイトペーパー PR
-
製品資料
SNS認証や多要素認証も数分で実装、IDaaS基盤でデジタルビジネスはどう変わる? -
製品レビュー
「電子帳簿保存法対応」実践術:タイムスタンプ付与などの要件の手軽な実現方法 -
事例
「大企業のデジタル化」成功事例集【コクヨ、九州電力、ヨネックスなど21社】 -
製品資料
“顧客管理の課題”を簡単に解決する方法とは? -
製品資料
契約管理の“あるある課題”をノーコード開発で解決するためのポイント
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
100億円の「Linux更新」を回避 みずほ銀行が選んだ“おきて破り”のRHEL延命策
-
2
Oracle巨大ITプロジェクトはなぜつまずいたのか 8年で導入1割、追加で170億ドル
-
3
Microsoft製品でここまで自動化できる 情シスがやめられる手作業10選
-
4
自宅のWi-Fiが「遅い」「途切れる」本当の原因は? Dellが推奨する鉄則
-
5
Synologyがエンタープライズ向けユニファイドストレージを投入 その実力は
-
6
「技術屋」で終わらないために 情シスが今取るべき認定資格5選
-
7
「Windows派」「Linux派」を分ける決定的な違い
-
8
脱VMwareの最適解 NTTデータと日立製作所が示す国産仮想化基盤
-
9
ISMSの“コンサル丸投げ”が招く数千万円の無駄 NTTドコモビジネスの脱出劇
-
10
継続利用は4割どまり M365 Copilotが「効く業務」と期待外れの境界
ホワイトペーパーランキング PR
-
1
AIエージェントで多様な日常業務を効率化するための入門ガイド
-
2
AIが「わざわざ使うツール」になっていない? 業務で自然に使う導線にする秘訣
-
3
5回聞くだけじゃ足りない? トヨタ式「なぜなぜ分析」の正しい実践方法
-
4
JR西日本ITソリューションズが「監視業務の属人化」を解消した方法とは?
-
5
「脱Excel」か「Excel快適化」か? 現場にやさしい業務改善の進め方
-
6
インシデント対応工数を約3割削減、東京ガスの事例に学ぶ監視体制刷新のコツ
-
7
PostgreSQLの「機能」「性能」「運用」「拡張性」に関する悩みの解消法
-
8
5分で分かる「セキュア大容量ファイル転送サービス」の機能とメリット
-
9
Macの安全神話は崩壊? 最新の脅威動向から見えた攻撃のトレンドと有効な対策
-
10
情報セキュリティ対策早分かりガイド:25の自社診断で弱点と解決策を理解
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー