実例で探る「Apache Kafka」の可能性【後編】
ウォルマートが「Apache Kafka」に貢献してまで克服したかった“壁”とは
Walmartは「Apache Kafka」を利用して、自社サービスのオンライン取引の不正検出を実行するシステムを開発した。同社はある課題を解決するために、Kafkaプロジェクトへの貢献を惜しまなかったという。その課題とは。
オープンソースのメッセージキュー/ストリーム(連続的に発生し続けるデータ)処理ミドルウェア「Apache Kafka」(以下、Kafka)は、イベント駆動型アプリケーションの実現に役立つ。前編「医療機関がコロナ対策に『Apache Kafka』を活用 ストリーム処理の実力は」は、Kafkaを活用する米国疾病管理予防センター(CDC:Centers for Disease Control and Prevention)の取り組みを紹介した。
小売業者Walmart(ウォルマート)もKafkaを使用する企業の一社で、不正検出などのさまざまなアプリケーションにKafkaを利用している。同社のシニアソフトウェアエンジニアであるナビンダー・パル・シング・ブラー氏は、Kafkaに関するオンラインカンファレンス「Kafka Summit」のユーザーセッションで、同社におけるKafkaの使用方法、Kafkaを改善するために実施したオープンソースプロジェクトへの貢献を語った。
ウォルマートは自らKafkaを改善
Walmartは、全てのオンライン取引を対象に不正検出を実行している。不正検出で利用するシステムはKafkaを利用して、判断に必要なデータを取得する仕組みだ。
ブラー氏によると、Walmartには実現すべき可用性とレイテンシ(データ到達までにかかる時間)の目標がある。同社はそれらの目標達成を目指した結果、Kafkaプロジェクトに対して複数の貢献をすることになったという。同社がKafkaに加えた改善は、Kafkaプロジェクト内では今後実装される機能や議論中の機能を示す「Kafka Improvement Proposals」(KIP)という扱いになっている。
KIPのうちの一つ「KIP-535」は、Kafkaを利用するアプリケーションが元のデータソースではなくレプリカ(複製)のデータソースからデータを取得することを、遅延時間に応じて条件付きで選択できるようにするものだ。Walmartにとって、不正検出の判断を可能な限り迅速に下すための情報取得が課題だった。元のデータソースよりもレプリカのデータソースの方がより早くデータを提供する場合があったことから、KIP-535を実装するに至った。
「基本的に整合性と可用性はトレードオフの関係になる」とブラー氏は指摘する。同氏によると、Walmartは不正検出システムでは可用性をより重視している。取引を長時間にわたってブロックすると、エンドユーザーの操作性に悪影響が及ぶためだ。
現代のアプリケーションアーキテクチャに合うKafka
Kafka Summitの基調講演には、Kafkaをベースにしたストリーム処理ミドルウェアを提供するConfluentのCEO兼共同設立者、ジェイ・クレプス氏が登場した。クレプス氏は、Kafkaが現代のアプリケーションやサービス開発において重要な役割を果たす存在として浮上していることについて、自身の見解を述べた。
「アプリケーションやサービスの組み立て方が近年変わってきている」とクレプス氏は指摘する。かつての一般的なアプローチは、データを格納する大規模なデータベースを用意し、アプリケーションはそのデータベースから情報を取得するというものだった。現代のアプリケーションは単一のデータソースからデータを取得するのではなく、複数のデータソースとデータをやりとりする構造になっている。
Kafkaのストリーム処理機能は「『データベース用ストレージのみがデータ管理の中心』ではない世界をモデル化するためのものだ」とクレプス氏は指摘する。「ストレージとデータがたどる経路で起きていることを、どう処理するかが鍵になる」(同氏)
TechTarget発 先取りITトレンド
米国TechTargetの豊富な記事の中から、最新技術解説や注目分野の製品比較、海外企業のIT製品導入事例などを厳選してお届けします。
Copyright © ITmedia, Inc. All Rights Reserved.
TechTarget発 先取りITトレンド
米国TechTargetの豊富な記事の中から、最新技術解説や注目分野の製品比較、海外企業のIT製品導入事例などを厳選してお届けします。
この記事の著者
関連記事
新着ホワイトペーパー PR
-
製品資料
[NTTインテグレーション株式会社] 取引先のセキュリティをどう管理する? 「SCS評価制度」対応の勘所を解説 -
製品資料
[NTTインテグレーション株式会社] SCS評価制度「★4」取得のカギ 最大の壁を突破する方法とは? -
製品資料
[NTTインテグレーション株式会社] 2026年度末から運用開始 「SCS評価制度」に備えて製造業がやるべきことは? -
事例
[ネットワンパートナーズ株式会社, アイビーシー株式会社] ハイブリッド環境の一元管理と快適な無線LAN環境、三井ホームはどう実現した? -
市場調査・トレンド
[TD SYNNEX株式会社] 調査で学ぶセキュリティ運用の実態 人を増やさず品質を維持する方法とは?
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
なぜ「全社配布Copilot」は使われないのか? 失敗に学ぶAI定着
-
2
損保ジャパンはなぜ「COBOL」を捨てなかったのか? 脱メインフレームの真相
-
3
「ノートPC派」は損をしている? Dellと考える“自作PC”のメリット
-
4
IT人材の42%が転職予備軍 辞めさせない組織の4つの共通
-
5
“脱Excel”を待ち受ける乱立問題 カカクコムが新ツール導入を見送った理由
-
6
「WSUS」終了の時限爆弾 “本命”移行先ツールとMicrosoft提唱の新管理手法
-
7
VMware離れがやっぱり加速 2500台のVM移行に挑む製造大手から学ぶ現実解
-
8
「コピペ運用の限界」に直面するAI活用 7割超が“別画面”のまま使う理由は?
-
9
「ひとり情シス」が急に退職 専門商社が外部パートナーと挑んだネットワーク刷新の裏側
-
10
DX導入企業の3割超がむしろ「負担増」 9割が陥る“内製化のわな”
ホワイトペーパーランキング PR
-
1
DX/AI投資の壁を突破、現代の最高財務責任者が直面する課題と克服のヒント
-
2
不審メールの経路や見せ方に変化? 2026年夏の3事例から見えた動向と対処方法
-
3
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
4
バックアップは“取っているから大丈夫”なのか? ランサムウェア時代の備え方
-
5
システムの保守がモダン化を阻む? 「変えない判断」から脱却する方法とは
-
6
生成AIを開発に導入しても効果が見えない? 実証実験で分かった成果と課題
-
7
経産省DX指針から読み解く、受発注業務デジタル化ロードマップ
-
8
5分で分かる Microsoft 365のデータ損失に備えるためのバックアップの仕組み
-
9
ネットワーク遅延の原因、「パケットロス」の基礎知識と効果的な解決策
-
10
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー