押さえておきたいSQL ServerとHadoop連係の注意点【後編】
SQL ServerユーザーのためのHadoopコネクタ実装手順
SQL ServerとHadoopを接続するためのコネクタの実装手順を解説。SQL ServerとHadoop環境を組み合わせれば、大量の非構造化データを処理し、リポーティング、分析、BIなどをサポートする構造化環境に統合できる。
前編「SQL ServerユーザーのためのHadoop連係入門」では、SQL ServerとHadoopの連係を検討するユーザーのために、Hadoop環境におけるビッグデータ処理技術の概念を説明した。後編ではMicrosoftが提供するSQL Server用のHadoopコネクタの実装手順を解説する。
SQL Server用のHadoopコネクタの実装
SQL Server用のHadoopコネクタは、Hadoopクラスタのマスターノードに実装する。この場合、SqoopとMicrosoftのJava Database Connectivityドライバを使ってマスターノードを構成しなければならない。Sqoopはオープンソースのコマンドライン型ツールで、リレーショナルデータベースからデータをインポートし、Hadoop MapReduceフレームワークを使ってデータを変換した上で、そのデータをデータベースにエクスポートするのに利用する。
SQL Server用のHadoopコネクタをマスターノードにインストールすれば、Sqoopを使ってSQL Serverのデータをインポート/エクスポートできる。ただし、SqoopとコネクタはHadoopを中心とした環境内で動作する。言い換えれば、Sqoopを使ってデータをインポートする際には、SQL Serverデータベースからデータを取り込み、それをHadoop環境に追加するという形になるのだ。しかしデータをエクスポートする場合には、Hadoopからデータを取り込み、それをSQL Serverに送ることになる。
SqoopでSQL ServerのデータをHadoopにインポートする、あるいはHadoopからデータをエクスポートするには、次の3つの保存形式が使用できる。
- テキストファイル:コンマ、タブ、その他のサポートされた区切り文字を使用する基本的なテキストファイル
- シーケンスファイル:シリアライズされたデータが含まれるバイナリファイル
- Hiveテーブル:Hiveデータウェアハウス(Hadoop上に置かれる特殊なウェアハウジング構造)内のテーブル
SQL ServerとHadoop環境(MapReduceとHDFS)を組み合わせれば、大量の非構造化データを処理し、そのデータを、リポーティング、分析、ビジネスインテリジェンス(BI)などをサポートする構造化環境に統合できる。
もっと先を見据えるMicrosoft
SQL Server用のHadoopコネクタは、Microsoftがビッグデータ管理の分野に向けて大きな一歩を踏み出したことを意味する。その結果、Microsoftはオープンソースの世界を積極的に受け入れざるを得なくなった。Hadoop、Linux、Sqoopはいずれもオープンソース技術なのだ。だがMicrosoftはもっと先を見据えている。同社は2011年、クラウドプラットフォームのWindows Azure上のサービスとして動作するHadoop派生ソリューションを投入する予定だ(関連記事:Microsoftのビッグデータ戦略は顧客に何をもたらすか?)。
さらにMicrosoftは2012年、Windows Server向けに同様のサービスをリリースする計画だ。しかし、同社がHadoopコネクタをリリースしたことだけでも大きな前進だといえる。企業はビッグデータを自社のSQL Server環境に統合する作業を直ちに始めることができ、一方、Microsoftはこれを出発点としてビッグデータを統合する手段の改善に向けて継続的な取り組みを続けることができるのだ。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
新着ホワイトペーパー PR
-
製品資料
[株式会社MatrixFlow] 「物流リソース最適化」ガイド:人員・配車・傭車を出庫依頼の確定前に決めきる -
製品資料
[株式会社キーエンス] なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは -
製品資料
[株式会社セールスフォース・ジャパン] 「CRMは設計と無関係」は本当か? PLMとの融合で実現する高速開発 -
事例
[日本ヒューレット・パッカード合同会社] AIエージェントの時代にどう備える? 「新たな働き手」を支える3要素とは -
製品資料
[日本ヒューレット・パッカード合同会社] “横並びの自動化”から脱却、AI活用で生産性と競争力を高める秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
なぜ「全社配布Copilot」は使われないのか? 失敗に学ぶAI定着
-
2
ChatGPTは“検索しまくり”でGeminiは“淡泊”? データが明かすAIの裏側
-
3
法務と開発者で「言葉が通じない」問題 トヨタやソニーが語るOSS管理の真実
-
4
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
5
損保ジャパンはなぜ「COBOL」を捨てなかったのか? 脱メインフレームの真相
-
6
【漫画付き】ひとり情シス協会が明かす、RAG導入でしくじる企業「2つの共通点」
-
7
「Wi-Fi 7」経由でWindowsが乗っ取られる? 最高権限奪取の恐怖
-
8
「IBM iはDXのボトルネック」は誤解 意外と知らない今風モダナイズの効果
-
9
「朝8時にバッチが終わらない」データ爆発の危機をJPX総研はどう乗り越えたか
-
10
「中堅・中小企業のネットワーク・セキュリティ運用実態」に関するアンケート
ホワイトペーパーランキング PR
-
1
不審メールの経路や見せ方に変化? 2026年夏の3事例から見えた動向と対処方法
-
2
家庭用Wi-Fiルーターの業務利用は危険? 避けるべき理由と具体的な対策
-
3
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
-
4
財務部門がAIを最大限に活用する方法 無駄のない戦略的リーダーシップへの道
-
5
LLMが兵器化? 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント
-
6
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
7
なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは
-
8
生成AIを開発に導入しても効果が見えない? 実証実験で分かった成果と課題
-
9
経産省DX指針から読み解く、受発注業務デジタル化ロードマップ
-
10
HDDを使わない「SSDオンリー」が無謀なのはなぜ?
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー