テキストマイニング製品紹介【第1回】クオリカ編
“間違った日本語”も解析可能、辞書更新不要の「VextMiner」
話し言葉など文法無視の日本語であっても解析したい。形態素解析に利用する辞書更新の手間を省きたい。こうした課題を解決するテキストマイニング製品が「VextMiner」だ。
1998年からテキストマイニング製品を販売している、老舗ベンダーのクオリカ。一般的なテキストマイニング製品とは異なる解析手法を取り入れたり、ユーザー企業からの生の声を操作性向上に生かすといった工夫を凝らす。クオリカのテキストマイニング製品について、同社テキストマイニング室エグゼクティブコンサルタントの石井 哲氏に話を聞いた。
連載:テキストマイニング製品紹介
製品の概要
クオリカの中心的なテキストマイニング製品が「VextMiner」だ。アンケートの自由回答やコールセンターに寄せられた顧客の声などのテキスト群を登録すると、テキストに含まれる単語や文の関連性を自動的に解析する「文書登録」、登録されたテキスト群を意味別に自動分類する「クラスタリング」、クラスタリングの結果を基に、同様の意味を持つテキスト群をまとめた分類カテゴリの定義ルールを設定する「カテゴライズ」といった機能を持つ。外国語の解析用に、英語版と中国語版も用意する。
VextMinerの他、VextMinerのSoftware as a Service(SaaS)版である「VextCloud」、既存のFAQや問い合わせログからFAQを構築する「VextContact」、音声認識技術で会話内容をテキスト化し、自動要約する「VextResume」をそろえる。いずれの製品も、VextMinerと同じテキストマイニングエンジンを搭載する。
関連記事
他社製品に対する特徴
VextMinerの最大の特徴は、文単位のテキスト解析手法にある。一般的なテキストマイニング製品は、まずテキストを単語単位に分割して品詞を特定する「形態素解析」を実行し、次に係り受け関係を調べて単語間の関係性を解析する「構文解析」をするという、単語単位のテキスト解析が中心となる。
石井氏は、こうした単語単位の解析手法には「課題が多い」と指摘する。係り受けの組み合わせは無数にある上、どの係り受けが重要なのかは自明ではないため利用者が判断する必要があり、「意味のある解析結果を得るのが難しい」。また、構文解析の精度が、形態素解析で利用する辞書の充実度に依存するのも課題となるという。「辞書をユーザー企業が定期的にメンテナンスする必要があり、大きな負担となる」
「文脈ベクトル」でテキストの類似度を解析
こうした課題を解決するのが、文単位の解析だと石井氏は指摘。文単位の解析を可能にするためにVextMinerが採用したのが、「Context Vector(文脈ベクトル)」を使ったテキスト解析手法である。
文脈ベクトルは、文中の特定の単語について、その周辺に登場する単語が何か、それらの単語が文中で何回登場したかといった情報を持つ。この文脈ベクトルを利用し、単語同士や文同士の関連性を判定し、テキストの類似度を解析するのが、VextMinerの基本的なテキスト解析アプローチだ。
全く同じ単語でなくても、関連語が含まれている文同士であれば、内容が似ている可能性が高い、と判断する。こうした文脈ベースのアプローチであれば、話し言葉やソーシャルメディアのテキストで頻発する、文法的に正しくない日本語であっても容易に解析できる。「文法的に正しくない日本語の場合、構文解析で係り受けを正確に判断するのは難しい」
解析結果が形態素解析の精度に大きく依存せず、ユーザー企業が形態素解析の辞書を頻繁にメンテナンスする必要がないのも、文脈ベースの解析手法が持つ特徴だ。前述の通り、構文解析を利用するテキストマイニング製品の場合、精度を維持するには形態素解析の辞書を頻繁にメンテナンスする必要がある。こうした負荷もあり、「テキストマイニング製品を導入したものの、実際に活用し、かつ効果を出し続けている企業は意外と少ない」。VextMinerの場合、「10年以上活用し、効果を出し続けている企業も多い」。
少数意見を見逃さない「全件マッチング」
テキストマイニングでは、類似テキストが少ない分類カテゴリの場合、「その他」と分類されるのが一般的だ。ただし、「『その他』の比率が高ければ、分類が十分にできていないことになる」。
こうした課題を解決する仕組みとして、「全件マッチング」という仕組みを用意している。類似テキストが少ない分類カテゴリについても、その分類カテゴリに属するテキストが最低2件あれば分析対象にできる(画面1)。
フラットファイルDBを利用、月間80万件を安定処理
データベースとして、リレーショナルデータベース(RDB)ではなく、プレーンテキストを利用したフラットファイルデータベースを採用したのもVextMinerの特徴だ。「RDBを利用するテキストマイニング製品が多いが、非構造化データであるテキストの解析にRDBは向かない」
VextMinerのユーザー企業の中には、コールセンターに寄せられた問い合わせを月間80万件のペースで解析している例もあり、「テキストが大量であっても難なく処理できる」。
事例:キヤノン、富士フイルムなど大手企業が導入、ユーザーと共同開発も
1998年に販売開始して以来、製造や金融、通信、サービス業を中心に、約500社の導入実績を持つVextMinerシリーズ。製造業ではキヤノンや富士フイルム、三菱電機が顧客からの問い合わせ分析などに利用。金融機関では、住友生命保険や損害保険ジャパンなどが活用している。
VextMinerの3番目のユーザー企業となった電通とは、共同でユーザーインタフェースの改良をした。クラスタリングの解析結果画面で、複数のクラスタを統合したり分割したりするといった動作をマウス操作で可能にしたことが、具体的な成果の1つだ(図2)。電通は、現在も3000~4000人規模でVextMinerを利用しているという。
製品価格:SaaS版は1カ月単位のスポット利用も可能
VextMinerは、ライセンス価格が5ユーザー630万円。保守サポートは初年度から契約が必要で、年間94万5000円。その他、20万円程度からの導入費用が発生する。
VextMinerのSaaS版であるVextCloudは、3ユーザーで解析件数が3万件に制限される「スタンダードコース」の場合、初期導入費用が10万5000円、6カ月利用の場合で月額利用料金が10万5000円。1カ月単位でのスポット利用が可能なのが特徴で、その場合は初期導入費用が10万5000円、月額利用料金が21万円。
Copyright © ITmedia, Inc. All Rights Reserved.
テキストマイニング製品紹介
この記事の著者
新着ホワイトペーパー PR
-
製品資料
[株式会社MatrixFlow] 「物流リソース最適化」ガイド:人員・配車・傭車を出庫依頼の確定前に決めきる -
製品資料
[株式会社キーエンス] なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは -
製品資料
[株式会社セールスフォース・ジャパン] 「CRMは設計と無関係」は本当か? PLMとの融合で実現する高速開発 -
事例
[日本ヒューレット・パッカード合同会社] AIエージェントの時代にどう備える? 「新たな働き手」を支える3要素とは -
製品資料
[日本ヒューレット・パッカード合同会社] “横並びの自動化”から脱却、AI活用で生産性と競争力を高める秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
ChatGPTは“検索しまくり”でGeminiは“淡泊”? データが明かすAIの裏側
-
2
法務と開発者で「言葉が通じない」問題 トヨタやソニーが語るOSS管理の真実
-
3
なぜ「全社配布Copilot」は使われないのか? 失敗に学ぶAI定着
-
4
損保ジャパンはなぜ「COBOL」を捨てなかったのか? 脱メインフレームの真相
-
5
「何も変更していないのにWebサイトがクラッシュ」 そのときの原因は?
-
6
「何から始めればいい?」 情報漏えい対策で悲鳴を上げる中小企業のリアル
-
7
【漫画付き】ひとり情シス協会が明かす、RAG導入でしくじる企業「2つの共通点」
-
8
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
9
「Wi-Fi 7」経由でWindowsが乗っ取られる? 最高権限奪取の恐怖
-
10
「Uber」めぐるタクシー業界のバトル発生、背景にある重要技術とは
ホワイトペーパーランキング PR
-
1
不審メールの経路や見せ方に変化? 2026年夏の3事例から見えた動向と対処方法
-
2
家庭用Wi-Fiルーターの業務利用は危険? 避けるべき理由と具体的な対策
-
3
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
-
4
プログラミング不要で誰でも実現できる、ネットワーク運用管理の自動化とは
-
5
財務部門がAIを最大限に活用する方法 無駄のない戦略的リーダーシップへの道
-
6
LLMが兵器化? 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント
-
7
なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは
-
8
HDDを使わない「SSDオンリー」が無謀なのはなぜ?
-
9
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
10
“あのファイル転送”で暗躍するノーウェアランサム
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー