0 / 0
資料の 英語版 に戻る
テキスト分析によるテキストデータのマイニング
最終更新: 2024年12月20日
SPSS Modelerのテキスト分析によるテキストデータのマイニング

SPSS Modelerには、テキストの処理に特化したノードがあります。 テキスト分析ノードは、高度な言語テクノロジーと自然言語処理(NLP)を使用した強力なテキスト分析機能を提供します。 構造化されていない多種多様なテキストデータを迅速に処理し、重要な概念を抽出することができる。 テキスト分析では、これらの概念を整理し、カテゴリーにグループ化することもできる。

組織内に保持されるおよそ 80% のデータは、テキスト ドキュメントの形式です (例: レポート、Web ページ、電子メール、コール センターのメモ)。 テキストは、組織が顧客の動向をより良く理解するための重要な要素です。 NLP を組み込むシステムは、複合句などのコンセプトを効率的に抽出できます。 さらに、基底となる言語の情報を使用して、コンセプトを製品、組織、人物など、意味や状況に応じて関連グループに分類できます。 その結果、情報のニーズに対する関連性を迅速に確認できます。 これらの抽出された概念やカテゴリは、人口統計などの既存の構造化データと組み合わせることができ、 SPSS Modelerのモデリングに適用することで、より的確で焦点を絞った意思決定を行うことができます。

言語学的なシステムは、知識に依存します。つまり、辞書に含まれている情報が多いほど、より高い品質の結果が得られます。 Text Analytics ノードには、用語や同義語の辞書、ライブラリー、テンプレートなど、各種の言語リソースが用意されています。 Text Analytics ノードにより、コンテキストに合わせて、これらの言語リソースの精度をさらに高めることができます。 言語リソースの調整はインタラクティブなプロセスで、正確なコンセプトの取得とカテゴリー化に必要です。 CRM およびゲノムなど、特定のドメインのカスタム テンプレート、ライブラリー、辞書も含まれています。

始めるためのヒント

このビデオは、このドキュメントのコンセプトとタスクを学ぶための視覚的な方法を提供します。

ビデオ免責条項:このビデオ内のいくつかの細かい手順やグラフィック要素は、お使いのプラットフォームと異なる場合があります。

  
https://video.ibm.com/embed/channel/23952663/video/spss-text-analytics-workbench

アプリケーション

通常、大量のドキュメントを定期的に確認して重要な要素を特定し、詳細に調べる必要がある場合は、Text Analytics を使用すると、効率的に作業を進めることができます。 以下に、Text Analytics の使用例をいくつか示します。

  • 科学と医学の研究 特許報告書、ジャーナルの記事、およびプロトコルの発行などの 2 次調査資料を探索します。 以前は知られていなかった(例えば特定の製品に関連した医者など)関連性を識別します。 薬品の開発プロセスにかかる時間を最小化します。 遺伝子調査の補助として使用します。
  • 投資の研究 毎日のアナリスト・レポート、ニュース記事、および企業のプレス・リリースを確認して、主要な戦略ポイントまたは市場のシフトを特定します。 こうした情報のトレンド分析により、一定の期間にわたって、企業または業界の緊急の問題または機会について明らかにします。
  • 不正検出。 銀行およびヘルスケアケアの不正を利用して、異常を検出し、大量のテキストから危険なものを発見します。
  • 市場調査。 市場調査活動において、自由記述式の調査回答内の重要なトピックを特定するために使用します。
  • ブログおよび Web フィードの分析。 ニュース・フィード、ブログなどで見られる重要なアイデアを利用して、モデルを探索して作成します。
  • CRMだ。 電子メール、取引、調査など、すべての顧客との接点からのデータを使用し、モデルを作成します。

ノード

SPSS Modelerの多くの標準ノードとともに、 テキストマイニングノードを使用して、テキスト分析のパワーをフローに組み込むこともできます。 これらのノードは、「Text Analytics」のノード・パレットで使用することができます。
  • 言語の識別子ノードはプロセス ノードの一種であり、ソース テキストをスキャンして、書かれている人間の言語を判別し、言語のマークを新しいフィールドに書き込みます。 主に大量のデータとともに使用するように設計されています。このノードは、データ ソースに複数の言語が存在するが、1 つの言語のみを処理したい場合に特に役立ちます。
  • テキスト・リンク分析ノードは、コンセプトを抽出し、またテキスト内の既知のパターンに基づいて、コンセプト間の関係を特定します。 パターン抽出機能を使用してコンセプト間の関係を検出するだけでなく、それらのコンセプトに付加されている意見や修飾子も検出することができます。 テキスト・リンク分析 (TLA) ノードを使用して、より直接的にテキストからパターンを特定および抽出し、パターンの結果をフロー内のデータセットに追加できます。 しかし、Text Miningモデリングノードを介してText Analytics Workbenchセッションを使用してTLAを実行することもできます。
  • テキスト・マイニング・ノードでは、言語学的手法を使用して、主要なコンセプトをテキストから抽出します。これらのコンセプトおよびそのほかのデータを使用してカテゴリーを作成することができ、既知のパターンに基づいてコンセプト間の関係および関連を特製する機能 (テキスト・リンク分析) を用意しています。 このノードを使用して、テキスト・データの内容を調べたり、コンセプト・モデルやカテゴリー・モデルを生成したりすることができます。 コンセプトおよびカテゴリーは、人口統計などの既存の構造化されたデータを組み合わせることができ、モデル作成に適用することができます。
生成 AI の検索と回答
これらの回答は、製品資料の内容に基づいて、 watsonx.ai のラージ言語モデルによって生成されます。 詳細