502 Bad Gateway

輸入ゴール

メタデータをインポートする最初のステップは、インポート目標を定義することである。 インポートするメタデータの種類と、インポートしたアセットをプロジェクトで扱うか、カタログに直接公開するかを決定する必要があります。

通常、メタデータのインポートは、より大きなデータキュレーション計画の一部である。 例えば、データ資産のメタデータをインポートした後、メタデータ・エンリッチメントを実行することで、インポートしたデータ資産にビジネス・メタデータを追加できます。 データ品質ルールを実行することもできる。 最後に、完成したデータ資産をカタログに公開し、組織で共有することができます。 メタデータのインポートを設計する前に、その選択がキュレーション計画全体に与える影響を理解しておくこと。 キュレーションの計画を参照。

例えば、データ資産の典型的なキュレーション・プロセスには次のような作業が含まれる：

1. アセットメタデータのインポートオプションを使用してメタデータのインポートを実行し、プロジェクトにデータアセットを追加します。
2. データ資産のメタデータ・エンリッチメントを実行し、データのプロファイリング、基本的なデータ品質分析、用語割り当てによるビジネス・コンテキストの提供を行う。
3. 資産のデータ品質ルールを実行する。
4. アセットをカタログに公開する。
5. 系統メタデータをインポートするオプションを使用して同じデータ資産のメタデータ・インポートを実行し、カタログ内のこれらの資産に系統情報を追加します。

メタデータ・エンリッチメントとデータ品質評価は適用されないため、他のタイプの資産をカタログに直接追加することができる。 Import asset metadata（アセット メタデータのインポート）とImport lineage metadata（系統メタデータのインポート）の両方のオプションを選択すると、アセットをカタログに追加する際に、アセットのテクニカル メタデータと系統メタデータを同時にインポートできます。

以下のインポート方法から選択できます：

資産メタデータをインポートする

アセットのテクニカル・メタデータは、アセットの詳細、関係、およびアセットのプレビューに関する情報を提供します。 それをプロジェクトに追加してさらに処理することも、インポート後すぐにカタログに掲載することもできる。

リネージュ・メタデータのインポート

リネージ・メタデータは、データがどこから来て、どのように変化し、時間の経過とともにどこに移動するかという、データの流れに関する情報を提供する。 リネージ・メタデータはリネージ・リポジトリに保存される。

インポート先

メタデータは、作業中のプロジェクトや、編集者または管理者の役割を持っているカタログにインポートできます。

データ・ソース

サポートされているデータ・ソースのリストについては、キュレーションとデータ品質でサポートされているデータ・ソースを参照のこと。

データ・ソースに接続するには、以下の詳細を指定する必要がある：

• データソースの定義。 リネージ・メタデータをインポートする場合は必須で、アセット・メタデータをインポートする場合は任意です。 エンドポイントを使用してデータ・ソースを一意に識別するために使用される。 エンドポイントには、ホスト名やIPアドレス、ポート番号、データベース名やインスタンス識別子などの情報が含まれます。 例えば、Microsoft SQL Serverデータベースが複数ある場合、データソース定義はそのうちの1つを特定する。 また、Teradataクラスタにさまざまなホスト名を持つノードが複数ある場合、データソース定義ではクラスタ全体を1つのエンティティとして識別します。 詳細については、データ・ソース定義の作成を参照してください。 メタデータ・インポートの作成を開始する前に、データ・ソース定義を作成する。

• スキャナー メタデータを抽出して処理し、リネージを作成するために使用される。 リネージがインポートされるデータソースが複数のテクノロジのメタデータをホストできる場合は、スキャナを選択します。 例えば、Microsoft SQL Serverは、Microsoft SQL ServerIntegration Servicesのメタデータ・ストレージとして使うことができる。 このような場合、系統メタデータはデータベースMicrosoft SQL Server）またはETLジョブMicrosoft SQL ServerIntegration Services）からインポートすることができる。 特定のタイプの血統メタデータをインポートするスキャナーを選択します。

• コネクションだ。 接続の詳細には認証情報が含まれる。 例えば、異なるホスト名を使用して接続したり、特定の権限を持つさまざまなユーザー・アカウントに接続したりするために、1つのデータ・ソースに対して多数の接続を作成することができます。 特定のデータ・ソースへの接続に必要な詳細は、「コネクタ」セクションの各接続トピックで説明します。 アセット メタデータをインポートするときは、データ ソース定義または接続のいずれかを選択する必要があります。 メタデータのインポートを開始する前に、接続を作成してください。 データをインポートしたいプロジェクトに接続を作成するか、プラットフォーム接続を作成してからプロジェクトに追加することができます。 詳細については、プロジェクトにデータ・ソースへの接続を追加するを参照してください。

輸入範囲

インポートするデータの範囲を決めます。 データソースのサイズや内容によっては、すべてのアセットをインポートするのではなく、選択したサブセットをインポートしたい場合があります。 完全なスキーマまたはフォルダーを含めることも、個々の表やファイルにドリルダウンすることもできます。 スキーマまたはフォルダーを選択すると、そのスキーマまたはフォルダーに含まれる項目の数を即時に確認できます。 このようにして、セット全体を含めるのか、またはサブセットのみの方が目的に適しているのかを判別できます。

名前に特殊文字が含まれているスキーマからデータをインポートすることはできません。

"PLACEHOLDER","REPLACEMENT_VALUE"[,SCOPE]

スケジューリング・オプション

スケジュールを設定しない場合は、メタデータインポートアセットを最初に保存したときにインポートを実行します。 インポートは、いつでも手動で再実行できます。

特定のスケジュールでインポートの実行を選択する場合は、ジョブを実行する日時を定義します。 同じアセットについて、スケジュールされたメタデータのインポートと対応するメタデータのエンリッチメントジョブを調整したい場合があります。

特定のスケジュールでインポートの実行を選択する場合は、ジョブを実行する日時を定義します。 単一の実行をスケジュールすることも、繰り返し実行をスケジュールすることもできます。 1回の実行をスケジュールした場合、ジョブは指定された日時に正確に1回実行されます。 定期的な実行をスケジュールした場合、ジョブはRecurrenceセクションで指定されたタイムスタンプで初めて実行されます。

インポート・ジョブのデフォルト名はmetadata_import_nameジョブです。 メタデータのインポートを設定する際、ネーミングスキーマに合わせて名前を変更することができる。 ただし、後から名前を変更することはできない。 作成したインポート・ジョブには、メタデータ・インポート・アセット内またはプロジェクトのジョブ・ページからアクセスできます。 ジョブを参照してください。

メタデータインポートのスケジュールを更新するには、メタデータインポートアセットを編集します。

リネージュ・インポート・フェーズ

リネージ・メタデータのインポートは、さまざまな段階を経るプロセスである。 ニーズに合わせてインポートを最適化するために、各メタデータ・インポート・ジョブで実行するフェーズを決めることができます。 たとえば、最近リフレッシュされた選択された接続に対してのみ抽出フェーズを実行して、パフォーマンスを向上させることができます。 このフェーズが完了したら、リフレッシュされた接続と以前に抽出された接続のすべてについて分析を実行することができます。

以下のリストでは、各リネージインポートフェーズでどのような処理が実行されるかを簡単に説明する：

ディクショナリー抽出

リネージュ資産(テーブル、ビュー、シノニム、その他)をリネージュ・リポジトリーに抽出およびインポートします。

変換抽出

データ・ソースから変換の定義を抽出します。

抽出された入力分析

自動的に抽出された変換のデータ・リネージュを分析します。

外部入力の取り込み

エージェント・ファイル・システムやGitリポジトリーから外部入力を取り込みます。

外部入力分析

メタデータ・インポート・ジョブによって取り込みまたはアップロードされた外部入力のデータ・リネージュを分析します。

拡張インポート・オプション

一般的なインポートの動作や、メタデータのインポートを再実行したときにインポートしたアセットがどうなるかをカスタマイズできます。

もっと見る

キュレーションの計画

親トピック メタデータのインポート