0 / 0

OpenLineage リネージュ構成

最終更新: 2025年4月15日
OpenLineage リネージュ構成

OpenLineage, からリネージュメタデータをインポートするには、接続、 データ・ソース定義、 ジョブ作成します。

OpenLineage, のリネージュインポートするには、以下の手順を実行する:

  1. データ・ソース定義作成.
  2. プロジェクトのデータ・ソースへの接続を作成する
  3. メタデータのインポートを作成する

データ・ソース定義作成

データ・ソース定義作成. を選択する。 OpenLineage を選択する。

への接続を作成する OpenLineage

プロジェクトのデータ・ソースへの接続を作成する。 接続の詳細については、 OpenLineage 接続を参照。

メタデータ・インポートの作成

メタデータのインポートを作成する。 OpenLineage データソース固有のオプションについては、こちらをご覧ください:

インクルードリストと除外リスト

OpenLineageイベントでジョブ名前空間を使用して、資産を含めたり除外したりすることができます。 入力全体が正規表現として評価されます。 値の例:

  • myPrestoApp1Namespaceジョブ名前空間を持つすべてのイベント myPrestoApp1Namespace.
  • mySparkApp[1-5]Namespace: mySparkApp1Namespace で始まり、1 から 5 までの数字で終わるジョブ名前空間を持つすべてのイベント。

外部入力

OpenLineageイベントを外部入力として追加できます。 ファイルは以下のような構造になっている:

<event_file_name>.json

もっと見る

親トピック リネージュサポートされているコネクタ