IBM DataStage para la configuración del linaje Cloud Pak for Data

Preparar un archivo.zip como entrada externa

Puede proporcionar flujos DataStage como entradas externas en un archivo.zip. La carpeta debe tener la siguiente estructura:

• <project_export.zip> - Un proyecto de DataStage exportado a un archivo.zip.
• DSParams - Un archivo que contiene los parámetros a nivel de proyecto o de entorno, si procede. Puede obtener este archivo en el directorio del proyecto.
• datastageParameterOverride.txt - Un archivo con anulaciones de conjuntos de parámetros si sus trabajos utilizan conjuntos de parámetros.
• connection_definition/odbcConnectionDefinition.ini - Un archivo con definiciones de conexión para las conexiones de ODBC. Las definiciones de las conexiones ODBC no se incluyen en las exportaciones XML de DataStage y deben especificarse por separado.
• datastageComponentOverrides.csv - Un archivo con anulaciones de línea de componentes.

El formato del archivo.zip con el proyecto DataStage exportado Al exportar un proyecto DataStage, éste debe tener la siguiente estructura:

• assets - carpeta obligatoria.
  • .METADATA - carpeta obligatoria.
  • data_intg_flow.*.json - archivos necesarios que contienen información sobre los flujos.
  • connection.*.json - archivos opcionales que contienen información sobre las conexiones.
  • parameter_set.*.json - archivos opcionales que contienen información sobre los conjuntos de parámetros.
  • job.*.json - archivos opcionales que contienen información sobre los trabajos.
  • job_run.*.json -archivos opcionales que contienen información sobre determinadas ejecuciones del trabajo.
  • data_intg_flow - carpeta obligatoria.
  • Al menos un archivo que contenga la cadena "schemas":[{, pero que no termine en px_executables.
• assettypes - carpeta obligatoria.
• project.json - archivo necesario. Es posible que haya varias instancias de este archivo como resultado de la descompresión ZIP, lo cual es correcto.

El formato de archivo datastageParameterOverride.txt El archivo datastageParameterOverride.txt tiene el siguiente contenido:

[ENVIRONMENT]
PARAM1_NAME = "param1_value"
PARAM2_NAME = "param2_value"
PARAM3_NAME = "param3_value"
[PARAMETER_SET/parameter_set_name]
param4_name  = "default_param4_value"
param5_name  = "default_param5_value"
$PARAM3_NAME = "$PROJDEF"
[VALUE_FILE/parameter_set_name/value_file1_name]
param4_name  = "some_param4_value"
param5_name  = "some_param5_value"
$PARAM3_NAME = "some_param3_value"
[VALUE_FILE/parameter_set_name/value_file2_name]
param4_name  = "other_param4_value"
param5_name  = "other_param5_value"
$PARAM3_NAME = "other_param3_value"
[JOB/job1_name]
param6_name = "param6_value"
param7_name = "param7_value"
[JOB/job2_name]
param7_name = "param8_value"

El formato de archivo connection_definition/odbcConnectionDefinition.ini El archivo connection_definition/odbcConnectionDefinition.ini tiene el siguiente contenido. Cree una sección [Shortcut_Name] separada para cada conexión.

[<Shortcut_Name>]
Type=<connection_type>
Connection_String=<connection_string>
Server_Name=<server_name>
Database_Name=<database_name>
Schema_Name=<schema_name>
User_Name=<user_name>

• Nombre_del_acceso_corto : El nombre de la conexión o servidor de datos que utiliza la herramienta de integración de datos.
• tipo_conexión : El tipo de fuente de datos.
• cadena_de_conexión : Una cadena de conexión JDBC o cualquier identificación de la base de datos, como el ID del sistema (SID) o el nombre del host.
• nombre_servidor : El valor depende del tipo de fuente de datos:
  • Db2, Microsoft SQL Server, Netezza Performance Server, SAP ASE (antes Sybase ), o Teradata : El nombre del servidor.
  • FTP: El nombre del host.
  • Oracle y otras bases de datos: El valor se ignora.
• database_name : El valor depende del tipo de fuente de datos:
  • Oracle : El nombre global de la base de datos.
  • Db2, Microsoft SQL Server, Netezza Performance Server, SAP ASE (antes Sybase ), Teradata, y otras bases de datos: El nombre de la base de datos por defecto.
  • nombre_usuario : El nombre del usuario que se conecta a la base de datos.

Añada una nueva línea al final de los parámetros para cada sección.

El formato de archivo datastageComponentOverrides.csv El archivo datastageComponentOverrides.csv tiene el siguiente contenido:

"Full path to Stage";"Input Link name";"Input Column name";"Output Link name";"Output Column name";"Edge Type (DIRECT | FILTER)";"Description (optional)"
"manual_mapping_job/Generic_3";"DSLink2";"a";"DSLink5";"b";"DIRECT";""

La ruta a la etapa tiene el formato Job/[Shared and Local containers optional]/Stage.

Cargue el archivo.zip en el proyecto

Para utilizar el archivo.zip en la importación de metadatos, debe añadirlo al proyecto donde cree la importación de metadatos.

1. En el proyecto, haga clic en Importar activos.
2. En la sección Archivo local, haga clic en Activo de datos.
3. Añada el archivo.zip con el proyecto DataStage.

Cuando cree la importación de metadatos, podrá seleccionar este archivo en el paso Añadir entradas desde archivo.

Configurar la importación para utilizar sólo la entrada externa

Si desea importar metadatos sólo desde la entrada externa proporcionada, y no directamente desde la instancia DataStage para Cloud Pak for Data conectada, complete estos pasos:

1. Añada el archivo.zip en la sección Añadir entradas desde archivo y haga clic en Siguiente.
2. Despliegue la lista de fases de importación de Lineage y desactive la fase de extracción de transformaciones.