IBM DataStage per la configurazione del lignaggio Cloud Pak for Data

Preparare un file.zip come input esterno

È possibile fornire i flussi DataStage come input esterni in un file.zip. La cartella deve avere la seguente struttura:

• <project_export.zip> - Un progetto DataStage esportato in un file.zip.
• DSParams - Un file che contiene i parametri a livello di progetto o di ambiente, se applicabile. È possibile ottenere questo file dalla directory del progetto.
• datastageParameterOverride.txt - Un file con le sovrascritture dei parametri, se i lavori utilizzano i set di parametri.
• connection_definition/odbcConnectionDefinition.ini - Un file con le definizioni di connessione per le connessioni di ODBC. Le definizioni delle connessioni di ODBC non sono incluse nelle esportazioni XML di DataStage e devono essere specificate separatamente.
• datastageComponentOverrides.csv - Un file con le sovrascritture del lignaggio dei componenti.

Il formato del file.zip con il progetto DataStage esportato Quando si esporta un progetto DataStage, questo deve avere la seguente struttura:

• assets - cartella richiesta.
  • .METADATA - cartella richiesta.
  • data_intg_flow.*.json - file necessari che contengono informazioni sui flussi.
  • connection.*.json - file opzionali che contengono informazioni sulle connessioni.
  • parameter_set.*.json - file opzionali che contengono informazioni sui set di parametri.
  • job.*.json - file opzionali che contengono informazioni sui lavori.
  • job_run.*.json -file opzionali che contengono informazioni su particolari esecuzioni del lavoro.
  • data_intg_flow - cartella richiesta.
  • Almeno un file che contenga la stringa "schemas":[{, ma che non finisca in px_executables.
• assettypes - cartella richiesta.
• project.json - file richiesto. Potrebbero esserci più istanze di questo file come risultato della decompressione ZIP, il che è corretto.

Il formato del file datastageParameterOverride.txt Il file datastageParameterOverride.txt ha il seguente contenuto:

[ENVIRONMENT]
PARAM1_NAME = "param1_value"
PARAM2_NAME = "param2_value"
PARAM3_NAME = "param3_value"
[PARAMETER_SET/parameter_set_name]
param4_name  = "default_param4_value"
param5_name  = "default_param5_value"
$PARAM3_NAME = "$PROJDEF"
[VALUE_FILE/parameter_set_name/value_file1_name]
param4_name  = "some_param4_value"
param5_name  = "some_param5_value"
$PARAM3_NAME = "some_param3_value"
[VALUE_FILE/parameter_set_name/value_file2_name]
param4_name  = "other_param4_value"
param5_name  = "other_param5_value"
$PARAM3_NAME = "other_param3_value"
[JOB/job1_name]
param6_name = "param6_value"
param7_name = "param7_value"
[JOB/job2_name]
param7_name = "param8_value"

Il formato del file connection_definition/odbcConnectionDefinition.ini Il file connection_definition/odbcConnectionDefinition.ini ha il seguente contenuto. Creare una sezione separata di [Shortcut_Name] per ogni connessione.

[<Shortcut_Name>]
Type=<connection_type>
Connection_String=<connection_string>
Server_Name=<server_name>
Database_Name=<database_name>
Schema_Name=<schema_name>
User_Name=<user_name>

• Nome_scorciatoia : Il nome della connessione o del server di dati utilizzato dallo strumento di integrazione dei dati.
• tipo_connessione : Il tipo di origine dei dati.
• stringa_di_connessione : Una stringa di connessione JDBC o qualsiasi identificazione del database, come l'ID del sistema (SID) o il nome dell'host.
• nome_server : il valore dipende dal tipo di origine dati:
  • Db2, Microsoft SQL Server, Netezza Performance Server, SAP ASE (ex Sybase ), o Teradata : Il nome del server.
  • FTP: il nome dell'host.
  • Oracle e altri database: Il valore viene ignorato.
• nome_database : il valore dipende dal tipo di origine dati:
  • Oracle : Il nome del database globale.
  • Db2, Microsoft SQL Server, Netezza Performance Server, SAP ASE (ex Sybase ), Teradata, e altri database: Il nome del database predefinito.
  • nome_utente : il nome dell'utente che accede al database.

Aggiungere una nuova riga alla fine dei parametri per ogni sezione.

Il formato del file datastageComponentOverrides.csv Il file datastageComponentOverrides.csv ha il seguente contenuto:

"Full path to Stage";"Input Link name";"Input Column name";"Output Link name";"Output Column name";"Edge Type (DIRECT | FILTER)";"Description (optional)"
"manual_mapping_job/Generic_3";"DSLink2";"a";"DSLink5";"b";"DIRECT";""

Il percorso dello stage è nel formato Job/[Shared and Local containers optional]/Stage.

Caricare il file.zip nel progetto

Per utilizzare il file.zip nell'importazione dei metadati, è necessario aggiungerlo al progetto in cui si crea l'importazione dei metadati.

1. Nel progetto, fare clic su Importa risorse.
2. Nella sezione File locali, fare clic su Attività dati.
3. Aggiungete il file.zip al progetto DataStage.

Quando si crea l'importazione dei metadati, sarà possibile selezionare questo file nella fase Aggiungi input da file.

Configurare l'importazione per utilizzare solo l'ingresso esterno

Se si desidera importare i metadati solo dall'ingresso esterno fornito e non direttamente dall'istanza collegata di DataStage for Cloud Pak for Data, completare i seguenti passaggi:

1. Aggiungete il file.zip nella sezione Aggiungi input da file e fate clic su Avanti.
2. Espandere l'elenco delle fasi di importazione di Lineage e disabilitare la fase di estrazione delle trasformazioni.