Création d'importations de métadonnées | IBM Cloud Pak for Data as a Service

Retourner à la version anglaise de la documentation

Création d'importations de métadonnées

Dernière mise à jour : 13 déc. 2024

Création d'importations de métadonnées

Vous pouvez importer des métadonnées techniques et des métadonnées de lignage pour ajouter des ressources de données à un projet ou à un catalogue. Dans un projet, vous pouvez préparer et analyser les données avant de les publier dans un catalogue.

Importez des métadonnées dans un projet en tant que ressources de données pour préparer et analyser les données avant de les publier dans un catalogue. Établissez le profil de ces données, analysez la qualité des données et attribuez des termes pour fournir un contexte commercial en exécutant l'enrichissement des métadonnées. Pour approfondir l'analyse de la qualité, exécutez des règles de qualité des données sur les ressources de données. Vous pouvez également ajouter directement des ressources de données à un catalogue si les données sont prêtes à être partagées sans autre préparation. Importez des métadonnées de lignage pour savoir d'où viennent vos données, comment elles évoluent et où elles circulent.

Connexions prises en charge

Voir la colonne Metadata import dans Connecteurs pris en charge. Vous pouvez utiliser les API au lieu de l'interface utilisateur pour récupérer la liste des connexions prises en charge ou pour créer une ressource d'importation de métadonnées. Les liens vers ces API sont indiqués dans la section En savoir plus.

Autorisations requises

Pour créer, gérer et exécuter une importation de métadonnées, vous devez disposer de ces rôles et autorisations :

Le rôle de l'administrateur ou de l'éditeur dans le projet.
Le rôle d'administrateur ou d'éditeur du catalogue dans lequel vous souhaitez importer ou publier les actifs.
L'accès aux connexions aux sources de données des actifs de données à importer et l'autorisation SELECT ou une autorisation similaire sur les bases de données correspondantes.
Gérer l'historique des données permission to import lineage metadata.

Prérequis

Avant de commencer à créer une importation de métadonnées pour une nouvelle source de données, suivez les étapes suivantes :

Chaque source de données nécessite différents détails de connexion. Vous trouverez ces informations dans chaque rubrique de connexion de la section Connecteurs. Pour plus d'informations sur la définition des sources de données et des connexions dans le contexte de l'importation de métadonnées, voir Conception des importations de métadonnées : Source de données.

Création d'un actif d'importation de métadonnées et importation de métadonnées

Pour créer une ressource d'importation de métadonnées et une tâche d'importation de métadonnées dans un projet ou un catalogue :

Ouvrez un projet, accédez à la page Actifs du projet et cliquez sur Nouvel actif > Importer des métadonnées pour les actifs de données.
Spécifiez un nom pour l'importation de métadonnées. Vous pouvez éventuellement fournir une description.
Sélectionnez les étiquettes à attribuer à la ressource d'importation de métadonnées pour simplifier la recherche. Vous pouvez créer de nouvelles balises en entrant le nom de la balise.
Sélectionnez l'objectif d'importation. Vous pouvez sélectionner un objectif ou les deux. Voir Objectif d'importation.
Si vous avez sélectionné l'objectif Importer les métadonnées de l'actif, sélectionnez la cible d'importation. Vous pouvez importer des métadonnées dans le projet sur lequel vous travaillez ou dans n'importe quel catalogue pour lequel vous avez un rôle d'éditeur ou d'administrateur. Voir Cible d'importation.
Fournissez les détails de la source de données pour votre importation de métadonnées. La définition de la source de données est nécessaire lorsque vous importez des métadonnées de lignage. Lorsque vous importez des métadonnées d'actifs, sélectionnez une définition de source de données ou une connexion. En fonction de la source de données, il se peut que vous deviez également sélectionner un scanner. Voir Source de données.
Définissez une portée pour l'importation de métadonnées. Voir Champ d'application de l'importation. Selon la taille et le contenu de votre source de données, vous ne souhaiterez peut-être pas importer tous les actifs, mais un sous-ensemble sélectionné. Vous pouvez inclure des schémas ou dossiers complets, ou passer au niveau inférieur vers des tables ou fichiers individuels. Lorsque vous sélectionnez un schéma ou un dossier, vous pouvez immédiatement voir le nombre d'éléments qu'il contient. Ainsi, vous pouvez décider si vous souhaitez inclure tout l'ensemble ou si un sous-ensemble est plus approprié.

Lorsque vous importez des métadonnées de lignage, vous pouvez modifier l'étendue des données de la manière suivante :
- Sélectionner des objets spécifiques dans la source de données, par exemple des schémas ou des rapports.
- Ajouter des données externes dans un fichier .zip avec d'autres données pertinentes pour la lignée.
- Ajouter des métadonnées à partir d'un système de fichiers ou d'un dépôt Git.
En option, vous pouvez définir des remplaçants pour les entrées externes afin d'améliorer l'analyse de la lignée. Cliquez sur Configurer et définissez les détails. Voir Remplacements par des espaces réservés.
Indiquez si vous souhaitez exécuter des travaux d'importation planifiés. Si vous ne définissez pas de calendrier, vous exécutez l'importation lorsque vous enregistrez l'actif d'importation de métadonnées. Vous pouvez réexécuter l'importation manuellement à tout moment. Voir Options de programmation.
Si vous importez des métadonnées de lignage, vous pouvez décider des phases de lignage à exécuter. Voir phases d'importation de la lignée.
Personnaliser le comportement de l'importation. Vous pouvez choisir d'empêcher la mise à jour de propriétés spécifiques et de supprimer les actifs existants qui ne sont pas inclus dans la réimportation. Voir les options d'importation avancées.
Passez en revue la configuration de l'importation de métadonnées. Pour apporter des modifications, cliquez sur l'icône " Editer ou " de la tuile et mettez à jour les paramètres.
Cliquez sur Créer. L'actif d'importation des métadonnées est ajouté au projet et un travail d'importation de métadonnées est créé. Si vous n'avez pas configuré de planification, l'importation est exécutée immédiatement. Si vous avez configuré un calendrier, l'importation s'exécute selon le calendrier défini.

Les actifs Important : de la même connexion qui ont déjà été importés via une importation de métadonnées différente ne sont pas importés à nouveau mais sont mis à jour. Ces actifs ne s'affichent plus dans l'importation de métadonnées initiale. Seule l'importation de métadonnées d'exécution la plus récente contient les actifs.

Selon le résultat de l'exécution de la tâche d'importation de métadonnées, un message d'achèvement ou une notification d'erreur s'affiche.

Un message d'achèvement s'affiche lorsque l'exécution du travail s'est terminée avec succès, avec des avertissements ou avec des erreurs. Une notification d'erreur s'affiche si l'ensemble de l'exécution du travail a échoué. Les deux types de notification contiennent un lien vers le journal d'exécution du travail qui fournit des détails sur l'exécution du travail en question.

Lorsque l'importation est terminée, la liste des actifs s'affiche avec les informations suivantes :

Le nom de l'actif, qui fournit un lien vers l'actif dans le projet ou le catalogue.
Le type d'actif, tel que Data ou Report. Pour les actifs de données, le format, tel que Relational table, est également indiqué. Pour les autres types d'actifs, la colonne de format affiche un tiret (-).
Le contexte de l'actif, tel que le parent ou le chemin du fichier.
La date et l'heure de la dernière importation de l'actif.
Statut d'importation, qui peut être Imported pour les données importées, In progressou Removed, si l'actif n'a pas pu être réimporté.

Vous pouvez utiliser la plupart des données importées de la même manière que les données connectées. Les actifs importés ont une étiquette automatiquement affectée qui reflète le parent de l'actif, le cas échéant.

Pour profiler, analyser et fournir un contexte commercial aux données importées, créez une ressource d'enrichissement des métadonnées et incluez la ressource d'importation des métadonnées dans l'étendue des données.

En savoir plus

Etapes suivantes

Sujet parent : Importer des métadonnées