데이터 큐레이션

요구사항 및 제한사항

데이터 큐레이션의 경우 다음 요구사항 및 제한사항이 존재합니다.

큐레이션 태스크

다음 큐레이션 태스크로 귀중한 데이터 자산을 개발할 수 있습니다.

• 프로젝트나 카탈로그에 데이터 자산 추가:

  • 메타데이터 가져오기를 통해 자동으로 하나 또는 여러 데이터 자산별로 수동으로 연결에서 데이터 소스로 자산을 추가합니다. 클라우드 또는 온프레미스에 있는 데이터를 그대로 두고 자산 메타데이터 및 연결 정보를 추가하여 프로젝트 또는 카탈로그 내의 데이터에 액세스하십시오.
  • 프로젝트나 카탈로그와 연관된 스토리지에 개별 파일을 업로드하십시오.
  • 카탈로그에서 작업할 프로젝트로 자산을 수동으로 추가하십시오.

• 사용자 데이터 분석 및 강화:

  • 개별 데이터 자산을 프로파일링하여 자산 컨텐츠에 대한 기본 통계를 가져오고 프로젝트 또는 카탈로그 내에서 데이터 클래스를 지정하십시오. 데이터 자산 프로파일링을 참조하십시오.

  • 프로젝트의 메타데이터 인리치먼트를 작성하고 실행합니다. 데이터 자산 강화를 참조하십시오.

    • 단일 실행으로 다중 데이터 자산을 프로파일링하여 자동으로 데이터 클래스를 지정하고 데이터 유형과 열 형식을 식별하십시오.
    • 단일 실행으로 여러 데이터 세트에 대한 품질 분석을 실행하여 누락된 값 또는 데이터 클래스 위반과 같은 공통 데이터 품질 문제를 스캔합니다.
    • 자산에 비즈니스 용어를 자동으로 지정하고 데이터 분류 또는 기계 학습 알고리즘을 기반으로 용어 제안을 생성합니다.

  • 강화 결과를 검토하십시오. 데이터 자산의 품질 점수에 대한 전체 보기는 프로젝트의 메타데이터 강화 자산에서 사용 가능합니다. 품질 점수를 클릭하여 각 데이터 자산 또는 열에 대한 자세한 결과를 볼 수 있습니다. 또는 프로젝트 또는 카탈로그 내에서 자산의 데이터 품질 탭에 있는 정보에 액세스할 수 있습니다.

  • 데이터 자산의 변경사항을 발견하고 평가하려면 간격으로 가져오기 및 강화 작업을 다시 실행하십시오. 이 작업을 수동으로 수행하거나 가져오기 및 강화 스케줄을 설정할 수 있습니다.

• 데이터 품질 규칙을 실행하여 데이터 품질을 평가하십시오.

• 데이터를 세분화하여 프로젝트에서 해당 품질과 유용성을 개선하십시오.

• 프로젝트에서 카탈로그로 자산을 공개하십시오.

• 카탈로그 내 데이터 자산을 등급 지정하고 검토하십시오.

• 태그를 작성하고 카탈로그 내 데이터 자산에 추가하십시오.

• 분류와 비즈니스 용어를 카탈로그 내 개별 데이터 자산에 추가하십시오.

샘플 플로우: 고급 큐레이션

큐레이션 플로우에는 다음 태스크가 있을 수 있습니다.

1. 프로젝트에서 연결에서 프로젝트로 메타데이터의 대량 가져오기를 수행하기 위해 목표 발견 을 사용하여 메타데이터 가져오기를 작성하고 실행하십시오. 일회성 또는 반복 스케줄로 실행되도록 메타데이터 가져오기를 구성할 수도 있습니다.

2. 동일한 프로젝트에서 메타데이터 인리치먼트를 작성하고 실행하여 단일 실행으로 가져온 데이터 자산 세트에 대해 다음 태스크를 완료하십시오.

   • 데이터 자산을 프로파일링합니다.
   • 데이터 자산에 대한 품질 분석을 실행합니다.
   • 가져온 자산에 비즈니스 용어를 자동으로 지정하고 용어 제안을 생성합니다.

   메타데이터 강화를 위해 일회성 또는 반복 스케줄을 설정할 수도 있습니다. 인리치먼트 스케줄을 메타데이터 가져오기에 대해 구성된 스케줄과 맞출 수 있습니다.

3. 데이터 자산 및 해당 열에 대한 강화 결과를 검토하십시오.

4. 카탈로그에 강화된 데이터 자산을 공개하십시오.

사용자 인터페이스 대신 API를 사용하여 대부분의 큐레이션 태스크를 수행할 수 있습니다. 각 해당 작업에 대해 IBM Knowledge Catalog API에 대한 링크가 나열되어 있습니다.

자세한 정보

• 카탈로그 자산
• 프로젝트
• 데이터 세분화
• 메타데이터 가져오기
• 데이터 자산 강화

상위 주제: 데이터 준비