데이터 품질 정의

데이터 품질 정의는 데이터 품질 규칙의 일반 양식을 나타냅니다. 실제 데이터에 연결되지 않은 논리 변수를 사용하여 규칙 평가 또는 조건을 설명합니다. 따라서 임의의 수의 데이터 품질 규칙에서 사용할 수 있습니다. 데이터 품질 정의를 변경하면 정의에서 파생된 모든 규칙에 대한 유효성 검증 로직도 변경됩니다.

프로젝트에서 데이터 품질 정의를 작성하고 관리합니다. 데이터 품질 정의를 다른 프로젝트에서 재사용할 수 있도록 하기 위해 카탈로그에 공개할 수 있습니다.

데이터 품질 규칙

데이터 품질 규칙은 평가를 위해 논리 변수를 실제 데이터에 링크하거나 바인드 합니다. 규칙은 특정 조건을 평가하고 유효성을 검증하여 데이터의 품질을 평가하기 위해 실제 데이터에 대해 실행됩니다. 각 규칙 실행은 규칙의 출력 테이블에 대해 정의된 대로 잠재적 예외에 대한 통계 및 정보를 제공합니다.

프로젝트에서 데이터 품질 규칙을 작성, 관리 및 실행합니다.

하나 이상의 데이터 품질 정의에서 규칙을 작성하거나 SQL문을 사용하여 데이터 품질 규칙을 작성할 수 있습니다. 데이터 품질 정의에서 빌드된 규칙은 규칙 조건을 준수하는 열과 그렇지 않은 열을 캡처합니다. SQL 기반 규칙은 비준수 레코드를 확인하는 데 더 적합합니다.

예를 들어, 세금 ID의 유효성을 검증하려고 합니다. 따라서 개념은 TaxID exists 및 Validate TaxID가 될 수 있습니다.

이제 다음과 같은 옵션이 있습니다.

• 데이터 품질 정의에서 규칙을 작성합니다. 각 개념에 대해 논리 변수 tax_id에 대한 평가 로직을 사용하여 데이터 품질 정의를 작성할 수 있습니다. 첫 번째 조건은 세금 ID (또는 TaxID) 가 존재해야 하고 두 번째 조건은 세금 ID가 정의된 형식을 충족해야 한다는 것입니다.

  데이터 품질 정의 TaxID exists: tax_id exists
  데이터 품질 정의 유효성 검증 TaxID: tax_id matches_format 'AA99-A999-9999'

  그런 다음 다음 옵션 중 하나를 선택하십시오.

  • 유효성을 검증할 세금 ID를 포함하는 각 열에 대해 두 개의 데이터 품질 규칙을 정의하십시오. 첫 번째 규칙은 TaxID exists 정의의 논리 변수 tax_id 를 열에 바인드합니다. 두 번째 규칙은 TaxID 정의의 논리 변수 tax_id 를 열에 바인드합니다.
  • 유효성을 검증할 세금 ID를 포함하는 각 열에 대해 하나의 데이터 품질 규칙을 정의하고 해당 규칙에서 두 데이터 품질 정의를 모두 사용하십시오. 정의 TaxID exists 및 Validate TaxID 의 논리 변수 tax_id 을 컬럼에 바인드하십시오.
  • 하나의 데이터 품질 규칙을 정의하고 해당 규칙에서 두 데이터 품질 정의를 모두 사용하십시오. TaxID exists 및 Validate TaxID 정의에 있는 논리 변수 tax_id 를 Parameter from column유형의 매개변수 세트에 바인드하십시오. 유효성 검증할 세금 ID를 포함하는 모든 열을 해당 매개변수 세트에 추가하십시오.

• SQL 기반 규칙을 작성하십시오. select tax_id from taxschema.taxtable where tax_id is null or not regexp_like(tax_id, '^[a-zA-Z]{2}[0-9]{2}-[a-zA-Z][0-9]{3}-[0-9]{4}$')

자세한 정보

• 데이터 품질 정의 관리
• 데이터 품질 규칙 관리

상위 주제: 데이터 품질 관리