모델 평가를 위한 데이터 관리하기 watsonx.governance에서
모델 평가를 활성화하려면 인사이트를 생성하기 위해 데이터를 로깅할 수 있도록 준비해야 합니다.
모델 평가를 활성화하려면 모델 데이터를 watsonx.governance가 지원하는 형식으로 제공해야 합니다. Watsonx.governance는 모델 트랜잭션을 처리하고 watsonx.governance 데이터 마트에 데이터를 기록합니다. 데이터 마트는 모델 평가에 사용되는 데이터를 저장하는 로깅 데이터베이스입니다. 다음 섹션에서는 모델 평가를 위해 watsonx.governance가 기록하는 다양한 유형의 데이터에 대해 설명합니다:
페이로드 데이터
페이로드 데이터에는 배치에 대한 입력 및 출력 트랜잭션이 포함되어 있습니다. watsonx.governance는 모델에서 페이로드 로깅 테이블에 저장하는 페이로드 데이터를 수신해야 합니다. 이 표에는 다음 예와 같이 watsonx.governance으로 보내는 각 채점 요청을 식별하는 타임스탬프 및 ID 열이 포함되어 있습니다:
모델 트랜잭션 로그를 watsonx.governance에 제공하기 위해 채점 요청을 보내야 합니다. 자세한 정보는 페이로드 데이터 관리를 참조하십시오.
피드백 데이터
피드백 데이터는 훈련 데이터의 구조와 일치하고 모델의 정확도를 측정하기 위해 모델 예측과 비교되는 알려진 모델 결과를 포함하는 레이블 지정된 데이터입니다. Watsonx.governance는 피드백 데이터를 사용하여 품질 평가를 구성할 수 있도록 합니다. 모델 예측의 정확도를 지속적으로 측정하려면 피드백 데이터를 watsonx.governance에 정기적으로 업로드해야 합니다. 자세한 정보는 피드백 데이터 관리를 참조하십시오.