watsonx.governance 또는 AI Factsheets 서비스를 사용하여 노트북에서 또는 Cloud Pak for Data외부에서 작성되는 모델에 대한 통제를 사용으로 설정하십시오. 팩시밀리에서 모델 평가 및 모델 세부사항의 결과를 추적합니다.
watsonx.ai Runtime을 사용하여 학습된 모델을 관리할 뿐만 아니라 Amazon Web Services 또는 Microsoft Azure 같은 타사 도구를 사용하여 만든 모델도 관리할 수 있습니다. 지원되는 제공자 목록은 지원되는 기계 학습 제공자를 참조하십시오. 또한 노트북에서 개발된 모델은 외부 모델로 간주되므로 AI Factsheets 를 사용하여 Cloud Pak for Data이외의 플랫폼에서 개발, 배치 및 모니터하는 모델을 통제할 수 있습니다.
watsonx.governance 와 함께 제공되는 모델 평가를 사용하여 외부 제공자에서 가져온 모델에 대한 성능 메트릭을 측정하십시오. AI 유스 케이스의 일부로 모델 및 평가 메트릭에 대한 팩트를 시트에 캡처하십시오. 통제 및 준수 전략의 일부로 추적된 데이터를 사용하십시오.
시작하기 전에
시작하기 전에 사용자 또는 관리자 역할이 있는 사용자가 다음을 수행하는지 확인하십시오.
- 재고에서 외부 모델의 추적을 사용으로 설정합니다.
- 재고의 소유자를 할당하십시오.
세부사항은 인벤토리 관리를 참조하십시오.
외부 모델 추적 준비
이러한 점은 외부 모델의 팩트를 보존하기 위한 프로세스의 개요입니다.
- 추적된 외부 모델은 기본 탐색 메뉴의 AI 유스 케이스 아래에 나열됩니다.
- 모델 노트북에서 API를 사용하여 외부 모델 자산을 재고에 저장할 수 있습니다.
- 외부 모델 자산을 인벤토리의 AI 유스 케이스와 연관시켜 팩트 보존을 시작하십시오. 모델 메타데이터와 함께 새 필드
External model identifier및External deployment identifier에서는 외부 시스템 (예: AWS 또는 Azure) 에서 모델 및 배치를 식별하는 방법을 설명합니다. - 외부 모델이 watsonx.governance에서 평가될 때 자동으로 인벤토리에 추가할 수도 있습니다. 대상 재고는 다음 규칙에 따라 설정됩니다.
- 해당 개발 시간 모델이 Platform assets catalog 에 있거나 인벤토리에서 작성된 개발 시간 모델이 없는 경우 Platform assets catalog 에 외부 모델이 작성됩니다.
- Python 클라이언트를 사용하여 인벤토리에서 해당 개발 시간 모델이 작성되면 해당 인벤토리에서 모델이 작성됩니다.
외부 모델 자산을 AI 유스 케이스와 연관
자동 외부 모델 추적은 watsonx.governance 에서 평가되는 외부 모델을 개발 시 모델이 존재하는 재고에 추가합니다. 모델이 재고에 있으면 다음 방법으로 외부 모델 자산을 유스 케이스와 연관시킬 수 있습니다.
- API를 사용하여 외부 모델 자산을 노트북에서 프로그래밍 방식으로 인벤토리에 저장하십시오. 그런 다음 외부 모델 자산을 AI 유스 케이스와 연관시킬 수 있습니다.
- Watson OpenScale 평가를 사용하여 작성된 외부 모델을 AI 유스 케이스와 연관시키십시오.
API를 사용하여 외부 모델 자산 작성
- 노트북에서 모델을 작성하십시오.
- 모델을 저장하십시오. 예를 들어, S3 버킷에 저장할 수 있습니다.
- API를 사용하여 재고에서 외부 모델 자산 (외부 모델의 표시) 을 작성하십시오. 인벤토리와 상호 작용하는 API 명령에 대한 자세한 내용은 IBM_AIGOV_FACTS_CLIENT 설명서를 참조하세요.
재고에 외부 모델 자산 등록
- 모델을 추적할 재고에서 자산 탭을 여십시오.
- 추적할 외부 모델 자산을 선택하십시오.
- 재고의 자산 탭으로 돌아가서 AI 유스 케이스에 추가를 클릭하십시오.
- 기존 AI 유스 케이스를 선택하거나 새 AI 유스 케이스를 작성하십시오.
- 프롬프트에 따라 자원 명세에 세부사항을 저장하십시오.
Watson OpenScale 에서 외부 모델 등록
Watson OpenScale에서 외부 모델을 유효성 검증하는 경우 외부 모델을 AI 유스 케이스와 연관시켜 라이프사이클 팩트를 추적할 수 있습니다.
- OpenScale 대시보드에 외부 모델을 추가하십시오.
- API를 사용하여 AI 유스 케이스를 이미 정의한 경우 시스템은 유스 케이스 연관을 인식합니다.
- 배치를 작성하고 모니터할 때 팩트는 연관된 유스 케이스에 등록됩니다. 이러한 팩트는 모델에 대해 기계 학습 제공자를 분류한 방법에 따라 유효성 검증 또는 조작 단계에 표시됩니다.
AI 유스 케이스 채우기
외부 모델 자산에 대해 팩트가 저장되면 다음과 같이 라이프사이클에서 해당 단계를 나타내는 필러와 연관됩니다.
- 외부 모델 자산이 배치 없이 노트북에서 작성되는 경우, 개발 필러에 표시됩니다.
- 외부 모델 자산이 배치가 있는 노트북에서 작성되는 경우 유효성 검증 필러에 표시됩니다.
- 외부 모델 배치가 OpenScale에서 평가되면 모델에 대한 머신 러닝 제공자를 분류한 방식에 따라 유효성 검증 또는 작동 스테이지에 표시됩니다.
외부 모델에 대한 팩트 보기
외부 모델에 대한 팩트 보기는 watsonx.ai 런타임 모델에 대한 팩트 보기와 약간 다릅니다. 이 규칙은 다음을 적용합니다.
- 팩트를 보려면 외부 모델 자산을 포함하는 재고의 자산 탭을 클릭하십시오.
- 모델과 배포에 대해 서로 다른 팩트 시트가 있는 watsonx.ai 런타임 모델 사용 사례와 달리, 외부 모델용 팩트 시트는 모델과 배포에 대한 정보를 동일한 페이지에 결합합니다.
- 동일한 이름의 여러 자산을 재고에서 작성할 수 있습니다. 이들을 구별하기 위해 개발, 사전 프로덕션 및 프로덕션 태그는 해당 상태를 반영하도록 자동으로 지정됩니다.
상위 주제: AI 유스 케이스에서 자산 관리