watsonx.governance MRG (Model Risk Governance) 워크플로우

영어 버전 문서로 돌아가기

마지막 업데이트 날짜: 2024년 12월 12일

watsonx.governance MRG (Model Risk Governance) 워크플로우

watsonx.governance MRG (Model Risk Governance) 워크플로우를 전달된 대로 사용하거나 사용자의 요구사항에 맞게 수정할 수 있습니다. 또한 이를 사용자 자신의 워크플로우에 대한 템플리트 및 학습 도구로 사용할 수도 있습니다.

모델에 대한 워크플로우

모델 라이프사이클: 이 워크플로우는 후보 프로세스 완료에서 배치 승인까지 AI 모델을 사용합니다. 여기에는 다양한 이해 당사자 (stakeholder) 를 포함하는 여러 단계 및 하위 워크플로우가 포함됩니다.
Foundation 모델 온보딩 워크플로우: 파운데이션 모델 온보딩 워크플로에서는 승인 프로세스를 통해 foundation model 가져옵니다. 승인 프로세스에는 법률 승인, AI 윤리 승인 및 재무 승인을 위한 단계가 포함됩니다.
모델 후보 워크플로우: 이 워크플로우를 사용하면 사용자가 인벤토리에 모델 오브젝트를 후보로 추가할 수 있습니다. 모델 후보가 승인을 위해 모델 또는 비모델로 제출되었습니다. 승인자가 후보 제안을 대체할 수 있습니다. 모델 후보가 모델로 확인되면 모델 개발 및 문서화 프로세스를 시작할 수 있습니다.
모델 유효성 검증 워크플로우: 이 워크플로는 모델 수명 주기 워크플로 중에 실행됩니다. 환경 설정 오브젝트에서 식별되는 검토 계획 팀이 이 검토를 완료해야 합니다. 이 워크플로우는 모델이 프로덕션 상태가 된 후 검토를 수행하는 데에도 사용됩니다.
모델 배치: 모델 배치 워크플로우는 개발이 완료될 때 모델 배치 프로세스를 통제하는 데 사용됩니다. 모델이 프로덕션에 배치되는 경우 배치가 완료되기 전에 모델이 프로덕션에 대해 준비되도록 하는 추가 단계가 있습니다.
모델 위험 평가: 이 워크플로우는 모델에 대한 모델 위험 평가를 수행하며, 결과는 모델에 티어를 지정하는 데 사용됩니다. 그런 다음 모델 위험 스코어카드 계산은 환경 설정 레코드의 값을 사용하여 위험 점수 및 티어를 계산합니다. 워크플로우의 끝에서 점수 및 티어가 상위 모델에 복사됩니다.
모델 증명 워크플로우: 이 워크플로우는 일반적으로 MRG 관리자에 의해 시작되며 증명 요청에 대한 모델 소유자의 응답을 기록합니다.
모델 해제 워크플로우: 이 워크플로우는 프로덕션에서 모델을 제거하고 폐기하는 데 사용됩니다.
모델 변경 요청 워크플로우: 이 워크플로우는 모델 변경사항에 대한 통제를 제공합니다. 워크플로우는 비즈니스의 변경사항 또는 모델에 대한 데이터 및 기타 입력을 기반으로 할 수 있습니다. 사용자는 변경을 수락, 승인 또는 거부하고 변경이 자재인지 여부를 결정할 수 있습니다.

유스 케이스에 대한 워크플로우

유스 케이스 요청: 유스 케이스 요청 워크플로우는 승인 프로세스를 통해 제안된 유스 케이스를 사용합니다. 유스 케이스가 승인되기 전에 모든 이해 당사자 (stakeholder) 검토를 완료해야 합니다.
유스 케이스 이해 당사자 (stakeholder) 검토: 유스 케이스 이해 당사자 (stakeholder) 검토 워크플로우는 이해 당사자 (stakeholder) 의 일련의 검토를 통해 유스 케이스를 가져옵니다. 각 검토에 대한 정보는 유스 케이스 검토 오브젝트에서 캡처됩니다.
유스 케이스 개발 및 유효성 검증: 유스 케이스 개발 워크플로우는 개발 및 유효성 검증 프로세스를 통해 유스 케이스를 사용합니다. 유효성 검증 프로세스가 완료되면 유스 케이스 배치 승인 워크플로우가 시작됩니다.
유스 케이스 배치 승인: 유스 케이스 배치 승인 워크플로우는 모델 배치를 위한 승인 프로세스를 통해 유스 케이스를 사용합니다.
모델 사용 사례 요청: 이 워크플로는 기본적으로 비활성화되어 있습니다. 사용 사례 요청 워크플로가 이를 대체합니다.

메트릭에 대한 워크플로우

메트릭 값 워크플로우: 이 워크플로우는 위반 상태 계산을 자동화하고 배치된 모델의 성능 모니터링을 용이하게 합니다. 이 프로세스는 모델 또는 해당 사용법을 사전에 변경하거나 프로덕션에서 모델을 제거하도록 결정하는 기능에 중요합니다.
일반적으로 메트릭 및 해당 값은 watsonx.governance에서 가져옵니다. 그러나 Governance console에서 메트릭을 작성하고 관리할 수도 있습니다. 이 경우, MRG 관리자는 메트릭 및 메트릭 값 오브젝트를 작성하고, Metric Capturer는 메트릭에 대한 최신 데이터를 제공하며, Metric Owner는 이를 검토하고 승인합니다. 워크플로우는 지표에 대한 위반 상태를 계산하고 가장 최근의 지표 값 정보를 지표에 복사합니다.
메트릭 값 작성 워크플로우: 다음 콜렉션 날짜가 활성 메트릭에 대해 만료되면 이 워크플로우는 자동으로 새 메트릭 값을 작성하고 상위 메트릭의 소유자, 캡처자 및 임계값 정보로 채웁니다. 그런 다음 콜렉터는 메트릭 값 정보를 채우고 검토를 위해 제출할 수 있습니다.
주: 이 워크플로우는 Governance console 메트릭에 적용할 수 없습니다.

질문지에 대한 워크플로우

AI 평가 워크플로우: 이 워크플로는 기본적으로 비활성화되어 있습니다. 설문지 평가 워크플로가 이를 대체합니다.
질문지 평가 워크플로우: 질문지 평가 워크플로우는 정보 수집, 검토 및 승인 단계를 통해 질문지 평가를 이동합니다.

기타 워크플로우

인증 확인 워크플로우: 이 워크플로우는 모델, 해당 모델 배치 중 하나 또는 검토에 대해 시작됩니다. 결과는 모델 또는 모델 배치에 대한 조치 또는 변경사항이 없을 수 있습니다.
모델 위험 평가 워크플로우: 이 워크플로우는 위험성 오브젝트 유형을 사용하여 유스 케이스에 대한 위험성 평가를 관리합니다.
위험성의 소유자는 고유 위험성, 위험성의 고유 가능성 및 완화 전략을 포함하여 유스 케이스를 평가하도록 요청됩니다. 위험 평가가 완료되면 워크플로우가 위험의 상태를 승인됨으로 설정합니다.