AI 유스 케이스를 작성하여 프로덕션을 통해 요청에서 AI 자산을 추적하고 통제합니다. Factsheets는 AI 라이프사이클의 각 단계에 대한 자산의 세부사항을 캡처하여 통제 및 규제 준수 목표를 충족하는 데 도움을 줍니다.

AI 유스 케이스에 대해 학습하기 위해 watsonx.governance시작하기 샘플 프로젝트를 사용할 수 있습니다. 샘플 프롬프트의 자산에는 자동차 보험 청구 처리 유스 케이스에 대한 프롬프트 템플리트가 포함되어 있습니다. 프롬프트에서는 자동차 보험 청구를 입력으로 사용한 후 대형 언어 모델을 사용하여 보험 에이전트가 청구를 처리하는 데 도움을 줍니다. 한 프롬프트는 클레임을 요약하고, 다른 프롬프트는 작성 및 모델과 같은 주요 정보를 추출하며, 마지막 프롬프트는 보험 에이전트에 대한 제안을 생성합니다.

프로젝트를 사용할 수 있는 두 가지 방법이 있습니다.

• 프롬프트 템플리트 평가 및 추적 학습서를 사용하십시오.
• 리소스 허브에서 watsonx.governance 샘플 프로젝트 시작하기 에 액세스하십시오.

추적된 자산에 대한 통제 세부사항은 AI 유스 케이스에서 수집되고 인벤토리에 저장됩니다. 자산을 요청하고 추적하는 일반적인 플로우는 다음과 같습니다.

1. 비즈니스 사용자 (모델 소유자) 는 AI 솔루션의 필요성을 식별하고 새 모델 또는 프롬프트 템플리트를 요청하는 AI 유스 케이스를 작성합니다. 거버넌스 콘솔이 활성화되고 구성되면 거버넌스 콘솔에서 사용 사례가 생성되고 팩트는 다음과 동기화됩니다. AI Factsheets.
2. 요청이 저장되면 AI 유스 케이스가 인벤토리에 작성되고 추적이 시작됩니다. 처음에는 요청을 동반할 자산이 없으므로 유스 케이스가 초안 상태입니다. 선택적으로, 데이터 과학자 또는 프롬프트 엔지니어에게 유스 케이스를 보내기 전에 승인자에게 링크를 보내고 이메일로 사인오프를 받는 것처럼 단순한 수동 승인 프로세스를 구현할 수 있습니다. 또는 통제 계획의 일부로 정규 승인 문서를 업로드하기 위한 플레이스홀더를 추가하는 유스 케이스에 첨부 그룹을 추가하여 보다 구조화된 사인오프 프로세스를 구현할 수 있습니다.
3. AI 유스 케이스가 완전히 설정되어 승인되면 소유자는 이를 개발 대기 중 상태로 이동하고 지정된 데이터 과학자 또는 프롬프트 엔지니어에게 링크를 전송합니다.
4. 지정된 개발자가 유스 케이스에 대한 모델 또는 프롬프트 템플리트를 작성할 때 자산을 유스 케이스의 _approach 와 연관시킵니다. 접근 방식은 유스 케이스의 문제점을 해결하기 위한 하나의 경로입니다. 유스 케이스에는 여러 접근 방식이 포함될 수 있습니다.
5. 추적이 사용으로 설정되면 추적된 자산에 대한 세부사항이 팩시밀리에 캡처되고 유스 케이스에 저장됩니다. 예를 들어, 기계 학습 모델의 팩시밀리에는 훈련 데이터 및 작성 세부사항이 포함됩니다. 프롬프트 템플리트의 세부사항에는 프롬프트 매개변수 및 프롬프트 변수와 사용된 기초 모델 (예: 이름 및 공개자) 에 대한 정보가 포함되어 있습니다.
6. 라이프사이클에서 자산이 진행됨에 따라 AI 유스 케이스 및 패싯 시트는 배치 및 평가 결과를 포함한 모든 업데이트를 캡처합니다. 예를 들어, 유스 케이스에서 프롬프트 템플리트를 추적하면 모든 기본 작성 데이터가 팩시밀리에 기록됩니다. 유효성 검증기가 테스트 데이터를 사용하여 프롬프트를 평가할 때 유효성 검증의 연관된 팩트가 팩시밀리에 추가됩니다. 프롬프트 템플리트가 프로덕션으로 푸시되고 모니터링을 위해 구성되면 연관된 모든 라이프사이클 팩트가 팩트 시트에 추가되어 완전한 레코드를 작성합니다.
7. 유스 케이스 소유자는 계속해서 상태를 업데이트하여 라이프사이클의 현재 상태를 반영합니다.
8. 유효성 검증기 및 기타 이해 당사자 (stakeholder) 가 AI 유스 케이스를 검토하여 회사 프로토콜을 준수하는지 확인하고 개발에서 프로덕션까지의 모델 진행상태를 보고 인증할 수 있습니다. 사용자는 유스 케이스에서 보고서를 생성하여 세부사항을 아카이브하거나 준수 요구사항을 충족할 수 있습니다.