정확 일치 평가 지표
마지막 업데이트 날짜: 2025년 2월 13일
정확 일치 평가 지표는 모델 예측 문자열과 참조 문자열을 비교하여 문자열이 일치하는 빈도를 측정합니다.
메트릭 세부사항
정확한 일치(Exact match)는 생성적 AI 자산이 작업을 얼마나 잘 수행하는지 측정하는 생성적 AI 품질 평가 지표입니다.
범위
정확 일치 지표는 생성적 AI 자산만을 평가합니다.
- AI 자산의 유형 : 프롬프트 템플릿
- 생성적 AI 작업 :
- 질문 응답
- 엔티티 추출
- 검색 증강 생성(RAG)
- 지원 언어 : 영어
점수와 가치
정확 일치 지표 점수는 모델 예측 문자열과 참조 문자열 간의 완벽한 일치 비율을 나타냅니다. 점수가 높을수록 모델 예측 문자열이 참조 문자열과 더 자주 일치한다는 것을 의미합니다.
- 값의 범위 : 0.0-1.0
- 최상의 점수 : 1.0
- 비율:
- 0시 기준: 참조와 일치하는 항목 없음
- 0 이상: 최소 1개의 정확한 일치
설정
- 임계치 :
- 하한: 0.8
- 상한: 1
- 매개변수:
- 무시할 정규식: 정확한 일치 여부를 계산할 때 무시할 문자의 정규식 표현.
- 대소문자 무시: True인 경우, 대소문자 차이를 무시하도록 모든 것을 소문자로 바꿉니다.
- 구두점 무시: True인 경우, 문자열을 비교하기 전에 구두점을 제거합니다.
- 숫자 무시: True인 경우, 문자열을 비교하기 전에 모든 숫자를 제거합니다.
상위 주제: 평가 지표
주제가 도움이 되었습니까?
0/1000