정규식 평가 지표

마지막 업데이트 날짜: 2025년 3월 05일
정규식 평가 지표

정규식 메트릭은 예측의 행에 지정된 정규식 표현이 포함되어 있는지 여부를 측정합니다.

메트릭 세부사항

정규표현식은 문자열 기반 함수를 사용하여 생성된 LLM 출력 텍스트를 분석하고 검증하는 콘텐츠 검증 지표입니다. 이 측정 기준은 평가 측정 기준을 계산하기 위해 Python SDK를 사용할 때만 사용할 수 있습니다.

범위

정규식 메트릭은 생성적 AI 자산만을 평가합니다.

  • AI 자산의 유형 : 프롬프트 템플릿
  • 생성적 AI 작업 :
    • 텍스트 요약
    • 컨텐츠 생성
    • 질문 응답
    • 엔티티 추출
    • 검색 증강 생성(RAG)
  • 지원 언어 : 영어

점수와 가치

정규식 메트릭 스코어는 예측 행에 지정된 정규식 표현이 포함되어 있는지 여부를 나타냅니다.

  • 값의 범위 : 0.0-1.0
  • 비율:
    • 0시: 예측 행에 지정된 정규식 표현이 포함되어 있지 않습니다
    • 1: 예측 행에는 지정된 정규식 표현이 포함되어 있습니다.

설정

  • 임계치 :
    • 하한: 0
    • 상한: 1

상위 주제: 평가 지표