La métrique de similarité des réponses mesure le degré de correspondance entre le texte généré et les réponses de référence ou les résultats attendus afin de déterminer la qualité des performances de votre modèle.
Détails de l'indicateur
La similarité des réponses est une mesure de la qualité des réponses pour les évaluations de la qualité de l'IA générative qui évalue la qualité des réponses des modèles d'IA générative. Les mesures de la qualité des réponses sont calculées à l'aide de modèles LLM-as-a-judge.
Portée
La mesure de la pertinence des réponses évalue uniquement les ressources génératives de l'IA.
- Types d'actifs IA : Modèles d'invites
- Tâches d'IA générative : Génération augmentée par récupération (RAG)
- Langues prises en charge : Anglais
Scores et valeurs
Le score de la métrique de similarité de la réponse indique la similarité entre la réponse générée et la réponse de référence. Les scores les plus élevés indiquent que la réponse est plus proche de la sortie de référence.
- Plage de valeurs : 0.0-1.0
- Meilleure note possible : 1.0
Paramètres
- Seuils :
- Limite inférieure : 0
- Limite supérieure : 1
Sujet parent : Mesures d'évaluation