La mesure de la fidélité détermine dans quelle mesure la sortie du modèle est ancrée dans le contexte du modèle et fournit des attributions à partir du contexte pour montrer les phrases les plus importantes qui contribuent à la sortie du modèle. Les attributions sont fournies lorsque la métrique est calculée uniquement avec des modèles affinés.
Détails de l'indicateur
La fidélité est une mesure de la qualité des réponses pour les évaluations de la qualité de l'IA générative qui peut aider à mesurer la qualité des réponses du modèle. Les mesures de la qualité des réponses sont calculées à l'aide de modèles de LLM en tant que juge.
Portée
L'indicateur de fidélité évalue uniquement les actifs d'IA générative.
- Types d'actifs IA : modèles de messages
- Tâches d'IA générative : Récupération Augmentation Génération (RAG)
- Langues prises en charge : anglais
Scores et valeurs
Le score de la mesure de la fidélité indique dans quelle mesure la sortie du modèle est ancrée dans le contexte du modèle. Des scores plus élevés indiquent que le résultat est plus ancré et moins halluciné.
- Plage de valeurs : 0.0-1.0
- Meilleur score possible : 1.0
Paramètres
- Seuils :
- Limite inférieure : 0
- Limite supérieure : 1
Sujet parent : Indicateurs d'évaluation