La mesure du gain cumulé actualisé normalisé mesure la qualité de classement des contextes extraits.
Détails de l'indicateur
Le gain cumulé actualisé normalisé est une mesure de la qualité de la recherche pour les évaluations de la qualité de l'IA générative qui mesure la qualité de la façon dont un système de recherche classe les contextes pertinents. Les mesures de la qualité de la recherche sont calculées à l'aide de modèles de LLM en tant que juge.
Portée
La mesure du gain cumulé actualisé normalisé évalue uniquement les actifs génératifs d'IA.
- Types d'actifs IA : modèles de messages
- Tâches d'IA générative : Récupération Augmentation Génération (RAG)
- Langues prises en charge : anglais
Scores et valeurs
Le score de la mesure du gain cumulé actualisé normalisé indique la précision du classement des contextes extraits. Des scores plus élevés indiquent que le classement des contextes extraits est correct. Les scores les plus bas indiquent que le classement des contextes extraits est incorrect.
- Plage de valeurs : 0.0-1.0
- Meilleur score possible : 1.0
- Ratios :
- À 1 : Les contextes récupérés sont classés dans le bon ordre.
Paramètres
- Seuils :
- Limite inférieure : 0
- Limite supérieure : 1
Sujet parent : Indicateurs d'évaluation