La mesure de rang réciproque mesure le rang réciproque du premier contexte pertinent.
Détails de l'indicateur
Le classement réciproque est une mesure de la qualité de la recherche pour les évaluations de la qualité de l'IA générative qui mesure la qualité de la façon dont un système de recherche classe les contextes pertinents. Les mesures de la qualité de la recherche sont calculées à l'aide de modèles de LLM en tant que juge.
Portée
La mesure de classement réciproque évalue uniquement les actifs d'IA générative.
- Types d'actifs IA : modèles de messages
- Tâches d'IA générative : Récupération Augmentation Génération (RAG)
- Langues prises en charge : anglais
Scores et valeurs
Le score métrique de classement réciproque indique si les contextes pertinents sont récupérés et où ils sont classés. Des scores plus élevés indiquent que le premier contexte pertinent est mieux classé. Les scores les plus bas indiquent que le contexte pertinent est classé plus bas.
- Plage de valeurs : 0.0-1.0
- Meilleur score possible : 1.0
- Ratios :
- À 0 : Aucun des contextes pertinents n'est récupéré
- À 1 : Le premier contexte pertinent est en première position.
Paramètres
- Seuils :
- Limite inférieure : 0
- Limite supérieure : 1
Sujet parent : Indicateurs d'évaluation