La mesure de la précision moyenne évalue si tous les contextes pertinents sont mieux classés ou non en calculant la moyenne des scores de précision des contextes pertinents.
Détails de l'indicateur
La précision moyenne est une mesure de la qualité de la recherche pour les évaluations de la qualité de l'IA générative qui mesure la qualité de la façon dont un système de recherche classe les contextes pertinents. Les mesures de la qualité de la recherche sont calculées avec des modèles LLM en tant que juge.
Portée
La mesure de la précision moyenne évalue uniquement les actifs d'IA générative.
- Types d'actifs IA : Modèles d'invites
- Tâches d'IA générative : Génération augmentée par récupération (RAG)
- Langues prises en charge : Anglais
Scores et valeurs
Le score moyen de la métrique de précision indique la qualité du classement des contextes pertinents. Des scores plus élevés indiquent que les contextes pertinents sont mieux classés. Les scores les plus bas indiquent que les contextes pertinents ne sont pas moins bien classés.
- Plage de valeurs : 0.0-1.0
- Meilleure note possible : 1.0
- Ratios :
- 0 : aucun des contextes retrouvés n'est pertinent.
- Supérieur à 0 : tous les contextes pertinents sont mieux classés.
Paramètres
- Seuils :
- Limite inférieure : 0
- Limite supérieure : 1
Sujet parent : Mesures d'évaluation