La mesure de la qualité du texte évalue la sortie d'un modèle par rapport à des ensembles de données d' SuperGLUE, en mesurant le score d' F1, la précision et le rappel par rapport aux prédictions du modèle et à ses données de vérité terrain.
Détails de l'indicateur
La qualité du texte est une mesure d'évaluation de la qualité de l'IA générative qui permet de mesurer la qualité des tâches effectuées par les ressources de l'IA générative.
Portée
La qualité du texte évalue uniquement les ressources génératives de l'IA.
- Types d'actifs IA : modèles de messages
- Tâches d'IA générative :
- Synthèse de texte
- Génération de contenu
- Langues prises en charge : anglais
Scores et valeurs
Le score métrique de qualité du texte indique la similarité entre les prédictions et les références. Des scores plus élevés indiquent une plus grande similitude entre les prédictions et les références.
Paramètres
- Seuils :
- Limite inférieure : 0.8
- Limite supérieure : 1
Sujet parent : Indicateurs d'évaluation