0 / 0
Retourner à la version anglaise de la documentation
Mesure d'évaluation de l'abstraction
Dernière mise à jour : 03 févr. 2025
Mesure d'évaluation de l'abstraction

La métrique d'abstraction mesure le ratio de n-grammes dans le texte généré qui n'apparaissent pas dans le contenu source des modèles de fondation afin d'identifier l'abstraction dans le texte généré.

Détails de l'indicateur

L'abstraction est une mesure d'analyse du contenu pour les évaluations de la qualité de l'IA générative qui peut aider à évaluer les résultats du modèle d'IA générative par rapport à l'entrée ou au contexte du modèle.

Portée

La mesure du degré d'abstraction évalue uniquement les actifs d'IA générative.

  • Types d'actifs IA : Modèles d'invites
  • Tâches d'IA générative :
    • Synthèse de texte
    • Génération Augmentée de Récupération (RAG)
  • Langues prises en charge : Anglais

Scores et valeurs

Le score de la métrique d'abstraction indique le niveau d'abstraction identifié dans le résultat. Des scores élevés indiquent des niveaux élevés d'abstraction dans le résultat.

  • Plage de valeurs : 0.0-1.0

Paramètres

  • Seuils :
    • Limite inférieure : 0
    • Limite supérieure : 1

Sujet parent : Mesures d'évaluation