revisione delle transazioni del modello
È possibile analizzare le transazioni del modello per capire come il modello predice i risultati. Ad esempio, è possibile esaminare i risultati distorti previsti nelle transazioni del payload o analizzare una diminuzione dell'accuratezza, per comprendere meglio le prestazioni della propria distribuzione.
Per analizzare le transazioni del modello sono disponibili i seguenti metodi:
revisione transazioni di payload
Quando si esaminano i risultati delle valutazioni di equità, è possibile selezionare Visualizza transazioni payload per visualizzare un elenco di tutte le transazioni del modello elaborate per prevedere eventuali risultati distorti per ciascun attributo monitorato.
Revisione delle transazioni di deviazione
Quando si esaminano i risultati delle valutazioni di deviazione, è possibile fare clic sul collegamento Numero di transazioni in un riquadro di riepilogo delle transazioni per visualizzare le transazioni responsabili della deviazione. La pagina Transazioni specifica i motivi della diminuzione dell'accuratezza o della congruenza dei dati e fornisce un suggerimento per correggere la deviazione del modello.
Revisione delle operazioni di qualità dell'IA generativa
Quando si esaminano i risultati delle valutazioni generative della qualità dell'IA, è possibile selezionare un evento nelle visualizzazioni dei dati per i punteggi delle metriche per visualizzare una tabella delle transazioni. È possibile selezionare una barra del grafico di distribuzione dei punteggi per filtrare l'intervallo di transazioni visualizzate nella tabella.
Per esaminare i risultati delle attività RAG, è possibile selezionare gli eventi nelle visualizzazioni dei dati per le metriche di qualità della risposta e del recupero per visualizzare un diagramma di venn che aiuta ad analizzare le transazioni per le violazioni delle soglie. È possibile selezionare le aree del diagramma di venn per visualizzare una tabella di transazioni corrispondenti ai risultati delle metriche che si è scelto di esaminare per verificare le violazioni delle soglie. È possibile selezionare l'azione Analizza nella tabella delle transazioni per visualizzare le attribuzioni della fonte per ciascuna transazione. Per capire il motivo delle violazioni delle soglie rilevate nei risultati della valutazione, è possibile selezionare anche Vedi analisi delle cause e Vedi azioni consigliate per capire come migliorare le prestazioni del modello.
Revisione delle prestazioni
Quando si esaminano i risultati della valutazione, è possibile esaminare le prestazioni per comprendere in che modo il modello elabora le richieste di calcolo del punteggio. Le valutazioni delle prestazioni sono abilitate per impostazione predefinita quando si aggiungono le installazioni. Per valutare le prestazioni, si calcola il numero totale di record di transazione e il numero medio di record di transazione al minuto elaborati dal modello.
Analisi
Quando si revisionano i risultati della valutazione, è possibile utilizzare il grafico Previsioni per confidenza per analizzare le transazioni inviate alla propria distribuzione nell'intervallo di date selezionato esaminando le classi di previsione e la distribuzione di confidenza in ogni classe. È anche possibile utilizzare il builder Grafico per creare visualizzazioni personalizzate per comprendere meglio le previsioni e gli input del modello in fase di runtime.
Il builder di grafici visualizza l'output della previsione del modello rispetto alle funzioni o agli intervalli di dati specificati. Ad esempio, è possibile utilizzare il builder di grafici per visualizzare la suddivisione nelle classi previste o i punteggi di confidenza per diversi intervalli di un attributo. Puoi anche analizzare le transazioni inviate alla tua distribuzione durante un intervallo di dati creando un grafico personalizzato e scegliendo tra le caratteristiche, le classi di previsione e la confidenza.
Quando si esamina una transazione nella pagina Transazioni, si può scegliere di visualizzare le spiegazioni che forniscono dettagli su come sono state determinate le previsioni per ogni transazione. Per ulteriori informazioni, consultare Spiegazione delle transazioni modello.
Se i dati includono un nome funzione contenente un punto (.Failed to get data
Ulteriori informazioni
spiegazione delle transazioni del modello
Argomento per i genitori: Revisione delle intuizioni del modello