0 / 0
Torna alla versione inglese della documentazione
Gestione dei dati di feedback
Ultimo aggiornamento: 25 ott 2024
Gestione dei dati di feedback

È necessario fornire i dati di feedback in watsonx.governance per poter configurare le valutazioni di qualità e determinare eventuali modifiche alle previsioni del modello.

Quando si forniscono i dati di feedback, è possibile valutare regolarmente l'accuratezza delle previsioni del modello.

Registrazione feedback

I dati di feedback forniti dall'utente vengono memorizzati come record in una tabella di registrazione dei feedback.

I dati di feedback forniti devono contenere la stessa struttura delle colonne delle caratteristiche e delle predizioni dei dati di allenamento. I dati devono includere anche il risultato del modello noto. Le colonne dei dati di feedback forniti dall'utente che non sono incluse nei dati di addestramento non vengono elaborate.

Per configurare le valutazioni della qualità e della qualità dell'intelligenza artificiale generativa, è necessario registrare i dati di feedback nella tabella di registrazione dei feedback. La tabella di registrazione del feedback contiene le seguenti colonne quando si valutano i template di prompt:

  • Colonne richieste:
    • Variabili di prompt: contiene i valori per le variabili create per i modelli di prompt
    • reference_output: contiene il valore ground truth
  • Colonne facoltative:
    • _original_prediction: contiene l'output generato dal foundation model

Le valutazioni della qualità AI generative utilizzano i dati di feedback per generare risultati per i seguenti tipi di attività quando si valutano i template di prompt:

  • Riepilogo del testo
  • Generazione di contenuto
  • Risposta alle domande
  • Estrazione di entità

Le valutazioni della qualità utilizzano i dati di feedback per generare risultati per le attività di classificazione del testo.

Caricamento dei dati di feedback

È possibile utilizzare un endpoint di registrazione feedback per caricare i dati per le valutazioni della qualità. Puoi anche caricare i dati di feedback con un file CSV. Per ulteriori informazioni, consultare Invio di transazioni modello.

Per i modelli di pre-produzione, è possibile collegarsi a un file CSV con i dati di feedback memorizzati nel Cloud Object Storage o in Db2. Per ulteriori informazioni, consultare Revisione dei risultati della valutazione.

Argomento principale: Gestione dei dati per le valutazioni del modello in Watson OpenScale

Ricerca e risposta AI generativa
Queste risposte sono generate da un modello di lingua di grandi dimensioni in watsonx.ai basato sul contenuto della documentazione del prodotto. Ulteriori informazioni