IBM offre una soluzione di gestione del rischio modello con IBM Watson OpenScale. IBM Watson OpenScale monitora e misura i risultati dei modelli di intelligenza artificiale durante il loro ciclo di vita ed esegue la convalida dei modelli.

Eseguire l'analisi in Watson OpenScale

Dopo aver impostato e attivato le funzioni di gestione del rischio del modello, è possibile vedere e confrontare le valutazioni campione in Watson OpenScale. C'è un report scaricabile, il report di riepilogo del modello, che include tutte le misure di qualità, le misure di correttezza e l'entità della della deviazione.

1. Dal dashboard Insight, fare clic sul riquadro di distribuzione del modello

2. Dalla casella a discesa Azioni, fare clic su una delle seguenti opzioni di analisi:

   1. Valutazioni passate: elenca tutte le versioni precedenti della valutazione.
   2. Confronta: confronta tutti i modelli, ma soprattutto le versioni dello stesso modello, per migliori prestazioni.
   3. Scarica il PDF del report: generare il report di riepilogo del modello, che fornisce tutte le metriche e la spiegazione del perché sono state valutate così.

Distribuire un nuovo modello in produzione in Watson OpenScale

Usa in produzione il modello migliore. Crea un record di produzione importando da un modello di pre-produzione. Dopo che il modello è stato approvato per la distribuzione in IBM OpenPages, è possibile inviare il modello in produzione in Watson OpenScale.

1. Esaminare lo stato della distribuzione del modello:
2. Tornare al notebook di esempio ed eseguire le celle per inviare il modello in produzione.
3. È ora possibile visualizzare il riquadro di distribuzione del modello di produzione. In un ambiente di produzione regolare, appare inizialmente vuoto fino a quando non vengono raccolti dati sufficienti ed è passato il tempo per l'attivazione del calcolo delle metriche. Per il supporto didattico, il notebook aggiunge i dati e esegue i monitor in modo da poter vedere subito i risultati.

Confronta i modelli

Watson OpenScale consente di confrontare i modelli osservando le metriche chiave in un confronto fianco a fianco. Utilizzate questa funzione per determinare quale versione di un modello è la migliore da inviare alla produzione o quale modello potrebbe necessitare di interventi.

Dal menu Azioni, selezionare un modello da confrontare con quello attualmente visualizzato nel cruscotto Riepilogo MRM.

Valuta ora

Nell'ambiente di pre-produzione, è possibile caricare i dati di prova sotto forma di file CSV, tabella di database o file di archiviazione di oggetti nel cloud. Per utilizzare l'opzione CSV, trascinare il file CSV nella casella di riepilogo. Per utilizzare le opzioni Db2 o cloud storage, è necessario fornire le credenziali. Dopo aver caricato i dati, è possibile vedere immediatamente i risultati valutando i nuovi dati rispetto al modello.

Assicurarsi che la sottoscrizione sia completamente abilitata impostando gli schemi giusti prima di eseguire le valutazioni.

Le connessioni alle opzioni del database sono transitorie. Per eseguire la valutazione in un secondo momento, è necessario inserire nuovamente le informazioni di connessione.

Copiare la configurazione da un abbonamento di pre-produzione a uno di produzione

Per risparmiare tempo, è possibile copiare i metadati della configurazione e del modello da una sottoscrizione di pre-produzione a una sottoscrizione di produzione. A tal fine, il modello deve essere identico al modello di origine, ma distribuito nello spazio di produzione.

Passi successivi

Utilizzare l'analisi della correttezza per ridefinire il modello, magari utilizzando un algoritmo differente.