IBM ofrece una solución de gestión de riesgos de modelo con IBM Watson OpenScale. IBM Watson OpenScale supervisa y mide los resultados de los modelos de IA en todo su ciclo de vida y realiza validaciones de modelos.

Realizar el análisis en Watson OpenScale

Después de configurar y activar las características de gestión de riesgos del modelo, puede ver y comparar las evaluaciones de ejemplo en Watson OpenScale. Hay un informe descargable, el informe Resumen de modelo, que incluye todas las medidas de calidad, medidas de equidad y magnitud de la desviación.

1. En el panel de control Detalles, pulse el icono de despliegue de modelo

2. En el recuadro desplegable Acciones, pulse una de las opciones de análisis siguientes:

   1. Evaluaciones pasadas: lista todas las versiones anteriores de la evaluación.
   2. Comparar: Compare cualquiera de los modelos, pero especialmente versiones del mismo modelo, para obtener el mejor rendimiento.
   3. Descargar PDF de informe: genera el informe Resumen de modelo, que le proporciona todas las métricas y la explicación de por qué se marcaron como se hizo.

Desplegar un nuevo modelo en producción en Watson OpenScale

Envíe el mejor modelo a producción. Cree un registro de producción importando desde un modelo de preproducción. Una vez aprobado el modelo para el despliegue en IBM OpenPages, puede enviar el modelo a producción en Watson OpenScale.

1. Revise el estado del despliegue del modelo:
2. Vuelva al cuaderno de ejemplo y ejecute las celdas para enviar el modelo a producción.
3. Ahora puede ver el mosaico de despliegue del modelo de producción. En un entorno de producción habitual, este normalmente aparece vacío hasta que se recopilan datos y ha pasado un tiempo para que se desencadene el cálculo de métricas. Para la guía de aprendizaje, el cuaderno añade los datos y ejecuta los supervisores para que pueda ver los resultados de inmediato.

Comparar modelos

Watson OpenScale le permite comparar modelos examinando las métricas clave en una comparación en paralelo. Utilice esta característica para determinar qué versión de un modelo es la mejor para enviar a producción o qué modelo puede requerir algún trabajo.

En el menú Acciones, seleccione un modelo para compararlo con el que se muestra actualmente en el panel de control Resumen de MRM.

Evaluar ahora

En el entorno de preproducción, puede cargar datos de prueba con el formato de un archivo CSV, una tabla de base de datos o un archivo de almacenamiento de objetos de nube. Para utilizar la opción CSV, arrastre el archivo CSV al recuadro de colocación. Para utilizar las opciones de almacenamiento de Db2 o de nube, debe proporcionar credenciales. Después de cargar los datos, puede ver inmediatamente los resultados evaluando los nuevos datos en el modelo.

Asegúrese de que la suscripción está totalmente habilitada estableciendo los esquemas correctos antes de realizar las evaluaciones.

Las conexiones con las opciones de base de datos son transitorias. Para realizar la evaluación posteriormente, debe volver a especificar la información de conexión.

Copiar configuración de una suscripción de preproducción en una suscripción de producción

Para ahorrar tiempo, puede copiar los metadatos de modelo y la configuración de una suscripción de preproducción a una suscripción de producción. Para ello, el modelo debe ser idéntico al modelo de origen, pero desplegado en el espacio de producción.

Próximos pasos

Utilice el análisis de equidad para volver a definir el modelo, posiblemente utilizando otro algoritmo.