0 / 0
Volver a la versión inglesa de la documentación
Inicio rápido: Evaluar y realizar el seguimiento de una plantilla de solicitud

Inicio rápido: Evaluar y realizar el seguimiento de una plantilla de solicitud

Realice esta guía de aprendizaje para aprender a evaluar y realizar el seguimiento de una plantilla de solicitud. Puede evaluar plantillas de solicitud en proyectos o espacios de despliegue para medir el rendimiento de las tareas de modelo de base y comprender cómo genera respuestas el modelo. A continuación, puede realizar un seguimiento de la plantilla de solicitud en un caso de uso de IA para capturar y compartir hechos sobre el activo para ayudarle a cumplir los objetivos de gobierno y conformidad.

Servicios necesarios
watsonx.governance

El flujo de trabajo básico incluye estas tareas:

  1. Abra un proyecto que contenga la plantilla de solicitud a evaluar. Los proyectos son donde puede colaborar con otros para trabajar con activos.
  2. Evaluar una plantilla de solicitud utilizando datos de prueba.
  3. Revise los resultados en la hoja de datos de IA.
  4. Realice un seguimiento de la plantilla de solicitud evaluada en un caso de uso de IA.
  5. Despliegue y pruebe la plantilla de solicitud evaluada.

Leer acerca de las plantillas de solicitud

Con watsonx.governance, puede evaluar plantillas de solicitud en proyectos para medir la eficacia con la que los modelos de base generan respuestas para los siguientes tipos de tarea:

  • Clasificación
  • Resumen
  • Generación
  • Respuesta a preguntas
  • Extracción de entidades

Más información sobre la evaluación de plantillas de solicitud en proyectos

Más información sobre la evaluación de plantillas de solicitud en espacios de despliegue

Ver un vídeo sobre la evaluación y el seguimiento de una plantilla de solicitud

Ver vídeo Vea este vídeo para obtener una vista preliminar de los pasos de esta guía de aprendizaje. Puede haber pequeñas diferencias en la interfaz de usuario que se muestra en el vídeo. El vídeo está pensado para ser un compañero del tutorial escrito.

Este vídeo proporciona un método visual para aprender los conceptos y tareas de esta documentación.


Pruebe una guía de aprendizaje sobre la evaluación y el seguimiento de una plantilla de solicitud

En esta guía de aprendizaje, realizará estas tareas:





Sugerencias para completar esta guía de aprendizaje

Estas son algunas sugerencias para completar correctamente esta guía de aprendizaje.

Utilizar la imagen en imagen de vídeo

Sugerencia: Inicie el vídeo y, a continuación, a medida que se desplaza por el tutorial, el vídeo se desplaza al modo de imagen en imagen. Cierre la tabla de contenido de vídeo para obtener la mejor experiencia con la imagen en imagen. Puede utilizar el modo de imagen en imagen para poder seguir el vídeo mientras completa las tareas de este tutorial. Pulse las indicaciones de fecha y hora para cada tarea a seguir.

La siguiente imagen animada muestra cómo utilizar las características de imagen en imagen y tabla de contenido de vídeo:

Cómo utilizar la imagen en la imagen y los capítulos

Obtener ayuda en la comunidad

Si necesita ayuda con esta guía de aprendizaje, puede formular una pregunta o encontrar una respuesta en el foro de discusión de la comunidad dewatsonx.

Configurar las ventanas del navegador

Para obtener la experiencia óptima al completar esta guía de aprendizaje, abra Cloud Pak for Data en una ventana de navegador y mantenga abierta esta página de la guía de aprendizaje en otra ventana de navegador para conmutar fácilmente entre las dos aplicaciones. Considere la posibilidad de organizar las dos ventanas del navegador una al lado de la otra para que sea más fácil de seguir.

Guía de aprendizaje en paralelo e interfaz de usuario

Sugerencia: Si encuentra una visita guiada al completar esta guía de aprendizaje en la interfaz de usuario, pulse Quizás más tarde.



Tarea 1: Crear un inventario de modelo y un caso de uso de IA

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 00:09.

Un inventario de modelo es para almacenar y revisar casos de uso de IA. Los casos de uso de IA recopilan hechos de gobierno para activos de IA que su organización rastrea. Puede ver todos los casos de uso de IA en un inventario.

Tarea 1a: Crear un inventario de modelo

Siga estos pasos para crear un inventario de modelo:

  1. En el menú de navegación Menú de navegación, elija Gobierno de IA > Casos de uso de IA.

  2. Gestione sus inventarios:

    • Si tiene un inventario existente, puede saltar a Crear un nuevo caso de uso de IA para utilizar dicho inventario.
    • Si no tiene ningún inventario, pulse Gestionar inventarios.
    1. Pulse Nuevo inventario.

    2. Para el nombre, copie y pegue el texto siguiente:

      Golden Bank Insurance Inventory
      
    3. Para la descripción, copie y pegue el texto siguiente:

      Model inventory for insurance related processing
      
    4. Deseleccione la opción Añadir colaboradores después de la creación . Puede restringir el acceso a nivel de caso de uso de inventario e IA.

    5. Seleccione la instancia de Cloud Object Storage en la lista.

    6. Pulse Crear.

  3. Cierre la página Gestionar inventarios .

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra el inventario de modelos. Ahora está preparado para crear un caso de uso de IA.

Inventario de modelos

Tarea 1b: Crear un caso de uso de IA

Un caso de uso de IA es un problema de negocio definido que puede resolver con la ayuda de IA. Normalmente se definen antes de que se desarrolle cualquier activo de IA. Siga estos pasos para crear un caso de uso de IA:

  1. Pulse Nuevo caso de uso de IA.

  2. Para el Nombre, copie y pegue el texto siguiente:

    Insurance claims processing AI use case
    
  3. Seleccione un inventario de modelo existente.

  4. Pulse Crear para aceptar los valores predeterminados para el resto de los campos.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra el caso de uso de IA. Ahora está preparado para realizar un seguimiento de la plantilla de solicitud.

Caso de uso de IA




Tarea 2: Crear un proyecto

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 00:51.

Necesita un proyecto para almacenar la plantilla de solicitud y la evaluación. Siga estos pasos para crear un proyecto basado en un ejemplo:

  1. Acceda al proyecto Iniciación al gobierno de watsonx en el concentrador de recursos.

    1. Pulse Crear proyecto.

    2. Acepte los valores predeterminados para el nombre de proyecto y pulse Crear.

    3. Pulse Ver proyecto nuevo cuando el proyecto se haya creado correctamente.

  2. Asocie un servicio de Watson Machine Learning con el proyecto. Para obtener más información, consulte Watson Machine Learning.

    1. Cuando se abra el proyecto, pulse el separador Gestionar y seleccione la página Servicios e integraciones .

    2. En la pestaña Servicios deIBM , pulse Asociar servicio.

    3. Seleccione la instancia de Watson Machine Learning . Si todavía no ha suministrado una instancia de servicio de Watson Machine Learning , siga estos pasos:

      1. Pulse Nuevo servicio.

      2. Seleccione Watson Machine Learning.

      3. Pulse Crear.

      4. Seleccione la nueva instancia de servicio en la lista.

    4. Pulse Asociar servicio.

    5. Si es necesario, pulse Cancelar para volver a la página Servicios e integraciones .

  3. Pulse la pestaña Activos en el proyecto para ver los activos de ejemplo.

Para obtener más información o ver un vídeo, consulte Creación de un proyecto.

Para obtener más información sobre los servicios asociados, consulte Adición de servicios asociados.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra el separador Activos del proyecto. Ahora está preparado para evaluar la plantilla de solicitud de ejemplo en el proyecto.

Activos de proyecto de ejemplo




Tarea 3: Evaluar la plantilla de solicitud de ejemplo

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 01:28.

El proyecto de ejemplo contiene algunas plantillas de solicitud y archivos CSV utilizados como datos de prueba. Siga estos pasos para descargar los datos de prueba y evaluar una de las plantillas de solicitud de ejemplo:

  1. Descargue los datos de prueba del proyecto de ejemplo. Debe proporcionar un archivo local para los datos de prueba durante la evaluación.

    1. Pulse la pestaña Activos.
    2. Para el archivo Prueba de resumen de reclamaciones de seguros data.csv , pulse el menú Desbordamiento Menú de desbordamientoy elija Descargar.
    3. Guarde el archivo CSV localmente.
  2. Pulse Resumen de reclamación de seguros para abrir la plantilla de solicitud en Prompt Lab y, a continuación, pulse Editar.

  3. Pulse el icono Solicitar variables Variables de solicitud.

    Nota: Para ejecutar evaluaciones, debe crear al menos una variable de solicitud.
  4. Desplácese a la sección Intentar . Observe la variable {input} en el campo Entrada . Debe incluir la variable de solicitud como entrada para probar la solicitud. Una variable de solicitud es una palabra clave de marcador que se incluye en el texto estático de la solicitud en el momento de la creación y se sustituye por texto dinámicamente en el tiempo de ejecución.

  5. Pulse el icono Evaluar Evaluar.

  6. Expanda la sección Calidad de IA generativa para ver una lista de dimensiones. Las métricas disponibles dependen del tipo de tarea de la solicitud. Por ejemplo, el resumen tiene distintas métricas que la clasificación.

  7. Pulse Siguiente.

  8. Seleccione los datos de prueba:

    1. Pulse Examinar.
    2. Seleccione el archivo Prueba de resumen de reclamaciones de seguros data.csv que ha descargado anteriormente.
    3. Pulse Abrir.
    4. En Columna de entrada, seleccione Insurance_Claim.
    5. Para la Columna de salida de referencia, seleccione Resumen.
    6. Pulse Siguiente.
  9. Pulse Evaluar. Las evaluaciones pueden tardar unos minutos en completarse. Cuando finalice la evaluación, verá los resultados de la prueba en la pestaña Evaluar . Esta página muestra información detallada sobre esta ejecución de evaluación para que pueda obtener información sobre el rendimiento del modelo. El resumen proporciona una visión general de las puntuaciones de métrica y las infracciones de los umbrales de puntuación predeterminados para las evaluaciones de plantilla de solicitud.

  10. Pulse la pestaña Hoja de datos de IA .

    1. Ver la información de cada una de las secciones de la pestaña.
    2. Pulse Evaluación > Desarrollar > Probar para ver de nuevo los resultados de la prueba.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra los resultados de la evaluación. Ahora puede iniciar el seguimiento de la plantilla de solicitud en un caso de uso de IA.

Solicitar resultados de prueba de evaluación de plantilla




Tarea 4: Iniciar el seguimiento de la plantilla de solicitud

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 02:37.

Puede realizar un seguimiento de la plantilla de solicitud en un caso de uso de IA para notificar el proceso de desarrollo y prueba a sus iguales. Siga estos pasos para iniciar el seguimiento de la plantilla de solicitud:

  1. En el menú de navegación Menú de navegación, seleccione Proyectos > Ver todos los proyectos.
  2. Seleccione el proyecto Iniciación al gobierno de watsonx .
  3. Pulse la pestaña Activos.
  4. En el menú Desbordamiento menú de desbordamiento de la plantilla de solicitud Resumen de reclamación de seguros , seleccione Ver hoja de datos de IA. Cada activo de IA tiene una hoja de datos de IA; que incluye información detallada sobre cómo se ha creado el activo, sus resultados de evaluación en todo el ciclo de vida de IA y adjuntos adicionales.
  5. En la pestaña Hoja de datos de IA , pulse la página Gobierno .
  6. Pulse Seguimiento de un caso de uso de IA.
  7. Seleccione el Caso de uso de AI de procesamiento de reclamaciones de seguros.
  8. Pulse Siguiente.
  9. Seleccione un enfoque. Un enfoque es una faceta de la solución al problema de negocio representado por el caso de uso de IA. Por ejemplo, puede crear enfoques para realizar un seguimiento de varias plantillas de solicitud en un caso de uso.
  10. Pulse Siguiente.
  11. Para la versión del modelo, seleccione Experimental.
  12. Acepte el valor predeterminado para el número de versión.
  13. Pulse Siguiente.
  14. Revise la información y, a continuación, pulse Realizar seguimiento de activo.
  15. Cuando el seguimiento del modelo empiece correctamente, pulse el icono Ver detalles Ver detalles para abrir el caso de uso de IA.
  16. Pulse la pestaña Ciclo de vida para ver que la plantilla de solicitud está en la fase Desarrollar . A medida que la plantilla de solicitud se mueve a través del ciclo de vida de IA, se moverá a través de estas fases:
    • Fase Desarrollar : activos de IA que se han desarrollado en un entorno de proyecto.
    • Fase de prueba : modelos ML que se han desplegado en un espacio para pruebas.
    • Fase Validar : activos de IA que se han desplegado en un espacio o proyecto para su validación.
    • Fase Operar : activos de IA desplegados en un espacio para la operación.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra la pestaña Ciclo de vida en el caso de uso de IA con la plantilla de solicitud en la fase de desarrollo. Ahora está preparado para continuar con la fase de validación.

La pestaña Ciclo de vida en el caso de uso de IA




Tarea 5: Crear un proyecto nuevo para la validación

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 03:27.

Normalmente, el ingeniero de solicitud evalúa la solicitud con datos de prueba y el ingeniero de validación valida la solicitud. El ingeniero de validación tiene acceso a los datos de validación que pueden no tener los ingenieros de solicitud. En este caso, los datos de validación se producen en un proyecto diferente. Siga estos pasos para exportar el proyecto de desarrollo e importarlo como un nuevo proyecto de validación para mover el activo a la fase de validación del ciclo de vida de IA:

  1. En el menú de navegación Menú de navegación, seleccione Proyectos > Ver todos los proyectos.

  2. Seleccione el proyecto Iniciación al gobierno de watsonx .

  3. Pulse el icono Importar/Exportar Importar/exportar > Exportar proyecto.

  4. Marque el recuadro para seleccionar todos los activos.

  5. Pulse Exportar.

  6. Para el nombre del proyecto, copie y pegue el texto siguiente y, a continuación, pulse Guardar.

    validation project.zip
    
  7. Cuando finalice la exportación del proyecto, pulse Volver al proyecto.

  8. En el menú de navegación Menú de navegación, seleccione Proyectos > Ver todos los proyectos.

  9. Pulse Nuevo proyecto.

    1. Seleccione Crear un proyecto a partir de un archivo de ejemplo.

    2. Pulse Examinar.

    3. Seleccione el validation project.zipy pulse Abrir.

    4. Para el nombre del proyecto, copie y pegue el texto siguiente:

      Validation project
      
    5. Pulse Crear.

  10. Cuando se cree el proyecto, pulse Ver proyecto nuevo.1. Siga los mismos pasos que en el Paso 1 para asociar el servicio Watson Machine Learning con este proyecto.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra la pestaña Activos del proyecto de validación. Ahora está preparado para evaluar la plantilla de solicitud de ejemplo en el proyecto de validación.

Activos de proyecto de validación




Tarea 6: Validar la plantilla de solicitud

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 04:22.

Ahora está preparado para evaluar la plantilla de solicitud en este proyecto de validación utilizando el mismo proceso de evaluación que antes. Utilice el mismo conjunto de datos de prueba para la evaluación. Y seleccione las mismas columnas de entrada y salida que antes. Siga estos pasos para validar la plantilla de solicitud:

  1. Pulse el separador Activos en el Proyecto de validación.
  2. Repita los pasos de la Tarea 2 para evaluar la plantilla de solicitud Resumen de proceso de reclamaciones .
  3. Pulse la pestaña Hoja de datos de IA cuando se haya completado la evaluación.
  4. Ver ambos conjuntos de resultados de prueba:
    1. Pulse Evaluación > Desarrollar > Probar.
    2. Pulse Evaluación > Validar > Probar.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra los resultados de la prueba de validación. Ahora está preparado para promocionar la plantilla de solicitud a un espacio de despliegue y, a continuación, desplegar la plantilla de solicitud.

Solicitar resultados de prueba de evaluación de plantilla




Tarea 7: Desplegar la plantilla de solicitud

vídeo tutorial de vista previa Para obtener una vista previa de esta tarea, vea el vídeo que empieza en 05:04.

Tarea 7a: Promocionar la plantilla de solicitud a un espacio de despliegue

La plantilla de solicitud se promociona a un espacio de despliegue en preparación para desplegarla. Siga estos pasos para solicitar la plantilla de solicitud:

  1. Pulse Proyecto de validación en la pista de navegación de proyectos.
  2. En el menú Desbordamiento menú de desbordamiento de la plantilla de solicitud Resumen de reclamación de seguros , seleccione Promocionar al espacio.
  3. Para Espacio de destino, seleccione Crear un nuevo espacio de despliegue.
    1. Para el Nombre de espacio, copie y pegue el texto siguiente:

      Insurance claims deployment space
      
    2. En Etapa de despliegue, seleccione Producción.

      Importante: Debe seleccionar Producción para la etapa Despliegue si desea mover el despliegue de la etapa Evaluar a la etapa Operar.
    3. Seleccione el servicio de aprendizaje automático en la lista.

    4. Pulse Crear.

    5. Pulse Cerrar.

  4. Seleccione el espacio de despliegue Espacio de despliegue de reclamaciones de seguros en la lista.
  5. Seleccione la opción Ir al espacio después de promocionar la plantilla de solicitud.
  6. Haga clic en Promover.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra la plantilla de solicitud en el espacio de despliegue. Ahora está preparado para crear un despliegue.

Plantilla de solicitud en el espacio de despliegue

Tarea 7b: Desplegar la plantilla de solicitud

Ahora puede crear un despliegue en línea de la plantilla de solicitud desde dentro del espacio de despliegue. Siga estos pasos para crear un despliegue:

  1. En la página de activos Resumen de reclamaciones de seguros del espacio de despliegue, seleccione Nuevo despliegue.

  2. Para el nombre de despliegue, copie y pegue el texto siguiente:

    Insurance claims summarization deployment
    
  3. Pulse Crear.

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra la plantilla de solicitud desplegada.

Plantilla de solicitud desplegada

Tarea 7c: Ver la plantilla de solicitud desplegada

Siga estos pasos para ver la plantilla de solicitud desplegada en su fase actual del ciclo de vida:

  1. Ver el despliegue cuando esté listo. La pestaña Referencia de API proporciona información para utilizar el despliegue de plantilla de solicitud en la aplicación.
  2. Pulse el separador Probar. La pestaña Probar le permite enviar una instrucción y una entrada para probar el despliegue.
  3. Pulse Generar. Cierre la ventana de resultados.
  4. Pulse la pestaña Hoja de datos de IA . La Hoja de datos de AI muestra que la plantilla de solicitud está ahora en la fase operativa.
  5. Desplácese hacia abajo hasta la parte inferior de la página Hoja de datos de IA y pulse la flecha para obtener más detalles.
  6. Seleccione la página Evaluación > Operar > Despliegue 1.
  7. Pulse el icono Ver detalles Ver detalles en la parte superior de la hoja de datos para abrir el caso de uso de IA.
  8. Pulse la pestaña Ciclo de vida .
  9. Pulse la plantilla de solicitud Resumen de reclamación de seguros en la fase Operar . Cuando haya terminado, pulse Cancelar.
  10. Pulse el despliegue de plantilla de solicitud Despliegue de resumen de reclamaciones de seguros en la fase Operar .

Icono de punto de comprobación Compruebe el progreso

La imagen siguiente muestra la plantilla de solicitud de plantilla de solicitud en la fase Operar del ciclo de vida.

Plantilla de solicitud en la fase Operar




Próximos pasos

Pruebe una de las otras guías de aprendizaje:

Recursos adicionales

  • Ver más vídeos.

  • Busque conjuntos de datos de ejemplo, proyectos, modelos, solicitudes y cuadernos en el concentrador de recursos para obtener experiencia práctica:

    Cuaderno Cuadernos que puede añadir al proyecto para empezar a analizar datos y crear modelos.

    Proyecto Proyectos que puede importar que contienen cuadernos, conjuntos de datos, solicitudes y otros activos.

    Conjunto de datos Conjuntos de datos que puede añadir al proyecto para refinar, analizar y crear modelos.

    Solicitud Solicita que puede utilizar en Prompt Lab para solicitar un modelo de base.

    Modelo Modelos de base que puede utilizar en Prompt Lab.

Tema principal: Guías de aprendizaje de inicio rápido

Búsqueda y respuesta de IA generativa
Estas respuestas las genera un modelo de lenguaje grande en watsonx.ai que se basa en el contenido de la documentación del producto. Más información