Realice un seguimiento de una plantilla de solicitud en un caso de uso de IA para capturar y compartir hechos sobre el activo para ayudarle a cumplir los objetivos de gobierno y conformidad.
Seguimiento de plantillas de solicitud
Una plantilla de aviso es la entrada de aviso guardada para un foundation model. Una plantilla de solicitud puede incluir variables para que se pueda ejecutar con distintas opciones. Por ejemplo, si tiene una solicitud que resume las notas de reunión para el proyecto-X, puede definir una variable para que la misma solicitud se pueda ejecutar para el proyecto-Y.
Puede añadir una plantilla de solicitud guardada a un caso de uso de IA para realizar un seguimiento de los detalles de la plantilla de solicitud. Además de registrar detalles sobre la información de creación de la plantilla de solicitud y los detalles del modelo de origen, la hoja de datos realiza un seguimiento de la información de las evaluaciones de la plantilla de solicitud para capturar las métricas de rendimiento. Puede evaluar las plantillas de solicitud antes o después de iniciar el seguimiento de una plantilla de solicitud.
Antes de empezar
Para poder realizar un seguimiento de una plantilla de solicitud, deben cumplirse estas condiciones.
- Sea un administrador o editor para el proyecto que contiene la plantilla de solicitud.
- La plantilla de solicitud debe incluir al menos una variable. Para obtener más información, consulte Creación de solicitudes reutilizables.
Vea este vídeo para ver cómo realizar un seguimiento de una plantilla de solicitud en un caso de uso de IA.
Este vídeo proporciona un método visual para aprender los conceptos y tareas de esta documentación.
Seguimiento de una plantilla de solicitud en un caso de uso de IA
Puede añadir una plantilla de solicitud a un caso de uso de IA desde un proyecto o espacio.
- Abra el proyecto o espacio que contiene la plantilla de solicitud que desea controlar.
- En el menú de acciones del activo, pulse Ver caso de uso de IA.
- Si esta plantilla de solicitud todavía no forma parte de un caso de uso de IA, se le solicitará que Rastrear en caso de uso de IA. Cuando inicia el seguimiento de una plantilla de solicitud, se bloquea y ya no puede editarla. Para realizar cambios, debe crear una nueva plantilla de solicitud.
- Seleccione un caso de uso de IA existente o siga las indicaciones para crear uno nuevo.
- Elija un enfoque existente o cree un nuevo enfoque. Un enfoque representa una faceta de una solución completa. Cada enfoque crea un conjunto de versiones para todos los activos en el mismo enfoque.
- Elija un esquema de numeración de versión. Todos los activos de un enfoque comparten una versión común. Seleccione entre:
- Experimental si tiene previsto actualizar con frecuencia.
- Estable si los activos no están cambiando rápidamente.
- Personalizado si desea iniciar un nuevo número de versión. La numeración de versión debe seguir un esquema de major.minor.patch.
Cuando el seguimiento está habilitado, todos los colaboradores del caso de uso pueden revisar los detalles de la plantilla de solicitud.
Se capturan los detalles de cada etapa del ciclo de vida para una plantilla de solicitud.
- Develop proporciona información sobre cómo se define el aviso, incluyendo el propio aviso, la fecha de creación, foundation model que se utiliza, los parámetros del aviso establecidos y las variables definidas.
- Evaluar muestra las métricas de dimensión de la evaluación de la plantilla de solicitud.
- Operar proporciona detalles relacionados con cómo se despliega la plantilla de solicitud para uso productivo.
Requisitos para las plantillas de avisos de seguimiento
Tenga en cuenta estos requisitos para la gestión de plantillas de avisos para la gobernanza desde la interfaz de usuario.
- Sólo puede crear despliegues de plantillas rápidas que hagan referencia a despliegues de modelos en el mismo proyecto o espacio en el que creó el despliegue de modelos. Si promociona una plantilla que hace referencia a un modelo desplegado en un espacio, se añade automáticamente una copia del activo del modelo al espacio. Debe desplegar el modelo en el espacio antes de desplegar la plantilla de avisos.
- Si exporta una plantilla de consulta que hace referencia a un modelo desplegado, el activo de modelo asociado se exporta automáticamente con la plantilla de consulta. Al importar el modelo en un nuevo contenedor, también se importa el modelo. El modelo debe desplegarse en el nuevo contenedor antes de desplegar la plantilla de solicitud.
Visualización de la hoja de datos para una plantilla de solicitud rastreada
Pulse el nombre de la plantilla de solicitud en un caso de uso de IA para ver la hoja de datos asociada.
La hoja de datos para una plantilla de solicitud recopila este tipo de datos:
- Governance recopila información básica como, por ejemplo, el nombre del caso de uso de IA, la descripción y los datos de nombre y versión del enfoque.
- 'Modelo de cimentación ' muestra el nombre del ' foundation model, el ID de licencia y el editor del modelo.
- Plantilla de solicitud muestra el nombre de solicitud, el ID, la entrada de solicitud y las variables.
- Parámetros de solicitud recopila las opciones de configuración para la plantilla de solicitud, incluyendo el método de decodificación y los criterios de detención.
- Evaluación muestra los datos de la evaluación, incluidas las alertas, y los datos de métrica de la evaluación. Por ejemplo, esta plantilla de solicitud muestra los datos de métricas para evaluaciones de calidad en la plantilla de solicitud. La evaluación ha activado una alerta de umbral: "
- Validar muestra los datos de cómo se ha evaluado la plantilla de solicitud, incluido el conjunto de datos utilizado para los datos de métrica de validación, alertas desencadenadas y evaluación.
- Archivos adjuntos muestra información sobre los archivos adjuntos que dan soporte al caso de uso.
Mover una plantilla de solicitud a través de etapas de ciclo de vida
Cuando se realiza un seguimiento de una plantilla de solicitud, puede ver los detalles de la creación de la plantilla de solicitud y de la evaluación del rendimiento con respecto a las métricas adecuadas. La siguiente etapa del ciclo de vida es _validar la plantilla de solicitud. Esto implica probar la plantilla de solicitud con datos nuevos. Si es el ingeniero de solicitud que tiene la tarea de validar el activo, siga estos pasos para validar la plantilla de solicitud y capturar los datos de validación en la hoja de datos asociada.
- Desde el proyecto que contiene la plantilla de solicitud, exporte el proyecto a un archivo ZIP comprimido.
- Cree un proyecto nuevo y rellénelo con el archivo ZIP exportado.
- Cargue los datos de validación, evalúe la plantilla de solicitud y guarde los resultados en el proyecto de validación.
- Desde el proyecto, promocione la plantilla de solicitud a un espacio de despliegue nuevo o existente que se haya designado como etapa Producción . El escenario se asigna cuando se crea el espacio y no se puede actualizar, así que cree un nuevo espacio si no tiene un espacio de producción disponible.
- Después de promocionar la plantilla de solicitud a un espacio de despliegue, puede configurar la supervisión continua.
- Los detalles de la supervisión de la plantilla de solicitud en un espacio de producción se muestran en la etapa de ciclo de vida Operar del caso de uso de IA.
Más información
- Siga la guía de aprendizaje Inicio rápido: Evaluar y realizar un seguimiento de una plantilla de solicitud para evaluar y realizar un seguimiento de una plantilla de solicitud de ejemplo.
- Consulte Despliegue de una plantilla de solicitud para obtener detalles sobre cómo preparar una plantilla de solicitud para producción.
- Consulte Evaluación de plantillas de solicitud para obtener detalles sobre la evaluación de una plantilla de solicitud para dimensiones como la precisión o para comprobar la presencia de un discurso odioso o abusivo.
Tema padre: Seguimiento de activos en un caso de uso de IA