0 / 0
Volver a la versión inglesa de la documentación
Recomendaciones sobre la caché en la Data Virtualization
Última actualización: 26 nov 2024
Recomendaciones sobre la caché en la Data Virtualization

Utilizando un conjunto de consultas de entrada, Data Virtualization recomienda una lista clasificada de cachés de datos que pueden mejorar el rendimiento de las consultas de entrada y ayudar potencialmente a futuras cargas de trabajo de consulta.

Las consultas de entrada son consultas que se han ejecutado en cualquier lugar, desde el día 1 anterior hasta los 15 días anteriores, y deben tener un tiempo de ejecución de al menos un minuto. Las recomendaciones se consideran válidas durante 1 día después del cual pueden cambiar a medida que cambia la carga de trabajo de la consulta.

  1. El motor de recomendaciones de memoria caché utiliza dos modelos para generar recomendaciones.
    • El modelo basado en reglas utiliza sofisticados heurismos para determinar qué candidatos de memoria caché ayudan con la carga de trabajo de consultas de entrada.
    • El modelo basado en aprendizaje automático utiliza un modelo de aprendizaje automático entrenado previamente que detecta patrones de consulta subyacentes y prevé las memorias caché que ayudarían con una potencial carga de trabajo de consultas futura.

    Ambos modelos generan una lista clasificada de candidatos de memoria caché que el motor consolida para generar un conjunto final de recomendaciones. Puede elegir habilitar o inhabilitar las recomendaciones de memoria caché basadas en aprendizaje automático. De forma predeterminada, las recomendaciones de memoria caché basadas en aprendizaje automático están habilitadas.

    Además de las recomendaciones de creación de memoria caché, el motor también recomienda recomendaciones de inhabilitación y supresión de memoria caché según el uso en el pasado y otras métricas. Estas recomendaciones aparecen en la pestaña de memorias caché Activas e Inactivas para las memorias caché existentes.

  2. Las recomendaciones de memoria caché basadas en aprendizaje automático consideran los patrones de consulta subyacentes y prevén memorias caché que son válidas durante 1 día.

    Data Virtualization utiliza un modelo previamente entrenado con un conjunto de datos estándar del sector.

    Puede elegir habilitar o inhabilitar las recomendaciones de memoria caché basadas en aprendizaje automático.

  3. El motor de recomendaciones consolida y clasifica el conjunto final de recomendaciones de ambos modelos. A continuación, el Gestor puede añadir memorias caché de datos de estas recomendaciones.

Data Virtualization proporciona un motor para generar una lista clasificada de recomendaciones. La clasificación de las recomendaciones de creación de memoria caché viene determinada por el tiempo de ejecución de las consultas, la frecuencia de dichas consultas en la carga de trabajo de entrada y el peso de los dos modelos. El motor tiene total constancia de ello y no recomienda la creación de memorias caché que ya existen. Además, el motorno recomienda la creación de memorias caché duplicadas.

El proceso de generar recomendaciones de memoria caché consiste en cuatro etapas, como se muestra en lasiguiente imagen:

Figura 1. Visión general del proceso de recomendaciones de memoria caché
Visión general de las etapas implicadas en el proceso de generación de recomendaciones de memoria caché

Recolectar
El motor de recomendaciones de memoria caché recopila información como, por ejemplo, el texto de la consulta, el tiempo de ejecución, la cardinalidad, la indicación de fecha y hora y la frecuencia correspondientes al periodo de tiempo proporcionado.
En la imagen siguiente se muestra cómo las consultas de la carga de trabajo históricase filtran para llegar al conjunto de consultas de entrada final para el motor de recomendación:
Figura 2. Etapa de recopilación en el proceso de recomendaciones de memoria caché.
Etapa Collect en el proceso de recomendación de memoria caché.
Los ajustes de configuración de la caché se definen mediante ' Data Virtualization ' Director, ver ' Configurar las recomendaciones de caché para más detalles.
Extraer
El motor de recomendaciones genera candidatos de memoria caché potenciales para la carga de trabajo de consultas de entrada.
Traducir
El motor de recomendaciones convierte y consolida los candidatos para asegurarse de que son sintáctica y semánticamente correctos, exclusivos y pasan todas las restricciones de Db2® .
Evaluar
El motor evalúa las definiciones convertidas comparando cada candidato de memoria caché con la carga de trabajo de consulta de entrada. Además, para puntuar el modelo de aprendizaje automático, se crea un vector de característica de alta dimensión para cada candidato.
Figura 3. Etapa de evaluación en el proceso de recomendaciones de memoria caché.
Evalúe la etapa del proceso para generar recomendaciones de memoria caché.
Como resultado de esta evaluación, el motor de recomendaciones genera una puntuaciónde coincidencia para cada candidato a memoria caché. La evaluación de cada candidato se basa en los siguientes criterios.
  • Coincidencias Número de consultas que coinciden con el candidato de memoria caché.
  • Diversidad Consultas diferentes que coinciden con el candidato de memoria caché.
  • Cardinalidad Tamaño del conjunto de resultados que el candidato de memoria caché ha captado.
  • Rendimiento Tiempo de ejecución de las consultas con las que ha coincidido el candidato de memoria caché.
Clasificar y ordenar
El motor de recomendaciones clasifica y ordena los candidatos a memoria caché para generar una lista definitiva de recomendaciones. Se crea la lista final de recomendaciones basándose en los criterios siguientes.
  • Ordenar los candidatos utilizando una métrica ponderada de tiempo de ejecución y frecuencia de las consultas coincidentes.
  • Cualquier empate entre candidatos se desempata utilizando la frecuencia y la cardinalidad de las consultas.
Figura 4. Etapa de clasificación y ordenación en el proceso de recomendaciones de memoria caché
Clasificación y ordenación de recomendaciones de memoria caché.
Búsqueda y respuesta de IA generativa
Estas respuestas las genera un modelo de lenguaje grande en watsonx.ai que se basa en el contenido de la documentación del producto. Más información