La herramienta gráfica AutoAI analiza los datos y utiliza algoritmos de datos, transformaciones y valores de parámetros para crear el mejor modelo predictivo. AutoAI muestra varios modelos potenciales como interconexiones candidatas de modelo y los clasifica en un marcador para que pueda elegir.
Los datos de entrenamiento y los datos de entrada de modelo están en un formato tabular. Los nombres de columna de la tabla deben ser exclusivos. Los nombres de columna duplicados generarán un error.
Estos límites se basan en la configuración de cálculo predeterminada de 8 CPU y 32 GB.
Experimentos de clasificación y regresión de AutoAI :
Puede cargar un archivo hasta 1 GB para experimentos de AutoAI .
Si se conecta a un origen de datos que supere 1 GB, sólo se utilizarán los primeros 1 GB de registros.
Experimentos de series temporales de AutoAI :
Si el origen de datos contiene una columna de indicación de fecha y hora, AutoAI muestrea los datos con una frecuencia uniforme. Por ejemplo, los datos pueden estar en incrementos de un minuto, una hora o un día. La indicación de fecha y hora especificada se utiliza para determinar la ventana de búsqueda para mejorar la precisión del modelo.
Nota:
Si el tamaño del archivo es mayor que 1 GB, AutoAi ordena los datos en orden descendente y sólo se utiliza el primer 1 GB para entrenar el experimento.
Si el origen de datos no contiene una columna de indicación de fecha y hora, asegúrese de que AutoAI muestrea los datos a intervalos uniformes y ordena los datos en orden ascendente . Un orden de clasificación ascendente significa que el valor de la primera fila es el más antiguo y que el valor de la última fila es el más reciente.
Nota: Si el tamaño del archivo es mayor que 1 GB, trunque el tamaño del archivo para que sea menor que 1 GB.
Para obtener más información sobre cómo elegir la herramienta adecuada para el caso de datos y uso, consulte Elección de una herramienta.
Proceso de AutoAI
Copy link to section
Con AutoAI, puede crear y desplegar un modelo de aprendizaje de máquina con sofisticadas características de formación sin tener que codificar. La herramienta hace la mayor parte del trabajo automáticamente.
Para ver el código que ha creado un experimento específico, o para interactuar con el experimento de forma programada, puede guardar un experimento como un cuaderno.
AutoAI ejecuta automáticamente las tareas siguientes para crear y evaluar interconexiones de modelos candidatas:
Para obtener más detalles sobre cada una de estas fases, incluyendo enlaces a documentos de investigación asociados y descripciones de los algoritmos aplicados para crear las interconexiones de modelo, consulte Detalles de la implementación de AutoAI.
Preproceso de datos
Copy link to section
La mayoría de los conjuntos de datos contienen distintos formatos de datos y valores perdidos, pero los algoritmos de aprendizaje automático estándar sólo funcionan con números y sin valores perdidos. Por lo tanto, AutoAI aplica varios algoritmos o estimadores para analizar, limpiar y preparar los datos en bruto para el aprendizaje automático. Esta técnica detecta y categoriza automáticamente valores basados en características, como el tipo de datos: categórico o numérico. En función de la categorización, AutoAI utiliza la optimización de hiperparámetros para determinar la mejor combinación de estrategias para la imputación de valores perdidos, la codificación de características y el escalado de características para los datos.
Selección de modelos automática
Copy link to section
AutoAI utiliza la selección de modelo automatizada para identificar el mejor modelo para los datos. Este nuevo enfoque compara los modelos potenciales con pequeños subconjuntos de datos y los clasifica en función de la precisión. A continuación, AutoAI selecciona los modelos más prometedores y aumenta el tamaño del subconjunto de datos hasta que identifica la mejor coincidencia. Este enfoque ahorra tiempo y mejora el rendimiento al reducir gradualmente los modelos potenciales en función de la precisión.
Para obtener información sobre cómo manejar interconexiones generadas automáticamente para seleccionar el mejor modelo, consulte Selección de un modelo de AutoAI.
Ingeniería de características automatizada
Copy link to section
La ingeniería de características identifica el modelo más preciso transformando los datos sin formato en una combinación de características que representan mejor el problema. Este enfoque único explora varias opciones de construcción de características de una manera estructurada y no exhaustiva, al tiempo que maximiza progresivamente la precisión del modelo utilizando el aprendizaje de refuerzo. Esta técnica da como resultado una secuencia optimizada de transformaciones para los datos que mejor coinciden con los algoritmos del paso de selección de modelo.
Optimización de hiperparámetros
Copy link to section
La optimización de hiperparámetros refina los modelos con mejor rendimiento. AutoAI utiliza un nuevo algoritmo de optimización de hiperparámetros para determinadas evaluaciones de función, como el entrenamiento y la puntuación de modelos, que son habituales en el aprendizaje automático. Este enfoque identifica rápidamente el mejor modelo a pesar de los largos tiempos de evaluación en cada iteración.
Use this interactive map to learn about the relationships between your tasks, the tools you need, the services that provide the tools, and where you use the tools.
Select any task, tool, service, or workspace
You'll learn what you need, how to get it, and where to use it.
Some tools perform the same tasks but have different features and levels of automation.
Jupyter notebook editor
Prepare data
Visualize data
Build models
Deploy assets
Create a notebook in which you run Python, R, or Scala code to prepare, visualize, and analyze data, or build a model.
AutoAI
Build models
Automatically analyze your tabular data and generate candidate model pipelines customized for your predictive modeling problem.
SPSS Modeler
Prepare data
Visualize data
Build models
Create a visual flow that uses modeling algorithms to prepare data and build and train a model, using a guided approach to machine learning that doesn’t require coding.
Decision Optimization
Build models
Visualize data
Deploy assets
Create and manage scenarios to find the best solution to your optimization problem by comparing different combinations of your model, data, and solutions.
Data Refinery
Prepare data
Visualize data
Create a flow of ordered operations to cleanse and shape data. Visualize data to identify problems and discover insights.
Orchestration Pipelines
Prepare data
Build models
Deploy assets
Automate the model lifecycle, including preparing data, training models, and creating deployments.
RStudio
Prepare data
Build models
Deploy assets
Work with R notebooks and scripts in an integrated development environment.
Federated learning
Build models
Create a federated learning experiment to train a common model on a set of remote data sources. Share training results without sharing data.
Deployments
Deploy assets
Monitor models
Deploy and run your data science and AI solutions in a test or production environment.
Catalogs
Catalog data
Governance
Find and share your data and other assets.
Metadata import
Prepare data
Catalog data
Governance
Import asset metadata from a connection into a project or a catalog.
Metadata enrichment
Prepare data
Catalog data
Governance
Enrich imported asset metadata with business context, data profiling, and quality assessment.
Data quality rules
Prepare data
Governance
Measure and monitor the quality of your data.
Masking flow
Prepare data
Create and run masking flows to prepare copies of data assets that are masked by advanced data protection rules.
Governance
Governance
Create your business vocabulary to enrich assets and rules to protect data.
Data lineage
Governance
Track data movement and usage for transparency and determining data accuracy.
AI factsheet
Governance
Monitor models
Track AI models from request to production.
DataStage flow
Prepare data
Create a flow with a set of connectors and stages to transform and integrate data. Provide enriched and tailored information for your enterprise.
Data virtualization
Prepare data
Create a virtual table to segment or combine data from one or more tables.
OpenScale
Monitor models
Measure outcomes from your AI models and help ensure the fairness, explainability, and compliance of all your models.
Data replication
Prepare data
Replicate data to target systems with low latency, transactional integrity and optimized data capture.
Master data
Prepare data
Consolidate data from the disparate sources that fuel your business and establish a single, trusted, 360-degree view of your customers.
Services you can use
Services add features and tools to the platform.
watsonx.ai Studio
Develop powerful AI solutions with an integrated collaborative studio and industry-standard APIs and SDKs. Formerly known as Watson Studio.
watsonx.ai Runtime
Quickly build, run and manage generative AI and machine learning applications with built-in performance and scalability. Formerly known as Watson Machine Learning.
IBM Knowledge Catalog
Discover, profile, catalog, and share trusted data in your organization.
DataStage
Create ETL and data pipeline services for real-time, micro-batch, and batch data orchestration.
Data Virtualization
View, access, manipulate, and analyze your data without moving it.
Watson OpenScale
Monitor your AI models for bias, fairness, and trust with added transparency on how your AI models make decisions.
Data Replication
Provide efficient change data capture and near real-time data delivery with transactional integrity.
Match360 with Watson
Improve trust in AI pipelines by identifying duplicate records and providing reliable data about your customers, suppliers, or partners.
Manta Data Lineage
Increase data pipeline transparency so you can determine data accuracy throughout your models and systems.
Where you'll work
Collaborative workspaces contain tools for specific tasks.
Project
Where you work with data.
> Projects > View all projects
Catalog
Where you find and share assets.
> Catalogs > View all catalogs
Space
Where you deploy and run assets that are ready for testing or production.
> Deployments
Categories
Where you manage governance artifacts.
> Governance > Categories
Data virtualization
Where you virtualize data.
> Data > Data virtualization
Master data
Where you consolidate data into a 360 degree view.