Go back to the English version of the documentation使用手动设置配置模型评估
使用手动设置配置模型评估
Last updated: 2024年11月22日
您可以使用手动设置来配置机器学习模型评估。 通过手动设置,您可以使用数据库和部署空间等现有资产。 您还可以为部署选择环境类型(预生产或生产)。 与自动设置不同,手动设置不会安装样本资产来演示模型评估。
运行手动设置
执行以下步骤以启动手动设置:
- 从您的帐户启动 Watson OpenScale 。
- 选择 手动设置 选项。
这样会打开 " 系统设置 " 页面。 要完成手动设置,必须完成以下部分中描述的步骤。
添加数据库连接
连接数据库以存储模型事务和模型评估结果。 您可以使用 免费轻量套餐数据库 开始使用。 另外,如果您有一个现有的EDB Postgres或Db2数据库,也可以用它来评估模型。 您也可以购买新数据库。
请按照以下步骤为模型评估添加数据库连接:
确保在 "系统设置" 页面中打开 数据库 选项卡。 单击 编辑 图标。
选择数据库类型:
要免费使用数据库,请从列表中选择 免费轻量套餐数据库 。
要使用现有数据库,请选择下列其中一个选项:
a. Databases for EDB
b. Db2
c. Db2 Warehouse要购买新数据库,请单击 购买数据库。
完成数据库连接的详细信息,然后单击 保存。
限制
- 数据库和IBM watsonx.aiRuntime 实例必须部署在同一个账户中。
- 您可以使用EDB Postgres或Db2数据库来存储模型相关数据(反馈数据、评分有效载荷)和计算指标。 目前不支持 Lite Db2 套餐。
- 免费 Lite 套餐数据库不符合 GDPR。 如果模型处理个人可识别信息 (PII),那么必须购买新数据库或使用符合 GDPR 规则的现有数据库。
设置机器学习提供程序
您可以连接到存储在机器学习环境(包括预生产和生产环境)中的已部署模型。 以下机器学习服务提供商可提供模型评估服务:
- watsonx.ai运行时
- Amazon SageMaker
- Microsoft Azure ML Studio
- Microsoft Azure ML Service
您还可以使用 定制服务环境。
请按照以下步骤连接到机器学习提供商进行模型评估:
- 在 " 机器学习提供程序 " 部分中,单击 添加机器学习提供程序。
- 可选: 要更改缺省名称,请单击 机器学习提供程序旁边的 编辑 图标。
- 可选: 要输入描述,请单击 描述旁边的 编辑 图标。
- 要输入连接信息,请单击 连接旁边的 编辑 图标。
- 选择 服务提供者 并指定连接详细信息。
- 单击保存。
管理用户和角色
您必须添加希望访问模型评估的用户,并分配角色以确定他们可以完成哪些任务。
了解更多信息
父主题: 模型评估的设置选项