要访问 Amazon S3 中的数据,请为其创建连接资产。
Amazon S3 (Amazon Simple Storage Service) 是由 Amazon Web Services (AWS) 提供的服务,通过 Web Service 接口提供对象存储器。
对于其他类型的符合 S3-compliant 连接,您可以使用 通用 S3 连接。
创建与 Amazon S3 的连接
要创建连接资产,您需要以下连接详细信息:
- 存储区: 包含文件的存储区名称。 如果 AWS 凭证具有列出存储区和访问所有存储区的许可权,那么您只需要提供凭证。 如果您的凭证没有列出存储区的特权,并且只能访问特定存储区,那么需要指定存储区。
- 端点 URL: 用于 AWS GovCloud 实例。 包含区域代码。 例如,
https://s3.<region-code>.amazonaws.com
。 有关地区代码列表,请参阅AWS服务端点。 - 区域: Amazon Web Services (AWS) 区域。 如果指定的端点 URL 不适用于 AWS 缺省区域 (us-west-2) ,那么还应该为 "区域" 输入值。
选择 服务器代理 以通过代理服务器访问 Amazon S3 数据源。 根据其设置,代理服务器可以提供负载均衡,提高安全性和隐私性。 代理服务器设置独立于认证凭证以及个人或共享凭证选择。
- 代理主机: 代理 URL。 例如,
https://proxy.example.com
。 - 代理端口号: 用于连接到代理服务器的端口号。 例如,
8080
或8443
。 - 代理用户名 和 代理密码 字段是可选的。
凭证
访问密钥 和 密钥 的组合是最小凭证。
如果 Amazon S3 帐户所有者已设置临时凭证或角色 ARN (Amazon 资源名称) ,请输入 Amazon S3 帐户所有者为适用的认证组合提供的值:
- 访问密钥, 密钥和 会话令牌
- 访问密钥, 密钥, 角色 ARN, 角色会话名称和可选的 持续时间秒数
- 访问密钥, 密钥, 角色 ARN, 角色会话名称, 外部标识和可选的 持续时间秒
有关 Amazon S3 帐户所有者的设置指示信息,请参阅 设置 Amazon S3的临时凭证或角色 ARN。
根据您在平台中的位置选择创建连接的方法
- 在项目中
- 单击 资产> 新资产> 连接到数据源。 请参阅将连接添加到项目。
- 在目录中
- 单击 添加到目录> 连接。 请参阅将连接资产添加到目录中。
- 在部署空间中
- 单击 导入资产> 数据访问> 连接。 请参阅 向部署空间添加数据资产。
- 在平台资产目录中
- 单击新建连接。 请参阅添加平台连接。
下一步:从连接添加数据资产
请参阅通过项目中的连接添加数据。
请参阅从目录中的连接添加数据。
您可以在何处使用此连接
可在以下工作空间和工具中使用 Amazon S3 连接:
项目
- Data Refinerywatsonx.aiStudio 或IBM Knowledge Catalog
- DataStage (DataStage 服务)。 请参阅 连接到 DataStage中的数据源。
- Decision Optimization(watsonx.ai工作室和 "watsonx.ai运行时)
- 元数据扩充 (IBM Knowledge Catalog)
- Metadata import (IBM Knowledge Catalog)
- 笔记本watsonx.aiStudio)。 单击 " 代码片段 " 窗格上的 读取数据 以获取连接凭证并将数据装入到数据结构中。 请参阅从数据源连接加载数据。
- SPSS Modelerwatsonx.aiStudio)
目录
Platform assets catalog
其他目录 (IBM Knowledge Catalog)
- Data Virtualization服务
- 您可以从 Data Virtualization 连接到此数据源。 这种连接在Data Virtualization中需要特别考虑。 请参阅 Data Virtualization中的连接至Amazon S3。
Amazon S3 设置
有关设置步骤,请参阅 Amazon Simple Storage Service 用户指南。
限制
不能使用斜杠符号 (/
) 来命名文件夹,因为斜杠符号是文件结构的定界符。
支持的文件类型
Amazon S3 连接支持以下文件类型 :Avro , CSV ,定界文本, Excel , JSON , ORC , Parquet , SAS , SAV , SHP 和 XML。
表格式
除了平面文件外, Amazon S3 连接还支持以下数据湖表格式: Delta Lake 和 Iceberg。
了解更多信息
相关连接: 通用 S3 连接
父主题: 受支持的连接