阿里云对象存储OSS(Object Storage Service)是阿里云提供的海量、安全、低成本、高持久的云存储服务。本文介绍在数据管理DMS中录入对象存储OSS的操作步骤。

前提条件

操作步骤

  1. 登录数据管理DMS 5.0
  2. 在控制台首页,单击页面左上方的新增实例add图标。
    说明 您还可以通过顶部菜单栏选择数据资产 > 实例管理,单击+新增,进入新增实例页面。
  3. 选择文件及日志页签,单击OSS
  4. 录入对象存储OSS的信息。
    类别 配置项 说明
    基本信息 数据来源 选择数据来源。此处默认选中文件及日志
    文件类型 选择文件类型,此处默认选择OSS
    实例地区 选择OSS所在的地域,在目标Bucket详情页查看。
    录入方式 目前仅支持连接串地址录入方式,即外网访问的方式。
    连接串地址 输入OSS的外网Endpoint,选择实例地区后自动输入。
    说明 查看OSS的外网Endpoint,请参见访问域名和数据中心
    Bucket 输入OSS的Bucket名称。
    说明 您在创建Bucket时输入的Bucket名称。
    AccessKey ID 输入云账号AccessKey中用于标识用户的AccessKey ID。
    说明 获取AccessKey的方法,请参见获取AccessKey
    AccessKey Secret 输入云账号AccessKey中用于验证用户的密钥AccessKey Secret。
    说明 获取AccessKey的方法,请参见获取AccessKey
    管控模式 OSS当前仅支持自由操作模式。
    高级信息 环境类型 选择OSS的环境类型。
    说明 详细信息,请参见实例环境类型说明
    实例名称 自定义实例的名称。
    实例DBA 实例DBA下拉列表中,选择一个DBA角色,用于后期权限申请等流程。
    查询超时时间(s) 保持默认。
    导出超时时间(s) 保持默认。
    说明 基本信息配置完成后,单击页面下方的测试连接,等待测试通过。若未通过,请根据提示的错误信息重新配置。
  5. 单击提交
    对象存储OSS已经成功录入到DMS中。OSS支持的功能如下:
    • 管理实例:在DMS首页的左侧实例列表或数据资产 > 实例管理中,查看并管理您的实例。
    • 查看数据:在DMS首页的左侧实例列表中,双击OSS的Bucket名称,查看OSS中的文件夹和文件。
    • 离线集成:离线集成中的数据输出任务节点已支持OSS,详情请参见创建数据流
    • 任务编排:任务编排中的跨库Spark SQL任务节点已支持OSS,详情请参见配置跨库Spark SQL节点