大数据计算服务MaxCompute(原名ODPS)为您提供完善的数据导入方案,能够快速解决海量数据的计算问题。

前提条件

配置MaxCompute输出节点前,您需要先配置好相应的输入或转换数据源,详情请参见实时同步支持的数据源

操作步骤

  1. 进入数据开发页面。
    1. 登录DataWorks控制台
    2. 在左侧导航栏,单击工作空间列表
    3. 选择工作空间所在地域后,单击相应工作空间后的进入数据开发
  2. 鼠标悬停至新建图标,单击数据集成 > 实时同步
    您也可以找到相应的业务流程,右键单击数据集成,选择新建 > 实时同步
  3. 新建节点对话框中,输入节点名称,并选择目标文件夹
    注意 节点名称必须是大小写字母、中文、数字、下划线(_)以及小数点(.),且不能超过128个字符。
  4. 单击提交
  5. 在实时同步节点的编辑页面,单击输出 > MaxCompute并拖拽至编辑面板,连线已配置好的输入或转换节点。
  6. 单击MaxCompute节点,在节点配置对话框中,配置各项参数。
    MaxCompute
    参数 描述
    数据源 选择已经配置好的MaxCompute数据源,此处仅支持MaxCompute数据源。

    如果您未配置数据源,请单击右侧的新建数据源,进入工作空间管理 > 数据源管理页面新建,详情请参见配置MaxCompute数据源

    选择当前数据源下需要同步的表名称。
    您可以单击右侧的一键建表创建新表,也可以单击数据预览进行确认。
    注意 新建目标数据表前,请先连线输入节点,并确认有输出字段。
    分区讯息 为您展示MaxCompute分区表的信息。
    字段映射 单击字段映射,设置源端和目标端字段的映射。同步任务会根据字段的映射关系同步数据。
    如果您需要新建表,请单击一键建表后,在新建数据表对话框中,配置各项参数。新建数据表
    参数 描述
    表名称 MaxCompute表的名称。
    生命周期 MaxCompute表的生命时间长度,详情请参见生命周期
    数据字段结构 MaxCompute表的字段结构。如果您需要新增字段,请单击添加
    分区设置 MaxCompute表的分区信息,详情请参见分区
    注意 您最少需要设置二级分区(月和年),最多支持设置五级分区(分钟、小时、天、月和年)。
  7. 单击工具栏中的保存图标。