全部产品
阿里云办公

数据同步及迁移

更新时间:2018-08-07 12:25:22

自助迁移

场景 建议迁移工具 参考资料
HBase->ApsaraDB HBase,数据量<4T CopyTable 使用CopyTable同步HBase数据
HBase->ApsaraDB HBase,数据量>=4T 或者 自助无法完成 参考人工服务 人工服务
HBase-> ApsaraDB HBase,Phoenix CopyTable及对应 使用CopyTable同步HBase数据 phoenix表与HBase表之间对应关系可参考
关系型数据库-> ApsaraDB HBase Sqoop 使用Sqoop从Mysql向ApsaraDB HBase同步数据
其他类型数据源一次性导入ApsaraDB HBase DataX DataX官方文档
其他类型数据源周期性导入HBase 数据集成 step-by-step通过数据集成同步数据到ApsaraDB HBase 数据集成概述
经典网络到VPC网络 经典网络到VPC网络 HBase经典网络集群迁移到vpc网络

人工迁移服务

请 提交工单 或者 联系 云HBase答疑 钉钉号,申请 人工迁移服务,可以满足 1T - 1P的数据迁移

迁移服务

一键式上云具体流程:

  • 购买及环境准备
    • 客户 - 购买云HBase集群
    • 客户 - 购买临时ecs资源(仅仅经典迁移VPC需要)
    • 协商 - 环境打通
  • 双写
    • 客户 - 业务双写 - 源集群及目标集群
  • 迁移
    • 客户 - Flush数据
    • 云HBase技术 - 迁移源表Schema
    • 云HBase技术 - 采用FIFO模式,并发迁移历史数据(HFile拷贝),可以每个表迁移
    • 云HBase技术 - 程序自动验证数据的正确性 - 抽样校验
  • 验证
    • 客户 - 验证
    • 客户 - 关闭源集群HBase写
    • 业务迁移完成

工具的优势:

  • 使用方便:一键式迁移数据上云、UI实时任务实时监控、兼容不同版本
  • 高性能迁移:分布式迁移架构,极大提升迁移的处理性能
  • 高容错:任务出错重试、未完成任务自动恢复、HFile拷贝过程中Region目录变化自动处理
  • 数据自动校验:迁移完成后,支持数据自动校验
  • 限流控速:在业务高峰期 可以限制迁移的速度,不影响业务