本文为您介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。
背景信息
传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大时,可以将数据迁移至MaxCompute。
MaxCompute为您提供了完善的数据迁移方案以及多种经典的分布式计算模型,能够快速地解决海量数据存储和计算问题,有效降低企业成本。
DataWorks为MaxCompute提供一站式的数据集成、数据开发、数据管理和数据运维等功能。其中:数据集成为您提供稳定高效和弹性伸缩的数据同步平台。
最佳实践合集
MaxCompute跨项目数据迁移:
同一地域的MaxCompute跨项目数据迁移,详情请参见使用CLONE TABLE实现同地域MaxCompute跨项目数据迁移或通过DataWorks实现MaxCompute跨项目迁移。
不同地域的MaxCompute跨项目数据迁移,详情请参见通过跨项目数据访问实现不同地域MaxCompute项目数据迁移。
迁移其它业务平台的业务数据至MaxCompute:
迁移Hadoop数据至MaxCompute,详情请参见迁移Hadoop数据至MaxCompute最佳实践(视频)。数据迁移和脚本迁移遇到的问题及解决方案请参见迁移自建Hadoop数据至MaxCompute实践。
迁移Oracle数据至MaxCompute,详情请参见迁移Oracle数据至MaxCompute。
迁移消息队列for Apache Kafka集群数据至MaxCompute,详情请参见迁移消息队列for Apache Kafka数据至MaxCompute。
迁移Kafka集群数据至MaxCompute,详情请参见迁移Kafka数据至MaxCompute。
迁移Elasticsearch集群数据至MaxCompute,详情请参见迁移Elasticsearch数据至MaxCompute。
迁移RDS数据至MaxCompute,详情请参见迁移RDS数据至MaxCompute。
迁移OSS的JSON数据至MaxCompute,详情请参见迁移OSS的JSON数据至MaxCompute。
迁移MongoDB的JSON数据至MaxCompute,详情请参见迁移MongoDB的JSON数据至MaxCompute。
迁移ECS上自建的MySQL数据库中的数据至MaxCompute,详情请参见迁移ECS自建MySQL数据库至MaxCompute。
迁移其它业务平台的日志数据至MaxCompute:
通过Tunnel迁移日志数据至MaxCompute,详情请参见通过Tunnel迁移日志数据至MaxCompute。
通过DataHub迁移日志数据至MaxCompute,详情请参见通过DataHub迁移日志数据至MaxCompute。
通过DataWorks迁移日志数据至MaxCompute,详情请参见通过DataWorks迁移日志数据至MaxCompute。
通过LogHub迁移日志数据至MaxCompute,详情请参见通过日志服务迁移日志数据至MaxCompute。
迁移MaxCompute数据至其它业务平台:
迁移MaxCompute数据至OSS,详情请参见迁移MaxCompute数据至OSS。
迁移MaxCompute数据至OTS,详情请参见迁移MaxCompute数据至OTS。
MaxCompute处理业务数据和日志数据后,可以通过Quick BI快速地以可视化方式展现数据处理结果,详情请参见基于MaxCompute的大数据BI分析。