背景信息
本教程讲解如何将源端数据迁移到阿里云OSS上。
概述
阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务,您可以将第三方数据、OSS-HDFS 迁移至阿里云对象存储OSS,也可以在对象存储OSS之间进行灵活的数据迁移。
使用在线迁移服务,您只需在控制台填写源数据地址和目的OSS地址信息,并创建迁移任务即可。启动迁移后,您可以通过控制台管理迁移任务,查看迁移进度、流量等信息。
如果您需要将三方源数据通过专线迁移到阿里云对象存储OSS,请参见使用代理迁移。
支持的源类型
在线迁移服务支持将第三方数据源中的数据迁移至阿里云对象存储(OSS)。支持的迁移源包括对象存储、文件系统和清单三类,具体支持范围如下。
对象存储
支持以下 13 种对象存储源类型,涵盖国内外主流云对象存储服务,以及兼容 S3 协议的第三方存储。
源名称 | 英文标识 |
阿里云对象存储 | Alibaba OSS |
亚马逊对象存储 | AWS S3 |
微软云 Blob 存储 | Azure Blob |
谷歌云对象存储 | Google Cloud Storage |
七牛云对象存储 | Qiniu Kodo |
兼容 S3 协议的第三方存储 | Compatible S3 |
腾讯云对象存储 | Tencent COS |
华为云对象存储 | OBS |
百度云对象存储 | BOS |
火山引擎对象存储 | TOS |
金山云对象存储 | Kingsoft KS3 |
又拍云对象存储 | Youpai USS |
UCloud 对象存储 | US3 |
文件系统
支持以下 5 种文件系统或文件访问方式。
类型 | 说明 |
OSS-HDFS | 基于 OSS 的 HDFS 服务,兼容 Hadoop 生态 |
LocalFS | 本地文件系统,支持访问本地磁盘及挂载到本地的 NAS、CPFS 等文件系统中的文件 |
FTP | 文件传输协议 |
OBSFS | 华为云并行文件系统 |
HDFS | Hadoop 分布式文件系统 |
清单
支持 HTTP/HTTPS 直接访问方式,以及 S3 Inventory、OSS Inventory 和通用清单(Inventory)格式。
类型 | 说明 |
HTTP/HTTPS | 通过 HTTP/HTTPS 协议直接访问数据源 |
S3 Inventory | Amazon S3 清单格式 |
OSS Inventory | 阿里云 OSS 清单格式 |
Inventory | 通用清单格式,支持自定义清单及存储厂商原生清单,适用于以下 13 种对象存储源:
|
创建迁移任务流程
创建迁移任务流程如下图所示:
请您务必在迁移任务完成后,校验目的端迁移数据。您在删除源数据前,未校验目的端迁移数据无误,导致数据丢失所引起的一切损失和后果均由您自行承担。
更多详情请参见闪电立方服务协议。