迁移实施

注意事项

使用在线迁移服务迁移数据时需要注意以下事项：

• 在线迁移服务使用源站存储服务提供商公开的标准接口来访问源数据，其行为依赖于源站存储服务提供商的具体实现。

• 在线迁移会占用源地址和目的地址的资源，可能会影响业务正常运行。若您的业务比较重要，请提前做好评估后对迁移任务设置限速，或在空闲时间启动迁移任务。

• 在线迁移前会检查源地址和目的地址的文件，但是若您源和目的地址有相同文件名的文件，且在迁移任务中配置了覆盖方式为覆盖，迁移时会直接覆盖目的地址的文件。若两个文件内容不同，必须更改文件名或做好备份。

• 在线迁移会保留源文件的最后修改时间属性，如果目的Bucket设置了生命周期规则，且迁移后文件处于该生命周期规则生效的时间范围内，则该文件可能会在规则生效时被删除或转为指定的归档类型。

迁移限制

• 在线迁移目前仅支持单次迁移单个FTP目录下的数据，无法将整个账号的数据一次性迁移。

• 若您源数据地址中有空目录、隐藏文件、软链接文件或目录、字符设备文件或块设备文件、Socket文件和管道文件，此类数据均不会被迁移。

• 如果迁移的源地址中有特殊字符的文件，迁移时可能会失败。

步骤一：选择地域

1. 使用创建的RAM用户登录阿里云在线迁移服务管理控制台。

2. 在顶部菜单栏左上角处的地域选择代表“迁移服务部署地域”，因此请选择数据源所在地域或距离数据源最近的地域，如下图所示。

   控制台上方所选地域（代表在线迁移服务的部署地域），中国内地地域包含北京、上海、杭州、深圳、乌兰察布，其他地域包含中国香港、新加坡、德国（法兰克福）、美国（弗吉尼亚）。

   重要

   • 不同地域内的数据地址和迁移任务不通用，请谨慎选择。

   • 优先选择源数据所在的地域，如果没有源数据所在地对应的地域，请尽可能选择接近源数据所在的地域创建迁移任务。

   • 跨境迁移时，推荐您开启传输加速，提高迁移速度。开启了传输加速的Bucket会收取传输加速费用。关于传输加速的更多信息，请参见传输加速。

步骤二：创建通道

1. 在左侧导航栏，选择在线迁移服务> 通道管理，单击新建通道。

2. 在新建通道对话框，配置如下参数，然后单击确定。

   参数	是否必填	说明
   名称	是	通道的名称。 通道名称不能为空，最大长度为100个字符。 支持英文大小写字母、数字和特殊字符短划线（-）和下划线（_）。
   带宽上限	是	通道可以使用的带宽上限。 不填写：默认值为0，表示不限制带宽。 设置该值：取值范围请参考控制台提示。 重要 可用带宽取决于网络链路的实际带宽。
   请求数/秒	是	通道每秒请求数上限。 不填写：默认值为0，表示不限制每秒请求数。 设置该值：取值范围请参考控制台提示。 警告 请根据数据源存储系统的能力认真评估，过大会影响业务正常运行，建议根据控制台提示设置。

步骤三：创建代理

1. 在左侧导航栏，选择在线迁移服务> 代理管理，单击新建代理。

2. 在新建代理对话框，配置如下参数，然后单击确定。

   参数	是否必填	说明
   名称	是	代理名称。 代理名称不能为空，长度为3~63个字符。 支持英文小写字母、数字和特殊字符短划线（-）和下划线（_），且区分大小写。 UTF-8编码并且不能以短划线（-）和下划线（_）开头。
   网络类型	是	代理的网络连接方式，包含如下两种： 公网（公网）：此代理通过公网进行数据迁移。此方式要求代理机器必须可以访问与迁移服务部署地域的在线迁移服务公网域名。例如，您当前控制台在华北2（北京）地域，则此代理机器必须可以访问在线迁移服务华北2（北京）地域的公网域名cn-beijing.mgw-tc.aliyuncs.com。 专线/VPN（VPC）：此代理通过专线进行数据迁移。此方式要求代理机器必须可以访问与迁移服务部署地域的在线迁移服务内网域名。例如，您当前控制台在华北2（北京）地域，则此代理必须可以访问在线迁移服务华北2（北京）地域的内网域名cn-beijing.mgw-tc-internal.aliyuncs.com。建议您使用与迁移服务部署地域的ECS部署代理。
   部署方式	是	代理的部署方式。目前只支持独立进程部署方式。
   通道	是	代理所属的通道，一个代理只允许关联一个通道，代理的带宽受通道总带宽影响。 例如：名称为tunnel-1的通道，设置最高带宽为10 Gbit/s，tunnel-1关联3个代理，分别为agent-1，agent-2和agent-3，则3个代理的总带宽之和最高为10 Gbit/s。如果agent-1设置3 Gbit/s的带宽，则agent-2和agent-3仅有7 Gbit/s的带宽可用，请提前规划并谨慎分配带宽。

3. 生成部署代理脚本。具体操作，请参见生成部署代理脚本。

步骤四：创建源地址

1. 在左侧导航栏，选择在线迁移服务 > 地址管理，单击新建地址。

2. 在创建数据地址面板，配置如下参数，单击确认。

   参数	是否必选	说明
   名称	是	输入源数据地址名称。名称命名规则如下： 名称不能为空，长度为3~63个字符。 支持英文小写字母、数字和特殊字符短划线（-）和下划线（_），且区分大小写。 UTF-8编码不能以短划线（-）和下划线（_）开头。
   类型	是	选择FTP。
   连接地址	是	FTP服务器的IP地址和端口号。该FTP服务器的地址是将IP地址和端口号进行拼接，即该字段的值为{主机名或IP}:{端口}，例如：192.168.16.13:21。
   待迁移目录	是	您可以指定待迁移目录的路径。请使用绝对路径，必须以正斜线（/）开头和结尾，不支持环境变量和特殊字符。 例如，设置源数据地址前缀为/example/src/，此路径下有文件example.jpg，设置目的数据地址前缀为example/dest/，则迁移后文件example.jpg的完整路径为example/dest/example.jpg。
   用户名	是	输入FTP用户名和密码。
   密码	是
   通道	是	选择需要使用的通道名称。 重要 仅通过专线或VPN迁移数据上云、FTP以及自建存储数据迁移上云需要使用该参数。 目的数据地址是LOCALFS的以及需要走专线（金融云、专有云等）的场景需要关联代理。
   代理	是	选择需要使用的代理名称。 重要 仅通过专线或VPN迁移数据上云、FTP以及自建存储数据迁移上云需要使用该参数。 指定通道下，最多可同时选择30个代理。

步骤五：创建目的地址

1. 在左侧导航栏，选择在线迁移服务 > 地址管理，单击新建地址。

2. 在新建地址面板，配置如下参数，然后单击确定。

参数	是否必选	说明
名称	是	输入目的数据地址名称。名称命名规则如下： 名称不能为空，长度为3~63个字符。 支持英文小写字母、数字和特殊字符短划线（-）和下划线（_），且区分大小写。 UTF-8编码不能以短划线（-）和下划线（_）开头。
类型	是	选择Alibaba OSS。
自定义域名	否	支持用户的自定义域名
地域	是	选择目的地址所在的地域，例如华东1（杭州）。
授权角色	是	目的Bucket归属于在线迁移控制台账号 迁移控制台授权角色（推荐）。 迁移控制台手动授权（备用）。 目的Bucket不属于在线迁移控制台账号 OSS控制台授权角色。
存储桶（Bucket）	是	输入当前控制台所在账号下迁移后数据所在的存储桶（Bucket）名称。
前缀	否	您可以指定数据路径前缀将源数据迁移至指定目录下。格式要求不能以正斜线（/）开头，必须以正斜线（/）结尾，例如data/to/oss/。 指定前缀：例如源数据地址前缀为example/src/，此路径下有文件example.jpg，设置目的数据地址前缀为example/dest/，则迁移后文件example.jpg的完整路径为example/dest/example.jpg。 不指定前缀：不设置数据路径前缀时，会将源数据迁移至目的Bucket的根目录。
通道	是	选择需要使用的通道名称。 重要 仅通过专线或VPN迁移数据上云、FTP以及自建存储数据迁移上云需要使用该参数。 目的数据地址是LOCALFS的以及需要走专线（金融云、专有云等）的场景需要关联代理。
代理	是	选择需要使用的代理名称。 重要 仅通过专线或VPN迁移数据上云、FTP以及自建存储数据迁移上云需要使用该参数。 指定通道下，最多可同时选择30个代理。

步骤六：创建迁移任务

1. 在左侧导航栏，选择在线迁移服务 > 迁移任务，单击新建任务。

2. 在选择地址页面，配置如下参数，然后单击下一步。

   参数	是否必选	说明
   名称	是	输入迁移任务名称。名称命名规则如下： 名称不能为空，长度为3~63个字符。 支持英文小写字母、数字和特殊字符短划线（-）和下划线（_），且区分大小写。 UTF-8编码不能以短划线（-）和下划线（_）开头。
   源地址	是	选择已创建的源地址。
   目的地址	是	选择已创建的目的地址。

3. 在配置任务页面，配置如下参数。

   参数	是否必选	说明
   迁移带宽	否	选择迁移带宽。 默认：默认最大带宽，实际速度取决于文件大小和文件数量。 指定上限：根据控制台提示指定具体的带宽上限。 重要 实际迁移带宽与数据源、网络、目的限流、文件大小等因素有关，不一定能达到指定上限。 请您评估数据源、迁移目的、业务情况、网络带宽等，并根据实际情况选择合理数值，限流不恰当可能会影响业务的正常运行。
   每秒迁移文件数	否	选择每秒迁移文件数。 默认：每秒迁移文件数。 指定上限：根据控制台提示指定具体的每秒迁移文件数。 重要 实际迁移带宽与数据源、网络、目的限流、文件大小等因素有关，不一定能达到指定上限。 请您评估数据源、迁移目的、业务情况、网络带宽等，并根据实际情况选择合理数值，限流不当可能会影响业务的正常运行。
   覆盖方式	是	选择同名文件的覆盖方式。 不覆盖：不迁移该文件。 全部覆盖：源地址中的文件会覆盖目的地址中的文件。 根据最后修改时间覆盖： 当源地址中的文件最后修改时间晚于目的地址中的文件最后修改时间时，目的地址中的文件会被覆盖。 当源地址中的文件最后修改时间与目的地址中的文件最后修改时间相同时，若二者的Size和Content-Type有一项不同，则目的地址中的文件会被覆盖。 警告 根据最后修改时间覆盖无法严格保证一定不会覆盖更新的文件，存在旧文件覆盖新文件的风险。 若您选择根据最后修改时间覆盖的覆盖方式，请务必确保源端文件能返回最后修改时间、Size、Content-Type等信息，否则覆盖策略可能失效，产生非预期的迁移结果。 选择不覆盖或根据最后修改时间覆盖时，为执行后续覆盖判断，会分别请求源端和目的端meta信息一次，因此会在源端和目的端产生对应的请求费用。
   迁移报告	是	迁移报告推送方式。 不推送（默认）：不推送迁移报告至目的bucket。 推送：将迁移报告推送至目的bucket，详细路径请参考后续操作。 重要 迁移报告推送会占用目的端一定的存储空间。 迁移报告的推送可能会存在一定的时间延迟，请您耐心等待迁移报告的生成。 每个任务执行记录都有一个唯一的ID，请注意，迁移报告只会推送一次，请谨慎删除！
   迁移日志	是	迁移日志推送方式。 不推送（默认）：不推送迁移日志。 推送：将迁移日志推送至日志服务SLS，可在SLS上查看迁移日志。 仅推送文件错误日志：仅将错误迁移日志推送至日志服务SLS，可在SLS上查看错误迁移日志。 当选择推送或仅推送文件错误日志时，在线迁移服务会在日志服务SLS中创建名称为aliyun-oss-import-log-阿里云账号ID-当前迁移服务部署地域的Project，例如aliyun-oss-import-log-137918634953****-cn-hangzhou。 重要 请务必完成以下操作后，再选择推送或仅推送文件错误日志，否则可能会导致迁移任务异常。 已开通SLS服务。 已在日志服务授权项授权页面中同意授权。
   日志服务授权	否	当迁移日志选择推送或仅推送文件错误日志时出现该选项。 单击授权进入云资源访问授权页面，页面会对应创建AliyunOSSImportSlsAuditRole角色，并对角色做授权，请单击同意授权完成授权。
   文件名	否	文件名过滤器。 支持包含和排除两种过滤规则，请参见RE2库的正则表达式语法（仅支持部分表达式语法）。例如： .*\.jpg$表示以.jpg结尾的所有文件。 ^file.*默认表示根目录下以file开头的所有文件。 如果源数据地址设置了前缀，例如源数据地址前缀为data/to/oss/，则需要使用^data/to/oss/file.*来匹配指定前缀下以file开头的所有文件。 .*/picture/.*表示匹配某一级为picture的子目录。 重要 当过滤规则为包含时，符合规则的文件都会被迁移，如果有多条规则，符合任意一个条件的文件都会被迁移。 例如2个文件picture.jpg和picture.png，设置一条包含规则过滤.*\.jpg$，此时只会迁移picture.jpg文件，如果同时也设置了包含规则过滤.*\.png$，则2个文件都会被迁移。 当过滤规则为排除时，符合规则的文件都不会被迁移，如果有多条规则，符合任意一个条件的文件都不会被迁移。 例如2个文件picture.jpg和picture.png，设置一条排除规则过滤.*\.jpg$，此时只会迁移picture.png，如果同时也设置了排除规则过滤.*\.png$，则2个文件都不会被迁移。 排除规则优先。当一个文件既在排除规则中又在包含规则中，则文件不会被迁移。 例如文件file.txt，设置排除规则过滤.*\.txt$文件，并同时设置包含规则过滤file.*，则此时file.txt文件不会被迁移。
   文件修改时间	否	文件最后一次修改时间过滤器。 可指定文件最后一次修改时间作为过滤规则。如果指定了时间范围，则只迁移文件最后一次修改时间在指定时间范围内的文件，具体规则如下。 当仅指定开始时间为2019年01月01日，不指定结束时间时，则只迁移文件最后一次修改时间晚于等于2019年01月01日的文件。 当仅指定结束时间为2022年01月01日，不指定开始时间时，则只迁移文件最后一次修改时间早于等于2022年01月01日的文件。 当指定开始时间为2019年01月01日，结束时间为2022年01月01日，则迁移文件最后一次修改时间范围在晚于等于2019年01月01日，且早于等于2022年01月01日的文件。
   执行时间	否	重要 正在迁移中的任务，在下一个指定时间前仍未结束本轮迁移，则会在本轮迁移结束后，自动顺延至下一个指定时间启动任务，直至完成指定次数的迁移。 迁移任务并发数量限制：迁移服务部署地域选择中国香港或中国内地时最多支持10个任务并发，选择海外地域时最多支持5个，超出限制后可能导致定时任务调度无法按预期执行。 确定迁移任务的执行时间。 立即执行：立即执行当前任务。 指定执行时间：指定任务执行期间每天的执行时间段。默认情况下，任务将在指定的起始时间启动，在指定的停止时间暂停。 周期调度：通过调整执行频率和执行次数来启动任务。 执行频率：支持以每小时、每天、每周、一周中某些天、自定义等5种频率，具体请查看执行频率参考。 执行次数：指定任务的执行次数，如不设置则默认执行一次，最大执行次数请参考控制台提示。 重要 可随时手动启动和暂停任务，不受自定义执行时间的影响。

4. 阅读在线迁移服务协议，选中我已理解并确认，合规承诺声明且当迁移任务完成时，我有确认迁移数据一致性的义务和责任，然后单击下一步。

5. 检查配置信息，确认无误后，单击确定，等待迁移任务执行。

步骤七：校验数据