迁移时源库为Redis的注意事项及限制

类型

说明

源库限制

• 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据迁移速率。

• 源库需开启数据日志和本地AOF（Append Only File）日志。

• 源库不支持云数据库Tair（兼容Redis） 2.8版本。

• 源库的操作限制：如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择全量数据迁移和增量数据迁移。

• 源库单机版Redis迁移到目标库集群版Redis的操作限制：由于集群cluster只允许单个命令操作单个slot，若在源库执行多Key操作时，Key不在同一个slot或涉及多个slot，则会出现报错

  CROSSSLOT Keys in request don't hash to the same slot

  建议在DTS迁移过程中仅执行单Key操作，以免导致链路中断。

• 为保障迁移质量，DTS会在源库中插入一个前缀为DTS_REDIS_TIMESTAMP_HEARTBEAT的Key用于记录更新时间点，如果源库为集群架构，DTS会在各个shard上均插入该Key。迁移过程中会过滤该Key，迁移任务结束，该Key就会过期。

• 如果源库为只读实例或者DTS账号没有写（SETEX）权限，上报的延迟可能不准确。

其他限制

• 源数据库和目标数据库不支持云数据库Tair（兼容Redis）企业版实例容量存储型。

• 如果目标数据库内存不足，触发数据逐出时，由于云数据库 Tair（兼容 Redis）的默认数据逐出策略（maxmemory-policy）为volatile-lru，会导致目标库与源库数据不一致的情况，但不会影响任务的正常运行。

  为避免该情况发生，建议将目标库的数据逐出策略设置为noeviction，当目标库内存不足时，数据会写入失败，同时任务也会失败，但目标库不会因为数据逐出而丢失数据。

  说明

  关于数据逐出策略详情，请参见Redis数据逐出策略介绍。

• 对于通过EVAL或EVALSHA调用的Lua脚本，在增量数据迁移时，由于目标端在执行脚本时不会明确返回执行结果，所以DTS无法确认该类型脚本是否执行成功。

• 对于List列表，由于DTS在调用psync或sync传输数据时，不会对目标端已有的数据执行Flush操作，所以可能出现重复的数据。

• 如果源库中的某些Key使用了过期（expire）策略，由于可能存在Key已过期但未被及时删除的情况，所以在目标库中查看到的Key数量（例如通过info命令查看）会比源库的Key数量少。

  说明

  源和目标库中，未设置过期策略或未过期的Key数量是一致的。

• 建议源和目标库的Redis版本保持一致，以保障兼容性，同时支持低版本迁移至高版本。

  说明

  迁移任务如果是高版本迁移至低版本，可能会存在兼容性风险。

• 执行数据迁移前需评估源库和目标库的性能，同时建议业务低峰期执行数据迁移。否则全量数据迁移时DTS占用源和目标库一定读写资源，可能会导致数据库的负载上升。

• 由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。

• DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前，请务必结束或释放该任务，或者将DTS访问目标实例账号的写权限用revoke命令回收掉。避免该任务被自动恢复后，源端数据覆盖目标实例的数据。

• 如果源和目标库都是云数据库Tair（兼容Redis）社区版或企业版，当数据库执行变配操作（如规格升级、更改端口号等）会导致DTS无法获取连续的日志数据和正确的链接信息，从而导致迁移任务中断。如果您遇到此类情况，为了保证数据一致性，建议执行变配操作后，删除目标库的数据，重新配置DTS迁移任务进行全量和增量数据迁移。

• 若目标实例的架构类型为集群版且某一个分片达到了内存上限，或目标实例的存储空间不足时，DTS任务会因内存溢出（Out of Memory）而失败。

• 若源或目标实例已开启透明数据加密TDE功能，则暂不支持通过DTS迁移数据。

• 若在数据迁移过程中出现包括但不限于以下情况，可能会使全量数据重新迁移至目标端，从而导致数据不一致。

  • 源端或目标端Redis发生连接闪断，导致断点续传失败。

  • 源端或目标端Redis发生主备切换或故障切换。

  • 源端或目标端Redis的连接地址发生变化。

• 若云数据库Tair（兼容Redis）实例已开启TLS（Transport Layer Security）加密功能，则必须以SSL安全连接的方式接入到DTS（不支持TLSv1.3）。当前暂不支持已开启SSL的云数据库Tair（兼容Redis）实例，以云实例的方式接入DTS。

• 若实例运行失败，DTS技术支持人员将在8小时内尝试恢复该实例。在恢复失败实例的过程中，可能会对该实例进行重启、调整参数等操作。

  说明

  在调整参数时，仅会修改实例的参数，不会对数据库中的参数进行修改。可能修改的参数，包括但不限于修改实例参数中的参数。

特殊情况

当源库为自建Redis时：

• 迁移时源库进行主备切换，会导致迁移任务失败。

• 由于DTS的延迟时间是根据迁移到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作可能导致延迟信息不准确。如果任务显示的延迟时间过大，您可以在源库执行一个DML操作来更新延迟信息。

  说明

  如果迁移对象选择为整库，您还可以创建心跳表，心跳表每秒定期更新或者写入数据。