问题汇总

数据同步网络连通问题

• 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？

• 同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？

• 数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与DataWorks的网络连通？

• 数据库和DataWorks不在同一个阿里云账号下，进行数据同步时如何保障数据库与DataWorks的网络连通？

• 访问VPC环境下的数据库测试连通性失败，该如何处理？

资源组配置操作问题

• 已经购买独享资源组，但在数据源测试连通性时或任务执行时找不到该资源组怎么办？

• 如何通过日志查看任务执行在什么资源组类型上？

• 如何排查自定义调度资源组等待gateway？

实时同步任务配置须知

• 实时同步任务支持哪些数据源？

• 实时同步任务为什么不建议使用公网？

• 实时同步字段格式问题

• 实时同步数据时，如何处理TRUNCATE？

• 如何提高实时同步的速度和性能？

• 实时同步是否支持在界面运行？

实时同步Kafka数据

实时同步常见问题

实时同步MySQL数据

• 实时同步常见问题

• 实时同步常见问题

• 实时同步常见问题

• 实时同步常见问题

• 实时同步MySQL数据源的数据时，一开始读到数据，一段时间后无法读到数据，怎么处理？

实时同步Hologres数据

实时同步常见问题

离线同步任务运维常见问题

• 为什么数据源测试连通性成功，但是离线同步任务执行失败？

• 如何切换数据集成任务执行资源组？

• 脏数据如何排查和定位？

非具体插件报错原因与解决方案

• 如何处理编码格式设置/乱码问题导致的脏数据报错？

• 离线同步常见问题

• 任务存在SSRF攻击Task have SSRF attacks如何处理？

• 离线同步常见问题

• 离线同步任务执行偶尔成功偶尔失败

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

具体插件报错原因及解决方案

• 添加MongoDB数据源时，使用root用户时报错

• 离线同步常见问题

• 读取MongoDB时，如何在query参数中使用timestamp实现增量同步？

• 离线同步常见问题

• 读取OSS文件是否有文件数限制？

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

• 离线同步常见问题

• 写入DataHub时，一次性写入数据超限导致写入失败如何处理？

离线同步场景及解决方案

• 离线同步常见问题

• 离线同步任务如何自定义表名？

• 配置离线同步节点时，无法查看全部的表，该如何处理？

• 读取MaxCompute（ODPS）表数据时，添加一行注意事项

• 读取MaxCompute（ODPS）表数据时，如何同步分区字段？

• 读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？

• 如何处理表列名有关键字导致同步任务失败的情况？

• 读取Loghub同步某字段有数据但是同步过来为空

• 读取Loghub同步少数据

• 读取Loghub字段映射时读到的字段不符合预期

• 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据

• 写入OSS出现随机字符串如何去除？

• MySQL分库分表如何将分表同步到一张MaxCompute中