Dataphin输出数据源为MySQL，为什么管道任务日志中写入条数远大于数据库中对表“count(1)”的数目？

概述

本文主要介绍输出数据源为MySQL，管道任务日志中写入条数远大于数据库中对表count(1)数目的原因。

详细信息

在执行管道任务时，检查运行日志发现写入条数和数据库中表的count(1)条数对不上，管道任务日志写入条数远大于数据库中表的count(1)条数是什么原因？原因如下：

• 输出数据源为MySQL，上游数据源中数据和下游存在主键一致的情况。若选择的加载策略为覆盖模式，主键冲突的数据会被删除，然后追加，显示的为总处理数据数量，所以会出现输出库中新增数量和管道日志数量不一致的情况。

适用于

• Dataphin

说明：本文适用于公共云v2.9.4-3版本数据集成模块。