任务运维管理常用操作合集-大数据开发治理平台 DataWorks-阿里云

完成任务配置后，您可以对已创建的任务进行管理，同时，您还可以查看任务运行的指标详情。本文为您介绍全增量同步任务的常见运维操作。

管理全增量同步任务

任务配置完成后，您可以在数据集成 > 同步任务页面查看已创建的同步任务列表，您可以根据不同条件筛选同步任务。并对相应的同步任务执行如下操作：

操作	说明
启动	单击对应同步任务操作列的提交执行，启动同步任务的运行。
编辑	实际生产环境业务会随着时间推移不断演进，源端的业务表可能会持续新增，全增量同步任务支持增加或删除表。您可以单击操作列更多 > 修改配置，进入任务配置界面进行增加或删除表，配置完成后，您可以单击提交执行，提交执行任务时，会和上一次运行成功的任务对应的表做对比，当发现新增表时则会执行新增表的添加流程。详情请参见：增加或删除已运行任务的同步表。如果同步方案类型为一键实时同步，将先对新增表进行全量初始化，执行完成后会将新增表加入实时同步任务并启动实时同步。说明重置实时同步任务位点并启动运行时，会存在一个新增表追加变更数据的过程，即任务位点时间重置到新增表全量数据初始化时的时间。例如，您的同步任务8点开始运行，到9点时运行未结束。9点时新增了一张表，则全量数据初始化在9点开始执行，此过程耗时1小时，即全量数据初始化在10点完成。此时，已经正在运行的实时同步任务会先停止，然后重置任务位点到9点，进行追加增量数据，9点到10点之间所有变更表的增量数据会被重新同步至Hologres目标表，一键新增表只保证数据的最终一致性。若您需要对所有表执行初始化操作，请使用重跑功能。
重跑	在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击操作列更多 > 重跑强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明仅Hologres和MaxCompute支持强制重跑同步任务。强制重跑暂不支持分库分表全增量同步任务。其中整库全增量需要重跑流程恢复数据的常见场景如下：实时任务失败太久导致Binlog被清理，无法补回增量数据。由于各种原因导致目标表缺失了新增列。由于各种原因导致目标表数据出现了缺失或者不正确的问题。重要强制重跑会同步源表的列到目标表，如果目标表缺失了源表的列则会进行加列补齐。执行重跑前，需要确认是否可能和正在运行或者即将运行的Merge任务实例产生冲突（同时运行时，如果业务日期相同，分区数据或者表数据可能会相互覆盖）。您可以在DataWorks运维中心的查看周期实例页面查看该同步任务Merge实例的执行情况，如果Merge任务和强制重跑操作产生冲突，您可以：暂停强制重跑操作，等待Merge任务执行完成后，再执行强制重跑操作。冻结即将运行的Merge实例，等待强制重跑成功后，恢复Merge实例。重跑执行完成后，如果次日数据未产出或者Merge任务没有恢复自动运行，您需要手动确认并恢复该Merge实例的运行：实时任务如果有延迟，解决延迟问题。详情请参见实时同步任务延迟解决方案。如果上一周期的实例未运行或者运行失败，您可以解除对上一周期的依赖。详情请参见查看周期实例。
全量补数据	该功能适用于MaxCompute目标表由于各种原因出现了数据缺失等正确性问题，需要重新同步全量数据补回全量数据的场景。说明仅整库全增量任务支持全量补数据。全量补数据暂不支持分库分表同步任务。单击对应同步任务操作列的全量补数据，配置全量补数据参数：选择补数据的业务日期。对于分区表，全量数据会同步到业务日期对应的日期分区中。选择补数据端表。在左侧选择框，选择要执行全量同步的表，单击图标，将其添加至右侧。单击确定按钮，开始全量补数据操作。重要当前业务日期仅支持选择单日，如果要补多日的全量数据，需要执行多次全量补数据。一键全量同步会同步源表和目标表的共同列，以及全增量同步任务中定义的附加列。执行全量补数据前，需要确认补数据的业务日期，是否可能和正在运行或者即将运行的Merge任务实例产生冲突（同时运行时，如果业务日期相同，分区数据或者表数据可能会相互覆盖）。您可以在DataWorks运维中心的查看周期实例页面查看该同步任务Merge实例的执行情况，如果Merge任务和全量补数据操作产生冲突，您可以：暂停全量补数据操作，等待Merge任务执行完成后，再执行全量补数据操作。冻结即将运行的Merge实例，等待全量补数据完成后，恢复Merge实例。
停止	运行中的任务，可以单击操作列的停止，终止同步任务的运行。

查看任务执行详情

您可以单击任务名称，进入任务运行详情页。

在任务列表页面，可以查看任务的基本信息和当前的运行状态。

其中任务的执行状态包括结构迁移、全量初始化、实时数据同步、增量Merge四个步骤，根据进度条可查看当前执行的阶段，以及每个阶段下生成的子任务的执行详情。

其中增量Merge任务为周期任务，可以点击任务名称跳转至运维中心，查看对应的周期实例。