配置逻辑表数据延迟

维度与事实逻辑表数据延迟用于自动重跑逻辑表在最大延迟天数周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。

使用限制

  • 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了事件时间字段,才可配置是否开启数据延迟。

  • 当前逻辑表无设置事件时间字段、无主键时,不支持开启延迟数据处理。

操作步骤

  1. 在Dataphin首页,单击顶部菜单栏研发->数据开发

  2. 按照以下操作指引,进入调度配置信息页面。

    选择项目(Dev-Prod 模式需要选择环境)->单击逻辑表->选择需要配置任务调度的逻辑表任务->单击调度配置

    image

  3. 在调度配置页面,配置逻辑表的数据延迟。

    image

    开启数据延迟系统将自动重跑本逻辑表在最大延迟天数周期内的全部数据。可选择1~15天。如下所示:

    image

    说明
    • 当前逻辑表无设置事件时间字段、无主键、逻辑表已开启自定义物化时,不支持开启延迟数据处理。

    • 开启数据延迟后,系统将自动重跑本逻辑表在最大延迟天数周期内的全部数据, 该功能将消耗更多的计算资源, 可能造成产出延迟。

    • 延迟数据处理只能自动重跑所设置的周期内的事实逻辑表,下游无法自动重跑。

  4. 单击确定

后续步骤

完成逻辑表数据延迟配置后,下一步您可以配置逻辑表的调度属性。详情请参见:配置逻辑表调度属性