Quick BI数据准备功能输入的数据集刷新预览只需要1-2秒但是在数据准备中执行2个小时后提示超时被中止任务

问题描述

Quick BI数据准备功能输入的数据集刷新预览只需要1-2秒但是在数据准备中执行2个小时后提示超时被中止任务，日志显示如下：

2023-04-25 09:41:31 [INFO] Init etl task context, etlId: [4c0abe9f-3933-4444-b573-d1bf26d51ad5], taskId: [t_443887_20230425_443888].

2023-04-25 09:41:31 [INFO] Start execute etl task.

2023-04-25 09:41:37 [INFO] Create temp table success.

2023-04-25 09:41:37 [INFO] Submit task to agent successfully, wait for the task to execute successfully.

2023-04-25 11:41:34 [ERROR] Trying to kill the etl task, reason: task timeout.

2023-04-25 11:41:34 [ERROR] Etl task execution failed, reason: sleep interrupted

2023-04-25 11:41:34 [ERROR] Kill the etl task success.

问题原因

数据集中只预览前100条数据，数据准备处理的时候最大会处理一千万条，数据量级不同导致的差异。

解决方案

•  拆解成多个子任务进行处理。
•  对源表进行查询优化，比如增加索引等。
•  按业务对数据进行汇总处理。

适用于

• Quick BI