Ververica Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源集群、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务实时模式的资源配置。
操作步骤
在Dataphin首页,单击顶部菜单栏的研发。默认进入数据开发页面。
按照以下操作指引,进入流批一体任务离线模式配置面板。
选择项目(Dev-Prod 模式需要选择环境)->单击计算任务->选择并单击计算任务->单击配置->单击离线模式。
在配置面板中资源配置区域,配置任务离线模式的资源配置参数信息。
参数
描述
生产环境集群
默认为创建Flink SQL任务时选择的生产环境集群。您可在此处切换集群。
重要集群切换后提交生效的任务执行可能有差异,请谨慎操作。
生产环境引擎版本
默认为创建Flink SQL任务时选择的生产环境引擎版本。您可在此处切换引擎版本。
开发环境集群及引擎版本
支持系统默认配置和自行配置。
系统默认配置:默认选择,使用与生产环境相同的环境集群与引擎版本。
自行配置:您可自行选择开发环境任务运行的环境集群及引擎版本。
说明若您的项目空间为Basic模式,则无需配置该配置项。
并行度
配置任务运行的并行数。默认为1,可填任意大于0的整数, -1代表自动推断。
Task Manager数量
默认与并行度一致,可填任意大于0的整数。
Job Manager Memory
该任务在Flink集群的控制单元中所占用的内存资源大小。默认为1Gi,建议使用Gi/Mi/单位;可填数字(单位Byte),或填入包含以下内存单位(Gi/Mi)的数字。
Task Manager Memory
该任务在Flink集群的 Task Manager 中所占用的内存资源大小。默认为1Gi,建议使用Gi/Mi/单位;可填数字(单位Byte),或填入包含以下内存单位(Gi/Mi)的数字。
单击确定,完成任务离线模式的资源配置。