本文为您介绍如何配置自定义任务参数,防止系统分配资源时出现不合理的现象。
背景信息
自定义任务参数用于指定计算引擎的某些参数,避免由于企业的计算引擎特异性导致的引擎适配问题,同时提高了逻辑表任务的效率。
操作步骤
在Dataphin首页的顶部菜单栏中,选择管理中心 > 系统设置。
在左侧导航栏中选择智能引擎,在自定义任务参数页面,配置参数。
参数
描述
自定义参数生效
选择自定义任务参数需要开启还是关闭。
自定义参数配置
配置自定义任务参数,参数需要与Dataphin系统绑定的计算引擎源的特性一致,示例如下。
set odps.sql.mapper.cpu=100 set odps.sql.mapper.split.size=256 set odps.sql.reducer.cpu=100 set odps.sql.joiner.cpu=100说明自定义参数配置采用优先级策略,任务节点的物理化配置较智能引擎的自定义任务参数优先级高。
参数配置完后,单击确定。
在确认对话框中,单击确定,完成自定义任务参数的配置。
您也可以恢复计算引擎的默认值,在自定义任务参数页面,单击恢复默认值。在确认对话框中,单击确定,完成计算引擎的默认值的恢复。
单租户多引擎
单租户多引擎模式下,不支持在此处配置自定义参数,需前往集群管理中进行配置。详情请参见单租户多引擎模式下新建集群。
该文章对您有帮助吗?