在DataWorks中,CDH Impala节点可以编写并执行Impala SQL脚本。与CDH Hive相比,CDH Impala节点为您提供更快的查询性能。本文为您介绍如何配置使用CDH Impala节点。
前提条件
已创建阿里云CDH集群,并绑定至DataWorks工作空间。操作详情请参见新版数据开发:绑定CDH计算资源。
重要已在CDH集群安装Impala组件,并在绑定集群时配置Impala链接信息。
(可选,RAM账号需要)进行任务开发的RAM账号已被添加至对应工作空间中,并具有开发或空间管理员(权限较大,谨慎添加)角色权限,添加成员的操作详情请参见为工作空间添加空间成员。
说明如果您使用的是主账号,则可忽略该添加操作。
已在DataWorks配置Hive数据源并通过连通性测试,详情请参见数据源管理。
新建节点
新建入口参考:创建节点。
开发节点
在SQL编辑区域开发任务代码,您可在代码中使用${变量名}的方式定义变量,并在节点编辑页面右侧调度配置的调度参数中为该变量赋值。实现调度场景下代码的动态传参,调度参数使用详情,请参考调度参数支持格式,示例如下。
SHOW TABLES;
SELECT * FROM userinfo ;
--可以结合调度参数使用。
SELECT '${var}'; 调试节点
在调试配置的计算资源中,选择配置计算资源和资源组。
计算资源选择您在DataWorks上注册的CDH集群名称。
资源组选择与数据源测试连通性成功的调度资源组。详情请参见网络连通方案。
在节点编辑页面上方工具栏,单击运行任务。
后续步骤
该文章对您有帮助吗?
图标唤起发布流程,通过该流程将任务发布至生产环境。项目目录下的节点只有在发布至生产环境后,才会进行周期性调度。