XML函数
本节中描述的函数以及类函数的表达式都在类型 xml 的值上操作。用于在值和类型 xml 之间转换的类函数的表达式 xmlparse 和 xmlserialize 记录在这里，而不是在本节中。使用大部分这些函数要求本数据库使用了 configure-with-libxml 进行...
for-each节点逻辑原理介绍
使用说明 您可通过以下内容了解遍历节点（for-each节点）的使用：说明 相关文档 了解遍历节点（for-each节点）使用场景 应用场景 说明 仅用于遍历赋值节点传递的结果集。了解遍历节点（for-each节点）使用限制与注意事项。例如，遍历次数...
配置for-each节点
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例，通过for-each节点2次循环遍历赋值节点输出结果，并在每次循环...
步骤三：实验2-根据车次查询城市天气
创建变量 由于使用遍历节点时，需要使用到变量保存循环内的数据，因此需要先创建变量。将 设置变量 的节点拖动至 查询车次 的节点下。在 设置变量 面板的设置变量区域，单击 添加，将 变量名 配置为 weather，类型 配置为 List。单击 脚本...
页面编排设计器内节点说明
循环中对 a 变量的操作，则在遍历循环节点内以通过节点编排的形式实现。集合变量需要从页面现存变量中选取，条目变量由于只存在于循环内部，只需要设定一个与循环内变量编码不重复的编码，即可创建以该编码为标识的循环内变量。以 aList 和...
向量介绍
检索时，从入口节点开始遍历，计算请求和入口节点的所有近邻距离，选择距离最近的近邻，作为下一步的遍历节点，进而迭代游走，直至收敛并停止检索。收敛指的是当前检索节点的所有近邻中没有比已经检索到的最近节点更接近请求。为了加速收敛...
StepMessage
修改内容：主要由开发人员在流设计器中指定，需要通过设置变量、删除变量节点进行操作，部分节点在执行时也会使用（例如遍历节点），需详见对应的节点说明。脚本中不支持对variable内容进行修改和删除。error StepException 保存错误信息。...
GetIDEEventDetail
ParentFileId Long 1234122 文件所属的循环节点或遍历节点的节点ID。Content String SHOW TABLES;生成本次文件版本的文件代码。NodeId Long 421429 调度节点的ID。FileId Long 1234123 文件的ID。CommittedFile Object 文件提交和发布时的...
服务编排设计器内节点说明
流程节点：系统自动生成一个开始节点、一个调用服务方法节点和一个结束节点，调用服务方法节点调用所选的接口，节点名称与应用服务方法名称相同，服务方法的入参作为参数传给接口，节点的出参赋值给 中间变量。结束节点：如果接口有响应...
高级应用：实现复杂作业逻辑
for-each节点 DataWorks的for-each节点主要用于有循环遍历的场景，且需要与 赋值节点 联合使用，将赋值节点作为for-each节点的上游节点，将赋值节点的输出结果赋值给for-each节点后，一次次循环来遍历赋值节点的输出结果。for-each节点的...
DataWorks节点合集
DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...
告警规则指标说明
指标维度 节点机IP，筛选条件如下：遍历：遍历每个节点机IP，针对每台节点机的指标数据单独进行监控告警。指定筛选固定的几台节点机进行监控告警。示例：=172.20.XX.XX。无维度：汇总所有节点机的指标数据，针对所有节点机的指标数据进行...
配置do-while节点
同时您也可以结合赋值节点来循环遍历赋值节点传递的结果集。本文通过实现简单和复杂场景的示例，为您介绍如何配置do-while节点。前提条件 已了解循环节点内部可根据业务需要自定义待循环的业务流程。节点组成与流程编排。已了解循环节点...
do-while节点逻辑原理介绍
节点组成与流程编排 DataWorks的do-while节点是包含内部节点的一种特殊节点，您在创建完成do-while节点时，同时也自动创建完成了三个内部节点：Start节点（循环开始节点）、Shell节点（循环任务节点）、End节点（循环结束判断节点），通过...
使用负载热点打散重调度
ack-koordinator组件提供负载热点打散重调度能力，可以感知集群内节点负载的变化，自动地优化超过负载水位安全阈值的节点，防止出现负载极端不均衡的情况。本文介绍如何使用负载热点打散重调度及其高级配置参数。使用限制 仅支持ACK Pro版...
使用do-while节点实现复杂的数据分析
同时您也可以结合赋值节点来循环遍历赋值节点传递的结果集。本文通过简单的订单统计示例，为您介绍如何使用do-while节点。本文示例：原始数据 在电商行业中，由于每天的订单量可能很大，因此在DataWorks中已创建了一个按天（下单时间的年月...
层次查询伪列
下图中的C0,C1均为层次遍历中叶子节点，因此在查询过程中，CONNECT_BY_ISLEAF 返回1，其他节点返回0。示例 SELECT name,CONNECT_BY_ISLEAF FROM connect_by_table START WITH id=1 CONNECT BY NOCYCLE PRIOR id=pid;name|connect_by_isleaf...
0032-00000004
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，您提供的该参数对应的Bucket不存在。问题示例 比如您发起了如下请求：PUT/?logging ...
0032-00000008
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，您提供的该参数对应的Bucket不存在。问题示例 比如您发起了如下请求：PUT/?logging ...
0032-00000009
LoggingEnabled><TargetBucket>Bucket-Not-Belong</TargetBucket><TargetPrefix>TargetPrefix</TargetPrefix></LoggingEnabled>上述请求请求体XML的节点 LoggingEnabled 中的 TargetBucket 子节点值为Bucket-Not-...
0016-00000807
问题描述 在调用SelectObject接口时，如果需要将查询结果转存至目标Bucket中某个Object，则不能开启OutputRawData。问题原因 您发起了SelectObject请求，并希望将查询结果转存至目标Bucket中某个Object，...相关文档 查询文件 SelectObject
流程编排
以下是这些节点的使用方法：Start节点使用说明 LLM节点说明 Script节点使用说明 逻辑节点使用说明 End节点使用说明 画布操作说明 新增节点 每个节点上会显示能创建的节点有哪些类别，点击即可创建一个该类型的新节点。如上图脚本节点可以...
什么是流程编排
点击 确定，左侧随着执行的路径遍历执行过的节点，右侧显示每个节点的执行结果，最终在结束节点可以看到返回的具体参数。如果发生了错误，左侧报错节点会红框锁定，右侧会返回报错信息，辅助调试人员排查问题。（2）应用内调试 新建流程...
赋值节点
原理介绍 在DataWorks中，节点上下文参数可实现节点参数的上下游传递，赋值节点在此基础上，可将赋值节点最后一条查询结果传递给自带的输出参数（outputs），若下游节点依赖了赋值节点，则下游节点可通过添加输入参数的方式，在节点代码中...
代码评审
特殊类型节点（例如，循环、遍历等组合型节点以及非Python的资源文件）不支持发起代码评审。使用流程 强制代码评审的使用流程如下表。步骤 执行角色 说明 开启强制代码评审并配置评审信息 空间管理员 空间管理员可开启代码强制评审并根据...
YARN资源配置
修改 yarn.nodemanager.resource.memory-mb 和 yarn.nodemanager.resource.cpu-vcores 参数时，必须选择 节点组配置 才能生效，因为EMR允许一个集群中通过节点组的方式运行不同规格的ECS实例，一个节点组内的ECS规格是一致的，所以按照节点...
0014-00000051
问题描述 配置基于最后一次访问时间的生命周期规则的请求体XML Transition 节点下指定了不支持的存储类型。问题原因 您在请求体XML Transition 节点下通过 StorageClass 子节点指定了不支持的存储类型，例如冷归档存储类型（ColdArchive）...
0016-00000608
问题描述 批量删除操作请求体XML结构根节点有误。问题原因 您发起了DeleteMultipleObjects请求，但是请求体XML根节点名称不是Delete，不符合接口规范。问题示例 以下请求中XML根节点是，而该接口要求请求体XML结构根节点为。POST/?delete ...
0014-00000012
问题描述 PutBucketLifecycle请求中请求体XML根节点名称有误。问题原因 您发起了PutBucketLifecycle请求，但是请求体XML中根节点不是该接口要求的LifecycleConfiguration，导致请求错误。问题示例 以下请求中请求体XML结构根节点为...
0014-00000015
问题描述 PutBucketLifecycle请求的请求体XML的根节点下包含了名称不是 Rule 的子节点。问题原因 您发起了PutBucketLifecycle请求，但是请求体XML根节点 LifecycleConfiguration 下包含了名称不是 Rule 的子节点，不符合接口要求，导致请求...
管理蓝图资源
流程控制 蓝图中进行流程控制的节点，包括但不限于遍历、是否、选择分支和重置。调试 蓝图中进行日志调试的节点。逻辑控制 蓝图中进行判断大小、等于、与、或等逻辑节点。数学库 蓝图中引用数学库的节点，包括但不限于随机数、获取二维坐...
0017-00000606
问题描述 请求体XML中节点为空。问题原因 您的请求中请求体XML格式不正确，主要是某个不应为空的节点值为空。问题示例 以PutBucket作为示例，请求体XML格式需正确。PUT/...
0032-00000005
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetPrefix 节点表示保存的日志文件前缀，该参数要求不能以/或 \ 开头。问题示例 比如您发起了如下请求：PUT/?logging ...
0032-00000006
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetPrefix 节点表示保存的日志文件前缀，该参数要求不能超过256个字符。问题示例 比如您发起了如下请求：PUT/?logging ...
挂载文件存储 HDFS 版文件系统
将 core-site.xml 文件同步到所有节点上。部署 文件存储 HDFS 版 Java SDK。下载最新的 文件存储 HDFS 版 Java SDK。将下载的 文件存储 HDFS 版 Java SDK部署到HDFS组件的CLASSPATH路径下。cp aliyun-sdk-dfs-x.y.z.jar${HADOOP_HOME}/...
0032-00000007
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetPrefix 节点表示保存的日志文件前缀，该参数要求UTF8编码，不能出现其他字符编码集的字符。问题示例 比如您发起了如下请求：...
0032-00000002
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，是必需字段，不能省略。问题示例 比如您发起了如下请求：PUT/?logging ...
0016-00000826
问题描述 SelectObject请求的请求体XML中CompressionType参数取值不合法。问题原因 您发起了SelectObject请求，但是请求体XML中CompressionType节点的值不合法。问题示例 以下请求中CompressionType节点的...相关文档 RestoreObject 查询文件
0004-00000107
问题描述 请求体中提交的XML节点 TotalDownloadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 TotalDownloadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供...
0004-00000108
问题描述 请求体中提交的XML节点 IntranetDownloadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 IntranetDownloadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂...
- 产品推荐
- 这些文档可能帮助您