Dataphin管道任务使用脚本输入组件提示空指针错误
问题描述 Dataphin管道任务使用脚本输入组件提示系统内部错误，查看日志为空指针错误。问题原因 配置文件JSON中直接删除了必填项导致。解决方案 当参数中没有相关设置参数的时候保留原始生成的为空即可。parameter":{} 适用于 Dataphin ...
Dataphin如何使用脚本输入组件实现SQL查询语句作为...
概述 在集成任务中，Dataphin如何使用脚本输入组件实现SQL查询语句作为数据源？详细信息 集成任务中，配置脚本输入组件，填写配置文件如下格式，即可实现sql查询语句作为数据源。适用于 Dataphin-公共云
Dataphin集成任务使用脚本模式报错"character not ...
问题描述 Dataphin集成任务使用脚本模式同步数据报错"character not supporter here。问题原因 使用的切分健不是整型类型的。解决方案 配置整型类型的索引或主键为切分健即可。适用于 Dataphin
CDN和视频点播中使用脚本刷新预热M3U8资源
常见报错 报错信息 报错内容 Specified access key is not found 使用的AccessKey错误 params error,please check or use-help 命令中使用的参数命令有误，请用-help参数查看命令使用说明 Specified Access Key Secret is not valid 使用的...
Dataphin在SQL脚本使用正则表达式判断字符是不是小数
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123.6' REGEXP '^([0-9]{1,}[.][0-9]*)$';适用于 Dataphin v3.6.3
Dataphin在SQL脚本使用正则表达式判断字符是不是整数...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数或小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '100' REGEXP '^[0-9]{1,}+(\.[0-9]{1,})?';适用于 Dataphin v3.6.3
Dataphin在SQL脚本中使用正则表达式判断字符是不是...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123' REGEXP '^([0-9]{1,})$';适用于 Dataphin v3.6.3
通过CLI工具使用边缘脚本
本文为您介绍边缘脚本CLI工具的使用方法。在本地新建CLI工具脚本文件 在本地新建一个文件夹，例如命名为 cdn-api。在文件夹内新建一个命名为 aliyun.ini 的文本文件，用于记录阿里云RAM账号的鉴权信息，文件内容如下：[Credentials]...
通过CLI工具使用边缘脚本
本文为您介绍边缘脚本CLI工具的使用方法。在本地新建CLI工具脚本文件 在本地新建一个文件夹，例如命名为 cdn-api。在文件夹内新建一个命名为 aliyun.ini 的文本文件，用于记录阿里云RAM账号的鉴权信息，文件内容如下：[Credentials]...
示例：通过CLI工具使用边缘脚本
本文通过样例为您介绍通过CLI工具使用边缘脚本的操作方法，包括在CLI工具下进行规则的编写、保存、测试和发布的基本操作。说明 CLI工具的使用方法，请参见 通过CLI工具使用边缘脚本。边缘脚本的基本操作如下：将编写的边缘脚本规则存储为...
示例：通过CLI工具使用边缘脚本
本文通过样例为您介绍通过CLI工具使用边缘脚本的操作方法，包括在CLI工具下进行规则的编写、保存、测试和发布的基本操作。说明 CLI工具的使用方法，请参见 通过CLI工具使用边缘脚本。边缘脚本的基本操作如下：将编写的边缘脚本规则存储为...
调用自定义脚本
1.组件介绍 说明 必要前置...组件使用示例 4.1.组件配置示例 在 需要执行的脚本 中，通过编辑表达式的方式填写：print("Hello World")高级选项默认选项值 4.2.示例执行结果 该流程成功执行完后，会自动在日志面板中打印日志“Hello World”。
使用定制化脚本
本文介绍如何安装并使用定制化脚本。背景信息 传统的云数据库无法开放后台，接入到您自己的管控中心。专属集群MyBase 支持登录主机，开放OS权限，您可以将主机接入管控中心进行集中管理，通过堡垒机登录和管理数据库实例所在主机，在主机上...
使用自定义脚本发布静态资源
本文描述如何在云效上使用 自定义脚本任务 发布静态资源。背景 Web应用程序会包含相关的静态资源（html，css，js）。为了加速这些静态资源的访问，通常会将它们放在CDN上。在阿里云上，您可以参考 OSS加CDN 的方案。示例 基于上面的方案，...
Dataphin在Shell脚本中引用全局变量时显示的为什么是...
问题描述 Dataphin在Shell脚本中引用全局变量时，显示的为什么是本地变量？问题原因 Shell任务中使用全局变量时，引用的是全局变量的编码，而不是变量名称。解决方案 在Shell中使用全局变量的编码即可。适用于 Dataphin 基于独立部署3.4.1...
Dataphin中Python脚本如何使用本地csv文件
概述 本文为您介绍Dataphin中Python脚本如何使用本地的文件。详细信息 1.在dataphin中先通过资源管理模块上传本地文件。2.点击上传文件的详细信息，复制引用路径。3.在Python脚本中声明该文件，即可引用。适用于 Dataphin
使用Python脚本生成一个可以调用的API URL
详细信息 说明：使用脚本前，建议先阅读 相关文档，了解产品的公共参数、API接口参数、加密过程。根据文档说明，对参考脚本中的 access_key_id、access_key_secret、服务地址 server_address、API接口参数 user_params、公共参数 ...
Dataphin中如何根据字段名关键字搜索到在哪些SQL脚本...
概述 Dataphin中如何根据字段名关键字搜索到在哪些SQL脚本中有使用。详细信息 可以在全局搜索的代码搜索模块中搜索字段名关键字。适用于 Dataphin 代码搜索 公共云2.9.4-3
Dataphin使用Flink脚本任务运行报SQL语法错误
问题描述 Dataphin使用Flink脚本任务运行报SQL语法错误。解决方案 Dataphin Flink SQL中不支持DDL建表语法，CREATE建表需要使用创建元表的方式代替。适用于 Dataphin
使用cava编写排序脚本
本文只聚焦在通过cava如何编写排序脚本，至于脚本的创建和使用请参考排序脚本API使用手册，另外也可以通过我们提供的 命令行工具 来创建排序脚本。与排序表达式相比，使用cava编写排序脚本具有更强的灵活性，可以定制性。用户可以在脚本中...
使用cava编写排序脚本
本文只聚焦在通过cava如何编写排序脚本，至于脚本的创建和使用请参考排序脚本API使用手册，另外也可以通过我们提供的 命令行工具 来创建排序脚本。与排序表达式相比，使用cava编写排序脚本具有更强的灵活性，可以定制性。用户可以在脚本中...
使用自定义节点添加脚本
本文将介绍如何使用自定义节点添加脚本。前提条件 已完成构建混合弹性容器集群（弹性ECS）步骤5之前的操作。步骤一：编写自定义节点添加脚本 您可以通过以下两种方式编写自定义节点的脚本。方式一：Kubernetes二进制文件搭建 kubelet配置的...
典型场景：通过脚本部署Web应用
除了配置机器资源，还需要配置/调整部署的批次，以及一台机器上部署的过程，比如使用的启动脚本和停止脚本。根据创建向导中的选项，日常环境可能已为您关联了临时免费使用的机器。请替换。并继续配置预发环境和正式环境。以上，详见 部署...
设置应用生命周期挂载脚本
如果您希望在应用生命周期中的不同阶段（例如启动、重启或停止）配置特定的脚本或代码，用于执行相关任务。您可以在ECS实例上设置应用生命周期挂载脚本，在事件发生时，可以自动执行自定义脚本。挂载脚本定义说明 生命周期挂载脚本的运行...
使用GdbLoader脚本导入数据文件
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
Dataphin中使用Python脚本任务报错“Exception:...
问题描述 Dataphin中使用Python脚本任务报错“Exception:Dataphin odps client auth failed,not allow to operate project XXX”。问题原因 使用Dataphin PyODPS时，不支持跨Dataphin项目访问存储在MaxCompute的数据对象。例如，当前Python...
Dataphin中使用Shell任务调用DataX脚本，将MaxCompute...
问题描述 Dataphin中使用Shell任务调用Datax脚本，将MaxCompute数据同步至OSS，补数据运行报错“Shell command exit with code:247”。完整的报错日志如下展示：2022-07-08 13:45:10.962[0-0-0-writer]INFO OssWriter$Task-upload part[191...
Dataphin如何创建基于MaxCompute引用Python脚本的...
概述 本文为您介绍Dataphin如何创建基于MaxCompute引用Python脚本的Spark任务。详细信息 1.编写Python脚本（注：脚本中需根据Spark版本初始化Spark context，详情可参考MaxCompute关于PySpark的官方文档）2.上传该Python脚本至Dataphin，...
使用云防火墙禁止下载脚本执行主机相关操作
脚本可以携带丰富的信息用于操作主机日常工作，其类型也非常丰富，有Bash Shell、Python、Perl、PowerShell等。危害 内部员工违规操作 通过远程下载带有恶意命令的脚本，可以执行预先编写的命令。黑客攻击 通过远程下载带有恶意命令的脚本...
使用MaxCompute编译器检查脚本
建议您在提交任何脚本之前，使用MaxCompute编译器对脚本进行静态编译检查。推荐您在 MaxCompute SQL 配置选项选中 Enable syntax coloring，启动语法高亮功能。如何配置请参见 MaxCompute SQL配置选项。报错示例 编译器显示 鼠标悬停如下图...
Dataphin如何使用MAX_COMPUTE_SQL脚本
概述 本文主要讲述了创建MAX_COMPUTE_SQL脚本的操作。详细信息 创建MAX_COMPUTE_SQL脚本，需要你在开发环境点数据处理，然后点计算任务的加号，选择MAX_COMPUTE_SQL。然后自定义名称，选择目录，单击确定创建脚本。然后在脚本中编写SQL语句...
使用JMeter轻松录制压测脚本
本文将介绍如何使用JMeter来录制压测脚本，包括安装JMeter、配置代理、录制测试用例等步骤。（可选）步骤一：安装JMeter 首先需要安装JMeter工具。如果您已经在本地安装过JMeter，可忽略该步骤，直接执行 步骤二：配置代理。在macOS系统中...
使用JMeter轻松录制压测脚本
本文将介绍如何使用JMeter来录制压测脚本，包括安装JMeter、配置代理、录制测试用例等步骤。（可选）步骤一：安装JMeter 首先需要安装JMeter工具。如果您已经在本地安装过JMeter，可忽略该步骤，直接执行 步骤二：配置代理。在macOS系统中...
Dataphin如何使用计算任务Python脚本链接MySQL数据库
问题描述 Dataphin如何使用计算任务Python脚本链接MySQL数据库？解决方案 Python脚本如下：#!usr/bin/env python#-*-coding:utf-8-*-#import mysql.connector def select_sql(sql):try:conn=mysql.connector.connect(host='xxx',user='xxx'...
使用SQL开发编辑器执行内置测试脚本
本文介绍如何使用内置数据集分析数据。前提条件 创建集群时已加载内置数据集。详情请参见 创建湖仓版集群。已创建数据库普通账号。详情请参见 创建数据库账号。已绑定RAM用户与数据普通账号。详情请参见 绑定或解绑RAM用户与数据库账号。...
Dataphin中python脚本导入odps包后使用报错"name '...
问题描述 Dataphin的python脚本中，导入odps包后，使用odps.execute_sql()时报错"name 'odps' is not defined。问题原因 用户使用的Dataphin是2.9.1版本，此版本使用odps包时需要先手工添加odps的AK信息去获取实例，不能直接使用。解决方案...
录制脚本
控件树 根据控件树中的Xpath修正脚本用例，可增加回放成功率。6：区间选择开关 项目 说明 开启 开启后，可按Shift键批量选择部分脚本步骤。关闭 关闭后，按Shift键批量选择脚本步骤无效。7：步骤编辑按钮 控件 说明 单步回放 用于播放当前...
Dataphin数据处理中如何使用ODPS模块开发脚本
概述 本文讲述了Dataphin数据处理中如何使用ODPS模块的方法。详细信息 1.PyODPS支持Python 2.6以上的Python版本，包括Python 3。系统安装了pip后，执行以下命令，PyODPS的相关依赖会自动安装。pip install pyodps 2.需要阿里云账号来初始化...
- 产品推荐
- 这些文档可能帮助您