算子中心
算子中心包含算子管理、算子配置。...算子配置 算子配置模块展示并管理用户上传的资源文件及函数信息、包含了资源文件和函数。资源文件 支持用户在系统内上传本地资源文件及OSS空间配置，根据上传的资源包可生成对应类型的脚本算子。
实时模式依赖文件配置
若您的实时任务运行需要依赖外部资源文件，例如文本文件、Python文件、Jar文件等，您可以在Dataphin上传对应资源文件后，将所上传的资源文件添加到任务的依赖文件，使任务能够正常运行。本文将为您介绍如何配置任务实时模式的依赖文件。...
实时模式依赖文件配置
若您的实时任务运行需要依赖外部资源文件，例如文本文件、Python文件、Jar文件等，您可以在Dataphin上传对应资源文件后，将所上传的资源文件添加到任务的依赖文件，使任务能够正常运行。本文将为您介绍如何配置任务实时模式的依赖文件。...
离线模式依赖文件配置
若您的实时任务的离线模式运行需要依赖外部资源文件，例如文本文件、Python文件、Jar文件等，您可以在Dataphin上传对应资源文件后，将所上传的资源文件添加到任务的依赖文件，使任务能够正常运行。本文将为您介绍如何配置任务离线模式的...
离线模式依赖文件配置
若您的实时任务的离线模式运行需要依赖外部资源文件，例如文本文件、Python文件、Jar文件等，您可以在Dataphin上传对应资源文件后，将所上传的资源文件添加到任务的依赖文件，使任务能够正常运行。本文将为您介绍如何配置任务离线模式的...
Resource
read read(resource_name,encoding='utf-8')方法描述 读取资源文件内容 参数说明 resource_name资源文件名称，相对于工程中resources文件夹目录 encoding资源文件的编码格式，默认utf-8 返回值说明 返回资源文件内容调用样例-rpa.project....
新建资源文件
您可以上传本地资源文件新建资源，并根据上传的资源包生成对应类型的脚本算子。本文介绍如何新建资源。前提条件 已准备好资源文件包，当前支持.jar、.py、.pmml和.sh格式的资源文件包。操作步骤 登录 数据资源平台控制台。在页面左上角单击...
可视化管理资源
获取资源文件 在IntelliJ IDEA界面的左侧导航栏，单击 Project Explorer，在目标MaxCompute项目的 Resources 下，右键单击需要获取资源文件的资源名称，选择 Copy local meta path，即可复制资源文件所在路径并在路径下获取到资源文件。...
生成 H5 离线包
根据以上规则组织资源文件后，即可按照如下格式快速获得资源文件的路径。公有云：http://域名/appID_workspace/资源文件路径。专有云：http://域名/mcube/appID_workspace/资源文件路径。重要 专有云环境下资源文件的路径需要在二级目录...
管理界面功能说明
说明 通过本地上传的设计资源文件，格式和大小限制如下：图片文件支持：.png,.jpg,.jpeg,.webp,.wbmp,.svg,.gif,.tif,.bmp,.hrd，文件大小不超过5MB，且图片类文件 支持批量上传。视频文件支持：.mov,.mp4,.webm，文件大小不超过50MB。模型...
MaxCompute资源管理
您可以通过MaxCompute资源面板，查看在MaxCompute计算引擎中存在的资源、资源的变更历史，并可以一键添加资源文件至数据开发面板的业务流程中。使用限制 仅支持MaxCompute客户端（odpscmd）上传的不超过200M的资源通过MaxCompute资源功能...
02创建质量校验函数并物理化
新建函数配置项如下：函数名称 函数Code 函数类型 手机号码校验 sjhmjy MaxCompute 在 新增资源 面板，填写资源名称和资源Code、选择资源类型，单击 上传资源文件，选择已保存在本地的jar包，单击 确定。新建资源配置项如下：资源名称 资源...
新建质量校验函数
前提条件 已完成自定义资源文件准备或者已创建资源，创建资源的具体操作，请参见 新建函数资源。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 ...
新建函数资源
在 新建资源 面板，选择资源类型、输入资源名称、资源标识，上传资源文件，操作完成后单击 确定。后续步骤 为后续新建自定义函数时，添加资源使用，具体操作，请参见 新建自定义函数。相关操作 新建资源完成后，在 资源管理 页面：操作 ...
新建Spark Batch类型的公共节点
已准备好相关节点资源文件。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳过“单击 资产加工”的操作。在左侧导航...
Python SDK示例：资源
表资源：表资源相关SDK示例请参见下文的 表资源 文件资源 文件资源常见操作如下：创建文件资源 您可以通过给定资源名、文件类型和一个file-like的对象（或字符串对象）调用 create_resource()来创建。使用file-like的对象创建文件资源，...
添加镜像资源
上传方式：单击或者拖拽上传镜像资源文件，可上传的文件类型有.tar.gz、.gz、.tar。配置完成后，单击 确定。相关操作 操作 说明 查看版本详细 在镜像资源列表页面的 版本 列，单击环境版本，即查看对应版本镜像资源的详细。编辑镜像资源 在...
操作流程
通过操作流程图及说明，您可以直观且全局了解自定义函数和数据基础库的操作流程。本文介绍自定义函数和数据基础库...在数据开发中引用 在数据开发工程中，写SQL语句时，引用UDF规则，具体操作，请参见 步骤二：输入算法语句或者上传资源文件。
上传资源及引用
资源管理用于存储、管理代码研发过程中所需的文件，如JAR、JSON、Python等资源文件。本文为您介绍如何新建资源及引用。创建资源 在Dataphin首页，单击 研发。在数据 开发 页面，按照下图操作指引，进入 新建资源 对话框。①区域选择编码...
新建Flink Vvp Stream类型的公共节点
在页面右侧的 节点属性 页签，自定义填写节点标识、节点名称以及简介信息并上传资源文件，填写入口类名。参数 说明 节点名称 节点的名称。节点标识 节点的唯一标识，由用户自定义，同一个工作区内不可重复。公共节点版本 首次创建时，默认...
资源中心
连接芯片资源中心仅提供专业的资源文件下载。连接芯片资源 关于可以下载资源的连接芯片型号有TG7120B、TG7100B、TG7121B、TG7220B、TG7221B、TG7470B、TG7110B、TG7111B、TG7250B、TG7350B和TG7100C、TG7101C、TG7200C、TG7560A。说明 芯片...
概述
当您的站点接入 全站加速 DCDN 后，全站加速 DCDN 边缘节点将根据缓存配置的规则来决定是否缓存客户端请求响应的资源文件，边缘节点缓存该文件后，当有其他用户发起相同的文件请求时，可由DCDN边缘节点直接响应，可有效避免长链路回源情况...
步骤二：添加算法语句
通过算法语句或者上传脚本来处理数据，本文介绍如何输入算法语句或者上传资源文件。操作步骤 根据选择的节点类型，选择下述两种方式的其中一种，添加算法语句。方式一：输入算法语句 在节点编辑页面，输入算法语句，这里以MaxCompute SQL为...
配置参数说明
节点资源文件 仅当节点类型为Spark Batch、Spark SQL、Elastic Job和MaxCompue MR、Elastic Service、Blink、Blink DataStream、Flink DataStream、Flink Vvp Stream、Flink Vvp Stream、Flink Vvp SQL、Flink Vvr Stream、Flink Vvr SQL、...
节点类型说明
MaxCompute MR MaxCompute 离线节点，当算法脚本类型为Shell时，可通过新建MaxCompute MR类型的节点任务，使用上传节点资源文件的方式处理MaxCompute和Table Store类型的数据源；也支持通过写SQL语句方式处理。RDS MySQL RDS MySQL 离线...
点播资源迁移
说明 需要注意资源文件地址如果存在鉴权，尽量保证鉴权时间够长，避免下载时文件下载地址失效。点播资源 调用视频点播服务端 GetMezzanineInfo-获取源文件信息 接口获取文件OSS地址，请务必将请求参数 OutputType 的值设为 oss。将获取到的...
通过控制台上传文件
说明 上传资源 对话框关闭并提示上传成功，表示文件资源已完成上传，此过程需等待5~10分钟，实际等待时长与上传的文件大小有关。文件上传成功后，文件名称会自动增加 ldps-前缀。单击文件名称前的 图标，复制资源存储路径，用于配置作业...
创建并使用MaxCompute资源
如果您的代码或函数中需使用MaxCompute资源文件，则需先创建或上传资源至目标工作空间后再引用。您可通过 MaxCompute的SQL命令上传与管理资源，也可使用DataWorks的可视化方式创建。本文为您介绍如何使用DataWorks可视化方式创建资源并在...
新建Elastic Service在线类型的节点并运行
开发语言版本 节点文件 支持上传单个.zip资源文件包。自定义镜像 镜像环境名称 镜像格式。镜像环境版本号 输入版本号。健康检查方式 用来判断镜像启动后是否正常。HTTP健康检查默认请求/health,返回码200表示成功。SHELL健康检查默认执行根...
Windows客户端以AD域用户身份挂载并使用SMB文件系统
Windows文件资源管理器 在Windows本地磁盘为SMB文件系统挂载点生成符号链接，可以通过Windows的文件资源管理器（File Explorer）查看、编辑文件和目录的ACL。找到目标文件或目录，右键单击 属性。在 属性 对话框，单击 安全 页签，然后单击...
UDF示例：引用文件资源
本文以在MaxCompute客户端操作为例，为您介绍如何通过Python UDF引用文件资源。前提条件 请确认您已完成如下操作：已安装并配置MaxCompute客户端。更多安装并配置MaxCompute客户端信息，请参见 安装并配置MaxCompute客户端。已将待引用的...
新功能发布记录
目录配额 中国内地资源包 通用型NAS资源包新增中国内地通用抵扣规格，支持一个资源包抵扣在不同地域创建的文件系统，通用型NAS全量中国内地用户均可购买，使用更灵活。2023-08-01 中国内地 资源包概述 2023年04月 功能名称 功能概述 发布...
新购ECS时挂载NAS文件系统
打开文件资源管理器，即可看到SMB文件系统作为网络磁盘挂载成功。如果未发现挂载的盘符，您可以在文件管理器中，输入 \\192.168.xx.xx\myshare 进行访问。其中 192.168.xx.xx 为服务器IP地址，请根据实际值替换。说明 自动挂载配置保存在 c...
函数计算挂载文件系统
说明 如果您希望不同函数可以共享NAS文件资源，您需要在配置函数的NAS文件系统时UserId和GroupId设置相同的值。上传至NAS的文件权限与本地文件权限完全相同。地址配置 每个 NAS 挂载点 地址由 远端目录 和 函数本地目录 组成。远端目录与...
其他问题
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB协议文件系统、...
HIVECLI
如果其他参数中引用了资源文件，需要选择在 资源中心 的 文件管理 页面，创建或者上传的文件。自定义参数 任务自定义参数，会替换脚本中${变量} 的内容。前置任务 设置当前任务的前置（上游）任务。任务示例 使用脚本输入 该示例演示了如何...
资源
文件资源 文件资源包括基础的 File 类型，以及 Py、Jar、Archive 类型。创建文件资源 创建文件资源可以通过给定资源名、文件类型和一个file-like的对象（或字符串对象）调用 create_resource()来创建。使用file-like的对象创建文件资源，...
资源库功能介绍
一、功能效果 资源库用于储存网站文件，网站中使用的文件信息可在资源库中查找。可对文件进行整理归纳，方便管理。二、操作教程 1.管理文件夹 1.1 在建站管理后台点击【资源库-管理文件夹】，可进行添加、编辑或删除文件夹。如下图：2.管理...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
查询文件系统详情
您可以在文件系统概览页了解您的文件系统概况，例如各地域文件系统数量、文件系统资源使用量等信息。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。查询文件系统资源使用量 您可以通过以下方式快速查询当前阿里云账号下文件...
- 产品推荐
- 这些文档可能帮助您