删除分组中个体
本文介绍了如何使用Python SDK从指定分组中删除个体信息。功能描述 删除分组中个体不会删除个体对应的信息以及图片，只是解除个体与该分组的绑定关系。关于参数的详细说明，请参见 删除分组中的个体API文档。您需要使用内容安全的API接入...
原图保护
原图保护后缀 在 原图保护后缀 下拉列表选择文件后缀，Bucket中所有匹配指定后缀的文件都会被保护。说明 如果设置为*，则所有文件都会被保护。自定义分隔符 支持四种自定义分隔符，分别为短横线（-）、下划线（_）、正斜线（/）以及感叹号!...
使用WebIDE打包函数第三方依赖
删除python目录,给函数代码包瘦身 rm-rf python python.zip#4.部署更新函数 说明 Python运行时建议您使用特定目录/python，无需单独设置环境变量 PYTHONPATH=opt/python，函数即可直接导入第三方包。关于创建和引用自定义层的更多信息，请...
使用WebIDE打包函数第三方依赖
删除python目录,给函数代码包瘦身 rm-rf python python.zip#4.部署更新函数 说明 Python运行时建议您使用特定目录/python，无需单独设置环境变量 PYTHONPATH=opt/python，函数即可直接导入第三方包。关于创建和引用自定义层的更多信息，请...
Windows镜像辅助打包
鉴于Windows镜像打包有诸多不便，平台提供了镜像打包工具，用于帮助简单应用自动完成Docker镜像的生成。...对于原生应用，您需要将应用程序及依赖文件打包在一个zip文件中，并保证后面指定的“启动文件”，位于文件夹的一级目录下。
使用Python依赖
您可以在Flink Python作业中使用自定义的Python虚拟环境、第三方Python包、JAR包和数据文件等，本文为您介绍如何在Python作业中使用这些依赖。背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三...
Python ZIP打包说明
app│└─hello.py└─requirements.txt（需在根目录，可选）步骤一：打包Python应用为ZIP包 使用命令行或文件压缩工具，将应用目录打包到ZIP包中。下文演示命令行打包的方式。执行以下命令，下载示例程序。wget ...
镜像辅助打包
鉴于镜像打包有诸多不便，平台提供了镜像打包工具，用于帮助简单应用自动完成Docker镜像的生成。...对于原生应用，您需要将应用程序及依赖文件打包在一个zip文件中，并保证后面指定的“启动文件”，位于文件夹的一级目录下。
删除文件
您可以根据需要删除单个文件（Object）、删除指定的多个文件、删除指定前缀的文件或者删除指定目录及目录下的所有文件。警告 请您谨慎使用删除操作，文件删除后将无法恢复。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过...
Flink Python参考
使用Python依赖 通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 方式一：在DataFlow集群中的某个节点创建Python虚拟环境 在DataFlow集群的...
安装及管理Python三方包
本文将为您介绍如何管理Python三方包和安装Python Module。权限说明 仅支持 超级管理员、系统管理员 安装、升级、删除Python三方包。Python Module入口 在Dataphin首页，单击顶部菜单栏 管理中心。按照下图操作指引，进入Python Module页面...
安装及管理Python三方包
本文将为您介绍如何管理Python三方包和安装Python Module。权限说明 仅支持 超级管理员、系统管理员 安装、升级、删除Python三方包。Python Module入口 在Dataphin首页，单击顶部菜单栏 管理中心。按照下图操作指引，进入Python Module页面...
ossftp概述
ossftp是一个特殊的FTP server，可以将对文件、文件夹的操作映射为对OSS的操作，使您可以基于FTP协议来管理存储在OSS上的文件。使用限制 ossftp主要提供给个人测试时使用，生产环境建议使用 OSS管理控制台、ossutil、ossbrowser、SDK 等...
文件数据源
背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用...
Spark应用开发介绍
Python应用参数 参数名称 是否必填 示例值 使用说明 pyFiles 是"pyFiles":["oss:/<testBucketName>/path/to/pyfiles","oss:/<testBucketName>/path/to/pyfiles"]PySpark依赖的Python文件，后缀可以是ZIP、PY和EGG。如果依赖多个Python文件...
文件数据源
背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用...
Flink Python作业快速入门
无需填写 Python Archives 存档文件，Python Archives详情请参见 使用自定义的Python虚拟环境 和 使用数据文件。无需填写 附加依赖文件 填写目标附加依赖文件的OSS路径或者URL。无需填写 部署目标 在下拉列表中，选择目标 资源队列 或者 ...
部署作业
附加依赖文件（推荐）选择您已上传的目标附加依赖文件。您需要提前通过Flink全托管开发控制台左侧 资源管理 或部署作业的 附件依赖文件 右侧的 上传附件依赖文件。上传的附件依赖文件会固定被保存在oss:/ossBucketName/artifacts/...
进入联邦建模控制台
在联邦建模控制台中，使用节点中的离线数据作为建模样本，创建联邦模型，并将创建的联邦模型分发到各节点中。前置条件 在进入联邦建模控制台前，您需要确认以下信息：确认联邦节点已部署完成，并且数据已加载到节点中。确认机构管理台中已...
删除相似图库
本文介绍了如何使用Python SDK，删除指定相似图库。功能描述 只有当相似图库中无图片样本时，才允许被删除。关于参数的详细说明，请参见 删除图库API文档。您需要使用内容安全的API接入地址，调用本SDK接口。关于API接入地址的信息，请参见...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
自定义标量函数（UDSF）
zip-r python_demo.zip udx \python_demo-master\ 目录下会出现 python_demo.zip 的ZIP包，即代表完成了Python UDSF的开发工作。UDSF注册 UDSF注册过程，请参见 注册UDF。UDSF使用 在完成注册UDSF后，您就可以使用UDSF，详细的操作步骤如下...
资源
Archive类型：通过资源名称中的后缀识别压缩类型，支持的压缩文件类型包括.zip、.tgz、.tar.gz、.tar、.jar。Python类型：您编写的Python代码，用于注册Python UDF函数。相关文档 资源的相关操作请参见 资源操作 或 MaxCompute资源管理。...
OSS数据源
背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用...
OSS数据源
背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用...
在PyODPS节点中调用第三方包
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。更多创建PyODPS节点信息，请参见 开发PyODPS 2任务 和 开发PyODPS 3任务。使用限制 在PyODPS节点中调用第...
Python 3 UDTF
当UDTF代码中需要引用文件资源或表资源时，需要包含 from odps.distcache import get_cache_file（文件资源）或 from odps.distcache import get_cache_table（表资源）。函数签名：可选。格式为@annotate()，signature 用于定义函数的输入...
OSS有哪些批量操作？
对象存储OSS提供丰富的访问和管理文件（Object）的方式，为提升操作效率，您可以参照本文所示的方法批量管理文件，例如批量上传、下载、复制、删除文件等。批量上传 您可以使用以下方法，批量上传文件：ossimport工具 支持从服务器本地、第...
删除标记
如何删除“删除标记”以下内容介绍如何在已开启版本控制的Bucket中删除“删除标记”。如果在DeleteObject请求中未指定删除标记的版本ID，则OSS不会删除“删除标记”，而是插入删除标记作为Object的当前版本。删除标记可以进行累积，如下图...
快速入门
本文介绍如何快速使用OSS Python SDK完成常见操作，如创建存储空间（Bucket）、上传文件（Object）、下载文件等。操作视频 观看以下视频快速了解如何快速使用Python SDK。创建存储空间 存储空间是OSS的全局命名空间，相当于数据的容器，...
如何在Custom Runtime中引用层中的依赖
在Custom Runtime-Python语言中引用层中的依赖 方式一：在函数配置中设置 PYTHONPATH 环境变量，添加层所在的目录。示例如下。PYTHONPATH=opt/python 方式二：在您项目的入口文件里添加以下语句，需要在导入层的依赖库前执行。import sys ...
文件数据源
文件数据源功能通常与数据配置节点功能搭配使用，用于需要自定义压测请求的场景，例如使用指定用户模拟登录场景等。本文介绍如何使用文件数据源。背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：支持...
文件数据源
文件数据源功能通常与数据配置节点功能搭配使用，用于需要自定义压测请求的场景，例如使用指定用户模拟登录场景等。本文介绍如何使用文件数据源。背景信息 使用文件数据源功能需将参数文件上传至PTS控制台或OSS上，参数文件规范如下：支持...
如何在Custom Runtime中引用层中的依赖
在Custom Runtime-Python语言中引用层中的依赖 方式一：在函数配置中设置 PYTHONPATH 环境变量，添加层所在的目录。示例如下。PYTHONPATH=opt/python 方式二：在您项目的入口文件里添加以下语句，需要在导入层的依赖库前执行。import sys ...
Redis批量删除Key
批量删除指定Key 删除指定的多个Key 执行命令前，您需要把待删除的Key列表写入至文件。通过cat命令从指定文件中读取每一行作为Redis的Key，然后使用 redis-cli 连接到 Redis 服务器，并使用 DEL 命令删除这些Key。命令语法如下。cat|xargs ...
多任务支持
指定cmd时，需要从./src/目录下开始指定，如：cmd=python split.py 如果指定文件：pack=./src/split.py,则只打包文件到worker.tar.gz,指定cmd时，只需要指定文件名,如：cmd=python split.py pack可以在[DEFAULT]这个section中配置，也可以...
管理自定义函数（UDF）
在作业的 附加依赖文件 中，指定自定义函数JAR或Python包。注册作业级自定义函数。JAVA自定义函数 CREATE TEMPORARY FUNCTION yourfunctionname;Python自定义函数 CREATE TEMPORARY FUNCTION yourfunctionname LANGUAGE Python;更新UDF ...
参数文件
参数文件应符合以下规范：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改xlsx文件的后缀。推荐使用Excel、Numbers等软件导出，或使用Apache Commons-csv程序生成。在参数文件第一行不写列名，...
离线任务（PYTHON）zip包制作指南
PYTHON离线任务应用zip包的规范如下：zip包里面根目录不要出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#zip包中仅包含算法代码即可,根目录不要含有start.sh、start_flow.sh两个文件-my_algo.py-其他需要的文件 其中my_alog.py...
参数文件
参数文件应符合以下规范：文件格式支持CSV及ZIP格式，ZIP压缩包内的文件需是以CSV结尾的单个文件。说明 请勿直接修改xlsx文件的后缀。推荐使用Excel、Numbers等软件导出，或使用Apache Commons-csv程序生成。在参数文件第一行不写列名，...
- 产品推荐
- 这些文档可能帮助您