同步接口API详情
前言 通用文本向量，是通义实验室基于LLM底座的多语言文本统一向量模型，面向全球多个主流语种，提供高水准的向量服务，帮助开发者将文本数据快速转换为高质量的向量数据。模型概览 模型中文名 模型英文名 数据类型 向量维度 最大输入字符...
通过ASM实现gRPC链路追踪
metadata=call.metadata.getMap()metadata.add(key,headers[key])使用Python语言通过客户端发送Headers实现基本方法。metadata_dict={} 变量填充 metadata_dict[c.key]=c.value，最终转为 list tuple 类型 list(metadata_dict.items())。...
通过ASM实现gRPC链路追踪
metadata=call.metadata.getMap()metadata.add(key,headers[key])使用Python语言通过客户端发送Headers实现基本方法。metadata_dict={} 变量填充 metadata_dict[c.key]=c.value，最终转为 list tuple 类型 list(metadata_dict.items())。...
对象存储OSS使用Python语言实现签名Header上传的示例
概述 对象存储OSS SDK提供了集成签名、上传和下载的SDK，但实际使用中，有时需要使用API的方式实现在签名的情况下进行上传和下载，本文以PutObject接口为例，提供了Python语言实现的示例。说明 建议优先使用OSS提供SDK，本文提供的只是签名...
SHUFFLE
返回指定数组的元素随机排列数组。命令格式 shuffle(array)参数说明 array：输入数组。返回值说明 返回指定数组的元素随机排列数组。如果输入值为null，则返回NULL。该函数的返回结果是不确定的。示例 SELECT shuffle(array(1,20,3,5));...
IForest异常检测
IForest异常检测使用sub-sampling算法，降低了算法的计算复杂度，可以识别数据中的异常点，在异常检测领域有显著的应用效果。本文为您介绍IForest异常检测的参数配置。组件配置 您可以通过以下任意一种方式，配置IForest异常检测参数。方式...
UDF示例：引用表资源
开发代码 Python UDF代码如下，实现遍历引用的表资源（例如udf_test）中的数据，返回数组格式的数据。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class DistCacheTableExample(object...
One-Class SVM异常检测
One-Class SVM与传统SVM不同，是一种非监督的学习算法。您可以使用One-Class SVM异常检测通过学习边界对异常点进行预测。本文为您介绍One-Class SVM异常检测的参数配置。使用限制 支持运行的计算资源为MaxCompute。组件配置 您可以通过以下...
简介
Python语言：我们用Python语言进行消费。Java 语言用法，请参考 通过消费组消费数据。Python SDK 推荐使用标准CPython解释器。日志服务的Python SDK可以使用 python3-m pip install aliyun-log-python-sdk-U 命令进行安装。更多日志服务...
CREATE TRANSFORM
语言的实现通常默认会使用文本表示，但是在一些时候这很不方便，例如，有时可能用一个联合数组或者列表更合适。一种转换指定了两个函数：一个“from SQL”函数负责将类型从 SQL 环境转换到语言。这个函数将在该语言编写的一个函数的参数上...
Python 2 UDAF
实现Python类的方法：必选。Python类实现包含如下4个方法，您可以根据实际需要进行选择。方法定义 描述 BaseUDAF.new_buffer()返回聚合函数的中间值的buffer。buffer 必须是 Marshal 对象（例如LIST、DICT），并且 buffer 的大小不应该随...
概览
Designer 智能风控解决方案 基于外卖评论实现舆情风控 基于图算法实现金融风控 评分卡信用评分 异常指标监控 用户流失预警风控 分类 相似标签自动归类 基于文本分析算法实现新闻分类 通用方案 心脏病预测 基于回归算法实现农业贷款发放预测...
局部异常因子异常检测
页签 参数名称 描述 字段设置 特征列名数组 特征列名的数组。分组列名数组 分组列名的数组。tensor列 tensor列。向量列名 向量列对应的列名。参数设置 预测结果列名 预测结果列的列名。距离度量方式 聚类使用的距离类型，默认为EUCLIDEAN。...
Python 2 UDTF
实现Python类的方法：必选。Python类实现包含如下4个方法，您可以根据实际需要进行选择。方法定义 描述 BaseUDTF.init()初始化方法。派生类如果需要实现此方法，必须在一开始调用基类的初始化方法 super(BaseUDTF,self).init()。init 方法...
在PyODPS节点中调用第三方包
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。更多创建PyODPS节点信息，请参见 开发PyODPS 2任务 和 开发PyODPS 3任务。使用限制 在PyODPS节点中调用第...
什么是向量检索服务
超大规模索引构建和检索：引入复合性检索算法，精于工程实现和算法底层优化，低成本实现高效率的检索方法，单片索引可达几十亿的规模。标签+向量检索：在索引算法层实现了“带条件的向量检索”，解决了传统多路归并召回结果不理想的情况，...
UDF开发（Python2）
第三方库 MaxCompute的Python 2运行环境中安装了除Python标准库外比较常用的第三方库，作为标准库的补充，例如Numpy。说明 使用第三方库存在限制，例如禁止本地访问、网络I/O受限，因此第三方库中涉及到相关功能的API也被禁止使用。函数...
多语言API访问
说明 一些语言提供了管理依赖的方法，可以遵循这些语言的使用习惯来安装thrift，如Python语言可以通过 pip install thrift 来安装，Go语言可以直接在代码里 import {"github.com/apache/thrift/lib/go/thrift"} 。下载 HBase Thrift2定义...
Suggest类
Suggest 类功能方法描述，主要用户下拉提示操作 下拉提示实现依赖简述 通过代码实现下拉提示功能，需要依赖多个类组合实现，主要涉及的类有 Suggest、SearchParams、SearcherClient（依赖其它2个类）、Config 等类，具体代码实现参考标准版...
Python 3 UDTF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用文件资源和表资源的代码示例如下。from odps.udf import annotate from odps.udf import BaseUDTF from odps.distcache import ...
配置国密HTTPS
前提条件 已在SSL证书控制台上购买并部署国密证书，具体方法请参见步骤 6。说明 国密证书要单独购买，且必须在SSL证书产品购买，不支持自定义国密证书上传。已配置HTTPS证书，具体操作请参见 配置HTTPS证书。背景信息 国密HTTPS是指支持SM2...
Python 3 UDAF
实现Python类的方法：必选。Python类实现包含如下4个方法，您可以根据实际需要进行选择。方法定义 描述 BaseUDAF.new_buffer()返回聚合函数的中间值的buffer。buffer 必须是 Marshal 对象（例如LIST、DICT），并且 buffer 的大小不应该随...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB，该操作受限于DataWorks执行...
基于回归算法实现农业贷款发放预测
线性回归是数理统计中的回归分析方法，可以确定两种或两种以上变量之间相互依赖的定量关系。Designer预置了线性回归算法模板，便于您通过农业贷款的历史发放情况，快速实现贷款发放预测。本文为您介绍Designer线性回归算法预置模板的具体...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
岭回归训练
岭回归（Tikhonov regularization）算法是对不适定问题进行回归分析时，最常用的正则化方法。岭回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍岭回归训练组件的配置方法。使用限制 支持的计算...
Lasso回归训练
Lasso（Least absolute shrinkage and selection operator）回归算法是一种压缩估计算法。Lasso回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍Lasso回归训练组件的配置方法。使用限制 支持的...
数字人概述
专业版：阿里云提供从录制引导到训练调教的全流程服务，针对单个形象进行训练算法调优，可达到广电传媒级的拟真效果，实现个性化高标准定制。大众版：您需要自行上传训练素材，系统会采用标准化统一算法，2天内快速输出定制形象，可快速低...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
语法简介
SLS DSL基于Python语言开发，提供两百多个内置函数来简化数据加工任务。本文介绍DSL的语言模式、分类和运行原理等。语言模式 SLS DSL兼容Python，标准模式下，SLS DSL可视为Python的子集。除基本的数据结构与表达方式外，语法规则是以函数...
赋值节点
当您需要将上游节点任务的查询或输出结果提供给下游节点使用时，可通过赋值节点实现。赋值节点支持ODPS SQL、SHELL和Python三种赋值语言，将节点最后一条查询或输出结果自动赋值给节点自带的输出参数（outputs），便于赋值节点的下游节点...
UDF开发（Python3）
Python 2 UDF迁移 Python 2官方已于2020年初停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDF的MaxCompute项目。建议所有的Python UDF都直接使用Python 3语言编写。存量项目：创建了...
Designer概述
Designer（Studio 2.0）是PAI产品基于云原生架构Pipeline Service-PAIFlow的可视化建模工具，提供端到端的机器学习全链路开发环境，帮助您实现端到端的机器学习开发流程。同时，Designer中内置了丰富且成熟的机器学习算法，覆盖商品推荐、...
加密SDK快速入门（Python）
加密SDK（Encryption SDK）是一个客户端密码库，通过与密钥管理服务KMS（Key Management Service）结合使用，帮助您快速实现数据的加解密、签名验签功能。本文以Python3语言为例，为您介绍如何快速使用加密SDK进行数据加解密。背景信息 您...
Array数组类型说明
Array类型即为数组类型，数组类型即由相同类型的若干个元素组织在一起的数据，期望在搜索的时候对于每一个元素都可以执行单独的查询。比如小说的标签tags，包含“悬疑”、“穿越”、“古典”，希望在搜索“悬疑”的时候能找到该篇小说。...
SDK概述
本文介绍 云消息队列 Kafka 版 SDK、支持的多语言SDK。SDK简介 SDK（Software Development Kit）即软件开发工具包，包含示例Demo、库文件、编译工具链以及编译脚本等，不需要开发者进行任何其他的配置，直接可以在SDK对应目录环境下，进行...
什么是AI分布式训练通信优化库AIACC-ACSpeed
优化方法 针对上述通信算法实现autotuner，包括warmup、多维度perf_time统计以及top_k_algo的retuning等机制，从而实现在实时训练过程中，针对特定网络选择最优通信算法，保证端到端的性能最优。优化效果 该算法在多机型的不同模型上，均能...
Python SDK常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
平滑函数
数组格式，长度（length）的取值范围为2~15，且数组中元素的和为1。例如array[0.2,0.4,0.3,0.1]。array[]IIR滤波算法中关于y i−1 的具体参数。数组格式，长度（length）的取值范围为2~15，且数组中元素的和为1。例如array[0.2,0.4,0.3,0.1...
- 产品推荐
- 这些文档可能帮助您