CHAR_MATCHCOUNT
MaxCompute CHAR_MATCHCOUNT函数用于计算两个字符串之间相同字符的个数。本文为您介绍CHAR_MATCHCOUNT函数的命令格式、参数说明以及使用示例。命令格式 bigint char_matchcount(string,string)参数说明 str1、str2：必填。STRING类型，必须...
空间函数
函数 功能 ST_AREA 计算几何的面积 ST_CONTAINS 判断两个几何是否包含关系 ST_COVERS 判断两个几何是否覆盖关系 ST_CROSSES 判断两个几何是否交叉 ST_DIFFERENCE 计算两个几何的差集 ST_DISTANCE 计算两个几何之间的距离 ST_EQUALS 判断两...
ARRAY_INTERSECT
MaxCompute ARRAY_INTERSECT函数用于计算两个ARRAY数组之间的交集，并返回一个包含两个数组中都存在的相同值的新数组。本文为您介绍ARRAY_INTERSECT函数的命令格式、参数说明以及使用示例。命令格式 array<T>array_intersect(array<T><a>,...
DATEDIFF
本文为您介绍如何使用DATEDIFF函数，计算两个日期之间的天数差值。使用限制 仅实时计算引擎VVR 3.0.0及以上版本支持DATEDIFF函数。语法 INT DATEDIFF(VARCHAR enddate,VARCHAR startdate)INT DATEDIFF(TIMESTAMP enddate,VARCHAR startdate...
配置算法任务
计算单元 LE-V-B015型号边缘一体机有两个 计算单元。本文示例中，仅配置一个计算单元即可。计算单元一：选择 客流统计|最大4路任务。单击 确认，完成预加载算法配置。步骤二：配置算法应用 在 算法任务管理 页面，选择您的LE-V-B015型号...
聚合函数
COVAR_POP 计算指定两个数值列的总体协方差。COVAR_SAMP 计算指定两个数值列的样本协方差。HISTOGRAM 构造输入Map的Key值出现次数的Map。MAP_AGG 构造两个输入字段的Map。MAP_UNION 对输入Map进行Union操作来构造输出Map。MAP_UNION_SUM 对...
API多版本的区别
函数计算FC（Function Compute）API有两个版本，且版本间互相不兼容。本文介绍这两个API版本间的区别，帮助您迅速定位差异，实现升级。API版本列表 函数计算 有以下两个API版本。API版本 说明 2021-04-06 升级后的版本。如需使用该版本的...
离线任务（JAVA）zip包制作指南
说明：JAVA离线任务应用支持JAVA7和8两个版本。JAVA 离线任务应用zip包的规范如下：zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、start_flow.sh两个文件...
离线任务（JAVA）zip包制作指南
说明：JAVA离线任务应用支持JAVA7和8两个版本。JAVA 离线任务应用zip包的规范如下：zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、start_flow.sh两个文件...
内建函数概述
DATEDIFF 计算两个日期的差值并按照指定的单位表示。DATEPART 提取日期中符合指定时间单位的字段值。DATETRUNC 提取日期按照指定时间单位截取后的值。FROM_UNIXTIME 将数字型的UNIX值转换为日期值。GETDATE 获取当前系统时间。ISDATE 判断...
横向分箱
对于每个分箱，计算其相邻两个分箱之间的卡方统计量。卡方统计量越大，表示两个分箱之间的差异越显著。合并卡方统计量最小的相邻分箱，直到满足预定的停止准则。例如，可以设置卡方统计量的最大值或者分箱的最大数量。对于分箱后的每个分箱...
分箱
（note：基于安全加密，这里将连续变量进行等频分箱初始化，分成k个分箱）对于每个分箱，计算其相邻两个分箱之间的卡方统计量。卡方统计量越大，表示两个分箱之间的差异越显著。合并卡方统计量最小的相邻分箱，直到满足预定的停止准则。...
公告
那么您需要在运行含有UDF的SQL任务前，将上述的两个参数替换为如下新参数即可，详情请参见 通过UDF访问VPC网络资源。set odps.session.networklink=your_networklink_name 外部表场景 若您在建表DDL语句中加入VPC开关、访问的VPC、对应的IP...
常见问题
将服务发布至计算巢分为两个部分：创建服务和发布服务。按照以往经验，创建服务（服务内容配置）需要花费2周到1个月。发布服务（发布审核）需要1~3个工作日。创建服务所需时间根据应用的复杂度有所不同。计算巢提供常用的服务模板和详细的...
MapReduce常见问题
结果表中会保留两个MapReduce计算之后的重复数据吗？Hadoop中可以选择多个Node进行分布处理（一个Node表示一台机器），那么MaxCompute MapReduce进行分布处理时，该如何设置Node？不使用Combiner时输出正常，使用Combiner后Reduce没有输入...
配置API网关触发器
} Java 使用Java编程时，必须要实现一个类，需要实现函数计算预定义的handler，目前有两个预定义的handler可以实现（任选其一即可）。函数计算Java运行环境，请参见 编译部署代码包。（推荐）使用PojoRequestHandler,O>handler。import ...
计量计费
MaxCompute SQLML作业使用了MaxCompute和 人工智能平台 PAI，所以计算费用包含这两个部分。费用计算规则 MaxCompute SQLML底层的机器学习能力，是通过阿里云 人工智能平台 PAI 产品独立计费的，所以MaxCompute SQLML费用分为以下两部分：...
请求处理程序（Handler）
处理程序接口 您在使用Java编程时，必须要实现 函数计算 提供的接口类，fc-java-core 库为请求处理程序定义了以下两个接口。StreamRequestHandler 以流的方式接收输入的 event 事件并返回执行结果。您需要从输入流中读取调用函数时的输入，...
事件请求处理程序（Event Handler）
处理程序接口 您在使用Java编程时，必须要实现 函数计算 提供的接口类，fc-java-core 库为事件请求处理程序定义了以下两个接口。StreamRequestHandler 以流的方式接收输入的 event 事件并返回执行结果。您需要从输入流中读取调用函数时的...
改进版swing相似度计算算法
也就是说当同时触达两个物品的用户数量过少时，这时候swing计算得出的结果误差会比较大。举个极端的例子：如下图所示，有A、B、C三个视频，X1到X10共10个皇马死忠球迷，只关注音乐的音乐爱好者Y。皇马死忠球迷会看与皇马相关的内容，不管是...
电子表格支持函数说明
SUMPRODUCT 计算两个大小相同的数组或范围中的对应元素的乘积之和。SUMSQ 返回一组数值和/或单元格的平方总和。SUMX2MY2 计算两个数组中对应值的平方差之和。wo arrays.SUMX2PY2 计算两个数组中对应值的平方和之和。SUMXMY2 计算两个数组中...
Cromwell 工作流引擎支持
task 的运行输出，比如上图中的 workflow 15e45adf-6dc7-4727-850c-89545faf81b0 有两个 task，每个task对应的目录命名是call-taskname，目录中包含三部分内容：批量计算的日志，包括 bcs-stdout 和 bcs-stderr 当前 task 的输出，比如图中...
安装Java SDK
本文介绍如何安装函数计算Java SDK。环境准备 安装JDK。更多信息，请参见 安装JDK。说明 JDK需是Java 1.6或以上版本。成功安装后，执行 java-version 命令查看Java语言版本。安装Maven。更多信息，请参见 安装Maven。安装SDK 在 pom.xml 中...
数据拆分
一、组件说明 在联邦学习任务中，数据拆分是将一份原始数据集分成训练集和测试集两个部分的过程。拆分数据集的目的是为了在训练模型时能够使用独立的数据集来评估模型的性能和泛化能力。训练集是模型用来学习的数据集，可以用于训练模型并...
激活边缘一体机
物联网边缘计算有两种类型多个型号的边缘一体机，每个型号的一体机的安装方式有所不同，但激活方式都一样。本文主要说明边缘一体机的激活方式。前提条件 已安装好边缘一体机，详细内容，请参见 安装说明。激活边缘一体机时，需要开通云上...
自动伸缩最佳实践
背景信息 当您需要每天不定时提交作业，使用E-HPC集群几个小时进行大规模计算，然后释放节点，您可以针对不同的作业类型，配置不同的伸缩策略。配置伸缩策略后，系统可以根据实时负载自动增加或减少计算节点。可以帮您合理利用资源，减少...
ODPS-0130252
两个表进行join的时候，如果没有指定join的条件，则会退化为两个表之间进行笛卡尔积计算。在odps.sql.allow.cartesian取值为false的时候，会报上述错误。解决方案 建议的方案是修改query：1）当其中join的一张表是小表时，可以设置odps.sql...
使用OpenFOAM软件进行流体力学仿真计算
配置集群时，软硬件参数配置如下：参数 说明 硬件参数 部署方式为标准，包含2个管控节点，1个计算节点和1个登录节点，均采用ecs.c7.large实例规格，配置为2 vCPU，4 GiB内存，Ice Lake处理器，2.7 GHz。软件参数 镜像选择CentOS 7.6公共...
测试SCC集群性能
超级计算集群SCC具有无虚拟化损耗、高带宽低延迟网络的优点，可以保证高性能计算和人工智能、机器学习等应用的高度并行需求。本文为您介绍如何创建SCC集群，并测试SCC集群的相关性能。背景信息 超级计算集群SCC（Super Computing Cluster）...
API概览
本产品（弹性高性能计算/2018-04-12）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
Java SDK 快速开始
本文档将介绍如何使用 Java 版 SDK 来提交一个作业，目的是统计一个日志文件中“INFO”,”WARN”,”ERROR”,”DEBUG”出现的次数。步骤 作业准备 上传数据文件到 OSS 使用示例代码 编译打包 上传到 OSS 使用 SDK 创建（提交）作业 查看结果...
实践教程概览
关闭计算节点的CPU超线程 E-HPC集群的每个计算节点都是一台ECS实例，默认情况下，ECS实例均已开启CPU超线程。在部分HPC场景下，可以关闭CPU超线程以获得更好的性能表现。通过后处理脚本实现自动挂载ossfs 设置后处理脚本后，E-HPC集群上...
混合云主控模式最佳实践
混合云主控模式集群的管理节点为云上新增集群的管理节点，计算节点由线下已有计算节点和云上新增计算节点组成。本文以E-HPC云上集群将线下已有计算节点纳入管理的场景为例，介绍混合云主控模式集群（SGE调度器）的部署方案。重要 本文的...
ResetNodes-批量重置计算节点
调用ResetNodes重置一个或多个计算节点。接口说明 重置节点后，节点的系统和软件将恢复初始状态。如无特殊需要（如故障修复等），请勿重置处于运行中状态的节点，以免作业无法正常运行。调试 您可以在OpenAPI Explorer中直接运行该接口，...
常见问题
A：由于 batchcompute 启动的渲染节点是无公网 IP 的虚拟机，所以对于需要连接lisence server 的渲染软件，可以直接将 lisence server 做在镜像里，这样每个计算节点都会有一个 lisence server。Q：我想一个阿里云账号部署多个渲管怎么办？...
DeleteNodes-批量删除计算节点
调用DeleteNodes删除指定集群中一个或多个计算节点。接口说明 删除节点前，建议您导出节点上所有作业数据，以免因为删除节点而导致数据丢失。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...
运维管理
Workbench 的运维功能 支持可视化地为 Linux实例上的 Java应用新增运维任务，例如 新增 Java堆分析、线程栈分析或性能分析任务。本文为您介绍Linux实例运维功能的具体操作和查看任务分析结果的具体方法。前提条件 ECS实例必须为Linux实例，...
GetAutoScaleConfig-获取自动伸缩配置信息
可能值：1~100 如果作业负载需要新增 10 个计算节点，GrowRatio 配置为 50，那么会进行多轮扩容，每轮扩容当前所需的 50%。100 ClusterId string 集群 ID。ehpc-hz-FYUr32*Uid string 阿里云账号 ID。129845258050*Queues object[]集群队列...
SetAutoScaleConfig-设置自动伸缩配置信息
默认值：NoSpot 支持同时设置 N 个队列的名称，N 的取值范围：1~8 队列自动扩容时支持同时为队列中 N 个节点设置计算节点竞价策略，N 的取值范围：0~500 SpotWithPriceLimit SpotDuration integer 否 抢占式实例的保护期，单位为小时。...
手动扩容集群
E-HPC集群支持手动扩容，当业务发展导致集群计算节点的资源不足时，您可以根据实际需求扩容集群，添加计算节点。前提条件 扩容节点所在地域有可用交换机，关于如何创建交换机，请参见 创建交换机。扩容节点所在地域有足够的ECS实例配额，...
- 产品推荐
- 这些文档可能帮助您