静态脱敏
静态脱敏操作指引 步骤一：安装算法包 在资产安全模块，为需使用脱敏算法的项目安装算法包，可以对项目内的安全策略进行统一的配置。配置详情请参见 项目安全策略。步骤二：查看脱敏算法说明 脱敏算法运用哈希脱敏、遮盖掩码等方式对敏感...
静态脱敏
静态脱敏操作指引 步骤一：安装算法包 在资产安全模块，为需使用脱敏算法的项目安装算法包，可以对项目内的安全策略进行统一的配置。配置详情请参见 项目安全策略。步骤二：查看脱敏算法说明 脱敏算法运用哈希脱敏、遮盖掩码等方式对敏感...
算法输出定义
算法输出定义信息配置了算法的输出、算法结构化数据的属性等信息。算法输出定义参数说明 参数 说明 objType 算法支持的视频数据分析能力，取值范围：person:行人、bicycle:非机动车、vehicle:机动车 dbTableName 算法输出结构化数据的数据...
安全算法
安全策略算法包：使用Dataphin内置的算法包进行脱敏或加解密，需要任务执行所在的项目开启安全策略并成功安装算法包后才能使用，否则会按照配置的默认脱敏策略进行脱敏。对应函数/算法 需在任务执行所在项目安装安全脱敏策略算法后方可使用...
安全算法
安全策略算法包：使用Dataphin内置的算法包进行脱敏或加解密，需要任务执行所在的项目开启安全策略并成功安装算法包后才能使用，否则会按照配置的默认脱敏策略进行脱敏。对应函数/算法 需在任务执行所在项目安装安全脱敏策略算法后方可使用...
同步接口API详情
聚类、分类等对称任务可以不用特殊指定，采用系统默认值"document"即可 响应参数 字段 类型 描述 示例值 output.embeddings Array 本次请求的算法输出内容，是一个由结构组成的数组，每一个数组中包含一个对应的输入 text 的算法输出内容。...
同步接口API详情
聚类、分类等对称任务可以不用特殊指定，采用系统默认值"document"即可 响应参数 字段 类型 描述 示例值 output.embeddings Array 本次请求的算法输出内容，是一个由结构组成的数组，每一个数组中包含一个对应的输入 text 的算法输出内容。...
名词解释
算法能力集（Capability）算法输出结构化数据的能力，如行人、非机动车等。资源配置参数（ResourceProfile）资源配置参数指定了计算工作组运行依赖的各项系统默认配置参数。视频流（Stream）视频点位输出到计算工作组的视频数据，一个视频...
SSL证书安装指南
或者您不熟悉服务器配置操作，请联系产品技术专家进行咨询，详情请参见 专家一对一服务 Web服务器类型 证书安装方法 Nginx、Tengine Nginx或Tengine服务器配置SSL证书、在Tengine服务器安装RSA和SM2双算法证书 Spring Boot 在Spring Boot...
票据凭证识别
基于达摩院强大的深度学习算法和结构化模板优化技术，确保各字段精度均处于业界领先水平，其中各类票据的发票代码、价税合计、合计金额、购买方识别号、开票日期等关键字段结构化识别输出，识别准确率超过99%。网约车行程单识别 读光OCR网...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
非结构化分析
功能说明 向量分析实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。AnalyticDB PostgreSQL版 向量检索分析基于MPP查询架构构建，帮助用户实现基于SQL...
行业算法版表结构
应用结构 数据推送到行业算法版后会先保存到离线数据表中，在此阶段，为了方便用户推送数据，数据表允许用户根据实际业务场景定义多个表（需要指定关联字段），并提供了数据处理的插件。数据处理完毕后会join成一张索引表，这种索引表主要...
通用行业模板配置
创建应用 步骤：创建并购买应用 配置应用：定义应用结构->定义索引结构->配置数据源->创建成功 搜索测试 使用搜索算法中心和扩展功能（如：查询分析、排序配置等等）首先通过控制台进入后，选择对应的区域，创建的实例类型最后单击 创建...
文档更新动态（2022年）
同时支持资产安全策略的自动安装，并可以查看算法安装日志，精确掌握安装状态。自定义掩码算法优化，新增自定义替换值的脱敏算法、自定义正则表达式的脱敏算法。更新说明 项目安全策略 脱敏算法 2022年07月19日 资产质量新增全局角色定义 ...
时序异常检测
算法中数据结构的空间复杂度。参数值越大算法在运行过程中越占用内存，但是算法结果越准确。lenHistoryWindow INTEGER 正整数，默认值为null，取值≥20。算法参考的时间窗口长度。如果时间窗口长度比较短，计算过程中只会将最近的数据点...
非结构化数据向量检索
您可以通过AI算法提取非结构化数据的特征，并利用特征向量唯一标识非结构化数据。这些向量数据可以被Lindorm高性能地存储和检索。同时，Lindorm也支持向量数据与标量数据的混合检索。背景信息 非结构化数据向量检索适用于以图搜图、声纹...
ack-ai-dev-console
安装后，算法工程师和数据科学家可通过简单的Web界面完成训练任务快速提交、任务生命周期管理等操作。本文介绍ack-ai-dev-console组件的基础信息、使用说明和变更记录。组件介绍 安装配置ack-ai-dev-console组件后，您可以使用云原生AI套件...
云端服务调用说明
params String 否 节点算法参数 响应结果如下：{"code":"200","data":"JSON字符串","success":true,"message":"success"} 其中，data字段数据结构为算法的返回结果。异步调用 请求参数与同步调用相同，参见 表2。响应结果如下：{"code":...
组件参考：所有组件汇总
XGBoost训练 该组件算法在Boosting算法的基础上进行了扩展和升级，具有较好的易用性和鲁棒性，被广泛用在各种机器学习生产系统和竞赛领域。当前支持分类和回归。XGBoost预测 该组件算法在Boosting算法的基础上进行了扩展和升级，具有较好的...
SearchTemplate-搜索自定义转码模板
可选的抖动算法为 sierra 算法和 bayer 算法。sierra Loop string 循环次数。0 IsCustomPalette string 自定义调色板功能。false Segment object 切片配置。Duration string 分片时长。单位：秒。10 Name string 模板名称。MPS-example ...
UpdateTemplate-更新自定义转码模版
抖动算法可选值为 sierra 算法和 bayer 算法。bayer Loop string 循环次数。0 IsCustomPalette string 自定义调色板功能。0 Segment object 切片配置。Duration string 分片时长。单位：秒（s）。10 Name string 模板名称。MPS-example ...
向量检索
背景信息 功能介绍 您可以通过AI算法提取非结构化数据的特征进行数据编码，形成一个特征向量，将特征向量存储在 AnalyticDB MySQL 中。使用特征向量标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。AnalyticDB MySQL ...
常见问题
而搜索增强则是一站式智能搜索PaaS服务，集成了query分析能力，多模型结构的预训练向量表示能力，混合召回和多因子排序能力（文本匹配、深度语义匹配）等AI算法模型，致力于提升搜索效果，让搜索结果更为准确和相关。配置常见问题 ...
内存管理
系统提供的Buddy算法是通过32 bit的位图结构来挂载对应的空闲链表，bit n代表内存块对应的type，其下面挂载了长度范围(2^(n-1+off)~2^(n+off)-1)的空闲块，其中off值主要是考虑利用了原本较小长度块的低bit。内存申请时，优先从对应type的...
什么是AI通信加速库Deepnccl
Deepnccl是为阿里云神龙异构产品开发的一种用于多GPU互联的AI通信加速库，在AI分布式训练或多卡推理任务中用于提升通信效率。本文主要介绍Deepnccl的架构、优化原理和性能说明。产品简介 Deepnccl基于NCCL...相关文档 安装并使用Deepnccl
无锁结构变更方案对比
Y N 变更策略设置（DDL算法识别）Y N RocksDB引擎 Y N ToKuDB引擎 Y N InnoDB引擎 Y Y 虚拟列变更 Y N Json列变更 Y Y 多值索引和函数索引 Y-优化表空间（Optimize）Y N 表副本延迟删除 Y N 安装部署 Y：免安装 Y：本地安装 白屏化运维 Y N...
Dataphin中重装项目安全策略是否会影响...规则、脱敏算法
概述 本文主要介绍Dataphin中重装资产...重装过程中，会清理掉内置的脱敏算法，再重新安装最新版本的算法，这个过程中，会短暂的影响脱敏算法的使用，大概持续2分钟左右；重装完毕，即可正常使用。相关文档 项目安全策略 适用于 Dataphin3.7
什么是Deepytorch Training（训练加速）
针对PCIe互连拓扑的通信优化，可以采用基于流水线的PS（Parameters Server：参数服务器）模式梯度规约算法CPU-Reduce来降低通信耗时，该算法按照GPU到CPU再到GPU的顺序构建流水线，将梯度规约的计算分散到多个设备上运行，来减少通信瓶颈。...
MaxCompute（原ODPS）数据源配置
开放数据处理服务MaxCompute（原ODPS）是一个开放的计算平台，如果您要导入到OpenSearch-行业算法版的数据是由MaxCompute平台计算而产生的，则可以在应用中配置MaxCompute源信息，在触发应用索引重建任务后，系统会自动去获取 MaxCompute ...
历史版本下载
安装包优化，简化安装步骤：Linux和macOS上安装脚本优化，运行时不需要加任何额外参数，脚本运行时会交互式确认安装路径，同时支持自定义路径，安装结束后自动配置环境变量，Windows重复安装会有提醒。伴随MILP功能上线多个接口，请查看...
使用向量检索插件（aliyun-knn）
算法说明 在算法上，目前向量检索引擎已经支持了hnsw算法以及linear算法，适用于单机数据量小（全内存）的业务场景。两种算法性能对比如下。表 1.hnsw算法和linear算法性能对比 表格中为阿里云Elasticsearch 6.7.0版本环境实测数据，测试...
使用 mPaaS 插件
通常在上传到发布平台之前，用来验证加密算法是否正确。打包 mPaaS mPaaS 插件提供一键打包功能，输入 bundleID、bundle version、签名参数等信息，可生成一个.ipa 的安装包，使用 mPaaS 发布管理 进行 App 的升级，提醒用户安装新版本。...
机器学习开发示例
依赖库导入 当使用pyspark进行开发时候，依赖的库可以通过ddi库能力导入，具体见：Python库管理 这里示例导入matplotlib库，并做展示——先 download下官方库安装包，在库功能下进行.whl文件的上传，在需要使用库的集群里进行安装 2....
底纹Demo
如果您使用的是RAM用户的AccessKey，请确保主账号已授权AliyunServiceRoleForOpenSearch服务关联角色，请参考 OpenSearch-行业算法版服务关联角色，相关文档参考 访问鉴权规则。请不要将AccessKey ID和AccessKey Secret保存到工程代码里，...
搜索Demo
如果您使用的是RAM用户的AccessKey，请确保主账号已授权AliyunServiceRoleForOpenSearch服务关联角色，请参考 OpenSearch-行业算法版服务关联角色，相关文档参考 访问鉴权规则。请不要将AccessKey ID和AccessKey Secret保存到工程代码里，...
热搜Demo
如果您使用的是RAM用户的AccessKey，请确保主账号已授权AliyunServiceRoleForOpenSearch服务关联角色，请参考 OpenSearch-行业算法版服务关联角色，相关文档参考 访问鉴权规则。请不要将AccessKey ID和AccessKey Secret保存到工程代码里，...
通过Lindorm Shell访问宽表引擎
describe：展示指定表的详细信息，包括表属性、表结构等。alter：修改表。exists：用于验证表是否存在。drop：删除指定表。数据操作语言 put：用于更新特定单元格中的值。get：用于获取指定行或单元格的内容。delete：用于删除表中单元格的...
下拉提示Demo
如果您使用的是RAM用户的AccessKey，请确保主账号已授权AliyunServiceRoleForOpenSearch服务关联角色，请参考 OpenSearch-行业算法版服务关联角色，相关文档参考 访问鉴权规则。请不要将AccessKey ID和AccessKey Secret保存到工程代码里，...
- 产品推荐
- 这些文档可能帮助您