产品架构
互联网应用架构 互联网应用架构包括数据库分层架构和分布式结构化数据存储架构，主要用于电商订单、直播弹幕、网盘中文件元数据、社交网络中即时通讯等场景。数据库分层架构 在数据库分层架构中，使用 Tablestore 配合MySQL来完成应用系统...
PAI-TF数据转换方法
示例：将一个batch以Key/Value形式 Index:Value 存储的STRING转换成为一个稀疏矩阵。输入：[“1:0.1,2:0.2,4:0.4,10:1.0”,“0:0.22,3:0.33,9:0.99”,“2:0.24,7:0.84,8:0.96”]需求：列宽设置为20，生成稀疏矩阵Tensor。代码：outsparse=...
使用ALS算法实现音乐评分预测（旧版）
ALS算法 交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年06月07日 存储价格 存储类型 中国内地 中国香港及海外 按...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...
奇异值分解
如果是稀疏矩阵，支持STRING类型。如果是表，支持INT和DOUBLE类型。默认选择所有列。inputTablePartitions 否 输入表中指定参与分析的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2，。如果指定多...
如何开启存储压缩功能
存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以通过 5.6/5.7/8.0内核版本 来确认...
如何开启存储压缩功能
存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以通过 5.6/5.7/8.0内核版本 来确认...
ALS评分
交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，也称为...
ALS矩阵分解
交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，也称为...
PS线性回归
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 配置为半角冒号（:）。kv对间的分隔符 使用空格作为分隔符，留空即可。单击画布中的运行按钮，运行工作流。工作流运行成功后，右键单击 预测-1 组件，在快捷菜单中，选择 查看数据>预测...
K均值聚类
建议将稀疏矩阵的列从0或1开始，重新编号。如果模型规模 col*centerCount>27,0000,000，则只能通过命令行的方式，去除 modelName 参数，再重新执行聚类。如果输入表的列名存在SQL关键字，则系统报错 FAILED:Failed Task createCenterTable:...
预测
稀疏矩阵 使用KV格式表示稀疏数据。key与value分隔符 默认为英文冒号（:）。kv对间的分隔符 默认为英文逗号（,）。执行调优 核心数 与参数 每个核的内存大小 搭配使用，取值范围为正整数。每个核的内存大小 与参数 核心数 搭配使用，单位为...
正排索引特性
单值正排和多值正排(offset)等值压缩 可以在schema配置中，将单值正排字段或者多值正排字段配置为等值压缩索引个数，引擎会将N个(2^n)连续文档的单值value（或者多值offset）进行等值压缩存储，即N个文档全相同则只存储一份，如果N个文档...
正排索引特性
单值正排和多值正排(offset)等值压缩 可以在schema配置中，将单值正排字段或者多值正排字段配置为等值压缩索引个数，引擎会将N个(2^n)连续文档的单值value（或者多值offset）进行等值压缩存储，即N个文档全相同则只存储一份，如果N个文档...
持续架构优化
在云环境中，各类暂态数据、结构化和非结构化持久数据都可以采用云来保存，从而依靠“云”天生的计算存储分离架构进行实现。拥抱Serverless 拥抱Serverless是架构优化的方向，是面向下一代的应用架构。服务化、模块化、可编排和可组装的...
事务引擎介绍
数据压缩 HybridDB for MySQL事务引擎支持多种数据压缩算法，通过对数据块的压缩存储，大大节约了存储空间和I/O的开销，实测的压缩效果可以达到5倍。管理功能 HybridDB for MySQL事务引擎的管理功能包括备份、恢复、监控、报警、用户管理，...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
混淆矩阵
在精度评价中，混淆矩阵主要用于比较分类结果和实际测量值，可以将分类结果的精度显示在一个矩阵中。本文为您介绍混淆矩阵组件的配置方法。使用限制 支持的计算引擎为MaxCompute。组件配置 您可以使用以下任意一种方式，配置混淆矩阵组件...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
PS-SMART多分类
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 输入半角冒号（:）。kv对间的分隔符 使用空格作为分隔符，留空即可。单击 写数据表-1 组件，在右侧 表选择 页签中，配置 写入表表名 为smart_multiclass_output。单击画布中的运行按钮，...
PS-SMART回归
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 配置为半角冒号（:）。kv对间的分隔符 配置为空格。在画布中单击 写数据表-1 组件，在右侧 表选择 页签，配置 写入表表名 为smart_regression_output。参数配置完成后，单击运行按钮，...
阿里云存储服务
其存储类型分为标准存储、低频访问存储、归档存储、冷归档存储、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。就价格而言，数据越冷，存储成本越低，需要时的访问成本越高。您可以轻松地在这些存储类型之间转换以优化存储...
成本
AnalyticDB PostgreSQL版 采用计算节点本地存储的模式，支持行式存储和列式存储，支持非易失存储、固态硬盘、机械硬盘等多种存储介质，支持单节点最大10TB存储空间。在此基础之上，AnalyticDB PostgreSQL版 进一步提供了存储压缩能力、OSS...
评估合适的云服务
充分了解自身业务特征及指标，熟悉架构主要组件所涉及云产品方案类型，有利于业务和工作负载在不同的产品方案中受益，并使系统架构得以持续优化。数据库的选型是一项专业性很强的工作，通常除了性能外还有很多考虑方面，此处不进行展开阐述...
索引表配置
FLOAT/DOUBLE浮点型单值attribute也支持等值压缩配置 其他压缩方式：当字段类型为定长多值的float类型字段时，除了uniq|equal外，还可以额外选定如下fp16/block_fp/int8#[absMax]三种有损精度的编码压缩方式中的一种，进行编码压缩存储。...
索引表配置
FLOAT/DOUBLE浮点型单值attribute也支持等值压缩配置 其他压缩方式：当字段类型为定长多值的float类型字段时，除了uniq|equal外，还可以额外选定如下fp16/block_fp/int8#[absMax]三种有损精度的编码压缩方式中的一种，进行编码压缩存储。...
克隆集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
克隆集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
Transaction Table2.0概述
增全量数据存储和处理一体化架构 上图所示即为MaxCompute高效支持上述综合业务场景的全新架构，支持丰富的数据源方便地通过定制开发的接入工具实现增量和离线批量数据导入到统一的存储中，由后台数据管理服务自动优化编排数据存储结构，...
恢复已释放的集群
PSL4：PolarDB全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
恢复已释放的集群
PSL4：PolarDB全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
SOFARPC 使用 SOFARegistry
主要存储的信息包括：服务提供方的地址信息 服务消费方的订阅信息 主要工作机制为：和服务消费方、服务提供方都建立长连接。动态感知服务发布地址变更并通知消费方。SOFARPC 在采用软负载路由策略时，需要使用 SOFARegistry（服务注册中心...
恢复已释放的集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
全量恢复方式1：从备份集恢复
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
全量恢复方式2：恢复到过去时间点
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
数据库备份到OSS
背景 对象存储OSS 对象存储OSS 提供了标准类型存储，作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也提供了成本更低、存储期限更长的低频访问类型存储和归档类型存储，作为不经常访问数据的备份和归档。对象存储OSS非常...
升级步骤
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
- 产品推荐
- 这些文档可能帮助您