典型应用
海量数据实时多维查询 在数亿至数百亿记录规模大宽表，数百以上维度自由查询，响应时间通常在100毫秒以内。让业务人员能持续探索式查询分析，无需中断分析思路，便于深挖业务价值，具有非常好的查询体验。用户画像分析 随着数据时代的发展...
基本介绍
目前，云原生多模数据库Lindorm是阿里集团最基础存储设施之一，在多年的阿里巴巴双十一全球狂欢节上提供优秀的大数据在线存储能力，支撑了数百PB规模的存储和其每秒数亿次的峰值访问、每日数十万亿次的海量吞吐。相比HBase开源版，云数据库...
什么是人工智能平台PAI
业内领先的AI优化：高性能的训练框架，稀疏训练场景，支持数十亿到数百亿的稀疏特征规模，数百 亿到数千亿的样本规模，上千worker的分布式增量训练。主流框架模型加速，使用PAI Blade提升RestNet50、Transformer+LM等十数个主流模型加速比...
什么是交通云控平台
算法能力开放 交通云控平台在数百亿节点数万亿边的超大规模网络上，处理EB级别数据，通过模糊认知反演算法，发现复杂场景背后的超时、超距弱关联。同时，平台将算法以引擎（如智能优化、仿真推演、深度分析等引擎）的方式对外提供。业务...
哈啰出行
哈啰出行通过把日志数据迁移到日志服务，替代原有的Kafka、ES、ClickHouse，累积节省...在分析方面，日志服务支持以SQL 92语法分析日志，秒级分析数百亿条日志。SQL语法支持200多种函数，以及支持join计算，可与OSS、MySQL数据源做关联分析。
如何选择合适的文件系统？
最大文件数 10亿 10亿 10亿 10亿 10亿 10亿 5亿 5亿 CPFS 2.3.0以前版本：单个文件系统上限为14亿。CPFS 2.3.0及以后版本：单个文件系统上限为40亿。100亿 性能 平均单路4k读延迟 10 ms 10 ms 2 ms 2 ms 2 ms 2 ms 1.2 ms 0.3 ms 0.6 ms 0....
淘宝万亿级交易订单背后的存储引擎
每次交易会涉及到会员信息验证、商品库信息查询、订单创建、库存扣减、优惠扣减、订单支付、物流信息更新和确认支付等，每个环节都涉及到数据库记录创建和状态更新，整个流程可能涉及到数百次...，整个数据库集群每天会执行数百亿次事务读写...
多元索引限制
行数 1000亿 如果业务需求超过限制，请 提交工单 联系我们。总大小 100 TB 如果业务需求超过限制，请 提交工单 联系我们。其他限制 目前多元索引功能开放的地域包括华东1（杭州）、华东1 金融云、华东2（上海）、华北1（青岛）、华北2...
亿海蓝-航运大数据的可视化案例
方案亮点：千亿级船舶轨迹时空分析、多元时空数据整合、开发周期短。客户感言“阿里Ganos产品很好地提升了我们对异构时空数据的处理能力。Lindorm高性能、低延迟、高吞吐、稳定性让我们节省了不少运维投入，更多精力投入到业务实现上。——...
资源包选购
业务资源消耗预估：资源项 预估资源消耗 下行流量 网站的日峰值带宽：约1 Gbps 下行流量：3.16 TB/日、95 TB/月、570 TB/半年、1140 TB/年 静态HTTPS请求数 日峰值QPS：约3000 请求数：约7800万次/日、约23.3亿次/月、279.6亿次/年 OSS存储...
资源包选购
业务资源消耗预估：资源项 预估资源消耗 下行流量 网站的日峰值带宽：约1 Gbps 下行流量：3.16 TB/日、95 TB/月、570 TB/半年、1140 TB/年 静态HTTPS请求数 日峰值QPS：约3000 请求数：约7800万次/日、约23.3亿次/月、279.6亿次/年 OSS存储...
参考：Proxima CE全量参数说明
系统根据 doc_table 数据量和 data_type 计算得出，如果总query数小于1亿，则每行分配200万query；如果总 query 数大于1亿，则每行分配1000万query。手动配置：一般来根据上述方法计算配置，可以根据集群资源适当增多或减少。column_num 和...
约束与限制
每个数据库中的表数 最多42亿个。每个视图中的列数 最多1664列。列、表、数据库名称的长度 最多128个字符。对象名称的长度（包括数据库、用户、基表、视图、索引、存储过程、UDF、UDT、约束或列名）最大63个字符。每个主索引和二级索引的列...
场景化建表调优指南
不将 l_shipmode 设为Clustering Key和Bitmap_columns：读取数据行数6.0亿行（全表扫描），查询时长 2.41s。说明 可以通过慢Query日志查看读取数据行数（read_rows），详情请参见 慢Query日志查看与分析。可以通过执行计划验证是否通过...
如何发起MQTT亿级连接和千万消息吞吐性能测试
阿里云性能测试PTS允许单个线程发起并保持最多100个，单台施压机最大5万个，单次压测最大1亿个MQTT连接数。使用PTS可以帮助您轻松发起千万至亿级的MQTT连接，节省大量时间成本和机器成本。使用PTS实现MQTT压测 步骤一：创建压测场景 登录 ...
新浪微博
截止2019年6月，新浪微博月活跃用户数高达4.86亿，平均日活跃用户数为2.11亿。业务的急速增长对微博的原有技术体系造成了极大的冲击，例如：流量激增：一些业务场景例如元旦、春晚、红包飞给微博带来巨大的流量挑战，这些业务场景的主要...
新浪微博
截止2019年6月，新浪微博月活跃用户数高达4.86亿，平均日活跃用户数为2.11亿。业务的急速增长对微博的原有技术体系造成了极大的冲击，例如：流量激增：一些业务场景例如元旦、春晚、红包飞给微博带来巨大的流量挑战，这些业务场景的主要...
向量计算实例规格推荐
向量维度 向量数据行数 建议最小实例规格 128 小于2亿 32Core 2亿~4亿 64Core 大于4亿 128Core起 256 小于6000万 32Core 6000万~12000万 64Core 大于12000万 128Core起 512 小于3000万 32Core 3000万~6400万 64Core 大于6400万 128Core起 ...
机器翻译专业版定价
39000 十五亿字符资源包 54000 二十亿字符资源包 66000 计费方式 字符数按照需要翻译的源语言文本的字符长度为标准计算。其中，标点、空格、html标签均会计入字符。一个汉字，英文字母，标点符号等，均按照一个字符计费。举例：语言 源语言...
机器翻译通用版定价
32500 十五亿字符资源包 45000 二十亿字符资源包 55000 计费方式 字符数按照需要翻译的源语言文本的字符长度为标准计算。其中，标点、空格、html标签均会计入字符。一个汉字，英文字母，标点符号等，均按照一个字符计费。举例：语言 源语言...
语种识别定价
举例：语言 源语言文本内容 字符数 中文 今天的天气挺好！8 扣费方式 扣费顺序 扣费顺序依次为：1）每月100万字符免费翻译额度 2）资源包 3）后付费 资源包可叠加 相同类型的资源包可叠加，有效期较短的资源包优先抵扣。资源包不互通 不同...
产品规格
SMB 文件数上限（建议值）5000万 1亿 5亿 10亿 共享文件系统容量上限（建议值）128 TB 256 TB 512 TB 1 PB 文件共享数量上限 NFS：4，SMB：4 NFS：8，SMB：8 NFS：15，SMB：15 NFS：15，SMB：15 最大可挂载客户端数 NFS：1024，SMB：1024 ...
使用限制
消息保存条数 一个消费组最多可堆积1亿条消息。消息保存时长 1天。实时消息推送限流 一个连接限流1,000 TPS。您可通过增加连接数扩容，连接数最大为128个。堆积消息推送限流 一个消费组限流200 TPS。说明 为避免大量消息堆积，请确保消费...
DDL物理复制优化
并行DDL 的 innodb_polar_use_sample_sort 和 innodb_polar_use_parallel_bulk_load 参数关闭的情况下，测试 innodb_bulk_load_page_grained_redo_enable 参数开启或关闭后，在包含10亿数据量的表中使用不同并行线程数（1、2、4、8、16和32...
集群资源规格评估
集群规格 集群吞吐量 每小时处理消息数 保证每个Partion吞吐量1MB/s，能够支持Partion数 4 Broker 400 MB/s 14.7亿条 400个 8 Broker 800 MB/s 29.5亿条 800个 12 Broker 1200 MB/s 44.2亿条 1200个 16 Broker 1600 MB/s 59亿条 1600个 20 ...
集群资源规格评估建议
集群规格 集群吞吐量 每小时处理消息数 保证每个Partion吞吐量1MB/s，能够支持Partion数 4Broker 400MB/s 14.7亿条 400个 8Broker 800MB/s 29.5亿条 800个 12Broker 1200MB/s 44.2亿条 1200个 16Broker 1600MB/s 59亿条 1600个 20Broker ...
离线UV计算
明细表每天几亿的增量，在聚合结果表每天只需存放百万级数据。插入数据至聚合结果表命令如下。WITH aggregation_src AS(SELECT country,prov,city,uid_int32 FROM ods_app INNER JOIN uid_mapping ON ods_app.uid=uid_mapping.uid WHERE ...
常见问题
创建索引时设置shard个数和replica个数 创建索引时设置shard个数和replica个数需要满足以下规则：单个shard的最大document条数不能超过int的最大值，大概21亿。否则就会因lucene底层循环复用int值而导致覆盖。对于replicationFactor副本数...
计费方式
350 Mbps数据库流量峰值 6亿条在线SQL语句存储 默认1.5 TB存储空间 实例数与存储支持弹性扩容 12,000元/月 16,000元/月 企业版25实例 支持审计的数据库个数：25个 吞吐量峰值：35,000条SQL/秒 650 Mbps数据库流量峰值 8亿条在线SQL语句存储...
监控项与系统事件
Failed Critical Exception LongTransaction 长事务数大于等于5 Failed Critical Exception MasterCpuHigh Master节点CPU水位超过90%Failed Critical Exception ...NonSuperConnection 实例连接数超过80%Failed Critical Exception XidAgeHigh xid age超过4亿...
连接数管理
具体涉及的操作内容如下所示：查询实例的默认最大连接数：不同的实例规格对应不同的默认连接数，通过命令查询当前实例规格的最大连接数。HoloWeb可视化管理连接：通过HoloWeb可视化查看活跃连接，并进行管理如Kill等操作。通过SQL查询连接...
数组函数
Hologres从 V1.1.46版本开始支持text类型数组，且text数组将会被转为int8数组进行排序，返回排序后的text数组。Hologres从 V1.3.18版本开始支持int4、int8、float4、float8、boolean类型数组，且对text类型数组按字典序排序。array_sort...
什么是数知地球 AI Earth
数知地球 AI Earth（Analytical Insight of Earth）依托于阿里巴巴达摩院在深度学习、计算机视觉和地理空间分析方向上的技术积累，实现对多源遥感空间数据的智能计算与融合分析，为自然资源、水利水务、生态环保、智慧农业等多个领域提供...
基本概念
Hologres是一款高性能的、计算存储分离的分布式一站式实时数仓引擎，数据存储在位于底层存储系统的数据分片（又称Shard）上。本文为您介绍Hologres中Table Group和Shard Count的概念。Table Group和Shard 在Hologres中数据存储在Pangu系统...
函数功能发布记录
HQE MAX_BY与MIN_BY 1.3.19 数组函数 array_max array_min array_contains array_except array_distinct array_union 新增函数 新增部分数组函数 HQE 数组函数 1.3.18 数组函数 array_sort 功能优化 array_sort函数支持更多类型数组。...
Hologres管控台的监控指标
实例连接数 实例连接数包括实例的使用连接数（个）和FE节点连接数最高使用率（%），其中：实例连接数（个）：代表实例中已经使用的总SQL连接数，包括active、idle等各种状态的JDBC/PSQL等连接。FE节点连接数最高使用率（%）：代表使用率...
Table Group与Shard Count操作指南
单个Table Group的Shard数上限=单个Table Group默认Shard数*2 实例总的Shard数上限=单个Table Group默认Shard数*8 如需调整单Table Group的Shard数上限和实例总Shard数上限，需要使用如下GUC参数取消Shard数上限，但是不建议使用，否则可能...
新用户免费试用
新用户试用教程推荐 试用教程推荐 示例场景 涉及产品 操作难度 数仓加速查询 了解搭建离线数仓的思路，学习离线数仓中Hologres的加速查询功能和大屏展示效果。Hologres MaxCompute（可选）DataV PAI+Hologres基于大模型搭建企业级知识库 ...
HTTPS加速网关计费说明
如果默认包含的网关资源计算数耗尽或您额外购买的网关资源计算数服务到期，请您及时购买网关资源计算数GRCQ扩展资源包。具体操作，请参见 购买网关资源计算数。重要 网关资源计算数服务扩展资源包有效期默认为1年。续费说明 续费方式 描述...
试用实例应用到生产环境指南
Hologres 8Core规格实例的默认Shard数为2，实例升配后，默认Shard数不变，但计算节点（Worker）数量增加，无法发挥分布式系统的查询性能优势。因此在您完成实例升配后，请按照以下步骤修改Shard数，更多相关操作请参见 Table Group与Shard ...
- 产品推荐
- 这些文档可能帮助您