深度解析Lindorm搜索索引（SearchIndex）特性
有了这些功能，可以很容易的将Lindorm应用到多样化的业务场景中，经典的使用场景主要有以下几个：订单详情，例如物流订单、交易账单，支持订单的多维查询、排序等。标签画像，例如基于商家对买家进行标签圈选，定向投递信息。文本搜索：...
产品概述
PolarDB-X 1.0 的稳定性建立在合理使用久经考验的MySQL的基础上，单机MySQL在高并发、大量数据存储和复杂计算场景下，呈现出相对弱势的状态。PolarDB-X 1.0 将数据拆分到多个MySQL存储，使每个MySQL承担合适的并发、数据存储和计算负载，...
冷数据归档
在Lindorm时序引擎中，随着时间的不断推移，数据呈现出很明显的冷温热分层。其相应的概念如下：热数据 最近写入的时序数据。这些时序数据的时间戳往往距离当前很近，在时序应用的场景中会被频繁查询。温数据 已写入一段时间的数据。这些...
概述
随着业务发展，企业数据呈现出规模化、爆炸式的增长，业务应用要求实时、在线的快速处理。对于数据库运维人员来说，保护企业核心数据的任务越来越具有挑战性，例如数据误删除、相关系统漏洞和勒索病毒、硬件故障，甚至自然灾害都可能造成...
冷热分层
本文介绍冷数据的特点和适应场景，通过表格存储Tablestore和Delta Lake结合示例，演示数据的冷热分层。冷热分层可以充分利用计算和存储资源，以低成本承载更优质服务。背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和...
X-Engine简介
流水线事务处理机制，把事务处理的几个阶段并行起来，极大提升了吞吐。访问频度低的数据逐渐淘汰或是合并到持久化的存储层次中，并结合多层次的存储设备（NVM/SSD/HDD）进行存储。对性能影响比较大的Compaction过程做了大量优化：拆分数据...
ActionTrail日志清洗
DLA提供ActionTrail日志自动清洗解决方案，可以将ActionTrail投递到OSS的日志文件转换为DLA中可以直接查询的数据表，同时自动对数据进行分区和压缩，方便您分析和审计对云产品的操作日志。日志分析痛点 ActionTrail是阿里云提供的云账号...
MongoDB 5.0新特性概览
将重新分片花费的时间从几周或几个月压缩到几分钟或几小时，避免了冗长繁杂的手动数据迁移。通过使用在线重新分片，可以方便地在开发或测试环境中评估不同分片键的效果，也可以在您需要时修改分片键。您可以在业务运行（数据不断增长）的...
RDS术语
应急实例 数据库备份DBS提供的应急恢复功能，将自动获取备份集并合成快照点，可按需在几十秒内生产出RDS应急实例（DBS沙箱实例）。更多信息，请参见 应急恢复。Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库...
RDS术语
应急实例 数据库备份DBS提供的应急恢复功能，将自动获取备份集并合成快照点，可按需在几十秒内生产出RDS应急实例（DBS沙箱实例）。更多信息，请参见 应急恢复。Z 只读实例 只读实例满足大量的数据库读取需求，读取能力弹性扩展，分担数据库...
MongoDB 6.0新特性概览
本文介绍云数据库MongoDB 6.0版本推出的新特性和优化项。速览 本文从以下方面介绍云数据库MongoDB 6.0版本：新特性 可查询加密（Queryable Encryption）集群同步（Cluster-to-Cluster Sync）优化项 时序集合（Time Series Collection）变更...
离线同步常见问题
脏数据限制设置为多少就是不允许有多少条脏数据，若限制为0即在发现第一条脏数据时就会停止任务，此时有可能已经传几条数据了，或者没有传输数据（脏数据在所有数据中位于第一条时）。如何排查离线同步任务运行时间长的问题？可能原因1：...
技术发展趋势
近些年来，数据在国民经济各个领域扮演着愈发重要的作用，其使用特点较之以往也发生了诸多变化，其趋势主要有几个方面。规模爆炸性增长 随着8K、5G、IoT、大数据、AI等系列技术的发展，数据量迎来了爆发式增长。IDC在《Data Age 2025》的...
大数据安全治理的难点
通常，大数据系统中的工作流涉及多部门、多责任人且跨系统的数据，如何才能协调好这些业务系统准时、保质保量地产出数据，避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据，关乎到企业数据业务的连续性问题甚至高层的信任问题...
JindoFS块存储模式
容易 容易 容易 缩容操作 容易 容易 需Decommission 容易 数据本地化 无 弱 强 较强 JindoFS块存储模式具有以下几个特点：海量弹性的存储空间，基于OSS作为存储后端，存储不受限于本地集群，而且本地集群能够自由弹性伸缩。能够利用本地...
使用DataWorks数据服务生成API
本文为您介绍如何通过DataWorks的数据服务，生成并发布数据API，用于在DataV中进行调用并展示。前提条件 在开始本案例前，您需要首先完成 准备工作。背景信息 注意 按照本文档操作后，可以获取到您数据API的AppCode、AppKey和AppSecret，请...
BI分析模式数据面板功能介绍
配置分箱样式 配置字段数据后，如果字段内数值量大，您可以单击字段右侧的 图标，在弹出的字段样式菜单栏中，选择 开启分箱，并设置分箱间隔的具体值，把细节的数值归并到几个间隔范围里；选择 无分箱 即可恢复原始细节数值的样式。图 1....
多主集群（库表）商业化
汇聚库场景：更加低成本且方便的汇聚多个写入节点的数据 场景特点：传统的集群架构下，需要有多个独立的支持业务OLTP读写请求的前端集群，然后再有一套用来汇聚所有数据的集群，汇聚库和前端集群通过DTS等数据同步工具定期同步数据。...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
多主集群（库表）概述
分服游戏场景：更好的性能和扩展能力，灵活扩缩容 场景特点：在游戏成长期，数据库负载较大，且呈现为不断增长的趋势特点。通常表现为在游戏成长期期间，会不断增加数据库，导致RW节点负荷也不断增加。而在游戏衰退期，数据库负载逐渐减少...
手动更换可用区
系统执行迁移时间的长短跟数据容量有关，若数据量较大，可能需要几个小时，请谨慎操作。该操作一般用于调整应用和数据库的可用区分布，达到就近访问数据库的目的。Q：更换主可用区所需的时间是否等于业务不可用时间？例如当需要将备可用区...
插入数据
即使你只知道几个列的值，那么你也必须创建一个完整的行。要创建一个新行，使用INSERT命令。这条命令要求提供表的名字和其中列的值。例如：CREATE TABLE products(product_no integer,name text,price numeric);一个插入一行的命令如下：...
应用场景
云原生数据仓库AnalyticDB MySQL版 为千万家企业级客户提供了数据处理ETL、实时在线分析、核心报表、大屏和监控能力，为广大商家和消费者提供稳定的离线和在线数据服务。本文介绍 云原生数据仓库AnalyticDB MySQL版 的五个使用场景：实时数...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
项目编辑器页面管理
在数据详情页面内可以实现的功能有以下几种：功能 说明 查看并修改数据属性 单击数据页面内任意一个具体数据，在右侧会弹出当前数据的详情页面，页面内可以查看不同类型数据的不同属性，您可以自定义设置每一个数据的属性字段参数值。...
项目编辑器页面管理
在数据详情页面内可以实现的功能有以下几种：功能 说明 查看并修改数据属性 单击数据页面内任意一个具体数据，在右侧会弹出当前数据的详情页面，页面内可以查看不同类型数据的不同属性，您可以自定义设置每一个数据的属性字段参数值。...
测试数据构建
RDS MariaDB、其他来源MariaDB OceanBase MySQL模式 PolarDB PostgreSQL版（兼容Oracle）背景信息 功能测试或者性能测试时，往往需要准备测试数据，通常有以下几种方法：手工编写：效率低，不适用于大数据量场景。维护生成测试数据脚本：成...
宜搭创建大屏实操
本文主要介绍如何使用企业经营管理...返回配置页面，打开 数据 面板，您需要新增几个自定义列标签，并将 数据响应结果 中返回的多个字段内容复制粘贴到自定义列中对应标签的字段中。至此企业经营数据大屏的看板全部配置完成，效果展示如下图。
开启和使用冷数据分层存储
数据冷存的几种模式 数据冷存是指将数据表/索引/物化视图转存入OSS，转存后不再占用或者极少量占用数据库云盘存储空间，从而大大降低数据库的存储成本。数据冷存后，所有的增删改查SQL都透明，无需做任何修改。普通表/索引/物化视图冷存 将...
开启和使用冷数据分层存储
数据冷存的几种模式 数据冷存是指将数据表/索引/物化视图转存入OSS，转存后不再占用或者极少量占用数据库云盘存储空间，从而大大降低数据库的存储成本。数据冷存后，所有的增删改查SQL都透明，无需做任何修改。普通表/索引/物化视图冷存 将...
开启和使用冷数据分层存储
数据冷存的几种模式 数据冷存是指将数据表/索引/物化视图转存入OSS，转存后不再占用或者极少量占用数据库云盘存储空间，从而大大降低数据库的存储成本。数据冷存后，所有的增删改查SQL都透明，无需做任何修改。普通表/索引/物化视图冷存 将...
聚合支付：Ping+
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍Ping+如何通过 PolarDB-X 应对业务挑战。所属行业...
从RDS MySQL迁移至自建Kafka
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
基本概念
Ganos Raster数据模型 基本概念 Ganos Raster数据模型主要包括以下几个元素构成：Image：泛指一景遥感影像，如一个TIFF文件。Catalog：数据目录，相当于”数据库“的概念。Catalog是一个逻辑概念，它由一个Lindorm（HBase）数据库中所有...
OSS数据安全防护最佳实践
DSC 在您完成数据源识别授权后，从您存储在OSS的海量数据中快速发现和定位敏感数据，对敏感数据分类分级并统一展示，同时追踪敏感数据的使用情况，并根据预先定义的安全策略，对数据进行保护和审计，以便您随时了解OSS数据资产的安全状态。...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
产品架构
有如下几个弊端：涉及的技术组件多且杂 技术选型复杂 数据存取、数据同步的链路长 这些弊端会对信息系统建设带来巨大的问题，对技术人员要求高、业务上线周期长、故障率高、维护成本高。更进一步，技术碎片化导致技术架构割裂，不利于技术...
Echarts K线图
刷新频率：手柄拖拽时触发大屏更新周期，单位为毫秒，调大这个数值可以改善性能，但是降低体验。y轴：请参考本章 x轴 样式进行配置。数据缩放：单击右侧的 眼睛 图标显示数据缩放。起始百分比：K线图数据窗口范围的起始百分比。结束百分比...
- 产品推荐
- 这些文档可能帮助您