引擎功能
数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过SQL语句直接在数据库内完成整个机器学习流程，挖掘更深的数据价值。使用数据库内机器学习服务的优势主要体现在以下几个方面：简单易用：无需掌握专业的...
表数据管理
ODC 中用颜色标识您对表中数据的操作，新增的数据用绿色标识，删除的数据用红色标识，修改后的数据用橙色标识。编辑态下，导航栏提供了以下操作键功能编辑表中的数据：功能 说明 添加行 单击该功能键将在表中指定位置插入一个空行。双击...
TairVector性能白皮书
数据集名称 数据集介绍 向量维度 向量总数 查询数量 数据总量 距离类型 Sift-128-euclidean 该数据集是基于 Texmex 的数据集整理，使用SIFT算法得到的图片特征向量。128 1,000,000 10,000 488 MB L2 Gist-960-euclidean 该数据集是基于 ...
离线同步并发和限流之间的关系
问题三：为什么数据同步任务运行速率有时候相较限速阈值有较大差距？同步速率：数据同步速率和任务期望最大并发数是比较强相关的参数，两者结合在一起可以保护数据来源和数据去向端的读写压力，以避免数据同步任务对数据源带来较大压力，...
数据膨胀诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能，可以定期自动诊断数据库内的所有表，并生成诊断信息表。您可以通过诊断信息表，查看表的膨胀...同时由于该命令需要重新整理储存的Page，所以它需要额外的储存空间来储存整理完的数据。
数据仓库研发规范概述
本文将为您介绍数据仓库研发规范的阶段规划、角色职责和整体流程。在大数据时代，规范地进行数据资产管理已成为推动互联网、大数据、...数据仓库研发规范整体流程 下图为根据阶段规划与角色职责的内容，整理出的数据仓库研发规范的整体流程。
导入与导出
为什么使用INSERT OVERWRITE语句将AnalyticDB MySQL集群中的数据导出至MaxCompute外表时，数据没有被覆盖？为什么MaxCompute导入数据的量与AnalyticDB MySQL集群不一致?DTS同步数据至AnalyticDB MySQL集群时，若源库中存在AnalyticDB MySQL...
同步方案概览
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。说明 数据同步在某些...
迁移方案概览
数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型，以及具体的配置文档。说明 数据迁移在某些场景...
支持的数据库
数据传输服务DTS（Data Transmission Service）支持RDBMS、NoSQL、OLAP等数据源间的数据交互。本文详细介绍DTS支持的数据库、迁移类型、同步初始化类型、同步拓扑和支持订阅的数据类型。说明 关于文中涉及的迁移类型、同步类型、订阅的数据...
纠删码
开启纠删码功能后，在进行数据整理（Compaction）时，数据将被自动转化为EC格式。CREATE TABLE dt(p1 integer,p2 integer,primary KEY(p1))WITH(EC_POLICY='RS-4-2');说明 建议将 EC_POLICY 设置为 RS-4-2。在存储效率上，RS-4-2算法等价于...
数据迁移与同步FAQ
DTS的数据迁移与数据同步工作原理是什么？DTS的数据迁移与数据同步有什么区别？使用DTS遇到预检查报错，如何解决？什么是数据迁移、数据同步？数据迁移：将Redis数据库中的数据（即键值对）迁移至另一个Redis数据库中。通常迁移完成后即可...
新功能发布记录
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 数据库至数据库的数据同步项目新增支持匹配规则能力，可以助力用户在数据同步项目中通过简单的配置通配符...
pg_statistic
因为不同类型的统计信息适用于不同类型的数据，pg_statistic 被设计成不太在意自己存储的是什么类型的统计。只有极为常用的统计信息（比如 NULL 的含量）才在 pg_statistic 里给予专用的字段。其它所有东西都存储在“槽位”中，而槽位是一...
数据保护规则简介
说明 进行任意查询时，涉及的数据都可以用<数据库，数据表，数据列>来表示。只有当数据库、数据表、数据列都被一条规则中的 meta 数据匹配上时，数据才会按照规则中指定的算法进行处理。在设置数据保护规则时，您需要保证 不同规则作用的...
水印使用限制
支持静态脱敏的数据源类型，请参见 支持的数据类型。对待嵌入水印的源数据有什么要求？由于嵌入水印的原理是将水印原子信息嵌入到不同特征的数据中去，因此源数据特征越多，越能嵌入完整的水印信息、提高提取成功率，并且即使缺失部分数据...
LTS（原BDS）服务介绍
使用指南 日志生命周期管理说明 开启日志订阅后，如果不消费数据，默认日志会保留48小时，超时后订阅关系自动取消，保留的数据自动删除 什么场景会导致“不消费数据”：没有终止任务的前提下直接释放LTS集群；同步任务暂停；使用日志订阅的...
C100售前支持相关问题
审计规则有什么用，能否拦截操作？审计规则可以发现数据库中存在的安全风险。数据库审计是旁路设备，无法拦截数据库的操作。数据库配置审计规则后，审计记录命中规则时，会触发告警。报表是否可以同步外送？可以。添加订阅报表任务后，数据...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）...Q：为什么数据同步实例的价格普遍高于数据迁移实例？A：数据同步具备更多的高级特性，例如在线调整同步对象和MySQL双向同步，且数据同步基于内网传输，可以保证更低的网络延时。
计费项
说明 数据流量是指客户端从订阅通道中消费的数据总量，按1元/GB计费，不足1 GB的按1 GB计算。适合数据量较小的订阅实例。其他类型的数据订阅实例暂不收取数据流量费。数据校验 链路配置费用 详情请参见 数据校验计费方式。专属集群 集群...
访问列存数据
取值如下：true：只查询已完成数据整理的数据，忽略增量写入且未完成数据整理的数据。false：默认值。查询所有数据。非主键条件查询 针对分区整理过程，列存表默认按主键排序，可以在建表后按需配置排序键，从而加速非主键条件查询。重要 ...
数据源权限管理
什么是私有模式的数据源？哪些用户能够收回数据源的分享权限？如何检查数据源分享关系的移除、关联情况？分享数据源后，其资源组的连通状态是否会被同步分享？分享数据源后，引用过该数据源的任务关联信息是否会被同步分享？哪些角色可以...
OPTIMIZE PARTITION
本文档介绍了优化分区或子分区、回收未使用的空间和整理分区数据文件的方法。描述 如果从分区或子分区中删除了大量的行，或者对一个带有可变长度的行（即存在VARCHAR、BLOB或TEXT类型的列）进行修改，可以使用 ALTER TABLE…OPTIMIZE ...
数据安全
数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能，该功能基于数据生态服务中的数据迁移，将数据存储至阿里云对象存储服务OSS（Object Storage Service，简称OSS）中，定期全量备份数据，实时增量同步数据，来满足对...
常见问题
Q：索引表已开启冷热分离，且查询时设置了 HOT_ONLY 或_l_hot_only_(true)，为什么查询索引表和查询主表返回的数据不一致？A：这是因为主表和索引表的冷数据归档过程是独立的，并且归档主表和索引表冷数据的操作是周期性触发的，导致了主表...
入仓解决方案
入仓解决方案可添加和运行多个实时同步任务、实时迁移任务，实现全量或近实时增量迁移和集成数据，用于满足项目空间内业务场景的数据迁移和集成需求。根据所需的同步效率、同步数据量需求，创建入仓解决方案同步线上库数据。入仓解决方案...
Tunnel命令常见问题
这种情况下可以先用少量的数据进行测试，当-td 及-fd 调试成功后再上传全量数据。使用Tunnel Upload命令上传数据时，需要上传很多数据文件到一个表中，是否有方法写一个脚本就可以把文件夹下的所有数据文件上传上去？Tunnel Upload命令支持...
FAQ
如果非admin用户尝试用 USE 指定一个他们没有 READ 和/或 WRITE 权限的数据库，那么系统会返回错误：ERR:Database<database_name>doesn't exist.Run SHOW DATABASES for a list of existing databases.说明 SHOW DATABASES查询只返回那些非...
执行补数据并查看补数据实例（旧版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
识别任务说明
导出敏感数据识别结果 数据安全中心 数据识别 和 数据检索 等页面展示的数据为使用主用模板和通用识别模板检测出的最新敏感数据。导出任务功能提供导出主用模板或已启用模板检测出的敏感数据的能力。创建导出任务后，数据安全中心会获取您...
概述
汇总表 您可以结合业务数据分析和数仓分层，将一些明细的事实数据和维度数据先进行汇总分析，创建汇总表，后续数据分析时直接取用汇总表中的数据即可，无需再取用明细表和维度表中的数据。逆向建模 逆向建模主要用于将其他建模工具生成的...
常见问题
常见参数调整案例 修改持久内存型实例的同步模式 过期策略 Redis默认的数据逐出策略是什么？过期Key数据的删除规则 Redis批量删除Key 规格与版本 如何确认Redis实例的小版本是否为最新版 Redis各版本的兼容性 包年包月实例是否可以更改规格...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
独享资源组
独享调度资源组使用场景 如果非数据集成任务需要访问VPC环境下的数据库、有白名单访问控制的数据库时，需要使用独享调度资源组，独享调度资源组的使用详情请参见 新增和使用独享调度资源组。独享数据集成资源组使用场景 如果您需要同步VPC...
冷数据归档常见问题
归档为CSV格式的数据的数据量可能会比归档为ORC格式的数据的数据量更大。为什么归档后的冷数据及文件在主账号下面的OSS上看不到？PolarDB 的冷数据存储在系统默认的OSS上，不在客户的OSS里，所以客户无法看到。目前只支持在PolarDB控制台上...
常见问题
为什么数据同步的价格要高于数据迁移的价格？因为数据同步具有更多的高级特性，例如支持在线调整同步对象、支持配置MySQL数据库之间的双向数据同步；且数据同步基于内网传输，可以保证更低的网络延时。账户欠费有什么影响？账户欠费的影响...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务，详情请参见 开通Dataphin。应用场景 基于Dataphin实现数据安全保护的一些典型的...
资产安全概述
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。前提条件 已购买 资产安全 增值服务并且当前租户已开通 资产安全 模块。应用场景 基于Dataphin实现数据安全保护的一些...
- 产品推荐
- 这些文档可能帮助您