数据清理
本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 前置条件：OceanBase 数据源必须通过 OBproxy 连接（暂不支持对直连的 OceanBase 进行归档操作）。OceanBase 数据源目前仅支持...
数据清理白名单
为应对可能发生的连续启动崩溃的情况，mPaaS 建立了数据清理的机制。当 mPaaS 框架启动完成前应用出现卡死或重要线程（例如主线程、multidex.init 线程、ApplicationAgent.init 线程等）发生闪退时，框架可能触发数据清理。该数据清理机制...
历史数据清理
当数据库出现存储空间不足、表数据量过大导致查询速度变慢等情况时，您可以使用数据管理DMS提供的历史数据清理功能，定期清理历史数据，以提高数据库查询性能和响应速度、避免因存储空间不足而导致数据库性能下降及历史数据堆积对生产环境...
数据清理
当 phase 为 APCacheCleanPhaseDone 时，progress 返回清理了多少 MB 的数据。param callback 回调方法*/(void)execute:(void(^)(APCacheCleanPhase phase,float progress))callback;end 在 PurgeableCache.plist 中可以定义两种类型的清理...
CreateDataCronClearOrder-创建历史数据清理工单
创建历史数据清理工单。接口说明 目前仅支持安全协同管控模式的 MySQL 实例调用该接口。关于该功能的更多说明，请参见 历史数据清理。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
GetDataCronClearTaskDetailList-获取历史数据清理工...
获取历史数据清理工单任务详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action ...
GetDataCronClearConfig-查询历史数据清理工单的定时...
查询历史数据清理工单的定时配置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 ...
磁盘锁定之后如何清理数据？
如何清理数据 当实例因磁盘满被锁定时，AnalyticDB for PostgreSQL 仍然支持对数据表进行truncate/drop/grant 操作。清理数据后，如果磁盘空间降到阈值以下，过大约5分钟实例会自动解锁。注意 实例锁定后，不支持 delete 操作。因为 delete...
FlushInstanceForDB-清理实例指定DB的数据
清理实例中指定DB的数据。接口说明 云数据库 Redis 版与 Tair 实例支持 256 个 DB，从 DB0 到 DB255。每个 DB 没有单独的内存占用量限制，DB 可使用的内存容量受该实例的总内存限制。您可以通过 SELECT 命令切换 DB，更多信息请参见 Redis ...
FlushInstanceForDB-清理实例指定DB的数据
清理实例中指定DB的数据。接口说明 云数据库 Redis 版与 Tair 实例支持 256 个 DB，从 DB0 到 DB255。每个 DB 没有单独的内存占用量限制，DB 可使用的内存容量受该实例的总内存限制。您可以通过 SELECT 命令切换 DB，更多信息请参见 Redis ...
欠费说明
请注意，数据清理之前仍会继续计费，若您确认不再使用OSS存储服务，请务必删除OSS上的数据。重要 欠费停服后15天内未补足欠款（即账号余额小于0），则保存在阿里云的全部数据都会被清理删除，且清理后数据不可恢复，与您是否购买资源包、...
产品功能
数据清理 您可以在控制台上根据度量（Metric）进行数据清理，或者通过 API 进行更灵活的数据清理。高效压缩存储 TSDB 使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的...
云数据库MongoDB版日志清理策略
本文主要介绍云数据库MongoDB版日志清理的策略。使用说明 注意 当oplog日志占用磁盘空间过高时（上限比例默认是10%），会触发自动清理策略。如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果...
2023-12-08
数据服务上线新加坡地域 中国站和国际站的企业版实例数据服务上线新加坡地域，支持多数据源接入、...自定义存储表支持数据清理 自定义存储表支持数据清理，事务表支持按全表或主键清理，分区表支持按分区或主键清理，时序表支持按全表清理。
数据方案概览
历史数据清理 支持历史数据清理，可以根据设定的规则定期清理历史数据。可编程对象 支持存储过程、触发器、函数、视图等对象的变更提交与执行。数据导入 支持大批量数据快速导入至数据库。数据导出 SQL结果集导出 支持数据的SQL结果集导出...
PluginType参数说明
结构设计 NDDL 结构同步 TABLE_SYNC 普通数据变更 DC_COMMON 无锁变更 DC_CHUNK 历史数据清理 DC_CRON_CLEAR 可编程对象 DC_PROC 批量数据导入 DC_BIG_FILE 数据导出 DATA_EXPORT 数据库导出 DB_EXPORT SQL审核 SQLReview 数据库克隆 ...
DML无锁变更概览
DML无锁数据变更可以将单个SQL拆分成多个批次执行，能更好地满足业务方对大量数据变更的需求，例如历史数据清理、全表更新字段等，保证执行效率，减小对数据库性能、数据库空间等的影响。背景信息 当业务累积了大量数据时，需要定期清除表...
升级告用户书
数据清理和数据归档功能：为了帮助您优化数据库的存储和管理，我们提供了数据清理和数据归档的功能，您可以根据数据的使用频率和重要性，将数据进行分离和清理，以提高数据库的性能和效率。产品交互优化：我们优化了SQL控制台的布局，以...
调度设计文档
Null ods_raw_log_d 日 320170261 ods_log_info_d 原始数据脏数据清理 ods_raw_log_d ods_log_info_d320170259 日 320170262 dw_user_info_all_d 轻度汇总数据 ods_log_info_d dw_user_info_all_d 日 320170263 rpt_user_info_d 统计汇总...
EMR Kafka磁盘写满运维
kafka-topics.sh-bootstrap-server core-1-1:9092-topic test-topic-describe 数据清理方式恢复 方案描述 数据清理是指当磁盘被写满时，将业务日志数据（非Kafka内部Topic数据）按照从旧到新的方式删除，直到释放出足够的空间。适用场景 写...
数据库迁移
可选：一致性校验完成后，单击 下一步数据清理，进行源数据清理。完成：数据库迁移工单完成。立即清理：立即执行会实时删除已迁移的表，请谨慎操作。延时清理：在 延时清理 对话框中，指定延时清理时间间隔，可输入时间间隔为1~30天。在...
常见问题
建议您通过以下方式加速数据的清理过程，待数据清理完成之后重新添加同名列。假设执行了删除列操作的表名为 dt：执行FLUSH操作，强制将内存中残留的数据刷到存储媒介上 ALTER TABLE dt FLUSH;执行COMPACTION操作，执行数据的合并和删除 ...
同步Redis后出现数据不一致
本文介绍判断或排查同步Redis出现数据不一致的方法。问题描述 使用数据传输服务（DTS）同步Redis后，出现了源端和目标端数据不一致的现象...自建Redis数据库：使用redis-full-check做校验，检验的过程中执行SCAN 等命令触发过期数据清理动作。
释放引擎
在进行数据清理前，请确保您的重要数据已进行备份。使用限制 仅支持释放LTS服务和搜索引擎，其他引擎暂不支持释放。注意事项 释放引擎功能目前处于公测阶段，如需使用，请联系Lindorm技术支持（钉钉号：s0s3eg3）为您添加使用权限。引擎...
数据库管理
无论是冷数据归档还是数据到期清理工作，都是通过时序引擎的异步compaction任务执行的，因此，冷数据归档和TTL数据清理可能存在滞后的情况。对Database既设置了冷热分界线，又设置了TTL的情况下，已归档的冷数据的时间戳如果超过了TTL定义...
我是普通用户
数据方案 数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。数据导入 通过数据导入功能可以批量将数据导入至数据库。数据导出 进行大量数据分析或提取相关数据时可以使用数据导出功能。数据追踪 由于...
GetDataCorrectOrderDetail-获取数据变更工单详细信息
FAST_MODE CronExtConfig object 当且仅当 DetailType 为 CRON_CLEAR_DATA，即为历史数据清理工单时，此处提供历史数据清理额外配置信息。OptimizeTableAfterEveryClearTimes integer 是否启用自动 Optimize table，取值：0：不启用。大于 ...
API概览
GetDataCronClearTaskDetailList 获取历史数据清理工单任务详情 获取历史数据清理工单任务详情。GetDataCorrectRollbackFile 获取数据变更工单提交的回滚附件下载地址 调用GetDataCorrectRollbackFile接口，获取数据变更工单提交的回滚附件...
数据库分组
若您需要在SQL变更或结构设计中快速载入多个数据库，可以创建一个数据库分组，将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。...具体操作，请参见 普通数据变更、无锁数据变更、历史数据清理、数据导入、可编程对象。
我是安全管理员
数据库开发 数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。结构设计 在新项目、新需求或者优化等业务场景中，一般会涉及到新建表、修改表等结构的变更操作，此时可以使用DMS的结构设计功能。库表...
功能特性
普通数据变更 无锁数据变更 可以将单个SQL拆分成多个批次执行，能更好地满足业务方变更大量表数据且不锁表的需求，例如历史数据清理、全表更新字段等，保证执行效率，减小对数据库性能、数据库空间等的影响。无锁数据变更概览 无锁变更 ...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含...相关文档 数据清理
Delta Lake概述
如果需要删除或更新数据，则需要把原始数据清理掉，然后把更新后的数据写入存储。而Delta支持数据的删除或更新。数据实时同步，CDC（Change Data Capture）：使用Delta merge功能，启动流作业，实时将上游的数据通过merge更新到Delta Lake...
功能特性
DBS内置存储 备份数据清理 支持TTL过期系统自动删除备份数据、用户手动删除备份数据。DBS备份集生命周期 删除或减少RDS备份 PolarDB备份集生命周期 MongoDB备份集生命周期 Redis备份集生命周期 本地日志清理 删除数据库中本地存储的日志。...
数据归档至用户OSS
清理备份临时表：通过新建普通数据变更工单，清理数据库中的备份临时表。新建普通数据变更工单，请参见 普通数据变更。说明 在数据归档工单详情页的最下方，单击 查看临时表drop SQL，复制清理备份临时表的SQL语句。如果您没有开启后置行为...
我是DBA
数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。数据导入 通过数据导入功能可以批量将数据导入至数据库。数据导出 进行大量数据分析或提取相关数据时可以使用数据导出功能。数据追踪 由于误操作等...
我是管理员
数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。数据导入 通过数据导入功能可以批量将数据导入至数据库。数据导出 进行大量数据分析或提取相关数据时可以使用数据导出功能。数据追踪 由于误操作等...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
实例状态显示“锁定中”时如何解决？
命令清理数据。清理后需要耐心等待一段时间（5分钟左右），RDS实例才会解锁。PostgreSQL 通过DMS连接实例，详情请参见 通过DMS登录RDS数据库。执行以下SQL语句，查看数据库的表大小，确认其中可以删除的历史数据或无用数据。SELECT table_...
实例状态显示“锁定中”时如何解决？
命令清理数据。清理后需要耐心等待一段时间（5分钟左右），RDS实例才会解锁。PostgreSQL 通过DMS连接实例，详情请参见 通过DMS登录RDS数据库。执行以下SQL语句，查看数据库的表大小，确认其中可以删除的历史数据或无用数据。SELECT table_...
- 产品推荐
- 这些文档可能帮助您