其他问题
资源组 日志和实例保留多长时间？为什么不能在调度资源组上进行大数据计算？其他 如何设置任务优先级？如何查看任务优先级？周期任务与周期实例、补数据实例、测试实例是什么关系？DataWorks每晚将根据周期任务，批量生成第二天自动调度的...
DataWorks快速入门指引
教程指南 教程列表 示例场景 操作难度 预计时长 大数据AI公共数据集分析 DataWorks、MaxCompute 使用DataWorks快速分析公共数据集的数据。15分钟 Github实时数据同步与分析 DataWorks、Hologres、DataV 基于GitHub Archive公开数据集实时...
恢复数据库
规格越高恢复速度越快，数据量越大恢复所需的时间也就越长。更多信息，请参见 备份恢复性能说明。操作步骤 说明 本示例仅介绍通用配置流程，不同数据库引擎的恢复配置略有不同。关于各类数据库引擎的详细配置案例，请参见 备份与恢复概览。...
识别任务说明
需要导出的数据量越大，导出需要的时间越长，请您耐心等待。等待导出状态为已完成时，单击目标导出任务 操作 列的 下载。重要 完成导出后，您需要在三天内下载导出的数据。超过三天导出任务会过期，您将无法下载导出的敏感数据。相关文档 ...
恢复备份数据至当前实例
多长时间可以恢复？取决于数据量和带宽限制。全量数据恢复速度：OSS最大带宽1 GB/s，LTS单机100 MB/s。增量数据恢复速度：Lindorm目的集群单机30~40 MB/s写入，LTS单机100 MB/s。支持单表恢复吗？支持，如果有同名表还可以恢复到另外的表中...
数据扫描和识别
支持扫描的数据源类型如下：结构化数据：RDS、PolarDB、PolarDB-X、MongoDB、OceanBase、自建数据库 非结构化数据：OSS 大数据：TableStore、MaxCompute、ADB-MYSQL、ADB-PG 数据源授权完成后需要多长时间完成扫描？DSC 完成数据源授权后，...
PolarDB-X适用场景
业务连续性、事务一致性和系统安全性是交易系统正常运行的基础，长时间高负载低延时的运行是互联网时代交易系统的发展方向。产品能力 PolarDB-X 采用搭载自研多数派共识协议X-Paxos，并应用于存储节点提供三副本强一致能力，确保高可用切换...
开通备份恢复
Q：多长时间可以恢复？A：取决于数据量和带宽限制。全量数据恢复速度：OSS最大带宽1 GB/s，BDS单机100 MB/s。增量数据恢复速度：HBase目的集群单机30~40 MB/s写入，BDS单机100 MB/s。Q：支持单表恢复吗？A：支持，如果有同名表还可以恢复到...
减灾与应急时空解决方案与案例
开启并行处理后能充分利用多核计算资源有效加快数据处理效率，避免长时间等待。特别在栅格数据处理上接口设计简单、功能丰富，并有效解决了困扰一般WebGIS用户的栅格数据处理性能问题。PolarDB云原生架构不仅可保证数据库的安全稳定运行，...
二级索引
在已有数据的表中添加新的索引时，CREATE_INDEX 命令会同时将主表的历史数据同步到索引表中，如果主表很大时，CREATE_INDEX 会非常耗时间（数据同步任务是在服务端执行的，即使删除Lindorm Shell进程也不会影响数据同步任务）。查看二级...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
在GDB控制台清除实例数据
清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议您不要执行数据更新操作（执行数据更新操作，可能会导致更新的数据被清理）。操作步骤 登录 图数据库控制台。在页面左上角，选择实例所在地域。单击目标实例ID或目标...
搜索（审计）
这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询结果，甚至查询超时。说明 只能查询开启DAS 企业版 后且在SQL数据存储时长范围内的数据。如果需要查询更大时间范围的SQL记录，...
元数据抽取
在业务运行中，经常会沉淀到大量数据到数据湖中这部分数据可能是没有像数据仓库一样经过...全量抽取：抽取元数据时扫描全量数据文件，在数据规模比较大时，作业消耗时间长，抽取结果更准确。5.确认任务执行的相关参数，点击 保存并立即执行。
亿海蓝-航运大数据的可视化案例
数据量大，数据提取周期长。亿海蓝有17年AIS（船舶自动识别系统）数据积累，每日AIS数据增量约10亿。用户需要对历史年份数据进行分析，时间跨度大。业务实现技术复杂度高。业务涉及数据种类多，亿海蓝对这些业务数据使用了多种存储引擎。...
SQL洞察和审计
这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询结果，甚至查询超时。说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用...
SQL洞察和审计
这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询结果，甚至查询超时。说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用...
基本概念
栅格数据集越大，创建金字塔集所花费的时间就越长。但是，这也就意味着可以为将来节省更多的时间。Ganos Raster 数据分块模式（Layout Scheme）Layout Definition与Layout Scheme用来定义Layer的分块方式。给定数据图幅范围和像元大小...
PolarDB-X 2.0同步至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
概述
长时间保存会对数据库的写性能略有影响，因此建议保存不超过2周。赠送一定额度的免费备份空间，超出部分可能收取额外费用，您可以修改备份周期来控制备份容量。数据备份物理空间大小如下图所示：说明 PolarDB 集群 数据备份物理空间大小...
命令行界面介绍
时间序列有零个或多个数据点，每个数据点都是一个测量值。数据点由 time（一个时间戳）、measurement（测量指标，例如“cpu_load”）、至少一个key-value格式的 field（测量值，例如“value=0.64”或者“temperature=21.2”）和零或多个...
配置离线数据集成节点
运行时间与数据规模成正比，数据规模越大，运行耗时时间越长。如果执行日志的最后一行出现 status SUCCEEDED，表明任务试运行成功。试运行成功后，您可以在目标库的SQL窗口中，查询目标表中已迁移的数据。如果执行日志的最后一行出现 ...
管理健康报告
通过优化执行次数较多、执行时间较长以及CPU和内存消耗较多的SQL，以获取更大的优化收益。通过 查询时间变异系数 来衡量SQL执行的时间稳定性，可以发现潜在的性能问题。例如，同类SQL执行时间变长可能是由于数据倾斜、资源不足导致的...
配置DataHub输出组件
如果数据采集源头长时间没有产出数据，为了保证数据的及时投递，需设置此参数，超过设定时间会强制投递。说明 一次提交数据量、batchSize、maxCommitInterval三个参数，只需满足一个参数则进行投递。另外DataHub对于一次Request请求写入的...
配置DataHub输出组件
如果数据采集源头长时间没有产出数据，为了保证数据的及时投递，需设置此参数，超过设定时间会强制投递。说明 一次提交数据量、batchSize、maxCommitInterval三个参数，只需满足一个参数则进行投递。另外DataHub对于一次Request请求写入的...
消除数据重分布
决定查询总成本的因素包括查询运行需要多长时间以及它消耗多少计算资源。决定查询成本的其他因素是它的运行频率，以及它对其他查询和数据库操作的影响程度。确定成本最高的查询使用的表，并评估它们在查询执行中的作用，考虑表是如何join和...
新零售：杭州数云信息技术有限公司
数云客户业务是天猫CRM系统提供商，客户数据库的部署模式是多租户部署，即每个实例上会部署一个或多个数云的客户的数据，因此数云使用的数据库实例数据量都比较大，较大的实例存储容量一般在2 TB~3 TB左右，约有上百个实例来满足该业务需求...
名词解释
本文介绍Lindorm SQL语法的常见术语。Lindorm宽表引擎和时序引擎对术语...当查询时间区间跨度较大，且原始数据采样频率较高时，可以通过降采样降低数据的时间粒度。例如，按秒采集的数据，降采样查询时按小时级别采样，减少结果集的数据点数。
手动续费（2.0版）
包月套餐数据库有到期时间，如果到期未续费，将导致业务中断甚至数据丢失，详情请参见 欠费或到期对数据库的影响。在包月套餐数据库未到期或者到期后7天内，您可以手动给数据库续费，延长数据库的使用时间。按量付费数据库没有到期时间，不...
应用场景
ISV备份方案集成 从事ISV服务的企业用户可能面临多种的问题，例如难以统一管理多数据库环境和多种备份脚本，长时间保留某些业务数据导致后期核算成本太高，不同云厂商和云产品之间备份保留周期不一致，数据恢复的安全性难以保证等等。...
数据导入性能优化
使用弹性导入功能加速导入时，需确保Job型资源组中可用资源充足，避免资源不足导致任务长时间等待、耗时长、任务失败等问题。弹性导入支持同时运行多个弹性导入任务，也支持通过增大单个弹性导入任务使用的资源加速导入。更多信息，请参见 ...
数据导入性能优化
使用弹性导入功能加速导入时，需确保Job型资源组中可用资源充足，避免资源不足导致任务长时间等待、耗时长、任务失败等问题。弹性导入支持同时运行多个弹性导入任务，也支持通过增大单个弹性导入任务使用的资源加速导入。更多信息，请参见 ...
冷数据归档
即用户根据数据存储量和查询时间覆盖范围，确定多长时间之前的数据需要转移到冷存储。在时序引擎中，冷热分界线的设置单位是 天。含义是某条时序数据的时间戳如果满足下述条件，则该数据被视作冷数据。冷数据的判定标准如下：当前时间-数据...
离线同步并发和限流之间的关系
建议您合理配置任务并发数，避免大并发任务长时间运行，进而阻塞后续任务获得资源得到执行。小数据量的数据表建议配置小并发，小并发需要的执行资源比较少，有利于任务快速抢占碎片资源得到运行。由于数据量比较小执行耗时可以控制在合理的...
Memcache（OCS）数据源
相对当前时间的秒数，该时间指定了从现在开始多长时间后数据失效。说明 如果过期时间的秒数大于60*60*24*30（即30天），则服务端认为是Unix时间。否 0，0永久有效 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与...
恢复库表
说明 恢复范围取决于日志备份和数据备份 保留时长、开启极速库表恢复的时间点等，日志备份和数据备份保留时长最大可设置为730天。您可通过接口 DescribeLocalAvailableRecoveryTime 查询RDS实例备份可恢复的时间范围。恢复速度 与数据量...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
影响查询性能的因素
如果查询需要处理的数据量较大，就可能会长时间占用大量的资源，导致整体查询效率降低，进而影响最终的查询效果。此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O...
概述
长时间保存会对数据库的写性能略有影响，因此建议保存不超过2周。赠送一定额度的免费备份空间，超出部分可能收取额外费用，您可以修改备份周期来控制备份容量。数据备份物理空间大小如下图所示：说明 PolarDB 集群 数据备份物理空间大小...
- 产品推荐
- 这些文档可能帮助您