从采集到分析-TSDB For InfluxDB®让你的数据产生价值
本文主要讲述如何将你的数据搬迁上云，让你的数据产生更大的价值。了解我们-TSDB For InfluxDB® TSDB For InfluxDB®是一款专门处理高写入和查询负载的时序数据库，用于存储大规模的时序数据并进行实时分析，包括来自DevOps监控、应用指标...
变更TTL表
说明 TTL表转换成普通表需要进行数据搬迁，请在业务低峰期进行操作。普通表转换成TTL表 ALTER TABLE t_order LOCAL PARTITION BY RANGE(gmt_modified)STARTWITH '2021-01-01' INTERVAL 1 MONTH EXPIRE AFTER 12 PRE ALLOCATE 6;说明 普通表...
产品优势
扩展性强 提供数据库扩容管理模块，能便捷地按需对集群进行扩容，无需手动进行数据搬迁。数据闭环流通 与云上日志系统、数据库、数据应用工具无缝集成，能便捷地进行数据同步，降低数据迁移工作量。专业服务能力 阿里云提供专业的数据库...
常见问题
HBase提供搬迁不停机搬迁服务，可以在不影响业务的情况下实现数据搬迁。Hive、MapReduce等组件可以两种处理方式。升级到云数据库HBase中Spark服务，效率更高，成本更低。搭配EMR中Hive、MapReduce服务，云数据库HBase和EMR服务是无缝对接。...
产品优势
HBase Shell 生态 数据搬迁 支持HBase各个版本之间的在线、跨版本、自动化、高效搬迁，应用零影响、零改造，请参见 LTS（原BDS）服务介绍。只能离线迁移 MySQL数据同步 请参见 LTS（原BDS）服务介绍，支持MySQL数据到HBase的全量同步、在线...
功能特性
集群可扩展性 功能集 功能 功能描述 参考文档 社区兼容版平滑扩展 平滑水平扩容 社区兼容版支持自动平滑均衡扩容，无需手动进行数据搬迁。社区兼容版集群变配和水平扩缩容 垂直升降配 当您需要调整云数据库ClickHouse社区兼容版集群的配置...
产品优势
弱，扩容需要搬迁数据，小时级 弱，扩容需要搬迁数据，小时级 一写多读 数据分片支持一写多读，读副本水平在线扩展，秒级生效。支持，但增加读副本需要搬数据，小时级生效 支持，但增加读副本需要搬数据，小时级生效 生态体系 数据搬迁 ...
低成本历史库
方案优势 简单易用 数据搬迁配置可视化，分钟级完成迁移配置。全增量一体化，有效降低用户使用成本。支持多表迁移、数据变换等能力帮助用户轻松完成多表合并、字段组合变化等需求。全面的监控报警，保证数据同步稳定性。性价比 支持容量型 ...
低成本RDS历史库
方案优势 简单易用 数据搬迁配置可视化，分钟级完成迁移配置。全增量一体化，最大程度降低用户使用成本。支持多表迁移、数据变换等能力帮助用户轻松完成多表合并、字段组合变化等需求。全面的监控报警，保证数据同步稳定性。高性价比 支持...
应用场景：低成本历史库
方案优势 简单易用 数据搬迁配置可视化，分钟级完成迁移配置。全增量一体化，最大程度降低用户使用成本。支持多表迁移、数据变换等能力帮助用户轻松完成多表合并、字段组合变化等需求。全面的监控报警，保证数据同步稳定性。性价比 支持...
迁移服务（MMA）
数据搬迁任务最大并发量 数据迁移并发数。配置完成后，单击 新增。在 数据源管理 页签，单击数据源列表 操作 列中的 更新元数据。更新元数据将获取当前Hive数据源中的数据库信息。如果数据量较大，可能需要几分钟才能完成更新。创建迁移...
离线同步并发和限流之间的关系
为了提高数据同步的效率，可以适当调整任务的并发数，以缩短数据搬迁需要的时间。在产品中配置位置如图所示：文件类型（OSS、FTP、HDFS、S3）数据读取，主要基于文件粒度并发读取，待读取的文件数量少于任务配置并发数。上面任务期望最大...
导入概述
如果数据表很多导入比较麻烦可以使用Hive外表，性能会比Broker load导入效果差，但是可以避免数据搬迁。实时数据导入：日志数据和业务数据库的Binlog同步到Kafka后，优先推荐通过 Routine Load 导入StarRocks。如果导入过程中有复杂的多表...
导入概述
如果数据表很多导入比较麻烦可以使用Hive外表，性能会比Broker load导入效果差，但是可以避免数据搬迁。如果单表的数据量特别大，或者需要做为全局数据字典来精确去重可以考虑使用 Spark Load。实时数据导入：日志数据和业务数据库的Binlog...
引擎简介
产品架构 核心能力 云原生弹性 采用存算分离架构，扩容后分区秒级迁移，无需搬迁数据，迅速自动实现流量均衡。存储与计算可独立扩缩容，灵活应对多种场景业务。低成本 基于Lindorm文件引擎（LindormDFS）构建，支持容量型存储、本地HDD盘+...
DAS Auto Scaling弹性能力
水平扩容适用于读流量较多，而写流量较少的场景，但传统数据库需要搬迁数据来搭建只读节点，而搬迁过程中主节点新产生的数据还存在增量同步更新的问题，会导致创建新节点比较慢。垂直扩容则是在现有规格基础上进行升级，其一般流程为先对备...
Lindorm for Cassandra应用实践
比如Cassandra存储和计算不分离，一旦需要扩容，需要搬迁数据，扩容持续时间长，无法快速应对业务突发流量。而Lindorm是存储计算分离架构，可以实现快速弹性。另外，Cassandra 需要定期对所有副本进行全量数据修复，否则会出现”幽灵key...
支持的云服务
人工智能平台 PAI 人工智能平台 PAI 是基于MaxCompute的一款机器学习算法平台，实现了数据无需搬迁，便可进行从数据处理、模型训练、服务部署到预测的一站式机器学习。您创建MaxCompute项目并开通机器学习服务后，即可通过机器学习平台的...
逻辑数仓
为解决上述问题，数据管理DMS推出了逻辑数仓功能，用户可以在不搬迁原始数据的前提下将多种异构数据源进行逻辑上的融合，形成一个逻辑仓，然后通过DMS内置的跨库查询引擎（支持SQL）创建逻辑视图进行数据的融合分析。这种方式避免了繁琐的...
Serverless存储层
全量数据在扩缩容时无需搬迁，通过元数据（Metadata）的操作来达到扩缩容的目的。存储与计算可独立弹性，并且提供横向弹性和纵向弹性的能力。资源隔离 独立部署的Build Service，负责所有的离线操作，可保证如Compaction等高CPU消耗的离线...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
查看敏感数据识别结果
敏感数据识别任务扫描完成后，您可以查看敏感数据识别结果。数据安全中心支持以 数据对象、数据库实例为基本单位查看敏感数据的扫描结果。本文介绍如何查看数据对象、数据库实例的敏感数据识别结果。查看数据对象的识别结果 说明 您可以在 ...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
功能特性
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能，当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
功能简介
AnalyticDB PostgreSQL版 的企业数据智能平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据建模、数据开发、质量评估、资产管理等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据资源。...
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
数据源概述
说明 数据同步基于数据源控制任务读写端数据库，您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。数据源...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
创建数据流
在数据管理DMS离线集成中，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。本文介绍创建数据流和配置的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB...
数据域
数据域是联系较为紧密的数据主题的集合，通常是根据业务类别、数据来源、数据用途等多个维度，对企业的业务数据进行的区域划分，将同类型数据存放在一起，便于您快速查找需要的内容。不同使用目的数据，分类标准不同。例如，电商行业通常...
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
数据集成概述
离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间数据传输。...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
数据洞察
DataWorks数据洞察是指通过深度数据分析和解读来获取深刻的数据理解和发现，它支持数据探索和可视化。您可以通过数据洞察了解数据分布，创建数据卡片，并组合成数据报告。此外，数据洞察结果能够通过长图形式的报告进一步分享。该功能利用...
- 产品推荐
- 这些文档可能帮助您