跨阿里云账号迁移MongoDB实例
由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。请确保目标端MongoDB没有与源端相同的主键（默认为_id），否则会导致数据丢失。若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的...
跨阿里云账号迁移MongoDB实例
由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。请确保目标端MongoDB没有与源端相同的主键（默认为_id），否则会导致数据丢失。若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的...
管理问题数据
支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则，及各规则问题数据的定义，详情请参见：附录：支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute表支持配置保留问题数据功能。目前仅部分...
使用须知
访问宽表数据 lindorm_cdc 读写Lindorm CDC数据使用的数据源。访问Lindorm CDC数据的介绍 访问语法示例：Lindorm宽表引擎（lindorm_table）中有一个Database名称为DB1，DB1中有一个表名为tableX，可以通过以下两种方式查询表的数据。示例一...
USE
如果您当前使用的数据库并非目标数据库，可以通过USE语句切换数据库对象。切换后所有的SQL操作都将在目标数据库中执行。引擎与版本 USE语法适用于宽表引擎和时序引擎。无版本限制。语法 use_statement:=USE { database_identifier|DEFAULT ...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
配置SQLServer数据源
您需要测试每个资源组的连通性，以保证同步任务使用的数据集成资源组能够与数据源连通，否则将无法正常执行数据同步任务。如果您需要同时测试多种资源组，请选中相应资源组后，单击 批量测试连通性。详情请参见 配置资源组与网络连通。说明...
设置资产数据源
在过滤器代码编辑框中，输入当前资产数据的过滤代码。单击 测试，查看数据过滤效果。数据过滤器详情请参见 数据过滤器使用说明 章节。查看数据响应结果字段列表 DataV资产的数据响应结果一般为列表形式。数据响应结果列表中展示了资产的...
运营
数据资产申请，数据使用者向数据管理方提出使用申请，说明申请方式和申请理由。由租户资产管理员进行资产使用的审核处理。数据资产服务，根据数据资源的性质和特点，选择采用数据表或接口方式提供资产服务。数据资产下线，根据数据的实际...
功能简介
数据资产申请，数据使用者向数据管理方提出使用申请，说明申请方式和申请理由。由租户资产管理员进行资产使用的审核处理。数据资产服务，根据数据资源的性质和特点，选择采用数据表、标签 或接口方式提供资产服务。数据资产下线，根据数据...
功能简介
数据资产申请，数据使用者向数据管理方提出使用申请，说明申请方式和申请理由。由租户资产管理员进行资产使用的审核处理。数据资产服务，根据数据资源的性质和特点，选择采用数据表、标签 或接口方式提供资产服务。数据资产下线，根据数据...
适配组件数据
如果您需要使用的数据源为 API，直接在数据源配置栏输入API即可。具体配置API数据源时，是否选中 服务器代理请求 等操作，详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 工作台 页面中，选择已创建的数据看板，单击 编辑。...
适配组件数据
如果您需要使用的数据源为 API，直接在数据配置栏输入API即可。具体配置API数据源时，是否选中 服务器代理请求 等操作，详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 我的可视化 页面中，选择已创建的可视化应用，单击 ...
有数BI
AnalyticDB MySQL版 支持您将 AnalyticDB MySQL版 数据接入网易有数BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用网易有数BI连接 AnalyticDB MySQL版，并进行可视化数据分析。前提条件 在执行操作前，请确认您已满足...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
场景管理器
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
我的资产
我的资产以用户的视角展示自有权限或申请授权成功的数据表、数据服务API数据资产，并提供数据资产详情查看等功能，帮助用户清晰的了解在数据加工、数据分析等场景下可使用的数据资产情况。具备特定角色（如工作组管理员）的用户对一定范围...
组件数据源配置
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
功能简介
通过数据标准的管理功能，模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，制定并管理平台遵循的统一数据标准，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。模型标准设计 ...
功能简介
通过数据标准的管理功能，模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，制定并管理平台遵循的统一数据标准，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。模型标准设计 ...
数据标准
通过设计标准数据元、数据指标、维度和维度属性，对关键业务对象以及属性和值域进行定义，制定并管理平台遵循的统一数据标准，管控数据的一致性和数据质量。模型标准设计 逻辑表命名规则：支持对逻辑表命名标准的规范设计，可基于模型命名...
飞线层
图表样式 飞线层是3D地球的子组件，支持独立的样式和数据配置，包括飞线的半径、弧度、类型以及起始点经纬度等，适用于OD数据的线型表达，通常表示两地之间的关联，如物流、交易等。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项...
区域热力层
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
基本概念
Oracle CDC：实时数据同步模式，对源表进行INSERT、UPDATE或DELETE等操作的同时可以提取数据，变化的数据被保存在数据库的变化表中，通过订阅变化数据的方式实现数据的秒级同步。MySQL Binlog：实时数据同步模式，通过同步并解析记录所有...
等值面层（v3.x版本）
数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新数据。您也可以单击查看示例...
数仓分层
可以结合企业的数据使用特点，将明细事实表的某些重要维度属性字段做适当冗余，即宽表化处理。明细粒度事实层的表通常也被称为逻辑事实表。数据应用层ADS（Application Data Service）：存放数据产品个性化的统计指标数据。根据CDM与ODS层...
敏感数据保护概览
说明 设置安全级别后，对使用数据的影响：SQL Console中查询数据时，对无权限的中敏感、高敏感字段显示为星号（*）或者按自定义的方式显示。查询、导出、变更数据时，需要单独申请中敏感、高敏感字段的权限。导出、变更数据时，如果数据...
同步Redis后出现数据不一致
问题示例 使用数据传输服务（DTS）同步完Redis后，使用Redis的 info keyspace 命令查看源端和目标端的keys情况，出现源端和目标端数据不一致，且含过期时间的keys占很大比重。如下图：可能原因 单靠 info keyspace 的 expires 来判断数据...
透明数据加密概述
经过数据库身份验证的应用和用户可以继续透明地访问应用数据（不需要更改应用代码或配置），而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。透明：数据在使用过程中无感知，数据在...
常见问题
数据水印将标记信息嵌入原始数据，在不影响数据使用的前提下，生成水印和添加数据标记，可对泄露数据溯源，避免内部人员泄露数据但是无法对事件定责追溯的问题，提高数据安全性和溯源能力。数据安全中心通过水印技术，可以定位泄露的数据、...
敏感数据审计
数据管理DMS提供的敏感数据审计功能，记录了敏感数据在DMS中的使用情况，可以解决敏感数据异常使用和数据泄露的溯源问题。功能介绍 审计覆盖的功能模块：SQL窗口中的查询与变更、数据结果集导出、数据库导出和普通数据变更。功能入口：安全...
数据连接管理
常见问题 如何使用已录入的数据库实例？在新版DTS控制台配置任务时，首先需要在 源库信息 或 目标库信息 区域选择 数据库类型，然后在 选择已有的数据库连接 中选择目标数据库实例。为什么选不到已录入的数据库实例？可能是您录入的数据库...
表设计最佳实践
采用DataHub进行数据写入时，应该合理规划Shard数量，避免出现由于Shard过多导致采集通道流量较小、通道数量较多的问题。批量数据写入 使用批量数据写入方式时，应重点关注写入周期。周期调度条式数据插入 应避免使用周期调度条式数据插入...
采集数据
创建MaxCompute数据源 本教程中创建的MaxCompute数据源的名称为 odps_first，创建数据源时生产环境使用的MaxCompute项目名称为 WorkShop2023，开发环境使用的MaxCompute项目名称为 WorkShop2023_dev。（可选）如果您使用RAM账号操作本实践...
采集数据
步骤二：创建数据源 本教程需要分别在您当前空间创建名为 oss_workshop_log 的OSS数据源、名为 mysql_workshop_log 的MySQL数据源用于访问平台提供的测试数据，测试使用的数据源基本信息已提供。说明 在数据集成同步任务配置前，您可以在...
采集数据
前提条件 开始本文的操作前，请准备好需要使用的环境。详情请参见 准备环境。步骤一：新建数据源 根据本次实验模拟的场景，您需要新建三个数据源，并将其注册到DataWorks工作空间，才能进行后续操作。其中前两者为OSS数据源、RDS数据源，...
时序引擎版本说明
为提升用户体验，云原生多模数据库 Lindorm会不定期地发布版本，用于丰富云产品功能或修复...修复在跨分区使用SQL查询出现重复数据的问题。修复API查询时，endtime边界不包含的问题。修复无法写入空字符串的问题。修复预降采样混合类型出现...
面临的业务挑战
这些不同来源、不同格式的数据，各自又有不同的访问和分析方式，而大量传统企业基于关系数据库构建自己的业务系统，已经非常熟悉按SQL的方式去使用数据，这无疑增加了企业存储和使用数据的成本。分析不实时 企业运营的形式越来越多样化，...
高压缩引擎（X-Engine）介绍
随着业务发展，数据库系统中会积累大量访问频率很低甚至为0的数据，这些数据的积累容易导致如下问题：历史数据和最新数据存储在同一数据库系统中，导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等，导致性能问题。...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题
- 产品推荐
- 这些文档可能帮助您