技术发展趋势
近些年来，数据在国民经济各个领域扮演着愈发重要的作用，其使用特点较之以往也发生了诸多变化，其趋势主要有几个方面。规模爆炸性增长 随着8K、5G、...挑选DBMS 解决方案的数据和分析负责人慢慢接受这样一个事实，即云DBMS是未来的发展方向。
高效数据治理实施指南
DataWorks数据治理中心可协助数据治理团队建立数据治理框架、优化治理过程、提升治理效率，从而实现治理目标的高效突破。本文通过治理负责人的实操过程，为您介绍如何通过数据治理计划能力，高效设定和达成数据治理目标。背景信息 在多人...
阶段一：基础防护建设
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
数据防泄漏典型案例
违规操作（某互联网公司）问题描述：数据安全中心检测到UA使用异常，收到邮件告警。排查结果：查看数据安全中心日志，排查出有内部员工通过 电报App 将文件分享出去。处理方法：在 OSS控制台 将文件下载链接取消，并且编写自定义异常规则，...
数据集成概述
离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间数据传输。...
数据库导出
当您需要进行数据库备份、导出数据库表进行数据分析等操作，您可使用 数据管理DMS 的数据导出功能，该功能可通过提交工单的方式导出数据库。前提条件 数据库类型如下：MySQL系列：自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB ...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
通过RAM角色授权模式配置数据源
参数 描述 数据源名称 数据源名称必须以字母、数字、下划线（_）组合，且不能以数字和下划线（_）开头。数据源描述 对数据源进行简单描述，不得超过80个字符。适用环境 可以选择 开发 或 生产 环境。说明 仅标准模式工作空间会显示该配置。...
通过脚本模式创建集成任务
创建离线脚本模式后，可以通过直接编写数据同步的JSON脚本来完成数据同步开发，为数据同步开发提供了更灵活的能力和更精细化的配置管理。本文为您介绍如何创建离线脚本模式。前提条件 已完成数据源配置。您需要在配置集成任务前，配置好您...
通过脚本模式创建集成任务
创建离线脚本模式后，可以通过直接编写数据同步的JSON脚本来完成数据同步开发，为数据同步开发提供了更灵活的能力和更精细化的配置管理。本文为您介绍如何创建离线脚本模式。前提条件 已完成数据源配置。您需要在配置集成任务前，配置好您...
Quick BI连接MaxCompute
背景信息 智能分析套件Quick BI是一个专为云上用户量身打造的易上手、性能强的大数据分析及可视化平台，可以让每个人都能成为数据分析师。Quick BI不仅是业务人员查看数据的工具，更是数据化运营的助推器。更多Quick BI信息，请参见 Quick ...
离线集成概述
数据管理DMS离线集成是一种低代码的数据开发工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。支持的数据库类型 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB...
简介
数据工作站可以结合大语言模型给业务开发、数据开发、分析师和数据运营同学赋能，提升数据交付效率和数据自助分析的效率。当您需要将查询的数据、测试的数据、以及数据变化趋势等信息，以文档的形式进行交付，并在交付后，希望有可以替您...
新功能发布记录
开启会话与事务 10月 功能名称 变更类型 功能描述 相关文档 任务编排新增仪表盘推送节点 新增 仪表盘推送节点通过联动数据服务功能，可将数据可视化的图表直接推送至您（责任人、相关人员）的钉钉、钉钉机器人或邮箱。配置仪表盘推送节点 ...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
StarRocks物理表和字段详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
ClickHouse概述
开源大数据平台E-MapReduce（简称EMR）的ClickHouse提供了开源OLAP分析引擎ClickHouse的云上托管服务。EMR ClickHouse完全兼容开源版本的产品特性，同时提供集群快速部署、集群管理、扩容、缩容和监控告警等云上产品功能，并且在开源的基础...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
执行补数据并查看补数据实例（旧版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
基本概念
数据资源平台中通过将已创建好的逻辑表物理化到数据库来实现物理模型的创建。质量规则：是指在特定业务环境下，用户定义数据符合使用目的一组定量或定性的规定要求；在数据资源平台中，可以通过对表级与字段级的数据质量任务运行，真实反映...
基础折线图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 组件数据源配置。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤...
基础区域图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
基础折线图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
堆叠区域图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据集市
创建子数据集市 在一级数据集市下，如有其他子数据集市，可继续新建子数据集市。创建方法与一级数据集市相同。后续步骤 完成数据集市的创建后，后续面向具体业务分析创建应用表时，可以关联该数据集市。创建应用表，详情请参见 创建逻辑...
PostgreSQL数据源
由于主备数据同步存在一定的时间差，特别在于某些特定情况，例如网络延迟等问题，导致备库同步恢复的数据与主库有较大差别，从备库同步的数据不是一份当前时间的完整镜像。一致性约束 PostgreSQL在数据存储划分中属于RDBMS系统，对外可以...
功能特性
Hudi存储 数据导入与导出 功能集 功能 功能描述 参考文档 大数据数据源 Maxcompute数据源 AnalyticDB for MySQL支持通过外表、DataWorks两种方式将MaxCompute数据导入至数仓版或湖仓版集群，也支持通过外表将AnalyticDB for MySQL数仓版...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
Hologres物理表和字段详情
表结构：包括 字段 详情（字段后若有 钥匙 图标，该字段为主键字段）、描述、数据类型、关联标准（需购买数据标准模块）、数据分类（需购买安全模块）、数据分级（需购买安全模块）、热度 信息，同时您可以在 操作 列下单击 图标，查看指定...
Hologres物理表和字段详情
表结构：包括 字段 详情（字段后若有 钥匙 图标，该字段为主键字段）、描述、数据类型、关联标准（需购买数据标准模块）、数据分类（需购买安全模块）、数据分级（需购买安全模块）、热度 信息，同时您可以在 操作 列下单击 图标，查看指定...
MaxCompute物理表和字段详情
编号 描述 ①概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击...
MaxCompute物理表和字段详情
编号 描述 ①概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击...
AnalyticDB for PostgreSQL物理表和字段详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
星环ArgoDB/TDH Inceptor物理表和字段详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
逻辑表和字段资产详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
逻辑表和字段资产详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
CDH/EMR/亚信/FI/CDP物理表和字段详情
编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，...
专业术语
本文档主要介绍了时序数据库 InfluxDB®版的常见术语。aggregation（聚合）InfluxQL函数，能够返回一组数据点的聚合结果。想要获得现有的和即将支持的聚合函数的完整列表，请查看文档 InfluxQL函数。相关术语：function，selector，...
用户角色和权限
权限功能是系统安全的重要基础保障，作为企业数据中台建设和数字化转型的核心产品，Dataphin提供了完整的权限体系，来帮助您构建完善安全的权限系统，保障数据安全。本文为您介绍Dataphin权限体系、用户和角色、角色权限概览等，帮助您了解...
用户角色和权限
权限功能是系统安全的重要基础保障，作为企业数据中台建设和数字化转型的核心产品，Dataphin提供了完整的权限体系，来帮助您构建完善安全的权限系统，保障数据安全。本文为您介绍Dataphin权限体系、用户和角色、角色权限概览等，帮助您了解...
- 产品推荐
- 这些文档可能帮助您