离线数仓构建流程概述
步骤一：准备工作 规划数仓 数仓规划是数据建设中的蓝图，在您开始数据开发前，需要完成数据仓库的规划，数仓规划配置包括：创建数据板块和主题域、计算源、数据源、项目及项目中的成员。步骤二：规划数仓 数据集成 将创建好的数据源集成至...
离线数仓构建流程概述
步骤一：准备工作 规划数仓 数仓规划是数据建设中的蓝图，在您开始数据开发前，需要完成数据仓库的规划，数仓规划配置包括：创建数据板块和主题域、计算源、数据源、项目及项目中的成员。步骤二：规划数仓 数据集成 将创建好的数据源集成至...
变更管控
支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。当前 Dataphin支持发布管控功能。发布管控功能是支持基于用户已经设定好的管控规则及生效策略，在任务发布前执行对应的检查，以判断任务是否符合发布条件。针对校验不...
变更管控
支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。当前 Dataphin支持发布管控功能。发布管控功能是支持基于用户已经设定好的管控规则及生效策略，在任务发布前执行对应的检查，以判断任务是否符合发布条件。针对校验不...
校验记录概述
个人：超级管理员、质量管理员支持切换至任一成员查看校验记录，普通成员仅可查看质量负责人是自己的校验记录并且不支持切换。说明 当从项目视角查看校验记录时，筛选项不展示所属项目。当从个人视角查看校验记录时，筛选项不展示质量负责...
校验记录概述
个人：超级管理员、质量管理员支持切换至任一成员查看校验记录，普通成员仅可查看质量负责人是自己的校验记录并且不支持切换。说明 当从项目视角查看校验记录时，筛选项不展示所属项目。当从个人视角查看校验记录时，筛选项不展示质量负责...
消息渠道概述
若您的企业中已经有自己的短信或者语音渠道，也可将Dataphin的消息通过自有渠道发送出去。消息渠道入口 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 消息渠道 设置页面，支持电话、短信、邮件及自定义。
密钥权限管理
普通用户可管理负责人是自己的密钥，包括查看、授权、回收。仅负责人可管理功能用于管控密钥的管理权限，开启时，超级管理员只执行管理（查看、授权、回收、编辑等）权限，不执行审批；密钥负责人可对普通密钥执行编辑、授权、转交等操作；...
密钥权限管理
普通用户可管理负责人是自己的密钥，包括查看、授权、回收。仅负责人可管理功能用于管控密钥的管理权限，开启时，超级管理员只执行管理（查看、授权、回收、编辑等）权限，不执行审批；密钥负责人可对普通密钥执行编辑、授权、转交等操作；...
查看并管理治理白名单
个人：超级管理员、质量管理员支持切换至任一成员查看治理白名单，普通成员仅可查看负责人是自己的治理白名单并且不支持切换。说明 当从个人视角查看治理白名单时，仅展示您作为质量负责人的治理白名单。治理白名单入口 在Dataphin首页，...
查看并管理治理白名单
个人：超级管理员、质量管理员支持切换至任一成员查看治理白名单，普通成员仅可查看负责人是自己的治理白名单并且不支持切换。说明 当从个人视角查看治理白名单时，仅展示您作为质量负责人的治理白名单。治理白名单入口 在Dataphin首页，...
专题广场
个人数据中心：可查看并管理负责人是自己的资产，详情请参见 个人数据中心。③配置中心 可创建专题分组及配置数据探查。专题分组管理：帮助您对专题分组进行统一管理，提高专题的管理效率，详情请参见 新建及管理专题分组。数据探查配置：...
专题广场
个人数据中心：可查看并管理负责人是自己的资产，详情请参见 个人数据中心。③配置中心 可创建专题分组及配置数据探查。专题分组管理：帮助您对专题分组进行统一管理，提高专题的管理效率，详情请参见 新建及管理专题分组。数据探查配置：...
汇总数据层（DWS）
汇总数据层的一个表通常会对应一个统计粒度（维度或维度组合）及该粒度下若干派生指标。汇总表设计原则 聚集是指针对原始明细粒度的数据进行汇总。DWS汇总数据层是面向分析对象的主题聚集建模。在本教程中，最终的分析目标为：最近一天某个...
新建实时自定义源类型
配置文件详细说明如下：#声明connector的使用类型（源表、目标表、维表）kind:source sink dim#定义connector名称，格式为CUSTOM_([A-Z|0-9]+)connector:CUSTOM_SOCKET#hostname是connector的一个属性，会在DDL的with参数被展示。...
Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
资产应用概述
应用成员可查看、创建自己加入的应用下所有的服务、修改及删除自己负责的服务。功能概述 您可以根据实际需求，创建对应的应用并配置标签服务、画像服务。各项功能描述如下：功能项 描述 应用管理 创建及管理应用 用于管理市场上申请的标签...
配置MySQL输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
配置MySQL输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
配置TiDB输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置TiDB输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置GBase 8a输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置GBase 8a输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置Impala输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
配置Greenplum输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。支持 枚举形式、类正则形式 以及 两者混合形式，如 table_[001-100];table_102。切分键 配合并发度配置使用。您可以将源数据表中某一列作为切分键，该字段类型必须是整型数字，...
配置GoldenDB输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
任务运行资源说明
任务资源分类 Dataphin任务按运行模式可为两大类：共享Docker资源任务：对于共享Docker资源任务，所有共享Docker资源的任务会运行在同一个容器中。如，SQL任务。非共享Docker资源任务：对于非共享Docker资源任务，每次任务启动时都会启动...
配置Impala输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
任务运行资源说明
任务资源分类 Dataphin任务按运行模式可为两大类：共享Docker资源任务：对于共享Docker资源任务，所有共享Docker资源的任务会运行在同一个容器中。如，SQL任务。非共享Docker资源任务：对于非共享Docker资源任务，每次任务启动时都会启动...
配置OpenGauss输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置OpenGauss输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置StarRocks输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置KingbaseES输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集、并集和补集。表 选择来源表：如果 来源表量 选择了 单表，则直接选择输入的表。如果 来源表量 ...
配置PolarDB输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图...
配置DM（达梦）输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则单击 ...
配置DM（达梦）输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则单击 ...
配置Oracle输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图...
配置ClickHouse输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择数据同步的来源表：如果 来源表量 选择了 ...
配置PostgreSQL输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
配置HDFS输出组件
导出列头 选择是否导出列头：导出：会在每一个文件中的第一行输出字段名。不导出：则文件的第一行为数据。输入字段 展示从输入表中读取的字段。输出字段 展示目标表的字段。同时您也可以通过 批量添加 和 新建输出字段 的方式手动添加输出...
- 产品推荐
- 这些文档可能帮助您