阿里云首页
智能数据建设与治理 Dataphin
相关技术圈
智能数据建设与治理 Dataphin
Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎,为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据构建及管理服务。
开通服务
数仓规划
建模研发
相关技术圈
学习路径
由浅入深,带您玩转Dataphin!
了解
数据中台介绍
了解数据中台
了解生态赋能
动态交流
Dataphin介绍
了解Dataphin
应用场景
使用限制
购买指导
计费说明
购买
到期提醒与停机策略
升级
续费
上手
快速入门
使用流程
准备工作
数据引入
数据同步
Dataphin入门指导
数据服务入门指导
使用
功能应用
管理中心
数仓规划
数据引入
建模研发
发布
调度运维
监控报警
数据资产
实践
使用教程
基于Dataphin构建数据仓库
基于电商销售场景构建偏好标签
面向零售店铺的模型构建与管理
开发
数据研发
数据引入
数据建模
数据处理
数据萃取
行为中心
行为规则
工厂标签
标签逻辑表
治理
治理分析
治理概况
治理工作台
治理项管理
回收站
数据服务
开发API
应用API
开发Dataphin数据源
应用Dataphin数据源
4分钟了解核心功能
智能数据建设与治理 Dataphin
动态与公告
功能更新记录
文档更新动态
公告
产品简介
什么是Dataphin
应用场景
基本概念
逻辑结构说明
核心概念
案例介绍
使用限制
Dataphin免费试用申请
Dataphin新手引导
导入模型
产品计费
购买指引
计费说明
升级
续费
到期提醒与停机策略
准备工作
准备工作简介
准备账号
准备阿里云账号
准备RAM用户
开通Dataphin
初始化配置
同步RAM用户账号至Dataphin
设置Dataphin实例的计算引擎
准备数据源和计算源
快速入门
Dataphin使用流程
准备工作
规划数仓
引入数据
规范定义
规范建模
开发环境补数据
验证数据
发布任务
生产环境补数据
查看运行结果
教程及最佳实践
行业场景
面向零售店铺的模型构建与管理
概述
步骤一:规划数仓
步骤二:创建数据表
步骤三:规范定义
步骤四:规范建模
步骤五:发布任务
步骤六:补数据
步骤七:验证数据
步骤八:创建质量规则
步骤九:查看质量报告
基于电商销售场景构建偏好标签
概述
步骤一:创建数据表
步骤二:创建行为元素
步骤三:创建行为规则
步骤四:补数据
步骤五:创建商品价格偏好标签
步骤六:创建商品类目偏好标签
步骤七:查询偏好数据
功能场景
数仓规划
基于Dataphin构建数据仓库
数仓构建流程
数据调研
确定需求
分析业务过程
架构设计与规范定义
划分数据域
定义维度与构建总线矩阵
明确统计指标
模型设计
技术架构选型
数仓分层
数据引入层(ODS)
维度层(DIM)
明细数据层(DWD)
汇总数据层(DWS)
主题式查询
数据引入
一键生成目标表
自定义RDBMS数据库及同步数据
DataX同步数据
使用Python读文件
Java UDF最佳实践
规范建模
规范定义最佳实践
全局管理
管理控制台介绍
用户角色和权限
资源用量统计
查看资源使用情况
维护业务板块
管理中心
管理中心概述
添加、配置及管理Dataphin成员
设置Dataphin实例的计算引擎为MaxCompute
安全设置
智能引擎
数据倾斜优化
配置自定义任务参数
设置即席查询的引擎
跨租户发布数据
概述
跨租户发布设置
导出并下载文件
导入文件
创建物理表
发布对象和查看发布记录
权限管理
用户角色和权限
内置角色及权限列表
管理中心权限列表
告警中心权限列表
通知中心权限列表
数仓规划权限列表
数据集成权限列表
数据开发权限列表
数据萃取权限列表
任务发布权限列表
调度运维权限列表
资产目录、资产质量权限列表
数据资产权限列表
资产安全权限列表
资源治理权限列表
数据服务权限说明
数据权限
权限申请
申请、续期和交还表权限
管理数据源权限
申请、交还功能权限
管理函数权限
数据服务权限
管理应用权限
管理服务单元权限
管理Dataphin数据源权限
管理API权限
权限管理
授权和回收数据板块权限
操作项目权限
操作数据源权限
操作功能权限
数据服务权限管理
权限归属
配置和转交功能权限
权限操作审计
数仓规划
数仓规划概述
基本概念
数据架构
创建数据板块
创建主题域
创建并管理业务实体
查看并编辑表规范及管控研发流程
新建统计周期
计算源
概述
新建MaxCompute计算源
新建Ververica Flink计算源
创建加速计算源
管理计算源
项目空间
创建项目
管理项目空间的权限和计算源
数据源
概述
Dataphin支持的数据源
Dataphin出网IP地址
网络连通解决方案
大数据存储数据源
创建MaxCompute数据源
创建Hologres数据源
创建ClickHouse数据源
文件数据源
创建FTP数据源
创建OSS数据源
消息队列数据源
创建Log Service数据源
创建Kafka数据源
创建RocketMQ数据源
创建DataHub数据源
关系型数据源
创建PolarDB数据源
创建PolarDB-X数据源
创建MySQL数据源
创建SAP HANA数据源
创建Microsoft SQL Server数据源
创建PostgreSQL数据源
创建AnalyticDB for MySQL数据源
创建OceanBase数据源
创建Oracle数据源
创建Vertica数据源
创建IBM DB2数据源
创建Teradata数据源
创建Impala数据源
创建达梦(DM)数据源
创建TiDB数据源
创建KingbaseES数据源
创建GBase 8a数据源
创建Golden DB数据源
NoSQL数据源
创建Elasticsearch数据源
创建MongoDB数据源
创建Tablestore数据源
创建Aliyun HBase数据源
创建Redis数据源
创建HBase数据源
创建API数据源
数据引入
概述
数据同步
概述
新建同步任务文件夹
新建同步目标表
新建同步任务
配置同步任务
调度配置
执行同步任务
验证同步任务
数据集成
概述
支持的数据源
管理管道脚本文件夹
上传管道脚本
离线单条管道
配置离线单条管道
编辑离线单条管道
重命名离线单条管道
移动离线单条管道
查看历史信息
下线和删除离线单条管道
离线整库迁移
配置离线整库迁移
操作离线单条管道
重命名离线整库迁移
删除离线整库迁移
自定义组件
新建自定义组件
应用自定义组件
自定义组件示例
组件说明
输入组件
组件库-转换组件
组件库-流程组件
组件库-输出组件
数据开发
数据开发概述
规范建模
概述
创建维度逻辑表
创建并配置普通维度逻辑表
创建并配置层级维度逻辑表
创建枚举维度逻辑表
创建虚拟维度逻辑表
创建并配置事实逻辑表
维度与事实逻辑表调度配置
维度和事实逻辑表物化配置
创建原子和衍生原子指标
创建原子指标
创建衍生原子指标
创建业务限定
创建派生指标
逻辑表-汇总逻辑表
添加派生指标和衍生指标
新建注册上挂标签
编辑汇总逻辑表
查看汇总逻辑表的详情
删除汇总逻辑表
编码研发
创建资源
新建用户自定义函数
新建MAXC任务
新建SQL任务
新建MapReduce任务
新建Spark任务
基于Blink独享/共享集群开发流批一体任务
新建镜像表
新建元表
新建自定义源
新建代码模板
创建Blink SQL任务
创建Blink DataStream计算任务
基于Ververica Flink开发流批一体任务
新建镜像表
新建元表
创建Flink SQL任务
创建Flink DataStream任务
新建通用任务
创建、配置并提交离线计算模版
新建Shell任务
新建Virtual任务
创建Python计算任务
Dataphin PyODPS
创建并配置机器学习任务
调度配置
自定义血缘配置
管理计算任务
数据查询及管理
概述
查询并下载数据
管理回收站的资源对象
运行记录
管理即席查询
MaxCompute SQL与函数支持
常用命令
SQL使用限制
数据类型
运算符
DDL语句
DML操作
DQL操作
SQL增强操作
函数操作
数据萃取
数据萃取概述
基本概念
进入数据萃取
初始化萃取项目
平台管理
创建并管理ID类目
创建并管理标签类目
创建行为域和业务线
ID中心
创建并管理实体ID
引入ID映射表及开启OneID归一化
行为中心
创建行为元素
创建并配置行为规则
查看行为数据及下载行为定义表
标签中心
创建规则统计标签
场景引导
步骤一:创建规则统计标签
步骤二:配置并提交规则统计标签
创建行为偏好标签
步骤一:创建行为偏好标签
步骤二:配置并提交行为偏好标签
创建注册上挂标签
创建标签逻辑表
发布与运维
发布中心
发布中心概述
管理发布任务
运维中心
概述
运维大盘
实例统计
异常统计
任务运维
周期任务
通用功能说明
脚本任务
逻辑表任务
萃取任务
补数据
手动任务
实时任务
实例运维
基线实例
周期实例
通用功能说明
脚本实例
脚本实例支持的运维操作
逻辑表实例
逻辑表实例支持的运维操作
萃取实例
萃取实例支持的运维操作
补数据实例
通用功能说明
通用补数据实例
萃取补数据实例
实例运行诊断
手动实例
实时实例
监控管理
基线监控
基线监控概述
基线监控配置
配置离线监控报警规则
配置实时监控报警规则
系统配置
运行配置
限流配置
资产全景及目录
资产全景
资产目录
资产详情
数据标准
数据标准概述
新建和管理标准集
新建和管理数据标准
新建和管理落标映射规则
新建和管理标准代码(码表)
新建和管理词根
新建和管理标准集目录
新建和管理公共标准集属性
新建和管理审批模板
资产质量
资产质量概述
基本概念
质量大盘
创建数据表质量规则
创建全域数据表规则
新建数据源规则
新建实时元表规则
创建指标质量规则
校验记录
查看质量报告
数据源管理
资源治理
资源治理概述
资源分析
治理概览
治理分析
治理效果
管理治理工作台
治理项管理
治理项管理流程
管理元数据
治理项管理
推送管理
任务管理
回收站列表
资产安全
资产安全概述
项目安全策略
敏感数据识别
管理数据分类
管理数据分级
创建、配置及手动触发识别规则
管理识别记录
管理识别任务
敏感数据保护
脱敏算法
配置脱敏规则
管理动态脱敏规则
管理动态脱敏白名单
静态脱敏
密钥管理
加解密算法说明
数据服务
数据服务概述
基本概念
进入数据服务
准备工作
创建服务项目
添加成员并设置角色
配置网络
开发API
创建服务单元、应用和Dataphin数据源的分组
创建服务单元
创建元数据
创建单物理表服务单元
创建多物理表服务单元
创建API
向导模式
SQL模式
直连数据源模式
测试与发布API
调用API
运维监控API
消费Dataphin数据源
开发Dataphin数据源并加速数据查询
调用Dataphin数据源
告警中心
概述
基本概念
告警事件
推送记录
管理值班表
通知中心
查看并处理任务
查看系统消息
常见问题
错误码
数据开发
数据源测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案
视频专区
Dataphin快速入门
资产质量介绍
资产地图介绍
运维中心介绍
数据集成-自定义组件介绍
数据服务操作指导
资源治理流程及功能介绍
相关协议
Dataphin服务等级协议(SLA)
Dataphin智能数据建设与治理试用服务协议
智能推荐AIRec
开源大数据平台E-MapReduce
云原生大数据计算服务 MaxCompute
全域采集与增长分析Quick Tracking
实时计算Flink版
数据湖构建
实时数仓Hologres
检索分析服务Elasticsearch版
DataV数据可视化
DataV-Card可视分析创作间
首页
智能数据建设与治理 Dataphin