网站建设方案书
个人 大于5个（不包含5个）需提供每个域名的网站建设方案书。大于等于10个 需提供每个域名的网站建设方案书，以及加盖备案专用章的阿里云保证书。相同前缀域名可以不用提供。网站建设方案书需包含的内容 网站建设方案书无固定模板，您可以...
填写网站/App信息（备案多个网站/App）
网站建设方案书模板请参见 网站建设方案书需包含的内容。提供备案承诺书。单位 是 是 同一个ICP备案订单下，一次可以备案多个网站，每个网站对应一个域名，域名总数最多不超过30个。说明 如有特殊情况需备案更多域名，需提供以下材料并将...
安全设计原则
数据安全保护原则 基于安全责任共担模型，数据安全的体系建设同样划分为租户和云平台，租户侧建立数据安全保护体系建议参考如下原则进行设计：数据的分类分级原则：企业应结合实际应用和业务特性，有意识的建立数据分类分级制度和体系，...
答疑支持
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。操作步骤 在Dataphin页面，按照以下操作指引或单击蓝色小机器人选择 答疑支持，进入答疑支持页面后，输入您需解答的问题。依次单击 ...
答疑支持
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统（如需对接可联系运维部署团队）方可使用工单功能。...
维度层（DIM）
例如，电商公司的商品维度可能有近百个维度属性，为下游的数据统计、分析、探查提供了良好的基础。尽可能多的给出包含一些富有意义的文字性描述。属性不应该是编码，而应该是真正的文字。在阿里巴巴维度建模中，通常是编码和文字同时存在，...
确定需求
是否有公共使用，命名及逻辑相似的统计指标，目前已经重复建设使用，需要通过上述设计规范化？举例：数据分析师需要了解A公司电商业务中最近1天厨具类目的成交金额。当获知这个需求后，您需要分析：根据什么（维度）汇总、汇总什么（原子...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
新建自定义数据源
前提条件 已有自定义数据源类型。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口，进入 数据源管理 页面。在 数据源管理 页面，按照下图操作指引，进入新建数据源对话框。在 新建数据源 ...
新建自定义数据源
前提条件 已有自定义数据源类型。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口，进入 数据源管理 页面。在 数据源管理 页面，按照下图操作指引，进入新建数据源对话框。在 新建数据源 ...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
使用限制
使用限制 为保障软件系统稳定，Dataphin有部分使用上的限制或建议，详情如下表所示。功能项 操作项 使用限制/建议 管理中心 成员管理 超级管理员（即超管）是您购买Dataphin后，由系统初始化自动生成的角色。您的阿里云主账号即为超级管理...
引入预制模型
模型市场为您提供开箱即可试用的模型示例，降低您的学习成本以及理解Dataphin的成本，帮助您快速建立企业模型。本文为您介绍如何导入模型示例。视频介绍 权限说明 仅支持超级管理员、系统管理员导入模型。计算引擎说明 仅当计算设置中的...
SQL使用限制
限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 表名、列名中不能有特殊字符，以字母开头，且只能用英文小写字母（a-z）、英文大写字母（A-Z）、数字和下划线（_）。注释长度 1024字节 长度限制 长度不超过1024字节的有效...
Dataphin免费试用申请
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...
资产全景
在 流动 页面，为您可视化展示 数据引入、物理表数 和 逻辑表数，为您提供数据输出后的数据查询及应用功能：将鼠标悬停在 数据引入 模块上，为您展示的 数据源 个数、数据表接入量Top5 和 数据表接入量Least5。数据源：统计昨天有数据同步...
资产全景
在 流动 页面，为您可视化展示 数据引入、物理表数 和 逻辑表数，为您提供数据输出后的数据查询及应用功能：将鼠标悬停在 数据引入 模块上，为您展示的 数据源 个数、数据表接入量Top5 和 数据表接入量Least5。数据源：统计昨天有数据同步...
新建Flink计算源
如果集群有Kerberos认证，则需要开启集群Kerberos并上传Krb5认证文件或配置KDC Server地址：Krb5认证文件：需要上传Krb5文件进行Kerberos认证。KDC Server地址：KDC服务器地址，辅助完成Kerberos认证。说明 支持配置多个KDC Server服务地址...
元数据仓库共享模型概述
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
开通Dataphin
购买Dataphin成功后，通常需要5分钟~10分钟开通服务，请您耐心等待。如果开通服务失败，系统会自动为您退款。系统仅支持MaxCompute计算引擎，在购买页的选择仅影响系统初始化时的配置，您仍需要单独购买 MaxCompute计算引擎。注意事项 开通...
添加识别特征
最多配置5条规则，且最多配置2层关系。过滤条件之间的关系可配置为且、或。单击 确定，完成识别特征添加。查看识别特征 识别特征添加完成后，您可对自定义的识别特征执行编辑、删除操作。系统内置识别特征不支持编辑、删除操作。区域 描述 ...
添加识别特征
最多配置5条规则，且最多配置2层关系。过滤条件之间的关系可配置为且、或。单击 确定，完成识别特征添加。查看识别特征 识别特征添加完成后，您可对自定义的识别特征执行编辑、删除操作。系统内置识别特征不支持编辑、删除操作。区域 描述 ...
新建ArgoDB计算源
选择了Kerberos认证后，需要上传Krb5认证文件或配置KDC Server地址：Krb5文件配置：需要上传Krb5文件进行Kerberos认证。KDC Server地址：KDC服务器地址，辅助完成Kerberos认证。支持配置多个KDC Server服务地址，使用英文分号（,）分割。c....
设置Dataphin实例的计算引擎为Hadoop
如下图所示：NameNode Hadoop支持添加同集群多个HDFS地址，只要有一个地址校验成功，即可完成元数据采集。例如 host=192.xxx.xx.xxx,webUiPort=500xxx,ipcPort=80xx。集群存储根目录 计算引擎类型为E-MapReduce 5.x Hadoop且集群存储类型为...
新建基线监控
基线一旦建立后，会按照调度依赖关系自动识别圈定需要被纳入监控范围的任务，并按照设定的预警时间和承诺时间，在被保障对象数据可能延迟产出的情况下发送基线告警。基线范围内的任务可设置更高优先级以优先分配资源。本文为您介绍如何进行...
敏感数据保护
Dataphin的敏感数据保护，主要有以下两种方案：脱敏方案 针对敏感数据进行遮盖脱敏和哈希脱敏保护，如将“张三”展示为“张*”，或者通过md5脱敏手机号，可以保护敏感数据不会泄露。需要注意的是，脱敏保护后的数据无法展示为原值，因此...
新建基线监控
基线一旦建立后，会按照调度依赖关系自动识别圈定需要被纳入监控范围的任务，并按照设定的预警时间和承诺时间，在被保障对象数据可能延迟产出的情况下发送基线告警。基线范围内的任务可设置更高优先级以优先分配资源。本文为您介绍如何进行...
敏感数据保护
Dataphin的敏感数据保护，主要有以下两种方案：脱敏方案 针对敏感数据进行遮盖脱敏和哈希脱敏保护，如将“张三”展示为“张*”，或者通过md5脱敏手机号，可以保护敏感数据不会泄露。需要注意的是，脱敏保护后的数据无法展示为原值，因此...
计算设置概述
Apache Flink Apache Flink是一个分布式处理引擎，用于对无界和有界数据流进行有状态计算。Fusioninsight Flink Fusioninsight Flink 是一种基于Apache Flink的流式处理引擎，可以实现高速数据流的实时计算和分析。Blink独享版 Blink是阿里...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
核心概念
真实的数据是存储在计算引擎的物理表中，这些物理表就是逻辑表的物化表，一个逻辑表可能有多个物化表（只有有主键的逻辑表才能有多个物化表，每个物化表都包含主键字段）。相关参考 关于部分基本概念的理解，您可以参考规范定义最佳实践，...
创建HDFS数据源
如果Hadoop集群有Kerberos认证，则需要开启Kerberos认证，并上传用户的Krb5认证文件或配置KDC Server地址、Keytab File和Principal：Krb5文件：上传Krb5文件进行Kerberos认证。KDC Server：KDC服务器地址，辅助完成Kerberos认证。Keytab ...
安全算法说明
关键字替换 自定义字符串脱敏位置，一共有三个参数，分别为待脱敏的完整字符串、脱敏部分的正则表达式、脱敏部分的替换字符串。例如输入string1,exp,string2，则会将string1字符串中符合exp表达式的部分替换为string2。自定义掩码 自定义...
安全算法说明
关键字替换 自定义字符串脱敏位置，一共有三个参数，分别为待脱敏的完整字符串、脱敏部分的正则表达式、脱敏部分的替换字符串。例如输入string1,exp,string2，则会将string1字符串中符合exp表达式的部分替换为string2。自定义掩码 自定义...
创建TiDB数据源
使用限制 仅支持创建TiDB v4、TiDB v5和TiDB v6版本的TiDB数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 新建数据源 对话框。在 新建数据源 对话框的 关系型数据库 区域，选择TiDB。如果您最近使用...
创建HBase数据源
Kerberos Kerberos是一种基于对称密钥技术的身份认证协议，可以为其他服务提供身份认证功能，且支持SSO（即客户端身份认证后，可以访问多个服务，例如HBase和HDFS）：如果Hadoop集群有Kerberos认证，则需要开启 Kerberos。如果Hadoop集群...
安全设置
不同的计算引擎支持不同版本的Spark Jar任务（MaxCompute引擎中的Spark Jar任务默认使用Spark v2.4.5。Hadoop引擎中的Spark Jar任务使用的版本为TBD）。MaxCompute引擎下可开启Spark Jar任务鉴权模式。Hadoop引擎下（除Inceptor外）不可...
- 产品推荐
- 这些文档可能帮助您