数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
多轮对话搜索
已适配数据源列表 链接 阿里云 RDS MySQL 云数据库 RDS 控制台 云数据库 RDS MySQL 版 文档 阿里云 MaxCompute MaxCompute 控制台 云原生大数据计算服务 MaxCompute 文档 阿里云 OSS 对象存储OSS 控制台 对象存储 OSS 文档 子路径/库表 ...
虚拟列
新的虚拟列类型可以不同于表中的原始列类型，以便支持用户在不修改表结构和数据的情况下新建一列，新的列可以用于查询加速或者采用不同的分词器。一个Text字段支持不同的分词器 单个字符串列可以映射到多元索引多个Text列，不同Text列采用...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
文字标注层（v2.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
质量规则模板类型
单表字段统计值一致性比较 用于对同一表两个字段进行统计数据的对比，如求和值、最大值等。单字段业务逻辑一致性比较 用于对同一表多个字段的复杂业务逻辑是否正确进行校验。两表字段值一致性比较 用于对不同表两个字段原值进行数据的对比...
质量规则模板类型
单表字段统计值一致性比较 用于对同一表两个字段进行统计数据的对比，如求和值、最大值等。单字段业务逻辑一致性比较 用于对同一表多个字段的复杂业务逻辑是否正确进行校验。两表字段值一致性比较 用于对不同表两个字段原值进行数据的对比...
实时同步字段格式
操作类型（I/D/U）数据对应的时间戳 是否是变更前（Y/N）是否是变更后（Y/N）真实数据字段1 真实数据字段2 真实数据字段3 数据集成实时同步在同步MySQL、Oracle、Loghub和PolarDB类型的数据至DataHub或Kafka时，会在同步的目标端添加5个...
SQL数据类型映射
SQL中所用字段对应于表中同名字段，两者的数据类型必须相匹配。本文介绍了SQL中字段数据类型、数据表中字段数据类型和多元索引中字段数据类型的映射关系。使用SQL过程中请确保SQL中和数据表中字段数据类型相匹配。重要 SQL中主键列的数据...
配置流程
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
DB-IN
使用流程说明 先在“数据源管理”页定义好数据源连接信息，然后将组件拖入画布，选择相应数据源的表字段。参数说明 DB-IN算法组件的OUT端口-输入参数。参数名 描述 默认值 范围 数据源选择“数据源管理”的所有数据源都会在此列出 无 无 ...
任务导出
一、单个任务列表下任务导出 任务列表菜单中有「导出本列表所有任务」的选项，支持将当前任务列表中的任务导出。点击该选项后，会出现选择字段的界面，点击「添加字段」，勾选项目内已有的想要导出数据的字段，最后点击「确定」，界面左下...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
管理字段
如果已经建立数据标准，您可以拖动数据标准树上的数据标准到一张表上，完成添加字段操作。编辑字段 DDM提供三种编辑字段的方式：右键单击模型树上目标表的一个字段，弹出的菜单中选择 重命名。您还可以点击 属性 进入字段编辑器对字段进行...
逻辑表查询
查询结果会额外提供一个字段表示数据来源的数据库、表信息，单击则可以跳转至对应的物理库表并带入查询SQL与查询条件信息。查询也可以不带路由字段作为条件，进行全表（所有分表）扫描查询操作，如汇总统计。说明 同时也支持 GROUP BY 等...
数据上传
参数 描述 预览数据并设置目标表字段（上传数据至已有表）需配置数据所在文件的列与目标表字段的映射关系，配置后相关数据才可被成功上传。映射方式包括 按列名映射 及 按顺序映射。映射后您也可自定义目标表的字段名称。说明 若待上传数据...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
Quick BI数据集如何展示新增的字段
解决方案 原表里增加了字段，已创建数据集不需要重新做，只需要把新增字段添加进来即可：进入数据集编辑页面，点击左上方表名称 在右侧弹出的字段列表中，勾选需要新增的字段即可（您也可以取消勾选不需要展示的字段，灰色的是已经有计算...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
Dataphin表中存在字段，查询时报错没有该字段
问题描述 本文主要介绍如何解决Dataphin表中存在字段，查询时报错没有该字段。查询表字段存在使用的字段。查找该字段报错没有该字段。问题原因 该问题的原因是数据表在dataphin上元数据不同步导致。解决方案 在数据资产进行元数据的刷新。...
数据探查
字段采样：可选择数据表的任一字段，所选字段不同值至少抽样一条。探查卡片操作 探查卡片包括表头、数据质量柱图和值分布柱图三部分。表头 表头信息有字段名、字段类型、去重值个数、排序、搜索和更多功能。说明 字段名、字段类型的修改及...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
通过Flink SQL模式配置ETL任务
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
管理数据表
本文为您介绍如何快速查找数据表，并查看数据表中的数据字段和数据类型等信息。查询数据表 当数据源中的数据表过多，无法快速定位到自己所需的数据表时，您可以按照以下步骤操作。登录 Quick BI控制台。按照下图指引，进入数据源管理页面。...
类型二：标签授权
场景 实现步骤 场景一：通过绑定用户标签表完成权限控制 设计用户标签表 绑定存储在数据源中的用户标签表后，可以实时的读取到最新的成员标签信息，不再需要手动维护。绑定用户标签表 绑定后，将用户标签表中的阿里云账号ID、阿里云账号名...
Quick BI报错“column xxx is ambiguous”
产品名称 Quick BI 产品模块 数据集、仪表板 问题描述 数据集预览报错，报错内容是“column xxx is ambiguous”问题原因 添加计算字段时，字段名是手动填写的，数据集又有表关联的操作，关联的表里的某个字段与原表字段名重复，无法识别...
查看血缘关系
字段级别 查看表字段、字段类型，以及表级别相同的数据库名称、Catalog名称和链接器，作业有关信息。表级别血缘 字段级别血缘 从元数据角度查看血缘信息 说明 如果Catalog下某个表关联的作业比较多，血缘关系图不好查看，您可以通过缩放等...
几何求差
本文介绍几何求差算子的使用方法。用途 几何求差算子用于计算主表相...输出字段 配置当前节点输出到下游节点的字段列表，默认包含一个差集结果的几何字段（字段代码difference_result）和主表的全部字段，可按需对主表字段进行删减和重命名。
API概览
本产品（数据湖构建/2020-...ListDatabases 获取元数据库列表 获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。表 表 CreateTable 新增元数据表 新增数据湖的元数据表。DeleteTable 删除元数据表 根据名称删除数据湖的元数据表。...
编辑器代码提效
使用限制 各类型计算引擎所支持的代码提效功能不同，代码提效所支持的计算引擎和功能项详情见下表：计算引擎 表提示 表字段提示 函数提示 权限校验 数据源编码提示 离线计算引擎 支持 支持 支持 支持-实时计算引擎（Flink）支持 支持 支持 ...
编辑器代码提效
使用限制 各类型计算引擎所支持的代码提效功能不同，代码提效所支持的计算引擎和功能项详情见下表：计算引擎 表提示 表字段提示 函数提示 权限校验 数据源编码提示 离线计算引擎 支持 支持 支持 支持-实时计算引擎（Flink）支持 支持 支持 ...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
单选
④数据字段：下拉菜单选择所选数据表中的 某一个数据字段。⑤默认值：根据设置 数据字段内容 进行下拉选择。⑥自动关联字段ID值：选择是否自动关联字段ID值，勾选后即配置控件 的选项展示名称 关联 对应的ID值字段。来源于 选择 数据集。①...
多选
多选为基础控件，选项菜单中可选择多个数据，用于数据 选项较多 且需要同时选择多个值的场景。应用场景 多选 控件常用于数据选项较多的场景。例如 满意度调研表。效果图 控件配置 基础配置 配置项 描述说明 ①显示标题：选择是否显示下拉多...
- 产品推荐
- 这些文档可能帮助您