创建文件数据源
数据字段 文件上传至数据库后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 文件字段名 为上传文件的表头名，会变成数据库表的字段备注。您可以在文件上传时，修改 文件字段名、数据库字段名称 ...
数据服务
配置方式 选择API的配置方式，支持的选项：表引导模式：通过可视化的方式选择表、字段，定义API的数据查询配置。脚本模式：通过手动编写SQL脚本+变量的方式来定义API的数据查询配置。说明 从 表引导模式 切换为 脚本模式 时，系统将提示...
风险识别管理（新版）
不配置默认识别所有表字段的风险数据。数据属性 用于筛选识别风险数据的属性范围。参数 描述 属性 您可以根据业务需求选择识别风险数据的属性类别。当前支持的属性类别如下：数据分级：用于指定识别哪个级别的风险数据。您需要提前定义数据...
生成测试数据
背景信息 OceanBase 开发者中心（OceanBase Developer Center，ODC）提供模拟数据功能供用户在测试数据库性能或者验证功能等需要大量模拟数据的场景下，能够快速根据表中的字段类型生成数据。注意事项 单次模拟数据上限为 1 亿行。拥有检查...
管理问题数据
支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则，及各规则问题数据的定义，详情请参见：附录：支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute表支持配置保留问题数据功能。目前仅部分...
映射富化函数
函数列表 类型 函数 说明 字段映射 e_dict_map 与目标数据字典进行映射，根据输入的字段映射一个新字段。支持和其他函数组合使用。相关示例，请参见 使用e_dict_map、e_search_dict_map函数进行数据富化。e_table_map 与目标表格进行映射，...
多选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④描述信息：自定义控件的描述信息。⑤描述信息位置：设置描述信息的位置。可选项包括 控件...
单选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④描述信息：自定义控件的描述信息。⑤描述信息位置：设置描述信息的位置。可选项包括 控件...
下拉单选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④填写提示：设置控件输入时的 提示信息。例如 请选择客户类型。⑤描述信息：自定义控件的...
查看数据
在进行联邦建模前，应先确认联邦建模中可用的建模数据。...在联邦表详细信息页面可以查看该联邦表中的所有字段和字段类型、生成该联邦表的任务名称、以及联邦表中的数据涉及到的节点信息等。单击任务名称可以查看任务的详情。
推送数据
概述 本篇文档将介绍如何向AIRec智能推荐服务推送实时数据，实时数据包括：实例启动后的所有对user、item、behavior表中数据的新增、修改、删除等操作。AIRec智能推荐根据版本的不同，有两个推送实时数据的接口，二者推送数据逻辑相同，...
编辑维表
页面右侧以表格形式为您展示MaxCompute表的所有数据，第一行为字段名。您可以直接双击单元格，修改某个字段对应某行的内容。单击页面右上方的 保存，即可对MaxCompute表生效。保存维表后，您可以查看MaxCompute表的所有数据。您也可以单击...
数据开发与运行
在DataWorks下载数据的前提是要将下载功能打开，如果没有下载入口，说明工作空间未开启下载，如果有需要可以联系主账号或者工作空间管理员在工作空间管理处开启。查询数据后在查询结果右下角会有下载入口，如下图所示：DataWork界面下载...
多表连接
连接条件 连接条件指定了两张数据表之间使用哪些字段进行连接，当数据表中某条数据（假定为a）的所有连接字段的值与另一张数据表某条数据（假定为b）的所有连接字段的值相同，则这a、b两条数据成功连接。多表连接算子支持指定多张数据表...
数据导出服务
自定义交易事件：对事件进行过滤，语法参考 Jq Filter 表达式 自定义区块事件：对事件进行过滤，语法参考 Jq Filter 表达式 自定义合约事件：对事件进行过滤，语法参考 Jq Filter 表达式 开始块高 配置导出数据的开始块高（含）结束块高 ...
通过日志服务导入至数仓版
字段映射 系统自动提取日志服务中最近10分钟的日志字段，同时自动映射对应的AnalyticDB MySQL数据表中的字段。左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志...
离线同步常见问题
odps端该表字段指定的字段大小小于MySQL端该字段数据大小。数据同步原则：来源端数据源的数据要能写入目的端数据源（来源端和目的端类型需要匹配，字段定义的大小需要匹配），即源端数据类型需要与写端数据类型匹配，源端是VARCHAR类型的...
行业算法版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT 行业算法版表的字段类型与数据库表的字段类型的对应关系 行业算法版表 ...
Datagen
如果任意字段生成器类型为序列生成器，则当某一字段的序列全部生成后，Source结束，生成有界表。fields.<field>.kind 为生成数据的生成器类型。String 否 random 参数可选值：random：随机生成器。sequence：序列生成器。关于生成器详情请...
API概览
DeleteTableColumnStatistics 删除元数据表统计信息 回收数据湖元数据表的字段统计信息。DeleteTableVersion 删除元数据表指定版本 删除数据湖元数据表指定版本。UpdateTable 更新元数据表信息 根据名称更新数据湖元数据表信息。...
表详情
当您需要全面了解并高效地使用表数据，您可在 数据管理DMS 的SQL窗口查看表的详细信息，包含表所属库、字段、索引、行数等技术元数据，类目、表描述等业务元数据，以及表权限、表Owner等管理元数据。背景信息 DMS在表详情中引入表的元数据...
算子功能详解
Trigger组件“Trigger组件”是“Recall召回”组件的前置组件，获取召回表的trigger，只能存在一个同类型组件。点击“+”选择新增算子类型 选择trigger表 KV类型trigger表的trigger字段为STRING类型的非主键字段（非pk字段）。KKV类型...
数据集组合
若不使用主数据集全部关联字段，同环比、辅助线、副指标及部分聚合能力将无法使用，建议取消未选中字段的字段关联或使用所有主数据集关联字段。使用限制 数据集组合不支持：数据集组合支持在 仪表板、数据大屏 和 电子表格 中使用，不支持...
系统管理
表详情：数据地图的表详情页中，在 明细信息 页签的字段信息生成DDL语句时，Comment字段将采用系统管理中定义的内容展示。场景示例 示例模型的表基本信息及字段基本信息如下表，代码生成策略配置为 基础信息-表中文名、字段管理-字段显示名...
配置数据识别规则
cd.ef*.sa*ry：cd结尾的project下，ef开头的表中，所有以sa开头、ry结尾的字段都会被排除，不会识别为该类敏感数据。命中率配置 支持您自定义识别规则命中率，当一列数据中的非空数据，超过命中阈值的数据符合数据内容识别条件时，则认为...
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
表设计规范
在事实表里冗余维表的字段，即把事件发生时的各种维度属性值与该事件绑定起来。使用者无需关联多张表就可以使用数据。此方式仅可应用于数据应用层。任意用拉链表或者日快照的形式，记录维表的变化情况。这使得数据结构变得灵活、易于扩展，...
折线类常见问题
当数据里没有 s 字段时，默认所有数据均为一个系列，即数据系列配置项只需配置一个系列的样式属性（有多个系列配置项时第一个生效）。系列名和数据中的 s 字段有什么关系？配置项 数据系列 配置的是一个系列的样式，系列名 决定了图例的...
上传数据
上传数据操作入口 您可以在数据开发的头部菜单栏、业务流程下的表分组或表管理页面中进行上传数据的操作，入口如下所示。在 数据开发 页面的头部菜单栏中。在 数据开发 页面业务流程下的表分组中。标准模式下，在 表管理 页面中，对开发表...
API概览
GetMetaTableDetailInfo 获取表的字段、索引等信息 调用GetMetaTableDetailInfo接口获取表的字段、索引等信息。GetMetaTableColumn 获取表的字段信息 调用GetMetaTableColumn接口获取表的字段信息。SyncInstanceMeta 同步实例下所有数据库...
MySQL分库分表同步至Hologres（方案1.0）
将分表数据写入目标单表：将源表满足 t_order.*正则表达式的表数据写入到Hologres名为 t_order 的表中，所有满足 t_user.*正则表达式的表数据写入到Hologres名为 t_user 的表中。为表加上统一前缀：在目标名前统一加上 cdo_前缀。schema：...
通过直连数据源模式创建API
如果逻辑表的字段类型不在待选参数类型范围内，推荐 选择String。操作符 选择您所需的操作符。说明 expr代表高级SQL中标签参数表达式。示例 填写请求参数值和返回参数值的示例，便于开发者理解。描述 填写对请求参数和返回参数的简单描述。...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
数据膨胀诊断
您也可以添加过滤条件，查看指定Schema或指定表的数据膨胀情况，查询语句如下：查看指定Schema下所有表的数据膨胀情况：SELECT*FROM adbpg_toolkit.diag_bloat_tables WHERE schema_name='名称>';查看指定表的数据膨胀情况：SELECT*FROM ...
概述
本文介绍如何使用 Create Table Like Mapping 填写建表的字段信息。Create Table Like Mapping 我们通常的建表语句是要求填写好所有的字段信息的，比如在DLA里面建一个底层映射到MongoDB的表的语法是这样的：create external table person...
配置并管理实时同步任务
在 选择同步的源表 区域，为您展示所选数据源下所有的表，您可以在 源端库表 区域选中需要同步的整库全表或部分表，并单击 图标，将其移动至 已选库表。重要 如果选中的表没有主键，将无法进行实时同步。在 设置表（库）名的映射规则 区域...
端到端图搜解决方案
本文将介绍企业在没有向量数据的情况下，如何通过 Ope nSearch向量检索版，快速搭建图像搜索服务。用户可以直接导入图片源数据，在OpenSearch内部便捷完成图片向量化、向量搜索等步骤，实现以图搜图、以文搜图等多种图像检索能力。方案架构...
全量数据同步
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
管理数据表
本文为您介绍如何快速查找数据表，并查看数据表中的数据字段和数据类型等信息。查询数据表 当数据源中的数据表过多，无法快速定位到自己所需的数据表时，您可以按照...您可以在 表详情 页面，查看表的字段名称、字段类型和字段描述等信息。
新建数据探查任务
权限 说明 超级管理员和运营管理员支持新建及管理所有数据表的数据探查；当前数据表负责人仅可新建及管理自己所负责表的数据探查。项目管理员支持新建及管理所负责项目下物理表的数据探查。板块管理员支持新建及管理所负责板块下逻辑表的...
- 产品推荐
- 这些文档可能帮助您