V4更新 用户洞察 对数据表的导入调度新增通过接口触发的方法,为每个数据表提供一个触发接口,可实现底表加工任务执行完成后再触发QA侧调度任务,请参见 调度任务。支持查看受众人群可用的每种ID的数量、覆盖率,请参见 查看受众ID详情。
该参数只允许在对带有random分区的 Duplicate 表导入数据的时候设置。使用示例 创建待导入的SelectDB数据表,示例如下。CREATE TABLE test_table(id int,name varchar(50),age int,address varchar(50),url varchar(500))DISTRIBUTED BY ...
该参数只允许在对带有random分桶的 Duplicate 表导入数据的时候设置。使用示例 创建待导入的SelectDB数据表,示例如下。CREATE TABLE test_table(id int,name varchar(50),age int,address varchar(50))UNIQUE KEY(`id`)DISTRIBUTED BY ...
创建完成维表后,您可以在维表中直接写入数据,也可以导入电子表格、本地CSV文件和Excel文件的数据至维表,为后续数据分析做准备。前提条件 已创建完成一个维表,详情请参见 创建维表。操作步骤 在 维表 页面,单击 全部维表 下相应的 文件...
本文为您介绍数据合并、清洗加工、聚合、转置、关联等...两个关联的表中如果有相同的字段,将自动对字段进行重命名。查看数据详情。支持查看 数据探查、数据详情 和 字段列表。数据加工完成后,您可以将加工后的数据导出。请参见 输出数据。
如果结合上游系统的At-Least-Once语义,则可以实现导入数据的Exactly-Once语义。同步及异步导入 导入方式分为同步和异步。对于同步导入方式,返回结果即表示导入成功还是失败。而对于异步导入方式,返回成功仅代表作业提交成功,不代表数据...
bin/bash#用0来替换第一个字段的NULL值,把^|替换成0|#用0来替换中间字段的NULL值,把|替换成|0|#用0来替换最后一个字段的NULL值,把|$替换成|0 for s_f in `ls*dat` do echo"$s_f"i=1 while[`egrep '\|\|^\|\|$'$s_f|wc-l`-gt 0]do echo$i...
最高涉密等级:为您展示该数据表的字段的敏感程度,数据分级 等级从低到高为L1、L2、L3、L4(公开到绝密)及自定义的数据分级。创建时间:为您展示该数据表的创建的时间,格式为:yyyy-mm-dd hh:mm:ss。创建人:为您展示创建该数据表的用户...
最高涉密等级:为您展示该数据表的字段的敏感程度,数据分级 等级从低到高为L1、L2、L3、L4(公开到绝密)及自定义的数据分级。创建时间:为您展示该数据表的创建的时间,格式为:yyyy-mm-dd hh:mm:ss。创建人:为您展示创建该数据表的用户...
表结构:包括 字段 详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...
表结构:为您展示 字段名称、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的...
V4更新 数据接入 数据导入:支持从计算源导入数据表时不导入部分表字段,需要在表结构配置中关闭该字段的导入开关,请参见 表结构配置文档,支持在编辑时关闭/开启导入开关。用户营销 人群管理页面:支持基于文本型、多值型标签,为选中的...
表结构:包括 字段 详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...
表结构:包括 字段详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...
导入数据 在 Project Explorer 区域,单击MaxCompute项目的 Tables&Views 节点前的下拉箭头,右键单击需要导入数据的表,选择 Import data into table。在 Importing data to table_name 对话框中,配置导入文件参数。Input File:导入数据...
表结构:包括 字段详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...
各配置说明如下:数据延迟:开启数据延迟,系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部数据。详细说明,请参见 配置逻辑表数据延迟。调度属性:用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性,配置维度逻辑表的...
各配置说明如下:数据延迟:开启数据延迟,系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部数据。详细说明,请参见 配置逻辑表数据延迟。调度属性:用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性,配置维度逻辑表的...
本文介绍字段加工算子的使用方法和注意事项。用途 字段加工算子可以将节点的数据进行逻辑加工,然后作为输出字段在之后的节点使用。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明...
跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于对表/分区的大小、行数的稳定性进行校验,统计结果和固定值进行比较。表波动性校验 用于对表/分区的大小、行数的...
跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于对表/分区的大小、行数的稳定性进行校验,统计结果和固定值进行比较。表波动性校验 用于对表/分区的大小、行数的...
方法一:使用 INSERT INTO 语句导入数据,当主键重复时会自动忽略当前写入数据,数据不做更新,作用等同于 INSERT IGNORE INTO,更多信息,请参见 INSERT INTO。示例如下:INSERT INTO adb_demo.adb_import_test SELECT*FROM adb_external_...
Reference(引用):选择该类型后需要选择关联的表和字段,该引用字段的实际类型与关联字段的类型相同。其中,关联的表是当前版本限界上下文已经保存的数据模型,关联字段是关联表内的字段。Sequence(序列):自增长序列,默认为Long类型...
注意事项 导入数据功能支持分批执行SQL,默认每批次执行1000条SQL,但不保证整体SQL事务。说明 保证整体SQL事务指执行的所有SQL中,如果有一条SQL执行失败,则全部的SQL都会被取消执行资格,并回滚到执行前的状态。操作步骤 如下以安全协同...
从数据库导入模型 如果已经在数据库中建好表和字段,需要将表结构同步到BizWorks中,可以使用导入数据模型功能。在 数据模型 页面,选择 更多>从数据库导入模型。在 数据库导入数据模型 面板的 配置数据库参数 配置向导页面,完成相关参数...
本文介绍字段排序算子的使用方法和注意事项。用途 字段排序算子可以对节点的输出字段顺序进行调整。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 字段排序 通过拖拽的方式对字段...
本文介绍分组排序算子的使用方法和注意事项。用途 分组排序算子按照指定的字段进行分组,并对分组内的数据按照指定的顺序进行排序输出。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 否 使用...
成功将数据导入分析型数据库MySQL版后,您就可以使用分析型数据库MySQL版进行数据分析。进入 DataWorks控制台,单击对应项目操作栏中的 数据开发。单击左侧菜单栏中的 数据开发,右键单击 业务流程 新建一个流程。右键单击 步骤2 中新建的...
同步Greenplum数据源的数据至其他数据源的场景中,您需要先配置Greenplum输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口,进入离线管道脚本的开发页面...
同步Greenplum数据源的数据至其他数据源的场景中,您需要先配置Greenplum输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口,进入离线管道脚本的开发页面...
表结构:包括 字段详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。说明 当计算引擎为StarRocks...
表结构:包括 字段详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。说明 当计算引擎为StarRocks...
说明 逻辑表对应字段关联数据标准中的值后,如果确认用标准字段的名称覆盖当前逻辑表字段的名称,则单击 确认 后,逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值,例如:逻辑表中的手机号码原始字段...
说明 逻辑表对应字段关联数据标准中的值后,如果确认用标准字段的名称覆盖当前逻辑表字段的名称,则单击 确认 后,逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值,例如:逻辑表中的手机号码原始字段...
目标表名 需要导入数据的表名称。目标表描述 目标表的信息描述。同步字段 需要导入的MaxCompute表字段。您可以选择导入部分或全部字段。分区配置 需要导入的分区字段。一键MaxCompute数据同步 功能仅支持导入一级分区。如果您需要导入多级...
目标表名 需要导入数据的表名称。目标表描述 目标表的信息描述。同步字段 需要导入的MaxCompute表字段。您可以选择导入部分或全部字段。分区配置 需要导入的分区字段。一键MaxCompute数据同步 功能仅支持导入一级分区。如果您需要导入多级...
本文汇总了创建数据集的常见问题。加工数据集字段问题 如何通过参数SQL实现占比的灵活运算?如何通过参数SQL实现累计计算?如何通过参数SQL实现输入单个日期,可以查询最近n天数据?如何在创建仪表板时实现两个字段间的运算操作?函数from_...
自助分析流程 管理员已导入数据表,并从导入的数据表筛选出人群。导入操作请参见 数据导入,筛选人群操作请参见 人群筛选。后续的自助分析将围绕该人群,基于导入的数据进行分析。用户标签表、用户行为表、订单明细表、订单汇总表、统计表...
本文介绍数据去重算子的使用方法和注意事项。用途 数据去重算子可以按照指定的字段去除重复的数据,只保留其中一条,然后输出到下个节点。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 ...
可以导入已有数据,预览查看数据信息,本文介绍如何导入数据。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 洞察。在顶部菜单栏,选择 数据集。说明 若已在 数据集 页面,请跳过该步骤。在数据集管理页面,单击右上角...