Dataphin中全域数据表联合主键的质量规则设置方法
概述 Dataphin中全域数据表联合主键的质量规则设置方法。需要联合主键的两个字段都不为空。详细信息 全域数据表可以针对数据源中的数据表设置质量规则。创建质量规则，模板来源选择“自定义SQL”，模板规则选择“自定义统计指标校验”，...
Dataphin中如何使用有联合主键的物理表创建维度逻辑表
概述 Dataphin中如何使用有联合主键的物理表创建维度逻辑表。详细信息 当物理表中主键的形式为联合主键时，可以在写维度逻辑表的主键定义逻辑时，通过计算源支持的一些函数，比如concat（）函数，将两个字段合并为一个主键字段，实现逻辑表...
配置Elasticsearch输出
说明 选择_id主键取值方式，但却没有为该Elasticsearch主键映射源端字段，即选择业务主键取值方式但源端不存在主键，选择联合主键取值方式后未配置主键列，此时主键设置的取值方式不生效，同步时将随机生成_id值，此操作可能会带来数据重复...
配置列映射
rowkeyFormatterType 表示宽表中每行主键映射到索引表主键ID（数据类型为String）的方式，支持以下两种：STRING：适用于宽表的主键为String类型，例如主键为row1，order0001。该方式使用Bytes.toString(byte[])函数将宽表的主键转成索引表...
常见问题
原因：宽表引擎的主键、二级索引和MySQL联合索引的匹配规则类似，均遵循最左匹配原则，即在多个列组成的联合主键或索引中，系统从主键或索引键的第一列（最左侧列）开始逐一与查询条件中的列进行匹配。如果查询条件中不包含主键或索引键的...
REPLACE INTO
说明 本文所指的主键既包括单个列的主键，也包括由多列组成的复合主键（Composite Primary Key）。语法如下：REPLACE INTO table_name[(column_name,.)]VALUES({常量|NULL|DEFAULT},.),(.),.示例 通过 REPLACE INTO 向CUSTOMER表中插入一条...
配置DataWorks平台GDB Writer
请谨慎选择点的主键映射规则idTransRule。如果选择None，需要保证点的ID在全局点的范围内唯一。边有以下约束规则：边必须具备类型名（即边名称，对应label）。边的主键ID为可选：如果填写，则需要保证在全局边范围内唯一。如果不填写，则...
CREATE TABLE（2.0版）
primary key：指定主键，可以为联合主键。示例 CREATE DIMENSION TABLE goods(goods_id bigint comment '货物编号',price double comment '价格',class bigint comment '类别',name varchar comment '名称',update_time timestamp comment ...
Graph Database（GDB）数据源
请谨慎选择点的主键映射规则 idTransRule。如果选择 none，需要保证点的ID在全局点的范围内唯一。边有以下约束规则：边必须具备类型名（即边名称，对应 label）。边的主键ID为可选。如果填写，则需要保证在全局边范围内唯一。如果不填写，...
从RDS原生实时同步
多实例多库相同表同步至单表：目标表自动增加一个source_schema字段放在第一列，该字段存储通道信息、库信息、表信息，并作为联合主键，防止 多实例多库分库分表同步到一个目标表出现主键冲突。如果确定同步不会出现主键冲突，可以不使用这...
主键Primary Key
最多支持32个列组成的联合主键。不支持将Float、Double、Numeric、Array、Json、Date及其他复杂数据类型的字段设置为主键。Hologres从 V1.3.22及以上版本支持将Date类型字段设为主键，如需将Date类型字段设为主键，请先查看您Hologres实例...
AT 模式接入
必须定义主键，且必须是唯一主键，不支持复合主键。SQL 语句 只针对 DML 语句（INSERT、UPDATE、DELETE），查询语句（SELECT），与 GTS 工作机制无关，没有限制。不支持修改主键的语句。语句涉及主键的值，只支持确定值或列自增，不支持...
CREATE TABLE
如需多个列作为主键，请在表约束（table_constraints）中定义复合主键。table_constraints（索引）AnalyticDB for MySQL 支持多种索引，包括INDEX索引、主键索引、聚集索引、外键索引、全文索引、向量索引等。一个表可以有一种或多种索引。...
错误码
DTX-505‘INSERT INGORE’and‘INSERT ON DUPLICATE UPDATE’statement must contain primaryKey colmun(s),sql:[%s]INSERT INGORE 和 INSERT ON DUPLICATE UPDATE 中不得使用自增主键句式 INSERT INGORE 和 INSERT ON DUPLICATE UPDATE 不...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
警告 由于此场景属于异构数据库间的数据同步，数据类型无法一一对应，可能会导致任务失败或数据丢失，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 结构初始化涉及的数据类型映射关系。不支持结构初始化的结构对象有：assemblies...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
源库和目标库结构映射模式 根据业务需求，选择结构映射模式，以对不同结构的源目库进行映射。警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
源库和目标库结构映射模式 根据业务需求，选择结构映射模式，以对不同结构的源目库进行映射。警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
若选择的迁移对象为整库，默认情况如下：源库中待迁移的表有主键（包含主键为单列和多列），则以该主键列为分布键。源库中待迁移的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个迁移...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
源库和目标库结构映射模式 根据业务需求，选择结构映射模式，以对不同结构的源目库进行映射。警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
源库和目标库结构映射模式 根据业务需求，选择结构映射模式，以对不同结构的源目库进行映射。警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步...
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
警告 由于此场景属于异构数据库间的数据同步，数据类型无法一一对应，可能会导致任务失败或数据丢失，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 结构初始化涉及的数据类型映射关系。不支持结构初始化的结构对象有：assemblies...
RDS MySQL迁移至AnalyticDB MySQL 3.0
若选择的迁移对象为整库，默认情况如下：源库中待迁移的表有主键（包含主键为单列和多列），则以该主键列为分布键。源库中待迁移的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个迁移...
RDS MySQL同步至AnalyticDB MySQL 3.0
若选择的同步对象为整库，默认情况如下：源库中待同步的表有主键（包含主键为单列和多列），则以该主键列为分布键。源库中待同步的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个同步...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
警告 由于此场景属于异构数据库间的数据迁移，数据类型无法一一对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的存量数据，全部迁移到目标库中。增量迁移 DTS...
配置DataWorks平台GDB Reader
本文为您介绍GDB Reader支持的数据类型、字段映射和数据源等参数及配置示例。说明 GDB Reader仅支持使用 独享数据集成资源组 和 自定义资源组。开始配置GDB Reader插件前，请首先配置好数据源，详情请参见 配置Graph Database数据源。由于...
使用DataWorks数据集成从MySQL导入数据到GDB
value":"#{0}"/主键映射列序号 },{"columnType":"vertexProperty",/点属性映射"name":"m_id",/属性名"type":"string",/属性值类型"value":"#{2}"/属性值映射列序号 },{"columnType":"vertexProperty",/点属性映射"name":"imagefile",/属性...
更新映射表属性列
不支持添加或者删除映射表主键列的操作。执行ALTER TABLE语句后，SQL引擎会异步进行刷新，最多30秒完成刷新。在此期间执行返回所有列等操作时可能不会返回新添加的列。只有通过CREATE TABLE语句创建的映射表才支持使用ALTER TABLE语句更新...
CommonPool 配置示例
主键的映射制作在 id 元素上->!name:对象中用于作为主键的属性名->!colomn:表中主键字段名->!如果 name 与 column 值相同，可以省略 column->!要注意 Hibernate 主键生成策略*->!属性与字段的映射制作在 property 元素上->!name:类中的属性...
Hibernate 连接 OceanBase 数据库
主键的映射制作在 id 元素上->!name:对象中用于作为主键的属性名->!colomn:表中主键字段名->!如果 name 与 column 值相同，可以省略 column->!将 generator 元素 class 属性设置为"assigned"手动生成,必须给 id->!要注意 Hibernate 主键...
Hibernate 连接 OceanBase 数据库
主键的映射制作在 id 元素上->!name:对象中用于作为主键的属性名->!colomn:表中主键字段名->!如果 name 与 column 值相同，可以省略 column->!将 generator 元素 class 属性设置为"assigned"手动生成,必须给 id->!要注意 Hibernate 主键...
同步数据到时序表
tablestore.mode=timeseries#时序表主键字段映射。tablestore.timeseries.test.measurement=m tablestore.timeseries.test.dataSource=d tablestore.timeseries.test.tags=region,level#时序表时间字段映射。tablestore.timeseries.test....
Kafka数据接入
消息 Key 格式 选择 JSON，且 主键模式 选择 record_key，或 消息 Value 格式 选择 JSON，且 主键模式 选择 record_value，显示该参数。单击 添加 可以增加列名。最多支持配置四个列名。无 写入模式 指定写入模式，支持 put 和 update 两种...
映射富化函数
本文介绍映射富化函数的语法规则，包括参数解释、函数示例等。函数列表 类型 函数 说明 字段映射 e_dict_map 与目标数据字典进行映射，根据输入的字段映射一个新字段。支持和其他函数组合使用。相关示例，请参见 使用e_dict_map、e_search_...
索引介绍
表格存储的宽表模型包含多个主键列，多列主键列按照顺序共同构成一个主键，类似MySQL的联合主键，也可以把多个主键列拼接起来看作HBase的RowKey，每一列其实都只是整体主键的一部分。采用多列主键主要原因如下：业务常需要多个字段来构成...
ClickHouse整库数据离线同步至Hologres
是否有主键 通过获取目标表的主键信息自动映射。如果是可视化建表，则可以单击目标表名列的 图标，编辑目标表结构选择主键，然后重新刷新表映射。如果目标表有主键，则系统会使用新数据覆盖旧数据，整行所有列全部覆盖，没有配置列映射的...
新建事实逻辑表
步骤三：配置事实逻辑表计算逻辑 在 计算逻辑 页面，配置事实逻辑表的来源数据与主键间的映射关系。单击 来源配置，进入 来源配置 对话框并在 来源配置 对话框中，配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对事件时间的...
新建事实逻辑表
步骤三：配置事实逻辑表计算逻辑 在 计算逻辑 页面，配置事实逻辑表的来源数据与主键间的映射关系。单击 来源配置，进入 来源配置 对话框并在 来源配置 对话框中，配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对事件时间的...
Presto Server配置和SQL示例
映射表中主键列的名称和顺序必须与Tablestore数据表中主键列的名称和顺序保持一致。映射表中每一个属性列可通过指定 origin_name参数来映射到Tablestore中实际表内的列名。以下SQL示例用于为Tablestore数据表exampletable创建一个同名映射...
新建普通维度逻辑表
步骤三：配置普通维度逻辑表计算逻辑 计算逻辑 配置页面用于配置维度逻辑表的来源数据与主键间的映射关系。单击 来源配置，进入 来源配置 对话框并单击 添加来源对象 按钮，配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对...
新建普通维度逻辑表
步骤三：配置普通维度逻辑表计算逻辑 计算逻辑 配置页面用于配置维度逻辑表的来源数据与主键间的映射关系。单击 来源配置，进入 来源配置 对话框并单击 添加来源对象 按钮，配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对...
- 产品推荐
- 这些文档可能帮助您