Dataphin集成任务同步失败报“Record columns has no ...
概述 通过修改输入端的字段大小写来解决同步失败问题。问题描述 集成任务从 AS400->odps 同步失败报错 Record columns has no sourceColName[n5mont]。问题原因 Dataphin集成任务同步过程中存在字段大小写敏感校验。从源端数据库（AS400）...
离线同步常见问题
MongoDB Reader是否大小写敏感？怎么配置MongoDB Reader超时时长？向包含主键自增列的目标表写入数据，需要如何配置OTS Writer？在时序模型的配置中，如何理解_tag和is_timeseries_tag两个字段？离线同步场景及解决方案 离线同步任务如何...
大小写不敏感
内核小版本（V1.1.24）（发布时间：2022年7月）之前创建的集群，当无法确保数据库中不存在同名不同大小写的数据库对象（database、schema、table、column）时，请勿手动开启大小写不敏感功能，否则可能导致查询不正确。为每个对象赋予合理...
大小写不敏感
内核小版本（V1.1.24）（发布时间：2022年7月）之前创建的集群，当无法确保数据库中不存在同名不同大小写的数据库对象（database、schema、table、column）时，请勿手动开启大小写不敏感功能，否则可能导致查询不正确。为每个对象赋予合理...
创建索引或约束支持的字段类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...
CREATE STREAM
physical_column_definition 是 物理列，指通常意义下的数据库字段，包括字段名称、字段类型和字段顺序等。外部系统根据物理字段读取或写入数据。column_name：物理列的列名。column_type：物理列的数据类型。column_constraint：物理列...
通用参考
SPL在不同场景的功能定义 日志服务在不同场景中使用SPL，其功能定义存在差异，细节如下：SPL功能的入口 Logstore索引过滤结果作为输入 字段名大小写敏感 全文字段_line_实时消费 调用PullData API消费数据，比如自定义消费组、Flink计算等 ...
SPL指令
说明 关于字段名称大小写敏感详情，请参见 SPL在不同场景的功能定义。FieldPattern 字段名和通配符组合或者字段名类型参数。支持通配符号*，表示匹配0个或多个任意字符。需使用双引号（""）包裹，例如|project"_tag_:*。说明 关于字段名称...
目标库对象名称大小写策略
策略说明 DTS目前支持配置如下四种目标库对象名称大小写策略：DTS默认策略 DTS会根据目标数据库类型和相关参数（如 lower_case_table_names），来配置目标实例中迁移对象的库名、表名、列名等英文大小写规则。目标数据库类型 目标库参数 ...
目标库对象名称大小写策略
策略说明 DTS目前支持配置如下四种目标库对象名称大小写策略：DTS默认策略 DTS会根据目标数据库类型和相关参数（如 lower_case_table_names），来配置目标实例中迁移对象的库名、表名、列名等英文大小写规则。目标数据库类型 目标库参数 ...
目标库对象名称大小写策略
策略说明 DTS目前支持配置如下四种目标库对象名称大小写策略：DTS默认策略 DTS会根据目标数据库类型和相关参数（如 lower_case_table_names），来配置目标实例中迁移对象的库名、表名、列名等英文大小写规则。目标数据库类型 目标库参数 ...
数据库管理
参数 说明 数据库（DB）名称 以字母开头，以字母或数字结尾；由小写字母、数字、下划线或中划线组成；长度为2~64个字符。数据库名称在集群内必须是唯一的。说明 请勿使用保留关键字作为数据库名称，如 test 等。数据库Owner 数据库的所有者...
数据库管理
参数 说明 数据库（DB）名称 以字母开头，以字母或数字结尾；由小写字母、数字、下划线或中划线组成；长度为2~64个字符。数据库名称在实例内必须是唯一的。说明 请勿使用保留关键字作为数据库名称，如 test 等。数据库Owner 数据库的所有者...
结构设计
校验某些字段是否存在 保存编辑，校验字段 新增字段，禁止字段名为关键字 新增字段，字段必须填写备注 新增字段，限制字段名大小写 原有表新增非空字段必须明确指定默认值 原有字段，可空改为非空必须明确指定默认值 限制新增主键字段必须...
使用canal同步
对于中小规模的数据库或者个人开发者，您可以使用canal将MySQL数据同步到表格存储。canal部署简单，易于运维，适用于中小规模MySQL数据同步。前提条件 已开启MySQL binlog功能，并且配置binlog-format为ROW模式。已创建目标Tablestore表。...
源库和目标库的字符集大小写不一致导致目标库数据缺失
Oracle数据库和MySQL数据库对大小写敏感度的要求不一致。Oracle：区分大小写，对主键或唯一键字段可以插入仅大小写不同的值，如'a'和’A'。MySQL：是否区分大小写由字符序（COLLATE）决定。一般"_ci"表示大小写不敏感；cs"表示大小写敏感...
虚拟服务（Virtual Service）CRD说明
说明 支持通过配置项 ignoreUriCase 启用不区分大小写的匹配。scheme StringMatch 否 URI Scheme值，区分大小写。示例如下：exact:"value"：精确的字符串匹配。prefix:"value"：前缀匹配。regex:"value"：RE2样式的正则表达式匹配。更多...
配置SQL审核优化建议
NAME_FORBID_KEYWORD 限制字段名大小写：COLUMN_NAME_LIMIT_CHAR_CASE 不能设置列的字符集：COLUMN_FORBID_SET_CHARSET 限制列不能使用部分数据类型：COLUMN_FORBID_DATA_TYPES 列要有注释：COLUMN_MUST_HAVE_COMMENTS 限制 char 类型字段...
创建数据库账号
拥有集群中所有数据库的所有权限。可以断开任意账号的连接。普通账号 可以通过控制台或者SQL语句创建和管理。一个集群可以创建多个普通账号，具体的数量与数据库内核有关。需要手动给普通账号授予特定数据库的权限。普通账号不能创建和管理...
创建数据库账号
拥有集群中所有数据库的所有权限。可以断开任意账号的连接。普通账号 可以通过控制台、API或者SQL语句创建和管理。一个集群可以创建多个普通账号，具体的数量与数据库内核有关。需要手动给普通账号授予特定数据库的权限。普通账号不能创建...
区分大小写
字符和字符串常量区分大小写，从 PolarDB PostgreSQL版（兼容Oracle）数据库检索的任何数据或从其他外部源获取的数据也是如此。语句 DBMS_OUTPUT.PUT_LINE('Hello World!');生成以下输出：Hello World!但语句 DBMS_OUTPUT.PUT_LINE('HELLO ...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
CreateAccount
例如，需要授权数据库DB1读写权限，授权数据库DB2只读权限，您需要设置 DBName 为 DB1,DB2，并设置 AccountPrivilege 为 ReadWrite,ReadOnly。仅PolarDB MySQL版集群的普通账号支持设置该参数。ClientToken String 否 6000170000591aed949d...
CreateAccount
例如，需要授权数据库DB1读写权限，授权数据库DB2只读权限，您需要设置 DBName 为 DB1,DB2，并设置 AccountPrivilege 为 ReadWrite,ReadOnly。仅PolarDB MySQL版集群的普通账号支持设置该参数。ClientToken String 否 6000170000591aed949d...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
有约束的列修改类型
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，OceanBase 数据库 Oracle 租户允许执行修改一列是经过类型映射后的结果。本文表格中，短横线（-）表示没有、...
从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
同步时源库为Db2 for LUW的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
迁移时源库为Oracle的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致迁移结果不符合预期。在数据迁移完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
没有约束的列修改类型
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段类型的不兼容场景。说明 本文表格中，OceanBase 数据库 Oracle 租户允许执行修改一列是经过类型映射后的结果。本文表格中，短横线（-）表示没有、all...
Canal
canal-json.database.include 选填(none)String 一个可选的正则表达式，通过正则匹配Canal记录中的database元字段，仅读取指定数据库的changelog记录。正则字符串与Java的 Pattern 兼容。canal-json.table.include 选填(none)String 一个可...
MongoDB数据导入
查询ObjectId字段 示例数据 在数据库 test_mongodb 中创建名为 test_objectid 的集合，示例如下：db.createCollection("test_objectid");向 test_objectid 集合中插入文档，示例如下：db.test_objectid.insert({ 'id':1,})查询 test_...
函数总览
str_swapcase 对字符串的大小写字母进行转换。str_count 统计字符串里某个字符出现的次数。str_find 判断原字符串中是否包含指定的子字符串。str_rfind 查找字符串中指定字符最后一次出现的位置。str_endswith 判断字符串是否以指定后缀...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
如何降低索引流量费用？
如果是全文索引，则日志字段名（Key）和字段值（Value）都将作为text类型存储，字段名和字段值都被计入在索引流量中。如果是字段索引，long类型和double类型的字段名不计入在索引流量中。使用字段索引，可降低索引流量费用。例如：对 ...
横向虚拟关联
建模的数据输入分别位于己方和对方的数据库中，对字段进行匹配对齐。组件截图 二、参数说明 参数名称 参数说明 选择保留字段 选择参与方1和参与方2的匹配字段，用于后续横向建模。默认按字段名称（忽略大小写）自动匹配。字段别名默认使用...
旧版告警设置
说明 RawResults和FireResult内的字段为查询结果，区分大小写，其他字段均不区分大小写。{"EndTime":"2006-01-02 15:04:05","EndTimeTs":1542507580,"FireResult":{"_time_":"1542453580","field":"value1","count":"100"},"FireResultAsKv...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
Quick BI能否基于数据集新建字段再创建新字段
概述 本文主要介绍Quick BI能否基于数据集新建字段再创建新字段。详细信息 Quick BI不能基于数据集新创建的字段再创建新字段。可以使用数据库中的字段使用多个函数来创建新字段达到想要的结果。适用于 Quick BI
- 产品推荐
- 这些文档可能帮助您