0016-00000834
如果某一行是非法CSV行，例如在某一列中间连续出现奇数个quote字符，则OSS会马上停止处理并报错。该错误很可能会影响对整个CSV文件的解析。该参数用于调整对非整齐数据的容忍度，但不应用于非法的CSV文件。相关文档 查询文件 SelectObject
SelectObject
说明 如果某一行是非法CSV行，例如在一列中间连续含有奇数个quote字符，则OSS会马上停止处理并报错，因为该错误很可能会影响对整个CSV文件的解析。即该参数用来调整对非整齐数据的容忍度，但不应用于非法的CSV文件。默认 0。子节点：None ...
生成列
本文介绍了生成列的相关内容。简介 生成的列是一个特殊的列，它总是从其他列计算而来。因此说，它对于列就像视图对于表一样。生成列有两种：存储列和虚拟列。存储生成列在写入（插入或更新）时计算，并且像普通列一样占用存储空间。虚拟...
列存索引常见问题
使用 ALTER TABLE 语句为现有表动态添加列索引后，列索引的构建是在只读列存节点异步完成的，通过连接开启行存/列存分流的集群地址或者直连列存节点，可以查询 INFORMATION_SCHEMA.IMCI_INDEXES 表以获得列索引的构建状态，只有 COMMITTED ...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了系统视图，您可以使用系统视图来查看分区表的结构信息。PolarDB PostgreSQL版...column_name 分区键列的名称.column_position 该列在子分区键中的位置（第一列的列位置为1，第二列的列位置为2.）。
如何使用预定义列
预定义列是指在数据表上预先定义一些非主键列以及其类型。本文介绍如何使用预定义列。重要 单个数据表默认最大支持添加32个预定义列。如果不满足使用需求，请 提交工单 申请调整。如果要使用二级索引，您需要通过如下方式为数据表添加预定...
多元索引虚拟列
数据类型映射 表中数据类型 多元索引虚拟列数据类型 SQL数据类型 多元索引虚拟列在表中无对应的列，只有虚拟列对应的原始列在表中有对应的列。多元索引数据类型和数据表数据类型映射请参见 数据类型映射。Keyword MEDIUMTEXT Text ...
管理列映射
通过开源客户端使用搜索索引需要将宽表的数据同步至索引表，同步的方法是建立宽表和索引表的列映射，列映射配置完成后，需要对列映射进行管理操作，包括创建列映射、查看列映射、增加列映射、删除列映射。前提条件 已安装Java环境，要求...
通配符列
通配符列是指列名由通配符组成的列，多用于模糊匹配、动态列写入等场景，可以更灵活地匹配和查找目标列。在Lindorm宽表引擎中使用通配符列，可以满足多数据类型动态写入的需求。本文介绍通配符列的使用限制及使用方法。背景信息 在大数据量...
二级索引简介
在创建数据表时预先定义一些列（称为预定义列）后，您可以对任意预定义列和数据表主键列进行索引，指定数据表的若干个预定义列作为索引表属性列。索引表中也可以不包含任何属性列。当指定数据表的若干个预定义列作为索引表属性列时，读取...
主键列自增
设置非分区键的主键列为自增列后，在写入数据时，无需为自增列设置具体值，表格存储 会自动生成自增列的值。该值在分区键级别唯一且严格递增。特点 主键列自增具有如下特点：自增列的值在分区键级别唯一且严格递增，但不保证连续。自增列的...
虚拟列
数据表中字段类型 虚拟列字段类型 String Keyword（含数组）String Text（含数组）String Long（含数组）String Double（含数组）String Geo-point（含数组）Long Keyword Long Text Double Keyword Double Text 虚拟列目前仅支持用在查询...
通用限制
操作限制 操作 限制值 说明 一次请求写入的属性列的个数 1024列 使用PutRow、UpdateRow或BatchWriteRow接口操作时，单行写入的属性列的个数不能超过1024列。读请求中columns_to_get参数的列的个数 0~128个 读请求一行数据中获取的列的最大...
预定义列操作
为数据表增加预定义列或删除数据表的预定义列。设置预定义列后，在创建二级索引时将预定义列作为索引表的索引列或者属性列。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表。增加预定义列 使用二级索引时，如果未设置...
动态增加或删除列存索引的DDL语法
本文介绍了如何在建表之后，通过DDL语句动态创建和删除列存索引。前提条件 在添加完只读列存节点，并配置好对应的集群地址后，您可以通过集群地址连接到集群，使用SQL语句创建并管理列存索引。添加只读列存节点。配置集群地址。为了实现行...
在线修改列类型
语法 目前在线修改列类型的具体语法如下，使用在线修改列类型时，支持同时修改多个列的列类型，并且支持在修改列的同时进行加列和减列操作。ALTER TABLE tbl_name alter_option[,alter_option].ALGORITHM=OMC alter_option:{ table_options...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。前提条件 已初始化Client，详情请参见 初始化。已创建数据表并写入数据。限制 只支持对整型列的列值进行...
pg_attribute
目录 pg_attribute 存储有关表列的信息。数据库中的每一个表的每一个列都恰好在 pg_attribute 中有一行。（这其中也会有索引的属性项，并且事实上所有具有 pg_class 项的对象在这里都有属性项entries）。列名称 列类型 描述 attrelid oid ...
通过控制台使用二级索引
设置预定义列后，您可以在创建二级索引时将预定义列作为索引表的索引列或属性列。创建二级索引后，您可以使用二级索引进行数据查询。前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1，数据生命周期（Time to Live）...
秒级修改列字符集
在MySQL中，当用户指定列的字符集为UTF-8时，会默认使用utf8mb3字符集，该字符集最大使用3个字节来存储字符。如果用户需要存储表情（emoji）等信息时，则需要将列字符集修改为utf8mb4。一般情况下，修改列字符集需要重建表，耗时较长，且对...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。前提条件 已初始化Client，详情请参见 初始化。已创建数据表并写入数据。限制 只支持对整型列的列值进行...
IForest异常检测
页签 参数名称 描述 字段设置 特征列名数组 如果您已经配置了 向量列名 或 tensor列，则该参数不允许配置。用于训练的特征列名。说明 特征列名数组、tensor列 和 向量列名 是三个互斥参数，您只能使用其中一个参数来描述算法的输入特征。...
列值翻译
在实时监控平台中，与日志筛选中的白名单筛选列、黑名单筛选列，以及列值分组中的分组列相关的列值配置页面都有列值翻译功能。列值翻译功能支持脚本导入。当翻译量较大时，可以将之前配置过的类似翻译规则转化为脚本并复制到当前脚本配置框...
预定义列操作
为数据表增加预定义列或删除数据表的预定义列。设置预定义列后，在创建全局二级索引时将预定义列作为索引表的索引列或者属性列。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表。增加预定义列 使用二级索引时，如果未...
配置列映射
配置示例 宽表和索引表的列映射采用JSON文件实现，列映射的配置示例如下，将宽表 testTable 的数据同步至索引表 democollection，宽表的 f:name 这一列映射到索引表的 f_name_s 这一列，宽表的 f:age 这一列映射到索引表的 f_age_i 这一列...
列存索引配置参数说明
本文介绍了与列存索引相关的参数，以及参数说明内容。参数 说明 loose_imci_auto_update_statistic 当统计信息过旧时，列存索引（IMCI）优化器是否重新收集统计信息。取值范围如下：ASYNC（默认）：当统计信息过旧时，列存索引（IMCI）优化...
更新映射表属性列
执行ALTER TABLE语句为已存在的映射表添加或删除属性列。说明 关于创建映射表的具体操作，请参见 创建表的映射关系。注意事项 执行ALTER TABLE语句仅支持更新映射表的Schema，不会更新表格存储的数据存储Schema。不支持添加或者删除映射表...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。前提条件 已初始化OTSClient。具体操作，请参见 初始化OTSClient。已创建数据表并写入数据。限制 只支持...
列式JSONB
列式JSONB原理介绍 如下图所示开启JSONB列式存储优化后，系统会在底层自动将JSONB的列转换为强Schema的列式存储，查询JSONB中某一个Value时就可以直接命中指定列，从而提升查询性能。同时因为JSONB中的Value是按列式存储的，在存储层可以...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。前提条件 已初始化Client，详情请参见 初始化OTSClient。已创建数据表并写入数据。限制 只支持对整型列的...
SQL使用限制
大小写敏感 不敏感 由于 表格存储 中原表名和列名均是大小写敏感的，当使用SQL时，原表名和列名会统一转换为小写字母进行匹配，即如果要操作 表格存储 中的Aa列，在SQL中使用AA、aa、aA、Aa均可，因此在原表名或者列名不能同时为AA、aa、aA...
多列索引
一个索引可以定义在表的多个列上。例如，我们有这样一个表：CREATE TABLE test2(major int,minor int,name varchar);（即将我们的/dev 目录保存在数据库中）而且我们经常会做如下形式的查询：SELECT name FROM test2 WHERE major=constant ...
使用说明
其他 如果您对列存索引背后的原理感兴趣，您可以参考以下文档来进一步了解列存索引：PolarDB IMCI发表在 SIGMOD2023上的论文 列存索引技术白皮书 列存索引技术架构介绍 列存索引中TopK算子的实现 列存索引中HashMatch算子的实现 列存索引中...
聚集列（2.0版）
在分析型数据库MySQL版中，数据存储支持按一列或多列进行排序（先按第一列排序，第一列相同情况下使用第二列排序），以保证该列中值相同或相近的数据保存在磁盘同一位置，这样的列我们称之为聚集列。当以聚集列为查询条件时，由于查询结果...
概述
本文介绍了列存索引的特点、架构和适用场景。简介 传统的OLTP和OLAP解决方案基于简单的读写分离或ETL模型，将在线库的数据以T+1的方式抽取到数据仓库中进行计算，这种方案存在存储成本高、实时性差、链路和维护成本高等缺陷。为应对数据...
动态列
云原生多模数据库 Lindorm 宽表引擎支持动态列功能，即创建表时未显式指定的列，在实际业务中动态写入数据并执行查询。本文介绍如何通过Lindorm SQL实现动态列能力的开启、写入以及查询。背景信息 传统关系型数据库表的Schema必须预先定义...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。说明 从Python SDK 5.1.0以上版本开始支持原子计数器功能。前提条件 已初始化Client。具体操作，请参见 ...
数据模型
在HBase中，数据存储在具有行和列的表中，这是与关系数据库（RDBMS）类似的模型，但与之不同的是其具备结构松散、多维有序映射的特点，它的索引排序键由行+列+时间戳组成，HBase表可以被看做一个“稀疏的、分布式的、持久的、多维度有序Map...
KV2Table
默认”,”参数设置 是否只截取前1200列 如果转化后列数超过表最大列数1200列后，是否只截取前1200列。执行调优 计算核心数 系统根据输入数据量，自动分配训练的实例数量。每个核内存大小 系统根据输入数据量，自动分配内存。单位为MB。方式...
- 产品推荐
- 这些文档可能帮助您