分析数据
您可以选中需要分析的数据，单击菜单栏中的 数据探查，即可在电子表格顶部，以图形和富文本的形式，为您展示每列数据的类型、值分布的概览情况。数据探查简单模式的说明如下：针对STRING和DATE类型：以富文本的形式为您展示Top2的值及其占...
使用LOAD DATA语句导入数据
[FIELDS]ENCLOSED BY 'char' 每列数据的包围符。例如，某一列数据为"test"，定义 enclosed by '"' 后，导入数据时先将"test"前后的"移除，然后再导入数据。[LINES]TERMINATED BY 'string' 定义行分隔符，默认为。IGNORE number LINES 导入...
数据保护规则简介
在设置数据保护规则时，您需要保证 不同规则作用的数据范围是互斥的，即每列数据，仅能唯一匹配一条规则，否则全密态数据库无法确定如何选择规则，可能发生非预期的结果。users：用户访问数据权限的设定。各权限说明如下：说明 用户权限...
通过LOAD DATA导入至数仓版
[FIELDS]ENCLOSED BY 'char' 定义每列数据的enclosed符号。例如，某一列数据为"a"，定义 enclosed by '"' 后，导入数据时先将"a"前后的"移除，然后导入数据。[LINES]TERMINATED BY 'string' 定义行分隔符，默认为。IGNORE number LINES ...
创建表
services,married,high.school,no,no,cellular,apr,fri,185,2,999,0,nonexistent,-1.8,93.075,-47.1,1.405,5099.1,0 您可以识别到数据列数、每列数据的数据类型，同时可以了解各列数据对应的含义，为每列数据定义一个列名称。假设基于示例...
Beam排序优化（7.0版）
定义多维排序键 多维排序键为排序键中的每个列赋予相同的权重进行排序，尽量保持每列数据的维度具有邻近性。多维排序键对包含任意排序键列的查询都有一定数据过滤效果。创建带有多维排序键的Beam表，示例如下。CREATE TABLE beam_example_...
整库离线同步至OSS
列分隔符 将源端每列数据写入OSS时所使用的列分隔符，默认值为（,）。行分隔符 将源端每行数据写入OSS时所使用的行分隔符，默认值为（）。编码 定义文件写入OSS的编码格式。null值 文本文件中无法使用标准字符串定义null（空指针），数据...
设置列索引的排序键
而有序数据块集合则可以通过每个列数据块内存中元数据的最大值和最小值等信息过滤掉第一个列数据块，只需要针对第二个列数据块进行处理即可。SELECT*FROM t WHERE c>=8;说明 增量排序功能目前处于灰度发布阶段，您可以加入HTAP专家群来申请...
多版本数据管理
功能介绍 Lindorm宽表引擎中，写入每条数据时每列都会记录时间戳，该时间戳一般记录的是数据写入时的服务器时间。默认情况下，该时间戳会作为每列的版本标识，用户也可以在写入数据时自定义时间戳，时间戳越大说明数据的版本越新。如果宽表...
HDFS数据源
建议您指定待读取的每一列数据的下标和类型，避免配置 column*通配符。是 无 fieldDelimiter 读取的字段分隔符，HDFS Reader在读取TextFile数据时，需要指定字段分割符，如果不指定默认为逗号（,）。HDFS Reader在读取ORCFile时，您无需...
表
它在逻辑上是由行和列组成的二维结构，每行代表一条记录，每列表示相同数据类型的一个字段。MaxCompute的表类似于传统关系型数据库中的表，可以存储结构化数据，并且使用SQL进行查询和分析。MaxCompute中不同类型计算任务的操作对象（输入...
概述
给定表的每行具有相同的一组指定的列，并且每列具有特定数据类型。虽然每行中的列具有固定顺序，但请务必记住，SQL不以任何方式保证表中的行顺序（但可以为显示而显式排序行）。表分组到数据库中，并且由单个 PolarDB PostgreSQL版（兼容...
约束与限制
每个表的数据量 每个分区每个Segment最大128 TB。BLOB数据量 最大1 GB。说明 AnalyticDB PostgreSQL版 使用BYTEA数据类型代替BLOB。每个表的行数 最多2^48行。每个表的列数 最多1600列。每个数据库中的表数 最多42亿个。每个视图中的列数 ...
测试方法
每行列个数 每列value大小 1 10 1 100 20 10 20 20 ycsb的workload配置如下：recordcount=5000000 operationcount=150000000 workload=com.yahoo.ycsb.workloads.CoreWorkload readallfields=false fieldcount=<每行列个数>fieldlength=<每...
测试方法
每行列个数 每列value大小 1 10 1 100 20 10 20 20 ycsb的workload配置如下：recordcount=5000000 operationcount=150000000 workload=com.yahoo.ycsb.workloads.CoreWorkload readallfields=false fieldcount=<每行列个数>fieldlength=<每...
ANALYZE
ANALYZE 收集的统计信息通畅包括每列中最常见值的列表以及展示每列中近似数据分布的一个直方图。如果 ANALYZE 认为这些东西无趣（例如在一个唯一键列中，没有共同值）或者该列的数据类型不支持合适的操作符，以上工作都会被省略。对于大型...
导入中特殊符号处理
下文将介绍分隔符的使用方法和约束，以及每列中遇到特殊符号的处理方法。分隔符 在创建OSS外部表语法中，您可以通过在FORMAT子句后面指定DELIMITER分隔符，如下：FORMAT 'TEXT'(DELIMITER ',')如果 FORMAT 'TEXT'，则 DELIMITER 缺省值为 '...
PolarDB HTAP实时数据分析技术解密
在按列进行海量数据分析时，按行从磁盘读取数据存在非常大的IO带宽浪费，其次，行式存储格式在处理大量数据时会大量拷贝不必要的列数据，对内存读写效率也存在冲击。PolarDB 并行查询突破CPU瓶颈 PolarDB团队开发的并行查询框架（Parallel ...
列存索引技术架构介绍
其次，行式存储格式在处理大量数据时会大量拷贝不必要的列数据，对内存读写效率也存在冲击。PolarDB并行查询突破CPU瓶颈 并行查询框架（Parallel Query）可以在查询数据量到达一定阈值时，自动启动并行执行。在存储层将数据分片到不同的...
INSERT OVERWRITE SELECT
每个表的写入任务串行执行，即单表写入并发数为1，无法调整。为保证单任务写入性能，防止集群负载过高，集群写入任务并发数默认为2，不建议调整。说明 如有需要调整写入并发数，请 提交工单 联系技术支持，由技术支持评估调整。特点与应用...
表概述
它在逻辑上是由行和列组成的二维结构，每行代表一条记录，每列表示相同数据类型的一个字段。一条记录可以包含一个或多个列，各个列的名称和数据类型构成表的Schema。MaxCompute的表有两种类型：内部表：所有数据都存储在MaxCompute中，内部...
INSERT SELECT FROM
参数 column_name：列名，如果需要将源表中的部分列数据插入到目标表中，SELECT子句中的列必须与INSERT子句中列的顺序、数据类型一致。query：可以是 SELECT FROM TABLE 或者 SELECT FROM VIEW。示例 以指定列名的方式，从CUSTOMER表中复制...
DBMS_REDACT
custom_function_expression是一个函数表达式，即具有参数的模式限定函数，例如，schema_name.function_name(argument1,…)允许您使用其脱敏逻辑来脱敏列数据。ALTER_POLICY ALTER_POLICY将修改表的现有数据脱敏策略。ALTER_POLICY...
REPLACE SELECT FROM
column_name：列名，如果需要将源表中的部分列数据插入到目标表中，SELECT 子句中的列必须与 REPLACE 子句中列的顺序、数据类型一致。注意事项 执行 REPLACE SELECT FROM 命令时，需先创建待写入数据的目标表。示例 以指定列名的方式，从...
INSERT SELECT FROM（2.0版）
示例 提供列名的方式，从ORDER表中复制某几列数据到新订购表NEW_ORDER中。INSERT INTO new_order(customer_id,order_id,order_time,order_amount,order_type,address,city,order_season)SELECT customer_id,order_id,order_time,order_...
功能介绍
是否只包含主键数据"data":[{"type":<type>/列数据类型"name":<name>/列名"ts":<version>/数据版本，如果没有该值，取默认版本（ts）的值作为版本"value":<value>/值，如果没有该值，则表中值为null },{"type":<type>/列数据类型...
如何支持超大事务
为 x，则会修改共 x 条数据，每条数据修改约256字节的数据，数据总修改量为 x*2^8 字节。本测试中 x 取值从2^20到2^25不等，数据修改总量从512 MB到8 GB不等。在单表的情况下，当 x 为2^22，事务修改的数据量约为1 GB时，执行该事务会和...
CREATE TABLE AS SELECT（CTAS）
示例1 从 customer 表读取所有列数据，并将数据写入新表 new_customer。新表 new_customer 的列名称、列数据类型与 customer 表相同。示例语句如下：CREATE TABLE new_customer AS SELECT*FROM customer;示例2 从 customer 表读取 customer...
获取物理表
数据源同步后，还需通获取当前云计算资源下最新物理表及元数据Meta信息，以便进行数据源之间的数据同步。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。...数据源管理 列表中，对应数据源的对象数量列数据已更新。
VALUES列表
列表都必须具有相同数据的元素（即表中列的数目），并且在每个列表中对应的项必须具有可兼容的数据类型。分配给结果的每一列的实际数据类型使用和 UNION 相同的规则确定。示例：VALUES(1,'one'),(2,'two'),(3,'three');将会返回一个有两列...
创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
SET LABEL
MaxCompute支持在项目级别为用户设置访问许可等级标签，为表或表的列设置敏感等级标签（Label），用户仅可以访问MaxCompute项目中敏感等级小于等于自身访问许可等级的表或列数据。背景信息 Label权限控制即LabelSecurity，是项目级别的一种...
管理敏感数据
申请敏感列访问权限 说明 所有用户（包含管理员与DBA）在未申请敏感列数据权限前，均无法查询数据，需额外申请敏感列的权限才可查看。本示例以普通用户申请敏感列访问权限为例介绍。登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范...
新建表
column_name column_type 指定数据表中每个列（字段）的名称和数据类型，如果创建多个列，需要用逗号隔开。步骤 7：完成新建表 单击 执行，完成新建表后，会在左侧导航栏的表列表中出现新建的 employee 表。说明 在左侧导航栏的表列表中，...
管理脱敏规则
脱敏失效示例：已创建了一条需要对 name 列数据进行脱敏的规则，当执行 SELECT hobby FROM person UNION SELECT name FROM person 语句进行查询时，应用程序仍然能够读取到 name 的原始值。新建脱敏规则 登录 PolarDB控制台。在控制台左上...
管理敏感数据
当您需要调整敏感列的安全级别、脱敏算法、授予或回收指定用户查询、导出或变更敏感列数据的权限时，您可参考本文进行操作。前提条件 用户角色为管理员、DBA和安全管理员。说明 鼠标移动到界面右上角的，查看您的角色。支持的数据库：关系...
SQL 编辑和执行
column_name column_type 指定数据表中每个列（字段）的名称和数据类型，如果创建多个列，需要用逗号隔开。SQL 窗口编辑区的工具栏中同时提供以下功能键：功能 说明 SQL 检查 单击该按钮检查 SQL 语法。执行计划 查看选中的或当前光标所在...
Label权限控制
MaxCompute支持在项目级别为用户设置访问许可等级标签，为表或表的列设置敏感等级标签（Label），用户仅可以访问MaxCompute项目中敏感等级小于等于自身访问许可等级的表或列数据。本文为您介绍Label授权操作并提供示例供参考。背景信息 ...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
同步对象的选择粒度可以为库、表、列，您可以根据需要同步某几个表的数据，或者只同步表中的某几列数据。数据同步支持库、表、列名映射，您可以进行不同库名之间的数据或两个不同表名之间的数据同步。注意事项 配置同步链路 过程中，如果...
使用INSERT ON CONFLICT覆盖写入数据
上述语句中，新插入的数据(0,2,2,2)构成了一个伪表，伪表包含1行4列数据，表名为excluded，可以使用 excluded.b,excluded.c,excluded.d 去引用伪表中的列。查看表数据：SELECT*FROM t1;表t1中的非主键列进行了更新，返回示例如下：a|b|c|d-...
- 产品推荐
- 这些文档可能帮助您