更新表
使用更新表（UpdateTable）接口更新指定表的最大版本数等设置。对于高性能实例下的表，您还可以更新指定表的预留读吞吐量或预留写吞吐量。接口"""说明：更新表属性，目前只支持修改预留读写吞吐量。``table_name``是对应的表名。``table_...
表
使用表Schema创建表 使用表Schema创建表时，您需要先创建表的Schema，然后通过Schema创建表。创建表的schema from odps.models import Schema schema=Schema.from_lists(['num','num2'],['bigint','double'],['pt'],['string'])#通过schema...
数据版本和生命周期
此处以Java SDK为例介绍更新表的使用。以下示例用于更新数据表的最大版本数为5、数据生命周期为-1且有效版本偏差为86400。private static void updateTable(SyncClient client){/数据的过期时间，单位为秒，-1表示数据永不过期。int ...
自定义Join（UDJ）
UDJ跨表Join功能 通过如下样例为您详细介绍MaxCompute UDJ跨表Join的使用方法。假设存在两个日志表，分别是payment和user_client_log。payment：表中保存了用户的支付记录，每一笔支付记录包含用户ID、支付时间和支付内容。样例数据如下。...
公共维度汇总层（DIM）
维表与其他表进行Join时，建议您使用Map Join。避免过于频繁的更新维表的数据。在设计维表时，您需要从下列方面进行考虑：维表中数据的稳定性。例如，A公司电商会员通常不会出现消亡，但会员数据可能在任何时候更新，此时要考虑创建单个...
公共维度汇总层（DIM）
维表与其他表进行Join时，建议您使用Map Join。避免过于频繁的更新维表的数据。在设计维表时，您需要从下列方面进行考虑：维表中数据的稳定性。例如，A公司电商会员通常不会出现消亡，但会员数据可能在任何时候更新，此时要考虑创建单个...
MaxCompute SQL中的关联操作
当您编写MaxCompute的SQL语句，需要同时执行关联（JOIN）操作和对数据过滤时，您需要特别关注对于不同的JOIN类型，过滤条件所在位置不同，因为计算顺序的差异可能会导致查询结果不同。本文以一个具体示例介绍不同JOIN操作的过滤条件在不同...
Left join优化改写为Right join
Left join是实践中常用的一种表关联方式，由于Hash Join实现会以右表做Build，且left Join不会做左右表的重新排序，在右表数据量很大时会造成执行慢、消耗过多内存资源等多个问题。本文以具体示例介绍哪些场景下可以用right join替代left ...
使用EXPLAIN查看并行计划
从执行计划输出的Extra信息中可以看到 pq_test 表使用了Parallel scan（并行扫描）策略，期望用4个Workers来并行执行。Gather操作中显示了使用的worker数量和节点数量，这里一共使用了2个节点，每个节点2个worker。通过带有子查询的EXPLAIN...
PolarDB MySQL版8.0版本内核参数发布日志
2023.10.17 类型 参数 级别 说明 新增 loose_xengine_parallel_scan_enabled Global 是否允许对X-Engine中的表使用并行查询功能。取值范围如下：ON（默认）：允许对X-Engine中的表使用并行查询功能。OFF：不允许对X-Engine中的表使用并行...
MariaDB数据源
例如，需要进行多表join后同步数据，使用 select a,b from table_a join table_b on table_a.id=table_b.id。当您配置 querySql 时，MariaDB Reader直接忽略 table、column、where 和 splitPk 条件的配置，querySql 优先级大于 table、...
MySQL数据源
id"],"connection":[{"querySql":["select a,b from join1 c join join2 d on c.id=d.id;datasource":""/数据源名称。}],"where":"",/过滤条件。splitPk":"",/切分键。encoding":"UTF-8"/编码格式。},"name":"Reader","category":...
PostgreSQL数据源
是 无 splitPk PostgreSQL Reader进行数据抽取时，如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片，数据同步会启动并发任务，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此...
SQL Server数据源
当配置此项后，数据同步系统就会忽略tables、columns配置项，直接使用这项配置的内容对数据进行筛选，例如需要进行多表join后同步数据，使用 select a,b from table_a join table_b on table_a.id=table_b.id。当您配置querySql时，SQL ...
Colocation Join
重要 标注为可使用Colocation Join的表的这个属性不会被CCR同步，如果这个表是被CCR复制而来的，即PROPERTIES中包含 is_being_synced=true 时，这个属性将会在这个表中被擦除。名词解释 Colocation Group（CG）：一个CG中会包含一张及以上...
使用OPTIMIZE和Z-ORDER优化商品库存查询性能
使用Databricks Delta更新表数据仅需2步：确定需要插入或更新的记录。使用MERGE。创建一个delta表%sql DROP TABLE IF EXISTS current_inventory_delta;CREATE TABLE current_inventory_delta USING delta AS SELECT*FROM current_inventory...
PolarDB MySQL版8.0.2版本发布日志
修复在使用JOIN消除优化功能后，剩余表的列信息没有更新，导致可能无法选择表的最优访问方式的问题。修复Semi join选择Materialization策略时，查询结果可能出现错误的问题。修复主键不包含分区键的分区表在 binlog_row_image=MINIMAL 情况...
执行计划调优
是否可以使用复制表？Join：内外表顺序是否合理？Scan：是否可以使用索引？是否可以使用分区表？内存信息，调整参数 查看下盘情况，分析后适当调整statement_mem参数。举例分析 Update(cost=0.00.1274.11 rows=1 width=1)(actual time=...
如何实现两表关联查询
在SELECT语句中使用Join操作进行两表关联查询。具体操作，请参见 查询数据 和 Join。进行两表关联查询时可选的Join类型包括INNER JOIN（内连接）、LEFT OUTER JOIN（左外连接）、RIGHT OUTER JOIN（右外连接）和CROSS JOIN（交叉连接）。
UPDATE
语法 UPDATE Table_name1[INNER JOIN|LEFT JOIN]Table_name2 ON Table_name1.C1=Table_name2.C1 SET assignment_list[WHERE where_condition]注意事项 多表更新不支持ORDER BY和LIMIT子句。多表更新时，一条SQL语句只能更新一张表，不支持...
JOIN
使用限制 join 操作的使用限制如下：MaxCompute不支持 cross join，即无 on 条件的连接。只允许出现 and 连接的等值条件。您可以通过 mapjoin 操作使用不等值连接或 or 连接多个条件，详情请参见 MAPJOIN。命令格式<table_reference>join[...
插入或覆写数据（INSERT INTO|INSERT OVERWRITE）
使用限制 执行 insert into 和 insert overwrite 操作更新表或静态分区数据的使用限制如下：insert into：不支持向聚簇表中追加数据。insert overwrite：不支持指定插入列，只能使用 insert into。例如 create table t(a string,b string);...
更新或删除数据（UPDATE|DELETE）
MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 前提条件 执行 delete、update 操作前需要具备目标Transactional表的读取表数据权限（Select）及更新表数据权限（Update）。...
表设计最佳实践
可以使用MAPJOIN语句进行维度表和其它表的JOIN操作。拉链表的设计 在数据仓库的数据模型设计过程中，经常会遇到如下需求：数据量较大。表中的部分字段被更新。例如，用户的地址、产品的描述信息、订单的状态和手机号码等。需要查看某一个...
Hologres源表
使用限制 Hologres支持使用Holo-blink Connector将Hologres表作为源表读取数据并进行维表Join，其使用限制如下：默认只能读取 行存储格式 的表数据。如果要读取列存储格式表的数据，需要配置 bulkread='true'。创建行存储表时，如果该表...
手工表概述
例如，业务人员在客户维表中手动更新客户状态，供下游任务使用。同时数据开发、运维人员可以使用手工表快速更新数据，提高各类业务的生产效率。手工表开发页面概述 手工表开发页面主要由手工表目录、手工表编辑器菜单、编辑区组成。您可以...
手工表概述
例如，业务人员在客户维表中手动更新客户状态，供下游任务使用。同时数据开发、运维人员可以使用手工表快速更新数据，提高各类业务的生产效率。手工表开发页面概述 手工表开发页面主要由手工表目录、手工表编辑器菜单、编辑区组成。您可以...
SELECT
外加每一个没有匹配上的左手行（在右端用空值扩展），再外加每一个没有匹配上的右手行（在左端用空值扩展）CROSS JOIN CROSS JOIN 和 INNER JOIN 会产生简单的笛卡尔积，也就是与在FROM列出两个表得到的结果相同，但是要用连接条件（如果有...
一般SQL优化方法
在SQL语句中可以使用SQL优化，如添加索引、选择合适数据类型、避免使用 SELECT*、...JOIN 一个查询中产于JOIN的表数量控制在12个以内，多于12个表JOIN，可以考虑使用临时表拆分语句。存储过程或函数 能使用SQL语句实现的，不要用循环去实现。
Explain和Explain Analyze
rows：算子的预估输出行数，如果rows的值与实际行数相差较大，大部分原因是表的统计信息未更新，建议对表执行一次 analyze命令。width：算子的预估输出平均宽度（单位：字节），值越大说明列越宽。[20:20 id=100002 dop=20 time=2427/2424/...
更新表
updateTable(params,callback)示例 更新表的最大版本数为5，同时允许更新写入操作。var client=require('./client');var params={ tableName:'sampleTable',tableOptions:{ maxVersions:5,allowUpdate:true,/是否允许"UpdateRow"相关更新...
ALTER TABLE
注意 SET STORAGE 本身并不改变表中的任何东西，它只是设置在未来的表更新时要追求的策略。ADD table_constraint[NOT VALID]这种形式使用和 CREATE TABLE 相同的约束语法外加 NOT VALID 选项为一个表增加一个新的约束，该选项当前只被允许...
Join
当使用Join的SQL语句中某张表使用了比较多的过滤条件时，在无索引的情况下读取性能会有所下降，此时使用索引加速数据的读取可能会加速整体的执行速度。示例 假设有orders和customers两张表，数据如下：SELECT*FROM orders;order_id|...
时序模型
更新时序表 当需要清理时序表中的历史数据或者希望延长数据保存时间时，您可以使用 UpdateTimeseriesTable 接口更新时序表的数据生命周期TTL配置。更新时序表的TTL后，表格存储 会自动异步清理时序表中超过TTL的数据。删除时序表 当不再...
时序模型
更新时序表 当需要清理时序表中的历史数据或者希望延长数据保存时间时，您可以使用 UpdateTimeseriesTable 接口更新时序表的数据生命周期TTL配置。更新时序表的TTL后，表格存储 会自动异步清理时序表中超过TTL的数据。删除时序表 当不再...
写入或更新调优指南
有关异步请求的原理请参见 维表JOIN与异步优化。维表数据量较大且更新不频繁时，推荐使用维表缓存优化查询性能。相应参数设置为 cache='LRU'，同时默认的 cacheSize 较保守，为10000行，推荐根据实际情况调大一些。连接数不足：connector ...
使用Hologres实现分页
方案3：基于临时表的分页方案 适用场景：适用于查询过程中涉及多张表，且需要经过复杂计算后再对结果集进行分页的场景（如使用 JOIN 连接多张表的查询结果）。SQL命令语法如下。SELECT*FROM(.复杂SQL子查询)ORDER BY key1 LIMIT N OFFSET S...
更新表
示例 更新表的预留读吞吐量为1，预留写吞吐量为2。设置新的预留读吞吐量为1，预留写吞吐量为2。var reservedThroughput=new CapacityUnit(1,2);构造UpdateTableRequest对象。var request=new UpdateTableRequest("SampleTable",...
分区表常见问题
使用分区表数据量没有下限，空表也可建分区表，但数据量太少没必要分区，一般普通表大于500 MB可以选择使用分区表。当单分区数据量超过64 TB（与单个普通表一致），最大分区数超过8192时不适合使用分区表。建议单表数据量超过1 TB或者1亿行...
SELECT
返回结果：┌─s─┬─arr─┐│Hello│[1,2]│World│[3,4,5]│Goodbye│[]│└─┴─┘使用ARRAY JOIN子句查询表arrays_test。SELECT s,arr FROM arrays_test ARRAY JOIN arr;返回结果：┌─s─┬─arr─┐│Hello│1│Hello│2│World│...
- 产品推荐
- 这些文档可能帮助您