PolarDB MySQL版8.0.1版本发布日志

说明

• 在Outline中新增支持分表场景的功能，单条Outline可以匹配所有具有相同模板的语句，适用于不同的分表。

• 新增在执行过程中根据实际情况动态调整Order Index选取结果的能力。

• 新增物理复制并行解析Redo功能，提升物理复制性能。

• 新增变量ignore_use_force_index，开启后可忽略语句及Outline中的所有use或force index（但不影响Hint中的Index()）。

• 新增字符串转换函数convert_sys_to_filename()和convert_filename_to_sys()，用于system_charset_info编码和my_charset_filename编码之间进行转换。

• 新增OSS冷数据支持设置透明数据加密（TDE）功能。

• 新增开启支持RW和RO非对称MTT缓冲，支持在RO和RW之间联动开启MTT优化。

• IMCI i_s.imci_index_stats表新增PRUNED_PERCENT字段，表示每个列索引Data Skipping比例。

• 新增SHOW ProcessList结果展示会话是否等待线程池调度的功能。

• 支持通过修改COMMENT中的pack_shift来直接重建列存索引无需提前删除。

说明

• 优化动态Buffer Pool缩容过程，减少锁冲突。

• 优化SQL Trace，使得Call procedure时可以正确记录SQL及执行计划。

• 优化列存宽表的内存开销。

• 优化列存只读节点的启动速度，支持列存引擎从列存快照位点独立启动。

• 优化逻辑预读的线程启动和销毁代码，简化内存检查逻辑。

• 优化列存节点在海量表场景下的启动时间过长。

• 优化IMCI大事务的性能和内存用量。

• 优化IMCI中物化HASH KEY的表达式的性能。

• 优化列存节点Serverless流程，新增列存节点支持索引就绪之后才被加入Proxy节点承担业务流量。

• 优化IMCI的统计信息采样机制，提高了采样频率与采样数据的比例。

  优化低基数列采样逻辑，避免出现统计信息不准确导致查询未被充分优化的情形。

• 优化Simulated-AIO异步性能阻塞模块。

说明

• 修复含有视图的表，在进行HA（节点切换之后），执行DDL可能报错或者未生效的问题。

• 修复RO重新连接RW后可能出现RO持续不对外提供服务的问题。

• 修复CAST(REGEXP_SUBSTR(...)) AS DECIMAL语句导致进程崩溃的问题。

• 修复REGEXP_SUBSTR可能返回NULL标记错误的问题。

• 修复dlm_policies系统表的建表语句被记录在BINLOG中，导致下游同步失败的问题。

• 修复部分查询中，未充分利用唯一索引进行加速的问题。

• 修复同时使用ALTER TABLE DROP语句删除多个全文索引（FTS）时可能导致元信息残留的问题。

• 修复在扩展VARCHAR列长度时，由于指定了DEFAULT值，导致的不必要的索引重建问题。

• 修复IMCI Serverless与内部内存弹性兼容性、扩缩容异常等问题。

• 修复DDL操作后，全文索引检索在只读节点上卡住的问题。

• 修复自适应执行中对于特定类型的Query不能正确路由的问题。

• 修复重建列存索引（IMCI）不支持Online重建导致列存索引可用性问题。

• 修复库表多写集群批量添加列存索引，未完全适配DDL全局锁导致崩溃的问题。

• 修复JSON_TABLE存在NULL Field场景下导致查询崩溃的问题。

• 修复多主Buffer Pool Resize和事务访问块冲突问题，并优化多主Buffer Pool RDMA register或unregister的性能。

• 修复Digest CCL不支持PS（Prepared Statements）协议的问题。

• 修复开启RO No Sync功能后，RO节点在HA阶段可能会出现崩溃的问题。

• 修复使用空间索引（Spatial Index）时，事务回滚需要悲观锁删除索引导致陷入死循环，导致持锁过长。

• 修复历史版本升级到8.0.1.1.45.1的升级任务过程中，极小概率会发生任务中断的问题。

• 修复在极少数情况下，列存执行过程中访问字符串数据类型时，因访问无效数据导致查询报错的问题。

• 修复IMCI处理一个表达式中包含多个带SUM的子查询时回退行存问题。

• 修复IMCI一写多读在开启使用Hybrid Plan加速宽表查询时异步重建列索引循环等待的问题。

• 修复并行DDL执行期间某个时间窗口内修改innodb_bulk_load_page_grained_redo_enable参数导致部分页的Redo写错的问题。

• 修复包含LOB字段的表批量删除数据场景BLINK可能出现死锁的问题。

• 修复高频率INSTANT DDL操作与后台Compaction任务存在的并发导致migrate过程崩溃。

• 修复GROUP BY可能导致临时表报错table is full的问题。

• 修复IMCI的索引连接在使用常量作为连接条件时可能导致结果不稳定的问题。

说明

• 修复在发生RO节点切换为RW节点后，执行INSERT ... ON DUPLICATE KEY UPDATE语句导致表Autoinc回退问题。

• 修复IMCI Serverless与内部内存弹性兼容性、扩缩容异常等问题。

• 修复查询变换过程中表数量超过61导致崩溃的bug，该场景下不做查询改写。

说明

• 修复DDL后，全文索引检索在只读节点上会卡住的问题。

• 修复backward index scan能力开启与ICP等优化不兼容，新增polar_optimizer_switch开关进行控制。

说明

新增变量ignore_use_force_index，开启后可忽略语句及Outline中的所有use/force index（但不影响hint中的index()）。

说明

• IMCI中INFORMATION_SCHEMA.IMCI_INDEX_STATS表增加字段PRUNED_PERCENT，表示每个列索引data skipping比例。

• 优化当SQL trace类型设置为SLOW LOG时，SQL trace也将对DEMAND指定的语句生效。

• 优化RW和RO支持非对称MTT缓冲区。支持RO和RW之间MTT联动开启。

• 优化列存节点Serverless流程。

  允许新增列存节点在索引准备就绪后再对外服务，以减少在此期间由于路由到新增节点上的SQL走行存计划导致的慢查。

• 优化列存索引（IMCI）在SQL执行时，保存分区信息带来的性能开销，提升分区表查询性能。

说明

• 修复开启Force recovery时，Undo初始化阶段出现集群异常崩溃的问题。

• 修复在IMCI一写多读情况下，开启Hybrid Plan时异步重建列索引循环等待的问题。

• 修复UNIQUE CHECK IGNORE分区表带有REPLACE的LOAD DATA二次导入相同数据报错的问题。

• 修复在三可用区中，当入口数据的CRC计算值恰好为0时，可能导致recent_written引入脏数据的问题。

• 修复RO节点在HA（节点切换）阶段可能卡住的问题，避免用户HA时间过长。

• 修复在添加自增列并在该列上创建逆序主键索引时导致B-tree损坏。

• 修复IMCI在处理一个表达式中包含多个带有SUM的子查询时出现的回退行存问题。

• 修复并行重建主键场景中遇到error时小概率内存残留的问题。

• 修复使用Temptable引擎时，包含GROUP BY查询在处理LOB字段时可能出现的崩溃问题。

• 修复谓词条件中包含子查询时，并行查询结果可能出错的问题。

• 修复JSON_TABLE在存在NULL FieId场景下查询可能崩溃的问题。

• 修复在修改PRIMARY KEY字段时，EQUAL_PACK_LENGTH类型DDL操作时导致NCI编码异常。

• 修复Proxy高级事务拆分与Fast Query Cache之间的冲突影响结果集的问题。

• 修复在开启IMCI的情形下，在子查询中使用JSON_ARRAY表达式时，可能导致结果不正确的问题。

• 修复库表恢复新流程中，同一张表进行多轮恢复后导致流程中断的问题。

• 修复RDMA日志传输功能动态开启过程中的内存泄漏问题。

• 修复列存索引（IMCI）不支持Online重建，导致列存索引不可用的问题。

• 修复带有全文索引的表上，修改COMMENT添加列存索引（IMCI）时无法使用异步DDL。

• 修复多并发场景下，事务可能不被kill的问题。

说明

• 修复历史版本升级至8.0.1.1.45.1的任务过程中，极小概率会发生任务中断的问题。

• 修复在极少数情况下，列存执行查询过程中访问字符串类型数据时，因访问无效数据导致查询报错的问题。

说明

优化IMCI列存宽表的内存开销。

说明

• 新增显示会话是否在等待线程池调度。

• IMCI中新增基于贪心算法的join reorder策略。

• 新增存储过程和扩展SQL命令批量为整库添加列存索引。

• 新增从PolarDB5.7备份集大版本升级功能，从而提高一键迁移的效率。

• 新增列存索引中Hybrid Plan新增对分区表、虚拟列、ENUM、SET和GIS类型的列的支持。

说明

• 优化PolarDB IO Threads可动态调整无需重启功能。

• 优化IMCI单机回放自动弹性能力，减少回放延迟以及回放压力大产生的内存不足（OOM）问题。

• 优化IMCI中Date类型字段的读取性能。

• 优化IMCI中统计信息采样机制，提高了采样频率与采样数据的比例。

  优化低基数列的采样逻辑，避免出现统计信息不准确导致查询未被充分优化的情形。

说明

• 修复InnoDB全文索引在多主集群下导致节点崩溃的问题。

• 修复IMCI中JOIN条件包含类型转换时，优化器对选择率估计偏差较大的问题。

  修复IMCI中因为对JOIN的输出结果基数估计偏大导致无法正确选择Hybrid Plan。

• 修复有通配符的情况下，JSON_LENGTH返回结果错误问题。

• 修复并行DDL执行期间某个时间窗口内修改innodb_bulk_load_page_grained_redo_enable参数导致部分page的Redo写错的问题。

• 修复在只读节点切换为读写节点后，出现分区表的Autoinc值回退问题。

• 修复开启innodb_polar_log_rdma_transfer时，移除RO节点可能导致监控连接阻塞一段时间的问题。

• 修复IMCI的index join使用常量作为JOIN条件时可能触发结果不稳定的问题。

• 修复临时表使用group by语句可能导致temptable在磁盘未满情况下报错table is full问题。

• 修复RO节点在Buffer Pool非常满时，用户线程等待Free Page过久问题。

• 修复包含lob字段的表批量删除数据场景blink可能出现死锁的问题。

• 修复IMCI中运用JOIN消除优化时，可能出现结果不稳定的问题。

• 修复将表中的数据全部删除之后，表中无数据时，下次写入操作会让Autoinc值重新从1开始的问题。

• 修复database中含有几万张表，drop database失败问题。

• 修复合并视图过程中无用的子查询未被删除的问题。

• 修复当查询拥有过多UNION ALL时，查询在IMCI执行时可能报告内存不足的问题。

• 修复desc select语句不能正确调用outline的问题。

• 修复information_schema.tables中table_comments显示xxx is not base table的问题。

• 修复IMCI在进行日期类型的隐式转换时，与MySQL行为不兼容导致结果不符合预期的问题。

• 修复IMCI在旧版本创建的分区表在升级版本后新增分区时，默认pruner类型不一致导致的查询结果不一致问题。

• 修复JSON中浮点数精度问题。

说明

• 支持join条件下推导出对应的视图。

• 新增IMCI延迟物化版本的UnionAll。

说明

• 优化了简单查询（单表查询）上查询优化的耗时。

• 多主集群支持细粒度的表级锁。

• 优化了IMCI中decimal sum/avg的性能。

• 优化热点更新场景下的性能。

• 优化了IMCI中hash match的性能。

• 优化了IMCI中查询时使用的元信息的内存。

• IMCI支持filter下推到outer join。

• 调整PolarFS事务处理线程优先级，提高PolarDB DDL性能。

说明

• 修复blink悬挂页导致import table失败的问题。

• 修复各类流程中主动触发打checkpoint期间DB卡住的问题。

• 修复RO No Sync频繁动态开关可能会丢失标记的问题。

• 修复多主集群全局Standby节点回滚段异常导致Standby节点无法启动的问题。

• 修复带有function index的InnoDB表无法归档的问题。

• 修复Last_query_cost在少数优化场景下出现负数的问题。

• 修复在函数中包含了聚合函数时无法进行连接消除的问题。

• 修复在会话级连接池下，连接复用，审计日志中IP地址未及时更新的问题。

• 修复多主集群下全局表锁的加锁和解锁相关的问题。

说明

• 新增事务续传支持Binlog。

• 新增参数thread_pool_reset_waiting_state_before_queuing。

说明

• 列存索引IMCI新增基于Hybrid Plan的Index Join，支持利用InnoDB索引进行Join。

• 优化只读节点在PFS上的Page读取性能。

• 优化了IMCI中查询时使用的元信息的内存。

说明

• 修复设置optimizer_switch、parallel_query_switch数值时，某些错误值会导致报Error而非Warning的问题。

• 修复optimizer_switch值末尾加逗号后不生效的问题。

• 修复隐式聚集查询加limit操作后索引选择改变问题。

• 修复3AZ下, follower重建后，undo日志不断增长的问题。

• 修复Persist RO可能导致RO读到旧数据的问题。

• 修复多主集群只读节点复制延迟很高的问题。

• 修复优化器因基数估计的误差导致无法选择最优的Join Order的问题。

• 修复在删除记录造成的Btree结构调整时，可能导致的线程间死锁问题。

• 修复归档表带有降序索引时归档操作失败的问题。

• 修复Limit Offset下推组合二级索引等值条件加主键In List条件获取主键逆序翻页输出结果时无法返回数据的问题。

• 修复DLM策略执行时权限过高的问题。

• 修复多主集群下执行Create Table Select语句影响其他节点的可用性的问题。

• 修复多主集群在多个节点同时执行DDL语句时系统页可能会损坏的问题。

说明

• 新增谓词下推功能，包括谓词从HAVING下推到WHERE，以及从HAVING下推到derived和subquery。

• 新增行列混合优化器和基于代价的行列路由能力。

• 支持在EXPLAIN结果中查看Statement Outline的调用情况。

• 支持在列存索引（IMCI）中使用prefix murmur hash bloom filter。

• 支持在UPDATE语句中使用LEFT JOIN消除功能。

• 支持在已创建列存索引的表上使用秒级加列功能。

• 在Fast Query Cache中增加返回行数信息，命中缓存的查询在审计日志中可以展示返回行数。

说明

• 在行列路由中引入执行反馈机制，来收集真实的执行信息，并反馈给优化器。

• 对DML语句默认禁用index merge intersection，以提升性能，防止死锁。

• 减少列存索引（IMCI）内存分配和内存统计的元信息开销，以节省内存。

• 列存索引（IMCI）支持使用BatchProbe，以提高JOIN操作的性能。

• 优化列存索引（IMCI）的元信息、文件模块以及常驻内存中的小对象的内存，以减少常驻内存的使用。

• 优化了将冷数据从OSS导回InnoDB的报错信息。

• 在监控数据库性能时，忽略系统运维人员的访问对slow_queries状态指标的影响。

说明

• 修复开启RECYCLE BIN功能回收OSS IBD表时，重启集群后回收站中表的OSS路径映射错误的问题。

• 修复启动NewHA vector voting disk时，只读节点（RO）时钟漂移过大抢占读写节点（RW）权限的问题。

• 修复使用dbms_oss.delete_table_file内置存储过程无法删除CSV格式的冷数据的问题。

• 修复Thread Pool异步鉴权过程中遇到ACL lock wait后，可能造成Thread Pool内部计数器错误的问题。

• 修复对Blob类型的列执行UPDATE操作时，原记录的Blob空间无法回收的问题。

• 修复对OSS外表反复归档时，数据丢失的问题。

• 修复优化器选择了ordering index（排序索引），但实际执行时未省略排序操作的问题。

• 修复创建OSS外表时，因OSS Server中没有配置oss_prefix参数导致节点崩溃的问题。

• 修复访问多主集群下information_schema库中的部分表时，可能会获取异常数据的问题。

• 修复对Decimal类型的数据执行乘法操作时，在至少一个乘数为0且结果的scale（小数位数）超过16时，会返回assert信息的问题。

• 修复在更新创建列存索引的分区表上的统计信息时，可能只采样部分分区的信息，从而造成统计信息不准确的问题。

• 修复索引等值访问未触发行列自适应路由的问题。

• 修复Autoinc init日志打印过多的问题。

• 修复OSS外表在Order By Desc场景下可能会报错的问题。

• 修复在含有自增列的分区表上执行TRUNCATE PARTITION命令时，节点小概率崩溃的问题。

• 修复执行EXCHANGE PARTITION操作时，因索引顺序不同导致数据损坏的问题。

• 修复高并发下Buffer Pool自动取消前序缩容功能可能造成节点崩溃的问题。

说明

列存索引中新增基于TopK下推的Left Join功能。

说明

• 支持为用户授予执行SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_TABLES、FLUSH_STATUS和FLUSH_OPTIMIZER_COSTS命令的全局动态权限。

• 优化全局一致性高性能模式的开启流程，当在RO节点将innodb_polar_scc参数设置为ON后，集群会自动开启高性能全局一致性的依赖功能RDMA、PolarTrans等，降低管控流程的复杂度。

• 支持在全局一致性高性能模式功能中使用Variable-Setting Hint语法。

• 支持将参数polar_oss_ddl_shared的值设置为ON，来访问正在执行冷数据归档的表数据。

• 禁用Blob字段的小部分更新特性。

• 支持对含有列存索引的表使用库表恢复功能。

• 支持在列存索引中使用most common value统计信息收集功能，以改善数据偏斜情况下records per key估算不准的问题。

• 优化列存索引内存调度功能，提升内存利用率。

• 优化非阻塞DDL功能，以支持更多的DDL语句。

• 支持同时使用列存索引和全局一致性（高性能模式）功能。

• 支持使用CHECK TABLE命令检查特定分区。

说明

• 修复在多主集群上执行TRUNCATE语句时，可以在任意节点执行的问题。

• 修复在预读Blob类型的数据时，访问无效的Blob引用导致节点崩溃的问题。

• 修复将本地表并行导出至OSS引擎时可能导出失败的问题。

• 修复在执行checkpoint操作时，checkpoint的LSN位点不符合预期，导致集群异常重启后，崩溃恢复逻辑无法正常运行的问题。

• 修复Autoinc出现回退时，需要重启节点才能恢复的问题。

• 修复在CTE（Common Table Expression）中多处引用基于TempTable引擎的临时表，并且在临时表上使用索引扫描时，可能导致节点崩溃的问题。

• 修复列存索引在处理超长字符串类型时出现的内存越界问题。

• 修复在使用列存索引功能时，同时打开预读功能导致节点概率性崩溃的问题。

• 修复XEngine的compaction后台任务因并发控制过于严格，对前台操作产生影响进而影响慢查询性能的问题。

• 修复使用BIGINT类型的列参与Join操作时，若列中的值很大，可能导致基数估计结果不准确，无法使用列存索引的问题。

• 修复DDL预读在并行DDL场景下存在死锁的问题。

• 修复Statement Outline和Concurrency Control等功能在执行Reload操作时，出现的内存泄漏的问题。

• 修复执行Group By操作后，BIT字段显示不正确的问题。

• 修复TDE在fork创建子进程时，与RDMA内存不兼容的问题。

• 修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区表的情况下，返回结果集中存在分组重复的问题。

• 修复执行EXCHANGE PARTITION操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。

• 修复主键不包含分区键的分区表在使用查询优化器进行搜索、执行DML操作和记录Binlog时的问题。

说明

• 修复当多主集群的主节点负载不均衡时，全局只读节点复制延迟可能变高的问题。

• 修复在多主集群上首次新建只读节点时，只读节点可能无法启动的问题。

• 修复在多主集群上执行DDL时，可能导致主节点重启失败的问题。

说明

• 支持在X-Engine引擎中采样统计信息来估计近似压缩比。

• 支持在多主集群（库表）的全局只读节点上开启列存索引功能。

• 使用列存索引功能时，允许用户忽略Metabase等工具隐式设置的事务隔离级别。

• Stats Manager支持将采集直方图的任务自动下发到只读节点或热备节点执行，以实现直方图的自动更新。

• 支持在使用Hybrid Plan加速宽表查询功能时使用临时表。

• 新增开启semi-sync自适应退化和自动恢复功能。

• 支持使用INPLACE算法修改字段的字符集。

• SQL Trace支持对限定只读节点打开配置选项，即支持将参数sql_trace_type配置为REPLICA_DEMAND、REPLICA_ALL或REPLICA_SLOW_QUERY。

说明

• 提升低并发场景下Thread Pool处理建连请求的速度。

• 提升短连接场景下的数据库性能。

• 优化了列存索引（IMCI）中的事务掩码计算流程。

• 在使用自适应执行能力时，若冷数据读IO较多，会自动增加可切换的最大执行时间。

• 调整SQL Trace中查询语句的最大展示长度。

• 列存索引功能新增动态过滤器，提升表与表之间的关联效率。

• 在HINT语句中使用SET_VAR设置参数loose_optimizer_switch的值时，末尾不需要添加逗号。

说明

• 修复使用列存索引（IMCI）功能查询TopK数据时，因查询语句中涉及的表中的NULL值过多，进行倒序排序时排序结果错误的问题。

• 修复只读列存节点在涉及列存索引表的DDL执行过程中启动时，无法恢复列存数据的问题。

• 修复在执行shrink操作的过程中出现异常，导致空间泄露的问题。

• 修复在X-Engine引擎物理复制过程中并发修改数据结构，导致只读节点异常的问题。

• 修复X-Engine引擎从只读副本（replica）升级到同步备库（standby）的过程中，升级失败的问题。

• 修复在高并发查询场景下使用列存索引时，优化器内存占用过多的问题。

• 修复使用列存索引更新分区表上的统计信息时，可能因只采样部分分区而造成统计信息不准确的问题。

• 修复查询语句中含有返回空结果集的子查询时，不能被路由到列存索引节点上执行的问题。

• 修复对集群执行升级操作时，可能导致根据DIGEST值匹配的CCL规则失效的问题。

• 修复当数据库中存在CSV或ORC外部表时，查询information_schema.tables表信息异常缓慢的问题。

• 修复因多主集群（库表）的全局Binlog中table_id重复，导致Flink CDC解析失败的问题。

• 修复使用事务断点续传功能时，因启用并行查询功能而无法查询到续传事务数据的问题。

• 修复执行库表恢复的新流程时，只读（RO）节点注册位点过低导致新增RO节点失败的问题。

• 修复执行库表恢复的新流程时，因磁盘满载导致线程无法退出的问题。

• 修复使用Prepare Statement处理大量并发请求或执行复杂查询时，占用大量内存的问题。

• 修复使用列存索引（IMCI）查询包含BIT类型数据的视图时，查询结果不正确的问题。

• 修复对KEY分区表进行剪枝时，因未考虑生成列（STORED GENERAGED COLUMN），导致在KEY分区表中执行插入操作时报错"ERROR 1748 (HY000) Found a row not matching the given partition set"的问题。

• 修复将冷数据归档为IBD格式的文件时，由于频繁执行DDL和HA操作，导致新连接仍然会访问已被废弃的旧文件的问题。

类别

说明

发布时间

新增功能和性能优化

• 支持任意节点访问列存的INFORMATION_SCHEMA视图信息，默认聚合展示所有列存节点的信息。

• 精简行列自动分流参数的使用方法。

• 当查询语句不支持使用列存引擎时，可以将参数use_imci_engine的值设置为FORCED后再执行查询语句。此时，查询结果中会返回不能使用列存引擎的原因。

• 支持在Grouping字句中使用关联子查询，以及消除复杂关联子查询。

• 多主集群的全局Binlog支持GTID（全局事务标识符）。

• 优化Buffer Pool扩容功能，如自动取消前序缩容、及时扩容等。

• 优化列存索引（IMCI）的启动流程，减少列索引的启动准备时间。

• 支持行列混合查询时的自适应路由能力。

• 提升RO节点在二级索引回表主键情况下的读取性能。

2023-12-14

问题修复

• 修复在创建OSS外表时，用户自定义CONNECTION连接格式有误导致节点崩溃的问题。

• 引入官方MySQL 8.0.17的补丁，用于修复在客户端修改auto_increment_increment后导致autoinc回退的问题。

• 引入官方MySQL 8.0.16的补丁，用于修复Blob过大引发死锁的问题。

• 修复因Runtime Apply引发RO节点崩溃的问题。

• 修复RO节点的物理机出现故障时，RW节点在特殊情况下未将其复制关系中断，而引发RW节点刷脏受阻的问题。

• 修复HA后，因表数量过多而引发table cache淘汰导致Autoinc回退的问题。

• 修复多主集群缓存中心重启情况下，读写节点可能无法启动的问题。

• 修复多主集群切换写入点时，可能发生表无法打开的问题。

• 修复在RO节点进行物理复制时，内存占用过多的问题。

• 修复了AP节点上的outline在SQL token的长度超过max_digest_length参数值时不生效的问题。

• 修复了RO节点升级后，增加或删除outline不能同步到RO节点的问题。

• 修复X-Engine中的表在低并发写入时响应时间偏高的问题。

• 修复Hybrid Plan应用于带Order By的SQL语句，且输出行包含NULL时，报错"table definition has changed"的问题。

类别

说明

发布时间

问题修复

未添加过Statement Outline的集群，在版本升级后如果添加了Statement Outline，进行outline匹配时不再受字符集影响。

2023-11-07

类别

说明

发布时间

新增功能和性能优化

• 支持用户使用内置存储过程dbms_oss.delete_table_flie删除OSS上不使用的文件。

• 优化了库表恢复功能。如提升库表恢复速度，支持任务失败回滚等。

2023-10-31

问题修复

• 修复因多主集群的读写（RW）节点压力大，导致全局只读节点复制延迟增大的问题。

• 修复了带IMCI列索引的表无法执行按时间点恢复的问题。

• 修复了部分场景下，GroupJoin算子占用过多内存导致查询失败的问题。

• 修复加载checkpoint时超前的RowID回滚失败的问题。

• 修复访问X-Engine引擎的只读（RO）节点无法汇报版本引用信息，引发空间回收失败的问题。

• 修复了在unsigned列与signed列进行Join连接时，优化器不能准确估算Join选择率的问题。

• 修复了部分带有OR谓词的查询因查询计划无法绑定正确的列而无法执行的问题。

• 修复了查询被调度器终止时可能导致数据库重启的问题。

• 修复列存索引在延迟物化场景下IO性能退化的问题。

• 修复多主集群在极少数情况下因没有及时释放定时任务元数据锁而导致集群崩溃的问题。

• 修复访问X-Engine引擎中的表时，因访问主键索引之后无法使用索引覆盖扫描结果而导致查询变慢的问题。

• 修复一键升级RDS MySQL至PolarDB MySQL版场景下，PolarDB集群重启导致迁移链路中断的问题。

• 修复删除X-Engine中的表或索引时，由于与偶发的后台SwitchMemtable操作之间存在并发关系而产生极端的redo log时序。导致replica节点崩溃的问题。

类别

说明

发布时间

新增功能和性能优化

• 优化大Blob场景下，只读节点（RO）读取Redo日志的速率。

• 调用内置存储过程时，支持使用大写的存储过程名称进行调用。

2023-09-21

问题修复

• 修复在调用部分内置存储过程时，在入参中添加反引号导致节点崩溃的问题。

• 修复删除相同的SQL语句类型中，最后一个只填写了keyword而没有schema和table的CCL规则时，可能导致节点崩溃的问题。

• 修复当新的只读节点（RO）连接读写节点（RW）时，如果读写节点上的checkpoint之后存在文件扩展日志，在只读节点升级为读写节点的过程中存在小概率崩溃的问题。

类别

说明

发布时间

新增功能和性能优化

• 提高将冷数据以CSV格式归档至OSS时的归档速度。

• 优化等值非覆盖索引访问代价模型。

• 新增参数opt_non_covering_key_cost，用于控制是否考虑二级索引初始定位代价。

• 新增参数worst_seek_records_threshold，用于控制在代价估算时是否限制等值非覆盖索引访问的IO代价最大值。

• Redo半同步功能增加超时退化机制。

2023-08-22

问题修复

• 修复CTE中包含嵌套CTE，且有多处引用的情况下，JPPD优化功能崩溃的问题。

• 修复关闭主节点并重启时，Slave节点未触发重连机制的问题。

• 修复了在更新BLOB类型数据的语法中使用JSON_REMOVE函数时可能引发的问题。

• 修复事务死锁检查过程中，可能出现因访问非法内存导致节点异常重启的问题。

类别

说明

发布时间

问题修复

修复低规格集群上CPU占用过高的问题。

2023-07-13

类别

说明

发布时间

新增功能和性能优化

• 新增SELECT INTO DEFAULT OSSOUTFILE语句。

• 优化多主集群中全局只读节点的共享存储能力。

• 标准版新增自动锁定和恢复集群的能力，即ESSD磁盘满载后，自动锁定集群，扩容后自动恢复集群。

• 新增参数innodb_polar_import_tablespace_strict_mode，默认值为ON，即执行库表恢复操作时，表结构中包含full-text index会报错。

• 支持使用列存索引查询分区表中指定分区的数据。

• SQL Trace支持采样具体的SQL语句。

2023-07-05

问题修复

• 修复普通用户可以删除sys的问题。

• 修复HA后，对分区表执行库表恢复时，节点异常重启的问题。

• 修复按时间点恢复多主集群期间，Standby节点切换master节点失败的问题。

• 修复多主集群的存储过程、自定义函数、定时任务、视图和触发器在不同节点之间没有隔离的问题。

• 修复多主集群的存储过程、自定义函数、定时任务、视图和触发器在不同节点之间无法切换的问题。

• 修复当多主集群开启查询缓存功能后，如果更新了数据，Information_schema库下的数据无法同步更新的问题。

• 修复多主集群在数据表数量太多的情况下，清除缓慢的问题。

类别

说明

发布时间

新增功能和性能优化

• 允许在多主集群的全局RO节点上开启列存索引功能。

• 支持在虚拟列上创建列存索引。

• 支持对创建列存索引的表使用回收站功能。

• 支持创建混合分区表。

• 联邦查询引擎支持将Limit Offset语法下推至远端数据库执行。

• 联邦查询引擎支持将所有兼容的条件下推到远端服务器执行，且仅返回查询所需要的列。

• 新增主键数据切片函数call dbms_dts.show_parallel_ranges (<schema_name>, <table_name>, [<suggestion_ranges>])。

• 支持对含有自增主键的表使用冷数据归档功能。

• 优化OSS查询能力。即开启弹性并行查询功能后，当系统的loose_csv_max_oss_threads参数值大于1时，直接进行并行查询。

• 优化OSS外表文件格式错误的报错信息内容。

• 支持在ALTER TABLE PARTITION BY RANGE语法中增加without validation的选项，将普通表快速转换为RANGE分区表。

• 支持将含有'UNIQUE CHECK IGNORE=1' 属性的分区表通过ALTER TABLE REMOVE PARTITIONING语法转换为普通表。

• 优化使用Statement Outline的过程中，无Outline时，执行语句跳过digest hash计算的问题。

• 新增InnoDB on OSS功能。

• 在多主集群上更新Statement Outline和Concurrency Control后，其他master节点自动同步更新。

• 优化拼写错误的报错信息内容。

• 优化开启StandBy半同步后，RW节点的写入性能。

• 新增LIST DEFAULT HASH分区表类型。

• 支持通过CREATE LIKE语法创建LIST DEFAULT HASH类型的分区表。

• 创建LIST DEFAULT HASH分区表的add partition语法中支持使用without validation选项来添加LIST分区 。

• SQL Trace支持跟踪慢查询的执行信息。

• 优化PolarFS内部的锁粒度，大幅提升部分高负载场景下的性能。

2023-06-12

问题修复

• 修复OSS无法读取JSON文件的问题。

• 修复ps模式下Hint Plan生成失败的问题。

• 修复checkpoint LSN推进不符合预期的问题。

• 修复系统视图中view_definition为空的问题。

• 修复在RW节点执行ALTER TABLE ... IMPORT TABLESPACE操作的同时，在RO节点执行查询操作可能会报错的问题。

• 修复带\n的数据，通过DLM归档后无法读取的问题。

• 修复冷数据归档后，OSS上可能会残留临时文件的问题。

• 修复读取CSV格式的OSS冷数据时，可能只读取到第一个文件的问题。

• 修复并发记录慢查询日志的过程中，thread pool内部计数器异常可能造成SQL请求堆积的问题。

• 修复多主集群并发执行INSERT命令的过程中，可能会出现自增列冲突的问题。

• 修复在RO节点回放宽表的Redo日志时，出现复制延迟的问题。

• 修复查询语句中含有窗口函数时，使用Limit Offset下推优化功能导致查询结果错误的问题。

• 修复在多主集群中执行CHECK TABLE语句时，需要全程持有锁的问题。

• 修复执行ALTER TABLE engine = csv storage oss, force; 命令时，无法删除OSS上源文件的问题。

• 修复动态调整多主集群缓存时，导致集群崩溃的问题。

• 修复多主集群无法导出表空间的问题。

• 修复当engine_condition_pushdown参数值设置为true时，带有NULL字段的表下推不正确的问题。

• 修复使用Fast Query Cache功能时，使用Time和timestamp进行比较，结果集可能错误的问题。

• 修复动态开启PolarTrans后，在高并发更新场景下可能导致性能回退的问题。

类别

说明

发布时间

新增功能和性能优化

• 列存索引支持以重建列存索引数据的方式秒级加列。

• 列存索引支持REGEXPR函数。

• 列存索引支持基于IS NULL和IS NOT NULL相关的判断条件进行裁剪优化。

• 多主集群（库表）支持使用冷数据归档功能。

• 对多主集群（库表）版集群执行内核小版本升级操作时，支持并行升级集群中的各个节点。

• 多主集群（库表）支持持久化统计信息。

• 优化对OSS外表开启OSS条件下推时的Optimizer trace。

• 手动和自动归档冷数据过程中不记录Binlog日志。

• 全局一致性（高性能模式）新增Innodb_scc_timeout_count参数，用于记录查询过程中的超时次数。

• 全局一致性（高性能模式）新增Innodb_scc_timeout_degrade_count参数，用于记录查询超时转异步查询的次数。

• 支持在只读节点查询gtid信息。

• Hint Plan新增Hint种类BNL、BKA和MRR。

• Fast Query Cache新增变量qc_weak_read_time，用于读取非实时缓存。

• Statement Outline功能新增接口dbms_outln.add_optimizer_outline('schema', 'hints', 'query') ，用于添加Optimizer Hints。

• 新增Auto Plan Cache功能。

• SQL Sharing中使用JSON格式展示plan_extra、ref_by和extra。

• 在慢日志扩展数据中展示执行计划。

• 当使用Statement Outline过程中指定的Index Hints不存在时，不直接进行报错，只报告警。

• SQL Sharing中新增变量by_expr_ignore_charset。将by_expr_ignore_charset设置为ON后，会消除不同字符集下含Order By或Group By语句生成的digest差异。但设置为ON后， 所有在该模式下生成的digest值都会与设置为ON之前生成的digest值不同。

• 优化扫描回收站内表时的内存消耗。

• 提供多版本引擎能力。

2023-04-14

问题修复

• 修复对空的OSS外表执行check操作时，数据库节点会崩溃的问题。

• 修复在多主集群（库表）的全局只读节点执行查询操作时，偶尔会报错的问题。

• 修复多主集群（库表）元信息表空间大小不同步的问题。

• 修复多主集群（库表）在系统表空间下自定义的表数据会回滚的问题。

• 修复开启回收undo日志功能后，undo日志无法被回收的问题。

• 修复在只读节点建立物理复制时出现读超时，而无法连接数据库的问题。

• 修复在多主集群（库表）中执行ALTER TABLE DISCARD tablespace后，再执行ADD INDEX或DROP INDEX语句时导致节点崩溃的问题。

类别

说明

发布时间

新增功能和性能优化

• 归档为CSV格式支持alter table engine语法。通过Alter Table table_name engine = csv connection = 'default_oss_server'命令可以指定冷数据表归档到OSS上。

• 列存索引功能支持MySQL的DECIMAL数据类型。

• 创建列存索引时支持根据指定的列对数据进行排序，从而提高裁剪效率。

• 列存索引功能支持基于存储在OSS中的ORC或PARQUET格式的文件进行数据扫描。

• 基于代价的计算支持将物化的derived table的外层连接条件，下推到derived table内部。

• 优化了优化器在等值推导场景下，估算关联列扫描行数的能力。

• 优化器的join消除功能支持对left join的内表（包括有多层嵌套join以及Semi-Join的内表）进行消除。

• 多主集群（库表）支持新增多个全局RO节点，且支持HA切换机制。

• 新增冷热数据分离管理（DLM）功能，您可以定期将老化的数据存储到低成本存储介质上。

• 支持使用CAST(... AS INT) 语法 ，行为与CAST(... AS SIGNED INT) 完全一致。

• 多主集群支持多主互备功能。

2023-02-21

问题修复

• 修复长事务场景下可能导致数据库性能变慢的问题。

• 修复全局一致性（高性能模式）和PQ的兼容性问题。

• 修复多主集群使用透明表空间传输功能时，会阻塞其他节点执行DDL的问题。

• 修复表的free size在一定概率下会显示为4 PB的问题。

• 修复多主集群的多个主节点并行重启时，部分节点无法启动的问题。

• 修复多主集群的全文索引和列存索引在写入点切换时，导致集群崩溃的问题。

• 修复带Foreign Key的表做copy DDL时，数据库缓存访问异常的问题。

• 调整物理复制连接相关的超时参数，以避免出现物理机故障时卡顿的问题。

• 修复多主集群崩溃恢复时，无法恢复表锁的问题。

• 修复新增节点时，访问information_schema.tables表，节点可能会崩溃的问题。

• 修复多主集群崩溃恢复阶段丢失脏页的问题。

• 修复删除多主集群的数据库后，切换写入点时导致集群崩溃的问题。

• 修复在开启线程池时，使用TempTable engine可能导致访问非法内存的问题。