EMR-5.8.x版本说明

服务

变更点

Spark

支持一键对接LDAP。

Hive

支持一键对接LDAP。

Presto

• 升级至社区389版本。

  使用社区提供的Delta Lake和Hudi独立连接器。

  • 此版本Delta Lake连接器暂不支持Time Travel和Z-Order。

  • 此版本Hudi连接器暂不支持查询MOR表。

• 支持一键对接LDAP。

DeltaLake

• 对接了DLF自动化湖表管理。

• 修复了CTAS场景不能自动同步分区信息的问题。

• 支持optimize和vacuum命令返回指标信息。

Hudi

升级至0.11.1版本。

HadoopCommon

新增组件，解决了HDFS、YARN和JindoSDK配置相互覆盖的问题。

YARN

弹性功能增强。

Ranger

• 同时支持Spark2和Spark3。

• 支持Ranger Usersync一键对接LDAP。

Kafka

新增组件，版本为2.12-2.4.1。

HBase

新增组件，版本为2.3.4。

Phoenix

新增组件，版本为5.1.2。

Doris

升级至1.1.1版本。

StarRocks

• 升级至2.3.0版本。

• 主键模型支持完整的DELETE WHERE语法、支持持久化主键索引以降低内存使用等，详细信息请参见StarRocks version 2.3。

ClickHouse

• 升级为22.3.8.39版本。

• 修复了读OSS大文件时内存溢出的问题。