EMR-5.18.x版本说明

本文介绍EMR-5.18.x版本的发布日期、更新内容和发行版本信息。

发布日期

版本

日期

EMR-5.18.1

20241218

EMR-5.18.0

2024124

更新内容

服务

变更点

Spark3

  • 升级至3.5.3版本。

  • 修复了Spark在扩容过程中遇到的配置问题。

Trino

解决了LDAP启用后无法连接的问题。

Presto

Zookeeper

支持添加自定义配置。

Ranger

将现有的Spark 3 Ranger插件替换为Kyuubi开源项目提供的版本。

Hudi

升级至0.15.0版本。

Celeborn

升级至0.5.2版本。

Paimon

升级至1.0-ali-1版本。

JindoCache

升级至6.5.3版本。

StarRocks3

升级至3.2.11版本。

StarRocks2

升级至2.5.22版本。

Impala

服务已下线。您可以选择使用推荐的服务作为替代,或自行安装相应的服务。

Impala:建议您使用Presto、Trino、ClickHouseStarRocks替代。

Kudu

Kafka

Kafka-Manager

发行版本信息

DataLake集群

服务

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

Hive

3.1.3

Spark2

2.4.8

Spark3

3.5.3

Tez

0.10.2

Trino

422

Hudi

0.15.0

Iceberg

1.5.0

Flume

1.11.0

Kyuubi

1.7.3

YARN

3.2.1

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

DLF-Auth

2.0.2

Presto

0.283

Zookeeper

3.8.4

Sqoop

1.4.7

Knox

1.5.0

Celeborn

0.4.0

JindoCache

6.5.3

Paimon

1.0-ali-1

OLAP集群

服务

版本

StarRocks3

3.2.11

Doris

2.1.4

ClickHouse

23.3.13.6

Zookeeper

3.8.4

DataFlow集群

服务

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

YARN

3.2.1

OpenLDAP

2.4.46

Zookeeper

3.8.4

Knox

1.5.0

Flink

1.17.2

Paimon

0.9-ali-7

DataServing集群

服务

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Zookeeper

3.8.4

Knox

1.5.0

HBase

2.4.9

JindoCache

6.5.3

Phoenix

5.1.2

自定义集群

服务

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

Hive

3.1.3

Spark2

2.4.8

Spark3

3.5.3

Tez

0.10.2

Trino

422

Hudi

0.15.0

Iceberg

1.5.0

Flume

1.11.0

Kyuubi

1.9.2

YARN

3.2.1

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

DLF-Auth

2.0.2

Presto

0.283

StarRocks3

3.2.11

Zookeeper

3.8.11

Sqoop

1.4.7

Knox

1.5.0

Celeborn

0.5.2

Flink

1.17.2

HBase

2.4.9

JindoCache

6.5.3

Paimon

1.0-ali-1

Phoenix

5.1.2