文档

EMR-3.46.x版本说明

更新时间:

本文介绍EMR-3.46.x版本的发布日期、更新内容和发行版本信息。

发布日期

版本

日期

EMR-3.46.1

2023年7月13日

EMR-3.46.0

2023年6月1日

更新内容

EMR-3.46.1

服务

变更点

Spark

  • Spark History Server支持默认使用OSS-HDFS存储。

  • Spark3 Native Engine支持使用OSS和OSS-HDFS存储。

Hive

Hive warehouse支持默认使用OSS-HDFS存储。

OSS-HDFS

新增服务。

YARN

支持默认使用OSS-HDFS存储。

HBase

  • HBase HFile数据支持默认使用OSS-HDFS存储。

  • HBase WAL日志支持使用OSS-HDFS存储。

EMR-3.46.0

服务

变更点

Kyuubi

升级到1.7.1版本。

Celeborn

升级到0.2.2版本。

Paimon

  • Flink-Table-Store更名为Paimon。

  • 升级到0.4-ali-1版本。

Starrocks

升级到2.5.5版本。

Doris

升级到1.2.4版本。

ClickHouse

升级到22.8.17.17版本。

Trino

默认提供了一个简单的Event Listener,可以获取审计日志。

Phoenix

支持Hive on Phoenix。

发行版本信息

DataLake集群

服务

版本

Hadoop-Common

2.8.5

HDFS

2.8.5

OSS-HDFS

1.0.0

YARN

2.8.5

Hive

2.3.9

Spark2

2.4.8

Spark3

3.3.1

Tez

0.10.2

Trino

389

DeltaLake

2.2.0

Hudi

0.12.2

Iceberg

1.1.0

JindoData

4.6.5

Flume

1.9.0

Kyuubi

1.7.1

Knox

1.5.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Sqoop

1.4.7

DLF-Auth

2.0.2

Presto

0.278.3

Zookeeper

3.6.3

Celeborn

0.2.2

Paimon

0.4-ali-1

OLAP集群

服务

版本

StarRocks

2.5.5

Doris

1.2.1

ClickHouse

22.8.17.17

Zookeeper

3.6.3

DataFlow集群

服务

版本

Hadoop-Common

2.8.5

HDFS

2.8.5

OSS-HDFS

1.0.0

YARN

2.8.5

Knox

1.5.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Zookeeper

3.6.3

Flink

1.15_vvr_6.0.4

Paimon

0.4-ali-1

Kafka

2.12_2.4.1

Kafka-Manager

3.0.0.6

DataServing集群

服务

版本

Hadoop-Common

2.8.5

HDFS

2.8.5

OSS-HDFS

1.0.0

JindoData

4.6.5

Knox

1.5.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Zookeeper

3.6.3

HBase

1.7.1

Phoenix

4.16.1

自定义集群

服务

版本

Hadoop-Common

2.8.5

HDFS

2.8.5

OSS-HDFS

1.0.0

YARN

2.8.5

Hive

2.3.9

Spark2

2.4.8

Spark3

3.3.1

Tez

0.10.2

Trino

389

DeltaLake

2.2.0

Hudi

0.12.2

Iceberg

1.1.0

JindoData

4.6.5

Flume

1.9.0

Kyuubi

1.7.1

Knox

1.5.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Sqoop

1.4.7

DLF-Auth

2.0.2

Presto

0.278.3

StarRocks

2.5.5

Zookeeper

3.6.3

Celeborn

0.2.2

Flink

1.15_vvr_6.0.4

Paimon

0.4-ali-1

HBase

1.7.1

Kudu

1.16.0

Phoenix

4.16.1