EMR-4.5.x版本说明

本文介绍EMR-4.5.x发行版本的发布日期和更新内容等信息。

EMR-4.5.1

发布日期

2020年12月13日

更新内容

  • 该版本修复了Hive和Presto查询分区表的问题。

  • 该版本目前只支持部分地域,包括华东1(杭州)、华东2(上海)和华北2(北京)。

EMR-4.5.0

发布日期

2020年12月7日

新增内容

服务

变更点

ESS(EMR Remote Shuffle Service)

支持1.0.0版本。

详情请参见ESS

Hudi

支持0.6.0版本。

Delta Lake

支持0.6.1版本。

更新内容

服务

变更点

Ranger

  • 升级至2.1.0版本。

  • 支持Ownership权限。

Presto

  • 升级至338版本。

  • 支持数据湖构建(DLF)元数据。

Zeppelin

升级至0.8.2版本。

SmartData

升级至3.1.0版本。

详情请参见SmartData 3.1.x版本简介

Bigboot

升级至3.1.0版本。

Hive

  • 支持数据湖构建(DLF)元数据。

  • 支持Ranger Ownership权限。

Spark

支持数据湖构建(DLF)元数据。

DLF Metastore

  • 修复高安全集群中Presto服务无法启动的问题。

  • 增加支持Hive 3和Cache。

  • 修复Hive和Presto查询数据的问题。

Impala

支持在EMR控制台自定义配置catalogd.flgsimpalad.flgsstatestored.flgs

Tez

Tez UI的autoDeploy相关漏洞修复。

OpenLDAP

增加10389端口等待的判断。

Hue

MySQL Backend安全漏洞修复。

Kerberos

  • 升级至Apache Kerby 2.0.1。

  • 修复外部Kerberos集群的kadmin principal无法自定义的问题。

Sqoop

  • 支持Parquet、AVRO和ORC等多种文件格式。

  • 支持数据湖构建(DLF)元数据。

发行版本信息

Hadoop集群

服务

版本

HDFS

3.1.3

YARN

3.1.3

Hive

3.1.2

Spark

2.4.5

Knox

1.1.0

Tez

0.9.2

Ganglia

3.7.2

Sqoop

1.4.7

SmartData

3.1.0

Bigboot

3.1.0

Hudi

0.6.0

OpenLDAP

2.4.44

Hue

4.4.0

HBase

2.1.9

Zookeeper

3.5.6

Presto

338

Impala

3.4.0

Zeppelin

0.8.2

Pig

0.14.0

Flume

1.9.0

Livy

0.6.0

Superset

0.36.0

Ranger

2.1.0

Flink

1.10-vvr-1.0.2

Storm

1.2.2

ESS

1.0.0

Kudu

1.11.1

Oozie

5.1.0

Shuffle Service集群

服务

版本

ESS

1.0.0

Kafka集群

服务

版本

Zookeeper

3.5.6

Ganglia

3.7.2

Kafka

2.4.1

Kafka-Manager

1.3.3.16

OpenLDAP

2.4.44

Knox

1.1.0

Ranger

2.1.0