本文介绍E-MapReduce(简称EMR)各版本支持的大数据组件,您可以根据需求选择合适的版本。
版本介绍
E-MapReduce版本号采用EMR-a.b.c格式,其中:
a:表示技术架构或核心生态的重大演进。目前支持EMR 5.x系列、EMR 3.x系列。
b:表示组件更新。
c:表示兼容性Bug修复。
各版本支持的组件
EMR集群内各组件的版本通常与其对应的开源版本保持一致。
每个版本均预装固定的组件版本,不建议更改组件版本。此外,EMR集群内各组件版本不支持升级,请根据实际需求选择相应版本的集群。
创建集群时,每个组件都只有一个版本。如需使用多个版本(如Spark2和Spark3),可在创建集群后自行安装并评估兼容性和安全性风险。
本文表格中
-
表示该版本未集成此组件。
EMR-5.x系列(基于Hadoop 3.x和Hive 3.x构建)
EMR-5.19.x及之后版本
服务 | EMR-5.19.x |
Hadoop-Common | 3.2.1 |
3.2.1 | |
1.0.0 | |
3.2.1 | |
3.1.3 | |
2.4.8 | |
3.5.3 | |
0.10.2 | |
422 | |
0.15.0 | |
1.5.0 | |
1.11.0 | |
1.9.2 | |
1.5.0 | |
2.4.46 | |
2.3.0 | |
Ranger-plugin | 1.0.0 |
1.4.7 | |
2.0.2 | |
0.283 | |
2.5.22 | |
3.2.11 | |
3.8.4 | |
0.5.2 | |
1.17.2 | |
2.6.3 | |
6.8.2 | |
1.0-ali-6.2 | |
5.2.1 | |
23.3.13.6 | |
2.1.4 |
EMR-5.18.x及之前版本
服务 | EMR-5.18.x | EMR-5.17.x | EMR-5.16.x | EMR-5.15.x | EMR-5.14.x | EMR-5.13.x | EMR-5.12.x | EMR-5.11.x |
Hadoop-Common | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 |
3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | |
1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 |
| - | |
3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | 3.2.1 | |
3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | 3.1.3 | |
2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | |
3.5.3 | 3.4.2 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | |
0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | |
422 | 422 | 422 | 422 | 422 | 422 | 389 | 389 | |
- | 3.0.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | |
0.15.0 | 0.14.0 | 0.14.0 | 0.13.1 | 0.13.1 | 0.13.1 | 0.12.2 | 0.12.2 | |
1.5.0 | 1.5.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | |
- | - | - | - | 4.6.11 | 4.6.11 | 4.6.5 |
| |
1.11.0 | 1.11.0 | 1.11.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | |
1.9.2 | 1.7.3 | 1.7.3 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.6.1 | |
1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | |
- | 4.3.0 | 4.3.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | 4.2.0 | |
2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | |
2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | |
Ranger-plugin | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 |
1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | |
2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | |
0.283 | 0.283 | 0.283 | 0.283 | 0.283 | 0.278.3 | 0.278.3 | 0.278.3 | |
2.5.22 | 2.5.22 | 2.5.13 | 2.5.12 | 2.5.12 | 2.5.8 | 2.5.5 | 2.5.1 | |
3.2.11 | 3.2.11 | 3.1.5 | 3.1.2 | 3.1.2 | - | - | - | |
3.8.4 | 3.8.4 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | |
0.5.2 | 0.4.0 | 0.3.2 | 0.3.1 | 0.3.0 | 0.2.2 | 0.2.2 | 0.2.0 | |
1.17.2 | 1.17.2 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | |
Flink Table Store | - | - | - | - | - | - | - |
|
2.4.9 | 2.4.9 | 2.4.9 | 2.4.9 | 2.4.9 | 2.4.9 | 2.4.9 | 2.4.9 | |
6.5.3 | 6.5.3 | 6.2.0 | 6.1.1 | - | - | - | - | |
- | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | |
1.0-ali-1 | 0.9-ali-7 | 0.7-ali-1 | 0.6-ali-2 | 0.5-ali-1 | 0.5-ali-1 | 0.4-ali-1 | - | |
5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | |
23.3.13.6 | 23.3.13.6 | 23.3.13.6 | 23.3.13.6 | 23.3.2.37 | 23.3.2.37 | 23.3.2.37 | 22.8.14.53 | |
2.1.4 | 2.1.4 | 1.2.7 | 1.2.7 | 1.2.4 | 1.2.4 | 1.2.4 | 1.2.1 | |
- | 2.13_3.6.1 | 2.13_3.6.1 | 2.13_3.6.1 | - | 2.13_3.2.1 | 2.13_3.2.1 | 2.13_3.2.1 | |
- | 3.0.0.6 | 3.0.0.6 | 3.0.0.6 | - | 3.0.0.6 | 3.0.0.6 | 3.0.0.6 |
EMR-5.10.x及之前版本
组件 | EMR-5.10.x | EMR-5.9.x | EMR-5.8.x |
Hadoop-Common | 3.2.1 | 3.2.1 | 3.2.1 |
3.2.1 | 3.2.1 | 3.2.1 | |
3.2.1 | 3.2.1 | 3.2.1 | |
3.1.3 | 3.1.3 | 3.1.3 | |
2.4.8 | 2.4.8 | 2.4.8 | |
3.3.1 | 3.3.0 | 3.2.1 | |
0.10.2 | 0.10.1 | 0.10.1 | |
389 | - | - | |
- | 389 | 389 | |
2.1.0 | 2.1.0 | 1.1.0 | |
0.12.0 | 0.12.0 | 0.11.1 | |
0.14.1 | 0.14.0 | 0.13.1 | |
|
| 4.4.2 | |
1.9.0 | 1.9.0 | 1.9.0 | |
1.6.0 | 1.5.2 | 1.5.2 | |
1.5.0 | 1.5.0 | 1.5.0 | |
3.4.0 | 3.4.0 | 3.4.0 | |
2.4.44 | 2.4.44 | 2.4.44 | |
2.3.0 | 2.1.0 | 2.1.0 | |
1.4.7 | 1.4.7 | 1.4.7 | |
2.0.2 | 2.0.0 | 2.0.0 | |
3.6.3 | 3.6.3 | 3.6.3 | |
|
| 1.13_vvr_4.0.13 | |
2.4.9 | 2.4.9 | 2.4.9 | |
1.14.0 | 1.14.0 | 1.14.0 | |
5.1.2 | 5.1.2 | 5.1.2 | |
RSS | 0.1.4 | 0.1.4 | 0.1.1 |
| 2.3.2 | 2.3.0 | |
22.3.8.39 | 22.3.8.39 | 22.3.8.39 | |
| 1.1.2 | 1.1.1 | |
2.13_3.2.1 | 2.13_3.2.1 | 2.12_2.4.1 | |
2.0.0.2 | 2.0.0.2 | 2.0.0.2 |
EMR-3.x系列(基于Hadoop 2.x和Hive 2.x构建)
MR-3.53.x及之后版本
服务 | EMR-3.52.x |
Hadoop-Common | 2.8.5 |
2.8.5 | |
1.0.0 | |
2.3.9 | |
2.4.8 | |
3.4.2 | |
2.8.5 | |
422 | |
3.0.0 | |
0.15.0 | |
1.5.0 | |
1.11.0 | |
1.9.2 | |
0.10.2 | |
2.4.46 | |
2.3.0 | |
Ranger-plugin | 1.0.0 |
1.4.7 | |
2.0.2 | |
0.283 | |
2.5.22 | |
3.2.11 | |
3.8.4 | |
1.5.0 | |
0.5.2 | |
1.17.2 | |
1.7.1 | |
6.8.2 | |
1-ali-6.2 | |
4.16.1 | |
23.8.2.7 | |
2.1.4 |
EMR-3.52.x及之前版本
服务 | EMR-3.52.x | EMR-3.51.x | EMR-3.50.x | EMR-3.49.x | EMR-3.48.x | EMR-3.47.x | EMR-3.46.x | EMR-3.45.x |
Hadoop-Common | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 |
2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | |
1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 |
| - | |
2.3.9 | 2.3.9 | 2.3.9 | 2.3.9 | 2.3.9 | 2.3.9 | 2.3.9 | 2.3.9 | |
2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | 2.4.8 | |
3.4.2 | 3.4.2 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | 3.3.1 | |
2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | 2.8.5 | |
422 | 422 | 422 | 422 | 422 | 422 | 389 | 389 | |
3.0.0 | 3.0.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | |
0.15.0 | 0.14.0 | 0.14.0 | 0.13.1 | 0.13.1 | 0.13.1 | 0.12.2 | 0.12.2 | |
1.5.0 | 1.5.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | |
1.11.0 | 1.11.0 | 1.11.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | 1.9.0 | |
1.9.2 | 1.7.3 | 1.7.3 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.6.1 | |
0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | 0.10.2 | |
2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | 2.4.46 | |
2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | 2.3.0 | |
Ranger-plugin | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 | 1.0.0 |
1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | |
2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | 2.0.2 | |
0.283 | 0.283 | 0.283 | 0.283 | 0.283 | 0.283 | 0.278.3 | 0.278.3 | |
2.5.22 | 2.5.22 | 2.5.13 | 2.5.12 | 2.5.12 | 2.5.12 | 2.5.5 | 2.4.3 | |
3.2.11 | 3.2.11 | 3.1.5 | 3.1.2 | 3.1.2 | - | - | - | |
3.8.4 | 3.8.4 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | 3.6.3 | |
1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | 1.5.0 | |
0.5.2 | 0.4.0 | 0.3.2 | 0.3.1 | 0.3.0 | 0.3.0 | 0.2.2 | 0.2.0 | |
1.17.2 | 1.17.2 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | 1.15_vvr_6.0.4 | |
Flink Table Store | - | - | - | - | - | - | - |
|
1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | 1.7.1 | |
6.5.3 | 6.5.3 | 6.2.0 | 6.1.1 | - | - | - | - | |
- | - | - | - | 4.6.11 | 4.6.11 | 4.6.5 |
| |
- | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | |
0.9-ali-7 | 0.9-ali-7 | 0.7-ali-1 | 0.6-ali-2 | 0.5-ali-1 | 0.5-ali-1 | 0.4-ali-1 | - | |
4.16.1 | 4.16.1 | 4.16.1 | 4.16.1 | 4.16.1 | 4.16.1 | 4.16.1 | 4.16.1 | |
23.8.2.7 | 23.8.2.7 | 23.8.2.7 | 23.8.2.7 | 22.8.17.17 | 22.8.17.17 | 22.8.17.17 | 22.8.14.53 | |
2.1.4 | 2.1.4 | 1.2.7 | 1.2.7 | 1.2.4 | 1.2.4 | 1.2.4 | 1.2.1 | |
- | 2.12_2.4.1 | 2.12_2.4.1 | 2.12_2.4.1 | - | 2.12_2.4.1 | 2.12_2.4.1 | 2.12_2.4.1 | |
- | 3.0.0.6 | 3.0.0.6 | 3.0.0.6 | - | 3.0.0.6 | 3.0.0.6 | 3.0.0.6 |
EMR-3.44.x及之前版本
服务 | EMR-3.44.x | EMR-3.43.x | EMR-3.42.x |
Hadoop-Common | 2.8.5 | 2.8.5 | 2.8.5 |
2.8.5 | 2.8.5 | 2.8.5 | |
2.3.9 | 2.3.9 | 2.3.9 | |
2.4.8 | 2.4.8 | 2.4.8 | |
3.3.1 | 3.3.0 | 3.2.1 | |
2.8.5 | 2.8.5 | 2.8.5 | |
389 | - | - | |
- | 389 | 389 | |
2.1.0 | 2.1.0 | 0.6.1 | |
0.12.0 | 0.12.0 | 0.11.1 | |
0.14.1 | 0.14.0 | 0.13.1 | |
3.4.0 | 3.4.0 | 3.4.0 | |
1.9.0 | 1.9.0 | 1.9.0 | |
1.6.0 | 1.5.2 | 1.5.2 | |
0.10.2 | 0.10.1 | 0.10.2 | |
2.4.44 | 2.4.44 | 2.4.44 | |
1.2.0 | 1.2.0 | 1.2.0 | |
1.4.7 | 1.4.7 | 1.4.7 | |
2.0.2 | 2.0.0 | 2.0.0 | |
| 2.2.6 | 2.2.3 | |
3.6.3 | 3.6.3 | 3.6.3 | |
1.5.0 | 1.5.0 | 1.5.0 | |
RSS | 0.1.4 |
| 0.1.1 |
|
| 1.13_vvr_4.0.13 | |
1.7.1 | 1.7.1 | 1.7.1 | |
|
| 4.4.2 | |
1.16.0 | 1.14.0 | - | |
4.16.1 | 4.16.1 | - | |
21.8.15.7 | 21.8.15.7 | 21.8.15.7 | |
| 1.1.2 | 1.1.1 | |
2.12_2.4.1 | 2.12_2.4.1 | 2.12_2.4.1 | |
2.0.0.2 | 2.0.0.2 | 2.0.0.2 |
- 本页导读 (1)
- 版本介绍
- 各版本支持的组件
- EMR-5.x系列(基于Hadoop 3.x和Hive 3.x构建)
- EMR-3.x系列(基于Hadoop 2.x和Hive 2.x构建)