文档

引擎版本介绍

更新时间:

阿里云EMR Serverless Spark采用的是基于Apache Spark引擎。本文为您详细介绍引擎版本号及含义。

引擎版本号及其含义

引擎版本的格式为esr-** (Spark **, Scala **, Java Runtime/Native Runtime)

内容

含义

esr-**

EMR Serverless Spark版本号,例如esr-2.1。

Spark **

指遵循的Apache Spark引擎版本号,例如Spark 3.3.1。

Scala **

表示该引擎版本所支持的Scala编程语言的版本,例如Scala 2.12。

Java Runtime

指Spark应用在标准的Java虚拟机(JVM)上运行,所有Spark任务都是通过Java或Scala代码执行。

Native Runtime

使用阿里云Fusion Engine提供的运行时环境,利用向量化和原生库等技术来加速SQL类应用的执行性能。

以下为您介绍目前已有引擎版本的含义。

引擎版本

含义

esr-2.1 (Spark 3.3.1, Scala 2.12, Java Runtime)

基于Apache Spark 3.3.1构建,使用Scala 2.12进行编程,采用Java运行时环境。

esr-2.1-native (Spark 3.3.1, Scala 2.12, Native Runtime)

Fusion Engine(Spark Native Engine),基于Apache Spark 3.3.1构建,使用Scala 2.12进行编程,采用原生运行时环境。

esr-1.0 (Spark 2.4.7, Scala 2.11, Java Runtime)

基于Apache Spark 2.4.7构建,使用Scala 2.11进行编程,采用Java运行时环境。