本文为您介绍如何创建并运行Spark作业。
创建项目
新建作业
配置并运行作业
- 配置作业内容。
- 单击右上角的保存。
- 单击右上角的运行。
- 在运行作业对话框中,单击确定。
查看日志
您可以单击作业下方的运行记录页签,查看作业的运行情况。

单击详情,您可以查看作业的实例信息、提交日志和YARN容器日志。
问题反馈
如果您在使用阿里云E-MapReduce过程中有任何疑问,欢迎您扫描下面的二维码加入钉钉群进行反馈。

更新时间:2020-11-12 12:38
本文为您介绍如何创建并运行Spark作业。
--class org.apache.spark.examples.SparkPi --master yarn-client --driver-memory 512m --num-executors 1 --executor-memory 1g --executor-cores 2 /usr/lib/spark-current/examples/jars/spark-examples_2.11-2.4.5.jar 10
/usr/lib/spark-current/examples/jars/spark-examples_2.11-2.4.5.jar
中的2.4.5
是您集群中的Spark版本。
单击详情,您可以查看作业的实例信息、提交日志和YARN容器日志。
如果您在使用阿里云E-MapReduce过程中有任何疑问,欢迎您扫描下面的二维码加入钉钉群进行反馈。
在文档使用中是否遇到以下问题
更多建议
匿名提交