Task-开源大数据平台 E-MapReduce(EMR)-阿里云帮助中心

名称	类型	描述	示例值
	object
sparkArgs	string	spark 参数	100
sparkDriverMemory	integer	spark driver 内存
sparkVersion	string	spark 版本
sparkExecutorMemory	integer	spark executor 内存
sparkLogLevel	string	spark 日志级别
sparkEntrypoint	string	spark 主类入口
gmtModified	string	最后创建时间
hasCommited	boolean	是否已提交
sparkLogPath	string	spark 日志
creator	integer	创建者 uid
gmtCreated	string	创建时间
name	string	task 名称
sparkDriverCores	integer	spark driver 核数
type	string	task 类型
sparkExecutorCores	integer	spark executor 核数
content	string	spark 作业内容
extraArtifactIds	array	spark 额外资源 id
	string
lastRunResourceQueueId	string	最后一次运行的资源队列 id
modifier	integer	最后一次更新者 uid
sparkConf	array	spark 配置列表
	SparkConf
bizId	string	业务 id
categoryBizId	string	目录业务 id
artifactUrl	string	资源文件访问临时 url
defaultResourceQueueId	string	task 默认队列 id
tags	object	任务标签
	string		tag key
defaultDatabase	string	默认数据库
hasChanged	boolean	最后一次提交后是否变更
pyFiles	array	spark pyspark 依赖 pyfiles
	string
defaultCatalogId	string	默认 catalog id
defaultSqlComputeId	string	默认 sql session id
jars	array	--jars 参数
	string
archives	array	--archives 参数
	string
files	array	--files 参数
	string
extraSparkSubmitParams	string	自定义 spark submit 配置参数
deploymentId	string	streaming 任务部署 id
isStreaming	boolean	是否是 streaming 任务
sparkSubmitClause	string	spark submit 任务提交语句
fusion	boolean	是否开启 fusion 开关
timeout	integer	任务超时时间
credential	object	直传 oss 信息
accessId	string	access id
securityToken	string	security token
policy	string	policy
signature	string	签名
path	string	路径
host	string	域名
expire	integer	过期时间
accessUrl	string	访问链接
environmentId	string	环境 id
sessionClusterId	string
kernelId	string
params	object
	string
rayEntrypoint	string
rayVersion	string
rayNetworkServiceName	string
rayRuntimeEnvJson	string
rayWorkingDir	string
rayMetadataJson	string
raySubmissionMode	string
rayEntrypointNumCpus	string
rayEntrypointNumGpus	string
rayEntrypointMemory	string
rayEntrypointResources	string
rayShutdownAfterJobFinishes	boolean
rayTtlSecondsAfterFinished	integer
rayActiveDeadlineSeconds	integer
rayBackoffLimit	integer
rayHeadSpec	object
replica	integer
enableAutoScaling	boolean
idleTimeoutSeconds	integer
queueName	string
cpu	string
memory	string
gpuSpec	string
rayExtraParam	string
rayVolumeIds	array
	string
rayWorkerSpec	array
	object
groupName	string
replica	integer
minReplica	integer
maxReplica	integer
queueName	string
cpu	string
memory	string
gpuSpec	string

object

sparkArgs

string

spark 参数

100

sparkDriverMemory

integer

spark driver 内存

sparkVersion

string

spark 版本

sparkExecutorMemory

integer

spark executor 内存

sparkLogLevel

string

spark 日志级别

sparkEntrypoint

string

spark 主类入口

gmtModified

string

最后创建时间

hasCommited

boolean

是否已提交

sparkLogPath

string

spark 日志

creator

integer

创建者 uid

gmtCreated

string

创建时间

name

string

task 名称

sparkDriverCores

integer

spark driver 核数

type

string

task 类型

sparkExecutorCores

integer

spark executor 核数

content

string

spark 作业内容

extraArtifactIds

array

spark 额外资源 id

string

lastRunResourceQueueId

string

最后一次运行的资源队列 id

modifier

integer

最后一次更新者 uid

sparkConf

array

spark 配置列表

SparkConf

bizId

string

业务 id

categoryBizId

string

目录业务 id

artifactUrl

string

资源文件访问临时 url

defaultResourceQueueId

string

task 默认队列 id

archives

array

--archives 参数

string

files

array

--files 参数

string

extraSparkSubmitParams

string

自定义 spark submit 配置参数

deploymentId

string

streaming 任务部署 id

isStreaming

boolean

是否是 streaming 任务

sparkSubmitClause

string

spark submit 任务提交语句

fusion

boolean

是否开启 fusion 开关

timeout

integer

任务超时时间

credential

object

直传 oss 信息

accessId

string

access id

securityToken

string

security token

policy

string

policy

signature

string

签名

path

string

路径

host

string

域名

expire

integer

过期时间

accessUrl

string

访问链接

environmentId

string

环境 id

sessionClusterId

string

kernelId

string

params

object

string

rayEntrypoint

string

rayVersion

string

rayNetworkServiceName

string

rayRuntimeEnvJson

string

rayWorkingDir

string

rayMetadataJson

string

raySubmissionMode

string

rayEntrypointNumCpus

string

rayEntrypointNumGpus

string

rayEntrypointMemory

string

rayEntrypointResources

string

rayShutdownAfterJobFinishes

boolean

rayTtlSecondsAfterFinished

integer

rayActiveDeadlineSeconds

integer

rayBackoffLimit

integer

rayHeadSpec

object

replica

integer

enableAutoScaling

boolean

idleTimeoutSeconds

integer

queueName

string

cpu

string

memory

string

gpuSpec

string

rayExtraParam

string

rayVolumeIds

array

string

rayWorkerSpec

array

object

groupName

string

replica

integer

minReplica

integer

maxReplica

integer

queueName

string

cpu

string

memory

string

gpuSpec

string