文档

CreateFile - 在数据开发中创建一个文件

更新时间:

调用CreateFile,在数据开发中创建一个文件。目前不支持调用该接口创建数据集成节点任务。

调试

您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。

授权信息

下表是API对应的授权信息,可以在RAM权限策略语句的Action元素中使用,用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下:

  • 操作:是指具体的权限点。
  • 访问级别:是指每个操作的访问级别,取值为写入(Write)、读取(Read)或列出(List)。
  • 资源类型:是指操作中支持授权的资源类型。具体说明如下:
    • 对于必选的资源类型,用背景高亮的方式表示。
    • 对于不支持资源级授权的操作,用全部资源表示。
  • 条件关键字:是指云产品自身定义的条件关键字。
  • 关联操作:是指成功执行操作所需要的其他权限。操作者必须同时具备关联操作的权限,操作才能成功。
操作访问级别资源类型条件关键字关联操作
dataworks:*Write
  • 全部资源
    *

请求参数

名称类型必填描述示例值
FileFolderPathstring

文件的路径。

业务流程/第一个业务流程/MaxCompute/文件夹1/文件夹2
ProjectIdlong

DataWorks 工作空间的 ID。您可以登录 DataWorks 控制台,进入工作空间配置页面获取工作空间 ID。

该参数与 ProjectIdentifier 参数,二者必须设置其一,用来确定本次 API 调用操作的 DataWorks 工作空间。

10000
FileNamestring

文件的名称。

文件名
FileDescriptionstring

文件的描述信息。

这里是文件描述
FileTypeinteger

文件的代码类型。

常用的代码及其对应的文件类型包括 6(Shell)、10(ODPS SQL)、11(ODPS MR)、24(ODPS Script)、99(虚拟节点)、221(PyODPS 2)、225(ODPS Spark)、227(EMR Hive)、228(EMR Spark)、229(EMR Spark SQL)、230(EMR MR)、239(OSS 对象检查)、257(EMR Shell)、258(EMR Spark Shell)、259(EMR Presto)、260(EMR Impala)、900(实时同步)、1089(跨租户节点)、1091(Hologres 开发)、1093(Hologres SQL)、1100(赋值节点)、1221(PyODPS 3)。

您可以调用 ListFileType 接口,查询文件的代码类型。

10
Ownerstring

文件责任人的阿里云用户 ID。如果该参数为空,则默认使用调用者的阿里云用户 ID。

1000000000001
Contentstring

文件代码内容,不同代码类型(fileType)的文件,代码格式不同。您可以在运维中心找到对应类型的任务,右键单击查看代码,查看具体的代码格式。

SHOW TABLES;
AutoRerunTimesinteger

出错自动重跑的次数,取值最大为 10。

3
AutoRerunIntervalMillisinteger

出错自动重跑时间间隔,单位为毫秒。最大为 1800000 毫秒(30 分钟)。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。 控制台中“重跑间隔”的时间单位为分钟,请在调用时注意转换时间。

120000
RerunModestring

重跑属性。取值如下:

  • ALL_ALLOWED:运行成功或失败后皆可重跑。
  • FAILURE_ALLOWED:运行成功后不可重跑,运行失败后可以重跑。
  • ALL_DENIED:运行成功或失败皆不可重跑。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>重跑属性”配置内容对应。

ALL_ALLOWED
Stopboolean

是否暂停调度,取值如下:

  • true:暂停调度。
  • false:不暂停调度。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>调度类型”配置为”暂停调度“时对应。

false
ParaValuestring

调度参数。多个参数之间用空格进行分割。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>参数”对应。您可以参考调度参数配置。

a=x b=y
StartEffectDatelong

开始自动调度的毫秒时间戳。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>生效日期”配置的开始时间的毫秒时间戳对应。

1671608450000
EndEffectDatelong

停止自动调度的时间戳,单位为毫秒。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>生效日期”配置的结束时间的毫秒时间戳对应。

1671694850000
CronExpressstring

周期调度的 cron 表达式,该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>cron 表达式”对应。配置完“调度周期”及“定时调度时间”后,DataWorks 会自动生成相应 cron 表达式。

示例如下:

  • 每天凌晨 5 点 30 分定时调度:00 30 05 * * ?

  • 每个小时的第 15 分钟定时调度:00 15 00-23/1 * * ?

  • 每隔十分钟调度一次:00 00/10 * * * ?

  • 每天 8 点到 17 点,每隔十分钟调度一次:00 00-59/10 8-17 * * * ?

  • 每月的 1 日 0 点 20 分自动调度:00 20 00 1 * ?

  • 从 1 月 1 日 0 点 10 分开始,每过 3 个月调度一次:00 10 00 1 1-12/3 ?

  • 每周二、周五的 0 点 5 分自动调度:00 05 00 * * 2,5

由于 DataWorks 调度系统的规则,cron 表达式有以下限制:

  • 最短调度间隔时间为 5 分钟。

  • 每天最早调度时间为 0 点 5 分。

00 05 00 * * ?
CycleTypestring

调度周期的类型,包括 NOT_DAY(分钟、小时)和 DAY(日、周、月)。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>时间属性>调度周期”对应。

DAY
DependentTypestring

依赖上一周期的方式。取值如下:

  • SELF:依赖项选择本节点。
  • CHILD:依赖项选择一级子节点。
  • USER_DEFINE:依赖项选择其他节点。
  • NONE:未选择依赖项,即不会依赖上一周期。
  • USER_DEFINE_AND_SELF: 跨周期依赖本节点和其他节点的组合的情况
  • CHILD_AND_SELF:跨周期依赖一层子节点和本节点的组合的情况
NONE
DependentNodeIdListstring

依赖上一周期的节点列表。

abc
InputListstring

文件依赖的上游文件的输出名称,多个输出使用英文逗号(,)分隔。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>调度依赖“选择”同周期“时的”父节点输出名称”对应。

project_root,project.file1,project.001_out
ProjectIdentifierstring

DataWorks 工作空间的名称。您可以登录 DataWorks 控制台,进入工作空间配置页面获取工作空间名称。

该参数与 ProjectId 参数,二者必须设置其一,用来确定本次 API 调用操作的 DataWorks 工作空间。

dw_project
ResourceGroupIdentifierstring

文件发布成任务后,任务执行时对应的资源组。您可以调用 ListResourceGroups 通过 identifier 字段获取工作空间可用的资源组列表。

group_375827434852437
ResourceGroupIdlong

该字段已废弃,请勿使用。

文件发布成任务后,任务执行时对应的资源组。对应页面上调度配置>资源属性>调度资源组的配置。与 ResourceGroupIdentifier 二者设置其一即可。

您可以通过 ListResourceGroups 接口获取工作空间可用的资源组列表。ResourceGroupType 传 1,拿到结果后取出 ID 字段。

375827434852437
ConnectionNamestring

文件发布成任务后,任务执行时连接的数据源。 您可以调用 UpdateDataSource 接口获取工作空间可用的数据源列表。

odps_source
AutoParsingboolean

文件是否开启自动解析功能。取值如下:

  • true:文件会自动解析代码。
  • false:文件不会自动解析代码。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>调度依赖”选择“同周期”时的“代码解析”对应。

true
SchedulerTypestring

调度的类型,取值如下:

  • NORMAL:正常调度任务。
  • MANUAL:手动任务,不会被日常调度,对应手动业务流程下的节点。
  • PAUSE:暂停任务。
  • SKIP:空跑任务,被日常调度,但启动调度时直接被置为成功。
NORMAL
AdvancedSettingsstring

任务的高级配置。

该参数与 DataWorks 控制台中,EMR Spark Streaming 和 EMR Streaming SQL 数据开发任务,编辑页面右侧导航栏的“高级设置“对应。

当前仅 EMR Spark Streaming 和 EMR Streaming SQL 任务支持配置该参数,并且参数为 JSON 格式。

{"queue":"default","SPARK_CONF":"--conf spark.driver.memory=2g"}
StartImmediatelyboolean

发布后是否立即启动。

该参数与 DataWorks 控制台中,EMR Spark Streaming 和 EMR Streaming SQL 数据开发任务,编辑页面右侧导航栏的“配置>时间属性>启动方式“对应。

true
InputParametersstring

节点的上下文输入参数。参数为 JSON 格式,包含的字段可参考 GetFile 接口返回值中的 InputContextParameterList 参数结构。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>节点上下文>本节点输入参数“对应。

[{"ValueSource": "project_001.first_node:bizdate_param","ParameterName": "bizdate_input"}]
OutputParametersstring

节点的上下文输出参数。参数为 JSON 格式,包含的字段可参考 GetFile 接口返回值中的 OutputContextParameterList 参数结构。

该参数与 DataWorks 控制台中,数据开发任务的“调度配置>节点上下文>本节点输出参数“对应。

[{"Type": 1,"Value": "${bizdate}","ParameterName": "bizdate_param"}]
IgnoreParentSkipRunningPropertyboolean

是否沿用上一周期空跑属性。取值如下:

  • true:沿用上一周期空跑属性。

  • false:不沿用上一周期空跑属性。

false
CreateFolderIfNotExistsboolean

当参数中指定的目录(FileFolderPath)在系统中不存在时,是否自动创建此目录。取值如下:

true:若此目录不存在,自动创建此目录

false:若此目录不存在,调用失败

false

返回参数

名称类型描述示例值
object

返回结果。

HttpStatusCodeinteger

HTTP 状态码。

200
Datalong

文件创建成功后的 ID。

1000001
RequestIdstring

本次调用的唯一 ID。出现错误后,您可以根据该 ID 排查问题。

0000-ABCD-EFG
ErrorMessagestring

错误信息。

The connection does not exist.
Successboolean

调用是否成功。取值如下:

  • true:调用成功。
  • false:调用失败。
true
ErrorCodestring

错误码。

Invalid.Tenant.ConnectionNotExists

示例

正常返回示例

JSON格式

{
  "HttpStatusCode": 200,
  "Data": 1000001,
  "RequestId": "0000-ABCD-EFG",
  "ErrorMessage": "The connection does not exist.",
  "Success": true,
  "ErrorCode": "Invalid.Tenant.ConnectionNotExists"
}

错误码

HTTP status code错误码错误信息描述
403Forbidden.AccessAccess is forbidden. Please first activate DataWorks Enterprise Edition or Flagship Edition.没有权限,请授权
429Throttling.ApiThe request for this resource has exceeded your available limit.对该资源的请求已超过您的可用上限。
429Throttling.SystemThe DataWorks system is busy. Try again later.DataWorks系统繁忙,请稍后再试。
429Throttling.UserYour request is too frequent. Try again later.您的请求过于频繁,请尝试放缓请求速度。
500InternalError.SystemAn internal system error occurred. Try again later.系统内部错误,请稍后再试。
500InternalError.UserId.MissingAn internal system error occurred. Try again later.系统内部错误,请稍后再试。

访问错误中心查看更多错误码。

变更历史

变更时间变更内容概要操作
2024-04-03OpenAPI 错误码发生变更看变更集
变更项变更内容
错误码OpenAPI 错误码发生变更
    删除错误码:403
    删除错误码:429
    删除错误码:500
2023-07-14OpenAPI 错误码发生变更、OpenAPI 入参发生变更看变更集
变更项变更内容
错误码OpenAPI 错误码发生变更
    删除错误码:403
    删除错误码:429
    删除错误码:500
入参OpenAPI 入参发生变更
    新增入参:CreateFolderIfNotExists
2023-04-25OpenAPI 错误码发生变更、OpenAPI 入参发生变更看变更集
变更项变更内容
错误码OpenAPI 错误码发生变更
    删除错误码:403
    删除错误码:429
    删除错误码:500
入参OpenAPI 入参发生变更
    新增入参:IgnoreParentSkipRunningProperty
  • 本页导读 (1)