读API

用途

读API算子可以访问用户指定的接口并解析返回值，产生一张临时表，供后续节点进一步加工处理。

适用场景

使用说明

前置条件

用户通过数据中心->API接入页面，将需要访问的API接口注册到系统上。

请求配置

• 请求头/请求体

请求头/请求体参数是在API接入时设置的，在读API算子中，用户可以通过表达式框配置每个参数对应的逻辑。

• 返回值映射

通过设置“数组提取”来指定需要提取的数组在JSON对象中的路径，并通过表格指定对应的列名。

以下是返回值和映射关系配置的示例：

{
  "code":"SUCCESS",
  "data":{
    "pageSize": 20,
    "pageNum": 1,
    "list":[    // 需要提取的数组
      {
        "name": {
          "firstName": "Alice",
          "lastName": "Brown"
        },
        "age": 22,
        "email": "alice@example.com"
      },
      {
        "name": {
          "firstName": "Bob",
          "lastName": "Miller"
        },
        "age": 19,
        "email": "bob@example.com"
      }
    ]  
  }  
}

生成的数据结果如下：

注意事项

1. 读API算子会运行在Zerg Standalone容器中，因此运行时您需要指定一个Zerg Standalone引擎。

2. 读API算子运行超时时间为10分钟，请确保接口返回的数据量在合理范围。

3. 仅支持访问content type为以下类型的外部接口：

   • application/json

   • application/x-www-form-urlencoded

   • text/plain

4. 数据的写入操作和用户指定的计算引擎、临时存储关系如下表：