物联网数据分析提供数据管道功能,对已备份的设备数据或导入的API数据源的数据进行预处理后,将数据以表的形式,存储于物联网数据分析平台。

物联网数据分析提供的数据管道功能包括实时管道和离线管道。您可在物联网平台控制台的数据分析 > 数据管道,创建和管理您的数据管道。

数据管道

实时管道

实时管道可以对设备数据源和API数据源的数据进行预处理。您可以创建实时管道,通过数据管道工作台,设置要处理的数据来源、处理方式和输出方式。

离线管道

离线管道可对设备数据源的数据进行预处理。您可以在离线管道,创建解析任务,在Topic解析工作台,设置要处理的数据来源、处理方式和输出方式。

实时管道和离线管道的区别

区别点 实时管道 离线管道 相关文档
支持的数据源 支持设备数据源和API数据源。 仅支持设备数据源。 配置数据源
时效性 实时地抽取和转化数据,延迟在秒级。 仅可对T+1日的数据进行抽取和转化。

其中,T指物联网数据分析平台接收数据的日期。

支持的数据格式 仅支持JSON类型的数据格式。 支持JSON、Base64和Protobuf类型的数据格式。
计费 1个实时管道耗费4个数据处理单元。 1个离线管道耗费0.1个数据处理单元。 产品计费

后续步骤

管道上线后,将数据进行预处理。预处理过后的数据,可应用于以下功能。