设备数据存储和计算实践
面临的挑战 在不同的数据⽣命周期中，您需要采⽤不同的技术⽅案去存储和计算是设备数据，在不同的业务场景中，以下是较为典型的选型模式：场景 说明 监控运维场景 数据存储在RocketMQ等流数据存储产品中，并使⽤实时计算Flink等流计算框架...
分层存储命令使用说明
通过该功能您可以根据数据冷热程度选择不同的存储介质来存储数据，以减少数据存储成本，或者加速访问数据的速度。使用Jindo jfs 执行以下命令，获取帮助信息。jindo jfs-help archive-archive-i/a<path>.:Archive commands.JindoFS分层存储...
脚本语法
物联网平台提供的时序数据存储规则，可加工处理设备上报的自定义Topic数据进行存储。时序数据存储规则的能力包括获取消息内容、转换数据格式、处理字符串、组装JSON格式数据、处理二进制数据等。本文介绍如何编写时序数据存储规则的脚本。...
存储说明
本文介绍E-MapReduce集群中数据存储相关的信息，包括磁盘角色、云盘与本地盘，以及OSS。背景信息 关于存储的类型、性能和相关的限制信息，请参见 什么是块存储。存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...
CreateNamespace
调用CreateNamespace创建一个数据存储空间Namespace。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
物联网存储介绍
统一数据存储平台 为物联网场景中的设备元数据、设备消息数据、设备时序数据提供统一的数据存储平台。其中设备元数据使用宽表模型存储，设备消息数据使用消息模型存储，设备时序数据使用时序模型存储。Serverless架构 采用存储计算分离架构...
离线数据存储概述
您可以使用物联网平台提供的离线数据存储功能，查看您设备基本情况和上报的设备物模型数据。离线数据包括平台系统表、时序表、快照表和自定义存储表。本文介绍不同类型存储表的基本功能和应用场景。前提条件 已备份数据，具体操作，请参见 ...
产品架构
本文介绍 表格存储 的系统架构和典型应用架构。系统架构 表格存储 的架构如下图所示。...在物联网架构中，表格存储 作为IoT基础设施中的统一数据存储平台来存储物联网平台相关的时序数据、元数据、消息数据等，并提供丰富的数据分析处理能力。
应用场景
物联网存储IoTstore作为物联网的统一数据存储平台，可应用于车联网、智能家居、工业物联网等场景。车联网 车联网是物联网技术在智能交通领域的典型应用。在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息...
时序数据存储概述
您可使用物联网平台中数据服务提供的数据存储功能，存储设备时序数据。设备时序数据包括设备上报的物模型（属性、服务和事件）数据和通过时序数据存储规则配置的自定义Topic数据。本文介绍时序数据存储的相关概念和使用。相关概念 名词 ...
管理平台系统表和时序/快照表
您可以通过数据服务的离线数据存储功能，查看平台系统表、时序表和快照表。本文介绍查看平台系统表、时序表和快照表的操作步骤，及各存储表的数据内容。查看存储表 登录 物联网平台控制台。在 实例概览 页面，找到对应的企业版实例，单击...
配置自定义Topic数据存储
通过数据存储的时序数据存储规则功能，可将指定的自定义Topic数据流转到时序数据存储空间进行存储。本文介绍如何通过配置时序存储规则，将自定义Topic数据存储到时序存储空间中。前提条件 当前实例为标准型或尊享型企业版实例，并已购买...
时序模型介绍
在物联网存储场景中，您可以将Kafka数据、EMQX数据、物联网平台数据存储到表格存储时序表中。更多信息，请参见 时序数据接入。6 查询时序数据 重要 查询时序数据前，如果不确定要查询时间线信息（例如度量名称、数据源信息），您可以指定...
基础数据操作
说明 在物联网存储场景中，您可以将Kafka数据、EMQX数据、物联网平台数据存储到表格存储时序表中。更多信息，请参见 时序数据接入。通过Flink计算与分析数据后，您可以使用Tablestore时序表存储输出结果。更多信息，请参见 使用时序表存储...
物联网平台数据接入
步骤二：创建数据目的 通过创建数据目的，您可以指定将物联网平台数据流转到的其他云产品。登录 物联网平台控制台。进入 云产品流转 页面。在 实例概览 页面，找到对应的实例，单击实例进入 实例详情 页面。在左侧导航栏，选择 消息转发>云...
方案背景
因此车联网场景下车辆轨迹数据存储与分析的需求如下：数据存储：车辆轨迹数据会随着时间动态变化，要长期保存车辆轨迹信息，需要单表规模极大以及高性价比存储。数据写入：面向众多车辆，需要支持百万级节点实时写入。数据检索：根据多个...
关闭或开启物模型数据存储
如果需要保存设备上报的物模型数据，可以使用 物模型数据存储 功能。数据存储的时序存储功能默认开启 物模型数据存储，物模型数据会自动写入时序数据存储空间，您可手动关闭指定产品部分或全部物模型的时序数据存储服务。本文介绍更新指定...
数据转发到表格存储（Tablestore）
使用限制 物联网平台实例及所在地域支持将数据转发到表格存储（Tablestore）宽表模型。支持的地域详细信息，请参见 各地域功能说明。新版和旧版云产品流转功能均支持将数据流转到表格存储（Tablestore）宽表模型。新版云产品流转使用示例，...
数据转发到表格存储（Tablestore）宽表模型
将物联网平台设备上报数据转发到表格存储中的详细说明，请参见 物联网存储介绍。创建数据目的 登录 物联网平台控制台。在 实例概览 页签的 全部环境 下，找到对应的实例，单击实例卡片。在左侧导航栏，选择 消息转发>云产品流转。在 云产品...
方案背景
设备接入平台通过与表格存储对接，将数据存储到表格存储宽表模型中。更多信息，请参见 宽表模型介绍。表格存储的数据表用于车辆元数据的存储、更新和查询。宽表模型的表结构设计请参见 宽表模型设计。多元索引用于车辆检索和圈选。更多信息...
数据转发到表格存储（Tablestore）时序模型
设备时序数据（例如传感器采集数据、设备监控数据和设备轨迹数据）具有极少更新、数据规模大等特点，需要使用时序模型存储，并且支持高并发写入、低成本海量数据存储以及灵活的查询分析能力。表格存储（Tablestore）的时序引擎针对时间序列...
物理化逻辑表
通过物理化逻辑表，可以将您在 数据资源平台 中创建的逻辑表存储到对应的云计算资源中，成为云计算资源或者数据库中实际存在的表，方便实施后面的管理。本文介绍如何物理化逻辑表。前提条件 已生成待物理化逻辑表的DDL语句，具体操作，请...
物联网设备数据上云存储
本文介绍如何使用阿里云物联网平台和 TSDB 进行数据打通，实现物联网设备系统的开发和管理、数据采集、数据上报、数据存储和分析的一体化方案，构建智能物联网平台。架构参考“物联网平台+TSDB”方案的实现架构如下：物联网设备通过 IoT ...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
数据转发到表格存储
您可以使用规则引擎数据流转功能，将数据转发到表格存储（Tablestore）中存储。前提条件 已将设备接入到企业版实例。具体操作，请参见 设备接入和上报数据。已开通表格存储服务。具体操作，请参见 开通表格存储服务。创建数据表 登录 表格...
数据转发到云数据库RDS
如果仅需将物联网平台数据转发到数据库保存，可以通过云产品流转功能，使用脚本和函数将解析处理后的数据转发到云数据库RDS版（以下简称RDS）实例的数据库中存储。本文介绍将数据流转到数据目的地的完整流程。工作原理 云产品流转将设备的...
数据转发到云数据库RDS
如果仅需将物联网平台数据转发到数据库保存，可以通过云产品流转功能，使用脚本和函数将解析处理后的数据转发到云数据库RDS版（以下简称RDS）实例的数据库中存储。本文以物模型数据上报Topic为例，介绍流转消息数据的完整流程。工作原理 云...
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长时间累积，且访问频率很高，是面向应用的数据。说明 在构建MaxCompute数据仓库的表之前，...
数据接入概述
上传 本地 数据源 物联网平台提供上传本地文件的功能，导入本地文件到物联网平台数据服务的自定义存储表，用于分析洞察、数据应用或作为IoT孪生引擎的数据源。具体操作，请参见 上传本地数据源。应用数据源 配置数据源后，您可以将数据源...
管理数据同步任务和存储表
添加并开启云产品数据源同步任务后，您可查看对应同步任务的详细信息，包括同步状态、数据同步存储表、同步任务运行信息等。您也可根据需要在数据同步存储表中新增字段。本文介绍如何查看云产品数据源的同步任务和数据同步存储表。查看同步...
IoT数据源
date","items"],"table":"product.h*",/数据存储表的表标识符"date":"${bizdate}"/日期格式为yyyyMMdd，如"20151111"，表示导出该日的数据 },"name":"Reader","category":"reader"},{"stepType":"odps","parameter":{"partition":"ds=${...
合理利用存储备份保障业务数据可还原
合理利用存储备份保障业务数据可还原。背景 容器场景下，应用本身大多是无状态化的，凭借K8s提供的故障重启、自动注册和发现机制，在多实例部署的场景下，能够较大程度地保障业务的高可靠，但对于有状态服务，如中间件等，为了保障持久稳定...
查看实时运行数据
本文介绍如何查看时序数据存储IOPS和存储空间的实时使用情况及对应的监控图表，设置相关报警规则。操作步骤 登录 物联网平台控制台。在 实例概览 页面，找到对应的企业版实例，单击实例 ID 或备注名称进入 实例详情 页面。在左侧导航栏，...
开启智能存储分层
重要 存储保存时间配置存在相应限制，具体信息，请参见 数据存储生命周期管理。开启智能存储分层 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，单击目标Logstore对应的 图标，然后单击 修改。在 ...
数据传输方案
准备好智能圈选数据后，您可以使用阿里云对象存储OSS或DataWorks两种传输方案上传数据。使用阿里云对象存储OSS 推荐使用阿里云对象存储OSS(Object Storage Service)进行数据传输。重要 使用OSS数据前需要在网页端一键授权OSS访问权限，并为...
使用Prometheus可视化监控物联网平台数据
数据类型 API 相关文档 物模型属性时序数据 QueryDevicePropertyStatus 设备使用物模型通信 时序存储规则流转数据 QueryDevicesHotStorageDataStatus 时序数据存储说明 自定义时序存储表数据 QueryCustomTimelineTableStatus 自定义时序...
数据服务系统配置
当您修改时长小于之前设置的时长（例如：之前设置的是30天，现在修改变成20天），保存时需再次确认是否删除统计数据存储周期变小的时间段，如下图对话框中所示的时间区间。单次查询跨度小于等于：默认是31天，维度仅支持天，支持最大数值不...
湖仓版（3.0）产品定价
存储空间 计费类别 计费项 按量付费价格 每月费用估算 存储空间 热数据存储 0.0028元/GB/小时 2元/GB/月 冷数据存储 0.0002元/GB/小时 0.144元/GB/月 说明 1 每月费用估算仅为了预估1 GB数据存储1个月的花费。估算方法为小时价×24小时×30...
数据存储生命周期管理
本文介绍存储保存时间迁移策略。生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储，当数据的存储时间超过配置的 热存储层数据保存 时间后，数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储，当...
WriteDevicesHotStorageData
调用该接口将设备自定义Topic数据写入时序数据存储。使用说明 仅标准型和尊享型企业版实例下，支持调用该接口写入时序数据。时序数据存储详细说明，请参见 配置时序数据存储。使用限制 调用该接口的每秒请求写入数据数，由您购买实例下的 ...
- 产品推荐
- 这些文档可能帮助您