文档

引擎简介

更新时间:

云原生多模数据库 Lindorm消息引擎是Lindorm面向IoT、车联网、日志等流式数据提供的数据接入服务,支持业务原始数据高吞吐写入,并基于流引擎的实时处理能力,业务只需做简单开发,即可快速实现数据的ETL并入库到Lindorm宽表引擎。

Lindorm消息引擎支持通过SQL对数据进行管理和访问,同时也兼容开源Kafka协议和接口,您可通过开源Kafka客户端直接访问,方便现有业务透明切换。

产品架构

image.png

核心能力

云原生弹性

  • 采用存算分离架构,扩容后分区秒级迁移,无需搬迁数据,迅速自动实现流量均衡。

  • 存储与计算可独立扩缩容,灵活应对多种场景业务。

低成本

  • 基于Lindorm文件引擎(LindormDFS)构建,支持容量型存储、本地HDD盘+纠删码等低成本存储介质与存储方式。

  • 支持自研字典压缩,进一步提升数据压缩比,节省存储空间。

易用开放

  • 完全兼容开源Kafka协议,可通过开源Kafka客户端直接访问。

  • 可通过MySQL客户端直接访问Lindorm消息引擎,进行数据读写,查看消费组状态。

高性能

通过VirtualLog IO合并、Cache显式管理等关键技术优化,Lindorm消息引擎是同等规格下开源Kafka性能的1.2~3倍。