释放引擎
如果您不再使用 Lindorm实例 中的LTS服务或搜索引擎，可以通过Lindorm管理控制台手动释放，避免造成资金浪费。本文介绍通过控制台释放引擎的方法及相关注意事项。前提条件 实例的 服务类型 为Lindorm。如何查看服务类型，请参见 产品系列。...
快速入门
本文介绍如何快速通过Lindorm计算引擎使用SQL语言进行数据读写。前提条件 已开通Lindorm宽表引擎。具体操作，请参见 创建实例。已开通Lindorm计算引擎。具体操作，请参见 开通与变配。已将客户端IP地址添加至Lindorm白名单。具体操作，请...
增量导入
本章节介绍搜索引擎如何进行增量导入。请参见 RDS增量导入，将增量数据导入到宽表引擎中。导入宽表引擎后，后台会通过BDS服务自动将宽表引擎的增量数据同步到搜索引擎中。注意 同步到搜索引擎的数据仅限于已经配置好的schema映射。
增量导入
本章节介绍搜索引擎如何进行增量导入。请参见 RDS增量导入，将增量数据导入到宽表引擎中。导入宽表引擎后，后台会通过BDS服务自动将宽表引擎的增量数据同步到搜索引擎中。重要 同步到搜索引擎的数据仅限于已经配置好的schema映射。
数据存储目录结构说明
本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如cn-shanghai则表示为上海的实例。
支持的云服务
开放搜索OpenSearch 开放搜索OpenSearch是一款阿里云自主研发的大规模分布式搜索引擎平台。您通过MaxCompute对数据进行计算处理后，可以在OpenSearch平台上通过添加数据源的方式将MaxCompute数据接入，详情请参见 MaxCompute数据源配置。更...
使用流程
本文介绍如何使用城市视觉智能引擎管理控制台快速进行视频数据的接入、计算及搜索。使用流程 通过阿里云管理控制台来完成城市视觉智能引擎的基本操作流程如下：开通城市视觉智能引擎服务。创建接流工作组。创建视频点位。创建并启动计算...
物联网设备数据上云存储
物联网平台规则引擎 物联网设备基于消息 Topic 进行通信，使用规则引擎对 Topic 中的数据进行处理然后转发到 TSDB。只需要在规则引擎中配置一些简单的规则，就可以将设备数据存储到指定的资源中实现“采集+计算+存储+…”的全栈服务。如何...
搜索索引介绍
架构改造 如果您当前的业务架构中使用了HBase、MySQL或者MongoDB，同时也在使用搜索引擎Elasticsearch或者Solr。那么可以通过SearchIndex的一体化解决方案替换多个系统组合的架构。业务选型 金融行业，账单场景，详情请参见 收钱吧订单查询...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
表引擎
本文主要对这四类表引擎进行概要介绍，并通过示例介绍常用表引擎的功能。概述 表引擎即表的类型，在 云数据库ClickHouse 中决定了如何存储和读取数据、是否支持索引、是否支持主备复制等。云数据库ClickHouse 支持的表引擎，请参见下表。...
全量导入
本章节介绍搜索引擎如何进行全量导入。请参见 RDS全量导入 将全量数据导入到宽表引擎中。将数据导入到宽表引擎后，请参见 通过构建索引完成全量数据同步，将全量数据导入到搜索引擎中。
全量导入
本章节介绍搜索引擎如何进行全量导入。请参见 RDS全量导入 将全量数据导入到宽表引擎中。将数据导入到宽表引擎后，请参见 构建全量数据索引，将全量数据导入到搜索引擎中。
开通指南（Elasticsearch兼容版本）
前提条件 云原生多模数据库 Lindorm 搜索引擎Elasticsearch兼容版本目前处于公测阶段，如需使用，请您 提交工单 进行申请，工单中需提供阿里云账号ID以及需要开通的地域。购买实例时开通搜索引擎 登录 Lindorm管理控制台。单击页面左上角的...
通过Reindex API迁移自建Elasticsearch数据
如果您需要跨网络进行数据迁移，请参见 通过Logstash迁移自建Elasticsearch数据至Lindorm搜索引擎。数据准备 说明 本文使用的自建ES集群没有历史数据，因此以新导入的geonames数据集作为历史数据，介绍数据迁移步骤。如果您的自建ES集群已...
常见问题
分词查询：数据查询时，搜索引擎会先对原始字符串进行分词，再对分词字段执行关键词匹配操作，例如在通用搜索引擎产品中进行关键词检索。这种查询方式通常无法保证每次检索都一定能匹配到数据，即使原始写入的数据中包含检索内容，但这些...
DataWorks节点合集
ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可统筹管理多个节点的虚拟节点、可循环执行代码的do-while节点），多种节点配合使用，满足您不同的数据处理需求。数据开发（DataStudio）支持...
东软案例
客户感言 利用阿里云新一代 云原生多模数据库 Lindorm“灵动”引擎驱动的政府、企业数字信息系统智能运维解决方案，东软做到了实时、海量、异构监控数据一站式存储，实现指标、日志、代码链路和网络包等异构数据融合分析，高可靠数据保障和...
查看连接地址
连接地址类型 连接方式 服务类型 网络类型 参考文档 Elasticsearch兼容地址 通过curl命令连接并使用搜索引擎（连接地址为图示中①）Lindorm 专有网络 公网 通过curl命令连接并使用搜索引擎 Solr兼容版本 查看搜索引擎的连接地址前，请确保...
配置冷存储
前提条件 已下载并安装Search Shell，具体操作请参见 通过Search Shell连接并使用搜索引擎。应用场景 当某张表基本上不需要写入，并且只存在少量查询时，可以将表的属性设置为冷存储。设置为冷存储的表执行查询操作时查询结果返回会比较慢...
通过Logstash迁移自建Elasticsearch数据
步骤二：创建搜索索引 在使用Logstash将Elasticsearch集群数据迁移到Lindorm搜索引擎前，需先在Lindorm中创建好用于存储迁移数据的目标索引。重要 Logstash服务不会将源索引的 settings 等信息拷贝到目标索引中，因此，如果您希望目标索引...
创建业务流程
开发业务逻辑 DataWorks将引擎能力进行封装，您可以基于引擎节点进行数据开发，无需接触复杂的引擎命令行，同时您也可以结合平台提供的通用类型节点进行复杂逻辑处理。在业务流程内，您可以基于同步和引擎计算节点等进行具体的业务流程开发...
概述
本文介绍 云原生多模数据库 Lindorm 搜索引擎（Elasticsearch兼容版本）支持的Java客户端以及Client兼容性说明。客户端简介 Lindorm搜索引擎支持使用以下两种Java客户端访问：Java High Level REST Client（推荐）：Elasticsearch官方于...
CREATE TABLE
在数据写入量较大的场景中可以很好的实现数据均衡，搜索引擎默认按照主键进行HASH分区，同时也支持自定义的业务分区键。使用一级HASH分区时，如果自定义的HASH键存在热点问题，则可能导致大量数据写入同一个分区中，影响查询和写入性能，...
如何选择文件引擎规格
Lindorm文件引擎（LindormDFS）是面向海量非结构化数据的分布式文件存储服务，与多模引擎共享存储底座，提供数据库级的安全可靠性。LindormDFS与开源HDFS保持100%通信协议兼容，使用开源客户端可直接访问，无缝接入所有开源大数据生态与云...
数据保护伞概述
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
搜索引擎版本说明
7.7.12 新特性 支持使用开源的Solr JDBC访问搜索引擎，具体请参见 通过SQL连接并使用搜索引擎。7.7.11 新特性 支持实时检索，写入数据后立即可查。支持动态设置数据的存活时间（Time To Live，简称TTL）。支持对嵌套类型的文档创建索引。7....
申通快递迁移Oracle到Lindorm
Lindorm为云原生多模数据库，可同时支持宽表引擎和搜索引擎，并且可通过Lindorm Tunnel Service（LTS）实时将写入宽表引擎的数据同步至搜索引擎，并可保证搜索引擎和宽表引擎数据的一致性。Lindorm具备动态升降配、节点扩缩容的能力，轻松...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
引擎简介
Lindorm AI引擎提供了一站式集成AI推理能力，支持通过Lindorm SQL灵活导入并部署预训练模型，对海量多模数据进行智能分析和处理。核心能力 数据不出库，一站式AI分析与处理 Lindorm AI引擎支持对存储于宽表引擎中的文本、图像和音视频等非...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎
RDS MySQL 8.0支持X-Engine引擎，X-Engine可以提供更好的数据压缩能力，降低磁盘空间成本。本文介绍如何将InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎。背景信息 X-Engine是阿里云自研的联机事务处理OLTP（On-Line Transaction ...
数据查询
使用预降采样查询提升查询性能 大范围的时间查询 预降采样 通过存储引擎将写入的数据降低精度后单独存储，查询时按查询条件中指定的降采样精度自动查询最接近预降采样精度的数据，然后再对查询的数据进行聚合计算，减少实时查询的计算数据...
对接使用CDH与CDP
以下简称 CDH）与CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，在保留CDH集群或CDP集群作为存储和计算引擎的前提下，您可以使用DataWorks的任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理功能...
如何开启高压缩引擎（X-Engine）
适用场景 InnoDB引擎占比（百分比）X-Engine占比（百分比）使用InnoDB引擎存储热数据，X-Engine引擎存储冷数据，且归档后的冷数据基本不会被访问。80 20 使用InnoDB引擎存储热数据，X-Engine引擎存储冷数据，且归档后的冷数据仍然会被更新...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
逆向建模：物理表反向建模
当您的物理引擎中已有大量物理表，且希望通过DataWorks智能数据建模产品统一管理所有模型，则可使用逆向建模功能，将已有物理表反向建模至DataWorks的维度建模中。该功能帮助您无需再次执行建模操作即可快速创建模型，节省了大量的时间成本...
功能特性
玄武分析型存储 AnalyticDB for MySQL数据湖存储 Hudi存储 OLTP数据源、日志数据源均可以通过AnalyticDB for MySQL导入至OSS并以Hudi格式存储，导入后可使用XIHE或Spark引擎进行后续分析。Hudi存储 数据导入与导出 功能集 功能 功能描述 ...
设置冷热分离
本文介绍各数据引擎设置冷热分离的方法。引擎类型 设置方法 宽表引擎 按自定义时间列冷热分离 按时间戳冷热分离 时序引擎 冷数据归档 搜索引擎 配置冷存储
- 产品推荐
- 这些文档可能帮助您