功能概述

更新时间:
复制 MD 格式

多模态检索是阿里云 Elasticsearch 引擎增强版提供的场景化 AI 检索能力。通过预置的场景模板自动完成索引 Mapping 设计、向量模型绑定和检索配置,无需手动编写 Schema 即可创建支持文本、图片语义检索的索引,并内置从数据写入到向量化、检索的完整链路。适用于将文档、FAQ、商品图文等内容资产接入 Elasticsearch 进行语义检索的场景。

支持的场景模板

创建场景时选择一类模板,系统按模板自动生成索引结构与向量化规则。

场景模板

适用场景

语义字段与向量模型

支持的检索方式

文本语义检索

文档、FAQ、商品描述等文本内容检索

content 字段派生 content_semantic,向量模型 text-embedding-v4

传统检索(BM25)、语义检索、混合检索(RRF)

图文检索

图文商品、素材库等,支持文本与图片互搜

mm_content 字段,向量模型 qwen3-vl-embedding

以文搜图、以图搜图、图文双路(RRF)

检索方式

检索方式

说明

传统检索(BM25)

基于关键词的全文检索,对文本字段分词后匹配命中即可召回。

语义检索

通过向量模型将查询与内容映射到同一语义空间,召回语义相近的结果,不依赖关键词命中。

混合检索(RRF)

使用 RRF(Reciprocal Rank Fusion)融合关键词检索与语义检索的结果,兼顾精确匹配与语义相关性。

以文搜图、以图搜图

图文检索场景专用。以文搜图输入文本检索图片;以图搜图输入图片 URL 检索相似图片。

使用限制

  • 仅阿里云 Elasticsearch 引擎增强版 9.99 版本的实例支持多模态检索。

  • 首次使用需开通 AI 搜索开放平台,由其提供向量化等模型服务。

  • 场景数据源为 API,通过 API 写入全量与增量数据,不支持本地文件上传。

相关操作

使用多模态检索