pg_index
indnkeyatts int2 索引中 键列 的编号，不计入任何的 内含列，它们只是被存储但不参与索引的语义。indisunique bool 如为真,这是唯一索引。indisprimary bool 如为真，表示索引为表的主键（如果此列为真，indisunique 也总是为真）。...
pg_opclass
每一个操作符类定义了一种特定数据类型和一种特定索引访问方法的索引列的语义。一个操作符类实际上指定了一个特定的操作符族可以用于一个特定可索引列数据类型。该族中可用于索引列的操作符能够接受该列的数据类型作为它们的左输入。列名称...
深度解析Lindorm搜索索引（SearchIndex）特性
索引是加速数据库查询的重要手段，Lindorm除了提供高性能的二级索引外，同时支持搜索索引(SearchIndex)，主要面向复杂的多维查询场景，并能够覆盖模糊查询、聚合分析、排序、分页等场景。本文主要介绍SearchIndex的技术原理和核心能力。...
阿里云ES机器学习
ES提供了多种内置的文本分析器和分词器，如标准分词器、N-gram分词器、拼音分词器等，主要基于文本的字面形式进行分析和索引，缺乏语义理解，上下文感知，歧义消除等能力。为了克服这些限制，可以将ES与text embedding模型相结合，这些模型...
分词
对比项 单字分词 分隔符分词 最小数量语义分词 最大数量语义分词 模糊分词 索引膨胀 小 小 小 中 大 相关性影响 弱 弱 中 较强 较强 适用语言 所有 所有 汉语 汉语 所有 长度限制 无 无 无 无 1024字符 召回率 高 低 低 中 中 示例 通过...
pg_opfamily
每一个操作符族是操作符和相关支持例程的集合，支持例程用于实现一个特定索引访问方法的语义。此外，按照访问方法指定的某种方式，一个族内的操作符都是“兼容的”。操作符族概念允许在索引中使用跨数据类型操作符，并可以使用访问方法语义...
文本向量场景快速入门
如果是MaxCompute数据源，从数据源同步字段后，展示在预置字段下方 主键字段不支持压缩 字段压缩、属性压缩开启后将节省存储空间，但查询性能可能有所下降，详见说明文档 设置索引，“向量：文本语义搜索”模板默认生成2个预置索引（主键...
基于向量检索服务与TextEmbedding实现语义搜索
本教程为您介绍如何从零开始，借助 向量检索服务 以及 灵积模型服务 中的 Embedding API，构建基于文本索引和向量检索技术的语义搜索能力。通过实际案例演示，利用QQ浏览器搜索标题语料库（QBQTC），实现对文本的实时语义解析与匹配，从而...
工作流模板与算子
注意事项 在通过绑定OSS Bucket或调用 IndexFileMeta-索引文件元信息、BatchIndexFileMeta-批量索引文件元信息 接口建立元数据索引时，根据数据集和项目配置的工作流模板来决定要执行的算子操作。在数据集中建立元数据索引时，数据集的模板...
产品简介
优势2：灵活的智能搜索引擎 支持用户灵活配置索引以及多种召回排序算法，将语义、知识融入搜索过程中，提供高效、高准确率的搜索能力。优势3：可信的答案回复 内置搜索版通义千问大模型，事实性、可靠性大幅提升。结合用户本地知识库降低...
ALTER OPERATOR FAMILY
这表示这些操作符和函数与该族的语义兼容，但是没有被任何特定索引的正确功能所要求（所要求的操作符和函数应该被作为一个操作符类的一部分声明，见 CREATE OPERATOR CLASS）。PolarDB将允许一个族的松散成员在任何时候被从该族中删除，...
基于向量检索服务与TextEmbedding实现语义搜索
本教程演示如何使用向量检索服务（DashVector），结合 灵积模型服务 上的 Embedding API，来从0到1构建基于文本索引的构建+向量检索基础上的语义搜索能力。具体来说，我们将基于QQ 浏览器搜索标题语料库（QBQTC：QQ Browser Query Title ...
保留字段
索引设置：开启索引后，日志服务默认为_source_创建索引，索引数据类型为text类型，分词字符为空。查询时输入 source:127.0.0.1 或者_source_:127.0.0.1。统计设置：当您为任何一列开启统计后，日志服务默认为_source_开启统计。日志来源...
pg_amop
ORDER BY 的准确语义由 amopsortfamily 列指定，它必须引用一个适合于操作符结果类型的 B 树操作符族。说明 目前，一个排序操作符的排序顺序被假设为其引用的操作符族的默认值，即 ASC NULLS LAST。一个项的 amopmethod 必须和它所包含的...
多元索引功能
目前多元索引提供了单字分词、分隔符分词、最小数量语义分词、最大数量语义分词和模糊分词5种分词类型，请根据实际场景配置。分词 模糊查询 通配符查询等价于关系型数据库中的like功能。您可以通过指定字符和任意通配符?或*）可实现类似于...
名词解释
实时索引 实时的向量数据build索引 普通索引 非向量索引，包括关键字索引 运维相关 名称 解释 索引重建 在不变更数据来源、字段配置、索引结构的情况下，重新进行一次索引的全量构建 停止使用/恢复使用 停止/启用表 FSM触发和执行机制 变更...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
语义检索
IMM语义检索是采用向量检索方式，根据特定内容语义对多媒体数据进行搜索的过程，本文介绍如何使用语义检索。功能简介 传统的标量检索是根据文件携带的元数据信息进行检索，例如文件名称、文件创建时间、文件格式等。与标量检索不同的是，...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
pg_depend
例如：子分区索引与其所基于的分区表和父分区索引是分区相关的，因此只要其中一个删除，则子分区索引就消失，否则，就不消失。父索引上的依赖关系是主要的，故如果用户试图删除子分区索引，错误消息反而会建议删除父索引（不是表）。...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
概述
支持从日志服务（Log Service）流式地索引数据（类似于Kafka），并提供高可靠保证和exactly-once语义。支持将元数据存储到RDS。集成了Superset工具。方便地扩容和缩容（缩容针对Task节点）。丰富的监控指标和告警规则。故障迁移。具有高...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
案例：构建文本语义检索系统
文本语义检索概述 文本语义检索的架构如下图所示，通常包括两个组件：文本向量化和索引构建 文本向量化：指利用机器学习模型将文本转换为向量特征。机器学习模型能够对文本进行编码，使得在语义上与其他文本相似的文本，被编码为在向量空间...
混合查询最佳实践
背景介绍 OpenSearch-向量检索版的混合搜索 混合搜索的方式能帮助文本数据搜索，将语义搜索与关键词搜索相结合，获得更好的效果。在向量检索版中，您可以使用稀疏-稠密向量进行混合检索。对比传统的 文本+向量 多路召回，向量检索版中的...
版本发布说明
发布日期：2024-01-10 大版本：V5.4.18 小版本：17047709 类别 说明 缺陷修复 修复索引推荐的索引名过长的问题。修复开启单表打散功能时，单表关联存在错误下推风险的问题。修复CoHash的Right分区函数计算结果不正确导致的分区路由问题，...
INSERT
通常会被省略，因为相等语义在一种类型的操作符类之间都是等价的，或者因为足以信任已定义的唯一索引具有适当的相等定义。遵循 CREATE INDEX 格式。index_predicate：用于允许推断部分唯一索引。任何满足该谓词（不一定需要真的是部分索引...
玄武分析型存储
多种索引类型多路归并查找的过程如下所示：结构化与非结构化融合 玄武存储层索引管理器实现结构化索引与非结构化索引的统一管理，如数值类的BKD索引、字符串类的倒排索引、非结构化的JSON索引及向量索引，还有文本数据的全文索引。...
文本向量场景快速入门
数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供用户选择：通用、向量-图片搜索、向量-文本语义模板 ...
如何将一棵LSM-Tree塞进NVM
由于索引是易失的，键并不显式存储在索引中，且索引在重启时通过扫描PM中的键值对重建。批量顺序写入以降低写放大。在PM中，小的随机写会被硬件控制器转换成随机的256字节的大块写，导致写放大问题，进而消耗PM硬件的带宽资源。鉴于内存表...
API 数据源
或至少一个索引表分片数为1，其余索引表分片数一致 数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供...
MaxCompute+API 数据源
示例：ds=20170626 时间戳：如果有API的增量数据，该配置表示回追多久的增量数据，系统默认最大能回追3天的API增量数据 自动索引重建：是否开启自动索引重建任务，如果开启，则将在识别到当前数据源的变更时，自动对引用该数据源的索引表...
列表
索引变量名：当前行的索引。分页设置 支持前后翻页，您可以对分页功能及样式进行自定义配置。行选择器 如果您启用行选择器，应用运行时支持勾选一行数据进行后续对应操作。行选择数据集需为List类型，其中Structure为列表单行数据对应的...
关键词感知检索
建立关键词和原始语料的映射关系，常见的方法有倒排索引、TF-IDF、BM25等方法，其中TF-IDF、BM25通常用 稀疏向量（Sparse Vector）来表示词频。检索时，对检索语句进行关键词抽取，并通过步骤2中建立的映射关系召回关联度最高的TopK原始...
通用版快速入门
数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供用户选择：通用、向量-图片搜索、向量-文本语义模板...
图搜场景快速入门
数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供用户选择：通用、向量-图片搜索、向量-文本语义模板...
OSS+API 数据源
或至少一个索引表分片数为1，其余索引表分片数一致 数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供...
快速入门概述
为快速了解如何使用BizWorks进行云原生应用建设，您可以通过示例项目和参考帮助文档进行实验，了解业务建模、应用开发和部署、能力上架、轻应用组装等主要过程。关于示例项目的内容，请参见 示例项目简介 和 示例项目的使用限制说明 等。...
单节点快速入门
数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供用户选择：通用、向量-图片搜索、向量-文本语义模板...
- 产品推荐
- 这些文档可能帮助您