索引数据可见性
配置solrconfig.xml 创建索引时需要指定配置集 config set，配置集中的 solrconfig.xml 文件可以用来控制索引数据的可见性。soft commit<autoSoftCommit><maxTime>${solr.autoSoftCommit.maxTime:15000}</maxTime></autoSoftCommit>数据...
索引数据可见性
solrconfig.xml中的配置 创建索引时需要指定配置集 config set，配置集中的 solrconfig.xml 文件可以用来控制索引数据的可见性。如何获取 solrconfig.xml，请参见 更新配置集。soft commit<autoSoftCommit><maxTime>${solr.autoSoftCommit....
DMS中表维护的操作说明
本文介绍在DMS中进行表...扩展：加上extended参数，即 repair table<表名>extend，修改数据文件和索引文件，试图从数据文件恢复每一行，需要逐行重建索引。说明 执行速度为常规>快速>扩展。分析表 分析表使用的命令是 analyze table<表名>。
DMS中表维护的操作说明
本文介绍在DMS中进行表...扩展：加上extended参数，即 repair table<表名>extend，修改数据文件和索引文件，试图从数据文件恢复每一行，需要逐行重建索引。说明 执行速度为常规>快速>扩展。分析表 分析表使用的命令是 analyze table<表名>。
DMS中表维护的操作说明
本文介绍在DMS中进行表...扩展：加上extended参数，即 repair table<表名>extend，修改数据文件和索引文件，试图从数据文件恢复每一行，需要逐行重建索引。说明 执行速度为常规>快速>扩展。分析表 分析表使用的命令是 analyze table<表名>。
DMS中表维护的操作说明
本文介绍在DMS中进行表...扩展：加上extended参数，即 repair table<表名>extend，修改数据文件和索引文件，试图从数据文件恢复每一行，需要逐行重建索引。说明 执行速度为常规>快速>扩展。分析表 分析表使用的命令是 analyze table<表名>。
索引表加载策略
索引表加载策略配置 索引表的加载策略配置由多个索引文件的加载策略组成，每个策略描述了一组索引文件的具体加载方式。索引表在加载时，针对每个索引文件，从上到下依次匹配策略规则，优先使用第一个匹配的策略加载索引文件。配置示例 JSON...
索引表加载策略
索引表加载策略配置 索引表的加载策略配置由多个索引文件的加载策略组成，每个策略描述了一组索引文件的具体加载方式。索引表在加载时，针对每个索引文件，从上到下依次匹配策略规则，优先使用第一个匹配的策略加载索引文件。配置示例 JSON...
Bloom过滤器索引
布隆过滤器索引的使用 创建布隆过滤器索引 CREATE BLOOMFILTER INDEX ON TABLE table_name FOR COLUMNS(col_name OPTIONS(fpp=0.1,numItems=50000000))fpp：假阳性概率，假阳性概率越低，过滤越准确，但索引文件越大（使用更多的位来判断...
图片管理常见问题
为了确保人脸分组的准确性，生成分组需要满足如下条件：使用 IndexFileMeta-索引文件元信息 接口将图片添加到数据集。同一个人物在媒体集中的图片必须大于或等于3张，并且 至少 有3张符合如下标准的高清人脸图片：人脸尺寸大于75×75像素。...
使用aliyun-codec插件
aliyun-codec插件是阿里云自主开发的索引压缩插件，可以对Elasticsearch（ES）底层多种索引文件进行压缩，同时支持source_reuse_doc_values特性。适用于写入量大、索引存储成本高的场景，例如日志场景、时序分析场景等，可以大幅降低索引的...
只用索引的扫描和覆盖索引
本数据库中的所有索引是 二级 索引,这意味着每个索引都是与表的主数据区（在本数据库术语称为表的 堆 中）分开存储。这意味着在普通索引扫描中，每行检索都需要从索引和堆中取数据。此外，虽然匹配给定的可索引 WHERE 条件的索引条目通常在...
工作流模板与算子
注意事项 在通过绑定OSS Bucket或调用 IndexFileMeta-索引文件元信息、BatchIndexFileMeta-批量索引文件元信息 接口建立元数据索引时，根据数据集和项目配置的工作流模板来决定要执行的算子操作。在数据集中建立元数据索引时，数据集的模板...
API概览
BatchIndexFileMeta 批量文件元信息建立索引 批量索引文件元信息，对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，并将文件元信息索引到数据集内，支持多样化的数据检索。UpdateFileMeta 更新文件元数据 更新数据集内已索引的...
建立元数据索引
调用 BatchIndexFileMeta-批量索引文件元信息 接口 如下以在 test-project 项目下的 test-dataset 数据集，为OSS文件 oss:/test-bucket/test-object1.jpg 和 oss:/test-bucket/test-object2.jpg 建立元数据索引为例。请求示例 {...
直播录制
查看录制索引：用户可以查看已有的录制索引文件，这里的索引文件包括系统在断流180秒后自动生成的索引文件，以及用户手动创建的索引文件。剪辑录制索引：用户可以根据现有的录制索引文件进行剪辑，产生新的索引文件，这里的索引文件可以是...
DeleteDataset-删除数据集
即使设置 DeleteBinding 的请求参数 Cleanup 为 true 时仍不会删除手动添加的索引文件，此时仍需使用 DeleteFileMeta、BatchDeleteFileMeta 手动删除索引文件，自动建立与手动建立索引文件的区别可参见 建立元数据索引。调试 您可以在Open...
召回引擎版介绍
引擎通过该文件来加载索引。version.0 version文件。主要记录当前partition中引擎需要加载的segment和最新doc的时间戳。在实时build中，引擎会根据增量version的时间戳过滤旧的原始文档。segment segment是索引组成的基本单位。segment中...
高维向量检索（PASE）
IVFFlat索引自定义中心点文件 此功能为高级功能，需要在服务器上指定路径上传中心点文件，并作为索引参数构建索引。详细参数请参见 IVFFlat索引参数描述。文件格式如下：向量维度|中心点个数|中心点向量集合 示例 3|2|1,1,1,2,2,2 相关文档...
高维向量检索（PASE）
IVFFlat索引自定义中心点文件 此功能为高级功能，需要在服务器上指定路径上传中心点文件，并作为索引参数构建索引。详细参数请参见 IVFFlat索引参数描述。文件格式如下：向量维度|中心点个数|中心点向量集合 示例 3|2|1,1,1,2,2,2 相关文档...
高效向量检索（PASE）
IVFFlat索引自定义中心点文件 此功能为高级功能，需要在服务器上指定路径上传中心点文件，并作为索引参数构建索引。详细参数请参见 IVFFlat索引参数描述。文件格式如下：向量维度|中心点个数|中心点向量集合 示例 3|2|1,1,1,2,2,2 相关文档...
创建录制索引文件
调用CreateLiveStreamRecordIndexFiles创建某个时间范围的M3U8索引文件。使用说明 您已配置OSS，具体操作，请参见 配置OSS。直播录制索引是将视频直播流以M3U8的格式进行录制，存储在OSS中后，对已存储的TS分片索引文件进行实时的剪辑处理...
查询单个录制索引文件
调用DescribeLiveStreamRecordIndexFile查询单个录制索引文件。使用说明 创建好的M3U8索引文件的信息在视频直播系统中仅保存6个月，若要查询仅能查询6个月内创建的索引文件的信息。M3U8索引文件存储在OSS中，保存时间由OSS的存储配置决定。...
BatchIndexFileMeta-批量文件元信息建立索引
批量索引文件元信息，对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，并将文件元信息索引到数据集内，支持多样化的数据检索。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。数据处理支持列表...
GetLiveEditingIndexFile-获取直播剪辑索引文件
获取直播流的索引文件，用于控制台剪辑预览。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 ...
为什么索引流量费用是读写流量费用的几倍？
本文主要介绍索引流量和读写流量计费的区别。索引流量是按照未压缩数据被构建或重建索引所...例如原数据10 GB，创建的索引文件为8 GB，原数据压缩后为2 GB，则索引流量为8 GB，读写流量为2 GB。更多信息，请参见 按使用功能计费模式计费项。
倒排索引介绍
什么是倒排索引 倒排索引也常被称为反向索引、置入档案或反向档案，是一种索引方法，被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。通过倒排索引，可以快速定位单词所在...
倒排索引介绍
倒排索引检索的基本流程 当用户查询单词M的倒排索引时，首先引擎会查询词典文件，找到索引词在倒排索引文件（posting文件）的起始位置。随后引擎通过解析倒排链，获取词M存储在倒排链的三部分信息：TermMeta,DocList,PositionList。...
索引使用率
数据库自治服务DAS 为 RDS SQL Server 提供索引使用率查询功能，您可以查询表中索引的使用情况，以及索引的碎片率。前提条件 当前不支持 RDS SQL Server 2008 R2云盘...单击 导出文件，设置筛选条件，以Excel、CVS或TXT格式导出对应索引文件。
ListLiveRecordFiles-查询所有录制索引文件
调用ListLiveRecordFiles查询某个时间段内的所有录制索引文件。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。...
查询所有录制索引文件
调用DescribeLiveStreamRecordIndexFiles查询某个时间段内的所有录制索引文件。使用说明 创建好的M3U8索引文件的信息在视频直播系统中仅保存6个月，若要查询仅能查询6个月内创建的索引文件的信息。M3U8索引文件存储在OSS中，保存时间由OSS...
索引缺失
数据库自治服务DAS 为 RDS SQL Server 提供索引缺失查询功能，您可以非常方便地发现数据库实例中缺失的索引信息。前提条件 当前不支持 RDS SQL Server 2008 R2云盘版...单击 导出文件，设置筛选条件，以Excel、CVS或TXT格式导出对应索引文件。
EXPLAIN输出
当新建表之后，如果没有进行过vacuum和autovacuum操作，这时还没有VM文件，而索引并没有保存记录的版本信息，索引Index Only Scan还是需要扫描数据块（Heap Fetches代表需要扫描的数据块个数）来获取版本信息，这个时候可能会比Index Scan...
使用apack插件的物理复制功能
开启物理复制功能后，Elasticsearch主分片写入机制与原生Elasticsearch一样，既写索引文件也写translog，而副本分片只写translog以保证数据的可靠性和一致性。主分片在每次refresh时，通过网络将增量的索引文件拷贝到副本分片，在主副分片...
图编辑
引擎支持持久化存储，如果索引文件被破坏或者写入异常导致索引不可用，可支持指定数据版本进行恢复。MaxCompute数据源，即全量更新 所有数据全部来自MaxCompute，通过数据回流对在线数据进行全量更新。构建程序会从MaxCompute拖取数据构建...
Proxima向量计算
Proxima的基本模型 分为索引构建和在线检索两部分：索引构建：索引构建从原始向量数据中构建出相关索引文件，并传予在线检索模块加载使用。支持Brute Force、KD-Tree、Product Quantization、KNN Graph、LSH 等。在线检索：在线检索加载完...
正排索引压缩
等值压缩就是通过用更少的 Bit 位来代表这些重复值，来压缩索引的。此功能，适用于单值和多值 Attribute 的 Offset 文件。对于多值 Attribute（包括单值 String)和 Section Attribute 可以同时使用多值排重和等值压缩。自适应Offset 由于每...
正排索引压缩
等值压缩就是通过用更少的 Bit 位来代表这些重复值，来压缩索引的。此功能，适用于单值和多值 Attribute 的 Offset 文件。对于多值 Attribute（包括单值 String)和 Section Attribute 可以同时使用多值排重和等值压缩。自适应Offset 由于每...
将Amazon OpenSearch Service中的Elasticsearch索引...
本文介绍如何将Amazon OpenSearch Service中的Elasticsearch（以下简称ES）索引数据迁移到阿里云Elasticsearch中。方案说明 该方案不局限云服务厂商，均依赖ES快照机制实现。例如，使用阿里云在线迁移（迁移实施）将存储在腾讯云COS的ES...
GetIndex-获取索引
pg ttl integer 索引文件生命周期，支持 7 天、30 天、90 天。30 lastModifyTime long 索引最后更新时间。Unix 时间戳格式，表示从 1970-1-1 00:00:00 UTC 计算起的秒数。1524155379 log_reduce boolean 是否开启日志聚类。false max_text_...
- 产品推荐
- 这些文档可能帮助您