搜索库旨在提升媒体资源(包括视频、音频、图像等)的检索效率和准确性。系统能够对上传至搜索库中的媒资进行智能分析,自动保存分析结果,并允许用户通过索引类型对应的检索功能或API高效查询所需资源。
计费说明
系统会按照媒资分析的视频时长、搜索库存储视频量产生计费,建议在不使用时及时关闭以避免不必要的费用。计费详情请参见智能检索。
一旦开启索引,系统即开始自动计费,订阅会员过期后,存储的检索向量特征会继续收取存储费用。如果您不再使用,请及时关闭检索开关。
注意事项
确保索引状态已激活,以便新上传到媒资库的视频、图片可以自动接受智能分析。
为了保证新上传的媒资能够被正确分析并加入索引,建议将“索引状态”开关保持开启。
索引类别
搜索库索引包含智能标签、人脸、大模型三种类型:
智能标签:支持媒资视频、图片的标签搜索功能,可通过AI分类标签、视频内容文字、视频语音文字搜索已完成分析的媒资。
人脸检索:支持媒资视频、图片的人脸检索功能,可通过人脸名称、人脸图片搜索已完成分析的媒资。
大模型搜索:支持通过自然语言描述搜索媒资视频、图片。它利用大模型技术将视觉内容、文本内容统一到一个高维空间内,避免视频到文本转换时的语义丢失或不一致问题;同时,搜索文本也转换为高维向量,不再分词,例如,以“骑自行车的歌唱家”作为整体进行搜索,从而帮助您更加高效便捷地搜索素材。
创建搜索库
通过控制台创建搜索库
登录智能媒体服务控制台。
在顶部左上角根据实际情况选择地域。
在左侧导航栏选择
,进入创建搜索库页面。单击创建搜索库。
搜索库包含智能标签、人脸、大模型三种类型,您可以根据需要选择开启对应的索引。
开启索引后系统开始自动计费,订阅会员过期后,存储的检索向量特征会继续收取存储费用。如果您不再使用,请及时关闭检索开关。
索引类别
描述
索引类别
描述
标签检索
您可以单击开启标签检索。
人脸检索
单击开启人脸检索,您可以根据需要选择共享实例或独占实例。
共享实例:与其他用户共享相同的计算资源,适用于测试、体验场景。
独享实例:您可以拥有独立的计算资源,不会与其他用户分享,适用于商用场景。
大模型搜索
单击开启大模型搜索,您可以根据需要选择共享实例或独占实例。
单击提交,完成创建。
通过OpenAPI创建搜索库
创建一个指定名字的搜索库,参考接口CreateSearchLib - 创建搜索库。
在此搜索库中创建索引,参考接口CreateSearchIndex - 创建搜索索引。
对于不同类型的索引,需设置相应的
IndexType
字段值:标签检索:
aiLabel
。大模型搜索:
mm
。人脸检索:
face
。
激活索引
对于未激活的索引,可以通过选择特定的搜索库并单击索引激活来启动。激活意味着系统将自动对新增加到媒资库中的内容进行分析,并将这些分析结果保存到搜索库中,以便后续通过智能标签检索、人脸检索、大模型检索等功能查找相关媒资。
上传媒资
通过控制台上传媒资
在通过控制台上传媒资的时候,您需要选择上传至指定搜索库。具体的上传操作说明,详见控制台上传。
上传完成后,媒资会进行自动分析。分析完成后即可进行搜索。如果想确认自动分析是否完成,可单击媒资列表中的管理标签,进入详情页面,查看媒资的索引状态。
通过OpenAPI上传媒资
通过调用RegisterMediaInfo - 注册内容库资源接口上传媒资,需在RegisterConfig中设置参数SearchLibName(搜索库的名称)。例如:"RegisterConfig":{"SearchLibName":"test"}。如未填写,则系统将自动设置为默认搜索库。
查看分析结果
创建搜索库并激活索引后,系统可以对上传至搜索库中的媒资进行智能分析,您可以单击操作列的媒资管理,查看媒资的索引状态是否已激活。激活后即可对媒资进行智能索引分析,分析结果将自动保存录入至搜索库,用户可通过索引类型对应的检索功能查询所需资源。
检索媒资
通过控制台检索
如果上传的媒资已完成分析入库,在智能检索页面可使用智能标签检索、人脸、大模型进行媒资的搜索。
通过OpenAPI检索
使用SearchMediaByAILabel - 智能标签文本搜索接口搜索媒资,分为两个阶段:
第一次调用,选择粗搜模式,结果返回匹配的媒资列表。
第二次调用,选择精搜模式,结果返回具体某个媒资中匹配的片段列表。
使用SearchMediaByMultimodal - 大模型搜索接口搜索媒资,结果返回匹配的媒资列表,以及每个媒资中匹配的片段。
使用人脸图片搜索接口搜索某一个匹配媒资中,对应人脸出现的片段,分为两个阶段:
调用SearchMediaByFace - 人脸图片搜媒资接口(粗搜),输入一张人脸图片,搜索该人物所在媒资的相关信息。
使用SearchMediaClipByFace - 人脸图片搜媒资片段接口(精搜),基于粗搜结果返回该人脸所在媒资的相关人物片段信息。
搜索库管理
支持您管理已创建的搜索库,包括删除、修改配置等操作。
修改索引配置
您可以单击操作列的配置按钮,进行索引配置的修改。
删除搜索库
删除搜索库前,需要先删除索引。
删除索引将清空检索库中存储的数据并释放实例资源且不可恢复。
单击删除按钮,删除搜索库,删除搜索库后将清空库下所有媒资及索引内容。
常见问题
相关API
- 本页导读 (1)
- 计费说明
- 注意事项
- 索引类别
- 创建搜索库
- 通过控制台创建搜索库
- 通过OpenAPI创建搜索库
- 激活索引
- 上传媒资
- 通过控制台上传媒资
- 通过OpenAPI上传媒资
- 查看分析结果
- 检索媒资
- 通过控制台检索
- 通过OpenAPI检索
- 搜索库管理
- 常见问题
- 相关API