视频AI概述

视频点播提供智能审核、视频DNA、智能标签、智能封面等多种形式的媒体内容智能处理及内容智能生成能力,通过对音视频内容进行识别、分析和理解,可提升音视频内容生产的效率和质量。本文为您简要介绍视频点播提供的视频AI能力。

视频AI服务简介

阿里云视频AI服务可以对音视频内容进行识别、分析和理解。通过使用视频AI服务,您可以:

  • 检测违规的视频内容;

  • 识别并搜索重复或相似的音视频片段;

  • 识别视频中的人物、文字、实体、场景和动作;

  • 分析理解视频用以智能生成视频标签、推荐封面、动图及视频摘要;

  • 支持将语音识别为文本等。

视频AI功能特性

功能

描述

更多参考

智能审核

智能审核服务支持对点播视频资源的视频文件、封面图片及标题文本中涉黄、性感、暴恐、特殊装束、特殊标识、武器、涉政等内容进行识别,并给出建议结果。

视频DNA

视频DNA可以标记唯一的一个视频、音频或图片,具有稳定性,不会随音视频文件的格式转换、剪辑拼接、压缩旋转等变换而发生变化。视频DNA服务实现对视频中的图像、音频等指纹特征的提取和比对,解决重复视频查找、视频片段查源、原创识别等问题。

智能标签

智能标签服务通过分析视频中视觉、文字、语音、行为等信息,结合多模态信息融合及对齐技术,实现高准确率内容识别,自动输出视频的多维度内容标签,将非结构化信息转化为结构化信息。

智能封面

智能封面服务支持对视频内容进行分析和理解,提取最能代表视频内容的5张截图作为封面备选图;也支持将视频内容的关键画面进行抽取,自动合成GIF作为动图封面。

注意事项

  • 视频AI能力现仅在部分地域支持使用,各地域支持情况,请参见服务地域

  • 如需配置事件通知,所有视频AI能力共用视频AI处理完成开关来接收相应AI作业完成的事件通知回调。配置事件通知,请参见回调设置

  • 视频AI能力涉及产生费用,计费详情请参见视频AI计费

  • 现仅支持对上传到视频点播中的音视频进行视频AI处理。上传音视频,请参见媒体上传

视频AI处理流程

视频AI能力需要通过调用API接口发起AI作业,并可通过三种方式获取AI结果数据。其处理流程如下图所示:

视频AI