视频截帧

您可以通过视频截帧功能,按一定规则提取视频帧并转换为需要的图片格式。本文介绍视频截帧功能参数及示例。

使用场景

  • 视频编辑与制作:在视频剪辑过程中,为了选取合适的镜头、制作动态海报或预告片,需要从原始视频中精确地截取某一帧画面作为静态图像。

  • 动画制作与游戏开发:动画师和游戏开发者可能会从视频中抓取特定帧作为角色动作的关键帧,用于构建动画序列或者游戏中的角色动作资源。

  • 视频分析与监控:在安防监控、运动分析等领域,通过截取视频中的关键帧进行细节查看和数据分析。例如,人脸识别、行为识别等技术就需要对视频的每一帧进行处理。

  • 截图分享与记录:用户在观看视频时,如果看到喜欢的画面想要保存或分享,也可以通过截取该时刻的视频帧实现。

注意事项

  • 视频截帧仅支持异步处理(x-oss-async-process处理方式)。

  • 视频截帧可能由于视频时间戳或码流的损坏而失败或生成的图片文件数量不正确。

  • 使用视频截帧前,需要先绑定IMM Project。关于控制台和API如何绑定,请参见快速入门AttachOSSBucket

  • 不支持匿名访问。

  • 必须拥有IMM处理所需的相关权限。更多信息,请参见权限

参数说明

操作名称:video/snapshots

具体参数如下表所示。

参数

类型

是否必须

描述

ss

int

视频截帧的起始时间,单位为毫秒。取值:

  • 0(默认值):从起始位置开始。

  • 大于0:从第ss毫秒开始。

f

string

图片输出格式,取值:

  • jpg

  • png

num

int

截帧数量,默认为不限制数量(截帧到视频结束)。

重要

当视频长度不足时,实际截帧数量会小于设定的参数值。

inter

int

截帧间隔,单位为毫秒,默认截取所有视频帧。

说明

当该参数小于源视频帧间隔(帧率倒数)时,会按源视频帧间隔进行截帧。

w

int

输出图片的宽度,单位为px,取值范围为[32,4096],默认与源视频宽度相同。

h

int

输出图片的高度,单位为px,取值范围为[32,4096],默认与源视频高度相同。

pw

int

输出图片宽度与原始视频宽度的百分比,取值范围为(0,200],默认值为100。

说明

wpw同时设置时,pw无效。

ph

int

输出图片高度与原始视频高度的百分比,取值范围为(0,200],默认值为100。

说明

hph同时设置时,ph无效。

scaletype

string

缩放方式。取值:

  • crop:缩放并裁剪。

  • stretch(默认值):拉伸以填满。

  • fill:缩放并保留黑边。

  • fit:缩放并不保留黑边,等比缩放。

说明

视频截帧时也会用到sys/saveasnotify参数。更多信息,请参见另存为消息通知

使用REST API

重要

在填写视频截帧输出文件存储路径时,若未指定后缀名(例如“.jpg”),系统将自动添加序号(例如“_0_1.jpg”)。如果已指定后缀名,则系统仅会保留最后一张截图,因此不建议使用此方式。如需自定义序号,可以通过媒体处理相关变量进行设置。

以每10秒截1帧的形式对视频进行截帧

截帧信息

  • 截帧前

    • 视频名称:example.mkv

  • 处理方式

    • 截帧完成消息通知:发送MNS消息

  • 截帧后

    • 截帧信息

      • 截帧格式:jpg

      • 视频间隔:10s

      • 输出图片分辨率:100x100

    • 文件存储路径

      • jpg文件:oss://outbucket/outobjprefix-%d.jpg

处理示例

// 对文件example.mkv进行视频截帧。
POST /exmaple.mkv?x-oss-async-process HTTP/1.1
Host: video-demo.oss-cn-hangzhou.aliyuncs.com
Date: Fri, 28 Oct 2022 06:40:10 GMT
Authorization: OSS qn6q**************:77Dv****************

x-oss-async-process=video/snapshots,f_jpg,w_100,h_100,scaletype_crop,inter_10000|sys/saveas,b_b3V0YnVja2V0,o_b3V0b2JqcHJlZml4LXtpbmRleH0ue2F1dG9leHR9Cg/notify,topic_QXVkaW9Db252ZXJ0

从视频的第3秒连续截帧100png图片

截帧信息

  • 截帧前

    • 视频名称:example.mkv

  • 处理方式

    • 截帧完成消息通知:发送MNS消息

  • 截帧后

    • 截帧信息

      • 截帧格式:png

      • 视频间隔:0s

      • 输出图片分辨率:宽高都为源视频的1/4

    • 文件存储路径

      • png文件:oss://outbucket/outobjprefix-%d.png

处理示例

// 对文件example.mkv进行视频截帧。
POST /exmaple.mkv?x-oss-async-process HTTP/1.1
Host: video-demo.oss-cn-hangzhou.aliyuncs.com
Date: Fri, 28 Oct 2022 06:40:10 GMT
Authorization: OSS qn6q**************:77Dv****************
 
x-oss-async-process=video/snapshots,ss_3000,f_png,pw_25,ph_25,num_100|sys/saveas,b_b3V0YnVja2V0,o_b3V0b2JqcHJlZml4LXtpbmRleH0ue2F1dG9leHR9Cg/notify,topic_QXVkaW9Db252ZXJ0

使用SDK

仅支持使用Java、Python、Go SDK通过异步处理的方式完成视频截帧。

Java

要求使用3.17.4及以上版本的Java SDK。

import com.aliyun.oss.ClientBuilderConfiguration;
import com.aliyun.oss.OSS;
import com.aliyun.oss.OSSClientBuilder;
import com.aliyun.oss.common.auth.CredentialsProviderFactory;
import com.aliyun.oss.common.auth.EnvironmentVariableCredentialsProvider;
import com.aliyun.oss.common.comm.SignVersion;
import com.aliyun.oss.model.AsyncProcessObjectRequest;
import com.aliyun.oss.model.AsyncProcessObjectResult;
import com.aliyuncs.exceptions.ClientException;

import java.util.Base64;

public class Demo {
    public static void main(String[] args) throws ClientException {
        // yourEndpoint填写Bucket所在地域对应的Endpoint。
        String endpoint = "https://oss-cn-hangzhou.aliyuncs.com";
        // 指定阿里云通用Region ID,例如cn-hangzhou。
        String region = "cn-hangzhou";
        // 从环境变量中获取访问凭证。运行本代码示例之前,请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。
        EnvironmentVariableCredentialsProvider credentialsProvider = CredentialsProviderFactory.newEnvironmentVariableCredentialsProvider();
        // 指定Bucket名称,例如examplebucket。
        String bucketName = "examplebucket";
        // 指定按视频截帧处理后的文件名称。
        String targetKey = "dest.png";
        // 指定原视频文件名称。
        String sourceKey = "src.mp4";

        // 创建OSSClient实例。
        ClientBuilderConfiguration clientBuilderConfiguration = new ClientBuilderConfiguration();
        clientBuilderConfiguration.setSignatureVersion(SignVersion.V4);
        OSS ossClient = OSSClientBuilder.create()
                .endpoint(endpoint)
                .credentialsProvider(credentialsProvider)
                .clientConfiguration(clientBuilderConfiguration)
                .region(region)
                .build();

        try {
            // 构建视频处理样式字符串以及视频截帧处理参数。
            String style = String.format("video/snapshots,f_jpg,w_100,h_100,scaletype_crop,inter_10000");
            // 构建异步处理指令。
            String bucketEncoded = Base64.getUrlEncoder().withoutPadding().encodeToString(bucketName.getBytes());
            String targetEncoded = Base64.getUrlEncoder().withoutPadding().encodeToString(targetKey.getBytes());
            String process = String.format("%s|sys/saveas,b_%s,o_%s/notify,topic_QXVkaW9Db252ZXJ0", style, bucketEncoded, targetEncoded);
            // 创建AsyncProcessObjectRequest对象。
            AsyncProcessObjectRequest request = new AsyncProcessObjectRequest(bucketName, sourceKey, process);
            // 执行异步处理任务。
            AsyncProcessObjectResult response = ossClient.asyncProcessObject(request);
            System.out.println("EventId: " + response.getEventId());
            System.out.println("RequestId: " + response.getRequestId());
            System.out.println("TaskId: " + response.getTaskId());

        } finally {
            // 关闭OSSClient。
            ossClient.shutdown();
        }
    }
}

Python

要求使用Python SDK 2.18.4及以上版本。

# -*- coding: utf-8 -*-
import base64
import oss2
from oss2.credentials import EnvironmentVariableCredentialsProvider

def main():
    # 从环境变量中获取临时访问凭证。运行本代码示例之前,请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。
    auth = oss2.ProviderAuthV4(EnvironmentVariableCredentialsProvider())
    # 填写Bucket所在地域对应的Endpoint。以华东1(杭州)为例,Endpoint填写为https://oss-cn-hangzhou.aliyuncs.com。
    endpoint = 'https://oss-cn-hangzhou.aliyuncs.com'
    # 指定阿里云通用Region ID,例如cn-hangzhou。
    region = 'cn-hangzhou'

    # 填写Bucket名称,例如examplebucket。
    bucket = oss2.Bucket(auth, endpoint, 'examplebucket', region=region)

    # 指定原视频文件名称。
    source_key = 'src.mp4'

    # 指定按视频截帧处理后的文件名称。
    target_key = 'dest.png'

    # 构建视频截帧参数。
    animation_style = 'video/snapshots,f_jpg,w_100,h_100,scaletype_crop,inter_10000'

    # 构建处理指令,包括保存路径和Base64编码的Bucket名和目标文件名。
    bucket_name_encoded = base64.urlsafe_b64encode('examplebucket'.encode()).decode().rstrip('=')
    target_key_encoded = base64.urlsafe_b64encode(target_key.encode()).decode().rstrip('=')
    process = f"{animation_style}|sys/saveas,b_{bucket_name_encoded},o_{target_key_encoded}/notify,topic_QXVkaW9Db252ZXJ0"

    try:
        # 执行异步处理任务。
        result = bucket.async_process_object(source_key, process)
        print(f"EventId: {result.event_id}")
        print(f"RequestId: {result.request_id}")
        print(f"TaskId: {result.task_id}")
    except Exception as e:
        print(f"Error: {e}")


if __name__ == "__main__":
    main()

Go

要求使用Go SDK 3.0.2及以上版本。

package main

import (
    "encoding/base64"
    "fmt"
    "os"
    "github.com/aliyun/aliyun-oss-go-sdk/oss"
    "log"
)

func main() {
    // 从环境变量中获取临时访问凭证。运行本代码示例之前,请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。
    provider, err := oss.NewEnvironmentVariableCredentialsProvider()
    if err != nil {
    fmt.Println("Error:", err)
    os.Exit(-1)
    }
    // 创建OSSClient实例。
    // yourEndpoint填写Bucket对应的Endpoint,以华东1(杭州)为例,填写为https://oss-cn-hangzhou.aliyuncs.com。其他Region请按实际情况填写。
    // yourRegion指定阿里云通用Region ID,例如cn-hangzhou。
    client, err := oss.New("https://oss-cn-hangzhou.aliyuncs.com", "", "", oss.SetCredentialsProvider(&provider), oss.AuthVersion(oss.AuthV4), oss.Region("cn-hangzhou"))
    if err != nil {
    fmt.Println("Error:", err)
    os.Exit(-1)
    }
    // 指定Bucket名称,例如examplebucket。
    bucketName := "examplebucket"

    bucket, err := client.Bucket(bucketName)
    if err != nil {
    fmt.Println("Error:", err)
    os.Exit(-1)
    }

    // 指定原视频文件名称。
    sourceKey := "src.mp4"
    // 指定按视频截帧处理后的文件名称。
    targetKey := "dest.png"

    // 构建视频截帧参数。
    animationStyle := "video/snapshots,f_jpg,w_100,h_100,scaletype_crop,inter_10000"

    // 构建处理指令,包括保存路径和Base64编码的Bucket名称和目标文件名称。
    bucketNameEncoded := base64.URLEncoding.EncodeToString([]byte(bucketName))
    targetKeyEncoded := base64.URLEncoding.EncodeToString([]byte(targetKey))
    process := fmt.Sprintf("%s|sys/saveas,b_%v,o_%v/notify,topic_QXVkaW9Db252ZXJ0", animationStyle, bucketNameEncoded, targetKeyEncoded)

    // 执行异步处理任务。
    result, err := bucket.AsyncProcessObject(sourceKey, process)
    if err != nil {
    log.Fatalf("Failed to async process object: %s", err)
    }

    fmt.Printf("EventId: %s\n", result.EventId)
    fmt.Printf("RequestId: %s\n", result.RequestId)
    fmt.Printf("TaskId: %s\n", result.TaskId)
}

常见问题

  • 视频截帧功能支持过滤掉黑屏吗?

    不支持。

  • 视频截帧的图片出现失真

    目前暂不支持对BT.2020色域的源视频进行视频截帧。