文档

美颜特效SDK简介

更新时间:

美颜特效SDK是由阿里视频云团队提供的美颜、特效功能,支持画面美化、人像美颜、抠像制作、贴纸美妆、动作识别、美体、美发、AR隔空写字等各种个性化定制服务,适用于视频直播、视频会议、短视频制作等场景。通过阅读本文,您可以快速了解美颜特效SDK的技术优势、核心功能及应用场景。

简介

接入简单快速、性能高、功能多样,是阿里云美颜特效SDK的核心优势。美颜特效SDK为视频创作者提供移动端和PC端的人脸基础美颜、高级美颜、美型美妆、贴纸抠像、手势姿态识别等编辑加工能力,基于自研的智能视觉算法、海量规模的人脸、人体检测和识别技术,为满足直播和视频制作时的美颜特效需求提供各种支持。美颜特效SDK,可同时支持在Android、iOS、Windows、Mac、Web端使用。

技术优势

  • 自研的人脸关键点定位技术,涵盖106个基础点位、280个高精度点位,效果真实。

  • 持续优化的智能视觉算法和实时渲染技术,保证自然流畅的使用体验。

  • 持续升级的美颜美型、滤镜贴纸玩法,不断扩充的素材库,创造更多乐趣。

  • 完善的开发者支持,快速响应客户需求,提供优质可靠的服务。

功能说明

功能

描述

人脸美颜

支持整体智能美颜和手动美颜。整体智能美颜有5个档位可选;手动美颜支持美白、红润、磨皮、锐化、饱和度、对比度、眼袋、祛法令纹、白牙、亮眼、口红、腮红、祛皱纹、祛暗沉、祛颈纹、祛抬头纹16个部位美颜,每项功能参数可调。

人脸美型

支持整体智能美型和18项脸部细节手动美型。整体智能美型有5款风格可选,手动美型功能如下所示:

  • 单向调节:瘦脸、削脸、瘦下颌骨、瘦颧骨、大眼、眼睛高度、微笑

  • 双向调节:脸长、下巴、下巴长短、嘴型、嘴唇厚度、鼻翼、瘦鼻、眼角、眼距、人中、发际线

人脸美妆

支持整体智能美妆和手动美妆。整体智能美妆包括素颜妆、清纯妆、复古妆、熟女妆4款;手动美妆支持口红、卧蚕、腮红、眉毛、高光、眼影、眼线、睫毛8款,各项强度可调节。美妆特效可跟随面部动作与表情变化。

人脸特效

结合人脸检测与跟踪技术,提供马赛克、蒙面贴纸等有趣玩法。

滤镜

支持34款滤镜效果,并持续扩容。实时渲染处理,提供更流畅的使用体验。

贴纸

支持静态和动态贴纸,提供79款贴纸素材,并会持续扩容素材库。贴纸精准贴合面部,并可根据面部表情动作变化实时跟随。

蓝/绿幕抠图

支持蓝色和绿色背景幕布抠图。精准识别人体,与背景精细分割,支持多光线、正侧面等复杂环境的抠图,并实时跟随。

实景抠像

支持实景背景抠像。精准识别人体,与背景精细分割,支持多光线、正侧面等复杂环境的抠像,并实时跟随。

手势识别

精准检测和捕捉手部关键点及手势动作,支持包括数字、比心、握拳、爪子、星际迷航等25款主流手势识别与多款动态手势识别。

动作检测

支持举手、比心、叉腰、超人等13种静态姿势识别,同时也支持跳绳、开合跳、深蹲、手臂划圈、菱形伸展、伸展扩胸、仰卧起坐、俯卧撑、跪姿俯卧撑共计9种动态动作的识别与计数。

智能美颜

支持各种背景环境下的美颜参数智能调节,结合当前背景、光线、肤色等客观条件,智能实时计算出最佳美颜参数。

美体

支持瘦身、长腿、小头、瘦腿、丰胸、手臂、脖子、瘦腰八种身体美化效果。效果自然,身材匀称。

美发

准确识别各种姿态和背景环境下的头发区域,内置8种头发颜色切换,支持任意头发颜色设定

AR隔空写字

捕捉手部动作与滑动轨迹,在直播、教学、花式互动等多种业务场景下,支持实时在当前屏幕中完成写字、绘画等操作。

Animoji特效

基于自研的人脸识别、表情识别算法,能够高效捕捉人物脸部不同角度、不同表情的变化,并驱动特定的动画头像做出相应的变化,实现娱乐、有趣的效果。目前支持单双眨眼、嘴部、眼部、眉部动作等51种表情。

活体检测

基于自研的人脸识别算法,进行张嘴、左右摇头、上下低头抬头的动作行为检测,确定画面中的人物是否为真实活体。

异常行为检测

通过自研的异物检测、行为检测算法,支持是否手持手机、入耳式耳机、头戴式耳机、显示器等目标异物检测,同时支持人员进行离开、起立、坐下、举手等行为检测,并及时给出画面提示。

人脸认证/相似度检测

通过人脸关键点、人脸特征计算等算法,支持各种角度下,对目标人脸进行确认与相似度计算,并提供相似度打分处理。

应用场景

  • 生活直播

    适用于各类直播场景,满足实时美颜美化需求。

  • 长短视频

    辅助视频制作,提供各类贴合业务场景的美化特效处理。

  • 在线教育

    帮助老师上课前的美颜美化,效果自然,提升亲和力。

  • 视频会议

    在线会议过程中的实时美颜美化和互动,丰富远程沟通场景。