「视频版」2D数字人支持高精度(5分钟说话视频,精准还原)与小样本(10秒-2分钟无口播视频,快速低成本)两种模式,均适用于实时对话与视频创作场景。

素材要求:
高精度视频训练数字人
根据2D高精度视频数字人形象定制指南,拍摄5分钟、4K、30fps的视频,经过训练后,可生成完美还原本人嘴形和动作的数字人
小样本视频训练数字人
根据2D小样本视频数字人形象定制指南,提供 10 秒~2 分钟 的无口播视频素材,经过训练后,即可训练出具备自然口型驱动能力的数字人
定制流程:
分为5步,填写数字人基本信息——上传视频——付费——开始训练——完成定制
第一步:填写基本信息

背景支持透明和实景两类
选择透明背景,需要上传带透明通道的视频,后续可在应用场景编辑页中选择叠加平台预置背景或自定义背景;
选择实景色,将使用视频素材中背景作为数字人背景;
支持同步采用视频内声音进行音色克隆,克隆成功的声音可以在「我的声音」列表内查看;
支持通过输入数字人播报文案,用指定文案验证数字人训练结果。
第二步:上传视频
根据2D高精度视频数字人形象定制指南/2D小样本视频数字人形象定制指南的checklist进行视频检查,符合要求后再进行上传
实时对话场景支持选择动作底板类型:单底板 / 多底板,可根据数字人的使用场景选择对应底板模式;
数字人的动作将从上传的训练视频中截取;
单底板模式:数字人的聆听和播报动作使用同段底板视频,动作表现较为单一,但整体连贯流畅;
多底板模式:数字人的聆听与播报动作分别使用两段独立的底板视频,存在底板间的跳帧,但整体表现力更强;
仅支持实时对话场景使用,不包含视频创作和播报场景。
不同应用场景,对于视频拍摄会有不同的要求,请仔细阅读并遵循

第三步:阿里云付费确认
视频数字人训练采用积分预扣方式,确认提交后会扣除相应积分,请确保您的阿里云账户余额充足
如遇训练失败,积分将原路返回至您的账户
计费标准:
高精度视频训练数字人
目录价39990积分/个,训练完成的形象可使用一年
次年续费 990积分/年

小样本视频训练数字人
目录价9990积分/个,训练完成的形象可使用一年
次年续费 990积分/年

第四步:形象训练
完成付费的形象,将进入审核-训练-验收的链路中,请关注控制台内流程及短信进展提示
审核一般需要1个工作日

训练一般需要0.5个工作日

第五步:训练完成后,请前往控制台确认并使用


