申请/专利权人:深圳追一科技有限公司
申请日:2021-04-20
公开(公告)日:2021-07-16
公开(公告)号:CN113129925A
主分类号:G10L25/57(20130101)
分类号:G10L25/57(20130101);G10L25/03(20130101);G06K9/00(20060101);G06K9/46(20060101);G06K9/62(20060101)
优先权:
专利状态码:有效-授权
法律状态:2023.08.04#授权;2021.08.03#实质审查的生效;2021.07.16#公开
摘要:本申请公开了一种基于VC模型的嘴部动作驱动模型训练方法及组件。本申请使用VC模型调整训练数据的音色参数语种参数,从而得到特定音色语种的目标特征,之后以该目标特征作为模型训练数据,从而可训练得到支持特定音色语种的得到嘴部动作驱动模型,可以降低训练数据的复杂性,减少训练数据量和训练成本,同时还不会影响嘴部动作驱动模型的通用性。相应地,本申请提供的一种基于VC模型的嘴部动作驱动模型训练组件,也同样具有上述技术效果。
主权项:1.一种基于VC模型的嘴部动作驱动模型训练方法,其特征在于,包括:获取训练视频,并提取所述训练视频中的音频数据和图像数据;从所述音频数据中提取角色声学特征,从所述图像数据中提取与所述角色声学特征对应的嘴部动作特征;若所述角色声学特征对应的音色语种不是目标单音色目标单语种,则利用VC模型调整所述角色声学特征的音色参数语种参数,以得到目标特征;所述目标特征对应的音色语种为所述目标单音色所述目标单语种;以所述目标特征作为模型输入数据,以所述嘴部动作特征作为模型输出目标,训练深度学习模型,以得到嘴部动作驱动模型。
全文数据:
权利要求:
百度查询: 深圳追一科技有限公司 一种基于VC模型的嘴部动作驱动模型训练方法及组件
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。