申请/专利权人:度小满科技(北京)有限公司
申请日:2023-12-22
公开(公告)日:2024-03-19
公开(公告)号:CN117726724A
主分类号:G06T13/20
分类号:G06T13/20;G06T13/40;G06T13/80;G06T15/00
优先权:
专利状态码:在审-实质审查的生效
法律状态:2024.04.05#实质审查的生效;2024.03.19#公开
摘要:本发明提供一种2D3D口型驱动方法、装置、电子设备及可读存储介质,包括:接收第一输入,第一输入为视频帧信息中包含的语音特征;响应于第一输入,根据语音特征获得目标生物的表情系数;接收第二输入,第二输入为目标数字生物的输出类型;响应于第二输入,在目标数字生物的输出类型是3D的情况下,根据表情系数获取目标数字生物的口部形态键值,并根据口部形态键值驱动3D数字生物口型;或者,在目标数字生物的输出类型是2D的情况下,根据视频帧的渲染帧和中性帧获取数字生物的面部运动数据,根据面部运动数据驱动2D数字生物口型。本发明实现了不同应用环境下2D或者3D数字生物口型的完整驱动。
主权项:1.一种2D3D口型驱动方法,其特征在于,包括:接收第一输入,所述第一输入为视频帧信息中包含的语音特征,所述视频帧信息还包含目标生物的面部信息;响应于所述第一输入,根据所述语音特征获得目标生物的表情系数;接收第二输入,所述第二输入为目标数字生物的输出类型;响应于所述第二输入,在所述目标数字生物的输出类型是3D的情况下,根据所述表情系数获取所述目标数字生物的口部形态键值,并根据所述口部形态键值驱动3D数字生物口型;或者,在所述目标数字生物的输出类型是2D的情况下,根据所述视频帧的渲染帧和中性帧获取数字生物的面部运动数据,根据所述面部运动数据驱动2D数字生物口型,其中,所述渲染帧根据所述表情系数渲染得到。
全文数据:
权利要求:
百度查询: 度小满科技(北京)有限公司 2D/3D口型驱动方法、装置、电子设备及可读存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。