首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】照片数字人说话的驱动方法、系统、电子设备和存储介质_广州赛灵力科技有限公司_202410059505.9 

申请/专利权人:广州赛灵力科技有限公司

申请日:2024-01-15

公开(公告)日:2024-05-14

公开(公告)号:CN118038516A

主分类号:G06V40/16

分类号:G06V40/16;G06V20/40;G06V10/20;G06V10/80

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.05.31#实质审查的生效;2024.05.14#公开

摘要:本发明公开了一种照片数字人说话的驱动方法、系统、电子设备和存储介质,可广泛应用于数字人技术领域。本发明通过先对输入照片进行预处理后得到对应的人脸图像,然后根据该人脸图像与数字人说话视频模板生成风格视频,再根据该风格视频和驱动音频生成包含说话唇形的人脸视频,将人脸视频与输入照片进行融合后得到照片数字人的说话视频;本实施例通过照片既能得到数字人的说话视频,从而可以有效降低数字人说话的制作成本。

主权项:1.一种照片数字人说话的驱动方法,其特征在于,包括以下步骤:获取输入照片;对所述输入照片进行预处理,得到第一人脸图像;获取数字人说话视频模板,所述数字人说话视频模板为无声视频且所述数字人说话视频模板包括人脸目标框、头部晃动动作、眨眼动作和面部表情动作;所述人脸目标框的大小与所述第一人脸图像的大小相同;根据所述第一人脸图像和所述数字人说话视频模板生成风格视频;获取驱动音频;根据所述驱动音频和所述风格视频生成人脸视频,所述人脸视频包括说话唇形;将所述人脸视频与所述输入照片进行融合,得到包含人脸下半身的说话视频。

全文数据:

权利要求:

百度查询: 广州赛灵力科技有限公司 照片数字人说话的驱动方法、系统、电子设备和存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。