申请/专利权人:苏州天必佑科技有限公司
申请日:2020-10-12
公开(公告)日:2021-01-12
公开(公告)号:CN112215140A
主分类号:G06K9/00(20060101)
分类号:G06K9/00(20060101);G06K9/62(20060101);G06N3/04(20060101);G06N3/08(20060101);H04N7/01(20060101)
优先权:
专利状态码:在审-实质审查的生效
法律状态:2021.01.29#实质审查的生效;2021.01.12#公开
摘要:本发明公开了一种基于时空对抗的3维信号处理方法,时空对抗网络包括循环生成器、光流估计网络和时空判别器;循环生成器用于递归地从低分辨率输入生成高分辨率视频帧;光流估计网络学习帧与帧之间的运动补偿;时空判别器可以考虑空间和时间方面,并在不过度平滑图像内容的情况下惩罚结果中不真实的时间不连续性。本发明解决在超频超分辨中对于多样和模糊的运动下视觉效果显著下降的问题,同时充分利用视频中的时间信息,保证超分辨后的视频的时空一致性。
主权项:1.一种基于时空对抗的3维信号处理方法,其特征在于,构建时空对抗网络,所述时空对抗网络包括循环生成器G、光流估计网络F和时空判别器Ds,t;所述循环生成器G用于递归地从低分辨率输入生成高分辨率视频帧;光流估计网络F学习帧与帧之间的运动补偿;时空判别器在不过度平滑图像内容的情况下惩罚结果中不真实的时间不连续性;所述循环生成器,为基于一个与光流估计网络F耦合的循环卷积网络;循环生成器从低分辨率LR帧xt生成高分辨率HR输出gt,并递归使用之前生成的HR输出gt-1;循环生成器学习残差信息,然后将其添加到双三次插值的低分辨率输入中;所述时空判别器,其接收两组输入:真值和生成帧;这两组数据具有相同的结构,包含:三个相邻的HR帧,三个对应的上采样的LR帧,以及三个warpedHR帧;经过损失函数训练为循环生成器提供有关空间细节的真实性和时间变化的梯度信息;通过同时考虑空间和时间输入,时空判别器Ds,t自动平衡空间和时间方面,避免不一致的锐度和过于平滑的结果。
全文数据:
权利要求:
百度查询: 苏州天必佑科技有限公司 一种基于时空对抗的3维信号处理方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。