申请/专利权人:厦门大学
申请日:2020-09-04
公开(公告)日:2024-03-19
公开(公告)号:CN112085717B
主分类号:G06T7/00
分类号:G06T7/00;G06T3/4038;G06N3/0464;G06N3/09
优先权:
专利状态码:有效-授权
法律状态:2024.03.19#授权;2021.01.01#实质审查的生效;2020.12.15#公开
摘要:本发明公开了一种用于腹腔镜手术的视频预测方法及其系统,该方法包括光流估算、函数变换和空间替换卷积SDC处理,此外还引入了损失函数处理,从而开发出一种能够根据输入视频序列准确、清晰地预测未来图像的视频下一帧预测系统,在难以获取高质量标注数据时,仍能完成对图像自动识别和预测任务,具有节约计算资源、无需对图像进行额外标注、所得预测图像清晰且接近真实情景的优点。
主权项:1.一种用于腹腔镜手术的视频预测方法,其特征在于,包括以下步骤:S1、收集自然视频数据,并进行预处理;S2、光流估算:将预处理后的数据以视频序列的方式输入到光流估算网络FlowNet2.0,输入的序列长度为t,所述光流估算网络FlowNet2.0对相邻两帧之间的光流进行预测,输出得到t-1帧光流;S3、函数变换预测:将所述光流估算网络FlowNet2.0输出的t-1帧光流与原图沿通道拼接,将拼接的结果输入变换函数预测网络,设适应性核函数的大小为N*N,所述变换函数预测网络为每个像素都预测2N+2个参数,其输出包括适应性核函数Kx,y和位移向量u,v;S4、空间替换卷积SDC处理:将所述变换函数预测网络的输出结果进行SDC模块处理,在SDC模块中,对输入序列的第t帧图像进行形变,最终得到预测的第t+1帧。
全文数据:
权利要求:
百度查询: 厦门大学 一种用于腹腔镜手术的视频预测方法及其系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。