申请/专利权人：重庆师范大学

申请日：2023-12-08

公开（公告）日：2024-04-09

公开（公告）号：CN117853352A

主分类号：G06T5/50

分类号：G06T5/50;G06T7/33;G06N3/0455;G06N3/0464;G06N3/048;G06N3/0895;G06N3/045

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.26#实质审查的生效;2024.04.09#公开

摘要：本发明公开了基于自监督Transformer网络的红外‑可见光图像融合方法，涉及视觉红外‑可见光图像融合技术领域，其技术要点为：首先，设计一个可变卷积的特征对齐网络，减轻源图像对轻微错位问题，减少伪影产生；其次，通过细节自注意模块捕获两种模态图像细节信息，显著性交叉注意模块增强两种模态图像的显著性特征，得到融合特征；最后，由解码器重建融合特征得到融合图像。本发明使用自监督Transformer的可端到端训练网络，对编码器提取的图像对特征进行对齐，用细节自注意模块和显著性交叉模块模拟不同模态图像的上下文关系，减少了融合图像中伪影产生，提升了红外‑可见光图像的融合质量。

主权项：1.基于自监督Transformer网络的红外-可见光图像融合方法，其特征是：具体包括如下步骤：步骤S1：提取输入源图像的特征，使用自监督Transformer的端到端网络中的编码器分别对红外图像和可见光图像进行特征提取；步骤S2：根据可变卷积网络对步骤S1中编码器提取的红外-可见光图像对特征在特征空间上进行对齐；步骤S3：根据特征融合网络中的细节自注意模块和显著性交叉模块模拟不同模态图像的上下文关系，得到融合后的特征；步骤S4：重构融合图像，使用自监督Transformer的端到端网络中的解码器对步骤S3中融合后的特征进行重构，得到最终的融合图像。

全文数据：

权利要求：

百度查询： 重庆师范大学 基于自监督Transformer网络的红外-可见光图像融合方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD