控制与决策

作者：陈昭宇,范洪博,马美燕,赵艺博

单位：昆明理工大学 信息工程与自动化学院,昆明 650500,,昆明理工大学 现代农业工程学院,昆明 650500,,昆明理工大学 信息工程与自动化学院,昆明 650500,,昆明理工大学 信息工程与自动化学院,昆明 650500,

关键词：图像融合;结构重参数化;红外与可见光图像;双边滤波;深度学习

红外与可见光图像融合的目的是通过将不同模态的互补信息融合来增强源图像中的细节场景信息,然而,现有的深度学习方法存在融合性能与计算资源消耗不平衡的问题,并且会忽略红外图像存在噪声的问题.对此,提出一种基于结构重参数化的红外与可见光图像融合算法.首先,通过带权重共享的双分支残差连接型网络分别对两种源图像进行特征提取,分别得到的特征级联后图像重建;然后,用结构相似性损失与双边滤波去噪的内容损失联合指导网络的训练;最后,在训练完成后进行结构重参数化将训练网络优化成直连型网络.在多个公共数据集上与7种领先的深度学习融合算法进行了定性与定量的实验对比,所提出的融合算法在更低的资源耗费下能够实现多个评价指标的提升,融合结果具有更丰富的场景信息、更强的对比度以及更符合人眼的视觉效果.

来源：2024年第7期

《控制与决策》期刊编辑部

查看控制与决策杂志2024年第7期