Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 广西大学田飞宇获国家专利权

广西大学田飞宇获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉广西大学申请的专利一种基于空间梯度引导网络的可见光与红外图像融合方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117058505B

龙图腾网通过国家知识产权局官网在2025-12-12发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202311007893.8,技术领域涉及:G06V10/80;该发明授权一种基于空间梯度引导网络的可见光与红外图像融合方法是由田飞宇;卢泉;殷林飞;胡立坤设计研发完成,并于2023-08-11向国家知识产权局提交的专利申请。

一种基于空间梯度引导网络的可见光与红外图像融合方法在说明书摘要公布了:本发明提出一种基于空间梯度引导网络的可见光与红外图像融合方法,基于空间梯度引导网络的可见光与红外图像融合方法将图像融合问题转化为梯度和显著度信息的提取与重构,针对特征提取部分,设计一种新的损失函数。该损失函数由梯度项和显著项两部分组成,对于梯度项,引入空间梯度模块,根据可见光图像像素尺度纹理信息的丰富度来决定梯度分布的优化目标;对于显著项,通过调整红外光图像的损失项的权重来改变显著目标的强度信息比例。针对特征重构部分,设计一种光照损失函数,在融合过程中加入空间引导模块来减少信息的损失、保留图像光照强度。所提可见光与红外图像融合方法实现融合图像场景亮度分布准确的功能,提高热源目标的显著信息。

本发明授权一种基于空间梯度引导网络的可见光与红外图像融合方法在权利要求书中公布了:1.一种基于空间梯度引导网络的可见光与红外图像融合方法,其特征在于,将可见光与红外图像融合方法将图像融合问题转化为梯度和显著度信息的提取与重构; 针对特征提取部分,设计一种损失函数,该损失函数由梯度项和显著项两部分组成;对于梯度项,引入空间梯度模块,根据可见光图像像素尺度纹理信息的丰富度来决定梯度分布的优化目标; 对于显著项,通过调整红外光图像的损失项的权重来改变显著目标的强度信息比例; 针对特征重构部分,设计一种光照损失函数,在融合过程中加入空间引导模块来减少信息的损失、保留图像光照强度;空间引导模块首先使用高斯低通滤波器来降低噪声的影响,在边缘区域选择较小的权值,引导融合图像的梯度分布以更大的梯度显著度接近原像素,保证可见光图像和红外光图像的边缘区域一致性,同时能保证减少红外光图像融合时的失真问题; 对于显著度信息,由于不同的融合任务对于提取的显著度信息不同,需要通过调整每个显著度损失项的权重比例,在融合过程中选择有效、突显的信息进行保存; 利用梯度项和显著项两种策略提取和重建梯度和显著度信息; 所提基于空间梯度引导网络的可见光与红外图像融合方法能解决融合图像中场景亮度分布不准确问题,实现融合图像场景亮度分布准确的功能,优化融合图像的细节轮廓与纹理信息,提高热源目标的显著信息; 一种基于空间梯度引导网络的可见光与红外图像融合方法,在使用过程中的步骤为: 步骤1:将红外图像进行特征提取,首先训练红外图像的第一层,第一层的卷积核大小为1×1,之后利用四个权值的卷积层充分提取红外图像的深度特征,在红外图像第二层、第三层和第四层的输出后面都有一个显著项模块,以减少特征提取中显著目标信息的损失,显著项模块能提取到卷积层更多的细节信息,除第一层以外,所有卷积层的核大小均为3×3,特征提取的所有层都是用ReLU作为激活函数; 显著项损失函数为: 其中:x和y表示空间模块映射或梯度映射的第x行第y列的元素,H为红外图像的高度,W为红外图像的宽度,为背景损失函数,为显著目标损失函数,为融合图像的损失函数,α为权重比例,n为图像的像素值; 步骤2:将可见光图像进行特征提取,首先训练可见光图像的第一层,第一层的卷积核大小为1×1,之后利用四个权值的卷积层充分提取可见光图像的深度特征,在可见光图像第二层、第三层和第四层的输出后面都有一个梯度项模块,以减少特征提取中细节纹理信息的损失,梯度项模块能提取到卷积层纹理信息,除第一层以外,所有卷积层的核大小均为3×3,特征提取的所有层都是用ReLU作为激活函数; 梯度项损失函数为: 其中:I1x,y表示原图像,Ifx,y表示融合图像,S1x,y表示空间梯度模块根据原图像的梯度级别生成的梯度图,表示梯度算子; 梯度算子采用scharr梯度算子,为了避免大量噪声对于梯度判断的影响,空间梯度模块首先对原图像进行双边滤波,然后利用Scharr算子寻找梯度映射,并根据梯度的大小在像素尺度上生成空间模块映射,空间梯度模块的生成过程为: 式中,wx,y,k,l为加权系数,加权系数由定义域核和值域核共同决定;dx,y,k,l为定义域核;rx,y,k,l为值域核,值域核的大小取决于被卷积像素的灰度值和领域像素的灰度值的差;k和l为领域像素的坐标点;||·||表示范数;σd和σr分别表示定义域核和值域核高斯方差;方差越大,说明权重差别越小;exp为指数函数;fx,y是x,y对应的灰度值;fk,l是k,l对应的灰度值; 由于原可见光图像采用双边滤波函数,选取梯度值较大的像素点,能保留大量的纹理细节信息; 采用空间梯度模块作用于梯度损失函数,保证融合后的图像以优化的方式保留像素尺度上的丰富纹理;步骤3:特征重构部分中将红外图像与可见光图像提取的特征进行拼接,作为图像融合的输入;图像重构包含五个卷积层,第一层、第二层和第三层输出后面都跟着一个空间引导模块,提取可见光图像中的亮度分布信息,提高融合图像光照亮度的同时再一次减少融合过程中信息的丢失,充分整合细节纹理信息和显著目标信息,生成最后融合的图像;除了第五层核为1×1外,其余各层大小均为3×3; 特征重构部分的第五层使用Tanh激活函数,其余所有层均使用ReLU作为激活函数; 步骤4:融合图像的光照亮度信息根据可见光图像的像素来估计场景的亮度分布,输入为可见光图像,输出为亮度概率,是由五个卷积层、一个全局池化层和两个全连接层构成;所有卷积层均使用ReLU作为激活函数,全局池化层对光照信息进行集成,由两个全连接层进行亮度概率的计算; 空间引导模块在充分提取亮度分布信息的同时,减少融合图像的训练时间; 空间引导模块的光照损失函数为: 其中:Pir和Pvi分别为红外图像与可见光图像的亮度权重;和分别为红外图像与可见光图像的亮度损失; 由于亮度损失是指像素级测量融合图像和原图像之间的差异;红外光与可见光图像的亮度损失分别为: 其中:Iirx,y表示红外图像,Ivix,y表示可见光图像; 步骤5:将光照亮度信息与拼接的红外图像、可见光图像进行融合,获得最终的融合图像;融合图像的损失函数为: 其中:为梯度项损失函数;为显著项损失函数;β用于平衡显著项和梯度项系数;为融合过程中的光照损失函数。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人广西大学,其通讯地址为:530004 广西壮族自治区南宁市西乡塘区大学东路100号广西大学;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。