浙江工业大学产思贤获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉浙江工业大学申请的专利一种基于生成对抗网络的跨模态行人重识别方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114743162B 。
龙图腾网通过国家知识产权局官网在2025-07-29发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202210364290.2,技术领域涉及:G06V20/52;该发明授权一种基于生成对抗网络的跨模态行人重识别方法是由产思贤;杜锋;白琮设计研发完成,并于2022-04-07向国家知识产权局提交的专利申请。
本一种基于生成对抗网络的跨模态行人重识别方法在说明书摘要公布了:本发明公开了一种基于生成对抗网络的跨模态行人重识别方法,通过生成对抗网络生成跨模态图像进行像素对齐,然后将同一ID下的真实图像和生成的跨模态图像输入主干网络Resnet‑50进行特征提取和特征对齐。通过创建的联合损失函数来筛选模态共有特征中具有身份区别性的特征,对网络模型进行优化。本发明利用生成对抗网络以及对传统Resnet‑50进行修改,在跨模态行人重识别任务取得了不错的效果。
本发明授权一种基于生成对抗网络的跨模态行人重识别方法在权利要求书中公布了:1.一种基于生成对抗网络的跨模态行人重识别方法,其特征在于,所述基于生成对抗网络的跨模态行人重识别方法,包括: 获取训练数据集,所述训练数据集中每个训练样本为带有身份标注的第一图像和第二图像,所述第一图像和第二图像分别为自然光图像和红外线图像中的一种,将训练样本输入到生成对抗网络训练生成器; 训练样本中的第一图像经过所述生成器生成伪第二图像,将生成的伪第二图像与训练样本中真实第二图像输入到构建的特征对齐网络,提取伪第二图像特征和真实第二图像特征; 将伪第二图像与伪第二图像特征组成伪图像特征对,将训练样本中真实第二图像与真实第二图像特征组成真实图像特征对,送入联合鉴别器进行判别; 计算生成对抗网络、特征对齐网络和联合鉴别器的联合损失,完成网络训练; 将数据库中图像输入到训练好的生成对抗网络中的生成器,所述生成器输出伪图像与待识别图像输入到特征对齐网络,分别提取对应的图像特征,通过图像特征的比对,完成待识别图像的识别; 其中,所述联合损失表示如下: 其中,Lpix表示生成对抗网络损失,Lfeat表示特征对齐网络损失,LD表示联合鉴别器损失,表示生成对抗网络的对抗损失,表示特征对齐网络的对抗损失,Lcyc表示生成对抗网络的循环一致性损失,λcyc、表示对应损失函数的权重,表示生成对抗网络中对生成图片的分类损失,表示生成对抗网络对生成图像计算三元组损失,表示特征对齐阶段对特征计算分类损失,表示特征对齐阶段对特征计算三元组损失,表示生成对抗网络的权重,表示联合鉴器别器鉴别图像—特征对为真时的损失,表示联合鉴别器鉴别图像特征对为假时的损失; 其中,x,m表示输入到联合鉴别器的图像特征对,X′ir表示生成的伪第二图像,Xir表示真实第二图像,Mir表示真实第二图像经过特征对齐网络提取的特征图,M′ir表示伪第二图像经过特征对齐网络提取的特征图,Djx,m表示联合鉴别器的输出; 其中,联合鉴别器损失计算公式如下: 其中,表示联合鉴器别器鉴别图像特征对为真,表示联合鉴别器鉴别图像特征对为假,Djx,m为联合鉴别器的输出,当鉴别为真时输出1,鉴别为假时输出0,E为求数学期望,Xir,Mir表示同一身份下的真实图像特征对,是与Xir,Mir的身份相同的伪图像特征对,是与Xir,Mir不同身份下的真实图像特征对; 其中,表示对从特征对齐网络提取的Xir和X′ir特征计算分类损失,p对输入图像正确分类到其真实身份的预测概率,表示对生成图像计算三元组损失; Lcyc=‖Gp'GpXrgb-Xrgb‖1+‖GpGp′Xir-Xir‖1; 其中,Gp代表生成器,将第一图像生成伪第二图像,Gp′也是生成器,将伪第二图像生成回第一图像,代表对生成图像X′ir进行分类损失计算,代表对生成图像X′ir和真实红外图像Xir计算三元组损失,Lcyc表示循环损失函数,Ltri表示三元组损失函数; 所述特征对齐网络的主干网络采用Resnet-50,包括第一卷积层、第二卷积层、第三卷积层和第四卷积层,每个卷积层之后设置有NAM注意力机制模块,并且第三卷积层和第四卷积层的NAM注意力机制模块之后还设置了MAM模态缓解模块; 所述第一卷积层、第二卷积层、第三卷积层和第四卷积层去除了池化层。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浙江工业大学,其通讯地址为:310014 浙江省杭州市下城区潮王路18号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。