北京大学黄舟获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京大学申请的专利多模态与视觉大模型耦合的遥感语义分割方法及产品获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120823470B 。
龙图腾网通过国家知识产权局官网在2026-04-21发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511049186.4,技术领域涉及:G06V10/80;该发明授权多模态与视觉大模型耦合的遥感语义分割方法及产品是由黄舟;王青芃;鲍毅设计研发完成,并于2025-07-29向国家知识产权局提交的专利申请。
本多模态与视觉大模型耦合的遥感语义分割方法及产品在说明书摘要公布了:本发明提供了多模态与视觉大模型耦合的遥感语义分割方法及产品,涉及遥感图像处理技术领域。本发明实施例不再将额外模态视为与视觉大模型原生模态RGB图像平等的输入,而是作为主模态的提示。具体来说,将多模态数据视为具有不同遥感属性的提示后,即可动态地根据具体下游任务注入期望模态的感知维度并给出相应的分割结果。本发明实施例利用混合专家模型机制构建了多模态提示器,在提取多模态特征的同时稀疏化模型结构,控制计算负载。
本发明授权多模态与视觉大模型耦合的遥感语义分割方法及产品在权利要求书中公布了:1.一种多模态与视觉大模型耦合的遥感语义分割方法,其特征在于,所述方法包括: 获取多模态数据,将所述多模态数据中的RGB图像输入遥感语义分割模型中预训练的图像编码器;所述遥感语义分割模型包括:图像编码器、多模态提示器和类别解码器; 所述遥感语义分割模型的图像编码器对所述多模态数据中的RGB图像进行编码,得到图像嵌入; 所述多模态提示器将所述多模态数据整合为多模态特征矩阵,以通道拼接加权的形式对图像编码器的输出结果进行提示,得到提示后的图像嵌入; 类别解码器获取提示后的图像嵌入,输出多分类的概率分布结果; 所述多模态提示器包括硬混合专家模型和软混合专家模型;所述多模态提示器将所述多模态数据整合为多模态特征矩阵,以通道拼接加权的形式对图像编码器的输出结果进行提示,包括: 所述硬混合专家模型根据每种模态的数据特点激活适合的专家网络进行特征学习,得到每种模态的特征图; 对各个模态的特征图进行连接和归一化操作得到多模态特征图; 所述软混合专家模型根据多模态特征图的异构性聚合互补特征,得到多模态提示掩码。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京大学,其通讯地址为:100871 北京市海淀区颐和园路5号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励