复旦大学;杭州海康威视数字技术股份有限公司姜育刚获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉复旦大学;杭州海康威视数字技术股份有限公司申请的专利视觉语言模型的处理方法、设备、存储介质及程序产品获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN121212216B 。
龙图腾网通过国家知识产权局官网在2026-03-27发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511755985.3,技术领域涉及:G06N3/045;该发明授权视觉语言模型的处理方法、设备、存储介质及程序产品是由姜育刚;桂韬;纪焘;樊晓然;孙志超;黄萱菁;沈力行;朱江设计研发完成,并于2025-11-26向国家知识产权局提交的专利申请。
本视觉语言模型的处理方法、设备、存储介质及程序产品在说明书摘要公布了:本申请涉及人工智能技术领域,公开了一种视觉语言模型的处理方法、设备、存储介质及程序产品。该方法包括:获取第一VLM,第一VLM包括多个第一注意力子模块,第一注意力子模块的第一权重矩阵集中包括用于计算键的键权重矩阵,键权重矩阵中可以包括多个子空间的数据。基于多个子空间的数据对键的影响程度,确定出部分子空间的数据作为第一子键权重矩阵,第一子键权重矩阵用于确定第一输入数据的第一部分键。这样,即可将第一VLM中的第一注意力子模块转换为第二VLM中的第二注意力子模块。并且,由于第一子键权重矩阵相对于键权重矩阵包括更少的数据量,从而使得第二VLM的计算量小且存储第一部分键时所需的缓存空间也更小。
本发明授权视觉语言模型的处理方法、设备、存储介质及程序产品在权利要求书中公布了:1.一种视觉语言模型的处理方法,应用于电子设备,其特征在于,包括: 获取第一视觉语言模型VLM,其中,第一VLM包括第一多头注意力模块,所述第一多头注意力模块包括多个第一注意力子模块,并且所述第一注意力子模块包括第一权重矩阵集,所述第一权重矩阵集包括键权重矩阵Wk;其中,所述键权重矩阵Wk用于计算所述第一VLM的键,所述键权重矩阵Wk包括M个子空间的数据,M为大于或等于2的正整数; 确定所述键权重矩阵Wk的第一子键权重矩阵Wkr,所述第一子键权重矩阵Wkr包括所述M个子空间的数据中的N个子空间的数据,所述N个子空间是基于所述M个子空间的数据对所述第一VLM的键的影响程度确定的,N为小于M的正整数; 基于所述第一子键权重矩阵Wkr得到第二VLM的第二注意力子模块的第二权重矩阵集,其中,所述第二VLM包括多个第二注意力子模块; 运行所述第二VLM对第一输入数据进行处理,其中,所述第一子键权重矩阵Wkr用于确定输入所述第二VLM的所述第一输入数据的第一部分键krope,所述第一输入数据包括P个模态的输入数据,所述P个模态的输入数据包括音频模态对应的音频数据、图像模态对应的图像数据、文本模态对应的文本数据、视频模态对应的视频数据中的一个或多个,P为大于1的正整数。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人复旦大学;杭州海康威视数字技术股份有限公司,其通讯地址为:200438 上海市杨浦区邯郸路220号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励