苏州元脑智能科技有限公司黄春雷获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉苏州元脑智能科技有限公司申请的专利键值缓存的分配方法及电子设备、计算机程序获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120973836B 。
龙图腾网通过国家知识产权局官网在2026-01-27发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511479440.4,技术领域涉及:G06F16/2455;该发明授权键值缓存的分配方法及电子设备、计算机程序是由黄春雷;赵雅倩;张亚强;史宏志;高飞;许光远设计研发完成,并于2025-10-16向国家知识产权局提交的专利申请。
本键值缓存的分配方法及电子设备、计算机程序在说明书摘要公布了:本申请公开了一种键值缓存的分配方法及电子设备、计算机程序,涉及数据处理技术领域,通过综合词元的注意力向量及其引用数来计算重要性向量,能够从词元的注意力权重和引用数两个维度评估词元的重要性。基于重要性向量构建特征向量,并结合引用数构建亲和矩阵进行聚类处理,能够依据词元的缓存特性实现合理分类,之后基于重要性向量为不同聚类分配差异化的缓存预算向量并进行空间压缩分配,使得存储资源能够精准地投向重要性高的缓存。
本发明授权键值缓存的分配方法及电子设备、计算机程序在权利要求书中公布了:1.一种键值缓存的分配方法,其特征在于,包括: 根据至少一个词元各自在预设模型的至少一个注意力层上产生的注意力向量,以及所述至少一个词元各自在所述预设模型中的引用数,确定所述至少一个词元各自在所述至少一个注意力层上的重要性向量; 根据所述重要性向量构建所述至少一个词元各自在所述至少一个注意力层上的特征向量,并基于所述特征向量以及所述引用数构建亲和矩阵; 根据所述亲和矩阵对所述至少一个词元各自在所述至少一个注意力层上的缓存进行聚类处理,得到至少一个缓存聚类,基于所述重要性向量以及所述至少一个注意力层各自的层标识,为所述至少一个缓存聚类分配各自对应的缓存预算向量; 基于所述缓存预算向量对所述至少一个词元各自在所述至少一个注意力层上的缓存进行缓存空间压缩分配; 所述基于所述缓存预算向量对所述至少一个词元各自在所述至少一个注意力层上的缓存进行缓存空间压缩分配包括: 根据所述缓存预算向量确定所述至少一个缓存聚类各自对应的缓存预算; 响应于所述缓存预算能够为所述缓存聚类中的所有目标词元进行空间分配,通过所述缓存预算为所述缓存聚类中的所有所述目标词元在至少一个目标注意力层上的缓存进行缓存空间压缩分配; 响应于所述缓存预算不能为所述缓存聚类中的所有所述目标词元进行空间分配,将所述目标词元按照对应的聚类重要性向量的大小进行降序排序,得到排序目标词元; 在所述排序目标词元中选择前第一预设数量的目标词元作为待分配词元,并通过所述缓存预算为所述待分配词元在所述至少一个目标注意力层上的缓存进行缓存空间压缩分配。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人苏州元脑智能科技有限公司,其通讯地址为:215103 江苏省苏州市吴中经济开发区综保区经一路1号8幢;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励