先进计算与关键软件(信创)海河实验室谢学说获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉先进计算与关键软件(信创)海河实验室申请的专利一种主从核架构下的从核内存扩展优化方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120295804B 。
龙图腾网通过国家知识产权局官网在2025-09-16发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510788479.8,技术领域涉及:G06F9/50;该发明授权一种主从核架构下的从核内存扩展优化方法是由谢学说;王昊龙;王汉盟;李涛设计研发完成,并于2025-06-13向国家知识产权局提交的专利申请。
本一种主从核架构下的从核内存扩展优化方法在说明书摘要公布了:本发明涉及计算机技术领域,具体公开了一种主从核架构下的从核内存扩展优化方法,包括:获取需要在从核上运行的模型,计算模型运行时所需的总内存;根据总内存和从核可分配内存的大小,从内存空间中分配从核内存;将模型的数据传输至从核内存上;从核进行模型推理计算。本发明在主从核架构下调整了从核内存分配布局,按需调整从核内存大小,在模型运行时按其所占内存空间不同进行循环分配,使其可以运行不同大小的推理模型。
本发明授权一种主从核架构下的从核内存扩展优化方法在权利要求书中公布了:1.一种主从核架构下的从核内存扩展优化方法,其特征在于,包括: 获取需要在从核上运行的模型,计算模型运行时所需的总内存; 根据总内存和从核可分配内存的大小,从内存空间中分配从核内存; 将模型的数据传输至从核内存上; 将模型的数据传输至从核内存上时,根据数据的大小和管道大小,分配的缓冲区通道数量,然后传输所述数据; 预先分配的缓冲区通道以及缓冲区内存; 当数据大小小于等于管道大小时,直接传输所述数据; 当数据大小大于管道大小时,回收预先分配的缓冲区通道以及缓冲区内存,并计算数据大小与缓冲区内存的大小的倍数;根据倍数分配缓冲区通道数量,传输所述数据; 若倍数大于等于1,则将缓冲区通道数量设置为1,通道大小设置为缓冲区内存的大小,依次将数据传输,且对于最后一次传输的数据,将缓冲区通道数量设置为2,通道大小分别为最后一次传输的数据的大小和缓冲区所剩内存大小; 若倍数小于1,则将缓冲区通道数量设置为2,通道大小分别为最后一次传输的数据的大小和缓冲区所剩内存大小; 从核进行模型推理计算。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人先进计算与关键软件(信创)海河实验室,其通讯地址为:300450 天津市滨海新区塘沽高新区科技展示中心三层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。