北京邮电大学王伟获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京邮电大学申请的专利面向模型训练的梯度数据传输方法及相关设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119676329B 。
龙图腾网通过国家知识产权局官网在2025-09-26发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411714641.3,技术领域涉及:H04L69/16;该发明授权面向模型训练的梯度数据传输方法及相关设备是由王伟;李意洋;胡乔钧;王奕博;李亚杰;赵永利;张杰设计研发完成,并于2024-11-27向国家知识产权局提交的专利申请。
本面向模型训练的梯度数据传输方法及相关设备在说明书摘要公布了:本申请提供一种面向模型训练的梯度数据传输方法及相关设备,通过实时监控传输速率,根据传输速率的变化动态确定压缩比,进而能够根据压缩比智能压缩梯度数据,显著减少了数据传输量,减轻了网络负担;同时,根据交换机与所述参数服务器之间的传输链路带宽通过拥塞控制调整每个工作端的传输速率来缓解拥塞。在二者的共同作用下,显著缩短了梯度数据的传输时间,提高了数据传输效率,从而加速了分布式人工智能模型的训练过程,提升了整体训练效率。
本发明授权面向模型训练的梯度数据传输方法及相关设备在权利要求书中公布了:1.一种面向模型训练的梯度数据传输方法,其特征在于,应用于梯度数据传输控制系统,所述系统包括交换机、参数服务器和多个工作端,所述方法由各个工作端执行,包括: 确定当前训练次数的梯度数据,获取与当前训练次数的梯度数据对应的初始传输速率,以及获取与当前训练次数的梯度数据对应的当前时刻的传输速率; 确定当前时刻的传输速率为目标传输速率,基于所述初始传输速率和所述目标传输速率确定传输速率变化比率; 获取当前训练次数的梯度数据的总字节数,并统计当前训练次数下已成功传输的梯度数据的字节数,基于当前训练次数的梯度数据的总字节数和当前训练次数下已成功传输的梯度数据的字节数确定当前训练次数的剩余传输字节数; 基于当前训练次数下已成功传输的梯度数据的字节数、当前训练次数的梯度数据的总字节数、当前训练次数的剩余传输字节数和传输速率变化比率通过压缩比算法进行压缩比确定处理,得到当前训练次数的压缩比; 基于所述当前训练次数的压缩比和当前训练次数的梯度数据确定当前训练次数的目标梯度数据; 获取所述交换机与所述参数服务器之间传输链路的第一链路带宽,以及多个工作端的总数量; 基于所述第一链路带宽和所述多个工作端的总数量,确定每个工作端和所述交换机之间传输链路的第二链路带宽; 将所述当前训练次数的目标梯度数据按照所述第二链路带宽传输至所述交换机,以供所述交换机将所述当前训练次数的目标梯度数据按照所述第一链路带宽传输至所述参数服务器。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京邮电大学,其通讯地址为:100876 北京市海淀区西土城路10号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。