杰创智能科技股份有限公司庄佩刁获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉杰创智能科技股份有限公司申请的专利分布式训练系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN118585820B 。
龙图腾网通过国家知识产权局官网在2025-07-18发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202410826688.2,技术领域涉及:G06F18/214;该发明授权分布式训练系统是由庄佩刁;陈亮;李林杰;冼鸿东设计研发完成,并于2024-06-25向国家知识产权局提交的专利申请。
本分布式训练系统在说明书摘要公布了:本发明提供一种分布式训练系统,属于人工智能技术领域,所述系统包括:将训练数据集切分为多个数据子集并分发至各计算节点的数据分布模块;将各分桶内各计算节点模型训练时产生的局部梯度融合成第一融合梯度的横向梯度融合模块;接收第一融合梯度,并将对应配置的全局梯度权重配发给每个相关的计算节点,以更新初始梯度权重的全局服务器。本发明在计算节点利用数据子集完成模型训练之后,通过横向梯度融合模块融合各计算节点产生的局部梯度,并将融合后的第一融合梯度统一发送给全局服务器,无需各计算节点各自将其产生的局部梯度发送给全局服务器,避免了频繁通信导致分布式系统通信开销大、训练效率降低的问题。
本发明授权分布式训练系统在权利要求书中公布了:1.一种分布式训练系统,其特征在于,包括:数据分布模块、横向梯度融合模块和全局服务器; 所述数据分布模块将训练数据集切分为多个数据子集,并将所述数据子集分发至分布式系统内不同分桶的计算节点; 所述横向梯度融合模块将各分桶内各计算节点利用所述数据子集进行模型训练时产生的局部梯度,融合成第一融合梯度; 所述全局服务器接收所述横向梯度融合模块上传的所述第一融合梯度,以根据所述第一融合梯度配置对应的全局梯度权重;将所述全局梯度权重配发给每个相关的计算节点,以更新每个所述计算节点的初始梯度权重; 所述横向梯度融合模块将各分桶内各计算节点利用所述数据子集进行模型训练时产生的局部梯度融合成第一融合梯度,包括: 将任一所述分桶内所有计算节点产生的局部梯度融合成所述分桶的第二融合梯度;将所述分布式系统内各分桶的所述第二融合梯度融合为所述第一融合梯度; 所述将任一所述分桶内所有计算节点产生的局部梯度融合成第二融合梯度,包括: 将所述分桶内的所有计算节点划分为若干个第一子层;对任一所述第一子层内的所有计算节点产生的局部梯度进行层内融合,得到所述第一子层的层内融合梯度;将所述分桶内的所有所述第一子层的所述层内融合梯度融合成所述分桶的第二融合梯度。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人杰创智能科技股份有限公司,其通讯地址为:510535 广东省广州市黄埔区瑞祥路88号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。