龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：杰创智能科技股份有限公司
摘要：本发明提供一种分布式训练系统，属于人工智能技术领域，所述系统包括：将训练数据集切分为多个数据子集并分发至各计算节点的数据分布模块；将各分桶内各计算节点模型训练时产生的局部梯度融合成第一融合梯度的横向梯度融合模块；接收第一融合梯度，并将对应配置的全局梯度权重配发给每个相关的计算节点，以更新初始梯度权重的全局服务器。本发明在计算节点利用数据子集完成模型训练之后，通过横向梯度融合模块融合各计算节点产生的局部梯度，并将融合后的第一融合梯度统一发送给全局服务器，无需各计算节点各自将其产生的局部梯度发送给全局服务器，避免了频繁通信导致分布式系统通信开销大、训练效率降低的问题。
主权项：1.一种分布式训练系统，其特征在于，包括：数据分布模块、横向梯度融合模块和全局服务器；所述数据分布模块将训练数据集切分为多个数据子集，并将所述数据子集分发至分布式系统内不同分桶的计算节点；所述横向梯度融合模块将各分桶内各计算节点利用所述数据子集进行模型训练时产生的局部梯度，融合成第一融合梯度；所述全局服务器接收所述横向梯度融合模块上传的所述第一融合梯度，以根据所述第一融合梯度配置对应的全局梯度权重；将所述全局梯度权重配发给每个相关的计算节点，以更新每个所述计算节点的初始梯度权重。
全文数据：
权利要求：
百度查询： 杰创智能科技股份有限公司 分布式训练系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号