恭喜苏州浪潮智能科技有限公司戴钰桀获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜苏州浪潮智能科技有限公司申请的专利分布式网络的数据传输方法及装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117196011B 。
龙图腾网通过国家知识产权局官网在2025-06-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202311118020.4,技术领域涉及:G06N3/098;该发明授权分布式网络的数据传输方法及装置是由戴钰桀;黄宬;王彦伟设计研发完成,并于2023-08-31向国家知识产权局提交的专利申请。
本分布式网络的数据传输方法及装置在说明书摘要公布了:本申请实施例提供了一种分布式网络的数据传输方法及装置,其中,该方法包括:在分布式神经网络模型的训练过程中,获取第一数据,第一数据为来自第一服务器的网络层的数据;至少对第一数据进行精度转换,得到第二数据,第一数据的精度为第一精度,第二数据的精度为第二精度,第一精度大于第二精度;至少将第二数据发送至第二网卡,第二网卡用于对来自第一网卡的第二数据进行精度转换,得到第三数据。该方法解决了现有技术中在训练一个数值精度很高的人工智能模型的过程中,由于各节点间传输的数据的数值精度过高,导致各计算节点间通讯速度缓慢的问题,从而提高了分布式神经网络模型的训练速度。
本发明授权分布式网络的数据传输方法及装置在权利要求书中公布了:1.一种分布式网络的数据传输方法,其特征在于,分布式网络用于训练分布式神经网络模型,所述分布式网络包括多个服务器,每个所述服务器上设置有网卡,所述方法应用于第一网卡,所述第一网卡设置于第一服务器,所述第一服务器为多个所述服务器中的任意一个,所述方法包括:在所述分布式神经网络模型的训练过程中,获取第一数据,所述第一数据为来自所述第一服务器的网络层的数据;至少对第一数据进行精度转换,得到第二数据,所述第一数据的精度为第一精度,所述第二数据的精度为第二精度,所述第一精度大于所述第二精度;至少将所述第二数据发送至第二网卡,所述第二网卡用于对来自所述第一网卡的所述第二数据进行精度转换,得到第三数据,所述第二网卡还用于将所述第三数据发送至第二服务器的网络层,所述第三数据的精度为所述第一精度,所述第二网卡设置于所述第二服务器,所述第二服务器为区别于所述第一服务器的所述服务器,且所述第一网卡与所述第二网卡通信连接;其中,至少对第一数据进行精度转换,得到第二数据,包括:获取目标速率,所述目标速率为所述分布式神经网络模型的损失函数的变化率;确定所述目标速率是否小于预设速率;在所述目标速率小于预设速率的情况下,至少对第一数据进行精度转换,得到第二数据;其中,获取目标速率,包括:分别获取两个连续的时间段内多个连续时间节点的所述损失函数;计算任意相邻的两个所述时间节点的所述损失函数的差值,得到两组变化量,一组所述变化量对应一个所述时间段;根据公式确定所述目标速率,其中,r为所述目标速率,Δfxm为前一个所述时间段对应的第m个所述变化量,Δfxn为后一个所述时间段对应的第n个所述变化量,i为前一个所述时间段对应的所述变化量的总数量,j为后一个所述时间段对应的所述变化量的总数量。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人苏州浪潮智能科技有限公司,其通讯地址为:215000 江苏省苏州市吴中经济开发区郭巷街道官浦路1号9幢;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。