苏州元脑智能科技有限公司孙红岩获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉苏州元脑智能科技有限公司申请的专利预训练语言模型的部署方法、电子设备和可读存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120725074B 。
龙图腾网通过国家知识产权局官网在2025-10-31发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511152269.6,技术领域涉及:G06N3/0495;该发明授权预训练语言模型的部署方法、电子设备和可读存储介质是由孙红岩设计研发完成,并于2025-08-18向国家知识产权局提交的专利申请。
本预训练语言模型的部署方法、电子设备和可读存储介质在说明书摘要公布了:本申请公开了一种预训练语言模型的部署方法、电子设备和可读存储介质,涉及预训练语言模型技术领域。方法包括:确定待量化的初始预训练语言模型的初始权重矩阵和海森矩阵;初始权重矩阵用于表征初始预训练语言模型的模型信息拓扑,海森矩阵用于表征初始权重矩阵中的敏感权重;基于子采样随机哈达玛变换算法生成稀疏变换矩阵;通过稀疏变换矩阵对初始权重矩阵进行非相干处理,得到处理后的优化权重矩阵;基于优化权重矩阵和海森矩阵执行自适应舍入操作,得到量化后的量化权重矩阵;根据量化权重矩阵确定量化后的目标语言模型,并发送至待部署设备。本申请解决了部署预训练语言模型的效率低的问题,达到提高部署预训练语言模型的效率的技术效果。
本发明授权预训练语言模型的部署方法、电子设备和可读存储介质在权利要求书中公布了:1.一种预训练语言模型的部署方法,其特征在于,所述方法包括: 确定待量化的初始预训练语言模型的初始权重矩阵和海森矩阵;其中,所述初始权重矩阵用于表征所述预训练语言模型的模型信息拓扑,所述海森矩阵用于表征所述初始权重矩阵中的低敏感权重; 基于子采样随机哈达玛变换算法生成稀疏变换矩阵; 通过所述稀疏变换矩阵对所述初始权重矩阵进行非相干处理,得到处理后的优化权重矩阵; 基于所述优化权重矩阵和所述海森矩阵执行自适应舍入操作,得到量化后的量化权重矩阵; 根据所述量化权重矩阵确定量化后的目标语言模型,并将所述目标语言模型发送至待部署设备,以在所述待部署设备上部署所述目标语言模型。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人苏州元脑智能科技有限公司,其通讯地址为:215000 江苏省苏州市吴中经济开发区综保区经一路1号8幢;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励