中国科学技术大学苏州高等研究院;中国科学技术大学娄文启获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国科学技术大学苏州高等研究院;中国科学技术大学申请的专利基于融合注意力与量化操作的数据处理方法及加速器获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN121351891B 。
龙图腾网通过国家知识产权局官网在2026-04-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511927944.8,技术领域涉及:G06N3/0455;该发明授权基于融合注意力与量化操作的数据处理方法及加速器是由娄文启;王超;覃云集;陈子齐;宫磊;王腾;周学海设计研发完成,并于2025-12-19向国家知识产权局提交的专利申请。
本基于融合注意力与量化操作的数据处理方法及加速器在说明书摘要公布了:本发明提供了一种基于融合注意力与量化操作的数据处理方法及加速器,应用于计算机技术领域,包括:基于加速器中异构多核架构的多个计算核心,根据目标模型对多个输入数据执行注意力处理操作,得到输出结果;归一化核心用于对输入数据进行归一化处理,得到归一化后的输入数据;线性层核心用于对归一化后的输入数据进行线性计算,得到目标输入数据;融合注意力核心用于基于移位指数近似单元的移位指数近似算法对目标输入数据执行指数计算操作,得到指数计算结果,多个关联指数计算结果各自对应的处理时段存在部分时段重合,多个关联指数计算结果为相同的融合注意力核心输出的多个指数计算结果,处理时段表征输入数据转换为指数计算结果的时长。
本发明授权基于融合注意力与量化操作的数据处理方法及加速器在权利要求书中公布了:1.一种基于融合注意力与量化操作的数据处理方法,其特征在于,包括: 基于加速器中异构多核架构的多个计算核心,根据目标模型对多个输入数据执行注意力处理操作,得到输出结果; 其中,所述计算核心包括归一化核心、线性层核心和融合注意力核心,所述归一化核心用于对所述输入数据进行归一化处理,得到归一化后的输入数据;所述线性层核心用于对所述归一化后的输入数据进行线性计算,得到目标输入数据;所述融合注意力核心用于基于移位指数近似单元的移位指数近似算法对所述目标输入数据执行指数计算操作,所述融合注意力核心对归一化后的输入数据进行拆分处理得到多个数据分片,所述融合注意力核心按照指定顺序分别在不同的指定时间段并行处理不同的数据分片,得到指数计算结果,所述输出结果是基于所述指数计算结果确定的,所述移位指数近似单元是基于量化因子对初始模型的指数计算单元更新得到; 基于移位指数近似单元的移位指数近似算法对所述目标输入数据执行指数计算操作,得到指数计算结果,包括: 利用所述融合注意力核心执行如下操作: 根据输入量化因子的量化值,确定输入整型值的位移值; 根据所述位移值和指定整数,对所述输入整型值进行移位,得到输出整型值; 根据所述指定整数和所述输入量化因子的量化值之和,确定输出量化因子; 分别对所述输出整型值和所述输出量化因子进行对数转换,得到所述指数计算结果。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国科学技术大学苏州高等研究院;中国科学技术大学,其通讯地址为:215123 江苏省苏州市工业园区独墅湖科教创新区仁爱路188号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励