北京百度网讯科技有限公司武惠韬获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京百度网讯科技有限公司申请的专利模型测评方法、装置、电子设备及存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN117829294B 。
龙图腾网通过国家知识产权局官网在2025-05-30发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202311767414.2,技术领域涉及:G06N5/04;该发明授权模型测评方法、装置、电子设备及存储介质是由武惠韬;张思琦;朱东纬设计研发完成,并于2023-12-20向国家知识产权局提交的专利申请。
本模型测评方法、装置、电子设备及存储介质在说明书摘要公布了:本公开提供了模型测评方法、装置、电子设备及存储介质。本公开涉及计算机技术领域,尤其涉及人工智能、深度学习、数据处理和大模型等技术领域。具体实现方案为:基于多种测评任务确定测评集,测评集包括每种测评任务对应的测试文档以及测试文档对应的测试题目和标准答案;基于测评集中每种测评任务对应的测试文档,对待测评模型进行测试,得到待测评模型输出的测试结果;基于每种测评任务对应的智能答案与标准答案之间的差异,确定每种测评任务对应的目标评分;基于每种测评任务对应的目标评分,确定待测评模型的评估结果。根据本公开的方案,能对模型的评估与训练进行量化分析,提高模型测评的准确度。
本发明授权模型测评方法、装置、电子设备及存储介质在权利要求书中公布了:1.一种模型测评方法,包括:基于多种测评任务确定测评集,所述测评集包括每种测评任务对应的测试文档以及所述测试文档对应的测试题目和标准答案;基于所述测评集中每种测评任务对应的所述测试文档,对待测评模型进行测试,得到所述待测评模型输出的测试结果,所述测试结果包括基于所述测试文档包括的所述测试题目而输出的智能答案;基于每种测评任务对应的所述智能答案与所述标准答案之间的差异,确定每种测评任务对应的目标评分;其中,每种测评任务至少对应有来自两个目标对象的两个子评估结果,且所述目标评分基于每种测评任务对应的至少两个子评估结果而确定;基于每种测评任务对应的所述目标评分,确定所述待测评模型的评估结果;所述确定每种测评任务对应的目标评分,包括:基于每种测评任务包括的所述测试题目对应的至少两个子评估结果,确定每种测评任务包括的所述测试文档对应的至少两个子评估结果;基于每种测评任务包括的所述测试文档对应的至少两个子评估结果,确定每种测评任务对应的至少两个子评估结果;基于每种测评任务对应的至少两个子评估结果,确定每种测评任务对应的所述目标评分;所述子评估结果包括具体评分值,所述基于每种测评任务对应的至少两个子评估结果,确定每种测评任务对应的所述目标评分,包括:基于每种测评任务对应的至少两个子评估结果包括的具体评分值是否处于同一评分档位,确定每种测评任务对应的所述目标评分。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京百度网讯科技有限公司,其通讯地址为:100085 北京市海淀区上地十街10号百度大厦2层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。