买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:支付宝(杭州)信息技术有限公司
摘要:本申请一个或多个实施例提供一种模型性能评测方法和装置,所述方法包括:获取包含多个模型的模型集合,以及包含至少一条评测样本的样本集合;将样本集合中的评测样本依次确定为目标评测样本,并获取在针对模型集合进行归并排序的过程中产生的第一类模型对;将第一类模型对发布至标注方,以由标注方根据将目标评测样本分别输入第一类模型对中的两个模型得到的模型输出,对第一类模型对进行标注,得到用于指示第一类模型对中的两个模型在目标评测样本上的模型性能的比较结果的标注结果;获取第一类模型对在目标评测样本上的标注结果,并根据标注结果继续完成针对模型集合的归并排序,得到模型集合中的模型在目标评测样本上的模型性能的排序结果。
主权项:1.一种模型性能评测方法,所述方法包括:获取包含待评测的多个模型的模型集合,以及包含至少一条评测样本的样本集合;将所述样本集合中的评测样本依次确定为目标评测样本,并获取在针对所述模型集合进行归并排序的过程中产生的待比较的第一类模型对;将所述第一类模型对发布至标注方,以由标注方根据将所述目标评测样本分别输入所述第一类模型对中的两个模型得到的模型输出,对所述第一类模型对进行标注,得到所述第一类模型对在所述目标评测样本上的标注结果;其中,所述标注结果用于指示所述第一类模型对中的两个模型在所述目标评测样本上的模型性能的比较结果;获取所述第一类模型对在所述目标评测样本上的标注结果,并根据所述标注结果继续完成针对所述模型集合的归并排序,得到所述模型集合中的模型在所述目标评测样本上的模型性能的排序结果。
全文数据:
权利要求:
百度查询: 支付宝(杭州)信息技术有限公司 模型性能评测方法和装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。