龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：中电数据产业集团有限公司;中电数创(北京)科技有限公司
摘要：本公开实施例涉及一种模型评估方法、装置、设备及介质，该方法包括：确定候选测试集组；其中，候选测试集组与测试领域一一对应，候选测试集组包括不同难度等级的多个候选测试集；基于多个候选测试集对待测模型进行测试，得到测试结果；将与待测模型难度相匹配的测试结果确定为目标测试结果，将目标测试结果对应的候选测试集作为目标测试集；根据目标测试集对应的难度等级，确定待测模型在测试领域下与对应的难度等级相匹配的评估结果。本公开实施例，避免了模型对单一题目的回答不确定性对评估结果的影响，从领域的针对性以及评估的稳定性等多方面提高了最终确定的评估结果的准确性。
主权项：1.一种模型评估方法，其特征在于，包括：确定候选测试集组；其中，所述候选测试集组与测试领域一一对应，所述候选测试集组包括不同难度等级的多个候选测试集；基于所述多个候选测试集对待测模型进行测试，得到测试结果；将与所述待测模型难度相匹配的所述测试结果确定为目标测试结果，将所述目标测试结果对应的所述候选测试集作为目标测试集；根据所述目标测试集对应的所述难度等级，确定所述待测模型在所述测试领域下与对应的所述难度等级相匹配的评估结果。
全文数据：
权利要求：
百度查询： 中电数据产业集团有限公司 中电数创(北京)科技有限公司 模型评估方法、装置、设备及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号