买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京火山引擎科技有限公司申请的专利智能体和大语言模型的评估方法、装置、介质及电子设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120508507B 。

龙图腾网通过国家知识产权局官网在2025-10-31发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510984372.0，技术领域涉及：G06F11/3668；该发明授权智能体和大语言模型的评估方法、装置、介质及电子设备是由陈曦;刘俣卓;王靖萱设计研发完成，并于2025-07-16向国家知识产权局提交的专利申请。

本智能体和大语言模型的评估方法、装置、介质及电子设备在说明书摘要公布了：一种智能体和大语言模型的评估方法、装置、介质及电子设备，涉及大模型技术领域和智能体技术领域，该评估方法包括：创建评估任务，评估任务用于从至少一个评估维度，对多个待评估对象在对话过程中的至少一个对话进行评估，多个待评估对象用于实现同一领域的对话任务；执行评估任务，以得到评估结果，评估结果用于对比多个待评估对象之间的对话能力；在第一界面显示评估结果，显示第二界面；响应于在第二界面中针对目标类型的评估器的配置操作，得到配置好的评估器，配置好的评估器用于从对应的评估维度对对话进行评估，便于用户分析不同配置的智能体的搭建效果，此外，基于配置操作可以进行自定义配置，从而得到不同评估维度的评估器。

本发明授权智能体和大语言模型的评估方法、装置、介质及电子设备在权利要求书中公布了：1.一种智能体和大语言模型的评估方法，其特征在于，所述评估方法包括： 创建评估任务，其中，所述评估任务用于从至少一个评估维度，对多个待评估对象在对话过程中的至少一个对话进行评估，所述多个待评估对象至少包括智能体，所述多个待评估对象用于实现同一领域的对话任务； 执行所述评估任务，以得到评估结果，其中，所述评估结果用于对比所述多个待评估对象之间的对话能力； 在第一界面显示所述评估结果； 所述评估方法还包括： 显示第二界面，其中，所述第二界面中展示有不同类型的评估器，所述不同类型的评估器包括基于提示词的评估器、基于代码的评估器、基于基础匹配规则的评估器、基于检索增强生成的评估器、基于人工评估的评估器和基于自然语言处理的评估器中的至少一者； 响应于在所述第二界面中针对目标类型的评估器的配置操作，得到配置好的评估器，其中，所述配置好的评估器用于从对应的评估维度对对话进行评估； 所述评估任务还用于指示所述多个待评估对象对选择的目标数据集中的输入问题进行推理以生成所述至少一个对话，所述创建评估任务，包括：显示第四界面，其中，所述第四界面用于创建评估任务；响应于在所述第四界面中针对数据集的选择操作，确定所述目标数据集；响应于在所述第四界面中针对候选待评估对象的选择操作，确定所述多个待评估对象；响应于在所述第四界面中针对已配置好的候选评估器和或候选评估器组的选择操作，确定评估器，其中，所述评估器用于从对应所述评估维度对所述至少一个对话进行评估；响应在所述第四界面中的创建操作，基于所述评估器、所述多个待评估对象和所述目标数据集，创建所述评估任务； 所述在第一界面显示所述评估结果，包括： 在第一界面的第一区域显示各所述待评估对象的第一评估结果，其中，所述第一评估结果用于表征对应所述待评估对象的各所述对话在各所述评估维度下的评估结果； 在所述第一界面的第二区域通过图表或表格显示各所述待评估对象在各所述评估维度的第二评估结果，其中，所述第二评估结果用于表征第一目标评估结果的融合结果，所述第一目标评估结果用于表征对应所述待评估对象的所有所述对话分别在同一所述评估维度下的评估结果； 在所述第一界面的第三区域显示各所述待评估对象的第三评估结果，其中，所述第三评估结果用于表征第二目标评估结果的融合结果，所述第二目标评估结果用于表征对应所述待评估对象的所有所述对话分别在所有所述评估维度的下的评估结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京火山引擎科技有限公司，其通讯地址为：100190 北京市海淀区紫金数码园4号楼13层1309；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。