买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜深圳市大数据研究院申请的专利一种多模态大语言模型的评估方法以及装置获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN117951275B 。

龙图腾网通过国家知识产权局官网在2025-04-01发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202410123712.6，技术领域涉及：G06F16/3329；该发明授权一种多模态大语言模型的评估方法以及装置是由葛文韬;陈桂铭;陈舒年;陈俊颖;万翔;王本友设计研发完成，并于2024-01-29向国家知识产权局提交的专利申请。

本一种多模态大语言模型的评估方法以及装置在说明书摘要公布了：本发明公开了多模态大语言模型的评估方法以及装置，其方法实现包括：采集待处理图像数据，并基于所述待处理图像数据，构建评估集，所述评估集中包括多个评估数据；基于所述评估数据以及目标大语言模型，构建评估准则；将所述评估数据输入至待评估大语言模型中，以得到回答信息；将所述评估准则以及所述回答信息输入至评估模型中进行评估处理，以得到所述待评估大语言模型的评估结果。本申请实施例中，通过构造多模态大语言模型评估集，并使用评估模型作为评估者评估多模态大语言模型能力。可以适用于构造模拟现实生活的复杂场景、复杂指令的开放性任务评估集以及评估模型在这类任务下的回答。可以有效解决评估多模态大语言模型的方法单一性问题。

本发明授权一种多模态大语言模型的评估方法以及装置在权利要求书中公布了：1.一种多模态大语言模型的评估方法，其特征在于，所述方法，包括：采集待处理图像数据，并基于所述待处理图像数据，构建评估集，所述评估集中包括多个评估数据；其中，所述采集待处理图像数据，包括：划分待评估多模态大语言模型的能力指标，以模拟人类认知的层级，将所述待评估多模态大语言模型的能力划分为由浅入深的6个层次；基于所述能力指标，从多数据源采集多领域最新图像数据，作为所述待处理图像数据；所述基于所述待处理图像数据，构建评估集，包括：基于所述待处理图像数据，按照预设指令生成策略，通过预设评估集构建模型生成指令信息；对所述指令信息以及所述待处理图像数据进行标准化处理，以得到所述评估数据；基于所述评估数据，生成所述评估集；其中，所述评估数据以图片-指令对形式存在，一个图片对应一个指令；基于所述评估数据以及目标多模态大语言模型，构建评估准则，包括：通过人工标注的方式，对所述评估数据进行标注，以构建评估准则生成指导；构建评估准则生成提示词；基于所述评估准则生成指导、所述评估数据以及所述评估准则生成提示词，通过所述目标多模态大语言模型生成所述评估准则；对于有明确答案的问题，通过所述评估数据、所述评估准则生成指导以及所述评估准则生成提示词输出的评估准则，得到具体的参考答案，而对于需要主观描述或产生模糊答案的指令的情况下，通过所述评估数据、所述评估准则生成指导以及所述评估准则生成提示词输出的评估准则，提供制定回答的关键信息；将所述评估数据输入至待评估多模态大语言模型中，以得到回答信息；将所述评估准则以及所述回答信息输入至评估模型中进行评估处理，以得到所述待评估多模态大语言模型的评估结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人深圳市大数据研究院，其通讯地址为：518000 广东省深圳市龙岗区龙城街道龙翔大道2001号道远楼225室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。