恭喜之江实验室张音捷获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜之江实验室申请的专利一种大模型幻觉测评数据生成方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119622001B 。
龙图腾网通过国家知识产权局官网在2025-04-25发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510156421.1,技术领域涉及:G06F16/36;该发明授权一种大模型幻觉测评数据生成方法是由张音捷;王之宇;白冰;范逸飞;查超;牟兰;石赛男设计研发完成,并于2025-02-12向国家知识产权局提交的专利申请。
本一种大模型幻觉测评数据生成方法在说明书摘要公布了:本说明书公开了一种大模型幻觉测评数据生成方法。在此方法中,可以通过实体识别和关系抽取技术,从预先构建的针对不同领域范围的知识库中提取出结构化的知识图谱,进而可以根据知识图谱中各节点之间的连接关系,结合大语言模型生成幻觉测评数据,以对待测试模型针对非直观或模糊信息时的表现进行测评。同时,以原始实体在知识库中对应的文本数据为依据,提供详尽的参考答案,形成文本对。最终得到一套全面的幻觉测评数据集,用以评估待测试模型的理解力和输出信息的准确性。
本发明授权一种大模型幻觉测评数据生成方法在权利要求书中公布了:1.一种大模型幻觉测评数据生成方法,其特征在于,包括:在预先构建的知识图谱中抽取得到原始实体;所述知识图谱是根据从预先构建的知识库所包含的文本数据中抽取出的实体关系得到的;在所述知识图谱中,节点用于表征所述文本数据中包含的实体,边用于表征两个实体之间语义联系;根据所述原始实体在所述知识图谱中对应的节点和其他节点之间的连接关系,从所述知识图谱中抽取得到实体组合,所述实体组合中包含所述原始实体和所述原始实体的至少一个关联实体;将所述实体组合输入到预设的大语言模型中,得到测评问题,并根据所述实体组合从所述文本数据中得到参考文本数据;其中,所述测评问题为幻觉测评数据中包含的用于对所述大语言模型进行测评的问题文本数据,所述参考文本数据为所述测评问题对应的用于提供参考答案的文本数据;根据所述测评问题与所述参考文本数据的文本对,得到幻觉测评数据。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人之江实验室,其通讯地址为:311121 浙江省杭州市余杭区中泰街道科创大道之江实验室;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。