买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:腾讯科技(深圳)有限公司
摘要:本申请涉及一种模型幻觉的检测方法、装置、设备、存储介质和程序产品。方法包括:获取视觉语言模型对视觉文本对的跨模态注意力,将跨模态注意力划分为有幻觉时的样本注意力或无幻觉时的样本注意力;将样本注意力输入第一阶段幻觉检测器得到第一幻觉检测结果,根据第一幻觉检测结果与样本注意力的注意力类别更新第一阶段幻觉检测器;将注意力类别为有幻觉时的样本注意力继续输入第二阶段幻觉检测器得到第二幻觉检测结果,根据第二幻觉检测结果与样本注意力的样本类别,更新第二阶段幻觉检测器;将第一阶段幻觉检测器与第二阶段幻觉检测器进行级联,得到幻觉检测模型,幻觉检测模型用于对视觉语言模型在进行模型推理时是否发生幻觉进行检测。
主权项:1.一种模型幻觉的检测方法,其特征在于,所述方法包括:获取视觉语言模型对视觉文本对进行模型推理时对所述视觉文本对的视觉令牌的跨模态注意力,根据所述视觉语言模型对所述视觉文本对的推理结果,将所述跨模态注意力划分为有幻觉时的样本注意力或无幻觉时的样本注意力;将所述样本注意力输入第一阶段幻觉检测器,获得所述第一阶段幻觉检测器对所述样本注意力的第一幻觉检测结果,根据所述第一幻觉检测结果与所述样本注意力的注意力类别,更新所述第一阶段幻觉检测器;从输入到所述第一阶段幻觉检测器的样本注意力中,筛选出注意力类别为有幻觉时的样本注意力,继续输入第二阶段幻觉检测器,获得所述第二阶段幻觉检测器对所述样本注意力的第二幻觉检测结果,根据所述第二幻觉检测结果与所述样本注意力的样本类别,更新所述第二阶段幻觉检测器;将训练完成后得到的第一阶段幻觉检测器与第二阶段幻觉检测器进行级联,得到幻觉检测模型,所述幻觉检测模型用于对所述视觉语言模型在进行模型推理时是否发生幻觉进行检测。
全文数据:
权利要求:
百度查询: 腾讯科技(深圳)有限公司 模型幻觉的检测方法、装置、设备、存储介质和程序产品
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。