首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

视觉问答模型的训练方法、视觉问答方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:中国科学院自动化研究所

摘要:本公开关于一种视觉问答模型的训练方法、视觉问答方法及系统,所述训练方法包括:获取训练样本集和样本标注信息;将每个训练样本的样本图像和样本提问数据输入到所述视觉问答模型,得到针对所述样本提问数据的预测答案和预测解释数据;基于所述预测答案、所述预测解释数据以及所述样本标注信息,对所述视觉问答模型进行训练。根据本公开的视觉问答模型的训练方法、视觉问答方法及系统可以解决在给出预测推理结果时无法给出推理过程的问题,可以在给出预测推理结果时给出预测解释数据,使用户在获取预测答案的同时还可以了解模型的推理过程,便于验证推理过程的合理性和准确性,这样的多模态解释数据更便于阅读和理解,对用户友好。

主权项:1.一种视觉问答模型的训练方法,其特征在于,所述训练方法包括:获取训练样本集和样本标注信息,其中,所述训练样本集中的每个训练样本包括样本图像以及与所述样本图像相关的样本提问数据,所述样本标注信息包括对所述样本提问数据的答案以及得到所述答案的解释数据;将每个训练样本的样本图像和样本提问数据输入到所述视觉问答模型,得到针对所述样本提问数据的预测答案和预测解释数据,其中,所述预测解释数据表征得到所述预测答案的预测过程,所述预测解释数据包含与所述样本图像相关的视觉信息以及与所述样本提问数据相关的文本信息;基于所述预测答案、所述预测解释数据以及所述样本标注信息,对所述视觉问答模型进行训练。

全文数据:

权利要求:

百度查询: 中国科学院自动化研究所 视觉问答模型的训练方法、视觉问答方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

相关技术
相关技术
相关技术