买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉延安大学;子长市蔬菜开发中心申请的专利一种基于二部图匹配的视觉问答方法及设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120198761B 。

龙图腾网通过国家知识产权局官网在2025-07-18发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510676797.5，技术领域涉及：G06V10/80；该发明授权一种基于二部图匹配的视觉问答方法及设备是由加东东;白宗文;张智江;高培棋;朱瑞;张阳;窦改玲;薛小东设计研发完成，并于2025-05-26向国家知识产权局提交的专利申请。

本一种基于二部图匹配的视觉问答方法及设备在说明书摘要公布了：本申请公开了一种基于二部图匹配的视觉问答方法及设备，涉及图像处理技术领域，该方法包括：构建问题特征向量、关键字图和场景图；利用图注意力网络确定关键字图节点特征和场景图节点特征；基于关键字图节点特征和场景图节点特征，利用匈牙利算法确定场景图主效应节点特征和场景图负作用节点特征；利用多模态融合策略，将问题特征向量分别与场景图节点特征、场景图主效应节点特征和场景图负作用节点特征进行融合，得到多个联合特征；将多个问题特征向量输入到分类器中，得到问题的预测概率分布。本申请通过确定场景图主效应节点特征和场景图负作用节点特征，提高视觉问答模型的鲁棒性。

本发明授权一种基于二部图匹配的视觉问答方法及设备在权利要求书中公布了：1.一种基于二部图匹配的视觉问答方法，其特征在于，包括： 获取问题和图片； 基于所述问题构建关键字图，包括： 删除所述问题的文本中的标点符号，得到去标问题文本； 将所述去标问题文本输入到预训练的KeyBERT模型中，根据余弦相似度提取k个关键词； 利用Glove词向量模型确定每个关键词的词向量； 确定k个关键词的词向量为关键词向量； 基于所述关键词向量构建关键字图；所述关键字图为无向全连接图； 利用图注意力网络编码所述关键字图中节点间的交互信息，得到关键字图节点特征； 基于所述图片构建场景图，包括： 利用属性检测器识别所述图片中物体的属性； 利用关系解码器确定所述图片中物体对之间的交互关系； 以物体为节点，以物体对之间的交互关系为边，构建场景图； 利用图注意力网络编码所述场景图中节点间的交互信息，得到场景图节点特征； 基于所述关键字图节点特征和所述场景图节点特征，利用匈牙利算法确定场景图主效应节点特征和场景图负作用节点特征； 基于所述问题构建问题特征向量，包括： 根据所述问题的文本中的标点符号和空格，将所述问题的文本划分为单词数组； 利用Glove词向量模型，确定单词数组中每个单词的词向量； 将单词数组中每个单词的词向量分别输入TransformerEncoder网络中，确定所有单词对应的TransformerEncoder网络输出量的平均值为问题特征向量； 利用多模态融合策略，将所述问题特征向量分别与所述场景图节点特征、所述场景图主效应节点特征和所述场景图负作用节点特征进行融合，得到多个联合特征； 将多个所述联合特征输入到分类器中，得到所述问题的预测概率分布。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人延安大学;子长市蔬菜开发中心，其通讯地址为：716000 陕西省延安市新区公学北路1号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。