龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：北京工业大学
摘要：本发明公开一种基于可供性‑场景知识提示的人‑物交互检测方法及装置，能够提高在现实场景中的识别能力，预测更准确的HOI检测结果。方法包括：1构建可供性‑场景知识图谱ASKG；2搭建人‑物交互检测模型：在训练阶段，输入为一张RGB图像，第一阶段检测人和物体，识别场景类别和编码原始特征；第二阶段，先验知识嵌入模块编码特定的知识嵌入，实例域适应性融合模块编码实例特征与知识嵌入得到实例感知特征，场景域适应性融合模块编码场景特征与知识嵌入得到场景感知特征，最后经过HOI识别模块输出结果；3执行图像的人‑物交互检测。
主权项：1.基于可供性-场景知识提示的人-物交互检测方法，其特征在于：该方法包括以下步骤：1构建可供性-场景知识图谱ASKG：首先从数据集注释中提取每个图像对应的对象，以及相关的动作，图像及其注释来自人-物交互检测HOI数据集HICO-DET和V-COCO，注释由三元组human，action，object组成；同时，对于每张图像，使用场景分类网络来识别场景类别和场景属性；构建由三组三元组组成的情景知识图谱，分别为scene，has，object、object，has，affordance和scene，has，property的形式，从而将不同的物体、场景以及它们之间的关系联系起来；最后的ASKG是通过过滤相同的三元组得到的，可视性-场景知识图谱通过对象和场景进行检索，生成与图像相关的子图，提取特定知识；2搭建人-物交互检测模型：在训练阶段，输入为一张RGB图像，第一阶段检测人和物体，识别场景类别和编码原始特征；第二阶段，先验知识嵌入模块编码特定的知识嵌入，实例域适应性融合模块编码实例特征与知识嵌入得到实例感知特征，场景域适应性融合模块编码场景特征与知识嵌入得到场景感知特征，最后经过HOI识别模块输出结果；3执行图像的人-物交互检测。
全文数据：
权利要求：
百度查询： 北京工业大学 基于可供性-场景知识提示的人-物交互检测方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号