首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

用于视频场景图生成的时间过渡正则化方法和系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:广东工业大学

摘要:本发明涉及计算机图像处理和机器学习领域,更具体,用于视频场景图生成的时间过渡正则化方法和系统,本发明创建以图像的类别和上下文为条件的转换矩阵,以捕获基于每个类别的统计相关性以及基于每个上下文图像的细粒度相关性,并以显式方式将这些相关性合并到当前的VidSGG算法中,以提供更强、更细粒度的正则化,本发明着重解决视频中时间相关性的建模和利用,以提升人工智能对视频内容语义分析性能,在高风险领域,如自动驾驶和医疗诊断中,本发明可以提供更准确的场景图生成,有助于提高决策的可信度。

主权项:1.用于视频场景图生成的时间过渡正则化方法,其特征在于,包括以下步骤:S1:获取视频;S2:创建基于所述视频中特定图像和特定类别的的时间转换矩阵,创建所述特定类别的时间转换矩阵,包括以下步骤:S2.1:计算特定类别的上下文嵌入: 式中,为所述视频中第帧中的第k个主客体对应的上下文嵌入,为第一全连接层,和为所述视频中第帧中第k个主客体对应的主体类别和客体类别,主客体包括主体和客体,主体为实施者,客体为被实施的对象,特定类别为特定的主客体类型;S2.2:根据特定类别的上下文嵌入创建特定类别的时间转换矩阵: 式中,为所述视频中第帧中的第k个主客体的特定类别的时间转换矩阵,为全连接层实现函数,为视频中第帧中的第k个主客体对应的上下文嵌入的关系特征;S3:使用VidSGG算法预测视频中帧的主客体关系;S4:对特定图像和特定类别的时间转换矩阵和视频中帧的主客体关系进行正则化,包括:所述视频中第帧中的第k个主客体的关系分别与特定图像的时间转换矩阵和特定类别的时间转换矩阵进行正则化,包括: 式中,为所述视频中第帧中的第k个主客体的关系,为所述视频中第帧中的第k个主客体的关系,为正则化的损失函数,为所述视频中第帧中所有的主客体,T为所述视频的所有帧数。

全文数据:

权利要求:

百度查询: 广东工业大学 用于视频场景图生成的时间过渡正则化方法和系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。