龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
摘要：本申请公开了一种流式视频理解与关键信息结构化提取的方法及系统，所述方法包括：采集视频数据并确定应用类型，根据应用类型按照预设每帧序列时长对视频数据分解成视频帧序列；采用多特征综合决策算法识别视频帧序列中关键帧；采用预设语音模型识别视频帧序列中语音信息并转化为文本，采用自然语言处理技术获取关键文本信息；按照预设映射方式对关键帧与关键文本信息进行映射关联；将关键帧的特征向量与关联的关键文本信息的特征向量进行融合，结合深度学习模型进行联合推理，获取视频的联合推理结果；根据视频的联合推理结果，提取视频中关键信息并以结构化的形式进行存储。本申请能够提高用户对于视频内容理解的效率和准确性。
主权项：1.一种流式视频理解与关键信息结构化提取的方法，其特征在于，包括：采集视频数据并确定其应用类型；根据确定的应用类型自第一数据库中获取确定应用类型的预设每帧序列时长，按照获取的确定应用类型的预设每帧序列时长对视频数据分解成视频帧序列；根据确定的应用类型自第二数据库中获取确定应用类型的预设特征权重，采用具有确定应用类型的预设特征权重的多特征综合决策算法识别视频帧序列中关键帧；所述多特征决策方式包括：运动检测决策方式、颜色直方图对比决策方式及图像熵分析决策方式；根据确定的应用类型自第三数据库中获取确定应用类型的预设语音识别模型，采用确定应用类型的预设语音模型识别视频帧序列中语音信息并将识别语音转化为文本，采用自然语言处理技术获取关键文本信息；根据确定的应用类型自第四数据库中获取确定应用类型的预设映射关联方式，按照获取的确定应用类型的预设映射方式对视频帧序列识别到的关键帧与关键文本信息进行映射关联；将关键帧的特征向量与关联的关键文本信息的特征向量通过跨模态学习网络模型进行特征融合，结合深度学习模型进行联合推理，获取视频的联合推理结果；所述预设映射关联方式包括：基于时间戳的映射关联、基于场景描述的映射关联及基于事件描述的映射关联；根据视频的联合推理结果，提取视频中关键信息并以结构化的形式进行存储。
全文数据：
权利要求：
百度查询： 南京魔数团信息科技有限公司 一种流式视频理解与关键信息结构化提取的方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号