龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：松立控股集团股份有限公司
摘要：本发明属于智慧城市安全监控技术领域，涉及一种基于多模态融合的全景安全监控城市暴力事件检测的方法，先基于ERP和CMP投影中存在的问题以及二者存在的优势，通过将二者的优势进行整合，从而充分发挥全景视频监控的优势，音视特征的引入能够保证音视视频中蕴含的信息充分融合，基于类别激活映射的暴力事件能够将相应暴力犯罪的区域激活，从而保证既能查找到相应的暴力区域，也能预测相应的暴力类型，通过声音和视觉的检测，从而判定当前监控范围内发生事件，从而及时发出警报，保证暴力检测的实时性，从而增大全景视频监控范围。
主权项：1.一种基于多模态融合的全景安全监控城市暴力事件检测方法，其特征在于，具体包括如下步骤：S1、构建城市全景监控视频数据集：收集全景摄像头拍摄的全景视频构建基于多模态融合的全景安全监控城市暴力事件检测数据集；S2、全景视频投影：采用ERP和CMP相结合的方式对全景视频投影，将全景视频转化为平面；S3、音视特征提取：采用特征提取网络分别提取视频特征和音频特征；S4、音视特征融合：基于高层语义特征投影的关系建模网络，先将视频特征和音频特征映射到高维度空间，然后计算二者之间的语义一致性，得到融合后的音视特征；S5、基于类别激活映射的暴力事件定位：将融合后的音频特征通过类别激活映射生成暴力事件的定位，并采用将极值区域抑制的方法对暴力事件充分挖掘；S6、基于CMP填充的局部区域缝合：将CMP投影后的上下两个面以旋转缝合的方式贴到CMP周围进行填充，并采用切割的方式将多余填充的内容切除，与ERP投影保持大小一致；S7、基于类别激活映射区域的中心点确定：基于步骤S6的结果获得暴力区域的相应激活区域的像素点坐标，通过坐标的范围确定区域位置信息，得到暴力区域的中心点坐标；S8、基于ERP和CMP逆投影的暴力区域联合：将ERP和CMP中暴力事件的定位融合获得全局和局部暴力事件定位的结合，从而检测出暴力区域；S9、基于暴力检测区域的监控区域推荐：将检测出的暴力区域通过电脑显示屏显示，并警报当前出现暴力行为。
全文数据：
权利要求：
百度查询： 松立控股集团股份有限公司 基于多模态融合的全景安全监控城市暴力事件检测方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号