买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜济南致业电子有限公司申请的专利一种音视频多模态识别方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119723428B 。

龙图腾网通过国家知识产权局官网在2025-06-13发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510230366.6，技术领域涉及：G06V20/40；该发明授权一种音视频多模态识别方法及系统是由曹永军;曹曙晴;陈家宝;周鹏设计研发完成，并于2025-02-28向国家知识产权局提交的专利申请。

本一种音视频多模态识别方法及系统在说明书摘要公布了：本发明涉及数据处理技术领域，具体涉及一种音视频多模态识别方法及系统，包括：感知层、识别层、指示层；采集设备运行采集的视频数据实时向感知层中上传，感知层同步感知采集设备姿态，基于采集的视频及采集设备姿态锁定追踪目标，同步提取追踪目标特征参数，识别层进一步接收感知层中提取的追踪目标特征参数，同步控制感知层再次运行锁定追踪目标，本发明以采集设备为主体对采集设备采集的视频数据进行处理，于视频数据中获取追踪目标，并以指定的反复锁定逻辑最终确定明确的追踪目标，进一步以帧级图像处理及分析技术，对追踪目标进行持续的追踪，从而以此提供系统端用户指示，在追踪目标的追踪场景中，为系统端用户带来辅助追踪效果。

本发明授权一种音视频多模态识别方法及系统在权利要求书中公布了：1.一种音视频多模态识别系统，其特征在于，包括：感知层、识别层、指示层； 采集设备运行采集的视频数据实时向感知层中上传，感知层同步感知采集设备姿态，基于采集的视频及采集设备姿态锁定追踪目标，同步提取追踪目标特征参数，识别层进一步接收感知层中提取的追踪目标特征参数，同步控制感知层再次运行锁定追踪目标，结合再次锁定的追踪目标及追踪目标特征参数连续识别追踪目标，指示层实时接收识别层运行的追踪目标的识别结果，基于识别结果对追踪目标进行连续的指示； 所述识别层包括接收模块、控制模块及识别模块，接收模块用于接收感知层运行提取的追踪目标特征参数，控制模块用于控制感知层再次运行，对追踪目标进行再次锁定，识别模块用于接收视频数据，对视频数据中追踪目标进行连续的识别； 所述识别模块中对于追踪目标的连续识别逻辑表示为： 在视频数据中基于指定时间间隔拾取画面帧，以拾取的画面帧集合识别视频数据中追踪目标； ； 式中：Ka为视频数据中动态目标为追踪目标a的可能性；n为拾取画面帧总量；simi,Ptake为第i幅画面帧中动态目标的图像数据与追踪目标图像数据的相似度；λ为修正；ω为权重；m为画面帧中动态目标图像与追踪目标图像数据的直方图的bin数量；ij、Ptakej为两个直方图在第j个bin的归一化频率值；Δx、Δy为动态目标与追踪目标在其各自来源画面帧中水平方向与垂直方向的距离差；W、H为画面帧宽、高； 其中，在视频数据中拾取画面帧所用的时间间隔由系统端用户自定义，且时间间隔最大不超过一秒； 基于上式，对每一动态目标为追踪目标的可能性进行计算，选择最大计算结果指向动态目标作为追踪目标，权重1＞ω＞0，权重ω取值由系统端用户自定义； 所述控制模块运行控制感知层再次锁定追踪目标后，同步对再次锁定的追踪目标进行特征参数提取，并对与接收模块接收的追踪目标特征参数进行比对，在比对结果为一致时，触发识别模块运行； 在比对结果为不一致时，以再次锁定的追踪目标的特征参数迭代接收模块接收的追踪目标特征参数，并控制感知层再一次运行锁定追踪目标，再一次提取追踪目标的特征参数，如此连续运行，直至控制模块运行所得追踪目标特征参数与接收模块中接收的追踪目标特征参数一致后，结束，触发识别模块运行； 所述修正λ取值为：； 式中：Va、Vtake为动态目标a基于各幅画面帧确定的平均移动速度、追踪目标移动速度；MAXVa,Vtake为去括号内最大值； 接收模块接收的追踪目标特征参数与控制模块控制感知层再运行获取的追踪目标特征参数在进行一致性比对时，比对目标为特征参数中追踪目标图像数据，比对逻辑与simi,Ptake的求取逻辑相同； 其中，系统端用户自定义一致性判定阈值，比对结果大于等于一致性判定阈值时，判定接收模块接收的追踪目标特征参数与控制模块控制感知层再运行获取的追踪目标特征参数为一致，反之，则为不一致。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人济南致业电子有限公司，其通讯地址为：250101 山东省济南市高新区新泺大街1166号奥盛大厦1号楼1616室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。