深圳市悦飞扬科技有限公司;深圳市虚现科技有限公司彭和清获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉深圳市悦飞扬科技有限公司;深圳市虚现科技有限公司申请的专利基于视觉与语音协同识别的跳绳自动计数方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN121459428B 。
龙图腾网通过国家知识产权局官网在2026-03-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202610002545.9,技术领域涉及:G06V40/20;该发明授权基于视觉与语音协同识别的跳绳自动计数方法及系统是由彭和清;孟州设计研发完成,并于2026-01-05向国家知识产权局提交的专利申请。
本基于视觉与语音协同识别的跳绳自动计数方法及系统在说明书摘要公布了:本发明公开了一种基于视觉与语音协同识别的跳绳自动计数方法及系统。该方法同步采集跳绳者的视频流和音频流;从视频流中提取双脚踝的Y坐标轨迹数据,并通过背景干扰识别确定轨迹点可信度,进而进行自适应滤波处理,得到平滑的双脚踝运动轨迹序列;从音频流中提取频谱特征并识别关键音频事件。将识别出的关键音频点与从轨迹序列中分析得到的双脚步态周期进行时间对齐,通过多模态信息融合校验,精确识别出代表有效跳跃的轨迹波峰,最终根据波峰数量完成自动计数。本发明融合视觉与语音信息,相互校正,有效克服复杂环境干扰,显著提高了计数结果的准确性和可靠性。
本发明授权基于视觉与语音协同识别的跳绳自动计数方法及系统在权利要求书中公布了:1.一种基于视觉与语音协同识别的跳绳自动计数方法,其特征在于,包括以下步骤: 获取跳绳者的跳绳视频流及同步采集的音频流,对所述视频流进行人体关键点检测,提取连续帧中双脚踝的Y坐标轨迹数据,同时对所述音频流进行短时傅里叶变换,生成语音频谱特征向量; 对所述跳绳视频流进行背景干扰识别,根据所述背景干扰识别确定Y坐标轨迹数据中每个时间点的轨迹点可信度,根据所述轨迹点可信度对所述Y坐标轨迹数据进行高斯低通滤波噪声处理,构成跳绳者的双脚踝运动Y轨迹序列; 根据所述语音频谱特征向量识别关键音频点,所述关键音频点包括开始音频点、脚落地音频点、结束音频点; 根据所述双脚踝运动Y轨迹序列识别跳绳者的双脚步态周期,将所述关键音频点和所述双脚步态周期进行时间对齐操作,识别所述双脚踝运动Y轨迹序列的有效跳跃波峰,具体为: 基于滑动时间窗口对所述双脚踝运动Y轨迹序列进行局部极大值和局部极小值检测,将相邻的极大值与极小值组合构成候选波峰与候选波谷,计算连续候选波峰与候选波谷之间的幅度差作为跳跃幅度,计算连续候选波峰之间的时间间隔作为跳跃周期; 根据所述跳跃幅度和跳跃周期构建初步的双脚步态周期序列,根据识别到的开始音频点和结束音频点,从所述双脚步态周期序列中截取位于开始音频点之后且结束音频点之前的步态周期段作为待分析周期段; 将所述待分析周期段内每个脚落地音频点与时间上最邻近的候选波谷进行匹配,若匹配成功则将该候选波谷标记为确认落地点,并提取以该确认落地点为中心的前后预设时间窗口内的Y轨迹子序列,计算该Y轨迹子序列的波形特征,所述波形特征包括波峰陡峭度、波谷平坦度以及波峰波谷间轨迹平滑度; 基于所有确认落地点对应的波形特征,采用聚类算法生成正常跳跃的波形特征模板,所述正常跳跃包括起跳、周期性循环跳跃; 将所述待分析周期段内所有候选波峰对应的Y轨迹子序列与所述正常跳跃的波形特征模板进行相似度计算,若相似度低于预设阈值,则判定该候选波峰对应的Y轨迹子序列为跳绳失误产生的干扰序列并予以剔除; 将相似度高于预设阈值的候选波峰保留,并输出为有效跳跃波峰序列; 根据所述有效跳跃波峰计算跳绳者的有效跳跃数。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人深圳市悦飞扬科技有限公司;深圳市虚现科技有限公司,其通讯地址为:518000 广东省深圳市坪山区坑梓街道秀新社区坪山大道6265号360创新产业园302;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励