买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:杭州易视通科技有限公司
摘要:本发明公开了一种基于人工智能的手语识别方法,通过对实时标的视频,进行阶段切割,得到若干个分段视频构成的段落视频组;之后通过获取到段落视频组,对其进行差分截取,根据单帧图片之间的关联情况,去除掉一些表示相同内容的单帧图片,从而避免后续的翻译数据过于庞大,需要匹配的内容过多,便于人工智能快速学习;同时还能够根据目标对象实时表达的内容,进行快速的关联其他动作,便于能够精准的实现辅助翻译,从而为手语动作识别提供了强大的助力;本发明简单有效,且易于使用。
主权项:1.基于人工智能的手语识别方法,其特征在于,该方法具体包括下述步骤:步骤一:对实时标的视频,进行阶段切割,得到若干个分段视频构成的段落视频组;步骤二:获取到段落视频组,进行差分截取,差分截取的具体方式为:S01:按照顺序选取段落视频组中的分段视频,首先获取到第一个分段视频;此处也是根据分段视频的产生情况处理,每产生一个分段视频时,就进行一次处理;S02:对分段视频按照帧数获取,获取到一帧帧的图片,将其标记为单帧图片,按照顺序依次融合,得到单帧图片组;S03:按照顺序选择第一个单帧图片,将其标记为核帧图片,之后获取到下一个单帧图片,将其标记为对象帧图;S04:将对象帧图与核帧图片进行相似度分析,获取到二者差异部分的面积,得到差异面积;此处计算面积以对应照片内横竖方向上的像素点个数为单位计算;S05:将差异面积除以核帧图片的面积,得到的值标记为异向占比;S06:当异向占比低于X2时,产生类除信号;X2为预设数值;S07:在产生类除信号时,将对应的对象帧图去除;S08:之后获取到下一个单帧图片,将其标记为对象帧图,重复步骤S04-S07的方式,对对象帧图进行处理,并根据产生的信号对对象帧图去除或者保留;S09:重复步骤S08,直到对所有的单帧图片处理完毕,完成单帧图片的删除;将剩余的单帧图片保留,构成新的分段视频,将其标记为差分视频;S010:持续对所有新产生的分段视频按照步骤S02-S09的原理进行处理,得到每一个处理后的差分视频;S011:将产生的差分视频融合形成差分视频组;在进行完步骤二的处理后,还需进行下述步骤:步骤三:对差分视频组内每产生的一个差分视频进行识别处理,同时通过辅助处理算法协同进行精准定位数据库操作,精准定位数据库操作的具体方式为:SS1:获取到所有的手语数据库,手语数据库即为对应手语动作和对应的翻译文字;SS2:之后逐步识别双方进行手语聊天的内容,进行文字识别,得到交流文字;SS3:之后根据交流文字进行语境识别,语境识别的方式为提取到交流文字的关键词,具体通过首先对交流文字进行分词处理,得到若干个交流分词,之后将交流分词中的常用语去除,常用语为用户预先设置的词库;SS4:之后对剩余的关键词在手语数据库中进行匹配,此处匹配时,会自动将所有能够与关键词构成一句话的手语动作标记为关联动作;SS5:在持续性的对差分视频进行手语动作识别时,优先将其与关联动作进行匹配,匹配一致时直接获取到对应的翻译文字;SS6:随用户手语动作的持续做出,持续进行准定位数据库操作,辅助进行快速识别;SS7:对差分视频翻译完毕,得到实时翻译内容。
全文数据:
权利要求:
百度查询: 杭州易视通科技有限公司 基于人工智能的手语识别方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。