中南大学漆华妹获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中南大学申请的专利一种轻量级唇语识别方法及相关设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116168439B 。
龙图腾网通过国家知识产权局官网在2025-09-23发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310198889.8,技术领域涉及:G06V40/16;该发明授权一种轻量级唇语识别方法及相关设备是由漆华妹;叶健材;江苏设计研发完成,并于2023-03-03向国家知识产权局提交的专利申请。
本一种轻量级唇语识别方法及相关设备在说明书摘要公布了:本发明提供了一种轻量级唇语识别方法及相关设备,包括:获取唇部图片序列样本集,将唇语图片序列样本集输入唇语识别教师模型进行识别,得到与每个唇语图片序列样本对应的词语的第一概率分布值,并对第一概率分布值进行蒸馏,得到第一预测值;将唇语图片序列样本集输入唇语识别学生模型,以第一预测值为预测目标,指导唇语识别学生模型进行训练,得到轻量级唇语识别模型;将待识别的唇语视频输入目标检测模块进行检测,得到唇部图片序列,并将唇部图片序列输入轻量级唇语识别模型进行唇语识别,得到与唇部图片序列对应的词语;解决了现有的唇部识别模型实时响应不强的问题,提高了识别效率,提高了模型识别的准确率。
本发明授权一种轻量级唇语识别方法及相关设备在权利要求书中公布了:1.一种轻量级唇语识别方法,其特征在于,包括: 步骤1,获取唇部图片序列样本集; 步骤2,将所述唇语图片序列样本集输入唇语识别教师模型进行识别,得到与每个唇语图片序列样本对应的词语的第一概率分布值,并对所述第一概率分布值进行蒸馏,得到第一预测值; 步骤3,将所述唇语图片序列样本集输入唇语识别学生模型,以所述第一预测值为预测目标,指导所述唇语识别学生模型进行训练,得到轻量级唇语识别模型; 步骤4,将待识别的唇语视频输入目标检测模块进行检测,得到唇部图片序列,并将所述唇部图片序列输入所述轻量级唇语识别模型进行唇语识别,得到与所述唇部图片序列对应的词语; 所述轻量级唇语识别模型包括前端模块和后端模块; 所述前端模块包括:依次连接的时空三维卷积层、第一批处理规范化层、第一校正线性激活单元、最大池化层、SE-ResNet-18网络和全局平均池化层; 所述时空三维卷积层的输入端与所述目标检测模块的输出端连接,所述全局平均池化层的输出端与所述后端模块的输出端连接; 所述后端模块包括:依次连接的第一门控循环单元、第二门控循环单元、第三门控循环单元、第一卷积层、第二卷积层、第三卷积层、第四卷积层、第五卷积层、第六卷积层、全连接层、全局平均池化层、第二批处理规范化层、第二校正线性激活单元和softmax输出层; 所述第一门控循环单元的输入端与所述全局平均池化层的输出端连接,所述softmax输出层输出识别结果; 所述SE-ResNet-18网络是在ResNet网络的每个残差块中增加用于对所述唇部图片序列进行挤压和激励处理的挤压模块和激励模块,利用所述SE-ResNet-18网络对唇部图片序列进行特征提取,将提取的特征输入平均池化层进行压缩,得到压缩结果。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中南大学,其通讯地址为:410000 湖南省长沙市岳麓区麓山南路932号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励