龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：广东技术师范大学
摘要：本发明公开了一种结合多注意力机制的视线估计方法，包括以下步骤，人脸数据采集：用于人脸检测通过HOG特征结合支持向量机SVM的方法进行，检测人脸的基础上采用梯度提升决策树GBDT对人脸68个关键点进行定位；本发明通过通道注意力机制来权衡各时间点的视线特征，并基于双向LSTM设计了一个视线时变特征融合结构以正确得出视频帧中的视线的相关性，更好地获取短时间中最优的视线估计；在满足实时性、稳定性、精确性、通用性的条件下，解决神经网络模型体积大、速度慢、需要大量训练样本等技术难题，利用终端设备仅有的资源实现最有效的视线估计；能够在一定时间跨度下，实时地预测视线的快速变化，并准确估计实际交互场景中的三维视线方向。
主权项：1.一种结合多注意力机制的视线估计方法，其特征在于，包括以下步骤：S1、人脸数据采集：用于人脸检测通过HOG特征结合支持向量机SVM的方法进行，检测人脸的基础上采用梯度提升决策树GBDT对人脸68个关键点进行定位，结合眼睛纵横比指标对眨眼行为判断，去除无效的视频帧图像，提供准确的输入；S2、视线特征的提取：基于CBAM注意力机制以及多头自注意力机制改进的残差网络，以使将采集到的人脸图像中提取到视线特征并与长短期记忆网络LSTM建立连接，用于获取前后帧视线的变化特征；S3、对前后帧视线特征进行融合：采集到有效人脸图像中，针对视频的前后三帧图像，利用通道注意力机制对每个时刻的LSTM层输出的视线特征进行融合，以获得整合时刻的视线信息；S4、利用GAZE360公共数据集对模型进行训练和测试，并在采集视频的数据上进行方法验证，并在基于采集人脸信息获取各帧用户图像的视线偏航角、俯仰角、滚转角以及角度误差。
全文数据：
权利要求：
百度查询： 广东技术师范大学 一种结合多注意力机制的视线估计方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号