买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明公开了一种基于文本位置注意力的对比微表情识别方法。本发明使用视频光流特征,计算光流注意力,该光流注意力用于分析VisionTransformer的视觉特征,提取光流注意力的微表情视觉特征。对于微表情位置难以发现的困难,提取微表情文本的token,学习文本位置注意力,提取文本位置注意力的微表情特征。为了有效区分不同微表情的显著位置,分析文本位置注意力的正负例对比损失,有效分离容易混淆的微表情类别。本发明考虑了光流注意力特征,文本位置注意力,文本位置对比关系,可以有效避免微表情识别中相互混淆。
主权项:1.一种基于文本位置注意力的对比微表情识别方法,其特征在于:具体包括以下步骤:S1:提取光流位置注意力;S2:提取人脸光流特征;S3:提取文本位置特征;S4:训练微表情对比模型;S5:测试模型;步骤S1所述的提取光流位置注意力,具体包括以下步骤:S1-1:输入微表情视频数据集;S1-2:计算微表情运动幅度;S1-3:取得{framei}中的第一帧frame1,作为微表情运动起始帧framebegin∈R3×H×W,获取光流采样图像framebegin、framepeak;S1-4:使用光流采样图像framebegin、framepeak提取微表情光流特征[ue,ve],其中,ue表示framebegin中像素点a,b处光流特征的水平分量,ve表示framebegin中像素点a,b处光流特征的垂直分量;S1-5:提取微表情光流变化率特征OFe;S1-6:提取光流位置注意力Ao。
全文数据:
权利要求:
百度查询: 合肥工业大学 基于文本位置注意力的对比微表情识别方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。