买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:厦门理工学院
摘要:本发明涉及一种基于掩码属性建模的Transformer人脸属性识别方法及系统,该方法包括以下步骤:1)获取人脸属性识别数据集和人脸属性标签组合;2)构建基于掩码属性建模的人脸属性识别网络模型,其包含动态关系感知编码模块、Transformer编码器、语言编码器、语言解码器多个组件,协同执行FAR任务和MFAM任务;语言编码器获取来自语言模态的人脸属性关系编码;动态关系感知编码模块将语言和视觉模态的信息融合,得到多模态融合特征;Transformer编码器挖掘多模态融合特征之间的长距离依赖,得到注意力感知多模态特征;语言解码器进行MFAM任务;3)将训练好的人脸属性识别网络模型用于人脸属性识别任务。该方法及系统有利于获得更加稳定、鲁棒、准确的人脸属性识别结果。
主权项:1.一种基于掩码属性建模的Transformer人脸属性识别方法,其特征在于,包括以下步骤:1获取人脸属性识别数据集和人脸属性标签组合,所述人脸属性识别数据集包含人脸图像及其对应的人脸属性标签,其中人脸属性标签由一个或多个人脸属性词构成;2构建基于掩码属性建模的人脸属性识别网络模型,所述人脸属性识别网络模型包含动态关系感知编码模块、Transformer编码器、语言编码器、语言解码器多个组件,所述多个组件协同执行人脸属性识别任务和人脸属性掩码建模任务;所述语言编码器对来自语言模态的信息进行编码,获得来自语言模态的人脸属性关系编码;所述动态关系感知编码模块将语言模态和视觉模态的信息进行融合,得到多模态融合特征;所述Transformer编码器进一步挖掘多模态融合特征之间的长距离依赖,得到注意力感知多模态特征;所述语言解码器对注意力感知多模态特征进行人脸属性掩码建模任务,增强模型对全局属性关系的理解;通过人脸属性识别数据集对构建的人脸属性识别网络模型进行训练;3将训练好的人脸属性识别网络模型用于人脸属性识别任务。
全文数据:
权利要求:
百度查询: 厦门理工学院 基于掩码属性建模的Transformer人脸属性识别方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。