买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：深圳市华弘智谷科技有限公司

摘要：本发明涉及智能眼镜领域，具体公开一种VR中多摄像头半脸识别方法、装置、智能眼镜及存储介质，方法包括：使用多个红外摄像头拍摄被红外光照亮的人眼图像，将左右眼对应的图像拼接，得到第二眼部正视图像。使用多个可见光摄像头拍摄第一下半脸图像，并拼接为第二下半脸图像。提取第二下半脸图像的皮肤颜色，对第二眼部正视图像的皮肤上色，使用预训练网络对眼睛进行颜色映射，然后将上色后的眼部图像和下半脸图像拼接为半脸图像，通过面部识别或结合虹膜识别判断身份，并输出半脸图像进行虚拟显示。本发明能够根据佩戴VR眼镜使用者的眼部图像和下半脸图像进行识别，还可以结合VR虹膜识别，从而提高使用者身份识别的识别率，提高了识别的安全性。

主权项：1.一种VR中多摄像头半脸识别方法，其特征在于，所述方法包括：获取由多个按照预设位置排列的红外摄像头拍摄的被红外光照亮的多个人眼图像，多个所述人眼图像分别与左眼和右眼对应，所述人眼图像中包括眼睛和眼睛周边皮肤；将左眼和右眼分别对应的多个所述人眼图像分别进行拼接，分别得到左眼和右眼对应的第一眼部正视图像，将两个第一眼部正视图像拼接，得到第二眼部正视图像；获取由多个按照预设位置排列的可见光摄像头拍摄到的多个第一下半脸图像；将多个所述第一下半脸图像拼接为一幅完整的第二下半脸图像；提取所述第二下半脸图像中的皮肤颜色，对所述第二眼部正视图像中的皮肤进行上色，基于预训练的人眼灰度图像与人脸真实皮肤、人眼灰度图像与真实虹膜之间的颜色变换网络，对所述第二眼部正视图像中的眼睛进行颜色映射，以及将映射上色后的所述第二眼部正视图像和所述第二下半脸图像拼接为半脸图像，所述颜色变换网络是基于深度学习的神经网络，在训练所述颜色变换网络时，收集人眼灰度图像和相应的彩色人脸图像作为训练数据，所述彩色人脸图像中包含有完整的人眼虹膜颜色、眉毛颜色、人脸皮肤颜色，通过使用深度学习框架来训练得到所述颜色变换网络，所述颜色变换网络的输入是灰度图像，输出是对应的彩色眼部周围皮肤、彩色虹膜图像；单独对所述半脸图像进行面部识别，或和结合所述第二眼部正视图像中的虹膜进行识别，以判断所述半脸图像对应的人的身份，以及，输出所述半脸图像以进行虚拟显示。

全文数据：

权利要求：

百度查询： 深圳市华弘智谷科技有限公司 一种VR中多摄像头半脸识别方法、装置、智能眼镜及存储介质