买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

摘要：本发明公开一种摄像透视VST中环境图像数据的处理方法、头显设备和存储介质，属于摄像透视技术领域，应用于XR扩展现实头戴式显示设备的系统，双目摄像头采集真实环境图像，通过头戴显示设备的屏幕展示以供用户观看，响应于用户的拉近指令，先寻找相对眼镜X轴距离最近的像素作为目标像素，得到目标像素在原始位置的视差位置Xold；计算在新位置的视差位置Xnew；先把左右屏幕的整个画面放大（XnewXold）倍，然后将左右屏幕放大画面的每个像素跟随目标像素从视差位置Xold平移到视差位置Xnew。本发明是在摄像头机械调焦之后，通过对摄像透视VST中环境图像数据进行后处理，使得用户通过VST方式可以沉浸式地看到周围环境被拉近的视觉效果，能放大观看远处或太小的物体。

主权项：1.摄像透视VST中环境图像数据的处理方法，应用于XR扩展现实头戴式显示设备的系统，双目摄像头采集真实环境图像，通过头戴式显示设备的屏幕展示以供用户观看，其特征在于：基于用户的交互指令，系统对真实环境图像进行后处理，令真实环境图像中的物体具有拉近或推远的视觉效果，所述交互指令包括预置的拉近指令和推远指令，系统根据交互指令预测拉近或推远的距离，所述后处理包括如下步骤：步骤1：响应于用户通过VST方式观看真实环境图像时给出的拉近指令，开始寻找相对眼镜距离最近的像素作为目标像素T：假设眼镜的左右屏幕是根据左右摄像头的视场角FOV来对齐屏幕像素，即摄像头图像总像素量与屏幕总像素量相同或矫正后相同，已知屏幕X轴上的总像素Xtotal、左右摄像头的视场角FOV、左右摄像头的瞳距DIPD和每度像素量；统一用点L和点R表示左右屏幕的中心点、左右摄像头的中心点，将点L和点R连线或与其平行的线设为X轴，在左右屏幕建立分别以点L和点R为原点的XY坐标系，左屏幕显示目标像素T的视差位置与点L的距离值为XL，右屏幕显示目标像素T的视差位置与点R的距离值为XR，所述距离值XL和XR以左右屏幕的像素值来表示；左右屏幕中物体由远到近的过程中，视差位置分别从点L和点R沿着X轴向着眼镜中间进行对称性调整，将点L的法线称为左中线，点R的法线称为右中线，视差角和分别代表左右中线分别偏向眼镜中心时到达视差位置的度数；在真实世界里，用D代表目标像素T在X轴上与点L或点R的真实距离值，目标像素T与眼镜的法线切割X轴为左距离DL和右距离DR，其中，DL+DR=DIPD，该DIPD为左右摄像头的瞳距，即点L和点R的间距,是已知的固定值，在目标像素T拉近推远的过程中，DL和DR固定不变；逐行扫描摄像头采集的左右视图，将每一行的所有像素进行对比，找到左右视图中深度信息或灰阶颜色相同且排列方式一致的像素，获取这些像素在左屏幕上的视差位置XL和右屏幕上的视差位置XR，计算得到以及（5），以及所述像素的距离Z： （3）；选取其中距离Z最小的像素作为目标像素T，将目标像素T的当前位置称为原始位置，设显示在原始位置的目标像素为Told，保存目标像素Told的原始位置数据，该原始位置数据包括目标像素Told在左屏幕上显示的视差位置Xold-left和视差角，目标像素Told在右屏幕上显示的视差位置Xold-right和视差角，以及目标像素Told在原始位置与眼镜的垂直距离Zold；步骤2：响应于用户的拉近指令，系统根据用户拉近指令得到目标像素Told从原始位置拉近到新位置为目标像素Tnew与眼镜的垂直距离Znew，并计算目标像素Tnew在新位置的视差位置Xnew-left和Xnew-right；步骤3：在计算得到视差位置Xnew-left和Xnew-right后，先把左右屏幕的整个画面放大（XnewXold）倍，然后将左屏幕放大画面的每个像素跟随目标像素Told从原始位置Xold-left平移到新位置Xnew-left，以及将右屏幕放大画面的每个像素跟随目标像素Told从原始位置Xold-right平移到新位置Xnew-right。

全文数据：

权利要求：

百度查询： 大连三通科技发展有限公司 摄像透视VST中环境图像数据的处理方法、头显设备和存储介质