买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：武汉大学

摘要：本发明涉及增强现实领域，提供了一种基于物体的光照编辑方法，首先提出了一种基于物理渲染技术，构建一套大规模、高质量的数据集，用于物体光照编辑任务；将构建的合成数据及其相应的光照信息作为网络的输入，并通过多尺度注意力机制来学习场景中真实物体的阴影信息，为场景中插入的虚拟物体的阴影生成提供参考和指导；通过利用光照交换机制，有效地实现场景中插入的虚拟前景物体光照信息与背景光照信息进行交换，实现前景与背景的光照融合；最后通过生成式对抗学习实现更加真实地场景光照和谐图像并输出。本发明能够避免任何逆渲染技术且简单、鲁棒、有效地实现物体光照编辑，实现场景的光照和谐。

主权项：1.一种基于图像物体的光照编辑方法，其特征在于，包括：步骤1、基于物理渲染构建大规模、高质量的光照数据集；步骤2、将每种数据按照设计的网络输入要求进行划分，最终针对每种数据，获得相应的6元组形式的网络输入；步骤3、提取输入的6元组数据特征，并通过多尺度注意力机制来学习场景中真实物体的阴影信息，从而推导出虚拟物体的合理阴影；步骤4、通过光照交换机制，将插入的虚拟物体的光照信息与其所在的背景的光照信息进行交换并融合，具体包括：步骤4.1、重光照网络首先对输入的非光照和谐图像进行整体特征提取，即该特征包含图像的整体的光照特征和非光照特征；步骤4.2、背景光照网络对输入的背景图像的光照信息进行特征提取，最终获取背景图像的光照特征；步骤4.3、根据步骤4.1所述的图像的整体特征，将其与物体的掩模进行逐像素相乘操作，最后获取物体的整体特征，即物体的光照特征和非光照特征；步骤4.4、根据步骤4.2所述的背景的光照特征和步骤4.3所述的物体的光照特征，通过光照交换机制实现其光照特征的交换；步骤5、根据步骤3和步骤4所述的虚拟物体的合理阴影信息、光照融合信息合成得到物体光照编辑后的光照和谐图像并输出，具体包括：步骤5.1、根据步骤4.4所述的光照交换后的特征，对其进行解码器解码，将光照信息与非光照信息进行融合，最终得到光照融合后的特征；步骤5.2、根据步骤5.1所述的光照融合特征和步骤3.2所述的虚拟物体阴影特征，通过重光照网络的解码器解码，最终获得光照编辑后的场景和谐图像。

全文数据：

权利要求：

百度查询： 武汉大学 一种基于物体光照编辑的方法