首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于互信息优化神经辐射场的稀疏视角室内场景重建方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:浙江大学

摘要:本发明提供了一种基于互信息优化神经辐射场的稀疏视角室内场景重建方法,本发明方法通过约束神经辐射场的法向梯度信息来优化重建结果,使得最后的几何重建结果更准确,尤其是在少纹理区域等信息相对较少的区域,获得一个更加准确,更加合理的重建结果,为场景采集之后的场景展示、人机交互,环境理解等步骤提供前提条件。

主权项:1.一种基于互信息优化神经辐射场的稀疏视角室内场景重建方法,其特征在于,包括:获取待重建室内场景的若干图像及对应位姿信息;对每张图像的每一像素构建正、负样本集;其中,正样本集包含的正样本是与所述像素相关性高的像素;负样本集包含的负样本是与所述像素相关性低的像素;对每张图像的每一像素按照位姿信息中的相机中心的射线路径进行采样n个三维点作为神经辐射场的输入数据;构建神经辐射场的网络结构;所述神经辐射场包含第一网络和第二网络;其中第一网络用于提取输入数据的隐式的场景特征并转换为有符号距离函数值,通过构造有符号距离场来隐式地表达重建的三维场景;第二网络用于将第一网络提取的隐式的场景特征转化成对应三维点的颜色值,最后根据相机中心的射线路径结合三维点的符号距离函数值和颜色值加权求和得到每一像素的颜色预测值;将每张图像的输入数据输入至神经辐射场,通过构建损失函数指导神经辐射场的优化,并最终从神经辐射场获得优化后的每个像素的符号距离函数值和颜色值;所述损失函数包括描述每个像素基于神经辐射场输出的颜色预测值与真值差异的色彩损失函数、约束输入数据中每个三维点的法向均为一个单位向量的几何约束项和拉近每个像素与正样本的法向梯度的距离,同时增大与负样本之间的法向梯度的距离的互信息优化项;所述法向梯度为像素的法向与网络参数的梯度;从优化后的每个像素的符号距离函数值中提取零平面信息作为最后的室内重建的几何信息,结合优化后的每个像素的颜色值进行重建获得室内场景重建结果。

全文数据:

权利要求:

百度查询: 浙江大学 基于互信息优化神经辐射场的稀疏视角室内场景重建方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。