首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于三维高斯喷溅的虚拟人任意视角渲染方法与系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:中山大学

摘要:本发明公开了一种基于三维高斯喷溅的虚拟人任意视角渲染方法与系统。对多个视角下的人体图片拟合出对应的SMPL模型;对SMPL模型进行采样,得到虚拟人点云;对点云中每个点,初始化三维高斯;将三维高斯投影到二维平面上,形成二维高斯;对二维高斯进行光栅化,渲染出图像;利用渲染图像与真实人体图片的相似程度构造损失函数,对三维高斯进行自适应密度控制,最后形成训练后的三维高斯;用户输入指定的任意新视角,利用训练后的三维高斯渲染出新视角下的图像。本发明利用图像拟合SMPL模型并采样得到人体三维点云,取代了SfM点云估计技术,成本低效率高。基于SMPL模型的网络拓扑对三维高斯进行克隆与分裂,保证了高斯的数量和分布尽可能拟合人体。

主权项:1.一种基于三维高斯喷溅的虚拟人任意视角渲染方法,其特征在于,所述方法包括:输入多视角人体图片,并利用SMPLify方法对每个视角下的人体图片分别拟合出对应的SMPL模型;对所述每个视角下的所述SMPL模型进行采样,得到虚拟人点云数据;对所述虚拟人点云数据中的每个点,构建并初始化一个可学习的三维高斯,形成三维高斯集合;步骤甲,根据所述多视角人体图片的相机的位置,将所述三维高斯集合投影到二维平面上,形成二维高斯集合;步骤乙,对所述二维高斯集合进行光栅化,渲染出虚拟人图像;步骤丙,利用渲染出的所述虚拟人图像与真实的所述人体图片之间的相似程度构造损失函数,对所述三维高斯集合进行自适应密度控制,动态地调整所述三维高斯集合的数量和分布;重复上述步骤甲、步骤乙、步骤丙的操作,最后形成训练后的三维高斯集合;用户输入指定的任意新视角,利用所述训练后的三维高斯集合渲染出新视角下的虚拟人图像。

全文数据:

权利要求:

百度查询: 中山大学 一种基于三维高斯喷溅的虚拟人任意视角渲染方法与系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。