首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于小波扩散模型的单张人体图像三维重构方法及装置 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:武汉大学

摘要:本发明涉及公开了一种基于扩散模型的单张人体图像三维重构方法及装置,包括背面图像估计和几何估计两个模块。在背面图像估计模块中,从输入图像中预测背面图像,并在预测的背面图像和输入图像之间引入了一个风格一致性约束。在几何估计模块中,提出了基于小波的条件扩散模型来估计傅里叶占有场。将傅里叶占有场转换为3DMesh网格,根据光栅化原理将2D颜色图投影到3DMesh生成带纹理的三维人体。该方法能够重建宽松的衣服,并在不可见区域重建更多合理的细节信息。

主权项:1.基于小波扩散模型的单张人体图像三维重构方法,其特征在于,包括以下步骤:构建训练数据集,该数据集包含人体参考图像,人体参考图像对应的背面图像,傅里叶占有场和对应的小波系数;设计损失函数优化背面图像估计模型;根据前后两侧的衣服之间的相关性引入了风格一致性约束来优化背面图像估计网络;设计几何估计网络,该网络包括图像编码器模块、扩散模型和几何优化模块。图像编码器模块从参考图像和估计的背面图像中提取多尺度特征,扩散模型以图像低分辨率特征作为条件,预测傅里叶占有场对应的小波系数;使用逆小波变换将预测的小波系数转换为傅里叶占有场;几何优化模块以高分辨率特征作为引导,进一步优化初始估计的傅里叶占有场;采用三种损失来训练几何估计网络,包括小波系数和真值的差异损失、初始估计的傅里叶占有场和真值的差异损失,以及优化后的傅里叶占有场和真值之间的差异损失;把傅里叶占有场转换为三维几何模型,并基于光栅化原理把参考图像和估计的背面图像映射到三维几何模型上。

全文数据:

权利要求:

百度查询: 武汉大学 基于小波扩散模型的单张人体图像三维重构方法及装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

相关技术
相关技术
相关技术