买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：中国科学技术大学

摘要：本发明涉及三维建模技术领域，公开了一种基于三维高斯的三维场景生成与编辑方法。其中，三维场景生成方法包括：将用户指定的文本内容扩展为对应场景中所包含物体的指示文本和场景的详细描述；通过基于三维高斯的三维物体生成方法生成各指示文本对应的物体的三维高斯模型；完成整个场景的初始化；对场景三维高斯模型进行中期迭代优化；通过得到的一组相机位姿将中期迭代优化后的场景三维高斯模型渲染一组二维图像；使用伪真实图像对中期迭代优化后的场景三维高斯模型进行监督优化。通过多时间步采样对二维文生图扩散模型进行蒸馏，在优化中能够兼顾场景中的物体特征与空间特征，保证场景一致的优化。

主权项：1.一种基于三维高斯的三维场景生成方法，其特征在于，包括以下步骤：步骤一、利用预训练的大规模语言模型，通过应用预定义的提示问答模板，将用户指定的文本内容扩展为对应场景中所包含物体的指示文本和场景的详细描述；步骤二、通过基于三维高斯的三维物体生成方法生成各指示文本对应的物体的三维高斯模型；步骤三、基于物体的三维高斯模型，使用预定义的环境初始化方法初始化场景的环境三维高斯模型与地面三维高斯模型；使用预定义的三维高斯点仿射变换方法，根据用户指定的场景内容布局，将环境三维高斯模型、地面三维高斯模型与物体三维高斯模型组合到一个场景三维高斯模型中，完成整个场景的初始化；步骤四，对场景三维高斯模型进行中期迭代优化，得到中期迭代优化后的场景三维高斯模型，具体包括以下步骤：S41、使用预定义的相机采样策略采样相机位姿，使用预定义的渲染方法在迭代过程中对场景三维高斯模型进行二维图像的渲染，得到渲染图像；S42、使用预定义的多时间步采样方法，通过预训练的二维文生图扩散模型对所述场景三维高斯模型进行三维内容生成指导，对场景三维高斯模型参数进行优化；步骤五、根据预定义的相机采样策略采样一组相机位姿，通过得到的一组相机位姿将中期迭代优化后的场景三维高斯模型渲染一组二维图像；步骤六、使用预定义的重建式生成方法，通过预训练的二维文生图扩散模型对步骤五所渲染的二维图像进行加噪及去噪，得到用于重建的伪真实图像，使用伪真实图像对中期迭代优化后的场景三维高斯模型进行监督优化，得到最终的场景三维高斯模型。

全文数据：

权利要求：

百度查询： 中国科学技术大学 基于三维高斯的三维场景生成与编辑方法、系统