买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：浙江大学;江西求是高等研究院

摘要：本发明公开了一种基于欧拉运动场的三维微动效果图的生成方法，属于微动效果图生成领域。该方法包括：重建基于三维高斯点云的场景表示，为高斯点云创建掩模以分离静态点云和动态点云，然后将动态三维高斯点映射到特征空间；对动态三维高斯点进行基于获取特征的聚类，利用聚类之间的自相似性构造场景中点云的速度场，利用多层感知器对速度场进行细化，得到欧拉运动场；基于欧拉运动场，采用双向动画技术生成可无缝循环的三维微动效果图。本发明使用三维空间的欧拉运动场描述场景的动态变化，解决了现有基于二维图像空间的方法缺乏视觉保真、相机视角有限以及存在伪影等问题，同时无需在大型数据集上进行预训练。

主权项：1.一种基于欧拉运动场的三维微动效果图的生成方法，其特征在于，包括：使用多视角静态图像重建得到基于三维高斯点云的场景表示，并且为高斯点云创建掩模以分离静态点云和动态点云；然后使用自动编码器将动态三维高斯点映射到特征空间；所述使用多视角静态图像重建得到基于三维高斯点云的场景表示，包括：使用多视角图像基于3D-GS方法重建得到基于三维高斯点云的场景表示，并在重建的损失函数中加入正则化项： ；其中为高斯点云集合，为中的序号i的高斯点，为高斯点在三个轴上的缩放系数，max和min为最大值函数和最小值函数；对动态三维高斯点进行基于获取特征的聚类，利用聚类之间的自相似性构造场景中点云的稀疏速度场，利用插值的方式得到点云的稠密速度场，通过多层感知器对稠密速度场进行估计得到欧拉运动场；基于得到的欧拉运动场，采用双向动画技术生成可无缝循环的场景微动效果图；所述采用双向动画技术生成可无缝循环的场景微动效果图，包括：所述的场景微动效果图是一组动态三维高斯点的运动序列；对于每个动态三维高斯点引入矢量来调节在欧拉运动场中每个轴上的运动幅度大小；该矢量同时由场景轴向包围盒的边长、运动序列的总长度𝑇和控制运动幅度的超参数控制； 点在时间𝑡的空间位置通过欧拉积分计算得到： ；其中，为初始时刻的空间位置，为哈达玛积，为初始时刻到t-1时刻中的某一时刻，计算每个三维高斯点在运动序列中时间t和t-T的空间位置和，然后通过线性插值得出它在时间t的最终位置： ； ；其中，为线性插值权重；在得到每个时刻的高斯点云位置后，分别对每个时刻对应的高斯点云进行渲染，从而得到可无缝循环的场景微动效果图。

全文数据：

权利要求：

百度查询： 浙江大学 江西求是高等研究院 一种基于欧拉运动场的三维微动效果图的生成方法