买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京智象未来科技有限公司

摘要：本申请提供一种视频超分辨方法、装置、设备、存储介质，该方法包括：获取视频和高斯噪声；将视频和高斯噪声输入视频超分辨模型，获取视频超分辨模型输出的高频分辨率视频；视频超分辨模型包括：训练的图像生成模型、上采样器、空间适应模块、时域对齐模块和调节器；时域对齐模块，用于保证高频分辨率视频的帧间细节具备连贯性。本申请提供的方法，通过预先训练的视频超分辨模型生成具备帧间细节具备连贯性的高频分辨率视频，该高频分辨率视频具有丰富且保真的细节和流畅的连贯度。

主权项：1.一种视频超分辨方法，其特征在于，所述方法包括：获取视频和高斯噪声；将所述视频和高斯噪声输入视频超分辨模型，获取所述视频超分辨模型输出的高频分辨率视频；所述视频超分辨模型包括：训练的图像生成模型、上采样器、空间适应模块、时域对齐模块和调节器；所述时域对齐模块，用于保证所述高频分辨率视频的帧间细节具备连贯性；其中，所述图像生成模型由一个变分自编码器和一个去噪网络构成；其中，所述去噪网络，用于对加了高斯噪声的视频的隐变量编码进行去噪，得到分辨率视频的隐变量编码；变分自编码器包括一个变分编码器和一个变分解码器；所述变分编码器，用于将图像数据压缩成潜在空间的隐变量编码数据；所述变分解码器，用于将隐变量编码数据恢复成图像数据；所述去噪网络和所述变分解码器的每一个级联模块后插入所述空间适应模块和时域对齐模块；其中，所述上采样器的输出为所述变分编码器和所述调节器的输入，所述变分编码器的输出为所述去噪网络和所述变分解码器的输入，所述去噪网络的输出为所述变分解码器的输入，所述变分解码器的输出为所述调节器的输入；所述空间适应模块，用于从提取视频的特征，以便进行特征变换；所述时域对齐模块，用于保证帧间的连贯性；其中，所述空间适应模块，用于使用根据输入的视频的各帧特征图预测增幅系数和偏置系数，其中，为输入的视频的帧标识；基于所述和对特征图进行仿射变换；其中，通过公式进行仿射变换；其中，为输入的视频的第帧的特征图，为的均值，为的标准差；其中，所述时域对齐模块，用于将视频特征划分为跨多帧的三维滑窗，在各滑窗内基于自注意力机制进行处理；其中，所述上采样器是利用时域互注意力机制和像素重排机制实现的。

全文数据：

权利要求：

百度查询： 北京智象未来科技有限公司 视频超分辨方法、装置、设备、存储介质