买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:北京百度网讯科技有限公司
摘要:本申请实施例公开了一种视频填充方法、装置、设备及存储介质,涉及人工智能、深度学习、计算机视觉、图像填充技术领域,视频填充方法包括:获取视频中的待填充图像帧、所述待填充图像帧的多个相邻图像帧和至少一个循环反馈帧;分别抽取所述待填充图像帧、所述多个相邻图像帧和所述循环反馈帧的特征;将所述多个相邻图像帧的特征以及所述循环反馈帧的特征分别与所述待填充图像帧的特征对齐,并将对齐后的特征融合,得到融合特征;将所述待填充图像帧的特征与所述融合特征进行组合处理,得到组合特征;基于所述组合特征重建图像帧。利用本申请能够实现高质量的视频填充。
主权项:1.一种视频填充方法,包括:获取视频中的待填充图像帧、所述待填充图像帧的多个相邻图像帧和至少一个循环反馈帧,其中,所述多个相邻图像帧包括所述待填充图像帧之前的多个图像帧和所述待填充图像帧之后的多个图像帧,所述待填充图像帧和所述多个相邻图像帧中包括缺失区域,所述循环反馈帧中不存在缺失区域;分别抽取所述待填充图像帧、所述多个相邻图像帧和所述循环反馈帧的特征;将所述多个相邻图像帧的特征以及所述循环反馈帧的特征分别与所述待填充图像帧的特征对齐,并将对齐后的特征融合,得到融合特征;将所述待填充图像帧的特征与所述融合特征进行组合处理,得到组合特征;基于所述组合特征重建图像帧,重建的图像帧中不存在缺失区域;其中以本次重建的图像帧作为下一个待填充图像帧的填充过程中的循环反馈帧;所述将所述多个相邻图像帧的特征以及所述循环反馈帧的特征分别与所述待填充图像帧的特征对齐,并将对齐后的特征融合,包括:基于各个图像帧中物体的光流特征,将各个图像帧中的相同物体特征的空间位置对齐;将对齐后的各个图像帧的特征在通道维度上进行拼接,得到拼接特征,对所述拼接特征进行特征变换,得到所述融合特征,其中经过特征变换的所述融合特征在通道维度上的数目为预设数目。
全文数据:
权利要求:
百度查询: 北京百度网讯科技有限公司 视频填充方法、装置、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。