买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:浙江大学
摘要:本发明公开了一种基于多尺度与CLIP语义监督的AI视频质量评估方法及装置,该方法结合了CLIP语义监督和交叉注意力机制。具体实现包括:为了对视频内容中嵌入的信息进行最大化提取和利用,分别从单个帧、帧片段和整个视频三个层面进行视频分析;为了确保生成的视频与提供的提示保持一致,本发明引入了提示语义监督模块,该模块利用CLIP文本编码器的编码能力,语义地评估视频与提示之间的一致性;考虑到人工智能生成视频的语义变化,本发明还引入了语义突变感知模块,该模块具备捕捉帧间微妙语义变化的基本建模能力。最终,通过我们精心设计的模型,可以有效地评估人工智能生成视频的质量。
主权项:1.一种基于多尺度与CLIP语义监督的AI视频质量评估方法,其特征在于,该方法包括以下步骤:1获取AI生成的原始视频数据,并处理成视频帧和视频段数据;2对视频帧和视频段数据进行数据增强,采用基于CLIP的语义监督,分别评估视频帧和视频段和原始视频内容与其提示之间的语义一致性,并基于视频帧的语义信息检测视频帧之间的语义突变,预测视频帧数据、视频段数据和原始视频数据的评分;3综合视频帧、视频段和原始视频数据评分得到最终的预测分数,实现视频质量评估。
全文数据:
权利要求:
百度查询: 浙江大学 基于多尺度与CLIP语义监督的AI视频质量评估方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。