Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种文案与视频分镜素材匹配方法、装置、设备及介质 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:厦门立马耀网络科技有限公司

摘要:本发明提供的一种文案与视频分镜素材匹配方法、装置、设备及介质,涉及计算机视觉技术领域,本发明通过获取与待匹配的商品的目标文案信息以及分镜素材视频,对目标文案信息进行细化拆分得到文案拆分信息,对分镜素材视频进行语音转译得到语音转译文本;再分别计算出文案拆分信息与语音转译文本、文案拆分信息与多模态画面描述文本、文案拆分信息与OCR图像文本的相似度,并结合文案拆分信息在所述分镜素材视频的关联度,进行加权求和后得到最终相似度;选取排名前M的分镜素材视频进行合成得到目标视频。本发明从各个角度寻找匹配文本与视频的相似度,得到的目标视频与目标文案信息的相似度高,提高了匹配视频的准确性,满足了用户的个性化需求。

主权项:1.一种文案与视频分镜素材匹配方法,其特征在于,包括:获取与待匹配的商品对应的目标文案信息以及分镜素材视频;对所述目标文案信息进行细化拆分,得到文案拆分信息;对所述分镜素材视频进行语音转译,得到语音转译文本;计算所述文案拆分信息与所述语音转译文本的相似度,得到第一相似度;计算所述文案拆分信息与画面描述文本的相似度,得到第二相似度;其中,所述画面描述文本通过对所述分镜素材视频按帧切分后,利用多模态模型对切分后的视频进行画面识别与信息提取,同时结合视频帧的上下文信息进行校正得到;计算所述文案拆分信息与OCR文本的相似度,得到第三相似度;其中,所述OCR文本通过OCR技术对所述分镜素材视频的每帧图片进行OCR信息提取,并结合视频帧的上下文信息进行校正得到;计算所述文案拆分信息出现在每个分镜素材视频中视频帧的个数的比例,即关联度;依次计算出所述目标文案信息与每个分镜素材视频的最终相似度,选取排名前M的分镜素材视频进行合成,得到与所述目标文案信息对应的目标视频;其中,所述最终相似度通过对所述第一相似度、所述第二相似度、所述第三相似度与所述关联度加权求和后得到。

全文数据:

权利要求:

百度查询: 厦门立马耀网络科技有限公司 一种文案与视频分镜素材匹配方法、装置、设备及介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。