买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:腾讯科技(深圳)有限公司
摘要:本申请公开了一种用于音视频匹配的模型训练方法、音视频匹配方法及装置,涉及人工智能技术领域。所述方法包括:基于至少一个视频样本和至少一个音频样本,构建样本对的集合;对于同一个样本对中的视频样本和音频样本,通过视频特征提取模型提取视频样本对应的特征信息,通过音频特征提取模型提取音频样本对应的特征信息;根据同一个样本对中的视频样本对应的特征信息和音频样本对应的特征信息,确定对比损失函数的值;根据对比损失函数的值,对视频特征提取模型和音频特征提取模型的参数进行调整,得到完成训练的视频特征提取模型和完成训练的音频特征提取模型。使用完成训练的模型去进行音视频推荐,推荐的音频更符合视频的内容,命中率较高。
主权项:1.一种用于音视频匹配的模型训练方法,其特征在于,所述方法包括:基于至少一个视频样本和至少一个音频样本,构建样本对的集合,所述样本对的集合包括至少一个正样本对和至少一个负样本对,所述正样本对包括具有匹配关系的一个视频样本和一个音频样本,所述负样本对包括不具有匹配关系的一个视频样本和一个音频样本;对于同一个样本对中的视频样本和音频样本,通过视频特征提取模型提取所述视频样本对应的特征信息,通过音频特征提取模型提取所述音频样本对应的特征信息;根据同一个样本对中的所述视频样本对应的特征信息和所述音频样本对应的特征信息,确定对比损失函数的值;其中,所述对比损失函数用于表征所述样本对的匹配程度;根据所述对比损失函数的值,对所述视频特征提取模型和所述音频特征提取模型的参数进行调整,得到完成训练的视频特征提取模型和完成训练的音频特征提取模型。
全文数据:
权利要求:
百度查询: 腾讯科技(深圳)有限公司 用于音视频匹配的模型训练方法、音视频匹配方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。