龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：成都华栖云科技有限公司
摘要：本发明属于视频检索技术领域，公开了一种基于标签检索和多模态向量的视频内容检索方法，该方法包括如下步骤：步骤100：检索前的视频处理；视频处理是指提取视频内容中的标签、语义向量和文字描述；步骤200：根据用户输入的检索式进行检索结果排序并展示；所述排序先采用语义向量排序，然后采用ES得分和多模态向量得分加权平均排序，最后引入标签命中个数的二次排序以获取最终结果，本发明实现了对于视频内容的多维度混合检索，降低单一模型在特殊数据上弊端，同时通过多维度数据的融合检索，极大地提升视频搜索的准确度；此方法能应用到各种视频数据资产管理中，对于视频数据资产的二次使用有很高的经济价值。
主权项：1.一种基于标签检索和多模态向量的视频内容检索方法，其特征在于，包括：检索前的视频处理；视频处理是指提取视频内容中的标签、语义向量和文字描述；根据用户输入的检索式进行检索结果排序并展示；其中，根据用户输入的检索式进行检索结果排序是按照如下步骤进行：步骤201：采用多模态大模型提取用户输入的检索式的语义向量；将检索式的语义向量与视频内容的语义向量进行匹配获取多模态语义向量检索得分，按照多模态语义向量检索得分从高到低进行排序并获取前N个视频内容的数据列表vec_ret；步骤202：对用户输入的检索式进行实体分词；采用ES搜索引擎对实体分词在数据列表vec_ret中进行搜索并获取ES得分，并利用对数函数fx对ES得分进行归一化处理后按照从高到低进行重新排序并获取数据列表tag_ret；步骤203：将步骤201获取的数据列表vec_ret的多模态语义向量检索得分和步骤202数据列表tag_ret的ES得分平均加权后重新排序获得前M（M＜N）个视频内容的数据列表m_ret；步骤204：根据用户输入的检索式的实体分词对数据列表m_ret中标签命中个数进行统计，以命中个数为优先级进行排序，即有命中个数越多排序越靠前，当命中个数相同时以平均加权得分排序；输出最终排序结果。
全文数据：
权利要求：
百度查询： 成都华栖云科技有限公司 基于标签检索和多模态向量的视频内容检索方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号