买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：国家计算机网络与信息安全管理中心;中国科学院自动化研究所

摘要：本发明提供一种小样本视频分类和分类模型训练方法及其装置，涉及计算机视觉技术领域，所述分类方法包括：将小样本分类任务输入预先构建的收敛的压缩域长短时Cross‑Transformer模型，获取压缩域信息；基于压缩域信息，获取短时融合的帧特征；基于短时融合的帧特征，获取查询特征，并输出基于查询特征获取的小样本分类任务中查询视频对各个查询类别原型所属支撑类别的分类分数，其中，分类分数最大的支撑类别用于表示查询视频的分类结果。本发明可实现少量示例视频下的快速、高精度、高效率的小样本视频分类。

主权项：1.一种小样本视频分类方法，其特征在于，包括：将小样本分类任务输入预先构建的收敛的压缩域长短时Cross-Transformer模型，获取压缩域信息；基于所述压缩域信息，获取短时融合的帧特征；基于所述短时融合的帧特征，获取查询特征，并输出基于所述查询特征获取的小样本分类任务中查询视频对各个查询类别原型所属支撑类别的分类分数，其中，所述分类分数最大的支撑类别用于表示查询视频的分类结果；所述将小样本分类任务输入预先构建的收敛的压缩域长短时Cross-Transformer模型，获取压缩域信息，包括：基于小样本分类任务，获取预测帧重要性值和图像群组重要性值；基于所述图像群组重要性值获取信息帧的RGB图像，且基于所述预测帧重要性值获取预测帧的运动向量；基于预处理的所述信息帧的RGB图像和所述预测帧的运动向量，获取压缩域信息；所述基于所述图像群组重要性值获取信息帧的RGB图像，且基于所述预测帧重要性值获取预测帧的运动向量，包括：基于图像群组重要性值，获取阶段图像群组，其中，所述阶段图像群组包括训练图像群组和测试图像群组，所述训练图像群组是基于归一化的图像群组重要性值获取的图像群组的概率分布随机确定，所述测试图像群组是基于图像群组重要性值最高值确定；解码所述阶段图像群组的信息帧的RGB图像；基于所述阶段图像群组，获取阶段预测帧，其中，所述阶段预测帧包括训练预测帧和测试预测帧，训练预测帧是基于归一化的预测帧重要性值获取的预测帧的概率分布随机确定，所述测试预测帧是基于预测帧重要性值最高值确定；解码所述阶段预测帧的预测帧的运动向量，基于预处理的信息帧的RGB图像和预测帧的运动向量的获取，确定压缩域信息。

全文数据：

权利要求：

百度查询： 国家计算机网络与信息安全管理中心 中国科学院自动化研究所 小样本视频分类和分类模型训练方法及其装置