恭喜安徽大学纪晴获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜安徽大学申请的专利基于元学习参数转移的可见光红外视觉跟踪方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114299114B 。
龙图腾网通过国家知识产权局官网在2025-06-20发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111625448.9,技术领域涉及:G06T7/246;该发明授权基于元学习参数转移的可见光红外视觉跟踪方法是由纪晴;李成龙;王亮;张彰;鹿安东;刘亮设计研发完成,并于2021-12-28向国家知识产权局提交的专利申请。
本基于元学习参数转移的可见光红外视觉跟踪方法在说明书摘要公布了:本发明公开了基于元学习参数转移的可见光红外视觉跟踪方法,所述方法包括:构建多模态视觉跟踪控制模型;将样本输入多模态视觉跟踪控制模型对其进行训练,样本包括多个热红外图像和其对应的可见光图像形成的多个图像对以及多个单独的可见光图像,训练过程中先向模型输入图像对进行第一预设次数的迭代训练,然后交替输入单独的可见光图像与图像对对模型继续训练第二预设次数,并且在交替训练过程中利用图像对进行模型训练的时候图像需要经过元学习器;训练完成以后模型跟踪,输出预测目标位置;本发明的优点在于:弥补训练集的不足,提升模型性能,解决现有技术因数据量有限而限制模型性能提升的问题。
本发明授权基于元学习参数转移的可见光红外视觉跟踪方法在权利要求书中公布了:1.基于元学习参数转移的可见光红外视觉跟踪方法,其特征在于,所述方法包括: 步骤一:构建多模态视觉跟踪控制模型; 步骤二:将样本输入多模态视觉跟踪控制模型对其进行训练,所述样本包括多个热红外图像和其对应的可见光图像形成的多个图像对以及多个单独的可见光图像,训练过程中先向模型输入图像对进行第一预设次数的迭代训练,然后交替输入单独的可见光图像与图像对对模型继续训练第二预设次数,并且在交替训练过程中利用图像对进行模型训练的时候图像需要经过元学习器; 步骤三:训练完成以后实时采集视频,提取成对的热红外图像和其对应的可见光图像输入训练好的模型,模型跟踪,输出预测目标位置; 所述多模态视觉跟踪控制模型包括顺序编号的第一通用适配器至第三通用适配器、第一可见光模态适配器至第三可见光模态适配器、第一热红外模态适配器至第三热红外模态适配器、元学习器、第一实例适配器及第二实例适配器,第一可见光模态适配器与第一通用适配器的一个输入端连接且接收单独的可见光图像或者热红外图像对应的可见光图像,第一热红外模态适配器与第一通用适配器的另一个输入端连接并接收热红外图像,第一可见光模态适配器的输出结果叠加到第一通用适配器的第一输出端之后输入第二可见光模态适配器以及第二通用适配器,第一热红外模态适配器的输出结果叠加到第一通用适配器的第二输出端之后输入第二热红外模态适配器以及第二通用适配器,第二可见光模态适配器的输出结果叠加到第二通用适配器的第一输出端后输入第三可见光模态适配器以及第三通用适配器,第二热红外模态适配器的输出结果叠加到第二通用适配器的第二输出端之后输入第三热红外模态适配器以及第三通用适配器,第三可见光模态适配器的输出结果叠加到第三通用适配器的第一输出端,第三可见光模态适配器经过元学习器与第三热红外模态适配器连接,第三热红外模态适配器经降维单元将输出结果叠加到第三通用适配器的第二输出端,仅有第三通用适配器的第一输出端输出结果时,该输出结果经第二实例适配器输出,否则融合第三通用适配器的第一输出端和第二输出端的结果后经第一实例适配器输出; 所述第一可见光模态适配器和第一热红外模态适配器结构相同,均由顺次级联的3×3卷积层、ReLU、LRN及5×5最大池化层组成;第二可见光模态适配器和第二热红外模态适配器结构相同,均由顺次级联的1×1卷积层、ReLU、LRN及5×5最大池化层组成;第三可见光模态适配器、第三热红外模态适配器及降维单元结构相同,均由顺次级联的1×1卷积层、ReLU及LRN组成;第一通用适配器由7×7卷积层、ReLU、LRN及3×3最大池化层组成,第二通用适配器由5×5卷积层、ReLU、LRN及3×3最大池化层组成,第三通用适配器由3×3卷积层、ReLU及LRN组成;所述元学习器由顺次级联的两个学习单元组成,两个学习单元均由ReLU和全连接层组成,两个学习单元的全连接层的维度不同;第一实例适配器由顺次级联的全连接层FC4、一个ReLU、一个随机失活函数、全连接层FC5、另一个ReLU、另一个随机失活函数及全连接层FC6组成,第二实例适配器的结构与第一实例适配器的结构相同,但全连接层FC4的维度不同; 所述多模态视觉跟踪控制模型的训练过程包括: 使用热红外图像和其对应的可见光图像形成的多个图像对迭代70次预先训练网络模型,设定batchsiz为128,卷积层的学习率为0.0001,全连接层的学习率为0.0002,训练过程中可见光图像和其对应的热红外图像同时输入模型中,可见光图像依次经过第一可见光适配器及对应位置的第一通用适配器、第二可见光适配器及对应位置的第二通用适配器、第三可见光适配器及对应位置的第三通用适配器之后输出结果融合到第三通用适配器的第一输出端,热红外图像依次经过第一热红外适配器及对应位置的第一通用适配器、第二热红外适配器及对应位置的第二通用适配器、第三热红外适配器及对应位置的第三通用适配器之后输出结果融合到第三通用适配器的第二输出端,第三通用适配器的第一输出端和第二输出端的结果融合之后通过第一实例适配器输出。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人安徽大学,其通讯地址为:230039 安徽省合肥市蜀山区肥西路3号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。