泰山学院王琳琳获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉泰山学院申请的专利一种多模态图像融合方法、系统、介质及设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120107084B 。
龙图腾网通过国家知识产权局官网在2025-07-11发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510599737.8,技术领域涉及:G06F40/18;该发明授权一种多模态图像融合方法、系统、介质及设备是由王琳琳;陶体伟;孙丹;赵之光;李勃晔设计研发完成,并于2025-05-12向国家知识产权局提交的专利申请。
本一种多模态图像融合方法、系统、介质及设备在说明书摘要公布了:本发明涉及计算机视觉技术领域,本发明公开了一种多模态图像融合方法、系统、介质及设备,包括:对可见光图像和红外图像,分别进行基础特征提取和细节特征提取;所述基础特征提取对图像特征分别进行自注意力操作和通道-局部复合注意力操作后,依次通过门控机制融合、前馈网络处理和域特定批归一化;所述细节特征提取将图像特征分为两个分支后,依次进行细节节点操作、通道维度拼接操作、通道-局部复合注意力操作、注意力权重融合操作和域特定批归一化;将基础特征进行自适应融合;将细节特征进行自适应融合,通过解码器,得到融合后输出图像。增强了融合图像的质量和信息完整性。
本发明授权一种多模态图像融合方法、系统、介质及设备在权利要求书中公布了:1.一种多模态图像融合方法,其特征在于,包括: 获取可见光图像和红外图像; 对可见光图像和红外图像,通过编码器分别进行基础特征提取和细节特征提取;所述基础特征提取首先对图像特征分别进行自注意力操作和通道-局部复合注意力操作,并将两种注意力输出通过门控机制融合后,依次通过前馈网络处理和域特定批归一化,得到基础特征;所述细节特征提取首先将图像特征分为两个分支,并对每个分支应用细节节点操作后,依次进行通道维度拼接操作、通道-局部复合注意力操作、注意力权重融合操作和域特定批归一化,得到细节特征;其中,域特定批归一化采用特异性因子调整缩放参数和偏移参数,且细节特征提取所用的特异性因子大于基础特征提取所用的特异性因子; 将可见光图像和红外图像的基础特征进行自适应融合,得到融合基础特征;将可见光图像和红外图像的细节特征进行自适应融合,得到融合细节特征; 将可见光图像作为参考图像,结合融合基础特征和融合细节特征,通过解码器,得到融合后输出图像; 所述将可见光图像和红外图像的基础特征进行自适应融合的步骤包括:对可见光图像的基础特征和红外图像的基础特征,分别应用特征分析网络,计算通道注意力权重,并进行平滑处理,得到平滑处理后的通道注意力权重;基于可见光图像的基础特征和红外图像的基础特征,计算空间注意力权重和跨域交互特征;基于可见光图像和红外图像的平滑处理后的通道注意力权重,计算注意力权重融合特征;将注意力权重融合特征、空间注意力权重和跨域交互特征进行融合后,依次进行特征重标定和域批归一化处理; 所述将可见光图像和红外图像的细节特征进行自适应融合的步骤包括:对可见光图像的细节特征和红外图像的细节特征,分别应用域分析网络,计算域分析分数;基于可见光图像的细节特征和红外图像的细节特征,计算强度差异;基于可见光图像的域分析分数和红外图像的域分析分数,计算域差异;基于强度差异和域差异,创建选择掩码;基于选择掩码、可见光图像的细节特征和红外图像的细节特征,计算得到初步融合细节特征后,依次进行跨域交互添加、特征重标定和域批归一化处理。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人泰山学院,其通讯地址为:271000 山东省泰安市岱岳区东岳大街525号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。