买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

摘要：本发明提出了一种基于序列信息挖掘的遥感图像序列云检测方法及系统，属于气象检测技术领域，首先输入长度为4的遥感图像序列，所述遥感图像序列包括前序图像和检测图像；输入的遥感图像序列经过4个细节信息模块进行图像特征提取；然后将图像数据输入至上下文信息模块，进行上下文信息提取，对图像进行全局信息的补充；再输入Memory模块，通过前序图像特征图对当前特征图进行特征补充与增强；补强的图像数据经过解码器进行4次卷积与上采样的操作来恢复图像尺寸，最终输出与输入图像尺寸一致的图像。

主权项：1.一种基于序列信息挖掘的遥感图像序列云检测系统，其特征在于：所述检测系统包括输入模块、模型编码器和解码器；所述输入模块输入长度为4的遥感图像序列，所述遥感图像序列包括前序图像和检测图像；所述模型编码器包括4个细节信息模块、上下文信息模块和Memory模块；所述细节信息模块用于进行图像特征提取；每个细节信息模块均包括三个子模块，分别为一个常规卷积模块与两个CBAM模块，其中常规卷积模块步长为2，对输入特征图进行2倍的下采样；而CBAM模块基于通道注意力机制与空间注意力机制进行特征提取，不改变特征图尺寸；所述上下文信息模块用于上下文信息提取，对图像进行全局信息的补充；经过上下文信息模块后，此时特征图序列S2包括4张特征图特征图序列S2将进入Memory模块，在此处，前序图像特征图将对当前特征图进行特征补充与增强；所述Memory模块分为Memory计算模块与Memory读取模块；其中，Memory计算模块的输入为特征图序列S2，序列中所有特征图都将由两个常规卷积分别计算得到key特征与value特征，对应的输出为keyT-3，valueT-3，keyT-2，valueT-2，keyT-1，valueT-1，keyT，valueT；Memory计算模块的全部输出作为Memory读取模块的全部输入，其中，keyT-3，keyT-2，keyT-1首先相加，得到keyadd，keyadd经过全局平均池化操作与一个全连接后，分别经过三个全连接分支，每个全连接分支包括一个全连接和一个Softmax操作；这三个全连接分支的输出结果，将分别与keyT-3，keyT-2，keyT-1进行相乘，为不同的key赋予权重，赋权后的三个结果相加，得到keyattention；随后，keyattention与当前图像对应的keyT相乘，得到keymemory；前序图像对应的valueT-3，valueT-2，valueT-1则首先在通道维度拼接，并经过一个常规卷积调整通道数，所得结果与keymemory相乘，得到valuememory，valuememory再与当前图像对应的valueT相加，得到Memory模块的最终输出即模型编码器对遥感图像序列的序列信息挖掘与特征提取，得到输出特征图为所述Memory模块通过前序图像特征图对当前特征图进行特征补充与增强；所述解码器将经过4次卷积与上采样的操作进行尺寸恢复，最终使得输出图像为与输入图像尺寸一致的图像。

全文数据：

权利要求：

百度查询： 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) 一种基于序列信息挖掘的遥感图像序列云检测方法及系统