首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于风格内容解耦的跨域遥感图像目标检测方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:大连理工大学

摘要:本发明属于图像信息处理技术领域,提供了一种基于风格内容解耦的跨域遥感图像目标检测方法。本发明的端到端训练的跨域遥感图像目标检测方法利用了自适应实例归一化的方式获得多域图像,并且进一步将解耦获得的内容特征编码送入目标检测网络来进行目标检测。本方法对于不同域的遥感图像有较好的泛化性,可以得到理想的目标检测结果。

主权项:1.一种基于风格内容解耦的跨域遥感图像目标检测方法,其特征在于,步骤如下:在所设计的编码器基础上,采用YOLO目标检测框架中的解码器进行遥感图像的目标检测,在网络训练阶段,利用FocalLoss损失函数来平衡正负样本对应的损失函数值: 其中,N1为一个训练批次中目标的数目,Yxyc为图片真值,为网络预测值α和β为网络的两个超参数用于规定锚框分类过程中正负样本的平衡程度;锚框回归分支实际上预测的是人为规定的锚框与真值之间的位置和大小的差距;现设真值锚框为x,y,h,w,四个值分别代表锚框位置的横坐标、纵坐标、锚框高度和宽度;人为规定的锚框为则网络需要预测: 利用如下损失函数来监督网络: 其中,N2为与第j个真值框重叠度大于阈值的预测框数目;为网络的对第i个符合要求锚框的预测值,与第j个真值框重叠度大于阈值;tmj为对应真值,xj,yj,hj,wj为第j个真值锚框的参数;为第i个符合要求的人为规定锚框的参数;在网络对于目标检测总的损失函数Ldetect为:Ldetect=Lclass+Lloc7其中,Lclass和Lloc为公式中规定的损失函数;提出一个基于风格内容解耦的多域遥感图像目标检测任务的方法,通过将来自不同域的图像进行风格内容的解耦以及重组来获得多域图像,并且使用通过解耦获得的图像内容编码来进行遥感图像目标检测;因此,仅仅使用两个不同域的图像进行风格与内容的解耦与互换,并在此基础上进行监督编码器的收敛,就可获得特征提取能力优秀的特征提取器与对应地特征空间,并在此基础上进行遥感目标检测;通过使用自适应实例归一化,将一幅图像的风格与内容进行解耦,获得一幅图像的风格与内容对应的特征向量,然后将对应的特征向量与来自不同域的图像的风格与内容对应的特征向量进行呼唤,就可获得多域的遥感图像;对于生成多域遥感图像使用相应的损失进行约束;之后将原始遥感图像的与风格解耦的内容特征编码送入目标检测网络中进行有监督的目标检测,最终通过训练学习获得泛化性优秀的遥感图像目标检测模型;通过对于输入的内容图像进行实例级别的归一化,以及对应地对归一化之后的内容图像,通过使用风格图像的均值与方差参数获得风格图像的风格; 其中,x表示输入的内容图像,y表示输入的风格图像,μx、μy分别表示输入的x、y的均值,σx、σy分别表示输入的x、y的方差;将归一化后的内容图的输入,通过风格的相关参数进行缩放和平移;输入x、y分别为内容图像、风格图像经过预训练的VGG深度神经网络获得的特征图;获得经过风格转换的特征图后,使用与对应编码器VGG网络相反结构的解码器输出风格转换后的图像;对于风格转换后的图像,要保证其内容是没有变化的,同时也要保证其风格与输入的风格图像相似,通过预训练生成对抗网络中的判别器来保证生成的图像在风格上与风格图像保持一致,此外,设计两种损失来保证内容的不变与风格的转换;通过使用与训练好的判别器对于生成的风格转化图像进行判别,使得网络生成的图像让判别器“认为”是属于输入的风格图像一类;Ladv=LCEDgt,19其中,t表示生成的风格转换之后获得的特征图,LCE表示交叉熵损失函数;另外还有对于生成的风格转换图像的内容进行监督,使其保持内容不变的损失 其中,t表示生成的风格转换特征图,gt表示特征图t经过解码器g之后获得的输出图像,f表示编码器;通过内容不变损失,使得输出的特征图经过编码器解码后获得的图像gt,再送入编码器之后获得的特征图fgt,与原始的特征图t相同;另外还有对于生成的风格转换图像的风格进行监督,使其获得风格图像的风格的损失 其中,φi表示编码器VGG中的激活函数层,共选取了L个激活函数层;μ、σ分别表示求输入的均值和方差;s表示风格图像;通过对于生成的图像gt与原始风格图像s经过编码器之后的不同层次的激活函数值进行比较,让生成图像获得与输入风格图像相同的风格;对于风格转换的自适应实例归一化的总损失Lstyle为:Lstyle=Ladv+Lc+Ls12最终端到端训练的跨域遥感图像目标检测网络损失函数L为:L=Ldetect+Lstyle13。

全文数据:

权利要求:

百度查询: 大连理工大学 基于风格内容解耦的跨域遥感图像目标检测方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。