买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：杭州海康威视数字技术股份有限公司

摘要：本发明实施例提供了一种图像语义内容理解方法、装置、电子设备及存储介质，方法包括：获取图像样本，并对图像样本进行编码，得到编码特征；将图像样本输入像素域模型，得到像素域模型的中间层输出的像素域图像特征；将编码特征输入初始压缩域模型，得到初始压缩域模型的中间层输出的压缩域图像特征；基于压缩域图像特征与像素域图像特征之间的差异，调整初始压缩域模型的模型参数，直到初始压缩域模型收敛，得到压缩域模型；获取待处理图像，并对待处理图像进行编码，得到待处理图像对应的目标编码特征；将目标编码特征输入压缩域模型，得到待处理图像对应的语义内容理解结果。大大提高了图像语义内容理解的准确率。

主权项：1.一种图像语义内容理解方法，其特征在于，所述方法包括：获取图像样本，并对所述图像样本进行编码，得到编码特征；将所述图像样本输入像素域模型，得到所述像素域模型的中间层输出的像素域图像特征，其中，所述像素域模型为预先基于无损图像训练得到的；将所述编码特征输入初始压缩域模型，得到所述初始压缩域模型的中间层输出的压缩域图像特征；基于所述压缩域图像特征与所述像素域图像特征之间的差异，调整所述初始压缩域模型的模型参数，直到所述初始压缩域模型收敛，得到压缩域模型；获取待处理图像，并对所述待处理图像进行编码，得到所述待处理图像对应的目标编码特征；将所述目标编码特征输入所述压缩域模型，得到所述待处理图像对应的语义内容理解结果；所述像素域图像特征与所述压缩域图像特征为多组特征，每组特征包括一个像素域图像特征和一个压缩域图像特征；针对每组特征，该组特征包括的像素域图像特征的维度与该组特征包括的压缩域图像特征的维度相同，且每组特征之间的维度不同；所述基于所述压缩域图像特征与所述像素域图像特征之间的差异，调整所述初始压缩域模型的模型参数的步骤，包括：针对每组特征，确定该组特征包括的像素域图像特征和压缩域图像特征之间的差异；基于所述压缩域图像特征与所述像素域图像特征，按照以下公式计算得到图像特征损失L1： 其中，Ci为第i个压缩域图像特征，Pi为第i个像素域图像特征，λi为预设权重因子，dCi,Pi为所述第i个压缩域图像特征与所述第i个像素域图像特征之间的距离；基于所述图像特征损失，调整所述初始压缩域模型的模型参数。

全文数据：

权利要求：

百度查询： 杭州海康威视数字技术股份有限公司 图像语义内容理解方法、装置、电子设备及存储介质