买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：鹏城实验室

摘要：本申请公开了一种图像语义传输方法、装置、设备及存储介质，涉及图像处理技术领域，包括：基于历史图像构建码本和预设特征处理模型；获取待传输图像；将待传输图像输入至预设特征处理模型中的目标编码器，通过目标编码器编码得到第一特征向量；通过目标索引转换器和码本对第一特征向量进行处理，得到第二特征向量；通过目标解码器对第二特征向量进行解码，得到目标图像，通过预设特征处理模型中的码本和目标索引转换器，在码本辅助下，利用目标索引转换器对受噪声污染的特征向量进行预测和矫正，解决了特征向量传输过程中受噪声干扰受损，提高图像语义传输的准确性。

主权项：1.一种图像语义传输方法，其特征在于，所述图像语义传输方法包括：基于历史图像构建码本和预设特征处理模型，其中，所述预设特征处理模型中包括目标编码器、目标索引转换器以及目标解码器，所述目标编码器位于图像发送端，所述目标索引转换器和所述目标解码器位于图像接收端；获取待传输图像；将所述待传输图像输入至所述预设特征处理模型中的目标编码器，通过所述目标编码器编码得到第一特征向量；通过所述目标索引转换器和所述码本对所述第一特征向量进行处理，得到第二特征向量；通过所述目标解码器对所述第二特征向量进行解码，得到目标图像；所述基于历史图像构建码本和预设特征处理模型的步骤包括：获取历史图像；对所述历史图像进行预处理，得到处理后的历史图像；将处理后的历史图像输入至初始编码器和初始解码器中进行训练，得到训练结果；基于所述训练结果构建第一损失函数和第二损失函数；构建中间层损失函数；通过所述第一损失函数和所述中间层损失函数对所述初始编码器进行优化，得到目标编码器；通过所述第二损失函数和所述中间层损失函数对所述初始解码器进行优化，得到目标解码器；通过所述目标编码器对处理后的历史图像进行编码，得到编码特征向量组；基于所述编码特征向量组构建码本；根据所述码本得到索引数据和量化向量组；对所述编码特征向量组添加噪声，得到噪声特征向量；获取权重参数；通过所述权重参数、所述索引数据、所述量化向量组以及所述噪声特征向量构建转换器损失函数；通过所述转换器损失函数对初始索引转换器进行优化，得到目标索引转换器。

全文数据：

权利要求：

百度查询： 鹏城实验室 图像语义传输方法、装置、设备及存储介质