买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京外国语大学

摘要：本发明涉及一种基于等形变约束的图像漫画风格迁移方法，该方法包括：将风格图像与内容图像分别进行初始化处理，得到初始风格图像和初始内容图像；其中，所述风格图像与内容图像从MSCOCO数据集中获取；构建包括扭曲形变层、等形变损失函数、生成器及鉴别器在内的漫画风格迁移模型；将初始风格图像和初始内容图像输入所述漫画风格迁移模型中，对所述漫画风格迁移模型进行对抗训练，直至模型稳定；将待迁移图像输入至训练好的漫画风格迁移模型中，输出漫画风格图像。解决了现有技术中，对于漫画风格迁移图像细节信息刻画的不够精确、对于不同对象的分离程度差，效果不佳的技术问题。

主权项：1.一种基于等形变约束的图像漫画风格迁移方法，其特征在于，包括：将风格图像与内容图像分别进行初始化处理，得到初始风格图像和初始内容图像；其中，所述内容图像从MSCOCO数据集中获取，所述风格图像从动漫影片截图中获取；构建包括扭曲形变层、等形变损失函数、生成器及鉴别器在内的漫画风格迁移模型；其中，构建所述扭曲形变层的方法包括：在图像内部均匀选取k*k个控制点，获取控制点的坐标矩阵；在[-α,α]内随机采样，得到与控制点坐标矩阵维度大小相同的扭曲形变因子，其中，[-α,α]为控制点随机取值范围，扭曲形变因子中各个元素独立从[-α,α]中随机选取，α取值为0.15；根据所述扭曲形变因子计算得到仿射变换矩阵，再将所述仿射变换矩阵嵌入卷积神经网络，构建扭曲形变层；具体地，可以根据以下公式计算等形变损失函数：LtransG,x＝||Φ°Gx-G°Φx||1其中x为内容图像，Φ·为扭曲形变层，G·为风格迁移模型的生成器，°为两个算子的复合，||·||1为L1范数；所述风格迁移模型与扭曲变换的处理顺序是可交换的，具体地，先对风格图像做风格化，再对风格化后的图像进行扭曲形变得到的图像为Φ°Gx，先对图像做扭曲形变再对图像做风格化得到的图像为G°Φx；具体地，可以根据以下公式计算生成器整体的损失函数：Ltotal＝λ1Ltrans+λ2Lcyc+λ3LGAN其中λ1，λ2，λ3为三个损失的权重，Ltotal为生成器整体损失函数，Ltrans为等形变损失函数，Lcyc为循环一致性损失函数，LGAN为对抗损失函数；将初始风格图像和初始内容图像输入所述漫画风格迁移模型中，对所述漫画风格迁移模型进行对抗训练，直至模型稳定；将待迁移图像输入至训练好的漫画风格迁移模型中，输出漫画风格图像。

全文数据：

权利要求：

百度查询： 北京外国语大学 一种基于等形变约束的图像漫画风格迁移方法