买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：烟台工程职业技术学院(烟台市技师学院)

摘要：本发明提供了一种AI绘画模型定向出图方法、介质及系统，属于AI绘画技术领域，包括：获取用户输入文本以及StableDiffusion生成的图像组,并选择一张基础图像；对基础图像进行语义分割生成多张分割图像,并对每张分割图像进行透明填充；以分割图像为底图,利用分割图像对应的语义分割结果作为输入,批量生成得到多张分割补充图像；从分割补充图像中选择合适的图像作为第二分割图像,并获取与第二分割图像相似度较高的分割相似图像；确定每张分割图像的主体及其层数；获取用户需要更新的语义部分,并重新生成对应的更新部分图像；将维持不变的第二分割图像和需要更新的第二分割图像对应的更新部分图像按层合并,得到定向生成图。

主权项：1.一种AI绘画模型定向出图方法，其特征在于，包括以下步骤：S10、获取用户输入到图像生成AI模型工具StableDiffusion的图像生成文本，记为第一文本；获取StableDiffusion生成的图像组，并获取操作人员从所述图像组中选择的基础图像；获取所述图像组中与所述基础图像相似度大于预设的第一相似度阈值的多张图像，记为基础相似图像组，包括多张基础相似图像；S20、对所述基础图像进行融合所述第一文本的语义分割得到多张分割图像，并对每个分割图像进行透明填充生成第一分割图像；S30、对每张第一分割图像作为图生图的底图，以所述第一分割图像对应的语义分割的语义作为输入词，输入到StableDiffusion进行批量图生图操作，得到对应的多张分割补充图像；S40、对于每张第一分割图像，获取操作人员从对应的多张分割补充图像中选择的图像作为基础分割补充图像，记为第二分割图像；获取所述第二分割图像对应的多张分割补充图像中，与所述第二分割图像相似度大于预设的第二相似度阈值的多张图像，记为分割相似图像组，包括多张分割相似图像；S50、确定每张第一分割图像的主体，并根据所述主体与所述基础图像的尺寸比例以及所述第一分割图像对应的语义，确定每张第一分割图像的层数，对每张第二分割图像，赋值对应的第一分割图像的层数；S60、将每一张第二分割图像及对应的语义输出给操作人员，并获取操作人员需要更新的部分语义，确定操作人员需要维持不变的第二分割图像以及需要更新的第二分割图像；S70、将每张需要更新的第二分割图像作为图生图的底图，以需要更新的第二分割图像对应的需要更新的部分语义作为输入词，输入到StableDiffusion进行批量图生图操作，得到多张更新部分图像；S80、获取操作人员从多张更新部分图像中选定的一张更新部分图像作为所述需要更新的第二分割图像对应的更新部分图像，并将维持不变的第二分割图像以及每张需要更新的第二分割图像对应的更新部分图像按照层数进行合并，得到待定生成图；S90、基于所述基础图像、所述第二分割图像、以及所述基础相似图像组中的每张基础相似图像、分割相似图像组中的每张分割相似图像对所述待定生成图进行颜色、光照、纹理的优化和调整，得到最终的定向生成图，具体包括：颜色优化:根据基础相似图像的颜色直方图，对待定生成图进行颜色校正，使其更加饱和协调;光照优化:根据基础相似图像的光照信息，对待定生成图进行阴影和高光的模拟，使其更加自然立体;纹理优化:根据分割相似图像的纹理特征，对待定生成图的局部区域进行纹理合成，提升细节质感。

全文数据：

权利要求：

百度查询： 烟台工程职业技术学院(烟台市技师学院) 一种AI绘画模型定向出图方法、介质及系统