CN109993816B - 联合绘画方法、装置、终端设置及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种联合绘画方法、装置、终端设备及计算机可读存储介质，方法包括：获取原始图像；其中，原始图像中包含原始图像主体；计算原始图像主体与所有预存的待比对图像主体的相似度；根据相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；在与待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模版图像；其中，每一组合图像由至少两个待比对图像主体组成；根据模板图像中，除待替换图像主体外的待比对图像主体，对原始图像进行补全绘制，获得联合绘画图像。通过实施本发明的实施例能够通过模版图像对原始图像进行补全绘制，使得原始图像的构图更加饱满，图像主体更加丰富。

Description

联合绘画方法、装置、终端设置及计算机可读存储介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种联合绘画方法、装置、终端设备及计算机可读存储介质。

背景技术

随着社会和科学技术的不断发展、进步，市面上出现了不少智能绘画产品或工具，提供给人们进行绘画以满足人们的精神生活需求。但是多数绘画产品和工具均需要人们具有一定的专业绘画技能才能绘制出较好效果的艺术作品，大多人没有绘画及设计功能的人而言，只能绘制出单一的图像主体，构图不够饱满，图像主体不够丰富。

发明内容

本发明实施例提供一种联合绘画方法、装置、终端设备及计算机可读存储介质，能够通过模板图像对原始图像进行补全绘制，使得原始图像的构图更加饱满，图像主体更加丰富。

本发明一实施例提供一种联合绘画方法，包括：

获取原始图像；其中，所述原始图像中包含原始图像主体；

计算所述原始图像主体与所有预存的待比对图像主体的相似度；

根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成；

根据所述模板图像中，除所述待替换图像主体外的待比对图像主体，对所述原始图像进行补全绘制，获得联合绘画图像。

进一步的，所述待比对图像主体的生成方式包括：

获取待识别图像并根据预设的图像主体识别模型，识别所述待识别图像中的各个图像主体，获得若干已识别图像主体；

逐一判断所述已识别图像主体，落在所述待识别图像的主体区域内的图像面积，是否超过第一预设阈值；

若是，则将已识别图像主体作为主要图像主体；

提取各主要图像主体的轮廓线条，获得各所述待比对图像主体。

可选的，所述组合图像的生成方式包括：

将由同一待识别图像生成的待比对图像主体进行排列组合，获得若干所述组合图像。

可选的，所述组合图像的生成方式包括：

剔除所述待识别图像中的待替换图像主体，获得所述待替换图像主体对应的组合图像。

进一步的，所述图像主体识别模型的建立方法包括：

获取待处理图像，提取所述待处理图像中，各个图像主体的特征向量；

以所述各图像主体的特征向量为输入，以各图像主体的名称为输出，通过卷积神经网络进行训练，获得所述图像主体识别模型。

进一步的，所述提取各主要图像主体的轮廓线条，获得各所述待比对图像主体，具体为：

将每一所述主要图像主体进行颜色聚类，获得每一所述图像主体对应的填充色块；

去除所述填充色块的内部颜色，提取出所述填充色块的轮廓线条，获得所述待比对图像主体。

可选的，所述根据所述模板图像中，除所述待替换图像主体外的待比对图像主体，对所述原始图像进行补全绘制，获得联合绘画图像，具体为：

将所述模板图像中，除所述待替换图像主体外的待比对图像主体，作为待绘制图像主体；

将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述模板图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

可选的，将所述模板图像中所有待比对图像主体，作为待绘制图像主体；

将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述待识别图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

在本发明上述方法项实施例的基础上，设置了对应的装置项实施例；

本发明一实施例提供了一种联合绘画装置，包括原始图像获取模块、相似度比对模块、待比对图像主体确定模块、模板图像确定模块和绘画模块；

其中，所述原始图像获取模块，用于获取原始图像；其中，所述原始图像中包含原始图像主体；

所述相似度比对模块，用于计算所述原始图像主体与所有预存的待比对图像主体的相似度；

所述待比对图像主体确定模块，用于根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

所述模板图像确定模块，用于在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成；

所述绘画模块，用于根据所述模板图像中，除所述待替换图像主体外的待比对图像主体，对所述原始图像进行补全绘制，获得联合绘画图像。

在本发明方法项实施例的基础上提供了另一实施例；

本发明另一实施例提供了一种联合绘画终端设备，包括处理器、存储器以及存储在所述存储器中，并被配置为由所述处理执行的计算机程序，所述处理器执行所述计算机程序时，实现如本发明任意一项方法项实施例提供的联合绘画方法。

在本发明方法项实施例的基础上提供了另一实施例；

本发明另一实施例提供了一种计算机可读存储介质，包括所述计算机可读存储介质存储有计算机程序，所述计算机程序运行时，控制所述计算机可读存储机制所在的设备执行如本发明任意一项方法项实施例提供的联合绘画方法。

通过实施本发明实施例具有如下有益效果：

本发明实施例提供了一种联合绘画方法、装置、移动终端及计算机可读存储介质，所述方法首先，获取原始图像及原始图像中的图像主体，即原始图像主体；然后将原始图像主体与预存的所有待比对图像主体进行比对，计算出原始图像主体与每一待比对图像主体的相似度，紧接着根据相似度，挑选出一待比对图像主体作为待替换图像主体，继而在待替换图像主体对应的若干组合图像中，随机选取出组合图像，作为模板图像；最后根据模板图像，在原始图像补全绘制，获得联合绘画图像；使得原始图像的构图更加丰满，图像主体更加丰富，绘画过程简单、易操作，用户无需具备很专业的绘画基础、不需要进行复杂全面的构图思考，只需随意绘画某个喜欢的物品元素，系统获取用户的绘画内容后对图像进行分析处理，并根据相似度算法，与系统模板素材库进行比对，在保留用户原图的基础上，系统找出与之相似度最高的模板图像进行绘图补充完善，与用户一起联合绘画，从而完成一幅构图饱满元素丰富的绘画作品，使得普通人也能绘制出较高水平的绘画作品，增加绘画的趣味性。

附图说明

图1是本发明一实施例提供的一种联合绘画方法的流程示意图。

图2是本发明一实施例提供的一种联合绘画方法中，一线稿图像。

图3是本发明一实施例提供的一种联合绘画装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，是本发明一实施例提供的一种联合绘画方法，包括：

S101、获取原始图像；其中，所述原始图像中包含原始图像主体；

S102、计算所述原始图像主体与所有预存的待比对图像主体的相似度；

S103、根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

S104、在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成；

S105、根据所述模板图像，对所述原始图像进行补全绘制，获得联合绘画图像。

对于步骤S101、具体的，获取用户绘制的图形元素的图像获得上述原始图像，其中，上述原始图像主体，即为用户绘制的图形元素；例如，用户画了一只猫，则上述的原始图像主体即为“猫”；

对于步骤S102、在一个优选的实施例中，所述待比对图像主体的生成方式包括：

A:获取待识别图像并根据预设的图像主体识别模型，识别所述待识别图像中的各个图像主体，获得若干已识别图像主体；

B:逐一判断所述已识别图像主体，落在所述待识别图像的主体区域内的图像面积，是否超过第一预设阈值；若是，则将已识别图像主体作为主要图像主体；

C:提取各主要图像主体的轮廓线条，获得各所述待比对图像主体。

对于步骤A，在一个优选的实施例中，通过抽取手绘风格的影视作品的图像、互联网搜集手绘风格的绘本或海报图片，获取各种人物、动植物和日常物品等的组合场景图片，得到上述的待识别图像；在获得待识别图像后，提取出待识别图像的特征向量与建立好的图像主体识别模型库中存储的标准模版做比对，将每个待识别图像中的图像主体识别出来，获得上述若干已识别图像主体；需要说明的是，每张待识别图像中可能存在多个已识别主体，例如：一张待识别图像中是“一个人站在一颗树下”，那么此时该待识别图像对应的已识别图像主体，就是“人”和“树”两个。

在一个优选的实施例中，在识别上述待识别图像的图像主体时，可以对待识别图像进行，除噪音和干扰、图像切割、归一化等图像预处理操作，以提高服务器对图像处理识别的性能；

在一个优选的实施中，上述图像主体识别模型的建立方法包括：

获取待处理图像，提取所述待处理图像中，各个图像主体的特征向量；

以所述各图像主体的特征向量为输入，以各图像主体的名称为输出，通过卷积神经网络进行训练，获得所述图像主体识别模型。

具体的：通过抽取手绘风格的影视作品的帧图像、或者通过互联网搜集手绘风格的绘本或海报图片，获得上述待处理图像；

对待处理图像进行预处理，通过除噪音和干扰、图像切割、归一化等预处理过程提高服务器对图像处理识别的性能；将待处理图像中包含的各图像主体的图像进行人工框选、标注，利用卷积神经网络进行学习训练，提取出标准模版，建立各种物品的识别库。即根据各种图像主体的组成结构、外形轮廓、颜色材质等不同的空间密度排布特征，将各图像主体划分为M＊N个方格区域，计算每个方格中的点数与图像总点数之比，得到M＊N维特征向量，将提取的特征向量做输入，将图像主体的名称作为输出，利用卷积神经网络进行反复识别训练，提取出标准模版存入文件中，建立各种图像主体识别模型库，获得上述图像主体识别模型。

对于步骤B,在获得已识别图像主体后，需要进一步判断所得到的已识别图像主体，是否属于待识别图像的主要图像主体，判断方法为：

计算已识别图像主体的落在其对应的待识别图像的主体区域的图像面积，若面积超过第一预设阈值，则判断该已识别图像主体，属于其对应的待识别图像的主要图像主体；优选的，上述第一预设阈值以各已识别图像主体本身面积的一半为佳；

例如，在一张待识别图像中，有“人”和“树”的两个已识别图像主体，但“树”的图像主体，落在该张待识别图像的主体区域的面积，没有超过整个“树”的图像主体面积的一半，那么就不是待识别图像的主要图像主体；反之，就为待识别图像的主要图像主体；

需要说明的是，上述“待识别图像的主体区域”可以是，以待识别图像的中心为主体区域的中心，选取出图像的3/4面积区域设定为主体区域；当然选取的面积不限定于3/4，也可以是1/2、3/5等，具体的取值，可以根据实际情况进行适应性的调整。

对于步骤C、提取主要图像主体的轮廓线条可以有多种方式，例如采用现有的轮廓提取模型进行提取；

而在本发明一个优先的实施例中，可以通过以下方式提取各主要图像主体的轮廓线条，获得各所述待比对图像主体：

a.将每一所述主要图像主体进行颜色聚类，获得每一所述图像主体对应的填充色块；

b.去除所述填充色块的内部颜色，提取出所述填充色块的轮廓线条，获得所述待比对图像主体。

具体的，对主要图像主体进行颜色聚类后，根据其中连续的成片颜色点确定各个填充的填色块，去掉图像中的整片的填色色块，只提取出其中的轮廓线条，得到每张图像中各个主要图像主体的线稿描绘路径，从而得到各个待比对图像主体；

在获得预存的待比对图像主体后，需要计算原始图像主体与预存的待比对图像主体的相似度，具体可采用现有技术中的直方图匹配方。

为了更好的对本发明所提供的方案进行详细的说明，在一个优选的实施例中，通过以下方式，计算原始图像主体与每一待比对图像主体的相似度：

A2、建立一原始图像主体的线稿图像。

B2、将原始图像主体的线稿图像，进行灰度处理和二值化处理(此步骤是为了提高计算机的处理效率，也可以不进行步骤B2)

C2、对原始图像主体的线稿图像等比例缩放，统一设置为预设N＊N大小的尺寸，等比缩放后使得图像内容的长或者宽中最大尺寸的一边贴合到缩放后图布的边缘，相对较小尺寸的宽或长一边则自适应缩放。针对不同大小和图形内容的复杂程度选择合适的N值。例如图2中，对线稿图形A进行缩放时，则采用将图像缩放后放入长＊宽为10*10大小尺寸的画布中。

D2、将等比缩放后的将原始图像主体的线稿图像划分为N＊N的方格区域，如图2，将线稿图形A等分为10*10的方格区域，得到N*N即100个方格矩阵。

E2、将划分好的将原始图像主体的线稿图像分别进行水平和垂直方向的投影，统计水平和垂直方向上每个方格区域的值，使用二进制编码0和1来标识每个方格区域中点的分布情况。其中，标识为1代表该区域有像素点分布，标识为0则代表该区域无像素点分布；再对映射后的颜色区域赋予厚度值，用1/N来表示每一格区域的像素点厚度。统计将原始图像主体的线稿图像的方格区域在水平和垂直2个方向投影后的像素点分布情况及厚度值，得到原始图像主体的线稿图像的像素点分布数据。例如，对图2中的线稿图形A进行像素点分布数据分析时，由于图形A为一个正圆，水平和垂直投影后两个方向上都呈现为一条直线，即水平和垂直方向上的投影后每一格均包含有像素点分布，所以，进行水平投影统计水平映射后图形A的点的分布情况，可以得到数组[1，1，1，1，1，1，1，1，1，1]；进行垂直投影统计垂直映射后图形A的点的分布情况，可以得到数组[1，1，1，1，1，1，1，1，1，1]；接着统计像素点在水平和垂直方向投影后的厚度值，如图，在水平方向上投影时，abcd四格中均分布有像素点，则映射后的厚度为0.4，ef两格中分布有像素点，则映射后的厚度为0.2，依次统计水平方向映射的厚度后，再统计垂直方向映射的厚度，可以得到水平映射后图形A的点分布厚度数组为[0.4，0.2，0.2，0.2，0.2，0.2，0.2，0.2，0.2，0.4]，垂直映射后图形A的点的分布厚度数组为[0.4，0.2，0.2，0.2，0.2，0.2，0.2，0.2，0.2，0.4]。

F2、将上述原始图像主体的线稿图像，替换为待比对图像主体，重复步骤A2、B2、C2、D2、E2，计算待比对图像主体像素点分布数据；

G2、原始图像主体的线稿图像的像素点分布数据，与待比对图像主体的像素点分布数据进行比对，计算相似度。

对于步骤S103、在一个优选的实施例中，在计算出每一待比对图像主体与原始图像主体的相似度后，根据相似度进行排序；从相似度最高的前3个待比对图像主体中，任意挑选出一待比对图像主体作为上述待替换图像主体。

需要说明的是，上述待替换图像主体的确定方式是多样的，在实际情况中，也可以将相似度最高的待比对图像主体，作为上述代替换图像主体，或从相似度最高的前2个待比对图像主体中，挑选出任意一待比对图像主体作为上述待替换图像主体；上述提及的待比对图像主体的确定方式，是示意性的，不作为本方案的限定，其余情况在此不再一一进行扩展。

对于步骤S104、在一个可选的实施例中，所述组合图像的生成方式包括：

将由同一待识别图像生成的待比对图像主体进行排列组合，获得若干所述组合图像。

具体的，例如现在有2张待比对图像分别为、图像B、图像C、其中，图像B对应，待比对图像主体1、待比对图像主体2、待比对图像主体3；图像C对应，待比对图像主体4、待比对图像主体5、待比对图像主体6；

那么执行组合图像的生成步骤时，可以生成以下组合图像：

第一组合图像，包含待比对图像主体1和待比对图像主体2；

第二组合图像，包含待比对图像主体1和待比对图像主体3；

第三组合图像，包含待比对图像主体2和待比对图像主体3；

第四组合图像，包含待比对图像主体1、待比对图像主体2和待比对图像主体3；

第五组合图像，包含待比对图像主体4和待比对图像主体5；

第六组合图像，包含待比对图像主体4和待比对图像主体6；

第七组合图像，包含待比对图像主体5和待比对图像主体6；

第八组合图像，包含待比对图像主体4、待比对图像主体5和待比对图像主体6；

最后将各个待比对图像主体与对应组合图像，(例如待比对图像主体1对应的组合图像为上述第一组合图像、第二组合图像和第四组合图像，即包含待比对图像主体1的组合图像，都为待比对图像主体1对应的组合图像，同理其他待比对图像主体与生成的组合图像的对应关系，也是如此)及它们之间的对应关系存储在服务器中，因此当以待比图像主体1作为待替换图像主体时，则与之对应的组合图像就是上述的第一组合图像、第二组合图像和第四组合图像，而且此时第一组合图像、第二组合图像和第四组合图像中，都是包含了待替换图像主体的。

而在另一个可选的实施例中，所述组合图像的生成方式包括：

剔除所述待识别图像中的待替换图像主体，获得所述待替换图像主体对应的组合图像。

具体的，例如现在有1张待比对图像分别为、图像B其中，图像B对应，待比对图像主体1、待比对图像主体2、待比对图像主体3；

那么执行这一实施例的组合图像生成步骤时，

若以待比对图像主体1为待替换图像主体，则会生成：第一组合图像，其中，第一组合图像包含待比对图像主体2和待比对图像主体3；

若以待比对图像主体2为待替换图像主体，则会生成：第二组合图像，其中，第二组合图像包含待比对图像主体1和待比对图像主体3；

若以待比对图像主体3为待替换图像主体，则会生成：第三组合图像，其中，第三组合图像，包含待比对图像主体1和待比对图像主体2；

若选用这一实施例的方法，来生成对应的组合图像时，那每一个待替换图像主体所对应的组合图像就是唯一的，而且此时的组合图像是不包括待替换图像主体的。

对于步骤S105、由于在步骤是104中，有两种生成组合图像的方法，因此得到的组合图像，也不同，相应的联合绘画图像的生成方式也会有所不同。

在一个可选的实施例中，若是采用的组合图像中，包括待替换图像主体，(即采用上述步骤104中的第一种组合图像生成方式，来生成组合图像)那么此时的模板图像中，也包含了代替换图像主体，则联合绘画图像的生成方式如下：

将所述模板图像中，除所述待替换图像主体外的待比对图像主体，作为待绘制图像主体；

将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述模板图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

即，在对原始图像进行补全的过程中，实际上是将原始图像主体作为待替换图像主体，按模板图像中，待替换图像主体与其他图像主体(即待绘制图像主体)之间位置关系，将其他图像主体(即待绘制图像主体)绘制在原始图像中，从而得到联合绘画图像，使得联合绘画图像与模板图像，保持同样的构图方式，具备同样数量的图像主体。

而在另一个可选的实施例中，若是采用的组合图像中，没有包括待替换图像主体，那么选用的模板图像中，不包含待替换图像主体(即采用上述步骤104中的第二种组合图像生成方式，生成组合图像)，则联合绘画图像的生成方式如下：

将所述模板图像中所有待比对图像主体，作为待绘制图像主体；

将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述待识别图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

即，此时由于模板图像中是不存在待替换图像主体的，因此需要把模板图像中的所有图像主体，都作为需要绘制的图像主体。

针对上述两种绘画方式，在整个绘制的过程中，先将待识别图像中，各待比对图像主体在待识别图像中的大小比例和相对坐标位置的数据进行记录，这样就可以在后续步骤中，获得待替换图像主体与其他待比对图像主体的相对坐标位置数据。

紧接着在绘制之前，先将原始图像根据选取的组合图像的大小进行等比例缩放后，再根据已经记录的坐标位置数据，将其余各个待绘制图像主体依次根据对应的大小比例进行缩放后在画布中的对应坐标位置进行绘制补全。

在本发明上述方法项实施例的基础上提供了装置项实施例：

如图3所示，本发明一实施例提供了一种联合绘画装置、包括原始图像获取模块301、相似度比对模块302、待比对图像主体确定模块303、模板图像确定模块304和绘画模块305；

其中，所述原始图像获取模块301，用于获取原始图像；其中，所述原始图像中包含原始图像主体；

所述相似度比对模块302，用于计算所述原始图像主体与所有预存的待比对图像主体的相似度；

所述待比对图像主体确定模块303，用于根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

所述模板图像确定模块304，用于在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成；

所述绘画模块305，用于根据所述模板图像中，除所述待替换图像主体外的待比对图像主体，对所述原始图像进行补全绘制，获得联合绘画图像。

可以理解的是上述装置项实施例，是与本发明方法项实施例相对应的，本发明实施例提供的一种联合绘画装置，可以实现本发明任意一项方法项实施例提供的联合绘画方法。

在本发明方法项实施例的基础上提供了另一实施例；

本发明另一实施例提供了一种联合绘画终端设备，包括处理器、存储器以及存储在所述存储器中，并被配置为由所述处理执行的计算机程序，所述处理器执行所述计算机程序时，实现如本发明任意一项方法项实施例提供的联合绘画方法。

所述联合绘画终端设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述联合绘画终端设备的控制中心，利用各种接口和线路连接整个联合绘终端设备的各个部分。

所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据手机的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

在本发明方法项实施例的基础上提供了另一实施例；

本发明另一实施例提供了一种计算机可读存储介质，包括所述计算机可读存储介质存储有计算机程序，所述计算机程序运行时，控制所述计算机可读存储机制所在的设备执行如本发明任意一项方法项实施例提供的联合绘画方法。

所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。

需说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外，本发明提供的装置实施例附图中，模块之间的连接关系表示它们之间具有通信连接，具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

通过实施本发明实施例具有如下有益效果：

本发明实施例提供了一种联合绘画方法、装置、移动终端及计算机可读存储介质，所述方法首先，获取原始图像及原始图像中的图像主体，即原始图像主体；然后将原始图像主体与预存的所有待比对图像主体进行比对，计算出原始图像主体与每一待比对图像主体的相似度，紧接着根据相似度，挑选出一待比对图像主体作为待替换图像主体，继而在待替换图像主体对应的若干组合图像中，随机选取出组合图像，作为模板图像；最后将模板图像中除了待替换图像主体外的其余待比对图像主体绘制在原始图像中，获得联合绘画图像；从而实现将模板图像中的待比图像主体补全到原始图像上，使得原始图像的构图更加丰满，图像主体更加丰富。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (5)

1.一种联合绘画方法，其特征在于，包括：

获取原始图像；其中，所述原始图像中包含原始图像主体；

计算所述原始图像主体与所有预存的待比对图像主体的相似度；其中，所述待比对图像主体的生成方式包括：获取待识别图像并根据预设的图像主体识别模型，识别所述待识别图像中的各个图像主体，获得若干已识别图像主体；逐一判断所述已识别图像主体，落在所述待识别图像的主体区域内的图像面积，是否超过第一预设阈值；若是，则将已识别图像主体作为主要图像主体；提取各主要图像主体的轮廓线条，获得各所述待比对图像主体；

根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成，每一所述组合图像的生成方式包括：将由同一待识别图像生成的待比对图像主体进行排列组合以获得若干所述组合图像，或剔除所述待识别图像中的待替换图像主体以获得所述待替换图像主体对应的组合图像；

在将由同一待识别图像生成的待比对图像主体进行排列组合以获得若干所述组合图像时，将所述模板图像中，除所述待替换图像主体外的待比对图像主体，作为待绘制图像主体；将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述模板图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致；

在剔除所述待识别图像中的待替换图像主体以获得所述待替换图像主体对应的组合图像时，将所述模板图像中所有待比对图像主体，作为待绘制图像主体；

将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述待识别图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

2.如权利要求1所述的联合绘画方法，其特征在于，所述图像主体识别模型的建立方法包括：

获取待处理图像，提取所述待处理图像中，各个图像主体的特征向量；

以所述各图像主体的特征向量为输入，以各图像主体的名称为输出，通过卷积神经网络进行训练，获得所述图像主体识别模型。

3.一种联合绘画装置，其特征在于，包括原始图像获取模块、相似度比对模块、待比对图像主体确定模块、模板图像确定模块和绘画模块；

其中，所述原始图像获取模块，用于获取原始图像；其中，所述原始图像中包含原始图像主体；

所述相似度比对模块，用于计算所述原始图像主体与所有预存的待比对图像主体的相似度；其中，所述待比对图像主体的生成方式包括：获取待识别图像并根据预设的图像主体识别模型，识别所述待识别图像中的各个图像主体，获得若干已识别图像主体；逐一判断所述已识别图像主体，落在所述待识别图像的主体区域内的图像面积，是否超过第一预设阈值；若是，则将已识别图像主体作为主要图像主体；提取各主要图像主体的轮廓线条，获得各所述待比对图像主体；

所述待比对图像主体确定模块，用于根据所述相似度，从所有待比对图像主体中，选取一待比对图像主体作为待替换图像主体；

所述模板图像确定模块，用于在与所述待替换图像主体对应的若干组合图像中，选取任意一张组合图像作为模板图像；其中，每一所述组合图像由至少两个待比对图像主体组成，每一所述组合图像的生成方式包括：将由同一待识别图像生成的待比对图像主体进行排列组合以获得若干所述组合图像，或剔除所述待识别图像中的待替换图像主体以获得所述待替换图像主体对应的组合图像；

所述绘画模块，用于在将由同一待识别图像生成的待比对图像主体进行排列组合以获得若干所述组合图像时，将所述模板图像中，除所述待替换图像主体外的待比对图像主体，作为待绘制图像主体；将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述模板图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致；

在剔除所述待识别图像中的待替换图像主体以获得所述待替换图像主体对应的组合图像时，将所述模板图像中所有待比对图像主体，作为待绘制图像主体；将所有所述待绘制图像主体，绘制在所述原始图像中，获得所述联合绘画图像；其中，所述联合绘画图像中，原始图像主体与各所述待绘制图像主体的位置关系，与所述待识别图像中，待替换图像主体与各所述待绘制图像主体的位置关系，保持一致。

4.一种联合绘画终端设备，其特征在于，包括处理器、存储器以及存储在所述存储器中，并被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时，实现如权利要求1-2任意一项所述的联合绘画方法。

5.一种计算机可读存储介质，其特征在于，包括所述计算机可读存储介质存储有计算机程序，所述计算机程序运行时，控制所述计算机可读存储机制所在的设备执行如权利要求1-2中任意一项所述的联合绘画方法。