CN105335990B - 一种人物肖像素材图像生成方法和装置 - Google Patents
一种人物肖像素材图像生成方法和装置 Download PDFInfo
- Publication number
- CN105335990B CN105335990B CN201410247888.9A CN201410247888A CN105335990B CN 105335990 B CN105335990 B CN 105335990B CN 201410247888 A CN201410247888 A CN 201410247888A CN 105335990 B CN105335990 B CN 105335990B
- Authority
- CN
- China
- Prior art keywords
- portrait
- personal
- marked
- mark
- personal portrait
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例公开了一种人物肖像素材图像生成方法和装置,其中所述方法包括:在包含人物肖像的目标图像中识别人物肖像元素;为识别得到的人物肖像元素在预设的肖像素材库中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系;根据查找到的对应的已标注肖像元素对应的肖像素材,标注所述人物肖像元素对应的肖像素材;根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。采用本发明,可实现自动生成人物肖像素材图像,能够明显提升肖像元素的标注效率,提高人物肖像素材图像的生成速度。
Description
技术领域
本发明涉及互联网技术领域,尤其涉及一种人物肖像素材图像生成方法和装置。
背景技术
随着数字媒体技术的快速发展,人们的生活和工作方式也发生了很大的改变,通过计算机生成人物的肖像素材图像在很多领域都有着广泛的应用,例如在移动数字娱乐、视频会议、网络游戏中,采用虚拟的肖像素材图像代替真实的人脸,不仅可以提高网络的数据传输速度,还营造了轻松和谐的氛围。
在现有的肖像素材图像生成技术中,需要专门的标注人员对用户上传的人脸图像进行素材标注,即将用户人脸上的各个肖像元素使用预设的肖像素材进行标注,进而使用标注的肖像素材生成该用户的肖像素材图像。但是,标注人员对图像样本进行标注的方式非常容易受到标注人员的主观影响,浪费人力资源,效率低下。
发明内容
本发明实施例所要解决的技术问题在于,提供一种人物肖像素材图像生成方法和装置,可实现自动生成人物肖像素材图像。
为了解决上述技术问题,本发明实施例提供了一种人物肖像素材图像生成方法,所述方法包括:
为识别得到的人物肖像元素在预设的肖像素材库中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系;
根据查找到的对应的已标注肖像元素对应的肖像素材,标注所述人物肖像元素对应的肖像素材;
根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
相应地,本发明实施例还提供了一种人物肖像素材图像生成装置,包括:
肖像元素识别模块,用于在包含人物肖像的目标图像中识别人物肖像元素;
标注元素查找模块,用于为识别得到的人物肖像元素在预设的肖像素材库中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系;
素材标注模块,用于根据查找到的对应的已标注肖像元素对应的肖像素材,标注所述人物肖像元素对应的肖像素材;
素材图像生成模块,用于根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
本实施例中的人物肖像素材图像生成方法和装置通过为从目标图像中识别出的人物肖像元素查找对应的已标注肖像元素,进而根据已标注肖像元素对应的肖像素材对人物肖像元素进行标注,能够明显提升肖像元素的标注效率,进而提高人物肖像素材图像的生成速度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例中的一种人物肖像素材图像生成方法的流程示意图;
图2是本发明另一实施例中的人物肖像素材图像生成方法的流程示意图;
图3是本发明实施例中的一种人物肖像素材图像生成装置的结构示意图;
图4是本发明实施例中的素材标注模块的结构示意图;
图5是本发明实施例中的眼睛素材库中眼睛对应的肖像素材的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是本发明实施例中的一种人物肖像素材图像生成方法的流程示意图,如图所示本实施例中的人物肖像素材图像生成方法至少可以包括:
S101,在包含人物肖像的目标图像中识别人物肖像元素。
具体的,所述包含人物肖像的目标图像可以为用户在相册中选定的一张图像,也可以为通过摄像头或截屏等方式获取到的包括用户肖像的图像,所述人物肖像可以为头部肖像,也可以为半身、其他部分肖像或全身肖像。所述在包含人物肖像的目标图像中识别得到的多个人物肖像元素可以包括人物五官元素、人物脸型元素、人物发型元素以及人物配饰元素中的任一种或多种,其中所述人物五官元素可以包括左眼、右眼、左眉、右眉、鼻子、嘴巴、左耳、右耳等,人物脸型元素可以包括脸型轮廓元素和脸型立体元素等,人物发型元素可以包括形状、颜色等,人物配饰元素可以包括眼镜、发饰、耳环、项链等。具体实现中,可以通过多种方式在包含人物肖像的目标图像中识别出上述人物肖像元素,例如可以基于图像的灰度特征进行初步识别需要的人物肖像元素位置(区域),进而根据上述人物肖像元素之间的相互位置关系进一步识别出目标图像中上述不同人物肖像元素具体分布位置(区域)。
S102,为识别得到的人物肖像元素在预设的肖像素材库中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系。
具体地,所述预设的肖像素材库可以包括用户自定义的多个肖像素材,进而根据用户预先的标注行为建立多个已标注肖像元素分别与多个肖像素材之间的对应关系,所述肖像素材以及已标注肖像元素分别与多个肖像素材之间的对应关系也可以通过服务器或网络资源中下载得到的,所述肖像素材可以为与每个肖像元素类型对应的线条画、肖像画、卡通画等,例如眼睛对应的肖像素材可以如图5所示,可以在肖像素材库中为每个肖像素材建立一个标识或编号,当用户使用肖像素材库中的某个肖像素材标注某一个图像中的人物肖像元素,可以为为图像中的人物肖像元素标注该肖像素材的标识或编号,同时肖像素材库中可以记录该识别得到的人物肖像元素,以及经过标注的该人物肖像元素与标注的肖像素材之间的对应关系。在具体实现中,可以为从目标图像中识别出的人物肖像元素在肖像素材库中查找对应的已标注肖像元素,所述对应的已标注肖像元素可以为与识别得到的人物肖像元素相同或相似的已标注肖像元素,所述对应的已标注肖像元素可以只有一个,例如与识别得到的人物肖像元素相似度最高的已标注肖像元素,也可以包括相似度高于预设阈值的多个近似的已标注肖像元素,例如从包含人物A的目标图像中识别出A的左眼,进而可以根据识别出的A的左眼在肖像素材库中查找近似的已标注肖像元素,可以包括已标注的与A的左眼较为近似的其他人物的左眼,也可以包括之前已标注的包含人物A的其他图像中的A的左眼。
进一步的,在可选实施例中,可以根据每个识别得到的人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找近似的已标注肖像元素,例如在目标图像中识别得到人物肖像元素包括左眼,则可以仅在肖像素材库中所有左眼的已标注肖像元素中查找近似的已标注肖像元素,而不需要查找其他的已标注肖像元素,节省了大量元素图像比较的计算量。
S103,根据查找到的对应的已标注肖像元素对应的肖像素材,标注所述人物肖像元素对应的肖像素材。
具体的,若S102中只查找到一个与识别得到的人物肖像元素近似的已标注肖像元素,则可以直接将该已标注肖像元素对应的肖像素材标注为该人物肖像元素对应的肖像素材;在可选实施例中,也可以根据S102的查找结果,显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材,进而根据用户的输入指令,确认一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材。例如S102中为目标图像中人物A的左眼查找到相似度超过90%的三个已标注肖像元素A、B以及C,则可以将该三个已标注肖像元素对应的肖像元素显示给用户,提示用户从中选择其中一个肖像素材进行标注,进而获取用户的选择输入指令选择其中一个肖像素材标注为所述人物肖像元素对应的肖像素材。进而在可选实施例中,在显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材时,还可以根据所述已标注肖像元素与所述人物肖像元素的近似度,对所述显示的至少一个已标注肖像元素对应的肖像素材进行排序。
S104,根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
具体的,经过S103可以实现对目标图像中识别出的多个人物肖像元素进行标注,得到目标图像中各个人物肖像元素对应的肖像素材,进而可以根据各个人物肖像元素对应的肖像素材以及预设的人物肖像素材图像生成方法生成目标图像的人物肖像素材图像,例如可以将目标图像上对应位置上的人物肖像元素替换为其标注得到的对应的肖像元素,实际就已经得到了初步的能够表示目标图像中的人物肖像的主要特征的人物肖像素材图像,进一步可以在该初步得到的人物肖像素材图像上添加填充色、轮廓线条或阴影等效果元素,即可得到所需的目标图像的人物肖像素材图像。
本实施例中的人物肖像素材图像生成方法通过为从目标图像中识别出的人物肖像元素查找近似的已标注肖像元素,进而根据已标注肖像元素对应的肖像素材对人物肖像元素进行标注,能够明显提升肖像元素的标注效率,进而提高人物肖像素材图像的生成速度。
图2是本发明另一实施例中的人物肖像素材图像生成方法的流程示意图,本实施例中的人物肖像素材图像生成方法可以由人物肖像素材图像生成装置实施,可以实现在如包括PC(Personal Computer,个人计算机)、平板电脑、手机、智能手机、笔记本电脑或车载终端等用户终端上,也可以实现在网络后台服务器中,如图所示本实施例中的人物肖像素材图像生成方法可以包括:
S201,在包含人物肖像的目标图像中识别出多个人物肖像元素。
具体的,可以参考前文实施例中的S101,本实施例中不再赘述相同细节。本实施例中,在包含人物周某的人物肖像的目标图像中识别得到周某在目标图像中的脸型元素、左眼元素、右眼元素、左眉元素、右眉元素、鼻子元素、嘴巴元素、左耳元素、右耳元素以及发型元素等,进而依次对上述识别得到的元素分别执行S202~S206。
S202,根据人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找近似的已标注肖像元素。
具体地,所述预设的肖像素材库可以包括用户自定义的多个肖像素材,进而根据用户预先的标注行为建立多个已标注肖像元素分别与多个肖像素材之间的对应关系,所述肖像素材以及已标注肖像元素分别与多个肖像素材之间的对应关系也可以通过服务器或网络资源中下载得到的,所述肖像素材可以为与每个肖像元素类型对应的线条画、肖像画、卡通画等,例如眼睛对应的肖像素材可以如图5所示。在可选实施例中,在可以在肖像素材库中为每个肖像素材建立一个标识或编号,当用户使用肖像素材库中的某个肖像素材标注某一个图像中的人物肖像元素,可以为为图像中的人物肖像元素标注该肖像素材的标识或编号,同时肖像素材库中可以记录该识别得到的人物肖像元素,以及经过标注的该人物肖像元素与标注的肖像素材之间的对应关系。
进而在本实施例中肖像素材库中的肖像素材是预先根据对应不同元素类别进行分类的,对应“左眼”元素可以包括多个左眼的肖像素材,对应“发型”元素可以包括多个发型的肖像素材,以此类推,从而本实施例中可以根据每个识别得到的人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找近似的已标注肖像元素,例如在目标图像中识别得到人物肖像元素包括左眼,则可以仅在肖像素材库中所有左眼的已标注肖像元素中查找近似的已标注肖像元素,而不需要查找其他的已标注肖像元素,节省了大量元素图像比较的计算量。在具体实现中,可以为从目标图像中识别出的人物肖像元素在肖像素材库中查找近似的已标注肖像元素,所述近似的已标注肖像元素可以只有一个,也可以包括相似度高于预设阈值的多个近似的已标注肖像元素,例如从包含人物A的目标图像中识别出A的左眼,进而可以根据识别出的A的左眼在肖像素材库中查找近似的已标注肖像元素,可以包括已标注的与A的左眼较为近似的其他人物的左眼,也可以包括之前已标注的包含人物A的其他图像中的A的左眼。
进一步可选的,在人物肖像素材图像生成装置为目标图像生成人物肖像素材图像过程中,可以根据元素类别显示所述肖像素材库中各个元素类别对应的肖像素材的分布信息,以便用户或管理员可以监控肖像素材的分布均衡性,从而可以在出现素材不均衡时及时增加多样化的标注样本,以利于更准确生成人物肖像素材图像。
S203,显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材。
例如S202中为目标图像中人物A的左眼查找到相似度超过90%的三个已标注肖像元素A、B以及C,则可以将该三个已标注肖像元素对应的肖像元素显示给用户,提示用户从中选择其中一个肖像素材进行标注。进而在可选实施例中,在显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材时,还可以根据所述已标注肖像元素与所述人物肖像元素的近似度,对所述显示的至少一个已标注肖像元素对应的肖像素材进行排序。
S204,根据用户的输入指令,确认一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材。
在其他可选实施例中,人物肖像素材图像生成装置也可以自动为识别得到的人物肖像元素标注与其相似度最高的已标注肖像元素对应的肖像素材,或S202中仅找到一个相似度达到预设阈值的已标注肖像元素,则可以自动为该识别得到的人物肖像元素标注与其相似度最高的已标注肖像元素对应的肖像素材。
S205,判断该人物肖像元素标注得到的对应的肖像素材是否为与该人物肖像素材近似度最高的已标注肖像元素对应的肖像素材。
仍以上面为例,S202中为目标图像中人物A的左眼查找到相似度超过90%的三个已标注肖像元素A、B以及C,相似度分别为98%,91%以及91%,若用户选择了B或者C对应的肖像素材对目标图像中A的左眼进行标注,则执行S206,若选择了A即为与该人物肖像素材近似度最高的已标注肖像元素对应的肖像素材,则可以跳过S206执行下一步骤S207。
S206,向用户发出标注一致性提示。
具体实现中,所述一致性提示可以以弹窗或弹出消息的形式显示给用户,例如提示“对图像中左眼的标注与前次相似左眼的标注不一致,是否确认”。
S207,判断是否已标注完所述目标图像中识别得到的所有人物肖像元素。
本实施例中,本次经执行S201在包含人物周某的人物肖像的目标图像中识别得到周某在目标图像中的脸型元素、左眼元素、右眼元素、左眉元素、右眉元素、鼻子元素、嘴巴元素、左耳元素、右耳元素以及发型元素等,例如在为目标图像中的嘴巴元素进行标注后,判断是否还有其他本次识别得到的人物肖像元素未标注,若已标注完所述目标图像中识别得到的所有人物肖像元素则执行S208,否则回到S202对剩余的人物肖像元素进行标注流程。
S208,根据标注得到的所述各个人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
具体的,经过S202~S207可以实现对目标图像中识别出的多个人物肖像元素进行标注,得到目标图像中各个人物肖像元素对应的肖像素材,进而可以根据各个人物肖像元素对应的肖像素材以及预设的人物肖像素材图像生成方法生成目标图像的人物肖像素材图像,例如可以将目标图像上对应位置上的人物肖像元素替换为其标注得到的对应的肖像元素,实际就已经得到了初步的能够表示目标图像中的人物肖像的主要特征的人物肖像素材图像,进一步可以在该初步得到的人物肖像素材图像上添加填充色、轮廓线条或阴影等效果元素,即可得到所需的目标图像的人物肖像素材图像。
S209,根据针对各个人物肖像元素的一致性检测结果对本次针对所述目标图像的标注一致性进行评分。
具体实现中,在S207确认已标注完所述目标图像中识别得到的所有人物肖像元素后的任意时刻,可以根据针对本次识别得到的所有人物肖像元素的标注一致性对本次针对目标图像的标注进行评分,例如可以采用各个识别得到的人物肖像元素批注时使用的肖像素材对应的已标注肖像元素与该人物肖像元素之间的相似度作为该人物肖像元素标注的评分,进而统计所有识别得到的人物肖像元素标注的评分,可以得到本次针对所述目标图像的标注一致性的评分,如可以采用平均值,也可以根据各类人物肖像元素的特征显著性的区别,对至少一类的人物肖像元素进行加权,从而根据加权计算本次针对所述目标图像的标注一致性评分。
本实施例中的人物肖像素材图像生成方法通过为从目标图像中识别出的人物肖像元素查找近似的已标注肖像元素,进而根据已标注肖像元素对应的肖像素材对人物肖像元素进行标注,能够明显提升肖像元素的标注效率,进而提高人物肖像素材图像的生成速度,同时在实施过程中可以对肖像元素的标注一致性进行提示以及评分,可以进一步提高标注肖像元素的准确性以及对于相同目标人物生成的人物肖像素材图像的一致性。
图3是本发明实施例中的一种人物肖像素材图像生成装置的结构示意图;本发明实施例所提及的人物肖像素材图像生成装置可以实现在如包括PC(Personal Computer,个人计算机)、平板电脑、手机、智能手机、笔记本电脑或车载终端等用户终端上,也可以实现在网络后台服务器中,如图所示本实施例中的人物肖像素材图像生成装置至少可以包括:
肖像元素识别模块310,用于在包含人物肖像的目标图像中识别出多个人物肖像元素。
具体的,所述包含人物肖像的目标图像可以为用户在相册中选定的一张图像,也可以为通过摄像头或截屏等方式获取到的包括用户肖像的图像,所述人物肖像可以为头部肖像,也可以为半身、其他部分肖像或全身肖像。所述在包含人物肖像的目标图像中识别得到的多个人物肖像元素可以包括人物五官元素、人物脸型元素、人物发型元素以及人物配饰元素中的任一种或多种,其中所述人物五官元素可以包括左眼、右眼、左眉、右眉、鼻子、嘴巴、左耳、右耳等,人物脸型元素可以包括脸型轮廓元素和脸型立体元素等,人物发型元素可以包括形状、颜色等,人物配饰元素可以包括眼镜、发饰、耳环、项链等。具体实现中,肖像元素识别模块310在包含人物肖像的目标图像中识别出上述人物肖像元素可以通过多种方式,例如可以基于图像的灰度特征进行初步识别需要的人物肖像元素位置(区域),进而根据上述人物肖像元素之间的相互位置关系进一步识别出目标图像中上述不同人物肖像元素具体分布位置(区域)。
标注元素查找模块320,用于分别为每个识别得到的人物肖像元素在预设的肖像素材库中查找近似的已标注肖像元素,所述肖像素材库中包括多个已标注肖像元素和多个肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系。
具体地,所述预设的肖像素材库可以包括用户自定义的多个肖像素材,进而根据用户预先的标注行为建立多个已标注肖像元素分别与多个肖像素材之间的对应关系,所述肖像素材以及已标注肖像元素分别与多个肖像素材之间的对应关系也可以通过服务器或网络资源中下载得到的,所述肖像素材可以为与每个肖像元素类型对应的线条画、肖像画、卡通画等,例如眼睛对应的肖像素材可以如图5所示,可以在肖像素材库中为每个肖像素材建立一个标识或编号,当用户使用肖像素材库中的某个肖像素材标注某一个图像中的人物肖像元素,可以为为图像中的人物肖像元素标注该肖像素材的标识或编号,同时肖像素材库中可以记录该识别得到的人物肖像元素,以及经过标注的该人物肖像元素与标注的肖像素材之间的对应关系。在具体实现中,标注元素查找模块320可以为从目标图像中识别出的人物肖像元素在肖像素材库中查找近似的已标注肖像元素,所述近似的已标注肖像元素可以只有一个,也可以包括相似度高于预设阈值的多个近似的已标注肖像元素,例如从包含人物A的目标图像中识别出A的左眼,进而可以根据识别出的A的左眼在肖像素材库中查找近似的已标注肖像元素,可以包括已标注的与A的左眼较为近似的其他人物的左眼,也可以包括之前已标注的包含人物A的其他图像中的A的左眼。
进一步的,在可选实施例中,肖像素材库中的肖像素材可以预先根据对应不同元素类别进行分类的,对应“左眼”元素可以包括多个左眼的肖像素材,对应“发型”元素可以包括多个发型的肖像素材,以此类推,从而标注元素查找模块320可以根据每个识别得到的人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找近似的已标注肖像元素,例如在目标图像中识别得到人物肖像元素包括左眼,则可以仅在肖像素材库中所有左眼的已标注肖像元素中查找近似的已标注肖像元素,而不需要查找其他的已标注肖像元素,节省了大量元素图像比较的计算量。
素材标注模块330,用于根据查找到的近似的已标注肖像元素对应的肖像素材,标注所述各个人物肖像元素对应的肖像素材。
具体的,若标注元素查找模块320只查找到一个与识别得到的人物肖像元素近似的已标注肖像元素,则素材标注模块330可以直接将该已标注肖像元素对应的肖像素材标注为该人物肖像元素对应的肖像素材。或者当查找到多个与识别得到的人物肖像元素近似的已标注肖像元素,素材标注模块330也可以自动选择相似度最高的已标注肖像元素对应的肖像素材,标注所述人物肖像元素。
在可选实施例中,素材标注模块330可以进一步包括:
推荐素材显示单元331,用于显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材,即根据S102的查找结果,显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材,例如S102中为目标图像中人物A的左眼查找到相似度超过90%的三个已标注肖像元素A、B以及C,则可以将该三个已标注肖像元素对应的肖像元素显示给用户,提示用户从中选择其中一个肖像素材进行标注。进而在可选实施例中,推荐素材显示单元331在显示至少一个与所述人物肖像元素近似的已标注肖像元素对应的肖像素材时,还可以根据所述已标注肖像元素与所述人物肖像元素的近似度,对所述显示的至少一个已标注肖像元素对应的肖像素材进行排序。
标注确认单元332,用于根据用户的输入指令,确认一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材。
素材图像生成模块340,用于根据标注得到的所述各个人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
具体实现中,素材标注模块330可以实现对目标图像中识别出的多个人物肖像元素进行标注,得到目标图像中各个人物肖像元素对应的肖像素材,进而素材图像生成模块340可以根据各个人物肖像元素对应的肖像素材以及预设的人物肖像素材图像生成方法生成目标图像的人物肖像素材图像,例如可以将目标图像上对应位置上的人物肖像元素替换为其标注得到的对应的肖像元素,实际就已经得到了初步的能够表示目标图像中的人物肖像的主要特征的人物肖像素材图像,进一步可以在该初步得到的人物肖像素材图像上添加填充色、轮廓线条或阴影等效果元素,即可得到所需的目标图像的人物肖像素材图像。
在可选实施例中,人物肖像素材图像生成装置进一步还可以包括:
一致性检测模块350,可以用于检测各个人物肖像元素批注使用的肖像素材的一致性,进而还可以判断所述人物肖像元素标注得到的对应的肖像素材是否为与该人物肖像素材近似度最高的已标注肖像元素对应的肖像素材。例如标注元素查找模块320为目标图像中人物A的左眼查找到相似度超过90%的三个已标注肖像元素A、B以及C,相似度分别为98%,91%以及91%,若素材标注模块330选择了B或者C对应的肖像素材对目标图像中A的左眼进行标注,则一致性检测模块350会判断该人物肖像元素标注得到的对应的肖像素材不是与该人物肖像素材近似度最高的已标注肖像元素对应的肖像素材,从而触发一致性提示模块360。
一致性提示模块360,用于若所述一致性检测模块的判断结果为否,则向用户发出标注一致性提示。
具体实现中,所述一致性提示可以以弹窗或弹出消息的形式显示给用户,例如提示“对图像中左眼的标注与前次相似左眼的标注不一致,是否确认”。
评分模块370,用于根据一致性检测模块针对各个人物肖像元素的一致性检测结果对本次针对所述目标图像的标注一致性进行评分。
例如可以采用各个识别得到的人物肖像元素批注时使用的肖像素材对应的已标注肖像元素与该人物肖像元素之间的相似度作为该人物肖像元素标注的评分,进而统计所有识别得到的人物肖像元素标注的评分,可以得到本次针对所述目标图像的标注一致性的评分,如可以采用平均值,也可以根据各类人物肖像元素的特征显著性的区别,对至少一类的人物肖像元素进行加权,从而根据加权计算本次针对所述目标图像的标注一致性评分。
在可选实施例中,人物肖像素材图像生成装置进一步还可以包括:
素材分布显示模块380,用于根据元素类别显示所述肖像素材库中各个元素类别对应的肖像素材的分布信息,以便用户或管理员可以监控肖像素材的分布均衡性,从而可以在出现素材不均衡时及时增加多样化的标注样本,以利于更准确生成人物肖像素材图像。
本发明实施例中的人物肖像素材图像生成装置可以通过为从目标图像中识别出的人物肖像元素查找近似的已标注肖像元素,进而根据已标注肖像元素对应的肖像素材对人物肖像元素进行标注,能够明显提升肖像元素的标注效率,进而提高人物肖像素材图像的生成速度,同时在实施过程中可以对肖像元素的标注一致性进行提示以及评分,可以进一步提高标注肖像元素的准确性以及对于相同目标人物生成的人物肖像素材图像的一致性。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (10)
1.一种人物肖像素材图像生成方法,其特征在于,所述方法包括:
在包含人物肖像的目标图像中识别人物肖像元素;
根据识别得到的人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系,所述对应的已标注肖像元素为与识别得到的人物肖像元素相似度最高或相似度高于预设阈值的已标注肖像元素;
显示至少一个与所述人物肖像元素对应的已标注肖像元素对应的肖像素材,根据所述已标注肖像元素与所述人物肖像元素的相似度,对所述显示的至少一个已标注肖像元素对应的肖像素材进行排序;
根据用户的输入指令,将一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材;
根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像。
2.如权利要求1所述的人物肖像素材图像生成方法,其特征在于,所述在包含人物肖像的目标图像中识别得到的人物肖像元素包括人物五官元素、人物脸型元素、人物发型元素以及人物配饰元素中的任一种或多种。
3.如权利要求1所述的人物肖像素材图像生成方法,其特征在于,所述将一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材之后还包括:
判断所述人物肖像元素标注得到的对应的肖像素材是否为与该人物肖像素材相似度最高的已标注肖像元素对应的肖像素材;
若判断结果为否,则向用户发出标注一致性提示。
4.如权利要求1所述的人物肖像素材图像生成方法,其特征在于,所述将一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材之后还包括:
分别检测各个人物肖像元素批注使用的肖像素材的一致性;
根据针对各个人物肖像元素的一致性检测结果对本次针对所述目标图像的标注一致性进行评分。
5.如权利要求1所述的人物肖像素材图像生成方法,其特征在于,所述方法还包括:
根据元素类别显示所述肖像素材库中各个元素类别对应的肖像素材的分布信息。
6.一种人物肖像素材图像生成装置,其特征在于,包括:
肖像元素识别模块,用于在包含人物肖像的目标图像中识别人物肖像元素;
标注元素查找模块,用于根据识别得到的人物肖像元素所属的元素类别,在肖像素材库中该元素类别的已标注肖像元素中查找对应的已标注肖像元素,所述肖像素材库中包括已标注肖像元素和肖像素材,以及经过标注得到的所述已标注肖像元素和肖像素材之间的对应关系,所述对应的已标注肖像元素为与识别得到的人物肖像元素相似度最高或相似度高于预设阈值的已标注肖像元素;
素材标注模块,用于根据查找到的对应的已标注肖像元素对应的肖像素材,标注所述人物肖像元素对应的肖像素材;
素材图像生成模块,用于根据标注得到的所述人物肖像元素对应的肖像素材,生成所述目标图像的人物肖像素材图像;
其中所述素材标注模块包括:
推荐素材显示单元,用于显示至少一个与所述人物肖像元素对应的已标注肖像元素对应的肖像素材,并根据所述已标注肖像元素与所述人物肖像元素的相似度,对所述显示的至少一个已标注肖像元素对应的肖像素材进行排序;
标注确认单元,用于根据用户的输入指令,确认一个已标注肖像元素对应的肖像素材标注为所述人物肖像元素对应的肖像素材。
7.如权利要求6所述的人物肖像素材图像生成装置,其特征在于,所述肖像元素识别模块在包含人物肖像的目标图像中识别得到的人物肖像元素包括人物五官元素、人物脸型元素、人物发型元素以及人物配饰元素中的任一种或多种。
8.如权利要求6所述的人物肖像素材图像生成装置,其特征在于,还包括:
一致性检测模块,用于判断所述人物肖像元素标注得到的对应的肖像素材是否为与该人物肖像素材相似度最高的已标注肖像元素对应的肖像素材;
一致性提示模块,用于若所述一致性检测模块的判断结果为否,则向用户发出标注一致性提示。
9.如权利要求6所述的人物肖像素材图像生成装置,其特征在于,还包括:
一致性检测模块,用于分别检测各个人物肖像元素批注使用的肖像素材的一致性;
评分模块,根据一致性检测模块针对各个人物肖像元素的一致性检测结果对本次针对所述目标图像的标注一致性进行评分。
10.如权利要求6所述的人物肖像素材图像生成装置,其特征在于,还包括:
素材分布显示模块,用于根据元素类别显示所述肖像素材库中各个元素类别对应的肖像素材的分布信息。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410247888.9A CN105335990B (zh) | 2014-06-05 | 2014-06-05 | 一种人物肖像素材图像生成方法和装置 |
PCT/CN2015/080569 WO2015184971A1 (en) | 2014-06-05 | 2015-06-02 | Method and apparatus for generating human portrait material image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410247888.9A CN105335990B (zh) | 2014-06-05 | 2014-06-05 | 一种人物肖像素材图像生成方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105335990A CN105335990A (zh) | 2016-02-17 |
CN105335990B true CN105335990B (zh) | 2019-08-23 |
Family
ID=54766162
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410247888.9A Active CN105335990B (zh) | 2014-06-05 | 2014-06-05 | 一种人物肖像素材图像生成方法和装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105335990B (zh) |
WO (1) | WO2015184971A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107220273B (zh) * | 2017-04-07 | 2021-01-01 | 广东省科技基础条件平台中心 | 一种动漫人物人脸搜索方法 |
CN107967667A (zh) * | 2017-12-21 | 2018-04-27 | 广东欧珀移动通信有限公司 | 素描的生成方法、装置、终端设备和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101034481A (zh) * | 2007-04-06 | 2007-09-12 | 湖北莲花山计算机视觉和信息科学研究院 | 一种肖像画的自动生成方法 |
CN102509316A (zh) * | 2011-09-23 | 2012-06-20 | 上海华勤通讯技术有限公司 | 移动终端以及图像漫画化方法 |
CN102542586A (zh) * | 2011-12-26 | 2012-07-04 | 暨南大学 | 一种基于移动终端的个性化卡通肖像生成系统及方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8031970B2 (en) * | 2007-08-27 | 2011-10-04 | Arcsoft, Inc. | Method of restoring closed-eye portrait photo |
CN101159064B (zh) * | 2007-11-29 | 2010-09-01 | 腾讯科技(深圳)有限公司 | 画像生成系统以及按照图像生成画像的方法 |
-
2014
- 2014-06-05 CN CN201410247888.9A patent/CN105335990B/zh active Active
-
2015
- 2015-06-02 WO PCT/CN2015/080569 patent/WO2015184971A1/en active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101034481A (zh) * | 2007-04-06 | 2007-09-12 | 湖北莲花山计算机视觉和信息科学研究院 | 一种肖像画的自动生成方法 |
CN102509316A (zh) * | 2011-09-23 | 2012-06-20 | 上海华勤通讯技术有限公司 | 移动终端以及图像漫画化方法 |
CN102542586A (zh) * | 2011-12-26 | 2012-07-04 | 暨南大学 | 一种基于移动终端的个性化卡通肖像生成系统及方法 |
Non-Patent Citations (2)
Title |
---|
Pixa: 设计师专用图片管理工具;Mac App;《Pixa: 设计师专用图片管理工具 – Mac玩儿法(https://www.waerfa.com/pixa-screenshot-capturing-tool-with-picture-manager-organizer-mac)》;20131018;第2-4页 |
将数字增白美容技法用于DIY卡通肖像;彭革刚 等;《电脑与信息技术》;20121231;第20卷(第6期);第1-3页 |
Also Published As
Publication number | Publication date |
---|---|
CN105335990A (zh) | 2016-02-17 |
WO2015184971A1 (en) | 2015-12-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11321385B2 (en) | Visualization of image themes based on image content | |
CN106803057B (zh) | 图像信息处理方法及装置 | |
US10019779B2 (en) | Browsing interface for item counterparts having different scales and lengths | |
CN107995415A (zh) | 一种图像处理方法、终端及计算机可读介质 | |
CN108234591A (zh) | 基于身份验证装置的内容数据推荐方法、装置和存储介质 | |
CN108121957A (zh) | 美颜素材的推送方法及装置 | |
CN109729426A (zh) | 一种视频封面图像的生成方法及装置 | |
CN106202316A (zh) | 基于视频的商品信息获取方法及装置 | |
CN106202317A (zh) | 基于视频的商品推荐方法及装置 | |
CN105447125A (zh) | 一种电子设备及化妆辅助方法 | |
CN108629339A (zh) | 图像处理方法及相关产品 | |
CN108256432A (zh) | 一种指导化妆的方法及装置 | |
CN113362263B (zh) | 变换虚拟偶像的形象的方法、设备、介质及程序产品 | |
CN106162303B (zh) | 信息处理方法、信息处理装置及用户设备 | |
CN108600632A (zh) | 拍照提示方法、智能眼镜及计算机可读存储介质 | |
CN108182232A (zh) | 基于电子书的人物展示方法、电子设备及计算机存储介质 | |
CN109947510A (zh) | 一种界面推荐方法及装置、计算机设备 | |
CN106156237A (zh) | 信息处理方法、信息处理装置及用户设备 | |
US20170262991A1 (en) | Browsing interface for item counterparts having different scales and lengths | |
CN107801061A (zh) | 广告数据匹配方法、装置及系统 | |
CN111191503A (zh) | 一种行人属性识别方法、装置、存储介质及终端 | |
CN109544262A (zh) | 物品推荐方法、装置、电子设备、系统及可读存储介质 | |
CN109191585A (zh) | 信息处理方法、装置、设备及计算机可读存储介质 | |
CN105335990B (zh) | 一种人物肖像素材图像生成方法和装置 | |
CN112083863A (zh) | 图像处理方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |