CN106469460A - 马赛克图像生成的方法和装置及电子设备 - Google Patents

马赛克图像生成的方法和装置及电子设备 Download PDF

Info

Publication number
CN106469460A
CN106469460A CN201510502346.6A CN201510502346A CN106469460A CN 106469460 A CN106469460 A CN 106469460A CN 201510502346 A CN201510502346 A CN 201510502346A CN 106469460 A CN106469460 A CN 106469460A
Authority
CN
China
Prior art keywords
mosaic
image
unit block
color character
mosaic unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510502346.6A
Other languages
English (en)
Other versions
CN106469460B (zh
Inventor
高洋
安山
缪亚希
冯颖慧
张洪明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Tmall Technology Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201510502346.6A priority Critical patent/CN106469460B/zh
Publication of CN106469460A publication Critical patent/CN106469460A/zh
Application granted granted Critical
Publication of CN106469460B publication Critical patent/CN106469460B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了六种马赛克图像的生成方法及装置,另外还公开了一种电子设备。其中一种马赛克图像的生成方法包括:预先创建填充图像数据库;将待处理图像划分为若干个马赛克单元块;针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;以各个马赛克单元块的色彩特征值为依据,在所述填充图像数据库中查找候选填充图像;使用所述填充图像填充所述马赛克单元块,形成马赛克图像。该方法的填充图像数据库中记录的内容包括上述候选填充图像以及该候选图像的主体特征信息,该数据库中保存的候选填充图像是经过图像的主体特征提取之后形成的,所以该候选填充图像在填充至马赛克图像之后,形成的马赛克图像中具有较高的可辨识性。

Description

马赛克图像生成的方法和装置及电子设备
技术领域
本申请涉及图像信息处理领域,具体涉及六种马赛克图像生成的方法。相应于上述方法,本申请同时还涉及六种马赛克图像生成的装置以及一种电子设备。
背景技术
马赛克是图像处理中的一种常见的处理方法,利用图像信息生成马赛克图片不但可以为用户创造出一种全新的视觉体验模式,还可以为用户呈现出较多的视觉信息。
现有的马赛克生成技术是将待处理的图片划分成若干个小块,并计算每个小块对应的色彩均值,根据每个小块的色彩均值,从预先设置的图像数据库中搜索匹配图片,用搜索到的匹配图片填充相应的小块,最后生成的图片即为马赛克图片。
但是,上述方法只是简单的将一张图片缩小后填充至马赛克小块中,用户很难辨别出马赛克图片的每个小块中填充图片的内容,因此采用现有的方法制成的马赛克图片的可读性和可辨识性差。
发明内容
本申请提供一种马赛克图像生成的方法和装置,以解决现有技术中存在的上述问题。
本申请还提供另外五种马赛克图像生成的方法和装置。
本申请提供的第一种马赛克图像的生成方法,包括:
预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述从候选图像中提取图像主体特征包括下述步骤:
采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域;
将所述显著区域作为前景图像,图像其余部分作为背景图像;
使用图像分割算法从所述前景图像中获得图像的主体区域;
提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
可选的,在所述采用图像显著性检测方法对候选图像进行检测的步骤中,图像显著性检测方法采用以下方法的一种或者是以下方法的结合:全局唯一性方法、色彩空间分布方法。
可选的,所述使用图像分割算法从所述前景图像中获得图像的主体区域的步骤中,所述图像分割算法为GrabCut方法、分水岭分割方法或R-CNN分割方法。
可选的,所述提取所述主体区域的图像特征,作为所述图像主体特征的步骤中,所述图像主体特征为图像的色彩特征值和/或表征图像的图像信息。
可选的,所述将待处理图像划分为若干个马赛克单元块步骤中,相邻的马赛克单元块之间设置有间隔,所述间隔中保存有待处理图像的图像特征信息。
可选的,所述图像特征信息包括纹理信息和细节信息。
可选的,所述间隔的范围是大于等于1个像素,且小于等于5个像素。
可选的,在所述针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值之后,执行下述操作:
对所述每个马赛克单元块的色彩特征值进行归一化处理,获得归一化色彩特征值;所述归一化处理使得预设范围内的色彩特征值归为一个特征值;
将归一化色彩特征值替代各个马赛克单元块的色彩特征值的原始值,作为后续步骤中使用的马赛克单元块的色彩特征值。
可选的,所述归一化处理公式为:
V′i=Vi-Vi%3
其中,i为特征维数,%为取余计算,V′i是归一化特征值,Vi是色彩特征值。
可选的,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤之前,进行如下步骤:将色彩特征值相同的马赛克单元块记录为特征相似马赛克单元块组;
在查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤中,对某个特定色彩特征值的马赛克单元块组,根据该马赛克单元块组包含的马赛克单元块个数,查找数量相同的不同候选填充图像;上述候选填充图像分别匹配该马赛克单元块组中的不同的马赛克单元块。
可选的,在所述针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值之后,执行下述操作:
对所述马赛克单元块的色彩特征值进行随机扰动,后续步骤中,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用;所述随机扰动后的色彩特征值根据扰动值不同而不同。
可选的,所述随机扰动的公式为:
V″i=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},V″i是扰动后色彩特征值,Vi是扰动前的色彩特征值。
可选的,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤中,所述预定的方法为:
将每个马赛克单元块具有的色彩特征值与所述填充图像数据库中的候选填充图像的色彩特征值作比对,查找出色彩特征值相匹配的候选填充图像;具体比对查找方法采用如下方法之一:Kd-Tree方法、枚举法、回溯法。
可选的,采用所述Kd-Tree方法时,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤包括如下步骤:
将所述填充图像数据库中的候选填充图像的主体特征值以树状结构排布;
将待比对的马赛克单元块的色彩特征值作为查询数据与树状树结构中的每个根结点比对,查找出最优根结点距离最近的值对应的图像主体特征值,该图像主体特征值对应的候选填充图像即为与所述马赛克单元块相匹配的候选填充图像。
可选的,所述针对所述马赛克单元块进行色彩特征提取,具体是基于HSI色彩特征提取或者基于CLD色彩特征提取。
可选的,所述将待处理图像划分为若干个马赛克单元块中的待处理图像采用下述步骤获取:
显示有预设图像的屏幕接收触控操作;
所述触控操作相应位置的图像转化为待处理图像。
可选的,所述触控操作相应位置的图像转化为待处理图像具体是,以所述触控操作的相应位置为中心,预设长度为半径的圆的范围内设定为待处理图像。
可选的,所述预设长度随所述触控操作持续时间增加而增大。
可选的,在所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,执行下述操作:
激活所述马赛克图像中的马赛克单元块;
将激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
可选的,其特征在于,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
可选的,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
可选的,所述预设信息采用浮动窗口的方式显示。
可选的,所述将所述激活后的马赛克单元块链接至相应的预设信息之后,执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
可选的,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
本申请提供的第一种马赛克图像的生成装置,包括:
数据库创建单元,用于预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述候选填充图像查找单元还包括:
显著区域获取子单元,用于采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域;
前景图像获得子单元,用于将所述显著区域作为前景图像,图像其余部分作为背景图像;
主体区域获取子单元,用于使用图像分割算法从所述前景图像中获得图像的主体区域;
主体特征提取子单元,用于提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
本申请提供的第二种马赛克图像的生成方法,包括:
将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述间隔的图像上保存有待处理图像的原始信息。
可选的,所述间隔的图像上保存有待处理图像的原始信息,所述原始信息为待处理图像的纹理信息和细节信息。
可选的,所述间隔的范围是大于等于1个像素,且小于等于5个像素。
本申请提供的第二种马赛克图像的生成装置,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请提供的第三种马赛克图像的生成方法,其特征在于,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并;
根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述聚类处理包括归一化处理方法、Kmeans处理方法或Clara处理方法。
可选的,所述聚类处理采用归一化处理方法时,所述对所述色彩特征值进行聚类处理,获得聚类的色彩特征值,具体是,
对所述每个马赛克块的色彩特征值进行归一化处理,获得归一化特征值;所述归一化处理使得预设范围内的色彩特征值归为一个特征值;
将归一化特征值相同的马赛克单元块合并为特征相似马赛克单元块。
可选的,所述归一化处理公式为:
V′i=Vi-Vi%3
其中,i为色彩特征维数,%为取余计算,V′i是归一化特征值,Vi是色彩特征值。
本申请提供的第三种马赛克图像的生成装置,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
聚类处理单元,用于对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并;
候选填充图像查找单元,用于根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请提供的第四种马赛克图像的生成方法,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同;
根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述随机扰动的公式为:
V″i=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},V″i是扰动后色彩特征值,Vi是扰动前的色彩特征值。
本申请提供的第四种马赛克图像的生成装置,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
随机扰动单元,用于对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同;
候选填充图像查找单元,用于根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请提供的第五种马赛克图像的生成方法,包括:
在触摸屏幕上显示的待马赛克图像;
所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域;
将所述马赛克区域的图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域步骤中,所述触控操作相应位置的图像激活为马赛克区域具体是,以所述触控操作的相应位置为中心,预设长度为半径的圆的范围内设定为所述马赛克区域。
可选的,所述预设长度随所述触控操作持续时间增加而增大。
可选的,在所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,执行下述操作:
激活所述马赛克图像中的马赛克单元块;
将所述激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息
可选的,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
可选的,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
可选的,所述预设信息采用浮动窗口的方式显示。
可选的,所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,还可以执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
可选的,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
本申请提供的第五种马赛克图像的生成装置,包括:
待马赛克图像显示单元,用于在触摸屏幕上显示的待马赛克图像;
马赛克区域激活单元,用于所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域;
马赛克单元块划分单元,用于将所述马赛克区域的图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请提供的第六种马赛克图像的生成方法,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
激活所述马赛克图像中的马赛克单元块;
将所述激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
上述激活后的马赛克单元块共同形成马赛克图像。
可选的,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
可选的,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
可选的,所述预设信息采用浮动窗口的方式显示。
可选的,所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,还可以执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
可选的,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
可选的,所述预设的触控操作为长按屏幕。
本申请提供的第六种马赛克图像的生成装置,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的候选填充图像;
填充单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
马赛克单元块激活单元,用于激活所述马赛克图像中的马赛克单元块;
预设信息链接单元,用于将所述激活后的马赛克单元块链接至相应的预设信息;
预设信息显示单元,用于当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
马赛克图像形成单元,用于上述激活后的马赛克单元块共同形成马赛克图像。
本申请另外还提供一种电子设备,所述电子设备包括:输入设备、输出设备、处理器和存储器,所述存储器用于存储解决用户IP地址记录稀疏性的软件程序,所述软件程序在被所述处理器读取执行时,执行如下操作:
预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
与现有技术相比,本申请具有以下优点:
本申请提供一种马赛克图像的生成方法,其特征在于,包括:预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;将待处理图像划分为若干个马赛克单元块;针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。该方法的填充图像数据库中记录的内容包括上述候选填充图像以及该候选图像的主体特征信息。而本申请提供的方案中的数据库中保存的候选填充图像是经过图像的主体特征提取之后形成的,因此,该候选填充图像在填充至马赛克图像之后,该候选填充图像在马赛克图像中具有较高的可辨识性。
附图说明
图1是本申请第一实施例提供的第一种马赛克图像的生成方法的流程图;
图2是本申请第一实施例提供的从候选图像中提取图像主体特征的方法的流程图;
图3是本申请第一实施例提供的待处理图像的效果图;
图4是本申请第一实施例提供的划分的马赛克单元块之间具有间隔的效果图;
图5是本申请第一实施例提供的马赛克单元块的色彩特征值进行归一化方法的流程图;
图6是本申请第一实施例提供的比对查找方法中Kd-Tree方法的流程图;
图7是本申请第一实施例提供的生成的马赛克图像的效果图;
图8是本申请第一实施例提供的将所述待处理图像生成具有交互式的马赛克图像的方法流程图;
图9是本申请第二实施例提供的第一种马赛克图像的生成装置的结构示意图;
图10是本申请第三实施例提供的第二种马赛克图像的生成方法的流程图;
图11是本申请第四实施例提供的第二种马赛克图像的生成装置的结构示意图;
图12是本申请第五实施例提供的第三种马赛克图像的生成方法的流程图;
图13是本申请第六实施例提供的第三种马赛克图像的生成装置的结构示意图;
图14是本申请第七实施例提供的第四种马赛克图像的生成方法的流程图;
图15是本申请第八实施例提供的第四种马赛克图像的生成装置的结构示意图;
图16是本申请第九实施例提供的第五种马赛克图像的生成方法的流程图;
图17是本申请第九实施例提供的图像接收触控操作的效果图;
图18是本申请第九实施例提供的马赛克区域被激活的效果图;
图19是本申请第十实施例提供的第五种马赛克图像的生成装置的结构示意图;
图20是本申请第十一实施例提供的第六种马赛克图像的生成方法的流程图;
图21是本申请第十二实施例提供的第六种马赛克图像的生成装置的结构示意图;
图22是本申请提供的一种电子设备的示意图。
具体实施方式
本申请第一实施例提供第一种马赛克图像的生成方法,请参照图1,该方法包括:
步骤S101,预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像。
预先创建填充图像数据库,创建的该填充图像数据库用于为马赛克图像生成时提供填充图像。
相比于传统数据库中的填充图像,本申请的方案中创建的填充图像数据库中候选填充图像是原有的候选图像提取主体特征之后形成的图像。因此,该填充图像数据库中记录的内容包括上述候选填充图像以及该候选图像的主体特征信息。
由于传统的数据库中的填充图像未经过任何处理,因此形成的马赛克图像的每个马赛克小块中的图像即为填充图像,该填充图像在一般情况下不具有可读性,并且马赛克小块中的填充图像的辨识度不高。而本申请第一实施例提供的方案中的数据库中保存的候选填充图像是经过图像的主体特征提取之后形成的,因此,该候选填充图像在填充至马赛克图像之后,该候选填充图像在马赛克图像中具有较高的可辨识性。
上述对候选图像的主体特征提取过程进行简单描述,以下对该过程进行进一步的详述。
从上述候选图像到候选填充图像的过程是对候选图像的主体特征提取的过程,具体过程请参考图2,图2是本申请第一实施例提供的从候选图像中提取图像主体特征的方法的流程图,该方法包括步骤S201-S204:
步骤S201,采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域。
将预设的准备填充至马赛克图像中的图像设定为候选图像,对所述候选图像采用显著性方法进行检测,从而获取图像的显著性区域。并可以对该图像的显著性区域进行标识。
具体是,所述图像的显著性检测方法包括全局唯一性方法(GlobalUniqueness)或者色彩空间分布方法(Color Spatial Distribution),或者是两个方法的结合。
所述全局唯一性方法和色彩空间分布方法均是根据图像或者色彩的权重进行识别划分的。例如:设定需要将显著性区域为图像中的人物图像,则根据全局唯一性方法和色彩空间分布方法可以将图像中的人物图像检测出来,并将该人物图像部分标识为显著性区域。
需要说明的是,图像主体检测的方法具有多种,本发明仅是采用上述两种方法实现该方案而已,本文未提及的其他图像显著性检测方法同样适用于本申请。
步骤S202,将所述显著区域作为前景图像,图像其余部分作为背景图像。
根据步骤S201中获得的显著性区域,并对该显著性区域及候选图像做出相应的修改,其中,将该显著性区域作为图像的前景图像,而显著性区域之外的其余图像部分作为图像的背景图像。此时,将候选图像通过前景和背景进行区分处理。
此时,所述显著性区域对应的图像可称为是候选填充图像,该候选填充图像用于填充至马赛克图像的单元块中。
步骤S203,使用图像分割算法从所述前景图像中获得图像的主体区域。
根据上述描述,所述显著性区域是作为前景图像显示的,因此,可通过图像分割算法在所述前景图像中检测出主体区域。
所述图像分割就是把图像分成若干个特定的、具有独特性质的区域并提取预设目标的技术和过程。现有的图像分割方法主要包括:GrabCut方法、分水岭分割方法或R-CNN分割方法。
经过图像分割算法检测出的所述主体区域相比于与显著性区域而言更具体,更具有应用价值。因为主体区域是在显著性区域的基础上,将所需要的图像通过轮廓进行检测分离。例如,上述中显著性区域为包含有人物图像的区域,而主体区域则是通过该人物图像中的人物轮廓将人物特征提取出来,即所述主体区域仅包含有人物图像中的人物。
步骤S204,提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
将上述获取的主体区域的图像进行图像特征提取,提取出的图像特征作为图像主体特征,所述图像主体特征中记录有所述主体区域的色彩特征值,以及表征该所述候选填充图像的数字化的图像信息。
需要说明的是,虽然上述图像主体特征记录的仅是主体区域的数据信息,但是,所述候选填充图像是所述显著性区域所对应的图像。
每个填充图像采用图像主体检测方法后检测出显著性区域,该显著性区域对应于该填充图像的候选填充图像。之后,对显著性区域所在的前景图像进行图像分割,获得图像的主体区域,并提取该主体区域的数据信息记录在在所述填充图像数据库中。
上述所有步骤均在创建填充图像数据库的过程,以下步骤S102-S105是对马赛克图像生成的后续操作步骤。
步骤S102,将待处理图像划分为若干个马赛克单元块。
该步骤是针对预生成马赛克图像的待处理图像,将该待处理图像按照预设的划分尺寸划分为若干个马赛克单元块。
所述待处理图像可以是任意格式的电子图像,这些格式包括但不限于JPG、PNG、TIF、BMP。
为直观的展示所述待处理图像,以及之后步骤中将该待处理图像生成的过程和最终生成的马赛克图像,图3是本申请第一实施例提供的待处理图像的效果图。可参照图3理解所述待处理图像。
所述马赛克单元块可以是传统的马赛克单元块,即将整个待处理图像划分为相同大小,排列整齐的小块,每个小块的面积可以预先设定。因此,经过划分,所述待处理图像被处理为仅由多个马赛克小块组成的图像。
另外,在所述马赛克单元块的划分过程中还可以将相邻的马赛克单元块之间设置有一定的间隔,而所述间隔中保存有待处理图像的原始信息。
图4是本申请第一实施例提供的划分的马赛克单元块之间具有间隔的效果图;请参照图4对该间隔进行间接直观的理解。
所有相邻的马赛克单元块之间的间隔中保存的所述图像特征信息包括纹理信息和细节信息。由于在划分所述马赛克单元块的时候保留了原来待处理图像的原始信息,而该间隔中的图像在后续的步骤中不会被候选填充图像填充,从而使生成的马赛克图像有效保留了原图的部分纹理和特征,因此,提高了生成的马赛克图像的清晰度和可辨识性。
上述马赛克单元块之间的间隔的距离可以预先设定,一般所述间隔的范围是大于等于1个像素,且小于等于5个像素。优选的,所述间隔可以设置为2个像素的大小。
该步骤S102是对待处理图像进行马赛克单元块的划分过程,划分为若干个马赛克单元块的图像可进行下述步骤的操作。
步骤S103,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值。
该步骤主要是针对上述已经划分出的马赛克单元块,对所有马赛克单元块进行色彩特征的提取,将提取出的色彩特征进行数值化处理,并将经过数值化处理的所述色彩特征作为每个马赛克单元块的色彩特征值。
所述针对所述马赛克单元块进行色彩特征提取,具体可以采用基于HSI色彩特征提取或者基于CLD色彩特征提取。
所述色彩特征值一般采用三维向量进行记录,该三维向量分别为色相、明度和纯度。
针对每个马赛克单元块的色彩特征,其可能存在不均匀性,因此,可以对每个马赛克单元块的色彩特征进行归一化处理。具体如下:
请参照图5,图5是本申请第一实施例提供的马赛克单元块的色彩特征值进行归一化方法的流程图。该方法包括步骤S501-S502:
步骤S501,对所述每个马赛克单元块的色彩特征值进行归一化处理,获得归一化色彩特征值。
所述归一化处理使得预设范围内的色彩特征值归为一个特征值,因此,可能会存在多个马赛克单元块的特征值相同的情况,所以,可以将色彩特征值相同的马赛克单元块记录为特征相似马赛克单元块组。形成的马赛克单元块组之后可以在后续候选填充图像的查找匹配过程中,对某个特定色彩特征值的马赛克单元块组,根据该马赛克单元块组包含的马赛克单元块个数,查找数量相同的不同候选填充图像。上述候选填充图像分别匹配该马赛克单元块组中的不同的马赛克单元块。
所述归一化处理公式可采用下述公式:
V′i=Vi-Vi%3
其中,i为特征维数,%为取余计算,V′i是归一化特征值,Vi是色彩特征值。
上述公式是本申请的一个优选方案,其他任何可以对色彩特征进行归一化处理的公式均适用于本申请。
步骤S502,将归一化色彩特征值替代各个马赛克单元块的色彩特征值的原始值,作为后续步骤中使用的马赛克单元块的色彩特征值。
该步骤是将归一化处理后的色彩特征值替换为原始值,在后续步骤可以采用经过归一化处理后的色彩特征值作为参考数据。
上述归一化过程是本方案中的一个优选方案,在对所述马赛克单元块的特征提取中可以采用也可以不采用。
另外,通过对每个马赛克单元块进行特征提取,获取每个马赛克单元块的色彩特征值之后可以对每一个色彩特征值进行随机扰动。
在后续步骤中,可以使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用;所述随机扰动后的色彩特征值根据扰动值不同而不同。
所述随机扰动的公式为:
V″i=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},V″i是扰动后色彩特征值,Vi是扰动前的色彩特征值。
本申请方案中增加了对每个马赛克单元块的色彩特征值进行特征扰动的步骤,对每个马赛克单元块的特征在不影响最终生成效果的基础上,对色彩特征值进行随机扰动,使得每个马赛克单元块的特征存在不确定性,从而最终的马赛克图像的填充结果也会存在差异性,当用户对本次结果不满意时,还可以选择再次生成。
步骤S104,以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像。
上述已经通过不同的方式获得每个马赛克单元块的色彩特征值,以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中查找符合规定的候选填充图像。
在步骤S101中已经描述所述填充图像数据库中包含的内容,在所述数据库中保存有已经处理过的候选填充图像以及对应该候选填充图像的图像主体特征,在该图像主体特征中包含有该候选填充图像的色彩特征等信息。
在步骤S104中主要是将提取的马赛克单元块的色彩特征值与数据库中的候选填充图像的色彩特征信息采用预定的方法查找出与马赛克单元块的色彩特征值最为接近和匹配的候选填充图像。
其中,所述预定的方法为:将每个马赛克单元块具有的色彩特征值与所述填充图像数据库中的候选填充图像的色彩特征值作比对,查找出色彩特征值相匹配的候选填充图像。具体比对查找的方法可以采用如下方法之一:Kd-Tree方法、枚举法、回溯法。
上述比对方法中常用的是本申请方案中的Kd-Tree方法,请参照图6,图6是本申请第一实施例提供的比对查找方法中Kd-Tree方法的流程图。该方法包括步骤S601-S602:
步骤S601,将所述填充图像数据库中的候选填充图像的主体特征值以树状结构排布。
Kd-Tree搜索方法是基于二叉树结构的一种比对查询方法,该方法可以将超大数据采用超矩阵进行划分,并且可以快速求解出超大数据空间中的最近邻的值。
Kd-Tree方法首先是将原始的特征序列分布成树状结构分布,该树状结构是一种平衡结构的二叉树结构,其具有以下性质:
若该树状结构的左子树不空,则左子树上所有结点的第d维的值均小于它的根结点的第d维的值,其中d为根结点的分辨器值;
若该树状结构的右子树不空,则右子树上所有节点的第d维的值均大于或等于它的根结点的第d维的值。
其中,该树状结构的左右子树也分别为Kd-Tree。
在本方案中,采用Kd-Tree方法时,将所述填充图像数据库中的候选填充图像的主体特征值作为原始的特征序列分布成树状结构分布。
步骤S602,将待比对的马赛克单元块的色彩特征值作为查询数据与树状结构中的每个根结点比对,查找出最优根结点距离最近的值对应的图像主体特征值,该图像主体特征值对应的候选填充图像即为与所述马赛克单元块相匹配的候选填充图像。
所述Kd-Treed方法中是将查询数据与每个根结点的对比,因此,直到比对查找到最优的根结点为止,该搜索方法才会终止,查找到的最优的根结点对应的最近的n个值即可以作为搜索的匹配值,也就是结果值。
在本方案中,查询数据是马赛克单元块的色彩特征值,由于树状结构中的原始数据是候选填充图像相应的图像主体特征值,为了在众多的候选填充中搜索出与马赛克单元块最匹配的图像,可以将该查询数据与树状结构中的每个根结点比对,查找出最优根结点距离最近的值对应的图像主体特征值,则该图像主体特征值对应的候选填充图像即为与所述马赛克单元块相匹配的候选填充图像。
每个马赛克单元块均可以按照该步骤查找出其相应的最匹配的候选填充图像。
采用Kd-Tree方法进行搜索查询,并通过预先设置的填充图像数据库的数据建立Kd-Tree结构的索引,有效提高了整个的搜索匹配的速度。
步骤S105,使用与各个马赛克单元块相匹配候选填充图像填充所述马赛克单元块,形成马赛克图像。
由于在步骤S104中各个马赛克单元块均有与其相匹配的候选填充图像,将对应的候选填充图像填充至相应的马赛克单元块中即可形成马赛克图像。
图7是本申请第一实施例提供的生成的马赛克图像的效果图。
另外,上述方法是将整个待处理图像生成为马赛克图像,为了更加优化生成的马赛克图像,可以设置生成一种可以局部马赛克且具有交互式的马赛克图像。具体方法如下:
上述中步骤S102中有介绍,待处理图像可以是JPG、PNG、TIF、BMP中任意一种,而此处介绍的待处理图像采用两个步骤完成。
第一步,显示有预设图像的屏幕接收触控操作。
所述屏幕上显示有预设的图像,该图像是一张普通的图像。所述屏幕可以接收所述触控操作,并且接收触控操作之后将进行第二步的操作。
第二步,所述触控操作相应位置的图像转化为待处理图像。
所述屏幕在接收所述触控操作之后,接收触控操作相应位置的图像将被设置成为待处理图像。
具体是,屏幕上显示的图像以接收到的所述触控操作的相应位置为中心,预设长度为半径的圆的范围内的图像设定为待处理图像。
所述预设长度随所述触控操作持续时间增加而增大。
在上述两个步骤的基础上,将所述待处理图像生成具有交互式的马赛克图像。请参照图8,图8是本申请第一实施例提供的将所述待处理图像生成具有交互式的马赛克图像的方法流程图。该方法是在步骤S105的所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后执行的,具体执行操作如下:
步骤S801,激活所述马赛克图像中的马赛克单元块。
将所述马赛克单元块激活成为单独的个体,每个马赛克单元块均可以单独操作。
步骤S802,将激活后的马赛克单元块链接至相应的预设信息。
由于已经将每个马赛克单元块激活为单独的个体,所以可以对每个马赛克单元块进行不同方式的处理。例如可以将某些马赛克单元块链接至其相应的预设信息。
所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
此外,在将激活后的马赛克单元块链接至相应的预设信息之后还可以执行下述操作:
所述马赛克图像接收预设的触控操作;触摸屏幕上显示马赛克单元块中所有填充图像的预设信息,所述填充图像的预设信息可以以列表形式显示。这两个步骤是为了方便当用户需要详细查看马赛克区域商品信息时,可以直接选择列表模式进行查看。
步骤S803,当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
所述预设信息可以采用浮动窗口的方式显示。
当所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
采用上述生成具有交互式马赛克图像的方法,可以使得用户在可交互的设备上自主的选择需要马赛克化的区域,同时也可以使得生成的马赛克图像不再仅仅是一张马赛克图像,而是通过对每个马赛克单元块的活化,使得用户可以更加简洁方便直观的查看每个马赛克单元块中填充的图像的相应信息及详细信息,为用户提供便利。
相应上述马赛克图像的生成方法,本申请第二实施例提供第一种马赛克图像的生成装置,图9是本申请第二实施例提供的第一种马赛克图像的生成装置的结构示意图,请参照图9,该装置包括:
数据库创建单元901,用于预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
马赛克单元块划分单元902,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元903,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元904,用于以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
马赛克图像形成单元905,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
可选的,所述候选填充图像查找单元还包括:
显著区域获取子单元,用于采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域;
前景图像获得子单元,用于将所述显著区域作为前景图像,图像其余部分作为背景图像;
主体区域获取子单元,用于使用图像分割算法从所述前景图像中获得图像的主体区域;
主体特征提取子单元,用于提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
本申请第三实施例还提供第二种马赛克图像的生成方法,图10是本申请第三实施例提供的第二种马赛克图像的生成方法的流程图,请参照图10,该方法包括:
步骤S1001,将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔。
所述间隔的图像上保存有待处理图像的原始信息,所述原始信息为待处理图像的纹理信息和细节信息。
所有相邻的马赛克单元块之间的间隔中保存的所述图像特征信息包括纹理信息和细节信息。由于在划分所述马赛克单元块的时候保留了原来待处理图像的原始信息,而该间隔中的图像在后续的步骤中不会被候选填充图像填充,从而使生成的马赛克图像有效保留了原图的部分纹理和特征,因此,提高了生成的马赛克图像的清晰度和可辨识性。
上述马赛克单元块之间的间隔的距离可以预先设定,一般所述间隔的范围是大于等于1个像素,且小于等于5个像素。优选的,所述间隔可以设置为2个像素的大小。
步骤S1002,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值。
该步骤可参考第一实施例中的步骤S103,由于步骤S103对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S103即可。
步骤S1003,以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的填充图像。
该步骤中所涉及的预先创建的填充图像数据库,该数据库可以是传统的包含待处理图像全部内容的数据库,也可是本申请第一实施例中涉及的包含有图像主体特征和候选填充图像的数据库,无论是哪种数据库在该步骤中均适用。
此外,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的填充图像的步骤的优选方案可以参考第一实施例中的步骤S601-S602。在数据库中搜索查找匹配填充图像也可以采用传统的方式进行。
步骤S1004,使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
该步骤可参考第一实施例中的步骤S105,由于步骤S105对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S105即可。
相应上述马赛克图像的生成方法,本申请第四实施例提供第二种马赛克图像的生成装置,图11是本申请第四实施例提供的第二种马赛克图像的生成装置的结构示意图,请参照图11,该装置包括:
马赛克单元块划分单元1101,用于将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔;
色彩特征值获取单元1102,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元1103,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元1104,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请第五实施例提供第三种马赛克图像的生成方法,图12是本申请第五实施例提供的第三种马赛克图像的生成方法的流程图,请参照图12,该方法包括:包括:
步骤S1201,将待处理图像划分为若干个马赛克单元块。
该步骤可参考第一实施例中的步骤S102,由于步骤S102对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S102即可。
步骤S1202,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值。
该步骤可参考第一实施例中的步骤S103,由于步骤S103对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S103即可。
步骤S1203,对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并。
所述聚类处理包括归一化处理方法、Kmeans处理方法或Clara处理方法。
一般情况下,对所述色彩特征值进行归一化处理,所述归一化处理使得预设范围内的色彩特征值归为一个特征值,因此,可能会存在多个马赛克单元块的特征值相同的情况,所以,可以将色彩特征值相同的马赛克单元块记录为特征相似马赛克单元块组。形成的马赛克单元块组之后可以在后续候选填充图像的查找匹配过程中,对某个特定色彩特征值的马赛克单元块组,根据该马赛克单元块组包含的马赛克单元块个数,查找数量相同的不同候选填充图像。上述候选填充图像分别匹配该马赛克单元块组中的不同的马赛克单元块。
所述聚类处理采用归一化处理方法时,所述对所述色彩特征值进行聚类处理,获得聚类的色彩特征值,具体是,对所述每个马赛克块的色彩特征值进行归一化处理,获得归一化特征值;所述归一化处理使得预设范围内的色彩特征值归为一个特征值;将归一化特征值相同的马赛克单元块合并为特征相似马赛克单元块。
所述归一化处理公式可采用下述公式:
V′i=Vi-Vi%3
其中,i为特征维数,%为取余计算,V′i是归一化特征值,Vi是色彩特征值。
上述公式是本申请的一个优选方案,其他任何可以对色彩特征进行归一化处理的公式均适用于本申请。
步骤S1204,根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的填充图像。
该步骤中所涉及的预先创建的填充图像数据库,该数据库可以是传统的包含待处理图像全部内容的数据库,也可是本申请第一实施例中涉及的包含有图像主体特征和候选填充图像的数据库,无论是哪种数据库在该步骤中均适用。
此外,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的填充图像的步骤的优选方案可以参考第一实施例中的步骤S601-S602。在数据库中搜索查找匹配填充图像也可以采用传统的方式进行。
步骤S1205,使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
该步骤可参考第一实施例中的步骤S105,由于步骤S105对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S105即可。
相应上述马赛克图像的生成方法,本申请第六实施例提供第三种马赛克图像的生成装置,图13是本申请第六实施例提供的第三种马赛克图像的生成装置的结构示意图,请参照图13,该装置包括:
马赛克单元块划分单元1301,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元1302,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
聚类处理单元1303,用于对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并;
候选填充图像查找单元1304,用于根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的候选填充图像;
马赛克图像形成单元1305,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请第七实施例提供第四种马赛克图像的生成方法,图14是本申请第七实施例提供的第四种马赛克图像的生成方法的流程图,请参照图14,该方法包括:
步骤S1401,将待处理图像划分为若干个马赛克单元块。
该步骤可参考第一实施例中的步骤S102,由于步骤S102对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S102即可。
步骤S1402,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值。
该步骤可参考第一实施例中的步骤S103,由于步骤S103对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S103即可。
步骤S1403,对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同。
所述随机扰动的公式为:
V″i=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},V″i是扰动后色彩特征值,Vi是扰动前的色彩特征值。
本申请方案中增加了对每个马赛克单元块的色彩特征值进行特征扰动的步骤,对每个马赛克单元块的特征在不影响最终生成效果的基础上,对色彩特征值进行随机扰动,使得每个马赛克单元块的特征存在不确定性,从而最终的马赛克图像的填充结果也会存在差异性,当用户对本次结果不满意时,还可以选择再次生成。
步骤S1404,根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像。
将扰动后的色彩特征值作为相应马赛克单元块当前的色彩特征值,将扰动后的色彩特征值与图像数据库中的图像相匹配。
步骤S1405,使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
该步骤可参考第一实施例中的步骤S105,由于步骤S105对该步骤进行了详述,在此不再做详细的介绍,具体内容请参考步骤S105即可。
本方法中增加了对每个马赛克单元块的色彩特征值进行特征扰动的步骤,对每个马赛克单元块的特征在不影响最终生成效果的基础上,对色彩特征值进行随机扰动,使得每个马赛克单元块的特征存在不确定性,从而最终的马赛克图像的填充结果也会存在差异性,当用户对本次结果不满意时,还可以选择再次生成。
相应上述马赛克图像的生成方法,本申请第八实施例提供第四种马赛克图像的生成装置,图15是本申请第八实施例提供的第四种马赛克图像的生成装置的结构示意图,请参照图15,该装置包括:
马赛克单元块划分单元1501,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元1502,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
随机扰动单元1503,用于对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同;
候选填充图像查找单元1504,用于根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元1505,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请第九实施例提供第五种马赛克图像的生成方法,图16是本申请第九实施例提供的第五种马赛克图像的生成方法的流程图,请参照图16,该方法包括:
步骤S1601,在触摸屏幕上显示的待马赛克图像。
所述屏幕上显示有预设的待马赛克的图像,该图像是一张普通的图像。所述屏幕可以接收所述触控操作,并且接收触控操作之后将进行下步的操作。
步骤S1602,所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域。
图17是本申请第九实施例提供的图像接收触控操作的效果图,图18是本申请第九实施例提供的马赛克区域被激活的效果图。可通过上述两个效果图直观的理解该步骤。
此外,屏幕上显示的图像以接收到的所述触控操作的相应位置为中心,预设长度为半径的圆的范围内的图像设定为待处理图像。
所述预设长度随所述触控操作持续时间增加而增大。
所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
此外,在将激活后的马赛克单元块链接至相应的预设信息之后还可以执行下述操作:
所述马赛克图像接收预设的触控操作;触摸屏幕上显示马赛克单元块中所有填充图像的预设信息,所述填充图像的预设信息可以以列表形式显示。这两个步骤是为了方便当用户需要详细查看马赛克区域商品信息时,可以直接选择列表模式进行查看。
步骤S1603,将所述马赛克区域的图像划分为若干个马赛克单元块。
步骤S1604,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值。
步骤S1605,以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的填充图像。
步骤S1606,使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
上述步骤S1603-S1606均可参考第一实施例相应的步骤。
此外,在步骤S1606所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后还可以执行如下操作:
激活所述马赛克图像中的马赛克单元块。
具体是,将所述马赛克单元块激活成为单独的个体,每个马赛克单元块均可以单独操作。
将激活后的马赛克单元块链接至相应的预设信息。
具体是,由于已经将每个马赛克单元块激活为单独的个体,所以可以对每个马赛克单元块进行不同方式的处理。例如可以将某些马赛克单元块链接至其相应的预设信息。
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
具体是,所述预设信息可以采用浮动窗口的方式显示。
当所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
采用上述生成具有交互式马赛克图像的方法,可以使得用户在可交互的设备上自主的选择需要马赛克化的区域,同时也可以使得生成的马赛克图像不再仅仅是一张马赛克图像,而是通过对每个马赛克单元块的活化,使得用户可以更加简洁方便直观的查看每个马赛克单元块中填充的图像的相应信息及详细信息,为用户提供便利。
相应上述马赛克图像的生成方法,本申请第十实施例提供第五种马赛克图像的生成装置,图19是本申请第十实施例提供的第五种马赛克图像的生成装置的结构示意图,请参照图19,该装置包括:
待马赛克图像显示单元1901,用于在触摸屏幕上显示的待马赛克图像;
马赛克区域激活单元1902,用于所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域;
马赛克单元块划分单元1903,用于将所述马赛克区域的图像划分为若干个马赛克单元块;
色彩特征值获取单元1904,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元1905,用于以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的候选填充图像;
马赛克图像形成单元1906,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请第十一实施例提供第六种马赛克图像的生成方法,图20是本申请第十一实施例提供的第六种马赛克图像的生成方法的流程图,请参照图20,该方法包括:
步骤S2001,将待处理图像划分为若干个马赛克单元块。
步骤S2002,针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
步骤S2003,以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的填充图像;
步骤S2004,使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
步骤S2005,激活所述马赛克图像中的马赛克单元块;
步骤S2006,将所述激活后的马赛克单元块链接至相应的预设信息;
步骤S2007,当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
步骤S2008,上述激活后的马赛克单元块共同形成马赛克图像。
优选地,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
优选地,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
优选地,所述预设信息采用浮动窗口的方式显示。
优选地,所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,还可以执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
优选地,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
优选地,所述预设的触控操作为长按屏幕。
上述方法的具体过程可参考第九实施例提供的马赛克图像的生成方法。
相应上述马赛克图像的生成方法,本申请第十二实施例提供第六种马赛克图像的生成装置,图21是本申请第十二实施例提供的第六种马赛克图像的生成装置的结构示意图,请参照图21,该装置包括:
马赛克单元块划分单元2101,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元2102,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元2103,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的候选填充图像;
填充单元2104,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
马赛克单元块激活单元2105,用于激活所述马赛克图像中的马赛克单元块;
预设信息链接单元2106,用于将所述激活后的马赛克单元块链接至相应的预设信息;
预设信息显示单元2107,用于当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
马赛克图像形成单元2108,用于上述激活后的马赛克单元块共同形成马赛克图像。
本申请还提供的一种电子设备,图22是本申请提供的一种电子设备的示意图,请参照图22,所述电子设备包括:输入设备2201、输出设备2202、处理器2203和存储器2204,所述存储器用于存储解决用户IP地址记录稀疏性的软件程序,所述软件程序在被所述处理器读取执行时,执行如下操作:
预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
本申请虽然以较佳实施例公开如上,但其并不是用来限定本申请,任何本领域技术人员在不脱离本申请的精神和范围内,都可以做出可能的变动和修改,因此本申请的保护范围应当以本申请权利要求所界定的范围为准。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
1、计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitorymedia),如调制的数据信号和载波。
2、本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

Claims (59)

1.一种马赛克图像的生成方法,其特征在于,包括:
预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
2.根据权利要求1所述的马赛克图像的生成方法,其特征在于,所述从候选图像中提取图像主体特征包括下述步骤:
采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域;
将所述显著区域作为前景图像,图像其余部分作为背景图像;
使用图像分割算法从所述前景图像中获得图像的主体区域;
提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
3.根据权利要求2所述的马赛克图像的生成方法,其特征在于,在所述采用图像显著性检测方法对候选图像进行检测的步骤中,图像显著性检测方法采用以下方法的一种或者是以下方法的结合:全局唯一性方法、色彩空间分布方法。
4.根据权利要求2所述的马赛克图像的生成方法,其特征在于,所述使用图像分割算法从所述前景图像中获得图像的主体区域的步骤中,所述图像分割算法为GrabCut方法、分水岭分割方法或R-CNN分割方法。
5.根据权利要求2所述的马赛克图像的生成方法,其特征在于,所述提取所述主体区域的图像特征,作为所述图像主体特征的步骤中,所述图像主体特征为图像的色彩特征值和/或表征图像的图像信息。
6.根据权利要求1所述的马赛克图像的生成方法,其特征在于,所述将待 处理图像划分为若干个马赛克单元块步骤中,相邻的马赛克单元块之间设置有间隔,所述间隔中保存有待处理图像的图像特征信息。
7.根据权利要求6所述的马赛克图像的生成方法,其特征在于,所述图像特征信息包括纹理信息和细节信息。
8.根据权利要求6所述的马赛克图像的生成方法,其特征在于,所述间隔的范围是大于等于1个像素,且小于等于5个像素。
9.根据权利要求1所述的马赛克图像的生成方法,其特征在于,在所述针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值之后,执行下述操作:
对所述每个马赛克单元块的色彩特征值进行归一化处理,获得归一化色彩特征值;所述归一化处理使得预设范围内的色彩特征值归为一个特征值;
将归一化色彩特征值替代各个马赛克单元块的色彩特征值的原始值,作为后续步骤中使用的马赛克单元块的色彩特征值。
10.根据权利要求9所述的马赛克图像的生成方法,其特征在于,所述归一化处理公式为:
Vi′=Vi-Vi%3
其中,i为特征维数,%为取余计算,Vi′是归一化特征值,Vi是色彩特征值。
11.根据权利要求9所述的马赛克图像的生成方法,其特征在于,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤之前,进行如下步骤:将色彩特征值相同的马赛克单元块记录为特征相似马赛克单元块组;
在查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤中,对某个特定色彩特征值的马赛克单元块组,根据该马赛克单元块组包含的马赛克单元块个数,查找数量相同的不同候选填充图像;上述候选填充图像分别匹配该马赛克单元块组中的不同的马赛克单元块。
12.根据权利要求1所述的马赛克图像的生成方法,其特征在于,在所述针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值之后,执行下述操作:
对所述马赛克单元块的色彩特征值进行随机扰动,后续步骤中,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用;所述随机扰动后的色彩特征值根据扰动值不同而不同。
13.根据权利要求12所述的马赛克图像的生成方法,其特征在于,所述随机扰动的公式为:
Vi″=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},Vi″是扰动后色彩特征值,Vi是扰动前的色彩特征值。
14.根据权利要求1所述的马赛克图像的生成方法,其特征在于,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤中,所述预定的方法为:
将每个马赛克单元块具有的色彩特征值与所述填充图像数据库中的候选填充图像的色彩特征值作比对,查找出色彩特征值相匹配的候选填充图像;具体比对查找方法采用如下方法之一:Kd-Tree方法、枚举法、回溯法。
15.根据权利要求14所述的马赛克图像的生成方法,其特征在于,采用所述Kd-Tree方法时,所述以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像的步骤包括如下步骤:
将所述填充图像数据库中的候选填充图像的主体特征值以树状结构排布;
将待比对的马赛克单元块的色彩特征值作为查询数据与树状树结构中的每个根结点比对,查找出最优根结点距离最近的值对应的图像主体特征值,该图像主体特征值对应的候选填充图像即为与所述马赛克单元块相匹配的候选填充图像。
16.根据权利要求1所述的马赛克图像的生成方法,其特征在于,所述针对所述马赛克单元块进行色彩特征提取,具体是基于HSI色彩特征提取或者基于CLD色彩特征提取。
17.根据权利要求1所述的马赛克图像的生成方法,其特征在于,所述将待处理图像划分为若干个马赛克单元块中的待处理图像采用下述步骤获取:
显示有预设图像的屏幕接收触控操作;
所述触控操作相应位置的图像转化为待处理图像。
18.根据权利要求17所述的马赛克图像的生成方法,其特征在于,所述触控操作相应位置的图像转化为待处理图像具体是,以所述触控操作的相应位置为中心,预设长度为半径的圆的范围内设定为待处理图像。
19.根据权利要求18所述的马赛克图像的生成方法,其特征在于,所述预设长度随所述触控操作持续时间增加而增大。
20.根据权利要求1所述的马赛克图像的生成方法,其特征在于,在所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,执行下述操作:
激活所述马赛克图像中的马赛克单元块;
将激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
21.根据权利要求20所述的马赛克图像的生成方法,其特征在于,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
22.根据权利要求21所述的马赛克图像的生成方法,其特征在于,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
23.根据权利要求20所述的马赛克图像的生成方法,其特征在于,所述预设信息采用浮动窗口的方式显示。
24.根据权利要求20所述的马赛克图像的生成方法,其特征在于,所述将所述激活后的马赛克单元块链接至相应的预设信息之后,执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
25.根据权利要求24所述的马赛克图像的生成方法,其特征在于,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
26.一种马赛克图像的生成装置,其特征在于,包括:
数据库创建单元,用于预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
27.根据权利要求26所述的马赛克图像的生成装置,其特征在于,所述候选填充图像查找单元还包括:
显著区域获取子单元,用于采用图像显著性检测方法对候选图像进行检测,获得图像的显著区域;
前景图像获得子单元,用于将所述显著区域作为前景图像,图像其余部分作为背景图像;
主体区域获取子单元,用于使用图像分割算法从所述前景图像中获得图像的主体区域;
主体特征提取子单元,用于提取所述主体区域的图像特征,作为所述图像主体特征,该图像主体特征所记录的信息即为数字化的所述候选填充图像。
28.一种马赛克图像的生成方法,其特征在于,包括:
将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
29.根据权利要求28所述的马赛克图像的生成方法,其特征在于,所述间隔的图像上保存有待处理图像的原始信息。
30.根据权利要求29所述的马赛克图像的生成方法,其特征在于,所述间隔的图像上保存有待处理图像的原始信息,所述原始信息为待处理图像的纹理信息和细节信息。
31.根据权利要求28所述的马赛克图像的生成方法,其特征在于,所述间隔的范围是大于等于1个像素,且小于等于5个像素。
32.一种马赛克图像的生成装置,其特征在于,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块,相邻的马赛克单元块之间设置有间隔;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
33.一种马赛克图像的生成方法,其特征在于,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并;
根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
34.根据权利要求33所述的马赛克图像的生成方法,其特征在于,所述聚类处理包括归一化处理方法、Kmeans处理方法或Clara处理方法。
35.根据权利要求34所述的马赛克图像的生成方法,其特征在于,所述聚类处理采用归一化处理方法时,所述对所述色彩特征值进行聚类处理,获得聚类的色彩特征值,具体是,
对所述每个马赛克块的色彩特征值进行归一化处理,获得归一化特征值;所述归一化处理使得预设范围内的色彩特征值归为一个特征值;
将归一化特征值相同的马赛克单元块合并为特征相似马赛克单元块。
36.根据权利要求35所述的马赛克图像的生成方法,其特征在于,所述归一化处理公式为:
Vi′=Vi-Vi%3
其中,i为色彩特征维数,%为取余计算,Vi′是归一化特征值,Vi是色彩特征值。
37.一种马赛克图像的生成装置,其特征在于,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
聚类处理单元,用于对所述色彩特征值进行聚类处理,获得聚类后的色彩特征值,所述聚类处理是指将预定范围内的特征值进行合并;
候选填充图像查找单元,用于根据每个马赛克单元块聚类后的色彩特征值,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征值相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
38.一种马赛克图像的生成方法,其特征在于,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同;
根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
39.根据权利要求38所述的马赛克图像的生成方法,其特征在于,所述随机扰动的公式为:
Vi″=Vi+a
其中,i为色彩特征维数,a为随机扰动值,取值范围为{0,1,2},Vi″是扰动后色彩特征值,Vi是扰动前的色彩特征值。
40.一种马赛克图像的生成装置,其特征在于,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
随机扰动单元,用于对所述色彩特征值进行随机扰动,使用所述随机扰动后的马赛克单元块的色彩特征值作为所述马赛克单元块的色彩特征值使用,随机扰动后的色彩特征值根据扰动值不同而不同;
候选填充图像查找单元,用于根据每个马赛克单元块所对应的扰动后的色彩特征值在预先创建的填充图像数据库中查找出与每个小块的色彩特征相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
41.一种马赛克图像的生成方法,其特征在于,包括:
在触摸屏幕上显示的待马赛克图像;
所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域;
将所述马赛克区域的图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
42.根据权利要求41所述的马赛克图像的生成方法,其特征在于,所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域步骤中,所述触控操作相应位置的图像激活为马赛克区域具体是,以所述触控操作的相应位置为中心,预设长度为半径的圆的范围内设定为所述马赛克区域。
43.根据权利要求42所述的马赛克图像的生成方法,其特征在于,所述预设长度随所述触控操作持续时间增加而增大。
44.根据权利要求41所述的马赛克图像的生成方法,其特征在于,在所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,执行下述操作:
激活所述马赛克图像中的马赛克单元块;
将所述激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
45.根据权利要求44所述的马赛克图像的生成方法,其特征在于,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
46.根据权利要求45所述的马赛克图像的生成方法,其特征在于,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
47.根据权利要求44所述的马赛克图像的生成方法,其特征在于,所述预设信息采用浮动窗口的方式显示。
48.根据权利要求41所述的马赛克图像的生成方法,其特征在于,所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,还可以执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
49.根据权利要求48所述的马赛克图像的生成方法,其特征在于,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
50.一种马赛克图像的生成装置,其特征在于,包括:
待马赛克图像显示单元,用于在触摸屏幕上显示的待马赛克图像;
马赛克区域激活单元,用于所述待马赛克图像接收预设的触控操作,所述触控操作相应位置的图像激活为马赛克区域;
马赛克单元块划分单元,用于将所述马赛克区域的图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预设的图像填充库中查找与该色彩特征值相匹配的候选填充图像;
马赛克图像形成单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
51.一种马赛克图像的生成方法,其特征在于,包括:
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
激活所述马赛克图像中的马赛克单元块;
将所述激活后的马赛克单元块链接至相应的预设信息;
当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
上述激活后的马赛克单元块共同形成马赛克图像。
52.根据权利要求51所述的马赛克图像的生成方法,其特征在于,所述预设信息包括下述信息的一种或者多种:填充图像的缩略图、填充图像中物品的简介、填充图像中物品的详细信息、填充图像中物品的价格。
53.根据权利要求52所述的马赛克图像的生成方法,其特征在于,所述预设信息为填充图像的缩略图时,所述当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息,即为显示所述填充图像的缩略图;若所述填充图像的缩略图被点击,则显示所述缩略图中物品的链接页面。
54.根据权利要求51所述的马赛克图像的生成方法,其特征在于,所述预设信息采用浮动窗口的方式显示。
55.根据权利要求51所述的马赛克图像的生成方法,其特征在于,所述使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像之后,还可以执行下述操作:
所述马赛克图像接收预设的触控操作;
触摸屏幕上显示马赛克单元块中所有填充图像的预设信息。
56.根据权利要求55所述的马赛克图像的生成方法,其特征在于,所述触摸屏幕上显示马赛克单元块中所有填充图像的预设信息具体是,所述填充图像的预设信息以列表形式显示。
57.根据权利要求55所述的马赛克图像的生成方法,其特征在于,所述预设的触控操作为长按屏幕。
58.一种马赛克图像的生成装置,其特征在于,包括:
马赛克单元块划分单元,用于将待处理图像划分为若干个马赛克单元块;
色彩特征值获取单元,用于针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩特征值;
候选填充图像查找单元,用于以各个马赛克单元块具有的色彩特征值为依据,在预先创建的填充图像数据库中查找出与每个马赛克单元块的色彩特征相匹配的候选填充图像;
填充单元,用于使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块;
马赛克单元块激活单元,用于激活所述马赛克图像中的马赛克单元块;
预设信息链接单元,用于将所述激活后的马赛克单元块链接至相应的预设信息;
预设信息显示单元,用于当所述马赛克单元块被点击时,所述触摸屏幕上显示该马赛克单元块所链接的所述预设信息。
马赛克图像形成单元,用于上述激活后的马赛克单元块共同形成马赛克图像。
59.一种电子设备,其特征在于,所述电子设备包括:输入设备、输出设备、处理器和存储器,所述存储器用于存储解决用户IP地址记录稀疏性的软件程序,所述软件程序在被所述处理器读取执行时,执行如下操作:
预先创建填充图像数据库,所述填充图像数据库中记录有从候选图像中提取图像主体特征以及所述图像主体特征所对应的候选填充图像;
将待处理图像划分为若干个马赛克单元块;
针对所述马赛克单元块进行色彩特征提取,获得每个马赛克单元块的色彩 特征值;
以各个马赛克单元块具有的色彩特征值为依据,在所述填充图像数据库中记录的候选填充图像中,以预定的方法查找候选填充图像主体特征中色彩特征值与该马赛克单元块的色彩特征值匹配的候选填充图像;
使用与各个马赛克单元块相匹配填充图像填充所述马赛克单元块,形成马赛克图像。
CN201510502346.6A 2015-08-14 2015-08-14 马赛克图像生成的方法和装置及电子设备 Active CN106469460B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510502346.6A CN106469460B (zh) 2015-08-14 2015-08-14 马赛克图像生成的方法和装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510502346.6A CN106469460B (zh) 2015-08-14 2015-08-14 马赛克图像生成的方法和装置及电子设备

Publications (2)

Publication Number Publication Date
CN106469460A true CN106469460A (zh) 2017-03-01
CN106469460B CN106469460B (zh) 2019-07-23

Family

ID=58214922

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510502346.6A Active CN106469460B (zh) 2015-08-14 2015-08-14 马赛克图像生成的方法和装置及电子设备

Country Status (1)

Country Link
CN (1) CN106469460B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107133920A (zh) * 2017-06-13 2017-09-05 华侨大学 一种基于视觉特征的马赛克拼图的自动生成方法
CN110287435A (zh) * 2019-05-21 2019-09-27 百度在线网络技术(北京)有限公司 网页展现方法、系统和机器可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101739697A (zh) * 2008-11-25 2010-06-16 王源源 一种图像马赛克拼图的合成方法及系统
CN102609894A (zh) * 2012-01-14 2012-07-25 暨南大学 一种马赛克图像的合成方法及其装置
US8437542B2 (en) * 2009-09-04 2013-05-07 Sony Corporation Image processing apparatus, method, and program
CN104091357A (zh) * 2014-07-14 2014-10-08 厦门大学 一种利用主题相关图片的在线马赛克图片生成方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101739697A (zh) * 2008-11-25 2010-06-16 王源源 一种图像马赛克拼图的合成方法及系统
US8437542B2 (en) * 2009-09-04 2013-05-07 Sony Corporation Image processing apparatus, method, and program
CN102609894A (zh) * 2012-01-14 2012-07-25 暨南大学 一种马赛克图像的合成方法及其装置
CN104091357A (zh) * 2014-07-14 2014-10-08 厦门大学 一种利用主题相关图片的在线马赛克图片生成方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HAE-YEOUN LEE: "Automatic Photo Mosaic Algorithm using Feature-based Block Matching and Intensity Adjustment", 《JOURNAL OF CONVERGENCE INFORMATION TECHNOLOGY》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107133920A (zh) * 2017-06-13 2017-09-05 华侨大学 一种基于视觉特征的马赛克拼图的自动生成方法
CN107133920B (zh) * 2017-06-13 2021-07-30 华侨大学 一种基于视觉特征的马赛克拼图的自动生成方法
CN110287435A (zh) * 2019-05-21 2019-09-27 百度在线网络技术(北京)有限公司 网页展现方法、系统和机器可读存储介质

Also Published As

Publication number Publication date
CN106469460B (zh) 2019-07-23

Similar Documents

Publication Publication Date Title
US12094193B2 (en) Image processing method and image processing device
US9251434B2 (en) Techniques for spatial semantic attribute matching for location identification
CN108492343B (zh) 一种扩充目标识别的训练数据的图像合成方法
US9292766B2 (en) Techniques for ground-level photo geolocation using digital elevation
CN103456013B (zh) 一种表示超像素以及度量超像素之间相似性的方法
CN109886330B (zh) 文本检测方法、装置、计算机可读存储介质和计算机设备
CN110516096A (zh) 合成感知数字图像搜索
KR101844291B1 (ko) 신체 자세군 생성 장치 및 방법
US8429163B1 (en) Content similarity pyramid
US10699156B2 (en) Method and a device for image matching
KR20200071838A (ko) 특징 벡터를 이용한 얼굴 검색이 가능한 얼굴 인식 방법 및 장치
JP2000311246A (ja) 類似画像表示方法及び類似画像表示処理プログラムを格納した記録媒体
CN110956213A (zh) 遥感影像特征库生成、遥感影像检索方法及装置
US12056212B2 (en) Methods and systems for generating composite image descriptors
CN103177105B (zh) 一种图像检索方法及装置
JP2014211730A (ja) 画像検索システム、画像検索装置および画像検索方法
CN106469460A (zh) 马赛克图像生成的方法和装置及电子设备
CN114329050A (zh) 视觉媒体数据去重处理方法、装置、设备和存储介质
Roman-Rangel et al. Shape-based detection of maya hieroglyphs using weighted bag representations
JP2006260311A (ja) マッチング方法およびマッチング装置ならびにプログラム
CN111062385A (zh) 一种用于图像文本信息检测的网络模型构建方法与系统
CN113191367B (zh) 基于密集尺度动态网络的语义分割方法
Burdescu et al. Computational complexity analysis of the graph extraction algorithm for 3D segmentation
CN107909091A (zh) 一种基于稀疏低秩回归模型的图像记忆度预测方法
Li et al. [Retracted] Medical Cloud Computing Data Processing to Optimize the Effect of Drugs

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211111

Address after: Room 507, floor 5, building 3, No. 969, Wenyi West Road, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province

Patentee after: Zhejiang tmall Technology Co., Ltd

Address before: P.O. Box 847, 4th floor, Grand Cayman capital building, British Cayman Islands

Patentee before: Alibaba Group Holdings Limited