CN103020947B - 一种图像的质量分析方法及装置 - Google Patents

一种图像的质量分析方法及装置 Download PDF

Info

Publication number
CN103020947B
CN103020947B CN201110286895.6A CN201110286895A CN103020947B CN 103020947 B CN103020947 B CN 103020947B CN 201110286895 A CN201110286895 A CN 201110286895A CN 103020947 B CN103020947 B CN 103020947B
Authority
CN
China
Prior art keywords
image
area
region
target area
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110286895.6A
Other languages
English (en)
Other versions
CN103020947A (zh
Inventor
陈克
邓宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201110286895.6A priority Critical patent/CN103020947B/zh
Priority to TW100143931A priority patent/TWI532013B/zh
Priority to US13/623,469 priority patent/US8897604B2/en
Priority to EP12783395.2A priority patent/EP2758939A1/en
Priority to ES14191178.4T priority patent/ES2661612T3/es
Priority to JP2014527366A priority patent/JP5779720B2/ja
Priority to EP14191178.4A priority patent/EP2833324B1/en
Priority to PCT/US2012/056558 priority patent/WO2013044019A1/en
Publication of CN103020947A publication Critical patent/CN103020947A/zh
Priority to HK13105798.8A priority patent/HK1179035A1/zh
Priority to US14/486,913 priority patent/US9176989B2/en
Application granted granted Critical
Publication of CN103020947B publication Critical patent/CN103020947B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Abstract

本申请公开了一种图像的质量分析方法,包括:从图像中确定目标区域和背景区域;根据所述区域和/或背景区域计算图像的特征参数;将计算得到的特征参数作为预设的质量计算模型的输入值,计算得到所述特征参数对应的图像质量分析结果。本申请还公开了一种图像的质量分析系统,该方法及系统能够进行图像的质量分析。

Description

一种图像的质量分析方法及装置
技术领域
本申请涉及图像的识别技术,尤其涉及一种图像的质量分析方法及装置。
背景技术
随着网上购物的日益流行,商家越来越多的通过图像来向用户进行产品的展示。产品图像的质量好坏影响着产品的展示效果,不管是对产品购买者的购买体验还是商家的产品销售量都有着重要影响。这里,产品图像的清晰度、图像中产品与背景的对比度等都可以作为产品图像的质量分析因素,决定着产品图像的质量。
随着社交网络及各种其他网络的发展,用户会在网上展示各种各样的照片,如:人物照片、自然风光照片、家居摆设等各种照片,针对这些目标物拍摄后形成的图像中,目标物和背景的对比度、图像的清晰度等都会影响到图像的质量好坏,这些照片图像的质量好坏也会影响到图像的展示及传播效果。
现有技术中对于图像质量进行分析的系统,一般仅是对图像本身的清晰度进行分析,无法对图像的质量进行综合分析。。尤其是对产品图像的质量分析评价还停留于人工进行主观识别、评价分析的阶段,没有专门针对产品图像的质量分析方法。
发明内容
有鉴于此,本申请要解决的技术问题是,提供一种图像的质量分析方法及装置,能够进行图像的质量分析。
为此,本申请实施例采用如下技术方案:
本申请实施例提供一种图像的质量分析方法,包括:
从图像中确定目标区域和背景区域;
根据所述目标区域和/或背景区域计算图像的特征参数;
将计算得到的特征参数作为预设的质量计算模型的输入值,计算得到所述特征参数对应的图像质量分析结果。
本申请实施例一种图像的质量分析系统,包括:
确定单元,用于从图像中确定目标区域和背景区域;
第一计算单元,用于根据所述目标区域和/或背景区域计算图像的特征参数;
第二计算单元,用于将计算得到的特征参数输入到预设的质量计算模型中,计算得到所述特征参数对应的图像质量分析结果。
对于上述技术方案的技术效果分析如下:
本申请实施例中首先从图像中确定目标区域和背景区域;根据所述目标区域和/或背景区域计算图像的特征参数;最后,将计算得到的特征参数输入到预设的质量计算模型中,得到所述特征参数对应的图像质量分析结果。从而实现了对于图像的质量分析。
附图说明
图1为本申请实施例所适用的网络结构示意图;
图2为本申请实施例一种图像的质量分析方法流程示意图;
图3为本申请实施例另一种图像的质量分析方法流程示意图;
图4为本申请实施例一种图像的质量分析系统结构示意图;
图5为本申请实施例图像的质量分析系统中一个单元的实现结构示意图。
具体实施方式
为使本领域技术人员更加清楚的理解本申请实施例,首先介绍本申请实施例可以应用的网络环境。如图1所示,包括网站服务器110以及客户端120,所述客户端120用于向网站服务器110传输图像;所述网站服务器110用于对接收到的每个图像进行质量分析,将质量分析结果返回给客户端120。
以下,结合附图详细说明本申请实施例图像质量分析方法及系统的实现。
图2为本申请实施例图像质量分析方法流程示意图,该方法可以适用于网站服务器110中;如图2所示,该方法包括:
步骤201:从图像中确定目标区域和背景区域;
步骤202:根据所述目标区域和/或背景区域计算图像的特征参数;
步骤203:将计算得到的特征参数作为预设的质量计算模型的输入值,计算得到所述特征参数对应的图像质量分析结果。
所述目标区域为针对目标物拍摄、制作后所形成的图像中目标物所覆盖的区域,也就是,图像中背景区域之外的区域,以产品图像为例,其目标区域为产品区域;以人物图像为例,其目标区域为人物覆盖区域。图2所示的本申请实施例中,首先从图像中确定目标区域和背景区域;根据所述目标区域和/或背景区域计算图像的特征参数;最后,将计算得到的特征参数输入到预设的质量计算模型中,得到所述特征参数对应的图像质量分析结果。从而实现了对于图像的质量分析。
在图2的基础上,通过图3对本申请实施例图像质量分析方法进行更为详细的说明。如图3所示,该方法包括:
步骤301:获取图像的数据。
其中,在具体实现中,所述图像的来源可能不同,例如,可能是直接从客户端获取图像的数据,或者,也可以是预先从客户端获取并存储于网站服务器的图像等,这里并不限定。
步骤302:确定该图像的预设面积比例的外边框区域。
例如,可以预设面积比例为20%,则位于目标图像最外围的20%面积的区域,即为所确定的外边框区域。
一般的,可以认为在多数的图像中,尤其是产品图像中,目标物拍摄中的背景所形成的图像一般位于目标物图像的外围,而目标物所形成的图像则位于整个图像的较为中心的位置;具体到产品的拍摄,产品拍摄中的背景所形成的图像一般位于产品图像的外围,而产品所形成的图像则位于整个产品图像的较为中心的位置。因此,一般外边框区域所包含的图像主要是背景所形成的图像;而图像中背景部分一般颜色较为单一,也即区域平坦度较高。从而,通过对外边框区域进行后续步骤中的操作,即可以确定出整个图像的背景区域的主要颜色以及背景区域的种子区域,通过种子区域向外的生长,最终得到整个背景区域,也即完成了背景区域以及目标区域的确定。
其中,种子区域是指本申请实施例进行图像处理时所确定的初始区域。
步骤303:对所述外边框区域进行聚类处理,得到n1类颜色的颜色区域;
其中,所述聚类处理可以包括:首先每个像素对应一个类别,然后计算不同类别的中心之间的距离,若距离小于阈值,则将两类合并;如此反复迭代,直到不存在中心之间的距离小于阈值的两类,则聚类完成。
其中,这里的n1类颜色中,每种颜色所对应的颜色区域可能是一个区域,也可能是互不连通的多个区域。
步骤304:分别计算n1类颜色的颜色区域在外边框区域中所占的面积比重,选择出面积比重超过比重阈值的n2类颜色的颜色区域;
步骤305:分别计算选择出的n2类颜色的颜色区域的区域平坦度,选择出区域平坦度超过平坦度阈值的n3类颜色的颜色区域,将这些区域平坦度超过平坦度阈值的颜色区域作为背景区域的种子区域。
其中,n1≥n2≥n3>0,n1、n2、n3为自然数。
以上的步骤304和步骤305是从n1类颜色的颜色区域中确定背景区域所包含的颜色,也即是将外边框区域中所占面积比重最大,且区域平坦度最高的n3类颜色作为背景区域所包含的颜色。而这n3类颜色的颜色区域即为背景区域的种子区域。
步骤306:以种子区域为中心,确定与种子区域相邻的各个像素点与其相邻种子区域中的像素点之间的颜色欧氏距离不大于图像标准差的预设倍数时,将该像素点添加到种子区域中,直到种子区域相邻的所有像素点与其相邻种子区域中的像素点之间的颜色欧氏距离大于图像标准差的预设倍数。
所述预设倍数一般大于0,小于1,优选地,可以设置为0.5。
本步骤是一个种子区域根据颜色标准差进行区域生长的过程,通过该过程,可以将每个种子区域周围的背景区域添加到种子区域中来,从而最终得到所有的背景区域的过程。
通过本步骤的处理,越复杂的图像会具有更高的图像标准差,则种子区域具有更强的生长能力,不容易欠生长,反之简单的图像的生长能力较弱,不容易产生过生长的情况。
步骤307:将图像中所有种子区域确定为背景区域,所有种子区域之外的区域,也即背景区域之外的区域确定为目标区域。
以上的步骤302~步骤307即为从图像中确定目标区域的一种具体实现步骤。通过步骤303~步骤305,从外边框区域中确定背景区域所包含的颜色,以及进行区域生长的种子区域;后续通过步骤306中对种子区域进行生长,从而可以得到外边框区域之外区域中的背景区域,完成了各个种子区域的生长后,可以认为,所有种子区域构成了该图像的背景区域;而背景区域之外的区域则为图像中目标物所对应的图像,也即为目标区域。
步骤308:根据所述目标区域和/或背景区域计算图像的特征参数。
其中,所述特征参数可以包括:背景复杂度,和/或,前背景对比度,和/或,全局清晰度,和/或,目标物尺寸,如产品尺寸;具体的,
1、背景复杂度,用于表示图像的杂乱程度。
所述背景复杂度可以通过平均梯度值来表示,一般的,平均梯度值越大,则背景复杂度越高,背景越复杂。
所述平均梯度值的计算方法可以包括:根据所述背景区域,提取出该背景区域的平均梯度值。
所述提取背景区域的平均梯度值的方法可以包括:
使用sobel算子求取图像的梯度强度图G;
根据所述梯度强度图G统计背景区域的梯度强度总和Sg和背景区域的像素点个数Pn;
根据所述梯度强度总和Sg以及像素点个数Pn计算背景区域的平均梯度值T,公式可以为:
T=Sg/Pn。
2、前背景对比度,用于反映目标区域和背景区域的对比强度。
所述前背景对比度的计算方法可以包括:
对目标区域进行聚类处理,得到预设n类颜色的颜色区域,并计算每种颜色区域在目标区域中的面积比重Ai(i大于等于1,小于等于n);并且,对背景区域进行聚类处理,得到预设m类颜色区域,并计算每种颜色区域在目标区域中的面积比重Dj(j大于等于1,小于等于m);n和m为自然数;
计算目标区域中每种颜色与背景区域中每种颜色之间的欧式距离Lij;
根据颜色之间的欧氏距离以及颜色的面积比重计算所述前背景对比度M。
具体的计算公式可以为:
M = Σ i = 1 ; j = 1 n , m LijAiDj - - - ( 1 )
3、全局清晰度,用于反映目标区域中图像的整体清晰程度。
所述全局清晰度的计算方法可以包括:
步骤A:将目标区域分为N*N大小的图像块,对每一图像块的像素值Ri进行DCT变换,得到该图像块的DCT系数矩阵Ci;N的取值与图像的大小有关,如果图像越大,则N的取值一般越大,图像越小,则N的取值一般越小。
步骤B:根据图像块的DCT系数矩阵Ci,创建该图像块的统计直方图H,对H中每个bin赋值的公式为:
H k = Σ k = 1 N 2 C i ( k ) , ( C i ( k ) > DCT min ) - - - ( 2 )
其中,i=(1,...,M),M为目标区域中小块的个数,Ci(k)是矩阵Ci中第k个元素的值,DCTmin为预设阈值。
步骤C:通过加权矩阵W和各个图像块的统计直方图估计当前目标区域的全局清晰度S,具体公式为:
S = Σ k = 1 N 2 W ( k ) , ( H k > V max * H o ) - - - ( 3 )
其中,Vmax为预设阈值。
其中,加权矩阵W的行列数与N的取值有关,例如N=8时,一个8*8的加权矩阵W的实例如下表1所示:
表1
4、目标物尺寸,用于反映目标区域在整个图像区域中的比例。
其中,目标物尺寸可以通过目标区域的面积比重,和/或,目标物的长度和宽度表示。
其中,所述目标区域的面积比重的计算方法可以包括:确定目标区域的面积以及整个图像区域的总面积;计算目标区域在图像区域中的面积比重。
所述目标物的长度和宽度的计算方法可以包括:确定目标区域的最小外接矩形,得到该最小外接矩形的长度和宽度,将该外接矩形的长度和宽度分别作为目标物的长度和宽度。
步骤309:将计算得到的图像的特征参数输入预设的质量计算模型中,计算得到所述特征参数对应的图像质量分析结果,该图像质量分析结果即为该图像的质量分析结果。其中,所述质量计算模型为:以特征参数为输入,图像质量分析结果为输出的计算模型。
其中,所述预设的质量计算模型的建立过程一般在进行产品质量分析之前完成,所述建立方法可以包括:
抽取一定数量的图像作为训练样本,分别对所述图像进行上述特征参数的提取;并且,预先设定每一图像的图像质量分析结果;
根据所述图像的特征参数以及图像质量分析结果进行训练,学习出以图像的特征参数为输入、图像质量分析结果为输出的SVM拟合模型,将该SVM拟合模型作为所述预设质量计算模型。
其中,进行模型建立时所提取的特征参数与后续进行某一图像的质量分析时所提取的特征参数应相同,否则,将会出现质量分析结果的偏差。另外,所述图像质量分析结果可以为百分制的得分、十分制的得分、或者质量分析等级等,可以根据实际情况进行设定。
例如,在进行模型建立时,分别提取的特征参数为:平均梯度值,前背景对比度,目标物的长度和宽度,以及目标区域的面积比重;而预设的每一训练样本的质量分析结果是百分制的得分;则基于SVM的回归模型进行上述特征参数与质量分析结果之间的训练,即可以得到:以平均梯度值,前背景对比度,目标物的长度和宽度,以及目标区域的面积比重为输入,以百分制的质量分析结果为输出的SVM拟合模型(即质量计算模型);后续在进行某一图像的质量分析时,只要提取该图像的平均梯度值,前背景对比度,目标物的长度和宽度,以及目标区域的面积比重等特征参数,输入到SVM拟合模型中,即可以根据该计算模型计算得到该图像对应的百分制质量分析得分。
与上述图像的质量分析方法相对应的,本申请实施例还提供一种图像的质量分析系统,如图4所示,该系统可以包括:
确定单元410,用于从图像中确定目标区域和背景区域;
第一计算单元420,用于根据所述目标区域和/或背景区域计算图像的特征参数;
第二计算单元430,用于将计算得到的特征参数作为预设的质量计算模型的输入值,计算得到所述特征参数对应的图像质量分析结果。
其中,如图5所示,确定单元410可以包括:
第一确定子单元510,用于确定图像的预设面积比例的外边框区域;
聚类单元520,用于对所述外边框区域进行聚类处理,得到预设n1类颜色的颜色区域;
第二确定子单元530,用于根据所述n1类颜色的颜色区域确定背景区域的种子区域;
生长子单元540,用于以种子区域为中心,确定与种子区域相邻的各个像素点与其相邻种子区域中的像素点之间的颜色欧氏距离不大于图像标准差的预设倍数时,将该像素点添加到种子区域中,直到种子区域相邻的所有像素点与其相邻种子区域中的像素点之间的颜色欧氏距离大于图像标准差的预设倍数;
第三确定子单元550,用于将所有种子区域作为图像的背景区域,所有种子区域之外的区域作为图像的目标区域。
优选地,如图5所示,第二确定子单元530可以包括:
第一计算子模块5301,用于分别计算n1类颜色的颜色区域在外边框区域中所占的面积比重,选择出面积比重超过比重阈值的n2类颜色的颜色区域;
第二计算子模块5302,用于分别计算所述n2类颜色的颜色区域的区域平坦度,选择出区域平坦度超过平坦度阈值的n3类颜色的颜色区域,将所述n3类颜色的颜色区域作为所述种子区域;n1≥n2≥n3,且,n2、n3为自然数。
其中,图像的特征参数可以包括:背景复杂度,和/或,前背景对比度,和/或,全局清晰度,和/或,产品尺寸。
第一计算单元420可以包括:
第一计算子单元,用于根据所述背景区域,提取出该背景区域的平均梯度值,将该平均梯度值作为背景复杂度的数值;
具体的,第一计算子单元可以用于:使用sobel算子求取图像的梯度强度图G;根据所述梯度强度图G统计背景区域的梯度强度总和Sg和背景区域的像素点个数Pn;根据所述梯度强度总和Sg以及像素点个数Pn计算背景区域的平均梯度值T,公式可以为:T=Sg/Pn。
和/或,
第二计算子单元,用于对目标区域进行聚类处理,得到预设n类颜色区域,并计算每种颜色区域在目标区域中的比重值Ai,i大于等于1,小于等于n;并且,对背景区域进行聚类处理,得到预设m类颜色区域,并计算每种颜色区域在目标区域中的比重值Dj,j大于等于1,小于等于m;计算目标区域中每种颜色与背景区域中每种颜色之间的欧式距离Lij;根据颜色之间的欧氏距离以及颜色的比重值计算所述前背景对比度
和/或:
第三计算子单元,用于将目标区域划分为预设大小的图像块,对每一图像块的像素值进行DCT变换,得到该图像块的DCT系数矩阵;根据各个图像块的DCT系数矩阵创建对应图像块的统计直方图;根据各个图像块的统计直方图以及加权矩阵计算目标区域的全局清晰度。
和/或,
第四计算子单元,用于确定目标区域的面积以及整个图像区域的总面积;计算目标区域在图像区域中的面积比重;和/或,计算目标区域中最小外接矩形,得到该矩形的长度值和宽度值。
优选地,如图4所示,该系统还可以包括:
训练单元440,用于抽取一定数量的图像作为训练样本,分别对所述图像进行特征参数的提取;并且,预先设定每一图像的图像质量分析结果;根据所述图像的特征参数以及图像质量分析结果进行训练,学习出以图像的特征参数为输入、图像质量分析结果为输出的SVM拟合模型,将该SVM拟合模型作为所述预设质量计算模型。
图4~5所示的图像的质量分析系统中,由确定单元从图像中确定目标区域和背景区域,第一计算单元根据所述目标区域和/或背景区域计算图像的特征参数,第二计算单元将计算得到的特征参数输入到预设的质量计算模型中,得到所述特征参数对应的图像质量分析结果,从而实现了对于图像的质量分析。
本申请实施例的图像的质量分析方法及系统不仅可以适用于如图1所示的网络系统下,还可以适用于其他环境下的图像的质量分析,例如直接设置于商户所在的客户端,为商户提供对于产品图像的质量分析等。
现有技术中,由于仅通过人工进行主观识别、分析,因此,商家提供的产品图像质量参差不齐,产品的展示效果差,此时,用户如果进行对应产品的浏览时,往往会因为产品图像的质量问题而放弃对该产品的购买,转而浏览其他商家的相同产品。因此,用户在进行某一产品的购买时,会由网上购物所属网站的网站服务器根据用户输入的产品特征进行产品搜索,针对该产品的搜索结果,用户需要点击各个搜索结果,基于产品图像等信息寻找合适产品进行购买。由于产品图像的质量差别,用户往往需要多次点击不同商家的产品进行浏览,才能最终通过质量好的产品图像寻找到合适的产品,达成交易。这里,用户对于某一产品的多次浏览,必然会占用用户所在客户端与商家展示产品所在的网站服务器之间的传输带宽,浪费传输资源;且,用户所在客户端多次与网站服务器进行交互,也会增加网站服务器的数据处理压力,降低网站服务器的数据处理速度和效率。
因此,以上所述的本申请实施例产品图像的质量分析方法所得到的产品图像的质量分析结果可以应用于网站服务器的产品搜索过程中,作为网站服务器进行产品搜索时,对产品搜索结果进行进一步筛选的依据,以上只是对产品搜索的一个举例,可以轻易想到的,本申请实施例可以应用于各种目标物图像的搜索,具体的,以上的图2和图3所示的实施例计算得到图像的质量分析结果后,可以进一步包括以下的步骤:
网站服务器接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;
依次判断目标物搜索结果中各个目标物的图像质量分析结果是否大于预设的分析结果阈值,如果否,从搜索结果中删除该目标物对应的信息;如果是,在搜索结果中保留该目标物对应的信息。
或者,网站服务器也可以不进行搜索结果的筛选,所述判断步骤可以替换为:根据各个目标物的图像质量分析结果对目标物搜索结果进行排序,将排序后的搜索结果向用户展现。
当然,在实际应用中,还可以将本申请实施例所述的图像的质量分析方法应用于其他的应用环境中,这里不赘述。
其中,一个目标物可能对应多个目标物图像,此时,对于一个目标物的图像质量分析结果可以根据目标物对应的图像的质量分析结果进行计算,例如计算出平均数或者总和等等,这里不限定。
相应的,图4和图5所示的系统可以进一步包括:
搜索单元,用于接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;
第三计算单元,用于根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
判断单元,用于依次判断目标物搜索结果中各个目标物的图像质量分析结果是否大于预设的分析结果阈值,如果否,从目标物搜索结果中删除该目标物对应的信息;如果是,在目标物搜索结果中保留该目标物信息;
或者,该方法还包括:
搜索单元,用于接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;
第三计算单元,用于根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
排序单元,用于根据目标物的图像质量分析结果对目标物搜索结果进行排序。
在本申请实施例的图像质量分析方法和系统的应用举例中,网站服务器在进行目标物的搜索时,对目标物搜索结果按照目标物的图像质量分析结果进行筛选或者排序,从而使得用户浏览的所有目标物或者用户最先浏览的目标物,其目标物所对应的图像质量较好,从而减少了用户对于图像质量不好的目标物的浏览次数,从而减少了客户端与的网站服务器之间的传输带宽占用,节省了网络传输资源;而且,用户所在客户端与网站服务器进行交互的次数减少,会相应降低网站服务器的数据处理压力,提高网站服务器的数据处理速度和效率。
本领域普通技术人员可以理解,实现上述实施例的方法的过程可以通过程序指令相关的硬件来完成,所述的程序可以存储于可读取存储介质中,该程序在执行时执行上述方法中的对应步骤。所述的存储介质可以如:ROM/RAM、磁碟、光盘等。
以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (9)

1.一种图像的质量分析方法,其特征在于,包括:
从图像中确定目标区域和背景区域;
根据所述目标区域和/或背景区域计算图像的特征参数;其中,图像的特征参数包括:背景复杂度,和/或,前背景对比度,和/或,全局清晰度,和/或,目标物尺寸;背景复杂度反映图像的杂乱程度,用背景区域的平均梯度值来表示;前背景对比度反映目标区域和背景区域的对比强度;全局清晰度反映目标区域中图像的整体清晰程度;目标物尺寸反映目标区域在整个图像区域中的比例;
将计算得到的特征参数作为预设的质量计算模型的输入值,计算得到所述特征参数对应的图像质量分析结果;
所述方法还包括:
接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
依次判断所述搜索结果中各个目标物的图像质量分析结果是否大于预设的分析结果阈值,如果否,从所述搜索结果中删除该目标物对应的信息;如果是,在所述搜索结果中保留该目标物对应的信息;
或者,所述方法还包括:
接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
根据所述目标物的图像质量分析结果对目标物搜索结果进行排序。
2.根据权利要求1所述的方法,其特征在于,所述从图像中确定目标区域和背景区域包括:
确定图像的预设面积比例的外边框区域;
对所述外边框区域进行聚类处理,得到预设n1类颜色的颜色区域;n1为自然数;
根据所述n1类颜色的颜色区域确定背景区域的种子区域;
以种子区域为中心,确定与种子区域相邻的各个像素点与其相邻种子区域中的像素点之间的颜色欧氏距离不大于图像标准差的预设倍数时,将该像素点添加到种子区域中,直到种子区域相邻的所有像素点与其相邻种子区域中的像素点之间的颜色欧氏距离大于图像标准差的预设倍数;
将所有种子区域作为图像的背景区域,所有种子区域之外的区域作为图像的目标区域。
3.根据权利要求2所述的方法,其特征在于,所述根据所述n1类颜色的颜色区域确定背景区域的种子区域包括:
分别计算n1类颜色的颜色区域在外边框区域中所占的面积比重,选择出面积比重超过比重阈值的n2类颜色的颜色区域;
分别计算所述n2类颜色的颜色区域的区域平坦度,选择出区域平坦度超过平坦度阈值的n3类颜色的颜色区域,将所述n3类颜色的颜色区域作为所述种子区域;n1≥n2≥n3,且,n2、n3为自然数。
4.根据权利要求1所述的方法,其特征在于,根据所述目标区域和/或背景区域计算图像的背景复杂度包括:
根据所述背景区域,提取出该背景区域的平均梯度值,将该平均梯度值作为背景复杂度的数值。
5.根据权利要求1所述的方法,其特征在于,根据所述目标区域和/或背景区域计算图像的前背景对比度包括:
对目标区域进行聚类处理,得到预设n类颜色区域,并计算每种颜色区域在目标区域中的比重值Ai,i大于等于1,小于等于n;并且,对背景区域进行聚类处理,得到预设m类颜色区域,并计算每种颜色区域在目标区域中的比重值Dj,j大于等于1,小于等于m;n和m为自然数;
计算目标区域中每种颜色与背景区域中每种颜色之间的欧式距离Lij;
根据颜色之间的欧氏距离以及颜色的比重值计算所述前背景对比度 M = Σ i = 1 ; y = 1 n , m L i j A i D j .
6.根据权利要求1所述的方法,其特征在于,根据所述目标区域和/或背景区域计算图像的全局清晰度包括:
将目标区域划分为预设大小的图像块,对每一图像块的像素值进行DCT变换,得到该图像块的DCT系数矩阵;
根据各个图像块的DCT系数矩阵创建对应图像块的统计直方图;
根据各个图像块的统计直方图以及加权矩阵计算目标区域的全局清晰度。
7.根据权利要求1所述的方法,其特征在于,根据所述目标区域和/或背景区域计算图像的目标物尺寸包括:
确定目标物区域的面积以及整个图像区域的总面积;计算目标区域在图像区域中的面积比重;
和/或,
计算目标区域中最小外接矩形,得到该矩形的长度值和宽度值。
8.根据权利要求1至3任一项所述的方法,其特征在于,预设的质量计算模型的建立方法为:
抽取一定数量的图像作为训练样本,分别对所述图像进行特征参数的提取;并且,预先设定每一图像的图像质量分析结果;
根据所述图像的特征参数以及图像质量分析结果进行训练,学习出以图像的特征参数为输入、图像质量分析结果为输出的SVM拟合模型,将该SVM拟合模型作为所述预设质量计算模型。
9.一种图像的质量分析系统,其特征在于,包括:
确定单元,用于从图像中确定目标区域和背景区域;
第一计算单元,用于根据所述目标区域和/或背景区域计算图像的特征参数;其中,图像的特征参数包括:背景复杂度,和/或,前背景对比度,和/或,全局清晰度,和/或,目标物尺寸;背景复杂度反映图像的杂乱程度,用背景区域的平均梯度值来表示;前背景对比度反映目标区域和背景区域的对比强度;全局清晰度反映目标区域中图像的整体清晰程度;目标物尺寸反映目标区域在整个图像区域中的比例;
第二计算单元,用于将计算得到的特征参数输入到预设的质量计算模型中,计算得到所述特征参数对应的图像质量分析结果;
所述系统还包括:
搜索单元,用于接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;
第三计算单元,用于根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
判断单元,用于依次判断目标物搜索结果中各个目标物的图像质量分析结果是否大于预设的分析结果阈值,如果否,从目标物搜索结果中删除该目标物对应的信息;如果是,在目标物搜索结果中保留该目标物信息;
或者,所述系统还包括:
搜索单元,用于接收用户的搜索请求,根据搜索请求中携带的目标物特征信息进行目标物的搜索,得到目标物搜索结果;
第三计算单元,用于根据目标物对应的各个图像的质量分析结果计算目标物对应的图像质量分析结果;
排序单元,用于根据目标物的图像质量分析结果对目标物搜索结果进行排序。
CN201110286895.6A 2011-09-23 2011-09-23 一种图像的质量分析方法及装置 Active CN103020947B (zh)

Priority Applications (10)

Application Number Priority Date Filing Date Title
CN201110286895.6A CN103020947B (zh) 2011-09-23 2011-09-23 一种图像的质量分析方法及装置
TW100143931A TWI532013B (zh) 2011-09-23 2011-11-30 Image quality analysis method and system
US13/623,469 US8897604B2 (en) 2011-09-23 2012-09-20 Image quality analysis for searches
ES14191178.4T ES2661612T3 (es) 2011-09-23 2012-09-21 Análisis de calidad de imagen para búsquedas
JP2014527366A JP5779720B2 (ja) 2011-09-23 2012-09-21 検索のための画像品質分析
EP14191178.4A EP2833324B1 (en) 2011-09-23 2012-09-21 Image quality analysis for searches
EP12783395.2A EP2758939A1 (en) 2011-09-23 2012-09-21 Image quality analysis for searches
PCT/US2012/056558 WO2013044019A1 (en) 2011-09-23 2012-09-21 Image quality analysis for searches
HK13105798.8A HK1179035A1 (zh) 2011-09-23 2013-05-16 種圖像的質量分析方法及裝置
US14/486,913 US9176989B2 (en) 2011-09-23 2014-09-15 Image quality analysis for searches

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110286895.6A CN103020947B (zh) 2011-09-23 2011-09-23 一种图像的质量分析方法及装置

Publications (2)

Publication Number Publication Date
CN103020947A CN103020947A (zh) 2013-04-03
CN103020947B true CN103020947B (zh) 2016-04-06

Family

ID=47969514

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110286895.6A Active CN103020947B (zh) 2011-09-23 2011-09-23 一种图像的质量分析方法及装置

Country Status (8)

Country Link
US (2) US8897604B2 (zh)
EP (2) EP2758939A1 (zh)
JP (1) JP5779720B2 (zh)
CN (1) CN103020947B (zh)
ES (1) ES2661612T3 (zh)
HK (1) HK1179035A1 (zh)
TW (1) TWI532013B (zh)
WO (1) WO2013044019A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106127752A (zh) * 2016-06-20 2016-11-16 北京小米移动软件有限公司 图像质量分析方法和装置
CN108447058A (zh) * 2018-03-30 2018-08-24 北京理工大学 一种图像质量评价方法及系统

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977629B2 (en) * 2011-05-24 2015-03-10 Ebay Inc. Image-based popularity prediction
US20140226907A1 (en) * 2013-02-14 2014-08-14 Google Inc. Automated detection of distracting images
US20140267707A1 (en) * 2013-03-14 2014-09-18 Motorola Solutions, Inc. Method and apparatus for filtering devices within a security social network
US9386050B2 (en) 2013-03-14 2016-07-05 Motorola Solutions, Inc. Method and apparatus for filtering devices within a security social network
US9167048B2 (en) 2013-03-14 2015-10-20 Motorola Solutions, Inc. Method and apparatus for filtering devices within a security social network
CN104240228B (zh) * 2013-06-24 2017-10-24 阿里巴巴集团控股有限公司 一种应用于网站的特定图片的检测方法及装置
US20150134302A1 (en) 2013-11-14 2015-05-14 Jatin Chhugani 3-dimensional digital garment creation from planar garment photographs
CN104837007B (zh) * 2014-02-11 2018-06-05 阿里巴巴集团控股有限公司 一种数字图像质量分级的方法和装置
US10026010B2 (en) * 2014-05-14 2018-07-17 At&T Intellectual Property I, L.P. Image quality estimation using a reference image portion
US9747556B2 (en) * 2014-08-20 2017-08-29 Vertafore, Inc. Automated customized web portal template generation systems and methods
US10660533B2 (en) * 2014-09-30 2020-05-26 Rapsodo Pte. Ltd. Remote heart rate monitoring based on imaging for moving subjects
US20160092956A1 (en) 2014-09-30 2016-03-31 Jonathan Su Garment size mapping
CN104581379A (zh) * 2014-12-31 2015-04-29 乐视网信息技术(北京)股份有限公司 视频预览图的选取方法及选取装置
CN104598921A (zh) * 2014-12-31 2015-05-06 乐视网信息技术(北京)股份有限公司 视频预览图的选取方法及选取装置
CN105205361B (zh) * 2015-08-26 2018-08-14 努比亚技术有限公司 一种图像筛选方法和装置
CN105389780A (zh) * 2015-10-28 2016-03-09 维沃移动通信有限公司 一种图像处理方法及移动终端
US10410330B2 (en) * 2015-11-12 2019-09-10 University Of Virginia Patent Foundation System and method for comparison-based image quality assessment
US9922411B2 (en) * 2015-11-30 2018-03-20 Disney Enterprises, Inc. Saliency-weighted video quality assessment
CN106991095B (zh) * 2016-01-21 2021-09-28 阿里巴巴集团控股有限公司 机器异常的处理方法、学习速率的调整方法及装置
CN106686308B (zh) * 2016-12-28 2018-02-16 平安科技(深圳)有限公司 图像焦距检测方法和装置
US10467507B1 (en) * 2017-04-19 2019-11-05 Amazon Technologies, Inc. Image quality scoring
CN107274391A (zh) * 2017-06-07 2017-10-20 梧州市兴能农业科技有限公司 一种水下图像目标提取系统
US20190147620A1 (en) * 2017-11-14 2019-05-16 International Business Machines Corporation Determining optimal conditions to photograph a point of interest
CN107958455B (zh) * 2017-12-06 2019-09-20 百度在线网络技术(北京)有限公司 图像清晰度评估方法、装置、计算机设备及存储介质
CN108875518A (zh) * 2017-12-15 2018-11-23 北京旷视科技有限公司 图像处理与图像分类方法、装置和系统及存储介质
US10747811B2 (en) * 2018-05-22 2020-08-18 Adobe Inc. Compositing aware digital image search
CN109376592B (zh) * 2018-09-10 2021-04-27 创新先进技术有限公司 活体检测方法、装置和计算机可读存储介质
CN109410169B (zh) * 2018-09-11 2020-06-05 广东智媒云图科技股份有限公司 一种图像背景干扰度的识别方法及装置
US10445915B1 (en) * 2019-04-09 2019-10-15 Coupang Corp. Systems and methods for efficient management and modification of images
US11397977B1 (en) 2019-06-26 2022-07-26 Block, Inc. Integration of image capturing mechanism into ecommerce application
KR102350192B1 (ko) * 2019-07-19 2022-01-17 한국과학기술연구원 검색 데이터베이스를 구축하기 위한 관심영상 선별 방법 및 이를 수행하는 영상 관제 시스템
CN112435159A (zh) * 2019-08-26 2021-03-02 珠海金山办公软件有限公司 一种图像处理的方法、装置、计算机存储介质及终端
CN110796624B (zh) 2019-10-31 2022-07-05 北京金山云网络技术有限公司 一种图像生成方法、装置及电子设备
CN110969602B (zh) * 2019-11-26 2023-09-05 北京奇艺世纪科技有限公司 一种图像清晰程度检测方法及装置
CN111212223B (zh) * 2020-01-10 2021-01-22 奥比中光科技集团股份有限公司 一种设定成像参数的方法、系统及计算机可读存储介质
US11803896B2 (en) * 2020-03-17 2023-10-31 Ebay Inc. Method, system, and medium for network and speed enhancement for distributing unified images via a computer network
CN113205011A (zh) * 2021-04-19 2021-08-03 Oppo广东移动通信有限公司 图像掩膜确定方法及装置、存储介质和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001069530A3 (en) * 2000-03-14 2002-12-27 Intel Corp Estimating text color and segmentation of images
CN101859444A (zh) * 2009-04-08 2010-10-13 佳能株式会社 图像处理装置及图像处理方法
CN102113335A (zh) * 2009-06-09 2011-06-29 索尼公司 图像处理设备和方法以及程序

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5048095A (en) 1990-03-30 1991-09-10 Honeywell Inc. Adaptive image segmentation system
JP3063073B2 (ja) * 1995-06-30 2000-07-12 富士ゼロックス株式会社 画像解析表現付加装置
US6282317B1 (en) * 1998-12-31 2001-08-28 Eastman Kodak Company Method for automatic determination of main subjects in photographic images
US6816847B1 (en) * 1999-09-23 2004-11-09 Microsoft Corporation computerized aesthetic judgment of images
US6839466B2 (en) 1999-10-04 2005-01-04 Xerox Corporation Detecting overlapping images in an automatic image segmentation device with the presence of severe bleeding
US6587576B1 (en) * 2000-05-17 2003-07-01 Ncr Corporation Method of quantifying the quality of a gray scale image of a document and an apparatus therefor
US6965684B2 (en) 2000-09-15 2005-11-15 Canon Kabushiki Kaisha Image processing methods and apparatus for detecting human eyes, human face, and other objects in an image
US6847733B2 (en) * 2001-05-23 2005-01-25 Eastman Kodak Company Retrieval and browsing of database images based on image emphasis and appeal
US20030123737A1 (en) 2001-12-27 2003-07-03 Aleksandra Mojsilovic Perceptual method for browsing, searching, querying and visualizing collections of digital images
US7512286B2 (en) 2003-10-27 2009-03-31 Hewlett-Packard Development Company, L.P. Assessing image quality
US7672491B2 (en) 2004-03-23 2010-03-02 Siemens Medical Solutions Usa, Inc. Systems and methods providing automated decision support and medical imaging
US7467222B2 (en) 2006-05-12 2008-12-16 Shutterfly, Inc. Image ranking for imaging products and services
US7958067B2 (en) 2006-07-12 2011-06-07 Kofax, Inc. Data classification methods using machine learning techniques
JP2008052672A (ja) * 2006-08-28 2008-03-06 Oki Electric Ind Co Ltd 価格情報検索装置、価格情報検索システム及び価格情報検索方法
US8090222B1 (en) * 2006-11-15 2012-01-03 Google Inc. Selection of an image or images most representative of a set of images
KR100833987B1 (ko) 2006-11-16 2008-05-30 한국전자통신연구원 영상 검색 장치 및 그 방법
US8295565B2 (en) 2007-03-16 2012-10-23 Sti Medical Systems, Llc Method of image quality assessment to produce standardized imaging data
TW200840365A (en) 2007-03-23 2008-10-01 Ind Tech Res Inst Motion-blur degraded image restoration method
US8446652B2 (en) * 2007-05-17 2013-05-21 Ancestry.com Operations, Inc. Image quality monitoring and tagging at scan time
US8086007B2 (en) 2007-10-18 2011-12-27 Siemens Aktiengesellschaft Method and system for human vision model guided medical image quality assessment
US8270695B2 (en) 2008-10-07 2012-09-18 Carestream Health, Inc. Diagnostic image processing with automatic self image quality validation
US8370282B1 (en) * 2009-07-22 2013-02-05 Google Inc. Image quality measures
US8311364B2 (en) 2009-09-25 2012-11-13 Eastman Kodak Company Estimating aesthetic quality of digital images
US8675957B2 (en) * 2010-11-18 2014-03-18 Ebay, Inc. Image quality assessment to merchandise an item

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001069530A3 (en) * 2000-03-14 2002-12-27 Intel Corp Estimating text color and segmentation of images
CN101859444A (zh) * 2009-04-08 2010-10-13 佳能株式会社 图像处理装置及图像处理方法
CN102113335A (zh) * 2009-06-09 2011-06-29 索尼公司 图像处理设备和方法以及程序

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106127752A (zh) * 2016-06-20 2016-11-16 北京小米移动软件有限公司 图像质量分析方法和装置
CN108447058A (zh) * 2018-03-30 2018-08-24 北京理工大学 一种图像质量评价方法及系统
CN108447058B (zh) * 2018-03-30 2020-07-14 北京理工大学 一种图像质量评价方法及系统

Also Published As

Publication number Publication date
JP2014524631A (ja) 2014-09-22
US9176989B2 (en) 2015-11-03
US8897604B2 (en) 2014-11-25
TW201314628A (zh) 2013-04-01
ES2661612T3 (es) 2018-04-02
JP5779720B2 (ja) 2015-09-16
EP2758939A1 (en) 2014-07-30
EP2833324A1 (en) 2015-02-04
US20150043810A1 (en) 2015-02-12
TWI532013B (zh) 2016-05-01
HK1179035A1 (zh) 2013-09-19
US20130108152A1 (en) 2013-05-02
WO2013044019A1 (en) 2013-03-28
EP2833324B1 (en) 2017-12-06
CN103020947A (zh) 2013-04-03

Similar Documents

Publication Publication Date Title
CN103020947B (zh) 一种图像的质量分析方法及装置
CN104834933B (zh) 一种图像显著性区域的检测方法和装置
CN104966085B (zh) 一种基于多显著特征融合的遥感图像感兴趣区域检测方法
CN109165645A (zh) 一种图像处理方法、装置以及相关设备
CN102324047B (zh) 基于稀疏核编码skr的高光谱图像地物识别方法
CN103578098B (zh) 在商品图片中提取商品主体的方法和装置
CN109086779B (zh) 一种基于卷积神经网络的注意力目标识别方法
CN107808358A (zh) 图像水印自动检测方法
CN101276417A (zh) 基于内容的互联网动画媒体垃圾信息过滤方法
CN103745201B (zh) 一种节目识别方法及装置
CN104063686A (zh) 作物叶部病害图像交互式诊断系统与方法
CN106407369A (zh) 一种基于深度学习人脸识别的照片管理方法和系统
CN103853724A (zh) 多媒体数据分类方法及装置
CN107767416A (zh) 一种低分辨率图像中行人朝向的识别方法
CN110263877B (zh) 场景文字检测方法
CN102592129B (zh) 基于场景驱动的智能手机图像特征点选取方法
CN103577993B (zh) 颜色选取方法及装置
CN103678552A (zh) 基于显著区域特征的遥感影像检索方法及系统
CN103984964A (zh) 一种试纸条图像识别方法及系统
CN107220676A (zh) 一种智慧城市规划系统
CN113435254A (zh) 一种基于哨兵二号影像的耕地深度学习提取方法
CN105070094B (zh) 一种基于机器视觉的车位检测系统及车位检测方法
CN102129570B (zh) 用于动态视觉的基于流形正则化的半监督分类器设计方法
CN112906780A (zh) 一种果蔬图像分类系统及方法
CN106960188A (zh) 天气图像分类方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1179035

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1179035

Country of ref document: HK