CN101360178A - 图像处理装置和图像处理方法 - Google Patents
图像处理装置和图像处理方法 Download PDFInfo
- Publication number
- CN101360178A CN101360178A CNA2008101444714A CN200810144471A CN101360178A CN 101360178 A CN101360178 A CN 101360178A CN A2008101444714 A CNA2008101444714 A CN A2008101444714A CN 200810144471 A CN200810144471 A CN 200810144471A CN 101360178 A CN101360178 A CN 101360178A
- Authority
- CN
- China
- Prior art keywords
- image processing
- correcting
- processing apparatus
- treatment
- input picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 7
- 238000004458 analytical method Methods 0.000 claims abstract description 14
- 238000009826 distribution Methods 0.000 claims description 14
- 238000000034 method Methods 0.000 abstract description 28
- 230000008569 process Effects 0.000 abstract description 14
- 238000004364 calculation method Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000003702 image correction Methods 0.000 description 4
- 230000001915 proofreading effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- NNBFNNNWANBMTI-UHFFFAOYSA-M brilliant green Chemical compound OS([O-])(=O)=O.C1=CC(N(CC)CC)=CC=C1C(C=1C=CC=CC=1)=C1C=CC(=[N+](CC)CC)C=C1 NNBFNNNWANBMTI-UHFFFAOYSA-M 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/40—Image enhancement or restoration by the use of histogram techniques
-
- G06T5/92—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6016—Conversion to subtractive colour signals
- H04N1/6022—Generating a fourth subtractive colour signal, e.g. under colour removal, black masking
- H04N1/6025—Generating a fourth subtractive colour signal, e.g. under colour removal, black masking using look-up tables
Abstract
本发明提供图像处理装置和图像处理方法,在对输入图像进行多个校正处理的图像处理装置中,计算所述输入图像的多维直方图;基于所述多维直方图对经受过特定的校正处理的所述输入图像的特征量进行分析;以及基于所述分析的结果,计算其他校正处理要使用的校正参数。
Description
技术领域
本发明涉及用于对输入的图像进行校正处理的图像处理装置和图像处理方法。
背景技术
以往,通过在如数字照相机、数字摄像机和打印机的设备中,或在个人计算机(PC)中操作的软件对取得的图像数据进行的各种图像校正和润饰(retouching)处理已经被提出。
例如,日本特开2001-313839号公报记载了在对图像数据进行色调校正并随后进行色彩校正的情况下,为进行精确的色彩校正,在进行色调校正后,从图像数据计算色彩校正量以获得想要的数据。
此外,日本特许3584389号公报记载了对通过扫描彩色负片获得的图像数据进行硬调(high-contrast)处理,并在硬调处理之后,将图像数据中的特定色相转换成为想要的色相。
例如,当在输入图像中产生极度的青雾(blue fog)时,检测包含在输入图像中的肤色的程度困难,因此应该考虑下面的情况。当要对该图像进行某种肤色校正时,为了将整个图像修正为适当的彩色平衡,首先对输入图像进行彩色灰雾(color-fog)校正。然后将由此得到的中间图像存储在存储器中,从该中间图像检测肤色区域,并进行适当的校正。
在上述状态下,通过依次处理目的不同的所述两种校正功能,即彩色灰雾校正和肤色校正,能够生成想要的图像数据。
然而,在该方法中存在两个问题。首先,当依次处理这两种校正时,必须有用于存储第一种处理结果的中间图像的存储器。其次,例如在上述例子中,对输入图像的各个像素进行彩色灰雾校正,因此,即使当输入图像是例如相对较小的VGA大小,在彩色灰雾校正中也需要300,000次以上的计算处理。
因此,当对所述输入图像依次执行多次图像校正时,可以考虑尽可能地缩减该输入图像的大小作为消减中间图像的大小和用于生成中间图像的计算量的方法。
然而,当缩减输入图像和中间图像的大小时,图像分辨率,由此,要准确地计算用于计算校正量的图像特征量比较困难,结果,获得想要的图像也会变得困难。
此外,在通常的图像分析中,已经提出了一种计算亮度和各RGB分量的一维直方图,并通过使用该直方图计算图像校正参数的方法。
然而,从该一维直方图中无法掌握所述亮度分布的变化和各RGB分量的分布。例如,基于该信息,无法掌握肤色、粉红色、或翡翠绿的分布,而唯一的方法是再次参照该输入图像来进行图像分析。
发明内容
本发明的目的是在不生成中间图像的情况下,使用较小的计算量计算出准确的图像校正量。
根据本发明的一个方面,提供了一种对输入图像进行多个校正处理的图像处理装置,包括:第一计算单元,用于计算所述输入图像的多维直方图;第一分析单元,用于基于所述多维直方图,对经受过特定的校正处理的所述输入图像的特征量进行分析;以及第二计算单元,用于基于所述分析的结果,计算在所述特定的校正处理之后进行的校正处理所要使用的校正参数。
根据本发明的另一个方面,其提供一种对输入图像进行多个校正处理的图像处理装置所执行的图像处理方法,包括以下步骤:计算所述输入图像的多维直方图;基于所述多维直方图对经受过特定的校正处理的所述输入图像的特征量进行分析;以及基于所述分析的结果,计算在所述特定的校正处理后进行的校正处理所要使用的校正参数。
本发明的其他特征将通过以下参照附图对示例性实施例进行的描述而变得明确。
附图说明
图1是示出第一实施例中的图像处理装置100的硬件配置的一个例子的图。
图2是示出第一实施例中的处理的框图。
图3是示出以16bit为单元生成网格(grid)时的RGB三维空间的图。
图4是示出网格直方图(GH)计算处理203的处理的步骤的流程图。
图5是示出在亮度/色度空间(如YCbCr空间)中输入图像的分布的图。
图6是示出当白平衡失衡时在亮度/色度空间中输入图像的分布的图。
图7是示出第一实施例中白平衡(WB)校正参数计算处理的流程图。
图8是示出计算各种图像分析参数的处理的流程图。
图9是说明第一实施例中场景分类的图。
图10是示出在第一实施例中使用的色调校正曲线的一个例子的图。
图11是示出用于计算每个场景的饱和度加强系数的加权直线的图。
图12是示出生成三维查找表的处理的流程图。
图13是示出第二实施例中的处理的方框图。
图14是示出第二特征量分析处理的流程图。
图15是示出肤色区域定义的一个例子的图。
图16是示出肤色区域的亮度校正曲线的一个例子的图。
图17是示出三维查找表(3DLUT)修正处理的流程图。
具体进行方式
以下,将参照附图详细描述本发明的多个实施例。
[第一实施例]
图1是示出第一实施例中的图像处理装置100的硬件配置的一个例子的图。在图1中,101是CPU,102是ROM,103是RAM。104是打印机引擎,105是由键盘、按钮、触摸面板等构成的用户接口(UI)。
106是诸如液晶显示器的显示设备。107是存储卡读取器,108是诸如USB的接口(IF)。以上各部件都与系统总线109连接。此外,存在接口108经由USB电缆与个人计算机(PC)110连接的情况。
CPU 101将存储在ROM 102中的程序(包括下文中说明的图像处理程序)加载到作为工作存储器的RAM 103,并执行该程序。然后通过根据该程序经由系统总线109控制上述各个部件来实现该程序的功能。
虽然在第一实施例中以打印机作为例子进行说明,但是本发明不限于此,不用说本发明还能适用于其他设备,例如,数字照相机、复印机、传真机和电视。
图2是说明第一实施例中的处理的框图,所述处理由CPU 101执行。首先,图像数据通常是Exif-JPEG数据,该数据经由存储卡读取器107或接口108输入。然后,JPEG解码器进行解码(JPEG解码)处理200,所述数据在存储器中被展开作为YCbCr数据。该YCbCr数据被输入到缩小图像生成处理201,并采用公知技术生成缩小图像。
生成缩小图像是为了对在后述的网格直方图(GH)计算处理中的计算量以及对WB参数计算处理中提取各种图像特征的计算量进行消减。因此,在该缩小图像中必须留下某种程度的图像细节的前提下,希望该大小最小大约是VGA(640×480像素)大小。
接下来,经由YCC-RGB转换处理202将该缩小图像输入到网格直方图(GH)计算处理203,计算出所述输入图像的网格直方图。YCC-RGB转换处理202是公知的亮度色度转换,因此其详细描述被省略。
在此描述作为多维直方图的网格直方图。该网格直方图是如图3所示的多维空间中的RGB直方图。图3所示的例子示出了在24位(RGB各8位)RGB三维空间中以16bit为单元生成网格的情况。
图4是示出GH计算处理203的处理步骤的流程图。在S401中,计算输入的RGB缩小图像的各个像素在GH网格中的位置。使用各个像素的(R,G,B)值,进行如下的计算处理。
在上述计算公式中,GR,GG,和GB表示所述网格直方图的各个网格,当例如,(R,G,B)=(16,16,16)时,在所述网格中的位置被计算为(1,1,1)。
然后,在S402中,使用如下所示的三维阵列GH来累计所述计算出的网格位置的次数:
GH[GR]·[GG]·[GB]=GH[GR]·[GG]·[GB]+1
然后,通过对所述缩小图像中的每一个像素进行上述处理(在S403为是),能够计算出GH。
虽然在第一实施例中的,将所述缩小图像从YCbCr数据转换为RGB数据并在RGB三维空间中计算出GH,但是本发明不限于此。例如,三维网格可由YCbCr空间构成,然后能进行类似的GH计算,此外,在高于三维空间的空间(例如像CMYK的四维空间)中能够类似地计算出GH。
然而,在上述的RGB空间中的GH计算与在YCbCr空间中用相同数量的网格构成的GH相比更具优势。也就是说,在通常的图像数据中,不存在具有高亮度和饱和度的像素,例如(Y,Cb,Cr)=(255,128,128)。因此,在YCbCr空间中,次数为0的网格位置大量存在,从而无法有效利用该空间。
另一方面,在RGB空间中,图像数据存在于遍及从(R,G,B)=(255,255,255)到(R,G,B)=(0,0,0)的整个空间。这样该网格中的所有位置均能被有效利用,结果,与利用YCbCr空间的情况相反,图像信息被详细分析。因此,在第一实施例中,对假定使用RGB三维GH进行描述。
然后,返回参照图2,所述步骤进入白平衡(WB)参数计算处理204,在此,估算整个输入图像的WB状态,并获得用于对适当的WB进行校正的校正参数。尽管在本发明中WB校正方法不受限制并且可以使用一种公知的技术,但是在此,将使用图像中的两个区域(即明区(亮调区域)和暗区(暗调区域))的WB校正方法作为例子进行描述。
如图5所示,已知当输入图像具有适当的白平衡时,在亮度/色度空间(例如YCbCr空间)中输入图像的分布中,亮调(HL)/暗调(SD)区域500被分布在灰轴(Y轴)附近。
另一方面,当白平衡失衡时,如由于在摄影时光源的影响在输入图像中产生彩色灰雾时,在亮度/色度空间中的图像的分布与图6中的600所显示的分布相似。为了对具有该分布的图像进行WB校正,已知如下一种技术:生成用于将亮调和暗调区域放置在亮度/色度空间中的灰轴上的旋转矩阵,并使用如下转换公式进行校正。在该转换公式中的3×3旋转矩阵被视为WB校正参数。
这里,将参照图7描述通过生成三维旋转矩阵来计算WB校正参数的方法。
图7是示出第一实施例中WB校正参数的计算处理的流程图。首先,在S700中计算缩小图像的直方图。对于该直方图,计算累积亮度直方图和各个亮度中Cb和Cr的平均值。然后,在S701,计算亮调和暗调的点。对于这些点,例如,参照上述的累积亮度直方图,累积次数为整个缩小图像的99%的点被视为亮调点,而累积次数为整个缩小图像的1%的点则被视为暗调点。
然后,在S702中,生成在灰轴上绘制所述两个点(即,亮调点和暗调点)的3×3旋转矩阵。基于各种文献,生成3×3旋转矩阵的方法是公知技术,因此其详细描述将被省略。
然后,返回参照图2,进入特征量分析处理205,计算用于分析各种图像(即应用所述WB校正后的输入图像)的特征量的分析参数。
图8是示出计算各种图像分析参数的处理的流程图。首先,在S800,获得GH中的各个网格值(R,G,B)和各网格的次数。然后,在S801各个(R,G,B)值被转换为(Y,Cb,Cr)值。对于转换的(Y,Cb,Cr)值,通过使用在WB参数计算处理204计算出的旋转矩阵来获得WB校正后的值(Y′,Cb′,Cr′)。
然后,在S802,通过使用在S801获得的WB校正后的值和网格的次数,计算亮度平均值,亮度的直方图,色相的直方图,平均饱和度等。色调和饱和度的计算可以是HIS型计算,或可以使用在Cb-Cr平面中从色相角(hueangle)到原点的距离进行该计算。然后,对于GH中的所有的网格进行上述处理(在S803为是)。
如上所述,当要从WB校正后的图像计算各种分析参数时,在VGA大小的图像的情况下,对各个像素计算直方图需要大约300,000次计算。
然而,在当采用如第一实施例所述的使用网格直方图的方法的情况下,当GH的网格单元是,例如16bit,所有网格的点数为173=4913,其意味着使用大约5000次计算,才能大体掌握图像特征。在图1所示的CPU的处理能力较弱的环境中,这是一个非常重要的优点。
基于所述分析的信息,在色调校正曲线计算处理中和饱和度校正系数计算处理中,选择用于色调校正的一维色调曲线,并进行用于饱和度校正的系数值的计算。
根据图9所示的场景分类表确定这些值。图9是说明第一实施例中场景分类的图。图9示出了非常简单化的场景分类(确定)。具体地说,根据基于GH和WB校正参数分析的图像分析值(平均亮度,平均饱和度)的关系,图像被划分为四类。
当平均亮度和平均饱和度不小于阈值(Th_Y,Th_S)时,场景被归类为风景,当平均亮度和平均饱和度小于所述阈值时,场景被归类为曝光不足的场景。当平均饱和度不小于阈值而平均亮度小于阈值时,场景被归类为夜景,在所有的其他情况下,场景被归类为标准场景。在图2所示的场景分类处理206中进行该场景分类。
这样以来,在第一实施例中,通过在对输入图像WB校正后使用GH对该图像状态进行分析,能够基于调整色彩平衡后的状态进行校正场景分类处理。
在色调校正曲线计算处理207中,基于上述场景分类的结果确定色调校正曲线。图10是示出在第一实施例中使用的色调校正曲线的一个例子的图。虽然为了简单化在此示出了四个色调曲线,但是本发明不限于此。
具体地说,对于曝光不足的场景,设定了增强整体明度的直线(图10中所示的“曝光不足”)。对于风景场景,设定了增强整体对比度的曲线(图10所示的“风景”)。对于夜景,设定了用于突出暗区和加亮明区的直线(图10中所示的“夜景”)。最后,对于标准场景,设定了不做任何处理的直线(图10中所示的“标准”)。基于场景分类的结果选择所述曲线,并且该曲线作为一维查找表(1DLUT)被存储在存储器中。
图11是示出计算用于计算每个场景的饱和度加强系数的加权直线的图。在图11中,纵轴是饱和度加强增益(SG),横轴是在WB校正后的特征量分析处理205中获得的平均饱和度。在饱和度校正系数计算处理208中,如果所述场景已被归类为风景或夜景,则基于上面的曲线计算SG;或者如果所述场景已被归类为标准场景,则基于下面的曲线计算SG。
在上述任何曲线中,当平均饱和度低时则积极进行饱和度加强,当平均饱和度不低于预定值时,为了避免过度的饱和度加强,SG被设定为1.0。
基于上述处理,通过使用确定的WB校正参数、色调校正用的一维查找表(1DLUT),和饱和度加强增益,经3DLUT生成处理209生成校正用的RGB三维查找表。
图12是示出生成三维查找表的处理的流程图。首先,在S1200,LUT中的各个网格值(R,G,B)被转换为(Y,Cb,Cr)。然后,在S1201,将用于进行WB校正的旋转矩阵应用于转换的(Y,Cb,Cr),来计算(Y′,Cb′,Cr′)。然后,在S1202,对Y′值应用色调校正用的1DLUT,以计算亮度校正后的Y″值。
然后,在S1203,将(Cb′,Cr′)乘以SG,以计算饱和度校正后的(Cb″,Cr″)值。然后,在S1204,将校正后的值(Y″,Cb″,Cr″)转换为RGB值,并作为网格值存储在3DLUT中。对3DLUT中所有的网格进行上述处理(在S1205中为是),由此完成校正用的表。
在此之后,在校正处理210中,通过使用对缩小的输入图像生成的用于校正的3DLUT,基于公知的插值方法(例如,四面体插值法)生成原始分辨率、打印分辨率或显示分辨率的输出图像。
所述生成的输出图像可以被存储在存储设备中,显示在显示设备上,或发送到打印机引擎以进行打印。
依照第一实施例,对通过缩小输入图像所获得的缩小图像生成RGB网格直方图,并从该缩小图像计算WB校正参数。然后,通过将该WB校正参数应用于网格直方图,而不是应用于所述缩小图像,即使小的存储量和小的计算量,也能够准确估算WB校正后的该图像的状态。
在第一实施例中,因为基于该估算而获得其后的场景分类、色调曲线和饱和度加强系数,所以与以往可能的相比,能够实现更准确的场景分类和校正量的计算。
(第二实施例)
参照附图对本发明的第二实施例进行详细描述。在第二实施例中,所描述的情况是以下这样一种情况:在该情况下在产生彩色灰雾的输入图像中检测到肤色区域,并根据该状态进行适当的肤色校正。
在第二实施例中的图像处理装置的配置与第一实施例中采用图1描述的所述图像处理装置的配置相同,因此其描述将被省略。
图13是示出第二实施例中的处理的方框图。对输入图像计算GH和WB校正参数的处理,进行场景分类的处理以及生成最初的3DLUT的处理(1300到1308)与第一实施例中的相同,因此,在此其描述将被省略。
在第二实施例中,在第二特征量分析处理1309中,通过使用3DLUT和GH分析肤色区域的分布。图14是示出第二特征量分析处理的流程图。
首先,在S1400,通过使用在3DLUT生成处理1308中生成的3DLUT,基于公知的插值法(例如四面体插值法)计算在GH中的各个网格的值(R,G,B)的校正后的值(R′,G′,B′)。然后,在S1401,计算出的(R′,G′,B′)被转换为(Y′,Cb′,Cr′)。
然后,判断在S1401中转换的(Cb′,Cr′)是否包含在定义的肤色区域中。图15是示出肤色区域定义的一个例子的图。在图15,为了简单化,在Cb-Cr平面中,中心位置为(STx,STy)半径为STr的圆区域1500被定义为肤色区域。然而本发明不限于此,可以使用任意的形状定义和面积定义。
作为判断的结果,当(Cb′,Cr′)包含在该定义的肤色区域中时,在S1402中为了计算肤色区域的平均亮度,将所述网格的次数乘以亮度Y′求积。然后,对GH中的所有网格进行上述的处理(在S1403中为是),在S1404中,将该积值除以GH次数的总和,以计算WB校正后的肤色区域的平均亮度。
然后,返回参照图13,基于计算出的肤色区域的平均亮度,在亮度校正曲线生成处理1310中计算用于肤色亮度校正的曲线。图16是示出肤色区域的亮度校正曲线的一个例子的图。
如图16所示,生成亮度校正曲线1600。生成所述亮度校正曲线1600使得当计算出的肤色区域的所述平均亮度为InSkinTone时,其值(即目标明度)为OutSkinTone,(InY,OutY)满足(0,0)和(255,255)。亮度校正曲线1600可以是单纯的伽玛曲线,或可以是满足上述条件的直线构成的曲线。然后,该生成的曲线作为1DLUT存储在所述存储器中。
然后,当完成亮度校正曲线的生成时,在3DLUT修正处理1311中进行3DLUT修正。图17是示出三维查找表(3DLUT)修正处理的流程图。
首先,在S1700中,获得用于校正的3DLUT的网格值(R,G,B),在S1701中将该值转换为YCbCr。然后,在S1702中,上述亮度校正曲线1600被应用于Y,获得Y′。然后,在S1703中,(Y′,Cb,Cr)被转换为(R′,G′,B′),并被存储在网格值中。对用于校正的3DLUT中所有的网格进行上述处理(在S1704为是),由此完成该LUT的修正处理。
在此之后,在校正处理1312中,基于公知的插值法(例如,四面体插值法),通过使用对原始分辨率的输入图像校正用的所述3DLUT,生成输出图像。
该生成的输出图像可以被存储在存储设备中,显示在显示设备上,或发送给打印机引擎进行打印。
根据第二实施例,使用GH模拟进行基本的图像校正(例如WB校正、色调校正和饱和度校正)后的图像状态,并在此基础上,能够准确地估算基本校正后肤色区域的分布。与使用VGA大小的中间图像的情况相比,由于对于估算来说只有GH是必需的,因此能够以极其节省存储量的方式和使用小的计算量,准确地计算校正参数。
此外,不使用对输入图像通常获得的一维直方图(各个亮度和RGB分量的直方图),而是使用RGB空间中的三维直方图。通过使用该三维直方图进行所述图像分析,能够实现不能通过一般一维直方图计算出的色彩分布分析。因此,能够计算出不能通过一维直方图获得的校正参数。
在第二实施例中,首先生成用于基本的图像校正的3DLUT,通过使用GH估算肤色区域并计算所述校正量,由此修正已生成的3DLUT。通过该处理,仅需要在处理步骤的最后对原始分辨率的图像进行一次校正处理。因此,第二实施例还具有通过高效率处理生成最终输出图像的优点。
虽然在第二实施例中,描述了在基本的图像校正处理之后的肤色区域的亮度校正处理,但是本发明不限于此。例如,在所述图像校正处理之后通过使用GH分析诸如天空,山绿等特定颜色的分布,能够进行基于该结果的适当的处理(例如,饱和度校正和色相校正)。
此外,虽然在第一实施例和第二实施例中对缩小图像进行白平衡校正,以分析图像的特征量,但是对所述缩小图像进行的校正也可以是该白平衡校正以外的任意图像校正处理。在此情况下,对该图像校正处理之后的图像进行特征量分析。
虽然已经描述过基于RGB和YCbCr数据的图像处理,但是本发明不限于此。例如,由于YCbCr意味着将分量分解为亮度和色度,因此使用等同于这些的色彩空间,例如YC1C2或L*a*b*的均等色彩空间进行所述处理,也当然落入本发明的范围。
注意,本发明可以应用于包含多个设备(例如,主机、接口设备、读卡器、打印机等)的系统,或者也可以应用于包含单一设备(例如,复印机、传真机等)的装置。
此外,不用说本发明的目的还能通过以下方式实现:向系统或装置提供存储有实现上述实施例功能的软件的程序代码的存储介质,并使系统或装置的计算机(CPU或MPU)读出并执行存储在该程序介质中的所述程序代码。
在此情况下,从计算机可读存储介质读取的所述程序代码本身实现了上述实施例的所述功能,存储有所述程序代码的存储介质构成了本发明。
用来提供程序代码的存储介质的例子包括:软盘、硬盘、光盘、磁光盘、CD-ROM、CD-R、磁带、非易失性存储卡和ROM等等。
此外,不用说下述情况也落入本发明的范围中,其不限于通过计算机执行读出的程序代码实现上述实施例的功能。即,计算机上运行的OS(操作系统)等基于所述程序代码中的指令进行实际处理的部分或全部,并通过该处理实现上述实施例的功能的情况也包含在本发明的范围中。
此外,将从存储介质中读出的程序代码写入安装在计算机中的功能扩展板或者连接到计算机的功能扩展单元设置的存储器,之后,基于包含在该程序代码中的指令,功能扩展板或者功能扩展单元中包含的CPU等进行实际处理的部分或者全部,上述实施例的功能得以实现。不用说这也落入本发明的范围内。
虽然已参照示例性实施例对本发明进行了描述,但是应当理解的是本发明并不限于所公开的示例性实施例。应当对以下权利要求的范围给予最宽泛的解释,以包括所有变体、等同结构和功能在内。
Claims (7)
1.一种对输入图像进行多个校正处理的图像处理装置,该图像处理装置包括:
第一计算单元,用于计算所述输入图像的多维直方图;
第一分析单元,用于基于所述多维直方图,对经受过特定的校正处理的所述输入图像的特征量进行分析;以及
第二计算单元,用于基于所述分析的结果,计算在所述特定的校正处理后进行的校正处理所要使用的校正参数。
2.根据权利要求1所述的图像处理装置,该图像处理装置还包括:
多维查找表生成单元,用于基于用于所述特定的校正处理的校正参数和在所述特定的校正处理之后进行的所述校正处理要使用的校正参数,生成多维查找表;以及
输出图像生成单元,用于通过使用所述多维查找表,生成输出图像。
3.根据权利要求1所述的图像处理装置,其中,所述第一计算单元基于RGB三维空间来计算多维直方图。
4.根据权利要求1所述的图像处理装置,其中,所述特定的校正处理是用于校正白平衡的校正处理。
5.根据权利要求2所述的图像处理装置,该图像处理装置还包括:
第二分析单元,用于在计算出所述校正参数后,基于所述多维直方图分析特定颜色的分布;
第三计算单元,用于计算用于对所述特定颜色进行处理的参数;
修正单元,用于基于由所述第三计算单元计算出的所述参数,修正所述多维查找表。
6.根据权利要求5所述的图像处理装置,其中,所述特定颜色是肤色。
7.一种对输入图像进行多个校正处理的图像处理装置所执行的图像处理方法,该图像处理方法包括以下步骤:
计算所述输入图像的多维直方图;
基于所述多维直方图,对经受过特定的校正处理的所述输入图像的特征量进行分析;以及
基于所述分析的结果,计算在所述特定的校正处理之后进行的校正处理所要使用的校正参数。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007199902A JP5032911B2 (ja) | 2007-07-31 | 2007-07-31 | 画像処理装置及び画像処理方法 |
JP2007199902 | 2007-07-31 | ||
JP2007-199902 | 2007-07-31 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101360178A true CN101360178A (zh) | 2009-02-04 |
CN101360178B CN101360178B (zh) | 2012-07-04 |
Family
ID=40332506
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008101444714A Active CN101360178B (zh) | 2007-07-31 | 2008-07-31 | 图像处理装置和图像处理方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US8600154B2 (zh) |
JP (1) | JP5032911B2 (zh) |
CN (1) | CN101360178B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101902550A (zh) * | 2009-05-28 | 2010-12-01 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN105139338A (zh) * | 2015-07-24 | 2015-12-09 | 珠海奔图电子有限公司 | 多维查找表的生成方法及装置、图像缩放处理方法及装置 |
CN106571127A (zh) * | 2015-10-08 | 2017-04-19 | 小米科技有限责任公司 | 一种显示目标图像的方法和装置 |
CN106600555A (zh) * | 2016-12-16 | 2017-04-26 | 中国航空工业集团公司洛阳电光设备研究所 | 一种抗单粒子翻转的dvi图像畸变校正装置 |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8295593B2 (en) * | 2009-01-07 | 2012-10-23 | Seiko Epson Corporation | Method of detecting red-eye objects in digital images using color, structural, and geometric characteristics |
JP5743384B2 (ja) | 2009-04-14 | 2015-07-01 | キヤノン株式会社 | 画像処理装置及び画像処理方法とコンピュータプログラム |
JP5183568B2 (ja) * | 2009-05-21 | 2013-04-17 | キヤノン株式会社 | 画像処理装置及び方法、及びプログラムを記録した記憶媒体 |
US8311355B2 (en) * | 2009-06-05 | 2012-11-13 | Apple Inc. | Skin tone aware color boost for cameras |
JP5487737B2 (ja) * | 2009-06-08 | 2014-05-07 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5814799B2 (ja) * | 2012-01-06 | 2015-11-17 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US9025867B2 (en) * | 2012-05-31 | 2015-05-05 | Apple Inc. | Systems and methods for YCC image processing |
JP5956860B2 (ja) | 2012-07-09 | 2016-07-27 | キヤノン株式会社 | 画像処理装置、画像処理方法、プログラム |
JP6071289B2 (ja) | 2012-07-09 | 2017-02-01 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP6039942B2 (ja) | 2012-07-09 | 2016-12-07 | キヤノン株式会社 | 情報処理装置及びその制御方法及びプログラム |
JP6012310B2 (ja) | 2012-07-09 | 2016-10-25 | キヤノン株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP5962428B2 (ja) * | 2012-10-22 | 2016-08-03 | セイコーエプソン株式会社 | 画像処理装置の調整方法、調整装置、画像処理装置、及び表示モジュール |
US9088753B2 (en) | 2013-01-11 | 2015-07-21 | Canon Kabushiki Kaisha | Image forming apparatus, luminance correction method, and storage medium storing program |
JP6417154B2 (ja) | 2014-08-27 | 2018-10-31 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6386841B2 (ja) | 2014-09-12 | 2018-09-05 | キヤノン株式会社 | 画像処理装置、プログラム、画像処理システム、及び、画像処理方法 |
JP6322099B2 (ja) | 2014-09-12 | 2018-05-09 | キヤノン株式会社 | 画像処理装置、及び、画像処理方法 |
JP6397284B2 (ja) | 2014-09-16 | 2018-09-26 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2016063324A (ja) | 2014-09-16 | 2016-04-25 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US10530995B2 (en) * | 2015-06-12 | 2020-01-07 | Gopro, Inc. | Global tone mapping |
US9959604B2 (en) * | 2016-06-13 | 2018-05-01 | Gopro, Inc. | Dynamic global tone mapping with integrated 3D color look-up table |
JP6902860B2 (ja) | 2016-12-09 | 2021-07-14 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP6942464B2 (ja) | 2016-12-09 | 2021-09-29 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
US11108918B2 (en) | 2017-01-17 | 2021-08-31 | Hewlett-Packard Development Company, L.P. | Assessing print quality using intensity histograms and perimeter lengths |
JP6902886B2 (ja) | 2017-03-14 | 2021-07-14 | キヤノン株式会社 | 画像処理装置、方法およびプログラム |
CN110599553B (zh) * | 2019-09-10 | 2021-11-02 | 江南大学 | 一种基于YCbCr的肤色提取及检测方法 |
US11062507B2 (en) * | 2019-11-04 | 2021-07-13 | Apple Inc. | Compression techniques for pixel write data |
Family Cites Families (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4907075A (en) * | 1987-07-28 | 1990-03-06 | International Business Machines Corporation | Method for selecting colors |
JPH087553B2 (ja) * | 1988-10-27 | 1996-01-29 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 色画像量子化方法及び装置 |
EP0693738A3 (en) * | 1994-06-23 | 1996-11-06 | Dainippon Screen Mfg | Device and method for producing colored masks |
JP3778229B2 (ja) * | 1996-05-13 | 2006-05-24 | 富士ゼロックス株式会社 | 画像処理装置、画像処理方法、および画像処理システム |
US5874988A (en) * | 1996-07-08 | 1999-02-23 | Da Vinci Systems, Inc. | System and methods for automated color correction |
JP3584389B2 (ja) | 1998-03-25 | 2004-11-04 | 富士写真フイルム株式会社 | 画像処理方法および画像処理装置 |
US6628830B1 (en) * | 1998-06-24 | 2003-09-30 | Canon Kabushiki Kaisha | Image processing method and apparatus and storage medium |
US6791711B1 (en) * | 1998-06-24 | 2004-09-14 | Canon Kabushiki Kaisha | Image processing method, image processing apparatus, and recording medium |
US7417640B1 (en) * | 1999-01-29 | 2008-08-26 | Lg Electronics Inc. | Method for dominant color setting of video region and data structure and method of confidence measure extraction |
US7006668B2 (en) | 1999-12-28 | 2006-02-28 | Canon Kabushiki Kaisha | Image processing method and image processing apparatus |
JP2001313839A (ja) | 2000-04-28 | 2001-11-09 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びに記録媒体 |
US7196724B2 (en) * | 2000-12-08 | 2007-03-27 | Nikon Corporation | Image signal processing device, digital camera and computer program product that perform white balance adjustment using pixel outputs from extracted areas |
JP4095265B2 (ja) | 2001-09-06 | 2008-06-04 | キヤノン株式会社 | 画像処理装置、画像処理方法、コンピュータ読み取り可能な記憶媒体、及びコンピュータプログラム |
JP4294896B2 (ja) * | 2001-09-26 | 2009-07-15 | 富士フイルム株式会社 | 画像処理方法および装置並びにそのためのプログラム |
US7146041B2 (en) * | 2001-11-08 | 2006-12-05 | Fuji Photo Film Co., Ltd. | Method and apparatus for correcting white balance, method for correcting density and recording medium on which program for carrying out the methods is recorded |
JP4011933B2 (ja) * | 2002-02-22 | 2007-11-21 | キヤノン株式会社 | 画像処理装置およびその方法 |
US6995791B2 (en) * | 2002-04-02 | 2006-02-07 | Freescale Semiconductor, Inc. | Automatic white balance for digital imaging |
JP3514257B2 (ja) | 2002-05-20 | 2004-03-31 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、画像処理方法、プログラムおよび情報記憶媒体 |
JP4803944B2 (ja) * | 2002-07-19 | 2011-10-26 | 大日本スクリーン製造株式会社 | 印刷物測定方法および印刷物測定装置 |
JP2004202968A (ja) * | 2002-12-26 | 2004-07-22 | Dainippon Screen Mfg Co Ltd | インキ供給量制御方法およびインキ供給量制御装置 |
JP4248947B2 (ja) * | 2003-06-11 | 2009-04-02 | グローリー株式会社 | 画像減色装置、画像減色方法および画像減色プログラム |
US7860339B2 (en) * | 2003-09-11 | 2010-12-28 | Panasonic Corporation | Visual processing device, visual processing method, visual processing program, intergrated circuit, display device, image-capturing device, and portable information terminal |
JP2005151282A (ja) * | 2003-11-18 | 2005-06-09 | Fuji Xerox Co Ltd | 画像処理装置、画像処理方法、およびプログラム |
WO2005057909A1 (ja) * | 2003-12-11 | 2005-06-23 | Fujitsu Limited | 画像補正方法及びプログラム、並びに装置 |
EP1694053A4 (en) * | 2003-12-12 | 2007-08-22 | Fujitsu Ltd | PROGRAM, DEVICE AND METHOD FOR CORRECTION OF COLOR BALANCE |
US7668365B2 (en) * | 2004-03-08 | 2010-02-23 | Seiko Epson Corporation | Determination of main object on image and improvement of image quality according to main object |
JP4468734B2 (ja) * | 2004-04-27 | 2010-05-26 | オリンパス株式会社 | 映像信号処理装置と映像信号処理プログラム |
JP4474335B2 (ja) * | 2004-06-30 | 2010-06-02 | キヤノン株式会社 | 撮像装置及びその制御方法並びにダイレクトプリントシステム |
CN101204083A (zh) * | 2005-03-07 | 2008-06-18 | 德克索实验室 | 利用颜色数字图像对动作如锐度修改进行控制的方法 |
JP2006254136A (ja) * | 2005-03-11 | 2006-09-21 | Seiko Epson Corp | 出力データを生成する画像処理 |
US7586653B2 (en) * | 2005-04-22 | 2009-09-08 | Lexmark International, Inc. | Method and system for enhancing an image using luminance scaling |
JP2006343989A (ja) * | 2005-06-08 | 2006-12-21 | Fuji Xerox Co Ltd | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2007067815A (ja) * | 2005-08-31 | 2007-03-15 | Olympus Imaging Corp | 画像処理装置及び画像処理方法 |
KR100691250B1 (ko) * | 2005-10-20 | 2007-03-12 | 삼성전자주식회사 | 휴대용 단말기의 자동 색 온도 보정 촬영 방법 |
JP4935049B2 (ja) * | 2005-10-27 | 2012-05-23 | セイコーエプソン株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP4577845B2 (ja) * | 2005-12-15 | 2010-11-10 | 株式会社リコー | 画像処理装置、画像処理方法、プログラム及びプログラムを格納した記憶媒体 |
JP4646130B2 (ja) * | 2005-12-15 | 2011-03-09 | 株式会社リコー | 画像処理装置、画像処理方法、プログラム及びプログラムを格納した記憶媒体 |
US7715047B2 (en) * | 2006-02-17 | 2010-05-11 | Seiko Epson Corporation | Image editing device |
JP4854340B2 (ja) * | 2006-03-08 | 2012-01-18 | キヤノン株式会社 | 画像処理方法及び装置 |
US20070237514A1 (en) * | 2006-04-06 | 2007-10-11 | Eastman Kodak Company | Varying camera self-determination based on subject motion |
US20070248330A1 (en) * | 2006-04-06 | 2007-10-25 | Pillman Bruce H | Varying camera self-determination based on subject motion |
US8022964B2 (en) * | 2006-04-21 | 2011-09-20 | Apple Inc. | 3D histogram and other user interface elements for color correcting images |
US20080123929A1 (en) * | 2006-07-03 | 2008-05-29 | Fujifilm Corporation | Apparatus, method and program for image type judgment |
JP4835865B2 (ja) * | 2006-08-08 | 2011-12-14 | 富士ゼロックス株式会社 | 画像処理装置及び画像処理プログラム |
JP4315176B2 (ja) * | 2006-09-29 | 2009-08-19 | セイコーエプソン株式会社 | 印刷装置、印刷方法、および、印刷用プログラム |
US20080107341A1 (en) * | 2006-11-02 | 2008-05-08 | Juwei Lu | Method And Apparatus For Detecting Faces In Digital Images |
JP4850689B2 (ja) * | 2006-12-22 | 2012-01-11 | キヤノン株式会社 | 画像処理装置、画像処理方法、画像処理プログラム並びに記憶媒体 |
US20080181507A1 (en) * | 2007-01-29 | 2008-07-31 | Intellivision Technologies Corp. | Image manipulation for videos and still images |
US20080304736A1 (en) * | 2007-02-20 | 2008-12-11 | Masahiro Nakagawa | Method of estimating a visual evaluation value of skin beauty |
JP5221886B2 (ja) * | 2007-03-07 | 2013-06-26 | 富士重工業株式会社 | 物体検出装置 |
US8711249B2 (en) * | 2007-03-29 | 2014-04-29 | Sony Corporation | Method of and apparatus for image denoising |
JP4837009B2 (ja) * | 2008-09-12 | 2011-12-14 | ミツミ電機株式会社 | 液晶表示装置 |
JP5178473B2 (ja) * | 2008-11-20 | 2013-04-10 | 株式会社東芝 | 画像処理装置および画像処理方法 |
-
2007
- 2007-07-31 JP JP2007199902A patent/JP5032911B2/ja active Active
-
2008
- 2008-07-07 US US12/168,252 patent/US8600154B2/en active Active
- 2008-07-31 CN CN2008101444714A patent/CN101360178B/zh active Active
-
2013
- 2013-10-23 US US14/061,040 patent/US8929681B2/en active Active
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101902550A (zh) * | 2009-05-28 | 2010-12-01 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN101902550B (zh) * | 2009-05-28 | 2014-03-26 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN105139338A (zh) * | 2015-07-24 | 2015-12-09 | 珠海奔图电子有限公司 | 多维查找表的生成方法及装置、图像缩放处理方法及装置 |
CN105139338B (zh) * | 2015-07-24 | 2018-08-21 | 珠海奔图电子有限公司 | 多维查找表的生成方法及装置、图像缩放处理方法及装置 |
CN106571127A (zh) * | 2015-10-08 | 2017-04-19 | 小米科技有限责任公司 | 一种显示目标图像的方法和装置 |
CN106571127B (zh) * | 2015-10-08 | 2019-06-14 | 小米科技有限责任公司 | 一种显示目标图像的方法和装置 |
CN106600555A (zh) * | 2016-12-16 | 2017-04-26 | 中国航空工业集团公司洛阳电光设备研究所 | 一种抗单粒子翻转的dvi图像畸变校正装置 |
Also Published As
Publication number | Publication date |
---|---|
US20090034840A1 (en) | 2009-02-05 |
CN101360178B (zh) | 2012-07-04 |
JP5032911B2 (ja) | 2012-09-26 |
US20140044354A1 (en) | 2014-02-13 |
US8600154B2 (en) | 2013-12-03 |
JP2009038523A (ja) | 2009-02-19 |
US8929681B2 (en) | 2015-01-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101360178B (zh) | 图像处理装置和图像处理方法 | |
Lukac et al. | Color image processing: methods and applications | |
CN101902550B (zh) | 图像处理装置及图像处理方法 | |
CN101360179B (zh) | 图像处理装置和方法 | |
US8743272B2 (en) | Image processing apparatus and method of controlling the apparatus and program thereof | |
EP2798830B1 (en) | Spectral synthesis for image capture device processing | |
US8374458B2 (en) | Tone correcting method, tone correcting apparatus, tone correcting program, and image equipment | |
US9270867B2 (en) | Image compensation device, image processing apparatus and methods thereof | |
Bianco et al. | Color correction pipeline optimization for digital cameras | |
US7466868B2 (en) | Determining parameters for adjusting images | |
CN1991909B (zh) | 图像处理装置 | |
US20050185837A1 (en) | Image-processing method, image-processing apparatus and image-recording apparatus | |
US20050243347A1 (en) | Conversion of color image to monochrome image | |
US20050025356A1 (en) | Image processing method and apparatus | |
US8391646B2 (en) | Image processing device and method that performs image quality adjustment and resize processing on image data | |
US11663707B2 (en) | Method and system for image enhancement | |
JP2005190435A (ja) | 画像処理方法、画像処理装置及び画像記録装置 | |
US7200265B2 (en) | Image processing apparatus, image processing method, image processing program, and medium recording the image processing program | |
US8861849B2 (en) | Image processing | |
US20140212037A1 (en) | Image processing apparatus, image processing method, and computer readable medium | |
US20090067017A1 (en) | Input adaptive method for color table look-up | |
US20090028431A1 (en) | Color adjusting apparatus, image forming apparatus, color adjusting method and computer readable medium | |
US7885458B1 (en) | Illuminant estimation using gamut mapping and scene classification | |
US20050259282A1 (en) | Image processing method, image processing apparatus, image recording apparatus, and image processing program | |
US20090245649A1 (en) | Method, Program and Apparatus for Detecting Object, Computer Readable Recording Medium Storing Object Detection Program, and Printing Apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |