CN111526279B - 图像处理装置、图像处理方法和记录介质 - Google Patents

Abstract

本发明对人脸整体实施适当的美白处理。拍摄装置(1)包括图像处理部(53)、遮蔽图像制作处理部(54)和颜色校正图像制作处理部(55)。图像处理部(53)对包括在图像内的人脸区域实施使肤色变白的美白处理。遮蔽图像制作处理部(54)在要实施美白处理的人脸区域内，确定应当减轻该美白处理的部分。颜色校正图像制作处理部(55)对已确定的应当减轻美白处理的部分，实施用于减轻该美白处理的处理。

Description

图像处理装置、图像处理方法和记录介质

本申请是申请日为2017年12月22日、申请号为201711400064.0、发明名称为“图像处理装置、图像处理方法和记录介质”的专利申请的分案申请。

技术领域

本发明涉及图像处理装置、图像处理方法和记录介质。

背景技术

迄今为止，利用美白处理使包含在图像内的人物的脸变白。例如，日本特开2016-012890号公报公开了一种能够容易设定美白处理效果的技术。

但在上述技术中存在对人脸实施美白处理也会使唇色变浅的问题。

本发明正是鉴于上述问题而做出的，目的在于对人脸整体实施适当的美白处理。

发明内容

为了达成上述目的，本发明一个方式的图像处理装置的特征在于，包括：

美白处理单元，其对包含在图像内的人脸区域实施使肤色变白的美白处理；

减轻部分确定单元，其在要实施所述美白处理的人脸区域内，确定应当减轻该美白处理的部分；以及

减轻处理单元，其对所述已确定的应当减轻所述美白处理的部分实施用于减轻该美白处理的处理。

为了达成上述目的，本发明一个方式的图像处理装置的特征在于，包括：

唇部确定单元，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸唇部；以及

唇色确定单元，其根据所述已确定的所述唇部中的所述HSV颜色空间的颜色信息，确定唇色。

为了达成上述目的，本发明一个方式的图像处理方法的特征在于，包括：

美白处理，其对包含在图像内的人脸区域使肤色变白；

减轻部分确定处理，其在要实施所述美白处理的人脸区域内，确定应当减轻该美白处理的部分；以及

减轻处理，其对所述已确定的应当减轻所述美白处理的部分，实施用于减轻该美白处理的处理。

为了达成上述目的，本发明一个方式的图像处理方法的特征在于，包括：

唇部确定处理，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸唇部；以及

唇色确定处理，其根据所述已确定的所述唇部中的HSV颜色空间的颜色信息，确定唇色。

为了达成上述目的，记录有本发明一个方式的计算机可读取程序的记录介质，记录有用于使该计算机实现如下单元的程序，

美白处理单元，其对包含在图像内的人脸区域实施使肤色变白的美白处理；

减轻部分确定单元，其在要实施所述美白处理的人脸区域内，确定应当减轻该美白处理的部分；以及

减轻处理单元，其对所述已确定的应当减轻所述美白处理的部分实施用于减轻该美白处理的处理。

为了达成上述目的，记录有本发明一个方式的计算机可读程序的记录介质，记录有用于使该计算机实现如下单元的程序，

唇部确定单元，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸唇部；以及

唇色确定单元，其根据所述已确定的所述唇部中的HSV颜色空间的颜色信息，确定唇色。

附图说明

图1为用于表示本发明的图像处理装置一个实施方式所涉及的拍摄装置1的硬件构成的框图。

图2为用于说明生成本实施方式中的美白图像的示意图。

图3为用于表示遮蔽图像的制作例的示意图。

图4A为用于表示设定唇色等级的权重所涉及的直方图。

图4B为用于表示唇色等级的权重表的图。

图5A为用于说明制作固定映射的示意图。

图5B为用于表示唇轮廓信息的图。

图6为用于表示V校正的LUT的图。

图7为表示在图1的拍摄装置1的功能构成中用于执行美白图像生成处理的功能构成的功能框图。

图8为用于说明具有图7功能构成的图1中的拍摄装置1执行美白图像生成处理流程的流程图。

图9为用于说明在美白图像生成处理中遮蔽图像制作处理流程的流程图。

图10为用于说明在美白图像生成处理中颜色校正图像制作处理流程的流程图。

具体实施方式

下面，参照附图对本发明的实施方式进行说明。

图1为用于表示本发明的图像处理装置一个实施方式所涉及的拍摄装置1的硬件构成的框图。

例如，拍摄装置1被构成为数码相机。

如图1所示，拍摄装置1包括：CPU(Central Processing Unit，中央处理单元)11、ROM(Read Only Memory，只读存储器)12、RAM(Random Access Memory，随机存取存储器)13、总线14、输入输出接口15、拍摄部16、输入部17、输出部18、存储部19、通信部20和驱动器21。

CPU11按照记录在ROM12中的程序或者从存储部19加载到RAM13的程序执行各种处理。

在RAM13中也适当地存储有CPU11执行各种处理所需的数据等。

CPU11、ROM12和RAM13经由总线14相互连接。在该总线14上还连接有输入输出接口15。在输入输出接口15上连接有拍摄部16、输入部17、输出部18、存储部19、通信部20和驱动器21。

尽管未图示，但拍摄部16包括光学透镜部和图像传感器。

光学透镜部由为了拍摄被摄物而用于对光进行聚光的透镜，例如聚焦透镜、变焦透镜等构成。聚焦透镜为使被摄物像在图像传感器的受光面上成像的透镜。变焦透镜为使焦点距离在一定范围内自如变化的透镜。光学透镜部还根据需要而设置有调整焦点、曝光、白平衡等设定参数的外围电路。

图像传感器由光电转换元件、AFE(Analog Front End，模拟前端)等构成。

例如，光电转换元件由CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)型的光电转换元件等构成。被摄物像自光学透镜部入射到光电转换元件中。因此，光电转换元件将被摄物像进行光电转换(拍摄)之后并将图像信号积存一定时间，然后将积存的图像信号作为模拟信号依次供给到AFE。AFE则对该模拟的图像信号执行A/D(Analog/Digital，模拟/数字)转换处理等各种信号处理。通过各种信号处理生成数字信号并作为拍摄部16的输出信号进行输出。

将这种拍摄部16的输出信号作为拍摄图像的数据适当地供给到CPU11或未图示的图像处理部等。

输入部17由各种按钮等构成，并按照用户的指示操作输入各种信息。输出部18由显示器、扬声器等构成，并输出图像、声音。存储部19由硬盘或DRAM(Dynamic RandomAccess Memory，动态随机存取存储器)等构成，并存储各种图像的数据。通信部20控制经由包括互联网的网络而与其他装置(未图示)之间进行的通信。

在驱动器21上适当地安装有由磁盘、光盘、磁光盘或者半导体存储器等构成的可移动介质31。由驱动器21从可移动介质31读取的程序则根据需要安装到存储部19中。并且，可移动介质31与存储部19同样也能够存储存储部19所存储的图像数据等各种数据。

以这种方式构成的拍摄装置1具有如下功能，其不仅能够对拍摄有脸的图像实施肌肤美白处理，而且能够生成适当地校正了与肤色的色相相近且受到了通过美白处理而使颜色变浅等影响的唇的图像(下面称为“美白图像”)。即，拍摄装置1通过将对脸肌肤实施了美白处理而校正后的唇色校正成适当的颜色并恢复(减轻)美白处理效果，生成美白图像。

即，尽管遮蔽对象部位以外以便仅对肤色区域实施美白处理，但由于唇色同肤色的色相相近，并包含在肤色区域中，因而实施美白处理会受到唇色变浅等影响。并且，美白处理主要通过校正彩度降低、明度提高、朝蓝色方向的色相转换三要素来进行。因此，本实施方式的拍摄装置1对变浅的唇色仅恢复三要素中彩度降低，并维持其他效果，而将唇色校正为适当的颜色。

在本实施方式中，首先对脸整体实施美白处理，然后对受到美白处理影响的唇另外进行用于再现为适当颜色的颜色校正，从而生成美白图像。

图2为用于说明生成本实施方式中的美白图像的示意图。

如图2所示，本实施方式的美白图像是从针对图像整体实施了美白处理的图像(以下称为“原始图像”)中切取包括唇的区域。然后，对包括唇的区域实施颜色校正，以便使经美白处理而变浅的唇色再现为适当的颜色，从而制作图像(下面称为“颜色校正图像”)。由于颜色校正图像是针对唇以外的图像整体进行颜色校正，因此为了仅使唇显现颜色校正效果，使用遮蔽唇以外的遮蔽图像，然后利用α混合将原始图形和颜色校正图像进行图像合成，制作仅唇被颜色校正的图像(下面称为“唇色校正图像”)。在利用α混合进行图像合成时，遮蔽图像为α值。然后，将制作的唇色校正图像合成到原始图像的切取位置，从而生成美白图像。

[遮蔽图像的制作]

图3为表示遮蔽图像的制作例的示意图。在本实施方式中，为了实施用于再现经美白处理而变浅的唇部颜色的校正处理，生成与唇相当区域对应的遮蔽图像。如图3所示，遮蔽图像表示越黑的部分则颜色校正图像的合成比例越低，而越白的部分则颜色校正图像合成的比例越高。在本实施方式中被构成为，对唇中心部实施较强的颜色校正，而为了减少与肌肤的影响对离唇外缘较近的部分实施较强的颜色校正。

首先，通过检测脸的器官以确定唇的位置，然后根据作为包括已确定的唇位置区域中的HSV颜色空间峰值的色相值而制作这种遮蔽图像。如图2所示，在检测本实施方式中的脸的器官中，为了确定唇位置等，至少检测上唇中央的上下两点P1、P2、下唇中央的上下两点P3、P4、唇左右端的两点P5、P6共计六点的位置。

在本实施方式中，为了在基于成为HSV颜色空间峰值的色相值而生成的遮蔽图像中排除鼻等多余部分，通过合成预先模仿唇形状的固定映射，制作最终的遮蔽图像。

具体而言，先从原始图像切取了包括唇的区域的图像(下面称为“切取图像”)制作HUE映射，然后与预先制作的固定映射合成而生成本实施方式的遮蔽图像。在合成HUE映射和固定映射中，为了从HUE映射除去空间不需要的区域，采用HUE映射和固定映射的最小值。

[HUE映射的制作]

HUE映射为在切取图像中确定了与唇色相当的部位的映射。首先，HUE映射将YUV颜色空间的切取图像转换为HSV(色相：Hue，彩度：Saturation·Chrome，明度：Value·Lightness·Brightness)颜色空间。其后，为了除去噪声，在利用ε过滤器模糊的基础上，解析HSV转换后的图像(HSV解析处理)。然后将由HSV解析处理的处理结果计算出的值作为HUE映射的映射值，从而制作HUE映射。

在HSV解析处理中，为了决定各像素中的映射值，设定唇色等级的权重。根据在各HSV的通道生成的直方图而设定唇色等级的权重。

图4A表示设定唇色等级权重所涉及的直方图和唇色等级权重表的图。在设定唇色等级中，首先从图2所示的由器官检测检测的点P1～P6中在上下唇中央附近将测量区域R1、R2设定为测量区域，并制作各测量区域中的HSV各自的直方图。此外，制作直方图所涉及的唇中的测量区域只要是可获得唇色的区域，也可以为区域的数目、各种形状、位置、尺寸。

然后，对应于图4A所示的HSV各自直方图的众数，如图4B所示设定唇色等级的权重表。当为H通道时，被设定为以众数值为基准在正负上均等地分配权重，并且越远离众数值则权重越低。并且当为S(V)通道时，权重被设定为将直方图的众数作为上方左端(右端)的基准，峰值具有规定的宽度，且为第二段的坡度小于第一段的两段倾斜。

其后，将各像素在HSV各通道对应于权重而计算出的唇色等级相乘的结果作为映射值以制作HUE映射。即，通过以下的公式(1)计算HUE映射的映射值。

HUE映射的映射值(Map)＝Lh×Ls×Lv…(1)

此外，“Lh”表示H的唇色等级，“Ls”表示S的唇色等级，“Lv”

表示V的唇色等级。

[固定映射的制作]

图5A、图5B为用于说明固定映射的制作的示意图。

固定映射为在通常的脸中模仿了唇形的映射，且为进行颜色校正时预先制作的映射。如图5A所示，固定映射从数据中展开缩小尺寸的映射。而且，如图5B所示，从图像中的唇轮廓信息(在本实施方式中为两点P5、P6的位置)计算唇倾斜的角度，并与该角度对应地旋转固定映射。最后，将固定映射调整成与图像对应的尺寸，并且为了在HUE映射中除去唇以外的部分，将其与HUE映射合成使用。合成时，采用HUE映射和固定映射的最小值。

[颜色校正图像的制作]

在本实施方式中，通过对应于由器官检测检测的左右瞳下方肌肤区域测量的YUV颜色空间的V值决定的校正强度，校正处理切取图像而制作颜色校正图像。此外，左右瞳下方的肌肤区域为避开眼睛下面黑眼圈的位置，且被决定为在脸部中最表现肌肤颜色的位置，并且只要是可抽取脸部中肌肤颜色的位置，也可以是各种位置。

此外，利用唇膏等使原始唇色较浓时，校正唇像素的V值，以防止校正过度。图6为用于表示V校正的LUT(Look Up Table，查找表)的图。如图6所示，在V校正的LUT中被构成为唇色较浓部分实施V校正。

[唇色校正图像的制作]

基于遮蔽图像，利用α混合将颜色校正图像和切取图像进行图像合成而制作唇色校正图像。然后将制作的颜色校正图像粘贴到原始图像的切取位置，从而生成美白图像。即，将仅对唇区域实施颜色校正，对于以外的肌肤部分实施了美白处理的颜色校正图像粘贴到实施了相同美白处理的原始图像上，从而生成美白图像。

图7为表示图1的拍摄装置1功能构成中用于执行美白处理的功能构成的功能框图。美白图像生成处理是指下述一系列处理，不仅对包括拍摄的人脸的原始图像实施美白处理，而且将与肌肤的颜色近似并受到美白处理的影响而使颜色变浅的唇校正成适当的颜色，从而生成美白图像。

如图7所示，当执行美白图像生成处理时，在CPU11中，图像取得部51、脸检测部52、图像处理部53、遮蔽图像制作处理部54和颜色校正图像制作处理部55发挥作用。

并且，在存储部19的一个区域中设定有图像存储部71和固定映射存储部72。

在图像存储部71中存储有由拍摄部16输出的图像数据。在固定映射存储部72中存储有用于制作遮蔽图像的固定映射的数据。此外，为了削减数据量，固定映射为模仿唇的圆弧状，因此也可以预先存储将圆弧分割并成四分之一的数据。此时，展开固定映射以便处理时为圆弧。

图像取得部51取得对由拍摄部16拍摄的图像进行了显影处理后的拍摄图像数据，或者从图像存储部71取得成为处理对象的图像数据。

脸检测部52不仅从图像中对脸进行检测，而且在检测出的脸中对用于构成脸的各器官进行检测。脸检测部52至少从轮廓形状中检测左右瞳和唇的器官。此外，脸检测部52至少检测唇中上唇中央的上下两点P1、P2、下唇中央的上下两点P3、P4、唇左右端的两点P5、P6共计六点的位置。使用现有的脸检测技术和器官技术的公知技术检测脸和各器官。并且，检测脸和各器官只要是基于辉度、轮廓抽取等、与HSV颜色空间的颜色信息不同的信息的检测方法则不问其检测方法。

图像处理部53对原始图像执行各种图像处理。具体而言，例如，图像处理部53主要执行用于校正彩度降低、明度提高、朝向蓝色方向的色相转换三要素的美白处理。并且，如图2所示，图像处理部53从原始图像中切取包括唇的区域。并且，图像处理部53基于制作的遮蔽图像，通过α混合将切取图像和制作的颜色校正图像进行图像合成。其结果，制作唇色校正图像。并且，图像处理部53将图像粘贴到原始的切取位置。其结果，生成美白图像。

遮蔽图像制作处理部54生成用于α混合的遮蔽图像，以便形成仅对唇区域实施了颜色校正的图像。

具体而言，如图3所示，遮蔽图形制作处理部54将切取图像的YUV颜色空间转换成HSV颜色空间。并且，遮蔽图像制作处理部54以除去噪声为目的而通过ε过滤器进行模糊图像的处理。

并且，遮蔽图像制作处理部54执行HSV解析处理。在HSV解析处理中，在设定在上下唇中央附近的测量区域R1、R2(参照图2)的HSV的各通道制作直方图(参照图4A)。然后制作由制作的直方图计算的唇色等级的权重(参照图4B)。其后，根据制作的唇色等级的权重，使用上述公式(1)，计算各像素中HUE映射的映射值。根据计算出的各像素的映射值生成HUE映射。

并且，如图5A和图5B所示，遮蔽图像制作处理部54对存储在固定映射存储部72中的固定映射进行角度调整和尺寸调整，使与切取图像的唇对应。

而且，如图3所示，遮蔽图像制作处理部54将进行了角度调整和尺寸调整的固定映射和制作的HUE映射合成。此时，为了从鼻等HUE映射中除去空间不需要的区域，遮蔽图像制作处理部54合成以便采用HUE映射和固定映射的最小值。合成的结果为制作遮蔽图像。

颜色校正图像制作处理部55对切取图像执行颜色校正处理。具体而言，颜色校正图像制作处理部55测量检测出的左右瞳下方肌肤区域的V值。然后，颜色校正图像制作处理部55对切取图像进行与测量的V值对应的颜色校正。其结果，制作对切取图像实施了颜色校正的颜色校正图像。

图8为用于说明具有图7功能构成的图1中的拍摄装置1执行美白图像生成处理流程的流程图。用户通过对输入部17操作美白图像生成处理开始而开始美白图像生成处理。美白图像生成处理开始的操作既可以为存在拍摄指示操作，对在按照该拍摄指示操作由拍摄部16拍摄的图像进行了显影处理的拍摄图像数据继续进行美白图像生成处理，也可以是选择存储在图像存储部71中的拍摄图像数据，对该选择的拍摄图像数据进行的美白图像生成处理开始的操作。

在步骤S11中，图像取得部51取得对由拍摄部16拍摄的图像进行了显影处理的拍摄图像数据，或者从图像储存部71取得成为处理对象的原始图像。

在步骤S12中，脸检测部52在原始图像中进行脸检测，并判断脸是否已经检测出。当脸未被检测出时，在步骤S12中判定为否，然后结束美白图像生成处理。而当脸被检测出时，在步骤S12中判定为是，然后处理进入步骤S13。

在步骤S13中，图像处理部53对原始图像执行美白处理。美白处理使原始图像彩度降低、明度提高和向蓝色方向色相转换。

在步骤S14中，脸检测部52进行检测出的脸的器官的检测。其结果，至少在原始图像中检测左右瞳和唇的器官位置。

在步骤S15中，图像处理部53切取检测出的包括唇的区域。

在步骤S16中，遮蔽图像制作处理部54执行遮蔽图像制作处理。遮蔽图像制作处理的执行结果是制作α混合用的遮蔽图像。后面将说明遮蔽图像制作处理的细节。

在步骤S17中，颜色校正图像制作处理部55执行颜色校正图像制作处理。颜色校正图像制作处理的执行结果是制作对切取图像进行了颜色校正以使变浅的唇成为适当颜色的颜色校正图像。后面将说明颜色校正图像制作处理的细节。

在步骤S18中，图像处理部53基于制作的遮蔽图像并通过α混合将切取图像和制作的颜色校正图像进行图像合成。其结果，制作仅唇部实施了颜色校正的唇色校正图像。

在步骤S19中，图像处理部53将唇色校正图像粘贴到原始的切取位置。其结果，制作不仅对肌肤实施美白处理，而且唇部被校正成适当颜色的美白图像。其后，结束美白图像生成处理。

图9为用于说明美白图像生成处理中遮蔽图像制作处理流程的流程图。

在步骤S31中，遮蔽图像制作处理部54将切取图像的YUV颜色空间转换为HSV颜色空间。

在步骤S32，遮蔽图像制作处理部54利用ε过滤器进行模糊处理。

在步骤S33中，遮蔽图像制作处理部54执行HSV解析处理。如图2所示，在HSV解析处理中，在设定于上下唇中央附近的测量区域R1、R2的HSV各通道中制作直方图(参照图4A)。然后，设定由制作的直方图计算出的唇色等级的权重(参照图4B)。唇色等级的权重被设定为，当为H通道时，权重以众数为基准在正负上被均等分配，并且越远离众数则权重越低。而且，当为S(V)通道时，权重被设定为以直方图的众数为上方左端(右端)的基准，峰值具有规定的宽度，并且成为第二段的坡度小于第一段的两段倾斜。

在步骤S34中，遮蔽图像制作处理部54制作HUE映射。根据制作的唇色等级的权重，使用上述公式(1)计算HUE映射中的映射值。

在步骤S35中，遮蔽图像制作处理部54对存储于固定映射存储部72中的固定映射进行角度调整和尺寸调整，使与切取图像的唇对应。

在步骤S36中，遮蔽图像制作处理部54将角度调整和尺寸调整后的固定映射和制作出的HUE映射进行合成。此时，为了从鼻等HUE映射中除去空间不需要的区域，遮蔽图像制作处理部54进行合成以便采用HUE映射和固定映射的最小值。合成的结果是制作遮蔽图像。

图10为用于说明美白图像生成处理中颜色校正图像制作处理流程的流程图。

在步骤S51中，颜色校正图像制作处理部55测量检测出的左右瞳下方的肌肤区域的V值。

在步骤S52中，颜色校正图像制作处理部55对切取图像按照测量后的V值进行颜色校正。其结果，制作对切取图像进行了颜色校正的颜色校正图像。

各种拍摄装置具有用户能够选择肤色的功能，例如被构成为可选择使脸的气色变好的“自然化”、使脸的颜色变白的“美白”。由于在自然化中成为显色好的颜色的再现，因而也能够使唇色的显色变好。另一方面，由于在美白中会使肤色的彩度变浅，唇色也会被其拖累而变成颜色较浅且气色不好。

因此，在本实施方式的拍摄装置1中，使用检测出的拍摄有人物的图像轮廓的结果，能够从检测出的脸区域中抽出唇区域，并使唇色鲜艳，或校正为如同涂抹有唇膏一样。唇色区域的抽出是解析用HSV颜色空间表现的图像(HSV图像)，并基于HSV图像而制作α混合用的遮蔽图像。进行校正时，可以解析用YUV颜色空间表现的图像，并分别校正YUV(尤其是V)。

由以上方式构成的拍摄装置1包括图像处理部53、遮蔽图像制作处理部54和颜色校正图像制作处理部55。图像处理部53对包括在图像内的人脸区域实施使肤色变白的美白处理。遮蔽图像制作处理部54在要实施美白处理的人脸区域内，确定应当减轻该美白处理的部分。颜色校正图像制作处理部55对已确定的应当减轻美白处理的部分，实施用于减轻该美白处理的处理。由此，在拍摄装置1中，能够适当地确定唇色，并能够使用于对人脸区域整体实施的美白处理，从而能够对人脸整体实施适当的美白处理。

美白处理包括多种处理。遮蔽图像制作处理部54在要实施包括多种处理的美白处理的人脸区域内，确定减轻多种处理中一部分处理的效果，并应当维持其他处理效果的部分。由此，在拍摄装置1中，例如当以彩度降低、明度提高、向蓝色方向的色相转换的三要素进行美白处理时，通过仅恢复彩度降低，能够适当地确定唇色，从而能够使用于对人脸区域整体实施的美白处理。

并且，基于HSV颜色空间的颜色信息，图像处理部53确定图像内的肤色部分。而且，图像处理部53对已确定的肤色部分实施美白处理。遮蔽图像制作处理部54将包括在已确定的肤色部分且为色相值与肤色近似的肌肤以外的部分确定为应当减轻美白处理的部分。由此，在拍摄装置1中，由于将包括在已确定的肤色部分且为色相值与肤色近似的肌肤以外的部分确定为应当减轻美白处理的部分，因而能够对人脸整体实施适当的美白处理。

而且，拍摄装置1还包括基于与HSV颜色空间的颜色信息不同的基准而确定脸部位的脸检测部52。脸检测部52将已确定的脸部位且为HSV颜色空间的颜色信息与肤色近似的肌肤以外的部分确定为应当减轻美白处理的部分。由此，在拍摄装置1中，由于将HSV颜色空间的颜色信息与肤色近似的肌肤以外的部分确定为应当减轻美白处理的部分，因而能够对人脸整体实施适当的美白处理。

而且，颜色校正图像制作处理部55根据YUV颜色空间的颜色信息而确定已确定的应当减轻美白处理部分的颜色浓度。颜色校正图像制作处理部55按照已确定的浓度而实施减轻美白处理的处理。由此，在拍摄装置1中，能够适当地确定唇色，从而能够使用于对人脸区域整体实施的美白处理。

脸检测部52进一步使用预先准备的成为脸部位形状基准的信息来确定应当减轻美白处理的部分。由此，在拍摄装置1中，能够适当地确定唇的位置，从而能够对人脸整体实施适当的美白处理。

遮蔽图像制作处理部54将人脸的唇部确定为应当减轻美白处理的部分。通过将人脸的唇部确定为应当减轻美白处理的部分，能够对人脸整体实施适当的美白处理。

脸检测部52基于与HSV颜色空间的颜色信息不同的基准而确定包括在图像内的人脸的唇部。遮蔽图像制作处理部54根据已确定的唇部中HSV颜色空间的颜色信息，确定唇色。由此，在拍摄装置1中，能够适当地确定唇色，从而能够使用于对人脸区域整体实施的美白处理。

遮蔽图像制作处理部54在HSV颜色空间中将已确定的唇部颜色信息在规定范围内与肤色的颜色信息近似的颜色确定为唇色。由此，在拍摄装置1中，能够适当地确定唇色，从而能够使用于对人脸区域整体实施的美白处理。

遮蔽图像制作处理部54在HSV颜色空间中根据已确定的唇部颜色信息的分布而确定唇色。由此，在拍摄装置1中，能够适当地确定唇色，从而能够使用于对人脸区域整体实施的美白处理。

脸检测部52基于与HSV颜色空间的颜色信息不同的基准而确定唇部。由此，在拍摄装置1中，能够适当地确定唇的位置，从而能够使用于对人脸区域整体实施的美白处理。

而且，图像处理部53按照已确定的唇色，对由脸检测部52确定的人脸的唇部进行基于YUV颜色空间的颜色信息的规定图像处理。由此，在拍摄装置1中，能够进行与唇色对应的图像处理。

此外，本发明并不限于上述的实施方式，在能够达成本发明目的范围内的变形、改良等均包含在本发明中。

在上述的实施方式中，尽管构成为将因美白处理而受到影响的唇色校正为适当的颜色，但并不限于此。也可以对已确定的唇区域校正成使唇色变化。具体而言，也可以形成为不同唇膏、口红的颜色，或通过对未涂抹唇膏、口红、唇彩等的唇涂抹唇膏、口红、唇彩等进行化妆，或调整气色的程度。此时，既可以积极地使彩度变化，也可以进一步使明度、色相变化。

并且，在上述的实施方式中，也可以构成为，首先确定唇的区域，当对脸整体实施美白处理时，将已确定的唇区域指定为肌肤遮蔽的区域。

而且，在上述实施方式中，尽管对适用本发明的拍摄装置1以数码相机为例进行了说明，但并不限于此。例如，本发明通常能够适用于具有美白处理功能的电子设备。具体而言，例如，本发明能够适用于笔记本电脑、打印机、电视接收机、摄像机、便携式导航装置、移动电话、智能手机、便携式游戏机等。

上述一系列处理既可以由硬件执行，也可以由软件执行。换句话说，图7的功能构成仅为例示而并非限制。即，只要拍摄装置1具备能够整体执行上述一系列处理的功能即可，为了实现该功能使用何种功能块并不限于图7的示例。而且，一个功能块既可以由硬件单体构成，也可以由软件单体构成，或者由其组合构成。本实施方式中的功能构成由执行运算处理的处理器实现，并且在可用于本实施方式中的处理器中除了由单处理器、多处理器和多核处理器等各种处理装置单体构成以外，也包含由这些各种处理装置和ASIC(Application Specific Integrated Circuit，专用集成电路)或FPGA(Field-Programmable Gate Array，现场可编程门阵列)等处理电路组合的构成。

当由软件执行一系列的处理时，构成该软件的程序从网络、记录介质安装到计算机等中。计算机可以为安装于专用硬件的计算机。而且，计算机也可以是通过安装各种程序而能够执行各种功能的计算机，例如可以是通用的个人电脑。

包含这种程序的记录介质不仅由为了向用户提供程序而与装置本体分别配置的图1中的可移动介质31构成，也由以预先组装在装置本体中的状态向用户提供的记录介质等构成。例如，可移动介质31由磁盘(包括软盘)、光盘或磁光盘等构成。例如，光盘由CD-ROM(Compact Disk-Read Only Memory，光盘只读存储器)、DVD(Digital Versatile Disk，数字通用光盘)、Blu-ray(注册商标)Disc(蓝光光盘)等构成。磁光盘由MD(Mini-Disk，小磁盘)等构成。而且，例如，以预先组装在装置本体中的状态向用户提供的记录介质由记录有程序的图1中的ROM12、包含在图1的存储部19中的硬件等构成。

此外，在本说明书中，用于记述记录在记录介质中程序的步骤既包括按照其顺序并按时间顺序的处理，也包括并非以时间顺序处理而以并列或分别执行的处理。

尽管上面对本发明的多个实施方式进行了说明，但这些实施方式仅为示例，并非限定本发明的技术范围。本发明能够采用其他各种实施方式，进而在不脱离本发明要旨的范围内可以进行省略、置换等各种变更。这些实施方式或其变形不仅包含于本说明书等所记载的发明范围、要旨中，也包含于权利要求书所记载的发明及其等同范围中。

Claims (5)

1.一种图像处理装置，其特征在于，包括：

唇部确定单元，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸的唇部；

唇色确定单元，其根据所述已确定的所述唇部中的所述HSV颜色空间的颜色信息，确定唇色；

图像处理单元，其对由所述唇部确定单元所确定的人脸的唇部的颜色，进行利用YUV颜色空间的颜色信息而将通过包括多种处理的美白处理使彩度变浅的唇色再现为适当颜色的规定图像处理；以及

减轻处理单元，其在对于包含所述唇部的人物的人脸整体实施所述美白处理时，将通过所述图像处理单元再现为所述适当颜色的唇部合成到实施所述美白处理的唇部，从而减轻应当在所述唇部上实施的所述美白处理中的所述多种处理所包含的一部分处理所得到的效果。

2.根据权利要求1所述的图像处理装置，其特征在于，

所述唇色确定单元在HSV颜色空间中将所述已确定的唇部的颜色信息在规定范围内与肤色的颜色信息近似的颜色确定为唇色。

3.根据权利要求1或2所述的图像处理装置，其特征在于，

所述唇色确定单元在所述HSV颜色空间中，根据所述已确定的唇部的颜色信息的分布而确定唇色。

4.一种图像处理方法，其特征在于，包括：

唇部确定处理，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸唇部；

唇色确定处理，其根据所述已确定的所述唇部中的HSV颜色空间的颜色信息，确定唇色；

图像处理，其对在所述唇部确定处理中所确定的人脸的唇部的颜色，进行利用YUV颜色空间的颜色信息而将由于通过包括多种处理的美白处理使彩度变浅的唇色再现为适当颜色的规定图像处理；以及

减轻处理，其在对于包含所述唇部的人物的人脸整体实施所述美白处理时，将通过所述图像处理再现为所述适当颜色的唇部合成到实施所述美白处理的唇部，从而减轻应当在所述唇部上实施的所述美白处理中的所述多种处理所包含的一部分处理所得到的效果。

5.一种记录介质，记录有计算机可读取的程序，其特征在于，

记录有用于使所述计算机实现以下单元的程序，即：

唇部确定单元，其基于与HSV颜色空间的颜色信息不同的基准，确定包含在图像内的人脸唇部；

唇色确定单元，其根据所述已确定的所述唇部中的HSV颜色空间的颜色信息，确定唇色；

图像处理单元，其对由所述唇部确定单元所确定的人脸的唇部的颜色，进行利用YUV颜色空间的颜色信息而将通过包括多种处理的美白处理使彩度变浅的唇色再现为适当颜色的规定图像处理；以及

减轻处理单元，其在对于包含所述唇部的人物的人脸整体实施所述美白处理时，将通过所述图像处理单元再现为所述适当颜色的唇部合成到实施所述美白处理的唇部，从而减轻应当在所述唇部上实施的所述美白处理中的所述多种处理所包含的一部分处理所得到的效果。

Images