CN104469137B - 图像处理装置及图像处理方法 - Google Patents

图像处理装置及图像处理方法 Download PDF

Info

Publication number
CN104469137B
CN104469137B CN201410478998.6A CN201410478998A CN104469137B CN 104469137 B CN104469137 B CN 104469137B CN 201410478998 A CN201410478998 A CN 201410478998A CN 104469137 B CN104469137 B CN 104469137B
Authority
CN
China
Prior art keywords
image
correction
corrected
intensity
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410478998.6A
Other languages
English (en)
Other versions
CN104469137A (zh
Inventor
塚越丈史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN104469137A publication Critical patent/CN104469137A/zh
Application granted granted Critical
Publication of CN104469137B publication Critical patent/CN104469137B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"

Abstract

本发明涉及图像处理装置和图像处理方法。摄像装置(1)具备:摄像部(16),取得图像;图像判定部(54),判定图像中的规定的被摄体像的位置;以及图像判定部(54),在由所述第一判定单元判定为所述规定的被摄体像的位置位于图像的中心以外的情况下,以使所述中心以外与所述中心相比增强对由透镜的像差引起的畸变进行校正的程度的方式对所述图像进行校正。

Description

图像处理装置及图像处理方法
技术领域
本发明涉及校正图像的图像处理装置及图像处理方法。
背景技术
以往,在日本特开2011-128913号公报中有如下技术:在由数字摄像机等摄像到的图像中,为了减少因摄影透镜的畸变像差引起的图像的变形,进行畸变校正(distortioncorrection)。在这样的技术中,例如记载有通过在摄像范围中的被摄体像的位置来减弱畸变校正的程度的技术。
然而,在上述的专利文献中,根据摄影范围中的被摄体像的状况,有时通过减弱畸变的校正是无法得到用户喜好的图像的。
发明内容
本发明鉴于这样的状况,其目的在于,根据摄影范围中的被摄体像的状况,按照用户喜好来进行良好的图像的校正。
本发明的一实施方式涉及图像处理装置,其特征在于,具备:取得单元,取得图像;第一判定单元,判定由所述取得单元取得的图像中的规定的被摄体像的位置;以及校正单元,在由所述第一判定单元判定为所述规定的被摄体像的位置位于图像的中心的位置以外的情况下,以使所述中心以外的位置与所述中心的位置相比增强对由透镜的像差引起的畸变进行校正的程度的方式对所述图像进行校正。
本发明的另一实施方式涉及图像处理方法,使用图像处理装置,其特征在于,具备:取得步骤,取得图像;判定步骤,判定由所述取得步骤取得的图像中的规定的被摄体像的位置;和校正步骤,在由所述判定步骤判定为所述规定的被摄体像的位置位于图像的中心以外的情况下,以使所述中心以外的位置与所述中心的位置相比增强对由透镜的像差引起的畸变进行校正的程度的方式对所述图像进行校正。
附图说明
图1是表示本发明的图像处理装置的一实施方式所涉及的摄像装置的硬件的结构的框图。
图2是用于说明本实施方式所使用的图像校正的图。
图3A是表示实施了程度不同的畸变校正后的图像的图。
图3B是表示实施了程度不同的畸变校正后的图像的图。
图3C是表示实施了程度不同的畸变校正后的图像的图。
图4是表示图1的摄像装置的功能性结构之中的用于执行图像校正处理的功能性结构的功能框图。
图5是用于说明具有图4的功能性结构的图1的摄像装置所执行的图像校正处理的流程的流程图。
图6是用于说明具有图4的功能性结构的图1的摄像装置1所执行的其他实施方式的图像校正处理的流程的流程图。
具体实施方式
以下,使用附图来说明本发明的实施方式。
图1是表示本发明的图像处理装置的一实施方式所涉及的摄像装置的硬件结构的框图。
摄像装置1例如作为数字摄像机而被构成。
摄像装置1具备CPU(Central Processing Unit)11、ROM(Read Only Memory)12、RAM(Random Access Memory)13、总线14、输入输出接口15、摄像部16、输入部17、输出部18、存储部19、通信部20及驱动器21。
CPU11根据ROM12中记录的程序或者从存储部19加载到RAM13中的程序,来执行各种处理。
RAM13中适当地还存储有CPU11执行各种处理所需要的数据等。
CPU11、ROM12以及RAM13经由总线14而相互连接。该总线14上还连接有输入输出接口15。输入输出接口15上连接有摄像部16、输入部17、输出部18、存储部19、通信部20以及驱动器21。
摄像部16中,虽未图示,但是具备光学透镜部、图像传感器。
光学透镜部为了对被摄体像进行摄影,而由将光会聚的透镜、例如聚焦透镜或变焦透镜等来构成。
聚焦透镜是用于在图像传感器的受光面上成像被摄体像的透镜。变焦透镜是使焦点距离在一定的范围内自如地变化的透镜。
光学透镜部中还根据需要而设置有用于调整焦点、曝光、白平衡等设定参数的周边电路。
图像传感器由光电变换元件或AFE(Analog Front End)等构成。
光电变换元件例如由CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)型的光电变换元件等构成。光电变换元件被从光学透镜部入射有被摄体像。于是,光电变换元件对被摄体像进行光电变换(摄像)并作为图像信号蓄积一定时间,并将所蓄积的图像信号作为模拟信号依次向AFE供给。
AFE对该模拟的图像信号,执行A/D(Analog/Digital)变换处理等各种信号处理。通过各种信号处理,生成数字信号,并作为摄像部16的输出信号来输出。
以下将这样的摄像部16的输出信号称作“图像的数据”。图像的数据被适当地供给至CPU11或未图示的图像处理部等。
输入部17由各种按钮等构成,根据用户的指示操作来输入各种信息。
输出部18由显示器或扬声器等构成,输出图像或声音。
存储部19由硬盘或DRAM(Dynamic Random Access Memory)等构成,存储各种图像的数据。
通信部20控制经由包含因特网的网络与其他装置(未图示)之间进行的通信。
驱动器21中适当地安装有磁盘、光盘、光磁盘、或者由半导体存储器等构成的可移动媒体31。由驱动器21从可移动媒体31读出的程序根据需要被安装在存储部19中。此外,可移动媒体31能够与存储部19同样地对存储部19所存储的图像的数据等各种数据也进行存储。
在这样构成的摄像装置1中,具有对所取得的图像进行校正处理的功能。本实施方式的校正处理在考虑了被摄体像的摄影状态的基础上进行。具体地说,考虑被摄体像的脸部的有无或脸部的位置,改变图像校正的程度来进行校正处理。
在此,对本实施方式中使用的图像校正进行说明。
图2是用于说明本实施方式中使用的图像校正的图。
本实施方式中使用的图像校正的手法中使用用于校正摄像机透镜的畸变像差的变形而使用的手法(以下称作“畸变校正”。)。
所谓畸变校正是指,对摄像机透镜的畸变像差的变形、详细地讲图像的侧边如鼓桶那样膨胀的变形(以下称作“鼓桶型变形”。)进行校正,在由图2A的格线所示那样的格子中设为无变形的图像。为了将鼓桶型变形设为图2A所示那样的无变形的图像,而进行与鼓桶型变形的形状相反地、图像的侧边朝向图像的中心变形且图像的四角区域被拉长了的、图2B所示那样的形状的校正。此外,在畸变校正中,越是从图像的中心远离,变形的校正程度越强。
此外,在本实施方式的图像处理中,根据图像的被摄体像的状态,改变畸变校正的强度的程度。
在将畸变校正的程度设为比通常强的情况下,在变形成图2B所示形状的图像校正中,进行图像的侧边朝向图像的中心进行变形且图像的四角区域被拉长的校正。在这样增强了畸变校正的程度的情况下,在从图像的中心放射线状地具有脸部的中心线的情况下,产生脸部变形而被看成小脸的效果。详细地讲,通过畸变校正而使得像高越高则脸部越变拉长,因此,脸部变得细长,并且,成为与头顶部相比脸部下侧更小的状态,所以产生了被看成小脸的效果。在四角区域具有脸部的状态下进行畸变校正也能够产生小脸的效果,但是,根据条件不同,有时脸部的平衡会不均匀地变形,所以,为了避免这样的事态,能够在畸变校正的条件中加上脸部的中心线从图像中心放射状地配置这一点。
在此,所谓小脸,不仅是脸部整体的面积变小的概念,还包括相对于脸部的上下的一方而另一方的比率在大小方面发生变化(例如,与校正前相比,相对于脸部的“额头”,“颌部(下巴)”相对地变小)的概念。此外,通过畸变校正而产生小脸效果的四角区域的区域为,在例如图3A-C所示那样额头与图像的角相接、颌部处于图像中心的状态下,从该角至图像的中心的占5成的区域。
本实施方式中,将用于产生上述那样的小脸效果的畸变校正称作第一校正。与此相对,将通常的畸变校正称作通常校正。
此外,在将畸变校正的程度设为比通常时弱的情况下,在变形成图2B所示形状的、图像校正中,使从图像的侧边向中心的变形变缓,使该图像的四角区域的拉长变缓。在这样减弱了畸变校正的程度的情况下也是,能够减小位于图像周缘的被摄体像的变形。即,不但能够抑制摄像机透镜的畸变像差的变形,还能够减小图像整体中的被摄体像的变形。如果利用该原理,则能够产生例如在集体照那样的、在包含图像的中心附近或周边附近在内的图像整体具有脸部的图像中,也能够使该图像整体中的各脸部的大小的平衡无差别的效果。
本实施方式中,将用于产生上述那样的图像整体中的各脸部的大小的平衡无差别的效果、适于集体照的畸变校正称作第二校正。
图3是表示实施了程度不同的畸变校正的图像的图。
图3A-C的例子中,对在图像的右上角部的区域具有脸部的图像,改变校正的程度来进行畸变校正。
图3A的例子中,实施校正的程度最弱的第二校正,在图3B的例子中,实施通常校正,在图3C的例子中,实施校正的程度最强的第一校正。即,在图3A-C中,从图3A至图3C,增强了校正的程度地依次配置。
如果将图3A及B与图3C的图像进行比较可知,图3C的脸部较窄而成为小脸。
另外,小脸的效果最高的图像是将摄像机纵向放置进行摄影来得到纵长的图像以使脸部的中心线接近从中心的放射、而且脸部位于图像的四角区域的某个中并且脸部的中心线从图像的中心放射线状地存在的图像。
图4是表示用于执行这样的摄像装置1的功能性结构之中的图像校正处理的功能性结构的功能框图。
所谓图像校正处理是指,根据从所取得的图像检测到的脸部的状态进行图像校正的处理。
图像校正处理如图4所示那样,在CPU11中,摄像控制部51、图像取得部52、被摄体像检测部53、图像判定部54、校正处理部55发挥功能。
此外,存储部19的一区域中设定有校正图像存储部71。
校正图像存储部71中存储有校正图像的数据。
摄像控制部51接受来自输入部17的摄像操作,控制摄像部16以便进行摄像处理。
图像取得部52取得从摄像部16输出的图像。图像取得部52将所取得的图像,作为进行校正的图像(以下称作“对象图像”。),向被摄体像检测部53输出。
被摄体像检测部53从所取得的对象图像检测脸部。从图像检测脸部的技术使用公知的技术。
图像判定部54判定由被摄体像检测部53检测到了脸部的对象图像上的、脸部的位置。详细地讲,图像判定部54作为脸部的位置,判定在从对象图像的中心放射状的位置处是否存在脸部的中心线。
校正处理部55根据被摄体像检测部53的检测结果、图像判定部54的判定结果,对对象图像执行校正处理。
详细地讲,校正处理部55在为未检测到脸部的对象图像的情况下、脸部的位置不处于图像的四角区域的情况下,执行通常校正。
此外,校正处理部55在脸部的位置位于四角区域的情况下,执行进行第一校正的处理。此外,在脸部的位置处于四角区域的情况下,在图像整体中脸部所占比例大于规定值的情况下,自拍或拍人物的可能性很高,因此,积极地进行第一校正。与此相对,在脸部所占比例小于规定值的情况下,为集体照的可能性很高,因此,也可以进行第二校正。
此外,校正处理部55在脸部的位置在四角区域以外处也存在、是将摄像装置1横向放置而摄影成了图像为横长图像的图像的情况下,执行进行第二校正的处理。
此外,校正处理部55在执行了校正处理后,将校正后的图像(以下称作“校正图像”。)存储在校正图像存储部71中。
图5是用于说明具有图4的功能性结构的图1的摄像装置1所执行的图像校正处理的流程的流程图。图像校正处理通过用户对输入部17进行的图像校正处理开始的操作而开始。然后,通过用户对输入部17进行摄像操作,在摄像控制部51中,摄像部16被控制成进行摄像处理。
在步骤S11中,图像取得部52取得由摄像部16摄像到的图像。图像取得部52将所取得的图像作为对象图像,向被摄体像检测部53输出。
在步骤S12中,被摄体像检测部53检测图像中的脸部的个数。
在脸部的个数为0的情况下,在步骤S12中判定为“0人”,处理进入步骤S13。
在脸部的个数为1的情况下,在步骤S12中判定为“1人”,处理进入步骤S14。
在脸部的个数为2的情况下,在步骤S12中判定为“2人”,处理进入步骤S17。关于步骤S14以后的处理,留待后述。
在步骤S13中,校正处理部55执行通常校正处理。
结果,校正处理部55生成被进行了通常的畸变校正后的图像。由此,能够生成没有由透镜像差引起的影响的图像。
此外,校正处理部55在执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
在步骤S14中,图像判定部54判定脸部的位置是否位于四角区域。
在脸部的位置位于四角区域的情况下,步骤S14中判定为是(YES),处理进入步骤S15。
在步骤S15中,校正处理部55执行第一校正处理。具体地说,生成进行了比通常的畸变校正强的畸变校正后的校正图像。由此,能够生成图3C所示那样的、与进行了通常的畸变校正后的图像相比脸部被看起来更瘦的图像。另外,也可以是,判定脸部的大小,在图像中脸部所占比例大的情况下,自拍或拍人物的可能性高,因此,积极地进行第一校正,在脸部所占比例小的情况下,进行通常校正处理或第二校正。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
与此相对,在脸部的位置不处于四角区域的情况下,步骤S14中判定为否“NO”,处理进入步骤S16。
在步骤S16中,校正处理部55执行集体校正处理。具体地说,设为比通常的畸变校正弱的畸变校正,生成减弱了图像的周缘部的拉长的校正图像。由此,能够生成摄入在图像的中心处的脸部和摄入在图像的周缘部处的脸部之间的摄影效果无差别的图像。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
在步骤S17中,图像判定部54判定脸部的位置是否位于四角区域。
在脸部的位置不位于四角区域的情况下,步骤S17中判定为否,处理进入步骤S18。
在脸部的位置位于四角区域的情况下,步骤S17中判定为是,处理进入步骤S19。关于步骤S19以下的处理,留待后述。
在步骤S18中,校正处理部55执行通常校正处理。
结果,校正处理部55生成进行了通常校正后的校正图像。具体地说,生成进行了通常的畸变校正后的图像。由此,能够生成没有由透镜像差引起的影响的图像。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
在步骤S19中,图像判定部54判定脸部的位置是否在四角区域以外也存在。
在脸部的位置未存在于四角区域以外的情况下,步骤S19中判定为否,处理进入步骤S20。
在脸部的位置在四角区域以外存在情况下,步骤S19中判定为是,处理进入步骤S21。关于步骤S21以下的处理,留待后述。
在步骤S20中,校正处理部55执行第一校正处理。具体地说,生成进行了比通常的畸变校正强的畸变校正后的校正图像。由此,能够生成图3C所示那样的、与进行了通常的畸变校正后的图像相比人物的脸部看起来更瘦的图像。另外,也可以是,判定脸部的大小,在图像中脸部所占比例较大的情况下,自拍或拍人物的可能性高,因此积极地进行第一校正,在脸部所占比例较小的情况下,进行通常校正处理或第二校正。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
在步骤S21中,图像判定部54判定图像的朝向是否是横向。
换句话说,图像判定部54判定由摄像部16摄像到的图像是将摄像装置1纵向放置而摄像到的图像还是横向放置而摄像到的图像。
在图像的朝向为横向的情况下,步骤S21中判定为是,处理进入步骤S22。
在步骤S22中,校正处理部55执行第二校正处理。具体地说,设为比通常的畸变校正弱的畸变校正,生成减弱了图像的周缘部的拉长的校正图像。由此,能够生成摄入在图像的中心处的脸部和摄入在图像的周缘部处的脸部之间的脸部的平衡无差别的自然图像。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
与此相对,在图像为纵向的情况下,步骤S21中判定为否,处理进入步骤S23。
在步骤S23中,执行第一校正处理。
结果,校正处理部55生成进行了第一校正后的校正图像。具体地说,生成与进行了通常的畸变校正后的图像相比人物的脸部看起来更瘦的图像。
此外,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。然后,图像校正处理结束。
<其他实施方式>
第一实施方式中构成为,根据脸部的有无、脸部的位置(是否位于图像的四角区域、是否仅存在于四角区域)、图像的朝向,改变图像校正的种类。与此相对,在第二实施方式中构成为,根据脸部的有无、脸部的位置(在从图像的中心放射线状的位置处是否具有脸部的中心线),改变图像校正的种类。
在以下的实施方式,关于与第一实施方式同样的结构,省略说明。即,省略针对硬件及功能模块的一部分结构的说明。
在畸变校正中,在第一实施方式的条件(仅在四角区域存在有脸部的条件)下,产生脸部被看起来瘦的效果,但是根据条件不同,有时脸部会不自然地变形,所以,将脸部的中心线从图像中心放射状地配置这一点加在条件中,能够避免上述那样的事态。详细地讲,通过畸变校正,像高越高则越被拉长,而成为脸部变细长且与头顶部相比脸部下侧更小的状态,因此,产生了被看成小脸的效果。
如图4所示那样,校正处理部55根据被摄体像检测部53的检测结果或图像判定部54的判定结果,执行校正处理。详细地讲,校正处理部55在为脸部未被检测到的对象图像的情况下,执行进行通常校正的处理。此外,校正处理部55在为脸部被检测到、且作为脸部的位置在从对象图像的中心放射状的位置处具有脸部的中心线的对象图像的情况下,执行进行第一校正的处理。此外,校正处理部55在为脸部被检测到、且作为脸部的位置而脸部的中心线不位于从对象图像的中心放射状的位置处的对象图像的情况下,执行进行第二校正的处理。
此外,校正处理部55执行了校正处理后,将校正后的图像(以下称作“校正图像”。)存储在校正图像存储部71中。
图6是说明具有图4的功能性结构的图1的摄像装置1所执行的其他实施方式的图像校正处理的流程的流程图。
在步骤S41中,图像取得部52取得图像。图像取得部52将所取得的图像作为对象图像,向被摄体像检测部53输出。
在步骤S42中,被摄体像检测部53判定根据所取得的对象图像是否检测到了脸部。
在检测到了脸部的情况下,步骤S42中判定为是,处理进入步骤S44。
在脸部被检测到情况下,步骤S42中判定为否,处理进入步骤S43。
在步骤S43中,校正处理部55由于在对象图像中未检测到脸部,因此,对该对象图像执行通常校正处理。
结果,校正处理部55生成进行了通常校正后的图像。具体地说,生成进行了通常的畸变校正后的图像。由此,能够生成没有由透镜像差引起的影响的图像。
然后,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。
在步骤S44中,图像判定部54由于在对象图像中检测到了脸部,因此,判定脸部的中心线是否为放射状。
在脸部的中心线为放射状的情况下,步骤S44中判定为是,处理进入步骤S45。
在脸部的中心线不是放射状的情况下,步骤S44中判定为否,处理进入步骤S46。
在步骤S45中,校正处理部55执行第一校正处理。具体地说,生成进行了比通常的畸变校正强的畸变校正后的校正图像。由此,能够生成如图3C所示那样的、与进行了通常的畸变校正后的图像相比脸部被看起来更瘦的图像。
然后,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。
在步骤S46中,校正处理部55执行第二校正处理。具体地说,设为比通常的畸变校正弱的畸变校正,生成减弱了图像的周缘部的拉长的校正图像。由此,能够生成摄入在图像的中心处的脸部和摄入在图像的周缘部处的脸部之间的脸部的平衡无差别的图像。
然后,校正处理部55执行了校正处理后,将校正图像存储在校正图像存储部71中。
如以上那样构成的摄像装置1具备图像判定部54、图像取得部52、校正处理部55。
图像取得部52取得图像。
图像判定部54判定由图像取得部52取得的图像中的规定的被摄体像的位置。
校正处理部55当由图像判定部54判定为规定的被摄体像的位置位于图像的中心以外时,以使中心以外与中心相比增强对由透镜的像差引起的畸变进行校正的程度的方式,校正图像。
由此,摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
此外,图像判定部54判定摄影到被摄体像的图像的朝向。
校正处理部55当由图像判定部54判定为图像的朝向为纵向时,进行以使中心以外与中心相比增强校正的程度的方式对图像进行校正的第一校正。
由此,在摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
此外,校正处理部55当由图像判定部54判定为图像的朝向为横向时,进行以使中心以外与中心相比减弱校正的程度的方式对图像进行校正的通常校正、或者第二校正。
由此,在摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
此外,图像判定部54判定图像中的被摄体像的中心是否为从图像的中心的放射状。
校正处理部55在由图像判定部54判定为图像中的被摄体像的中心位于从图像的中心的放射线上时,以使中心以外与中心相比增强校正程度的方式进行第一校正,在判定为图像中的被摄体像的中心线不位于从图像的中心的放射线上时,进行以使中心以外与中心相比减弱校正程度的方式进行通常校正、或者第二校正。
由此,摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
此外,图像判定部54判定图像中的被摄体像的大小。
校正处理部55基于图像判定部54的判定结果,以使中心以外与中心相比增强校正程度的方式对图像进行校正。图像中的脸部的大小为例如在图像中脸部所占比例大的情况下,自拍或拍人物的可能性高,因此进行第一校正,在脸部所占比例小的情况下,为集体照的盖然性高,因此进行第二校正。
由此,摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
此外,摄像装置1具备对图像中的被摄体像的个数进行检测的被摄体像检测部53。
校正处理部55基于被摄体像检测部53的判定结果,以使中心以外与中心相比增强校正程度的方式对图像进行校正。关于图像中的脸部的个数,例如,在脸部的个数少的情况下,自拍或拍人物的可能性高,因此进行第一校正,在脸部的个数多的情况下,为集体照的可能性高,因此进行第二校正。
由此,在摄像装置1中,能够根据摄影范围中的被摄体像的状况进行良好的校正。
另外,本发明不受上述的实施方式的限定,能够实现本发明的目的的范围内的变形、改进等都包含在本发明中。
上述的实施方式中,第一校正处理时,以越远离图像中心则越增强畸变校正的程度的方式对图像进行校正,但是,只要使得与图像的中心的位置相比中心以外的位置的畸变校正的程度更强即可。因此,第一校正处理时,可以相对于与距离中心位置之间的距离成正比地增强校正的程度,也可以是,对与中心之间的距离超过某阈值的位置增强校正的程度。此外,通过对应于与中心位置之间的距离而设定多个该阈值,能够多阶段地增强校正的程度。
此外,上述的实施方式的图5的S23中,进行了第一校正处理,但是,也可以用通常校正处理取代该第一校正处理。这样,在图像的四角区域以外也存在脸部的状态下,能够进行对在与该四角区域接近的位置处存在的脸部进行了考虑的图像校正。
此外,上述的实施方式中,应用了本发明的摄像装置1以数字摄像机为例进行了说明,但是不特别限定于此。
例如,本发明能够应用在具有图像校正功能的电子仪器中。具体地说,例如,本发明能够应用在笔记本型的个人计算机、打印机、电视机、视频摄像机、便携式导航装置,便携式电话机、智能手机、携带型游戏机等中。
上述的一系列处理能够由硬件来执行,也能够由软件来执行。
换言之,图4的功能性结构只不过是例示,无特别限定。即,只要使摄像装置1具备能够作为整体而执行上述的一系列处理的功能即可,为了实现该功能而使用什么功能模块,不特别受图4的例子限定。
此外,1个功能模块可以由硬件单体构成,也可以由软件单体构成,也可以由它们的组合来构成。
在通过软件来执行一系列处理的情况下,在计算机等中从网络或记录介质安装构成该软件的程序。
计算机也可以是组入在专用的硬件中的计算机。此外,计算机也可以是,通过安装各种程序而能够执行各种功能的计算机,例如为通用的个人计算机。
包含有该这样的程序的记录介质不但可以是由为了向用户提供程序而与装置主体另外地发布的图1的可移动媒体31来构成,而且还可以由以预先组入装置主体的状态向用户提供的记录介质等来构成。可移动媒体31例如由磁盘(包括软盘)、光盘或者光磁盘等构成。光盘例如由CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital VersatileDisk)、Blu-ray Disc(蓝光盘)(注册商标)等构成。光磁盘由MD(Mini-Disk)等构成。此外,以预先组入装置主体的状态提供给用户的记录介质例如由记录有程序的图1的ROM12、图1的存储部19所包含的硬盘等构成。
另外,本说明书中,对记录介质所记录的程序进行记述的步骤当然可以是按照其顺序以时间序列来进行的处理,但是不必一定按照时间序列来处理,还包含并列或单独地执行的处理。
以上说明了本发明的几个实施方式,但这些实施方式只是示例,不意图限定本发明的计数范围。本发明能够取其他各种实施方式,而且,能够在不脱离本发明的要旨的范围内进行省略或置换等各种变更。这些实施方式及其变形包含在本说明书等所记载的发明的范围或要旨内,而且包含在权利要求书所记载的发明及其等同的范围内。

Claims (7)

1.一种图像处理装置,其特征在于,具备:
取得单元,取得图像;
第一判定单元,判定由所述取得单元取得的图像中的规定的被摄体像的位置;以及
校正单元,在由所述第一判定单元判定为所述规定的被摄体像的位置位于图像的中心的位置以外的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正。
2.如权利要求1所述的图像处理装置,其特征在于,
还具备:
第二判定单元,判定所述被摄体像的摄像时的摄像单元的朝向;
所述校正单元在由所述第二判定单元判定为所述摄像时的朝向为纵向的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正。
3.如权利要求2所述的图像处理装置,其特征在于,
所述校正单元在由所述第二判定单元判定为所述摄像时的朝向为横向的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更弱的强度的方式对所述图像进行校正。
4.如权利要求1所述的图像处理装置,其特征在于,
还具备:
第三判定单元,判定由所述取得单元取得的图像中的规定的被摄体像的中心是否位于从图像的中心的放射线上;
所述校正单元在由所述第三判定单元判定为所述图像中的所述被摄体像的中心位于从图像的中心的放射线上的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正,在判定为所述图像中的所述被摄体像的中心线不位于从图像的中心的放射线上的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更弱的强度的方式对所述图像进行校正。
5.如权利要求1所述的图像处理装置,其特征在于,
还具备:
第四判定单元,判定所述图像中的所述被摄体像的大小;
所述校正单元基于所述第四判定单元的判定结果,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正。
6.如权利要求1所述的图像处理装置,其特征在于,
还具备:
计算单元,计算所述图像中的所述被摄体像的个数;
所述校正单元基于由所述计算单元计算出的个数,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正。
7.一种图像处理方法,使用图像处理装置,其特征在于,具备:
取得步骤,取得图像;
判定步骤,判定由所述取得步骤取得的图像中的规定的被摄体像的位置;和
校正步骤,在由所述判定步骤判定为所述规定的被摄体像的位置位于图像的中心以外的情况下,以对所述图像的中心以外的区域的由透镜的像差引起的畸变进行校正的程度成为比通常校正时的强度更强的强度的方式对所述图像进行校正。
CN201410478998.6A 2013-09-20 2014-09-18 图像处理装置及图像处理方法 Expired - Fee Related CN104469137B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013195901A JP5971216B2 (ja) 2013-09-20 2013-09-20 画像処理装置、画像処理方法及びプログラム
JP2013-195901 2013-09-20

Publications (2)

Publication Number Publication Date
CN104469137A CN104469137A (zh) 2015-03-25
CN104469137B true CN104469137B (zh) 2018-09-07

Family

ID=52691005

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410478998.6A Expired - Fee Related CN104469137B (zh) 2013-09-20 2014-09-18 图像处理装置及图像处理方法

Country Status (5)

Country Link
US (1) US20150086132A1 (zh)
JP (1) JP5971216B2 (zh)
KR (1) KR101600704B1 (zh)
CN (1) CN104469137B (zh)
HK (1) HK1204734A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI517094B (zh) * 2013-01-10 2016-01-11 瑞昱半導體股份有限公司 影像校正方法及影像校正電路
US10438331B2 (en) * 2014-06-26 2019-10-08 Intel Corporation Distortion meshes against chromatic aberrations
US9514524B2 (en) * 2015-02-27 2016-12-06 Sony Corporation Optical distortion compensation
KR102290301B1 (ko) * 2015-05-06 2021-08-17 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN104994281B (zh) * 2015-06-30 2017-09-19 广东欧珀移动通信有限公司 一种人脸畸变校正的方法及终端
CN105049713B (zh) * 2015-06-30 2018-06-29 广东欧珀移动通信有限公司 一种预览图像处理方法及用户终端
KR102317820B1 (ko) * 2015-08-12 2021-10-26 삼성전자주식회사 이미지 처리 방법 및 이를 지원하는 전자장치
WO2017029827A1 (ja) * 2015-08-19 2017-02-23 富士フイルム株式会社 撮像装置、撮像方法、プログラム、及び非一時的記録媒体
KR102500715B1 (ko) 2016-07-28 2023-02-17 삼성전자주식회사 전자 장치 및 전자 장치 제어 방법
EP3633598B1 (en) * 2017-05-30 2021-04-14 Sony Semiconductor Solutions Corporation Image processing device, image processing method, and program
CN109472753B (zh) * 2018-10-30 2021-09-07 北京市商汤科技开发有限公司 一种图像处理方法、装置、计算机设备和计算机存储介质
CN111105367B (zh) * 2019-12-09 2023-07-18 Oppo广东移动通信有限公司 人脸畸变校正方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101309367A (zh) * 2007-03-27 2008-11-19 富士胶片株式会社 成像装置
CN101427266A (zh) * 2006-02-24 2009-05-06 快图影像有限公司 选择性地取消数字图像资格的方法和设备
CN101841657A (zh) * 2009-03-19 2010-09-22 株式会社尼康 具有图像校正功能的照相机,装置和图像校正方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3753617B2 (ja) * 2001-02-16 2006-03-08 コニカミノルタフォトイメージング株式会社 デジタル撮影装置、画像処理装置および記録媒体
US7202888B2 (en) * 2002-11-19 2007-04-10 Hewlett-Packard Development Company, L.P. Electronic imaging device resolution enhancement
US7792335B2 (en) * 2006-02-24 2010-09-07 Fotonation Vision Limited Method and apparatus for selective disqualification of digital images
WO2007007788A1 (ja) * 2005-07-13 2007-01-18 Nec Corporation 色補正方法および色補正装置
EP1768387B1 (en) * 2005-09-22 2014-11-05 Samsung Electronics Co., Ltd. Image capturing apparatus with image compensation and method therefor
JP2009055415A (ja) * 2007-08-28 2009-03-12 Nikon Corp カメラ
JP5385740B2 (ja) * 2009-09-25 2014-01-08 キヤノン株式会社 撮像装置及び画像データの補正方法
KR101599885B1 (ko) * 2009-09-29 2016-03-04 삼성전자주식회사 디지털 촬영 장치 및 촬영 방법
KR101679290B1 (ko) * 2009-11-17 2016-11-24 삼성전자 주식회사 영상 처리 방법 및 장치
JP5550325B2 (ja) * 2009-12-18 2014-07-16 キヤノン株式会社 画像処理装置及び画像処理方法
JP2013074555A (ja) * 2011-09-29 2013-04-22 Casio Comput Co Ltd 撮像装置及びプログラム
JP5958082B2 (ja) * 2011-12-28 2016-07-27 株式会社リコー 画像処理装置、画像処理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101427266A (zh) * 2006-02-24 2009-05-06 快图影像有限公司 选择性地取消数字图像资格的方法和设备
CN101309367A (zh) * 2007-03-27 2008-11-19 富士胶片株式会社 成像装置
CN101841657A (zh) * 2009-03-19 2010-09-22 株式会社尼康 具有图像校正功能的照相机,装置和图像校正方法

Also Published As

Publication number Publication date
JP5971216B2 (ja) 2016-08-17
KR20150032784A (ko) 2015-03-30
JP2015061292A (ja) 2015-03-30
US20150086132A1 (en) 2015-03-26
KR101600704B1 (ko) 2016-03-07
CN104469137A (zh) 2015-03-25
HK1204734A1 (zh) 2015-11-27

Similar Documents

Publication Publication Date Title
CN104469137B (zh) 图像处理装置及图像处理方法
JP6421794B2 (ja) 画像処理装置、画像処理方法及びプログラム
CN105407268B (zh) 图像校正装置、图像校正方法以及记录介质
US20110249142A1 (en) Face Detection Using Orientation Sensor Data
CN108337450B (zh) 图像处理装置、图像处理方法以及记录介质
JP2012118817A (ja) 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体
US9652822B2 (en) Image correcting apparatus, image correcting method and computer readable recording medium recording program thereon
CN109639959A (zh) 图像处理装置、图像处理方法以及记录介质
US20130271629A1 (en) Image capture apparatus and method for controlling image capture apparatus
CN109639958A (zh) 图像处理装置、图像处理方法及记录介质
CN105744179A (zh) 摄像装置、摄像控制方法
JP6720845B2 (ja) 画像処理装置、画像処理方法及びプログラム
CN108259769B (zh) 图像处理方法、装置、存储介质及电子设备
JP2014187551A (ja) 画像取得装置、画像取得方法及びプログラム
US10129449B2 (en) Flash band, determination device for detecting flash band, method of controlling the same, storage medium, and image pickup apparatus
CN109104601A (zh) 检测装置、图像处理装置、检测方法以及图像处理方法
JP6098133B2 (ja) 顔構成部抽出装置、顔構成部抽出方法及びプログラム
US10742914B2 (en) Head-wearable imaging apparatus with two imaging elements corresponding to a user left eye and right eye, method, and computer readable storage medium for correcting a defective pixel among plural pixels forming each image captured by the two imaging elements based on defective-pixel related position information
JP2008181439A (ja) 顔検出装置及び方法並びに撮像装置
JP2013152643A (ja) 画像処理装置、画像処理方法及びプログラム
US20200118304A1 (en) Image processing apparatus, image processing method, and recording medium
CN105407270B (zh) 图像校正装置、图像校正方法以及记录介质
US20150381899A1 (en) Image processing apparatus and image processing method for synthesizing plurality of images
JP6070098B2 (ja) 閾値設定装置、閾値設定方法及びプログラム
US20230215034A1 (en) Image processing apparatus, image processing method, and image capture apparatus

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1204734

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1204734

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180907

Termination date: 20210918

CF01 Termination of patent right due to non-payment of annual fee