CN102542251B - 被摄体检测装置以及被摄体检测方法 - Google Patents

被摄体检测装置以及被摄体检测方法 Download PDF

Info

Publication number
CN102542251B
CN102542251B CN201110363283.2A CN201110363283A CN102542251B CN 102542251 B CN102542251 B CN 102542251B CN 201110363283 A CN201110363283 A CN 201110363283A CN 102542251 B CN102542251 B CN 102542251B
Authority
CN
China
Prior art keywords
image
similarity
field picture
threshold value
candidate areas
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110363283.2A
Other languages
English (en)
Other versions
CN102542251A (zh
Inventor
岛田敬辅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN102542251A publication Critical patent/CN102542251A/zh
Application granted granted Critical
Publication of CN102542251B publication Critical patent/CN102542251B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/167Detection; Localisation; Normalisation using comparisons between temporally consecutive images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

摄像装置(100)具备图像取得部(5a)、第1判定部(5c)、第2判定部(5d)及图像区域特定部(5f)。图像取得部(5a)逐次取得帧图像。第1判定部(5c)判定由图像取得部(5a)取得的第1帧图像中的第1图像区域和基准图像的第1相似度是否为第1阈值以上。第2判定部(5d)在由第1判定部(5c)判定为相似度为第1阈值以上的情况下,判定所述第1帧图像之前的第2帧图像中的与所述第1显示区域对应的第2显示区域和所述基准图像的相似度是否为比第1阈值大的第2阈值以上。若由第2判定部(5d)判定为第2相似度为第2阈值以上,图像区域特定部(5f)将所述第1图像区域特定为要检测的被摄体区域,由此检测被摄体图像。

Description

被摄体检测装置以及被摄体检测方法
技术领域
本发明涉及被摄体检测装置以及被摄体检测方法。
背景技术
作为现有技术,在JP特开2005-318515号公报中,公开了从通过摄像而逐次取得的帧图像中来进行脸检测的技术。
发明内容
本申请发明的目的在于通过降低误检测而能进行精度更高的被摄体的检测。
为了解决上述课题,本发明的被摄体检测装置的特征在于具备:取得单元,其逐次取得帧图像;第1判定单元,其判定基准图像、和取得的一个帧图像中的第1图像区域的第1相似度是否为第1阈值以上;第2判定单元,其在由该第1判定单元判定为第1相似度为第1阈值以上的情况下,判定所述基准图像、和比起所述一个帧图像而在以前所取得的帧图像中的与所述第1图像区域对应的第2图像区域的图像的第2相似度是否为比所述第1阈值大的第2阈值以上;和检测单元,其若由该第2判定单元判定为第2相似度为第2阈值以上,则将所述第1图像区域检测为特定的被摄体图像。
本发明中的被摄体检测方法的特征在于包括:逐次取得帧图像的步骤;判定所取得的一个帧图像中的第1图像区域、和基准图像的第1相似度是否为第1阈值以上的步骤;在判定为所述第1相似度为第1阈值以上的情况下,判定比起所述一个帧图像而在以前所取得的帧图像中的与第1图像区域对应的第2图像区域、和所述基准图像的第2相似度是否为比所述第1阈值大的第2阈值以上的步骤;若判定为所述第2相似度为第2阈值以上,则将所述第1图像区域检测为被摄体图像的步骤。
附图说明
图1是表示应用本发明的一个实施方式的摄像装置的概略构成的框图。
图2是表示图1的摄像装置进行的涉及被摄体检测处理的动作的一例的流程图。
图3A是示意性地表示图2的被摄体检测处理所涉及的图像的一例的图。
图3B是示意性地表示图2的被摄体检测处理所涉及的图像的一例的图。
图3C是示意性地表示图2的被摄体检测处理所涉及的图像的一例的图。
具体实施方式
下面,利用附图来说明具体的方式。但是,发明的范围并不限定于图示例。
图1是表示应用了本发明的一个实施方式的摄像装置100的概略构成的框图。
本实施方式的摄像装置100判定一个帧图像中的、要检测的特定的被摄体图像的候补区域和成为该被摄体图像的判定基准的规定的基准图像的相似度(第1相似度)是否为第1阈值以上。之后,在判定为检测候补区域A的图像的相似度为第1阈值以上的情况下,摄像装置100判定一个帧图像的规定帧数前的帧图像中的与所述检测候补区域对应的区域的图像和规定的基准图像的相似度(第2相似度)是否为第2阈值以上。然后,摄像装置100将与判定为相似度(第2相似度)为第2阈值以上的规定帧数前的帧图像的区域对应的一个帧图像的候补区域特定为特定的被摄体图像。在此,第1相似度和第2相似度可能是彼此相同的值,也可能是彼此不同的值。
如图1所示,摄像装置100具体来说具备:摄像部1、摄像控制部2、图像数据生成部3、存储器4、图像处理部5、标识设定部6、记录介质控制部7、显示控制部8、显示部9、操作输入部10和中央控制部11。
摄像部1作为摄像单元对被摄体进行拍摄,并生成帧图像F。具体地,摄像部1具备透镜部1a和电子摄像部1b。
透镜部1a由变焦透镜和对焦透镜等多个透镜构成。
电子摄像部1b例如由CCD(Charge Coupled Device,电荷耦合元件)或CMOS(Complementary Metal-oxide Semiconductor,互补金属氧化物半导体)等图像传感器构成。另外,电子摄像部1b将通过透镜部1a的各种透镜的光学像变换为二维的图像信号。
另外,虽然省略了图示,但摄像部1也可以具备对通过透镜部1a的光的量进行调整的光圈。
摄像控制部2控制由摄像部1进行的被摄体的拍摄。即,虽然省略的图示,但摄像控制部2也可以具备定时发送器、驱动器等。并且,摄像控制部2使得通过定时发送器、驱动器来扫描驱动电子摄像部1b,并每隔规定周期通过电子摄像部1b将光学像变换为二维的图像信号。然后,摄像控制部2根据变换后的图像信号,从该电子摄像部1b的摄像区域中一个一个画面地读出帧图像F,并输出给图像数据生成部3。
另外,摄像控制部2进行AF(自动对焦处理)、AE(自动曝光处理)、AWB(自动白平衡)等被摄体的摄像条件的调整控制。
图像数据生成部3在对从电子摄像部1b传输来的帧图像F的模拟值的信号按RGB的每个色成分适宜地调整了增益后,用采样保持电路(图示略)进行采样保持,并用A/D变换器(图示略)变换为数字数据。然后,图像数据生成部3对变换后的数字数据,在用颜色加工电路(图示略)进行了包括像素插值处理以及γ补正处理的颜色加工处理之后,生成数字值的亮度信号Y以及色差信号Cb、Cr(YUV数据)。
另外,图像数据生成部3在水平以及垂直方向上都以规定的倍率来对生成的帧图像的YUV数据进行缩小处理,从而生成实时取景显示用的低解析度(例如VGA或QVGA尺寸等)的图像数据。具体地,图像数据生成部3在与显示部9进行的实时取景图像的规定的显示的帧速率相应的规定的定时,根据帧图像F的YUV数据来生成实时取景显示用的图像数据。
从颜色加工电路输出的YUV数据经由未图示的DMA控制器,被DMA传输到作为缓存器而使用的存储器4。
存储器4例如由DRAM(Dynamic Random Access Memory)动态随机存取存储器)等构成。另外,存储器4临时存储由图像数据生成部3、图像处理部5、标识设定部6、中央控制部11等进行处理的数据等。具体地,存储器4临时存储通过图像数据生成部3而生成的规定的帧数的帧图像F的实时取景显示用的图像数据。
存储器4具备用于临时容纳后述的被摄体检测处理所涉及的各种信息的检测结果容纳部4a。
检测结果容纳部4a例如由环形缓冲区构成。检测结果容纳部4a将规定帧数的帧图像F中的特定的被摄体图像的候补区域(检测候补区域A,参照图3A)和规定的基准图像的相似度作为数据履历而依次容纳。通过图像处理部5的相似度算出部5b算出相似度。在此,在帧图像Fn的规定帧数(例如一帧)前通过图像数据生成部3而生成的帧图像Fm中的多个检测候补区域A中、具有与帧图像Fn中的检测候补区域A的坐标(例如中心或矩形区域的四角等的坐标)对应的坐标的区域是作为与特定的被摄体图像的候补区域(检测候补区域A)对应的区域B(参照图3B)。
即,检测结果容纳部4a作为存储单元,存储由相似度算出部5b预先算出的帧图像Fm中的与帧图像Fn的检测候补区域A对应的区域B的图像和规定的基准图像的相似度。
图像处理部5具备:图像取得部5a、相似度算出部5b、第1判定部5c、第2判定部5d、阈值设定部5e、和图像区域特定部5f。
图像取得部5a逐次取得帧图像F。
即,图像取得部5a从存储器4中逐次取得与由图像数据生成部3在与显示帧速率相应的规定的定时所生成的帧图像F的实时取景显示用的图像数据。
相似度算出部5b算出帧图像F中的特定的被摄体图像的候补区域和规定的基准图像的相似度。
即,相似度算出部5b对由图像取得部5a逐次取得的各帧图像F的实时取景显示用的图像数据的每一个,实施例如脸检测处理、边缘检测处理、特征提取处理等各种图像处理。之后,相似度算出部5b提取出多个成为特定的被摄体图像的候补的区域(检测候补区域A)(参照图3A)。具体地,相似度算出部5b根据由图像取得部5a在规定的定时所取得的帧图像Fn的实时取景显示用的图像数据,生成多个规定尺寸(例如24×24像素)的检测候补区域A(例如检测候补区域A1~A3等)作为特定的被摄体图像的候补区域。然后,相似度算出部5b例如使用adaboost(ァダブ一スト)输出计算来算出各检测候补区域A的图像数据和规定的基准图像的图像数据的相似度。
另外,相似度算出部5b进行的相似度算出方法只是一例,并不限于此,能适宜地进行任意的变更。
另外,规定的基准图像的图像数据例如是存储于图像处理部5的临时存储单元(图示略)中的信息,关于检测候补区域A,是用来判定是否是特定的被摄体的各种识别用信息。作为识别用信息,例如能举出用于将“人的脸”或“动物”等的形状作为基准来进行识别的信息;以是否是明度、彩度较高的鲜艳(华丽)的色泽或是否是肤色等的色调为基准来进行识别的信息;以相对于视角整体的图像的比例(例如是否是一半以上)等的大小为基准来进行识别的信息。
另外,脸检测处理、边缘检测处理或特征提取处理由于是公知的技术,因此在此省略详细的说明。
第1判定部5c判定帧图像Fn中的检测候补区域A的图像数据和规定的基准图像的图像数据的相似度是否为第1阈值以上。
即,第1判定部5c判定作为帧图像Fn中的特定的被摄体图像的候补区域的各检测候补区域A的图像数据和规定的基准图像的图像数据的相似度是否为由阈值设定部5e所设定的第1阈值以上。另外,第1判定部5c也可以根据判定为相似度为第1阈值以上的各检测候补区域A(特定的被摄体图像的候补区域)的规定位置(例如中心等)的坐标,在帧图像Fn的实时取景显示用的图像数据内,生成表示该检测候补区域A的位置的相似度地图。
如此,第1判定部5c判定所取得的帧图像Fn中的特定的被摄体图像的候补区域(检测候补区域A)、和成为该特定的被摄体图像的判定基准的规定的基准图像的相似度是否为第1阈值以上。
第2判定部5d判定帧图像Fm中的区域B的图像数据和规定的基准图像的图像数据的相似度是否为第2阈值以上。
即,在通过第2判定部5c判定为检测候补区域A(特定的被摄体图像的候补区域)的相似度为第1阈值以上的情况下,第2判定部5d判定在帧图像Fn的规定帧数(例如一帧)前生成的帧图像Fm中的区域B的图像数据和规定的基准图像的图像数据的相似度是否为由阈值设定部5e所设定的比第1阈值大的第2阈值以上。具体地,第2判定部5d根据帧图像Fn的规定帧数前的帧图像Fm所涉及的相似度地图,从该帧图像Fm中的多个检测候补区域A中来特定具有与帧图像Fn中的相似度为第1阈值以上的检测候补区域A的坐标对应的坐标的区域(区域B)。然后,第2判定部5d从存储器4的检测结果容纳部4a取得所特定的区域B的图像数据和规定的基准图像的图像数据的相似度。然后,第2判定部5d判定所取得的相似度是否为第2阈值以上。
如此,在第1判定部5c判定为特定的被摄体图像的候补区域的相似度为第1阈值以上的情况下,第2阈值判定部5d判定帧图像Fm中的与该被摄体图像的候补区域对应的区域B和规定的基准图像的相似度是否为第2阈值以上。
阈值设定部5e设定与第1判定部5c以及第2判定部5d的判定基准相关的第1阈值以及第2阈值。
即,阈值设定部5e设定成为被摄体图像的候补区域(检测候补区域A)和规定的基准图像的相似度的判定基准的第1阈值。另外,阈值设定部5e设定成为第2判定部5d进行的与检测候补区域A(特定的被摄体图像的候补区域)对应的区域B和规定的基准图像的相似度的判定基准的第2阈值。
具体地,作为第1阈值和第2阈值,阈值设定部5e设定基于由用户进行的操作输入部10的规定操作而输入的规定的值、或预先设定为默认的规定的值等。
图像区域特定部5f在帧图像Fn内特定被摄体图像的区域C。
即,在由第2判定部5d判定为帧图像Fm的实时取景显示用的图像数据中的区域B的图像数据和规定的基准图像的图像数据的相似度为第2阈值以上的情况下,图像区域特定部5f将帧图像Fn中的与区域B(例如区域B1、B2等)对应的检测候补区域A(例如检测候补区域A1、A2等)特定为特定的被摄体图像C,由此来检测被摄体图像。
如此,图像区域特定部5f通过将与由第2判定部5d判定为相似度为第2阈值以上的帧图像Fn中的区域B对应的被摄体图像的候补区域(检测候补区域A)特定为该被摄体图像的区域C,来检测被摄体图像。
标识设定部6设定用于识别显示所检测出的被摄体图像的标识。
即,若由图像区域特定部5f特定了被摄体图像的区域C,则标识设定部6设定与该被摄体图像的区域C的边缘部重叠而显示于显示部9的检测框W,作为识别显示该被摄体图像的标识。
另外,作为被摄体图像的标识,例示了与被摄体图像的区域C的边缘部重叠而显示的检测框W,但这只是一例,并不限于此。即,标识只要能以规定的识别标识等识别显示该被摄体图像,则能适宜地进行任意变更。
如此,标识设定部6设定用于识别显示由图像区域特定部5f所特定的被摄体图像的标识。
记录介质控制部7控制从记录介质M的数据的读取和对记录介质M的数据的写入。
即,记录介质控制部7将由图像处理部5的编码部(图示略)以规定的压缩格式(例如JPEG格式等)而压缩的记录用的图像数据记录在记录介质M上。
另外,记录介质M由例如非易失性存储器(闪存)等构成,但这只是一例,并不限于此,能进行适宜的任意变更。
显示控制部8进行控制,读取临时存储在存储器4中的显示用的图像数据并使其显示于显示部9。
具体地,显示控制部8具备VRAM(Video Random Access Memory)、VRAM控制器、数字视频编码器等。并且,数字视频编码器在中央控制部11的控制下将从存储器4读取并存储于VRAM(图示略)中的亮度信号Y以及色差信号Cb、Cr,经由VRAM控制器而定期地从VRAM中读取,并根据这些数据而产生视频信号,并输出到显示部9。
显示部9例如是液晶显示面板,根据来自显示控制部8的视频信号而将由电子摄像部1b所拍摄的图像等显示在显示画面上。具体地,显示部9一边以规定的显示帧速率逐次更新在静止图像摄像模式或运动图像摄像模式下由摄像部1以及摄像控制部2通过拍摄被摄体而生成的多个帧图像F,同时显示实时取景图像。另外,显示部9显示作为静止图像而记录的图像,或显示作为运动图像而记录的图像。
操作输入部10用于进行该摄像装置100的规定操作。具体地,操作输入部10具备与被摄体的摄像指示相关的快门按钮10a(参照图3C)、与摄像模式或功能的选择指示相关的选择决定按钮10b(参照图3C)、与变焦量的调整指示相关的变焦按钮(图示略)等。并且,操作输入部10按照这些按钮的操作而将规定的操作信号输出到中央控制部11。
中央控制部11控制摄像装置100的各部。具体地,虽然图示省略,但中央控制部11具备CPU(Central Processing Unit)、RAM(Random AccessMemory)、ROM(Read Only Memory)等,按照摄像装置100用的各种处理程序(图示略)来进行各种的控制动作。
接下来,关于摄像装置100进行的被摄体检测处理,参照图2以及图3进行说明。
图2是表示被摄体检测处理所涉及的动作的一例的流程图。另外,图3是示意性地表示被摄体检测处理所涉及的图像的一例的图。
另外,以下说明的被摄体检测处理是在根据用户进行的操作输入部10的规定操作来设定被摄体检测模式的情况下,在中央控制部11的控制下执行的处理。另外,在以下的说明中,设为使用了帧图像F,帧图像F包含作为在帧图像F内特定的被摄体图像的脸图像。
如图2所示,首先,中央控制部11将通过摄像部1拍摄被摄体而由图像数据生成部3逐次生成的帧图像F的实时取景显示用的图像数据逐次容纳于存储器4中,并临时存储(步骤S1)。
接下来,图像处理部5的图像取得部5a在与显示部9进行显示的显示帧速率相应的规定的定时,从存储器4取得成为处理对象的帧图像Fn的实时取景显示用的图像数据(步骤S2)。
接下来,相似度算出部5b算出由图像取得部5a取得的帧图像Fn中的特定的被摄体图像的检测候补区域A和规定的基准图像的相似度(步骤S3)。
具体地,相似度算出部5b根据帧图像Fn的实时取景显示用的图像数据,生成多个规定尺寸(例如24×24像素)的检测候补区域A1~A3(参照图3A),作为特定的被摄体图像的候补区域。之后,相似度算出部5b利用adaboost输出计算来算出各检测候补区域A1~A3的图像数据和规定的基准图像的图像数据的相似度。
另外,算出的各检测候补区域A1~A3的相似度临时容纳于存储器4的检测结果容纳部4a中。
接下来,第1判定部5c判定由相似度算出部5b针对检测候补区域A1~A3而算出的相似度,即帧图像Fn的实时取景显示用的图像数据中的检测候补区域A1~A3的图像数据和规定的基准图像的图像数据的相似度是否为第1阈值以上(步骤S4)。
在此,若判定为检测候补区域A1~A3的相似度为第1阈值以上(步骤S4:是),则第1判定部5c在帧图像Fn的实时取景显示用的图像数据内,生成表示被判定为相似度为第1阈值以上的各检测候补区域A1~A3的位置的相似度地图。之后,第1判定部5c将该相似度地图临时容纳于存储器4的检测结果容纳部4a中(步骤S5)。另一方面,若在步骤S4判定为检测候补区域A的相似度不是第1阈值以上(步骤S4:否),则中央控制部11将临时容纳于存储器4的检测结果容纳部4a中的该检测候补区域A的相似度、即被判定为相似度不为第1阈值以上的检测候补区域A的相似度的数据履历删除(步骤S6)。
在步骤S5生成相似度地图后,第2判定部将帧图像Fn的规定帧数(例如一帧)前的帧图像Fm中的多个检测候补区域A中的、具有与帧图像Fn中的相似度为第1阈值以上的检测候补区域A1~A3的坐标对应的坐标的区域特定为区域B1~B3(步骤S7)。接下来,第2判定部5d从存储器4的检测结果容纳部4a取得特定的区域B1~B3的图像数据和规定的基准图像的图像数据的相似度(步骤S8)。
然后,第2判定部5d判定区域B1~B3的相似度、即帧图像Fm的实时取景显示用的图像数据中的与各检测候补区域A1~A3对应的区域B1~B3的各图像数据和规定的基准图像的图像数据的相似度是否在第2阈值以上(步骤S9)。
在此,若判定为区域B的相似度为第2阈值以上(步骤S9:是),则图像区域特定部5f针对由第2判定部5d判定为相似度为第2阈值以上的区域B(例如区域B1、B2),将帧图像Fn中的与该区域B对应的检测候补区域A(例如检测候补区域A1、A2等)特定为特定的被摄体图像C(步骤S10)。之后,标识设定部6设定重叠显示于被特定的被摄体图像的区域C的边缘部的检测框W,将与该检测框W的显示控制相关的指示信号输出给显示控制部8(参照图3C)。
另一方面,若在步骤S9判定为区域B的相似度不为第2阈值以上(步骤S9:否),中央控制部11将处理移转到步骤S6,删除临时容纳于存储器4的检测结果容纳部4a中的与该区域B(例如区域B3等)对应的检测候补区域A(例如检测候补区域A3等)的相似度、即与被判定为相似度不为第2阈值以上的区域B对应的检测候补区域A的相似度的数据履历(步骤S6)。
之后,中央控制部11判定是否输入了被摄体检测处理的结束指示(步骤S11)。具体地,中央控制部11按照例如是否根据用户进行的操作输入部10的快门按钮10a的规定操作(例如,全按下操作等)而输入被摄体的拍摄指示,或是否根据选择决定按钮10b的规定操作而设定了与被摄体检测模式不同的模式等,来判定是否输入了被摄体检测处理的结束指示。
在此,若判定为没有输入被摄体检测处理的结束指示(步骤S11:否),则中央控制部11将处理移转到步骤S2,图像取得部5a从存储器4中取得成为处理对象的新的帧图像F的实时取景显示用的图像数据(步骤S2)。之后,中央控制部11和上述同样地执行步骤S3以后的各处理。
另一方面,若在步骤S11中判定为输入了被摄体检测处理的结束指示(步骤S11:是),则中央控制部11结束被摄体检测处理。
如以上,根据本实施方式的摄像装置100,判定为根据所拍摄的图像而生成的帧图像Fn中的特定的被摄体图像(例如脸图像)的检测候补区域A和规定的基准图像的相似度为第1阈值以上。然后,摄像装置100判定帧图像Fn的规定帧数前的帧图像Fm中的与该检测候补区域A对应的区域B的相似度是否为比第1阈值大的第2阈值以上。因此,摄像装置100能在帧图像Fn的规定帧数前的帧图像Fm中,利用更严格的判定值,针对可能是特定的被摄体图像的检测候补区域A,来判定是否是特定的被摄体图像。
另外,摄像装置100由于将被判定为相似度为第2阈值以上的帧图像Fn中的与区域B对应的检测候补区域A特定为特定的被摄体图像的区域C,因此能降低被摄体图像的误检测。由此,根据本发明,能谋求被摄体图像的检测精度的提高。
另外,第2判定部5d取得预先算出并存储于存储器4的帧图像Fm中的区域B的图像和规定的基准图像的相似度,并判定该相似度是否为第2阈值以上。因此,根据本发明,针对与被判定为相似度为第1阈值以上的检测候补区域A对应的区域B,不再需要重新算出和规定的基准图像的相似度,能谋求该被摄体检测处理的高速化。
进而,摄像装置100设定用于识别显示所特定的被摄体图像的区域C的标识(例如检测框W)。因此,摄像装置100通过标识使得用户能容易地识别所检测出的被摄体。
另外,本发明并不限于上述实施方式,也可以在不脱离本发明的宗旨的范围内进行各种的改良以及设计变更。
例如,在被摄体检测处理(参照图2)中,检测人的脸图像作为帧图像F内的特定的被摄体图像,但这只是一例,并不限于此,能适宜地任意变更特定的被摄体图像。
另外,在上述实施方式中,具备标识设定部6,设定用于识别显示所被特定的特定的被摄体图像的区域C的标识(例如检测框W等),但是否具备标识设定部6、即是否设定用于识别显示由图像区域特定部5f特定的被摄体图像的标识,能适应地任意变更。
进而,在上述实施方式中,在存储器4中存储预先算出的帧图像Fm中的区域B的图像和规定的基准图像的相似度,第2判定部5d在规定的判定定时从存储器4取得相似度。但是,相似度判定方法这只是一例,并不限于此,能适宜地进行任意变更。即,例如也可以在规定的判定定时,新算出帧图像Fm中的区域B的图像和规定的基准图像的相似度。
另外,在上述实施方式中例示摄像装置100的构成只是一例,并不限于此。例如,作为被摄体检测装置,例示了摄像装置100,但并不限于此。即,作为成为处理对象的帧图像F,例示了根据摄像图像来生成的图像,但在用与摄像装置100不同的装置来构成被摄体检测装置的情况下,只要是通过规定的取得单元逐次取得的帧图像即可。
此外,在上述实施方式中,通过在中央控制部11的控制下,驱动图像处理部5的图像取得部5a、第1判定部5c、第2判定部5d、图像区域特定部5f来实现作为取得单元、第1判定单元、第2判定单元、检测单元的功能。但是,本发明并不限于此,也可以构成为通过中央控制部11的CPU执行规定的程序等来实现。
即,预先在存储程序的程序存储器(图示略)中存储包括取得处理程序、第1判定处理程序、第2判定处理程序、特定处理程序的程序,也能解决本发明的课题。并且,也可以通过取得处理程序使中央控制部11的CPU作为逐次取得帧图像F的取得单元发挥功能。另外,也可以通过第1判定处理程序使中央控制部11的CPU作为第1判定单元发挥功能,该第1判定单元判定通过取得单元所取得的帧图像Fn中的特定的被摄体图像的候补区域(特定的区域)的图像和成为该被摄体图像的判定基准的规定的基准图像的类似度是否为第1阈值以上。另外,也可以通过第2判定处理程序使中央控制部11的CPU作为第2判定单元发挥功能,该第2判定单元判定在由第1判定单元判定为特定的被摄体图像的候补区域的图像的相似度为第1阈值以上的情况下,判定帧图像Fn的规定帧数前的帧图像Fm(一个帧图像以前取得的帧图像)中的区域B(与特定的区域对应的区域)的图像和规定的基准图像的相似度是否为比第1阈值大的第2阈值以上。另外,也可以通过特定处理程序使中央控制部11的CPU作为检测单元发挥功能,该检测单元将与第2判定单元判定为相似度为第2阈值以上的帧图像Fn中的区域B对应的被摄体图像的候补区域(与以前取得的帧图像的区域对应的特定的区域)特定为特定的被摄体图像的区域C,由此,来检测该被摄体图像。
同样地,关于设定单元,也可以通过中央控制部11的CPU执行规定的程序等来实现。
进而,作为容纳用于执行上述各处理的程序的计算机可读的介质,能应用ROM、硬盘等,此外还能应用闪存等非易失性存储器、CD-ROM等的可移动型记录介质。另外,作为经由规定的通信线路来提供程序的数据的介质,还应用载波(carrier wave)。

Claims (6)

1.一种被摄体检测装置,其特征在于具备:
取得单元,其逐次取得帧图像;
第1判定单元,其判定由所述取得单元取得的一个帧图像中的检测候补区域的图像和规定的基准图像的第1相似度是否为第1阈值以上;
第2判定单元,其在由该第1判定单元判定为第1相似度为第1阈值以上的情况下,判定所述一个帧图像以前所取得的帧图像中的与所述检测候补区域对应的对应区域的图像和所述规定的基准图像的第2相似度是否为不同于所述第1阈值的第2阈值以上;
检测单元,其若该第2判定单元判定第2相似度为第2阈值以上,则将所述检测候补区域的图像检测为被摄体的图像;和
第3判定单元,其判定是否输入了所述检测单元所进行的被摄体图像的检测处理的结束指示,
所述第1判定单元在通过所述第3判定单元判定为未输入被摄体图像的检测处理的结束指示的情况下,在检测出所述被摄体图像后,进一步判定通过所述取得单元新取得的帧图像中的检测候补区域的图像与所述规定的基准图像的相似度是否为第1阈值以上,
所述第2判定单元在由该第1判定单元判定为第1相似度为第1阈值以上的情况下,还判定所述新取得的帧图像以前取得且是前次的判定对象的帧图像之后取得的帧图像中的与所述检测候补区域对应的对应区域的图像和所述规定的基准图像的相似度是否为所述第2阈值以上,
并且,所述检测单元若由所述第2判定单元判定出所述对应区域的图像和所述规定的基准图像的相似度为所述第2阈值以上,则进一步将所述新取得的帧图像中的所述检测候补区域的图像检测为被摄体的图像。
2.根据权利要求1所述的被摄体检测装置,其特征在于,
所述被摄体检测装置具备存储单元,该存储单元存储与所述检测候补区域对应的所述以前所取得的帧图像的区域和所述基准图像的第2相似度,
所述第2判定单元进而从所述存储单元中取得所述第2相似度,判定该第2相似度是否为第2阈值以上。
3.根据权利要求1或2所述的被摄体检测装置,其特征在于,
所述检测候补区域是包含脸的图像。
4.根据权利要求1或2所述的被摄体检测装置,其特征在于,
所述被摄体检测装置还具备设定单元,该设定单元在所述被摄体图像上设定用于进行识别显示的标识。
5.根据权利要求1或2所述的被摄体检测装置,其特征在于,
所述帧图像是根据摄像图像所生成的图像。
6.一种被摄体检测方法,其特征在于包括:
逐次取得帧图像的步骤;
判定所取得的一个帧图像中的检测候补区域的图像和规定的基准图像的第1相似度是否为第1阈值以上的步骤;
在判定为所述第1相似度为第1阈值以上的情况下,判定所述一个帧图像以前所取得的帧图像中的与检测候补区域对应的对应区域的图像和所述规定的基准图像的第2相似度是否为不同于所述第1阈值的第2阈值以上的步骤;
若判定所述第2相似度为第2阈值以上,则将所述检测候补区域的图像检测为被摄体的图像的步骤;和
判定是否输入了所述被摄体图像的检测处理的结束指示的第3判定步骤,
在检测出所述被摄体图像后,在通过所述第3判定步骤判定为未输入被摄体图像的检测处理的结束指示的情况下,进一步判定新取得的帧图像中的检测候补区域的图像与所述规定的基准图像的相似度是否为第1阈值以上,
在判定为所述第1相似度为第1阈值以上的情况下,还判定所述新取得的帧图像以前取得且是前次的判定对象的帧图像之后取得的帧图像中的与所述检测候补区域对应的对应区域的图像和所述规定的基准图像的相似度是否为所述第2阈值以上,
并且,若判定所述对应区域的图像和所述规定的基准图像的相似度为所述第2阈值以上,则将所述新取得的帧图像中的所述检测候补区域的图像检测为被摄体的图像。
CN201110363283.2A 2010-11-22 2011-11-16 被摄体检测装置以及被摄体检测方法 Active CN102542251B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010260028A JP5510287B2 (ja) 2010-11-22 2010-11-22 被写体検出装置、被写体検出方法及びプログラム
JP2010-260028 2010-11-22

Publications (2)

Publication Number Publication Date
CN102542251A CN102542251A (zh) 2012-07-04
CN102542251B true CN102542251B (zh) 2015-09-30

Family

ID=46064417

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110363283.2A Active CN102542251B (zh) 2010-11-22 2011-11-16 被摄体检测装置以及被摄体检测方法

Country Status (4)

Country Link
US (1) US8582813B2 (zh)
JP (1) JP5510287B2 (zh)
KR (1) KR101375988B1 (zh)
CN (1) CN102542251B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103870798B (zh) * 2012-12-18 2017-05-24 佳能株式会社 对象检测方法、对象检测设备以及图像拾取设备
JP6136504B2 (ja) * 2013-04-15 2017-05-31 オムロン株式会社 対象画像検出デバイス、その制御方法および制御プログラム、記録媒体、並びにデジタルカメラ
CN105335683A (zh) * 2014-05-26 2016-02-17 富士通株式会社 对象检测方法和对象检测装置
US9445151B2 (en) * 2014-11-25 2016-09-13 Echostar Technologies L.L.C. Systems and methods for video scene processing
CN107590802B (zh) * 2017-09-11 2021-09-14 康佳集团股份有限公司 一种电视机显示一致性检测方法、存储介质及检测设备
CN111488776B (zh) * 2019-01-25 2023-08-08 北京地平线机器人技术研发有限公司 对象检测方法、对象检测装置和电子设备
CN113468918B (zh) * 2020-03-31 2024-07-05 顺丰科技有限公司 包裹检测方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001331804A (ja) * 2000-05-18 2001-11-30 Victor Co Of Japan Ltd 画像領域検出装置及び方法
CN1508754A (zh) * 2002-12-09 2004-06-30 ���ְ�˹��ʽ���� 图像检索程序、存储有该程序的存储介质、图像检索装置和图像检索方法
CN101674411A (zh) * 2008-09-09 2010-03-17 卡西欧计算机株式会社 摄影装置、图像区域存在与否判定方法、以及记录介质
JP2010157902A (ja) * 2008-12-26 2010-07-15 Olympus Imaging Corp 撮像装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4489608B2 (ja) 2004-03-31 2010-06-23 富士フイルム株式会社 ディジタル・スチル・カメラ,画像再生装置および顔画像表示装置ならびにそれらの制御方法
JP2007058763A (ja) * 2005-08-26 2007-03-08 Toshiba Corp 入場管理システムおよび入場管理方法
JP4577252B2 (ja) 2006-03-31 2010-11-10 カシオ計算機株式会社 カメラ、ベストショット撮影方法、プログラム
JP5058002B2 (ja) * 2008-01-21 2012-10-24 株式会社豊田中央研究所 物体検出装置
JP4577410B2 (ja) * 2008-06-18 2010-11-10 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
JP4947216B2 (ja) * 2008-09-17 2012-06-06 富士通株式会社 画像処理装置および画像処理方法
US8001115B2 (en) * 2008-10-16 2011-08-16 The Curators Of The University Of Missouri Identifying geographic-areas based on change patterns detected from high-resolution, remotely sensed imagery
JP5370170B2 (ja) * 2009-01-15 2013-12-18 株式会社Jvcケンウッド 要約映像生成装置および要約映像生成方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001331804A (ja) * 2000-05-18 2001-11-30 Victor Co Of Japan Ltd 画像領域検出装置及び方法
CN1508754A (zh) * 2002-12-09 2004-06-30 ���ְ�˹��ʽ���� 图像检索程序、存储有该程序的存储介质、图像检索装置和图像检索方法
CN101674411A (zh) * 2008-09-09 2010-03-17 卡西欧计算机株式会社 摄影装置、图像区域存在与否判定方法、以及记录介质
JP2010157902A (ja) * 2008-12-26 2010-07-15 Olympus Imaging Corp 撮像装置

Also Published As

Publication number Publication date
CN102542251A (zh) 2012-07-04
US20120128206A1 (en) 2012-05-24
JP5510287B2 (ja) 2014-06-04
KR20120056212A (ko) 2012-06-01
US8582813B2 (en) 2013-11-12
JP2012114561A (ja) 2012-06-14
KR101375988B1 (ko) 2014-03-18

Similar Documents

Publication Publication Date Title
CN102542251B (zh) 被摄体检测装置以及被摄体检测方法
JP4862930B2 (ja) 画像処理装置、画像処理方法及びプログラム
KR101441786B1 (ko) 피사체 판정 장치, 피사체 판정 방법, 및 기록 매체
CN101827214B (zh) 图像处理装置及图像处理方法
US8472747B2 (en) Image composition device, image composition method, and storage medium storing program
JP6833415B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2010045770A (ja) 画像処理装置及び画像処理方法
CN102006485B (zh) 图像处理装置及图像处理方法
JP4894708B2 (ja) 撮像装置
JP6937603B2 (ja) 画像処理装置およびその制御方法、プログラム、並びに記憶媒体
JP6556033B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP5807695B2 (ja) 被写体検出装置、被写体検出方法及びプログラム
JP2017092544A (ja) 出力制御装置、出力制御方法及びプログラム
JP5002311B2 (ja) 撮像装置、撮像装置の制御方法、プログラム、及び記憶媒体
JP2009098850A (ja) 演算装置及びそのプログラム
JP6776532B2 (ja) 画像処理装置、撮像装置、電子機器及び画像処理プログラム
JP5740934B2 (ja) 被写体検出装置、被写体検出方法及びプログラム
JP7458723B2 (ja) 画像処理装置、撮像装置、制御方法、およびプログラム
JP5287965B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP6668646B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2023080960A (ja) 撮像装置、制御方法、プログラム及び記憶媒体
JP2011109502A (ja) 画像追尾装置、撮像装置、及び、画像追尾方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant