CN100545733C - 成像设备、成像设备的控制方法以及计算机程序 - Google Patents

成像设备、成像设备的控制方法以及计算机程序 Download PDF

Info

Publication number
CN100545733C
CN100545733C CNB2007101102197A CN200710110219A CN100545733C CN 100545733 C CN100545733 C CN 100545733C CN B2007101102197 A CNB2007101102197 A CN B2007101102197A CN 200710110219 A CN200710110219 A CN 200710110219A CN 100545733 C CN100545733 C CN 100545733C
Authority
CN
China
Prior art keywords
face
identifying information
show
distance
indicator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2007101102197A
Other languages
English (en)
Other versions
CN101086604A (zh
Inventor
三濑哲夫
寺岛义人
石渡央
山奥荣次
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101086604A publication Critical patent/CN101086604A/zh
Application granted granted Critical
Publication of CN100545733C publication Critical patent/CN100545733C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

一种成像设备，包括：用于从输入至成像设备的输入图像中检测脸部区域的脸部检测单元；以及控制单元，用于根据脸部检测单元检测的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。

Description

成像设备、成像设备的控制方法以及计算机程序
相关申请的交叉引用
本发明包含了与2006年6月9日在日本专利局所提交的日本专利申请JP 2006-160453相关的主题，将其全部内容引用于此，以供参考。
技术领域
本发明涉及一种成像设备、成像设备的控制方法以及计算机程序，具体而言，涉及一种能够根据作为被摄对象的人的脸部来计算与被摄对象的距离并且向用户提供所计算的距离信息的成像设备、成像设备的控制方法以及计算机程序。
背景技术
用于使诸如数字式静态照相机和数字摄像机之类的成像设备聚焦于被摄对象上的聚焦处理，包括自动执行聚焦调整的自动聚焦处理以及通过用户操作来执行聚焦调整的手动聚焦处理。通常，当通过手动聚焦操作来执行聚焦调整时，在监视器上查看图像时执行调整，所述监视器诸如是液晶显示器(LCD)和电子取景器(EVF)。
例如，作为对其中正在监视器中观看图像的同时通过手动操作来执行聚焦调整这样一种情况的参考信息，在JP-A-2004-94103中公开了这样一种配置，其中用于根据聚焦透镜的位置来表明焦距的指示器(indicator)被显示在监视器屏幕中。另外，在JP-A-2002-209135和JP-A-2005-181373中公开了这样一种配置，其中显示表明被摄对象的焦点对准程度的指示器。
然而，一般说来，作为被内置到成像设备中的监视器的LCD或EVF具有相对较低的分辨率，并且难以根据监视器中的图像来准确确定目标被摄对象是否焦点对准了。作为解决此问题的技术之一，已经提供了一种具有在监视器中以放大的比例来显示图像的功能的成像设备。
然而，当以放大的比例进行显示时，存在这样一个问题，即：根据屏幕上的显示来检测与被摄对象的实际距离变得非常困难。因此，用户任意地执行手动聚焦操作，直到人处于焦点对准状态为止，并且只有在人处于焦点对准状态之后，用户才可以获取与该人的近似距离。换言之，在此情况下，所述指示器很少执行支持用户的手动聚焦控制的功能。
发明内容
在这种情况下，对目标被摄对象执行快速且精确的聚焦处理是合乎需要的。更具体来讲，需要提供一种成像设备、成像设备的控制方法以及计算机程序，用于通过根据人脸来执行距离检测并且显示与距离指示器相关的所检测距离信息，在手动聚焦处理中实现有效的用户支持。
依照本发明的一个实施例，提供了一种成像设备，其包括：用于从输入到成像设备的输入图像中检测脸部区域的脸部检测单元；以及控制单元，用于根据脸部检测单元检测的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。
在所述成像设备中，所述控制单元可以在显示单元中显示距离指示器，并且执行在距离指示器上的、对应于根据脸部大小计算的距离的位置处显示距离识别信息的处理。
在所述成像设备中，距离识别信息可以是脸部图标。
在所述成像设备中，所述控制单元可以执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且按照对于每个脸部而言脸部区域识别标记的显示色彩和在距离指示器的位置处显示的距离识别信息的显示色彩彼此相关的设置，来显示脸部区域识别标记和距离识别信息。
在所述成像设备中，所述控制单元可以执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且显示用于把脸部区域识别标记和显示在指示器上的所述位置中的距离识别信息彼此相连的连接线。
在所述成像设备中，所述控制单元可以执行如下操作的控制处理：显示根据位于显示单元中所显示图像中的脸部的附近的脸部而计算的距离识别信息。
在所述成像设备中，所述控制单元可以在显示单元中显示距离指示器，在距离指示器中显示用于表明当前焦点的焦点位置信息，并且在所述距离指示器上对应于根据脸部大小计算的距离的位置处显示距离识别信息，并且所述控制单元可以确定根据脸部大小计算的距离是否对应于焦点位置附近的地点以及是否处于焦点位置的范围之内，并且在确定所述距离处于焦点位置上的情况下，进行用于表明脸部处于焦点位置上的显示。
在所述成像设备中，所述控制单元可以闪烁在指示器上的所述位置处显示的距离识别信息，或者改变距离识别信息的显示色彩，作为表明脸部处于焦点位置上的显示。
在所述成像设备中，所述控制单元可以执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且闪烁所述脸部区域识别标记或者改变脸部区域识别标记的显示色彩，作为表明对应于脸部区域识别标记的脸部处于焦点位置上的显示。
在所述成像设备中，所述控制单元可以为由脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个脸部的距离，并且执行在显示单元中连同要显示的距离指示器一起在距离指示器上的对应于与每个脸部的距离的位置中显示距离识别信息的处理。
在所述成像设备中，所述控制单元可以按照定义的优先级为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个脸部的距离，并且执行在显示单元中连同要显示的距离指示器一起在指示器上的对应于与每个脸部的距离的位置处显示距离识别信息的处理，并且在早已完成了在距离识别信息的期待显示位置中显示所述距离识别信息的情况下，所述控制单元可以不必再次显示距离识别信息。
在所述成像设备中，定义的优先级可以被如此分配，使得脸部检测单元检测到的具有较大脸部大小的脸部区域具有较高优先级，或者使得与更接近于待分析的图像的中心的脸部相对应的脸部区域具有较高优先级。
依照本发明的另一实施例，提供了一种控制成像设备的方法，所述成像设备用于执行信息显示处理，所述方法包括如下步骤：使用脸部检测单元从输入到成像设备的输入图像中检测脸部区域，并且使用控制单元根据脸部检测单元检测的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。
在所述方法中，计算所述距离并且显示所述识别信息可以包括：在显示单元中显示距离指示器，并且执行在距离指示器上的对应于根据脸部大小计算的距离的位置处显示距离识别信息的处理。
在所述方法中，所述距离识别信息可以是脸部图标。
在所述方法中，计算所述距离并且显示所述识别信息可以包括：在显示单元中显示距离指示器，并且执行在距离指示器上的对应于根据脸部大小计算的距离的位置处显示距离识别信息的处理。
在所述方法中，计算所述距离并且显示所述识别信息还可以包括执行用于如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且按照脸部区域识别标记的显示色彩和在距离指示器上的所述位置处显示的距离识别信息的显示色彩对于每个脸部而言彼此相关的设置，显示脸部区域识别标记和距离识别信息。
在所述方法中，计算所述距离并且显示所述识别信息还可以包括执行如下操作的控制处理：显示用于识别在显示单元中所显示图像中的脸部的脸部区域识别标记，并且显示用于把脸部区域识别标记和在指示器上的所述位置处显示的距离识别信息彼此相连的连接线。
在所述方法中，计算所述距离并且显示所述识别信息还可以包括执行如下操作的控制处理：显示根据在显示单元中所显示图像中的脸部附近的脸部所计算的距离识别信息。
在所述方法中，计算所述距离并且显示所述识别信息可以包括：在显示单元中显示距离指示器，在距离指示器中显示用于表明当前焦点的焦点位置信息，并且在距离指示器上的对应于根据脸部大小计算的距离的位置处显示距离识别信息，并且所述控制单元可以确定根据脸部大小计算的距离是否对应于焦点位置附近的地点以及是否处于焦点位置的范围中，并且在确定所述距离处于焦点位置上的情况下，执行表明所述脸部处于焦点位置上的显示。
在所述方法中，对于表明所述脸部处于焦点位置上的显示的确定和执行可以包括：闪烁在指示器上的所述位置中显示的距离识别信息，或者改变距离识别信息的显示色彩，作为表明脸部处于焦点位置上的显示。
在所述方法中，所述控制单元可以显示用于识别在显示单元中所显示图像中的脸部的脸部区域识别标记，并且可以闪烁所述脸部区域识别标记或者改变脸部区域识别标记的显示色彩，作为表明对应于脸部区域识别标记的脸部处于焦点位置上的显示。
所述方法还可以包括：通过使用控制单元，为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个脸部的距离，并且执行在显示单元中连同要显示的距离指示器一起在距离指示器上的对应于与每个脸部的距离的位置处显示距离识别信息的处理。
所述方法还可以包括：通过使用控制单元，按照定义的优先级为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个脸部的距离，并且执行在显示单元中连同要显示的距离指示器一起在指示器上的对应于与每个脸部的距离的位置处显示距离识别信息的处理，并且通过使用控制单元，在早已完成了在距离识别信息的期待显示位置中显示所述距离识别信息的情况下，不再次显示距离识别信息。
在所述方法中，定义的优先级可以被如此分配，使得脸部检测单元检测到的具有较大脸部大小的脸部区域具有较高优先级，或者使得与更接近于待分析的图像的中心的脸部相对应的脸部区域具有较高优先级。
依照本发明的另一实施例，提供了一种计算机程序，其允许计算机执行成像设备中的信息显示处理控制，所述计算机程序允许计算机执行如下步骤：使用脸部检测单元从输入到成像设备的输入图像中检测脸部区域，并且使用控制单元根据脸部检测单元检测的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。
依照本发明另一实施例的所述计算机程序例如可以被提供在存储介质或者通信介质上，其中存储介质或者通信介质是依照用于可以执行各种程序代码的通用计算机系统的计算机可读格式提供的，举例来说，存储介质诸如是CD、FD或者MO，而通信介质诸如是网络。通过提供依照计算机可读格式的计算机程序，在计算机系统中执行基于该计算机程序的处理。
本发明的其它目的、特征或者优点将基于示例性实施例或者附图在具体实施例方式中公开。随后描述中的“系统”是多个装置的逻辑组合的结构，并且不局限于每个组成装置处于一个主体中的情况。
依照本发明的实施例，脸部检测处理和距离计算处理是在成像设备中执行的，而诸如脸部图标之类的距离识别信息被显示在距离指示器中对应于所计算距离的位置处，该距离指示器被显示在监视器屏幕或者取景器上。用户可以根据距离识别信息的显示直观地意识到与人的距离，并且在通过手动聚焦操作进行的聚焦调整处理中还可以根据距离指示器中所显示的脸部图标容易地意识到与人的近似距离，借此可以有效地并且准确地执行手动聚焦控制(聚焦调整)。
依照本发明的另一实施例，被配置为包围在监视器或取景器中所显示的被摄对象图像的脸部区域识别标记的设置色彩以及对应地显示在距离指示器中的诸如脸部图标之类的距离识别信息的色彩被配置为彼此相同，或者连接一条连接线来用于显示，由此，即使在多个脸部被显示在监视器中的情况下，也可以容易地意识到与目标被摄对象的距离，借此能够对目标被摄对象准确地执行聚焦调整操作。
附图说明
图1A至1C是示出了依照本发明实施例的成像设备的外观的图。
图2是示出了依照本发明实施例的成像设备的硬件配置的图。
图3是示出了依照本发明实施例的成像设备中的数据显示示例的图。
图4A和4B是示出了依照本发明实施例的距离指示器示例的图。
图5是示出了依照本发明实施例的根据脸部大小进行的被摄对象距离计算处理的图。
图6是示出了依照本发明实施例的脸部大小基准值计算单元的配置和处理的图。
图7A和7B是示出了依照本发明实施例的、在脸部大小基准值计算单元中使用的基准值计算表示例的图。
图8是示出了依照本发明实施例的、在脸部大小基准值计算单元中使用的基准值计算表示例的图。
图9是示出了依照本发明实施例的、在脸部大小基准值计算单元中使用的基准值计算表示例的图。
图10是示出了依照本发明实施例的成像设备进行脸部检测、距离计算和根据所计算的距离信息进行显示控制的序列的流程图。
图11是示出了闪烁脸部图标的处理的条件的图。
图12是示出了依照本发明实施例在检测到多个脸部的情况下进行脸部检测、距离计算和根据所计算的距离信息进行显示控制的序列的流程图。
图13是示出了依照本发明实施例的成像设备中的数据显示示例的图。
图14是示出了依照本发明实施例的成像设备中的数据显示示例的图。
图15是示出了依照本发明实施例的成像设备中的数据显示示例的图。
具体实施方式
此后，将参考附图详细说明依照本发明实施例的成像设备、成像设备的控制方法和计算机程序。依照本发明实施例的成像设备检测作为被摄对象的人的脸部，计算与所检测的脸部的距离，并且在成像设备的显示单元、即监视器屏幕或者取景器中显示有关所计算距离的信息和指示器，由此实现手动聚焦处理中的用户支持。换言之，提供了使用户(摄影者)能够直观地认识到与作为被摄对象的人的距离的信息，借此，可以有效地并且准确地执行手动聚焦操作。
更具体地说，当摄影者通过执行手动聚焦操作来拍摄某个人时，执行脸部检测处理和距离计算处理，并且诸如脸部图标之类的距离识别信息被显示在距离指示器(所述距离指示器被显示在监视器屏幕或者取景器上)上，或者被显示在邻近于指示器的对应于所计算距离的位置中。摄影者可以根据显示直观地认识到与人的距离。由于在通过手动聚焦操作执行聚焦调整之前、摄影者可以通过另外显示在指示器上的脸部图标来容易地认识到与人的近似距离，所以摄影者可以有效地并且准确地执行手动聚焦控制(聚焦调整)。
另外，要显示的、被配置为包围对其已经完成了聚焦调整的被摄对象的聚焦调整框的色彩以及对应地显示在指示器上的诸如脸部图标之类的距离识别信息的色彩被配置为相同的，由此，即使在有多个脸部被显示在监视器上的情况下，也能够容易地认识到与目标被摄对象的距离，借此能够对目标被摄对象准确地执行聚焦调整处理。
聚焦指示器上的脸部图标被配置为按照人的向前/向后移动(与被摄对象的距离被向前/向后移动)来改变其显示位置，并且当人移动时，执行与所述移动相一致的显示，借此用户可以从监视器屏幕中意识到被摄对象的移动。
首先，将描述依照本发明实施例的成像设备的配置。图1A至1C是示出了依照本发明实施例的成像设备10的外观的图。图1A是成像设备10的俯视图，图1B是成像设备10的正视图，而图1C是成像设备10的后视图。图1A中的透镜部分被表示为截面图。所述成像设备10包括电源开关11，充当快门的触发装置、即释放开关12，用于显示由成像设备拍摄的图像(直通图像(through image))或操作信息的监视器13，作为成像器件(CCD)的成像器14，用于执行变焦控制的变焦按钮15，用于输入诸如手动聚焦处理之类的各种操作信息的操作按钮16，用于检查由成像设备拍摄的图像(直通图像)的取景器17，在聚焦调整操作中驱动的聚焦透镜18，在变焦调整操作中驱动的变焦透镜19，用于设置拍摄模式的模式拨盘20，用于驱动聚焦透镜18的聚焦透镜电机(M1)21，以及用于驱动变焦透镜19的变焦透镜电机(M2)22。
被摄对象的图像被显示在作为显示单元的取景器17以及监视器13中。取景器17和监视器13例如分别通过LCD来构成，并且通过透镜传递的被摄对象图像被显示为运动画面。所述运动画面被称为直通图像(through image)。用户检查取景器17或者监视器13以便检查用于拍摄的目标被摄对象，并且按下作为快门的释放开关12，借此将执行图像的记录处理。
将参照图2描述依照本发明实施例的成像设备100的内部配置。经由聚焦透镜101和变焦透镜102传递的入射光例如被输入至成像器件103，并且在成像器件103中被光电转换，所述成像器件103诸如是CCD(电荷耦合器件)。经过光电转换的数据被输入到模拟信号处理器104，通过模拟信号处理器104对所述数据执行诸如噪声去除处理之类的处理，并且在A/D转换器105中把所述数据转换为数字信号。在数字信号处理器108中，对已经在A/D转换器105中被转换为数字信号的数据执行各种信号处理和校正处理，并且把通过数字信号处理器108处理过的数据记录到记录装置115中，所述记录装置115例如包括闪速存储器。另外，在监视器117和取景器(EVF)116中显示处理后的数据。在监视器117和取景器(EVF)116中，无论执行图像拾取与否，经由透镜传递的图像都被显示为直通图像。
操作单元118包括释放开关12、变焦按钮15、用于输入诸如手动聚焦处理操作信息之类的各种操作信息的操作按钮16、以及用于设置拍摄模式的模式拨盘20，它们被设置在参照图1A至1C描述的照相机主体中。
控制单元110包括CPU，并且根据预先存储在存储器(ROM)120等中的程序来执行对由成像设备执行的各种处理的控制操作。存储器(EEPROM)119是非易失性的，并且其中存储有图像数据、各种辅助信息、程序等。存储器(ROM)120存储由控制单元(CPU)110使用的程序、操作参数等。存储器(RAM)121存储由控制单元(CPU)110使用的程序、在控制单元的操作过程中适当地改变的参数等。陀螺仪(gyro)111检测成像设备的倾角、抖动等。检测到的信息被输入至控制单元(CPU)110，并且执行诸如防止人手模糊之类的处理。
电机驱动器112驱动根据聚焦透镜101设置的聚焦透镜驱动电机113，以及根据变焦透镜102设置的变焦透镜驱动电机114。垂直驱动器107驱动成像器件(CCD)103。定时发生器106生成用于成像器件103和模拟信号处理器104的处理定时的控制信号，并且控制其处理定时。
脸部检测单元130通过分析经由透镜输入的图像数据来检测图像数据中的人的脸部区域。把检测到的信息发送给控制单元110，并且控制单元110把人的脸部区域确定为目标被摄对象，并且根据所确定的脸部区域来测量与所述被摄对象的距离。
依照本发明实施例的成像设备可以执行手动聚焦调整，即手动聚焦处理，作为聚焦处理。当摄影者通过手动聚焦操作拍摄人时，脸部检测单元130执行脸部检测处理，控制单元110根据检测到的脸部信息来执行距离计算处理，并且在距离指示器上的对应于所计算距离的位置处显示距离识别信息，所述距离识别信息诸如是脸部图标，所述距离指示器被显示在监视器117或者取景器116中。摄影者可以根据距离识别信息的显示直观地认识到与人的距离。
在图3中示出了所述显示的详细示例。如图3所示，附图中所示的显示信息200被显示在成像设备10的监视器13上。这里，虽然只示出了监视器13，但是在取景器中显示相同的图像。在显示信息200中，距离指示器210连同目前处于拍摄过程中的图像(直通图像)一起被显示。在该图中示出的此例中，距离指示器210在左端表明接近的距离，而在右端中表明无穷远的距离。对应于聚焦设置距离位置的焦点位置信息211出现在距离指示器上，所述聚焦设置距离位置对应于聚焦透镜的当前位置。焦点位置信息211按照聚焦透镜的移动在距离指示器上滑动，其中所述聚焦透镜是根据用户的手动聚焦调整来移动的。
在依照本发明实施例的成像设备中，根据所计算的距离信息，把如图中所示的脸部图标显示在指示器上对应于所计算的距离的位置处，所计算的距离信息是通过脸部检测单元130进行脸部区域检测并且通过控制单元110进行与脸部的距离计算而获取的。在图中所示的例子中，脸部图标221出现在指示器上对应于脸部201的所计算距离(约1米)的位置中，所述脸部201包括在作为直通图像的所显示图像中，并且所显示图像中的脸部图标222出现在指示器上对应于脸部202的所计算距离(约2.2米)的位置中。这些脸部图标分别对应于脸部201和202以互不相同的色彩来显示。这些色彩分别与脸部区域识别标记203和204的设置色彩相关，所述脸部区域识别标记203和204出现在与计算了与其的距离的脸部相对应的监视器图像上。所述脸部区域识别标记203和204也被用作聚焦框，即，用于表明对被摄对象的聚焦调整成功的信息，并且当聚焦调整成功时，闪烁地显示脸部区域识别标记203和204。另外，当聚焦调整成功时，脸部图标221和222也闪烁地显示。
在该图中所示的例子中，对于脸部201，显示红色的脸部区域识别标记203，而对于脸部202，显示蓝色的脸部区域识别标记204。表明距离信息的脸部图标的色彩是如此被显示的，即，对应于为脸部201计算的距离的脸部图标221用红色显示，而对应于为脸部202计算的距离的脸部图标222用蓝色显示。利用显示色彩，用户可以立刻了解哪个被摄对象处于什么距离。
如上所述，脸部区域识别标记203和204另外还被用作聚焦框。当被摄对象通过成像设备的聚焦调整处理而焦点对准(聚焦调整成功)时，执行焦点对准(in-focus)显示，以便使监视器图像中的已经完成了聚焦调整的被摄对象是可识别的。所述焦点对准显示是为表明监视器或者取景器中所显示图像的聚焦调整完成而显示的识别信息，并且举例来说，包围脸部的框一般被显示焦点对准框。用户检查这种焦点对准显示，并且按下快门来进行拍摄，借此可以执行精确的拍摄。
在依照本发明的实施例的配置中，脸部区域识别标记被闪烁地显示，以便表明聚焦调整成功。例如，在该图中所示的例子中，对脸部201的聚焦调整成功，并且在此情况下，脸部区域识别标记203被显示为正在闪烁。这时，对应于为脸部201计算的距离的脸部图标221被显示为正在闪烁。用户根据所述闪烁显示来检查聚焦调整的成功，并且按下快门来进行拍摄，借此可以利用精确的聚焦调整来拍摄图像。
距离指示器210的显示根据与被摄对象的距离来进行转换。换言之，如图4A和4B所示，显示模式在具有不同距离范围的多个距离指示器当中进行变换。图4A示出了具有距离范围2至90厘米(cm)的距离指示器，而图4B示出了具有距离范围90厘米至无限远的距离指示器。如上所述，将多个距离指示器中的其中一个选择用来显示。例如，当由控制单元110根据脸部检测单元130检测到的脸部所计算的所有距离都在90厘米范围之内时，所述控制单元110显示图4A中所示的距离指示器，并且执行用于在距离指示器上或者其附近显示脸部图标的处理。另一方面，当存在与其的计算距离大于90厘米的脸部时，控制单元110显示图4B中所示的距离指示器，并且执行用于在距离指示器上或者其附近显示脸部图标的处理。
当使用依照本发明实施例的成像设备时，在通过手动聚焦操作执行聚焦调整之前，通过如图3所示的距离指示器210上的显示，摄影者可以容易地认识到与人的近似距离，并且因此，摄影者可以有效地并且准确地执行手动聚焦控制(聚焦调整)。聚焦指示器上的脸部图标被配置为按照人的向前/向后移动(被摄对象的距离被向前/向后移动)来改变其显示位置，并且当人移动时，执行与所述移动相一致的显示，借此用户可以从监视器屏幕中意识到被摄对象的移动。
在依照本发明实施例的成像设备中，目标被摄对象中的人的脸部区域是根据由成像设备拍摄的图像数据确定的，并且距离计算处理是根据脸部图像执行的。换言之，使用脸部检测单元130执行脸部区域检测处理，和使用控制单元110进行与脸部的距离的计算处理。此后，将描述用于这些处理的详细配置。所述描述是按照如下内容的顺序来进行的：
(1)脸部识别处理；
(2)根据脸部大小进行的被摄对象距离计算处理。
(1)脸部识别处理
首先，将描述由脸部检测单元130执行的处理，即，用于根据成像设备获取的图像数据来确定人的脸部区域的技术。作为用于识别并且跟踪脸部的技术，在相关领域中已经公开了各式各样的技术，并且这些技术都可以应用。例如，通过把其中记录有关于脸部亮度分布的信息的模板与实际图像进行匹配，可以实现对人的脸部区域的确定，如JP-A-2004-133637中所示。首先，预备已经执行了大小缩小处理的多个图像。预备在其中脸部在多个图像中俯仰的情况下可以获取的脸部亮度分布信息的一组模板，并且所述模板被逐个匹配。通过相对于三维正交坐标系统的每一个X、Y和Z轴俯仰脸部，来获取模板，并且通过执行与模板的匹配，实际脸部的俯仰得以确定。
当大小缩小后的图像沿二维平面逐渐移动时，如果大小缩小后的图像的区域与模板匹配，那么所述区域成为其中存在脸部的区域，并且可以根据实际图像的缩小比例来获取脸部的大小。另外，绕正交的三个轴的旋转角，即偏转角、倾角和横摇角，可以从这时使用的模板中获得。通过使用所获得的脸部大小、位置和旋转角来执行与脸部的距离的计算。
如以上参考图3所述，根据从脸部图像中计算的距离信息，在指示器上对应于所计算的距离位置的位置中执行诸如脸部图标之类的距离识别显示，所述指示器被显示在诸如监视器117和取景器(EVF)116之类的显示单元中。
(2)根据脸部大小进行的被摄对象距离计算处理
此后，将描述与脸部的距离的详细计算方法。在依照本发明实施例的成像设备中，根据成像设备拍摄的图像中包括的脸部的大小，来获取与脸部的距离。现在将参照图5来描述此处理。在图5中，示出了被摄对象301的位置、聚焦透镜302和成像设备303。在被摄对象301的位置中，存在人脸。脸部大小(脸部宽度)是Wf。
当实际的脸部大小Wf已知时，可以根据透镜的基本物理理论，使用如下公式来获取与脸部的距离Df，即，与被摄对象的距离Df，它是从聚焦透镜302到被摄对象301的位置的距离。
(公式1.1)Df＝Wref×(f/Wi)×(Ww/Wf)
对上面公式中的符号的描述如下。
Wref：人的脸部大小基准值
Wi：成像设备的宽度
f：焦距
Wf：成像设备中人的脸部大小的像素数目(通过成像设备检测到的值)
Ww：用于检测人脸的图像大小的像素数目(通过成像设备检测到的值)
作为人的脸部大小基准值Wref，可以使用预先确定的固定值。可以执行把人的脸部大小基准值Wref设置为考虑到个体差异、人种(ethnic group)差异、年龄差异、性别差异等情况下而设置的值的处理，并且可以通过该处理进行更加精确的距离估计。将在后半部分中描述用于该处理的配置。
成像设备根据由成像设备拍摄的图像(直通图像)，通过使用上述公式1.1来计算与被摄对象的距离Df，并且根据所计算的与被摄对象的距离Df，如参考图3所描述的那样，在显示单元中显示的距离指示器上的对应于所计算距离的位置处显示诸如脸部图标之类的标识符。如上所述，当图像中包括多个脸部时，计算对应于每个脸部的距离。显示对应于每个脸部的具有不同色彩的图标和用于每个脸部的脸部区域识别标记。
距离计算公式、即公式1.1中使用的人的脸部大小基准值Wref可以是预先确定的固定值，但是可以执行把人的脸部大小基准值Wref设置为考虑到个体差异、人种差异、年龄差异、性别差异等而设置的值的处理。现在将参照图6以及其后的附图来描述该处理的配置。所述处理被如此配置，即：将人的脸部大小基准值Wref按照对应于被摄对象的人种、性别、年龄和体格而设置为适当的值，以便计算与被摄对象的精确距离Df。对于此处理而言，对应于各式各样的人种、性别、年龄和体格的人的脸部大小基准值Wref被计算用来进行使用。例如，用于计算对应于各式各样的人种、性别、年龄和体格的人的脸部大小基准值Wref的表数据被维护，根据用户输入的图像或信息的分析结果来获取有关对应于被摄对象的人种、性别、年龄和体格的信息，并且根据所获取的信息从表中获取与被摄对象相一致的脸部大小基准值Wref。
通过分析由成像设备拍摄的图像中包括的脸部图像，能够估计出具有脸部的人的人种、性别、年龄和体格。换言之，脸部的某些部分被识别出，并且把所述部分与预先登记的、对应于每一人种、性别、年龄和体格的部分信息进行匹配，借此，被摄对象的人种、性别、年龄和体格被估计出来。作为选择，诸如摄影者之类的用户输入有关人种、性别、年龄和体格的被摄对象信息作为被摄对象信息，并且所输入的信息可以被应用。
如上所述，根据图像分析处理或者用户的输入信息来获取有关被摄对象的人种、性别、年龄和体格的信息，借此获取与被摄对象一致的适当脸部大小基准值Wref。将参照图6来描述这个处理的示例。
如图6所示，所述成像设备包括脸部大小基准值Wref计算单元310。所述脸部大小基准值Wref计算单元310包括用于每一种族(race)的基准值计算表311，用于每一性别的基准值计算表312，用于每一年龄的基准值计算表313，用于每一体格的基准值计算表314，以及数据处理部320。
图像分析单元331可以通过分析由成像设备拍摄的图像中包括的脸部图像，来估计具有脸部的人的人种、性别、年龄以及体格。换言之，脸部的某些部分被识别出来，并且把所述部分与预先登记的、对应于每一人种、性别、年龄和体格的部分信息进行匹配，借此，被摄对象的人种、性别、年龄和体格被估计出来。然后，把所估计的信息输入到脸部大小基准值Wref计算单元310。作为选择，诸如摄影者之类的用户可以经由用户输入单元332输入有关人种、性别、年龄和体格的被摄对象信息作为被摄对象信息，并且把所输入的信息输入到脸部大小基准值Wref计算单元310。
所述脸部大小基准值Wref计算单元310根据从图像分析单元331或者用户输入单元332输入的被摄对象信息，通过应用所述表来计算最佳基准值Wref。考虑到实际输出在某种程度上具有不一致性，因此，可以计算基准值范围Wref＝(Wref+ΔWrefb)至(Wref-ΔWrerfs)。在此情况下，输出在考虑了ΔWrefb的假定上限偏差和ΔWrefs的假定下限偏差的情况下所获得的值。
现在将参照图7A至图9来描述这些表的示例。图7A是用于每一种族的基准值计算表，图7B是用于每一种族和性别的基准值计算表，图8是用于每一种族、性别和年龄的基准值计算表，而图9是用于每一种族、性别、年龄和体格的基准值计算表。在图6中所示的配置示例中，分别为种族、性别、年龄和体格配置了表，但是这些表可以依照如图7A至图9所示的各种形式来配置，而不是分别为种族、性别、年龄和体格来配置表。
例如，当只有被摄对象的种族可以根据经由图像分析单元331或者用户输入单元332输入的被摄对象信息来估计时，使用图7A中所示的用于每一种族的基准值计算表。当无法确定种族时，使用“公共”数据。
当被摄对象的种族和性别可以根据经由图像分析单元331或者用户输入单元332输入的被摄对象信息而被估计/确定时，使用图7B中所示的用于每一种族和性别的基准值计算表。当被摄对象被包括在亚洲人种和男性中时，使用图7B中所示的A行中的数据。另一方面，当被摄对象的性别被估计/确定为女性而被摄对象的种族无法识别时，使用图7B中所示的B行中的数据，其表示人种为公共而性别为女性。
同样地，当被摄对象的年龄组可以另外被估计/确定时，使用图8中所示的用于每一种族、性别和年龄的基准值计算表。当获知所述被摄对象属于亚洲人种、男性并且十二岁时，使用图8中所示的C行中的数据，并且当因任何原因而无法估计出年龄组时，使用图8中所示的D行中的数据。同样地，当被摄对象的体格可以另外被估计/确定时，使用图9中所示的用于每一种族、性别、年龄和体格的基准值计算表来计算最佳基准值Wref＝(Wref+ΔWrefb)至(Wref-ΔWrerfs)。
如上所述，通过根据图像分析或者用户的输入信息获得被摄对象的种族、性别、年龄和体格，能够获取适当的脸部大小基准值Wref，并且通过使用所计算的基准值Wref，还可以进一步准确地计算与被摄对象的距离Df。对于应用基准值Wref的处理或者计算与被摄对象的距离Df的处理来说，可以使用脸部水平宽度和脸部垂直长度中的一个，或者可以使用脸部的水平宽度和垂直长度这两者。此外，对于所述处理来说，可以考虑被摄对象的俯仰。
如上所述，根据基于被摄对象的脸部大小计算的与被摄对象的距离Df，诸如脸部图标之类的标识符被显示在距离指示器上的对应于所计算距离的位置处，其中距离指示器显示在显示单元中，如以上参考图3所描述的那样。当图像中包括多个脸部时，对应于这些脸部的距离被分别计算，并且显示对应于每个脸部的具有不同色彩的图标和用于每个脸部的脸部识别标记。
通过执行规一化处理来确定对应于距离指示器的图标显示位置以便进行显示，其中所述规一化处理把根据脸部大小计算的所计算距离Df与在显示单元中显示的指示器的显示距离相关联。
接下来，将参照图10中所示的流程图来描述在依照本发明实施例的成像设备中执行的处理序列。图10的流程图中所示的处理是通过在图2所示的成像设备的控制单元110的控制下控制诸如脸部检测单元130之类的组成单元来执行的。首先，在步骤S101，由脸部检测单元130从成像设备的获取图像中检测脸部区域。如上所述，例如，所获取图像中的脸部区域通过把其中记录了有关脸部亮度分布的信息的模板与用于检测的实际图像相匹配来确定。
接下来，在步骤S102，计算与检测到的脸部的距离。把上述公式1.1、即Df＝Wref×(f/Wi)×(Ww/Wf)应用为用于计算与被摄对象的距离的基本公式。
在距离的计算处理过程中，如上所述，可以使用对应于人的人种、性别、年龄和体格的脸部大小基准值Wref。
接下来，在步骤S103，执行距离识别信息(脸部图标)的显示位置的计算处理，并且执行距离识别信息的显示处理，其中所述距离识别信息根据所计算的距离信息与显示单元中所显示的距离指示器相对应地显示。在所述这些处理中，通过执行规一化处理来确定显示位置，并且执行距离识别信息的显示，其中所述规一化处理把根据脸部大小计算的所计算距离Df与指示器的显示相关联。
接下来，在步骤S104，把所计算的与脸部的距离Df和通过指示器焦点位置信息所表明的距离彼此进行比较，借此确定聚焦透镜的当前位置(焦点位置)是否处于已计算了与其的距离的被摄对象脸部的焦点位置处。更具体地说，如图11所示，检验所计算的与脸部的距离Df是否位于出现在指示器上的焦点位置Dp的附近。换言之，确定所计算的与脸部的距离Df是否位于根据焦点位置Dp计算的焦距的允许范围Thr_min至Thr_max之内。
当与脸部的距离Df被确定为位于根据焦点位置Dp计算的焦距的允许范围Thr_min至Thr_max之内时，所述处理进行到步骤S105，并且另外显示在指示器上的距离识别信息(脸部图标)被闪烁地显示。另外，如以上参考图3所述，用作聚焦框的脸部区域识别标记被闪烁地显示。用户检查焦点对准显示，然后，按下快门来进行拍摄，借此可以执行精确的拍摄。
另一方面，当在步骤S104中确定与脸部的距离Df没有位于根据焦点位置Dp计算的焦距的允许范围Thr_min至Thr_max之内时，不执行步骤S105中的闪烁处理，并且所述处理结束。然而，当把成像设备设置为手动聚焦模式时，连续地执行步骤S101至S105的处理，并且当根据基于用户对操作单元的操作进行的聚焦透镜的移动，步骤S104中的确定结果变为“是”时，在步骤S105中执行图标的闪烁显示等，并且用户此刻操作快门，借此可以执行聚焦调整后的拍摄。
在上述处理流程中，当确定与脸部的距离Df位于根据焦点位置Dp计算的焦距的允许范围Thr_min至Thr_max之内时，处理进行到步骤S105，并且另外显示在指示器上的距离识别信息(脸部图标)被闪烁地显示，但是，为了举例，可以通过改变显示色彩来执行焦点对准通知。另外，用作聚焦框的脸部区域识别标记可以在显示上进行改变，以代替闪烁。
接下来，将参照图12中所示的流程图来描述在脸部检测单元检测到多个脸部的情况下执行的处理序列。图12的流程图中所示的处理也是通过在图2所示的成像设备的控制单元110的控制下控制诸如脸部检测单元130之类的组成单元来执行的。首先，在步骤S201，由脸部检测单元130从成像设备的获取图像中检测脸部区域。如上所述，例如，所获取图像中的脸部区域通过把其中记录了有关脸部亮度分布的信息的模板与用于检测的实际图像相匹配来确定。在步骤S202，设置对应于检测到的脸部数目n的循环数目n，并且执行步骤S203至S207中的处理。
在步骤S203，开始所述循环。在步骤S204，计算与在步骤S202检测到的一个脸部的距离。把上述公式1.1、即Df＝Wref×(f/Wi)×(Ww/Wf)应用为用于计算与被摄对象的距离的基本等式。
在所述距离的计算处理过程中，如上所述，可以使用对应于人的人种、性别、年龄和体格的脸部大小基准值Wref。
在步骤S205，确定图标是否被显示在指示器上的与所计算距离的位置相对应的位置中。当所述图标没有显示在该位置中时，所述处理进行到步骤S206，并且在指示器上的与所计算距离的位置相对应的位置处显示距离识别信息(脸部图标)。另一方面，当在步骤S205中确定所述图标被显示在指示器上的对应于所计算距离位置的位置处时，处理进行到步骤S207的下一处理，而不执行步骤S206的脸部图标的显示处理，并且所示处理进行到用于下一个循环的处理。步骤S203至S207中的处理被重复地执行，执行的次数对应于检测到的脸部数目，其中要处理的目标脸部逐个地改变，并且当完成对所有脸部的处理时，所述处理结束。
在执行步骤S203至S207的循环的过程中，要处理的脸部的顺序例如被设置为检测到的脸部大小的递减次序。通过这种设置，近距离的脸部被优先处理，并且另外，近距离的人的脸部图标被优先地显示在指示器上。如上所述，当存在多个脸部时，不执行具有较低优先级的脸部图标的显示处理，借此，图标的显示被配置为彼此不相重叠。
当如上所述拍摄了多个人时，可以使用这样的配置，其中，摄影者预先在菜单上选择要测量与其的距离的脸，输入选择信息，并且控制单元只对所选的脸部执行距离计算和图标显示处理。另外，例如，还可以使用这样的配置，其中，所拍摄图像的中心区域被设置为优先区域，并且从中心位置开始顺序地向各区域分配优先级。
作为选择，可以使用这样的配置，其中，只把最大的脸或者最接近于图像中心的脸设置为进行距离计算和图标显示的目标脸部，并且只对目标脸部执行处理。在此情况下，由于检测到的脸部数目变为1，所以，与此对应的指示器上的脸部图标数目也变为1，借此，摄影者可以容易地认识到脸部图标，而不会在脸部和脸部图标之间的对应关系方面发生混淆。
当摄影者执行快速的摇移俯仰(pan tilt)时，在监视器中显示并且检测到的脸部从视场角处消失，但是，在此情况下，指示器上的脸部图标与脸部消失相一致地被去除和初始化。然而，为了避免错误检测，脸部图标的去除处理以预定的时间延迟来执行。在去除图标并且执行初始化之后，根据所获取的图像来重新执行脸部检测、距离计算和图标显示处理。
已经参照图3描述了指示器、脸部图标和脸部区域识别标记的显示示例，其中所述脸部区域识别标记被用作聚焦框，但是，如图13所示，可以显示用于连接脸部图标和脸部区域识别标记的连接线521和522，从而可以容易地识别出脸部、脸部区域识别标记和脸部图标之间的对应关系。如图14所示，可以在用作聚焦框的脸部区域识别标记上显示距离信息531和532。另外，如图15所示，当检测到的脸部之间的侧脸转向前侧时，对应于所述侧脸的侧脸图标551可以被闪烁地显示，以便向摄影者通知该运动。另外，可以使用这样的配置，其中，诸如成年人、孩子、男性、女性等的脸部图标被设置为脸部图标类型，并且根据脸部检测单元的检测信息和控制单元来选择与被摄对象相一致的图标以便进行显示。
已经参照本发明的示例性实施例描述了本发明。然而，很明显，在不背离本发明的精神的情况下，本领域普通技术人员可以对其做出任何修改或者替换。换言之，本发明是以示例性的形式公开的，因此，不应该将示例性的实施例认为是出于限制性的目的。因此，为了确定本发明的精神，应该考虑所附的权利要求书。
如上所述的一系列处理可以通过使用硬件或者软件的配置来实现，或者通过使用硬件和软件的组合配置来实现。当通过使用软件配置来实现这些处理时，通过把记录了处理序列的程序安装到已安装到专用硬件的计算机存储器来执行该程序，或者可以通过把程序安装到能够执行各种处理的通用计算机上来执行该程序。
例如，所述程序可以被预先记录在作为记录介质的硬盘或者ROM(只读存储器)中。作为选择，所述程序可以被临时或者永久地存储(记录)在可移除的记录介质、诸如软磁盘、CD-ROM(紧致盘只读存储器)、MO(磁光)盘、DVD(数字多用途盘)、磁盘和半导体存储器中。所述可移除的记录介质可以作为所谓的封装软件来提供。
通过使用无线通信或者有线通信可以把所述程序从下载站点经由网络传输至计算机，所述网络诸如是LAN(局域网)和因特网，并且计算机可以接收所传输的程序，并且把程序安装到诸如内部硬盘之类的记录介质上，而不是如上所述那样从可移除的记录介质中安装到计算机上。
如上所述的各种处理可以按照用于进行处理的装置的处理能力来并行或者独立地执行，或者可以根据需要来执行，又或者按照本描述依照时间顺序来执行。上面的描述中的“系统”是多个装置的逻辑组合配置，并且不局限于所述组成装置处于一个主体中的情况。
如上所述，依照本发明的实施例，脸部检测处理和距离计算处理是在成像设备中执行的，而诸如脸部图标之类的距离识别信息被显示在距离指示器中对应于所计算距离的位置处，其中所述距离指示器被显示在监视器屏幕或者取景器上。摄影者可以根据距离识别信息的显示直观地认识到与人的距离，并且在通过手动聚焦操作进行的聚焦调整处理中，还可以根据距离指示器中显示的脸部图标容易地认识到与人的近似距离，借此，可以实现能够有效并且准确地执行手动聚焦控制(聚焦调整)的成像设备。
依照本发明的实施例，被配置为包围在监视器或取景器中所显示的被摄对象图像的脸部区域识别标记的设置色彩以及对应地显示在距离指示器中的诸如脸部图标之类的距离识别信息的色彩被配置为彼此相同，或者连接一条连接线来用于显示，由此，即使在多个脸部被显示在监视器中的情况下，也可以容易地认识到与目标被摄对象的距离，借此，可以实现能够对目标被摄对象准确地执行聚焦调整操作的成像设备。
本领域技术人员应该理解的是，根据设计需要以及其它因素，可以进行各种修改、组合、子组合以及改变，只要它们都包括在所附权利要求书或者其等效内容的范围内即可。

Claims (24)

1.一种成像设备，包括：
用于从输入到成像设备的输入图像中检测脸部区域的脸部检测单元；以及
控制单元，用于根据脸部检测单元检测到的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。
2.如权利要求1所述的成像设备，
其中，所述控制单元在显示单元中显示距离指示器，并且执行在距离指示器上的对应于根据脸部大小计算的距离的位置处显示距离识别信息的处理。
3.如权利要求2所述的成像设备，其中，所述距离识别信息是脸部图标。
4.如权利要求2所述的成像设备，
其中，所述控制单元执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且按照脸部区域识别标记的显示色彩和在距离指示器的所述位置处显示的距离识别信息的显示色彩对于每个脸部而言彼此相关的设置，来显示脸部区域识别标记和距离识别信息。
5.如权利要求2所述的成像设备，
其中，所述控制单元执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且显示用于把脸部区域识别标记和显示在距离指示器上的所述位置处的距离识别信息彼此相连的连接线。
6.如权利要求1所述的成像设备，
其中，所述控制单元执行如下操作的控制处理：显示根据位于显示单元中所显示的图像中的脸部附近的脸部所计算的距离识别信息。
7.如权利要求1所述的成像设备，
其中，所述控制单元在显示单元中显示距离指示器，在距离指示器中显示表明当前焦点的焦点位置信息，并且在距离指示器上的对应于根据脸部大小计算的距离的位置处显示所述距离识别信息，并且
其中所述控制单元确定根据脸部大小计算的距离是否对应于焦点位置附近的地点以及是否处于焦点位置的范围之内，并且在确定所述距离处于焦点位置上的情况下，执行表明所述脸部处于焦点位置上的显示。
8.如权利要求7所述的成像设备，
其中，所述控制单元闪烁在距离指示器上的所述位置处显示的距离识别信息，或者改变距离识别信息的显示色彩，作为表明脸部处于焦点位置上的显示。
9.如权利要求1所述的成像设备，
其中，所述控制单元执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且闪烁所述脸部区域识别标记，或者改变脸部区域识别标记的显示色彩，作为表明对应于该脸部区域识别标记的脸部处于焦点位置上的显示。
10.如权利要求1所述的成像设备，
其中，所述控制单元为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个被摄对象的距离，并且执行在显示单元中连同要显示的距离指示器一起在距离指示器上的对应于与每个被摄对象的距离的位置处显示距离识别信息的处理。
11.如权利要求1所述的成像设备，
其中，所述控制单元可以按照定义的优先级为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个被摄对象的距离，并且执行在显示单元中连同要显示的距离指示器一起在距离指示器上的对应于与每个被摄对象的距离的位置处显示距离识别信息的处理，并且
其中在已经完成在距离识别信息的期待显示位置处显示距离识别信息的情况下，所述控制单元不会再次显示距离识别信息。
12.如权利要求11所述的成像设备，其中，定义的优先级可以被如此分配，使得脸部检测单元检测到的具有较大脸部大小的脸部区域具有较高优先级，或者使得与更接近于输入到成像设备的输入图像的中心的脸部相对应的脸部区域具有较高优先级。
13.一种用于控制执行信息显示处理的成像设备的方法，所述方法包括如下步骤：
使用脸部检测单元从输入到成像设备的输入图像中检测脸部区域；并且
使用控制单元根据脸部检测单元检测的脸部大小来计算与被摄对象的距离，并且在显示单元中显示表明与所计算距离相对应的距离的距离识别信息。
14.如权利要求13所述的方法，
其中，计算所述距离并且显示所述识别信息包括：在显示单元中显示距离指示器，并且执行在距离指示器上的对应于根据脸部大小计算的距离的位置处显示距离识别信息的处理。
15.如权利要求14所述的方法，其中，所述距离识别信息是脸部图标。
16.如权利要求14所述的方法，
其中，计算所述距离并且显示所述识别信息还包括执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且按照脸部区域识别标记的显示色彩和在距离指示器的所述位置处显示的距离识别信息的显示色彩对于每个脸部而言彼此相关的设置，来显示脸部区域识别标记和距离识别信息。
17.如权利要求14所述的方法，
其中，计算所述距离并且显示所述识别信息还包括执行如下操作的控制处理：显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且显示用于把脸部区域识别标记和在距离指示器的所述位置处显示的距离识别信息彼此相连的连接线。
18.如权利要求13所述的方法，
其中，计算所述距离并且显示所述识别信息还包括执行如下操作的控制处理：显示根据在显示单元中所显示的图像中的脸部附近的脸部所计算的距离识别信息。
19.如权利要求13所述的方法，
其中，计算所述距离并且显示所述识别信息包括：在显示单元中显示距离指示器，在距离指示器中显示表明当前焦点的焦点位置信息，并且在距离指示器上的对应于根据脸部大小计算的距离的位置处显示所述距离识别信息，并且
其中所述控制单元确定根据脸部大小计算的距离是否对应于焦点位置附近的地点以及是否处于焦点位置的范围之内，并且在确定所述距离处于焦点位置上的情况下，执行表明所述脸部处于焦点位置上的显示。
20.如权利要求19所述的方法，其中，对表明所述脸部处于焦点位置上的显示的确定和执行包括：闪烁在距离指示器上的所述位置处显示的距离识别信息，或者改变距离识别信息的显示色彩，作为表明脸部处于焦点位置上的显示。
21.如权利要求13所述的方法，其中，所述控制单元显示用于识别在显示单元中所显示的图像中的脸部的脸部区域识别标记，并且闪烁所述脸部区域识别标记，或者改变脸部区域识别标记的显示色彩，作为表明对应于脸部区域识别标记的脸部处于焦点位置上的显示。
22.如权利要求13所述的方法，
还包括：通过使用控制单元，为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个被摄对象的距离，并且执行在显示单元中连同要显示的距离指示器一起在距离指示器上的对应于与每个被摄对象的距离的位置处显示距离识别信息的处理。
23.如权利要求13所述的方法，
还包括：通过使用控制单元，按照定义的优先级为脸部检测单元检测到的多个脸部区域顺序地计算对应于每一个被摄对象的距离，并且执行在显示单元中连同要显示的距离指示器一起在对应于与每个被摄对象的距离的位置处显示距离识别信息的处理，并且通过使用控制单元，在已经完成了在距离识别信息的期待显示位置处显示所述距离识别信息的情况下，不再次显示距离识别信息。
24.如权利要求23所述的方法，其中，定义的优先级可以被如此分配，使得脸部检测单元检测到的具有较大脸部大小的脸部区域具有较高优先级，或者使得与更接近于输入到成像设备的输入图像的中心的脸部相对应的脸部区域具有较高优先级。
CNB2007101102197A 2006-06-09 2007-06-08 成像设备、成像设备的控制方法以及计算机程序 Expired - Fee Related CN100545733C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006160453 2006-06-09
JP2006160453A JP4264660B2 (ja) 2006-06-09 2006-06-09 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム

Publications (2)

Publication Number Publication Date
CN101086604A CN101086604A (zh) 2007-12-12
CN100545733C true CN100545733C (zh) 2009-09-30

Family

ID=38821507

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2007101102197A Expired - Fee Related CN100545733C (zh) 2006-06-09 2007-06-08 成像设备、成像设备的控制方法以及计算机程序

Country Status (4)

Country Link
US (2) US20070285528A1 (zh)
JP (1) JP4264660B2 (zh)
CN (1) CN100545733C (zh)
TW (1) TWI389555B (zh)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4207980B2 (ja) * 2006-06-09 2009-01-14 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP2009031870A (ja) * 2007-07-24 2009-02-12 Seiko Epson Corp 被写体距離推定のための画像処理
JP2009053914A (ja) * 2007-08-27 2009-03-12 Seiko Epson Corp 画像処理装置および画像処理方法
KR101431535B1 (ko) 2007-08-30 2014-08-19 삼성전자주식회사 얼굴인식 기능을 이용한 영상 촬영 장치 및 방법
JP4851406B2 (ja) * 2007-08-31 2012-01-11 富士フイルム株式会社 多眼撮影システムにおける調整用画像表示方法および多眼撮影システム
JP4544282B2 (ja) * 2007-09-14 2010-09-15 ソニー株式会社 データ処理装置、およびデータ処理方法、並びにプログラム
JP4843002B2 (ja) 2008-01-25 2011-12-21 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4582152B2 (ja) * 2008-01-25 2010-11-17 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
CN101494735B (zh) * 2008-01-25 2012-02-15 索尼株式会社 摄像装置、摄像装置控制方法
JP5116514B2 (ja) * 2008-03-11 2013-01-09 キヤノン株式会社 撮像装置および表示制御方法
JP2009223523A (ja) * 2008-03-14 2009-10-01 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理のためのコンピュータプログラム
JP2009223580A (ja) * 2008-03-14 2009-10-01 Omron Corp 優先対象決定装置、電子機器、優先対象決定方法、プログラム、および記録媒体
US8265474B2 (en) * 2008-03-19 2012-09-11 Fujinon Corporation Autofocus system
CN103424959B (zh) * 2008-05-19 2016-12-28 佳能株式会社 图像拾取系统和透镜装置
JP5157673B2 (ja) * 2008-06-24 2013-03-06 カシオ計算機株式会社 撮像装置、及びフォーカス位置表示方法、フォーカス位置表示プログラム
JP2010021943A (ja) * 2008-07-14 2010-01-28 Sanyo Electric Co Ltd 撮像装置
CN102100062A (zh) * 2008-07-17 2011-06-15 日本电气株式会社 成像设备、成像方法和程序
KR101474304B1 (ko) 2008-07-24 2014-12-18 삼성전자주식회사 얼굴 표정을 인식하는지에 따라 얼굴 영역을 상이하게가리키는 디지털 영상 처리 장치의 제어 방법 및 상기방법을 실행하는 디지털 영상 처리 장치
JP2010041598A (ja) * 2008-08-07 2010-02-18 Canon Inc 撮像装置、撮像装置の制御方法及び制御プログラム
JP5178553B2 (ja) * 2009-01-27 2013-04-10 オリンパス株式会社 撮像装置
JP5573311B2 (ja) * 2009-05-19 2014-08-20 株式会社ニコン カメラ
JP5281972B2 (ja) * 2009-07-01 2013-09-04 オリンパス株式会社 撮像装置
JP5322817B2 (ja) * 2009-07-17 2013-10-23 富士フイルム株式会社 ３次元画像撮像装置及び３次元画像表示方法
KR101284798B1 (ko) * 2009-12-08 2013-07-10 한국전자통신연구원 단일 카메라 영상 기반의 객체 거리 및 위치 추정 장치 및 방법
CN102314043A (zh) * 2010-07-09 2012-01-11 华晶科技股份有限公司 人脸区块辅助对焦的方法
CN101908212A (zh) * 2010-07-09 2010-12-08 深圳超多维光电子有限公司 一种跟踪式立体显示设备及跟踪设备以及方法
CN102338972A (zh) * 2010-07-21 2012-02-01 华晶科技股份有限公司 多人脸区块辅助对焦的方法
US8970770B2 (en) * 2010-09-28 2015-03-03 Fotonation Limited Continuous autofocus based on face detection and tracking
CN102447644B (zh) * 2010-10-09 2017-04-19 三星电子（中国）研发中心 基于嵌入有联系人信息的图像进行通信的方法
US8659697B2 (en) 2010-11-11 2014-02-25 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
US8648959B2 (en) 2010-11-11 2014-02-11 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
CN102098524B (zh) * 2010-12-17 2011-11-16 深圳超多维光电子有限公司 跟踪式立体显示设备及跟踪式立体显示方法
US8682388B2 (en) 2010-12-31 2014-03-25 Motorola Mobility Llc Mobile device and method for proximity detection verification
US8508652B2 (en) 2011-02-03 2013-08-13 DigitalOptics Corporation Europe Limited Autofocus method
JP5603302B2 (ja) * 2011-07-21 2014-10-08 株式会社日立製作所 車両監視装置
JP5870533B2 (ja) * 2011-08-09 2016-03-01 株式会社リコー 撮像装置および撮像方法
KR101797040B1 (ko) * 2011-11-28 2017-11-13 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
US9146624B2 (en) 2012-02-08 2015-09-29 Google Technology Holdings LLC Method for managing screen orientation of a portable electronic device
US9633186B2 (en) 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
JP6286668B2 (ja) * 2013-05-22 2018-03-07 パナソニックＩｐマネジメント株式会社 撮像装置および撮像画像の表示方法
US9509913B2 (en) * 2013-06-18 2016-11-29 Olympus Corporation Image pickup apparatus, method of controlling image pickup apparatus, image pickup apparatus system, and image pickup control program stored in storage medium of image pickup apparatus
KR102101740B1 (ko) * 2013-07-08 2020-04-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN105393528B (zh) * 2013-07-22 2018-11-02 松下电器（美国）知识产权公司 信息处理装置、信息处理装置的控制方法以及记录介质
KR102066938B1 (ko) * 2013-08-20 2020-01-16 한화테크윈 주식회사 영상 처리 장치 및 방법
CN103631502B (zh) * 2013-10-31 2019-03-08 小米科技有限责任公司 显示内容调节方法、装置和电子设备
KR102360424B1 (ko) * 2014-12-24 2022-02-09 삼성전자주식회사 얼굴 검출 방법, 영상 처리 방법, 얼굴 검출 장치 및 이를 포함하는 전자 시스템
CN106060373B (zh) 2015-04-03 2019-12-20 佳能株式会社 焦点检测装置及其控制方法
WO2017006749A1 (ja) * 2015-07-03 2017-01-12 株式会社日立国際電気 画像処理装置および画像処理システム
KR102469694B1 (ko) * 2015-08-24 2022-11-23 삼성전자주식회사 카메라를 구비하는 장치에서 사진 촬영 지원 기법
CN105120165A (zh) * 2015-08-31 2015-12-02 联想(北京)有限公司 图像采集的控制方法以及装置
CN106022209B (zh) * 2016-04-29 2019-09-17 杭州华橙网络科技有限公司 一种基于人脸检测的距离估算和处理的方法及装置
CN107734384A (zh) * 2016-08-10 2018-02-23 北京光子互动科技有限公司 图像处理方法及装置
JP6752681B2 (ja) 2016-10-19 2020-09-09 キヤノン株式会社 表示制御装置、表示制御装置の制御方法及びプログラム並びに記憶媒体
CN106375671B (zh) * 2016-11-22 2020-03-06 Oppo广东移动通信有限公司 控制方法、控制装置和电子装置
EP3355100A1 (de) 2017-01-27 2018-08-01 Carl Zeiss Vision International GmbH Vorrichtung zur bestimmung von zentrierparametern für die brillenanpassung
TWI674000B (zh) * 2017-03-01 2019-10-01 坦前科技股份有限公司 具景深效果之影像追蹤系統與標記之方法
CN107247920A (zh) * 2017-05-05 2017-10-13 腾讯科技（深圳）有限公司 交互控制方法、装置和计算机可读存储介质
CN107172352B (zh) * 2017-06-16 2020-04-24 Oppo广东移动通信有限公司 对焦控制方法、装置、计算机可存储介质和移动终端
CN107749947A (zh) * 2017-09-28 2018-03-02 努比亚技术有限公司 拍照方法、移动终端及计算机可读存储介质
CN108021669B (zh) * 2017-12-05 2021-03-12 Oppo广东移动通信有限公司 图像分类方法和装置、电子设备、计算机可读存储介质
JP7023699B2 (ja) * 2017-12-14 2022-02-22 キヤノン株式会社 光学機器
CN108012122A (zh) * 2017-12-15 2018-05-08 北京奇虎科技有限公司 监控视频的处理方法、装置和服务器
CN108174108A (zh) * 2018-03-08 2018-06-15 广州三星通信技术研究有限公司 在移动终端中调整拍照效果的方法和设备以及移动终端
CN111867466A (zh) * 2018-03-22 2020-10-30 三菱电机株式会社 体格估计装置及体格估计方法
TWI739041B (zh) 2018-10-31 2021-09-11 華碩電腦股份有限公司 電子裝置以及其控制方法
CN110944114B (zh) * 2019-11-28 2021-06-08 维沃移动通信有限公司 拍照方法及电子设备
US11580657B2 (en) 2020-03-30 2023-02-14 Snap Inc. Depth estimation using biometric data
CN113115086B (zh) * 2021-04-16 2023-09-19 浙江闪链科技有限公司 基于视频视线识别对电梯媒体收视信息进行采集的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1716078A (zh) * 2004-06-03 2006-01-04 佳能株式会社 图像拾取设备和图像拾取方法
JP2006145629A (ja) * 2004-11-16 2006-06-08 Fuji Photo Film Co Ltd 撮像装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE68925013T2 (de) * 1988-09-22 1996-10-17 Asahi Optical Co Ltd Steuerungsvorrichtung für die Bildvergrösserung einer Kamera.
JPH03257440A (ja) * 1990-03-08 1991-11-15 Konica Corp 測距方向変更可能なカメラ
JP3134314B2 (ja) 1990-12-22 2001-02-13 ソニー株式会社 ビデオカメラ装置
US6049674A (en) * 1992-08-24 2000-04-11 Fuji Photo Film Co., Ltd. Self-photography apparatus for making identification photograph
JP3427410B2 (ja) 1993-02-24 2003-07-14 ソニー株式会社 光ディスク記録装置および光ディスク再生装置
JP2001086403A (ja) 1999-09-14 2001-03-30 Nikon Corp 電子スチルカメラおよび電子カメラ
US6298198B1 (en) * 2000-01-28 2001-10-02 Eastman Kodak Company Motion verifying camera and motion verifying photography method
JP2002209135A (ja) 2001-01-11 2002-07-26 Minolta Co Ltd デジタル撮像装置および記録媒体
JP4516236B2 (ja) * 2001-04-19 2010-08-04 株式会社リコー 撮像装置
JP4221944B2 (ja) 2002-04-02 2009-02-12 株式会社ジェイテクト 密封装置
JP2004094103A (ja) 2002-09-03 2004-03-25 Canon Inc 撮像装置および撮像装置の動作処理方法
JP2004133637A (ja) 2002-10-09 2004-04-30 Sony Corp 顔検出装置、顔検出方法及びプログラム、並びにロボット装置
JP2004320285A (ja) 2003-04-15 2004-11-11 Nikon Gijutsu Kobo:Kk デジタルカメラ
US20040207743A1 (en) * 2003-04-15 2004-10-21 Nikon Corporation Digital camera system
JP2005181373A (ja) 2003-12-16 2005-07-07 Victor Co Of Japan Ltd ビデオカメラ
JP4328286B2 (ja) * 2004-12-14 2009-09-09 本田技研工業株式会社 顔領域推定装置、顔領域推定方法及び顔領域推定プログラム
JP4674471B2 (ja) * 2005-01-18 2011-04-20 株式会社ニコン デジタルカメラ
JP4427515B2 (ja) * 2006-01-27 2010-03-10 富士フイルム株式会社 対象画像検出表示制御装置およびその制御方法
JP4127297B2 (ja) 2006-06-09 2008-07-30 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4172507B2 (ja) 2006-07-13 2008-10-29 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4843002B2 (ja) 2008-01-25 2011-12-21 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4582152B2 (ja) 2008-01-25 2010-11-17 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1716078A (zh) * 2004-06-03 2006-01-04 佳能株式会社 图像拾取设备和图像拾取方法
JP2006145629A (ja) * 2004-11-16 2006-06-08 Fuji Photo Film Co Ltd 撮像装置

Also Published As

Publication number Publication date
US8649574B2 (en) 2014-02-11
JP4264660B2 (ja) 2009-05-20
CN101086604A (zh) 2007-12-12
US20070285528A1 (en) 2007-12-13
JP2007329784A (ja) 2007-12-20
TWI389555B (zh) 2013-03-11
US20110134273A1 (en) 2011-06-09
TW200808043A (en) 2008-02-01

Similar Documents

Publication Publication Date Title
CN100545733C (zh) 成像设备、成像设备的控制方法以及计算机程序
CN100587538C (zh) 成像设备、成像设备的控制方法
US10334151B2 (en) Phase detection autofocus using subaperture images
US8995785B2 (en) Light-field processing and analysis, camera control, and user interfaces and interaction on light-field capture devices
CN103024265B (zh) 摄像装置和摄像装置的摄像方法
WO2016112704A1 (zh) 调节投影仪焦距的方法和装置、计算机存储介质
CN107707871B (zh) 图像处理设备、摄像设备、图像处理方法和存储介质
CN103945109B (zh) 摄像装置及其控制方法、远程控制装置及其控制方法
CN107087107A (zh) 基于双摄像头的图像处理装置及方法
KR20120022512A (ko) 전자 카메라, 화상 처리 장치 및 화상 처리 방법
JP7224840B2 (ja) 撮像装置及び撮像装置の制御方法
US20140307054A1 (en) Auto focus method and auto focus apparatus
CN104145475A (zh) 图像处理设备，图像处理方法和程序
JP6924064B2 (ja) 画像処理装置およびその制御方法、ならびに撮像装置
CN104902182A (zh) 一种实现连续自动对焦的方法和装置
CN103945112A (zh) 摄像装置及其控制方法、远程控制装置及其控制方法
CN106254754A (zh) 拍摄装置、图像处理装置、拍摄装置的控制方法
JP6700813B2 (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
CN103973965A (zh) 图像拍摄设备、图像拍摄方法以及图像拍摄程序
CN105744152A (zh) 被摄体追踪设备、摄像设备和被摄体追踪方法
JP2017040726A (ja) 撮像装置及びその制御方法
CN103988107A (zh) 成像设备、控制成像设备的方法和程序
CN104662890A (zh) 摄像装置及图像处理方法
JP4716266B2 (ja) 画像処理装置、撮像装置及びそのプログラム
JP6486453B2 (ja) 画像処理装置、画像処理方法、プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090930

Termination date: 20150608

EXPY Termination of patent right or utility model