CN101621625A - 摄像设备及其控制方法 - Google Patents
摄像设备及其控制方法 Download PDFInfo
- Publication number
- CN101621625A CN101621625A CN200910150699A CN200910150699A CN101621625A CN 101621625 A CN101621625 A CN 101621625A CN 200910150699 A CN200910150699 A CN 200910150699A CN 200910150699 A CN200910150699 A CN 200910150699A CN 101621625 A CN101621625 A CN 101621625A
- Authority
- CN
- China
- Prior art keywords
- focusing
- subject
- focusing lens
- information
- picture pick
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
- G03B13/34—Power focusing
- G03B13/36—Autofocus systems
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B3/00—Focusing arrangements of general interest for cameras, projectors or printers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
Abstract
本发明涉及一种摄像设备及其控制方法。该摄像设备能够对摄像者所期望的被摄体进行稳定快速的聚焦。在作为摄像设备的摄像机中,摄像元件拍摄由包括调焦透镜的摄像光学系统所形成的被摄体图像并从而输出视频信号。脸部检测部基于该视频信号检测脸部检测区域。AF信号处理电路生成AF评价值信号。外部测距单元生成被摄体距离信息。微计算机使用AF评价值信号的AF评价值进行TV-AF处理,并且使用被摄体距离信息进行外部测距AF处理。微计算机根据由脸部检测部的检测结果控制执行这两种调焦控制处理。
Description
技术领域
本发明涉及摄像设备、控制该摄像设备的方法和存储介质,尤其涉及被配置为检测摄像画面内的被摄体区域并基于检测结果进行调焦控制的摄像设备。
背景技术
在摄像机等摄像设备的自动调焦(AF)控制中,TV-AF方法占主导地位:在TV-AF方法中,生成作为表示使用摄像元件所生成的视频信号的锐度(对比度状态)的AF评价值信号,并且搜索作为表示该AF评价值信号呈现为最大值时的调焦透镜位置。
此外,存在具有人脸检测功能以在拍摄人物的情况下稳定地聚焦于人物被摄体的已知摄像设备。例如,已经提出了如下的摄像设备,在该摄像设备中,设置包括所识别出的脸部检测区域的焦点检测区域,然后进行焦点检测(参见例如日本特开2006-227080)。此外,已经提出了如下的摄像设备,在该摄像设备中,检测人眼,并基于所检测到的人眼进行焦点检测(参见例如日本特开2001-215403)。
AF方法包括外部测距方法(外部相位差检测方法),在外部测距方法中,测距传感器被设置为与摄像透镜分开,并且基于表示由测距传感器所检测到的被摄体距离的信息来计算调焦透镜的聚焦位置。然后,将调焦透镜移动至所计算出的聚焦位置。
在外部相位差检测方法中,将从被摄体接收到的光束(optical flux)分割成两部分,并且由一对光接收元件阵列(线传感器)分别接收分割后的光束分量。然后,检测形成在各个线传感器上的图像之间的偏移量,即,两个图像之间的相位差,并且使用三角测量技术基于该相位差来确定被摄体距离。然后,将调焦透镜移动至在该被摄体距离聚焦被摄体的位置(聚焦位置)。
AF方法包括内部(TTL)相位差检测方法。
在内部相位差检测方法中,将已通过摄像透镜的出瞳(emission pupil)的光束分割为两部分,并且由一对焦点检测传感器分别接收分割后的光束分量。然后,通过基于各自接收到的光量检测输出图像之间的偏移量,即在光束分割方向上的相对位置偏移量,来直接获得摄像透镜的焦点偏移量和焦点偏移方向,并且基于该摄像透镜的焦点偏移量和焦点偏移方向移动调焦透镜。
此外,还提出了作为内部相位差检测方法和TV-AF方法的组合的混合AF方法。在混合AF方法中,使用内部相位差检测方法将调焦透镜移动至聚焦位置附近,然后使用TV-AF方法将调焦透镜更精确地移动至聚焦位置(参见例如日本特开平05-064056(第[0008]~[0009]段,图1等))。已经提出了将外部相位差检测方法和TV-AF方法结合的其它混合AF方法(参见例如日本特开2005-234325(第[0037]~[0062]段,图3等))。
在日本特开2005-234325提出的混合AF方法中,根据TV-AF方法和外部相位差检测方法中各个信号的变化量,选择TV-AF方法和外部相位差检测方法之一用于调焦控制。
通过将混合AF方法和脸部检测功能相结合进行焦点检测,摄像设备不仅能够进行稳定的聚焦于主人物被摄体,而且还能够进行从出现图像模糊的状态开始的快速聚焦。
然而,当被摄体正在移动时,或者当出现由摄像者导致的照相机抖动时,并不总是可以通过相位差检测方法获得针对脸部检测区域的调焦透镜的聚焦位置。即使在检测到人脸之后进行稳定聚焦的情况下,有时出现以下情况:当暂时不能获得针对脸部检测区域的调焦透镜的聚焦位置、但获得了针对背景的调焦透镜的聚焦位置时,基于调焦透镜的当前位置不接近针对脸部检测区域的调焦透镜的聚焦位置的判断,将调焦透镜移动至针对背景的调焦透镜的聚焦位置。这使得摄像者感到不适。
此外,当采用外部相位差检测方法时,使用了与摄像透镜的主光学系统不同的光学系统,这引起了视差(parallax)。由于该原因,画面上检测到人脸的脸部检测区域,可能不同于通过外部相位差检测方法所确定的测距区域。在这种情况下,即使当检测到主人物被摄体的脸部并且正在进行稳定聚焦时,通过外部相位差检测方法所获得的调焦透镜的聚焦位置有时也与背景被摄体相对应。在这种情况下,判断为已出现图像模糊,并且聚焦背景被摄体,这使摄像者感到不适。此外,当主人物被摄体的脸部检测区域和通过外部相位差检测方法所确定的测距区域彼此重叠时,对主人物被摄体进行快速聚焦,这可能产生不稳定的聚焦。
此外,在从整个画面模糊的状态开始进行快速聚焦的情况下,主人物被摄体的脸部检测区域和通过外部相位差检测方法所确定的测距区域并不总是相互一致。因此,如果这两个区域相互不一致,则有时出现以下情况:首先聚焦背景,然后聚焦主人物被摄体,这使得不可能快速进行稳定聚焦。
发明内容
本发明提供一种能够在不使摄像者感到不适的情况下快速对摄像者所期望的被摄体进行稳定聚焦的摄像设备、用于控制该摄像设备的方法和存储用于实现该方法的程序的存储介质。
在本发明的第一方面中,提供了一种摄像设备,包括:图像传感器,用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号;检测单元,用于基于由所述图像传感器拍摄到的所述图像信号,检测被摄体区域;第一生成单元,用于基于由所述图像传感器拍摄到的所述图像信号,生成与所述摄像光学系统的聚焦状态相关联的第一信息;以及控制单元,用于根据所述检测单元是否检测到所述被摄体区域,对使用所述第一信息的第一调焦控制和第二调焦控制至少之一的执行进行控制。
在本发明的第二方面中,提供了一种摄像设备,包括:图像传感器,用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号;设置单元,用于设置所述图像信号的待聚焦被摄体区域;以及控制单元,用于根据由所述设置单元设置的所述待聚焦被摄体区域的位置,控制第一调焦控制和第二调焦控制的执行,其中,所述第一调焦控制基于来自所述图像传感器的输出信号且使用与所述摄像光学系统的聚焦状态相关联的第一信息,所述第二调焦控制使用与所述第一信息不同的第二信息。
在本发明的第三方面中,提供了一种摄像设备的控制方法,所述摄像设备配置有图像传感器,所述图像传感器用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号,所述控制方法包括:基于由所述图像传感器拍摄到的所述图像信号,检测是否存在被摄体区域;基于来自所述图像传感器的输出信号,生成与所述摄像光学系统的聚焦状态相关联的第一信息;以及根据是否检测到被摄体区域,对使用所述第一信息的第一调焦控制和第二调焦控制至少之一的执行进行控制。
在本发明的第四方面中,提供了一种存储计算机程序代码的存储介质,所述计算机程序代码在执行于计算机上时使所述计算机执行摄像设备的控制方法,所述摄像设备配置有用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号的图像传感器,其中,所述控制方法包括:基于由所述图像传感器拍摄到的所述图像信号,检测是否存在被摄体区域;基于来自所述图像传感器的输出信号,生成与所述摄像光学系统的聚焦状态相关联的第一信息;以及根据是否检测到被摄体区域,对使用所述第一信息的第一调焦控制和第二调焦控制至少之一的执行进行控制。
本发明实施例的期望优点在于,可以在不使摄像者不适的情况下快速对摄像者所期望的被摄体进行稳定聚焦。
根据以下结合附图进行的详细说明,本发明的其它特征和优点将变得更加清楚。
附图说明
图1是作为根据本发明第一实施例的摄像设备的摄像机的主要部分的框图。
图2是由在图1中出现的微计算机执行的调焦控制处理的流程图。
图3是在图2的调焦控制处理中的步骤中执行的TV-AF处理的流程图。
图4是图3的继续。
图5是在图2的调焦控制处理中的步骤中执行的混合AF处理的流程图。
图6是图2的调焦控制处理的第一变形例的流程图。
图7是图2的调焦控制处理的第二变形例的流程图。
图8是图2的调焦控制处理的第三变形例的流程图。
图9是图2的调焦控制处理的第四变形例的流程图。
图10是用于解释在图3的TV-AF处理中的步骤中执行的调焦透镜的微驱动的图。
图11是用于解释在图3的TV-AF处理中的步骤中执行的调焦透镜的登山驱动(hill-climb driving)的图。
图12A是示出用于解释摄像机中安装有外部测距传感器的情况的外部测距传感器与透镜之间关系的图。
图12B是示出用于解释摄像机中安装有外部测距传感器的情况的远摄侧摄像画面的图。
图12C是示出用于解释摄像机中安装有外部测距传感器的情况的广角侧摄像画面的图。
图13是用于解释在调焦透镜移动至聚焦位置期间检测到人脸的情况的图。
图14是作为本发明第二实施例的摄像设备的摄像机的主要部分的框图。
具体实施方式
现在,以下将参考示出实施例的附图来详细说明本发明。
首先,将说明根据本发明第一实施例的摄像设备。尽管在本实施例中,摄像设备是摄像机,但这并非限制性的,还可以采用数字静止照相机等其它类型的摄像设备。
图1是作为根据本实施例的摄像设备的摄像机的主要部分的框图。
参考图1,附图标记101表示第一固定透镜组;附图标记102表示在沿光轴方向移动时进行变倍或变焦操作以改变焦距的变倍透镜;并且附图标记103表示光圈(diaphragm)。此外,附图标记104表示第二固定透镜组;并且附图标记105表示焦点补偿器透镜(在下文,简称为“调焦透镜”),该焦点补偿器透镜配备有用于对由于变倍操作而引起的焦平面的偏移进行校正的功能和调焦功能两者。第一固定透镜组101、变倍透镜102、光圈103、第二固定透镜组104和调焦透镜105构成了摄像光学系统。
附图标记106表示作为由CCD传感器或CMOS传感器实现的光电转换元件的摄像元件。摄像元件106拍摄由摄像光学系统形成的被摄体图像,并输出表示所拍摄到的被摄体图像的视频信号。附图标记107表示对来自摄像元件106的输出进行采样并进行增益调节的CDS/AGC电路。
附图标记108表示照相机信号处理电路。照相机信号处理电路108对来自CDS/AGC电路107的输出信号进行各种类型的图像处理以生成视频信号。附图标记109表示由例如LCD实现的监视器。监视器109基于来自照相机信号处理电路108的视频信号显示图像。附图标记115表示记录部。在记录部115中,将来自照相机信号处理电路108的视频信号记录在磁带、光盘或半导体存储器等的记录介质上。
附图标记110表示用于移动变倍透镜102的变焦驱动源。附图标记111表示用于移动调焦透镜105的调焦驱动源。变焦驱动源110和调焦驱动源111均由步进电动机、DC电动机、振动电动机或音圈电动机等致动器形成。
附图标记112表示从CDS/AGC电路107传送来的全部像素信号的AF门,AF门仅通过用于焦点检测的区域的信号。
AF信号处理电路113从已通过AF门112的各信号中提取高频分量、亮度差分量(已通过AF门112的信号的亮度水平的最大值和最小值之间的差)等,以生成AF评价值信号。将该AF评价值信号输出至照相机/AF微计算机(在下文,简称为“微计算机”)114。AF评价值信号表示基于从摄像元件106输出的信号而生成的视频信号的锐度(对比度状态)。该视频信号的锐度根据摄像光学系统的焦点状态而变化,因此该AF评价值信号最终表示摄像光学系统的焦点状态。
微计算机114控制摄像机的整体操作,并且进行调焦控制以控制调焦驱动源111来移动调焦透镜105。微计算机114通过TV-AF方法执行调焦控制(下文中,简称为“TV-AF”)。
脸部检测部16对视频信号进行已知的人脸检测处理,以在摄像画面中检测人脸区域。检测结果发送至微计算机114。微计算机114基于检测结果向AF门112发送信息,从而将用于焦点检测的区域添加至摄像画面内包括脸部区域的位置。
应当注意,对于人脸检测处理,已经公开了例如以下的方法:基于由图像数据所表示的像素的色阶颜色(gradation color)提取浅桃红色区域、并基于该浅桃红色区域和预先设置的脸部轮廓板之间的匹配度来检测人脸的方法,以及通过使用已知的图案识别技术提取包括眼睛、鼻子和嘴的脸部特征点来进行人脸检测的方法。在本实施例中,人脸检测的方法不限于上述方法,还可以采用任何其它适当的方法。
附图标记117表示外部测距单元。外部测距单元117可以采用传统的外部相位差检测方法、超声波传感器方法和红外线传感器方法等中的任意一个。将来自外部测距单元117的测距信息和关于测距可靠性的信息捕获至微计算机114,以被转换成与调焦透镜105的聚焦位置有关的信息。对于测距可靠性,在外部相位差检测方法的情况下,例如,基于分割后的光束之间在光束分割方向上的相对位置偏移量来进行测距,因此通常将两个分割图像之间的相关性视为测距可靠性(ranging reliability)。
接着,将说明由微计算机114执行的调焦控制处理。
图2是由在图1中出现的微计算机114执行的调焦控制处理的流程图。基于微计算机114中所存储的计算机程序,按从摄像元件106读出用以生成例如一场图像的摄像信号的时间间隔,重复执行本处理。
参考图2,首先,从已对最新的视频信号执行了人脸检测的脸部检测部116,获取表示是否存在脸部检测区域的信息(步骤S201)。
然后,基于所获取的信息,判断是否可通过脸部检测部116检测到人脸区域(步骤S202)。
如果在步骤S202中判断为可通过脸部检测部116检测到人脸区域(步骤S202中为“是”),则基于摄像画面中检测到了人脸的位置处的位置信息,由微计算机114在AF门112中自动设置预定AF框(在下文,简称为“脸部框”,并且用作所附权利要求书中“第一焦点检测区域”的例子)(步骤S203)。控制该脸部框以跟随要拍摄包括该脸部检测区域的图像的被摄体。该位置信息可以是表示检测到人脸的区域的中心位置或者脸部的眼睛、鼻子或嘴等特征点的位置的信息。
然后,获取从AF信号处理电路113输出的关于脸部框的AF评价值信号(所附权利要求书中“第一焦点区域信息”的例子)(步骤S204)(所附权利要求书中“第一生成单元”的操作的例子)。
然后,使用所获取的关于脸部框的AF评价值信号的AF评价值(所附权利要求书中“第一信息”的例子),执行下文中参考图3和4所述的TV-AF处理(所附权利要求书中“第一调焦控制”的例子)(步骤S205)。换言之,测量所检测到的脸部的锐度或对比度,以寻找光学系统中的调焦透镜的聚焦(即,锐度最高的)位置。在图3和4中的TV-AF处理中,通过在监视AF评价值时驱动调焦透镜105来调节焦点,获得了聚焦状态,使得AF评价值达到最大值(锐度最高的图像)。在下文参考图3和4所述的TV-AF处理中,在实现了聚焦状态的状况下判断是否需要再驱动调焦透镜105,因此还包括用于维持聚焦状态的处理,例如,在已实现最大值并且已设置为聚焦状态之后判断是否出现AF评价值的降低等。
如果在图2的步骤S202中判断为脸部检测部116不能检测到人脸区域(步骤S202中为“否”),则在AF门112中设置中心与摄像画面的中央部分对齐的固定AF框(下文中,简称为“标准框”或“通用框”,并且用作所附权利要求书中“第二焦点检测区域”的例子)(步骤S206)。
然后,获取从AF信号处理电路113输出的关于标准框的AF评价值信号(所附权利要求书中“第二焦点区域信息”的例子)(步骤S207)。
然后,使用所获取的关于标准框的AF评价值信号的AF评价值,执行下文中参考图5说明的利用混合AF方法的调焦控制处理(下文中,简称为“混合AF处理”)(步骤S208)。在图5的混合AF处理中,使用TV-AF方法和相位差检测方法的组合来进行聚焦。
在执行步骤S205或S208之后,存储从设置在AF门112中的AF框所获取的AF评价值的历史记录作为历史记录信息(步骤S209)。
然后,存储所获取的调焦透镜105的聚焦位置的历史记录作为历史记录信息(步骤S210),之后终止本处理。
图3和4是在图2所示调焦控制处理的步骤S205中执行的TV-AF处理的流程图。在下文参考图5所述的混合AF处理的步骤S401中也执行了本处理,因此,在考虑了在图5的混合AF处理中执行TV-AF处理的情况下来解释呈现了图3和4的流程图。
参考图3,首先,判断TV-AF的模式是否是微驱动模式(步骤S301)。在下文将说明该微驱动模式。
如果在步骤S301中判断为TV-AF的模式是微驱动模式(步骤S301中为“是”),则产生调焦透镜105的微驱动(步骤S302)。在下文将参考图10来说明该微驱动。
然后,判断是否已达到聚焦状态(步骤S303)。
如果在步骤S303中判断为已达到聚焦状态(步骤S303中为“是”),则停止调焦透镜105的微驱动(步骤S 304)。
然后,将与调焦透镜105的聚焦位置相关联的AF评价值存储在微计算机114的存储器(未示出)中(步骤S305)。
然后,将当前模式改变为再驱动判断模式(步骤S306)。
然后,取消相位差使用模式(步骤S307)。该相位差使用模式用于,仅当满足特定条件时,允许通过外部测距相位差检测方法来执行调焦控制(下文中,称为“外部测距AF”),从而允许将调焦透镜105移动至外部测距聚焦位置。在步骤S307中取消相位差使用模式,这是因为作为通过TV-AF进行的聚焦判断的结果已经停止了调焦透镜105,并且需要防止可能产生不必要的视频图像模糊的、将调焦透镜105移动至通过外部测距AF获得的外部测距聚焦位置。
如果在步骤S303中判断为尚未达到聚焦状态(步骤S303中为“否”),则确定使调焦透镜105达到聚焦位置要将调焦透镜105从当前位置沿哪个方向移动(步骤S308)。
然后,判断在步骤S308中是否可确定使调焦透镜105达到聚焦位置要将调焦透镜105移动的方向(下文中,称为“聚焦方向”)(步骤S309)。
如果在步骤S309中判断为不能确定聚焦方向(步骤S309中为“否”),则处理返回步骤S308。如果判断为可确定聚焦方向(步骤S309中为“是”),则将TV-AF的模式改变为以下参考图11所述的登山驱动模式(步骤S310)。
如果在步骤S301中判断为TV-AF的模式不是微驱动模式(步骤S301中为“否”),则判断TV-AF的模式是否是登山驱动模式(步骤S311)。
如果在步骤S311中判断为TV-AF的模式是登山驱动模式(步骤S311中为“是”),则以预定速度对调焦透镜105进行登山驱动(即,对其进行聚焦位置检测控制)(步骤S312)。
然后,判断在调焦透镜105的登山驱动时AF评价值是否已超过峰值(步骤S313)。
如果在步骤S313中判断为AF评价值已超过峰值(步骤S313中为“是”),则使调焦透镜105返回至在调焦透镜105的登山驱动时AF评价值达到峰值的位置(下文中,称为“峰值位置”)(步骤S314)。
然后,判断调焦透镜105是否已返回至峰值位置(步骤S315)。
如果在步骤S315中判断为调焦透镜105未返回至峰值位置(步骤S315中为“否”),则处理返回步骤S314,而如果调焦透镜105已返回至峰值位置(步骤S315中为“是”),则将TV-AF的模式改变为微驱动模式(步骤S316)。
然后,取消相位差使用模式(步骤S317)。此时,已经确定了登山驱动模式下的聚焦位置(峰值位置),并且已将调焦透镜105移动至该聚焦位置。因此,执行步骤S317,以防止可能产生不必要的视频图像模糊的、通过外部测距AF将调焦透镜105驱动至外部测距聚焦位置。
如果在步骤S311中判断为TV-AF的模式不是登山驱动模式(步骤S311中为“否”),则处理进入图4中的步骤S318,在步骤S318中,判断当前模式是再驱动判断模式还是基于相位差的驱动模式(步骤S318)。
如果在步骤S318中判断为当前模式是再驱动判断模式,则处理进入步骤S319,在步骤S319中,通过比较存储在微计算机114的存储器(未示出)中的AF评价值与当前AF评价值,判断这两个AF评价值之间的差是否大于预定值,即判断AF评价值的变化是否大。
如果在步骤S319中判断为AF评价值的变化大(步骤S319中为“是”),则将TV-AF的模式改变为微驱动模式(步骤S320)。
如果在步骤S319中判断为AF评价值的变化小(步骤S319中为“否”),则停止驱动调焦透镜105(步骤S321)。
如果在步骤S318中判断为模式是基于相位差的驱动模式,即如果正在朝外部测距聚焦位置移动调焦透镜105,则将外部测距聚焦位置设置为目标位置,并且判断调焦透镜105是否已达到目标位置(步骤S322)。
如果在步骤S322中判断为调焦透镜105已达到目标位置(步骤S322中为“是”),则将当前模式切换至微驱动模式(步骤S323)。更具体地,将模式从外部测距AF切换至TV-AF的微驱动模式。
然后,取消基于相位差的驱动模式(步骤S324)。
在执行步骤S307、S310、S317、S320、S321或S324之后,本处理终止。
图10是用于解释在图3的TV-AF处理的步骤S302中执行的调焦透镜105的微驱动的图。
参考图10,横轴表示时间,并且纵轴表示调焦透镜105的位置。此外,图10的上部示出视频信号的垂直同步信号。
如图10所示,在时间TA捕获到与时间段A期间累积在摄像元件106中的电荷(由图10中的阴影椭圆形所表示)相关联的AF评价值EVA,并且在时间TB捕获到与时间段B期间累积在摄像元件106中的电荷相关联的AF评价值EVB。此外,在时间TC,比较AF评价值EVA和EVB,并且如果EVB>EVA,则移动微驱动的驱动(振动)中心。另一方面,如果EVA>EVB,则不移动振动中心。微驱动是用于判断使AF评价值增加的调焦透镜105的移动方向的操作,或者是用于在如上所述移动调焦透镜105时定位AF评价值变为最大的调焦透镜105的位置(峰值位置)的操作。
可以将为了基于AF评价值的变化判断是否已达到聚焦状态而对调焦透镜105的微驱动进行的控制称为聚焦检查控制。
此外,可以将为了基于AF评价值的变化判断聚焦方向而对调焦透镜105的微驱动进行的控制称为聚焦方向判断控制。
图11是用于解释在图3的TV-AF处理的步骤S311中执行的调焦透镜105的登山驱动的图。
在图11中,横轴表示调焦透镜105的位置,并且纵轴表示AF评价值。
如图11所示,在由A所示的移动中,AF评价值超过峰值然后减小,因此可以确认存在峰值位置(聚焦位置)。在这种情况下,使调焦透镜105返回至峰值位置附近,然后终止登山驱动,之后将驱动操作切换至微驱动。另一方面,在由B所示的移动中,AF评价值单调减小而没有到达峰值,因此可以判断为正沿错误方向驱动调焦透镜105。在这种情况下,反转驱动调焦透镜105的方向,然后继续登山驱动。如上所述,登山驱动是用于确定在调焦透镜105的驱动期间所获得的AF评价值变为最大的峰值位置、或者确定在移动调焦透镜105时靠近峰值位置处的位置的操作。
图5是在图2的调焦控制处理的步骤S208中执行的混合AF处理的流程图。
如图5所示,执行图3和4所示的TV-AF处理(步骤S401)。在该TV-AF处理中,通过在监视AF评价值时驱动调焦透镜105来达到聚焦状态,然后为了判断在已达到聚焦状态的状态下是否有必要再驱动调焦透镜105,判断AF评价值是否减小了。因而,TV-AF处理包括用于维持聚焦状态的处理。
然后,从外部测距单元117获取被摄体距离信息(所附权利要求书中“第二信息”的例子)(步骤S402)(所附权利要求书中“第二生成单元”的操作的例子)。
然后,基于所获取的被摄体距离信息计算外部测距聚焦位置(步骤S403)。
然后,判断当前模式是否是相位差使用模式(步骤S404)。
如果在步骤S404中判断为当前模式不是相位差使用模式(步骤S404中为“否”),则设置阈值以用于判断对比度和被摄体距离的变化是否大(步骤S405)。
然后,使用对比度信息、被摄体距离信息和阈值来判断对比度和被摄体距离的变化是否大(步骤S406)。更具体地,判断在紧前循环中获取的对比度信息与在当前循环中获取的对比度信息之间的变化是否大于相关的阈值。同时,判断在紧前循环中获取的被摄体距离信息与在当前循环中获取的被摄体距离信息之间的变化是否大于相关的阈值。
在本实施例中,微计算机114基于从AF信号处理电路113获得的已通过了AF门112的信号,确定在各像素行处亮度水平的最大值和最小值之间的差,并且使用该差的最大值作为对比度信息。代替对比度信息,可以将与对比度信息一样也表示对比度状态的AF评价值与阈值进行比较。
如果在步骤S406中判断为对比度和被摄体距离的变化大(步骤S406中为“是”),则将当前模式切换至相位差使用模式(步骤S407)。
另一方面,如果在步骤S406中判断为对比度和被摄体距离中的至少一个变化小(步骤S406中为“否”),则处理返回步骤S401。更具体地,如果对比度和被摄体距离中的至少一个变化小,则按上述用于读出摄像信号的时间间隔,仅重复执行TV-AF处理。
虽然在本实施例中判断被摄体距离信息的变化是否大于相关的阈值,但还可以将基于被摄体距离信息在步骤S403中计算出的外部测距聚焦位置的变化用于步骤S406中的判断。该判断等同于对被摄体距离信息的变化的判断。
应当注意,作为用于基于被摄体距离信息(或者外部测距聚焦位置信息)而移动调焦透镜105的第一判断步骤,即用于判断是否进行外部测距AF,执行步骤S406。简言之,将用于通过外部测距AF驱动调焦透镜105的条件(时机)限制为,不仅被摄体的对比度状态大幅变化而且被摄体距离也大幅变化的情况。
结果,当尽管被摄体距离未大幅变化并且被摄体处于聚焦的事实、但AF评价值由于被摄体的图案等的变化而大幅变化时,可以防止由于调焦透镜105的位置不必要地移动至外部测距聚焦位置而导致出现视频图像模糊,该视频图像模糊通常是在这种情况下将调焦透镜105移动至外部测距聚焦位置而引起的。
如果在步骤S404中判断为当前模式是相位差使用模式(步骤S404中为“是”),或在执行步骤S407之后,判断当前模式是否是基于相位差的驱动模式(步骤S408)。
如果在步骤S408中判断为当前模式是基于相位差的驱动模式,即如果已将模式设置为基于相位差的驱动模式并且调焦透镜105正朝外部测距聚焦位置移动(步骤S408中为“是”),则处理返回步骤S401。
另一方面,如果在步骤S408中判断为当前模式不是基于相位差的驱动模式(步骤S408中为“否”),则设置焦点偏移量阈值以用于判断是否将调焦透镜105移动至外部测距聚焦位置,即用于判断是否执行外部测距AF(步骤S409)。考虑了由外部测距单元117在检测被摄体距离时的变化而设置了该阈值。
然后,计算在步骤S403中获得的外部测距聚焦位置与调焦透镜105的当前位置之间的差(绝对值),并判断该差是否大于在步骤S409中设置的焦点偏移量阈值(步骤S410)。
作为用于判断是否进行外部测距AF的第二判断步骤,执行步骤S410。简言之,将用于通过外部测距AF驱动调焦透镜105的条件(时机)限制为,外部测距聚焦位置与调焦透镜105的当前位置之间的差大的情况。
当不满足在第二判断步骤中进行判断所使用的条件时,由于与TV-AF相比外部测距AF在聚焦精确度方面差,因此不进行外部测距AF。如果将调焦透镜105疏忽地移动至外部测距聚焦位置,则出现TV-AF和外部测距AF之间的猎振(hunting)或者视频图像的模糊。
如果在步骤S410中判断为差大于焦点偏移量阈值(步骤S410中为“是”),则将当前模式切换至基于相位差的驱动模式(步骤S411)。
然后,朝外部测距聚焦位置移动调焦透镜105(步骤S412)。
另一方面,如果在步骤S410中判断为差小于焦点偏移量阈值(步骤S410中为“否”),则取消相位差使用模式(步骤S413)。
在执行步骤S412或S413之后,本处理终止。
要理解,仅通过示例说明了混合AF处理中的AF切换,然而,在TV-AF和外部测距AF之间切换的方法不限于上述方法。
根据图2中的调焦控制处理,由于通过相位差检测方法不是始终可以获取调焦透镜105在脸部检测区域中的聚焦位置,因此根据是否已检测到人脸而选择(限制)调焦控制方法。结果,在检测到人脸之后的稳定聚焦期间,当相位差检测方法暂时不能确定针对脸部检测区域的调焦透镜105的聚焦位置,但确定了针对背景的调焦透镜105的聚焦位置时,由于判断为调焦透镜105不在脸部检测区域的聚焦位置附近,因此可以防止调焦透镜105移动至背景的聚焦位置。此外,在基于一个图像执行的脸部检测处理中,当被摄体未聚焦时脸部检测频率较低,而当调焦透镜105位于聚焦位置附近时,脸部检测频率较高。因此,当检测到人脸时,优选判断为调焦透镜105已位于聚焦位置附近,并且仅通过TV-AF方法进行稳定且高精确度的聚焦。未检测到脸部的情况与调焦透镜105不位于聚焦位置附近的情况相对应,或者与图像内不存在主人物被摄体的情况相对应。混合AF控制增加了当调焦透镜105不位于聚焦位置附近时的响应性,并且当调焦透镜105位于聚焦位置附近时,混合AF控制进行稳定且高精确度的聚焦。这使得摄像者能够以提高了的响应性进行稳定且高精确度的调焦控制以聚焦主被摄体,从而减少了摄像者的不适。
接着,将说明由微计算机114执行的调焦控制处理的变形例。
首先,将说明调焦控制处理的第一变形例。
图6是图2中调焦控制处理的第一变形例的流程图。
图6中的处理与图2中的处理基本相同。因此,利用相同的步骤编号来表示与图2中相同的步骤,并且省略对其的重复说明。在下面,将仅说明与图2中的处理不同的点。
在图6的处理中,当在图2的处理中可检测到脸部区域时,基于AF评价值判断聚焦度,由此判断调焦透镜105是否位于聚焦位置附近。
如图6所示,在执行步骤S204之后,使用所获取的关于脸部框的AF评价值信号的AF评价值进行简易的聚焦度判断(步骤S501)。在不管所拍摄到的视频图像中是否存在对比度都不能获得信号的预定高频分量时,只要可以使用所拍摄到的视频图像的亮度信号判断为出现图像模糊,步骤S501中的判断可以尽可能简单。例如,可以采用以下方法:将(各行的高频分量输出的最大值)除以(各行的亮度信号的最大值和最小值之间的差的最大值),并且由分级1~10来表示所获得的结果。
然后,基于步骤S501中的判断结果,判断摄像画面是否模糊(步骤S502)。
如果在步骤S502中判断为调焦透镜105位于聚焦位置附近,即如果摄像画面没有模糊(步骤S502中为“否”),则执行步骤S205中的TV-AF处理。
另一方面,如果在步骤S502中判断为摄像画面模糊(步骤S502中为“是”),则执行步骤S208中的混合AF处理。
通常,在检测到脸部区域的情况下,当摄像画面模糊时,可能是误检测到脸部区域。在这种情况下,聚焦被延迟了处理误检测所需要的时间。此外,当被摄体被离焦时,如果仅通过TV-AF处理进行调焦,则需要时间以到达聚焦状态,这使摄像者感到不适。因此,通过混合AF方法将调焦透镜移动至聚焦位置附近是有效的。
根据图6中的调焦控制处理,可以对摄像者所期望的被摄体进行稳定快速的聚焦。
接着,将说明调焦控制处理的第二变形例。
图7是图2中的调焦控制处理的第二变形例的流程图。
图7中的处理与图2中的处理基本相同。因此,利用相同的步骤编号来表示与图2中相同的步骤,并且省略对其的重复说明。在下面,将仅说明与图2中的处理不同的点。
在图7的处理中,当在图2的处理中可检测到脸部区域时,判断焦点检测区域和外部测距区域是否相互重叠。
如图7所示,在执行步骤S204之后,基于焦距判断外部测距区域在画面上存在于何处(步骤S601)。在步骤S601中,不仅可以基于焦距进行判断,而且可以基于由外部测距传感器所获取的被摄体距离进行判断。具体地,例如,假定摄像机被配置为当被摄体距离是3m时被摄体处于画面的中央部分,如果如图12A所示安装了相对于摄像透镜的外部测距传感器,则在图12B所示的远摄侧和图12C所示的广角侧之间,外部测距区域占据画面的大小不同,并且在广角侧上较小。此外,外部测距区域的位置根据被摄体距离是位于近距侧还是无限远侧而变化。当被摄体距离位于近距侧时,外部测距区域位于摄像画面的画面中央右侧,而当被摄体距离位于无限远侧时,外部测距区域位于摄像画面的画面中央左侧。
然后,判断在步骤S601中确定的外部测距区域与脸部检测区域是否相互重叠(步骤S602)。
如果在步骤S602中判断为外部测距区域和脸部检测区域不重叠(步骤S602中为“否”),则执行步骤S205的TV-AF处理。
另一方面,如果在步骤S602中判断为外部测距区域和脸部检测区域相互重叠时(步骤S602中为“是”),则执行步骤S208中的混合AF处理。
根据图7的调焦控制处理,当外部测距区域和脸部检测区域相互重叠时,在通过外部测距方法所确定的调焦透镜的聚焦位置中还捕获到主人物被摄体,因此通过对除主人物被摄体以外的被摄体的误测距不能聚焦背景。因此,执行混合AF控制,由此能够以提高了的响应性进行聚焦操作。另一方面,当外部测距区域和脸部检测区域没有相互重叠时,通常在通过外部测距方法所确定的调焦透镜的聚焦位置中对除主人物被摄体以外的被摄体进行测距,因此发生主人物被摄体被离焦。因此,仅通过TV-AF控制进行聚焦操作。这使得可以对摄像者所期望的被摄体进行稳定快速的聚焦。
接着,将说明调焦控制处理的第三变形例。
图8是图2中的调焦控制处理的第三变形例的流程图。
图8中的处理与图2中的处理基本相同。因此,利用相同的步骤编号来表示与图2中相同的步骤,并且省略对其的重复说明。在下面,将仅说明与图2中的处理不同的点。
在图8的处理中,当在图2的处理中可检测到脸部区域时,根据表示通过脸部检测而被检测为人脸的对象实际上是人脸的确定性(certainty)的可靠度,在TV-AF处理和混合AF处理之间选择AF控制。
参考图8,在执行步骤S204之后,不仅获取了所检测到的脸部区域在画面上的位置及其大小,而且获取了表示被检测为人脸的对象实际上是人脸的确定性的可靠度(步骤S701)(所附权利要求书中“可靠性检测单元”的操作的例子)。例如,基于脸部检测处理中图案匹配时的匹配度,或者基于脸部眼睛、嘴、鼻子、眉毛的形状等所检测到的特征点的数量,来判断可靠度。只要能够表示被检测为人脸的对象实际上是人脸的确定性,可以基于任何其它适当的要素来判断该可靠度。随着可靠度越高,所检测到的对象是人脸的可能性越高,并且随着可靠度越低,检测结果越有可能是错误的。
然后,判断可靠度是否低于预定阈值(所附权利要求书中“第一预定值”的例子)(步骤S702)。
如果在步骤S702中判断为可靠度高于预定阈值(步骤S702中为“否”),则执行步骤S205中的TV-AF处理。
另一方面,如果在步骤S702中判断为可靠度低于预定阈值(步骤S702中为“是”),则执行步骤S208中的混合AF处理。
根据图8中的调焦控制处理,当可靠度低于预定阈值时,尽管已经检测到脸部区域,但误检测到该脸部区域的可能性高,并且还存在由于摄像画面的模糊而降低可靠度的可能性。因此,通过混合AF方法将调焦透镜105的位置移动至聚焦位置附近,从而实现更可靠的脸部检测。另一方面,当可靠度高于预定阈值时,已经检测到脸部区域的可能性高,并且由于调焦透镜105位于聚焦位置附近,因此已精确地实现了检测。因此,通过TV-AF控制进行稳定且高精确度的聚焦操作。这使得可以对摄像者所期望的被摄体进行稳定快速的聚焦。
基于根据何种程度的可靠性足以避免误检测而对各种被摄体进行拍摄的结果,可以从经验上确定要与阈值进行比较的表示被检测为人脸的对象实际上是人脸的确定性的可靠度。
接着,将说明调焦控制处理的第四变形例。
图9是图2中的调焦控制处理的第四变形例的流程图。
图9中的处理与图2中的处理基本相同。因此,利用相同的步骤编号来表示与图2中相同的步骤,并且省略对其的重复说明。在下面,将仅说明与图2中的处理不同的点。
图9中的处理与图2中的处理的区别在于,在图2的处理中所包括的AF处理中,通过相位差检测方法在调焦透镜105移动至聚焦位置期间对脸部检测进行控制。
特别当如图13所示使用外部测距传感器时,如上参考图12A~12C所示,针对可在外部测距区域中测距的被摄体的调焦透镜105的聚焦位置,未必是针对主人物被摄体的调焦透镜105的聚焦位置。因此,通过相位差检测方法所确定的调焦透镜105的聚焦位置,不同于针对主人物被摄体的调焦透镜105的聚焦位置。在这种情况下,如果将调焦透镜105的位置移动至通过相位差检测方法所确定的调焦透镜105的聚焦位置,则主人物被摄体被离焦。
参考图9,在执行步骤S204之后,判断当前是否正在朝通过相位差检测方法所确定的调焦透镜105的聚焦位置移动调焦透镜105(步骤S801)。
如果在步骤S801中判断为没在移动调焦透镜105(步骤S801中为“否”),则执行步骤S205中的TV-AF处理。
另一方面,如果在步骤S801中判断为调焦透镜105正在移动(步骤S801中为“是”),则基于相位差检测的结果正从远离聚焦位置的位置开始移动的调焦透镜105,可以到达可检测到脸部的、接近主人物被摄体的聚焦位置的位置。因此,设置阈值(所附权利要求书中“第二预定值”的例子),以在检测到脸部的调焦透镜105的当前位置与调焦透镜105基于相位差检测的结果正朝着移动的聚焦位置之间进行比较(步骤S802)。可以基于焦深(focal depth)或焦距来设置该阈值。在这种情况下,焦深越小,该阈值被设置为越小,而焦深越大,该阈值被设置为越大。
然后,在检测到脸部的调焦透镜105的当前位置与调焦透镜105基于相位差检测的结果正朝着移动的聚焦位置之间进行比较,并且判断该差(所附权利要求书中的“第三信息”的例子)是否大于在步骤S802中设置的阈值(步骤S803)。
如果在步骤S803中判断为差大于阈值(步骤S803中为“是”),则通过相位差检测方法所确定的调焦透镜105的聚焦位置不同于主人物被摄体的聚焦位置,并因此聚焦背景被摄体而不聚焦主人物被摄体。结果,停止基于相位差检测的结果对调焦透镜105的位置的移动(步骤S804),然后执行步骤S205中的TV-AF处理。
如果在步骤S803中判断为差小于阈值(步骤S803中为“否”),则可判断为通过相位差检测方法所确定的调焦透镜105的聚焦位置与主人物被摄体的聚焦位置大致相同。因此,执行步骤S208中的混合AF处理。
根据图9中的调焦控制处理,可以对由摄像者所期望的被摄体进行稳定快速的聚焦。
接着,将说明根据本发明第二实施例的摄像设备。
与根据上述第一实施例的使用了外部相位差检测(外部测距)方法的摄像设备相比,根据本实施例的摄像设备的不同之处仅在于,采用了TTL(内部测距)相位差检测方法。因此,省略对相同的结构和效果的重复说明,并且以下将仅说明本实施例与第一实施例的结构和效果的不同点。
图14是作为根据本实施例的摄像设备的摄像机的主要部分的框图。
如图14所示,摄像机具有包括从被摄体侧顺序布置的第一固定透镜组101、变倍透镜102、调焦透镜105、光圈103和第二固定透镜组120的摄像光学系统。
附图标记121表示半棱镜(或分束器)。半棱镜121布置在调焦透镜105和光圈103之间。半棱镜121将从调焦透镜105指向光圈103的光束分离成下文中所述的指向摄像元件106的第一光束分量和指向AF传感器124的第二单独的光束分量。在运动图像拍摄期间光圈103持续工作,因此,位于光圈103上游,即位于接近被摄体的位置处的半棱镜121用于对入射光束进行分离。
附图标记122表示将来自半棱镜121的光束分量反射至AF传感器124的辅助反射镜,并且附图标记123表示使由辅助反射镜122所反射的光束分量在AF传感器124上形成图像的成像透镜。AF传感器124具有一对用于相位差检测AF的光接收元件阵列(线传感器)。附图标记125表示计算来自AF传感器124的两个线传感器各自的两个图像信号之间的相位差的AF电路。
微计算机114基于来自AF电路125的相位差信息(所附权利要求书中“第二信息”的例子)确定焦点偏移量和焦点偏移方向。
代替被摄体距离信息,如上所述构造成的摄像机能够通过获得焦点偏移量和焦点偏移方向而进行与在上述调焦控制处理各自中的混合AF处理类似的混合AF处理。
此外,在图9的调焦控制处理的情况下,在步骤S 802中,微计算机114基于来自AF电路125的相位差信息计算焦点偏移量和焦点偏移方向。此外,计算基于相位差检测方法的调焦透镜105的聚焦位置(内部测距聚焦位置),然后在步骤S803中,判断内部测距聚焦位置与调焦透镜105的当前位置之间的差是否大于阈值。
可执行上述调焦控制处理中所选择的处理的组合,而不将这些处理各自看作为惟一的要由摄像机执行的调焦控制处理。
如迄今为止所述,在通过组合TV-AF方法和相位差AF方法进行AF控制的情况下,以及在使用脸部检测处理对摄像者所期望的被摄体进行精确且稳定的聚焦的情况下,上述实施例提供了以下有利效果:
当检测到人脸时,仅采用了TV-AF方法。此外,当检测到人脸时,通过基于AF评价值判断聚焦度,判断测距区域和脸部检测区域是否相互一致,或者判断表示被检测为人脸的对象实际上是人脸的确定性的可靠度是否低于预定阈值,如果调焦透镜接近聚焦位置并且所检测到的脸部基本聚焦,则通过TV-AF处理来执行稳定的高精确度聚焦,由此可以对摄像者所期望的被摄体进行稳定、高精确度和快速的聚焦。此外,即使检测到了脸部并且调焦透镜接近主人物被摄体的聚焦位置时,也可抑制通过相位差AF控制对除主人物被摄体以外的被摄体执行聚焦。这使得可以对摄像者所期望的被摄体进行稳定快速的聚焦。
要理解,还可以通过以下来实现本发明:为系统或设备提供存储有实现上述实施例的任意的功能的软件的程序代码,并且使该系统或设备的计算机(或CPU或MPU)读出并执行该存储介质中所存储的程序代码。
在这种情况下,从存储介质读取的程序代码自身实现了上述实施例的任意的功能,因此,程序代码和存储了该程序代码的存储介质构成了本发明的实施例。
用于提供程序代码的存储介质的例子包括:软(floppy,注册商标)盘、硬盘、磁光盘、如CD-ROM、CD-R、CD-RW、DVD-ROM、DVD-RAM、DVD-RW或DVD+RW等的光盘、磁带、非易失性存储卡和ROM。可选地,可经由网络下载该程序。
此外,要理解,不仅可以通过执行由计算机读出的程序代码来实现上述实施例的任意的功能,而且可以通过使运行在计算机上的OS(操作系统)等基于程序代码的指令进行部分或全部实际操作来实现上述实施例的任意的功能。
此外,要理解,可以通过以下来实现上述实施例的任意的功能:将从存储介质读出的程序代码写入设置在插入至计算机中的功能扩展板上的存储器中或者设置在连接至计算机的扩展单元中的存储器中,然后使设置在功能扩展板或扩展单元中的CPU等基于程序代码的指令进行部分或全部实际操作。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改以及等同结构和功能。
本申请要求2008年7月4日提交的日本专利申请2008-175620的优先权,在此通过引用包含其全部内容。
Claims (21)
1.一种摄像设备,包括:
图像传感器,用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号;
检测单元,用于基于由所述图像传感器拍摄到的所述图像信号,检测被摄体区域;
第一生成单元,用于基于由所述图像传感器拍摄到的所述图像信号,生成与所述摄像光学系统的聚焦状态相关联的第一信息;以及
控制单元,用于根据所述检测单元是否检测到所述被摄体区域,对使用所述第一信息的第一调焦控制和第二调焦控制至少之一的执行进行控制。
2.根据权利要求1所述的摄像设备,其特征在于,当所述检测单元检测到所述被摄体区域时,所述控制单元用于限制所述第二调焦控制的执行。
3.根据权利要求1所述的摄像设备,其特征在于,还包括判断单元,所述判断单元用于基于所述第一信息判断所述调焦透镜是否位于聚焦位置附近,以及
其中,在所述检测单元检测到所述被摄体区域并且所述判断单元判断为所述调焦透镜位于聚焦位置附近的情况下,所述控制单元用于限制所述第二调焦控制的执行。
4.根据权利要求1所述的摄像设备,其特征在于,还包括:
第二传感器,用于输出在检测所述摄像光学系统的焦距时使用的信号,
第二生成单元,用于基于从所述第二传感器输出的所述信号生成在所述第二调焦控制时使用的第二信息,其中,所述第二信息是依赖于所述焦距的信息,以及
定位单元,用于定位由所述第二传感器检测的检测区域,以及
其中,在所述检测单元检测到所述被摄体区域的情况下,所述控制单元用于根据由所述定位单元定位出的所述检测区域的位置来限制所述第二调焦控制的执行。
5.根据权利要求4所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,如果所述定位单元的定位结果表示由所述检测单元检测到的所述被摄体区域和由所述定位单元定位出的所述检测区域相互不重叠,则所述控制单元用于限制所述第二调焦控制的执行。
6.根据权利要求1所述的摄像设备,其特征在于,还包括可靠性检测单元,所述可靠性检测单元用于检测表示所述被摄体区域中被检测为被摄体的对象是真实被摄体的确定性的可靠度,以及
其中,在所述检测单元检测到所述被摄体区域的情况下,所述控制单元用于根据由所述可靠性检测单元检测到的所述可靠度来限制所述第二调焦控制的执行。
7.根据权利要求6所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,如果由所述可靠性检测单元检测到的所述可靠度高于第一预定值,则所述控制单元用于限制所述第二调焦控制的执行。
8.根据权利要求1所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,如果正通过所述第二调焦控制驱动所述调焦透镜,则所述控制单元用于限制所述第二调焦控制的执行。
9.根据权利要求4所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,如果在通过所述第二调焦控制驱动所述调焦透镜的过程中,与所述第一信息和所述第二信息不同的第三信息满足特定条件,则所述控制单元用于限制所述第二调焦控制的执行。
10.根据权利要求9所述的摄像设备,其特征在于,还包括位置检测单元,所述位置检测单元用于检测所述调焦透镜的位置,以及
其中,所述第三信息表示使用所述第二信息计算出的所述调焦透镜的聚焦位置与由所述位置检测单元在所述检测单元检测到所述被摄体区域时检测到的所述调焦透镜的位置之间的差,以及
其中,所述特定条件是所述差大于第二预定值。
11.根据权利要求10所述的摄像设备,其特征在于,还包括变倍透镜,所述变倍透镜被配置为能够改变所述焦距,以及
其中,所述控制单元用于根据所述焦距设置所述第二预定值。
12.根据权利要求10所述的摄像设备,其特征在于,所述焦距越长,所述第二预定值被设置为越大。
13.根据权利要求8所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,当正通过所述第二调焦控制驱动所述调焦透镜时,所述控制单元用于停止通过所述第二调焦控制驱动所述调焦透镜。
14.根据权利要求9所述的摄像设备,其特征在于,在所述检测单元检测到所述被摄体区域的情况下,当正通过所述第二调焦控制驱动所述调焦透镜时,如果所述第三信息满足所述特定条件,则所述控制单元用于停止通过所述第二调焦控制驱动所述调焦透镜。
15.根据权利要求1所述的摄像设备,其特征在于,所述第一生成单元用于基于由所述检测单元检测到的所述被摄体区域,根据以跟随被摄体的方式移动的第一焦点检测区域生成第一焦点区域信息,并且用于根据与所述第一焦点检测区域不同的第二焦点检测区域生成第二焦点区域信息。
16.根据权利要求15所述的摄像设备,其特征在于,所述第二焦点检测区域是不跟随被摄体的固定检测区域,以及
其中,在所述检测单元已检测到所述被摄体区域的状态下,所述第一调焦控制用于基于所述第一焦点区域信息和所述第二焦点区域信息来调节焦点。
17.根据权利要求4所述的摄像设备,其特征在于,所述第二生成单元用于生成与到被摄体的距离相关联的所述第二信息。
18.根据权利要求4所述的摄像设备,其特征在于,所述第二生成单元用于生成与所述调焦透镜从聚焦位置的偏移量和所述调焦透镜朝所述聚焦位置移动的方向相关联的所述第二信息。
19.根据权利要求1所述的摄像设备,其特征在于,所述检测单元用于基于从所述图像传感器输出的所述图像信号来检测人脸区域。
20.一种摄像设备,包括:
图像传感器,用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号;
设置单元,用于设置所述图像信号的待聚焦被摄体区域;以及
控制单元,用于根据由所述设置单元设置的所述待聚焦被摄体区域的位置,控制第一调焦控制和第二调焦控制的执行,其中,所述第一调焦控制基于来自所述图像传感器的输出信号且使用与所述摄像光学系统的聚焦状态相关联的第一信息,所述第二调焦控制使用与所述第一信息不同的第二信息。
21.一种摄像设备的控制方法,所述摄像设备配置有图像传感器,所述图像传感器用于拍摄由包括调焦透镜的摄像光学系统形成的图像信号,所述控制方法包括:
基于由所述图像传感器拍摄到的所述图像信号,检测是否存在被摄体区域;
基于来自所述图像传感器的输出信号,生成与所述摄像光学系统的聚焦状态相关联的第一信息;以及
根据是否检测到被摄体区域,对使用所述第一信息的第一调焦控制和第二调焦控制至少之一的执行进行控制。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008-175620 | 2008-07-04 | ||
JP2008175620A JP2010015024A (ja) | 2008-07-04 | 2008-07-04 | 撮像装置、その制御方法、プログラム及び記憶媒体 |
JP2008175620 | 2008-07-04 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101621625A true CN101621625A (zh) | 2010-01-06 |
CN101621625B CN101621625B (zh) | 2012-01-18 |
Family
ID=41278781
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009101506999A Expired - Fee Related CN101621625B (zh) | 2008-07-04 | 2009-07-06 | 摄像设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9188837B2 (zh) |
EP (1) | EP2141537A1 (zh) |
JP (1) | JP2010015024A (zh) |
CN (1) | CN101621625B (zh) |
RU (1) | RU2456654C2 (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102236148A (zh) * | 2010-04-27 | 2011-11-09 | 佳能株式会社 | 焦点检测设备 |
CN102625038A (zh) * | 2012-02-10 | 2012-08-01 | 明基电通有限公司 | 影像撷取装置及影像处理方法 |
CN108111768A (zh) * | 2018-01-31 | 2018-06-01 | 广东欧珀移动通信有限公司 | 控制对焦的方法、装置、电子设备及计算机可读存储介质 |
CN110113531A (zh) * | 2014-05-06 | 2019-08-09 | 康耐视公司 | 减少视觉系统变焦镜头偏移量的系统和方法 |
CN110873869A (zh) * | 2018-08-31 | 2020-03-10 | 北京小米移动软件有限公司 | 接近传感器、显示屏显示体及终端 |
CN111710035A (zh) * | 2020-07-16 | 2020-09-25 | 腾讯科技(深圳)有限公司 | 人脸重建方法、装置、计算机设备及存储介质 |
CN112313941A (zh) * | 2019-09-20 | 2021-02-02 | 深圳市大疆创新科技有限公司 | 控制装置、摄像装置、控制方法以及程序 |
CN114761757A (zh) * | 2019-11-29 | 2022-07-15 | 富士胶片株式会社 | 信息处理装置、信息处理方法及程序 |
CN115242939A (zh) * | 2021-03-24 | 2022-10-25 | 维克多哈苏有限公司 | 距离检测装置以及摄像装置 |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011053255A (ja) * | 2009-08-31 | 2011-03-17 | Renesas Electronics Corp | オートフォーカス装置、オートフォーカス方法及びプログラム |
US8970770B2 (en) * | 2010-09-28 | 2015-03-03 | Fotonation Limited | Continuous autofocus based on face detection and tracking |
JP5883564B2 (ja) * | 2011-02-03 | 2016-03-15 | オリンパス株式会社 | 撮像装置 |
US9077890B2 (en) | 2011-02-24 | 2015-07-07 | Qualcomm Incorporated | Auto-focus tracking |
CN103210332B (zh) | 2011-04-18 | 2015-09-30 | 松下电器(美国)知识产权公司 | 摄像装置、摄像装置的对焦控制方法及集成电路 |
JP6029309B2 (ja) * | 2011-06-22 | 2016-11-24 | キヤノン株式会社 | 焦点検出装置 |
JP2013015559A (ja) * | 2011-06-30 | 2013-01-24 | Nikon Corp | 焦点検出装置および撮像装置 |
JP5932340B2 (ja) * | 2012-01-05 | 2016-06-08 | キヤノン株式会社 | 焦点調節装置 |
JP2014126710A (ja) * | 2012-12-26 | 2014-07-07 | Canon Inc | 自動焦点検出装置およびその制御方法、撮像装置 |
RU2543549C2 (ru) * | 2013-07-09 | 2015-03-10 | Сергей Александрович Соболев | Телевизионный многоракурсный способ получения, передачи и приема стереоинформации о наблюдаемом пространстве с его автоматическим измерением. система "третий глаз" |
KR20150043795A (ko) * | 2013-10-15 | 2015-04-23 | 삼성전자주식회사 | 영상처리장치 및 그 제어방법 |
JP6377009B2 (ja) * | 2015-04-24 | 2018-08-22 | キヤノン株式会社 | 光学系及びそれを有する撮像装置 |
US9866745B2 (en) * | 2015-07-13 | 2018-01-09 | Htc Corporation | Image capturing device and hybrid auto-focus method thereof |
JP6183482B2 (ja) * | 2016-02-17 | 2017-08-23 | 株式会社ニコン | 焦点検出装置および撮像装置 |
US10491804B2 (en) * | 2016-03-29 | 2019-11-26 | Huawei Technologies Co, Ltd. | Focus window determining method, apparatus, and device |
US9948832B2 (en) * | 2016-06-22 | 2018-04-17 | Light Labs Inc. | Methods and apparatus for synchronized image capture in a device including optical chains with different orientations |
US10757332B2 (en) * | 2018-01-12 | 2020-08-25 | Qualcomm Incorporated | Movement compensation for camera focus |
JP7277149B2 (ja) * | 2019-01-18 | 2023-05-18 | キヤノン株式会社 | 撮像装置及びその制御方法 |
CN113408545B (zh) * | 2021-06-17 | 2024-03-01 | 浙江光仑科技有限公司 | 一种基于微光学器件的端到端光电检测系统及方法 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2006A (en) * | 1841-03-16 | Clamp for crimping leather | ||
US2005A (en) * | 1841-03-16 | Improvement in the manner of constructing molds for casting butt-hinges | ||
JPH0564056A (ja) | 1991-08-30 | 1993-03-12 | Canon Inc | 合焦装置 |
JP3380963B2 (ja) * | 1993-01-25 | 2003-02-24 | ソニー株式会社 | 撮像装置 |
US7209175B1 (en) * | 1996-04-08 | 2007-04-24 | Nikon Corporation | Autofocus apparatus |
US6373481B1 (en) * | 1999-08-25 | 2002-04-16 | Intel Corporation | Method and apparatus for automatic focusing in an image capture system using symmetric FIR filters |
JP2001215403A (ja) | 2000-02-01 | 2001-08-10 | Canon Inc | 撮像装置および焦点の自動検出方法 |
US20030077264A1 (en) | 2001-09-20 | 2003-04-24 | Goodrich Laura L. | Antimicrobial blood treatment using allicin and related compounds |
JP4393034B2 (ja) * | 2002-04-11 | 2010-01-06 | キヤノン株式会社 | 自動焦点調節方法、自動焦点調節装置及び撮像装置 |
JP4525089B2 (ja) * | 2004-01-27 | 2010-08-18 | フジノン株式会社 | オートフォーカスシステム |
JP4775930B2 (ja) | 2004-02-20 | 2011-09-21 | キヤノン株式会社 | レンズ制御装置、撮像装置およびレンズ制御方法 |
US7733412B2 (en) * | 2004-06-03 | 2010-06-08 | Canon Kabushiki Kaisha | Image pickup apparatus and image pickup method |
JP2006058405A (ja) * | 2004-08-18 | 2006-03-02 | Casio Comput Co Ltd | カメラ装置、オートフォーカス制御方法 |
EP1643758B1 (en) | 2004-09-30 | 2013-06-19 | Canon Kabushiki Kaisha | Image-capturing device, image-processing device, method for controlling image-capturing device, and associated storage medium |
JP4390286B2 (ja) * | 2005-01-25 | 2009-12-24 | キヤノン株式会社 | カメラ及びその制御方法及びプログラム及び記憶媒体 |
JP4639837B2 (ja) | 2005-02-15 | 2011-02-23 | 株式会社ニコン | 電子カメラ |
US20060182433A1 (en) * | 2005-02-15 | 2006-08-17 | Nikon Corporation | Electronic camera |
JP2006254321A (ja) * | 2005-03-14 | 2006-09-21 | Matsushita Electric Ind Co Ltd | 人物追尾装置及び人物追尾プログラム |
JP4949717B2 (ja) | 2006-04-06 | 2012-06-13 | 富士フイルム株式会社 | 合焦位置決定装置及び方法 |
JP4420909B2 (ja) * | 2006-06-02 | 2010-02-24 | 富士フイルム株式会社 | 撮像装置 |
JP4110178B2 (ja) * | 2006-07-03 | 2008-07-02 | キヤノン株式会社 | 撮像装置及びその制御方法及びプログラム及び記憶媒体 |
JP5094068B2 (ja) | 2006-07-25 | 2012-12-12 | キヤノン株式会社 | 撮像装置及びフォーカス制御方法 |
JP2008026788A (ja) * | 2006-07-25 | 2008-02-07 | Canon Inc | 撮像装置及びフォーカス制御方法 |
JP4795155B2 (ja) | 2006-07-28 | 2011-10-19 | キヤノン株式会社 | 光学装置、撮像装置及びその制御方法 |
JP2008058788A (ja) * | 2006-09-01 | 2008-03-13 | Canon Inc | 焦点調節装置、撮像装置、および制御方法 |
JP5098259B2 (ja) * | 2006-09-04 | 2012-12-12 | 株式会社ニコン | カメラ |
JP2009151254A (ja) * | 2007-12-25 | 2009-07-09 | Olympus Imaging Corp | 撮影装置及び焦点検出装置 |
-
2008
- 2008-07-04 JP JP2008175620A patent/JP2010015024A/ja active Pending
-
2009
- 2009-06-30 US US12/495,166 patent/US9188837B2/en not_active Expired - Fee Related
- 2009-07-03 RU RU2009125492/28A patent/RU2456654C2/ru not_active IP Right Cessation
- 2009-07-03 EP EP09164512A patent/EP2141537A1/en not_active Withdrawn
- 2009-07-06 CN CN2009101506999A patent/CN101621625B/zh not_active Expired - Fee Related
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102236148B (zh) * | 2010-04-27 | 2013-11-06 | 佳能株式会社 | 焦点检测设备 |
CN102236148A (zh) * | 2010-04-27 | 2011-11-09 | 佳能株式会社 | 焦点检测设备 |
CN102625038A (zh) * | 2012-02-10 | 2012-08-01 | 明基电通有限公司 | 影像撷取装置及影像处理方法 |
CN110113531B (zh) * | 2014-05-06 | 2022-05-31 | 康耐视公司 | 减少视觉系统变焦镜头偏移量的系统和方法 |
CN110113531A (zh) * | 2014-05-06 | 2019-08-09 | 康耐视公司 | 减少视觉系统变焦镜头偏移量的系统和方法 |
CN108111768A (zh) * | 2018-01-31 | 2018-06-01 | 广东欧珀移动通信有限公司 | 控制对焦的方法、装置、电子设备及计算机可读存储介质 |
CN110873869B (zh) * | 2018-08-31 | 2022-03-11 | 北京小米移动软件有限公司 | 接近传感器、显示屏显示体及终端 |
CN110873869A (zh) * | 2018-08-31 | 2020-03-10 | 北京小米移动软件有限公司 | 接近传感器、显示屏显示体及终端 |
CN112313941A (zh) * | 2019-09-20 | 2021-02-02 | 深圳市大疆创新科技有限公司 | 控制装置、摄像装置、控制方法以及程序 |
CN114761757A (zh) * | 2019-11-29 | 2022-07-15 | 富士胶片株式会社 | 信息处理装置、信息处理方法及程序 |
US11877056B2 (en) | 2019-11-29 | 2024-01-16 | Fujifilm Corporation | Information processing apparatus, information processing method, and program |
CN111710035A (zh) * | 2020-07-16 | 2020-09-25 | 腾讯科技(深圳)有限公司 | 人脸重建方法、装置、计算机设备及存储介质 |
CN111710035B (zh) * | 2020-07-16 | 2023-11-07 | 腾讯科技(深圳)有限公司 | 人脸重建方法、装置、计算机设备及存储介质 |
CN115242939A (zh) * | 2021-03-24 | 2022-10-25 | 维克多哈苏有限公司 | 距离检测装置以及摄像装置 |
Also Published As
Publication number | Publication date |
---|---|
CN101621625B (zh) | 2012-01-18 |
US20100002128A1 (en) | 2010-01-07 |
EP2141537A1 (en) | 2010-01-06 |
RU2009125492A (ru) | 2011-01-10 |
JP2010015024A (ja) | 2010-01-21 |
US9188837B2 (en) | 2015-11-17 |
RU2456654C2 (ru) | 2012-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101621625B (zh) | 摄像设备 | |
EP1956831B1 (en) | Focus adjusting device, image pickup apparatus, and focus adjustment method | |
US8525919B2 (en) | Image-pickup apparatus and control method therefor which provide at least two types of focus control and which output information for causing a user to recognize the type of focus control currently performed, wherein the information is output when a first of the types of focus control is performed but not when a second of the types of focus control is performed | |
CN101126833B (zh) | 自动聚焦设备和摄像设备 | |
CN100581220C (zh) | 摄像设备和摄像设备的调焦控制方法 | |
CN103888645A (zh) | 摄像设备及用于控制摄像设备的方法 | |
JPH11190816A (ja) | 光学装置及び測距点選択方法 | |
US7519285B2 (en) | Imaging apparatus, imaging method, imaging program, and storage medium | |
US7830445B2 (en) | Image-pickup apparatus and focus control method for the same | |
EP2239936A2 (en) | Autofocus system | |
US20110052169A1 (en) | Focusing-state detection apparatus, imaging apparatus, and its control method | |
JP2007133301A (ja) | オートフォーカスカメラ | |
JP4567538B2 (ja) | 露出量算出システムならびにその制御方法およびその制御プログラム | |
JPH09211308A (ja) | 自動焦点撮像装置の被写体検出機構 | |
US7884876B2 (en) | Image-pickup apparatus, method of determining attachment of accessory device and method of distinguishing attached accessory device | |
JP5359150B2 (ja) | 撮像装置 | |
JP2010282102A (ja) | 撮像装置及び測距方法 | |
JP2010066728A (ja) | 撮像装置および撮像装置の制御方法 | |
JP5420034B2 (ja) | 撮像装置、その制御方法、プログラム及び記憶媒体 | |
JP2012108281A (ja) | 焦点検出装置および撮像装置 | |
JP2016142895A (ja) | 合焦制御装置、その制御方法、および制御プログラム、並びに撮像装置 | |
JP2001165622A (ja) | 光学装置 | |
JP2008160436A (ja) | 撮像装置 | |
JP2021071656A (ja) | 撮像装置及びその制御方法 | |
JPH0769513B2 (ja) | 焦点調節信号形成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120118 Termination date: 20190706 |