CN102811312A - 摄像设备及其控制方法 - Google Patents

摄像设备及其控制方法 Download PDF

Info

Publication number
CN102811312A
CN102811312A CN2012101776580A CN201210177658A CN102811312A CN 102811312 A CN102811312 A CN 102811312A CN 2012101776580 A CN2012101776580 A CN 2012101776580A CN 201210177658 A CN201210177658 A CN 201210177658A CN 102811312 A CN102811312 A CN 102811312A
Authority
CN
China
Prior art keywords
image
photograph
pixel
taken
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012101776580A
Other languages
English (en)
Other versions
CN102811312B (zh
Inventor
长谷川玲治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN102811312A publication Critical patent/CN102811312A/zh
Application granted granted Critical
Publication of CN102811312B publication Critical patent/CN102811312B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663—Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本发明涉及摄像设备及其控制方法。摄像设备(201)包括：第一图像传感器(211)和第二图像传感器(208)，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统(303)，用于通过使用来自第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统(303)，用于通过使用来自第二图像传感器的输出而生成第二图像，并且通过使用第二图像来进行测光和被摄体搜索，其中，检测系统允许选择是否在测光中对来自第二图像传感器的输出进行像素合并，以及检测系统在不进行像素合并时进行被摄体搜索，以及在进行像素合并时限制被摄体搜索。

Description

摄像设备及其控制方法
技术领域
本发明涉及诸如单镜头反光数字照相机等的摄像设备，尤其涉及具有在所生成的图像中检测被摄体的功能的摄像设备。
背景技术
包括上述摄像设备的摄像设备设置有摄像系统，摄像系统用于通过使用来自主图像传感器的输出而生成显示/记录图像，其中主图像传感器对要拍摄的被摄体图像、即来自摄像光学系统的光所形成的光学图像进行光电转换。此外，一些这种摄像设备设置有检测系统，检测系统用于通过使用来自副图像传感器的输出而生成测光图像，其中副图像传感器对来自摄像光学系统的光所形成的测光被摄体图像进行光电转换。设备从测光图像获取被摄体亮度信息。
单镜头反光数字照相机具有以下镜，该镜可以从摄像光学系统的光路移进和移出，以在将来自摄像光学系统的光引导至检测系统的状态和将来自摄像光学系统的光引导至摄像系统的状态之间切换镜的状态。
具有这种检测系统的摄像设备可以使用能够生成具有能够实现被摄体识别的特定水平的分辨率的测光图像的图像传感器作为副图像传感器。使用这种测光图像不仅可以进行测光，还可以搜索(跟踪)位置和亮度变化的诸如人脸等的特定被摄体，并控制诸如自动适当曝光设置和摄像光学系统的聚焦状态的自动维持。
然而，增大副图像传感器的分辨率(像素数)使得副图像传感器的各像素的动态范围变窄，这可能使得不能针对具有各种亮度的被摄体进行良好的测光。因此，为了扩大特别在低亮度侧的动态范围，提出所谓的像素合并(pixel binning)，即，将多个像素的输出值相加并将结果作为一个像素的输出值。日本特开2006-217355公开了一种根据被摄体的移动速度和亮度(光强度)来选择是否进行这种像素合并的摄像设备。
然而，像素合并减小了利用副图像传感器生成的测光图像的分辨率，这可能减小使用这种测光图像的被摄体搜索的精度，从而可能导致摄像设备针对错误的被摄体进行上述控制。由此，可能生成过曝光图像、曝光不足的图像或散焦图像来作为显示/记录图像。
发明内容
本发明提供一种在利用副图像传感器进行测光和被摄体搜索的情况下能够扩大测光的动态范围并维持被摄体搜索的精度的摄像设备及其控制方法。
本发明的一个方面提供一种摄像设备，包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，其中，所述检测系统允许选择是否在测光中对来自所述第二图像传感器的输出进行像素合并，以及所述检测系统在不进行所述像素合并时进行被摄体搜索，以及在进行所述像素合并时限制被摄体搜索。
本发明的另一个方面提供一种摄像设备，包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，其中，所述检测系统允许选择是否在测光中对来自所述第二图像传感器的输出进行像素合并，以及所述检测系统在不进行所述像素合并时允许使用被摄体搜索的结果，以及在进行所述像素合并时限制使用被摄体搜索的结果。
本发明的又一个方面提供一种摄像设备的控制方法，所述摄像设备包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，所述控制方法包括以下步骤：选择是否在测光中对来自所述第二图像传感器的输出进行像素合并；在不进行所述像素合并时进行被摄体搜索；以及在进行所述像素合并时限制被摄体搜索。
本发明的另一个方面提供一种摄像设备的控制方法，所述摄像设备包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，所述控制方法包括以下步骤：选择是否在测光中对来自所述第二图像传感器的输出进行像素合并；在不进行所述像素合并时允许使用被摄体搜索的结果；以及在进行所述像素合并时限制使用被摄体搜索的结果。
通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1是示出作为本发明实施例的摄像设备的光学结构的截面图。
图2是示出本实施例的摄像设备的电子结构的框图。
图3示出本实施例中的摄像设备中的焦点检测区域的配置。
图4是示出本实施例的摄像设备中的连续摄像时所进行的被摄体跟踪处理的流程图。
图5示出本实施例的摄像设备中的被摄体跟踪处理的例子。
图6示出本实施例的摄像设备中的AE传感器的像素配置和像素合并的例子。
具体实施方式
以下将参考附图说明本发明的典型实施例。
图1主要示出由单镜头反光数字照相机主体(以下简称为“照相机”)201和能够可拆卸地(即，可更换地)安装至照相机201的可更换镜头202构成的照相机系统的光学结构。照相机201和可更换镜头202经由卡口触点(未示出)相互电连接。
可更换镜头202内部容纳有由诸如变倍透镜和固定透镜等的透镜(未示出)、调焦透镜213和光圈214构成的摄像光学系统。摄像光学系统使得来自被摄体(未示出)的光形成作为光学图像的被摄体图像。可更换镜头202根据经由卡口触点从照相机201发送的控制信号，移动调焦透镜213来进行调焦，并改变光圈214的光圈直径来控制进入照相机201的光量。
在照相机201中，附图标记203表示由半透半反镜构成的主镜。主镜203在光学取景器观察状态下被设置在摄像光学系统的光路内(以下将该状态称为“镜向下状态”)，以将来自摄像光学系统的光的一部分反射至取景器光学系统。将透过主镜203的光经由设置在主镜203的背面的副镜204的反射而引导至AF单元(焦点检测单元)205。
另一方面，在摄像状态下，主镜203和副镜204退避至摄像光学系统的光路外部(以下将该状态称为“镜向上状态”)。在该镜向上状态下，来自摄像光学系统的光向快门210和作为第一图像传感器的摄像用的图像传感器(以下称为“主图像传感器”)211行进。在镜向上状态下，打开快门210以允许利用来自摄像光学系统的光对主图像传感器211进行曝光。主图像传感器211对在其摄像面上形成的被摄体图像进行光电转换。
通过使用来自主图像传感器211的输出信号来生成作为第一图像的显示/记录图像数据(以下称为“主图像”)。在照相机201的背面上设置的监视器212上显示主图像作为电子取景器图像，并将主图像记录至存储介质(未示出)。
AF传感器205设置有多个传感器组，传感器组各自包括用于使来自副镜204的光形成成对的被摄体图像(以下称为“两个图像”)的二次成像光学系统和用于对该两个图像进行光电转换的成对的光接收元件(线传感器)，其中多个传感器组分别与摄像画面中设置的多个焦点检测区域相对应。图3示出摄像画面(摄像范围)中的多个焦点检测区域的配置。通过计算从成对的线传感器输出的成对的图像信号之间的相位差，能够检测摄像光学系统的焦点状态(散焦量)。然后，通过将调焦透镜213移动至基于散焦量所计算出的聚焦位置，能够获取摄像光学系统的聚焦状态。由此，可以进行利用包括焦点状态检测、聚焦位置计算和调焦透镜驱动的相位差检测方法的自动调焦(AF)。
在图1中，附图标记206表示设置在摄像光学系统的预定成像面的聚焦板。利用主镜203所反射的光在聚焦板206上形成被摄体图像。附图标记207表示用于反射来自聚焦板206的光以改变其光路的五棱镜。聚焦板206、五棱镜207和目镜透镜(未示出)构成取景器光学系统。附图标记209表示目镜，用户可以经由目镜透镜和五棱镜207观察聚焦板206上形成的被摄体图像。
附图标记208表示AE传感器，其设置有作为第二图像传感器的测光用的图像传感器(以下称为“副图像传感器”)。副图像传感器对从聚焦板206上形成的被摄体图像经由五棱镜207所入射的光进行光电转换(即，对被摄体图像进行光电转换)。可以根据使用来自副图像传感器的输出信号所生成的图像数据检测被摄体亮度，该图像数据是第二图像并且以下称为“副图像”。
副图像传感器具有能够对图3所示的整个摄像范围中包括的被摄体图像进行光电转换的大小的摄像面。副图像传感器的摄像面设置有如图6的上部所示配置的多个像素(R像素、G像素和B像素)。R像素、G像素和B像素被分别配置以形成各自在垂直方向上延伸的R像素列、G像素列和B像素列。在水平方向上以重复的方式顺次配置R像素列、G像素列和B像素列。在本实施例中将这种像素配置称为“带状配置”。
在该副图像传感器中，如图6的下部所示，在R像素列、G像素列和B像素列的各列中在垂直方向上邻接的五个像素构成一个像素组。在本实施例中将生成这种像素组称为“像素合并”，其将一个像素组中的五个像素的输出值(像素值)相加以生成一个像素输出。像素合并将副图像的垂直分辨率减小至不进行像素合并的情况下的1/5，但是特别针对低亮度被摄体提供了测光用的宽的动态范围。本实施例可以选择是否对副图像传感器的输出(信号读出)进行像素合并。
此外，本实施例通过使用分辨率与图6的上部所示的大量R、G、B像素相对应的副图像来进行被摄体搜索(或被摄体检测)。被摄体搜索是通过使用模式匹配等的图像处理方法来检测副图像中存在的诸如人脸等的特定被摄体的处理。可以通过跟踪通过被摄体搜索所检测到的特定被摄体的亮度和位置来进行测光和AF。将通过使用被摄体搜索的结果而跟踪特定被摄体来进行测光或AF的这种处理称为“被摄体跟踪处理”。
在以下说明中，将通过使用主图像传感器211来获取主图像的照相机201的一系列操作称为“主摄像”，以及将通过使用副图像传感器(AE传感器208)来获取副图像的照相机201的一系列操作称为“副摄像”。
图2示出上述照相机系统的电子结构。在图2中，与图1所示的组件相同的组件由与图1中使用的附图标记相同的附图标记表示。
在照相机201中，操作检测器308检测诸如按钮、开关和拨盘等的操作构件的用户操作以将响应于用户操作的操作信号输出至系统控制器303。例如，操作检测器308响应于释放按钮(未示出)的半按下操作来将SW1信号输出至系统控制器303，以及响应于释放按钮的全按下操作来将SW2信号输出至系统控制器303。
在以下说明中，将保持用户对释放按钮的半按下操作的状态称为“SW1保持状态”，将保持用户对释放按钮的全按下操作的状态称为“SW2保持状态”。此外，操作检测器308响应于释放按钮的半按下操作的取消来将SW1取消信号输出至系统控制器303，以及响应于释放按钮的全按下操作的取消来将SW2取消信号输出至系统控制器303。
镜控制器309响应于来自系统控制器303的镜驱动信号来控制主镜203和副镜204的上述移动。系统控制器303在从操作检测器308接收到SW1信号时并且在连续摄像期间的镜向下状态下，读取来自与AF传感器205的各焦点检测区域相对应的成对的线传感器的成对的图像信号。然后，系统控制器303选择要进行AF的一个(或多个)焦点检测区域，并计算所选择的焦点检测区域中的聚焦位置(调焦透镜移动量)。之后，系统控制器303将与所计算出的调焦透镜移动量相对应的透镜驱动信号发送至可更换镜头202中设置的透镜驱动器314。透镜驱动器314基于透镜驱动信号来移动调焦透镜213以获取聚焦状态。
系统控制器303对来自主图像传感器211的输出信号进行各种图像生成处理以生成主图像，并将主图像输出至显示控制器312和图像记录器311。显示控制器312将主图像转换成适于显示的图像，并在监视器212上显示转换后的图像。图像记录器311将主图像转换成适于记录的图像，并将转换后的图像记录至诸如半导体存储器或光盘等的记录介质。系统控制器303与主图像传感器211一起构成摄像系统。
主存储器307存储系统控制器303进行各种计算所需的数据和系统控制器303的各种操作所需的计算机程序。
此外，系统控制器303对来自AE传感器208(即，副图像传感器)的输出信号进行各种图像生成处理以生成副图像，并通过使用副图像来检测被摄体亮度。系统控制器303与AE传感器208(即，副图像传感器)一起构成检测系统。
系统控制器303基于所检测到的被摄体亮度来进行用于适当曝光的曝光计算(光圈值和快门速度的计算)。然后，系统控制器303将与所计算出的光圈值相对应的光圈驱动信号输出至可更换镜头202中设置的光圈控制器313，并将与所计算出的快门速度相对应的快门驱动信号输出至照相机201中设置的快门控制器310。光圈控制器313基于光圈驱动信号来驱动光圈214以改变光圈直径。系统控制器303使得在主摄像时，快门210以与快门驱动信号相对应的快门速度打开和关闭。
此外，系统控制器303在连续摄像时进行副图像中的被摄体搜索以检测副图像中的特定被摄体的位置。然后，系统控制器303从图3所示的多个焦点检测区域中选择与特定被摄体的位置相对应的一个(或多个)焦点检测区域。之后，系统控制器303基于所选择的焦点检测区域中的聚焦位置的计算结果来将透镜驱动信号发送至透镜驱动器314。
接着，将参考图4所示的流程图说明照相机系统在连续摄像时所进行的处理(控制方法)。主要由系统控制器303根据主存储器307中存储的计算机程序来进行该连续摄像处理。在SW1保持状态下进行步骤S401~S405的处理作为连续摄像准备操作。此外，在根据释放按钮的全按下操作所设置的SW2保持状态下进行步骤S406的随后处理作为连续摄像操作。在连续摄像操作中，进行包括副图像中的被摄体搜索的被摄体跟踪处理。
系统控制器303响应于根据用户对释放按钮的半按下操作的、从操作检测器308至系统控制器303的SW1信号的输入来开始处理。
在步骤S401中，系统控制器303根据操作检测器308所检测到的用户的选择操作或经由计算机程序所进行的选择处理来从图3所示的多个焦点检测区域中选择一个(或多个)焦点检测区域。然后，系统控制器303基于从AF传感器205输出的在所选择的焦点检测区域中获得的成对的图像信号来计算聚焦位置。
接着，在步骤S402中，系统控制器303通过使用来自AE传感器208的输出信号来生成副图像。然后，系统控制器303从副图像中提取以步骤S401中所选择的焦点检测区域为中心的预定区域(以下称为“图像提取区域”)中的部分图像，然后将所提取的图像和图像提取区域的中心坐标存储至主存储器307。在以下说明中，将主存储器307中存储的所提取的图像称为“模板图像”，以及将图像提取区域的中心坐标称为“先前被摄体位置”。此外，在假定被摄体亮度足够高从而此时在副图像传感器中不进行像素合并的情况下进行以下说明。
接着，在步骤S403中，系统控制器303通过使用步骤S402中生成的副图像来进行曝光计算。
接着，在步骤S404中，系统控制器303将与AE传感器208的像素合并状态有关的信息存储至主存储器307，其中像素合并状态示出在从AE传感器208的信号读出时是否进行像素合并。如上所述，此时不进行像素合并，使得系统控制器303将示出未进行像素合并的信息存储至主存储器307。以下将在进行像素合并的情况下从AE传感器208的信号读出称为“像素合并读出”，以及将在不进行像素合并的情况下从AE传感器208的信号读出称为“非像素合并读出”。
接着，在步骤S405中，系统控制器303基于步骤S401中获得的聚焦位置计算结果和步骤S403中获得的曝光计算结果来将透镜驱动信号和光圈驱动信号分别发送至透镜驱动器314和光圈控制器313。由此，可以获得摄像光学系统的聚焦状态，并可以控制光圈214的光圈直径。
接着，在步骤S406中，系统控制器303等待用户对释放按钮的全按下操作或用户的半按下操作的取消。然后，如果从操作检测器308输入SW2信号或SW1取消信号，则系统控制器303进入步骤S407。
在步骤S407中，系统控制器303判断步骤S406中输入的信号是SW1取消信号还是SW2信号。如果所输入的信号是SW1取消信号，则系统控制器303结束连续摄像处理。如果所输入的信号是SW2信号，则系统控制器303进入步骤S408以开始连续摄像操作。
在步骤S408中，系统控制器303将镜驱动信号输出至镜控制器309以使其将主镜203和副镜204驱动至镜向上状态。
接着，在步骤S409中，系统控制器303将快门驱动信号输出至快门控制器310以使其打开和关闭快门210，从而曝光主图像传感器211。然后，系统控制器303通过使用来自主图像传感器211的输出信号来生成主图像，以如上所述在监视器212上显示主图像并将主图像记录至图像记录器311中的记录介质。
接着，在步骤S410中，系统控制器303将镜驱动信号输出至镜控制器309以使其将主镜203和副镜204驱动至镜向下状态。
接着，在步骤S411中，系统控制器303判断是否取消了SW2保持状态(即，是否接收到SW2取消信号)。如果接收到SW2取消信号，则系统控制器303结束连续摄像处理。如果未接收到SW2取消信号，则系统控制器303进入步骤S412。
在步骤S412中，系统控制器303从主存储器307读取与先前流程中的AE传感器208的像素合并状态有关的信息(即，进行了像素合并读出还是非像素合并读出)。如果进行了非像素合并读出，则系统控制器303进入步骤S413。如果进行了像素合并读出，则系统控制器303进入步骤S415。
在步骤S413中，系统控制器303基于当前被摄体亮度(测光结果)来判断是否在当前流程中进行从AE传感器208的像素合并读出，即，是否从非像素合并读出切换至像素合并读出。如果从非像素合并读出切换至像素合并读出，则系统控制器303进入步骤S414。如果不从非像素合并读出切换至像素合并读出(即，不切换)，则系统控制器303进入步骤S417以继续从先前流程延续的被摄体跟踪处理。
在步骤S414中，因为切换至从AE传感器208的像素合并读出，这使得不能以良好的精度进行副图像中的被摄体搜索，所以系统控制器303限制(在本实施例中为中止)被摄体搜索和被摄体跟踪处理。然后，系统控制器303进入步骤S418。
另一方面，在步骤S415中，系统控制器303基于当前被摄体亮度(测光结果)来判断是否在当前流程中进行从AE传感器208的非像素合并读出，即，是否从像素合并读出切换至非像素合并读出。如果从像素合并读出切换至非像素合并读出，则系统控制器303进入步骤S416。如果不从像素合并读出切换至非像素合并读出(即，不切换)，则系统控制器303进入步骤S418。
在步骤S416中，因为切换至从AE传感器208的非像素合并读出，这使得能够以良好的精度进行副图像中的被摄体搜索，所以系统控制器303开始被摄体搜索。具体地，系统控制器303通过使用来自AE传感器208的输出信号来生成副图像，并从主存储器307读取模板图像。然后，系统控制器303检查相关性，即，进行这两个图像之间的模板模式匹配(以下简称为“匹配”)以在副图像中检测与模板图像中包括的特定被摄体相同的被摄体的位置。
当进行匹配时，系统控制器303首先从主存储器307读取先前被摄体位置。然后，作为第一步骤，系统控制器303将副图像中的用于进行匹配的区域限制为作为以先前被摄体位置为中心的窄的区域的第一被摄体搜索区域，如图5所示。作为例子的图5所示的第一被摄体搜索区域包括垂直方向上的三个焦点检测区域和水平方向上的五个焦点检测区域。
当未在第一被摄体搜索区域中检测到特定被摄体时，作为第二步骤，系统控制器303将副图像中的用于进行匹配的区域扩大至作为几乎与副图像的整个图像区域相对应的宽的区域的第二被摄体搜索区域。
另外，系统控制器303在将副图像和模板图像的分辨率减小至其初始分辨率的1/2之后进行匹配。在第一被摄体搜索区域内进行匹配并通过使用1/2分辨率图像，这使得能够以高速进行匹配，并且能够缩短包括随后的调焦透镜驱动的被摄体跟踪处理所需的时间。在由此开始被摄体搜索之后，系统控制器303进入步骤S417以开始被摄体跟踪处理。在以下说明中，将步骤S416中从AE传感器208的输出信号生成的1/2分辨率副图像称为“第一副图像”。
此外，系统控制器303从副图像中提取以在副图像中所检测到的被摄体的位置为中心的另一图像提取区域中的另一部分图像作为新的模板图像，并将新的模板图像和该另一图像提取区域的中心坐标存储至主存储器307。这些存储的新的模板图像和图像提取区域的中心坐标用于下一被摄体搜索。然后，系统控制器303进入步骤S418。
在步骤S418中，系统控制器303将当前流程中AE传感器208的像素合并状态存储至主存储器307。
接着，在步骤S419中，系统控制器303通过使用来自AE传感器208的输出信号来生成另一1/2分辨率副图像(以下称为“第二副图像”)，并将第二副图像与步骤S416中生成的第一副图像相加以生成新的副图像(以下称为“合成副图像”)。然后，系统控制器303使用合成副图像进行曝光计算，并且存储计算结果。与使用第一副图像进行曝光计算的情况相比，使用合成副图像进行曝光计算能够减小噪声并增大像素值，并且能够实现稳定的曝光计算。
接着，在步骤S420中，如果在被摄体跟踪处理期间，则系统控制器303进行与副图像中检测到的特定被摄体(实际上与模板图像中的特定被摄体相同的被摄体)的位置相对应的焦点检测区域中的焦点检测和聚焦位置计算。如果不在被摄体跟踪处理期间，则系统控制器303进行步骤S401中所选择的焦点检测区域中的焦点状态检测和聚焦位置计算。
接着，在步骤S421中，系统控制器303基于步骤S420中获得的聚焦位置计算结果和步骤S419中获得的曝光计算结果，来将透镜驱动信号和光圈驱动信号分别发送至透镜驱动器314和光圈控制器313。由此，摄像光学系统变得聚焦，并且控制了光圈214的光圈直径。之后，系统控制器303返回至步骤S408。
如上所述，本实施例进行从副图像传感器的信号读出中的像素合并，从而可以利用扩大的动态范围实现了良好的测光。另一方面，本实施例不进行从副图像传感器的信号读出中的像素合并，以生成具有足够的分辨率的副图像，这使得可以进行副图像中的高精度的被摄体搜索，从而实现良好的被摄体跟踪处理。
此外，本实施例在进行被摄体搜索的状态下响应于像素合并的选择(切换至像素合并读出)来自动中止(或中断)被摄体搜索，并且响应于返回(切换)至像素合并读出来自动重新开始被摄体搜索。因此，本实施例可以在不存在诸如切换操作等的用户负担的情况下进行良好的测光和高精度的被摄体搜索之间的自动切换。
尽管以上实施例说明了仅使用最初存储的一个图像作为用于在副图像中通过模板模式匹配来进行被摄体搜索的模板图像，但可选实施例可以使用通过从连续摄像期间所新生成的图像剪切包括特定被摄体的部分图像而生成的另一模板图像。
此外，除了使用以上实施例中说明的利用模板模式匹配来进行被摄体搜索以外，另一可选实施例可以使用颜色信息或面部检测信息来进行被摄体搜索。另外，又一可选实施例可以使用利用光流的移动被摄体分析或者使用利用边缘检测的场景识别技术来进行被摄体搜索。
尽管以上实施例说明了在不进行像素合并时进行被摄体搜索和在进行像素合并时中止(中断或禁止)被摄体搜索的情况，但是可以利用不仅包括中止、还包括在特定条件下不进行中止而是允许被摄体搜索的限制方法中的任意一个来在进行像素合并时限制被摄体搜索。例如，在通过像素合并而生成的副图像中的特定被摄体的大小是能利用良好的精度进行检测的大小的条件下，可以允许被摄体搜索。此外，在根据像素合并的程度来缩小模板图像的条件下，可以允许被摄体搜索。另外，在利用用于检测特定被摄体的颜色(颜色跟踪)的方法来进行被摄体搜索的条件下，可以允许被摄体搜索。在该情况下，可以将模板图像涂上特定被摄体的颜色。
此外，当进行像素合并时，在不限制(诸如中止)被摄体搜索的情况下，尽管可以与不进行像素合并的情况一样允许被摄体搜索，但是限制搜索结果的使用(禁止使用，或由于被摄体搜索的低可靠性而仅允许暂时使用)。在该情况下的系统控制器303的处理(控制方法)基本与图4的流程图所示的相同。然而，将图4中的步骤S414从“限制被摄体搜索和被摄体跟踪处理”改变为“限制被摄体搜索和被摄体跟踪处理的结果的使用”。
而且，在该情况下，可以在允许被摄体搜索的结果的使用的状态下响应于切换至像素合并读出来限制被摄体搜索的结果的使用，并且可以响应于返回至像素合并读出来再次允许被摄体搜索的结果的使用。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。
本申请要求于2011年5月31日提交的日本专利申请2011-122786的优先权，其全部内容通过引用包含于此。

Claims (6)

1.一种摄像设备，包括：
第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；
摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及
检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，
其中，所述检测系统允许选择是否在测光中对来自所述第二图像传感器的输出进行像素合并，以及
所述检测系统在不进行所述像素合并时进行被摄体搜索，以及在进行所述像素合并时限制被摄体搜索。
2.根据权利要求1所述的摄像设备，其特征在于，所述检测系统响应于在进行被摄体搜索的状态下选择进行所述像素合并来限制被摄体搜索，以及响应于返回至不进行所述像素合并的状态来重新开始被摄体搜索。
3.一种摄像设备，包括：
第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；
摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及
检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，
其中，所述检测系统允许选择是否在测光中对来自所述第二图像传感器的输出进行像素合并，以及
所述检测系统在不进行所述像素合并时允许使用被摄体搜索的结果，以及在进行所述像素合并时限制使用被摄体搜索的结果。
4.根据权利要求3所述的摄像设备，其特征在于，所述检测系统响应于在允许使用被摄体搜索的结果的状态下选择进行所述像素合并来限制使用被摄体搜索的结果，以及响应于返回至不进行所述像素合并的状态来再次允许使用被摄体搜索的结果。
5.一种摄像设备的控制方法，所述摄像设备包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，所述控制方法包括以下步骤：
选择是否在测光中对来自所述第二图像传感器的输出进行像素合并；
在不进行所述像素合并时进行被摄体搜索；以及
在进行所述像素合并时限制被摄体搜索。
6.一种摄像设备的控制方法，所述摄像设备包括：第一图像传感器和第二图像传感器，均用于对来自摄像光学系统的光所形成的光学图像进行光电转换；摄像系统，用于通过使用来自所述第一图像传感器的输出而生成显示和记录用的第一图像；以及检测系统，用于通过使用来自所述第二图像传感器的输出而生成第二图像，并且通过使用所述第二图像来进行测光和被摄体搜索，所述控制方法包括以下步骤：
选择是否在测光中对来自所述第二图像传感器的输出进行像素合并；
在不进行所述像素合并时允许使用被摄体搜索的结果；以及
在进行所述像素合并时限制使用被摄体搜索的结果。
CN201210177658.0A 2011-05-31 2012-05-31 摄像设备及其控制方法 Expired - Fee Related CN102811312B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011122786A JP5843486B2 (ja) 2011-05-31 2011-05-31 撮像装置およびその制御方法
JP2011-122786 2011-05-31

Publications (2)

Publication Number Publication Date
CN102811312A true CN102811312A (zh) 2012-12-05
CN102811312B CN102811312B (zh) 2016-06-29

Family

ID=47234880

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210177658.0A Expired - Fee Related CN102811312B (zh) 2011-05-31 2012-05-31 摄像设备及其控制方法

Country Status (3)

Country Link
US (1) US9380200B2 (zh)
JP (1) JP5843486B2 (zh)
CN (1) CN102811312B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109417603A (zh) * 2016-04-26 2019-03-01 新成像技术公司 具有两个传感器的成像器系统
WO2021184362A1 (zh) * 2020-03-20 2021-09-23 华为技术有限公司 一种摄像装置

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10136079B2 (en) 2013-10-31 2018-11-20 Ricoh Imaging Company, Ltd. Method and apparatus for imaging an object
JP6229436B2 (ja) * 2013-10-31 2017-11-15 リコーイメージング株式会社 撮像装置および撮像方法
JP6277675B2 (ja) * 2013-10-31 2018-02-14 リコーイメージング株式会社 撮像装置および撮像方法
CN106454289B (zh) 2016-11-29 2018-01-23 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
CN106504218B (zh) 2016-11-29 2019-03-12 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
CN106454054B (zh) 2016-11-29 2019-03-19 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
CN106341670B (zh) 2016-11-29 2017-09-22 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
US10872261B2 (en) * 2018-12-03 2020-12-22 Qualcomm Incorporated Dynamic binning of sensor pixels

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217355A (ja) * 2005-02-04 2006-08-17 Olympus Corp 撮像装置
CN1893562A (zh) * 2005-06-27 2007-01-10 奥林巴斯映像株式会社 数字照相机
CN1928887A (zh) * 2005-09-05 2007-03-14 佳能株式会社 图像处理装置及其方法
CN101378487A (zh) * 2007-08-28 2009-03-04 联想(北京)有限公司 一种互动节目信息处理装置及方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7298412B2 (en) * 2001-09-18 2007-11-20 Ricoh Company, Limited Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
JP2007057704A (ja) * 2005-08-23 2007-03-08 Nikon Corp カメラ
JP4639406B2 (ja) * 2006-03-31 2011-02-23 富士フイルム株式会社 撮像装置
JP4751776B2 (ja) * 2006-06-19 2011-08-17 オリンパスイメージング株式会社 電子撮像装置及び個人特定システム
JP2008109485A (ja) * 2006-10-26 2008-05-08 Fujifilm Corp 撮像装置及び撮像制御方法
JP4732311B2 (ja) * 2006-11-29 2011-07-27 キヤノン株式会社 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP5082631B2 (ja) * 2007-07-06 2012-11-28 株式会社ニコン 撮影装置
JP4894661B2 (ja) * 2007-07-24 2012-03-14 株式会社ニコン 撮像装置
JP5129683B2 (ja) * 2008-08-05 2013-01-30 キヤノン株式会社 撮像装置及びその制御方法
JP5402019B2 (ja) * 2009-01-26 2014-01-29 株式会社ニコン 撮像装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217355A (ja) * 2005-02-04 2006-08-17 Olympus Corp 撮像装置
CN1893562A (zh) * 2005-06-27 2007-01-10 奥林巴斯映像株式会社 数字照相机
CN1928887A (zh) * 2005-09-05 2007-03-14 佳能株式会社 图像处理装置及其方法
CN101378487A (zh) * 2007-08-28 2009-03-04 联想(北京)有限公司 一种互动节目信息处理装置及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109417603A (zh) * 2016-04-26 2019-03-01 新成像技术公司 具有两个传感器的成像器系统
WO2021184362A1 (zh) * 2020-03-20 2021-09-23 华为技术有限公司 一种摄像装置

Also Published As

Publication number Publication date
CN102811312B (zh) 2016-06-29
JP2012253462A (ja) 2012-12-20
US20120307098A1 (en) 2012-12-06
JP5843486B2 (ja) 2016-01-13
US9380200B2 (en) 2016-06-28

Similar Documents

Publication Publication Date Title
CN102811312A (zh) 摄像设备及其控制方法
US8184192B2 (en) Imaging apparatus that performs an object region detection processing and method for controlling the imaging apparatus
US8670064B2 (en) Image capturing apparatus and control method therefor
JP6702746B2 (ja) 撮像装置、その制御方法、プログラム及び記憶媒体
JP5950664B2 (ja) 撮像装置およびその制御方法
US20180332214A1 (en) Image processing apparatus, image capturing apparatus, image processing method, and storage medium
JP2012015642A (ja) 撮像装置
JP6525809B2 (ja) 焦点検出装置及びその制御方法
JP5787634B2 (ja) 撮像装置
JP2009042621A (ja) 撮像装置および撮像方法
JP5043567B2 (ja) 撮像装置
JP2009272799A (ja) 撮像装置、及び、プログラム
US11985420B2 (en) Image processing device, image processing method, program, and imaging device
KR20120068696A (ko) 촬상 장치 및 촬상 방법
JP7500844B2 (ja) 画像処理装置およびその制御方法
JP5425271B2 (ja) 撮像装置およびその制御方法
JP7224811B2 (ja) 画像処理装置および電子機器
JP2018207455A (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP7242278B2 (ja) 画像処理装置およびその制御方法
JP7022534B2 (ja) 画像処理装置および画像処理方法
JP6622555B2 (ja) 画像処理装置及びその制御方法、撮像装置、プログラム、記憶媒体
JP2021125741A (ja) 画像処理装置およびその制御方法、撮像装置、プログラム
CN117434519A (zh) 测距装置及其控制方法和计算机可读介质
JP2021015162A (ja) 画像処理装置及びその制御方法
JP2005326506A (ja) 焦点検出装置及び焦点検出方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160629

CF01 Termination of patent right due to non-payment of annual fee