CN103167236A - 摄像设备、图像传感器和焦点检测方法 - Google Patents

摄像设备、图像传感器和焦点检测方法 Download PDF

Info

Publication number
CN103167236A
CN103167236A CN2012105390851A CN201210539085A CN103167236A CN 103167236 A CN103167236 A CN 103167236A CN 2012105390851 A CN2012105390851 A CN 2012105390851A CN 201210539085 A CN201210539085 A CN 201210539085A CN 103167236 A CN103167236 A CN 103167236A
Authority
CN
China
Prior art keywords
filter
pair
picture signal
pixel
focus detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105390851A
Other languages
English (en)
Other versions
CN103167236B (zh
Inventor
吉村勇希
福田浩一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN103167236A publication Critical patent/CN103167236A/zh
Application granted granted Critical
Publication of CN103167236B publication Critical patent/CN103167236B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14643Photodiode arrays; MOS imagers
    • H01L27/14645Colour imagers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供摄像设备、图像传感器和焦点检测方法。摄像设备基于从图像传感器获得的一对图像信号来进行焦点检测,图像传感器包括各自具有一对光电转换单元的像素,所述一对光电转换单元能够输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的一对图像信号。在焦点检测中,获取摄像光学系统的光圈值,在光圈值小于预定阈值的情况下使用由加法滤波器形成的第一滤波器来对所述一对图像信号进行滤波,以及在光圈值不小于阈值的情况下使用由加法滤波器和差分滤波器形成的第二滤波器来对所述一对图像信号进行滤波,以及基于滤波后的所述一对图像信号、利用相位差方法来进行焦点检测。

Description

摄像设备、图像传感器和焦点检测方法
技术领域
本发明涉及摄像设备、图像传感器和焦点检测方法。
背景技术
在例如日本特开平01-216306中公开了使用图像传感器的采用光瞳分割方法的传统的焦点检测设备。这种采用光瞳分割方法的焦点检测设备甚至可以在大的散焦的状态下通过仅进行一次测量来检测散焦量。因为可以进行高速焦点调节,所以该方法是有前途的。
另一方面,一般将差分滤波应用至图像信号作为提高散焦量检测的精度的技术。差分滤波的效果的例子是提高了方向检测精度。日本特开平07-318793公开了进行两种类型的差分滤波以在发生渐晕时提高散焦检测精度。
然而,在通过分割光电转换单元来分割光瞳的设备中,光轴附近的光瞳分割特性有时不足。另外,在光圈值小的情况下,图像信号的非对称性大。为此,差分滤波强调了失真,可能导致检测散焦方向困难。
发明内容
考虑以上情形做出本发明,并且本发明可以在光瞳分割性能不足并且渐晕的影响大的情况下提高光瞳分割相位差方法的焦点检测时的散焦方向检测性能。
根据本发明的第一方面,提供一种摄像设备,包括:图像传感器,其包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元用于输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的一对图像信号;第一滤波器,其由加法滤波器形成;第二滤波器,其由所述加法滤波器和差分滤波器形成;获取部件,用于获取所述摄像光学系统的光圈值;滤波部件,用于通过在所述光圈值小于预定阈值的情况下选择所述第一滤波器以及在所述光圈值不小于所述预定阈值的情况下选择所述第二滤波器来对所述一对图像信号进行滤波;以及焦点检测部件,用于基于通过所述滤波部件进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
根据本发明的第二方面,提供一种在根据上述的摄像设备中使用的图像传感器。
根据本发明的第三方面,提供一种摄像设备,包括:图像传感器,其包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元用于输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的一对图像信号;第一滤波器,其由加法滤波器形成;第二滤波器,其由所述加法滤波器和差分滤波器形成;获取部件,用于获取所述摄像光学系统的光圈值和所述摄像光学系统的光瞳距离;滤波部件,用于基于所述光圈值和所述光瞳距离来评价渐晕的影响,并且通过在渐晕的影响大于预定阈值的情况下选择所述第一滤波器以及在渐晕的影响不大于所述预定阈值的情况下选择所述第二滤波器来对所述一对图像信号进行滤波;以及焦点检测部件,用于基于通过所述滤波部件进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
根据本发明的第四方面,提供一种在根据上述的摄像设备中使用的图像传感器。
根据本发明的第五方面,提供一种焦点检测方法,用于基于从图像传感器获得的一对图像信号来进行焦点检测,所述图像传感器包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元能够输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的所述一对图像信号,所述焦点检测方法包括:获取步骤,用于获取所述摄像光学系统的光圈值;滤波步骤,用于在所述光圈值小于预定阈值的情况下使用由加法滤波器形成的第一滤波器来对所述一对图像信号进行滤波,以及在所述光圈值不小于所述预定阈值的情况下使用由所述加法滤波器和差分滤波器形成的第二滤波器来对所述一对图像信号进行滤波;以及焦点检测步骤,用于基于在所述滤波步骤中进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
根据本发明的第六方面,提供一种焦点检测方法,用于基于从图像传感器获得的一对图像信号来进行焦点检测,所述图像传感器包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元能够输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的所述一对图像信号,所述焦点检测方法包括:获取步骤,用于获取所述摄像光学系统的光圈值和光瞳距离;评价步骤,用于基于所述光圈值和所述光瞳距离来评价渐晕的影响;滤波步骤,用于在渐晕的影响大于预定阈值的情况下使用由加法滤波器形成的第一滤波器来对所述一对图像信号进行滤波,并且在渐晕的影响不大于所述预定阈值的情况下使用由所述加法滤波器和差分滤波器形成的第二滤波器来对所述一对图像信号进行滤波;以及焦点检测步骤,用于基于在所述滤波步骤中进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
通过以下(参考附图)对实施例的说明,本发明的其它特征将变得明显。
附图说明
包含在说明书中并构成说明书的一部分的附图示出本发明的实施例,并与说明书一起用于说明本发明的原理。
图1是示出根据本发明实施例的摄像设备的示意结构的框图;
图2A~2C是用于说明根据实施例的图像传感器的结构的图;
图3A和3B是用于说明根据实施例的光瞳分割的概念的图;
图4是示出沿x轴的光瞳强度分布的例子的图;
图5A和5B是示出光瞳强度分布的线图像的例子的图;
图6A和6B是示出根据实施例的滤波器的特性的图;
图7A和7B是示出滤波前后的线图像的例子的图;
图8A和8B是示出滤波前后的线图像的例子的图;
图9是示出根据实施例的焦点检测处理的流程图;以及
图10是示出根据实施例的变形例的焦点检测处理的流程图。
具体实施方式
将根据附图详细说明本发明的实施例。下述本发明的各实施例可以单独实现,或者在需要的情况下或在来自各实施例的要素或特征的组合在单个实施例中有利的情况下,可以实现为多个实施例或其特征的组合。
摄像设备的结构
图1是根据本发明实施例的摄像设备的结构图,其示出了包括图像传感器的照相机主体和拍摄光学系统集成在一个单元中的电子照相机。在图1中,第一透镜组101设置在拍摄光学系统(摄像光学系统)的前端,并且被支持以沿着光轴前后移动。光圈快门102调节其开口直径,从而调节拍摄时的光量,并且还具有在静止图像拍摄时调节曝光时间的功能。光圈快门102和第二透镜组103沿着光轴一起前后移动,并且与第一透镜组101的前后移动连动来提供变倍作用(变焦功能)。
第三透镜组105通过沿着光轴前后移动来进行焦点调节。低通光学滤波器106是用于减少所拍摄图像的伪色和摩尔纹(moiré)的光学元件。图像传感器107包括CMOS图像传感器和外围电路。使用二维单板颜色传感器作为图像传感器107,其中,在以行方向上m个像素、列方向上n个像素配置的光接收像素上设置有片上拜耳阵列原色马赛克滤波器。
镜头ROM110存储焦点检测等中所需的镜头信息,并且与CPU 121进行通信。镜头信息包括光瞳信息,其中光瞳信息包括出射光瞳距离。
变焦致动器111通过转动未示出的凸轮筒以沿着光轴前后移动第一透镜组101至第二透镜组103来进行变倍操作。光圈快门致动器112控制光圈快门102的开口直径并且调节拍摄光量,并且还控制静止图像拍摄时的曝光时间。调焦致动器114沿着光轴前后移动第三透镜组105以调节焦点。
在拍摄时使用用于照明被摄体的电子闪光灯115。优选使用氙管的闪光照明装置,但是也可以使用由连续闪光的LED构成的照明装置。AF辅助闪光单元116经由投光透镜将具有预定开口图案的掩模的图像投影到被摄体视野上以提高针对暗的被摄体和低对比度的被摄体的焦点检测能力。
CPU121以各种方式控制摄像设备内的照相机主体单元。CPU121可以例如具有计算单元、ROM、RAM、A/D转换器、D/A转换器和通信接口电路等。另外,CPU121基于ROM中存储的预定程序来驱动摄像设备具有的各种电路并且执行拍摄、显像和记录的一系列操作。在本实施例中,CPU121包括用于进行用于焦点检测的滤波的滤波单元121a、用于基于来自图像传感器107的图像信号来进行测光并且获得并输出光圈值的光圈信息输出单元121b、以及用于进行焦点检测处理的焦点检测单元121c。
电子闪光灯控制电路122与拍摄操作同步地控制电子闪光灯115的点亮。辅助闪光驱动电路123与焦点检测操作同步地控制AF辅助闪光单元116的点亮。图像传感器驱动电路124控制图像传感器107的摄像操作,并且对所获取的图像信号进行A/D转换,并将转换后的图像信号发送至CPU121。图像处理电路125对图像传感器107所获得的图像进行诸如γ转换、颜色插值、后述的插值处理和JPEG压缩等的处理。
调焦驱动电路126基于来自CPU121中的焦点检测单元121c的焦点检测结果来控制调焦致动器114的驱动以在光轴方向上往复驱动第三透镜组105,从而进行焦点调节。光圈快门驱动电路128基于从CPU121中的光圈信息输出单元121b输出的光圈值来控制光圈快门致动器112的驱动,从而驱动光圈快门102的开口。变焦驱动电路129根据用户的变焦操作来驱动变焦致动器111。
诸如LCD等的显示装置131显示与摄像设备的拍摄模式有关的信息、拍摄前的预览图像、拍摄后的确认图像以及焦点检测时的焦点状态显示图像等。操作开关组132包括电源开关、释放(拍摄触发器)开关、变焦操作开关和拍摄模式选择开关等。可拆卸闪速存储器133记录所拍摄的图像。
图像传感器的结构
图2A是用于说明包括片上拜耳阵列原色马赛克滤波器的图像传感器107的像素排列的图。这里示出了4行×4列的像素范围。像素组210包括2行×2列的像素。具有绿色(G)光谱感光度的像素210G被配置为两个对角像素。具有红色(R)光谱感光度的像素210R和具有蓝色(B)光谱感光度的像素210B被配置为两个剩余像素。图2B是包括光瞳分割用的多个光电转换单元(以下称为“子像素201a和201b”)的像素210G的放大图。像素210R和210B也各自包括两个子像素201a和201b。各像素可以从各子像素201a和201b输出通过独立地接收光所获得的图像信号。独立地获得的图像信号可以用于焦点检测,或者针对各像素相加并且用于摄像。重复配置具有上述结构的像素组210。注意,在图2A和2B中所示的结构中,所有像素包括子像素201a和201b。可代替地,可以在图像传感器107中离散地配置包括子像素的像素。
图2C是沿着图2B中的线a-a的截面图。参考图2C,附图标记200表示p型层;附图标记202表示片上微透镜;以及附图标记203表示主要使G波带的光通过的颜色滤波器。在p型层200中形成两个n型层,从而形成子像素201a和201b。子像素201a和201b相对于光轴在+x和-x方向上偏心。这允许使用一个微透镜202来分割光瞳。注意,除了具有R和B波带作为通过颜色滤波器203的光的波带以外,像素210R和210B具有相同的结构。
图像传感器的光瞳分割的概念
接着将使用作为图2B中所示的图像传感器107中包括的像素之一的像素210G作为示例、参考图3A和3B来说明光瞳分割的概念。图3A示出出射光瞳301大的情况,以及图3B示出出射光瞳301小的情况。出射光瞳301的大小根据光圈的开口大小和保持透镜的透镜框的大小等而改变。附图标记302a表示投影至出射光瞳位置的子像素201a的形状;以及附图标记302b表示投影至出射光瞳位置的子像素201b的形状。
将从在x方向上周期性排列的子像素201a获取的第一图像信号定义为图像信号ImgA(根据通过了摄像光学系统的不同出射光瞳区域的一对光束所获得的图像信号中的一个图像信号)。同样,将从在x方向上周期性排列的子像素201b获取的第二图像信号定义为图像信号ImgB(根据通过了摄像光学系统的不同出射光瞳区域的一对光束获得的图像信号中的另一个图像信号)。焦点检测单元121c可以通过使用相关计算从图像信号ImgA和图像信号ImgB之间的相对图像偏移量来计算散焦量,以计算摄像光学系统的焦点位置。基于由此获得的焦点位置来调节摄像光学系统的失焦量。注意,这里说明了与具有x方向上的亮度分布的被摄体相对应的结构。可以通过在y方向上设置相同结构来获得与具有y方向上的亮度分布的被摄体相对应的结构。
基于光圈值的线图像的不同
图4是示出光圈全开放状态下的与子像素201a和201b相对应的拍摄透镜的出射光瞳位置处的x轴上的光瞳强度分布的例子的图。关注于子像素201a的光瞳强度分布401a。由于由传感器的光瞳分割性能不足而导致衍射模糊,所以光瞳强度分布在+x侧具有缓和的曲线。另一方面,由于透镜框所导致的渐晕,在相反的-x侧形成陡峭的曲线。为此,光瞳强度分布401a相对于强度峰非对称。除了正负符号相反以外,针对光瞳强度分布401a的说明与针对子像素201b的光瞳强度分布401b的说明相同。
图5A示出如图3A的光圈值小的情况下通过在y方向上对光瞳强度分布进行积分所获得的线图像。图5B示出如图3B的光圈值大的情况下通过在y方向上对光瞳强度分布进行积分所获得的线图像。与图4所示的光瞳强度分布401a和401b一样,图5A中所示的线图像501a和501b在一侧具有由于衍射模糊所导致的缓和曲线,并且在另一侧具有由于光圈框的渐晕所导致的陡峭的曲线。另一方面,图5B所示的线图像502a和502b在两侧具有由于光圈框的渐晕所导致的陡峭的曲线。注意,图5A和5B中的虚线表示各光圈值中的强度峰的点。如从图5A和5B可以看出,光瞳强度分布相对于光轴的非对称性的程度根据光圈值而改变。光圈值越小,相对于峰的强度的非对称性越大。
用于边缘提取的滤波
图6A和6B是示出在滤波单元121a中使用的滤波器的特性的图。纵轴表示滤波器的成分,以及横轴表示滤波器的元件编号。在图6A所示的滤波器中,滤波器的元件数是3。令i是滤波器的元件编号,a[i]是元件编号i的滤波器的成分,Img[n]是滤波前的第n个图像信号,以及Img′[n]是滤波后的第n个图像信号。在这种情况下,获得
Img ′ [ n ] = Σ i = 1 3 a [ i ] · Img [ n + i - 2 ] / Σ i = 1 3 a [ i ] - - - ( 1 )
如图6A和6B所示,主要使用两种类型的滤波器来提高焦点检测精度。如图6A所示,一种类型是所有成分都具有正值的加法滤波器。加法滤波器的所有成分a[i]都具有正值。加法滤波器的目的在于诸如去除高频噪声和减少像素之间的感光度变化等的平滑化。如图7A所示,当将图6A所示的加法滤波器应用至图像信号701a和701b时,获得图像信号702a和702b。
另一种类型是图6B所示的差分滤波器,其包括正值和负值。即,在关系表达式(1)中,差分滤波器的成分a[i]取正值和负值。差分滤波器的目的在于通过去除图像信号的DC成分噪声等来提取图像的边缘并由此提高相关计算时的两个图像的一致性。如图7B所示,当将图6B所示的目的在于去除DC成分的差分滤波器应用至图像信号703a和703b时,获得图像信号704a和704b。当进行焦点检测时,通常应用加法滤波器和差分滤波器两者。
差分滤波器校正相关计算时的两个图像之间的DC成分偏移并且提高图像的一致性。然而,如果在渐晕等发生并且两个图像的非对称性大的状态下应用差分滤波器,则如图8A所示,强调了由于渐晕a和渐晕b的影响而具有不同斜率的部分(渐晕afilter、渐晕bfilter)。图8B示出在拍摄双线图的情况下的图像信号。当应用差分滤波器时,强调了渐晕a和渐晕b,并且两个图像的一致性明显降低(渐晕afilter、渐晕bfilter)。因此,在由于渐晕等的影响而使得两个图像的非对称性大的情况下,可以通过在不进行差分滤波的情况下仅进行加法滤波来提高两个图像的一致性。
在光圈值小的情况下,如参考图5A所述,两个图像的非对称性大。另一方面,由于基线长度长并且感光度低,因而DC成分噪声的影响小。因此,在光圈值小的情况下,优选应用加法滤波。相反,在光圈值大的情况下,如参考图5B所述,两个图像的非对称性比在光圈值小的情况下小。另一方面,由于基线长度短并且感光度高,因而DC成分噪声的影响大。因此,在应用成分具有正值和负值的加法滤波和差分滤波两者的情况下,两个图像的一致性高。
如上所述,两个图像的非对称性极大地取决于光圈框的大小。因此,在本实施例中,在光圈值小于预定阈值的情况下,进行加法滤波。在光圈值等于或大于预定阈值的情况下,进行加法滤波和差分滤波。以上述方式适当地选择两种类型的滤波器可以提高散焦方向检测精度。
图9是示出根据本实施例的焦点检测处理的流程图。首先,当焦点检测开始时,在步骤S11中,图像传感器107对经由摄像光学系统入射的被摄体光进行光电转换以生成图像信号并且将图像信号输出至滤波单元121a。在步骤S12中,判断光圈信息输出单元121b所获得的光圈值。结果,如果光圈值小于预定阈值(例如,F11),则处理进入步骤S13。滤波单元121a使用加法滤波器来处理图像信号。另一方面,如果光圈值等于或大于预定阈值,则处理进入步骤S14。滤波单元121a使用加法滤波器和差分滤波器来处理图像信号。在滤波之后,在步骤S15中,焦点检测单元121c使用滤波单元121a滤波后的图像信号来进行作为现有技术的相关计算,并且检测摄像光学系统的焦点。调焦致动器114基于来自焦点检测单元121c的输出来驱动第三透镜组105。至少进行一次从图像信号获取至相关计算的上述处理。最后,如果在步骤S16中判断为结束焦点检测,则焦点检测结束。
本发明与根据渐晕来选择性地使用两种类型的差分滤波器的日本特开平07-318793的方法相比的优点在于滤波单元121a在光圈值小的情况下仅使用加法滤波器来进行滤波。由于不使用差分滤波器,因而可以在不强调由于波形的非对称性所引起的失真的情况下获得精确的散焦方向检测性能。
如上所述,根据本实施例,可以在光瞳分割性能不足并且渐晕的影响大的情况下提高光瞳分割相位差方法的焦点检测时的散焦方向检测性能。
变形例
作为与上述实施例不同的滤波器选择方法,在光瞳距离和光圈值已知的情况下,可以评价拍摄透镜的渐晕的类型(例如,两个线图像中的一个线图像渐晕大,并且左右线图像之间的非对称性的程度大)。因此,可以将光瞳距离和光圈值发送至滤波单元121a,可以由滤波单元121a进行渐晕评价,并且可以根据结果来选择利用加法滤波器的处理或者利用加法滤波器和差分滤波器的处理。
图10是示出根据变形例的焦点检测处理的流程图。首先,当焦点检测开始时,在步骤S11中,图像传感器107对经由摄像光学系统入射的被摄体光进行光电转换以生成图像信号并且将图像信号输出至滤波单元121a。在步骤S22中,从光圈信息输出单元121b获取光圈值,并且从镜头ROM110获取包括光瞳距离的光瞳信息。在步骤S23中,基于所获取的光圈值和光瞳距离来评价线图像的渐晕。在步骤S24中,进行所评价的渐晕评价。结果,如果由于渐晕引起的线图像之间的非对称性的程度大于预定阈值(渐晕的影响大),则处理进入步骤S13。滤波单元121a使用加法滤波器来处理图像信号。另一方面,如果由于渐晕引起的线图像之间的非对称性的程度小于预定阈值(渐晕的影响小),则处理进入步骤S14。滤波单元121a使用加法滤波器和差分滤波器来处理图像信号。随后的处理与上述参考图9所述的处理相同,并且将省略其说明。
如上所述,根据变形例,不仅使用光圈值还使用光瞳距离来评价线图像之间的非对称性的程度。根据结果来选择利用加法滤波器的处理或者利用加法滤波器和差分滤波器的处理。这使得可以在光瞳分割性能不足并且渐晕的影响大的情况下提高光瞳分割相位差方法的焦点检测时的散焦方向检测性能。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。

Claims (8)

1.一种摄像设备,包括:
图像传感器,其包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元用于输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的一对图像信号;
第一滤波器,其由加法滤波器形成;
第二滤波器,其由所述加法滤波器和差分滤波器形成;
获取部件,用于获取所述摄像光学系统的光圈值;
滤波部件,用于通过在所述光圈值小于预定阈值的情况下选择所述第一滤波器以及在所述光圈值不小于所述预定阈值的情况下选择所述第二滤波器来对所述一对图像信号进行滤波;以及
焦点检测部件,用于基于通过所述滤波部件进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
2.根据权利要求1所述的摄像设备,其中,在所述加法滤波器中,滤波器的所有成分都具有正值,以及在所述差分滤波器中,滤波器的成分包括具有正值的成分和具有负值的成分。
3.一种在根据权利要求1所述的摄像设备中使用的图像传感器。
4.一种摄像设备,包括:
图像传感器,其包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元用于输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的一对图像信号;
第一滤波器,其由加法滤波器形成;
第二滤波器,其由所述加法滤波器和差分滤波器形成;
获取部件,用于获取所述摄像光学系统的光圈值和所述摄像光学系统的光瞳距离;
滤波部件,用于基于所述光圈值和所述光瞳距离来评价渐晕的影响,并且通过在渐晕的影响大于预定阈值的情况下选择所述第一滤波器以及在渐晕的影响不大于所述预定阈值的情况下选择所述第二滤波器来对所述一对图像信号进行滤波;以及
焦点检测部件,用于基于通过所述滤波部件进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
5.根据权利要求4所述的摄像设备,其中,在所述加法滤波器中,滤波器的所有成分具有正值,以及在所述差分滤波器中,滤波器的成分包括具有正值的成分和具有负值的成分。
6.一种在根据权利要求4所述的摄像设备中使用的图像传感器。
7.一种焦点检测方法,用于基于从图像传感器获得的一对图像信号来进行焦点检测,所述图像传感器包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元能够输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的所述一对图像信号,所述焦点检测方法包括:
获取步骤,用于获取所述摄像光学系统的光圈值;
滤波步骤,用于在所述光圈值小于预定阈值的情况下使用由加法滤波器形成的第一滤波器来对所述一对图像信号进行滤波,以及在所述光圈值不小于所述预定阈值的情况下使用由所述加法滤波器和差分滤波器形成的第二滤波器来对所述一对图像信号进行滤波;以及
焦点检测步骤,用于基于在所述滤波步骤中进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
8.一种焦点检测方法,用于基于从图像传感器获得的一对图像信号来进行焦点检测,所述图像传感器包括多个二维配置的像素,所述多个二维配置的像素包括各自具有一对光电转换单元的像素,所述一对光电转换单元能够输出通过独立地接收通过了摄像光学系统的不同出射光瞳区域的一对光束而获得的所述一对图像信号,所述焦点检测方法包括:
获取步骤,用于获取所述摄像光学系统的光圈值和光瞳距离;
评价步骤,用于基于所述光圈值和所述光瞳距离来评价渐晕的影响;
滤波步骤,用于在渐晕的影响大于预定阈值的情况下使用由加法滤波器形成的第一滤波器来对所述一对图像信号进行滤波,并且在渐晕的影响不大于所述预定阈值的情况下使用由所述加法滤波器和差分滤波器形成的第二滤波器来对所述一对图像信号进行滤波;以及
焦点检测步骤,用于基于在所述滤波步骤中进行了滤波的所述一对图像信号、利用相位差方法来进行焦点检测。
CN201210539085.1A 2011-12-13 2012-12-13 摄像设备、图像传感器和焦点检测方法 Active CN103167236B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-272746 2011-12-13
JP2011272746A JP5898481B2 (ja) 2011-12-13 2011-12-13 撮像装置及び焦点検出方法

Publications (2)

Publication Number Publication Date
CN103167236A true CN103167236A (zh) 2013-06-19
CN103167236B CN103167236B (zh) 2016-09-28

Family

ID=47471499

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210539085.1A Active CN103167236B (zh) 2011-12-13 2012-12-13 摄像设备、图像传感器和焦点检测方法

Country Status (4)

Country Link
US (1) US8854529B2 (zh)
EP (1) EP2605511B1 (zh)
JP (1) JP5898481B2 (zh)
CN (1) CN103167236B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104662397A (zh) * 2013-07-31 2015-05-27 松下电器(美国)知识产权公司 传感器组件
CN107003500A (zh) * 2014-11-18 2017-08-01 富士胶片株式会社 对焦控制装置、对焦控制方法、对焦控制程序、镜头装置、摄像装置
CN107370939A (zh) * 2016-05-12 2017-11-21 佳能株式会社 焦点检测装置及其控制方法、摄像设备和计算机可读介质

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6014452B2 (ja) * 2012-10-16 2016-10-25 キヤノン株式会社 焦点検出装置及びそれを有するレンズ装置及び撮像装置
JP5911445B2 (ja) * 2013-03-19 2016-04-27 キヤノン株式会社 撮像装置及びその制御方法
JP6334847B2 (ja) * 2013-04-17 2018-05-30 キヤノン株式会社 焦点検出装置、焦点検出方法およびプログラム、並びに撮像装置
JP6312487B2 (ja) 2014-03-26 2018-04-18 キヤノン株式会社 画像処理装置及びその制御方法、並びに、プログラム
JP6335589B2 (ja) 2014-03-31 2018-05-30 キヤノン株式会社 距離検出装置、撮像装置、距離検出方法及び視差量検出装置
JP6587380B2 (ja) 2014-09-12 2019-10-09 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法、プログラム、記憶媒体
JP2016070994A (ja) * 2014-09-26 2016-05-09 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
KR102363433B1 (ko) 2015-01-15 2022-02-16 삼성전자주식회사 이미지 센서
JP6506560B2 (ja) * 2015-01-20 2019-04-24 キヤノン株式会社 フォーカス制御装置及びその方法、プログラム、記憶媒体
KR102481481B1 (ko) 2015-12-15 2022-12-26 삼성전자 주식회사 이미지 센서 및 그 제조 방법
JP6727814B2 (ja) * 2016-01-14 2020-07-22 キヤノン株式会社 撮像装置、撮像装置の制御方法およびプログラム
JP7199845B2 (ja) * 2018-06-19 2023-01-06 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4731864A (en) * 1986-02-21 1988-03-15 Rca Corporation Photographic camera simulation systems working from computer memory
US5083150A (en) * 1989-03-03 1992-01-21 Olympus Optical Co., Ltd. Automatic focusing apparatus
JPH05127074A (ja) * 1991-11-01 1993-05-25 Canon Inc 焦点検出装置
US20040207747A1 (en) * 1998-03-10 2004-10-21 Masato Ikeda Focus sensing apparatus, focus sensing method using phase-differential detection and computer-readable storage medium therefor
US20090256952A1 (en) * 2008-04-11 2009-10-15 Nikon Corporation Correlation calculation method, correlation calculation device, focus detection device and image-capturing apparatus

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4975726A (en) * 1987-11-25 1990-12-04 Matsushita Electric Industrial Co., Ltd. Automatic focusing apparatus
JPH01216306A (ja) 1988-02-24 1989-08-30 Canon Inc 撮像手段を有した焦点検出装置
US5193124A (en) * 1989-06-29 1993-03-09 The Research Foundation Of State University Of New York Computational methods and electronic camera apparatus for determining distance of objects, rapid autofocusing, and obtaining improved focus images
JP3103587B2 (ja) * 1990-04-25 2000-10-30 オリンパス光学工業株式会社 自動合焦装置
US5367153A (en) * 1991-11-01 1994-11-22 Canon Kabushiki Kaisha Apparatus for detecting the focus adjusting state of an objective lens by performing filter processing
JP2715958B2 (ja) * 1995-03-03 1998-02-18 株式会社ニコン 焦点検出装置
US5874994A (en) * 1995-06-30 1999-02-23 Eastman Kodak Company Filter employing arithmetic operations for an electronic sychronized digital camera
JP2000207549A (ja) * 1999-01-11 2000-07-28 Olympus Optical Co Ltd 画像処理装置
JP4217415B2 (ja) * 2001-04-04 2009-02-04 オリンパス株式会社 電子撮像装置
JP4565784B2 (ja) * 2001-09-20 2010-10-20 Hoya株式会社 デジタルカメラ
US7099555B2 (en) * 2003-08-20 2006-08-29 Canon Kabushiki Kaisha Light amount adjusting apparatus, optical equipment, optical filter and image-taking apparatus
FR2881011B1 (fr) * 2005-01-19 2007-06-29 Dxo Labs Sa Procede de realisation d'un appareil de capture et/ou restitution d'images et appareil obtenu par ce procede
JP5535476B2 (ja) * 2005-03-07 2014-07-02 ディーエックスオー ラブズ カラーデジタル画像を使用する、機能すなわち鮮鋭度の変更を活動化する方法
JP5157084B2 (ja) * 2006-05-17 2013-03-06 株式会社ニコン 相関演算装置、焦点検出装置および撮像装置
US7859588B2 (en) * 2007-03-09 2010-12-28 Eastman Kodak Company Method and apparatus for operating a dual lens camera to augment an image
US7729602B2 (en) * 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
EP2490060B1 (en) * 2009-10-13 2018-06-13 Canon Kabushiki Kaisha Focusing device and focusing method
US8411982B2 (en) * 2010-02-16 2013-04-02 Dialogic Corporation Universal blurriness measurement approach for digital imagery
US8494301B2 (en) * 2010-09-16 2013-07-23 Eastman Kodak Company Refocusing images using scene captured images
US10032254B2 (en) * 2010-09-28 2018-07-24 MAX-PLANCK-Gesellschaft zur Förderung der Wissenschaften e.V. Method and device for recovering a digital image from a sequence of observed digital images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4731864A (en) * 1986-02-21 1988-03-15 Rca Corporation Photographic camera simulation systems working from computer memory
US5083150A (en) * 1989-03-03 1992-01-21 Olympus Optical Co., Ltd. Automatic focusing apparatus
JPH05127074A (ja) * 1991-11-01 1993-05-25 Canon Inc 焦点検出装置
US20040207747A1 (en) * 1998-03-10 2004-10-21 Masato Ikeda Focus sensing apparatus, focus sensing method using phase-differential detection and computer-readable storage medium therefor
US20090256952A1 (en) * 2008-04-11 2009-10-15 Nikon Corporation Correlation calculation method, correlation calculation device, focus detection device and image-capturing apparatus

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104662397A (zh) * 2013-07-31 2015-05-27 松下电器(美国)知识产权公司 传感器组件
CN107003500A (zh) * 2014-11-18 2017-08-01 富士胶片株式会社 对焦控制装置、对焦控制方法、对焦控制程序、镜头装置、摄像装置
CN107003500B (zh) * 2014-11-18 2019-11-12 富士胶片株式会社 对焦控制装置、对焦控制方法、镜头装置、摄像装置
CN107370939A (zh) * 2016-05-12 2017-11-21 佳能株式会社 焦点检测装置及其控制方法、摄像设备和计算机可读介质
US10523860B2 (en) 2016-05-12 2019-12-31 Canon Kabushiki Kaisha Focus detection device, control method thereof, and image capture apparatus
CN107370939B (zh) * 2016-05-12 2020-06-12 佳能株式会社 焦点检测装置及其控制方法、摄像设备和计算机可读介质

Also Published As

Publication number Publication date
EP2605511A2 (en) 2013-06-19
JP5898481B2 (ja) 2016-04-06
CN103167236B (zh) 2016-09-28
JP2013125095A (ja) 2013-06-24
US8854529B2 (en) 2014-10-07
EP2605511A3 (en) 2013-11-06
US20130147998A1 (en) 2013-06-13
EP2605511B1 (en) 2017-04-05

Similar Documents

Publication Publication Date Title
CN103167236A (zh) 摄像设备、图像传感器和焦点检测方法
EP1975695B1 (en) Focus detection device, focusing state detection method and imaging apparatus
JP5552214B2 (ja) 焦点検出装置
US8488956B2 (en) Focus adjusting apparatus and focus adjusting method
US8872962B2 (en) Focus detection apparatus and image pickup apparatus
CN103152520B (zh) 图像捕获设备和方法
US9967450B2 (en) Focus adjustment device and imaging apparatus
US9204033B2 (en) Image capture apparatus
JP5676962B2 (ja) 焦点検出装置および撮像装置
US9083879B2 (en) Focus detection apparatus, control method thereof, and image pickup apparatus
JP4992481B2 (ja) 焦点検出装置および撮像装置
JP6239855B2 (ja) 焦点調節装置、焦点調節方法およびプログラム、並びに撮像装置
US10321044B2 (en) Image pickup apparatus and image pickup system with point image intensity distribution calculation
CN103917906A (zh) 摄像装置
JP2014056014A (ja) 撮像素子および撮像装置
CN110312957B (zh) 焦点检测设备、焦点检测方法和计算机可读存储介质
JP6862102B2 (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体
JP2014130231A (ja) 撮像装置、その制御方法、および制御プログラム
JP6576155B2 (ja) 画像処理装置、撮像装置、および画像表示システム
JP7005209B2 (ja) 撮像装置、及びその制御方法
JP2019219499A (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant