CN107666571A - 具有焦点检测技术的摄像设备及其控制方法和存储介质 - Google Patents
具有焦点检测技术的摄像设备及其控制方法和存储介质 Download PDFInfo
- Publication number
- CN107666571A CN107666571A CN201710631807.9A CN201710631807A CN107666571A CN 107666571 A CN107666571 A CN 107666571A CN 201710631807 A CN201710631807 A CN 201710631807A CN 107666571 A CN107666571 A CN 107666571A
- Authority
- CN
- China
- Prior art keywords
- signal
- picture
- picture signal
- image
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
- H04N25/673—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction by using reference sources
- H04N25/674—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction by using reference sources based on the scene itself, e.g. defocusing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Automatic Focus Adjustment (AREA)
- Focusing (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本发明提供具有焦点检测技术的摄像设备及其控制方法和存储介质。摄像设备在进行像面相位差AF时消除基于从摄像器件的以二维形式在行和列上配置的光瞳分割像素所读出的信号所获得的相位差信息中的噪声差。从各光瞳分割像素中的一个像素读出第一图像信号,并且从另一个像素读出第二图像信号。以行为单位来对于读出第一图像信号和第二图像信号的顺序交替切换。从作为第一图像信号和第二图像信号之和的第三图像信号分别减去第一图像信号和第二图像信号,以获得第一分离图像信号和第二分离图像信号。将第一图像信号和第一分离图像信号在列方向上相加在一起,并且将第二图像信号和第二分离图像信号在列方向上相加在一起。
Description
技术领域
本发明涉及诸如数字照相机或数字摄像机等的摄像设备及其控制方法和存储介质,并且特别涉及配备具有光瞳分割像素的摄像器件的摄像设备的焦点检测技术的改进。
背景技术
作为自动调焦(AF)方式,诸如数字照相机等的一些摄像设备使用用于通过根据来自摄像器件的光瞳分割像素的输出之间的差求出散焦量来进行焦点检测的像面相位差AF方式。由于根据一帧的图像来求出散焦量,因此像面相位差AF方式与对比度AF方式相比具有焦点检测所需的时间非常短的优点。
已经提出了基于从摄像器件具有的各焦点检测像素中所设置的多个光电转换单元各自所读出的信号来获得焦点检测信号的技术(日本特开2009-3122)。根据该提案,首先,从多个光电转换单元的一部分中独立读出信号A,接着读出作为多个光电转换单元中的信号A和信号B之和的信号A+B。然后,通过从信号A+B减去信号A来获得多个光电转换单元的剩余部分中的最初没有被读出的信号B的值。
然而,根据上述的日本特开2009-3122,通过从信号A+B减去信号A所获得的信号B的值中的噪声比从多个光电转换单元的一部分中独立读出的信号A的值中的噪声高,这导致了相位差信息的噪声差。这存在如下问题:例如低亮度场景的拍摄时的焦点检测性能劣化。
发明内容
本发明提供一种使用用于在进行像面相位差AF时消除基于从摄像器件的光瞳分割像素读出的信号所获得的相位差信息中的噪声差的焦点检测技术的摄像设备及其控制方法和存储介质。
因此,本发明提供一种摄像设备,包括:摄像器件,其被配置为包括以二维形式在行和列上配置的多个光瞳分割像素;读出单元,其被配置为从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;切换单元,其被配置为以行为单位来对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;相减单元,其被配置为从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及相加单元,其被配置为将所述读出单元所读出的所述第一图像信号和所述相减单元所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出单元所读出的所述第二图像信号和所述相减单元所获得的所述第二分离图像信号在列方向上相加在一起。
一种摄像设备的控制方法,所述摄像设备配备具有以二维形式在行和列上配置的多个光瞳分割像素的摄像器件,所述控制方法包括:读出步骤,用于从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;切换步骤,用于以行为单位来对所述读出步骤中读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;相减步骤,用于从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及相加步骤,用于将所述读出步骤中所读出的所述第一图像信号和所述相减步骤中所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出步骤中所读出的所述第二图像信号和所述相减步骤中所获得的所述第二分离图像信号在列方向上相加在一起。
一种非暂时性计算机可读存储介质,其存储用于使计算机执行摄像设备的控制方法的各步骤的程序,所述摄像设备配备具有以二维形式在行和列上配置的多个光瞳分割像素的摄像器件,所述控制方法包括:读出步骤,用于从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;切换步骤,用于以行为单位来对所述读出步骤中读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;相减步骤,用于从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及相加步骤,用于将所述读出步骤中所读出的所述第一图像信号和所述相减步骤中所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出步骤中所读出的所述第二图像信号和所述相减步骤中所获得的所述第二分离图像信号在列方向上相加在一起。
根据本发明,在进行像面相位差AF时,可以消除基于从摄像器件的光瞳分割像素读出的信号所获得的相位差信息中的噪声差。
通过以下(参考附图)对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出从背面观看时作为根据本发明的摄像设备的典型实施例的数字照相机的立体图。
图2是用于说明图1中的数字照相机的控制系统的框图。
图3是示意性示出如何配置摄像器件的像素的图。
图4是用于说明使用传统读出方法从摄像器件的光瞳分割像素读出的图像的重构处理的框图。
图5是示出根据本实施例的从摄像器件的光瞳分割像素读出图像的定时的时序图。
图6是用于说明使用根据本实施例的读出方法从摄像器件的光瞳分割像素读出的图像的重构处理的框图。
图7是示出从图像处理单元向焦点检测单元输出的一对焦点检测信号的图。
图8是示出对从光瞳分割像素读出图像的顺序进行交替切换的条件的图。
图9是用于说明从光瞳分割像素读出图像的顺序以及通过相减所获得的图像中的噪声量的图。
具体实施方式
以下将参考附图来说明本发明的典型实施例。
图1是示出从背面观看时作为根据本发明的摄像设备的典型实施例的数字照相机的立体图。
如图1所示,根据本实施例的数字照相机100(以下称为照相机100)在其背面侧具有诸如用于显示图像和各种信息的LCD等的显示单元28。在照相机100的背面侧的显示单元28的侧部,设置有模式选择开关60、控制器轮73以及操作单元70,其中操作单元70包括用于接收各种操作的诸如各种开关、按钮和触摸面板等的操作构件。在照相机100的正面侧,设置有后述的摄像镜头103和镜头挡板102等(参见图2)。
在照相机100的上侧,设置有释放按钮61和电源开关72等,并且在照相机100的侧部设置有连接器112。连接器112连接至线缆111,其用于将外部装置连接至照相机100,以使照相机100和外部装置能够相互通信。在照相机100的底部设置有诸如存储卡等的记录介质200可移除地插入至的槽部201,并且槽部201利用盖部202来覆盖,以使得槽部201能够打开和关闭。
图2是用于说明图1中的照相机100的控制系统的框图。参考图2,摄像镜头103包括具有变焦透镜和调焦透镜的透镜组。由CCD传感器或CMOS传感器等构成的摄像器件22将经由摄像镜头103所形成的被摄体图像转换成电信号。摄像器件22具有A/D转换功能。
在本实施例中,焦点检测单元23使用像面相位差AF方式来进行焦点检测,因而焦点检测单元23基于例如从通过图像处理单元24进行了各种类型的补偿的数字图像信号所获得的焦点检测信息来计算散焦量,并且将所计算出的散焦量输出至系统控制单元50。
具有光圈功能的快门101通过在不进行拍摄时关闭来对摄像器件22进行遮光,并且通过在进行拍摄时打开来将来自被摄体的光束导向摄像器件22。镜头挡板102盖住包括摄像镜头103的摄像系统,以防止包括摄像镜头103、快门101和摄像器件22的摄像系统被污染或破损。
图像处理单元24对从摄像器件22输出的数据或者来自存储器控制单元15的图像数据执行诸如预定像素插值或缩小等的改变大小处理、以及颜色转换处理。图像处理单元24还使用通过摄像所获得的图像数据来执行预定计算处理,并且系统控制单元50基于通过计算处理所获得的结果来控制曝光和距离测量。结果,使用TTL(通过镜头)方式来执行AE(自动曝光)处理和EF(自动闪光级别控制和闪光发光)处理。
图像处理单元24还使用利用从通过摄像器件22进行摄像所获得的图像信号的像面相位差AF方式来执行AF处理,另外,还基于通过预定计算处理所获得的计算结果来执行使用TTL方式的AWB(自动白平衡)处理。
将来自摄像器件22的输出数据经由图像处理单元24和存储器控制单元15、或者经由存储器控制单元15直接写入存储器32中。存储器32存储通过摄像器件22所获得且进行了A/D转换的图像数据以及要显示在显示单元28上的图像数据。存储器32具有足以存储预定数量的静止图像、预定时间段的运动图像以及预定时间段的声音的大存储容量。存储器32还具有用于显示图像的存储器(视频存储器)。
D/A转换器(D/A)13将存储器32中所存储的图像显示用的数据转换成模拟信号,并且将该模拟信号供给至显示单元28。因而,存储器32中所写入的显示用图像数据经由D/A转换器13而显示在显示单元28上。显示单元28产生与从D/A转换器13所供给的模拟信号相对应的显示。通过摄像器件22进行了一次A/D转换并且累积在存储器32中的数字信号通过D/A转换器13而被转换成模拟信号,并且顺次传输至显示单元28,接着显示图像。因而,显示单元28用作用以显示在确定视角等中所使用的通过镜头图像的电子取景器。
非易失性存储器56是诸如闪速存储器等的电可擦除可编程存储器。将系统控制单元50的操作用的常量和程序等存储在非易失性存储器56中。RAM用作系统存储器52。系统存储器52将从非易失性存储器56读出的系统控制单元50的操作用的常量、变量和程序等展开。
系统控制单元50控制照相机100整体。系统控制单元50例如将非易失性存储器56中所记录的程序展开到系统存储器52中,并且执行预定处理。系统控制单元50还通过控制存储器32、D/A转换器13和显示单元28等来控制显示。系统控制单元50包括系统计时器,该系统计时器是用于测量各种类型的控制用的时间以及内置时钟的时间的计时单元。
模式选择开关60将系统控制单元50的操作模式切换成静止图像记录模式、运动图像记录模式和再现模式等中的任意模式。静止图像记录模式中所包括的模式的示例包括自动拍摄模式、自动场景判断模式、手动模式、根据拍摄场景来配置拍摄设置的各种场景模式、程序AE模式和定制模式。
模式选择开关60使得能够直接切换至静止图像记录模式所包括的上述模式中的任意模式。可选地,在通过模式选择开关60而临时切换至静止图像记录模式之后,可以使用其它操作构件来将系统控制单元50的操作模式切换成静止图像记录模式所包括的上述模式中的任意模式。同样,运动图像记录模式可以包括多种模式。
释放开关(SW1)62在释放按钮61的操作途中(例如,通过将释放按钮61半按下)而被接通。响应于来自释放开关62的ON(接通)信号,系统控制单元50开始诸如AF(自动调焦)处理、AE(自动曝光)处理、AWB(自动白平衡)处理和EF(自动闪光级别控制和发光)处理等的拍摄准备。
释放开关(SW2)64通过释放按钮61的操作完成(例如,通过将释放按钮61完全按下)而被接通。响应于来自释放开关64的ON信号,系统控制单元50开始进行从读取来自摄像器件22的信号到图像数据写入记录介质200的一系列拍摄操作。
操作单元70还用作在选择显示单元28上所显示的各种功能图标时所使用的各种功能按钮。这些功能按钮的示例包括结束按钮、返回按钮、图像给送按钮、跳跃按钮、缩窄按钮和属性改变按钮。例如,在按下菜单按钮时,在显示单元28上显示可以配置各种设置的菜单画面。用户使用显示单元28上所显示的菜单画面、四向键(即,上下左右方向键)和SET(设置)按钮来直观地配置各种设置。
使AF辅助光源71发光,以在亮度低时照射被摄体。使用控制器轮73和四向按钮来指定选择项。通过转动控制器轮73,根据操作量来生成电子脉冲信号,并且基于电子脉冲信号,系统控制单元50控制照相机100的构成元件。基于电子脉冲信号,系统控制单元50还判断控制器轮73转动的角度以及控制器轮73的转数等。
应当注意,不应当特别限制控制器轮73,而控制器轮73可以是任意操作构件,只要可以检测到其转动操作即可。例如,控制器轮73可以是响应于用户的转动操作而进行转动以生成脉冲信号的拨盘构件。控制器轮73还可以是包括触摸传感器且不转动、并且例如检测用户手指的转动操作的操作构件。
电源控制单元80由电池检测电路、DC-DC转换器以及用于对通电的块进行切换的切换电路等构成,并且检测所安装的电池是否存在、电池类型和剩余电量。基于检测结果和来自系统控制单元50的指示,电源控制单元80控制DC-DC转换器,并且向包括记录介质200的构成元件供给所需电压并持续所需时间段。电源单元40由诸如碱性电池或锂电池等的一次电池、诸如NiCd电池、NiMH电池或Li电池等的二次电池、以及AC适配器等构成。记录介质I/F 18是与诸如存储卡等的记录介质200的接口。照相机100还配置有闪光灯90。
图3是示意性示出摄像器件22的像素布局的图。如图3所示,摄像器件22被构成为以二维形式在行和列上配置多个光瞳分割像素,并且各光瞳分割像素具有各自包括FD(光电二极管)的多个分割像素(光电转换单元)。系统控制单元50对图像处理单元24进行控制,以使用分别从分割像素A和B读出的A信号301和B信号302来生成焦点检测信号,并且基于所生成的焦点检测信号来进行像面相位差AF。
现在,将说明使用传统方法读出信号的序列。首先,从摄像器件22的光瞳分割像素中的一个分割像素仅读出A信号301,其次,读出作为摄像器件22中的A信号301和B信号302之和的A+B信号。然后,从A+B信号减去A信号301,以获得B信号。
图4是用于说明使用利用参考图3所述的传统读出方法从摄像器件22的光瞳分割像素读出的A信号、B信号和A+B信号的图像重构处理的框图。应当注意,在以下说明中,为了方便,将A信号、B信号和A+B信号称为A图像、B图像和A+B图像。还应当注意,图像处理单元24在系统控制单元50的控制下执行该处理。
首先,从摄像器件22的光瞳分割像素读出A图像,接着读出作为A图像和B图像之和的A+B图像。然后,图像判断块通过判断所读出的图像是A图像还是A+B图像来对A图像和A+B图像来进行分类。这里,由于首先读出A图像,然后读出作为A图像和B图像之和的A+B图像,因此等待电路使处理定时相等以使处理同步,并且在获得这两个图像的情况下,从A+B图像减去A图像以获得B图像。然后,在将A图像和B图像分离之后,对各图像进行作为补偿处理的垂直相加,并且将所得到的图像输出至距离测量计算块。
此时,从A+B图像减去B图像将使信噪比理论上劣化3db。因而,在本实施例中,以下述方式来防止相位差信息中的噪声差的产生。
图5是示出从摄像器件22的光瞳分割像素读出A图像、B图像和A+B图像的定时的时序图。参考图5,首先,根据水平同步信号HD定时,从光瞳分割像素的一个分割像素读出A图像,然后读出通过将A图像和B图像相加在一起所获得的A+B图像。根据下一水平同步信号HD定时,在读出序列反转的状态下,从光瞳分割像素的其它分割像素读出B图像,然后读出A+B图像。
这是以行为单位交替重复的,并且在列方向上进行垂直相加以使A图像和B图像的噪声水平相等。这里,A图像与本发明的示例性的第一图像信号相对应,B图像与本发明的示例性的第二图像信号相对应,以及A+B图像与本发明的示例性的第三图像信号相对应。
图6是用于说明使用利用根据参考图5所述的本实施例的读出方法从摄像器件22的光瞳分割像素读出的A图像、B图像和A+B图像的图像重构处理的框图。通过控制图像处理单元24的系统控制单元50根据在例如非易失性存储器56中所记录并且展开到系统存储器52中的程序,来执行图6中的处理。
在本实施例中,以行为单位对读出A图像和B图像的顺序进行切换,因而,重构图像的方式根据行而变化。由于这个原因,需要将向两个垂直相加电路的输入互换。
首先,图像判断块通过判断从摄像器件22读出的图像是A图像、B图像还是A+B图像来对A图像、B图像或A+B图像进行分类。接着,如图4那样,等待电路使处理定时相等以使处理同步,并且在获得全部图像时,从A+B图像减去A图像和B图像,以获得分离的A图像和分离的B图像。这里,分离的A图像与本发明的示例性的第一分离图像信号相对应,以及分离的B图像与本发明的示例性的第二分离图像信号相对应。
如上所述,以行为单位对读出A图像和B图像的顺序进行切换。由于这个原因,在首先读出A图像时,互换块没有进行互换,但当首先读出B图像时,互换块将输入图像互换,并且将输入图像分别输出至A垂直相加电路和B垂直相加电路。由于A图像和B图像在输出特性方面有所不同,因此需要以不同的校正模式来对A图像和B图像进行校正。
在以行为单位来看噪声水平的情况下,噪声水平是不同的,但是之后,垂直相加电路在列方向上将具有不同的噪声水平的图像相加在一起。结果,距离测量计算电路生成A图像和B图像的噪声水平相等的一对焦点检测信号。将所生成的该对焦点检测信号输出至焦点检测单元23。
图7是示出在图像处理单元24进行了上述各种校正之后从图像处理单元24向焦点检测单元23输出的一对焦点检测信号的图。在图7中,横轴表示配置所连结的信号的像素的方向,以及纵轴表示信号强度。
摄像镜头103针对摄像器件22处于离焦,因而如图7所示,焦点检测信号430a向左侧偏移,并且焦点检测信号430b向右侧偏移。通过使用焦点检测单元23、利用众所周知的相关计算等来将焦点检测信号430a和430b的偏移量计算为散焦量,求出了摄像镜头103的离焦程度。
然后,系统控制单元50基于与摄像镜头103有关的镜头位置信息和从焦点检测单元23所获得的散焦量,来计算调焦透镜的驱动量。之后,基于与调焦透镜有关的位置信息,系统控制单元50将与摄像镜头103应当被驱动至的位置有关的信息发送至未示出的镜头驱动电路。结果,沿光轴方向驱动摄像镜头103,以实现聚焦。
图8是示出以行为单位将读出A图像和B图像的顺序交替切换的条件的图。以行为单位将读出A图像和B图像的顺序交替切换,这可以改变固定模式噪声的输出。由于这个原因,根据拍摄时的ISO感光度和温度来改变读出A图像和B图像的顺序的切换方式。
在低ISO感光度且低温环境下,仅存在少量的随机噪声,并且固定模式噪声的变化自身趋于明显,因此优选地,不对读出A图像和B图像的顺序进行切换。随着ISO感光度的增加,减少通过垂直相加电路进行相加的行数,并且在高ISO感光度(例如,ISO 1600)时,由于固定模式噪声埋入随机噪声中,因此固定模式噪声变得不明显,因而以行为单位来对顺序进行切换。随机噪声量也根据温度而变化,因而,在低温时,使得对读出A图像和B图像的顺序进行切换的频率最小化,并且在高温时,在增大频率的状态下进行对顺序的切换。
图9是用于说明从摄像器件22读出A图像和B图像的顺序以及通过相减所获得的A图像和B图像中的噪声量的图。
在图9所示的示例中,以行为单位来对从摄像器件22读出A图像和B图像的顺序进行交替切换。在从摄像器件22读出A图像和B图像之后将A图像和B图像分离,这使得通过相减所获得的图像的噪声劣化了3db。重复如下情形:在第一行中,B图像中的噪声劣化了3db,并且在下一行中,A图像中的噪声劣化了3db。
通过每两行对A图像和B图像进行垂直平均、并且进一步对多行进行垂直相加,A图像和B图像的噪声水平变得相等,从而消除了不必要地进行垂直相加的需求。应当注意,进行了垂直相加的行数应当是在不仅考虑ISO感光度、而且还考虑温度和快门速度的情况下的最佳行数。此外,可以每两行或更多行来对读出A图像和B图像的顺序进行交替切换。在进行了垂直相加的行中,如果单独读出的次数相同,则将获得与本实施例的效果相同的效果。
如上所述,在本实施例中,在要进行像面相位差AF的情况下,使得两个相位差信号中的噪声量相等,以使得即使在低亮度场景下也可以提高AF性能。此外,由于进行相加的行数减少,因此可以使得AF框变小,从而甚至可以使小被摄体聚焦。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
本申请要求2016年7月29日提交的日本专利申请2016-149848的优先权,这里通过引用将其全部内容包含于此。
Claims (8)
1.一种摄像设备,包括:
摄像器件,其被配置为包括以二维形式在行和列上配置的多个光瞳分割像素;
读出单元,其被配置为从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;
切换单元,其被配置为以行为单位来对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;
相减单元,其被配置为从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及
相加单元,其被配置为将所述读出单元所读出的所述第一图像信号和所述相减单元所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出单元所读出的所述第二图像信号和所述相减单元所获得的所述第二分离图像信号在列方向上相加在一起。
2.根据权利要求1所述的摄像设备,其中,还包括:
计算单元,其被配置为通过基于作为所述相加单元进行相加的结果所获得的图像信号进行计算,来生成一对焦点检测信号;以及
调焦单元,其被配置为通过基于使用所述一对焦点检测信号所计算出的散焦量驱动调焦透镜,来进行调焦操作。
3.根据权利要求1所述的摄像设备,其中,根据拍摄时的ISO感光度,所述切换单元改变对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行切换的行数。
4.根据权利要求1所述的摄像设备,其中,根据拍摄时的温度,所述切换单元改变对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行切换的行数。
5.根据权利要求1所述的摄像设备,其中,根据拍摄时的快门速度,所述切换单元改变对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行切换的行数。
6.根据权利要求1所述的摄像设备,其中,根据对所述读出单元读出所述第一图像信号和所述第二图像信号的顺序进行切换的行数,所述相加单元改变所述第一分离图像信号和所述第二分离图像信号在列方向上相加在一起的行数。
7.一种摄像设备的控制方法,所述摄像设备配备具有以二维形式在行和列上配置的多个光瞳分割像素的摄像器件,所述控制方法包括:
读出步骤,用于从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;
切换步骤,用于以行为单位来对所述读出步骤中读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;
相减步骤,用于从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及
相加步骤,用于将所述读出步骤中所读出的所述第一图像信号和所述相减步骤中所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出步骤中所读出的所述第二图像信号和所述相减步骤中所获得的所述第二分离图像信号在列方向上相加在一起。
8.一种非暂时性计算机可读存储介质,其存储用于使计算机执行摄像设备的控制方法的各步骤的程序,所述摄像设备配备具有以二维形式在行和列上配置的多个光瞳分割像素的摄像器件,所述控制方法包括:
读出步骤,用于从各所述光瞳分割像素中的一个像素读出第一图像信号,从该光瞳分割像素中的另一像素读出第二图像信号,并且读出所述摄像器件通过相加所述第一图像信号和所述第二图像信号所获得的第三图像信号;
切换步骤,用于以行为单位来对所述读出步骤中读出所述第一图像信号和所述第二图像信号的顺序进行交替切换;
相减步骤,用于从所述第三图像信号分别减去所述第一图像信号和所述第二图像信号,以分别获得从所述第三图像信号分离的第一分离图像信号和第二分离图像信号;以及
相加步骤,用于将所述读出步骤中所读出的所述第一图像信号和所述相减步骤中所获得的所述第一分离图像信号在列方向上相加在一起,并且将所述读出步骤中所读出的所述第二图像信号和所述相减步骤中所获得的所述第二分离图像信号在列方向上相加在一起。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016149848A JP6739272B2 (ja) | 2016-07-29 | 2016-07-29 | 撮像装置、その制御方法、及びプログラム |
JP2016-149848 | 2016-07-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107666571A true CN107666571A (zh) | 2018-02-06 |
CN107666571B CN107666571B (zh) | 2020-06-09 |
Family
ID=61010752
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710631807.9A Expired - Fee Related CN107666571B (zh) | 2016-07-29 | 2017-07-28 | 具有焦点检测技术的摄像设备及其控制方法和存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10277800B2 (zh) |
JP (1) | JP6739272B2 (zh) |
CN (1) | CN107666571B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110080493A1 (en) * | 2009-10-06 | 2011-04-07 | Canon Kabushiki Kaisha | Solid-state image sensor and image sensing apparatus |
CN103227897A (zh) * | 2012-01-31 | 2013-07-31 | 索尼公司 | 固态图像传感器和相机系统 |
US20140146218A1 (en) * | 2012-11-29 | 2014-05-29 | Canon Kabushiki Kaisha | Focus detection apparatus, image pickup apparatus, image pickup system, focus detection method, and non-transitory computer-readable storage medium |
CN104065894A (zh) * | 2013-03-19 | 2014-09-24 | 索尼公司 | 固态成像装置,固态成像装置的驱动方法以及电子设备 |
CN104104849A (zh) * | 2013-04-10 | 2014-10-15 | 佳能株式会社 | 摄像设备及其控制方法 |
CN104335578A (zh) * | 2012-06-07 | 2015-02-04 | 富士胶片株式会社 | 摄像装置、图像处理装置及图像处理方法 |
CN105657252A (zh) * | 2015-12-25 | 2016-06-08 | 青岛海信移动通信技术股份有限公司 | 一种移动终端中的图像处理方法和移动终端 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6819360B1 (en) * | 1999-04-01 | 2004-11-16 | Olympus Corporation | Image pickup element and apparatus for focusing |
JP5028154B2 (ja) | 2007-06-20 | 2012-09-19 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP5755111B2 (ja) * | 2011-11-14 | 2015-07-29 | キヤノン株式会社 | 撮像装置の駆動方法 |
KR102121531B1 (ko) * | 2013-12-10 | 2020-06-10 | 삼성전자주식회사 | 초점검출 가능한 이미지 센서 제어장치 및 방법. |
JP6584059B2 (ja) * | 2014-09-26 | 2019-10-02 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
JP6602109B2 (ja) * | 2015-08-28 | 2019-11-06 | キヤノン株式会社 | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 |
JP6688165B2 (ja) * | 2016-06-10 | 2020-04-28 | キヤノン株式会社 | 撮像装置及び撮像システム |
-
2016
- 2016-07-29 JP JP2016149848A patent/JP6739272B2/ja not_active Expired - Fee Related
-
2017
- 2017-07-25 US US15/658,446 patent/US10277800B2/en not_active Expired - Fee Related
- 2017-07-28 CN CN201710631807.9A patent/CN107666571B/zh not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110080493A1 (en) * | 2009-10-06 | 2011-04-07 | Canon Kabushiki Kaisha | Solid-state image sensor and image sensing apparatus |
CN103227897A (zh) * | 2012-01-31 | 2013-07-31 | 索尼公司 | 固态图像传感器和相机系统 |
CN104335578A (zh) * | 2012-06-07 | 2015-02-04 | 富士胶片株式会社 | 摄像装置、图像处理装置及图像处理方法 |
US20140146218A1 (en) * | 2012-11-29 | 2014-05-29 | Canon Kabushiki Kaisha | Focus detection apparatus, image pickup apparatus, image pickup system, focus detection method, and non-transitory computer-readable storage medium |
CN104065894A (zh) * | 2013-03-19 | 2014-09-24 | 索尼公司 | 固态成像装置,固态成像装置的驱动方法以及电子设备 |
CN104104849A (zh) * | 2013-04-10 | 2014-10-15 | 佳能株式会社 | 摄像设备及其控制方法 |
CN105657252A (zh) * | 2015-12-25 | 2016-06-08 | 青岛海信移动通信技术股份有限公司 | 一种移动终端中的图像处理方法和移动终端 |
Also Published As
Publication number | Publication date |
---|---|
JP2018019324A (ja) | 2018-02-01 |
CN107666571B (zh) | 2020-06-09 |
US20180035040A1 (en) | 2018-02-01 |
US10277800B2 (en) | 2019-04-30 |
JP6739272B2 (ja) | 2020-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104168416B (zh) | 摄像设备及其控制方法 | |
US10530986B2 (en) | Image capturing apparatus, image capturing method, and storage medium | |
US9531946B2 (en) | Image capturing apparatus, method of controlling the same, and storage medium | |
JP5825505B2 (ja) | 制御装置、表示制御方法、およびプログラム | |
CN105306812A (zh) | 摄像装置及控制方法 | |
US9467635B2 (en) | Image processing apparatus and image processing method | |
CN103385005B (zh) | 立体图像处理装置以及立体图像处理方法 | |
CN105323472B (zh) | 测光装置及其控制方法 | |
CN109964479B (zh) | 摄像设备及其控制方法 | |
CN107666571A (zh) | 具有焦点检测技术的摄像设备及其控制方法和存储介质 | |
US11196938B2 (en) | Image processing apparatus and control method for same | |
JP2009218689A (ja) | 測光装置、及び撮像装置 | |
US10536621B2 (en) | Image capturing apparatus, storage medium and controlling method for correcting a second image by correcting a pixel value of the second image corresponding to a detected defective pixel | |
JP2017090579A (ja) | 焦点検出装置及び方法、及び撮像装置 | |
JP2021090109A (ja) | 画像処理装置および画像処理方法 | |
JP6971715B2 (ja) | 撮像装置、撮像装置の制御方法、及び、プログラム | |
US20170126981A1 (en) | Imaging apparatus and control method of imaging apparatus | |
JP6953163B2 (ja) | 撮像装置および制御方法 | |
JP2019047144A (ja) | 撮像装置、撮像装置の制御方法、及び、プログラム | |
JP2001209088A (ja) | 撮像装置及び露出制御方法 | |
JP2019029780A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2014149459A (ja) | 撮像装置及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200609 |