CN103152520B - 图像捕获设备和方法 - Google Patents
图像捕获设备和方法 Download PDFInfo
- Publication number
- CN103152520B CN103152520B CN201310028358.0A CN201310028358A CN103152520B CN 103152520 B CN103152520 B CN 103152520B CN 201310028358 A CN201310028358 A CN 201310028358A CN 103152520 B CN103152520 B CN 103152520B
- Authority
- CN
- China
- Prior art keywords
- image
- condenser lens
- defocus correction
- focus condition
- imageing sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
Abstract
本发明涉及一种图像捕获设备和方法。所述图像捕获设备包括:移动单元,用于使聚焦透镜以预定幅度运动;检测单元,用于检测由图像传感器获得的各个图像的焦点状态;以及散焦校正单元,用于基于所述检测单元检测到的各个图像的焦点状态,对在所述移动单元进行所述运动期间、由所述图像传感器获得的各个图像进行散焦校正,使得用于在显示装置上显示的各个图像的焦点状态,至少接近焦准图像的焦点状态,其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正单元基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
Description
本申请是申请日为2010年8月17日、申请号为201010258391.9、发明名称为“图像捕获设备和方法”的发明专利申请的分案申请。
技术领域
本发明涉及一种图像捕获设备和方法,更具体地,涉及一种具有所谓的“摇摆(wobbling)”功能的图像捕获设备和图像捕获方法,该“摇摆”功能通过在光轴方向上改变摄影镜头和图像传感器之间的距离,从而使摄影镜头相对于图像传感器的焦点位置以预定幅度往复运动,来检测摄影镜头的焦点状态。
背景技术
传统上,如在日本特开2006-146062号公报中所公开的,已知在基于捕获的图像的对比度(contrast)检测焦点状态的对比度AF中使用的摇摆方法,作为用于提供自动聚焦功能(AF系统)的检测焦点状态的方法。这种通过摇摆方法来控制聚焦的AF系统通常如下工作。
首先,通过对比度AF(登山(hill-climbing)检测方法)获得焦准(in-focus,焦点对准)状态,然后,在以焦准位置为中心的窄幅度范围内往复驱动(摇摆)聚焦透镜的情况下,以规则的间隔捕获图像,并且基于捕获的图像信号的对比度,来确定焦准位置。然后,在焦准位置改变的情况下,如果改变小,则在将往复驱动的幅度的中心改变为改变后的焦准位置之后,继续往复运动,而如果改变大,则通过登山检测方法来控制聚焦。
在对比度AF中,比较在至少两个聚焦透镜位置处捕获的图像的对比度,以确定到焦准位置的方向。因此,在进行摇摆时,一旦达到焦准状态,则比较通过微小地驱动聚焦透镜而在不同的透镜位置获得的图像的对比度,以维持焦准状态。
然而,使用在日本特开2006-146062号公报中公开的摇摆方法存在如下问题:在摇摆期间,聚焦透镜的聚焦面从图像传感器的光接收表面大幅偏移的情况下,摄影者能注意到散焦(defocus)。
由于该原因,通常的作法是设置聚焦透镜在摇摆期间的改变量,使得出现的散焦的量小于容许模糊圈(acceptablecircleofconfusion),由此防止摄影者能注意到的图像的散焦。然而,在以下条件下,摇摆期间的散焦或者散焦的改变仍有可能是摄影者能注意到的:
(1)在可互换镜头照相机上安装了没有高精度微小驱动能力的摄影镜头的情况;
(2)由于图像传感器的小型化,容许模糊圈的大小显著减小的情况;
(3)检测运动被摄体的焦点的情况。
发明内容
考虑到上述情况作出了本发明,在具有使摄影镜头相对于图像传感器的焦点位置以预定幅度往复运动的功能的图像捕获设备中,本发明的目的在于,使往复运动期间的图像的散焦或者散焦的改变对于摄影者更不明显。
本发明在其第一方面提供一种图像捕获设备,所述图像捕获设备包括:移动单元,用于使聚焦透镜以预定幅度运动;检测单元,用于检测由图像传感器获得的各个图像的焦点状态;以及散焦校正单元,用于基于所述检测单元检测到的各个图像的焦点状态,对在所述移动单元进行所述运动期间、由所述图像传感器获得的各个图像进行散焦校正,使得用于在显示装置上显示的各个图像的焦点状态,至少接近焦准图像的焦点状态,其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正单元基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
本发明在其第二方面提供一种图像捕获方法,所述图像捕获方法包括:拍摄步骤,在运动期间由图像传感器捕获图像,在所述运动中,使聚焦透镜以预定幅度运动;检测步骤,检测在所述拍摄步骤中由所述图像传感器获得的各个图像的焦点状态;以及散焦校正步骤,基于在所述检测步骤中检测到的各个图像的焦点状态,对在所述拍摄步骤中由所述图像传感器获得的各个图像进行散焦校正,使得用于在显示装置上显示的各个图像的焦点状态,至少接近焦准图像的焦点状态,其中,在所述检测步骤检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正步骤基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
从下面参考附图对示例性实施例的描述,本发明的其它特征将变得清楚。
附图说明
图1是示出根据本发明的第一实施例的图像捕获设备的配置的框图。
图2是示出根据本发明的第一实施例的在进行摇摆时,焦准位置在摇摆的幅度范围内的情况下的散焦校正量的说明图。
图3A至3C示出了在图2的情况下如何进行散焦校正。
图4是示出根据本发明的第一实施例的在进行摇摆时,焦准位置从摇摆的幅度范围偏移的情况下的散焦校正量的说明图。
图5A至5C示出了在图4的情况下如何进行散焦校正。
图6A和6B是示出根据本发明的第一实施例的散焦校正处理的流程图。
图7是示出根据本发明的第二实施例的包含散焦校正处理的捕获静止图像的过程的流程图。
图8是示出根据本发明的变型例的图像捕获设备的配置的框图。
具体实施方式
根据附图详细描述本发明的优选实施例。
第一实施例
图1是示出根据第一实施例的图像捕获设备的配置的框图,其中,图像捕获设备由包括图像传感器的数字照相机体138和可从照相机体138上拆下的摄影镜头137构成。
首先对摄影镜头137的配置进行描述。附图标记101表示第一透镜组,其被布置为与图像捕获(摄像)光学系统中的被摄体最靠近,并且被保持为能够在光轴方向上前后移动。附图标记102表示光圈,其通过对光圈大小的控制来对拍摄时的光量进行控制。附图标记103表示第二透镜组。光圈102和第二透镜组103作为一个单元在光轴方向上前后移动,并且与第一透镜组101的前后移动组合来实现缩放操作(变焦功能)。附图标记105表示第三透镜组,其通过在光轴方向上前后移动来进行聚焦。
附图标记111表示变焦致动器,其通过旋转地驱动未示出的凸轮柱,在光轴方向上前后驱动第一透镜组101、光圈102和第二透镜组103,由此使得能够进行缩放操作。附图标记112表示光圈致动器,其控制光圈102的光圈大小,以调节入射光量。附图标记114表示聚焦致动器,其在光轴方向上前后驱动第三透镜组105,以进行聚焦。
附图标记136表示照相机通信电路,其向照相机体138发送关于摄影镜头137的信息,并从照相机体138接收关于照相机体138的信息。注意,关于摄影镜头137的信息是指例如变焦状态、光圈状态、聚焦状态和镜头框信息,照相机通信电路136将该信息发送到设置在照相机体138侧的镜头通信电路135。
接下来,对照相机体138进行描述。附图标记106表示光学低通滤波器,其是用于减少捕获的图像中的伪色(falsecolor)和波纹(moiré)的光学元件。附图标记107表示图像传感器,其由包括以CCD或者CMOS传感器为代表的光电转换元件的传感器和周围的外围电路构成。图像传感器107可以是二维单板彩色传感器,其中,在水平方向上具有m个像素和垂直方向上具有n个像素的光接收像素阵列上,形成有片上型拜尔排列原色马赛克滤波器(on-chipBayer-arrayedprimarycolormosaicfilter)。
附图标记139表示快门单元,其在进行静止图像拍摄时通过打开和关闭来控制曝光时间,并且在进行运动图像拍摄时保持打开。附图标记140表示快门致动器,其对快门单元139进行致动。
附图标记115表示用于在进行图像捕获时照亮被摄体的电子闪光灯,其优选是使用氙管的闪光灯照明器,作为另选方案,其可以是安装有连续发光LED的照明器。附图标记116表示AF辅助光(filllight)投影仪,其通过透射透镜向被摄域(field)投射具有预定开口图案的掩模(mask)图像,由此改善检测对暗的被摄体或者低对比度的被摄体聚焦的能力。
附图标记121表示照相机内的CPU,其以各种方式控制照相机,CPU121例如包括操作单元、ROM、RAM、A/D转换器、D/A转换器和通信接口电路。CPU基于存储在ROM中的预定程序,驱动照相机体138中的各种电路,并且进行诸如AF、图像捕获以及图像处理和记录的一系列操作。
附图标记122表示电子闪光控制电路,其控制与图像捕获操作同步的电子闪光灯115的发光。附图标记123表示辅助光驱动电路,其控制与焦点检测操作同步的AF辅助光投影仪116的发光。附图标记124表示图像传感器驱动电路,其驱动图像传感器107,并且将捕获的图像信号从模拟转换为数字,并将转换后的信号发送到CPU121。附图标记125表示图像处理电路,其对从图像传感器107获取的图像进行诸如γ转换、颜色插值和JPEG压缩的处理。
附图标记126表示聚焦驱动电路,其基于焦点检测结果来控制对聚焦致动器114的驱动,并在光轴方向上前后驱动第三透镜组105(聚焦透镜),以进行聚焦。附图标记128表示光圈驱动电路,其控制对光圈致动器112的驱动,以控制光圈102的打开。附图标记129表示变焦驱动电路,其响应于摄影者进行的变焦操作来驱动变焦致动器111。附图标记135表示镜头通信电路,其与摄影镜头137中的照相机通信电路136进行通信。附图标记145表示快门驱动电路,其驱动快门致动器140。
附图标记131表示诸如LCD的显示装置,其显示例如关于照相机的拍摄模式的信息、拍摄之前的预览图像和图像捕获之后的确认图像以及焦点检测时的焦准状态显示图像。附图标记132表示操作开关组,其包括例如电源开关、释放(拍摄触发)开关、变焦操作开关和拍摄模式选择开关。附图标记133表示记录捕获的图像的可移动闪存。附图标记144表示照相机内的存储器,其存储CPU121进行计算所需的各种数据。
在如上构成的图像捕获设备中,进行对比度自动聚焦(对比度AF)控制,作为AF控制,其中,通过根据从图像传感器107获得的信号的高频分量确定聚焦的程度,来控制聚焦。注意,对比度AF是已知技术,因此这里不进行描述。
在第一实施例中,一旦在进行运动图像拍摄时,达到了焦准状态,则开始使用摇摆方法的聚焦控制。在一般情况下,将摇摆时的透镜的幅度设置为使得不产生明显的散焦。通常,将幅度设置为低于或等于Fδ,其中,F是图像捕获光学系统的F值,δ是容许模糊圈的直径,使得散焦不明显。然而,当采用如图1所示的安装有可移动摄影镜头137的图像捕获设备时,如果在该设备上安装了没有用于高精度微小驱动能力的摄影镜头,则摇摆幅度可能高于Fδ。此外,在容许模糊圈δ由于图像传感器的小型化而显著变小的情况下,Fδ显著变低,而难以使摇摆幅度减小到低于或等于Fδ。此外,在对运动被摄体检测焦点的情况下,需要将摇摆幅度设置得稍高,来捕获被摄体,因此可能需要将摇摆幅度设置得稍微高于Fδ。在这种情况下,如果通过摇摆方法进行聚焦控制,则可以使由于摇摆而产生的图像的散焦或者散焦的改变,对于摄影者不明显。
因此,在第一实施例中,进行下面描述的处理,以使摇摆期间的图像的散焦或者散焦的改变对于摄影者更不明显。
图2是摇摆(往复运动期间)的图示,其中,通过在光轴方向上改变摄影镜头137和图像传感器107之间的距离,使摄影镜头137相对于图像传感器107的焦点位置以预定幅度往复运动。水平轴表示时间,垂直轴表示摄影镜头137的摄像面相对于图像传感器107的预设位置,即焦点位置。
在图2中,附图标记L11、L12、L13和L14表示进行图像捕获时的焦点位置,其显示诸如以L11和L12的平均值为中心的往复运动的运动。附图标记LC表示焦准位置,其近似是焦点位置的往复运动的中心。注意,如图2所示,在焦点位置的周期性改变中,在最远离幅度的中心的焦点位置处获取图像。使用在最远焦点位置处获得的这些图像来得出多个AF评价值,根据AF评价值,可以检测摄影镜头137的聚焦状态。
附图标记F11、F12、F13和F14分别表示焦点位置L11、L12、L13和L14处的散焦量。也就是说,在焦点位置L11、L12、L13和L14处获得的图像分别是从焦准位置LC散焦了散焦量F11、F12、F13和F14的低质量的离焦(out-of-focus)图像。因此,在第一实施例中,校正在摇摆期间获得的图像的这种散焦,并输出。
图3A至3C示出如何校正如图2所示的在摇摆期间散焦的图像。图3A示出了在图2中的焦点位置L11处获得的图像,其中,由于从焦准位置LC散焦了散焦量F11,因此被摄体显示散焦。因此,对在焦点位置L11处获得的图像进行将焦点位置移位F11的散焦校正。图3B示出了在图2中的焦点位置L12处获得的图像,其中,由于从焦准位置LC散焦了散焦量F12,因此被摄体显示散焦。因此,对在焦点位置L12处获得的图像进行将焦点位置移位F12的散焦校正。
图3C示出了对分别在图2中的焦点位置L11和L12处获得的图3A和3B中的图像进行散焦校正之后的图像。在散焦校正之后,在焦点位置L11和L12处获得的图3A和3B中的图像两者,在其焦点位置与焦准位置LC匹配的情况下焦准。注意,稍后将描述散焦校正方法。
图4示出了例如在摇摆期间,由于被摄体的移动,焦准位置LC从摇摆幅度的范围偏移的情况下的焦点位置。附图标记L21、L22、L23和L24表示焦点位置,其显示诸如以L21和L22的平均值为中心的往复运动的运动。附图标记LC表示焦准位置,其在如上所述的摇摆幅度的范围外。附图标记F21、F22、F23和F24分别表示焦点位置L21、L22、L23和L24处的散焦量。在焦点位置L21、L22、L23和L24处获得的图像分别离焦了散焦量F21、F22、F23和F24。
在这种情况下,理想地,进行散焦校正,以生成将焦点位置移位散焦量F21、F22、F23和F24的图像,并记录/显示校正后的图像。然而,虽然到焦准位置的方向可能从根据在焦点位置L21、L22、L23和L24处处获得的图像计算的AF评价值得到,但是可能无法得出散焦量。因此,无法确定焦准位置LC的精确位置。
因此,在第一实施例中,取焦点位置L21和L23作为焦点位置LD,基于从焦点位置LD的移位量,也就是说,基于焦点位置L21、L22、L23和L24处的散焦量,进行散焦校正。因此,不对在焦点位置L21和L23处获得的捕获的图像进行移位焦点位置的散焦校正。对在焦点位置L22和L24处获得的捕获的图像分别进行将其焦点位置移位G22和G24的散焦校正。这使得即使焦准位置LC在摇摆期间的焦点位置的往复运动的幅度范围外,也能够尽量按照希望地进行散焦校正。
图5A至5C示出了如何校正如图4所示的在摇摆期间散焦的图像。图5A示出了在图4中的焦点位置L21处获得的图像,其中,由于从焦准位置LC散焦了散焦量F21,因此被摄体显示散焦。然而,由于散焦量F21小,因此该图像中的被摄体仅仅散焦了一点。图5B示出了在图4中的焦点位置L22处获得的图像,其从焦准位置LC散焦了F22。由于散焦量F22大于散焦量F21,因此被摄体的散焦大于在焦点位置L21处获得图像中的被摄体,如图5B所示。
图5C示出了散焦校正之后的图像。在第一实施例中,由于如上所述,不对在焦点位置L21处获得的图像进行散焦校正,因此图5C所示的图像是对在图4中的焦点位置L22处获得的图5B中的图像进行了等同于G22的量的散焦校正之后的图像。因为该图像在散焦校正之后的焦点位置接近焦准位置LC,因此该图像仅仅离了一点焦。
如以上参考图2至图5C所描述的,尽可能通过校正由于摇摆而出现的散焦来生成图像,使得由于摇摆产生的散焦或者散焦的改变对于摄影者更不明显。这也提高了记录图像和预览图像的图像质量。
接下来,参考图6A和6B,描述根据第一实施例的在摇摆期间进行的散焦校正处理的过程。图6A是示出散焦校正处理的流程图,图6B是示出生成在散焦校正中使用的散焦函数的过程的流程图,其中,由CPU121进行各个系列的操作。
在步骤S11中,获取转换信息,其指示在图像数据获取时进行的转换处理的内容。
在步骤S12中,确定在校正处理之前对图像数据进行转换的方法。CPU121基于在步骤S11中获取的转换信息,并且按照需要,基于关于照相机体138的特征信息和关于摄影镜头137的特征信息,确定用于对从图像处理电路125提供的图像信息进行转换的转换方法。这里确定的转换方法是,转换图像信息,使得在曝光值和像素值之间成正比关系,以确保作为图像恢复处理的算法的前提条件的直线性(linearity)的方法。
例如,在图像处理电路125进行伽玛校正的情况下,在步骤S12中进行伽玛校正转换的逆转换。这使得能够再现转换之前的图像,并且使得能够以直线性获取图像。类似地,在图像处理电路125进行颜色转换的情况下,在步骤S12中进行颜色校正转换的逆转换。这使得能够以直线性获取图像。如上所述,在步骤S12中确定与图像处理电路125进行的转换处理的逆转换相对应的转换方法。
在步骤S13中,获取经过了散焦校正的捕获的图像数据。然后,在步骤S14中,根据在步骤S12中确定的转换方法,对获取的图像数据进行转换。在步骤S14中转换处理完成之后,处理进行到步骤S15,生成散焦函数。注意,稍后将参考图6B描述生成散焦函数的处理。在步骤S16中,基于在步骤S15中生成的散焦函数进行逆转换,以对在步骤S14中转换的图像数据进行散焦校正处理。这里,由通常称为去卷积(deconvolution)处理的图像恢复算法进行散焦校正处理。这使得能够获取校正了预定被摄体的散焦的散焦校正后的图像。注意,例如在日本特开2000-20691号公报中公开了这种基于散焦函数进行逆转换处理的散焦校正方法,因此这里不进行描述。在步骤S16中的散焦校正处理完成之后,散焦校正处理结束。
图6B是示出散焦函数生成子例程的流程图。
在步骤S21中,CPU121获取指示在进行图像捕获时图像处理电路125进行的转换处理的内容的转换信息,以及在进行图像捕获时记录在照相机内的存储器144中的关于照相机体138的特征信息和关于摄影镜头137的特征信息。这里,关于照相机体138的特征信息例如包括指示图像传感器107中的进行拍摄的像素的光接收灵敏度的分布的信息、渐晕(vignetting)信息、指示从照相机体138和摄影镜头137之间的安装表面到图像传感器107的距离的信息和制造误差信息。关于摄影镜头137的特征信息例如包括出射光瞳(exitpupil)信息、框信息、图像捕获时的F值信息、像差信息和制造误差信息。
在步骤S22中,获取关于摇摆的信息。摇摆信息例如包括摇摆幅度、周期、焦准确定结果和到焦准位置的方向。该信息能够影响图像捕获时的焦点位置,因此作为指定散焦校正使用的散焦量的指示器。已经参考图2和4描述了确定在摇摆期间获得的图像的散焦量的方法,因此这里不进行描述。
在步骤S23中,获取用来定义散焦函数的参数(散焦参数)。通过摄影镜头137和图像传感器107之间的光传输特性来确定散焦函数。光传输特性根据诸如关于照相机体138的特征信息、关于摄影镜头137的特征信息、摇摆信息、被摄体区域在捕获的图像中的位置和被摄体距离的因素而改变。因此,在照相机内的存储器144中存储了将这些因素与用来定义散焦函数的参数相关联的表数据。然后,基于这些因素,在步骤S23中,CPU121从照相机内的存储器144中获取用来定义散焦函数的参数。
在步骤S24中,基于在步骤S23中获取的散焦参数来定义散焦函数。将散焦函数视为摄影镜头137和图像传感器107之间的光传输函数特性。散焦函数的示例是高斯分布,其中,散焦现象被视为与正态分布定律相对应。由下面的等式(1)给出散焦函数h(r):
其中,r是与中心像素的距离,σ2是与正态分布定律相对应的任何参数。
在步骤S24中定义了散焦函数之后,散焦函数生成子例程结束,在图6A中的步骤S16中进行散焦校正处理。
如上所述,根据第一实施例,具有摇摆功能的图像捕获设备能够使摇摆期间的散焦或者散焦的改变对于摄影者更不明显。
第二实施例
前述第一实施例描述了对由于进行运动图像拍摄时的摇摆操作而出现散焦的图像进行散焦校正的情况。第二实施例描述如下情况:对由于进行静止图像拍摄时的摇摆操作而出现散焦的图像进行散焦校正。注意,根据第二实施例的图像捕获设备具有与在第一实施例中参考图1描述的图像捕获设备类似的配置,因此这里不进行描述。
接下来,参考图7描述根据第二实施例的捕获静止图像的处理。
首先,在步骤S31中确定是否通过操作开关132中的释放开关的操作(例如半按下操作),给出了开始拍摄准备的指令。在指令开始拍摄准备时,处理进行到步骤S32,进行聚焦处理。然后,确定是否实现了聚焦,如果没有实现聚焦(步骤S33:否),则处理返回步骤S32,继续聚焦处理。另一方面,如果实现了聚焦(步骤S33:是),则处理进行到步骤S34,开始进行摇摆。在步骤S35中,确定是否通过释放开关的操作(例如全按下操作),给出了开始进行拍摄的指令,如果给出了指令,则在步骤S36中确定是否取消了开始拍摄准备的指令。如果取消了该指令,则处理返回步骤S31,否则,处理重复步骤S35的确定。
在指令了开始进行拍摄时(步骤S35:是),将关于照相机体138的特征信息和关于摄影镜头137的特征信息记录在闪存133和照相机内的存储器144中(步骤S37)。这里,关于照相机体138的特征信息例如包括指示图像传感器107中的进行拍摄的像素的光接收灵敏度的分布的信息、光束渐晕信息、指示从照相机体138和摄影镜头137之间的安装表面到图像传感器107的距离的信息和制造误差信息。由于指示图像传感器107中的进行拍摄的像素的光接收灵敏度的分布的信息由片上型微透镜和光电转换单元来确定,因此也可以记录关于该透镜和单元的信息。关于摄影镜头137的特征信息例如包括出射光瞳信息、框信息、拍摄时的F值信息、像差信息和制造误差信息。
然后,捕获静止图像,并对捕获的图像信号进行各种已知处理,以获取图像数据(步骤S38),并对获取的图像数据进行散焦校正处理(步骤S39)。注意,以与在第一实施例中参考图2至图6B描述的处理类似的方式,进行这里执行的散焦校正处理,因此这里不进行描述。然后,将经过散焦校正处理的图像数据记录在闪存133中(步骤S40),该处理结束。也就是说,将散焦校正后的图像存储在闪存133中。注意,可以在显示装置131上显示如上所述经过散焦校正处理的图像数据,作为确认图像。
如上所述,根据第二实施例,通过基于关于摄影镜头的特征信息、关于图像捕获设备的特征信息和摇摆信息推断散焦的形状,然后,对其进行逆转换,来对由于摇摆而出现了散焦的捕获的图像进行散焦校正处理。因此,在步骤S40中记录的捕获的图像是校正了由于摇摆而出现的散焦的图像。这实现了能够使摇摆期间的散焦或者散焦的改变对于摄影者更不明显的图像捕获设备。
此外,如上所述,在根据第二实施例的图像捕获设备中,将散焦校正后的捕获的图像以及与捕获的图像相对应的关于照相机体138和摄影镜头137的特征信息记录在闪存133中。通过这样作,即使图像捕获设备进行的散焦校正不令人满意,也能够在拍摄之后,基于关于照相机体138的特征信息和关于摄影镜头137的特征信息对捕获的图像重新进行散焦校正。
变型例
前述第一和第二实施例描述了通过驱动摄影镜头137来进行摇摆的情况。然而,由于摇摆仅需要摄影镜头137和图像传感器107之间的距离在光轴方向上往复移动,因此可以不驱动摄影镜头137,而是在光轴方向上前后驱动图像传感器107,来进行摇摆。
图8是示出根据本发明的变型例的图像捕获设备的配置的框图。与图1所示的图像捕获设备的配置的不同之处在于,其包括用于在光轴方向上驱动图像传感器107的位置移动单元150和位置移动单元驱动电路151。配置的其它方面与图1中的配置类似,因此这里省略其描述。通过图8所示的配置,在摇摆期间,位置移动单元150在光轴方向上相对于摄影镜头137移动图像传感器107的位置,这消除了为了进行摇摆而驱动摄影镜头137的需要。
在照相机体138中包括可互换摄影镜头137的电子照相机的情况下,容易想到各种镜头作为摄影镜头137。如果在照相机上安装了具有低驱动精度的聚焦透镜,则不能进行摇摆。在这种情况下,如果图像捕获设备安装有在光轴方向上前后驱动图像传感器107的位置移动单元150,则可以实现稳定的摇摆,而不受安装的摄影镜头的聚焦驱动精度的影响。
虽然利用具有可替换摄影镜头的照相机描述了上述实施例,但是本发明也可应用于在照相机体中包括内置摄影镜头的照相机(称为镜头集成照相机)。通过使用这种镜头集成照相机显示散焦校正后的捕获的图像,也可以实现与在上述实施例中描述的效果类似的效果。
虽然参照示例性实施例对本发明进行了说明,但是应当理解,本发明不限于所公开的示例性实施例。所附权利要求的范围符合最宽的解释,以使其涵盖所有这种变型、等同结构及功能。
Claims (15)
1.一种图像捕获设备,所述图像捕获设备包括:
移动单元,用于使聚焦透镜以预定幅度运动;
检测单元,用于检测由图像传感器获得的各个图像的焦点状态;以及
散焦校正单元,用于基于所述检测单元检测到的各个图像的焦点状态,对在所述移动单元进行所述运动期间、由所述图像传感器获得的各个图像进行散焦校正,使得用于在显示装置上显示的各个图像的焦点状态,至少接近焦准图像的焦点状态,
其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正单元基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
2.根据权利要求1所述的图像捕获设备,其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的所述幅度范围外的情况下,所述散焦校正单元基于在所述幅度范围内靠近焦准图像的所述聚焦透镜的位置一侧的所述聚焦透镜的位置,与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
3.根据权利要求1所述的图像捕获设备,其中,所述散焦校正单元进行的所述散焦校正是去卷积处理。
4.根据权利要求1所述的图像捕获设备,其中,所述散焦校正单元通过基于所述聚焦透镜和所述图像传感器之间的光传输函数特性的图像处理,来进行所述散焦校正。
5.根据权利要求1所述的图像捕获设备,其中,所述移动单元使所述聚焦透镜在光轴方向上、相对于所述图像传感器运动。
6.根据权利要求1所述的图像捕获设备,其中,所述移动单元使所述图像传感器在光轴方向上、相对于所述聚焦透镜运动。
7.根据权利要求1所述的图像捕获设备,其中,所述移动单元使所述聚焦透镜的位置以预定幅度往复运动,以检测由所述图像传感器获得的各个图像的焦点状态。
8.根据权利要求1所述的图像捕获设备,其中,所述移动单元进行摇摆操作,以检测由所述图像传感器获得的各个图像的焦点状态。
9.一种图像捕获方法,所述图像捕获方法包括:
拍摄步骤,在运动期间由图像传感器捕获图像,在所述运动中,使聚焦透镜以预定幅度运动;
检测步骤,检测在所述拍摄步骤中由所述图像传感器获得的各个图像的焦点状态;以及
散焦校正步骤,基于在所述检测步骤中检测到的各个图像的焦点状态,对在所述拍摄步骤中由所述图像传感器获得的各个图像进行散焦校正,使得用于在显示装置上显示的各个图像的焦点状态,至少接近焦准图像的焦点状态,
其中,在所述检测步骤检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正步骤基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
10.一种图像捕获设备,所述图像捕获设备包括:
移动单元,用于使聚焦透镜以预定幅度往复运动;
检测单元,用于检测由图像传感器获得的各个图像的焦点状态;以及
散焦校正单元,用于基于所述检测单元检测到的各个图像的焦点状态,对在所述移动单元进行所述运动期间、由所述图像传感器获得的各个图像进行散焦校正,使得检测到的图像的散焦的改变被校正为对于显示装置上的显示不明显,
其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,所述散焦校正单元基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
11.根据权利要求10所述的图像捕获设备,其中,在所述检测单元检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的所述幅度范围外的情况下,所述散焦校正单元基于在所述幅度范围内靠近焦准图像的所述聚焦透镜的位置一侧的所述聚焦透镜的位置,与在所述运动期间捕获到图像的焦点位置之间的差,来进行散焦校正。
12.根据权利要求10所述的图像捕获设备,其中,所述散焦校正单元进行的所述散焦校正是去卷积处理。
13.根据权利要求10所述的图像捕获设备,其中,所述散焦校正单元通过基于所述聚焦透镜和所述图像传感器之间的光传输函数特性的图像处理,来进行散焦校正。
14.一种图像捕获方法,所述图像捕获方法包括:
拍摄步骤,在运动期间由图像传感器捕获图像,在所述运动中,使聚焦透镜的位置以预定幅度运动;
检测步骤,检测在所述拍摄步骤中由所述图像传感器获得的各个图像的焦点状态;以及
散焦校正步骤,基于在所述检测步骤中检测到的各个图像的焦点状态,对在所述拍摄步骤中由所述图像传感器获得的各个图像进行散焦校正,使得图像的散焦的改变被校正为对于显示装置上的显示不明显,
其中,在所述检测步骤中检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的幅度范围内的情况下,在所述散焦校正步骤中基于焦准图像的所述聚焦透镜的位置与在所述运动期间捕获到图像的所述聚焦透镜的位置之间的差,来进行散焦校正。
15.根据权利要求14所述的图像捕获方法,其中,在所述检测步骤中检测到的焦点状态指示焦准图像的所述聚焦透镜的位置在所述运动的所述幅度范围外的情况下,在所述散焦校正步骤中基于在所述幅度范围内靠近焦准图像的所述聚焦透镜的位置一侧的所述聚焦透镜的位置,与在所述运动期间捕获到图像的焦点位置之间的差,来进行散焦校正。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009191473A JP5254904B2 (ja) | 2009-08-20 | 2009-08-20 | 撮像装置及び方法 |
JP2009-191473 | 2009-08-20 | ||
CN2010102583919A CN101998055B (zh) | 2009-08-20 | 2010-08-17 | 图像捕获设备和方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010102583919A Division CN101998055B (zh) | 2009-08-20 | 2010-08-17 | 图像捕获设备和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103152520A CN103152520A (zh) | 2013-06-12 |
CN103152520B true CN103152520B (zh) | 2016-02-17 |
Family
ID=43125606
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310028358.0A Expired - Fee Related CN103152520B (zh) | 2009-08-20 | 2010-08-17 | 图像捕获设备和方法 |
CN2010102583919A Expired - Fee Related CN101998055B (zh) | 2009-08-20 | 2010-08-17 | 图像捕获设备和方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010102583919A Expired - Fee Related CN101998055B (zh) | 2009-08-20 | 2010-08-17 | 图像捕获设备和方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US8315514B2 (zh) |
EP (1) | EP2288140A3 (zh) |
JP (1) | JP5254904B2 (zh) |
CN (2) | CN103152520B (zh) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5254904B2 (ja) * | 2009-08-20 | 2013-08-07 | キヤノン株式会社 | 撮像装置及び方法 |
KR101943318B1 (ko) * | 2012-06-21 | 2019-01-29 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
JP5619124B2 (ja) * | 2012-12-20 | 2014-11-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理プログラムおよび画像処理方法 |
CN103338356A (zh) * | 2013-06-24 | 2013-10-02 | 武汉烽火众智数字技术有限责任公司 | 一种枪型网络摄像机远程自动后焦调整装置及其方法 |
WO2015182021A1 (ja) * | 2014-05-26 | 2015-12-03 | ソニー株式会社 | 撮像制御装置、撮像装置および撮像制御方法 |
CN105279727B (zh) * | 2014-07-08 | 2019-08-06 | 腾讯科技(深圳)有限公司 | 图像处理方法及装置 |
DE102014112648A1 (de) * | 2014-08-29 | 2016-03-03 | Carl Zeiss Ag | Bildaufnahmevorrichtung und Verfahren zur Bildaufnahme |
EP3054668B1 (en) * | 2015-02-03 | 2017-11-01 | Axis AB | Method and device for processing a video stream |
JP6576114B2 (ja) * | 2015-06-17 | 2019-09-18 | キヤノン株式会社 | 撮像装置および撮像装置の制御方法 |
CN108141515B (zh) * | 2015-09-30 | 2020-07-07 | 富士胶片株式会社 | 摄影装置及其控制方法 |
JP2017228913A (ja) | 2016-06-22 | 2017-12-28 | オリンパス株式会社 | 撮像装置 |
CN107864315B (zh) | 2016-09-21 | 2020-08-11 | 佳能株式会社 | 摄像设备、摄像设备的控制方法和记录介质 |
CN108804958A (zh) * | 2017-04-28 | 2018-11-13 | 格科微电子(上海)有限公司 | 采用扫描设备进行图像采集的方法 |
JP6997295B2 (ja) * | 2018-03-30 | 2022-01-17 | 富士フイルム株式会社 | 撮像装置、撮像方法、及びプログラム |
CN111641780A (zh) * | 2020-05-19 | 2020-09-08 | 昆山迈致治具科技有限公司 | 相机镜头目标状态的确定方法、装置、设备和介质 |
CN115190247B (zh) * | 2022-09-07 | 2022-12-13 | 国仪量子(合肥)技术有限公司 | 消像散方法、消像散装置、电子设备和存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04280172A (ja) * | 1991-03-07 | 1992-10-06 | Canon Inc | 自動焦点調節装置 |
JP2000152063A (ja) * | 1998-11-17 | 2000-05-30 | Olympus Optical Co Ltd | 撮像装置 |
US6774944B1 (en) * | 1997-01-10 | 2004-08-10 | Olympus Optical Co., Ltd. | Image taking apparatus |
CN1577039A (zh) * | 2003-07-28 | 2005-02-09 | 佳能株式会社 | 调焦系统、图像获取装置及其控制方法 |
CN101335492A (zh) * | 2007-06-28 | 2008-12-31 | 奥林巴斯映像株式会社 | 抖动校正装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62127976A (ja) * | 1985-11-29 | 1987-06-10 | Kyocera Corp | 画像記録処理装置 |
EP0818922B1 (en) * | 1991-02-01 | 2004-03-31 | Canon Kabushiki Kaisha | Interchangeable lens type camera apparatus |
JP3651996B2 (ja) * | 1996-01-12 | 2005-05-25 | キヤノン株式会社 | フランジバック調整方法及びそれを用いた撮影レンズ |
JP2000020691A (ja) | 1998-07-01 | 2000-01-21 | Canon Inc | 画像処理装置及びその方法、撮像装置及びその制御方法並びにメモリ媒体 |
US6822758B1 (en) * | 1998-07-01 | 2004-11-23 | Canon Kabushiki Kaisha | Image processing method, system and computer program to improve an image sensed by an image sensing apparatus and processed according to a conversion process |
JP4630649B2 (ja) | 2004-11-24 | 2011-02-09 | キヤノン株式会社 | カメラ |
JP2006154465A (ja) * | 2004-11-30 | 2006-06-15 | Olympus Corp | 焦点検出装置およびその制御方法 |
KR100647955B1 (ko) * | 2004-12-03 | 2006-11-23 | 엘지전자 주식회사 | 디포커스 현상을 보정하는 영상처리장치 |
JP4182117B2 (ja) * | 2006-05-10 | 2008-11-19 | キヤノン株式会社 | 撮像装置及びその制御方法及びプログラム及び記憶媒体 |
US8451338B2 (en) * | 2008-03-28 | 2013-05-28 | Massachusetts Institute Of Technology | Method and apparatus for motion invariant imaging |
JP5254904B2 (ja) * | 2009-08-20 | 2013-08-07 | キヤノン株式会社 | 撮像装置及び方法 |
-
2009
- 2009-08-20 JP JP2009191473A patent/JP5254904B2/ja not_active Expired - Fee Related
-
2010
- 2010-07-22 EP EP10170508.5A patent/EP2288140A3/en not_active Withdrawn
- 2010-08-04 US US12/849,870 patent/US8315514B2/en not_active Expired - Fee Related
- 2010-08-17 CN CN201310028358.0A patent/CN103152520B/zh not_active Expired - Fee Related
- 2010-08-17 CN CN2010102583919A patent/CN101998055B/zh not_active Expired - Fee Related
-
2012
- 2012-10-17 US US13/653,585 patent/US8634711B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04280172A (ja) * | 1991-03-07 | 1992-10-06 | Canon Inc | 自動焦点調節装置 |
US6774944B1 (en) * | 1997-01-10 | 2004-08-10 | Olympus Optical Co., Ltd. | Image taking apparatus |
JP2000152063A (ja) * | 1998-11-17 | 2000-05-30 | Olympus Optical Co Ltd | 撮像装置 |
CN1577039A (zh) * | 2003-07-28 | 2005-02-09 | 佳能株式会社 | 调焦系统、图像获取装置及其控制方法 |
CN101335492A (zh) * | 2007-06-28 | 2008-12-31 | 奥林巴斯映像株式会社 | 抖动校正装置 |
Also Published As
Publication number | Publication date |
---|---|
US20130038777A1 (en) | 2013-02-14 |
CN101998055A (zh) | 2011-03-30 |
US20110044677A1 (en) | 2011-02-24 |
EP2288140A2 (en) | 2011-02-23 |
EP2288140A3 (en) | 2017-06-21 |
CN103152520A (zh) | 2013-06-12 |
JP2011043646A (ja) | 2011-03-03 |
CN101998055B (zh) | 2013-03-06 |
US8634711B2 (en) | 2014-01-21 |
JP5254904B2 (ja) | 2013-08-07 |
US8315514B2 (en) | 2012-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103152520B (zh) | 图像捕获设备和方法 | |
CN102713713B (zh) | 焦点调节设备和焦点调节方法 | |
JP5322783B2 (ja) | 撮像装置及び該撮像装置の制御方法 | |
US20170018060A1 (en) | Image processing apparatus and image processing method | |
JP5183565B2 (ja) | 撮像装置 | |
US20080240701A1 (en) | Focus Detection Device, Focusing State Detection Method And Imaging Apparatus | |
JP5762002B2 (ja) | 撮像装置 | |
JP5947601B2 (ja) | 焦点検出装置、その制御方法および撮像装置 | |
CN103167236A (zh) | 摄像设备、图像传感器和焦点检测方法 | |
JP2007263926A (ja) | 測距装置及び方法 | |
JP2012220925A (ja) | 撮像装置およびカメラシステム | |
US8848096B2 (en) | Image-pickup apparatus and control method therefor | |
JP2012037551A (ja) | 焦点検出装置および撮像装置 | |
JP5130178B2 (ja) | 焦点距離検出装置及び撮像装置及び撮像方法及びカメラ | |
JP2012222742A (ja) | 撮像素子および撮像装置 | |
JP6238578B2 (ja) | 撮像装置およびその制御方法 | |
JP6196772B2 (ja) | 焦点検出装置、焦点検出方法およびプログラム、並びに撮像装置 | |
JP2014130231A (ja) | 撮像装置、その制御方法、および制御プログラム | |
US11303813B2 (en) | Image pickup apparatus with focus condition determination | |
JP2010200138A (ja) | 被写体追尾装置 | |
JP6576155B2 (ja) | 画像処理装置、撮像装置、および画像表示システム | |
JP5783728B2 (ja) | 撮像装置およびその被写体距離分布情報取得方法 | |
JP2014078025A (ja) | 撮像装置およびカメラシステム | |
JP5619227B2 (ja) | 撮像装置及び該撮像装置の制御方法 | |
JP2018031931A (ja) | 焦点検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160217 Termination date: 20200817 |
|
CF01 | Termination of patent right due to non-payment of annual fee |