CN101622861B - 摄像设备及其控制方法 - Google Patents

摄像设备及其控制方法 Download PDF

Info

Publication number
CN101622861B
CN101622861B CN2008800053834A CN200880005383A CN101622861B CN 101622861 B CN101622861 B CN 101622861B CN 2008800053834 A CN2008800053834 A CN 2008800053834A CN 200880005383 A CN200880005383 A CN 200880005383A CN 101622861 B CN101622861 B CN 101622861B
Authority
CN
China
Prior art keywords
foreign matter
image
dust
matter information
picture signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008800053834A
Other languages
English (en)
Other versions
CN101622861A (zh
Inventor
浜野英之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101622861A publication Critical patent/CN101622861A/zh
Application granted granted Critical
Publication of CN101622861B publication Critical patent/CN101622861B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H04N23/811Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation by dust removal, e.g. from surfaces of the image sensor or processing of the image signal output by the electronic image sensor

Abstract

本发明使得即使在灰尘附着状态改变时,拍摄图像数据也尽可能与灰尘校正数据相匹配。一种摄像设备,包含:摄像单元,其通过图像传感器对由拍摄镜头形成的被摄体图像进行光电转换,以生成图像信号;异物信息检测单元,其基于图像信号来检测异物信息,异物信息用作至少与附着于在图像传感器前面的光学元件的异物的位置有关的信息;以及关联单元,其将图像信号与异物信息相关联,并且将由异物信息检测单元所检测到的异物信息不仅与在检测到该异物信息之后获得的图像信号相关联,还甚至与在检测到该异物信息之前获得的图像信号相关联。

Description

摄像设备及其控制方法
技术领域
本发明涉及在使用如CCD或CMOS传感器等图像传感器的摄像设备中,对由附着于诸如在图像传感器前面的光学低通滤波器等光学元件的表面的异物所导致的图像质量的劣化进行抑制的技术。 
背景技术
在数字照相机等摄像设备中,灰尘或微粒(以下简称为灰尘)等异物有时附着在固定于图像传感器上的图像传感器保护玻璃的表面、设置在图像传感器前面的光学元件的表面或者光学系统(以下统称为图像传感器光学组件)上。当灰尘附着在图像传感器光学组件上时,灰尘阻挡了光,使得被阻挡了光的部分处的图像不被拍摄到,从而拍摄图像的质量劣化。 
与在数字照相机中一样,在使用卤化银胶片的照相机中,胶片上的灰尘也被拍摄在了图像中。然而,胶片一帧一帧地移动,因此灰尘很少被拍摄在全部帧上。 
相反,数字照相机的图像传感器不移动,并且一个图像传感器拍摄图像。如果灰尘附着在图像传感器光学组件上,则灰尘会被拍摄到许多帧(拍摄图像)上。特别地,镜头可更换型数字照相机存在这样的问题:更换镜头时灰尘容易进入照相机。 
因此,照相机的用户必须一直关注灰尘在图像传感器光学组件上的附着,并且花费大量精力来检查和清洁灰尘。尤其是由于图像传感器位于照相机内相对深的位置,因此很难清洁和检查灰尘。 
在安装/拆卸镜头时,灰尘进入镜头可更换型数字照相机。 另外,当将焦平面快门驱动到紧位于图像传感器之前时,因磨损等导致灰尘容易附着在图像传感器光学组件上。 
由于图像传感器上的灰尘通常附着在保护玻璃或光学元件上,而非附着在图像传感器的表面上,因此,依赖于拍摄镜头的光圈值或光瞳位置,灰尘在不同状态中被摄像。也就是说,随着光圈值接近开放F值(open F-number),拍摄图像模糊,因此即使附着了小灰尘,也对图像几乎没有影响。相反,随着光圈值增大,这种灰尘被清楚地摄像,因此影响图像。 
为了解决该问题,已知存在一种使灰尘较不明显的方法。根据该方法,当将镜头设置为大的光圈值时,预先通过拍摄白墙等来准备图像传感器上的仅仅灰尘的图像。该图像用于与普通拍摄图像相结合(参见日本特开2004-222231)。 
还提出了一种振动图像传感器光学组件,以抖去附着在其上的灰尘的技术(参见日本特开2002-204379)。 
可以使如下方法相结合:如日本特开2004-222231中所公开的一种检测图像传感器上的灰尘的位置以获得为了校正拍摄图像部的灰尘校正数据并校正拍摄图像数据的方法,以及如日本特开2002-204379中所公开的一种抖去灰尘的方法。由于在抖去且减少灰尘之后再对包含灰尘图像的拍摄图像数据进行校正,因此该技术可以提高校正精度。 
然而,如果在获得灰尘校正数据之后抖去灰尘,则抖去灰尘之后的灰尘附着状态与灰尘校正数据不匹配。 
在能够使用可更换镜头的摄像设备中,灰尘可能在更换镜头时新附着到镜头上。在这种情况下,灰尘附着状态也不匹配灰尘校正数据。 
发明内容
本发明旨在克服现有缺陷,并且旨在使得即使在灰尘附着状态改变时拍摄图像数据也尽可能与灰尘校正数据相匹配。 
为了解决以上问题并且实现以上目的,根据本发明的第一方面,提供了一种摄像设备,所述摄像设备特征在于包括:摄像单元,其通过图像传感器对由拍摄镜头形成的被摄体图像进行光电转换以生成图像信号;异物信息检测单元,其基于图像信号来检测异物信息,用作至少一个在所述图像传感器前面设置的光学元件上附着的异物的位置上的信息;以及关联单元,其将由所述异物信息检测单元检测到的所述异物信息与由所述摄像单元生成的所述图像信号相关联,其中,所述关联单元将异物信息与在检测到该异物信息之后获得的图像信号相关联,并且当满足预定的条件时,还将该异物信息与在检测该异物信息之前获得的图像信号相关联。 
根据本发明的第二方面,提供一种摄像设备的控制方法,所述摄像设备具有用于对被摄体图像进行光电转换的图像传感器,其特征在于,所述控制方法还包括:摄像步骤,由所述图像传感器对由拍摄镜头形成的被摄体图像进行光电转换以生成图像信号;异物信息检测步骤,基于图像信号来检测异物信息,用作至少一个在所述图像传感器前面设置的光学元件上附着的异物的位置上的信息;以及关联步骤,将在所述异物信息检测步骤中检测到的所述异物信息与在所述摄像步骤中生成的所述图像信号相关联,其中,所述关联步骤将异物信息与在检测到所述异物信息之后获得的图像信号相关联,并且当满足预定的条件时,还将所述异物信息与在检测所述异物信息之前获得的图像信号相关联。 
根据下面参考附图对典型实施例的说明,本发明的其它特征将变得清楚。 
附图说明
图1是示出用作根据本发明第一实施例的摄像设备的镜头可更换型单镜头反光数字照相机的电路配置的框图; 
图2是用于说明根据第一实施例的数字照相机中检测灰尘的处理; 
图3是用于说明根据第一实施例的数字照相机中的拍摄处理的流程图; 
图4是用于说明根据第一实施例的第一关联处理的流程图; 
图5是用于说明根据第一实施例的第二关联处理的流程图; 
图6是用于说明根据第一实施例的拍摄历史的具体例子的表; 
图7是用于说明根据第一实施例的灰尘校正处理的流程图; 
图8是用于说明根据第二实施例的拍摄历史的具体例子的表;以及 
图9是用于说明根据第三实施例的拍摄历史的具体例子的表。 
具体实施方式
下面将参考附图详细说明本发明的优选实施例。 
第一实施例
图1是示出用作根据本发明第一实施例的摄像设备的镜头可更换型单镜头反光数字照相机的电路配置的框图。 
镜头单元101是包括多个透镜的可更换型拍摄镜头单元。镜头单元101与照相机主体中的微计算机128通信,并且控制镜头单元101中的自动调焦(AF)控制器101a以对镜头单元101中的调焦镜头进行移动和调焦。基于测距电路118的输出来获得此时的 镜头移动量。镜头单元101包含用以改变光圈值的光圈控制器101b。快速返回镜102插在拍摄光路中,并且可以移动到快速返回镜102将被摄体光从镜头单元101引导到取景器光学系统(未示出)的位置以及快速返回镜102从拍摄光路缩回的位置。附图标记103表示快门;而附图标记104表示对到达图像传感器105的被摄体光学图像的空间频率进行调节的光学低通滤波器(下文中也称为光学元件)。 
图像传感器105将由镜头单元101形成的被摄体图像光电转换成图像信号。A/D转换器106将从图像传感器105输出的图像信号(模拟信号)转换成数字信号。定时生成器107将时钟信号和控制信号提供至图像传感器105和A/D转换器106,以操作图像传感器105和A/D转换器106。如果诸如灰尘或微粒等异物附着在光学低通滤波器104的表面,则灰尘将被拍摄在由图像传感器105生成的图像中,从而使得图像质量劣化。第一实施例涉及对包含异物图像的图像进行校正,从而抑制图像质量劣化的技术。 
图像处理器108基于附加到图像数据上的处理数据,来对来自A/D转换器106的数字数据或来自存储器控制器111的图像数据进行预定的像素插值处理和显影处理等。存储器控制器111控制A/D转换器106、定时生成器107、图像处理器108、显示控制器109、图像显示存储器112、存储器113、压缩/解压缩电路114等。 
将从A/D转换器106输出的数字数据经由图像处理器108和存储器控制器111写入图像显示存储器112或存储器113。由TFTLCD等构成显示器110。显示控制器109控制显示器,以对为了显示而被写在图像显示存储器112中的图像数据进行显示。存储器113具有用作图像缓冲器的区域,该图像缓冲器用于对拍摄的未压缩图像数据进行临时存储。存储器113具有用作工作缓冲器 的区域,该工作缓冲器用于保持当图像处理器108对图像数据进行显影处理时所使用的处理数据、保持AF、AE和AWB计算结果以及存储临时使用的数据。此外,存储器113具有用作文件缓冲器的区域,所述文件缓冲器用于存储由压缩/解压缩电路114所压缩的图像数据。存储器113具有足以存储预定数量的静止图像和预定时间的运动图像的存储容量。即使在连续拍摄静止图像的连续拍摄中,也可以快速地将大量图像数据写入存储器113中。注意,AF、AE和AWB分别表示自动调焦控制、自动曝光控制和自动白平衡控制。 
压缩/解压缩电路114通过自适应离散余弦变换(ADCT)来将图像数据压缩为JPEG数据,或者将所压缩的图像数据解压缩。压缩/解压缩电路114读取存储在存储器113中的图像数据,对所读取的图像数据进行压缩或解压缩,并且将处理后的数据写入存储器113中。 
振动控制器115进行控制以驱动压电元件104a,振动光学元件104,并且抖去光学元件104上的灰尘。 
快门控制器116控制快门103的操作。 
镜控制器117进行控制,以将快速返回镜102驱动到拍摄光路之外。 
测距电路118测量到被摄体的距离。基于测量结果,AF控制器101a执行镜头单元101的调焦控制。 
测光电路119测量被摄体的亮度,并且基于测量输出来控制曝光。 
微计算机128控制具有上述配置的数字照相机的操作。非易失性存储器127存储拍摄处理程序、图像处理程序和用于将图像文件数据记录到记录介质上的程序等各种程序。由微计算机128执行这些程序。非易失性存储器127还存储诸如用于实施并执行 这些程序的多任务运行的O S等各种程序以及用于进行各种控制操作的调节值。 
将说明操作构件。操作构件120、121和122用于将各种操作指令输入到微计算机128,并且由开关或拔号盘构成。将详细说明这些操作构件。 
清洁开关120用于指示灰尘去除操作(异物去除操作,将在后面说明)。释放开关121具有:开关SW1,通过按压释放按钮一半来接通开关SW1,并且指示诸如AF(自动调焦)处理和AE(自动曝光)处理等拍摄预备操作的开始;以及开关SW2,通过完全按压该释放按钮来接通开关SW2。当接通开关SW2时,执行拍摄处理,以将从图像传感器105读出的信号经由A/D连接器106和存储器控制器111写入存储器113。并且,图像处理器108用于对图像数据进行与白平衡模式设置相对应的白平衡校正处理,并且进行显影处理。此外,进行记录处理,以从存储器113读出经过了显影处理的图像数据、由压缩/解压缩电路114压缩图像数据、并将压缩后的图像数据写入记录介质126中。菜单操作开关122具有菜单键、设置键和四向选择器(four-way selector)键等的结合。当检查显示器110时,用户可以使用菜单操作开关122来改变诸如照相机拍摄条件和显影条件等各种设置,或者选择灰尘检测处理。 
电源控制器123包括电池检测器、DC-DC转换器和用于使块(block)切换为通电的开关电路。电源控制器123检测是否安装了电池、电池的类型和剩余电量。电源控制器123基于检测结果或来自微计算机128的指示来控制DC-DC转换器,以持续必要的时间段向包括记录介质在内的各个单元提供必要的电压。接口(I/F)124是如存储卡或硬盘等记录介质126的接口。连接器125将如存储器或硬盘等记录介质126连接到接口124。记录介质 126是存储卡或硬盘等,并且具有由半导体存储器或磁盘等构成的记录介质部126A、与数字照相机的接口(I/F)126B和连接器126C。 
在本实施例中,用于连接记录介质126的接口124和连接器125的数量各为一个。然而,用于连接记录介质126的接口和连接器的数量是任意的,诸如一个接口和一个连接器,或者多个接口或连接器等。还可以结合不同标准的接口和连接器。 
将参考流程图说明具有上述配置的数字照相机的操作。 
图2是用于说明根据第一实施例的数字照相机中的检测灰尘(异物信息)的处理。在非易失性存储器127中存储用于执行该处理的程序,并且在微计算机128的控制下执行该程序。 
如上所述,灰尘检测处理(异物信息检测处理)检测附着于光学元件104的灰尘,并且在拍摄灰尘检测图像时执行灰尘检测处理。当进行灰尘检测处理时,通过使照相机对准诸如面光源(surface light source)的出射面(exit surface)等的均匀亮度表面来进行灰尘检测的准备。尽管本实施例使用普通拍摄镜头,也可以在照相机体中包含用于照射图像传感器的照明部件,从而以均匀亮度照射图像传感器并且检测灰尘。根据本实施例的灰尘检测图像是具有均匀亮度的图像。 
当用户操作菜单操作开关122并且从菜单中选择和指示灰尘检测处理的开始时,开始图2的流程图中所示的处理。 
在步骤S201中,微计算机128与镜头单元101通信,指示光圈控制器101b的光圈控制值上,并且使光圈变窄至预定光圈值。所设置的光圈值是用于灰尘检测的最小光圈值(如,F32)。在光圈被变窄后,微计算机128进入步骤S202以执行拍摄处理。将参考图3详细说明步骤S202中的拍摄处理的细节。 
存储器113临时存储在步骤S202中获得的图像数据。在拍 摄处理结束后,微计算机128进入步骤S 203,并且控制光圈控制器101b以将镜头单元101的光圈设置为开放F值。 
然后,微计算机128进入步骤S204以从存储在存储器113中的拍摄图像中顺次读出与各像素的位置相对应的数据,并且将所读出的数据提供至图像处理器108。在步骤S205中,图像处理器108将读出的像素数据的亮度值与预设阈值(预设亮度值)进行比较。 
如果灰尘附着于光学元件104,则进入与灰尘附着位置相对应的像素的光量减少。因此,通过将各个像素数据与预设阈值进行比较,可以检测出由于附着灰尘而导致出现图像错误的像素的位置。如果在步骤S 205中检测到信号水平等于或低于阈值的像素位置,则将像素位置存储在存储器113中(步骤S206)。 
如果微计算机128在步骤S207中判断出已经处理了所有像素数据,则存储器113存储被判断为具有灰尘的像素位置。将存储在存储器113中的像素位置作为灰尘校正数据与灰尘校正数据的获取日期和时间一起登记到非易失性存储器127中。每次获取灰尘校正数据时,均将灰尘校正数据登记到非易失存储器127中。也就是说,根据本实施例的图像摄像设备可以保持多个灰尘校正数据。将在后面详细说明所登记的灰尘校正数据与拍摄图像信号的关联。 
将参考图3所示的流程图说明拍摄处理的细节。 
图3是用于说明根据第一实施例的数字照相机中的拍摄处理的流程图。在非易失性存储器127中存储用于执行该处理的程序,并且在微计算机128的控制下执行该程序。 
当开关SW1接通时,微计算机128使用测距电路118和AF控制器101a进行自动调焦控制,并且将调焦镜头控制在聚焦位置。同时,微计算机128使用测光电路119进行测光操作,并且根据 所设置的拍摄模式来判断快门控制值和光圈值。在这些操作结束后,微计算机128执行图3中的拍摄处理例程。 
在步骤S301中,微计算机128指示微控制器117执行使快速返回镜102从拍摄光路缩回的所谓镜上升(mirror-up)操作。 
在步骤S302中,微计算机128开始在图像传感器105中的存储电荷。微计算机128在步骤S303中指示快门控制器116使快门的前帘移动,并且在步骤S304进行曝光。 
在步骤305中,微计算机128指示快门控制器116使快门的后面部分移动。 
在步骤S306中,微计算机128结束在图像传感器105中的电荷存储。 
在步骤S307中,微计算机128从图像传感器105读出图像信号,并且将由A/D转换器106和图像处理器108处理后的图像数据临时存储在存储器113中。在从图像传感器105读出所有图像信号之后,微计算机128进入步骤S308,以执行使快速返回镜102返回到拍摄光路的镜降下(mirror-down)操作。 
在步骤S309中,微计算机128指示快门控制器116将前帘和后帘返回到初始待机位置,并且结束一系列拍摄操作。 
将说明从光学元件104物理地去除附着的灰尘的异物去除处理(以下将称为灰尘去除处理)。 
在本实施例中,将用于执行去除灰尘的处理的模式称为清洁模式。当执行清洁模式时,微计算机128指示振动控制器115振动压电元件104a,即光学元件104,并且抖去附着于光学元件104表面的灰尘。通过系统设计来适当设置执行清洁模式的时刻。在本实施例中,当用户操作清洁开关120时清洁模式开始。 
当清洁模式执行到结束灰尘去除处理时,微计算机128将包括灰尘去除处理执行日期和时间以及驱动时间的历史记录在非 易失性存储器127中。 
将说明灰尘校正数据与拍摄图像的关联,即,选择对各拍摄图像有效的灰尘校正数据的方法。 
在普通图像的拍摄和灰尘校正数据的获取之后,执行灰尘校正数据和拍摄图像的关联。首先将说明在普通图像的拍摄之后的关联(第一关联处理)。 
图4是用于说明在普通图像的拍摄之后的关联的流程图。在非易失性存储器127中存储用于执行该处理的程序,并且在微计算机128的控制下执行该程序。 
在参考图3所述的拍摄处理(步骤S300)结束后,微计算机128在步骤S401中将拍摄图像获取日期和时间作为拍摄历史记录在非易失性存储器127中。将在后面说明如何使用所记录的拍摄图像获取日期和时间。在步骤S402中,微计算机128判断非易失存储器127中是否存在灰尘校正数据。如果不存在灰尘校正数据(步骤S402中的“否”),则没有可以与拍摄图像相关联的灰尘校正数据。从而,微计算机128在步骤S405中直接记录拍摄图像,并且结束该关联处理的序列。 
如果非易失性存储器127中存在灰尘校正数据(步骤S402中的“是”),则微计算机128进入步骤S403,以在至少一个灰尘校正数据中读出获取日期和时间与图像拍摄日期和时间最接近的灰尘校正数据,即读出最新的灰尘校正数据。在步骤S403中,微计算机128将拍摄图像与该灰尘校正数据相关联。更具体地,可以通过在记录了拍摄中的照相机设置值等的、用作图像文件的头区域的Exif区域中附加地写入灰尘校正数据,来实现该关联。还可以通过将灰尘校正数据单独地记录为文件并且仅在图像数据中记录指向灰尘校正数据文件的链接信息,来实现该关联。然而,如果图像文件和灰尘校正数据文件是分开记录的, 则当移动图像文件时链接可能丢失。因此,期望使灰尘校正数据和图像数据保持在一起。在步骤S405中,微计算机128将拍摄图像记录在记录介质126中,并且结束图像拍摄时的一系列第一关联操作。 
当图像拍摄时保持了多个灰尘校正数据时,按上述方式将拍摄图像与最近的灰尘校正数据相关联。因此,拍摄图像可以与几乎不受灰尘附着状态随着时间而改变的影响的、并且对灰尘校正最有效的数据相关联。 
然后,将说明在灰尘校正数据的获取之后的关联(第二关联处理)。 
图5是用于说明在灰尘校正数据的获取之后的关联的流程图。在非易失性存储器127中存储用于执行该处理的程序,并且在微计算机128的控制下执行该程序。 
在参考图2说明的灰尘检测处理(步骤S200)结束且在非易失性存储器127中记录了灰尘校正数据之后,微计算机128在步骤S501中判断是否已经在记录介质126中写入了拍摄图像。如果还没有在记录介质126中写入拍摄图像(步骤S501中为“否”),则不存在要与在步骤S200中获取的灰尘校正数据相关联的图像,因此第二关联处理结束。如果已经在记录介质126中写入了拍摄图像(步骤S501中为“是”),则微计算机128进入步骤S502。在步骤S502中,微计算机128读出非易失存储器127中记录的拍摄历史。如上所述,所记录的拍摄历史包括拍摄图像的拍摄日期和时间、当进行灰尘去除处理时的日期和时间以及拍摄中使用的拍摄镜头的类型。 
图6示出非易失存储器127中记录的拍摄历史的例子。 
在图6中,灰尘校正数据B是在步骤S200中获取的灰尘校正数据。在步骤S502中,微计算机128读出自获取除灰尘校正数 据B以外的、最近获取的灰尘校正数据以来,即自获取图6中的灰尘校正数据A时的日期和时间以来的拍摄历史。如果在灰尘校正数据B之前不存在灰尘校正数据获取历史,则读出在获取灰尘校正数据B之前的整个拍摄历史。 
在步骤S503中,选择要关联的图像。在图6的例子中,图像1至图像8是可以与灰尘校正数据B相关联的对象,但是在图像3的拍摄与图像4的拍摄之间进行了灰尘去除处理。因此,判断为在拍摄图像3之前的图像拍摄和拍摄图像4之后的图像拍摄之间,灰尘附着状态很可能已经改变了。灰尘校正数据B是在获取图像4之后在未进行灰尘去除处理的情况下获取的。估计对于图像1至图像3的灰尘附着状态,灰尘校正数据A的灰尘信息比灰尘校正数据B的更可靠,并且对于图像4至图像8的灰尘附着状态,灰尘校正数据B的灰尘信息比灰尘校正数据A的更可靠。也就是说,对于图像4至图像8,认为使用灰尘校正数据B的灰尘检测结果可以更有效地进行灰尘校正。因为这个原因,在图6的例子中,在步骤S503中选择图像4至图像8。 
在步骤S504中,微计算机128检查出所选择的图像记录在了记录介质126上,并且更新与所记录的图像相关联的灰尘校正数据。 
在图6的例子中,在获取灰尘校正数据B之前,由第一关联处理(图4)将灰尘校正数据A与图像1至图像8相关联。当将图像4至图像8记录到记录介质上时,将与这些图像相关联的灰尘校正数据从灰尘校正数据A更新为灰尘校正数据B。 
以这种方式,根据第一实施例,根据灰尘去除部件(压电元件104a)的操作历史,将拍摄图像与被预测为具有更高校正效果的灰尘校正数据相关联。结果,可以高精度地进行灰尘校正,而不强制摄像设备的用户进行选择要应用到拍摄图像的灰尘校 正数据的烦杂操作。即使在图像拍摄之后获取灰尘校正数据,也可以实现高精度的灰尘校正。 
在第一实施例中,在步骤S502中读出自获取最近的灰尘校正数据以来的拍摄历史,但还可以从记录在记录介质126上的图像中读出自最早的拍摄日期和时间的图像以来的拍摄历史。 
将说明根据第一实施例的数字照相机的普通拍摄中的灰尘校正处理(用于普通拍摄图像的灰尘校正处理)。 
也可以由数字照相机内部的图像处理器108或者在数字照相机外部的图像处理设备来进行对拍摄图像的灰尘校正处理。当外部图像处理设备进行灰尘校正数据时,按照如下来进行处理。通过参考图4和图5所述的处理,将灰尘校正数据附加地写入例如用作记录介质126上的图像文件的头区域的Exif区域中。也就是说,当将最优灰尘校正数据与拍摄图像数据相关联(附加在拍摄图像数据上)时,将最优灰尘校正数据记录为记录介质126上的图像文件。通过将包含拍摄图像数据的图像文件和相应的灰尘校正数据从记录介质126传送到外部图像处理设备,外部图像处理设备可以与数字照相机内部的图像处理器108类似地执行灰尘校正处理。外部图像处理设备也形成为具有与数字照相机内部的图像处理器相同的处理器,或者可以通过在个人计算机上运行应用软件来实现。 
图7是用于说明根据第一实施例而针对拍摄图像数据执行的灰尘校正处理的流程图。 
在步骤S701中,检查用于校正拍摄图像数据的灰尘校正数据是否附加到了图像数据上。除了判断是否存在灰尘校正数据之外,即使灰尘校正数据存在,也还判断是否将该灰尘校正数据应用到拍摄图像数据。该判断既可以由摄像设备或图像处理设备自动地进行,也可以由用户来进行。 
如果在步骤S701判断为没有附加灰尘校正数据,则处理进入步骤S706。 
如果在步骤S701中判断为附加了灰尘校正数据,则处理进入步骤S702,以顺次读出拍摄图像数据的像素数据。在步骤S703中,将所读出的像素数据的像素位置与登记为灰尘校正数据的像素地址进行比较。如果像素位置与地址(位置)一致,则判断为该像素数据与检测到灰尘的像素位置相对应。 
处理进入步骤S704,以由图像处理器对所读出的像素数据进行校正,并且处理进入步骤S705。该校正处理可以采用各种方法,并且在第一实施例中,通过使用周边的正常像素数据进行插值来获得与灰尘位置相对应的像素数据。 
如果在步骤S703中判断为像素数据与检测到灰尘的像素位置不相对应,则处理进入步骤S705。 
在步骤S705中,判断是否检查并处理了拍摄图像数据的所有像素数据。如果判断为还存在未处理的像素数据,则处理返回到步骤S702,以针对未处理的像素数据进行上述处理。 
如果在步骤S705中判断为已经读出并处理了所有像素数据,则意味着针对一个拍摄图像的拍摄图像数据完成了灰尘校正处理。 
在步骤S706中,图像处理器对处理后的图像数据进行如压缩处理等其余图像处理,从而完成一系列灰尘校正操作。 
在第一实施例中,将一个灰尘校正数据与一个图像相关联,但是也可以将多个灰尘校正数据与一个图像相关联。在这种情况下,使多个灰尘校正数据中更可靠的灰尘校正数据的优先级增大以进行灰尘校正,并且可实现高可靠性的灰尘校正处理。 
第二实施例
将说明本发明的第二实施例。根据第二实施例的数字照相 机的构件与第一实施例中的相同,并将省略其说明。灰尘检测处理、拍摄处理、灰尘校正处理和在普通图像的拍摄之后的关联(第一关联处理)也与第一实施例中的相同。第二实施例将说明使用图像的拍摄日期和时间作为拍摄图像的历史信息来更新关联的方法,即,针对第一实施例的第二关联处理(步骤S504)的变形。换言之,在第二实施例中,除在步骤S504中执行的处理大体不同之外,第二关联处理的操作显然与图5所示的相同。 
以下将参考图5及图8说明第二实施例中的第二关联处理。 
图8是示出非易失存储器127中记录的拍摄历史的例子的表。在图8中,灰尘校正数据D是在图5的步骤S200中获取的灰尘校正数据。在图5的步骤S502中,读出自获取除灰尘校正数据D以外的、最近获取的灰尘校正数据以来,即自获取图8中的灰尘校正数据C时的日期和时间以来的拍摄历史。如果在灰尘校正数据D之前不存在灰尘校正数据获取历史,则读出在获取灰尘校正数据D之前的整个拍摄历史。 
在步骤S503中,选择要被关联的图像。在图8的例子中,图像11至图像18可以是与灰尘校正数据D相关联的对象,但是在图像13的拍摄与图像14的拍摄之间已经经过了大约20天的时间段。因此,判断为在拍摄图13之前的图像拍摄与拍摄图14之后的图像拍摄之间,灰尘附着状态很可能已经改变了。灰尘校正数据D是在获取图像14之后的相对近的日期和时间获取的。因此,估计对于图像11至图像13的灰尘附着状态,灰尘校正数据C的灰尘信息比灰尘校正数据D的更可靠,并且对于图像14至图像18的灰尘附着状态,灰尘校正数据D的灰尘信息比灰尘校正数据C的更可靠。也就是说,对于图像14至图像18,认为使用灰尘校正数据D的灰尘检测结果可以更有效地进行灰尘校正。因为这个原因,在图8的例子中,在步骤S503中选择图像 14至图像18。在步骤S 504中,检查出所选择的图像记录在了记录介质126上,并且更新与所述记录的图像相关联的灰尘校正数据。在图8的例子中,在获取灰尘校正数据D之前,由第一关联处理(图4)将灰尘校正数据C与图像11至图像18相关联。当将图像14至图像18记录到记录介质上时,将与这些图像相关联的灰尘校正数据从灰尘校正数据C更新为灰尘校正数据D。 
以这种方式,根据拍摄图像的拍摄日期和时间信息将拍摄图像与被预测为具有更高校正效果的灰尘校正数据相关联。可以高精度地进行灰尘校正,而不强制摄像设备的用户进行选择要应用到拍摄图像的灰尘校正数据的烦杂操作。即使在图像拍摄之后获取灰尘校正数据,也可以实现高精度的灰尘校正。 
第三实施例
将说明本发明第三实施例。根据第三实施例的数字照相机的构件与第一实施例中的相同,并将省略其说明。灰尘检测处理、拍摄处理、灰尘校正处理以及在普通图像的拍摄之后的关联(第一关联处理)也与第一实施例中的相同。第三实施例将说明识别图像拍摄中所使用的拍摄镜头的类型作为拍摄图像的历史信息并且更新关联的方法,即,针对第一实施例的第二关联处理(步骤S504)的变形。也就是说,在第三实施例中,除在步骤S504中执行的处理大体不同之外,第二关联处理的操作显然与图5所示的流程图的相同。 
以下将参考图5及图9说明第三实施例中的第二关联处理。 
图9是示出非易失存储器127中记录的拍摄历史的例子的表。在图9中,灰尘校正数据F是在图5的步骤S200中获取的灰尘校正数据。在图5的步骤S502中,读出自获取除灰尘校正数据F以外的、最近获取的灰尘校正数据以来,即自获取灰尘校正数据E时的日期和时间以来的拍摄历史。如果在灰尘校正数 据F之前不存在灰尘校正数据获取历史,则读出在获取灰尘校正数据F之前的整个拍摄历史。 
在步骤S503中,选择要被关联的图像。在图9的例子中,图像21至图像28是可以与灰尘校正数据F相关联的对象,但是在图像23的拍摄与图像24的拍摄之间,拍摄中所使用的镜头已经改变了,即镜头已经被更换。在镜头可更换型摄像设备中,在更新镜头时灰尘可能从摄像设备外部进入并且附着于光学元件104。也就是说,判断为在拍摄图23之前的图像拍摄与拍摄图24之后的图像拍摄之间,灰尘附着状态很可能已经改变了。灰尘校正数据F是在获取图像24之后未更换镜头而获取的。从而,估计对于图像21至图像23的灰尘附着状态,灰尘校正数据E的灰尘信息比灰尘校正数据F的更可靠,并且对于图像24至图像28的灰尘附着状态,灰尘校正数据F的灰尘信息比灰尘校正数据E的更可靠。也就是说,对于图像24至图像28,认为使用灰尘校正数据F的灰尘检测结果可以更有效地进行灰尘校正。因为这个原因,在图9的例子中,在步骤S503中选择图像24至图像28。在步骤S504中,检查出所选择的图像记录在了记录介质126上,并且更新与所述记录的图像相关联的灰尘校正数据。在图9的例子中,在获取灰尘校正数据F之前,由第一关联处理(图4)将灰尘校正数据E与图像21至图像28相关联。当将图像24至图像28记录到了记录介质上时,将与这些图像相关联的灰尘校正数据从灰尘校正数据E更新为灰尘校正数据F。 
如上所述,根据拍摄中使用的镜头类型将拍摄图像与被预测为具有更高校正效果的灰尘校正数据相关联。可以高精度地进行灰尘校正,而不强制摄像设备的用户进行选择要应用到拍摄图像的灰尘校正数据的烦杂操作。即使在图像拍摄之后获取灰尘校正数据,也可以实现高精度的灰尘校正。 
其它实施例
在上面的实施例中,使用灰尘去除处理的执行历史、图像数据获取的日期和时间或者安装镜头的历史作为摄像设备的操作历史来进行处理。然而,使用的历史信息不限于一个,也可以适当地使这些历史信息相结合并且用于判断。 
本实施例的目的还可以通过如下方法实现。更具体地,将存储了用于实现上述实施例的功能的软件的程序代码的存储介质(或者记录介质)应用到系统或设备。系统或设备的计算机(CPU或MPU)读出并执行存储在存储介质中的程序代码。在这种情况下,从存储介质读出的程序代码实现了上述实施例的功能,并且存储该程序代码的存储介质组成了本发明。当计算机执行读出的程序代码时,实现上述实施例的功能。并且,本发明包括这种情况:在计算机上运行的OS(操作系统)等基于程序代码的指令进行部分或者全部的实际处理,从而实现上述实施例的功能。 
此外,本发明包括下面的情况。更具体地,将从存储介质读出的程序代码写在插入到计算机的功能扩展卡的存储器或者与计算机连接的功能扩展单元的存储器。然后,功能扩展卡或者功能扩展单元的CPU基于程序代码的指令来进行部分或者全部的实际处理,从而实现上述实施例的功能。 
当将本发明应用到上述存储介质时,存储介质存储与上述序列相对应的程序代码。 
尽管参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求的范围符合最宽的解释,以包含所有这类变形、等同结构和功能。 
本申请要求2007年7月24日提交的日本专利申请2007-192650的优先权,在此通过引用包含其全部内容。 

Claims (4)

1.一种摄像设备,其特征在于,包括:
摄像单元,其通过图像传感器对由拍摄镜头形成的被摄体图像进行光电转换,以生成图像信号;
异物信息检测单元,其基于所述图像信号来检测异物信息,所述异物信息用作至少与附着于在所述图像传感器前面的光学元件的异物的位置有关的信息;
关联单元,其将由所述异物信息检测单元检测到的所述异物信息与由所述摄像单元生成的所述图像信号相关联;以及
异物去除单元,其去除附着于所述光学元件的异物,
其中,所述关联单元将所述异物信息与在检测到所述异物信息之后获得的图像信号相关联,以及所述关联单元还将所述异物信息与在所述异物去除单元执行异物去除操作之后并且在检测到所述异物信息之前获得的图像信号相关联。
2.一种摄像设备,其特征在于,包括:
摄像单元,其通过图像传感器对由拍摄镜头形成的被摄体图像进行光电转换,以生成图像信号;
异物信息检测单元,其基于所述图像信号来检测异物信息,所述异物信息用作至少与附着于在所述图像传感器前面的光学元件的异物的位置有关的信息;以及
关联单元,其将由所述异物信息检测单元检测到的所述异物信息与由所述摄像单元生成的所述图像信号相关联,
其中,所述关联单元将所述异物信息与在检测到所述异物信息之后获得的图像信号相关联,以及所述关联单元还将所述异物信息与在对所述摄像设备中所安装的拍摄镜头进行拆卸/安装操作之后并且在检测到所述异物信息之前获得的图像信号相关联。
3.一种摄像设备的控制方法,所述摄像设备具有用于对被摄体图像进行光电转换的图像传感器,其特征在于,所述控制方法包括:
摄像步骤,通过所述图像传感器对由拍摄镜头形成的被摄体图像进行光电转换,以生成图像信号;
异物信息检测步骤,基于所述图像信号来检测异物信息,所述异物信息用作至少与附着于在所述图像传感器前面的光学元件的异物的位置有关的信息;
关联步骤,将在所述异物信息检测步骤中检测到的所述异物信息与在所述摄像步骤中生成的所述图像信号相关联;以及
异物去除步骤,去除附着于所述光学元件的异物,
其中,在所述关联步骤中,将所述异物信息与在检测到所述异物信息之后获得的图像信号相关联,以及在所述关联步骤中,还将所述异物信息与在所述异物去除步骤的异物去除操作之后并且在检测到所述异物信息之前获得的图像信号相关联。
4.一种摄像设备的控制方法,所述摄像设备具有用于对被摄体图像进行光电转换的图像传感器,其特征在于,所述控制方法包括:
摄像步骤,通过所述图像传感器对由拍摄镜头形成的被摄体图像进行光电转换以生成图像信号;
异物信息检测步骤,基于所述图像信号来检测异物信息,所述异物信息用作至少与附着于在所述图像传感器前面的光学元件的异物的位置有关的信息;以及
关联步骤,将在所述异物信息检测步骤中检测到的所述异物信息与在所述摄像步骤中生成的所述图像信号相关联,
其中,在所述关联步骤中,将所述异物信息与在检测到所述异物信息之后获得的图像信号相关联,以及在所述关联步骤中,将所述异物信息与在对所述摄像设备中所安装的拍摄镜头进行拆卸/安装操作之后并且在检测到所述异物信息之前获得的图像信号相关联。
CN2008800053834A 2007-07-24 2008-06-17 摄像设备及其控制方法 Expired - Fee Related CN101622861B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007192650A JP5046769B2 (ja) 2007-07-24 2007-07-24 撮像装置及びその制御方法及びプログラム
JP192650/2007 2007-07-24
PCT/JP2008/061387 WO2009013962A1 (en) 2007-07-24 2008-06-17 Image capturing apparatus, control method therefor, and program

Publications (2)

Publication Number Publication Date
CN101622861A CN101622861A (zh) 2010-01-06
CN101622861B true CN101622861B (zh) 2012-03-28

Family

ID=40281221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008800053834A Expired - Fee Related CN101622861B (zh) 2007-07-24 2008-06-17 摄像设备及其控制方法

Country Status (4)

Country Link
US (1) US8089554B2 (zh)
JP (1) JP5046769B2 (zh)
CN (1) CN101622861B (zh)
WO (1) WO2009013962A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009049203B4 (de) * 2009-10-13 2016-10-13 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Diagnoseeinheit für eine elektronische Kamera und Kamerasystem
GB201020530D0 (en) * 2010-12-03 2011-01-19 Optos Plc Method of identifying anomalies in images
US8878964B2 (en) 2011-02-15 2014-11-04 Canon Kabushiki Kaisha Image capture apparatus
JP5885464B2 (ja) * 2011-10-27 2016-03-15 キヤノン株式会社 撮像装置、その制御方法及びプログラム
TWI489861B (zh) * 2012-03-26 2015-06-21 Wistron Corp 相機檢測方法與相機
JP5997276B2 (ja) * 2012-07-27 2016-09-28 日産自動車株式会社 立体物検出装置及び異物検出装置
CN103546740B (zh) * 2013-09-03 2015-11-25 小米科技有限责任公司 一种检测摄像头的方法、装置及终端设备
CN104333705B (zh) * 2014-11-28 2017-07-07 广东欧珀移动通信有限公司 一种图像增强方法及装置
CN107431744B (zh) * 2015-03-27 2020-01-17 富士胶片株式会社 相机装置、图像处理装置以及图像处理方法
US11224902B2 (en) * 2019-05-01 2022-01-18 Ford Global Technologies, Llc Sensor assembly with cleaning

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1527125A (zh) * 2003-03-03 2004-09-08 奥林巴斯株式会社 电子摄像装置
CN1732682A (zh) * 2002-12-27 2006-02-08 株式会社尼康 图像处理装置及图像处理程序
CN101001319A (zh) * 2006-01-12 2007-07-18 佳能株式会社 图像处理设备和图像处理方法
CN101001318A (zh) * 2006-01-12 2007-07-18 佳能株式会社 图像拍摄设备及其控制方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4282226B2 (ja) * 2000-12-28 2009-06-17 オリンパス株式会社 カメラ
US7486326B2 (en) * 2000-12-28 2009-02-03 Olympus Corporation Optical apparatus having dust off function
US7215372B2 (en) * 2002-05-17 2007-05-08 Olympus Corporation Optical apparatus having dust off function
JP4179079B2 (ja) * 2002-08-30 2008-11-12 株式会社ニコン 電子カメラ及びその制御プログラム
JP4466017B2 (ja) * 2002-12-27 2010-05-26 株式会社ニコン 画像処理装置および画像処理プログラム
JP4466015B2 (ja) 2002-12-27 2010-05-26 株式会社ニコン 画像処理装置および画像処理プログラム
JP4764265B2 (ja) * 2006-06-20 2011-08-31 キヤノン株式会社 撮像装置
JP5106335B2 (ja) * 2008-09-24 2012-12-26 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
JP5400504B2 (ja) * 2009-07-03 2014-01-29 キヤノン株式会社 撮像装置、画像処理装置、制御方法、及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1732682A (zh) * 2002-12-27 2006-02-08 株式会社尼康 图像处理装置及图像处理程序
CN1527125A (zh) * 2003-03-03 2004-09-08 奥林巴斯株式会社 电子摄像装置
CN101001319A (zh) * 2006-01-12 2007-07-18 佳能株式会社 图像处理设备和图像处理方法
CN101001318A (zh) * 2006-01-12 2007-07-18 佳能株式会社 图像拍摄设备及其控制方法

Also Published As

Publication number Publication date
US20100013962A1 (en) 2010-01-21
WO2009013962A1 (en) 2009-01-29
CN101622861A (zh) 2010-01-06
JP5046769B2 (ja) 2012-10-10
JP2009033267A (ja) 2009-02-12
US8089554B2 (en) 2012-01-03

Similar Documents

Publication Publication Date Title
CN101622861B (zh) 摄像设备及其控制方法
CN101001318B (zh) 图像拍摄设备及其控制方法
US7978238B2 (en) Image data correction processing based on sensitivity
US7852383B2 (en) Image pickup apparatus
EP1845709B1 (en) Image capturing apparatus, control method therefor, image processing apparatus, image processing method, and program
US20090051792A1 (en) Digital single-lens reflex camera
US7619666B2 (en) Image processing apparatus, control method therefor, and program correcting image data based on foreign substance information and inhibiting such correction
CN101009774A (zh) 摄像设备和其控制方法
JP2007180616A (ja) 撮像装置及び補正方法
JP2001111934A (ja) 電子カメラ装置
US20080025650A1 (en) Image processing apparatus, control method therefor, and program
CN101557470B (zh) 摄像装置
CN101335834A (zh) 图像成像装置和成像控制方法
US7301572B2 (en) Pixel correction processing apparatus, image processing apparatus, pixel correction processing method, program, and storage medium
CN100452838C (zh) 摄像装置
CN102685384B (zh) 摄像设备
JP2003333435A (ja) 補正処理装置、撮像装置、補正処理方法、補正処理コンピュータプログラム
US6956613B2 (en) Photographing device
US9467635B2 (en) Image processing apparatus and image processing method
JP2001028713A (ja) 画像処理装置及びその制御方法並びにメモリ媒体
JP4836233B2 (ja) 画像処理装置及びその制御方法、コンピュータプログラム、及び、記憶媒体
JP2004147140A (ja) デジタルカメラ
JP4857019B2 (ja) 撮像装置及び撮像方法
JP2006108878A (ja) 撮像装置
JP2002290830A (ja) 画像復元機能付き撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120328

Termination date: 20190617