CN107251543B - 成像装置、闪烁检测方法及记录介质 - Google Patents
成像装置、闪烁检测方法及记录介质 Download PDFInfo
- Publication number
- CN107251543B CN107251543B CN201580076251.0A CN201580076251A CN107251543B CN 107251543 B CN107251543 B CN 107251543B CN 201580076251 A CN201580076251 A CN 201580076251A CN 107251543 B CN107251543 B CN 107251543B
- Authority
- CN
- China
- Prior art keywords
- during
- frame
- image
- signal
- forming component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 95
- 238000003384 imaging method Methods 0.000 title claims abstract description 51
- 238000000034 method Methods 0.000 claims description 28
- 238000005096 rolling process Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 12
- 230000004397 blinking Effects 0.000 claims description 10
- 238000012937 correction Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 23
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 17
- 230000009471 action Effects 0.000 description 16
- 230000008859 change Effects 0.000 description 12
- 230000007423 decrease Effects 0.000 description 7
- 238000012360 testing method Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 241001269238 Data Species 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 210000003205 muscle Anatomy 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000704 physical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241000256844 Apis mellifera Species 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
- G03B7/08—Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
- G03B7/091—Digital circuits
- G03B7/093—Digital circuits for control of exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/745—Detection of flicker frequency or suppression of flicker wherein the flicker is caused by illumination, e.g. due to fluorescent tube illumination or pulsed LED illumination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本发明能够提供一种即使在拍摄较亮的被摄体的情况下也能够高精度地检测闪烁的成像装置、闪烁检测方法及闪烁检测程序。数码相机以任意的帧速率通过MOS型的成像元件(5)进行多次拍摄并通过在基于该帧速率的帧期间(F1、F2)分别从成像元件(5)读出的摄像图像信号的比较来检测闪烁的有无。帧期间(F1)中的信号读出期间的结束时刻比帧期间(F1)的结束时刻早，帧期间(F2)中的信号读出期间的结束时刻与帧期间(F2)的结束时刻相同。
Description
技术领域
本发明涉及一种成像装置、闪烁检测方法及记录介质。
背景技术
在具备通常的XY地址扫描型成像元件的成像装置中，采用通过地址指定按像素的每个扫描线控制电荷蓄积时间的滚动快门方式。在本说明书中，将数码照相机、数码摄像机及智能手机等具有摄像功能的信息设备称为成像装置。
使用该滚动快门方式在日光灯下进行视频拍摄时，因日光灯的光源的闪烁周期(例如，只要是50Hz(赫兹)或60Hz的商用电源，则为1/100秒或1/120秒)所引起的周期性亮度变化的影响，在拍摄图像中有时会产生横条文状的不均匀(以下，称为“闪烁”)。
专利文献1～3中提出有闪烁产生的有无的检测方法。
专利文献1中记载了一种成像装置，其通过设定为不产生闪烁的曝光时间而获得的摄像图像数据及设定为产生闪烁的曝光时间而获得的摄像图像数据的差分图像数据来检测闪烁。
专利文献2及专利文献3中记载了一种成像装置，其根据将曝光时间设定为1/100秒的自然数倍而获得的摄像图像数据与将曝光时间设定为1/120秒的自然数倍而得的摄像图像数据的差分来检测闪烁的有无。
以往技术文献
专利文献
专利文献1：国际公开WO2008/108025号公报
专利文献2：日本特开2011-176622号公报
专利文献3：日本特开2007-329658号公报
发明内容
发明要解决的技术课题
在专利文献1中记载的成像装置中，在被摄体是非常亮的情况下，设定为不产生闪烁的曝光时间而获得的摄像图像数据整体过度曝光，从而难以由2个摄像图像数据的差分图像数据高精度地检测闪烁的产生。
在专利文献2及专利文献3中记载的成像装置中，在被摄体是非常亮的情况下，若将曝光时间设定为1/100秒的自然数倍或1/120秒的自然数倍，则以各自的曝光时间设定而得的摄像图像数据整体过度曝光，从而无法高精度地进行闪烁的检测。
本发明是鉴于上述情况而完成的，其目的在于，提供一种即使在拍摄较亮的被摄体的情况下也能够高精度地检测闪烁的成像装置、闪烁检测方法及闪烁检测程序。
用于解决技术课题的手段
本发明的成像装置具备：MOS型成像元件，其具有二维状排列而成的多个像素；成像元件驱动部，以滚动快门方式驱动上述成像元件，并以任意的帧速率通过上述成像元件进行多次拍摄；及闪烁检测部，通过在基于上述帧速率的第一帧期间从上述多个像素读出的第一摄像图像信号与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较来检测闪烁的有无，上述成像元件驱动部中，将上述第一帧期间中的从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束时刻早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
本发明的闪烁检测方法具备：成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过上述成像元件进行多次拍摄；闪烁检测步骤，通过在基于上述帧速率的第一帧期间从上述多个像素读出的第一摄像图像信号与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较来检测闪烁的有无，在上述成像元件驱动步骤中，将上述第一帧期间中的从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束时刻早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
本发明的闪烁检测程序用于使计算机执行如下步骤：成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过上述成像元件进行多次拍摄；闪烁检测步骤，通过在基于上述帧速率的第一帧期间从上述多个像素读出的第一摄像图像信号与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较来检测闪烁的有无，其中，在上述成像元件驱动步骤中，将上述第一帧期间中的从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束时刻早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
发明效果
根据本发明，能够提供一种即使在拍摄较亮的被摄体的情况下也能够高精度地检测闪烁的成像装置、闪烁检测方法及闪烁检测程序。
附图说明
图1是表示作为用于说明本发明的一实施方式的成像装置的一例的数码相机的概略结构的图。
图2是用于说明闪烁检测动作的流程图。
图3是表示图2的步骤S2的处理后的成像元件5的驱动时序图的图。
图4是用于说明图1的成像元件驱动部10所进行的闪烁检测用驱动的一例的时序图。
图5是表示图1所示的数码相机的闪烁检测动作的变形例的流程图。
图6是用于说明图1的成像元件驱动部10所进行的闪烁检测用驱动的变形例的时序图。
图7是图6的范围H的放大图。
图8是表示作为成像装置的智能手机的外观结构的图。
图9是表示图8的智能手机的内部结构的图。
具体实施方式
以下，参考附图对本发明的实施方式进行说明。
图1是表示作为用于说明本发明的一实施方式的成像装置的一例的数码相机的概略结构的图。
图1所示的数码相机的摄像系统具备摄像光学系统(包括成像透镜1和光圈2)及成像元件5。
成像元件5为具有二维状排列而成的多个像素且能够通过XY地址指定从任意的像素读出信号的MOS(Metal-Oxide Semiconductor：金属氧化物半导体)型成像元件。
集中控制数码相机的整个电气控制系统的系统控制部11控制发光部12及受光部13。并且，系统控制部11控制透镜驱动部8来调整成像透镜1所包含的聚焦透镜等的位置。另外，系统控制部11通过经由光圈驱动部9控制光圈2的开口量来调整曝光量。
并且，系统控制部11经由成像元件驱动部10来驱动成像元件5，并且将通过成像透镜1拍摄而得的被摄体图像作为摄像图像信号来输出。通过操作部14由用户向系统控制部11输入指示信号。摄像图像信号包括在X方向和与X方向正交的Y方向上二维状排列而成的多个像素信号。
成像元件驱动部10以滚动快门方式驱动成像元件5。所谓滚动快门方式为如下方式：在MOS型成像元件中，对在垂直方向上排列的一个以上的每扫描线(包括在水平方向上排列的多个像素的行)依次进行曝光动作。
即滚动快门方式为如下方式：按每扫描线依次进行复位，使扫描线中所包含的各像素蓄积电荷，按每扫描线读出信号，从而依次读出蓄积于该各像素的电荷(也称为焦点平面快门方式)。
进行后述闪烁检测动作时，成像元件驱动部10以通过系统控制部11设定的任意的帧速率利用成像元件5进行多次拍摄。所谓帧速率是表示从成像元件5每单位时间输出多少帧(摄像图像信号)的值。
若帧速率例如为120帧/秒，则后述显示部24的垂直同步信号的下降起至下一次下降为止的期间达到1/120秒。并且，关于用于驱动成像元件5的垂直同步信号，下降起至下一次下降为止的期间也达到1/120秒。
数码相机的电气控制系统还具备：模拟信号处理部6，与成像元件5的输出连接且进行相关双采样处理等模拟信号处理；及模拟数字转换电路(A/D)7，将从模拟信号处理部6输出的模拟信号转换为数字信号。模拟信号处理部6及模拟数字转换电路7由系统控制部11进行控制。
另外，该数码相机的电气控制系统具备：主存储器16；存储器控制部15，与主存储器16连接；数字信号处理部17，对从模拟数字转换电路7输出的摄像图像信号进行插值运算、伽马校正运算及RGB-YC转换处理等而生成摄像图像数据；压缩/扩展处理部18，将数字信号处理部17中生成的摄像图像数据压缩成JPEG(Joint Photographic Experts Group：联合图像专家组)形式或扩展压缩图像数据；闪烁检测部20；外部存储器控制部21，连接有装卸自如的记录介质22；及显示控制部23，连接有搭载于相机背面等的显示部24。
存储器控制部15、数字信号处理部17、压缩/扩展处理部18、闪烁检测部20、外部存储器控制部21及显示控制部23通过控制总线25及数据总线26彼此连接，并通过来自系统控制部11的指令进行动作。
在以上结构的数码相机中，闪烁检测部20检测由日光灯的光源的闪烁周期(例如，若为50Hz或60Hz的商用电源，则为1/100秒或1/120秒)引起的闪烁。
闪烁检测部20通过在基于由系统控制部11所设定的帧速率的第一帧期间从成像元件5的多个像素读出的第一摄像图像信号与在基于该帧速率的第二帧期间从成像元件5的多个像素读出的第二摄像图像信号的比较来检测闪烁的有无。所谓帧期间是指成像元件5的垂直同步信号的下降起至下一次下降为止的期间。
图2是用于说明闪烁检测动作的流程图。
若开始闪烁检测动作，则系统控制部11将帧速率设定为商用电源的电源频率之一的60Hz的自然数倍的值(在此设为120帧/秒)(步骤S1)。而且，系统控制部11根据已设定的帧速率使成像元件驱动部10驱动成像元件5。
若根据步骤S1中设定的帧速率开始成像元件5的驱动，则系统控制部11根据从成像元件5输出的摄像图像信号计算适当的曝光，并将算出的曝光值作为摄像条件进行设定(步骤S2)。
具体而言，系统控制部11根据所算出的曝光值经由光圈驱动部9控制光圈2的开口量，并根据所算出的曝光值向成像元件驱动部10通知成像元件5的快门速度(曝光时间)。根据该通知，成像元件驱动部10进行在所设定的曝光时间内对成像元件5的各像素进行曝光的控制。
另外，任意的像素的曝光在对该像素进行复位的时刻开始，在与蓄积于该像素中的电荷相应的信号被读出至信号线的时刻结束。
即，成像元件驱动部10通过控制各像素的复位时刻和信号读出时刻而在所设定的曝光时间内进行各像素的曝光。
图3是表示图2的步骤S2的处理后的成像元件5的驱动时序图的图。
图3中，符号RS表示用于进行成像元件5的像素的复位的复位信号。图3中，符号RE表示用于从成像元件5的像素进行信号读出的读出信号。
在本实施方式中，能够对成像元件5的包括在水平方向上排列的多个像素的每扫描线独立供给复位信号及读出信号。
在图3的例子中，若成为比成像元件5的垂直同步信号下降的时点在曝光时间Tx之前的时刻，则对成像元件5，从位于配置多个像素的区域上的扫描线向下方依次进行复位信号RS的供给。
从复位信号RS的供给开始经过曝光时间Tx而成像元件5的垂直同步信号下降时，对成像元件5，从位于配置多个像素的区域上的扫描线向下方依次进行读出信号RE的供给。反复进行以上动作。
通过这种驱动，各像素的曝光时间控制在曝光时间Tx。并且，从成像元件5以所设定的帧速率输出摄像图像信号。
在以下说明中，将从开始成像元件5的第1行扫描线的读出起至最后一行扫描线的信号的读出结束为止的期间称为从成像元件5的多个像素读出信号的信号读出期间。
返回到图2的说明，步骤S2的处理后，闪烁检测部20进行从成像元件5连续输出的2个摄像图像信号的比较(步骤S3)。
以50Hz的商用电源工作的日光灯的闪烁频率达到50Hz。而且，步骤S1中设定的帧速率未达到50Hz的自然数倍。
因此，当产生由50Hz的商用电源频率引起的闪烁(以下，也称为50Hz闪烁)时，图3所示的连续的2个帧期间的每一个中获得的摄像图像信号中产生由日光灯的闪烁引起的亮度差。在步骤S3中，由闪烁检测部20判定是否产生这种摄像图像信号的差。
当步骤S3的判定为“是”时，闪烁检测部20判定为产生了50Hz闪烁，将判定结果通知给系统控制部11(步骤S4)。
另一方面，当步骤S3的判定为“否”时，闪烁检测部20判定为产生了由60Hz的商用电源频率引起的闪烁(以下，也称为60Hz闪烁)的状态、或未产生闪烁的状态，进行步骤S5以后的处理。
以60Hz的商用电源工作的日光灯的闪烁频率达到60Hz。而且，步骤S1中设定的帧速率达到60Hz的自然数倍。
因此，当产生60Hz闪烁时，图3所示的连续的2个帧期间各自中获得的摄像图像信号中不会产生由日光灯的闪烁引起的亮度差。因此，当步骤S3的判定为“否”时，需要判定是否为产生60Hz闪烁的状态。
在步骤S5中，系统控制部11将成像元件5的曝光时间设定为以60Hz的商用电源工作的日光灯的闪烁周期即小于1/120秒的值(设为Txa)。
另外，系统控制部11以步骤S1中设定的帧速率状态对成像元件驱动部10进行将成像元件5的驱动方法改变为用于检测60Hz闪烁的驱动方法(称为60Hz闪烁检测用驱动)的指示。
根据该指示，如图4所例示，成像元件驱动部10以与图3不同的驱动方法驱动成像元件5(步骤S6)。
成像元件驱动部10在任意的帧期间F1进行与图3的各帧期间相同的驱动。即，成像元件驱动部10进行将信号读出期间的开始时刻(时刻t1)设为与帧期间F1的开始时刻相同的驱动。
并且，成像元件驱动部10在帧期间F1进行使信号读出期间的结束时刻(图中的时刻t2)比帧期间F1的结束时刻早的驱动。帧期间F1构成第一帧期间。
成像元件驱动部10在接续帧期间F1的帧期间F2，进行使信号读出期间的开始时刻(图中的时刻t3)比帧期间F2的开始时刻慢的驱动。
并且，成像元件驱动部10在帧期间F2进行将信号读出期间的结束时刻(图中的时刻t4)设为与帧期间F2的结束时刻相同的驱动。帧期间F2构成第二帧期间。
成像元件驱动部10在接续帧期间F2的帧期间F3，进行与帧期间F1相同的驱动。帧期间F3构成第一帧期间。
这样，在步骤S6中，成像元件驱动部10以第一帧期间与第二帧期间交替排列的方式驱动成像元件5。
另外，成像元件驱动部10在各帧期间将曝光时间固定为Txa。并且，成像元件驱动部10将从时刻t1至时刻t2之间的时间和从时刻t3至时刻t4之间的时间相同地控制。即，在各帧期间，信号读出期间的长度通用。
图4中除了成像元件5的驱动时序图之外，还示出以60Hz的电源频率工作的日光灯的亮度变化。
在图4的帧期间F3从成像元件5读出的第一摄像图像信号是在图4中的期间T2之间依次曝光扫描线而获得的。
因此，该第一摄像图像信号包含日光灯的亮度变化中与期间T2重叠的部分相应的信号。
并且，在图4的帧期间F2从成像元件5读出的第二摄像图像信号是在图4中的期间T1之间依次曝光扫描线而获得的。
因此，该第二摄像图像信号包含日光灯的亮度变化中与期间T1重叠的部分相应的信号。
日光灯的亮度变化中，在期间T1重叠的部分和在期间T2重叠的部分的形状不同。因此，若产生60Hz闪烁，则在第一摄像图像信号与第二摄像图像信号中在面内产生亮度之差。
另一方面，若未产生闪烁，则在第一摄像图像信号和第二摄像图像信号中在面内不会产生亮度之差。
即，通过将第一摄像图像信号与第二摄像图像信号进行比较，能够判定60Hz闪烁的有无。
返回到图2的说明，若在步骤S6中进行图4所例示的驱动，则闪烁检测部20进行在图4的第一帧期间(例如，帧期间F1)从成像元件5输出的第一摄像图像信号与在图4的第二帧期间(例如，帧期间F2)从成像元件5输出的第二摄像图像信号的比较(步骤S7)。
例如，将第一摄像图像信号和第二摄像图像信号的每一个沿着扫描线排列的方向分割为多个区块，并求出各区块的像素信号的亮度平均。
而且，在第一摄像图像信号和第二摄像图像信号中，以同一区块彼此计算亮度平均的差，若该差的平均达到阈值TH以上，则闪烁检测部20判定为两者具有差(步骤S8：是)，并判定为产生了60Hz闪烁(步骤S9)。
另一方面，若该差的平均小于阈值TH，则闪烁检测部20判定为两者没有差(步骤S8：否)，并判定未产生闪烁(步骤S10)。
另外，2个摄像图像信号的比较方法不限定于此。例如，2个摄像图像信号的全像素信号的亮度平均彼此之差为阈值以上时可判定为有差异。
如以上，根据图1所示的数码相机，通过由成像元件驱动部10进行使信号读出期间的位置不同的包含第一帧期间及第二帧期间的驱动，如以往技术，无需设置将曝光时间Txa设为以60Hz的商用电源频率工作的日光灯的闪烁周期的自然数倍的帧期间，而能够判定60Hz闪烁的有无。
这样，无需设置将曝光时间Txa设为以60Hz的商用电源频率工作的日光灯的闪烁周期的自然数倍的帧期间，因此即使被摄体处于非常亮的状态，也能够缩短曝光时间来防止摄像图像信号过度曝光。其结果，能够高精度地进行闪烁检测。
并且，能够将在闪烁检测中显示于显示部24的即时预览图像设为适当的，不会给用户带来不协调的感觉。
并且，根据图1所示的数码相机，能够将帧速率设为恒定来进行闪烁检测。因此，闪烁的检测中显示不会被打乱，不会给用户带来不协调的感觉。
并且，通过将帧速率设为恒定，系统整体的处理也变得简单，能够减轻系统负载且能够减少系统设计成本。
并且，曝光时间Txa不发生变化，从而在比较第一摄像图像信号与第二摄像图像信号时，不需要调整由双方的曝光时间差引起的亮度差的处理，能够减少闪烁检测所需的处理量。
另外，在图2的步骤S5中，将曝光时间设定为小于1/120秒，当步骤S2中设定的基于适当曝光的曝光时间小于1/120秒时，在步骤S5中无需特意改变曝光时间的设定。
并且，步骤S3的判定为“否”时，系统控制部11可以将帧速率变更为比步骤S1中设定的值小的值。
例如，在步骤S5中，系统控制部11将帧速率从120帧/秒变更至60帧/秒。
通过这样放慢帧速率，能够减小各帧期间所占的信号读出期间的比例。通过减小该比例，在日光灯的亮度变化波形中，能够使图4的在期间T1重叠的部分和在期间T2重叠的部分的形状更大地不同。因此，能够更高精度地检测60Hz闪烁的有无。
在图2的动作例中，步骤S3的判定为“否”时将帧速率维持在120帧/秒，因此在步骤S5中将曝光时间设定为小于1/120秒。
但是，当步骤S3的判定为“否”时只要将帧速率设为小于120帧/秒，则在步骤S5中并不限定曝光时间小于1/120秒，能够设定为1/120秒的自然数倍以外的值。即使是这样，也能够通过进行图4所示的驱动判定60Hz闪烁的有无。
这样，通过放慢帧速率，还能够使曝光时间Txa更长，因此对较暗的被摄体也能够高精度地进行闪烁检测。
在图2的动作中，帧速率的改变只有在有可能产生了60Hz闪烁时，并且，在邻近的帧期间长度不会频繁发生变化。因此，给用户带来的不协调的感觉能够抑制在最小限度。并且，系统设计成本也能够抑制在最小限度。
在图2的动作例中，预先判定50Hz闪烁的有无，但预先判定60Hz闪烁的有无，且判定为无60Hz闪烁时，也可以设为判定50Hz闪烁的有无的结构。
图5是表示图1所示的数码相机的闪烁检测动作的变形例的流程图。
首先，系统控制部11将帧速率设定为商用电源的电源频率之一的50Hz的自然数倍的值(在此设为100帧/秒)(步骤S1a)。
并且，系统控制部11根据已设定的帧速率使成像元件驱动部10驱动成像元件5。
在步骤S2a中，系统控制部11根据从成像元件5输出的摄像图像信号计算适当的曝光，并将算出的曝光值作为摄像条件来设定。
步骤S2a的处理后，闪烁检测部20进行从成像元件5连续输出的2个摄像图像信号的比较(步骤S3a)。
以60Hz的商用电源工作的日光灯的闪烁频率达到60Hz。并且，步骤S1a中设定的帧速率未达到60Hz的自然数倍。
因此，已产生60Hz闪烁时，在图3所示的连续的2个帧期间各自中获得的摄像图像信号中产生由日光灯的闪烁引起的亮度差。在步骤S3a中，由闪烁检测部20判定是否产生这种摄像图像信号的差。
步骤S3a的判定为“是”时，闪烁检测部20判定为已经产生60Hz闪烁，并将判定结果通知给系统控制部11(步骤S4a)。
另一方面，当步骤S3a的判定为“否”时，闪烁检测部20判定为已经产生50Hz闪烁的状态、或未产生闪烁的状态，并进行步骤S5a以后的处理。
在步骤S5a中，系统控制部11将成像元件5的曝光时间设定为以50Hz的商用电源工作的日光灯的闪烁周期即小于1/100秒的值。
另外，系统控制部11以步骤S1a中设定的帧速率的状态对成像元件驱动部10进行将成像元件5的驱动方法改变为用于检测50Hz闪烁的驱动方法(称为50Hz闪烁检测用驱动)的指示。该50Hz闪烁检测用驱动是与前述60Hz闪烁检测用驱动相同的驱动。
根据该指示，如图4中例示，成像元件驱动部10通过与图3不同的驱动方法驱动成像元件5(步骤S6a)。
在步骤S6a中进行图4所例示的驱动时，闪烁检测部20进行在图4的第一帧期间(例如帧期间F1)从成像元件5输出的第一摄像图像信号与在图4的第二帧期间(例如帧期间F2)从成像元件5输出的第二摄像图像信号的比较(步骤S7a)。
闪烁检测部20判定为两者有差异时(步骤S8a：是)，判定为已经产生50Hz闪烁(步骤S9a)。
另一方面，闪烁检测部20判定为两者没有差异时(步骤S8a：否)，判定为未产生闪烁(步骤S10a)。
图2的步骤S7和图5的步骤S7a中进行比较的2个摄像图像信号优选为不会因闪烁以外的因素而亮度产生较大差异的信号。
因此，优选成像元件驱动部10进行第一帧期间和第二帧期间彼此排列的驱动，闪烁检测部20进行在时间上相邻的第一帧期间和第二帧期间分别获得的摄像图像信号的比较。
并且，进行比较的2个摄像图像信号优选使用第二帧期间中获得的摄像图像信号及接续该第二帧期间的第一帧期间中获得的摄像图像信号。例如，在图4的例子中，可比较在帧期间F2和帧期间F3各自中获得的摄像图像信号。
在帧期间F2和帧期间F3各自中获得的摄像图像信号若与在帧期间F1和帧期间F2各自中获得的摄像图像信号进行比较，则成为在时间上接近的时刻拍摄而获得的信号。
因此，即使在被摄体移动的情况下，也能够抑制由该移动引起的2个摄像图像信号的亮度变化，并能够提高闪烁检测精确度。
图6是用于说明50Hz闪烁检测用驱动和60Hz闪烁检测用驱动的变形例的时序图。
图6所示的帧期间F4为进行与图4所示的帧期间F1及帧期间F3相同的驱动的期间，并构成第一帧期间。
图6所示的帧期间F5和帧期间F6分别将信号读出期间设为比帧期间F4中的信号读出期间长。
帧期间F5和帧期间F6分别构成第二帧期间。并且，帧期间F5构成其他帧期间。
更具体而言，帧期间F5中的信号读出期间的开始时刻与帧期间F5的开始时刻相同，该信号读出期间的结束时刻与帧期间F5的结束时刻相同。
同样地，帧期间F6中的信号读出期间的开始时刻与帧期间F6的开始时刻相同，该信号读出期间的结束时刻与帧期间F6的结束时刻相同。
通过这样的驱动，在图6的帧期间F6从成像元件5读出的第二摄像图像信号是在图6中的期间T5期间依次曝光扫描线而获得的。
因此，该第二摄像图像信号包含日光灯的亮度变化中与期间T5重叠的部分相应的信号。
并且，在图6的帧期间F4从成像元件5读出的第一摄像图像信号是在图6中的期间T3期间依次曝光扫描线而获得的。
因此，该第一摄像图像信号包含日光灯的亮度变化中与期间T3重叠的部分相应的信号。
日光灯的亮度变化中与期间T3重叠的部分和与期间T5重叠的部分的形状不同。因此，若产生60Hz闪烁，则在第一摄像图像信号和第二摄像图像信号中面内产生亮度差。
另一方面，若未产生闪烁，在第一摄像图像信号和第二摄像图像信号中面内不产生亮度差。
即，通过比较第一摄像图像信号和第二摄像图像信号，能够判定60Hz闪烁的有无。
另外，帧期间F4、帧期间F5及帧期间F6各自中的成像元件5的曝光时间Txa被控制成相同，但在系统的操作上，帧期间F5中读出信号的扫描线中的一部分，曝光时间不会达到Txa。
图7是图6的范围H的放大图。
如图7所示，在从帧期间F4转移到帧期间F5之前的时刻t5，根据帧期间F4中设定的时刻信号，对成像元件5进行复位信号的供给。
若从时刻t5经过些许时间而达到帧期间F5的开始时刻t6，则对供给复位信号的时刻进行确定的时刻信号更新为帧期间F5用的信号，向成像元件5进行复位信号的供给。因此，时刻t5至时刻t6期间的复位信号RS的倾斜度与时刻t6以后的复位信号RS的倾斜度产生偏差。
其结果，关于时刻t5至时刻t6期间供给复位信号的扫描线，曝光时间比在时刻t6以后供给复位信号的扫描线短。
另外，对接续帧期间F5的帧期间F6中读出的各像素而言，直接应用帧期间F5中的复位信号的倾斜度，因此能够将各像素的曝光时间设为相同。
考虑到这种现象，闪烁检测部20中，在图2的步骤S6或图5的步骤S6a中进行图6所示的驱动时，通过将第一帧期间即帧期间F4中读出的第一摄像图像信号与接续帧期间F4的接续帧期间F5的第二帧期间即帧期间F6中读出的第二摄像图像信号进行比较，判定50Hz闪烁或60Hz闪烁的有无。
由此，能够进行曝光时间一致的2个摄像图像信号的比较，并能够简化用于判定闪烁的有无的处理。
另外，闪烁检测部20在图2的步骤S6或图5的步骤S6a中进行图6所示的驱动时，可通过第一帧期间即帧期间F4中读出的第一摄像图像信号与接续帧期间F4的第二帧期间即帧期间F5中读出的第二摄像图像信号的比较判定闪烁的有无。
此时，将帧期间F5中读出的第二摄像图像信号中，在时刻t5至时刻t6期间进行复位的像素中读出的信号的亮度，根据时刻t5至时刻t6期间的复位信号的倾斜度和时刻t6以后的复位信号的倾斜度之比来进行校正，设为与时刻t6以后读出的信号相同的亮度水平之后，进行第一摄像图像信号与第二摄像图像信号的比较即可。
并且，成像元件驱动部10在帧期间F5可将关于帧期间F4中进行复位的像素(时刻t5至时刻t6期间进行复位的像素)的信号读出时刻控制成该像素的曝光时间与帧期间F5中进行复位的像素的曝光时间变得相同的时刻。
具体而言，如图7所示，成像元件驱动部10从时刻t6至时刻t7为止不进行读出信号RE的供给。并且，若达到时刻t7，则成像元件驱动部10以与时刻t5至时刻t6期间的复位信号RS的倾斜度相同的倾斜度(图中的单点划线)进行读出信号RE的供给。
时刻t8以后，成像元件驱动部10以与时刻t6以后的复位信号RS的倾斜度相同的倾斜度进行读出信号RE的供给。
由此，能够将在帧期间F5读出信号的各像素的曝光时间设为相同。
因此，闪烁检测部20能够通过帧期间F4中读出的第一摄像图像信号与接续帧期间F4的第二帧期间即帧期间F5中读出的第二摄像图像信号的比较判定闪烁的有无。
接着，作为成像装置对智能手机的结构进行说明。
图8是表示本发明的成像装置的一实施方式即智能手机200的外观的图。图8所示的智能手机200具有平板状的框体201，在框体201的一个面具备作为显示部的显示面板202和作为输入部的操作面板203成为一体的显示输入部204。
并且，这种框体201具备扬声器205、麦克风206、操作部207及相机部208。另外，框体201的结构并不限定于此，例如还可以采用显示部和输入部独立的结构，或者采用具有折叠结构或滑动机构的结构。
图9是表示图8所示的智能手机200的结构的框图。
如图9所示，作为智能手机的主要构成要件，具备无线通信部210、显示输入部204、通话部211、操作部207、相机部208、存储部212、外部输入输出部213、GPS(GlobalPositioning System：全球定位系统)接收部214、动作传感器部215、电源部216及主控制部220。并且，作为智能手机200的主要功能，具备经由未图示的基站装置和未图示的移动通信网进行移动无线通信的无线通信功能。
无线通信部210根据主控制部220的命令，对于容纳于移动通信网的基站装置进行无线通信。使用该无线通信来进行语音数据、图像数据等各种文件数据、电子邮件数据等的收发、以及Web数据或流数据等的接收。
显示输入部204为所谓的触摸面板，其具备显示面板202和操作面板203，所述显示输入部通过主控制部220的控制，显示图像(静态图像及动态图像)或文字信息等而视觉上向用户传递信息，并且检测对所显示的信息的用户操作。
显示面板202是例如将LCD(Liquid Crystal Display：液晶显示器)、OELD(Organic Electro-Luminescence Display：有机电激发光显示器)等用作显示设备的装置。
操作面板203是以能够视觉辨认显示于显示面板202的显示面上的图像的方式载置，并检测通过用户的手指或尖笔来操作的一个或多个坐标的设备。若通过用户的手指或尖笔操作该设备，则将因操作而产生的检测信号输出至主控制部220。接着，主控制部220根据所接收的检测信号检测显示面板202上的操作位置(坐标)。
如图9所示，作为本发明的成像装置的一实施方式而例示出的智能手机200的显示面板202和操作面板203成为一体而构成显示输入部204，配置成操作面板203完全覆盖显示面板202。
采用该配置时，操作面板203也可以在显示面板202以外的区域具备检测用户操作的功能。换言之，操作面板203可具备针对与显示面板202重叠的重叠部分的检测区域(以下，称为显示区域)、及针对除此以外的不与显示面板202重叠的外缘部分的检测区域(以下，称为非显示区域)。
另外，可使显示区域的大小与显示面板202的大小完全一致，但并非一定要使两者一致。并且，操作面板203可以具备外缘部分和除此以外的内侧部分这2个感应区域。
而且，外缘部分的宽度根据框体201的大小等而适当设计。此外，作为在操作面板203中采用的位置检测方式，可举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等，还可以采用任意方式。
通话部211具备扬声器205和麦克风206，所述通话部将通过麦克风206输入的用户的语音转换成能够由主控制部220处理的语音数据并输出至主控制部220、或者对通过无线通信部210或外部输入输出部213接收的语音数据进行解码并从扬声器205输出。
并且，如图8所示，例如能够将扬声器205搭载于与设置有显示输入部204的面相同的面，并将麦克风206搭载于框体201的侧面。
操作部207为使用键开关等的硬件键，接受来自用户的命令。例如，如图8所示，操作部207搭载于智能手机200的框体201的侧面，若用手指等按下则开启，若松开手指则通过弹簧等的复原力而成为关闭状态的按钮式开关。
存储部212存储主控制部220的控制程序和控制数据、应用软件、与通信对象的名称、电话号码等建立了对应关联的地址数据、收发的电子邮件的数据、通过网络浏览下载的网络数据、以及下载的内容数据，并且临时存储流数据等。并且，存储部212由智能手机内置的内部存储部217及具有装卸自如的外部存储器用插槽的外部存储部218构成。另外，构成存储部212的各个内部存储部217与外部存储部218通过使用闪存类型、硬盘类型、微型多媒体卡类型、卡类型的存储器、RAM(Random Access Memory：随机存取存储器)、ROM(ReadOnly Memory：只读存储器)等记录介质来实现。
外部输入输出部213发挥与智能手机200连结的所有外部设备的接口的作用，用于通过通信等(例如，通用串行总线、IEEE1394等)或网络(例如，互联网、无线LAN(Local AreaNetwork：局域网)、蓝牙(Bluetooth)(注册商标)、RFID(Radio FrequencyIdentification：射频识别)、红外线通信、UWB(Ultra Wideband：超宽带)(注册商标)、紫蜂(ZigBee)(注册商标)等)直接或间接地与其他外部设备连接。
作为与智能手机200连结的外部设备，例如有：有线或无线头戴式耳机、有线或无线外部充电器、有线或无线数据端口、经由卡插槽连接的存储卡或SIM(SubscriberIdentity Module：用户身份模块)卡、UIM(User Identity Module：用户识别模块)卡、经由音频/视频I/O(Input/Output)端子连接的外部音频/视频设备、无线连接的外部音频/视频设备、有线或无线连接的智能手机、有线或无线连接的个人计算机、耳机等。外部输入输出部213能够将从这种外部设备接收了传送的数据传递至智能手机200内部的各构成要件、或者将智能手机200内部的数据传送至外部设备。
GPS接收部214根据主控制部220的命令，接收从GPS卫星ST1～STn发送的GPS信号，执行基于所接收的多个GPS信号的测位运算处理，检测由智能手机200的纬度、经度、高度构成的位置。GPS接收部214在能够从无线通信部210或外部输入输出部213(例如，无线LAN)获取位置信息时，还能够使用该位置信息来检测位置。
动作传感器部215例如具备3轴加速度传感器等，根据主控制部220的命令，检测智能手机200的物理动作。通过检测智能手机200的物理动作，可检测智能手机200的移动方向或加速度。该检测结果输出至主控制部220。
电源部216根据主控制部220的命令，向智能手机200的各部供给蓄积在电池(未图示)中的电力。
主控制部220具备微处理器，按照存储部212所存储的控制程序、控制数据进行动作，统一控制智能手机200的各部。并且，主控制部220为了通过无线通信部210进行语音通信、数据通信而具备控制通信系统的各部的移动通信控制功能和应用处理功能。
应用处理功能通过主控制部220根据存储部212所存储的应用软件进行动作来实现。作为应用处理功能，例如有控制外部输入输出部213而与对置设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、阅览网页的网页浏览功能等。
并且，主控制部220具备根据所接收的数据或所下载的流数据等图像数据(静态图像或动态图像的数据)而在显示输入部204显示影像等的图像处理功能。图像处理功能是指主控制部220对上述图像数据进行解码，对该解码结果实施图像处理并将图像显示于显示输入部204的功能。
而且，主控制部220执行对显示面板202的显示控制及检测通过操作部207、操作面板203进行的用户操作的操作检测控制。通过显示控制的执行，主控制部220显示用于启动应用软件的图标、滚动条等软件键、或者显示用于创建电子邮件的窗口。
另外，滚动条是指用于针对无法落入显示面板202的显示区域的较大图像等，接受使图像的显示部分移动的命令的软件键。
并且，通过执行操作检测控制，主控制部220检测通过操作部207进行的用户操作，或者通过操作面板203接受对上述图标的操作或对上述窗口的输入栏的字符串的输入，或者接受通过滚动条进行的显示图像的滚动请求。
而且，通过执行操作检测控制，主控制部220具备判定对操作面板203操作的位置是与显示面板202重叠的重叠部分(显示区域)还是除此以外的不与显示面板202重叠的外缘部分(非显示区域)，并控制操作面板203的感应区域或软件键的显示位置的触控面板控制功能。
并且，主控制部220还能够检测对操作面板203的手势操作，根据检测出的手势操作来执行预先设定的功能。手势操作并非以往的简单的触摸操作，而是利用手指等描绘轨迹、或者同时指定多个位置、或者将它们进行组合而从多个位置对至少一个位置描绘轨迹的操作。
相机部208包含图1所示的数码相机中的外部存储器控制部21、记录介质22、显示控制部23、显示部24及操作部14以外的结构。
通过相机部208生成的摄像图像数据能够记录于存储部212或者通过外部输入输出部213或无线通信部210进行输出。
在图8所示的智能手机200中，相机部208搭载于与显示输入部204相同的面，但相机部208的搭载位置不限定于此，也可搭载于显示输入部204的背面。
并且，相机部208能够利用于智能手机200的各种功能。例如，能够在显示面板202显示通过相机部208获取的图像，或者作为操作面板203的操作输入之一利用相机部208的图像。
并且，在GPS接收部214检测位置时，还能够参照来自相机部208的图像来检测位置。而且，还能够参考来自相机部208的图像，不使用3轴加速度传感器或者与3轴加速度传感器同时使用来判断智能手机200的相机部208的光轴方向，或判断当前的使用环境。当然，还能够在应用软件内利用来自相机部208的图像。
除此之外，也能够对静态图像或动态的图像数据附加通过GPS接收部214获取的位置信息、通过麦克风206获取的语音信息(也可以通过主控制部等，进行语音文本转换而成为文本信息)、通过动作传感器部215获取的姿势信息等等并记录在存储部212、或者通过外部输入输出部213、无线通信部210进行输出。
即使在如以上结构的智能手机200中，也能够通过图2及图5所示的动作高精度地检测闪烁。
如以上说明，本说明书中公开了以下事项。
所公开的成像装置具备：MOS型成像元件，具有二维状排列而成的多个像素；成像元件驱动部，以滚动快门方式驱动上述成像元件，以任意的帧速率通过上述成像元件进行多次拍摄；第一摄像图像信号，在基于上述帧速率的第一帧期间从上述多个像素读出；闪烁检测部，通过与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较检测闪烁的有无，上述成像元件驱动部中，将上述第一帧期间中从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束时刻早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
所公开的成像装置中，上述成像元件驱动部中，将上述第二帧期间中的上述信号读出期间的开始时刻设为比上述第二帧期间的开始时刻慢。
所公开的成像装置中，上述成像元件驱动部中，将上述第二帧期间中的上述信号读出期间设为比上述第一帧期间中的上述信号读出期间长。
所公开的成像装置中，上述成像元件驱动部中，将上述第二帧期间中的上述信号读出期间的开始时刻设为上述第二帧期间的开始时刻。
所公开的成像装置中，在上述第一帧期间与上述第二帧期间之间存在其他帧期间，上述成像元件驱动部中，将上述其他帧期间中的上述成像元件的驱动方法设为与上述第二帧期间中的上述成像元件的驱动方法相同。
所公开的成像装置中，上述第二帧期间为接续上述第一帧期间的期间，上述闪烁检测部对上述第二摄像图像信号中、在上述第一帧期间进行复位的上述像素中读出的信号的亮度进行校正，通过校正后的第二摄像图像信号与上述第一摄像图像信号的比较来检测闪烁的有无。
所公开的成像装置中，上述第二帧期间为接续上述第一帧期间的期间，上述成像元件驱动部在上述第二帧期间，将关于在上述第一帧期间进行复位的像素的信号读出时刻控制为该像素的曝光时间与在上述第二帧期间进行复位的像素的曝光时间变得相同的时刻。
所公开的成像装置中，上述成像元件驱动部交替重复上述第一帧期间和上述第二帧期间并通过上述成像元件来进行多次拍摄。
所公开的成像装置中，上述闪烁检测部通过上述第二帧期间中读出的第二摄像图像信号与接续该第二帧期间的上述第一帧期间中读出的第一摄像图像信号的比较来检测闪烁的有无。
所公开的成像装置中，上述成像元件驱动部将上述第一帧期间中的上述多个像素的各曝光时间与上述第二帧期间中的上述多个像素的各曝光时间设为相同。
所公开的成像装置中，上述成像元件驱动部将上述第一帧期间中的上述多个像素的各曝光时间与上述第二帧期间中的上述多个像素的各曝光时间设定为小于1/100秒或1/120秒。
所公开的闪烁检测方法具备：成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过上述成像元件进行多次拍摄；闪烁检测步骤，通过在基于上述帧速率的第一帧期间从上述多个像素读出的第一摄像图像信号与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较来检测闪烁的有无，在上述成像元件驱动步骤中，将上述第一帧期间中的从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束定早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，将上述第二帧期间中的上述信号读出期间的开始时刻设为比上述第二帧期间的开始时刻慢。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，将上述第二帧期间中的上述信号读出期间设为比上述第一帧期间中的上述信号读出期间长。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，将上述第二帧期间中的上述信号读出期间的开始时刻设为上述第二帧期间的开始时刻。
所公开的闪烁检测方法中，上述第一帧期间与上述第二帧期间之间存在其他帧期间，在上述成像元件驱动步骤中，将上述其他帧期间中的上述成像元件的驱动方法设为与上述第二帧期间中的上述成像元件的驱动方法相同。
所公开的闪烁检测方法中，上述第二帧期间是接续上述第一帧期间的期间，在上述闪烁检测步骤中，对上述第二摄像图像信号中、在上述第一帧期间进行复位的上述像素中读出的信号的亮度进行校正，通过校正后的第二摄像图像信号与上述第一摄像图像信号的比较来检测闪烁的有无。
所公开的闪烁检测方法中，上述第二帧期间为接续上述第一帧期间的期间，在上述成像元件驱动步骤中，在上述第二帧期间，将关于在上述第一帧期间进行复位的像素的信号读出时刻控制为该像素的曝光时间与在上述第二帧期间进行复位的像素的曝光时间变得相同的时刻。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，交替重复上述第一帧期间和上述第二帧期间并通过上述成像元件进行多次拍摄。
所公开的闪烁检测方法中，在上述闪烁检测步骤中，通过上述第二帧期间中读出的第二摄像图像信号与接续该第二帧期间的上述第一帧期间中读出的第一摄像图像信号的比较来检测闪烁的有无。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，将上述第一帧期间中的上述多个像素的各曝光时间与上述第二帧期间中的上述多个像素的各曝光时间设为相同。
所公开的闪烁检测方法中，在上述成像元件驱动步骤中，将上述第一帧期间中的上述多个像素的各曝光时间与上述第二帧期间中的上述多个像素的各曝光时间设定为小于1/100秒或1/120秒。
所公开的闪烁检测程序用于使计算机执行如下步骤：成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过上述成像元件进行多次拍摄；闪烁检测步骤，通过在基于上述帧速率的第一帧期间从上述多个像素读出的第一摄像图像信号与在基于上述帧速率的第二帧期间从上述多个像素读出的第二摄像图像信号的比较来检测闪烁的有无，其中，在上述成像元件驱动步骤中，将上述第一帧期间中的从上述多个像素进行信号的读出的信号读出期间的结束时刻设为比上述第一帧期间的结束时刻早，将上述第二帧期间中的上述信号读出期间的结束时刻设为与上述第二帧期间的结束时刻相同。
产业上的可利用性
本发明尤其适用于数码相机等，从而便利性较高且有效。
以上，通过特定的实施方式说明了本发明，但本发明并不限定于该实施方式，在不脱离所公开的发明的技术思想的范围内能够进行各种变更。本申请基于2015年2月16日于日本申请的日本专利申请(专利申请2015-027594)，并将其内容援用于此。
符号说明
5-成像元件，10-成像元件驱动部，11-系统控制部，20-闪烁检测部，F1～F6-帧期间，RS-复位信号，RE-读出信号，t1～t8-时刻。
Claims (23)
1.一种成像装置，其具备：
MOS型成像元件，其具有二维状排列而成的多个像素；
成像元件驱动部，以滚动快门方式驱动所述成像元件，并以任意的帧速率通过所述成像元件进行多次拍摄；及
闪烁检测部，通过第一摄像图像信号与第二摄像图像信号的比较来检测闪烁的有无，所述第一摄像图像信号是在基于所述帧速率的第一帧期间从所述多个像素读出，所述第二摄像图像信号是在基于所述帧速率的第二帧期间从所述多个像素读出，
所述成像元件驱动部中，将所述第一帧期间中的从所述多个像素进行信号的读出的信号读出期间的结束时刻设为比所述第一帧期间的结束时刻早，将所述第二帧期间中的所述信号读出期间的结束时刻设为与所述第二帧期间的结束时刻相同。
2.根据权利要求1所述的成像装置，其中，
所述成像元件驱动部中，将所述第二帧期间中的所述信号读出期间的开始时刻设为比所述第二帧期间的开始时刻慢。
3.根据权利要求1所述的成像装置，其中，
所述成像元件驱动部中，将所述第二帧期间中的所述信号读出期间设为比所述第一帧期间中的所述信号读出期间长。
4.根据权利要求3所述的成像装置，其中，
所述成像元件驱动部中，将所述第二帧期间中的所述信号读出期间的开始时刻设为所述第二帧期间的开始时刻。
5.根据权利要求4所述的成像装置，其中，
所述第一帧期间与所述第二帧期间之间存在其他帧期间，
所述成像元件驱动部中，将所述其他帧期间中的所述成像元件的驱动方法设为与所述第二帧期间中的所述成像元件的驱动方法相同。
6.根据权利要求4所述的成像装置，其中，
所述第二帧期间是接续所述第一帧期间的期间，
所述闪烁检测部对所述第二摄像图像信号中、从在所述第一帧期间进行了复位的所述像素读出的信号的亮度进行校正，通过校正后的第二摄像图像信号与所述第一摄像图像信号的比较来检测闪烁的有无。
7.根据权利要求3所述的成像装置，其中，
所述第二帧期间为接续所述第一帧期间的期间，
所述成像元件驱动部在所述第二帧期间，将关于在所述第一帧期间进行了复位的像素的信号读出时刻控制为该像素的曝光时间与在所述第二帧期间进行复位的像素的曝光时间相同的时刻。
8.根据权利要求2所述的成像装置，其中，
所述成像元件驱动部交替重复所述第一帧期间和所述第二帧期间并通过所述成像元件来进行多次拍摄。
9.根据权利要求8所述的成像装置，其中，
所述闪烁检测部通过所述第二帧期间中读出的第二摄像图像信号与接续该第二帧期间的所述第一帧期间中读出的第一摄像图像信号的比较来检测闪烁的有无。
10.根据权利要求1至4中任一项所述的成像装置，其中，
所述成像元件驱动部将所述第一帧期间中的所述多个像素的各曝光时间与所述第二帧期间中的所述多个像素的各曝光时间设为相同。
11.根据权利要求1至9中任一项所述的成像装置，其中，
所述成像元件驱动部中，将所述第一帧期间中的所述多个像素的各曝光时间与所述第二帧期间中的所述多个像素的各曝光时间设定为小于1/100秒或1/120秒。
12.一种闪烁检测方法，其具备：
成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过所述成像元件进行多次拍摄；
闪烁检测步骤，通过第一摄像图像信号与第二摄像图像信号的比较来检测闪烁的有无，所述第一摄像图像信号是在基于所述帧速率的第一帧期间从所述多个像素读出，所述第二摄像图像信号是在基于所述帧速率的第二帧期间从所述多个像素读出，
在所述成像元件驱动步骤中，将所述第一帧期间中的从所述多个像素进行信号的读出的信号读出期间的结束时刻设为比所述第一帧期间的结束时刻早，将所述第二帧期间中的所述信号读出期间的结束时刻设为与所述第二帧期间的结束时刻相同。
13.根据权利要求12所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，将所述第二帧期间中的所述信号读出期间的开始时刻设为比所述第二帧期间的开始时刻慢。
14.根据权利要求12所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，将所述第二帧期间中的所述信号读出期间设为比所述第一帧期间中的所述信号读出期间长。
15.根据权利要求14所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，将所述第二帧期间中的所述信号读出期间的开始时刻设为所述第二帧期间的开始时刻。
16.根据权利要求15所述的闪烁检测方法，其中，
所述第一帧期间与所述第二帧期间之间存在其他帧期间，
在所述成像元件驱动步骤中，将所述其他帧期间中的所述成像元件的驱动方法设为与所述第二帧期间中的所述成像元件的驱动方法相同。
17.根据权利要求15所述的闪烁检测方法，其中，
所述第二帧期间是接续所述第一帧期间的期间，
在所述闪烁检测步骤中，对所述第二摄像图像信号中、从在所述第一帧期间进行了复位的所述像素读出的信号的亮度进行校正，通过校正后的第二摄像图像信号与所述第一摄像图像信号的比较来检测闪烁的有无。
18.根据权利要求14所述的闪烁检测方法，其中，
所述第二帧期间为接续所述第一帧期间的期间，
在所述成像元件驱动步骤中，在所述第二帧期间，将关于在所述第一帧期间进行了复位的像素的信号读出时刻控制为该像素的曝光时间与在所述第二帧期间进行复位的像素的曝光时间相同的时刻。
19.根据权利要求13所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，交替重复所述第一帧期间和所述第二帧期间并通过所述成像元件进行多次拍摄。
20.根据权利要求19所述的闪烁检测方法，其中，
在所述闪烁检测步骤中，通过所述第二帧期间中读出的第二摄像图像信号与接续该第二帧期间的所述第一帧期间中读出的第一摄像图像信号的比较来检测闪烁的有无。
21.根据权利要求12至15中任一项所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，将所述第一帧期间中的所述多个像素的各曝光时间与所述第二帧期间中的所述多个像素的各曝光时间设为相同。
22.根据权利要求12至20中任一项所述的闪烁检测方法，其中，
在所述成像元件驱动步骤中，将所述第一帧期间中的所述多个像素的各曝光时间与所述第二帧期间中的所述多个像素的各曝光时间设定为小于1/100秒或1/120秒。
23.一种记录了闪烁检测程序的能够由计算机读取的记录介质，其用于使计算机执行如下步骤：
成像元件驱动步骤，以滚动快门方式驱动具有二维状排列而成的多个像素的MOS型成像元件，并以任意的帧速率通过所述成像元件进行多次拍摄；
闪烁检测步骤，通过第一摄像图像信号与第二摄像图像信号的比较来检测闪烁的有无，所述第一摄像图像信号是在基于所述帧速率的第一帧期间从所述多个像素读出，所述第二摄像图像信号是在基于所述帧速率的第二帧期间从所述多个像素读出，其中，
在所述成像元件驱动步骤中，将所述第一帧期间中的从所述多个像素进行信号的读出的信号读出期间的结束时刻设为比所述第一帧期间的结束时刻早，将所述第二帧期间中的所述信号读出期间的结束时刻设为与所述第二帧期间的结束时刻相同。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015-027594 | 2015-02-16 | ||
| JP2015027594 | 2015-02-16 | ||
| PCT/JP2015/082445 WO2016132615A1 (ja) | 2015-02-16 | 2015-11-18 | 撮像装置、フリッカ検出方法、及びフリッカ検出プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107251543A CN107251543A (zh) | 2017-10-13 |
| CN107251543B true CN107251543B (zh) | 2018-09-07 |
Family
ID=56692113
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201580076251.0A Active CN107251543B (zh) | 2015-02-16 | 2015-11-18 | 成像装置、闪烁检测方法及记录介质 |
Country Status (4)
| Country | Link |
|---|---|
| US (2) | US9939712B2 (zh) |
| JP (1) | JP6175585B2 (zh) |
| CN (1) | CN107251543B (zh) |
| WO (1) | WO2016132615A1 (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6471953B2 (ja) * | 2014-05-23 | 2019-02-20 | パナソニックＩｐマネジメント株式会社 | 撮像装置、撮像システム、及び撮像方法 |
| JP2020036128A (ja) * | 2018-08-28 | 2020-03-05 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
| JP2020072392A (ja) * | 2018-10-31 | 2020-05-07 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法およびプログラム |
| WO2020166201A1 (ja) * | 2019-02-12 | 2020-08-20 | コニカミノルタ株式会社 | フリッカ測定装置、フリッカ測定方法及びフリッカ測定プログラム |
| US11039081B2 (en) * | 2019-07-17 | 2021-06-15 | Pixart Imaging Inc. | Image sensor capable of eliminating rolling flicker and adjusting frame rate |
| CN111212242B (zh) * | 2020-01-14 | 2021-03-12 | 维沃移动通信有限公司 | 曝光方法和电子设备 |
| JP7536541B2 (ja) * | 2020-07-16 | 2024-08-20 | キヤノン株式会社 | 撮像装置およびその制御方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008109253A (ja) * | 2006-10-24 | 2008-05-08 | Sanyo Electric Co Ltd | 光源状態検出装置及び方法並びに撮像装置 |
| WO2010044227A1 (ja) * | 2008-10-15 | 2010-04-22 | 株式会社ニコン | 撮像装置 |
| CN103975578A (zh) * | 2011-12-08 | 2014-08-06 | 索尼公司 | 图像处理设备、图像处理方法以及程序 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4106554B2 (ja) * | 2003-09-08 | 2008-06-25 | ソニー株式会社 | 撮影環境判定方法および撮像装置 |
| JP2007329658A (ja) | 2006-06-07 | 2007-12-20 | Canon Inc | 撮像装置及び撮像装置の駆動方法 |
| JP4948090B2 (ja) * | 2006-08-25 | 2012-06-06 | キヤノン株式会社 | 撮像装置及び駆動制御方法 |
| CN101622859B (zh) | 2007-03-05 | 2011-06-15 | 瑞萨电子株式会社 | 成像装置和闪烁检测方法 |
| US8441551B2 (en) * | 2008-11-14 | 2013-05-14 | Ati Technologies Ulc | Flicker detection circuit for imaging sensors that employ rolling shutters |
| JP5625371B2 (ja) * | 2010-01-29 | 2014-11-19 | ソニー株式会社 | 画像処理装置、および信号処理方法、並びにプログラム |
| JP5440245B2 (ja) | 2010-02-24 | 2014-03-12 | 株式会社ニコン | 撮像装置 |
| JP5541016B2 (ja) * | 2010-09-08 | 2014-07-09 | リコーイメージング株式会社 | 撮像システムおよび画素信号読出し方法 |
| US8462229B2 (en) * | 2010-09-30 | 2013-06-11 | Hewlett-Packard Development Company, L.P. | Detection of flicker within captured imaged frames |
| JP2012134663A (ja) * | 2010-12-20 | 2012-07-12 | Samsung Electronics Co Ltd | 撮像装置および撮像方法 |
| US9686505B2 (en) * | 2014-01-03 | 2017-06-20 | Mediatek Singapore Pte. Ltd. | Method for flicker detection and associated circuit |
| JP6370134B2 (ja) * | 2014-07-02 | 2018-08-08 | キヤノン株式会社 | 撮像装置、その制御方法、および制御プログラム |
-
2015
- 2015-11-18 CN CN201580076251.0A patent/CN107251543B/zh active Active
- 2015-11-18 WO PCT/JP2015/082445 patent/WO2016132615A1/ja active Application Filing
- 2015-11-18 JP JP2017500285A patent/JP6175585B2/ja active Active
-
2017
- 2017-08-15 US US15/677,468 patent/US9939712B2/en active Active
-
2018
- 2018-03-06 US US15/913,319 patent/US10126632B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008109253A (ja) * | 2006-10-24 | 2008-05-08 | Sanyo Electric Co Ltd | 光源状態検出装置及び方法並びに撮像装置 |
| WO2010044227A1 (ja) * | 2008-10-15 | 2010-04-22 | 株式会社ニコン | 撮像装置 |
| CN103975578A (zh) * | 2011-12-08 | 2014-08-06 | 索尼公司 | 图像处理设备、图像处理方法以及程序 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20180196332A1 (en) | 2018-07-12 |
| JPWO2016132615A1 (ja) | 2017-06-29 |
| US10126632B2 (en) | 2018-11-13 |
| US20170343882A1 (en) | 2017-11-30 |
| WO2016132615A1 (ja) | 2016-08-25 |
| US9939712B2 (en) | 2018-04-10 |
| CN107251543A (zh) | 2017-10-13 |
| JP6175585B2 (ja) | 2017-08-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107251543B (zh) | 成像装置、闪烁检测方法及记录介质 | |
| CN107431769B (zh) | 摄像装置、闪烁检测方法及闪烁检测程序 | |
| CN107409181B (zh) | 摄像装置、闪烁检测方法及闪烁检测程序 | |
| US11743571B2 (en) | Electronic device and operating method thereof | |
| EP2991339B1 (en) | Photographing method and electronic device | |
| DE112013003565B4 (de) | Bildanzeigevorrichtung und -verfahren | |
| US20150332636A1 (en) | Image display device and method | |
| CN105874776A (zh) | 图像处理设备和方法 | |
| CN110855901B (zh) | 摄像头的曝光时间控制方法及电子设备 | |
| CN106710539A (zh) | 液晶显示方法及装置 | |
| CN106128385A (zh) | 液晶显示器调节方法及装置 | |
| CN104797967A (zh) | 摄像装置及对焦控制方法 | |
| US20160212318A1 (en) | Information processing device, information processing method, and program | |
| CN105469357A (zh) | 图像处理方法、装置及终端 | |
| CN109845241A (zh) | 摄像装置、摄像方法及程序 | |
| CN105264886B (zh) | 像素插值装置及其动作控制方法 | |
| CN203180982U (zh) | 一种终端设备 | |
| CN112738396A (zh) | 一种图像处理方法、装置和电子设备 | |
| US20210350766A1 (en) | Display control device, imaging device, display control method, and display control program | |
| TW202114396A (zh) | 攝像裝置、攝像控制方法及攝像控制程式 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |