CN103248827A - 闪烁带校正装置、闪烁带校正方法及图像拾取装置 - Google Patents
闪烁带校正装置、闪烁带校正方法及图像拾取装置 Download PDFInfo
- Publication number
- CN103248827A CN103248827A CN201310043559.8A CN201310043559A CN103248827A CN 103248827 A CN103248827 A CN 103248827A CN 201310043559 A CN201310043559 A CN 201310043559A CN 103248827 A CN103248827 A CN 103248827A
- Authority
- CN
- China
- Prior art keywords
- frame
- area
- current group
- rate
- situation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明涉及一种闪烁带校正装置,该装置包括闪烁带检测单元和帧速率转换单元。闪烁带检测单元的配置旨在根据具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,检测帧中闪烁带的开始行和结束行。闪烁带指的是因闪烁光导致帧中所生成的每一行的亮度级的不均匀现象。帧速率转换单元的配置旨在根据开始行和结束行确定转换帧速率之前图像信号的帧的组合,然后把帧速率转换为其1/n。
Description
技术领域
本发明涉及一种闪烁带校正装置、闪烁带校正方法、以及图像拾取装置,其适用于例如这样一种情况:检测在通过使用强光(以下,将其称为“闪光”)照射被拍摄体所获得的图像数据的帧中所生成的闪烁带。
背景技术
在相关技术中,存在一种人们所熟悉的用于摄像机的图像拾取元件,其使用了的滚动快门系统顺序地针对每一水平行(以下,将其称为“行”)开始曝光,并且针对每一行顺序地读取图像信号以输出帧。在具有滚动快门系统的图像拾取元件中,曝光时段(time period)随行变化。因此,如果在比其间图像拾取元件读取图像信号的帧速率短的时段期间使用闪光等,则对于所显示的图像的每一帧,可能生成亮度级的带状不均匀现象(闪烁带)。以下,把亮度级简称为“级”,并且把闪烁带简称为“FB”。
图18A和18B解释性地描述了相关技术中帧中所生成的FB的实例。
图18A描述了图像拾取元件所输出的闪光和帧之间的关系,其中,垂直轴代表垂直方向行的数目,水平轴代表时间(秒)。
图像拾取元件输出沿从帧的上部到下部的方向所读取的图像信号。然后,跨越第一个帧和第二个帧使用闪光。
图18B描述了帧的图像的实例。
如图18A中所示,如果跨越第一个帧和第二个帧使用闪光,则由于闪光会在第一个帧的下方的行上生成级的不均匀现象。另一方面,对于第二个帧,在读取第一个帧的在最下方行的图像信号之前,读取第二个帧的上方行的图像信号。因此,在第二个帧的上方的行中,由于闪光生成级的不均匀现象。
如以上所描述的,如果在帧中生成FB,则在第一个帧中图像的下方变亮,而且在第二个帧中图像的上方变亮。如果在多个帧上生成FB,则当复制移动图像时或者当捕获静止图像时,FB会出现,因此图像的质量劣化。
在相关技术中,例如,为了抑制其中生成FB的帧对图像的影响,进行校正,以消除级的不均匀现象,或者去除相应的帧本身。作为这一对策的先决条件,考虑了一种检测FB存在或者不存在的方法。
作为检测FB的方法,申请号为2010-135921的日本专利申请公开物公开了这样一种方法:使用用于检测存在于第一个帧下方和第二个帧上方的其中增加了像素电平的区域的第一条件。在这一方法中,为了检测FB,把所述区域电平在第二个帧中的降低和在第一个帧中的增加设置为第二条件。
作为另一种方法,申请号为2007-306225的日本专利申请公开物公开了这样一种检测帧的方法:从通过适当的曝光所获得的连续的帧中检测其中曝光饱和的帧。
发明内容
顺便提及,在使用滚动扫描系统所获得的图像中,通常会生成FB。为了校正FB,存在着一种把两或两个以上的帧互相重叠,从而使FB不引人注意的方法。然而,在通过捕获剧烈移动的被拍摄体所获得的图像中,作为图像,扩展时间轴,会产生奇异的感觉。另外,为了实时地校正其中生成FB的图像,执行检测和校正FB的算法变得十分困难。而且,在某些情况下,会导致对FB的错误的检测或者错误的校正。
另外,使用申请号为2010-135921的日本专利申请公开物所公开的检测FB的方法,不能够检测其中FB的开始行和结束行处于帧中的情况以及其中FB连续跨越3或3个以上帧的情况。而且,使用申请号为2007-306225的日本专利申请公开物所公开的检测FB的方法,当具有高亮度的光源或者移动体的位置变化时,变化的移动体或者光源可能导致对FB的错误的检测。
鉴于以上所提到的情况,人们希望,在把帧速率转换为其1/n时,适当地校正转换之前帧中所生成的FB。
根据本发明的实施例,提供了一种闪烁带校正方法,包括基于由具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,根据闪烁带的开始行和结束行检测其中闪烁带出现的帧,所述闪烁带是因闪烁光导致在帧中所生成的每一行的亮度级的不均匀性;以及根据所检测的闪烁带的开始行和结束行,确定在帧速率被转换之前图像信号的帧的组合并把帧速率转换为其1/n。
根据本发明,当检测到其中闪烁带出现的帧时,校正闪烁带,并且把帧速率转换为其1/n,于是,能够在所校正的帧中提供其中闪烁带不引人注意的所希望的图像。
通过以下对最佳模式实施例的详细描述,本发明的其它目的、特性以及优点将变得更加明显,如附图中所说明的。
附图说明
图1为描述根据本发明第一实施例的图像拾取装置的结构实例的结构图;
图2为描述根据本发明第一实施例的FB校正装置的内部结构实例的结构图;
图3A~3C分别解释性地描述了根据本发明第一实施例的帧速率转换单元把帧速率从120P转换为60P时校正处理的实例;
图4为描述根据本发明第一实施例的帧速率转换单元所执行的正常校正处理和校正处理A的实例的流程图;
图5A和5B分别解释性地描述了根据本发明第一实施例的帧速率转换单元校正单FB的过程的实例;
图6A~6D分别解释性地描述了根据本发明第二实施例的帧速率转换单元把帧速率从120P转换为60P时校正处理的实例;
图7为描述根据本发明第二实施例的帧速率转换单元执行正常校正处理、校正处理A以及校正处理B的实例的流程图;
图8A和8B分别解释性地描述了根据本发明第二实施例的帧速率转换单元执行针对多FB的校正处理的实例;
图9解释性地描述了根据本发明第二实施例的帧速率转换单元执行针对多FB的校正处理的另一个实例;
图10A~10C分别解释性地描述了根据本发明第三实施例的帧速率转换单元把帧速率从180P转换为60P时校正处理的实例;
图11为描述根据本发明第三实施例的帧速率转换单元执行正常校正处理和校正处理C的实例的流程图;
图12A和12B分别解释性地描述了在根据本发明第三实施例中针对单FB执行校正处理的实例;
图13A~13E分别解释性地描述了根据本发明第四实施例的帧速率转换单元把帧速率从180P转换为60P时校正处理的实例;
图14为描述根据本发明第四实施例的帧速率转换单元执行正常校正处理、校正处理C、校正处理D和E的实例的流程图;
图15A和15B分别解释性地描述了根据本发明第四实施例的帧速率转换单元执行针对多FB的校正处理的实例;
图16解释性地描述了根据本发明第四实施例的帧速率转换单元执行针对多FB的校正处理的另一个实例;
图17为描述根据本发明另一个实施例的FB校正装置的修改的实例的结构图;以及
图18A和18B解释性地描述了相关技术中所生成的FB的实例。
具体实施方式
以下,将描述实现本发明的最佳模式(以下,将其称为实施例)。应该加以注意的是,将按下列次序进行描述。
1.第一实施例(当把帧速率从120P转换为60P时校正单FB的过程的实例)
2.第二实施例(当把帧速率从120P转换为60P时校正多FB的过程的实例)
3.第三实施例(当把帧速率从180P转换为60P时校正单FB的过程的实例)
4.第四实施例(当把帧速率从180P转换为60P时校正多FB的过程的实例)
5.修改的实例
<1.第一实施例>
(当把帧速率从120P转换为60P时校正单FB的过程的实例)
首先,将参照图1~5,描述在帧中使用了闪光的情况下,根据本发明第一实施例的FB校正处理的实例。在这一实施例中,将描述检测帧中所生成的FB、校正所检测的FB、以及转换帧速率的闪烁带校正装置10(以下将其简称为FB校正装置10)的实例,图像拾取装置1配有FB校正装置10。FB校正装置10实现了一种与以下将加以描述的内部结构块合作执行的闪烁带校正方法。在以下的描述中,把在图像数据的帧中使用了闪光时帧中或者跨越两个帧的FB的生成称为“单闪烁带(以下,将其简称为单FB)”。
图1为描述图像拾取装置1的内部结构实例的结构图。
首先,将描述使用一般摄像机系统的图像拾取装置1。根据本发明的技术也适用于图像拾取装置1所使用的图像拾取处理方法。
图像拾取装置1配有具有滚动快门系统、透镜系统等的图像拾取元件,并且配有输出RGB三原色图像信号的图像拾取单元2,以及针对从图像拾取单元2所接收的图像信号执行预定过程的图像信号处理电路3。对于图像拾取元件,例如,可以使用CMOS(互补金属氧化物半导体)图像传感器。应该加以注意的是,提供于图像拾取单元2的图像拾取元件、透镜系统等未在图中加以显示。
图像拾取元件针对每一像素,对经由透镜系统入射的被拍摄体的图像光进行曝光,并且针对每一行输出图像信号。图像拾取元件针对每一帧、按预定帧速率所输出的图像信号的每一行的曝光时段的差,可以导致FB,FB为因闪烁光导致帧中所生成的每一行的亮度级的不均匀现象。使用A/D(模拟/数字)转换单元(未在图中加以显示),图像拾取单元2能够把从图像拾取元件输出的图像信号从模拟信号转换为数字信号,以生成量化的图像信号。
图像信号处理电路3配有图像拾取系统校正单元31和增益调整单元32。图像拾取系统校正单元31校正从图像拾取单元2所接收的图像信号的缺陷。增益调整单元32根据用户等所给出的操作单元(未在图中加以显示)的指令,调整图像信号的增益等。此处,把图像拾取系统校正单元31和增益调整单元32作为对图像信号进行线性校正的线性校正单元,组合地加以使用。
另外,图像信号处理电路3还配有对图像信号进行拐点校正的拐点(knee)校正单元33和对图像信号进行伽玛校正的伽玛校正单元34。拐点校正单元33和伽玛校正单元34结合起来用作对图像信号进行非线性校正的非线性校正单元。另外,图像信号处理电路3还配有输出信号生成单元35,其生成将被写入外部记录媒体(闪存、HDD等)的从伽玛校正单元34所接收的图像信号作为输出信号。
令图像拾取单元2所输出的RGB的三原色的图像信号经历图像拾取系统校正单元31和增益调整单元32的线性处理,然后令其经历拐点校正单元33的电平压缩,以按一种预定信号标准加以设置。另外,为了与向其输出图像信号的监视器的伽玛系数相对应,伽玛校正单元34进行伽玛校正。此后,输出信号生成单元35把转换为最终输出形式的图像信号输出于监视器(未在图中加以显示)等。
图2为描述FB校正装置10的内部结构实例的结构图。
FB校正装置10配有闪烁带检测单元11(以下,将其简称为FB检测单元11),其检测从图像拾取单元2输入的图像数据的帧中的FB;以及帧速率转换单元12,其根据FB的开始行和结束行确定帧速率转换之前图像信号的帧的组合,并且把图像数据的帧速率转换为其1/n(n:2或者2以上的整数)。另外,FB校正装置10还配有帧存储器13,帧速率转换单元12把图像数据写入帧存储器13中或者从中读取图像数据。
如以上所描述的,FB检测单元11检测帧中FB的存在与不存在以及开始行和结束行。因此,仅需在线性校正单元或者非线性校正单元的前一个阶段提供FB校正装置10。此时,把设置在FB校正装置10之后的线性校正单元或者非线性校正单元用作把预定过程施用于包括已经经历1/n倍转换的帧的图像数据的图像拾取单元。
输出于FB检测单元11的图像数据为渐进的信号,例如,把其帧速率设置为120帧/秒(以下,将其称为120P)或者180帧/秒(以下,将其称为180P)。已经经历了帧速率转换单元12所进行的120P至其1/2频率转换的图像数据为渐进的信号,而且帧速率变为60帧/秒(以下,将其称为60P)。另外,如以下将加以描述的,已经经历了帧速率转换单元12所进行的180P至其1/3频率转换的图像数据也为渐进的信号,而且帧速率变为60帧/秒。
此处,当把图像数据的读取时段设置为短于帧的时段时,可以减少所读取的图像数据中的FB,这一点是人们所熟悉的。根据这一点,如果按初始帧速率两倍的帧速率读取图像数据,则图像数据中FB生成的概率变为50%。
因此,把按两倍帧速率获取的两个帧互相组合,可以减少FB的生成。然而,即使组合了两个帧,FB生成的概率也仅变为50%,而且在按其余生成概率所组合的帧中,依然会生成FB。使用以下将加以解释的一种方法,依据FB的生成条件改变两个组合的帧,可以减少FB。
以下,将参照图3~5描述通过取输入于FB校正装置10的图像数据中第1~第17个帧进行FB校正的过程的实例。在以下的描述中,把多个帧的集合称为“组”,把包括在组中的第n个帧表示为“第n个区域”。另外,为了实时地把帧速率从120P转换为60P,把为转换后帧速率的60P的帧称为“当前帧”。另外,把先于处于帧速率转换单元12转换后帧速率的帧的处于转换前帧速率的多个帧称为“当前组”,把处于转换前帧速率、跟随当前组的帧称为“后继组”。而且,把处于转换前帧速率、先于当前组的帧称为“先前组”。
此处,把处于转换前帧速率的120P的、先于当前帧一个帧的第一区域和在第一区域后的第一二区域称为“当前组”。把处于先于当前帧一个60P的帧的120P的第一和第二区域称为“先前组”。另外,把处于后于当前帧一个60P的帧的120P的第一和第二区域称为“后继组”,如以下将加以描述的。
图3A~3C分别解释性地描述了帧速率转换单元12把帧速率从120P转换为60P时校正处理的实例。图3A描述了把当前组的第一和第二区域加以平均的实例。图3B描述了把闪光用于第一区域中的情况下把当前组的第一和第二区域加以平均的实例。图3C描述了根据第一实施例的校正处理A的实例。
FB检测单元11检测FB开始于还是结束于当前组中。此时,帧速率转换单元12至少把包括在当前组中的图像数据写入帧存储器13,根据FB检测单元11所检测的FB开始于或者结束于其中的区域,针对从帧存储器13所读取的图像数据,执行以下所描述的校正处理,从而转换了帧速率。
此处,把根据第一实施例的帧速率转换单元12校正FB的条件定义如下。
(1)正常校正处理
帧速率转换单元12正常执行对交替地出现在处于120P的帧中的当前组的第一和第二区域进行平均的过程(图3)。
另外,在FB开始于当前组的第一区域中,而且状态非如图3C中所示的情况下,帧速率转换单元12执行把处于120P的当前组的第一和第二区域平均为处于60P的当前帧的过程(图3B)。
(2)校正处理A
在FB开始于第二区域中,而非开始于第一区域中的情况下,帧速率转换单元12执行根据第一实施例的校正处理A(图3C)。
与此同时,在处于120P的帧中,在其中FB非开始于当前组的第一区域中,而开始于当前组的第二区域中的情况下,把处于120P的当前组的第二区域与后继组的第一区域平均为处于60P的当前帧。
于是,在FB不存在于当前组中的情况下或者在FB开始于当前组的第一区域中的情况下,根据第一实施例的帧速率转换单元12对当前组的第一和第二区域进行平均。另外,在FB开始于当前组的第二区域中的情况下,对当前组的第二区域与后继组的第一区域进行平均。然后,把图像数据的帧速率转换为其1/2。
图4为描述帧速率转换单元12所执行的正常校正处理和校正处理A的实例的流程图。
首先,帧速率转换单元12判断FB是否存在于处于120P的当前组的第一和第二区域中(步骤S1)。如果FB不存在于第一和第二区域中,则执行对当前组的第一和第二区域进行平均的正常校正处理(步骤S5),然后终止所述过程。
如果FB存在于当前组的第一和第二区域中,则帧速率转换单元12判断FB是否开始于当前组的第一区域中(步骤S2)。如果FB开始于第一区域中,则执行正常校正处理(步骤S5),然后终止所述过程。
如果FB非开始于第一区域中,则能够断定FB开始于当前组的第二区域中。此时,丢弃当前组的第一区域(步骤S3),执行对FB开始于其中的当前组的第二区域与后继组的第一区域进行平均的校正处理A(步骤S4),然后终止所述过程。
图5A和5B分别解释性地描述了帧速率转换单元12校正单FB的过程的实例。图5A描述了相关技术中针对单FB的校正实例。图5B描述了根据第一实施例的针对单FB的校正实例。如图5A中所示,帧速率转换单元12把根据第一实施例的针对单FB校正处理设置为关闭(无效),而执行正常FB校正处理。
如图5A中所示,在处于120P的帧中,在第5个帧和第12个帧中使用了闪光,而且单FB开始于其中。在相关技术中,通过对包括在当前组中的连续的两个帧(例如,第1和第2个帧以及第3和第4个帧)的图像数据进行平均,校正FB。因此,已经经历了帧速率转换的图像数据的第3个帧是在频率转换之前通过对第5和第6个帧进行平均所获得的帧。然而,在处于120P的帧的第12个帧中,对第11个帧进行平均,从而会在转换之后在图像数据的第6和第7个生成FB。
此处,如图5B中所示,帧速率转换单元12把FB校正处理设置为开启(有效)。此时,处于60P的第6个帧是通过丢弃第11个帧,并且对等12和第13个帧进行平均所获得的帧。另外,处于60P的第7个帧是通过把处于120P的第14和第15个帧进行平均所获得的帧,以及处于60P的第8个帧是通过把处于120P的第15和第16个帧进行平均所获得的帧。此后,处于60P的第9个帧及其后继的帧(未在图中加以显示)相应于相继地把处于120P的第17和第18个帧组以及后继帧组进行平均所获得的帧。
使用以上所描述的根据第一实施例的FB校正装置10,当帧速率转换单元12把图像数据的帧速率从120P转换为60P时,能够实时地校正生成于转换之前的帧中的FB。此时,除了正常校正处理之外,当FB检测单元11检测到在处于120P的当前组的第二区域中使用了闪光,而且FB开始时,帧速率转换单元12还执行改变用于FB校正的帧组的校正处理A。于是,能够有效地抑制处于转换之后60P的帧中FB的生成,并且使FB不引人注意。
另外,由于帧速率转换单元12根据在处于120P的当前组的帧中所生成的FB确定校正处理,所以能够在延迟了处于60P的帧的情况下执行FB校正,于是能够几乎实时地(仅有很小延迟)执行所述过程。因此,在把处于HRF(高帧速率)的图像数据的频率转换为LFR(低帧速率)时,转换之后的时间轴不剧烈变化,并且维持了实时特性。另外,如果FB检测单元11错误地检测了FB,从而帧速率转换单元12错误地校正了FB,则被错误校正的帧非常少。于是,FB校正装置10在输出图像数据的同时,能够维持按转换前帧速率连续输入于FB校正装置10的图像数据的连续性。
<2.第二实施例>
(当把帧速率从120P转换为60P时校正多FB的过程的实例)
以下,将参照图6~9,描述在针对一行多个帧使用了闪光的情况下,根据本发明第二实施例的FB校正处理的实例。在以下的描述中,将以相同的参照数字表示与第一实施例中所描述的图1的部件相应的部件,并且将省略对这些部件的详细描述。另外,把闪光用于一行多个帧(以下将其称为“多闪光”),并且把在3或者3个以上帧上所生成的FB称为“多闪烁带”(以下,将其简称为“多FB”)。
当使用多闪光时,即使执行了根据以上所描述的第一实施例的校正处理,仍会出现多FB。鉴于这一情况,根据第二实施例的帧速率转换单元12有选择地使用其中组合了两个帧的方案以及其中照原样使用帧的方案,处理多FB。
图6A~6D分别解释性地描述了帧速率转换单元12把帧速率从120P转换为60P时校正处理的实例。图6A和6B分别描述了正常校正处理实例。图6C描述了根据以上所描述的第一实施例的校正处理A的实例。图6D描述了根据以上所描述的第二实施例的校正处理B的实例。
根据第二实施例的帧速率转换单元12校正FB的条件定义如下。此处,图6A中所描述的正常校正处理和图6C中所描述的校正处理A与根据第一实施例的帧速率转换单元12所执行的过程相同,因此将省略对它们的描述。
(1)正常校正处理
在FB开始于当前组的第一区域中,而且状态非如图6C和6B中所示的情况下,帧速率转换单元12执行把处于120P的当前组的第一和第二区域平均为处于60P的当前帧的过程(图6B)。
(2)校正处理B
在FB非开始于第一区域中、结束于第一区域中、非结束于第二区域中、以及非开始于第二区域中的情况下,帧速率转换单元12根据第二实施例执行校正处理B。使用校正处理B,把当前组的第二区域扩展为两倍,成为处于60P的当前帧(图6D)。
因此,除了根据第一实施例的帧速率转换单元12所执行的过程之外,在FB开始于先前组的第二区域中,并且结束于当前组的第二区域中的情况下,根据第二实施例的帧速率转换单元12还对当前组的第一和第二区域进行平均。另外,在FB开始于当前组的第二区域中,并且结束于后继前组的第一区域中的情况下,帧速率转换单元12对当前组的第二区域与后继组的第一区域进行平均。在FB开始于先前组的第二区域中,并且结束于当前组的第一区域中的情况下,把后继组第二区域扩展为两倍。然后,把图像数据的帧速率转换为其1/2。
图7为描述帧速率转换单元12执行正常校正处理以及校正处理A和B的实例的流程图。
首先,帧速率转换单元12判断FB是否存在于处于120P的当前组的第一和第二区域中(步骤S11)。如果FB不存在于第一和第二区域中,则执行对第一和第二区域进行平均的正常校正处理(步骤S18),然后终止所述过程。
如果FB存在于当前组的第一和第二区域中,则帧速率转换单元12判断FB是否开始于当前组的第一区域中(步骤S12)。如果FB开始于当前组的第一区域,则执行正常校正处理(步骤S18),然后终止所述过程。
如果FB非开始于当前组的第一区域,则帧速率转换单元12判断FB是否开始于当前组的第二区域中(步骤S13)。如果FB开始于当前组的第二区域中,则丢弃当前组的第一区域(步骤S14),并且执行对FB开始于其中的当前组的第二区域与后继组的第一区域进行平均的校正处理(步骤S15),然后终止所述过程。
在步骤S13中,在帧速率转换单元12断定FB开始于先前组的第二区域中的情况下,帧速率转换单元12判断FB是否结束于当前组的第一区域中(步骤S16)。在FB结束于当前组的第一区域中的情况下,执行把当前组的第二区域扩展为两倍的校正处理B(步骤S17),然后终止所述过程。
在步骤S16中,在FB结束于当前组的第二区域中的情况下,执行正常校正处理(步骤S18),然后终止所述过程。
图8A和8B分别解释性地描述了根据第二实施例的帧速率转换单元12执行针对多FB的校正处理的实例。图8A描述了与第一实施例中一样的针对单FB的校正实例。图8B描述了根据第二实施例的针对多FB的校正实例。
如图8A中所示,在处于120P的帧中,在第2、第8、第9、第12、第15个帧中使用了闪光。在第8和第9个帧中,均出现多FB。当帧速率转换单元12执行根据第一实施例的校正处理时,通过校正处理A,把开始于处于120P的第2个帧中的FB与120P的第3个帧进行平均。
另外,通过校正处理A,把开始于处于120P的第8个帧中的FB与处于120P的第9个帧进行平均。然而,FB同样出现在处于120P的第9个帧中,并且结束于处于120P的第10个帧中。此时,处于60P的第4个帧等于通过把第8和第9个帧进行平均所获得的帧,在处于60P的第5个帧中,出现处于120P的第10帧中所生成的FB。应该加以注意的是,在处于60P的第4个帧中,第一闪烁光(处于120P的第8个帧)和第二闪烁光(处于120P的第9个帧)之间的亮度差导致FB。然而,与在其中闪烁光存在于处于120P的连续的两个帧中的一个帧中以及闪烁光不存在于另一个帧中的情况下处于60P的帧中所生成的FB相比,当一行中两次生成闪烁光时所生成的FB对视觉产生较小的影响。因此,可以不必校正当一行中两次生成闪烁光时所生成的FB。如果生成了这样的FB,则通过连续提供于FB校正装置10中的高亮度压缩电路等压缩摄像机的图像中的极高亮度(闪烁光),于是,亮度差变得不引人注意。
接下来,对处于120P的第12和第13个帧进行平均,以将它们转换为处于60P的第6个帧,然而,在处于60P的第7个帧中,出现处于120P的第15个帧中所生成的FB。另外,处于60P的第8个帧变为通过对处于120P的第15和第16个帧进行平均所获得的帧。
此处,如图8B中所示,把根据第二实施例的针对多FB的校正处理设置为开启(有效),以校正多FB。此时,校正处于120P的帧,并且生成处于60P的帧,以下将对此进行描述。
处于60P的第1个帧是通过校正处理A对处于120P的第2和第3个帧进行平均所获得的帧,因为FB开始于处于120P的第2个帧中。
处于60P的第2个帧是通过校正处理B对处于120P的第4个帧扩展为两倍所获得的帧。
处于60P的第3个帧是通过正常校正处理对处于120P的第5和第6个帧进行平均所获得的帧。
处于60P的第4个帧是通过校正处理A对处于120P的第8和第9个帧进行平均所获得的帧。此处,丢弃处于120P的第7个帧。
处于60P的第5个帧是通过正常校正处理对处于120P的第9和第10个帧进行平均所获得的帧。此处,丢弃处于120P的第11个帧。
处于60P的第6个帧是通过校正处理A对处于120P的第12和第13个帧进行平均所获得的帧。
处于60P的第7个帧为通过校正处理B把处于120P的第14个帧扩展为两倍所获得的帧。
处于60P的第8个帧为通过正常校正处理对处于120P的第15和第16个帧进行平均所获得的帧。
图9解释性地描述了根据本发明第二实施例的帧速率转换单元12执行针对多FB的校正处理的另实例.
如图9中所示,在处于120P的第2、第5、第6、第8、第9、第12、以及第13个帧中均使用了闪光。因此,FB分别出现在处于120P的第2和第3、第5~第10、以及第12~第14个帧中。
首先,FB开始于处于120P的第2个帧中,因此,处于60P的第1个帧是通过校正处理A对处于120P的第2和第3个帧进行平均所获得的帧。
处于60P的第2个帧是通过校正处理B对处于120P的第4个帧扩展为两倍所获得的帧。
另外,FB开始于处于120P的第5个帧中,并且结束于第6个帧中,因此,处于60P的第3个帧是通过正常校正处理对处于120P的第5和第6个帧进行平均所获得的帧。
而且,FB开始于处于120P的第6个帧中,并且结束于第7个帧中,因此,丢弃处于120P的第7个帧。
接下来,FB开始于处于120P的第8个帧中,并且结束于第10个帧中,此处,在第9个帧中,开始于第8和第9个帧中的FB重叠。
此时,处于60P的第4个帧是通过校正处理A对处于120P的第8和第9个帧进行平均所获得的帧。
在处于60P的第5个帧中,通过正常校正处理把处于120P的第9和第10个帧进行平均,并且丢弃处于120P的第11个帧。
接下来,FB开始于处于120P的第12个帧中,并且结束于第14个帧中。
此时,处于60P的第6个帧是通过校正处理A对处于120P的第12和第13个帧进行平均所获得的帧。
处于60P的第7个帧是通过正常校正处理对处于120P的第13和第14个帧进行平均所获得的帧。
此后,处于60P的第8个帧是通过正常校正处理对处于120P的第15和第16个帧进行平均所获得的帧。
使用根据以上所描述的第二实施例的FB校正装置10,在其中在先前组的第二区域中使用了闪光以及FB结束于当前组的第一区域中的情况下,帧速率转换单元12执行把当前组的第二区域扩展为两倍的校正处理B。在其中FB开始于当前组的第一区域中的情况下,而且不处于执行校正处理A或者B的状态下,执行正常校正处理。于是,在执行从120P的帧速率向60P的转换过程中,若除了根据第一实施例的校正处理A之外,还执行校正处理B,则能够实时地对多FB进行校正,从而使处于60P的帧中所生成的FB不引人注意。
在这一情况下,与根据以上所描述的第一实施例的FB校正装置10的情况一样,为了执行实时过程,同时最大程度地抑制处于60P的帧中的延迟,也不针对后继组进行FB的开始或者结束的判断。因此,能够根据处于120P的当前组和先前组的帧高速地校正FB。
<3.第三实施例>
(当把帧速率从180P转换为60P时校正单FB的过程的实例)
以下,将参照图10~12,描述在帧中使用了闪光的情况下,根据本发明第三实施例的FB校正处理的实例。
图10A~10C分别解释性地描述了根据本发明第三实施例的帧速率转换单元12把帧速率从180P转换为60P时校正处理的实例。图10A描述了相关技术中对第一区域和跟随第一区域的第二区域进行平均的实例。图10B描述了当在第一区域中使用了闪光时把第一区域与第二区域进行平均的实例。图10C描述了执行根据第三实施例的校正处理的实例。
此处,把先于当前帧一个处于60P的帧的处于转换前帧速率的180P的第一~第三区域称为“当前组”。另外,把先于当前组处于60P的帧的处于180P的第一~第三区域称为“先前组”。而且把后于当前组处于60P的帧的处于180P的第一~第三区域称为“后继组”。
根据第三实施例的帧速率转换单元12校正FB的条件定义如下。
(1)正常校正处理
帧速率转换单元12正常地执行对反复交替地出现在处于180P的帧中的第一~第三区域进行平均的过程。
另外,在其中FB开始于当前组的第一区域中,而且状态非如图10C中所示的情况下,帧速率转换单元12执行把处于180P的当前组的第一~第三区域平均为处于60P的当前帧的过程(图10B)。
(2)校正处理C
此处,在其中FB开始于当前组的第三区域中,而且FB非开始于当前组的第一区域中的情况下,帧速率转换单元12执行根据第三实施例的校正处理C(图10C)。此时,帧速率转换单元12执行把处于180P的当前组的第一~第三区域平均为处于60P的后继组的第一区域的过程。
因此,在当前组中未生成FB的情况下,或者在FB开始于当前组的第一或者第二区域中的情况下,根据第三实施例的帧速率转换单元12对当前组的第一~第三区域进行平均。另外,在FB开始于当前组的第三区域中,并且结束于后继前组的第一区域中的情况下,帧速率转换单元12对当前组的第二和第三区域与后继组的第一区域进行平均。然后,把图像数据的帧速率转换为其1/3。
图11为描述根据本发明第三实施例的帧速率转换单元执行正常校正处理和校正处理C的实例的流程图。
首先,帧速率转换单元12判断FB是否存在于处于180P的当前组第一~第三区域中(步骤S21)。如果FB不存在于当前组的第一~第三区域中,则帧速率转换单元12执行对第一~第三区域进行平均的正常校正处理(步骤S26),然后终止所述过程。
如果FB存在于第一~第三区域中,则帧速率转换单元12判断FB是否开始于先前组的第三区域中(步骤S22)。如果FB开始于先前组的第三区域中,则帧速率转换单元12执行对当前组的第二和第三区域与后继组的第一区域进行平均的校正处理C(步骤S25),然后终止所述过程。
在步骤S22中,如果FB非开始于先前组的第三区域中,则帧速率转换单元12判断FB是否开始于当前组的第三区域中(步骤S23)。如果FB非开始于先前组的第三区域中,而开始于当前组的第一或者第二区域中,则帧速率转换单元12执行对第一~第三区域进行平均的正常校正处理(步骤S26),然后终止所述过程。
如果FB开始于当前组的第三区域中,则帧速率转换单元12丢弃当前组的第一区域(步骤S24),执行对当前组的第二~第三区域与后继组的第三区域进行平均的校正处理C(步骤S25),然后终止所述过程。
图12A和12B分别解释性地描述了在根据本发明第三实施例中针对单FB执行校正处理的实例。图12A描述了相关技术中针对单FB的校正实例。图12B描述了根据第三实施例的针对单FB的校正实例。图12A中所示的帧速率转换单元12把根据第三实施例的针对单FB校正处理设置为关闭(无效),而执行正常FB校正处理。
图12A中描述的是,在处于180P的帧中,在第5、第12、以及第19个帧中使用了闪光,而且单FB开始于其中。在相关技术中,通过对包括在当前组中的连续的3个帧(例如,第1~第3个帧以及第4~第6个帧)的图像数据进行平均,校正FB。因此,在帧速率的处于转换之后60P的帧的第12个帧变为通过对处于180P的帧的第4~第6个帧进行平均所获得的帧。而且,对于处于180P的第19个帧,FS开始于当前组的第一区域中,并且结束于作为第二区域的第20个帧中,因此,处于60P的第7个帧是通过对处于120P的第19~第21个帧进行平均所获得的帧。然而,对于处于180P的第12个帧,FS开始于当前组的第三区域中,并且结束于后继组的第一区域中,因此,在处于60P的第4和第5个帧中生成FB。
因此,如图12B中所示,把帧速率转换单元12的FB校正处理设置为开启(有效)。此时,当FB开始于处于180P的第12个帧中、处于60P的第4个帧中时,丢弃包括在处于180P的当前组中的第10个帧,并且把当前组的第11和第12个帧与后继组的第13个帧进行平均。另外,处于60P的第5个帧是把处于180P的当前组的第14和第18个帧与后继组的第16个帧进行平均所获得的帧。
使用以上所描述的根据第三实施例的FB校正装置10,在其中在当前组的第三区域中使用了闪光,并且单FB开始的情况下,帧速率转换单元12执行用于对当前组的第二和第三区域与后继组的第一区域进行平均的校正处理C。在这一方式下,实时地校正了FB,于是,能够有效地抑制从180P至60P的转换之后帧中FB的出现,并且使FB不引人注意。
<4.第四实施例>
(当把帧速率从180P转换为60P时校正多FB的过程的实例)
以下,将参照图13~16,描述在一行多个帧中使用了闪光的情况下,根据本发明第四实施例的FB校正处理的实例。
图13A~13E分别解释性地描述了根据第四实施例的帧速率转换单元12把帧速率从180P转换为60P时校正处理的实例。图13A~13C分别与图10A~10C相同。图13D和13E分别描述了在FB开始于先前组的第三区域中的情况下,把当前组的第二和第三区域相加,并且把相加的区域扩展1.5倍的校正处理D和E。
根据第四实施例的帧速率转换单元12校正FB的条件定义如下。此处,图13A和13C中所描述的正常校正处理和校正处理A分别与根据第三实施例的帧速率转换单元12所执行的过程相同,因此将省略对它们的描述。
(1)正常校正处理
在FB开始于当前组的第一区域中,而且状态非如图13C和13D中所示的情况下,帧速率转换单元12执行把处于180P的当前组的第一~第三区域平均为处于60P的当前帧的过程(图13B)。
(2)校正处理D
在FB开始于先前组的第三区域中,并且结束于当前组的第一区域中,而且在当前组的第二和第三区域中未生成FB的情况下,帧速率转换单元12把当前组的第二和第三区域相加,并且扩展1.5倍(图13D)。
(3)校正处理E
在FB开始于先前组的第三区域中,并且结束于当前组的第一区域中、以及FB开始于当前组的第二区域中,并且结束于当前组的第三区域中的情况下,帧速率转换单元12把当前组的第二和第三区域相加,并且扩展1.5倍(图13E)。
因此,除了根据第三实施例的帧速率转换单元12所执行的过程之外,在FB开始于先前组的第三区域中,并且结束于当前组的第一区域中的情况下,根据第四实施例的帧速率转换单元12把当前组的第二和第三区域扩展1.5倍,并且进行平均,从而把帧速率转换为其1/3。
图14为描述根据本发明第四实施例的帧速率转换单元12执行正常校正处理以及校正处理C、D和E的实例的流程图。
首先,帧速率转换单元12判断FB是否存在于处于180P的当前组的第一~第三区域中(步骤S31)。如果FB不存在于第一~第三区域中,则帧速率转换单元12执行对第一~第三区域进行平均的正常校正处理(步骤S42),然后终止所述过程。
如果FB存在于当前组的第一~第三区域中,则帧速率转换单元12判断FB是否开始于当前组的第一区域中(步骤S32)。如果FB开始于当前组的第一区域中,则帧速率转换单元12执行正常校正处理(步骤S42),然后终止所述过程。
如果FB不是开始于当前组的第一区域中,则帧速率转换单元12判断FB是否开始于先前组的第三区域中(步骤S33)。在FB开始于先前组的第三区域中的情况下,则帧速率转换单元12判断FB是否开始于当前组的第三区域中(步骤S34)。在FB开始于当前组的第三区域中的情况下,帧速率转换单元12执行对当前组的第二和第三区域与后继组的第一区域进行平均的校正处理C(步骤S41),然后终止所述过程。
在FB非开始于当前组的第三区域中的情况下,帧速率转换单元12判断FB是否结束于当前组的第一区域中(步骤S35)。在FB结束于当前组的第二或者第三区域中的情况下,帧速率转换单元12执行正常校正处理(步骤S42),然后终止所述过程。
如果FB结束于当前组的第一区域,则帧速率转换单元12判断FB是否存在于当前组的第二和第三区域中(步骤S36)。如果FB不存在于当前组的第二和第三区域中,则帧速率转换单元12执行把当前组的第二和第三区域扩展1.5倍的校正处理D(步骤S37),然后终止所述过程。另一方面,如果FB存在于当前组的第二和第三区域中,则帧速率转换单元12执行把当前组的第二和第三区域扩展1.5倍的校正处理E(步骤S38),然后终止所述过程。
在步骤S33中,在FB非开始于先前组的第三区域中的情况下,帧速率转换单元12判断FB开始于当前组的第三区域中(步骤S39)。在FB非开始于当前组的第三区域中的情况下,帧速率转换单元12执行正常校正处理(步骤S42),然后终止所述过程。
在FB开始于当前组的第三区域中的情况下,帧速率转换单元12丢弃FB开始之前当前组的第一区域(步骤S40),帧速率转换单元12执行对当前组的第二和第三区域与后继组的第一区域进行平均的校正处理C(步骤S41),然后终止所述过程。
图15A和15B分别解释性地描述了根据第四实施例的帧速率转换单元12执行针对多FB的校正处理的实例。图15A描述了根据第三实施例的针对单FB的校正实例。图15B描述了根据第四实施例的针对多FB的校正实例。
如图15A中所示,在处于180P的帧中,在第3、第7、第11、第12、第18、以及第20个帧中使用了闪光,而且FB开始于其中。此处,当帧速率转换单元12执行根据第三实施例的校正处理时,通过校正处理C,把开始于处于180P的第3个帧中的FB与当前组的第二和第三帧和后继组的第4个帧进行平均。
此处,通过正常校正处理,把开始于处于180P的第11个帧中的FB在处于180P的第10~第12个帧中进行平均。然而,FB同样生成于处于180P的第12个帧中,因此,FB结束于第13个帧中。此时,在处于60P的第5个帧中,出现生成于处于180P的第13个帧中的FB。
此处,如图15B中所示,把根据第四实施例的针对多FB的校正处理设置为开启(有效),以校正多FB。此时,校正处于180P的帧如下,以生成处于60P的帧。
由于FB开始于处于180P的第3个帧中,所以处于60P的第1个帧是通过校正处理C对处于180P的第2~第4个帧进行平均所获得的帧。
由于FB结束于处于180P的第4个帧中,所以处于60P的第2个帧是通过校正处理D扩展处于180P的第5和第6个帧所获得的帧。
处于60P的第3个帧是通过正常校正处理对处于180P的第7~第9个帧进行平均所获得的帧。
处于60P的第4个帧是通过正常校正处理对处于180P的第10~第12个帧进行平均所获得的帧。
由于FB结束于处于180P的第13个帧中,而且FB未出现于第14和第15个帧中,所以处于60P的第5个帧是通过校正处理D把处于180P的第14和第15个帧扩展1.5倍所获得的帧。此处,丢弃处于180P的第13个帧。
处于60P的第6个帧是通过校正处理C把处于180P的第17~第19个帧进行平均所获得的帧。此处,丢弃处于180P的第16个帧。
由于FB结束于处于180P的第19个帧中,而且FB出现在第20和第21个帧中,所以处于60P的第7个帧是通过校正处理E把处于180P的第20和第21个帧扩展1.5倍所获得的帧。
处于60P的第8个帧是通过正常校正处理对处于180P的第22和第24个帧进行平均所获得的帧。
图16解释性地描述了根据本发明第四实施例的帧速率转换单元12执行针对多FB的校正处理的另一个实例。图16的上方描述了处于180P的帧的实例,而图16的下方描述了处于60P的帧的实例。
在处于180P的第3、第9、第11、第12、第18、以及第20个帧中使用了闪光。因此,在处于180P的第3、第4、第9~第13、第18~第21个帧中,生成FB。
首先,由于FB开始于处于180P的第3个帧中,所以处于60P的第1个帧是通过校正处理C对处于180P的第2~第4个帧进行平均所获得的帧。
处于60P的第2个帧是通过校正处理D对处于180P的第5和第6个帧扩展1.5倍所获得的帧。
处于60P的第3个帧是通过校正处理C对处于180P的第8~第10个帧进行平均所获得的帧。
处于60P的第4个帧是通过校正处理C对处于180P的第11~第13个帧进行平均所获得的帧。
处于60P的第5个帧是通过校正处理D把处于180P的第14和第15个帧扩展1.5倍所获得的帧。此时,丢弃处于180P的第16个帧。
处于60P的第6个帧是通过校正处理C对处于180P的第17~第19个帧进行平均所获得的帧。
处于60P的第7个帧是通过校正处理E把处于180P的第20和第21个帧扩展1.5倍所获得的帧。此时,丢弃处于180P的第18个帧。
处于60P的第8个帧是通过正常校正处理对处于180P的第22~第24个帧进行平均所获得的帧。
使用根据以上所描述的第四实施例的FB校正装置10,在其中在先前组的第三区域中使用了闪光以及FB结束于当前组的第一区域中的情况下,帧速率转换单元12执行把当前组的第二和第三区域扩展1.5倍的校正处理D和E。于是,除了根据以上所描述的第三实施例的校正处理C之外,还执行校正处理D和E,从而能够实时地对多FB进行校正,并且在把帧速率从180P转换为60P的过程中使处于60P的帧中所生成的FB不引人注意。
如以上所描述的,使用根据第一~第四实施例的FB校正装置10,当帧速率转换单元12执行把按两倍或者两倍以上HFR所获得的图像数据的帧速率向低帧速率的频率转换时,能够从转换之后的图像数据中擦除FB。此时,调整所组合的帧的排列,能够使FB不引人注意。特别是,在作为直播视频分布图像数据的情况下,必须尽可能地防止延迟。因此,例如,通过把CMOS传感器等用作图像拾取元件,能够实时地、小延迟地执行对通过滚动扫描系统所获得的图像中所生成的FB的校正处理。
<5.修改的实例>
应该加以注意的是,在第一和第二实施例中描述了把帧速率从120P向60P转换的过程的实例,在以上所描述的第三和第四实施例中描述了把帧速率从180P向60P转换的过程的实例,然而,转换之前和之后的帧速率并不局限于这些值。另外,也可以取代CMOS传感器,使用不同的元件,只要使用了使用滚动扫描系统的图像拾取元件即可。
而且,最好令输入于FB检测单元11的图像数据为渐进的信号,然而,除了渐进的信号之外,帧速率转换单元12所输出的图像数据也可以为隔行的信号。因此,可以根据把图像显示在其上的监视器的类型,任意改变帧速率转换单元12所输出的图像信号的方式。
另外,在根据以上所描述的第一~第四实施例的FB校正装置10中,通过硬件配置每一结构块,然而也可以通过软件加以实现。此处,将描述通过软件实现的FB校正装置20的结构。
图17为描述FB校正装置20的内部结构的实例的结构图。
与以上所描述的FB校正装置10一样,FB校正装置20配有FB检测单元11、帧速率转换单元12、以及帧存储器13。FB校正装置20还配有处理FB检测单元11的检测结果,以控制帧速率转换单元12的操作的控制单元14。对于控制单元14,例如,使用了中央处理器(CPU)。如以上所描述的,通过使用软件控制FB校正装置20的操作,会使帧速率转换单元12所执行的过程变得复杂。
另外,在通过软件执行上述过程系列的情况下,能够通过其中把构成软件的程序并入专用硬件的计算机或者其中安装了用于执行各种功能的程序的计算机执行所述过程。例如,可以通过把构成所希望的软件的程序安装于通用计算机等执行所述过程。
而且,也可以把其中记录了实现上述实施例功能的软件的程序代码的记录媒体提交于系统或者装置。而且,显然也可以通过由系统或者装置的计算机(或者诸如CPU等的控制装置)读取或者执行存储在记录媒体中的程序代码实现所述功能。
在这一情况下,用于提交程序代码的记录媒体包括软盘、硬盘、光盘、磁光盘、CD-ROM、CD-R、磁带、非易失存储卡、ROM等。
另外,通过计算机执行所读取的程序代码,执行上述实施例的功能。而且,部分或者全部操作在计算机中的操作系统等根据程序代码的指令执行实际的过程。包括通过所述过程实现上述实施例的功能的情况。
另外,本发明实施例并不局限于上述实施例,显然,可以在不背离本发明的宗旨的情况下,采用不同的应用或者修改的实例。
应该加以注意的是,本发明可以采用以下配置。
(1)一种闪烁带校正装置,包括:
闪烁带检测单元,其配置旨在根据具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,检测帧中闪烁带的开始行和结束行,其中,闪烁带指的是因闪烁光导致帧中所生成的每一行的亮度级的不均匀现象;以及
帧速率转换单元,其配置旨在根据开始行和结束行确定转换帧速率之前图像信号的帧的组合,然后把帧速率转换为其1/n。
(2)根据条款(1)所述的闪烁带校正装置,其中,
闪烁带检测单元的配置旨在在转换前帧速率为转换后帧速率的两倍的情况下,把先于处于转换后帧速率的帧的处于转换前帧速率的多个帧设置为当前组,把跟随当前组的处于转换前帧速率的帧设置为后继组,在闪烁带不存在于当前组中的情况和闪烁带开始于当前组的第一区域中的情况之一下,把当前组的第一区域和在第一区域后的第二区域进行平均,在闪烁带开始于当前组的第二区域中的情况下,把当前组的第二区域与后继组的第一区域进行平均,并且把帧速率转换为1/2。
(3)根据条款(1)或者(2)所述的闪烁带校正装置,其中,
帧速率转换单元的配置旨在把先于当前组的处于转换前帧速率的帧设置为先前组,在闪烁带开始于先前组的第二区域中,并且结束于当前组的第二区域中的情况下,把当前组的第一区域和第二区域进行平均,在闪烁带开始于当前组的第二区域中,并且结束于后继组的第一区域中的情况下,把当前组的第二区域与后继组的第一区域进行平均,在闪烁带开始于先前组的第二区域中,并且结束于当前组的第一区域中的情况下,把先前组的第二区域扩展为两倍,并且把帧速率转换为其1/2。
(4)根据条款(1)所述的闪烁带校正装置,其中,
帧速率转换单元的配置旨在在转换前帧速率为转换后帧速率的3倍的情况下,把先于处于转换后帧速率的帧的处于转换前帧速率的多个帧设置为当前组,把跟随当前组的处于转换前帧速率的帧设置为后继组,在闪烁带不存在于当前组中的情况和闪烁带开始于当前组的第一区域和第二区域之一中的情况之一下,把当前组的第一区域、第二区域、以及第三区域进行平均,在闪烁带开始于当前组的第三区域中,并且结束于后继组的第一区域中的情况下,把当前组的第二区域和第三区域与后继组的第一区域进行平均,并且把帧速率转换为其1/3。
(5)根据条款(1)或者(4)所述的闪烁带校正装置,其中,
帧速率转换单元的配置旨在把先于当前组的处于转换前帧速率的帧设置为先前组,在闪烁带开始于先前组的第三区域中,并且结束于当前组的第一区域中的情况下,把当前组的第二区域和第三区域扩展1.5倍,然后平均所述区域,并且把帧速率转换为其1/3。
(6)一种闪烁带校正方法,包括:
根据具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,根据闪烁带的开始行和结束行,检测其中闪烁带出现的帧,其中,闪烁带指的是因闪烁光导致帧中所生成的每一行的亮度级的不均匀现象;以及
根据所检测的闪烁带的开始行和结束行确定转换帧速率之前图像信号的帧的组合,然后把帧速率转换为其1/n。
(7)一种图像拾取装置,包括:
闪烁带校正装置,包括:
闪烁带检测单元,其配置旨在根据具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,根据闪烁带的开始行和结束行,检测其中闪烁带出现的帧,其中,闪烁带指的是因闪烁光导致帧中所生成的每一行的亮度级的不均匀现象;以及
帧速率转换单元,其配置旨在根据所检测的闪烁带的开始行和结束行确定转换帧速率之前图像信号的帧的组合,然后转换帧速率;以及
图像拾取处理单元,其配置旨在针对包括帧的数据执行预定过程,把其帧速率转换为其1/n。
本发明包含与2012年2月13日向日本专利局提出的日本优先专利申请JP2012-028450中所公开的主题相关的主题,特将其全部内容并入此处,以作参考。
本领域技术人员将会意识到:可以依据设计要求和其它因素,对本发明进行多方面的修改、组合、子组合、以及变动,只要这些修改、组合、子组合、以及变动处于所附权利要求或者其等效要求的范围内即可。
Claims (7)
1.一种闪烁带校正装置,包含:
闪烁带检测单元,其配置为基于由具有滚动快门系统的图像拾取元件以预定帧速率为每一帧输出的图像信号的每一行的曝光周期的差,检测一帧中闪烁带的开始行和结束行,其中,闪烁带是因闪烁光导致在所述帧中生成的每一行的亮度级的不均匀性;以及
帧速率转换单元,其配置旨在基于开始行和结束行确定在帧速率转换之前图像信号的帧的组合并把帧速率转换为其1/n。
2.根据权利要求1所述的闪烁带校正装置,其中,
闪烁带检测单元被配置为:在转换前帧速率为转换后帧速率的两倍的情况下,将在处于转换后帧速率的一帧之前的、处于转换前帧速率的多个帧设置为当前组并将跟随当前组的、处于转换前帧速率的帧设置为后继组;在于当前组中不存闪烁带的情况和闪烁带开始于当前组的第一区域中的一种情况下,将当前组的第一区域和在第一区域后的第二区域进行平均;以及在闪烁带开始于当前组的第二区域中的情况下,将当前组的第二区域与后继组的第一区域进行平均并且把帧速率转换为其1/2。
3.根据权利要求2所述的闪烁带校正装置,其中,
帧速率转换单元被配置为:将在当前组前的、处于转换前帧速率的帧设置为先前组;在闪烁带开始于先前组的第二区域中并且结束于当前组的第二区域中的情况下;将当前组的第一和第二区域进行平均;在闪烁带开始于当前组的第二区域中并且结束于后继组的第一区域中的情况下,将当前组的第二区域与后继组的第一区域进行平均;在闪烁带开始于先前组的第二区域中并且结束于当前组的第一区域中的情况下,把当前组的第二区域扩展为两倍,并且把帧速率转换为其1/2。
4.根据权利要求1所述的闪烁带校正装置,其中,
帧速率转换单元被配置为:在转换前帧速率为转换后帧速率的3倍的情况下,将在处于转换后帧速率的一个帧之前的、处于转换前帧速率的多个帧设置为当前组并且将跟随当前组之后的、处于转换前帧速率的帧设置为后继组;在当前组中不存在闪烁带的情况和闪烁带开始于当前组的第一区域和第二区域之一中的一种情况,将当前组的第一区域、第二区域、以及第三区域进行平均;在闪烁带开始于当前组的第三区域中并且结束于后继组的第一区域中的情况下,将当前组的第二区域和第三区域与后继组的第一区域进行平均,并且把帧速率转换为其1/3。
5.根据权利要求4所述的闪烁带校正装置,其中,
帧速率转换单元被配置为:将在当前组之前的、处于转换前帧速率的帧设置为先前组;在闪烁带开始于先前组的第三区域中并且结束于当前组的第一区域中的情况下,将当前组的第二区域和第三区域扩展为1.5倍并平均所述区域;以及把帧速率转换为其1/3。
6.一种闪烁带校正方法,包含:
基于由具有滚动快门系统的图像拾取元件针对处于预定帧速率的每一帧所输出的图像信号的每一行的曝光周期的差,根据闪烁带的开始行和结束行检测其中闪烁带出现的帧,所述闪烁带是因闪烁光导致在帧中所生成的每一行的亮度级的不均匀性;以及
根据所检测的闪烁带的开始行和结束行,确定在帧速率被转换之前图像信号的帧的组合并把帧速率转换为其1/n。
7.一种图像拾取装置,包含:
闪烁带校正装置,包括:
闪烁带检测单元,其配置为基于由具有滚动快门系统的图像拾取元件以预定帧速率为每一帧输出的图像信号的每一行的曝光周期的差,检测一帧中闪烁带的开始行和结束行,其中,闪烁带是因闪烁光导致在所述帧中生成的每一行的亮度级的不均匀性;以及
帧速率转换单元,其配置旨在基于开始行和结束行确定在帧速率转换之前图像信号的帧的组合并把帧速率转换为其1/n;以及
图像拾取处理单元,其被配置为针对包括帧的图像数据执行预定处理,所述帧的帧速率被转换为其1/n。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012028450A JP2013165439A (ja) | 2012-02-13 | 2012-02-13 | フラッシュバンド補正装置、フラッシュバンド補正方法及び撮像装置 |
JP2012-028450 | 2012-02-13 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103248827A true CN103248827A (zh) | 2013-08-14 |
Family
ID=48928025
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310043559.8A Pending CN103248827A (zh) | 2012-02-13 | 2013-02-04 | 闪烁带校正装置、闪烁带校正方法及图像拾取装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9094586B2 (zh) |
JP (1) | JP2013165439A (zh) |
CN (1) | CN103248827A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106063249A (zh) * | 2014-03-19 | 2016-10-26 | 三星电子株式会社 | 摄像装置及其控制方法以及计算机可读记录介质 |
CN107205123A (zh) * | 2016-03-16 | 2017-09-26 | 佳能株式会社 | 闪光带判断装置及其控制方法、存储介质和摄像设备 |
CN111818272A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818271A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012156634A (ja) * | 2011-01-24 | 2012-08-16 | Sony Corp | フラッシュバンド処理回路、フラッシュバンド処理方法、撮像装置及び撮像処理方法 |
JP6156686B2 (ja) * | 2013-02-20 | 2017-07-05 | パナソニックIpマネジメント株式会社 | 画像処理装置 |
EP2887645A1 (en) * | 2013-12-19 | 2015-06-24 | Thomson Licensing | Method and apparatus for acquiring a set of images illuminated by a flash |
JP6261397B2 (ja) * | 2014-03-14 | 2018-01-17 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP6659163B2 (ja) * | 2016-03-16 | 2020-03-04 | キヤノン株式会社 | フラッシュバンド判定装置、その制御方法、およびプログラム |
JP6789682B2 (ja) * | 2016-06-13 | 2020-11-25 | キヤノン株式会社 | 撮像装置、その制御方法、及びプログラム |
JP6808365B2 (ja) * | 2016-06-15 | 2021-01-06 | キヤノン株式会社 | 撮像装置、その制御方法、及びプログラム |
JP2017225072A (ja) * | 2016-06-17 | 2017-12-21 | キヤノン株式会社 | 撮像装置、その制御方法、及びプログラム |
JP6664121B2 (ja) * | 2016-12-27 | 2020-03-13 | パナソニックIpマネジメント株式会社 | 撮像装置、および、カメラ |
US10638077B2 (en) * | 2017-04-14 | 2020-04-28 | Canon Kabushiki Kaisha | Imaging device and control method |
JP7039720B2 (ja) * | 2018-09-18 | 2022-03-22 | 株式会社日立国際電気 | 撮像装置、映像処理方法、およびプログラム |
CN109274791B (zh) * | 2018-09-30 | 2021-06-15 | 联想(北京)有限公司 | 一种处理方法、装置及电子设备 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4760518B2 (ja) | 2006-05-10 | 2011-08-31 | ソニー株式会社 | 撮像装置、撮像方法、プログラム、および画像処理装置 |
JP5320245B2 (ja) * | 2008-11-05 | 2013-10-23 | パナソニック株式会社 | 撮像装置、撮像方法、プログラムおよび集積回路 |
JP5144481B2 (ja) | 2008-12-02 | 2013-02-13 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
US8681265B2 (en) * | 2009-04-16 | 2014-03-25 | Panasonic Corporation | Imaging device, external flash detection method, program, and integrated circuit |
JP5520704B2 (ja) * | 2009-07-03 | 2014-06-11 | パナソニック株式会社 | 撮像装置、閃光判定方法およびプログラム |
JP5634901B2 (ja) * | 2010-05-10 | 2014-12-03 | パナソニック株式会社 | 撮像装置、外部閃光補正方法、プログラム、および、集積回路 |
-
2012
- 2012-02-13 JP JP2012028450A patent/JP2013165439A/ja active Pending
-
2013
- 2013-02-04 CN CN201310043559.8A patent/CN103248827A/zh active Pending
- 2013-02-06 US US13/760,223 patent/US9094586B2/en active Active
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106063249A (zh) * | 2014-03-19 | 2016-10-26 | 三星电子株式会社 | 摄像装置及其控制方法以及计算机可读记录介质 |
CN107205123A (zh) * | 2016-03-16 | 2017-09-26 | 佳能株式会社 | 闪光带判断装置及其控制方法、存储介质和摄像设备 |
CN107205123B (zh) * | 2016-03-16 | 2020-06-19 | 佳能株式会社 | 闪光带判断装置及其控制方法、存储介质和摄像设备 |
CN111818272A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818271A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818272B (zh) * | 2020-06-30 | 2021-09-03 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818271B (zh) * | 2020-06-30 | 2021-09-03 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2013165439A (ja) | 2013-08-22 |
US9094586B2 (en) | 2015-07-28 |
US20130208149A1 (en) | 2013-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103248827A (zh) | 闪烁带校正装置、闪烁带校正方法及图像拾取装置 | |
US9288399B2 (en) | Image processing apparatus, image processing method, and program | |
JP4948090B2 (ja) | 撮像装置及び駆動制御方法 | |
US20140055631A1 (en) | Image capture apparatus and image capturing method | |
US20060262193A1 (en) | Image processing apparatus and method and program | |
CN102611837A (zh) | 闪光带处理电路和处理方法、成像装置和成像处理方法 | |
US8451351B2 (en) | Image processor, method of controlling the same, and storage medium | |
JP2007053634A (ja) | 撮像装置、欠陥画素補正装置および方法 | |
US7245318B2 (en) | Imaging apparatus that corrects an imbalance in output levels of image data | |
JP2007135057A (ja) | 撮像装置、画像処理方法、並びにプログラム | |
JP5105843B2 (ja) | 撮像装置及び判定方法 | |
CN101404715A (zh) | 图像信号处理电路、图像摄取设备和图像信号处理方法 | |
JP2010136224A (ja) | 撮像装置及び撮像方法 | |
KR100986203B1 (ko) | 촬상 장치 및 이에 이용하는 결함 화소 보정 방법 | |
JP2005328421A (ja) | 撮像装置および撮像方法 | |
US20070139530A1 (en) | Auto-Adatpvie Frame Rate for Improved Light Sensitivity in a Video System | |
JP2010130238A (ja) | 欠陥補正回路及びそれを備えた撮像装置 | |
WO2012147337A1 (ja) | フリッカ検出装置、フリッカ検出方法およびフリッカ検出プログラム | |
JP5446955B2 (ja) | 撮像装置 | |
US10735661B2 (en) | Image pickup apparatus that compensates for flash band, control method therefor, storage medium, and video processing apparatus | |
JP4789602B2 (ja) | 撮像装置及び欠陥画素処理方法 | |
JP3938098B2 (ja) | 補正装置、及び撮像装置 | |
JP2007142693A (ja) | 撮像装置および撮像方法 | |
JPH1175106A (ja) | 静止画カメラ | |
JP2000165752A (ja) | 固体撮像装置の信号処理方法及び固体撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C05 | Deemed withdrawal (patent law before 1993) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130814 |