CN105432073A - 摄像装置 - Google Patents

摄像装置 Download PDF

Info

Publication number
CN105432073A
CN105432073A CN201480042094.7A CN201480042094A CN105432073A CN 105432073 A CN105432073 A CN 105432073A CN 201480042094 A CN201480042094 A CN 201480042094A CN 105432073 A CN105432073 A CN 105432073A
Authority
CN
China
Prior art keywords
mentioned
value
signal
pixel
correction value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480042094.7A
Other languages
English (en)
Other versions
CN105432073B (zh
Inventor
小坂大树
池田志郎
宇佐美裕丈
梶村佳弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Kokusai Electric Inc
Original Assignee
Hitachi Kokusai Electric Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Kokusai Electric Inc filed Critical Hitachi Kokusai Electric Inc
Publication of CN105432073A publication Critical patent/CN105432073A/zh
Application granted granted Critical
Publication of CN105432073B publication Critical patent/CN105432073B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14623Optical shielding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/745Circuitry for generating timing or clock signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Picture Signal Circuits (AREA)

Abstract

本发明的目的在于,一边排除应该从平均排除的极值,一边不进行数据的排序而进行移位到适当的阈值的动作,由此通过小规模逻辑来实现进行环境跟踪的极值排除平均电路。本发明的摄像装置具备:摄像部、修正值输出部以及减法部,该摄像装置的特征在于,修正值输出部通过多个阈值判定从摄像部的遮光像素区域输出的每个像素的信号电平并且选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化了的信号作为修正值信号输出,减法部用修正值信号减从上述摄像部的感光像素区域输出的信号。

Description

摄像装置
技术领域
本发明涉及一种摄像装置,特别涉及一种降低从摄像元件输出的图像信号中包括的杂音的装置。
背景技术
摄像元件的每个像素存在微小的输出差异,作为固定模式噪音而被公知。此外还公知在多个像素中有具有缺陷的像素,并且作为像素缺陷存在总是表示突出的输出的像素。另外一般为了将遮光时的输出设为0输出而使用成为基准的光学黑(遮光)像素,在摄像装置的电路侧从影像像素偏移减去光学黑像素。
目前,在修正了取自从固体摄像元件受光面的有效像素先读出的4条线的垂直遮光像素的信号的画面垂直方向的暗电流不均后,根据垂直遮光图像4条线的各个垂直像素信号的最小值计算第二个值,存储为垂直污斑修正信号,与图像AGC对应地改变增益,并从自固体摄像元件的受光面的有效像素输出的AGC后的图像信号中减去。另外,公开了以下的技术,即将从上述固体摄像元件输出的信号进行A/D转换为14比特后计算上述代表值信号,并衰减为15/16,然后从自上述固体摄像元件受光面的有效像素输出的图像信号中减去(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2008-109639号公报
发明内容
根据现有的一般方法即针对光学黑(OB)区域和相同像素的简单平均化,会有以下问题,即将基于具有白色疤痕等缺陷的像素、具有放射线进行的激发或者闪烁行为的缺陷的像素等不应该加入到平均化中的值也一起进行平均化。
本发明的目的为:在摄像元件的偏移输出变动、固定模式噪音的修正逻辑电路中,不将不应该平均化的值追加到平均动作中而是跟踪环境变化来找出应该平均化的值,不依赖于用户或者外部计算电路而是通过沿着目的的少的电路结构来实现自动地进行平均动作的逻辑电路。
用于解决问题的方法
本发明的摄像装置具备摄像部、修正值输出部和减法部,该摄像装置的特征在于,修正值输出部通过多个阈值判定从摄像部的遮光像素区域输出的每个像素的信号电平,选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化后的信号作为修正值信号输出,减法部用修正值信号减从上述摄像部的感光像素区域输出的信号。
本发明的摄像装置是上述的摄像装置,其特征在于,具有:修正值保持寄存器部,其将修正值信号保持为比较参照值;控制部,其控制平均化的开始和结束;设定部,其保持多个阈值;差值检测部,其计算比较参照值和新的修正值信号的差值绝对值;阈值检测判定部,其判定上述差值绝对值的大小是否超过了多个阈值;加法部,其将阈值判定部的输出和像素信号相加;阈值内像素数据出现次数判定部,其在针对多个阈值通过阈值判定而判定为阈值以内时增加计数器;选择部,其选择阈值内像素数据出现次数判定部的输出值超过所决定的固定值的最小值,并且选择使用了相同阈值的加法部的输出;标准化部,其用选择出的阈值内像素数据出现次数判定部的输出除选择出的加法部的输出来将基于使用的阈值的相加值进行标准化后设为平均值;修正值保持存储器部,其能够按照由控制部进行地址指定的每个区域保持标准化部的输出,并输出进行了地址指定的值;以及平均化电路结构,其在控制部指定的定时,由修正值保持寄存器部保持修正值保持存储器部的输出,设为比较参照值以及对从属电路的平均化输出。
本发明的摄像装置是上述的摄像装置,其特征在于,选择加法部的输出和上述阈值内像素数据出现次数判定部的输出的选择部根据阈值进行切换。
本发明的摄像装置是上述的摄像装置,其特征在于,修正值输出部通过多个阈值判定从摄像部的遮光像素区域输出的水平线的每个像素的信号电平,选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化后的信号作为修正值信号输出。
本发明的摄像装置是上述的摄像装置,其特征在于,修正值输出部还具有修正值保持存储器部,修正值保持存储器部存储修正值信号、从摄像部的遮光像素区域输出的每个像素的信号电平。
本发明的摄像装置是上述的摄像装置,其特征在于,还具有多个帧存储器,使用多个帧存储器构成上述像素信号的帧平均化电路。
本发明的摄像装置是上述的摄像装置,其特征在于,修正值输出部在输出修正值信号后,再次通过多个阈值判定从摄像部的遮光像素区域输出的每个像素的信号电平,并且选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化后的信号作为修正值信号输出。
本发明的摄像装置是上述的摄像装置,其特征在于,将预定的系数乘以存储在帧存储器中的信息,生成修正值信号。
本发明的摄像装置是上述的摄像装置,其特征在于,还具有限制部,限制部通过预定值来抑制从摄像部的遮光像素区域输出的信号。
本发明的摄像装置是上述的摄像装置,其特征在于,具备以下两种系统,一是从选择表示阈值内像素数据出现次数判定部的输出值超过了预定值的最小值的值并且选择使用了相同阈值的加法部的选择部输出所选择的阈值的信息;通过检测差值绝对值的大小是否超过了多个阈值的阈值判定部,输入多个阈值比所输出的阈值判断结果的数量多且应该对阈值判定结果输出的阈值的信息。
发明的效果
根据本发明,为了降低噪音,将从摄像元件的光学黑区域的像素得到的像素信号进行平均时,一边从平均中排除应该排除的极值,一边不进行数据的排列而进行移位到适当的阈值的动作,由此能够通过小规模逻辑实现进行环境跟踪的极值排除平均电路。
进一步,使用本发明的期待值即目前为止的修正值和新的修正源数据之间的差值,并根据离差值近的值取平均,求出新的修正值的方式能够跟踪温度等环境变动。
附图说明
图1是用于说明作为本发明一个实施例的摄像装置的框图。
图2是用于说明作为本发明的一个实施例的修正值输出部的动作的框图。
图3是用于说明摄像元件的遮光像素区域和感光像素区域的图。
图4是用于说明作为本发明一个实施例的修正值输出部的动作的图。
图5是用于说明作为本发明一个实施例的修正值输出部的阈值变迁控制的动作的图。
图6是用于说明对帧存储器的数据存储的图。
图7是用于说明作为本发明一个实施例的多个帧相同像素平均化动作的图。
图8是用于说明作为本发明一个实施例的修正值输出部的再平均化动作的图。
图9是用于说明作为本发明一个实施例的修正值输出部的环境变化跟踪固定噪音去除动作的图。
具体实施方式
以下使用附图说明本发明的一个实施例。
图1是用于说明作为本发明一个实施例的摄像装置的框图。
图1中,摄像装置100由SENS部1、减法部2、修正值输出部3、后级部4以及控制部5构成。
SENS部1由具有作为摄像单元的摄像元件的摄像部101、A/D转换部(Analog-to-Digitalconverter模数转换器)102构成,通过经由未图示的光学部件输入到摄像部中的光被转换为电信号,进而用A/D转换部将电信号转换为逻辑电路能够处理的数字信号为止的一系列的动作部,输出数字输出信号1a。通过从控制部5输出的控制信号5a来控制SENS部1。
减法部2被输入来自SENS部1的数字输出信号1a,对另外输入的修正值输出信号3a的值进行减法处理,输出修正后的影像信号2a。
修正值输出部3被输入来自SENS部1的数字输出信号1a,输出修正值输出信号3a。修正值输出部3例如由限制部30、期待值差值判定平均电路300、修正值保持存储器部38、修正值保持寄存器部39构成。另外,帧存储器40包括在修正值保持存储器部38中。
修正值输出信号3a在修正值输出部3中也被用于使用了在内部进行动作的期待值差值判定的平均化电路即期待值差值判定平均电路300的参照值输入。
另外,为了决定动作条件,修正值输出部3从控制部5通过照相机调整值设定输出来输入调整用数据、通过照相机定时输出4c输入动作切换定时。调整用数据是平均范围%或阈值等,动作切换定时是针对内部存储器的地址切换或数据寄存器的内容改写的定时信息。
后级部4被输入修正后的影像信号2a,输出照相机影像输出4a。
影像输出4a能够根据修正后的影像信号进行与其他影像设备连接的照相机影像输出。
控制部5控制摄像装置100的整体。控制部5例如通过输入3b、4b等来输出控制信号5a、5b、5c。
图2是用于说明作为本发明的一个实施例的修正值输出部3的动作的框图。
修正值输出部3由限制部30、差值检测部31、阈值判定部32、加法部33、阈值内像素数据出现频率检测部34、设定部35、选择部36、标准化部37、修正值保持存储器部38、修正值保持寄存器部39构成。
另外,图1的期待值差值判定电路300例如由图2的差值检测部31、阈值判定部32、加法部33、阈值内像素数据出现频率检测部34、设定部35、选择部36、标准化部37以及设定部35构成。
限制部30将来自SENS部1的数字输出信号1a限制为用于修正用的比特宽度,限制由修正值输出部3处理的比特宽度,输出数字输出信号30a。另外,如果不需要处理比特范围的限制则可以没有。
差值检测部31根据参照值输入3a、像素数据输入30a来求出差值的绝对值,输出差值绝对值输出31a。
阈值判定部32在内部具有多个阈值,输出通过数字值表示差值绝对值输出31a是否超过各个阈值的阈值判定输出群32a。阈值判定部32可以以用户能够设置阈值那样的方式输入阈值设定数据群35b,也可以为了自动变更阈值而输入阈值变迁控制信号38,但是如果是固定的阈值则可以没有这些。
例如,关于阈值设定数据群35b,在阈值是abc3种情况下,被输入35ba的阈值a、35bb的阈值b、35bc的阈值c。
加法部33被输入像素数据输入30a和阈值判定输出群32a,是针对各个阈值在不超过阈值时相加像素数据输入的值30a的加法电路,通过照相机定时输出4c被重置后,在重复加法动作进行平均期间后,将针对各个阈值的相加结果作为加法输出群33a而输出。
例如,关于加法输出群33a,在阈值有abc3种的情况下,输出针对33aa的阈值a的相加结果、针对33ab的阈值b的相加结果、针对33ac的阈值c的相加结果。
阈值内像素数据出现次数判定部34被输入阈值判定输出群32a,是针对各个阈值,在没有超过阈值时进行计数的加法电路,通过照相机定时输出4c被重置后,在重复计数器动作而进行平均期间后将低于针对各个阈值的阈值的次数作为出现次数群34a而输出。
例如,关于出现次数群34a,在阈值有abc3种的情况下,输出小于34aa的阈值a的次数、小于34ab的阈值b的次数、小于34ac的阈值c的次数。
设定部35将照相机调整值设定输出4b作为输入,保持用于修正值输出部3的设定并赋予内部电路。
使用平均范围%设定35a是用于指定是否将在用于平均的母数中直到阈值出现的次数超过百分之几设为平均对象的设定值。阈值设定数据群35b是赋予阈值判定部32中使用的各个阈值的设定值,根据结构可以没有。保持其他用于平均的母数范围、定时开始和结束的值。
选择部36选择在出现次数群34a中大于基于使用平均范围%设定35a的出现次数中阈值最低的次数,输出36a的所选择的阈值出现次数36a。
另外,选择部36选择针对在加法输出群33a中与所选择的阈值的出现次数相同的阈值的相加结果,作为针对所选择的阈值的相加结果36b来输出。
例如,阈值有abc3种,存在针对33aa的阈值a的相加结果、针对33ab的阈值b的相加结果、针对33ac的阈值c的相加结果、小于34aa的阈值a的次数、小于34ab的阈值b的次数、小于34ac的阈值c的次数,在36a的所选择的阈值出现次数中选择小于34ac的阈值c的次数的情况下,在针对36b的所选择的阈值的相加结果中选择针对33ac的阈值c的相加结果。
另外,选择部36为了自动控制变更阈值判定部32的阈值的值,也可以输出阈值变迁控制信号36c。
例如,阈值判定部32具有8个阶段的阈值,但是在阈值判定输出群32a只输出5个系统的阈值结果而在加法部33和阈值内像素数据出现次数判定群部34中分别只削减5个加法器的电路数的情况下,使用阈值变迁控制信号38b。在所选择的阈值的出现次数36a不是当前使用的5个阈值的中点的情况下,将8个阈值中所使用的阈值进行上下变更。该阈值变迁控制信号36c作为针对相同的坐标的平均的阈值控制而一起保存在修正值保持存储器部38。接着在将相同的场所平均化时从修正值保持存储器部38用作阈值变迁控制信号38b。
标准化部37将针对选择出的阈值的相加结果36b除以选择出的阈值的出现次数36a,输出极值排除平均化输出37a。
修正值保持存储器部38输入极值排除平均化输出37a、照相机定时输出4c,平均结束后,根据作为修正值而应该保持的值确定的定时在进行地址指定的场所存储数据。另外,帧存储器40被包括在修正值保持存储器部38中。
另外,在进行数据存储以外的定时将地址指定的场所的数据作为修正值存储器输出38a而输出。另外,在使用阈值变迁控制信号36c的情况下可以同时存储为附加信号,并作为阈值变迁控制信号38b而输出。
修正值保持寄存器部39输入修正值存储器输出38a、照相机定时输出4c,在开始平均的定时将在上次相同地址的平均结果即修正值存储器输出38a存储在寄存器中,输出修正值输出信号3a。这时的修正值输出信号即发挥作为用于差值检测部31的参照值输入的作用。
另外,修正值保持存储器部39在结束平均后将极值排除平均化输出37a作为修正值而存储在修正值保持存储器部38中的下一个定时,即在修正值保持存储器部38将新的修正值输出到修正值存储器输出38a的时间点,再次存储到寄存器中,并输出修正值输出信号3a。
图3是用于说明摄像元件的遮光像素区域和感光像素区域的图。
感光像素区域10表示摄像元件的感光像素区域,是摄像元件能够根据镜头等的光学图像来输出影像的区域。
遮光像素区域11表示摄像元件的遮光像素区域,是始终对与感光像素区域10的感光像素同等特性的像素进行遮光的区域。
全像素区域12表示摄像元件的全像素区域,作为来自外部的驱动动作的像素坐标而行动,但是包括与感光像素区域10的感光像素、摄像元件的遮光像素区域11的遮光像素特性不同的部分。
任意行13是扩大了摄像元件的任意行的开头部的图。
遮光像素14表示摄像元件的遮光像素。在该例子中表示在水平左部分排列24像素的情况。
感光像素15表示摄像元件的感光像素。
图4是用于说明作为本发明的一个实施例的修正值输出部的动作的图。
图4通过信号电平表示通过图1的框图结构将图3的遮光像素14的24像素进行平均化的效果。
14aa表示处理开始时的遮光像素的输出电平。纵向为输出电平而横向与24个像素对应。
14ab表示参照值不定状态下的差值绝对值输出电平。纵向为输出电平而横向与24个像素对应。将横向的像素位置对应14aa的处理开始时的遮光像素的输出电平,通过另外的标度表现纵向。处理开始时不存在参照值因此不定。
在该例子中表示被清零的情况,但是不管不定值怎样,差值的输出整体变大,自动选择以后表示的阈值大的范围,成为所有对象像素的平均,所以没有问题。
14t表示阈值的电平标度。将纵向的标度与14ab等差值绝对值的输出对应,表示TH0、TH1、TH2、TH3、TH4、TH5的阈值标度。这里表示各自的阈值是倍数的例子。
14ta表示通过14aa选择的阈值电平。表现成为TH5的倍数的TH6的情况。在该例子中以相当于所有对象像素的3分之2的16像素的差值绝对值包含在阈值以内的方式来选择阈值电平。由于温度环境的变化等在遮光像素的输出上重叠随机噪音,产生直流相加分量,当差值绝对值的值变大时也与该处理开始状态同样地自动选择包括相当于所有像素3分之2的16像素的差值绝对值的阈值电平,因此能够跟踪并进行收敛动作。
14ac表示同步性的伤。例示在24个像素中,每次在相应的位置存在同步性的伤的情况。
14ae是将14aa进行了简单平均的输出电平。由于包括14ac的同步性的伤,因此与通过目视预测到的应该有的平均相比,电平变小。
14af表示通过本发明将14aa平均后的输出以及针对14ba的参照值的电平。在处理开始用于差值绝对值的判定的参照值不定,在14ta的阈值电平以下有所有对象像素的差值绝对值,因此没有作为平均对象外的像素。该电平与14ae的简单平均的输出电平没有任何变化。但是在之后的帧中表示本发明的效果。在每秒输出几十张的图像的影像帧速度中,从处理开始以几个帧进行收敛,因此丝毫不成问题。
14ba表示14aa的下一个帧的遮光像素的输出。使纵向电平的位置与14aa的处理开始时的遮光像素的输出电平对应,在横向列出。
14bb表示将14af用于参照值的与14ba之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14ba的输出电平对应横向的像素位置,通过与14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来表现。作为参照值存在14af,因此清楚与14ab相比差值绝对值变小而进行收敛。
14tb表示通过14ba选择的阈值电平。表现成为TH2的情况。如上所述在该例子中,以相当于所有对象像素的3分之2的16像素的差值绝对值包括在阈值以内的方式来选择阈值电平。
14bc表示同步性的伤。示例在24个像素中每次在相应的位置存在同步性的伤的情况。与14ac相同。
14bd表示因放射线或闪烁像素缺陷引起的伤。如果存在放射线的冲突、闪烁性的像素缺陷,则在局部的时间和空间产生激变的杂音电平而成为平均误差的温床。
14be是将14ba进行了简单平均的输出电平。虽然包括14bc的同步性的伤,但是也包括更加突出的14bd的放射线和闪烁像素缺陷引起的伤,因此与通过目视预测到的、应该有的平均相比,电平变得极大。
14bf表示通过本发明将14ba平均后的输出以及针对14ca的参照值的电平。使用14bb的差值绝对值,在该例子中进行动作设定以便剩余所有对象像素的3分之2以上。排除超过14tb的阈值电平的偏离很大的值后进行平均化,因此清楚与14be的简单平均不同,与上次的14af的参照值相比成为更接近应该具有的平均值的值。
14ca表示14ba的下一个帧的遮光像素的输出。使纵向电平的位置与14aa的处理开始时的遮光像素的输出电平对应而横向地列出。
14cb表示将14bf用于参照值的、与14ca之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14ca的输出电平对应横向的像素位置,通过与14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来进行表现。作为参照值存在相比于14af而平均精度上升的14bf,因此清楚相比于14bb,差值绝对值变小而收敛的情形。
14tc表示通过14ca选择的阈值电平。表现成为TH1的情况。如上所述在该例子中选择阈值电平以便相当于所有对象像素的3分之2的16像素的差值绝对值包括在阈值以内。
14cc表示同步性的伤。示例在24个像素中每次在相应的位置存在同步性的伤的情况。与14ac相同。
14ce是将14ca进行了简单平均后的输出电平。包括14cc的同步性的伤,因此与14ae的情况相同,与能够通过目视预测到的应该有的平均相比,电平变小。
14cf表示通过本发明将14ca平均后的输出以及针对14da的参照值的电平。在该例子中使用14cb的差值绝对值,进行动作设定以便剩余所有对象像素的3分之2以上,因此排除超过14tc的阈值电平的偏离很大的值后进行平均化,因此清楚与14be的简单平均不同,相比于上次的14af的参照值,进一步以即使目视图也注意不到部分的精度成为接近应该具有的平均值的值。
14da表示14ca的下一个帧的遮光像素的输出。使纵向电平的位置与14aa的处理开始时的遮光像素的输出电平对应,横向地列出。
14db表示将14cf用于参照值的、与14da之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14da的输出电平对应横向的像素位置,通过与14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来进行表现。作为参照值使用比14bf提高了平均精度的14cf,但是在该例子中大致收敛因此从外观上看不清楚与14cb的差值绝对值的差异。
14td表示通过14da选择的阈值电平。表现成为TH1的情况。如上所述在该例子中选择阈值电平以便相当于所有对象像素的3分之2的16像素的差值绝对值包括在阈值以内。
14dc表示同步性的伤。示例在24个像素中每次在相应的位置存在同步性的伤的情况。与14ac相同。
14de是将14da进行了简单平均的输出电平。包括14dc的同步性的伤,因此和14ae的情况相同,与通过目视预测到的、应该有的平均相比,电平变小。
14df表示通过本发明将14da平均后的输出以及下一个帧的参照值的电平。使用14db的差值绝对值,在该例子中进行动作设定以便剩余所有对象像素的3分之2以上,因此排除超过14td的阈值电平的偏离很大的值来进行平均化,因此与14de的简单平均不同,与上次的14cf的参照值同样,表示应该具有的平均值。在该例子中,上次的14cf的参照值和14df的参照值是相同的值,收敛为应该具有的平均值。
14ae、14be、14ce、14de的简单平均除了经常受同步性噪音的影响,还受放射线等外来噪音的影响,对此,清楚14af、14bf、14cf、14df的本发明的平均以及参照值,在每次重复帧都提高平均精度而收敛的情况。
另外,如上所述,即使在参照值和输入的各值因环境变化而发生偏差的情况下,也求出差值绝对值,进行设定动作以便剩余所有对象像素的3分之2以上,因此能够自动地扩展平均范围,根据与14af类似的条件继续收敛动作。
本发明的特征在于通过只使用现有的输入值而使用固定的阈值的方式不能够得到该自动跟踪。
图5是用于说明作为本发明的一个实施例的修正值输出部的阈值变迁控制动作的图。
图5通过信号电平表示将图3的遮光像素14的24像素通过图1的框图结构进行平均化的效果。特别是为了削减电路规模而使用阈值变迁控制信号36c,通过阈值变迁控制信号38b使预制判定输出群32a动态变化,是能够实现加法部33、阈值内像素数据出现次数判定部34、选择部36的内部电路削减的实施例。
14aa表示处理开始时的遮光像素的输出电平。纵向为输出电平而横向与24个像素对应。
14ab表示参照值不定状态下的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14aa的处理开始时的遮光像素的输出电平,对应横向的像素位置,通过另外的标度表现纵向。处理开始时不存在参照值因此不定。在该例子中表示被清零的情况,但是不管不定值怎样,差值的输出整体变大,自动选择以后表示的阈值大的范围,成为所有对象像素的平均,所以没有问题。
14ts表示可变的阈值输出的电平标度。针对14ab等差值绝对值的输出对应纵向的标度,表示THs0、THs1、THs2、THs3的4个动态阈值标度。这里表示各阈值保持倍数的关系,动作开始时或环境变化时从粗的阈值开始。
14tsa表示通过14aa选择的阈值电平。参照值以及阈值变迁控制信号不定,因此从阈值最粗的状态开始,最小的阈值THs0是标度以外。因此选择THs0,而所有像素成为平均对象。
由于选择了THs0,因此被分配到THs0中的阈值的绝对值在该例子中被阈值变迁控制为成为32a的阈值判定输出群的中心的THs2。
在该例子中选择阈值电平,以便相当于所有对象像素的3分之2的16像素的差值绝对值被包含在阈值以内。因温度环境的变化等而在遮光像素的输出上重叠随机噪音,产生直流相加分量,当差值绝对值的值变大时也与该处理开始状态同样地自动选择包括相当于所有像素3分之2的16像素的差值绝对值的阈值电平,因此能够跟踪并进行收敛动作。
14ac表示同步性的伤。示例24个像素中,每次在相应的位置存在同步性的伤的情况。
14ae是将14aa进行了简单平均后的输出电平。由于包括14ac的同步性的伤,因此与通过目视预测到的、应该有的平均相比,电平变小。
14af表示通过本发明将14aa进行平均后的输出以及针对14ba的参照值的电平。在处理开始,用于差值绝对值的判定的参照值不定,在14tsa的阈值电平以下有所有对象像素的差值绝对值,因此没有作为平均对象外的像素。该电平与14ae的简单平均后的输出电平没有任何变化。但是之后的帧中表示本发明的效果。在每秒输出几十张的图像的影像帧速度下,从处理开始以几个帧进行收敛,因此丝毫不成问题。
14ba表示14aa的下一个帧的遮光像素的输出。针对14aa的处理开始时的遮光像素的输出电平对应纵向电平的位置,在横向列出。
14bb’表示将14af用于参照值的、与14ba之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14ba的输出电平对应横向的像素位置,通过与在14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来进行表现。作为参照值存在14af,因此清楚与14ab相比差值绝对值变小而收敛的情形。
14tsb表示通过14ba选择的阈值电平。表现成为进行阈值变迁控制后的THs0的情况。由于选择了THs0,因此分配给THs0的阈值的绝对值在该例子中被阈值变迁控制为成为32a的阈值判定输出群的中心的THs2。
如上所述,在该例子中选择阈值电平以便相当于所有对象像素的3分之2的16像素的差值绝对值被包括在阈值以内。
14bc表示同步性的伤。示例24个像素中,每次在相应的位置存在同步性的伤的情况。与14ac相同。
14bd表示放射线或闪烁像素缺陷引起的伤。如果存在放射线的冲突、闪烁性的像素缺陷,则在局部的时间和空间产生激变的杂音电平而成为平均误差的温床。
14be是将14ba进行了简单平均的输出电平。虽然包括14bc的同步性的伤,但是也包括更加突出的14bd的放射线和闪烁像素缺陷引起的伤,因此与通过目视预测到的、应该有的平均相比,电平变得极大。
14bf’表示通过本发明将14ba平均后的输出以及针对14ca的参照值的电平。使用14bb’的差值绝对值,在该例子中进行动作设定以便剩余所有对象像素的3分之2以上,排除超过14tsb的阈值电平的偏离很大的值来进行平均化,因此清楚与14be的简单平均不同,成为比上次的14af的参照值还接近应该具有的平均值的值。
14ca表示14ba的下一个帧的遮光像素的输出。针对14aa的处理开始时的遮光像素的输出电平对应纵向电平的位置而横向地列出。
14cb’表示将14bf’用于参照值的、与14ca之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14ca的输出电平对应横向的像素位置,通过与在14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来进行表现。作为参照值存在与14af相比平均精度提高的14bf,因此清楚与14bb相比差值绝对值变小而收敛的情形。
14tsc表示通过14ca选择的阈值电平。表现成为阈值变迁控制后的THs0的情况。由于选择了THs0,因此分配给THs0的阈值绝对值在该例子中被阈值变迁控制为成为32a的阈值判定输出群的中心的THs2。如上所述,在该例子中选择阈值电平以便相当于所有对象像素的3分之2的16像素的差值绝对值包括在阈值以内。
14cc表示同步性的伤。示例24个像素中每次在相应的位置存在同步性的伤的情况。与14ac相同。
14ce是将14ca进行了简单平均的输出电平。由于包括14cc的同步性的伤,因此与14ae的情况相同,与通过目视预测到的、应该有的平均相比,电平变小。
14cf表示通过本发明将14ca平均后的输出以及针对14da的参照值的电平。使用14cb的差值绝对值,在该例子中进行动作设定以便剩余所有对象像素的3分之2以上,排除超过14tsc的阈值电平的偏离很大的值后进行平均化,因此清楚与14be的简单平均不同,与上次的14af的参照值相比,以即使目视附图也不能发现的部分的精度成为更接近应该具有的平均值的值。
14da表示14ca的下一帧的遮光像素的输出。针对14aa的处理开始时的遮光像素的输出电平对应纵向电平的位置,横向地列出。
14db表示将14cf用于参照值的与14da之间的差值绝对值的输出电平。纵向为输出电平而横向与24个像素对应。针对14da的输出电平对应横向的像素位置,通过与在14ab的参照值不定的状态下的差值绝对值的输出电平在纵向对应的标度来进行表现。作为参照值使用相比于14bf而平均精度提高了的14cf,但是在该例子中,由于大致收敛因此外观上看无法判断与14cb的差值绝对值的差异。
14tsd表示通过14da选择的阈值电平。表现成为TH1的情况。由于选择了THs1,因此在该例子中分配给THs1的阈值的绝对值被阈值变迁控制为成为32a的阈值判定输出群的中心的THs2。但是如果阈值是下限,则保持从THs0到THs3的值。如上所述,在该例子中选择阈值电平以便相当于所有对象像素的3分之2的16像素的差值绝对值被包括在阈值以内。
14dc表示同步性的伤。示例24个像素中每次在相应的位置存在同步性的伤的情况。与14ac相同。
14de是将14da进行了简单平均的输出电平。由于包括14dc的同步性的伤,因此与14ae的情况相同,与通过目视预测到的、应该有的平均相比,电平变小。
14df表示通过本发明将14da平均后的输出以及下一个帧的参照值的电平。在该例子中,由于使用14db的差值绝对值,进行动作设定以便剩余所有对象像素的3分之2以上,因此排除超过14td的阈值电平的偏离很大的值后进行平均化,因此与14de的简单平均不同,表示应该具有的平均值。
14ae、14be、14ce、14de的简单平均除了经常受同步性噪音的影响,也受放射线等外来噪音的影响,对此,清楚14af、14bf、14cf、14df的本发明的平均以及参照值在每次重复帧都提高平均精度而进行收敛的情况。
在该一个实施例中,针对可变阈值的THs0、THs1、THs2、THs3和所有平均的5个,具有33的像素数据加法电路群、34的阈值内像素数据出现次数判定群、36的选择电路的内部电路即可。实施例1的TH0到TH6以上和所有平均中至少需要8个电路,能够实现电路的简化。
另外,如上所述,即使参照值和输入的各值因环境变化而发生偏差的情况下,也求出差值绝对值,进行设定动作以便剩余所有对象像素的3分之2以上,因此能够自动地扩张平均范围,根据与14af类似的条件继续收敛动作。除了4个可变阈值,还具有所有平均,由此即使由于环境变化值有很大偏差也能够从最初开始继续收敛动作。
图6是用于说明向帧存储器存储数据的图。
图2的期待值差值判定对多个帧的图像平均化也有效。
图6是向帧存储器存储数据的一个实施例。40表示帧存储器。表示影像的垂直和水平的地址具有相关性地被存储的情况。
通常情况下,如图6(A)所示那样针对摄像元件的全像素区域12,在帧存储器40中存储摄像元件的感光像素区域10的感光区域数据10a。
以往,在要对图像修正用使用遮光图像区域的情况下,如图6(B)所示那样针对摄像元件的全像素区域12,在帧存储器40中除了存储摄像元件的感光像素区域10的感光区域数据10a,还存储摄像元件的遮光像素区域11的遮光区域数据11a。这时,以垂直和水平的像素坐标相关的方式进行存储。
在本发明的一个实施例中除了向图6(A)、图6(B)的帧存储器存储数据以外,为了更有效且精度良好地进行平均化,向图6(C)、图6(D)的帧存储器存储数据。
图6(C)表示在存储到帧存储器的存储数据中存储摄像元件的感光像素区域10的感光区域数据10a、从摄像元件的遮光像素区域11将数据平均化后的遮光区域平均数据11fa的形式。
这时,以垂直和水平的像素坐标相关的方式进行存储。在进行了该遮光区域的平均化的数据存储到帧存储器中时,完成相应图像数据的遮光区域的平均化,由此之后在比较存储在帧存储器中的数据和当前正在摄影的数据的情况下,如果将当前正在摄影的数据的遮光区域平均化,则有不需要同时进行帧存储器的存储数据侧的平均化而能够比较的优点,能够实现平均化电路的共通化、电路重复的冗余以及动作功率的降低。
通过图6(S)说明遮光区域平均数据11fa。
11L是遮光区域的左部,成为按照将11的摄像元件的遮光像素区域进行平均化的每个部位取出的一部分。11Lf是遮光区域左部的平均化数据。关于11L表示的遮光区域的左部成为在水平方向完成了数据的平均化的区域。同样,11R是遮光区域的右部,11Rf成为遮光区域右部的平均化数据,关于11R表示的遮光区域的右部成为在水平方向完成了数据的平均化的区域。
同样,作为表示按照将摄像元件的遮光像素区域11进行平均化的每个部位取出的一个实施例,关于上部,11LU表示遮光区域的左上部,11LfU表示遮光区域左的平均化数据上部,11U表示遮光区域的上中央部,11RU表示遮光区域的右上部,11RfU表示遮光区域右的平均化数据上部。
关于上述各个相应区域以及数据,作为在垂直方向将遮光区域上部平均化结束了的数据,11LUf表示遮光区域左上部的垂直平均化数据,11LfUf表示遮光区域左平均化数据上部的垂直平均化数据,11Uf表示遮光区域上中央部的垂直平均化数据,11RUf表示遮光区域右上部的垂直平均化数据,11RfUf表示遮光区域右平均化数据上部的垂直平均化数据。
同样,作为表示按照将摄像元件的遮光像素区域11进行平均化的每个部位取出的一个实施例,关于下部,11LD表示遮光区域的左下部,11LfD表示遮光区域左的平均化数据下部,11D表示遮光区域的下中央部,11RD表示遮光区域的右下部,11RfD表示遮光区域右的平均化数据下部。
关于上述各个相应区域以及数据,作为在垂直方向将遮光区域下部平均化结束了的数据,11LDf表示遮光区域左下部的垂直平均化数据,11LfDf表示遮光区域左平均化数据下部的垂直平均化数据,11Df表示遮光区域下中央部的垂直平均化数据,11RDf表示遮光区域右下部的垂直平均化数据,11RfDf表示遮光区域右平均化数据下部的垂直平均化数据。
在图6(C)的遮光区域平均数据11fa中,表示以下一个实施例,即将位于4个角的11LfUf的遮光区域左平均化数据上部的垂直平均化数据、11RfUf的遮光区域右平均化数据上部的垂直平均化数据、11LfDf的遮光区域左平均化数据下部的垂直平均化数据、11RfDf的遮光区域右平均化数据下部的垂直平均化数据以及从位于左右的11Lf的遮光区域左部的平均化数据与10a的感光区域数据的相关部、从11Rf的遮光区域右部的平均化数据与10a的感光区域数据之间的相关部以及位于上下的11Uf的遮光区域上中央部的垂直平均化数据、11Df的遮光区域下中央部的垂直平均化数据以垂直和水平的像素坐标与10a的感光区域数据相关的方式进行存储。
在图6(C)的结构的情况下,如果存储与10a的感光区域数据相关的11fa的遮光区域平均数据,则关于该存储部位有各种形式。
图6(D)表示在针对帧存储器的存储数据中除了存储10的摄像元件的感光像素区域10的感光区域数据10a、摄像元件的遮光像素区域11的遮光区域数据11a,还存储从摄像元件的遮光像素区域11将数据平均化后的11fa的遮光区域平均数据的形式。这时,以垂直和水平的像素坐标相关的方式进行存储。
进行了该遮光区域的平均化了的数据存储在存储到帧存储器40中时,完成相应图像数据的遮光区域的平均化,由此之后在比较存储在帧存储器中的数据和当前正在摄影的数据的情况下,如果将当前正在摄影的数据的遮光区域平均化,则有不需要同时进行帧存储器存储数据侧的平均化就能够比较的优点,能够实现平均化电路的共通化、电路重复的冗余以及动作功率的降低。
通过还存储平均前的元数据即遮光区域数据11a,关于平均前的数据和平均后的数据,能够比较存储数据和当前数据,从而能够用于确认周围温度等环境变化。
在图6(D)中,表示一个实施例,即关于遮光区域数据、遮光区域平均数据11fa,针对所有的数据,将垂直和水平的像素坐标与10a的感光区域数据相关地进行存储。
在图6(D)的结构的情况下,如果存储与感光区域数据10a相关的遮光区域数据11a、遮光区域平均数据11fa,则关于该存储部位有多个形式。
接着,使用图1和图7,说明作为本发明的一个实施例的多个帧相同像素平均化的动作。
图7是用于说明作为本发明的一个实施例的多个帧相同像素平均化动作的图。
40表示帧存储器。左边的帧存储器40表示本发明处理前,右边的帧存储器40表示本发明的处理后。
在摄影各个图像时作为有光学的遮光状态的状态,表示在存储器中存储感光像素区域的数据也被遮光时的输出数据。
10a1是第1帧的感光像素区域的数据,11a1是第1帧的遮光像素区域的数据。10a2是第2帧的感光像素区域的数据,11a2是第2帧的遮光像素区域的数据。10a3是第3帧的感光像素区域的数据,11a3是第3帧的遮光像素区域的数据。10a4是第4帧的感光像素区域的数据,11a4是第4帧的遮光像素区域的数据。10a5是第5帧的感光像素区域的数据,11a5是第5帧的遮光像素区域的数据。10a6是第6帧的感光像素区域的数据,11a6是第6帧的遮光像素区域的数据。10a7是第7帧的感光像素区域的数据,11a7是第7帧的遮光像素区域的数据。10a8是第8帧的感光像素区域的数据,11a8是第8帧的遮光像素区域的数据。
10a0是感光像素区域的简单平均数据,11a0是遮光像素数据的简单平均数据。表示存储将上述的从第1帧到第8帧的输出按照每个像素进行简单平均的数据。
10a1a是第1帧的感光像素区域的处理像素的数据。
10a2a是第2帧的感光像素区域的处理像素的数据。
10a3a是第3帧的感光像素区域的处理像素的数据,表示因放射线和闪烁像素缺陷而发生激变的杂音电平的情况。
10a4a是第4帧的感光像素区域的处理像素的数据。
10a5a是第5帧的感光像素区域的处理像素的数据。
10a6a是第6帧的感光像素区域的处理像素的数据。
10a7a是第7帧的感光像素区域的处理像素的数据。
10a8a是第8帧的感光像素区域的处理像素的数据。
10a0a是感光像素区域的简单平均的处理像素的数据,表示平均化中包括从10a3a的第3帧的感光像素区域的处理像素的数据因放射线或闪烁像素缺陷引起的激变杂音电平的情况。
300是成为本发明的中心结构的期待值差值判定平均化电路。是图2的使用了用于本发明一个实施例的期待值差值判定的平均化电路的程序块结构图的部分。
在水平遮光区域的平均化中,对像素数据输入30a依次输入了水平相同行的像素。在将本发明应用于多个帧相同像素平均化的情况下,将存储在像素数据输入30a中的多个帧的相同坐标的像素数据用作输入。依次输入上述的处理像素的数据。
在水平遮光区域的平均化中,对参照值输入3a使用了上次的相同行的平均值。在将本发明应用于多个帧相同像素平均化的情况下,将多个帧的相同坐标的像素数据进行了平均化的值用于参照值输入3a。输入上述10a0a的感光像素区域的简单平均的处理像素的数据。在该例子中使用简单平均,但是也可以重复使用了本发明的一个实施例的反馈来提高精度。
10a0aa是简单平均的处理像素数据的电平。在纵向表现输出电平。
10a1aa是第1帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a2aa是第2帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a3aa是第3帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平,表示因放射线或闪烁像素缺陷而发生激变的杂音电平的情况。
10a4aa是第4帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a5aa是第5帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a6aa是第6帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a7aa是第7帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10a8aa是第8帧的处理像素数据的电平。通过与10a0aa相同的标度表现纵向的输出电平。
10bb是处理像素的差值绝对值的电平。在横向与各个帧的处理像素数据对应,表现在错开了纵向坐标的位置上。与具有放射线或闪烁像素缺陷的影响的10a3aa对应的地方突出。
10t是在处理像素中选择的阈值。在该实施例中,由于从所有处理对象帧的像素选择包括3/4以上的阈值,因此将与上述10a3aa所对应的突出的帧对应的数据从平均化中排除。
10b0aa是使用了本发明的处理像素数据的电平。排除具有放射线或闪烁像素缺陷影响的数据而成为应该具有的平均值。将10b0aa的使用了本发明的处理像素数据的电平输出给37a的极值排除平均化输出,作为处理像素的坐标数据存储在帧存储器中。
10b0是使用了本发明的一个实施例的感光像素区域的平均数据,11b0是使用了本发明的一个实施例的遮光像素区域的平均数据。针对10a0的感光像素区域的简单平均数据、11a0的遮光像素区域的简单平均数据,排除放射线或闪烁像素缺陷的影响,能够以更好的精度来进行多个帧相同像素平均化。
接着,使用图1和图8来说明作为本发明的一个实施例的修正值输出部的再平均化的动作。
图8是用于说明作为本发明的一个实施例的修正值输出部的再平均化动作的图。
图2的期待值差值判定即使针对将存储在帧存储器中的数据区域进行再平均化的情况也有效。
在该一个实施例中表示使用上述期待值差值判定平均化电路300完成像素单位的平均化的情况,10b0是使用了本发明的一个实施例的感光像素区域的平均数据,11b0是使用了本发明的一个实施例的遮光像素区域的平均数据。
14’是在任意行进行存储器存储的遮光像素的数据。代替来自摄像元件的像素被依次输入到30a的像素数据输入。14aa’是所存储的遮光像素的数据电平,横轴与14’位置对应,纵轴表示输出电平。在该例子中是像素单位的平均化之后,因此没有放射线或闪烁缺陷的影响。14ac’是同步性的伤。除了该同步性的伤,在像素单位的平均化中残留像素固有的噪音,为了正确地求出遮光像素区域的平均值而进行来自存储数据的再平均化。
3a的参照值输入初次为不定,因此37a的初次输出成为简单平均。14af’是简单平均输出的电平,是包括应该排除同步性的伤等的数据的平均。因此向3a的参照值输入反馈1次以上,生成37a的极值排除平均化输出有效地工作的数据。这时,30a的像素数据输入重复使用相同行的数据即可。14bf”是使用本发明的一个实施例来将遮光区域进行再平均化的电平。将该14bf”的再平均化电平在40的帧存储器上与相同的行相关地进行保存。
11b0f是遮光区域再平均化数据。是按照每行来存储14bf”的再平均化电平而生成的。通过使用由再平均化而生成遮光区域的平均值的方法,能够不搭载多个成为本发明一个实施例的中心结构的期待值差值判定平均化电路300而精度良好地得到所需要的平均值。
接着,使用图1和图9说明本发明一个实施例即修正值输出部的环境变化跟踪固定噪音去除的动作。
图9是用于说明本发明的一个实施例即修正值输出部的环境变化跟踪固定噪音去除动作的图。
10c是摄影中的感光像素区域的数据,11c是摄影中的遮光像素区域的数据。成为本发明中心结构的300的期待值差值判定平均化电路在每行的水平方向将11c即摄影中的遮光像素区域的数据平均化。
在帧存储器40中已经使用上述实施例存储10b0的遮光时的感光区域数据、11b0的遮光区域数据、11b0f的遮光区域再平均化数据。这些数据被用作用于去除固定噪音的修正信号。
51是再平均数据的读出信号。关于37a的极值排除平均化输出所对应的行,读出11b0f的遮光区域再平均化数据。
52是5列系数乘法电路。针对当前的中心系数k使用上下2个系数,生成与51的再平均数据的读出信号相乘而得的值。例如针对k作为k±0.1的上下系数,将k±0.2进而用作上下系数,与51的再平均数据的读出信号相乘。
53是线相关的图。为了表示37a的极值排除平均化输出进行动作的线、51的再平均数据的读出信号的线与52的5列系数乘法电路所输出的线是相同的而进行记载。
54是5列的差值绝对值生成电路。输出37a的极值排除平均化输出、52的5列系数乘法电路进行的5个各个输出的差值绝对值。
55是最小值判定电路。从54的5列差值绝对值生成电路针对差值绝对值成为最小的系数设立标示。
56是5列的移位寄存器。针对各个系数将55的最小值判定电路所输出的标示积蓄在固定移位寄存器中。
57是系数修正电路。监视56的5列移位寄存器的各列标示量。根据需要设定通过4b的照相机调整值设定输出而使用的移位寄存器的范围,也可以通过4c的照相机定时输出垂直同步或与多个帧同步地管理修正系数的切换。在k列以外成为出现频率最大的情况下,将系数k的值置换为成为该最大的列,输出到57a的系数输出。在2个列的出现频率大致相等时,将系数k的值置换为该2个平均值并输出给57a的系数输出。在将57a的系数输出置换为k以外的情况下,输出57b的移位寄存器清除信号,将56的5列移位寄存器进行清除。在56的5列移位寄存器中积蓄一定数量的标示之前将新设定的系数k输出给57a的系数输出。
58是系数乘法电路。将系数k乘以10b0的遮光时的感光区域数据,生成修正用的数据。通过55的最小值判定电路计算摄影中的遮光区域平均和修正用的遮光区域平均之间的差成为最小的系数,通过57的系数修正电路变更为差成为最小的系数,因此选择所存储的数据和当前摄影中的数据的环境差异为最小的系数k。通过将该系数k与10b0的遮光时的感光区域数据相乘,生成与摄影中的感光区域数据中包括的固定噪音等价的值。
59是固定噪音减法电路。从10c的摄影中的感光像素区域的数据减去修正用的数据。通过减去摄影中的感光区域数据中包括的与固定噪音等价的值,能够去除跟踪了环境变化的固定噪音。
根据本发明的上述一个实施例,在为了降低杂音,将从摄像元件的光学黑区域的像素得到的图像信号进行平均时,一边排除应该从平均排除的极值,一边不进行数据的排序而进行移位到适当的阈值的动作,由此能够通过小规模逻辑来实现进行环境跟踪的极值排除平均电路。
进而使用本发明的上述一个实施例的期待值即目前为止的修正值和新的修正元数据之间的差值,从接近差值的值取得平均并求出新的修正值的方式能够跟踪温度等环境变动。
以上对本发明进行了详细的说明,但是本发明不限于这里所记载的单板方式的摄像装置,而能够广泛地应用于上述以外的多板方式的摄像装置。
工业上的可利用性
本发明不限于这里所记载的单板方式的摄像装置,而能够广泛地应用于上述以外的多板方式的摄像装置。
附图标记的说明
1:SENS部、2:减法部、3:修正值输出部、4:后级部、5:控制部、30:限制部、31:差值检测部、32:阈值判定部、33:加法部、34:阈值内像素数据出现次数判定部、35:设定部、36:选择部、37:标准化部、38:修正值保持存储器部、39:修正值保持寄存器部、40:帧存储器、300:期待值差值判定平均电路。

Claims (10)

1.一种摄像装置,具备:摄像部、修正值输出部以及减法部,该摄像装置的特征在于,
上述修正值输出部通过多个阈值判定从上述摄像部的遮光像素区域输出的每个像素的信号电平,选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化后的信号作为修正值信号输出,
上述减法部用上述修正值信号减从上述摄像部的感光像素区域输出的信号。
2.根据权利要求1所述的摄像装置,其特征在于,
该摄像装置具有:
修正值保持寄存器部,其将上述修正值信号保持为比较参照值;
控制部,其控制平均化的开始和结束;
设定部,其保持多个阈值;
差值检测部,其计算上述比较参照值和新的修正值信号的差值绝对值;
阈值检测判定部,其判定上述差值绝对值的大小是否超过了多个阈值;
加法部,其将上述阈值判定部的输出和像素信号相加;
阈值内像素数据出现次数判定部,其在针对多个阈值通过阈值判定而判定为阈值以内时增加计数器;
选择部,其选择上述阈值内像素数据出现次数判定部的输出值超过所决定的固定值的最小值,并且选择使用了相同阈值的上述加法部的输出;
标准化部,其用选择出的上述阈值内像素数据出现次数判定部的输出除选择出的上述加法部的输出来将基于所使用的阈值的相加值进行标准化后设为平均值;
修正值保持存储器部,其能够按照由上述控制部进行地址指定的每个区域保持上述标准化部的输出,并输出进行了地址指定的值;以及
平均化电路结构,其在控制部指定的定时,由上述修正值保持寄存器部保持上述修正值保持存储器部的输出,作为比较参照值以及对从属电路的平均化输出。
3.根据权利要求1或2所述的摄像装置,其特征在于,
选择上述加法部的输出和上述阈值内像素数据出现次数判定部的输出的选择部根据阈值进行切换。
4.根据权利要求1~3中的任意一项所述的摄像装置,其特征在于,
上述修正值输出部通过多个阈值判定从上述摄像部的遮光像素区域输出的水平行的每个像素的信号电平,选择预定内的信号电平的像素信号,将该选择的像素信号平均化,并将该平均化后的信号作为修正值信号输出。
5.根据权利要求1~4中的任意一项所述的摄像装置,其特征在于,
上述修正值输出部还具有修正值保持存储器部,
上述修正值保持存储器部存储上述修正值信号、从上述摄像部的遮光像素区域输出的每个像素的信号电平。
6.根据权利要求1~3中的任意一项所述的摄像装置,其特征在于,
该摄像装置还具有多个帧存储器,
使用上述多个帧存储器构成上述像素信号的帧平均化电路。
7.根据权利要求1、2或6中的任意一项所述的摄像装置,其特征在于,
上述修正值输出部在输出上述修正值信号后,再次通过多个阈值判定从上述摄像部的遮光像素区域输出的每个像素的信号电平,并且选择预定内的信号电平的像素信号,将该选择出的像素信号平均化,并将该平均化后的信号作为修正值信号输出。
8.根据权利要求7所述的摄像装置,其特征在于,
将预定的系数乘以在上述帧存储器中存储的信息,生成修正值信号。
9.根据权利要求1~3中的任意一项所述的摄像装置,其特征在于,
该摄像装置还具有限制部,
上述限制部通过预定值来抑制从上述摄像部的遮光像素区域输出的信号。
10.根据权利要求2所述的摄像装置,其特征在于,
该摄像装置具备以下两种系统:
从选择表示上述阈值内像素数据出现次数判定部的输出值超过预定值的最小值的值并且选择使用了相同阈值的上述加法部的选择部输出所选择的阈值的信息;以及
通过检测上述差值绝对值的大小是否超过了多个阈值的阈值判定部,输入多个阈值比所输出的阈值判断结果的数量多且应该对阈值判定结果输出的阈值的信息。
CN201480042094.7A 2013-09-30 2014-06-03 摄像装置 Active CN105432073B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-204728 2013-09-30
JP2013204728 2013-09-30
PCT/JP2014/064736 WO2015045486A1 (ja) 2013-09-30 2014-06-03 撮像装置

Publications (2)

Publication Number Publication Date
CN105432073A true CN105432073A (zh) 2016-03-23
CN105432073B CN105432073B (zh) 2018-08-28

Family

ID=52742644

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480042094.7A Active CN105432073B (zh) 2013-09-30 2014-06-03 摄像装置

Country Status (3)

Country Link
JP (1) JP5955466B2 (zh)
CN (1) CN105432073B (zh)
WO (1) WO2015045486A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110383826A (zh) * 2017-03-08 2019-10-25 索尼半导体解决方案公司 图像传感器和传输系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3379823A4 (en) * 2015-11-19 2019-08-07 Olympus Corporation TEST DEVICE, IMAGE PROCESSING DEVICE, METHOD OF CORRECTION TESTING, IMAGE PROCESSING, TEST PROGRAM AND CORRECTION PROGRAM

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5812703A (en) * 1995-06-26 1998-09-22 Nikon Corporation Imaging apparatus
US7236192B2 (en) * 2000-02-02 2007-06-26 Minolta Co., Ltd. Image-sensing device
US20100053383A1 (en) * 2008-08-29 2010-03-04 Canon Kabushiki Kaisha Defect pixel detection apparatus and method for detecting defect pixel
JP2012134666A (ja) * 2010-12-20 2012-07-12 Panasonic Corp 固体撮像装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002077738A (ja) * 2000-08-28 2002-03-15 Nikon Corp クランプ装置
JP2010093471A (ja) * 2008-10-07 2010-04-22 Panasonic Corp 撮像装置、撮像装置用半導体集積回路、および欠陥画素判定方法
JP2010178384A (ja) * 2010-05-06 2010-08-12 Canon Inc 画像信号処理回路、カメラ、及び画像信号処理方法
JP2013153380A (ja) * 2012-01-26 2013-08-08 Hitachi Kokusai Electric Inc 撮像装置および撮像方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5812703A (en) * 1995-06-26 1998-09-22 Nikon Corporation Imaging apparatus
US7236192B2 (en) * 2000-02-02 2007-06-26 Minolta Co., Ltd. Image-sensing device
US20100053383A1 (en) * 2008-08-29 2010-03-04 Canon Kabushiki Kaisha Defect pixel detection apparatus and method for detecting defect pixel
JP2012134666A (ja) * 2010-12-20 2012-07-12 Panasonic Corp 固体撮像装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110383826A (zh) * 2017-03-08 2019-10-25 索尼半导体解决方案公司 图像传感器和传输系统
US11202033B2 (en) 2017-03-08 2021-12-14 Sony Semiconductor Solutions Corporation Image sensor and transmission system with collision detection based on state of collision detection line
CN110383826B (zh) * 2017-03-08 2022-06-07 索尼半导体解决方案公司 图像传感器和传输系统

Also Published As

Publication number Publication date
CN105432073B (zh) 2018-08-28
JPWO2015045486A1 (ja) 2017-03-09
WO2015045486A1 (ja) 2015-04-02
JP5955466B2 (ja) 2016-07-20

Similar Documents

Publication Publication Date Title
EP1261197B1 (en) Image pickup apparatus
JP5631325B2 (ja) 撮像装置の欠陥検出方法及び撮像装置
CN1164083C (zh) 影像信号处理装置及像素缺陷的检测方法
CN101674411B (zh) 摄影装置以及图像区域存在与否判定方法
CN104427251B (zh) 焦点检测设备、其控制方法、以及摄像设备
RU2619721C2 (ru) Устройство захвата изображений, система захвата изображений и способ управления для устройства захвата изображений
JP5141245B2 (ja) 画像処理装置、補正情報生成方法、および撮像装置
JP5615155B2 (ja) 画像処理装置及び方法
CN107113384A (zh) 图像处理装置、图像处理方法以及程序
CN105432073A (zh) 摄像装置
US8665353B2 (en) Solid-state image pickup apparatus and method for driving the same
US20170272629A1 (en) Flash band determination device for detecting flash band, method of controlling the same, storage medium, and image pickup apparatus
CN104301638B (zh) 坏像素处理方法与图像处理装置
CN102572274A (zh) 图像信号处理装置以及图像信号处理方法
US20210243395A1 (en) Image pickup apparatus for inferring noise and learning device
JP5045245B2 (ja) 撮像装置および画像処理方法
US10321043B2 (en) Focus detection apparatus, focus control apparatus, image-capturing apparatus and focus detection method
JP5159647B2 (ja) 画像処理装置及び画像処理方法
JP4322258B2 (ja) ノイズ処理装置および撮像装置
JP2015216601A (ja) 撮像装置およびその制御方法ならびにプログラム
KR102198748B1 (ko) 후천적 불량 픽셀의 검출을 위한 열상 카메라의 소프트 불량 픽셀 검출 방법
JP2005175987A (ja) 画像処理装置
JP5567972B2 (ja) 生成装置及び欠陥画素情報の構成方法
JP5602825B2 (ja) 画像処理装置及び画像処理方法
JP2005318337A (ja) 固体撮像素子の欠陥検出補正装置および撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant