CN1574902A - 摄像装置 - Google Patents
摄像装置 Download PDFInfo
- Publication number
- CN1574902A CN1574902A CNA2004100484010A CN200410048401A CN1574902A CN 1574902 A CN1574902 A CN 1574902A CN A2004100484010 A CNA2004100484010 A CN A2004100484010A CN 200410048401 A CN200410048401 A CN 200410048401A CN 1574902 A CN1574902 A CN 1574902A
- Authority
- CN
- China
- Prior art keywords
- mentioned
- pixel
- color composition
- color
- camera head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 16
- 238000012937 correction Methods 0.000 claims abstract description 37
- 239000000203 mixture Substances 0.000 claims description 89
- 230000010355 oscillation Effects 0.000 claims description 19
- 230000005540 biological transmission Effects 0.000 claims description 17
- 206010070834 Sensitisation Diseases 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 9
- 230000008313 sensitization Effects 0.000 claims description 9
- 238000009825 accumulation Methods 0.000 claims description 5
- 239000011159 matrix material Substances 0.000 claims description 3
- 238000009499 grossing Methods 0.000 abstract description 4
- 230000002093 peripheral effect Effects 0.000 abstract 1
- 230000000875 corresponding effect Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 230000002596 correlated effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000000034 method Methods 0.000 description 5
- 238000005070 sampling Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000003706 image smoothing Methods 0.000 description 3
- 230000005764 inhibitory process Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000005571 horizontal transmission Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005755 formation reaction Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002161 passivation Methods 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 239000002023 wood Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/611—Correction of chromatic aberration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
摄像装置包括彩色摄像元件、偏移量推定单元、修正单元。彩色摄像元件具有第1颜色成分像素、第2颜色成分像素以及第3颜色成份像素。偏移量推定单元使用第3颜色成分像素的周边像素的像素信号,推定第3颜色成分像素所波及的像素信号的信号电平的偏移量。修正单元根据推定出来的偏移量修正第3颜色成分像素的像素信号。例如,在第1~第3颜色成分为红、蓝、绿排列时,根据该修正,可以使排列了红色像素的行的绿像素的像素信号,与排列了蓝像素的行的绿像素的像素信号相等。因此,可以不对图像进行平滑化处理就能抑制行蠕动。
Description
技术领域
本发明涉及摄像装置。具体涉及为了获得高质量的图像而对彩色摄像元件的输出信号实施的图像处理。
背景技术
在使用视频摄像机和电子照相机摄影时,图像中有时会产生行蠕动(条纹状或者格子状的杂波)。产生行蠕动(line crawl)的原因可以列举彩色摄像元件中每个像素的敏感度差、每个垂直传送线的输出电平差等固定图形噪音。作为使这种行蠕动变得不明显的以往技术,我们知道使图像平滑化的方法。在这种平滑化处理中,使用了低通滤波器(Low Pass Filter、以下称略称为LPF)(参照例如,高木干夫著下田阳久监修《图像解析手册》东京大学出版社1991年1月17日、p.539-548)。
但是,为了改善清晰感和粒状感,摄影后的图像数据多采用钝化掩模等清晰性强调处理。这种清晰性强调处理将本来不想让它明显的行蠕动部分的轮廓也进行了强调处理。因此,当原来的图像数据发生行蠕动时,在实施清晰性强调处理之前必须用LPF等平滑化处理降低行蠕动。但是,在图像平滑化之后,很难有效地实施清晰性强调处理。因此,很难从发生行蠕动的原始的图像数据中获得清晰度良好的图像。
发明内容
本发明的目的就是要提供一种在使用了彩色摄像元件的摄像装置中不实施图像平滑化处理而可以降低行蠕动的技术。
技术方案
在本发明的第一种方案中,摄像装置包括具有以下功能的彩色摄像元件、偏移量推定单元、修正单元。彩色摄像元件具有第1颜色成份像素、第2颜色成份像素以及第3颜色成份像素。第1颜色成份像素、第2颜色成份像素以及第3颜色成份像素有规则地排列成二维矩阵形状,分别生成与受光量相对应的像素信号。彩色摄像元件传送这些像素信号,顺次输出。另外,第3颜色成份像素包含比第1颜色成份像素和第2颜色成份像素更多的亮度信息。偏移量推定单元使用第3颜色成份像素的周边像素的像素信号,推定第3颜色成份像素所波及的像素信号的信号电平的偏移量。修正单元根据推定出来的偏移量修正第3颜色成份像素的像素信号。
作为偏移量推定单元推定偏移量所使用的“第3颜色成份像素的周边像素”可以使用比如“水平方向相邻于第3颜色成份像素的2个像素中的至少任何一个”。这里所说的水平方向是指例如水平CCD的延伸方向。
或者,作为“第3颜色成份像素的周边像素”可以使用“垂直方向相邻于第3颜色成份像素的2个像素中的至少任何一个”。这里的垂直方向是指垂直CCD的延伸方向。
或者,作为“第3颜色成份像素的周边像素”可以使用“在彩色摄像元件内的传送顺序中紧挨上述第3颜色成份像素之前的像素。
上述彩色摄像元件是指CCD。
偏移量推定单元是指求出像素信号的信号电平的修正值的条纹状杂波抑制单元的运算功能。修正单元是指例如在将像素信号的信号电平修正到修正值中的条纹状杂波抑制单元的功能。
最好是,这种形态的摄像装置像如下这样。即,偏移量推定单元根据在彩色摄像元件输出的像素信号的输出顺序中位于紧挨第3颜色成份像素之前的像素的像素信号电平或者电平差,推定阻尼振荡引起的偏移量。
或者,这种形态的摄像装置也可以像如下这样,即,偏移量推定单元推定由第3颜色成份像素的感光部表面的散射光引起的偏移量。
或者,这种形态的摄像装置最好如以下4点所述。第1,第1颜色成份像素是选择性地感光红色光的红色像素。第2,第2颜色成份像素是选择性地感光蓝色光的蓝色像素。第3,第3颜色成份像素是选择性地感光绿色光绿色像素。第4,偏移量推定单元根据红色像素的像素信号的电平,推定由“透过彩色摄像元件内的电荷蓄积领域的红色光以及红外光在整体(バルク)内反射并混入周边像素”引起的偏移量。
或者,这种形态的摄像装置最好设置具有以下功能的判断单元。这里的判断单元判定在彩色摄像元件内的传送顺序中紧挨第3颜色成份像素之前的像素传送来的像素信号的电平是否在预定值A以上,只有在预定值A以上时才在修正单元中修正。
或者,这种形态的摄像装置最好设置具有以下功能的判断单元。这里的判断单元将在彩色摄像元件内的传送顺序中紧挨第3颜色成份像素之前的像素传送来的像素信号的电平与第3颜色成份像素的像素信号的电平进行比较,只有在两信号的电平的差别在预定值B以上时,才在修正单元中进行修正。
或者,这种形态的摄像装置最好如以下3点所述。第1,摄像装置包括A/D变换彩色摄像装置输出的像素信号的A/D变换单元。第2,偏移量推定单元使用A/D变换后的像素信号推定偏移量。第3,修正单元修正A/D变换后的像素信号。这里的A/D变换单元是指进行例如A/D变换的图像数据生成单元的功能。
在本发明的另一种方案中,摄像装置包括具有以下功能的彩色摄像元件、偏移量推定单元、修正单元。彩摄像元件至少具有2种颜色成份的像素,将其中的一种作为第1颜色成份像素。这些颜色像素有规则地排列成二维矩阵形状,分别生成与受光量相对应的像素信号。彩色摄像元件传送这些像素信号,顺序输出。偏移量推定单元使用与第1颜色成份像素相邻并不同于第1颜色成份像素的其它种类像素的像素信号,推定第1颜色成份像素所波及的像素信号的信号电平的偏移量。修正单元根据推定的偏移量修正对第1颜色成份像素的像素信号。
本发明的目的和特征将通过以下结合附图的说明变得更明白。
附图说明
图1搭载了本发明的摄像装置的摄像系统的方框图
图2详细表示图1中的CCD的方框图
图3表示图1的摄像装置的信号处理的主要部分的流程图
具体实施形态
下面用图说明本发明的实施形态。
<本实施形态的结构>
图1为表示搭载了本发明的摄像装置的摄像系统的方框图。在图中,摄像系统10通过在本发明的摄像装置12中安装摄像镜头14并连接记录媒体16构成。摄像镜头14由镜头群20和光圈22构成。此外,在本实施形态中,举电子照相机为例对摄像装置12的结构进行说明。
摄像装置12由释放按钮30、EEPROM32、CPU34、存储器(比如DRAM)36、焦平面(focal plane)快门40、CCD44、图像数据生成单元46、缺陷像素修正单元48、箝位处理单元50、判断单元54、条纹状杂波抑制单元60、白平衡调整单元66、色彩插值处理单元68、灰度系数修正单元70、颜色修正单元74、图像压缩单元78和记录单元80构成。
释放按钮30接通时向CPU34发出摄影开始指令。
EEPROM32在控制摄像装置12的同时存储必要的参数。
CPU34使用EEPROM32以及存储器36对摄像装置12的系统进行控制(控制图1中虚线围住的部分)。
存储器36暂时存储向预定的格式进行数据变换或加工之前的图像数据。
图2为详细表示CCD44的方框图。CCD44具有没有图示的半导体基板上按照ベイヤ一正方排列形成的多个像素84、垂直CCD86、水平CCD88、读出放大器90。
各像素84由垂直CCD86的一部分、传感器单元94、读取门电路96构成。传感器单元94由例如具有感光面侧的P形表面区域和N型嵌入区域(电荷蓄积区域)的嵌入型光电二极管形成。传感器单元94生成与感光量相对应的像素信号并蓄积。当然,传感器94生成的像素信号在像素84内为信号电荷的状态。
各像素84的感光面侧用微型透镜以及选择性地透过红、蓝、绿色的任何一种波长的光的光学过滤器覆盖(没有图示)。
垂直CCD86在每个传感器单元94的垂直列沿像素84的排列方向形成有多条。各垂直CCD86通过读取门电路96从传感器单元94传送信号电荷,将该信号电荷向水平CCD88顺次传送。
水平CCD88将从垂直CCD86顺次垂直传送来的信号电荷按照水平方向向读出放大器90传送。
读出放大器90按照预定的增益将传送来的信号电荷增幅,向图像数据生成单元46顺次输入。
<本实施形态的动作说明>
图3为表示上述摄像装置12的信号处理的主要过程的流程图。下面按照图3所示的步骤编号说明摄像装置12的信号处理。
另外,在以下的说明中,将选择性地感光红色光的像素84简记为红色像素,选择性地感光蓝色光的像素84简记为蓝色像素,选择性地感光绿色光的像素84简记为绿色像素。并且,将由排列了红色像素的行的绿色像素生成的像素信号简记为Gr,将由排列了蓝色像素的行的绿色像素生成的像素信号简记为Gb。
而且,将沿水平方向位于与Gb相对应的像素的临近读出放大器90一侧的红色像素的像素信号简记为Bl,将靠近与读出放大器90相反一侧的红色像素的像素信号简记为Br(参照图2中用黑白相对表示的Gb)。另外,将沿垂直方向位于与Gb相对应的像素的靠近水平CCD88一侧的蓝色像素的像素信号简记为Ru,将靠近水平CCD88的相反一侧的蓝色像素的像素信号简记为Rd。
[步骤S1]
CCD44以众所周知的动作被曝光。图像数据生成单元46对CCD44输出的模拟像素信号实施相关双重抽样调制处理和A/D变换等,生成图像数据。这里的图像数据是指用预定的比特数的像素符号表示各像素的颜色。然后,对图像数据实施缺陷像素修正、箝位处理,输入给判断单元54以及条纹状杂波抑制单元60。
[步骤S2]
判断单元54对所有的Gb判定Bl>Gb是否成立,将判定结果作为表格数据输入给条纹状杂波抑制单元60。
[步骤S3]
条纹状杂波抑制单元60对于各Gb通过运算求出作为Gb修正值的Gb′。在这一运算的说明之前,根据不同原因,分别对以什么为基础推定像素信号的偏移量进行说明。
第1,在CCD44的输出段(读出放大器90)的输出顺序中,推定与Gb对应的像素紧前面的像素的像素信号波及Gb的偏移量(阻尼振荡)。这里紧前面的像素在图2中为水平方向位于Gb像素的靠近读出放大器90一侧的蓝色像素。如果假设接受这些偏移量后的Gb作为Gb″,假设偏移的系数为Ka,则Gb″由下列公式给出:
Gb″=Gb+Bl×Ka……………(1)
另外,在本实施形态中,作为其中一例,由CCD44的输出段的阻尼振荡所带来的影响只考虑已经判定为Bl>Gb的Gb。至于原因,是因为Gb在该阻尼振荡中受到的偏移量的Bl比Gb小很多的情况下可以忽略。
第2,推定由图像数据生成单元46内的进行相关双重抽样调制处理的线路内部(没有图示)生成的阻尼振荡产生的偏移量。当然,进行这种相关双重抽样调制处理的线路配置在紧挨CCD44之后。
如果假设受这种偏移量后的Gb为Gb″,偏移的系数为Kb,则Gb″由下列公式给出:
Gb″=Gb+Bl×Kb………(2)
但是,在本实施形态中,作为其中一例,由进行相关双重抽样调制处理的线路内的阻尼振荡引起的影响由于与(1)式同样的理由,只考虑已经判定为Bl>Gb的Gb。并且,最好还考虑修正系数Kb引起的进行相关双重抽样处理的线路内的电平的变动。
第3,在沿垂直方向传送CCD44内的像素信号时,推定由紧挨传送顺序号与Gb相对应的像素之前的像素的红色像素的像素信号所产生的偏移量。如果假设这种偏移量后的Gb为Gb″,偏移的系数为Kc,则Gb″由下面的公式给出:
Gb″=Gb+Rd×Kc………(3)
第4,推定由绿色像素的感光部表面的散射光(漏光)引起的偏移量。具体地说,向相邻于与Gb相对应的绿色像素的红色像素、蓝色像素的感光部表面的微型透镜斜射入的光混入到该绿色像素的传感器单元94时的偏移量。如果假设这种偏移量后的Gb为Gb″,偏移的系数为Kc,Gb″由下面的公式给出:
Gb″=Gb+(Rl+Br)÷2×Kd
+(Ru+Rd)÷2×Ke
…(4)
上述公式中的系数Kd、Ke中的任何一个都是正的。一般来说,一个像素84由垂直CCD86的一部、读取门电路96、传感器单元94大体形成为正方形。也就是说,传感器单元94在垂直方向上长。因此,散射光所造成的影响,受从垂直方向相邻的红色像素的影响比受从水平方向上相邻的蓝色像素的影响要大。因此,Ke比Kd要大。
第5,推定由于透过红色像素的电荷蓄积领域的红色光以及红外光在主体(バルク)内反射,混入到与Gb相对应的绿色像素中而产生的偏移。如果假设受这种偏移量后的Gb为Gb″,偏移的系数为Kf,则Gb″由下面的公式给出:
Gb″=Gb+(Ru+Rd)÷2×Kf
………(5)
上述公式中的系数Kf为正。另外,在CCD型摄像元件中,由第5的理由产生的偏移量几乎没有,在CMOS型摄像元件中,由这个理由产生的偏移量大多数情况很多。
根据以上的5个理由,条纹状杂波抑制单元60用以下所示(6)的公式求出已经判定为Bl>Gb的各Gb的修正值Gb′。由于公式(6)中的Gb为假设受到以上5个理由的影响,所以就相当于(1)~(5)公式中的Gb″。因此,通过将(1)~(5)公式中加算的修正系数项反过来变为减去,修正修正值Gb′。
Gb′=Gb-Bl×(Ka+Kb)-Rd×Kc
-(Bl+Br)÷2×Kd
-(Ru+Rd)÷2×(Ke+Kf)
………(6)
同样,条纹状杂波抑制单元60用下面的公式求出没被判定为Bl>Gb的各Gb的修正值Gb′。
Gb′=Gb-Rd×Kc
-(Bl+Br)÷2×Kd
-(Ru+Rd)÷2×(Ke+Kf)
………(7)
在(7)公式中,由于上述理由,删除(6)公式中对阻尼振荡的修正项。
并且,条纹状杂波抑制单元60用下面的公式求出红色像素的像素信号R的修正值R’。当然,R无区别地包含Ru和Rd两者。
R’=R×(1+Ke÷2+Kf÷2)
………(8)
而且,条纹状杂波抑制单元60用下面的公式求出蓝色像素的像素信号B的修正值B’。当然,B无区别地包含Bl和Br两者。
B’=B×(1+Kd÷2)…(9)
[步骤S4]
条纹状杂波抑制单元60用公式(6)~(9)求出所有的Gb、R、B的信号电平修正修正值Gb′、R’、B’。
另外,在本实施形态中,由于以下的理由进行Gr的修正。
由于传感器单元94在垂直方向上长,如果除去CCD44的输出段以及相关双重抽样调制线路中的阻尼振荡,Gb以及Gr与水平方向相比更容易受到垂直方向相邻的像素的影响。并且,红色比蓝色亮度更高。因此,在对均匀色的被摄体进行摄影时,从垂直方向相邻于红色像素的像素输出的Gb一般容易就比Gr大。因此,通过不修正Gr而较小的修正Gb,可以使对均匀色的被摄体进行摄影时的Gr和Gb相等。
[步骤S5]
之后,对图像数据实施白平衡调整、颜色插值处理、灰度系数修正、颜色修正处理(比如轮廓强调处理)、图像压缩(比如JPEG变换)。然后,记录单元80将压缩后的图像数据记录在记录媒体16中。
以上是本实施形态中的摄像装置12的动作的说明。
下面就上述系数Ka~Kf的求出方法进行补充说明。
系数Ka~Kf可以在例如制造工序或者出货前通过用摄像装置12进行测试摄像而求出。比如,在拍摄全部是均匀的红色测试图以及全部是均匀的蓝色测试图等后,分别解析所获得的图像数据,求出系数Ka~Kf。然后,将所求出的系数存储于EEPROM32中,并可以改写就可以。
例如,在通过对上述测试图进行摄影所获得的图像数据中,在只有垂直方向上的条纹状杂波被确认时,认为上述系数Ka、Kb、Kd为零,只对垂直方向进行修正就可以。或者,在只有水平方向上的条纹状杂波被确认时,认为上述系数Kc、Ke为零,只修正水平方向就可以。
另外,也可以根据不同的原因一个一个地求出系数Ka~Kf。例如,可以通过向读出放大器90输入预定的脉冲波,测定产生的阻尼振荡,从而求出Ka。或者也可以使用一个像素为黑点而其它的所有像素用红色光照明的测试图进行摄影,通过测定从黑点及其周边像素输出的信号电平,求出Ke(在CCD型摄像元件中,可以认为Kf≈0时)。
<本实施形态的效果>
本实施形态根据纵横方向相邻于与Gb相对应的绿色像素的4个不同颜色像素的像素信号,加上上述偏移量的理由求出Gb的修正值(步骤S3)。然后用所求出的修正值修正一般容易比Gr大的Gb使其变小(步骤S4)。因此,在拍摄均匀颜色的被摄体时,可以通过修正使Gr和Gb相等。也就是说,可以不对图像进行平滑化处理就能抑制行蠕动。
因此,如果用本实施形态对摄像后的图像数据进行条纹状杂波抑制处理,由于处理处理后的图像数据不会被平滑化,所以可以有效地实施轮廓强调处理。结果可以获得清晰度良好的图像。
在步骤S2中,判断单元54对所有的Gb判定Bl>Gb是否成立,将判定结果作为表格数据输入给条纹状杂波抑制单元60。然后,根据Bl越小Gb因受阻尼振荡的偏移量越小,只对已经判定为Bl>Gb的Gb修正因阻尼振荡引起的偏移量(公式(6))。因此,可以有效地修正Gb因受阻尼振荡产生的偏移量。
并且,用修正由散射光引起的Gb的偏移量的系数Kd、Ke,也可以修正红色像素以及蓝色像素的像素信号(公式(8)、公式(9))。这一处理意味着使倾斜射入红色像素以及蓝色像素的表面的微型镜头中的光作为杂波成份混入到相邻的绿色像素中的成份恢复到红色像素以及蓝色像素的像素信号中。因此,可以提高拍摄的被写体的颜色的再现性。
同样,在CMOS型摄像元件时,用修正在主体内反射的红色光以及红外光引起的偏移量的系数Kf修正红色像素的像素信号(公式(9))。这一处理意味着将透过红色像素的电荷蓄积领域的光作为杂波混入周边像素的成份恢复到红色像素的像素信号中。因此,可以提高拍摄的被写体的颜色的再现性。
而且,将系数Ka~Kf存储在EEPROM32中,并使其可以改写。因此,可以求出上述系数Ka~Kf并存储再次实施作业,所以可以提高用户的便利性。这是因为,例如可以假设长期使用摄像装置12的用户依赖服中心进行再调整的情况等。
<本实施形态的补充事项>
[1]本实施形态描述了彩色摄像元件为ベイヤ一正方形排列的例子。但本发明并不仅限于这样的实施形态。比如,也可以蜂窝式排列、互补色排列等。蜂窝式排列的CCD型摄像元件的情况时,权利要求所述的水平方向是例如在感光面的相对于水平传送部的延伸方向沿顺时针或者逆时针倾斜约45°的方向。垂直方向是在感光面的与这个水平方向垂直的方向。
[2]描述了摄像装置12由电子照相机构成的例子。本发明并不仅限于这样的实施形态。本发明的抑制条纹状杂波的技术也适用于扫描设备等摄像装置。
[3]描述的是在步骤S2中判定Bl>Gb是否成立,只对成立时的Gb用系数Ka修正因受阻尼振荡而引起的偏移量的例子。本发明并仅限于这样的实施形态。
比如,当偏移量的主要原因是CCD44的输出段中的阻尼振荡时,也以按照以下所示的两种情况简化运算处理。
第1,只对在CCD44的输出段的传送顺序中紧挨与Gb对应的像素之前的像素输出的Bl在预定值(与前述的预定值A对应)以上时的Gb用系数Ka项修正偏移量。
第2,只对用Gb分割相邻的像素的Bl的值在预定值(与前述的预定值B对应)以上的Gb用系数Ka项修正偏移量。前述的“两信号的电平差异”对应例如上述两信号的信号电平的比率。
[4]以上描述的是用在水平以及垂直方向上相邻于对应Gb的绿色像素的4个不同颜色的像素的像素信号修正该Gb的例子。本发明并不仅限于这样的实施形态。
比如,也可以只使用在水平方向上相邻于对应Gb的绿色像素的2个蓝色像素的像素信号的一个或者两个修正Gb。如果像这样只使用水平方向上相邻的像素进行修正的话,可以使必要的行存储器控制在使用垂直方向上相邻的2个像素进行修正时的3分之1。
或者,也可以只使用在垂直方向上相邻于对应Gb的绿色像素的2个蓝色像素的像素信号的一个或者两个,来修正Gb。
或者,也可以只使用在水平方向上位于与Gb对应的绿色像素的靠近读出放大器90一侧的蓝色像素输出的Bl修正Gb。在这里用于修正的Gb是在CCD44内的水平传送时的传送顺序中的紧挨Gb之前的像素信号。此时,可以将必要的行存储器控制在使用垂直方向上相邻的2个像素进行修正时的3分之1。
或者,也可以只使用在垂直方向上位于与Gb对应的绿色像素的靠近水平CCD88一侧的红色像素输出的Rd修正Gb。在这里用于修正的Rd是在CCD44内的垂直传送时的传送顺序中紧挨Gb之前的前像素信号。
[5]以上描述的是通过不修正Gr而修正Gd使拍摄的均匀色的被写体时的Gr和Gb相等的例子。本发明并不仅限于这样的实施形态。比如,也可以按照以下的顺序修正Gb、Gr的两者。
与Gb时同样,假设Gr的修正值为Gr’,在水平方向上邻近与Gr相对应的像素的红色像素的像素信号分别为Rl、Rr(参照图2中用黑白相对表示的Gr像素)。于是,用以下的公式求出Gb′、Gr’。
Gb′=Gb+(Bl+Br)÷2×Km
………(10)
Gr’=Gr+(Rl+Rr)÷2×Kn
………(11)
上述公式的系数Km、Kn都是正值,用上述测试拍摄等求出。另外,如上述所示,因为Gb很容易比Gr大,所以Km>Kn。Km为将Bl产生的阻尼振荡、感光部表面的散射光等引起的偏移量相加的值。Kn为将Rl产生的阻尼振荡、感光部表面的散射光和主体内反射的红色光以及红外光的混入等引起的偏移量相加的值。此时,可以将必要的行存储器控制在使用垂直方向上相邻的2个像素进行修正时的3分之1。
[6]描述的是如公式(1)以及公式(2)所示根据传送顺序中紧挨之前的像素的信号电平修正由阻尼振荡引起的偏移量的例子。本发明并不只限于这样的实施形态。
也可以根据Gb的信号电平与在传送顺序中位于紧挨Gb之前的像素信号电平的差值修正由阻尼振荡引起的偏移量。此时,上述的公式(6)变为以下的公式(12)的形式。
Gb′=Gb-(Bl-Gb)×(Ka’+Kb’)
-Rd×Kc
-(Bl+Br)÷2×Kd
-(Ru+Rd)÷2×(Ke+Kf)
………(12)
在公式(12)中,Ka’为相当于上述Ka的修正系数,Kb’为相当于上述Kb的修正系数。
以上对发明进行了详细的说明,但上述实施形态以及其变形示例只不过是发明一个例子,本发明并不仅限于此。很明显在不脱离本发明的范围内都可以变形。
Claims (24)
1.一种摄像装置,其特征在于,包括:
彩色摄像元件,所述彩色摄像元件包括规则地排列成二维矩阵状、分别生成与感光量相对应的像素信号的“第1颜色成份像素”、“第2颜色成份像素”、以及“包含比上述第1颜色成份像素和第2颜色成份像素多的亮度信息的第3颜色成份像素”,并将上述像素信号传送且顺次输出;
偏移量推定单元,所述偏移量推定单元使用上述第3颜色成份像素的周边像素的上述像素信号,推定上述第3颜色成份像素所波及的上述像素信号的信号电平的偏移量;
修正单元,所述修正单元根据推定出来的上述偏移量,修正上述第3颜色成份像素的上述像素信号。
2.如权利要求1所述的摄像装置,其特征在于,上述偏移量推定单元根据从上述彩色摄像元件输出的上述像素信号的输出顺序中,在上述第3颜色成份像素紧前面的像素的上述像素信号的电平或者电平差,推定阻尼振荡引起的上述偏移量。
3.如权利要求2所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
4.如权利要求2所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素为在上述彩摄像元件内的传送顺序中,在上述第3颜色成份像素紧前面的像素。
5.如权利要求1所述的摄像装置,其特征在于,上述偏移量推定单元推定上述第3颜色成份像素的感光部表面的散射光引起的上述偏移量。
6.如权利要求5所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
7.如权利要求5所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在垂直方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
8.如权利要求5所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在上述彩摄像元件内的传送顺序中,紧挨上述第3颜色成份像素之前的像素。
9.如权利要求1所述的摄像装置,其特征在于,上述第1颜色成份像素是选择性地感光红色光的红色像素;上述第2颜色成份像素是选择性地感光蓝色光的蓝色像素;上述第3颜色成份像素是选择性地感光绿色光的绿色像素;上述偏移量推定单元根据上述红色像素的上述像素信号的电平,推定由透过上述彩色摄像元件内的电荷蓄积领域的红色光以及红外光在整体内反射并混入周边像素所引起的上述偏移量。
10.如权利要求9所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
11.如权利要求9所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在垂直方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
12.如权利要求9所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在上述彩摄像元件内的传送顺序中在上述第3颜色成份像素紧前面的像素。
13.如权利要求1所述的摄像装置,其特征在于,包括判断单元,所述判断单元判定在上述彩色摄像元件内的传送顺序中,在上述第3颜色成份像素紧前面的像素传送来的上述像素信号的电平是否在预定值A以上,只有在预定值A以上时才使上述修正单元进行修正。
14.如权利要求13所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
15.如权利要求13所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在垂直方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
16.如权利要求13所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在上述彩摄像元件内的传送顺序中在上述第3颜色成份像素紧前面的像素。
17.如权利要求1所述的摄像装置,其特征在于,包括判断单元,所述判断单元将在上述彩色摄像元件内的传送顺序中,在上述第3颜色成份像素紧前面的像素传送来的上述像素信号的电平与上述第3颜色成份像素的上述像素信号的电平进行比较,只有在两信号的电平的差在预定值B以上时,才使上述修正单元进行修正。
18.如权利要求17所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
19.如权利要求17所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在垂直方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
20.如权利要求17所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在上述彩摄像元件内的传送顺序中在上述第3颜色成份像素紧前面的像素。
21.如权利要求1所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在水平方向相邻于上述第3颜色成份像素的2个像素中的至少任何一个。
22.如权利要求1所述的摄像装置,其特征在于,上述第3颜色成份像素的周边像素是在上述彩摄像元件内的传送顺序中在上述第3颜色成份像素紧前面的像素。
23.如权利要求1所述的摄像装置,其特征在于,包括对上述彩色摄像装置输出的上述像素信号进行A/D变换的A/D变换单元;上述偏移量推定单元使用A/D转换后的上述像素信号推定上述偏移量;上述修正单元修正A/D变换后的上述像素信号。
24.一种摄像装置,其特征在于,包括:彩色摄像元件,所述彩色摄像元件至少具有2种有规则地排列成二维矩阵形状,分别生成与受光量相对应的像素信号的颜色成份的像素(将其中的一种作为第1颜色成份像素),并传送上述像素信号按顺序输出;
偏移量推定单元,所述偏移量推定单元使用与上述第1颜色成份像素相邻并且不同于上述第1颜色成份像素的其它种类的上述像素的上述像素信号,推定上述第1颜色成份像素所波及的上述像素信号的信号电平的偏移量;
修正单元,所述修正单元根据推定的上述偏移量,修正上述第1颜色成份像素的上述像素信号。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP159459/2003 | 2003-06-04 | ||
JP2003159459A JP4379006B2 (ja) | 2003-06-04 | 2003-06-04 | 撮像装置 |
Related Child Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010105028170A Division CN102006486B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN201010502819XA Division CN102006488B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN2010105028185A Division CN102006487B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1574902A true CN1574902A (zh) | 2005-02-02 |
CN1574902B CN1574902B (zh) | 2013-06-12 |
Family
ID=33157181
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010105028170A Expired - Fee Related CN102006486B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN2004100484010A Expired - Fee Related CN1574902B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN201010502819XA Expired - Fee Related CN102006488B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN2010105028185A Expired - Fee Related CN102006487B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010105028170A Expired - Fee Related CN102006486B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010502819XA Expired - Fee Related CN102006488B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
CN2010105028185A Expired - Fee Related CN102006487B (zh) | 2003-06-04 | 2004-06-04 | 摄像装置 |
Country Status (4)
Country | Link |
---|---|
US (2) | US20040246352A1 (zh) |
EP (1) | EP1484928B1 (zh) |
JP (1) | JP4379006B2 (zh) |
CN (4) | CN102006486B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105580360A (zh) * | 2013-07-08 | 2016-05-11 | 株式会社尼康 | 摄像装置 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2430105B (en) * | 2004-04-05 | 2009-09-23 | Mitsubishi Electric Corp | Imaging device |
JP4717371B2 (ja) * | 2004-05-13 | 2011-07-06 | オリンパス株式会社 | 画像処理装置および画像処理プログラム |
US7656441B2 (en) * | 2005-01-05 | 2010-02-02 | Eastman Kodak Company | Hue correction for electronic imagers |
JP4388909B2 (ja) * | 2005-04-25 | 2009-12-24 | イーストマン コダック カンパニー | 画素欠陥補正装置 |
US7586521B2 (en) * | 2006-01-27 | 2009-09-08 | Nethra Imaging Inc. | Automatic color calibration of an image sensor |
KR100826215B1 (ko) * | 2006-07-25 | 2008-04-29 | 엠텍비젼 주식회사 | 격자 노이즈 및 에지 방향을 고려한 컬러 보간 방법 및장치 |
JP4402161B1 (ja) * | 2009-03-30 | 2010-01-20 | マスレ ホールディングス エルエルピー | 撮像装置、画像再生装置、及び撮像方法 |
JP5269016B2 (ja) * | 2010-09-10 | 2013-08-21 | 株式会社東芝 | 画像処理装置 |
US9177983B2 (en) * | 2012-01-23 | 2015-11-03 | Omnivision Technologies, Inc. | Image sensor with optical filters having alternating polarization for 3D imaging |
JP5648010B2 (ja) * | 2012-03-30 | 2015-01-07 | 富士フイルム株式会社 | 機器の作動方法及び撮影装置と電子内視鏡装置 |
JP6089872B2 (ja) | 2013-03-28 | 2017-03-08 | 富士通株式会社 | 画像補正装置、画像補正方法及び生体認証装置 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS56147578A (en) | 1980-04-18 | 1981-11-16 | Nec Corp | Correction system of mixed color for solidstate color image pickup device |
DE3477119D1 (en) * | 1983-06-15 | 1989-04-13 | Toshiba Kk | Solid state image sensor with high resolution |
KR900000332B1 (ko) * | 1984-06-01 | 1990-01-25 | 마쯔시다덴기산교 가부시기갸이샤 | 흠 보정장치 |
US4945406A (en) * | 1988-11-07 | 1990-07-31 | Eastman Kodak Company | Apparatus and accompanying methods for achieving automatic color balancing in a film to video transfer system |
ATE137377T1 (de) * | 1990-02-06 | 1996-05-15 | Canon Kk | Bildverarbeitungsgerät |
US5668646A (en) * | 1990-02-06 | 1997-09-16 | Canon Kabushiki Kaisha | Apparatus and method for decoding differently encoded multi-level and binary image data, the later corresponding to a color in the original image |
JP3345182B2 (ja) | 1994-08-03 | 2002-11-18 | 松下電器産業株式会社 | 固体撮像装置の駆動方法 |
US5754678A (en) * | 1996-01-17 | 1998-05-19 | Photon Dynamics, Inc. | Substrate inspection apparatus and method |
JP3466855B2 (ja) * | 1997-02-07 | 2003-11-17 | 株式会社リコー | 画像読取装置 |
JP4022962B2 (ja) * | 1997-12-11 | 2007-12-19 | ソニー株式会社 | 信号処理回路および固体撮像素子の出力信号処理方法 |
US6788340B1 (en) * | 1999-03-15 | 2004-09-07 | Texas Instruments Incorporated | Digital imaging control with selective intensity resolution enhancement |
JP2000285229A (ja) * | 1999-03-15 | 2000-10-13 | Texas Instr Inc <Ti> | ディジタルイメージャのための不良画素フィルタリング |
US6992712B2 (en) * | 2000-02-04 | 2006-01-31 | Olympus Optical Co., Ltd. | Imaging apparatus |
JP4497759B2 (ja) * | 2000-06-30 | 2010-07-07 | キヤノン株式会社 | 画像処理装置及びその処理方法 |
JP3636046B2 (ja) * | 2000-07-31 | 2005-04-06 | 株式会社日立国際電気 | 固体撮像素子の画素欠陥検出方法およびその方法を用いた撮像装置 |
DE10042633C2 (de) * | 2000-08-30 | 2002-06-20 | Infineon Technologies Ag | Erkennung eines Geräte-Anschlußzustands beim USB |
JP2002111989A (ja) * | 2000-10-02 | 2002-04-12 | Mega Chips Corp | 画像処理回路 |
US6900836B2 (en) * | 2001-02-19 | 2005-05-31 | Eastman Kodak Company | Correcting defects in a digital image caused by a pre-existing defect in a pixel of an image sensor |
US6741754B2 (en) * | 2001-02-19 | 2004-05-25 | Eastman Kodak Company | Correcting for defects in a digital image taken by an image sensor caused by pre-existing defects in two pixels in adjacent columns of an image sensor |
US20030030738A1 (en) * | 2001-05-22 | 2003-02-13 | Clynes Steven Derrick | On-chip 2D adjustable defective pixel filtering for CMOS imagers |
CN1186921C (zh) * | 2001-06-08 | 2005-01-26 | 光宝科技股份有限公司 | 数字信号补偿装置 |
-
2003
- 2003-06-04 JP JP2003159459A patent/JP4379006B2/ja not_active Expired - Lifetime
-
2004
- 2004-06-01 US US10/856,842 patent/US20040246352A1/en not_active Abandoned
- 2004-06-03 EP EP04013188.0A patent/EP1484928B1/en not_active Expired - Lifetime
- 2004-06-04 CN CN2010105028170A patent/CN102006486B/zh not_active Expired - Fee Related
- 2004-06-04 CN CN2004100484010A patent/CN1574902B/zh not_active Expired - Fee Related
- 2004-06-04 CN CN201010502819XA patent/CN102006488B/zh not_active Expired - Fee Related
- 2004-06-04 CN CN2010105028185A patent/CN102006487B/zh not_active Expired - Fee Related
-
2008
- 2008-10-17 US US12/285,984 patent/US7792358B2/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105580360A (zh) * | 2013-07-08 | 2016-05-11 | 株式会社尼康 | 摄像装置 |
CN105580360B (zh) * | 2013-07-08 | 2018-12-07 | 株式会社尼康 | 摄像装置 |
Also Published As
Publication number | Publication date |
---|---|
US20090122166A1 (en) | 2009-05-14 |
EP1484928A2 (en) | 2004-12-08 |
CN102006488B (zh) | 2012-08-08 |
CN102006488A (zh) | 2011-04-06 |
CN102006487B (zh) | 2012-08-08 |
CN102006486B (zh) | 2012-08-08 |
EP1484928A3 (en) | 2007-07-11 |
CN102006486A (zh) | 2011-04-06 |
CN1574902B (zh) | 2013-06-12 |
JP2004363902A (ja) | 2004-12-24 |
CN102006487A (zh) | 2011-04-06 |
US7792358B2 (en) | 2010-09-07 |
US20040246352A1 (en) | 2004-12-09 |
EP1484928B1 (en) | 2015-03-25 |
JP4379006B2 (ja) | 2009-12-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1226864C (zh) | 图象感测设备及黑斑校正方法 | |
CN1941917A (zh) | 成像装置及图像处理器 | |
CN1645914A (zh) | 图像处理方法、图像处理装置及其使用的计算机程序 | |
TWI422234B (zh) | An image signal correcting means, an image capturing means, an image signal correcting means, and an image signal correcting processing means | |
CN1898697A (zh) | 用于修改图像场数据的技术 | |
CN1574902A (zh) | 摄像装置 | |
CN1917616A (zh) | 摄影装置 | |
CN1672403A (zh) | 数字静态照相装置、摄像装置和信息终端装置 | |
CN101079966A (zh) | 固态成像设备、用于驱动固态成像设备的方法和相机 | |
CN1829291A (zh) | 感测设备、感测能量场的方法以及照相机 | |
CN1993982A (zh) | 摄像装置、摄像方法及摄像控制程序 | |
JP2007189544A (ja) | 撮像装置 | |
CN1684499A (zh) | 图像处理装置、图像处理方法及其程序和记录介质 | |
US20080152248A1 (en) | Reduction of position dependent noise in a digital image | |
CN1645943A (zh) | 生成立体图像的电子照相机和图像生成装置 | |
CN1767598A (zh) | 修正因输出电路特性所产生误差的固态图像拾取设备 | |
CN1867080A (zh) | 图像处理装置和图像拾取装置 | |
CN1961569A (zh) | 摄像装置 | |
US8279308B1 (en) | Optimized log encoding of image data | |
JP5225137B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
CN1175673C (zh) | 彩色摄像装置 | |
CN1729697A (zh) | 彩色图像传感器、滤色阵列和彩色成像装置 | |
CN101049027A (zh) | 图像处理装置、非摄像色信号算出装置以及图像处理方法 | |
CN1591464A (zh) | 补偿图像信息中的噪声的系统和方法 | |
CN1703077A (zh) | 图像捕获设备和包括图像处理程序的计算机程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130612 Termination date: 20210604 |