CN103686104A - 图像处理装置 - Google Patents

图像处理装置 Download PDF

Info

Publication number
CN103686104A
CN103686104A CN201310371646.6A CN201310371646A CN103686104A CN 103686104 A CN103686104 A CN 103686104A CN 201310371646 A CN201310371646 A CN 201310371646A CN 103686104 A CN103686104 A CN 103686104A
Authority
CN
China
Prior art keywords
image
noise remove
signal
noise
lens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310371646.6A
Other languages
English (en)
Inventor
飞鸟诚
宫原宏幸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Industry and Control Solutions Co Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of CN103686104A publication Critical patent/CN103686104A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本发明提供一种图像处理装置,进行摄像透镜的周边部分的光量下降修正的图像处理LSI(117)具有空间方向噪声去除修正部分(109)和时间方向噪声去除修正部分(112)。空间方向噪声去除修正部分(109)针对各图像的附加了光量下降修正增益的图像区域,随着与透镜中心位置之间的距离变长,减弱噪声去除的修正强度,时间方向噪声去除修正部分(112)针对各图像的附加了光量下降修正增益的图像区域,随着与透镜中心位置之间的距离变长,增强噪声去除的修正强度。由此,在进行透镜的周边光量下降修正时,将透镜周边的S/N比的下降和分辨率的下降控制在最小范围内。

Description

图像处理装置
技术领域
本发明涉及一种具有对因透镜特性产生的周边光量下降进行修正的装置的图像处理装置。
背景技术
一般的透镜具有如下的特性:透镜中心的聚光能力与透镜周边的聚光能力之间存在程度差,越靠近透镜周边,聚光能力越低。受该特性的影响,在对亮度实际相等的被拍摄体进行拍摄时,经由摄像装置输出的影像中,有可能会出现信号电平彼此不同的现象。该现象被称为周边光量下降。
近年来,在摄像装置中设置周边光量下降修正装置的情况已经相当普遍。在具有周边光量下降修正装置的摄像装置中,针对经由透镜和摄像传感器输出的影像信号,通常根据周边光量下降的程度来放大影像信号,由此修正周边光量下降。
在上述摄像装置中,针对周边光量下降明显的透镜周边部分,加大进行修正所需的放大率(以下称为光量下降修正增益)。可是,由于在影像信号中通常含有随机噪声,所以随着光量下降修正增益的加大,噪声也会被放大,从而导致影像信号的S/N(Signal/Noise)比下降。因此,一般的周边光量下降修正技术中存在虽然能够对透镜周边部分的周边光量下降进行修正,但容易导致透镜周边部分的S/N比下降的问题。
为了解决这一问题,在专利文献1中公开了一种摄像装置。专利文献1所公开的摄像装置是一种周边光量下降修正装置,其根据光量下降修正增益连续调整噪声降低效果,由此降低噪声。
专利文献1:JP特开2004-48562号公报
可是,在上述现有技术中,能够修正透镜周边部分的周边光量下降,且能够抑制透镜周边部分的S/N比的下降,但存在会导致透镜周边部分的分辨率下降的问题。
在一般的透镜中,透镜中心的分辨能力与透镜周边的分辨能力之间存在程度差,越靠近透镜周边,分辨能力越低。此外,在使用以现有技术中所使用的中值滤波器为代表的空间滤波器(空间方向的噪声去除装置)的噪声去除技术中,虽然能够通过改进算法在一定程度上减轻分辨率下降的弊端,但并不能避免这一弊端。
因此,在上述现有技术中,不仅因透镜特性而存在透镜周边部分的分辨率低于透镜中心部分的分辨率的问题,而且还存在因空间滤波器的噪声降低处理引起的副作用、即分辨率下降,所以在透镜周边部分与透镜中心部分之间容易产生分辨率差。
发明内容
为了解决上述课题,本发明采用了如下的结构。即,图像处理装置在对影像信号进行了周边光量下降修正后,去除空间方向的噪声。对于此时的空间方向噪声去除而言,越靠近透镜的周边部分,将噪声去除的强度设定得越低。通过采用这样的方法,能够减轻透镜周边部分的分辨率的下降。此外,图像处理装置针对去除了空间方向噪声后的影像信号,进一步进行时间方向噪声去除。对于此处的时间方向噪声去除而言,越靠近透镜的周边部分,将噪声去除的强度设定得越强。另外,由于时间方向噪声去除与空间方向噪声去除相比,具有透镜周边部分的影像信号的分辨率下降的程度更小这一特性,所以图像处理装置能够在减轻影像信号在透镜周边部分的S/N比下降的同时,减轻透镜周边部分的分辨率的下降。
(发明效果)
根据本发明,在修正透镜周边部分的周边光量下降时,能够防止透镜周边部分的S/N比下降和分辨率下降。由此,能够获得高质量的图像。
附图说明
图1是具有本实施方式的图像处理装置(图像处理LSI(Large ScaleIntegration,大规模集成))的照相机的系统结构图。
图2是本实施方式的各像素与透镜中心之间的距离d1的说明图。
图3是由透镜周边的聚光能力的下降引起的影像信号电平下降的说明图。
图4是与本实施方式的各像素与透镜中心之间的距离d1相对应的数字增益X的计算方法的说明图。
图5是表示图1的空间方向噪声去除修正部分中的空间方向噪声去除修正步骤的图。
图6是与本实施方式的各像素与透镜中心之间的距离d1相对应的阈值TH1的计算方法的说明图。
图7是表示图1的时间方向噪声去除修正部分中的时间方向噪声去除修正步骤的图。
图8是与本实施方式的各像素与透镜中心之间的距离d1相对应的阈值TH2的计算方法的说明图。
符号说明
101 透镜
102 光圈
103 透镜单元
104 CCD传感器
105 AFE电路
106 距离计算部分
107 周边光量下降修正部分
108 周边光量下降修正强度计算部分
109 空间方向噪声去除修正部分
110 空间方向噪声去除修正强度计算部分
111 图像存储器
112 时间方向噪声去除修正部分
113 时间方向噪声去除修正强度计算部分
114 噪声降低处理部分
115 周边光量下降修正处理部分
116 图像处理部分
117 图像处理LSI(图像处理装置)
118 照相机影像信号输出部分
119 微型计算机
121 透镜用电机
122 光圈电动机
具体实施方式
以下对本发明的实施方式(以下简称为实施方式)进行说明。
图1是具有本实施方式的图像处理装置(图像处理LSI(Large ScaleIntegration,大规模集成))117的照相机的系统结构图。参照图1对系统结构和照相机的拍摄动作以及数据记录时的动作进行说明。
系统具有透镜单元103、CCD(Charge Coupled Device,电荷耦合器件)传感器104、AFE电路(Analog Front End Circuit,模拟前端电路)105、微型计算机(微型计算机、控制部分)119、TG(Timing Generator,定时发生器)120、透镜用电机121、光圈用电机122、图像处理LSI117、照相机影像信号输出部分118等。
透镜单元103具有透镜101和光圈102。透镜单元103具有变焦功能,光圈102对从透镜101获取的外部光的光量进行调整。
CCD传感器104将从透镜单元103照射的光变换为影像信号。
AFE电路105将所输入的影像信号变换为能够在图像处理LSI117中进行处理的信号。例如,AFE电路105对所输入的影像信号进行相关双取样(Correlated Double Sampling,以下简称为CDS)处理、模拟AGC(Automatic Gain Control,自动增益控制)处理、A/D(模拟/数字)变换等处理。并且,AFE电路105将变换后的信号输出到图像处理LSI117中。
微型计算机119控制TG120,使其产生驱动CCD传感器104所需的脉冲。此外,微型计算机119使透镜用电机121和光圈用电机122进行动作,将变焦位置和光圈位置分别控制到任意位置。微型计算机119还对图像处理LSI117进行控制。
TG120在微型计算机119的控制下产生用于驱动CCD传感器104的脉冲。
透镜用电机121对透镜101的变焦位置进行控制。光圈用电机122对光圈102的光圈位置进行控制。照相机影像信号输出部分118将从图像处理LSI117输出的信号输出到监视器等显示装置(未图示),以便在显示装置上显示影像。
图像处理LSI117具有对输入的影像信号进行周边光量下降修正处理和噪声降低处理的周边光量下降修正处理部分115、和对影像信号的图像进行使图像更加清晰的处理的图像处理部分116。
周边光量下降修正处理部分115对从AFE电路105输入的影像信号进行透镜周边光量下降修正处理、以及降低因该周边光量下降修正而被增强的噪声的处理。该周边光量下降修正处理部分115将噪声降低处理后的影像信号输出到图像处理部分116中。
图像处理部分116对从周边光量下降修正处理部分115输入的影像信号进行提高灵敏度UP的处理和提高颜色再现性的处理等使影像信号的图像变得更为清晰的处理,并将其输出到照相机影像信号输出部分118中。
(周边光量下降修正处理部分)
接着,对周边光量下降修正处理部分115进行详细的说明。周边光量下降修正处理部分115具有距离计算部分106、周边光量下降修正部分107、周边光量下降修正强度计算部分108、图像存储器111、噪声降低处理部分114。
(周边光量下降修正处理部分的处理流程)
周边光量下降修正处理部分115首先通过距离计算部分106计算各个像素与透镜中心之间的距离,接着通过周边光量下降修正强度计算部分108,根据该计算出的距离来计算对各个像素的修正强度。并且,周边光量下降修正部分107根据该计算出的修正强度,对各个像素进行周边光量下降修正。然后,在噪声降低处理部分114中,根据由距离计算部分106计算出的像素与透镜中心之间的距离而进行空间方向的噪声去除,并且针对空间方向的噪声去除后的影像信号,参照存储在图像存储器111中的过去的影像信号来进行时间方向的噪声去除修正。并且,噪声降低处理部分114将去除噪声后的影像信号输出到图像处理部分116中。
距离计算部分106将成为透镜101的中心的CCD传感器104的中心作为原点(0,0),计算与CCD传感器104上的任意像素的坐标(x1,y1)之间的距离d1。例如,如图2所示,该距离计算部分106将成为透镜101的中心的CCD传感器104的中心作为原点(0,0),根据下式(1)来计算与CCD传感器104上的任意像素的坐标(x1,y1)之间的距离d1。
d 1 = ( x 1 ) 2 + ( y 2 ) 2 …式(1)
周边光量下降修正部分107针对影像信号电平的下降,附加数字增益作为光量下降修正增益,从而进行修正。所附加的数字增益的值使用在周边光量下降修正强度计算部分108中计算出的值。周边光量下降修正强度计算部分108和周边光量下降修正部分107的功能例如采用专利文献1所公开的技术来实现。
在此,参照图3对因透镜周边的聚光能力的下降引起的影像信号电平下降进行说明。在图3中示出了图1的透镜101、经由透镜101照射图像的CCD传感器104的平面、以及在线a处观察该平面时观察到的影像信号电平的变化。在图3的线a上的影像信号电平中,随着朝向透镜101的周边,透镜101的聚光能力下降。因此,透镜周边的影像信号电平低于透镜101的中心的影像信号电平。因此,周边光量下降修正部分107为了提高透镜周边的影像信号电平,向透镜周边部分附加更大的数字增益。
图1的周边光量下降修正强度计算部分108根据由距离计算部分106计算出的距离d1,计算通过周边光量下降修正部分107附加在影像信号上的数字增益。数字增益的计算方法将在后面说明。
图像储存部分111存储比当前的影像信号早的过去的影像信号。在噪声降低处理部分114的时间方向噪声去除修正部分112进行时间方向噪声的修正时,使用该图像储存部分111上的影像信号。
噪声降低处理部分114对从周边光量下降修正部分107输入的影像信号进行噪声降低处理。噪声降低处理的详细情况将在后面说明。噪声降低处理部分114通过组合空间方向的噪声去除和时间方向的噪声去除,能够在尽可能防止分辨率下降的同时降低噪声。
(周边光量下降修正)
在此,说明周边光量下降修正强度计算部分108中的数字增益的计算。在将CCD传感器104上的任意像素的信号电平设定为e时,周边光量下降修正强度计算部分108根据下式(2),计算附加了数字增益X时的信号电平e’。
e’=e×10(数字增益X/20)(数字增益X[dB],X=A,B,C,…)…式(2)
周边光量下降修正强度计算部分108根据各个像素与透镜中心之间的距离d1,计算附加在各个像素上的数字增益X。图4表示与距离d1相对应的数字增益X的计算方法。在图4中,将透镜中心作为原点(0,0),将与原点之间的距离划分为5个阶段,即从距离较短的一侧起分别划分为距离A、距离B、距离C、距离D、距离E,并且针对以下(1)~(5)的5个阶段,使用这些距离分别计算数字增益X。
(1)如果原点≤距离d1<距离A,则设定为数字增益X=数字增益A。
(2)如果距离A≤距离d1<距离B,则设定为数字增益X=数字增益B。
(3)如果距离B≤距离d1<距离C,则设定为数字增益X=数字增益C。
(4)如果距离C≤距离d1<距离D,则设定为数字增益X=数字增益D。
(5)如果距离D≤距离d1<距离E,则设定为数字增益X=数字增益E。
此外,图1的周边光量下降修正处理部分115将周边光量下降修正强度计算部分108将(1)~(5)计算出的数字增益X附加到影像信号的任意像素的信号电平e上。
如图4所示,将数字增益X的大小设定为数字增益A≤数字增益B≤数字增益C≤数字增益D≤数字增益E,并且随着距离d1变大并朝向透镜周边,加大数字增益X。此外,由于图4的数字增益A位于透镜中心的附近,通常不会发生周边光量下降,所以将数字增益A设定为0。
周边光量下降修正部分107在将数字增益X附加在图4的线a处的影像信号电平时,随着朝向透镜周边,将修正电平从数字增益A增大到数字增益E,由此能够使周边光量的下降变得不太明显。
如上所述,图1的周边光量下降修正部分107对因透镜周边光量下降引起的影像信号在透镜周边处的电平下降进行修正。在此,由于周边光量下降修正部分107附加数字增益X,所以随着朝向透镜周边,噪声分量也会增大。因此,图像处理LSI117的噪声降低处理部分114在考虑了分辨率下降的基础上,对S/N比进行改进。
(噪声降低处理部分)
以下对该噪声降低处理部分114进行详细说明。噪声降低处理部分114具有空间方向噪声去除修正部分109、空间方向噪声去除修正强度计算部分110、时间方向噪声去除修正部分112、时间方向噪声去除修正强度计算部分113等。另外,空间方向噪声去除修正部分109和空间方向噪声去除修正强度计算部分110相当于使用空间滤波器的噪声去除部分,时间方向噪声去除修正部分112和时间方向噪声去除修正强度计算部分113相当于使用时间滤波器的噪声去除部分。
(噪声降低处理部分的处理流程)
噪声降低处理部分114首先在空间方向噪声去除修正强度计算部分110中根据由距离计算部分106计算出的各像素与透镜中心之间的距离,计算各像素在空间方向上的噪声去除修正强度。并且,在空间方向噪声去除修正部分109中,根据计算出的噪声去除修正强度对各像素进行空间噪声去除。之后,将去除空间噪声后的影像信号输出到时间方向噪声去除修正部分112中。时间方向噪声去除修正强度计算部分113根据由距离计算部分106计算出的各像素与透镜中心之间的距离,计算各像素在时间方向上的噪声去除修正强度。并且,在时间方向噪声去除修正部分112中,从图像存储器111读取影像信号中的过去的图像,并参照该过去的图像,对影像信号的当前图像的各像素进行时间方向的噪声去除修正。此外,时间方向噪声去除修正部分112将时间方向噪声去除修正后的影像信号输出到图像处理部分116中。
(空间方向噪声去除修正)
首先,说明空间方向噪声去除修正。空间方向噪声去除修正部分109针对从周边光量下降修正部分107输出的影像信号,进行与距离d1相应的空间噪声去除,由此改善S/N比。以下,对空间方向噪声去除进行详细说明。
图5表示空间方向噪声去除修正部分109中的空间方向噪声去除修正步骤。在图5中,将当前正在处理的任意像素的信号电平设定为e,将以该像素为中心像素时的周边像素的信号电平设定为a、b、c、d、f、g、h、i。
空间方向噪声去除修正部分109通过图5的S501开始处理。首先,针对透镜中心像素(中心像素)的信号电平e,空间方向噪声去除修正部分109相加中心像素与透镜周边像素(周边像素)的信号电平(SUM(a,b,c,d,e,f,g,h,i)),然后进行除法运算(/9)。由此,空间方向噪声去除修正部分109计算出透镜中心的9个像素的信号电平的平均值AVERAGE1(S502)。
在S503中,空间方向噪声去除修正部分109计算中心像素的信号电平e与在S502中计算出的平均值AVERAGE1之间的差分DIFF1。
在S504中,空间方向噪声去除修正部分109判断在S503中计算出的差分DIFF1是否大于阈值TH1,在差分DIFF1大于闽值TH1的情况下(S504中为“是”),将中心像素的信号电平e判断为噪声,在S505中将中心像素的信号电平e置换为在S502中计算出的平均值AVERAGE1,并结束处理(S506)。另一方面,在差分DIFF1小于阈值TH1时(S504中为“否”),空间方向噪声去除修正部分109不进行S505的处理,而是直接结束处理(S506)。空间方向噪声去除修正部分109针对影像信号的图像的各个像素执行上述处理。
由此,空间方向噪声去除修正部分109对影像信号的噪声进行平滑化。此时,在S504中所参照的阈值TH1是空间方向噪声去除修正强度计算部分110使用由距离计算部分106计算出的距离d1而计算出的值。
图6表示计算与距离d1相对应的阈值TH1的方法。与图4一样,将透镜中心作为原点(0,0),将与原点之间的距离划分为5个阶段,即分别划分为距离A、距离B、距离C、距离D、距离E,并且如以下的(1)~(5)所述的那样,设定用于判断是否使用这些距离对各像素进行空间方向噪声修正的阈值TH1。
(1)如果原点≤距离d1<距离A,则设定为阈值TH1=th1_A。
(2)如果距离A≤距离d1<距离B,则设定为阈值TH1=th1_B。
(3)如果距离B≤距离d1<距离C,则设定为阈值TH1=th1_C。
(4)如果距离C≤距离d1<距离D,则设定为阈值TH1=th1_D。
(5)如果距离D≤距离d1<距离E,则设定为阈值TH1=th1_E。
在此,将阈值TH1的大小设定为th1_B≤th1_C≤th1_D≤th1_E≤th1_A,随着距离d1变大且朝向透镜周边,加大阈值TH1的值。也就是说,随着朝向透镜周边,降低空间噪声去除修正的效果。此外,由于原点≤距离d1<距离A位于透镜的中心附近,所以周边光量下降修正处理部分115在周边光量下降修正中不会对其附加数字增益。因此,空间方向噪声去除修正强度计算部分110将th1_A作为最大值。也就是说,空间方向噪声去除修正强度计算部分110认为透镜中心部分实际上不需要进行空间噪声去除修正,所以关闭空间噪声去除修正功能。
在现有技术中,通常的做法是随着朝向透镜周边加强空间噪声去除修正,而在本实施方式的图像处理LSI117中,随着朝向透镜周边,减弱了空间噪声去除修正。由此,能够在透镜周边降低空间噪声去除修正的弊端、即分辨率的下降。
(时间方向噪声去除修正)
接着,对时间方向噪声去除修正进行说明。时间方向噪声去除修正部分112针对从空间方向噪声去除修正部分109输出的影像信号,进行与距离d1相对应的时间方向噪声去除修正,由此改善S/N比。
图7表示时间方向噪声去除修正部分112中的时间方向噪声去除修正的顺序。在图像存储器111(参照图1)中存储比当前的图像(image)1早的过去的图像(imgae)2、图像3、…。在图7中,以图像存储器111存储2张比当前图像1早的过去图像2、图像3的情况为例进行说明,但也可以是存储任意张的图像。
在图7中,将图1的时间方向噪声去除修正部分112当前正在处理的图像1中的任意像素的信号电平设定为1-e,将与过去的2张图像2、图像3中的与图像1相同的任意像素的信号电平分别设定为2-e、3-e。
时间方向噪声去除修正部分112在图7的S701开始处理。首先,时间方向噪声去除修正部分112在S702中,将当前图像1中的任意像素的信号电平1-e和过去图像2、图像3中的任意像素的信号电平2-e、3-e相加(SUM(1-e,2-e,3-e))后,进行除法运算(/3),由此计算出时间轴方向的任意像素的信号电平e的平均值AVERAGE2。
在S703中,时间方向噪声去除修正部分112计算当前图像1的任意像素的信号电平1-e与在S702中计算出的平均值AVERAGE2之间的差分DIFF2。
在S704中,时间方向噪声去除修正部分112判断在S703中计算出的差分DIFF2是否大于阈值TH2,在差分DIFF2大于阈值TH2时(S704中为“是”),将当前图像1中的任意像素的信号电平1-e判断为噪声,在S705中将当前图像1中的任意像素的信号电平1-e置换为在S702中计算出的平均值AVERAGE2,由此对噪声进行平滑化,结束处理(S706)。另一方面,当差分DIFF2在阈值TH2以下时(S704中为“否”),时间方向噪声去除修E部分112不进行S705的处理,而是直接结束处理(S706)。时间方向噪声去除修正部分112针对影像信号的图像的各个像素执行上述处理。
由此,时间方向噪声去除修正部分112对影像信号的噪声进行平滑化。此时,在S704中所参照的阈值TH2是使用在距离计算部分106中计算出的距离d1由时间方向噪声去除修正强度计算部分113计算出的。
图8表示计算与距离d1相对应的阈值TH2的方法。与图4一样,将透镜中心作为原点(0,0),将与原点之间的距离划分为5个阶段,即分别划分为距离A、距离B、距离C、距离D、距离E。并且,如以下的(1)~(5)所述的那样,设定用于判断是否使用这些距离对各像素进行时间方向噪声去除修正的阈值TH2。
(1)如果原点≤距离d1<距离A,则设定为阈值TH2=th2_A。
(2)如果距离A≤距离d1<距离B,则设定为阈值TH2=th2_B。
(3)如果距离B≤距离d1<距离C,则设定为阈值TH2=th2_C。
(4)如果距离C≤距离d1<距离D,则设定为阈值TH2=th2_D。
(5)如果距离D≤距离d1<距离E,则设定为阈值TH2=th2_E。
在此,将阈值TH2的大小设定为th2_E≤th2_D≤th2_C≤th2_B≤th2_A,随着距离d1变大且朝向透镜周边,减小阈值TH2的值。也就是说,随着朝向透镜周边,提高时间方向噪声去除修正的效果。此外,与上述空间方向噪声去除修正时一样,由于原点≤距离d1<距离A位于透镜的中心附近,周边光量下降修正处理部分115在周边光量下降修正中不对其附加数字增益。因此,时间方向噪声去除修正强度计算部分113将th2_A作为最大值。也就是说,时间方向噪声去除修正强度计算部分113判断为透镜中心部分实际上不需要进行时间方向噪声去除修正,所以关闭时间方向噪声去除修正功能。
时间方向噪声去除修正与空间方向噪声去除修正相比,能够在不降低分辨率的情况下改善S/N比,所以适用于改善透镜周边附近的S/N比。此外,本实施方式的时间方向噪声去除修正部分112设置成:随着朝向透镜周边,提高时间方向噪声去除修正的效果,而随着朝向透镜中心部分,减弱时间方向噪声去除修正的效果。并且,时间方向噪声去除修正部分112在透镜的中心部分(例如图8的距离A的区域)实际上不进行时间方向噪声去除修正。由此,还能够将进行了时间方向噪声去除修正时可能在画面上残留的残像限定在透镜的周边附近。此外,从人的视觉特性来说,与画面中心的残像相比,画面周边的残像不易引起人的注意,因此,根据本实施方式的时间方向噪声去除修正部分112,能够进一步减轻画面上的残像。
如上所述,本实施方式的系统能够在最大限度上抑制修正周边光量下降后执行了噪声降低处理时成为问题的透镜周边部分的分辨率下将,同时能够降低噪声。
此外,在上述实施方式中,距离计算部分106在式(1)中使用了距离d1,但由于只要知道各像素的距离的相对值即可,所以也可以使用d12
此外,周边光量下降修正部分107附加的修正增益只要是能够附加在影像信号上的增益即可,也可以是数字增益以外的增益。
并且,在上述实施方式中,与透镜中心之间的距离的划分方法是将距离划分成了距离A~距离E这5个阶段,但也可以划分成任意个阶段,并且也可以与此相应地对由周边光量下降修正部分107附加的数字增益X进行更精细的设定。此时,在空间噪声去除修正中使用的阈值TH1以及在时间噪声去除修正中使用的阈值TH2也可以根据距离的范围进行精细的设定。
另外,在图1中,作为摄像元件使用了CCD传感器104,但例如也可以使用CMOS(Complementary Metal Oxide Semiconductor,互补金属氧化物半导体)等CCD传感器以外的摄像元件。
本实施方式所涉及图像处理LSI117的功能可以由进行上述处理的硬件来实现,也可以通过由CPU(Central Processing Unit,中央处理装置)执行的程序处理来实现。

Claims (2)

1.一种图像处理装置,其特征在于,具有:
周边光量下降修正部分,其接收影像信号的输入,并根据摄像透镜的周边光量下降特性,向构成所述输入的影像信号的各个图像附加所述摄像透镜的周边部分的光量下降修正增益;
使用空间滤波器的噪声去除部分,其针对构成所述影像信号的各个图像,根据与所述摄像透镜的透镜中心位置之间的距离,改变所述图像的噪声的修正强度;
图像存储器,其存储构成所述影像信号的各个图像;以及
使用时间滤波器的噪声去除部分,其根据与所述透镜中心位置之间的距离,针对构成所述输入的影像信号的当前图像,参照存储在所述图像存储器中的、比所述当前图像早的过去的图像,改变所述当前图像的噪声的修正强度,
所述使用空间滤波器的噪声去除部分针对所述各个图像中的附加了所述光量下降修正增益的图像区域,随着与所述透镜中心位置之间的距离变长,降低使用所述空间滤波器进行的噪声去除的修正强度,
所述使用时间滤波器的噪声去除部分针对所述各个图像中的附加了所述光量下降修正增益的图像区域,随着与所述透镜中心位置之间的距离变长,加强使用所述时间滤波器进行的噪声去除的修正强度。
2.如权利要求1所述的图像处理装置,其特征在于,
所述使用空间滤波器的噪声去除部分不对所述各个图像中的没有附加所述光量下降修正增益的图像区域进行使用所述空间滤波器的噪声去除的修正,
所述使用时间滤波器的噪声去除部分不对所述各个图像中的没有附加所述光量下降修正增益的图像区域进行使用所述时间滤波器的噪声去除的修正。
CN201310371646.6A 2012-09-26 2013-08-23 图像处理装置 Pending CN103686104A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-211926 2012-09-26
JP2012211926A JP5681155B2 (ja) 2012-09-26 2012-09-26 画像処理装置

Publications (1)

Publication Number Publication Date
CN103686104A true CN103686104A (zh) 2014-03-26

Family

ID=50322219

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310371646.6A Pending CN103686104A (zh) 2012-09-26 2013-08-23 图像处理装置

Country Status (3)

Country Link
US (1) US8982250B2 (zh)
JP (1) JP5681155B2 (zh)
CN (1) CN103686104A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108154534A (zh) * 2017-12-26 2018-06-12 努比亚技术有限公司 一种图片清晰度校准方法、终端和计算机可读存储介质

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105323454B (zh) * 2014-07-30 2019-04-05 光宝电子(广州)有限公司 多相机图像撷取系统与图像重组补偿方法
EP3503530A4 (en) * 2016-08-16 2019-08-21 Sony Semiconductor Solutions Corporation IMAGE PROCESSING DEVICE, IMAGE PROCESSING METHOD, AND IMAGE CAPTURE DEVICE
US11187909B2 (en) 2017-01-31 2021-11-30 Microsoft Technology Licensing, Llc Text rendering by microshifting the display in a head mounted display
US10354140B2 (en) 2017-01-31 2019-07-16 Microsoft Technology Licensing, Llc Video noise reduction for video augmented reality system
US10298840B2 (en) 2017-01-31 2019-05-21 Microsoft Technology Licensing, Llc Foveated camera for video augmented reality and head mounted display
US10504397B2 (en) 2017-01-31 2019-12-10 Microsoft Technology Licensing, Llc Curved narrowband illuminant display for head mounted display
KR20220152019A (ko) * 2021-05-07 2022-11-15 에스케이하이닉스 주식회사 이미지 센싱 장치 및 그 동작 방법
CN117115003A (zh) * 2023-02-15 2023-11-24 荣耀终端有限公司 去除噪声的方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101193204A (zh) * 2006-11-30 2008-06-04 日立麦克赛尔株式会社 摄像模块及摄像装置
CN101257637A (zh) * 2007-02-28 2008-09-03 株式会社日立制作所 显示装置及投影型照明装置
US20090153983A1 (en) * 2007-12-12 2009-06-18 Hitachi Maxell, Ltd. Imaging lens unit and camera module
CN101616286A (zh) * 2008-06-27 2009-12-30 株式会社日立制作所 光学单元及投射型影像显示装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0615375U (ja) * 1992-07-27 1994-02-25 クラリオン株式会社 画像シェーディング補正処理装置
JP3539394B2 (ja) * 2001-03-26 2004-07-07 ミノルタ株式会社 画像処理装置、プログラムおよび記録媒体
JP2002368997A (ja) * 2001-06-12 2002-12-20 Canon Inc 画像読取装置、画像読取方法およびプログラム
JP4235408B2 (ja) 2002-07-15 2009-03-11 富士フイルム株式会社 ノイズ低減回路及び撮像装置
JP2005269373A (ja) * 2004-03-19 2005-09-29 Fuji Photo Film Co Ltd 映像信号処理システムおよび電子映像機器
US7834925B2 (en) * 2006-06-05 2010-11-16 Core Logic Inc. Lens shading correction device and method in image sensor
KR100696162B1 (ko) * 2006-08-11 2007-03-20 엠텍비젼 주식회사 이미지의 노이즈 감소 장치 및 노이즈 감소 방법, 이를수행하는 프로그램이 기록된 기록 매체
US8274583B2 (en) * 2009-06-05 2012-09-25 Apple Inc. Radially-based chroma noise reduction for cameras
JP5592776B2 (ja) * 2010-12-21 2014-09-17 オリンパスイメージング株式会社 画像処理装置、画像処理方法、および、画像処理プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101193204A (zh) * 2006-11-30 2008-06-04 日立麦克赛尔株式会社 摄像模块及摄像装置
CN101257637A (zh) * 2007-02-28 2008-09-03 株式会社日立制作所 显示装置及投影型照明装置
US20090153983A1 (en) * 2007-12-12 2009-06-18 Hitachi Maxell, Ltd. Imaging lens unit and camera module
CN101616286A (zh) * 2008-06-27 2009-12-30 株式会社日立制作所 光学单元及投射型影像显示装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108154534A (zh) * 2017-12-26 2018-06-12 努比亚技术有限公司 一种图片清晰度校准方法、终端和计算机可读存储介质
CN108154534B (zh) * 2017-12-26 2020-09-01 努比亚技术有限公司 一种图片清晰度校准方法、终端和计算机可读存储介质

Also Published As

Publication number Publication date
US20140085505A1 (en) 2014-03-27
JP2014068172A (ja) 2014-04-17
JP5681155B2 (ja) 2015-03-04
US8982250B2 (en) 2015-03-17

Similar Documents

Publication Publication Date Title
CN103686104A (zh) 图像处理装置
US9838717B2 (en) Method and system for filtering image noise out
WO2015135395A1 (en) Image acquisition method and image acquisition apparatus
JP4540705B2 (ja) 画像処理方法、画像処理システム、撮像装置、画像処理装置及びコンピュータプログラム
CN103139492B (zh) 摄像装置、摄像方法以及监视系统
US8368804B2 (en) Imaging control apparatus, imaging control method, and computer-readable storage medium
US9832382B2 (en) Imaging apparatus and imaging method for outputting image based on motion
CN107194886B (zh) 一种用于相机传感器的灰尘检测方法及装置
JP4245045B2 (ja) 撮像装置、撮像信号処理方法及びプログラム
CN109451214A (zh) 一种高速运动目标成像设备及方法
JP3933501B2 (ja) ノイズ低減装置
JP4397414B2 (ja) 画像処理方法、画像処理システム、画像処理装置及びコンピュータプログラム
JP4719584B2 (ja) 動き検出プログラム、動き検出方法、動き検出装置、
JP6221333B2 (ja) 画像処理装置、画像処理回路及び画像処理方法
US11910115B2 (en) Imaging element, imaging apparatus, operation method of imaging element, and program
JP2007150441A (ja) ノイズリダクション装置及びノイズリダクション方法
JP5557635B2 (ja) 輪郭強調装置
JP2009088884A (ja) 撮像データにおける動きベクトル検出方法と装置
JP2018180964A (ja) 画像処理装置及び画像処理方法
JP2006191454A (ja) ノイズ検出回路及び同回路を有する信号処理装置及び同装置を備えた撮像装置及びノイズ除去方法
US9007491B2 (en) Image processing apparatus and control method thereof
JP2011250249A (ja) 映像信号処理装置および映像信号処理方法
CN106210529B (zh) 移动终端的拍摄方法以及装置
JP2019149787A (ja) 撮像装置、画像処理装置、および画像処理プログラム
JP5350497B2 (ja) 動き検出装置、制御プログラム、および集積回路

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: HITACHI INDUSTRIAL CONTROL SOLUTIONS LTD.

Free format text: FORMER OWNER: HITACHI,LTD.

Effective date: 20141114

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141114

Address after: Hitachi County of Ibaraki City, Japan

Applicant after: HITACHI INDUSTRY AND CONTROL SOLUTIONS, LTD.

Address before: Tokyo, Japan, Japan

Applicant before: Hitachi Ltd.

AD01 Patent right deemed abandoned

Effective date of abandoning: 20160803

C20 Patent right or utility model deemed to be abandoned or is abandoned