JP2014050070A

JP2014050070A - 画像信号処理装置及び方法

Info

Publication number: JP2014050070A
Application number: JP2012193980A
Authority: JP
Inventors: Tadao Shinya; 忠雄新屋
Original assignee: JVCKenwood Corp
Current assignee: JVCKenwood Corp
Priority date: 2012-09-04
Filing date: 2012-09-04
Publication date: 2014-03-17
Anticipated expiration: 2032-09-04
Also published as: JP5991090B2

Abstract

【課題】画像の時間的な位置をずらすことなく、輝度むらを有する画像を補正することができる画像信号処理装置を提供する。
【解決手段】合算部１１は、画像信号のそれぞれのラインにおける画素の合算値を算出する。記憶部１２は、合算値を垂直有効画像期間のライン数分記憶する。判定部１５は、注目フレームの注目ラインにおける合算値と、記憶部１２より読み出された過去のフレームの同じ注目ラインにおける合算値とを比較して、輝度の変化の程度を判定する。補正係数生成部１５２は、輝度の変化の程度が所定の閾値を越えれば、画像信号を補正する補正係数を生成する。書き込み制御部１５１は、輝度の変化の程度が閾値以下のときのみ、合算値を記憶部１２に記憶させるよう制御する。乗算部１６は、記憶部１３によって遅延された画像信号に補正係数を乗算して出力する。
【選択図】図１

Description

本発明は、動画像の撮影時に他の撮像装置によるフラッシュの発光等によって画像の輝度が不連続となり発生する輝度むらを低減することができる画像信号処理装置及び方法に関する。

近年、ビデオカメラ等の撮像装置においては、イメージセンサとしてCMOS（Complementary Metal Oxide Semiconductor）センサが数多く採用されている。CMOSセンサにおける撮像信号の読み出しは、全画素で同一タイミングでなく、ライン単位で順次、リセット、露光、読み出しを行うことにより、読み出しタイミングがライン方向に順次ずれていくローリングシャッタ方式にて行われる。

このため、多数のビデオカメラやスチルカメラが、同一の被写体を同時に撮影する場合において、他者のフラッシュによる発光期間が短く強い光が一部のラインのみの露光期間中にCMOSセンサに入射することがある。この場合、撮像する画面の一部で露光量が異なり、画面内に白帯状の明るい領域が発生して輝度むらとなってしまう。

このように画像が輝度むらを有する場合、例えば特許文献１に記載されているように、輝度むら（高輝度領域）が含まれている画面を過去の正常な画面に置換することによって画像を補正することが行われている。

特開２０１０−１３５９２１号公報

例えばスポーツにおけるゴールへの到着シーンにおいては、多数のフラッシュが発光する場合がある。到着順位を判定する際に、フラッシュの発光による輝度むらを特許文献１に記載されているような方法によって補正したとすると、被写体の動きが速い場合には、画像の時間的な位置がずれてしまい正確な判定ができない。そこで、画像の時間的な位置をずらすことなく、輝度むらを有する画像を補正することができる画像信号処理装置及び方法が求められている。

本発明はこのような要望に対応するため、画像の時間的な位置をずらすことなく、輝度むらを有する画像を補正することができる画像信号処理装置及び方法を提供することを目的とする。

本発明は、上述した従来の技術の課題を解決するため、画像信号のそれぞれのラインにおける画素の合算値またはこの合算値を所定の値で除算した値を、輝度の変化を判定するためのライン輝度値として算出する算出部（１１）と、前記算出部によって算出されたライン輝度値を垂直有効画像期間のライン数分記憶する第１の記憶部（１２）と、前記算出部によって算出された注目フレームの注目ラインにおけるライン輝度値と、前記第１の記憶部より読み出された前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値とを比較して、輝度の変化の程度を判定する判定部（１５）と、前記判定部によって判定された輝度の変化の程度が所定の閾値を越えた場合、前記輝度の変化の程度に応じて前記注目フレームの前記注目ラインの画像信号を補正するための補正係数を生成する補正係数生成部（１５２）と、前記判定部によって判定された輝度の変化の程度が所定の閾値以下のときのみ、前記算出部によって算出されたライン輝度値を前記第１の記憶部に記憶させるよう制御する書き込み制御部（１５１）と、前記補正係数部が前記補正係数を生成するタイミングに合わせるように、前記注目フレームの前記注目ラインの画像信号を遅延させる第２の記憶部（１３）と、前記第２の記憶部によって遅延された前記注目フレームの前記注目ラインの画像信号に前記補正係数を乗算して出力する乗算部（１６）とを備えることを特徴とする画像信号処理装置を提供する。

上記の画像信号処理装置において、前記判定部は、前記注目フレームの前記注目ラインにおけるライン輝度値を前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値で除算した除算値を輝度の変化の程度を示す値とし、前記補正係数生成部は、前記除算値を直線近似した特性に基づいて、前記除算値を前記補正係数に変換することが好ましい。

上記の画像信号処理装置において、前記補正係数生成部は、前記除算値が前記所定の閾値を越えている領域を複数の領域に分け、それぞれの領域において前記除算値を前記補正係数に変換する直線の特性を設定することが好ましい。

また、本発明は、上述した従来の技術の課題を解決するため、画像信号のそれぞれのラインにおける画素の合算値またはこの合算値を所定の値で除算した値を、輝度の変化を判定するためのライン輝度値として算出し、算出されたライン輝度値を垂直有効画像期間のライン数分だけ第１の記憶部（１２）に記憶させ、算出された注目フレームの注目ラインにおけるライン輝度値と、前記第１の記憶部より読み出された前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値とを比較して、輝度の変化の程度を判定し、判定された輝度の変化の程度が所定の閾値を越えた場合、前記輝度の変化の程度に応じて前記注目フレームの前記注目ラインの画像信号を補正するための補正係数を生成し、判定された輝度の変化の程度が所定の閾値以下のときのみ、算出されたライン輝度値を前記第１の記憶部に記憶させるよう制御し、前記補正係数を生成するタイミングに合わせるように、前記注目フレームの前記注目ラインの画像信号を第２の記憶部（１３）に記憶させて読み出すことによって遅延させ、前記第２の記憶部によって遅延された前記注目フレームの前記注目ラインの画像信号に前記補正係数を乗算して出力することを特徴とする画像信号処理方法を提供する。

本発明の画像信号処理装置及び方法によれば、画像の時間的な位置をずらすことなく、輝度むらを有する画像を補正することができる。

第１実施形態の画像信号処理装置を示すブロック図である。 CMOSセンサの動作とフラッシュが発光した場合の現象について説明するための図である。フラッシュの発光によって輝度むらが発生しているフレームの例を示す図である。第１実施形態の画像信号処理装置の動作を説明するためのタイミング図である。図１中の判定部１５で生成する補正係数Kの特性図である。

以下、各実施形態の画像信号処理装置及び方法について、添付図面を参照して説明する。

＜第１実施形態＞
図１に示す第１実施形態の画像信号処理装置を説明する前に、図２，図３を用いて、ローリングシャッタ方式のCMOSセンサの動作と、フラッシュが発光した場合の現象について説明する。図２に示すように、１フレーム期間を1125ライン（1125H）、垂直有効画像期間を1080ライン（1080H）、垂直ブランキング期間を45ライン（45H）とする。CMOSセンサの露光時間を500H期間とする。図１では、図示の都合上、露光時間の500H期間を実際よりも短い状態で示している。

垂直有効画像期間の第１ラインにおいては、１ラインの信号を読み出すタイミングから500H期間前の破線で示す位置でフォトダイオード（図示せず）をリセットする。そして、500H期間露光（電荷蓄積）して実線で示す第１ラインの信号の読み出しタイミングでフォトダイオードに蓄積された電荷を読み出す。第２ラインにおいては、第１ラインより１ライン遅れてフォトダイオードをリセットし、１ライン遅れて第２ラインの電荷を読み出す。

以下同様にして、第ｍラインにおいては、第１ラインより（ｍ−１）ライン遅れてフォトダイオードをリセットし、（ｍ−１）ライン遅れて第ｍラインの電荷を読み出す。

ｎフレームの第（ｍ）ラインから第（ｍ＋２）ラインの間に、フラッシュが発光したとする。ｎフレームの第ｍラインにイメージセンサから出力される信号の露光期間は第（ｍ-５００）ラインから第（ｍ-１）ラインまでの５００Ｈ期間であり通常の環境光で露光されるため、（ｎ−１）フレームの第ｍラインの信号とｎフレームの第ｍラインの信号とで輝度に大差はない。第（ｍ＋１）ラインにおいてイメージセンサから出力される信号は、露光期間が第（ｍ-４９９）ラインから第ｍラインまでとなるため1H期間だけフラッシュの影響を受け、（ｎ−１）フレームの第（ｍ＋１）ラインの画像信号より第ｎフレームの第（ｍ＋１）ラインの画像信号の輝度が高くなる。

第（ｍ＋２）ラインでは2H期間だけフラッシュの影響を受けるため輝度がより高くなり、第（ｍ＋３）ラインでは3H期間だけフラッシュの影響を受けるためさらに輝度が高くなる。

以降、第（ｍ＋500）ラインまでは3H期間だけフラッシュの影響を受け、第（ｍ＋501）ラインでは2H期間だけフラッシュの影響を受け、第（ｍ＋502）ラインでは1H期間だけフラッシュの影響を受ける。それぞれ（ｎ−１）フレームの画像信号より輝度が高い。第（ｍ＋503）ライン以降では、フラッシュの影響を受けず通常の環境光で露光されるため、（ｎ−１）フレームの画像信号と輝度に大差はない。

従って、図３に示すように、（ｎ−１）フレームでは通常の画像であり、ｎフレームでは第（ｍ＋１）ラインから第（ｍ＋502）ラインまでハッチングを付しているように、通常より輝度の高い輝度むらを有する画像となる。（ｎ＋１）フレームでは、再び通常の画像となる。

以上のような輝度むらを有する画像信号を補正する第１実施形態の画像信号処理装置の構成及び動作について説明する。図１において、画像信号におけるｎフレームのｍラインを添え字(n,m)で表す。ｎフレームのｍラインをフラッシュの影響を受けているか否かを判定して、フラッシュの影響を受けて輝度むらとなっていれば輝度むらを補正する対象の注目フレームの注目ラインであるとする。

CMOSセンサより出力されてデジタル信号に変換された画像信号Sinの画素データは、合算部１１及び記憶部１３に入力される。合算部１１は、画像信号Sinの画素データを１ライン分合算して、合算値SUMを出力する。合算部１１に入力される画像信号Sinが画像信号Sin(n,m+1)であれば、合算部１１より出力される合算値SUMは合算値SUM(n,m)となる。合算部１１による合算結果である合算値SUMは、１ライン周期で更新される。

合算部１１より出力された合算値SUMは、記憶部１２と、スイッチ１４の端子Ｔａと、判定部１５に入力される。判定部１５は、書き込み制御部１５１と、補正係数生成部１５２とを有する。記憶部１２は、各ラインの合算値SUMを垂直有効画像期間の垂直ライン数分である1080個記憶する。記憶部１２は、それぞれのラインにおいて後述する書き込み許可パルスWENBが入力されたときのみラインの合算値SUMを更新する。

判定部１５には、記憶部１２より読み出された注目フレームより１フレーム前のｍラインの合算値SUM(n-1,m)と、合算部１１より出力された合算値SUM(n,m)とが入力される。記憶部１２より読み出された合算値SUM(n-1,m)を判定部１５に入力する場合には、スイッチ１４は端子Ｔｂに接続される。判定部１５は、１フレーム前後の同じラインの合算値である合算値SUM(n-1,m)と合算値SUM(n,m)とを比較して、注目フレームの注目ラインがフラッシュの影響を受けているか否かを判定する。

スイッチ１４は、最初のフレームである１フレーム目のときだけ端子Ｔａに接続される。１フレーム目では、記憶部１２より１フレーム前の合算値SUMは出力されない。そこで、スイッチ１４は１フレーム目のときには端子Ｔａに接続して、合算部１１で得られた合算値SUMを判定部１５に入力するようにしている。１フレーム目では、判定部１５は同じ値の合算値SUMを比較することになるので、判定部１５は必ずフラッシュの影響を受けていないと判定する。

判定部１５内の補正係数生成部１５２は、注目フレームの注目ラインがフラッシュの影響を受けているか否かの判定結果に基づいて、画像信号Sinを補正するための補正係数K(n,m)を生成し、乗算部１６に供給する。

記憶部１３は、１ラインの水平有効画素数分、例えば1920画素分の画素データを記憶し、１ライン遅延して出力する。合算部１１に入力される画像信号Sinが画像信号Sin(n,m+1)であるので、記憶部１３より出力される画像信号Sinは画像信号Sin(n,m)となる。

合算部１１において１ライン分の合算値SUMが得られるのは、１ライン分の画素データを全て入力した後である。合算部１１より出力された合算値SUMを用いて判定部１５が補正係数K(n,m)を算出し、乗算部１６が画像信号Sinを補正するのは、それぞれのラインの画素データが入力され始めた時点から１ライン後となる。そこで、記憶部１３によって画像信号Sinを１ライン遅延させる。

即ち、記憶部１３は、注目フレームの注目ラインの画像信号を補正する補正係数K(n,m)を生成するタイミングに合わせるように、注目フレームの注目ラインの画像信号Sin(n,m)を遅延させる。

乗算部１６は、記憶部１３より出力された画像信号Sin(n,m)に補正係数K(n,m)を乗算して、補正画像信号Sout(n,m)を出力する。

図４，図５を用いて、第１実施形態の画像信号処理装置の具体的な動作について説明する。図４の（ａ），（ｂ）に示すように、１ライン期間は2200画素（2200クロック（ck））、水平有効画素（有効ライン期間）は1920画素（1920ck）、水平ブランキング期間は280画素（280ck）であるとする。

図４において、（ｃ）は合算部１１に入力される画像信号Sin、（ｄ）は合算部１１より出力される合算値SUM、（ｅ）は判定部１５によって生成される乗算係数K、（ｆ）は判定部１５より出力される書き込み許可パルスWENBを示している。また、図４において、（ｇ）は記憶部１３より出力される画像信号Sin、（ｈ）は乗算部１６より出力される補正画像信号Soutを示している。

図２で説明したように、ｎフレームの第（ｍ＋１）ラインから第（ｍ＋３）ラインの期間にフラッシュが発光したとする。図４では、ｎフレームを示す添え字nを省略している。

判定部１５は、次の式（１）に基づいて、注目フレームより１フレーム前（（ｎ−１）フレーム）のｍラインの合算値SUM(n-1,m)と、注目フレームの合算値SUM(n,m)との比較結果R(n,m)を算出する。比較結果Rは、輝度の変化の程度を示す値である。
R(n,m)=SUM(n,m)/SUM(n-1,m) …（１）

判定部１５内の補正係数生成部１５２には、図５に示すような、比較結果Rを補正係数Kに変換する変換特性が設定されている。補正係数生成部１５２は、図５に示す変換特性を示すテーブルを有していてもよいし、図５に示す変換特性を示す計算式を有していてもよい。第ｍラインでは、フラッシュによる影響を受けていないため、R(n,m)はほぼ1.0となる。補正係数生成部１５２は、比較結果R(n,m)がR(n,m)≦1.0及び1.0＜R(n,m)≦TH1では、補正係数K(n,m)を1.0として乗算部１６に出力する。

図５におけるTH1は、フラッシュによる影響を受けていない状態とフラッシュによる影響を受けている状態とを区別する閾値である。比較結果Rが閾値TH1以下であればフラッシュによる影響を受けていないと判定され、注目フレームの注目ラインの画像信号Sin(n,m)を補正する必要はない。比較結果Rが閾値TH1を越えれば、フラッシュによる影響を受けていると判定され、注目フレームの注目ラインの画像信号Sin(n,m)を補正する。

図５に示す例では、閾値TH1を1.25としている。フラッシュによる影響を受けていない場合にはR(n,m)はほぼ1.0としたが、被写体の動きやノイズによって合算値SUMは若干変動する。そこで、不必要に画像信号Sinを補正しないように、1.0より若干大きな値まで補正係数K(n,m)を1.0としている。

判定部１５内の書き込み制御部１５１は、図４の（ｆ）に示すように、記憶部１２に対して、ｍラインの合算値を（ｎ−１）フレームの値SUM(n-1,m)から、ｎフレームの値SUM(n,m)へと書き換えるために書き込み許可パルスWENBを出力する。

次に、第（ｍ＋１）ラインでは、第（ｍ＋１）ラインの画像信号Sin(n,m+1)の画素データが記憶部１３に順次書き込まれると同時に、記憶部１３より第ｍラインの画像信号Sin(n,m)が読み出されて乗算部１６へと出力される。乗算部１６は、補正係数K(n,m)を画像信号Sin(n,m)に乗算して補正画像信号Sout(n,m)として出力する。第ｍラインではK(n,m)＝１.0であるため、乗算部１６は、入力された画像信号Sin(n,m)をそのまま補正画像信号Sout(n,m)として出力する。

この処理と並行して、合算部１１は第（ｍ＋１）ラインの画像信号Sinを１ライン（1920画素）分合算して合算値SUM(n,m+1)を生成し、判定部１５に出力する。判定部１５は式（１）と同様にして、１フレーム前の第（ｍ＋１）ラインの合算値SUM(n-1,m+1)と注目フレームの第（ｍ＋１）ラインの合算値SUM(n,m+1)との比較結果R(n,m+1)を得る。第（ｍ＋１）ラインでは、露光期間内にフラッシュの発光期間が含まれるためR(n,m+1)>1.0となる。

補正係数生成部１５２は、図５に示す特性に基づいて、比較結果R(n,m+1)の大きさに応じた補正係数K(n,m+1)を決定する。比較結果R(n,m+1)＝2.0であったとすると、図５よりK(n,m+1)＝0.5が乗算部１６に出力される。ｎフレームの第（ｍ＋１）ラインはフラッシュの影響を受けているため、第（ｍ＋１）ラインの合算値SUMを次のフレームの判定に使用することはできない。そこで、書き込み制御部１５１は、図４の（ｆ）に示すように、記憶部１２に対して書き込み許可パルスWENBを出力しない。

次に、第（ｍ＋２）ラインでは、第（ｍ＋２）ラインの画像信号Sin(n,m+2)の画素データが記憶部１３に順次書き込まれると同時に、第（ｍ＋１）ラインの画像信号Sin(n,m+1)が読み出されて乗算部１６へと出力される。乗算部１６は、補正係数K(n,m+1)を画像信号Sin(n,m+1)に乗算して、補正画像信号Sout(n,m+1)を出力する。第（ｍ＋１）ラインではK(n,m+1)＝0.5であるため、乗算部１６は、画像信号Sin(n,m+1)の輝度値を１／２にして、フラッシュによって輝度値がほぼ２倍に増加した画像信号Sin(n,m+1)を補正して出力する。

ここで、比較結果R＝2.0のとき、ｎフレームの画像信号Sinの輝度値は（ｎ−１）フレームの画像信号Sinの輝度値の２倍になっているため、補正係数K=0.5としてｎフレームの画像信号Sinに乗算すれば輝度値が適正に補正される。即ち、K=1/Rとすれば輝度値は適正に補正されることになる。しかしながら、このような逆数の算出はハードウェアの規模が大きくなったり、演算処理時間が長くなったりする。そこで、図５においては、直線近似によって比較結果Rを補正係数Kに変換する特性としている。

図５に示す特性においては、領域Ａr1〜Ａr4に対して次のように補正係数Kを設定している。
領域Ａr1：R＜1.25 K＝1.0 補正不要
領域Ａr2：1.25≦R＜2.0 1.0≧K＞0.5 補正不足
領域Ａr3：2.0≦R＜4.0 0.5≧K＞0.25 ほぼ適正補正
領域Ａr4：4.0≦R K＝0.25 補正不足

実使用条件で輝度むらが発生しやすいのは領域Ａr3であり、領域Ａr3ではほぼ適正に輝度むらが補正される。直線近似としたことにより、領域Ａr2，Ａr4では補正不足となっているが、実用上の問題はない。

第（ｍ＋３）ライン〜第（ｍ＋502）ラインでは、露光期間内にフラッシュの発光期間が含まれるため比較結果RはR>>1.0となり、補正係数KはK<1.0となる。従って、画像信号Sinは補正されて出力される。第（ｍ＋503）ライン以降では、比較結果RがR<1.25となるため画像信号Sinはそのまま出力される。

以上によって、図３に示すフラッシュの発光によって輝度むらを有するｎフレームの画像信号Sinは、図１の画像信号処理装置より、輝度むらが補正された補正画像信号Soutとして出力される。よって、画像の品位が向上する。

本実施形態の画像信号処理装置及び方法においては、フラッシュの発光によって輝度むらを有するｎフレームの画像信号Sinを、ｎフレームに対する過去のフレームや未来のフレームの画面によって補正しておらず、輝度むらが発生している部分の輝度値を補正している。従って、本実施形態の画像信号処理装置及び方法によれば、画像の時間的な位置がずれることなく、輝度むらを有する画像を補正することができる。

ところで、本実施形態においては、合算部１１で１ライン分の画素の合算値SUMを求めて、判定部１５において注目フレームと注目フレームの１フレーム前のフレームにおける同じラインの合算値SUMを比較してフラッシュの影響を受けているか否かを判定しているが、合算値SUMを画素数で除算した平均値、または、合算値SUMを所定の定数、例えば２のべき乗で除算した値で比較してもよい。注目フレームと注目フレームの１フレーム前のフレームとの照明光条件の違いを検出できる値を用いればよい。

即ち、画像信号Sinのそれぞれのラインにおける画素の合算値またはこの合算値を所定の値で除算した値を、輝度の変化を判定するためのライン輝度値として算出する算出部を設ければよい。合算部１１は、算出部の一例である。

＜第２実施形態＞
図１における記憶部１２を複数フレーム（Ｐフレーム）で構成し、判定部１５において、Ｐフレームの同一のラインにおける合算値SUMの平均値、または、Ｐフレーム内の合算値SUMの最大値と最小値を除く残りのフレームの平均値を算出する。これらの平均値を複数フレームの平均合算値SUMaveとする。判定部１５は、注目フレームの合算値SUM(n,m)と平均合算値SUMaveとを比較して、フラッシュの影響を受けているか否かを判定する。

図５におけるTH1の値を1.5程度とすることにより、ノイズに対して過剰な補正が加わらないようにすることができる。

＜第３実施形態＞
図１における記憶部１３の容量を複数ライン（Ｑライン）分とし、記憶部１３によって画像信号SinをＱライン遅延させて出力させる。判定部１５で生成される補正係数KをＱ段のシフトレジスタでＱライン分記憶し、Ｑ個の補正係数Kにローパスフィルタをかける。このようにすると、ライン単位でのノイズに対しても過剰な補正が加わらないようにすることができる。

＜第４実施形態＞
第２実施形態の構成と第３実施形態の構成とを組み合わせることが可能である。

本発明は以上説明した各実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。図１では画像信号処理装置をハードウェアにて構成した例を示しているが、ソフトウェア（コンピュータプログラム）によって構成することもできる。ハードウェアとソフトウェアとを適宜に組み合わせて画像信号処理装置を構成することも可能である。

１１合算部（算出部）
１２，１３記憶部
１４スイッチ
１５判定部
１６乗算部
１５１書き込み制御部
１５２補正係数生成部

Claims

画像信号のそれぞれのラインにおける画素の合算値またはこの合算値を所定の値で除算した値を、輝度の変化を判定するためのライン輝度値として算出する算出部と、
前記算出部によって算出されたライン輝度値を垂直有効画像期間のライン数分記憶する第１の記憶部と、
前記算出部によって算出された注目フレームの注目ラインにおけるライン輝度値と、前記第１の記憶部より読み出された前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値とを比較して、輝度の変化の程度を判定する判定部と、
前記判定部によって判定された輝度の変化の程度が所定の閾値を越えた場合、前記輝度の変化の程度に応じて前記注目フレームの前記注目ラインの画像信号を補正するための補正係数を生成する補正係数生成部と、
前記判定部によって判定された輝度の変化の程度が所定の閾値以下のときのみ、前記算出部によって算出されたライン輝度値を前記第１の記憶部に記憶させるよう制御する書き込み制御部と、
前記補正係数部が前記補正係数を生成するタイミングに合わせるように、前記注目フレームの前記注目ラインの画像信号を遅延させる第２の記憶部と、
前記第２の記憶部によって遅延された前記注目フレームの前記注目ラインの画像信号に前記補正係数を乗算して出力する乗算部と、
を備えることを特徴とする画像信号処理装置。
前記判定部は、前記注目フレームの前記注目ラインにおけるライン輝度値を前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値で除算した除算値を輝度の変化の程度を示す値とし、
前記補正係数生成部は、前記除算値を直線近似した特性に基づいて、前記除算値を前記補正係数に変換することを特徴とする請求項１記載の画像信号処理装置。
前記補正係数生成部は、前記除算値が前記所定の閾値を越えている領域を複数の領域に分け、それぞれの領域において前記除算値を前記補正係数に変換する直線の特性を設定することを特徴とする請求項２記載の画像信号処理装置。
画像信号のそれぞれのラインにおける画素の合算値またはこの合算値を所定の値で除算した値を、輝度の変化を判定するためのライン輝度値として算出し、
算出されたライン輝度値を垂直有効画像期間のライン数分だけ第１の記憶部に記憶させ、
算出された注目フレームの注目ラインにおけるライン輝度値と、前記第１の記憶部より読み出された前記注目フレームより過去のフレームにおける前記注目ラインと同じ位置のラインにおけるライン輝度値とを比較して、輝度の変化の程度を判定し、
判定された輝度の変化の程度が所定の閾値を越えた場合、前記輝度の変化の程度に応じて前記注目フレームの前記注目ラインの画像信号を補正するための補正係数を生成し、
判定された輝度の変化の程度が所定の閾値以下のときのみ、算出されたライン輝度値を前記第１の記憶部に記憶させるよう制御し、
前記補正係数を生成するタイミングに合わせるように、前記注目フレームの前記注目ラインの画像信号を第２の記憶部に記憶させて読み出すことによって遅延させ、
前記第２の記憶部によって遅延された前記注目フレームの前記注目ラインの画像信号に前記補正係数を乗算して出力する
ことを特徴とする画像信号処理方法。