JP4297651B2

JP4297651B2 - Image signal processing device

Info

Publication number: JP4297651B2
Application number: JP2002192407A
Authority: JP
Inventors: 透渡辺
Original assignee: Sanyo Electric Co Ltd
Current assignee: Sanyo Electric Co Ltd
Priority date: 2002-07-01
Filing date: 2002-07-01
Publication date: 2009-07-15
Anticipated expiration: 2022-07-01
Also published as: JP2004040325A

Description

【０００１】
【発明の属する技術分野】
本発明は、画像信号に含まれるノイズ画素を検出して補正する画像信号処理装置に関する。
【０００２】
【従来の技術】
イメージセンサ等の撮像素子により生成される画像信号は、ランダムに発生するランダムノイズや画素欠陥のような固定パターンのノイズを含み得る。
【０００３】
画素欠陥と称されるノイズは、イメージセンサに配列される複数の受光画素中の不良画素が原因で、再生画面上に白点や黒点となって現れる。この画素欠陥を補正する従来の技術には、画素欠陥が複数画面に亘って一定の位置に発生するという特性を利用するものがある。具体的には、画素欠陥は一定位置に発生するので、複数画面に亘る時間積分を行うことにより、ランダムノイズを除去し、画素欠陥を検出することができる。この時間積分は、メモリを用いて、画像上の同じ位置の画像信号を累積加算することにより可能である。また、一旦、画素欠陥が検出されるとその位置をメモリに記憶することができる。そして、以降の撮像時には、画素欠陥の検出処理を行うことなく、メモリに記憶された画素欠陥位置に対応する画像信号を自動的に補正することが可能である。画素欠陥の補正方法としては、画素欠陥位置の周辺画素の画像信号を補間する方法がある。すなわち、周辺画素の補間値が画素欠陥位置の画像信号とされる。
【０００４】
一方、ランダムノイズの発生する画素位置は不規則に変化する。そのため、時間積分を行うと、ノイズを含んだ画像信号と含まない画像信号とが平均化され、ランダムノイズを検出することはできない。また、その発生位置を記憶して、自動的に補正することもできない。ランダムノイズは画像信号の増幅率（ゲイン）を上げたり、撮像装置の露光時間を長くすると増加する。つまり、低照度の撮像条件下にて得られた画像信号においては、被写体からの入射光の光電変換により発生する電子が少ない分、熱雑音等により撮像素子内で発生する電子の寄与が相対的に大きくなる。ここで、例えば、輪郭強調処理は画質のＳ／Ｎ比を劣化させる。従来は、このようなＳ／Ｎ比に影響を与える画像信号処理を、画像信号のゲイン等に応じて制御することによって、ランダムノイズによる画質の劣化の軽減が図られている。例えば、ゲインを増加させる場合には、アパーチャ信号の振幅を低減して輪郭強調を弱めることによって、画像のノイズ感が軽減される。このようなランダムノイズに対する従来の画像信号の補正処理は、画素欠陥に対する補間処理のような画素単位での処理ではなく、画面全体に対し一様に施される処理である。
【０００５】
【発明が解決しようとする課題】
従来のランダムノイズに対する補正処理は、上述のようにノイズ画素以外の画素についても影響が及ぶため、十分な効果が得られる強度で施すことができないという問題があった。
【０００６】
また、画素欠陥に対する補正と同様にして、ランダムノイズが生じた画素の画像信号を、その周辺画素を補間した画像信号で置き換える補間処理を行うことは、ランダムノイズの発生頻度が画素欠陥に比べて遙かに高いため、画像の解像度の低下が顕著になり、一般的には好ましくない。
【０００７】
その一方で、低照度の撮像条件下のようにランダムノイズが著しい場合には、解像度を多少犠牲にしてもノイズ感を抑制することが望ましい場合もある。しかし従来は、ランダムノイズと画素欠陥とは別回路構成、別個の処理で補正され、撮像条件等に応じて、処理を切り替えてランダムノイズに補間処理を適用することができなかった。例えば、時間積分を行う従来の画素欠陥補正回路では、すでに述べたようにランダムノイズを検出することができず、当該ランダムノイズの補間処理を行うことができない。
【０００８】
本発明は上記問題点を解決するためになされたもので、画像信号に含まれるランダムノイズを好適に補正し良好な画質の画像が得られる画像信号処理装置を提供することを目的とする。また、撮像条件等に応じて柔軟にランダムノイズや画素欠陥を補正可能な画像信号処理装置を提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明に係る画像信号処理装置は、１画面単位で再生画像を表示する画像信号に対して、画面を構成する複数の画素のうち、特定の画素が画像成分を含まない画素欠陥であるときに補間処理を施すと共に、所定レベルを越えるノイズ成分を含むノイズ画素であるときに補正処理を施す画像信号処理装置であって、目標画素に隣接する複数の周辺画素の画像信号の最大レベル及び最小レベルに基づいて第１の基準範囲を設定すると共に、前記第１の基準範囲を含みつつ当該第１の基準範囲より幅の広い第２の基準範囲を設定し、前記目標画素の信号レベルが前記第１の基準範囲外のときに前記目標画素を前記ノイズ画素と判定すると共に、前記目標画素の信号レベルが前記第２の基準範囲外のときに前記目標画素を前記画素欠陥と判定する判定回路と、前記判定回路の判定結果に基づいて、前記ノイズ画素に対してレベル補正処理を施す補正回路と、前記判定回路の判定結果に基づいて、前記画素欠陥に対して前記複数の周辺画素の信号レベルに基づいた補間処理を行う補間回路とを備える。
【００１０】
本発明によれば、判定回路は、目標画素とその周辺画素とで原画像信号を対比して、目標画素が画素欠陥であるか否かやノイズ画素であるか否かを判定する。判定回路は、原画像信号に対して基本的に時間積分を行うことなく、周辺画素との比較に基づいて判定を行うので、ランダムノイズを検出することができる。画像信号処理回路は、正常な画素の原画像信号に対しては本来目的とする所定の信号処理を行って目的画像信号を生成する。一方、画素欠陥に対しては補間処理、ノイズ画素に対してはレベル補正処理を施す。ここで、ノイズ画素に対するレベル補正処理は、当該ノイズ画素の原画像信号に含まれるノイズ成分を除去・緩和することができるものである。すなわち、画像信号処理回路では、画素単位でノイズ画素のレベル補正処理が実施される。具体的には、判定回路は第１の基準範囲とそれを含みより幅の広い第２の基準範囲とを設定される。これら基準範囲は、各目標画素ごとにその周辺画素の画像信号に基づいて設定される。目標画素の画像信号が第１の基準範囲内であるときは、比較的に周辺画素との画像信号の差異が小さく、目標画素の画像信号が第２の基準範囲外であるときは、比較的に周辺画素との画像信号の差異が大きく、目標画素の画像信号が第１の基準範囲の外側、かつ第２の基準範囲の内側にあるときは、周辺画素の画像信号との差異は中程度である。判定回路は、周辺画素との差異が大きい目標画素を画素欠陥と判定し、差異が中程度の目標画素をノイズ画素と判定する。一般に目標画素と周辺画素との信号レベル差が大きいほど、その事象の発生頻度は低いことを期待でき、よって発生頻度が低い画素欠陥を補間で好適に補正する一方、発生頻度が高いノイズ画素に対しては、補間を行わないレベル補正処理を施すことにより、解像度の劣化を抑制しつつ、ノイズ画素を画像上、目立たなくすることができる。
【００１１】
本発明の好適な態様は、前記判定回路が、前記複数の周辺画素の画像信号の最大レベルから最小レベルまでの範囲を前記第１の基準範囲とすると共に、前記複数の周辺画素の画像信号の平均レベルに前記最大レベルと前記最小レベルとの差を加算したレベルから前記平均レベルより前記最大レベルと前記最小レベルとの差を減算したレベルまでの範囲を前記第２の基準範囲とする画像信号処理装置である。
【００１２】
本発明の好適な態様は、所定のオフセット値を格納するレジスタをさらに備え、前記判定回路が、前記複数の周辺画素の画像信号の最大レベルから最小レベルまでの範囲を前記第１の基準範囲とすると共に、前記最大レベルに前記所定のオフセット値を加算したレベルから前記最大レベルに前記所定のオフセット値を減算したレベルまでの範囲を前記第２の基準範囲とする画像信号処理装置である。
【００１３】
本発明の好適な態様は、入力される画像信号から色差信号を生成する色信号生成回路をさらに備え、前記補正回路が、前記ノイズ画素に対応する色差信号のゲイン量を低く設定する画像信号処理装置である。
【００１４】
本発明の好適な態様は、入力される画像信号のアパーチャ信号を生成するアパーチャ生成回路をさらに備え、前記補正回路が、前記ノイズ画素に対応するアパーチャ信号のレベルを低く設定する画像信号処理装置である。
【００１５】
他の本発明に係る画像信号処理装置は、複数のオフセット値を格納するレジスタをさらに備え、前記判定回路が、前記レジスタに格納された複数のオフセット値から任意のオフセット値を選択的に取り込み、取り込んだオフセット値を前記第１及び第２の基準範囲の少なくとも一方に加算、又は減算して、前記第１及び第２の基準範囲を変更制御する。
【００１６】
本発明によれば、目標画素ごとに設定される第１の基準範囲や第２の基準範囲が、撮像条件等に応じて変更制御される。例えば、原画像信号が得られる撮像条件が低照度であり、ランダムノイズが多い場合には画像のＳ／Ｎ比が低下する。このような場合に、解像度をある程度犠牲にしても画像のノイズ感を低減したい場合には、第２の基準範囲を狭めて、本来の画素欠陥だけでなく、ノイズ成分が大きなランダムノイズも補間により除去するようにする。このように本発明によれば、撮像条件等に応じて柔軟なノイズ補正が可能となる。
【００１７】
本発明の好適な態様の画像信号処理装置は、入力される画像信号の信号レベルを所定範囲内に納めるようにゲイン調整する自動利得制御回路をさらに備え、前記判定回路が、前記自動利得制御回路のゲイン量に応じて、前記レジスタに格納された複数のオフセット値から任意のオフセット値を選択する。本発明の他の好適な態様の画像信号処理装置は、入射光を光電変換して情報電荷を蓄積する固体撮像素子の露光量を制御する露光制御回路をさらに備え、前記判定回路が、前記露光制御回路で選択される露光量に応じて、前記レジスタに格納された複数のオフセット値から任意のオフセット値を選択する。
【００１８】
【発明の実施の形態】
次に、本発明の実施形態について図面を参照して説明する。
【００１９】
図１は、本発明の実施形態である画像信号処理装置の概略構成を示すブロック図である。本画像信号処理装置は、ＣＣＤイメージセンサから、順次読み出された画素値で構成されたＣＣＤ出力信号（原画像信号）を入力され、輝度信号生成処理及び色信号生成処理を本来の信号処理として行う一方で、ノイズ画素を検出してノイズ補正処理も行う。
【００２０】
入力されたＣＣＤ出力信号は、メモリ回路３に入力される。メモリ回路３は、複数のラインメモリ及び複数のラッチを有しており、適数ライン分の画像信号を格納する。ここでは、例えば、３ライン分の画像信号を格納するように構成され、図２に示すように、目標画素の画像信号Ｐ₀及び目標画素に隣接する複数の周辺画素の画像信号Ｐ₁〜Ｐ₈を格納する。そして、メモリ回路３に格納された画像信号は、判定回路２及び遅延回路４に出力される。判定回路２は入力された画像信号を基に第１の基準範囲Ｊ、第２の基準範囲Ｋを設定し、ＣＣＤ出力信号中に含まれる画素欠陥やランダムノイズ（ノイズ画素）の検出を行う。
【００２１】
図３は、目標画素Ｐ₀に隣接する複数の周辺画素Ｐ₁〜Ｐ₈を参照した第１及び第２の基準範囲Ｊ，Ｋの設定方法を説明する図である。図３の縦方向は、信号レベルに対応している。まず、周辺画素Ｐ₁〜Ｐ₈の最大レベルＬmax、最小レベルＬminを生成し、この最大レベルＬmax、最小レベルＬminをそれぞれ第１の判定基準値Ａ、第２の判定基準値Ｂとする。そして、第１の判定基準値Ａから第２の判定基準値Ｂまでの範囲を第１の基準範囲Ｊとする。続いて、周辺画素Ｐ₁〜Ｐ₈を平均化して平均レベルＬavを生成し、この平均レベルＬavに最大レベルＬmaxと最小レベルＬminとの差ΔＬを加算、或いは減算して第３の判定基準値Ｃ、第４の判定基準値Ｄを生成する。そして、第３の判定基準値Ｃから第４の判定基準値Ｄまでの範囲を第２の基準範囲Ｋとする。
【００２２】
判定回路２は、目標画素Ｐ₀の画像信号の信号レベルを第１乃至第４の判定基準値Ａ〜Ｄと比較し、第１及び第２の基準範囲Ｊ，Ｋのいずれの範囲に含まれるかを判定して、目標画素Ｐ₀が画素欠陥、或いはノイズ画素であるか否かを判定する。目標画素Ｐ₀の信号レベルが第３の判定基準値Ｃ以上、或いは第４の判定基準値Ｄ以下であり、第１及び第２の基準範囲Ｊ，Ｋのいずれにも含まれない場合、目標画素は、信号中に画像信号を含まない画素欠陥であると判定される。一方、目標画素Ｐ₀の信号レベルが第１の判定基準値Ａ以上で第３の判定基準値Ｃより小さく、或いは、第２の判定基準値Ｂ以下で第４の判定基準値Ｄより大きい場合、すなわち、第１の基準範囲Ｊに含まれず、かつ第２の基準範囲Ｋに含まれる場合に、目標画素Ｐ₀は、信号中に所定レベルを越えるノイズ成分を含むノイズ画素であると判定される。また、目標画素Ｐ₀の信号レベルが第１の判定基準値Ａより小さく、第２の判定基準値Ｂより大きい場合、すなわち、第１の基準範囲Ｊに含まれる場合、目標画素Ｐ₀はノイズ成分を含まない正常な画素信号と判定される。
【００２３】
そして、判定回路２は、それぞれの判定結果に応じた判定信号Ｄa、Ｄbを生成する。例えば、目標画素Ｐ₀を画素欠陥であるとして検出した場合は、判定信号Ｄaを立ち上げて“Ｈ（High）”レベルとする。一方、目標画素Ｐ₀をノイズ画素であるとして検出した場合は、判定信号Ｄbを立ち上げて“Ｈ”レベルとする。
【００２４】
なお、第１の基準範囲Ｊ、第２の基準範囲Ｋの設定方法については、以下のように変更してもよい。これは例えば、レジスタ６に所定のオフセット値ＯＦを記憶しておき、図４に示すように、第１及び第２の判定基準値Ａ，Ｂにオフセット値ＯＦを加算、又は減算して第３及び第４の判定基準値Ｃ，Ｄを生成するように行う。オフセット値ＯＦを設定する際に、シミュレーション等を行って画素欠陥とノイズ画素とを判定するのに適切なオフセット値を決定することで、ＣＣＤ出力信号に含まれる画素欠陥とノイズ画素とを好適に検出することができる。
【００２５】
判定信号Ｄaは、補間処理回路８の制御に用いられる。補間処理回路８は、遅延回路４を経由したＣＣＤ出力信号に対し、補間処理を行う。補間処理回路８は、遅延回路４から入力されたＣＣＤ出力信号から対象画素の補間に用いる周辺画素の画素値を取得する。例えば、遅延回路４の遅延量は、判定回路２からある画素（目標画素）に対応する判定信号Ｄaが出力されたタイミングで、当該目標画素の補間に必要な周辺画素の画素値が全て補間処理回路８に格納されているように設定される。補間処理回路８は、当該目標画素に対応する判定信号Ｄaが“Ｈ”レベルである場合には、保持されている周辺画素の画素値を用いて補間処理を行い、目標画素の画素値として、得られた補間値を出力する。一方、当該目標画素に対応する判定信号Ｄaが“Ｌ”レベルである場合には補間処理は行わずに、目標画素に対して遅延回路４から入力された画素値をそのまま出力する。このようにして、補間処理回路８は、画素欠陥に対して補間処理を行った画像信号を生成し出力する。
【００２６】
輝度信号生成回路１０は補間処理回路８から出力される画像信号に基づいて、輝度信号Ｙを生成する。また色信号生成回路１２は補間処理回路８から出力される画像信号に基づいて、色差信号Ｕ，Ｖを生成する。輝度ゲイン調節回路１４，色ゲイン調節回路１６はそれぞれ、輝度信号生成回路１０で生成された輝度信号Ｙ、色信号生成回路１２で生成された色差信号のゲインを調整し、ゲイン調整後の輝度信号Ｙ’及びゲイン調整後の色差信号Ｕ’，Ｖ’を後段の信号処理回路等へ出力する。
【００２７】
ここで、色ゲイン調節回路１６で用いられるゲイン量は、色ゲイン制御回路１８によって可変制御される。色ゲイン制御回路１８は判定回路２が出力する判定信号Ｄbが“Ｌ”レベルである場合には、対応する画素の色差信号に対する色ゲインを標準値に設定し、一方、判定信号Ｄbが“Ｈ”レベルである場合には、色ゲインを標準値より小さい値に設定する。このように、ノイズ画素のところは色を薄くする。これにより、ノイズ画素では実際と違う色となるところ、その色を薄く表示させることでノイズによる画像のちらつきが抑制され、ノイズが目立たなくなる。
【００２８】
図５は、上述した本装置の動作を説明する処理フロー図である。判定回路２はＣＣＤ出力信号を順次取り込み（Ｓ５０）、画素値が第３の判定基準値Ｃ以上、或いは第４の判定基準値Ｄ以下であるか否か（Ｓ５５）、また画素値が第１の判定基準値Ａ以上かつ第３の判定基準値Ｃ未満、或いは第２の判定基準値Ｂ以下かつ第４の判定基準値Ｄ未満であるか否か（Ｓ６０）を判定し、その判定結果に応じて判定信号Ｄa，Ｄbが生成される。具体的には、判定回路２は、画素値が第３の判定基準値Ｃ以上、或いは第４の判定基準値Ｄ以下であると判定すると（Ｓ５５）、判定信号Ｄaを“Ｈ”レベルに立ち上げ、これにより補間処理回路８に対して補間処理が指示される（Ｓ６５）。また、画素値が第３の判定基準値Ｃ未満かつ第４の判定基準値Ｄより大きく（Ｓ５５）、第１の判定基準値Ａ以上、或いは第２の判定基準値Ｂ以下である場合には（Ｓ６０）、判定回路２は判定信号Ｄbを“Ｈ”レベルに立ち上げ、これに応じて、色ゲイン制御回路１８は色ゲイン調節回路１６に設定される色ゲインを標準値より小さな値に変更する（Ｓ７０）。一方、画素値が第１の判定基準値Ａ未満かつ第２の判定基準値Ｂより大きい場合には、判定回路２は判定信号Ｄa，Ｄbを両方とも“Ｌ”レベルに引き下げ、これにより、補間処理回路８は補間処理を実行せず、また色ゲイン制御回路１８では色ゲインは標準値のままに保たれる。補間処理回路８から出力された画像信号に基づいて、輝度信号生成回路１０、色信号生成回路１２にてそれぞれ輝度信号Ｙ、色差信号Ｕ，Ｖが生成され（Ｓ７５）、輝度ゲイン調節回路１４、色ゲイン調節回路１６にてそれらＹ，Ｕ，Ｖ信号に対し、設定されたゲイン量を乗じるゲイン調整が行われる（Ｓ８０）。このとき、色差信号Ｕ，Ｖに対しては、処理Ｓ７０にて、色ゲインが標準値より小さな値に設定変更されている場合には、その設定変更された色ゲインを用いてゲイン調整が行われる。そして、ゲイン調整されたＹ’，Ｕ’，Ｖ’信号が本装置の外部へ出力される（Ｓ８５）。
【００２９】
これにより、画素欠陥に対しては補間処理によりノイズ補正が行われ、ランダムノイズに対しては色ゲインの低減により画像上、目立たなくするノイズ補正が施される。
【００３０】
また第１乃至第４の判定基準値Ａ〜Ｄは例えば、ＣＣＤイメージセンサの撮像条件等に応じて変更することができる。これは、例えば、レジスタ６に所定のオフセット値ＯＦを複数記憶しておき、条件に応じて選択的に読み出したオフセット値ＯＦを第１乃至第４の判定基準値Ａ〜Ｄに加算、又は減算することで実現される。例えば、明るい撮像条件で得られたＣＣＤ出力信号に対しては、画素欠陥に対し補間処理、ノイズ画素に対し色ゲイン低減処理がなされる上述の第１乃至第４の判定基準値Ａ〜Ｄを採用する。しかし、ノイズ画素の頻度が高くなる低照度の撮像条件で得られたＣＣＤ出力信号に対しては、例えば、図６に示すように、第３の判定基準値Ｃからオフセット値ＯＦ１を減算して新たな第３の判定基準値Ｃ'とすると共に、第４の判定基準値Ｄにオフセット値ＯＦ２を加算して新たな第４の判定基準値Ｄ'とする。これにより、第３の判定基準値Ｃが通常よりも低く設定されると共に、第４の判定基準値Ｄが通常よりも高く設定される。この結果、ノイズ画素のうち比較的レベルが高いものが画素欠陥と見なされ、補間処理が施される。この設定によれば低照度では、ランダムノイズの一部が補間によりその周辺画素と見分けが付かないように補正される。すなわち、高照度では、画素欠陥のみを補間処理して高い解像度を維持する一方で、低照度では、解像度をある程度犠牲にしても画像のノイズ感を低減するという、状況に柔軟に対応して好適なノイズ補正を行うことが可能となる。
【００３１】
この閾値変更を行うための照度情報は、図７に示すように、例えばＡＧＣ（Auto Gain Control）回路２１でのゲイン制御情報に基づいて取得することができる。ＡＧＣ２１回路は、ゲイン設定回路２２で設定されたゲイン量設定信号ＡＧに応じてゲイン量を決定し、ＣＣＤ出力信号に対して決定したゲイン量を与えてＣＣＤ出力信号の信号レベルが所定の範囲内に収まるようにレベル調整を行う。すなわち、低照度では輝度ゲインを増加させるといった制御を行うので、これに連動して、判定回路２がレジスタ６からオフセット値ＯＦを選択的に読み出して、第１乃至第４の判定基準値Ａ〜Ｄを自動的に変更するように構成することができる。また、図８に示すようにＣＣＤイメージセンサに対する露光時間を撮像状況の照度に応じて制御する露光制御回路を利用して第１乃至第４の判定基準値Ａ〜Ｄを変更制御することができる。露光制御回路３１は、ＣＣＤ出力信号の積分値を所定の適正範囲と比較し、比較結果に基づいてＣＣＤイメージセンサの露光時間の伸縮制御を行う。この場合に、露光時間の伸縮を指示する露光量判定信号ＥＳを判定回路２にも出力し、判定回路２で露光量判定信号ＥＳに応じてオフセット値ＯＦを選択的に読み出すことで実現することができる。これにより、露光時間、すなわち、照度条件に連動させて第１乃至第４の判定基準値Ａ〜Ｄを変更させることができる。
【００３２】
また、上述の装置は、閾値Ｂ以上閾値Ａ未満の場合のノイズであるノイズ画素Ｐbに対するノイズ補正処理として色ゲインの調節を採用している。しかし、補間処理を伴わずにノイズを目立たなくする他のノイズ補正処理を採用することもできる。例えば、判定信号Ｄbに応じて、アパーチャ信号の強度を画素単位で切り替える構成が可能である。この構成では、ノイズ画素Ｐbに対してはアパーチャ信号の強度を低減することにより、ノイズ画素Ｐbに対する輪郭強調が抑制され、目立たなくすることができる。
【００３３】
【発明の効果】
本発明の画像信号処理装置によれば、画素単位でランダムノイズが補正される。すなわち、ノイズ画素だけを選択的に補正することができるので、画像全体のノイズ補正の影響を及ぼすことを回避しつつ、好適にノイズを補正することができる。
【００３４】
また、画一的なノイズ補正ではなく、ノイズの強度に応じて、効果の異なるノイズ補正が採用され、さらには、それら効果の異なるノイズ補正が適用されるノイズ強度を可変制御することもでき、これらによってより好適なノイズ補正が実現される。
【図面の簡単な説明】
【図１】本発明の実施形態である画像信号処理装置の概略構成を示すブロック図である。
【図２】目標画素Ｐ₀及び周辺画素の模式図である。
【図３】目標画素Ｐ₀に隣接する複数の周辺画素Ｐ₁〜Ｐ₈を参照した第１及び第２の基準範囲Ｊ，Ｋの設定方法を説明する説明図である。
【図４】第１及び第２の基準範囲の設定を説明する模式図である。
【図５】本装置の動作を説明する処理フロー図である。
【図６】第１及び第２の基準範囲の変更制御を説明する模式図である。
【図７】ＡＧＣ回路を備えた本発明の実施形態である画像信号処理装置の概略構成を示すブロック図である。
【図８】露光制御回路を備えた本発明の実施形態である画像信号処理装置の概略構成を示すブロック図である。
【符号の説明】
２判定回路、３メモリ、４遅延回路、６レジスタ、８補間処理回路、１０輝度信号生成回路、１２色信号生成回路、１４輝度ゲイン調節回路、１６色ゲイン調節回路、１８色ゲイン制御回路、２１ＡＧＣ回路、２２ゲイン設定回路、３１露光制御回路。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image signal processing apparatus that detects and corrects noise pixels included in an image signal.
[0002]
[Prior art]
An image signal generated by an image sensor such as an image sensor may include random noise generated at random or fixed pattern noise such as pixel defects.
[0003]
Noise called a pixel defect appears as a white spot or a black spot on the reproduction screen due to defective pixels among a plurality of light receiving pixels arranged in the image sensor. Some conventional techniques for correcting this pixel defect use a characteristic that a pixel defect occurs at a fixed position over a plurality of screens. Specifically, since the pixel defect occurs at a certain position, random noise can be removed and the pixel defect can be detected by performing time integration over a plurality of screens. This time integration can be performed by accumulating the image signals at the same position on the image using a memory. Further, once a pixel defect is detected, the position can be stored in the memory. In subsequent imaging, it is possible to automatically correct the image signal corresponding to the pixel defect position stored in the memory without performing pixel defect detection processing. As a pixel defect correction method, there is a method of interpolating image signals of peripheral pixels at a pixel defect position. That is, the interpolation value of the peripheral pixel is used as the image signal at the pixel defect position.
[0004]
On the other hand, the pixel position where random noise occurs changes irregularly. Therefore, when time integration is performed, an image signal including noise and an image signal not including noise are averaged, and random noise cannot be detected. Further, it is not possible to store the generated position and automatically correct it. Random noise increases when the gain (gain) of the image signal is increased or the exposure time of the imaging device is increased. In other words, in the image signal obtained under imaging conditions with low illuminance, the contribution of electrons generated in the image sensor due to thermal noise, etc. is relatively small because of the small amount of electrons generated by photoelectric conversion of incident light from the subject. Become bigger. Here, for example, the contour enhancement process deteriorates the S / N ratio of the image quality. Conventionally, image signal processing that affects the S / N ratio is controlled in accordance with the gain of the image signal and the like, thereby reducing image quality degradation due to random noise. For example, when the gain is increased, the noise feeling of the image is reduced by reducing the amplitude of the aperture signal to weaken the contour enhancement. The conventional image signal correction process for such random noise is not a process in units of pixels such as an interpolation process for pixel defects, but a process that is uniformly applied to the entire screen.
[0005]
[Problems to be solved by the invention]
As described above, the conventional correction processing for random noise has an effect on pixels other than the noise pixels, and thus has a problem that it cannot be applied with sufficient strength to obtain a sufficient effect.
[0006]
Similarly to the correction for pixel defects, performing an interpolation process that replaces an image signal of a pixel in which random noise has occurred with an image signal obtained by interpolating the surrounding pixels, the frequency of occurrence of random noise is less than that of pixel defects. Since it is much higher, the resolution of the image is significantly reduced, which is generally not preferable.
[0007]
On the other hand, when random noise is significant as in low-illumination imaging conditions, it may be desirable to suppress the noise sensation at the expense of some resolution. However, conventionally, random noise and pixel defects are corrected by a separate circuit configuration and separate processing, and interpolation processing cannot be applied to random noise by switching processing according to imaging conditions and the like. For example, in a conventional pixel defect correction circuit that performs time integration, random noise cannot be detected as described above, and interpolation processing of the random noise cannot be performed.
[0008]
The present invention has been made to solve the above problems, and an object of the present invention is to provide an image signal processing apparatus capable of suitably correcting random noise included in an image signal and obtaining an image of good image quality. It is another object of the present invention to provide an image signal processing apparatus that can flexibly correct random noise and pixel defects according to imaging conditions and the like.
[0009]
[Means for Solving the Problems]
The image signal processing apparatus according to the present invention, when an image signal for displaying a reproduced image in one screen unit is a pixel defect that does not include an image component among a plurality of pixels constituting the screen. An image signal processing device that performs interpolation processing and performs correction processing when a noise pixel includes a noise component exceeding a predetermined level, and is a maximum level and a minimum level of image signals of a plurality of peripheral pixels adjacent to a target pixel And a second reference range that includes the first reference range and is wider than the first reference range is set, and the signal level of the target pixel is set to the first reference range. Determination that the target pixel is determined to be the noise pixel when the target pixel is outside the first reference range, and that the target pixel is determined to be the pixel defect when the signal level of the target pixel is outside the second reference range A correction circuit that performs a level correction process on the noise pixel based on a determination result of the path, the determination circuit, and a plurality of peripheral pixels for the pixel defect based on the determination result of the determination circuit. An interpolation circuit that performs an interpolation process based on the signal level.
[0010]
According to the present invention, the determination circuit compares the original image signal between the target pixel and its peripheral pixels to determine whether the target pixel is a pixel defect or a noise pixel. Since the determination circuit performs determination based on comparison with surrounding pixels without basically performing time integration on the original image signal, it is possible to detect random noise. The image signal processing circuit performs a predetermined intended signal processing on the original image signal of normal pixels to generate a target image signal. On the other hand, interpolation processing is performed for pixel defects, and level correction processing is performed for noise pixels. Here, the level correction processing for the noise pixel can remove and mitigate the noise component included in the original image signal of the noise pixel. That is, the image signal processing circuit performs noise pixel level correction processing in units of pixels. Specifically, the determination circuit is set with a first reference range and a second reference range that includes the first reference range and is wider. These reference ranges are set for each target pixel based on the image signal of the surrounding pixels. When the image signal of the target pixel is within the first reference range, the difference in the image signal from the surrounding pixels is relatively small, and when the image signal of the target pixel is outside the second reference range, the image signal of the target pixel is relatively When the image signal of the target pixel is outside the first reference range and inside the second reference range, the difference from the image signal of the peripheral pixel is moderate. It is. The determination circuit determines a target pixel having a large difference from surrounding pixels as a pixel defect, and determines a target pixel having a medium difference as a noise pixel. In general, the larger the signal level difference between the target pixel and the surrounding pixels, the lower the frequency of occurrence of the event, so that pixel defects with low frequency of occurrence can be suitably corrected by interpolation, while noise pixels with high frequency of occurrence are corrected. On the other hand, by performing level correction processing that does not perform interpolation, noise pixels can be made inconspicuous on the image while suppressing deterioration in resolution.
[0011]
In a preferred aspect of the present invention, the determination circuit uses the range from the maximum level to the minimum level of the image signals of the plurality of peripheral pixels as the first reference range, and the image signals of the plurality of peripheral pixels An image signal having a range from a level obtained by adding a difference between the maximum level and the minimum level to an average level to a level obtained by subtracting a difference between the maximum level and the minimum level from the average level as the second reference range. It is a processing device.
[0012]
A preferred aspect of the present invention further includes a register for storing a predetermined offset value, and the determination circuit defines a range from a maximum level to a minimum level of the image signals of the plurality of peripheral pixels as the first reference range. In addition, the image signal processing apparatus uses a range from a level obtained by adding the predetermined offset value to the maximum level to a level obtained by subtracting the predetermined offset value from the maximum level as the second reference range.
[0013]
According to a preferred aspect of the present invention, the image signal processing further includes a color signal generation circuit that generates a color difference signal from the input image signal, and the correction circuit sets a gain amount of the color difference signal corresponding to the noise pixel to be low. Device.
[0014]
A preferred aspect of the present invention is an image signal processing device further comprising an aperture generation circuit that generates an aperture signal of an input image signal, wherein the correction circuit sets a low level of the aperture signal corresponding to the noise pixel. is there.
[0015]
Another image signal processing apparatus according to the present invention further includes a register for storing a plurality of offset values, and the determination circuit selectively takes an arbitrary offset value from the plurality of offset values stored in the register, The fetched offset value is added to or subtracted from at least one of the first and second reference ranges to change and control the first and second reference ranges.
[0016]
According to the present invention, the first reference range and the second reference range set for each target pixel are changed and controlled according to the imaging conditions and the like. For example, when the imaging condition for obtaining the original image signal is low illuminance and there is a lot of random noise, the S / N ratio of the image decreases. In such a case, if you want to reduce the noise of the image even if the resolution is sacrificed to some extent, the second reference range is narrowed, and not only the original pixel defect but also random noise with a large noise component is interpolated. Try to remove it. As described above, according to the present invention, flexible noise correction can be performed according to imaging conditions and the like.
[0017]
The image signal processing apparatus according to a preferred aspect of the present invention further includes an automatic gain control circuit that adjusts a gain so that a signal level of an input image signal falls within a predetermined range, and the determination circuit includes the automatic gain control circuit. An arbitrary offset value is selected from a plurality of offset values stored in the register according to the gain amount. The image signal processing apparatus according to another preferred aspect of the present invention further includes an exposure control circuit that controls an exposure amount of a solid-state imaging device that photoelectrically converts incident light and accumulates information charges, and the determination circuit includes the exposure An arbitrary offset value is selected from a plurality of offset values stored in the register in accordance with the exposure amount selected by the control circuit.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
Next, embodiments of the present invention will be described with reference to the drawings.
[0019]
FIG. 1 is a block diagram showing a schematic configuration of an image signal processing apparatus according to an embodiment of the present invention. This image signal processing apparatus receives a CCD output signal (original image signal) composed of sequentially read pixel values from a CCD image sensor, and uses luminance signal generation processing and color signal generation processing as original signal processing. On the other hand, noise correction processing is also performed by detecting noise pixels.
[0020]
The input CCD output signal is input to the memory circuit 3. The memory circuit 3 has a plurality of line memories and a plurality of latches, and stores image signals for an appropriate number of lines. Here, for example, it is configured to store image signals for three lines, and as shown in FIG. 2, the image signal P ₀ of the target pixel and the image signals P _{1 to} P of a plurality of peripheral pixels adjacent to the target pixel. Stores ₈ . Then, the image signal stored in the memory circuit 3 is output to the determination circuit 2 and the delay circuit 4. The determination circuit 2 sets the first reference range J and the second reference range K based on the input image signal, and detects pixel defects and random noise (noise pixels) included in the CCD output signal.
[0021]
FIG. 3 is a diagram illustrating a method for setting the first and second reference ranges J and K with reference to a plurality of peripheral pixels P _{1 to} P ₈ adjacent to the target pixel P ₀ . The vertical direction in FIG. 3 corresponds to the signal level. First, the maximum level Lmax and the minimum level Lmin of the peripheral pixels P _{1 to} P ₈ are generated, and the maximum level Lmax and the minimum level Lmin are set as the first determination reference value A and the second determination reference value B, respectively. A range from the first determination reference value A to the second determination reference value B is defined as a first reference range J. Subsequently, the peripheral pixels P _{1 to} P ₈ are averaged to generate an average level Lav, and a third determination reference value is obtained by adding or subtracting the difference ΔL between the maximum level Lmax and the minimum level Lmin to the average level Lav. C, a fourth determination reference value D is generated. A range from the third determination reference value C to the fourth determination reference value D is defined as a second reference range K.
[0022]
The determination circuit 2 compares the signal level of the image signal of the target pixel P ₀ with the first to fourth determination reference values A to D, and is included in any of the first and second reference ranges J and K. To determine whether the target pixel P ₀ is a pixel defect or a noise pixel. When the signal level of the target pixel P ₀ is equal to or higher than the third determination reference value C or equal to or lower than the fourth determination reference value D and is not included in any of the first and second reference ranges J and K, the target The pixel is determined to be a pixel defect that does not include an image signal in the signal. On the other hand, when the signal level of the target pixel P ₀ is equal to or higher than the first determination reference value A and lower than the third determination reference value C, or equal to or lower than the second determination reference value B and higher than the fourth determination reference value D. That is, when it is not included in the first reference range J and is included in the second reference range K, the target pixel P ₀ is determined to be a noise pixel including a noise component exceeding a predetermined level in the signal. The When the signal level of the target pixel P ₀ is smaller than the first determination reference value A and larger than the second determination reference value B, that is, when it is included in the first reference range J, the target pixel P ₀ is a noise. It is determined that the pixel signal is a normal pixel signal.
[0023]
Then, the determination circuit 2 generates determination signals Da and Db corresponding to the respective determination results. For example, when the target pixel P ₀ is detected as a pixel defect, the determination signal Da is raised to the “H (High)” level. On the other hand, when the target pixel P ₀ is detected as a noise pixel, the determination signal Db is raised to “H” level.
[0024]
Note that the setting method of the first reference range J and the second reference range K may be changed as follows. For example, a predetermined offset value OF is stored in the register 6 and, as shown in FIG. 4, the offset value OF is added to or subtracted from the first and second determination reference values A and B. And fourth determination reference values C and D are generated. When setting the offset value OF, a suitable offset value for determining a pixel defect and a noise pixel by performing a simulation or the like is preferably used to determine the pixel defect and the noise pixel included in the CCD output signal. Can be detected.
[0025]
The determination signal Da is used for controlling the interpolation processing circuit 8. The interpolation processing circuit 8 performs interpolation processing on the CCD output signal that has passed through the delay circuit 4. The interpolation processing circuit 8 acquires pixel values of peripheral pixels used for interpolation of the target pixel from the CCD output signal input from the delay circuit 4. For example, the delay amount of the delay circuit 4 is the timing at which the determination signal Da corresponding to a certain pixel (target pixel) is output from the determination circuit 2, and all the pixel values of peripheral pixels necessary for interpolation of the target pixel are interpolated. It is set to be stored in the circuit 8. When the determination signal Da corresponding to the target pixel is at “H” level, the interpolation processing circuit 8 performs an interpolation process using the pixel values of the held peripheral pixels, and obtains the pixel value of the target pixel as The obtained interpolation value is output. On the other hand, when the determination signal Da corresponding to the target pixel is at the “L” level, the interpolation processing is not performed, and the pixel value input from the delay circuit 4 is output to the target pixel as it is. In this way, the interpolation processing circuit 8 generates and outputs an image signal obtained by performing the interpolation processing on the pixel defect.
[0026]
The luminance signal generation circuit 10 generates a luminance signal Y based on the image signal output from the interpolation processing circuit 8. The color signal generation circuit 12 generates color difference signals U and V based on the image signal output from the interpolation processing circuit 8. The luminance gain adjustment circuit 14 and the color gain adjustment circuit 16 adjust the gain of the luminance signal Y generated by the luminance signal generation circuit 10 and the color difference signal generated by the color signal generation circuit 12, respectively, and the luminance signal after gain adjustment. Y ′ and the color difference signals U ′ and V ′ after gain adjustment are output to a signal processing circuit or the like at the subsequent stage.
[0027]
Here, the gain amount used in the color gain adjustment circuit 16 is variably controlled by the color gain control circuit 18. When the determination signal Db output from the determination circuit 2 is “L” level, the color gain control circuit 18 sets the color gain for the color difference signal of the corresponding pixel to a standard value, while the determination signal Db is “H”. In the case of “level”, the color gain is set to a value smaller than the standard value. In this way, the color of the noise pixel is lightened. As a result, the noise pixel has a color different from the actual color. By displaying the color lightly, the flickering of the image due to the noise is suppressed, and the noise becomes inconspicuous.
[0028]
FIG. 5 is a processing flowchart for explaining the operation of the apparatus described above. The determination circuit 2 sequentially captures the CCD output signal (S50), whether the pixel value is not less than the third determination reference value C or not more than the fourth determination reference value D (S55), and the pixel value is the first. It is determined whether or not the determination criterion value A is greater than or equal to the third criterion value C and less than the third criterion value C, or less than the second criterion value B and less than the fourth criterion value D (S60). Accordingly, determination signals Da and Db are generated. Specifically, when the determination circuit 2 determines that the pixel value is greater than or equal to the third determination reference value C or less than or equal to the fourth determination reference value D (S55), the determination signal Da is set to the “H” level. Thus, the interpolation processing circuit 8 is instructed to perform interpolation processing (S65). Further, when the pixel value is less than the third determination reference value C and greater than the fourth determination reference value D (S55) and is equal to or greater than the first determination reference value A or equal to or less than the second determination reference value B. (S60), the determination circuit 2 raises the determination signal Db to the “H” level, and accordingly, the color gain control circuit 18 changes the color gain set in the color gain adjustment circuit 16 to a value smaller than the standard value. (S70). On the other hand, when the pixel value is less than the first determination reference value A and greater than the second determination reference value B, the determination circuit 2 lowers both the determination signals Da and Db to the “L” level, thereby interpolating. The processing circuit 8 does not execute the interpolation process, and the color gain is kept at the standard value in the color gain control circuit 18. Based on the image signal output from the interpolation processing circuit 8, the luminance signal generation circuit 10 and the color signal generation circuit 12 generate the luminance signal Y and the color difference signals U and V, respectively (S75), and the luminance gain adjustment circuit 14, The color gain adjustment circuit 16 performs gain adjustment for multiplying these Y, U, and V signals by the set gain amount (S80). At this time, if the color gain is changed to a value smaller than the standard value for the color difference signals U and V in step S70, the gain adjustment is performed using the changed color gain. Is called. The gain-adjusted Y ′, U ′, V ′ signals are output to the outside of the apparatus (S85).
[0029]
As a result, noise correction is performed on the pixel defect by interpolation processing, and noise correction on the image is made inconspicuous on the image by reducing the color gain.
[0030]
The first to fourth determination reference values A to D can be changed according to, for example, the imaging conditions of the CCD image sensor. For example, a plurality of predetermined offset values OF are stored in the register 6 and the offset values OF selectively read according to the conditions are added to or subtracted from the first to fourth determination reference values A to D. It is realized by doing. For example, for the CCD output signal obtained under bright imaging conditions, the above first to fourth determination reference values A to D that are subjected to interpolation processing for pixel defects and color gain reduction processing for noise pixels are used. adopt. However, for a CCD output signal obtained under low-illumination imaging conditions where the frequency of noise pixels is high, for example, as shown in FIG. 6, the offset value OF1 is subtracted from the third determination reference value C. A new third criterion value C ′ is set, and an offset value OF2 is added to the fourth criterion value D to obtain a new fourth criterion value D ′. Thus, the third determination reference value C is set lower than normal, and the fourth determination reference value D is set higher than normal. As a result, noise pixels having relatively high levels are regarded as pixel defects, and interpolation processing is performed. According to this setting, at low illuminance, a part of random noise is corrected so that it cannot be distinguished from surrounding pixels by interpolation. In other words, at high illuminance, only pixel defects are interpolated to maintain high resolution, while at low illuminance, image noise is reduced even if the resolution is sacrificed to some extent. Noise correction can be performed.
[0031]
Illuminance information for performing this threshold change can be acquired based on gain control information in an AGC (Auto Gain Control) circuit 21, for example, as shown in FIG. The AGC 21 circuit determines the gain amount according to the gain amount setting signal AG set by the gain setting circuit 22, and gives the determined gain amount to the CCD output signal so that the signal level of the CCD output signal is within a predetermined range. Adjust the level so that it falls within the range. That is, since control is performed such that the luminance gain is increased at low illuminance, the determination circuit 2 selectively reads the offset value OF from the register 6 in conjunction with this control, and the first to fourth determination reference values A to It can be configured to automatically change D. Further, as shown in FIG. 8, the first to fourth determination reference values A to D can be changed and controlled using an exposure control circuit that controls the exposure time for the CCD image sensor in accordance with the illuminance of the imaging state. . The exposure control circuit 31 compares the integration value of the CCD output signal with a predetermined appropriate range, and performs expansion / contraction control of the exposure time of the CCD image sensor based on the comparison result. In this case, the exposure amount determination signal ES instructing expansion / contraction of the exposure time is also output to the determination circuit 2, and the determination circuit 2 selectively reads the offset value OF according to the exposure amount determination signal ES. Can do. Thus, the first to fourth determination reference values A to D can be changed in conjunction with the exposure time, that is, the illuminance condition.
[0032]
Further, the above-described apparatus employs color gain adjustment as noise correction processing for the noise pixel Pb, which is noise when the threshold value B is greater than or equal to the threshold value B and less than the threshold value A. However, other noise correction processing that makes noise inconspicuous without interpolation processing may be employed. For example, a configuration in which the intensity of the aperture signal is switched in units of pixels according to the determination signal Db is possible. In this configuration, by reducing the intensity of the aperture signal with respect to the noise pixel Pb, the edge enhancement with respect to the noise pixel Pb is suppressed and can be made inconspicuous.
[0033]
【The invention's effect】
According to the image signal processing apparatus of the present invention, random noise is corrected in units of pixels. That is, since only the noise pixel can be selectively corrected, it is possible to appropriately correct the noise while avoiding the influence of the noise correction of the entire image.
[0034]
Also, instead of uniform noise correction, noise correction with different effects is adopted according to the noise intensity, and furthermore, noise intensity to which noise correction with different effects is applied can be variably controlled, By these, more suitable noise correction is realized.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a schematic configuration of an image signal processing apparatus according to an embodiment of the present invention.
FIG. 2 is a schematic diagram of a target pixel P ₀ and peripheral pixels.
FIG. 3 is an explanatory diagram illustrating a method for setting first and second reference ranges J and K with reference to a plurality of peripheral pixels P _{1 to} P ₈ adjacent to a target pixel P ₀ .
FIG. 4 is a schematic diagram illustrating the setting of first and second reference ranges.
FIG. 5 is a processing flowchart for explaining the operation of the apparatus.
FIG. 6 is a schematic diagram for explaining change control of the first and second reference ranges.
FIG. 7 is a block diagram showing a schematic configuration of an image signal processing apparatus according to an embodiment of the present invention provided with an AGC circuit.
FIG. 8 is a block diagram showing a schematic configuration of an image signal processing apparatus according to an embodiment of the present invention provided with an exposure control circuit.
[Explanation of symbols]
2 determination circuit, 3 memory, 4 delay circuit, 6 register, 8 interpolation processing circuit, 10 luminance signal generation circuit, 12 color signal generation circuit, 14 luminance gain adjustment circuit, 16 color gain adjustment circuit, 18 color gain control circuit, 21 AGC circuit, 22 gain setting circuit, 31 exposure control circuit.

Claims

The image signal for displaying the reproduced image in one screen unit, among the plurality of pixels constituting the screen, the interpolation processing is performed with respect to time is a specific pixel Gae containing defects, including a noise component exceeding a predetermined level An image signal processing device that performs correction processing when the pixel is a noise pixel,
A first reference range is set based on the maximum level and the minimum level of the image signals of a plurality of peripheral pixels adjacent to the target pixel, and includes the first reference range and is wider than the first reference range. A second reference range is set, and when the signal level of the target pixel is outside the first reference range and within the second reference range, the target pixel is determined as the noise pixel, and the target pixel A determination circuit that determines the target pixel as the pixel defect when the signal level of the target pixel is outside the second reference range;
A correction circuit that performs level correction processing on the noise pixel based on the determination result of the determination circuit;
An interpolation circuit that performs an interpolation process based on signal levels of the plurality of peripheral pixels for the pixel defect based on a determination result of the determination circuit;
An image signal processing apparatus comprising:

The image signal processing apparatus according to claim 1,
The determination circuit sets a range from the maximum level to the minimum level of the image signals of the plurality of peripheral pixels as the first reference range, and sets the maximum level and the average level of the image signals of the plurality of peripheral pixels as the average level. An image signal processing apparatus characterized in that a range from a level obtained by adding a difference from a minimum level to a level obtained by subtracting a difference between the maximum level and the minimum level from the average level is set as the second reference range.

The image signal processing apparatus according to claim 1,
A register for storing a predetermined offset value;
The determination circuit sets a range from a maximum level to a minimum level of the image signals of the plurality of peripheral pixels as the first reference range, and adds the predetermined offset value to the maximum level to the maximum level. An image signal processing apparatus characterized in that a range up to a level obtained by subtracting the predetermined offset value is used as the second reference range.

In the image signal processing device according to any one of claims 1 to 3,
A color signal generation circuit for generating a color difference signal from the input image signal;
The correction circuit sets a gain amount of a color difference signal corresponding to the noise pixel to be low;
An image signal processing apparatus.

In the image signal processing device according to any one of claims 1 to 3,
An aperture generation circuit for generating an aperture signal of the input image signal;
The correction circuit sets a low level of an aperture signal corresponding to the noise pixel;
An image signal processing apparatus.

In the image signal processing device according to any one of claims 1 to 5,
A register for storing a plurality of offset values;
The determination circuit selectively fetches an arbitrary offset value from a plurality of offset values stored in the register, and adds or subtracts the fetched offset value to at least one of the first and second reference ranges. Changing and controlling the first and second reference ranges;
An image signal processing apparatus.

The image signal processing apparatus according to claim 6.
An automatic gain control circuit for adjusting the gain so that the signal level of the input image signal falls within a predetermined range;
The determination circuit selectively fetches an arbitrary offset value from a plurality of offset values stored in the register according to the gain amount of the automatic gain control circuit, and takes the fetched offset value as the first and second offset values. Adding or subtracting to at least one of the reference ranges to change and control the first and second reference ranges;
An image signal processing apparatus.

The image signal processing apparatus according to claim 6.
An exposure control circuit for controlling the exposure amount of the solid-state imaging device that photoelectrically converts incident light and accumulates information charges;
The determination circuit selectively fetches an arbitrary offset value from a plurality of offset values stored in the register in accordance with an exposure amount selected by the exposure control circuit, and the fetched offset value is the first and first offset values. Adding or subtracting to at least one of the two reference ranges to change and control the first and second reference ranges;
An image signal processing apparatus.