JP3791029B2 - 画像信号処理装置および方法 - Google Patents
画像信号処理装置および方法 Download PDFInfo
- Publication number
- JP3791029B2 JP3791029B2 JP32835895A JP32835895A JP3791029B2 JP 3791029 B2 JP3791029 B2 JP 3791029B2 JP 32835895 A JP32835895 A JP 32835895A JP 32835895 A JP32835895 A JP 32835895A JP 3791029 B2 JP3791029 B2 JP 3791029B2
- Authority
- JP
- Japan
- Prior art keywords
- class classification
- bit
- classification information
- class
- target pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 title claims description 24
- 230000015654 memory Effects 0.000 claims description 24
- 230000002093 peripheral effect Effects 0.000 claims description 18
- 238000012935 Averaging Methods 0.000 claims description 13
- 238000000059 patterning Methods 0.000 claims description 4
- 238000003672 processing method Methods 0.000 claims description 3
- 230000000903 blocking effect Effects 0.000 description 27
- 101710163391 ADP-ribosyl cyclase/cyclic ADP-ribose hydrolase Proteins 0.000 description 25
- 238000006243 chemical reaction Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 16
- 238000004364 calculation method Methods 0.000 description 13
- 238000013139 quantization Methods 0.000 description 11
- 238000001514 detection method Methods 0.000 description 7
- 230000007850 degeneration Effects 0.000 description 6
- 230000003044 adaptive effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
Description
【発明の属する技術分野】
この発明は、画像信号の輝度値をクラス分類適応処理を用いて補正するようにした画像信号処理装置および方法に関する。
【0002】
【従来の技術】
通常、画像信号処理装置において、輝度補正は、画面内の輝度値の積分値(全受光量に相当する)を求め、これに応じてアンプのゲインを変化させることで輝度補正を行っていた。
【0003】
【発明が解決しようとする課題】
しかしながら、空間内で見るとどの画素にも一定のゲインが掛かっており、暗い部分のみを明るくしたり、明るい部分のみを暗くしたり、という細かい補正を行うことができなかった。
【0004】
従って、この発明の目的は、輝度分布のパターン分類に応じた輝度補正と、空間内のパターン分類および輝度値の平均値に応じた部分的な輝度補正とを行うことによりきめの細かい輝度補正を行うことができる画像信号処理装置および方法を提供することにある。
【0005】
【課題を解決するための手段】
請求項1に記載の発明は、映像信号の輝度値に対して、所定期間内の度数分布を測定する手段と、
度数分布を適当な領域に分割して領域内の積算値を正規化することによって、度数分布をパターン化して、nビットの第1のクラス分類情報を生成する第1のクラス分類手段と、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類手段と、
注目画素の周辺画素の輝度値を平均化し、平均化された輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類手段と、
nビットの第1のクラス分類情報、mビットの第2のクラス分類情報、およびpビットの第3のクラス分類情報を組合せ、組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退手段と、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリと、
qビットの第4のクラス分類情報に対応してメモリから読み出される係数データと、注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算手段と、
からなることを特徴とする画像信号処理装置である。
【0006】
また、請求項3に記載の発明は、映像信号の輝度値に対して、所定期間内の度数分布を測定するステップと、
度数分布を適当な領域に分割して領域内の積算値を正規化することによって、度数分布をパターン化して、nビットの第1のクラス分類情報を生成する第1のクラス分類ステップと、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類ステップと、
注目画素の周辺画素の輝度値を平均化し、平均化された輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類ステップと、
nビットの第1のクラス分類情報、mビットの第2のクラス分類情報、およびpビットの第3のクラス分類情報を組合せ、組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退ステップと、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリからqビットの第4のクラス分類情報に対応して読み出される係数データと、注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算ステップと、
からなることを特徴とする画像信号処理方法である。
【0007】
1フィールドまた1フレーム内の輝度値の度数の積算値に対してADRC符号化(適応的ダイナミックレンジ符号化)を行うことにより、nビットのコードが発生し、注目画素の周辺の空間内の複数の画素、すなわちブロック化された画素に対してADRC符号化を行うことにより、mビットのコードが発生し、ブロック化された画素の輝度値の平均値をシフトすることによって、p(<8)ビットのコードが発生し、縮退ROMによって、(n+m+p)ビットからqビットに減少させたクラスコードが発生し、このクラスコードに応じた係数データが読み出され、その係数データを用いた線形1次結合式によって、補正された輝度値が生成される。
【0008】
【発明の実施の形態】
以下、この発明の一実施例について図面を参照して説明する。図1において、1で示す入力端子からの画像信号の内、輝度信号YがA/D変換器2によってアナログ信号からディジタル信号に変換される。このA/D変換器2では、例えば13.5MHzのクロックでサンプリングが行われた場合、画像のサイズは、1フレームあたり、横720画素×縦480ライン程度となる。ディジタル信号に変換された輝度信号は、A/D変換器2から変換ROM3および遅延回路6へ供給される。
【0009】
変換ROM3では、供給された輝度値と領域の対応付けが行われる。具体的には、8ビット(0〜255)からなる輝度値が入力され、この輝度値をある複数の領域、例えばs個の領域に分ける働きが変換ROM3では行われる。また、この変換ROM3によって分けられた複数の領域毎に、領域別輝度分布回路4では、例えば1フィールドまたは1フレーム内の度数の積算が行われる。その積算値は、ADRC回路5へ供給される。ADRC回路5では、後述するように、領域毎に、例えばaビットの量子化が行われ、トータルnビット(n=s×a)のコードが発生する。このnビットのコードは、ADRC回路5から縮退ROM11へ供給される。
【0010】
ここで、変換ROM3、領域別輝度分布回路4およびADRC回路5の動作を図2を用いて説明する。図2Aに示すように、例えば1フィールドまたは1フレーム内の輝度値の度数分布を計数しようとする場合、本来ならば256レベル毎の度数分布を計数する。しかしながら、図2Bに示すように、輝度レベルを、例えば適当なしきい値でもってs個の領域に分割し、その領域番号と入力輝度値を対応付けるROMを挿入することで任意の領域分けを行う。この領域分けは、単純に均等分割するか、不均等分割するか、間引くかあるいは領域のオーバーラップを認めるか等、種々のバリエーションを試すことができる。
【0011】
図2Cは、ADRC回路5が1ビットのADRCを行い、このADRC回路5が6ビットのコードを出力する一例である。このコードは、いわゆる輝度の度数分布をパターン化したもので、これを見ることで輝度分布が暗い方か、明るい方かに偏っているかどうかを判定することができる。
【0012】
一方、遅延回路6において、上述の度数分布のパターンコードを生成するまでの時間(1フィールドまたは1フレーム+α)だけ、遅延が行われ、その出力は、ブロック化回路7および9、さらに遅延回路12へ供給される。ブロック化回路7では、補正しようとする注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。そのブロック化された画素は、ADRC回路8へ供給される。
【0013】
ADRC回路8では、後述するように、ブロック化された画素から最大値および最小値が選択され、各画素が再量子化されmビットのコードが発生される。このコードは、いわゆる空間の輝度の変化の様子をパターン化したものである。このコードによるクラス分類は、輝度補正そのものより、S/N比の改善、解像度の改善等に効果をもたらす。
【0014】
ブロック化回路9において、補正しようとする注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。このブロック化回路9においてなされるブロック化と、ブロック化回路7においてなされるブロック化とは、異なっても良い。ブロック化された画素は、ブロック化回路9から平均化回路10へ供給される。平均化回路10では、注目画素付近の輝度の平均値が算出され、算出された平均値は、シフトされ、p(<8)ビットに量子化される。
【0015】
このように、ブロック化された各画素の輝度の平均値が算出され、すなわち輝度レベルをクラス分類の1つとすることで、レベル方向での補正の仕方に変化を持たせることができる。例えば、明るい部分や暗い部分のみを補正したり、γ特性を考慮した補正を行うことが可能となる。また、輝度レベルの平均化による作用は、輝度補正が過敏に利くのを防止する役割も果たす。
【0016】
以上の説明で、3種類のクラス分類コードが生成されたが、これを単純に組み合わると分類数が膨大になり、後述する係数ROMの容量が膨大になる。そこでADRC回路5からのnビット、ADRC回路8からのmビットおよび平均化回路10からのpビットは、縮退ROM11へ供給され、縮退ROM11において、供給された各ビット数を縮退させる。具体的には、縮退ROM11では、クラスを縮退させるために、(n+m+p)ビットからqビットに減少させたクラスコード(インデックス)が発生される。
【0017】
なお、縮退の方法について、ここでは詳細を述べないが、(n+m+p)ビットで学習した全クラスに対応する係数組から、ベクトル量子化的手法として、係数間ノルムの小さいものをまとめて縮退させる方法などを使用するものとする。すなわち、2つの係数組の間で、対応する係数の距離(係数間ノルム)を求め、これに基づいて、係数の組をまとめる。
【0018】
このように、縮退ROM11から最終的にqビットのクラスコードが発生し、そのqビットのクラスコードは、係数ROM141 〜14N へ供給される。係数ROM141 〜14N では、供給されたクラスコードでアドレッシングされ、係数データが読み出される。読み出された係数データは、それぞれ乗算器151 〜15N へ供給される。
【0019】
遅延合わせが行われる遅延回路12の出力がブロック化回路13へ供給され、そのブロック化回路13では、注目画素の周辺の複数の画素がブロック化される。ブロック化された各画素値は、乗算器151 〜15N へ供給される。乗算器151 〜15N では、係数ROM141 〜14N からの係数データと、ブロック化された各画素値が乗算され、その乗算出力は、加算器16へ供給される。加算器16では、乗算器151 〜15N からの乗算出力が加算される。
【0020】
すなわち、乗算器151 〜15N および加算器16によって、積和演算することで、輝度補正値の予測が行われる。その予測値は、D/A変換回路17において、D/A変換され、補正後の輝度値Y´として出力端子18から取り出される。
【0021】
ここで、ADRC回路5またはADRC回路8として使用される構成の一例を図3に示し説明する。入力端子21からブロック化されたデータが供給される。供給されたデータは、最大値検出回路22、最小値検出回路23および遅延回路25へ供給される。最大値検出回路22において、ブロック内の画素値の最大となる値が検出され、最小値検出回路23において、ブロック内の画素値の最小となる値が検出される。減算器24では、最大値から最小値が減算され、そのブロックのダイナミックレンジDRが算出される。算出されたダイナミックレンジDRは、適応再量子化回路27へ供給される。
【0022】
遅延回路25では、最大値検出回路22および最小値検出回路23がそれぞれ検出にかかる時間遅延が行われ、1画素ずつ出力される。減算器26では、ブロック化された各画素から最小値が減算され、その減算値は、適応再量子化回路27へ供給される。適応再量子化回路27では、ダイナミックレンジDRに応じた所定の量子化ステップ幅を用いて、減算値の量子化を画素毎に行う。並列化回路28では、量子化された画素がブロック単位で並列化され、出力端子29からコード化データとして出力される。
【0023】
ここで、係数ROMに記憶される係数データを生成する学習のためのブロック図を図4に示す。入力端子1から供給された輝度信号Yは、A/D変換回路2へ供給され、A/D変換回路2では、例えば13.5MHzでサンプリングされ、変換ROM3および遅延回路6へ出力される。変換ROM3では、上述したように供給された輝度値がある複数の領域、例えばs個の領域に分けられる。そして、領域別輝度分布回路4では、分けられたs個の領域毎に、例えば1フィールドまたは1フレーム内の度数の乗算が行われる。ADRC回路5では、例えばaビットの量子化が行われ、トータルnビット(n=s×a)のコードが発生する。このnビットのコードは、ADRC回路5から縮退ROM11へ供給される。
【0024】
遅延回路6では、nビットのコードが生成されるまでの時間(1フィールドまたは1フレーム+α)だけ、遅延が行われ、その出力は、ブロック化回路7および9、さらに遅延回路12へ供給される。ブロック化回路7では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。そのブロック化された画素は、ADRC回路8へ供給される。ADRC回路8では、ブロック化された画素からmビットのコードが発生され、縮退ROM11へ供給される。
【0025】
ブロック化回路9では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。上述したように、ブロック化回路7とのブロック化とは異なっても良い。平均化回路10では、注目画素付近の輝度の平均値が算出され、算出された平均値は、シフトされ、p(<8)ビットに量子化され、縮退ROM11へ供給される。
【0026】
縮退ROM11では、上述するように、クラスを縮退させるために、(n+m+p)ビットからqビットに減少させたクラスコード(インデックス)が発生される。このように、縮退ROM11から最終的にqビットのクラスコードが発生し、そのqビットのクラスコードは、学習回路33へへ供給される。
【0027】
遅延によるタイミング合わせが行われる遅延回路12の出力がブロック化回路13へ供給され、そのブロック化回路13では、注目画素の周辺の複数の画素がブロック化される。ブロック化された各画素値が学習回路33へ供給される。
【0028】
そして、入力端子31から教師用の映像信号の対応する画素の輝度信号Yが入力される。この教師用の輝度信号Yには、プロのカメラマンが撮影した映像信号、または照明条件の良い映像信号が使用され、また動画のみとは限らず静止画を使用しても良い。その教師用の輝度信号Yは、A/D変換回路32において、アナログ信号からディジタル信号へ変換され、学習回路33に入力される。学習回路33では、nタップの線形一時結合モデルを形成し、その各係数データを学習回路33で算出する。算出された各係数データは、出力端子34から取り出され、係数ROMへ格納される。また、学習回路33は、以下に述べる最小自乗法にてクラス毎に係数データを学習するものである。
【0029】
学習の方法として、多数の補正対象入力画素と教師用の画像の値との関係を求める方法として、最小自乗法を採用した。まず、上述した値の間に線形1次結合の関係があると仮定し、以下に線形一次結合モデルを示す。
【0030】
線形一次結合モデル:(観測方程式)
XW=Y (1)
【数1】
【0031】
最小自乗法による解放:(残差方程式)
【数2】
【0032】
式(3)から、各wi 最確値を見いだすには、
【数3】
を最小にする条件、すなわち
【0033】
【数4】
なる、N個の条件を入れてこれを満足するw1 、w2 、・・・、wN を見いだせばよい。式(3)より、
【0034】
【数5】
となり、式(4)条件をi=1,2,・・・,Nについて立てればそれぞれ、
【0035】
【数6】
が得られる。ここで、式(3)および式(6)から次式の正規方程式が得られる。
【0036】
【数7】
これは、ちょうど未知数の数N個だけある連立方程式であるから、これより最確値たる各wi を求めることができる。
【0037】
正確には、式(7)でwi にかかる
【数8】
のマトリクスが正則であれば解くことができる。(ただし、k=1,2,・・・,N、l=1,2,・・・,N)実際には、Gauss-Jordanの消去法(掃き出し法)を用いて連立方程式を解くことになる。
【0038】
次に、最小自乗法の演算を行うハードウェアのブロック図を図5に示す。図4の学習のブロック図において、補正対象の画素を中心としてブロックの画素値と対応する教師用の画素値が入力されると共に、クラスコード(インデックス)が入力される。最小自乗法の回路は、大きく分けて正規方程式生成回路41とCPU42からなり、その正規方程式生成回路41は、乗算器アレイ43、加算メモリ44およびデコード部45からなる。
【0039】
CPU42は、係数データを求めるため、例えば掃き出し法の演算を行うCPUからなる。乗算器アレイ43には、注目画素位置に対して1組のメモリ(またはレジスタ)が存在し、加算メモリ44には、クラスの数だけ組のメモリ(またはレジスタ)が存在する。また、デコード部45では、供給されるクラスコード(インデックス)がデコードされる。
【0040】
乗算器アレイ43について、図6を用いて説明する。補正対象の画素を中心としてブロックの画素値と対応する教師用の画素値δyは、正規方程式回路41の乗算器アレイ43において、図6に示すように各要素どうしの乗算が行われ、その結果が加算メモリ44へ供給される。
【0041】
そして、加算メモリ44について、図7を用いて説明する。加算メモリ44は、加算器アレイ51およびメモリ(またはレジスタ)アレイ521 〜52N から構成される。乗算器アレイ43からの結果とメモリ(またはレジスタ)アレイ52からの出力が供給され、その加算結果がメモリ(またはレジスタ)アレイ52に出力される。どのメモリ(またはレジスタ)アレイ521 〜52N が選択されるかは、クラスコード(インデックス)がデコード部45でデコードされることで一意に決定される。つまり、インデックスによって決定されるクラス毎にメモリ(またはレジスタ)アレイ52が選択されて、積和演算の結果がインデックスによって決定されたメモリ(またはレジスタ)アレイ52に更新され、記憶される。
【0042】
なお、各々のアレイの位置は、正規方程式(7)のwi にかかる
【数9】
の位置に対応する。正規方程式(7)を見てわかるように右上の項を反転すれば左下と同じものになるため、各アレイは三角形の形状をしている。
【0043】
以上のようにして、ある一定期間の間にクラス毎に積和演算が行われて画素位置毎のさらにクラス毎の正規方程式が生成される。クラス毎の正規方程式の各項の結果は、それぞれのクラスに対応するメモリ(またはレジスタ)アレイに記憶されており、次にそれらのクラス毎の正規方程式の各項が掃き出し法の計算回路に供給される。この計算はCPU42によって行われる。計算された係数データの組は、図1に示す係数ROM14で構成される係数テーブルに書き込まれて使用される。
【0044】
ここで、この発明の他の実施例を図8のブロック図を用いて説明する。入力端子1から供給された輝度信号Yは、A/D変換回路2へ供給され、A/D変換回路2では、例えば13.5MHzでサンプリングされ、平均値/標準偏差回路55および遅延回路6へ出力される。平均値/標準偏差回路55では、供給された輝度値の例えば1フィールドまたは1フレーム当りの平均値および標準偏差が求められる。平均値/標準偏差回路55において、輝度値毎の度数分布を求めるためのテーブルを持ち、1フィールド期間または1フレーム期間に乗算した度数分布から、図9に示すように輝度の平均値が算出されると共に、標準偏差も算出される。また、式(8)には、輝度の平均値を算出する計算式を示し、式(9)には、標準偏差を算出する計算式を示す。
【0045】
平均値=Σ(輝度値×度数)/全度数 (8)
標準偏差=√(Σ((輝度値−平均値)2×度数)/全度数) (9)
【0046】
量子化回路56では、算出された平均値および標準偏差がそれぞれaビット、bビットで量子化されて、トータルnビット(n=a+b)のコードが発生される。このnビットのコードが量子化回路56から縮退ROM11へ供給される。さらに、このnビットのコードは、いわゆる輝度分布をパターン化したもので、これを見ることで輝度分布が暗い方か、明るい方かに偏っているかどうか、また、輝度分布が平坦か急峻かを判定することができる。
【0047】
遅延回路6では、nビットのコードが生成されるまでの時間(1フィールドまたは1フレーム+α)だけ、遅延が行われ、その出力は、ブロック化回路7および9、さらに遅延回路12へ供給される。ブロック化回路7では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。そのブロック化された画素は、ADRC回路8へ供給される。ADRC回路8では、ブロック化された画素からmビットのコードが発生され、縮退ROM11へ供給される。
【0048】
ブロック化回路9では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。上述したように、ブロック化回路7とのブロック化とは異なっても良い。平均化回路10では、注目画素付近の輝度の平均値が算出され、算出された平均値は、シフトされ、p(<8)ビットに量子化され、縮退ROM11へ供給される。
【0049】
縮退ROM11では、上述したように、クラスを縮退させるために、(n+m+p)ビットからqビットに減少させたクラスコード(インデックス)が発生される。このように、縮退ROM11から最終的にqビットのクラスコードが発生し、そのqビットのクラスコードは、係数ROM141 〜14N へ供給される。係数ROM141 〜14N では、供給されたクラスコードでアドレッシングされ、係数データが読み出される。読み出された係数データは、それぞれ乗算器151 〜15N へ供給される。
【0050】
遅延によるタイミング合わせが行われる遅延回路12の出力がブロック化回路13へ供給され、そのブロック化回路13では、注目画素の周辺の複数の画素がブロック化される。ブロック化された各画素値は、乗算器151 〜15N へ供給される。乗算器151 〜15N では、係数ROM141 〜14N からの係数データと、ブロック化された各画素値が乗算され、その乗算値は、加算器16へ供給される。加算器16では、乗算器151 〜15N からの乗算値が加算される。
【0051】
すなわち、乗算器151 〜15N および加算器16において、積和演算することで、輝度補正値の予測が行われる。その予測値は、D/A変換回路17において、D/A変換され、補正後の輝度値Y´として出力端子18から取り出される。
【0052】
ここで、量子化回路の一例を図10に示し説明する。入力端子61から輝度値が供給される。供給された輝度値は、輝度度数分布テーブル62へ供給され、輝度度数分布テーブル62において、例えば1フィールドまたは1フレーム内の輝度レベルの度数分布のテーブルが生成される。生成されたテーブルに基づいて、平均値算出回路63では、平均値が式(8)により算出され、算出された平均値は、標準偏差算出回路64へ供給されると共に、出力端子65から取り出される。標準偏差算出回路64では、度数分布のテーブルと平均値から標準偏差が式(9)により算出され、算出された標準偏差は、出力端子66から取り出される。取り出された標準偏差が小さいときは、度数分布の幅は狭く、標準偏差が大きいときは、度数分布の幅は広くなる。
【0053】
ここで、係数ROMに記憶される係数データを生成する学習のためのブロック図を図11に示す。入力端子1から供給された輝度信号Yは、A/D変換回路2へ供給され、A/D変換回路2では、例えば13.5MHzでサンプリングされ、平均値/標準偏差算出回路55および遅延回路6へ出力される。平均値/標準偏差算出回路55では、上述したように供給された輝度値の例えば1フィールドまたは1フレーム当りの平均値および標準偏差が求められる。平均値/標準偏差算出回路55において、輝度レベル毎の度数分布を求めるためのテーブルを持ち、1フィールド期間または1フレーム期間に乗算した度数分布から、図9に示すように輝度の平均値が算出されると共に、標準偏差も算出される。また、式(8)には、輝度の平均値を算出する計算式を示し、式(9)には、標準偏差を算出する計算式を示す。
【0054】
量子化回路56では、算出された平均値および標準偏差に対してそれぞれaビット、bビットで量子化されて、トータルnビット(n=a+b)のコードを発生する。このnビットのコードは、量子化回路56から縮退ROM11へ供給される。さらに、このnビットのコードは、いわゆる輝度分布をパターン化したもので、これを見ることで輝度分布が暗い方か、明るい方かに偏っているかどうか、また、平坦か急峻かを判定することができる。
【0055】
遅延回路6では、nビットのコードが生成されるまでの時間(1フィールドまたは1フレーム+α)だけ、遅延が行われ、その出力は、ブロック化回路7および9、さらに遅延回路12へ供給される。ブロック化回路7では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。そのブロック化された画素は、ADRC回路8へ供給される。ADRC回路8では、ブロック化された画素からmビットのコードが発生され、縮退ROM11へ供給される。
【0056】
ブロック化回路9では、注目画素の周辺の空間内の複数の画素が選択され、ブロック化される。上述したように、ブロック化回路7とのブロック化とは異なっても良い。平均化回路10では、注目画素付近の輝度の平均値が算出され、算出された平均値は、シフトされ、p(<8)ビットに量子化され、縮退ROM11へ供給される。
【0057】
縮退ROM11では、上述するように、クラスを縮退させるために、(n+m+p)ビットからqビットに減少させたクラスコード(インデックス)が発生される。このように、縮退ROM11から最終的にqビットのクラスコードが発生し、そのqビットのクラスコードは、学習回路33へ供給される。
【0058】
遅延合わせが行われる遅延回路12の出力がブロック化回路13へ供給され、そのブロック化回路13では、注目画素の周辺の複数の画素がブロック化される。ブロック化された各画素値は、学習回路33へ供給される。
【0059】
そして、入力端子31から教師用の映像信号の対応する画素の輝度信号Yが入力される。その教師用の輝度信号Yは、A/D変換回路32において、アナログ信号からディジタル信号へ変換され、学習回路33に入力される。学習回路33では、nタップの線形一時結合モデルを形成し、その各係数データを学習回路33で算出する。算出された各係数データは、出力端子34から取り出され、係数ROMへ格納される。また、学習回路33は、上述した最小自乗法にてクラス毎に係数データを学習するものである。
【0060】
この実施例では、すべてハードウェアで実現する方法を記載したが、ディジタル化されたデータを計算機に取り込むことでソフトウェアで計算しても良い。
【0061】
【発明の効果】
この発明に依れば、輝度分布のパターン分類から全体の輝度補正を行う効果と、空間内のパターン分類および輝度値の平均値から部分的な輝度補正を行う効果を待ち合わせており、よりきめの細かい輝度補正を行うことが可能となる。
【図面の簡単な説明】
【図1】この発明の画像信号処理装置の一実施例を示すブロック図である。
【図2】この発明に係る度数分布の説明に用いる一例の度数分布図である。
【図3】この発明に係るADRC回路の一例のブロック図である。
【図4】この発明に係る係数データの学習するための一例のブロック図である。
【図5】この発明に係る学習回路の一例のブロック図である。
【図6】この発明に係る乗算器アレイの説明に用いる一例の略線図である。
【図7】この発明に係る加算メモリの説明に用いる一例の略線図である。
【図8】この発明の画像信号処理装置の他の実施例を示すブロック図である。
【図9】この発明に係る度数分布の説明に用いる他の一例の度数分布図である。
【図10】この発明に係る量子化回路の一例のブロック図である。
【図11】この発明に係る係数データの学習するための一例のブロック図である。
【符号の説明】
2、17 A/D変換回路
3 変換ROM
4 領域別輝度分布回路
5、8 ADRC回路
6、12 遅延回路
7、9、13 ブロック化回路
10 平均化回路
11 縮退ROM
14 係数ROM
15 乗算器
16 加算器
Claims (4)
- 映像信号の輝度値に対して、所定期間内の度数分布を測定する手段と、
上記度数分布を適当な領域に分割して上記領域内の積算値を正規化することによって、上記度数分布をパターン化して、nビットの第1のクラス分類情報を生成する第1のクラス分類手段と、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、上記注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類手段と、
上記注目画素の周辺画素の輝度値を平均化し、平均化された上記輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類手段と、
上記nビットの第1のクラス分類情報、上記mビットの第2のクラス分類情報、および上記pビットの第3のクラス分類情報を組合せ、上記組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退手段と、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリと、
上記qビットの第4のクラス分類情報に対応して上記メモリから読み出される上記係数データと、上記注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算手段と、
からなることを特徴とする画像信号処理装置。 - 映像信号の輝度値に対して、所定期間内の度数分布を測定する手段と、
上記度数分布の平均値および標準偏差が算出され、上記平均値および標準偏差を量子化することによって、量子化された上記平均値および標準偏差をまとめて、nビットの第1のクラス分類情報を生成する第1のクラス分類手段と、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、上記注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類手段と、
上記注目画素の周辺画素の輝度値を平均化し、平均化された上記輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類手段と、
上記nビットの第1のクラス分類情報、上記mビットの第2のクラス分類情報、および上記pビットの第3のクラス分類情報を組合せ、上記組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退手段と、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリと、
上記qビットの第4のクラス分類情報に対応して上記メモリから読み出される上記係数データと、上記注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算手段と、
からなることを特徴とする画像信号処理装置。 - 映像信号の輝度値に対して、所定期間内の度数分布を測定するステップと、
上記度数分布を適当な領域に分割して上記領域内の積算値を正規化することによって、上記度数分布をパターン化して、nビットの第1のクラス分類情報を生成する第1のクラス分類ステップと、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、上記注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類ステップと、
上記注目画素の周辺画素の輝度値を平均化し、平均化された上記輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類ステップと、
上記nビットの第1のクラス分類情報、上記mビットの第2のクラス分類情報、および上記pビットの第3のクラス分類情報を組合せ、上記組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退ステップと、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリから上記qビットの第4のクラス分類情報に対応して読み出される上記係数データと、上記注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算ステップと、
からなることを特徴とする画像信号処理方法。 - 映像信号の輝度値に対して、所定期間内の度数分布を測定するステップと、
上記度数分布の平均値および標準偏差が算出され、上記平均値および標準偏差を量子化することによって、量子化された上記平均値および標準偏差をまとめて、nビットの第1のクラス分類情報を生成する第1のクラス分類ステップと、
注目画素の周辺画素を含む複数個の画素をブロック化し、ブロック毎に空間のパターン分類を行い、上記注目画素に関してmビットの第2のクラス分類情報を生成する第2のクラス分類ステップと、
上記注目画素の周辺画素の輝度値を平均化し、平均化された上記輝度値をpビットの第3のクラス分類情報を生成する第3のクラス分類ステップと、
上記nビットの第1のクラス分類情報、上記mビットの第2のクラス分類情報、および上記pビットの第3のクラス分類情報を組合せ、上記組み合わせた(n+m+p)ビットのクラス分類情報を縮退し、q(<(n+m+p))ビットの第4のクラス分類情報を生成する縮退ステップと、
予めクラス毎に最小自乗法による学習処理で求められた係数データが格納された係数メモリから上記qビットの第4のクラス分類情報に対応して読み出される上記係数データと、上記注目画素の周辺画素の輝度値とを積和演算し、補正輝度値を生成する積和演算ステップと、
からなることを特徴とする画像信号処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP32835895A JP3791029B2 (ja) | 1995-11-22 | 1995-11-22 | 画像信号処理装置および方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP32835895A JP3791029B2 (ja) | 1995-11-22 | 1995-11-22 | 画像信号処理装置および方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH09147101A JPH09147101A (ja) | 1997-06-06 |
JP3791029B2 true JP3791029B2 (ja) | 2006-06-28 |
Family
ID=18209361
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP32835895A Expired - Lifetime JP3791029B2 (ja) | 1995-11-22 | 1995-11-22 | 画像信号処理装置および方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3791029B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4595162B2 (ja) * | 2000-05-24 | 2010-12-08 | ソニー株式会社 | 画像信号処理装置及び画像信号処理方法 |
JP4622043B2 (ja) | 2000-05-26 | 2011-02-02 | ソニー株式会社 | 情報処理装置および方法 |
WO2002062055A1 (fr) * | 2001-01-31 | 2002-08-08 | Sanyo Electric Co., Ltd. | Circuit de traitement d'image |
JP2003255901A (ja) | 2001-12-28 | 2003-09-10 | Sanyo Electric Co Ltd | 有機elディスプレイの輝度制御方法および輝度制御回路 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0529635B1 (en) * | 1991-08-30 | 1998-11-04 | Matsushita Electric Industrial Co., Ltd. | An image processing apparatus |
US5164993A (en) * | 1991-11-25 | 1992-11-17 | Eastman Kodak Company | Method and apparatus for automatic tonescale generation in digital radiographic images |
JP3632993B2 (ja) * | 1993-08-30 | 2005-03-30 | ソニー株式会社 | 電子ズーム装置及び電子ズーム方法 |
JP3533697B2 (ja) * | 1994-03-28 | 2004-05-31 | ソニー株式会社 | 適応フィルタ装置及び適応フィルタ処理方法 |
-
1995
- 1995-11-22 JP JP32835895A patent/JP3791029B2/ja not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JPH09147101A (ja) | 1997-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7643180B2 (en) | Image processing and display apparatus and method for tone resolution expansion of digital images | |
EP0778696B1 (en) | Method and apparatus for providing halftoning processing of color images by means of a neural network | |
EP0781034B1 (en) | Image processing apparatus and method | |
US20050285974A1 (en) | Apparatus and method of smoothing video signal using pattern adaptive filtering | |
JP3791029B2 (ja) | 画像信号処理装置および方法 | |
JP3031994B2 (ja) | 画像処理装置 | |
JP3758228B2 (ja) | クラス分類適応処理における学習方法および学習装置 | |
JPH1011583A (ja) | クラス分類適応処理装置、クラス分類適応処理用の学習装置および学習方法 | |
US5488672A (en) | Color image processing apparatus | |
US5719793A (en) | Recursive noise reduction device having improved adaptability with respect to input image data | |
JP3743077B2 (ja) | 画像信号変換装置および方法 | |
JP4062329B2 (ja) | 信号処理装置および方法 | |
JPH0698157A (ja) | 中間調画像形成装置 | |
JP4353294B2 (ja) | 情報信号変換装置および方法 | |
JP3225099B2 (ja) | 画像処理装置 | |
JP4482502B2 (ja) | 情報信号変換装置および方法 | |
JP2506205B2 (ja) | 黒レベル補正装置 | |
JP2860039B2 (ja) | 擬似中間調画像縮小装置 | |
JP2005051337A (ja) | 画像処理方法、画像処理装置およびプログラム | |
JP2946217B2 (ja) | 画像処理装置 | |
JP3222585B2 (ja) | 中間調二値データ発生回路 | |
JPS59163960A (ja) | 画像処理方法 | |
JPS6148275A (ja) | 画像信号処理装置 | |
JPH04230171A (ja) | 画像処理装置 | |
JP4352328B2 (ja) | 情報処理装置および情報処理方法、並びに、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060327 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090414 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100414 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100414 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110414 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120414 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130414 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130414 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140414 Year of fee payment: 8 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |