JP4814826B2 - 画像処理装置及び画像処理方法 - Google Patents

画像処理装置及び画像処理方法 Download PDF

Info

Publication number
JP4814826B2
JP4814826B2 JP2007093856A JP2007093856A JP4814826B2 JP 4814826 B2 JP4814826 B2 JP 4814826B2 JP 2007093856 A JP2007093856 A JP 2007093856A JP 2007093856 A JP2007093856 A JP 2007093856A JP 4814826 B2 JP4814826 B2 JP 4814826B2
Authority
JP
Japan
Prior art keywords
group
value
data
compressed data
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007093856A
Other languages
English (en)
Other versions
JP2008252726A (ja
Inventor
坂本  隆
稔 長谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IIX Inc
Original Assignee
IIX Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by IIX Inc filed Critical IIX Inc
Priority to JP2007093856A priority Critical patent/JP4814826B2/ja
Publication of JP2008252726A publication Critical patent/JP2008252726A/ja
Application granted granted Critical
Publication of JP4814826B2 publication Critical patent/JP4814826B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、一時的に記憶させた画像データを用いて画像処理を実行する画像処理装置及び画像処理方法に関する。
画像処理装置では、前のフレームの画像データ(フレーム遅延画像データ)と現在の画像データ(カレント画像データ)とを用いて処理を行なうことがある。この演算処理としては、具体的には、ノイズ低減処理、IP変換処理及びオーバードライブ処理等がある。このような画像処理装置の構成の一例を図8に示す。図8に示すように、従来の画像処理装置は、メモリコントローラ51と、データ記憶部とを備えている。メモリコントローラ51は、データ記憶部に対してデータの書込や読出を実行する。また、データ記憶部としては、例えば、公知のDDR(Double Data Rate)のDRAM(Dynamic Random Access Memory)52を用いる。更に、メモリコントローラ51は、ノイズリダクション処理ブロック55、IP変換処理ブロック56及びオーバードライブ処理ブロック57に接続されている。そして、メモリコントローラ51は、DRAM52に記録された1フレーム前の画像データを抽出し、この画像データを、ノイズリダクション処理ブロック55、IP変換処理ブロック56又はオーバードライブ処理ブロック57に供給する。
ノイズリダクション処理ブロック55は、映像信号に含まれるノイズ成分を軽減するためのノイズリダクション処理を実行する。具体的には、静止部分に対しては、カレント画像データとフレーム遅延画像データの平均から各映像信号のデータを特定する。動きがある部分に対しては、画像の垂直方向のデータを用いて各映像信号のデータを特定する。
IP変換処理ブロック56は、インタレース・プログレッシブ変換(IP変換)処理を実行する。この処理は、カレント画像データとフレーム遅延画像データとの差分から動き検出を行ない、動きのある画素については上下のラインの映像からデータ信号を補間し、動きのない画素については1フレーム前の画像データをそのまま用いて表示を行なう。これにより、従来ではジャギーとして認識されていた斜め線を、より滑らかにして、画像の品質を向上させることができる。
オーバードライブ処理ブロック57は、液晶分子の状態を変化させるときに、過電圧のような極端に高い電圧をかけることによって、中間階調の応答速度を向上させるオーバードライブ処理を実行する。具体的には、フレーム遅延画像データに基づいて、次のフレームデータを比較し、液晶素子を駆動する電圧の振幅を補正する。これにより、応答速度を改善し残像感の少ない動画を表示することができる。
このように、前のフレームを用いて画像処理を実行する場合、前のフレームの画像データをデータ記憶部に保存しておく必要がある。従って、高画質の画像を表示するために、過去に表示したフレームを用いて行なう処理の種類が増えると、必要となるメモリの総量が増え、またデータの転送に必要なバンド幅も増大する。
そこで、フレーム相関を利用した映像信号処理回路において、画像処理に用いるフレームのデータ容量を小さくするために画像データを圧縮して記録する技術が検討されている(例えば、特許文献1参照。)。この特許文献1に記載の技術では、静止画像用分離部のフレーム相関検出のためメモリの入力段にデータのビット圧縮を行なう圧縮部を設け、出力段に圧縮前の状態に戻す復元部を設ける。圧縮処理が失敗した場合には、エラー検出部がエラー報告を受けて、動き検出部へ動画像であることを通知する。動き検出部は、動画
像用色分離部の出力を導出するよう混合器に指示する。これにより、圧縮処理の失敗により出力が完全に復元できない場合には、ライン相関処理に切り替えることで、圧縮の失敗の影響を少なくしている。
特開平6−327024号公報(第1頁)
ところで、圧縮データを生成する1つの方法として、ハフマン符号化法がある。このハフマン符号化法では、発生頻度の高いデータに対して短い符号を割り振って、発生頻度の低いデータに対して長い符号を割り振る。これにより、発生頻度が高いコードを少ないビット数で表わせるために、全体としてデータ総数(ファイルサイズ)を減らして、データを圧縮することができる。
このハフマン符号法では、通常、そのコードの発生頻度(x=0〜1)に対してn=−log2(x)というビット長(n)の符号を割り当てる。例えば、発生頻度が50%(x=0.5)のコードには、1ビットの符号を割り当てて、発生頻度が0.1%(x=1/1024)のコードには10ビットの符号を割り当てる。ただし、算出されたビット長には2.2や0.33等の小数部が存在するため、整数符号長しか使用できない現実では、そのままの符号長を割り当てられない。そこで、整数符号長のみを使用する制約の下において、最もトータルファイルサイズが小さくなる割り当て方法もある。
更に、このハフマン符号化法と合わせて、画像を表示する画素(ピクセル)の値を、隣のピクセルの値から減算する差分データを用いることもある。
ところが、10ビットの量子化数のコンポーネント映像信号を入力に用いた場合には、2回の差分計算を行なうと−2048〜2048まで4096個の差分データが存在することになる。このため、各差分データの統計を利用して、ハフマン符号化を行なうには、ハードが複雑になりすぎて不可能であった。また、リアルタイムにWXGA(Wide XGA)の画像を圧縮するには符号の種類が多すぎる。
本発明は、上述の問題に鑑みてなされ、画質の劣化の影響を小さくして、画像データを一定容量以下に圧縮してデータ転送や記録を行なうことができる画像処理装置及び画像処理方法を提供することにある。
上記問題点を解決するために、請求項1に記載の発明は、グループに属する差分値の範囲と、各グループに付与されるハフマン符号と、各グループ内でグループに属する差分値を表わすための複数のビット数からなるオフセットとをグループ毎に記録するグループ判別テーブルを保持した制御手段と、前のフレームの画像データであるフレーム遅延画像データの圧縮データを記録するメモリとを用いて、前記フレーム遅延画像データと、現在の画像データであるカレント画像データとを用いてフレーム相関を利用した各種画像処理を実行する画像処理装置であって、前記制御手段が、カレント画像データを受信し、前記カレント画像データを構成する画素間の差分値を算出する差分値算出手段と、算出した差分
値を、前記グループ判別テーブルを用いて各グループに分類した後、グループの頻度を算出する頻度算出手段と、算出した頻度に応じて各グループに対してハフマン符号を割り当てるハフマン符号化手段と、各グループに割り当てられたハフマン符号を表わすためのビット数、各グループにおけるオフセットを表わすためのビット数、正負符号を表示するためのビット数から、総圧縮データ量を算出する総圧縮データ量算出手段と、前記総圧縮データ量が予め定められた基準値を超える場合には、前記算出した頻度が「1」以上のグループについて、オフセット値が大きいグループから、前記総圧縮データ量が前記基準値以下になるまで、順次、オフセット値を1ビットずつ削減する量子化処理を行なうオフセット割当ルールを用いることにより、前記グループ判別テーブルにおけるオフセットのビット数を削減した修正テーブルを生成するとともに前記修正テーブルをヘッダ情報として付加し、この修正テーブルを用いてカレント画像データから圧縮データを生成するコード生成手段と、メモリに前記圧縮データを書き込む記録手段と、前記メモリから圧縮データを読み出して、前記ヘッダ情報から修正テーブルを用いてフレーム遅延画像データを生成する展開手段と、前記フレーム遅延画像データと、新たに受信したカレント画像データとのフレーム相関を利用した画像処理を実行する手段とを備えたことを要旨とする。
請求項2に記載の発明は、請求項1に記載の画像処理装置において、前記コード生成手段は、前記修正テーブルによって削減されたビット数で表わされたオフセットを用いて再現された画像データにより差分値を算出し、前記差分値について前記修正テーブルを用いて圧縮データを生成することを要旨とする。
請求項3に記載の発明は、請求項1又は2に記載の画像処理装置において、前記差分値算出手段は、対象画素に隣接し、この対象画素よりも先に圧縮データに変換される周辺画素における第1差分値と、前記対象画素と周辺画素とにおける第2差分値とから算出される差分値を用いて圧縮データを生成することを要旨とする。
請求項4に記載の発明は、請求項1〜3のいずれか1項に記載の画像処理装置において、前記カレント画像データは、輝度信号のデータと、青系色差信号のデータと、赤系色差信号のデータとから構成され、前記量子化処理においては、更に、青系色差信号、赤系色差信号、輝度信号の順番で、オフセットのビット数の削減量多くするオフセット割当ルールを用いて実行することを要旨とする。
請求項5に記載の発明は、請求項1〜4のいずれか1項に記載の画像処理装置において、前記頻度算出手段、前記ハフマン符号化手段、前記総圧縮データ量算出手段及び前記コード生成手段は、画像を構成する1ライン毎に行なうことを要旨とする。
請求項6に記載の発明は、グループに属する差分値の範囲と、各グループに付与されるハフマン符号と、各グループ内でグループに属する差分値を表わすための複数のビット数からなるオフセットとをグループ毎に記録するグループ判別テーブルを保持した制御手段と、前のフレームの画像データであるフレーム遅延画像データの圧縮データを記録するメモリとを用いて、前記フレーム遅延画像データと、現在の画像データであるカレント画像データとを用いてフレーム相関を利用した各種画像処理を実行する画像処理方法であって、前記制御手段が、カレント画像データを受信し、前記カレント画像データを構成する画素間の差分値を算出する差分値算出段階と、算出した差分値を、前記グループ判別テーブルを用いて各グループに分類した後、グループの頻度を算出する頻度算出段階と、算出し
た頻度に応じて各グループに対してハフマン符号を割り当てるハフマン符号化段階と、各グループに割り当てられたハフマン符号を表わすためのビット数、各グループにおけるオフセットを表わすためのビット数、正負符号を表示するためのビット数から、総圧縮データ量を算出する総圧縮データ量算出段階と、前記総圧縮データ量が予め定められた基準値を超える場合には、前記算出した頻度が「1」以上のグループについて、オフセット値が大きいグループから、前記総圧縮データ量が前記基準値以下になるまで、順次、オフセット値を1ビットずつ削減する量子化処理を行なうオフセット割当ルールを用いることにより、前記グループ判別テーブルにおけるオフセットのビット数を削減した修正テーブルを生成するとともに前記修正テーブルをヘッダ情報として付加し、この修正テーブルを用いてカレント画像データから圧縮データを生成するコード生成段階と、メモリに前記圧縮データを書き込む記録段階と、前記メモリから圧縮データを読み出して、前記ヘッダ情報から修正テーブルを用いてフレーム遅延画像データを生成する展開段階と、前記フレーム遅延画像データと、新たに受信したカレント画像データとのフレーム相関を利用した画像処理を実行する段階とを実行することを要旨とする。
(作用)
請求項1又は6に記載の発明によれば、制御手段は、画像データを構成する画素間の差分値を算出し、この算出した差分値をグループに分類し、グループの頻度を算出する。制御手段は、算出した頻度に応じて各グループに対してハフマン符号を割り当てる。このため、偏った分布になる差分値に変換した上で、高い頻度のグループに対して短い符号が付与されるので、より多くのデータが集中するグループに対して短いハフマン符号を付与することができる。従って、画像データをより圧縮することができる。
制御手段は、このグループの頻度に応じて割り当てたハフマン符号を表わすためのビット数、各グループにおけるオフセットを表わすためのビット数、正負符号を表示するためのビット数から総圧縮データ量を算出する。制御手段は、総圧縮データ量が予め定められた基準値を超える場合には、オフセット割当ルールを用いて、総圧縮データ量が基準値以下になるように、グループ判別テーブルのオフセットのビット数を削減した修正テーブルを生成する。修正テーブルを生成した場合には、この修正テーブルを用いて画像データから圧縮データを生成して、メモリに記録する。制御手段は、メモリから圧縮データを読み出して、修正テーブルを用いてフレーム遅延画像データを生成する。このため、総圧縮データ量が予め定められた基準値を超える場合には、オフセット割当ルールに従って、劣化の影響が小さいようにオフセットのビット数を削減した修正テーブルを用いて画像データの圧縮及び展開を行なうことにより、基準値以下の圧縮データにすることができる。従って、画質の劣化の影響を小さく、画像データを一定容量以下に圧縮してデータ転送や記録を行なうことができる。
請求項2に記載の発明によれば、コード生成手段は、修正テーブルによって削減されたビット数で表わされたオフセットを用いて再現された画像データから差分値を算出し、この差分値について修正テーブルを用いて圧縮データを生成する。ビット数を削減した修正テーブルを用いて圧縮データに変換すると、元の画像データに対して誤差を含むデータになる場合がある。この場合、元の画像データを用いて差分値を算出すると、データの展開時に誤差が累積して、展開したときの画素の値が圧縮前の値と大きく異なることがある。そこで、圧縮に用いる修正テーブルによって削減されたビット数で表わされたオフセットを用いて再現された画像データから差分値を算出することにより、差分値の算出に用いる他の画素が含む誤差の影響をなくすことができる。従って、展開したときに誤差が累積しないので、誤差の累積による画像の劣化を回避することができる。
請求項3に記載の発明によれば、差分値算出手段は、対象画素に隣接し、この対象画素よりも先に圧縮データに変換される周辺画素における第1差分値と、対象画素と周辺画素
とにおける第2差分値とから算出される差分値を用いて圧縮データを生成する。第1差分値と第2差分値とから差分値を算出することにより、データの分布をいっそう偏らせることができる。従って、ハフマン符号を用いて、より少ないビットでデータ全体を表わすことができるので、圧縮による画質の劣化をより小さくすることができる。
請求項4に記載の発明によれば、オフセット割当ルールは、青系色差信号、赤系色差信号、輝度信号の順番で、オフセットのビット数の削減量が多くなるように設定されている。人間の目は、輝度信号の変化よりも色差信号の変化に対して鈍感であり、特に青系の色差信号の変化に鈍感である。このため、青系色差信号、赤系色差信号、輝度信号の順番で、すなわち、人間の目が鈍感な信号に対して、ビット数の削減量が多くなるようにオフセットを調整することにより、画質の劣化をより目立たなくすることができる。
請求項5に記載の発明によれば、頻度算出手段、ハフマン符号化手段、総圧縮データ量算出手段、修正テーブル生成手段及び圧縮データ生成手段は、画像を構成する1ライン毎に行なう。データの分布は、ライン毎によって異なることがある。また、青系色差信号、赤系色差信号、輝度信号のそれぞれのデータ量も、入力画像によってライン毎に変化する。従って、ライン毎に行なうことにより、画質の劣化をより小さくしながら圧縮データの容量を小さくすることができる。
本発明によれば、画質の劣化の影響を小さくして、画像データを一定容量以下に圧縮してデータ転送や記録を行なうことができる。
以下、本発明の画像処理装置について説明する。また、従来技術で説明した構成と同一の構成は同一の符号を付し、その詳細な説明は省略する。
まず、本実施形態の画像処理装置の構成概念図について図1を用いて説明する。
本実施形態の画像処理装置は、従来と同様に、メモリコントローラ51を備えている。メモリコントローラ51は、DDRのDRAM52に対してデータの書込や読出を行なう。DRAM52には、フレーム毎にフレーム遅延画像が記録される。
更に、本実施形態のメモリコントローラ51は、圧縮データ処理部10を介して、ノイズリダクション処理ブロック55、IP変換処理ブロック56及びオーバードライブ処理ブロック57に接続されている。これらノイズリダクション処理ブロック55、IP変換処理ブロック56及びオーバードライブ処理ブロック57は、DRAM52に記録されたフレーム遅延画像を用いて、フレーム相関を用いたそれぞれの画像処理を実行する。
具体的には、ノイズリダクション処理ブロック55は、圧縮データ処理部10から取得した前フレーム画像データとカレント画像データとを用いて、映像信号に含まれるノイズ成分を軽減するためのノイズリダクション処理を実行する。IP変換処理ブロック56は、前フレーム画像データとカレント画像データとを用いて、インタレース・プログレッシブ変換(IP変換)処理を実行する。オーバードライブ処理ブロック57は、前フレーム画像データとカレント画像データとを用いて、中間階調の応答速度を向上させるオーバードライブ処理を実行する。その結果、画像処理装置は、これら各種の画像処理を行なった処理画像データを出力する。
次に、圧縮データ処理部10の構成について、図2を用いて説明する。圧縮データ処理部10は、制御手段として機能し、後述する処理(差分値算出段階、頻度算出段階、ハフマン符号化段階、総圧縮データ量算出段階、修正テーブル生成段階、コード生成段階、記
録段階及び展開段階等を含む処理)を行なう。そして、このための画像処理プログラムを実行することにより、圧縮データ処理部10は、差分値算出手段、頻度算出手段、ハフマン符号化手段、総圧縮データ量算出手段、修正テーブル生成手段、コード生成手段、記録手段及び展開手段として機能する。
図2に示すように、圧縮データ処理部10は、オリジナル画像データ取得手段11、圧縮データ生成手段12及び圧縮データ格納手段13を備える。これら手段(11〜13)は、オリジナル画像データから圧縮データを生成して、DRAM52のフレームメモリに記録するために用いるエンコーダである。
ここで、オリジナル画像データ取得手段11は、画像処理装置に供給された入力画像を、圧縮データ処理部10に取り込む機能を備える。この場合、オリジナル画像データ取得手段11は、ピクセルの配置に関連付けて各ピクセルの値をデータバッファに書き込む。
圧縮データ生成手段12は、後述するように、差分データ処理、ハフマン符号化処理、バジェッティングによる量子化処理を行なう機能を備える。この圧縮処理では、画像のフレーム相関は利用していないため、1フレーム単位に行なわれる。なお、バジェッティングとハフマン符号化は水平ブランキング期間中にライン毎に実行される。
圧縮データ生成手段12は、画像の連続性を仮定して、近隣の4画素(ピクセル)の値を用いて、隣のピクセルとの差分を、上のラインに対する差分で表したデータに変換する差分データ処理機能を備える。具体的な処理を、図5に示す対象ピクセルを「d」として説明する。この処理では、ピクセル「a」〜「c」を用いる。ピクセル「c」は、対象ピクセル「d」と同じラインにあり、この対象ピクセル「d」の直前のピクセルである。ピクセル「a」、「b」は、対象ピクセル「d」のラインよりも1つ上のラインにあり、「c」、「d」のそれぞれの位置に対応するピクセルである。なお、ピクセル「b」,「c」が、対象ピクセル「d」に隣接する周辺画素に相当する。
通常、0〜1023に亘ってほぼ一様にデータが分布している画像データにおいても、これを隣のデータとの差である差分(c−d)として表現(差分)すると、この差分データの値は「0」を中心にした分布に偏る。この第1差分値(c−d)を、対応する上のラインの第2差分値(a−b)から減算した上下方向の差分値(a−b−(c−d))を算出すると、「0」を中心として更に偏った分布になる。そこで、差分データ処理では、2回差分の値(a−b−c+d)を算出する。このような差分データ処理を実行することにより、画像データを構成する各ピクセルの値を、分布が「0」に偏ったデータに変換する。ここで、差分データの値を算出するピクセルが画像の端にあり、前のピクセル(c)や上のラインのピクセル(a,b)に対応するピクセルがない場合には、それらのピクセルの値を「0」として算出する。また、この差分データ処理では、圧縮データ生成手段12は、画像の左側のピクセルから1つずつずらして、処理対象ラインにおける各ピクセルの値を差分データの値に変換する。
更に、本実施形態の圧縮データ生成手段12は、差分データの値が属するグループを特定するためのグループ判別に関するデータを記憶している。ここで、このグループ判別データにおけるグループについて説明する。
本実施形態では、「0」を中心として、正負符号を用いて表わせる値は同じグループとして設定する。また、各グループに含まれる値は、初期値である複数のビット数で表わせるSX値(オフセット値)を含むように設定する。本実施形態では、図6の表40に示すように、「0」〜「10」までの11個のグループが設定される。本実施形態では、グループ「1」〜「9」は、グループの番号が「1」大きくなるに従って、各グループに含ま
れる差分データの値が、1ビット大きいSX値で表わせるグループを生成する。また、グループ「0」は、グループ「1」と同様に、2ビット(最小の複数ビット数)で表わせる値を含む。更に、グループ「10」は、グループ「9」と同様に、10ビットで表わせるビット数とする。
具体的には、このグループ判別データにおいて、グループ「0」には、「−4〜3」の値が含まれる。このグループに属する値は、1ビットの正負を示す符号ビットと、2ビットのSX値とを用いて表わせる。更に、このグループ「0」の両側の「−8〜−5,4〜7」の値は、グループ「1」に属する。このグループ「1」に属する値は、1ビットの符号ビットと、2ビットのSX値とを用いて表わせる。更に、グループ「1」の両側の「−16〜−9,8〜15」の値は、グループ「2」に属する。このグループ「2」に属する値は、1ビットの符号ビットと、3ビットのSX値とを用いて表わせる。
グループ判別データは、各グループの範囲と、このグループに属する差分データの値をこのグループ内で表現可能としたSX値(初期値)のビット数に関するデータを含むデータである。
更に、圧縮データ生成手段12は、このグループ判別データを用いて、グループ毎の発生頻度を算出するヒストグラム抽出機能を備える。具体的には、圧縮データ生成手段12は、算出した差分値が属するグループを特定し、各グループに属するデータの個数を算出する。更に、圧縮データ生成手段12は、各グループに属するデータの個数を、1ラインのピクセル数で除算して、発生頻度を算出する。
更に、圧縮データ生成手段12は、グループ毎の発生頻度を用いるハフマン符号化処理機能を備える。本実施形態では、ハフマン符号化処理では、データ変換を行なうために、高い発生頻度のグループに対して短い符号を付与する割当処理を行なう。また、圧縮データ生成手段12は、割り当てた符号を用いて、1ラインを表示するために使用するビット数(トータル符号長)を算出する。ここで、圧縮データ生成手段12は、各グループの値を表すビット数(1語長)を算出する。この1語長は、各グループに割り当てられたハフマン符号長(1〜8ビット)と、各グループのSX値のビット数(2〜10ビット)と、符号のビット数(1ビット)との和で表わすことができる。なお、本実施形態では、1語長は4〜19ビットで表わせる。
一般的な画像では、差分値は、ほとんどが上述したグループ「0」又は「1」の範囲に属する。また、色差データの差分データの値は、ほとんどがグループ「0」の範囲に属することがある。ここで、輝度(Y)データ及び色差データ(Cb,Cr)のほとんどがグループ「0」又は「1」に属するために2ビットのハフマン符号が割り当てられた場合には、多くのデータが4ビットで表わされることになり、コンポーネント映像信号(Y,Cb,Cr)の全体では12ビットでほとんどが表わせることになる。
本実施形態の圧縮データ生成手段12は、各グループの1語長を算出し、そのグループに属するデータの個数で乗算した値を、トータル符号長として算出する。1ラインのトータル符号長は、1ラインを構成する各ピクセルの値を表わすビット数の合計値になる。
更に、圧縮データ生成手段12は、圧縮データの目標値(基準値)に関するデータを記憶している。本実施形態では、この目標値は、例えば1ピクセル当りの平均のビット数が設定される。
また、圧縮データ生成手段12は、算出したトータル符号長を1ラインのデータの個数で除算して平均符号長を算出し、記憶している目標値と比較する機能を備える。更に、圧
縮データ生成手段12は、平均符号長が目標値以下の場合には、表40に示す初期値のSX値のビット数を用いることを決定し、平均符号長が目標値より大きい場合には、後述のバジェッティング及び量子化を行なって平均符号長が目標値以下になったときのSX値を用いることを決定するオフセット決定機能を備える。なお、初期値のSX値を用いる場合には、圧縮データに変換しても劣化がなく、完全に画像データを再現することができる。
圧縮データ生成手段12は、バジェッティングによる量子化処理機能を備える。この機能では、平均符号長が目標値より大きい場合に、データの劣化を伴いながらデータサイズを減らす処理を行なう。具体的には、SX値のLSB(Least Significant Bit)側のビ
ットを削減しながら量子化を行なって、目標値以下のデータで「最も画像がよく見える量子化値」を探す処理を行なう(バジェッティング)。この場合、削減したLSB側の1ビットは、「0」に固定して、量子化を実行する。なお、1ビットを削減した場合、表現可能な差分データの値は2の倍数になるため、2LSB分の誤差を伴うことになる。また、バジェッティングは、コンポーネント映像信号(Y,Cr,Cb)のそれぞれの信号の全体で行なう。更に、コンポーネント映像信号(Y,Cr,Cb)のそれぞれのデータ量は、入力画像によってライン毎に変化するので、ライン毎にバジェッティングを実行する。
ここで、バジェッティングは、次のルール(オフセット割当ルール)に基づいて行なわれる。
(1)グループ番号が大きいデータから順に量子化を行なう。これは、グループ番号が大きいデータは、絵柄が激しく変化している箇所であるため、劣化があっても、この劣化が分かり難いからである。
(a)ただし、グループに属するデータが1つもないグループ番号のSX値は調整しない。これは、平均符号長に影響しないからである。
(b)本実施形態では、次のグループ番号のSX値を1ビット削減する場合には、その前のグループ番号のSX値を更に削減する。例えば、まず、グループ番号が大きいSX値を1ビット削減する。この場合においても平均符号長が目標値より大きい場合には、削減したSX値を更に1ビット削減し、その次に(2番目に)グループ番号が大きいSX値を1ビット削減する。この場合においても平均符号長が目標値より大きい場合には、最初にSX値を削減したグループのSX値を更に1ビット削減し、2番目にSX値を削減したグループのSX値を更に1ビット削減し、その次に(3番目に)グループ番号が大きいSX値を1ビット削減する。このように、大きいグループ番号のSX値のビット数がより多く削減されるように調整を行なう。
(2)コンポーネント映像信号においては、Cb,Cr,Yの順に、ビット数を削減して量子化を行なう。人間の目は、輝度信号(Y)の変化に対して色差信号(Cb,Cr)の変化に鈍感であり、特にCb(青系色差信号)の変化に鈍感である。このため、鈍感な部分から順にビット数を削減していくことにより、画質の劣化を目立たなくすることができる。更に、白黒画像では、色差信号のデータ量がわずかになるため、輝度信号に沢山のデータ量が割り当てられる。この場合、輝度信号のデータ量はそのまま表わすことにより、劣化を分かり難くすることができる。本実施形態では、例えば、CbのデータのSX値を2ビット減少して目標値より大きかった場合には、Cr(赤系色差信号)のデータのSX値を1ビット減少させる。更に、CbのデータのSX値を6ビット減少し、CrのデータのSX値を2ビット減少させても、目標値により大きかった場合には、YのデータのSX値を1ビット減少させるような手順で調整を行なう。
そして、圧縮データ生成手段12は、上述のルールに基づいてバジェッティングを行なって、目標値以下のデータになった場合には、どのグループについてどのような量子化を行なったのかという情報を、そのラインのヘッダ情報として付加する。
更に、圧縮データ生成手段12は、ハフマン符号化機能により付与したハフマン符号と、オフセット決定機能により決定されたSX値とを含むグループ判別データを用いて、各ピクセルの値を圧縮コードに変換する機能を備える。具体的には、処理対象ラインの各ピクセルの値とその周辺のピクセルの値を用いて差分値を算出し、グループ判別データを用いて、この差分データの値が属するグループを特定する。更に、このグループに対して付与されたハフマン符号を取得する。そして、圧縮データ生成手段12は、差分データの値から、この差分値が属するグループの最小絶対値を減じた値を、SX値を用いて表わす。そして、1ピクセルの値を、「ハフマン符号+SX値+符号ビット」のコードで再構成して、圧縮コードを生成する。ここで、SX値は、量子化をしている場合には量子化後のSX値を用いる。
また、圧縮データ生成手段12は、圧縮コードに変換したときの値を書き戻す機能を備える。具体的には、圧縮データ生成手段12は、圧縮コードを生成した値が属するグループ番号の最小絶対値、特定したSX値及び符号ビットの正負を用いて、差分値を算出する。ここで、圧縮コードを量子化により削減されたビット数のSX値で表わした場合には、削減したビット数に対応する数の「0」をLSBに付加したSX値を算出し、このSX値に対応する値を用いて、展開した差分値(展開差分値)を算出する。そして、算出した展開差分値を、対応するピクセルの値としてデータバッファに書き戻す。差分値が属するグループにおいて量子化が行なわれている場合、生成した圧縮コードには、SX値の量子化誤差が含まれる。そこで、圧縮データ生成手段12は、削減されたビット数で表わされたSX値を用いて再現された画像データを用いることにより、差分値の算出に用いる他の画素が含む誤差の影響をなくすことができる。従って、誤差が累積しないので、誤差の累積による画像の劣化を回避することができる。
更に、圧縮データ生成手段12は、このように生成した圧縮データを圧縮データ格納手段13に供給する機能を備える。
圧縮データ格納手段13は、圧縮データ生成手段12が生成した圧縮データをフレームメモリに格納する機能を備える。具体的には、圧縮データ格納手段13は、圧縮したデータをメモリコントローラ51に供給して、DRAM52のフレームメモリデータ領域に記録させる。
更に、圧縮データ処理部10は、圧縮データ読出手段16、圧縮データ展開手段17及び展開後の画像データ出力手段18を備える。これら手段(16〜18)は、フレームメモリに記録された圧縮データを取得して展開し、この展開後の画像データを出力するために用いるデコーダである。
ここで、圧縮データ読出手段16は、圧縮データを読み出す機能を備える。具体的には、圧縮データ読出手段16は、DRAM52のフレームメモリに記録した圧縮データを、メモリコントローラ51を介して取得し、圧縮データ展開手段17に供給する。
圧縮データ展開手段17は、圧縮データの展開処理を実行する機能を備える。ここで、圧縮データ展開手段17は、取得した圧縮データから差分値を算出するハフマン復号処理を実行する機能と、算出した差分値からデータを復号する差分データ復号処理を実行する機能とを備える。これらハフマン復号処理及び差分データ復号処理は、1ライン毎に処理が実行される。そして、圧縮データ展開手段17は、圧縮データを復号した展開後の1フレーム毎の画像データを、展開後の画像データ出力手段18に供給する。
展開後の画像データ出力手段18は、圧縮データ処理部10から、展開後の画像データを、ノイズリダクション処理ブロック55、IP変換処理ブロック56及びオーバードラ
イブ処理ブロック57に供給する。
次に、上述した圧縮データ生成手段12における圧縮データの生成処理について、図3を用いて説明する。ここでは、説明を簡単にするため、1ラインが100ピクセルから構成されている場合を想定する。この場合、データの個数が、そのまま発生頻度(%)となる。また、説明を簡単にするため、コンポーネント映像信号のうち1つの信号について、バジェッティングを行なう場合について説明する。更に、目標値として、「1ピクセル当りの平均値として6ビット」を保持している。
この圧縮データの生成処理において、圧縮データ生成手段12は、まず、処理対象ラインを特定する(ステップS1−1)。この生成処理の開始においては、画像の最も上に位置するラインを処理対象ラインとして特定する。
次に、圧縮データ生成手段12は、差分データの変換処理を実行する(ステップS1−2)。ここでは、圧縮データ生成手段12は、対象ピクセル「d」の前のピクセル「c」の値と、これらピクセル「c」と「d」の直上のラインのピクセル「a」と「b」の値を用いて、「a−b−c+d」を算出する。そして、圧縮データ生成手段12は、処理対象ラインにおけるすべてのピクセルの値について、差分値を算出する。
次に、圧縮データ生成手段12は、算出した差分値を用いて、ヒストグラムの抽出処理を実行する(ステップS1−3)。具体的には、圧縮データ生成手段12は、変換した差分データの値と各グループの範囲とを比較して、各差分値が属するグループを特定し、各グループに属する差分値の個数をカウントする。更に、圧縮データ生成手段12は、各グループに属する個数をグループ毎に算出し、この個数から発生頻度を算出する。
次に、圧縮データ生成手段12は、ハフマン符号の割当処理を実行する(ステップS1−4)。本実施形態では、図6の表50に示す発生頻度に対応するツリーを作成し、このツリーに基づきハフマンコードを付与する。これにより、各グループへのハフマン符号とハフマンコード長が決定される。その結果、図7の表60に示すように、発生頻度が高い順に、短い符号長のハフマン符号が付与される。
次に、圧縮データ生成手段12は、オフセットの決定処理を実行する(ステップS1−5)。以下、このオフセットの決定処理について、図4を用いて詳述する。
圧縮データ生成手段12は、まず、トータル符号長の算出処理を実行する(ステップS2−1)。ここで、圧縮データ生成手段12は、ハフマン符号の割当処理(ステップS1−4)により各グループに割り当てられたハフマン符号長を用いて、1ラインのトータル符号長を算出する。具体的には、圧縮データ生成手段12は、1ラインを構成する各ピクセルのデータのビット数を合計した値を算出する。例えば、各グループに対しては図7の表60に示すような符号長のハフマン符号が付与されて、表60に示すような個数(これは発生頻度(%)と同じ数)のデータがある場合、トータル符号長は669になる。
次に、圧縮データ生成手段12は、平均符号長が目標値以下になっているかどうかを判断する(ステップS2−2)。ここで、圧縮データ生成手段12は、平均符号長を算出し、目標値と比較する。
本実施形態では、平均符号長は6.69と算出されるので、目標値(6ビット)よりも大きい。このため、圧縮データ生成手段12は、目標値以下でない(ステップS2−2において「NO」)と判断して、バジェッティングを実行する(ステップS2−3)。
まず、圧縮データ生成手段12は、属するデータが1以上あるグループのうち、最もグ
ループ番号が大きいグループを特定する。表60では、グループ番号「9」及び「10」に属するデータの個数が「0」であるため、圧縮データ生成手段12は、グループ番号「8」のSX値のビット数を1ビット削減する量子化を行なう。
次に、圧縮データ生成手段12は、このバジェッティングに応じた量子化を実行する(ステップS2−4)。具体的には、グループ番号「8」のSX値を9ビットから8ビットにする。そして、圧縮データ生成手段12は、このグループ番号「8」のSX値を8ビットにしたときのトータル符号長を算出する(ステップS2−5)。この場合、トータル符号長は659になる。
そして、圧縮データ生成手段12は、ステップS2−2と同様に、平均符号長が目標値以下になっているかどうかを判断する(ステップS2−6)。ここでは、算出された平均符号長が6.59であるため、圧縮データ生成手段12は、目標値以下でない(ステップS2−6において「NO」)と判断して、再度、バジェッティングを行なう(ステップS2−3)。
このように、圧縮データ生成手段12は、上述したバジェッティングルールを用いて、SX値を削除するグループ及びそのSX値のビット数を特定しながら量子化を実行し、トータル符号長を算出する処理(ステップS2−3〜S2−5)を、平均符号長が目標値以下になるまで(ステップS2−6において「YES」)繰り返して行なう。本実施形態では、図7の表70に示すように、グループ番号「4」、「5」、「7」、「8」のSX値のビット数を「4」、「4」、「5」、「4」とした量子化を行なった場合に、トータル符号長が597になり、トータル符号長が600以下になる。
この場合、算出された平均符号長が5.97であるため、圧縮データ生成手段12は、目標値以下である(ステップS2−6において「YES」)と判断し、オフセットの特定処理を実行する(ステップS2−7)。具体的には、バジェッティングにより削減されて更新されたビット数を用いてSX値を表わす。そして、SX値のビット数を削減したグループ番号と、各グループにおいて削減したビット数と、各グループに付与されたハフマン符号とを含む修正グループ判別データを、この処理対象ラインのヘッダ情報として付加する。以上により、オフセット決定処理(ステップS1−5)が終了する。
次に、圧縮データ生成手段12は、オフセット決定処理によりSX値を表わすビット数が修正された修正テーブルとしての修正グループ判別データを用いて、圧縮コード生成処理を実行する(ステップS1−6)。ここでは、図7の表70に示すように、圧縮データ生成手段12は、ステップS1−4で各グループに割り当てたハフマン符号と、ステップS1−5で決定したビット数のSX値と、正負符号とを用いて、各ピクセルの値を変換する。
具体的には、圧縮データ生成手段12は、変換を行なうピクセルの値と、このピクセルに隣接する周囲のピクセルの値を取得し、これらを用いて差分を算出する。そして、圧縮データ生成手段12は、算出した差分から、正負の符号を特定する。更に、圧縮データ生成手段12は、グループ判別データに基づいて、算出した差分値が属するグループを特定し、このグループに割り当てられたハフマン符号を特定する。
次に、圧縮データ生成手段12は、特定したグループの最小絶対値を、差分値から減じた値に対応するSX値を取得する。この場合、圧縮データ生成手段12は、変換を行なうピクセルを含むラインのヘッダ情報から、特定されたグループが量子化されているか否かを特定し、量子化されている場合には量子化されたビット数(バジェッティングにより削減されたビット数)に対応するLSBを「0」とした値に変換する。
そして、圧縮データ生成手段12は、特定した正負の符号データ、特定したハフマン符号データ及び取得したSX値データから構成される圧縮コード(圧縮データ)を生成する。
次に、圧縮データ生成手段12は、圧縮コードに変換したときの値の書き戻し処理を実行する。この場合、差分データが量子化されたグループに属する値である場合には、この量子化された誤差を含む値を算出する。具体的には、圧縮データ生成手段12は、生成した圧縮コードのSX値を用いて展開差分値を算出する。そして、圧縮データ生成手段12は、展開差分値を、そのピクセルの値としてデータバッファに書き戻す。なお、この書き戻された値は、他のピクセルの差分を算出する場合に用いられる。
以上の処理を、処理対象ラインの最終のピクセルまで行なうことにより、圧縮コード生成処理が終了する。
次に、圧縮データ生成手段12は、全ラインについて処理が終了したか否かを判断する(ステップS1−7)。ここで、未処理のラインが残っている場合(ステップS1−7において「NO」の場合)には、圧縮データ生成手段12は、処理対象ラインの変更処理を実行する(ステップS1−8)。具体的には、圧縮データ生成手段12は、次のラインを処理対象ラインとして特定する。そして、特定した処理対象ラインについて、上記ステップS1−1〜S1−7の処理を実行する。
一方、全ラインについて処理を終了した場合(ステップS1−7において「YES」の場合)には圧縮データ生成処理が終了し、圧縮データ生成手段12は、生成した圧縮コードを、圧縮データ格納手段13に供給する。
次に、圧縮データ展開手段17における圧縮データの展開処理について説明する。
圧縮データ展開手段17は、フレームメモリに記憶されていたヘッダ情報と圧縮データを圧縮データ読出手段16から取得し、圧縮データに含まれるハフマン符号に基づいてグループを特定する。そして、特定したグループとヘッダ情報とからコード符号長を特定し、各圧縮コードを特定する。更に、特定した各圧縮コードから、SX値のコード及び正負を示す符号のコードを特定する。
そして、圧縮データ展開手段17は、ハフマン復号処理を実行する。具体的には、圧縮データ展開手段17は、ハフマン符号から、グループ番号を特定して、このグループにおける最小絶対値を特定する。更に、圧縮データ展開手段17は、SX値のコードに対応する値を特定する。この場合、各ラインのヘッダ情報からこのグループのSX値が量子化されている場合には、削減したビット数に対応する数の「0」をLSBに付加したSX値を算出し、このSX値に対応する値を算出する。そして、この値とグループにおける最小絶対値とを加算し、符号ビットに対応する正負符号から、展開差分値を算出する。
次に、圧縮データ展開手段17は、差分データ復号処理を実行する。具体的には、圧縮データ展開手段17は、算出した展開差分値と、圧縮データ生成処理において差分データを用いる場合に使用した3つのピクセル(a,b,c)の値とを用いて、差分データを算出したときと逆の計算を行なって、このピクセル(対象ピクセル)の値を算出する。この場合、算出に用いるピクセル(a,b,c)がない場合には、そのピクセルの値が「0」であるとして算出を行なう。また、ピクセル(a,b,c)の値は、DRAM52に記憶されている圧縮コードの値を用いる。このため、ピクセル(a,b,c)の値が量子化されている場合には、この量子化された値に基づいて対象ピクセル(d)の値を算出する。
そして、左から順に最終画素までデータを算出して1ライン毎の各ピクセルの値を復元
する。更に、1ラインの圧縮コードを復号した後には、次のラインについて順次、復号処理を実行して、最終ラインまで復号を行なう。以上により、圧縮データが展開されて、圧縮データ展開手段17は、展開したデータを圧縮後の画像データ出力手段18に供給する。
本実施形態によれば、以下のような効果を得ることができる。
・ 本実施形態では、圧縮データ生成手段12は、差分データの変換処理を実行し(ステップS1−2)、算出した差分値を用いて、ヒストグラムの抽出処理を実行する(ステップS1−3)。そして、圧縮データ生成手段12は、算出したグループ毎の発生頻度から、ハフマン符号の割当処理を実行する(ステップS1−4)。このため、「0」を中心に偏った分布になる差分値に変換した上で、高い頻度のグループに対して短い符号が付与されるので、「0」付近にあるより多くのデータを含むグループに対して短いハフマン符号が付与される。このため、画像データをより圧縮することができる。
・ 本実施形態では、圧縮データ生成手段12は、各グループに割り当てられたハフマン符号長を用いて算出される平均符号長が目標値以下でない場合(ステップS2−2において「NO」の場合)には、バジェッティング、量子化及びトータル符号長の算出を繰り返して行なう(ステップS2−3〜S2−5)。目標値以下(ステップS2−6において「YES」)になった場合には、圧縮データ生成手段12は、オフセットの特定処理(ステップS2−7)により、バジェッティングにより削減されて更新されたビット数を用いてSX値を表わす。そして、圧縮データ生成手段12は、各グループに割り当てたハフマン符号と、このビット数のSX値と、正負符号とを用いて、各ピクセルの値を変換する圧縮コード生成処理を実行する(ステップS1−6)。このため、SX値を調整して、平均符号長が目標値以下になるように、画像データを圧縮することができる。
・ 本実施形態では、圧縮データ生成手段12は、高い発生頻度のグループに対して短い符号を割り当て、この割り当てた符号を用いてデータを変換するハフマン符号化処理を実行する。ここで、「0」付近を中心として、同じ絶対値範囲を1つのグループとして設定し、各グループに含まれる差分データの値は、複数のビット数で表わせる値を含むように設定する。そして、本実施形態では、グループ番号が「1」大きくなるに従って、そのグループに含まれる差分データが、1ビット大きいSX値で表わせるグループを生成する。このため、差分値が偏る「0」付近を表わす圧縮コードが短くなるように設定するので、より多くのピクセルの値を短いコードで表わすことができる。
・ 本実施形態では、圧縮データ生成手段12は、オフセット割当ルールとして、グループ番号が大きいデータから順に量子化を行なうことを記憶している。このため、劣化が分かり難い部分から量子化を行なうので、画像の劣化の影響を小さくすることができる。
・ 本実施形態では、圧縮データ生成手段12は、オフセット割当ルールとして、コンポーネント映像信号においては、Cb,Cr,Yの順に、ビット数を削減して量子化を行なうことを記憶している。このため、人間の目が変化に鈍感な部分から量子化を行なうので、画像の劣化の影響を小さくすることができる。
・ 本実施形態では、圧縮データ生成手段12は、特定した処理対象ラインについて、上記ステップS1−1〜S1−7の処理を実行する。ライン毎によって各種信号の各ピクセルの値の分布が異なることがあるので、ライン毎に行なうことにより、画質の劣化の影響をより小さくしながら圧縮データの容量を小さくすることができる。
・ 本実施形態では、圧縮データ生成手段12は、上述のルールに基づいてバジェッティングを行なって、目標値以下のデータになった場合には、SX値のビット数を削減した
グループ番号と、各グループにおいて削減したビット数とを含む修正グループ判別データを、各処理対象ラインのヘッダ情報として付加する。圧縮データ展開手段17は、ハフマン復号処理を実行して、各ラインのヘッダ情報からこのグループのSX値が量子化されている場合には、削減したビット数に対応する数の「0」をLSBに付加したSX値を算出し、このSX値に対応する値を算出する。このため、ライン毎に行なった量子化に応じて、圧縮データを復元することができる。
・ 本実施形態では、圧縮データ生成手段12は、圧縮コード生成処理(ステップS1−6)において、圧縮コードに変換したときの値の書き戻し処理を実行する。そして、圧縮データ生成手段12は、他のピクセルの値を圧縮コードにする場合に、圧縮コードに変換したときの誤差を含んだ値を用いる。圧縮データ展開手段17は、差分データ復号処理において、算出した展開差分値と、DRAM52に記憶されているピクセル(a,b,c)の値とを用いて、対象ピクセルの値を算出する。従って、圧縮データ生成手段12は、圧縮データ展開手段17が用いるピクセル(a,b,c)の値を用いて、差分値を算出して圧縮データに変換することにより、ピクセル(a,b,c)の値に量子化による誤差が含まれていても、それらの誤差に影響を受けることなく、差分データから対象ピクセル「d」の値を展開することができる。従って、量子化の誤差が累積しないので、誤差の累積による画像の劣化を回避することができる。
・ 本実施形態では、圧縮データ生成手段12は、差分データの変換処理(ステップS1−2)において、対象ピクセル「d」の前のピクセル「c」の値と、これらピクセル「c」と「d」の直上のラインのピクセル「a」と「b」の値を用いて、「a−b−c+d」を算出する。このため、隣のデータとの差(c−d)として表現して「0」を中心にした分布に偏らせた上で、上下方向の差分の値(a−b−(c−d))を算出させることにより、「0」を中心として更に偏った分布になる。これにより、画像データを構成する各ピクセルの値を、「0」付近により多くのデータが分布するようにデータを変換することができる。
また、上記実施形態は以下のように変更してもよい。
○ 上記実施形態の差分データの変換処理(ステップS1−2)において、圧縮データ生成手段12は、対象ピクセル「d」の前のピクセル「c」との差分値(c−d)に対して上下方向の差分の値(a−b−(c−d))を算出した。差分データの変換処理で算出する差分値は、これに限らず、対象ピクセルに隣接し、この対象ピクセルよりも先に処理が行なわれる周辺画素を用いて算出される値であればよい。例えば、画像の右から縦1ライン毎に処理を行なう場合には、対象ピクセル「d」の上にあるピクセル「b」と、これらのラインの右に位置する「e」及び「f」とを用いて算出する差分値(「d−b−(f−e)」や「e−b−(f−d)」)を用いてもよい。
○ 上記実施形態においては、「0」を含むグループ「0」の次のグループ「1」に属する値は、グループ「0」と同じく2ビットのSX値で示せる値とした。グループ判別データは、これに限らず、例えば、グループ「1」に属する値を3ビットのSX値で示せる値としてもよい。また、グループ「0」〜「2」に属する値を、それぞれ2ビットのSX値で示せる値としもよい。この場合にも、それ以降の各グループの番号が大きくなるに従って、そのグループに含まれる差分データの値が、より大きいSX値で表わせるグループに分類されるグループ判別データを用いることができればよい。
○ 上記実施形態においては、順次、データを削減して、バジェッティングを行なった。このバジェッティングは他のルールを更に追加してもよい。例えば、平均符号長が目標値より下回ったときには、SX値を1つ増加させても、データ量が変化しないグループがあるかを検索し、該当するグループがあった場合には、そのグループの削減したSX値を
戻してもよい。具体的には、圧縮データ生成手段12は、平均符号長は目標値以下になっていると判断した場合(ステップS2−6において「YES」)には、削除したSX値を増加しても、平均符号長が目標値以下のままになるSX値がないかを検索する。そして、該当するSX値があった場合には、そのSX値を元に戻す。例えば、上記実施形態においては、図7の表70に示すように、グループ番号「4」、「5」、「7」、「8」のSX値のビット数を「4」、「4」、「5」、「4」とすることにより、平均符号長は目標値以下になった。この場合には、グループ番号「4」のSX値を1つ増加させたトータル符号長は600であり、平均符号長は目標値以下になる。そこで、圧縮データ生成手段12は、グループ番号「4」のSX値として5ビットを用いるとしてもよい。これにより、目標値以下のデータ量に圧縮できるとともに、グループ番号が小さく劣化がより目に付くようなグループを表わせるデータの誤差を小さくすることができる。
○ 上記実施形態においては、コンポーネント映像信号に関するオフセット割当ルールとして、CbのデータのSX値を2ビット減少して目標値より大きかった場合には、CrのデータのSX値を1ビット減少させた。更に、CbのデータのSX値を6ビット減少し、CrのデータのSX値を2ビット減少させても、目標値により大きかった場合には、YのデータのSX値を1ビット減少させた。コンポーネント映像信号に関するオフセット割当ルールは、これに限らず、他の割合や順番を用いてもよい。この場合、画質の劣化を目立たなくするために、鈍感な部分から順にビット数を削減していくことがよい。また、白黒画像の場合には、色差信号のデータ量がわずかになるため、色差信号からSX値をかなり除いても目標値以下のデータ量とならない場合にのみ、輝度信号のSX値を調整するようにしてもよい。
○ 上記実施形態においては、圧縮データ生成手段12は、ITU−R BT.601規格による輝度−色差の方式(Y,Cb,Cr)の信号を圧縮してフレームメモリに記録した。圧縮データを生成する信号は、これに限られず、他のコンポーネント方式の信号であってもよいし、RGB信号であってもよい。
本実施形態の画像処理装置の構成概念図。 圧縮データ処理部の構成を示すブロック図。 圧縮データの生成処理における処理手順の流れ図。 オフセット決定処理における処理手順の流れ図。 差分データ変換処理を説明するための説明図。 ヒストグラム抽出処理までの処理を説明するための説明図。 バッジェッテイング処理を説明するための説明図。 従来例における画像処理装置の構成概念図。
符号の説明
b,c…周辺画素、d…対象画素としての対象ピクセル、10…制御手段としての圧縮データ処理部、52…メモリとしてのDRAM。

Claims (6)

  1. グループに属する差分値の範囲と、各グループに付与されるハフマン符号と、各グループ内でグループに属する差分値を表わすための複数のビット数からなるオフセットとをグループ毎に記録するグループ判別テーブルを保持した制御手段と、
    前のフレームの画像データであるフレーム遅延画像データの圧縮データを記録するメモリとを用いて、
    前記フレーム遅延画像データと、現在の画像データであるカレント画像データとを用いてフレーム相関を利用した各種画像処理を実行する画像処理装置であって、
    前記制御手段が、
    カレント画像データを受信し、前記カレント画像データを構成する画素間の差分値を算出する差分値算出手段と、
    算出した差分値を、前記グループ判別テーブルを用いて各グループに分類した後、グループの頻度を算出する頻度算出手段と、
    算出した頻度に応じて各グループに対してハフマン符号を割り当てるハフマン符号化手段と、
    各グループに割り当てられたハフマン符号を表わすためのビット数、各グループにおけるオフセットを表わすためのビット数、正負符号を表示するためのビット数から、総圧縮データ量を算出する総圧縮データ量算出手段と、
    前記総圧縮データ量が予め定められた基準値を超える場合には、前記算出した頻度が「1」以上のグループについて、オフセット値が大きいグループから、前記総圧縮データ量が前記基準値以下になるまで、順次、オフセット値を1ビットずつ削減する量子化処理を行なうオフセット割当ルールを用いることにより、前記グループ判別テーブルにおけるオフセットのビット数を削減した修正テーブルを生成するとともに前記修正テーブルをヘッダ情報として付加し、この修正テーブルを用いてカレント画像データから圧縮データを生成するコード生成手段と、
    メモリに前記圧縮データを書き込む記録手段と、
    前記メモリから圧縮データを読み出して、前記ヘッダ情報から修正テーブルを用いてフレーム遅延画像データを生成する展開手段と
    前記フレーム遅延画像データと、新たに受信したカレント画像データとのフレーム相関を利用した画像処理を実行する手段と
    を備えたことを特徴とする画像処理装置。
  2. 前記コード生成手段は、前記修正テーブルによって削減されたビット数で表わされたオフセットを用いて再現された画像データにより差分値を算出し、前記差分値について前記修正テーブルを用いて圧縮データを生成することを特徴とする請求項1に記載の画像処理装置。
  3. 前記差分値算出手段は、対象画素に隣接し、この対象画素よりも先に圧縮データに変換される周辺画素における第1差分値と、前記対象画素と周辺画素とにおける第2差分値とから算出される差分値を用いて圧縮データを生成することを特徴とする請求項1又は2に記載の画像処理装置。
  4. 前記カレント画像データは、輝度信号のデータと、青系色差信号のデータと、赤系色差信号のデータとから構成され、
    前記量子化処理においては、更に、青系色差信号、赤系色差信号、輝度信号の順番で、オフセットのビット数の削減量多くするオフセット割当ルールを用いて実行することを特徴とする請求項1〜3のいずれか1項に記載の画像処理装置。
  5. 前記頻度算出手段、前記ハフマン符号化手段、前記総圧縮データ量算出手段及び前記コード生成手段は、画像を構成する1ライン毎に行なうことを特徴とする請求項1〜4のいずれか1項に記載の画像処理装置。
  6. グループに属する差分値の範囲と、各グループに付与されるハフマン符号と、各グループ内でグループに属する差分値を表わすための複数のビット数からなるオフセットとをグループ毎に記録するグループ判別テーブルを保持した制御手段と、
    前のフレームの画像データであるフレーム遅延画像データの圧縮データを記録するメモリとを用いて、
    前記フレーム遅延画像データと、現在の画像データであるカレント画像データとを用いてフレーム相関を利用した各種画像処理を実行する画像処理方法であって、
    前記制御手段が、
    カレント画像データを受信し、前記カレント画像データを構成する画素間の差分値を算出する差分値算出段階と、
    算出した差分値を、前記グループ判別テーブルを用いて各グループに分類した後、グループの頻度を算出する頻度算出段階と、
    算出した頻度に応じて各グループに対してハフマン符号を割り当てるハフマン符号化段階と、
    各グループに割り当てられたハフマン符号を表わすためのビット数、各グループにおけるオフセットを表わすためのビット数、正負符号を表示するためのビット数から、総圧縮データ量を算出する総圧縮データ量算出段階と、
    前記総圧縮データ量が予め定められた基準値を超える場合には、前記算出した頻度が「1」以上のグループについて、オフセット値が大きいグループから、前記総圧縮データ量が前記基準値以下になるまで、順次、オフセット値を1ビットずつ削減する量子化処理を行なうオフセット割当ルールを用いることにより、前記グループ判別テーブルにおけるオフセットのビット数を削減した修正テーブルを生成するとともに前記修正テーブルをヘッダ情報として付加し、この修正テーブルを用いてカレント画像データから圧縮データを生成するコード生成段階と、
    メモリに前記圧縮データを書き込む記録段階と、
    前記メモリから圧縮データを読み出して、前記ヘッダ情報から修正テーブルを用いてフレーム遅延画像データを生成する展開段階と
    前記フレーム遅延画像データと、新たに受信したカレント画像データとのフレーム相関
    を利用した画像処理を実行する段階と
    を実行することを特徴とする画像処理方法。
JP2007093856A 2007-03-30 2007-03-30 画像処理装置及び画像処理方法 Active JP4814826B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007093856A JP4814826B2 (ja) 2007-03-30 2007-03-30 画像処理装置及び画像処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007093856A JP4814826B2 (ja) 2007-03-30 2007-03-30 画像処理装置及び画像処理方法

Publications (2)

Publication Number Publication Date
JP2008252726A JP2008252726A (ja) 2008-10-16
JP4814826B2 true JP4814826B2 (ja) 2011-11-16

Family

ID=39977111

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007093856A Active JP4814826B2 (ja) 2007-03-30 2007-03-30 画像処理装置及び画像処理方法

Country Status (1)

Country Link
JP (1) JP4814826B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5871628B2 (ja) * 2011-11-07 2016-03-01 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
CN116828200B (zh) * 2023-08-29 2024-01-23 苏州浪潮智能科技有限公司 一种图像处理方法、处理装置、设备及介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06327024A (ja) * 1993-05-12 1994-11-25 Nec Corp 映像信号処理回路
JPH08186823A (ja) * 1994-12-28 1996-07-16 Canon Inc 符号化装置及び方法
JPH1028268A (ja) * 1996-07-11 1998-01-27 Hitachi Ltd 画像符号化データ量削減方法
JP3373132B2 (ja) * 1997-05-14 2003-02-04 シャープ株式会社 ディジタル符号化装置およびディジタル復号化装置
JP2006202209A (ja) * 2005-01-24 2006-08-03 Toshiba Corp 画像圧縮方法および画像圧縮装置

Also Published As

Publication number Publication date
JP2008252726A (ja) 2008-10-16

Similar Documents

Publication Publication Date Title
JP3594589B2 (ja) 液晶駆動用画像処理回路、液晶表示装置、および液晶駆動用画像処理方法
JP2861890B2 (ja) カラー画像表示装置
JP4816970B2 (ja) 画像処理装置、表示装置、画像処理方法及びプログラム
JP4067594B2 (ja) 信号変換回路および入力ワードのデジタル出力ワードへの変換方法
US20100220936A1 (en) Image encoding device, image encoding method, image encoding/decoding system
US8290310B2 (en) Image processing apparatus and method, program, and recording medium
JP2013214976A (ja) エッジ領域を効果的に圧縮して復元する方法及び装置
JP2007181189A (ja) 画像処理装置、表示装置、画像処理方法及びプログラム
JP4190551B2 (ja) 画像処理装置、画像処理方法、画像符号化装置、および画像符号化方法
JP4814826B2 (ja) 画像処理装置及び画像処理方法
US20090129685A1 (en) Image processing apparatus, image transmitting apparatus and method and program of the same and display device
EP3659339A1 (en) Single-channel inverse mapping for image/video processing
JP2018056969A (ja) 画像処理装置
JP2012119950A (ja) 画像処理装置及び画像処理方法
JP2009077183A (ja) データ圧縮装置、データ圧縮・伸張システム、およびデータ圧縮方法
JP4092830B2 (ja) 画像データ圧縮方法
WO2019023202A1 (en) REVERSE MONOCANAL MAPPING FOR IMAGE / VIDEO PROCESSING
JP2016063284A (ja) 画像処理装置、画像処理方法および画像処理プログラム
KR100798386B1 (ko) 영상 압축방법과 신장방법 및 그 장치
KR101292039B1 (ko) 표시장치용 영상데이터 처리 방법
JP2007208796A (ja) 映像信号の符号化伝送及び復号方法
US20110216969A1 (en) Image Data Compression and Decompression
JP2006254432A (ja) デジタル画像データを処理するデジタル画像データ処理方法
US20240013356A1 (en) Method for generating high dynamic range image, and image processing system
CN110999300B (zh) 用于图像/视频处理的单通道逆映射

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100324

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110809

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110826

R150 Certificate of patent or registration of utility model

Ref document number: 4814826

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140902

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250