JP4514169B2 - デジタル信号変換装置及び方法 - Google Patents
デジタル信号変換装置及び方法 Download PDFInfo
- Publication number
- JP4514169B2 JP4514169B2 JP2000115329A JP2000115329A JP4514169B2 JP 4514169 B2 JP4514169 B2 JP 4514169B2 JP 2000115329 A JP2000115329 A JP 2000115329A JP 2000115329 A JP2000115329 A JP 2000115329A JP 4514169 B2 JP4514169 B2 JP 4514169B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- digital signal
- signal conversion
- blocks
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 49
- 238000006243 chemical reaction Methods 0.000 title claims description 47
- 230000015654 memory Effects 0.000 claims description 52
- 238000001914 filtration Methods 0.000 claims description 38
- 230000008569 process Effects 0.000 claims description 20
- 230000001131 transforming effect Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims 1
- 238000004458 analytical method Methods 0.000 description 19
- 238000013139 quantization Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 238000000354 decomposition reaction Methods 0.000 description 6
- 230000009466 transformation Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000006386 memory function Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000008521 reorganization Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012950 reanalysis Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
- H04N19/645—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission by grouping of coefficients into blocks after the transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/14—Fourier, Walsh or analogous domain transformations, e.g. Laplace, Hilbert, Karhunen-Loeve, transforms
- G06F17/148—Wavelet transforms
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Algebra (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Image Processing (AREA)
Description
【発明の属する技術分野】
本発明はデジタルフィルタリング等を行うデジタル信号変換装置及び方法に関し、特に、符号化対象画像を複数のブロックに分割し、それら各ブロックを独立に離散ウェブレット変換(フィルタリング処理)するブロックベースの離散ウェブレット変換(Block-based Discrete Wavelet Transformation)を行うデジタル信号変換装置及び方法に関する。
【0002】
【従来の技術】
従来より、多くのデジタルフィルタリング装置及び方法が知られているが、特に、DCT変換やウェブレット変換等が良く知られている。
【0003】
これらのフィルタリング装置及び方法は、一般に画像データの圧縮/解凍を行うための符号化/逆符号化部の一部品、或いは一機能として組み込まれている。また、これらフィルタリング装置及び方法は、処理中にデータ記憶を行うために、ランダムアクセス可能なメモリ或いはバッファ空間を多く必要とすることがある。例えば、画像処理のためにウェブレット変換を行う従来の構成においては、最初に処理対象である画像データの全てを所定のメモリへ読み込み、次にフィルタリングステップを実行している。
【0004】
【発明が解決しようとする課題】
しかしながら、上記従来のウェブレット変換を行う構成において画像データを読み込むためのメモリ空間は非常に大きいため、例えば写真機,ファクシミリ,プリンタ,コピー等の装置内において、上記フィルタリングを実行することは困難である。
【0005】
本発明の目的は、デジタル信号に対してウェブレット変換を行う際に、処理データによるメモリ占有の度合いを減少させることが可能なデジタル信号変換装置及び方法を提供することである。
【0006】
【課題を解決するための手段】
上記目的を達成するために、本発明に係るデジタル信号変換方法は以下のステップを備える。
【0007】
即ち、画像に対して離散ウェブレット変換を施すデジタル信号変換方法であって、前記画像を、W×H個のピクセルを有する複数の第1ブロックへ分割するブロック生成ステップと、前記第1ブロックの各々をLL,LH,HL,HHの各周波数サブバンドブロックにウェブレット変換する変換ステップと、前記周波数サブバンドブロックLLを記憶し、該周波数サブバンドブロックLLに基づいて前記第1ブロックと同サイズの第2ブロックを生成する再ブロック生成ステップと、前記第2ブロックを離散ウェブレット変換する再変換ステップと、を有することを特徴とする。
【0008】
【発明の実施の形態】
以下、本発明に係る一実施形態について、図面を参照して詳細に説明する。
【0009】
図1に、本発明に係るデータ処理装置の一例を示す。本発明におけるデジタル信号変換装置及び方法は、特に、変換部23に関するものである。図1において、データ符号化部20は、非符号化データを格納するデータソース(source)部10と接続され、入力データ21を受け取る。
【0010】
データソース部10は、例えばランダムアクセス可能なハードディスク,ディスケット,CDのような、非符号化データを記憶するためのメモリ手段であり、内部のデータを読み出すための適切な読み出し手段と、内部にデータを記録するための記録手段とを備えている。
【0011】
以下、図1に示すデータ処理装置について詳細に説明する。尚、以下に示す本実施形態においては、ブロックベースの(Block-based)離散ウェブレット変換を用いる例について説明する。
【0012】
データソース部1は、データ符号化部2への入力データ2aとして、画像信号SIを供給する。画像信号SIは、モノクロの多値画像、或いはカラー画像を表す。カラー画像等の複数の色成分を符号化する場合には、RGBの各色成分、或いは輝度、色度成分を、それぞれ単色成分として圧縮すれば良い。
【0013】
上記のように符号化されたデータをユーザが利用するユーザ利用部3には、データ符号化部2の出力データ2bが接続されている。このユーザ利用部3は、例えば、符号化データ蓄積手段及び/又は符号化データ転送手段を含んでいる。
【0014】
データ符号化部2は従来と同様に変換部2cを含んでおり、以下、その詳細を説明する。変換部2cは、信号の分析を行うために画像信号SIを複数の周波数サブバンド信号へ分解(filtering)する。その分解には離散ウェブレット変換が用いられ、少なくとも2つの解像度レベルによる分析が行われる。ここで、信号の解像度とは一般に、その信号を表すために用いられる単位長さ当たりのサンプル数で示される。
【0015】
変換部2cは量子化部2dに接続している。量子化部2dは、変換部2cにより供給された周波数サブバンド信号の係数、或いは係数グループの量子化を行う。つまり、入力した係数を所定の量子化ステップ(例えば、スカラー量子化やべクトル量子化)により量子化し、その量子化値に対するインデックスを出力する。
【0016】
この量子化部2dの出力は、エントロピー符号化部2eに入力される。エントロピー符号化部2eは、入力された量子化インデックスをビットプレーンに分解し、ビットプレーン単位にハフマン符号化或いは算術符号化を行ってコードストリームを出力する。
【0017】
上述したデータ符号化部2は、集積回路の形態で、コンピュータ,プリンタ,ファクシミリ,スキャナ,デジタルカメラ等のデジタル装置に搭載することが可能である。
【0018】
図2は、図1に示したデータ符号化部2を具現化する例を示す。
【0019】
装置10はマイクロコンピュータであり、中央ユニット100、ROM102、RAM103、後述する本発明を実行する処理回路104、入出力回路105に接続している通信バス101を備えている。
【0020】
装置10はまた、従来と同様に、キーボードや,ディスケットを受けるディスクドライブを含み、或いは、通信ネットワークと通信可能なように構成されている。
【0021】
そのため装置10は、入出力回路105を介して、デジタルカメラのような周辺機器から符号化されたデータを受け取り、該符号化データを通信ネットワークを介して再び遠隔機器へ転送することも可能である。
【0022】
図2において、RAM103は動的ランダムアクセスメモリ、所謂DRAMである。このメモリは、入力或いは転送された画像データ全体を格納するために機能する。尚、DRAMは特定の順番で画像サンプルを読み出すために、本発明においては有効である。
【0023】
又、処理回路104は、本発明のデジタル信号変換を実行する専用回路である。この回路は、静的ランダムアクセスメモリ、所謂SRAMを備えている。このメモリは、デジタル信号変換処理中の画像サンプル及び後述する周波数サブバンド信号を一時格納するためのバッファとして機能する。本実施形態における画像サンプルのフィルタリング、量子化、エントロピー符号化は、処理回路104において実行される。このようなデジタル信号変換のための専用回路を備える構成は、プリンタ,ファクシミリ,スキャナ,デジタルカメラ等、比較的低い処理能力のCPUを備える装置に好適である。
【0024】
図3は、図1に示したデータ符号化部2を具現化する他の例を示す。
【0025】
この例は、特にPC,ワークステーション等の広義なデータ処理装置において、本発明のデジタル信号変換を実行するための構成を示している。このような装置構成においては、本発明のデジタル信号変換は図2で示したような専用回路を利用してではなく、ソフトウエアに基づいてCPUにより実行される。
【0026】
装置200は、CPU205、ROM202、RAM203、スクリーン204、キーボード214、ハードディスク208、ディスケット210を受け取るるように適合されたディスクドライブ209、通信ネットワーク213と通信するためのインターフェース212、マイクロフォン211に接続された入出力カード206、を接続した通信バス201を備えるマイクロコンピュータである。
【0027】
ハードディスク208は、本発明に従って符号化されたデータ及び符号化対象データと同様に、以下に詳述される本発明を実行するプログラムを記憶する。これらのプログラムは、磁気テープ、CD−ROM、ディスケット210から読み出されたり、或いは通信ネットワーク213を介して受信されたりして、ハードディスク208或いはRAM203に記憶される形態であっても良い。
【0028】
装置が起動された時、本発明の実行コードを含むプログラムは、RAM203へ転送され、CPU205内のレジスタは、本発明を実行するために必要な変数を格納する。以下に詳述されるこれら変数としては、特に変数iと変数Lがある。尚、RAM203はバッファ機能も果たす。
【0029】
又、装置200は、デジタルカメラ,スキャナ、或いは他の入力/記憶手段のような周辺装置207から符号化対象となるデータを受け取り、RAM203に記憶する。又、装置200は、通信ネットワーク213を介して遠隔の装置から符号化対象となるデータを受信し、RAM203に記憶すると共に、符号化されたデータを再び通信ネットワーク213を介して遠隔装置へ転送することも可能である。
【0030】
又、装置200は、マイクロフォン211から符号化対象となるデータを受信することもできる。スクリーン204は、キーボード214と共にユーザインターフェースとして利用でき、符号化されたデータを表示することが可能である。
【0031】
入力或いは転送されたデータは、CPU205が前記プログラムに基づき順次符号化する。符号化されたデータはハードディスク208に記憶されるか、或いは通信ネットワーク213を介して他の装置に転送される。符号化処理については、図7を参照して後述する。
【0032】
図4は、図2に示した処理回路104の具体的構成例を示す図である。
【0033】
処理回路104は、該処理回路104に含まれる各モジュールを制御するコントローラ20、再組織化(reorganization)バッファメモリモジュール21、垂直フィルタリングモジュール22、水平フィルタリングモジュール23、第1バッファモジュール24、第2バッファモジュール25、量子化及びエントロピー符号化モジュール26を含む。
【0034】
再組織化バッファメモリモジュール21(以下、単にメモリ21と称する)は、接続されたRAM103とのデータ入出力を行う。又、該メモリ21は、垂直フィルタリングモジュール22への出力も行う。更に、該メモリ21は、サンプルが所定の順序で処理されるように制御し、未処理のサンプルを記憶しておくことが可能である。
【0035】
垂直フィルタリングモジュール22(以下、単に垂直フィルタリング22と称する)は、画像の垂直方向のフィルタリングを実行し、その結果を水平フィルタリングモジュール23へ出力する。
【0036】
水平フィルタリングモジュール23(以下、単に水平フィルタリング23と称する)は、画像の水平方向のフィルタリングを実行し、その結果を第1バッファモジュール24,第2バッファモジュール25へ出力する。尚、水平フィルタリング23は、垂直フィルタリング22の前に配置しても良い。
【0037】
第1バッファモジュール24(以下、単にメモリ24と称する)は、水平フィルタリング23により分析された4つの周波数サブバンド信号の中で、最も低い周波数成分を有する周波数サブバンド信号のみを記憶し、蓄積データが所定の大きさになったら、垂直フィルタリング22に出力する。
【0038】
第2バッファモジュール25(以下、単にメモリ25と称する)は、水平フィルタリング23により分析された4つの周波数サブバンド信号を蓄積し、該蓄積データを量子化及びエントロピー符号化モジュール26へ出力する。
【0039】
量子化及びエントロピー符号化モジュール26(以下、単に符号化モジュール26と称する)における量子化及びエントロピー符号化処理については、周知であるためここでは詳述しない。尚、量子化については、“Vector Quantization and Signal Compression”,Allen Gersho and Robert M.Gray,Kluwer Academic Publishersに詳述されている。又、エントロピー符号化については、“A method for the construction of minimum redundancy codes”,D.A.Huffman,Proceedings of the IRE,40:1098-1101,1952に詳述されている。
【0040】
以下、図4に示す処理回路104における動作について詳細に説明する。
【0041】
フィルタリングは、サンプルブロック毎に実行される。1枚の画像は、コントローラ20によって論理的に複数の領域(ブロック)に分割され、各ブロックにはその処理順序を示す番号付けがなされる。ここで1枚の画像とは、カラー画像の場合、単色成分毎に符号化されるため、単色成分のみで構成されている画像を意味する。尚、カラー画像の単色成分への分解は通常の入力手段(デジタルカメラやスキャナ等)において行われる処理であり、処理回路104ではそのような分解処理は担わない。
【0042】
分割された各ブロックは、隣接するブロックとゼロ或いは1列及び/又は1行の重なりを有する四角形状である。全てのブロックは同一のサンプル数を有し、例えば各ブロックはW×Hサンプル(W:画像の垂直方向のサンプル数,H:画像の水平方向のサンプル数)を有するが、特に、[2W+OP]2(W:水平方向ピクセル数,OP:隣接ブロックとの重なり数)サンプルを有することが望ましい。
【0043】
全てのブロックは、同一の方法でフィルタリング(離散ウェブレット変換)される。このようなブロック毎の離散ウェブレット変換が、ブロックベースの離散ウェーブレット変換(block-based discrete wavelet transformation)と呼ばれるものである。
【0044】
符号化される画像のサンプルは、画像全体を蓄積しているRAM103からブロック単位で読み出され、処理回路104内のSRAM、即ち、メモリ21内に一時格納される。尚、読み出されるブロックの順序は、先に付された番号に従う。又、読み込まれた各ブロックは、垂直及び水平フィルタリング22,23によって周波数分析される。本発明では、ウェブレット変換により分析が行われる。その結果、各ブロックは、4つの周波数サブバンドブロック(LL,LH,HL,HH)へ変換される。
【0045】
その分析は、少なくとも2つの解像度レベルで実行される。即ち、少なくとも1つの解像度レベルで得られた、垂直,水平両方向における低周波成分を含む周波数サブバンドブロックLLは、垂直及び水平フィルタリング22,23によって再度フィルタリングされる。このループは少なくとも1回実行される。初期画像の各ブロックは、要求された解像度レベル数に従って分析される。
【0046】
第1の解像度レベルで得られた、周波数サブバンドブロックLL以外の周波数サブバンドブロック(LH,HL,HH)は、メモリ25へ供給され、次の解像度レベルでの周波数分析がなされることなく、符号化モジュール26によって量子化及びエントロピー符号化される。符号化モジュール26は、第1の解像度レベルで得られたサブバンドブロックと等しい所定サイズのブロックに対して、量子化及びエントロピー符号化を実行するように構成されている。
【0047】
垂直及び水平フィルタリング22,23は、画像内に形成されたブロックサイズと等しい所定サイズ(W×H)、つまり固定のサンプル数のブロックに対して動作するため、メモリ24は、各ブロックを分析した際に生成された低周波サンプルを含むブロック、即ち各周波数サブバンドブロックLLを記憶し、それらをグループ化して要求されるサイズのブロックを形成することが可能である。そして、これらのサブバンドブロックのグループは、垂直フィルタリング22へ供給される。
【0048】
尚、最終分解レベルで得られた周波数サブバンドブロックLLについては、これ以上のフィルタリングはなされないため、メモリ24に記憶されなくても良い。
【0049】
一例として、図5に符号化される画像の一部を示す。同図において、Biはブロックを示す(iは、ブロックの順位を示す整数である)。
【0050】
本実施形態においては、1つのブロックは、64×64サイズのサンプルを有する4角形状である。ここで注意すべき点は、ブロックのサイズは画像のそれと比べて小さいことである。加えて、これらのブロックは、隣接するブロック間において1行及び/又は1列が重なり合っている。そのため各ブロックは、実際は(64(+1))×(64(+1))のサンプルを含む。隣接ブロック間の重なり合いによる利点及びエッジフィルタリングについては、フランス国特許出願No. 99 02303 及び 99 02305に詳述されている。
【0051】
ブロック内において、サンプルは所定の順番、例えば、左上の角から右下の角へジグザグに読み出される。又、各ブロックは、図5に示されているように所定の順番でRAM103から読み出される。この読み出し順としては、図5ではジグザグであるがこれに限るものではない。つまり、現在処理されているデータのメモリ占有量が最小となる順序、つまり、処理回路104内において要求されるメモリサイズが最小となる順序で実行されるのであれば、他の読み出し順であっても構わない。
【0052】
この点について更に詳しく説明する。
【0053】
周波数サブバンドブロックLLをグループ化して再分析を実行するためには、図6に示されるように、ブロックBiと同サイズのブロックを解像度レベル毎に生成する必要がある。この場合、各周波数サブバンドブロックLL1,LL2,LL3,LL4のブロック内での位置関係と、各周波数サブバンドブロックが関係する画像サンプルの画像上での位置関係とが対応していなければならない。
【0054】
又、図5に示されるグループ化を効率的に行うには、前記位置関係を考慮して、グループ化の対象となるブロックをグループ単位とし、該グループ単位内において連続的にブロックを処理すればよい。本実施形態においては、例えば、互いに隣接するB1,B2,B3,B4が1つのグループ単位となる。この手法によれば、処理回路104内に準備すべきメモリとしては、各解像度レベルにおいて周波数サブバンドブロックLL1,LL2,LL3,LL4を記憶可能な容量さえあれば良いので、要求されるメモリ容量は最小限で済む。
【0055】
具体的には、例えば、ブロックB1→B2→B5→B6→B3→B4の順番で分析を実行した場合、周波数サブバンドブロックLL1,LL2,LL3,LL4をグループ化するためには、途中で生成されたLL5,LL6を待機させておくための余分なメモリスペースが必要となるため、より大きなメモリスペースが必要となる。しかし、本実施形態のようにブロックB1→B2→B3→B4の順番で分析を実行すれば、最短時間でグループ化が可能であると共に、そのグループ単位を直ちにモジュール22に出力することができるため、前者のような余分なメモリスペースが必要でなくなる。
【0056】
尚、本実施形態において4ブロックからなる各グループ単位は、それら自身マクロブロックのサブバンドブロックとして扱われる。マクロブロックとは、図5中の太線で囲まれた領域であり、要求される解像度レベルに応じて対象となるブロック数が変化する。具体的には、最終i解像度レベルで要求されるマクロブロックは、(画像の垂直方向2i-1個)×(水平方向2i-1個)のブロックから構成される。
【0057】
又、前記グループ単位は、各解像度レベルにおいて生成された周波数サブバンドブロックLLを集める単位に相当するが、これは、各解像度レベルに応じて階層的に変化する。つまり、第2解像度レベルでは2×2個のブロックによって構成されていたグループ単位は、解像度レベル数が大きくなるほど、対象となるブロック数が増えていく。具体的には、最大解像度レベル数がiである場合に、第j(j<i)解像度レベルにおけるグループ単位は、(画像の垂直方向2j-1個)×(水平方向2j-1個)のブロックから構成される。そして各グループ単位で、前の解像度レベルにおいて生成された周波数サブバンドブロックLLを収集し、グループ化する。
【0058】
図5においては、第3解像度レベルの分解のための、ブロック処理順の一例を連続線で示している。グループ単位内の4つのブロックは、続くグループ単位の処理が開始される以前に全て処理される。同様に、一つのマクロブロックは、続くマクロブロックの処理が開始される以前に、完全に処理される。4つのブロックにおけるブロック処理順は、所定の順番であるものの、図5に示されるようなジグザグ順である必要はない。例えば、B1→B3→B2→B4であっても構わない。重要なことは、続くグループ単位の処理を開始する以前に、現在のグループ単位内における全てのブロックが処理されることである。これは、各解像度レベルについて同様である。
【0059】
上記処理は言い換えると、1つのマクロブロック内において、要求される全ての解像度レベルによるフィルタリングが実行されるということである。即ち、現在処理されているマクロブロックのデータだけがメモリに保持され、要求された全ての解像度レベルによるフィルタリングがなされる。
【0060】
先に述べたように、マクロブロック内に含まれるブロック数は解像度レベル数に依存する。具体的には、一つのマクロブロックは、第3解像度レベルで16ブロック、第4解像度レベルで64ブロック、第5解像度レベルで256ブロックを含む。
【0061】
ここで、処理回路104の説明に戻る。(64(+1))×(64(+1))サンプルのサイズを有するブロックBiは、垂直及び水平フィルタリング22,23におけるフィルタリングによって、4つの周波数サブバンドブロックLLi,LHi,HLi,HHiが生成される。ここで、周波数サブバンドブロックLLiは(32(+1))×(32(+1))サンプルのサイズを有し、一方、ブロックLHi,HLi,HHiは、各々32×32サンプルのサイズを有するように分析される。
【0062】
周波数サブバンドブロックLLiは、画像の垂直,水平方向の2分析方向における低周波サンプルからなる。周波数サブバンドブロックLHiは、第1分析方向における高周波サンプルと他の分析方向における低周波サンプルからなる。周波数サブバンドブロックHLiは、第1分析方向における低周波サンプルと他の分析方向における高周波サンプルからなる。そして周波数サブバンドブロックHHiは、2つの分析方向における高周波サンプルからなる。
【0063】
メモリ25は、現在処理中であるブロックBiの分析結果である周波数サブバンドブロックLLi,LHi,HLi,HHiを受け取り、それらを記憶する。本実施形態によればメモリ25は、16ビットで表現された(32(+1))×(32(+1))サンプルを有する1ブロックと、16ビットで表現された32×32サンプルを有する3ブロックを記憶するために、少なくとも64ビットの1024(+17)ワードの記憶容量を有する。
【0064】
コントローラ20は、メモリ25内の4つの周波数サブバンドブロックから一つを選択して、符号化モジュール26へ転送する。符号化モジュール26は、受け取ったデータの量子化及びエントロピー符号化を実行する。
【0065】
上述したように、メモリ24は、垂直及び水平フィルタリング22,23によるブロックの分解によって生じた、低周波サンプルからなる周波数サブバンドブロックLLiを受け取る。但し、最低解像度レベルについては除かれる。これは、最終分解レベルのデータについては、更なる分析が必要ないためである。
【0066】
図6は、メモリ24の構成を示している。メモリ24は、垂直及び水平フィルタリング22,23によって各解像度レベルで生じた周波数サブバンドブロックLLiを格納すべく、4つの領域を有している。尚、ここでは最大解像度レベルを4としている。尚、最大解像度レベルが3であれば、前記メモリ領域は3つで良い。
【0067】
各メモリ領域は、各解像度レベルにおいて発生した周波数サブバンドブロックLLiを格納し、16ビット表現された(32(+1))×(32(+1))サンプルのサイズを有する4つの周波数サブバンドブロックLLiから得られた、(64(+1))×(64(+1))サンプルを記憶可能とする分の容量を有する。尚、各メモリ領域において、サイズ(32(+1))×(32(+1))の4つの周波数サブバンドブロックLLiは、例えば、左上のブロックLL1の33行目は右上のブロックLL2の第1行と同じ行となるように、隣接するブロック間で1行及び/又は1列が重なり合っている。その結果、サイズ(32(+1))×(32(+1))の4つの周波数サブバンドブロックLLiをグループ化しても、サイズ(64(+1))×(64(+1))のブロックとなる。各ブロックLLiは、ジグザグ走査に従ってメモリ24に書き込まれる。
【0068】
メモリ領域が埋められると直ぐに、そのデータは垂直フィルタリング22へ供給され、再分析される。そして、全てのブロックについて全解像度の分析が終了すると、一連の処理を終了する。
【0069】
次に、図7について説明する。図7は、図4に示した処理回路104における処理シーケンスを示すものであるが、これは、図3に示した構成で実行されるソフトウエアの実行ステップに対応する。以下、特に対応する図3の構成におけるメモリ領域については、()内に記す。
【0070】
ステップE1では、処理される第1ブロックを示すために、ワーキングパラメータiを1へ初期化する。即ちパラメータiは、現在処理中であるブロックの順番を示す。続くステップE2において、分解の第1解像度レベルを示すために、ワーキングパラメータLを1へ初期化する。即ちパラメータLは、規在処理中である解像度レベルを示す。
【0071】
続くステップE3では、現在処理中である解像度レベルが第1解像度レベルであるか否かを判定する。第1解像度であればステップE4に進み、ブロックBiがメモリ21(第3図のRAM203内に割り当てられた作業用のメモリ領域)に読み込まれると共に、該ブロックBiを周波数分析する。そして、分析結果である4つの周波数サブブロックLLi,LHi,HLi,HHiはメモリ25(第3図のRAM203のバッファメモリとして割り当てた領域)に記憶される。
【0072】
一方、ステップE3において、現在処理中である解像度レベルが第1解像度でなければステップE5に進む。ステップE5では、メモリ24に記憶されている、前の解像度レベルにおいて生成された周波数サブブロックLLをグループ化したブロックについて、周波数分析を行う。
【0073】
ステップE4,E5の終了後は、ステップE7へ進み、高周波サンプルからなる周波数サブバンドブロックLHi,HLi,HHiを量子化及びエントロピー符号化する。尚、この処理は周知であるため、ここでは詳述しない。
【0074】
次いでステップE8では、現在処理中である解像度レベルが最大解像度レベルであるか否かを判定する。本実施形態では最大解像度レベルを4としているため、パラメータLが4に等しいか否かを判定する。
【0075】
最大解像度レベルであればステップE9に進み、周波数サブバンドブロックLLiも同様に、量子化及びエントロピー符号化する。これは、メモリ24に周波数サブブロックLLiを記憶する必要がないことを意味する。
【0076】
一方、ステップE8において最大解像度レベルでなければステップE10に進み、周波数サブバンドブロックLLiを、現在処理中である解像度レベルLに対応するメモリ24の所定領域に記憶する。
【0077】
ステップE10の処理後はステップE11に進む。ステップE11では、第1解像度レベルに対応するメモリ24の所定領域が、周波数サブバンドブロックLLiにより埋められているか否か、即ち、第2解像度レベルでのフィルタリング対象となる周波数サブブロックLLiが所定のサイズのブロックにグループ化されているか否かを判定する。尚、本実施形態におけるブロックサイズは、(64(+1))×(64(+1))サンプルである。
【0078】
ステップE11における判定結果がyesであれば、ステップE12に進み、パラメータL=2を設定する。そしてステップE3へ進み、第1解像度レベルに対応するメモリ24の所定領域に格納された周波数サブバンドブロックLLiをフィルタリングする。
【0079】
一方、ステップE11における判定結果がnoであれば、ステップE13に進み、第2解像度レベルに対応するメモリ24の所定領域が、周波数サブバンドブロックLLiにより埋められているか否か、即ち、第3解像度レベルでのフィルタリング対象となる周波数サブブロックLLiが所定のサイズのブロックにグループ化されているか否かを判定する。
【0080】
ステップE12における判定結果がyesであれば、ステップE14に進み、パラメータL=3を設定する。そしてステップE3へ進み、第2解像度レベルに対応するメモリ24の所定領域に格納された周波数サブバンドブロックLLiをフィルタリングする。
【0081】
一方、ステップE13における判定結果がnoであれば、ステップE15に進み、第3解像度レベルに対応するメモリ24の所定領域が、周波数サブバンドブロックLLiにより埋められているか否か、即ち、第4解像度レベルでのフィルタリング対象となる周波数サブブロックLLiが所定のサイズのブロックにグループ化されているか否かを判定する。
【0082】
ステップE15における判定結果がyesであれば、ステップE16に進み、パラメータL=4を設定する。そしてステップE3へ進み、第3解像度レベルに対応するメモリ24の所定領域に格納された周波数サブバンドブロックLLiをフィルタリングする。
【0083】
尚、上記E11〜E16で示した様なステップ数は本来、選択された解像度レベル数に依存する。
【0084】
ステップE15における判定結果がnoであれば、ステップE17に進み、符号化対象である画像全体の処理が終了したか否かを判定する。
【0085】
画像全体の処理が終了していなければステップE18へ進み、画像中の続くブロックを入力するためにワーキングパラメータiを1増加させる。上述したように、ブロックは所定の順番で処理される。ステップE18の終了後、処理はステップE2に進む。
【0086】
一方、ステップE17において画像全体の処理が終了していればステップE19に進み、全てのメモリを空にし、メモリ25に収納されているデータがあればたとえ不完全であってもこれを量子化及び符号化する。これにより、画像の符号化は終了する。
【0087】
尚、本発明は上述した実施形態に限定されず、当業者であれば容易に実施可能である他の異なる形態をも包含している。具体的には、本発明におけるブロックベースの離散ウェブレット変換装置及び方法は、スキャナ、複写機、デジタルカメラ等の一部として搭載されて良い。又、プログラムの形態であっても良い。
【0088】
【発明の効果】
以上説明したように本発明によれば、デジタル信号に対してウェブレット変換を行う際に、処理データによるメモリ占有の度合いを減少させることが可能となる。
【図面の簡単な説明】
【図1】本発明に係る一実施形態におけるのデータ処理装置の構成を示す図である。
【図2】本実施形態におけるデータ符号化部2の構成を示す図である。
【図3】本実施形態におけるデータ符号化部2の構成を示す図である。
【図4】図2に示す処理回路104の具体的構成例を示す図である。
【図5】本実施形態におけるブロックの処理順を示す図である。
【図6】本実施形態におけるメモリ24の構成例を示す図である。
【図7】本実施形態におけるデジタル信号変換方法を示すフローチャートである。
Claims (14)
- 画像に対して離散ウェブレット変換を施すデジタル信号変換方法であって、
前記画像を、W×H個のピクセルを有する複数の第1ブロックへ分割するブロック生成ステップと、
前記第1ブロックの各々をLL,LH,HL,HHの各周波数サブバンドブロックにウェブレット変換する変換ステップと、
前記周波数サブバンドブロックLLを記憶し、該周波数サブバンドブロックLLに基づいて前記第1ブロックと同サイズの第2ブロックを生成する再ブロック生成ステップと、
前記第2ブロックを離散ウェブレット変換する再変換ステップと、
を有することを特徴とするデジタル信号変換方法。 - 前記ブロック生成ステップにおいては、前記画像を、その水平及び垂直方向に2×2個の前記第1ブロックからなる、複数の第1グループに分割し、
前記変換ステップ、前記再ブロック生成ステップ、及び前記再変換ステップは、前記第1グループ単位で実行されることを特徴とする請求項1記載のデジタル信号変換方法。 - 更に、前記再変換ステップにおける変換によって生成される周波数サブバンドブロックLLを、前記第1グループ毎に記憶し、前記第1ブロックと同サイズの第3ブロックを生成する再々ブロック生成ステップと、
前記第3ブロックをウェブレット変換する再々変換ステップと、を有し、
前記再ブロック生成ステップにおいては、前記画像を、その水平,垂直方向に2×2個の前記第1グループからなる、複数の第2グループに分割し、
前記再々ブロック生成ステップ及び前記再々変換ステップは、前記第2グループ単位で実行されることを特徴とする請求項2記載のデジタル信号変換方法。 - 要求される解像度レベルが第i(i>1)レベルである場合に、前記再ブロック生成ステップ及び前記再変換ステップにおいては、
前記画像を、前レベルの処理において生成されたグループ毎の周波数サブバンドブロックLLの2×2個からなる、複数の次グループに更に分割し、該次グループ単位に離散ウェブレット変換を施す処理を、再帰的に(i−1)回繰り返し実行することを特徴とする請求項2記載のデジタル信号変換方法。 - 要求される解像度レベルが第i(i>1)レベルである場合に、前記再ブロック生成ステップにおいては、
前記次グループのそれぞれが、前記画像の水平,垂直方向に2×2個の、第(i−1)レベルの解像度におけるグループによって構成されるようにすることを特徴とする請求項4記載のデジタル信号変換方法。 - 前記再ブロック生成ステップにおいては、前レベルの処理において生成されたグループ毎の周波数サブバンドブロックLLの集合によって、前記第1ブロックと同サイズのブロックを生成することを特徴とする請求項5記載のデジタル信号変換方法。
- 前記第1ブロックのサイズは、Wを垂直方向のピクセル数、OPを隣接ブロックと重なったピクセル数とすると、[2W+OP]2であることを特徴とする請求項1記載のデジタル信号変換方法。
- 請求項1乃至7のいずれか1項に記載のデジタル信号変換方法を実行する装置を実現するためのコンピュータプログラムを記憶した記憶媒体。
- 請求項1乃至7のいずれか1項に記載のデジタル信号変換方法を実行可能なスキャナ装置。
- 請求項1乃至7のいずれか1項に記載のデジタル信号変換方法を実行可能な複写機。
- 請求項1乃至7のいずれか1項に記載のデジタル信号変換方法を実行可能なデジタルカメラ。
- 画像に対して離散ウェブレット変換を施すデジタル信号変換装置であって、
前記画像を、W×H個のピクセルを有する複数の第1ブロックへ分割するコントローラと、
前記第1ブロックの各々をLL,LH,HL,HHの各周波数サブバンドブロックにウェブレット変換するフィルタリング回路と、
前記周波数サブバンドブロックLLに基づいて前記第1ブロックと同サイズの第2ブロックを生成するために該周波数サブバンドブロックLLを記憶するメモリ回路と、を有し、
前記フィルタリング回路は更に、前記第2ブロックを離散ウェブレット変換することを特徴とするデジタル信号変換装置。 - 請求項1乃至7のいずれか1項に記載のデジタル信号変換方法を実行する符号化方法。
- 請求項12に記載のデジタル信号変換装置を実装した符号化装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR9904746 | 1999-04-15 | ||
FR9904746A FR2792432B1 (fr) | 1999-04-15 | 1999-04-15 | Dispositif et procede de transformation de signal numerique |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2000350208A JP2000350208A (ja) | 2000-12-15 |
JP2000350208A5 JP2000350208A5 (ja) | 2007-05-10 |
JP4514169B2 true JP4514169B2 (ja) | 2010-07-28 |
Family
ID=9544454
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000115329A Expired - Fee Related JP4514169B2 (ja) | 1999-04-15 | 2000-04-17 | デジタル信号変換装置及び方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US6944349B1 (ja) |
JP (1) | JP4514169B2 (ja) |
FR (1) | FR2792432B1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4067281B2 (ja) * | 2001-02-20 | 2008-03-26 | 三洋電機株式会社 | 画像処理方法とその方法を利用可能な画像符号化装置および画像復号装置 |
FR2834162A1 (fr) * | 2001-12-20 | 2003-06-27 | Koninkl Philips Electronics Nv | Systeme de communication de donnees selon un principe de commutation par paquets |
FR2842983B1 (fr) * | 2002-07-24 | 2004-10-15 | Canon Kk | Transcodage de donnees |
JP4129694B2 (ja) * | 2006-07-19 | 2008-08-06 | ソニー株式会社 | 情報処理装置および方法、プログラム、並びに記録媒体 |
KR100834669B1 (ko) | 2006-10-20 | 2008-06-02 | 삼성전자주식회사 | 썸네일 이미지 생성을 위한 웨이블릿 변환 기반 이미지부호화기, 복호화기 및 그 방법 |
CN101689357B (zh) | 2007-04-11 | 2015-03-04 | Red.Com公司 | 摄像机 |
US8237830B2 (en) | 2007-04-11 | 2012-08-07 | Red.Com, Inc. | Video camera |
JP4626707B2 (ja) * | 2008-12-08 | 2011-02-09 | ソニー株式会社 | 情報処理装置および方法 |
US8611652B2 (en) | 2009-12-16 | 2013-12-17 | Red.Com, Inc. | Resolution based formatting of compressed image data |
WO2014127153A1 (en) | 2013-02-14 | 2014-08-21 | Red. Com, Inc. | Video camera |
US20140294314A1 (en) * | 2013-04-02 | 2014-10-02 | Samsung Display Co., Ltd. | Hierarchical image and video codec |
US10417766B2 (en) * | 2014-11-13 | 2019-09-17 | Samsung Electronics Co., Ltd. | Method and device for generating metadata including frequency characteristic information of image |
EP3649783A1 (en) | 2017-07-05 | 2020-05-13 | Red.Com, Llc | Video image data processing in electronic devices |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04181819A (ja) * | 1990-11-16 | 1992-06-29 | Sony Corp | 符号化データの受信装置及び方法 |
JPH10224788A (ja) * | 1997-02-05 | 1998-08-21 | Sharp Corp | 画像符号化装置及び画像復号装置 |
JPH10243400A (ja) * | 1997-02-28 | 1998-09-11 | Noriyuki Fujiwara | 画像変換方式 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5315670A (en) * | 1991-11-12 | 1994-05-24 | General Electric Company | Digital data compression system including zerotree coefficient coding |
US5412741A (en) * | 1993-01-22 | 1995-05-02 | David Sarnoff Research Center, Inc. | Apparatus and method for compressing information |
US5602589A (en) * | 1994-08-19 | 1997-02-11 | Xerox Corporation | Video image compression using weighted wavelet hierarchical vector quantization |
EP0857392B1 (en) * | 1995-10-25 | 2004-08-11 | Sarnoff Corporation | Overlapping block zerotree wavelet image coder |
US5710835A (en) * | 1995-11-14 | 1998-01-20 | The Regents Of The University Of California, Office Of Technology Transfer | Storage and retrieval of large digital images |
AUPO600897A0 (en) * | 1997-04-04 | 1997-05-01 | Canon Information Systems Research Australia Pty Ltd | An efficient method of image compression comprising a low resolution image in the bit stream |
EP0905651A3 (en) * | 1997-09-29 | 2000-02-23 | Canon Kabushiki Kaisha | Image processing apparatus and method |
US6332030B1 (en) * | 1998-01-15 | 2001-12-18 | The Regents Of The University Of California | Method for embedding and extracting digital data in images and video |
US6154493A (en) * | 1998-05-21 | 2000-11-28 | Intel Corporation | Compression of color images based on a 2-dimensional discrete wavelet transform yielding a perceptually lossless image |
US6201897B1 (en) * | 1998-11-09 | 2001-03-13 | Earth Resource Mapping | Transformation and selective inverse transformation of large digital images |
US6466698B1 (en) * | 1999-03-25 | 2002-10-15 | The United States Of America As Represented By The Secretary Of The Navy | Efficient embedded image and video compression system using lifted wavelets |
-
1999
- 1999-04-15 FR FR9904746A patent/FR2792432B1/fr not_active Expired - Fee Related
-
2000
- 2000-04-14 US US09/550,319 patent/US6944349B1/en not_active Expired - Fee Related
- 2000-04-17 JP JP2000115329A patent/JP4514169B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04181819A (ja) * | 1990-11-16 | 1992-06-29 | Sony Corp | 符号化データの受信装置及び方法 |
JPH10224788A (ja) * | 1997-02-05 | 1998-08-21 | Sharp Corp | 画像符号化装置及び画像復号装置 |
JPH10243400A (ja) * | 1997-02-28 | 1998-09-11 | Noriyuki Fujiwara | 画像変換方式 |
Also Published As
Publication number | Publication date |
---|---|
US6944349B1 (en) | 2005-09-13 |
FR2792432A1 (fr) | 2000-10-20 |
JP2000350208A (ja) | 2000-12-15 |
FR2792432B1 (fr) | 2001-07-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4365957B2 (ja) | 画像処理方法及びその装置及び記憶媒体 | |
US6560369B1 (en) | Conversion of wavelet coded formats depending on input and output buffer capacities | |
JP4493215B2 (ja) | ウェーブレット係数の方向性予測コード化法を用いた画像圧縮 | |
US6768819B2 (en) | Image processing apparatus and method, and storage medium used therewith | |
EP1722572B1 (en) | 2-dimensional signal encoding/decoding method and device | |
JP4514169B2 (ja) | デジタル信号変換装置及び方法 | |
US7133567B2 (en) | Image coding apparatus and image coding method | |
GB2303031A (en) | Reversible wavelet transform and embedded codestream manipulation | |
US7302105B2 (en) | Moving image coding apparatus, moving image decoding apparatus, and methods therefor | |
US8369631B2 (en) | Methods and devices for coding and decoding, a telecommunication system and computer program implementing them | |
JP2000341693A (ja) | デジタル信号変換方法及び装置 | |
US20110091123A1 (en) | Coding apparatus and coding method | |
US8611686B2 (en) | Coding apparatus and method | |
US7542611B2 (en) | Image processing apparatus and method for converting first code data sets into second code data for JPEG 2000 and motion JPEG 2000 | |
JP2000341689A (ja) | ウェーブレット逆変換装置及び方法、並びにウェーブレット復号装置及び方法 | |
KR100529540B1 (ko) | 웨이블릿 변환을 이용한 영상압축방법 | |
US20020057276A1 (en) | Data processing apparatus, processor and control method | |
CN113473139A (zh) | 一种图像处理方法和图像处理装置 | |
US7565024B2 (en) | Run length coding and decoding | |
US7095897B2 (en) | Zero length or run length coding decision | |
JP4678814B2 (ja) | 画像処理方法及び装置 | |
JP2006033161A (ja) | 符号化処理装置 | |
JP3990949B2 (ja) | 画像符号化装置及び画像符号化方法 | |
JP4444480B2 (ja) | フィルタ処理装置 | |
JP4012004B2 (ja) | 画像処理装置及び方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070314 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070314 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20070314 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080813 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100304 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100326 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100415 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100507 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100510 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140521 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |