JP2001257596A - データ処理方法及び装置 - Google Patents

データ処理方法及び装置

Info

Publication number
JP2001257596A
JP2001257596A JP2001042895A JP2001042895A JP2001257596A JP 2001257596 A JP2001257596 A JP 2001257596A JP 2001042895 A JP2001042895 A JP 2001042895A JP 2001042895 A JP2001042895 A JP 2001042895A JP 2001257596 A JP2001257596 A JP 2001257596A
Authority
JP
Japan
Prior art keywords
coefficient
coefficients
tile
level
inverse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001042895A
Other languages
English (en)
Other versions
JP4248754B2 (ja
Inventor
Barkner Catherine
バークナー キャサリン
L Schwarz Edward
エル シュワルツ エドワード
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of JP2001257596A publication Critical patent/JP2001257596A/ja
Application granted granted Critical
Publication of JP4248754B2 publication Critical patent/JP4248754B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/467Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/48Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • H04N19/64Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
    • H04N19/645Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission by grouping of coefficients into blocks after the transform

Abstract

(57)【要約】 【課題】 ウェーブレット・ベースの圧縮/伸長システ
ムにおいて、タイル境界歪みを除去する。 【解決手段】 タイリング・ブロック901で分割され
た各タイルは別々に圧縮器902により圧縮される。伸
長器1003は、圧縮されたタイルを伸長するが、その
際に、近傍情報を利用して、タイル境界歪みを除去する
ためのデタイリングを行う。伸長されたタイルは1つの
画像に再合成される。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、データ処理の分野
に係り、特に、ウェーブレットを利用するデータ圧縮/
伸長の分野に関する。より詳細には、本発明は、任意の
ウェーブレットフィルタを使用する場合のタイル境界歪
みを除去する技術に関する。
【0002】
【従来の技術】実用的な画像圧縮システムでは、画素ド
メイン並びに変換係数ドメインにおいて独立したタイル
に分割された画像の処理が重要である。単純な矩形のタ
イルに分割する方法が、実行するのに最も簡便な方法で
ある。タイリングによって、矩形の対象領域(ROI)
が符号器オプションとしても復号器オプションとしても
可能となり、また、省メモリ動作及び並列処理が容易に
なる。
【0003】しかしながら、ウェーブレットをベースに
したロッシィ(損失のある)圧縮システムにおいては、
個々のタイルを単純に復号化したのでは目障りなタイル
境界歪みが発生することがある。ロッシィのフルフレー
ム・ウェーブレットベース圧縮によって生じる歪みは、
一般的に、圧縮画像上のエッジの周囲に”滑らかな”、
例えばリンギングとして現れるが、実際には「シャー
プ」でも「尖鋭(peaky)」でもない。すなわち、原画像
の独立したタイルに対しウェーブレット変換を用いて計
算したロッシィ圧縮画像では、圧縮されたタイルそれ自
体は滑らかに見えるが、隣のタイルとのつなぎ目が急峻
なエッジ型の境界になることがある。このようなタイル
境界歪みが発生するのは、量子化に用いられる変換係数
が、互いに素な画素集合から計算されるためである。タ
イル境界歪みは、どのようなフィルタが選択されても発
生する可能性がある。境界でどのようなフィルタ又は拡
張ルール(対称拡張、レプリケーション、反対称拡張)
が用いられたとしても、境界の反対側の実際の画像と調
和せず、画像によっては歪みを生じる。タイル境界歪み
は、許容できないような見え方をすることがしばしばあ
り、低ビットレートでは特にそうである。
【0004】DCT圧縮画像のブロック歪み除去の分野
では重要な研究がなされている。タイル境界歪みを除去
するための1つの方法は、後処理ステップを適用し、ロ
ーパスフィルタを用いて圧縮画像の境界を単純に平滑化
する方法である。しかしながら、この方法は、好結果を
得るためには画像モデルを必要とし、したがって、あら
ゆる画像に効果があるわけではない。一般的に、境界で
ローパスフィルタを用いて平滑化すると新たな歪みが生
じる。
【0005】もう1つの方法はデタイリング(detiling)
によって解決する方法であり、これは復号器に実装さ
れ、様々な量子化ウェーブレット係数より得られる情報
を利用する。DCTについては、この条件に合致する一
方法がJPEG標準のセクションK8に記載されてい
る。 「W.G. Pennebaker 及び J.L. Mitchell,”JPEG -
Still Image and Data Compression Standard”,Van N
orstrand Reighhold, NewYork,1993」を参照されたい。
この方法は、量子化された係数に作用するもので、量子
化係数を利用して所定の係数に対する多項式近似を計算
する。この多項式モデルはDCTとは本来関係がないの
で、この方法はかなり複雑な計算を必要とする。もう1
つの周知の方法は凸集合射影法(Projection Onto Conve
x Sets)である。「A. Kakhor,”Iterative Procedure f
or Reduction of Blocking Effects in Transform Codi
ng”,IEEE Trans. Circ. Sys.,vol. 2, no. 1, pp. 91-
95,1992」を参照されたい。この方法は、変換ドメイン
では規定不可能なモデルを必要とし、また、再帰的手法
を変換ドメインとデータ・ドメイン間を行き来させるよ
うに切り替える必要があるため、計算コストの上昇をま
ねく。
【0006】ウェーブレット・ベースの圧縮におけるブ
ロック歪みを回避する一方法が、「J.K. Eom, Y.S. Kil
n及びJ.H. Kim, ”A Block Wavelet Transform for Sub
-band Image Coding/Decoding”, SPIE Electroinc Ima
ging, vol.2669, (San Jose, California), pp. 169-7
7, January 1996」に提案されている。この方法におい
ては、オーバーラップしたタイルのウェーブレット係数
が計算される。タイルのオーバーラップ・サイズはウェ
ーブレット・ツリー上の最高分解レベルに依存する。オ
ーバーラップ領域より計算されたウェーブレット係数を
保存することは、フルフレーム分解から選択した係数を
保存することと等価である。分解レベルが高くなるほ
ど、より多くのフルフレーム・ウェーブレット係数を保
存する必要がある。「ライン・ベース(line-based)」
法又は「ローリング・バッファ(rolling buffer)」法
でも同様の保存を要する。これらの方法では、メモリの
ランダムアクセス及び並列処理が面倒になる。
【0007】
【発明が解決しようとする課題】以上の諸点に鑑み、本
発明の目的は、ウェーブレット・ベースの圧縮/伸長に
おけるタイル境界歪みを除去するための新規かつ効果的
な方法及び装置を提供しようとするものである。
【0008】
【課題を解決するための手段】前記課題を解決するた
め、本発明は以下に列挙するような特徴を有するもので
ある。すなわち、請求項1乃至10記載のデータ処理方
法の特徴は、請求項1記載のように、複数の圧縮データ
集合を伸長し、その際に、第1の圧縮データ集合に対し
て、少なくとも1つの他の圧縮データ集合から得られる
近傍情報を利用しデタイリングを行い、そして、複数の
伸長されたタイルを1つの画像に再合成することであ
る。
【0009】もう1つの特徴は、請求項2記載のよう
に、ある分解レベルにおけるタイル・ハイパス係数及び
タイル・ローパス係数を、その分解レベルにおける近傍
のハイパス係数及びローパス係数を用いて修正すること
によりデタイリングを行うことである。
【0010】もう1つの特徴は、請求項3記載のよう
に、画像データを複数のタイルに分割するステップ、及
び、前記複数のタイルを別々に圧縮して複数の圧縮デー
タ集合を生成するステップをさらに有することである。
【0011】もう1つの特徴は、請求項4記載のよう
に、(a) タイル変換のsJ,dJ係数に対する1レベル
逆変換を計算してs(J-1)係数を生成し、(b) 前記s
(J-1)係数にシフト順変換を適用して、前記sJ係数の近
似(前記の[外1])を生成し、(c) d係数を0に設
定した前記近似係数(前記の[外2])を用いて1レベ
ル逆変換を行い、前記s(J-1)係数の近似係数(前記の
[外3])を生成し、(d) 前記(b)及び(c)を繰り返し
実行することにより、デタイリングを行うことである。
【0012】もう1つの特徴は、請求項5記載のよう
に、請求項4記載のデータ処理方法において、ローパス
係数のみを用いてタイル境界における順DWTを計算す
るステップ、及び、ローパス係数のみを用いてタイル境
界における逆DWTを計算するステップをさらに含むこ
とである。
【0013】もう1つの特徴は、請求項6記載のよう
に、請求項5記載のデータ処理方法において、伸長後に
サンプルを量子化に整合させるステップをさらに含むこ
とである。
【0014】もう1つの特徴は、請求項7記載のよう
に、請求項1記載のデータ処理方法において、タイルに
対する逆離散ウェーブレット変換(DWT)を計算し、タ
イル境界近傍の1ポジションだけシフトされたローパス
係数の計算、ローパス係数のみを用いるタイル境界の順
DWTの計算、及び、ローパス係数のみを用いるタイル
境界の逆DWTの計算、を繰り返し実行し、順タイルD
WTを計算し、前記順タイルDWTを行うことにより生
成された係数を量子化に整合させ、逆タイルDWTを計
算することによって、デタイリングを行うことである。
【0015】もう1つの特徴は、請求項8記載のよう
に、請求項7記載のデータ処理方法において、順タイル
DWT及び逆タイルDWTの計算を繰り返し行うことで
ある。もう1つの特徴は、請求項9記載のように、請求
項8記載のデータ処理方法において、順タイルDWT及
び逆タイルDWTの計算の繰り返し回数が、フィルタ長
及び分解レベルに依存することである。
【0016】もう1つの特徴は、請求項10記載のよう
に、請求項8記載のデータ処理方法において、順タイル
DWT及び逆タイルDWTの計算の繰り返し回数が、タ
イル境界により影響を受けるs係数の個数に依存するこ
とである。
【0017】請求項11乃至16記載のデータ処理装置
の特徴は、請求項11記載のように、第1の圧縮データ
集合に対して少なくとも1つの他の圧縮データ集合から
得られる近傍情報を利用しデタイリングを行う手段を含
む、複数の圧縮データ集合を伸長するための手段、及
び、複数の伸長されたタイルを1つの画像に再合成する
手段からなることである。
【0018】もう1つの特徴は、請求項12記載のよう
に、前記デタイリングを行うための手段は、ある分解レ
ベルにおけるタイル・ハイパス係数及びタイル・ローパ
ス係数を、その分解レベルにおける近傍のローパス係数
を用いて修正する手段からなることである。
【0019】もう1つの特徴は、請求項13記載のよう
に、画像データを複数のタイルに分割する手段、及び、
前記複数のタイルを別々に圧縮して複数の圧縮データ集
合を生成する手段をさらに有することである。
【0020】もう1つの特徴は、請求項14記載のよう
に、請求項11記載のデータ処理装置において、前記デ
タイリングを行う手段は、タイルに対する逆離散ウェー
ブレット変換(DWT)を計算する手段、タイル境界近
傍の1ポジションだけシフトされたローパス係数の計
算、ローパス係数のみを用いるタイル境界の順DWTの
計算、及び、ローパス係数のみを用いるタイル境界の逆
DWTの計算、を繰り返し実行する手段からなることで
ある。
【0021】もう1つの特徴は、請求項15記載のよう
に、請求項14記載のデータ処理装置において、伸長後
にサンプルを量子化に整合させるための手段をさらに有
することである。
【0022】もう1つの特徴は、請求項16記載のよう
に、請求項11記載のデータ処理装置において、前記デ
タイリングを行う手段は、タイルに対する逆離散ウェー
ブレット変換(DWT)を計算する手段、タイル境界近
傍の1ポジションだけシフトされたローパス係数の計
算、ローパス係数のみを用いるタイル境界の順DWTの
計算、及び、ローパス係数のみを用いるタイル境界の逆
DWTの計算、を繰り返し実行する手段、順タイルDW
Tを計算する手段、前記順タイルDWTを行うことによ
り生成された係数を量子化する手段、及び、逆タイルD
WTを計算する手段からなることである。
【0023】請求項17乃至25記載のウェーブレット
・ベースのデータ処理システムの特徴は、請求項17記
載のように、ウェーブレット変換により係数を複数のタ
イルに伸長するためのものであって、第1の圧縮データ
集合に対して、少なくとも1つの他の圧縮データ集合か
ら得られる近傍情報を利用しデタイリングを行う複数の
伸長器、及び、伸長されたタイルを1つの画像に再合成
するための手段からなることである。
【0024】もう1つの特徴は、請求項18記載のよう
に、前記複数の伸長器は、ある分解レベルにおけるタイ
ル・ハイパス係数及びタイル・ローパス係数を、その分
解レベルにおける近傍のハイパス係数及びローパス係数
を用いて修正することにより、デタイリングを行うこと
である。
【0025】もう1つの特徴は、請求項19記載のよう
に、請求項17記載のデータ処理システムにおいて、画
像データを複数のタイルに分割するタイリング・ブロッ
ク、及び、それぞれが前記複数のタイル中の1つのタイ
ルを独立して圧縮する、前記タイリング・ブロックと接
続された複数の圧縮器をさらに有することである。
【0026】もう1つの特徴は、請求項20記載のよう
に、請求項19記載のデータ処理システムにおいて、前
記複数の圧縮器はそれぞれ、多重レベル順ウェーブレッ
ト変換器、及び、前記多重レベル順ウェーブレット変換
器に接続された符号器からなることである。
【0027】もう1つの特徴は、請求項21記載のよう
に、請求項20記載のデータ処理システムにおいて、前
記多重レベル順ウェーブレット変換器は1つの多重レベ
ル変換器からなることである。
【0028】もう1つの特徴は、請求項22記載のよう
に、請求項18記載のデータ処理システムにおいて、前
記複数の伸長器はそれぞれ、復号器、及び、前記復号器
に接続された多重レベル逆ウェーブレット変換器からな
ることである。
【0029】もう1つの特徴は、請求項23記載のよう
に、請求項22記載のデータ処理システムにおいて、前
記多重レベル逆ウェーブレット変換器は1つの多重レベ
ル変換器からなることである。
【0030】もう1つの特徴は、請求項24記載のよう
に、請求項22記載のデータ処理システムにおいて、前
記多重レベル逆ウェーブレット変換器の少なくとも1つ
のレベルは、同じタイルからの入力係数及び他のタイル
からの入力係数に応答し、デタイリングされた係数を生
成するための係数調整手段、及び、前記係数調整手段に
接続された2次元逆ウェーブレット変換器からなること
である。
【0031】もう1つの特徴は、請求項25記載のよう
に、請求項22記載のデータ処理システムにおいて、前
記多重レベル逆ウェーブレット変換器の少なくとも1つ
のレベルは、同じタイルの係数及び他のタイルから得ら
れる係数に応答し、第1の出力にサンプルを生成する、
デタイリングを行う逆ウェーブレット変換器と、係数を
取り込むように接続され、第2の出力にサンプルを生成
するデタイリングを行わない逆ウェーブレット変換器
と、前記サンプルがタイル境界の影響を受けるか否かに
よって、前記第1の出力又は第2の出力を前記多重レベ
ル逆ウェーブレット変換器の少なくとも1つのレベルの
出力として選択するように接続された制御ブロックから
なることである。
【0032】請求項26乃至29記載のデータ処理方法
の特徴は、請求項26記載のように、符号化データを復
号化して複数の係数を生成するステップ、及び、前記複
数の係数に対し多重レベル逆ウェーブレット変換を行う
ステップからなり、前記多重レベル逆ウェーブレット変
換を行うステップは、少なくとも1つの分解レベルのタ
イル境界係数に対し係数調整を行ってデタイリングした
係数を生成し、前記デタイリングされた係数に対し逆ウ
ェーブレット変換を適用してデータ・サンプルを生成す
ることである。
【0033】もう1つの特徴は、請求項27記載のよう
に、スケールJのスケーリング係数及びウェーブレット
係数に対し予め計算されたフィルタ係数を適用してスケ
ールJ-1の近似係数を生成することにより、係数調整を
行うことである。
【0034】もう1つの特徴は、請求項28記載のよう
に、請求項27記載のデータ処理方法において、前記フ
ィルタ係数の適用は、ある乗数をスケールJのスケーリ
ング係数及びウェーブレット係数に乗算し、それら乗算
の積を加算して前記近似係数を生成することである。
【0035】もう1つの特徴は、請求項29記載のよう
に、請求項27記載のデータ処理方法において、前記フ
ィルタ係数は前記[数1]の条件を満たすことである。
【0036】請求項30及び31記載のデータ処理方法
の特徴は、請求項30記載のように、レベルJのスケー
リング係数及びウェーブレット係数にタイル逆変換を適
用することによりレベルJ-1のタイル・ウェーブレット
分解のためのスケーリング係数を計算するステップ、レ
ベルJ-1のs係数のシフト列にフルフレーム順変換を適
用することにより、レベルJのフルフレーム係数の近似
を計算するステップ、前記s係数のシフト列に逆フルフ
レーム・ウェーブレット変換を適用することにより、レ
ベルJ-1のフルフレーム係数の近似を計算するステッ
プ、前記フルフレーム係数の近似に順タイル変換を適用
することにより、レベルJのs係数の近似を計算するス
テップからなることである。もう1つの特徴は、請求項
31記載のように、レベルJ-1のフルフレーム係数の近
似を計算するステップは、レベルJ-1の全てのs係数が
得られるまで、逆フルフレーム・ウェーブレット変換及
び順フルフレーム・ウェーブレット変換をs係数に繰り
返し適用することである。
【0037】請求項32記載のデータ処理方法の特徴
は、符号化データを復号化して複数の係数を生成するス
テップ、及び、前記複数の係数に対し多重レベル逆ウェ
ーブレット変換を行ってデタイリングされた係数を生成
するステップからなり、前記多重レベル逆ウェーブレッ
ト変換を行うテップはタイル境界近傍の係数の近似を生
成し、フルフレーム・スケーリング係数sJ の近似は前
記[外4]であることである。
【0038】請求項33乃至38記載のデータ処理装置
の特徴は、請求項33記載のように、符号化データを復
号化して複数の係数を生成する手段、及び、前記複数の
係数に対し多重レベル逆ウェーブレット変換を行う手段
とを有し、前記多重レベル逆ウェーブレット変換を行う
手段は、少なくとも1つの分解レベルのタイル境界係数
に対し係数調整を行ってデタイリングされた係数を生成
する手段と、前記デタイリングされた係数に逆ウェーブ
レット変換を適用してデータ・サンプルを生成する手段
とからなることである。
【0039】もう1つの特徴は、請求項34記載のよう
に、係数調整を行う手段は、スケールJのスケーリング
係数及びウェーブレット係数に対し予め計算されたフィ
ルタ係数を適用してスケールJ-1の近似係数を生成する
手段からなることである。
【0040】もう1つの特徴は、請求項35記載のよう
に、前記フィルタ係数は前記[数2]の条件を満たすこ
とである。
【0041】もう1つの特徴は、請求項36記載のよう
に、レベルJのスケーリング係数及びウェーブレット係
数にタイル逆変換を適用することによりレベルJ-1のタ
イル・ウェーブレット分解のためのスケーリング係数を
計算する手段、レベルJ-1のs係数のシフト列にフルフ
レーム順変換を適用することにより、レベルJのフルフ
レーム係数の近似を計算する手段、前記s係数のシフト
列に逆フルフレーム・ウェーブレット変換を適用するこ
とにより、レベルJ-1のフルフレーム係数の近似を計算
する手段、前記フルフレーム係数の近似に順タイル変換
を適用することにより、レベルJのs係数の近似を計算
する手段をさらに有することである。
【0042】もう1つの特徴は、請求項37記載のよう
に、請求項36記載のデータ処理装置において、レベル
J-1のフルフレーム係数の近似を計算する手段は、レベ
ルJ-1の全てのs係数が得られるまで、逆フルフレーム
・ウェーブレット変換及び順フルフレーム・ウェーブレ
ット変換をs係数に繰り返し適用する手段からなること
である。
【0043】もう1つの特徴は、請求項38記載のよう
に、請求項33記載のデータ処理装置において、符号化
データを復号化して複数の係数を生成する手段、及び、
前記複数の係数に対し多重レベル逆ウェーブレット変換
を行ってデタイリングされた係数を生成する手段をさら
に有し、前記多重レベル逆ウェーブレット変換を行う手
段はタイル境界近傍の係数の近似を生成し、フルフレー
ム・スケーリング係数sJ の近似は前記[外5]である
ことである。
【0044】請求項39乃至41記載のデータ処理方法
の特徴は、請求項39記載のように、複数のタイルの圧
縮データを伸長し、該伸長で離散ウェーブレット変換で
生成されるものと異なるフェーズの係数を用いてデタイ
リングを行い、伸長されたタイルを再合成して再構成画
像を作成することである。もう1つの特徴は、請求項4
0記載のように、前記フェーズの係数は元の係数のシフ
ト列からなることである。もう1つの特徴は、請求項4
1記載のように、デタイリングの遂行で、シフト離散ウ
ェーブレット変換のスケーリング係数を求めることであ
る。
【0045】請求項42記載のデータ処理方法の特徴
は、レベルJの係数に逆タイル変換を適用することによ
りタイル・ウェーブレット分解レベルJ-1の係数を計算
し、前記タイル・ウェーブレット分解レベルJ-1の係数
に分析ローパス演算子Hを適用することによりレベルJ
のフルフレーム係数の近似を計算し、レベルJの近似係
数に合成ローパス演算子H*を適用することによりレベ
ルJ-1のフルフレーム係数の近似を計算し、レベルJ-1の
近似係数に順タイル変換を適用してレベルJの新しい係
数を計算することである。
【0046】請求項43記載のデータ処理方法の特徴
は、原画像のフルフレーム・ウェーブレット分解により
生成され、タイル変換における境界修正により影響を受
けるレベルJのハイパス係数のみ0に修正された各再構
成レベルの目標画像に基づいて、あるスケールのタイル
・ハイパス係数を該スケールの近傍ローパス係数を用い
て修正することである。
【0047】
【発明の実施の形態】以下、添付図面を参照し、本発明
によるタイル境界歪み除去方法及び装置について説明す
る。以下の説明において、様々な具体例を提示する。し
かし、当業者には、そのような具体例によることなく本
発明を実施し得ることは明白であろう。一方、本発明を
分かりにくくしないため、周知の構造及び装置はブロッ
ク図の形で表し、詳細には述べない。
【0048】以下の詳細な説明には、コンピュータ・メ
モリ内のデータビット操作のアルゴリズム及び記号表現
によって表された部分がある。このようなアルゴリズム
記述及び表現は、データ処理技術分野において、当業者
が研究内容を他の当業者に最も効率的に伝えるために用
いる手段である。あるアルゴリズムがあり、それが概し
て期待した結果に至る筋の通ったステップの系列だと理
解されるとする。それらのステップは、物理量の物理的
処理を要するステップである。必ずという訳ではない
が、これらの物理量は記憶、転送、結合、比較、その他
処理が可能な電気的または磁気的信号の形をとるのが普
通である。これらの信号をビット、値、要素、記号、文
字、術語、番号などで表わすのが、主に慣用上の理由か
ら便利な場合があることが分かっている。
【0049】しかしながら、このような術語や同様の用
語はすべて適切な物理量に関連付けられるべきであり、
また、それら物理量に付けた便宜上のラベルに過ぎない
ということに留意すべきである。以下の説明より明らか
なように、特に断わらない限り、”処理”、”演
算”、”計算”、”判定”、”表示”などの術語によっ
て論じられることは、コンピュータシステムのレジスタ
及びメモリの内部の物理的(電子的)な量として表現さ
れたデータを処理して、コンピュータシステムのメモリ
やレジスタ、その他同様の情報記憶装置、情報伝送装置
又は表示装置の内部の同様に物理量として表現された他
のデータへ変換する、コンピュータシステムや同様の電
子的演算装置の作用及びプロセスを意味する。
【0050】本発明は、本明細書に述べた処理を実行す
るための装置にも関係するものである。このような装置
は、所要目的のために専用に作られてもよいし、汎用コ
ンピュータを内蔵のコンピュータ・プログラムによって
選択駆動もしくは再構成したものでもよい。そのような
コンピュータ・プログラムは、コンピュータが読み取り
可能な記憶媒体、限定するわけではないが例えば、フロ
ッピー(登録商標)ディスク、光ディスク、CD−RO
M、光磁気ディスクなどの任意の種類のディスク、リー
ドオンリーメモリ(ROM)やランダムアクセスメモリ
(RAM)、EPROM、EEPROM、磁気カード又
は光カードなど、コンピュータのシステムバスに接続さ
れた電子的命令の記憶に適した任意種類の媒体に格納す
ることができる。
【0051】本明細書で提示したアルゴリズム及び表示
は、本質的に、いかなる特定のコンピュータ、その他の
装置とも関わりがない。様々な汎用マシンを、本明細書
に述べる内容に従ったプログラムで使用し得るが、所要
の手順のステップの実行のために、より特化した装置を
作るほうが好都合であるかもしれない。そのような多様
なシステムに必要とされる構造は以下の説明から明らか
になろう。さらに、どのような特定のプログラミング言
語とも関連付けることなく本発明を説明する。本明細書
に述べる本発明の内容を実現するために様々なプログラ
ミング言語を使用し得ることを理解されよう。
【0052】《任意の双直交ウェーブレットフィルタの
ための滑らかな近似によるデタイリング》例えば双直交
ウェーブレットフィルタのようなウェーブレットフィル
タを使用し、滑らかな近似によりデタイリングを行う方
法及び装置について説明する。本明細書に述べる方法は
復号器に組み込まれるもので、ウェーブレット系の平滑
性を利用する。
【0053】任意の双直交ウェーブレットファイルのた
めのデタイリング法の一実施例は、タイル全体にわたっ
て滑らかに再構成するが、ここで「滑らか」とは選択し
た合成ウェーブレット系の滑らかさとして定義される。
本方法は、ウェーブレット系の本来の平滑性が利用され
ていない他の方法とは異なる。本方法は、3-5フィルタ
又はドベシィ(Daubechies)の7-9フィルタを用いるよ
うな多くの圧縮方式に適用できる。本方法は、2,10フィ
ルタ又は2,6フィルタを用いる圧縮方式、例えば、19
95年6月20日出願の”Method and Apparatus for C
ompressionusing Reversible Wavelet Transforms and
an Embedded Codestream”なる表題の米国特許出願第08
/498,695号、及び、1996年5月3日出願の”Compre
ssion and Decompression with Wavelet Style and Bin
ary Style Including Quantization by Device Depende
nt Parser”なる表題の米国特許第5,881,176号に記載さ
れた圧縮方式にも適用できる。
【0054】本明細書に述べる実施例の1つ以上には、
以下に述べる利点の1つ以上がある。第1に、歪み除去
によりタイル境界における目に見えるような画質劣化が
なくなる。第2に、本方法は復号器のオプションであ
る。したがって、符号化時、ロスレス復号化時及び高ビ
ットレート復号時のコストは皆無である。さらに、本方
法は、特定の画像モデルに依存しない。すなわち、本方
法はロッシィ・ウェーブレット圧縮によってもたらされ
る平滑化と調和した平滑化をもたらす。
【0055】本明細書に述べる方法を論ずるため、以下
においてウェーブレットフィルタの特性について説明す
る。タイル境界が滑らかな伸長画像を得るため、レベル
(スケール)ごとに異なった品質目標画像Iqを考え
る。伸長画像Ic の各再構成レベル(スケール)Jで、
原画像Iのフルフレーム・ウェーブレット分解により得
られた画像を、タイル変換における境界修正により影響
を受けるレベルJのハイパス係数のみ修正したものが、
品質目標画像Iq に選ばれる。その修正された係数はす
べて0に設定される。ウェーブレット変換の特性から、
伸長画像は合成ローパスフィルタにより決まる合成スケ
ーリング関数と同じ平滑度を有する。タイル境界歪みを
除去するために、スケールJにおけるタイル・ハイパス
係数の同スケールの近傍ローパス係数を利用した修正に
ついて説明する。
【0056】次のパラグラフにおいて、この1次元逆変
換の1ステップについて具体的に説明する。品質基準の
フルフレーム・ウェーブレット分解は、ローパス係数s
j 及びハイパス係数dj により与えられる(j=
1,...,J)。最も粗いスケールでのローパス係数
j の計算過程において、全スケールのローパス係数s
j(j=1,...,J−1)を中間ステップで計算す
る必要があるが、最も粗いスケールのみを保存するだけ
でよい。これらの係数はローパス演算子H及びハイパス
演算子Hと関連している。すなわち、
【数3】 その後にダウンサンプリングされる。他方、(タイルに
対し別々にウェーブレット変換を適用して得られる)タ
イル・ウェーブレット分解は、演算子
【外6】 を用いて計算される係数
【外7】 (j=1,...,J)によって与えられる。すなわ
ち、
【数4】 両方の演算子手法は全ての係数に適用される。上記の2
つの演算子手法の相違点は、
【外8】 がタイル境界及び画像境界における境界演算を含むのに
対し、H,Gが画像境界における境界演算しか含まない
ことである。逆変換の計算のためには、合成演算子
【外9】 が必要である。逆変換の1ステップは次式により行われ
る。
【数5】
【0057】その目的は、演算子
【外10】 で与えられる逆変換を係数
【外11】 に適用することにより、演算子H*,G*による(sj
j)のフルフレーム逆変換により得られるものと同じ
係数が得られるような、新たな近似係数
【外12】 で係数
【外13】 を置き換えることである。すなわち、
【数6】 ここで
【外14】 は双直交ウェーブレット系による単一レベル分解のため
の一般変換演算子であり、sj,dj はスケールjにお
ける品質基準Iq の係数である。後者の条件は、順タイ
ル変換の境界修正の影響を受けた位置以外では、係数s
j,dj
【外15】 とそれぞれ一致することを意味する。境界修正の影響を
受けた位置では、係数dj は0である。合成フィルタの
長さが2の場合(例えば、2-10 フィルタの場合)、
【数7】 である。このような場合、(2)式を解くことは
【数8】 を解くことである。合成フィルタの長さが2を超える場
合には、(2)式の近似解の計算は2ステップからな
る。まず、
【数9】 となる近似
【数10】 を求め、次に
【数11】 の解を計算する。
【0058】1つの方法は、完全な逆変換とフルフレー
ム順変換を計算して実際の係数sjの近似値を算出する
方法である。この方法で、ロスレス圧縮の場合には正確
な係数sj が得られるが、ロッシィ圧縮の場合には近似
値にか得られないであろう。しかし、この方法は高速な
復号器には利用できないであろう。したがって、目標と
することは
【数12】 となるsj の近似値
【外16】 を求めることである。
【0059】係数
【外17】 を求める手順の一実施例を、3タップのローパス合成フ
ィルタを例に説明する。図1(A)は、タイルに対する
変換により計算されるローパス係数の概要図を示す。こ
れら係数のほとんどはフルフレームに変換を適用して得
られるものと同一であるが、相違のある係数101のよ
うな、タイル境界近傍の一部の係数は相違する。順変換
においてダウンサンプリングが行われるため、係数
j,djは超完備ウェーブレット変換sj m,dj mの係数
集合の部分集合である(mは整数のインデックス)。超
完備変換係数によって、前記(1)式は次のように変形
される。
【0060】
【数13】 この表記法を用いると、変換演算子H,Gを、もとの係
数のシフト列である係数
【外18】 に適用することによって係数
【外19】 を計算することができる。係数
【外20】 が得られたならば、逆変換の1ステップでも係数sj-1
の集合を得られる。
【0061】古典的DWTのためのスケーリング係数
【外21】 を得るための順変換ステップを図1(B)に示す。図1
(B)を参照すれば、行210上のレベル2のs係数に
逆変換を適用すると、行211上のレベル1のs係数が
生成される。例えば、s係数222〜224及び対応し
たd係数に逆変換を適用すると、s係数225が生成さ
れる。より上の分解レベルの係数で、その下の分解レベ
ルの1つの値を生成するために必要とされる係数の個数
は、フィルタの長さによって決まり、また、その分解レ
ベルに左右されるであろう。
【0062】デタイリング法は、超完備ウエー変換によ
り得られる知識を利用しウェーブレット変換のシフトを
計算する。シフトDWTのスケーリング係数
【外22】 を得るための順変換ステップを図1(C)に示す。図1
(C)を参照すれば、行216上のレベル1のs係数に
順変換を適用すると行215上のレベル2のs係数が生
成される。例えば、s係数219,231,233に順
変換を適用すると、係数218及び対応したd係数(不
図示)が生成される。
【0063】双直交ウェーブレット系によるフルフレー
ム変換を利用する場合、スケールJ=2の完全再構成を
得るためには、係数
【外23】 のみを保存するか次レベルの分解計算へ渡せば足りる。
しかし、逆変換の1ステップとシフト順変換の1ステッ
プを適用することによって、保存された情報から係数
【外24】 を計算することができる。この手順をスケール2の品質
基準の係数に適用すれば、中間的な係数
【外25】 を得られる。さらに、係数
【外26】 を使用する代わりに、係数
【外27】 を品質基準の再構成に使用して係数
【外28】 を得ることもできる。これらの追加の係数を再構成に用
いれば、より滑らかな近似が得られる。本明細書で述べ
る方法は、これらのアイデアを「タイル間を滑らかにす
る」ために利用する。近似係数
【外29】 は一連のステップにより計算されるが、最大のスケー
ル、すなわち本例ではスケール2のローパス係数及びハ
イパス係数からスタートする。
【0064】図2は、タイル境界を滑らかにするプロセ
スを示す。本プロセスは、ハードウェア、ソフトウェ
ア、あるいは両者の組み合わせによって構成可能な処理
ロジックにより実行される。
【0065】図2を参照すれば、本プロセスの最初で、
処理ロジックは逆タイル変換の1ステップを係数
【外30】 に適用することにより係数
【外31】 を計算する(処理ブロック201)。次に、処理ロジッ
クは、変換演算子Hを係数
【外32】 に適用することによりフルフレーム係数
【外33】 の近似
【外34】 を計算する(処理ブロック202)。次に、処理ロジッ
クは、逆変換演算子H*を係数
【外35】 に適用することにより
【外36】 の近似
【外37】 を計算する(処理ロジック203)。最後に、処理ロジ
ックは、係数
【外38】 に順タイル変換を適用することにより、新たな係数
【外39】 を計算する。
【0066】上に説明した4ステップは、以下の概略図
並びに図3(A)乃至図3(E)に詳しく示されるが、
その結果は、図1(A)の相違のある係数101の近似
のような、係数の近似を生成することである。
【0067】図3(A)を参照すると、プロセスはレベ
ル2のスケーリング(s)係数及びウェーブレット
(d)係数からスタートする。処理ロジックは、レベル
2の係数に逆タイル変換を適用し、スムーズ・スケーリ
ング係数及びディテール・ウェーブレット係数を用いて
レベル1のスケーリング係数を生成する。この逆変換の
結果が図3(B)に示すレベル1のスケーリング係数で
ある。この段階では、ウェーブレット(d)係数はもは
や利用されない。
【0068】次に、処理ロジックは、レベル1の係数に
順変換を適用してレベル2のスケーリング係数
【外40】 を計算する。これが図3(C)に示されている。
【0069】次に処理ロジックは、シフトされたスケー
リング係数
【外41】 に逆変換を適用し、図3(D)に示す
【外42】 を計算する。
【0070】実際の滑らかな再構成は、この段階で完了
している。しかしながら、逆変換の完全な1ステップの
ための入力データセットとして修正された係数を得る必
要がある場合には、次に処理ロジックは、スケーリング
係数
【外43】 を含むスケーリング係数に順タイル変換を適用してスケ
ーリング係数
【外44】 及びディテール係数
【外45】 を計算する。
【0071】図4は、タイル境界係数を平滑化するため
のプロセスの一実施例のフローチャートである。この処
理は、ハードウェア、ソフトウェア又は両者の組み合わ
せから構成できる処理ブロックによって実行される。図
4を参照すると、処理ロジックは、タイル逆変換をレベ
ルJのs係数及びd係数に適用することによって、レベ
ルJ−1のタイル・ウェーブレット分解のためのs係数
を計算する(処理ロジック401)。次に、処理ロジッ
クは、レベルJ−1のs係数のシフト列に対しフルフレ
ーム順変換を適用することにより、レベルJのフルフレ
ーム係数の近似を計算する(処理ブロック402)。こ
の計算の結果は、レベルJにおける別フェーズのs係数
である。
【0072】次いで、処理ブロックは、処理ブロック4
02で計算されたレベルJのs係数に対し逆フルフレー
ム・ウェーブレット変換を適用することにより、レベル
J−1のフルフレーム係数の近似を計算する(処理ブロ
ック403)。この処理ブロックは、最初の繰り返し
で、タイル境界に影響される最も右側と左側の係数
【外46】 の近似
【外47】 を生成する。2回目以降の繰り返しでは、前回の左側係
数の右にある係数と前回の右側係数の左にある係数の近
似が求められる。
【0073】処理ロジックは、全ての
【外48】 係数が得られたか判定し、全ての
【外49】 係数の近似が得られるまで処理ブロック402,403
を繰り返す(処理ブロック405)。
【0074】その後、処理ロジックは、前に計算したレ
ベルJ−1のs係数に対し順タイル変換の1ステップを
適用することにより、レベルJのs係数の近似
【外50】 を計算する(処理ブロック404)。このような手順
は、より詳しく後述する単純なフィルタ演算として実行
することができる。
【0075】本プロセスをソフトウェアで実行してもよ
い。デタイリングを行わない圧縮/伸長システムの一実
施例のための擬似コードを図25に示す。
【0076】また、デタイリングを行う圧縮/伸長シス
テムのための擬似コードの一例を図26に、別の例を図
27にそれぞれ示す。図26及び図27において、Mは
タイル境界近傍にある、正しい係数と相違する係数の個
数である。
【0077】また、Matlabコードによる実現例を図2
8、図29及び図30に示す。
【0078】さて、ある特定のスケールJにおるデタイ
リングは、スケールJのスケーリング係数及びウェーブ
レット係数に対する単純なフィルタ演算によって行うこ
とができる。修正する必要があるスケールJ-1の係数の
個数並びにフィルタ演算は、所与のウェーブレット系及
びスケールJに依存する。
【0079】図5、図8、及び、図9と図10の組はそ
れぞれ、3-9ウェーブレット系、5-3ウェーブレット系及
び 9-7ウェーブレット系のためのデタイリング・フィル
タ係数の例を示す。これらのウェーブレット系のための
フィルタ係数を以下に示す。 《3-9フィルタ》 分析ローパス: 0.5/sqrt(2) 1.0/sqrt(2) 0.5 /sqrt(2) 分析ハイパス: (-3/64)/sqrt (2) (-3/32)/sqrt (2) (1/4)/sqrt (2) (19/32)/sqrt (2) (1 /4)/sqrt (2) (-3/32)sqrt (2) (-3/64)/sqrt (2) 《5-3フィルタ》 分析ローパス: -0.25/sqrt (2) 0.5/sqrt (2) 1.5/sqrt (2) 0.5/sqrt (2) -0.25/sqrt (2) 分析ハイパス: 0.5/sqrt (2) -1.0/sqrt (2) 0.5/sqrt (2) 《ドベシィ9-7》 分析ローパス: 0.03782846 -0.02384946 -0.11062440 0.37740285 0.85269868 0.37740285 -0.11062440 -0.02384946 0.03782846 分析ハイパス: 0.06543888 -0.04068942 -0.41809227 0.78848562 -0.41809227 -0.04068942 0.06453888
【0080】これらフィルタは、各ローパスフィルタの
係数の総和が1/√2となるように正規化されている。縦
列は、ダウンサンプリングされていてスケーリングに関
わらせる必要がある係数のベクトル、又は、その表題に
示されたポジションにおけるスケールJ-1のスケーリン
グ係数の滑らかな近似を計算するためのスケールJのウ
ェーブレット係数を表している。ポジション”インデッ
クス(index)”は、タイル境界の右側の最初のポジショ
ンを表し、本例では”k”に対応する。”left...”及
び”right...”で記されたポジション・インデックス
は、最初の逆タイル変換ステップのために必要な境界拡
張部分から得られた係数を示す。すなわち、図2及び図
3に図示したステップは、予め計算したフィルタを適用
する単一のステップにまとめることができる。
【0081】これらのフィルタの作用は以下のように説
明することができる。以下において、s係数のためのデ
タイリング・フィルタをf[s]、d係数のためのデタイ
リング・フィルタをf[d]とすれば、
【外51】 のためのデタイリング方法は次の通りである:
【数14】 ここで<a,b>はaとbのベクトル内積を意味する。
【0082】図5に示した3-9ウェーブレット系又は図
8に示した5-3フィルタの場合
【数15】
【0083】例えば、図5を参照すれば、3-9ウェーブ
レット系のためのフィルタ係数を近似係数sindexの計
算のために用いることができる。図6の表は、レベル1
のテスト信号に関する実際のスケーリング(s)係数
と、その対応ベクトル・ポジションを示す。これらのポ
ジションを図7に表すが、同図には、タイル境界を、そ
れぞれ1個ずつ計2個の円拡張部分で二重化したものが
表されている。非対称フィルタに対応する円拡張部が、
図5の表の領域505に示されている。kの係数が修正
の対象である。タイル境界の各側のタイルの拡張部分と
一緒にまとめたものが示されている。対称フィルタによ
れば、より良好な近似を得られる。
【0084】図6は、テスト信号に適用される3-9ウェ
ーブレット系用デタイリングの一例を示す。図5の縦列
501中の各ポジションに関するスケーリング係数に対
するフィルタ係数は、図6の縦列551中のレベル1信
号に対しタイル・ウェーブレット変換を適用することに
より計算される、対応したレベル2スケーリング係数を
乗じられる。同様に、縦列503中に示された各ポジシ
ョンに関するウェーブレット係数に対するフィルタ係数
は、上記したもののインデックスから計算される対応の
レベル2ウェーブレット係数を乗じられる。これらの乗
算により得らた積が加算されてデタイリング修正値が生
成される。このデタイリング修正値553が、近似なし
のレベル1スケーリング係数の値(縦列551)ととも
に図6に示されているレベル1のsindex値である。こ
こに示すように、デタイリング修正値は、デタイリング
無しのスケーリング係数よりも、他の係数とよく調和し
ていることは明らかである。
【0085】図8は、5-3ウェーブレット系用のフィル
タ係数を示す。図8を見ると、この表には各係数インデ
ックス・ポジションにつき複数のポジション・インデッ
クス列がある。この表の使い方は図5の表と同じであ
る。ただし、レベル1のポジションindex及びレベル1
のポジションindex-1で2つのデタイリング修正値を計
算する必要がある。追加されたポジションindex-1列
は、レベル2係数を生成するため、(ポジションindex
を係数に適用した結果として生成された)修正されたs
index値を含む前レベル(レベル1)の係数に適用され
る。
【0086】図9及び図10は、9-7ウェーブレット系
の場合のs係数及びd係数の表をそれぞれ示す。この例
では、4つのレベルに対する修正値を生成するための各
s係数及び各d係数につき4つのポジション・インデッ
クスがある。
【0087】《デタイリング用フィルタの特徴の説明》
1つの実施例においては、デタイリング用フィルタは以
下のような特徴を有する。第1に、デタイリングのため
には、分解レベルが上がるにつれてフィルタの数が増加
する(フィルタが同一長の場合)。あるレベルLにおけ
るフィルタ数は、順変換ローパスフィルタの長さ及びフ
ィルタのタイル内での位置関係によって左右される。す
なわち、 レベルLのフィルタ数=レベルLのローパス係数で、レ
ベルLのフルフレーム・ローパス係数と相違するローパ
ス係数の個数 これらの相違する係数があるために、デタイリング用フ
ィルタを使用する必要がある。相違する係数が増加する
と、必要とされるフィルタも増加する。
【0088】以下はデタイリング用フィルタの特性であ
るが、順変換ローパスフィルタは奇数長であり、フィル
タの中心は奇数ローパス係数に合わせられ、レベルLの
デタイリングであり、タイルは2Mのサイズである(た
だしM>L)。順変換ローパスフィルタがN=2*2*D+1の
長さであるならば、タイル境界の左のローパス係数を修
正するためのフィルタの数nleft(L)は次式のとおりで
ある。
【0089】
【数16】 タイル境界の右のローパス係数を修正するためのフィル
タの数nright(L)は次式のとおりである。
【0090】
【数17】 ただし、nleft(1)=Dかつnright(1)=D。順変換ロ
ーパスフィルタがN=2*(2*D+1)+1の長さであるとする。
これは3,9ウェーブレット系のようなフィルタに該当す
るが、この場合、タイル境界の左のローパス係数を修正
するためのフィルタの数nleft(L)は次式のとおりであ
る。
【0091】
【数18】 ここで、nleft(1)=Dかつnright(1)=D+1。ま
た、タイル境界の右のローパス係数を修正するためのフ
ィルタの数nright(L)は次式のとおりである。
【0092】
【数19】 ここで、nleft(1)=Dかつnright(1)=D+1。
【0093】ここに述べる1つの実施例におけるデタイ
リング用フィルタのもう1つの特徴は、元の変換ローパ
スフィルタの係数の総和が√2、かつハイパスフィルタ
の係数の総和が0だとすれば、ローパスフィルタの係数
の総和が1/(√2)となることである。非ユニタリ変換で
は、別の正規化因子を用いることができる。
【0094】1つの実施例において、デタイリング用フ
ィルタの3つ目の特徴は、デタイリングのためのフィル
タがフルフレーム分解と関連があることである。その関
連は、レベルLのフルフレーム・ディテール係数が0に
なるように信号xを構成することによって説明すること
ができる。この場合、フィルタ係数は次の条件を充足す
る。
【0095】[境界拡張部の”オーバーラップ・ブロッ
ク”に対するタイル・デタイリングフィルタ=0パディ
ングのあるフルフレーム・フィルタ]
【0096】ローパス係数に対する逆変換は次式で表す
ことができる。
【数20】
【0097】この逆変換に続けてシフト順変換を行う
と、これは次式で表すことができる。
【数21】
【0098】逆のシフト順変換、逆変換は次式で表すこ
とができる。
【数22】 ここで、TF*,F は”オーバーラップ・ブロック”の境
界拡張部に対するタイル変換のローパスフィルタであ
り、F*は逆変換ローパスフィルタであり、Fは順変換
ローパスフィルタである。
【0099】《ロッシィな係数再構成》上述の4ステッ
プを実行後、修正されたディテール係数を実際の量子化
と整合させるための係数の量子化を行うことができる。
量子化は既知であるから、係数を量子化と整合させるこ
とは難しくない。
【0100】1つの実施例においては、切り捨てによっ
て値を所定の整数値集合にまるめることによりロッシィ
な再構成が行われる。例えば、0から31までの係数は
すべて0に量子化され、32から63までの係数はすべ
て32に量子化される、等々である。図23は、量子化
しない場合の係数の典型的な分布を示す。各係数の下位
ビットが分からない場合でも、その量子化を行うことが
できる。もう1つの実施例では、各範囲の中心の値を、
その係数グループを表すためのより正確な値として用い
ることもできる。例えば、64から127までの全ての
係数が95に量子化される。値の量子化先の点は、再構
成点と呼ばれる。
【0101】画像の差異により、得られる分布は歪んだ
形になることもある。例えば、図23中の曲線2701
と曲線2702を比較されたい。
【0102】1つの実施例では、生成されたデタイリン
グ係数値に基づいて値が選択される。係数が量子化さ
れ、その値が64から127までの値であることが判明
し、デタイリングによって当該範囲外の値が生成される
場合、係数を量子化と整合させるとは、64から127
までの範囲内の値を選択することを意味する。例えば、
生成された値が127を超えるときは127にクリップ
し、生成された値が64未満のときは64にクリップす
ることができる。
【0103】《システムの実施例》図24は、画像を圧
縮し、次いで画像又はその同じ場所を伸長するためのシ
ステムを示す。図24を参照すると、本システムは圧縮
フロントエンド2201を有し、これは画像データを取
り込んでタイルに分割するためのタイリング・ブロック
2202を持ち、これらタイルは別々に圧縮ブロック2
2031〜2203Nによって圧縮される。ここで、Nは
タイルの総数である。選択ブロック2204は、複数の
伸長モードから1つのモードを選択する。各モードは、
図11乃至図15に示す各システムによって表すことが
できる。これらモードには、デタイリングを行わずに画
像全体を伸長するモード、デタイリングを行って、又は
行わないで1つの対象領域を伸長するモード、1つのタ
イルだけを伸長するモードがある。
【0104】図11は、画像を圧縮し、次いで画像を伸
長するためのシステムを示す。図11を参照すると、本
システムはタイリング・ブロック901、複数の圧縮ブ
ロック9021〜902N(圧縮器)、及び、伸長ブロッ
ク9031〜903N(伸長器)からなる。タイリング・
ブロック901は、画像データを取り込み、その画像デ
ータをタイル1〜Nに分割する。タイル1〜Nはそれぞ
れ圧縮ブロック902 1〜902Nに送られ取り込まれ
る。
【0105】圧縮ブロック9021〜902Nは、個々の
タイルを別々に圧縮する。圧縮データは通信路へ送られ
て(少なくとも一時的に)記憶され、あるいは、圧縮デ
ータは(少なくとも一時的に)記憶される。各タイルの
圧縮データは、伸長ブロック9031〜903Nへ送られ
取り込まれる。例えば、圧縮ブロック9021で圧縮さ
れた1タイル分のデータが伸長ブロック9031に送ら
れる。各伸長ブロック9031〜903Nは、それぞれの
タイルの圧縮データを他の伸長ブロックとは無関係に伸
長する。
【0106】図12は、画像を圧縮し、次いで画像を伸
長するためのシステムを示す。図12を参照すると、本
システムはタイリング・ブロック901と、複数の圧縮
ブロック9021〜902N及び伸長ブロック10031
〜1003Nからなる。タイリング・ブロック91は画
像データを取り込み、同画像データをタイル1〜Nに分
割する。各タイル1〜Nは、圧縮ブロック9021〜9
02Nの1つへ送られ取り込まれる。圧縮ブロック90
1〜902Nは、互いに独立して各タイルを圧縮する。
圧縮データは通信路へ送られて(少なくとも一時的に)
記憶され、あるいは、圧縮データは(少なくとも一時的
に)記憶される。各タイルの圧縮データは伸長ブロック
10031〜1003Nへ送られ取り込まれる。
【0107】例えば、圧縮ブロック9021により圧縮
されたタイル1の圧縮データは伸長ブロック10031
へ送られる。各伸長ブロック10031〜1003Nは、
各々のタイルの圧縮データを、他の伸長ブロックからの
情報を利用して伸長する。1つの実施例にあっては、伸
長ブロック間で共有される情報は、前述のデタイリング
の実行に利用される近傍情報である。そして、伸長デー
タは出力され、不図示の再合成器によって1つの画像に
再合成されることになろう。なお、タイルの画像への再
合成については、本発明を難解にしないため説明しな
い。以上のように、図12のシステムは、タイルを別々
に圧縮してからデタイリングを利用し画像全体を伸長す
る。このようなケースでは、特殊なフィルタ係数を用い
ることによってデタイリングを行うことができる。すな
わち、フィルタにそのような特性を持たせることによっ
て、デタイリングが行われることになる。このデタイリ
ングは省略可能であり、また、図12のデタイリングを
行うために、それ以外の圧縮/伸長動作に関し余分な費
用/手間が必要となることはない。
【0108】図13は、画像を圧縮し、次いで画像を伸
長するためのシステムを示す。図13を参照すると、本
システムはタイリング・ブロック901と、複数の圧縮
ブロック9021〜902N及び伸長ブロック11031
〜11033からなる。図13のシステムは、伸長ブロ
ック11031〜11033が画像中の1つの対象領域を
伸長することを別にすれば、図11のシステムと同様に
動作する。
【0109】図14は、画像を圧縮し、次いで画像を伸
長するためのシステムを示す。図14を参照とすると、
本システムはタイリング・ブロック901と、複数の圧
縮ブロック9021〜902N及び伸長ブロック1203
1〜1203Nからなる。図14のシステムは、伸長ブロ
ック12031〜1203Nが画像中の1つの対象領域を
伸長すること以外は、図12のシステムと同様に動作す
る。前述のように、デタイリングを行う図12及び図1
4において、デタイリングを行うために、それ以外の圧
縮/伸長動作に関し余分な費用/手間がかかることはな
い。
【0110】図15は、画像を圧縮し、次いで画像を伸
長するためのシステムを示す。図15を参照すると、本
システムはタイリング・ブロック901、複数の圧縮ブ
ロック9021〜902N、及び、伸長ブロック1301
1からなる。これらの要素は、前述の要素と同様に動作
する。したがって、本システムは1つのタイルだけを独
立して伸長する。前述のように、デタイリングを行う図
12及び図14において、デタイリングを行うために、
それ以外の圧縮/伸長動作に関し余分な費用/手間がか
かることはない。
【0111】図16は、圧縮システムの一実施例を示
す。図16を参照すると、多重レベル順ウェーブレット
変換器1401は画素1400を取り込み係数1402
を生成する。多重レベル順ウェーブレット変換器140
1は、それら係数を生成するための複数のレベル1〜N
のウェーブレット変換器からなる。符号器1403がそ
の係数を取り込むように接続され、同係数に応答して符
号化データ1404を生成する。符号器1403は、係
数をブロック、ツリー、又は、それ以外のグループに分
割してもよい。
【0112】1つの実施例では、全てのエントロピー符
号化がバイナリ・エントロピー符号器によって行われ
る。1つの実施例では、このエントロピー符号器はQ−
符号器、QM−符号器、MQ−符号器、有限ステートマ
シン符号器、高速並列符号器などのいずれかである。符
号器を1つだけ使用して単一の出力符号ストリームを発
生してもよい。もう1つの選択肢として、複数の(物理
的な又は仮想的な)符号器を用いて複数の(物理的な又
は仮想的な)データ・ストリームを発生してもよい。
【0113】1つの実施例では、バイナリ・エントロピ
ー符号器はQ−符号器である。Q−符号器の詳細を知る
には「Pennebaker, W.B.ほか”An Overview of the Bas
icPrinciples of the Q-coder Adapdve Binary Arithme
tic”,IBM Journal of Research and Development, Vo
l.32,pg. 717-26, 1988」を参照されたい。もう1つの
実施例では、バイナリ・エントロピー符号器はQM−符
号器を使用するが、これは周知の効率バイナリ・エント
ロピー符号器である。QM−符号器は、JPEG標準及
びJBIG標準の両方に使用されている。JPEG20
00及びJBIG2標準用に提案されたQM−符号器も
使用できる。
【0114】バイナリ・エントロピー符号器は、有限ス
テートマシン(FSM)符号器でもよい。1つの実施例
では、本発明の有限ステートマシン符号器は、1993
年12月21日に発行された”Method and Apparatus f
or Entropy Coding”なる表題の米国特許第5,272,478号
に記載されているB−符号器である。
【0115】1つの実施例では、バイナリ・エントロピ
ー符号器は高速並列符号器である。QM−符号器もFS
M符号器も、1ビットずつ符号化する必要がある。高速
並列符号器は数ビットを並列に処理する。1つの実施例
では、高速並列符号器は、圧縮性能を犠牲にすることな
く、VLSI又はマルチプロセッサ・コンピュータで実
現される。本発明に利用できる高速並列符号器の一例
が、1995年1月10日に発行された”Method and A
pparatus for Parallel Decoding and Encodingof Dat
a”なる表題の米国特許第5381,145号に記載されてい
る。
【0116】殆どの効率バイナリ・エントロピー符号器
は、基本フィードバック・ループによって速度が制限さ
れる。可能な解決策の1つは、入力データストリームを
複数のストリームに分割し、それらストリームを並列の
複数の符号器に入力する方法である。それら符号器の出
力は複数の可変長符号化データ・ストリームである。こ
のようなアプローチにおける問題点は、1本の通信路で
どのようにしてデータを伝送するかである。米国特許第
5,381,145号に記載されている高速並列符号器は、複数
の符号化データストリームをインターリーブする方法に
よって、その問題点を解決する。
【0117】コンテクストの多くは確率が一定している
であろ。そうならば、B−符号器のような有限ステート
マシン符号器が特に有効である。なお、システムが0.
5に近い確率を利用する場合、前記米国特許に開示され
た高速並列符号器と有限ステートマシン符号器は共にQ
−符号器よりも効率よく動作する。
【0118】もう1つの実施例では、バイナリ・エント
ロピー符号器と高速m元符号器の両方が用いられる。こ
の高速m元符号器はハフマン符号器でよい。
【0119】図17は、前記図面中に示した伸長ブロッ
クの一実施例を示す。図17を参照すると、符号化デー
タ1501は復号器1502に取り込まれて係数150
3に復号化される。この係数1503は、多重レベル逆
変換器1504に取り込まれ、画素1505に変換され
る。多重レベル逆変換器1504は、複数のレベル1〜
Nの逆ウェーブレット変換器からなる。
【0120】図18は、係数修正によりデタイリングを
行う、あるレベルの逆ウェーブレット変換器の一実施例
を示す。図18を参照すると、この逆ウェーブレット変
換器は、係数調整ブロック1601と逆ウェーブレット
変換ブロック1602からなる。係数調整ブロック16
01は、係数1610とオーバーラップ情報1611を
取り込み、それらに応答してデタイリングされた係数1
612を生成する。逆ウェーブレット変換ブロック16
02は、このデタイリングされた係数1612を取り込
む。逆ウェーブレット変換ブロック1602は、2次元
逆ウェーブレット変換器とすることができる。逆ウェー
ブレット変換ブロック1602は、デタイリングされた
係数1612に応答して、サンプル1613を生成す
る。サンプル1613は、画素であるか、前レベルの係
数である。
【0121】図19は、サンプルの置き換えによってデ
タイリングを行う、1レベルの逆ウェーブレット変換器
の別の実施例を示す。図19を参照すると、この逆ウェ
ーブレット変換器は、逆ウェーブレット変換ブロック1
701と、スムーズ(smooth)逆変換ブロック1702を
有する。逆ウェーブレット変換ブロック1701は、係
数1703を取り込んで、その出力1710にサンプル
を生成する。1つの実施例では、逆ウェーブレット変換
ブロック1701は2次元逆変換器である。スムーズ逆
変換ブロック1702も係数1703とオーバーラップ
情報1704を取り込み、その出力1711にサンプル
を生成する。1つの実施例では、スムーズ逆変換ブロッ
ク1702は、近傍情報を利用してデタイリングを行
う。別の実施例では、スムーズ逆変換ブロック1702
に用いられるフィルタ係数は境界係数に対しデタイリン
グ効果をもたらす。スイッチ1706は、逆ウェーブレ
ット変換ブロック1701の出力とスムーズ逆変換ブロ
ック1702の出力の一方を、1レベルの逆ウェーブレ
ット変換器の出力サンプルとして選択する。スイッチ1
706は制御ブロック1705により制御される。1つ
の実施例では、制御ブロック1705は、個々のサンプ
ルがタイル境界に影響を受けるか判定する。そのサンプ
ルがタイル境界による影響を受けないときには、制御ブ
ロック1705は逆ウェーブレット変換ブロック170
1から出力1710に出されるサンプルをスイッチ17
06に選択させる。一方、制御ブロック1705は、そ
のサンプルがタイル境界による影響を受けると判定した
ときには、スムーズ逆変換ブロック1702から出力1
711に出されるサンプルをスイッチ1706に選択さ
せる。これらサンプルは、画素又は前レベルの係数であ
る。
【0122】図20は、Le Gall-Tabatabiの4,4順変換
の一実施例を示す。図21は、4,4逆変換の一実施例を
示す。エネルギー保存のための正規化因子を無視し、ま
た、Nをインデックス(N=0,2,4,6...)と
する。
【0123】スムーズ係数Sn及びディテール係数Dn
びに入力Xnは、下記式によって表すことができる。
【数23】 図20及び図21を参照すると、太線は3を掛けること
を意味し、細線は1を掛けることを意味する。正負符号
(+又は−)はD係数の場合とS係数の場合とで異な
る。
【0124】この変換の生成は、1つの例によって説明
することができる。タイルの信号xをTiled X:0...0|10
0...100 とする。ここで”|”は境界であり、0,100 は
(任意に選んだ)画素値である。この場合、順変換を適
用すると、その結果はTiled S:0...0|400...400とTiled
D:0...O|O...0 となる。
【0125】フルフレーム係数は次の通りである。 Fullframe S:0...0 -100|500 400...400 (Fullframe D:0...0 -100|-100 0...0) フルフレームSに逆変換を適用すると、次の結果が得ら
れる。
【数24】 この再構成は”リンギング”があり、タイル境界の周囲
は”尖鋭(peaky)”である。
【0126】別のフェーズを使った場合は次の通りであ
る。 他フェーズのfullframe S:0...0 200|400...4OO (他フェーズのfullframe D:0...0 0|0...0) そして、この他フェーズのフルフレームSに逆変換を適
用すると、次のフルフレームSが得られる。
【数25】 この再構成は、タイル境界が滑らかである。
【0127】図22の(A)乃至(D)は、デタイリン
グを行う順変換及び逆変換を示す。図22(A)には多
重レベルの順タイル変換が示されている。図22(A)
を参照すれば、順変換は、レベル1の順タイル離散ウェ
ーブレット変換(DWT)からレベルJの順タイルDWTか
らなる。レベルJの順タイルDWTの出力は係数の集合
で、これが係数2003である。量子化・圧縮ブロック
2004は、係数2003を取り込み、それを量子化
し、圧縮して圧縮データ2005とする。
【0128】図22(B)、(C)及び(D)は異なっ
たレベルの逆タイルDWTを示す。なお、3レベル分を
示したが、各レベル毎に対応した1つの逆タイルDWT
がある。どのレベルも同一であるので、1つのレベルに
ついてのみ説明する。
【0129】逆タイルDWT2020は係数に対する逆
変換を実行する。逆タイルDWT2020の出力はサン
プルの集合からなる。このサンプルは、タイル境界修正
ブロック2021によってタイル境界修正を施される。
境界にないサンプルは修正されることなく量子化ブロッ
ク2022へ送られ、この量子化ブロックはクリッピン
グ処理を行って、そのサンプルを量子化する。量子化さ
れたサンプルは逆タイル変換出力として出力される。境
界に生じたサンプルは順タイルDWT2023へ送ら
れ、この順タイルDWT2023はそのサンプルに対す
る順タイル変換を行って係数の集合を生成する。この係
数は量子化ブロック2024に送られ、同ブロックはそ
の係数に対する量子化処理を実行する。1つの実施例で
は、この量子化処理はクリッピング処理である。量子化
された係数は逆タイルDWTブロック2025へ送ら
れ、この逆タイルDWTブロック2025はその係数に
対し逆タイルDWTを実行してサンプルを生成し、この
サンプルは逆タイル変換出力として出力される。
【0130】以上の説明から当業者には本発明の様々な
変更及び修正は明白であるから、説明のために図示及び
説明したいずれの実施例も限定的にとらえるべきでな
く、各実施例に関し詳細に述べた内容は特許請求の範囲
を限定することを意図するものではない。
【0131】
【発明の効果】以上に述べたように、本発明の方法及び
装置は、タイル境界歪みを除去してタイル境界における
画質劣化を排除することができ、符号化時、ロスレス復
号化時及び高ビットレート復号時のコストが皆無であ
り、特定の画像モデルに依存しないため、ロッシィ・ウ
ェーブレット圧縮によってもたらされる平滑化と調和し
た平滑化をもたらすことができる、等々の多くの効果を
得られるものである。
【図面の簡単な説明】
【図1】(A)タイルの変換により計算されるローパス
係数の概要を示す。 (B)スケーリング係数を求めるフルフレームDWT
(デタイリング無し)のための順変換処理を示す。 (C)シフト・フルフレームDWTのスケーリング係数
を求めるための順変換処理を示す。
【図2】タイル境界を滑らかにするためのプロセスの一
実施例を示す。
【図3】図2のプロセスの動作を模式的に示す。
【図4】タイル境界を滑らかにするためのプロセスの他
の実施例を示す。
【図5】3-9ウェーブレット系のためのスケールL=2のデ
タイリング用フィルタ係数の一実施例を示す。
【図6】レベル1のSindex値に対するデタイリング修正
値を、修正なしのレベル1のスケーリング係数の値とと
もに示す。
【図7】2つの円拡張部で二重化されたタイル境界とポ
ジションを示す。
【図8】5-3ウェーブレット系のためのスケールL=2のデ
タイリング用フィルタ係数の一例を示す。
【図9】ドベシィの9-7ウェーブレット変換系のための
スケールL=2のデタイリング用フィルタ係数の一例を示
す。
【図10】ドベシィの9-7ウェーブレット変換系のため
のスケールL=2のデタイリング用フィルタ係数の一例を
示す。
【図11】画像をタイル単位で別々に圧縮した後に各タ
イル毎に伸長するためのシステムの一実施例を示す。
【図12】画像を圧縮し、次にデタイリングを含む画像
伸長を行うためのシステムの一実施例を示す。
【図13】画像を圧縮し、次に画像の対象領域を伸長す
るためのシステムの一実施例を示す。
【図14】画像を圧縮し、次に画像の対象領域のデタイ
リングを含む伸長を行うためのシステムの一実施例を示
す。
【図15】画像を圧縮し、次に画像を伸長するためのシ
ステムを示す。
【図16】圧縮システムの一実施例を示す。
【図17】伸長ブロックの一実施例を示す。
【図18】係数の修正によりデタイリングを行う逆ウェ
ーブレット変換の1レベルの実施例を示す。
【図19】サンプルの置き換えによってデタイリングを
行う逆ウェーブレット変換の1レベルの他の実施例を示
す。
【図20】順4,4変換の一実施例を示す。
【図21】逆4,4変換の一実施例を示す。
【図22】デタイリングを行う順変換及び逆変換を示
す。
【図23】量子化を行わない係数の典型的な分布を示
す。
【図24】画像を圧縮した後に伸長するためのシステム
を示す。
【図25】デタイリングを行わない圧縮/伸長システム
のための擬似コードの一例を示す。
【図26】デタイリングを行う圧縮/伸長システムのた
めの擬似コードの一例を示す。
【図27】デタイリングを行う圧縮/伸長システムのた
めの擬似コードの他の例を示す。
【図28】デタイリングを行う圧縮/伸長システムのた
めのMatlabコードの例を示す。
【図29】図28の続きを示す。
【図30】図29の続きを示す。
【符号の説明】
901 タイリング・ブロック 902 圧縮ブロック(圧縮器) 903 伸長ブロック(伸長器) 1003 伸長ブロック(伸長器) 1103 伸長ブロック(伸長器) 1203 伸長ブロック(伸長器) 1303 伸長ブロック(伸長器) 1401 多重レベル順ウェーブレット変換器 1403 符号器 1502 復号器 1504 多重レベル逆ウェーブレット変換器 1601 係数調整ブロック 1602 逆ウェーブレット変換ブロック 1701 逆ウェーブレット変換ブロック 1702 スムーズ逆変換ブロック 1705 制御ブロック 1706 スイッチ 2202 タイリング・ブロック 2204 選択ブロック
───────────────────────────────────────────────────── フロントページの続き (72)発明者 エドワード エル シュワルツ アメリカ合衆国 カリフォルニア州 94025 メンローパーク スィート 115 サンド ヒル ロード 2882 リコーコー ポレーション内

Claims (43)

    【特許請求の範囲】
  1. 【請求項1】第1の圧縮データ集合に対して、少なくと
    も1つの他の圧縮データ集合から得られる近傍情報を利
    用しデタイリングを行うことを含む、複数の圧縮データ
    集合を伸長するステップ、及び複数の伸長されたタイル
    を1つの画像に再合成するステップからなることを特徴
    とするデータ処理方法。
  2. 【請求項2】ある分解レベルにおけるタイル・ハイパス
    係数及びタイル・ローパス係数を、その分解レベルにお
    ける近傍のハイパス係数及びローパス係数を用いて修正
    することにより、デタイリングを行うことを特徴とする
    請求項1記載のデータ処理方法。
  3. 【請求項3】画像データを複数のタイルに分割するステ
    ップ、及び前記複数のタイルを別々に圧縮して複数の圧
    縮データ集合を生成するステップをさらに有することを
    特徴とする請求項1記載のデータ処理方法。
  4. 【請求項4】(a) タイル変換のsJ,dJ係数に対する
    1レベル逆変換を計算してs(J-1)係数を生成し、 (b) 前記s(J-1)係数にシフト順変換を適用して、前記
    J係数の近似 【外1】 を生成し、 (c) d係数を0に設定した前記近似係数 【外2】 を用いて1レベル逆変換を行い、前記s(J-1)係数の近
    似である 【外3】 係数を生成し、 (d) 前記(b)及び(c)を繰り返し実行することにより、
    デタイリングを行うことを特徴とする請求項1記載のデ
    ータ処理方法。
  5. 【請求項5】ローパス係数のみを用いてタイル境界にお
    ける順DWTを計算するステップ、及びローパス係数の
    みを用いてタイル境界における逆DWTを計算するステ
    ップをさらに含むことを特徴とする請求項4記載のデー
    タ処理方法。
  6. 【請求項6】伸長後にサンプルを量子化に整合させるス
    テップをさらに含むことを特徴とする請求項5記載のデ
    ータ処理方法。
  7. 【請求項7】タイルに対する逆離散ウェーブレット変換
    (DWT)を計算し、 タイル境界近傍の1ポジションだけシフトされたローパ
    ス係数の計算、ローパス係数のみを用いるタイル境界の
    順DWTの計算、及び、ローパス係数のみを用いるタイ
    ル境界の逆DWTの計算、を繰り返し実行し、 順タイルDWTを計算し、 前記順タイルDWTを行うことにより生成された係数を
    量子化に整合させ、 逆タイルDWTを計算することによって、デタイリング
    を行うことを特徴とする請求項1記載のデータ処理方
    法。
  8. 【請求項8】順タイルDWT及び逆タイルDWTの計算
    を繰り返し行うことを特徴とする請求項7記載のデータ
    処理方法。
  9. 【請求項9】順タイルDWT及び逆タイルDWTの計算
    の繰り返し回数が、フィルタ長及び分解レベルに依存す
    ることを特徴とする請求項8記載のデータ処理方法。
  10. 【請求項10】順タイルDWT及び逆タイルDWTの計
    算の繰り返し回数が、タイル境界により影響を受けるs
    係数の個数に依存することを特徴とする請求項8記載の
    データ処理方法。
  11. 【請求項11】第1の圧縮データ集合に対して少なくと
    も1つの他の圧縮データ集合から得られる近傍情報を利
    用しデタイリングを行う手段を含む、複数の圧縮データ
    集合を伸長するための手段、及び複数の伸長されたタイ
    ルを1つの画像に再合成する手段からなることを特徴と
    するデータ処理装置。
  12. 【請求項12】前記デタイリングを行うための手段は、
    ある分解レベルにおけるタイル・ハイパス係数及びタイ
    ル・ローパス係数を、その分解レベルにおける近傍のロ
    ーパス係数を用いて修正する手段からなることを特徴と
    する請求項11記載のデータ処理装置。
  13. 【請求項13】画像データを複数のタイルに分割する手
    段、及び前記複数のタイルを別々に圧縮して複数の圧縮
    データ集合を生成する手段をさらに有することを特徴と
    する請求項11記載のデータ処理装置。
  14. 【請求項14】前記デタイリングを行う手段は、タイル
    に対する逆離散ウェーブレット変換(DWT)を計算す
    る手段、 タイル境界近傍の1ポジションだけシフトされたローパ
    ス係数の計算、ローパス係数のみを用いるタイル境界の
    順DWTの計算、及び、ローパス係数のみを用いるタイ
    ル境界の逆DWTの計算、を繰り返し実行する手段から
    なることを特徴とする請求項11記載のデータ処理装
    置。
  15. 【請求項15】伸長後にサンプルを量子化に整合させる
    ための手段をさらに有することを特徴する請求項14記
    載のデータ処理装置。
  16. 【請求項16】前記デタイリングを行う手段は、 タイルに対する逆離散ウェーブレット変換(DWT)を
    計算する手段、 タイル境界近傍の1ポジションだけシフトされたローパ
    ス係数の計算、ローパス係数のみを用いるタイル境界の
    順DWTの計算、及び、ローパス係数のみを用いるタイ
    ル境界の逆DWTの計算、を繰り返し実行する手段、 順タイルDWTを計算する手段、 前記順タイルDWTを行うことにより生成された係数を
    量子化する手段、及び逆タイルDWTを計算する手段か
    らなることを特徴とする請求項11記載のデータ処理装
    置。
  17. 【請求項17】ウェーブレット変換により係数を複数の
    タイルに伸長するためのものであって、第1の圧縮デー
    タ集合に対して、少なくとも1つの他の圧縮データ集合
    から得られる近傍情報を利用しデタイリングを行う複数
    の伸長器、及び伸長されたタイルを1つの画像に再合成
    するための手段からなることを特徴とするウェーブレッ
    ト・ベースのデータ処理システム。
  18. 【請求項18】前記複数の伸長器は、ある分解レベルに
    おけるタイル・ハイパス係数及びタイル・ローパス係数
    を、その分解レベルにおける近傍のハイパス係数及びロ
    ーパス係数を用いて修正することにより、デタイリング
    を行うことを特徴とする請求項17記載のデータ処理シ
    ステム。
  19. 【請求項19】画像データを複数のタイルに分割するタ
    イリング・ブロック、及びそれぞれが前記複数のタイル
    中の1つのタイルを独立して圧縮する、前記タイリング
    ・ブロックと接続された複数の圧縮器をさらに有するこ
    とを特徴とする請求項17記載のデータ処理システム。
  20. 【請求項20】前記複数の圧縮器はそれぞれ、 多重レベル順ウェーブレット変換器、及び前記多重レベ
    ル順ウェーブレット変換器に接続された符号器からなる
    ことを特徴とする請求項19記載のデータ処理システ
    ム。
  21. 【請求項21】前記多重レベル順ウェーブレット変換器
    は1つの多重レベル変換器からなることを特徴とする請
    求項20記載のデータ処理システム。
  22. 【請求項22】前記複数の伸長器はそれぞれ、 復号器、及び前記復号器に接続された多重レベル逆ウェ
    ーブレット変換器からなることを特徴とする請求項18
    記載のデータ処理システム。
  23. 【請求項23】前記多重レベル逆ウェーブレット変換器
    は1つの多重レベル変換器からなることを特徴とする請
    求項22記載のデータ処理システム。
  24. 【請求項24】前記多重レベル逆ウェーブレット変換器
    の少なくとも1つのレベルは、 同じタイルからの入力係数及び他のタイルからの入力係
    数に応答し、デタイリングされた係数を生成するための
    係数調整手段、及び前記係数調整手段に接続された2次
    元逆ウェーブレット変換器からなることを特徴とする請
    求項22記載のデータ処理システム。
  25. 【請求項25】前記多重レベル逆ウェーブレット変換器
    の少なくとも1つのレベルは、 同じタイルの係数及び他のタイルから得られる係数に応
    答し、第1の出力にサンプルを生成する、デタイリング
    を行う逆ウェーブレット変換器、 係数を取り込むように接続され、第2の出力にサンプル
    を生成するデタイリングを行わない逆ウェーブレット変
    換器、及び前記サンプルがタイル境界の影響を受けるか
    否かによって、前記第1の出力又は第2の出力を前記多
    重レベル逆ウェーブレット変換器の少なくとも1つのレ
    ベルの出力として選択するように接続された制御ブロッ
    クからなることを特徴とする請求項22記載のデータ処
    理システム。
  26. 【請求項26】符号化データを復号化して複数の係数を
    生成するステップ、及び、 前記複数の係数に対し多重レベル逆ウェーブレット変換
    を行うステップからなり、前記多重レベル逆ウェーブレ
    ット変換を行うステップは、 少なくとも1つの分解レベルのタイル境界係数に対し係
    数調整を行ってデタイリングした係数を生成し、 前記デタイリングされた係数に対し逆ウェーブレット変
    換を適用してデータ・サンプルを生成することを特徴と
    するデータ処理方法。
  27. 【請求項27】スケールJのスケーリング係数及びウェ
    ーブレット係数に対し予め計算されたフィルタ係数を適
    用してスケールJ-1の近似係数を生成することにより、
    係数調整を行うことを特徴とする請求項26記載のデー
    タ処理方法。
  28. 【請求項28】前記フィルタ係数の適用は、ある乗数を
    スケールJのスケーリング係数及びウェーブレット係数
    に乗算し、それら乗算の積を加算して前記近似係数を生
    成することであることを特徴とする請求項27記載のデ
    ータ処理方法。
  29. 【請求項29】前記フィルタ係数は次の条件 【数1】 を満たすことを特徴とする請求項27記載のデータ処理
    方法。
  30. 【請求項30】レベルJのスケーリング係数及びウェー
    ブレット係数にタイル逆変換を適用することによりレベ
    ルJ-1のタイル・ウェーブレット分解のためのスケーリ
    ング係数を計算するステップ、 レベルJ-1のs係数のシフト列にフルフレーム順変換を
    適用することにより、レベルJのフルフレーム係数の近
    似を計算するステップ、 前記s係数のシフト列に逆フルフレーム・ウェーブレッ
    ト変換を適用することにより、レベルJ-1のフルフレー
    ム係数の近似を計算するステップ、 前記フルフレーム係数の近似に順タイル変換を適用する
    ことにより、レベルJのs係数の近似を計算するステッ
    プ、からなることを特徴とするデータ処理方法。
  31. 【請求項31】レベルJ-1のフルフレーム係数の近似を
    計算するステップは、レベルJ-1の全てのs係数が得ら
    れるまで、逆フルフレーム・ウェーブレット変換及び順
    フルフレーム・ウェーブレット変換をs係数に繰り返し
    適用することを特徴とする請求項30記載のデータ処理
    方法。
  32. 【請求項32】符号化データを復号化して複数の係数を
    生成するステップ、及び、 前記複数の係数に対し多重レベル逆ウェーブレット変換
    を行ってデタイリングされた係数を生成するステップか
    らなり、前記多重レベル逆ウェーブレット変換を行うテ
    ップはタイル境界近傍の係数の近似を生成し、フルフレ
    ーム・スケーリング係数sJ の近似は 【外4】 であることを特徴とするデータ処理方法。
  33. 【請求項33】符号化データを復号化して複数の係数を
    生成する手段、及び前記複数の係数に対し多重レベル逆
    ウェーブレット変換を行う手段とを有し、前記多重レベ
    ル逆ウェーブレット変換を行う手段は、 少なくとも1つの分解レベルのタイル境界係数に対し係
    数調整を行ってデタイリングされた係数を生成する手段
    と、 前記デタイリングされた係数に逆ウェーブレット変換を
    適用してデータ・サンプルを生成する手段とからなるこ
    とを特徴とするデータ処理装置。
  34. 【請求項34】係数調整を行う手段は、スケールJのス
    ケーリング係数及びウェーブレット係数に対し予め計算
    されたフィルタ係数を適用してスケールJ-1の近似係数
    を生成する手段からなることを特徴とする請求項33記
    載のデータ処理装置。
  35. 【請求項35】前記フィルタ係数は次の条件 【数2】 を満たすことを特徴とする請求項33記載のデータ処理
    装置。
  36. 【請求項36】レベルJのスケーリング係数及びウェー
    ブレット係数にタイル逆変換を適用することによりレベ
    ルJ-1のタイル・ウェーブレット分解のためのスケーリ
    ング係数を計算する手段、 レベルJ-1のs係数のシフト列にフルフレーム順変換を
    適用することにより、レベルJのフルフレーム係数の近
    似を計算する手段、 前記s係数のシフト列に逆フルフレーム・ウェーブレッ
    ト変換を適用することにより、レベルJ-1のフルフレー
    ム係数の近似を計算する手段、 前記フルフレーム係数の近似に順タイル変換を適用する
    ことにより、レベルJのs係数の近似を計算する手段を
    さらに有することを特徴とする請求項33記載のデータ
    処理装置。
  37. 【請求項37】レベルJ-1のフルフレーム係数の近似を
    計算する手段は、レベルJ-1の全てのs係数が得られる
    まで、逆フルフレーム・ウェーブレット変換及び順フル
    フレーム・ウェーブレット変換をs係数に繰り返し適用
    する手段からなることを特徴とする請求項36記載のデ
    ータ処理装置。
  38. 【請求項38】符号化データを復号化して複数の係数を
    生成する手段、及び前記複数の係数に対し多重レベル逆
    ウェーブレット変換を行ってデタイリングされた係数を
    生成する手段をさらに有し、前記多重レベル逆ウェーブ
    レット変換を行う手段はタイル境界近傍の係数の近似を
    生成し、フルフレーム・スケーリング係数sJ の近似は 【外5】 であることを特徴とする請求項33記載のデータ処理装
    置。
  39. 【請求項39】複数のタイルの圧縮データを伸長し、該
    伸長で離散ウェーブレット変換で生成されるものと異な
    るフェーズの係数を用いてデタイリングを行い、 伸長されたタイルを再合成して再構成画像を作成するこ
    とからなるデータ処理方法。
  40. 【請求項40】前記フェーズの係数は元の係数のシフト
    列からなることを特徴とする請求項39記載のデータ処
    理方法。
  41. 【請求項41】デタイリングの遂行で、シフト離散ウェ
    ーブレット変換のスケーリング係数を求めることを特徴
    とする請求項39記載のデータ処理方法。
  42. 【請求項42】レベルJの係数に逆タイル変換を適用す
    ることによりタイル・ウェーブレット分解レベルJ-1の
    係数を計算し、 前記タイル・ウェーブレット分解レベルJ-1の係数に分
    析ローパス演算子Hを適用することによりレベルJのフ
    ルフレーム係数の近似を計算し、 レベルJの近似係数に合成ローパス演算子H*を適用す
    ることによりレベルJ-1のフルフレーム係数の近似を計
    算し、 レベルJ-1の近似係数に順タイル変換を適用してレベル
    Jの新しい係数を計算することを特徴とするデータ処理
    方法。
  43. 【請求項43】原画像のフルフレーム・ウェーブレット
    分解により生成され、タイル変換における境界修正によ
    り影響を受けるレベルJのハイパス係数のみ0に修正さ
    れた各再構成レベルの目標画像に基づいて、あるスケー
    ルのタイル・ハイパス係数を該スケールの近傍ローパス
    係数を用いて修正することを特徴とするデータ処理方
    法。
JP2001042895A 2000-02-29 2001-02-20 データ処理方法及び装置 Expired - Fee Related JP4248754B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/515458 2000-02-29
US09/515,458 US6813387B1 (en) 2000-02-29 2000-02-29 Tile boundary artifact removal for arbitrary wavelet filters

Publications (2)

Publication Number Publication Date
JP2001257596A true JP2001257596A (ja) 2001-09-21
JP4248754B2 JP4248754B2 (ja) 2009-04-02

Family

ID=24051426

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001042895A Expired - Fee Related JP4248754B2 (ja) 2000-02-29 2001-02-20 データ処理方法及び装置

Country Status (2)

Country Link
US (2) US6813387B1 (ja)
JP (1) JP4248754B2 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005217872A (ja) * 2004-01-30 2005-08-11 Kddi R & D Laboratories Inc タイルサイズ変換装置
JP2007049664A (ja) * 2005-07-15 2007-02-22 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び情報記録媒体
US7302104B2 (en) 2001-12-28 2007-11-27 Ricoh Co., Ltd. Smoothing tile boundaries of images encoded and decoded by JPEG 2000
JP2008005531A (ja) * 2007-08-10 2008-01-10 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び記憶媒体
US7609899B2 (en) 2004-05-28 2009-10-27 Ricoh Company, Ltd. Image processing apparatus, image processing method, and recording medium thereof to smooth tile boundaries
US8265430B2 (en) 2008-04-14 2012-09-11 Ricoh Company, Ltd. Image processing system, image processing method, and storage medium
KR20200028069A (ko) * 2018-09-05 2020-03-16 트러스트팜모바일 주식회사 타일 영상의 영상 처리 방법 및 장치

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7127117B2 (en) * 2001-06-11 2006-10-24 Ricoh Company, Ltd. Image compression method and apparatus for suppressing quantization rate in particular region, image expansion method and apparatus therefor, and computer-readable storage medium storing program for the compression or expansion
US7003170B1 (en) * 2002-09-20 2006-02-21 Pegasus Imaging Corporation Methods and apparatus for improving quality of block-transform coded images
US20040136602A1 (en) * 2003-01-10 2004-07-15 Nithin Nagaraj Method and apparatus for performing non-dyadic wavelet transforms
JP4618676B2 (ja) 2005-04-28 2011-01-26 株式会社リコー 構造化文書符号の転送方法、画像処理システム、サーバ装置、プログラム及び情報記録媒体
GB2429593A (en) 2005-08-26 2007-02-28 Electrosonic Ltd Data compressing using a wavelet compression scheme
US20080049841A1 (en) * 2006-08-24 2008-02-28 Eric Jeffrey Hardware Method for Performing Real Time Multi-Level Wavelet Decomposition
DE102007037857A1 (de) * 2007-08-10 2009-02-12 Micronas Gmbh Verfahren zur Reduktion von Bildartefakten
US8280180B2 (en) * 2007-12-04 2012-10-02 Hewlett-Packard Development Company, L.P. Method and system for image restoration in the spatial domain
KR101118091B1 (ko) * 2009-06-04 2012-03-09 주식회사 코아로직 비디오 데이터 처리 장치 및 방법
JP2013025466A (ja) * 2011-07-19 2013-02-04 Sony Corp 画像処理装置、画像処理システム及び画像処理プログラム
US20130117418A1 (en) * 2011-11-06 2013-05-09 Akamai Technologies Inc. Hybrid platform for content delivery and transcoding
US9286648B2 (en) * 2012-08-03 2016-03-15 Nadar Mariappan S Zero communication block partitioning
US9485456B2 (en) 2013-12-30 2016-11-01 Akamai Technologies, Inc. Frame-rate conversion in a distributed computing system
US9992252B2 (en) 2015-09-29 2018-06-05 Rgb Systems, Inc. Method and apparatus for adaptively compressing streaming video
US10387991B2 (en) * 2016-07-01 2019-08-20 Intel Corporation Method and apparatus for frame buffer compression
CN107896330B (zh) * 2017-11-29 2019-08-13 北京大学深圳研究生院 一种用于帧内和帧间预测的滤波方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6141446A (en) * 1994-09-21 2000-10-31 Ricoh Company, Ltd. Compression and decompression system with reversible wavelets and lossy reconstruction
JP2000506686A (ja) * 1995-10-25 2000-05-30 サーノフ コーポレイション オーバラップブロック動き補償及びゼロツリーウェーブレット符号化を用いる低ビットレートビデオ符号化器
AUPO951297A0 (en) * 1997-09-29 1997-10-23 Canon Information Systems Research Australia Pty Ltd Method and apparatus for digital data compression
US5991454A (en) * 1997-10-06 1999-11-23 Lockheed Martin Coporation Data compression for TDOA/DD location system
US6587588B1 (en) * 1999-03-16 2003-07-01 At&T Corp. Progressive image decoder for wavelet encoded images in compressed files and method of operation

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7302104B2 (en) 2001-12-28 2007-11-27 Ricoh Co., Ltd. Smoothing tile boundaries of images encoded and decoded by JPEG 2000
JP2005217872A (ja) * 2004-01-30 2005-08-11 Kddi R & D Laboratories Inc タイルサイズ変換装置
US7609899B2 (en) 2004-05-28 2009-10-27 Ricoh Company, Ltd. Image processing apparatus, image processing method, and recording medium thereof to smooth tile boundaries
JP2007049664A (ja) * 2005-07-15 2007-02-22 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び情報記録媒体
JP2008005531A (ja) * 2007-08-10 2008-01-10 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び記憶媒体
US8265430B2 (en) 2008-04-14 2012-09-11 Ricoh Company, Ltd. Image processing system, image processing method, and storage medium
KR20200028069A (ko) * 2018-09-05 2020-03-16 트러스트팜모바일 주식회사 타일 영상의 영상 처리 방법 및 장치
KR102164686B1 (ko) * 2018-09-05 2020-10-13 트러스트팜모바일 주식회사 타일 영상의 영상 처리 방법 및 장치

Also Published As

Publication number Publication date
JP4248754B2 (ja) 2009-04-02
US7251375B2 (en) 2007-07-31
US6813387B1 (en) 2004-11-02
US20050031218A1 (en) 2005-02-10

Similar Documents

Publication Publication Date Title
JP2001257596A (ja) データ処理方法及び装置
US6711299B2 (en) Wavelet transformation of dithered quantized/reduced color pixels for color bit depth image compression and decompression
JP3792789B2 (ja) 符号化装置
JP3693988B2 (ja) 通信管理システム及び通信管理方法
JP3800552B2 (ja) 符号化方法及び装置
US7068849B2 (en) Method and apparatus for compression using reversible wavelet transforms and an embedded codestream
US5497435A (en) Apparatus and method for encoding and decoding digital signals
JP4425561B2 (ja) イメージおよびビデオ符号化のための2−d変換
AU6347890A (en) Improved image compression method and apparatus
JP2009177802A (ja) バタフライプロセッサを使用して離散コサイン変換をエンコードしそして計算するための装置及び方法
JPH08116265A (ja) 符号化方法、符号化/復号方法及び復号方法
JP2006502604A (ja) 任意形状オブジェクトの画像圧縮方法
JP3796432B2 (ja) フィルタ処理装置およびフィルタ処理方法
Kountchev et al. Inverse pyramidal decomposition with multiple DCT
Wagh et al. Design & implementation of JPEG2000 encoder using VHDL
Nappi et al. Linear prediction image coding using iterated function systems
Mietens et al. New DCT computation algorithm for video quality scaling
JPH06338802A (ja) 再圧縮装置
Jessop Lossy Image Compression

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080227

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081015

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090107

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090114

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120123

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120123

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130123

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140123

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees