JP5259396B2 - ハイブリッド映像圧縮のための非線形予測フィルタ - Google Patents
ハイブリッド映像圧縮のための非線形予測フィルタ Download PDFInfo
- Publication number
- JP5259396B2 JP5259396B2 JP2008518377A JP2008518377A JP5259396B2 JP 5259396 B2 JP5259396 B2 JP 5259396B2 JP 2008518377 A JP2008518377 A JP 2008518377A JP 2008518377 A JP2008518377 A JP 2008518377A JP 5259396 B2 JP5259396 B2 JP 5259396B2
- Authority
- JP
- Japan
- Prior art keywords
- transform
- prediction
- transform coefficients
- nonlinear
- linear
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
1)Joint Video Team of ITU−T and ISO/IEC JTC 1, “Draft ITU−T Recommendation and Final Draft International Standard of Joint Video Specification (ITU−T Rec. H.264| ISO/IEC 14496−10 AVC),” Joint Video Team (JVT) of ISO/IEC MPEG and ITU−T VCEG, JVT−G050, March 2003と、
2)MPEG4 Verification Model, VM 14.2, pp.260−264, 1999とを参照のこと。
[0029]予測されたフレーム内で予測されるべきブロックに対し、前に符号化されたフレームからの候補ブロックが獲得される。様々なフィルタリング演算を可能にするため、この候補ブロックは予測されるべきブロックよりサイズが大きくても構わない。予測されたブロックよりサイズが大きい候補ブロックはフィルタリング演算の最後に予測されたブロックと同じサイズに縮小される。候補ブロックは、最初に変換係数を獲得するために線形変換を使用して変換される。線形変換の過完備集合もまた変換係数を生成するために使用される。候補ブロック変換係数は、P種類のブロックに対応するP組の係数の組を作成するために、P通りの方法で非線形的に修正される。このような係数の組の1つずつは逆変換され、その後に、おそらくは、予測されるべきブロックに対しP個の予測ブロックを獲得するためにサイズが縮小される。エンコーダでは、これらのP個の予測ブロックのうちの1つずつが予測されるべきブロックと比較される。最良予測が選択され、対応する予測パラメータが決定される。エンコーダは、その後に、この非線形予測に加えて標準的な予測の選択肢を考慮し、どれを使用すべきかをデコーダへ知らせる。この信号に基づいて、デコーダは予測プロセスを反復し、エンコーダと同じ予測ブロックを獲得する。
によって与えられるxについてのF個の予測を生成し、ここで、i番目の予測は、
によって、所定の補間行列Ai(M×N)で乗算することにより生成される。
を定義することによって補強される。T1,T2,...,TKがスレッショルドの組を表し、R1,R2,...,RLがパーセンテージの組を表すことにする。非線形予測
は、スレッショルドTjを用いてd内で係数をスレッショルディングし、逆変換を行い、必要に応じて、xのサイズと一致するように結果のサイズを縮小することにより生成される。非線形予測
は、大きさに関してd内で係数をソートし、最も小さい100−Rjパーセントを零化し、逆変換を行い、必要に応じて、xのサイズと一致するように結果のサイズを縮小することにより生成される。サイズの縮小は、クロッピング/サンプリングによって、又は、クロッピング/サンプリングが後に続けられるフィルタリングによって実現される。dを生成する際にブロック変換が使用されているならば、ソーティング及び零化が変換の各ブロックで行われ得る。さらなる予測は、スケーリング定数の組を用いてこれらの予測をスケーリングすることによって獲得される。さらに、より多くの予測を生成するために、少なくとも1つの非線形演算を使用して、様々な組み合わせで演算を適用可能である。さらなる予測は、yに加えて、これらの演算及び組み合わせを
に適用することにより獲得され、又は、逆に、これらの演算の結果にAi,i=1,...,Fを適用することにより獲得される。一実施形態では、P個の予測が作成される。
及び、それまで有効であることが分かっていた予測と比較される。生成された予測がこれらの予測と十分に相違するならば、生成された予測は有効予測になり、さもなければ、生成された予測は予測器の集合から削除される。残りのQ個の予測は、集合
として形成される。
を作成するために、固有のフィルタリング手順で使用される。これらの個々の予測推定量は、その後に、各予測推定量より優れている全体的な予測
を形成するために合成される。
[0040]一実施形態では、ビデオエンコーダは、前に符号化されたフレームからのブロックを使用して動き補償された予測を生成するために動き補償を実行する動き補償予測モジュールと、端数補間プロセスの一部として非線形フィルタを用いて変換ドメイン内でブロックに非線形フィルタリングを実行する非線形予測フィルタと、残差フレームを作成するために現在フレーム内のブロックから動き補償された非線形予測を減算する加算器(減算器)と、残差フレームを符号化するコーダとを備える。
[0045]一実施形態では、非線形予測フィルタは、第1の変換係数の組を獲得するために動き補償された予測に変換を適用する順変換モジュールと、第1の組から第2の変換係数の組を獲得するために変換ドメイン内で非線形フィルタリング演算を実行するモジュールと、動き補償された非線形予測を生成するために第2の変換係数の組に逆変換を適用する逆変換モジュールとを備える。
を生成する(処理ブロック302)。そして、補間予測
が出力される(処理ブロック303)。その後、プロセスは終了する。
を獲得する(処理ブロック402)。前に復号化されたフレームからの候補ブロックyを使用して、プロセシングロジックは同一予測器を獲得し(処理ブロック403)、同一予測器は従来型の動き補償された予測器
と共に予測辞書記憶装置409に記憶される。
を構築し(処理ブロック404)、L個のパーセンテージ予測
を構築する(処理ブロック405)。プロセシングロジックは、スレッショルドパラメータT1,...,TK及び変換H1,...,HU(408)を使用してスレッショルディング予測を構築する。同様に、プロセシングロジックは、パーセンテージR1,...,RL及び変換H1,...,HU(406)を使用してパーセンテージ予測を構築する。
は処理ブロック407へ送られ、プロセシングロジックが構築された各予測を予測辞書記憶装置409に記憶されている予測と比較する。より詳細には、一実施形態では、プロセシングロジックは、差がスレッショルドTQ未満であるかどうかをテストする。TQは量子化ステップ幅の増加関数でもよい。スレッショルドTQ未満でなければ、予測は無効であり、廃棄される。予測が、スレッショルドTQとの比較に基づいて、全ての辞書要素との差が十分であるならば、プロセシングロジックは、予測が有効であると宣言し、将来の比較で使用されるべき辞書に予測を追加する。
を出力し(処理ブロック410)、プロセスは終了する。
と、その時点までに有効であることが判明した予測器と比較される。最初に、辞書が同一予測器
を使用して構築される。各予測は、予測と辞書要素との間の平方誤差を計算することにより辞書の各要素と比較される。この平方誤差は、次に、スレッショルドTQと比較される、全ての辞書要素との平方誤差がそれぞれスレッショルドTQより大きいならば、予測は有効であることが宣言され、辞書に追加される。そうでなければ、予測は無効であり廃棄される。一実施形態では、スレッショルドTQは、平方された量子化器ステップ幅の倍数として決定され、それ以外の等価パラメータが使用されることもある。
を作成するために、予測推定量を合成する(処理ブロック702)。一実施形態では、個々の予測推定量を合成するために、合成は、個々の予測
の加重平均によって与えられる。加重平均は、等しい重みを用いて、又は、たとえば、Onur G. Guleryuz, “Weighted Overcomplete Denoising”, Proc. Asilomar Conference on Signals and Systems, Pacific Grove, CA, Nov.2003に記載されている技術のような、当分野において周知のより高度な重み決定技術を使用して行われる。
[0069]図8は、本明細書に記載されている1つ以上の動作を実行する例示的なコンピュータシステムのブロック図である。図8を参照すると、コンピュータシステム800は、例示的なクライアント又はサーバーコンピュータシステムを備える。コンピュータシステム800は、情報を通信する通信メカニズム又はバス811と、バス811と接続され、情報を処理するプロセッサ812とを備える。プロセッサ812は、たとえば、Pentium(商標)、PowerPC(商標)、Alpha(商標)などのようなマイクロプロセッサを含むが、マイクロプロセッサには限定されない。
Claims (34)
- 前に符号化されたフレームからのブロックを使用して動き補償された予測を生成するために動き補償を実行するステップと、
動き補償された非線形予測を生成するために端数補間プロセスの一部として非線形フィルタを用いて変換ドメイン内で前記動き補償された予測に非線形フィルタリングを実行するステップと、
前記非線形フィルタリングを実行するステップにおいて生成された前記非線形予測が適切な予測であるか否かを判断するステップと、
残差フレームを生成するために現在フレーム内のブロックから前記動き補償された非線形予測を減算するステップと、
前記残差フレームを符号化するステップと、を備え、
前記判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる、方法。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項1に記載の方法。
- 非線形フィルタリングを前に復号化されたフレームに適用するステップをさらに備え、
動き補償を実行するステップが、前記非線形フィルタリングされた前に符号化されたフレームを使用して前記動き補償された予測を生成する工程を備える、請求項1に記載の方法。 - 非線形フィルタリングを実行するステップが、
第1の変換係数の組を獲得するために前記動き補償された予測に変換を適用する工程と、
スレッショルドに基づいて各変換係数をスレッショルディングする工程、大きさに基づいて変換係数を順位付けする工程、前記ブロックの各変換係数をパーセンテージフィルタリングする工程、および前記ブロック内の各変換係数に割り当てられたインデックスを選択する工程、のうち選択された一つの工程を実行することにより、変更すべき1つ以上の変換係数の組を特定する工程と、
前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正する工程と、
前記動き補償された非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する工程と、を備える、請求項1に記載の方法。 - 非線形フィルタリングを実行するステップが、
第1の変換係数の組を獲得するために前記動き補償された予測に変換を適用する工程と、
1つ以上の変換係数をスケーリングする工程、1つ以上の変換係数を零化する工程、1つ以上の変換係数にソフトスレッショルディング演算を実行する工程、前記係数の1次元増加関数を獲得することにより係数を修正する工程、および1つ以上の変換係数にデノイジングを適用する工程、のうち選択された少なくとも一つの工程を実行することにより、第2の変換係数の組を作成する工程と、
前記動き補償された非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する工程と、を備える、請求項1に記載の方法。 - 前記スケーリングが零によるスケーリングによって実行される、請求項5に記載の方法。
- ソフトスレッショルディング演算を実行するステップが、係数の大きさがスレッショルドより大きいならば、係数を並べ替え、係数の大きさが前記スレッショルドより小さいならば、前記係数に零を設定する工程を備える、請求項5に記載の方法。
- 前記動き補償された非線形予測をフィルタ処理するため使用される前記非線形フィルタを表す情報を符号化されたビットストリームに加える、請求項1に記載の方法。
- 復号化中に前記変換係数を作成することに適用される変換に関してデコーダへ通知するために前記変換を表す情報を加えるステップをさらに備える、請求項8に記載の方法。
- 前記非線形フィルタが複数のフィルタのうちの1つのフィルタであり、
前記複数のフィルタの中から前記非線形フィルタを選択するステップをさらに備える、請求項1に記載の方法。 - 映像フレームのための複数の動き補償された非線形予測を生成するステップと、
前に見つけられた予測との差に基づいて前記複数の動き補償された非線形予測のうちの1つ以上を除去するステップと、をさらに備える、請求項1に記載の方法。 - 変換係数の個数が候補ブロック要素の個数を上回る、請求項1に記載の方法。
- 前に符号化されたフレームからのブロックを使用して動き補償された予測を生成するために動き補償を実行する動き補償予測モジュールと、
端数補間プロセスの一部として非線形フィルタを用いて変換ドメイン内で前記ブロックに非線形フィルタリングを実行する非線形予測フィルタと、
前記非線形フィルタにより生成された非線形予測が適切な予測であるか否かを判断する判断部と、
残差フレームを生成するために現在フレーム内のブロックから前記動き補償された非線形予測を減算する減算器と、
前記残差フレームを符号化するコーダと、を備え、
前記判断部による判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる、エンコーダ。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項13に記載のエンコーダ。
- 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記動き補償された予測に変換を適用する順変換モジュールと、
スレッショルドに基づいて各変換係数をスレッショルディングする工程、大きさに基づいて変換係数を順位付けする工程、前記ブロックの各変換係数をパーセンテージフィルタリングする工程、および前記ブロック内の各変換係数に割り当てられたインデックスを選択する工程、のうち選択された一つの工程を実行することにより、変更すべき1つ以上の変換係数の組を特定し、前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するモジュールと、
前記動き補償された非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項13に記載のエンコーダ。 - 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記動き補償された予測に変換を適用する順変換モジュールと、
第2の変換係数の組を作成するために1つ以上の変換係数をスケーリングするモジュールと、
前記動き補償された非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項13に記載のエンコーダ。 - システムによって実行されたときに、
前に符号化されたフレームからのブロックを使用して動き補償された予測を生成するために動き補償を実行するステップと、
動き補償された非線形予測を生成するために端数補間プロセスの一部として非線形フィルタを用いて変換ドメイン内で前記動き補償された予測に非線形フィルタリングを実行するステップと、
前記非線形フィルタリングを実行するステップにおいて生成された前記非線形予測が適切な予測であるか否かを判断するステップと、
残差フレームを生成するために現在フレーム内のブロックから前記動き補償された非線形予測を減算するステップと、
前記残差フレームを符号化するステップと、を備え、
前記判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる方法を前記システムに実行させる命令を記憶する1つ以上のコンピュータ読み取り可能な媒体。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項17に記載のコンピュータ読み取り可能な媒体。
- 前記方法が、
前に復号化されたフレームに非線形フィルタリングを適用するステップをさらに備え、
動き補償を実行するステップが、前記非線形フィルタリングされた前に復号化されたフレームを使用して前記動き補償された予測を生成する工程を備える、請求項17に記載のコンピュータ読み取り可能な媒体。 - 前に復号化されたブロックからのブロックを使用して予測されたブロックを生成するステップと、
非線形予測を生成するために端数補間プロセスの一部として非線形予測フィルタを用いて変換ドメイン内で前記予測されたブロックに非線形フィルタリングを実行するステップと、
前記非線形フィルタリングを実行するステップにおいて生成された前記非線形予測が適切な予測であるか否かを判断するステップと、
残差フレームを復号化するステップと、
前記残差フレームを前記非線形予測に加算するステップと、を備え、
前記判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる、方法。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項20に記載の方法。
- 非線形フィルタリングが予測パラメータに基づいている、請求項20に記載の方法。
- 前記予測パラメータに基づいて前記非線形フィルタを決定するステップをさらに備える、請求項22に記載の方法。
- 第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用するステップと、
スレッショルドに基づいて各変換係数をスレッショルディングする工程、大きさに基づいて変換係数を順位付けする工程、前記ブロックの各変換係数をパーセンテージフィルタリングする工程、および前記ブロック内の各変換係数に割り当てられたインデックスを選択する工程、のうち選択された一つの工程を実行することにより、変更すべき1つ以上の変換係数の組を特定するステップと、
前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するステップと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用するステップと、をさらに備える、請求項20に記載の方法。 - 第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用するステップと、
第2の変換係数の組を作成するために1つ以上の変換係数をスケーリングするステップと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用するステップと、をさらに備える、請求項20に記載の方法。 - 前に復号化されたブロックからのブロックを使用して予測されたブロックを生成する動き補償ユニットと、
非線形予測を生成するために端数補間プロセスの一部として非線形予測フィルタを用いて変換ドメイン内で前記予測されたブロックに非線形フィルタリングを実行する非線形予測フィルタと、
前記非線形フィルタにより生成された非線形予測が適切な予測であるか否かを判断する判断部と、
残差フレームを復号化するデコーダと、
前記残差フレームを前記非線形予測に加算する加算器と、を備え、
前記判断部による判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる、装置。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項26に記載の装置。
- 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用する順変換モジュールと、
変更すべき1つ以上の変換係数の組を特定するためにスレッショルドに基づいて各変換係数にスレッショルディングを実行し、前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するモジュールと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項26に記載の装置。 - 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用する順変換モジュールと、
変更すべき1つ以上の変換係数の組を特定するために大きさに基づいて変換係数をソートし、前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するモジュールと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項26に記載の装置。 - 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用する順変換モジュールと、
変更すべき1つ以上の変換係数の組を特定するために前記ブロックの各変換係数にパーセンテージフィルタリングを実行し、前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するモジュールと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項26に記載の装置。 - 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用する順変換モジュールと、
前記ブロック内の各変換係数にインデックスを割り当て、前記インデックスに基づいて変更すべき1つ以上の変換係数の組を特定し、前記1つ以上の変換係数の組内の変換係数を変更することにより第2の変換係数の組を作成するために前記第1の変換係数の組を修正するモジュールと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項26に記載の装置。 - 前記非線形予測フィルタが、
第1の変換係数の組を獲得するために前記予測されたブロックに変換を適用する順変換モジュールと、
第2の変換係数の組を作成するために1つ以上の変換係数をスケーリングするモジュールと、
前記非線形予測を生成するために前記第2の変換係数の組に逆変換を適用する逆変換モジュールと、を備える、請求項26に記載の装置。 - システムによって実行されたときに、
前に復号化されたブロックからのブロックを使用して予測されたブロックを生成するステップと、
非線形予測を生成するために端数補間プロセスの一部として非線形予測フィルタを用いて変換ドメイン内で前記予測されたブロックに非線形フィルタリングを実行するステップと、
前記非線形フィルタリングを実行するステップにおいて生成された前記非線形予測が適切な予測であるか否かを判断するステップと、
残差フレームを復号化するステップと、
前記残差フレームを前記非線形予測に加算するステップと、を備え、
前記判断は、前記非線形予測と従来型の動き補償された予測との差分が所定の閾値未満であるか否かを確認することにより行われる、方法を前記システムに実行させる命令を記憶する1つ以上のコンピュータ読み取り可能な媒体。 - 前記所定の閾値が、量子化ステップ幅の増加関数である、請求項33に記載のコンピュータ読み取り可能な媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US69276705P | 2005-06-21 | 2005-06-21 | |
US60/692,767 | 2005-06-21 | ||
US11/471,741 | 2006-06-20 | ||
US11/471,741 US20060285590A1 (en) | 2005-06-21 | 2006-06-20 | Nonlinear, prediction filter for hybrid video compression |
PCT/US2006/024270 WO2007002265A2 (en) | 2005-06-21 | 2006-06-21 | A nonlinear, prediction filter for hybrid video compression |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2008547324A JP2008547324A (ja) | 2008-12-25 |
JP2008547324A5 JP2008547324A5 (ja) | 2009-07-23 |
JP5259396B2 true JP5259396B2 (ja) | 2013-08-07 |
Family
ID=37416278
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008518377A Expired - Fee Related JP5259396B2 (ja) | 2005-06-21 | 2006-06-21 | ハイブリッド映像圧縮のための非線形予測フィルタ |
Country Status (3)
Country | Link |
---|---|
US (5) | US20060285590A1 (ja) |
JP (1) | JP5259396B2 (ja) |
WO (1) | WO2007002265A2 (ja) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060285590A1 (en) * | 2005-06-21 | 2006-12-21 | Docomo Communications Laboratories Usa, Inc. | Nonlinear, prediction filter for hybrid video compression |
US8059902B2 (en) * | 2006-10-31 | 2011-11-15 | Ntt Docomo, Inc. | Spatial sparsity induced temporal prediction for video compression |
US7894550B2 (en) * | 2007-01-10 | 2011-02-22 | International Business Machines Corporation | Method, apparatus, and system for source coding with iterative side information generation and decoding process |
US20090154567A1 (en) * | 2007-12-13 | 2009-06-18 | Shaw-Min Lei | In-loop fidelity enhancement for video compression |
KR101460608B1 (ko) * | 2008-03-04 | 2014-11-14 | 삼성전자주식회사 | 필터링된 예측 블록을 이용한 영상 부호화, 복호화 방법 및장치 |
WO2011126284A2 (en) * | 2010-04-05 | 2011-10-13 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding video by using adaptive prediction filtering, method and apparatus for decoding video by using adaptive prediction filtering |
KR101682147B1 (ko) | 2010-04-05 | 2016-12-05 | 삼성전자주식회사 | 변환 및 역변환에 기초한 보간 방법 및 장치 |
US8787459B2 (en) * | 2010-11-09 | 2014-07-22 | Sony Computer Entertainment Inc. | Video coding methods and apparatus |
US9609336B2 (en) * | 2013-04-16 | 2017-03-28 | Fastvdo Llc | Adaptive coding, transmission and efficient display of multimedia (acted) |
JP2017507538A (ja) * | 2014-01-01 | 2017-03-16 | エルジー エレクトロニクス インコーポレイティド | 適応予測フィルタを用いて映像信号をエンコード、デコードするための方法及び装置 |
KR102445242B1 (ko) | 2014-03-19 | 2022-09-21 | 삼성전자주식회사 | 경계 필터링을 수반한 비디오 부호화 및 비디오 복호화 방법 및 장치 |
CN104602025B (zh) * | 2015-01-09 | 2018-11-20 | 华为技术有限公司 | 处理图像的方法和装置 |
WO2016200100A1 (ko) | 2015-06-10 | 2016-12-15 | 삼성전자 주식회사 | 적응적 가중치 예측을 위한 신택스 시그널링을 이용하여 영상을 부호화 또는 복호화하는 방법 및 장치 |
KR102331933B1 (ko) * | 2016-05-12 | 2021-11-29 | 엘지전자 주식회사 | 계수 유도 복원을 이용하여 비디오 신호를 처리하는 방법 및 장치 |
CN106952314B (zh) * | 2017-03-01 | 2019-06-21 | 西安电子科技大学 | 基于频域方向滤波器的递归预测图像压缩方法 |
JP7195349B2 (ja) | 2018-07-02 | 2022-12-23 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | ビデオコーディングにおけるフィルタリングのための装置および方法 |
CN110163892B (zh) * | 2019-05-07 | 2023-06-20 | 国网江西省电力有限公司检修分公司 | 基于运动估计插值的学习率渐进更新方法及动态建模系统 |
KR20220157765A (ko) * | 2021-05-21 | 2022-11-29 | 삼성전자주식회사 | 영상 부호화 장치 및 이의 동작 방법 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4868653A (en) * | 1987-10-05 | 1989-09-19 | Intel Corporation | Adaptive digital video compression system |
JPH0497681A (ja) * | 1990-08-16 | 1992-03-30 | Nippon Telegr & Teleph Corp <Ntt> | 映像符号化復号化装置 |
JP3090763B2 (ja) * | 1992-02-06 | 2000-09-25 | 富士通株式会社 | 動画像符号化装置 |
JP3165296B2 (ja) * | 1992-12-25 | 2001-05-14 | 三菱電機株式会社 | フレーム間符号化処理方式及びフレーム間符号化処理方法及び符号化制御方式 |
JPH1023429A (ja) * | 1996-07-05 | 1998-01-23 | Matsushita Electric Ind Co Ltd | 画像符号化装置および画像復号化装置 |
US20030043918A1 (en) * | 1999-12-20 | 2003-03-06 | Jiang Hong H. | Method and apparatus for performing video image decoding |
JP2002315004A (ja) * | 2001-04-09 | 2002-10-25 | Ntt Docomo Inc | 画像符号化方法及び装置、画像復号方法及び装置、並びに画像処理システム |
EP1404136B1 (en) * | 2001-06-29 | 2018-04-04 | NTT DoCoMo, Inc. | Image encoder, image decoder, image encoding method, and image decoding method |
US20040252758A1 (en) * | 2002-08-14 | 2004-12-16 | Ioannis Katsavounidis | Systems and methods for adaptively filtering discrete cosine transform (DCT) coefficients in a video encoder |
US7352909B2 (en) * | 2003-06-02 | 2008-04-01 | Seiko Epson Corporation | Weighted overcomplete de-noising |
US7653133B2 (en) * | 2003-06-10 | 2010-01-26 | Rensselaer Polytechnic Institute (Rpi) | Overlapped block motion compression for variable size blocks in the context of MCTF scalable video coders |
US7280706B2 (en) * | 2003-08-15 | 2007-10-09 | Arcsoft, Inc. | Better picture for inexpensive cameras |
US7298925B2 (en) * | 2003-09-30 | 2007-11-20 | International Business Machines Corporation | Efficient scaling in transform domain |
US20050105817A1 (en) * | 2003-11-17 | 2005-05-19 | Guleryuz Onur G. | Inter and intra band prediction of singularity coefficients using estimates based on nonlinear approximants |
US7616693B2 (en) * | 2004-12-02 | 2009-11-10 | Kolorific, Inc. | Method and system for detecting motion between video field of same and opposite parity from an interlaced video source |
US7769089B1 (en) * | 2004-12-02 | 2010-08-03 | Kolorific, Inc. | Method and system for reducing noise level in a video signal |
US7663701B2 (en) * | 2005-04-11 | 2010-02-16 | Ati Technologies, Inc. | Systems, methods, and apparatus for noise reduction |
US20060285590A1 (en) * | 2005-06-21 | 2006-12-21 | Docomo Communications Laboratories Usa, Inc. | Nonlinear, prediction filter for hybrid video compression |
KR101157978B1 (ko) * | 2005-06-30 | 2012-06-25 | 엘지디스플레이 주식회사 | 액정표시패널의 제조방법 |
-
2006
- 2006-06-20 US US11/471,741 patent/US20060285590A1/en not_active Abandoned
- 2006-06-21 WO PCT/US2006/024270 patent/WO2007002265A2/en active Application Filing
- 2006-06-21 JP JP2008518377A patent/JP5259396B2/ja not_active Expired - Fee Related
-
2011
- 2011-06-03 US US13/153,299 patent/US20110235718A1/en not_active Abandoned
- 2011-06-03 US US13/153,294 patent/US8625682B2/en not_active Expired - Fee Related
- 2011-06-03 US US13/153,296 patent/US20110235717A1/en not_active Abandoned
- 2011-06-03 US US13/153,292 patent/US20110293005A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US8625682B2 (en) | 2014-01-07 |
US20110235718A1 (en) | 2011-09-29 |
JP2008547324A (ja) | 2008-12-25 |
US20060285590A1 (en) | 2006-12-21 |
WO2007002265A2 (en) | 2007-01-04 |
US20110235717A1 (en) | 2011-09-29 |
US20110293006A1 (en) | 2011-12-01 |
WO2007002265A3 (en) | 2007-04-05 |
US20110293005A1 (en) | 2011-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5259396B2 (ja) | ハイブリッド映像圧縮のための非線形予測フィルタ | |
JP5203379B2 (ja) | ビデオ圧縮用の空間規約誘導時間予測 | |
EP2805499B1 (en) | Video decoder, video encoder, video decoding method, and video encoding method | |
JP4988715B2 (ja) | ビデオ符号化におけるノイズフィルタリング方法及び装置 | |
JP4920599B2 (ja) | ハイブリッドビデオ圧縮の量子化雑音除去用の非線形ループ内デノイズフィルタ | |
JP3385077B2 (ja) | 動きベクトル検出装置 | |
JP5529537B2 (ja) | 複数経路ビデオ符号化及び復号化のための方法及び装置 | |
WO2012009540A1 (en) | Low-complexity intra prediction for video coding | |
EP1629436B1 (en) | Overcomplete basis transform-based motion residual frame coding method and apparatus for video compression | |
JP2007501555A (ja) | ビデオエンコードおよびデコードの方法および対応する装置 | |
EP1925160A2 (en) | Integrated spatial-temporal prediction | |
EP3104615B1 (en) | Moving image encoding device and moving image encoding method | |
US10091514B1 (en) | Apparatus and method for inter and intra mode selection and block partitioning | |
JP2008547288A (ja) | 重複変換符号化及び復号化の方法と装置 | |
US8792549B2 (en) | Decoder-derived geometric transformations for motion compensated inter prediction | |
EP3843399B1 (en) | Video image component prediction method and apparatus, and computer storage medium | |
JP6564315B2 (ja) | 符号化装置、復号装置、及びプログラム | |
KR20120033546A (ko) | 영상의 구조적 정보를 이용한 적응적 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 | |
JP6700877B2 (ja) | 画像復号装置、画像復号プログラム及びチップ | |
JP2021190718A (ja) | 画像符号化装置、画像復号装置及びこれらのプログラム | |
KR20040014047A (ko) | 이산여현변환 방법과 이를 이용한 영상압축방법 | |
JP2000125304A (ja) | 画像階層符号化方法及びこの方法を記録した記録媒体 | |
KR20110042602A (ko) | 움직임 보상 프레임의 필터링을 이용한 영상 부호화/복호화 방법 및 장치 | |
Segall et al. | Application of the motion vector constraint to the regularized enhancement of compressed video | |
Abu-Taleb et al. | Blind source recovery using an adaptive generalized gamma score function |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090603 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090603 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120403 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120601 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130401 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130423 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130424 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160502 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5259396 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |