JP2013229927A - Rru映像符号化及び復号化方法及び装置 - Google Patents

Rru映像符号化及び復号化方法及び装置 Download PDF

Info

Publication number
JP2013229927A
JP2013229927A JP2013143034A JP2013143034A JP2013229927A JP 2013229927 A JP2013229927 A JP 2013229927A JP 2013143034 A JP2013143034 A JP 2013143034A JP 2013143034 A JP2013143034 A JP 2013143034A JP 2013229927 A JP2013229927 A JP 2013229927A
Authority
JP
Japan
Prior art keywords
image block
rru
prediction residual
block
encoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013143034A
Other languages
English (en)
Other versions
JP5730954B2 (ja
Inventor
Lafuze Comer Mary
コマー,マリー,ラフューズ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Research Funding Corp
Original Assignee
Thomson Research Funding Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Research Funding Corp filed Critical Thomson Research Funding Corp
Publication of JP2013229927A publication Critical patent/JP2013229927A/ja
Application granted granted Critical
Publication of JP5730954B2 publication Critical patent/JP5730954B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

【課題】ブロック境界におけるフィルタリングによるRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置を提供することである。
【解決手段】画像ブロックの映像信号データのためのエンコーダ、デコーダ、符号化方法及び復号化方法が提供される。画像ブロックの映像信号データを符号化するエンコーダは、画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、フル解像度予測残差をダウンサンプリングするRRUReduced Resolution Update)ダウンサンプラを有する。
【選択図】図5

Description

[連邦政府により支援された研究開発における政府ライセンス権利]
米国政府は、本発明における支払い済みのライセンスと、米国国立標準技術研究所により与えられたプロジェクトID契約第2003005676Bの条項によって設けられるような妥当な条件について特許権者が他人にライセンスすることを要求するため、制限された状況における権利を有する。
[関連出願の相互参照]
本出願は、参照することによりその全体がここに含まれる、2004年9月29日に出願された米国仮出願第60/614,075号(代理人整理番号PU040269)“METHOD AND APPARATUS FOR REDUCED RESOLUTION UPDATE VIDEO CODING AND DECODING WITH FILTERING ACROSS BLOCK BOUNDARIES”の優先権を主張する。
[発明の技術分野]
本発明は、一般に映像符号化及び復号化に関し、より詳細には、ブロック境界におけるフィルタリングによるRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置に関する。
[発明の背景]
RRU(Reduced Resolution Update)は、定常的エリアにおいて高解像度を維持しながら、低解像度アップデートを高解像度画像に符号化することによって、エンコーダが重い動きの期間中に高フレームレートを維持することを可能にする映像符号化ツールである。RRUモードでは、予測エラー残差は、フル解像度の代わりに低減された空間解像度により符号化される。RRUモードでは、ブロックは、それの隣接ブロックの何れも参照することなく、符号化中にダウンサンプリング及び補間(interpolate)される。これは、復号化された画像における重大なブロック歪み(blockiness)を招く可能性がある。
従来のRRUは、ブロック外からの何れのデータを利用することなく、予測エラー残差の各8×8ブロックを処理する。図1において、従来のRRUについてのフル解像度サンプルに対する低減された解像度サンプルの空間配置が示される。低解像度残差(○により示される)は、高解像度残差(×により示される)から計算され、復号化されたブロックを取得するため、符号化、再構成、補間及び予測ブロックに加えられる。ブロックの外部には利用されるべきサンプルはないため、最初の行と列及び最後の行と列が内装の代わりに補外(extrapolate)される。これは、ブロック歪みに寄与することが可能である。
H.263規格に規定されるような従来のRRUでは、ダウンサンプリングはエンコーダによって実行され、このため、当該規格によっては規定されない。この結果、RRUダウンサンプリングの具体例は以降に説明されるが、他のダウンサンプリングスキームもまた従来のRRUにおいて利用可能であるということが理解されるであろう。
図2を参照するに、H.263RRUの補間スキームが、参照番号200により全体表示される。補間スキーム200は、実行される必要があるすべてのサンプルが利用可能である画像ブロックの内部の画素に対するものである。
図3を参照するに、補外が実行される必要があるブロック境界画素に対する補間スキームが、参照番号300により全体表示される。補外は、ブロックの外部のデータが利用可能でないため、ブロック境界画素に対して実行される必要がある。
図4を参照するに、一例となるRRUダウンサンプリングスキームが、参照番号400により全体表示される。本例では、低減された解像度の各サンプルは、4つのフル解像度サンプルの加重平均として取得される。
RRUを利用する際にブロック歪みを低減するのに使用された方法は、フレームの復号化後に適用されるデブロッキングフィルタを強化することである。本方法の問題点は、それが追加的なスムージングが必要とされる予測エラー残差に対してだけでなく、当該ブロックを再構成するためデブロッキング前に残差に加えられる予測に対してもまたさらなるスムージングを提供してしまうということである。これは、デブロッキングフィルタがローパスフィルタであるため、予測ブロックにおける不要な詳細ロスが発生することを意味する。
このため、従来技術の上記問題点を解消するRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置を有することが、望ましく、かつ効果的である。
[発明の概要]
従来技術の上記及び他の問題点及び短所が、ブロック境界におけるフィルタリングによるRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置に関する本発明により解消される。
本発明の特徴によると、画像ブロックの映像信号データを符号化するエンコーダが提供される。当該エンコーダは、画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを用いてフル解像度予測残差をダウンサンプリングするRRU(Reduced Resolution Update)ダウンサンプラを有する。
本発明の他の特徴によると、画像ブロックの映像信号データを符号化するエンコーダが提供される。当該エンコーダは、画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、符号化された予測残差を補間するRRU補間装置を有する。
本発明のさらなる他の特徴によると、画像ブロックの映像信号データを復号化するデコーダが提供される。当該デコーダは、画像ブロックを再構成するため予測残差に加えられる予測をフィルタリングすることなく、画像ブロックの予測残差をフィルタリングするフィルタを有する。
本発明のさらなる他の特徴によると、画像ブロックの映像信号データを符号化する方法が提供される。当該方法は、画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、フル解像度予測残差をダウンサンプリングするRRUダウンサンプリングステップを実行するステップを有する。
本発明のさらなる特徴によると、画像ブロックの映像信号データを符号化する方法が提供される。当該方法は、画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、符号化された予測残差を補完するRRU補間ステップを実行するステップを有する。
本発明のさらなる他の特徴によると、画像ブロックの映像信号データを復号化する方法が提供される。当該方法は、画像ブロックを再構成するため、予測残差に加える予測をフィルタリングすることなく、画像ブロックの予測残差をフィルタリングするステップを有する。
ブロック境界におけるフィルタリングによるRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置を提供することができる。
図1は、従来のRRU(Reduced Resolution Update)ツールを利用した低減された解像度のサンプルの空間配置を示す。 図2は、H.263RRUの補間スキームを示す。 図3は、ブロック境界画素の補間スキームを示す。 図4は、一例となるRRUダウンサンプリングスキームを示す。 図5は、本発明の原理による映像エンコーダのブロック図を示す。 図6は、本発明の原理による映像デコーダのブロック図を示す。 図7は、本発明の原理による新規なRRU技術とブロック境界におけるフィルタリングを利用した映像符号化方法のフロー図を示す。 図8は、本発明の原理による新規なRRU技術とブロック境界におけるフィルタリングを利用した映像復号化方法のフロー図を示す。 図9は、本発明の原理による新規なRRUツールを利用した低減された解像度のサンプルの空間配置を示す。 図10は、本発明の原理によるRRU+の一例となる補間スキームを示す。 図11は、本発明の原理によるRRU+の一例となるダウンサンプリングスキームを示す。 図12は、本発明の原理によるあるレンジのQP値と第1テストシーケンスのルマPSNR及び平均ビットレートを含む値の第1テーブルを示す。 図13は、本発明の原理によるあるレンジのQP値と第2テストシーケンスのルマPSNR及び平均ビットレートを含む値の第2テーブルを示す。
[詳細な説明]
本発明は、ブロック境界におけるフィルタリングによるRRU(Reduced Resolution Update)映像符号化及び復号化のための方法及び装置に関する。本発明の実施例によると、ダウンサンプリング及び補間フィルタが、ブロック間フィルタリングを利用しない従来のRRUを利用することから生ずるブロック歪みを回避するため、近傍ブロックからの残差を利用する装置及び方法が開示される。従って、本発明は、余計なループフィルタリング/スムージングを適用することなく、所望されないブロック歪みを大きく低減する。ここに記載される新たなアプローチは“RRU+”として参照されることが認識されるべきである。
本説明は本発明の原理を示す。このため、ここでは明示的に記載又は図示されていないが、その趣旨及び範囲内に含まれる本発明の原理を当業者が実現する各種構成を創出することが可能であるということが理解されるであろう。
ここに記載されるすべての実施例と条件付き言語は、本発明の原理と従来技術に対して本発明者が寄与したコンセプトを読者が理解することに役立つ教示のためのものであり、それは、具体的に記載された実施例及び条件に制限されることがないと解釈される。
さらに、本発明の原理、特徴及び実施例と共にその具体例をここに記載したすべての記載は、構造上及び機能上それの均等物を含むことが意図される。さらに、このような均等物は現在知られている均等物と共に将来開発される均等物、すなわち、構成に関係なく同一の機能を実行するよう開発された任意の要素の両方を含むことが意図される。
従って、例えば、ここに与えられるブロック図が本発明の原理を実現する例示的な回路の概念図を表すことは、当業者により理解されるであろう。同様に、何れかのフローチャート、フロー図、状態遷移図、擬似コードなどはコンピュータ可読媒体に実質的に表現され、明示的に図示されているかどうかに関係なく、コンピュータ又はプロセッサによって実行される各種プロセスを表すことは理解されるであろう。
図面に示される各種要素の機能は、適切なソフトウェアに関連してソフトウェアを実行可能なハードウェア及び専用のハードウェアを利用することにより提供されるかもしれない。プロセッサにより提供されるとき、当該機能は、単一の専用のプロセッサ、単一の共有プロセッサ、又はその一部が共有可能な複数の個別プロセッサによって提供されるかもしれない。さらに、「プロセッサ」又は「コントローラ」という用語の明示的仕様は、ソフトウェアを実行可能なハードウェアのみを表すと解釈されるべきでなく、暗黙的には、以下に限定するものではないが、デジタル信号プロセッサ(DSP)ハードウェア、ソフトウェアを格納するROM(Read Only Memory)、RAM(Random Access Memory)及び不揮発性ストレージを含むものであってもよい。
従来技術による及び/又はカスタム化された他のハードウェアもまた含まれるかもしれない。同様に、図面に示されるスイッチは、単なる概念的なものである。それらの機能は、プログラムロジック、専用ロジック、プログラム制御と専用ロジックのやりとり、手動、又は文脈からより具体的に理解されるような実現者により選択可能な特定の技術を通じて実行されるかもしれない。
請求項において、指定された機能を実行する手段として表される要素は、例えば、a)当該機能を実行する回路要素の組み合わせ、又はb)当該機能を実行するようソフトウェアを実行する適切な回路と組み合わされたファームウェア、マイクロコードなどを含む任意の形式によるソフトウェアなど、を含む当該機能を実行する任意の方法を含むことが意図される。このような請求項により規定されるような本発明は、記載される各種手段により提供される機能が、請求項が求めるような方法により組み合わされるという事実に基づく。従って、これらの機能を提供可能な手段はここに示されるものと等価であるとみなされる。
図5を参照するに、映像エンコーダは、参照番号500により全体表示される。エンコーダ500への入力は、加算結合部510の非反転入力と信号通信接続される。加算結合部510の出力は、RRUダウンサンプリングユニット515に信号通信接続される。RRUダウンサンプリングユニット515の出力は、ブロック変換装置520に信号通信接続される。変換装置520は、量子化装置530に信号通信接続される。量子化装置530の出力は、エントロピー符号化装置540と信号通信接続され、エントロピー符号化装置540の出力は、エンコーダ500の外部利用可能な出力となる。
量子化装置530の出力はさらに、逆量子化装置550と信号通信接続される。逆量子化装置550は、逆ブロック変換装置560と信号通信接続され、さらに逆ブロック変換装置560は、RRU補間装置563に信号通信接続される。RRU補間装置563は、加算結合部565の第1入力と信号通信接続される。加算結合部565の出力は、デブロッキングフィルタ567と信号通信接続され、さらにデブロッキングフィルタ567は、基準画像ストア570に信号通信接続される。基準画像ストア570の第1出力は、動き推定装置580の第1入力と信号通信接続される。エンコーダ500への入力はさらに、動き推定装置580の第2入力に信号通信接続される。動き推定装置580の出力は、動き補償装置590の第1入力に信号通信接続される。基準画像ストア570の第2出力は、動き補償装置590の第2入力に信号通信接続される。動き補償装置590の出力は、加算結合部510の反転入力と信号通信接続される。動き補償装置590の出力は、加算結合部565の第2入力と信号通信接続される。
図6を参照するに、映像デコーダは、参照番号600により全体表示される。映像デコーダ600は、逆量子化装置620と信号通信接続されるエントロピーデコーダ610を有する。逆量子化装置620は、逆変換装置630と信号通信接続される。逆変換装置630は、RRU補間装置635と信号通信接続され、さらにRRU補間装置635は、加算器又は加算結合部640の第1入力端子に接続される。そこでは、加算結合部640の出力は、映像デコーダ600の出力を提供する。加算結合部640の出力は、デブロッキングフィルタ645と信号通信接続され、さらにデブロッキングフィルタ645は、基準画像ストア650に信号通信接続される。基準画像ストア650は、動き補償装置660に信号通信接続され、動き補償装置660は、加算結合部640の第2入力端子に信号通信接続される。
ここでRRU+として全体表示され、従来技術の対照的に、本発明の原理に従って、ダウンサンプリング及び補間フィルタは、RRUから生じるブロック歪みを回避するため、近傍ブロックからの残差を利用する。さらに、従来技術と対照的に、本発明は、この残差のみに対するブロック間フィルタリングを利用する。
図7を参照するに、新規なRRU(Reduced Resolution Update)技術及びブロック境界におけるフィルタリングを利用した一例となる映像符号化方法が、参照番号700により全体表示される。本方法700は、ループリミットブロック710にコントロールをわたすスタートブロック705を有する。リープリミットブロック710は、機能ブロック725にコントロールをわたす。機能ブロック725は、現在の入力ブロックの動き補償された予測を構成し、その後、機能ブロック730にコントロールをわたす。機能ブロック730は、フル解像度予測残差を構成するため、現在の入力ブロックから現在の入力ブロックの予測を減算し、その後、機能ブロック735にコントロールをわたす。機能ブロック735は、画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、フル解像度予測残差をダウンサンプリングし、その後、機能ブロック740にコントロールをわたす。機能ブロック740は、低解像度ダウンサンプリング予測残差を変換及び量子化し、符号化された予測残差を構成するため、予測残差を逆量子化し、その後、機能ブロック755にコントロールをわたす。機能ブロック755は、画像ブロックの符号化された補間残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して符号化された予測残差を補間し、その後、機能ブロック760にコントロールをわたす。機能ブロック760は、符号化された画像ブロックを構成するため、現在入力ブロックの予測に補間された符号化予測残差を加え、その後、機能ブロック762にコントロールをわたす。機能ブロック762は、ブロック歪みを低減するためデブロッキングフィルタリングを実行し、ループリミットブロック765にコントロールをわたす。ループリミットブロックは、エンドブロック770にコントロールをわたす。
図8を参照するに、新規なRRU技術及びブロック境界におけるフィルタリングを利用した一例となる映像復号化方法が、参照番号800により全体表示される。本方法800は、ループリミットブロック810にコントロールをわたすスタートブロック805を有する。ループリミットブロック810は、符号化された予測残差ビットストリームをエントロピー復号化する機能ブロック815にコントロールをわたし、その後、機能ブロック820にコントロールをわたす。機能ブロック820は、符号化された予測残差を構成するため、予測残差を逆変換及び逆量子化し、その後、機能ブロック825にコントロールをわたす。機能ブロック825は、画像を再構成するため、予測残差に加えられる予測をフィルタリングすることなく、画像ブロックの符号化された予測残差のみをフィルタリングし、その後、機能ブロック835にコントロールをわたす。機能ブロック835は、現在の入力ブロックの動き補償された予測を構成し、その後、機能ブロック840にコントロールをわたす。機能ブロック840は、符号化された画像ブロックを構成するため、現在入力ブロックの動き補償予測にフィルタリングされた符号化予測残差を加え、その後、機能ブロック845にコントロールをわたす。機能ブロック845は、ブロック歪みを低減するため、デブロッキングフィルタリングを実行し、ループリミットブロック850にコントロールをわたす。ループリミットブロック850は、エンドブロック855にコントロールをわたす。
図9を参照するに、本発明の原理によるサンプルの空間配置が、参照番号900により全体表示される。ここでは、低減された解像度のサンプルが、1つおきにフル解像度サンプルと同一位置に配置される。破線は、現在ブロックの境界を示す。破線の外部の画素は、近傍ブロックからのものである。ダウンサンプリングを実行するため、10×10予測ブロックが、もとの画素の10×10のブロックから減算され、その後、当該差が、4×4のブロックにダウンサンプリングされる。補間のため、もとの画素はデコーダに利用可能でないため、現在ブロックの左上に再構成された画素が利用される。使用される補間フィルタが{1,2,1}/2である場合、現在ブロックの右下の画素は必要でないことに留意されたい。このことは、当該補間がデコーダにおいて実行される必要があり、現在ブロックの右下のブロックが補間において利用するためまだ復号化されていないという理由から重要である。
比較のため、RRUとRRU+はH.264ソフトウェアコーデックにより実現された。RRU、RRU+及びRRUのないH.264(非RRU)を比較した結果が、第1及び第2テストシーケンスに提供される。RRU及びRRU+符号化のため、B画像のみが低減された解像度残差を利用して符号化された。
図10を参照するに、RRU+のための一例となる補間スキームが、参照番号1000により全体表示される。従来のRRUと対照的に、補間スキーム1000は、近傍ブロックからのサンプルを利用する。RRU+によってブロック外部のさらなる行と列が利用可能になるため、画素a、b、c及びdは常に、図4に示されるような補間に必要なサンプルを有することとなる。本発明は図10に示されるフィルタ係数に限定されるものでなく、本発明の範囲を維持しながら、本発明の原理による他のフィルタ係数がまた利用されてもよいということは理解されるべきである。
図11を参照するに、RRU+のための一例となるダウンサンプリングスキームが、参照番号1100により全体表示される。本発明は図11に示されるフィルタ係数に限定されるものでなく、本発明の範囲を維持しながら、本発明の原理による他のフィルタ係数がまた利用されてもよいということは理解されるべきである。
図12及び13を参照するに、あるレンジのQPの値に対する2つのテストシーケンスのルマPSNRと平均ビットレートを示す第1及び第2テーブルが、それぞれ参照番号1220と1300により全体表示される。すべての実験について、QPI=QPP=QP及びQPB=QP+1である。各テーブルの最後の2つの列は、使用された合計ビット数とB画像の平均ルマPSNRとを示している。RRUがB画像についてのみ使用されたためである。主観的には、一般に双方のテストシーケンスについてRRUと比較されるRRU+を利用した重大なブロッキングアーチファクトにおける顕著な低減がある。
本発明の上記及び他の特徴及び効果は、ここでの教示に基づき当業者により容易に確認されるかもしれない。本発明の教示はハードウェア、ソフトウェア、ファームウェア、特定用途プロセッサ又はそれらの組み合わせの各種形態により実現可能であるということが理解されるべきである。
最も好ましくは、本発明の教示は、ハードウェアとソフトウェアの組み合わせとして実現される。さらに、ソフトウェアは、好ましくは、プログラムストレージユニット上に有形に実現されるアプリケーションプログラムとして実現される。アプリケーションプログラムは、何れか適切なアーキテクチャを有するマシーンにアップロード及び実行されるかもしれない。好ましくは、マシーンは、1以上の中央処理ユニット(CPU)、RAM、入出力(I/O)インタフェースなどのハードウェアを有するコンピュータプラットフォーム上で実現される。コンピュータプログラムはまた、オペレーティングシステムとマイクロインストラクションコードとを有するかもしれない。ここに記載される各種プロセス及び機能は、CPUにより実行可能なマイクロインストラクションコードの一部、アプリケーションプログラムの一部、又は上記の何れかの組み合わせであってもよい。さらに、追加的なデータストレージユニット及び印刷ユニットなどの他の各種周辺ユニットが、コンピュータプラットフォームに接続されてもよい。
さらに、添付した図面に示されるシステムコンポーネント及び方法の一部は、好ましくは、ソフトウェアにより実現されるため、システムコンポーネント又はプロセス機能ブロックの間の実際の接続は、本発明がプログラムされる方法に依存して異なるかもしれない。ここでの教示が与えられると、当業者は、本発明の上記及び同様の実現形態及び構成を考案することができるであろう。
ここでは、添付した図面を参照して例示的な実施例が説明されたが、本発明がこれらの実施例に限定されるものでなく、本発明の趣旨及び範囲から逸脱することなく、各種変形及び改良が可能であるということが理解されるべきである。このようなすべての変形及び改良は、添付した請求項に与えられるような本発明の範囲内に含まれるものとされる。
500 映像エンコーダ
600 映像デコーダ

Claims (21)

  1. 画像ブロックの映像信号データを符号化する装置であって、
    RRU(Reduced Resolution Update)ダウンサンプラを有し、
    前記RRUダウンサンプラは、前記画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用してフル解像度予測残差をダウンサンプリングする装置。
  2. RRU補間装置をさらに有し、
    前記RRU補間装置は、前記画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して符号化された低解像度予測残差を補間する、請求項1記載の装置。
  3. 前記RRU補間装置は、補間のため前記画像ブロックの左上部分の再構成された画素を利用する、請求項2記載の装置。
  4. 前記RRU補間装置は、前記画像ブロックの右上の再構成された画素を利用せず補間する、請求項2記載の装置。
  5. 前記画像ブロックの再構成されたものにおけるブロック歪みを低減するデブロッキングフィルタをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項2記載の装置。
  6. 画像ブロックの映像信号データを符号化する装置であって、
    前記画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して符号化された低解像度予測残差を補間するRRU(Reduced Resolution Update)補間装置を有する装置。
  7. 前記RRU補間装置は、補間のため前記画像ブロックの左上部分の再構成された画素を利用する、請求項6記載の装置。
  8. 前記RRU補間装置は、前記画像ブロックの右下の再構成された画素を利用せず補間する、請求項6記載の装置。
  9. 前記画像ブロックの再構成されたものにおけるブロック歪みを低減するデブロッキングフィルタをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項6記載の装置。
  10. 画像ブロックの映像信号データを復号化する装置であって、
    前記画像ブロックの予測残差を、前記画像ブロックを再構成するため前記予測残差に加える予測をフィルタリングすることなくフィルタリングするフィルタを有する装置。
  11. 前記画像ブロックの再構成されたものにおけるブロック歪みを低減するデブロッキングフィルタをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項10記載の装置。
  12. 画像ブロックの映像信号データを符号化する方法であって、
    前記画像ブロックの低解像度ダウンサンプリング予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、フル解像度予測残差をダウンサンプリングするRRU(Reduced Resolution Update)ダウンサンプリングを実行するステップを有する方法。
  13. 前記画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して符号化された予測残差を補間するRRU補間ステップを実行するステップをさらに有する、請求項12記載の方法。
  14. 前記RRU補間ステップは、補間のため前記画像ブロックの左上部分の再構成された画素を利用する、請求項13記載の方法。
  15. 前記RRU補間ステップは、前記画像ブロックの右上の再構成された画素を利用せず補間する、請求項13記載の方法。
  16. デブロッキングフィルタを利用して、前記画像ブロックの再構成されたものにおけるブロック歪みを低減するステップをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項12記載の方法。
  17. 画像ブロックの映像信号データを符号化する方法であって、
    前記画像ブロックの符号化された補間予測残差を構成するため、少なくとも1つの近傍画像ブロックからのデータを利用して、符号化された予測残差を補間するRRU(Reduced Resolution Update)補間装置を実行するステップを有する方法。
  18. デブロッキングフィルタを利用して、前記画像ブロックの再構成されたものにおけるブロック歪みを低減するステップをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項17記載の方法。
  19. 画像ブロックの映像信号データを復号化する方法であって、
    前記画像ブロックの予測残差を、前記画像ブロックを再構成するため前記予測残差に加える予測をフィルタリングすることなくフィルタリングするステップを有する方法。
  20. デブロッキングフィルタを利用して、前記画像ブロックの再構成されたものにおけるブロック歪みを低減するステップをさらに有し、
    前記デブロッキングフィルタは、最大デブロッキング強度未満の強度により使用される、請求項19記載の方法。
  21. 符号化された画像ブロックの映像信号構成であって、
    少なくとも1つの近傍画像ブロックからのデータを利用して、フル解像度予測残差からダウンサンプリングされた前記画像ブロックの低解像度予測残差を有する構成。
JP2013143034A 2004-09-29 2013-07-08 復号化する装置及び方法 Active JP5730954B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US61407504P 2004-09-29 2004-09-29
US60/614,075 2004-09-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2007534753A Division JP5342777B2 (ja) 2004-09-29 2005-09-28 Rru映像符号化及び復号化方法及び装置

Publications (2)

Publication Number Publication Date
JP2013229927A true JP2013229927A (ja) 2013-11-07
JP5730954B2 JP5730954B2 (ja) 2015-06-10

Family

ID=35520817

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2007534753A Expired - Fee Related JP5342777B2 (ja) 2004-09-29 2005-09-28 Rru映像符号化及び復号化方法及び装置
JP2013143034A Active JP5730954B2 (ja) 2004-09-29 2013-07-08 復号化する装置及び方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2007534753A Expired - Fee Related JP5342777B2 (ja) 2004-09-29 2005-09-28 Rru映像符号化及び復号化方法及び装置

Country Status (6)

Country Link
US (1) US20070195887A1 (ja)
EP (1) EP1795015B1 (ja)
JP (2) JP5342777B2 (ja)
CN (1) CN101032174B (ja)
BR (1) BRPI0515943B1 (ja)
WO (1) WO2006039382A2 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006039382A2 (en) * 2004-09-29 2006-04-13 Thomson Research Funding Corporation Method and apparatus for reduced resolution update video coding and decoding
KR101370289B1 (ko) 2007-02-14 2014-03-06 삼성전자주식회사 레지듀얼 리사이징을 이용한 영상의 부호화, 복호화 방법및 장치
KR102139535B1 (ko) * 2007-10-16 2020-07-30 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
JP5519654B2 (ja) 2008-06-12 2014-06-11 トムソン ライセンシング 低減ビット深度更新モードおよび低減色度サンプリング更新モードを用いるビデオコーディングおよびデコーディングのための方法および装置
US8325801B2 (en) * 2008-08-15 2012-12-04 Mediatek Inc. Adaptive restoration for video coding
US20120281759A1 (en) * 2010-03-31 2012-11-08 Lidong Xu Power efficient motion estimation techniques for video encoding
JP5544996B2 (ja) 2010-04-09 2014-07-09 ソニー株式会社 画像処理装置および方法
WO2012169096A1 (ja) * 2011-06-08 2012-12-13 パナソニック株式会社 映像表示装置及び映像処理装置
JP5749595B2 (ja) * 2011-07-27 2015-07-15 日本電信電話株式会社 画像伝送方法、画像伝送装置、画像受信装置及び画像受信プログラム
CN104604229A (zh) * 2012-09-25 2015-05-06 日本电信电话株式会社 视频编码方法及装置、视频解码方法及装置以及它们的程序
US10341659B2 (en) * 2016-10-05 2019-07-02 Qualcomm Incorporated Systems and methods of switching interpolation filters
GB2599509B (en) * 2019-03-20 2023-08-23 V Nova Int Ltd Residual filtering in signal enhancement coding

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10191351A (ja) * 1996-10-24 1998-07-21 Fujitsu Ltd 動画像符号化装置および復号化装置
JP5342777B2 (ja) * 2004-09-29 2013-11-13 トムソン リサーチ ファンディング コーポレイション Rru映像符号化及び復号化方法及び装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5614952A (en) * 1994-10-11 1997-03-25 Hitachi America, Ltd. Digital video decoder for decoding digital high definition and/or digital standard definition television signals
JP4034380B2 (ja) * 1996-10-31 2008-01-16 株式会社東芝 画像符号化/復号化方法及び装置
JP4105257B2 (ja) * 1997-07-30 2008-06-25 ソニー株式会社 記憶装置および記憶方法
US6665344B1 (en) * 1998-06-29 2003-12-16 Zenith Electronics Corporation Downconverting decoder for interlaced pictures
JP2000102015A (ja) * 1998-09-22 2000-04-07 Sharp Corp 動きベクトル検出装置及び動きベクトル検出方法
JP2002290243A (ja) * 2001-03-28 2002-10-04 Mitsubishi Electric Corp 符号化方法、符号化装置、復号方法、及び復号装置
US7206453B2 (en) * 2001-05-03 2007-04-17 Microsoft Corporation Dynamic filtering for lossy compression
US7379496B2 (en) * 2002-09-04 2008-05-27 Microsoft Corporation Multi-resolution video coding and decoding
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7369709B2 (en) * 2003-09-07 2008-05-06 Microsoft Corporation Conditional lapped transform
KR101117840B1 (ko) * 2004-04-02 2012-03-15 톰슨 라이센싱 복잡도 가변 비디오 디코더를 위한 방법 및 장치
DE102004059978B4 (de) * 2004-10-15 2006-09-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz und zum Decodieren einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Restwerte-Prädiktion sowie ein Computerprogramm und ein computerlesbares Medium

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10191351A (ja) * 1996-10-24 1998-07-21 Fujitsu Ltd 動画像符号化装置および復号化装置
JP5342777B2 (ja) * 2004-09-29 2013-11-13 トムソン リサーチ ファンディング コーポレイション Rru映像符号化及び復号化方法及び装置

Also Published As

Publication number Publication date
JP5730954B2 (ja) 2015-06-10
BRPI0515943B1 (pt) 2018-10-16
WO2006039382A3 (en) 2006-08-17
BRPI0515943A (pt) 2008-08-12
US20070195887A1 (en) 2007-08-23
CN101032174A (zh) 2007-09-05
WO2006039382A2 (en) 2006-04-13
JP5342777B2 (ja) 2013-11-13
JP2008515350A (ja) 2008-05-08
EP1795015B1 (en) 2016-03-16
EP1795015A2 (en) 2007-06-13
CN101032174B (zh) 2013-07-03

Similar Documents

Publication Publication Date Title
JP5730954B2 (ja) 復号化する装置及び方法
US9154808B2 (en) Method and apparatus for INTRA prediction for RRU
JP5628155B2 (ja) 動き補償の補間フィルタリング及び参照画像のフィルタリングのための局所的な適応フィルタリングの方法及び装置
US10979707B2 (en) Method and apparatus of adaptive inter prediction in video coding
JP5378791B2 (ja) 適応補間を使用する映像符号化及び復号化の方法と装置
JP4965429B2 (ja) 複雑度スケーラブルなビデオエンコーダの方法及び装置
JP5008664B2 (ja) マクロブロック適応型レイヤ間テクスチャ内予測の方法及び装置
JP5534522B2 (ja) スケーラブルなビデオのためにレイヤー間残差予測を行う方法および装置
US20120134424A1 (en) Method and System for a Parameterized Multi-Standard Deblocking Filter for Video Compression Systems
KR20100081348A (ko) 비트 깊이 확장성을 위한 아티팩트 제거를 위한 방법 및 장치
JP2022533190A (ja) アップサンプリングを使用した行列ベースのイントラ予測
JP2007528675A (ja) Avc用解像度低下更新モード
JP6989699B2 (ja) ビデオ符号化のためのインター予測機器及び方法の補間フィルタ
JP2008529412A (ja) 中間ループフィルタデータを格納するスクラッチパッド
JP5882450B2 (ja) 制約付きフィルタ係数を有する適応ループフィルタの方法及び装置
JP2006157925A (ja) パイプラインデブロッキングフィルタ
JP2004266794A5 (ja)

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140708

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20141007

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20141010

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150310

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150408

R150 Certificate of patent or registration of utility model

Ref document number: 5730954

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250