JP2014158305A - 予測映像の生成方法、装置及び記録媒体 - Google Patents

予測映像の生成方法、装置及び記録媒体 Download PDF

Info

Publication number
JP2014158305A
JP2014158305A JP2014107203A JP2014107203A JP2014158305A JP 2014158305 A JP2014158305 A JP 2014158305A JP 2014107203 A JP2014107203 A JP 2014107203A JP 2014107203 A JP2014107203 A JP 2014107203A JP 2014158305 A JP2014158305 A JP 2014158305A
Authority
JP
Japan
Prior art keywords
component
prediction
image
prediction mode
residue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014107203A
Other languages
English (en)
Other versions
JP2014158305A5 (ja
Inventor
Wu-Sik Kim
キム,ウー−シク
Hyon-Moon Kim
キム,ヒョン−ムン
Dae-Son Cho
チョウ,デ−ソン
Dormitory Blinov
ビリノフ,ドミトリ
Dae-Hee Kim
キム,デ−ヒ
Un-Il Choe
チェー,ウン−イル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2014158305A publication Critical patent/JP2014158305A/ja
Publication of JP2014158305A5 publication Critical patent/JP2014158305A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/007Transform coding, e.g. discrete cosine transform
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

【課題】 現在画像の色成分のそれぞれのマクロブロック別に色成分のそれぞれのマクロブロックに最適の予測モードを適応的に適用して動画の符号化及び復号化を行うことによって、動画の符号化及び復号化効率を高めうる。
【解決手段】 ビットストリームを復号化することによって、一つのシーケンスを構成する複数の色成分のブロックに対する一つの予測モードを表す情報を復元するステップと、前記復元された情報によって、前記色成分のブロックに一律的に適用される予測モードを使用したり、前記色成分のブロックに独立的に予測モードを使用して前記現在映像の予測映像を生成するステップと、を含むことを特徴とする。
【選択図】 図1

Description

本発明は、動画を符号化する方法及び装置、動画を復号化する方法及び装置に係り、特に、H.264/MPEG−4 AVC(Advanced Video Coding)FRExt(Fidelity Range Extensions)標準分野における動画を符号化する方法及び装置、動画を復号化する方法及び装置に関する。
“レジデュアル色変換”と呼ばれる新たなRGB符号化技術は、H.264/MPEG−4 AVC FRExt標準化過程で開発された。これは、RGB色空間をYCbCr色空間に変換する時に発生する画質の劣化を防止するためのものである。しかし、H.264/MPEG−4 AVC FRExt上のRGB符号化及び復号化技術も、動画再生機器に適用するにはまだ動画の符号化及び復号化効率が十分に高くないという問題点があった。
本発明が解決しようとする技術的課題は、H.264/MPEG−4 AVC FRExt上のRGB符号化技術の動画符号化及び復号化効率を高めうる装置及び方法を提供することである。
また、前記の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供することである。
前記課題を解決するための本発明による符号化装置における予測画像の生成方法は、所定画像の特性に基づいて、現在画像の色成分のそれぞれのブロック別に前記色成分のそれぞれのブロックに最適の予測モードを選択するステップと、前記選択された予測モードによって、前記現在画像に対する予測画像を生成するステップと、を含む。
前記他の課題を解決するために、本発明は、前記の符号化装置における予測画像の生成方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供する。
前記さらに他の課題を解決するための本発明による符号化装置における予測画像生成装置は、所定画像の特性に基づいて、現在画像の色成分のそれぞれのブロック別に前記色成分のそれぞれのブロックに最適の予測モードを選択する選択部と、前記選択された予測モードによって、前記現在画像に対する予測画像を生成する生成部と、を備える。
前記さらに他の課題を解決するための本発明による符号化方法は、所定画像の特性に基づいて、現在画像の色成分のそれぞれのブロック別に前記色成分のそれぞれのブロックに最適の予測モードを選択するステップと、前記選択された予測モードによって、前記現在画像に対する予測画像を生成するステップと、前記現在画像と前記予測画像との差に該当する色成分のそれぞれのレジデューを生成するステップと、前記生成されたレジデューを符号化することによってビットストリームを生成するステップと、を含む。
前記さらに他の課題を解決するために、本発明は、前記の符号化方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供する。
前記さらに他の課題を解決するための本発明による符号化装置は、所定画像の特性に基づいて、現在画像の色成分のそれぞれのブロック別に前記色成分のそれぞれのブロックに最適の予測モードを選択する選択部と、前記選択された予測モードによって前記現在画像に対する予測画像を生成し、前記現在画像と前記予測画像との差に該当する色成分のそれぞれのレジデューを生成する生成部と、前記生成されたレジデューを符号化することによって、ビットストリームを生成する符号化部と、を備える。
前記さらに他の課題を解決するための本発明による復号化装置における予測画像の生成方法は、ビットストリームを復号化することによって、現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元するステップと、前記復元された情報が表す予測モードによって、前記現在画像に対する予測画像を生成するステップと、を含む。
前記さらに他の課題を解決するために、本発明は、前記の復号化装置における予測画像の生成方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供する。
前記さらに他の課題を解決するための本発明による復号化装置における予測画像生成装置は、ビットストリームを復号化することによって、現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元する復号化部と、前記復元された情報が表す予測モードによって、前記現在画像に対する予測画像を生成する生成部と、を備える。
前記さらに他の課題を解決するための本発明による復号化方法は、ビットストリームを復号化することによって、現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元するステップと、前記復元された情報が表す予測モードによって、前記現在画像と前記現在画像に対する予測画像との差に該当するレジデューを生成するステップと、前記復元された情報が表す予測モードによって、前記予測画像を生成するステップと、前記生成されたレジデューと前記生成された予測画面との合算に該当する復元画面を生成するステップと、を含む。
前記さらに他の課題を解決するために、本発明は、前記の復号化方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供する。
前記さらに他の課題を解決するための本発明による復号化装置は、ビットストリームを復号化することによって、現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元する復号化部と、前記復元された情報が表す予測モードによって、前記予測画像を生成する第1生成部と、前記復元された情報が表す予測モードによって、前記現在画像と前記現在画像に対する予測画像との差に該当するレジデューを生成し、前記生成されたレジデューと前記生成された予測画面との合算に該当する復元画面を生成する第2生成部と、を備える。
本発明によれば、現在画像の色成分のそれぞれのマクロブロック別に色成分のそれぞれのマクロブロックに最適の予測モードを適応的に適用して動画の符号化及び復号化を行うことによって、動画の符号化及び復号化効率を高めうる。特に、現在画像の色成分のそれぞれのマクロブロック別に、単一予測モード、複合予測モード、インター予測、イントラ予測、レジデュー変換、RCT(Residual Color Transformation)変換、IPP(Inter−Plane Prediction)変換、RCP(Residual Color Prediction)変換などの多様な符号化方式を選択的に適用することによって、動画の符号化及び復号化効率を極大化させうる。
本発明の望ましい一実施形態による動画符号化装置の構成図である。 図1に示されたレジデュー生成部の構成図である。 インター予測でのマクロブロックの分割方法を示す図である。 イントラ予測での予測様子を示す図である。 図1に示されたレジデュー生成部の他の構成図である。 図1に示されたレジデュー生成部のさらに他の構成図である。 本発明による望ましい一実施形態に適用される5−タブフィルタを示す図である。 本発明による望ましい一実施形態に適用される3−タブフィルタとを示す図である。 図1に示されたレジデュー生成部のさらに他の構成図である。 図2に示された復元画像生成部の構成図である。 本発明の望ましい一実施形態による動画復号化装置の構成図である。 図10に示された予測画像生成部の構成図である。 図10に示された復元画像生成部の構成図である。 図12に示されたレジデュー逆変換部の構成図である。 本発明の望ましい一実施形態による動画符号化方法を示すフローチャートである。 本発明の望ましい一実施形態による動画符号化方法を示すフローチャートである。 本発明の望ましい一実施形態による動画復号化方法を示すフローチャートである。
以下、図面を参照して、本発明の望ましい実施形態を詳細に説明する。特に、以下の実施形態で、現在画像は、現在の動画符号化及び復号化の対象となる画像を意味し、参照画像は、現在画像の符号化または復号化に参照される画像を意味する。一般的に、参照画像は、現在画像の過去画像であるが、現在画像の未来画像となってもよく、複数の画像となってもよい。
図1は、本発明の望ましい一実施形態による動画符号化装置の構成図である。図1を参照するに、本実施形態による動画符号化装置は、最適モード選択部110、レジデュー生成部120、周波数空間変換部130、量子化部400、エントロピー符号化部150、逆量子化部160、周波数空間逆変換部170、及び復元画像生成部180で構成される。
最適モード選択部110は、サンプル画像の特性に基づいて、現在画像の色成分のそれぞれのマクロブロック別に色成分のそれぞれのマクロブロックに最適の予測モードを選択する。ここで、色成分のそれぞれのマクロブロックは、相互対応するマクロブロックということを、当業者ならば理解できる。
例えば、最適モード選択部110は、現在画像の色成分のそれぞれのマクロブロックに最適である予測モードとして、現在画像の色成分のそれぞれのマクロブロックに一律的に適用される予測モード(以下、“単一予測モード”という)及び現在画像の色成分のそれぞれのマクロブロックに独立的に適用される予測モード(以下、“複合予測モード”)のうち何れか一つを選択しうる。
また、最適モード選択部110は、現在画像の色成分のそれぞれのマクロブロックに、最適の予測モードとして単一予測モード及び複合予測モードのうち何れか一つを選択し、これらのうち単一予測モードを選択した場合に、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する予測モード(以下、“レジデュー変換モード”という)を選択することもある。
また、最適モード選択部110は、現在画像の色成分のそれぞれのマクロブロックに、最適の予測モードとして単一予測モード及び複合予測モードのうち何れか一つを選択し、これらのうち単一予測モードを選択した場合に、RCT(Residual Color Transformation)変換を行う予測モード(以下、“RCT変換モード”という)、IPP(Inter−Plane Prediction)変換を行うモード(以下、“IPP変換モード”という)、及びRCP(Residual Color Prediction)変換を行う予測モード(以下、“RCP変換モード”という)のうち何れか一つを選択することもある。RCT変換、IPP変換、RCP変換については後述する。
本実施形態で、サンプル画像としては、現在画像の以前画像のうち何れか一つが使われる。最適モード選択部110は、サンプル画像の色成分のそれぞれのマクロブロックに最適の予測モードを選択するために、このサンプル画像に対して全ての可能な予測モードを一つずつ順次に選択し、選択された予測モードによって符号化された全ての結果を比較して、多数の予測モードのうち、このサンプル画像の色成分のそれぞれのマクロブロックに最適の予測モードを選択する。以後、この予測モードが現在画像の色成分のそれぞれのマクロブロックに最適の予測モードとして使われる。
さらに詳細に説明すれば、最適モード選択部110は、現在画像の色成分のそれぞれのマクロブロックに最適である予測モードとして、サンプル画像を符号化した結果に該当するビットストリームの量及びサンプル画像とこのサンプル画像の復元画像との間の画質の歪曲が最も少ない予測モードを選択する。下記のものを参照するに、サンプル画像を符号化した結果に該当するビットストリームの量は、エントロピー符号化部150によって生成されたビットストリームの量となり、サンプル画像の復元画像は、復元画像生成部180によって生成された復元画像となる。
特に、本実施形態によれば、最適モード選択部110は、ラグランジアン最適化技法を使用して最適モードを選択する。すなわち、最適モード選択部110は、次の式(1)を利用して、原本画像と復元画像との差値を乗算して合算した値の平均から画質の歪曲を算出する。
Figure 2014158305
ここで、Dは、画質歪曲の程度を表し、pは、現在画像の画素値を表し、qは、以前画像の画素値を表し、iは、現在画像の現在マクロブロック内での画素のインデックスを表す。
また、最適モード選択部110は、次の式(2)を利用して画質の歪曲の程度とビットストリームの量のそれぞれの単位との差を調整するために、一定定数“λ”とビットストリームの量“R”とを積算し、この積算値と画質の歪曲の程度“D”とを合算することによって、現在画像の色成分のそれぞれのマクロブロックに最適の予測モードを選択するための最終値“L”を算出する。
Figure 2014158305
ここで、Rは、ビットストリームの量を表し、λは、所定の定数を表す。このような値を各予測方法別に計算した数Lが最も小さな予測方法を選択する。
前記のラグランジアン最適化技法によって実験を行えば、最適モード選択部110は、サンプル画像の色成分のそれぞれの類似性が高い場合には、単一予測モードを選択し、サンプル画像の色成分間の類似性が低い場合には、複合予測モードを選択する。
レジデュー生成部120は、最適モード選択部110によって選択された予測モードによって、色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当するレジデューを生成する。そうでなければ、レジデュー生成部120は、最適モード選択部110によって選択された予測モードによって、色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当する第1レジデューを生成し、色成分のそれぞれのマクロブロック別に第1レジデューの差に該当する第2レジデューを生成する。
周波数空間変換部130は、レジデュー生成部120によって生成されたレジデューを色空間から周波数空間に変換する。そうでなければ、周波数空間変換部130は、レジデュー生成部120によって生成された第2レジデューを色空間から周波数空間に変換する。H.264/MPEG−4 AVCでは、色空間から周波数空間に変換する方式としてDHT(Discrete Hadamard Transformation)、DCT(Discrete Cosine Transformation)基盤の整数変換が導入された。
量子化部140は、周波数空間変換部130によって変換された値を量子化する。すなわち、量子化部140は、周波数空間変換部130によって変換された結果である周波数成分値を量子化パラメータで割って、その結果を整数値に近似化する。
エントロピー符号化部150は、量子化部140によって量子化された値をエントロピー符号化することによってビットストリームを生成し、これを出力する。特に、本実施形態によれば、エントロピー符号化部150は、動画符号化装置によって使われた予測モード、すなわち、最適モード選択部110によって選択された予測モードを表す情報も共にエントロピー符号化することによって、これを含むビットストリームを生成する。H.264/MPEG−4 AVCでは、エントロピー符号化方式でCAVLC(Context−Adaptive Variable Length Coding)、CABAC(Context−Adaptive Binary Arithmetic Coding)が導入された。
さらに詳細に説明すれば、エントロピー符号化部150は、現在画像の色成分のそれぞれのマクロブロック別に、マクロブロックヘッダに最適モード選択部110によって選択された予測モードを表す情報を含むビットストリームを生成する。図10に示された動画復号化装置は、このビットストリームを受信して復号化することによって、動画符号化装置がいかなる予測モードを使用したのかが分かる。
もし、現在画像の色成分の全てのマクロブロックに対して、最適モード選択部110によって選択された予測モードがいずれも同じである場合には、マクロブロックの上位レベルであるシーケンスレベルまたはピクチャレベルで一つのシーケンスを構成する全てのマクロブロック、または一つのピクチャを構成する全てのマクロブロックに対して、最適モード選択部110によって選択された予測モードの一つのみを表す情報を含むビットストリームを生成することによって、マクロブロックヘッダに記録される情報を省略でき、符号化効率を高めうる。
さらに、現在画像の色成分の全てのマクロブロックに対して、最適モード選択部110によって選択された予測モードの一部が同じである場合には、マクロブロックの上位レベルであるシーケンスレベルまたはピクチャレベルで一つのシーケンスを構成するマクロブロック、または一つのピクチャを構成するマクロブロックのうち一部に対して、最適モード選択部110によって選択された予測モードの一つのみを表す情報を含み、残りのものに対しては、マクロブロックヘッダに最適モード選択部110によって選択された予測モードを表す情報を含むビットストリームを生成することによって、符号化効率を高めうる。
逆量子化部160は、量子化部140によって量子化された値を逆量子化する。すなわち、逆量子化部160は、量子化部140によって近似化された整数値に量子化パラメータを積算することによって周波数成分値を復元する。
周波数空間逆変換部170は、逆量子化部160によって復元された周波数成分値を周波数空間から色空間に変換することによって、現在画像と予測画像との差に該当するレジデューを復元する。そうでなければ、周波数空間逆変換部170は、逆量子化部160によって復元された周波数成分値を周波数空間から色空間に変換することによって、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを復元する。
復元画像生成部180は、レジデュー生成部120によって生成された予測画像と周波数空間逆変換部170によって復元されたレジデューとの合算に該当する復元画像を生成する。そうでなければ、復元画像生成部180は、周波数空間逆変換部170によって復元された第2レジデュー間の合算に該当する第1レジデューを生成し、レジデュー生成部120によって生成された予測画像とこのように生成された第1レジデューとの合算に該当する復元画像を生成する。
図2は、図1に示されたレジデュー生成部120の構成図である。図2を参照するに、図1に示されたレジデュー生成部120は、単一モードレジデュー生成部1211及び複合モードレジデュー生成部1212で構成される。
単一モードレジデュー生成部1211は、最適モード選択部110によって選択された予測モードが単一予測モードであれば、単一予測モードによって現在画像内の空間的な重畳性を除去する空間上予測(以下、“単一イントラ予測”という)を行うか、または単一予測モードによって現在画像と参照画像との時間的な重畳性を除去する時間上予測(以下、“単一インター予測”という)を行うことによって予測画像を生成する。次いで、単一モードレジデュー生成部1211は、現在画像とこのように生成された予測画像との差に該当するレジデューを生成する。
さらに詳細に説明すれば、単一モードレジデュー生成部1211は、現在画像の色成分のそれぞれのマクロブロックに一律的に適用されるサイズに色成分のそれぞれのマクロブロックを分割し、このように分割された色成分のそれぞれのブロック別に、色成分のそれぞれのブロックに一律的に適用される参照画像と現在画像との間の動きベクトルを決定し、このように決定された動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成することによって単一インター予測を行う。
すなわち、単一モードレジデュー生成部1211は、現在画像の色成分のそれぞれのマクロブロックを同じサイズに分割し、このように分割された色成分のそれぞれのブロック別に同じ動きベクトルを決定し、このように決定された動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成することによって単一インター予測を行う。
図3は、インター予測におけるマクロブロックの分割方法を示す図である。図3を参照するに、インター予測におけるマクロブロックの場合、16×16サイズのマクロブロックを16×16、16×8、8×16、8×16、8×8などの多様なサイズに分割した後、このように分割されたブロック別に動きベクトルが決定される。さらに、8×8サイズのブロックを再び8×8、8×4、4×8、4×4のさらに小さく分割した後、このように分割されたブロック別に動きベクトルが決定されることもある。マクロブロックがさらに小さく分割されるほど、レジデューに現在画像と参照画像との間の精密な動きが含まれる。
YCoCg色空間を例と挙げれば、単一モードレジデュー生成部1211は、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを何れも同じサイズに分割し、例えば、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを何れも8×8サイズに分割し、このように分割されたY成分のブロック、Co成分のブロック、Cg成分のブロック別に同じ動きベクトルを決定する。また、RGB色空間を例と挙げれば、単一モードレジデュー生成部1211は、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを何れも同じサイズに分割し、例えば、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを何れも8×8サイズに分割し、このように分割されたR成分のブロック、G成分のブロック、B成分のブロック別に同じ動きベクトルを決定する。
また、単一モードレジデュー生成部1211は、現在画像の色成分のそれぞれのマクロブロックに一律的に適用されるサイズに色成分のそれぞれのマクロブロックを分割し、このように分割された色成分のそれぞれのブロック別に色成分のそれぞれのブロックに一律的に適用される予測方向を決定し、このように決定された予測方向を使用して、復元画像生成部180によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成することによって、単一イントラ予測を行う。
すなわち、単一モードレジデュー生成部1211は、現在画像の色成分のそれぞれのマクロブロックを同じサイズに分割し、このように分割された色成分のそれぞれのブロック別に同じ予測方向を決定し、このように決定された予測方向を使用して、復元画像生成部180によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成することによって、単一イントラ予測を行う。
図4は、イントラ予測における予測様子を示す図である。図4を参照するに、16×16サイズのマクロブロックを4×4サイズに分割した後、このように分割されたブロック別に9個の予測方向を使用して予測画像が生成される。そうでなければ、16×16サイズのマクロブロックに対して、4個の予測方向を使用して予測画像が生成されることもある。前者の場合をさらに詳細に説明すれば、4×4サイズのブロックPa,Pb,…,Pqを予測するために、復元画像内の空間上隣接画素P0,P1,…,P12を利用する(41)。0から8までの9個の予測方向を使用して、隣接画素P0,P1,…,P12からPa,Pb,…,Pqを予測する(42)。0の方向を例と挙げれば、隣接画素P1,P2,P3,及びP4を0の方向に該当する垂直下降方向に投影することによって、Pa,Pe,Pi,及びPmはP1から予測し、Pb,Pf,Pj,及びPnはP2から予測し、Pc,Pg,Pk,及びPdはP3から予測し、Pd,Ph,Pl,及びPqはP4から予測する。他の方向の場合も同様に、前記のような投影によってPa,Pb,..,Pqが予測される。
YCoCg色空間を例と挙げれば、単一モードレジデュー生成部1211は、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを何れも同じサイズに分割し、例えば、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを何れも4×4サイズに分割し、このように分割されたY成分のブロック、Co成分のブロック、Cg成分のブロック別に同じ予測方向を決定する。また、RGB色空間を例と挙げれば、単一モードレジデュー生成部1211は、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを何れも同じサイズに分割し、例えば、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを何れも4×4サイズに分割し、このように分割されたR成分のブロック、G成分のブロック、B成分のブロック別に同じ予測方向を決定する。
前記のように、単一モードレジデュー生成部1211は、異なる色成分のそれぞれに同じ時間上予測方式及び同じ空間上予測方式を適用するために、色成分のそれぞれのレジデュー間の類似性が大きくなる。また、ブロックのサイズ、動きベクトル、予測方向が全ての色成分に一律的に適用されるため、色成分ごとにこのような情報を符号化させる必要なく、全ての色成分に対して、1回のみこのような情報を符号化させればよいため、全体的な符号化効率を高めうるという長所がある。
複合モードレジデュー生成部1212は、最適モード選択部110によって選択された予測モードが複合予測モードであれば、複合予測モードによって現在画像と参照画像との時間的重畳性を除去する時間上予測(以下、“複合インター予測”という)を行うか、または現在画像の色成分のそれぞれのマクロブロックに独立的に適用される予測モードによって、現在画像内の空間的重複性を除去する空間上予測(以下、“複合イントラ予測”という)を行うことによって予測画像を生成する。また、複合モードレジデュー生成部1212は、現在画像とこのように生成された予測画像との差に該当するレジデューを生成する。
さらに詳細に説明すれば、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用されるサイズに色成分のそれぞれのマクロブロックを分割し、このように分割された色成分のそれぞれのブロック別に色成分のそれぞれのブロックに独立的に適用される参照画像と現在画像との間の動きベクトルを決定し、このように決定された動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成することによって複合インター予測を行う。
すなわち、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックを異なるサイズに分割し、このように分割された色成分のそれぞれのブロック別に異なる動きベクトルを決定し、このように決定された動きベクトルを使用して参照画像から現在画像に対する予測画像を生成することによって、複合インター予測を行う。もちろん、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用される予測モードによってインター予測を行うため、現在画像の色成分のそれぞれのマクロブロックを同じサイズに分割し、このように分割された色成分のそれぞれのブロック別に同じ動きベクトルを決定することもある。
YCoCg色空間を例と挙げれば、複合モードレジデュー生成部1212は、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを異なるサイズに分割し、例えば、Y成分のマクロブロックを4×4、Co成分のマクロブロックを8×8、Cg成分のマクロブロックを8×8のサイズに分割し、このように分割されたY成分のブロック、Co成分のブロック、Cg成分のブロック別に異なる動きベクトルを決定する。また、RGB色空間を例と挙げれば、複合モードレジデュー生成部1212は、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを異なるサイズに分割し、例えば、R成分のマクロブロックを8×8、G成分のマクロブロックを4×4、B成分のマクロブロックを8×8のサイズに分割し、このように分割されたR成分のブロック、G成分のブロック、B成分のブロック別に異なる動きベクトルを決定する。
また、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用されるサイズに色成分のそれぞれのマクロブロックを分割し、このように分割された色成分のそれぞれのブロック別に色成分のそれぞれのブロックに独立的に適用される予測方向を決定し、このように決定された予測方向を使用して、復元画像生成部180によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成することによって、複合イントラ予測を行う。
すなわち、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックを異なるサイズに色成分のそれぞれのマクロブロックを分割し、このように分割された色成分のそれぞれのブロック別に異なる予測方向を決定し、このように決定された予測方向を使用して、復元画像生成部180によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成することによって、複合イントラ予測を行う。もちろん、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用される予測モードによってイントラ予測を行うため、現在画像の色成分のそれぞれのマクロブロックを同じサイズに分割し、このように分割された色成分のそれぞれのブロック別に同じ動きベクトルを決定することもある。
YCoCg色空間を例と挙げれば、複合モードレジデュー生成部1212は、Y成分のマクロブロック、Co成分のマクロブロック、Cg成分のマクロブロックを異なるサイズに分割し、例えば、Y成分のマクロブロックを4×4、Co成分のマクロブロックを16×16、Cg成分のマクロブロックを16×16のサイズに分割し、このように分割されたY成分のブロック、Co成分のブロック、Cg成分のブロック別に異なる予測方向を決定する。また、RGB色空間を例と挙げれば、複合モードレジデュー生成部1212は、R成分のマクロブロック、G成分のマクロブロック、B成分のマクロブロックを異なるサイズに分割し、例えば、R成分のマクロブロックを16×16、G成分のマクロブロックを4×4、B成分のマクロブロックを16×16のサイズに分割し、このように分割されたR成分のブロック、G成分のブロック、B成分のブロック別に異なる予測方向を決定する。
さらに、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロック別に複合インター予測または複合イントラ予測を行うこともある。すなわち、複合モードレジデュー生成部1212は、現在画像の色成分のそれぞれのマクロブロックのうち何れか一つの色成分のマクロブロックに対しては、複合インター予測を行い、他の色成分のマクロブロックに対しては、複合イントラ予測を行うこともある。
前記のように、複合モードレジデュー生成部1212は、異なる色成分の間に異なる時間上予測方式と異なる空間上予測方式とを行うため、色成分の間に類似性があまりなければ、相互間にそれぞれ独立的な符号化方法を使用して各色成分に最適の方法を使用することによって、予測符号化を効果的に行って、結局、全体的な符号化効率を高めうるが、色成分に独立的に適用されるブロックのサイズ、動きベクトル、及び予測方向を1回のみ符号化すればよいため、符号化効率を高めうる。
図5は、図1に示されたレジデュー生成部120の他の構成図である。図5を参照するに、図5に示されたレジデュー生成部120は、単一モードレジデュー生成部1221、レジデュー変換部1222、及び複合モードレジデュー生成部1223で構成される。単一モードレジデュー生成部1221及び複合モードレジデュー生成部1223は、図2に示された単一モードレジデュー生成部1211及び複合モードレジデュー生成部1212と同じ機能を行う。
しかしながら、単一モードレジデュー生成部1221でのインター予測またはイントラ予測以後にも、色成分間には重畳性が残っている。レジデュー変換部1222は、このような色成分間の重畳性を除去する役割を行う。単一モードレジデュー生成部1221によって生成されたレジデューとレジデュー変換部1222によって生成されたレジデューとを区別するために、前者を“第1レジデュー”と称し、後者を“第2レジデュー”と称す。
レジデュー変換部1222は、最適モード選択部110によって選択された予測モードがレジデュー変換モードであれば、単一モードレジデュー生成部1221によって生成された第1レジデュー間の差に該当する第2レジデューを生成する。
図6は、図1に示されたレジデュー生成部120のさらに他の構成図である。図6を参照するに、図6に示されたレジデュー生成部120は、単一モードレジデュー生成部1231、RCT(Residual Color Transformation)変換部1232、IPP(Inter−Plane Prediction)変換部1233、及びRCP(Residual Color Prediction)変換部1234、及び複合モードレジデュー生成部1235で構成される。単一モードレジデュー生成部1231及び複合モードレジデュー生成部1235は、図2に示された単一モードレジデュー生成部1211及び複合モードレジデュー生成部1212と同じ機能を行う。前記と同様に、単一モードレジデュー生成部1231によって生成されたレジデューWARCT変換部1232、IPP変換部1233、及びRCP変換部1234によって生成されたレジデューを区別するために、前者を“第1レジデュー”と称し、後者を“第2レジデュー”と称す。
単一モードレジデュー生成部1221によって生成された第1レジデュー間の差に該当する第2レジデューを生成する方式としては、RCT変換方式、IPP変換方式、RCP変換方式がある。RCT変換は、YCoCg色空間で第2レジデューを生成することによって、IPP変換は、RGB色空間で第2レジデューを生成することによって、RCP変換は、IPP変換と類似しているが、G成分のレジデューを予測子として使用する時に所定のフィルタリングを通じてノイズを除去した後にIPP変換と同じ変換を適用する。
RCT変換部1232は、最適モード選択部110によって選択された予測モードがRCT変換モードであれば、YCoCg色空間で次の式(3)を利用してY成分、Co成分、Cg成分それぞれの第1レジデュー間の差に該当する第2レジデューを生成する。特に、Y=(R+2G+B)>>2、Co=(R−B)>>1、Cg=(−R+2G−B)>>2の関係にある。
Figure 2014158305
ここで、△Xは、第1レジデューを意味し、△Xは、第2レジデューを意味する。また、表記“>>”は、右側シフト演算を意味し、おおよそ2で割ることとなる。また、変数tは、臨時的な計算目的として使われる。
IPP変換部1233は、最適モード選択部110によって選択された予測モードがIPP変換モードであれば、このIPP変換モードによって、RGB色空間で次の式(4)を利用して、R成分、G成分、B成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する。
Figure 2014158305
ここで、△Xは、第1レジデューを意味し、△Xは、第2レジデューを意味する。また、△X’は、復元された第1レジデューを意味する。特に、式(2)は、G成分が画像情報を多く有している時に効果的であり、R成分またはB成分を主な成分として第2レジデューを計算することもある。
RCP変換部1234は、最適モード選択部110によって選択された予測モードがRCP変換モードであれば、RCP変換モードによって、RGB色空間で次の式(5)のような5タップフィルタを使用して、R成分、G成分、B成分のそれぞれのノイズを除去した後、R成分、G成分、B成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する。
Figure 2014158305
また、RCP変換部1234は、RGB色空間で次の式(6)のような3タップフィルタを使用して、R成分、G成分、B成分のそれぞれのノイズを除去した後、R成分、G成分、B成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する。
Figure 2014158305
前記の式(5)及び式(6)で、abs(x)は、xの絶対値を意味し、sign(s)は、次の式(7)を意味する。
Figure 2014158305
図7A及び図7Bは、本発明による望ましい一実施形態に適用される5タップフィルタと3タップフィルタとを示す図である。図7A及び図7Bを参照するに、本実施形態に適用される5タップフィルタは、予測子として使用する画素を中心に周辺の4個の画素を使用し、3タップフィルタは、予測子として使用する画素を中心に周辺の左右の二つの画素を使用する。但し、前記の式(5)及び式(6)のように、加重値を置いて使用しうる。
図8は、図1に示されたレジデュー生成部120のさらに他の構成図である。図8を参照するに、図6に示されたレジデュー生成部120は、複合モードレジデュー生成部1241及びレジデュー変換部1242で構成される。複合モードレジデュー生成部1241は、図2に示された複合モードレジデュー生成部1212と同じ機能を行う。
ところが、複合モードレジデュー生成部1241でのインター予測またはイントラ予測以後にも、色成分間には重畳性が残っている。レジデュー変換部1242は、このような色成分間の重畳性を除去する役割を行う。単一モードレジデュー生成部1241によって生成されたレジデューとレジデュー変換部1242によって生成されたレジデューとを区別するために、前者を“第1レジデュー”と称し、後者を“第2レジデュー”と称す。
レジデュー変換部1242は、最適モード選択部110によって選択された予測モードがレジデュー変換モードであれば、レジデュー変換モードによって、複合モードレジデュー生成部1241によって生成された第1レジデュー間の差に該当する第2レジデューを生成する。但し、複合モードレジデュー生成部1241でのインター予測またはイントラ予測以後にも、色成分間には重畳性が残っているが、単一モード方式に比べて、色成分間の類似性が低いため、レジデュー変換部1242での圧縮効率は、レジデュー変換部1222での圧縮効率よりは劣る。
図9は、図2に示された復元画像生成部180の構成図である。図9を参照するに、図2に示された復元画像生成部180は、レジデュー逆変換部181及び予測補償部182で構成される。
レジデュー逆変換部181は、周波数空間逆変換部170によって復元された第2レジデュー間の合算に該当する第1レジデューを生成する。例えば、レジデュー逆変換部181は、次の式(8)を利用して、Y成分、Co成分、Cg成分のそれぞれの第2レジデュー間の合算に該当するY成分、Co成分、Cg成分のそれぞれの第1レジデューを生成する。
Figure 2014158305
ここで、△X’は、復元された第1レジデューを意味し、△X’は、復元された第2レジデューを意味する。
そうでなければ、レジデュー逆変換部181は、次の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
Figure 2014158305
ここで、△X’は、復元された第1レジデューを意味し、△X’は、復元された第2レジデューを意味する。
予測補償部182は、レジデュー生成部120によって生成された予測画像とレジデュー逆変換部181によって生成された第1レジデューとの合算に該当する復元画像を生成する。例えば、予測補償部182は、Y成分、Co成分、及びCg成分ごとに、レジデュー生成部120によって生成された予測画像とレジデュー逆変換部181によって生成された第1レジデューとの合算を算出することによって、YCoCg色空間での復元画像を生成する。そうでなければ、予測補償部182は、R成分、G成分、及びB成分ごとに、レジデュー生成部120によって生成された予測画像とレジデュー逆変換部181によって生成された第1レジデューとの合算を算出することによって、RGB色空間での復元画像を生成する。
図10は、本発明の望ましい一実施形態による動画復号化装置の構成図である。図10を参照するに、本実施形態による動画復号化装置は、エントロピー復号化部210、逆量子化部220、周波数空間逆変換部230、予測画面生成部240及び復元画像生成部250で構成される。
エントロピー復号化部210は、図1に示された動画符号化装置から出力されたビットストリームをエントロピー復号化することによって、現在画像に該当する整数値及び現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元する。ここで、現在画像の色成分のそれぞれのブロックに最適である予測モードは、動画符号化装置で使われた予測モードである。
逆量子化部220は、エントロピー復号化部210によって復元された整数値を逆量子化することによって周波数成分値を復元する。すなわち、逆量子化部220は、エントロピー復号化部210によって復元された整数値に量子化パラメータを積算することによって周波数成分値を復元する。
周波数空間逆変換部230は、逆量子化部220によって復元された周波数成分値を周波数空間から色空間に変換することによって、現在画像と予測画像との差に該当するレジデューを生成する。そうでなければ、周波数空間逆変換部230は、逆量子化部220によって復元された周波数成分値を周波数空間から色空間に変換することによって、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを復元する。
予測画像生成部240は、色成分のそれぞれのマクロブロック別にエントロピー復号化部210によって復元された情報が表す予測モードによって、現在画像に対する予測画像を生成する。
復元画像生成部250は、予測画像生成部240によって生成された予測画像と周波数空間逆変換部230によって復元されたレジデューとの合算に該当する復元画像を生成する。そうでなければ、復元画像生成部250は、周波数空間逆変換部230によって復元された第2レジデュー間の合算に該当する第1レジデューを生成し、予測画像生成部240によって生成された予測画像とこのように生成された第1レジデュー間の合算に該当する復元画像とを生成する。
図11は、図10に示された予測画像生成部240の構成図である。図11を参照するに、図10に示された予測画像生成部240は、単一モード予測画像生成部241及び複合モード予測画像生成部242で構成される。
単一モード予測画像生成部241は、エントロピー復号化部210によって復元された情報が単一予測モードを表せば、単一イントラ予測または単一インター予測を行うことによって予測画像を生成する。さらに詳細に説明すれば、単一モード予測画像生成部241は、現在画像の色成分のそれぞれのマクロブロックに一律的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに一律的に適用される参照画像と現在画像との間の動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成する。すなわち、単一モード予測画像生成部241は、現在画像の色成分のそれぞれのマクロブロックに対して同じサイズに分割されたブロック別に同じ動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成する。
また、単一モード予測画像生成部241は、現在画像の色成分のそれぞれのマクロブロックに一律的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに一律的に適用される予測方向を使用して、復元画像生成部250によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成する。すなわち、単一モードレジデュー生成部は、現在画像の色成分のそれぞれのマクロブロックに対して同じサイズに分割されたブロック別に同じ予測方向を使用して、復元画像生成部250によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成する。
複合モード予測画像生成部242は、エントロピー復号化部210によって復元された情報が複合予測モードを表せば、複合インター予測または複合イントラ予測を行うことによって予測画像を生成する。さらに詳細に説明すれば、複合モード予測画像生成部242は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに独立的に適用される参照画像と現在画像との間の動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成する。すなわち、複合モード予測画像生成部242は、現在画像の色成分のそれぞれのマクロブロックに対して、異なるサイズに分割された色成分のそれぞれのブロック別に異なる動きベクトルを使用して、参照画像から現在画像に対する予測画像を生成する。
また、複合モード予測画像生成部242は、現在画像の色成分のそれぞれのマクロブロックに独立的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに一律的に適用される予測方向を使用して、復元画像生成部250によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成することによって、複合イントラ予測を行う。すなわち、複合モード予測画像生成部242は、現在画像の色成分のそれぞれのマクロブロックに対して、異なるサイズに分割されたブロック別に異なる予測方向を使用して、復元画像生成部250によって生成された復元画像内の隣接画素から現在画像を構成するブロックを予測し、このように予測されたブロックで構成された予測画像を生成する。
図12は、図10に示された復元画像生成部250の構成図である。図12を参照するに、図10に示された復元画像生成部250は、レジデュー逆変換部251及び予測補償部252で構成される。
レジデュー逆変換部251は、エントロピー復号化部210によって復元された情報がレジデュー変換モードを表せば、周波数空間逆変換部230によって復元された第2レジデュー間の合算に該当する第1レジデューを生成する。例えば、レジデュー逆変換部251は、前記の式(8)を利用して、Y成分、Co成分、Cg成分のそれぞれの第2レジデュー間の合算に該当するY成分、Co成分、Cg成分のそれぞれの第1レジデューを生成する。そうでなければ、レジデュー逆変換部251は、前記の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
予測補償部252は、予測画像生成部240によって生成された予測画像とレジデュー逆変換部251によって生成された第1レジデューとの合算に該当する復元画像を生成する。例えば、予測補償部252は、Y成分、Co成分、及びCg成分ごとに予測画像生成部240によって生成された予測画像とレジデュー逆変換部251によって生成された第1レジデューとの合算を算出することによって、YCoCg色空間での復元画像を生成する。そうでなければ、予測補償部252は、R成分、G成分、及びB成分ごとに予測画像生成部240によって生成された予測画像とレジデュー逆変換部251によって生成された第1レジデューとの合算を算出することによって、RGB色空間での復元画像を生成する。
図13は、図12に示されたレジデュー逆変換部251の構成図である。図13を参照するに、図12に示されたレジデュー逆変換部251は、RCT変換部2511、IPP変換部2512、及びRCP変換部2513で構成される。
RCT変換部2511は、エントロピー復号化部210によって復元された情報がRCT変換モードを表せば、前記の式(8)を利用して、Y成分、Co成分、Cg成分のそれぞれの第2レジデュー間の合算に該当するY成分、Co成分、Cg成分のそれぞれの第1レジデューを生成する。
IPP変換部2512は、エントロピー復号化部210によって復元された情報がIPP変換モードを表せば、前記の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
RCP変換部2513は、エントロピー復号化部210によって復元された情報がRCP変換モードを表せば、前記の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
図14A及び図14Bは、本発明の望ましい一実施形態による動画符号化方法を示すフローチャートである。図14A及び図14Bを参照するに、本実施形態による動画符号化方法は、図1に示された動画符号化装置で時系列的に処理されるステップで構成される。したがって、以下省略された内容であっても、図1に示された動画符号化装置について前述された内容は、本実施形態による動画符号化方法にも適用される。
ステップ1401で、動画符号化装置は、サンプル画像に対して全ての可能な予測モードのうち何れか一つを選択する。特に、下記のステップ1406からステップ1401に戻った場合には、動画符号化装置は、全ての可能な予測モードのうち、既に選択された予測モードを除外したもののうち何れか一つを選択する。
ステップ1402で、動画符号化装置は、ステップ1401で選択された予測モードによって、色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当するレジデューを生成する。そうでなければ、ステップ1402で、動画符号化装置は、ステップ1401で選択された予測モードによって色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当する第1レジデューを生成し、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する。
ステップ1403で、動画符号化装置は、ステップ1402で生成されたレジデューを色空間から周波数空間に変換する。そうでなければ、ステップ1403で、動画符号化装置は、ステップ1402で生成された第2レジデューを色空間から周波数空間に変換する。
ステップ1404で、動画符号化装置は、ステップ1403で変換された値を量子化する。
ステップ1405で、動画符号化装置は、ステップ1404で量子化された値及びステップ1401で選択された予測モードを表す情報をエントロピー符号化することによって、ビットストリームを生成する。
ステップ1406で、動画符号化装置は、ステップ1404で量子化された値を逆量子化することによって周波数成分値を復元する。
ステップ1407で、動画符号化装置は、ステップ1406で復元された周波数成分値を周波数空間から色空間に変換することによって、現在画像と予測画像との差に該当するレジデューを復元する。そうでなければ、ステップ1407で動画符号化装置は、ステップ1406で復元された周波数成分値を周波数空間から色空間に変換することによって、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを復元する。
ステップ1408で、動画符号化装置は、ステップ1402で生成された予測画像とステップ1407によって復元されたレジデュー間の合算に該当する復元画像とを生成する。そうでなければ、ステップ1408で、動画符号化装置は、ステップ1407で復元された第2レジデュー間の合算に該当する第1レジデューを生成し、ステップ1402で生成された予測画像とこのように生成された第1レジデュー間の合算に該当する復元画像とを生成する。
ステップ1409で、動画符号化装置は、全ての予測モードに対して、前記ステップ1401〜1408が行われたか否かを判断し、もし、全ての予測モードに対して前記ステップ1401〜1408が行われた場合には、ステップ1410に進み、行われていない場合には、ステップ1401に戻る。
ステップ1410で、動画符号化装置は、サンプル画像の特性、すなわち、ステップ1401〜1409で行われた結果に基づいて、現在画像の色成分のそれぞれのマクロブロック別に色成分のそれぞれのマクロブロックに最適の予測モードを選択する。すなわち、ステップ1410で、動画符号化装置は、現在画像の色成分のそれぞれのマクロブロックに最適の予測モードとして、ステップ1405で生成されたビットストリームの量及びサンプル画像とステップ1408で生成された復元画像との間の画質の歪曲が最も少ない予測モードを選択する。
ステップ1411で、動画符号化装置は、ステップ1410で選択された予測モードによって、色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当するレジデューを生成する。そうでなければ、ステップ1411で、動画符号化装置は、ステップ1410で選択された予測モードによって色成分のそれぞれのマクロブロック別に現在画像に対する予測画像を生成し、現在画像と予測画像との差に該当する第1レジデューを生成し、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを生成する。
ステップ1412で、動画符号化装置は、ステップ1411で生成されたレジデューを色空間から周波数空間に変換する。そうでなければ、ステップ1412で、動画符号化装置は、ステップ1411で生成された第2レジデューを色空間から周波数空間に変換する。
ステップ1413で、動画符号化装置は、ステップ1414で変換された値を量子化する。
ステップ1414で、動画符号化装置は、ステップ1413で量子化された値及びステップ1410で選択された予測モードを表す情報をエントロピー符号化することによって、ビットストリームを生成する。
ステップ1415で、動画符号化装置は、ステップ1413で量子化された値を逆量子化することによって周波数成分値を復元する。
ステップ1416で、動画符号化装置は、ステップ1415で復元された周波数成分値を周波数空間から色空間に変換することによって、現在画像と予測画像との差に該当するレジデューを復元する。そうでなければ、ステップ1416で、動画符号化装置は、ステップ1415で復元された周波数成分値を周波数空間から色空間に変換することによって、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを復元する。
ステップ1417で、動画符号化装置は、ステップ1411で生成された予測画像とステップ1416で復元されたレジデュー間の合算に該当する復元画像とを生成する。そうでなければ、ステップ1417で、動画符号化装置は、ステップ1416で復元された第2レジデュー間の合算に該当する第1レジデューを生成し、ステップ1411で生成された予測画像とこのように生成された第1レジデュー間の合算に該当する復元画像とを生成する。
図15は、本発明の望ましい一実施形態による動画復号化方法を示すフローチャートである。図15を参照するに、本実施形態による動画復号化方法は、図10に示された動画復号化装置で時系列的に処理されるステップで構成される。したがって、以下省略された内容であっても、図10に示された動画復号化装置について前述された内容は、本実施形態による動画復号化方法にも適用される。
ステップ1501で、動画復号化装置は、図1に示された動画符号化装置から出力されたビットストリームをエントロピー復号化することによって、現在画像に該当する整数値及び現在画像の色成分のそれぞれのブロックに最適の予測モードを表す情報を復元する。
ステップ1502で、動画復号化装置は、ステップ1501で復元された整数値を逆量子化することによって周波数成分値を復元する。
ステップ1503で、動画復号化装置は、ステップ1502で復元された周波数成分値を周波数空間から色空間に変換することによって、現在画像と予測画像との差に該当するレジデューを生成する。そうでなければ、ステップ1503で、動画復号化装置は、ステップ1502で復元された周波数成分値を周波数空間から色空間に変換することによって、色成分のそれぞれの第1レジデュー間の差に該当する第2レジデューを復元する。
ステップ1504で、動画復号化装置は、ステップ1501で復元された情報がレジデュー変換モードを表せば、ステップ1505に進み、表さなければ、ステップ1506に進む。
ステップ1505で、動画復号化装置は、ステップ1502で復元された第2レジデュー間の合算に該当する第1レジデューを生成する。特に、ステップ1505で、動画復号化装置は、ステップ1501で復元された情報がRCT変換モードを表せば、前記の式(8)を利用して、Y成分、Co成分、Cg成分のそれぞれの第2レジデュー間の合算に該当するY成分、Co成分、Cg成分のそれぞれの第1レジデューを生成する。また、ステップ1505で、動画復号化装置は、ステップ1501で復元された情報がIPP変換モードまたはRCP変換モードを表せば、前記の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
RCP変換部1234は、エントロピー復号化部210によって復元された情報がRCP変換モードを表せば、前記の式(9)を利用して、R成分、G成分、B成分のそれぞれの第2レジデュー間の合算に該当するR成分、G成分、B成分のそれぞれの第1レジデューを生成する。
ステップ1506で、動画復号化装置は、ステップ1501で復元された情報が単一予測モードを表せば、ステップ1507に進み、複合予測モードを表せば、ステップ1508に進む。
ステップ1507で、動画復号化装置は、現在画像の色成分のそれぞれのブロックに一律的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに一律的に適用される動きベクトルを使用して予測画面を生成するか、または色成分のそれぞれのブロックに一律的に適用される予測方向を使用して予測画面を生成する。
ステップ1508で、動画復号化装置は、現在画像の色成分のそれぞれのブロックに独立的に適用されるサイズに分割されたブロック別に、色成分のそれぞれのブロックに独立的に適用される動きベクトルを使用して予測画面を生成するか、または色成分のそれぞれのブロックに独立的に適用される予測方向を使用して予測画面を生成する。
ステップ1509で、動画復号化装置は、ステップ1507またはステップ1508で生成された予測画像とステップ1503で復元されたレジデュー間の合算に該当する復元画像とを生成する。そうでなければ、復元画像生成部250は、ステップ1507またはステップ1508で生成された予測画像とステップ1505で生成された第1レジデュー間の合算に該当する復元画像とを生成する。
一方、前述した本発明の実施形態は、コンピュータで実行できるプログラムで作成可能であり、コンピュータで読み取り可能な記録媒体を利用して、前記プログラムを動作させる汎用デジタルコンピュータで具現される。また、前述した本発明の実施形態で使われたデータの構造は、コンピュータで読み取り可能な記録媒体に多様な手段を通じて記録される。
前記コンピュータで読み取り可能な記録媒体は、マグネチック保存媒体(例えば、ROM(Read Only Memory)、フロッピー(登録商標)ディスク、ハードディスクなど)、光学的判読媒体(例えば、CD−ROM、DVDなど)及びキャリアウェーブ(例えば、インターネットを通じた伝送)のような保存媒体を含む。
以上、本発明についてその望ましい実施形態を中心に説明した。当業者は、本発明が本発明の本質的な特性から逸脱しない範囲で変形された形態で具現されるということが分かるであろう。したがって、開示された実施形態は、限定的な観点でなく、説明的な観点で考慮されねばならない。本発明の範囲は、前述した説明でなく、特許請求の範囲に現れており、それと同等な範囲内にある全ての差異点は、本発明に含まれていると解釈されねばならない。
なお、上記実施形態について、以下の付記を記す。
(付記1) ビットストリームを復号化することによって、一つのシーケンスを構成する複数の色成分のブロックに対する一つの予測モードを表す情報を復元するステップと、
前記復元された情報によって、前記色成分のブロックに一律的に適用される予測モードを使用したり、前記色成分のブロックに独立的に予測モードを使用して前記現在映像の予測映像を生成するステップと、を含むことを特徴とする予測映像の生成方法。
(付記2) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに一律的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに一律的に適用されるサイズに分割されたブロック別に前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記3) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに一律的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに一律的に適用される動きベクトルを使用して前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記4) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに一律的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに一律的に適用される予測方向を使用して前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記5) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに独立的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに独立的に適用されるサイズに分割されたブロック別に前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記6) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに独立的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに独立的に適用される動きベクトルを使用して前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記7) 前記予測映像を生成するステップは、前記復元された情報が前記色成分のそれぞれのブロックに独立的に適用される予測モードを表せば、前記色成分のそれぞれのブロックに独立的に適用される予測方向を使用して前記予測画面を生成することを特徴とする付記1に記載の予測映像の生成方法。
(付記8) 付記1ないし7のうちいずれか1項の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
(付記9) ビットストリームを復号化することによって、一つのシーケンスを構成する複数の色成分のブロックに対する一つの予測モードを表す情報を復元する復号化部と、
前記復元された情報によって、前記色成分のブロックに一律的に適用される予測モードを使用したり、前記色成分のブロックに独立的に予測モードを使用して前記現在映像の予測映像を生成する生成部と、を備えることを特徴とする予測映像の生成装置。
210 エントロピー復号化部
220 逆量子化部
230 周波数空間逆変換部
240 予測画像生成部
250 復元画像生成部
241 単一モード予測画像生成部
242 複合モード予測画像生成部

Claims (5)

  1. ビットストリームを復号化することによって現在映像の輝度成分の予測モードを獲得するステップと、
    所定の予測モードのうち一つのモードにおいて前記輝度成分と対応する色差成分の予測モードを獲得するステップと、
    前記現在映像及び該現在映像についての参照映像間の差と対応するレジデューを復元する
    ステップと、
    前記輝度成分の前記予測モード及び前記色差成分の予測モードを用いて予測映像を復号化するステップと、
    前記復元されたレジデューと前記復号化された予測映像とを用いて前記現在映像を復号化するステップとを含み、
    前記色差成分の予測モードは、前記輝度成分の予測モードと同じ予測モードと、前記輝度成分の予測モードと異なる多数の予測モードのうち一つであり、
    前記色差成分の予測モード及び輝度成分の予測モードはコーディングユニットレベルでビットストリームにコーディングされることを特徴とする復号化方法。
  2. 前記現在映像は、イントラ予測方法で復号化されることを特徴とする請求項1に記載の復号化方法。
  3. ビットストリームを復号化することによって現在映像の輝度成分の予測モードを獲得し、所定の予測モードのうち一つのモードにおいて前記輝度成分と対応する色差成分の予測モードを獲得する復号化部と、
    前記輝度成分の前記予測モード及び前記色差成分の予測モードを用いて予測映像を復号化する第1生成部と、
    前記現在映像及び該現在映像についての参照映像間の差と対応するレジデューを復元し、前記復元されたレジデューと前記復号化された予測映像とを用いて前記現在映像を復号化する第2生成部とを備え、
    前記色差成分の予測モードは、前記輝度成分の予測モードと同じ予測モードと、前記輝度成分の
    予測モードと異なる多数の予測モードのうち一つであり、
    前記色差成分の予測モード及び輝度成分の予測モードは、コーディングユニットレベルでビットストリームにコーディングされることを特徴とする復号化装置。
  4. 前記現在映像は、イントラ予測方法で復号化されることを特徴とする請求項3に記載の復号化装置。
  5. 請求項1ないし2のうちいずれか一項の復号化方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
JP2014107203A 2006-03-13 2014-05-23 予測映像の生成方法、装置及び記録媒体 Pending JP2014158305A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US78137906P 2006-03-13 2006-03-13
US60/781,379 2006-03-13
KR1020060049080A KR101330630B1 (ko) 2006-03-13 2006-05-30 최적인 예측 모드를 적응적으로 적용하여 동영상을부호화하는 방법 및 장치, 동영상을 복호화하는 방법 및장치
KR10-2006-0049080 2006-05-30

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2011225278A Division JP2012034410A (ja) 2006-03-13 2011-10-12 予測映像の生成方法、装置及び記録媒体

Publications (2)

Publication Number Publication Date
JP2014158305A true JP2014158305A (ja) 2014-08-28
JP2014158305A5 JP2014158305A5 (ja) 2015-08-20

Family

ID=38687637

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2009500288A Pending JP2009529845A (ja) 2006-03-13 2007-03-13 最適の予測モードを適応的に適用して動画を符号化する方法及び装置、動画を復号化する方法及び装置
JP2011225278A Pending JP2012034410A (ja) 2006-03-13 2011-10-12 予測映像の生成方法、装置及び記録媒体
JP2014107202A Pending JP2014197865A (ja) 2006-03-13 2014-05-23 予測映像の生成方法、装置及び記録媒体
JP2014107203A Pending JP2014158305A (ja) 2006-03-13 2014-05-23 予測映像の生成方法、装置及び記録媒体

Family Applications Before (3)

Application Number Title Priority Date Filing Date
JP2009500288A Pending JP2009529845A (ja) 2006-03-13 2007-03-13 最適の予測モードを適応的に適用して動画を符号化する方法及び装置、動画を復号化する方法及び装置
JP2011225278A Pending JP2012034410A (ja) 2006-03-13 2011-10-12 予測映像の生成方法、装置及び記録媒体
JP2014107202A Pending JP2014197865A (ja) 2006-03-13 2014-05-23 予測映像の生成方法、装置及び記録媒体

Country Status (6)

Country Link
US (5) US10034000B2 (ja)
EP (2) EP2538679A3 (ja)
JP (4) JP2009529845A (ja)
KR (2) KR101330630B1 (ja)
CN (1) CN101401437B (ja)
WO (1) WO2007105900A1 (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101365575B1 (ko) * 2007-02-05 2014-02-25 삼성전자주식회사 인터 예측 부호화, 복호화 방법 및 장치
RU2496252C2 (ru) 2007-06-29 2013-10-20 Шарп Кабусики Кайся Устройство кодирования изображения, способ кодирования изображения, устройство декодирования изображения, способ декодирования изображения, программа и запоминающий носитель
KR101407719B1 (ko) * 2008-01-14 2014-06-16 광주과학기술원 가변적 화면 그룹 예측 구조를 이용한 다시점 영상 부호화방법 및 장치, 영상 복호화 장치 그리고 상기 방법을수행하는 프로그램이 기록된 기록 매체
CN101919254B (zh) * 2008-01-21 2013-01-23 艾利森电话股份有限公司 基于预测的图像处理
KR101291196B1 (ko) * 2008-01-25 2013-07-31 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8867854B2 (en) 2008-10-01 2014-10-21 Electronics And Telecommunications Research Institute Image encoder and decoder using undirectional prediction
KR101356448B1 (ko) 2008-10-01 2014-02-06 한국전자통신연구원 예측 모드를 이용한 복호화 장치
KR101590511B1 (ko) * 2009-01-23 2016-02-02 에스케이텔레콤 주식회사 움직임 벡터 부호화/복호화 장치 및 방법과 그를 이용한 영상 부호화/복호화 장치 및 방법
JP4598162B2 (ja) * 2009-02-05 2010-12-15 パナソニック株式会社 撮像処理装置
JP2010258739A (ja) * 2009-04-24 2010-11-11 Sony Corp 画像処理装置および方法、並びにプログラム
KR101633459B1 (ko) * 2009-08-10 2016-06-24 삼성전자주식회사 컬러 간의 상관 관계를 이용한 영상 데이터 인코딩 장치 및 방법, 그리고 영상 데이터 디코딩 장치 및 방법
JP5421757B2 (ja) * 2009-12-11 2014-02-19 株式会社Kddi研究所 画像符号化装置
US9351017B2 (en) 2010-01-19 2016-05-24 Samsung Electronics Co., Ltd. Method and apparatus for encoding/decoding images using a motion vector of a previous block as a motion vector for the current block
JP2013517733A (ja) * 2010-01-19 2013-05-16 サムスン エレクトロニクス カンパニー リミテッド 以前ブロックの動きベクトルを現在ブロックの動きベクトルとして用いる映像符号化/復号化方法及び装置
CN105025298B (zh) * 2010-01-19 2019-04-16 三星电子株式会社 对图像进行编码/解码的方法和设备
KR101503269B1 (ko) 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
KR101529992B1 (ko) * 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
AU2015200748B2 (en) * 2010-04-05 2016-01-07 Samsung Electronics Co., Ltd. Method and apparatus for encoding video by compensating for pixel value according to pixel groups, and method and apparatus for decoding video by the same
CN105472387B (zh) * 2010-04-09 2018-11-02 Lg电子株式会社 处理视频数据的方法和装置
JP5346884B2 (ja) * 2010-06-23 2013-11-20 日本放送協会 動き補償装置
US20120218292A1 (en) * 2011-02-10 2012-08-30 Ncomputing Inc. System and method for multistage optimized jpeg output
EP2685721B1 (en) * 2011-03-09 2019-10-30 Panasonic Intellectual Property Corporation of America Video image encoding device
KR102072124B1 (ko) 2011-11-24 2020-02-04 에스케이텔레콤 주식회사 세밀한 예측 단위를 사용하는 효과적인 부호화/복호화 방법 및 장치
WO2013077660A1 (ko) * 2011-11-24 2013-05-30 에스케이텔레콤 주식회사 세밀한 예측 단위를 사용하는 효과적인 부호화/복호화 방법 및 장치
WO2014007521A1 (ko) 2012-07-02 2014-01-09 삼성전자 주식회사 비디오 부호화 또는 비디오 복호화를 위한 움직임 벡터 예측 방법 및 장치
US9225991B2 (en) * 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US9225988B2 (en) 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
CN103391440A (zh) * 2013-07-19 2013-11-13 华为技术有限公司 语法信息的二值化编码处理方法及装置
US9948933B2 (en) 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
JP2016005210A (ja) * 2014-06-19 2016-01-12 三菱電機株式会社 端末装置及びデータ管理装置
JP2014222936A (ja) * 2014-07-23 2014-11-27 株式会社Kddi研究所 画像復号装置、画像復号方法、画像符号化復号方法及び画像復号プログラム
US9609362B2 (en) * 2014-10-06 2017-03-28 Telefonaktiebolaget Lm Ericsson (Publ) Coding and deriving quantization parameters
CN114531592A (zh) 2016-10-04 2022-05-24 有限公司B1影像技术研究所 图像数据编码/解码方法、介质和发送比特流的方法
US20220360779A1 (en) * 2019-07-05 2022-11-10 V-Nova International Limited Quantization of residuals in video coding
CN111050166B (zh) * 2019-12-02 2023-08-15 咪咕视讯科技有限公司 预测模式确定方法、设备及计算机可读存储介质
CN115428467B (zh) * 2020-04-14 2024-03-08 Lg电子株式会社 点云数据发送设备和方法、点云数据接收设备和方法
US20230334618A1 (en) * 2022-04-15 2023-10-19 Meta Platforms Technologies, Llc Block-Based Random Access Capable Lossless Graphics Asset Compression
US11882295B2 (en) 2022-04-15 2024-01-23 Meta Platforms Technologies, Llc Low-power high throughput hardware decoder with random block access

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007010690A1 (ja) * 2005-07-22 2007-01-25 Mitsubishi Electric Corporation 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法、画像符号化プログラム、画像復号プログラム、ならびに画像符号化プログラムを記録したコンピュータ読み取り可能な記録媒体、画像復号プログラムを記録したコンピュータ読み取り可能な記録媒体

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5038216A (en) * 1989-04-20 1991-08-06 Eastman Kodak Company Automatic brightness algorithm in a slide to video transfer unit
JP2962012B2 (ja) * 1991-11-08 1999-10-12 日本ビクター株式会社 動画像符号化装置及びその復号装置
WO1993018618A1 (en) 1992-03-03 1993-09-16 Kabushiki Kaisha Toshiba Time-varying image encoder
JP3032088B2 (ja) * 1992-03-03 2000-04-10 株式会社東芝 動画像符号化装置
US5667735A (en) * 1994-05-23 1997-09-16 2C Optics, Inc. Opthalmic mold coatings
US5821986A (en) * 1994-11-03 1998-10-13 Picturetel Corporation Method and apparatus for visual communications in a scalable network environment
US6909749B2 (en) * 2002-07-15 2005-06-21 Pts Corporation Hierarchical segment-based motion vector encoding and decoding
US7266247B2 (en) 2002-09-30 2007-09-04 Samsung Electronics Co., Ltd. Image coding method and apparatus using spatial predictive coding of chrominance and image decoding method and apparatus
JP3940657B2 (ja) * 2002-09-30 2007-07-04 株式会社東芝 動画像符号化方法と装置及び動画像復号化方法と装置
US7227901B2 (en) * 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
KR100750110B1 (ko) * 2003-04-22 2007-08-17 삼성전자주식회사 4×4인트라 휘도 예측 모드 결정방법 및 장치
US7469069B2 (en) * 2003-05-16 2008-12-23 Samsung Electronics Co., Ltd. Method and apparatus for encoding/decoding image using image residue prediction
KR100624429B1 (ko) * 2003-07-16 2006-09-19 삼성전자주식회사 칼라 영상을 위한 비디오 부호화/복호화 장치 및 그 방법
US7333544B2 (en) * 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7426308B2 (en) * 2003-07-18 2008-09-16 Microsoft Corporation Intraframe and interframe interlace coding and decoding
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
JP4213646B2 (ja) * 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
JP2005212601A (ja) 2004-01-29 2005-08-11 Nissan Motor Co Ltd 車体フロア構造
US20050276493A1 (en) * 2004-06-01 2005-12-15 Jun Xin Selecting macroblock coding modes for video encoding
KR100657268B1 (ko) * 2004-07-15 2006-12-14 학교법인 대양학원 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
KR100871646B1 (ko) * 2004-07-15 2008-12-02 콸콤 인코포레이티드 인트라-예측 방향에 기반한 h.264 공간 에러 은닉 방법 및장치
JP2006140758A (ja) * 2004-11-12 2006-06-01 Toshiba Corp 動画像符号化方法、動画像符号化装置および動画像符号化プログラム
US20060112653A1 (en) * 2004-11-29 2006-06-01 Swcs Marketing Group Inc. Drainage apparatus and methods for installing
US7672378B2 (en) * 2005-01-21 2010-03-02 Stmicroelectronics, Inc. Spatio-temporal graph-segmentation encoding for multiple video streams
KR100723403B1 (ko) * 2005-02-28 2007-05-30 삼성전자주식회사 컬러 성분간 단일 부호화 모드를 이용한 예측영상 생성 방법 및 장치와, 그를 이용한 영상 및 비디오 부호화/복호화방법 및 장치
KR101246915B1 (ko) * 2005-04-18 2013-03-25 삼성전자주식회사 동영상 부호화 또는 복호화 방법 및 장치
EP1753242A2 (en) 2005-07-18 2007-02-14 Matsushita Electric Industrial Co., Ltd. Switchable mode and prediction information coding
US8488889B2 (en) * 2005-07-22 2013-07-16 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
JP5348881B2 (ja) * 2007-12-25 2013-11-20 セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー 振動補償制御回路

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007010690A1 (ja) * 2005-07-22 2007-01-25 Mitsubishi Electric Corporation 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法、画像符号化プログラム、画像復号プログラム、ならびに画像符号化プログラムを記録したコンピュータ読み取り可能な記録媒体、画像復号プログラムを記録したコンピュータ読み取り可能な記録媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6015027965; Steffen Wittmann et al.: Intra-only 4:4:4 Profile for H.264/AVC FRExt , 20051014, Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCE *

Also Published As

Publication number Publication date
US20070211797A1 (en) 2007-09-13
JP2014197865A (ja) 2014-10-16
EP1994763B1 (en) 2014-05-21
KR101330630B1 (ko) 2013-11-22
US10034000B2 (en) 2018-07-24
CN101401437B (zh) 2011-05-25
EP1994763A4 (en) 2010-11-17
US20150249831A1 (en) 2015-09-03
EP1994763A1 (en) 2008-11-26
EP2538679A3 (en) 2013-08-07
US9654779B2 (en) 2017-05-16
JP2009529845A (ja) 2009-08-20
KR101383693B1 (ko) 2014-04-14
EP2538679A2 (en) 2012-12-26
CN101401437A (zh) 2009-04-01
US20150229920A1 (en) 2015-08-13
KR20070093305A (ko) 2007-09-18
WO2007105900A1 (en) 2007-09-20
KR20110135843A (ko) 2011-12-19
JP2012034410A (ja) 2012-02-16
US20120163467A1 (en) 2012-06-28
US20150229922A1 (en) 2015-08-13

Similar Documents

Publication Publication Date Title
JP2014158305A (ja) 予測映像の生成方法、装置及び記録媒体
KR101362757B1 (ko) 인터 컬러 보상을 이용한 영상의 부호화 방법 및 장치,복호화 방법 및 장치
JP5512587B2 (ja) 単一符号化モードを利用した映像符号化/復号化方法及び装置
KR101246915B1 (ko) 동영상 부호화 또는 복호화 방법 및 장치
KR100723403B1 (ko) 컬러 성분간 단일 부호화 모드를 이용한 예측영상 생성 방법 및 장치와, 그를 이용한 영상 및 비디오 부호화/복호화방법 및 장치
KR101830352B1 (ko) 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치
KR101261526B1 (ko) 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
WO2010131601A1 (ja) 画像処理装置および方法、並びにプログラム
JP2009518940A (ja) 画像の符号化方法及び装置、復号化方法及び装置
KR20080088040A (ko) 영상의 부호화, 복호화 방법 및 장치
KR20070096736A (ko) 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
KR101341993B1 (ko) 고정밀 필터를 이용한 영상 부호화/복호화 방법 및 장치
KR20090098214A (ko) 영상의 부호화, 복호화 방법 및 장치
KR20120015495A (ko) 필터링모드 생략가능한 영상 부호화/복호화 방법 및 장치
KR20220005623A (ko) 양자화 행렬의 부호화 방법 및 복호화 방법과 이를 이용하는 장치
KR101997655B1 (ko) 영상 부호화/복호화 방법 및 장치
KR20110058677A (ko) 예측을 위한 컬러 플레인간의 상관 파라미터 추출 장치와 방법, 및 그것을 이용한 영상 부호화/복호화 장치 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140611

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150703

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150703

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150714

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160209

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160509

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160621