JP5484725B2 - スケーラブルビデオコーディングのための重み付け予測方法及び装置 - Google Patents

スケーラブルビデオコーディングのための重み付け予測方法及び装置 Download PDF

Info

Publication number
JP5484725B2
JP5484725B2 JP2008522773A JP2008522773A JP5484725B2 JP 5484725 B2 JP5484725 B2 JP 5484725B2 JP 2008522773 A JP2008522773 A JP 2008522773A JP 2008522773 A JP2008522773 A JP 2008522773A JP 5484725 B2 JP5484725 B2 JP 5484725B2
Authority
JP
Japan
Prior art keywords
reference picture
enhancement layer
lower layer
image
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008522773A
Other languages
English (en)
Other versions
JP2009502100A (ja
Inventor
イン,ペン
ボイス,ジル,マクドナルド
パンディット,パーヴィン,ビバス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=36969701&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP5484725(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2009502100A publication Critical patent/JP2009502100A/ja
Application granted granted Critical
Publication of JP5484725B2 publication Critical patent/JP5484725B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Description

関連出願への相互参照
この出願は米国仮出願第60/701,464号(2005年7月21日出願、発明の名称「スケーラブルビデオコーディングのための重み付け予測方法及び装置」の利益を主張するもの、その出願をここに参照援用する。
本発明はビデオの符号化及び復号に関し、より具体的にはスケーラブルなビデオの符号化及び復号のための重み付け予測方法及び装置に関する。
ISO/IEC MPEG−4パート10AVC / ITU−T H.264(International Organization for Standardization/International Electrotechnical Commission (ISO/IEC) Moving Picture Experts Group−4 (MPEG−4) Part 10 Advanced Video Coding (AVC) standard/International Telecommunication Union, Telecommunication Sector (ITU−T) H.264 standard)(以下、「MPEG4/H.264」、または単に「H.264」と呼ぶ)は重み付け予測(Weighted Prediction)(WP)を含む最初の国際的なビデオ符号化標準である。重み付け予測は符号化効率を向上するために使われている。スケーラブルビデオコーディング(SVC)は、H.264の改正として開発されたものであり、これも重み付け予測を使っている。しかし、SVC(SVC standard)はベースレイヤの重みとエンハンスメントレイヤの重みとの間の関係を明示的には規定していない。
重み付け予測はH.264のメインプロファイル(Main profile)、エクステンデッドプロファイル(Extended profile)及びハイプロファイル(High profile)でサポートされている。WPを使用していることは、PスライスとSPスライスのシーケンスパラメータセット(sequence parameter set)でweighted_pred_flagフィールドを使用し、Bスライスのシーケンスパラメータセットでweighting_bipred_idcフィールドを使用していることに現れている。WPモードには明示モードと黙示モードの2つがある。明示モード(explicit mode)はP、SP及びBのそれぞれのスライスでサポートされている。黙示モードはBスライスのみでサポートされている。
各スライスの各カラー成分の各参照画像インデックス(reference picture index)には1つの重み係数(weighting factor)とオフセットとが付随している。明示モードでは、これらのWPパラメータは符号化されてスライスヘッダに入っている。黙示モードでは、これらのパラメータは現在画像(current picture)と参照画像の相対距離に基づいて求められる。
各マクロブロックまたはマクロブロックパーティション(macroblock partition)に対して、適用される重み付けパラメータは、現在マクロブロックまたは現在マクロブロックパーティションの参照画像インデックス(二重予測(bi−prediction)の場合は複数の参照画像インデックス)に基づく。参照画像インデックスは符号化されてビットストリームに入っているか、スキップされたマクロブロックまたは直接モードマクロブロックについて求められる。参照画像インデックスを使ってどの重み付けパラメータを適用するかを信号として伝えると、重み付けパラメータインデックスをビットストリーム中に入れるよりもビットレートの効率がよい。参照画像インデックスは要求されているその他のビットレートフィールドに基づき入手可能だからである。
スケーラビリティ(scalability)を確保する多数の方法が研究されて標準化されている。これには、MPEG−2とH.264のスケーラビリティプロファイルにおけるSNRスケーラビリティ、空間スケーラビリティ、時間スケーラビリティ、ファイングレイン(fine grain)スケーラビリティがある。また、H.264の改正として現在開発が進められているものもある。
空間スケーラビリティ、時間スケーラビリティ及びSNRスケーラビリティでは、レイヤ間予測が大規模に組み込まれている。マクロブロック内とマクロブロック間では、前のレイヤの対応する信号を用いて予測が行われる。さらに、各レイヤの動き記述(motion description)を使用して後続のエンハンスメントレイヤの動き記述を予測することができる。これらの方法は3つのカテゴリーに分けられる:レイヤ間テクスチャ内予測(inter−layer intra texture prediction)、レイヤ間動き予測、及びレイヤ間残余予測である。
ジョイントスケーラブルビデオモデル(Joint Scalable Video Model)(JSVM)2.0では、エンハンスメントレイヤマクロブロックはダイアディック(dyadic)(2レイヤ)空間スケーラビリティの場合に、「BASE_LAYER_MODE」または「QPEL_REFINEMENT_MODE」の何れかを用いてスケーリングされたベースレイヤ動きデータを用いたレイヤ間予測を利用することができる。レイヤ間動き予測を使用する時は、前の例やの対応する(サンプリングされていない)MBの(参照画像インデックスとそれに付随する重み付けパラメータとを含む)動きベクトルを使用して動き予測する。エンハンスメントレイヤとその前のレイヤのpred_weight_table()値が異なる場合、同じ参照画像について相異なる重み付けパラメータのセットをエンハンスメントレイヤに格納する必要がある。
こうした先行技術の欠点や不利な点を、本発明は解消する。本発明はスケーラブルビデオ符号化及び復号のための重み付け予測方法及び装置に関する。
本発明の一態様によると、スケーラブルビデオエンコーダが提供される。該スケーラブルビデオエンコーダは、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを符号化するエンコーダを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明の他の一態様によると、スケーラブルビデオ符号化方法が提供される。該方法は、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを符号化する段階を有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明のさらに他の一態様によると、スケーラブルビデオ符号化のためのビデオ信号構造が提供される。該方法は、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用して生成された、画像のエンハンスメントレイヤに符号化されたブロックを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明の上記その他の態様、特徴、及び有利性は、添付した図面を参照して読むと、実施形態の詳細な説明から明らかとなるであろう。
本発明はスケーラブルビデオの符号化及び復号のための重み付け予測方法及び装置に関する。
本発明の原理により、エンハンスメントレイヤの重み付け予測をするためにベースレイヤの重み付けパラメータを再使用する方法と装置を開示する。有利にも、本原理の実施形態によりメモリを節約し、エンコーダとデコーダの両方が複雑になることを避けることができる。さらに、本原理の実施形態によりビットレートを非常に低くすることもできる。
本発明の原理を説明する。
言うまでもなく、当業者は、ここに明示的に説明または図示していなくても、本発明の原理を実施し、かつ本発明の精神と範囲内に含まれる様々な構成を工夫することができる。
ここに記載したすべての例と条件付きの言葉は、発明者が技術発展に対してなした本発明の原理とコンセプトとを、読者が理解しやすいようにするためのものであり、その解釈は具体的に記載した実施例や条件に限定されるべきではない。
さらに、本発明の原理、態様、実施形態、及びその実施例のすべての記載は、その構成的等価物及び機能的等価物の両方を含むものである。また、かかる等価物は、現在知られている等価物及び将来開発される等価物を含み、すなわち、構成にかかわらず同じ機能を発揮する開発されるすべての要素を含む。
よって、例えば、当業者には言うまでもなく、ここに説明したブロック図は本発明の原理を化体する回路を概念的に示すものである。同様に、言うまでもなく、フローチャート、フロー図、状態遷移図、擬似コード等は、様々な方法(processes)を表し、これらの方法をコンピュータ読み取り可能媒体に実質的に表しても、(明示的に示していようがいまいが)コンピュータやプロセッサで実行してもよい。
図示した様々な要素の機能は、専用ハードウェアを用いても、ソフトウェアを実行可能なハードウェアと適当なソフトウェアとを組み合わせても提供できる。プロセッサを設けるとき、機能を単一の専用プロセッサで提供してもよいし、共有された単一のプロセッサで提供してもよいし、一部が共有された複数の個別プロセッサで提供してもよい。さらに、「プロセッサ」または「コントローラ」という用語を明示的に使用した場合、ソフトウェアを実行できるハードウェアのみをいうと解釈してはならず、限定はされないが、デジタルシグナルプロセッサ(DSP)、ソフトウェアを記憶するROM、RAM、不揮発性記憶装置を黙示的に含んでもよい。
その他のハードウェアを従来のものでもカスタムのものであっても含んでもよい。同様に、図面に示したスイッチは概念的なものである。スイッチの機能は、プログラムロジックの動作、専用ロジックの動作、プログラム制御や専用ロジックのインターラクション、またはマニュアルで実行されてもよく、具体的な方法は実施者が文脈から判断して選択できる。
請求項において、特定の機能を実行する手段として表した要素は、その機能を実行するいかなる方法も含み、例えば、a)その機能を実行する回路要素の組合せと、b)ファームウェアやマイクロコード等を含む任意の形式のソフトウェア及びそれと組み合わせたその機能を実行する適当な回路とを含む。請求項に記載した発明は、記載した様々な手段が提供する機能を、請求項に記載したように組み合わせることにある。よって、これらの機能を提供できる手段はどれでも、ここに示したものと等化であると見なせる。
本発明の実施形態により、ベースレイヤの重み付けパラメータをエンハンスメントレイヤについて再使用する方法と装置を開示する。ベースレイヤはエンハンスメントレイヤをダウンサンプリングしたものなので、エンハンスメントレイヤとベースレイヤとが、同じ参照画像に対して同じ重み付けパラメータのセット(set)を有していた方がよい。
また、本原理によるその他の利点/特徴もある。1つの利点/特徴は、各エンハンスメントレイヤについて1つの重み付けパラメータのセットのみを記憶すればよく、メモリの使用量を節約できる。また、レイヤ間動き予測を使用する場合、デコーダは重み付けパラメータのどちらのセットを使用するか知る必要がある。ルックアップテーブルを利用して必要な情報を格納してもよい。
他の利点/特徴として、エンコーダとデコーダの両方の複雑性を低くすることができる。デコーダにおいて、本原理の実施形態により、解析(parsing)と、正しい重み付けパラメータのセットを探すためにテーブルをルックアップする複雑性とを減らすことができる。エンコーダにおいて、本発明の実施形態により、相異なるアルゴリズムを使用して重み付けパラメータの推定をする複雑性を減らすことができる。更新ステップを使用し、予測重みを考慮すると、同じ参照画像インデックスに対して複数の重み付けパラメータを有することにより、デコーダにおける逆更新ステップにおける動き情報の導出と、エンコーダにおける更新ステップとが複雑になる。
さらに別の利点/特徴は、非常に低ビットレートにおいて、本原理の実施形態はコーディング効率が少し有利である。重み付けパラメータをエンハンスメントレイヤのスライスヘッダで明示的には送信しないからである。
図1を参照して、本発明を適用できるジョイントスケーラブルビデオモデルバージョン2.0(以下、「JSVM2.0」)のエンコーダを参照数字100で示した。JSVM2.0エンコーダ100は、3つの空間レイヤと動き補償時間フィルタリングとを使用する。JSVMエンコーダ100は、2次元(2D)デシメータ104と、2次元デシメータ106と、動き補償時間フィルタリング(MCTF)モジュール108とを有し、各ユニットはビデオ信号データ102を受け取る入力を有している。
2次元デシメータ106の出力はMCTFモジュール110の入力と接続され信号通信している。MCTFモジュール110の第1の出力は動きコーダ112の入力と接続され信号通信しており、MCTFモジュール110の第2の出力は予測モジュール116の入力と接続され信号通信している。動きコーダ112の第1の出力はマルチプレクサ114の第1の入力と接続され信号通信している。動きコーダ112の第2の出力は動きコーダ124の第1の入力と接続され信号通信している。予測モジュール116の第1の出力は空間変換器118の入力と接続され信号通信している。空間変換器118の出力はマルチプレクサ114の第2の入力と接続され信号通信している。予測モジュール146の第2の出力は補間器120の入力と接続され信号通信している。補間器120の出力は予測モジュール122の第1の入力と接続され信号通信している。予測モジュール122の第1の出力は空間変換器126の入力と接続され信号通信している。空間変換器126の出力はマルチプレクサ114の第2の入力と接続され信号通信している。予測モジュール122の第2の出力は補間器130の入力と接続され信号通信している。補間器130の出力は予測モジュール134の第1の入力と接続され信号通信している。予測モジュール134の出力は空間変換器136の入力と接続され信号通信している。空間変換器126の出力はマルチプレクサ114の第2の入力と接続され信号通信している。
2次元デシメータ104の出力はMCTFモジュール128の入力と接続され信号通信している。MCTFモジュール128の第1の出力は動きコーダ124の第2の入力と接続され信号通信している。動きコーダ124の第1の出力はマルチプレクサ114の第1の入力と接続され信号通信している。動きコーダ124の第2の出力は動きコーダ132の第1の入力と接続され信号通信している。MCTFモジュール128の第2の出力は予測モジュール122の第2の入力と接続され信号通信している。
MCTFモジュール108の第1の出力は動きコーダ132の第2の入力と接続され信号通信している。動きコーダ132の出力はマルチプレクサ114の第1の入力と接続され信号通信している。MCTFモジュール108の第2の出力は予測モジュール134の第2の入力と接続され信号通信している。マルチプレクサ114は出力ビットストリーム138を出力する。
各空間レイヤについて、動き補償時間分解(motion compensated temporal decomposition)を行う。この分解により時間的スケーラビリティが得られる。下位の空間レイヤからの動き情報を上位のレイヤの動きの予測に使用できる。テクスチャ符号化の場合、連続する空間レイヤ間の空間予測を適用して冗長性を除去する。イントラ予測(intra prediction)または動き補償インター予測(motion compensated inter prediction)から得られる残余信号を変換コーディング(transform coded)する。クオリティベースレイヤ残余(quality base layer residual)により各空間レイヤにおいて最低限の再構成品質が得られる。レイヤ間予測を適用していなければ、このクオリティベースレイヤをH.264準拠ストリームに符号化できる。クオリティスケーラビリティのため、クオリティエンハンスメントレイヤもエンコードする。これらのエンハンスメントレイヤを選択して、粗いまたは細かいグレインクオリティ(SNR)スケーラビリティのいずれかを提供することができる。
図2を参照して、本発明を適用できるスケーラブルビデオデコーダを参照数字200で示した。デマルチプレクサ202の入力を、スケーラブルビットストリームを受信するスケーラブルビデオデコーダ200の入力として使用する。デマルチプレクサ202の第1の出力は空間逆変換SNRスケーラブルエントロピデコーダ204の入力と接続され信号通信している。空間逆変換SNRスケーラブルエントロピデコーダ204の第1の出力は予測モジュール206の第1の入力と接続され信号通信している。予測モジュール206の出力は逆MCTFモジュール208の第1の入力と接続され信号通信している。
空間逆変換SNRスケーラブルエントロピデコーダ204の第2の出力は動きベクトル(MV)デコーダ210の第1の入力と接続され信号通信している。MVデコーダ210の出力は逆MCTFモジュール208の第2の入力と接続され信号通信している。
デマルチプレクサ202の第2の出力は空間逆変換SNRスケーラブルエントロピデコーダ212の入力と接続され信号通信している。空間逆変換SNRスケーラブルエントロピデコーダ212の第1の出力は予測モジュール214の第1の入力と接続され信号通信している。予測モジュール214の第1の出力は補間器216の入力と接続され信号通信している。補間モジュール216の出力は予測モジュール206の第2の入力と接続され信号通信している。予測モジュール214の第2の出力は逆MCTFモジュール218の第1の入力と接続され信号通信している。
空間逆変換SNRスケーラブルエントロピデコーダ212の第2の出力はMVデコーダ220の第1の入力と接続され信号通信している。MVデコーダ220の第1の出力はMVデコーダ210の第2の入力と接続され信号通信している。MVデコーダ220の第2の出力は逆MCTFモジュール218の第2の入力と接続され信号通信している。
デマルチプレクサ202の第3の出力は空間逆変換SNRスケーラブルエントロピデコーダ222の入力と接続され信号通信している。空間逆変換SNRスケーラブルエントロピデコーダ222の第1の出力は予測モジュール224の入力と接続され信号通信している。予測モジュール224の第1の出力は補間モジュール226の入力と接続され信号通信している。補間モジュール226の出力は予測モジュール214の第2の入力と接続され信号通信している。
予測モジュール224の第2の出力は逆MCTFモジュール228の第1の入力と接続され信号通信している。空間逆変換SNRスケーラブルエントロピデコーダ222の第2の出力はMVデコーダ230の入力と接続され信号通信している。MVデコーダ230の第1の出力はMVデコーダ220の第2の入力と接続され信号通信している。MVデコーダ230の第2の出力は逆MCTFモジュール228の第2の入力と接続され信号通信している。
逆MCTFモジュール228の出力は、レイヤ0信号を出力するために、デコーダ200の出力として利用できる。逆MCTFモジュール218の出力は、レイヤ1信号を出力するために、デコーダ200の出力として利用できる。逆MCTFモジュール208の出力は、レイヤ2信号を出力するために、デコーダ200の出力として利用できる。
本原理による第1の実施形態では新しいシンタックス(syntax)は使用しない。この第1の実施形態では、エンハンスメントレイヤはベースレイヤの重み(weights)を再使用する。第1の実施形態は、例えば、プロファイル(profile)またはレベル制約(level constraint)として実施してもよい。条件(requirement)をシーケンスまたは画像パラメータセット中に示すこともできる。
本原理の第2の実施形態では、1つのシンタックスエレメントbase_pred_weight_table_flagを、表1に示したようにスケーラブル拡張のスライスヘッダシンタックスに導入したので、エンコーダは、スライスベースの重み付け予測にどのモードを使用するか、適応的に選択できる。base_pred_weight_table_flagがなければ、base_pred_weight_table_flagは0であると推論する。base_pred_weight_table_flagが1である時、これはエンハンスメントレイヤがその前のレイヤからのbase_pred_weight_table()を再使用することを示す。
表1はスケーラブルビデオコーディングの重み付け予測のためのシンタックスを示す。
Figure 0005484725
Figure 0005484725
Figure 0005484725
デコーダでは、エンハンスメントレイヤがベースレイヤからの重みを再使用するとき、ベースレイヤ(または前のレイヤ)から現在のエンハンスメントレイヤのpred_weight_table()にpred_weight_table()をリマッピング(remapping)する。このプロセスは次の場合に利用される:第1の場合として、ベースレイヤの参照画像インデックス(reference picture index)とエンハンスメントレイヤの参照画像インデックスが示す参照画像が異なる場合、または、第2の場合として、エンハンスメントレイヤで使用される参照画像と対応する(corresponding match)参照画像がベースレイヤにはない場合。第1の場合には、画像順序カウント(picture order count、POC)を使用して、ベースレイヤからエンハンスメントレイヤの正しい参照画像インデックスへ重み付けパラメータをマッピング(map)する。ベースレイヤで複数の重み付けパラメータを使用する場合、参照画像インデックスが最小である重み付けパラメータを最初にマッピングすることが、必ずしも必要ではないが好ましい。第2の場合、エンハンスメントレイヤで使用できない参照画像については、base_pred_weight_table_flagが0に設定されていることは当然である。pred_weight_table()をベースレイヤ(または前のレイヤ)から現在のエンハンスメントレイヤのpred_weight_table()へのリマッピング(remapping)は次のように求められる。このプロセスはpred_weight_table()の承継(inheritance)プロセスと呼ぶ。特に、この承継プロセスは、base_pred_weight_table_flagが1の時に行われる。このプロセスにより出力されるのは次の通りである:
Figure 0005484725
ベース画像の導出プロセスが行われ(invoked)、basePicが出力される。Xを0または1のいずれかで置き換えるとして、以下が適用される:
− base_luma_weight_LX[]をベース画像basePicのシンタックス要素luma_weight_LX[]の値にする。
− base_luma_offset_LX[]をベース画像basePicのシンタックス要素luma_offset_LX[]の値にする。
− base_chroma_weight_LX[]をベース画像basePicのシンタックス要素chroma_weight_LX[]の値にする。
− base_chroma_offset_LX[]をベース画像basePicのシンタックス要素chroma_offset_LX[]の値にする。
− base_luma_log2_weight_denomをベース画像basePicのシンタックス要素luma_log2_weight_denomの値にする。
− base_chroma_log2_weight_denomをベース画像basePicのシンタックス要素chroma_log2_weight_denomの値にする。
− BaseRefPicListXをベース画像basePicの参照インデックスリストRefPicListXにする。
− 現在のスライス参照インデックスリストRefPicListX(0からnum_ref_idx_IX_active_minus1までのループ)の各参照インデックスrefIdxLXについて、現在のスライス中の関連する重み付けパラメータを次のように承継する:
− refPicをrefIdxLXが参照する画像にする、
− 次の条件がすべて真である画像があれば、対応するベースレイヤの参照画像refPicBaseがあるとみなす。
− 画像refPicBaseのシンタックス要素dependency_idが画像refPicの変数DependencyIdBaseと等しい。
− 画像refPicBaseのシンタックス要素quality_levelが画像refPicの変数QualityLevelBaseと等しい。
− 画像refPicBaseのシンタックス要素fragment_orderが画像refPicの変数FragmentOrderBaseと等しい。
− PicOrderCnt(refPic)の値がPicOrderCnt(refPicBase)の値に等しい。
− refPicBaseを参照する対応ベースレイヤ参照インデックスリストBaseRefPicListXに、参照インデックスが最小値であるインデックスbaseRefIdxLXがある。
− refPicBaseがあれば、次を適用する:
− プロセスの後続ステップではbaseRefIdxLXを使用付加とマークする。
Figure 0005484725
− そうでなければ、
Figure 0005484725
以下は承継プロセスを実施する方法の一例である:
Figure 0005484725

エンハンスメントレイヤ画像とベースレイヤ画像のスライスのパーティショニングが同じであるとき、pred_weight_table()のベースレイヤ(または下位のレイヤ)から現在のエンハンスメントレイヤのpred_weight_table()へのリマッピングはスライスベースで行える。しかし、エンハンスメントレイヤとベースレイヤのスライスのパーティショニング(pertitioning)が異なるとき、pred_weight_table()のベースレイヤ(または下位のレイヤ)から現在のエンハンスメントレイヤのpred_weight_table()へのリマッピングはマクロブロックベースで行う必要がある。例えば、ベースレイヤとエンハンスメントレイヤが同一の2つのスライスパーティションを有するとき、承継プロセスをスライスごとに1回コールすることができる。対照的に、ベースレイヤが2つのパーティションを有し、エンハンスメントレイヤが3つのパーティションを有するとき、マクロブロックベースで承継プロセスをコールする。
図3を参照するに、重み付け予測を用いた画像ブロックのスケーラブルビデオ符号化方法の一例を参照数字300で示した。
開始ブロック305において、現在のエンハンスメントレイヤ(EL)画像の符号化を開始し、判断ブロック310に進む。判断ブロック310において、ベースレイヤ(BL)画像が現在のEL画像にあるかどうか判断する。あれば、機能ブロック350に進む。なければ、機能ブロック315に進む。
機能ブロック315において、BL画像からの重みを取得し、機能ブロック320に進む。機能ブロック320において、BLのpred_weight_table()をエンハンスメントレイヤのpred_weight_table()にリマッピングし、機能ブロック325に進む(passes control)。機能ブロック325において、base_pred_weight_table_flagを真に設定し、機能ブロック330に進む。機能ブロック330において、取得した重み(weights)で参照画像を重み付けし、機能ブロック335に進む。機能ブロック335において、スライスヘッダにbase_pred_weight_table_flagを書き込み、判断ブロック340に進む。判断ブロック340において、base_pred_weight_table_flagが真(true)かどうか判断する。真であれば、機能ブロック345に進む。真でなければ、機能ブロック360に進む。
機能ブロック350において、EL画像の重みを計算し、機能ブロック355に進む。機能ブロック355において、base_pred_weight_table_flagを偽(false)に設定し、機能ブロック330に進む。
機能ブロック345において、重み付けした参照画像を用いてEL画像を符号化し、終了ブロック365に進む。
機能ブロック360において、スライスヘッダに重み(weights)を書き込み、判断ブロック345に進む。
図4を参照するに、重み付け予測を用いた画像ブロックのスケーラブルビデオ復号方法の一例を参照数字400で示した。
開始ブロック405において、現在のエンハンスメントレイヤ(EL)画像の復号を開始し、機能ブロック410に進む。機能ブロック410において、スライスヘッダのbase_pred_weight_table_flagを解析し、判断ブロック415に進む。判断ブロック415において、base_pred_weight_table_flagが1かどうか判断する。1であれば、機能ブロック420に進む。1でなければ、機能ブロック435に進む。
機能ブロック420において、対応するベースレイヤ(BL)画像からEL画像に重みをコピーし、機能ブロック425に進む。機能ブロック425において、BL画像のpred_weight_table()をEL画像のpred_weight_table()にリマッピングし、機能ブロック430に進む(passes control)。機能ブロック430において、取得した重み(weights)で参照画像を復号し、機能ブロック440に進む。
機能ブロック435において、重み付けパラメータ(weighting parameters)を解析し、機能ブロック430に進む。
図5を参照して、level_idcシンタックス及びprofile_idcシンタックスを復号する方法の一例を参照数字500で示した。
開始ブロック505から機能ブロック510に進む。機能ブロック510において、level_idcシンタックスとprofile_idcシンタックスとを解析し、機能ブロック515に進む。機能ブロック515において、機能ブロック510で実行した解析に基づき、エンハンスメントレイヤの重み付け予測制約(weighted prediction constraint)を判断し、終了ブロック520に進む。
図6を参照して、エンハンスメントレイヤの重み付け予測制約を復号する方法の一例を参照数字600で示した。
開始ブロック605から機能ブロック610に進む。機能ブロック610において、エンハンスメントレイヤの重み付け予測のシンタックスを解析し、終了ブロック615に進む。
ここで、本発明に付随する多くの有利性/特徴の一部を説明する。一部は上ですでに述べたことである。例えば、1つの有利性/特徴はスケーラブルビデオエンコーダであり、該エンコーダは、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを符号化するエンコーダを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、明示的重み付けパラメータモードと黙示的重み付けパラメータモードを選択してエンハンスメントレイヤのブロックを符号化する。さらに他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤのブロックが下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像が下位レイヤ参照画像に対応するとき、常に、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するよう制約を課す。また、他の有利性/特徴として、上記の制約を有するスケーラブルビデオエンコーダにおいて、制約はプロファイルまたはレベル制約として定められ、またはシーケンス画像パラメータセットで信号として送られる。さらに、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤのスライスについて、スライスヘッダにシンタックスを付加し、同じ重み付けパラメータまたは異なる重み付けパラメータをエンハンスメントレイヤ参照画像に選択的に適用する。また、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤからエンハンスメントレイヤのpred_weight_table()シンタックスへのpred_weight_table()のリマッピングを行う。また、他の有利性/特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、画像順序カウントを使用して、下位レイヤからエンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする。また、他の有利性/特徴として、上記の画像順序カウントを用いてリマッピングをするスケーラブルビデオエンコーダにおいて、参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする。さらに、他の有利性/特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤにはない、エンハンスメントレイヤで使用される参照画像のweighted_prediction_flagフィールドをゼロに設定する。また、他の有利性/特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、エンハンスメントレイヤで使用される参照画像と一致するものが下位レイヤにないとき、エンハンスメントレイヤで使用される参照画像に対応する参照画像インデックスの重み付けパラメータをスライスヘッダで送る。また、他の有利性/特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤと下位レイヤの両方において画像のスライスパーティショニングが同じであるとき、スライスベースでリマッピングを行い、画像のエンハンスメントレイヤのスライスパーティショニングがその画像の下位レイヤのスライスパーティショニングと異なるとき、マクロブロックベースでリマッピングを行う。さらに、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、下位レイヤからのpred_weight_table()シンタックスをエンハンスメントレイヤのpred_weight_table()にリマッピングする。また、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、重み付けパラメータの推定をスキップする。また、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して1つの重み付けパラメータのセットのみを格納する。また、他の有利性/特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、異なる重み付けパラメータを適用するとき、またはエンハンスメントパラメータに下位レイヤがないとき、重み付けパラメータを推定する。
本発明の上記その他の特徴と有利性は、当業者はここに開示した教示に基づき容易に確認できるであろう。言うまでもなく、本発明の教示は、ハードウェア、ソフトウェア、ファームウェア、特殊用途プロセッサ、またはこれらの組み合わせなどのいろいろな形体で実施することができる。
最も好ましくは、本発明の教示をハードウェアとソフトウェアの組合せとして実施する。また、ソフトウェアはプログラム記録装置に実態的に化体されたアプリケーションプログラムとして実施してもよい。そのアプリケーションプログラムは、好適なアーキテクチャを有する機械にアップロードされ、実行される。好ましくは、機械は、中央処理装置(CPU)、ランダムアクセスメモリ(RAM)、及び入出力(I/O)インターフェイス等のハードウェアを有するコンピュータプラットフォームで実施される。コンピュータプラットフォームはオペレーティングシステムとマイクロコードも含んでもよい。ここに説明した様々なプロセスや機能は、CPUが実行できる、マイクロ命令コードの一部やアプリケーションプログラムの一部であってもよく、これらのいかなる組合せであってもよい。また、追加的データ記憶装置や印刷装置等その他の様々な周辺装置をコンピュータプラットフォームに接続してもよい。
さらに言うまでもなく、添付した図面に示したシステム構成要素や方法の一部はソフトウェアで実施されることが好ましいが、システム構成要素(または方法)間の実際的な結合は本発明をプログラムするそのプログラム方法に応じて異なる。ここに開示された本発明の教示を受けて、関連技術分野の当業者は、本発明の同様な実施形態や構成を考えることができるであろう。
例示した実施形態を添付した図面を参照して説明したが、言うまでもなく、本発明はこれらの実施形態には限定されず、当業者は、本発明の範囲と精神から逸脱することなく、様々な変化と修正を施すことができるであろう。かかる変更や修正はすべて添付した請求項に記載した本発明の範囲内に含まれるものである。
本発明は図面を参照してよりよく理解することができる。
本原理を適用できるジョイントスケーラブルビデオモデル(JSVM)2.0エンコーダの例を示すブロック図である。 本原理を適用できるデコーダの例を示すブロック図である。 本原理の一実施形態による、重み付け予測を用いて画像ブロックのスケーラブルビデオ符号化方法の例を示すフロー図である。 本原理の一実施形態による、重み付け予測を用いて画像ブロックのスケーラブルビデオ復号方法の例を示すフロー図である。 本原理の一実施形態による、level_idcシンタックスとprofile_idcシンタックスの復号方法の例を示すフロー図である。 本原理の一実施形態による、エンハンスメントレイヤの重み付け予測制約(constraint)の復号方法の例を示すフロー図である。

Claims (16)

  1. 画像の下位レイヤのブロックの符号化に使用した下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用することにより、前記画像のエンハンスメントレイヤのブロックを符号化するエンコーダを有し、前記エンハンスメントレイヤのブロックは前記下位レイヤのブロックに対応し、前記エンハンスメントレイヤ参照画像は前記下位レイヤ参照画像に対応する装置。
  2. 前記エンコーダは、前記エンハンスメントレイヤのブロックが前記下位レイヤのブロックに対応し、前記エンハンスメントレイヤ参照画像が前記下位レイヤ参照画像に対応するとき、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを常に前記エンハンスメントレイヤ参照画像に適用するよう制約を課す、請求項1に記載の装置。
  3. 前記エンコーダは、前記エンハンスメントレイヤのスライスについて、スライスヘッダにシンタックスを付加し、同じ重み付けパラメータまたは異なる重み付けパラメータを前記エンハンスメントレイヤ参照画像に選択的に適用する、請求項1に記載の装置。
  4. 前記エンコーダは、前記下位レイヤから前記エンハンスメントレイヤのpred_weight_table()シンタックスへのpred_weight_table()シンタックスのリマッピングを行う、請求項1に記載の装置。
  5. 前記エンコーダは、画像順序カウントを使用して、前記下位レイヤから前記エンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする、請求項に記載の装置。
  6. 参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする、請求項に記載の装置。
  7. 前記エンコーダは、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを前記エンハンスメントレイヤ参照画像に適用するとき、重み付けパラメータの推定をスキップする、請求項1に記載の装置。
  8. 前記エンコーダは、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを前記エンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して一組の重み付けパラメータのみを格納する、請求項1に記載の装置。
  9. 画像の下位レイヤのブロックの符号化に使用した下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用することにより、前記画像のエンハンスメントレイヤのブロックを符号化するステップを有し、前記エンハンスメントレイヤのブロックは前記下位レイヤのブロックに対応し、前記エンハンスメントレイヤ参照画像は前記下位レイヤ参照画像に対応する、スケーラブルビデオ符号化方法。
  10. 前記符号化ステップは、前記エンハンスメントレイヤのブロックが前記下位レイヤのブロックに対応し、前記エンハンスメントレイヤ参照画像が前記下位レイヤ参照画像に対応するとき、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを常に前記エンハンスメントレイヤ参照画像に適用するよう制約を課すステップを有する、請求項16に記載の方法。
  11. 前記符号化ステップは、前記エンハンスメントレイヤのスライスについて、スライスヘッダにシンタックスを付加し、同じ重み付けパラメータまたは異なる重み付けパラメータを前記エンハンスメントレイヤ参照画像に選択的に適用するステップを有する、請求項に記載の方法。
  12. 前記符号化ステップは、前記下位レイヤから前記エンハンスメントレイヤのpred_weight_table()シンタックスへのpred_weight_table()シンタックスのリマッピングを行うステップを有する、請求項に記載の方法。
  13. 前記リマッピングを行うステップは、画像順序カウントを使用して、前記下位レイヤから前記エンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする、請求項12に記載の方法。
  14. 参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする、請求項13に記載の方法。
  15. 前記符号化ステップは、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを前記エンハンスメントレイヤ参照画像に適用するとき、重み付けパラメータの推定をスキップするステップを有する、請求項に記載の方法。
  16. 前記符号化ステップは、前記下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータを前記エンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して一組の重み付けパラメータのみを格納するステップを有する、請求項に記載の方法。
JP2008522773A 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置 Expired - Fee Related JP5484725B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US70146405P 2005-07-21 2005-07-21
US60/701,464 2005-07-21
PCT/US2006/019520 WO2007018670A1 (en) 2005-07-21 2006-05-19 Method and apparatus for weighted prediction for scalable video coding

Publications (2)

Publication Number Publication Date
JP2009502100A JP2009502100A (ja) 2009-01-22
JP5484725B2 true JP5484725B2 (ja) 2014-05-07

Family

ID=36969701

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2008522773A Expired - Fee Related JP5484725B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置
JP2008522772A Expired - Fee Related JP5535479B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2008522772A Expired - Fee Related JP5535479B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置

Country Status (14)

Country Link
US (2) US20090080535A1 (ja)
EP (2) EP1915871B1 (ja)
JP (2) JP5484725B2 (ja)
KR (2) KR101299390B1 (ja)
CN (2) CN101228795B (ja)
AU (2) AU2006277008B2 (ja)
BR (2) BRPI0613657B1 (ja)
HK (1) HK1118663A1 (ja)
MX (1) MX2008000906A (ja)
MY (2) MY149340A (ja)
RU (2) RU2406253C2 (ja)
TW (2) TWI325723B (ja)
WO (2) WO2007018669A1 (ja)
ZA (2) ZA200800244B (ja)

Families Citing this family (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8340177B2 (en) 2004-07-12 2012-12-25 Microsoft Corporation Embedded base layer codec for 3D sub-band coding
KR20060070400A (ko) * 2004-12-20 2006-06-23 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
US8422546B2 (en) * 2005-05-25 2013-04-16 Microsoft Corporation Adaptive video encoding using a perceptual model
EP1806930A1 (en) * 2006-01-10 2007-07-11 Thomson Licensing Method and apparatus for constructing reference picture lists for scalable video
US8130828B2 (en) 2006-04-07 2012-03-06 Microsoft Corporation Adjusting quantization to preserve non-zero AC coefficients
US8503536B2 (en) 2006-04-07 2013-08-06 Microsoft Corporation Quantization adjustments for DC shift artifacts
US7995649B2 (en) 2006-04-07 2011-08-09 Microsoft Corporation Quantization adjustment based on texture level
US8711925B2 (en) 2006-05-05 2014-04-29 Microsoft Corporation Flexible quantization
GB2440004A (en) * 2006-07-10 2008-01-16 Mitsubishi Electric Inf Tech Fine granularity scalability encoding using a prediction signal formed using a weighted combination of the base layer and difference data
JP4747975B2 (ja) * 2006-07-14 2011-08-17 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
US20080013623A1 (en) * 2006-07-17 2008-01-17 Nokia Corporation Scalable video coding and decoding
US8238424B2 (en) 2007-02-09 2012-08-07 Microsoft Corporation Complexity-based adaptive preprocessing for multiple-pass video compression
US20080240257A1 (en) * 2007-03-26 2008-10-02 Microsoft Corporation Using quantization bias that accounts for relations between transform bins and quantization bins
US8498335B2 (en) 2007-03-26 2013-07-30 Microsoft Corporation Adaptive deadzone size adjustment in quantization
US8243797B2 (en) 2007-03-30 2012-08-14 Microsoft Corporation Regions of interest for quality adjustments
US8442337B2 (en) 2007-04-18 2013-05-14 Microsoft Corporation Encoding adjustments for animation content
US8331438B2 (en) * 2007-06-05 2012-12-11 Microsoft Corporation Adaptive selection of picture-level quantization parameters for predicted video pictures
EP2164266B1 (en) * 2007-07-02 2017-03-29 Nippon Telegraph and Telephone Corporation Moving picture scalable encoding and decoding method using weighted prediction, their devices, their programs, and recording media storing the programs
EP2202984B1 (en) 2007-10-25 2017-04-19 Nippon Telegraph and Telephone Corporation Video scalable encoding method and decoding methods using weighted prediction, devices therefor, programs therefor, and recording medium where program is recorded
US8750390B2 (en) 2008-01-10 2014-06-10 Microsoft Corporation Filtering and dithering as pre-processing before encoding
US8160132B2 (en) 2008-02-15 2012-04-17 Microsoft Corporation Reducing key picture popping effects in video
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US8711948B2 (en) 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
US8189933B2 (en) 2008-03-31 2012-05-29 Microsoft Corporation Classifying and controlling encoding quality for textured, dark smooth and smooth video content
US8761253B2 (en) * 2008-05-28 2014-06-24 Nvidia Corporation Intra prediction mode search scheme
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
KR101144539B1 (ko) * 2008-06-05 2012-05-14 한국전자통신연구원 스케일러블 비디오 코딩 비트스트림의 적응 변환 장치 및 그 방법
CN102100071B (zh) * 2008-07-25 2013-01-02 索尼公司 图像处理设备和方法
US9571856B2 (en) 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
WO2010032636A1 (ja) * 2008-09-17 2010-03-25 シャープ株式会社 スケーラブルビデオストリーム復号装置およびスケーラブルビデオストリーム生成装置
US20100098156A1 (en) 2008-10-16 2010-04-22 Qualcomm Incorporated Weighted prediction based on vectorized entropy coding
TWI440363B (zh) 2009-02-19 2014-06-01 Sony Corp Image processing apparatus and method
TWI463878B (zh) 2009-02-19 2014-12-01 Sony Corp Image processing apparatus and method
TWI468020B (zh) * 2009-02-19 2015-01-01 Sony Corp Image processing apparatus and method
JP5625342B2 (ja) * 2009-12-10 2014-11-19 ソニー株式会社 画像処理方法、画像処理装置、プログラム
KR101703327B1 (ko) * 2010-01-14 2017-02-06 삼성전자 주식회사 계층적 데이터 단위의 패턴 정보를 이용하는 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
JP5428886B2 (ja) * 2010-01-19 2014-02-26 ソニー株式会社 情報処理装置、情報処理方法、及びそのプログラム
CN106231328B (zh) 2010-04-13 2020-06-12 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
KR102480988B1 (ko) 2010-04-13 2022-12-26 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
LT3697089T (lt) 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
JP5703781B2 (ja) 2010-09-03 2015-04-22 ソニー株式会社 画像処理装置および方法
WO2012042884A1 (ja) * 2010-09-29 2012-04-05 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
US9749630B2 (en) 2010-09-30 2017-08-29 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, program, and integrated circuit
PL2704435T3 (pl) * 2011-04-25 2019-08-30 Lg Electronics Inc. Sposób intra-predykcji i koder oraz dekoder wykorzystujący go
JP5786478B2 (ja) * 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
US9131245B2 (en) * 2011-09-23 2015-09-08 Qualcomm Incorporated Reference picture list construction for video coding
US10003817B2 (en) * 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
US9392235B2 (en) 2011-11-18 2016-07-12 Google Technology Holdings LLC Explicit way for signaling a collocated reference picture for video coding
EP2781098B1 (en) 2011-11-18 2019-02-06 Google Technology Holdings LLC An explicit way for signaling a collocated picture for high efficiency video coding (hevc)
KR101652928B1 (ko) 2012-01-31 2016-09-01 브이아이디 스케일, 인크. 스케일러블 고효율 비디오 코딩(hevc)을 위한 참조 픽처 세트(rps) 시그널링
US9143781B2 (en) 2012-04-03 2015-09-22 Qualcomm Incorporated Weighted prediction parameter coding
WO2013155028A1 (en) * 2012-04-09 2013-10-17 Vid Scale, Inc. Weighted prediction parameter signaling for video coding
WO2013154674A1 (en) 2012-04-11 2013-10-17 Motorola Mobility Llc Evaluation of signaling of collocated reference picture for temporal prediction
KR101682999B1 (ko) * 2012-04-16 2016-12-20 노키아 테크놀로지스 오와이 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
WO2013162450A1 (en) * 2012-04-24 2013-10-31 Telefonaktiebolaget L M Ericsson (Publ) Encoding and deriving parameters for coded multi-layer video sequences
US9253487B2 (en) 2012-05-31 2016-02-02 Qualcomm Incorporated Reference index for enhancement layer in scalable video coding
US9532080B2 (en) 2012-05-31 2016-12-27 Sonic Ip, Inc. Systems and methods for the reuse of encoding information in encoding alternative streams of video data
US10536710B2 (en) * 2012-06-27 2020-01-14 Intel Corporation Cross-layer cross-channel residual prediction
US9319681B2 (en) 2012-07-18 2016-04-19 Google Technology Holdings LLC Signaling of temporal motion vector predictor (MVP) enable flag
US20140056356A1 (en) * 2012-08-21 2014-02-27 Motorola Mobility Llc Method and apparatus for efficient signaling of weighted prediction in advanced coding schemes
US9554146B2 (en) 2012-09-21 2017-01-24 Qualcomm Incorporated Indication and activation of parameter sets for video coding
US20140092971A1 (en) * 2012-09-28 2014-04-03 Kiran Mukesh Misra Picture processing in scalable video systems
US9124899B2 (en) 2012-09-28 2015-09-01 Sharp Laboratories Of America, Inc. Motion derivation and coding for scaling video
CN104813663B (zh) 2012-09-28 2018-05-22 索尼公司 编码设备、编码方法、解码设备和解码方法
US20140092972A1 (en) * 2012-09-29 2014-04-03 Kiran Mukesh Misra Picture processing in scalable video systems
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
KR102367210B1 (ko) 2012-10-01 2022-02-24 지이 비디오 컴프레션, 엘엘씨 공간적 인트라 예측 파라미터들의 인터-레이어 예측을 이용한 스케일러블 비디오 코딩
CN104885462A (zh) * 2012-12-28 2015-09-02 日本电信电话株式会社 视频编码装置和方法、视频解码装置和方法、以及其程序
US9294777B2 (en) * 2012-12-30 2016-03-22 Qualcomm Incorporated Progressive refinement with temporal scalability support in video coding
US9357210B2 (en) 2013-02-28 2016-05-31 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
EP3021590A4 (en) * 2013-07-12 2017-03-29 Sony Corporation Image coding device and method
US20150016502A1 (en) * 2013-07-15 2015-01-15 Qualcomm Incorporated Device and method for scalable coding of video information
EP3078195A4 (en) 2013-12-02 2017-08-09 Nokia Technologies OY Video encoding and decoding
US10764603B2 (en) 2018-12-31 2020-09-01 Alibaba Group Holding Limited Resolution-adaptive video coding

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5122875A (en) * 1991-02-27 1992-06-16 General Electric Company An HDTV compression system
US6381349B1 (en) * 1997-11-12 2002-04-30 The University Of Utah Projector/backprojector with slice-to-slice blurring for efficient 3D scatter modeling
US6236878B1 (en) * 1998-05-22 2001-05-22 Charles A. Taylor Method for predictive modeling for planning medical interventions and simulating physiological conditions
US6310968B1 (en) * 1998-11-24 2001-10-30 Picker International, Inc. Source-assisted attenuation correction for emission computed tomography
US6392235B1 (en) * 1999-02-22 2002-05-21 The Arizona Board Of Regents On Behalf Of The University Of Arizona Coded-aperture system for planar imaging of volumetric sources
US6931060B1 (en) * 1999-12-07 2005-08-16 Intel Corporation Video processing of a quantized base layer and one or more enhancement layers
WO2002065784A1 (en) * 2001-02-13 2002-08-22 Koninklijke Philips Electronics N.V. Motion information coding and decoding method
US6895055B2 (en) * 2001-10-29 2005-05-17 Koninklijke Philips Electronics N.V. Bit-rate guided frequency weighting matrix selection
KR100508798B1 (ko) * 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
US7376186B2 (en) * 2002-07-15 2008-05-20 Thomson Licensing Motion estimation with weighting prediction
US7072394B2 (en) * 2002-08-27 2006-07-04 National Chiao Tung University Architecture and method for fine granularity scalable video coding
CA2500301C (en) * 2002-10-01 2013-05-14 Thomson Licensing S.A. Implicit weighting of reference pictures in a video decoder
KR100612849B1 (ko) * 2003-07-18 2006-08-14 삼성전자주식회사 영상 부호화 및 복호화 장치 및 방법
US7262417B2 (en) * 2004-03-26 2007-08-28 Board Of Regents, The University Of Texas System Method and system for improved image reconstruction and data collection for compton cameras
KR100703770B1 (ko) * 2005-03-25 2007-04-06 삼성전자주식회사 가중 예측을 이용한 비디오 코딩 및 디코딩 방법, 이를위한 장치
KR100763182B1 (ko) * 2005-05-02 2007-10-05 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치
KR100714696B1 (ko) * 2005-06-24 2007-05-04 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치

Also Published As

Publication number Publication date
JP2009502099A (ja) 2009-01-22
JP5535479B2 (ja) 2014-07-02
EP1915871A1 (en) 2008-04-30
AU2006277008A1 (en) 2007-02-15
ZA200800248B (en) 2009-08-26
EP1915870B1 (en) 2017-03-08
RU2406253C2 (ru) 2010-12-10
US20090080535A1 (en) 2009-03-26
MY147087A (en) 2012-10-31
EP1915871B1 (en) 2017-07-05
CN101228794A (zh) 2008-07-23
EP1915870A1 (en) 2008-04-30
CN101228794B (zh) 2011-05-11
ZA200800244B (en) 2010-05-26
BRPI0613657B1 (pt) 2019-05-07
AU2006277007A1 (en) 2007-02-15
MY149340A (en) 2013-08-30
WO2007018669A1 (en) 2007-02-15
BRPI0613659B1 (pt) 2019-06-04
MX2008000906A (es) 2008-03-18
AU2006277008B2 (en) 2011-11-10
CN101228795A (zh) 2008-07-23
KR20080028945A (ko) 2008-04-02
RU2411686C2 (ru) 2011-02-10
RU2008106629A (ru) 2009-08-27
WO2007018670A1 (en) 2007-02-15
RU2008106624A (ru) 2009-08-27
BRPI0613659A2 (pt) 2011-01-25
AU2006277007B2 (en) 2011-10-27
TWI324887B (en) 2010-05-11
HK1118663A1 (en) 2009-02-13
CN101228795B (zh) 2011-09-07
KR20080031017A (ko) 2008-04-07
TW200723886A (en) 2007-06-16
TW200723887A (en) 2007-06-16
KR101299848B1 (ko) 2013-08-23
KR101299390B1 (ko) 2013-08-22
US20090207919A1 (en) 2009-08-20
JP2009502100A (ja) 2009-01-22
TWI325723B (en) 2010-06-01
BRPI0613657A2 (pt) 2011-01-25

Similar Documents

Publication Publication Date Title
JP5484725B2 (ja) スケーラブルビデオコーディングのための重み付け予測方法及び装置
US8311121B2 (en) Methods and apparatus for weighted prediction in scalable video encoding and decoding
US8867618B2 (en) Method and apparatus for weighted prediction for scalable video coding
KR101326610B1 (ko) 매크로블록 적응적 인터-층 인트라 텍스쳐 예측을 위한 방법 및 장치
CA2624339C (en) Region of interest h.264 scalable video coding
US20140192884A1 (en) Method and device for processing prediction information for encoding or decoding at least part of an image
US8275040B2 (en) Method and apparatus for weighted prediction for scalable video coding
CN117041602A (zh) 用于对视频信号进行编码的方法、计算设备和存储介质
CN115606180A (zh) 视频编码的通用约束信息
GB2506853A (en) Image Encoding / Decoding Including Determination of Second Order Residual as Difference Between an Enhancement and Reference Layer Residuals
GB2512563A (en) Method and apparatus for encoding an image into a video bitstream and decoding corresponding video bitstream with weighted residual predictions

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090311

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111018

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120113

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120417

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121106

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140219

R150 Certificate of patent or registration of utility model

Ref document number: 5484725

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

LAPS Cancellation because of no payment of annual fees
S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350