JP2009543462A - マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置 - Google Patents

マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置 Download PDF

Info

Publication number
JP2009543462A
JP2009543462A JP2009518403A JP2009518403A JP2009543462A JP 2009543462 A JP2009543462 A JP 2009543462A JP 2009518403 A JP2009518403 A JP 2009518403A JP 2009518403 A JP2009518403 A JP 2009518403A JP 2009543462 A JP2009543462 A JP 2009543462A
Authority
JP
Japan
Prior art keywords
picture
view
reference picture
international
function block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009518403A
Other languages
English (en)
Inventor
パンディット,パーヴィン,ビバス
スー,イェピン
イン,ペン
ゴミラ,クリスティーナ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=38895262&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2009543462(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2009543462A publication Critical patent/JP2009543462A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction

Abstract

ビットストリームからマルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも2つのピクチャを復号化するデコーダ250及び復号化方法410が開示され、ビットストリームにおいて、少なくとも1つのピクチャについて符号化順序情報と出力順序情報の少なくとも1つは、少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される。さらに、結果的に得られるビットストリームを形成するため、マルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも1つのピクチャを符号化するエンコーダ200及び符号化方法360が開示され、結果的に得られるビットストリームにおいて、少なくとも1つのピクチャについて符号化順序情報及び出力順序情報のうちの少なくとも1つは、少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される。

Description

本発明は、ビデオ符号化及び復号化全般に関し、より詳細には、マルチビュービデオ符号化及び復号化向けにフレームナンバー及び/又はピクチャオーダカウント(POC: Picture Order Count)を分離する方法及び装置に関する。
本出願は、2006年7月6日に提出された米国仮出願60/818,874号及び2006年7月18日に提出された米国仮出願60/807,706号の利益を特許請求するものであり、これらは、それぞれ完全な形で本明細書に引用により盛り込まれる。
さらに、本出願は、本出願と共に同時に提出される、“Method and Apparatus for Decoupling Frame Number and/or Picture Order Count (POC) for Multi-view Video Encoding and Decoding”と題された仮出願ではない、代理人ドケットPU060136号に関連するものであり、同一出願人によるものであって、本明細書に引用により盛り込まれる。
ISO/IEC(International Organization for Standardization/International Electrotechnical Commission) MPEG−4(Moving Picture Experts Group-4) Part10 AVC(Advanced Video Coding)規格/ITU−T(International Telecommunication Union, Telecommunication Sector) H.264勧告(以下“MPEG−4AVC標準”)では、ピクチャの識別子としてシンタックスエレメントのframe_numが使用され、MPEG−4AVC標準で定義される幾つかの制約を有する。frame_numの主要な目的は、ピクチャがデコードされるたびにインクリメントされるカウンタとしての役割を果たし、データの損失がある場合に、デコーダは幾つかのピクチャが失われたことを検出し、問題を隠すことができる。frame_numは、アクセスユニットの復号化順序で増加し、表示順序を必ずしも示さない。MMCO(Memory Management Control Operations)は、frame_numの値を使用して、長期及び短期のリファレンスとしてピクチャをマークするか、リファレンスピクチャについて不使用であるとしてリファレンスピクチャをマークする。また、frame_numは、P及びSPスライスについてデフォルトのリファレンスリストのオーダリングのために使用される。
MPEG−4AVC標準におけるピクチャオーダカウントは、特定のピクチャのタイミング又は出力のオーダリングの指示である。ピクチャオーダカウントは、復号化順序における前のIDR(Instantaneous Decoding Refresh)ピクチャに関して、又は「リファレンスのために使用されていない」として全てのリファレンスピクチャをマークするメモリマネージメント制御動作を含む前のピクチャに関して、出力順序において増加するピクチャの位置につれて減少しない値を有する変数である。ピクチャオーダカウント(Picture Order Count)は、スライスヘッダシンタックスエレメントから導出される。ピクチャオーダカウントは、テンポラルダイレクトモードでの動きベクトルの導出、暗黙の重み付け予測、及びBスライスのデフォルトのイニシャルリファレンスピクチャリストのオーダリングで使用される。
特に、時間的相関関係を使用したダイレクトモードの動きパラメータは、その後のリファレンスピクチャ又はより正確には第一のLIST1リファレンスにおける共に配置される位置での動き情報を考慮することで現在のマクロブロック/ブロックについて典型的に導出される。図1を参照して、Bスライス符号化におけるテンポラルダイレクト予測を例示する図は、参照符号100により一般に示される。オブジェクトが一定の速度で移動するという仮定に続いて、これらのパラメータは、関連するリファレンスピクチャの(図1に示されるような)時間的な距離に従ってスケーリングされる。ダイレクト符号化ブロックの動きベクトル
(外1)
Figure 2009543462
に対する第一のLIST1リファレンスにおけるその共に配置される位置の動きベクトル
(外2)
Figure 2009543462
は、以下のように計算される。
Figure 2009543462
先の式では、TDB及びTDDは、それぞれ、現在及びLIST1ピクチャに比較してLIST1ピクチャにおける共に配置されるブロックのLIST0動きベクトルにより使用されるリファレンスピクチャの時間的な距離であり、又はより正確には、ピクチャオーダカウント(POC)距離である。LIST1リファレンスピクチャ及びLIST1における共に配置されるブロックの動きベクトルにより参照されるLIST0におけるリファレンスは、ダイレクトモードの2つのリファレンスとして使用される。リファレンスインデックスrefldxL0が長期のリファレンスピクチャを参照するか、又はDiffPicOderCnt(pic1, pic0)が0に等しい場合、ダイレクトモードのパーティションの動きベクトル
(外3)
Figure 2009543462
は、以下により導出される。
Figure 2009543462
また、暗黙の重み付けされた予測ツールは、重みを決定するためにピクチャオーダカウント情報を使用する。重み付け予測(WP)暗黙モードでは、重み付けファクタは、スライスヘッダで明示的に送信されないが、代わりに、現在のピクチャとリファレンスピクチャとの間の相対的な距離に基づいて導出される。暗黙のモードは、ダイレクトモードを使用するものを含めて、双方向予測されたマクロブロック及びBスライスにおけるマクロブロックのパーティションについてのみ使用される。暗黙のモードについて、オフセット値O0及びO1がゼロに等しく、重みファクタW0及びW1が式(6)〜式(10)における以下の式を使用して導出されることを除いて、式(1)に示される式が使用される。
Figure 2009543462
これは、ディビジョンフリーな、以下の16ビットセーフオペレーションの実現である。
Figure 2009543462
ここでTDBは、LIST1リファレンスピクチャとLIST0リファレンスピクチャとの間の時間差であり、レンジ「−128,127」にクリップされ、TDBは、現在のピクチャとLIST0リファレンスピクチャとの間の差であり、レンジ「−128,127」にクリップされる。マルチビュービデオコーディングでは、TDDがゼロに評価することができる場合が存在する(これは、式(11)におけるDiffPicOderCnt(pic1,pic2)がゼロになるときに起こる)。係るケースでは、重みW0及びW1は32に設定される。
マルチビュービデオ符号化(MVC)の現在のMPEG−4AVCに準拠した実現では、リファレンスソフトウェアは、全てのビデオ系列を1つのストリームにインタリーブすることでマルチビュー予測を達成する。このように、ビュー間のframe_num及びピクチャオーダカウントは、互いに結合される。これは、幾つかの問題を有する。1つの問題点は、部分的な復号化についてframe_numの値におけるギャップが存在することである。これは、リファレンスピクチャリストの管理を複雑にするか、又はframe_numのギャップに基づいたエラーロスの検出を不可能にする点である。別の利点は、ピクチャオーダカウントが現実的な物理的な意味を有さない点であり、テンポラルダイレクトモード又は暗黙の重み予測のようなピクチャオーダカウント情報を当てにする符号化ツールをブレイクする可能性がある。さらに別の問題点は、上記結合によりマルチビューシーケンスのパラレルな符号化を更に困難にする点である。
従来技術のこれらの課題及び問題点、並びに他の課題及び問題点は、本発明の原理により対処され、マルチビュービデオ符号化及び復号化向けにフレームナンバーとピクチャオーダカウント(POC)とを分離する方法及び装置に向けられる。
本発明の態様によれば、ビットストリームから、マルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも1つのピクチャを復号化するデコーダを含む装置が提供される。ビットストリームでは、少なくとも1つのピクチャについて符号化順序情報及び出力順序情報の少なくとも1つは、少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される。
本発明の原理の別の態様によれば、ビットストリームから、マルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも1つのピクチャを復号化するステップを含む方法が提供される。ビットストリームでは、少なくとも1つのピクチャについて符号化順序情報及び出力順序情報の少なくとも1つは、少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される。
本発明の更に別の態様によれば、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダを含む装置が提供される。このデコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応するデフォルトのリファレンスピクチャリストのコンストラクションプロセス及びリファレンスピクチャリストのリオーダリングにおける再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
本発明の原理のなお更に別の態様によれば、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダ250を含む装置が提供される。このデコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおける再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
本発明の原理の更に別の態様によれば、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するステップを含む方法が提供される。この復号化ステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおける再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
本発明の原理のなお更に別の態様によれば、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するステップを含む方法が提供される。この復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおける再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
本発明の原理のこれらの態様、特徴及び利点、並びに他の態様、特徴及び利点は、添付図面と共に読まれる例示的な実施の形態の以下の詳細な説明から明らかとなるであろう。本発明の原理は、以下の例示的な図面に従って良好に理解されるであろう。
本発明は、マルチビュービデオ符号化及び復号化のため、フレームナンバーとピクチャオーダカウント(POC)を分離する方法及び装置に向けられる。この開示は、本発明の原理を例示するものである。したがって、当業者であれば、本実施の形態では明示的に記載又は図示されないが、本発明を実施し、本発明の精神及び範囲に含まれる様々なアレンジメントを考案するであろうことを理解されたい。本実施の形態で示される全ての例及び条件付き言語は、本発明の原理、及び当該技術分野を促進するために本発明者により寄与される概念の理解において読者を支援する教育的な目的が意図され、係る特に引用される例及び条件に限定するものではないとして解釈されるべきである。
さらに、本発明の原理、態様及び実施の形態を引用する全ての説明は、その特別の例と共に、本発明の構造的且つ機能的に等価な概念の両者を包含することが意図される。さらに、係る等価な概念は、現在知られている等価な概念と同様に、将来に開発される等価な概念、すなわち構造に関わらず、同じ機能を実行する開発されたエレメントを含む。
したがって、たとえば、本明細書で与えられるブロック図は、本発明の原理を実施する例示的な回路の概念図を表わすことが当業者により理解されるであろう。同様に、何れかのフローチャート、フロー図、状態遷移図、擬似コード等は、コンピュータ読取り可能なメディアで実質的に表現され、コンピュータ又はプロセッサが明示的に示されているか否かに関わらず、係るコンピュータ又はプロセッサにより実行される様々なプロセスを表すことを理解されるであろう。
図示される様々なエレメントの機能は、専用のハードウェアと同様に、適切なソフトウェアに関連するソフトウェアを実行可能なハードウェアの使用を通して提供される場合がある。プロセッサにより提供されたとき、機能は、1つの専用のプロセッサにより提供されるか、1つの共有プロセッサにより提供されるか、そのうちの幾つかが共有される複数の個別のプロセッサにより提供される場合がある。さらに、用語「プロセッサ」又は「コントローラ」の明示的な使用は、ソフトウェアを実行可能なハードウェアを排他的に示すために解釈されるべきではなく、限定されることなしに、デジタルシグナルプロセッサ(DSP)ハードウェア、ソフトウェアを記憶するリードオンリメモリ(ROM)、ランダムアクセスメモリ(RAM)、及び不揮発性ストレージを暗黙に含む場合がある。
コンベンショナル及び/又はカスタムな他のハードウェアが含まれる場合もある。同様に、図示されるスイッチは、概念のみである。それらの機能は、プログラムロジックの動作を通して、専用ロジックを通して、プログラム制御及び専用ロジックのインタラクションを通して実行されるか、又は、更には手動的に実行され、特定の技術は、コンテクストから更に詳細に理解されるように実現者により選択可能である。
その請求項では、指定された機能を実行する手段として表現されるエレメントは、たとえば、a)その機能を実行する回路エレメントの組み合わせ、又はb)機能を実行するためにソフトウェアを実行する適切な回路と共に結合される、ファームウェア、マイクロコード等を含む何れかの形式でのソフトウェアを含めて、その機能を実行する任意のやり方を包含することが意図される。係る請求項により定義される本発明の原理は、様々な引用された手段により提供される機能は結合され、請求項が求めるやり方でまとめられるという事実にある。したがって、それらの機能を提供する任意の手段は、本明細書に示される手段に等価であるとみなされる。
本発明の原理の「1実施の形態」又は「実施の形態」への明細書における参照は、実施の形態と共に記載される特定の特徴、機能、特性等が本発明の原理の少なくとも1つに含まれることを意味する。したがって、明細書を通して様々な位置で現れるフレーズ「1実施の形態では」又は「実施の形態では」の出現は、同じ実施の形態を必ずしも示すものではない。
本明細書で使用されるように、「ハイレベルシンタックス」は、マクロブロックレイヤの階層的に上にあるビットストリームに存在するシンタックスを示す。たとえば、ハイレベルシンタックスは、本明細書で使用されるように、限定されるものではないが、スライスヘッダレベル、SEI(Supplemental Enhancement Information)レベル、ピクチャパラメータセットレベル、シーケンスパラメータセットレベル及びNALユニットヘッダレベルでのシンタックスを示す場合がある。
さらに、本明細書で使用されるように、「以前に使用されていないシンタックス」は、現在知られているビデオ符号化標準及び勧告、及び限定されるものではないがMPEG−4AVC標準を含むその拡張に未だ存在しないシンタックスを示す。
また、本明細書で使用されるように、「符号化順序情報」は、ビットストリームにおけるピクチャが符号化及び/又は復号化される順序を示すビットストリームに存在する情報を示す。符号化順序情報は、たとえばframe_numを含む場合がある。
さらに、本明細書で使用されるように、「出力順序情報」は、ビットストリームにおけるピクチャが出力される順序を示すビデオビットストリームに存在する情報を示す。出力順序情報は、たとえばピクチャオーダカウント(POC)値を含む場合がある。
さらに、本発明の原理は、MPEG−4AVC標準に関して本実施の形態で記載されるが、本発明の原理は、この標準のみに限定されるものではなく、したがって、本発明の原理の精神を維持しつつ、他の符号化標準及びMPEG−4AVC標準の拡張を含むその拡張に関して利用される場合があることを理解されたい。
さらに、本明細書で交換可能に使用されるように、「クロスビュー(cross view)」及び「インタービュー(inter view)」の両者は、現在のビュー以外のビューに属するピクチャを示す。
図2Aを参照して、例示的なマルチビュービデオコーディング(MVC)エンコーダは、参照符号100により全般的に示される。エンコーダ100は、変換器110の入力と信号通信で接続される出力を有する結合器105を含む。変換器110の出力は、量子化器115の入力と信号通信で接続される。量子化器115の出力は、エントロピーコーダ120の入力及び逆量子化器125の入力と信号通信で接続される。逆量子化器125の出力は、逆変換器130の入力と信号通信で接続される。逆変換器130の出力は、結合器135の第一の非反転入力と信号通信で接続される。結合器135の出力は、イントラ予測器145の入力及びデブロッキングフィルタ150の入力と信号通信で接続される。デブロッキングフィルタ150の出力は、(ビューiについて)リファレンスピクチャストア155の入力と信号通信で接続される。リファレンスピクチャストア155の出力は、動き補償器175の第一の入力及び動き予測器180の第一の入力と信号通信で接続される。動き予測器180の出力は、動き補償器175の第二の入力と信号通信で接続される。
(他のビューについて)リファレンスピクチャストア160の出力は、ディスパリティ予測器170の第一の入力及びディスパリティ補償器165の第一の入力と信号通信で接続される。ディスパリティ予測器170の出力は、ディスパリティ補償器165の第二の入力と信号通信で接続される。
エントロピーデコーダ120の出力は、エンコーダ100の出力として利用可能である。結合器105の非反転入力は、エンコーダ100の入力として利用可能であり、ディスパリティ予測器170の第二の入力及び動き予測器180の第二の入力と信号通信で接続される。スイッチ185の出力は、結合器135の第二の非反転入力及び結合器105の反転入力と信号通信で接続される。スイッチ185は、動き補償器175の出力と信号通信で接続される第一の入力、ディスパリティ補償器165の出力と信号通信で接続される第二の入力、及びイントラ予測器145の出力と信号通信で接続される第三の入力を含む。
図2Bを参照して、例示的なマルチビュービデオコーディング(MVC)デコーダは、参照符号3200により全般的に示される。デコーダ3200は、逆量子化器3210の入力と信号通信で接続される出力を有するエントロピーデコーダ3205を含む。逆量子化器の出力は、逆変換器3215の入力と信号通信で接続される。逆変換器3215の出力は、結合器3220の第一の非反転入力と信号通信で接続される。結合器3220の出力は、デブロッキングフィルタ3225の入力とイントラ予測器3230の入力と信号通信で接続される。デブロッキングフィルタ3225の出力は、(ビューiについて)リファレンスピクチャストア3240の入力と信号通信で接続される。リファレンスピクチャストア3240の出力は、動き補償器3235の第一の入力と信号通信で接続される。
(他のビューについて)リファレンスピクチャストア3245の出力は、ディスパリティ補償器250の第一の入力と信号通信で接続される。
エントロピーコーダ3205の入力は、残余のビットストリームを受信するため、デコーダ3200への入力として利用可能である。さらに、スイッチ3255の制御入力は、どの入力がスイッチ3255により選択されるかを制御するコントロールシンタックスを受信するため、デコーダ3200への入力として利用可能である。さらに、動き補償器3235の第二の入力は、動きベクトルを受信するため、デコーダ3200の入力として利用可能である。また、ディスパリティ補償器3250の第二の入力は、ディスパリティベクトルを受信するため、デコーダ3200への入力として利用可能である。
スイッチ3255の出力は、結合器3220の第二の非反転入力と信号通信で接続される。スイッチ3255の第一の入力は、ディスパリティ補償器3250の出力と信号通信で接続される。スイッチ3255の第二の入力は、動き補償器3235の出力と信号通信で接続される。スイッチ3255の第三の入力は、イントラ予測器3230の出力と信号通信で接続される。モードモジュール3260の出力は、どの入力がスイッチ3255により選択されるかを制御するためにスイッチ3255と信号通信で接続される。デブロッキングフィルタ3225の出力は、デコーダの出力として利用可能である。
本発明の原理によれば、マルチビュービデオ系列の効果的な符号化向けMPEG−4AVC標準のハイレベルシンタックスに対して幾つかの変形が提案される。実施の形態では、マルチビュービデオ系列を符号化するとき、ビュー間でフレームナンバー(frame_num)とピクチャオーダカウント(POC)値を分離することが提案される。1つの可能な応用は、それぞれのビューについて、独立に、MPEG−4AVCに準拠した復号化及び出力プロセスを適用することができる。実施の形態では、ビュー間のフレームナンバー及び/又はピクチャオーダカウント値は、ビューのそれぞれについてview-idを送出することで分離される。ビュー補間/合成、ビューのランダムアクセス、パラレル処理等を含めて幾つかのマルチビュービデオコーディング(MVC)の要件についてview_id情報が必要とされるので、以前に、ハイレベルシンタックスにおいてビュー識別子(view_id)を付加することがシンプルに提案されている。また、view_id情報は、クロスビュー予測にのみ関連する特別の符号化モードについて有効となる。このview_idは、マルチビュービデオコンテンツのビュー間でフレームナンバーとピクチャオーダカウント値とを分離するため、本発明の原理に従って使用される。さらに、実施の形態では、マルチビュービデオコーディングに関してMPEG−4AVC標準における符号化ツールを固定するためのソリューションが提案されている。
実施の形態では、それぞれのビューは、異なるview_idを有し、したがって同じframe_num及びPOCを異なるビューについて再使用することができる。
(外4)
Figure 2009543462
異なるビューを符号化して並列処理を可能にする幾つかのやり方が存在する。1つの可能なやり方は、はじめに、あるビューにおけるピクチャがあるGOPについて符号化され、続いて、そのGOPについて全てのビューが符号化されるまで、同じGOPサイズについて別のビューからのピクチャが符号化される。次いで、プロセスは、他のGOPについて繰り返される。先の例示では、はじめに、ビューS0におけるピクチャが符号化され、続いて、ビューS2からのピクチャ、次いでビューS1からのピクチャが符号化される。
別の可能なやり方は、はじめに符号化されるべき同じ時間的な瞬間に属する全てのビューにおける全てのピクチャを符号化し、続いて、全てのビューにおける別の時間的な瞬間に属する別のピクチャのセットを符号化することである。このプロセスは、全てのピクチャが符号化されるまで繰り返される。先の例では、はじめに、時間の瞬間T0でのビューS0,S1,S2における全てのピクチャが符号化され、T8,T4等が後続する。本発明は、ピクチャが符号化される順序にとらわれない。
以下では、本発明の原理の様々な実施の形態に係るMPEG−4AVC標準に対する変形を説明する。また、1以上の変形がマルチビューシーケンスの並列の符号化をどのように可能にするかを示す。しかし、本発明の原理がMPEG−4AVC標準に関して本実施の形態で主に記載されるが、本発明の原理は、本発明の原理の範囲を維持しつつ、本実施の形態で提供される本発明の原理の教示が与えられたときに当業者により容易に決定されるように、他のビデオ符号化標準及び勧告並びにその拡張と同様に、MPEG−4AVC標準の拡張に関して実現される場合があることを理解されたい。
[デコードされたリファレンスピクチャのマーキングプロセス]
現在のMPEG−4AVC標準では、デコードされたピクチャバッファ(DPB)において同じframe_numをもつ多数のピクチャを有することは許可されない。しかし、本発明の原理の実施の形態によれば、この制約は、マルチビュービデオコーディング(MVC)において緩和される。これは、frame_num及び/又はピクチャオーダカウントが分離されるためであり、すなわち、それぞれのビューがそれ自身の独立なframe_num及びピクチャオーダカウント値を有することが提案されるためである。これを可能にするため、実施の形態では、view_idをデコードされたピクチャと関連付ける。これにより、それぞれのピクチャについて別の次元が導入される。したがって、実施の形態では、デコードされたリファレンスピクチャのマーキングプロセスは、view_idを含むように再定義される。
MPEG−4AVC標準がデコードされたリファレンスピクチャマーキングを可能にする2つの方法が存在する。MPEG−4AVC標準におけるデコードされたリファレンスピクチャのマーキングの第一の方法は、スライディングウィンドウによるリファレンスピクチャのマーキングを含む。MPEG−4AVC標準におけるデコードされたリファレンスピクチャのマーキングの第二の方法は、適応メモリ制御によるデコードされたリファレンスピクチャのマーキングを含む。
本発明の原理の様々な実施の形態によれば、1以上のこれらの方法は、スライスヘッダに存在する新たなview_idを考慮するために変更される。表1は、本発明の原理の実施の形態に係るスライスヘッダのシンタックスを例示する。
Figure 2009543462
MPEG−4AVC標準におけるデコードされたリファレンスピクチャのマーキングの第一の方法について、同じframe_num/POC値をもち、異なるview_id値をもつピクチャが存在するとき、デフォルトの振る舞いが特定される。本発明の原理に従う係るデフォルトの振る舞いの1つの実施の形態は、現在のデコードされたピクチャと同じview_idをもつピクチャにMMCOコマンドを適用する。
MPEG−4AVC標準におけるデコードされたリファレンスピクチャのマーキングの第二の方法について、本発明の原理に係る様々な実施の形態が提供され、ここで、新たなMMCO(Memory Management Control Operation)コマンドを導入し、及び/又は、マークされる必要があるピクチャのview_idを考慮するためにMPEG−4AVC標準における既存のMMCOコマンドを変更する。(memory_management_control_operationが1に等しいとき)既存のMMCOを再定義する1実施の形態は、以下を含む。
Figure 2009543462
ここでpicNumX, CurrPicNum, difference_of_pic_nums_minus1は、現在のMPEG−4AVC標準で定義されたものであり、viewIdXは、MMCOコマンドを使用してマークされるべきピクチャのveiewIdであり、CurrViewIdは、現在のデコードされたピクチャのviewIdであり、difference_of_view_ids_minus1は、現在のviewIdとMMCOコマンドを使用してマークされるピクチャのviewIdとの間の差である。
さらに、スライディングウィンドウのデコードされたリファレンスピクチャのマーキングプロセスのデフォルトの振る舞いについて、現在のピクチャと同じview_idをもつピクチャのみが「リファレンスのために不使用」としてマークされるように考慮される。
図3を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号300により全般的に示され、この方法は、ビューファーストコーディングを使用する。
本方法300は、機能ブロック310に制御を移す開始ブロック305を含む。機能ブロック310は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック315に移す。機能ブロック315は、ビューの番号をNとし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック320に移す。判定ブロック320は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック325に移す。さもなければ、制御を終了ブロック399に移す。
判定ブロック325は、jがビューiにおけるピクチャナンバー未満であるか否かを判定する。ピクチャナンバー未満である場合、制御を機能ブロック330に移す。さもなければ、制御を機能ブロック350に移す。
機能ブロック330は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を判定ブロック335に移す。判定ブロック335は、MMCO(Memory Management Control Operation)コマンドが現在のピクチャと関連されるか否かを判定する。関連する場合、制御を機能ブロック340に移す。さもなければ、制御を機能ブロック355に移す。
機能ブロック340は、difference_of_pic_nums_minus1及びdifference_of_view_ids_minus1を計算し、ピクチャ及び「リファレンスのために不使用」としてマークされるべきリファレンスピクチャのview_idを判定し、制御を機能ブロック345に移す。機能ブロック345は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を機能ブロック360に移す。機能ブロック360は、現在のview_idについてframe_numとピクチャオーダカウント(POC)を変え、制御を機能ブロック325に移す。
機能ブロック350は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック320に移す。
機能ブロック355は、スライディングウィンドウによるリファレンスピクチャのマーキングについて、MPEG−4AVCプロセスによる使用のため、「リファレンスのために不使用」としてマークされるべき現在のピクチャのview_idに等しいview_idをもつピクチャを選択し、制御を機能ブロック355に移す。
図4を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号400により全般的に示される。
本方法400は、開始ブロック405を含み、この開始ブロックは、制御を機能ブロック410に移す。機能ブロック410は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック415に移す。機能ブロック415は、現在のピクチャをデコードし、制御を判定ブロック420に移す。判定ブロック420は、MMCO(Memory Management Control Operation)コマンドが存在するか否かを判定する。MMCOコマンドが存在する場合、制御を機能ブロック425に移す。さもなければ、制御を機能ブロック440に移す。
機能ブロック425は、difference_of_pic_nums_minus1及びdifference_of_view_ids_minus1を分析し、ピクチャ及び、「リファレンスのために不使用」であるリファレンスピクチャのview_idを判定し、制御を機能ブロック430に移す。機能ブロック430は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を判定ブロック435に移す。判定ブロック435は、全てのピクチャがデコードされたかを否かを判定する。デコードされた場合、制御を終了ブロック499に移す。さもなければ、制御を機能ブロック410に移す。
機能ブロック440は、スライディングウィンドウによるデコードされたリファレンスピクチャのマーキングについて、MPEG−4AVCプロセスとの使用のため、「リファレンスのために不使用」としてマークされる現在のピクチャのview_idに等しいview_idをもつピクチャを選択し、制御を機能ブロック430に移す。
図15を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号1500により全般的に示される。
方法1500は、開始ブロック1505を含み、この開始ブロックは、制御を機能ブロック1510に移す。機能ブロック1510は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック1515に移す。機能ブロック1515は、ビューの番号をNとし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック1520に移す。判定ブロック1520は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック1525に移す。さもなければ、制御を終了ブロック1599に移す。
判定ブロック1525は、jがビューiにおけるピクチャナンバー未満であるか否かを判定する。ピクチャナンバー未満である場合、制御を機能ブロック1530に移す。さもなければ、制御を機能ブロック1550に移す。
機能ブロック1530は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を判定ブロック1535に移す。判定ブロック1535は、MMCO(Memory Management Control Operation)コマンドが現在のピクチャと関連されるか否かを判定する。関連する場合、制御を機能ブロック1540に移す。さもなければ、制御を機能ブロック1555に移す。
機能ブロック1540は、現在のピクチャのview_idに等しいview_idをもつピクチャに関してのみ、関連されるMMCOコマンドを実行し、制御を機能ブロック1545に移す。機能ブロック1545は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を機能ブロック1560に移す。機能ブロック1560は、現在のview_idについてframe_numとピクチャオーダカウント(POC)を変え、機能ブロック1525に制御を移す。
機能ブロック1550は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック1520に移す。
機能ブロック1555は、スライディングウィンドウによるリファレンスピクチャのマーキングについて、MPEG−4AVCプロセスによる使用のため、「リファレンスのために不使用」としてマークされるべき現在のピクチャのview_idに等しいview_idをもつピクチャを選択し、制御を機能ブロック1555に移す。
図16を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号1600により全般的に示される。
本方法1600は、開始ブロック1605を含み、この開始ブロックは、制御を機能ブロック1610に移す。機能ブロック1610は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック1615に移す。機能ブロック1615は、現在のピクチャをデコードし、制御を判定ブロック1620に移す。判定ブロック1620は、MMCO(Memory Management Control Operation)コマンドが存在するか否かを判定する。MMCOコマンドが存在する場合、制御を機能ブロック1625に移す。さもなければ、制御を機能ブロック440に移す。
機能ブロック1625は、MMCO(Memory Management Control Operation)コマンドを分析し、現在のピクチャのview_idに等しいview_idをもつピクチャに関してのみ、MMCOコマンドを実行し、制御を機能ブロック1630に移す。機能ブロック1630は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を判定ブロック1635に移す。判定ブロック1635は、全てのピクチャがデコードされたかを否かを判定する。デコードされている場合、制御を終了ブロック1699に移す。さもなければ、制御を機能ブロック1610に移す。
機能ブロック1640は、スライディングウィンドウによるデコードされたリファレンスピクチャのマーキングについて、MPEG−4AVCプロセスとの使用のため、「リファレンスのために不使用」としてマークされる現在のピクチャのview_idに等しいview_idをもつピクチャを選択し、制御を機能ブロック1630に移す。
[リファレンスピクチャリストの構築]
本発明の原理に係る実施の形態によれば、view_idをデコードされたリファレンスピクチャと関連付けする。したがって、実施の形態では、view_idを含むために、リファレンスピクチャのために初期化プロセスを再定義し、リファレンスピクチャリスト向けにリオーダリングプロセスを再定義する。
MPEG−4AVC標準は、P及びBスライスのためにリファレンスリストを初期化するデフォルトプロセスを規定する。デフォルトプロセスは、ビットストリームに存在する特別のRPLR(Reference Picture List Reordering)コマンドにより変更することができる。
このリファレンスピクチャのデフォルトのオーダリング及びリオーダリングは、frame_num及びピクチャオーダカウント値に基づく。しかし、同じframe_num/POC値をもつピクチャがデコードされたピクチャバッファ(DPB)に存在するのを可能にするので、view_idを使用して、同じframe_num/POC値間で区別する必要がある。実施の形態では、リファレンスピクチャリストを設定するために1以上のこれらのプロセスが変化される。P及びBスライスについてリファレンスリストを初期化するデフォルトの初期化プロセスの1実施の形態は、リファレンスリストにおけるテンポラルリファレンスピクチャのみを許容し、現在のピクチャのview_idとは異なるview_idをもつ全てのピクチャを無視することを含む。テンポラルリファレンスピクチャは、MPEG−4AVC標準で規定される同じデフォルトの初期化プロセスに従う。別の実施の形態は、最も接近したview_idがリストにおいて先に配置されるように、クロスビューリファレンスのみをリストに配置することを含む。別の実施の形態は、はじめに、テンポラルリファレンスを使用してリファレンスリストを初期化し、次いで、たとえば構築中のリファレンスリストの終わりといった所定の固定された位置にクロスビューリファレンスフレームを配置することを含む。
リストを再び順序付けるリファレンスピクチャリストのリオーダリングコマンドについて、実施の形態では、新たなコマンドが導入されるか、及び/又は、既存のコマンドのセマンティクスは、移動される必要があるピクチャのview_idを考慮するために変更される。
実施の形態では、以下のように、MPEG−4AVC標準で規定されるリファレンスピクチャリストのリオーダリングコマンドが変更されないままであるように、このプロセスで使用されるMPEG−4AVC標準の変数を再定義する。
リファレンスリストのリオーダリングに関するMPEG−4AVC標準の変数を再定義する1実施の形態が以下に示される。この実施の形態では、以下が適用される。
Figure 2009543462
変数CurrPicNumは、以下のように導出される。field_pic_flagが0に等しい場合、CurrPicNumは、frame_num*N+view_idに等しく設定され、さもなければ、field_pic_flagが1に等しい場合、CurrPicNumは、2*(frame_num*N+view_id)+1に等しく設定される。
MPEG−4AVC標準におけるスライスのピクチャオーダカウントは、以下のように定義される。
Figure 2009543462
マルチビュービデオのコーディングスライスについて、ピクチャオーダカウントは、リファレンスピクチャリストの構築のための復号化プロセス及びデコードされたリファレンスピクチャのマーキングプロセスのため、以下のように導出される。
Figure 2009543462
ここでNはビューの数を示す。ビューの数は、ビットストリームにおけるハイレベルシンタックスを使用して示され、バンド内又はバンド外で伝達することができる。1実施の形態は、これをMPEG−4AVC標準のパラメータセット(たとえば、SPS(Sequence Parameter Set)、PPS(Picture Parameter Set)、又はVPS(View Parameter Set))に含むことである。
リファレンスリストのリオーダリングに関するMPEG−4AVC標準の変数を再定義する別の実施の形態は、以下に示される。この実施の形態では、以下が適用される。
Figure 2009543462
マルチビュービデオコーディングのスライスについて、ピクチャオーダカウントは、リファレンスピクチャリストの構築のための復号化プロセス及びデコードされたリファレンスピクチャのマーキングプロセスについて、以下のように導出される。
Figure 2009543462
GOP_lengthは、アンカーピクチャと、それぞれのビューについてアンカーピクチャと前のアンカーピクチャの間に一時的に位置される全てのピクチャとして定義される。
別の実施の形態では、現在のビューと同じview_idを有するピクチャのみが適用されるように、既存のRPLRコマンドのセマンティクスを変化させる。
図5を参照して、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号500により全般的に示される。本方法500は、開始ブロック505を含み、この開始ブロックは、機能ブロック510に制御を移す。機能ブロック510は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック515に移す。機能ブロック515は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック520に移す。判定ブロック520は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック525に移す。さもなければ、制御を終了ブロック599に移す。
判定ブロック525は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック530に移す。さもなければ、制御を機能ブロック545に移す。
機能ブロック530は、インターピクチャについて、リファレンスリストの初期化について、MPEG−4AVCプロセッサによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を機能ブロック532に移す。機能ブロック532は、リファレンスリストを再び順序付けし、制御を機能ブロック535に移す。機能ブロック535は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を判定ブロック540に移す。機能ブロック540は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック525に移す。
機能ブロック545は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック520に移す。
図6を参照して、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法は、参照符号600により全般的に示される。
本方法600は、開始ブロック605を含み、この開始ブロックは、機能ブロック610に制御を移す。機能ブロック610は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック615に移す。機能ブロック615は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック620に移す。判定ブロック620は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック625に移す。さもなければ、制御を終了ブロック699に移す。
判定ブロック625は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック630に移す。さもなければ、制御を機能ブロック645に移す。
機能ブロック630は、インターピクチャについて、最も接近したview_idがリストにおいて先に配置されるように、現在のピクチャと同じ時間でサンプリングされ、オーダリングされる、現在のピクチャのview_idとは異なるview_idをもつピクチャのみをもつリファレンスリストを初期化し、制御を機能ブロック632に移す。機能ブロック632は、リファレンスリストを再び順序付けし、制御を機能ブロック635に移す。機能ブロック635は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を判定ブロック640に移す。機能ブロック640は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック625に移す。
機能ブロック645は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック620に移す。
図7を参照して、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する更に別の例示的な方法は、参照符号700により全般的に示される。
本方法700は、開始ブロック705を含み、この開始ブロックは、機能ブロック710に制御を移す。機能ブロック710は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック715に移す。機能ブロック715は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック720に移す。判定ブロック720は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック725に移す。さもなければ、制御を終了ブロック799に移す。
判定ブロック725は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック730に移す。さもなければ、制御を機能ブロック745に移す。
機能ブロック730は、リファレンスリストの初期化について、MPEG−4AVCプロセッサによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を機能ブロック732に移す。機能ブロック732は、現在のピクチャと同じ時間的な位置をもつクロスビューピクチャをリファレンスリストの終わりに挿入し、制御を機能ブロック735に移す。機能ブロック735は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を機能ブロック740に移す。機能ブロック740は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック725に移す。
機能ブロック745は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック720に移す。
図8を参照して、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号800により全般的に示される。本方法800は、開始ブロック805を含み、この開始ブロックは、機能ブロック810に制御を移す。機能ブロック810は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック815に移す。機能ブロック815は、リファレンスリストの初期化について、MPEG−4AVCプロセスによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を判定ブロック820に移す。判定ブロック820は、現在のピクチャをデコードして、制御を機能ブロック825に移す。機能ブロック825は、デコードされたピクチャバッファに現在のピクチャを挿入し、制御を判定ブロック830に移す。判定ブロック830は、全てのピクチャがデコードされたか否かを判定する。デコードされている場合、制御を終了ブロック899に移す。さもなければ、制御を機能ブロック810に移す。
図9は、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法は、参照符号900により全般的に示される。本方法900は、開始ブロック905を含み、この開始ブロックは、制御を機能ブロック910に移す。機能ブロック910は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック915に移す。機能ブロック915は、最も接近したview_idがリストにおいて先に配置されるように、現在のピクチャと同じ時間でサンプリングされ、オーダリングされる、現在のピクチャのview_idとは異なるview_idをもつピクチャのみでリファレンスリストを初期化し、制御を判定ブロック920に移す。機能ブロック920は、現在のピクチャをデコードして、制御を機能ブロック925に移す。機能ブロック925は、デコードされたピクチャバッファ(DPB)に現在のピクチャを挿入し、制御を判定ブロック930に移す。判定ブロック930は、全てのピクチャがデコードされたか否かを判定する。デコードされた場合、制御を終了ブロック999に移す。さもなければ、制御を機能ブロック910に移す。
図10を参照して、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する更に別の例示的な方法は、参照符号1000により全般的に示される。本方法1000は、開始ブロック1005を含み、この開始ブロックは、制御を機能ブロック1010に移す。機能ブロック1010は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック1015に移す。機能ブロック1015は、リファレンスリストの初期化について、MPEG−4AVCプロセスによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を判定ブロック1020に移す。機能ブロック1020は、現在のピクチャと同じ時間的な位置をもつクロスビューピクチャをリファレンスリストの終わりに挿入し、制御を機能ブロック1025に移す。機能ブロック1025は、現在のピクチャをデコードされたピクチャバッファに挿入し、制御を判定ブロック1030に移す。判定ブロック1030は、全てのピクチャがデコードされたかを判定する。デコードされている場合、制御を終了ブロック1099に移す。さもなければ、制御を機能ブロック1010に移す。
図17を参照して、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号1700により全般的に示される。
本方法1700は、開始ブロック1705を含み、この開始ブロックは、機能ブロック1710に制御を移す。機能ブロック1710は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック1715に移す。機能ブロック1715は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック1720に移す。判定ブロック1720は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック1725に移す。さもなければ、制御を終了ブロック1799に移す。
判定ブロック1725は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック1730に移す。さもなければ、制御を機能ブロック1745に移す。
機能ブロック1730は、frame_num=frame_num*N+view_idを設定し、PicOrderCnt(picX)=PicOrderCnt(picX)*N+view_idを設定し、制御を機能ブロック1735に移す。機能ブロック1735は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を機能ブロック1740に移す。機能ブロック1740は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック1725に移す。
機能ブロック1745は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック1720に移す。
図18を参照して、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法は、参照符号1800により全般的に示される。
本方法1800は、開始ブロック1805を含み、この開始ブロックは、制御を機能ブロック1810に移す。機能ブロック1810は、エンコーダのコンフィギュレーションファイルを読取る。機能ブロック1815は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック1820に移す。判定ブロック1820は、iがN未満であるか否かを判定する。N未満である場合、制御を判定ブロック1825に移す。さもなければ、制御を終了ブロック1899に移す。
判定ブロック1825は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック1830に移す。さもなければ、制御を機能ブロック1845に移す。
機能ブロック1830は、frame_num = GOP_length*view_id+frame_numを設定し、PicOrderCnt(picX) = PicOrderCnt(PicX) + GOP_length*view_idを設定し、制御を機能ブロック1835に移す。機能ブロック1835は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を機能ブロック1840に移す。機能ブロック1840は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック1825に移す。
機能ブロック1845は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック1820に移す。
図19を参照して、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号1900により全般的に示される。
本方法1900は、開始ブロック1905を含み、この開始ブロックは、制御を機能ブロック1910に移す。機能ブロック1910は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック1915に移す。機能ブロック1915は、frame_num=frame_num*N+view_idを設定し、PicOrderCnt(picX) = PicOrderCnt(picX)*N + view_idを設定し、制御を機能ブロック1920に移す。機能ブロック1920は、現在のピクチャをデコードし、制御を機能ブロック1925に移す。機能ブロック1925は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を判定ブロック1930に移す。判定ブロック1930は、全てのピクチャがデコードされたかを判定する。デコードされている場合、制御を終了ブロック1999に移す。さもなければ、制御を機能ブロック1910に移す。
図20を参照して、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法は、参照符号2000により全般的に示される。本方法2000は、開始ブロック2005を含み、この開始ブロックは、制御を機能ブロック2010に移す。機能ブロック2010は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック2015に移す。機能ブロック2015は、frame_num = GOP_length*view_id_frame_numを設定し、PicOrderCnt(picX) = PicOrderCnt(picX) + GOP_length*view_idを設定し、制御を機能ブロック2020に移す。機能ブロック2020は、現在のピクチャをデコードし、制御を機能ブロック2025に移す。機能ブロック2025は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を判定ブロック2030に移す。判定ブロック2030は、全てのピクチャがデコードされたかを判定する。デコードされている場合、制御を終了ブロック2099に移す。さもなければ、制御を機能ブロック2010に移す。
図21を参照して、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの初期化を使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号2100により全般的に示される。
本方法2100は、開始ブロック2105を含み、この開始ブロックは、制御を機能ブロック2110に移す。機能ブロック2110は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック2115に移す。機能ブロック2115は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック2120に移す。判定ブロック2120は、iがN未満であるか否かを判定する。N未満である場合、制御を機能ブロック2125に移す。さもなければ、制御を終了ブロック2199に移す。
機能ブロック2125は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック2130に移す。さもなければ、制御を機能ブロック2145に移す。
機能ブロック2130は、インターピクチャについて、デフォルトリファレンスリストの初期化を実行し、制御を機能ブロック2132に移す。機能ブロック2132は、エンコーダのコンフィギュレーションファイルからRPLRコマンドを読取り、制御を機能ブロック2134に移す。機能ブロック2134は、現在のピクチャのview_idに等しいview_idをもつピクチャに関してのみRPLRコマンドを実行し、制御を機能ブロック2135に移す。機能ブロック2135は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を機能ブロック2140に移す。機能ブロック2140は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック2130に移す。
機能ブロック2145は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック2120に移す。
図22を参照して、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの初期化を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法は、参照符号2200により全般的に示される。
本方法2200は、開始ブロック2205を含み、この開始ブロックは、制御を機能ブロック2210に移す。機能ブロック2210は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック2215に移す。機能ブロック2215は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック2220に移す。判定ブロック2220は、iがN未満であるか否かを判定する。N未満である場合、制御を機能ブロック2225に移す。さもなければ、制御を終了ブロック2299に移す。
機能ブロック2225は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を機能ブロック2230に移す。さもなければ、制御を機能ブロック2245に移す。
機能ブロック2230は、インターピクチャについて、デフォルトのリファレンスリストの初期化を実行し、制御を機能ブロック2232に移す。機能ブロック2232は、エンコーダのコンフィギュレーションファイルからRPLRコマンドを読取り、制御を機能ブロック2234に移す。機能ブロック2234は、RPLRコマンドで示されるview_idで規定されるピクチャにRPLRコマンドを実行し、制御を機能ブロック2235に移す。機能ブロック2235は、ビューiにおけるピクチャjを符号化し、jをインクリメントし、制御を機能ブロック2240に移す。機能ブロック2240は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック2230に移す。
機能ブロック2245は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック2220に移す。
図23を参照して、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号2300により全般的に示される。
本方法2300は、開始ブロック2305を含み、この開始ブロックは、制御を機能ブロック2310に移す。機能ブロック2310は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック2315に移す。機能ブロック2315は、リファレンスリストの初期化について、MPEG−4AVCプロセスによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を機能ブロック2317に移す。機能ブロック2317は、RPLRコマンドを読取り、制御を機能ブロック2319に移す。機能ブロック2319は、現在のピクチャのview_idに等しいview_idをもつピクチャに関してのみRPLRコマンドを実行し、制御を機能ブロック2320に移す。機能ブロック2320は、現在のピクチャをデコードし、制御を機能ブロック2325に移す。機能ブロック2325は、現在のピクチャをデコードされたピクチャバッファ(DPB)に挿入し、制御を判定ブロック2330に移す。判定ブロック2330は、全てのピクチャがデコードされたかを判定する。デコードされた場合、制御を終了ブロック2399に移す。さもなければ、制御を機能ブロック2310に移す。
図24を参照して、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法は、参照符号2400により全般的に示される。
本方法2400は、開始ブロック2405を含み、この開始ブロックは、制御を機能ブロック2410に移す。機能ブロック2410は、ビットストリーム、view_id、frame_num、及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック2415に移す。機能ブロック2415は、リファレンスリストの初期化について、MPEG−4AVCプロセスによる使用のため、現在のピクチャのview_idに等しいview_idをもつピクチャのみを含み、制御を機能ブロック2417に移す。機能ブロック2417は、RPLRコマンドを読取り、制御を機能ブロック2419に移す。機能ブロック2419は、現在のピクチャのview_idに等しいview_idをもつピクチャに関してのみRPLRコマンドを実行し、制御を機能ブロック2420に移す。機能ブロック2420は、現在のピクチャをデコードし、制御を機能ブロック2425に移す。機能ブロック2425は、現在のピクチャをデコードされたピクチャバッファに挿入し、制御を判定ブロック2430に移す。判定ブロック2430は、全てのピクチャがデコードされたかを判定する。デコードされている場合、制御を終了ブロック2499に移す。さもなければ、制御を機能ブロック2410に移す。
[テンポラルダイレクトモード]
上述されたように、テンポラルダイレクトモードは、ピクチャオーダカウント情報を使用し、所与のマクロブロックについて動きベクトルを導出する。frame_num及び/又はピクチャオーダカウント値を分離し、マルチビューのビデオコンテンツのそれぞれのビューについてview_idを導出し、デコーダピクチャバッファ及びリファレンスリストにおいてクロスビューピクチャを配置することが可能であるので、実施の形態では、クロスビューピクチャが現在のビューとは異なるビューからのピクチャを参照するケースを扱うため、このモードをリファインする。
テンポラルダイレクトモードでは、以下の例示的なケースを有する。
(1)ref list 1におけるピクチャ及びref list 0におけるピクチャは、異なるPOC及び同じview_idを有する。
(2)ref list 1におけるピクチャ及びref list 0におけるピクチャは、異なるPOC及び異なるview_idを有する。
(3)ref list 1におけるピクチャ及びref list 0におけるピクチャは、同じPOC及び異なるview_idを有する。
(4)ref list 1におけるピクチャ及びref list 0におけるピクチャは、同じPOC及び同じview_idを有する。
テンポラルダイレクトモードにおいて動きベクトルを取得する1実施の形態は、ビットストリームに存在するview_id情報をシンプルに無視する既存のMPEG−4AVC方法を使用することである。別の実施の形態では、ピクチャオーダカウント情報と共にview_idを考慮するため、テンポラルダイレクトモードをリファインする。
[暗黙の重み予測]
テンポラルダイレクトモードと同様に、(上述された)暗黙の重み付け予測は、ピクチャオーダカウント値を使用して、リファレンスピクチャに与えられる重みを決定する。結果として、実施の形態では、テンポラルダイレクトモードに適用される全ての変形は、暗黙の重み付けされた予測モードを間接的に固定する。別の実施の形態では、暗黙の重み付けされた予測モードにおける重みを取得する方法は、ピクチャオーダカウント情報と共にview_id情報を考慮するために再定義される。たとえば、上述のようにview_id情報とビューの数を考慮することで、ピクチャオーダカウントを計算し、その後、必要とされる値を取得して暗黙の重み付け予測を実行するため、ピクチャオーダカウント間の差を取る場合がある。
図11を参照して、テンポラルダイレクトモード及び暗黙の重み付けされた予測を使用した、マルチビュービデオコンテンツを符号化する例示的な方法は、参照符号1100により全般的に示される。
本方法1100は、開始ブロック1105を含み、この開始ブロックは、制御を機能ブロック1110に移す。機能ブロック1110は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック1115に移す。機能ブロック1115は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック1120に移す。判定ブロック1120は、iがN未満であるか否かを判定する。N未満である場合、制御を機能ブロック1125に移す。さもなければ、制御を終了ブロック1199に移す。
機能ブロック1125は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を判定ブロック1132に移す。さもなければ、制御を機能ブロック1145に移す。
判定ブロック1132は、重み付け予測が現在のスライスについてイネーブルにされたか否かを判定する。イネーブルにされた場合、制御を機能ブロック1134に移す。さもなければ、制御を機能ブロック1136に移す。
機能ブロック1134は、重み付け予測についてview_idを無視し、制御を機能ブロック1136に移す。
機能ブロック1136は、現在のマクロブックの符号化を開始し、制御を判定ブロック1138に移す。判定ブロック1138は、マクロブロックについてダイレクトモードを選択するか否かを判定する。ダイレクトモードを選択する場合、制御を機能ブロック1142に移す。さもなければ、制御を機能ブロック1152に移す。機能ブロック1142は、ダイレクトモードについてview_idを無視し、制御を機能ブロック1152に移す。機能ブロック1152は、現在のマクロブロックを符号化し、制御を判定ブロック1154に移す。判定ブロック1154は、全てのマクロブロックがエンコードされたか否かを判定する。エンコードされた場合、制御を機能ブロック1156に移す。さもなければ、制御を機能ブロック1136に戻す。
機能ブロック1156は、変数jをインクリメントし、制御を機能ブロック1140に移す。機能ブロック1140は、frame_num及びピクチャオーダカウント(POC)をインクリメントし、制御を判定ブロック1125に移す。
機能ブロック1145は、iをインクリメントし、frame_num及びピクチャオーダカウント(POC)をリセットし、制御を判定ブロック1120に移す。
図12を参照して、テンポラルダイレクトモード及び暗黙の重み付け予測を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法は、参照符号1200により全般的に示される。
本方法100は、開始ブロック1205を含み、この開始ブロックは、制御を機能ブロック1210に移す。機能ブロック1210は、エンコーダのコンフィギュレーションファイルを読取り、制御を機能ブロック1215に移す。機能ブロック1215は、ビューの番号を変数Nに等しくし、変数i(ビューナンバーインデックス)及びj(ピクチャナンバーインデックス)の両者をゼロに等しく設定し、制御を判定ブロック1220に移す。判定ブロック1220は、iがN未満であるか否かを判定する。N未満である場合、制御を機能ブロック1225に移す。さもなければ、制御を終了ブロック1299に移す。
機能ブロック1225は、jがビューiにおけるピクチャの数未満であるか否かを判定する。ピクチャの数未満である場合、制御を判定ブロック1232に移す。さもなければ、制御を機能ブロック1245に移す。
判定ブロック1232は、重み付け予測が現在のスライスについてイネーブルにされたか否かを判定する。イネーブルにされた場合、制御を機能ブロック1234に移す。さもなければ、制御を機能ブロック1236に移す。
機能ブロック1234は、重み付け予測についてview_idを無視し、制御を機能ブロック1236に移す。
機能ブロック1236は、現在のマクロブックの符号化を開始し、制御を判定ブロック1238に移す。判定ブロック1238は、マクロブロックについてダイレクトモードを選択するか否かを判定する。ダイレクトモードを選択する場合、制御を機能ブロック1242に移す。さもなければ、制御を機能ブロック1252に移す。機能ブロック1242は、ダイレクトモードについてview_idを無視し、制御を機能ブロック1252に移す。
機能ブロック1252は、現在のマクロブロックを符号化し、制御を判定ブロック1254に移す。判定ブロック1254は、全てのマクロブロックがエンコードされたか否かを判定する。エンコードされた場合、制御を機能ブロック1256に移す。さもなければ、制御を機能ブロック1236に戻す。
機能ブロック1256は、変数jをインクリメントし、制御を機能ブロック1240に移す。機能ブロック1240は、frame_num及びピクチャオーダカウントをインクリメントし、制御を判定ブロック1225に移す。
機能ブロック1245は、iをインクリメントし、frame_num及びピクチャオーダカウントをリセットし、制御を判定ブロック1220に移す。
図13を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法は、参照符号1300により全般的に示される。
本方法1300は、開始ブロック1305を含み、この開始ブロックは、制御を機能ブロック1310に移す。機能ブロック1310は、ビットストリーム、view_id、frame_num及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック1315に移す。機能ブロック1315は、マクロブロックモード、動きベクトル、ref_idxを分析し、制御を判定ブロック1320に移す。判定ブロック1320は、重み付け予測がピクチャについてイネーブルにされたか否かを判定する。イネーブルにされた場合、制御を機能ブロック1325に移す。さもなければ、制御を判定ブロック1330に移す。
機能ブロック1325は、重み付け予測についてview_id情報を無視し、制御を判定ブロック1330に移す。
判定ブロック1330は、マクロブロックがダイレクトモードのマクロブロックであるか否かを判定する。ダイレクトモードのマクロブックである場合、制御を機能ブロック1355に移す。さもなければ、制御を機能ブロック1335に移す。
機能ブロック1355は、ダイレクトモードについてview_id情報を無視し、制御を機能ブロック1335に移す。
機能ブロック1335は、現在のマクロブロックをデコードし、制御を判定ブロック1340に移す。判定ブロック1340は、全てのマクロブロックがデコードされたか否かを判定する。デコードされた場合、制御を機能ブロック1345に移す。さもなければ、制御を機能ブロック1315に戻す。
機能ブロック1345は、現在のピクチャをデコードされたピクチャのバッファに挿入し、制御を判定ブロック1350に移す。判定ブロック1350は、全てのピクチャがデコードされているか否かを判定する。デコードされている場合、制御を終了ブロック1399に移す。さもなければ、制御を機能ブロック1310に戻す。
図14を参照して、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法は、参照符号1400により全般的に示される。
本方法1400は、開始ブロック1405を含み、この開始ブロックは、制御を機能ブロック1410に移す。機能ブロック1410は、ビットストリーム、view_id、frame_num及びピクチャオーダカウント(POC)を分析し、制御を機能ブロック1415に移す。機能ブロック1415は、マクロブロックモード、動きベクトル、ref_idxを分析し、制御を判定ブロック1420に移す。判定ブロック1420は、重み付け予測がピクチャについてイネーブルにされたか否かを判定する。イネーブルにされた場合、制御を機能ブロック1425に移す。さもなければ、制御を判定ブロック1430に移す。
機能ブロック1425は、重み付け予測についてview_id情報を無視し、制御を判定ブロック1430に移す。
判定ブロック1430は、マクロブロックがダイレクトモードのマクロブロックであるか否かを判定する。ダイレクトモードのマクロブックである場合、制御を機能ブロック1455に移す。さもなければ、制御を機能ブロック1435に移す。
機能ブロック1455は、ダイレクトモードについてview_id情報を考慮し、制御を機能ブロック1435に移す。
機能ブロック1435は、現在のマクロブロックをデコードし、制御を判定ブロック1440に移す。判定ブロック1440は、全てのマクロブロックがデコードされたか否かを判定する。デコードされた場合、制御を機能ブロック1445に移す。さもなければ、制御を機能ブロック1415に戻す。
機能ブロック1445は、現在のピクチャをデコードされたピクチャのバッファに挿入し、制御を判定ブロック1450に移す。判定ブロック1450は、全てのピクチャがデコードされているか否かを判定する。デコードされている場合、制御を終了ブロック1499に移す。さもなければ、制御を機能ブロック1410に戻す。
[MVCの並列符号化]
マルチビュービデオコンテンツ系列の処理に含まれるデータ量のため、マルチビュービデオコーディングにおける並列の符号化/復号化のサポートは、多くの用途、特にリアルタイムの制約にとって非常に重要である。マルチビュービデオコーディングの現在のMPEG−4AVCに準拠した実現では、クロスビュー予測がイネーブルにされるが、クロスビューリファレンスからテンポラルリファレンスを区別する手段がない。View_idサポートをマルチビュービデオコーディングのエンコーダ及び/又はデコーダに追加し、本実施の形態で提案したデコードされたリファレンスピクチャのマネージメントの構築及びリファレンスリストの構築にview_idを含めることで、並列処理のエンジン間のデータ依存性が明らかに定義され、これにより、MVCコーデックについて並列の実現が容易となる。
ここで、先に本発明の多くの付随する利点/特徴の幾つかに関する説明が与えられ、そのうちの幾つかは先に記載された。たとえば、1つの利点/特徴は、ビットストリームから、ビューのマルチビュービデオコンテンツの少なくとも2つのうちの少なくとも1つに対応する少なくとも1つのピクチャを復号化するデコーダを含む装置であり、ビットストリームでは、少なくとも1つのピクチャの符号化順序情報及び出力順序情報のうちの少なくとも1つは、少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される。
別の利点/特徴は、上述されたデコーダを有する装置であり、デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する少なくとも1つの既存のシンタックスエレメント(frame_num及びpic_order_cnt_lsb)を使用した、少なくとも1つのピクチャの符号化順序情報と出力順序情報のうちの少なくとも1つを分離の存在を判定する。
更に別の利点/特徴は、上述されたようなデコーダを有する装置であり、デコーダは、ビュー識別子を使用して、少なくとも1つのピクチャの符号化順序情報と出力順序情報の少なくとも1つの分離の存在を判定する。
更に別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、ビュー識別子は、ビットストリームにおけるスライスレベルに存在する。
更なる利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、ビュー識別子は、ビットストリームにおけるマクロブロックレベルよりも高いレベルに存在する。
さらに、別の利点/特徴は、上述されたように、マクロブロックのレベルよりも上位のレベルにあるビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、デコードされたリファレンスピクチャのマーキングプロセスによる使用のため、ビットストリームからのビュー識別子を分析する。
さらに、別の利点/特徴は、上述されたように、ビットストリームからのビュー識別子を分析するデコーダを有する装置であって、デコーダは、少なくとも2つのビューのどちらに、デコードされたリファレンスピクチャのマーキングプロセスによりマークされるべき特定のピクチャが属するかを判定するため、ビットストリームからのビュー識別子を分析する。
また、別の利点/特徴は、上述されたように、マクロブロックのレベルよりも上位のレベルにあるビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であって、デコーダは、再定義されたデコードされたリファレンスピクチャのマーキングプロセスにおいてビュー識別子の使用をサポートするため、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたデコードされたリファレンスピクチャのマーキングプロセスでの使用向けに再定義される少なくとも1つの既存のシンタックスエレメントのセマンティクスをもつ、少なくとも1つの既存のシンタックスエレメント(no_output_of_prior_pics_flag, long_term_reference_flag, adaptive_ref_pic_marking_mode_flag, memory_management_control_operation, difference_of_pic_nums_minus1, long_term_pic_num, long_term_frame_idx, max_long_term_frame_idx_plus1)を使用する。
さらに、別の利点/特徴は、上述されたように、少なくとも1つの既存のシンタックスエレメントを使用するデコーダを有する装置であり、再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、現在のデコードされたピクチャと同じビュー識別子をもつピクチャのみがマークされる。
さらに、別の利点/特徴は、上述されたように、少なくとも1つの既存のシンタックスエレメントを使用するデコーダを有する装置であり、スライディングウィンドウのデコードされたリファレンスピクチャのマーキングプロセス及び適応メモリ制御によるデコードされたリファレンスピクチャのマーキングプロセスの少なくとも1つが適用される。
さらに、別の利点/特徴は、上述されたように、少なくとも1つの既存のシンタックスエレメントを使用するデコーダを有する装置であり、再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、少なくとも1つのピクチャとは異なるビュー識別子を有するピクチャは、以前に使用されていないシンタックスエレメント(difference_of_view_ids_minus1)を使用してマークされる。
また、別の利点/特徴は、上述されたように、マクロブロックのレベルよりも上位のレベルにあるビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、デフォルトのリファレンスピクチャリストの構築について、ビットストリームからのビュー識別子を分析する。
さらに、別の利点/特徴は、上述されたように、ビットストリームからのビュー識別子を分析するデコーダを有する装置であり、インタービューリファレンスピクチャは、リファレンスピクチャリストの構築のために少なくとも1つの既存のシンタックスエレメント(frame_num及びpic_order_cnt_lsb)に従って、リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのために、リファレンスリストに追加されるのを禁止される。
さらに、別の利点/特徴は、上述されたように、ビットストリームからのビュー識別子を分析するデコーダを有する装置であり、インタービューリファレンスピクチャのみが、デフォルトのリファレンスピクチャリストの構築のための少なくとも1つの既存のシンタックスエレメント(frame_num及びpic_order_cnt_lsb)に従って、リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのためにリファレンスリストに追加される。
さらに、別の利点/特徴は、デコーダを有する装置であり、インタービューリファレンスピクチャのみが、上述されたように、デフォルトのリファレンスピクチャリストの作成プロセスについてリファレンスリストに追加され、インタービューリファレンスピクチャは、テンポラルリファレンスの後に追加される。
また、別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、再定義されたリファレンスピクチャリストのリオーダリングプロセスにおけるビュー識別子の使用をサポートするため、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたリファレンスピクチャリストのリオーダリングプロセスにおける使用向けに定義される、少なくとも1つの既存のシンタックスエレメント(ref_pic_list_reordering_flag_l0, reordering_of_pic_nums_idc, abs_diff_pic_num_minus1, long_term_pic_num, ref_pic_list_reordering_flag_l1, reordering_of_pic_nums_idc, abs_diff_pic_num_minus1, long_term_pic_num)を使用する。
さらに、別の利点/特徴は、上述されたように、少なくとも1つの既存のシンタックスエレメントを使用するデコーダを有する装置であり、再定義されたリファレンスピクチャリストのリオーダリングプロセスでは、現在デコードされたピクチャと同じビュー識別子をもつピクチャのみが再び順序付けされる。
さらに、別の利点/特徴は、デコーダを有する装置であり、再定義されたリファレンスピクチャリストのリオーダリングプロセスにおいて、上述されたように、現在デコードされたピクチャと同じビュー識別子をもつピクチャのみが再び順序付けされる。再定義されたリファレンスピクチャリストのリオーダリングプロセスにおいて、ビュー識別子は、少なくとも2つのビューのうちのどちらが、対応するリファレンスピクチャリストにおける現在のインデックスに移動されるべき特定のピクチャに対応するかを示す。
さらに、別の利点/特徴は、デコーダを有する装置であって、上述されたように、再定義されたリファレンスピクチャリストのリオーダリングプロセスにおいて、現在デコードされたピクチャと同じビュー識別子をもつピクチャのみが再び順序付けされる。再定義されたリファレンスピクチャリストのリオーダリングプロセスにおいて、ビュー識別子は、オーダリングされるべきリファレンスピクチャのビュー識別子が少なくとも1つのピクチャのビュー識別子と異なるときにのみ必要とされる。
また、別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、テンポラルダイレクトモードにおけるビュー識別子の使用をサポートするため、テンポラルダイレクトモードについて再定義される既存のシンタックスエレメント(pic_order_cnt_lsb)、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用する。
さらに、別の利点/特徴は、上述されたように、既存のシンタックスエレメントを使用するデコーダを有する装置であり、テンポラルダイレクトモードは、ピクチャオーダカウント及びビュー識別子のうちの1つに基づいて導出される。
さらに、別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、既存のシンタックスエレメント(pic_order_cnt_lsb)、既存のセマンティクス、及びテンポラルダイレクトモードのための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する。
さらに、別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、暗黙の重み予測について再定義された既存のシンタックスエレメント(pic_order_cnt_lsb)、暗黙の重み予測においてビュー識別子の使用をサポートするため、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用する。
また、別の利点/特徴は、上述されたように、既存のシンタックスエレメントを使用するデコーダを有する装置であり、暗黙の重み予測は、ピクチャオーダカウント値とビュー識別子の少なくとも1つに基づいて導出される。
さらに、別の利点/特徴は、上述されたように、ビュー識別子を使用して、分離の存在を判定するデコーダを有する装置であり、デコーダは、既存のシンタックスエレメント(pic_order_cnt_lsb)、既存のセマンティクス、及び暗黙の重み予測のための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する。
さらに、別の利点/特徴は、上述されたようなデコーダを有する装置であり、デコーダは、特定のピクチャに対応する少なくとも2つのビューのうちの特定の1つを使用して、少なくとも2つのビューのうちの異なるビューの並列な復号化におけるビュー間の依存度を判定する。
さらに別の利点/特徴は、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダを有する装置である。デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応するデフォルトのリファレンスピクチャリストの構築プロセス及びリファレンスピクチャリストの再順序付けにおける再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
さらに、別の利点/特徴は、上述されたデコーダを有する装置であり、変数を再定義するためにビューの数及びビュー識別情報のうちの少なくとも1つが使用される。
さらに、別の利点/特徴は、上述されたようなデコーダを有する装置であり、変数を再定義するためにグループオブピクチャのレングス及びビュー識別情報のうちの少なくとも1つが使用される。
さらに別の利点/特徴は、マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダを有する装置である。デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおいて再定義された変数を使用して、少なくとも2つのビューのうちの少なくとも1つを復号化する。
さらに、別の利点/特徴は、上述されたデコーダを有する装置であり、ビューの数及びビュー識別情報の少なくとも1つは、変数を再定義するために使用される。
さらに、別の利点/特徴は、上述されたデコーダを有する装置であり、グループオブピクチャのレングス及びビュー識別情報のうちの少なくとも1つは、変数を再定義するために使用される。
なお、特定のシンタックスの名前、特に、本発明の原理の様々な本発明の態様に関して記載された以前に使用されていないシンタックス名の選択は、例示及び明確化のためであって、本明細書で提供された本発明の原理の教示が与えられると、他の名前及び/又は文字等は、本発明の原理に精神を維持しつつ、本明細書で提供されたシンタックス名の代わりに、該シンタックス名に加えて使用される場合があることを理解されたい。
本発明の原理のこれらの特徴及び利点、並びに他の特徴及び利点は、本明細書での教示に基づいて当業者により容易に確認される。なお、本発明の原理の教示は、ハードウェア、ソフトウェア、ファームウェア、特定用途向けプロセッサ又はその組み合わせからなる様々な形式で実現される場合があることを理解されたい。
最も好適には、本発明の原理の教示は、ハードウェア及びソフトウェアの組み合わせとして実現される。さらに、ソフトウェアは、プログラムストレージユニットで実施されるアプリケーションプログラムとして実現される。アプリケーションプログラムは、任意の適切なアーキテクチャを有するコンピュータにアップロードされるか、該コンピュータにより実行される場合がある。好ましくは、コンピュータは、1以上の中央処理装置(CPU)、ランダムアクセスメモリ(RAM)、及び入力/出力(I/O)インタフェースのようなハードウェアを有するコンピュータプラットフォームで実現される。また、コンピュータプラットフォームは、オペレーティングシステム及びマイクロ命令コードを含む。本明細書で記載された様々な処理及び機能は、CPUにより実行される場合がある、マイクロ命令コードの一部又はアプリケーションプログラムの一部、或いはその組み合わせである。さらに、様々な他の周辺ユニットは、更なるデータストレージユニット及びプリンティングユニットのようなコンピュータプラットフォームに接続される場合がある。
添付図面に示されるシステム構成要素又は方法の幾つかはソフトウェアで実現されることが好ましいが、システム構成要素又はプロセス機能ブロック間の実際の接続は、本発明の原理がプログラムされるやり方に依存して異なる場合がある。本明細書での教示が与えられると、当業者であれば、本発明の原理のこれらの実現又はコンフィギュレーション、並びに類似の実現又はコンフィギュレーションを考案することができる。
例示的な実施の形態は添付図面を参照して本明細書で記載されたが、本発明の原理は、これら正確な実施の形態に限定されるものではなく、様々な変形及び変更は、本発明の原理の範囲又は精神から逸脱することなしに、当業者により実施される場合があることを理解されたい。全ての係る変形及び変更は、特許請求の範囲で述べたように、本発明の原理の範囲に含まれることが意図される。
Bスライスの符号化におけるテンポラルダイレクト予測を例示する図である。 本発明の実施の形態に係る、本発明の原理が適用される場合がある、例示的なマルチビュービデオコーディング(MVC)のブロック図である。 本発明の実施の形態に係る、本発明の原理が適用される場合がある、例示的なマルチビュービデオコーディング(MVC)のブロック図である。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを符号化する更に別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する更に別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、テンポラルダイレクトモード及び暗黙の重み予測を使用してマルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、テンポラルダイレクトモード及び暗黙の重み予測を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたデコードされたリファレンスピクチャのマーキングを使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、変更されたリファレンスピクチャリストの構築及びフレームナンバーの計算を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの初期化を使用した、マルチビュービデオコンテンツを符号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの初期化を使用した、マルチビュービデオコンテンツを符号化する別の例示的な方法のフローチャートである。 本発明の実施の形態に係る、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する例示的な方法のフローチャートである。 本発明の実施の形態に係る、RPLR(Reference Picture List Reordering)コマンドによる変更されたリファレンスピクチャリストの構築を使用した、マルチビュービデオコンテンツを復号化する別の例示的な方法のフローチャートである。

Claims (64)

  1. ビットストリームからのマルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも1つのピクチャを復号化するデコーダを有する装置であって、
    前記ビットストリームでは、前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つは、前記少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される、
    ことを特徴とする装置。
  2. 前記デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する少なくとも1つの既存のシンタックスエレメントを使用して、前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つの分離の存在を判定する、
    請求項1記載の装置。
  3. 前記デコーダは、ビュー識別子を使用して前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つの分離の存在を判定する、
    請求項1記載の装置。
  4. 前記ビュー識別子は、前記ビットストリームにおけるスライスレベルに存在する、
    請求項3記載の装置。
  5. 前記ビュー識別子は、前記ビットストリームにおけるマクロブロックよりも高いレベルに存在する、
    請求項3記載の装置。
  6. 前記デコーダは、デコードされたリファレンスピクチャのマーキングプロセスによる使用のために、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項5記載の装置。
  7. 前記デコーダは、前記デコードされたリファレンスピクチャのマーキングプロセスによりマークされるべき特定のピクチャが前記少なくとも2つのビューのうちのどちらに属するかを判定するため、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項6記載の装置。
  8. 前記デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたデコードされたリファレンスピクチャのマーキングプロセスでの使用のために再定義される少なくとも1つの既存のシンタックスエレメントの意味をもつ少なくとも1つの既存のシンタックスエレメントを使用して、前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスにおける前記ビュー識別子の使用をサポートする、
    請求項5記載の装置。
  9. 前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、現在デコードされているピクチャと同じビュー識別子をもつピクチャのみがマークされる、
    請求項8記載の装置。
  10. スライディングウィンドウによるデコードされたリファレンスピクチャのマーキングプロセス及び適応メモリ制御によるデコードされたリファレンスピクチャのマーキングプロセスの少なくとも1つが利用される、
    請求項8記載の装置。
  11. 前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、前記少なくとも1つのピクチャのビュー識別子とは異なるビュー識別子を有するピクチャは、以前に使用されていないシンタックスエレメントを使用してマークされる、
    請求項8記載の装置。
  12. 前記デコーダは、デフォルトのリファレンスピクチャリストの構築のために、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項5記載の装置。
  13. インタービューリファレンスピクチャは、リファレンスピクチャリストの構築のための少なくとも1つの既存のシンタックスエレメントに従って、前記リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのためにリファレンスリストに追加されるのを禁止される、
    請求項12記載の装置。
  14. 前記デフォルトのリファレンスピクチャリストの構築のための少なくとも1つの既存のシンタックスエレメントに従って、前記リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのためのリファレンスリストに、インタービューリファレンスピクチャのみが追加される、
    請求項12記載の装置。
  15. インタービューリファレンスピクチャは、テンポラルリファレンスの後に追加される、
    請求項14記載の装置。
  16. 前記デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたリファレンスピクチャリストのリオーダリングプロセスにおける使用のために再定義される少なくとも1つの既存のシンタックスエレメントを使用して、前記再定義されたリファレンスピクチャリストのリオーダリングプロセスにおける前記ビュー識別子の使用をサポートする、
    請求項3記載の装置。
  17. 前記再定義されたリファレンスピクチャリストのリオーダリングプロセスでは、現在復号化されたピクチャと同じビュー識別子をもつピクチャのみが再び順序付けされる、
    請求項16記載の装置。
  18. 前記ビュー識別子は、前記少なくとも2つのビューのうちのどちらが、対応するリファレンスピクチャリストにおける現在のインデックスに移動されるべき特定のピクチャに対応するかを示す、
    請求項17記載の装置。
  19. 前記ビュー識別子は、順序付けされるべきリファレンスピクチャのビュー識別子が前記少なくとも1つのピクチャのビュー識別子と異なるときにのみ必要とされる、
    請求項17記載の装置。
  20. 前記デコーダは、テンポラルダイレクトモードについて再定義される既存のシンタックスエレメント、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用して、テンポラルダイレクトモードにおけるビュー識別子の使用をサポートする、
    請求項3記載の装置。
  21. 前記テンポラルダイレクトモードは、ピクチャオーダカウント値及びビュー識別子の少なくとも1つに基づいて導出される、
    請求項20記載の装置。
  22. 前記デコーダは、既存のシンタックスエレメント、既存のセマンティクス、及びテンポラルダイレクトモードのための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する、
    請求項3記載の装置。
  23. 前記デコーダは、暗黙の重み付け予測のために再定義された既存のシンタックスエレメント、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用して、暗黙の重み予測における前記ビュー識別子の使用をサポートする、
    請求項3記載の装置。
  24. 前記暗黙の重み付け予測は、ピクチャオーダカウント値とビュー識別子の少なくとも1つに基づいて導出される、
    請求項23記載の装置。
  25. 前記デコーダは、既存のシンタックスエレメント、既存のセマンティクス、及び、暗黙の重み付け予測のための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する、
    請求項3記載の装置。
  26. 前記デコーダは、特定のピクチャに対応する少なくとも2つのビューのうちの特定のビューを使用して、前記少なくとも2つのビューのうちの異なるビューの並列の復号化におけるビュー間の依存度を判定する、
    請求項1記載の装置。
  27. ビットストリームからのマルチビュービデオコンテンツの少なくとも2つのビューのうちの少なくとも1つに対応する少なくとも1つのピクチャを復号化するステップを含む方法であって、
    前記ビットストリームでは、前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つは、前記少なくとも1つのピクチャが対応する少なくとも1つのビューから分離される、
    ことを特徴とする方法。
  28. 前記復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する少なくとも1つの既存のシンタックスエレメントを使用して、前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つの分離の存在を判定する、
    請求項27記載の方法。
  29. 前記復号化するステップは、ビュー識別子を使用して前記少なくとも1つのピクチャの符号化順序の情報と出力順序の情報の少なくとも1つの分離の存在を判定する、
    請求項27記載の方法。
  30. 前記ビュー識別子は、前記ビットストリームにおけるスライスレベルに存在する、
    請求項29記載の方法。
  31. 前記ビュー識別子は、前記ビットストリームにおけるマクロブロックよりも高いレベルに存在する、
    請求項29記載の方法。
  32. 前記復号化するステップは、デコードされたリファレンスピクチャのマーキングプロセスによる使用のために、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項31記載の方法。
  33. 前記復号化するステップは、前記デコードされたリファレンスピクチャのマーキングプロセスによりマークされるべき特定のピクチャが前記少なくとも2つのビューのうちのどちらに属するかを判定するため、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項32記載の方法。
  34. 前記復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたデコードされたリファレンスピクチャのマーキングプロセスでの使用のために再定義される少なくとも1つの既存のシンタックスエレメントの意味をもつ少なくとも1つの既存のシンタックスエレメントを使用して、前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスにおける前記ビュー識別子の使用をサポートする、
    請求項29記載の方法。
  35. 前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、現在デコードされたピクチャと同じビュー識別子をもつピクチャのみがマークされる、
    請求項34記載の方法。
  36. スライディングウィンドウによるデコードされたリファレンスピクチャのマーキングプロセス及び適応メモリ制御によるデコードされたリファレンスピクチャのマーキングプロセスの少なくとも1つが利用される、
    請求項34記載の方法。
  37. 前記再定義されたデコードされたリファレンスピクチャのマーキングプロセスでは、前記少なくとも1つのピクチャのビュー識別子とは異なるビュー識別子を有するピクチャは、以前に使用されていないシンタックスエレメントを使用してマークされる、
    請求項34記載の方法。
  38. 前記復号化するステップは、デフォルトのリファレンスピクチャリストの構築のために、前記ビットストリームからの前記ビュー識別子を分析する、
    請求項31記載の方法。
  39. インタービューリファレンスピクチャは、前記リファレンスピクチャリストの構築のための少なくとも1つの既存のシンタックスエレメントに従って、前記リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのためにリファレンスリストに追加されるのを禁止される、
    請求項38記載の方法。
  40. 前記デフォルトのリファレンスピクチャリストの構築のための少なくとも1つの既存のシンタックスエレメントに従って、前記リファレンスピクチャリストの構築に対応するデフォルトのリファレンスピクチャリストの作成プロセスのため、インタービューリファレンスピクチャのみがリファレンスリストに追加される、
    請求項38記載の方法。
  41. 前記インタービューリファレンスピクチャは、テンポラルリファレンスの後に追加される、
    請求項40記載の方法。
  42. 前記復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する再定義されたリファレンスピクチャリストのリオーダリングプロセスにおける使用のために再定義される少なくとも1つの既存のシンタックスエレメントを使用して、前記再定義されたリファレンスピクチャリストのリオーダリングプロセスにおける前記ビュー識別子の使用をサポートする、
    請求項29記載の方法。
  43. 前記再定義されたリファレンスピクチャリストのリオーダリングプロセスでは、現在復号化されたピクチャと同じビュー識別子をもつピクチャのみが再び順序付けされる、
    請求項42記載の方法。
  44. 前記ビュー識別子は、前記少なくとも2つのビューのうちのどちらが、対応するリファレンスピクチャリストにおける現在のインデックスに移動されるべき特定のピクチャに対応するかを示す、
    請求項43記載の方法。
  45. 前記ビュー識別子は、順序付けされるべきリファレンスピクチャのビュー識別子が前記少なくとも1つのピクチャのビュー識別子と異なるときにのみ必要とされる、
    請求項43記載の方法。
  46. 前記復号化するステップは、テンポラルダイレクトモードについて再定義される既存のシンタックスエレメント、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用して、テンポラルダイレクトモードにおけるビュー識別子の使用をサポートする、
    請求項29記載の方法。
  47. 前記テンポラルダイレクトモードは、ピクチャオーダカウント値及びビュー識別子の少なくとも1つに基づいて導出される、
    請求項46記載の方法。
  48. 前記復号化するステップは、既存のシンタックスエレメント、既存のセマンティクス、及びテンポラルダイレクトモードのための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する、
    請求項29記載の方法。
  49. 前記復号化するステップは、暗黙の重み付け予測のために再定義される既存のシンタックスエレメント、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存のシンタックスを使用して、暗黙の重み予測における前記ビュー識別子の使用をサポートする、
    請求項29記載の方法。
  50. 前記暗黙の重み付け予測は、ピクチャオーダカウント値とビュー識別子の少なくとも1つに基づいて導出される、
    請求項49記載の方法。
  51. 前記符号化するステップは、既存のシンタックスエレメント、既存のセマンティクス、及び、暗黙の重み付け予測のための既存の復号化プロセス、既存のシンタックス、既存のセマンティクス、及び、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応する既存の復号化プロセスを使用する、
    請求項29記載の方法。
  52. 前記復号化するステップは、特定のピクチャに対応する少なくとも2つのビューのうちの特定のビューを使用して、前記少なくとも2つのビューのうちの異なるビューの並列の符号化におけるビュー間の依存度を判定する、
    請求項27記載の方法。
  53. マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダを有する装置であって、
    前記デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応するデフォルトのリファレンスピクチャリストの構築プロセス及びリファレンスピクチャリストのリオーダリングにおいて再定義された変数を使用して、前記少なくとも2つのビューのうちの少なくとも1つを復号化する、
    ことを特徴とする装置。
  54. ビューの数及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項53記載の装置。
  55. グループオブピクチャ及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項53記載の装置。
  56. マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するデコーダを有する装置であって、
    前記デコーダは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおいて再定義された変数を使用して、前記少なくとも2つのビューのうちの少なくとも1つを復号化する、
    ことを特徴とする装置。
  57. ビューの数及びビュー識別情報のうちの少なくとも1つは、前記変数を再定義するために使用される、
    請求項56記載の装置。
  58. グループオブピクチャのレングス及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項56記載の装置。
  59. マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するステップを含む方法であって、
    前記復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationに対応するデフォルトのリファレンスピクチャリストの構築プロセス及びリファレンスピクチャリストのリオーダリングにおいて再定義された変数を使用して、前記少なくとも2つのビューのうちの少なくとも1つを復号化する、
    ことを特徴とする方法。
  60. ビューの数及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項59記載の方法。
  61. グループオブピクチャのレングス及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項59記載の方法。
  62. マルチビュービデオコンテンツに対応する少なくとも2つのビューのうちの少なくとも1つを復号化するステップを含む方法であって、
    前記復号化するステップは、International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group-4 Part 10 Advanced Video Coding Standard/International Telecommunication Union, Telecommunication Sector H.264 recommendationのデコードされたリファレンスピクチャのマーキングプロセスにおいて再定義された変数を使用して、前記少なくとも2つのビューのうちの少なくとも1つを復号化する、
    ことを特徴とする方法。
  63. ビューの数及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項62記載の方法。
  64. グループオブピクチャのレングス及びビュー識別情報の少なくとも1つは、前記変数を再定義するために使用される、
    請求項62記載の方法。
JP2009518403A 2006-07-06 2007-07-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置 Pending JP2009543462A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US81887406P 2006-07-06 2006-07-06
US80770606P 2006-07-18 2006-07-18
PCT/US2007/015679 WO2008005575A2 (en) 2006-07-06 2007-07-05 Method and apparatus for decoupling frame number and/or picture order count (poc) for multi-view video encoding and decoding

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2012280495A Division JP5713466B2 (ja) 2006-07-06 2012-12-25 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2013183814A Division JP5753238B2 (ja) 2006-07-06 2013-09-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置

Publications (1)

Publication Number Publication Date
JP2009543462A true JP2009543462A (ja) 2009-12-03

Family

ID=38895262

Family Applications (13)

Application Number Title Priority Date Filing Date
JP2009518403A Pending JP2009543462A (ja) 2006-07-06 2007-07-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2009518402A Pending JP2009543461A (ja) 2006-07-06 2007-07-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2012280508A Active JP5713467B2 (ja) 2006-07-06 2012-12-25 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2012280495A Active JP5713466B2 (ja) 2006-07-06 2012-12-25 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2013183814A Active JP5753238B2 (ja) 2006-07-06 2013-09-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2013183792A Active JP5753237B2 (ja) 2006-07-06 2013-09-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2015059765A Active JP6333758B2 (ja) 2006-07-06 2015-03-23 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2015059779A Pending JP2015146621A (ja) 2006-07-06 2015-03-23 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2016196887A Active JP6242977B2 (ja) 2006-07-06 2016-10-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2017092858A Active JP6492119B2 (ja) 2006-07-06 2017-05-09 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2017214323A Active JP6462828B2 (ja) 2006-07-06 2017-11-07 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2018212691A Ceased JP2019062538A (ja) 2006-07-06 2018-11-13 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2018245387A Ceased JP2019083538A (ja) 2006-07-06 2018-12-27 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置

Family Applications After (12)

Application Number Title Priority Date Filing Date
JP2009518402A Pending JP2009543461A (ja) 2006-07-06 2007-07-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2012280508A Active JP5713467B2 (ja) 2006-07-06 2012-12-25 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2012280495A Active JP5713466B2 (ja) 2006-07-06 2012-12-25 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2013183814A Active JP5753238B2 (ja) 2006-07-06 2013-09-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2013183792A Active JP5753237B2 (ja) 2006-07-06 2013-09-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2015059765A Active JP6333758B2 (ja) 2006-07-06 2015-03-23 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2015059779A Pending JP2015146621A (ja) 2006-07-06 2015-03-23 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2016196887A Active JP6242977B2 (ja) 2006-07-06 2016-10-05 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2017092858A Active JP6492119B2 (ja) 2006-07-06 2017-05-09 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2017214323A Active JP6462828B2 (ja) 2006-07-06 2017-11-07 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2018212691A Ceased JP2019062538A (ja) 2006-07-06 2018-11-13 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
JP2018245387A Ceased JP2019083538A (ja) 2006-07-06 2018-12-27 マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置

Country Status (9)

Country Link
US (3) US9641842B2 (ja)
EP (2) EP2039170B1 (ja)
JP (13) JP2009543462A (ja)
KR (2) KR101499263B1 (ja)
AU (2) AU2007269575B2 (ja)
BR (2) BRPI0714022A2 (ja)
MX (5) MX2009000207A (ja)
RU (4) RU2443074C2 (ja)
WO (2) WO2008005575A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013214971A (ja) * 2012-03-30 2013-10-17 Panasonic Corp 画像符号化方法および画像復号方法

Families Citing this family (69)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
KR20060055472A (ko) * 2003-06-25 2006-05-23 톰슨 라이센싱 변위된 프레임 차분을 이용하여 가중된 예측 추정을 위한방법 및 장치
US20100091845A1 (en) * 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
BRPI0710048A2 (pt) * 2006-03-30 2011-08-02 Lg Electronics Inc método e aparelho para decodificar / codificar um sinal de vìdeo
WO2007148907A1 (en) * 2006-06-19 2007-12-27 Lg Electronics, Inc. Method and apparatus for processing a vedeo signal
CN101611633B (zh) 2006-07-06 2012-10-03 汤姆逊许可证公司 用于针对多视角视频编码和解码解耦合帧号和/或图像顺序计数(poc)的方法和装置
WO2008023967A1 (en) * 2006-08-25 2008-02-28 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
CN102780883B (zh) * 2006-10-13 2015-03-04 汤姆逊许可公司 用于包含多视点视频编码的参考图像管理的方法
EP2418850A3 (en) * 2006-12-21 2012-06-06 Thomson Licensing Methods and apparatus for improved signaling using high level syntax for multi-view video coding and decoding
WO2008084443A1 (en) * 2007-01-09 2008-07-17 Nokia Corporation System and method for implementing improved decoded picture buffer management for scalable video coding and multiview video coding
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
TWI338869B (en) * 2007-08-03 2011-03-11 Via Tech Inc Method and apparatus for block-based digital encoded picture
JP5536676B2 (ja) * 2008-03-04 2014-07-02 トムソン ライセンシング 仮想参照ビュー
KR101591085B1 (ko) * 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
US8385404B2 (en) 2008-09-11 2013-02-26 Google Inc. System and method for video encoding using constructed reference frame
JP2012505569A (ja) * 2008-10-07 2012-03-01 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 多視点メディアデータ
US8189666B2 (en) * 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US8780999B2 (en) 2009-06-12 2014-07-15 Qualcomm Incorporated Assembling multiview video coding sub-BITSTREAMS in MPEG-2 systems
US8411746B2 (en) * 2009-06-12 2013-04-02 Qualcomm Incorporated Multiview video coding over MPEG-2 systems
JP5622484B2 (ja) * 2009-08-20 2014-11-12 富士フイルム株式会社 発色感光性組成物、平版印刷版原版及び新規シアニン色素
KR101752418B1 (ko) 2010-04-09 2017-06-29 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US9008176B2 (en) 2011-01-22 2015-04-14 Qualcomm Incorporated Combined reference picture list construction for video coding
JP5747559B2 (ja) * 2011-03-01 2015-07-15 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム
US8934552B2 (en) 2011-03-31 2015-01-13 Qualcomm Incorporated Combined reference picture list construction and mapping
US8638854B1 (en) 2011-04-07 2014-01-28 Google Inc. Apparatus and method for creating an alternate reference frame for video compression using maximal differences
US9247249B2 (en) 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding
BR122015001004B1 (pt) * 2011-06-30 2022-07-26 Sony Corporation Dispositivo e método de processamento de imagem
EP3902258A1 (en) 2011-06-30 2021-10-27 Telefonaktiebolaget LM Ericsson (publ) Reference picture signaling
MX2014000159A (es) * 2011-07-02 2014-02-19 Samsung Electronics Co Ltd Metodo y aparato para la codificacion de video, y metodo y aparato para la decodificacion de video acompañada por inter prediccion utilizando imagen co-localizada.
US9635355B2 (en) * 2011-07-28 2017-04-25 Qualcomm Incorporated Multiview video coding
US9674525B2 (en) 2011-07-28 2017-06-06 Qualcomm Incorporated Multiview video coding
PL3474551T3 (pl) * 2011-09-22 2022-07-04 Lg Electronics Inc. Sposób predykcji międzyobrazowej wykonywany przez urządzenie dekodujące, sposób kodowania wideo wykonywany przez urządzenie kodujące i odczytywalny przez dekoder nośnik zapisu przechowujący zakodowaną informację wideo.
US9131245B2 (en) 2011-09-23 2015-09-08 Qualcomm Incorporated Reference picture list construction for video coding
US20130089152A1 (en) * 2011-10-05 2013-04-11 Qualcomm Incorporated Signaling picture identification for video coding
US20130094774A1 (en) * 2011-10-13 2013-04-18 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
US8768079B2 (en) 2011-10-13 2014-07-01 Sharp Laboratories Of America, Inc. Tracking a reference picture on an electronic device
JP5698644B2 (ja) * 2011-10-18 2015-04-08 株式会社Nttドコモ 動画像予測符号化方法、動画像予測符号化装置、動画像予測符号化プログラム、動画像予測復号方法、動画像予測復号装置及び動画像予測復号プログラム
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
WO2013069933A1 (ko) * 2011-11-07 2013-05-16 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치
US10003817B2 (en) * 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
KR20230175325A (ko) * 2011-11-11 2023-12-29 엘지전자 주식회사 영상 정보 전송 방법 및 장치와 이를 이용한 복호화 방법 및 장치
US9148670B2 (en) 2011-11-30 2015-09-29 Freescale Semiconductor, Inc. Multi-core decompression of block coded video data
US9432665B2 (en) * 2011-12-02 2016-08-30 Qualcomm Incorporated Coding least significant bits of picture order count values identifying long-term reference pictures
US9258559B2 (en) 2011-12-20 2016-02-09 Qualcomm Incorporated Reference picture list construction for multi-view and three-dimensional video coding
US9369710B2 (en) 2012-02-06 2016-06-14 Qualcomm Incorporated Reference picture list modification for video coding
EP2822277A4 (en) 2012-03-02 2015-03-04 Panasonic Ip Corp America IMAGE ENCODING METHOD, IMAGE DECODING METHOD, IMAGE ENCODING DEVICE, IMAGE DECODING DEVICE, AND IMAGE ENCODING / DECODING DEVICE
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
US10200709B2 (en) * 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
WO2013162980A2 (en) * 2012-04-23 2013-10-31 Google Inc. Managing multi-reference picture buffers for video data coding
US9609341B1 (en) 2012-04-23 2017-03-28 Google Inc. Video data encoding and decoding using reference picture lists
US9319679B2 (en) * 2012-06-07 2016-04-19 Qualcomm Incorporated Signaling data for long term reference pictures for video coding
JP5885604B2 (ja) * 2012-07-06 2016-03-15 株式会社Nttドコモ 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法及び動画像予測復号プログラム
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
US9374581B2 (en) * 2013-01-07 2016-06-21 Qualcomm Incorporated Signaling of picture order count to timing information relations for video timing in video coding
KR101804652B1 (ko) * 2013-04-02 2017-12-04 브이아이디 스케일, 인크. 스케일러블 비디오 코딩용의 향상된 시간적 움직임 벡터 예측
US9756331B1 (en) 2013-06-17 2017-09-05 Google Inc. Advance coded reference prediction
WO2015000108A1 (en) * 2013-07-01 2015-01-08 Mediatek Singapore Pte. Ltd. An improved texture merging candidate in 3dvc
WO2017134957A1 (ja) * 2016-02-03 2017-08-10 シャープ株式会社 動画像復号装置、動画像符号化装置、および予測画像生成装置
ES2853700T3 (es) * 2016-04-15 2021-09-17 Magic Pony Tech Limited Compensación de movimiento utilizando interpolación de imagen temporal
US10750190B2 (en) * 2016-10-11 2020-08-18 Lg Electronics Inc. Video decoding method and device in video coding system
KR102004247B1 (ko) * 2016-11-25 2019-07-29 경희대학교 산학협력단 영상 병렬 처리 방법 및 장치
KR20180080117A (ko) * 2017-01-02 2018-07-11 주식회사 케이티 비디오 신호 처리 방법 및 장치
US10841621B2 (en) * 2017-03-01 2020-11-17 Wyse Technology L.L.C. Fault recovery of video bitstream in remote sessions
WO2018174542A1 (ko) * 2017-03-21 2018-09-27 주식회사 케이티 비디오 신호 처리 방법 및 장치
JP7213262B2 (ja) 2018-04-05 2023-01-26 テレフオンアクチーボラゲット エルエム エリクソン(パブル) 多段サイドリンク制御情報
CN109766098B (zh) * 2019-01-09 2021-10-08 腾讯科技(深圳)有限公司 应用程序的运行方法、设备及存储介质
US10638130B1 (en) * 2019-04-09 2020-04-28 Google Llc Entropy-inspired directional filtering for image coding

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004048579A (ja) * 2002-07-15 2004-02-12 Sharp Corp 動画像符号化装置および復号装置
JP2004228617A (ja) * 2003-01-17 2004-08-12 Matsushita Electric Ind Co Ltd 動画像符号化装置および動画像復号化装置
WO2005004492A2 (en) * 2003-06-25 2005-01-13 Thomson Licensing S.A. Method and apparatus for weighted prediction estimation using a displaced frame differential
JP2005244503A (ja) * 2004-02-25 2005-09-08 Sony Corp 画像情報符号化装置および画像情報符号化方法
JP2005303773A (ja) * 2004-04-14 2005-10-27 Nippon Telegr & Teleph Corp <Ntt> 映像符号化方法、映像符号化装置、映像符号化プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体、並びに、映像復号方法、映像復号装置、映像復号プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体
WO2006001653A1 (en) * 2004-06-25 2006-01-05 Lg Electronics Inc. Method of coding and decoding multiview sequence and method of displaying thereof

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4331376C1 (de) 1993-09-15 1994-11-10 Fraunhofer Ges Forschung Verfahren zum Bestimmen der zu wählenden Codierungsart für die Codierung von wenigstens zwei Signalen
CA2208950A1 (en) * 1996-07-03 1998-01-03 Xuemin Chen Rate control for stereoscopic digital video encoding
AU4601697A (en) * 1996-12-18 1998-07-15 Thomson Consumer Electronics, Inc Efficient fixed-length block compression and decompression
RU2201654C2 (ru) * 1997-12-23 2003-03-27 Томсон Лайсенсинг С.А. Способ низкошумового кодирования и декодирования
TW544671B (en) * 2000-02-25 2003-08-01 Sony Corp Recording medium, recording apparatus, and reading apparatus
RU2237283C2 (ru) * 2001-11-27 2004-09-27 Самсунг Электроникс Ко., Лтд. Устройство и способ представления трехмерного объекта на основе изображений с глубиной
KR100508798B1 (ko) * 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
KR100481732B1 (ko) * 2002-04-20 2005-04-11 전자부품연구원 다 시점 동영상 부호화 장치
KR100475060B1 (ko) 2002-08-07 2005-03-10 한국전자통신연구원 다시점 3차원 동영상에 대한 사용자 요구가 반영된 다중화장치 및 방법
EP1582060A4 (en) * 2003-01-10 2009-09-23 Thomson Licensing SCHEDULE DECISION FOR INTERFRAME ENCODING
US7778328B2 (en) * 2003-08-07 2010-08-17 Sony Corporation Semantics-based motion estimation for multi-view video coding
US7664292B2 (en) 2003-12-03 2010-02-16 Safehouse International, Inc. Monitoring an output from a camera
KR101187550B1 (ko) * 2004-02-27 2012-10-04 티디비전 코포레이션 에스.에이. 데 씨.브이. 입체적 3d-비디오 이미지 디지털 코딩 시스템 및 방법
JP4638874B2 (ja) * 2004-08-11 2011-02-23 株式会社日立製作所 符号化ストリーム記録媒体、及び画像符号化装置
KR100972222B1 (ko) 2004-10-07 2010-07-23 니폰덴신뎅와 가부시키가이샤 영상 부호화 방법 및 장치, 영상 복호 방법 및 장치, 그들의 프로그램을 기록한 기록 매체
WO2006049412A1 (en) * 2004-11-01 2006-05-11 Electronics And Telecommunications Research Institute Method for encoding/decoding a video sequence based on hierarchical b-picture using adaptively-adjusted gop structure
US7468745B2 (en) * 2004-12-17 2008-12-23 Mitsubishi Electric Research Laboratories, Inc. Multiview video decomposition and encoding
WO2007012094A1 (de) 2005-07-29 2007-02-01 Franz Ehrenleitner Faltbarer ausleger
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
BRPI0710048A2 (pt) * 2006-03-30 2011-08-02 Lg Electronics Inc método e aparelho para decodificar / codificar um sinal de vìdeo

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004048579A (ja) * 2002-07-15 2004-02-12 Sharp Corp 動画像符号化装置および復号装置
JP2004228617A (ja) * 2003-01-17 2004-08-12 Matsushita Electric Ind Co Ltd 動画像符号化装置および動画像復号化装置
WO2005004492A2 (en) * 2003-06-25 2005-01-13 Thomson Licensing S.A. Method and apparatus for weighted prediction estimation using a displaced frame differential
JP2005244503A (ja) * 2004-02-25 2005-09-08 Sony Corp 画像情報符号化装置および画像情報符号化方法
JP2005303773A (ja) * 2004-04-14 2005-10-27 Nippon Telegr & Teleph Corp <Ntt> 映像符号化方法、映像符号化装置、映像符号化プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体、並びに、映像復号方法、映像復号装置、映像復号プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体
WO2006001653A1 (en) * 2004-06-25 2006-01-05 Lg Electronics Inc. Method of coding and decoding multiview sequence and method of displaying thereof

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN5009011669; PURVIN PANDIT: ISO/IEC JTC1/SC29/WG11 MPEG2006/M13718 , 20060713 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013214971A (ja) * 2012-03-30 2013-10-17 Panasonic Corp 画像符号化方法および画像復号方法
JP2017022755A (ja) * 2012-03-30 2017-01-26 サン パテント トラスト 画像符号化方法および画像復号方法
US10390041B2 (en) 2012-03-30 2019-08-20 Sun Patent Trust Predictive image coding and decoding using two reference pictures

Also Published As

Publication number Publication date
US20090238269A1 (en) 2009-09-24
MX357910B (es) 2018-07-30
RU2443074C2 (ru) 2012-02-20
KR101499263B1 (ko) 2015-03-05
WO2008005575A2 (en) 2008-01-10
JP6492119B2 (ja) 2019-03-27
US9641842B2 (en) 2017-05-02
RU2637996C2 (ru) 2017-12-08
MX2009000207A (es) 2009-02-13
WO2008005574A3 (en) 2008-12-04
JP2017041894A (ja) 2017-02-23
JP2019062538A (ja) 2019-04-18
JP2014030213A (ja) 2014-02-13
KR20090039705A (ko) 2009-04-22
RU2013101608A (ru) 2014-07-20
EP2039170B1 (en) 2019-09-04
JP5753238B2 (ja) 2015-07-22
WO2008005575A3 (en) 2008-12-04
JP5713467B2 (ja) 2015-05-07
MX2018009224A (es) 2020-11-06
AU2007269575A1 (en) 2008-01-10
BRPI0714022A2 (pt) 2012-12-04
JP5753237B2 (ja) 2015-07-22
EP2039170A2 (en) 2009-03-25
JP6333758B2 (ja) 2018-05-30
MX339121B (es) 2016-05-12
MX2009000205A (es) 2009-03-23
JP2019083538A (ja) 2019-05-30
RU2619910C2 (ru) 2017-05-19
JP2013138428A (ja) 2013-07-11
JP2015146621A (ja) 2015-08-13
JP2015146620A (ja) 2015-08-13
JP6242977B2 (ja) 2017-12-06
JP2017175642A (ja) 2017-09-28
JP2014030214A (ja) 2014-02-13
US20200053355A1 (en) 2020-02-13
AU2007269575B2 (en) 2012-08-16
RU2009103915A (ru) 2010-08-20
JP2018042277A (ja) 2018-03-15
KR101350591B1 (ko) 2014-01-14
KR20090037423A (ko) 2009-04-15
RU2009103912A (ru) 2010-08-20
US20090304068A1 (en) 2009-12-10
AU2007269576B2 (en) 2012-07-12
EP2039169A2 (en) 2009-03-25
JP2013138429A (ja) 2013-07-11
JP2009543461A (ja) 2009-12-03
JP5713466B2 (ja) 2015-05-07
RU2480942C2 (ru) 2013-04-27
BRPI0714024A2 (pt) 2012-12-18
AU2007269576A1 (en) 2008-01-10
JP6462828B2 (ja) 2019-01-30
RU2013101607A (ru) 2014-07-20
WO2008005574A2 (en) 2008-01-10

Similar Documents

Publication Publication Date Title
JP6492119B2 (ja) マルチビュービデオ符号化及び復号化のためにフレームナンバー及び/又はピクチャオーダカウント(poc)を分離する方法及び装置
US10244231B2 (en) Method and apparatus for decoupling frame number and/or picture order count (POC) for multi-view video encoding and decoding
KR101682322B1 (ko) 다시점 비디오 코딩시스템에 있어 비디오 사용성 정보(vui)를 통합하기 위한 방법 및 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120323

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20120323

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20120326

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120618

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120627

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120920

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120927

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121225

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130508