JP2015092715A - ビデオ符号化及び複合化におけるタイリング - Google Patents

ビデオ符号化及び複合化におけるタイリング Download PDF

Info

Publication number
JP2015092715A
JP2015092715A JP2014256830A JP2014256830A JP2015092715A JP 2015092715 A JP2015092715 A JP 2015092715A JP 2014256830 A JP2014256830 A JP 2014256830A JP 2014256830 A JP2014256830 A JP 2014256830A JP 2015092715 A JP2015092715 A JP 2015092715A
Authority
JP
Japan
Prior art keywords
picture
view
pictures
video
video picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014256830A
Other languages
English (en)
Inventor
パンディット,パーヴィン,ビバス
Pervin Bivas Panduit
イン,ペン
Peng Yin
ティアン,ドン
Dong Tian
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=39810226&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2015092715(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2015092715A publication Critical patent/JP2015092715A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/003Aspects relating to the "2D+depth" image format

Abstract

【課題】ビデオ符号化及び復号化におけるビューのタイリングに関する実現形態を提供する。【解決手段】単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスする工程と、アクセスされたビデオ・ピクチャにおける複数のピクチャがどのようにして合成されるかを示す情報にアクセスする工程(806、808)と、複数のピクチャのうちの少なくとも1つの復号化された表現を供給するようビデオ・ピクチャを復号化する工程(824)と、アクセスされた情報及び復号化されたビデオ・ピクチャを出力として供給する工程とを用いて復号する。符号化側では、単一のビデオ・ピクチャに含まれる複数のピクチャが単一のビデオ・ピクチャにどのようにして合成されるかを示す情報をフォーマッティング又は処理し、合成された複数のピクチャの符号化された表現をフォーマッティング又は処理する。【選択図】図8A

Description

本出願は、(1)「Multiview Information」と題する西暦2007年4月12日付け出願の米国特許仮出願第60/923014号(代理人整理番号PU070078号)及び(2)「View Tiling in MVC Coding」と題する西暦2007年4月20日付け出願の米国特許仮出願第60/925400号(代理人整理番号PU0700103号)それぞれの利益を主張する。前述の2つの出願はそれぞれ、内容全体を本明細書及び特許請求の範囲に援用する。
本願の原理は一般に、ビデオ符号化及び/又は復号化に関する。
ビデオ・ディスプレイ製造業者は、単一のフレーム上に別々のビューを配置又はタイリングするフレームワークを使用し得る。その場合、ビューは、そのそれぞれの位置から抽出し、レンダリングすることができる。
一般的な局面によれば、単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャがアクセスされる。アクセスされたビデオ・ピクチャにおける複数のピクチャがどのようにして合成されるかを示す情報がアクセスされる。合成された複数のピクチャの復号化された表現を提供するためにビデオ・ピクチャが復号化される。アクセスされた情報及び復号化されたビデオ・ピクチャが出力として供給される。
別の一般的な局面によれば、ビデオ・ピクチャに含まれる複数のピクチャがどのようにして単一のピクチャに合成されるかを示す情報が生成される。合成された複数のピクチャの符号化された表現を供給するためにビデオ・ピクチャが符号化される。生成された情報及び符号化されたビデオ・ピクチャが出力として供給される。
別の一般的な局面によれば、信号又は信号構造は、単一のビデオ・ピクチャに含まれる複数のピクチャが単一のビデオ・ピクチャにどのようにして合成されるかを示す情報を含む。信号又は信号構造は、合成された複数のピクチャの符号化された表現も含む。
別の一般的な局面によれば、単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャがアクセスされる。アクセスされたビデオ・ピクチャにおける複数のピクチャがどのようにして合成されるかを示す情報がアクセスされる。複数のピクチャのうちの少なくとも1つの復号化された表現を供給するためにビデオ・ピクチャが復号化される。アクセスされた情報及び復号化された表現が出力として供給される。
別の一般的な局面によれば、単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャがアクセスされる。アクセスされたビデオ・ピクチャにおける複数のピクチャがどのようにして合成されるかを示す情報がアクセスされる。合成された複数のピクチャの復号化された表現を供給するためにビデオ・ピクチャが復号化される。表示するために複数のピクチャの少なくとも1つを選択するユーザ入力が受け取られる。選択された少なくとも1つのピクチャの復号化された出力が供給され、復号化された出力は、アクセスされた情報、復号化された表現、及びユーザ入力に基づいて供給される。
単一のフレーム上にタイリングされた4つのビューの例を示す図である。 単一のフレーム上で反転させ、タイリングされた4つのビューの例を示す図である。 本願の原理の実施例による、本願の原理を施すことができるビデオ符号化器を示すブロック図である。 本願の原理の実施例による、本願の原理を施すことができるビデオ復号化器を示すブロック図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビューのピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビューのピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビューのピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビューのピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、深度信号の例を示す図である。 本願の原理の実施例による、タイルとして加えられた深度信号の例を示す図である。 本願の原理の実施例による、単一のフレーム上にタイリングされた5つのビューの例を示す図である。 本願の原理の実施例による、本願の原理を施すことができる例示的なマルチビュー・ビデオ符号化(MVC)符号化器のブロック図である。 本願の原理の実施例による、本願の原理を施すことができる例示的なマルチビュー・ビデオ符号化(MVC)復号化器のブロック図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの符号化に備えて複数のビューのピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビューのピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビューのピクチャを符号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの復号化に備えて複数のビューのピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)拡張を使用して複数のビューのピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)拡張を使用して複数のビューのピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの符号化に備えて複数のビュー及び深度のピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)拡張を使用したピクチャの復号化に備えて複数のビュー及び深度のピクチャを処理する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを復号化する方法のフロー図である。 本願の原理の実施例による、画素レベルにおけるタイリング例を示す図である。 本願の原理の実施例による、本願の原理を施すことができるビデオ処理装置を示すブロック図である。
1つ又は複数の実現形態の詳細は、添付図面及び以下明細書に記載する。特定の1つのやり方で記載されていても、実現形態は種々のやり方で構成又は実施することができる。例えば、実現形態は、方法として行うか、あるいは、動作の組を行うよう構成された装置として実施するか、あるいは、動作の組を行うための命令を記憶する装置として実施するか、あるいは、信号において実施することができる。他の局面及び特徴は、添付図面及び特許請求の範囲に関して検討される以下の詳細な説明から明らかになるであろう。
種々の実現形態は、ビデオ符号化及び復号化においてビューをタイリングする方法及び装置に関する。よって、当業者は、本明細書及び特許請求の範囲に明示的に説明するか、又は示していないが、本願の原理を実施し、その趣旨及び範囲の範囲内に含まれる種々の構成を考え出すことができるであろう。
本明細書及び特許請求の範囲記載の例及び条件付文言は全て、本願の原理、及び当該技術分野を発展させるために本願の発明者が貢献する概念の、読者の理解を支援するための教示の目的を意図しており、前述の、特記した例及び条件への限定なしであると解釈するものとする。
更に、本願の原理、局面、及び実施例、並びにそれらの具体例を記載した、本明細書及び特許請求の範囲の記載は全て、その構造的均等物及び機能的均等物を包含することを意図している。更に、前述の均等物は、現在知られている均等物、及び将来に開発される均等物(すなわち、構造にかかわらず、同じ機能を行う、開発された何れかの構成要素)をともに含むことが意図されている。
よって、例えば、本明細書及び特許請求の範囲に提示されたブロック図が、本願の原理を実施する例証的な回路の概念図を表すことは当業者によって認識されるであろう。同様に、フローチャート、フロー図、状態遷移図、擬似コード等は何れも、コンピュータ読み取り可能な媒体において実質的に表し、コンピュータ又はプロセッサにより、前述のコンピュータ又はプロセッサが明記されているか否かにかかわらず、実行し得る種々の処理を表す。
図に示す種々の構成要素の機能は、専用ハードウェア、及び適切なソフトウェアに関連してソフトウェアを実行することができるハードウェアの使用によって提供することができる。プロセッサによって提供される場合、機能は、単一の専用プロセッサによって提供されるか、単一の共有プロセッサによって提供されるか、又は、複数の個々のプロセッサ(この一部は共有であり得る)によって提供され得る。更に、「プロセッサ」又は「コントローラ」の語を明示的に使用していることは、ソフトウェアを実行することができるハードウェアを専ら表すものと解するべきでなく、暗黙的には、限定列挙でないが、ディジタル信号プロセッサ(「DSP」)ハードウェア、ソフトウェアを記憶するための読み取り専用メモリ(「ROM」)、ランダム・アクセス・メモリ(「RAM」)及び不揮発性記憶装置を含み得る。
他のハードウェア(汎用及び/又はカスタム)も含まれ得る。同様に、図に示すスイッチは何れも概念のみである。前述の機能は、プログラム・ロジックの動作によるか、専用ロジックによるか、プログラム制御及び専用ロジックの相互作用によるか、又は手作業によって行うことができ、特定の手法は、前後関係からより具体的に分かるように実現者によって選択可能である。
本願の特許請求の範囲では、特定の機能を行う手段として表される構成要素は何れも、その機能を行う何れの手段(例えば、a)その機能を行う回路構成要素の組合せや、b)機能を行うためにそのソフトウェアを実行する適切な回路と組み合わせた、ファームウェア、マイクロコード等を含む、何れかの形態のソフトウェア)も包含することが意図される。前述の特許請求の範囲で規定された本願の原理は、記載された種々の手段によって提供される機能が、請求項が要求するやり方で組合せられ、集約されるということに存在する。よって、前述の機能を提供することが可能な手段は何れも、本願の明細書及び特許請求の範囲記載のものと均等であるとみなされる。
本願明細書における、本願の原理の「one embodiment」(若しくは「one implementation」)又は「an embodiment」(若しくは「an implementation」)への言及は、本願の実施例に関して説明した特定の構成、構造、特性等が本願の原理の少なくとも一実施例に含まれていることを意味している。よって、本明細書全体の種々の箇所に記載された「in one embodiment」又は「in an embodiment」の句は、必ずしも、同じ実施例を全て表している訳でない。
「及び/又は」の語や「少なくとも一方」の語を使用していることは、例えば、「A及び/又はB」や「A及びBのうちの少なくとも一方」の場合には、最初に挙げられた選択肢(A)のみの選択、第2に挙げられた選択肢(B)のみの選択、又は両方の選択肢(A及びB)の選択を包含することが意図されている。更なる例として、「A、B、及び/又はC」や「A、B及びCのうちの少なくとも1つ」の場合、前述の句は、第1に挙げられた選択肢(A)のみの選択、第2に挙げられた選択肢(B)のみの選択、第3に挙げられた選択肢(C)のみの選択、第1に挙げられた選択肢及び第2に挙げられた選択肢(A及びB)のみの選択、第1に挙げられた選択肢及び第3に挙げられた選択肢(A及びC)のみの選択、第2に挙げられた選択肢及び第3に挙げられた選択肢(B及びC)のみの選択、又は、3つの選択肢(A、B及びC)全ての選択を包含することを意図している。当該技術分野及び関連技術分野において通常の知識を有する者が容易に分かるように、このことは、挙げられたいくつもの項目について拡張することができる。
更に、本願の原理の1つ又は複数の実施例は本明細書及び特許請求の範囲においてMPEG−4AVC標準に関して説明しているが、本願の原理は単にこの標準に限定されず、よって、本願の原理の趣旨を維持しながら、他の標準、勧告、及びその拡張(特に、MPEG−4AVC標準の拡張を含むビデオ符号化標準、勧告、及びその拡張)に関して利用することができる。
更に、本願の原理の他の1つ又は複数の実施例は本明細書及び特許請求の範囲においてMPEG−4AVC標準のマルチビュー・ビデオ符号化の拡張に関して説明しているが、本願の原理は、単にこの拡張及び/又はこの標準に限定されず、よって、本願の原理の趣旨を維持しながら、マルチビュー・ビデオ符号化に関する他のビデオ符号化の標準、勧告、及びそれらの拡張(特に、ビデオ符号化の標準、勧告、及びそれらの拡張(MPEG−4AVC標準の拡張に利用することができる。マルチビュー・ビデオ符号化(MVC)は、マルチビュー系列の符号化の圧縮フレームワークである。マルチビュー・ビデオ符号化(MVC)系列は、別々の視点からの同じシーンを捕捉する2つ以上のビデオ系列の組である。
更に、本明細書及び特許請求の範囲においては、ビデオ・コンテンツに関して深度情報を使用する本願の原理の他の1つ又は複数の実施例を記載しているが、本願の原理は前述の実施例に限定されず、よって、本願の原理の趣旨を維持しながら、深度情報を使用しない他の実施例を実現することができる。
更に、本明細書及び特許請求の範囲では、「高位構文」は、階層的にマクロブロック層の上の、ビットストリーム内に存在している構文を表す。例えば、本明細書及び特許請求の範囲記載の高位構文は、スライス・ヘッダ・レベル、付加拡張情報(SEI)レベル、ピクチャ・パラメータ・セット(PPS)レベル、シーケンス・パラメータ・セット(SPS)レベル、ビュー・パラメータ・セット(VPS)レベル、及びネットワーク抽象化層(NAL)ユニット・ヘッダ・レベルの構文を表し得るが、それらに限定されない。
国際標準化機構/国際電気標準会議(ISO/IEC)動画像専門家グループ−4(MPEG−4)パート10高度ビデオ符号化(AVC)標準/国際電気通信連合(ITU−T)H.264勧告(以下、「MPEG−4 AVC標準」)に基づいたマルチビデオ符号化(MVC)の現在の実現形態では、参照ソフトウェアが、各ビューを単一の符号化器で符号化し、ビュー間参照を考慮に入れることにより、マルチビュー予測を達成する。各ビューは、別個のビットストリームとして符号化器により、その元の分解能で符号化され、その後、全てのビットストリームを合成して単一のビットストリームを形成する。上記単一のビットストリームはその後、復号化される。各ビューは、別個のYUV復号化出力を生成する。
マルチビュー予測の別の手法は、ビューの組を疑似ビューにグループ化することを伴う。この手法の一例では、実施可能なダウンサンプリング又は他の処理により、より大きなフレーム上又はスーパー・フレーム上の合計M個のビュー(同時にサンプリングされる)のうちのN個のビューからのピクチャをタイリングすることが可能である。図1に移れば、単一のフレーム上にタイリングされた4つのビューの例の全体を参照符号100で示す。4つのビューは全て、その通常の向きにある。
図2に移れば、単一のフレーム上で反転させ、タイリングされた4つのビューの例の全体を参照符号200で示す。左上のビューは、その通常の向きにある。右上のビューは水平方向に反転させている。左下のビューは垂直方向に反転させている。右下のビューは、水平方向及び垂直方向に反転させている。よって、4つのビューが存在している場合、各ビューからのピクチャが、タイルのようなスーパー・フレームに配置される。これは、高分解能の単一の非符号化入力系列をもたらす。
あるいは、画像をダウンサンプリングして、より低い分解能をもたらすことが可能である。よって、併せてタイリングされた別々のビューをそれぞれが含む複数の系列を作成する。その場合、前述の系列はそれぞれ、別々のN個のタイリングされたビューをそれぞれが含む疑似ビューを形成する。図1は一疑似ビューを示し、図2は別の疑似ビューを示す。これらの疑似ビューは次いで、ISO/IEC MPEG−2標準やMPEG−4 AVC標準などの既存のビデオ符号化標準を使用して符号化することが可能である。
マルチビュー予測の更に別の手法は、新たな標準を使用して、別々のビューを別個に符号化し、復号化後、プレイヤによって要求されるようにビューをタイリングすることを伴う。
更に、別の手法では、ビューは、画素単位でタイリングすることも可能である。例えば、4つのビューを含むスーパービューでは画素(x,y)はビュー0からであり得る一方、画素(x+1,y)はビュー1からであり得、画素(x,y+1)はビュー2からであり得、画素(x+1,y+1)はビュー3からであり得る。
多くのディスプレイ製造業者は、単一のフレーム上に別々のビューを配置又はタイリングし、それらのそれぞれの位置からのビューを抽出し、レンダリングする前述のフレームワークを使用する。前述の場合、ビットストリームが前述の特性を有するかを判定する標準的なやり方は存在しない。よって、システムが、大きなフレームにおいて別々のビューのピクチャをタイリングする方法を使用する場合、別々のビューを抽出する方法は、そのシステム固有のものである。
しかし、ビットストリームが前述の特性を有するかを判定する標準的なやり方は存在しない。本願の発明者は、表示や他の後処理を支援するためにレンダリング装置又はプレイヤが前述の情報を抽出することを容易にするために高位構文を提案している。サブピクチャが、異なる分解能を有している可能性もあり、最終的にビューをレンダリングするために多少のアップサンプリングが必要であり得る。ユーザは、アップサンプルを高位の構文でも示させたいことがあり得る。更に、深度フォーカスを変えるためのパラメータを送信することも可能である。
一実施例では、別のビューに属するサブピクチャを各ピクチャが含むMPEG−4 AVC標準準拠ビットストリームにおけるマルチビュー情報のシグナリングのための新たな付加拡張情報(SEI)メッセージを提案する。実施例は、例えば、前述のフレームワークを使用することができる3次元(3D)モニタ上のマルチビュー・ビデオ・ストリームを簡単かつ便利に表示することを意図している。この概念は、高位構文を使用して前述の情報をシグナリングする他のビデオ符号化の標準及び勧告に拡張することが可能である。
更に、一実施例では、マルチビュー・ビデオ符号化器及び/復号化器に送出される前にビューをどのようにして配置するかというシグナリング方法を提案している。効果的には、上記実施例は、マルチビュー符号化の単純化された実現形態につながり得、符号化効率に便益をもたらし得る。特定のビューを集約し、疑似ビュー又はスーパーフラグを形成することが可能であり、タイリングされたスーパービューは、例えば、マルチビュー・ビデオ符号化の現在のMPEG−4 AVC標準ベースの実現形態に従って、共通のマルチビュー・ビデオ符号化器及び/又は復号化器によって通常ビューとして扱われる。疑似ビューの手法の使用をシグナリングするためにマルチビュー・ビデオ符号化のシーケンス・パラメータ・セット(SPS)において、新たなフラグが、提案されている。実施例は、前述のフレームワークを使用することができる3Dモニタ上のマルチビュー・ビデオ・ストリームを簡単かつ便利に表示することを意図している。
単一ビューのビデオ符号化/復号化の標準/勧告を使用した符号化/復号化
国際標準化機構/国際電気標準会議(ISO/IEC)動画像専門家グループ−4(MPEG−4)パート10高度ビデオ符号化(AVC)標準/国際電気通信連合(ITU−T)H.264勧告(以下、「MPEG−4 AVC標準」に基づいたマルチビデオ符号化(MVC)の現在の実現形態では、参照ソフトウェアは、単一の符号化器で各ビューを符号化し、ビュー間の参照を考慮に入れることにより、マルチビュー予測を達成する。各ビューは、別個のビットストリームとして符号化器により、その元の分解能で符号化され、その後、全てのビットストリームを合成して単一のビットストリームを形成する。上記単一のビットストリームはその後、復号化される。各ビューは、別個のYUV復号化出力を生成する。
マルチビュー予測の別の手法は、実施可能なダウンサンプリング動作による、より大きなフレーム又はスーパー・フレーム上の(同時にサンプリングされた)各ビューからのピクチャをタイリングすることを伴う。図1に移れば、単一のフレーム上にタイリングされた4つのビューの例の全体を参照符号100で示す。図2に移れば、単一のフレーム上で反転させ、タイリングされた4つのビューの例の全体を参照符号200で示す。よって、4つのビューが存在している場合、各ビューからのピクチャは、タイルのようなスーパー・フレームに構成される。これは、高分解能の単一の非符号化入力系列をもたらす。前述の信号は次いで、ISO/IEC MPEG−2標準やMPEG−AVC標準などの既存のビデオ符号化標準を使用して符号化することが可能である。
マルチビュー予測の更に別の手法は、新たな標準を使用して、別々のビューを別個に符号化し、復号化後、プレイヤによって要求されるようにビューをタイリングすることを伴うに過ぎない。
多くのディスプレイ製造業者は、単一のフレーム上に別々のビューを配置又はタイリングし、それらのそれぞれの位置からのビューを抽出し、レンダリングする前述のフレームワークを使用する。前述の場合、ビットストリームが前述の特性を有するかを判定する標準的なやり方は存在しない。よって、システムが、大きなフレームにおいて別々のビューのピクチャをタイリングする方法を使用する場合、別々のビューを抽出する方法は、固有のものである。
図3を参照すれば、MPEG−4 AVC標準によってビデオ符号化を行うことができるビデオ符号化器は全体を参照符号300で示す。
ビデオ符号化器300は、合成器385の非反転入力と信号通信する出力を有するフレーム配列バッファ310を含む。合成器385の出力は変換器及び量子化器325の第1の入力と信号通信で接続される。変換器及び量子化器325の出力は、エントロピ符号化器345の第1の入力、並びに、逆変換器及び逆量子化器350の第1の入力と信号通信で接続される。エントロピ符号化器345の出力は合成器390の第1の非反転入力と信号通信で接続される。合成器390の出力は、出力バッファ335の第1の入力と信号通信で接続される。
符号化器制御器305の第1の出力は、フレーム配列バッファ310の第2の入力と、逆変換器及び逆量子化器350の第2の入力と、ピクチャ・タイプ決定モジュール315の入力と、マクロブロックタイプ(MBタイプ)決定モジュール320の入力と、イントラ予測モジュール360の第2の入力と、デブロッキング・フィルタ365の第2の入力と、動き補償器370の第1の入力と、動き補償器375の第1の入力と、参照ピクチャ・バッファ380の第2の入力と信号通信で接続される。
符号化器制御器305の第2の出力は、付加拡張情報(SEI)挿入器330の第1の入力、変換器及び量子化器325の第2の入力、エントロピ符号化器345の第2の入力、出力バッファ335の第2の入力、並びに、シーケンス・パラメータ・セット(SPS)及びピクチャ・パラメータ・セット(PPS)挿入器340の入力と信号通信で接続される。
ピクチャ・タイプ決定モジュール315の第1の出力は、フレーム配列バッファ310の第3の入力と信号通信で接続される。ピクチャ・タイプの決定モジュール315の第2の出力は、マクロブロックタイプの決定モジュール320の第2の入力と信号通信で接続される。
シーケンス・パラメータ・セット(SPS)及びピクチャ・パラメータ・セット(PPS)挿入器340の出力は、合成器390の第3の非反転入力と信号通信で接続される。SEI挿入器330の出力は、合成器390の第2の非反転入力と信号通信で接続される。
逆量子化器及び逆変換器350の出力は合成器319の第1の非反転入力と信号通信で接続される。合成器319の出力は、イントラ予測モジュール360の第1の入力及びデブロッキング・フィルタ365の第1の入力と信号通信で接続される。デブロッキング・フィルタ365の出力は参照ピクチャ・バッファ380の第1の入力と信号通信で接続される。参照ピクチャ・バッファ380の出力は、動き推定器375の第2の入力及び動き補償器370の第1の入力と信号通信で接続される。動き推定器375の第1の出力は動き補償器370の第2の入力と信号通信で接続される。動き推定器375の第2の出力はエントロピ符号化器345の第3の入力と信号通信で接続される。
動き補償器370の出力はスイッチ397の第1の入力と信号通信で接続される。イントラ予測モジュール360の出力はスイッチ397の第2の入力と信号通信で接続される。マクロブロックタイプの決定モジュール320の出力は、スイッチ397に制御入力を供給するために、スイッチ397の第3の入力と信号通信で接続される。スイッチ397の第3の入力は、(制御入力、すなわち、第3の入力と比較して)スイッチの「データ」入力を動き補償器370又はイントラ予測モジュール360によって供給されるか否かを判定する。スイッチ397の出力は、合成器319の第2の非反転入力、及び合成器385の反転入力と信号通信で接続される。
フレーム配列バッファ310及び符号化器制御器105の入力は、入力ピクチャ301を受け取るために、符号化器300の入力として利用可能である。更に、付加拡張情報(SEI)挿入器330の入力は、メタデータを受け取るために、符号化器300の入力として利用可能である。出力バッファ335の出力は、ビットストリームを出力するために、符号化器300の出力として利用可能である。
図4に移れば、MPEG−4 AVC標準によってビデオ復号化を行うことができるビデオ復号化器は全体を参照符号400で示す。
ビデオ復号化器400は、エントロピ復号化器445の第1の入力と信号通信で接続された出力を有する入力バッファ410を含む。エントロピ復号化器445の第1の出力は、逆変換器及び逆量子化器450の第1の入力と信号通信で接続される。逆変換器及び逆量子化器450の出力は合成器425の第2の非反転入力と信号通信で接続される。合成器425の出力はデブロッキング・フィルタ465の第2の入力及びイントラ予測モジュール250の第1の入力と信号通信で接続される。デブロッキング・フィルタ465の第2の出力は、参照ピクチャ・バッファ480の第1の入力と信号通信で接続される。
エントロピ復号化器445の第2の出力は、動き補償器470の第3の入力及びデブロッキング・フィルタ465の第1の入力と信号通信で接続される。エントロピ復号化器445の第3の出力は、復号化器制御器405の入力と信号通信で接続される。復号化器制御器405の第1の出力はエントロピ復号化器445の第2の入力と信号通信で接続される。復号化器制御器405の第2の出力は、逆変換器及び逆量子化器450の第2の入力と信号通信で接続される。復号化器制御器405の第3の出力は、デブロッキング・フィルタ465の第3の入力と信号通信で接続される。復号化器制御器405の第4の出力は、イントラ予測モジュール460の第2の入力、動き補償器470の第1の入力、及び参照ピクチャ・バッファ480の第2の入力と信号通信で接続される。
動き補償器470の出力は、スイッチ497の第1の入力と信号通信で接続される。イントラ予測モジュール460の出力はスイッチ497の第2の入力と信号通信で接続される。スイッチ497の出力は合成器425の第1の非反転入力と信号通信で接続される。
入力バッファ410の入力は、入力ビットストリームを受け取るために、復号化器400の入力として利用可能である。デブロッキング・フィルタ465の第1の出力は、出力ピクチャを出力するために、復号化器400の出力として利用可能である。
図5に移れば、MPEG−4AVC標準を使用して複数のビューのピクチャを符号化する例示的な方法の全体を参照符号500で示す。
方法500は、開始ブロック502を含む。開始ブロック502は制御を機能ブロック504に渡す。機能ブロック504は、特定の時点における各ビューを、タイル形式におけるサブピクチャとして配置し、制御を機能ブロック506に渡す。機能ブロック506は構文要素num_coded_views_minus1をセットし、制御を機能ブロック508に渡す。機能ブロック508は構文要素org_pic_width_in_mbs_minus1及びorg_pic_height_in_mbs_minus1をセットし、制御を機能ブロック510に渡す。機能ブロック510は変数iをゼロに等しくセットし、制御を決定ブロック512に渡す。決定ブロック512は、変数iがビュー数未満であるか否かを判定する。肯定の場合、制御を機能ブロック514に渡す。さもなければ、制御を機能ブロック524に渡す。
機能ブロック514は、構文要素view_id[i]をセットし、制御を機能ブロック516に渡す。機能ブロック516は構文要素num_parts[view_id[i])をセットし、制御を機能ブロック518に渡す。機能ブロック518は変数jをゼロにセットし、制御を決定ブロック520に渡す。決定ブロック520は、変数jの現在値が、構文要素num_parts[view_id[i]]の現在値未満か否かを判定する。肯定の場合、制御を機能ブロック522に渡す。さもなければ、制御を機能ブロック528に渡す。
機能ブロック522は、
depth_flag[view_id[i]][j];
flip_dir[view_id[i]][j];
loc_left_offset[view_id[i]][j];
loc_top_offset[view_id[i]][j];
frame_crop_left_offset[view_id[i]][j];
frame_crop_right_offset[view_id[i]][j];
frame_crop_top_offset[view_id[i]][j]; 及び
frame_crop_bottom_offset[view_id[i]][j]の構文要素をセットし、変数jを増やし、次いで制御を決定ブロック520に戻す。
機能ブロック528は構文要素upsample_view_flag[view_id[i]]をセットし、制御を決定ブロック530に渡す。決定ブロック530は、構文要素upsample_view_flag[view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック532に渡す。さもなければ、制御を決定ブロック534に渡す。
機能ブロック532は構文要素upsample_filter[view_id[i]]をセットし、制御を決定ブロック534に渡す。
決定ブロック534は、構文要素upsample_filter[view_id[i]]の現在値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック536に渡す。さもなければ、制御を機能ブロック540に渡す。
機能ブロック536は、
vert_dim[view_id[i]];
hor_dim[view_id[i]]; 及び
quantizer[view_id[i]]
の構文要素をセットし、制御を機能ブロック538に渡す。機能ブロック538は、YUV成分毎にフィルタ係数をセットし、制御を機能ブロック540に渡す。
機能ブロック540は変数iを増やし、制御を決定ブロック512に戻す。
機能ブロック524は、前述の構文要素を、シーケンス・パラメータ・セット(SPS)、ピクチャ・パラメータ・セット(PPS)、付加拡張情報(SEI)メッセージ、ネットワーク抽象化層(NAL)ユニット・ヘッダ、及びスライス・ヘッダのうちの少なくとも1つに書き込み、制御を機能ブロック526に渡す。機能ブロック526は、各ピクチャをMPEG−4 AVC標準又は他の単一ビュー・コデックを使用して符号化し、制御を終了ブロック599に渡す。
図6に移れば、MPEG−4AVC標準を使用して複数のビューのピクチャを復号化する例示的な方法の全体を参照符号600で示す。
方法600は、開始ブロック602を含む。開始ブロック602は制御を機能ブロック604に渡す。機能ブロック604は、シーケンス・パラメータ・セット(SPS)、ピクチャ・パラメータ・セット(PPS)、付加拡張情報(SEI)メッセージ、ネットワーク抽象化(NAL)ユニット・ヘッダ、及びスライス・ヘッダのうちの少なくとも1つからの以下の構文要素を解析し、制御を機能ブロック606に渡す。機能ブロック606は、構文要素num_coded_views_minus1を解析し、制御を機能ブロック608に渡す。機能ブロック608は、構文要素org_pic_width_in_mbs_minus1及びorg_pic_height_in_mbs_minus1を解析し、制御を機能ブロック610に渡す。機能ブロック610は変数iをゼロに等しくセットし、制御を決定ブロック612に渡す。決定ブロック612は、変数iがビュー数未満であるか否かを判定する。肯定の場合、制御を機能ブロック614に渡す。さもなければ、制御を機能ブロック624に渡す。
機能ブロック614は、構文要素view_id[i]を解析し、制御を機能ブロック616に渡す。機能ブロック616は、構文要素num_parts_minus1[view_id[i]]を解析し、制御を機能ブロック618に渡す。機能ブロック618は変数jをゼロに等しくセットし、制御を決定ブロック620に渡す。決定ブロック620は、変数jの現在値が構文要素num_parts[view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック622に渡す。さもなければ、制御を機能ブロック628に渡す。
機能ブロック622は、
depth_flag[view_id[i]][j];
flip_dir[view_id[i]][j];
loc_left_offset[view_id[i]][j];
loc_top_offset[view_id[i]][j];
frame_crop_left_offset[view_id[i]][j];
frame_crop_right_offset[view_id[i]][j];
frame_crop_top_offset[view_id[i]][j]; 及び
frame_crop_bottom_offset[view_id[i]][j]
の構文要素を解析し、変数jを増やし、次いで、制御を決定ブロック620に戻す。
機能ブロック628は構文要素upsample_view_flag[view_id[i]]を解析し、制御を決定ブロック630に渡す。決定ブロック630は、構文要素upsample_view_flag[view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック632に渡す。さもなければ、制御を決定ブロック634に渡す。
機能ブロック632は構文要素upsample_filter[view_id[i]]を解析し、制御を決定ブロック634に渡す。
決定ブロック634は、構文要素upsample_filter[view_id[i]]の現在値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック636に渡す。さもなければ、制御を機能ブロック640に渡す。
機能ブロック636は、
vert_dim[view_id[i]];
hor_dim[view_id[i]]; 及び quantizer[view_id[i]]
の構文要素を解析し、制御を機能ブロック638に渡す。
機能ブロック638は、YUV成分毎にフィルタ係数を解析し、制御を機能ブロック640に渡す。
機能ブロック640は、変数iを増やし、制御を決定ブロック612に戻す。
機能ブロック624は、MPEG−4AVC標準又は他の単一ビュー・コデックを使用して各ピクチャを復号化し、制御を機能ブロック626に渡す。機能ブロック626は各ビューをピクチャから、高位構文を使用して分離し、制御を終了ブロック699に渡す。
図7に移れば、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを符号化する例示的な方法の全体を参照符号700で示す。
方法700は、開始ブロック702を含む。開始ブロック702は制御を機能ブロック704に渡す。機能ブロック704は、特定の時点における各ビュー及び対応する深度を、タイル形式におけるサブピクチャとして配置し、制御を機能ブロック706に渡す。機能ブロック706は構文要素num_coded_views_minus1をセットし、制御を機能ブロック708に渡す。機能ブロック708は構文要素org_pic_width_in_mbs_minus1及びorg_pic_height_in_mbs_minus1をセットし、制御を機能ブロック710に渡す。機能ブロック710は変数iをゼロに等しくセットし、制御を決定ブロック712に渡す。決定ブロック712は、変数iがビュー数未満であるか否かを判定する。肯定の場合、制御を機能ブロック714に渡す。さもなければ、制御を機能ブロック724に渡す。
機能ブロック714は、構文要素view_id[i]をセットし、制御を機能ブロック716に渡す。機能ブロック716は、構文要素num_parts[view_id[i]]をセットし、制御を機能ブロック718に渡す。機能ブロック718は、変数jをゼロに等しくセットし、制御を決定ブロック720に渡す。決定ブロック720は、変数jの現在値が構文要素num_parts[view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック722に渡す。さもなければ、制御を機能ブロック728に渡す。
機能ブロック722は、depth_flag[view_id[i]][j];
flip_dir[view_id[i]][j];
loc_left_offset[view_id[i]][j];
loc_top_offset[view_id[i]][j];
frame_crop_left_offset[view_id[i]][j];
frame_crop_right_offset[view_id[i]][j];
frame_crop_top_offset[view_id[i]][j]; 及び
frame_crop_bottom_offset[view_id[i]][j]
の構文要素をセットし、変数jを増やし、次いで制御を決定ブロック720に戻す。
機能ブロック728は構文要素upsample_view_flag[view_id[i]]をセットし、制御を決定ブロック730に渡す。決定ブロック730は、構文要素upsample_view_flag[view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック732に渡す。さもなければ、制御を決定ブロック734に渡す。
機能ブロック732は構文要素upsample_filter[view_id[i]]をセットし、制御を決定ブロック734に渡す。
決定ブロック734は、構文要素upsample_filter[view_id[i]]の現在値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック736に渡す。さもなければ、制御を機能ブロック740に渡す。
機能ブロック736は、
vert_dim[view_id[i]];
hor_dim[view_id[i]]; 及び
quantizer[view_id[i]]
の構文要素をセットし、制御を機能ブロック738に渡す。
機能ブロック738は、YUV成分毎にフィルタ係数をセットし、制御を機能ブロック740に渡す。
機能ブロック740は、変数iを増やし、制御を決定ブロック712に戻す。
機能ブロック724は前述の構文要素を、シーケンス・パラメータ・セット(SPS)、ピクチャ・パラメータ・セット(PPS)、付加拡張情報(SEI)メッセージ、ネットワーク抽象化層(NAL)ユニット・ヘッダ、及びスライス・ヘッダのうちの少なくとも1つに書き込み、制御を機能ブロック726に渡す。機能ブロック726は、MPEG−4 AVC標準や他の単一ビュー・コデックを使用して各ピクチャを符号化し、制御を終了ブロック799に渡す。
図8に移れば、MPEG−4AVC標準を使用して複数のビュー及び深度のピクチャを復号化する例示的な方法の全体を参照符号800で示す。
方法800は、開始ブロック802を含む。開始ブロック802は制御を機能ブロック804に渡す。機能ブロック804は、シーケンス・パラメータ・セット(SPS)、ピクチャ・パラメータ・セット(PPS)、付加拡張情報(SEI)メッセージ、ネットワーク抽象化(NAL)ユニット・ヘッダ、及びスライス・ヘッダのうちの少なくとも1つからの以下の構文要素を解析し、制御を機能ブロック806に渡す。機能ブロック806は、構文要素num_coded_views_minus1を解析し、制御を機能ブロック808に渡す。機能ブロック808は、構文要素org_pic_width_in_mbs_minus1及びorg_pic_height_in_mbs_minus1を解析し、制御を機能ブロック810に渡す。機能ブロック810は変数iをゼロに等しくセットし、制御を決定ブロック812に渡す。決定ブロック812は、変数iがビュー数未満であるか否かを判定する。肯定の場合、制御を機能ブロック814に渡す。さもなければ、制御を機能ブロック824に渡す。
機能ブロック814は、構文要素view_id[i]を解析し、制御を機能ブロック816に渡す。機能ブロック816は、構文要素num_parts_minus1[view_id[i]]を解析し、制御を機能ブロック818に渡す。機能ブロック818は変数jをゼロに等しくセットし、制御を決定ブロック820に渡す。決定ブロック820は、変数jの現在値が構文要素num_parts[view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック822に渡す。さもなければ、制御を機能ブロック828に渡す。
機能ブロック822は、
depth_flag[view_id[i]][j];
flip_dir[view_id[i]][j];
loc_left_offset[view_id[i]][j];
loc_top_offset[view_id[i]][j];
frame_crop_left_offset[view_id[i]][j];
frame_crop_right_offset[view_id[i]][j];
frame_crop_top_offset[view_id[i]][j]; 及び
frame_crop_bottom_offset[view_id[i]][j]
の構文要素をセットし、変数jを増やし、次いで制御を決定ブロック820に戻す。
機能ブロック828は構文要素upsample_view_flag[view_id[i]]をセットし、制御を決定ブロック830に渡す。決定ブロック830は、構文要素upsample_view_flag[view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック832に渡す。さもなければ、制御を決定ブロック834に渡す。
機能ブロック832は構文要素upsample_filter[view_id[i]]を解析し、制御を決定ブロック834に渡す。
決定ブロック834は、構文要素upsample_filter[view_id[i]]の現在値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック836に渡す。さもなければ、制御を機能ブロック840に渡す。
機能ブロック836は、
vert_dim[view_id[i]];
hor_dim[view_id[i]]; 及び
quantizer[view_id[i]]
の構文要素を解析し、制御を機能ブロック838に渡す。
機能ブロック838は、YUV成分毎にフィルタ係数を解析し、制御を機能ブロック840に渡す。
機能ブロック840は変数iを増やし、制御を決定ブロック812に戻す。
機能ブロック824は、MPEG−4 AVC標準又は他の単一ビュー・コデックを使用して各ピクチャを復号化し、制御を機能ブロック826に渡す。機能ブロック826は、各ビュー及び対応する深度をピクチャから高位構文を使用して分離し、制御を機能ブロック827に渡す。機能ブロック827は潜在的には、抽出されたビュー信号及び深度信号を使用してビュー合成を行い、制御を終了ブロック899に渡す。
図7及び図8において使用した深度に関して、図9は、深度信号900の例を示す(深度は、画像(図示せず)の対応する場所毎の画素値として備えられる)。更に、図10は、タイル1000に含まれた2つの深度信号の例を示す。タイル1000の右上部分は、タイル1000の左上の画像に対応する深度値を有する深度信号である。タイル1000の右下部分は、タイル1000の左下の画像に対応する深度値を有する深度信号である。
図11に移れば、単一のフレーム上にタイリングされた5つのビューの例の全体を参照符号1100で示す。上の4つのビューは全て、通常の向きにある。5番目のビューも通常の向きにあるが、タイル1100の底部に沿って2つの部分に分割されている。5番目のビューの左部分は5番目のビューの「最上部」を示し、5番目のビューの右部分は5番目のビューの「底部」を示す。
マルチビュー・ビデオ符号化/復号化の標準/勧告を使用した符号化/復号化
図12に移れば、例示的なマルチビュー・ビデオ符号化(MVC)符号化器の全体を参照符号1200で示す。符号化器1200は、変換器1210の入力と信号通信で接続された出力を有する合成器1205を含む。変換器1210の出力は、量子化器1215の入力と信号通信で接続される。量子化器1215の出力はエントロピ符号化器1220の入力及び逆量子化器1225の入力と信号通信で接続される。逆量子化器1225の出力は逆変換器1230の入力と信号通信と接続される。逆変換器1230の出力は合成器1235の第1の非反転入力と信号通信で接続される。合成器1235の出力はイントラ予測器1245の入力及びデブロッキング・フィルタ1250の入力と信号通信で接続される。デブロッキング・フィルタ1250の出力は、(ビューiの)参照ピクチャ記憶装置1255の入力と信号通信で接続される。参照ピクチャ記憶装置1255の出力は、動き補償器1275の第1の入力及び動き推定器1280の第1の入力と信号通信で接続される。動き推定器1280の出力は、動き補償器1275の第2の入力と信号通信で接続される。(他のビューの)参照ピクチャ記憶装置1260の出力は、視差推定器1270の第1の入力及び視差補償器1265の第1の入力と信号通信で接続される。視差推定器1270の出力は、視差補償器1265の第2の入力と信号通信で接続される。
エントロピ復号化器1220の出力は符号化器1200の出力として利用可能である。合成器1205の非反転入力は、符号化器1200の入力として利用可能であり、視差推定器1270の第2の入力及び動き推定器1280の第2の入力と信号通信で接続される。スイッチ1285の出力は、合成器1235の第2の非反転入力及び合成器1205の反転入力と信号通信で接続される。スイッチ1285は、動き補償器1275の出力と信号通信で接続された第1の入力と、視差補償器1265の出力と信号通信で接続された第2の入力と、イントラ予測器1245の出力と信号通信で接続された第3の入力とを含む。
モード決定モジュール1240は、スイッチ1285によって選択される入力がどれであるかを制御するために、スイッチ1285に接続された出力を有する。
図13に移れば、例示的なマルチビュー・ビデオ符号化(MVC)復号化器の全体を参照符号1300で示す。復号化器1300は、逆量子化器1310の入力と信号通信で接続された出力を有するエントロピ復号化器1305を含む。逆量子化器の出力は、逆変換器1315の入力と信号通信で接続される。逆変換器1315の出力は合成器1320の第1の非反転入力と信号通信で接続される。合成器1320の出力は、デブロッキング・フィルタ1325の入力及びイントラ予測器1330の入力と信号通信で接続される。デブロッキング・フィルタ1325の出力は、(ビューiの)参照ピクチャ記憶装置1340の入力と信号通信で接続される。参照ピクチャ記憶装置1340の出力は、動き補償器1335の第1の入力と信号通信で接続される。
(他のビューの)参照ピクチャ記憶装置1345の出力は、視差補償器1350の第1の入力と信号通信で接続される。
エントロピ符号化器1305の入力は、残差ビットストリームを受け取るために、復号化器1300の入力として利用可能である。更に、エントロピ符号化器1360の入力は、スイッチ1355によって選択される入力がどれであるかを制御するために制御構文を受け取るために、復号化器1300への入力としても利用可能である。更に、動き補償器1355の第2の入力は、動きベクトルを受け取るために、復号化器1300の入力として利用可能である。更に、視差補償器1350の第2の入力は、視差ベクトルを受け取るために、復号化器1300への入力として利用可能である。
スイッチ1355の出力は合成器1320の第2の非反転入力と信号通信で接続される。スイッチ1355の第1の入力は視差補償器1350の出力と信号通信で接続される。スイッチ1355の第2の入力は、動き補償器1335の出力と信号通信で接続される。スイッチ1355の第3の入力は、イントラ予測器1330の出力と信号通信で接続される。モード・モジュール1360の出力は、スイッチ1355によって選択される入力がどれであるかを制御するために、スイッチ1355と信号通信で接続される。デブロッキング・フィルタ1325の出力は、復号化器1300の出力として利用可能である。
図14に移れば、MPEG−4 AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの符号化に備えて複数のビューのピクチャを処理する例示的な方法の全体を参照符号1400で示す。
方法1400は、開始ブロック1405を含む。開始ブロック1405は制御を機能ブロック1410に渡す。機能ブロック1410は、特定の時点で、合計M個のビューのうちのN個のビュー毎に、タイル形式におけるスーパー・ピクチャとして配置し、制御を機能ブロック1415に渡す。機能ブロック1415は、構文要素num_coded_views_minus1をセットし、制御を機能ブロック1420に渡す。機能ブロック1420は、 (num_coded_views_minus1 +
1)個のビュー全てについて構文要素view_id[i]をセットし、制御をブロック1425に渡す。機能ブロック1425はアンカ・ピクチャのビュー間参照依存性情報をセットし、制御を機能ブロック1430に渡す。機能ブロック1430は、非アンカ・ピクチャのビュー間参照依存性情報をセットし、制御を機能ブロック1435に渡す。機能ブロック1435は、構文要素pseudo_view_present_flagをセットし、制御を決定ブロック1440に渡す。決定ブロック1440は、構文要素pseudo_view_present_flagの現在値がtrueに等しいか否かを判定する。肯定の場合、制御を機能ブロック1445に渡す。さもなければ、制御を終了ブロック1499に渡す。
機能ブロック1445は、
tiling_mode;
org_pic_width_in_mbs_minus1 ; 及び
org_pic_height_in_mbs_minus1
の構文要素をセットし、制御を機能ブロック1450に渡す。機能ブロック1450は、符号化ビュー毎に構文要素pseudo_view_info(view_id)を呼び出し、制御を終了ブロック1499に渡す。
図15に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビューのピクチャを符号化する例示的な方法の全体を参照符号1500で示す。
方法1500は開始ブロック1502を含む。開始ブロック1502は、入力パラメータ pseudo_view_idを有し、制御を機能ブロック1504に渡す。機能ブロック1504は、構文要素num_sub_views_minus1をセットし、制御を機能ブロック1506に渡す。機能ブロック1506は、変数iをゼロに等しくセットし、制御を決定ブロック1508に渡す。決定ブロック1508は、変数iがsub_viewsの数未満であるか否かを判定する。肯定の場合、制御を機能ブロック1510に渡す。さもなければ、制御を機能ブロック1520に渡す。
機能ブロック1510は、構文要素sub_view_id[i]をセットし、制御を機能ブロック1512に渡す。機能ブロック1512は、構文要素num_parts_minus1[sub_view_id[i]]をセットし、制御を機能ブロック1514に渡す。機能ブロック1514は変数jをゼロに等しくセットし、制御を決定ブロック1516に渡す。決定ブロック1516は、変数jが構文要素num_parts[sub_view_id[i]]未満であるか否かを判定する。肯定の場合、制御を機能ブロック1518に渡す。さもなければ、制御を決定ブロック1522に渡す。
機能ブロック1518は、
loc_left_offset[sub_view_id[i]][j];
loc_top_offset[sub_view_id[i]][j];
frame_crop_left_offset[sub_view_id[i]][j];
frame_crop_right_offset[sub_view_id[i]][j];
frame_crop_top_offset[sub_view_id[i]][j];
及び
frame_crop_bottom_offset[sub_view_id[i][j].
の構文要素をセットし、変数jを増やし、制御を決定ブロック1516に戻す。
機能ブロック1520は、マルチビュー・ビデオ符号化(MVC)を使用して現在のビューの現在のピクチャを符号化し、制御を終了ブロック1599に渡す。
決定ブロック1522は、構文要素tiling_modeがゼロに等しいか否かを判定する。肯定の場合、制御を機能ブロック1524に渡す。さもなければ、制御を機能ブロック1538に渡す。
機能ブロック1524は、構文要素flip_dir[sub_view_id[i]]及び構文要素upsample_view_flag[sub_view_id[i]]をセットし、制御を決定ブロック1526に渡す。決定ブロック1526は、構文要素upsample_view_flag[sub_view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック1528に渡す。さもなければ、制御を決定ブロック1530に渡す。
機能ブロック1528は構文要素upsample_filter[sub_view_id[i]]をセットし、制御を決定ブロック1530に渡す。決定ブロック1530は、構文要素upsample_filter[sub_view_id[i]]の値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック1532に渡す。さもなければ、制御を機能ブロック1536に渡す。
機能ブロック1532は、
vert_dim[sub_view_id[i]];
hor_dim[sub_view_id[i]]; 及び
quantizer[sub_view_id[i]]
の構文要素をセットし、制御を機能ブロック1534に渡す。機能ブロック1534は、YUV成分毎にフィルタ係数をセットし、制御を機能ブロック1536に渡す。
機能ブロック1536は変数iを増やし、制御を決定ブロック1508に戻す。
機能ブロック1538は、構文要素pixel_dist_x[sub_view_id[i]]及び構文要素flip_dist_y[sub_view_id[i]]をセットし、制御を機能ブロック1540に渡す。機能ブロック1540は変数jをゼロに等しくセットし、制御を決定ブロック1542に渡す。決定ブロック1542は、変数jの現在値が構文要素num_parts[sub_view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック1544に渡す。さもなければ、制御を機能ブロック1536に渡す。
機能ブロック1544は構文要素num_pixel_tiling_filter_coeffs_minus1[sub_view_id[i]]をセットし、制御を機能ブロック1546に渡す。機能ブロック1546は、画素タイリング・フィルタ全ての係数をセットし、制御を機能ブロック1536に渡す。
図16に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの復号化に備えて複数のビューのピクチャを処理する例示的な方法の全体を参照符号1600で示す。
方法1600は、開始ブロック1605を含み、開始ブロック1605は機能ブロック1615に制御を渡す。機能ブロック1615は、構文要素num_coded_views_minus1を解析し、制御を機能ブロック1620に渡す。機能ブロック1620は、 (num_coded_views_minus1 + 1)個のビュー全ての構文要素view_id[i]を解析し、制御を機能ブロック1625に渡す。機能ブロック1625はアンカ・ピクチャのビュー間参照依存性情報を解析し、制御を機能ブロック1630に渡す。機能ブロック1630は非アンカ・ピクチャのビュー間参照依存性情報を解析し、制御を機能ブロック1635に渡す。機能ブロック1635は、構文要素pseudo_view_present_flagを解析し、制御を決定ブロック1640に渡す。決定ブロック1640は、構文要素pseudo_view_present_flagの現在値がtrueに等しいか否かを判定する。肯定の場合、制御を機能ブロック1645に渡す。さもなければ、制御を終了ブロック1699に渡す。
機能ブロック1645は、
tiling_mode;
org_pic_width_in_mbs_minus1; 及び
org_pic_height_in_mbs_minus1
の構文要素を解析し、制御を機能ブロック1650に渡す。機能ブロック1650は、符号化ビュー毎に構文要素pseudo_view_info(view_id)を呼び出し、制御を終了ブロック1699に渡す。
図17に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビューのピクチャを復号化する例示的な方法の全体を参照符号1700で示す。
方法1700は開始ブロック1702を含む。開始ブロック1702は、入力パラメータpseudo_view_idから始まり、制御を機能ブロック1704に渡す。機能ブロック1704は、構文要素num_sub_views_minus1を解析し、制御を機能ブロック1706に渡す。機能ブロック1706は、変数iをゼロに等しくセットし、制御を決定ブロック1708に渡す。決定ブロック1708は、変数iがsub_viewsの数未満であるか否かを判定する。肯定の場合、制御を機能ブロック1710に渡す。さもなければ、制御を機能ブロック1720に渡す。
機能ブロック1710は、構文要素sub_view_id[i]を解析し、制御を機能ブロック1712に渡す。機能ブロック1712は、構文要素num_parts_minus1[sub_view_id[i]]を解析し、制御を機能ブロック1714に渡す。機能ブロック1714は変数jをゼロに等しくセットし、制御を決定ブロック1716に渡す。決定ブロック1716は、変数jが構文要素num_parts_minus1[sub_view_id[ i ]]]未満であるか否かを判定する。肯定の場合、制御を機能ブロック1718に渡す。さもなければ、制御を決定ブロック1722に渡す。
機能ブロック1718は、
loc_left_offset[sub_view_id[i]][j];
loc_top_offset[sub_view_id[i]][j];
frame_crop_left_offset[sub_view_id[i]][j];
frame_crop_right_offset[sub_view_id[i]][j];
frame_crop_top_offset[sub_view_id[i]][j]; 及び
frame_crop_bottom_offset[sub_view_id[i]][j]
の構文要素をセットし、変数jを増やし、制御を決定ブロック1716に戻す。
機能ブロック1720は、マルチビュー・ビデオ符号化(MVC)を使用して現在のビューの現在のピクチャを復号化し、制御を機能ブロック1721に渡す。機能ブロック1721は、各ビューをピクチャから高位構文を使用して分離し、制御を終了ブロック1799に渡す。
各ビューの復号化ピクチャとの分離は、ビットストリームに示された高位構文を使用して行われる。この高位構文は、ピクチャにおいて存在しているビューの考えられる向き(及び考えられる対応する深度)並びに厳密な位置を示し得る。
決定ブロック1722は、構文要素tiling_modeがゼロに等しいか否かを判定する。肯定の場合、制御を機能ブロック1724に渡す。さもなければ、制御を機能ブロック1738に渡す。
機能ブロック1724は、構文要素flip_dir[sub_view_id[i]]及び構文要素upsample_view_flag[sub_view_id[i]]を解析し、制御を決定ブロック1726に渡す。決定ブロック1726は、構文要素upsample_view_flag[sub_view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック1728に渡す。さもなければ、制御を決定ブロック1730に渡す。
機能ブロック1728は構文要素upsample_filter[sub_view_id[i]]を解析し、制御を決定ブロック1730に渡す。決定ブロック1730は、構文要素upsample_filter[sub_view_id[i]]の値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック1732に渡す。さもなければ、制御を機能ブロック1736に渡す。
機能ブロック1732は、
vert_dim[sub_view_id[i]];
hor_dim[sub_view_id[i]]; 及び
quantizer[sub_view_id[i]]
の構文要素を解析し、制御を機能ブロック1734に渡す。機能ブロック1734は、YUV成分毎にフィルタ係数を解析し、制御を機能ブロック1736に渡す。
機能ブロック1736は変数iを増やし、制御を決定ブロック1708に戻す。
機能ブロック1738は、構文要素pixel_dist_x[sub_view_id[i]]及び構文要素flip_dist_y[sub_view_id[i]]を解析し、制御を機能ブロック1740に渡す。機能ブロック1740は変数jをゼロに等しくセットし、制御を決定ブロック1742に渡す。決定ブロック1742は、変数jの現在値が構文要素num_parts[sub_view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック1744に渡す。さもなければ、制御を機能ブロック1736に渡す。
機能ブロック1744は構文要素num_pixel_tiling_filter_coeffs_minus1[sub_view_id[i]]を解析し、制御を機能ブロック1746に渡す。機能ブロック1776は、画素タイリング・フィルタ全ての係数を解析し、制御を機能ブロック1736に渡す。
図18に移れば、MPEG−4 AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの符号化に備えて複数のビュー及び深度のピクチャを処理する例示的な方法の全体を参照符号1800で示す。
方法1800は開始ブロック1805を含む。開始ブロック1805は制御を機能ブロック1810に渡す。機能ブロック1810は、特定の時点で、合計M個のビュー及び深度マップのうちのN個のビュー及び深度マップ毎に、タイル形式におけるスーパー・ピクチャとして配置し、制御を機能ブロック1815に渡す。機能ブロック1815は、構文要素num_coded_views_minus1をセットし、制御を機能ブロック1820に渡す。機能ブロック1820は、view_id[i]に対応する(num_coded_views_minus1 + 1)個の深度全てについて構文要素view_id[i]をセットし、制御を機能ブロック1825に渡す。機能ブロック1825はアンカ深度ピクチャのビュー間参照依存性情報をセットし、制御を機能ブロック1830に渡す。機能ブロック1830は、非アンカ深度ピクチャのビュー間参照依存性情報をセットし、制御を機能ブロック1835に渡す。機能ブロック1835は、構文要素pseudo_view_present_flagをセットし、制御を決定ブロック1840に渡す。決定ブロック1840は、構文要素pseudo_view_present_flagの現在値がtrueに等しいか否かを判定する。肯定の場合、制御を機能ブロック1845に渡す。さもなければ、制御を終了ブロック1899に渡す。
機能ブロック1845は、
tiling_mode;
org_pic_width_in_mbs_minus1; 及び
org_pic_height_in_mbs_minus1
の構文要素をセットし、制御を機能ブロック1850に渡す。機能ブロック1850は、符号化ビュー毎に構文要素pseudo_view_info(view_id)を呼び出し、制御を終了ブロック1899に渡す。
図19に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを符号化する例示的な方法の全体を参照符号1900で示す。
方法1900は開始ブロック1902を含む。開始ブロック1902は、制御を機能ブロック1904に渡す。機能ブロック1904は、構文要素num_sub_views_minus1をセットし、制御を機能ブロック1906に渡す。機能ブロック1906は、変数iをゼロに等しくセットし、制御を決定ブロック1908に渡す。決定ブロック1908は、変数iがsub_viewsの数未満であるか否かを判定する。肯定の場合、制御を機能ブロック1910に渡す。さもなければ、制御を機能ブロック1920に渡す。
機能ブロック1910は、構文要素sub_view_id[i]をセットし、制御を機能ブロック1912に渡す。機能ブロック1912は、構文要素num_parts_minus1[sub_view_id[i]]をセットし、制御を機能ブロック1914に渡す。機能ブロック1914は変数jをゼロに等しくセットし、制御を決定ブロック1916に渡す。決定ブロック1916は、変数jが構文要素num_parts_minus1[sub_view_id[i]]未満であるか否かを判定する。肯定の場合、制御を機能ブロック1918に渡す。さもなければ、制御を決定ブロック1922に渡す。
機能ブロック1918は、
loc_left_offset[sub_view_id[i]][j];
loc_top_offset[sub_view_id[i]][j];
frame_crop_left_offset[sub_view_id[i]][j];
frame_crop_right_offset[sub_view_id[i]][j];
frame_crop_top_offset[sub_view_id[i]][j];
及び
frame_crop_bottom_offset[sub_view_id[i]][j]
の構文要素をセットし、変数jを増やし、制御を決定ブロック1916に戻す。
機能ブロック1920は、マルチビュー・ビデオ符号化(MVC)を使用して現在のビューの現在の深度を符号化し、制御を終了ブロック1999に渡す。深度信号は、その対応するビデオ信号が符号化されるやり方と同様に符号化することができる。例えば、ビューの深度信号は、他の深度信号のみ、ビデオ信号のみ、又は深度信号及びビデオ信号を含むタイル上に含まれ得る。タイル(疑似ビュー)はその場合、MVCの単一ビューとして扱われ、MVCの他のビューとして扱われる他のタイルも存在していると思われる。
決定ブロック1922は、構文要素tiling_modeがゼロに等しいか否かを判定する。肯定の場合、制御を機能ブロック1924に渡す。さもなければ、制御を機能ブロック1938に渡す。
機能ブロック1924は、構文要素flip_dir[sub_view_id[i]]及び構文要素upsample_view_flag[sub_view_id[i]]をセットし、制御を決定ブロック1926に渡す。決定ブロック1926は、構文要素upsample_view_flag[sub_view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック1928に渡す。さもなければ、制御を決定ブロック1930に渡す。
機能ブロック1928は構文要素upsample_filter[sub_view_id[i]]をセットし、制御を決定ブロック1930に渡す。決定ブロック1930は、構文要素upsample_filter[sub_view_id[i]]の値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック1932に渡す。さもなければ、制御を機能ブロック1936に渡す。
機能ブロック1932は、vert_dim[sub_view_id[i]];
hor_dim[sub_view_id[i]]; 及び
quantizer[sub_view_id[i]]
の構文要素をセットし、制御を機能ブロック1934に渡す。機能ブロック1934は、YUV成分毎にフィルタ係数をセットし、制御を機能ブロック1936に渡す。
機能ブロック1936は変数iを増やし、制御を決定ブロック1908に渡す。
機能ブロック1938は、構文要素pixel_dist_x[sub_view_id[i]]及び構文要素flip_dist_y[sub_view_id[i]]をセットし、制御を機能ブロック1940に渡す。機能ブロック1940は変数jをゼロにセットし、制御を決定ブロック1942に渡す。決定ブロック1942は、変数jの現在値が構文要素num_parts[sub_view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック1944に渡す。さもなければ、制御を機能ブロック1936に渡す。
機能ブロック1944は、構文要素num_pixel_tiling_fιlter_coeffs_minus1[sub_view_id[i]]をセットし、制御を機能ブロック1946に渡す。機能ブロック1946は、画素タイリング・フィルタ全ての係数をセットし、制御を機能ブロック1936に渡す。
図20に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用したピクチャの復号化に備えて複数のビュー及び深度のピクチャを処理する例示的な方法の全体を参照符号2000で示す。
方法2000は開始ブロック2005を含み、開始ブロック2005は制御を機能ブロック2015に渡す。機能ブロック2015は構文要素num_coded_views_minus1を解析し、制御を機能ブロック2020に渡す。機能ブロック2020は、view_id[i]に対応する(num_coded_views_minus1 + 1)個の深度全ての構文要素view_id[i]を解析し、制御を機能ブロック2025に渡す。機能ブロック2025は、アンカ深度ピクチャのビュー間参照依存性情報を解析し、制御を機能ブロック2030に渡す。機能ブロック2030は、非アンカ深度ピクチャのビュー間参照依存性情報を解析し、制御を機能ブロック2035に渡す。機能ブロック2035は、構文要素pseudo_view_present_flagを解析し、制御を決定ブロック2040に渡す。決定ブロック2040は、構文要素pseudo_view_present_flagの現在値がtrueに等しいか否かを判定する。肯定の場合、制御を機能ブロック2045に渡す。さもなければ、制御を機能ブロック2099に渡す。
機能ブロック2045は、
tiling_mode;
org_pic_width_in_mbs_minus1; 及び
org_pic_height_in_mbs_minus1
の構文要素をセットし、制御を機能ブロック2050に渡す。機能ブロック2050は、符号化ビュー毎に構文要素pseudo_view_info(view_id)を呼び出し、制御を終了ブロック2099に渡す。
図21に移れば、MPEG−4AVC標準のマルチビュー・ビデオ符号化(MVC)の拡張を使用して複数のビュー及び深度のピクチャを復号化する例示的な方法の全体を参照符号2100で示す。
方法2100は開始ブロック2102を含む。開始ブロック2102は、入力パラメータpseudo_view_idから始まり、制御を機能ブロック2104に渡す。機能ブロック2104は、構文要素num_sub_views_minus1を解析し、制御を機能ブロック2106に渡す。機能ブロック2106は、変数iをゼロに等しくセットし、制御を決定ブロック2108に渡す。決定ブロック2108は、変数iがsub_viewsの数未満であるか否かを判定する。肯定の場合、制御を機能ブロック2110に渡す。さもなければ、制御を機能ブロック2120に渡す。
機能ブロック2110は、構文要素sub_view_id[i]を解析し、制御を機能ブロック2112に渡す。機能ブロック2112は、構文要素num_parts_minus1[sub_view_id[i]]を解析し、制御を機能ブロック2114に渡す。機能ブロック2114は変数jをゼロに等しくセットし、制御を決定ブロック2116に渡す。決定ブロック2116は、変数jが構文要素num_parts_minus1[sub_view_id[ i ]]未満であるか否かを判定する。肯定の場合、制御を機能ブロック2118に渡す。さもなければ、制御を決定ブロック2122に渡す。
機能ブロック2118は、
loc_left_offset[sub_view_id[i]][j];
loc_top_offset[sub_view_id[i]][j];
frame_crop_left_offset[sub_view_id[i]][j];
frame_crop_right_offset[sub_view_id[i]][j];
frame_crop_top_offset[sub_view_id[i]][j];
及び
frame_crop_bottom_offset[sub_view_id[i]][j]
の構文要素をセットし、変数jを増やし、制御を決定ブロック2116に戻す。
機能ブロック2120は、マルチビュー・ビデオ符号化(MVC)を使用して現在のピクチャを復号化し、制御を機能ブロック2121に渡す。機能ブロック2121は、各ビューをピクチャから高位構文を使用して分離し、制御を終了ブロック2199に渡す。高位構文を使用した、各ビューの分離は上述の通りである。
決定ブロック2122は、構文要素tiling_modeがゼロに等しいか否かを判定する。肯定の場合、制御を機能ブロック2124に渡す。さもなければ、制御を機能ブロック2138に渡す。
機能ブロック2124は、構文要素flip_dir[sub_view_id[i]]及び構文要素upsample_view_flag[sub_view_id[i]]を解析し、制御を決定ブロック2126に渡す。決定ブロック2126は、構文要素upsample_view_flag[sub_view_id[i]]の現在値が1に等しいか否かを判定する。肯定の場合、制御を機能ブロック2128に渡す。さもなければ、制御を決定ブロック2130に渡す。
機能ブロック2128は、構文要素upsample_filter[sub_view_id[i]]を解析し、制御を決定ブロック2130に渡す。決定ブロック2130は、構文要素upsample_filter[sub_view_id[i]]の値が3に等しいか否かを判定する。肯定の場合、制御を機能ブロック2132に渡す。さもなければ、制御を機能ブロック2136に渡す。
機能ブロック2132は、
vert_dim[sub_view_id[i]];
hor_dim[sub_view_id[i]]; 及び
quantizer[sub_view_id[i]]
の構文要素を解析し、制御を機能ブロック2134に渡す。機能ブロック2134は、YUV成分毎にフィルタ係数を解析し、制御を機能ブロック2136に渡す。
機能ブロック2136は変数iを増やし、制御を決定ブロック2108に戻す。
機能ブロック2138は、構文要素pixel_dist_x[sub_view_id[i]]及び構文要素flip_dist_y[sub_view_id[i]]を解析し、制御を機能ブロック2140に渡す。機能ブロック2140は変数jをゼロに等しくセットし、制御を決定ブロック2142に渡す。決定ブロック2142は、変数jの現在値が構文要素num_parts[sub_view_id[i]]の現在値未満であるか否かを判定する。肯定の場合、制御を機能ブロック2144に渡す。さもなければ、制御を機能ブロック2136に渡す。
機能ブロック2144は、構文要素num_pixel_tiling_filter_coeffs_minus1[sub_view_id[i]]を解析し、制御を機能ブロック2146に渡す。機能ブロック2146は、画素タイリング・フィルタ全ての係数を解析し、制御を機能ブロック2136に渡す。
図22に移れば、画素レベルにおけるタイリング例の全体を参照符号2200で示す。図22は以下に更に説明する。
MPEG−4AVC又はMVCを使用したビューのタイリング
マルチビュー・ビデオ符号化の一アプリケーションに、自由視点TV(すなわちFTV)がある。前述のアプリケーションは、2つ以上のビュー間でユーザが自由に移動可能であることを必要とする。このことを達成するために、2つのビュー間の「仮想」ビューを補間又は合成する必要がある。ビュー補間を実行するための手法はいくつか存在している。上記手法の1つは、ビュー補間/合成に深度を使用する。
各ビューは、関連付けられた深度信号を有し得る。よって、深度は、ビデオ信号の別の形式とみなし得る。図9は、深度信号900の例を示す。FTVなどのアプリケーションをイネーブルするために、深度信号がビデオ信号とともに送信される。提案されたタイリング・フレームワークでは、深度信号は、タイルの1つとして加えることも可能である。図10は、タイルとして加えられた深度信号の例を示す。深度信号/タイルは、図10の右側に示す。
深度が、フレーム全体のタイルとして符号化されると、高位構文は、レンダリング器が深度信号を適切に使用することが可能であるように、どのタイルが深度信号であるかを示すものとする。
(図1に示すものなどの)入力シーケンスが、MPEG−4 AVC標準符号化器(又は、別のビデオ符号化標準及び/又は勧告に対応する符号化器)を使用して符号化された場合、本願提案の高位構文は例えば、シーケンス・パラメータ・セット(SPS)、ピクチャ・パラメータ・セット(PPS)、スライス・ヘッダ、及び/又は付加拡張情報(SEI)メッセージに存在し得る。本願提案の方法の実施例を表1に示す。表1では、構文は付加拡張情報(SEI)メッセージに存在している。
(図1に示すものなどの)疑似ビューの入力シーケンスが、MPEG−4AVC標準の符号化器のマルチビュー・ビデオ符号化(MVC)の拡張(又は、別のビデオ符号化標準及び/又は勧告に関するマルチビュー・ビデオ符号化標準に対応する符号化器)を使用して符号化された場合、本願提案の高位構文がSPS、PPS、スライス・ヘッダ、SEIメッセージ、又は特定されたプロファイルに存在し得る。
本願提案の方法の一実施例を表1に示す。表1は、本願の原理の実施例によって提案された構文要素を含む、シーケンス・パラメータ・セット(SPS)構造に存在している構文要素を示す。
Figure 2015092715

表2は、本願の原理の実施例による、表1のpseudo_view_info構文要素の構文要素を示す。
Figure 2015092715
表1及び表2に提示された構文要素の意味規則
pseudo_view_present_flagがtrueに等しいことは、特定のビューが、複数のサブビューのスーパービューであることを示している。
tiling_modeが0に等しいことは、サブビューがピクチャ・レベルでタイリングされる旨を示す。1の値は、タイリングが画素レベルで行われることを示す。
新たなSEIメッセージは、MPEG―4AVC標準、又はMPEG−4AVC標準の拡張において使用されていないSEIペイロード・タイプの値を使用することが可能である。新たなSEIメッセージは、以下の意味規則を有するいくつかの構文要素を含む。
num_coded_views_minus1 plus 1は、ビットストリームによってサポートされる符号化ビューの数を示す。num_coded_views_minus1の値は、0以上1023以下の範囲内にある。
org_pic_width_in_mbs_minus1 plus 1は、各ビューにおけるピクチャの幅をマクロブロック単位で規定する。
マクロブロック単位での、ピクチャ幅の変数は以下のように導き出される。
PicWidthInMbs = org_pic_width_in_mbs_minus1 + 1
luma成分のピクチャ幅の変数は以下のように導き出される。
PicWidthInSamplesL = PicWidthInMbs * 16
chroma成分のピクチャ幅の変数は以下のように導き出される。
PicWidthInSamplesC = PicWidthInMbs * MbWidthC
org_pic_height_in_mbs_minus1 plus 1は、各ビューにおけるピクチャの高さをマクロブロック単位で規定する。
マクロブロック単位での、ピクチャの高さの変数は以下のように導き出される。
PicHeightInMbs = org_pic_height_in_mbs_minus1 + 1
luma成分のピクチャの高さの変数は以下のように導き出される。
PicHeightInSamplesL = PicHeightInMbs * 16
chroma成分のピクチャの高さの変数は以下のように導き出される。
PicHeightInSamplesC = PicHeightInMbs * MbHeightC
num_sub_yiews_minus1 plus 1は、現在のビューに含まれる符号化されたサブビューの数を示す。num_coded_views_minus1の値は、0以上1023以下の範囲内にある。
sub_view_id[i]は、iで示す復号化順序のサブビューのsub_view_idを規定する。
num_parts[sub_yiew_id[i]]は、sub_view_id[i]のピクチャが分割される部分の数を規定する。
loc_left_offset[sub_view_id[i]][j]及びloc_top_offset[sub_view_id[i]][j]はそれぞれ、左画素オフセット及び上画素オフセットにおける位置を規定し、現在の部分jは、ビューの最終再構成ピクチャ内に配置されており、sub_view_idはsub_view_id[i]に等しい。
view_id[i]は、ビューのview idを規定し、符号化順序はiで示す。
frame_crop_left_offset[view_id[i]][j]、frame_crop_right_offset[view_id[i]][j]、frame_crop_top_offset[view_id[i]][j]及びframe_crop_bottom_offset[view_id[i]][j]は、出力するためにフレーム座標に規定された矩形領域について、num_part j及び view_id iの一部である符号化ビデオ・シーケンスにおけるピクチャのサンプルを規定する。
変数CropUnitX及びCropUnitYは以下のように導き出される。
chroma_format_idcが0に等しい場合、CropUnitX及びCropUnitYは以下のように導き出される。
CropUnitX = 1
CropUnitY = 2 − frame_mbs_only_flag
さもなければ(chroma_format_idcは、1、2又は3に等しい場合)、
CropUnitX及びCropUnitYは以下のように導き出される。
CropUnitX = SubWidthC
CropUnitY = SubHeightC (2 −frame_mbs_only_flag)
フレーム・クロップ矩形は、
CropUnitX frame_crop_left_offset乃至PicWidthInSamplesL − (CropUnitX frame_crop_right_offset + 1)の水平フレーム座標を備えたlumaサンプルを含む。垂直フレーム座標は、CropUnitY * frame_crop_top_offset以上(16 FrameHeightInMbs) − (CropUnitY frame_crop_bottom_offset + 1)以下である。frame_crop_left_offsetの値は、0以上(PicWidthInSamplesL / CropUnitX) − (frame_crop_right_offset + 1)以下の範囲内にあるものとし、frame_crop_top_offsetの値は、0以上(16 FrameHeightInMbs / CropUnitY) − (frame_crop_bottom_offset + 1)以下の範囲内にあるものとする。
chroma_format_idcが0に等しくない場合、2つのchromaアレイの対応する規定サンプルは、フレーム座標(x / SubWidthC, y / SubHeightC)を有するサンプルであり、(x,y)は規定lumaサンプルのフレーム座標である。
復号化フィールドの場合、復号化フィールドの規定されたサンプルは、フレーム座標に規定された矩形内に収まるサンプルである。
num_parts[view_id[i]]は、view_id[i]のピクチャが分割される部分の数を規定する。
depth_flag[view_id[i]]は、現在の部分が深度信号であるか否かを規定する。depth_flagが0に等しい場合、現在の部分は深度信号でない。depth_flagが1に等しい場合、現在の部分は、view_id[i]で識別されるビューに関連付けられた深度信号である。
flip_dir[sub_view_id[i]][j]は、現在の部分の反転方向を規定する。flip_dirが0に等しいことは反転がないことを意味し、flip_dirが1に等しいことは水平方向の反転を示し、flip_dirが2に等しいことは垂直方向の反転を示し、flip_dirが3に等しいことは水平方向及び垂直方向の反転を示す。
flip_dir[view_id[i]][j]は現在の部分の反転方向を規定し、flip_dirが0に等しいことは反転がない状態を示し、flip_dirが1に等しいことは水平方向における反転を示し、flip_dirが2に等しいことは垂直方向における反転を示し、flip_dirが3に等しいことは水平方向及び垂直方向における反転を示す。
loc_left_offset[view_id[i]][j]及びloc_top_offset[view_id[i]][j]は、画素オフセットにおける位置を規定し、現在の部分jは、ビューの最終再構成ピクチャ内に配置されており、view_idはid[i]に等しい。
upsample_view_flag[view_id[i]]は、view_id[i]で規定されるビューに属するピクチャをアップサンプリングする必要があるか否かを示す。upsample_view_flag[view_id[i]]が0に等しいことは、view_idがview_id[i]に等しいピクチャがアップサンプリングされないことを規定し、upsample_view_flag[view_id[i]]が1に等しいことは、view_idがview_id[i]に等しいピクチャがアップサンプリングされることを規定している。
upsample_filter[view_id[i]]はアップサンプリングに使用すべきフィルタのタイプを示す。upsample_filter[view_id[i]]が0に等しいことは、6タップのAVCフィルタを使用すべきである旨を示し、upsample_filter[view_id[i]]が1に等しいことは、4タップのSVCフィルタを使用すべきである旨を示し、upsample_filter[view_id[i]]が2であることは、バイリニア・フィルタを使用すべきである旨を示し、upsample_filter[view_id[i]]が3であることは、カスタム・フィルタ係数が送信される旨を示す。upsample_fiter[view_id[i]]は、存在しない場合、0にセットされる。この実施例では、カスタム化された2Dフィルタを使用する。これは、1Dフィルタに、及び特定の他の非線形フィルタに容易に拡張することが可能である。
vert_dim[view_id[i]]は、カスタムの2Dフィルタの垂直方向の寸法を規定する。
hor_dim[view_id[i]]は、カスタムの2Dフィルタの水平方向の寸法を規定する。
quantizer[view_id[i]]は、各フィルタ係数の量子化因子を規定する。
filter_coeffs[view_id[i]] [yuv][y][x]は量子化フィルタ係数を規定し、yuvは、フィルタ係数が該当する成分を表し、yuvが0に等しいことはY成分を規定し、yuvが1に等しいことはU成分を規定し、yuvが2に等しいことはV成分を規定する。
pixel_dist_x[sub_view_id[i]]及びpixel_dist_y[sub_view_id[i]]はそれぞれ、ビュー内の近傍画素間の最終的な再構成疑似ビュー内の水平方向及び垂直方向における距離を規定する。sub_view_idはsub_view_id[i]に等しい。
num_pixel_tiling_filter_coeffs_minus1[sub_view_id[i][j] plus oneは、タイリング・モードが1に等しくセットとされると、フィルタ係数の数を示す。
pixel_tiling_filter_coeffs[sub_view_id[i][j]は、タイリングされたピクチャをフィルタリングするよう使用することができるフィルタを表すために必要なフィルタ係数を表す。
画素レベルにおけるタイリング例
図22に移れば、4つのビューからの画素をタイリングすることによる疑似ビューの合成を示す2つの例はそれぞれ、参照符号2210及び2220それぞれで示す。4つのビューは併せて、参照符号2250で示す。図22における第1の例の構文値は以下、表3に記載する。
Figure 2015092715
図22における第2の例の構文値は、2つの構文要素(loc_left_offset[3][0]が5に等しく、loc_top_offset[3][0]が3に等しい)以外は全て、同じである。
ビューに対応する画素が、特定のオフセット位置で開始すべきである旨をオフセットは示す。このことは図22(2220)に示す。このことは例えば、共通の物体がビュー間でシフトしている画像を2つのビューが生成する場合に行うことができる。例えば、(第1のビュー及び第2のビューを表す)第1のカメラ及び第2のカメラが物体の写真を撮影した場合、物体は、第1のビューと比較して、第2のビューにおける右に5個の画素だけ、移動させられているように見え得る。第1のビューにおける画素(i−5, j)は第2のビューにおける画素(i,j)に対応することを意味している。2つのビューの画素が、画素単位でタイリングされているに過ぎない場合、タイル内の近傍画素間であまり相関がないことがあり得、特殊な符号化利得は小さいことがあり得る。逆に、ビュー1からの画素(i−5, j)がビュー2からの画素(i,j)の隣に配置されるようにタイリングをシフトさせることにより、空間的相関を増加させることができる、空間符号化利得も増加させることができる。例えば、第1のビュー及び第2のビューにおける物体の対応する画素が隣同士でタイリングされているので、このことが当てはまる。
よって、loc_left_offset及びloc_top_offsetの存在は符号化効率を向上させ得る。オフセット情報は外部手段によって得ることができる。例えば、カメラの位置情報又はビュー間の大局的な視差ベクトルを使用して前述のオフセット情報を求めることができる。
オフセット化の結果、疑似ビューにおける画素の一部には、何れのビューからの画素値にも割り当てられない。上記例を続ければ、ビュー2からの画素(i,j)と並んで、ビュー1からの画素(i−5, j)をタイリングする場合、i=04の値の場合、タイル対象のビュー1からの画素(i−5, j)は存在しないので、前述の画素はタイルにおいて空き状態である。何れのビューからの画素値も割り当てられない、疑似ビュー(タイル)における画素について、少なくとも1つの実現形態は、AVCにおける動き補償のサブ画素補間手順と同様な補間手順を使用する。すなわち、空き状態のタイル画素は近傍画素から補間することができる。前述の補間は、タイルにおける、より大きな空間的相関、及びタイルのより大きな符号化利得をもたらし得る。
ビデオ符号化では、Iピクチャ、PピクチャやBピクチャなどのピクチャ毎に別々の符号化タイプを選ぶことが可能である。更に、マルチビュー・ビデオ符号化の場合、アンカ・ピクチャ及び非アンカ・ピクチャを定義する。一実施例では、グループ化の決定をピクチャ・タイプに基づいて行うことが可能である旨を提案する。前述のグループ化の情報は高位構文においてシグナリングされる。
図11に移れば、単一のフレーム上にタイリングされた5つのビューの例の全体を参照符号1100で示す。特に、単一のフレーム上にタイリングされた5つのビューを備えた、ボールルームのシーケンスを示す。更に、5番目のビューは、矩形のフレーム上に配置することが可能であるように2つの部分に分割されている。ここでは、各ビューは、合計フレーム寸法が640×640であるようなQVGAサイズのものである。600は、16の倍数でないので、608に増やすものとする。
この例の場合、考えられるSEIメッセージは表4に示すようなものであり得る。
Figure 2015092715
Figure 2015092715
表5は、表4に示す例のマルチビュー情報を送信するための一般的な構文構造を示す。
Figure 2015092715
図23を参照すれば、ビデオ処理装置2300を示す。ビデオ処理装置2300は例えば、符号化ビデオを受け取るセットトップ・ボックスや他の装置であり得、例えば、ユーザに向けて表示するために、又は記憶するために、復号化ビデオを供給する。よって、装置2300はその出力をテレビ受像機、コンピュータ・モニタ、又はコンピュータ若しくは他の処理装置に供給することができる。
装置2300は、データ信号2320を受信する復号化器2310を含む。データ信号2320は例えば、AVC又はMVC互換ストリームを含み得る。復号化器2310は、受信信号2320の全部又は一部を復号化し、復号化ビデオ信号2330及びタイリング情報2340を出力として供給する。復号化ビデオ2330及びタイリング情報2340は選択器2350に供給される。装置2300は、ユーザ入力2370を受信するユーザ・インタフェースも含む。ユーザ・インタフェース2360は、ユーザ入力2370に基づいてピクチャ選択信号2380を選択器2350に供給する。ピクチャ選択信号2380及びユーザ入力2370は、ユーザが表示させたいピクチャが複数のピクチャのうちのどれであるかを示す。選択器2350は、選択されたピクチャを出力2390として供給する。選択器2350は、ピクチャ選択情報2380を使用して、出力2390として、復号化ビデオ2330におけるピクチャのうちのどれを供給するかを選択する。選択器2350は、タイリング情報2340を使用して、復号化ビデオ2330において選択ピクチャを位置特定する。
種々の実現形態では、選択器2350はユーザ・インタフェース2360を含み、他の実現形態では、選択器2350が、別個のインタフェース機能が実行されることなく、ユーザ入力2370を直接受け取るので、ユーザ・インタフェース2360は必要でない。選択器2350は、例えば、ソフトウェアで、又は集積回路として実現することができる。選択器2350は、復号化器2310も組み入れることができる。
より一般的には、本出願記載の種々の実現形態の復号化器は、タイル全体を含む復号化出力を供給することができる。更に、又はあるいは、復号化器は、タイルからの1つ又は複数の選択されたピクチャ(例えば、画像又は深度信号)のみを含む復号化出力を供給することができる。
前述の通り、高位構文を使用して、本願の原理の1つ又は複数の実施例によるシグナリングを実行することができる。例えば、これらに限定されるものでないが、以下の何れかをシグナリングするために高位構文を使用することができる。より大きなフレームに存在している符号化ビューの数、ビュー全ての元の幅及び高さ、符号化ビュー毎の、ビューに対応するビュー識別子、符号化ビュー毎の、ビューのフレームが分割される部分の数、ビューの部分毎の反転方向(例えば、反転なし、水平方向の反転のみ、垂直方向の反転のみ、又は水平方向及び垂直方向の反転)、ビューの部分毎の、ビューの最終フレームにおいて現在の部分が属する左の位置(画素又はマクロブロックの数)、ビューの部分毎の、ビューの最終フレームにおいて現在の部分が属する部分の上の位置(画素又はマクロブロックの数)、ビューの部分毎の、クロッピング・ウィンドウの現在の大きな復号化/符号化フレームにおける左の位置(画素又はマクロブロックの数)、ビューの部分毎の、クロッピング・ウィンドウの現在の大きな復号化/符号化フレームにおける右の位置(画素又はマクロブロックの数)、ビューの部分毎の、クロッピング・ウィンドウの現在の大きな復号化/符号化フレームにおける上の位置(画素又はマクロブロックの数)、及び、ビューの部分毎の、クロッピング・ウィンドウの現在の大きな復号化/符号化フレームにおける下の位置(画素又はマクロブロックの数)、符号化ビュー毎に、出力前にビューをアップサンプリングする必要があるか否か(アップサンプリングを行う必要がある場合、高位構文を使用して、アップサンプリング方法(これらに限定されないが、6タップのAVCフィルタ、4タップのSVCフィルタ、バイリニア・フィルタ、又はカスタムの1D、2D線形若しくは非線形フィルタ)を示すことができる。
「符号化器」及び「復号化器」の語は、一般的な構造を意味し、何れの特定の機能又は構成にも限定されない。例えば、復号化器は、符号化ビットストリームを収容する変調搬送波を受け取り、符号化ビットストリームを復調し、ビットストリームを復号化することができる。
種々の方法を説明している。前述の方法の多くは、十分な開示をもたらすよう詳説している。しかし、前述の方法について説明された特定の構成の1つ又は多くを変えることができる変形が考えられる。更に、記載された構成の多くは当技術分野において知られており、よって、詳細には説明しないものとする。
更に、いくつかの実現形態において、特定の情報を送出するために高位構文を使用することを参照している。しかし、他の実現形態は、低位構文を使用するか、又は実際には、(例えば、符号化データの一部としての情報の送出などの)全く別の機構を使用して、同じ情報(又はその情報の変形)を供給する。
種々の実現形態は、複数のビュー(一般的には、ピクチャ)を、単一のピクチャにタイリングし、単一のピクチャとして符号化し、単一のピクチャとして送出することを可能にするためにタイリング及び適切なシグナリングを提供する。シグナリング情報は、ポストプロセッサがビュー/ピクチャを引き離すことを可能にし得る。更に、タイリングされる複数のピクチャはビューであり得るが、ピクチャのうちの少なくとも1つは深度情報であり得る。前述の実現形態は1つ又は複数の利点をもたらし得る。例えば、ユーザは、タイリングされたかたちで複数のビューを表示したいことがあり得、前述の種々の実現形態は、タイリングされたかたちで符号化し、送信/記憶する前にタイリングすることにより、前述のビューを符号化し、送信又は記憶する効率的なやり方をもたらす。
AVC及び/又はMVCのコンテキストで複数のビューをタイリングする実現形態も更なる利点をもたらす。AVCは、表面的には、単一のビューのみに使用されるので、更なるビューは期待されない。しかし、前述のAVCベースの実現形態は、AVC環境において複数のビューをもたらすことが可能である。タイリングされたピクチャが別々のビューに属する(例えば、疑似ビューにおける左右ピクチャがビュー1であり、右上ピクチャがビュー2である等)旨を復号化器が分かるように、タイリングされたビューを配置することが可能であるからである。
更に、MVCは既に複数のビューを含むので、複数のビューが、単一の疑似ビューに含まれることは期待されない。更に、MVCは、サポートすることが可能なビューの数に限度を有し、前述のMVCベースの実現形態により、(AVCベースの実現形態におけるように)更なるビューをタイリングすることを可能にすることによってサポートすることが可能なビューの数が事実上増える。例えば、各疑似ビューは、MVCのサポートされたビューのうちの1つに対応し得、復号化器は、「サポートされたビュー」それぞれが、予め配置されたタイリング順序における4つのビューを実際に含むことが分かり得る。よって、前述の実現形態では、考えられるビューの数は、「サポートされたビュー」の数の4倍である。
本明細書及び特許請求の範囲記載の実現形態は、例えば、方法若しくは処理、装置、又はソフトウェア・プログラムで実現することができる。単一の形式の実現形態のコンテキストでしか(例えば、方法としてしか)記載されていない場合でも、記載された特徴の実現形態は、他の形態(例えば、装置又はプログラム)で実現することも可能である。装置は、例えば、適切なハードウェア、ソフトウェア、及びファームウェアで実現することができる。方法は例えば、コンピュータ、マイクロプロセッサ、集積回路や、プログラマブル論理装置を含む、一般に処理装置を表す装置(例えば、プロセッサ)で実現することができる。処理装置は、エンドユーザ間の情報の通信を容易にする通信装置(例えば、コンピュータ、携帯電話機、ポータブル/パーソナル携帯情報端末(「PDA」)や他の装置)も含む。
本明細書及び特許請求の範囲記載の種々の処理及び構成の実現形態は、各種の機器又はアプリケーション(特に、例えば、データ符号化及び復号化に関連付けられた機器又はアプリケーション)において実施することができる。機器の例には、ビデオ符号化器、ビデオ復号化器、ビデオ・コデック、ウェブ・サーバ、セットトップ・ボックス、ラップトップ、パソコン、携帯電話機、PDAや、他の通信装置が含まれる。機器は明らかに、モバイルであり得、モバイル車両に設置されていてもよい。
更に、方法は、プロセッサによって行われる命令によって実現することができ、前述の命令は、プロセッサ読み取り可能な媒体(例えば、集積回路、ソフトウェア担体や他の記憶装置(例えば、ハード・ディスク、コンパクト・ディスケット、ランダム・アクセス・メモリ(「RAM」)やリードオンリー・メモリ(「ROM」)))上に記憶することができる。命令は、プロセッサ読み取り可能な媒体上に有形に実施されたアプリケーション・プログラムを構成することができる。プロセッサは明らかに、例えば、処理を行うための命令を有するプロセッサ読み取り可能な媒体を含み得る。前述のアプリケーション・プログラムは、何れかの適切なアーキテクチャを有するマシンにアップロードし、前述のマシンによって実行することができる。好ましくは、マシンは、1つ又は複数の中央処理装置(「CPU」)、ランダム・アクセス・メモリ(「RAM」)、及び入出力(「I/O」)のインタフェースなどのハードウェアを有するコンピュータ・プラットフォーム上に実現される。コンピュータ・プラットフォームは、オペレーティング・システム及びマイクロ命令コードも含み得る。本明細書及び特許請求の範囲記載の種々の処理及び機能は、CPUによって実行することができるアプリケーション・プログラムの一部若しくはマイクロ命令コードの一部(又はそれらの組み合わせ)であり得る。更に、種々の他の周辺装置を、更なるデータ記憶装置や、印刷装置などのコンピュータ・プラットフォームに接続することができる。
当業者に分かるように、実現形態は、例えば、記憶又は伝送することができる情報を搬送するようフォーマッティングされた信号を生成することも可能である。情報は例えば、前述の実現形態のうちの1つによって生成されるデータ、又は方法を行うための命令を含み得る。前述の信号は例えば、電磁波(例えば、スペクトルの無線周波数部分を使用して)として、又はベースバンド信号としてフォーマッティングすることができる。フォーマッティングは例えば、データ・ストリームの符号化、構文の生成、及び、符号化データ・ストリーム及び構文による搬送波の変調を含み得る。信号が搬送する情報は例えば、アナログ情報又はディジタル情報であり得る。信号は、知られているように、各種有線リンク又は無線リンクを介して伝送することができる。
更に、添付図面に表す構成システム部分及び方法の一部は好ましくはソフトウェアで実現されるので、システム構成部分(又は処理機能ブロック)間の実際の接続は、本願の原理がプログラムされるやり方によって変わり得る。本明細書及び特許請求の範囲記載の教示があれば、当業者は、本願の原理の前述及び同様な実現形態又は構成に想到することができるであろう。
いくつかの実現形態を説明してきた。しかし、種々の修正を行うことができることが理解されるであろう。例えば、別々の実現形態の構成要素を合成、補完、修正、又は除外して他の実現形態をもたらすことができる。更に、他の構造及び処理を、開示されたものと置き換えることができ、結果として生じる実現形態は少なくとも実質的に同じ機能を少なくとも実質的に同じやり方で行って、開示された実現形態と、少なくとも実質的に同じ結果を達成することを当業者は理解するであろう。特に、例証的な実施例を添付図面を参照して本明細書及び特許請求の範囲において説明してきたが、本願の原理は前述のまさにその実施例に限定されず、本願の原理の範囲又は趣旨から逸脱することなく、種々の変更及び修正を当業者によって行うことができる。よって、前述及び他の実現形態は、本出願によって考察することができ、特許請求の範囲記載の範囲内に収まる。

Claims (43)

  1. 方法であって、
    単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスする工程と、
    前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスする工程と、
    前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する工程と、
    前記アクセスされた情報及び前記復号化されたビデオ・ピクチャを出力として供給する工程とを含む方法。
  2. 請求項1記載の方法であって、前記複数のピクチャは第1のビューからの第1のピクチャ、及び第2のビューからの第2のピクチャを含む方法。
  3. 請求項2記載の方法であって、前記第1のピクチャのコンテンツは前記第2のピクチャのコンテンツと重なる方法。
  4. 請求項1記載の方法であって、前記複数のピクチャは、第1のビューからの第1のピクチャと、前記第1のピクチャの深度情報を含む第2のピクチャとを含む方法。
  5. 請求項1記載の方法であって、
    前記ビデオ・ピクチャにアクセスする工程は、単一のビューからであるとしてピクチャ全てを扱う単一ビューのビデオ標準によって供給されるビデオ・ピクチャにアクセスする工程を含み、
    前記情報にアクセスする工程は、
    前記復号化されたビデオ・ピクチャ及び前記アクセスされた情報の前記供給が、前記単一ビューのビデオ標準による複数ビューのサポートを可能にするように、
    前記単一ビューのビデオ標準によって供給される情報にアクセスする工程を含む方法。
  6. 請求項1記載の方法であって、
    前記ビデオ・ピクチャにアクセスする工程は、特定のピクチャのビュー識別子を供給することにより、複数のビューを明示的にサポートする複数ビューのビデオ標準によって供給されるビデオ・ピクチャにアクセスする工程を含み、前記ビュー識別子は、前記複数のビューのうちのどれが前記特定のピクチャに対応しているかを示し、
    前記情報にアクセスする工程は、
    前記復号化されたビデオ・ピクチャ及び前記アクセスされた情報の前記供給が、前記複数ビューのビデオ標準による前記複数ビューを上回るサポートを可能にするように、
    前記複数ビューのビデオ標準によって供給される情報にアクセスする工程を含む方法。
  7. 請求項1記載の方法であって、前記アクセスされた情報が前記ビデオ・ピクチャ内の前記複数のピクチャの少なくとも1つの向き及び位置の少なくとも一方を示す方法。
  8. 請求項1記載の方法であって、前記アクセスされた情報は、前記複数のピクチャが画素単位で合成される旨を示す方法。
  9. 請求項8記載の方法であって、前記複数のピクチャの画素は、前記複数のビューからの同様なコンテンツをアラインさせるようにオフセットされる方法。
  10. 請求項1記載の方法であって、前記ビデオ・ピクチャのアクセス、前記情報のアクセス、前記ビデオ・ピクチャの復号化、並びに前記アクセスされた情報及び前記復号化されたビデオ・ピクチャの供給が復号化器で行われる方法。
  11. 請求項1記載の方法であって、前記情報は、少なくとも1つの高位構文要素に含まれる方法。
  12. 請求項11記載の方法であって、前記高位構文要素は、スライス・ヘッダ、シーケンス・パラメータ・セット、ピクチャ・パラメータ・セット、ビュー・パラメータ・セット、ネットワーク抽象化層ユニット・ヘッダ、及び付加拡張情報メッセージのうちの少なくとも1つに含まれる方法。
  13. 請求項1記載の方法であって、前記複数のピクチャのうちの少なくとも1つが深度情報を表す方法。
  14. 装置であって、
    単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスし、前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスし、前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化し、前記アクセスされた情報及び前記復号化されたビデオ・ピクチャを出力として供給する復号化器を備える装置。
  15. 請求項14記載の装置であって、前記複数のピクチャは、第1のビューからの第1のピクチャと、前記第1のピクチャの深度情報を含む第2のピクチャとを含む装置。
  16. 請求項14記載の装置であって、前記複数のピクチャのうちの少なくとも1つが深度情報を表す装置。
  17. 方法であって、
    ビデオ・ピクチャに含まれる複数のピクチャがどのようにして単一のピクチャに合成されるかを示す情報を生成する工程と、
    前記合成された複数のピクチャの符号化された表現を供給するよう前記ビデオ・ピクチャを符号化する工程と、
    前記生成された情報及び前記符号化されたビデオ・ピクチャを出力として供給する工程とを含む方法。
  18. 請求項17記載の方法であって、前記複数のピクチャは第1のビューからの第1のピクチャ、及び第2のビューからの第2のピクチャを含む方法。
  19. 請求項18記載の方法であって、前記第1のピクチャのコンテンツは前記第2のピクチャのコンテンツと重なる方法。
  20. 請求項17記載の方法であって、前記複数のピクチャは、第1のビューからの第1のピクチャと、前記第1のピクチャの深度情報を含む第2のピクチャとを含む方法。
  21. 請求項17記載の方法であって、前記情報を生成する工程は、前記符号化されたビデオ・ピクチャ及び前記生成された情報の供給が単一ビューのビデオ標準による複数ビューのサポートを可能にするように、単一のビューからであるとしてピクチャ全てを扱う単一ビューのビデオ標準により、情報を生成する工程を含む方法。
  22. 請求項17記載の方法であって、前記情報を生成する工程は、特定のピクチャのビュー識別子を供給することにより、複数のビューを明示的にサポートする複数ビューのビデオ標準により、情報を生成する工程を含み、前記ビュー識別子は、前記符号化されたビデオ・ピクチャ及び前記生成された情報の供給が、前記複数ビューのビデオ標準による複数ビューを上回るサポートを可能にするように、前記複数ビューのうちのどれが前記特定のピクチャに対応しているかを示す方法。
  23. 請求項17記載の方法であって、前記生成された情報が前記ビデオ・ピクチャ内の前記複数のピクチャの少なくとも1つの向き及び位置の少なくとも一方を示す方法。
  24. 請求項17記載の方法であって、前記生成された情報は、前記複数のピクチャが画素単位で合成される旨を示す方法。
  25. 請求項24記載の方法であって、前記複数のピクチャの画素は、前記複数のビューからの同様なコンテンツをアラインさせるようにオフセットされる方法。
  26. 請求項17記載の方法であって、前記情報の生成、前記ビデオ・ピクチャの符号化、並びに前記生成された情報及び前記符号化されたビデオ・ピクチャの供給が符号化器において行われる方法。
  27. 請求項17記載の方法であって、前記生成された情報は、少なくとも1つの高位構文要素に含まれる方法。
  28. 請求項27記載の方法であって、前記高位構文要素は、スライス・ヘッダ、シーケンス・パラメータ・セット、ピクチャ・パラメータ・セット、ビュー・パラメータ・セット、ネットワーク抽象化層ユニット・ヘッダ、及び付加拡張情報メッセージのうちの少なくとも1つに含まれる方法。
  29. 請求項17記載の方法であって、前記複数のピクチャのうちの少なくとも1つが深度情報を表す方法。
  30. 装置であって、
    ビデオ・ピクチャに含まれる複数のピクチャがどのようにして単一のピクチャに合成されるかを示す情報を生成し、前記合成された複数のピクチャの符号化された表現を供給するよう前記ビデオ・ピクチャを符号化し、前記生成された情報及び前記符号化されたビデオ・ピクチャを出力として供給する符号化器を備える装置。
  31. 請求項30記載の装置であって、前記複数のピクチャは、第1のビューからの第1のピクチャと、前記第1のピクチャの深度情報を含む第2のピクチャとを含む装置。
  32. 装置であって、
    単一のピクチャに合成される複数のピクチャを含むビデオ・ピクチャにアクセスする手段と、
    前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスする手段と、
    前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する手段と、
    前記アクセスされた情報及び前記復号化されたビデオ・ピクチャを出力として供給する手段とを備える装置。
  33. 装置であって、
    ビデオ・ピクチャに含まれる複数のピクチャがどのようにして単一のピクチャに合成されるかを示す情報を生成する手段と、
    前記合成された複数のピクチャの符号化された表現を供給するよう前記ビデオ・ピクチャを符号化する手段と、
    前記生成された情報及び前記符号化されたビデオ・ピクチャを出力として供給する手段とを備える装置。
  34. ビデオを符号化するためのビデオ信号構造であって、
    単一のビデオ・ピクチャに含まれる複数のピクチャが前記単一のビデオ・ピクチャにどのようにして合成されるかを示す情報と、
    前記合成された複数のピクチャの符号化された表現とを含むビデオ信号構造。
  35. コンピュータ読み取り可能な媒体であって、
    単一のビデオ・ピクチャに含まれる複数のピクチャが前記単一のビデオ・ピクチャにどのようにして合成されるかを示す情報と、
    前記合成された複数のピクチャの符号化された表現とを含むビデオ信号構造を有するコンピュータ読み取り可能な媒体。
  36. 単一のビデオ・ピクチャに含まれる複数のピクチャが前記単一のビデオ・ピクチャにどのようにして合成されるかを示す情報と、
    前記合成された複数のピクチャの符号化された表現とを含むようフォーマッティングされたビデオ信号。
  37. コンピュータ読み取り可能なプログラム・コードを実施させたコンピュータ読み取り可能な媒体であって、前記コンピュータ読み取り可能なプログラム・コードが、
    単一のピクチャに合成される複数のピクチャを含むビデオ・ピクチャにアクセスするためのプログラム・コードと、
    前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスするためのプログラム・コードと、
    前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化するためのプログラム・コードと、
    前記アクセスされた情報及び前記復号化されたビデオ・ピクチャを出力として供給するためのプログラム・コードとを備えるコンピュータ読み取り可能な媒体。
  38. コンピュータ読み取り可能なプログラム・コードを実施させたコンピュータ読み取り可能な媒体であって、前記コンピュータ読み取り可能なプログラム・コードが、
    ビデオ・ピクチャにおける複数のピクチャが単一のピクチャにどのようにして合成されるかを示す情報を生成するためのプログラム・コードと、
    前記合成された複数のピクチャの符号化された表現を供給するよう前記ビデオ・ピクチャを符号化するためのプログラム・コードと、
    前記生成された情報及び前記符号化されたビデオ・ピクチャを出力として供給するためのプログラム・コードとを備えるコンピュータ読み取り可能な媒体。
  39. 単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスする機能と、
    前記アクセスされたビデオ・ピクチャに前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスする機能と、
    前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する機能と、
    前記アクセスされた情報及び前記復号化されたビデオ・ピクチャを出力として供給する機能と
    を少なくとも実行するよう構成されたプロセッサを備えた装置。
  40. ビデオ・ピクチャに含まれる複数のピクチャがどのようにして単一のピクチャに合成されるかを示す情報を生成する機能と、
    前記合成された複数のピクチャの符号化された表現を供給するよう前記ビデオ・ピクチャを符号化する機能と、
    前記生成された情報及び前記符号化されたビデオ・ピクチャを出力として供給する機能と
    を少なくとも実行するよう構成されたプロセッサを備えた装置。
  41. 方法であって、
    単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスする工程と、
    前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスする工程と、
    前記複数のピクチャのうちの少なくとも1つの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する工程と、
    前記アクセスされた情報及び前記復号化された表現を出力として供給する工程とを含む方法。
  42. 方法であって、
    単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスする工程と、
    前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスする工程と、
    前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する工程と、
    表示するために前記複数のピクチャの少なくとも1つを選択するユーザ入力を受け取る工程と、
    前記少なくとも1つの選択されたピクチャの復号化された出力を供給する工程とを含み、前記復号化された出力は、前記アクセスされた情報、前記復号化された表現、及び前記ユーザ入力に基づいて供給される方法。
  43. 装置であって、
    単一のピクチャに合成された複数のピクチャを含むビデオ・ピクチャにアクセスし、前記アクセスされたビデオ・ピクチャにおける前記複数のピクチャがどのようにして合成されるかを示す情報にアクセスし、前記合成された複数のピクチャの復号化された表現を供給するよう前記ビデオ・ピクチャを復号化する復号化器と、
    表示するために前記複数のピクチャの少なくとも1つを選択するユーザ入力を受け取るためのインタフェースと、
    前記少なくとも1つの選択されたピクチャの復号化された出力を供給する手段とを備え、前記復号化された出力は、前記アクセスされた情報、前記復号化された表現、及び前記ユーザ入力に基づいて供給される装置。
JP2014256830A 2007-04-12 2014-12-19 ビデオ符号化及び複合化におけるタイリング Pending JP2015092715A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US92301407P 2007-04-12 2007-04-12
US60/923,014 2007-04-12
US92540007P 2007-04-20 2007-04-20
US60/925,400 2007-04-20

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2013148284A Division JP5674873B2 (ja) 2007-04-12 2013-07-17 ビデオ符号化及び複合化におけるタイリング

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017093497A Division JP2017135756A (ja) 2007-04-12 2017-05-10 ビデオ符号化及び復号化におけるタイリング

Publications (1)

Publication Number Publication Date
JP2015092715A true JP2015092715A (ja) 2015-05-14

Family

ID=39810226

Family Applications (10)

Application Number Title Priority Date Filing Date
JP2010503074A Active JP5324563B2 (ja) 2007-04-12 2008-04-11 ビデオ符号化及び復号化におけるタイリング
JP2013148284A Active JP5674873B2 (ja) 2007-04-12 2013-07-17 ビデオ符号化及び複合化におけるタイリング
JP2014256830A Pending JP2015092715A (ja) 2007-04-12 2014-12-19 ビデオ符号化及び複合化におけるタイリング
JP2017093497A Pending JP2017135756A (ja) 2007-04-12 2017-05-10 ビデオ符号化及び復号化におけるタイリング
JP2019159425A Pending JP2019201436A (ja) 2007-04-12 2019-09-02 ビデオ符号化及び復号化におけるタイリング
JP2019159424A Pending JP2019201435A (ja) 2007-04-12 2019-09-02 ビデオ符号化及び復号化におけるタイリング
JP2020137403A Active JP6825155B2 (ja) 2007-04-12 2020-08-17 ビデオ符号化及び復号化におけるタイリング
JP2021003523A Active JP7116812B2 (ja) 2007-04-12 2021-01-13 ビデオ符号化及び復号化におけるタイリング
JP2022121528A Active JP7357125B2 (ja) 2007-04-12 2022-07-29 ビデオ符号化及び復号化におけるタイリング
JP2023159330A Pending JP2023165827A (ja) 2007-04-12 2023-09-25 ビデオ符号化及び復号化におけるタイリング

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2010503074A Active JP5324563B2 (ja) 2007-04-12 2008-04-11 ビデオ符号化及び復号化におけるタイリング
JP2013148284A Active JP5674873B2 (ja) 2007-04-12 2013-07-17 ビデオ符号化及び複合化におけるタイリング

Family Applications After (7)

Application Number Title Priority Date Filing Date
JP2017093497A Pending JP2017135756A (ja) 2007-04-12 2017-05-10 ビデオ符号化及び復号化におけるタイリング
JP2019159425A Pending JP2019201436A (ja) 2007-04-12 2019-09-02 ビデオ符号化及び復号化におけるタイリング
JP2019159424A Pending JP2019201435A (ja) 2007-04-12 2019-09-02 ビデオ符号化及び復号化におけるタイリング
JP2020137403A Active JP6825155B2 (ja) 2007-04-12 2020-08-17 ビデオ符号化及び復号化におけるタイリング
JP2021003523A Active JP7116812B2 (ja) 2007-04-12 2021-01-13 ビデオ符号化及び復号化におけるタイリング
JP2022121528A Active JP7357125B2 (ja) 2007-04-12 2022-07-29 ビデオ符号化及び復号化におけるタイリング
JP2023159330A Pending JP2023165827A (ja) 2007-04-12 2023-09-25 ビデオ符号化及び復号化におけるタイリング

Country Status (21)

Country Link
US (13) US8780998B2 (ja)
EP (11) EP4210330A1 (ja)
JP (10) JP5324563B2 (ja)
KR (11) KR101766479B1 (ja)
CN (1) CN101658037B (ja)
AU (1) AU2008239653C1 (ja)
BR (5) BR122018004906B1 (ja)
DK (7) DK3399756T3 (ja)
ES (7) ES2858578T3 (ja)
FI (1) FI3920538T3 (ja)
HK (1) HK1255617A1 (ja)
HU (7) HUE052116T2 (ja)
LT (1) LT2887671T (ja)
MX (1) MX2009010973A (ja)
PL (7) PL2887671T3 (ja)
PT (7) PT3758380T (ja)
RU (8) RU2521618C2 (ja)
SI (6) SI3758380T1 (ja)
TR (1) TR201809177T4 (ja)
WO (1) WO2008127676A2 (ja)
ZA (2) ZA201006649B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016221344A (ja) * 2016-09-02 2016-12-28 株式会社ユニバーサルエンターテインメント 遊技機および遊技機の管理方法

Families Citing this family (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8692695B2 (en) 2000-10-03 2014-04-08 Realtime Data, Llc Methods for encoding and decoding data
ES2858578T3 (es) 2007-04-12 2021-09-30 Dolby Int Ab Organización en mosaico en codificación y decodificación de vídeo
CN105791864B (zh) 2007-05-16 2019-01-15 汤姆逊许可Dtv公司 编码及传送多视图视频编码信息中使用码片组的装置
CN102160387B (zh) 2008-09-23 2016-03-02 杜比实验室特许公司 棋盘式多路复用图像数据的编码和解码架构
US9973739B2 (en) * 2008-10-17 2018-05-15 Nokia Technologies Oy Sharing of motion vector in 3D video coding
BRPI1007163A2 (pt) * 2009-01-26 2018-09-25 Thomson Licensing compactação de quadro para codificação de vídeo
CN104780384B (zh) * 2009-01-29 2018-01-16 杜比实验室特许公司 解码视频帧的序列的方法、编码多视图帧的序列的方法
WO2010087575A2 (en) * 2009-02-01 2010-08-05 Lg Electronics Inc. Broadcast receiver and 3d video data processing method
US20110292044A1 (en) * 2009-02-13 2011-12-01 Kim Woo-Shik Depth map coding using video information
WO2010096189A1 (en) * 2009-02-19 2010-08-26 Thomson Licensing 3d video formats
EP2422522A1 (en) 2009-04-20 2012-02-29 Dolby Laboratories Licensing Corporation Directed interpolation and data post-processing
KR20120081022A (ko) * 2009-05-01 2012-07-18 톰슨 라이센싱 3d 비디오 코딩 포맷
US9124874B2 (en) 2009-06-05 2015-09-01 Qualcomm Incorporated Encoding of three-dimensional conversion information with two-dimensional video sequence
WO2011005624A1 (en) 2009-07-04 2011-01-13 Dolby Laboratories Licensing Corporation Encoding and decoding architectures for format compatible 3d video delivery
JP2011109397A (ja) * 2009-11-17 2011-06-02 Sony Corp 画像送信方法、画像受信方法、画像送信装置、画像受信装置、及び画像伝送システム
US9215445B2 (en) 2010-01-29 2015-12-15 Thomson Licensing Block-based interleaving
US8555324B2 (en) 2010-02-02 2013-10-08 Microsoft Corporation Video download mechanism for transferring large data
IT1399417B1 (it) * 2010-04-12 2013-04-16 Sisvel Technology Srl Metodo per la generazione e ricostruzione di un flusso video stereoscopico compatibile e relativi dispositivi di codifica e decodifica.
US20110280311A1 (en) * 2010-05-13 2011-11-17 Qualcomm Incorporated One-stream coding for asymmetric stereo video
IT1401731B1 (it) * 2010-06-28 2013-08-02 Sisvel Technology Srl Metodo per la decodifica 2d-compatibile di flussi video stereoscopici
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
CN105812828B (zh) 2010-07-21 2018-09-18 杜比实验室特许公司 用于多层帧兼容视频传输的解码方法
JPWO2012017643A1 (ja) * 2010-08-06 2013-10-03 パナソニック株式会社 符号化方法、表示装置、及び復号方法
CN103039081B (zh) * 2010-08-09 2016-03-23 皇家飞利浦电子股份有限公司 编码器、解码器、比特流、编码和解码与多视角信号的两视角相对应的图像对的方法
WO2012036901A1 (en) 2010-09-14 2012-03-22 Thomson Licensing Compression methods and apparatus for occlusion data
CN103262548B (zh) * 2010-10-28 2016-05-11 Lg电子株式会社 用于在移动环境中接收三维广播信号的接收器装置和方法
JP2012114575A (ja) * 2010-11-22 2012-06-14 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US9215473B2 (en) 2011-01-26 2015-12-15 Qualcomm Incorporated Sub-slices in video coding
JPWO2012153450A1 (ja) * 2011-05-11 2014-07-31 パナソニック株式会社 動画像送信装置および動画像送信方法
US11496760B2 (en) 2011-07-22 2022-11-08 Qualcomm Incorporated Slice header prediction for depth maps in three-dimensional video codecs
US9521418B2 (en) * 2011-07-22 2016-12-13 Qualcomm Incorporated Slice header three-dimensional video extension for slice header prediction
US9077998B2 (en) * 2011-11-04 2015-07-07 Qualcomm Incorporated Padding of segments in coded slice NAL units
US9124895B2 (en) 2011-11-04 2015-09-01 Qualcomm Incorporated Video coding with network abstraction layer units that include multiple encoded picture partitions
US9485503B2 (en) 2011-11-18 2016-11-01 Qualcomm Incorporated Inside view motion prediction among texture and depth view components
US9332259B2 (en) 2012-01-18 2016-05-03 Qualcomm Incorporated Indication of use of wavefront parallel processing in video coding
EP2835969A4 (en) 2012-04-06 2015-09-09 Sony Corp DECODING APPARATUS, DECODING METHOD, ENCODING APPARATUS, AND ENCODING METHOD
TWI521940B (zh) 2012-06-14 2016-02-11 杜比實驗室特許公司 用於立體及自動立體顯示器之深度圖傳遞格式
US9584803B2 (en) * 2012-07-08 2017-02-28 Cisco Technology, Inc. Picture output management in video applications with fixed picture rate
US9554146B2 (en) * 2012-09-21 2017-01-24 Qualcomm Incorporated Indication and activation of parameter sets for video coding
US9979960B2 (en) 2012-10-01 2018-05-22 Microsoft Technology Licensing, Llc Frame packing and unpacking between frames of chroma sampling formats with different chroma resolutions
US9661340B2 (en) 2012-10-22 2017-05-23 Microsoft Technology Licensing, Llc Band separation filtering / inverse filtering for frame packing / unpacking higher resolution chroma sampling formats
CN109618235B (zh) 2013-01-18 2021-03-16 佳能株式会社 生成设备和方法、处理设备和方法以及存储介质
TWI558166B (zh) 2013-04-04 2016-11-11 杜比國際公司 用於多視點裸視立體顯示器的深度地圖遞送格式
EP3014869B1 (en) * 2013-06-28 2019-08-21 InterDigital CE Patent Holdings Highlighting an object displayed by a pico projector
EP3018910B1 (en) * 2013-07-05 2019-11-13 Saturn Licensing LLC Transmission device, transmission method, reception device, and reception method
US9749646B2 (en) 2015-01-16 2017-08-29 Microsoft Technology Licensing, Llc Encoding/decoding of high chroma resolution details
US9854201B2 (en) 2015-01-16 2017-12-26 Microsoft Technology Licensing, Llc Dynamically updating quality to higher chroma sampling rate
CN104869457B (zh) * 2015-05-21 2019-04-26 京东方科技集团股份有限公司 显示器、显示装置、播放器、播放装置及播放显示系统
WO2016204481A1 (ko) * 2015-06-16 2016-12-22 엘지전자 주식회사 미디어 데이터 전송 장치, 미디어 데이터 수신 장치, 미디어 데이터 전송 방법, 및 미디어 데이터 수신 방법
WO2017087128A1 (en) 2015-11-16 2017-05-26 Virtual Dreamware, LLC Symmetrically mirrored video segmet
TWI747775B (zh) 2016-02-09 2021-11-21 弗勞恩霍夫爾協會 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術
CN115150630B (zh) 2016-05-27 2024-02-20 松下电器(美国)知识产权公司 编码装置及解码装置
US10334277B2 (en) * 2016-09-02 2019-06-25 Qualcomm Incorporated Signaling target display parameters of color remapping information supplemental enhancement information messages
US10368080B2 (en) 2016-10-21 2019-07-30 Microsoft Technology Licensing, Llc Selective upsampling or refresh of chroma sample values
US10021976B1 (en) * 2016-11-01 2018-07-17 Scott Allen Furniture system
EP3468187A1 (en) 2017-10-03 2019-04-10 Axis AB Method and system for encoding video streams
CN117640951A (zh) 2018-05-23 2024-03-01 松下电器(美国)知识产权公司 解码装置和编码装置
KR102165334B1 (ko) 2019-06-03 2020-10-13 방지철 택배운반용 드론의 에어백 개스 주입장치
US11284113B2 (en) 2019-09-25 2022-03-22 Tencent America LLC Method for signaling subpicture identifier
CN111510729A (zh) * 2020-03-25 2020-08-07 西安电子科技大学 一种基于视频编解码技术的rgbd数据压缩传输方法
US11221907B1 (en) * 2021-01-26 2022-01-11 Morgan Stanley Services Group Inc. Centralized software issue triage system
CA3210870A1 (en) * 2021-02-28 2022-09-01 Leia Inc. System and method of streaming compressed multiview video
JPWO2022210661A1 (ja) 2021-03-30 2022-10-06
EP4311238A1 (en) 2021-04-23 2024-01-24 Panasonic Intellectual Property Corporation of America Image decoding method, image coding method, image decoder, and image encoder
WO2022224810A1 (ja) 2021-04-23 2022-10-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像符号化方法、画像復号方法、画像処理方法、画像符号化装置、及び画像復号装置
US20230097425A1 (en) * 2021-09-29 2023-03-30 Tencent America LLC Techniques for signaling multiview view positions in sei message

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003092305A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Image encodder, image decoder, record medium, and image recorder
JP2004240469A (ja) * 2002-12-13 2004-08-26 Sharp Corp 画像データ作成装置およびそのデータを再生する画像データ再生装置
JP5674873B2 (ja) * 2007-04-12 2015-02-25 トムソン ライセンシングThomson Licensing ビデオ符号化及び複合化におけるタイリング

Family Cites Families (94)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5193000A (en) * 1991-08-28 1993-03-09 Stereographics Corporation Multiplexing technique for stereoscopic video system
US5689641A (en) * 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
JPH0870475A (ja) * 1994-06-23 1996-03-12 Sanyo Electric Co Ltd 立体動画像の符号化・復号化方法及び装置
US5748786A (en) 1994-09-21 1998-05-05 Ricoh Company, Ltd. Apparatus for compression using reversible embedded wavelets
US6055012A (en) 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
WO1997043883A1 (de) 1996-05-10 1997-11-20 Melcher Ag Vorrichtung zur montage elektrischer bauteile auf leiterplatten
DE19619598A1 (de) 1996-05-15 1997-11-20 Deutsche Telekom Ag Verfahren zur Speicherung oder Übertragung von stereoskopischen Videosignalen
CN1223772A (zh) * 1996-07-03 1999-07-21 松下电器产业株式会社 多个图像信息的编码方法、编码装置、译码及合成方法、译码及合成装置和记录上述方法的记录媒体
US6075905A (en) * 1996-07-17 2000-06-13 Sarnoff Corporation Method and apparatus for mosaic image construction
US6721952B1 (en) * 1996-08-06 2004-04-13 Roxio, Inc. Method and system for encoding movies, panoramas and large images for on-line interactive viewing and gazing
JP3263807B2 (ja) * 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
US6173087B1 (en) * 1996-11-13 2001-01-09 Sarnoff Corporation Multi-view image registration with application to mosaicing and lens distortion correction
JP2001507890A (ja) * 1996-12-27 2001-06-12 チェックメイト インターナショナル インコーポレイテッド 2次元ビデオ情報源から3次元ビデオを合成するシステムおよび方法
US6157396A (en) 1999-02-16 2000-12-05 Pixonics Llc System and method for using bitstream information to process images for use in digital display systems
US6390980B1 (en) 1998-12-07 2002-05-21 Atl Ultrasound, Inc. Spatial compounding with ultrasonic doppler signal information
US6223183B1 (en) 1999-01-29 2001-04-24 International Business Machines Corporation System and method for describing views in space, time, frequency, and resolution
JP2000308089A (ja) 1999-04-16 2000-11-02 Nippon Hoso Kyokai <Nhk> 立体画像符号化装置および復号化装置
DE10016074B4 (de) 2000-04-01 2004-09-30 Tdv Technologies Corp. Verfahren und Vorrichtung zur Erzeugung von 3D-Bildern
US7254265B2 (en) 2000-04-01 2007-08-07 Newsight Corporation Methods and systems for 2D/3D image conversion and optimization
GB0013273D0 (en) 2000-06-01 2000-07-26 Philips Electronics Nv Video signal encoding and buffer management
CN1210645C (zh) * 2000-09-18 2005-07-13 国际商业机器公司 管理计算机显示器上的视图的方法
US20030004835A1 (en) * 2001-05-31 2003-01-02 International Business Machines Corporation Method, system, and product service for locating items satisfying a general requirement and ranking items according to utility
US20030107645A1 (en) * 2001-08-17 2003-06-12 Byoungyi Yoon Method and system for controlling the display location of stereoscopic images
US7277121B2 (en) * 2001-08-29 2007-10-02 Sanyo Electric Co., Ltd. Stereoscopic image processing and display system
KR20040071145A (ko) 2001-11-24 2004-08-11 티디브이 테크놀러지스 코포레이션 2차원 영상 시퀀스로부터 입체 영상 시퀀스를 생성하는방법 및 장치
US7263240B2 (en) 2002-01-14 2007-08-28 Eastman Kodak Company Method, system, and software for improving signal quality using pyramidal decomposition
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
US20030198290A1 (en) 2002-04-19 2003-10-23 Dynamic Digital Depth Pty.Ltd. Image encoding system
JP4154569B2 (ja) 2002-07-10 2008-09-24 日本電気株式会社 画像圧縮伸長装置
US20040012684A1 (en) * 2002-07-16 2004-01-22 Fairchild Imaging Image reconstruction techniques for charge coupled devices
JP2004120169A (ja) * 2002-09-25 2004-04-15 Sharp Corp 電子機器
US20050041736A1 (en) 2003-05-07 2005-02-24 Bernie Butler-Smith Stereoscopic television signal processing method, transmission system and viewer enhancements
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US20040260827A1 (en) 2003-06-19 2004-12-23 Nokia Corporation Stream switching based on gradual decoder refresh
US7496234B2 (en) 2003-06-20 2009-02-24 Microsoft Corporation System and method for seamless multiplexing of embedded bitstreams
CN1571508B (zh) * 2003-07-19 2010-05-12 华为技术有限公司 一种实现多画面的方法
JP2005049665A (ja) 2003-07-30 2005-02-24 Nec Plasma Display Corp 映像信号処理回路、表示装置及びその映像信号処理方法
JP4355914B2 (ja) * 2003-10-01 2009-11-04 日本電気株式会社 多視点画像伝送システムと方法、多視点画像圧縮装置と方法、多視点画像伸長装置と方法およびプログラム
US7650036B2 (en) 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding
KR100519776B1 (ko) 2003-11-24 2005-10-07 삼성전자주식회사 영상 신호의 해상도 변환 방법 및 장치
KR100587952B1 (ko) 2003-12-05 2006-06-08 한국전자통신연구원 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화/복호화 장치 및 그 방법
GB2412519B (en) * 2004-03-23 2010-11-03 British Broadcasting Corp Monitoring system
JP4542447B2 (ja) 2005-02-18 2010-09-15 株式会社日立製作所 画像の符号化/復号化装置、符号化/復号化プログラム及び符号化/復号化方法
JP4421940B2 (ja) * 2004-05-13 2010-02-24 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置および方法、並びに動画像復号化装置および方法
US20050259729A1 (en) * 2004-05-21 2005-11-24 Shijun Sun Video coding with quality scalability
KR100679740B1 (ko) * 2004-06-25 2007-02-07 학교법인연세대학교 시점 선택이 가능한 다시점 동영상 부호화/복호화 방법
US20060007200A1 (en) * 2004-07-08 2006-01-12 David Young Method and system for displaying a sequence of image frames
CN101977329B (zh) 2004-07-29 2012-10-03 微软公司 使用线光值和其它图像处理改进的图像处理
KR100714068B1 (ko) 2004-10-16 2007-05-02 한국전자통신연구원 계층적 깊이 영상을 이용한 다시점 동영상 부호화/복호화방법 및 장치
EP1667448A1 (en) 2004-12-02 2006-06-07 Deutsche Thomson-Brandt Gmbh Method and apparatus for encoding and for decoding a main video signal and one or more auxiliary video signals
US7728878B2 (en) * 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
JP2006191357A (ja) * 2005-01-06 2006-07-20 Victor Co Of Japan Ltd 再生装置および再生プログラム
WO2006072985A1 (ja) * 2005-01-06 2006-07-13 Mitsubishi Denki Kabushiki Kaisha 映像表示装置
US20060176318A1 (en) 2005-02-09 2006-08-10 Martin Virginia L Method for manipulating artwork to form decorative pieces
JP4849297B2 (ja) 2005-04-26 2012-01-11 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
US8228994B2 (en) 2005-05-20 2012-07-24 Microsoft Corporation Multi-view video coding based on temporal and view decomposition
KR100716999B1 (ko) 2005-06-03 2007-05-10 삼성전자주식회사 영상의 대칭성을 이용한 인트라 예측 방법, 이를 이용한영상의 복호화, 부호화 방법 및 장치
EP1897380B1 (en) * 2005-06-23 2015-11-18 Koninklijke Philips N.V. Combined exchange of image and related depth data
JP4637672B2 (ja) * 2005-07-22 2011-02-23 株式会社リコー 符号化処理装置及び方法
US7668366B2 (en) 2005-08-09 2010-02-23 Seiko Epson Corporation Mosaic image data processing
WO2007046957A1 (en) 2005-10-12 2007-04-26 Thomson Licensing Method and apparatus for using high-level syntax in scalable video encoding and decoding
EP1946563A2 (en) 2005-10-19 2008-07-23 Thomson Licensing Multi-view video coding using scalable video coding
US7903737B2 (en) 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
US8457219B2 (en) 2005-12-30 2013-06-04 Ikanos Communications, Inc. Self-protection against non-stationary disturbances
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
KR100943912B1 (ko) 2006-01-12 2010-03-03 엘지전자 주식회사 다시점 비디오의 처리 방법 및 장치
US20070205367A1 (en) 2006-03-01 2007-09-06 General Electric Company Apparatus and method for hybrid computed tomography imaging
KR101245251B1 (ko) 2006-03-09 2013-03-19 삼성전자주식회사 균일한 화질을 제공하는 다시점 영상 부호화 및 복호화방법 및 장치
JP2008034892A (ja) 2006-03-28 2008-02-14 Victor Co Of Japan Ltd 多視点画像符号化装置
AU2007243935A1 (en) 2006-03-29 2007-11-08 Thomson Licensing Multi view video coding method and device
US7609906B2 (en) 2006-04-04 2009-10-27 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring and displaying 3D light fields
US8139142B2 (en) * 2006-06-01 2012-03-20 Microsoft Corporation Video manipulation of red, green, blue, distance (RGB-Z) data including segmentation, up-sampling, and background substitution techniques
WO2008024345A1 (en) 2006-08-24 2008-02-28 Thomson Licensing Adaptive region-based flipping video coding
JP2010509617A (ja) 2006-11-07 2010-03-25 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ スペックル軽減方法及び装置
EP2418851A3 (en) 2006-12-21 2012-05-23 Thomson Licensing Methods and apparatus for improved signaling using high level syntax for multi-view video coding and decoding
US8515194B2 (en) 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
CN101653011A (zh) * 2007-03-16 2010-02-17 汤姆森许可贸易公司 用于将文本与三维内容相结合的系统和方法
WO2008140190A1 (en) 2007-05-14 2008-11-20 Samsung Electronics Co, . Ltd. Method and apparatus for encoding and decoding multi-view image
JP4418827B2 (ja) 2007-05-16 2010-02-24 三菱電機株式会社 画像表示装置及び方法、並びに画像発生装置及び方法
US8373744B2 (en) 2007-06-07 2013-02-12 Reald Inc. Stereoplexing for video and film applications
KR100962696B1 (ko) 2007-06-07 2010-06-11 주식회사 이시티 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
WO2008156318A2 (en) 2007-06-19 2008-12-24 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
US8471893B2 (en) 2007-06-26 2013-06-25 Samsung Electronics Co., Ltd. Method and apparatus for generating stereoscopic image bitstream using block interleaved method
MY162861A (en) 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
US8218855B2 (en) 2007-10-04 2012-07-10 Samsung Electronics Co., Ltd. Method and apparatus for receiving multiview camera parameters for stereoscopic image, and method and apparatus for transmitting multiview camera parameters for stereoscopic image
KR100918862B1 (ko) 2007-10-19 2009-09-28 광주과학기술원 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체
EP3007440A1 (en) 2007-12-20 2016-04-13 Koninklijke Philips N.V. Image encoding method for stereoscopic rendering
KR101506217B1 (ko) 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
US20090219985A1 (en) 2008-02-28 2009-09-03 Vasanth Swaminathan Systems and Methods for Processing Multiple Projections of Video Data in a Single Video File
US8878836B2 (en) 2008-02-29 2014-11-04 Samsung Electronics Co., Ltd. Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
KR101506219B1 (ko) 2008-03-25 2015-03-27 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
WO2010011557A2 (en) 2008-07-20 2010-01-28 Dolby Laboratories Licensing Corporation Encoder optimization of stereoscopic video delivery systems
US8106924B2 (en) 2008-07-31 2012-01-31 Stmicroelectronics S.R.L. Method and system for video rendering, computer program product therefor
EP2197217A1 (en) 2008-12-15 2010-06-16 Koninklijke Philips Electronics N.V. Image based 3D video format

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003092305A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Image encodder, image decoder, record medium, and image recorder
JP2004240469A (ja) * 2002-12-13 2004-08-26 Sharp Corp 画像データ作成装置およびそのデータを再生する画像データ再生装置
JP5674873B2 (ja) * 2007-04-12 2015-02-25 トムソン ライセンシングThomson Licensing ビデオ符号化及び複合化におけるタイリング

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016221344A (ja) * 2016-09-02 2016-12-28 株式会社ユニバーサルエンターテインメント 遊技機および遊技機の管理方法

Also Published As

Publication number Publication date
RU2684184C1 (ru) 2019-04-04
TR201809177T4 (tr) 2018-07-23
AU2008239653A1 (en) 2008-10-23
SI3758381T1 (sl) 2021-07-30
KR101766479B1 (ko) 2017-10-23
JP5674873B2 (ja) 2015-02-25
JP2010524398A (ja) 2010-07-15
EP3758381B1 (en) 2021-03-10
ES2941888T3 (es) 2023-05-26
JP2022140599A (ja) 2022-09-26
KR20200069389A (ko) 2020-06-16
PT3920538T (pt) 2023-04-10
PL3399756T3 (pl) 2020-12-14
JP2019201436A (ja) 2019-11-21
PL3920538T3 (pl) 2023-05-08
US20100046635A1 (en) 2010-02-25
KR101965781B1 (ko) 2019-04-05
PL3758380T3 (pl) 2021-05-17
US20140301479A1 (en) 2014-10-09
KR20140098825A (ko) 2014-08-08
HK1255617A1 (zh) 2019-08-23
HUE055864T2 (hu) 2021-12-28
EP3920538B1 (en) 2023-02-22
SI2887671T1 (sl) 2018-10-30
SI3758380T1 (sl) 2021-04-30
SI3836550T1 (sl) 2021-09-30
EP2512136A1 (en) 2012-10-17
KR101646089B1 (ko) 2016-08-05
BR122018004906B1 (pt) 2019-11-12
EP3399756A1 (en) 2018-11-07
BRPI0809510A2 (pt) 2012-12-25
US20190379897A1 (en) 2019-12-12
EP3836550B1 (en) 2021-07-21
WO2008127676A3 (en) 2008-12-18
ES2858578T3 (es) 2021-09-30
LT2887671T (lt) 2018-07-25
PT3399756T (pt) 2020-10-13
DK2887671T3 (en) 2018-07-23
US9219923B2 (en) 2015-12-22
US10129557B2 (en) 2018-11-13
KR101885790B1 (ko) 2018-08-06
BR122018004904B1 (pt) 2019-11-05
SI3920538T1 (sl) 2023-08-31
RU2763966C1 (ru) 2022-01-12
KR20160121604A (ko) 2016-10-19
WO2008127676A9 (en) 2009-02-12
US20180213246A1 (en) 2018-07-26
US10432958B2 (en) 2019-10-01
EP3920538A1 (en) 2021-12-08
US9706217B2 (en) 2017-07-11
RU2721941C1 (ru) 2020-05-25
EP3758381A1 (en) 2020-12-30
JP6825155B2 (ja) 2021-02-03
WO2008127676A2 (en) 2008-10-23
AU2008239653C1 (en) 2015-05-07
US20150341665A1 (en) 2015-11-26
US20160360218A1 (en) 2016-12-08
RU2709671C1 (ru) 2019-12-19
PL3836550T3 (pl) 2021-12-13
EP3758380B1 (en) 2021-02-03
PL2512136T3 (pl) 2016-11-30
US20160080757A1 (en) 2016-03-17
JP5324563B2 (ja) 2013-10-23
PL2887671T3 (pl) 2018-09-28
US20190037230A1 (en) 2019-01-31
ES2887248T3 (es) 2021-12-22
FI3920538T3 (fi) 2023-04-05
MX2009010973A (es) 2009-10-30
EP3836550A1 (en) 2021-06-16
JP7357125B2 (ja) 2023-10-05
EP3399756B1 (en) 2020-09-09
US9838705B2 (en) 2017-12-05
JP2020188517A (ja) 2020-11-19
DK3920538T3 (da) 2023-03-27
AU2008239653B2 (en) 2012-10-04
US9232235B2 (en) 2016-01-05
US9973771B2 (en) 2018-05-15
HUE053544T2 (hu) 2021-07-28
PT2512136T (pt) 2016-08-16
CN101658037A (zh) 2010-02-24
HUE038192T2 (hu) 2018-10-29
KR102123772B1 (ko) 2020-06-16
EP2512135B1 (en) 2015-03-18
US8780998B2 (en) 2014-07-15
PT3836550T (pt) 2021-08-31
HUE053806T2 (hu) 2021-07-28
EP2512136B1 (en) 2016-06-01
ES2586406T3 (es) 2016-10-14
US20180048904A1 (en) 2018-02-15
BR122018004903B1 (pt) 2019-10-29
DK2512136T3 (en) 2016-08-22
US20190253727A1 (en) 2019-08-15
KR101467601B1 (ko) 2014-12-02
ES2675164T3 (es) 2018-07-09
JP2017135756A (ja) 2017-08-03
BRPI0809510B1 (pt) 2019-10-08
EP3855743A1 (en) 2021-07-28
DK3758380T3 (da) 2021-03-08
EP4210330A1 (en) 2023-07-12
EP3758380A1 (en) 2020-12-30
US10764596B2 (en) 2020-09-01
JP2023165827A (ja) 2023-11-17
US10298948B2 (en) 2019-05-21
HUE061663T2 (hu) 2023-08-28
HUE052116T2 (hu) 2021-04-28
US9185384B2 (en) 2015-11-10
KR20100016212A (ko) 2010-02-12
EP2512135A1 (en) 2012-10-17
KR20190038680A (ko) 2019-04-08
US20170257638A1 (en) 2017-09-07
US20180152719A1 (en) 2018-05-31
RU2733273C1 (ru) 2020-10-01
KR20150046385A (ko) 2015-04-29
PL3758381T3 (pl) 2021-07-05
RU2521618C2 (ru) 2014-07-10
JP2013258716A (ja) 2013-12-26
RU2651227C2 (ru) 2018-04-18
JP2019201435A (ja) 2019-11-21
PT2887671T (pt) 2018-07-09
SI3399756T1 (sl) 2020-11-30
PT3758380T (pt) 2021-03-09
ZA201006649B (en) 2012-09-26
ZA201201942B (en) 2012-11-28
BRPI0823512A2 (pt) 2013-11-26
KR20180089560A (ko) 2018-08-08
KR102204262B1 (ko) 2021-01-18
PT3758381T (pt) 2021-04-13
KR20210006026A (ko) 2021-01-15
KR20190127999A (ko) 2019-11-13
ES2864544T3 (es) 2021-10-14
EP2137975A2 (en) 2009-12-30
RU2009141712A (ru) 2011-05-20
EP2887671B1 (en) 2018-05-16
US9445116B2 (en) 2016-09-13
HUE029776T2 (en) 2017-04-28
US9986254B1 (en) 2018-05-29
RU2014116612A (ru) 2015-10-27
ES2825104T3 (es) 2021-05-14
DK3836550T3 (da) 2021-08-23
JP7116812B2 (ja) 2022-08-10
JP2021052440A (ja) 2021-04-01
RU2752572C1 (ru) 2021-07-29
EP2887671A1 (en) 2015-06-24
US20150281736A1 (en) 2015-10-01
CN101658037B (zh) 2013-07-10
DK3758381T3 (da) 2021-04-12
DK3399756T3 (da) 2020-10-12
KR20230038610A (ko) 2023-03-20
KR20170106987A (ko) 2017-09-22
KR102510010B1 (ko) 2023-03-15
KR102044130B1 (ko) 2019-11-12

Similar Documents

Publication Publication Date Title
JP7116812B2 (ja) ビデオ符号化及び復号化におけるタイリング

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20150226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150916

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20151021

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20151209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160316

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160615

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20160627

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20160908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161214

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170118

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20170306