JP4890201B2 - マルチビュービデオを管理する方法及びシステム - Google Patents
マルチビュービデオを管理する方法及びシステム Download PDFInfo
- Publication number
- JP4890201B2 JP4890201B2 JP2006305298A JP2006305298A JP4890201B2 JP 4890201 B2 JP4890201 B2 JP 4890201B2 JP 2006305298 A JP2006305298 A JP 2006305298A JP 2006305298 A JP2006305298 A JP 2006305298A JP 4890201 B2 JP4890201 B2 JP 4890201B2
- Authority
- JP
- Japan
- Prior art keywords
- view
- reference picture
- prediction
- temporal
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 78
- 230000002123 temporal effect Effects 0.000 claims description 83
- 230000015572 biosynthetic process Effects 0.000 claims description 32
- 238000003786 synthesis reaction Methods 0.000 claims description 32
- 239000002131 composite material Substances 0.000 claims description 21
- 230000000875 corresponding effect Effects 0.000 claims description 20
- 238000001914 filtration Methods 0.000 claims description 13
- 239000000872 buffer Substances 0.000 claims description 10
- 230000003044 adaptive effect Effects 0.000 claims description 4
- 230000002596 correlated effect Effects 0.000 claims description 3
- 230000036544 posture Effects 0.000 claims 3
- 230000002194 synthesizing effect Effects 0.000 claims 2
- 230000008569 process Effects 0.000 description 23
- 238000000354 decomposition reaction Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 238000007726 management method Methods 0.000 description 16
- 238000007906 compression Methods 0.000 description 14
- 230000006835 compression Effects 0.000 description 14
- 239000013598 vector Substances 0.000 description 11
- 238000013139 quantization Methods 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 238000006073 displacement reaction Methods 0.000 description 7
- 238000003780 insertion Methods 0.000 description 5
- 230000037431 insertion Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 239000000203 mixture Substances 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013144 data compression Methods 0.000 description 2
- 238000013213 extrapolation Methods 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
図4は、本発明の1つの実施の形態によるMCTF/DCVF分解400を示す。入力ビデオ401〜404のフレームが、或るシーン5について異なる姿勢を有するカメラ1〜4によって取得される。なお、図8に示すように、カメラのうちのいくつか1a及び1bは、同一位置にあり、ただし異なる向きであってもよい。どの対のカメラ間にも或る量のビューの重なりがあると仮定される。カメラの姿勢は、マルチビュービデオの取得中に変化し得る。通常、カメラは互いに同期されている。各入力ビデオは、シーンの異なる「ビュー」を提供する。入力フレーム401〜404はMCTF/DCVF分解400に送られる。この分解は、符号化された低域フレーム411、符号化された高域フレーム412、及び関連するサイド情報413を生成する。高域フレームは、低域フレームを参照ピクチャとして用いて予測誤差を符号化する。分解は、選択された予測モード410に従って行われる。予測モードは、空間予測モード、時間予測モード、ビュー合成予測モード、及びイントラ予測モードを含む。予測モードは、各現フレームについてマクロブロック毎に適応的に選択することができる。イントラ予測を用いる場合、現マクロブロックは、同一フレーム内の他のマクロブロックから予測される。
図7に示すように、分解400の出力411及び412は信号エンコーダ710に供給され、出力413はサイド情報エンコーダ720に供給される。信号エンコーダ710は、変換、量子化及びエントロピー符号化を行って、分解された低域フレーム411及び高域フレーム412に残存する相関を除去する。このような操作は当該技術分野において既知である(Netravali及びHaskell著「Digital Pictures: Representation, Compression and Standards」(Second Edition, Plenum Press, 1995))。
ビットストリーム731を復号化740して、入力マルチビュービデオ401〜404に対応する出力マルチビュービデオ741を生成することができる。オプションで、合成ビデオも生成することができる。概して、デコーダは、エンコーダの逆の操作を行ってマルチビュービデオを再構成する。全ての低域フレーム及び高域フレームが復号化されれば、空間(ビュー)次元及び時間次元の両方において符号化品質で完全なフレーム集合が再構成され利用可能になる。
図8に示すように、ビュー合成は、1つ又は複数の実際のマルチビュービデオのフレーム803から合成ビデオのフレーム801を生成するプロセスである。言い換えれば、ビュー合成は、シーン5の選択された新たなビュー802に対応するフレーム801を合成する手段を提供する。この新たなビュー802は、入力マルチビュービデオ401〜404が取得された時点では存在しない「仮想」カメラ800に対応してもよく、又は、取得されるカメラビューに対応することができ、よって、合成ビューは、後述のようにその予測及び符号化/復号化に用いられる。
マクロブロック適応的MCTF/DCVF分解において、各マクロブロックの予測モードmは、コスト関数をマクロブロック毎に適応的に最小化することによって選択することができる。
図9は、従来技術のシングルビューの符号化及び復号化システムのための参照ピクチャ管理を示す。時間参照ピクチャ901は、復号ピクチャバッファ(DPB)940への時間参照ピクチャ901の挿入920及び削除930を決めるシングルビュー参照ピクチャリスト(RPL)マネージャ910によって管理される。参照ピクチャリスト950もまた保持されて、DPB940に格納されているフレームを示す。RPLは、挿入920及び削除930といった参照ピクチャの管理操作、並びにエンコーダ及びデコーダの両方における時間予測960のために用いられる。
エンコーダにおいて現フレームを符号化する前、又はデコーダにおいて現フレームを復号化する前に、マルチビューRPL1050においてマルチビュー参照ピクチャの集合1005を指示することができる。従来及び本明細書中で定義されるように、集合は何も有しなくても(空集合)、1つ又は複数の要素を有してもよい。RPLの同一コピーが、各現フレームについてエンコーダ及びデコーダの両方によって保持される。
RPLを管理するプロセスは、エンコーダ700とデコーダ740との間で調整される。特に、エンコーダ及びデコーダは、特定の現フレームを予測する際にマルチビュー参照ピクチャリストの同一コピーを保持する。
マルチビューRPLマネージャ1010は、マルチビュー参照ピクチャがDPBに格納される順序が、符号化及び復号化の効率を高める上でのピクチャの「有用性」に対応するようにRPLを保持する。具体的には、RPLの初めのほうの参照ピクチャは、RPLの終わりのほうの参照ピクチャよりも少ないビットで予測可能に符号化することができる。
本発明の実施の形態によるマルチビューピクチャ管理の1つの重要な利点は、既存のシングルビューのビデオ符号化システム及び設計と互換性があることである。このマルチビューピクチャ管理は、既存のシングルビュービデオ符号化規格に加える変更が最小であるだけでなく、既存のシングルビュービデオ符号化システムからのソフトウェア及びハードウェアを、本明細書に記載するマルチビュービデオ符号化に使用することも可能にする。
図8について上述したように、ビュー合成は、仮想カメラ800の合成ビュー802に対応するフレーム801を、既存のビデオから取得されるフレーム803から生成するプロセスである。言い換えれば、ビュー合成は、入力ビデオが取得された時点では存在しない仮想カメラによるシーンの選択された新たなビューに対応するフレームを合成する手段を提供する。1つ又は複数の実際のビデオのフレームの画素値及びシーン中の点の奥行き値が与えられると、合成ビデオビューのフレーム内の画素を外挿及び/又は内挿により生成することができる。
図16は、奥行き1901情報が符号化マルチビュービットストリーム731に含まれているときに、ビュー合成モードを用いて再構成マクロブロックを生成するプロセスを示す。所与のマクロブロックの奥行きは、サイド情報デコーダ1910によって復号化される。奥行き1901及び空間参照ピクチャ1902を用いてビュー合成1920を行い、合成マクロブロック1904を生成する。次に、合成マクロブロック1904と復号化された残差マクロブロック1905とを加算1930することによって再構成マクロブロック1903が形成される。
図17は、現フレームの符号化又は復号化中に予測モードを選択するプロセスを示す。時間参照ピクチャ2020を用いて現マクロブロック2011について動き推定2010を行う。結果として得られる動きベクトル2021を用いて、時間予測を用いて第1の符号化コストcost12031を求める2030。このプロセスに関連する予測モードはm1である。
ビュー合成モード2091を用いて、合成ビューの奥行き情報及び変位ベクトルを、1つ又は複数のマルチビュービデオの復号化フレームから推定することができる。奥行き情報は、適用されるプロセスに応じて、立体カメラから推定される画素毎の奥行きであってもよく、又は、マクロブロックマッチングから推定されるマクロブロック毎の奥行きであってもよい。
従来のビデオ中のフレームに対しランダムアクセスを提供するために、Iフレームとしても知られるイントラフレームが通常、ビデオ全体に間隔を置いて配置される。これにより、デコーダは、復号化シーケンス中の任意のフレームにアクセスすることが可能になるが、圧縮効率は低下する。
Claims (26)
- マルチビュービデオを管理しエンコードする方法であって、
複数のマルチビュービデオの現フレーム毎に参照ピクチャリストを保持するステップであって、該参照ピクチャリストは、前記複数のマルチビュービデオの時間参照ピクチャ及び空間参照ピクチャをインデックス付けするステップと、
前記複数のマルチビュービデオの各現フレームを、関連する参照ピクチャリストによってインデックス付けされた参照ピクチャに従って予測するステップであり、同時刻で異なるビューから参照される空間参照ピクチャのみを用いる空間予測を含む、前記予測するステップと、
前記空間参照ピクチャのみを用いる空間予測を用いて前記現在の画像を生成する場合、前記参照ピクチャリストから全ての前記時間参照ピクチャを削除するステップと
を含む、マルチビュービデオを管理しエンコードする方法。 - 該参照ピクチャリストは、合成参照ピクチャもインデックス付けし、
前記参照ピクチャリスト中の時間参照ピクチャは、対応する合成参照ピクチャの前に順序付けされ、該合成参照ピクチャは、空間参照ピクチャの前に順序付けされ、
前記合成参照ピクチャは、入力ビデオが取得された時点では存在しない仮想カメラによるシーンの選択された新たなビューに対応するフレームとして、1つ又は複数の実際のビデオのフレームを合成することで得られる参照ピクチャを意味し、
各現フレームを予測する前に、前記インデックス付けされた参照ピクチャを前記参照ピクチャリストに従って復号ピクチャバッファに格納すること、及び
選択された参照ピクチャを用いた予測が終了した後に、該選択された参照ピクチャを前記復号ピクチャバッファから削除すること
をさらに含む、請求項1に記載の方法。 - 前記複数のマルチビュービデオを或るシーンについて、複数の姿勢で配置された対応するカメラを用いて取得することであって、どの対のカメラ間にもビューの重なりがあるようにすること、及び
複数のカメラを同期させること
をさらに含む、請求項2に記載の方法。 - 前記複数のマルチビュービデオは時間的に相関するとともに空間的に相関する、請求項2に記載の方法。
- 前記複数のマルチビュービデオから合成マルチビュービデオを、前記シーンに対して新たな姿勢にある仮想カメラについて合成することであって、該新たな姿勢は前記複数の姿勢のいずれとも異なること
をさらに含む、請求項3に記載の方法。 - 前記合成することは、前記合成マルチビュービデオを前記複数のマルチビュービデオのうちの1つからワーピングする、請求項5に記載の方法。
- 前記合成することは、前記合成マルチビュービデオを前記複数のマルチビュービデオのうちの2つ以上から内挿する、請求項2に記載の方法。
- 各現フレームは複数のマクロブロックを含み、前記予測することは、複数の予測モードのうちの選択された1つに従ってマクロブロック適応的である、請求項2に記載の方法。
- 同一の参照ピクチャリストが符号化及び復号化中に特定の現ブロックの予測に用いられる、請求項2に記載の方法。
- 前記複数の予測モードは、空間予測モード、時間予測モード、ビュー合成予測モード、及びイントラ予測モードを含む、請求項8に記載の方法。
- 動き補償時間フィルタリングがまず各マルチビュービデオに個別に適用され、視差補償ビュー間フィルタリングが次に適用されて時間スケーラビリティがサポートされる、請求項4に記載の方法。
- 動き補償時間フィルタリングがまず適用されて前記複数のマルチビュービデオが分解され、視差補償ビュー間フィルタリングが次に該分解されたマルチビュービデオに適用されて時間スケーラビリティがサポートされる、請求項4に記載の方法。
- 視差補償ビュー間フィルタリングがまず適用されて前記複数のマルチビュービデオが分解され、動き補償時間フィルタリングが次に該分解されたマルチビュービデオに適用されて空間スケーラビリティがサポートされる、請求項4に記載の方法。
- 動き補償時間フィルタリング及び前記視差補償ビュー間フィルタリングが反復的に適用されて時間的相関及び空間的相関が除去される、請求項4に記載の方法。
- 前記合成することはエンコーダにおいて行われる、請求項5に記載の方法。
- 前記参照ピクチャリスト内の前記参照ピクチャを、ビュータイプの集合のうちの選択された1つのビュータイプに従って順序付けすること
をさらに含む、請求項2に記載の方法。 - 前記参照ピクチャリスト中の前記参照ピクチャを、前記複数のマルチビュービデオを取得するために使用されるカメラのパラメータに従って順序付けすること
をさらに含む、請求項2に記載の方法。 - 前記参照ピクチャリスト中の前記参照ピクチャを、符号化効率に従って順序付けすること
をさらに含む、請求項2に記載の方法。 - 前記ビュータイプの集合はIビュー、Pビュー及びBビューを含む、請求項17に記載の方法。
- 前記参照ピクチャリスト中の時間参照ピクチャは、相関係数に従って順序付けされる、請求項2に記載の方法。
- 前記参照ピクチャリスト中の前記参照ピクチャを、マルチビュー予測モードの集合のうちの選択された1つのマルチビュー予測モードに従って符号化すること
をさらに含む、請求項2に記載の方法。 - 時間予測について第1のコストを求めること、
空間予測について第2のコストを求めること、
ビュー合成予測について第3のコストを求めること、
イントラ予測について第4のコストを求めること、及び
前記第1のコスト、前記第2のコスト、前記第3のコスト及び前記第4のコストのうちの最小コストに従って前記予測を選択すること
をさらに含む、請求項22に記載の方法。 - 前記複数のマルチビュービデオから合成マルチビュービデオを、前記シーンに対して前記複数の姿勢のうちの1つと同じ姿勢にある仮想カメラについて合成すること
をさらに含む、請求項3に記載の方法。 - 現カメラビューに対する近傍カメラビューの近接度が求められ、指定された近接度以内の該近傍カメラビューに対応する前記参照ピクチャのみが前記現カメラビューの前記参照ピクチャリストに追加される、請求項18に記載の方法。
- マルチビュービデオを管理しエンコードするシステムであって、
複数のマルチビュービデオの現フレーム毎に、前記複数のマルチビュービデオの時間参照ピクチャ及び空間参照ピクチャをインデックス付けする参照ピクチャリストを保持するように構成される参照ピクチャリストマネージャと、
前記複数のマルチビュービデオの各現フレームを、関連する参照ピクチャリストによってインデックス付けされた参照ピクチャに従って予測する手段であり、同時間で異なるビューから参照される空間参照ピクチャのみを用いる空間予測を含む、前記予測する手段と、
前記空間参照ピクチャのみを用いる空間予測を用いて前記現在の画像を生成する場合、前記参照ピクチャリストから全ての前記時間参照ピクチャを削除する手段と
を備える、マルチビュービデオを管理しエンコードするシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/292,393 US7489342B2 (en) | 2004-12-17 | 2005-11-30 | Method and system for managing reference pictures in multiview videos |
US11/292,393 | 2005-11-30 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007159111A JP2007159111A (ja) | 2007-06-21 |
JP4890201B2 true JP4890201B2 (ja) | 2012-03-07 |
Family
ID=37770344
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006305298A Active JP4890201B2 (ja) | 2005-11-30 | 2006-11-10 | マルチビュービデオを管理する方法及びシステム |
Country Status (3)
Country | Link |
---|---|
US (1) | US7489342B2 (ja) |
EP (1) | EP1793609B1 (ja) |
JP (1) | JP4890201B2 (ja) |
Families Citing this family (73)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100987775B1 (ko) * | 2004-01-20 | 2010-10-13 | 삼성전자주식회사 | 영상의 3차원 부호화 방법 |
JP2007073424A (ja) * | 2005-09-08 | 2007-03-22 | Sanyo Electric Co Ltd | 非水電解質二次電池 |
US8229983B2 (en) | 2005-09-27 | 2012-07-24 | Qualcomm Incorporated | Channel switch frame |
US8670437B2 (en) * | 2005-09-27 | 2014-03-11 | Qualcomm Incorporated | Methods and apparatus for service acquisition |
US7471292B2 (en) * | 2005-11-15 | 2008-12-30 | Sharp Laboratories Of America, Inc. | Virtual view specification and synthesis in free viewpoint |
US7903737B2 (en) * | 2005-11-30 | 2011-03-08 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for randomly accessing multiview videos with known prediction dependency |
KR101276847B1 (ko) | 2006-01-12 | 2013-06-18 | 엘지전자 주식회사 | 다시점 비디오의 처리 |
KR100934677B1 (ko) | 2006-01-12 | 2009-12-31 | 엘지전자 주식회사 | 다시점 비디오의 처리 |
US20070177671A1 (en) * | 2006-01-12 | 2007-08-02 | Lg Electronics Inc. | Processing multiview video |
WO2007114612A1 (en) * | 2006-03-30 | 2007-10-11 | Lg Electronics Inc. | A method and apparatus for decoding/encoding a video signal |
US20100091845A1 (en) * | 2006-03-30 | 2010-04-15 | Byeong Moon Jeon | Method and apparatus for decoding/encoding a video signal |
WO2007148909A1 (en) * | 2006-06-19 | 2007-12-27 | Lg Electronics, Inc. | Method and apparatus for processing a vedeo signal |
CN101491099B (zh) | 2006-07-11 | 2011-09-21 | 汤姆森特许公司 | 使用虚拟参考画面的方法及装置 |
TWI344792B (en) * | 2006-07-12 | 2011-07-01 | Lg Electronics Inc | A method and apparatus for processing a signal |
WO2008023968A1 (en) * | 2006-08-25 | 2008-02-28 | Lg Electronics Inc | A method and apparatus for decoding/encoding a video signal |
CN102761744B (zh) * | 2006-10-13 | 2015-10-28 | 汤姆逊许可公司 | 用于多视点视频编码的参考图像列表管理语法 |
CN107295350A (zh) * | 2006-10-13 | 2017-10-24 | 汤姆逊许可公司 | 用于多视点视频编码的参考图像列表管理语法 |
CN104093031B (zh) * | 2006-10-16 | 2018-07-20 | 诺基亚技术有限公司 | 在多视点视频编码中实施已解码缓存器管理的系统和方法 |
US20100002761A1 (en) * | 2006-10-16 | 2010-01-07 | Thomson Licensing | Method for using a network abstract layer unit to signal an instantaneous decoding refresh during a video operation |
FR2907575B1 (fr) * | 2006-10-18 | 2009-02-13 | Canon Res Ct France Soc Par Ac | Procede et dispositif de codage d'images representant des vues d'une meme scene |
US20100027615A1 (en) * | 2006-10-24 | 2010-02-04 | Purvin Bibhas Pandit | Picture identification for multi-view video coding |
BRPI0718629A2 (pt) * | 2006-11-14 | 2013-11-26 | Qualcomm Inc | Sistema e métodos para comutação de canal. |
WO2008061211A2 (en) * | 2006-11-15 | 2008-05-22 | Qualcomm Incorporated | Systems and methods for applications using channel switch frames |
KR20080066522A (ko) * | 2007-01-11 | 2008-07-16 | 삼성전자주식회사 | 다시점 영상의 부호화, 복호화 방법 및 장치 |
EP2123042A4 (en) * | 2007-01-24 | 2010-03-10 | Lg Electronics Inc | METHOD AND APPARATUS FOR PROCESSING A VIDEO SIGNAL |
CN101669367A (zh) * | 2007-03-02 | 2010-03-10 | Lg电子株式会社 | 用于解码/编码视频信号的方法及设备 |
JP5273824B2 (ja) * | 2007-04-04 | 2013-08-28 | トムソン ライセンシング | 参照ピクチャー・リスト管理 |
EP4210330A1 (en) | 2007-04-12 | 2023-07-12 | Dolby International AB | Tiling in video decoding and encoding |
CN101690220B (zh) * | 2007-04-25 | 2013-09-25 | Lg电子株式会社 | 用于解码/编码视频信号的方法和装置 |
WO2008140190A1 (en) * | 2007-05-14 | 2008-11-20 | Samsung Electronics Co, . Ltd. | Method and apparatus for encoding and decoding multi-view image |
US20090060043A1 (en) * | 2007-08-29 | 2009-03-05 | Geert Nuyttens | Multiviewer based on merging of output streams of spatio scalable codecs in a compressed domain |
MY162861A (en) | 2007-09-24 | 2017-07-31 | Koninl Philips Electronics Nv | Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal |
CN101415114B (zh) * | 2007-10-17 | 2010-08-25 | 华为终端有限公司 | 视频编解码方法和装置以及视频编解码器 |
KR101560182B1 (ko) * | 2008-01-07 | 2015-10-15 | 삼성전자주식회사 | 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 |
KR101524465B1 (ko) | 2008-01-10 | 2015-06-02 | 삼성전자주식회사 | 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 |
WO2009108028A1 (ko) * | 2008-02-28 | 2009-09-03 | 엘지전자(주) | 자유시점 영상 복호화 방법 및 장치 |
CN102017632B (zh) * | 2008-03-04 | 2013-06-12 | 汤姆逊许可证公司 | 虚拟基准视图 |
KR101479011B1 (ko) * | 2008-12-17 | 2015-01-13 | 삼성전자주식회사 | 다중 대역 스케쥴링 방법 및 이를 이용한 방송 서비스 시스템 |
US8750632B2 (en) | 2008-12-26 | 2014-06-10 | JVC Kenwood Corporation | Apparatus and method for encoding images from multiple viewpoints and associated depth information |
WO2010085361A2 (en) | 2009-01-26 | 2010-07-29 | Thomson Licensing | Frame packing for video coding |
US8693539B2 (en) * | 2009-03-26 | 2014-04-08 | Panasonic Corporation | Coding method, error detecting method, decoding method, coding apparatus, error detecting apparatus, and decoding apparatus |
EP2422520A1 (en) | 2009-04-20 | 2012-02-29 | Dolby Laboratories Licensing Corporation | Adaptive interpolation filters for multi-layered video delivery |
CA2718447C (en) * | 2009-04-28 | 2014-10-21 | Panasonic Corporation | Image decoding method, image coding method, image decoding apparatus, and image coding apparatus |
EP2425626A2 (en) | 2009-05-01 | 2012-03-07 | Thomson Licensing | Inter-layer dependency information for 3dv |
TWI384887B (zh) * | 2009-06-11 | 2013-02-01 | Univ Nat Central | 多視點影像編解碼方法 |
WO2011005624A1 (en) | 2009-07-04 | 2011-01-13 | Dolby Laboratories Licensing Corporation | Encoding and decoding architectures for format compatible 3d video delivery |
AU2009243439A1 (en) * | 2009-11-30 | 2011-06-16 | Canon Kabushiki Kaisha | Robust image alignment for distributed multi-view imaging systems |
EP2524504A1 (en) | 2010-01-14 | 2012-11-21 | Dolby Laboratories Licensing Corporation | Buffered adaptive filters |
JP5722349B2 (ja) | 2010-01-29 | 2015-05-20 | トムソン ライセンシングThomson Licensing | ブロックに基づくインターリーブ |
BR112012020993A2 (pt) * | 2010-02-24 | 2016-05-03 | Nippon Telegraph & Telephone | método de codificação de vídeo de múltiplas visões , método de decodificação de vídeo de múltiplas visões, aparelho de codificação de vídeo de múltiplas visões, aparelho de decodificação de vídeo de múltiplas visões , e programa |
JP2012023651A (ja) * | 2010-07-16 | 2012-02-02 | Sony Corp | 画像処理装置と画像処理方法 |
JP2012023652A (ja) * | 2010-07-16 | 2012-02-02 | Sony Corp | 画像処理装置と画像処理方法 |
US9398308B2 (en) | 2010-07-28 | 2016-07-19 | Qualcomm Incorporated | Coding motion prediction direction in video coding |
WO2012036903A1 (en) | 2010-09-14 | 2012-03-22 | Thomson Licensing | Compression methods and apparatus for occlusion data |
US9066102B2 (en) | 2010-11-17 | 2015-06-23 | Qualcomm Incorporated | Reference picture list construction for generalized P/B frames in video coding |
JP5281632B2 (ja) * | 2010-12-06 | 2013-09-04 | 日本電信電話株式会社 | 多視点画像符号化方法,多視点画像復号方法,多視点画像符号化装置,多視点画像復号装置およびそれらのプログラム |
KR101187530B1 (ko) * | 2011-03-02 | 2012-10-02 | 한국과학기술원 | 모노스코픽, 스테레오 스코픽 및 멀티뷰를 위한 렌더링 방법, 시스템 및 이를 위한 기록매체 |
KR20120118781A (ko) * | 2011-04-19 | 2012-10-29 | 삼성전자주식회사 | 다시점 비디오를 위한 단일화된 스케일러블 비디오 부호화 방법 및 그 장치, 다시점 비디오를 위한 단일화된 스케일러블 비디오 복호화 방법 및 그 장치 |
JP2013038623A (ja) * | 2011-08-09 | 2013-02-21 | Sony Corp | 画像符号化装置と画像符号化方法およびプログラム |
WO2013031573A1 (ja) * | 2011-08-31 | 2013-03-07 | ソニー株式会社 | 符号化装置および符号化方法、復号装置および復号方法 |
US9131245B2 (en) | 2011-09-23 | 2015-09-08 | Qualcomm Incorporated | Reference picture list construction for video coding |
KR102047492B1 (ko) * | 2012-03-12 | 2019-11-22 | 삼성전자주식회사 | 스케일러블 비디오 부호화 방법 및 장치, 스케일러블 비디오 복호화 방법 및 장치 |
US9503702B2 (en) * | 2012-04-13 | 2016-11-22 | Qualcomm Incorporated | View synthesis mode for three-dimensional video coding |
WO2013176485A1 (ko) * | 2012-05-22 | 2013-11-28 | 엘지전자 주식회사 | 비디오 신호 처리 방법 및 장치 |
US9762903B2 (en) * | 2012-06-01 | 2017-09-12 | Qualcomm Incorporated | External pictures in video coding |
US9258562B2 (en) | 2012-06-13 | 2016-02-09 | Qualcomm Incorporated | Derivation of depth map estimate |
CN107318027B (zh) * | 2012-12-27 | 2020-08-28 | 日本电信电话株式会社 | 图像编码/解码方法、图像编码/解码装置、以及图像编码/解码程序 |
US10136119B2 (en) * | 2013-01-10 | 2018-11-20 | Qualcomm Incoporated | View synthesis in 3D video |
WO2014124982A1 (en) * | 2013-02-13 | 2014-08-21 | Universität des Saarlandes | Plenoptic imaging device |
KR102153539B1 (ko) * | 2013-09-05 | 2020-09-08 | 한국전자통신연구원 | 영상 처리 장치 및 방법 |
US20190141332A1 (en) * | 2017-11-08 | 2019-05-09 | Qualcomm Incorporated | Use of synthetic frames in video coding |
FR3075540A1 (fr) | 2017-12-15 | 2019-06-21 | Orange | Procedes et dispositifs de codage et de decodage d'une sequence video multi-vues representative d'une video omnidirectionnelle. |
US10638165B1 (en) * | 2018-11-08 | 2020-04-28 | At&T Intellectual Property I, L.P. | Adaptive field of view prediction |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0698312A (ja) * | 1992-09-16 | 1994-04-08 | Fujitsu Ltd | 画像高能率符号化方式 |
EP0639031A3 (en) * | 1993-07-09 | 1995-04-05 | Rca Thomson Licensing Corp | Method and device for encoding stereo image signals. |
JP3426668B2 (ja) * | 1993-11-19 | 2003-07-14 | 三洋電機株式会社 | 動画像符号化方法 |
US5612735A (en) * | 1995-05-26 | 1997-03-18 | Luncent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing two disparity estimates |
US6055012A (en) * | 1995-12-29 | 2000-04-25 | Lucent Technologies Inc. | Digital multi-view video compression with complexity and compatibility constraints |
JPH09261653A (ja) * | 1996-03-18 | 1997-10-03 | Sharp Corp | 多視点画像符号化装置 |
JP3776595B2 (ja) * | 1998-07-03 | 2006-05-17 | 日本放送協会 | 多視点画像の圧縮符号化装置および伸長復号化装置 |
KR100433625B1 (ko) * | 2001-11-17 | 2004-06-02 | 학교법인 포항공과대학교 | 스테레오 카메라의 두영상과 양안차도를 이용한 다시점영상 합성 장치 |
JP4185014B2 (ja) * | 2004-04-14 | 2008-11-19 | 日本電信電話株式会社 | 映像符号化方法、映像符号化装置、映像符号化プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体、並びに、映像復号方法、映像復号装置、映像復号プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体 |
-
2005
- 2005-11-30 US US11/292,393 patent/US7489342B2/en not_active Expired - Fee Related
-
2006
- 2006-11-10 JP JP2006305298A patent/JP4890201B2/ja active Active
- 2006-11-17 EP EP06023909.2A patent/EP1793609B1/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2007159111A (ja) | 2007-06-21 |
EP1793609A2 (en) | 2007-06-06 |
US20060146143A1 (en) | 2006-07-06 |
EP1793609B1 (en) | 2015-08-19 |
US7489342B2 (en) | 2009-02-10 |
EP1793609A3 (en) | 2009-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4890201B2 (ja) | マルチビュービデオを管理する方法及びシステム | |
JP5274766B2 (ja) | マルチビュービデオを予測する方法及びシステム | |
JP5106830B2 (ja) | マルチビュービデオにランダムにアクセスする方法及びシステム | |
JP5154681B2 (ja) | マルチビュービデオをエンコードする方法 | |
JP5116394B2 (ja) | 或るシーンの複数のマルチビュービデオを処理する方法及びシステム | |
JP5744333B2 (ja) | シーンのマルチビュービデオを処理する方法及びシステム | |
JP5013993B2 (ja) | 或るシーンの複数のマルチビュービデオを処理する方法及びシステム | |
JP4786534B2 (ja) | マルチビュービデオを分解する方法及びシステム | |
JP2015519834A (ja) | 動きベクトル予測子リストを用いてビュー合成のためにマルチビュービデオを処理する方法及びシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090930 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111213 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111214 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4890201 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141222 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |