JP4611386B2 - 多視点映像のスケーラブル符号化、復号化方法及び装置 - Google Patents
多視点映像のスケーラブル符号化、復号化方法及び装置 Download PDFInfo
- Publication number
- JP4611386B2 JP4611386B2 JP2007542933A JP2007542933A JP4611386B2 JP 4611386 B2 JP4611386 B2 JP 4611386B2 JP 2007542933 A JP2007542933 A JP 2007542933A JP 2007542933 A JP2007542933 A JP 2007542933A JP 4611386 B2 JP4611386 B2 JP 4611386B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- temporal
- frequency
- spatial
- filtering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/635—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by filter definition or implementation details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4347—Demultiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
本発明の他の目的は、スケーラブル符号化された多視点映像のビットストリームを復号化して、空間的−時間的スケーラビリティを支援する多視点映像の復号化方法及び装置を提供することである。
スケーラブル映像符号化は、多様な解像度とフレーム率、画質を有する映像情報を一つのビットストリームに作って多様な環境及び多様な端末器の実行能力に合わせて提供することである。
図5は、MCTFで利用されるリフティングスキームで行われる演算過程を説明するための参考図である。図5に示すように、入力信号s[k]を偶数番目の信号s[2k]と奇数番目の信号s[2k+1]とに分ける。奇数番目の信号s[2k+1]から偶数番目の信号s[2k]の一次結合でなる予測演算子P(s[2k+1])を減算して、高周波信号h[k]を求める。低周波信号l[k]は、偶数番目の信号s[2k]に高周波信号h[k]の一次結合でなるアップデート演算子U(s[2k])を加えることによって求める。この過程は、次の数式1のように表される。
以下、本発明の望ましい実施形態による多視点映像のスケーラブル符号化方法及び装置について説明する。
時間的映像復号化部2610は、前述した多視点映像のスケーラブル符号化方法によって符号化されたビットストリームを受信する(ステップ2710)。次いで、時間的映像復号化部2610は、受信されたビットストリームを復号化して、前記ビットストリームに備えられた時間的低周波数映像及び高周波数映像を生成する(ステップ2720)。復号化過程には、一般的な映像復号化と同様にIDCT(Inverse Discrete Cosine Transform)、テクスチャ情報及びモーション情報が生成される。
For(index=0;I<8;index++){
i==Array[index];
{HiS 3,HiS 21,HiS 22,HiS 11,HiS 12,HiS 13,HiS 14}に該当するビットストリームを復号化し、該低周波数映像LiS 0とMCTF合成を行って空間軸上のi番目の映像群を復元}
1620 空間的低周波数映像に対して時間的フィルタリングを行う
1630 時間的低周波数映像及び高周波数映像をスケーラブル符号化
1640 空間的高周波数映像をスケーラブル符号化
1650 多重化
Claims (14)
- 多視点映像のスケーラブル符号化方法において、
(a)M個のカメラから入力される空間軸上のM個の映像に対して、空間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの空間的低周波数映像と(M−1)個の空間的高周波数映像とを生成するステップと、
(b)所定のN時間単位の間に生成されたN個の前記空間的低周波数映像に対して、時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの時間的低周波数映像と(N−1)個の時間的高周波数映像とを生成するステップと、
(c)前記M×N個の入力2次元映像群に割り当てられた伝送ビット率によって、前記生成された時間的低周波数映像及び高周波数映像をスケーラブル符号化するステップと、
(d)前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビット及び空間的解像度を参照して、前記空間的高周波数映像をスケーラブル符号化するステップと
を含むことを特徴とする多視点映像のスケーラブル符号化方法。 - 前記空間的移動補償時間フィルタリングは、
前記複数のM個のカメラから入力されるM個の映像のみを利用する閉ループ構造であることを特徴とする請求項1に記載の多視点映像のスケーラブル符号化方法。 - 前記時間的移動補償時間フィルタリングは、
以前に処理された前記2次元映像群に対する時間的移動補償時間フィルタリングにより生成された時間的低周波数映像を利用するオープンループ構造であることを特徴とする請求項1に記載の多視点映像のスケーラブル符号化方法。 - 前記(c)ステップは、
(c−1)前記割り当てられた伝送ビット率及び時間的解像度によって、前記生成された時間的高周波数映像のうち符号化する時間的高周波数映像を決定するステップと、
(c−2)前記生成された時間的低周波数映像と前記決定された符号化する時間的高周波数映像とをスケーラブル符号化するステップと
をさらに含むことを特徴とする請求項1に記載の多視点映像のスケーラブル符号化方法。 - 前記(d)ステップは、
(d−1)前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビットと空間的解像度とによって、前記M個のカメラから同一時間に入力されて生成された空間的高周波数映像のうち符号化する空間的高周波数映像を決定するステップと、
(d−2)前記決定された空間的高周波数映像をスケーラブル符号化するステップと
をさらに含むことを特徴とする請求項1に記載の多視点映像のスケーラブル符号化方法。 - 多視点映像のスケーラブル符号化装置において、
M個のカメラから入力される空間軸上のM個の映像に対して、空間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの空間的低周波数映像と(M−1)個の空間的高周波数映像とを生成する空間的映像フィルタリング部と、
所定のN時間単位の間に生成されたN個の前記空間的低周波数映像に対して、時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの時間的低周波数映像と(N−1)個の時間的高周波数映像とを生成する時間的映像フィルタリング部と、
前記M×N個の入力2次元映像群に割り当てられた伝送ビット率によって、前記生成された時間的低周波数映像及び高周波数映像をスケーラブル符号化する時間的映像スケーラブル符号化部と、
前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビット及び空間的解像度を参照して、前記空間的低周波数映像及び高周波数映像をスケーラブル符号化する空間的映像スケーラブル符号化部と
を備えることを特徴とする多視点映像のスケーラブル符号化装置。 - 前記空間的映像フィルタリング部は、
前記複数のM個のカメラから入力されるM個の映像のみを利用する閉ループ構造であることを特徴とする請求項6に記載の多視点映像のスケーラブル符号化装置。 - 前記時間的映像フィルタリング部は、
以前に処理された前記2次元映像群に対する時間的移動補償時間フィルタリングにより生成された時間的低周波数映像を利用するオープンループ構造であることを特徴とする請求項6に記載の多視点映像のスケーラブル符号化装置。 - 前記時間的映像スケーラブル符号化部は、
前記割り当てられた伝送ビット率及び時間的解像度によって、前記生成された時間的高周波数映像のうち符号化する時間的高周波数映像を決定し、前記生成された時間的低周波数映像及び前記決定された符号化する時間的高周波数映像をスケーラブル符号化することを特徴とする請求項6に記載の多視点映像のスケーラブル符号化装置。 - 前記空間的映像スケーラブル符号化部は、
前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビットと空間的解像度とによって、前記M個のカメラから同一時間に入力されて生成された空間的高周波数映像のうち符号化する空間的高周波数映像を決定し、前記決定された空間的高周波数映像をスケーラブル符号化することを特徴とする請求項6に記載の多視点映像のスケーラブル符号化装置。 - 多視点映像のスケーラブル復号化方法において、
(a)M個のカメラから所定のN時間単位の間に入力された2次元映像群に対して、時空間的に移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行うことによって、生成された時空間的低周波数映像及び高周波数映像をスケーラブル符号化したビットストリームを受信するステップと、
(b)前記ビットストリームに備えられたスケーラブル符号化された時間的低周波数映像及び高周波数映像を復号化するステップと、
(c)前記復号化された時間的低周波数映像及び高周波数映像に対して、逆時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用した逆フィルタリングを行って、空間的低周波数映像を復元するステップと、
(d)前記ビットストリームに備えられたスケーラブル符号化された空間的高周波数映像を復号化するステップと、
(e)前記復元された空間的低周波数映像及び復号化された空間的高周波数映像に対して、逆時間的移動補償時間フィルタリング及び階層的Bピクチャーを利用した逆フィルタリングを行って映像を復元するステップと
を含むことを特徴とする多視点映像のスケーラブル復号化方法。 - 前記スケーラブル符号化されたビットストリームは、
前記M個のカメラから入力される空間軸上のM個の映像に対して、空間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの空間的低周波数映像と(M−1)個の空間的高周波数映像とを生成するステップと、
所定のN時間単位の間に生成されたN個の前記空間的低周波数映像に対して、時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの時間的低周波数映像と(N−1)個の時間的高周波数映像とを生成するステップと、
前記M×N個の入力2次元映像群に割り当てられた伝送ビット率によって、時間的低周波数映像及び高周波数映像をスケーラブル符号化するステップと、
前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビット及び空間的解像度を参照して、空間的高周波数映像をスケーラブル符号化するステップと
を通じて生成されることを特徴とする請求項11に記載の多視点映像のスケーラブル復号化方法。 - 多視点映像のスケーラブル復号化装置において、
M個のカメラから所定のN時間単位の間に入力された2次元映像群に対して、時空間的に移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行うことによって、生成された時空間的低周波数映像及び高周波数映像をスケーラブル符号化したビットストリームを受信し、前記ビットストリームに備えられたスケーラブル符号化された時間的低周波数映像及び高周波数映像を復号化する時間的映像復号化部と、
前記復号化された時間的低周波数映像及び高周波数映像に対して、逆時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用した逆フィルタリングを行って、空間的低周波数映像を復元する時間的逆フィルタリング部と、
前記ビットストリームに備えられたスケーラブル符号化された空間的高周波数映像を復号化する空間的映像復号化部と、
前記復元された空間的低周波数映像及び復号化された空間的高周波数映像に対して、逆時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用した逆フィルタリングを行って、映像を復元する空間的逆フィルタリング部と
を備えることを特徴とする多視点映像のスケーラブル復号化装置。 - 前記スケーラブル符号化されたビットストリームは、
前記M個のカメラから入力される空間軸上のM個の映像に対して、空間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの空間的低周波数映像と(M−1)個の空間的高周波数映像とを生成するステップと、
所定のN時間単位の間に生成されたN個の前記空間的低周波数映像に対して、時間的移動補償時間フィルタリング及び階層的Bピクチャーのうち少なくとも一つを利用したフィルタリングを行って、一つの時間的低周波数映像と(N−1)個の時間的高周波数映像とを生成するステップと、
前記M×N個の入力2次元映像群に割り当てられた伝送ビット率によって、時間的低周波数映像及び高周波数映像をスケーラブル符号化するステップと、
前記時間的低周波数映像及び高周波数映像の符号化に割り当てられたビット及び空間的解像度を参照して、空間的高周波数映像をスケーラブル符号化するステップと
を通じて生成されることを特徴とする請求項13に記載の多視点映像のスケーラブル復号化装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20050027729 | 2005-04-01 | ||
KR20060025680A KR100732961B1 (ko) | 2005-04-01 | 2006-03-21 | 다시점 영상의 스케일러블 부호화, 복호화 방법 및 장치 |
PCT/KR2006/001080 WO2006104326A1 (en) | 2005-04-01 | 2006-03-31 | Scalable multi-view image encoding and decoding apparatuses and methods |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008521337A JP2008521337A (ja) | 2008-06-19 |
JP4611386B2 true JP4611386B2 (ja) | 2011-01-12 |
Family
ID=37053564
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007542933A Expired - Fee Related JP4611386B2 (ja) | 2005-04-01 | 2006-03-31 | 多視点映像のスケーラブル符号化、復号化方法及び装置 |
Country Status (8)
Country | Link |
---|---|
US (1) | US8040952B2 (ja) |
EP (1) | EP1864498B1 (ja) |
JP (1) | JP4611386B2 (ja) |
KR (1) | KR100732961B1 (ja) |
CN (1) | CN101069430B (ja) |
AU (1) | AU2006229490B2 (ja) |
CA (1) | CA2588639C (ja) |
WO (1) | WO2006104326A1 (ja) |
Families Citing this family (75)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8589315B2 (en) * | 2004-08-14 | 2013-11-19 | Hrl Laboratories, Llc | Behavior recognition using cognitive swarms and fuzzy graphs |
KR100668345B1 (ko) * | 2004-10-05 | 2007-01-12 | 삼성전자주식회사 | 움직임 보상된 계층 생성장치 및 방법 |
CN101292538B (zh) | 2005-10-19 | 2012-11-28 | 汤姆森特许公司 | 使用可缩放的视频编码的多视图视频编码 |
KR101245251B1 (ko) * | 2006-03-09 | 2013-03-19 | 삼성전자주식회사 | 균일한 화질을 제공하는 다시점 영상 부호화 및 복호화방법 및 장치 |
US8044994B2 (en) * | 2006-04-04 | 2011-10-25 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for decoding and displaying 3D light fields |
US7912296B1 (en) | 2006-05-02 | 2011-03-22 | Google Inc. | Coverage mask generation for large images |
US7965902B1 (en) | 2006-05-19 | 2011-06-21 | Google Inc. | Large-scale image processing using mass parallelization techniques |
US8762493B1 (en) * | 2006-06-22 | 2014-06-24 | Google Inc. | Hierarchical spatial data structure and 3D index data versioning for generating packet data |
KR101366092B1 (ko) | 2006-10-13 | 2014-02-21 | 삼성전자주식회사 | 다시점 영상의 부호화, 복호화 방법 및 장치 |
FR2907575B1 (fr) * | 2006-10-18 | 2009-02-13 | Canon Res Ct France Soc Par Ac | Procede et dispositif de codage d'images representant des vues d'une meme scene |
AP2545A (en) | 2006-10-20 | 2012-12-20 | Nokia Corp | Virtual decoded reference picture marking and reference picture list |
WO2008051041A1 (en) * | 2006-10-25 | 2008-05-02 | Electronics And Telecommunications Research Institute | Multi-view video scalable coding and decoding |
US8081680B2 (en) * | 2006-11-28 | 2011-12-20 | Microsoft Corporation | Selective inter-layer prediction in layered video coding |
KR100905723B1 (ko) * | 2006-12-08 | 2009-07-01 | 한국전자통신연구원 | 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법 |
JP5036826B2 (ja) * | 2006-12-14 | 2012-09-26 | トムソン ライセンシング | ビット深度スケーラビリティのためのエンハンスメントレイヤの残差予測を使用したビデオデータを符号化及び/又は復号化する方法及び装置 |
KR100922275B1 (ko) * | 2006-12-15 | 2009-10-15 | 경희대학교 산학협력단 | 경계 필터링 강도의 결정 방법 및 이를 이용한 디블록킹필터링 방법과 장치 |
KR100968204B1 (ko) * | 2007-01-11 | 2010-07-06 | 전자부품연구원 | 다시점 비디오 코덱에서의 영상 예측 방법 및 이를 위한프로그램을 기록한 컴퓨터로 판독 가능한 기록매체 |
EP3484123A1 (en) | 2007-01-12 | 2019-05-15 | University-Industry Cooperation Group Of Kyung Hee University | Packet format of network abstraction layer unit, and algorithm and apparatus for video encoding and decoding using the format |
US8155461B2 (en) * | 2007-03-27 | 2012-04-10 | Samsung Electronics Co., Ltd. | Methods and apparatuses for encoding and decoding multi-view image |
JP4861881B2 (ja) * | 2007-03-30 | 2012-01-25 | タカタ株式会社 | シートベルト巻取装置、シートベルト装置及びシートベルト巻取方法 |
CN101647287B (zh) * | 2007-04-04 | 2013-10-30 | 汤姆森特许公司 | 参考画面列表的管理 |
US8548261B2 (en) | 2007-04-11 | 2013-10-01 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding and decoding multi-view image |
KR101301181B1 (ko) * | 2007-04-11 | 2013-08-29 | 삼성전자주식회사 | 다시점 영상의 부호화, 복호화 방법 및 장치 |
US20140072058A1 (en) | 2010-03-05 | 2014-03-13 | Thomson Licensing | Coding systems |
EP3264780B1 (en) * | 2007-04-18 | 2020-06-24 | Dolby International AB | Coding systems using supplemental sequence parameter set for scalable video coding or multi-view coding |
KR101524146B1 (ko) * | 2007-04-25 | 2015-05-29 | 톰슨 라이센싱 | 다운샘플링된 기준 화상을 이용한 인터-뷰 예측 |
US8953684B2 (en) * | 2007-05-16 | 2015-02-10 | Microsoft Corporation | Multiview coding with geometry-based disparity prediction |
JP4609457B2 (ja) * | 2007-06-14 | 2011-01-12 | ソニー株式会社 | 画像処理装置、及び、画像処理方法 |
RU2010102823A (ru) * | 2007-06-26 | 2011-08-10 | Нокиа Корпорейшн (Fi) | Система и способ индикации точек переключения временных уровней |
EP2168383A2 (en) * | 2007-06-28 | 2010-03-31 | Thomson Licensing | Single loop decoding of multi-view coded video |
US20090060043A1 (en) * | 2007-08-29 | 2009-03-05 | Geert Nuyttens | Multiviewer based on merging of output streams of spatio scalable codecs in a compressed domain |
JP5144237B2 (ja) * | 2007-12-05 | 2013-02-13 | キヤノン株式会社 | 画像処理装置、その制御方法、プログラム |
WO2009130561A1 (en) * | 2008-04-21 | 2009-10-29 | Nokia Corporation | Method and device for video coding and decoding |
US8135238B2 (en) * | 2008-06-05 | 2012-03-13 | Kia Sha Managment Liability Company | Free view generation in ray-space |
CN101321302B (zh) * | 2008-07-08 | 2010-06-09 | 浙江大学 | 基于摄像机阵列的三维实时获取系统 |
WO2012122423A1 (en) * | 2011-03-10 | 2012-09-13 | Dolby Laboratories Licensing Corporation | Pre-processing for bitdepth and color format scalable video coding |
KR101012760B1 (ko) * | 2008-09-05 | 2011-02-08 | 에스케이 텔레콤주식회사 | 다시점 비디오의 송수신 시스템 및 방법 |
US20100135395A1 (en) * | 2008-12-03 | 2010-06-03 | Marc Paul Servais | Efficient spatio-temporal video up-scaling |
CN101600099B (zh) * | 2009-04-09 | 2010-12-01 | 上海交通大学 | 多视角视频码流的实时传输同步控制方法 |
CN102415100B (zh) * | 2009-04-27 | 2015-02-04 | Lg电子株式会社 | 广播接收机及其3d视频数据处理方法 |
KR101683119B1 (ko) | 2009-06-16 | 2016-12-06 | 엘지전자 주식회사 | 방송 송신기, 방송 수신기 및 3d 비디오 데이터 처리 방법 |
US9774882B2 (en) | 2009-07-04 | 2017-09-26 | Dolby Laboratories Licensing Corporation | Encoding and decoding architectures for format compatible 3D video delivery |
KR101144752B1 (ko) * | 2009-08-05 | 2012-05-09 | 경희대학교 산학협력단 | 비디오 인코딩/디코딩 방법 및 그 장치 |
US20110080948A1 (en) * | 2009-10-05 | 2011-04-07 | Xuemin Chen | Method and system for 3d video decoding using a tier system framework |
US9247286B2 (en) | 2009-12-31 | 2016-01-26 | Broadcom Corporation | Frame formatting supporting mixed two and three dimensional video data communication |
US8823782B2 (en) | 2009-12-31 | 2014-09-02 | Broadcom Corporation | Remote control with integrated position, viewer identification and optical and audio test |
US8964013B2 (en) | 2009-12-31 | 2015-02-24 | Broadcom Corporation | Display with elastic light manipulator |
US8854531B2 (en) | 2009-12-31 | 2014-10-07 | Broadcom Corporation | Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display |
WO2011094077A1 (en) * | 2010-01-26 | 2011-08-04 | Vidyo, Inc. | Low complexity, high frame rate video encoder |
US20120075436A1 (en) * | 2010-09-24 | 2012-03-29 | Qualcomm Incorporated | Coding stereo video data |
US20130222539A1 (en) * | 2010-10-08 | 2013-08-29 | Dolby Laboratories Licensing Corporation | Scalable frame compatible multiview encoding and decoding methods |
US8520080B2 (en) | 2011-01-31 | 2013-08-27 | Hand Held Products, Inc. | Apparatus, system, and method of use of imaging assembly on mobile terminal |
US20120229595A1 (en) * | 2011-03-11 | 2012-09-13 | Miller Michael L | Synthesized spatial panoramic multi-view imaging |
KR20120118779A (ko) * | 2011-04-19 | 2012-10-29 | 삼성전자주식회사 | 전처리 필터링을 수반한 계층 간 예측을 수행하는 비디오 부호화 방법 및 그 장치, 후처리 필터링을 수반한 계층 간 예측을 수행하는 비디오 복호화 방법 및 그 장치 |
KR20120118781A (ko) * | 2011-04-19 | 2012-10-29 | 삼성전자주식회사 | 다시점 비디오를 위한 단일화된 스케일러블 비디오 부호화 방법 및 그 장치, 다시점 비디오를 위한 단일화된 스케일러블 비디오 복호화 방법 및 그 장치 |
CN104205844B (zh) | 2011-09-29 | 2017-09-26 | 杜比实验室特许公司 | 降低复杂度的运动补偿的时间处理方法及系统 |
US9131217B2 (en) * | 2011-12-09 | 2015-09-08 | Qualcomm Incorporated | Reference picture list modification for view synthesis reference pictures |
US20140098880A1 (en) * | 2012-10-05 | 2014-04-10 | Qualcomm Incorporated | Prediction mode information upsampling for scalable video coding |
US8976859B2 (en) * | 2012-12-07 | 2015-03-10 | Xerox Corporation | Processing a video for spatial and temporal magnification with minimized image degradation |
WO2014163461A1 (ko) | 2013-04-05 | 2014-10-09 | 삼성전자 주식회사 | 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치 |
JP6463900B2 (ja) * | 2014-04-17 | 2019-02-06 | キヤノン株式会社 | 画像符号化装置及びその制御方法 |
WO2017010230A1 (ja) * | 2015-07-16 | 2017-01-19 | 日本電信電話株式会社 | 衛星信号受信装置、衛星信号受信方法及びプログラム |
CN106851399B (zh) * | 2015-12-03 | 2021-01-22 | 阿里巴巴(中国)有限公司 | 视频分辨率提升方法及装置 |
US10341672B2 (en) | 2017-02-03 | 2019-07-02 | Korea Advanced Institute Of Science And Technology | Method and system for media synchronization |
GB2617784B (en) * | 2019-03-20 | 2024-01-10 | V Nova Int Ltd | Temporal signalling for video coding technology |
US20230179779A1 (en) * | 2019-06-12 | 2023-06-08 | Sony Group Corporation | Image processing device and method |
KR20210034534A (ko) * | 2019-09-20 | 2021-03-30 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
CN114710665A (zh) * | 2019-09-20 | 2022-07-05 | 杭州海康威视数字技术股份有限公司 | 一种解码、编码方法、装置及其设备 |
CN112106362A (zh) * | 2019-09-30 | 2020-12-18 | 深圳市大疆创新科技有限公司 | 可移动平台的图像处理方法、装置、可移动平台及介质 |
US20220400287A1 (en) * | 2019-11-15 | 2022-12-15 | Hfi Innovation Inc. | Method and Apparatus for Signaling Horizontal Wraparound Motion Compensation in VR360 Video Coding |
US12022126B2 (en) * | 2019-11-22 | 2024-06-25 | Sharp Kabushiki Kaisha | Systems and methods for signaling tiles and slices in video coding |
JP2023524000A (ja) * | 2020-05-19 | 2023-06-08 | グーグル エルエルシー | 品質正規化ビデオコード変換のための動的パラメータ選択 |
WO2022014369A1 (ja) * | 2020-07-17 | 2022-01-20 | ソニーグループ株式会社 | 画像処理装置、画像処理方法、及びプログラム |
CN113259662B (zh) * | 2021-04-16 | 2022-07-05 | 西安邮电大学 | 基于三维小波视频编码的码率控制方法 |
US20230412812A1 (en) * | 2022-06-15 | 2023-12-21 | Tencent America LLC | Systems and methods for joint signaling of transform coefficient signs |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5619256A (en) * | 1995-05-26 | 1997-04-08 | Lucent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions |
CA2208950A1 (en) * | 1996-07-03 | 1998-01-03 | Xuemin Chen | Rate control for stereoscopic digital video encoding |
US6057884A (en) * | 1997-06-05 | 2000-05-02 | General Instrument Corporation | Temporal and spatial scaleable coding for video object planes |
US6639943B1 (en) * | 1999-11-23 | 2003-10-28 | Koninklijke Philips Electronics N.V. | Hybrid temporal-SNR fine granular scalability video coding |
US6614936B1 (en) * | 1999-12-03 | 2003-09-02 | Microsoft Corporation | System and method for robust video coding using progressive fine-granularity scalable (PFGS) coding |
WO2001078402A1 (en) * | 2000-04-11 | 2001-10-18 | Koninklijke Philips Electronics N.V. | Video encoding and decoding method |
US6931068B2 (en) * | 2000-10-24 | 2005-08-16 | Eyeball Networks Inc. | Three-dimensional wavelet-based scalable video compression |
US6944225B2 (en) * | 2001-07-24 | 2005-09-13 | Sharp Laboratories Of America, Inc. | Resolution-scalable video compression |
US6925120B2 (en) * | 2001-09-24 | 2005-08-02 | Mitsubishi Electric Research Labs, Inc. | Transcoder for scalable multi-layer constant quality video bitstreams |
KR100481732B1 (ko) * | 2002-04-20 | 2005-04-11 | 전자부품연구원 | 다 시점 동영상 부호화 장치 |
KR20030088541A (ko) * | 2002-05-11 | 2003-11-20 | 주식회사 케이씨이천일 | 신용카드 맞춤정보 제공방법 및 이를 실행하기 위한프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 |
US7321625B2 (en) * | 2002-12-13 | 2008-01-22 | Ntt Docomo, Inc. | Wavelet based multiresolution video representation with spatially scalable motion vectors |
EP1600002A1 (en) | 2003-02-25 | 2005-11-30 | Koninklijke Philips Electronics N.V. | Three-dimensional wavelet video coding using motion-compensated temporal filtering on overcomplete wavelet expansions |
US7653133B2 (en) * | 2003-06-10 | 2010-01-26 | Rensselaer Polytechnic Institute (Rpi) | Overlapped block motion compression for variable size blocks in the context of MCTF scalable video coders |
EP1650977B1 (en) * | 2003-07-24 | 2019-06-26 | Nippon Telegraph And Telephone Corporation | Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, recording medium containing the image encoding program, and recording medium containing the image decoding program |
KR20050022160A (ko) * | 2003-08-26 | 2005-03-07 | 삼성전자주식회사 | 스케일러블 비디오 코딩 및 디코딩 방법, 및 스케일러블비디오 엔코더 및 디코더 |
KR100987775B1 (ko) * | 2004-01-20 | 2010-10-13 | 삼성전자주식회사 | 영상의 3차원 부호화 방법 |
US20050201468A1 (en) * | 2004-03-11 | 2005-09-15 | National Chiao Tung University | Method and apparatus for interframe wavelet video coding |
US8442108B2 (en) * | 2004-07-12 | 2013-05-14 | Microsoft Corporation | Adaptive updates in motion-compensated temporal filtering |
US7468745B2 (en) * | 2004-12-17 | 2008-12-23 | Mitsubishi Electric Research Laboratories, Inc. | Multiview video decomposition and encoding |
-
2006
- 2006-03-21 KR KR20060025680A patent/KR100732961B1/ko active IP Right Grant
- 2006-03-30 US US11/392,817 patent/US8040952B2/en active Active
- 2006-03-31 EP EP06732683.5A patent/EP1864498B1/en active Active
- 2006-03-31 CN CN2006800012708A patent/CN101069430B/zh not_active Expired - Fee Related
- 2006-03-31 WO PCT/KR2006/001080 patent/WO2006104326A1/en active Application Filing
- 2006-03-31 CA CA2588639A patent/CA2588639C/en not_active Expired - Fee Related
- 2006-03-31 AU AU2006229490A patent/AU2006229490B2/en not_active Ceased
- 2006-03-31 JP JP2007542933A patent/JP4611386B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP1864498A4 (en) | 2012-09-05 |
EP1864498A1 (en) | 2007-12-12 |
CA2588639C (en) | 2012-08-14 |
KR100732961B1 (ko) | 2007-06-27 |
CA2588639A1 (en) | 2006-10-05 |
CN101069430A (zh) | 2007-11-07 |
US20060222079A1 (en) | 2006-10-05 |
AU2006229490A1 (en) | 2006-10-05 |
CN101069430B (zh) | 2010-05-26 |
AU2006229490B2 (en) | 2009-06-04 |
US8040952B2 (en) | 2011-10-18 |
EP1864498B1 (en) | 2019-05-01 |
KR20060105449A (ko) | 2006-10-11 |
WO2006104326A1 (en) | 2006-10-05 |
JP2008521337A (ja) | 2008-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4611386B2 (ja) | 多視点映像のスケーラブル符号化、復号化方法及び装置 | |
JP5170786B2 (ja) | マルチビュービデオのスケーラブルコーディングおよびデコーディング方法、ならびにコーディングおよびデコーディング装置 | |
US10528004B2 (en) | Methods and apparatus for full parallax light field display systems | |
KR100760258B1 (ko) | 범용적 다시점 동영상 부호화/복호화 장치 및 방법 | |
KR100728009B1 (ko) | 다시점 동영상을 부호화하는 방법 및 장치 | |
US20070104276A1 (en) | Method and apparatus for encoding multiview video | |
KR20070011147A (ko) | 시간 및 시점간 참조영상 버퍼를 활용한 예측부호화/복호화장치 및 그 방법 | |
JP2008516547A (ja) | 映像合成基盤の多視点動映像の符号化及び復号化を行うための方法及び装置 | |
EP1917814A1 (en) | Method and apparatus for encoding multiview video | |
WO2009045032A1 (en) | Encoding and decoding method for single-view video or multi-view video and apparatus thereof | |
WO2007013194A1 (ja) | 画像情報圧縮方法及び自由視点テレビシステム | |
WO2007026440A1 (ja) | 画像情報圧縮方法、画像情報圧縮装置、及び自由視点テレビシステム | |
JP2005110113A (ja) | 多視点画像伝送システムと方法、多視点画像圧縮装置と方法、多視点画像伸長装置と方法およびプログラム | |
KR100791453B1 (ko) | 움직임보상 시간축 필터링을 이용한 다시점 비디오 부호화및 복호화 방법 및 장치 | |
KR100783722B1 (ko) | 다양한 수신환경을 고려한 스테레오 비디오 부호화방법 및 장치 | |
Kumar et al. | A Comparative Analysis of Advance Three Dimensional Video Coding for Mobile Three Dimensional TV | |
Lim et al. | Motion/disparity compensated multiview sequence coding | |
Faria et al. | 3D Video Representation and Coding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100518 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100818 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100914 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101013 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131022 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4611386 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |