JP5749340B2 - マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 - Google Patents
マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 Download PDFInfo
- Publication number
- JP5749340B2 JP5749340B2 JP2013520851A JP2013520851A JP5749340B2 JP 5749340 B2 JP5749340 B2 JP 5749340B2 JP 2013520851 A JP2013520851 A JP 2013520851A JP 2013520851 A JP2013520851 A JP 2013520851A JP 5749340 B2 JP5749340 B2 JP 5749340B2
- Authority
- JP
- Japan
- Prior art keywords
- enhancement layer
- image
- frame
- base layer
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 223
- 238000012545 processing Methods 0.000 claims description 144
- 239000000872 buffer Substances 0.000 claims description 139
- 238000005070 sampling Methods 0.000 claims description 41
- 230000008569 process Effects 0.000 claims description 32
- 238000001914 filtration Methods 0.000 claims description 18
- 238000012856 packing Methods 0.000 claims description 5
- 239000010410 layer Substances 0.000 description 534
- 230000000875 corresponding effect Effects 0.000 description 13
- 238000013459 approach Methods 0.000 description 11
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 239000000463 material Substances 0.000 description 6
- 239000011229 interlayer Substances 0.000 description 5
- 238000007726 management method Methods 0.000 description 5
- 238000005192 partition Methods 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000011664 signaling Effects 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
(EEE1) マルチレイヤフレーム準拠ビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のデータカテゴリの画像又はビデオフレームを基本レイヤ処理するステップであって、
i) 前記複数のデータカテゴリの画像又はビデオフレームの基本レイヤフレーム準拠表現を供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のデータカテゴリの画像又はビデオフレームを拡張レイヤ処理するステップであって、
i) 前記複数のデータカテゴリの画像又はビデオフレームの拡張レイヤフレーム準拠表現を供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii) 前記基本レイヤ又は異なる拡張レイヤへの少なくとも1つの従属関係を参照処理するステップ、
iv)動き又は視差補償を実行するステップ、
を含むステップ、
を有し、前記1又は複数の拡張レイヤの各々は、前記複数のデータカテゴリの全てを処理する、符号化方法。
(EEE2) 前記複数のデータカテゴリは、立体画像又はビデオの複数のビューを有する、EEE1に記載の符号化方法。
(EEE3) 前記複数のデータカテゴリの画像又はビデオフレームの基本レイヤフレーム準拠表現を供給するステップは、
前記複数のデータカテゴリの画像又はビデオフレームを基本レイヤサンプリングし単一フレームに基本レイヤ多重化するステップ、
を有する、EEE1又は2に記載の符号化方法。
(EEE4) 前記基本レイヤ処理するステップは、複数の既存のビデオコーデックのうちの1つに従う、EEE1〜3のいずれか一項に記載の符号化方法。
(EEE5) 前記複数の既存のビデオコーデックは、H.264/AVC、VP8及びVC-1を有する、EEE4に記載の符号化方法。
(EEE6) 前記基本レイヤ処理のサンプリングは、前記複数のデータカテゴリの画像又はビデオフレームの対称又は非対称フィルタリングを含む、EEE3〜5のいずれか一項に記載の符号化方法。
(EEE7) 前記基本レイヤサンプリングするステップは、水平サンプリング、垂直サンプリング又は5点形サンプリングを有する、EEE3〜6のいずれか一項に記載の符号化方法。
(EEE8) 前記基本レイヤ多重化するステップは、チェックボードインタリーブ配置、列インタリーブ配置、行インタリーブ配置、サイドバイサイドインタリーブ配置、及び上下インタリーブ配置のうちのいずれか1つのフレーム準拠パッキング配置を用いる、EEE3〜7のいずれか一項に記載の符号化方法。
(EEE9) 前記基本レイヤ処理は、前記複数のビューの画像又はビデオフレームの等しい又は等しくない量のサンプルを処理するステップを更に含む、EEE2〜8のいずれか一項に記載の符号化方法。
(EEE10) 前記拡張レイヤ処理するステップは、ハイブリッドビデオ符号化モデルを採用し、前記ハイブリッドビデオ符号化モデルは、複数の既存のコーデックのうちのいずれか1つに従う、EEE2〜9のいずれか一項に記載の符号化方法。
(EEE11) 前記複数の既存のコーデックは、VC-1及びH.264/AVCを有する、EEE10に記載の符号化方法。
(EEE12) 前記拡張レイヤ処理するステップは、
同一の画像若しくはフレーム内のサンプルから、又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、
前記少なくとも1つの予測画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を含む、EEE2〜11のいずれか一項に記載の符号化方法。
(EEE13) 前記少なくとも1つの参照画像又はビデオフレームの生成は、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和を逆多重化し参照処理するステップを更に含む、EEE12に記載の符号化方法。
(EEE14) 前記逆多重化は、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和をアップサンプリングし補間するステップを更に含む、EEE13に記載の符号化方法。
(EEE15) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファのうちの1つは、他の前記少なくとも1つの拡張レイヤ参照ピクチャバッファと異なる解像度で画像又はビデオフレームを格納する、EEE2〜14のいずれか一項に記載の符号化方法。
(EEE16) 前記拡張レイヤ処理するステップは、
前記複数のデータカテゴリの各々に対し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファから少なくとも1つの参照画像を選択するステップ、
前記の選択された少なくとも1つの参照画像を拡張レイヤサンプリングし、少なくとも1つのフレーム準拠画像に拡張レイヤ多重化するステップ、
前記少なくとも1つのフレーム準拠画像に基づき、視差補償又はインター予測を実行するステップ、
を更に含む、EEE1〜15のいずれか一項に記載の符号化方法。
(EEE17) 前記選択された少なくとも1つの参照画像の拡張レイヤサンプリングは、水平サンプリング、垂直サンプリング又は5点形サンプリングのうちのいずれか1つを有し、
前記選択された少なくとも1つの参照画像の拡張レイヤ多重化は、チェックボードインタリーブ配置、列インタリーブ配置、行インタリーブ配置、サイドバイサイドインタリーブ配置、及び上下インタリーブ配置のうちのいずれか1つのフレーム準拠パッキング配置を用いる、EEE16に記載の符号化方法。
(EEE18) 前記拡張レイヤ処理は、
前記基本レイヤの参照バッファからの少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を基本レイヤ−拡張レイヤ(BL−to−EL)処理するステップ、
前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE16又は17に記載の符号化方法。
(EEE19) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を参照処理し、逆多重化し、アップサンプリングするステップを含む、EEE18に記載の符号化方法。
(EEE20) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像をフィルタリングし、アップスケーリングし、補間するステップを更に含む、EEE19に記載の符号化方法。
(EEE21) 前記拡張レイヤ処理するステップは、前記BL−to−EL処理に関する情報を対応するデコーダに供給するステップを更に含む、EEE18〜20のいずれか一項に記載の符号化方法。
(EEE22) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、前記複数のデータカテゴリのうちの各々1つに対して、同一の又は異なる拡張解像度で、画像を格納する、EEE1〜21のいずれか一項に記載の符号化方法。
(EEE23) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、元の入力画像と同じ解像度で、画像を格納する、EEE1〜22のいずれか一項に記載の符号化方法。
(EEE24) 前記基本レイヤ多重化するステップ及び前記拡張レイヤ多重化するステップは、同一のフレーム準拠パッキング配置を用いる、EEE1〜23のいずれか一項に記載の符号化方法。
(EEE25) 前記基本レイヤ処理するステップ及び前記拡張レイヤ処理するステップは、異なる空間解像度で画像を処理する、EEE18〜24のいずれか一項に記載の符号化方法。
(EEE26) 前記BL−to−EL処理するステップは、
前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を逆多重化するステップ、
前記の逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を補間するステップ、
前記補完された逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に再スケーリングするステップ、
を有する、EEE25に記載の符号化方法。
(EEE27) 前記BL−to−EL処理するステップは、
前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を逆多重化するステップ、
前記の逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を異なる空間解像度に再スケーリングするステップ、
前記の逆多重化された再スケーリングされた少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に補間するステップ、
を有する、EEE25に記載の符号化方法。
(EEE28) 逆多重化された再スケーリングされた少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度にフィルタリングするステップを更に含む、EEE27に記載の符号化方法。
(EEE29) 前記拡張レイヤ処理するステップは、メモリ管理制御動作(memory management control operation:MMCO)を通じて前記少なくとも1つの拡張レイヤ参照ピクチャバッファを制御するステップを更に含む、EEE1〜28のいずれか一項に記載の符号化方法。
(EEE30) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、1又は複数のMMCOセットに従い同期化される、EEE1〜29のいずれか一項に記載の符号化方法。
(EEE31) 前記拡張レイヤ処理するステップは、前記MMCOに関する情報を対応するデコーダに供給するステップを更に含む、EEE29又は30に記載の符号化方法。
(EEE32) 前記基本レイヤ処理するステップは、第1の周波数範囲の画像成分を符号化し、前記拡張レイヤ処理するステップは、第2の周波数範囲の画像成分を符号化する、EEE1〜31のいずれか一項に記載の符号化方法。
(EEE33) 前記拡張レイヤ処理するステップは、
前記複数のデータカテゴリの各々に対し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファから少なくとも1つの参照画像を選択するステップ、
前記少なくとも1つの参照画像に基づき視差補償又はインター予測を実行することにより、前記複数のデータカテゴリの各々に対し、少なくとも1つの補償画像を得るステップ、
前記少なくとも1つの補償画像を拡張レイヤサンプリングし、少なくとも1つのフレーム準拠画像に拡張レイヤ多重化するステップ、
を更に含む、EEE1〜15のいずれか一項に記載の符号化方法。
(EEE34) 前記拡張レイヤ処理するステップは、メモリ管理制御動作(memory management control operation:MMCO)を通じて前記少なくとも1つの拡張レイヤ参照ピクチャバッファを制御するステップを更に含む、EEE33に記載の符号化方法。
(EEE35) 前記拡張レイヤ処理するステップは、前記MMCOに関する情報を対応するデコーダに供給するステップを更に含む、EEE34に記載の符号化方法。
(EEE36) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、前記複数のデータカテゴリの各々に対して、同一の又は異なる拡張解像度で、画像を格納する、EEE33〜35のいずれか一項に記載の符号化方法。
(EEE37) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、元の入力画像と同じ解像度で、画像を格納する、EEE33〜36のいずれか一項に記載の符号化方法。
(EEE38) 前記基本レイヤ処理するステップは、第1の周波数範囲の画像成分を符号化し、前記拡張レイヤ処理するステップは、第2の周波数範囲の画像成分を符号化する、EEE33〜37のいずれか一項に記載の符号化方法。
(EEE39) マルチレイヤフレーム準拠ビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のデータカテゴリの画像又はビデオフレームを基本レイヤ処理するステップであって、
i) 前記複数のデータカテゴリの画像又はビデオフレームの基本レイヤフレーム準拠表現を供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のデータカテゴリの画像又はビデオフレームを拡張レイヤ処理するステップであって、
i) 前記複数のデータカテゴリのうちの1つの画像又はビデオフレームの拡張レイヤ表現を供給するステップ、
ii)各拡張レイヤに拡張レイヤ参照ピクチャバッファを保持するステップ、
iii) 前記基本レイヤ又は異なる拡張レイヤへの少なくとも1つの従属関係を参照処理するステップ、
iv)動き又は視差補償を実行するステップ、
を含むステップ、
を有する、符号化方法。
(EEE40) 前記複数のデータカテゴリは、立体画像又はビデオの複数のビューを有する、EEE39に記載の符号化方法。
(EEE41) 前記複数のデータカテゴリの画像又はビデオフレームの基本レイヤフレーム準拠表現を供給するステップは、前記複数のデータカテゴリの画像又はビデオフレームを基本レイヤサンプリングし単一フレームに基本レイヤ多重化するステップ、
を有する、EEE39又は40に記載の符号化方法。
(EEE42) 前記基本レイヤ処理するステップは、複数の既存のビデオコーデックのうちの1つに従う、EEE39〜41のいずれか一項に記載の符号化方法。
(EEE43) 前記複数の既存のビデオコーデックは、H.264/AVC、VP8及びVC-1を有する、EEE42に記載の符号化方法。
(EEE44) 前記基本レイヤ処理のサンプリングは、前記複数のデータカテゴリの画像又はビデオフレームの対称又は非対称フィルタリングを含む、EEE41〜43のいずれか一項に記載の符号化方法。
(EEE45) 前記基本レイヤサンプリングするステップは、水平サンプリング、垂直サンプリング又は5点形サンプリングを有する、EEE41〜44のいずれか一項に記載の符号化方法。
(EEE46) 前記基本レイヤ多重化するステップは、チェックボードインタリーブ配置、列インタリーブ配置、行インタリーブ配置、サイドバイサイドインタリーブ配置、及び上下インタリーブ配置のうちのいずれか1つのフレームに準拠したパッキング配置を用いる、EEE41〜45のいずれか一項に記載の符号化方法。
(EEE47) 前記基本レイヤ処理は、前記複数のビューの画像又はビデオフレームの等しい又は等しくない量のサンプルを処理するステップを更に含む、EEE40〜46のいずれか一項に記載の符号化方法。
(EEE48) 前記符号化レイヤ処理するステップは、ハイブリッドビデオ符号化モデルを採用し、前記ハイブリッドビデオ符号化モデルは、複数の既存のコーデックのうちのいずれか1つに従う、EEE40〜47のいずれか一項に記載の符号化方法。
(EEE49) 前記複数の既存のコーデックは、VC-1及びH.264/AVCを有する、EEE48に記載の符号化方法。
(EEE50) 前記動き又は視差補償を実行するステップは、前記拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの画像に基づく、EEE39〜49のいずれか一項に記載の符号化方法。
(EEE51) 前記拡張レイヤ処理するステップは、
前記基本レイヤの参照バッファからの少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を基本レイヤ−拡張レイヤ(BL−to−EL)処理するステップ、
前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE39〜49のいずれか一項に記載の符号化方法。
(EEE52) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を参照処理し、逆多重化しアップサンプリングするステップを含む、EEE51に記載の符号化方法。
(EEE53) 前記1又は複数の拡張レイヤの各々の前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像の参照処理、逆多重化、アップサンプリングを一緒に実行し最適化する単一の処理ユニットにより処理される、EEE52に記載の符号化方法。
(EEE54) 前記拡張レイヤ処理するステップは、
異なる拡張レイヤの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの参照画像を拡張レイヤ−拡張レイヤ(EL−to−EL)処理するステップ、
前記のEL−to−EL処理された少なくとも1つの拡張レイヤの参照画像を該拡張レイヤの前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE39〜53に記載の符号化方法。
(EEE55) 前記BL−to−EL処理するステップは、前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に再スケーリングするステップを更に含む、EEE51〜54に記載の符号化方法。
(EEE56) 前記EL−to−EL処理するステップは、前記のEL−to−EL処理された少なくとも1つの拡張レイヤ参照画像を目標空間解像度に再スケーリングするステップを更に含む、EEE54又は55に記載の符号化方法。
(EEE57) 前記複数のデータカテゴリの画像又はビデオフレームの拡張レイヤフレーム準拠表現を供給するステップは、
前記複数のデータカテゴリの元のフル解像度画像と少なくとも1つの基本レイヤ−拡張レイヤ(BL−to−EL)予測との差分画像をフィルタリングし、サンプリングし、多重化するステップ、
を有する、EEE1に記載の符号化方法。
(EEE58) 前記少なくとも1つのBL−to−EL予測は、前記基本レイヤからの少なくとも1つのフレーム準拠復号化ピクチャを逆多重化し参照処理することにより得られる、EEE57に記載の符号化方法。
(EEE59) 前記逆多重化及び参照処理は、フィルタリング、補間又は再スケーリングを更に有する、EEE58に記載の符号化方法。
(EEE60) 前記動き又は視差補償は、前記複数のデータカテゴリの各々に対して実行される、EEE57に記載の符号化方法。
(EEE61) 前記複数のデータカテゴリのうちの1つの画像又はビデオの拡張レイヤ表現を供給するステップは、
前記複数のデータカテゴリのうちの1つの少なくとも1つの元のフル解像度画像と少なくとも1つの基本レイヤ−拡張レイヤ(BL−to−EL)予測との少なくとも1つの差分画像を得るステップ、
を有する、EEE39に記載の符号化方法。
(EEE62) 前記少なくとも1つのBL−to−EL予測は、前記基本レイヤからの少なくとも1つのフレーム準拠復号化ピクチャを逆多重化し参照処理することにより得られる、EEE61に記載の符号化方法。
(EEE63) 前記逆多重化及び参照処理は、フィルタリング、補間又は再スケーリングを更に有する、EEE62に記載の符号化方法。
(EEE64) マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、
i)複数のデータカテゴリの少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii) 前記基本レイヤ又は異なる拡張レイヤへの少なくとも1つの従属関係を参照処理するステップ、
iv)視差補償を実行するステップ、
を含むステップ、
を有し、
前記複数のデータカテゴリの全ては、同一の拡張レイヤで復号化され処理される、復号化方法。
(EEE65) 前記複数のデータカテゴリは、立体画像又はビデオの複数のビューを有する、EEE64に記載の復号化方法。
(EEE66) 前記基本レイヤ処理するステップは、複数の既存のビデオコーデックのうちの1つに従う、EEE64又は65に記載の符号化方法。
(EEE67) 前記複数の既存のビデオコーデックは、H.264/AVC、VP8及びVC-1を有する、EEE66に記載の符号化方法。
(EEE68) 前記拡張レイヤ処理するステップは、ハイブリッドビデオ符号化モデルを採用し、前記ハイブリッドビデオ符号化モデルは、複数の既存のコーデックのうちのいずれか1つに従う、EEE64〜67のいずれか一項に記載の復号化方法。
(EEE69) 前記複数の既存のコーデックは、VC-1及びH.264/AVCを有する、EEE68に記載の復号化方法。
(EEE70) 前記拡張レイヤ処理するステップは、同一の画像若しくはフレーム内のサンプルから、又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、前記少なくとも1つの予測画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、を含む、EEE64〜69のいずれか一項に記載の復号化方法。
(EEE71) 前記少なくとも1つの参照画像又はビデオフレームの生成は、前記複数の拡張レイヤビットストリーム信号から復号化された少なくとも1つの画像と前記少なくとも1つの予測残差画像との和を逆多重化し参照処理するステップを更に含む、EEE70に記載の復号化方法。
(EEE72) 前記逆多重化は、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和をアップサンプリングし補間するステップを更に含む、EEE71に記載の復号化方法。
(EEE73) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファのうちの1つは、他の前記少なくとも1つの拡張レイヤ参照ピクチャバッファと異なる解像度で画像又はビデオフレームを格納する、EEE65〜72のいずれか一項に記載の復号化方法。
(EEE74) 前記拡張レイヤ処理するステップは、
前記複数のデータカテゴリの各々に対し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファから少なくとも1つの参照画像を選択するステップ、
前記の選択された少なくとも1つの参照画像を拡張レイヤサンプリングし、少なくとも1つのフレーム準拠画像に拡張レイヤ多重化するステップ、
前記少なくとも1つのフレーム準拠画像に基づき、視差補償又はインター予測を実行するステップ、
を更に含む、EEE64〜73のいずれか一項に記載の復号化方法。
(EEE75) 前記拡張レイヤ処理は、
前記基本レイヤの参照バッファからの少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を基本レイヤ−拡張レイヤ(BL−to−EL)処理するステップ、
前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE73又は74に記載の復号化方法。
(EEE76) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を参照処理し、逆多重化し、アップサンプリングするステップを含む、EEE75に記載の復号化方法。
(EEE77) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像をフィルタリングし、アップスケーリングし、補間するステップを更に含む、EEE76に記載の復号化方法。
(EEE78) 前記拡張レイヤ処理するステップは、前記BL−to−EL処理に関する情報を対応するエンコーダから受信するステップを更に含む、EEE75〜77のいずれか一項に記載の復号化方法。
(EEE79) 前記基本レイヤ処理するステップ及び前記拡張レイヤ処理するステップは、異なる空間解像度で画像を処理する、EEE75〜78のいずれか一項に記載の復号化方法。
(EEE80) 前記BL−to−EL処理するステップは、
前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を逆多重化するステップ、
前記の逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を補間するステップ、
前記補完された逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に再スケーリングするステップ、
を有する、EEE79に記載の復号化方法。
(EEE81) 前記BL−to−EL処理するステップは、
前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を逆多重化するステップ、
前記の逆多重化された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を異なる空間解像度に再スケーリングするステップ、
前記の逆多重化された再スケーリングされた少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に補間するステップ、
を有する、EEE79に記載の復号化方法。
(EEE82) 逆多重化された再スケーリングされた少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度にフィルタリングするステップを更に含む、EEE81に記載の復号化方法。
(EEE83) 前記拡張レイヤ処理するステップは、メモリ管理制御動作(memory management control operation:MMCO)を通じて前記少なくとも1つの拡張レイヤ参照ピクチャバッファを制御するステップを更に含む、EEE64〜82のいずれか一項に記載の復号化方法。
(EEE84) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、1又は複数のMMCOセットに従い同期化される、EEE83に記載の復号化方法。
(EEE85) 前記拡張レイヤ処理するステップは、前記MMCOに関する情報を対応するエンコーダから受信するステップを更に含む、EEE83又は84に記載の復号化方法。
(EEE86) 前記拡張レイヤ処理するステップは、
前記複数のデータカテゴリの各々に対し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファから少なくとも1つの参照画像を選択するステップ、
前記少なくとも1つの参照画像に基づき視差補償又はインター予測を実行することにより、前記複数のデータカテゴリの各々に対し、少なくとも1つの補償画像を得るステップ、
前記少なくとも1つの補償画像を拡張レイヤサンプリングし、少なくとも1つのフレーム準拠画像に拡張レイヤ多重化するステップ、
を更に含む、EEE64〜67のいずれか一項に記載の復号化方法。
(EEE87) 前記拡張レイヤ処理するステップは、メモリ管理制御動作(memory management control operation:MMCO)を通じて前記少なくとも1つの拡張レイヤ参照ピクチャバッファを制御するステップを更に含む、EEE86に記載の復号化方法。
(EEE88) 前記拡張レイヤ処理するステップは、前記MMCOに関する情報を対応するエンコーダから受信するステップを更に含む、EEE87に記載の復号化方法。
(EEE89) マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて複数のデータカテゴリの1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、前記複数のデータカテゴリの各々は、別個の拡張レイヤで別個に処理され、前記1又は複数の拡張レイヤの各々は、
i) 前記複数のデータカテゴリのうちの1つの少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii) 前記基本レイヤ又は異なる拡張レイヤへの少なくとも1つの従属関係を参照処理するステップ、
iv)視差補償を実行するステップ、
を含むステップ、
を有し、
前記複数のデータカテゴリの全ては、同一の拡張レイヤで復号化され処理される、復号化方法。
(EEE90) 前記複数のデータカテゴリは、立体画像又はビデオの複数のビューを有する、EEE89に記載の復号化方法。
(EEE91) 前記基本レイヤ処理するステップは、複数の既存のビデオコーデックのうちの1つに従う、EEE89又は90に記載の復号化方法。
(EEE92) 前記複数の既存のビデオコーデックは、H.264/AVC、VP8及びVC-1を有する、EEE91に記載の復号化方法。
(EEE93) 前記符号化レイヤ処理するステップは、ハイブリッドビデオ符号化モデルを採用し、前記ハイブリッドビデオ符号化モデルは、複数の既存のコーデックのうちのいずれか1つに従う、EEE89〜92のいずれか一項に記載の復号化方法。
(EEE94) 前記複数の既存のコーデックは、VC-1及びH.264/AVCを有する、EEE93に記載の復号化方法。
(EEE95) 前記動き又は視差補償を実行するステップは、前記拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの画像に基づく、EEE89〜94のいずれか一項に記載の復号化方法。
(EEE96) 前記拡張レイヤ処理するステップは、
前記基本レイヤの参照バッファからの少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を基本レイヤ−拡張レイヤ(BL−to−EL)処理するステップ、
前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE89〜95のいずれか一項に記載の復号化方法。
(EEE97) 前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を参照処理し、逆多重化し、アップサンプリングするステップを含む、EEE96に記載の復号化方法。
(EEE98) 前記1又は複数の拡張レイヤの各々の前記BL−to−EL処理は、前記少なくとも1つの基本レイヤ復号化されたフレーム準拠画像の参照処理、逆多重化、アップサンプリングを一緒に実行し最適化する単一の処理ユニットにより処理される、EEE97に記載の復号化方法。
(EEE99) 前記拡張レイヤ処理するステップは、
異なる拡張レイヤの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの参照画像を拡張レイヤ−拡張レイヤ(EL−to−EL)処理するステップ、
前記のEL−to−EL処理された少なくとも1つの拡張レイヤの参照画像を該拡張レイヤの前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、EEE89〜98に記載の復号化方法。
(EEE100) 前記BL−to−EL処理するステップは、前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化されたフレーム準拠画像を目標空間解像度に再スケーリングするステップを更に含む、EEE89〜99に記載の復号化方法。
(EEE101) 前記EL−to−EL処理するステップは、前記のEL−to−EL処理された少なくとも1つの拡張レイヤ参照画像を目標空間解像度に再スケーリングするステップを更に含む、EEE99又は100に記載の復号化方法。
(EEE102) 前記複数のデータカテゴリの前記少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップは、
前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された参照画像を少なくとも1つの基本レイヤ−拡張レイヤ(BL−to−EL)予測に加算するステップ、
を有する、EEE89に記載の復号化方法。
(EEE103) 前記少なくとも1つのBL−to−EL予測は、前記基本レイヤの参照ピクチャバッファに格納された少なくとも1つのフレーム準拠復号化ピクチャを逆多重化し参照処理することにより得られる、EEE102に記載の復号化方法。
(EEE104) 前記視差補償は、前記複数のデータカテゴリの各々に対して実行される、EEE102に記載の復号化方法。
(EEE105) 前記複数のデータカテゴリのうちの1つの前記少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップは、
前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された参照画像を少なくとも1つの基本レイヤ−拡張レイヤ(BL−to−EL)予測に加算するステップ、
を有する、EEE89に記載の復号化方法。
(EEE106) 前記少なくとも1つのBL−to−EL予測は、前記基本レイヤの参照ピクチャバッファに格納された少なくとも1つのフレーム準拠復号化ピクチャを逆多重化し参照処理することにより得られる、EEE105に記載の復号化方法。
(EEE107) 前記逆多重化及び参照処理は、フィルタリング、補間又は再スケーリングを更に有する、EEE106に記載の復号化方法。
(EEE108)EEE1〜63、117の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを符号化するエンコーダ。
(EEE109)EEE1〜63、117の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを符号化する装置。
(EEE110)EEE1〜63、117の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを符号化するシステム。
(EEE111)EEE64〜107、118の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを復号化するデコーダ。
(EEE112)EEE64〜107、118の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを復号化する装置。
(EEE113)EEE64〜107、118の1又は複数項に記載された方法に従って、少なくとも1つの画像又はビデオフレームを復号化するシステム。
(EEE114)命令セットを有するコンピュータ可読媒体であって、前記命令セットは、コンピュータにEEE1〜107、117、118の1又は複数項に記載された方法を実行させる、コンピュータ可読媒体。
(EEE115)少なくとも1つの画像又はビデオフレームを符号化するための、EEE1〜63、117の1又は複数項に記載された方法の使用。
(EEE116)少なくとも1つの画像又はビデオフレームを復号化するための、EEE64〜107、118の1又は複数項に記載された方法の使用。
(EEE117) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、少なくとも2つの拡張レイヤ参照バッファを有する、EEE1〜38のいずれか一項に記載の符号化方法。
(EEE118) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファは、少なくとも2つの拡張レイヤ参照バッファを有する、EEE64〜68のいずれか一項に記載の復号化方法。
(EEE119) マルチレイヤフレーム準拠ビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のビューの画像又はビデオフレームを基本レイヤ処理するステップであって、
i) 前記複数のビューの画像又はビデオフレームの基本レイヤフレーム準拠表現を供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のビューの画像又はビデオフレームを拡張レイヤ処理するステップであって、
i) 前記複数のビューの画像又はビデオフレームの少なくとも1つの拡張レイヤフレーム準拠表現を供給するステップ、
ii)前記基本レイヤから少なくとも1つのフレーム準拠表現を参照処理し逆多重化するステップ、
iii)前記複数のビューの画像又はビデオフレームの前記少なくとも1つの拡張レイヤ表現を前記基本レイヤから参照処理され逆多重化された表現と比較することにより、少なくとも1つの拡張レイヤ残差を生成するステップ、
iv)前記生成された少なくとも1つの拡張レイヤ残差を処理するステップであって、第1の処理された拡張レイヤ残差を生成する、ステップ、
v)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
vi) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの拡張レイヤ参照残差を処理するステップであって、第2の処理された拡張レイヤ残差を生成する、ステップ、
vii)前記第2の処理された拡張レイヤ残差を用いて動き又は視差補償を実行するステップであって、動き又は視差補償された第2の処理された拡張レイヤ残差を生成する、ステップ、
viii)前記第1の処理された拡張レイヤ残差を前記動き又は視差補償された第2の処理された拡張レイヤ残差と比較することにより、更なる第2の処理された拡張レイヤ残差を生成するステップ、
を含むステップ、
を有する符号化方法。
(EEE120) マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、
i)複数のビューの少なくとも1つの第1の拡張レイヤ復号化残差を供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤからの少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを参照処理するステップであって、少なくとも1つの参照処理された基本レイヤ復号化画像又はビデオフレームを生成する、ステップ、
iv)前記少なくとも1つの拡張レイヤ参照ピクチャバッファからの少なくとも1つの第2の拡張レイヤ残差を用いて視差補償を実行するステップであって、動き又は視差補償された第2の拡張レイヤ残差を生成する、ステップ、
v)前記少なくとも1つの第1の拡張レイヤ復号化残差を前記動き又は視差補償された第2の拡張レイヤ残差に加算し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
vi)前記少なくとも1つの参照処理された基本レイヤ復号化画像又はビデオフレームを、前記少なくとも1つの拡張レイヤ参照ピクチャバッファからの前記少なくとも1つの第2の拡張レイヤ残差に加算するステップであって、少なくとも1つの拡張レイヤ出力画像を生成する、ステップ、
を含むステップ、
を有する復号化方法。
本願は、米国仮特許出願番号61/366,512、出願日2010年7月21日の優先権を主張する。該米国仮特許出願は参照されることにより本願明細書に組み込まれる。
Claims (28)
- マルチレイヤフレームに準拠したビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のビューの画像又はビデオフレームを基本レイヤ処理するステップであって、
i)前記複数のビューの基本レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のビューの画像又はビデオフレームを拡張レイヤ処理するステップであって、
i)前記複数のビューの拡張レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤ又は異なる拡張レイヤからの少なくとも1つの前記基本又は拡張レイヤフレーム準拠画像又はビデオフレームを参照処理するステップであって、前記基本レイヤ又は前記異なる拡張レイヤから参照処理された画像又はビデオフレームを生成する、ステップ、
iv)動き又は視差補償を実行するステップ、
を含むステップ、
を有し、前記1又は複数の拡張レイヤの各々は、前記複数のビューの全てを処理し、
前記拡張レイヤ処理するステップは、
同一の画像若しくはフレーム内のサンプルから又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測し、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和を逆多重化し参照処理することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、
前記少なくとも1つの参照画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を含む、
符号化方法。 - マルチレイヤフレーム準拠ビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のビューの画像又はビデオフレームを基本レイヤ処理するステップであって、
i)前記複数のビューの基本レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のビューの画像又はビデオフレームを拡張レイヤ処理するステップであって、前記複数のビューの各々は別個の拡張レイヤで別個に処理され、前記1又は複数の拡張レイヤの各々は、
i)前記複数のビューのうちの1つの拡張レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
ii)各拡張レイヤに拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤからの少なくとも1つの前記基本レイヤフレーム準拠画像又はビデオフレーム、又は異なる拡張レイヤからの少なくとも1つの拡張レイヤフレーム準拠画像又はビデオフレームを参照処理するステップ、
iv)動き又は視差補償を実行するステップ、
を含むステップ、
を有し、
前記拡張レイヤ処理するステップは、
同一の画像若しくはフレーム内のサンプルから又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測し、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和を逆多重化し参照処理することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、
前記少なくとも1つの参照画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を含む、符号化方法。 - マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像を供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、
i)複数のビューの少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤからの少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレーム又は異なる拡張レイヤからの少なくとも1つの復号化画像又はビデオフレームを参照処理するステップ、
iv)視差補償を実行するステップ、
を含むステップ、
を有し、
前記複数のビューの全ては、同一の拡張レイヤで復号化され処理され、
前記拡張レイヤ処理するステップは、
同一の画像若しくはフレーム内のサンプルから又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測し、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和を逆多重化し参照処理することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、
前記少なくとも1つの参照画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を含む、復号化方法。 - マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて複数のビューの1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、前記複数のビューの各々は、別個の拡張レイヤで別個に処理され、前記1又は複数の拡張レイヤの各々は、
i)前記複数のビューのうちの1つの少なくとも1つの拡張レイヤ復号化画像又はビデオフレームを供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤからの少なくとも1つのフレーム準拠復号化画像又はビデオフレーム又は異なる拡張レイヤからの少なくとも1つの復号化画像又はビデオフレームを参照処理するステップ、
iv)視差補償を実行するステップ、
を含むステップ、
を有し、
前記拡張レイヤ処理するステップは、
同一の画像若しくはフレーム内のサンプルから又は同一の拡張レイヤの過去の復号化フレームからのサンプルから、少なくとも1つの予測画像を予測し、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和を逆多重化し参照処理することにより、少なくとも1つの参照画像又はビデオフレームを生成するステップ、
前記少なくとも1つの参照画像又はビデオフレームを前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を含む、復号化方法。 - 前記複数のビューは、立体画像又はビデオの複数のビューを有する、請求項1又は2に記載の方法。
- 前記複数のビューの基本レイヤフレーム準拠画像又はビデオフレームを供給するステップは、
前記複数のビューの画像又はビデオフレームを基本レイヤサンプリングし単一フレームに基本レイヤ多重化するステップ、
を有する、請求項1又は2に記載の方法。 - 前記基本レイヤ処理のサンプリングは、前記複数のビューの画像又はビデオフレームの対称又は非対称フィルタリングを含む、請求項6に記載の方法。
- 前記基本レイヤサンプリングするステップは、水平サンプリング、垂直サンプリング又は5点形サンプリングを有する、請求項6に記載の方法。
- 前記基本レイヤ多重化するステップは、チェックボードインタリーブ配置、列インタリーブ配置、行インタリーブ配置、サイドバイサイドインタリーブ配置、及び上下インタリーブ配置のうちのいずれか1つのフレーム準拠パッキング配置を用いる、請求項6に記載の方法。
- 前記逆多重化は、少なくとも1つの予測残差画像と前記少なくとも1つの予測画像との和をアップサンプリングし補間するステップを更に含む、請求項1又は2に記載の方法。
- 前記少なくとも1つの拡張レイヤ参照ピクチャバッファのうちの1つは、他の前記少なくとも1つの拡張レイヤ参照ピクチャバッファと異なる解像度で画像又はビデオフレームを格納する、請求項10に記載の符号化方法。
- 前記拡張レイヤ処理するステップは、
前記複数のビューの各々に対し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファから少なくとも1つの参照画像を選択するステップ、
前記の選択された少なくとも1つの参照画像を拡張レイヤサンプリングし、少なくとも1つの拡張レイヤフレーム準拠画像に拡張レイヤ多重化するステップ、
前記少なくとも1つの拡張レイヤフレーム準拠画像に基づき、視差補償又はインター予測を実行するステップ、
を更に含む、請求項1又は2に記載の方法。 - 前記拡張レイヤ処理するステップは、
前記基本レイヤの参照バッファからの少なくとも1つの基本レイヤ復号化された基本レイヤフレーム準拠画像を基本レイヤ−拡張レイヤ(BL−to−EL)処理するステップ、
前記のBL−to−EL処理された少なくとも1つの基本レイヤ復号化された基本レイヤフレーム準拠画像を、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に含む、請求項1又は2に記載の方法。 - 前記BL−to−EL処理は、
前記少なくとも1つの基本レイヤ復号化された基本レイヤフレーム準拠画像を参照処理し、逆多重化し、アップサンプリングするステップ、又は
前記少なくとも1つの基本レイヤ復号化された基本レイヤフレーム準拠画像をフィルタリングし、アップスケーリングし、補間するステップ、
のうちの1又は複数を含む、請求項13に記載の方法。 - マルチレイヤフレーム準拠ビデオ配信のための符号化方法であって、
a)基本レイヤを通じて複数のビューの画像又はビデオフレームを基本レイヤ処理するステップであって、
i) 前記複数のビューの基本レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数のビューの画像又はビデオフレームを拡張レイヤ処理するステップであって、
i) 前記複数のビューの少なくとも1つの拡張レイヤフレーム準拠画像又はビデオフレームを供給するステップ、
ii)前記基本レイヤから少なくとも1つのフレーム準拠画像又はビデオフレームを参照処理し逆多重化するステップ、
iii)前記複数のビューの少なくとも1つの拡張レイヤフレーム準拠画像又はビデオフレームを前記基本レイヤから参照処理され逆多重化された画像又はビデオフレームと比較することにより、少なくとも1つの拡張レイヤ残差を生成するステップ、
iv)前記生成された少なくとも1つの拡張レイヤ残差を処理するステップであって、第1の処理された拡張レイヤ残差を生成する、ステップ、
v)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
vi) 前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの拡張レイヤ参照残差を処理するステップであって、第2の処理された拡張レイヤ残差を生成する、ステップ、
vii)前記第2の処理された拡張レイヤ残差を用いて動き又は視差補償を実行するステップであって、動き又は視差補償された第2の処理された拡張レイヤ残差を生成する、ステップ、
viii)前記第1の処理された拡張レイヤ残差を前記動き又は視差補償された第2の処理された拡張レイヤ残差と比較することにより、更なる第2の処理された拡張レイヤ残差を生成するステップ、
を含むステップ、
を有する符号化方法。 - マルチレイヤフレーム準拠ビデオ配信のための復号化方法であって、
a)基本レイヤを通じて複数の基本レイヤビットストリーム信号を基本レイヤ処理するステップであって、
i)少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを供給するステップ、
を含むステップ、
b)1又は複数の拡張レイヤを通じて前記複数の拡張ビットストリーム信号を拡張レイヤ処理するステップであって、
i)複数のビューの少なくとも1つの第1の拡張レイヤ復号化残差を供給するステップ、
ii)少なくとも1つの拡張レイヤ参照ピクチャバッファを保持するステップ、
iii)前記基本レイヤからの少なくとも1つのフレーム準拠基本レイヤ復号化画像又はビデオフレームを参照処理するステップであって、少なくとも1つの参照処理された基本レイヤ復号化画像又はビデオフレームを生成する、ステップ、
iv)前記少なくとも1つの拡張レイヤ参照ピクチャバッファからの少なくとも1つの第2の拡張レイヤ残差を用いて視差補償を実行するステップであって、動き又は視差補償された第2の拡張レイヤ残差を生成する、ステップ、
v)前記少なくとも1つの第1の拡張レイヤ復号化残差を前記動き又は視差補償された第2の拡張レイヤ残差に加算し、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
vi)前記少なくとも1つの参照処理された基本レイヤ復号化画像又はビデオフレームを、前記少なくとも1つの拡張レイヤ参照ピクチャバッファからの前記少なくとも1つの第2の拡張レイヤ残差に加算するステップであって、少なくとも1つの拡張レイヤ出力画像を生成する、ステップ、
を含むステップ、
を有する復号化方法。 - 前記拡張レイヤ処理するステップは、
v)同一の拡張レイヤからの少なくとも1つの画像又はビデオフレームを処理するステップであって、同一の拡張レイヤから処理された画像又はビデオフレームを生成する、ステップ、
vi)前記基本レイヤ又は前記異なる拡張レイヤからの前記参照処理された画像又はビデオフレームの各々から各々1つの画像又はビデオフレームと、前記同一の拡張レイヤからの処理された画像又はビデオフレームとのうちの少なくとも1つを、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に有し、
前記動き又は視差補償の実行は、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの画像又はビデオフレームの使用に基づく、請求項1又は2に記載の符号化方法。 - 前記拡張レイヤ処理するステップは、
v)同一の拡張レイヤからの少なくとも1つの復号化画像又はビデオフレームを処理するステップであって、同一の拡張レイヤから処理された復号化画像又はビデオフレームを生成する、ステップ、
vi)前記基本レイヤ又は前記異なる拡張レイヤからの前記参照処理された復号化画像又はビデオフレームの各々から各々1つの復号化画像又はビデオフレームと、前記同一の拡張レイヤからの前記処理された復号化画像又はビデオフレームとのうちの少なくとも1つを、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納するステップ、
を更に有し、
前記視差補償の実行は、前記少なくとも1つの拡張レイヤ参照ピクチャバッファに格納された少なくとも1つの復号化画像又はビデオフレームの使用に基づく、請求項3又は4に記載の復号化方法。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、請求項1、2、5乃至15、17のいずれか一項に記載の方法を前記プロセッサに実行させ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するビデオエンコーダ。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、請求項3、4、16、18のいずれか一項に記載の方法を前記プロセッサに実行させ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するビデオデコーダ。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、前記プロセッサに、
請求項1、2、5乃至15、17のいずれか一項に記載の方法を実行し、達成し又は制御し、又は
請求項19に記載のビデオエンコーダをプログラミングし、制御し又は設定するよう、
にさせ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するビデオ装置。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、前記プロセッサに、
請求項3、4、16、18のいずれか一項に記載の方法を実行し、達成し又は制御し、又は
請求項20に記載のビデオデコーダをプログラミングし、制御し又は設定するよう、
にさせ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するビデオ装置。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、前記プロセッサに、
請求項1、2、5乃至15、17のいずれか一項に記載の方法を実行し、達成し又は制御し、
請求項19に記載のビデオエンコーダをプログラミングし、制御し又は設定し、又は
請求項21に記載のビデオ装置をプログラミングし、制御し又は設定するよう、
にさせ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するコンピュータ。 - 少なくとも1つのプロセッサ、
命令を有するコンピュータ可読媒体であって、前記命令は、前記少なくとも1つのプロセッサにより実行されると、前記プロセッサに、
請求項3、4、16、18のいずれか一項に記載の方法を実行し、達成し又は制御し、
請求項20に記載のビデオデコーダをプログラミングし、制御し又は設定し、又は
請求項22に記載のビデオ装置をプログラミングし、制御し又は設定するよう、
にさせ、プログラミングし、設定し又は制御する、コンピュータ可読媒体、
を有するコンピュータ。 - 請求項1、2、5乃至15、17のいずれか一項に記載の方法を実行し、達成し、生じさせ、又は制御する手段、
請求項19に記載のビデオエンコーダをプログラミングし、制御し又は設定する手段、
請求項21に記載のビデオ装置をプログラミングし、制御し又は設定する手段、又は
請求項23に記載のコンピュータをプログラミングし、制御し又は設定する手段、
を有するシステム。 - 請求項3、4、16、18のいずれか一項に記載の方法を実行し、達成し、生じさせ、又は制御する手段、
請求項20に記載のビデオデコーダをプログラミングし、制御し又は設定する手段、
請求項22に記載のビデオ装置をプログラミングし、制御し又は設定する手段、又は
請求項24に記載のコンピュータをプログラミングし、制御し又は設定する手段、
を有するシステム。 - 命令を有するコンピュータ可読媒体であって、前記命令は、1又は複数のプロセッサにより実行されると、前記プロセッサに、
請求項1、2、5乃至15、17のいずれか一項に記載の方法を実行し、達成し又は制御し、
請求項19に記載のビデオエンコーダをプログラミングし、制御し又は設定し、
請求項21に記載のビデオ装置をプログラミングし、制御し又は設定し、
請求項23に記載のコンピュータをプログラミングし、制御し又は設定し、又は
請求項25に記載のシステムをプログラミングし、制御し又は設定する、
ようにさせる、コンピュータ可読媒体。 - 命令を有するコンピュータ可読媒体であって、前記命令は、1又は複数のプロセッサにより実行されると、前記プロセッサに、
請求項3、4、16、18のいずれか一項に記載の方法を実行し、達成し又は制御し、
請求項20に記載のビデオデコーダをプログラミングし、制御し又は設定し、
請求項22に記載のビデオ装置をプログラミングし、制御し又は設定し、
請求項24に記載のコンピュータをプログラミングし、制御し又は設定し、又は
請求項26に記載のシステムをプログラミングし、制御し又は設定する、
ようにさせる、コンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US36651210P | 2010-07-21 | 2010-07-21 | |
US61/366,512 | 2010-07-21 | ||
PCT/US2011/044757 WO2012012584A1 (en) | 2010-07-21 | 2011-07-20 | Systems and methods for multi-layered frame-compatible video delivery |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014115437A Division JP5875634B2 (ja) | 2010-07-21 | 2014-06-04 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2015098198A Division JP6113782B2 (ja) | 2010-07-21 | 2015-05-13 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013538487A JP2013538487A (ja) | 2013-10-10 |
JP5749340B2 true JP5749340B2 (ja) | 2015-07-15 |
Family
ID=44629252
Family Applications (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013520851A Active JP5749340B2 (ja) | 2010-07-21 | 2011-07-20 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2014115437A Expired - Fee Related JP5875634B2 (ja) | 2010-07-21 | 2014-06-04 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2015098198A Active JP6113782B2 (ja) | 2010-07-21 | 2015-05-13 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2015220361A Active JP6175473B2 (ja) | 2010-07-21 | 2015-11-10 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2016081932A Active JP6175535B2 (ja) | 2010-07-21 | 2016-04-15 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2016081931A Active JP6175534B2 (ja) | 2010-07-21 | 2016-04-15 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
Family Applications After (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014115437A Expired - Fee Related JP5875634B2 (ja) | 2010-07-21 | 2014-06-04 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2015098198A Active JP6113782B2 (ja) | 2010-07-21 | 2015-05-13 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2015220361A Active JP6175473B2 (ja) | 2010-07-21 | 2015-11-10 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2016081932A Active JP6175535B2 (ja) | 2010-07-21 | 2016-04-15 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
JP2016081931A Active JP6175534B2 (ja) | 2010-07-21 | 2016-04-15 | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 |
Country Status (9)
Country | Link |
---|---|
US (4) | US8619852B2 (ja) |
EP (2) | EP2596637B1 (ja) |
JP (6) | JP5749340B2 (ja) |
CN (5) | CN103026706B (ja) |
ES (1) | ES2885250T3 (ja) |
HK (2) | HK1226569B (ja) |
HU (1) | HUE055506T2 (ja) |
PL (1) | PL2596637T3 (ja) |
WO (1) | WO2012012584A1 (ja) |
Families Citing this family (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4962525B2 (ja) * | 2009-04-08 | 2012-06-27 | ソニー株式会社 | 再生装置、再生方法、およびプログラム |
WO2013090923A1 (en) | 2011-12-17 | 2013-06-20 | Dolby Laboratories Licensing Corporation | Multi-layer interlace frame-compatible enhanced resolution video delivery |
CN103026706B (zh) * | 2010-07-21 | 2016-04-20 | 杜比实验室特许公司 | 用于多层帧兼容视频传输的系统及方法 |
BR112013004452A2 (pt) * | 2010-09-03 | 2016-06-07 | Sony Corp | dispositivos e métodos de codificação e de decodificação |
JPWO2012029883A1 (ja) * | 2010-09-03 | 2013-10-31 | ソニー株式会社 | 符号化装置および符号化方法、並びに復号装置および復号方法 |
CN103141099B (zh) | 2010-10-01 | 2016-10-26 | 杜比实验室特许公司 | 用于参考图片处理的优化的滤波器的选择 |
WO2013009716A2 (en) | 2011-07-08 | 2013-01-17 | Dolby Laboratories Licensing Corporation | Hybrid encoding and decoding methods for single and multiple layered video coding systems |
EP2752000B1 (en) | 2011-08-31 | 2021-03-17 | Dolby Laboratories Licensing Corporation | Multiview and bitdepth scalable video delivery |
WO2013040170A1 (en) | 2011-09-16 | 2013-03-21 | Dolby Laboratories Licensing Corporation | Frame-compatible full resolution stereoscopic 3d compression and decompression |
US8923403B2 (en) | 2011-09-29 | 2014-12-30 | Dolby Laboratories Licensing Corporation | Dual-layer frame-compatible full-resolution stereoscopic 3D video delivery |
TWI595770B (zh) | 2011-09-29 | 2017-08-11 | 杜比實驗室特許公司 | 具有對稱圖像解析度與品質之圖框相容全解析度立體三維視訊傳達技術 |
TWI741503B (zh) * | 2012-01-19 | 2021-10-01 | 美商Vid衡器股份有限公司 | 影像編碼參考圖像清單發信及建構方法及裝置 |
JP5905610B2 (ja) | 2012-03-12 | 2016-04-20 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 3d視覚的ダイナミックレンジ符号化 |
US9357197B2 (en) * | 2012-05-24 | 2016-05-31 | Dolby Laboratories Licensing Corporation | Multi-layer backwards-compatible video delivery for enhanced dynamic range and enhanced resolution formats |
TWI630815B (zh) * | 2012-06-14 | 2018-07-21 | 杜比實驗室特許公司 | 用於立體及自動立體顯示器之深度圖傳遞格式 |
EP2859724B1 (en) | 2012-06-22 | 2019-09-04 | MediaTek Inc. | Method and apparatus of adaptive intra prediction for inter-layer coding |
CN102883120B (zh) * | 2012-07-24 | 2016-07-20 | 冠捷显示科技(厦门)有限公司 | 一种双画面图像显示装置及控制方法 |
US20140092972A1 (en) * | 2012-09-29 | 2014-04-03 | Kiran Mukesh Misra | Picture processing in scalable video systems |
JP2014082541A (ja) * | 2012-10-12 | 2014-05-08 | National Institute Of Information & Communication Technology | 互いに類似した情報を含む複数画像のデータサイズを低減する方法、プログラムおよび装置 |
KR102163477B1 (ko) * | 2012-12-04 | 2020-10-07 | 인텔렉추얼디스커버리 주식회사 | 비디오 부호화 및 복호화 방법, 그를 이용한 장치 |
US9942545B2 (en) * | 2013-01-03 | 2018-04-10 | Texas Instruments Incorporated | Methods and apparatus for indicating picture buffer size for coded scalable video |
WO2014168893A1 (en) | 2013-04-08 | 2014-10-16 | General Instrument Corporation | Signaling for addition or removal of layers in video coding |
MY189280A (en) * | 2013-04-15 | 2022-01-31 | V Nova Int Ltd | Hybrid backward-compatible signal encoding and decoding |
US9432667B2 (en) * | 2013-06-11 | 2016-08-30 | Qualcomm Incorporated | Processing bitstream constraints relating to inter-layer prediction types in multi-layer video coding |
US9648326B2 (en) * | 2013-07-02 | 2017-05-09 | Qualcomm Incorporated | Optimizations on inter-layer prediction signalling for multi-layer video coding |
US9813736B2 (en) * | 2013-09-27 | 2017-11-07 | Qualcomm Incorporated | Inter-view dependency type in MV-HEVC |
US10068311B2 (en) | 2014-04-05 | 2018-09-04 | Sony Interacive Entertainment LLC | Varying effective resolution by screen location by changing active color sample count within multiple render targets |
US11302054B2 (en) | 2014-04-05 | 2022-04-12 | Sony Interactive Entertainment Europe Limited | Varying effective resolution by screen location by changing active color sample count within multiple render targets |
US9710957B2 (en) | 2014-04-05 | 2017-07-18 | Sony Interactive Entertainment America Llc | Graphics processing enhancement by tracking object and/or primitive identifiers |
US9865074B2 (en) | 2014-04-05 | 2018-01-09 | Sony Interactive Entertainment America Llc | Method for efficient construction of high resolution display buffers |
US9652882B2 (en) | 2014-04-05 | 2017-05-16 | Sony Interactive Entertainment America Llc | Gradient adjustment for texture mapping for multiple render targets with resolution that varies by screen location |
US9710881B2 (en) | 2014-04-05 | 2017-07-18 | Sony Interactive Entertainment America Llc | Varying effective resolution by screen location by altering rasterization parameters |
US10783696B2 (en) | 2014-04-05 | 2020-09-22 | Sony Interactive Entertainment LLC | Gradient adjustment for texture mapping to non-orthonormal grid |
WO2015154004A1 (en) | 2014-04-05 | 2015-10-08 | Sony Computer Entertainment America Llc | Method for efficient re-rendering objects to vary viewports and under varying rendering and rasterization parameters |
US9495790B2 (en) | 2014-04-05 | 2016-11-15 | Sony Interactive Entertainment America Llc | Gradient adjustment for texture mapping to non-orthonormal grid |
US9836816B2 (en) | 2014-04-05 | 2017-12-05 | Sony Interactive Entertainment America Llc | Varying effective resolution by screen location in graphics processing by approximating projection of vertices onto curved viewport |
MX2018008368A (es) | 2014-05-09 | 2022-01-27 | Electronics & Telecommunications Res Inst | Aparato de multiplexion de señal usando multiplexion por division en capas y metodo de multiplexion de señal. |
WO2015170819A1 (ko) * | 2014-05-09 | 2015-11-12 | 한국전자통신연구원 | 레이어드 디비전 멀티플렉싱을 이용한 신호 멀티플렉싱 장치 및 신호 멀티플렉싱 방법 |
MX360655B (es) | 2014-05-21 | 2018-11-12 | Arris Entpr Llc | Gestión individual de memorias intermedias en transporte de video escalable. |
US10205949B2 (en) | 2014-05-21 | 2019-02-12 | Arris Enterprises Llc | Signaling for addition or removal of layers in scalable video |
US20170230612A1 (en) * | 2016-02-04 | 2017-08-10 | Shane Ray Thielen | Adaptive resolution encoding for streaming data |
FI20165547A (fi) * | 2016-06-30 | 2017-12-31 | Nokia Technologies Oy | Laitteisto, menetelmä ja tietokoneohjelma videokoodausta ja videokoodauksen purkua varten |
WO2018041244A1 (en) * | 2016-09-02 | 2018-03-08 | Mediatek Inc. | Incremental quality delivery and compositing processing |
CN106803958B (zh) * | 2017-01-12 | 2019-12-27 | 同济大学 | 一种基于叠加调制编码的数模混合视频传输方法 |
US10999583B2 (en) * | 2018-09-14 | 2021-05-04 | Apple Inc. | Scalability of multi-directional video streaming |
WO2020156547A1 (en) | 2019-02-02 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Buffer resetting for intra block copy in video coding |
EP3915265A4 (en) | 2019-03-01 | 2022-06-22 | Beijing Bytedance Network Technology Co., Ltd. | DIRECTION-BASED PREDICTION FOR INTRA BLOCK COPY IN VIDEO CODING |
KR20210125506A (ko) | 2019-03-04 | 2021-10-18 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 비디오 코딩에서 인트라 블록 복사를 위한 버퍼 관리 |
WO2020181073A1 (en) | 2019-03-07 | 2020-09-10 | Alibaba Group Holding Limited | Method, apparatus, terminal, capturing system and device for setting capturing devices |
MX2022000110A (es) | 2019-07-10 | 2022-02-10 | Beijing Bytedance Network Tech Co Ltd | Identificacion de muestras para la copia intra-bloque en codificacion de video. |
US11928452B2 (en) * | 2022-02-03 | 2024-03-12 | Red Hat, Inc. | Reducing the size of image files usable for deploying software in computing environments |
Family Cites Families (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0330279B1 (fr) | 1988-02-23 | 1993-11-24 | Laboratoires D'electronique Philips | Dispositif de sous-échantillonnage spatio-temporel de signaux vidéo numériques représentatifs d'une suite d'images entrelacées ou séquentielles, système de transmission d'images de télévision à haute définition incluant un tel dispositif, et étages d'émission et de réception pour un tel système |
JPH042276A (ja) | 1990-04-19 | 1992-01-07 | Fuji Photo Film Co Ltd | 画像信号圧縮符号化装置 |
JP3517455B2 (ja) | 1994-09-30 | 2004-04-12 | キヤノン株式会社 | 画像符号化方法及び装置 |
US5612735A (en) * | 1995-05-26 | 1997-03-18 | Luncent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing two disparity estimates |
US6111596A (en) * | 1995-12-29 | 2000-08-29 | Lucent Technologies Inc. | Gain and offset correction for efficient stereoscopic coding and improved display |
US6055012A (en) * | 1995-12-29 | 2000-04-25 | Lucent Technologies Inc. | Digital multi-view video compression with complexity and compatibility constraints |
CN100366089C (zh) | 1998-03-05 | 2008-01-30 | 松下电器产业株式会社 | 图像编码方法、图像编码译码方法、图像编码装置或图像记录再生装置 |
US6925120B2 (en) * | 2001-09-24 | 2005-08-02 | Mitsubishi Electric Research Labs, Inc. | Transcoder for scalable multi-layer constant quality video bitstreams |
KR100481732B1 (ko) * | 2002-04-20 | 2005-04-11 | 전자부품연구원 | 다 시점 동영상 부호화 장치 |
JP4104895B2 (ja) * | 2002-04-25 | 2008-06-18 | シャープ株式会社 | 立体画像符号化装置および立体画像復号装置 |
US20060023782A1 (en) * | 2004-07-27 | 2006-02-02 | Microsoft Corporation | System and method for off-line multi-view video compression |
US7671894B2 (en) * | 2004-12-17 | 2010-03-02 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for processing multiview videos for view synthesis using skip and direct modes |
WO2007047736A2 (en) | 2005-10-19 | 2007-04-26 | Thomson Licensing | Multi-view video coding using scalable video coding |
KR100667830B1 (ko) * | 2005-11-05 | 2007-01-11 | 삼성전자주식회사 | 다시점 동영상을 부호화하는 방법 및 장치 |
US7956930B2 (en) | 2006-01-06 | 2011-06-07 | Microsoft Corporation | Resampling and picture resizing operations for multi-resolution video coding and decoding |
CN101491099B (zh) | 2006-07-11 | 2011-09-21 | 汤姆森特许公司 | 使用虚拟参考画面的方法及装置 |
KR101353204B1 (ko) * | 2006-07-20 | 2014-01-21 | 톰슨 라이센싱 | 멀티-뷰 비디오 코딩에서의 뷰 스케일러빌리티를 신호로 알리기 위한 방법 및 장치 |
JP5170786B2 (ja) * | 2006-10-25 | 2013-03-27 | 韓國電子通信研究院 | マルチビュービデオのスケーラブルコーディングおよびデコーディング方法、ならびにコーディングおよびデコーディング装置 |
FI3920538T3 (fi) | 2007-04-12 | 2023-04-05 | Dolby Int Ab | Limittäminen videon enkoodauksessa ja dekoodauksessa |
US7923801B2 (en) * | 2007-04-18 | 2011-04-12 | Invisage Technologies, Inc. | Materials, systems and methods for optoelectronic devices |
US8487982B2 (en) | 2007-06-07 | 2013-07-16 | Reald Inc. | Stereoplexing for film and video applications |
KR100962696B1 (ko) * | 2007-06-07 | 2010-06-11 | 주식회사 이시티 | 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법 |
US8373744B2 (en) | 2007-06-07 | 2013-02-12 | Reald Inc. | Stereoplexing for video and film applications |
KR101094441B1 (ko) * | 2007-06-20 | 2011-12-20 | 한국전자통신연구원 | 디지털 방송 신호의 전송 방법, 전송 장치, 수신 방법 및수신 장치 |
KR20090004659A (ko) * | 2007-07-02 | 2009-01-12 | 엘지전자 주식회사 | 디지털 방송 시스템 및 데이터 처리 방법 |
RU2463728C2 (ru) * | 2007-10-15 | 2012-10-10 | Квэлкомм Инкорпорейтед | Усовершенствованное кодирование улучшающего слоя для масштабируемого кодирования видео |
JP5231563B2 (ja) * | 2007-10-19 | 2013-07-10 | サムスン エレクトロニクス カンパニー リミテッド | 立体映像データを記録する方法 |
CN101420609B (zh) * | 2007-10-24 | 2010-08-25 | 华为终端有限公司 | 视频编码、解码方法及视频编码器、解码器 |
KR101506217B1 (ko) * | 2008-01-31 | 2015-03-26 | 삼성전자주식회사 | 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치 |
KR101727311B1 (ko) * | 2008-04-25 | 2017-04-14 | 톰슨 라이센싱 | 깊이 정보에 기초한 디스패리티 예측을 구비한 다중 시점 비디오 코딩 |
EP2308232B1 (en) | 2008-07-20 | 2017-03-29 | Dolby Laboratories Licensing Corp. | Encoder optimization of stereoscopic video delivery systems |
CN102160387B (zh) * | 2008-09-23 | 2016-03-02 | 杜比实验室特许公司 | 棋盘式多路复用图像数据的编码和解码架构 |
JP5159959B2 (ja) * | 2008-12-25 | 2013-03-13 | ドルビー ラボラトリーズ ライセンシング コーポレイション | アップサンプリングのためにビュー間の視差に基づく適応補間を用いるデインターリーブされたビューの再構成 |
CN104702960B (zh) * | 2009-01-26 | 2018-01-02 | 汤姆森特许公司 | 用于视频解码的装置 |
US20100260268A1 (en) * | 2009-04-13 | 2010-10-14 | Reald Inc. | Encoding, decoding, and distributing enhanced resolution stereoscopic video |
CN102450010A (zh) | 2009-04-20 | 2012-05-09 | 杜比实验室特许公司 | 定向内插和数据后处理 |
CN102598660B (zh) * | 2009-04-20 | 2015-04-29 | 杜比实验室特许公司 | 用于多层视频传输的自适应内插滤波器 |
WO2010126227A2 (en) * | 2009-04-27 | 2010-11-04 | Lg Electronics Inc. | Broadcast receiver and 3d video data processing method thereof |
WO2011005624A1 (en) | 2009-07-04 | 2011-01-13 | Dolby Laboratories Licensing Corporation | Encoding and decoding architectures for format compatible 3d video delivery |
US9467689B2 (en) * | 2010-07-08 | 2016-10-11 | Dolby Laboratories Licensing Corporation | Systems and methods for multi-layered image and video delivery using reference processing signals |
CN103262532B (zh) * | 2010-07-19 | 2018-03-09 | 杜比实验室特许公司 | 用于经采样复用的图像和视频数据的增强方法 |
CN103026706B (zh) * | 2010-07-21 | 2016-04-20 | 杜比实验室特许公司 | 用于多层帧兼容视频传输的系统及方法 |
US9674519B2 (en) * | 2012-11-09 | 2017-06-06 | Qualcomm Incorporated | MPEG frame compatible video coding |
-
2011
- 2011-07-20 CN CN201180035724.4A patent/CN103026706B/zh active Active
- 2011-07-20 HU HUE11738373A patent/HUE055506T2/hu unknown
- 2011-07-20 ES ES11738373T patent/ES2885250T3/es active Active
- 2011-07-20 CN CN201610224073.8A patent/CN105847780B/zh active Active
- 2011-07-20 EP EP11738373.7A patent/EP2596637B1/en active Active
- 2011-07-20 CN CN201610224266.3A patent/CN105847781B/zh active Active
- 2011-07-20 PL PL11738373T patent/PL2596637T3/pl unknown
- 2011-07-20 CN CN201610224724.3A patent/CN105812828B/zh active Active
- 2011-07-20 JP JP2013520851A patent/JP5749340B2/ja active Active
- 2011-07-20 CN CN201610224697.XA patent/CN105812827B/zh active Active
- 2011-07-20 WO PCT/US2011/044757 patent/WO2012012584A1/en active Application Filing
- 2011-07-20 US US13/811,363 patent/US8619852B2/en active Active
- 2011-07-20 EP EP21184193.7A patent/EP3923571B1/en active Active
-
2013
- 2013-12-30 US US14/144,001 patent/US9479772B2/en active Active
-
2014
- 2014-06-04 JP JP2014115437A patent/JP5875634B2/ja not_active Expired - Fee Related
-
2015
- 2015-05-13 JP JP2015098198A patent/JP6113782B2/ja active Active
- 2015-11-10 JP JP2015220361A patent/JP6175473B2/ja active Active
-
2016
- 2016-04-15 JP JP2016081932A patent/JP6175535B2/ja active Active
- 2016-04-15 JP JP2016081931A patent/JP6175534B2/ja active Active
- 2016-09-07 US US15/258,856 patent/US10142611B2/en active Active
- 2016-12-23 HK HK16114647A patent/HK1226569B/zh unknown
- 2016-12-23 HK HK16114646A patent/HK1226568A1/zh unknown
-
2018
- 2018-10-24 US US16/169,981 patent/US11044454B2/en active Active
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6175534B2 (ja) | マルチレイヤフレーム準拠ビデオ配信のためのシステム及び方法 | |
CN107241606B (zh) | 解码系统、方法和设备以及计算机可读介质 | |
EP2752000B1 (en) | Multiview and bitdepth scalable video delivery | |
WO2017129568A1 (en) | Spatial scalable video coding | |
US20120268558A1 (en) | Method and apparatus for video encoding using inter layer prediction with pre-filtering, and method and apparatus for video decoding using inter layer prediction with post-filtering | |
TWI540878B (zh) | 編碼器、解碼器、位元串流、以及編碼與解碼對應於多重視圖信號之兩個視圖之影像對之方法及相關聯電腦程式產品 | |
KR101144752B1 (ko) | 비디오 인코딩/디코딩 방법 및 그 장치 | |
KR20080027190A (ko) | 다 해상도 스테레오 및 다중 뷰 비디오 압축 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140204 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20140430 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20140509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140604 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140729 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20141028 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20141105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141224 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150320 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150414 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150513 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5749340 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |