JP2023164991A - エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 - Google Patents
エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 Download PDFInfo
- Publication number
- JP2023164991A JP2023164991A JP2023146612A JP2023146612A JP2023164991A JP 2023164991 A JP2023164991 A JP 2023164991A JP 2023146612 A JP2023146612 A JP 2023146612A JP 2023146612 A JP2023146612 A JP 2023146612A JP 2023164991 A JP2023164991 A JP 2023164991A
- Authority
- JP
- Japan
- Prior art keywords
- base layer
- prediction
- signal
- block
- subblock
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 claims abstract description 222
- 239000010410 layer Substances 0.000 claims description 1732
- 239000011229 interlayer Substances 0.000 claims description 83
- 238000000354 decomposition reaction Methods 0.000 claims description 32
- 230000003595 spectral effect Effects 0.000 claims description 30
- 238000009826 distribution Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 11
- 238000000638 solvent extraction Methods 0.000 claims description 9
- 230000033001 locomotion Effects 0.000 description 215
- 239000013598 vector Substances 0.000 description 151
- 230000002123 temporal effect Effects 0.000 description 74
- 230000004927 fusion Effects 0.000 description 58
- 238000010586 diagram Methods 0.000 description 51
- 230000008569 process Effects 0.000 description 47
- 238000001914 filtration Methods 0.000 description 42
- 230000006870 function Effects 0.000 description 31
- 238000009795 derivation Methods 0.000 description 30
- 230000003044 adaptive effect Effects 0.000 description 29
- 230000011664 signaling Effects 0.000 description 27
- 238000000605 extraction Methods 0.000 description 25
- 238000005192 partition Methods 0.000 description 24
- 230000009466 transformation Effects 0.000 description 24
- 230000015572 biosynthetic process Effects 0.000 description 22
- 230000006872 improvement Effects 0.000 description 22
- 238000012546 transfer Methods 0.000 description 18
- 230000034994 death Effects 0.000 description 15
- 238000004422 calculation algorithm Methods 0.000 description 11
- 238000013139 quantization Methods 0.000 description 10
- 230000001419 dependent effect Effects 0.000 description 9
- 238000012935 Averaging Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000010276 construction Methods 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 6
- 238000003491 array Methods 0.000 description 5
- 230000003247 decreasing effect Effects 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 238000003860 storage Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 3
- 241000023320 Luma <angiosperm> Species 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 239000000654 additive Substances 0.000 description 2
- 230000000996 additive effect Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000003708 edge detection Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000010187 selection method Methods 0.000 description 2
- 238000000844 transformation Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 235000012571 Ficus glomerata Nutrition 0.000 description 1
- 240000000365 Ficus racemosa Species 0.000 description 1
- 235000015125 Sterculia urens Nutrition 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000155 melt Substances 0.000 description 1
- 238000010899 nucleation Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000011524 similarity measure Methods 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000013518 transcription Methods 0.000 description 1
- 230000035897 transcription Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
- H04N19/198—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
- H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
- H04N19/865—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness with detection of the former encoding block subdivision in decompressed video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Description
本発明は、スケーラブルビデオ符号化に関する。
非スケーラブル(non-scalable)符号化において、内部符号化は、既に符
号化された画像の引用データでなく、現在の画像の既に符号化された部分のデータ(例え
ば、再構築サンプル、符号化モード、またはシンボル統計)だけを利用する符号化技術を
引用する。例えば、内部符号化された画像(内部画像)は、いわゆるランダムアクセスポ
イントで、デコーダをビットストリームに同調させるために、放送ビットストリームの中
で使用される。また、内部画像は、エラー傾向がある環境の中で、エラー伝播を制限する
ために使用される。一般に、引用画像として使用される画像は、ここでは入手できないの
で、符号化映像系列の最初の画像は、内部画像として符号化されなければならない。また
、内部画像は、時間予測が適した予測信号を通常提供できない場面カットで使用される。
号化された画像の引用データでなく、現在の画像の既に符号化された部分のデータ(例え
ば、再構築サンプル、符号化モード、またはシンボル統計)だけを利用する符号化技術を
引用する。例えば、内部符号化された画像(内部画像)は、いわゆるランダムアクセスポ
イントで、デコーダをビットストリームに同調させるために、放送ビットストリームの中
で使用される。また、内部画像は、エラー傾向がある環境の中で、エラー伝播を制限する
ために使用される。一般に、引用画像として使用される画像は、ここでは入手できないの
で、符号化映像系列の最初の画像は、内部画像として符号化されなければならない。また
、内部画像は、時間予測が適した予測信号を通常提供できない場面カットで使用される。
さらに、内部符号化モードは、いわゆる中間画像の中で特定の領域/ブロックのために
使用される。そこでは、それらは、比率歪み効率に対して中間符号化モードより良く実行
する。これは、時間予測が相当不十分に行われる領域(閉塞、一部溶解または衰退物)と
同様に、平坦な領域の中でよくある場合である。
使用される。そこでは、それらは、比率歪み効率に対して中間符号化モードより良く実行
する。これは、時間予測が相当不十分に行われる領域(閉塞、一部溶解または衰退物)と
同様に、平坦な領域の中でよくある場合である。
スケーラブル(scalable)符号化において、内部符号化の概念(内部画像の符
号化と中間画像の中の内部ブロックの符号化)は、同じアクセスユニットまたは時間瞬間
に属する全ての画像に拡張される。従って、空間または品質エンハンスメント(enha
ncement)層のための内部符号化モードは、符号化効率を増加させると同時に瞬時
に、下層画像から中間層予測の使用をすることができる。それは、現在のエンハンスメン
ト層の画像の中で既に符号化された部分が内部予測のために使用できるだけではなく、同
時に瞬時に既に符号化された下層画像も利用できることを意味する。また、後者の概念は
、中間層内部予測とも称される。
号化と中間画像の中の内部ブロックの符号化)は、同じアクセスユニットまたは時間瞬間
に属する全ての画像に拡張される。従って、空間または品質エンハンスメント(enha
ncement)層のための内部符号化モードは、符号化効率を増加させると同時に瞬時
に、下層画像から中間層予測の使用をすることができる。それは、現在のエンハンスメン
ト層の画像の中で既に符号化された部分が内部予測のために使用できるだけではなく、同
時に瞬時に既に符号化された下層画像も利用できることを意味する。また、後者の概念は
、中間層内部予測とも称される。
最先端のハイブリッドビデオ符号化規格(H.264/AVCまたはHEVCなど)に
おいて、ビデオ系列の画像はサンプルのブロックに区分される。ブロックのサイズは、固
定されるか、または、符号化手法はブロックをさらに小さいブロックのサイズに副区分さ
れることを許す階層構造を提供される。通常、ブロックの再構成は、ブロックの予測信号
を発生させて、送信された残留信号を付加することによって得られる。通常、残留信号は
、変換符号化を使用して、送信される。それは、変換係数のための量子化インデックスリ
スト(変換係数レベルとも称される)が、エントロピー符号化技術を使用して、送信され
ることを意味する。そして、デコーダ側では、予測信号に追加される残留信号を得るため
に、これら送信された変換係数レベルが、スケーリングされ、逆変換される。残留信号は
、(現在の時間の瞬間のための既に送信されたデータのみを使用する)内部予測によって
、または、(異なる時間の瞬間のために既に送信されたデータを使用する)中間予測によ
って発生する。
おいて、ビデオ系列の画像はサンプルのブロックに区分される。ブロックのサイズは、固
定されるか、または、符号化手法はブロックをさらに小さいブロックのサイズに副区分さ
れることを許す階層構造を提供される。通常、ブロックの再構成は、ブロックの予測信号
を発生させて、送信された残留信号を付加することによって得られる。通常、残留信号は
、変換符号化を使用して、送信される。それは、変換係数のための量子化インデックスリ
スト(変換係数レベルとも称される)が、エントロピー符号化技術を使用して、送信され
ることを意味する。そして、デコーダ側では、予測信号に追加される残留信号を得るため
に、これら送信された変換係数レベルが、スケーリングされ、逆変換される。残留信号は
、(現在の時間の瞬間のための既に送信されたデータのみを使用する)内部予測によって
、または、(異なる時間の瞬間のために既に送信されたデータを使用する)中間予測によ
って発生する。
仮に中間予測が使用されるならば、予測ブロックは、既に再構成されたフレームのサン
プルを使用して、作動補償予測によって得られる。これは、(1つの引用画像と1組の作
動パラメータを使用して、)単方向の予測によって行うことができる。あるいは、予測信
号は、マルチ仮説予測によって発生することができる。後者の場合、2つ以上の予測信号
が重畳される。すなわち、各サンプルに対して、重み付け平均が、最終予測信号を形成す
るために構成される。(重畳された)多重予測信号は、異なる仮説(例えば、異なる引用
画像または作動ベクトル)毎に異なる作動パラメータを使用して発生される。また、単方
向の予測に対して、作動補償予測信号のサンプルに定数因子を掛けて、最終予測信号を形
成するために一定のオフセットを加えることも可能である。また、このようなスケーリン
グとオフセット補正が、マルチ仮説予測において、全ての仮説に、または、選択された仮
説にも使用される。
プルを使用して、作動補償予測によって得られる。これは、(1つの引用画像と1組の作
動パラメータを使用して、)単方向の予測によって行うことができる。あるいは、予測信
号は、マルチ仮説予測によって発生することができる。後者の場合、2つ以上の予測信号
が重畳される。すなわち、各サンプルに対して、重み付け平均が、最終予測信号を形成す
るために構成される。(重畳された)多重予測信号は、異なる仮説(例えば、異なる引用
画像または作動ベクトル)毎に異なる作動パラメータを使用して発生される。また、単方
向の予測に対して、作動補償予測信号のサンプルに定数因子を掛けて、最終予測信号を形
成するために一定のオフセットを加えることも可能である。また、このようなスケーリン
グとオフセット補正が、マルチ仮説予測において、全ての仮説に、または、選択された仮
説にも使用される。
現在の技術レベルのビデオ符号化技術において、ブロックのための内部予測信号が、現
在のブロックの空間隣接(それは、順に処理しているブロックに従って現在のブロックの
前で再構成されたブロック)からサンプルを予測することによって得られる。最新の規格
において、空間領域で予測を実行する様々な予測手法が、利用される。隣接ブロックのサ
ンプルをフィルタにかけた、または、フィルタにかけなかった、精密な粒状の方向性予測
モードが、予測信号を発生させるために、特定の角度に拡張される。更に、平坦な予測平
面またはDC予測ブロックを発生させるために、隣接するブロックのサンプルを使用する
平面に基づいたおよびDCに基づいた予測モードもある。
在のブロックの空間隣接(それは、順に処理しているブロックに従って現在のブロックの
前で再構成されたブロック)からサンプルを予測することによって得られる。最新の規格
において、空間領域で予測を実行する様々な予測手法が、利用される。隣接ブロックのサ
ンプルをフィルタにかけた、または、フィルタにかけなかった、精密な粒状の方向性予測
モードが、予測信号を発生させるために、特定の角度に拡張される。更に、平坦な予測平
面またはDC予測ブロックを発生させるために、隣接するブロックのサンプルを使用する
平面に基づいたおよびDCに基づいた予測モードもある。
古いビデオ符号化規格(例えば、H.263、MPEG-4)において、内部予測は変
換領域の中で実行された。この場合、送信係数は逆量子化された。そして、変換係数の副
組(subset)に対して、変換係数値は、隣接するブロックの対応する再構成された
変換係数を使用して、予測された。逆量子化変換係数は、予測変換係数値に追加され、そ
して、再構成された変換係数は、逆変換に入力として使用された。逆変換の出力は、ブロ
ックのための最終再構成信号を形成した。
換領域の中で実行された。この場合、送信係数は逆量子化された。そして、変換係数の副
組(subset)に対して、変換係数値は、隣接するブロックの対応する再構成された
変換係数を使用して、予測された。逆量子化変換係数は、予測変換係数値に追加され、そ
して、再構成された変換係数は、逆変換に入力として使用された。逆変換の出力は、ブロ
ックのための最終再構成信号を形成した。
スケーラブルビデオ符号化においても、ベース層情報は、エンハンスメント層のための
予測過程を補助するために利用される。スケーラブル符号化のための最先端のビデオ符号
化規格(H.264/AVCのSVC拡張)において、エンハンスメント層の中で内部予
測過程の符号化効率を向上させるための1つの追加モードがある。このモードは、マクロ
ブロックレベル(16×16個のルマ(luma)のサンプルのブロック)で合図される
。このモードは、下層の中の共同配置されたサンプルが、内部予測モードを使用して、符
号化される場合にだけ、補助される。仮に、このモードが、品質エンハンスメント層の中
でマクロブロックのために選択されるならば、予測信号は、非ブロッキングフィルタ操作
の前に、再構成された下層信号の共同配置されたサンプルによって組み立てられる。仮に
、中間層内部予測モードが、空間エンハンスメント層の中で選択されるならば、予測信号
は、(非ブロッキングフィルタ操作の後で、)共同配置された再構成されたベース層信号
を抽出することによって発生する。抽出するために、FIRフィルタが使用される。一般
に、中間層内部予測モードのためには、追加残留信号が変換符号化によって送信される。
また、仮に、それがビットストリームの中で対応して合図されるならば、残留信号の送信
は省略できる(ゼロに等しいと推論される)。最終再構成信号が、(送信された変換係数
レベルをスケーリングして、逆空間変換を適用することによって得られる)再構成された
残留信号を予測信号に追加することによって得られる。
予測過程を補助するために利用される。スケーラブル符号化のための最先端のビデオ符号
化規格(H.264/AVCのSVC拡張)において、エンハンスメント層の中で内部予
測過程の符号化効率を向上させるための1つの追加モードがある。このモードは、マクロ
ブロックレベル(16×16個のルマ(luma)のサンプルのブロック)で合図される
。このモードは、下層の中の共同配置されたサンプルが、内部予測モードを使用して、符
号化される場合にだけ、補助される。仮に、このモードが、品質エンハンスメント層の中
でマクロブロックのために選択されるならば、予測信号は、非ブロッキングフィルタ操作
の前に、再構成された下層信号の共同配置されたサンプルによって組み立てられる。仮に
、中間層内部予測モードが、空間エンハンスメント層の中で選択されるならば、予測信号
は、(非ブロッキングフィルタ操作の後で、)共同配置された再構成されたベース層信号
を抽出することによって発生する。抽出するために、FIRフィルタが使用される。一般
に、中間層内部予測モードのためには、追加残留信号が変換符号化によって送信される。
また、仮に、それがビットストリームの中で対応して合図されるならば、残留信号の送信
は省略できる(ゼロに等しいと推論される)。最終再構成信号が、(送信された変換係数
レベルをスケーリングして、逆空間変換を適用することによって得られる)再構成された
残留信号を予測信号に追加することによって得られる。
しかしながら、スケーラブルビデオ符号化において、より高い符号化効率を達成できる
ことが好ましい。
ことが好ましい。
従って、本発明の目的は、より高い符号化効率を実現するスケーラブルビデオ符号化の
ための概念を提供することである。
ための概念を提供することである。
この目的は同時期に提出の書類に記載の独立請求項の内容によって達成される。
本発明の1つの実施の形態は、仮に、それぞれの変換係数ブロックの副ブロックの副分
割が、ベース層残留信号またはベース層信号に基づいて制御されるならば、エンハンスメ
ント層の変換係数ブロックの副ブロックに基づいた符号化が、より効率的にされる、とい
うことである。特に、それぞれのベース層ヒントを利用することによって、副ブロックは
、ベース層残留信号またはベース層信号から観察可能なエッジ拡張に対して水平な空間周
波数軸に沿って、より長くなる。このため、副ブロックの形状を、増加する確率では、各
副ブロックが、ほぼ完全に重要な変換係数(すなわち、ゼロに量子化されていない変換係
数)、または、非重要な変換係数(すなわち、ゼロに量子化された変換係数だけ)のいず
れかで充満され、一方、減少する確率では、どんな副ブロックも、一方に重要な変換係数
の数と他方に非重要な変換係数の数を同数有するように、エンハンスメント層変換係数ブ
ロックの変換係数のエネルギーの推定分布に適合させることが可能である。しかしながら
、重要な変換係数を有さない副ブロックが、単に1つの旗(flag)の使用などによっ
て、データストリームの中で効率的に合図されるという事実のため、そして、重要な変換
係数で殆んど完全に充満された副ブロックが、そこに点在する非重要な変換係数を符号化
するための信号化量の浪費を必要としないという事実のため、エンハンスメント層の変換
係数ブロックを符号化するための符号化効率が増加する。
割が、ベース層残留信号またはベース層信号に基づいて制御されるならば、エンハンスメ
ント層の変換係数ブロックの副ブロックに基づいた符号化が、より効率的にされる、とい
うことである。特に、それぞれのベース層ヒントを利用することによって、副ブロックは
、ベース層残留信号またはベース層信号から観察可能なエッジ拡張に対して水平な空間周
波数軸に沿って、より長くなる。このため、副ブロックの形状を、増加する確率では、各
副ブロックが、ほぼ完全に重要な変換係数(すなわち、ゼロに量子化されていない変換係
数)、または、非重要な変換係数(すなわち、ゼロに量子化された変換係数だけ)のいず
れかで充満され、一方、減少する確率では、どんな副ブロックも、一方に重要な変換係数
の数と他方に非重要な変換係数の数を同数有するように、エンハンスメント層変換係数ブ
ロックの変換係数のエネルギーの推定分布に適合させることが可能である。しかしながら
、重要な変換係数を有さない副ブロックが、単に1つの旗(flag)の使用などによっ
て、データストリームの中で効率的に合図されるという事実のため、そして、重要な変換
係数で殆んど完全に充満された副ブロックが、そこに点在する非重要な変換係数を符号化
するための信号化量の浪費を必要としないという事実のため、エンハンスメント層の変換
係数ブロックを符号化するための符号化効率が増加する。
本発明の1つの実施の形態は、スケーラブルビデオ符号化の中で、エンハンスメント層
信号を予測的に符号化するための、より良い予測器(predictor)が、エンハン
スメント層予測信号を得るために、異なる空間周波数成分に対して異なる重み付けの方法
で、中間層予測信号とエンハンスメント層内部予測信号とから、エンハンスメント層予測
信号を形成することによって(すなわち、現在再構成されるべき部分で、中間層予測信号
とエンハンスメント層内部予測信号との重み付け平均を形成することによって)達成され
るので、中間層予測信号とエンハンスメント層内部予測信号がエンハンスメント層予測信
号に寄与する重み付けが、異なる空間周波数成分を変化する、ということである。このた
め、個別の寄与成分(すなわち、一方で中間層予測信号および他方でエンハンスメント層
内部予測信号)のスペクトル特性に対して最適化された方法で、中間層予測信号およびエ
ンハンスメント層内部予測信号から、エンハンスメント層予測信号を解釈することが可能
である。例えば、解像度または品質の改良に基づいて、中間層予測信号が、再構成された
ベース層信号から得られる。中間層予測信号は、高周数波と比較して低周波数で、より正
確である。エンハンスメント層内部予測信号に関する限り、特性は逆である。すなわち、
その精度は、低周波数と比較して高周数波に対して増加する。この例では、低周波数では
、中間層予測信号のエンハンスメント層予測信号への寄与が、それぞれの重み付けで、エ
ンハンスメント層内部予測信号のエンハンスメント層予測信号への寄与を超える。そして
、高周波に関する限り、エンハンスメント層内部予測信号のエンハンスメント層予測信号
への寄与を超えない。このため、より正確なエンハンスメント層予測信号が達成される。
その結果、符号化効率が増加して、より高い圧縮率がもたらされる。
信号を予測的に符号化するための、より良い予測器(predictor)が、エンハン
スメント層予測信号を得るために、異なる空間周波数成分に対して異なる重み付けの方法
で、中間層予測信号とエンハンスメント層内部予測信号とから、エンハンスメント層予測
信号を形成することによって(すなわち、現在再構成されるべき部分で、中間層予測信号
とエンハンスメント層内部予測信号との重み付け平均を形成することによって)達成され
るので、中間層予測信号とエンハンスメント層内部予測信号がエンハンスメント層予測信
号に寄与する重み付けが、異なる空間周波数成分を変化する、ということである。このた
め、個別の寄与成分(すなわち、一方で中間層予測信号および他方でエンハンスメント層
内部予測信号)のスペクトル特性に対して最適化された方法で、中間層予測信号およびエ
ンハンスメント層内部予測信号から、エンハンスメント層予測信号を解釈することが可能
である。例えば、解像度または品質の改良に基づいて、中間層予測信号が、再構成された
ベース層信号から得られる。中間層予測信号は、高周数波と比較して低周波数で、より正
確である。エンハンスメント層内部予測信号に関する限り、特性は逆である。すなわち、
その精度は、低周波数と比較して高周数波に対して増加する。この例では、低周波数では
、中間層予測信号のエンハンスメント層予測信号への寄与が、それぞれの重み付けで、エ
ンハンスメント層内部予測信号のエンハンスメント層予測信号への寄与を超える。そして
、高周波に関する限り、エンハンスメント層内部予測信号のエンハンスメント層予測信号
への寄与を超えない。このため、より正確なエンハンスメント層予測信号が達成される。
その結果、符号化効率が増加して、より高い圧縮率がもたらされる。
様々な実施の形態によって、異なる可能性が、ちょうど概説された概念を、概念に基づ
いたどんなスケーラブルビデオ符号化にも組み込むために説明される。例えば、重み付け
平均の形成は空間領域または変換領域の中のいずれかで形成される。スペクトル重み付け
平均の実行は、個別の寄与(すなわち、中間層予測信号とエンハンスメント層内部予測)
で実行されるべき変換を必要とする。しかし、例えば、FIRまたはIIRフィルタリン
グを含む空間領域の中の中間層予測信号とエンハンスメント層内部予測信号とのいずれか
をスペクトル的にフィルタにかけることを避ける。しかしながら、空間領域の中のスペク
トル重み付け平均の形成を実行することは、変換領域を経由して重み付け平均への個別の
寄与の回り道は避ける。領域が実際にスペクトル重み付け平均の形成を実行するために選
択される決定は、スケーラブルビデオデータストリームが、エンハンスメント層信号の中
で現在構成されるべき部分に対して、変換係数の形式で残留信号を含んでいるか否かに依
存している。仮に、含んでいなければ、変換領域を経由する回り道は止められる。一方、
残留信号が存在する場合、変換領域を経由する回り道は、変換領域の中の送信された残留
信号に対して、変換領域の中のスペクトル重み付け平均に直接に加算することを許容する
ので、更に有利である。
いたどんなスケーラブルビデオ符号化にも組み込むために説明される。例えば、重み付け
平均の形成は空間領域または変換領域の中のいずれかで形成される。スペクトル重み付け
平均の実行は、個別の寄与(すなわち、中間層予測信号とエンハンスメント層内部予測)
で実行されるべき変換を必要とする。しかし、例えば、FIRまたはIIRフィルタリン
グを含む空間領域の中の中間層予測信号とエンハンスメント層内部予測信号とのいずれか
をスペクトル的にフィルタにかけることを避ける。しかしながら、空間領域の中のスペク
トル重み付け平均の形成を実行することは、変換領域を経由して重み付け平均への個別の
寄与の回り道は避ける。領域が実際にスペクトル重み付け平均の形成を実行するために選
択される決定は、スケーラブルビデオデータストリームが、エンハンスメント層信号の中
で現在構成されるべき部分に対して、変換係数の形式で残留信号を含んでいるか否かに依
存している。仮に、含んでいなければ、変換領域を経由する回り道は止められる。一方、
残留信号が存在する場合、変換領域を経由する回り道は、変換領域の中の送信された残留
信号に対して、変換領域の中のスペクトル重み付け平均に直接に加算することを許容する
ので、更に有利である。
本発明の1つの実施の形態は、ベース層の符号化/復号化から利用可能な情報(すなわ
ち、ベース層ヒント)が、より効率的にエンハンスメント層作動(motion)パラメ
ータを符号化することによって、エンハンスメント層の作動補償予測をより効率的にする
ことに利用される、ということである。特に、エンハンスメント層信号のフレームの隣接
する既に再構成されたブロックから集められた作動パラメータ候補組は、たぶんベース層
信号(エンハンスメント層のフレームのブロックに共同配置されたベース層信号)のブロ
ックの1つ以上のベース層作動パラメータ組によって拡大される。その結果、作動パラメ
ータ候補組の利用可能な品質が、エンハンスメント層信号のブロックの作動補償予測が、
拡張された作動パラメータ候補組の作動パラメータ候補の1つを選択して、その選択され
た作動パラメータ候補を予測のために使用して、実行されることに基づいて向上する。追
加的に、または、2者択一的に、エンハンスメント層信号の作動パラメータ候補リストが
、ベース層の符号化/復号化に関わるベース層作動パラメータに依存して順序付けされる
。このため、順序付けされた作動パラメータ候補リストからエンハンスメント層作動パラ
メータを選択するための確率分布は、例えば、明らかに合図されたインデックス構文要素
が、少ないビットを使用して、(例えば、エントロピー符号化などを使用して、)符号化
されるように圧縮される。さらに、付加的に、または、2者択一的に、ベース層の符号化
/復号化の中で使用されたインデックスが、エンハンスメント層のための作動パラメータ
候補リストの中にインデックスを決定する基礎として補助する。このため、エンハンスメ
ント層のためのインデックスのどんな合図も、完全に避けられる。または、単にインデッ
クスに対して、このようにして決定した予測の偏差が、エンハンスメント層副ストリーム
の中で送信される。その結果、符号化効率が向上する。
ち、ベース層ヒント)が、より効率的にエンハンスメント層作動(motion)パラメ
ータを符号化することによって、エンハンスメント層の作動補償予測をより効率的にする
ことに利用される、ということである。特に、エンハンスメント層信号のフレームの隣接
する既に再構成されたブロックから集められた作動パラメータ候補組は、たぶんベース層
信号(エンハンスメント層のフレームのブロックに共同配置されたベース層信号)のブロ
ックの1つ以上のベース層作動パラメータ組によって拡大される。その結果、作動パラメ
ータ候補組の利用可能な品質が、エンハンスメント層信号のブロックの作動補償予測が、
拡張された作動パラメータ候補組の作動パラメータ候補の1つを選択して、その選択され
た作動パラメータ候補を予測のために使用して、実行されることに基づいて向上する。追
加的に、または、2者択一的に、エンハンスメント層信号の作動パラメータ候補リストが
、ベース層の符号化/復号化に関わるベース層作動パラメータに依存して順序付けされる
。このため、順序付けされた作動パラメータ候補リストからエンハンスメント層作動パラ
メータを選択するための確率分布は、例えば、明らかに合図されたインデックス構文要素
が、少ないビットを使用して、(例えば、エントロピー符号化などを使用して、)符号化
されるように圧縮される。さらに、付加的に、または、2者択一的に、ベース層の符号化
/復号化の中で使用されたインデックスが、エンハンスメント層のための作動パラメータ
候補リストの中にインデックスを決定する基礎として補助する。このため、エンハンスメ
ント層のためのインデックスのどんな合図も、完全に避けられる。または、単にインデッ
クスに対して、このようにして決定した予測の偏差が、エンハンスメント層副ストリーム
の中で送信される。その結果、符号化効率が向上する。
本発明の1つの実施の形態は、スケーラブルビデオ符号化が、ベース層信号の上でベー
ス層符号化パラメータの空間的な変化を評価することによって、エンハンスメント層ブロ
ックの可能な副ブロックの副分割の組の中で、エンハンスメント層予測のために使用され
るべき副ブロックの副分割の派生/選択によって、より効率的にされる、ということであ
る。このため、仮に、そうならば、少ない信号化オーバーヘッドが、エンハンスメント層
データストリームの中で、この副ブロックの副分割に合図するために費やされなければな
らない。このようにして選択された副ブロックの副分割は、エンハンスメント層信号を予
測的に符号化/復号化する際に使用される。
ス層符号化パラメータの空間的な変化を評価することによって、エンハンスメント層ブロ
ックの可能な副ブロックの副分割の組の中で、エンハンスメント層予測のために使用され
るべき副ブロックの副分割の派生/選択によって、より効率的にされる、ということであ
る。このため、仮に、そうならば、少ない信号化オーバーヘッドが、エンハンスメント層
データストリームの中で、この副ブロックの副分割に合図するために費やされなければな
らない。このようにして選択された副ブロックの副分割は、エンハンスメント層信号を予
測的に符号化/復号化する際に使用される。
本発明の1つの実施の形態は、スケーラブルビデオ符号化の符号化効率が、ベース層信
号の共同配置されたブロックの内部予測パラメータの使用によって、エンハンスメント層
の現在のブロックの空間隣接部の中の失われている空間内部予測パラメータ候補を代用す
ることによって増加する、ということである。このため、空間内部予測パラメータを符号
化するための符号化効率は、エンハンスメント層の内部予測パラメータの組の改良された
予測品質のために増加する、または、より正確に述べると、増加する見込みである。エン
ハンスメント層の内部予測されたブロックのための内部予測パラメータのための適切な予
測器が、有用であり、その結果、それぞれのエンハンスメント層ブロックの内部予測パラ
メータの合図が、平均的に少ないビットで実行される、という見込みを増加させる。
号の共同配置されたブロックの内部予測パラメータの使用によって、エンハンスメント層
の現在のブロックの空間隣接部の中の失われている空間内部予測パラメータ候補を代用す
ることによって増加する、ということである。このため、空間内部予測パラメータを符号
化するための符号化効率は、エンハンスメント層の内部予測パラメータの組の改良された
予測品質のために増加する、または、より正確に述べると、増加する見込みである。エン
ハンスメント層の内部予測されたブロックのための内部予測パラメータのための適切な予
測器が、有用であり、その結果、それぞれのエンハンスメント層ブロックの内部予測パラ
メータの合図が、平均的に少ないビットで実行される、という見込みを増加させる。
更なる有利な実現は従属クレームで説明される。
好ましい実施の形態が、図面に関して以下に詳細に説明される。
図1は、以下に概説された実施の形態が組み込まれる、スケーラブルビデオエンコーダ
のための実施の形態を一般的な方法で示す。図1のスケーラブルビデオエンコーダは、一
般に、引用符号2を使用して示され、ビデオ4を受信して符号化する。スケーラブルビデ
オエンコーダ2は、スケーラブル方法で、ビデオ4をデータストリーム6の中に符号化す
るように構成されている。すなわち、データストリーム6は、第1の情報内容量でその中
に符号化されたビデオ4を有している第1の部分6aと、第1の部分6aより大きい情報
内容量でその中に符号化されたビデオ4を有している別の部分6bと、を含む。例えば、
部分6aと6bの情報内容量は、品質または忠実度において、すなわち、オリジナルビデ
オ4からの画素的な偏差の量および/または空間解像度において異なる。しかしながら、
また、情報内容量の異なる他の形式が、例えば、色忠実度などに適用される。部分6aは
ベース層データストリームまたはベース層副ストリームと呼ばれる。一方、部分6bはエ
ンハンスメント層データストリームまたはエンハンスメント層副ストリームと呼ばれる。
のための実施の形態を一般的な方法で示す。図1のスケーラブルビデオエンコーダは、一
般に、引用符号2を使用して示され、ビデオ4を受信して符号化する。スケーラブルビデ
オエンコーダ2は、スケーラブル方法で、ビデオ4をデータストリーム6の中に符号化す
るように構成されている。すなわち、データストリーム6は、第1の情報内容量でその中
に符号化されたビデオ4を有している第1の部分6aと、第1の部分6aより大きい情報
内容量でその中に符号化されたビデオ4を有している別の部分6bと、を含む。例えば、
部分6aと6bの情報内容量は、品質または忠実度において、すなわち、オリジナルビデ
オ4からの画素的な偏差の量および/または空間解像度において異なる。しかしながら、
また、情報内容量の異なる他の形式が、例えば、色忠実度などに適用される。部分6aは
ベース層データストリームまたはベース層副ストリームと呼ばれる。一方、部分6bはエ
ンハンスメント層データストリームまたはエンハンスメント層副ストリームと呼ばれる。
スケーラブルビデオエンコーダ2は、一方でエンハンスメント層副ストリーム6b無し
でベース層副ストリーム6aから、他方で副ストリーム6aと6bの両方から、再構成可
能なビデオ4のバージョン8aと8bとの間の冗長を利用するように構成されている。そ
うするために、スケーラブルビデオエンコーダ2は中間層予測を使用する。
でベース層副ストリーム6aから、他方で副ストリーム6aと6bの両方から、再構成可
能なビデオ4のバージョン8aと8bとの間の冗長を利用するように構成されている。そ
うするために、スケーラブルビデオエンコーダ2は中間層予測を使用する。
図1に示すように、スケーラブルビデオエンコーダ2は、2者択一的に、ビデオ4の2
つのバージョン4aと4bを受信する。両方のバージョン4aと4bは、ちょうどベース
層副ストリーム6aとエンハンスメント層副ストリーム6bとがするように、情報内容量
が互いに異なる。従って、例えば、スケーラブルビデオエンコーダ2は、副ストリーム6
aと6bを発生させるように構成される。その結果、ベース層副ストリーム6aは、その
中に符号化されたバージョン4aを有する。一方、エンハンスメント層データストリーム
(副ストリーム)6bは、ベース層副ストリーム6bに基づいた中間層予測を使用して、
その中に符号化されたバージョン4bを有する。副ストリーム6aと6bの符号化は共に
損失する。
つのバージョン4aと4bを受信する。両方のバージョン4aと4bは、ちょうどベース
層副ストリーム6aとエンハンスメント層副ストリーム6bとがするように、情報内容量
が互いに異なる。従って、例えば、スケーラブルビデオエンコーダ2は、副ストリーム6
aと6bを発生させるように構成される。その結果、ベース層副ストリーム6aは、その
中に符号化されたバージョン4aを有する。一方、エンハンスメント層データストリーム
(副ストリーム)6bは、ベース層副ストリーム6bに基づいた中間層予測を使用して、
その中に符号化されたバージョン4bを有する。副ストリーム6aと6bの符号化は共に
損失する。
仮に、スケーラブルビデオエンコーダ2が、単に、ビデオ4のオリジナルバージョンを
受信するのみであっても、スケーラブルビデオエンコーダ2は、例えば、空間的ダウンス
ケーリング、および/または、より高いビット深さからより低いビット深さへのトーンマ
ッピング(写像)によって、ベース層バージョン4aを得ることによって、そこから内部
的に2つのバージョン4aと4bを得るように構成されている。
受信するのみであっても、スケーラブルビデオエンコーダ2は、例えば、空間的ダウンス
ケーリング、および/または、より高いビット深さからより低いビット深さへのトーンマ
ッピング(写像)によって、ベース層バージョン4aを得ることによって、そこから内部
的に2つのバージョン4aと4bを得るように構成されている。
図2は、図1のスケーラブルビデオエンコーダ2に合うスケーラブルビデオデコーダを
、以下に概説された実施の形態を取り入れるのに適した同様な方法で示す。図2のスケー
ラブルビデオデコーダは、一般に、引用符号10を使用して示される。スケーラブルビデ
オデコーダは、一般的に、仮に、完全な方法で、データストリーム6の両方の部分6aと
6bがスケーラブルビデオデコーダ10に達するならば、そこからビデオのエンハンスメ
ント層バージョン8bを再構成するように、または、仮に、例えば、部分6bが送信損失
などのために利用できないならば、そこからビデオのベース層バージョン8aを再構成す
るように、符号化データストリーム6をデコード(復号化)するように構成されている。
すなわち、スケーラブルビデオデコーダ10は、ベース層副ストリーム6aだけからバー
ジョン8aを再構成でき、かつ、部分6aと6bの両方から中間層予測を使用して、バー
ジョン8bを再構成できるように構成されている。
、以下に概説された実施の形態を取り入れるのに適した同様な方法で示す。図2のスケー
ラブルビデオデコーダは、一般に、引用符号10を使用して示される。スケーラブルビデ
オデコーダは、一般的に、仮に、完全な方法で、データストリーム6の両方の部分6aと
6bがスケーラブルビデオデコーダ10に達するならば、そこからビデオのエンハンスメ
ント層バージョン8bを再構成するように、または、仮に、例えば、部分6bが送信損失
などのために利用できないならば、そこからビデオのベース層バージョン8aを再構成す
るように、符号化データストリーム6をデコード(復号化)するように構成されている。
すなわち、スケーラブルビデオデコーダ10は、ベース層副ストリーム6aだけからバー
ジョン8aを再構成でき、かつ、部分6aと6bの両方から中間層予測を使用して、バー
ジョン8bを再構成できるように構成されている。
より詳細な以下の本発明の実施の形態(すなわち、実施の形態は、図1と図2の実施の
形態を示す)が明確に詳細に説明される前に、図1と図2のスケーラブルビデオエンコー
ダとデコーダのより詳しい実現が、図3と図4に対して説明される。図3は、ベース層符
号化器12、エンハンスメント層符号化器14およびマルチプレクサ(回線多重化装置)
16を備えたスケーラブルビデオエンコーダ2を示す。ベース層符号化器12は、入力ビ
デオのベース層バージョン4aを符号化するように構成されている。エンハンスメント層
符号化器14は、ビデオのエンハンスメント層バージョン4bを符号化するように構成さ
れている。従って、マルチプレクサ16は、ベース層符号化器12からのベース層副スト
リーム6aとエンハンスメント層符号化器14からのエンハンスメント層副ストリーム6
bとを受信して、出力のときに符号化データストリーム6の中に両者を多重化して送信す
る。
形態を示す)が明確に詳細に説明される前に、図1と図2のスケーラブルビデオエンコー
ダとデコーダのより詳しい実現が、図3と図4に対して説明される。図3は、ベース層符
号化器12、エンハンスメント層符号化器14およびマルチプレクサ(回線多重化装置)
16を備えたスケーラブルビデオエンコーダ2を示す。ベース層符号化器12は、入力ビ
デオのベース層バージョン4aを符号化するように構成されている。エンハンスメント層
符号化器14は、ビデオのエンハンスメント層バージョン4bを符号化するように構成さ
れている。従って、マルチプレクサ16は、ベース層符号化器12からのベース層副スト
リーム6aとエンハンスメント層符号化器14からのエンハンスメント層副ストリーム6
bとを受信して、出力のときに符号化データストリーム6の中に両者を多重化して送信す
る。
図3に示されているように、両方の符号化器12と14は、それぞれの入力バージョン
4aと4bを、それぞれの副ストリーム6aと6bの中に符号化するために、例えば、空
間予測および/または時間予測を使用する予測符号化器である。特に、符号化器12と1
4はそれぞれ、ハイブリッドビデオブロック符号化器である。すなわち、符号化器12と
14のそれぞれは、例えば、ビデオバージョン4aと4bの画像またはフレームが、それ
ぞれ副分割されるブロックの各ブロックのための異なる予測モードの間で選択されている
間、ブロックごとに基づいて、ビデオのそれぞれの入力バージョンを符号化するように構
成されている。ベース層符号化器12の異なる予測モードは、空間および/または時間予
測モードを含む。一方、エンハンスメント層符号化器14は、追加して、中間層予測モー
ドを補助する。ブロックの中の副分割は、ベース層とエンハンスメント層の間で異なって
いる。予測モード、様々なブロックのために選択された予測モードのための予測パラメー
タ、予測残留、そして、任意に、それぞれのビデオバージョンのブロック副分割は、エン
トロピー符号化を使用して、順番にそれぞれの副ストリーム6a,6bの中に符号化され
る構文要素を含むそれぞれの構文を使用して、それぞれの符号化器12,14によって記
述される。中間層予測は、2,3の例で言及したように、エンハンスメント層ビデオ、予
測モード、予測パラメータ、および/または、ブロックの副分割のサンプルを予測するた
めに、例えば1回以上利用される。従って、ベース層符号化器12とエンハンスメント層
符号化器14の両方が、それぞれ、エントロピー符号化器19a,19bが後に続く予測
符号化器18a,18bを含む。一方、予測符号化器18a,18bは、それぞれ入力(
inbound)バージョン4aと4bから、予測符号化を使用して、構文要素ストリー
ムを形成する。エントロピー符号化器19a,19bは、それぞれの予測符号化器18a
,18bによって出力された構文要素をエントロピー符号化する。ちょうど言及するよう
に、エンコーダ2の中間層予測は、エンハンスメント層の符号化手順の中で異なる時に関
係する。従って、予測符号化器18bは、予測符号化器18a、それの出力、およびエン
トロピー符号化器19aの1つ以上に接続されるように示される。同様に、エントロピー
符号化器19bは、例えば、ベース層からのエントロピー符号化のために使用された文脈
を予測することによって、任意に中間層予測を利用する。従って、エントロピー符号化器
19bは、任意に、ベース層符号化器12の要素のどれかに接続されるように示される。
4aと4bを、それぞれの副ストリーム6aと6bの中に符号化するために、例えば、空
間予測および/または時間予測を使用する予測符号化器である。特に、符号化器12と1
4はそれぞれ、ハイブリッドビデオブロック符号化器である。すなわち、符号化器12と
14のそれぞれは、例えば、ビデオバージョン4aと4bの画像またはフレームが、それ
ぞれ副分割されるブロックの各ブロックのための異なる予測モードの間で選択されている
間、ブロックごとに基づいて、ビデオのそれぞれの入力バージョンを符号化するように構
成されている。ベース層符号化器12の異なる予測モードは、空間および/または時間予
測モードを含む。一方、エンハンスメント層符号化器14は、追加して、中間層予測モー
ドを補助する。ブロックの中の副分割は、ベース層とエンハンスメント層の間で異なって
いる。予測モード、様々なブロックのために選択された予測モードのための予測パラメー
タ、予測残留、そして、任意に、それぞれのビデオバージョンのブロック副分割は、エン
トロピー符号化を使用して、順番にそれぞれの副ストリーム6a,6bの中に符号化され
る構文要素を含むそれぞれの構文を使用して、それぞれの符号化器12,14によって記
述される。中間層予測は、2,3の例で言及したように、エンハンスメント層ビデオ、予
測モード、予測パラメータ、および/または、ブロックの副分割のサンプルを予測するた
めに、例えば1回以上利用される。従って、ベース層符号化器12とエンハンスメント層
符号化器14の両方が、それぞれ、エントロピー符号化器19a,19bが後に続く予測
符号化器18a,18bを含む。一方、予測符号化器18a,18bは、それぞれ入力(
inbound)バージョン4aと4bから、予測符号化を使用して、構文要素ストリー
ムを形成する。エントロピー符号化器19a,19bは、それぞれの予測符号化器18a
,18bによって出力された構文要素をエントロピー符号化する。ちょうど言及するよう
に、エンコーダ2の中間層予測は、エンハンスメント層の符号化手順の中で異なる時に関
係する。従って、予測符号化器18bは、予測符号化器18a、それの出力、およびエン
トロピー符号化器19aの1つ以上に接続されるように示される。同様に、エントロピー
符号化器19bは、例えば、ベース層からのエントロピー符号化のために使用された文脈
を予測することによって、任意に中間層予測を利用する。従って、エントロピー符号化器
19bは、任意に、ベース層符号化器12の要素のどれかに接続されるように示される。
図1に対する図2と同じ方法で、図4は、図3のスケーラブルビデオエンコーダに合う
スケーラブルビデオデコーダ10の可能な実現を示す。従って、図4のスケーラブルビデ
オデコーダ10は、副ストリーム6aと6bを得るためにデータストリーム6を受信する
デマルチプレクサ40と、ベース層副ストリーム6aを復号するように構成されたベース
層デコーダ80と、エンハンスメント層副ストリーム6bを復号するように構成されたエ
ンハンスメント層デコーダ60と、を備えている。示されているように、デコーダ60は
、中間層予測を利用するためにそこから情報を受信するためにベース層デコーダ80に接
続されている。これにより、ベース層デコーダ80は、ベース層副ストリーム6aからベ
ース層バージョン8aを再構成できる。そして、エンハンスメント層デコーダ60は、エ
ンハンスメント層副ストリーム6bを使用して、ビデオのエンハンスメント層バージョン
8bを再構成するように構成されている。図3のスケーラブルビデオエンコーダと類似し
て、それぞれエンハンスメント層デコーダ60とベース層デコーダ80は、エントロピー
デコーダ100,320、続いて、予測デコーダ102,322を内部に含む。
スケーラブルビデオデコーダ10の可能な実現を示す。従って、図4のスケーラブルビデ
オデコーダ10は、副ストリーム6aと6bを得るためにデータストリーム6を受信する
デマルチプレクサ40と、ベース層副ストリーム6aを復号するように構成されたベース
層デコーダ80と、エンハンスメント層副ストリーム6bを復号するように構成されたエ
ンハンスメント層デコーダ60と、を備えている。示されているように、デコーダ60は
、中間層予測を利用するためにそこから情報を受信するためにベース層デコーダ80に接
続されている。これにより、ベース層デコーダ80は、ベース層副ストリーム6aからベ
ース層バージョン8aを再構成できる。そして、エンハンスメント層デコーダ60は、エ
ンハンスメント層副ストリーム6bを使用して、ビデオのエンハンスメント層バージョン
8bを再構成するように構成されている。図3のスケーラブルビデオエンコーダと類似し
て、それぞれエンハンスメント層デコーダ60とベース層デコーダ80は、エントロピー
デコーダ100,320、続いて、予測デコーダ102,322を内部に含む。
以下の実施の形態の理解を簡素化するために、図5は、ビデオ4の異なるバージョン、
すなわち、符号化損失によって互いから逸れているベース層バージョン4aと8aとを例
示的に示す。同様に、エンハンスメント層バージョン4bと8bとは、それぞれ符号化損
失によって互いから逸れている。ベース層信号とエンハンスメント層信号は、それぞれ画
像22aと22bの系列で構成される。それらは、時間軸24に沿って互い(すなわち、
エンハンスメント層信号の時間的に対応する画像22bの他にも、ベース層バージョンの
画像22a)に登録されるように、図5の中に示されている。前述のように、画像22b
は、より高い空間解像度を有し、および/または、より高い忠実度などで(例えば、画像
のサンプル値の、より高いビット深さで)ビデオ4を表す。実線および点線を使用して、
符号化/復号化の順序が、画像22a,22bの間で定義されるために示される。図5の
中で示された例に従って、符号化/復号化の順序が、所定の時間の時刻/瞬間のベース層
画像22aは、エンハンスメント層信号の同じ時間の時刻のエンハンスメント層画像22
bの前に横断されるような方法で、画像22aと22bを横断する。時間軸24に対して
、画像22a,22bは、提供時間の順序で符号化/復号化の順序26によって横断され
る。しかし、画像22a,22bの提供時間の順序から逸れる順序も、可能である。エン
コーダ2もデコーダ10も、符号化/復号化の順序26に沿って連続して符号化/復号化
する必要はない。むしろ、符号化/復号化は平行して使用される。符号化/復号化の順序
26は、空間的、時間的、および/または、中間層の意味で、互いに隣接するベース層信
号とエンハンスメント層信号の部分の間の利用性を定義する。その結果、エンハンスメン
ト層の現在の部分を符号化/復号化する時に、その現在のエンハンスメント層部分の利用
可能な部分が、符号化/復号化の順序を通して定義される。従って、この符号化/復号化
の順序26に従って利用可能である単に隣接する部分が、予測のためにエンコーダによっ
て使用されるので、デコーダは、予測を手直しするために、同じ情報源にアクセスする。
すなわち、符号化損失によって互いから逸れているベース層バージョン4aと8aとを例
示的に示す。同様に、エンハンスメント層バージョン4bと8bとは、それぞれ符号化損
失によって互いから逸れている。ベース層信号とエンハンスメント層信号は、それぞれ画
像22aと22bの系列で構成される。それらは、時間軸24に沿って互い(すなわち、
エンハンスメント層信号の時間的に対応する画像22bの他にも、ベース層バージョンの
画像22a)に登録されるように、図5の中に示されている。前述のように、画像22b
は、より高い空間解像度を有し、および/または、より高い忠実度などで(例えば、画像
のサンプル値の、より高いビット深さで)ビデオ4を表す。実線および点線を使用して、
符号化/復号化の順序が、画像22a,22bの間で定義されるために示される。図5の
中で示された例に従って、符号化/復号化の順序が、所定の時間の時刻/瞬間のベース層
画像22aは、エンハンスメント層信号の同じ時間の時刻のエンハンスメント層画像22
bの前に横断されるような方法で、画像22aと22bを横断する。時間軸24に対して
、画像22a,22bは、提供時間の順序で符号化/復号化の順序26によって横断され
る。しかし、画像22a,22bの提供時間の順序から逸れる順序も、可能である。エン
コーダ2もデコーダ10も、符号化/復号化の順序26に沿って連続して符号化/復号化
する必要はない。むしろ、符号化/復号化は平行して使用される。符号化/復号化の順序
26は、空間的、時間的、および/または、中間層の意味で、互いに隣接するベース層信
号とエンハンスメント層信号の部分の間の利用性を定義する。その結果、エンハンスメン
ト層の現在の部分を符号化/復号化する時に、その現在のエンハンスメント層部分の利用
可能な部分が、符号化/復号化の順序を通して定義される。従って、この符号化/復号化
の順序26に従って利用可能である単に隣接する部分が、予測のためにエンコーダによっ
て使用されるので、デコーダは、予測を手直しするために、同じ情報源にアクセスする。
以下の図に対して、図1~図4に対して前述したスケーラブルビデオエンコーダまたは
デコーダが、1つの実施例に従って、本発明の実施の形態をどのように形成するかが説明
される。以下で説明される実施例の可能な実例が、表示「実施例C」を使用して議論され
る。
デコーダが、1つの実施例に従って、本発明の実施の形態をどのように形成するかが説明
される。以下で説明される実施例の可能な実例が、表示「実施例C」を使用して議論され
る。
特に、図6は、引用符号360を使用して示されたエンハンスメント層信号の画像22
bと、引用符号200を使用して示されたベース層信号の画像22aを説明する。異なる
層の時間的に対応する画像は、時間軸24に対して互いに示された方法で示される。斜線
を使用して、符号化/復号化の順序に従って既に符号化/復号化されているベースとエン
ハンスメント層信号の中の部分200とが、図5に示された符号化/復号化の順序に従っ
て未だ符号化または復号化されていない部分36と区別される。また、図6は、現在符号
化/復号化されるエンハンスメント層信号360の一部分28を示す。
bと、引用符号200を使用して示されたベース層信号の画像22aを説明する。異なる
層の時間的に対応する画像は、時間軸24に対して互いに示された方法で示される。斜線
を使用して、符号化/復号化の順序に従って既に符号化/復号化されているベースとエン
ハンスメント層信号の中の部分200とが、図5に示された符号化/復号化の順序に従っ
て未だ符号化または復号化されていない部分36と区別される。また、図6は、現在符号
化/復号化されるエンハンスメント層信号360の一部分28を示す。
現在説明されている実施の形態に従って、部分28の予測は、部分28を予測するため
に、エンハンスメント層自体の中の内部層予測とベース層からの中間層予測の両方を使用
する。しかしながら、予測は、これらの予測がスペクトル的に変化する方法で、部分28
の最終予測に寄与するように結合される。その結果、特に、両方の寄与の間の比率は、ス
ペクトル的に変化する。
に、エンハンスメント層自体の中の内部層予測とベース層からの中間層予測の両方を使用
する。しかしながら、予測は、これらの予測がスペクトル的に変化する方法で、部分28
の最終予測に寄与するように結合される。その結果、特に、両方の寄与の間の比率は、ス
ペクトル的に変化する。
特に、部分28は、エンハンスメント層信号400の既に再構成された部分(すなわち
、図6でエンハンスメント層信号400の中の斜線によって示された部分)から、空間的
または時間的に予測される。空間予測は矢印30を使用して説明される。一方、時間予測
は矢印32を使用して説明される。時間予測は、例えば、作動ベクトルの情報が、現在の
部分28のために、エンハンスメント層副ストリームの中で送信されるに従って、作動補
償予測を含む。作動ベクトルは、現在の部分28の時間予測を得るために、コピーされる
べきエンハンスメント層信号400の引用画像の一部分の置き換えを示す。空間予測30
は、現在の部分28の中に、推定する空間的に隣接する部分、画像22bの既に符号化/
復号化された部分、空間的に隣接する現在の部分28を含む。このために、推定(または
角度)方向のような内部予測情報が、現在の部分28のために、エンハンスメント層副ス
トリームの中で合図される。また、空間予測30および時間予測32の組み合わせが、同
様に使用される。どのような場合でも、その結果、エンハンスメント層の内部予測信号3
4が、図7で説明されるように得られる。
、図6でエンハンスメント層信号400の中の斜線によって示された部分)から、空間的
または時間的に予測される。空間予測は矢印30を使用して説明される。一方、時間予測
は矢印32を使用して説明される。時間予測は、例えば、作動ベクトルの情報が、現在の
部分28のために、エンハンスメント層副ストリームの中で送信されるに従って、作動補
償予測を含む。作動ベクトルは、現在の部分28の時間予測を得るために、コピーされる
べきエンハンスメント層信号400の引用画像の一部分の置き換えを示す。空間予測30
は、現在の部分28の中に、推定する空間的に隣接する部分、画像22bの既に符号化/
復号化された部分、空間的に隣接する現在の部分28を含む。このために、推定(または
角度)方向のような内部予測情報が、現在の部分28のために、エンハンスメント層副ス
トリームの中で合図される。また、空間予測30および時間予測32の組み合わせが、同
様に使用される。どのような場合でも、その結果、エンハンスメント層の内部予測信号3
4が、図7で説明されるように得られる。
現在の部分28の別の予測を得るために、中間層予測が使用される。このために、ベー
ス層信号200は、エンハンスメント層信号400の現在の部分28に空間的かつ時間的
に対応する部分36で、現在の部分28のための中間予測信号が、増加する潜在的解像度
を得るために、解像度または品質の改良を受ける。改良手順は図6の矢印38を使用して
説明され、図7に示すように中間層予測信号39をもたらす。
ス層信号200は、エンハンスメント層信号400の現在の部分28に空間的かつ時間的
に対応する部分36で、現在の部分28のための中間予測信号が、増加する潜在的解像度
を得るために、解像度または品質の改良を受ける。改良手順は図6の矢印38を使用して
説明され、図7に示すように中間層予測信号39をもたらす。
従って、2つの予測寄与34と39が、現在の部分28のために存在する。そして、両
方の寄与の重み付け平均が、現在の部分28に対して、中間層予測信号とエンハンスメン
ト層内部予測信号とが、エンハンスメント層予測信号42に寄与する重み付けが、図7に
44で図式的に示すように、空間周波数成分を異なって変化する方法で、エンハンスメン
ト層予測信号42を得るために形成される。図7は、例示的に、あらゆる空間周波数成分
に対して、予測信号34と38が最終予測信号に寄付する重み付けが、全てのスペクトル
的成分に対して、しかしながら、予測信号34に適用された重み付けと予測信号39に適
用された重み付けとの間の比をスペクトル的に変化する状態で、同じ値46を加算する場
合を示す。
方の寄与の重み付け平均が、現在の部分28に対して、中間層予測信号とエンハンスメン
ト層内部予測信号とが、エンハンスメント層予測信号42に寄与する重み付けが、図7に
44で図式的に示すように、空間周波数成分を異なって変化する方法で、エンハンスメン
ト層予測信号42を得るために形成される。図7は、例示的に、あらゆる空間周波数成分
に対して、予測信号34と38が最終予測信号に寄付する重み付けが、全てのスペクトル
的成分に対して、しかしながら、予測信号34に適用された重み付けと予測信号39に適
用された重み付けとの間の比をスペクトル的に変化する状態で、同じ値46を加算する場
合を示す。
一方、予測信号42が、現在の部分28に、エンハンスメント層信号400によって直
接使用される。あるいはまた、残留信号は、現在の部分28の再構成されたバージョン5
4の中で、例えば図7で示される加算のように予測信号42との結合50によって、もた
らされる現在の部分28のエンハンスメント層副ストリーム6bの中に提供される。中間
的注意として、スケーラブルビデオエンコーダとデコーダの両方は、予測残留を符号化/
復号化するために、変換符号化を使用して、予測的符号化を使用するハイブリッドビデオ
デコーダ/エンコーダである、ことが注意される。
接使用される。あるいはまた、残留信号は、現在の部分28の再構成されたバージョン5
4の中で、例えば図7で示される加算のように予測信号42との結合50によって、もた
らされる現在の部分28のエンハンスメント層副ストリーム6bの中に提供される。中間
的注意として、スケーラブルビデオエンコーダとデコーダの両方は、予測残留を符号化/
復号化するために、変換符号化を使用して、予測的符号化を使用するハイブリッドビデオ
デコーダ/エンコーダである、ことが注意される。
図6,7の記述をまとめると、エンハンスメント層副ストリーム6bが、現在の部分2
8に対して、空間的および/または時間的予測30,32を制御するための内部予測パラ
メータ56と、任意に、スペクトル重み付け平均の形成41を制御するための重み付けパ
ラメータ58と、残留信号48に合図するための残留情報59とを含む。一方、スケーラ
ブルビデオエンコーダは、それに従って、これらのパラメータ56,58,59の全てを
決定し、エンハンスメント層副ストリーム6bの中に、パラメータ56,58,59を差
し込む。スケーラブルビデオデコーダは、上に概説したように、現在の部分28を再構成
するためにパラメータ56,58,59を使用する。これらの要素56,58,59の全
てが、量子化(すなわち、量子化として比/歪費用関数を使用する)のいくつかを受ける
。そして、それに従って、スケーラブルビデオエンコーダは、これらのパラメータ/要素
を決定する。興味あることに、エンコーダ2は、現在の部分28に対して再構成されたバ
ージョン54を得るために、例えば、符号化/復号化の順序で続く、エンハンスメント層
信号400の部分のためのどんな予測の基礎としても役立つように、このようにして決め
られたパラメータ/要素56,58,59を使用する。
8に対して、空間的および/または時間的予測30,32を制御するための内部予測パラ
メータ56と、任意に、スペクトル重み付け平均の形成41を制御するための重み付けパ
ラメータ58と、残留信号48に合図するための残留情報59とを含む。一方、スケーラ
ブルビデオエンコーダは、それに従って、これらのパラメータ56,58,59の全てを
決定し、エンハンスメント層副ストリーム6bの中に、パラメータ56,58,59を差
し込む。スケーラブルビデオデコーダは、上に概説したように、現在の部分28を再構成
するためにパラメータ56,58,59を使用する。これらの要素56,58,59の全
てが、量子化(すなわち、量子化として比/歪費用関数を使用する)のいくつかを受ける
。そして、それに従って、スケーラブルビデオエンコーダは、これらのパラメータ/要素
を決定する。興味あることに、エンコーダ2は、現在の部分28に対して再構成されたバ
ージョン54を得るために、例えば、符号化/復号化の順序で続く、エンハンスメント層
信号400の部分のためのどんな予測の基礎としても役立つように、このようにして決め
られたパラメータ/要素56,58,59を使用する。
異なる可能性が、重み付けパラメータ58と、それらがスペクトル重み付け平均の形成
41を制御する方法とのために存在する。例えば、重み付けパラメータ58が、現在の部
分28に対して、2つの状態(すなわち、今までに説明したスペクトル重み付け平均の形
成を活性化する一方の状態、および、中間層予測信号38の寄与を非活性化する他方の状
態)の1つにのみ合図する。その結果、最終エンハンスメント層予測信号42は、その場
合、エンハンスメント層内部予測信号34によってのみ作成される。現在の部分28のた
めの重み付けパラメータ58は、一方のスペクトル的重み付け平均形成の活性化と、他方
の単独でエンハンスメント層予測信号42を形成する中間層予測信号39との間を切り換
わる。また、重み付けパラメータ58は、言及した3つの状態/2者択一の1つに合図す
るように設計される。あるいはまた、重み付けパラメータ58は、さらに、現在の部分2
8に対して、予測信号34と39が最終予測信号42に寄与する重み付けの間の比率のス
ペクトル変化に関して、スペクトル重み付け平均形成41を制御する。後で、ペクトル重
み付け平均形成41が、予測信号34と39を加算する前の予測信号34と39の1つま
たは両方を、例えば、ハイパスフィルタおよび/またはローパスフィルタを使用して、フ
ィルタにかけることを伴う、ことが説明される。その場合、重み付けパラメータ58は、
現在の部分28の予測に対して使用されるべきフィルタのためのフィルタ特性に合図する
。2者択一として、重み付けパラメータ58は、スペクトル重み付け平均形成41におけ
るスペクトル重み付けが、変換領域の中のスペクトル成分の個々の重み付けによって達成
され、従って、この場合、重み付けパラメータ58は、これらのスペクトル成分の個々の
重み付けの値を合図/設定できる、ということが以下で説明される。
41を制御する方法とのために存在する。例えば、重み付けパラメータ58が、現在の部
分28に対して、2つの状態(すなわち、今までに説明したスペクトル重み付け平均の形
成を活性化する一方の状態、および、中間層予測信号38の寄与を非活性化する他方の状
態)の1つにのみ合図する。その結果、最終エンハンスメント層予測信号42は、その場
合、エンハンスメント層内部予測信号34によってのみ作成される。現在の部分28のた
めの重み付けパラメータ58は、一方のスペクトル的重み付け平均形成の活性化と、他方
の単独でエンハンスメント層予測信号42を形成する中間層予測信号39との間を切り換
わる。また、重み付けパラメータ58は、言及した3つの状態/2者択一の1つに合図す
るように設計される。あるいはまた、重み付けパラメータ58は、さらに、現在の部分2
8に対して、予測信号34と39が最終予測信号42に寄与する重み付けの間の比率のス
ペクトル変化に関して、スペクトル重み付け平均形成41を制御する。後で、ペクトル重
み付け平均形成41が、予測信号34と39を加算する前の予測信号34と39の1つま
たは両方を、例えば、ハイパスフィルタおよび/またはローパスフィルタを使用して、フ
ィルタにかけることを伴う、ことが説明される。その場合、重み付けパラメータ58は、
現在の部分28の予測に対して使用されるべきフィルタのためのフィルタ特性に合図する
。2者択一として、重み付けパラメータ58は、スペクトル重み付け平均形成41におけ
るスペクトル重み付けが、変換領域の中のスペクトル成分の個々の重み付けによって達成
され、従って、この場合、重み付けパラメータ58は、これらのスペクトル成分の個々の
重み付けの値を合図/設定できる、ということが以下で説明される。
追加的に、または、二者択一的に、現在の部分28のための加重(重み付け)パラメー
タは、ステップ41の中であるペクトル加重が、変換領域または空間領域の中で実行され
るか否かを合図できる。
タは、ステップ41の中であるペクトル加重が、変換領域または空間領域の中で実行され
るか否かを合図できる。
図9は空間領域の中のスペクトル重み付け平均構成を実行するための実施の形態を説明
する。予測信号39と34は、現在の部分28の画素ラスタ(raster)と一致して
いるそれぞれの画素配列の形式で得られるように図示されている。スペクトル重み付け平
均構成を実行するために、予測信号34と39の両方の画素配列は、フィルタリングを受
けるように示される。図9は、例えばFIRフィルタリングを実行するために、予測信号
34と39の画素配列を移動しているフィルタ核(kernel)62と64を示すこと
によって、実例としてフィルタリングを図示する。しかしながら、また、IIRフィルタ
リングも可能である。さらに、予測信号34と39の1つのみが、フィルタリングを受け
てもよい。両方のフィルタ62と64の伝達関数は異なっているので、予測信号39と3
4の画素配列のフィルタリングの結果の加算66は、スペクトル重み付け平均構成の結果
、すなわち、エンハンスメント層予測信号42をもたらす。言い換えれば、加算66は、
それぞれフィルタ62と64を使用して、フィルタがかけられた予測信号39と34の中
の共同配置されたサンプルを容易に加算する。その結果、62~66はスペクトル重み付
け平均構成41をもたらす。図9は、変換係数の形式で存在している残留情報59の場合
、変換領域の中の残留信号48に合図し、逆変換68が画素配列70の形式で空間領域を
もたらすために使用され、その結果、再構成されたバージョン55をもたらしている結合
52が、残留信号アレイ70とエンハンスメント層予測信号42との簡単な画素的付加に
よって実現されることを図示する。
する。予測信号39と34は、現在の部分28の画素ラスタ(raster)と一致して
いるそれぞれの画素配列の形式で得られるように図示されている。スペクトル重み付け平
均構成を実行するために、予測信号34と39の両方の画素配列は、フィルタリングを受
けるように示される。図9は、例えばFIRフィルタリングを実行するために、予測信号
34と39の画素配列を移動しているフィルタ核(kernel)62と64を示すこと
によって、実例としてフィルタリングを図示する。しかしながら、また、IIRフィルタ
リングも可能である。さらに、予測信号34と39の1つのみが、フィルタリングを受け
てもよい。両方のフィルタ62と64の伝達関数は異なっているので、予測信号39と3
4の画素配列のフィルタリングの結果の加算66は、スペクトル重み付け平均構成の結果
、すなわち、エンハンスメント層予測信号42をもたらす。言い換えれば、加算66は、
それぞれフィルタ62と64を使用して、フィルタがかけられた予測信号39と34の中
の共同配置されたサンプルを容易に加算する。その結果、62~66はスペクトル重み付
け平均構成41をもたらす。図9は、変換係数の形式で存在している残留情報59の場合
、変換領域の中の残留信号48に合図し、逆変換68が画素配列70の形式で空間領域を
もたらすために使用され、その結果、再構成されたバージョン55をもたらしている結合
52が、残留信号アレイ70とエンハンスメント層予測信号42との簡単な画素的付加に
よって実現されることを図示する。
再び、予測が、デコーダとエンコーダの中でそれぞれ再構成のための予測を使用して、
スケーラブルビデオエンコーダとデコーダによって実行されることを思い出してください
。
スケーラブルビデオエンコーダとデコーダによって実行されることを思い出してください
。
図10は、変換領域の中でどのようにスペクトル重み付け平均構成が実行されるかを例
示的に示す。ここで、予測信号39と34の画素配列は、それぞれ変換72と74を受け
る。その結果、それぞれスペクトル分解76と78をもたらす。各スペクトル分解76と
78は、1スペクトル成分当たり1つの変換係数で、変換係数アレイが作成される。それ
ぞれの変換係数ブロック76と78は、重み付けの対応するブロック、つまり、ブロック
82と84に掛けられる。その結果、スペクトル成分毎に、ブロック76と78の変換係
数は個別に重み付けされる。スペクトル成分毎に、ブロック82と84の加重値は、全て
のスペクトル成分に共通の値を加算する。しかし、これは義務的ではない。事実上、ブロ
ック76と82との間の乗数86と、ブロック78とブロック84の間の乗数88とは、
それぞれ変換領域の中のスペクトルフィルタリングを表す。そして、変換係数/スペクト
ル成分的追加90は、変換係数の1ブロックの形式でエンハンスメント層予測信号42の
変換領域バージョンをもたらすために、スペクトル重み付け平均構成41を終了する。図
10に示すように、変換係数ブロックの形式で残留信号48に合図する残留信号59の場
合、残留信号59は、変換領域の中の現在の部分28の再構成されたバージョンをもたら
すために、エンハンスメント層予測信号42を表す変換係数ブロックと、容易に変換係数
的加算結合(または別の結合)52がされる。従って、結合52の付加結果に適用される
逆変換84は、現在の部分28を再構成している画素配列、すなわち、再構成されたバー
ジョン54をもたらす。
示的に示す。ここで、予測信号39と34の画素配列は、それぞれ変換72と74を受け
る。その結果、それぞれスペクトル分解76と78をもたらす。各スペクトル分解76と
78は、1スペクトル成分当たり1つの変換係数で、変換係数アレイが作成される。それ
ぞれの変換係数ブロック76と78は、重み付けの対応するブロック、つまり、ブロック
82と84に掛けられる。その結果、スペクトル成分毎に、ブロック76と78の変換係
数は個別に重み付けされる。スペクトル成分毎に、ブロック82と84の加重値は、全て
のスペクトル成分に共通の値を加算する。しかし、これは義務的ではない。事実上、ブロ
ック76と82との間の乗数86と、ブロック78とブロック84の間の乗数88とは、
それぞれ変換領域の中のスペクトルフィルタリングを表す。そして、変換係数/スペクト
ル成分的追加90は、変換係数の1ブロックの形式でエンハンスメント層予測信号42の
変換領域バージョンをもたらすために、スペクトル重み付け平均構成41を終了する。図
10に示すように、変換係数ブロックの形式で残留信号48に合図する残留信号59の場
合、残留信号59は、変換領域の中の現在の部分28の再構成されたバージョンをもたら
すために、エンハンスメント層予測信号42を表す変換係数ブロックと、容易に変換係数
的加算結合(または別の結合)52がされる。従って、結合52の付加結果に適用される
逆変換84は、現在の部分28を再構成している画素配列、すなわち、再構成されたバー
ジョン54をもたらす。
前述したように、現在の部分28のためのエンハンスメント層副ストリーム6bの中の
現在のパラメータが、平均構成41が図10に示した変換領域、または、図9に従った空
間領域の中で実行されるかどうかのために合図する。例えば、仮に、残留情報59は、現
在の部分28のためのどんな変換係数ブロックの欠如も示す。また、空間領域が使用され
る。あるいは、加重パラメータ58は、変換係数を含む残留情報59または変換係数を含
まない残留情報59の如何に関係なく両方の領域を切り換える。
現在のパラメータが、平均構成41が図10に示した変換領域、または、図9に従った空
間領域の中で実行されるかどうかのために合図する。例えば、仮に、残留情報59は、現
在の部分28のためのどんな変換係数ブロックの欠如も示す。また、空間領域が使用され
る。あるいは、加重パラメータ58は、変換係数を含む残留情報59または変換係数を含
まない残留情報59の如何に関係なく両方の領域を切り換える。
その後、層中間エンハンスメント層内部予測信号を得るために、差信号が、エンハンス
メント層信号の既に再構成された部分と中間層予測信号との間で、計算されて管理される
ことが、説明される。第1の部分の差信号に関する空間予測はエンハンスメント層信号の
一部分に共同配置された第1の部分で差信号の空間予測は、現在、差信号の第2の部分か
ら再構成される。エンハンスメント層信号の第1の部分に空間的に隣接して、かつ、既に
再構成された部分に属して、その時、差信号を空間的に予測するために使用される。ある
いはまた、第1の部分の差信号の時間予測はエンハンスメント層信号の部分に共同配置さ
れて、現在、エンハンスメント層信号の以前に再構成されたフレームに属しなが差信号の
第2の部分から再構成されるのは、時間的に予測された差信号を得るために使用される。
中間層予測信号と予測された差信号とは、エンハンスメント層内部予測信号を得るために
使用され、次に、中間層予測信号と結合される。
メント層信号の既に再構成された部分と中間層予測信号との間で、計算されて管理される
ことが、説明される。第1の部分の差信号に関する空間予測はエンハンスメント層信号の
一部分に共同配置された第1の部分で差信号の空間予測は、現在、差信号の第2の部分か
ら再構成される。エンハンスメント層信号の第1の部分に空間的に隣接して、かつ、既に
再構成された部分に属して、その時、差信号を空間的に予測するために使用される。ある
いはまた、第1の部分の差信号の時間予測はエンハンスメント層信号の部分に共同配置さ
れて、現在、エンハンスメント層信号の以前に再構成されたフレームに属しなが差信号の
第2の部分から再構成されるのは、時間的に予測された差信号を得るために使用される。
中間層予測信号と予測された差信号とは、エンハンスメント層内部予測信号を得るために
使用され、次に、中間層予測信号と結合される。
以下の図に対して、図1~図4に対して前述したようなスケーラブルビデオエンコーダ
またはデコーダが、どのように応用の別の面に従って本発明の実施の形態を形成するため
に実行されるかが記載される。
またはデコーダが、どのように応用の別の面に従って本発明の実施の形態を形成するため
に実行されるかが記載される。
この内容について説明するために、図11を参照する。図11は現在の部分28の空間
予測30を実行する可能性を示す。その結果、図11の以下の記述は、図6~図10に関
する記述と組み合わされる。特に、以下に説明される内容は、「実施例」XとYに言及す
ることによって、図示された実現の例に対して後で説明される。
予測30を実行する可能性を示す。その結果、図11の以下の記述は、図6~図10に関
する記述と組み合わされる。特に、以下に説明される内容は、「実施例」XとYに言及す
ることによって、図示された実現の例に対して後で説明される。
図11に示された状況は、図6に示されたものに対応する。すなわち、ベース層信号2
00とエンハンスメント層信号400が示される。既に符号化/復号化された部分が、斜
線を使用して示されている。エンハンスメント層信号400の中で、現在、符号化/復号
化されるべき部分は、隣接するブロック92と94を有している。ここで、例示的に、現
在のブロック28と同じサイズを有している両方のブロック92と94に対して、現在の
部分28の上側にブロック92が描かれ、左側にブロック94が描かれている。しかしな
がら、サイズの一致は義務的ではない。むしろ、エンハンスメント層信号400の画像2
2bが副分割されているブロックの部分は、異なるサイズを有している。それらは四角形
に制限さえされていない。それらは、長方形または他の形であってもよい。さらに、現在
のブロック28は、図11に明確に表現されていない隣接ブロックを有している。しかし
ながら、隣接ブロックは、まだ復号化/符号化されていない。すなわち、隣接ブロックは
、符号化/復号化の順序で続き、その結果、予測のために利用できない。これを超えて、
符号化/復号化の順序に従って既に符号化/復号化されたブロック92と94より別のブ
ロック(現在のブロック28に隣接する、例えば現在のブロック28の左上隅で斜めに隣
接するブロック96のようなブロック)が存在する。しかし、ブロック92と94は、こ
こで考慮された例における内部予測30を受ける現在のブロック28のための内部予測パ
ラメータを予測する役割を果たす、予め決められた隣接するブロックである。そのような
予め決められた隣接するブロックの数は、2つに制限されない。それは、より多くても、
または1つでもよい。
00とエンハンスメント層信号400が示される。既に符号化/復号化された部分が、斜
線を使用して示されている。エンハンスメント層信号400の中で、現在、符号化/復号
化されるべき部分は、隣接するブロック92と94を有している。ここで、例示的に、現
在のブロック28と同じサイズを有している両方のブロック92と94に対して、現在の
部分28の上側にブロック92が描かれ、左側にブロック94が描かれている。しかしな
がら、サイズの一致は義務的ではない。むしろ、エンハンスメント層信号400の画像2
2bが副分割されているブロックの部分は、異なるサイズを有している。それらは四角形
に制限さえされていない。それらは、長方形または他の形であってもよい。さらに、現在
のブロック28は、図11に明確に表現されていない隣接ブロックを有している。しかし
ながら、隣接ブロックは、まだ復号化/符号化されていない。すなわち、隣接ブロックは
、符号化/復号化の順序で続き、その結果、予測のために利用できない。これを超えて、
符号化/復号化の順序に従って既に符号化/復号化されたブロック92と94より別のブ
ロック(現在のブロック28に隣接する、例えば現在のブロック28の左上隅で斜めに隣
接するブロック96のようなブロック)が存在する。しかし、ブロック92と94は、こ
こで考慮された例における内部予測30を受ける現在のブロック28のための内部予測パ
ラメータを予測する役割を果たす、予め決められた隣接するブロックである。そのような
予め決められた隣接するブロックの数は、2つに制限されない。それは、より多くても、
または1つでもよい。
スケーラブルビデオエンコーダとスケーラブルビデオデコーダは、既に符号化された隣
接するブロックの組から、予め決められた隣接するブロックの組(ここでは、ブロック9
2,94)を決定する。ここに、ブロック92~96は、例えば、その左上のサンプルの
ように現在の部分28の中の予め決められたサンプル位置98に依存する。例えば、現在
の部分28のそれらの既に符号化された隣接するブロックのみが、予め決められたサンプ
ル位置98に直に隣接するサンプル位置を含む「予め決められた隣接するブロック」の組
を形成する。どのような場合でも、隣接する既に符号化/復号化されたブロックは、現在
のブロック28の領域が空間的に予測されるべきサンプル値に基づいた現在のブロック2
8に隣接するサンプル102を含む。このために、56などの空間予測パラメータは、エ
ンハンスメント層副ストリーム6bの中で合図される。例えば、現在のブロック28のた
めの空間予測パラメータは、サンプル102のサンプル値が現在のブロック28の領域の
中にコピーされるべき空間的方向を指示する。
接するブロックの組から、予め決められた隣接するブロックの組(ここでは、ブロック9
2,94)を決定する。ここに、ブロック92~96は、例えば、その左上のサンプルの
ように現在の部分28の中の予め決められたサンプル位置98に依存する。例えば、現在
の部分28のそれらの既に符号化された隣接するブロックのみが、予め決められたサンプ
ル位置98に直に隣接するサンプル位置を含む「予め決められた隣接するブロック」の組
を形成する。どのような場合でも、隣接する既に符号化/復号化されたブロックは、現在
のブロック28の領域が空間的に予測されるべきサンプル値に基づいた現在のブロック2
8に隣接するサンプル102を含む。このために、56などの空間予測パラメータは、エ
ンハンスメント層副ストリーム6bの中で合図される。例えば、現在のブロック28のた
めの空間予測パラメータは、サンプル102のサンプル値が現在のブロック28の領域の
中にコピーされるべき空間的方向を指示する。
どのような場合でも、少なくとも、時間的に対応する画像22aの関係する空間的に対
応する領域に関する限り、上で説明したように、ブロック的な予測を使用し、例えば、空
間予測モードと時間予測モードとの間のブロック的な選択を使用して、現在のブロック2
8を空間的に予測する時、スケーラブルビデオデコーダ/エンコーダは、ベース層副スト
リーム6aを使用して、ベース層200を既に再構成している(エンコーダの場合には、
符号化されている)。
応する領域に関する限り、上で説明したように、ブロック的な予測を使用し、例えば、空
間予測モードと時間予測モードとの間のブロック的な選択を使用して、現在のブロック2
8を空間的に予測する時、スケーラブルビデオデコーダ/エンコーダは、ベース層副スト
リーム6aを使用して、ベース層200を既に再構成している(エンコーダの場合には、
符号化されている)。
図11において、ベース層信号200の時間で並べられた画像22aが副分割される数
ブロック104は、例示的に表現された現在の部分28に局所的に対応する領域の中、お
よび、その周りに横たわる。それはちょうどエンハンスメント層信号400の中の空間的
に予測されたブロックの場合である。空間予測パラメータは、ベース層信号200の中で
、それらのブロック104のためのベース層副ストリームの中に含まれる、または、合図
される。空間予測モードの選択は、ベース層信号に対して合図される。
ブロック104は、例示的に表現された現在の部分28に局所的に対応する領域の中、お
よび、その周りに横たわる。それはちょうどエンハンスメント層信号400の中の空間的
に予測されたブロックの場合である。空間予測パラメータは、ベース層信号200の中で
、それらのブロック104のためのベース層副ストリームの中に含まれる、または、合図
される。空間予測モードの選択は、ベース層信号に対して合図される。
ここで、例示的に、空間的な内部層予測30が選択されたブロック28に関する符号化
データストリームから、エンハンスメント層信号の再構成を許すために、内部予測パラメ
ータが、以下のビットストリームの中で使用され、符号化される。
データストリームから、エンハンスメント層信号の再構成を許すために、内部予測パラメ
ータが、以下のビットストリームの中で使用され、符号化される。
内部予測パラメータは、全ての可能な内部予測パラメータのかなり小さいサブ組である
「最もありそうな内部予測パラメータ」の概念を使用してしばしば符号化される。「最も
ありそうな内部予測パラメータ」は、。例えば、最もありそうな内部予測パラメータの組
は、1つ、2つまたは3つの内部予測パラメータを含む。一方、例えば、全ての可能な内
部予測パラメータの組は、35個の内部予測パラメータを含むことができる。仮に、内部
予測パラメータが、最もありそうな内部予測パラメータの組に含まれているならば、それ
は、ビットストリームの中で、少ない数のビットで、合図される。仮に、内部予測パラメ
ータが、最もありそうな内部予測パラメータの組に含まれていないならば、ビットストリ
ームの中のその合図は、より多くのビットを必要とする。従って、現在の内部予測された
ブロックのための内部予測パラメータに合図するために、構文要素に費やされるべきビッ
トの量は、最もありそうな、または、たぶん有利な内部予測パラメータの組の品質に依存
する。この概念を使用して、平均的に、低い数のビットが内部予測パラメータを符号化す
るために必要である。最もありそうな内部予測パラメータの組が、適当に得られることが
評価される。
「最もありそうな内部予測パラメータ」の概念を使用してしばしば符号化される。「最も
ありそうな内部予測パラメータ」は、。例えば、最もありそうな内部予測パラメータの組
は、1つ、2つまたは3つの内部予測パラメータを含む。一方、例えば、全ての可能な内
部予測パラメータの組は、35個の内部予測パラメータを含むことができる。仮に、内部
予測パラメータが、最もありそうな内部予測パラメータの組に含まれているならば、それ
は、ビットストリームの中で、少ない数のビットで、合図される。仮に、内部予測パラメ
ータが、最もありそうな内部予測パラメータの組に含まれていないならば、ビットストリ
ームの中のその合図は、より多くのビットを必要とする。従って、現在の内部予測された
ブロックのための内部予測パラメータに合図するために、構文要素に費やされるべきビッ
トの量は、最もありそうな、または、たぶん有利な内部予測パラメータの組の品質に依存
する。この概念を使用して、平均的に、低い数のビットが内部予測パラメータを符号化す
るために必要である。最もありそうな内部予測パラメータの組が、適当に得られることが
評価される。
通常、最もありそうな内部予測パラメータの組は、それが、直接に隣接するブロックの
内部予測パラメータを含む、および/または、追加的に、例えば初期設定パラメータの形
で内部予測パラメータをしばしば使用する方法で選択される。例えば、隣接するブロック
の主な勾配方向が同じであるので、最もありそうな内部予測パラメータの組の中の隣接す
るブロックの内部予測パラメータを含むことは、一般に有利である。
内部予測パラメータを含む、および/または、追加的に、例えば初期設定パラメータの形
で内部予測パラメータをしばしば使用する方法で選択される。例えば、隣接するブロック
の主な勾配方向が同じであるので、最もありそうな内部予測パラメータの組の中の隣接す
るブロックの内部予測パラメータを含むことは、一般に有利である。
しかしながら、仮に、隣接するブロックが、空間内部予測モードで符号化されないなら
ば、それらのパラメータは、デコーダ側で利用できない。
ば、それらのパラメータは、デコーダ側で利用できない。
スケーラブル符号化において、共同配置されたベース層ブロックの内部予測パラメータ
を使用することは、しかしながら可能である。従って、以下に概説される実施例に従って
、この状況が、空間内部予測モードの中の符号化されない隣接するブロックの場合に、共
同配置されたベース層ブロックの内部予測パラメータを使用して利用される。
を使用することは、しかしながら可能である。従って、以下に概説される実施例に従って
、この状況が、空間内部予測モードの中の符号化されない隣接するブロックの場合に、共
同配置されたベース層ブロックの内部予測パラメータを使用して利用される。
その結果、図11に従って、現在のエンハンスメント層ブロックのためのたぶん有利な
内部予測パラメータの組は、予め決められた隣接するブロックの内部予測パラメータを点
検することによって、そして、例えば、それぞれの予め決められた隣接するブロックが、
内部予測モードで符号化されないので、予め決められた隣接するブロックが、それに関係
した適当な内部予測パラメータを有さない場合に、ベース層の中の共同配置されたブロッ
クに例外的に再区分することによって、構成される。
内部予測パラメータの組は、予め決められた隣接するブロックの内部予測パラメータを点
検することによって、そして、例えば、それぞれの予め決められた隣接するブロックが、
内部予測モードで符号化されないので、予め決められた隣接するブロックが、それに関係
した適当な内部予測パラメータを有さない場合に、ベース層の中の共同配置されたブロッ
クに例外的に再区分することによって、構成される。
先ず、現在のブロック28のブロック92または94などの予め決められた隣接するブ
ロックが、空間内部予測モードを使用して予測されたか否かをチェックされる。すなわち
、空間内部予測モードが、その隣接するブロックのために選択されたか否かをチェックさ
れる。それによって、その隣接するブロックの内部予測パラメータが、現在のブロック2
8のためのたぶん有利な内部予測パラメータの組、または、もしあれば、代替として、ベ
ース層の共同配置されたブロック108の内部予測パラメータの中に含まれる。この過程
は、予め決められた隣接するブロック92と94のそれぞれに対して実行できる。
ロックが、空間内部予測モードを使用して予測されたか否かをチェックされる。すなわち
、空間内部予測モードが、その隣接するブロックのために選択されたか否かをチェックさ
れる。それによって、その隣接するブロックの内部予測パラメータが、現在のブロック2
8のためのたぶん有利な内部予測パラメータの組、または、もしあれば、代替として、ベ
ース層の共同配置されたブロック108の内部予測パラメータの中に含まれる。この過程
は、予め決められた隣接するブロック92と94のそれぞれに対して実行できる。
例えば、仮に、それぞれの予め決められた隣接するブロックが、空間内部予測ブロック
でないならば、初期設定予測のようなものを使用して、代わりに、ベース層信号200の
ブロック108の内部予測パラメータが、現在のブロック28に共同配置されている、現
在のブロック28のためのたぶん有利な予測パラメータの組の中に含まれる。例えば、共
同配置されたブロック108は、現在のブロック28の予め決められたサンプル位置98
を使用して決定される。つまり、ブロック108は、ベース層信号200の時間的に並べ
られた画像22aの中の予め決められたサンプル位置98に局所的に対応している位置1
06をカバーする。当然に、予めベース層信号200の中のこの共同配置されたブロック
108が、実際に空間内部予測ブロックであるか否か、の更なるチェックが実行される。
図11の場合において、これがその場合であることが例示的に説明される。しかしながら
、仮に、共同配置されたブロックも、内部予測モードの中で符号化されないならば、たぶ
ん有利な内部予測パラメータの組が、その予め決められた隣接するブロックのために少し
の寄与も無く残される。または、初期設定内部予測パラメータが、代替として代わりに使
用される。すなわち、初期設定内部予測パラメータは、たぶん有利な内部予測パラメータ
の組に挿入される。
でないならば、初期設定予測のようなものを使用して、代わりに、ベース層信号200の
ブロック108の内部予測パラメータが、現在のブロック28に共同配置されている、現
在のブロック28のためのたぶん有利な予測パラメータの組の中に含まれる。例えば、共
同配置されたブロック108は、現在のブロック28の予め決められたサンプル位置98
を使用して決定される。つまり、ブロック108は、ベース層信号200の時間的に並べ
られた画像22aの中の予め決められたサンプル位置98に局所的に対応している位置1
06をカバーする。当然に、予めベース層信号200の中のこの共同配置されたブロック
108が、実際に空間内部予測ブロックであるか否か、の更なるチェックが実行される。
図11の場合において、これがその場合であることが例示的に説明される。しかしながら
、仮に、共同配置されたブロックも、内部予測モードの中で符号化されないならば、たぶ
ん有利な内部予測パラメータの組が、その予め決められた隣接するブロックのために少し
の寄与も無く残される。または、初期設定内部予測パラメータが、代替として代わりに使
用される。すなわち、初期設定内部予測パラメータは、たぶん有利な内部予測パラメータ
の組に挿入される。
従って、仮に、現在のブロック28に共同配置されたブロック108が、空間的に内部
予測であれば、ベース層副ストリーム6aの中で合図されたその内部予測パラメータは、
一種の代替として、内部予測パラメータが時間予測モードのような別の予測モードを使用
して符号化されるため、どんな内部予測パラメータも有していない、現在のブロック28
の予め決められた隣接するブロック92または94のために使用される。
予測であれば、ベース層副ストリーム6aの中で合図されたその内部予測パラメータは、
一種の代替として、内部予測パラメータが時間予測モードのような別の予測モードを使用
して符号化されるため、どんな内部予測パラメータも有していない、現在のブロック28
の予め決められた隣接するブロック92または94のために使用される。
別の実施の形態に従って、所定の場合、仮に、それぞれの予め決められた隣接するブロ
ックが、内部予測モードのものであっても、予め決められた隣接するブロックの内部予測
パラメータは、共同配置されたベース層ブロックの内部予測パラメータによって代替えさ
れる。例えば、内部予測パラメータが所定の基準を満たしているか否かのような更なるチ
ェックが、内部予測モードのどんな予め決められた隣接するブロックに対しても実行され
る。仮に、所定の基準が、隣接するブロックの内部予測パラメータによって満たされてい
ない、しかし、同じ基準が、共同配置されたベース層ブロックの内部予測パラメータによ
って満たされているならば、代替が、内部符号化された非常に隣接するブロックにも関わ
らず実行される。例えば、仮に、隣接するブロックの内部予測パラメータが、角度(an
gular)内部予測モード(しかし、例えばDCまたは平面内部予測モード)を表わな
い、しかし、共同配置されたベース層ブロックの内部予測パラメータが角度内部予測モー
ドを表わすならば、隣接するブロックの内部予測パラメータが、ベース層ブロックの内部
予測パラメータによって取り替えられる。
ックが、内部予測モードのものであっても、予め決められた隣接するブロックの内部予測
パラメータは、共同配置されたベース層ブロックの内部予測パラメータによって代替えさ
れる。例えば、内部予測パラメータが所定の基準を満たしているか否かのような更なるチ
ェックが、内部予測モードのどんな予め決められた隣接するブロックに対しても実行され
る。仮に、所定の基準が、隣接するブロックの内部予測パラメータによって満たされてい
ない、しかし、同じ基準が、共同配置されたベース層ブロックの内部予測パラメータによ
って満たされているならば、代替が、内部符号化された非常に隣接するブロックにも関わ
らず実行される。例えば、仮に、隣接するブロックの内部予測パラメータが、角度(an
gular)内部予測モード(しかし、例えばDCまたは平面内部予測モード)を表わな
い、しかし、共同配置されたベース層ブロックの内部予測パラメータが角度内部予測モー
ドを表わすならば、隣接するブロックの内部予測パラメータが、ベース層ブロックの内部
予測パラメータによって取り替えられる。
現在のブロック28のための中間予測パラメータは、その時、現在のブロック28のた
めのエンハンスメント層副ストリーム6b、および、たぶん有利な内部予測パラメータの
組などの符号化データストリームの中に存在する構文要素に基づいて決定される。すなわ
ち、構文要素は、たぶん有利な内部予測パラメータの組のメンバーである現在のブロック
28のための中間予測パラメータの場合に、たぶん有利な内部予測パラメータの組に繋が
らない、可能な内部予測パラメータの組の残りのメンバーの場合より、少ないビットを使
用して符号化される。
めのエンハンスメント層副ストリーム6b、および、たぶん有利な内部予測パラメータの
組などの符号化データストリームの中に存在する構文要素に基づいて決定される。すなわ
ち、構文要素は、たぶん有利な内部予測パラメータの組のメンバーである現在のブロック
28のための中間予測パラメータの場合に、たぶん有利な内部予測パラメータの組に繋が
らない、可能な内部予測パラメータの組の残りのメンバーの場合より、少ないビットを使
用して符号化される。
可能な内部予測パラメータの組は、現在のブロックが、それぞれのモード/パラメータ
の角度方向に沿ってコピーすることによって、既に符号化/復号化された隣接するサンプ
ルからコピーすることによって満たされることに従ういくつかの角度方向のモードと、現
在のブロックのサンプルが、例えばいくつかの平均によって、既に符号化/復号化された
隣接するサンプルなどに基づいて決められた一定値にセットされることに従う1つのDC
モードと、現在のブロックのサンプルが、例えば、既に符号化/復号化された隣接するサ
ンプルに基づいて決められる、xとyのスロープおよび遮断の一次関数をフォローする値
分布にセットされることに従う平面モードとを含む。
の角度方向に沿ってコピーすることによって、既に符号化/復号化された隣接するサンプ
ルからコピーすることによって満たされることに従ういくつかの角度方向のモードと、現
在のブロックのサンプルが、例えばいくつかの平均によって、既に符号化/復号化された
隣接するサンプルなどに基づいて決められた一定値にセットされることに従う1つのDC
モードと、現在のブロックのサンプルが、例えば、既に符号化/復号化された隣接するサ
ンプルに基づいて決められる、xとyのスロープおよび遮断の一次関数をフォローする値
分布にセットされることに従う平面モードとを含む。
図12は、ベース層の共同配置されたブロック108から得られた空間予測パラメータ
の代替が、エンハンスメント層副ストリームの中で合図された構文要素と共に、どのよう
に使用されるかについての可能性を示す。図12は、拡大した方法で、隣接する既に符号
化/復号化されたサンプル102と予め決められた隣接するブロック92および94と共
に、現在のブロック28を示す。また、図12は、共同配置されたブロック108の空間
予測パラメータによって示される角度の方向112を例示的に示す。
の代替が、エンハンスメント層副ストリームの中で合図された構文要素と共に、どのよう
に使用されるかについての可能性を示す。図12は、拡大した方法で、隣接する既に符号
化/復号化されたサンプル102と予め決められた隣接するブロック92および94と共
に、現在のブロック28を示す。また、図12は、共同配置されたブロック108の空間
予測パラメータによって示される角度の方向112を例示的に示す。
現在のブロック28のためにエンハンスメント層副ストリーム6bの中で合図された構
文要素114は、例えば図13に示されるように、条件付きで符号化されたインデックス
118を、ここに例示的に、角度方向124として図示された、可能な有利な内部予測パ
ラメータの結果であるリスト122の中に合図することができる。、または、仮に、実際
の内部予測パラメータ116が、最もありそうな組122の中になく、127に示される
ように、可能性として除外される可能な内部予測モードのリスト125の中のインデック
ス123であるならば、リスト122の候補は、その結果、実際の内部予測パラメータ1
16を特定する。構文要素の符号化は、リスト122の中に属する実際の内部予測パラメ
ータの場合、より少ないビットを消費する。例えば、構文要素は旗(flag)とインデ
ックス部とを含む。旗は、リスト122のメンバーを含めるか、または、除外するか、イ
ンデックスがリスト122またはリスト125のいずれかを指摘するか、つまり、リスト
122のメンバーに含めるかまたは除外するかを示す。構文要素は、リスト122のメン
バー124またはエスケープコードの一つを特定する分野を含む。そして、構文要素は、
エスケープコードの場合、リスト122のメンバーを含むまたは除外するリスト125か
らメンバーを特定する第2の分野を含む。リスト122の中のメンバー124の中の順序
は、例えば、初期設定規則に基づいて決定される。
文要素114は、例えば図13に示されるように、条件付きで符号化されたインデックス
118を、ここに例示的に、角度方向124として図示された、可能な有利な内部予測パ
ラメータの結果であるリスト122の中に合図することができる。、または、仮に、実際
の内部予測パラメータ116が、最もありそうな組122の中になく、127に示される
ように、可能性として除外される可能な内部予測モードのリスト125の中のインデック
ス123であるならば、リスト122の候補は、その結果、実際の内部予測パラメータ1
16を特定する。構文要素の符号化は、リスト122の中に属する実際の内部予測パラメ
ータの場合、より少ないビットを消費する。例えば、構文要素は旗(flag)とインデ
ックス部とを含む。旗は、リスト122のメンバーを含めるか、または、除外するか、イ
ンデックスがリスト122またはリスト125のいずれかを指摘するか、つまり、リスト
122のメンバーに含めるかまたは除外するかを示す。構文要素は、リスト122のメン
バー124またはエスケープコードの一つを特定する分野を含む。そして、構文要素は、
エスケープコードの場合、リスト122のメンバーを含むまたは除外するリスト125か
らメンバーを特定する第2の分野を含む。リスト122の中のメンバー124の中の順序
は、例えば、初期設定規則に基づいて決定される。
従って、スケーラブルビデオデコーダは、エンハンスメント層副ストリーム6bから構
文要素114を得る、または、検索する。そして、スケーラブルビデオエンコーダは、構
文要素114をエンハンスメント層副ストリーム6bに挿入する。そして、次に、例えば
、構文要素114は、リスト122から1つの空間予測パラメータを索引するために使用
される。リスト122を形成する際に、前述の代替は、予め決められた隣接ブロック92
と94が、空間予測符号化モードタイプであるか否かがチェックされて実行される。そう
でなければ、前述したように、共同配置されたブロック108は、順に空間的に予測され
たブロックであるか否かがチェックされ、そうであれば、この共同配置されたブロック1
08を空間的に予測するために使用される角度方向112のような、同じ空間予測パラメ
ータがリスト122に含まれる。また、仮に、ベース層ブロック108が、適した内部予
測パラメータを含まないならば、リスト122はそれぞれの予め決められた隣接ブロック
92または94から寄与無しで外される。なぜなら、リスト122が空であることを避け
るために、例えば、予め決められた隣接ブロック92、98の両方が、内部予測されてい
るので、適した内部予測パラメータを欠いている共同配置されたブロック108と同様に
、少なくともメンバー124の1つは初期設定内部予測パラメータを使用して、無条件に
決定される。あるいはまた、リスト122が空であることが許容される。
文要素114を得る、または、検索する。そして、スケーラブルビデオエンコーダは、構
文要素114をエンハンスメント層副ストリーム6bに挿入する。そして、次に、例えば
、構文要素114は、リスト122から1つの空間予測パラメータを索引するために使用
される。リスト122を形成する際に、前述の代替は、予め決められた隣接ブロック92
と94が、空間予測符号化モードタイプであるか否かがチェックされて実行される。そう
でなければ、前述したように、共同配置されたブロック108は、順に空間的に予測され
たブロックであるか否かがチェックされ、そうであれば、この共同配置されたブロック1
08を空間的に予測するために使用される角度方向112のような、同じ空間予測パラメ
ータがリスト122に含まれる。また、仮に、ベース層ブロック108が、適した内部予
測パラメータを含まないならば、リスト122はそれぞれの予め決められた隣接ブロック
92または94から寄与無しで外される。なぜなら、リスト122が空であることを避け
るために、例えば、予め決められた隣接ブロック92、98の両方が、内部予測されてい
るので、適した内部予測パラメータを欠いている共同配置されたブロック108と同様に
、少なくともメンバー124の1つは初期設定内部予測パラメータを使用して、無条件に
決定される。あるいはまた、リスト122が空であることが許容される。
当然、図11~図13に対して説明した実施例は、図6~図10に対して概説した実施
例と繋がることができる。特に、図11~図13に従ってベース層を回り道して引き出さ
れた空間内部予測パラメータを使用して得られた内部予測は、スペクトル的に重み付けさ
れた方法で、上述したように中間層予測信号38に結合されるために、図6~図10の実
施例のエンハンスメント層中間予測信号34を表わす。
例と繋がることができる。特に、図11~図13に従ってベース層を回り道して引き出さ
れた空間内部予測パラメータを使用して得られた内部予測は、スペクトル的に重み付けさ
れた方法で、上述したように中間層予測信号38に結合されるために、図6~図10の実
施例のエンハンスメント層中間予測信号34を表わす。
以下の図面に対して、図1~図4に対して記載したように、スケーラブルビデオエンコ
ーダまたはデコーダが、どのようにして応用の別の実施例に従って本応用の実施の形態を
形成するかが説明される。後で、以下に記載された実施例のために、追加の実現例が実施
例TとUを引用して提示される。
ーダまたはデコーダが、どのようにして応用の別の実施例に従って本応用の実施の形態を
形成するかが説明される。後で、以下に記載された実施例のために、追加の実現例が実施
例TとUを引用して提示される。
図14は、エンハンスメント層信号400とベース層信号200の画像22bと22a
を、それぞれ時間的登録方法で示す。現在、符号化/復号化されるべき部分は28で示さ
れている。現在の実施例に従って、ベース層信号200は、ベース層信号を空間的に変化
させているベース層符号化パラメータを使用して、スケーラブルビデオエンコーダによっ
て予測的に符号化され、スケーラブルビデオデコーダによって予測的に再構成されている
。空間的な変化は、非斜線領域によって囲まれた斜線部分132を使用して、図14に示
されている。斜線部分132の中では、ベース層信号200を予測的に符号化/再構成化
するために使用されるベース層符号化パラメータが一定である。斜線部分132から非斜
線領域に移行するとき、ベース層符号化パラメータが変化する。上で概説された実施例に
よると、エンハンスメント層信号400は、ブロックのユニットの中で符号化/再構成化
されている。現在の部分28はそのようなブロックである。上で概説された実施例に従っ
て、現在の部分28のための副ブロックの副分割は、ベース層信号200の共同配置され
た部分134の中で、すなわち、ベース層信号200の時間的に対応する画像22aの空
間的に共同配置された部分の中で、ベース層符号化パラメータの空間的変化に基づいて1
組の可能な副ブロックの副分割から選択される。
を、それぞれ時間的登録方法で示す。現在、符号化/復号化されるべき部分は28で示さ
れている。現在の実施例に従って、ベース層信号200は、ベース層信号を空間的に変化
させているベース層符号化パラメータを使用して、スケーラブルビデオエンコーダによっ
て予測的に符号化され、スケーラブルビデオデコーダによって予測的に再構成されている
。空間的な変化は、非斜線領域によって囲まれた斜線部分132を使用して、図14に示
されている。斜線部分132の中では、ベース層信号200を予測的に符号化/再構成化
するために使用されるベース層符号化パラメータが一定である。斜線部分132から非斜
線領域に移行するとき、ベース層符号化パラメータが変化する。上で概説された実施例に
よると、エンハンスメント層信号400は、ブロックのユニットの中で符号化/再構成化
されている。現在の部分28はそのようなブロックである。上で概説された実施例に従っ
て、現在の部分28のための副ブロックの副分割は、ベース層信号200の共同配置され
た部分134の中で、すなわち、ベース層信号200の時間的に対応する画像22aの空
間的に共同配置された部分の中で、ベース層符号化パラメータの空間的変化に基づいて1
組の可能な副ブロックの副分割から選択される。
特に、現在の部分28のために、エンハンスメント層副ストリーム6bの副分割情報の
中で合図する代わりに、上の記述が、選択された副ブロックの副分割が、可能な副ブロッ
クの副分割の組の中で最も粗いように、現在の部分28の可能な副ブロックの副分割の組
の中で副ブロックの副分割を選択すること、を提示する。そこでは、ベース層信号の共同
配置された部分134の上に移されたとき、ベース層符号化パラメータは、それぞれの副
ブロックの副分割の各副ブロックの中で、互いに十分同様であるように、ベース層信号2
00を副分割する。理解し易くするために、図15aを参照する。図15aは共同配置さ
れた部分134の中で、ベース層符号化パラメータの空間的な変化を、斜線を使用して、
記載している部分28を示す。特に、部分28は、ブロック28に適用されている異なる
副ブロックの副分割が、3回示されている。特に、4枝ツリーの副分割が、図15aの場
合に例示的に使用されている。すなわち、可能な副ブロックの副分割の組は、4枝ツリー
の副分割である(あるいは、それによって定義される)。そして、図15aに表現された
部分28の副ブロックの副分割の3つの具体例が、ブロック28の4枝ツリーの副分割の
異なる階層のレベルに属する。下から上まで、副ブロックの中のブロック28の副分割の
レベルまたは粗さは増加する。最高レベルでは、部分28はそのまま残される。次の下の
レベルでは、ブロック28は4つの副ブロックに副分割される。そして、少なくとも後者
の1つは、次の下のレベルなどでさらに4つの副ブロックに副分割される。図15aの中
で、各レベルにおいて、4枝ツリーの副分割は、副ブロックの数が最も小さい場所、それ
でも、ベース層符号化パラメータ変化境界と重複している副ブロックでない場所が選択さ
れる。すなわち、図15aの場合、ブロック28を副分割するために選択されるべきブロ
ック28の4枝ツリーの副分割は、図15aに示されている中で最も低いものであると認
められる。ここで、ベース層のベース層符号化パラメータは、副ブロックの副分割のそれ
ぞれの副ブロックに共同配置された各部分の中で一定である。
中で合図する代わりに、上の記述が、選択された副ブロックの副分割が、可能な副ブロッ
クの副分割の組の中で最も粗いように、現在の部分28の可能な副ブロックの副分割の組
の中で副ブロックの副分割を選択すること、を提示する。そこでは、ベース層信号の共同
配置された部分134の上に移されたとき、ベース層符号化パラメータは、それぞれの副
ブロックの副分割の各副ブロックの中で、互いに十分同様であるように、ベース層信号2
00を副分割する。理解し易くするために、図15aを参照する。図15aは共同配置さ
れた部分134の中で、ベース層符号化パラメータの空間的な変化を、斜線を使用して、
記載している部分28を示す。特に、部分28は、ブロック28に適用されている異なる
副ブロックの副分割が、3回示されている。特に、4枝ツリーの副分割が、図15aの場
合に例示的に使用されている。すなわち、可能な副ブロックの副分割の組は、4枝ツリー
の副分割である(あるいは、それによって定義される)。そして、図15aに表現された
部分28の副ブロックの副分割の3つの具体例が、ブロック28の4枝ツリーの副分割の
異なる階層のレベルに属する。下から上まで、副ブロックの中のブロック28の副分割の
レベルまたは粗さは増加する。最高レベルでは、部分28はそのまま残される。次の下の
レベルでは、ブロック28は4つの副ブロックに副分割される。そして、少なくとも後者
の1つは、次の下のレベルなどでさらに4つの副ブロックに副分割される。図15aの中
で、各レベルにおいて、4枝ツリーの副分割は、副ブロックの数が最も小さい場所、それ
でも、ベース層符号化パラメータ変化境界と重複している副ブロックでない場所が選択さ
れる。すなわち、図15aの場合、ブロック28を副分割するために選択されるべきブロ
ック28の4枝ツリーの副分割は、図15aに示されている中で最も低いものであると認
められる。ここで、ベース層のベース層符号化パラメータは、副ブロックの副分割のそれ
ぞれの副ブロックに共同配置された各部分の中で一定である。
従って、ブロック28のための副分割情報は、エンハンスメント層副ストリーム6bの
中で合図される必要はない。その結果、符号化効率が増加する。そのうえ、概説されてい
るように、副分割を得る方法は、どんなグリッド(格子)に関する現在の部分28の位置
、または、ベース層信号200のサンプルアレイのどんな登録にも関係なく適切である。
また、特に、副分割派生は、ベース層とエンハンスメント層との間の断片的な空間分解比
率の場合に働く。
中で合図される必要はない。その結果、符号化効率が増加する。そのうえ、概説されてい
るように、副分割を得る方法は、どんなグリッド(格子)に関する現在の部分28の位置
、または、ベース層信号200のサンプルアレイのどんな登録にも関係なく適切である。
また、特に、副分割派生は、ベース層とエンハンスメント層との間の断片的な空間分解比
率の場合に働く。
このようにして決定された部分28の副ブロックの副分割に基づいて、部分28は、予
側的に再構成/符号化される。上の記述に対して、異なる可能性が、現在のブロック28
の異なる利用可能な副ブロックの副分割の粗さを「測る」ために存在することに注意する
べきである。例えば、粗さの大きさは副ブロックの数に基づいて決定される。それぞれの
副ブロックの副分割が有している副ブロックが多ければ多いほど、レベルはより低くなる
。この定義は、それぞれの副ブロックの副分割の副ブロックの数と、それぞれの副ブロッ
クの副分割の全ての副ブロックの最も小さいサイズとの組み合わせによって、「粗さの大
きさ」が決定される図15aの場合において、明らかに適用されない。
側的に再構成/符号化される。上の記述に対して、異なる可能性が、現在のブロック28
の異なる利用可能な副ブロックの副分割の粗さを「測る」ために存在することに注意する
べきである。例えば、粗さの大きさは副ブロックの数に基づいて決定される。それぞれの
副ブロックの副分割が有している副ブロックが多ければ多いほど、レベルはより低くなる
。この定義は、それぞれの副ブロックの副分割の副ブロックの数と、それぞれの副ブロッ
クの副分割の全ての副ブロックの最も小さいサイズとの組み合わせによって、「粗さの大
きさ」が決定される図15aの場合において、明らかに適用されない。
完全を期すために、図15bは、利用可能な組として、図35の副分割を例示的に使用
するとき、現在のブロック28のために利用可能な副ブロックの副分割の1組から一つの
可能な副ブロックの副分割を選択する場合を例示的に示す。異なる斜線(および非斜線)
は、ベース層信号の中のそれぞれに共同配置された領域が、それらに関係した同じベース
層符号化パラメータを有している領域を示す。
するとき、現在のブロック28のために利用可能な副ブロックの副分割の1組から一つの
可能な副ブロックの副分割を選択する場合を例示的に示す。異なる斜線(および非斜線)
は、ベース層信号の中のそれぞれに共同配置された領域が、それらに関係した同じベース
層符号化パラメータを有している領域を示す。
前述したように、概説された選択は、粗さの増加するレベルまたは減少するレベルの順
序のように、ある連続した順序に従って、可能な副ブロックの副分割を横断して、そして
、それぞれの副ブロックの副分割の各副ブロックの中で、ベース層符号化パラメータが互
いに十分同様である状況で、可能な副ブロックの副分割からその可能な副ブロックの副分
割を選択することによって実行される。(増加する粗さのレベルに従う横断を使用する場
合において)もはや適用されない。あるいは、(減少する粗さのレベルに従う横断を使用
する場合において)最初にたまたま適用する。2者択一的に、全ての可能な副分割がテス
トされる。
序のように、ある連続した順序に従って、可能な副ブロックの副分割を横断して、そして
、それぞれの副ブロックの副分割の各副ブロックの中で、ベース層符号化パラメータが互
いに十分同様である状況で、可能な副ブロックの副分割からその可能な副ブロックの副分
割を選択することによって実行される。(増加する粗さのレベルに従う横断を使用する場
合において)もはや適用されない。あるいは、(減少する粗さのレベルに従う横断を使用
する場合において)最初にたまたま適用する。2者択一的に、全ての可能な副分割がテス
トされる。
図14と図15a、図15bの記述において、広義語「ベース層符号化パラメータ」は
、好ましい実施の形態の中で使用されるけれども、これらのベース層符号化パラメータは
、ベース層予測パラメータ、すなわち、ベース層信号の予測の形成に関するけれども、予
測残留の構成に関係しないパラメータを表す。従って、例えば、ベース層符号化パラメー
タは、空間予測(角度方向などの空間予測に割り当てられたベース層信号のブロック/部
分のための予測パラメータ)と時間予測(作動パラメータなどの時間予測に割り当てられ
たベース層信号のブロック/部分のための予測パラメータ)との間を区別する予測モード
を含む。
、好ましい実施の形態の中で使用されるけれども、これらのベース層符号化パラメータは
、ベース層予測パラメータ、すなわち、ベース層信号の予測の形成に関するけれども、予
測残留の構成に関係しないパラメータを表す。従って、例えば、ベース層符号化パラメー
タは、空間予測(角度方向などの空間予測に割り当てられたベース層信号のブロック/部
分のための予測パラメータ)と時間予測(作動パラメータなどの時間予測に割り当てられ
たベース層信号のブロック/部分のための予測パラメータ)との間を区別する予測モード
を含む。
しかしながら、所定の副ブロックの中で、ベース層符号化パラメータの類似性の「十分
」の定義は、ベース層符号化パラメータの副組を決定/定義するだけである。例えば、類
似性は、予測モードだけに基づいて決定される。あるいはまた、さらに空間予測および/
または時間予測を調整する予測パラメータは、所定の副ブロックの中でベース層符号化パ
ラメータの類似性が依存するパラメータを形成する。
」の定義は、ベース層符号化パラメータの副組を決定/定義するだけである。例えば、類
似性は、予測モードだけに基づいて決定される。あるいはまた、さらに空間予測および/
または時間予測を調整する予測パラメータは、所定の副ブロックの中でベース層符号化パ
ラメータの類似性が依存するパラメータを形成する。
さらに、既に概説したように、互いに十分に類似になるために、所定の副ブロックの中
で、ベース層符号化パラメータは、それぞれの副ブロックの中で互いに完全に等しい必要
がある。あるいはまた、使用される類似性の大きさは、「類似性」の基準を満たすために
、所定の間隔の範囲内であることが必要である。
で、ベース層符号化パラメータは、それぞれの副ブロックの中で互いに完全に等しい必要
がある。あるいはまた、使用される類似性の大きさは、「類似性」の基準を満たすために
、所定の間隔の範囲内であることが必要である。
上に概説したように、選択された副ブロックの副分割は、ベース層信号から予測される
、または、移送される量だけではない。むしろ、ベース層符号化パラメータ自体が、それ
に基づいて、ベース層信号からエンハンスメント層信号に、選択された副ブロックの副分
割を移送することによって得られた副ブロックの副分割の副ブロックのためのエンハンス
メント層符号化パラメータを得るために、エンハンスメント層信号に移送される。作動パ
ラメータに関する限り、例えば、スケーリングは、ベース層からエンハンスメント層へ移
送するために使用される。好ましくは、ベース層の予測パラメータのそれらの部分または
構文要素のみが、類似性の大きさに影響するベース層から得られた現在の部分の副ブロッ
クの副分割の副ブロックを設定するために使用される。この大きさによって、選択された
副ブロックの副分割の各副ブロックの中の予測パラメータのこれらの構文要素が、どうに
か互いに同様であるという事実は、現在の部分308の副ブロックの対応する予測パラメ
ータを予測するために使用されるベース層予測パラメータの構文要素が、同様である、ま
たは、互いと等しくさえあることを保証する。その結果、いくつかの変化を許す初めての
場合に、それぞれの副ブロックによってカバーされたベース層信号の部分に対応するベー
ス層予測パラメータの構文要素のいくつかの重要な「意味」が、対応する副ブロックのた
めの予測器として使用される。しかしながら、また、類似性の大きさに寄与する構文要素
の部分のみが、モード特定ベース層予測パラメータが類似性の大きさ決定に参加するけれ
ども、現在の部分28の副ブロックのモードを推測または予め設定するように、副分割の
転写自体だけを追加してエンハンスメント層の副分割の副ブロックの予測パラメータを予
測するために使用されることもある。
、または、移送される量だけではない。むしろ、ベース層符号化パラメータ自体が、それ
に基づいて、ベース層信号からエンハンスメント層信号に、選択された副ブロックの副分
割を移送することによって得られた副ブロックの副分割の副ブロックのためのエンハンス
メント層符号化パラメータを得るために、エンハンスメント層信号に移送される。作動パ
ラメータに関する限り、例えば、スケーリングは、ベース層からエンハンスメント層へ移
送するために使用される。好ましくは、ベース層の予測パラメータのそれらの部分または
構文要素のみが、類似性の大きさに影響するベース層から得られた現在の部分の副ブロッ
クの副分割の副ブロックを設定するために使用される。この大きさによって、選択された
副ブロックの副分割の各副ブロックの中の予測パラメータのこれらの構文要素が、どうに
か互いに同様であるという事実は、現在の部分308の副ブロックの対応する予測パラメ
ータを予測するために使用されるベース層予測パラメータの構文要素が、同様である、ま
たは、互いと等しくさえあることを保証する。その結果、いくつかの変化を許す初めての
場合に、それぞれの副ブロックによってカバーされたベース層信号の部分に対応するベー
ス層予測パラメータの構文要素のいくつかの重要な「意味」が、対応する副ブロックのた
めの予測器として使用される。しかしながら、また、類似性の大きさに寄与する構文要素
の部分のみが、モード特定ベース層予測パラメータが類似性の大きさ決定に参加するけれ
ども、現在の部分28の副ブロックのモードを推測または予め設定するように、副分割の
転写自体だけを追加してエンハンスメント層の副分割の副ブロックの予測パラメータを予
測するために使用されることもある。
ベース層からエンハンスメント層への副分割中間層予測だけを使用しないというそのよ
うな1つの可能性は、現在、次の図(図16)に対して説明される。図16は、提供時間
軸24に沿って登録された方法で、エンハンスメント層信号400の画像22bと、ベー
ス層信号200の画像22aを示す。
うな1つの可能性は、現在、次の図(図16)に対して説明される。図16は、提供時間
軸24に沿って登録された方法で、エンハンスメント層信号400の画像22bと、ベー
ス層信号200の画像22aを示す。
図16の実施の形態に従って、ベース層信号200は、ベース層信号200の画像22
aを、内部ブロックおよび中間ブロックの中に副分割することによって、スケーラブルビ
デオデコーダによって予測的に再構成され、そして、スケーラブルビデオエンコーダの使
用によって予測的に符号化される。図16の例に従って、後者の副分割は2ステージ法で
なされる。まず、フレーム22aは、正規に、図16の中で引用符号302によって示さ
れた、最も大きいブロックまたは最も大きい符号化ユニットに、その周辺に沿って二重線
を使用して、副分割される。それから、それぞれの最も大きいブロック302が、前述の
内部ブロックおよび中間ブロックを形成している符号化ユニットの中の階層的四枝ツリー
の副分割に従属させられる。その結果、それらは、最も大きいブロック302の四枝ツリ
ーの副分割の葉である。図16では、引用符号304は、これらの葉のブロックまたは符
号化ユニットを示すために使用される。通常、実線は、これらの符号化ユニットの周辺を
示すために使用される。一方、空間内部予測は内部ブロックのために使用される。時間中
間予測は中間ブロックのために使用される。空間内部予想と時間中間予測とに関係した予
測パラメータは、それぞれ、より小さいブロックのユニットの中にセットされる。しかし
ながら、内部および中間ブロックまたは符号化ユニット304は、副分割される。そのよ
うな副分割は、より小さいブロックを示すために引用符号306を使用して、符号化ユニ
ット304の1つに対して、図16で例示的に示される。より小さいブロック304は、
点線を使用して外形が形成される。すなわち、図16の実施の形態の場合、空間的なビデ
オエンコーダは、ベース層のそれぞれの符号化ユニット304に対して、一方の空間予測
と他方の時間予測との間で選択する機会を有している。しかしながら、エンハンスメント
層信号に関する限り、自由度は増加する。ここで、特に、エンハンスメント層信号400
のフレーム22bは、エンハンスメント層信号400のフレーム22bが副分割される符
号化ユニットの中で、空間内部予測と時間中間予測だけではなく、以下に詳細に概説され
るような中間層予測も含む1組の予測モードのそれぞれの1つに割り当てられる。これら
の符号化ユニットの中の副分割は、ベース層信号に対して説明されるように同じ方法でな
される。先ず、フレーム22bは正規に、階層的な四枝ツリーの副分割過程の中で、通常
の実線を使用して、外形が形成された符号化ユニットの中に、副分割される二重線を使用
して、外形が形成された最も大きいブロックの行と列に副分割される。
aを、内部ブロックおよび中間ブロックの中に副分割することによって、スケーラブルビ
デオデコーダによって予測的に再構成され、そして、スケーラブルビデオエンコーダの使
用によって予測的に符号化される。図16の例に従って、後者の副分割は2ステージ法で
なされる。まず、フレーム22aは、正規に、図16の中で引用符号302によって示さ
れた、最も大きいブロックまたは最も大きい符号化ユニットに、その周辺に沿って二重線
を使用して、副分割される。それから、それぞれの最も大きいブロック302が、前述の
内部ブロックおよび中間ブロックを形成している符号化ユニットの中の階層的四枝ツリー
の副分割に従属させられる。その結果、それらは、最も大きいブロック302の四枝ツリ
ーの副分割の葉である。図16では、引用符号304は、これらの葉のブロックまたは符
号化ユニットを示すために使用される。通常、実線は、これらの符号化ユニットの周辺を
示すために使用される。一方、空間内部予測は内部ブロックのために使用される。時間中
間予測は中間ブロックのために使用される。空間内部予想と時間中間予測とに関係した予
測パラメータは、それぞれ、より小さいブロックのユニットの中にセットされる。しかし
ながら、内部および中間ブロックまたは符号化ユニット304は、副分割される。そのよ
うな副分割は、より小さいブロックを示すために引用符号306を使用して、符号化ユニ
ット304の1つに対して、図16で例示的に示される。より小さいブロック304は、
点線を使用して外形が形成される。すなわち、図16の実施の形態の場合、空間的なビデ
オエンコーダは、ベース層のそれぞれの符号化ユニット304に対して、一方の空間予測
と他方の時間予測との間で選択する機会を有している。しかしながら、エンハンスメント
層信号に関する限り、自由度は増加する。ここで、特に、エンハンスメント層信号400
のフレーム22bは、エンハンスメント層信号400のフレーム22bが副分割される符
号化ユニットの中で、空間内部予測と時間中間予測だけではなく、以下に詳細に概説され
るような中間層予測も含む1組の予測モードのそれぞれの1つに割り当てられる。これら
の符号化ユニットの中の副分割は、ベース層信号に対して説明されるように同じ方法でな
される。先ず、フレーム22bは正規に、階層的な四枝ツリーの副分割過程の中で、通常
の実線を使用して、外形が形成された符号化ユニットの中に、副分割される二重線を使用
して、外形が形成された最も大きいブロックの行と列に副分割される。
エンハンスメント層信号400の現在の画像22bの1つの符号化ユニット308は、
例示的に、中間層予測モードに割り当てられると推論され、斜線を使用して示される。図
14、図15aおよび図15bと同様の方法で、図16は、312で、符号化ユニット3
08の副分割が、ベース層信号から局所移送によって予測的にどのように得られるかを示
す。特に、符号化ユニット308によって重畳された局部領域が、312に示されている
。この領域の中では、点線はベース層信号の隣接しているブロックの間の境界、または、
より一般的にベース層のベース層符号化パラメータが経由してたぶん変化する境界を示す
。その結果、これらの境界は、ベース層信号200の予測ブロック306の境界であり、
そして、それぞれベース層信号200の隣接している符号化ユニット304、または、等
しく隣接している最も大きい符号化ユニット302の間の境界と部分的に一致する。31
2における点線は、ベース層信号200からの局部移送によって引き出された/選択され
た予測ブロックの中の現在の符号化ユニット308の副分割を示す。局部移送に関する詳
細は、前述した。
例示的に、中間層予測モードに割り当てられると推論され、斜線を使用して示される。図
14、図15aおよび図15bと同様の方法で、図16は、312で、符号化ユニット3
08の副分割が、ベース層信号から局所移送によって予測的にどのように得られるかを示
す。特に、符号化ユニット308によって重畳された局部領域が、312に示されている
。この領域の中では、点線はベース層信号の隣接しているブロックの間の境界、または、
より一般的にベース層のベース層符号化パラメータが経由してたぶん変化する境界を示す
。その結果、これらの境界は、ベース層信号200の予測ブロック306の境界であり、
そして、それぞれベース層信号200の隣接している符号化ユニット304、または、等
しく隣接している最も大きい符号化ユニット302の間の境界と部分的に一致する。31
2における点線は、ベース層信号200からの局部移送によって引き出された/選択され
た予測ブロックの中の現在の符号化ユニット308の副分割を示す。局部移送に関する詳
細は、前述した。
図16の実施の形態に従って、既に説明したように、予測ブロックの中の副分割だけが
ベース層から採用されない。むしろ、領域312の中で使用されたベース層信号の予測パ
ラメータが、エンハンスメント層信号400の符号化ユニット308の予測ブロックに対
して、予測を実行するために使用されるべき予測パラメータを得るために使用される。
ベース層から採用されない。むしろ、領域312の中で使用されたベース層信号の予測パ
ラメータが、エンハンスメント層信号400の符号化ユニット308の予測ブロックに対
して、予測を実行するために使用されるべき予測パラメータを得るために使用される。
特に、図16の実施の形態に従って、予測ブロックの中の副分割が、ベース層信号から
得られるだけでなく、予測モードも、得られた副分割のそれぞれの副ブロックによって局
所的にカバーされたそれぞれの領域を符号化/再構成化するために、ベース層信号200
の中で使用される。1つの例が以下である。前述に従って符号化ユニット308の副分割
を得るために、予測モードが、関係しているベース層信号200と繋がって使用される。
モード特有の予測パラメータは、上で議論した「類似性」を決定するために使用される。
従って、図16で示された異なる斜線は、ベース層の異なる予測ブロック306に対応す
る。異なる予測ブロック306の各々は、内部または中間予測モード(すなわち、それら
に関係した空間または時間予測モード)を有している。上で説明したように、「十分に類
似」になるために、符号化ユニット308の副分割のそれぞれの副ブロックに共同配置さ
れた領域の中で使用された予測モードと、副エリアの中でそれぞれの予測モードのために
特定の予測パラメータとは、互いに完全に等しくなければならない。あるいはまた、何ら
かの変化は我慢してもよい。
得られるだけでなく、予測モードも、得られた副分割のそれぞれの副ブロックによって局
所的にカバーされたそれぞれの領域を符号化/再構成化するために、ベース層信号200
の中で使用される。1つの例が以下である。前述に従って符号化ユニット308の副分割
を得るために、予測モードが、関係しているベース層信号200と繋がって使用される。
モード特有の予測パラメータは、上で議論した「類似性」を決定するために使用される。
従って、図16で示された異なる斜線は、ベース層の異なる予測ブロック306に対応す
る。異なる予測ブロック306の各々は、内部または中間予測モード(すなわち、それら
に関係した空間または時間予測モード)を有している。上で説明したように、「十分に類
似」になるために、符号化ユニット308の副分割のそれぞれの副ブロックに共同配置さ
れた領域の中で使用された予測モードと、副エリアの中でそれぞれの予測モードのために
特定の予測パラメータとは、互いに完全に等しくなければならない。あるいはまた、何ら
かの変化は我慢してもよい。
特に、図16の実施の形態に従って、左上から右下に延びる斜線によって示された全て
のブロックは、ベース層信号の局所的に対応する部分が、それらに関係した空間内部予測
モードを有している予測ブロック306によってカバーされているので、符号化ユニット
308の内部予測ブロックにセットされる。一方、他のブロック(すなわち、左下から右
上に延びる斜線によって示されたブロック)は、ベース層信号の局所的に対応する部分が
、それらに関係した時間中間予測モードを有している予測ブロック306によってカバー
されているので、中間予測ブロックにセットされる。
のブロックは、ベース層信号の局所的に対応する部分が、それらに関係した空間内部予測
モードを有している予測ブロック306によってカバーされているので、符号化ユニット
308の内部予測ブロックにセットされる。一方、他のブロック(すなわち、左下から右
上に延びる斜線によって示されたブロック)は、ベース層信号の局所的に対応する部分が
、それらに関係した時間中間予測モードを有している予測ブロック306によってカバー
されているので、中間予測ブロックにセットされる。
一方、代替の実施の形態に対して、予測の派生が、符号化ユニット308の中で、予測
を実行するための詳細がここで止められる。すなわち、予測ブロックの中の符号化ユニッ
ト308の副分割の派生と、非時間予測または空間予測を使用して符号化された予測ブロ
ックの中および時間予測を使用して符号化された予測ブロックの中のこれらの予測ブロッ
クの割り当てと、が制限される。それは図16の実施の形態に従わない。
を実行するための詳細がここで止められる。すなわち、予測ブロックの中の符号化ユニッ
ト308の副分割の派生と、非時間予測または空間予測を使用して符号化された予測ブロ
ックの中および時間予測を使用して符号化された予測ブロックの中のこれらの予測ブロッ
クの割り当てと、が制限される。それは図16の実施の形態に従わない。
後者の実施の形態に従って、それに割り当てられた非時間予測モードを有する符号化ユ
ニット308の全ての予測ブロックは、これらの非時間モードのブロックのエンハンスメ
ント層予測パラメータとして、ベース層信号200の局所的に一致している内部ブロック
の予測パラメータから派生された予測パラメータを使用している間、空間内部予測などの
非時間予測を受ける。その結果、そのような派生は、ベース層信号200の局所的に共同
配置された内部ブロックの空間予測パラメータに関係する。例えば、そのような空間予測
パラメータは、空間予測が実行されるに沿う角度方向の指示であってもよい。上に概説し
たように、空間ベース層予測パラメータが、符号化ユニット308のそれぞれの非時間予
測ブロックが、互いに同じであることによって重畳する、または、符号化ユニット308
のそれぞれの非時間予測ブロックに対して、空間ベース層予測パラメータの平均が、それ
ぞれの非時間予測ブロックが、それぞれの非時間予測ブロックの予測パラメータを派生す
るために使用されることによって重畳する、といういずれか一方の自身による類似性の定
義が必要である。
ニット308の全ての予測ブロックは、これらの非時間モードのブロックのエンハンスメ
ント層予測パラメータとして、ベース層信号200の局所的に一致している内部ブロック
の予測パラメータから派生された予測パラメータを使用している間、空間内部予測などの
非時間予測を受ける。その結果、そのような派生は、ベース層信号200の局所的に共同
配置された内部ブロックの空間予測パラメータに関係する。例えば、そのような空間予測
パラメータは、空間予測が実行されるに沿う角度方向の指示であってもよい。上に概説し
たように、空間ベース層予測パラメータが、符号化ユニット308のそれぞれの非時間予
測ブロックが、互いに同じであることによって重畳する、または、符号化ユニット308
のそれぞれの非時間予測ブロックに対して、空間ベース層予測パラメータの平均が、それ
ぞれの非時間予測ブロックが、それぞれの非時間予測ブロックの予測パラメータを派生す
るために使用されることによって重畳する、といういずれか一方の自身による類似性の定
義が必要である。
あるいはまた、割り当てられた非時間予測モードを有している符号化ユニット308の
全ての予測ブロックは、以下の方法で、中間層予測をする。先ず、ベース層信号が、少な
くとも符号化ユニット308の非時間予測モード予測ブロックに空間的に共同配置された
それらの領域の中で、中間層予測信号を得るために分解または品質改良を受ける。そして
、次に、符号化ユニット308のこれらの予測ブロックが、中間層予測信号を使用して、
予測される。
全ての予測ブロックは、以下の方法で、中間層予測をする。先ず、ベース層信号が、少な
くとも符号化ユニット308の非時間予測モード予測ブロックに空間的に共同配置された
それらの領域の中で、中間層予測信号を得るために分解または品質改良を受ける。そして
、次に、符号化ユニット308のこれらの予測ブロックが、中間層予測信号を使用して、
予測される。
スケーラブルビデオデコーダとエンコーダは、初期設定によって、符号化ユニット30
8の全てに、空間予測または中間層予測を受けさせる。あるいはまた、スケーラブルビデ
オエンコーダ/デコーダは、両方の代替をサポートし、符号化ビデオデータストリーム信
号の中で合図する。そのバージョンは、符号化ユニット308の非時間予測モード予測ブ
ロックに関する限り使用される。特に、両方の代替の中での決定は、例えば、個別的に符
号化ユニット308のどんな大きさでも、データストリームの中で合図される。
8の全てに、空間予測または中間層予測を受けさせる。あるいはまた、スケーラブルビデ
オエンコーダ/デコーダは、両方の代替をサポートし、符号化ビデオデータストリーム信
号の中で合図する。そのバージョンは、符号化ユニット308の非時間予測モード予測ブ
ロックに関する限り使用される。特に、両方の代替の中での決定は、例えば、個別的に符
号化ユニット308のどんな大きさでも、データストリームの中で合図される。
符号化ユニット308の別の予測ブロックに関する限り、符号化ユニット308は、ち
ょうどそれが非時間予測モード予測ブロックの場合であるとして、局所的に一致している
中間ブロックの予測パラメータから派生される予測パラメータを使用して、時間中間予測
を受ける。その結果、派生は、順に、ベース層信号の対応している部分に割り当てられた
作動ベクトルに関係する。
ょうどそれが非時間予測モード予測ブロックの場合であるとして、局所的に一致している
中間ブロックの予測パラメータから派生される予測パラメータを使用して、時間中間予測
を受ける。その結果、派生は、順に、ベース層信号の対応している部分に割り当てられた
作動ベクトルに関係する。
それに割り当てられた空間内部予測モードと時間中間予測モードのいずれも有している
全ての別の符号化ユニットに対して、別の符号化ユニットは、空間予測または時間予測を
、以下の方法で受ける。特に、別の符号化ユニットは、それに割り当てられた予測モード
を有している予測ブロックの中に更に副分割される。予測モードは、符号化ユニットの中
で、予測ブロックの全てに対して共通し、特に、それぞれの符号化ユニットに割り当てら
れる同じ予測モードである。すなわち、符号化ユニット308などの符号化ユニットと異
なっていて、それに関係した空間内部予測モードを有している、または、それに関係した
時間中間予測モードを有している符号化ユニットが、同じ予測モードの予測ブロックに副
分割される。すなわち、予測モードは、それらがそれぞれの符号化ユニットの副分割によ
って派生したそれぞれの符号化ユニットから受け継ぐのみである。
全ての別の符号化ユニットに対して、別の符号化ユニットは、空間予測または時間予測を
、以下の方法で受ける。特に、別の符号化ユニットは、それに割り当てられた予測モード
を有している予測ブロックの中に更に副分割される。予測モードは、符号化ユニットの中
で、予測ブロックの全てに対して共通し、特に、それぞれの符号化ユニットに割り当てら
れる同じ予測モードである。すなわち、符号化ユニット308などの符号化ユニットと異
なっていて、それに関係した空間内部予測モードを有している、または、それに関係した
時間中間予測モードを有している符号化ユニットが、同じ予測モードの予測ブロックに副
分割される。すなわち、予測モードは、それらがそれぞれの符号化ユニットの副分割によ
って派生したそれぞれの符号化ユニットから受け継ぐのみである。
308を含む全ての符号化ユニットの副分割は、予測ブロックの中の四枝ツリーの副分
割である。
割である。
符号化ユニット308のような中間層予測モードの符号化ユニットと、空間内部予測モ
ードまたは時間的中間予測モードの符号化ユニットとの間の更なる差は、空間内部予測モ
ード符号化ユニットまたは時間中間予測モード符号化ユニットの予測ブロックに、空間予
測および時間予測をそれぞれ受けさせるときである。予測パラメータは、例えば、エンハ
ンスメント層副ストリーム6bの中で合図する方法によって、ベース層信号200などに
依存することなくセットされる。符号化ユニット308のようなそれらに関係する中間層
予測モードを有しているそれら以外の符号化ユニットの副分割でさえ、エンハンスメント
層信号6bの中で合図される。すなわち、308などの中間層予測モード符号化ユニット
は、低いビット伝送速度の信号化の必要性の利点がある。実施の形態に従って、符号化ユ
ニット308自体のモード指標は、エンハンスメント層副ストリームの中で合図される必
要がない。任意に、別のパラメータは、個々の予測ブロックのために、予測パラメータ残
留などの符号化ユニット308に対して送信される。追加的に、または、二者択一的に、
符号化ユニット308ための予測残留が、エンハンスメント層副ストリーム6bの中で送
信され/合図される。一方、スケーラブルビデオデコーダは、エンハンスメント層副スト
リームからのこの情報を検索し、現在の実施の形態に従ったスケーラブルビデオエンコー
ダは、これらのパラメータを決定して、これらのパラメータをエンハンスメント層副スト
リーム6bの中に挿入する。
ードまたは時間的中間予測モードの符号化ユニットとの間の更なる差は、空間内部予測モ
ード符号化ユニットまたは時間中間予測モード符号化ユニットの予測ブロックに、空間予
測および時間予測をそれぞれ受けさせるときである。予測パラメータは、例えば、エンハ
ンスメント層副ストリーム6bの中で合図する方法によって、ベース層信号200などに
依存することなくセットされる。符号化ユニット308のようなそれらに関係する中間層
予測モードを有しているそれら以外の符号化ユニットの副分割でさえ、エンハンスメント
層信号6bの中で合図される。すなわち、308などの中間層予測モード符号化ユニット
は、低いビット伝送速度の信号化の必要性の利点がある。実施の形態に従って、符号化ユ
ニット308自体のモード指標は、エンハンスメント層副ストリームの中で合図される必
要がない。任意に、別のパラメータは、個々の予測ブロックのために、予測パラメータ残
留などの符号化ユニット308に対して送信される。追加的に、または、二者択一的に、
符号化ユニット308ための予測残留が、エンハンスメント層副ストリーム6bの中で送
信され/合図される。一方、スケーラブルビデオデコーダは、エンハンスメント層副スト
リームからのこの情報を検索し、現在の実施の形態に従ったスケーラブルビデオエンコー
ダは、これらのパラメータを決定して、これらのパラメータをエンハンスメント層副スト
リーム6bの中に挿入する。
言い換えれば、ベース層信号200の予測は、ベース層符号化パラメータを使用して、
ベース層符号化パラメータが、ベース層ブロック304のユニットの中で、ベース層信号
200を空間的に変化するという方法でなされる。ベース層に利用可能な予測モードは、
例えば、空間および時間予測を含む。ベース層符号化パラメータは、さらに、角度方向(
空間的に予測されたブロック304に関係する限り)、および、作動ベクトル(時間的に
予測されたブロック304に関する限り)のような予測モードの個別の予測パラメータを
含む。後者の予測モードの個別の予測パラメータは、ベース層ブロック304より小さい
ユニットの中で、すなわち、前述の予測ブロック306の中で、ベース層信号を変化する
。十分な類似性の前に概説した要件を満足させるために、それぞれ可能な副ブロックの副
分割の領域を重複している全てのベース層ブロック304の予測モードが、互いに等しい
、ということが必要である。そして、それぞれの副ブロックの副分割のみが、選択された
副ブロックの副分割を得るために選抜候補リストに入れられる。しかしながら、要件は更
に厳しい。それは、それぞれの副ブロックの副分割の共通領域を重複している、予測ブロ
ックの予測モード個別予測パラメータも、互いに等しくなければならないということであ
る。ベース層信号の中で、このそれぞれの副ブロックの副分割および対応する領域の各副
ブロックに対して、この要件を満足する副ブロックの副分割のみが、最終選択された副ブ
ロックの副分割を得るために選抜候補リストに入れられる。
ベース層符号化パラメータが、ベース層ブロック304のユニットの中で、ベース層信号
200を空間的に変化するという方法でなされる。ベース層に利用可能な予測モードは、
例えば、空間および時間予測を含む。ベース層符号化パラメータは、さらに、角度方向(
空間的に予測されたブロック304に関係する限り)、および、作動ベクトル(時間的に
予測されたブロック304に関する限り)のような予測モードの個別の予測パラメータを
含む。後者の予測モードの個別の予測パラメータは、ベース層ブロック304より小さい
ユニットの中で、すなわち、前述の予測ブロック306の中で、ベース層信号を変化する
。十分な類似性の前に概説した要件を満足させるために、それぞれ可能な副ブロックの副
分割の領域を重複している全てのベース層ブロック304の予測モードが、互いに等しい
、ということが必要である。そして、それぞれの副ブロックの副分割のみが、選択された
副ブロックの副分割を得るために選抜候補リストに入れられる。しかしながら、要件は更
に厳しい。それは、それぞれの副ブロックの副分割の共通領域を重複している、予測ブロ
ックの予測モード個別予測パラメータも、互いに等しくなければならないということであ
る。ベース層信号の中で、このそれぞれの副ブロックの副分割および対応する領域の各副
ブロックに対して、この要件を満足する副ブロックの副分割のみが、最終選択された副ブ
ロックの副分割を得るために選抜候補リストに入れられる。
特に、上に簡潔に概説したように、可能な副ブロックの分割の組の中で、選択を実行す
る方法に対して異なる可能性がある。更に詳細にこれについて概説するために、図15c
と図15dを参照する。組352が、現在のブロック28の全ての可能な副ブロックの副
分割354を取り囲むと想像してください。当然、図15cは単に一例を示す。現在のブ
ロック28の可能な、または、利用可能な副ブロックの副分割の組352は、初期設定に
よってスケーラブルビデオデコーダとスケーラブルビデオエンコーダに知られる、または
、例えば画像または同様のものの系列などの符号化データストリームの中で合図される。
図15cの例に従って、組352の各メンバー、すなわち、それぞれの利用可能な副ブロ
ックの副分割354は、チェック356を受け、それぞれの副ブロックの副分割354を
エンハンスメント層からベース層に移送することによって、副分割されるベース層信号の
共同配置された部分108の中の領域が、予測ブロック306および符号化ユニット30
4によって単に重ねられるか否かをチェックされる。そして、ベース層符号化パラメータ
が、十分な類似性の要件を満たしているか否かをチェックする。例えば引用番号354が
付いている例示的な副分割を参照してください。この例示的利用可能な副ブロックの副分
割に従って、現在のブロック28は、4つの四分円/副ブロック358に副分割される。
そして、左上の副ブロックは、ベース層の中で、領域362に対応している。明らかに、
この領域362は、ベース層の4つブロック(すなわち、予測ブロックの中の別の副分割
でなくて、その結果、予測ブロック自身を表わす、2つの予測ブロック306と2つの符
号化ユニット304)に重複する。従って、仮に、領域362を重複しているこれらの予
測ブロックの全てのベース層符号化パラメータが、類似性の基準を満足し、そして、これ
が更に可能な副ブロックの副分割354の全ての副ブロック/四分円、および、それらの
対応する領域を重複しているベース層符号化パラメータの場合であるならば、この可能な
副ブロックの副分割354は、それぞれの副ブロックの副分割の副ブロックによってカバ
ーされた全ての領域に対して十分な要件を満たして、副ブロックの副分割の組364に属
する。それから、この組364の中で、最も粗い副分割は矢印366によって示されるよ
うに選択され、その結果、組352から、選択された副ブロックの副分割368が得られ
る。
る方法に対して異なる可能性がある。更に詳細にこれについて概説するために、図15c
と図15dを参照する。組352が、現在のブロック28の全ての可能な副ブロックの副
分割354を取り囲むと想像してください。当然、図15cは単に一例を示す。現在のブ
ロック28の可能な、または、利用可能な副ブロックの副分割の組352は、初期設定に
よってスケーラブルビデオデコーダとスケーラブルビデオエンコーダに知られる、または
、例えば画像または同様のものの系列などの符号化データストリームの中で合図される。
図15cの例に従って、組352の各メンバー、すなわち、それぞれの利用可能な副ブロ
ックの副分割354は、チェック356を受け、それぞれの副ブロックの副分割354を
エンハンスメント層からベース層に移送することによって、副分割されるベース層信号の
共同配置された部分108の中の領域が、予測ブロック306および符号化ユニット30
4によって単に重ねられるか否かをチェックされる。そして、ベース層符号化パラメータ
が、十分な類似性の要件を満たしているか否かをチェックする。例えば引用番号354が
付いている例示的な副分割を参照してください。この例示的利用可能な副ブロックの副分
割に従って、現在のブロック28は、4つの四分円/副ブロック358に副分割される。
そして、左上の副ブロックは、ベース層の中で、領域362に対応している。明らかに、
この領域362は、ベース層の4つブロック(すなわち、予測ブロックの中の別の副分割
でなくて、その結果、予測ブロック自身を表わす、2つの予測ブロック306と2つの符
号化ユニット304)に重複する。従って、仮に、領域362を重複しているこれらの予
測ブロックの全てのベース層符号化パラメータが、類似性の基準を満足し、そして、これ
が更に可能な副ブロックの副分割354の全ての副ブロック/四分円、および、それらの
対応する領域を重複しているベース層符号化パラメータの場合であるならば、この可能な
副ブロックの副分割354は、それぞれの副ブロックの副分割の副ブロックによってカバ
ーされた全ての領域に対して十分な要件を満たして、副ブロックの副分割の組364に属
する。それから、この組364の中で、最も粗い副分割は矢印366によって示されるよ
うに選択され、その結果、組352から、選択された副ブロックの副分割368が得られ
る。
明らかに、組352の全てのメンバーに対してチェック356を実行することを避けよ
うとすることは好ましい。従って、図15dに示すように、かつ、前述したように、可能
な副分割354が大きさを増加または減少するために横断される。横断は、双頭矢印37
2を使用して示される。図15dは、少なくとも利用可能な副ブロックの副分割のいくつ
かに対して、大きさのレベルまたは大きさが互いに等しいことを示す。言い換えれば、大
きさの増加または減少するレベルに従った順序付けはあいまいである。しかしながら、そ
のような等しく大きい可能な副ブロックの副分割の1つが、組364に属するだけなので
、これは、組364に属する「最も大きい副ブロックの副分割」の検索を妨げない。従っ
て、選択されるべき副ブロックの副分割354である2番目から最後へ横断された可能な
副ブロックの副分割で、大きさが増加するレベルの方向に横断するときには、基準チェッ
ク356の結果が、充填されるから充填されないへ変わると直ぐに、最も大きい可能な副
ブロックの副分割368が見つけられる。または、副ブロックの副分割368である大部
分が最近横断された副ブロックの副分割で、大きさが減少するレベルの方向に横断すると
きには、基準チェック356の結果が、充填されないから充填されるへ切り替わる。
うとすることは好ましい。従って、図15dに示すように、かつ、前述したように、可能
な副分割354が大きさを増加または減少するために横断される。横断は、双頭矢印37
2を使用して示される。図15dは、少なくとも利用可能な副ブロックの副分割のいくつ
かに対して、大きさのレベルまたは大きさが互いに等しいことを示す。言い換えれば、大
きさの増加または減少するレベルに従った順序付けはあいまいである。しかしながら、そ
のような等しく大きい可能な副ブロックの副分割の1つが、組364に属するだけなので
、これは、組364に属する「最も大きい副ブロックの副分割」の検索を妨げない。従っ
て、選択されるべき副ブロックの副分割354である2番目から最後へ横断された可能な
副ブロックの副分割で、大きさが増加するレベルの方向に横断するときには、基準チェッ
ク356の結果が、充填されるから充填されないへ変わると直ぐに、最も大きい可能な副
ブロックの副分割368が見つけられる。または、副ブロックの副分割368である大部
分が最近横断された副ブロックの副分割で、大きさが減少するレベルの方向に横断すると
きには、基準チェック356の結果が、充填されないから充填されるへ切り替わる。
以下の図に対して、図1~図4に対して前述したようなスケーラブルビデオエンコーダ
またはデコーダが、応用の別の面に従って本応用の実施の形態を形成するために実施され
る。以下で記載された実施例の可能な実施の形態が、実施例K、A、およびMを引用しな
がら提示される。
またはデコーダが、応用の別の面に従って本応用の実施の形態を形成するために実施され
る。以下で記載された実施例の可能な実施の形態が、実施例K、A、およびMを引用しな
がら提示される。
実施例について説明するために、図17を参照する。図17は現在の部分28の時間予
測32に対する可能性を示す。その結果、図17の以下の記述は、中間層予測信号との組
み合わせに関係する限り、図6~図10に関する記述に組み合わされる。あるいは、時間
中間層予測モードとの組み合わせに関係する限り、図11~図13に関する記述に組み合
わされる。
測32に対する可能性を示す。その結果、図17の以下の記述は、中間層予測信号との組
み合わせに関係する限り、図6~図10に関する記述に組み合わされる。あるいは、時間
中間層予測モードとの組み合わせに関係する限り、図11~図13に関する記述に組み合
わされる。
図17に示された状況は、図6に示された状況に対応する。すなわち、ベース層信号2
00とエンハンスメント層信号400とは、斜線を使用して示されている既に符号化/復
号化された部分と共に、示されている。エンハンスメント層信号400の中で、現在、符
号化/復号化されるべき部分は、ここで、例示的に、現在の部分28の上のブロック92
と左の94として記載された、隣接するブロック92と94とを有している。両方のブロ
ック92と94は、例示的に、現在のブロック28と同じサイズを持っている。しかしな
がら、サイズの一致は義務的ではない。むしろ、副分割されているエンハンスメント層信
号400の画像22bの中のブロックの部分は、異なるサイズを有する。それらは矩形に
さえ制限されない。それらは、長方形、または、他の形でもよい。別の隣接しているブロ
ックを有する現在のブロック28は、図17に明確に記載されていない。しかしながら、
別の隣接しているブロックは、未だ符号化/復号化されていない。すなわち、それらは、
符号化/復号化の順序で続き、その結果、予測のために利用できない。これ以外に、既に
符号化/復号化の順序に従って符号化/復号化されたブロック92および94より他のブ
ロック、例示的に、現在のブロック28の隣の、現在のブロック28の左上斜めにあるブ
ロック96が存在する。しかし、ブロック92と94は、ここで考慮された例において、
中間予測30を受ける現在のブロック28のための中間予測パラメータを予測する役割を
する、隣接するブロックを予め決められる。そのような予め決められた隣接するブロック
の数は、2つに制限されない。それは、1より大きくてもよいし、単に1でもよい。可能
な実施の形態の議論は図36~図38に対して提示される。
00とエンハンスメント層信号400とは、斜線を使用して示されている既に符号化/復
号化された部分と共に、示されている。エンハンスメント層信号400の中で、現在、符
号化/復号化されるべき部分は、ここで、例示的に、現在の部分28の上のブロック92
と左の94として記載された、隣接するブロック92と94とを有している。両方のブロ
ック92と94は、例示的に、現在のブロック28と同じサイズを持っている。しかしな
がら、サイズの一致は義務的ではない。むしろ、副分割されているエンハンスメント層信
号400の画像22bの中のブロックの部分は、異なるサイズを有する。それらは矩形に
さえ制限されない。それらは、長方形、または、他の形でもよい。別の隣接しているブロ
ックを有する現在のブロック28は、図17に明確に記載されていない。しかしながら、
別の隣接しているブロックは、未だ符号化/復号化されていない。すなわち、それらは、
符号化/復号化の順序で続き、その結果、予測のために利用できない。これ以外に、既に
符号化/復号化の順序に従って符号化/復号化されたブロック92および94より他のブ
ロック、例示的に、現在のブロック28の隣の、現在のブロック28の左上斜めにあるブ
ロック96が存在する。しかし、ブロック92と94は、ここで考慮された例において、
中間予測30を受ける現在のブロック28のための中間予測パラメータを予測する役割を
する、隣接するブロックを予め決められる。そのような予め決められた隣接するブロック
の数は、2つに制限されない。それは、1より大きくてもよいし、単に1でもよい。可能
な実施の形態の議論は図36~図38に対して提示される。
スケーラブルビデオエンコーダとスケーラブルビデオデコーダは、その左上のサンプル
などの現在の部分28の中に、例えば、予め決められたサンプル位置98に依存している
、既に符号化された隣接しているブロック(ここでは、ブロック92~96)の組から、
予め決められた隣接しているブロック(ここでは、ブロック92,94)の組を決定する
。例えば、現在の部分28のそれらの既に符号化された隣接しているブロックのみが、予
め決められたサンプル位置98に直に隣接したサンプル位置を含む「予め決められた隣接
しているブロック」の組を形成する。別の可能性は図36~図38に対して説明される。
などの現在の部分28の中に、例えば、予め決められたサンプル位置98に依存している
、既に符号化された隣接しているブロック(ここでは、ブロック92~96)の組から、
予め決められた隣接しているブロック(ここでは、ブロック92,94)の組を決定する
。例えば、現在の部分28のそれらの既に符号化された隣接しているブロックのみが、予
め決められたサンプル位置98に直に隣接したサンプル位置を含む「予め決められた隣接
しているブロック」の組を形成する。別の可能性は図36~図38に対して説明される。
どのような場合でも、復号化/符号化の順序に従って、作動ベクトル504によって現
在のブロック28の共同配置された位置から置き換えられた、エンハンスメント層信号4
00の以前に符号化/復号化された画像22bの部分502が、単なるコピーや補間など
によって予測される部分28のサンプル値に基づいて再構成されたサンプル値を含む。こ
のために、作動ベクトル504は、エンハンスメント層副ストリーム6bの中で合図され
る。例えば、現在のブロック28のための時間予測パラメータは、部分28のサンプルの
上にコピーされるために、任意に補間によって引用画像22bの中の部分28の共同配置
された位置から部分502の置換えを示している変位ベクトル506を示す。
在のブロック28の共同配置された位置から置き換えられた、エンハンスメント層信号4
00の以前に符号化/復号化された画像22bの部分502が、単なるコピーや補間など
によって予測される部分28のサンプル値に基づいて再構成されたサンプル値を含む。こ
のために、作動ベクトル504は、エンハンスメント層副ストリーム6bの中で合図され
る。例えば、現在のブロック28のための時間予測パラメータは、部分28のサンプルの
上にコピーされるために、任意に補間によって引用画像22bの中の部分28の共同配置
された位置から部分502の置換えを示している変位ベクトル506を示す。
どのような場合でも、現在のブロック28を時間的に予測する時に、スケーラブルビデ
オデコーダ/エンコーダは、ベース層副ストリーム6aを使用して、ベース層200を既
に再構成している(そして、エンコーダの場合は、既に符号化している)。少なくとも、
時間的に対応する画像22aの関係する空間的に対応する領域がそのように関係する限り
、前述したように、ブロック的な予測を使用し、そして、例えば、空間予測モードと時間
予測モードとの間のブロック的な選択を使用する。
オデコーダ/エンコーダは、ベース層副ストリーム6aを使用して、ベース層200を既
に再構成している(そして、エンコーダの場合は、既に符号化している)。少なくとも、
時間的に対応する画像22aの関係する空間的に対応する領域がそのように関係する限り
、前述したように、ブロック的な予測を使用し、そして、例えば、空間予測モードと時間
予測モードとの間のブロック的な選択を使用する。
図17において、ベース層信号200の画像22aを共同配置された時間が、数ブロッ
ク104に副分割されている。ブロック104は、例示的に表わされる現在の部分28に
局所的に対応している領域で、周りに位置する。ちょうどそれは、エンハンスメント層信
号400の中の空間的に予測されたブロックを有する場合である。空間予測パラメータは
、ベース層信号200の中でそれらのブロック104に対してベース層副ストリーム6a
の中に含まれ、または合図される。空間予測モードの選択は、ベース層信号200に対し
て合図される。
ク104に副分割されている。ブロック104は、例示的に表わされる現在の部分28に
局所的に対応している領域で、周りに位置する。ちょうどそれは、エンハンスメント層信
号400の中の空間的に予測されたブロックを有する場合である。空間予測パラメータは
、ベース層信号200の中でそれらのブロック104に対してベース層副ストリーム6a
の中に含まれ、または合図される。空間予測モードの選択は、ベース層信号200に対し
て合図される。
ここで、例示的に、時間内部層予測32が選択されたブロック28に対して、符号化デ
ータストリームからエンハンスメント層信号の再構成を許すために、作動パラメータのよ
うな中間予測パラメータが、以下の方法のどれかを使用して決定される。
ータストリームからエンハンスメント層信号の再構成を許すために、作動パラメータのよ
うな中間予測パラメータが、以下の方法のどれかを使用して決定される。
最初の可能性は図18に対して説明される。特に、先ず、作動パラメータ候補514の
組512が、予め決められたブロック92と94のようなフレームの隣接する既に再構成
されたブロックから集められる、または、発生される。作動パラメータは作動ベクトルで
ある。ブロック92と94の作動ベクトルは、(その中に、)それぞれ1と2が記された
矢印516と518を使用して、表わされる。示されているように、これらの作動パラメ
ータ516と518は、直接に候補514を形成する。いくつかの候補は図18に示すよ
うに、518や516のような作動ベクトルを結合することによって形成される。
組512が、予め決められたブロック92と94のようなフレームの隣接する既に再構成
されたブロックから集められる、または、発生される。作動パラメータは作動ベクトルで
ある。ブロック92と94の作動ベクトルは、(その中に、)それぞれ1と2が記された
矢印516と518を使用して、表わされる。示されているように、これらの作動パラメ
ータ516と518は、直接に候補514を形成する。いくつかの候補は図18に示すよ
うに、518や516のような作動ベクトルを結合することによって形成される。
さらに、部分28に共同配置された、ベース層信号200のブロック108の1つ以上
のベース層作動パラメータ524の組522は、ベース層作動パラメータから集められ、
または、発生される。言い換えれば、ベース層の中で共同配置されたブロック108に関
係した作動パラメータは、1つ以上のベース層作動パラメータ524を得るために使用さ
れる。
のベース層作動パラメータ524の組522は、ベース層作動パラメータから集められ、
または、発生される。言い換えれば、ベース層の中で共同配置されたブロック108に関
係した作動パラメータは、1つ以上のベース層作動パラメータ524を得るために使用さ
れる。
その時は、1つ以上のベース層作動パラメータ524、または、それのスケーリングさ
れたバージョンが、作動パラメータ候補の拡張作動パラメータ候補組528を得るために
、作動パラメータ候補514の組512に加算526される。これは、候補514のリス
トの終わりでベース層作動パラメータ524を単に追加するような多岐の方法で、または
、一例が図19aに対して概説される異なる方法でなされる。
れたバージョンが、作動パラメータ候補の拡張作動パラメータ候補組528を得るために
、作動パラメータ候補514の組512に加算526される。これは、候補514のリス
トの終わりでベース層作動パラメータ524を単に追加するような多岐の方法で、または
、一例が図19aに対して概説される異なる方法でなされる。
少なくとも拡張作動パラメータ候補組528の作動パラメータ候補532の一つが、次
に、選択される。部分28の作動補償予測によって、時間予測32が、拡張作動パラメー
タ候補組の作動パラメータ候補の選択された一つを使用して、実行される。選択534は
、リスト/組528の中のインデックス536の方法によって、部分28のための副スト
リーム6bのようなデータストリームの中で合図化される、または、図19aに対して説
明される別の方法で実行される。
に、選択される。部分28の作動補償予測によって、時間予測32が、拡張作動パラメー
タ候補組の作動パラメータ候補の選択された一つを使用して、実行される。選択534は
、リスト/組528の中のインデックス536の方法によって、部分28のための副スト
リーム6bのようなデータストリームの中で合図化される、または、図19aに対して説
明される別の方法で実行される。
前述したように、ベース層作動パラメータ523が、融合を使用して、ベース層副スト
リーム6aのような符号化データストリームの中で符号化されたか否かがチェックされる
。そして、仮に、ベース層作動パラメータ523が、融合を使用して、符号化データスト
リームの中で符号化されるならば、加算526は抑圧される。
リーム6aのような符号化データストリームの中で符号化されたか否かがチェックされる
。そして、仮に、ベース層作動パラメータ523が、融合を使用して、符号化データスト
リームの中で符号化されるならば、加算526は抑圧される。
図18に従って述べた作動パラメータは、作動ベクトル(作動ベクトル予測)だけに、
または、ブロック、引用インデックスリスト、仕切っている情報(融合)毎に、作動仮説
の数を含む作動パラメータの完全な組に関係する。従って、「スケーリングされたバージ
ョン」は、空間スケーラビリティの場合に、ベース層信号とエンハンスメント層信号との
間の空間解像度比率に従ってベース層信号の中で使用される作動パラメータのスケーリン
グから由来する。符号化データストリームの方法によって、ベース層信号のベース層作動
パラメータの符号化/復号化が、空間的または時間的のような作動ベクトル予測、または
、融合化に関わる。
または、ブロック、引用インデックスリスト、仕切っている情報(融合)毎に、作動仮説
の数を含む作動パラメータの完全な組に関係する。従って、「スケーリングされたバージ
ョン」は、空間スケーラビリティの場合に、ベース層信号とエンハンスメント層信号との
間の空間解像度比率に従ってベース層信号の中で使用される作動パラメータのスケーリン
グから由来する。符号化データストリームの方法によって、ベース層信号のベース層作動
パラメータの符号化/復号化が、空間的または時間的のような作動ベクトル予測、または
、融合化に関わる。
融合/作動ベクトル候補532の組528の中のベース層信号の共同配置された部分1
08で使用された作動パラメータ523の編入526は、内部層候補514と1つ以上の
中間層候補524との中で、非常に有能な索引を可能にする。選択534は、予測ブロッ
ク毎に、符号化ユニットまたは同様のもの毎に、エンハンスメント層信号6bの中の作動
パラメータ候補の拡張された組/リストの中のインデックスの明白な合図に関わる。ある
いはまた、選択インデックス536は、エンハンスメント層信号6bの別の情報、または
、中間層の情報から推論される。
08で使用された作動パラメータ523の編入526は、内部層候補514と1つ以上の
中間層候補524との中で、非常に有能な索引を可能にする。選択534は、予測ブロッ
ク毎に、符号化ユニットまたは同様のもの毎に、エンハンスメント層信号6bの中の作動
パラメータ候補の拡張された組/リストの中のインデックスの明白な合図に関わる。ある
いはまた、選択インデックス536は、エンハンスメント層信号6bの別の情報、または
、中間層の情報から推論される。
図19aの可能性に従って、部分28のためのエンハンスメント層信号のための最終作
動パラメータ候補リストの形成542は、図18に関して概説されているように、任意に
実行されるだけである。すなわち、形成542は、528または512でもよい。しかし
ながら、リスト528/512は、例えば、共同配置されたベース層ブロック108の(
作動ベクトル523によって表わされた)作動パラメータなどのベース層作動パラメータ
に依存して順序付け544られる。例えば、メンバー(すなわち、リスト528/512
の作動パラメータ候補532または514)のランクが、作動パラメータ523の潜在的
にスケーリングされたバージョンに対して、それぞれのメンバーの偏差に基づいて決定さ
れる。偏差が大きければ大きいほど、順序付けリスト528/512´の中のそれぞれの
メンバー532/512のランクが低い。その結果、順序付け544は、リスト528/
512のメンバー532/514毎に、偏差の大きさの決定に関わる。順序付けリスト5
28/512´の中の1つの候補532/512の選択534は、エンハンスメント層信
号の部分28に対して、順序付けられた作動パラメータ候補リスト528/512´から
エンハンスメント層作動パラメータを得るために、符号化データストリームの中の明らか
に合図されたインデックス構文要素536を経由して実行され、制御される。そして、次
に、時間予測32は、エンハンスメント層信号の部分28の作動補償予測によって、イン
デックス536が534を指す、選択された作動パラメータを使用して実行される。
動パラメータ候補リストの形成542は、図18に関して概説されているように、任意に
実行されるだけである。すなわち、形成542は、528または512でもよい。しかし
ながら、リスト528/512は、例えば、共同配置されたベース層ブロック108の(
作動ベクトル523によって表わされた)作動パラメータなどのベース層作動パラメータ
に依存して順序付け544られる。例えば、メンバー(すなわち、リスト528/512
の作動パラメータ候補532または514)のランクが、作動パラメータ523の潜在的
にスケーリングされたバージョンに対して、それぞれのメンバーの偏差に基づいて決定さ
れる。偏差が大きければ大きいほど、順序付けリスト528/512´の中のそれぞれの
メンバー532/512のランクが低い。その結果、順序付け544は、リスト528/
512のメンバー532/514毎に、偏差の大きさの決定に関わる。順序付けリスト5
28/512´の中の1つの候補532/512の選択534は、エンハンスメント層信
号の部分28に対して、順序付けられた作動パラメータ候補リスト528/512´から
エンハンスメント層作動パラメータを得るために、符号化データストリームの中の明らか
に合図されたインデックス構文要素536を経由して実行され、制御される。そして、次
に、時間予測32は、エンハンスメント層信号の部分28の作動補償予測によって、イン
デックス536が534を指す、選択された作動パラメータを使用して実行される。
図19aで言及された作動パラメータに対して、上で図18に関して述べられた作動パ
ラメータが適用される。符号化データストリームからのベース層作動パラメータ520の
復号化は、(任意に)空間的または時間的作動ベクトル予測、または、融合に関わる。順
序付けが、ちょうど、エンハンスメント層信号の現在のブロックに共同配置されたベース
層信号のブロックに関係して、それぞれのエンハンスメント層作動パラメータ候補とベー
ス層信号のベース層作動パラメータとの間の差を大きくする大きさに従ってなされる。す
なわち、エンハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パ
ラメータ候補のリストが、最初に決定される。次に、順序付けが実行されることが、説明
される。以下に、選択は明白な合図で実行される。
ラメータが適用される。符号化データストリームからのベース層作動パラメータ520の
復号化は、(任意に)空間的または時間的作動ベクトル予測、または、融合に関わる。順
序付けが、ちょうど、エンハンスメント層信号の現在のブロックに共同配置されたベース
層信号のブロックに関係して、それぞれのエンハンスメント層作動パラメータ候補とベー
ス層信号のベース層作動パラメータとの間の差を大きくする大きさに従ってなされる。す
なわち、エンハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パ
ラメータ候補のリストが、最初に決定される。次に、順序付けが実行されることが、説明
される。以下に、選択は明白な合図で実行される。
あるいはまた、順序付け544が、エンハンスメント層信号の現在のブロック28に共
同配置されたベース層信号のブロック108に関係しているベース層信号のベース層作動
パラメータ523と、ベース層の中の空間的および/または時間的に隣接するブロック5
48のベース層作動パラメータ546との間の差を大きくする大きさに従ってなされる。
次に、ベース層の中の決定された順序付けが、エンハンスメント層に移送される。その結
果、エンハンスメント層作動パラメータ候補が、対応するベース層候補に対して、決定さ
れた順序付けと同じ方法で、順序付けられる。この点で、関係ベース層ブロック548が
、考慮されたエンハンスメント層作動パラメータに関係する、隣接するエンハンスメント
層ブロック92と94に空間的/時間的に共同配置されるとき、ベース層作動パラメータ
546が、隣接しているエンハンスメント層ブロック92,94のエンハンスメント層作
動パラメータに対応すると言われる。あるいはまた、関係ベース層ブロック548と現在
のエンハンスメント層ブロック28に共同配置されたブロック108との間の隣接関係(
左隣、上隣、A1,A2,B1,B2,B0、または、更なる例に対して図36~図38
を参照)が、現在のエンハンスメント層ブロック28とそれぞれエンハンスメント層隣接
ブロック92,94との間の隣接関係と同じであるとき、ベース層作動パラメータ546
は、エンハンスメント層隣接ブロック92,94のエンハンスメント層作動パラメータに
対応すると言われる。ベース層順序付けに基づいて、選択534が、その時、明白な合図
によって実行される。
同配置されたベース層信号のブロック108に関係しているベース層信号のベース層作動
パラメータ523と、ベース層の中の空間的および/または時間的に隣接するブロック5
48のベース層作動パラメータ546との間の差を大きくする大きさに従ってなされる。
次に、ベース層の中の決定された順序付けが、エンハンスメント層に移送される。その結
果、エンハンスメント層作動パラメータ候補が、対応するベース層候補に対して、決定さ
れた順序付けと同じ方法で、順序付けられる。この点で、関係ベース層ブロック548が
、考慮されたエンハンスメント層作動パラメータに関係する、隣接するエンハンスメント
層ブロック92と94に空間的/時間的に共同配置されるとき、ベース層作動パラメータ
546が、隣接しているエンハンスメント層ブロック92,94のエンハンスメント層作
動パラメータに対応すると言われる。あるいはまた、関係ベース層ブロック548と現在
のエンハンスメント層ブロック28に共同配置されたブロック108との間の隣接関係(
左隣、上隣、A1,A2,B1,B2,B0、または、更なる例に対して図36~図38
を参照)が、現在のエンハンスメント層ブロック28とそれぞれエンハンスメント層隣接
ブロック92,94との間の隣接関係と同じであるとき、ベース層作動パラメータ546
は、エンハンスメント層隣接ブロック92,94のエンハンスメント層作動パラメータに
対応すると言われる。ベース層順序付けに基づいて、選択534が、その時、明白な合図
によって実行される。
さらに詳細にこれについて説明するために、図19bを参照する。図19bは、ベース
層ヒントを使用して、作動パラメータ候補のリストのために順序付けされるエンハンスメ
ント層を得るための概説される代替の1番目を示す。図19bは、代替の現在のブロック
28と、3つの異なる予め決められたサンプル(すなわち、例示的に、左上のサンプル5
81、左下のサンプル583および右上のサンプル585)の位置とを示す。例は、説明
としてのみ挿入される。予め決められた隣接するブロックの組が、例示的に隣接の4つの
タイプ含む。隣接するブロック94aは、サンプル位置581の直ぐ上に隣接するサンプ
ル位置587をカバーする。隣接するブロック94bは、サンプル位置585の直ぐ上に
隣接して位置するサンプル位置589を含む、またはカバーする。同様に、隣接するブロ
ック92aと92bは、サンプル位置581と583の直ぐ左側に隣接して位置するサン
プル位置591と593を含む。また、図36~図38に対して説明されるように、予め
決められた数の決定規則にもかかわらず、予め決められた隣接するブロックの数は変化す
る。それにもかかわらず、予め決められた隣接するブロック92a,92b,94a,9
4bは、それらの決定規則によって区別できる。
層ヒントを使用して、作動パラメータ候補のリストのために順序付けされるエンハンスメ
ント層を得るための概説される代替の1番目を示す。図19bは、代替の現在のブロック
28と、3つの異なる予め決められたサンプル(すなわち、例示的に、左上のサンプル5
81、左下のサンプル583および右上のサンプル585)の位置とを示す。例は、説明
としてのみ挿入される。予め決められた隣接するブロックの組が、例示的に隣接の4つの
タイプ含む。隣接するブロック94aは、サンプル位置581の直ぐ上に隣接するサンプ
ル位置587をカバーする。隣接するブロック94bは、サンプル位置585の直ぐ上に
隣接して位置するサンプル位置589を含む、またはカバーする。同様に、隣接するブロ
ック92aと92bは、サンプル位置581と583の直ぐ左側に隣接して位置するサン
プル位置591と593を含む。また、図36~図38に対して説明されるように、予め
決められた数の決定規則にもかかわらず、予め決められた隣接するブロックの数は変化す
る。それにもかかわらず、予め決められた隣接するブロック92a,92b,94a,9
4bは、それらの決定規則によって区別できる。
図19bの代替に従って、それぞれ予め決められた隣接するブロック92a,92b,
94a,94bに対して、ベース層の中の共同配置されたブロックが決定される。例えば
、このために、それぞれ隣接するブロックの左上のサンプル595が使用される。ちょう
どそれは、図19aの中で正式に言及された左上のサンプル581に関して、現在のブロ
ック28を有する場合である。これは、図19bに中で、点線の矢印を使用して説明され
る。この手段によって、予め決められた隣接するブロックのそれぞれに対して、対応する
ブロック597が、共同配置されたブロック108、共同配置された現在のブロック28
に加えて見つけられる。共同配置されたベース層ブロック597の作動パラメータm1,
m2,m3,m4と、共同配置されたベース層ブロック108のベース層作動パラメータ
mに対するそれらのそれぞれの差とを使用して、予め決められた隣接するブロック92a
,92b,94a,94bのエンハンスメント層M1,M2,M3,M4が、リスト52
8または512の中で順序付けされる。例えば、m1~m4のどれかの距離が大きければ
大きいほど、対応するエンハンスメント層作動パラメータM1~M4はより高い。すなわ
ち、より高いインデックスリストが、リスト528/512´から同じ状態で索引を付け
るために必要である。距離の大きさに対して、絶対差が使用される。同様にして、作動パ
ラメータ候補532または514は、エンハンスメント層作動パラメータM1~M4の結
合であるそれらのランクに対して、リストの中で再配列される。
94a,94bに対して、ベース層の中の共同配置されたブロックが決定される。例えば
、このために、それぞれ隣接するブロックの左上のサンプル595が使用される。ちょう
どそれは、図19aの中で正式に言及された左上のサンプル581に関して、現在のブロ
ック28を有する場合である。これは、図19bに中で、点線の矢印を使用して説明され
る。この手段によって、予め決められた隣接するブロックのそれぞれに対して、対応する
ブロック597が、共同配置されたブロック108、共同配置された現在のブロック28
に加えて見つけられる。共同配置されたベース層ブロック597の作動パラメータm1,
m2,m3,m4と、共同配置されたベース層ブロック108のベース層作動パラメータ
mに対するそれらのそれぞれの差とを使用して、予め決められた隣接するブロック92a
,92b,94a,94bのエンハンスメント層M1,M2,M3,M4が、リスト52
8または512の中で順序付けされる。例えば、m1~m4のどれかの距離が大きければ
大きいほど、対応するエンハンスメント層作動パラメータM1~M4はより高い。すなわ
ち、より高いインデックスリストが、リスト528/512´から同じ状態で索引を付け
るために必要である。距離の大きさに対して、絶対差が使用される。同様にして、作動パ
ラメータ候補532または514は、エンハンスメント層作動パラメータM1~M4の結
合であるそれらのランクに対して、リストの中で再配列される。
図19cは、ベース層の中の対応するブロックが、別の方法で決定される代替を示す。
特に、図19cは、現在のブロック28の予め決められた隣接ブロック92a,92b,
94a,94b、および、現在のブロック28の共同配置されたブロック108を示す。
図19cの実施の形態に従って、現在のブロック28のこれらに対応するベース層ブロッ
ク(すなわち、92a,92b,94a,94b)が、これらのベース層ブロックが、こ
れらのベース層隣接ブロックを決定するために同じ隣接決定規則を使用して、エンハンス
メント層隣接ブロック92a,92b,94a,94bに関係するような方法で決定され
る。特に、図19cは、共同配置されたブロック108の予め決められたサンプル位置、
すなわち、左上、左下、および右上のサンプル位置601を示す。これらのサンプル位置
に基づいて、ブロック108の4つの隣接ブロックが、現在のブロック28の予め決めら
れたサンプル位置581,583,585に関するエンハンスメント層隣接ブロック92
a,92b,94a,94bに関して記述されたのと同じ方法で決定される。4つのベー
ス層隣接ブロック603a,603b,605a,605bは、この様にして見つけられ
る。603aは、明らかにエンハンスメント層隣接ブロック92aに対応する。ベース層
ブロック603bは、エンハンスメント層隣接ブロック92bに対応する。ベース層ブロ
ック605aは、エンハンスメント層隣接ブロック94aに対応する。ベース層ブロック
605bは、エンハンスメント層隣接ブロック94bに対応する。以前説明したのと同じ
方法で、ベース層ブロック903a,903b,905a,905bのベース層作動パラ
メータM1~M4と、共同配置されたベース層ブロック108のベース層作動パラメータ
mに対するそれらの距離とが、エンハンスメント層ブロック92a,92b,94a,9
4bの作動パラメータM1~M4から形成されたリスト528/512の中で作動パラメ
ータ候補を順序付けるために使用される。
特に、図19cは、現在のブロック28の予め決められた隣接ブロック92a,92b,
94a,94b、および、現在のブロック28の共同配置されたブロック108を示す。
図19cの実施の形態に従って、現在のブロック28のこれらに対応するベース層ブロッ
ク(すなわち、92a,92b,94a,94b)が、これらのベース層ブロックが、こ
れらのベース層隣接ブロックを決定するために同じ隣接決定規則を使用して、エンハンス
メント層隣接ブロック92a,92b,94a,94bに関係するような方法で決定され
る。特に、図19cは、共同配置されたブロック108の予め決められたサンプル位置、
すなわち、左上、左下、および右上のサンプル位置601を示す。これらのサンプル位置
に基づいて、ブロック108の4つの隣接ブロックが、現在のブロック28の予め決めら
れたサンプル位置581,583,585に関するエンハンスメント層隣接ブロック92
a,92b,94a,94bに関して記述されたのと同じ方法で決定される。4つのベー
ス層隣接ブロック603a,603b,605a,605bは、この様にして見つけられ
る。603aは、明らかにエンハンスメント層隣接ブロック92aに対応する。ベース層
ブロック603bは、エンハンスメント層隣接ブロック92bに対応する。ベース層ブロ
ック605aは、エンハンスメント層隣接ブロック94aに対応する。ベース層ブロック
605bは、エンハンスメント層隣接ブロック94bに対応する。以前説明したのと同じ
方法で、ベース層ブロック903a,903b,905a,905bのベース層作動パラ
メータM1~M4と、共同配置されたベース層ブロック108のベース層作動パラメータ
mに対するそれらの距離とが、エンハンスメント層ブロック92a,92b,94a,9
4bの作動パラメータM1~M4から形成されたリスト528/512の中で作動パラメ
ータ候補を順序付けるために使用される。
図20の可能性に従って、部分28のためのエンハンスメント層信号のための最終作動
パラメータ候補リストの形成562は、図18および/または図19に対して概説されて
いるように、単に任意に実行される。すなわち、形成562は、528または512また
は528/512´である。引用符号564は図20で使用される。図20に従って、作
動パラメータ候補リスト564の中で指摘するインデックス566は、例えば、共同配置
されたブロック108に対して、ベース層信号を符号化/復号化するために使用された、
作動パラメータ候補リスト568の中のインデックス567に依存して決定される。例え
ば、ブロック108でベース層信号を再構成する際、作動パラメータ候補のリスト568
は、予め決められた隣接するエンハンスメント層ブロック92,94と現在のブロック2
8との間の隣接関係と同じであるブロック108に対して、隣接関係(左側に隣接、上側
に隣接、A1,A2,B1,B2,B0、または、別の例に対しては図36~38参照)
を有しているブロック108の隣接するブロック548の作動パラメータ548に基づい
て決定される。ここで、リスト567の決定572は、リスト568と564のリストメ
ンバーの中の順序付けなどの形成562の中で使用されるのと同じ構成規則を潜在的に使
用する。より一般的に、エンハンスメント層のためのインデックス566は、その隣接す
るエンハンスメント層ブロック92,94が、索引をつけられたベース層候補(すなわち
、インデックス567が指摘するもの)に関係したベース層ブロック548と共同配置さ
れたインデックス566によって指摘される方法で決定される。その結果、インデックス
567は、インデックス566の重要な予測として機能する。エンハンスメント層作動パ
ラメータは、その時、作動パラメータ候補リスト564の中のインデックス566を使用
して決定され、そして、ブロック28の作動補償予測は、決定された作動パラメータを使
用して実行される。
パラメータ候補リストの形成562は、図18および/または図19に対して概説されて
いるように、単に任意に実行される。すなわち、形成562は、528または512また
は528/512´である。引用符号564は図20で使用される。図20に従って、作
動パラメータ候補リスト564の中で指摘するインデックス566は、例えば、共同配置
されたブロック108に対して、ベース層信号を符号化/復号化するために使用された、
作動パラメータ候補リスト568の中のインデックス567に依存して決定される。例え
ば、ブロック108でベース層信号を再構成する際、作動パラメータ候補のリスト568
は、予め決められた隣接するエンハンスメント層ブロック92,94と現在のブロック2
8との間の隣接関係と同じであるブロック108に対して、隣接関係(左側に隣接、上側
に隣接、A1,A2,B1,B2,B0、または、別の例に対しては図36~38参照)
を有しているブロック108の隣接するブロック548の作動パラメータ548に基づい
て決定される。ここで、リスト567の決定572は、リスト568と564のリストメ
ンバーの中の順序付けなどの形成562の中で使用されるのと同じ構成規則を潜在的に使
用する。より一般的に、エンハンスメント層のためのインデックス566は、その隣接す
るエンハンスメント層ブロック92,94が、索引をつけられたベース層候補(すなわち
、インデックス567が指摘するもの)に関係したベース層ブロック548と共同配置さ
れたインデックス566によって指摘される方法で決定される。その結果、インデックス
567は、インデックス566の重要な予測として機能する。エンハンスメント層作動パ
ラメータは、その時、作動パラメータ候補リスト564の中のインデックス566を使用
して決定され、そして、ブロック28の作動補償予測は、決定された作動パラメータを使
用して実行される。
図20で言及した作動パラメータに対して、図18と図19に関して上述したと同じこ
とが適用される。
とが適用される。
以下の図に関して、図1~図4に対して上述したそれらのように、スケーラブルビデオ
エンコーダまたはデコーダが、応用の別の実施例に従って、本応用の実施の形態を形成す
るためにどのようにして実行できるかが記載される。以下に説明される実施例の詳細な実
現は、以下で実施例Vを引用して説明される。
エンコーダまたはデコーダが、応用の別の実施例に従って、本応用の実施の形態を形成す
るためにどのようにして実行できるかが記載される。以下に説明される実施例の詳細な実
現は、以下で実施例Vを引用して説明される。
本実施例は、エンハンスメント層の中の残留符号化に関する。特に、図21は、例示的
に、エンハンスメント層信号400の画像22bと、ベース層信号200の画像22aと
を、時間的に登録された方法で示す。図21は、スケーラブルビデオデコーダの中で再構
成する、または、スケーラブルビデオエンコーダの中で符号化する方法、およびエンハン
スメント層信号を示し、エンハンスメント層信号400を表わす変換係数402の予め決
められた変換係数ブロックと予め決められた部分404とに集中する。言い換えれば、変
換係数ブロック402は、エンハンスメント層信号400の部分404の空間分解を表わ
す。符号化/復号化の順序付けに従って既に上で説明したように、ベース層信号200の
対応する部分406は、変換係数ブロック402を復号化/符号化する時に、既に復号化
/符号化されている。ベース層信号200に関する限り、予測の符号化/復号化は、ベー
ス層副ストリーム6aなどの符号化データストリームの中のベース層残留信号の信号化を
含めて、使用されている。
に、エンハンスメント層信号400の画像22bと、ベース層信号200の画像22aと
を、時間的に登録された方法で示す。図21は、スケーラブルビデオデコーダの中で再構
成する、または、スケーラブルビデオエンコーダの中で符号化する方法、およびエンハン
スメント層信号を示し、エンハンスメント層信号400を表わす変換係数402の予め決
められた変換係数ブロックと予め決められた部分404とに集中する。言い換えれば、変
換係数ブロック402は、エンハンスメント層信号400の部分404の空間分解を表わ
す。符号化/復号化の順序付けに従って既に上で説明したように、ベース層信号200の
対応する部分406は、変換係数ブロック402を復号化/符号化する時に、既に復号化
/符号化されている。ベース層信号200に関する限り、予測の符号化/復号化は、ベー
ス層副ストリーム6aなどの符号化データストリームの中のベース層残留信号の信号化を
含めて、使用されている。
図21に対して記載された実施例に従って、スケーラブルビデオデコーダ/エンコーダ
は、ベース層信号またはベース層残留信号の評価408が、部分404に共同配置された
部分406にて、副ブロック412の中の変換係数ブロック402の副分割の有利な選択
をもたらすという事実を利用する。特に、変換係数ブロック402を副ブロックに副分割
するためのいくつかの可能な副ブロックの副分割が、スケーラブルビデオデコーダ/エン
コーダによってサポートされる。これらの可能な副ブロックの副分割は、規則的に矩形の
副ブロック412の中の変換係数ブロック402を副分割する。すなわち、変換係数ブロ
ック402の変換係数414が、列と行に配置され、そして、可能な副ブロックの副分割
に従って、これらの変換係数414が、規則的に副ブロック412の中に密集させられる
ので、副ブロック412自身が行と列に並べられる。評価408は、このようにして選択
された副ブロックの副分割を使用して、変換係数ブロック402の符号化が、最も効率的
であるような方法で、副ブロック412の行の数と列の数との間の比(すなわち、それら
の幅と高さとの間の比)を設定可能にする。仮に、例えば、評価408が、共同配置され
た部分406の中の再構成されたベース層信号200、または少なくとも対応する部分4
06の中のベース層残留信号が、空間領域の中の水平なエッジで主として構成される、と
いうことを判明するならば、変換係数ブロック402は、重要さ(すなわち、変換係数レ
ベルが非ゼロである、すなわち、量子化された変換係数が、変換係数ブロック402のゼ
ロ水平周波数側の近くである)を有して、たぶん存在する。垂直なエッジの場合、変換係
数ブロック402は、変換係数ブロック402のゼロ垂直周波数側の近くの位置で、非ゼ
ロの変換係数レベルを有して、たぶん存在する。従って、先ず、副ブロック412が、垂
直方向に沿ってより長く、かつ、水平方向に沿ってより小さくなるように選択される。そ
して、2番目に、副ブロックは、水平方向により長く、かつ、垂直方向により小さくされ
る。後者の場合が模式的に図40に示されている。
は、ベース層信号またはベース層残留信号の評価408が、部分404に共同配置された
部分406にて、副ブロック412の中の変換係数ブロック402の副分割の有利な選択
をもたらすという事実を利用する。特に、変換係数ブロック402を副ブロックに副分割
するためのいくつかの可能な副ブロックの副分割が、スケーラブルビデオデコーダ/エン
コーダによってサポートされる。これらの可能な副ブロックの副分割は、規則的に矩形の
副ブロック412の中の変換係数ブロック402を副分割する。すなわち、変換係数ブロ
ック402の変換係数414が、列と行に配置され、そして、可能な副ブロックの副分割
に従って、これらの変換係数414が、規則的に副ブロック412の中に密集させられる
ので、副ブロック412自身が行と列に並べられる。評価408は、このようにして選択
された副ブロックの副分割を使用して、変換係数ブロック402の符号化が、最も効率的
であるような方法で、副ブロック412の行の数と列の数との間の比(すなわち、それら
の幅と高さとの間の比)を設定可能にする。仮に、例えば、評価408が、共同配置され
た部分406の中の再構成されたベース層信号200、または少なくとも対応する部分4
06の中のベース層残留信号が、空間領域の中の水平なエッジで主として構成される、と
いうことを判明するならば、変換係数ブロック402は、重要さ(すなわち、変換係数レ
ベルが非ゼロである、すなわち、量子化された変換係数が、変換係数ブロック402のゼ
ロ水平周波数側の近くである)を有して、たぶん存在する。垂直なエッジの場合、変換係
数ブロック402は、変換係数ブロック402のゼロ垂直周波数側の近くの位置で、非ゼ
ロの変換係数レベルを有して、たぶん存在する。従って、先ず、副ブロック412が、垂
直方向に沿ってより長く、かつ、水平方向に沿ってより小さくなるように選択される。そ
して、2番目に、副ブロックは、水平方向により長く、かつ、垂直方向により小さくされ
る。後者の場合が模式的に図40に示されている。
すなわち、スケーラブルビデオデコーダ/エンコーダは、ベース層残留信号またはベー
ス層信号に基づいて、可能な副ブロックの副分割の組の中で、1つの副ブロックの副分割
を選択する。その時、変換係数ブロック402の符号化414または復号化が、選択され
た副ブロックの副分割を適用しながら実行される。特に、変換係数414の位置が、副ブ
ロック412のユニットの中で横断されるので、1つの副ブロックの中の全ての位置は、
副ブロックの中で定義された副ブロックの順序付けの中で、次の副ブロックに直ぐに連続
して続く方法で横断される。副ブロック412などの現在訪問された副ブロックが、図4
0に例示的に示されている、構文要素は、現在訪問された副ブロックが重要な変換係数を
有するか否かを示す、エンハンスメント層副ストリーム6bなどのデータストリームの中
で合図される。図21では、構文要素416が、2つの例示的な副ブロックに対して説明
される。仮に、それぞれの副ブロックのそれぞれの構文要素が、重要でない変換係数を示
すならば、他には何も、データストリームまたはエンハンスメント層副ストリーム6bの
の中で送信される必要がない。むしろ、スケーラブルビデオデコーダは、その副ブロック
の中の変換係数をゼロに設定する。しかしながら、仮に、それぞれの副ブロックの構文要
素416が、この副ブロックは重要な変換係数を有する、ことを示すならば、その副ブロ
ックの中で変換係数に関係する別の情報が、データストリームまたは副ストリーム6bの
中で合図される。復号化側では、スケーラブルビデオデコーダが、データストリームまた
は副ストリーム6bから、それぞれの副ブロックの中の変換係数のレベルを示す構文要素
418を復号化する。構文要素418は、それぞれの副ブロックの中のこれらの変換係数
の中の走査順序、および、任意に、それぞれの副ブロックの中の変換係数の中の走査順序
に従って、その副ブロックの中の重要な変換係数の位置を示す。
ス層信号に基づいて、可能な副ブロックの副分割の組の中で、1つの副ブロックの副分割
を選択する。その時、変換係数ブロック402の符号化414または復号化が、選択され
た副ブロックの副分割を適用しながら実行される。特に、変換係数414の位置が、副ブ
ロック412のユニットの中で横断されるので、1つの副ブロックの中の全ての位置は、
副ブロックの中で定義された副ブロックの順序付けの中で、次の副ブロックに直ぐに連続
して続く方法で横断される。副ブロック412などの現在訪問された副ブロックが、図4
0に例示的に示されている、構文要素は、現在訪問された副ブロックが重要な変換係数を
有するか否かを示す、エンハンスメント層副ストリーム6bなどのデータストリームの中
で合図される。図21では、構文要素416が、2つの例示的な副ブロックに対して説明
される。仮に、それぞれの副ブロックのそれぞれの構文要素が、重要でない変換係数を示
すならば、他には何も、データストリームまたはエンハンスメント層副ストリーム6bの
の中で送信される必要がない。むしろ、スケーラブルビデオデコーダは、その副ブロック
の中の変換係数をゼロに設定する。しかしながら、仮に、それぞれの副ブロックの構文要
素416が、この副ブロックは重要な変換係数を有する、ことを示すならば、その副ブロ
ックの中で変換係数に関係する別の情報が、データストリームまたは副ストリーム6bの
中で合図される。復号化側では、スケーラブルビデオデコーダが、データストリームまた
は副ストリーム6bから、それぞれの副ブロックの中の変換係数のレベルを示す構文要素
418を復号化する。構文要素418は、それぞれの副ブロックの中のこれらの変換係数
の中の走査順序、および、任意に、それぞれの副ブロックの中の変換係数の中の走査順序
に従って、その副ブロックの中の重要な変換係数の位置を示す。
図22は、評価408の中の可能な副ブロックの副分割の中での選択を実行するために
それぞれ存在する、異なる可能性を示す。図22は、変換係数ブロック402が部分40
4のスペクトル分解を表すことに関係する、エンハンスメント層信号の部分404を再び
記載する。例えば、変換係数ブロック402は、エンハンスメント層信号を予測的に符号
化/復号化するスケーラブルビデオデコーダ/エンコーダを伴う、エンハンスメント層残
留信号のスペクトル分解を表わす。特に、変換の符号化/復号化は、エンハンスメント層
残留信号を符号化するために、スケーラブルビデオデコーダ/エンコーダによって使用さ
れる。変換の符号化/復号化は、ブロック的な(すなわち、エンハンスメント層信号の画
像22bが副分割されるブロックの)方法で実行される。図22は、ベース層信号の、対
応するまたは共同配置された部分406を示す。ここに、スケーラブルビデオデコーダ/
エンコーダは、ベース層信号の予測残留に対して(すなわち、ベース層残留信号に対して
)変換の符号化/復号化を使用しながら、予測的な符号化/復号化をベース層信号に適用
する。特に、ブロック的な変換は、ベース層残留信号に対して使用される。すなわち、ベ
ース層残留信号は、図22に点線で記載されている個別に変換されたブロックで、ブロッ
ク的に変換される。図22に記載されているように、ベース層の変換ブロックのブロック
境界は、共同配置された部分406の外形と一致する必要はない。
それぞれ存在する、異なる可能性を示す。図22は、変換係数ブロック402が部分40
4のスペクトル分解を表すことに関係する、エンハンスメント層信号の部分404を再び
記載する。例えば、変換係数ブロック402は、エンハンスメント層信号を予測的に符号
化/復号化するスケーラブルビデオデコーダ/エンコーダを伴う、エンハンスメント層残
留信号のスペクトル分解を表わす。特に、変換の符号化/復号化は、エンハンスメント層
残留信号を符号化するために、スケーラブルビデオデコーダ/エンコーダによって使用さ
れる。変換の符号化/復号化は、ブロック的な(すなわち、エンハンスメント層信号の画
像22bが副分割されるブロックの)方法で実行される。図22は、ベース層信号の、対
応するまたは共同配置された部分406を示す。ここに、スケーラブルビデオデコーダ/
エンコーダは、ベース層信号の予測残留に対して(すなわち、ベース層残留信号に対して
)変換の符号化/復号化を使用しながら、予測的な符号化/復号化をベース層信号に適用
する。特に、ブロック的な変換は、ベース層残留信号に対して使用される。すなわち、ベ
ース層残留信号は、図22に点線で記載されている個別に変換されたブロックで、ブロッ
ク的に変換される。図22に記載されているように、ベース層の変換ブロックのブロック
境界は、共同配置された部分406の外形と一致する必要はない。
それにもかかわらず、評価408を実行するために、以下のオプションA~Cの1つま
たは組み合わせが使用される。
たは組み合わせが使用される。
特に、スケーラブルビデオデコーダ/エンコーダは、符号化/復号化されるべき変換係
数ブロック402にサイズで一致する変換係数の変換係数ブロック424を得るために、
部分406の中で、ベース層残留信号または再構成されたベース層信号に、変換422を
実行する。変換係数ブロック424,426の中の変換係数の値の分布の点検は、水平周
波数の方向428に沿って副ブロック412の寸法を適切に設定し、かつ、垂直周波数の
方向432に沿って副ブロック412の寸法を適切に設定するために使用される。
数ブロック402にサイズで一致する変換係数の変換係数ブロック424を得るために、
部分406の中で、ベース層残留信号または再構成されたベース層信号に、変換422を
実行する。変換係数ブロック424,426の中の変換係数の値の分布の点検は、水平周
波数の方向428に沿って副ブロック412の寸法を適切に設定し、かつ、垂直周波数の
方向432に沿って副ブロック412の寸法を適切に設定するために使用される。
追加して、あるいは、2者択一的に、スケーラブルビデオデコーダ/エンコーダは、少
なくとも共同配置された部分406を部分的に重ねる、図22の異なる斜線によって記載
されたベース層変換ブロック434の全ての変換係数ブロックを点検する。図22の例示
的な場合において、4つのベース層変換ブロックが存在し、次に、それらの変換係数ブロ
ックが点検される。特に、これらのベース層変換ブロックの全ては、互いに異なるサイズ
であり、変換係数ブロック412に対してさらにサイズが異なる。スケーリング436は
、部分406の中でベース層残留信号のスペクトル分解の変換係数ブロック438の近似
をもたらすために、ベース層変換ブロック434を重ねるこれらの変換係数ブロックに対
して実行される。その変換係数ブロック438の中の変換係数の値の分布(すなわち、4
42)は、副ブロックの寸法428と432を適切に設定するために、評価408の中で
使用される。その結果、変換係数ブロック402の副ブロックの副分割が選択される。
なくとも共同配置された部分406を部分的に重ねる、図22の異なる斜線によって記載
されたベース層変換ブロック434の全ての変換係数ブロックを点検する。図22の例示
的な場合において、4つのベース層変換ブロックが存在し、次に、それらの変換係数ブロ
ックが点検される。特に、これらのベース層変換ブロックの全ては、互いに異なるサイズ
であり、変換係数ブロック412に対してさらにサイズが異なる。スケーリング436は
、部分406の中でベース層残留信号のスペクトル分解の変換係数ブロック438の近似
をもたらすために、ベース層変換ブロック434を重ねるこれらの変換係数ブロックに対
して実行される。その変換係数ブロック438の中の変換係数の値の分布(すなわち、4
42)は、副ブロックの寸法428と432を適切に設定するために、評価408の中で
使用される。その結果、変換係数ブロック402の副ブロックの副分割が選択される。
さらに、評価408が、追加して、あるいは、2者択一的に、実行される。評価408
とは、空間領域の中で、エッジ検出444の使用または主な勾配方向の決定(例えば、副
ブロックの寸法428と432を適切に設定するために、検出されたエッジの拡大方向に
基づいた決定、または、共同配置された部分406の中で決定された勾配)によって、ベ
ース層残留信号または再構成されたベース層信号を点検することである。
とは、空間領域の中で、エッジ検出444の使用または主な勾配方向の決定(例えば、副
ブロックの寸法428と432を適切に設定するために、検出されたエッジの拡大方向に
基づいた決定、または、共同配置された部分406の中で決定された勾配)によって、ベ
ース層残留信号または再構成されたベース層信号を点検することである。
上で明確に説明されていないけれども、変換係数の位置と副ブロック412のユニット
とを横断することにおいて、変換係数ブロックのゼロ周波数角部(図21の左上隅部)か
ら出発して、ブロック402の最も高い周波数角部(図21の右下隅部)に至る順序で、
副ブロック412を横断することが好ましい。さらに、エントロピー符号化が、データス
トリーム6bの中で構文要素に合図するために使用される。すなわち、構文要素416と
418は、演算、可変長符号化または別の形式のエントロピー符号化などの、符号化され
た都合の良いエントロピー符号化である。副ブロック412を横断する順序付けは、40
8に従って選択された副ブロック形状にも依存している。それらの高さより広くなるよう
に選択された副ブロックに対して、縦断の順序は、最初列的に副ブロックを横断して、次
に、次の列などに進行する。これを超えて、副ブロックの寸法を選択するために使用され
るベース層情報が、自身再構成されたベース層残留信号またはベース層信号自体である、
ということに再び注意しなさい。
とを横断することにおいて、変換係数ブロックのゼロ周波数角部(図21の左上隅部)か
ら出発して、ブロック402の最も高い周波数角部(図21の右下隅部)に至る順序で、
副ブロック412を横断することが好ましい。さらに、エントロピー符号化が、データス
トリーム6bの中で構文要素に合図するために使用される。すなわち、構文要素416と
418は、演算、可変長符号化または別の形式のエントロピー符号化などの、符号化され
た都合の良いエントロピー符号化である。副ブロック412を横断する順序付けは、40
8に従って選択された副ブロック形状にも依存している。それらの高さより広くなるよう
に選択された副ブロックに対して、縦断の順序は、最初列的に副ブロックを横断して、次
に、次の列などに進行する。これを超えて、副ブロックの寸法を選択するために使用され
るベース層情報が、自身再構成されたベース層残留信号またはベース層信号自体である、
ということに再び注意しなさい。
以下では、上で説明された実施例に組み合わせられる、異なる実施の形態が説明される
。以下で記載された実施の形態は、スケーラブルビデオ符号化を更に効率的にするための
多くの異なる実施例または施策に関係する。部分的に、上の実施例は、それの別の派生し
た実施の形態を提示するために、一般概念を保持した状態で、以下で詳細に説明される。
これらの以下に提示された記述は、上の実施の形態/実施例の代替または拡大を得るため
に使用される。しかしながら、以下で記載された実施の形態の大部分は、任意に、上で既
に説明された実施例に組み合わされる。すなわち、それらは、同時に1つのスケーラブル
ビデオデコーダ/エンコーダの中で、上の実施の形態と共に実行される。しかし、そうす
る必要はない。
。以下で記載された実施の形態は、スケーラブルビデオ符号化を更に効率的にするための
多くの異なる実施例または施策に関係する。部分的に、上の実施例は、それの別の派生し
た実施の形態を提示するために、一般概念を保持した状態で、以下で詳細に説明される。
これらの以下に提示された記述は、上の実施の形態/実施例の代替または拡大を得るため
に使用される。しかしながら、以下で記載された実施の形態の大部分は、任意に、上で既
に説明された実施例に組み合わされる。すなわち、それらは、同時に1つのスケーラブル
ビデオデコーダ/エンコーダの中で、上の実施の形態と共に実行される。しかし、そうす
る必要はない。
前の記述をより容易に理解するために、実施の形態や実施の形態の組み合わせを取り込
んだ適切なスケーラブルビデオエンコーダ/デコーダを実行のためのより詳細な実施の形
態が、次に提示される。以下で記載された異なる実施例は、英数字の符号の使用によって
列挙される。これらの実施例は、今説明した図面の中のこれらの実施例の引用要素のいく
つかの記述を、ここでは1つの実施の形態に従って、一般的に実行する。しかしながら、
個々の実施例が関する限り、スケーラブルビデオデコーダ/エンコーダの実現の中の要素
の提供が、あらゆる実施例に関する限り、必要ではない。問題の実施例に依存して、いく
つかの要素といくつかの相互接続とが、次に記載された図面の中で省略される。それぞれ
の実施例に対して引用された要素のみが、それぞれの実施例の記述で言及した仕事または
関数を実行するために提供される。しかしながら、ここで、数要素が1つの機能に対して
引用されるとき、時々、代替が特に存在する。
んだ適切なスケーラブルビデオエンコーダ/デコーダを実行のためのより詳細な実施の形
態が、次に提示される。以下で記載された異なる実施例は、英数字の符号の使用によって
列挙される。これらの実施例は、今説明した図面の中のこれらの実施例の引用要素のいく
つかの記述を、ここでは1つの実施の形態に従って、一般的に実行する。しかしながら、
個々の実施例が関する限り、スケーラブルビデオデコーダ/エンコーダの実現の中の要素
の提供が、あらゆる実施例に関する限り、必要ではない。問題の実施例に依存して、いく
つかの要素といくつかの相互接続とが、次に記載された図面の中で省略される。それぞれ
の実施例に対して引用された要素のみが、それぞれの実施例の記述で言及した仕事または
関数を実行するために提供される。しかしながら、ここで、数要素が1つの機能に対して
引用されるとき、時々、代替が特に存在する。
しかしながら、スケーラブルビデオデコーダ/エンコーダの関数性の概観を提供するた
めに、次に記載された実施例が実行される。以下の図に示された要素は、現在簡潔に説明
される。
めに、次に記載された実施例が実行される。以下の図に示された要素は、現在簡潔に説明
される。
図23は、符号化データストリーム6の主の副部分(すなわち、6a)が第1の解像度
または品質レベルで映像を表わすような方法で、映像が符号化される符号化データストリ
ーム6を復号化するためのスケーラブルビデオデコーダを示す。符号化データストリーム
の追加部分6bは、増加する解像度または品質レベルで映像の表現に対応している。符号
化データストリーム6のデータ量を低く保つために、副ストリーム6aと6bの間の中間
層の冗長が、副ストリーム6bを形成する際に利用される。以下で記載された実施例のい
くつかが、副ストリーム6aが関係するベース層からの中間層の予測に向けられ、そして
、副ストリーム6bが関係するエンハンスメント層に向けられる。
または品質レベルで映像を表わすような方法で、映像が符号化される符号化データストリ
ーム6を復号化するためのスケーラブルビデオデコーダを示す。符号化データストリーム
の追加部分6bは、増加する解像度または品質レベルで映像の表現に対応している。符号
化データストリーム6のデータ量を低く保つために、副ストリーム6aと6bの間の中間
層の冗長が、副ストリーム6bを形成する際に利用される。以下で記載された実施例のい
くつかが、副ストリーム6aが関係するベース層からの中間層の予測に向けられ、そして
、副ストリーム6bが関係するエンハンスメント層に向けられる。
スケーラブルビデオデコーダは、並行に稼働する2つのブロックベースの予測デコーダ
80、60を含み、副ストリーム6aと6bをそれぞれ受信する。図に示すように、デマ
ルチプレクサ40は、別々に復号化ステージ80と60を、対応する副ストリーム6aと
6bと共に提供する。
80、60を含み、副ストリーム6aと6bをそれぞれ受信する。図に示すように、デマ
ルチプレクサ40は、別々に復号化ステージ80と60を、対応する副ストリーム6aと
6bと共に提供する。
ブロックベースの予測符号化ステージ80と60の内部の構造は、図に示されているよ
うに、同じである。エントロピーがモジュール100を復号化して、復号化ステージ80
,60のそれぞれの入力から、エントロピー符号化モジュール100;320、逆変換器
560;580、加算器180;340、任意のフィルタ120;300および140;
280が、この記述の順序に直列に接続されている。その結果、この直列接続の最後に、
再構成されたベース層信号600と再構成されたエンハンスメント層信号360が、それ
ぞれ得られる。一方、加算器180,340とフィルタ120,140,300,280
の出力が、それぞれベース層信号とエンハンスメント層信号の再構成の異なるバージョン
を提供する。そうすれば、それぞれの予測プロバイダ160;260は、これらのバージ
ョンの副組または全てを受信して、それに基づいて、予測信号を加算器180;340の
残留入力へ提供するために提供する。エントロピー復号化ステージ100;320は、そ
れぞれの入力信号6aと6bから復号化し、変換係数ブロックは逆変換器560;580
に入り、予測プロバイダ160;260のための予測パラメータを含むパラメータを符号
化する。
うに、同じである。エントロピーがモジュール100を復号化して、復号化ステージ80
,60のそれぞれの入力から、エントロピー符号化モジュール100;320、逆変換器
560;580、加算器180;340、任意のフィルタ120;300および140;
280が、この記述の順序に直列に接続されている。その結果、この直列接続の最後に、
再構成されたベース層信号600と再構成されたエンハンスメント層信号360が、それ
ぞれ得られる。一方、加算器180,340とフィルタ120,140,300,280
の出力が、それぞれベース層信号とエンハンスメント層信号の再構成の異なるバージョン
を提供する。そうすれば、それぞれの予測プロバイダ160;260は、これらのバージ
ョンの副組または全てを受信して、それに基づいて、予測信号を加算器180;340の
残留入力へ提供するために提供する。エントロピー復号化ステージ100;320は、そ
れぞれの入力信号6aと6bから復号化し、変換係数ブロックは逆変換器560;580
に入り、予測プロバイダ160;260のための予測パラメータを含むパラメータを符号
化する。
従って、予測プロバイダ160と260は、それぞれの解像度/品質レベルで映像のフ
レームのブロックを予測する。そして、このために、予測プロバイダ160と260は、
空間内部予測モードや時間中間予測モードのような所定の予測モードの中で選択される。
両方のモードは、内部層予測モード(すなわち、それぞれのレベルが入っている副ストリ
ームの中のデータに唯一依存する予測モード)である。
レームのブロックを予測する。そして、このために、予測プロバイダ160と260は、
空間内部予測モードや時間中間予測モードのような所定の予測モードの中で選択される。
両方のモードは、内部層予測モード(すなわち、それぞれのレベルが入っている副ストリ
ームの中のデータに唯一依存する予測モード)である。
しかしながら、前述の中間層の冗長を利用するために、エンハンスメント層復号化ステ
ージ60は、符号化パラメータ中間層予測器240、解像度/品質改良器220、および
/または、予測プロバイダ160と比較される予測プロバイダ260を付加的に含む。さ
らに、/あるいはまた、エンハンスメント層復号化ステージ60は、ベース層復号化ステ
ージ80の内部ステージから得られたデータに基づいたエンハンスメント層予測信号42
0を提供できる中間層予測モードを補助する。解像度/品質改良器220は、中間層予測
信号380を得るために、再構成されたベース層信号200a,200b,200cまた
はベース層残留信号480のどれかに、解像度または品質の改良を受けさせる。符号化パ
ラメータ中間層予測器240は、それぞれ予測パラメータや作動パラメータのような符号
化パラメータをどうにか予測することである。予測プロバイダ260は、例えば、さらに
、200a,200b,200cのようなベース層信号の再構成された部分に従って、中
間層予測モードを補助する。あるいは、増加する解像度/品質レベルに潜在的に改良され
たベース層残留信号640の再構成された部分が、引用/基礎として使用される。
ージ60は、符号化パラメータ中間層予測器240、解像度/品質改良器220、および
/または、予測プロバイダ160と比較される予測プロバイダ260を付加的に含む。さ
らに、/あるいはまた、エンハンスメント層復号化ステージ60は、ベース層復号化ステ
ージ80の内部ステージから得られたデータに基づいたエンハンスメント層予測信号42
0を提供できる中間層予測モードを補助する。解像度/品質改良器220は、中間層予測
信号380を得るために、再構成されたベース層信号200a,200b,200cまた
はベース層残留信号480のどれかに、解像度または品質の改良を受けさせる。符号化パ
ラメータ中間層予測器240は、それぞれ予測パラメータや作動パラメータのような符号
化パラメータをどうにか予測することである。予測プロバイダ260は、例えば、さらに
、200a,200b,200cのようなベース層信号の再構成された部分に従って、中
間層予測モードを補助する。あるいは、増加する解像度/品質レベルに潜在的に改良され
たベース層残留信号640の再構成された部分が、引用/基礎として使用される。
前述したように、復号化ステージ60と80は、ブロックベースの方法で操作される。
すなわち、映像のフレームは、ブロックのような部分に副分割される。異なる粗さレベル
は、予測プロバイダ160,260によって実行される予測モード、逆変換器560,5
80による局所変換、フィルタ120,140によるフィルタ係数選択、および、予測プ
ロバイダ160,260による予測モードのための予測パラメータ設定を割り当てるため
に使用される。すなわち、フレームを予測ブロックに副仕切ることは、順番に、予測モー
ドが選択されているブロック(例えば、いわゆる符号化ユニットまたは予測ユニット)へ
のフレームの副仕切りの連続である。変換符号化のためにブロックへのフレームの副仕切
り(いわゆる変換ユニット)は、予測ユニットへの仕切りと異なる。予測プロバイダ26
0によって使用される中間層予測モードのいくつかは、以下で実施例に対して説明される
。予測プロバイダ260は、いくつかの内部層予測モード、すなわち、それぞれの加算器
180,340に入力されるそれぞれの予測信号を内部的に得る予測モード、すなわち、
それぞれ、現在のレベルの符号化ステージ60,80に関わる状態に唯一基づいて適用さ
れる。
すなわち、映像のフレームは、ブロックのような部分に副分割される。異なる粗さレベル
は、予測プロバイダ160,260によって実行される予測モード、逆変換器560,5
80による局所変換、フィルタ120,140によるフィルタ係数選択、および、予測プ
ロバイダ160,260による予測モードのための予測パラメータ設定を割り当てるため
に使用される。すなわち、フレームを予測ブロックに副仕切ることは、順番に、予測モー
ドが選択されているブロック(例えば、いわゆる符号化ユニットまたは予測ユニット)へ
のフレームの副仕切りの連続である。変換符号化のためにブロックへのフレームの副仕切
り(いわゆる変換ユニット)は、予測ユニットへの仕切りと異なる。予測プロバイダ26
0によって使用される中間層予測モードのいくつかは、以下で実施例に対して説明される
。予測プロバイダ260は、いくつかの内部層予測モード、すなわち、それぞれの加算器
180,340に入力されるそれぞれの予測信号を内部的に得る予測モード、すなわち、
それぞれ、現在のレベルの符号化ステージ60,80に関わる状態に唯一基づいて適用さ
れる。
図に示されたブロックのいくつかの別の詳細が、以下の個々の実施例の記述から明らか
になる。そのような記述が提供された実施例に明確に関係しない限り、これらの記述は、
等しく一般に別の実施例と図の記述に転載可能であることに注意してください。
になる。そのような記述が提供された実施例に明確に関係しない限り、これらの記述は、
等しく一般に別の実施例と図の記述に転載可能であることに注意してください。
特に、図23のスケーラブルビデオデコーダのための実施の形態は、図2と図4に従っ
て、スケーラブルビデオデコーダの可能な実現を表す。図23に従ったスケーラブルビデ
オデコーダは前述されているけれども、図23は、対応するスケーラブルビデオエンコー
ダを示し、同じ引用符号が図23と図24の中の予測符号化/復号方式の内部要素のため
に使用される。理由は前出のとおりである。また、エンコーダとデコーダとの間の一般的
な予測基礎を維持する目的のために、ベースとエンハンスメント層信号の再構成可能バー
ジョンは、エンコーダで使用され、また、スケーラブルビデオの再構成可能バージョンを
得るために、この終わりまで既に符号化された部分を再構成する。従って、図23の記述
との唯一の差は、符号化パラメータ中間層予測器240と同様に、予測プロバイダ160
と予測プロバイダ260とが、データストリームから予測パラメータを受信するよりむし
ろ、何らかの比率/歪最適化の過程の中で予測パラメータを決定する、ということである
。むしろ、プロバイダは、このようにして決定された予測パラメータを、エントロピーデ
コーダ19aと19bに送信する。エントロピーデコーダ19aと19bは、データスト
リーム6の中に含めるために、マルチプレクサ16を経由して、それぞれのベース層副ス
トリーム6aとエンハンスメント層副ストリーム6bを順番に送信する。同様の方法で、
これらのエントロピーエンコーダ19aと19bが、そのような残留のエントロピー復号
化結果を出力するよりむしろ、変換モジュール724,726が後に続く減算器720と
722を経由して得られるように、再構成されたベース層信号200および再構成された
エンハンスメント層信号400と、オリジナルのベース層およびエンハンスメント層バー
ジョン4a,4bとの間の予測残留を受信する。しかしながら、この他、図24のスケー
ラブルビデオエンコーダの構造は、図23のスケーラブルビデオデコーダの構造と一致す
る。従って、これらの問題に関して、引用が図23の上の記述に対してなされる。ここで
は、ちょうど概説されているように、どんなデータストリームからのどんな派生も、それ
ぞれのデータストリームの中へのその後の挿入を有するそれぞれの要素のそれぞれの決定
に変えられなければならない。
て、スケーラブルビデオデコーダの可能な実現を表す。図23に従ったスケーラブルビデ
オデコーダは前述されているけれども、図23は、対応するスケーラブルビデオエンコー
ダを示し、同じ引用符号が図23と図24の中の予測符号化/復号方式の内部要素のため
に使用される。理由は前出のとおりである。また、エンコーダとデコーダとの間の一般的
な予測基礎を維持する目的のために、ベースとエンハンスメント層信号の再構成可能バー
ジョンは、エンコーダで使用され、また、スケーラブルビデオの再構成可能バージョンを
得るために、この終わりまで既に符号化された部分を再構成する。従って、図23の記述
との唯一の差は、符号化パラメータ中間層予測器240と同様に、予測プロバイダ160
と予測プロバイダ260とが、データストリームから予測パラメータを受信するよりむし
ろ、何らかの比率/歪最適化の過程の中で予測パラメータを決定する、ということである
。むしろ、プロバイダは、このようにして決定された予測パラメータを、エントロピーデ
コーダ19aと19bに送信する。エントロピーデコーダ19aと19bは、データスト
リーム6の中に含めるために、マルチプレクサ16を経由して、それぞれのベース層副ス
トリーム6aとエンハンスメント層副ストリーム6bを順番に送信する。同様の方法で、
これらのエントロピーエンコーダ19aと19bが、そのような残留のエントロピー復号
化結果を出力するよりむしろ、変換モジュール724,726が後に続く減算器720と
722を経由して得られるように、再構成されたベース層信号200および再構成された
エンハンスメント層信号400と、オリジナルのベース層およびエンハンスメント層バー
ジョン4a,4bとの間の予測残留を受信する。しかしながら、この他、図24のスケー
ラブルビデオエンコーダの構造は、図23のスケーラブルビデオデコーダの構造と一致す
る。従って、これらの問題に関して、引用が図23の上の記述に対してなされる。ここで
は、ちょうど概説されているように、どんなデータストリームからのどんな派生も、それ
ぞれのデータストリームの中へのその後の挿入を有するそれぞれの要素のそれぞれの決定
に変えられなければならない。
次に記載された実施の形態に使用されるエンハンスメント層信号の内部符号化のための
技術は、エンハンスメント層ブロックのために、内部予測信号を(ベース層データを使用
して)発生させるための多重方法を含む。これらの方法は、再構成されたエンハンスメン
ト層のサンプルだけに基づいて内部予測信号を発生させる方法に追加して提供される。
技術は、エンハンスメント層ブロックのために、内部予測信号を(ベース層データを使用
して)発生させるための多重方法を含む。これらの方法は、再構成されたエンハンスメン
ト層のサンプルだけに基づいて内部予測信号を発生させる方法に追加して提供される。
内部予測は、内部符号化されたブロックの再構成の過程の一部である。最終再構成ブロ
ックは、変換で符号化された残留信号(ゼロであるかもしれない)を内部予測信号に追加
することによって得られる。残留信号は、逆変換が後に続いたビットストリームの中で送
信された変換係数レベルの逆量子化(スケーリング)によって発生する。
ックは、変換で符号化された残留信号(ゼロであるかもしれない)を内部予測信号に追加
することによって得られる。残留信号は、逆変換が後に続いたビットストリームの中で送
信された変換係数レベルの逆量子化(スケーリング)によって発生する。
以下の記述は、(ベース層と同じ解像度を有するけれども、より高い品質または忠実度
を有する入力ビデオを表わす)品質エンハンスメント層を有するスケーラブル符号化と、
(ベース層より高い解像度、つまり、より多くのサンプル数を有する)空間エンハンスメ
ント層を有するスケーラブル符号化とに適用される。品質エンハンスメント層の場合には
、ベース層信号の抽出は、ブロック220などの中で必要でないけれども、再構成された
ベース層のサンプルのフィルタリング500などには適用される。空間エンハンスメント
層の場合には、一般に、ベース層信号の抽出が、ブロック220などの中で要求される。
を有する入力ビデオを表わす)品質エンハンスメント層を有するスケーラブル符号化と、
(ベース層より高い解像度、つまり、より多くのサンプル数を有する)空間エンハンスメ
ント層を有するスケーラブル符号化とに適用される。品質エンハンスメント層の場合には
、ベース層信号の抽出は、ブロック220などの中で必要でないけれども、再構成された
ベース層のサンプルのフィルタリング500などには適用される。空間エンハンスメント
層の場合には、一般に、ベース層信号の抽出が、ブロック220などの中で要求される。
次に記載された実施例は、エンハンスメント層ブロックの内部予測に対して、再構成さ
れたベース層サンプル(200に例える)またはベース層残留サンプル(640に例える
)を使用するために、異なる方法をサポートする。以下に記載された方法の1つ以上は、
内部層内部符号化(そこでは再構成されたエンハンスメント層サンプル(400に例える
)だけが内部予測のために使用される)に加えて、サポートすることができる。特定の方
法の使用が、最も大きいサポートされたブロックサイズ(HEVCの中のH.264/A
VCまたは符号化ツリーのブロック/最も大きい符号化ユニットの中のマクロブロックな
どのサイズ)のレベルにて、合図される。または、それは、全てのサポートされたブロッ
クサイズにて合図される。あるいは、それは、サポートされたブロックサイズの副組に対
して合図される。
れたベース層サンプル(200に例える)またはベース層残留サンプル(640に例える
)を使用するために、異なる方法をサポートする。以下に記載された方法の1つ以上は、
内部層内部符号化(そこでは再構成されたエンハンスメント層サンプル(400に例える
)だけが内部予測のために使用される)に加えて、サポートすることができる。特定の方
法の使用が、最も大きいサポートされたブロックサイズ(HEVCの中のH.264/A
VCまたは符号化ツリーのブロック/最も大きい符号化ユニットの中のマクロブロックな
どのサイズ)のレベルにて、合図される。または、それは、全てのサポートされたブロッ
クサイズにて合図される。あるいは、それは、サポートされたブロックサイズの副組に対
して合図される。
以下に記載される全ての方法に対して、予測信号が、ブロックのための再構成信号とし
て直接に使用される。すなわち、残留は全く送信されない。または、中間層内部予測のた
めの選択された方法は、残留符号化と組み合わされる。特定の実施の形態において、残留
信号は、変換符号化を経由して送信される。すなわち、量子化された変換係数(変換係数
レベル)は、エントロピー符号化技術(例えば、可変長符号化または算術符号化(19b
に例える))を使用して、送信される。そして、残留は、送信された変換係数レベルを逆
量子化(スケーリング)して、逆変換(580に例える)を適用することによって得られ
る。特定のバージョンでは、中間層内部予測信号が発生するブロックに対応する完全な残
留ブロックが、一つの変換を使用して変換される(726に例える)。すなわち、全体の
ブロックが、予測ブロックと同じサイズの一つの変換を使用して変換される。別の実施の
形態では、予測ブロックが、(例えば、階層的な分解を使用して、)より小さいブロック
にさらに副分割される。そして、小さいブロック(また、異なるブロックサイズを有する
ことができる)のそれぞれに対して、別々の変換が適用される。別の実施の形態では、符
号化ユニットが、より小さい予測ブロックに分割される。そして、予測ブロックのゼロ以
上に対して、予測信号が、中間層内部予測のための方法の1つを使用して発生する。そし
て、次に、全体の符号化ユニットの残留が、一つの変換(726に例える)を使用して変
換される。または、符号化ユニットが、異なる変換ユニットに副分割される。ここで、変
換ユニット(一つの変換が適用されるブロック)を形成するための副分割は、符号化ユニ
ットを予測ブロックに分解するための副分割と異なる。
て直接に使用される。すなわち、残留は全く送信されない。または、中間層内部予測のた
めの選択された方法は、残留符号化と組み合わされる。特定の実施の形態において、残留
信号は、変換符号化を経由して送信される。すなわち、量子化された変換係数(変換係数
レベル)は、エントロピー符号化技術(例えば、可変長符号化または算術符号化(19b
に例える))を使用して、送信される。そして、残留は、送信された変換係数レベルを逆
量子化(スケーリング)して、逆変換(580に例える)を適用することによって得られ
る。特定のバージョンでは、中間層内部予測信号が発生するブロックに対応する完全な残
留ブロックが、一つの変換を使用して変換される(726に例える)。すなわち、全体の
ブロックが、予測ブロックと同じサイズの一つの変換を使用して変換される。別の実施の
形態では、予測ブロックが、(例えば、階層的な分解を使用して、)より小さいブロック
にさらに副分割される。そして、小さいブロック(また、異なるブロックサイズを有する
ことができる)のそれぞれに対して、別々の変換が適用される。別の実施の形態では、符
号化ユニットが、より小さい予測ブロックに分割される。そして、予測ブロックのゼロ以
上に対して、予測信号が、中間層内部予測のための方法の1つを使用して発生する。そし
て、次に、全体の符号化ユニットの残留が、一つの変換(726に例える)を使用して変
換される。または、符号化ユニットが、異なる変換ユニットに副分割される。ここで、変
換ユニット(一つの変換が適用されるブロック)を形成するための副分割は、符号化ユニ
ットを予測ブロックに分解するための副分割と異なる。
特定の実施の形態において、(抽出される/フィルタにかけられる)再構成されたベー
ス層信号(380に例える)は、予測信号として直接に使用される。エンハンスメント層
を内部予測するためにベース層を使うための多重方法は、以下の方法を含む。(抽出され
る/フィルタにかけられる)再構成されたベース層信号(380に例える)は、エンハン
スメント層予測信号として直接に使用される。この方法は、周知のH.264/SVCの
中間層内部予測モードと同様である。この方法において、エンハンスメント層のための予
測ブロックは、エンハンスメント層の対応するサンプル位置に整合するために抽出(22
0に例える)され、かつ、抽出の前または後に任意にフィルタにかけられた、ベース層再
構成信号の共同配置されたサンプルによって形成される。SVC中間層内部予測モードと
対照して、このモードは、マクロブロックレベル(または、最も大きいサポートされたブ
ロックサイズ)にてサポートされるだけでなく、任意のブロックサイズにてサポートされ
る。それは、モードは、最も大きいサポートされたブロックサイズに対して合図されるだ
けではなく、最も大きいサポートされたブロックサイズのブロック(MPEG4,H.2
64の中のマクロブロックと、HEVCの中の符号化ツリーブロック/最も大きい符号化
ユニット)が、より小さいブロック/符号化ユニットに階層的に副分割され、そして、中
間層内部予測モードの使用が、(対応するブロックに対して)どんなサポートさられたブ
ロックサイズにても合図されることを意味する。特定の実施の形態では、このモードは選
択されたブロックサイズのためにサポートされるだけである。次に、このモードの使用を
合図する構文要素が、対応するブロックサイズに対してだけ送信される。または、このモ
ードの使用を(別の符号化パラメータの中で)合図する構文要素の値が、別のブロックサ
イズに対して、対応して制限される。H.264/AVCのSVC拡張の中の中間層内部
予測モードとの別の差は、中間層内部予測モードが、ベース層の中の共同配置された領域
が内部符号化される場合にサポートされるだけではなく、共同配置されたベース層領域が
中間符号化または一部中間符号化される場合にもサポートされるということである。
ス層信号(380に例える)は、予測信号として直接に使用される。エンハンスメント層
を内部予測するためにベース層を使うための多重方法は、以下の方法を含む。(抽出され
る/フィルタにかけられる)再構成されたベース層信号(380に例える)は、エンハン
スメント層予測信号として直接に使用される。この方法は、周知のH.264/SVCの
中間層内部予測モードと同様である。この方法において、エンハンスメント層のための予
測ブロックは、エンハンスメント層の対応するサンプル位置に整合するために抽出(22
0に例える)され、かつ、抽出の前または後に任意にフィルタにかけられた、ベース層再
構成信号の共同配置されたサンプルによって形成される。SVC中間層内部予測モードと
対照して、このモードは、マクロブロックレベル(または、最も大きいサポートされたブ
ロックサイズ)にてサポートされるだけでなく、任意のブロックサイズにてサポートされ
る。それは、モードは、最も大きいサポートされたブロックサイズに対して合図されるだ
けではなく、最も大きいサポートされたブロックサイズのブロック(MPEG4,H.2
64の中のマクロブロックと、HEVCの中の符号化ツリーブロック/最も大きい符号化
ユニット)が、より小さいブロック/符号化ユニットに階層的に副分割され、そして、中
間層内部予測モードの使用が、(対応するブロックに対して)どんなサポートさられたブ
ロックサイズにても合図されることを意味する。特定の実施の形態では、このモードは選
択されたブロックサイズのためにサポートされるだけである。次に、このモードの使用を
合図する構文要素が、対応するブロックサイズに対してだけ送信される。または、このモ
ードの使用を(別の符号化パラメータの中で)合図する構文要素の値が、別のブロックサ
イズに対して、対応して制限される。H.264/AVCのSVC拡張の中の中間層内部
予測モードとの別の差は、中間層内部予測モードが、ベース層の中の共同配置された領域
が内部符号化される場合にサポートされるだけではなく、共同配置されたベース層領域が
中間符号化または一部中間符号化される場合にもサポートされるということである。
特定の実施の形態において、差信号(実施例A参照)の空間内部予測が実行される。多
重方法は以下の方法を含む。(潜在的に抽出される/フィルタにかけられる)再構成され
たベース層信号(380に例える)は、空間内部予測信号と組み合わされる。そこでは、
空間内部予測(420に例える)が、隣接するブロックのための差サンプルに基づいて得
られる(260に例える)。差サンプルは、再構成されたエンハンスメント層信号(40
0に例える)と、(潜在的に抽出される/フィルタにかけられる)再構成されたベース層
信号(380に例える)との差を表わす。
重方法は以下の方法を含む。(潜在的に抽出される/フィルタにかけられる)再構成され
たベース層信号(380に例える)は、空間内部予測信号と組み合わされる。そこでは、
空間内部予測(420に例える)が、隣接するブロックのための差サンプルに基づいて得
られる(260に例える)。差サンプルは、再構成されたエンハンスメント層信号(40
0に例える)と、(潜在的に抽出される/フィルタにかけられる)再構成されたベース層
信号(380に例える)との差を表わす。
図25は、(抽出される/フィルタにかけられる)ベース層再構成信号380(BL
Reco)と、既に符号化された隣接ブロック736の差信号734(EH Diff)
を使用する空間内部予測との合計732によって、中間層内部予測信号の発生を示す。そ
こでは、既に符号化されたブロック736のための差信号(EH Diff)が、再構成
されたエンハンスメント層信号(EH Reco)(400に例える)から、(抽出され
る/フィルタにかけられる)ベース層再構成信号380(BL Reco)を引き算する
こと738によって発生する。現在の符号化された/復号化された、ブロック/領域/部
分は28である。すなわち、図25に記載された中間層内部予測方法は、予測ブロックを
発生させるために、2つの重ねられた入力信号を使用する。この方法のために、差信号7
34が必要である。差信号734は、再構成されたエンハンスメント層信号400と共同
配置された再構成されたベース層信号200との差である。前記ベース層信号200は、
エンハンスメント層の対応するサンプル位置に整合するために抽出220され、抽出の前
または後に任意にフィルタにかけられる(それが品質スケーラブル符号化の場合であると
き、仮に、抽出が適用されないならば、それはフィルタにかけられる)。特に、空間スケ
ーラブル符号化のために、通常、差信号734は、主として高周波成分を含む。差信号7
34は、全ての既に再構成されたブロック(すなわち、既に符号化/復号化された全ての
エンハンスメント層ブロック)に利用可能である。既に符号化/復号化されたブロック7
36の隣接するサンプル742のための差信号734は、空間内部予測技術(H.264
/AVCまたはHEVCの中で指定された空間内部予測モードなど)への入力として使用
される。矢印744によって記載された空間内部予測によって、予測されるべきブロック
28の異なる成分ための予測信号746が発生する。特定の実施の形態では、空間内部予
測の過程(H.264/AVCまたはHEVCから周知であるように)のどんな切り取り
の機能性も、差信号734の動的範囲と整合するために変更される、または無効にされる
。実際に使用された内部予測方法(複数の提供された方法の1つであり、どんな特定の角
度も有する平面内部予測、DC内部予測、または、方向内部予測744を含むことができ
る)は、ビットストリーム6bの中で合図される。H.264/AVCとHEVCに提供
された方法と異なる空間内部予測技術(既に符号化された隣接するブロックのサンプルを
使用して、予測信号を発生させるための方法)を使用することが可能である。(隣接する
ブロックの差サンプルを使用して、)得られた予測ブロック746は、最終予測ブロック
420の第1の部分である。
Reco)と、既に符号化された隣接ブロック736の差信号734(EH Diff)
を使用する空間内部予測との合計732によって、中間層内部予測信号の発生を示す。そ
こでは、既に符号化されたブロック736のための差信号(EH Diff)が、再構成
されたエンハンスメント層信号(EH Reco)(400に例える)から、(抽出され
る/フィルタにかけられる)ベース層再構成信号380(BL Reco)を引き算する
こと738によって発生する。現在の符号化された/復号化された、ブロック/領域/部
分は28である。すなわち、図25に記載された中間層内部予測方法は、予測ブロックを
発生させるために、2つの重ねられた入力信号を使用する。この方法のために、差信号7
34が必要である。差信号734は、再構成されたエンハンスメント層信号400と共同
配置された再構成されたベース層信号200との差である。前記ベース層信号200は、
エンハンスメント層の対応するサンプル位置に整合するために抽出220され、抽出の前
または後に任意にフィルタにかけられる(それが品質スケーラブル符号化の場合であると
き、仮に、抽出が適用されないならば、それはフィルタにかけられる)。特に、空間スケ
ーラブル符号化のために、通常、差信号734は、主として高周波成分を含む。差信号7
34は、全ての既に再構成されたブロック(すなわち、既に符号化/復号化された全ての
エンハンスメント層ブロック)に利用可能である。既に符号化/復号化されたブロック7
36の隣接するサンプル742のための差信号734は、空間内部予測技術(H.264
/AVCまたはHEVCの中で指定された空間内部予測モードなど)への入力として使用
される。矢印744によって記載された空間内部予測によって、予測されるべきブロック
28の異なる成分ための予測信号746が発生する。特定の実施の形態では、空間内部予
測の過程(H.264/AVCまたはHEVCから周知であるように)のどんな切り取り
の機能性も、差信号734の動的範囲と整合するために変更される、または無効にされる
。実際に使用された内部予測方法(複数の提供された方法の1つであり、どんな特定の角
度も有する平面内部予測、DC内部予測、または、方向内部予測744を含むことができ
る)は、ビットストリーム6bの中で合図される。H.264/AVCとHEVCに提供
された方法と異なる空間内部予測技術(既に符号化された隣接するブロックのサンプルを
使用して、予測信号を発生させるための方法)を使用することが可能である。(隣接する
ブロックの差サンプルを使用して、)得られた予測ブロック746は、最終予測ブロック
420の第1の部分である。
予測信号の第2の部分が、ベース層の再構成された信号200の中の共同配置された領
域28を使用して発生する。品質エンハンスメント層に対して、共同配置されたベース層
のサンプルが、直接に使用される、または、例えば、ローパスフィルタまたは高周波成分
を減衰させるフィルタ500によって、任意にフィルタにかけられる。空間エンハンスメ
ント層に対して、共同配置されたベース層のサンプルが抽出される。抽出220のために
、FIRフィルタまたはFIRフィルタの組が使用される。IIRフィルタも使用できる
。任意に、再構成されたベース層のサンプル200が、抽出前にフィルタにかけられる。
または、ベース層予測信号(ベース層を抽出した後に得られた信号)が、抽出段階の後に
フィルタにかけられる。ベース層の再構成の過程は、非ブロック化フィルタ(120に例
える)や適応型のループフィルタ(140に例える)などの1個以上の追加フィルタを含
むことができる。抽出のために使用されるベース層再構成200は、いずれかのループフ
ィルタの前の再構成信号である(200cに例える)。あるいは、それは、非ブロック化
フィルタの後、しかし、いずれかの別のフィルタの前の再構成信号である(200bに例
える)。あるいは、それは、特定のフィルタの後の再構成信号、または、ベース層復号化
過程で使用される全てのフィルタを適用した後の再構成信号である(200aに例える)
。
域28を使用して発生する。品質エンハンスメント層に対して、共同配置されたベース層
のサンプルが、直接に使用される、または、例えば、ローパスフィルタまたは高周波成分
を減衰させるフィルタ500によって、任意にフィルタにかけられる。空間エンハンスメ
ント層に対して、共同配置されたベース層のサンプルが抽出される。抽出220のために
、FIRフィルタまたはFIRフィルタの組が使用される。IIRフィルタも使用できる
。任意に、再構成されたベース層のサンプル200が、抽出前にフィルタにかけられる。
または、ベース層予測信号(ベース層を抽出した後に得られた信号)が、抽出段階の後に
フィルタにかけられる。ベース層の再構成の過程は、非ブロック化フィルタ(120に例
える)や適応型のループフィルタ(140に例える)などの1個以上の追加フィルタを含
むことができる。抽出のために使用されるベース層再構成200は、いずれかのループフ
ィルタの前の再構成信号である(200cに例える)。あるいは、それは、非ブロック化
フィルタの後、しかし、いずれかの別のフィルタの前の再構成信号である(200bに例
える)。あるいは、それは、特定のフィルタの後の再構成信号、または、ベース層復号化
過程で使用される全てのフィルタを適用した後の再構成信号である(200aに例える)
。
予測信号の2つの発生した部分(空間的に予測された差信号746と潜在的にフィルタ
にかけられた/抽出されたベース層再構成380)が、最終予測信号420を形成するた
めに、サンプルごとに追加732される。
にかけられた/抽出されたベース層再構成380)が、最終予測信号420を形成するた
めに、サンプルごとに追加732される。
ちょうど概説した実施例を図6~図10の実施の形態に移すことは、エンハンスメント
層信号の現在のブロックを予測することのちょうど概説された可能性が、図6~図10に
関して概説された予測スキームに代わるものとして、それぞれのスケーラブルビデオデコ
ーダ/エンコーダによってサポートされるということである。使用されるモードが、図8
に示されないそれぞれの予測モード識別子を経由して、エンハンスメント層副ストリーム
6bの中で合図される。
層信号の現在のブロックを予測することのちょうど概説された可能性が、図6~図10に
関して概説された予測スキームに代わるものとして、それぞれのスケーラブルビデオデコ
ーダ/エンコーダによってサポートされるということである。使用されるモードが、図8
に示されないそれぞれの予測モード識別子を経由して、エンハンスメント層副ストリーム
6bの中で合図される。
特定の実施の形態において、内部予測は中間層残留予測に続く(実施例B参照)。ベー
ス層データを使用して内部予測信号を発生させるための多重方法は、以下の方法を含む。
(隣接する再構成されたエンハンスメント層のサンプルを使用して得られた)従来の空間
内部予測信号は、(抽出された/フィルタにかけられた)ベース層残留信号(ベース層変
換係数の逆変換、または、ベース層再構成とベース層予測との間の差)に結合される。
ス層データを使用して内部予測信号を発生させるための多重方法は、以下の方法を含む。
(隣接する再構成されたエンハンスメント層のサンプルを使用して得られた)従来の空間
内部予測信号は、(抽出された/フィルタにかけられた)ベース層残留信号(ベース層変
換係数の逆変換、または、ベース層再構成とベース層予測との間の差)に結合される。
図26は、(抽出された/フィルタにかけられた)ベース層残留信号754(BL R
esi)と、点線762で記載された既に符号化された隣接ブロックの再構成されたエン
ハンスメント層のサンプル758(EH Reco)を使用する空間内部予測756との
合計752による、中間層内部予測信号420の発生を示す。
esi)と、点線762で記載された既に符号化された隣接ブロックの再構成されたエン
ハンスメント層のサンプル758(EH Reco)を使用する空間内部予測756との
合計752による、中間層内部予測信号420の発生を示す。
図26に示された概念は、予測ブロック420を形成するために、2つの予測信号を重
ねる。そこでは、一方の予測信号764が、既に再構成されたエンハンスメント層サンプ
ル758から発生し、他方の予測信号754が、ベース層残留サンプル480から発生す
る。予測信号420の第1の部分764が、再構成されたエンハンスメント層サンプル7
58を使用して、空間内部予測756を適用することによって得られる。空間内部予測7
56は、H.264/AVCの中で指定された方法の1つである。または、HEVCの中
で指定された方法の1つである。あるいは、それは、隣接するブロック762のサンプル
758を形成する現在のブロック18のために、予測信号764を発生する別の空間内部
予測技術である。実際に使用された内部予測方法756(複数の提供された方法の1つで
あり、平面内部予測、DC内部予測、または、どんな特定の角度も有する方向内部予測を
含むことができる)は、ビットストリーム6bの中で合図される。H.264/AVCと
HEVCとに提供された方法と異なる空間内部予測技術(既に符号化された隣接するブロ
ックのサンプルを使用して、予測信号を発生させるための方法)を使用することは、可能
である。予測信号420の第2の部分754が、ベース層の共同配置された残留信号48
0を使用して発生する。品質エンハンスメント層に対して、残留信号が、ベース層の中で
再構成されるように使用できる。または、残留信号は、追加してフィルタにかけることが
できる。空間エンハンスメント層480に対して、残留信号は、それが予測信号の第2の
部分として使用される前に、(ベース層サンプル位置をエンハンスメント層サンプル位置
に写像するために、)抽出220される。また、ベース層残留信号480は、抽出ステー
ジの前または後に、フィルタにかけることができる。残留信号を抽出220するために、
FIRフィルタが適用される。抽出過程は、抽出の目的のために適用されるベース層の中
の変換ブロック境界を横切ってフィルタにかけられない方法で、構成される。
ねる。そこでは、一方の予測信号764が、既に再構成されたエンハンスメント層サンプ
ル758から発生し、他方の予測信号754が、ベース層残留サンプル480から発生す
る。予測信号420の第1の部分764が、再構成されたエンハンスメント層サンプル7
58を使用して、空間内部予測756を適用することによって得られる。空間内部予測7
56は、H.264/AVCの中で指定された方法の1つである。または、HEVCの中
で指定された方法の1つである。あるいは、それは、隣接するブロック762のサンプル
758を形成する現在のブロック18のために、予測信号764を発生する別の空間内部
予測技術である。実際に使用された内部予測方法756(複数の提供された方法の1つで
あり、平面内部予測、DC内部予測、または、どんな特定の角度も有する方向内部予測を
含むことができる)は、ビットストリーム6bの中で合図される。H.264/AVCと
HEVCとに提供された方法と異なる空間内部予測技術(既に符号化された隣接するブロ
ックのサンプルを使用して、予測信号を発生させるための方法)を使用することは、可能
である。予測信号420の第2の部分754が、ベース層の共同配置された残留信号48
0を使用して発生する。品質エンハンスメント層に対して、残留信号が、ベース層の中で
再構成されるように使用できる。または、残留信号は、追加してフィルタにかけることが
できる。空間エンハンスメント層480に対して、残留信号は、それが予測信号の第2の
部分として使用される前に、(ベース層サンプル位置をエンハンスメント層サンプル位置
に写像するために、)抽出220される。また、ベース層残留信号480は、抽出ステー
ジの前または後に、フィルタにかけることができる。残留信号を抽出220するために、
FIRフィルタが適用される。抽出過程は、抽出の目的のために適用されるベース層の中
の変換ブロック境界を横切ってフィルタにかけられない方法で、構成される。
中間層予測のために使用されるベース層残留信号480は、スケーリングおよび逆変換
560によって、ベース層の変換係数レベルが得られる残留信号である。または、ベース
層残留信号480は、再構成されたベース層信号200(非ブロック化および追加フィル
タリングの前または後、あるいは、どんなフィルタリング操作の間でも)と、ベース層の
中で使用された予測信号660との間の差である。
560によって、ベース層の変換係数レベルが得られる残留信号である。または、ベース
層残留信号480は、再構成されたベース層信号200(非ブロック化および追加フィル
タリングの前または後、あるいは、どんなフィルタリング操作の間でも)と、ベース層の
中で使用された予測信号660との間の差である。
2つの発生した信号要素(空間内部予測信号764と中間層残留予測信号754)は、
最終エンハンスメント層内部予測信号を形成するために、追加752される。
最終エンハンスメント層内部予測信号を形成するために、追加752される。
これは、図26に関してちょうど概説した予測モードが、現在の符号化/復号化された
部分28に対して、図6~図10に関して上で記述した代替の予測モードを形成するため
に、図6~図10に従ってどんなスケーラブルビデオデコーダ/エンコーダでも使用され
る、または、サポートされる、という意味である。
部分28に対して、図6~図10に関して上で記述した代替の予測モードを形成するため
に、図6~図10に従ってどんなスケーラブルビデオデコーダ/エンコーダでも使用され
る、または、サポートされる、という意味である。
特定の実施の形態において、空間内部予測とベース層再構成との重み付けされた予測(
実施例C参照)が、使用される。これは、図6~図10に関して上で概説された実施の形
態の特定の実現を発表した明細書を、従って、上の実施の形態の代替えとしてだけでなく
、所定の実施例と異なって図6~図10に関して上で概説された実施の形態を実行する方
法の可能性の記述としても解釈された、そのような重み付けされた予測に関する記述を、
実際に表わす。
実施例C参照)が、使用される。これは、図6~図10に関して上で概説された実施の形
態の特定の実現を発表した明細書を、従って、上の実施の形態の代替えとしてだけでなく
、所定の実施例と異なって図6~図10に関して上で概説された実施の形態を実行する方
法の可能性の記述としても解釈された、そのような重み付けされた予測に関する記述を、
実際に表わす。
ベース層データを使用して、内部予測信号を発生させるための多重方法は、以下の方法
を含む。(抽出された/フィルタにかけられた)再構成されたベース層信号は、空間内部
予測信号に結合される。そこでは、空間内部予測が、隣接するブロックの再構成されたエ
ンハンスメント層のサンプルに基づいて得られる。最終予測信号は、異なる周波数成分が
異なる重み付けを使用する方法で、空間予測信号とベース層予測信号とが重み付け(41
に例える)されることによって、得られる。これは、例えば、ローパスフィルタでベース
層予測信号(38に例える)にフィルタをかけ(62に例える)、かつ、ハイパスフィル
タで空間内部予測信号(34に例える)にフィルタをかけ(64に例える)て、そして、
得られたフィルタにかけられた信号を追加する(66に例える)ことによって、実現され
る。または、周波数に基づいた重み付けが、変換ブロックを重ねるベース層予測信号(3
8に例える)とエンハンスメント層予測信号(34に例える)とを変換(72、74に例
える)し、得られた変換ブロック(76、78に例える)を重ねることによって、実現さ
れる。そこでは、異なる重み付け係数(82、84に例える)は、異なる周波数位置に対
して使用される。次に、得られた変換ブロック(図10の42に例える)は、逆変換(8
4に例える)され、エンハンスメント層予測信号(54に例える)として使用される。あ
るいは、得られた変換係数は、スケーリングされた送信された変換係数レベル(59に例
える)に追加(52に例える)され、そして、非ブロック化および内ループ過程の前に、
再構成されたブロック(54に例える)を得るために、逆変換(84に例える)される。
を含む。(抽出された/フィルタにかけられた)再構成されたベース層信号は、空間内部
予測信号に結合される。そこでは、空間内部予測が、隣接するブロックの再構成されたエ
ンハンスメント層のサンプルに基づいて得られる。最終予測信号は、異なる周波数成分が
異なる重み付けを使用する方法で、空間予測信号とベース層予測信号とが重み付け(41
に例える)されることによって、得られる。これは、例えば、ローパスフィルタでベース
層予測信号(38に例える)にフィルタをかけ(62に例える)、かつ、ハイパスフィル
タで空間内部予測信号(34に例える)にフィルタをかけ(64に例える)て、そして、
得られたフィルタにかけられた信号を追加する(66に例える)ことによって、実現され
る。または、周波数に基づいた重み付けが、変換ブロックを重ねるベース層予測信号(3
8に例える)とエンハンスメント層予測信号(34に例える)とを変換(72、74に例
える)し、得られた変換ブロック(76、78に例える)を重ねることによって、実現さ
れる。そこでは、異なる重み付け係数(82、84に例える)は、異なる周波数位置に対
して使用される。次に、得られた変換ブロック(図10の42に例える)は、逆変換(8
4に例える)され、エンハンスメント層予測信号(54に例える)として使用される。あ
るいは、得られた変換係数は、スケーリングされた送信された変換係数レベル(59に例
える)に追加(52に例える)され、そして、非ブロック化および内ループ過程の前に、
再構成されたブロック(54に例える)を得るために、逆変換(84に例える)される。
図27は、(抽出された/フィルタにかけられた)ベース層再構成信号(BL Rec
o)と、既に符号化された隣接するブロックの再構成されたエンハンスメント層のサンプ
ル(EH Reco)を使用する空間内部予測との周波数重み付けされた合計による、中
間層内部予測信号の発生を示す。
o)と、既に符号化された隣接するブロックの再構成されたエンハンスメント層のサンプ
ル(EH Reco)を使用する空間内部予測との周波数重み付けされた合計による、中
間層内部予測信号の発生を示す。
図27の概念は、予測ブロック420を形成するために、2つの重畳信号772、77
4を使用する。信号420の第1の部分774が、エンハンスメント層の中の既に構成さ
れた隣接するブロックの再構成されたサンプル778を使用して、図6の30に対応して
いる空間内部予測776を適用することによって得られる。予測信号420の第2の部分
772が、ベース層の共同配置された再構成された信号200を使用して発生する。品質
エンハンスメント層に対して、共同配置されたベース層サンプル200が、直接に使用さ
れる。または、それらは、例えば、ローパスフィルタまたは高周波成分を減衰させるフィ
ルタによって、任意にフィルタにかけられる。空間エンハンスメント層に対して、共同配
置されたベース層のサンプルが、抽出220される。抽出のために、FIRフィルタまた
はFIRフィルタの組が使用される。また、IIRフィルタを使用することも可能である
。任意に、再構成されたベース層のサンプルが、抽出の前にフィルタにかけられる。ある
いは、ベース層予測信号(ベース層を抽出した後に得られた信号)が、抽出段階の後にフ
ィルタにかけられる。ベース層の再構成の過程は、非ブロック化フィルタ120や適応型
ループフィルタ140などの1つ以上の追加フィルタを含むことができる。抽出のために
使用されるベース層再構成200は、いずれかのループフィルタ120、140の前の再
構成信号200cである。あるいは、それは、非ブロック化フィルタ120の後、しかし
、別のフィルタの前の再構成信号200bである。あるいは、それは、特定のフィルタの
後の再構成信号200a、または、ベース層復号化過程で使用される全てのフィルタ12
0、140を適用した後の再構成信号である。
4を使用する。信号420の第1の部分774が、エンハンスメント層の中の既に構成さ
れた隣接するブロックの再構成されたサンプル778を使用して、図6の30に対応して
いる空間内部予測776を適用することによって得られる。予測信号420の第2の部分
772が、ベース層の共同配置された再構成された信号200を使用して発生する。品質
エンハンスメント層に対して、共同配置されたベース層サンプル200が、直接に使用さ
れる。または、それらは、例えば、ローパスフィルタまたは高周波成分を減衰させるフィ
ルタによって、任意にフィルタにかけられる。空間エンハンスメント層に対して、共同配
置されたベース層のサンプルが、抽出220される。抽出のために、FIRフィルタまた
はFIRフィルタの組が使用される。また、IIRフィルタを使用することも可能である
。任意に、再構成されたベース層のサンプルが、抽出の前にフィルタにかけられる。ある
いは、ベース層予測信号(ベース層を抽出した後に得られた信号)が、抽出段階の後にフ
ィルタにかけられる。ベース層の再構成の過程は、非ブロック化フィルタ120や適応型
ループフィルタ140などの1つ以上の追加フィルタを含むことができる。抽出のために
使用されるベース層再構成200は、いずれかのループフィルタ120、140の前の再
構成信号200cである。あるいは、それは、非ブロック化フィルタ120の後、しかし
、別のフィルタの前の再構成信号200bである。あるいは、それは、特定のフィルタの
後の再構成信号200a、または、ベース層復号化過程で使用される全てのフィルタ12
0、140を適用した後の再構成信号である。
図23と図24で使用された引用符号と、図6~図10に関連して使用された引用符号
とが比較されるとき、ブロック220は、図6で使用された引用符号38に対応している
。39は、380の部分に対応している。少なくとも、現在の部分28に共同配置された
部分が関する限り、現在の部分28に共同配置された420は、42に対応している。空
間予測776は、32に対応する。
とが比較されるとき、ブロック220は、図6で使用された引用符号38に対応している
。39は、380の部分に対応している。少なくとも、現在の部分28に共同配置された
部分が関する限り、現在の部分28に共同配置された420は、42に対応している。空
間予測776は、32に対応する。
2つの予測信号(潜在的に抽出された/フィルタにかけられたベース層再構成386と
エンハンスメント層内部予測782)が、最終予測信号420を形成するために結合され
る。これらの信号を結合するための方法は、異なる重み付け因子が異なる周波数成分のた
めに使用されるという特性を有することができる。特定の実施の形態では、抽出されたベ
ース層再構成は、ローパスフィルタ(62に例える)でフィルタにかけられる(また、抽
出220の前にベース層再構成をフィルタにかけることも可能である)。内部予測信号(
30によって得られた34に例える)は、ハイパスフィルタ(64に例える)でフィルタ
にかけられる。両方のフィルタにかけられた信号は、最終予測信号420を形成するため
に、追加784(66に例える)される。ローパスフィルタとハイパスフィルタの一対は
、直角位相鏡フィルタの一対を表わすけれども、これは必ずしも必要ではない。
エンハンスメント層内部予測782)が、最終予測信号420を形成するために結合され
る。これらの信号を結合するための方法は、異なる重み付け因子が異なる周波数成分のた
めに使用されるという特性を有することができる。特定の実施の形態では、抽出されたベ
ース層再構成は、ローパスフィルタ(62に例える)でフィルタにかけられる(また、抽
出220の前にベース層再構成をフィルタにかけることも可能である)。内部予測信号(
30によって得られた34に例える)は、ハイパスフィルタ(64に例える)でフィルタ
にかけられる。両方のフィルタにかけられた信号は、最終予測信号420を形成するため
に、追加784(66に例える)される。ローパスフィルタとハイパスフィルタの一対は
、直角位相鏡フィルタの一対を表わすけれども、これは必ずしも必要ではない。
別の特定の実施の形態(図10に例える)において、2つの予測信号380と782と
の結合過程は、空間変換を介して実現される。(潜在的に抽出された/フィルタにかけら
れた)ベース層再構成380と内部予測信号782との両方が、空間変換を使用して変換
(72、74に例える)される。次に、両方の信号の変換係数(76、78に例える)は
、適切な重み付け係数(82、84に例える)でスケーリングされて、次に、最終予測信
号の変換係数ブロック(42に例える)を形成するために、追加(90に例える)される
。1つのバージョンにおいて、重み付け係数(82、84に例える)は、それぞれの変換
係数位置に対して、両方の信号の成分のための重み付け係数の合計が1と等しい方法で選
択される。別のバージョンにおいて、いくつかのまたは全ての変換係数位置に対して、重
み付け係数の合計が1に等しくない。特定のバージョンにおいて、重み付け係数が、低周
波数成分を表わす変換係数に対して、ベース層再構成のための重み付け係数は、エンハン
スメント層内部予測信号のための重み付け係数より大きく、そして、高周波成分を表す変
換係数に対して、ベース層再構成のための重み付け係数が、エンハンスメント層内部予測
信号のための重み付け係数より少なくなる方法で選択される。
の結合過程は、空間変換を介して実現される。(潜在的に抽出された/フィルタにかけら
れた)ベース層再構成380と内部予測信号782との両方が、空間変換を使用して変換
(72、74に例える)される。次に、両方の信号の変換係数(76、78に例える)は
、適切な重み付け係数(82、84に例える)でスケーリングされて、次に、最終予測信
号の変換係数ブロック(42に例える)を形成するために、追加(90に例える)される
。1つのバージョンにおいて、重み付け係数(82、84に例える)は、それぞれの変換
係数位置に対して、両方の信号の成分のための重み付け係数の合計が1と等しい方法で選
択される。別のバージョンにおいて、いくつかのまたは全ての変換係数位置に対して、重
み付け係数の合計が1に等しくない。特定のバージョンにおいて、重み付け係数が、低周
波数成分を表わす変換係数に対して、ベース層再構成のための重み付け係数は、エンハン
スメント層内部予測信号のための重み付け係数より大きく、そして、高周波成分を表す変
換係数に対して、ベース層再構成のための重み付け係数が、エンハンスメント層内部予測
信号のための重み付け係数より少なくなる方法で選択される。
1つの実施の形態において、(両方の成分に対して、重み付けされた変換された信号を
まとめることによって)得られた変換係数ブロック(42に例える)は、最終予測信号4
20(54に例える)を形成するために、逆変換(84に例える)される。別の実施の形
態において、予測は変換領域の中で直接になされる。すなわち、符号化された変換係数レ
ベル(59に例える)は、スケーリングされ(すなわち、逆量子化され)て、(両方の成
分のための重み付けされた変換信号をまとめることによって得られた)予測信号の変換係
数(42に例える)、および、次に、(図10では示されていないけれども、(潜在的非
ブロック化120とさらに内ループフィルタリング段階140の前に、)現在のブロック
のためので再構成された信号420を得るために、逆変換(84に例える)される)変換
係数の結果として起こるブロックに追加(52に例える)される。言い換えれば、最初の
実施の形態では、両方の成分のための重み付けされた変換信号をまとめることによって得
られた変換ブロックは、逆変換されてエンハンスメント層予測信号として使用される。あ
るいは、2番目の実施の形態では、スケーリングされた送信された変換係数レベルに追加
されて、非ブロック化と内ループ過程との前に再構成されたブロックを得るために、逆変
換される。
まとめることによって)得られた変換係数ブロック(42に例える)は、最終予測信号4
20(54に例える)を形成するために、逆変換(84に例える)される。別の実施の形
態において、予測は変換領域の中で直接になされる。すなわち、符号化された変換係数レ
ベル(59に例える)は、スケーリングされ(すなわち、逆量子化され)て、(両方の成
分のための重み付けされた変換信号をまとめることによって得られた)予測信号の変換係
数(42に例える)、および、次に、(図10では示されていないけれども、(潜在的非
ブロック化120とさらに内ループフィルタリング段階140の前に、)現在のブロック
のためので再構成された信号420を得るために、逆変換(84に例える)される)変換
係数の結果として起こるブロックに追加(52に例える)される。言い換えれば、最初の
実施の形態では、両方の成分のための重み付けされた変換信号をまとめることによって得
られた変換ブロックは、逆変換されてエンハンスメント層予測信号として使用される。あ
るいは、2番目の実施の形態では、スケーリングされた送信された変換係数レベルに追加
されて、非ブロック化と内ループ過程との前に再構成されたブロックを得るために、逆変
換される。
ベース層再構成と残留信号との選択(実施例D参照)も使用される。再構成されたベー
ス層信号を使用する(上で記述した)方法のために、以下のバージョンが使用される。
ス層信号を使用する(上で記述した)方法のために、以下のバージョンが使用される。
・非ブロック化120とさらに内ループ過程140(サンプルとして適応型オフセット
フィルタまたは適応型ループフィルタなど)の前の再構成されたベース層サンプル200
c。
・非ブロック化120の後、しかし、別の内ループ過程140(サンプルとして適応型
オフセットフィルタまたは適応型ループフィルタなど)の前の再構成されたベース層サン
プル200b。
・非ブロック化120とさらに内ループ過程140(サンプルとして適応型オフセット
フィルタまたは適応型ループフィルタなど)後の、または、複数の内ループ過程段階の間
の再構成されたベース層サンプル200a。
フィルタまたは適応型ループフィルタなど)の前の再構成されたベース層サンプル200
c。
・非ブロック化120の後、しかし、別の内ループ過程140(サンプルとして適応型
オフセットフィルタまたは適応型ループフィルタなど)の前の再構成されたベース層サン
プル200b。
・非ブロック化120とさらに内ループ過程140(サンプルとして適応型オフセット
フィルタまたは適応型ループフィルタなど)後の、または、複数の内ループ過程段階の間
の再構成されたベース層サンプル200a。
対応するベース層信号200a、b、cの選択は、特定のデコーダ(そして、エンコー
ダ)の実現のために固定される。または、それは、ビットストリーム6の中で合図される
。後者の場合に対して、異なるバージョンが使用される。ベース層信号の特定のバージョ
ンの用法が、系列レベルにおいて、または、画像レベルにおいて、または、スライスレベ
ルにおいて、または、最も大きい符号化ユニットレベルにおいて、または、符号化ユニッ
トレベル、または、予測ブロックレベルにおいて、または、変換ブロックレベルにおいて
、または、いかなる別のブロックレベルにおいても合図される。別のバージョンでは、選
択は、(符号化モードのような)別の符号化パラメータに、または、ベース層信号の特性
に依存するようにすることができる。
ダ)の実現のために固定される。または、それは、ビットストリーム6の中で合図される
。後者の場合に対して、異なるバージョンが使用される。ベース層信号の特定のバージョ
ンの用法が、系列レベルにおいて、または、画像レベルにおいて、または、スライスレベ
ルにおいて、または、最も大きい符号化ユニットレベルにおいて、または、符号化ユニッ
トレベル、または、予測ブロックレベルにおいて、または、変換ブロックレベルにおいて
、または、いかなる別のブロックレベルにおいても合図される。別のバージョンでは、選
択は、(符号化モードのような)別の符号化パラメータに、または、ベース層信号の特性
に依存するようにすることができる。
別の実施の形態では、(抽出された/フィルタにかけられた)ベース層信号200を使
用する方法の複数のバージョンが、使用される。例えば、抽出されたベース層信号(すな
わち、200a)を直接に使用する2つの異なるモードが、提供される。そこでは、2つ
のモードは、異なる補間フィルタを使用する。または、1つのモードが、(抽出された)
ベース層再構成信号の追加フィルタリング500を使用する。同様に、前述した別の他の
モードのための複数の異なるバージョンが、提供される。モードの異なるバージョンのた
めの採用された抽出された/フィルタにかけられたベース層信号380が、使用された補
間フィルタ(整数サンプル位置もフィルタにかける補間フィルタを含む)の中で異なる。
または、第2のバージョンのための抽出された/フィルタにかけられたベース層信号38
0が、第1のバージョンのための抽出された/フィルタにかけられたベース層500をフ
ィルタにかけることによって、得られる。異なるバージョンの1つの選択が、系列、画像
、スライス、最も大きい符号化ユニット、符号化ユニットレベル、予測ブロックレベル、
または変換ブロックレベルで合図される。あるいは、それは、対応する再構成されたベー
ス層信号または送信された符号化パラメータの特性から推論される。
用する方法の複数のバージョンが、使用される。例えば、抽出されたベース層信号(すな
わち、200a)を直接に使用する2つの異なるモードが、提供される。そこでは、2つ
のモードは、異なる補間フィルタを使用する。または、1つのモードが、(抽出された)
ベース層再構成信号の追加フィルタリング500を使用する。同様に、前述した別の他の
モードのための複数の異なるバージョンが、提供される。モードの異なるバージョンのた
めの採用された抽出された/フィルタにかけられたベース層信号380が、使用された補
間フィルタ(整数サンプル位置もフィルタにかける補間フィルタを含む)の中で異なる。
または、第2のバージョンのための抽出された/フィルタにかけられたベース層信号38
0が、第1のバージョンのための抽出された/フィルタにかけられたベース層500をフ
ィルタにかけることによって、得られる。異なるバージョンの1つの選択が、系列、画像
、スライス、最も大きい符号化ユニット、符号化ユニットレベル、予測ブロックレベル、
または変換ブロックレベルで合図される。あるいは、それは、対応する再構成されたベー
ス層信号または送信された符号化パラメータの特性から推論される。
同様のことが、480を経由して、再構成されたベース層残留信号を使用するモードに
適用される。ここで、使用された補間フィルタまたは追加フィルタリング段階と異なるバ
ージョンも使用される。
適用される。ここで、使用された補間フィルタまたは追加フィルタリング段階と異なるバ
ージョンも使用される。
異なるフィルタが、再構成されたベース層信号とベース層残留信号とを抽出する/フィ
ルタにかけるために使用される。それは、ベース層残留信号を抽出するために、異なるア
プローチが、ベース層再構成信号の抽出より使用されることを意味する。
ルタにかけるために使用される。それは、ベース層残留信号を抽出するために、異なるア
プローチが、ベース層再構成信号の抽出より使用されることを意味する。
ベース層ブロックに対して、残留信号はゼロである(すなわち、変換係数レベルは、全
くブロックに送信されない)。対応するベース層残留信号は、ベース層から得られた別の
信号と取り替えられる。例えば、これは、再構成されたベース層ブロックのハイパスフィ
ルタバージョン、または、隣接するブロックの再構成されたベース層残留のサンプルから
得られた別の異なるような信号である。
くブロックに送信されない)。対応するベース層残留信号は、ベース層から得られた別の
信号と取り替えられる。例えば、これは、再構成されたベース層ブロックのハイパスフィ
ルタバージョン、または、隣接するブロックの再構成されたベース層残留のサンプルから
得られた別の異なるような信号である。
エンハンスメント層の中の空間内部予測のために使用されるサンプル(実施例H参照)
に関する限り、以下の特別な処理が提供される。空間内部予測を使用するモードに対して
、エンハンスメント層の中の利用できない隣接するサンプル(隣接するブロックは、現在
のブロックの後に符号化されるので、隣接するサンプルは利用できない)が、抽出された
/フィルタにかけられたベース層信号の対応するサンプルに取り替えられる。
に関する限り、以下の特別な処理が提供される。空間内部予測を使用するモードに対して
、エンハンスメント層の中の利用できない隣接するサンプル(隣接するブロックは、現在
のブロックの後に符号化されるので、隣接するサンプルは利用できない)が、抽出された
/フィルタにかけられたベース層信号の対応するサンプルに取り替えられる。
内部予測モードの符号化(実施例X参照)に関する限り、以下の特別なモードと機能性
が提供される。30aのような空間内部予測を使用するモードに対して、内部予測モード
の符号化は、(仮に、利用可能であるならば、)ベース層の中の内部予測モードについて
の情報が、エンハンスメント層の中の内部予測モードをより効率的に符号化するために使
用される方法で変更される。これは、例えば、パラメータ56のために使用される。仮に
、ベース層の中の共同配置された領域(36に例える)が、特定の空間内部予測モードを
使用して、内部符号化されるならば、同様の内部予測モードが、エンハンスメント層ブロ
ック(28に例える)の中で使用されそうである。内部予測モードは、通常、可能な内部
予測モードの組の中で、1つ以上のモードが、最もありそうなモードとして分類される方
法で合図される。そこでは、より短いワードで合図される。あるいは、算術的符号化が短
ければ短いほど、二者択一はより少ないビットをもたらす。HEVCの内部予測の中で、
(仮に、利用可能であるならば)上のブロックの内部予測モードと、(仮に、利用可能で
あるならば)左のブロックの内部予測モードとは、最もありそうなモードの組の中に含ま
れる。これらのモードに追加して、1つ以上の追加モード(しばしば使用される)が、最
もありそうなモードのリストの中に含めらる。そこでは、実際の追加モードが、現在のブ
ロックの上のブロックおよび現在のブロックの左のブロックの内部予測モードの有用性に
依存する。HEVCの中で、3つのモードが、最もありそうなモードとして正確に分類さ
れる。H.264/AVCの中で、1つのモードが、最もありそうなモードとして分類さ
れる。このモードは、現在のブロックの上のブロックおよび現在のブロックの左のブロッ
クのために使用される内部予測モードに基づいて得られる。内部予測モードを分類するた
めのいかなる他の概念(H.264/AVCとHEVCとから異なる)も可能であり、以
下の拡張のために使用される。
が提供される。30aのような空間内部予測を使用するモードに対して、内部予測モード
の符号化は、(仮に、利用可能であるならば、)ベース層の中の内部予測モードについて
の情報が、エンハンスメント層の中の内部予測モードをより効率的に符号化するために使
用される方法で変更される。これは、例えば、パラメータ56のために使用される。仮に
、ベース層の中の共同配置された領域(36に例える)が、特定の空間内部予測モードを
使用して、内部符号化されるならば、同様の内部予測モードが、エンハンスメント層ブロ
ック(28に例える)の中で使用されそうである。内部予測モードは、通常、可能な内部
予測モードの組の中で、1つ以上のモードが、最もありそうなモードとして分類される方
法で合図される。そこでは、より短いワードで合図される。あるいは、算術的符号化が短
ければ短いほど、二者択一はより少ないビットをもたらす。HEVCの内部予測の中で、
(仮に、利用可能であるならば)上のブロックの内部予測モードと、(仮に、利用可能で
あるならば)左のブロックの内部予測モードとは、最もありそうなモードの組の中に含ま
れる。これらのモードに追加して、1つ以上の追加モード(しばしば使用される)が、最
もありそうなモードのリストの中に含めらる。そこでは、実際の追加モードが、現在のブ
ロックの上のブロックおよび現在のブロックの左のブロックの内部予測モードの有用性に
依存する。HEVCの中で、3つのモードが、最もありそうなモードとして正確に分類さ
れる。H.264/AVCの中で、1つのモードが、最もありそうなモードとして分類さ
れる。このモードは、現在のブロックの上のブロックおよび現在のブロックの左のブロッ
クのために使用される内部予測モードに基づいて得られる。内部予測モードを分類するた
めのいかなる他の概念(H.264/AVCとHEVCとから異なる)も可能であり、以
下の拡張のために使用される。
エンハンスメント層の中の内部予測モードの効率的符号化に対してベース層データを使
用するために、1つ以上の最もありそうなモードを使用する概念が、(仮に、対応するベ
ース層ブロックが、内部符号化されるならば、)最もありそうなモードが共同配置された
ベース層ブロックの中で使用された内部予測モードを含む方法で、変更される。特定の実
施の形態において、以下のアプローチが使用される。現在のエンハンスメント層ブロック
が与えられると、共同配置されたベース層ブロックは決定される。特定のバージョンでは
、共同配置されたベース層ブロックは、エンハンスメントブロックの左上サンプルの共同
配置された位置をカバーするベース層ブロックである。別のバージョンでは、共同配置さ
れたベース層ブロックが、エンハンスメントブロックの中央部のサンプルの共同配置され
た位置をカバーするベース層ブロックである。他のバージョンでは、エンハンスメント層
ブロックの中の別のサンプルが、共同配置されたベース層ブロックを決定するために使用
される。仮に、決定された共同配置されたベース層ブロックが内部符号化され、ベース層
内部予測モードが角度内部予測モードを指定して、現在のエンハンスメント層ブロックの
左側のエンハンスメント層ブロックから得られた内部予測モードが、角度内部予測モード
を使用しないならば、左のエンハンスメント層ブロックから得られた内部予測モードは、
対応するベース層内部予測モードに取り替えられる。さもなければ、仮に、決定された共
同配置されたベース層ブロックは、内部符号化され、ベース層内部予測モードは、角度内
部予測モードを指定し、現在のエンハンスメント層ブロックの上のエンハンスメント層ブ
ロックから得られた内部予測モードは、角度内部予測モードを使用しないならば、上記の
エンハンスメント層ブロックから得られた内部予測モードは、対応するベース層内部予測
モードに取り替えられる。他のバージョンでは、ベース層内部予測モードを使用して、(
単一要素から成る)最もありそうなモードのリストを変更するための異なるアプローチが
使用される。
用するために、1つ以上の最もありそうなモードを使用する概念が、(仮に、対応するベ
ース層ブロックが、内部符号化されるならば、)最もありそうなモードが共同配置された
ベース層ブロックの中で使用された内部予測モードを含む方法で、変更される。特定の実
施の形態において、以下のアプローチが使用される。現在のエンハンスメント層ブロック
が与えられると、共同配置されたベース層ブロックは決定される。特定のバージョンでは
、共同配置されたベース層ブロックは、エンハンスメントブロックの左上サンプルの共同
配置された位置をカバーするベース層ブロックである。別のバージョンでは、共同配置さ
れたベース層ブロックが、エンハンスメントブロックの中央部のサンプルの共同配置され
た位置をカバーするベース層ブロックである。他のバージョンでは、エンハンスメント層
ブロックの中の別のサンプルが、共同配置されたベース層ブロックを決定するために使用
される。仮に、決定された共同配置されたベース層ブロックが内部符号化され、ベース層
内部予測モードが角度内部予測モードを指定して、現在のエンハンスメント層ブロックの
左側のエンハンスメント層ブロックから得られた内部予測モードが、角度内部予測モード
を使用しないならば、左のエンハンスメント層ブロックから得られた内部予測モードは、
対応するベース層内部予測モードに取り替えられる。さもなければ、仮に、決定された共
同配置されたベース層ブロックは、内部符号化され、ベース層内部予測モードは、角度内
部予測モードを指定し、現在のエンハンスメント層ブロックの上のエンハンスメント層ブ
ロックから得られた内部予測モードは、角度内部予測モードを使用しないならば、上記の
エンハンスメント層ブロックから得られた内部予測モードは、対応するベース層内部予測
モードに取り替えられる。他のバージョンでは、ベース層内部予測モードを使用して、(
単一要素から成る)最もありそうなモードのリストを変更するための異なるアプローチが
使用される。
空間かつ品質のエンハンスメント層のための中間符号化技術が、次に、提供される。
最先端のハイブリッドビデオ符号化規格(H.264/AVCまたは今度のHEVCな
ど)において、画像系列の画像が、サンプルのブロックに分割される。ブロックサイズは
、固定される、または、符号化手法が、ブロックを、より小さいブロックサイズを有する
ブロックに更に副分割することを許容する階層構造を提供する。ブロックの再構成は、通
常、ブロックのための予測信号を発生させて、送信された残留信号を追加されることによ
って得られる。残留信号は、通常、変換符号化を使用して送信される。それは、変換係数
(また、変換係数レベルとも呼ばれる)のための量子化インデックスリストが、エントロ
ピー符号化技術を使用して送信されることを意味する。そして、デコーダ側では、これら
の送信された変換係数レベルは、予測信号に追加される残留信号を得るために、スケーリ
ングされ、そして、逆変換される。残留信号は、(現在の時間瞬間のために既に送信され
たデータのみを使用して)内部予測によって、または、(異なる時間瞬間のために既に送
信されたデータを使用して)中間予測のいずれかによって発生する。
ど)において、画像系列の画像が、サンプルのブロックに分割される。ブロックサイズは
、固定される、または、符号化手法が、ブロックを、より小さいブロックサイズを有する
ブロックに更に副分割することを許容する階層構造を提供する。ブロックの再構成は、通
常、ブロックのための予測信号を発生させて、送信された残留信号を追加されることによ
って得られる。残留信号は、通常、変換符号化を使用して送信される。それは、変換係数
(また、変換係数レベルとも呼ばれる)のための量子化インデックスリストが、エントロ
ピー符号化技術を使用して送信されることを意味する。そして、デコーダ側では、これら
の送信された変換係数レベルは、予測信号に追加される残留信号を得るために、スケーリ
ングされ、そして、逆変換される。残留信号は、(現在の時間瞬間のために既に送信され
たデータのみを使用して)内部予測によって、または、(異なる時間瞬間のために既に送
信されたデータを使用して)中間予測のいずれかによって発生する。
中間予測において、予測ブロックは、既に再構成されたフレームのサンプルを使用して
、作動補償予測によって得られる。これは、(1つの引用画像と1組の作動パラメータを
使用して)単方向の予測によってなされる。または、予測信号は、多重仮説予測によって
発生させることができる。後者の場合、2つ以上の予測信号が重ねられる。すなわち、各
サンプルに対して、重み付け平均が、最終予測信号を形成するために構成される。(重ね
られる)多重予測信号は、異なる仮説のための異なる作動パラメータ(例えば、異なる引
用画像または作動ベクトル)を使用して、発生される。また、単方向の予測に対して、一
定の係数を有する作動補償予測信号のサンプルを掛けて、最終予測信号を形成するために
一定のオフセットを追加することも可能である。また、そのようなスケーリングとオフセ
ット補正が、多重仮説予測の中の全てのまたは選択された仮説のために使用される。
、作動補償予測によって得られる。これは、(1つの引用画像と1組の作動パラメータを
使用して)単方向の予測によってなされる。または、予測信号は、多重仮説予測によって
発生させることができる。後者の場合、2つ以上の予測信号が重ねられる。すなわち、各
サンプルに対して、重み付け平均が、最終予測信号を形成するために構成される。(重ね
られる)多重予測信号は、異なる仮説のための異なる作動パラメータ(例えば、異なる引
用画像または作動ベクトル)を使用して、発生される。また、単方向の予測に対して、一
定の係数を有する作動補償予測信号のサンプルを掛けて、最終予測信号を形成するために
一定のオフセットを追加することも可能である。また、そのようなスケーリングとオフセ
ット補正が、多重仮説予測の中の全てのまたは選択された仮説のために使用される。
スケーラブルビデオ符号化の中でも、ベース層情報が、エンハンスメント層のための中
間予測過程をサポートするために利用される。スケーラブル符号化のための最先端のビデ
オ符号化規格、H.264/AVCのSVC拡張は、エンハンスメント層の中の中間予測
過程の符号化効率を向上させるための1つの追加モードである。このモードは、マクロブ
ロックレベル(16×16個のlumaサンプルのブロック)で合図される。このモード
の中で、低層の中の再構成された残留サンプルは、エンハンスメント層の中の作動補償予
測信号を改良するために使用される。このモードは、中間層の残留予測とも呼ばれる。仮
に、このモードが、品質エンハンスメント層の中のマクロブロックのために選択されるな
らば、中間層の予測信号は、再構成された低層残留信号の共同配置されたサンプルによっ
て組み立てられる。仮に、中間層残留予測モードが、空間エンハンスメント層の中で選択
されるならば、予測信号は、共同配置された再構成されたベース層残留信号を抽出するこ
とによって発生する。抽出に対して、FIRフィルタが使用される。しかし、フィルタリ
ングは、変換ブロック境界を横切って適用されない。再構成されたベース層残留のサンプ
ルから発生する予測信号は、エンハンスメント層ブロックのための最終予測信号を形成す
るために、従来の作動補償予測信号に追加される。一般的に、中間層残留予測モードに対
して、追加残留信号が、変換符号化によって送信される。残留信号の送信は、仮に、それ
がビットストリームの中で対応して合図されるならば、省略される(ゼロに等しいと推論
される)。最終再構成信号は、送信された変換係数レベルをスケーリングして、逆空間変
換を適用することによって得られる再構成された残留信号を、予測信号に追加することに
よって得られる。そこでは、中間層残留予測信号を作動補償予測信号に追加することによ
って得られる。
間予測過程をサポートするために利用される。スケーラブル符号化のための最先端のビデ
オ符号化規格、H.264/AVCのSVC拡張は、エンハンスメント層の中の中間予測
過程の符号化効率を向上させるための1つの追加モードである。このモードは、マクロブ
ロックレベル(16×16個のlumaサンプルのブロック)で合図される。このモード
の中で、低層の中の再構成された残留サンプルは、エンハンスメント層の中の作動補償予
測信号を改良するために使用される。このモードは、中間層の残留予測とも呼ばれる。仮
に、このモードが、品質エンハンスメント層の中のマクロブロックのために選択されるな
らば、中間層の予測信号は、再構成された低層残留信号の共同配置されたサンプルによっ
て組み立てられる。仮に、中間層残留予測モードが、空間エンハンスメント層の中で選択
されるならば、予測信号は、共同配置された再構成されたベース層残留信号を抽出するこ
とによって発生する。抽出に対して、FIRフィルタが使用される。しかし、フィルタリ
ングは、変換ブロック境界を横切って適用されない。再構成されたベース層残留のサンプ
ルから発生する予測信号は、エンハンスメント層ブロックのための最終予測信号を形成す
るために、従来の作動補償予測信号に追加される。一般的に、中間層残留予測モードに対
して、追加残留信号が、変換符号化によって送信される。残留信号の送信は、仮に、それ
がビットストリームの中で対応して合図されるならば、省略される(ゼロに等しいと推論
される)。最終再構成信号は、送信された変換係数レベルをスケーリングして、逆空間変
換を適用することによって得られる再構成された残留信号を、予測信号に追加することに
よって得られる。そこでは、中間層残留予測信号を作動補償予測信号に追加することによ
って得られる。
次に、エンハンスメント層信号の中間符号化のための技術が説明される。このセクショ
ンは、スケーラブルビデオ符号化シナリオの中で符号化されるべきエンハンスメント層信
号を内部予測するために、既に再構成されたエンハンスメント層信号に加えて、ベース層
信号を採用するための方法を説明する。符号化されるべきエンハンスメント層信号を中間
予測するためのベース層信号を採用することによって、予測誤差が十分に抑えられる。そ
れは、エンハンスメント層の符号化に対して節約する総合的なビット伝送速度をもたらす
。このセクションの主な焦点は、ベース層からの追加信号を有する既に符号化されたエン
ハンスメント層のサンプルを使用して、エンハンスメント層のサンプルのブロックベース
の作動補償を増大させることである。以下の記述は、符号化されたベース層から様々な信
号を使用するための可能性を提供する。四枝ツリーブロック仕切りが、好ましい実施の形
態として、一般に採用されるけれども、提示された例は、どんな特定のブロック仕切りも
仮定することなく、一般的なブロックベースのハイブリッド符号化アプローチに応用され
る。現在の時間インデックスのベース層再構成、現在の時間インデックスのベース層残留
、または、符号化されるべきエンハンスメント層ブロックの中間予測のための既に符号化
された画像のベース層再構成の使用さえ説明される。また、現在のエンハンスメント層の
ための、より良い予測を得るために、ベース層信号が既に符号化されたエンハンスメント
層信号と結合する方法が説明される。
最先端の主な技術の1つは、H.264/SVCの中の中間層残留予測である。H.2
64/SVCの中の中間層残留予測は、それらがベースモード旗または従来のマクロブロ
ックタイプのどれかを使用することによって合図されたSVCマクロブロックタイプを使
用して、符号化されるか否かに関係なく、全ての中間符号化されたマクロブロックに対し
て採用される。旗は、空間かつ品質のエンハンスメント層のためのマクロブロック構文(
中間層残留予測の用法を合図する)に追加される。この残留予測旗が1と等しいとき、引
用層の中の対応する領域の残留信号が、双線型フィルタを使用してブロック的に抽出され
、エンハンスメント層マクロブロックの残留信号のための予測として使用される。その結
果、対応する差信号だけが、エンハンスメント層の中で符号化される必要がある。
このセクションの記述において、以下の記法が使用される。
t0:=現在の画像の時間インデックス
t1:=既に再構成された画像の時間インデックス
EL:=エンハンスメント層
BL:=ベース層
EL(t0):=符号化されるべき現在のエンハンスメント層画像
EL_reco:=エンハンスメント層再構成
BL_reco:=ベース層再構成
BL_resi:=ベース層残留信号(ベース層変換係数の逆変換、または、ベース層
再構成とベース層予測との間の差)
EL_diff:=エンハンスメント層再構成と、抽出された/フィルタにかけられた
ベース層再構成との間の差
異なるベース層信号とエンハンスメント層信号とは、図28の中で説明された記載の中
で使用される。
ンは、スケーラブルビデオ符号化シナリオの中で符号化されるべきエンハンスメント層信
号を内部予測するために、既に再構成されたエンハンスメント層信号に加えて、ベース層
信号を採用するための方法を説明する。符号化されるべきエンハンスメント層信号を中間
予測するためのベース層信号を採用することによって、予測誤差が十分に抑えられる。そ
れは、エンハンスメント層の符号化に対して節約する総合的なビット伝送速度をもたらす
。このセクションの主な焦点は、ベース層からの追加信号を有する既に符号化されたエン
ハンスメント層のサンプルを使用して、エンハンスメント層のサンプルのブロックベース
の作動補償を増大させることである。以下の記述は、符号化されたベース層から様々な信
号を使用するための可能性を提供する。四枝ツリーブロック仕切りが、好ましい実施の形
態として、一般に採用されるけれども、提示された例は、どんな特定のブロック仕切りも
仮定することなく、一般的なブロックベースのハイブリッド符号化アプローチに応用され
る。現在の時間インデックスのベース層再構成、現在の時間インデックスのベース層残留
、または、符号化されるべきエンハンスメント層ブロックの中間予測のための既に符号化
された画像のベース層再構成の使用さえ説明される。また、現在のエンハンスメント層の
ための、より良い予測を得るために、ベース層信号が既に符号化されたエンハンスメント
層信号と結合する方法が説明される。
最先端の主な技術の1つは、H.264/SVCの中の中間層残留予測である。H.2
64/SVCの中の中間層残留予測は、それらがベースモード旗または従来のマクロブロ
ックタイプのどれかを使用することによって合図されたSVCマクロブロックタイプを使
用して、符号化されるか否かに関係なく、全ての中間符号化されたマクロブロックに対し
て採用される。旗は、空間かつ品質のエンハンスメント層のためのマクロブロック構文(
中間層残留予測の用法を合図する)に追加される。この残留予測旗が1と等しいとき、引
用層の中の対応する領域の残留信号が、双線型フィルタを使用してブロック的に抽出され
、エンハンスメント層マクロブロックの残留信号のための予測として使用される。その結
果、対応する差信号だけが、エンハンスメント層の中で符号化される必要がある。
このセクションの記述において、以下の記法が使用される。
t0:=現在の画像の時間インデックス
t1:=既に再構成された画像の時間インデックス
EL:=エンハンスメント層
BL:=ベース層
EL(t0):=符号化されるべき現在のエンハンスメント層画像
EL_reco:=エンハンスメント層再構成
BL_reco:=ベース層再構成
BL_resi:=ベース層残留信号(ベース層変換係数の逆変換、または、ベース層
再構成とベース層予測との間の差)
EL_diff:=エンハンスメント層再構成と、抽出された/フィルタにかけられた
ベース層再構成との間の差
異なるベース層信号とエンハンスメント層信号とは、図28の中で説明された記載の中
で使用される。
記述に対して、フィルタの以下の特性が使用される。
・直線性:記述の中で言及した多くのフィルタが直線的であるけれども、非線形のフィ
ルタも使用される。
・出力サンプルの数:抽出操作において、出力サンプルの数は、入力サンプルの数より
大きい。ここで、入力データのフィルタリングは、入力値より多いサンプルを作り出す。
従来のフィルタリングでは、出力サンプルの数は、入力のサンプルの数と等しい。そのよ
うなフィルタリング操作は、例えば、品質スケーラブル符号化の中で使用される。
・位相遅延:整数位置でのサンプルのフィルタリングに対して、位相遅延は、通常、ゼ
ロ(または、サンプルの中の整数値の遅延)である。断片的な位置(例えば、半分ペルの
位置または4分の1ペルの位置)のサンプルの発生に対して、通常、(サンプルのユニッ
トの中の)断片的な遅延を有するフィルタが、整数格子のサンプルに適用される。
・直線性:記述の中で言及した多くのフィルタが直線的であるけれども、非線形のフィ
ルタも使用される。
・出力サンプルの数:抽出操作において、出力サンプルの数は、入力サンプルの数より
大きい。ここで、入力データのフィルタリングは、入力値より多いサンプルを作り出す。
従来のフィルタリングでは、出力サンプルの数は、入力のサンプルの数と等しい。そのよ
うなフィルタリング操作は、例えば、品質スケーラブル符号化の中で使用される。
・位相遅延:整数位置でのサンプルのフィルタリングに対して、位相遅延は、通常、ゼ
ロ(または、サンプルの中の整数値の遅延)である。断片的な位置(例えば、半分ペルの
位置または4分の1ペルの位置)のサンプルの発生に対して、通常、(サンプルのユニッ
トの中の)断片的な遅延を有するフィルタが、整数格子のサンプルに適用される。
全てのハイブリッドビデオ符号化規格(例えば、MPEG-2、H.264/AVC、
または、今度のHEVC規格)に使用された従来の作動補償予測は、図29で説明される
。現在のブロックの信号を予測するために、既に再構成された画像の領域は、予測信号と
して置き換えられて、使用される。置き換えの合図のために、作動ベクトルが、ビットス
トリームの中で、通常、符号化される。整数サンプルの精度作動ベクトルに対して、予測
信号を形成するために引用画像の中の引用領域が直接にコピーされる。しかしながら、断
片的なサンプルの精度作動ベクトルを送信することも可能である。この場合、予測信号が
、断片的なサンプル遅延を有するフィルタで、引用信号をフィルタリングすることによっ
て得られる。使用された引用画像は、通常、引用画像インデックスを、ビットストリーム
構文に含めることによって指定される。一般に、最終予測信号を形成するために、2つ以
上の予測信号を重ねることも可能である。概念は、例えば、2つの作動仮説で、Bスライ
スの中でサポートされる。この場合、多重予測信号は、異なる仮説に対する異なる作動パ
ラメータ(例えば、異なる引用画像または作動ベクトル)を使用して発生する。単一方向
の予測に対して、一定の要因を有する作動補償予測信号のサンプルを掛けて、最終予測信
号を形成するために一定のオフセットを加えることも可能である。そのようなスケーリン
グとオフセット補正が、また、マルチ仮説予測の中の全てまたは選択された仮説のために
使用される。
または、今度のHEVC規格)に使用された従来の作動補償予測は、図29で説明される
。現在のブロックの信号を予測するために、既に再構成された画像の領域は、予測信号と
して置き換えられて、使用される。置き換えの合図のために、作動ベクトルが、ビットス
トリームの中で、通常、符号化される。整数サンプルの精度作動ベクトルに対して、予測
信号を形成するために引用画像の中の引用領域が直接にコピーされる。しかしながら、断
片的なサンプルの精度作動ベクトルを送信することも可能である。この場合、予測信号が
、断片的なサンプル遅延を有するフィルタで、引用信号をフィルタリングすることによっ
て得られる。使用された引用画像は、通常、引用画像インデックスを、ビットストリーム
構文に含めることによって指定される。一般に、最終予測信号を形成するために、2つ以
上の予測信号を重ねることも可能である。概念は、例えば、2つの作動仮説で、Bスライ
スの中でサポートされる。この場合、多重予測信号は、異なる仮説に対する異なる作動パ
ラメータ(例えば、異なる引用画像または作動ベクトル)を使用して発生する。単一方向
の予測に対して、一定の要因を有する作動補償予測信号のサンプルを掛けて、最終予測信
号を形成するために一定のオフセットを加えることも可能である。そのようなスケーリン
グとオフセット補正が、また、マルチ仮説予測の中の全てまたは選択された仮説のために
使用される。
以下の記述は、品質エンハンスメント層を有するスケーラブル符号化(エンハンスメン
ト層は、ベース層と同じ解像度を持っているけれども、より高い品質または忠実度を有す
る入力ビデオを表わす)、および、空間エンハンスメント層を有するスケーラブル符号化
(エンハンスメント層は、ベース層より高い解像度、すなわち、サンプルのより大きな数
を持っている)に適用される。品質エンハンスメント層に対して、ベース層信号の抽出は
必要でないけれども、再構成されたベース層のサンプルのフィルタリングは適用される。
空間エンハンスメント層の場合、ベース層信号の抽出が一般に必要である。
ト層は、ベース層と同じ解像度を持っているけれども、より高い品質または忠実度を有す
る入力ビデオを表わす)、および、空間エンハンスメント層を有するスケーラブル符号化
(エンハンスメント層は、ベース層より高い解像度、すなわち、サンプルのより大きな数
を持っている)に適用される。品質エンハンスメント層に対して、ベース層信号の抽出は
必要でないけれども、再構成されたベース層のサンプルのフィルタリングは適用される。
空間エンハンスメント層の場合、ベース層信号の抽出が一般に必要である。
実施の形態は、エンハンスメント層ブロックの中間予測のために、再構成されたベース
層サンプルまたはベース層残留サンプルを使用するための異なる方法をサポートする。従
来の中間予測と内部予測とを追加して、以下に記載された1つ以上の方法を支持すること
が可能である。特定の方法の使用法が、最も大きいサポートされたブロックサイズ(H.
264/AVCの中のマクロブロック、または、HEVCの中の符号化ツリーブロック/
最も大きい符号化ユニットなど)のレベルで合図される。それは、合図された全てのサポ
ートされたブロックサイズに合図される。または、それは、サポートされたブロックサイ
ズの副組のために合図される。
層サンプルまたはベース層残留サンプルを使用するための異なる方法をサポートする。従
来の中間予測と内部予測とを追加して、以下に記載された1つ以上の方法を支持すること
が可能である。特定の方法の使用法が、最も大きいサポートされたブロックサイズ(H.
264/AVCの中のマクロブロック、または、HEVCの中の符号化ツリーブロック/
最も大きい符号化ユニットなど)のレベルで合図される。それは、合図された全てのサポ
ートされたブロックサイズに合図される。または、それは、サポートされたブロックサイ
ズの副組のために合図される。
以下で記載された全ての方法に対して、予測信号が、ブロックのための再構成信号とし
て、直接に使用される。あるいは、中間層中間予測のための選択された方法が、残留符号
化と結合される。特定の実施の形態において、残留信号は、変換符号化を経由して送信さ
れる。そして、すなわち、量子化変換係数(変換係数レベル)は、エントロピー符号化技
術(例えば、可変長符号化または算術符号化)を使用して送信され、そして、残留が、送
信された変換係数レベルを逆量子化(スケーリング)して、逆変換を適用することによっ
て得られる。特定のバージョンでは、中間層中間予測信号が発生するブロックに対応する
完全な残留ブロックが、単一の変換を使用して変換される。すなわち、全体のブロックが
、予測ブロックと同じサイズの単一の変換を使用して変換される。別の実施の形態では、
予測ブロックが、例えば、階層的な分解を使用して、より小さいブロックに更に副分割さ
れる。そして、それぞれの異なるブロックサイズを有する、より小さいブロックに対して
、別々の変換が適用される。別の実施の形態では、符号化ユニットは、より小さい予測ブ
ロックに分割される。そして、予測ブロックのゼロ以上に対して、予測信号が、中間層中
間予測のための方法の1つを使用して発生する。そして、次に、全体の符号化ユニットの
残留が、単一の変換を使用して変換される。または、符号化ユニットは、異なる変換ユニ
ットに副分割される。そこでは、変換ユニット(単一の変換が適用されるブロック)を形
成するための副分割が、符号化ユニットを予測ブロックに分解するための副分割と異なる
。
て、直接に使用される。あるいは、中間層中間予測のための選択された方法が、残留符号
化と結合される。特定の実施の形態において、残留信号は、変換符号化を経由して送信さ
れる。そして、すなわち、量子化変換係数(変換係数レベル)は、エントロピー符号化技
術(例えば、可変長符号化または算術符号化)を使用して送信され、そして、残留が、送
信された変換係数レベルを逆量子化(スケーリング)して、逆変換を適用することによっ
て得られる。特定のバージョンでは、中間層中間予測信号が発生するブロックに対応する
完全な残留ブロックが、単一の変換を使用して変換される。すなわち、全体のブロックが
、予測ブロックと同じサイズの単一の変換を使用して変換される。別の実施の形態では、
予測ブロックが、例えば、階層的な分解を使用して、より小さいブロックに更に副分割さ
れる。そして、それぞれの異なるブロックサイズを有する、より小さいブロックに対して
、別々の変換が適用される。別の実施の形態では、符号化ユニットは、より小さい予測ブ
ロックに分割される。そして、予測ブロックのゼロ以上に対して、予測信号が、中間層中
間予測のための方法の1つを使用して発生する。そして、次に、全体の符号化ユニットの
残留が、単一の変換を使用して変換される。または、符号化ユニットは、異なる変換ユニ
ットに副分割される。そこでは、変換ユニット(単一の変換が適用されるブロック)を形
成するための副分割が、符号化ユニットを予測ブロックに分解するための副分割と異なる
。
以下では、ベース層残留とエンハンスメント層再構成を使用して、予測を実行する可能
性が説明される。多重方法は以下の方法を含む。(既に再構成されたエンハンスメント層
の画像の作動補償された補間によって得られた)従来の中間予測信号は、(抽出されるた
/フィルタにかけられた)ベース層残留信号(ベース層変換係数の逆変換、または、ベー
ス層再構成とベース層予測との間の差)に結合される。この方法は「BL_resi」モ
ード(図30に例えて)とも呼ばれる。
性が説明される。多重方法は以下の方法を含む。(既に再構成されたエンハンスメント層
の画像の作動補償された補間によって得られた)従来の中間予測信号は、(抽出されるた
/フィルタにかけられた)ベース層残留信号(ベース層変換係数の逆変換、または、ベー
ス層再構成とベース層予測との間の差)に結合される。この方法は「BL_resi」モ
ード(図30に例えて)とも呼ばれる。
要するに、エンハンスメント層のサンプルのための予測が、以下に記載される。
EL prediction=filter(BL_resi(t0))+MCP_f
ilter(EL_reco(t1))
エンハンスメント層再構成信号の2つ以上仮説が使用されることも、可能である。例え
ば、
EL prediction=filter(BL_resi(t0))+MCP_f
ilter1(EL_reco(t1))+MCP_filter2(EL_reco(
t2))
エンハンスメント層(EL)引用画像の上で使用される作動補償予測(MCP)フィル
タは、整数または断片的なサンプル精度のものである。EL引用画像の上で使用されるM
CPフィルタは、BL復号化過程の間に、BL引用画像の上で使用されるMCPフィルタ
と同じである、または、異なる。
作動ベクトルMV(x、y、t)は、EL引用画像の中の特定の位置を示すために定義
される。パラメータxとyが、画像の中の空間位置を示す。パラメータtは、引用画像の
時間インデックスを記述するために使用され、引用インデックスとも呼ばれる。しばしば
、用語作動ベクトルは、2つの空間要素(x、y)だけについて言及するために使用され
る。MVの整数部分は、引用画像からの1組のサンプルを取ってくるために使用される。
そして、MVの断片的な部分は、1組のフィルタからMCPフィルタを選択するために使
用される。取ってこられた引用サンプルは、フィルタにかけられた引用サンプルを作り出
すために、フィルタにかけられる。作動ベクトルは、一般に、異なる予測を使用して符号
化される。それは、作動ベクトル予測器が、既に符号化された作動ベクトル(そして、構
文要素が、潜在的作動ベクトル予測器の組の使用された1つを、潜在的に示す)に基づい
て得られ、そして、異なるベクトルが、ビットストリームの中に含まれていることを意味
する。最終作動ベクトルは、送信された作動ベクトル差を、作動ベクトル予測器に加える
ことによって得られる。通常、ブロックのための作動パラメータを完全に得ることも可能
である。従って、通常、潜在的作動パラメータ候補のリストは、既に符号化されたデータ
に基づいて構成される。このリストは、引用フレームの中の共同配置されたブロックの中
の作動パラメータに基づいて得られる作動パラメータと同様に、空間的に隣接するブロッ
クの作動パラメータを含むことができる。
ベース層(BL)残留信号は、以下の1つと定義できる。
・BL変換係数の逆変換、または、
・BL再構成とBL予測との間の差、または、
・BL変換係数の逆変換がゼロであるBLブロックに対して、それは、BL(例えば、
再構成されたBLブロックのハイパスフィルタにかけられたバージョン)から得られた別
の信号に取り替えることができる、または、
・上の方法の組み合わせ。
現在のBL残留からEL予測要素を計算するために、ELの画像の中の考慮される領域
と共同配置されたBL画像の中の領域が特定され、そして、残留信号が、特定されたBL
領域から取り出される。共同配置された領域の定義は、それが、BL解像度の整数のスケ
ーリング係数(例えば、2×スケーラビリティ)、または、BL解像度の断片的なけたス
ケーリング係数(例えば、1.5×スケーラビリティ)を説明するように作られる。また
は、BL解像度と同じEL解像度(例えば、品質スケーラビリティ)を生み出すことさえ
できる。品質スケーラビリティの場合、BL画像の中の共同配置されたブロックは、予測
されるべきELブロックと同じ座標を有する。
共同配置されたBL残留は、フィルタにかけられたBL残留サンプルを発生させるため
に抽出される/フィルタにかけられることができる。
最終EL予測は、フィルタにかけられたEL再構成サンプルと、フィルタにかけられた
BL残留サンプルとを加えることによって得られる。
EL prediction=filter(BL_resi(t0))+MCP_f
ilter(EL_reco(t1))
エンハンスメント層再構成信号の2つ以上仮説が使用されることも、可能である。例え
ば、
EL prediction=filter(BL_resi(t0))+MCP_f
ilter1(EL_reco(t1))+MCP_filter2(EL_reco(
t2))
エンハンスメント層(EL)引用画像の上で使用される作動補償予測(MCP)フィル
タは、整数または断片的なサンプル精度のものである。EL引用画像の上で使用されるM
CPフィルタは、BL復号化過程の間に、BL引用画像の上で使用されるMCPフィルタ
と同じである、または、異なる。
作動ベクトルMV(x、y、t)は、EL引用画像の中の特定の位置を示すために定義
される。パラメータxとyが、画像の中の空間位置を示す。パラメータtは、引用画像の
時間インデックスを記述するために使用され、引用インデックスとも呼ばれる。しばしば
、用語作動ベクトルは、2つの空間要素(x、y)だけについて言及するために使用され
る。MVの整数部分は、引用画像からの1組のサンプルを取ってくるために使用される。
そして、MVの断片的な部分は、1組のフィルタからMCPフィルタを選択するために使
用される。取ってこられた引用サンプルは、フィルタにかけられた引用サンプルを作り出
すために、フィルタにかけられる。作動ベクトルは、一般に、異なる予測を使用して符号
化される。それは、作動ベクトル予測器が、既に符号化された作動ベクトル(そして、構
文要素が、潜在的作動ベクトル予測器の組の使用された1つを、潜在的に示す)に基づい
て得られ、そして、異なるベクトルが、ビットストリームの中に含まれていることを意味
する。最終作動ベクトルは、送信された作動ベクトル差を、作動ベクトル予測器に加える
ことによって得られる。通常、ブロックのための作動パラメータを完全に得ることも可能
である。従って、通常、潜在的作動パラメータ候補のリストは、既に符号化されたデータ
に基づいて構成される。このリストは、引用フレームの中の共同配置されたブロックの中
の作動パラメータに基づいて得られる作動パラメータと同様に、空間的に隣接するブロッ
クの作動パラメータを含むことができる。
ベース層(BL)残留信号は、以下の1つと定義できる。
・BL変換係数の逆変換、または、
・BL再構成とBL予測との間の差、または、
・BL変換係数の逆変換がゼロであるBLブロックに対して、それは、BL(例えば、
再構成されたBLブロックのハイパスフィルタにかけられたバージョン)から得られた別
の信号に取り替えることができる、または、
・上の方法の組み合わせ。
現在のBL残留からEL予測要素を計算するために、ELの画像の中の考慮される領域
と共同配置されたBL画像の中の領域が特定され、そして、残留信号が、特定されたBL
領域から取り出される。共同配置された領域の定義は、それが、BL解像度の整数のスケ
ーリング係数(例えば、2×スケーラビリティ)、または、BL解像度の断片的なけたス
ケーリング係数(例えば、1.5×スケーラビリティ)を説明するように作られる。また
は、BL解像度と同じEL解像度(例えば、品質スケーラビリティ)を生み出すことさえ
できる。品質スケーラビリティの場合、BL画像の中の共同配置されたブロックは、予測
されるべきELブロックと同じ座標を有する。
共同配置されたBL残留は、フィルタにかけられたBL残留サンプルを発生させるため
に抽出される/フィルタにかけられることができる。
最終EL予測は、フィルタにかけられたEL再構成サンプルと、フィルタにかけられた
BL残留サンプルとを加えることによって得られる。
ベース層再構成とエンハンスメント層差信号(実施例J参照)を使用する予測に関する
多重方法は、以下の方法を含む。(抽出された/フィルタにかけられた)再構成されたベ
ース層信号は、作動補償予測信号に結合される。そこでは、作動補償予測信号が、動作補
償差画像によって得られる。差画像は、引用画像に対して、再構成されたエンハンスメン
ト層信号と、(抽出された/フィルタにかけられた)再構成されたベース層信号との差を
表わす。この方法は、BL_recoモードとも呼ばれる。
多重方法は、以下の方法を含む。(抽出された/フィルタにかけられた)再構成されたベ
ース層信号は、作動補償予測信号に結合される。そこでは、作動補償予測信号が、動作補
償差画像によって得られる。差画像は、引用画像に対して、再構成されたエンハンスメン
ト層信号と、(抽出された/フィルタにかけられた)再構成されたベース層信号との差を
表わす。この方法は、BL_recoモードとも呼ばれる。
この概念は図31で説明される。要するに、ELサンプルのための予測が、以下に記載
される。
EL prediction=filter(BL_reco(t0))+MCP_f
ilter(EL_diff(t1))
される。
EL prediction=filter(BL_reco(t0))+MCP_f
ilter(EL_diff(t1))
EL差信号の2つ以上の仮説が使用されることも可能である。例えば、
EL prediction=filter(BL_resi(t0))+MCP_f
ilter1(EL_diff(t1))+MCP_filter2(EL_diff(
t2))
EL prediction=filter(BL_resi(t0))+MCP_f
ilter1(EL_diff(t1))+MCP_filter2(EL_diff(
t2))
EL差信号に対して、以下のバージョンが使用される。
・EL再構成と抽出された/フィルタにかけられたBL再構成との間の差、または、
・(非ブロック化、SAO、ALFのような)ループフィルタリング段階の前または間
のEL再構成と、抽出された/フィルタにかけられたBL再構成との間の差。
・EL再構成と抽出された/フィルタにかけられたBL再構成との間の差、または、
・(非ブロック化、SAO、ALFのような)ループフィルタリング段階の前または間
のEL再構成と、抽出された/フィルタにかけられたBL再構成との間の差。
特定のバージョンの使用法は、デコーダの中で固定される、または、それは、系列レベ
ルで、画像レベルで、スライスレベルで、最も大きい符号化ユニットレベルで、符号化ユ
ニットレベルで、または、別の仕切りレベルで合図される。あるいは、それは、別の符号
化パラメータに依存することができる。
ルで、画像レベルで、スライスレベルで、最も大きい符号化ユニットレベルで、符号化ユ
ニットレベルで、または、別の仕切りレベルで合図される。あるいは、それは、別の符号
化パラメータに依存することができる。
EL差信号が、EL再構成と抽出された/フィルタにかけられたBL再構成との間の差
を使用して定義されるとき、ちょうどEL再構成とBL再構成とを保存し、スプレディク
ション(sprediction)モードを使用して、ブロックのために急いでEL差信
号を計算することに従順になる。その結果、EL差信号を収納するために必要なメモリを
保存する。しかしながら、それはわずかな計算の複雑オーバーヘッドを招く。
を使用して定義されるとき、ちょうどEL再構成とBL再構成とを保存し、スプレディク
ション(sprediction)モードを使用して、ブロックのために急いでEL差信
号を計算することに従順になる。その結果、EL差信号を収納するために必要なメモリを
保存する。しかしながら、それはわずかな計算の複雑オーバーヘッドを招く。
EL差画像の上で使用されるMCPフィルタは、整数または断片的なサンプル精度のも
のであることができる。
・差画像のMCPに対して、再構成された画像のMCPと異なる補間フィルタが使用で
きる。
・差画像のMCPに対して、補間フィルタが、差画像の中の対応する領域の特性に基づ
いて、(または、ビットストリームの中の符号化パラメータに基づいて、または、送信さ
れた情報に基づいて、)選択される。
のであることができる。
・差画像のMCPに対して、再構成された画像のMCPと異なる補間フィルタが使用で
きる。
・差画像のMCPに対して、補間フィルタが、差画像の中の対応する領域の特性に基づ
いて、(または、ビットストリームの中の符号化パラメータに基づいて、または、送信さ
れた情報に基づいて、)選択される。
作動ベクトルMV(x,y,t)は、EL差画像の中の特定の位置を指摘するために定
義される。パラメータxとyは、画像の中で空間位置を指摘し、そして、パラメータtが
、フィルタにかけられた差画像の時間インデックスを記述するために使用される。
義される。パラメータxとyは、画像の中で空間位置を指摘し、そして、パラメータtが
、フィルタにかけられた差画像の時間インデックスを記述するために使用される。
MVの整数部分は、差画像から1組のサンプルを取ってくるために使用され、MVの断
片的な部分は、1組のフィルタからMCPフィルタを選択するために使用される。取って
こられた差サンプルは、フィルタにかけられた差サンプルを作り出すためにフィルタにか
けられる。
片的な部分は、1組のフィルタからMCPフィルタを選択するために使用される。取って
こられた差サンプルは、フィルタにかけられた差サンプルを作り出すためにフィルタにか
けられる。
差画像のダイナミック(能動)範囲は、理論的にオリジナル画像のダイナミック範囲を
超えることができる。範囲[0 255]の中の像の8ビット表現を仮定する場合、差画
像は範囲[-255 255]を持つことができる。しかしながら、実際には、振幅の大
部分は、0の±付近の周りに分布される。差画像を格納する好ましい実施の形態において
、128の一定のオフセットが加えられ、結果は、範囲[0 255]に切り取られ、正
規の8ビット像として格納される。その後、符号化および復号化過程の中で、128のオ
フセットが、差画像から読み込まれた差振幅から引き算されて戻される。
超えることができる。範囲[0 255]の中の像の8ビット表現を仮定する場合、差画
像は範囲[-255 255]を持つことができる。しかしながら、実際には、振幅の大
部分は、0の±付近の周りに分布される。差画像を格納する好ましい実施の形態において
、128の一定のオフセットが加えられ、結果は、範囲[0 255]に切り取られ、正
規の8ビット像として格納される。その後、符号化および復号化過程の中で、128のオ
フセットが、差画像から読み込まれた差振幅から引き算されて戻される。
再構成されたBL信号を使用する方法に対して、以下のバージョンを使用できる。これ
は、固定される、または、それは、系列レベルで、画像レベルで、スライスレベルで、最
も大きい符号化ユニットレベルで、符号化ユニットレベルで、または、別の仕切りレベル
で合図される。あるいは、それは、別の符号化パラメータに依存することができる。
・非ブロック化および更に内ループ過程の前の再構成されたベース層サンプル(そのよ
うなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
・非ブロック化の後、しかし、更に内ループ過程の前の再構成されたベース層サンプル
(そのようなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)
。
・非ブロック化および更に内ループ過程の後の再構成されたベース層サンプル(そのよ
うなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、あるい
は、複数の内ループ過程ステップの間の再構成されたベース層サンプル。
は、固定される、または、それは、系列レベルで、画像レベルで、スライスレベルで、最
も大きい符号化ユニットレベルで、符号化ユニットレベルで、または、別の仕切りレベル
で合図される。あるいは、それは、別の符号化パラメータに依存することができる。
・非ブロック化および更に内ループ過程の前の再構成されたベース層サンプル(そのよ
うなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
・非ブロック化の後、しかし、更に内ループ過程の前の再構成されたベース層サンプル
(そのようなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)
。
・非ブロック化および更に内ループ過程の後の再構成されたベース層サンプル(そのよ
うなサンプルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、あるい
は、複数の内ループ過程ステップの間の再構成されたベース層サンプル。
現在のBL再構成からEL予測成分を計算するために、EL画像の中で考慮された領域
に共同配置されたBL画像の中の領域が特定される。そして、再構成信号が、特定された
BL領域から取り出される。共同配置された領域の定義は、それが、BL解像度の整数ス
ケーリング係数(例えば、2×スケーラビリティ)、または、BL解像度の端数のスケー
リング係数(例えば、1.5×スケーラビリティ)、または、BL解像度(例えば、SN
Rスケーラビリティ)と同じEL解像度を生み出すことさえ説明するように作られる。S
NRスケーラビリティの場合、BL画像の中の共同配置されたブロックは、予測されるべ
きELブロックと同じ座標を有する。
に共同配置されたBL画像の中の領域が特定される。そして、再構成信号が、特定された
BL領域から取り出される。共同配置された領域の定義は、それが、BL解像度の整数ス
ケーリング係数(例えば、2×スケーラビリティ)、または、BL解像度の端数のスケー
リング係数(例えば、1.5×スケーラビリティ)、または、BL解像度(例えば、SN
Rスケーラビリティ)と同じEL解像度を生み出すことさえ説明するように作られる。S
NRスケーラビリティの場合、BL画像の中の共同配置されたブロックは、予測されるべ
きELブロックと同じ座標を有する。
最終EL予測は、フィルタにかけられたEL差サンプルとフィルタにかけられたBL再
構成サンプルとを追加することによって得られる。
構成サンプルとを追加することによって得られる。
(抽出された/フィルタにかけられた)ベース層再構成信号と作動補償されたエンハン
スメント層差信号とを結合するモードのいくつかの可能な変化が、以下に記載される。
・(抽出された/フィルタにかけられた)BL信号を使用する方法の複数のバージョン
が、使用される。これらのバージョンのために採用された抽出された/フィルタにかけら
れたBL信号が、使用された(整数サンプル位置もフィルタにかける補間フィルタを含む
)補間フィルタと異なることができる、または、2番目のバージョンのために抽出された
/フィルタにかけられたBL信号が、最初のバージョンのために抽出された/フィルタに
かけられたBL信号を、フィルタにかけることによって得られる。異なるバージョンの1
つの選択が、系列で、画像で、スライスで、最も大きい符号化ユニットで、符号化ユニッ
トレベルで、または、画像仕切りの別のレベルで合図される。あるいは、それは、対応す
る再構成されたBL信号、または、送信された符号化パラメータの特性から推論される。
・異なるフィルタは、BL_recoモードの場合の抽出された/フィルタにかけられ
たBL再構成された信号と、BL_resiモードの場合のBL残留信号とのために使用
される。
・抽出された/フィルタにかけられたBL信号は、作動補償された差信号の2つ以上の
仮説に結合されることも可能である。これは図32で説明される。
スメント層差信号とを結合するモードのいくつかの可能な変化が、以下に記載される。
・(抽出された/フィルタにかけられた)BL信号を使用する方法の複数のバージョン
が、使用される。これらのバージョンのために採用された抽出された/フィルタにかけら
れたBL信号が、使用された(整数サンプル位置もフィルタにかける補間フィルタを含む
)補間フィルタと異なることができる、または、2番目のバージョンのために抽出された
/フィルタにかけられたBL信号が、最初のバージョンのために抽出された/フィルタに
かけられたBL信号を、フィルタにかけることによって得られる。異なるバージョンの1
つの選択が、系列で、画像で、スライスで、最も大きい符号化ユニットで、符号化ユニッ
トレベルで、または、画像仕切りの別のレベルで合図される。あるいは、それは、対応す
る再構成されたBL信号、または、送信された符号化パラメータの特性から推論される。
・異なるフィルタは、BL_recoモードの場合の抽出された/フィルタにかけられ
たBL再構成された信号と、BL_resiモードの場合のBL残留信号とのために使用
される。
・抽出された/フィルタにかけられたBL信号は、作動補償された差信号の2つ以上の
仮説に結合されることも可能である。これは図32で説明される。
上記を考慮すると、予測は、ベース層再構成とエンハンスメント層再構成の組み合わせ
を使用して実行される(実施例C参照)。図11、図12、図13に関する上の記述との
1つの大きな差は、空間的というよりむしろ時間的に実行される内部層予測34を得るた
めの符号化モードである。すなわち、空間予測30の代わりに、時間予測32が、内部層
予測信号34を形成するために使用される。従って、以下で記載されたいくつかの実施例
が、図6~図10と図11~図13とのそれぞれの上の実施の形態に容易に移転可能であ
る。多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、中間予測信号に結合される。そこでは、中間予測が、再構成されたエン
ハンスメント層の画像を使用して、作動補償予測によって得られる。最終予測信号は、異
なる周波数成分が、異なる重み付けを使用する方法で、中間予測信号とベース層予測信号
とを重み付けすることによって得られる。例えば、これは、以下のいずれかによって実現
できる。
・ローパスフィルタでベース層予測信号をフィルタにかけて、ハイパスフィルタで中間
予測信号をフィルタにかけて、得られたフィルタにかけられた信号を合計すること。
・ベース層予測信号と中間予測信号とを変換して、得られた変換ブロックを重畳するこ
と。そこでは、異なる重み付け係数が、異なる周波数位置のために使用される。次に、得
られた変換ブロックは、逆変換され、エンハンスメント層予測信号として使用される。あ
るいは、得られた変換係数は、スケーリングされた送信された変換係数レベルに追加され
、非ブロック化および内ループ過程の前に再構成されたブロックを得るために逆変換され
る。
を使用して実行される(実施例C参照)。図11、図12、図13に関する上の記述との
1つの大きな差は、空間的というよりむしろ時間的に実行される内部層予測34を得るた
めの符号化モードである。すなわち、空間予測30の代わりに、時間予測32が、内部層
予測信号34を形成するために使用される。従って、以下で記載されたいくつかの実施例
が、図6~図10と図11~図13とのそれぞれの上の実施の形態に容易に移転可能であ
る。多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、中間予測信号に結合される。そこでは、中間予測が、再構成されたエン
ハンスメント層の画像を使用して、作動補償予測によって得られる。最終予測信号は、異
なる周波数成分が、異なる重み付けを使用する方法で、中間予測信号とベース層予測信号
とを重み付けすることによって得られる。例えば、これは、以下のいずれかによって実現
できる。
・ローパスフィルタでベース層予測信号をフィルタにかけて、ハイパスフィルタで中間
予測信号をフィルタにかけて、得られたフィルタにかけられた信号を合計すること。
・ベース層予測信号と中間予測信号とを変換して、得られた変換ブロックを重畳するこ
と。そこでは、異なる重み付け係数が、異なる周波数位置のために使用される。次に、得
られた変換ブロックは、逆変換され、エンハンスメント層予測信号として使用される。あ
るいは、得られた変換係数は、スケーリングされた送信された変換係数レベルに追加され
、非ブロック化および内ループ過程の前に再構成されたブロックを得るために逆変換され
る。
このモードは、図33で記載された「BL_comb」モードとも呼ばれる。
要するに、EL予測は、以下に記載される。
EL prediction=BL_weighting(BL_reco(t0))
+EL_weighting(MCP_filter(EL_reco(t1)))
EL prediction=BL_weighting(BL_reco(t0))
+EL_weighting(MCP_filter(EL_reco(t1)))
好ましい実施の形態では、重み付けは、EL解像度対BL解像度の比率に依存してなさ
れる。例えば、BLが、範囲[1 1.25]の中で係数によってスケーリングアップさ
れるべきとき、ELおよびBL再構成のための所定の組の重み付けが使用される。BLが
、範囲[1.25 1.75]の中で係数によってスケーリングアップされるべきとき、
異なる組の重み付けが使用される。BLが、1.75以上の係数によってスケーリングア
ップされるべきとき、別の異なる組の重み付けなどが使用される。
れる。例えば、BLが、範囲[1 1.25]の中で係数によってスケーリングアップさ
れるべきとき、ELおよびBL再構成のための所定の組の重み付けが使用される。BLが
、範囲[1.25 1.75]の中で係数によってスケーリングアップされるべきとき、
異なる組の重み付けが使用される。BLが、1.75以上の係数によってスケーリングア
ップされるべきとき、別の異なる組の重み付けなどが使用される。
スケーリング因子分離ベース層とエンハンスメント層とに依存する特定の重み付けをす
ることも、空間内部層予測に関する他方の実施の形態で可能である。
ることも、空間内部層予測に関する他方の実施の形態で可能である。
別の好ましい実施の形態では、重み付けが、予測されるためにELブロックサイズに依
存してなされる。例えば、ELの中での4×4ブロックに対して、EL再構成変換係数の
ための重み付けを指定する重み付けマトリックスが、定義される。そして、BL再構成変
換係数のための重み付けを指定する別の重み付けマトリックスが、定義される。BL再構
成変換係数のための重み付けマトリックスは、例えば、以下の通りである。
64,63,61,49,
63,62,57,40,
61,56,44,28,
49,46,32,15,
そして、EL再構成変換係数のための重み付けマトリックスは、例えば、以下の通りで
ある。
0,2,8,24,
3,7,16,32,
9,18,20,26,
22,31,30,23,
存してなされる。例えば、ELの中での4×4ブロックに対して、EL再構成変換係数の
ための重み付けを指定する重み付けマトリックスが、定義される。そして、BL再構成変
換係数のための重み付けを指定する別の重み付けマトリックスが、定義される。BL再構
成変換係数のための重み付けマトリックスは、例えば、以下の通りである。
64,63,61,49,
63,62,57,40,
61,56,44,28,
49,46,32,15,
そして、EL再構成変換係数のための重み付けマトリックスは、例えば、以下の通りで
ある。
0,2,8,24,
3,7,16,32,
9,18,20,26,
22,31,30,23,
同様に、8×8、16×16、32×32などのようなブロックサイズに対して、分離
重み付けマトリックスが定義される。
重み付けマトリックスが定義される。
周波数領域の重み付けに使用される実際の変換は、予測残留を符号化するために使用さ
れる変換と同じである、または、異なっている。例えば、DCTのための整数近似は、周
波数領域の重み付けと、周波数領域の中で符号化されるべき予測残留の変換係数を計算す
ることの両方に使用できる。
れる変換と同じである、または、異なっている。例えば、DCTのための整数近似は、周
波数領域の重み付けと、周波数領域の中で符号化されるべき予測残留の変換係数を計算す
ることの両方に使用できる。
別の好ましい実施の形態では、最大の変換サイズは、計算量を制限するために、周波数
領域の重み付けのために定義される。仮に、考慮されているELブロックサイズが、最大
の変換サイズより大きいならば、EL再構成とBL再構成とは、一連の隣接する副ブロッ
クに空間的に分離される。周波数領域の重み付けは、副ブロックに実行される。最終予測
信号は、重み付けされた結果を組み立てることによって形成される。
領域の重み付けのために定義される。仮に、考慮されているELブロックサイズが、最大
の変換サイズより大きいならば、EL再構成とBL再構成とは、一連の隣接する副ブロッ
クに空間的に分離される。周波数領域の重み付けは、副ブロックに実行される。最終予測
信号は、重み付けされた結果を組み立てることによって形成される。
その上、重み付けは、輝度と色差成分、または、色成分の選択された副組を実行できる
。
。
以下では、エンハンスメント層符号化パラメータを得るための異なる可能性が、説明さ
れる。エンハンスメント層ブロックを再構成するために使用されるべき符号化(または、
予測)パラメータは、ベース層の中の共同配置された符号化パラメータから多重方法によ
って得られる。ベース層とエンハンスメント層とは、異なる空間解像度を持つことができ
る、または、それらは同じ空間解像度を持つことができる。
れる。エンハンスメント層ブロックを再構成するために使用されるべき符号化(または、
予測)パラメータは、ベース層の中の共同配置された符号化パラメータから多重方法によ
って得られる。ベース層とエンハンスメント層とは、異なる空間解像度を持つことができ
る、または、それらは同じ空間解像度を持つことができる。
H.264/AVCのスケーラブルビデオ拡張において、中間層作動予測が、構文要素
ベースモード旗によって合図されるマクロブロック型に対して実行される。仮に、ベース
モード旗が1と等しく、ベース層の中の対応する引用マクロブロックが中間符号化される
ならば、エンハンスメント層マクロブロックも、中間符号化される、そして、全ての作動
パラメータが、共同配置されたベース層ブロックから推論される。さもなければ(ベース
モード旗は0と等しい)、各作動ベクトル、いわゆる「作動予測旗」に対して、構文要素
は送信され、ベース層作動ベクトルが、作動ベクトル予測器として使用されるか否かを指
定される。仮に、「作動予測旗」が1と等しいならば、ベース層の共同配置された引用ブ
ロックの作動ベクトル予測器は、解像度比率に従ってスケーリングされて、作動ベクトル
予測器として使用される。仮に、「作動予測旗」が0と等しいならば、作動ベクトル予測
器は、H.264/AVCの中で指定されたように計算される。
ベースモード旗によって合図されるマクロブロック型に対して実行される。仮に、ベース
モード旗が1と等しく、ベース層の中の対応する引用マクロブロックが中間符号化される
ならば、エンハンスメント層マクロブロックも、中間符号化される、そして、全ての作動
パラメータが、共同配置されたベース層ブロックから推論される。さもなければ(ベース
モード旗は0と等しい)、各作動ベクトル、いわゆる「作動予測旗」に対して、構文要素
は送信され、ベース層作動ベクトルが、作動ベクトル予測器として使用されるか否かを指
定される。仮に、「作動予測旗」が1と等しいならば、ベース層の共同配置された引用ブ
ロックの作動ベクトル予測器は、解像度比率に従ってスケーリングされて、作動ベクトル
予測器として使用される。仮に、「作動予測旗」が0と等しいならば、作動ベクトル予測
器は、H.264/AVCの中で指定されたように計算される。
以下では、エンハンスメント層符号化パラメータを得るための方法が説明される。ベー
ス層の画像に関係しているサンプルアレイは、ブロックに分解され、各ブロックは、符号
化(または、予測)パラメータが関係する。言い換えれば、特定のブロックの中の全ての
サンプル位置は、特定の関係符号化(または、予測)パラメータを有する。符号化パラメ
ータは、作動仮説、引用インデックスリスト、作動ベクトル、作動ベクトル予測器識別子
、および融合識別子の数を含む作動補償予測のためのパラメータを含む。符号化パラメー
タは、内部予測方向などの内部予測パラメータも含む。
ス層の画像に関係しているサンプルアレイは、ブロックに分解され、各ブロックは、符号
化(または、予測)パラメータが関係する。言い換えれば、特定のブロックの中の全ての
サンプル位置は、特定の関係符号化(または、予測)パラメータを有する。符号化パラメ
ータは、作動仮説、引用インデックスリスト、作動ベクトル、作動ベクトル予測器識別子
、および融合識別子の数を含む作動補償予測のためのパラメータを含む。符号化パラメー
タは、内部予測方向などの内部予測パラメータも含む。
エンハンスメント層の中のブロックが、ベース層からの共同配置された情報を使用して
符号化されることは、ビットストリームの中で合図される。
符号化されることは、ビットストリームの中で合図される。
例えば、エンハンスメント層符号化パラメータの派生(実施例T参照)は、以下の通り
に作られる。共同配置されたベース層情報を使用して合図されるエンハンスメント層のN
×Mブロックに対して、ブロックの中のサンプル位置に関係した符号化パラメータは、ベ
ース層サンプルアレイの中の共同配置されたサンプル位置に関係した符号化パラメータに
基づいて得られる。
に作られる。共同配置されたベース層情報を使用して合図されるエンハンスメント層のN
×Mブロックに対して、ブロックの中のサンプル位置に関係した符号化パラメータは、ベ
ース層サンプルアレイの中の共同配置されたサンプル位置に関係した符号化パラメータに
基づいて得られる。
特定の実施の形態において、この過程は以下のステップによってなされる。
1.ベース層符号化パラメータに基づいて、N×Mエンハンスメント層ブロックの中の
各サンプル位置のための符号化パラメータの派生。
2.特定の副ブロックの中の全てのサンプル位置が、同一の関係した符号化パラメータ
を持つように、副ブロック中のN×Mエンハンスメント層ブロックの仕切りの派生。
1.ベース層符号化パラメータに基づいて、N×Mエンハンスメント層ブロックの中の
各サンプル位置のための符号化パラメータの派生。
2.特定の副ブロックの中の全てのサンプル位置が、同一の関係した符号化パラメータ
を持つように、副ブロック中のN×Mエンハンスメント層ブロックの仕切りの派生。
また、2番目のステップは省略できる。
ステップ1は、エンハンスメント層サンプル位置pelの関数fcを使用し、符号化パラ
メータcを与えて実行される。すなわち、
c=fc(pel)
メータcを与えて実行される。すなわち、
c=fc(pel)
2つの水平または垂直の隣接するベース層のサンプル位置ベース層の間の距離は、その
結果、1に等しい。最も左上のベース層のサンプルと、最も左上のエンハンスメント層の
サンプルの両方が、p=(0,0)の位置を持つ。
結果、1に等しい。最も左上のベース層のサンプルと、最も左上のエンハンスメント層の
サンプルの両方が、p=(0,0)の位置を持つ。
別の例として、関数fc(pel)は、ベース層サンプル位置pelに最も近い、ベース層
サンプル位置pblに関係した符号化パラメータcに戻すことができる。
また、関数fc(pel)は、特定のエンハンスメント層サンプル位置が、ベース層サン
プル位置の間の距離のユニットの中の断片的な成分を有する場合において、符号化パラメ
ータを補間できる。
サンプル位置pblに関係した符号化パラメータcに戻すことができる。
また、関数fc(pel)は、特定のエンハンスメント層サンプル位置が、ベース層サン
プル位置の間の距離のユニットの中の断片的な成分を有する場合において、符号化パラメ
ータを補間できる。
作動パラメータを戻す前に、関数fcは、エンハンスメント層サンプル抽出格子の中で
最も近い利用可能な値に対して、作動パラメータの空間置換成分を一周する。
最も近い利用可能な値に対して、作動パラメータの空間置換成分を一周する。
各サンプル位置が、ステップ1の後に予測パラメータに関係するので、ステップ1の後
に、それぞれのエンハンスメント層のサンプルが予測される。それにもかかわらず、ステ
ップ2では、ブロック仕切りが、より大きいブロックのサンプルの予測操作を実行するた
めに、または、派生した仕切りのブロックの中で予測残留を変換符号化するために得られ
る。
に、それぞれのエンハンスメント層のサンプルが予測される。それにもかかわらず、ステ
ップ2では、ブロック仕切りが、より大きいブロックのサンプルの予測操作を実行するた
めに、または、派生した仕切りのブロックの中で予測残留を変換符号化するために得られ
る。
ステップ2は、エンハンスメント層サンプル位置を、正方形または長方形のブロックに
分類することによって実行される。それぞれは、副ブロックの中の許された分解の1組の
1つに分解される。正方形または長方形のブロックは、それらが図34の中で表現された
異なるレベルに存在できる4枝ツリー構造の中の葉に相当する。
分類することによって実行される。それぞれは、副ブロックの中の許された分解の1組の
1つに分解される。正方形または長方形のブロックは、それらが図34の中で表現された
異なるレベルに存在できる4枝ツリー構造の中の葉に相当する。
それぞれの正方形または長方形のブロックのレベルと分解は、以下の順序付けされたス
テップを実行することによって決定される。
a)最高レベルをサイズN×Mのブロックに対応するレベルに設定すること。現在のレ
ベルを、最も低いレベル(すなわち、正方形または長方形のブロックが、最小のブロック
サイズの単一ブロックを含むレベル)に設定すること。ステップb)に行く。
b)現在のレベルでそれぞれの正方形または長方形のブロックに対して、仮に、正方形
または長方形のブロックの許された分解が存在するならば、それぞれの副ブロックの中の
全てのサンプル位置が、同じ符号化パラメータに関係する、または、(何らかの差の大き
さに従って、)小さい差で符号化パラメータに関係する。その分解は、候補分解である。
全ての候補分解のうち、正方形または長方形のブロックを、副ブロックの最少の数に分解
するものを選択する。仮に、現在のレベルが最高レベルであれば、ステップc)に行く。
さもなければ、現在のレベルを、次のより高いレベルに設定して、ステップb)に行く。
c)終了
テップを実行することによって決定される。
a)最高レベルをサイズN×Mのブロックに対応するレベルに設定すること。現在のレ
ベルを、最も低いレベル(すなわち、正方形または長方形のブロックが、最小のブロック
サイズの単一ブロックを含むレベル)に設定すること。ステップb)に行く。
b)現在のレベルでそれぞれの正方形または長方形のブロックに対して、仮に、正方形
または長方形のブロックの許された分解が存在するならば、それぞれの副ブロックの中の
全てのサンプル位置が、同じ符号化パラメータに関係する、または、(何らかの差の大き
さに従って、)小さい差で符号化パラメータに関係する。その分解は、候補分解である。
全ての候補分解のうち、正方形または長方形のブロックを、副ブロックの最少の数に分解
するものを選択する。仮に、現在のレベルが最高レベルであれば、ステップc)に行く。
さもなければ、現在のレベルを、次のより高いレベルに設定して、ステップb)に行く。
c)終了
関数fcは、ステップb)の中のあるレベルで、常に、少なくとも1つの候補分解が存
在するような方法で選択される。
在するような方法で選択される。
同じ符号化パラメータを有するブロックの組分けは、正方形ブロックに制限されないけ
れども、ブロックを矩形ブロックにまとめることができる。されに、組分けは四枝ツリー
構造に制限されない。ブロックが2つの同じサイズの矩形ブロックに、または、2つの異
なるサイズの矩形ブロックに分解される分解構造を使用することも可能である。四枝ツリ
ー分解を特定のレベルまで使用して、次に2つの矩形ブロックへの分解を使用する分解構
造を使用することも可能である。また、いかなる他のブロック分解も可能である。
れども、ブロックを矩形ブロックにまとめることができる。されに、組分けは四枝ツリー
構造に制限されない。ブロックが2つの同じサイズの矩形ブロックに、または、2つの異
なるサイズの矩形ブロックに分解される分解構造を使用することも可能である。四枝ツリ
ー分解を特定のレベルまで使用して、次に2つの矩形ブロックへの分解を使用する分解構
造を使用することも可能である。また、いかなる他のブロック分解も可能である。
SVC中間層の作動パラメータ予測モードと対照して、記載されたモードは、マクロブ
ロックレベル(または、最も大きく支持するられたブロックサイズ)で支持するられてい
るだけではなく、任意のブロックサイズでも支持するられている。それは、モードは、最
も大きく支持するられたブロックサイズのために合図されるだけではなく、最も大きく支
持するられたブロックサイズのブロック(MPEG4、H.264の中のマクロブロック
、および、HEVCの中の符号化ツリーブロック/最も大きい符号化ユニット)が、階層
的にをより小さいブロック/符号化ユニットに副分割され、中間層作動モードの使用法が
、(対応するブロックに対して)どんな支持されたブロックサイズにも合図されるという
ことを意味している。特定の実施の形態では、このモードは、選択されたブロックサイズ
だけを支持する。次に、このモードの使用法を合図する構文要素は、対応するブロックサ
イズのためだけに送信される。または、このモードの使用法を(別の符号化パラメータの
中で)合図する構文要素の値は、別のブロックサイズに対応して制限される。H.264
/AVCのSVC拡張の中の中間層作動パラメータ予測モードとの別の差は、このモード
で符号化されたブロックが、完全に中間符号化されていないということである。ブロック
は、共同配置されたベース層信号に依存して、内部符号化された副ブロックを含むことが
できる。
ロックレベル(または、最も大きく支持するられたブロックサイズ)で支持するられてい
るだけではなく、任意のブロックサイズでも支持するられている。それは、モードは、最
も大きく支持するられたブロックサイズのために合図されるだけではなく、最も大きく支
持するられたブロックサイズのブロック(MPEG4、H.264の中のマクロブロック
、および、HEVCの中の符号化ツリーブロック/最も大きい符号化ユニット)が、階層
的にをより小さいブロック/符号化ユニットに副分割され、中間層作動モードの使用法が
、(対応するブロックに対して)どんな支持されたブロックサイズにも合図されるという
ことを意味している。特定の実施の形態では、このモードは、選択されたブロックサイズ
だけを支持する。次に、このモードの使用法を合図する構文要素は、対応するブロックサ
イズのためだけに送信される。または、このモードの使用法を(別の符号化パラメータの
中で)合図する構文要素の値は、別のブロックサイズに対応して制限される。H.264
/AVCのSVC拡張の中の中間層作動パラメータ予測モードとの別の差は、このモード
で符号化されたブロックが、完全に中間符号化されていないということである。ブロック
は、共同配置されたベース層信号に依存して、内部符号化された副ブロックを含むことが
できる。
上の記載された方法によって得られた符号化パラメータを使用して、M×Mエンハンス
メント層ブロックのサンプルを再構成するためのいくつかの方法の1つが、ビットストリ
ームの中で合図される。得られた符号化パラメータを使用して、エンハンスメント層ブロ
ックを予測するためのそのような方法は、以下を含む。
・作動補償のために、得られた作動パラメータと、再構成されたエンハンスメント層引
用画像とを使用して、エンハンスメント層ブロックのための予測信号を得ること。
・(抽出された/フィルタにかけられた)ベース層再構成を、再構成されたエンハンス
メント層の画像から引き算することによって発生する、得られた作動パラメータとエンハ
ンスメント層引用画像を使用して、(a)現在の画像のための(抽出されるた/フィルタ
にかけられた)ベース層再構成と、(b)作動補償信号との組み合わせ。
・(a)(抽出されるた/フィルタにかけられた)ベース層残留電流画像(再構成され
た信号と予測との間の差、または、符号化された変換係数値の逆変換)と、(b)得られ
た作動パラメータと再構成されたエンハンスメント層引用画像を使用する作動補償信号と
の組み合わせ。
メント層ブロックのサンプルを再構成するためのいくつかの方法の1つが、ビットストリ
ームの中で合図される。得られた符号化パラメータを使用して、エンハンスメント層ブロ
ックを予測するためのそのような方法は、以下を含む。
・作動補償のために、得られた作動パラメータと、再構成されたエンハンスメント層引
用画像とを使用して、エンハンスメント層ブロックのための予測信号を得ること。
・(抽出された/フィルタにかけられた)ベース層再構成を、再構成されたエンハンス
メント層の画像から引き算することによって発生する、得られた作動パラメータとエンハ
ンスメント層引用画像を使用して、(a)現在の画像のための(抽出されるた/フィルタ
にかけられた)ベース層再構成と、(b)作動補償信号との組み合わせ。
・(a)(抽出されるた/フィルタにかけられた)ベース層残留電流画像(再構成され
た信号と予測との間の差、または、符号化された変換係数値の逆変換)と、(b)得られ
た作動パラメータと再構成されたエンハンスメント層引用画像を使用する作動補償信号と
の組み合わせ。
別の副ブロックが、中間符号化されるとして、分類されている間、現在のブロックに対
してより小さいブロックの中の仕切りを得て、副ブロックに対して符号化パラメータを得
るための過程が、内部符号化されるとして、いくつかの副ブロックに分類できる。中間符
号化された副ブロックに対して、作動パラメータが、共同配置されたベース層ブロックか
ら得られる。しかし、仮に、共同配置されたベース層ブロックが、内部符号化されるなら
ば、エンハンスメント層の中の対応する副ブロックは、内部符号化されるとして分類され
る。そのような内部符号化された副ブロックのサンプルに対して、エンハンスメント層信
号が、ベース層から情報を使用することによって、予測される。例えば、
・対応するベース層再構成の(抽出された/フィルタにかけられた)バージョンは、内
部予測信号として使用される。
・得られた内部予測パラメータは、エンハンスメント層の中に空間内部予測のために使
用される。
してより小さいブロックの中の仕切りを得て、副ブロックに対して符号化パラメータを得
るための過程が、内部符号化されるとして、いくつかの副ブロックに分類できる。中間符
号化された副ブロックに対して、作動パラメータが、共同配置されたベース層ブロックか
ら得られる。しかし、仮に、共同配置されたベース層ブロックが、内部符号化されるなら
ば、エンハンスメント層の中の対応する副ブロックは、内部符号化されるとして分類され
る。そのような内部符号化された副ブロックのサンプルに対して、エンハンスメント層信
号が、ベース層から情報を使用することによって、予測される。例えば、
・対応するベース層再構成の(抽出された/フィルタにかけられた)バージョンは、内
部予測信号として使用される。
・得られた内部予測パラメータは、エンハンスメント層の中に空間内部予測のために使
用される。
予測信号の重み付けされた組み合わせを使用して、エンハンスメント層ブロックを予測
するために以下の実施の形態は、(a)再構成されたエンハンスメント層のサンプルを使
用して、空間的または時間的(すなわち、差補償)予測によって得られたエンハンスメン
ト層内部予測信号と、(b)現在の画像のための(抽出された/フィルタにかけられた)
ベース層再構成であるベース層予測信号とを結合することによって、エンハンスメント層
ブロックのための予測信号を発生させるための方法を含む。最終予測信号は、各サンプル
に対して、重み付け関数に従った重み付けが使用される方法で、エンハンスメント層内部
予測信号とベース層予測信号との重み付けによって得られる。
するために以下の実施の形態は、(a)再構成されたエンハンスメント層のサンプルを使
用して、空間的または時間的(すなわち、差補償)予測によって得られたエンハンスメン
ト層内部予測信号と、(b)現在の画像のための(抽出された/フィルタにかけられた)
ベース層再構成であるベース層予測信号とを結合することによって、エンハンスメント層
ブロックのための予測信号を発生させるための方法を含む。最終予測信号は、各サンプル
に対して、重み付け関数に従った重み付けが使用される方法で、エンハンスメント層内部
予測信号とベース層予測信号との重み付けによって得られる。
例えば、重み付け関数は、以下の方法によって実現される。オリジナルのエンハンスメ
ント層内部予測信号vのローパスフィルタにかけられたバージョンを、ベース層再構成u
のローパスフィルタにかけられたバージョンと比較してください。その比較から、オリジ
ナルの中間予測信号と(抽出された/フィルタにかけられた)ベース層再構成とを結合す
るために、使用されるべき各サンプル位置のための重み付けを得てください。例えば、重
み付けは、伝達関数tを使用して、重み付けwに対して差u-vを写像することによって
得られる。すなわち、
t(u-v)=w
ント層内部予測信号vのローパスフィルタにかけられたバージョンを、ベース層再構成u
のローパスフィルタにかけられたバージョンと比較してください。その比較から、オリジ
ナルの中間予測信号と(抽出された/フィルタにかけられた)ベース層再構成とを結合す
るために、使用されるべき各サンプル位置のための重み付けを得てください。例えば、重
み付けは、伝達関数tを使用して、重み付けwに対して差u-vを写像することによって
得られる。すなわち、
t(u-v)=w
異なる重み付け関数が、予測されるべき現在のブロックの異なるブロックサイズのため
に使用される。また、重み付け関数が、中間予測仮説が得られる引用画像の時間的距離に
従って変更される。
に使用される。また、重み付け関数が、中間予測仮説が得られる引用画像の時間的距離に
従って変更される。
内部予測信号であるエンハンスメント層内部予測信号の場合、重み付け関数が、例えば
、予測されるべき現在のブロックの中の位置に依存する異なる重み付けを使用して、実現
される。
、予測されるべき現在のブロックの中の位置に依存する異なる重み付けを使用して、実現
される。
好ましい実施の形態において、エンハンスメント層符号化パラメータを得るための方法
が使用される。そして、方法のステップ2が、図35に記載されたように、正方形ブロッ
クの許された分解の組を使用している。
が使用される。そして、方法のステップ2が、図35に記載されたように、正方形ブロッ
クの許された分解の組を使用している。
好ましい実施の形態において、関数fc(pel)は、上でm=4、n=4で記載された
関数fp,m×n(pel)によって与えられたベース層サンプル位置に関係した符号化パラメ
ータを戻す。
関数fp,m×n(pel)によって与えられたベース層サンプル位置に関係した符号化パラメ
ータを戻す。
実施の形態において、関数fc(pel)は、以下の符号化パラメータcを戻す。
・最初に、ベース層サンプル位置は、pbl=fp,4×4(pel)として得る。
・仮に、pblが、以前に符号化されたベース層ブロックと融合することによって得られ
た関係した中間予測パラメータを持つ(または、同じ作動パラメータを持つ)ならば、c
は、ベース層の中で融合するために使用される、ベース層ブロックに対応するエンハンス
メント層ブロックの作動パラメータと等しい(すなわち、作動パラメータは、対応するエ
ンハンスメント層ブロックからコピーされる)。
・さもなければ、cはpblに関係した符号化パラメータと等しい。
・最初に、ベース層サンプル位置は、pbl=fp,4×4(pel)として得る。
・仮に、pblが、以前に符号化されたベース層ブロックと融合することによって得られ
た関係した中間予測パラメータを持つ(または、同じ作動パラメータを持つ)ならば、c
は、ベース層の中で融合するために使用される、ベース層ブロックに対応するエンハンス
メント層ブロックの作動パラメータと等しい(すなわち、作動パラメータは、対応するエ
ンハンスメント層ブロックからコピーされる)。
・さもなければ、cはpblに関係した符号化パラメータと等しい。
また、上の実施の形態の組み合わせも可能である。
別の実施の形態では、共同配置されたベース層情報を使用して、合図されるべきエンハ
ンスメント層ブロックに対して、作動パラメータの初期設定組から得られた内部予測パラ
メータとそれらのエンハンスメント層サンプル位置に関係するので、ブロックは、これら
のサンプル(すなわち、作動パラメータの初期設定組のコピー)を含むブロックと融合さ
れる。作動パラメータの初期設定組は、1つまたは2つの仮説を使用するための指示器、
引用画像のリストの中の最初の画像を引用する引用インデックスリスト、および、ゼロ空
間置き換えを有する作動ベクトルからなる。
ンスメント層ブロックに対して、作動パラメータの初期設定組から得られた内部予測パラ
メータとそれらのエンハンスメント層サンプル位置に関係するので、ブロックは、これら
のサンプル(すなわち、作動パラメータの初期設定組のコピー)を含むブロックと融合さ
れる。作動パラメータの初期設定組は、1つまたは2つの仮説を使用するための指示器、
引用画像のリストの中の最初の画像を引用する引用インデックスリスト、および、ゼロ空
間置き換えを有する作動ベクトルからなる。
別の実施の形態では、共同配置されたベース層情報を使用して、合図されるべきエンハ
ンスメント層ブロックに対して、得られた作動パラメータを有するエンハンスメント層サ
ンプルが、ある順序付けで最初に、予測されて、再構成される。その後に、得られた内部
予測パラメータを有するサンプルが、内部再構成順序で予測される。その結果、内部予測
は、(a)隣接する中間予測ブロックと、(b)内部再構成順序の中の前任の隣接する内
部予測ブロックとから、既に再構成されたサンプル値を使用できる。
ンスメント層ブロックに対して、得られた作動パラメータを有するエンハンスメント層サ
ンプルが、ある順序付けで最初に、予測されて、再構成される。その後に、得られた内部
予測パラメータを有するサンプルが、内部再構成順序で予測される。その結果、内部予測
は、(a)隣接する中間予測ブロックと、(b)内部再構成順序の中の前任の隣接する内
部予測ブロックとから、既に再構成されたサンプル値を使用できる。
別の実施の形態では、融合されている(すなわち、別の中間予測ブロックから得られた
作動パラメータを取る)エンハンスメント層ブロックに対して、融合候補のリストは、追
加的に、対応するベース層ブロックから候補を含む。そして、仮に、エンハンスメント層
が、ベース層より高い空間抽出比率を有するならば、追加して、空間置換成分をエンハン
スメント層の中の利用可能な隣接する値のみを改良することによっ、ベース層候補から得
られた最大4つの候補を含む。
作動パラメータを取る)エンハンスメント層ブロックに対して、融合候補のリストは、追
加的に、対応するベース層ブロックから候補を含む。そして、仮に、エンハンスメント層
が、ベース層より高い空間抽出比率を有するならば、追加して、空間置換成分をエンハン
スメント層の中の利用可能な隣接する値のみを改良することによっ、ベース層候補から得
られた最大4つの候補を含む。
別の実施の形態では、ステップ2b)で使用された差の大きさは、仮に差が全てなくな
るなる場合にだけ、副ブロックの中に小さい差があると主張する。すなわち、全ての含ま
れたサンプル位置が、同じ得られた符号化パラメータを持つときだけ、副ブロックは形成
される。
るなる場合にだけ、副ブロックの中に小さい差があると主張する。すなわち、全ての含ま
れたサンプル位置が、同じ得られた符号化パラメータを持つときだけ、副ブロックは形成
される。
別の実施の形態において、仮に、(a)全ての含まれたサンプル位置が、得られた作動
パラメータを持ち、そして、ブロックの中のサンプル位置の組が、対応する作動ベクトル
に適用されたベクトル標準に従って特定の値より多い異なる得られた作動パラメータを持
っていないならば、あるいは、(b)全ての含まれたサンプル位置が、得られた内部予測
パラメータを持ち、そして、ブロックの中のサンプル位置の組が、方向の内部予測の特定
の角度より大きい異なる得られた内部予測パラメータを持っていないならば、ステップ2
b)で使用された差の大きさは、副ブロックの中に小さい差があると主張する。副ブロッ
クのためにもたらされたパラメータは、意味のある、または、中央の操作によって計算さ
れる。
別の実施の形態では、ベース層から符号化パラメータを推論することによって得られた
仕切りは、ビットストリームの中で合図されたサイド情報に基づいてさらに改良される。
別の実施の形態では、符号化パラメータがベース層から推論されるブロックのための残
留符号化は、ベース層から推論されるブロックの中の仕切りから独立している。例えば、
それは、ベース層からの符号化パラメータの推論が、ブロックを、符号化パラメータの別
々の組を有してそれぞれいくつかの副ブロックに仕切るけれども、単一の変換がブロック
に適用されることを意味する。または、副ブロックのための仕切りと符号化パラメータと
がベース層から推論されるブロックが、残留を変換符号化する目的のために、より小さい
ブロックに分割される。そこでは、変換ブロックへの分割が、異なる符号化パラメータを
有するブロックの中の推論された仕切りから独立している。
パラメータを持ち、そして、ブロックの中のサンプル位置の組が、対応する作動ベクトル
に適用されたベクトル標準に従って特定の値より多い異なる得られた作動パラメータを持
っていないならば、あるいは、(b)全ての含まれたサンプル位置が、得られた内部予測
パラメータを持ち、そして、ブロックの中のサンプル位置の組が、方向の内部予測の特定
の角度より大きい異なる得られた内部予測パラメータを持っていないならば、ステップ2
b)で使用された差の大きさは、副ブロックの中に小さい差があると主張する。副ブロッ
クのためにもたらされたパラメータは、意味のある、または、中央の操作によって計算さ
れる。
別の実施の形態では、ベース層から符号化パラメータを推論することによって得られた
仕切りは、ビットストリームの中で合図されたサイド情報に基づいてさらに改良される。
別の実施の形態では、符号化パラメータがベース層から推論されるブロックのための残
留符号化は、ベース層から推論されるブロックの中の仕切りから独立している。例えば、
それは、ベース層からの符号化パラメータの推論が、ブロックを、符号化パラメータの別
々の組を有してそれぞれいくつかの副ブロックに仕切るけれども、単一の変換がブロック
に適用されることを意味する。または、副ブロックのための仕切りと符号化パラメータと
がベース層から推論されるブロックが、残留を変換符号化する目的のために、より小さい
ブロックに分割される。そこでは、変換ブロックへの分割が、異なる符号化パラメータを
有するブロックの中の推論された仕切りから独立している。
別の実施の形態では、符号化パラメータがベース層から推論されるブロックのための残
留符号化が、ベース層から推論されるブロックの中の仕切りに依存している。例えば、そ
れは、変換符号化に対して、変換ブロックの中のブロックの分割が、ベース層から推論さ
れる仕切りに依存することを意味する。あるバージョンでは、単一の変換が、異なる符号
化パラメータを有するそれぞれの副ブロックに適用される。別のバージョンでは、仕切り
が、ビットストリームの中に含むサイド情報に基づいて改良される。別のバージョンでは
、いくつかの副ブロックが、残留信号を変換符号化の目的のために、ビットストリームの
中で合図されるように、より大きなブロックにまとめられる。
留符号化が、ベース層から推論されるブロックの中の仕切りに依存している。例えば、そ
れは、変換符号化に対して、変換ブロックの中のブロックの分割が、ベース層から推論さ
れる仕切りに依存することを意味する。あるバージョンでは、単一の変換が、異なる符号
化パラメータを有するそれぞれの副ブロックに適用される。別のバージョンでは、仕切り
が、ビットストリームの中に含むサイド情報に基づいて改良される。別のバージョンでは
、いくつかの副ブロックが、残留信号を変換符号化の目的のために、ビットストリームの
中で合図されるように、より大きなブロックにまとめられる。
また、前述の実施の形態の組み合わせによって得られた実施の形態も可能である。
エンハンスメント層作動ベクトル符号化に関係して、この次の部分は、エンハンスメン
ト層の作動情報を効率的に符号化するために、複数のエンハンスメント層予測器を提供し
て、ベース層の中で符号化された作動情報を使うことによって、スケーラブルビデオ符号
化応用の中で作動情報を減少するための方法を説明する。この考えは、空間、時間および
品質のスケーラビリティを含むスケーラブルビデオ符号化のために適切である。
ト層の作動情報を効率的に符号化するために、複数のエンハンスメント層予測器を提供し
て、ベース層の中で符号化された作動情報を使うことによって、スケーラブルビデオ符号
化応用の中で作動情報を減少するための方法を説明する。この考えは、空間、時間および
品質のスケーラビリティを含むスケーラブルビデオ符号化のために適切である。
H.264/AVC中間層のスケーラブルビデオ拡張において、作動予測は、構文要素
「ベースモード旗」によって合図されるマクロブロックタイプのために実行される。
仮に、「ベースモード旗」が1に等しく、かつ、ベース層の中の対応する引用マクロブ
ロックが中間符号化されるならば、エンハンスメント層マクロブロックも、中間符号化さ
れる。そして、全ての作動パラメータが、共同配置されたベース層ブロックから推論され
る。さもなければ(「ベースモード旗」が0に等しいならば)、各作動ベクトル(いわゆ
る「作動予測旗」の構文要素)は、ベース層作動ベクトルが作動ベクトル予測器として使
用されるか否かに関係なく、送信され、指定される。仮に、「作動予測旗」が1に等しい
ならば、ベース層の共同配置された引用ブロックの作動ベクトル予測器は、解像度比率に
従ってスケーリングされて、作動ベクトル予測器として使用される。仮に、「作動予測旗
」が0に等しいならば、作動ベクトル予測器は、H.264/AVCで規定されるように
計算される。
HEVCにおいて、作動パラメータは、高度な作動ベクトル競争(AMVP)を適用す
ることによって予測される。AMVPは互いに競争する2つの空間作動ベクトル予測器と
1つの時間作動ベクトル予測器とを特色とする。空間候補は、現在の予測ブロックの左ま
たは上に位置した、隣接する予測ブロックの位置から選択される。時間候補は、前に符号
化された画像の共同配置された位置の中で選択される。全ての空間的で時間的候補の位置
は、図36の中で表示される。
「ベースモード旗」によって合図されるマクロブロックタイプのために実行される。
仮に、「ベースモード旗」が1に等しく、かつ、ベース層の中の対応する引用マクロブ
ロックが中間符号化されるならば、エンハンスメント層マクロブロックも、中間符号化さ
れる。そして、全ての作動パラメータが、共同配置されたベース層ブロックから推論され
る。さもなければ(「ベースモード旗」が0に等しいならば)、各作動ベクトル(いわゆ
る「作動予測旗」の構文要素)は、ベース層作動ベクトルが作動ベクトル予測器として使
用されるか否かに関係なく、送信され、指定される。仮に、「作動予測旗」が1に等しい
ならば、ベース層の共同配置された引用ブロックの作動ベクトル予測器は、解像度比率に
従ってスケーリングされて、作動ベクトル予測器として使用される。仮に、「作動予測旗
」が0に等しいならば、作動ベクトル予測器は、H.264/AVCで規定されるように
計算される。
HEVCにおいて、作動パラメータは、高度な作動ベクトル競争(AMVP)を適用す
ることによって予測される。AMVPは互いに競争する2つの空間作動ベクトル予測器と
1つの時間作動ベクトル予測器とを特色とする。空間候補は、現在の予測ブロックの左ま
たは上に位置した、隣接する予測ブロックの位置から選択される。時間候補は、前に符号
化された画像の共同配置された位置の中で選択される。全ての空間的で時間的候補の位置
は、図36の中で表示される。
空間的で時間的候補が推論された後に、ゼロ作動ベクトルを候補としてリストに導入す
る冗長検査が、実行される。インデックスを記述する候補リストは、作動補償予測のため
に、作動ベクトル差と共に使用される作動ベクトル予測器を特定するために送信される。
HEVCは、更に、符号化構成に基づいた四枝ツリーから生じる符号化冗長作動パラメ
ータの減少を狙うブロック融合アルゴリズムを用いる。これは、特定作動パラメータを共
有する多重予測ブロックから成る領域を、作成することによって達成される。これらの作
動パラメータは、新しい作動情報の種を蒔いている各領域の最初の予測ブロックのために
、一度符号化される必要があるだけである。AMVPと同様に、ブロック融合アルゴリズ
ムは、それぞれの予測ブロックのために、可能な融合候補を含むリストを構成する。候補
の数は、スライスヘッダーの中で合図されて1から5までの範囲がある「NumMerg
eCands」によって定義される。候補は、空間隣接予測ブロックと共同配置された時
間画像の中の予測ブロックとから推論される。候補であるとみなされる予測ブロックのた
めの可能なサンプル位置は、図36に示された位置と等しい。HEVCの中の可能な予測
ブロック仕切りを有するブロック融合アルゴリズムの例は、図37で説明される。図37
(a)の中の太い線は、1つの領域に融合されて特定の作動データを保持する予測ブロッ
クを全て定義する。この作動データはブロックSだけに送られる。符号化されるべき現在
の予測ブロックは、「X」によって示される。取り外された領域の中の予想ブロックは、
ブロック走査順序の中で予測ブロックXの後継者であるので、関係した予測データをまだ
有さない。ドットは、可能な空間融合候補である隣接するブロックのサンプル位置を示す
。可能な候補が予測器リストに挿入される前に、空間候補のための冗長検査が、図37(
b)の中で指示されるように実行される。
る冗長検査が、実行される。インデックスを記述する候補リストは、作動補償予測のため
に、作動ベクトル差と共に使用される作動ベクトル予測器を特定するために送信される。
HEVCは、更に、符号化構成に基づいた四枝ツリーから生じる符号化冗長作動パラメ
ータの減少を狙うブロック融合アルゴリズムを用いる。これは、特定作動パラメータを共
有する多重予測ブロックから成る領域を、作成することによって達成される。これらの作
動パラメータは、新しい作動情報の種を蒔いている各領域の最初の予測ブロックのために
、一度符号化される必要があるだけである。AMVPと同様に、ブロック融合アルゴリズ
ムは、それぞれの予測ブロックのために、可能な融合候補を含むリストを構成する。候補
の数は、スライスヘッダーの中で合図されて1から5までの範囲がある「NumMerg
eCands」によって定義される。候補は、空間隣接予測ブロックと共同配置された時
間画像の中の予測ブロックとから推論される。候補であるとみなされる予測ブロックのた
めの可能なサンプル位置は、図36に示された位置と等しい。HEVCの中の可能な予測
ブロック仕切りを有するブロック融合アルゴリズムの例は、図37で説明される。図37
(a)の中の太い線は、1つの領域に融合されて特定の作動データを保持する予測ブロッ
クを全て定義する。この作動データはブロックSだけに送られる。符号化されるべき現在
の予測ブロックは、「X」によって示される。取り外された領域の中の予想ブロックは、
ブロック走査順序の中で予測ブロックXの後継者であるので、関係した予測データをまだ
有さない。ドットは、可能な空間融合候補である隣接するブロックのサンプル位置を示す
。可能な候補が予測器リストに挿入される前に、空間候補のための冗長検査が、図37(
b)の中で指示されるように実行される。
空間的で時間的な候補の数が、「NumMergeCands」より少ない場合、追加
候補が、既存の候補と結合することによって、または、ゼロ作動ベクトル候補を挿入する
ことによって提供される。仮に、候補がリストに追加されるならば、それは候補を特定す
るために使用されるインデックスを備えている。新しい候補がリストへ追加されると、リ
ストが、インデックス「NumMergeCands」-1によって特定された最後の候
補で完成する融合インデックスは(0からスタートして)増加する。固定長符号ワードは
、候補リストの派生およびビットストリームの構文解析の独立操作を確実にするために、
融合候補インデックスを符号化するために使用される。
候補が、既存の候補と結合することによって、または、ゼロ作動ベクトル候補を挿入する
ことによって提供される。仮に、候補がリストに追加されるならば、それは候補を特定す
るために使用されるインデックスを備えている。新しい候補がリストへ追加されると、リ
ストが、インデックス「NumMergeCands」-1によって特定された最後の候
補で完成する融合インデックスは(0からスタートして)増加する。固定長符号ワードは
、候補リストの派生およびビットストリームの構文解析の独立操作を確実にするために、
融合候補インデックスを符号化するために使用される。
以下のセクションは、エンハンスメント層の作動パラメータを符号化するために、ベー
ス層から得られた予測器を含む、多重エンハンスメント層予測器を使用するための方法を
説明する。ベース層のために既に符号化された作動情報は、エンハンスメント層を符号化
している間、作動データ速度をかなり減少させるために用いることができる。この方法は
、ベース層から予測ブロックの全ての作動データを直接に得る可能性を含む。この場合、
追加作動データは、符号化される必要がない。以下の記述において、ターム(term)
予測ブロックは、HEVCの中の予測ユニット(H.264/AVCの中のM×Nブロッ
ク)を示し、画像の中のサンプルの一般的な組として理解される。
ス層から得られた予測器を含む、多重エンハンスメント層予測器を使用するための方法を
説明する。ベース層のために既に符号化された作動情報は、エンハンスメント層を符号化
している間、作動データ速度をかなり減少させるために用いることができる。この方法は
、ベース層から予測ブロックの全ての作動データを直接に得る可能性を含む。この場合、
追加作動データは、符号化される必要がない。以下の記述において、ターム(term)
予測ブロックは、HEVCの中の予測ユニット(H.264/AVCの中のM×Nブロッ
ク)を示し、画像の中のサンプルの一般的な組として理解される。
現在のセクションの最初の部分は、ベース層作動ベクトル予測器(実施例K参照)によ
って作動ベクトル予測候補のリストを拡張することに関するものである。ベース層作動ベ
クトルは、エンハンスメント層符号化の間、作動ベクトル予測器リストに追加される。こ
れは、ベース層からの共同配置された予測ブロックの1つまたは多重の作動ベクトル予測
器を推論し、そして、作動補償予測のための予測器のリストの中の候補としてそれらを使
用することによって達成される。ベース層の共同配置された予測ブロックは、現在のブロ
ックの中央、左、上、右または下部に位置している。仮に、選択された位置のベース層の
予想ブロックが、作動関係データを含まない、または、現在の範囲の外に存在して、それ
故に現在アクセス可能でないならば、2者択一の位置が、作動ベクトル予測器を推論する
ために使用できる。これらの2者択一の位置は図38に表現される。
って作動ベクトル予測候補のリストを拡張することに関するものである。ベース層作動ベ
クトルは、エンハンスメント層符号化の間、作動ベクトル予測器リストに追加される。こ
れは、ベース層からの共同配置された予測ブロックの1つまたは多重の作動ベクトル予測
器を推論し、そして、作動補償予測のための予測器のリストの中の候補としてそれらを使
用することによって達成される。ベース層の共同配置された予測ブロックは、現在のブロ
ックの中央、左、上、右または下部に位置している。仮に、選択された位置のベース層の
予想ブロックが、作動関係データを含まない、または、現在の範囲の外に存在して、それ
故に現在アクセス可能でないならば、2者択一の位置が、作動ベクトル予測器を推論する
ために使用できる。これらの2者択一の位置は図38に表現される。
ベース層の推論された作動ベクトルは、予測器候補としてそれらが使用される前に、解
像度比率に従ってスケーリングされる。作動ベクトル差と同様に、作動ベクトル予測器の
候補リストを記述するインデックスが、作動補償予測のために使用される最終作動ベクト
ルを指定する予測ブロックに送信される。H.264/AVC規格のスケール可能な拡張
と対照して、ここに提示された実施の形態は、引用画像の中の共同配置されたブロックの
作動ベクトル予測器の使用法を構成しない-むしろそれは、別の予測器の中のリストの中
で利用可能であり、送信されるインデックスによって記述される。
実施の形態において、作動ベクトルは、ベース層の共同配置された予測ブロックの中心
位置C1から得られ、最初のエントリーとして候補リストの先頭に加えられる。作動ベク
トル予測器の候補リストは、1つの項目によって拡張される。仮に、サンプル位置C1の
ために利用可能なベース層の中に作動データが全くなければ、リスト構造は触れられない
。別の実施の形態では、ベース層の中のサンプル位置のどんな系列も、作動データに対し
てチェックされる。作動データが見つけられた場合において、対応する位置の作動ベクト
ル予測器は、候補リストに挿入され、エンハンスメント層の作動補償予測のために利用可
能である。その上、ベース層から得られた作動ベクトル予測器は、リストのいかなる他の
位置の候補リストにも挿入される。別の実施の形態では、仮に、所定の規制が認められる
ならば、ベース層作動予測器は候補リストに挿入されるだけである。これらの規制は、ゼ
ロと等しくなければならない、共同配置された引用ブロックの融合旗の値を含む。別の規
制は、解像度比率に対してベース層の共同配置された予測ブロックの広さと等しいエンハ
ンスメント層の中の予測ブロックの広さである。例えば、K×空間スケーラビリティの応
用において、仮に、ベース層の中の共同配置されたブロックの幅がNと等しく、エンハン
スメント層の中の符号化されるべき予測ブロックの幅がK*Nと等しいならば、作動ベク
トル予測器が推論されるのみである。
別の実施の形態では、ベース層の数個のサンプル位置からの1個以上の作動ベクトル予
測器が、エンハンスメント層の候補リストに追加される。別の実施の形態では、共同配置
されたブロックから推論された作動ベクトル予測器を有する候補が、リストを拡張するこ
とよりむしろ、リストの中の空間的で時間的な候補に置き代わる。また、作動ベクトル予
測器候補リストの中のベース層データから得られた多重作動ベクトル予測器を含むことも
可能である。
像度比率に従ってスケーリングされる。作動ベクトル差と同様に、作動ベクトル予測器の
候補リストを記述するインデックスが、作動補償予測のために使用される最終作動ベクト
ルを指定する予測ブロックに送信される。H.264/AVC規格のスケール可能な拡張
と対照して、ここに提示された実施の形態は、引用画像の中の共同配置されたブロックの
作動ベクトル予測器の使用法を構成しない-むしろそれは、別の予測器の中のリストの中
で利用可能であり、送信されるインデックスによって記述される。
実施の形態において、作動ベクトルは、ベース層の共同配置された予測ブロックの中心
位置C1から得られ、最初のエントリーとして候補リストの先頭に加えられる。作動ベク
トル予測器の候補リストは、1つの項目によって拡張される。仮に、サンプル位置C1の
ために利用可能なベース層の中に作動データが全くなければ、リスト構造は触れられない
。別の実施の形態では、ベース層の中のサンプル位置のどんな系列も、作動データに対し
てチェックされる。作動データが見つけられた場合において、対応する位置の作動ベクト
ル予測器は、候補リストに挿入され、エンハンスメント層の作動補償予測のために利用可
能である。その上、ベース層から得られた作動ベクトル予測器は、リストのいかなる他の
位置の候補リストにも挿入される。別の実施の形態では、仮に、所定の規制が認められる
ならば、ベース層作動予測器は候補リストに挿入されるだけである。これらの規制は、ゼ
ロと等しくなければならない、共同配置された引用ブロックの融合旗の値を含む。別の規
制は、解像度比率に対してベース層の共同配置された予測ブロックの広さと等しいエンハ
ンスメント層の中の予測ブロックの広さである。例えば、K×空間スケーラビリティの応
用において、仮に、ベース層の中の共同配置されたブロックの幅がNと等しく、エンハン
スメント層の中の符号化されるべき予測ブロックの幅がK*Nと等しいならば、作動ベク
トル予測器が推論されるのみである。
別の実施の形態では、ベース層の数個のサンプル位置からの1個以上の作動ベクトル予
測器が、エンハンスメント層の候補リストに追加される。別の実施の形態では、共同配置
されたブロックから推論された作動ベクトル予測器を有する候補が、リストを拡張するこ
とよりむしろ、リストの中の空間的で時間的な候補に置き代わる。また、作動ベクトル予
測器候補リストの中のベース層データから得られた多重作動ベクトル予測器を含むことも
可能である。
第2の部分は、ベース層候補によって融合候補のリストを拡張することに関するもので
ある(実施例K参照)。ベース層の1つ以上の共同配置されたブロックの作動データは、
融合候補リストに追加される。この方法は、ベース層とエンハンスメント層とを横切って
特定の作動パラメータを共有する融合領域を作成する可能性を可能にする。前のセクショ
ンと同様、図38に表現されるように、中央位置で共同配置されたサンプルをカバーする
ベース層ブロックは、この中央位置に制限されるのではなく、直ぐ近傍のどんな位置から
も得られる。どんな作動データも、所定の位置に対して利用可能でなく、または、アクセ
ス可能でない場合、2者択一の位置が、可能な融合候補を推論するために選択できる。得
られた作動データが、融合候補リストに挿入される前に、それは、解像度比率に従ってス
ケーリングされる。融合候補リストを記述するインデックスは、送信され、作動ベクトル
を定義する。それは、作動補償予測のために使用される。しかしながら、また、方法は、
ベース層の中の予測ブロックの作動データに依存する可能な作動予測器候補を抑圧する。
実施の形態において、図38のサンプル位置C1をカバーするベース層の中の共同配置
されたブロックの作動ベクトル予測器は、エンハンスメント層の中の現在予測ブロックを
符号化するための可能な融合候補であるとみなされる。しかしながら、仮に、引用ブロッ
クの「merge_flag」(融合旗)が1と等しい、または、共同配置された引用ブ
ロックが作動データを全く含んでいないならば、作動ベクトル予測器はリストに挿入され
ない。いかなる他の場合でも、得られた作動ベクトル予測器は、2番目のエントリーとし
て融合候補リストに追加される。この実施の形態では、融合候補リストの長さが保有され
、拡張されないことに注意しなさい。別の実施の形態では、図38に表現されているよう
に、1個以上の作動ベクトル予測器が、候補リストを融合するために加えられるように、
サンプル位置のいずれもカバーする予測ブロックから得られる。別の実施の形態では、ベ
ース層の1個または数個の作動ベクトル予測器が、どんな位置にても融合候補リストに追
加される。別の実施の形態では、仮に、所定の規制が認められるならば、1個または複数
個の作動ベクトル予測器が、融合候補リストに追加されるだけである。そのような規制は
、(作動ベクトル予測のために前の実施の形態のセクションの中で記載された解像度比率
に関する)ベース層の共同配置されたブロックの広さに整合するエンハンスメント層の予
測ブロックの広さを含む。別の実施の形態の中の別の規制は、1に等しい「merge_
flag」の値である。別の実施の形態では、融合候補リストの長さが、ベース層の共同
配置された引用ブロックから推論された作動ベクトル予測器の数によって拡張される。
ある(実施例K参照)。ベース層の1つ以上の共同配置されたブロックの作動データは、
融合候補リストに追加される。この方法は、ベース層とエンハンスメント層とを横切って
特定の作動パラメータを共有する融合領域を作成する可能性を可能にする。前のセクショ
ンと同様、図38に表現されるように、中央位置で共同配置されたサンプルをカバーする
ベース層ブロックは、この中央位置に制限されるのではなく、直ぐ近傍のどんな位置から
も得られる。どんな作動データも、所定の位置に対して利用可能でなく、または、アクセ
ス可能でない場合、2者択一の位置が、可能な融合候補を推論するために選択できる。得
られた作動データが、融合候補リストに挿入される前に、それは、解像度比率に従ってス
ケーリングされる。融合候補リストを記述するインデックスは、送信され、作動ベクトル
を定義する。それは、作動補償予測のために使用される。しかしながら、また、方法は、
ベース層の中の予測ブロックの作動データに依存する可能な作動予測器候補を抑圧する。
実施の形態において、図38のサンプル位置C1をカバーするベース層の中の共同配置
されたブロックの作動ベクトル予測器は、エンハンスメント層の中の現在予測ブロックを
符号化するための可能な融合候補であるとみなされる。しかしながら、仮に、引用ブロッ
クの「merge_flag」(融合旗)が1と等しい、または、共同配置された引用ブ
ロックが作動データを全く含んでいないならば、作動ベクトル予測器はリストに挿入され
ない。いかなる他の場合でも、得られた作動ベクトル予測器は、2番目のエントリーとし
て融合候補リストに追加される。この実施の形態では、融合候補リストの長さが保有され
、拡張されないことに注意しなさい。別の実施の形態では、図38に表現されているよう
に、1個以上の作動ベクトル予測器が、候補リストを融合するために加えられるように、
サンプル位置のいずれもカバーする予測ブロックから得られる。別の実施の形態では、ベ
ース層の1個または数個の作動ベクトル予測器が、どんな位置にても融合候補リストに追
加される。別の実施の形態では、仮に、所定の規制が認められるならば、1個または複数
個の作動ベクトル予測器が、融合候補リストに追加されるだけである。そのような規制は
、(作動ベクトル予測のために前の実施の形態のセクションの中で記載された解像度比率
に関する)ベース層の共同配置されたブロックの広さに整合するエンハンスメント層の予
測ブロックの広さを含む。別の実施の形態の中の別の規制は、1に等しい「merge_
flag」の値である。別の実施の形態では、融合候補リストの長さが、ベース層の共同
配置された引用ブロックから推論された作動ベクトル予測器の数によって拡張される。
この明細書の3番目の部分は、ベース層データ(実施例L参照)を使用して、作動パラ
メータ(または、融合)候補リストを再順序付けすることに対してであって、ベース層の
中の既に符号化された情報に従って、融合候補リストを再順序付けする過程について説明
する。仮に、現在のブロックのサンプルをカバーする共同配置されたベース層ブロックが
、特定のオリジナルから得られた候補を有する作動補償予測であれば、(仮に存在するな
らば)同等のオリジナルからの対応するエンハンスメント層候補が、最初のエントリーと
して、融合候補リストの先頭に置かれる。このステップは、最も低いインデックスを有す
るこの候補を記述することに等しい。最も低いインデックスは、最も簡素な符号ワードを
この候補に割り当てる。
実施の形態では、共同配置されたベース層ブロックは、図38に表現されるように、サ
ンプル位置A1をカバーする予測ブロックから発生する候補と共に作動補償予測される。
仮に、エンハンスメント層の中の予測ブロックの融合候補リストが、作動ベクトル予測器
がエンハンスメント層の中に対応するサンプル位置A1から発生する候補を含むならば、
この候補は、最初のエントリーとしてリストの中に置かれる。その結果、この候補は、イ
ンデックス0によって索引を付けられ、従って、最も短い固定長符号ワードを割り当てら
れる。この実施の形態において、このステップは、エンハンスメント層の中の融合候補リ
ストに対して、共同配置されたベース層ブロックの作動ベクトル予測器の派生の後に実行
される。従って、再順序付け過程は、共同配置されたベース層ブロックの作動ベクトル予
測器として、対応するブロックから発生する候補に最も低いインデックスを割り当てる。
2番目に低いインデックスは、このセクションの2番目の部分で説明されているように、
ベース層の中の共同配置されたブロックから派生する候補に割り当てられる。その上、再
順序付けの過程は、ベース層の中の共同配置されたブロックの「merge_flag」
が1と等しい場合にだけ、行われる。別の実施の形態では、再順序付けの過程は、ベース
層の中の共同配置された予測ブロックの「merge_flag」の値の如何に関わらず
実行される。別の実施の形態において、対応するオリジナルの作動ベクトル予測器を有す
る候補は、融合候補リストのどんな位置にも置かれる。別の実施の形態では、再順序付け
の過程は、融合候補リストの中の他の全ての候補を取り除く。ここに、作動ベクトル予測
器が、ベース層の中の共同配置されたブロックの作動補償予測のために使用される作動ベ
クトル予測器と同じオリジナルを有している候補だけが、リストの中に留まる。この場合
、単独の候補が利用され、そして、インデックスは全く送信されない。
メータ(または、融合)候補リストを再順序付けすることに対してであって、ベース層の
中の既に符号化された情報に従って、融合候補リストを再順序付けする過程について説明
する。仮に、現在のブロックのサンプルをカバーする共同配置されたベース層ブロックが
、特定のオリジナルから得られた候補を有する作動補償予測であれば、(仮に存在するな
らば)同等のオリジナルからの対応するエンハンスメント層候補が、最初のエントリーと
して、融合候補リストの先頭に置かれる。このステップは、最も低いインデックスを有す
るこの候補を記述することに等しい。最も低いインデックスは、最も簡素な符号ワードを
この候補に割り当てる。
実施の形態では、共同配置されたベース層ブロックは、図38に表現されるように、サ
ンプル位置A1をカバーする予測ブロックから発生する候補と共に作動補償予測される。
仮に、エンハンスメント層の中の予測ブロックの融合候補リストが、作動ベクトル予測器
がエンハンスメント層の中に対応するサンプル位置A1から発生する候補を含むならば、
この候補は、最初のエントリーとしてリストの中に置かれる。その結果、この候補は、イ
ンデックス0によって索引を付けられ、従って、最も短い固定長符号ワードを割り当てら
れる。この実施の形態において、このステップは、エンハンスメント層の中の融合候補リ
ストに対して、共同配置されたベース層ブロックの作動ベクトル予測器の派生の後に実行
される。従って、再順序付け過程は、共同配置されたベース層ブロックの作動ベクトル予
測器として、対応するブロックから発生する候補に最も低いインデックスを割り当てる。
2番目に低いインデックスは、このセクションの2番目の部分で説明されているように、
ベース層の中の共同配置されたブロックから派生する候補に割り当てられる。その上、再
順序付けの過程は、ベース層の中の共同配置されたブロックの「merge_flag」
が1と等しい場合にだけ、行われる。別の実施の形態では、再順序付けの過程は、ベース
層の中の共同配置された予測ブロックの「merge_flag」の値の如何に関わらず
実行される。別の実施の形態において、対応するオリジナルの作動ベクトル予測器を有す
る候補は、融合候補リストのどんな位置にも置かれる。別の実施の形態では、再順序付け
の過程は、融合候補リストの中の他の全ての候補を取り除く。ここに、作動ベクトル予測
器が、ベース層の中の共同配置されたブロックの作動補償予測のために使用される作動ベ
クトル予測器と同じオリジナルを有している候補だけが、リストの中に留まる。この場合
、単独の候補が利用され、そして、インデックスは全く送信されない。
この明細書の4番目の部分は、ベース層データを使用して、作動ベクトル予測器候補リ
ストを再順序付けすること(実施例L参照)に対してであって、ベース層ブロックの作動
パラメータを使用して、作動ベクトル予測の候補リストを再順序付けする過程を実施の形
態とする。仮に、現在の予測ブロックのサンプルをカバーする共同配置されたベース層ブ
ロックが、特定のオリジナルからの作動ベクトルを使用するならば、エンハンスメント層
の中の対応するオリジナルからの作動ベクトル予測器は、最初のエントリーとして、現在
の予測ブロックの作動ベクトル予測器リストの中で使用される。これは、最も安い符号ワ
ードを、この候補に割り当てることをもたらす。
実施の形態において、共同配置されたベース層ブロックは、図38に表わされるように
、サンプル位置A1をカバーする予測ブロックから発生する候補と共に、作動補償予測さ
れる。仮に、エンハンスメント層の中のブロックの作動ベクトル予測器候補リストが、作
動ベクトル予測器がエンハンスメント層の中に対応するサンプル位置A1から発生する候
補を含むならば、この候補は最初のエントリーとしてリストの中に置かれる。その結果、
この候補は、インデックス0によって索引を付けられ、従って、最も短い固定長符号ワー
ドを割り当てられる。この実施の形態において、このステップは、エンハンスメント層の
中の作動ベクトル予測器リストに対して、共同配置されたベース層ブロックの作動ベクト
ル予測器の派生の後に実行される。従って、再順序付け過程は、共同配置されたベース層
ブロックの作動ベクトル予測器として、対応するブロックから発生する候補に最も低いイ
ンデックスを割り当てる。2番目に低いインデックスは、このセクションの最初の部分で
説明されているように、ベース層の中の共同配置されたブロックから派生する候補に割り
当てられる。その上、再順序付けの過程は、ベース層の中の共同配置されたブロックの「
merge_flag」が0と等しい場合にだけ、行われる。別の実施の形態では、再順
序付けの過程は、ベース層の中の共同配置された予測ブロックの「merge_flag
」の値の如何に関わらず実行される。別の実施の形態において、対応するオリジナルの作
動ベクトル予測器を有する候補は、s同ベクトル予測器候補リストのどんな位置にも置か
れる。
ストを再順序付けすること(実施例L参照)に対してであって、ベース層ブロックの作動
パラメータを使用して、作動ベクトル予測の候補リストを再順序付けする過程を実施の形
態とする。仮に、現在の予測ブロックのサンプルをカバーする共同配置されたベース層ブ
ロックが、特定のオリジナルからの作動ベクトルを使用するならば、エンハンスメント層
の中の対応するオリジナルからの作動ベクトル予測器は、最初のエントリーとして、現在
の予測ブロックの作動ベクトル予測器リストの中で使用される。これは、最も安い符号ワ
ードを、この候補に割り当てることをもたらす。
実施の形態において、共同配置されたベース層ブロックは、図38に表わされるように
、サンプル位置A1をカバーする予測ブロックから発生する候補と共に、作動補償予測さ
れる。仮に、エンハンスメント層の中のブロックの作動ベクトル予測器候補リストが、作
動ベクトル予測器がエンハンスメント層の中に対応するサンプル位置A1から発生する候
補を含むならば、この候補は最初のエントリーとしてリストの中に置かれる。その結果、
この候補は、インデックス0によって索引を付けられ、従って、最も短い固定長符号ワー
ドを割り当てられる。この実施の形態において、このステップは、エンハンスメント層の
中の作動ベクトル予測器リストに対して、共同配置されたベース層ブロックの作動ベクト
ル予測器の派生の後に実行される。従って、再順序付け過程は、共同配置されたベース層
ブロックの作動ベクトル予測器として、対応するブロックから発生する候補に最も低いイ
ンデックスを割り当てる。2番目に低いインデックスは、このセクションの最初の部分で
説明されているように、ベース層の中の共同配置されたブロックから派生する候補に割り
当てられる。その上、再順序付けの過程は、ベース層の中の共同配置されたブロックの「
merge_flag」が0と等しい場合にだけ、行われる。別の実施の形態では、再順
序付けの過程は、ベース層の中の共同配置された予測ブロックの「merge_flag
」の値の如何に関わらず実行される。別の実施の形態において、対応するオリジナルの作
動ベクトル予測器を有する候補は、s同ベクトル予測器候補リストのどんな位置にも置か
れる。
以下は変換係数のエンハンスメント層符号化に関するものである。
最先端のビデオと画像符号化において、予測信号の残留は、前に変換され、結果の量子
化された変換係数が、ビットストリームの中で合図される。この係数符号化は固定された
スキームに続く。
化された変換係数が、ビットストリームの中で合図される。この係数符号化は固定された
スキームに続く。
変換サイズ(ルマ(luma)残留に対して:4×4,8×8,16×16,32×3
2)に依存して、異なる走査方向が定義される。走査順に最初と最後の位置が与えられ、
これらの走査は、どの係数位置が重要である場合があるかを唯一決定して、その結果、符
号化される必要がある。全ての走査の中で、最後の位置はビットストリームの中で合図さ
れなければならないけれども、最初の係数は位置(0,0)におけるDC係数であるよう
に設定される。ビットストリームは、変換ブロックの中で(水平な)xと(垂直な)yの
位置を符号化することによって行われる。最後の位置からスタートして、重要な係数の合
図が、DC位置に達するまで、逆の走査順でなされる。
2)に依存して、異なる走査方向が定義される。走査順に最初と最後の位置が与えられ、
これらの走査は、どの係数位置が重要である場合があるかを唯一決定して、その結果、符
号化される必要がある。全ての走査の中で、最後の位置はビットストリームの中で合図さ
れなければならないけれども、最初の係数は位置(0,0)におけるDC係数であるよう
に設定される。ビットストリームは、変換ブロックの中で(水平な)xと(垂直な)yの
位置を符号化することによって行われる。最後の位置からスタートして、重要な係数の合
図が、DC位置に達するまで、逆の走査順でなされる。
変換サイズ16×16と32×32に対して、1つの走査、すなわち、「対角線走査」
だけが定義される。ところが、サイズ2×2と4×4と8×8の変換ブロックは、さらに
、「垂直」で「水平」な走査を利用できる。しかしながら、垂直で水平な走査の使用は、
内部予測符号化ユニットの残留に制限される。そして、実際に使用された走査が、その内
部予測の指示モードから得られる。インデックスが6と14の範囲にある指示モードは、
垂直な走査をもたらす。インデックスが22と30の範囲にある指示モードは、水平な走
査をもたらす。全ての残留指示モードが、対角線の走査をもたらす。
だけが定義される。ところが、サイズ2×2と4×4と8×8の変換ブロックは、さらに
、「垂直」で「水平」な走査を利用できる。しかしながら、垂直で水平な走査の使用は、
内部予測符号化ユニットの残留に制限される。そして、実際に使用された走査が、その内
部予測の指示モードから得られる。インデックスが6と14の範囲にある指示モードは、
垂直な走査をもたらす。インデックスが22と30の範囲にある指示モードは、水平な走
査をもたらす。全ての残留指示モードが、対角線の走査をもたらす。
図39は、4×4変換ブロックに対して定義される対角線の走査、垂直な走査および水
平な走査を示す。より大きい変換の係数は、16の係数の副グループに副分割される。こ
れらの副グループは重要な係数位置の階層的な符号化を許す。非重要であるとして合図さ
れた副グループは、重要な係数を含まない。8×8と16×16に対しての変換は、走査
と図40と図41のそれらが関係した副グループ区分と共にそれぞれ表わされる。大きい
矢印は係数副グループの走査順を表する。
平な走査を示す。より大きい変換の係数は、16の係数の副グループに副分割される。こ
れらの副グループは重要な係数位置の階層的な符号化を許す。非重要であるとして合図さ
れた副グループは、重要な係数を含まない。8×8と16×16に対しての変換は、走査
と図40と図41のそれらが関係した副グループ区分と共にそれぞれ表わされる。大きい
矢印は係数副グループの走査順を表する。
ジグザグの走査において、4×4より大きいサイズのブロックに対して、副グループは
、ジグザグの走査で走査された4×4画素のブロックからなる。副グループはジグザグな
方法で走査される。図42は、JCTVC-G703の中で提案されるように、16×1
6変換のための垂直な走査を示す。
、ジグザグの走査で走査された4×4画素のブロックからなる。副グループはジグザグな
方法で走査される。図42は、JCTVC-G703の中で提案されるように、16×1
6変換のための垂直な走査を示す。
以下の段落は変換係数符号化のための拡張について説明する。これらは新しい走査モー
ド(変換ブロックへの走査と重要な係数位置の変更された符号化を割り当てる方法)の導
入を含む。これらの拡張は、変換ブロックの中に異なる係数分布の、より良い適合を許し
、その結果、比率歪関数の中で符号化利得を達成する。
ド(変換ブロックへの走査と重要な係数位置の変更された符号化を割り当てる方法)の導
入を含む。これらの拡張は、変換ブロックの中に異なる係数分布の、より良い適合を許し
、その結果、比率歪関数の中で符号化利得を達成する。
垂直で水平な走査パターンのための新しい実現は、16×16と32×32変換ブロッ
クのために導入される。以前に提案された走査パターンと対照して、走査副グループのサ
イズは、水平な走査に対して16×1で、垂直な走査に対して1×16である。また、8
×2と2×8のサイズを有する副グループは、それぞれ選択される。副グループ自体は同
じ方法で走査される。
クのために導入される。以前に提案された走査パターンと対照して、走査副グループのサ
イズは、水平な走査に対して16×1で、垂直な走査に対して1×16である。また、8
×2と2×8のサイズを有する副グループは、それぞれ選択される。副グループ自体は同
じ方法で走査される。
垂直な走査は、拡げられた行のようなものの中に位置している変換係数のために効率的
である。これは、水平なエッジを含む画像の中で認められる。
である。これは、水平なエッジを含む画像の中で認められる。
水平な走査は、拡げられた列のようなものの中に位置している変換係数のために効率的
である。これは、垂直なエッジを含む画像の中で認められる。
である。これは、垂直なエッジを含む画像の中で認められる。
図43は、16×16変換ブロックのための垂直で水平な走査の実現を示す。係数副グ
ループは、それぞれ一つの行または一つの列として定義される。垂直で水平な走査は、導
入された走査パターンである。その走査パターンは、列のような走査によって、行の中に
係数の符号化を許す。4×4ブロックに対して、最初の行は、最初の列の残りに続いて走
査され、次に、2番目の行の残りに続いて走査され、次に、2番目の列の中の係数の残り
に続いて走査される。次に、3番目の行の残りが走査され、最後に4番目の列と行の残り
が走査される。
ループは、それぞれ一つの行または一つの列として定義される。垂直で水平な走査は、導
入された走査パターンである。その走査パターンは、列のような走査によって、行の中に
係数の符号化を許す。4×4ブロックに対して、最初の行は、最初の列の残りに続いて走
査され、次に、2番目の行の残りに続いて走査され、次に、2番目の列の中の係数の残り
に続いて走査される。次に、3番目の行の残りが走査され、最後に4番目の列と行の残り
が走査される。
より大きいブロックに対しては、ブロックは4×4の副グループに区分される。これら
の4×4ブロックは、垂直で水平な走査で走査され、副グループは垂直で水平な走査自体
で走査される。
の4×4ブロックは、垂直で水平な走査で走査され、副グループは垂直で水平な走査自体
で走査される。
垂直で水平な走査は、係数がブロックの中の最初の行と列に位置している場合に使用さ
れる。このように、係数は、別の走査(例えば対角線走査)を使用する場合より早く走査
される。これは、水平なエッジと垂直なエッジとを両方を含む画像に対して認められる。
れる。このように、係数は、別の走査(例えば対角線走査)を使用する場合より早く走査
される。これは、水平なエッジと垂直なエッジとを両方を含む画像に対して認められる。
図44は16×16変換ブロックに対して垂直で水平な走査を示す。
別の走査も同様に可能である。例えば、走査と副グループとの間の全ての組み合わせが
使用できる。例えば、4×4ブロックに対して水平走査を使用して、副グループに対して
対角線走査を使用して、走査の適切な選択が、各副グループに対して異なる走査を選択す
ることによって適用される。
使用できる。例えば、4×4ブロックに対して水平走査を使用して、副グループに対して
対角線走査を使用して、走査の適切な選択が、各副グループに対して異なる走査を選択す
ることによって適用される。
変換係数がエンコーダ側での量子化の後に並び替えられて、従来の符号化が使用される
方法で、異なる走査が実現できる、ということを述べるべきである。デコーダ側で、変換
係数は、従来の復号化が行われて、スケーリングと逆変換との前に(または、スケーリン
グの後と逆の変換の前に)並び替えられる。
方法で、異なる走査が実現できる、ということを述べるべきである。デコーダ側で、変換
係数は、従来の復号化が行われて、スケーリングと逆変換との前に(または、スケーリン
グの後と逆の変換の前に)並び替えられる。
ベース層信号の異なる部分は、ベース層信号から符号化パラメータを得るために利用さ
れる。ベース層信号の中には以下がある。
・共同配置された再構成されたベース層信号
・共同配置された残留ベース層信号
・エンハンスメント層予測信号を再構成されたベース層信号から引き算することによっ
て得られた、推定されたエンハンスメント層の残留信号
・ベース層フレームの画像仕切り
れる。ベース層信号の中には以下がある。
・共同配置された再構成されたベース層信号
・共同配置された残留ベース層信号
・エンハンスメント層予測信号を再構成されたベース層信号から引き算することによっ
て得られた、推定されたエンハンスメント層の残留信号
・ベース層フレームの画像仕切り
[勾配パラメータ]
勾配パラメータは以下の通り得られる:
調査されたブロックの各画素に対して、勾配が計算される。これらの勾配から、大きさ
と角度が計算される。ブロックの中で最も起きた角度は、ブロックに関係する(ブロック
角度)。角度は、3つの方向のみ、水平(0°)、垂直(90°)、対角(45°)を使
用するように向く。
勾配パラメータは以下の通り得られる:
調査されたブロックの各画素に対して、勾配が計算される。これらの勾配から、大きさ
と角度が計算される。ブロックの中で最も起きた角度は、ブロックに関係する(ブロック
角度)。角度は、3つの方向のみ、水平(0°)、垂直(90°)、対角(45°)を使
用するように向く。
[エッジ検出]
エッジ検出器は、以下のような調査されたブロックに適用される:
最初に、ブロックが、n×n円滑フィルタ(例えば、ガウス系)によって円滑にされる
。
サイズm×mの勾配マトリクスが、各画素の勾配を計算するために使用される。あらゆ
る画素の大きさと角度が計算される。角度は、3つの方向のみ、水平(0°)、垂直(9
0°)、対角(45°)を使用するように向く。
所定の閾値1より大きい大きさを有するあらゆる画素に対して、隣接する画素がチェッ
クされる。仮に、隣接する画素が閾値2より大きい大きさを有し、そして、現在の画素と
同じ角度を有しているならば、この角度の計数器が増加する。全体のブロックに対して、
最高値の計数器がブロックの角度として選択される。
エッジ検出器は、以下のような調査されたブロックに適用される:
最初に、ブロックが、n×n円滑フィルタ(例えば、ガウス系)によって円滑にされる
。
サイズm×mの勾配マトリクスが、各画素の勾配を計算するために使用される。あらゆ
る画素の大きさと角度が計算される。角度は、3つの方向のみ、水平(0°)、垂直(9
0°)、対角(45°)を使用するように向く。
所定の閾値1より大きい大きさを有するあらゆる画素に対して、隣接する画素がチェッ
クされる。仮に、隣接する画素が閾値2より大きい大きさを有し、そして、現在の画素と
同じ角度を有しているならば、この角度の計数器が増加する。全体のブロックに対して、
最高値の計数器がブロックの角度として選択される。
[前の変換によってベース層係数を得ること]
特定のTUに対して、ベース層信号の周波数領域から符号化パラメータを得るために、
調査され共同配置された信号(再構成されたベース層信号/残留ベース層信号/推定され
たエンハンスメント層信号)は、周波数領域の中で変換される。好ましくは、これは、そ
の特定のエンハンスメント層TUによって使用される同じ変換を使用して、実行される。
結果としてもたらされるベース層変換係数は、量子化されても、されなくてもよい。
エンハンスメント層ブロックと比較可能な係数分布を得るために、変更されたラムダに
よる比率歪量子化が使用される。
特定のTUに対して、ベース層信号の周波数領域から符号化パラメータを得るために、
調査され共同配置された信号(再構成されたベース層信号/残留ベース層信号/推定され
たエンハンスメント層信号)は、周波数領域の中で変換される。好ましくは、これは、そ
の特定のエンハンスメント層TUによって使用される同じ変換を使用して、実行される。
結果としてもたらされるベース層変換係数は、量子化されても、されなくてもよい。
エンハンスメント層ブロックと比較可能な係数分布を得るために、変更されたラムダに
よる比率歪量子化が使用される。
[特定の分布および走査の走査有効スコア]
特定の重要な係数分布の走査有効スコアが、以下の通り定義される:
調査されたブロックの各位置を、調査された走査の順にインデックスによって表わせて
ください。次に、重要な係数位置のインデックス値の合計が、この走査の有効スコアと定
義される。その結果、より小さいスコアを有する走査であればあるほど、特定の分布は、
より良い効率性を表わす。
特定の重要な係数分布の走査有効スコアが、以下の通り定義される:
調査されたブロックの各位置を、調査された走査の順にインデックスによって表わせて
ください。次に、重要な係数位置のインデックス値の合計が、この走査の有効スコアと定
義される。その結果、より小さいスコアを有する走査であればあるほど、特定の分布は、
より良い効率性を表わす。
[変換係数符号化に対して適切な走査パターン選択]
仮に、いくつかの走査が、特定のTUに対して利用可能であるならば、走査の1つを唯
一選択する規則が、定義される必要がある。
仮に、いくつかの走査が、特定のTUに対して利用可能であるならば、走査の1つを唯
一選択する規則が、定義される必要がある。
[走査パターン選択のための方法]
選択された走査が、(どんな追加データも送信されること無く)既に復号化された信号
から直接得ることができる。これは、共同配置されたベース層信号の特性に基づいて、ま
たは、エンハンスメント層信号だけを利用することによってのどちらかによってできる。
走査パターンが、以下によって、EL信号から得ることができる。
・前述された最先端の派生規則。
・共同配置された輝度残留のために選択された色差残留のための走査パターンを使用す
ること。
・符号化モードと使用した走査パターンとの間の固定写像を定義すること。
・最後の重要な係数位置から走査パターンを得ること(推定された固定走査パターンに
比例して)。
・
好ましい実施の形態において、走査パターンが、以下の通り既に復号化された最後の位
置に依存して選択される:
選択された走査が、(どんな追加データも送信されること無く)既に復号化された信号
から直接得ることができる。これは、共同配置されたベース層信号の特性に基づいて、ま
たは、エンハンスメント層信号だけを利用することによってのどちらかによってできる。
走査パターンが、以下によって、EL信号から得ることができる。
・前述された最先端の派生規則。
・共同配置された輝度残留のために選択された色差残留のための走査パターンを使用す
ること。
・符号化モードと使用した走査パターンとの間の固定写像を定義すること。
・最後の重要な係数位置から走査パターンを得ること(推定された固定走査パターンに
比例して)。
・
好ましい実施の形態において、走査パターンが、以下の通り既に復号化された最後の位
置に依存して選択される:
最後の位置は、変換ブロックの中のxとy座標として表わされ、既に復号化される(符
号化される最後に依存する走査に対して、固定走査パターンが、最後の位置の復号化過程
のために推定される。それは、そのTUの最先端の走査パターンである)。Tを特定の変
換サイズに依存する、定義された閾値であるとしなさい。仮に、最後の重要な位置のx座
標もy座標も、Tを超えないならば、対角線走査が選択される。
号化される最後に依存する走査に対して、固定走査パターンが、最後の位置の復号化過程
のために推定される。それは、そのTUの最先端の走査パターンである)。Tを特定の変
換サイズに依存する、定義された閾値であるとしなさい。仮に、最後の重要な位置のx座
標もy座標も、Tを超えないならば、対角線走査が選択される。
さもなければ、xはyと比較される。仮に、xがyを超えるならば、水平走査が選択さ
れ、垂直走査は選択されない。4×4TUのためのTの好ましい値は1である。4×4よ
り大きいTUのためのTの好ましい値は4である。
れ、垂直走査は選択されない。4×4TUのためのTの好ましい値は1である。4×4よ
り大きいTUのためのTの好ましい値は4である。
別の好ましい実施の形態において、前の実施の形態の中で説明される走査パターンの派
生は、サイズ16×16と32×32のTUのためだけにされるべく制限される。それは
、さらに輝度信号だけに制限される。
生は、サイズ16×16と32×32のTUのためだけにされるべく制限される。それは
、さらに輝度信号だけに制限される。
また、走査パターンは、BL信号から得られる。ベース層信号から選択された走査パタ
ーンを得るために、前述したどんな符号化パラメータも使用できる。特に、共同配置され
たベース層信号の勾配が、計算され、事前に定義された閾値と比較される、および/また
は、潜在的に見つけられたエッジが利用できる。
ーンを得るために、前述したどんな符号化パラメータも使用できる。特に、共同配置され
たベース層信号の勾配が、計算され、事前に定義された閾値と比較される、および/また
は、潜在的に見つけられたエッジが利用できる。
好ましい実施の形態において、走査方向が、以下の通り、ブロック勾配角度に依存して
得られる。水平方向において量子化された勾配に対して、垂直な走査が使用される。垂直
方向において量子化された勾配に対して、水平走査が使用される。さもなければ、対角線
走査が選択される。
得られる。水平方向において量子化された勾配に対して、垂直な走査が使用される。垂直
方向において量子化された勾配に対して、水平走査が使用される。さもなければ、対角線
走査が選択される。
別の好ましい実施の形態において、走査パターンは、前の実施の形態で記載されたよう
に得られる。しかし、ブロック角度の発生数が閾値を超えている、それらの変換ブロック
だけに対して得られる。残っている変換ユニットは、TUの最先端の走査パターンを使用
して、復号化される。
に得られる。しかし、ブロック角度の発生数が閾値を超えている、それらの変換ブロック
だけに対して得られる。残っている変換ユニットは、TUの最先端の走査パターンを使用
して、復号化される。
仮に、共同配置されたブロックのベース層係数が有効であり、明らかに、ベース層デー
タストリームの中で合図される、または、前の変換によって計算されるならば、ベース層
係数は以下の方法で利用できる。
・それぞれの利用可能な走査に対して、ベース層係数を符号化するための費用が評価さ
れる。最低費用を有する走査は、エンハンスメント層係数を復号化のために使用される。
・それぞれの利用可能な走査の有効スコアは、ベース層係数分布のために計算される。
最小のスコアを有する走査は、エンハンスメント層係数を復号化するために使用される。
・変換ブロックの中のベース層係数の分布は、特定の走査パターンに関係している分布
の事前に定義された組の1つに分類される。
・走査パターンは、最後の重要なベース層係数に依存して選択される。
タストリームの中で合図される、または、前の変換によって計算されるならば、ベース層
係数は以下の方法で利用できる。
・それぞれの利用可能な走査に対して、ベース層係数を符号化するための費用が評価さ
れる。最低費用を有する走査は、エンハンスメント層係数を復号化のために使用される。
・それぞれの利用可能な走査の有効スコアは、ベース層係数分布のために計算される。
最小のスコアを有する走査は、エンハンスメント層係数を復号化するために使用される。
・変換ブロックの中のベース層係数の分布は、特定の走査パターンに関係している分布
の事前に定義された組の1つに分類される。
・走査パターンは、最後の重要なベース層係数に依存して選択される。
仮に、共同配置されたベース層ブロックが、内部予測を使用して、予測されたならば、
その予測の内部方向が、エンハンスメント層走査パターンを得るために使用される。
その予測の内部方向が、エンハンスメント層走査パターンを得るために使用される。
その上、共同配置されたベース層ブロックの変換サイズは、走査パターンを得るために
利用される。
利用される。
好ましい実施の形態において、走査パターンが、INTRA_COPYモード予測ブロ
ックの残留を表わすTUだけに対して、BL信号から得られる。そして、それらの共同配
置されたベース層ブロックは、内部予測されている。それらのブロックに対して、変更さ
れた最先端技術の走査選択が使用される。最先端技術の走査選択と対照して、共同配置さ
れたベース層ブロックの内部予測方向は、走査パターンを選択するために使用される。
ックの残留を表わすTUだけに対して、BL信号から得られる。そして、それらの共同配
置されたベース層ブロックは、内部予測されている。それらのブロックに対して、変更さ
れた最先端技術の走査選択が使用される。最先端技術の走査選択と対照して、共同配置さ
れたベース層ブロックの内部予測方向は、走査パターンを選択するために使用される。
ビットストリームの中で走査パターンインデックスに合図すること(実施例R参照)。
変換ブロックの走査パターンが、エンコーダによって比率歪価値の中で選択され、次に
、ビットストリームの中で合図される。
変換ブロックの走査パターンが、エンコーダによって比率歪価値の中で選択され、次に
、ビットストリームの中で合図される。
特定の走査パターンが、利用できる走査パターン候補のリストの中のインデックスに合
図することによって、符号化できる。このリストは、特定の変換サイズのために定義され
た走査パターンの固定リストであるか、または、復号化過程の中の能動的に満たすことが
できる。能動的にリストを満たすことは、それらの走査パターンの適した選択を許す。走
査パターンは、たぶん最も効率的に、特定の係数分布を符号化する。そうすることによっ
て、特定のTUのための利用可能な走査パターンの数は減少できる。そして、その結果、
そのリストの中のインデックスの合図は、それほど高価ではない。仮に、特定のリストの
中の走査パターンの数が、1つまで減少するならば、合図は必要ない。
特定のTUに対して、走査パターン候補を選択する過程は、前述した、どんな符号化パ
ラメータも利用してよい、および/または、その特定のTUの特定の特性を利用する所定
の規則に従う。それらの中に、以下がある。
・TUは輝度/色差信号の残留を表わす。
・TUは、特定のサイズを有する。
・TUは特定の予測モードの残留を表わす。
・TUの中の最後の重要な位置は、デコーダによって知られ、TUの特定の副分割の中
に属する。
・TUは1つのI/B/P-スライス(Sice)の部分である。
・TUの係数は、特定の量子化パラメータを使用して、量子化される。
図することによって、符号化できる。このリストは、特定の変換サイズのために定義され
た走査パターンの固定リストであるか、または、復号化過程の中の能動的に満たすことが
できる。能動的にリストを満たすことは、それらの走査パターンの適した選択を許す。走
査パターンは、たぶん最も効率的に、特定の係数分布を符号化する。そうすることによっ
て、特定のTUのための利用可能な走査パターンの数は減少できる。そして、その結果、
そのリストの中のインデックスの合図は、それほど高価ではない。仮に、特定のリストの
中の走査パターンの数が、1つまで減少するならば、合図は必要ない。
特定のTUに対して、走査パターン候補を選択する過程は、前述した、どんな符号化パ
ラメータも利用してよい、および/または、その特定のTUの特定の特性を利用する所定
の規則に従う。それらの中に、以下がある。
・TUは輝度/色差信号の残留を表わす。
・TUは、特定のサイズを有する。
・TUは特定の予測モードの残留を表わす。
・TUの中の最後の重要な位置は、デコーダによって知られ、TUの特定の副分割の中
に属する。
・TUは1つのI/B/P-スライス(Sice)の部分である。
・TUの係数は、特定の量子化パラメータを使用して、量子化される。
好ましい実施の形態において、走査パターン候補のリストは、全てのTUに対して、3
つの走査を含む:「対角線走査」、「垂直走査」および「水平走査」。
つの走査を含む:「対角線走査」、「垂直走査」および「水平走査」。
別の実施の形態が、候補リストに、走査パターンの任意の組み合わせを含ませることに
よって、得られる。
よって、得られる。
特定の好ましい実施の形態の中で、走査パターン候補のリストは、「対角線走査」、「
垂直走査」および「水平走査」のどれかを含む。
垂直走査」および「水平走査」のどれかを含む。
ところが、(前述の)最先端の走査派生によって選択された走査パターンが、最初に、
リストの中にあるように設定される。特定のTUが16×16または32×32のサイズ
を有する場合にだけ、別の候補がリストに追加される。残っている走査パターンの順序は
、最後の重要な係数位置に依存する。
リストの中にあるように設定される。特定のTUが16×16または32×32のサイズ
を有する場合にだけ、別の候補がリストに追加される。残っている走査パターンの順序は
、最後の重要な係数位置に依存する。
(注意:対角線の走査は、いつも、16×16と32×32変換を推定するリストの中
で最初のパターンである)
で最初のパターンである)
仮に、x座標の大きさがy座標の大きさを超えるならば、水平走査が次に選ばれる。そ
して、垂直走査が最後の位置に置かれる。さもなければ、垂直走査は、水平走査が後に続
く、2番目の位置に置かれる。
して、垂直走査が最後の位置に置かれる。さもなければ、垂直走査は、水平走査が後に続
く、2番目の位置に置かれる。
別の好ましい実施の形態が、リストの中に1つ以上の候補を有しているために、更に条
件を制限することによって得られる。
件を制限することによって得られる。
別の実施の形態において、仮に、変換ブロックの係数が、輝度信号の残留を表わすなら
ば、垂直で水平な走査は、16×16と32×32変換ブロックの候補リストに追加され
るだけである。
ば、垂直で水平な走査は、16×16と32×32変換ブロックの候補リストに追加され
るだけである。
別の実施の形態において、仮に、最後の重要な位置のxとy座標の両方が、特定の閾値
より大きいならば、垂直で水平な走査は、変換ブロックの候補リストに追加される。この
閾値はサイズに依存するモードおよび/またはTUである。好ましい閾値は、4×4より
大きい全てのサイズに対して3であり、4×4TUに対しては1である。
より大きいならば、垂直で水平な走査は、変換ブロックの候補リストに追加される。この
閾値はサイズに依存するモードおよび/またはTUである。好ましい閾値は、4×4より
大きい全てのサイズに対して3であり、4×4TUに対しては1である。
別の実施の形態において、仮に、最後の重要な位置のxとy座標のいずれかが、特定の
閾値より大きいならば、垂直で水平な走査は、変換ブロックの候補リストに追加されるだ
けである。この閾値はサイズに依存するモードおよび/またはTUである。好ましい閾値
は、4×4より大きい全てのサイズに対して3であり、4×4TUに対しては1である。
閾値より大きいならば、垂直で水平な走査は、変換ブロックの候補リストに追加されるだ
けである。この閾値はサイズに依存するモードおよび/またはTUである。好ましい閾値
は、4×4より大きい全てのサイズに対して3であり、4×4TUに対しては1である。
別の実施の形態において、仮に、最後の重要な位置のxとy座標の両方が、特定の閾値
より大きいならば、垂直で水平な走査は、16×16と32×32変換ブロックの候補リ
ストに追加されるだけである。この閾値はサイズに依存するモードおよび/またはTUで
ある。好ましい閾値は、4×4より大きい全てのサイズに対して3であり、4×4TUに
対しては1である。
より大きいならば、垂直で水平な走査は、16×16と32×32変換ブロックの候補リ
ストに追加されるだけである。この閾値はサイズに依存するモードおよび/またはTUで
ある。好ましい閾値は、4×4より大きい全てのサイズに対して3であり、4×4TUに
対しては1である。
別の実施の形態において、仮に、最後の重要な位置のxとy座標のいずれかが、特定の
閾値より大きいならば、垂直で水平な走査は、16×16と32×32変換ブロックの候
補リストに追加されるだけである。この閾値はサイズに依存するモードおよび/またはT
Uである。好ましい閾値は、4×4より大きい全てのサイズに対して3であり、4×4T
Uに対しては1である。
閾値より大きいならば、垂直で水平な走査は、16×16と32×32変換ブロックの候
補リストに追加されるだけである。この閾値はサイズに依存するモードおよび/またはT
Uである。好ましい閾値は、4×4より大きい全てのサイズに対して3であり、4×4T
Uに対しては1である。
記載された実施の形態のいずれかに対して、特定の走査パターンが、ビットストリーム
の中で合図される。合図自体は、異なる合図レベルでなされる。特に、合図は、残留四枝
ツリーのどんな節(ノード)(その節の全ての副TU、それは合図された走査を使用し、
同じ候補リストインデックスを使用する)で、CU/LCUレベルで、または、スライス
レベルで、合図された走査パターンを有したTUの副グループの中で低下する各TUに対
してなされる。
の中で合図される。合図自体は、異なる合図レベルでなされる。特に、合図は、残留四枝
ツリーのどんな節(ノード)(その節の全ての副TU、それは合図された走査を使用し、
同じ候補リストインデックスを使用する)で、CU/LCUレベルで、または、スライス
レベルで、合図された走査パターンを有したTUの副グループの中で低下する各TUに対
してなされる。
候補リストの中のインデックスが、固定長さ符号化、可変長さ符号化、算術符号化(文
脈に適した2進の算術符号化を含む)、または、PIPE符号化を使用して、送信される
。仮に、文脈に適した符号化が使用されるならば、文脈は、隣接するブロック、前述した
符号化モード、および/または、特定のTU自身の特性のパラメータに基づいて得られる
。
脈に適した2進の算術符号化を含む)、または、PIPE符号化を使用して、送信される
。仮に、文脈に適した符号化が使用されるならば、文脈は、隣接するブロック、前述した
符号化モード、および/または、特定のTU自身の特性のパラメータに基づいて得られる
。
好ましい実施の形態において、文脈に適した符号化は、TUの走査パターン候補リスト
の中のインデックスに合図するために使用される。しかし、文脈モデルは、TUの中で、
最後の重要な位置の変換サイズおよび/または位置に基づいて得られる。
走査パターンを得るために前述したいずれかの方法が、特定のTUに対して、明白な走
査パターンに合図するための文脈モデルを得るために使用される。
の中のインデックスに合図するために使用される。しかし、文脈モデルは、TUの中で、
最後の重要な位置の変換サイズおよび/または位置に基づいて得られる。
走査パターンを得るために前述したいずれかの方法が、特定のTUに対して、明白な走
査パターンに合図するための文脈モデルを得るために使用される。
最後の重要な走査位置を符号化するために、以下の変更がエンハンスメント層の中で使
用される。
・別々の文脈モデルが、ベース層情報を使用して、全てのまたは副組の符号化モードに
対して使用される。また、異なる文脈モデルを、ベース層情報を有する異なるモードに対
して使用することも可能である。
・文脈モデルは、共同配置されたベース層ブロックの中のデータに依存できる(例えば
、ベース層の中の変換係数分布、ベース層の勾配情報、共同配置されたベース層ブロック
の中の最後のキャン位置)。
・最後の走査位置が、最後のベース層走査位置との差として符号化できる。
・仮に、最後の走査位置が、TUの中で、xとy位置に合図することによって符号化さ
れるならば、2番目の合図された座標の文脈モデルは、最初の合図の値に依存できる。
・最後の重要な位置から独立している走査パターンを得るために、前述のいずれかの方
法が、最後の重要な位置に合図するために、文脈モデルを得るために使用される。
用される。
・別々の文脈モデルが、ベース層情報を使用して、全てのまたは副組の符号化モードに
対して使用される。また、異なる文脈モデルを、ベース層情報を有する異なるモードに対
して使用することも可能である。
・文脈モデルは、共同配置されたベース層ブロックの中のデータに依存できる(例えば
、ベース層の中の変換係数分布、ベース層の勾配情報、共同配置されたベース層ブロック
の中の最後のキャン位置)。
・最後の走査位置が、最後のベース層走査位置との差として符号化できる。
・仮に、最後の走査位置が、TUの中で、xとy位置に合図することによって符号化さ
れるならば、2番目の合図された座標の文脈モデルは、最初の合図の値に依存できる。
・最後の重要な位置から独立している走査パターンを得るために、前述のいずれかの方
法が、最後の重要な位置に合図するために、文脈モデルを得るために使用される。
特定のバージョンにおいて、走査パターン派生は、最後の重要な位置に依存する:
・仮に、最後の走査位置が、TUの中で、そのxとy位置に合図することによって符号
化されるならば、2番目の座標の文脈モデルは、既に最初の座標を知るとき、まだ可能な
候補であるそれらの走査パターンに依存できる。
・仮に、最後の走査位置が、TUの中で、そのxとy位置に合図することによって符号
化されるならば、2番目の座標の文脈モデルは、既に最初の座標を知るとき、走査パター
ンが既に唯一選択されるかどうかに依存できる。
・仮に、最後の走査位置が、TUの中で、そのxとy位置に合図することによって符号
化されるならば、2番目の座標の文脈モデルは、既に最初の座標を知るとき、まだ可能な
候補であるそれらの走査パターンに依存できる。
・仮に、最後の走査位置が、TUの中で、そのxとy位置に合図することによって符号
化されるならば、2番目の座標の文脈モデルは、既に最初の座標を知るとき、走査パター
ンが既に唯一選択されるかどうかに依存できる。
別のバージョンにおいて、走査パターン派生は、最後の重要な位置から独立している。
・文脈モデルは、特定のTUの中の使用された走査パターンに依存できる。
・走査パターンを得るために前述した方法のいずれかが、最後の重要な位置に合図する
ために文脈モデルを得るために使用される。
・文脈モデルは、特定のTUの中の使用された走査パターンに依存できる。
・走査パターンを得るために前述した方法のいずれかが、最後の重要な位置に合図する
ために文脈モデルを得るために使用される。
TUの中の重要な位置と重要な旗(一つの変換係数のための副グループ旗および/また
は重要な旗)を符号化するために、それぞれ、以下の変更がエンハンスメント層の中で使
用される:
・別々の文脈モデルは、ベース層情報を使用する全てのまたは副組の符号化モードに対
して使用される。また、ベース層情報を有する異なるモードに対して異なる文脈モデルを
使用することも可能である。
・文脈モデルは、共同配置されたベース層ブロックの中のデータ(例えば、特定の周波
数位置対して、重要な変換係数の数)に依存できる。
・走査パターンを得るために前述した方法のいずれかが、重要な位置および/またはそ
れらのレベルに合図するために、文脈モデルを得るために使用される。
・符号化されるべき係数の空間的近傍の中の既に符号化された変換係数レベルの重要な
数、および、同様の周波数位置の共同配置されたベース層信号の中の重要な変換係数の数
の両方を評価する一般化されたテンプレートが、使用される。
・符号化されるべき係数の空間的近傍の中の既に符号化された変換係数レベルの重要な
数、および、同様の周波数位置の共同配置されたベース層信号の中の重要な変換係数のレ
ベルの両方を評価する一般化されたテンプレートが、使用される。
・副グループ旗のためにモデル化される文脈は、使用された走査パターンおよび/また
は特定の変換サイズに依存する。
は重要な旗)を符号化するために、それぞれ、以下の変更がエンハンスメント層の中で使
用される:
・別々の文脈モデルは、ベース層情報を使用する全てのまたは副組の符号化モードに対
して使用される。また、ベース層情報を有する異なるモードに対して異なる文脈モデルを
使用することも可能である。
・文脈モデルは、共同配置されたベース層ブロックの中のデータ(例えば、特定の周波
数位置対して、重要な変換係数の数)に依存できる。
・走査パターンを得るために前述した方法のいずれかが、重要な位置および/またはそ
れらのレベルに合図するために、文脈モデルを得るために使用される。
・符号化されるべき係数の空間的近傍の中の既に符号化された変換係数レベルの重要な
数、および、同様の周波数位置の共同配置されたベース層信号の中の重要な変換係数の数
の両方を評価する一般化されたテンプレートが、使用される。
・符号化されるべき係数の空間的近傍の中の既に符号化された変換係数レベルの重要な
数、および、同様の周波数位置の共同配置されたベース層信号の中の重要な変換係数のレ
ベルの両方を評価する一般化されたテンプレートが、使用される。
・副グループ旗のためにモデル化される文脈は、使用された走査パターンおよび/また
は特定の変換サイズに依存する。
ベース層とエンハンスメント層のための異なる文脈初期化テーブルの使用法が使用され
る。エンハンスメント層のための文脈モデル初期化は、以下の方法で変更される。
・エンハンスメント層は、初期化値の別々の組を使用する。
・エンハンスメント層は、異なる操作モード(空間的/時間的、または、品質のスケー
ラビリティ)に対して、初期化値の別々の組を使用する。
・ベース層の中の計数部分を有するエンハンスメント層文脈モデルが、初期化状態とし
て、それらの計数部分の状態を使用する。
・文脈の初期状態を得るためのアルゴリズムが、ベース層QPおよび/またはデルタQ
P依存である。
る。エンハンスメント層のための文脈モデル初期化は、以下の方法で変更される。
・エンハンスメント層は、初期化値の別々の組を使用する。
・エンハンスメント層は、異なる操作モード(空間的/時間的、または、品質のスケー
ラビリティ)に対して、初期化値の別々の組を使用する。
・ベース層の中の計数部分を有するエンハンスメント層文脈モデルが、初期化状態とし
て、それらの計数部分の状態を使用する。
・文脈の初期状態を得るためのアルゴリズムが、ベース層QPおよび/またはデルタQ
P依存である。
次に、ベース層データを使用して、後方の適切なエンハンスメント層の符号化の可能性
が説明される。以下の部分は、スケーラブルビデオ符号化システムの中で、エンハンスメ
ント層予測信号を生成する方法を説明する。その方法は、予測パラメータの値を推論する
ために画像のサンプル情報を復号化したベース層を使用する。予測パラメータの値は、符
号化映像ビットストリームの中に送信されないけれども、エンハンスメント層のための予
測信号を形成するために使用される。従って、エンハンスメント層信号を符号化するため
に必要な総合的なビット比率は減少する。
が説明される。以下の部分は、スケーラブルビデオ符号化システムの中で、エンハンスメ
ント層予測信号を生成する方法を説明する。その方法は、予測パラメータの値を推論する
ために画像のサンプル情報を復号化したベース層を使用する。予測パラメータの値は、符
号化映像ビットストリームの中に送信されないけれども、エンハンスメント層のための予
測信号を形成するために使用される。従って、エンハンスメント層信号を符号化するため
に必要な総合的なビット比率は減少する。
最先端のハイブリッドビデオエンコーダは、原初(ソース)イメージを、通常、階層構
造に従って、異なるサイズのブロックに分解する。各ブロックに対して、ビデオ信号は、
空間的に隣接するブロックから予測される(内部予測)、または、以前に時間的に符号化
された画像から予測される(中間予測)。予測と実際のイメージとの間の差は、変換と量
子化である。結果としてもたらされる予測パラメータと変換係数は、符号化映像ビットス
トリームを形成するためにエントロピー符号化される。整合しているデコーダは、逆の順
序のステップに従う…
ビットストリームを符号化するスケーラブルビデオは、異なる層で構成される:完全な
復号化可能ビデオを提供するベース層と、復号化のために追加して使用されるエンハンス
メント層とである。エンハンスメント層は、より高い空間解像度(空間的スケーラビリテ
ィ)、時間解像度(時間的スケーラビリティ)または品質(SNRスケーラビリティ)を
提供できる。
H.264/AVC SVCのような以前の規格では、作動ベクトル、引用画像インデ
ックスまたは内部予測モードのような構文要素は、符号化されたベース層の中の対応する
構文要素から直接に予測される。
エンハンスメント層の中では、メカニズムは、ブロックレベルで、ベース層構文要素か
ら得られた、あるいは、別のエンハンスメント層構文要素または復号化されたエンハンス
メント層サンプルから予測された予測信号を使用して、その間において切り換えるために
存在する。
造に従って、異なるサイズのブロックに分解する。各ブロックに対して、ビデオ信号は、
空間的に隣接するブロックから予測される(内部予測)、または、以前に時間的に符号化
された画像から予測される(中間予測)。予測と実際のイメージとの間の差は、変換と量
子化である。結果としてもたらされる予測パラメータと変換係数は、符号化映像ビットス
トリームを形成するためにエントロピー符号化される。整合しているデコーダは、逆の順
序のステップに従う…
ビットストリームを符号化するスケーラブルビデオは、異なる層で構成される:完全な
復号化可能ビデオを提供するベース層と、復号化のために追加して使用されるエンハンス
メント層とである。エンハンスメント層は、より高い空間解像度(空間的スケーラビリテ
ィ)、時間解像度(時間的スケーラビリティ)または品質(SNRスケーラビリティ)を
提供できる。
H.264/AVC SVCのような以前の規格では、作動ベクトル、引用画像インデ
ックスまたは内部予測モードのような構文要素は、符号化されたベース層の中の対応する
構文要素から直接に予測される。
エンハンスメント層の中では、メカニズムは、ブロックレベルで、ベース層構文要素か
ら得られた、あるいは、別のエンハンスメント層構文要素または復号化されたエンハンス
メント層サンプルから予測された予測信号を使用して、その間において切り換えるために
存在する。
以下の部分では、ベース層データが、デコーダ側でエンハンス層パラメータを得るため
に使用される。
に使用される。
[方法1:作動パラメータ候補派生]
空間的または品質的エンハンスメント層の画像のブロック(a)に対して、ベース層の
画像の対応するブロック(b)が決定される。それは同じ画像領域をカバーする。
エンハンスメント層のブロック(a)のための中間予測信号は、以下の方法を使用して
形成される:
1.作動補償パラメータ組候補は、例えば、時間的または空間的に隣接するエンハンス
メント層ブロックまたはそれの派生物から決定される。
2.作動補償は、各候補の作動補償パラメータ組に対して、エンハンスメント層の中で
中間予測信号を形成するために実行される。
3.最も良い作動補償パラメータ組は、エンハンスメント層ブロック(a)のための予
測信号と、ベース層ブロック(b)の再構成信号との間の誤差の大きさを最小にすること
によって選択される。空間的スケーラビリティにおいて、ベース層ブロック(b)は、補
間フィルタを使用して、空間的に抽出される。
空間的または品質的エンハンスメント層の画像のブロック(a)に対して、ベース層の
画像の対応するブロック(b)が決定される。それは同じ画像領域をカバーする。
エンハンスメント層のブロック(a)のための中間予測信号は、以下の方法を使用して
形成される:
1.作動補償パラメータ組候補は、例えば、時間的または空間的に隣接するエンハンス
メント層ブロックまたはそれの派生物から決定される。
2.作動補償は、各候補の作動補償パラメータ組に対して、エンハンスメント層の中で
中間予測信号を形成するために実行される。
3.最も良い作動補償パラメータ組は、エンハンスメント層ブロック(a)のための予
測信号と、ベース層ブロック(b)の再構成信号との間の誤差の大きさを最小にすること
によって選択される。空間的スケーラビリティにおいて、ベース層ブロック(b)は、補
間フィルタを使用して、空間的に抽出される。
作動補償パラメータ組は、作動補償パラメータの特定の組み合わせを含む。
作動補償パラメータは、作動ベクトル、引用画像インデックス、1つおよび2つの予測
と別のパラメータとの間の選択である。
と別のパラメータとの間の選択である。
2者択一の実施の形態において、ベース層ブロックから、作動補償パラメータ組の候補
が使用される。また、中間予測は、(ベース層の引用画像を使用して、)ベース層の中で
実行される。誤差の大きさを適用するために、ベース層ブロック(b)再構成信号が、抽
出されることなく、直接に使用される。選択された最適作動補償パラメータ組は、ブロッ
ク(a)の予測信号を形成するためにエンハンスメント層の引用画像に適用される。作動
ベクトルが空間エンハンスメント層の中で適用されるとき、作動ベクトルは解像度変化に
従ってスケーリングされる。
エンコーダとデコーダの両方が、利用可能な候補の中で、最適作動補償パラメータ組を
選択して、同じ予測信号を作成するために、同じ予測ステップを実行できる。これらのパ
ラメータは、符号化映像ビットストリームの中で合図されない。
が使用される。また、中間予測は、(ベース層の引用画像を使用して、)ベース層の中で
実行される。誤差の大きさを適用するために、ベース層ブロック(b)再構成信号が、抽
出されることなく、直接に使用される。選択された最適作動補償パラメータ組は、ブロッ
ク(a)の予測信号を形成するためにエンハンスメント層の引用画像に適用される。作動
ベクトルが空間エンハンスメント層の中で適用されるとき、作動ベクトルは解像度変化に
従ってスケーリングされる。
エンコーダとデコーダの両方が、利用可能な候補の中で、最適作動補償パラメータ組を
選択して、同じ予測信号を作成するために、同じ予測ステップを実行できる。これらのパ
ラメータは、符号化映像ビットストリームの中で合図されない。
予測方法の選択は、ビットストリームの中で合図され、エントロピー符号化を使用して
、符号化される。階層的なブロック副分割構造の中で、この符号化方法は、あらゆる副レ
ベル、または、替りに符号化階層構造の副組だけで選択できる。替りの実施の形態におい
て、エンコーダは、改良作動パラメータ組予測信号をデコーダに送信できる。改良信号は
作動パラメータの符号化された値を差動的に含む。改良信号は、エントロピー符号化され
る。
、符号化される。階層的なブロック副分割構造の中で、この符号化方法は、あらゆる副レ
ベル、または、替りに符号化階層構造の副組だけで選択できる。替りの実施の形態におい
て、エンコーダは、改良作動パラメータ組予測信号をデコーダに送信できる。改良信号は
作動パラメータの符号化された値を差動的に含む。改良信号は、エントロピー符号化され
る。
代替の実施の形態において、デコーダは最も良い候補のリストを生成する。使用された
作動パラメータ組のインデックスは、符号化映像ビットストリームの中で合図される。イ
ンデックスは、エントロピー符号化される。実施例において、リストは誤差の大きさを増
加させることによって順序付けされる。
作動パラメータ組のインデックスは、符号化映像ビットストリームの中で合図される。イ
ンデックスは、エントロピー符号化される。実施例において、リストは誤差の大きさを増
加させることによって順序付けされる。
実施例は、作動補償パラメータ組候補を生成させるために、HEVCの適した作動ベク
トル予測(AMVP)候補リストを使用する。
別の実施例は、作動補償パラメータ組候補を生成させるために、HEVCの融合モード
候補リストを使用する。
トル予測(AMVP)候補リストを使用する。
別の実施例は、作動補償パラメータ組候補を生成させるために、HEVCの融合モード
候補リストを使用する。
[方法2:作動ベクトル派生]
空間的または品質のエンハンスメント層の画像のブロック(a)に対して、同じ画像領
域をカバーするベース層の画像の対応するブロック(b)が決定される。
空間的または品質のエンハンスメント層の画像のブロック(a)に対して、同じ画像領
域をカバーするベース層の画像の対応するブロック(b)が決定される。
エンハンスメント層のブロック(a)のための中間予測信号は、以下の方法を使用して
形成される:
1.作動ベクトル予測が選択される。
2.検索位置の定義された組の作動の推定が、エンハンスメント層の引用画像で実行さ
れる。
3.それぞれの検索位置に対して、誤差の大きさが決定され、最も小さい誤差を有する
作動ベクトルが選択される。
4.ブロック(a)の予測信号が、選択された作動ベクトルを使用して形成される。
形成される:
1.作動ベクトル予測が選択される。
2.検索位置の定義された組の作動の推定が、エンハンスメント層の引用画像で実行さ
れる。
3.それぞれの検索位置に対して、誤差の大きさが決定され、最も小さい誤差を有する
作動ベクトルが選択される。
4.ブロック(a)の予測信号が、選択された作動ベクトルを使用して形成される。
替わりの実施の形態において、検索が、再構成されたベース層信号で実行される。空間
スケーラビリティに対して、選択された作動ベクトルは、ステップ4の中で予測信号を生
成する前に、空間解像度変化に従って、スケーリングされる。
スケーラビリティに対して、選択された作動ベクトルは、ステップ4の中で予測信号を生
成する前に、空間解像度変化に従って、スケーリングされる。
検索位置は、完全な解像度または副ペル(sub-pel)の解像度でできる。また、
検索は複数のステップの中で、例えば、選択された完全なペル位置に基づいた別の組の候
補が後に続く、最も良い完全なペル位置を最初に決定することを実行できる。例えば、誤
差の大きさが、定義された閾値の下であるとき、検索が早く終了できる。
検索は複数のステップの中で、例えば、選択された完全なペル位置に基づいた別の組の候
補が後に続く、最も良い完全なペル位置を最初に決定することを実行できる。例えば、誤
差の大きさが、定義された閾値の下であるとき、検索が早く終了できる。
エンコーダとデコーダの両方が、候補の中で最適作動ベクトルを選択して、同じ予測信
号を生成するために、同じ予測ステップを実行できる。これらのベクトルは、符号化映像
ビットストリームの中で合図されない。
号を生成するために、同じ予測ステップを実行できる。これらのベクトルは、符号化映像
ビットストリームの中で合図されない。
予測方法の選択は、ビットストリームの中で合図して、エントロピー符号化を使用して
、符号化される。階層的なブロック副分割構造の中で、この符号化方法が、あらゆる副レ
ベルの中で、または、替りの符号化階層の副組だけで選択される。替りの実施の形態にお
いて、エンコーダは、改良作動ベクトル予測信号をデコーダに送信できる。改良信号は、
エントロピー符号化される。
、符号化される。階層的なブロック副分割構造の中で、この符号化方法が、あらゆる副レ
ベルの中で、または、替りの符号化階層の副組だけで選択される。替りの実施の形態にお
いて、エンコーダは、改良作動ベクトル予測信号をデコーダに送信できる。改良信号は、
エントロピー符号化される。
実施例は、作動ベクトル予測器を選ぶために、方法1で記載されたアルゴリズムを使用
する。
する。
別の実施例は、エンハンスメント層の時間的または空間的に隣接するブロックから作動
ベクトル予測器を選ぶために、HEVCの適した作動ベクトル予測(AMVP)方法を使
用する。
ベクトル予測器を選ぶために、HEVCの適した作動ベクトル予測(AMVP)方法を使
用する。
[方法3:内部予測モード派生]
エンハンスメント層(n)画像の中の各ブロック(a)に対して、再構成されたベース
層(n-1)の画像の中の同じ領域をカバーする、対応するブロック(b)が決定される
。
エンハンスメント層(n)画像の中の各ブロック(a)に対して、再構成されたベース
層(n-1)の画像の中の同じ領域をカバーする、対応するブロック(b)が決定される
。
スケーラブルビデオデコーダにおいて、それぞれのベース層ブロック(b)に対して、
内部予測信号が、以下のアルゴリズムによって推論される内部予測モード(p)を使用し
て、形成される。
1)内部予測信号は、エンハンスメント層の内部予測のための規則に従い、しかし、ベ
ース層からサンプル値を使用して、それぞれの利用可能な内部予測モードのために生成さ
れる。
2)最も良い予測モード(pbest)は、内部予測信号と復号化されたベース層ブロック
(b)との間の誤差の大きさ(例えば、絶対差の合計)を最小にすることによって決定さ
れる。
3)ステップ2)の中で選択された予測(pbest)モードは、エンハンスメント層のた
めの内部予測規則をサポートして、エンハンスメント層ブロック(a)のための予測信号
を生成するために使用される。
内部予測信号が、以下のアルゴリズムによって推論される内部予測モード(p)を使用し
て、形成される。
1)内部予測信号は、エンハンスメント層の内部予測のための規則に従い、しかし、ベ
ース層からサンプル値を使用して、それぞれの利用可能な内部予測モードのために生成さ
れる。
2)最も良い予測モード(pbest)は、内部予測信号と復号化されたベース層ブロック
(b)との間の誤差の大きさ(例えば、絶対差の合計)を最小にすることによって決定さ
れる。
3)ステップ2)の中で選択された予測(pbest)モードは、エンハンスメント層のた
めの内部予測規則をサポートして、エンハンスメント層ブロック(a)のための予測信号
を生成するために使用される。
エンコーダとデコーダの両方が、最も良い予測モード(pbest)を選択して、整合して
いる予測信号を形成するために、同じステップを実行できる。実際の内部予測モード(p
best)は、符号化映像ビットストリームの中でこうして合図されない。
いる予測信号を形成するために、同じステップを実行できる。実際の内部予測モード(p
best)は、符号化映像ビットストリームの中でこうして合図されない。
予測方法の選択は、ビットストリームの中で合図されて、エントロピー符号化を使用し
て、符号化される。階層的なブロック副分割構造の中で、この符号化モードは、あらゆる
副レベルの中で、または、替りに符号化階層の副組だけで選択される。替りの実施の形態
は、内部予測信号を生成するために、ステップ2)の中でエンハンスメント層からサンプ
ルを使用する。空間スケーラブルエンハンスメント層に対して、ベース層は、誤差の大き
さを適用するために、補間フィルタを使用して、抽出される。
て、符号化される。階層的なブロック副分割構造の中で、この符号化モードは、あらゆる
副レベルの中で、または、替りに符号化階層の副組だけで選択される。替りの実施の形態
は、内部予測信号を生成するために、ステップ2)の中でエンハンスメント層からサンプ
ルを使用する。空間スケーラブルエンハンスメント層に対して、ベース層は、誤差の大き
さを適用するために、補間フィルタを使用して、抽出される。
代替の実施の形態は、エンハンスメント層ブロックを、より小さいブロックサイズ(a
i)の複数のブロックに分ける(例えば、16×16ブロック(a)は16個の4×4ブ
ロック(ai)に分けられる)。前述したアルゴリズムは、それぞれの副ブロック(ai)
と、対応するベース層ブロック(bi)とに適用される。ブロック(ai)の予測の後に、
残留符号化が適用される、そして、結果は、ブロック(ai+1)を予測するために使用さ
れる。
i)の複数のブロックに分ける(例えば、16×16ブロック(a)は16個の4×4ブ
ロック(ai)に分けられる)。前述したアルゴリズムは、それぞれの副ブロック(ai)
と、対応するベース層ブロック(bi)とに適用される。ブロック(ai)の予測の後に、
残留符号化が適用される、そして、結果は、ブロック(ai+1)を予測するために使用さ
れる。
代替の実施の形態は、予測された内部予測モード(pbest)を決定するために、(b)
または(bi)の周囲のサンプル値を使用する。例えば、空間エンハンスメント層(n)
の4×4ブロック(ai)が、対応する2×2ベース層ブロック(bi)を有するとき、(
bi)の周囲のサンプルが、予測された内部予測モード(pbest)の決定のために使用さ
れる4×4ブロック(ci)を形成するために使用される。
または(bi)の周囲のサンプル値を使用する。例えば、空間エンハンスメント層(n)
の4×4ブロック(ai)が、対応する2×2ベース層ブロック(bi)を有するとき、(
bi)の周囲のサンプルが、予測された内部予測モード(pbest)の決定のために使用さ
れる4×4ブロック(ci)を形成するために使用される。
代替の実施の形態において、エンコーダは、改良内部予測方向信号をデコーダに送信で
きる。例えば、HEVCのような映像コーデックにおいて、ほとんどの内部予測モードが
、境界画素が予測信号を形成するために使用される角度に対応している。最適モードへの
オフセットが、(上で説明されているように決定されている)予測された内部予測モード
(pbest)に対する差として送信される。改良モードは、エントロピー符号化される。
きる。例えば、HEVCのような映像コーデックにおいて、ほとんどの内部予測モードが
、境界画素が予測信号を形成するために使用される角度に対応している。最適モードへの
オフセットが、(上で説明されているように決定されている)予測された内部予測モード
(pbest)に対する差として送信される。改良モードは、エントロピー符号化される。
内部予測モードは、通常、それらの確率に依存して符号化される。H.264/AVC
において、最もありそうなモードは、ブロックの(空間的)近傍で使用されるモードに基
づいて決定される。HEVCリストにおいて、最もありそうなモードが作成される。これ
らの最もありそうなモードは、全体のモード数が必要とするより少ない、ビットストリー
ムの中の記号を使用して選択される。代替の実施の形態は、最もありそうなモード、また
は、最もありそうなモードのリストのメンバーとして、ブロック(a)(前述のアルゴリ
ズムで説明されているように決定されている)に対して、予測された内部予測モード(p
best)を使用する。
において、最もありそうなモードは、ブロックの(空間的)近傍で使用されるモードに基
づいて決定される。HEVCリストにおいて、最もありそうなモードが作成される。これ
らの最もありそうなモードは、全体のモード数が必要とするより少ない、ビットストリー
ムの中の記号を使用して選択される。代替の実施の形態は、最もありそうなモード、また
は、最もありそうなモードのリストのメンバーとして、ブロック(a)(前述のアルゴリ
ズムで説明されているように決定されている)に対して、予測された内部予測モード(p
best)を使用する。
[方法4:境界領域を使用する内部予測]
スケーラブルまたは品質のエンハンスメント層のブロック(a)(図45参照)のため
の内部予測信号を形成するためのスケーラブルビデオデコーダにおいて、同じ層の周囲領
域からのサンプル(b)のラインは、ブロック領域の中に満たされるように使用される。
これらのサンプルは、既に符号化された領域から取られる(通常、しかし、上側と左側の
境界上に必要ない)。
スケーラブルまたは品質のエンハンスメント層のブロック(a)(図45参照)のため
の内部予測信号を形成するためのスケーラブルビデオデコーダにおいて、同じ層の周囲領
域からのサンプル(b)のラインは、ブロック領域の中に満たされるように使用される。
これらのサンプルは、既に符号化された領域から取られる(通常、しかし、上側と左側の
境界上に必要ない)。
これらの画素を選択する以下の代替の変形が使用される。
a)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、現在の
ブロックを予測するために使用されない。
b)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、既に符
号化された隣接する画素から得られる(例えば、反復によって)。
c)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、復号化
されたベース層の画像の対応する領域の中で画素から得られる。
a)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、現在の
ブロックを予測するために使用されない。
b)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、既に符
号化された隣接する画素から得られる(例えば、反復によって)。
c)仮に、周囲領域の中の画素が、まだ符号化されていないならば、画素値は、復号化
されたベース層の画像の対応する領域の中で画素から得られる。
ブロック(a)の内部予測を形成するために、上で説明されるように得られる画素(b
)の隣接するラインが、ブロック(a)のそれぞれのライン(aj)の中を満たすための
テンプレートとして、使用される。
)の隣接するラインが、ブロック(a)のそれぞれのライン(aj)の中を満たすための
テンプレートとして、使用される。
ブロック(a)のライン(aj)は、x軸に沿って一つ一つ満たされる。可能な限り良
い予測信号を達成するために、テンプレートサンプル(b)の列は、関係ライン(aj)
のための予測信号(b´j)を形成するためにy軸に沿って移行する。
い予測信号を達成するために、テンプレートサンプル(b)の列は、関係ライン(aj)
のための予測信号(b´j)を形成するためにy軸に沿って移行する。
各ラインの中で最適の予測を見付けるために、移行オフセット(oj)が、結果として
得られた予測信号(aj)とベース層の中の対応するラインのサンプル値との間の誤差の
大きさを最小にすることによって、決定される。
得られた予測信号(aj)とベース層の中の対応するラインのサンプル値との間の誤差の
大きさを最小にすることによって、決定される。
仮に、(oj)が非整数値であれば、補間フィルタが、(b´7)の中に示されているよ
うに、(aj)の整数サンプル位置に(b)の値を写像するために使用される。
うに、(aj)の整数サンプル位置に(b)の値を写像するために使用される。
仮に、空間スケーラビリティが使用されるならば、補間フィルタが、ベース層の対応す
るラインのサンプル値の整合する数を作成するために使用される。
るラインのサンプル値の整合する数を作成するために使用される。
充満方向(x軸)は、水平(左右)、垂直(上下)、対角またはいかなる他の角度にも
できる。テンプレートライン(b)のために使用されるサンプルは、x軸に沿ったブロッ
クの直接に隣接するサンプルである。テンプレートライン(b)は、x軸に対して90°
の角度を形成するy軸に沿って移行する。
できる。テンプレートライン(b)のために使用されるサンプルは、x軸に沿ったブロッ
クの直接に隣接するサンプルである。テンプレートライン(b)は、x軸に対して90°
の角度を形成するy軸に沿って移行する。
x軸の最適な方向を見付けるために、充填内部予測信号が、ブロック(a)のために生
成される。予測信号と対応するベース層ブロックとの間の最小の誤差大きさを有する角度
が選択される。
可能な角度の数は制限される。
成される。予測信号と対応するベース層ブロックとの間の最小の誤差大きさを有する角度
が選択される。
可能な角度の数は制限される。
エンコーダとデコーダの両方が、最も良い予測角度とオフセットとを決定するために、
同じアルゴリズムを実行する。どんな明白な角度情報またはオフセット情報も、ビットス
トリームの中で合図される必要はない。
代替の実施の形態では、ベース層の画像のサンプルだけが、オフセット(oi)を決定
するために使用される。
同じアルゴリズムを実行する。どんな明白な角度情報またはオフセット情報も、ビットス
トリームの中で合図される必要はない。
代替の実施の形態では、ベース層の画像のサンプルだけが、オフセット(oi)を決定
するために使用される。
代替の実施の形態では、予測されたオフセット(oi)の改良(例えば、差の値)が、
ビットストリームの中で合図される。エントロピー符号化が、改良オフセット値を符号化
するために使用される。
ビットストリームの中で合図される。エントロピー符号化が、改良オフセット値を符号化
するために使用される。
代替の実施の形態では、予測された方向の改良(例えば、差の値)が、ビットストリー
ムの中で、合図される。エントロピー符号化が、改良方向値を符号化するために使用され
る。
ムの中で、合図される。エントロピー符号化が、改良方向値を符号化するために使用され
る。
仮に、ライン(b´j)が予測のために使用されるならば、代替の実施の形態は、選択
するために閾値を使用する。仮に、最適なオフセット(oj)のための誤差大きさが、閾
値未満であるならば、ライン(ci)は、ブロックライン(aj)の値を決定するために使
用される。仮に、最適なオフセット(oj)のための誤差大きさが、閾値以上であるなら
ば、(抽出された)ベース層信号は、ブロックライン(aj)の値を決定するために使用
される。
するために閾値を使用する。仮に、最適なオフセット(oj)のための誤差大きさが、閾
値未満であるならば、ライン(ci)は、ブロックライン(aj)の値を決定するために使
用される。仮に、最適なオフセット(oj)のための誤差大きさが、閾値以上であるなら
ば、(抽出された)ベース層信号は、ブロックライン(aj)の値を決定するために使用
される。
[方法5:別の予測パラメータ]
別の予測情報が、例えば、副ブロックの中のブロックの仕切りのために、方法1~3と
同様にして推論される。
別の予測情報が、例えば、副ブロックの中のブロックの仕切りのために、方法1~3と
同様にして推論される。
空間または品質のエンハンスメント層の画像のブロック(a)に対して、ベース層の画
像の対応するブロック(b)が決定される。それは、同じ画像領域をカバーする。
像の対応するブロック(b)が決定される。それは、同じ画像領域をカバーする。
エンハンスメント層のブロック(a)のための予測信号は、以下の方法を使用して形成
される。
1)予測信号は、テストされたパラメータのそれぞれの可能な値のために生成される。
2)最も良い予測モード(pbest)が、予測信号と復号化されたベース層ブロック(b
)との間の誤差大きさ(例えば、絶対差の合計)を最小にすることによって決定される。
3)ステップ2)で選択された予測(pbest)モードが、エンハンスメント層ブロック
(a)のための予測信号を生成するために使用される。
される。
1)予測信号は、テストされたパラメータのそれぞれの可能な値のために生成される。
2)最も良い予測モード(pbest)が、予測信号と復号化されたベース層ブロック(b
)との間の誤差大きさ(例えば、絶対差の合計)を最小にすることによって決定される。
3)ステップ2)で選択された予測(pbest)モードが、エンハンスメント層ブロック
(a)のための予測信号を生成するために使用される。
エンコーダとデコーダの両方が、可能な候補の中で最適な予測モードを選択して同じ予
測信号を生成するために、同じ予測ステップを実行できる。実際の予測モードは、符号化
映像ビットストリームの中で合図されない。
測信号を生成するために、同じ予測ステップを実行できる。実際の予測モードは、符号化
映像ビットストリームの中で合図されない。
予測方法の選択が、ビットストリームの中で合図されて、エントロピー符号化を使用し
て符号化される。階層的なブロック副分割構造の中で、この符号化方法は、あらゆる副レ
ベルの中で、または、符号化階層のサブ組のみに対して2者択一的に選択される。
て符号化される。階層的なブロック副分割構造の中で、この符号化方法は、あらゆる副レ
ベルの中で、または、符号化階層のサブ組のみに対して2者択一的に選択される。
以下の記述は、簡潔に、上の実施の形態のいくつかをまとめる。
[再構成されたベース層のサンプルを使用して、内部予測信号を生成するための多重方
法を有するエンハンスメント層符号化]
主な実施例:エンハンスメント層の中のブロックを符号化することに対して、再構成さ
れたベース層のサンプルを使用して内部予測信号を生成するための多重方法が、再構成さ
れたエンハンスメント層のサンプルだけに基づく予測信号を生成する方法に加えて、提供
される。
法を有するエンハンスメント層符号化]
主な実施例:エンハンスメント層の中のブロックを符号化することに対して、再構成さ
れたベース層のサンプルを使用して内部予測信号を生成するための多重方法が、再構成さ
れたエンハンスメント層のサンプルだけに基づく予測信号を生成する方法に加えて、提供
される。
副実施例:
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、エンハンスメント層予測信号として直接に使用される。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、空間内部予測信号に結合される。そこでは、空間内部予測が、隣接する
ブロックに対して差サンプルに基づいて得られる。差サンプルは、再構成されたエンハン
スメント層信号と(抽出された/フィルタにかけられた)再構成されたベース層信号との
差を表わす(実施例A参照)。
・多重方法は以下の方法を含む。(隣接する再構成されたエンハンスメント層のサンプ
ルを使用して得られた)従来の空間内部予測信号は、(抽出された/フィルタにかけられ
た)ベース層残留信号(ベース層変換係数の逆変換、または、ベース層再構成とベース層
予測の差)に結合される(実施例B参照)。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、空間内部予測信号に結合される。そこでは、空間内部予測が、隣接する
ブロックの再構成されたエンハンスメント層のサンプルに基づいて得られる。最終予測信
号が、異なる周波数成分が異なる重み付けを使用する方法で、空間予測信号とベース層予
測信号とに重み付けすることによって得られる(実施例C1参照)。
これは、例えば、以下のどれかによって実現される。
○ベース層予測信号を、ローパスフィルタによってフィルタにかけ、空間内部予測信
号を、ハイパスフィルタによってフィルタにかけ、得られたフィルタにかけられた信号を
加算すること(実施例C2参照)。
○ベース層予測信号とエンハンスメント層予測信号を変換し、得られた変換ブロック
を重ねる。そこでは、異なる重み付け係数が、異なる周波数位置に対して使用される(実
施例C3参照)。得られた変換ブロックは、逆変換され、エンハンスメント層予測信号と
して使用される。あるいは、得られた変換係数は、スケーリングされた送信された変換係
数レベルに追加され、次に、非ブロック化および内ループ過程の前に再構成されたブロッ
クを得るために、逆変換される(実施例C4参照)。
・再構成されたベース層信号を使用する方法に対して、以下のバージョンが使用される
。これは固定される、または、それは、系列レベル、画像レベル、スライスレベル、最も
大きい符号化ユニットレベル、符号化ユニットレベルで合図される。または、それは、別
の符号化パラメータに依存して作成される。
○非ブロック化および内ループ過程の前の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化の後で、内ループ過程の前の再構成されたベース層のサンプル(サン
プルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化および内ループ過程の後の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、または、多重内ル
ープ過程ステップの間の再構成されたベース層のサンプル(実施例D参照)。
・(抽出された/フィルタにかけられた)ベース層信号を使用する方法の多重バージョ
ンが使用される。これらのバージョンのために採用された、抽出された/フィルタにかけ
られたベース層信号が、使用された補間フィルタ(整数サンプル位置をフィルタにかける
補間フィルタを含む)の中で異なる。または、2番目のバージョンのために抽出された/
フィルタにかけられたベース層信号が、最初のバージョンのために抽出された/フィルタ
にかけられたベース層信号をフィルタにかけることによって得られる。異なるバージョン
の1つの選択が、系列レベル、画像レベル、スライスレベル、最も大きい符号化ユニット
レベル、符号化ユニットレベルで合図される。それは、対応する再構成されたベース層信
号、または、送信された符号化パラメータの特性から推論される(実施例E参照)。
・異なるフィルタが、再構成されたベース層信号(実施例E参照)およびベース層残留
信号(実施例F参照)を、抽出する/フィルタにかけるために使用される。
・残留信号がゼロであるベース層ブロックに対して、それは、ベース層から得られた別
の信号(例えば、再構成されたベース層ブロックのハイパスフィルタにかけられたバージ
ョン)に取り替えられる、(実施例G参照)。
・空間内部予測を使用するモードに対して、(特定の符号化順序による)エンハンスメ
ント層の中の利用できない隣接するサンプルが、抽出された/フィルタにかけられたベー
ス層信号の対応するサンプルに取り替えられる(実施例H参照)。
・空間内部予測を使用するモードに対して、内部予測モードの符号化が変更される。最
もありそうなモードのリストは、共同配置されたベース層信号の内部予測モードを含む。
・特定のバージョンにおいて、エンハンスメント層の画像は、2段階の過程の中で復号
化される。最初の段階では、予測のために、ベース層信号を使用するブロックだけ(隣接
するブロックを使用しない)が、または、中間予測信号が、復号化され、再構成される。
2番目の段階では、予測のための隣接するサンプルを使用する残留ブロックは、再構成さ
れる。2番目の段階で再構成されたブロックに対して、空間内部予測概念が拡張される(
実施例I参照)。既に再構成されたブロックの有用性に基づいて、現在のブロックの上側
や左側に隣接するサンプルだけではなく、下側や右側に隣接するサンプルも、空間内部予
測のために使用される。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、エンハンスメント層予測信号として直接に使用される。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、空間内部予測信号に結合される。そこでは、空間内部予測が、隣接する
ブロックに対して差サンプルに基づいて得られる。差サンプルは、再構成されたエンハン
スメント層信号と(抽出された/フィルタにかけられた)再構成されたベース層信号との
差を表わす(実施例A参照)。
・多重方法は以下の方法を含む。(隣接する再構成されたエンハンスメント層のサンプ
ルを使用して得られた)従来の空間内部予測信号は、(抽出された/フィルタにかけられ
た)ベース層残留信号(ベース層変換係数の逆変換、または、ベース層再構成とベース層
予測の差)に結合される(実施例B参照)。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、空間内部予測信号に結合される。そこでは、空間内部予測が、隣接する
ブロックの再構成されたエンハンスメント層のサンプルに基づいて得られる。最終予測信
号が、異なる周波数成分が異なる重み付けを使用する方法で、空間予測信号とベース層予
測信号とに重み付けすることによって得られる(実施例C1参照)。
これは、例えば、以下のどれかによって実現される。
○ベース層予測信号を、ローパスフィルタによってフィルタにかけ、空間内部予測信
号を、ハイパスフィルタによってフィルタにかけ、得られたフィルタにかけられた信号を
加算すること(実施例C2参照)。
○ベース層予測信号とエンハンスメント層予測信号を変換し、得られた変換ブロック
を重ねる。そこでは、異なる重み付け係数が、異なる周波数位置に対して使用される(実
施例C3参照)。得られた変換ブロックは、逆変換され、エンハンスメント層予測信号と
して使用される。あるいは、得られた変換係数は、スケーリングされた送信された変換係
数レベルに追加され、次に、非ブロック化および内ループ過程の前に再構成されたブロッ
クを得るために、逆変換される(実施例C4参照)。
・再構成されたベース層信号を使用する方法に対して、以下のバージョンが使用される
。これは固定される、または、それは、系列レベル、画像レベル、スライスレベル、最も
大きい符号化ユニットレベル、符号化ユニットレベルで合図される。または、それは、別
の符号化パラメータに依存して作成される。
○非ブロック化および内ループ過程の前の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化の後で、内ループ過程の前の再構成されたベース層のサンプル(サン
プルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化および内ループ過程の後の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、または、多重内ル
ープ過程ステップの間の再構成されたベース層のサンプル(実施例D参照)。
・(抽出された/フィルタにかけられた)ベース層信号を使用する方法の多重バージョ
ンが使用される。これらのバージョンのために採用された、抽出された/フィルタにかけ
られたベース層信号が、使用された補間フィルタ(整数サンプル位置をフィルタにかける
補間フィルタを含む)の中で異なる。または、2番目のバージョンのために抽出された/
フィルタにかけられたベース層信号が、最初のバージョンのために抽出された/フィルタ
にかけられたベース層信号をフィルタにかけることによって得られる。異なるバージョン
の1つの選択が、系列レベル、画像レベル、スライスレベル、最も大きい符号化ユニット
レベル、符号化ユニットレベルで合図される。それは、対応する再構成されたベース層信
号、または、送信された符号化パラメータの特性から推論される(実施例E参照)。
・異なるフィルタが、再構成されたベース層信号(実施例E参照)およびベース層残留
信号(実施例F参照)を、抽出する/フィルタにかけるために使用される。
・残留信号がゼロであるベース層ブロックに対して、それは、ベース層から得られた別
の信号(例えば、再構成されたベース層ブロックのハイパスフィルタにかけられたバージ
ョン)に取り替えられる、(実施例G参照)。
・空間内部予測を使用するモードに対して、(特定の符号化順序による)エンハンスメ
ント層の中の利用できない隣接するサンプルが、抽出された/フィルタにかけられたベー
ス層信号の対応するサンプルに取り替えられる(実施例H参照)。
・空間内部予測を使用するモードに対して、内部予測モードの符号化が変更される。最
もありそうなモードのリストは、共同配置されたベース層信号の内部予測モードを含む。
・特定のバージョンにおいて、エンハンスメント層の画像は、2段階の過程の中で復号
化される。最初の段階では、予測のために、ベース層信号を使用するブロックだけ(隣接
するブロックを使用しない)が、または、中間予測信号が、復号化され、再構成される。
2番目の段階では、予測のための隣接するサンプルを使用する残留ブロックは、再構成さ
れる。2番目の段階で再構成されたブロックに対して、空間内部予測概念が拡張される(
実施例I参照)。既に再構成されたブロックの有用性に基づいて、現在のブロックの上側
や左側に隣接するサンプルだけではなく、下側や右側に隣接するサンプルも、空間内部予
測のために使用される。
[再構成されたベース層のサンプルを使用して、中間予測信号を発生させるための多重
方法を有するエンハンスメント層符号化]
主な実施例:エンハンスメント層の中のブロックを符号化することに対して、再構成さ
れたベース層のサンプルを使用して、中間予測信号を発生させるための多重方法が、再構
成されたエンハンスメント層のサンプルだけに基づいて予測信号を発生させる方法に追加
して提供される。
方法を有するエンハンスメント層符号化]
主な実施例:エンハンスメント層の中のブロックを符号化することに対して、再構成さ
れたベース層のサンプルを使用して、中間予測信号を発生させるための多重方法が、再構
成されたエンハンスメント層のサンプルだけに基づいて予測信号を発生させる方法に追加
して提供される。
副実施例:
・多重方法は以下の方法を含む。(既に再構成されたエンハンスメント層の画像の作動
補償された補間によって得られる)従来の中間予測信号は、(抽出された/フィルタにか
けられた)ベース層残留信号(ベース層変換係数の逆変換、または、ベース層再構成とベ
ース層予測との間の差)に結合される。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、作動補償予測信号に結合される。そこでは、作動補償予測信号が、作動
補償差画像によって得られる。差画像は、引用画像に対して、再構成されたエンハンスメ
ント層信号と(抽出された/フィルタにかけられた)再構成されたベース層信号との間の
差を表わす(実施例J参照)。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、中間予測信号に結合される。そこでは、中間予測が、再構成されたエン
ハンスメント層の画像を使用して、作動補償予測によって得られる。最終予測信号が、異
なる周波数成分が異なる重み付け付けを使用する方法で、中間予測信号およびベース層予
測信号を重み付けすることによって得られる(実施例C参照)。
これは、例えば、以下のどれかによって実現できる。
○ローパスフィルタでベース層予測信号をフィルタにかけ、ハイパスフィルタで中間
予測信号をフィルタにかけ、得られたフィルタにかけられた信号を加算すること。
○ベース層予測信号および中間予測信号を変換し、得られた変換ブロックを重ねる。
そこでは、異なる重み付け係数が、異なる周波数位置に対して使用される。得られた変換
ブロックは、非ブロック化および内ループ過程の前に再構成されたブロックを得るために
、逆変換され、エンハンスメント層予測信号として使用される、あるいは、得られた変換
係数が、スケーリングされた送信された変換係数レベルに追加され、次に、逆変換される
。
・再構成されたベース層信号を使用する方法に対して、以下のバージョンが使用される
。これが固定される、または、それが、系列レベル、画像レベル、スライスレベル、最も
大きい符号化ユニットレベル、符号化ユニットレベルで合図される。または、それが、別
の符号化パラメータに依存して作成される。
○非ブロック化および内ループ過程の前の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化の後で、内ループ過程の前の再構成されたベース層のサンプル(サン
プルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化および内ループ過程の後の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、または、多重内ル
ープ過程ステップの間の再構成されたベース層のサンプル(実施例D参照)。
・残留信号がゼロであるベース層ブロックに対して、それは、ベース層から得られた別
の信号(例えば、再構成されたベース層ブロックのハイパスフィルタにかけられたバージ
ョン)に取り替えられる、(実施例G参照)。
・(抽出された/フィルタにかけられた)ベース層信号を使用する方法の多重バージョ
ンが使用される。これらのバージョンのために採用された、抽出された/フィルタにかけ
られたベース層信号が、使用された補間フィルタ(整数サンプル位置をフィルタにかける
補間フィルタを含む)の中で異なる。または、2番目のバージョンのために抽出された/
フィルタにかけられたベース層信号が、最初のバージョンのために抽出された/フィルタ
にかけられたベース層信号をフィルタにかけることによって得られる。異なるバージョン
の1つの選択が、系列レベル、画像レベル、スライスレベル、最も大きい符号化ユニット
レベル、符号化ユニットレベルで合図される。それは、対応する再構成されたベース層信
号、または、送信された符号化パラメータの特性から推論される(実施例E参照)。
・異なるフィルタが、再構成されたベース層信号(実施例E参照)およびベース層残留
信号(実施例F参照)を、抽出する/フィルタにかけるために使用される。
・差画像(エンハンスメント層再構成と、抽出された/フィルタにかけられたベース層
信号との間の差)の作動補償予測に対して(実施例J参照)、異なる補間フィルタが、再
構成された画像の作動補償予測に対してより使用される。
・差画像(エンハンスメント層再構成と、抽出された/フィルタにかけられたベース層
信号との間の差)の作動補償予測に対して(実施例J参照)、補間フィルタが、差分画像
の中の対応する領域の特性に基づいて(または、符号化パラメータに基づいて、または、
ビットストリームの中で送信された情報に基づいて)選択される。
・多重方法は以下の方法を含む。(既に再構成されたエンハンスメント層の画像の作動
補償された補間によって得られる)従来の中間予測信号は、(抽出された/フィルタにか
けられた)ベース層残留信号(ベース層変換係数の逆変換、または、ベース層再構成とベ
ース層予測との間の差)に結合される。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、作動補償予測信号に結合される。そこでは、作動補償予測信号が、作動
補償差画像によって得られる。差画像は、引用画像に対して、再構成されたエンハンスメ
ント層信号と(抽出された/フィルタにかけられた)再構成されたベース層信号との間の
差を表わす(実施例J参照)。
・多重方法は以下の方法を含む。(抽出された/フィルタにかけられた)再構成された
ベース層信号は、中間予測信号に結合される。そこでは、中間予測が、再構成されたエン
ハンスメント層の画像を使用して、作動補償予測によって得られる。最終予測信号が、異
なる周波数成分が異なる重み付け付けを使用する方法で、中間予測信号およびベース層予
測信号を重み付けすることによって得られる(実施例C参照)。
これは、例えば、以下のどれかによって実現できる。
○ローパスフィルタでベース層予測信号をフィルタにかけ、ハイパスフィルタで中間
予測信号をフィルタにかけ、得られたフィルタにかけられた信号を加算すること。
○ベース層予測信号および中間予測信号を変換し、得られた変換ブロックを重ねる。
そこでは、異なる重み付け係数が、異なる周波数位置に対して使用される。得られた変換
ブロックは、非ブロック化および内ループ過程の前に再構成されたブロックを得るために
、逆変換され、エンハンスメント層予測信号として使用される、あるいは、得られた変換
係数が、スケーリングされた送信された変換係数レベルに追加され、次に、逆変換される
。
・再構成されたベース層信号を使用する方法に対して、以下のバージョンが使用される
。これが固定される、または、それが、系列レベル、画像レベル、スライスレベル、最も
大きい符号化ユニットレベル、符号化ユニットレベルで合図される。または、それが、別
の符号化パラメータに依存して作成される。
○非ブロック化および内ループ過程の前の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化の後で、内ループ過程の前の再構成されたベース層のサンプル(サン
プルとして、適応型オフセットフィルタまたは適応型ループフィルタ)。
○非ブロック化および内ループ過程の後の再構成されたベース層のサンプル(サンプ
ルとして、適応型オフセットフィルタまたは適応型ループフィルタ)、または、多重内ル
ープ過程ステップの間の再構成されたベース層のサンプル(実施例D参照)。
・残留信号がゼロであるベース層ブロックに対して、それは、ベース層から得られた別
の信号(例えば、再構成されたベース層ブロックのハイパスフィルタにかけられたバージ
ョン)に取り替えられる、(実施例G参照)。
・(抽出された/フィルタにかけられた)ベース層信号を使用する方法の多重バージョ
ンが使用される。これらのバージョンのために採用された、抽出された/フィルタにかけ
られたベース層信号が、使用された補間フィルタ(整数サンプル位置をフィルタにかける
補間フィルタを含む)の中で異なる。または、2番目のバージョンのために抽出された/
フィルタにかけられたベース層信号が、最初のバージョンのために抽出された/フィルタ
にかけられたベース層信号をフィルタにかけることによって得られる。異なるバージョン
の1つの選択が、系列レベル、画像レベル、スライスレベル、最も大きい符号化ユニット
レベル、符号化ユニットレベルで合図される。それは、対応する再構成されたベース層信
号、または、送信された符号化パラメータの特性から推論される(実施例E参照)。
・異なるフィルタが、再構成されたベース層信号(実施例E参照)およびベース層残留
信号(実施例F参照)を、抽出する/フィルタにかけるために使用される。
・差画像(エンハンスメント層再構成と、抽出された/フィルタにかけられたベース層
信号との間の差)の作動補償予測に対して(実施例J参照)、異なる補間フィルタが、再
構成された画像の作動補償予測に対してより使用される。
・差画像(エンハンスメント層再構成と、抽出された/フィルタにかけられたベース層
信号との間の差)の作動補償予測に対して(実施例J参照)、補間フィルタが、差分画像
の中の対応する領域の特性に基づいて(または、符号化パラメータに基づいて、または、
ビットストリームの中で送信された情報に基づいて)選択される。
[エンハンスメント層作動パラメータ符号化]
主な実施例:エンハンスメント層作動パラメータ符号化のために、複数のエンハンスメ
ント層予測器と、ベース層から得られた少なくとも1つの予測器との使用。
主な実施例:エンハンスメント層作動パラメータ符号化のために、複数のエンハンスメ
ント層予測器と、ベース層から得られた少なくとも1つの予測器との使用。
副実施例:
・(スケーリングされた)ベース層作動ベクトルを、作動ベクトル予測器リストに追加
すること(実施例K参照)。
○現在のブロックの中央位置の共同配置されたサンプルをカバーするベース層ブロッ
クの使用(可能な別の派生)。
○解像度比率に従うスケール作動ベクトル。
・共同配置されたベース層ブロックの作動データを融合候補リストに加えること(実施
例K参照)。
○現在のブロックの中央位置の共同配置されたサンプルをカバーするベース層ブロッ
クの使用(可能な別の派生)。
○解像度比率に従うスケール作動ベクトル。
○仮に、ベース層の中で「融合_旗」が1と等しいならば、加算しない。
・ベース層融合情報に基づく融合候補リストの再順序付け(実施例L参照)
○仮に、共同配置されたベース層ブロックが、特定の候補に融合されるならば、対応
するエンハンスメント層候補が、エンハンスメント層融合候補リストの中で、最初のエン
トリーとして使用される。
・ベース層作動予測器情報に基づく作動予測器候補リストの再順序付け(実施例L参照
)
○仮に、共同配置されたベース層ブロックが、特定の作動ベクトル予測器を使用する
ならば、対応するエンハンスメント層作動ベクトル予測器が、エンハンスメント層作動ベ
クトル予測器候補リストの中で、最初のエントリーとして使用される。
・融合インデックスの派生(すなわち、現在のブロックが融合される候補)は、共同配
置されたブロックの中のベース層情報に基づく(実施例M参照)。例として、仮に、ベー
ス層ブロックが、特定の隣接するブロックに融合され、そして、それが、エンハンスメン
ト層ブロックも融合するビットストリームの中で合図されるならば、融合インデックスは
、全く送信されないけれども、代わりに、エンハンスメント層ブロックが、共同配置され
たベース層ブロックとして、同じ隣接するブロック(しかし、エンハンスメント層の中の
)に融合される。
・(スケーリングされた)ベース層作動ベクトルを、作動ベクトル予測器リストに追加
すること(実施例K参照)。
○現在のブロックの中央位置の共同配置されたサンプルをカバーするベース層ブロッ
クの使用(可能な別の派生)。
○解像度比率に従うスケール作動ベクトル。
・共同配置されたベース層ブロックの作動データを融合候補リストに加えること(実施
例K参照)。
○現在のブロックの中央位置の共同配置されたサンプルをカバーするベース層ブロッ
クの使用(可能な別の派生)。
○解像度比率に従うスケール作動ベクトル。
○仮に、ベース層の中で「融合_旗」が1と等しいならば、加算しない。
・ベース層融合情報に基づく融合候補リストの再順序付け(実施例L参照)
○仮に、共同配置されたベース層ブロックが、特定の候補に融合されるならば、対応
するエンハンスメント層候補が、エンハンスメント層融合候補リストの中で、最初のエン
トリーとして使用される。
・ベース層作動予測器情報に基づく作動予測器候補リストの再順序付け(実施例L参照
)
○仮に、共同配置されたベース層ブロックが、特定の作動ベクトル予測器を使用する
ならば、対応するエンハンスメント層作動ベクトル予測器が、エンハンスメント層作動ベ
クトル予測器候補リストの中で、最初のエントリーとして使用される。
・融合インデックスの派生(すなわち、現在のブロックが融合される候補)は、共同配
置されたブロックの中のベース層情報に基づく(実施例M参照)。例として、仮に、ベー
ス層ブロックが、特定の隣接するブロックに融合され、そして、それが、エンハンスメン
ト層ブロックも融合するビットストリームの中で合図されるならば、融合インデックスは
、全く送信されないけれども、代わりに、エンハンスメント層ブロックが、共同配置され
たベース層ブロックとして、同じ隣接するブロック(しかし、エンハンスメント層の中の
)に融合される。
[エンハンスメント層仕切りと作動パラメータ推論]
主な実施例:ベース層仕切りおよび作動パラメータに基づいた、エンハンスメント層仕
切りおよび作動パラメータの推論(たぶん、この実施例を副実施例のどれかに結合するこ
とが要求される)。
主な実施例:ベース層仕切りおよび作動パラメータに基づいた、エンハンスメント層仕
切りおよび作動パラメータの推論(たぶん、この実施例を副実施例のどれかに結合するこ
とが要求される)。
副実施例:
・共同配置されたベース層作動データに基づくエンハンスメント層のN×M副ブロック
のための作動パラメータを得ること。同じ得られたパラメータ(または、小さい差を有す
るパラメータ)を有するブロックを、より大きいブロックに纏めること。予測と符号化ユ
ニットを決定すること。(実施例T参照)
・作動パラメータは、作動仮説、引用インデックスリスト、作動ベクトル、作動ベクト
ル予測器識別子、融合識別子の数を含む。
・エンハンスメント層予測信号を発生させるための多重方法の1つに合図すること。そ
のような方法は以下を含む。
○得られた作動パラメータおよび再構成されたエンハンスメント層の引用画像を使用
する作動補償。
○(a)現在の画像のための(抽出された/フィルタにかけられた)ベース層再構成
と、(b)得られた作動パラメータを使用する作動補償信号と、再構成されたエンハンス
メント層の画像から、(抽出された/フィルタにかけられた)ベース層再構成を引き算す
ることによって発生するエンハンスメント層の引用画像とを結合すること。
○(a)現在の画像のための(抽出された/フィルタにかけられた)ベース層残留(
再構成された信号と予測との間の差、または、符号化された変換係数値の逆変換)と、(
b)得られた作動パラメータを使用する作動補償信号と、再構成されたエンハンスメント
層の引用画像とを結合すること。
・仮に、ベース層の中の共同配置されたブロックが、内部符号化されているならば、対
応するエンハンスメント層M×Nブロック(または、CU)も、また、内部符号化される
。そこでは、内部予測信号が、ベース層情報を使用して得られる(実施例U参照)。例え
ば、
○対応するベース層再構成の(抽出された/フィルタにかけられた)バージョンは、
内部予測信号として使用される(実施例U参照)。
○内部予測モードは、ベース層の中で使用された内部予測モードに基づいて得られる
。そして、この内部予測モードは、エンハンスメント層の中の空間内部予測のために使用
される。
・仮に、M×Nエンハンスメント層ブロック(副ブロック)のための共同配置されたベ
ース層ブロックが、以前に符号化されたベース層ブロックに融合される(または、同じ作
動パラメータを有する)ならば、M×Nエンハンスメント層(副)ブロックも、また、ベ
ース層の中で融合するために使用されるベース層ブロックに対応するエンハンスメント層
ブロックに融合される(すなわち、作動パラメータは、対応するエンハンスメント層ブロ
ックからコピーされる)(実施例M参照)。
・共同配置されたベース層作動データに基づくエンハンスメント層のN×M副ブロック
のための作動パラメータを得ること。同じ得られたパラメータ(または、小さい差を有す
るパラメータ)を有するブロックを、より大きいブロックに纏めること。予測と符号化ユ
ニットを決定すること。(実施例T参照)
・作動パラメータは、作動仮説、引用インデックスリスト、作動ベクトル、作動ベクト
ル予測器識別子、融合識別子の数を含む。
・エンハンスメント層予測信号を発生させるための多重方法の1つに合図すること。そ
のような方法は以下を含む。
○得られた作動パラメータおよび再構成されたエンハンスメント層の引用画像を使用
する作動補償。
○(a)現在の画像のための(抽出された/フィルタにかけられた)ベース層再構成
と、(b)得られた作動パラメータを使用する作動補償信号と、再構成されたエンハンス
メント層の画像から、(抽出された/フィルタにかけられた)ベース層再構成を引き算す
ることによって発生するエンハンスメント層の引用画像とを結合すること。
○(a)現在の画像のための(抽出された/フィルタにかけられた)ベース層残留(
再構成された信号と予測との間の差、または、符号化された変換係数値の逆変換)と、(
b)得られた作動パラメータを使用する作動補償信号と、再構成されたエンハンスメント
層の引用画像とを結合すること。
・仮に、ベース層の中の共同配置されたブロックが、内部符号化されているならば、対
応するエンハンスメント層M×Nブロック(または、CU)も、また、内部符号化される
。そこでは、内部予測信号が、ベース層情報を使用して得られる(実施例U参照)。例え
ば、
○対応するベース層再構成の(抽出された/フィルタにかけられた)バージョンは、
内部予測信号として使用される(実施例U参照)。
○内部予測モードは、ベース層の中で使用された内部予測モードに基づいて得られる
。そして、この内部予測モードは、エンハンスメント層の中の空間内部予測のために使用
される。
・仮に、M×Nエンハンスメント層ブロック(副ブロック)のための共同配置されたベ
ース層ブロックが、以前に符号化されたベース層ブロックに融合される(または、同じ作
動パラメータを有する)ならば、M×Nエンハンスメント層(副)ブロックも、また、ベ
ース層の中で融合するために使用されるベース層ブロックに対応するエンハンスメント層
ブロックに融合される(すなわち、作動パラメータは、対応するエンハンスメント層ブロ
ックからコピーされる)(実施例M参照)。
[変換係数レベルの符号化/文脈モデル化]
主な実施例:異なる走査パターンを使用して、変換係数を符号化すること。エンハンスメ
ント層に対して、符号化モードおよび/またはベース層データに基づいて文脈をモデル化
すること、そして、文脈モードに対して異なる初期化をすること。
主な実施例:異なる走査パターンを使用して、変換係数を符号化すること。エンハンスメ
ント層に対して、符号化モードおよび/またはベース層データに基づいて文脈をモデル化
すること、そして、文脈モードに対して異なる初期化をすること。
副実施例:
・1つ以上の追加走査パターン、例えば、水平で垂直な走査パターンを導入すること。
追加走査パターンのために副ブロックを再定義すること。4×4副ブロックの代わりに、
例えば16×1または1×16副ブロックが使用される。または、8×2や8×2副ブロ
ックが使用される。追加走査パターンは、特定のサイズ、例えば8×8または16×16
より大きいまたは等しいブロックに対してのみ導入される(実施例V参照)。
・(仮に、符号化されたブロック旗が1と等しいならば、)選択された走査パターンは
、ビットストリームの中で合図される(実施例N参照)。対応する構文要素に合図するた
めに、固定文脈が使用される。または、対応する構文要素のための文脈派生は、以下のど
れかに依存できる。
○共同配置された再構成されたベース層信号または再構成されたベース層残留の勾配
。または、ベース層信号の中で検出されたエッジ。
○共同配置されたベース層ブロックの中の変換係数分布。
・選択された走査は、共同配置されたベース層信号の特性に基づいて、ベース層信号(
どんな追加データも送信されることなく)から直接に得られる(実施例N参照)。
○共同配置された再構成されたベース層信号または再構成されたベース層残留の勾配
。または、ベース層信号の中で検出されたエッジ。
○共同配置されたベース層ブロックの中の変換係数分布。
・異なる走査が、変換係数がエンコーダ側で量子化の後に再順序付けされ、かつ、従来
の符号化が使用される方法で実現される。デコーダ側では、変換係数は、従来通り復号化
され、スケーリングおよび逆変換前に(または、スケーリング後および逆変換前に)、再
順序付けされる。
・重要な旗(単一の変換係数のための副グループ旗および/または重要な旗)を符号化
するために、以下の変更が、エンハンスメント層の中で使用される。
○分離文脈モデルが、ベース層情報を使用する符号化モードの全てまたは副組のため
に使用される。また、ベース層情報を有する異なるモードに対して、異なる文脈モデルを
使用することも可能である。
○文脈モデル化は、共同配置されたベース層ブロックのデータ(例えば、特定の周波
数位置のための重要な変換係数の数)に依存できる(実施例O参照)。
○符号化されるべき係数の空間的近傍の中の既に符号化された重要な変換係数レベル
の数、および、同じ周波数位置の共同配置されたベース層信号の中の重要な変換係数の数
の両方を評価した一般化されたテンプレートが使用される(実施例O参照)。
・最後の重要な走査位置を符号化するために、以下の変更がエンハンスメント層の中で
使用される。
○分離文脈モデルが、ベース層情報を使用する符号化モードの全てまたは副組のため
に使用される。また、ベース層情報を有する異なるモードに対して、異なる文脈モデルを
使用することも可能である(実施例P参照)。
○文脈モデル化は、共同配置されたベース層ブロックの中のデータに依存できる(例
えば、ベース層の中の変換係数分布、ベース層の勾配情報、共同配置されたベース層ブロ
ックの中の最後の走査位置)。
○最後の走査位置は、最後のベース層走査位置に対する差として符号化される(実施
例S参照)。
・ベース層およびエンハンスメント層のための異なる文脈初期化テーブルの使用方法。
・1つ以上の追加走査パターン、例えば、水平で垂直な走査パターンを導入すること。
追加走査パターンのために副ブロックを再定義すること。4×4副ブロックの代わりに、
例えば16×1または1×16副ブロックが使用される。または、8×2や8×2副ブロ
ックが使用される。追加走査パターンは、特定のサイズ、例えば8×8または16×16
より大きいまたは等しいブロックに対してのみ導入される(実施例V参照)。
・(仮に、符号化されたブロック旗が1と等しいならば、)選択された走査パターンは
、ビットストリームの中で合図される(実施例N参照)。対応する構文要素に合図するた
めに、固定文脈が使用される。または、対応する構文要素のための文脈派生は、以下のど
れかに依存できる。
○共同配置された再構成されたベース層信号または再構成されたベース層残留の勾配
。または、ベース層信号の中で検出されたエッジ。
○共同配置されたベース層ブロックの中の変換係数分布。
・選択された走査は、共同配置されたベース層信号の特性に基づいて、ベース層信号(
どんな追加データも送信されることなく)から直接に得られる(実施例N参照)。
○共同配置された再構成されたベース層信号または再構成されたベース層残留の勾配
。または、ベース層信号の中で検出されたエッジ。
○共同配置されたベース層ブロックの中の変換係数分布。
・異なる走査が、変換係数がエンコーダ側で量子化の後に再順序付けされ、かつ、従来
の符号化が使用される方法で実現される。デコーダ側では、変換係数は、従来通り復号化
され、スケーリングおよび逆変換前に(または、スケーリング後および逆変換前に)、再
順序付けされる。
・重要な旗(単一の変換係数のための副グループ旗および/または重要な旗)を符号化
するために、以下の変更が、エンハンスメント層の中で使用される。
○分離文脈モデルが、ベース層情報を使用する符号化モードの全てまたは副組のため
に使用される。また、ベース層情報を有する異なるモードに対して、異なる文脈モデルを
使用することも可能である。
○文脈モデル化は、共同配置されたベース層ブロックのデータ(例えば、特定の周波
数位置のための重要な変換係数の数)に依存できる(実施例O参照)。
○符号化されるべき係数の空間的近傍の中の既に符号化された重要な変換係数レベル
の数、および、同じ周波数位置の共同配置されたベース層信号の中の重要な変換係数の数
の両方を評価した一般化されたテンプレートが使用される(実施例O参照)。
・最後の重要な走査位置を符号化するために、以下の変更がエンハンスメント層の中で
使用される。
○分離文脈モデルが、ベース層情報を使用する符号化モードの全てまたは副組のため
に使用される。また、ベース層情報を有する異なるモードに対して、異なる文脈モデルを
使用することも可能である(実施例P参照)。
○文脈モデル化は、共同配置されたベース層ブロックの中のデータに依存できる(例
えば、ベース層の中の変換係数分布、ベース層の勾配情報、共同配置されたベース層ブロ
ックの中の最後の走査位置)。
○最後の走査位置は、最後のベース層走査位置に対する差として符号化される(実施
例S参照)。
・ベース層およびエンハンスメント層のための異なる文脈初期化テーブルの使用方法。
[ベース層データを使用する、後方の適応エンハンスメント層の符号化]
主な実施例:エンハンスメント層符号化パラメータを得るためのベース層データの使用
。
主な実施例:エンハンスメント層符号化パラメータを得るためのベース層データの使用
。
副実施例:
・(潜在的に抽出される)ベース層再構成に基づいた融合候補を得ること。エンハンス
メント層の中では、融合の使用だけが合図される。しかし、実際には、現在のブロックを
融合するために使用される候補が、再構成されたベース層信号に基づいて得られる。従っ
て、全ての融合候補に対して、現在のエンハンスメント層ブロックのための(潜在的に抽
出される)ベース層信号と、(融合候補に作動パラメータを使用して得られた)対応する
予測信号との間の誤差の大きさが、全ての融合候補(または、その副組)に対して評価さ
れる。そして、最も小さい誤差の大きさに関係する融合候補が選択される。また、誤差の
大きさが、再構成されたベース層信号とベース層の引用画像とを使用して、ベース層の中
で計算される(実施例Q参照)。
・(潜在的に抽出される)ベース層再構成に基づいた融合候補を得ること。作動ベクト
ル差は、符号化されないけれども、再構成されたベース層に基づいて推論される。現在の
ブロックのために、作動ベクトル予測器を決定し、作動ベクトル予測器の周囲に位置する
定義された検索の組を評価すること。それぞれの検索位置に対して、現在のエンハンスメ
ント層ブロックのための(潜在的に抽出される)ベース層信号と、置き換えられた引用フ
レーム(置き換えは、検索位置によって与えられる)との間の誤差の大きさを決定するこ
と。最も小さい誤差の大きさをもたらす検索位置/作動ベクトルを選択すること。検索は
、いくつかの段階に分けられる。例えば、完全なペル検索が最初に行われる。続いて、半
分ペル検索が、完全なペルベクトルの周囲で行われる。続いて、4分の1ペル検索が、最
も良い完全な/半分ペルベクトルの周囲でおこなわれる。また、検索は、再構成されたベ
ース層信号とベース層の引用画像とを使用して、ベース層の中で行われる。見つけられた
作動ベクトルは、次に、ベース層とエンハンスメント層との間の解像度変化に従ってスケ
ーリングされる(実施例Q参照)。
・(潜在的に抽出される)ベース層再構成に基づいた内部予測モードを得ること。内部
予測モードは、符号化されないけれども、再構成されたベース層に基づいて推論される。
それぞれの可能な内部予測モード(または、その副組)に対して、(テストされた予測節
(ノード)を使用して、)現在のエンハンスメント層ブロックのための(潜在的に抽出さ
れる)ベース層信号と、内部予測信号との間の誤差の大きさを決定すること。最も小さい
誤差の大きさをもたらす予測モードを選択すること。また、誤差の大きさの計算は、ベー
ス層の中の再構成されたベース層信号と内部予測信号とを使用して、ベース層の中でされ
る。さらに、内部ブロックは、4×4ブロック(または、別のブロックサイズ)に分解で
きる。そして、各4×4ブロックに対して、分離内部予測モードが決定される(実施例Q
参照)。
・内部予測信号は、再構成されたベース層信号を有する境界サンプルの列の整合または
列の整合によって決定される。隣接するサンプルと現在のライン/列との間の移行を得る
ために、誤差の大きさは、隣接するサンプルの移行されたライン/列と再構成されたベー
ス層信号との間で計算される。そして、最も小さい誤差の大きさをもたらすシフトが、選
択される。隣接するサンプルとして、(抽出された)ベース層のサンプル、または、エン
ハンスメント層のサンプルが使用される。また、誤差の大きさが、ベース層の中で直接に
計算される(実施例W参照)。
・ブロック仕切りなどの別の符号化パラメータの派生のために、後方の適応手法を使用
すること。
・(潜在的に抽出される)ベース層再構成に基づいた融合候補を得ること。エンハンス
メント層の中では、融合の使用だけが合図される。しかし、実際には、現在のブロックを
融合するために使用される候補が、再構成されたベース層信号に基づいて得られる。従っ
て、全ての融合候補に対して、現在のエンハンスメント層ブロックのための(潜在的に抽
出される)ベース層信号と、(融合候補に作動パラメータを使用して得られた)対応する
予測信号との間の誤差の大きさが、全ての融合候補(または、その副組)に対して評価さ
れる。そして、最も小さい誤差の大きさに関係する融合候補が選択される。また、誤差の
大きさが、再構成されたベース層信号とベース層の引用画像とを使用して、ベース層の中
で計算される(実施例Q参照)。
・(潜在的に抽出される)ベース層再構成に基づいた融合候補を得ること。作動ベクト
ル差は、符号化されないけれども、再構成されたベース層に基づいて推論される。現在の
ブロックのために、作動ベクトル予測器を決定し、作動ベクトル予測器の周囲に位置する
定義された検索の組を評価すること。それぞれの検索位置に対して、現在のエンハンスメ
ント層ブロックのための(潜在的に抽出される)ベース層信号と、置き換えられた引用フ
レーム(置き換えは、検索位置によって与えられる)との間の誤差の大きさを決定するこ
と。最も小さい誤差の大きさをもたらす検索位置/作動ベクトルを選択すること。検索は
、いくつかの段階に分けられる。例えば、完全なペル検索が最初に行われる。続いて、半
分ペル検索が、完全なペルベクトルの周囲で行われる。続いて、4分の1ペル検索が、最
も良い完全な/半分ペルベクトルの周囲でおこなわれる。また、検索は、再構成されたベ
ース層信号とベース層の引用画像とを使用して、ベース層の中で行われる。見つけられた
作動ベクトルは、次に、ベース層とエンハンスメント層との間の解像度変化に従ってスケ
ーリングされる(実施例Q参照)。
・(潜在的に抽出される)ベース層再構成に基づいた内部予測モードを得ること。内部
予測モードは、符号化されないけれども、再構成されたベース層に基づいて推論される。
それぞれの可能な内部予測モード(または、その副組)に対して、(テストされた予測節
(ノード)を使用して、)現在のエンハンスメント層ブロックのための(潜在的に抽出さ
れる)ベース層信号と、内部予測信号との間の誤差の大きさを決定すること。最も小さい
誤差の大きさをもたらす予測モードを選択すること。また、誤差の大きさの計算は、ベー
ス層の中の再構成されたベース層信号と内部予測信号とを使用して、ベース層の中でされ
る。さらに、内部ブロックは、4×4ブロック(または、別のブロックサイズ)に分解で
きる。そして、各4×4ブロックに対して、分離内部予測モードが決定される(実施例Q
参照)。
・内部予測信号は、再構成されたベース層信号を有する境界サンプルの列の整合または
列の整合によって決定される。隣接するサンプルと現在のライン/列との間の移行を得る
ために、誤差の大きさは、隣接するサンプルの移行されたライン/列と再構成されたベー
ス層信号との間で計算される。そして、最も小さい誤差の大きさをもたらすシフトが、選
択される。隣接するサンプルとして、(抽出された)ベース層のサンプル、または、エン
ハンスメント層のサンプルが使用される。また、誤差の大きさが、ベース層の中で直接に
計算される(実施例W参照)。
・ブロック仕切りなどの別の符号化パラメータの派生のために、後方の適応手法を使用
すること。
前記実施の形態の更なる簡潔な概要が、以下に提示される。特に、前記実施の形態が説
明される。
明される。
A1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200a,20
0b,200c)に解像度または品質改良を受け(220)させ、
エンハンスメント層信号の既に再構成された部分(400aまたは400b)と中間層
予測信号(380)との間の差信号を計算(260)し、
空間内部予測信号を得るために、現在再構成されるべきエンハンスメント層信号(36
0)の部分に共同配置された第1の部分(440、図46に例えて)で、空間的に前記第
1の部分に隣接し、かつ、エンハンスメント層信号(360)の既に再構成された部分に
属する、差信号の第2の部分(460)から差信号を空間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)と空
間内部予測信号とを結合(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(320,580,340,300,280)することを含む、よう
に構成されている。
実施例A1に従って、ベース層信号は、例えば、ベース層残留信号640/480が関
係する限り、変換復号化を有する前述したブロックに基づいた予測方法で、符号化データ
ストリーム6または副ストリーム6aから、ベース層復号化ステージ80によってそれぞ
れ再構成される。しかし、別の代替の再構成も可能である。
エンハンスメント層復号化ステージ60によるエンハンスメント層信号360の再構成
に関する限り、再構成されたベース層信号200a,200bまたは200cが受ける解
像度または品質の改良は、例えば、解像度の改良の場合には抽出、または、品質の改良の
場合にはコピー、または、ビット深さの改良の場合にはnビットからmビットへのトーン
写像(m>n)を意味する。
差信号の計算は、画素的になされる。すなわち、一方にエンハンスメント層信号および
他方に予測信号380が共同配置された画素が、互いからを引き算される。そして、これ
は画素位置毎になされる。
差信号の空間予測は、符号化データストリーム6の中で、または、副ストリーム6bの
中で、内部予測方向のような内部予測パラメータを送信して、そして、エンハンスメント
層信号の現在の部分の中のこの内部予測方向に沿って、現在再構成されるべきエンハンス
メント層信号360の部分に接する既に再構成された画素をコピー/補間するような、何
らかの方法によってなされる。組み合わせは、周波数領域の中の寄与を異なって重み付け
する組み合わせのように、加算、重み付けされた合計または更に精巧な組み合わせを意味
する。
エンハンスメント層予測信号420を使用するエンハンスメント層信号360の予測再
構成は、図に示されているように、エンハンスメント層残留信号540のエントロピー復
号化および逆変換と、エンハンスメント層予測信号420および後者540の組み合わせ
340とを意味する。
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200a,20
0b,200c)に解像度または品質改良を受け(220)させ、
エンハンスメント層信号の既に再構成された部分(400aまたは400b)と中間層
予測信号(380)との間の差信号を計算(260)し、
空間内部予測信号を得るために、現在再構成されるべきエンハンスメント層信号(36
0)の部分に共同配置された第1の部分(440、図46に例えて)で、空間的に前記第
1の部分に隣接し、かつ、エンハンスメント層信号(360)の既に再構成された部分に
属する、差信号の第2の部分(460)から差信号を空間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)と空
間内部予測信号とを結合(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(320,580,340,300,280)することを含む、よう
に構成されている。
実施例A1に従って、ベース層信号は、例えば、ベース層残留信号640/480が関
係する限り、変換復号化を有する前述したブロックに基づいた予測方法で、符号化データ
ストリーム6または副ストリーム6aから、ベース層復号化ステージ80によってそれぞ
れ再構成される。しかし、別の代替の再構成も可能である。
エンハンスメント層復号化ステージ60によるエンハンスメント層信号360の再構成
に関する限り、再構成されたベース層信号200a,200bまたは200cが受ける解
像度または品質の改良は、例えば、解像度の改良の場合には抽出、または、品質の改良の
場合にはコピー、または、ビット深さの改良の場合にはnビットからmビットへのトーン
写像(m>n)を意味する。
差信号の計算は、画素的になされる。すなわち、一方にエンハンスメント層信号および
他方に予測信号380が共同配置された画素が、互いからを引き算される。そして、これ
は画素位置毎になされる。
差信号の空間予測は、符号化データストリーム6の中で、または、副ストリーム6bの
中で、内部予測方向のような内部予測パラメータを送信して、そして、エンハンスメント
層信号の現在の部分の中のこの内部予測方向に沿って、現在再構成されるべきエンハンス
メント層信号360の部分に接する既に再構成された画素をコピー/補間するような、何
らかの方法によってなされる。組み合わせは、周波数領域の中の寄与を異なって重み付け
する組み合わせのように、加算、重み付けされた合計または更に精巧な組み合わせを意味
する。
エンハンスメント層予測信号420を使用するエンハンスメント層信号360の予測再
構成は、図に示されているように、エンハンスメント層残留信号540のエントロピー復
号化および逆変換と、エンハンスメント層予測信号420および後者540の組み合わせ
340とを意味する。
B1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層残留信号(480)を復号化(100)し
、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させ、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層残留予測信号とエンハン
スメント層内部予測信号とを結合(260)して、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)することを含む、ように構成されている。
符号化データストリームからのベース層残留信号の復号化は、図に示すように、エント
ロピー復号化と逆変換とを使用して実行される。さらに、スケーラブルビデオデコーダは
、任意に、ベース層予測信号660を得て、この信号とベース層残留信号480とを結合
することによって、予測的に復号化することによって、ベース層信号自体の再構成を実行
する。ちょうど言及するように、これは単に任意である。
エンハンスメント層信号の再構成に関する限り、解像度または品質の改良が、実施例A
)に対して前記指示したように実行される。
また、エンハンスメント層信号の部分の空間的予測に関する限り、この空間的予測は、
異なる信号に関するA)に例示的に概説されているように実行される。組み合わせと予測
的再構成に関する限り、同様の注意は有効である。
しかしながら、実施例B)の中のベース層残留信号480が、ベース層残留信号480
の明らかに合図されたバージョンと等しいように制限されないということが言及される。
むしろ、スケーラブルビデオデコーダが、ベース層予測信号660を有するどんな再構成
されたベース層信号バージョン200も引き算すること、は可能である。その結果、フィ
ルタ120または140のようなフィルタ関数から食い止めている偏差によって明らかに
合図されたものから逸れるベース層残留信号480を得る。また、後者の状態は、ベース
層残留信号が中間層予測に関わる別の実施例に対して有効である。
符号化データストリーム(6)からベース層残留信号(480)を復号化(100)し
、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させ、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層残留予測信号とエンハン
スメント層内部予測信号とを結合(260)して、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)することを含む、ように構成されている。
符号化データストリームからのベース層残留信号の復号化は、図に示すように、エント
ロピー復号化と逆変換とを使用して実行される。さらに、スケーラブルビデオデコーダは
、任意に、ベース層予測信号660を得て、この信号とベース層残留信号480とを結合
することによって、予測的に復号化することによって、ベース層信号自体の再構成を実行
する。ちょうど言及するように、これは単に任意である。
エンハンスメント層信号の再構成に関する限り、解像度または品質の改良が、実施例A
)に対して前記指示したように実行される。
また、エンハンスメント層信号の部分の空間的予測に関する限り、この空間的予測は、
異なる信号に関するA)に例示的に概説されているように実行される。組み合わせと予測
的再構成に関する限り、同様の注意は有効である。
しかしながら、実施例B)の中のベース層残留信号480が、ベース層残留信号480
の明らかに合図されたバージョンと等しいように制限されないということが言及される。
むしろ、スケーラブルビデオデコーダが、ベース層予測信号660を有するどんな再構成
されたベース層信号バージョン200も引き算すること、は可能である。その結果、フィ
ルタ120または140のようなフィルタ関数から食い止めている偏差によって明らかに
合図されたものから逸れるベース層残留信号480を得る。また、後者の状態は、ベース
層残留信号が中間層予測に関わる別の実施例に対して有効である。
C1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に、解
像度または品質の改良を受け(220)させ、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分(「空間的」の場合は400a,b;「時間的」の場合は400a
,b,c)から現在再構成されるべきエンハンスメント層信号(360)の部分を空間的
または時間的に予測(260)し、
中間層予測信号とエンハンスメント層内部予測信号(380)がエンハンスメント層予
測信号(420)に寄与する重み付けが、異なる空間周波数成分に亘って変化させるよう
に、エンハンスメント層予測信号(420)を得るために、現在再構成されるべき部分で
、中間層予測信号とエンハンスメント層内部予測信号(380)との重み付け平均を形成
(260)して、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)することを含む、ように構成されている。
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に、解
像度または品質の改良を受け(220)させ、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分(「空間的」の場合は400a,b;「時間的」の場合は400a
,b,c)から現在再構成されるべきエンハンスメント層信号(360)の部分を空間的
または時間的に予測(260)し、
中間層予測信号とエンハンスメント層内部予測信号(380)がエンハンスメント層予
測信号(420)に寄与する重み付けが、異なる空間周波数成分に亘って変化させるよう
に、エンハンスメント層予測信号(420)を得るために、現在再構成されるべき部分で
、中間層予測信号とエンハンスメント層内部予測信号(380)との重み付け平均を形成
(260)して、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)することを含む、ように構成されている。
C2)ここで、重み付け平均の形成(260)は、現在再構成されるべき部分で、フィ
ルタがかけられた信号を得るために、ローパスフィルタで中間層予測信号(380)をフ
ィルタ(260)にかけ、かつ、ハイパスフィルタでエンハンスメント層内部予測信号を
フィルタ(260)にかけて、得られたフィルタにかけられた信号を合計することを含む
。
C3)ここで、重み付け平均の形成(260)は、現在再構成されるべき部分で、変換
係数を得るために、中間層予測信号とエンハンスメント層内部予測信号とを変換(260
)し、そして、重畳された変換係数を得るために、得られた変換係数に、異なる空間周波
数成分に対して異なる重み付け係数を使用して重畳(260)し、そして、エンハンスメ
ント層予測信号を得るために、重畳された変換係数を逆変換することを含む。
C4)ここで、エンハンスメント層予測信号(420)を使用して、エンハンスメント
層信号の予測再構成(320,340)は、符号化データストリーム(6)からエンハン
スメント層信号のための変換係数レベルを引き出し(320)、エンハンスメント層信号
の変換バージョンを得るために、変換係数レベルと重畳された変換係数の合計を実行(3
40)して、エンハンスメント層信号(360)を得るために、エンハンスメント層信号
の変換バージョンに逆変換を受けさせる(すなわち、図の中の逆変換T-1が、少なくとも
その符号化モードのために、加算器340の下流に置かれる)ことを含む。
ベース層信号の再構成に関する限り、引用が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。
同じことが、空間予測と同様に、C)の中で言及されたを解像度または品質の改良に適
用される。
C)で言及された時間予測は、作動予測パラメータを、符号化データストリーム6と副
ストリーム6aからそれぞれ得ている予測プロバイダ160に関わる。作動パラメータは
、作動ベクトル、引用フレームインデックスを含む。あるいは、作動パラメータは、現在
再構成された部分の副ブロック毎に、作動副分割情報と作動ベクトルの組み合わせを含む
。
前述したように、重み付け平均の形成は、空間領域または変換領域の中で終わる。従っ
て、加算器340での加算は、空間領域または変換領域の中で実行される。後者の場合、
逆変換器580は逆変換を重み付け平均に適用する。
ルタがかけられた信号を得るために、ローパスフィルタで中間層予測信号(380)をフ
ィルタ(260)にかけ、かつ、ハイパスフィルタでエンハンスメント層内部予測信号を
フィルタ(260)にかけて、得られたフィルタにかけられた信号を合計することを含む
。
C3)ここで、重み付け平均の形成(260)は、現在再構成されるべき部分で、変換
係数を得るために、中間層予測信号とエンハンスメント層内部予測信号とを変換(260
)し、そして、重畳された変換係数を得るために、得られた変換係数に、異なる空間周波
数成分に対して異なる重み付け係数を使用して重畳(260)し、そして、エンハンスメ
ント層予測信号を得るために、重畳された変換係数を逆変換することを含む。
C4)ここで、エンハンスメント層予測信号(420)を使用して、エンハンスメント
層信号の予測再構成(320,340)は、符号化データストリーム(6)からエンハン
スメント層信号のための変換係数レベルを引き出し(320)、エンハンスメント層信号
の変換バージョンを得るために、変換係数レベルと重畳された変換係数の合計を実行(3
40)して、エンハンスメント層信号(360)を得るために、エンハンスメント層信号
の変換バージョンに逆変換を受けさせる(すなわち、図の中の逆変換T-1が、少なくとも
その符号化モードのために、加算器340の下流に置かれる)ことを含む。
ベース層信号の再構成に関する限り、引用が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。
同じことが、空間予測と同様に、C)の中で言及されたを解像度または品質の改良に適
用される。
C)で言及された時間予測は、作動予測パラメータを、符号化データストリーム6と副
ストリーム6aからそれぞれ得ている予測プロバイダ160に関わる。作動パラメータは
、作動ベクトル、引用フレームインデックスを含む。あるいは、作動パラメータは、現在
再構成された部分の副ブロック毎に、作動副分割情報と作動ベクトルの組み合わせを含む
。
前述したように、重み付け平均の形成は、空間領域または変換領域の中で終わる。従っ
て、加算器340での加算は、空間領域または変換領域の中で実行される。後者の場合、
逆変換器580は逆変換を重み付け平均に適用する。
D1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(380)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号に、解像度または
品質の改良を受け(220)させ、
中間層予測信号(380)を使用して、エンハンスメント層信号(360)を予測的に
再構成(320、340)し、
ここで、エンハンスメント層信号の再構成(60)は、中間層予測信号(380)が発
展するように実行され、ベース層信号とエンハンスメント層信号それぞれによってスケー
ル的に表わされたビデオの異なる部分に対して、非ブロック化および内ループのフィルタ
リング(140)の何も無い(200a)、または、1つまたは全て(200b,200
c)のうちの異なる1つから、符号化ビットストリームの中のサイド情報を経由して制御
される、ように構成されている。
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(380)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号に、解像度または
品質の改良を受け(220)させ、
中間層予測信号(380)を使用して、エンハンスメント層信号(360)を予測的に
再構成(320、340)し、
ここで、エンハンスメント層信号の再構成(60)は、中間層予測信号(380)が発
展するように実行され、ベース層信号とエンハンスメント層信号それぞれによってスケー
ル的に表わされたビデオの異なる部分に対して、非ブロック化および内ループのフィルタ
リング(140)の何も無い(200a)、または、1つまたは全て(200b,200
c)のうちの異なる1つから、符号化ビットストリームの中のサイド情報を経由して制御
される、ように構成されている。
ベース層信号の再構成に関する限り、引用が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。同じことが、解像度または品質
の改良に適用される。
D)で言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そ
して、予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(380)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)とエ
ンハンスメント層内部予測信号とを結合(260)することに関わる。
中間層予測信号(380)が発展するという事実は、符号化されたビットストリーム(
360)の中のサイド情報を経由して、非ブロック化の何も無い(200a)、または、
1つまたは全て(200b,200c)の異なる1つから制御され、以下に意味するビデ
オの異なる部分に対して、内ループのフィルタ(140)がかけられるということがある
。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用(非ブロック化の
みの使用、または、内ループフィルタリングのみの使用、または、非ブロック化および内
ループフィルタリングの両方の使用)を(任意に)合図する。フィルタ伝達関数さえ、ベ
ース層副ストリーム6aの中のサイド情報によって合図され、変化される。これらの変化
が行われる異なる部分を定義する大きさは、前述の符号化ユニット、予測ブロックまたは
いかなる他の大きさによっても定義される。その結果、スケーラブルビデオデコーダ(符
号化ステージ80)は、仮に、ベース層信号のみが再構成されるのであれば、これらの変
化を適用する。しかしながら、そこから独立して(すなわち、ベース層信号6aの中のち
ょうど言及されたサイド情報から独立して)、副ストリーム6bは、フィルタリングの組
み合わせが、ベース層信号を得るために使用される新しい変化を合図するサイド情報を含
む。そこでは、全てのフィルタ120,140をバイパスさせて、エンハンスメント信号
の予測的再構成の中で使用(非ブロック化のみの使用、または、内ループフィルタリング
のみの使用、または、非ブロック化および内ループフィルタリングとの両方の使用)され
る。すなわち、フィルタ伝達関数さえ、副ストリーム6bの中のサイド情報によって合図
され、変化される。これらの変化が行われる異なる部分を定義する大きさは、前述の符号
化ユニット、または、予測ブロック、または、いかなる別の大きさによっても定義され、
この合図がベース層信号6aの中で使用される大きさと異なる。
A)およびB)に対するように、前述に対してなされる。同じことが、解像度または品質
の改良に適用される。
D)で言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そ
して、予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(380)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)とエ
ンハンスメント層内部予測信号とを結合(260)することに関わる。
中間層予測信号(380)が発展するという事実は、符号化されたビットストリーム(
360)の中のサイド情報を経由して、非ブロック化の何も無い(200a)、または、
1つまたは全て(200b,200c)の異なる1つから制御され、以下に意味するビデ
オの異なる部分に対して、内ループのフィルタ(140)がかけられるということがある
。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用(非ブロック化の
みの使用、または、内ループフィルタリングのみの使用、または、非ブロック化および内
ループフィルタリングの両方の使用)を(任意に)合図する。フィルタ伝達関数さえ、ベ
ース層副ストリーム6aの中のサイド情報によって合図され、変化される。これらの変化
が行われる異なる部分を定義する大きさは、前述の符号化ユニット、予測ブロックまたは
いかなる他の大きさによっても定義される。その結果、スケーラブルビデオデコーダ(符
号化ステージ80)は、仮に、ベース層信号のみが再構成されるのであれば、これらの変
化を適用する。しかしながら、そこから独立して(すなわち、ベース層信号6aの中のち
ょうど言及されたサイド情報から独立して)、副ストリーム6bは、フィルタリングの組
み合わせが、ベース層信号を得るために使用される新しい変化を合図するサイド情報を含
む。そこでは、全てのフィルタ120,140をバイパスさせて、エンハンスメント信号
の予測的再構成の中で使用(非ブロック化のみの使用、または、内ループフィルタリング
のみの使用、または、非ブロック化および内ループフィルタリングとの両方の使用)され
る。すなわち、フィルタ伝達関数さえ、副ストリーム6bの中のサイド情報によって合図
され、変化される。これらの変化が行われる異なる部分を定義する大きさは、前述の符号
化ユニット、または、予測ブロック、または、いかなる別の大きさによっても定義され、
この合図がベース層信号6aの中で使用される大きさと異なる。
E1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号に、解像度または
品質の改良を受け(220)させ、
中間層予測信号(380)を使用して、エンハンスメント層信号(60)を予測的に再
構成(320、340)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、中間層予測信号が発
展するように実行され、符号化されたビットストリーム(6)の中のサイド情報を経由し
て、または、合図に依存して、ベース層信号とエンハンスメント層信号それぞれによって
スケール的に表わされたビデオの異なる部分に対して、抽出補間フィルタ(220)のた
めの異なるフィルタ伝達関数から制御されることを含む、ように構成されている。
符号化データストリーム(6)からベース層信号(200a,200b,200c)を
再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号に、解像度または
品質の改良を受け(220)させ、
中間層予測信号(380)を使用して、エンハンスメント層信号(60)を予測的に再
構成(320、340)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、中間層予測信号が発
展するように実行され、符号化されたビットストリーム(6)の中のサイド情報を経由し
て、または、合図に依存して、ベース層信号とエンハンスメント層信号それぞれによって
スケール的に表わされたビデオの異なる部分に対して、抽出補間フィルタ(220)のた
めの異なるフィルタ伝達関数から制御されることを含む、ように構成されている。
ベース層信号の再構成に関する限り、引用が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。同じことが、解像度または品質
の改良に適用される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)とエ
ンハンスメント層内部予測信号とを結合(260)することに関わる。
中間層予測信号が発展するという事実は、符号化されたビットストリーム(6)の中の
サイド情報を経由して、または、合図に依存して、以下のビデオ手段の異なる部分に対し
て、抽出補間フィルタ(220)のための異なるフィルタ伝達関数から制御されるという
ことである。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用(非ブロック化の
みの使用、または、内ループフィルタリングのみの使用、または、非ブロック化および内
ループフィルタリングとの両方の使用)を(任意に)合図する。フィルタ伝達関数さえ、
ベース層副ストリーム6aの中のサイド情報によって合図され、変化される。これらの変
化が行われる異なる部分を定義する大きさは、前述の符号化ユニット、予測ブロックまた
はいかなる別の大きさによっても定義される。その結果、スケーラブルビデオデコーダ(
符号化ステージ80)は、仮に、ベース層信号のみが再構成されるのであれば、これらの
変化を適用する。しかしながら、そこから独立して(すなわち、ベース層信号6aの中の
ちょうど言及されたサイド情報から独立して)、副ストリーム6bは、改良された信号3
80を得るために、改良器220の中で使用されるフィルタ伝達関数の変化を追加的に合
図するサイド情報を含む。これらの変化が行われる異なる部分を定義する大きさは、前述
の符号化ユニット、または、予測ブロック、または、いかなる別の大きさによっても定義
され、ベース層信号6aの前述の大きさと異なる。
前述のように、使用されるべき変化は、追加サイド情報の使用の有る無しに関わらず、
ベース層信号またはベース層残留信号または副ストリーム6aの中の符号化パラメータか
ら、信号に依存して推論される。
A)およびB)に対するように、前述に対してなされる。同じことが、解像度または品質
の改良に適用される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層予測信号(420)を得るために、中間層予測信号(380)とエ
ンハンスメント層内部予測信号とを結合(260)することに関わる。
中間層予測信号が発展するという事実は、符号化されたビットストリーム(6)の中の
サイド情報を経由して、または、合図に依存して、以下のビデオ手段の異なる部分に対し
て、抽出補間フィルタ(220)のための異なるフィルタ伝達関数から制御されるという
ことである。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用(非ブロック化の
みの使用、または、内ループフィルタリングのみの使用、または、非ブロック化および内
ループフィルタリングとの両方の使用)を(任意に)合図する。フィルタ伝達関数さえ、
ベース層副ストリーム6aの中のサイド情報によって合図され、変化される。これらの変
化が行われる異なる部分を定義する大きさは、前述の符号化ユニット、予測ブロックまた
はいかなる別の大きさによっても定義される。その結果、スケーラブルビデオデコーダ(
符号化ステージ80)は、仮に、ベース層信号のみが再構成されるのであれば、これらの
変化を適用する。しかしながら、そこから独立して(すなわち、ベース層信号6aの中の
ちょうど言及されたサイド情報から独立して)、副ストリーム6bは、改良された信号3
80を得るために、改良器220の中で使用されるフィルタ伝達関数の変化を追加的に合
図するサイド情報を含む。これらの変化が行われる異なる部分を定義する大きさは、前述
の符号化ユニット、または、予測ブロック、または、いかなる別の大きさによっても定義
され、ベース層信号6aの前述の大きさと異なる。
前述のように、使用されるべき変化は、追加サイド情報の使用の有る無しに関わらず、
ベース層信号またはベース層残留信号または副ストリーム6aの中の符号化パラメータか
ら、信号に依存して推論される。
F1)スケーラブルビデオデコーダは、
符号化データストリームからベース層残留信号(480)を復号化(100)し、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させることによって、エンハンスメント
層信号(360)を再構成(60)し、そして、中間層残留予測信号(380)を使用し
て、エンハンスメント層信号(360)を予測的に再構成(320,340、および任意
に260)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、中間層残留予測信号
が発展するように実行され、符号化されたビットストリーム(6)の中のサイド情報を経
由して、または、合図に依存して、ベース層信号とエンハンスメント層信号それぞれによ
ってスケール的に表わされたビデオの異なる部分に対して、異なるフィルタ伝達関数から
制御されるように構成されている。
ベース層残留信号の再構成に関する限り、引用が、一般的には図に対して、そして、実
施例B)に対するように、前述に対してなされる。同じことが、解像度または品質の改良
に適用される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層残留信号を、符号化されたデータストリームから復号化(320)
し、
エンハンスメント層信号(360)を得るために、エンハンスメント層内部予測信号と
中間層残留予測信号(380)とエンハンスメント層残留信号とを結合(340と260
とに関わる)することに関わる。
中間層残留予測信号が発展するという事実は、符号化されたビットストリームの中のサ
イド情報を経由して、以下のビデオ手段の異なる部分に対して、異なるフィルタ伝達関数
から制御されるということである。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用に(任意に)合図
する。前述のD)とE)を参照してください。しかしながら、そこから独立して(すなわ
ち、ベース層信号6aの中のちょうど言及されたサイド情報から独立して)、副ストリー
ム6bは、改良された残留信号380を得るために、改良器220の中で使用されるフィ
ルタ伝達関数の変化を追加的に合図するサイド情報を含む。これらの変化が行われる異な
る部分を定義する大きさは、前述の符号化ユニット、または、予測ブロック、または、い
かなる別の大きさによっても定義され、ベース層信号6aの前述の大きさと異なる。
前述のように、使用されるべき変化は、追加サイド情報の使用の有る無しに関わらず、
ベース層信号またはベース層残留信号または副ストリーム6aの中の符号化パラメータか
ら、信号に依存して推論される。
符号化データストリームからベース層残留信号(480)を復号化(100)し、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させることによって、エンハンスメント
層信号(360)を再構成(60)し、そして、中間層残留予測信号(380)を使用し
て、エンハンスメント層信号(360)を予測的に再構成(320,340、および任意
に260)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、中間層残留予測信号
が発展するように実行され、符号化されたビットストリーム(6)の中のサイド情報を経
由して、または、合図に依存して、ベース層信号とエンハンスメント層信号それぞれによ
ってスケール的に表わされたビデオの異なる部分に対して、異なるフィルタ伝達関数から
制御されるように構成されている。
ベース層残留信号の再構成に関する限り、引用が、一般的には図に対して、そして、実
施例B)に対するように、前述に対してなされる。同じことが、解像度または品質の改良
に適用される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層残留信号を、符号化されたデータストリームから復号化(320)
し、
エンハンスメント層信号(360)を得るために、エンハンスメント層内部予測信号と
中間層残留予測信号(380)とエンハンスメント層残留信号とを結合(340と260
とに関わる)することに関わる。
中間層残留予測信号が発展するという事実は、符号化されたビットストリームの中のサ
イド情報を経由して、以下のビデオ手段の異なる部分に対して、異なるフィルタ伝達関数
から制御されるということである。
当然、ベース層副ストリーム6a自体は、全てのフィルタ120,140をバイパスす
るように、最終ベース層信号600をもたらすために異なる手段の使用に(任意に)合図
する。前述のD)とE)を参照してください。しかしながら、そこから独立して(すなわ
ち、ベース層信号6aの中のちょうど言及されたサイド情報から独立して)、副ストリー
ム6bは、改良された残留信号380を得るために、改良器220の中で使用されるフィ
ルタ伝達関数の変化を追加的に合図するサイド情報を含む。これらの変化が行われる異な
る部分を定義する大きさは、前述の符号化ユニット、または、予測ブロック、または、い
かなる別の大きさによっても定義され、ベース層信号6aの前述の大きさと異なる。
前述のように、使用されるべき変化は、追加サイド情報の使用の有る無しに関わらず、
ベース層信号またはベース層残留信号または副ストリーム6aの中の符号化パラメータか
ら、信号に依存して推論される。
G1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号化(100)し、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させることによって、エンハンスメント
層信号(360)を再構成(60)し、そして、中間層残留予測信号(480)を使用し
て、エンハンスメント層信号(360)を予測的に再構成(320,340、および任意
に260)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、全てをゼロにされた
ベース層残留信号(480)のブロックを識別(260)して、識別されたブロックを、
ベース層信号(200)の部分から得られた交換信号に取り替えることを含む、
ように構成されている。
ベース層残留信号の復号化に関する限り、引用が、一般的に対して、そして、実施例B
)に対するように、前述に対してなされる。同じことが、解像度または品質の改良に適用
される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層残留信号を、符号化されたデータストリームから復号化(320)
し、
エンハンスメント層信号(360)を得るために、エンハンスメント層内部予測信号と
中間層残留予測信号(380)とエンハンスメント層残留信号とを結合(340と260
とに関わる)することに関わる。
好ましくは、識別は、ベース層ストリーム(6a)の中の構文要素をチェックし、それ
ぞれの変換ブロックが全てゼロであるか否かに対して、例えば、前述の符号化ユニットの
別の副分割である変換ブロックの大きさで示すプロバイダ260に関わる。
前述するように、交換に使用されるベース層信号の部分は、例えば、ベース層信号20
0a,b,cのハイパスフィルタにかけられたバージョンである。
符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号化(100)し、
中間層残留予測信号(380)を得るために、再構成されたベース層残留信号(480
)に、解像度または品質の改良を受け(220)させることによって、エンハンスメント
層信号(360)を再構成(60)し、そして、中間層残留予測信号(480)を使用し
て、エンハンスメント層信号(360)を予測的に再構成(320,340、および任意
に260)し、
ここで、エンハンスメント層信号(360)の再構成(60)は、全てをゼロにされた
ベース層残留信号(480)のブロックを識別(260)して、識別されたブロックを、
ベース層信号(200)の部分から得られた交換信号に取り替えることを含む、
ように構成されている。
ベース層残留信号の復号化に関する限り、引用が、一般的に対して、そして、実施例B
)に対するように、前述に対してなされる。同じことが、解像度または品質の改良に適用
される。
言及された予測再構成は、前述したように、予測プロバイダ160に関わる。そして、
予測再構成は、
エンハンスメント層内部予測信号を得るために、エンハンスメント層信号(360)の
既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(360)の
部分を空間的または時間的に予測(260)し、
エンハンスメント層残留信号を、符号化されたデータストリームから復号化(320)
し、
エンハンスメント層信号(360)を得るために、エンハンスメント層内部予測信号と
中間層残留予測信号(380)とエンハンスメント層残留信号とを結合(340と260
とに関わる)することに関わる。
好ましくは、識別は、ベース層ストリーム(6a)の中の構文要素をチェックし、それ
ぞれの変換ブロックが全てゼロであるか否かに対して、例えば、前述の符号化ユニットの
別の副分割である変換ブロックの大きさで示すプロバイダ260に関わる。
前述するように、交換に使用されるベース層信号の部分は、例えば、ベース層信号20
0a,b,cのハイパスフィルタにかけられたバージョンである。
H1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に解像
度または品質の改良を受け(220)させ、
エンハンスメント層予測信号(420)を得るために、エンハンスメント層信号(36
0)の既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(36
0)の部分を空間予測(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)し、
ここで、空間予測(260)は、現在再構成されるべき部分の予め決められた隣接部分
の中の非利用可能な部分を、中間層予測信号(380)の非利用可能な部分に共同配置さ
れた、共同配置された部分と取り替えて、中間層予測信号(380)の共同配置された部
分に依存する空間予測も実行することを含む、
ように構成されている。
ベース層信号の再構成に関する限り、引例が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。同じことが、前述された空間予
測と予測的再構成と同様に、解像度または品質の改良に適用される。
非利用可能性は以下の事実から生じる。予め決められた隣接部分が、その右に更に拡が
るサンプルと同様に、現在再構成されるべき部分/ブロックの上側エッジの上に隣接して
いるサンプルと、その下方に更に拡がるサンプルと同様に、再構成されるべき現在のブロ
ック/部分の左側エッジの左に隣接しているサンプルとを含む、と想像してください。さ
らに、空間予測が、副分割に基づいた多枝ツリーの葉であるブロック/部分に適用され、
そして、これらのブロックが、深く最初にジグザグに横断する順序で、予測再構成過程の
中を横断される、と想像してください。次に、いくつかのブロックが、利用可能な問題の
中に全ての隣接するサンプルを有している。すなわち、それらは既に再構成されている。
しかしながら、いくつかのブロックは、これらのいくつかのサンプルを欠いている。すな
わち、それらは完全には再構成されていない。そして、説明されるように、初期設定サン
プルが取り替えられる。潜在的に交換を必要とする別の事実は、どんなフレームに対して
も内部の中のスライス境界の位置である。交換自体は、初期設定サンプルに対して、中間
層予測信号(380)の共同配置されたサンプルをコピーすることによって行われる。次
に、空間予測が、中間層予測信号(380)からコピーされたサンプルと再構成されたエ
ンハンスメント層信号からのサンプルとを含んでいる完全な(完成された)予め決められ
た隣接部分を使用して行われる。
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に解像
度または品質の改良を受け(220)させ、
エンハンスメント層予測信号(420)を得るために、エンハンスメント層信号(36
0)の既に再構成された部分から、現在再構成されるべきエンハンスメント層信号(36
0)の部分を空間予測(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(340)し、
ここで、空間予測(260)は、現在再構成されるべき部分の予め決められた隣接部分
の中の非利用可能な部分を、中間層予測信号(380)の非利用可能な部分に共同配置さ
れた、共同配置された部分と取り替えて、中間層予測信号(380)の共同配置された部
分に依存する空間予測も実行することを含む、
ように構成されている。
ベース層信号の再構成に関する限り、引例が、一般的には図に対して、そして、実施例
A)およびB)に対するように、前述に対してなされる。同じことが、前述された空間予
測と予測的再構成と同様に、解像度または品質の改良に適用される。
非利用可能性は以下の事実から生じる。予め決められた隣接部分が、その右に更に拡が
るサンプルと同様に、現在再構成されるべき部分/ブロックの上側エッジの上に隣接して
いるサンプルと、その下方に更に拡がるサンプルと同様に、再構成されるべき現在のブロ
ック/部分の左側エッジの左に隣接しているサンプルとを含む、と想像してください。さ
らに、空間予測が、副分割に基づいた多枝ツリーの葉であるブロック/部分に適用され、
そして、これらのブロックが、深く最初にジグザグに横断する順序で、予測再構成過程の
中を横断される、と想像してください。次に、いくつかのブロックが、利用可能な問題の
中に全ての隣接するサンプルを有している。すなわち、それらは既に再構成されている。
しかしながら、いくつかのブロックは、これらのいくつかのサンプルを欠いている。すな
わち、それらは完全には再構成されていない。そして、説明されるように、初期設定サン
プルが取り替えられる。潜在的に交換を必要とする別の事実は、どんなフレームに対して
も内部の中のスライス境界の位置である。交換自体は、初期設定サンプルに対して、中間
層予測信号(380)の共同配置されたサンプルをコピーすることによって行われる。次
に、空間予測が、中間層予測信号(380)からコピーされたサンプルと再構成されたエ
ンハンスメント層信号からのサンプルとを含んでいる完全な(完成された)予め決められ
た隣接部分を使用して行われる。
I1)スケーラブルビデオデコーダは、
フレームの異なるブロックに対して、中間層予測モード、時間中間予測モードおよび空
間内部予測モードのうちの異なる1つを使用して、エンハンスメント層信号(360)を
再構成(60)するように構成され、
ここで、ケーラブルビデオデコーダは、エンハンスメント層信号(360)を再構成(
60)する中で、最初の走査と、次の、2番目の走査との中で、ブロックを横断すること
によってブロックを再構成(60)し、最初の走査の中で、空間内部予測モードを使用し
て、再構成されるべきブロックを跳ばし、中間層予測モードおよび中間予測モードの1つ
を使用して、再構成されるべきブロックを再構成し、そして、2番目の走査の中で、空間
内部予測モードを使用して、再構成されるべきブロックを再構成するように構成されてい
る。
「空間内部予測モード」と「時間中間予測モード」に関する限り、引用が、可能な実現
のための前述の議論に対してなされる。「中間層予測モード」に関する限り、そのような
モードのための例のいずれも、今までのところまたは以下で説明されるように、使用され
る。既に再構成されたサンプルによって囲まれたエンハンスメント層信号の空間的内部予
測モードブロックの完全な外形を持つ増加する機会のために、現在予測された空間内部予
測モードブロックの内部が充填されるべき隣接するサンプルのテンプレートは、外形を完
全に囲むために増加する。
フレームの異なるブロックに対して、中間層予測モード、時間中間予測モードおよび空
間内部予測モードのうちの異なる1つを使用して、エンハンスメント層信号(360)を
再構成(60)するように構成され、
ここで、ケーラブルビデオデコーダは、エンハンスメント層信号(360)を再構成(
60)する中で、最初の走査と、次の、2番目の走査との中で、ブロックを横断すること
によってブロックを再構成(60)し、最初の走査の中で、空間内部予測モードを使用し
て、再構成されるべきブロックを跳ばし、中間層予測モードおよび中間予測モードの1つ
を使用して、再構成されるべきブロックを再構成し、そして、2番目の走査の中で、空間
内部予測モードを使用して、再構成されるべきブロックを再構成するように構成されてい
る。
「空間内部予測モード」と「時間中間予測モード」に関する限り、引用が、可能な実現
のための前述の議論に対してなされる。「中間層予測モード」に関する限り、そのような
モードのための例のいずれも、今までのところまたは以下で説明されるように、使用され
る。既に再構成されたサンプルによって囲まれたエンハンスメント層信号の空間的内部予
測モードブロックの完全な外形を持つ増加する機会のために、現在予測された空間内部予
測モードブロックの内部が充填されるべき隣接するサンプルのテンプレートは、外形を完
全に囲むために増加する。
J1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
引用フレームと現在のフレームに対して、中間層予測信号(380)を得るために、再
構成されたベース層信号(200a,b,c)に、解像度または品質の改良を受け(22
0)させ、
引用フレームの中間層予測信号(380)と引用フレームの既に再構成されたエンハン
スメント層信号(360)との間の差信号を形成(260)し、
現在のフレームの差信号予測を得るために、差信号に作動補償予測を受け(260)さ
せ、
エンハンスメント層予測信号(420)を得るために、現在のフレームの中間層予測信
号(380)と現在のフレームの差信号予測とを結合(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(320,340,300,280)することを含む、
ように構成されている。
J2)ここで、引用フレームの差信号の形成において、使用された再構成されたエンハ
ンスメント層信号は、非ブロック化の前、または、非ブロック化の後で任意の内ループフ
ィルタリングの前、または、非ブロック化および任意の内ループフィルタリングの後のエ
ンハンスメント層再構成である。
J3)ここで、引用フレームの差信号を形成するために使用されるエンハンスメント層
信号の選択は、系列、画像、またはブロックレベルで、ビットストリームの中で合図され
る。
作動補償予測は、エンハンスメント信号(デコーダ320に関わる派生)の現在再構成
されたブロックに対して、作動予測パラメータを、それぞれ符号化データストリーム6と
副ストリーム6bとか得ている予測プロバイダ260に関わる。作動ベクトルは、現在再
構成されるべきエンハンスメント層信号の部分の位置に適用される。そして、それぞれ置
き換えられた部分は、差信号から、(断片的なサンプル補間の有る無しに関わらず)コピ
ーされる。このようにしてコピーされた部分は、例えば、画素的な組み合わせの中で、現
在再構成されるべき部分に共同配置された中間層予測信号(380)の部分に加算される
。
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
引用フレームと現在のフレームに対して、中間層予測信号(380)を得るために、再
構成されたベース層信号(200a,b,c)に、解像度または品質の改良を受け(22
0)させ、
引用フレームの中間層予測信号(380)と引用フレームの既に再構成されたエンハン
スメント層信号(360)との間の差信号を形成(260)し、
現在のフレームの差信号予測を得るために、差信号に作動補償予測を受け(260)さ
せ、
エンハンスメント層予測信号(420)を得るために、現在のフレームの中間層予測信
号(380)と現在のフレームの差信号予測とを結合(260)し、
エンハンスメント層予測信号(420)を使用して、エンハンスメント層信号(360
)を予測的に再構成(320,340,300,280)することを含む、
ように構成されている。
J2)ここで、引用フレームの差信号の形成において、使用された再構成されたエンハ
ンスメント層信号は、非ブロック化の前、または、非ブロック化の後で任意の内ループフ
ィルタリングの前、または、非ブロック化および任意の内ループフィルタリングの後のエ
ンハンスメント層再構成である。
J3)ここで、引用フレームの差信号を形成するために使用されるエンハンスメント層
信号の選択は、系列、画像、またはブロックレベルで、ビットストリームの中で合図され
る。
作動補償予測は、エンハンスメント信号(デコーダ320に関わる派生)の現在再構成
されたブロックに対して、作動予測パラメータを、それぞれ符号化データストリーム6と
副ストリーム6bとか得ている予測プロバイダ260に関わる。作動ベクトルは、現在再
構成されるべきエンハンスメント層信号の部分の位置に適用される。そして、それぞれ置
き換えられた部分は、差信号から、(断片的なサンプル補間の有る無しに関わらず)コピ
ーされる。このようにしてコピーされた部分は、例えば、画素的な組み合わせの中で、現
在再構成されるべき部分に共同配置された中間層予測信号(380)の部分に加算される
。
K1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層作動パラメータ(520)を復号し、
エンハンスメント層信号(260)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号(360)のフレームのブロックに対して、フレームの隣接す
る既に再構成されたブロックから作動パラメータ候補の組を集め(260)、
ベース層作動パラメータ(520)から、エンハンスメント層信号(360)のフレー
ムのブロックに共同配置されたベース層信号のブロックのベース層作動パラメータを集め
(260)、
作動パラメータ候補の拡張作動パラメータ候補組を得るために、ベース層作動パラメー
タまたはベース層作動パラメータのスケーリングされたバージョンを、作動パラメータ候
補の組に加算(260)し、
少なくとも拡張作動パラメータ候補組の作動パラメータ候補の1つを選択(260)し
、
作動補償予測によって、拡張作動パラメータ候補組の作動パラメータ候補の選択された
1つを使用して、エンハンスメント層信号を予測(260)することを含む、ように構成
されている。
符号化データストリーム(6)からベース層作動パラメータ(520)を復号し、
エンハンスメント層信号(260)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号(360)のフレームのブロックに対して、フレームの隣接す
る既に再構成されたブロックから作動パラメータ候補の組を集め(260)、
ベース層作動パラメータ(520)から、エンハンスメント層信号(360)のフレー
ムのブロックに共同配置されたベース層信号のブロックのベース層作動パラメータを集め
(260)、
作動パラメータ候補の拡張作動パラメータ候補組を得るために、ベース層作動パラメー
タまたはベース層作動パラメータのスケーリングされたバージョンを、作動パラメータ候
補の組に加算(260)し、
少なくとも拡張作動パラメータ候補組の作動パラメータ候補の1つを選択(260)し
、
作動補償予測によって、拡張作動パラメータ候補組の作動パラメータ候補の選択された
1つを使用して、エンハンスメント層信号を予測(260)することを含む、ように構成
されている。
K2)ここで、スケーラブルビデオデコーダは、ベース層作動パラメータのスケーリン
グされたバージョンを得るために、ベース層信号とエンハンスメント層信号との間の空間
解像度比率に従って、ベース層作動パラメータをスケーリングするように構成されている
。
K3)ここで、スケーラブルビデオデコーダは、ベース層作動パラメータが、融合を使
用して、符号化データストリームの中で符号化されるか否かをチェックし、仮に、ベース
層作動パラメータが、融合を使用して、符号化データストリームの中で符号化されるなら
ば、加算を抑圧するように構成されている。
この実施例で言及された作動パラメータは、作動ベクトル(作動ベクトル予測)のみに
、または、ブロック毎の作動仮説、引用インデックスリスト、仕切っている情報(融合化
)の数を含む作動パラメータの完全な組に関係する。
従って、「スケーリングされたバージョン」は、空間スケーラビリティの場合において
、ベース層信号とエンハンスメント層信号との間の空間解像度比率に従って、ベース層信
号の中で使用された作動パラメータのスケーリングから由来してもよい。
符号化データストリームからのベース層作動パラメータ520の復号化は、作動ベクト
ル予測または融合化にも関わる。
融合化/作動ベクトル候補の組の中のベース層信号の共同配置された部分で、使用され
た作動パラメータの補間は、内部層候補および中間層候補の中で、非常に有効な索引を可
能にする。
選択は、予測ブロックや符号化ユニットのようなエンハンスメント層信号の中の、作動
パラメータ候補の拡張された組/リストの中のインデックスの明白な合図に関わる。ある
いはまた、選択インデックスはエンハンスメント層信号6bまたは中間層情報の別の情報
から推論される。
グされたバージョンを得るために、ベース層信号とエンハンスメント層信号との間の空間
解像度比率に従って、ベース層作動パラメータをスケーリングするように構成されている
。
K3)ここで、スケーラブルビデオデコーダは、ベース層作動パラメータが、融合を使
用して、符号化データストリームの中で符号化されるか否かをチェックし、仮に、ベース
層作動パラメータが、融合を使用して、符号化データストリームの中で符号化されるなら
ば、加算を抑圧するように構成されている。
この実施例で言及された作動パラメータは、作動ベクトル(作動ベクトル予測)のみに
、または、ブロック毎の作動仮説、引用インデックスリスト、仕切っている情報(融合化
)の数を含む作動パラメータの完全な組に関係する。
従って、「スケーリングされたバージョン」は、空間スケーラビリティの場合において
、ベース層信号とエンハンスメント層信号との間の空間解像度比率に従って、ベース層信
号の中で使用された作動パラメータのスケーリングから由来してもよい。
符号化データストリームからのベース層作動パラメータ520の復号化は、作動ベクト
ル予測または融合化にも関わる。
融合化/作動ベクトル候補の組の中のベース層信号の共同配置された部分で、使用され
た作動パラメータの補間は、内部層候補および中間層候補の中で、非常に有効な索引を可
能にする。
選択は、予測ブロックや符号化ユニットのようなエンハンスメント層信号の中の、作動
パラメータ候補の拡張された組/リストの中のインデックスの明白な合図に関わる。ある
いはまた、選択インデックスはエンハンスメント層信号6bまたは中間層情報の別の情報
から推論される。
L1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層作動パラメータ(520)を復号(100
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層作動パラメータに依存するエンハンスメント層信号のための作動パラメータ候
補リストを順序付け(240)し、
符号化データストリーム(6)の中の明らかに合図されたインデックス構文要素を経由
して制御された、エンハンスメント層信号のための順序付けされた作動パラメータ候補リ
ストからエンハンスメント層作動パラメータを選択(240)し、
作動補償パラメータによって、決められた作動パラメータを使用して、エンハンスメン
ト層信号を予測(260)することを含む、ように構成されている。
この実施例で言及された作動パラメータに関する限り、実施例Kに関して上で述べたと
同じことが適用される。
符号化データストリームからのベース層作動パラメータ520の復号化は、(任意に)
作動ベクトル予測または融合にも関わる。
順序付けは、それぞれのエンハンスメント層作動パラメータ候補と、エンハンスメント
層信号の現在のブロックに共同配置されたベース層信号のブロックに関係するベース層信
号のベース層作動パラメータとの間の差を測る大きさに従ってなされる。すなわち、エン
ハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パラメータ候補
のリストが、最初に決定される。次に、順序付けが、ちょうど述べられるように実行され
る。以下に、選択が明白な合図で実行される。
また、順序付けは、エンハンスメント層信号の現在のブロックと、ベース層の中の空間
的および/または時間的に隣接するブロックのベース層作動パラメータに共同配置された
ベース層信号のブロックに関係するベース層信号のベース層作動パラメータとの間の差を
測る大きさに従ってもなされる。次に、ベース層の中の決められた順序付けが、エンハン
スメント層に移送される。その結果、エンハンスメント層作動パラメータ候補が、対応す
るベース層候補に対して決められた順序付けと同じ方法で順序付けされる。ここで、関係
したベース層ブロックが、考慮されたエンハンスメント層作動パラメータ候補に関係して
いるエンハンスメント層ブロックに、空間的/時間的に共同配置されるとき、ベース層作
動パラメータ候補は、エンハンスメント層作動パラメータ候補に対応すると言われる。順
序付けに基づいて、選択は明白な合図によって実行される。
符号化データストリーム(6)からベース層作動パラメータ(520)を復号(100
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層作動パラメータに依存するエンハンスメント層信号のための作動パラメータ候
補リストを順序付け(240)し、
符号化データストリーム(6)の中の明らかに合図されたインデックス構文要素を経由
して制御された、エンハンスメント層信号のための順序付けされた作動パラメータ候補リ
ストからエンハンスメント層作動パラメータを選択(240)し、
作動補償パラメータによって、決められた作動パラメータを使用して、エンハンスメン
ト層信号を予測(260)することを含む、ように構成されている。
この実施例で言及された作動パラメータに関する限り、実施例Kに関して上で述べたと
同じことが適用される。
符号化データストリームからのベース層作動パラメータ520の復号化は、(任意に)
作動ベクトル予測または融合にも関わる。
順序付けは、それぞれのエンハンスメント層作動パラメータ候補と、エンハンスメント
層信号の現在のブロックに共同配置されたベース層信号のブロックに関係するベース層信
号のベース層作動パラメータとの間の差を測る大きさに従ってなされる。すなわち、エン
ハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パラメータ候補
のリストが、最初に決定される。次に、順序付けが、ちょうど述べられるように実行され
る。以下に、選択が明白な合図で実行される。
また、順序付けは、エンハンスメント層信号の現在のブロックと、ベース層の中の空間
的および/または時間的に隣接するブロックのベース層作動パラメータに共同配置された
ベース層信号のブロックに関係するベース層信号のベース層作動パラメータとの間の差を
測る大きさに従ってもなされる。次に、ベース層の中の決められた順序付けが、エンハン
スメント層に移送される。その結果、エンハンスメント層作動パラメータ候補が、対応す
るベース層候補に対して決められた順序付けと同じ方法で順序付けされる。ここで、関係
したベース層ブロックが、考慮されたエンハンスメント層作動パラメータ候補に関係して
いるエンハンスメント層ブロックに、空間的/時間的に共同配置されるとき、ベース層作
動パラメータ候補は、エンハンスメント層作動パラメータ候補に対応すると言われる。順
序付けに基づいて、選択は明白な合図によって実行される。
M1)スケーラブルビデオデコーダは、
ベース層信号(200)ための作動パラメータ候補リストの中のインデックスを使用し
て、符号化データストリーム(6)からベース層作動パラメータ(520)を復号(10
0)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層信号のための作動パラメータ候補リストの中のインデックスに依存するエンハ
ンスメント層信号のための作動パラメータ候補リストの中のインデックスを決定(240
)し、
エンハンスメント層信号のための作動パラメータ候補リストの中のインデックスを使用
して、エンハンスメント層作動パラメータを決定(240)して、
作動補償予測によって、決められた作動パラメータを使用して、エンハンスメント層信
号を予測(260)することを含む、ように構成されている。
この実施例で言及された作動パラメータに関する限り、実施例Kに関して上で述べたと
同じことが適用される。
ベース層作動パラメータ520の復号化は、ベース層信号のブロックに対して、
現在のブロックのための作動パラメータが、融合または融合無しの方法(予測的にまた
は非予測的に符号化される方法)で、ベース層副ストリーム6aの中で合図されるか否か
に対して合図する旗を点検し、
仮に、融合を使用して、符号化される、または、予測的に符号化されるならば、ベース
層作動パラメータ(例えば、ベース層作動パラメータは、決定のために使用されるベース
層信号の隣接するブロックのために使用/選択される)のリストを決定し、
それぞれのリストの中のインデックスは、ベース層信号6aから得られ、リストの中の
ベース層作動パラメータの1つを選択するために使用され、
エンハンスメント層のためのインデックスは、インデックスされたベース層候補に関係
するベース層ブロックに共同配置されたエンハンスメント層ブロックが、選択される方法
で決定されること、を含む。
エンハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パラメー
タのリストが決定される。例えば、エンハンスメント層信号の隣接するブロックのために
使用/選択される作動パラメータは、決定のために使用される。
エンハンスメント層の中の作動パラメータインデックスの選択は、それぞれのエンハン
スメント層作動パラメータと、エンハンスメント層信号の現在のブロックに共同配置され
たベース層信号のブロックに関係するベース層信号の(中で使用/選択される)ベース層
作動パラメータとの間の差を測る大きさに従って実行される。
また、エンハンスメント層の中の作動パラメータインデックスの選択は、エンハンスメ
ント層信号の現在のブロックに共同配置されたベース層信号のブロックに関係するベース
層信号のベース層作動パラメータと、ベース層の中の空間的および/または時間的に隣接
するブロックのベース層作動パラメータとの間の差を測る大きさに従って実行される。次
に、ベース層のための選択が、エンハンスメント層に移される。その結果、選択されたベ
ース層候補に対応するエンハンスメント層作動パラメータ候補が、選ばれる。関係ベース
層ブロックが、考慮されるエンハンスメント層作動パラメータ候補に関係しているエンハ
ンスメント層ブロックに空間的/時間的に共同配置されるとき、ベース層作動パラメータ
候補は、エンハンスメント層作動パラメータ候補に対応すると言われる。
ベース層信号(200)ための作動パラメータ候補リストの中のインデックスを使用し
て、符号化データストリーム(6)からベース層作動パラメータ(520)を復号(10
0)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層信号のための作動パラメータ候補リストの中のインデックスに依存するエンハ
ンスメント層信号のための作動パラメータ候補リストの中のインデックスを決定(240
)し、
エンハンスメント層信号のための作動パラメータ候補リストの中のインデックスを使用
して、エンハンスメント層作動パラメータを決定(240)して、
作動補償予測によって、決められた作動パラメータを使用して、エンハンスメント層信
号を予測(260)することを含む、ように構成されている。
この実施例で言及された作動パラメータに関する限り、実施例Kに関して上で述べたと
同じことが適用される。
ベース層作動パラメータ520の復号化は、ベース層信号のブロックに対して、
現在のブロックのための作動パラメータが、融合または融合無しの方法(予測的にまた
は非予測的に符号化される方法)で、ベース層副ストリーム6aの中で合図されるか否か
に対して合図する旗を点検し、
仮に、融合を使用して、符号化される、または、予測的に符号化されるならば、ベース
層作動パラメータ(例えば、ベース層作動パラメータは、決定のために使用されるベース
層信号の隣接するブロックのために使用/選択される)のリストを決定し、
それぞれのリストの中のインデックスは、ベース層信号6aから得られ、リストの中の
ベース層作動パラメータの1つを選択するために使用され、
エンハンスメント層のためのインデックスは、インデックスされたベース層候補に関係
するベース層ブロックに共同配置されたエンハンスメント層ブロックが、選択される方法
で決定されること、を含む。
エンハンスメント層信号の現在のブロックに対して、エンハンスメント層作動パラメー
タのリストが決定される。例えば、エンハンスメント層信号の隣接するブロックのために
使用/選択される作動パラメータは、決定のために使用される。
エンハンスメント層の中の作動パラメータインデックスの選択は、それぞれのエンハン
スメント層作動パラメータと、エンハンスメント層信号の現在のブロックに共同配置され
たベース層信号のブロックに関係するベース層信号の(中で使用/選択される)ベース層
作動パラメータとの間の差を測る大きさに従って実行される。
また、エンハンスメント層の中の作動パラメータインデックスの選択は、エンハンスメ
ント層信号の現在のブロックに共同配置されたベース層信号のブロックに関係するベース
層信号のベース層作動パラメータと、ベース層の中の空間的および/または時間的に隣接
するブロックのベース層作動パラメータとの間の差を測る大きさに従って実行される。次
に、ベース層のための選択が、エンハンスメント層に移される。その結果、選択されたベ
ース層候補に対応するエンハンスメント層作動パラメータ候補が、選ばれる。関係ベース
層ブロックが、考慮されるエンハンスメント層作動パラメータ候補に関係しているエンハ
ンスメント層ブロックに空間的/時間的に共同配置されるとき、ベース層作動パラメータ
候補は、エンハンスメント層作動パラメータ候補に対応すると言われる。
N1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層残留信号(480)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
走査予測器(520)を得るために、ベース層残留信号(480)またはベース層信号
の、スペクトル分解の勾配または情報を決定(240)し、
走査予測器(520)に依存する走査パターンを使用して、符号化データストリーム(
6)から、エンハンスメント層残留信号(540)の変換係数を復号(320)すること
を含む、ように構成されている。
すなわち、変換係数の復号化は、そのすべてが変換ブロックを完全にカバーする、可能
な走査パターンの組からの走査パターンの選択に関わる。好ましくは、選択された走査パ
ターンが、ベース層残留信号の重要なスペクトル成分を、可能な走査パターンの組の別の
走査パターンよりも早く横断するように、選択される。
符号化データストリーム(6)からベース層残留信号(480)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
走査予測器(520)を得るために、ベース層残留信号(480)またはベース層信号
の、スペクトル分解の勾配または情報を決定(240)し、
走査予測器(520)に依存する走査パターンを使用して、符号化データストリーム(
6)から、エンハンスメント層残留信号(540)の変換係数を復号(320)すること
を含む、ように構成されている。
すなわち、変換係数の復号化は、そのすべてが変換ブロックを完全にカバーする、可能
な走査パターンの組からの走査パターンの選択に関わる。好ましくは、選択された走査パ
ターンが、ベース層残留信号の重要なスペクトル成分を、可能な走査パターンの組の別の
走査パターンよりも早く横断するように、選択される。
R1)ビデオデコーダは、
そのすべてが変換ブロックを完全にカバーする、可能な走査パターンの組からの走査パ
ターンの選択によって、符号化データストリーム(6)から残留信号(540または10
0の出力)の変換ブロックの変換係数を復号(320)し、選択は、符号化データストリ
ームの中の明白な合図に依存するように構成されている。
R2)ここで、復号(320)は、走査パターンの(520と240を経由した)選択
に依存する変換係数に関係する構文要素のための文脈モデルを使用する。
R2a)ここで、変換係数に関係する構文要素は、変換係数が、特定の走査位置に対し
て、ゼロに等しいか、または、ゼロに等しくないか指示する構文要素を含む。
R2b)ここで、変換係数に関係する構文要素は、特定の走査順序における最後のゼロ
でない変換係数の位置を指示する構文要素を含む。
R2c)ここで、変換係数に関係する構文要素は、変換ブロックの副ブロックが、ゼロ
に等しくない変換係数を含むか否かを指示する構文要素を含む。
R3)ここで、明白な合図が、ベース層残留信号(480)またはベース層信号の、勾
配、または、スペクトル的分解の情報に依存する、文脈モデルを使用して、可能な走査パ
ターンの組の中のインデックスをエントロピー復号化(320)することに関わる。
R4)ここで、変換係数レベルの復号化(320)に対して、変換ブロックは副ブロッ
クに副分割され、副ブロックがゼロでない変換係数を含むか否かを合図する構文要素は送
信され、そして、副ブロックのサイズまたは形状は、または、副ブロックの中の変換ブロ
ックの仕切りは、選択された走査パターンに依存する。
そのすべてが変換ブロックを完全にカバーする、可能な走査パターンの組からの走査パ
ターンの選択によって、符号化データストリーム(6)から残留信号(540または10
0の出力)の変換ブロックの変換係数を復号(320)し、選択は、符号化データストリ
ームの中の明白な合図に依存するように構成されている。
R2)ここで、復号(320)は、走査パターンの(520と240を経由した)選択
に依存する変換係数に関係する構文要素のための文脈モデルを使用する。
R2a)ここで、変換係数に関係する構文要素は、変換係数が、特定の走査位置に対し
て、ゼロに等しいか、または、ゼロに等しくないか指示する構文要素を含む。
R2b)ここで、変換係数に関係する構文要素は、特定の走査順序における最後のゼロ
でない変換係数の位置を指示する構文要素を含む。
R2c)ここで、変換係数に関係する構文要素は、変換ブロックの副ブロックが、ゼロ
に等しくない変換係数を含むか否かを指示する構文要素を含む。
R3)ここで、明白な合図が、ベース層残留信号(480)またはベース層信号の、勾
配、または、スペクトル的分解の情報に依存する、文脈モデルを使用して、可能な走査パ
ターンの組の中のインデックスをエントロピー復号化(320)することに関わる。
R4)ここで、変換係数レベルの復号化(320)に対して、変換ブロックは副ブロッ
クに副分割され、副ブロックがゼロでない変換係数を含むか否かを合図する構文要素は送
信され、そして、副ブロックのサイズまたは形状は、または、副ブロックの中の変換ブロ
ックの仕切りは、選択された走査パターンに依存する。
S1)スケーラブルビデオデコーダは、
ベース層残留信号の変換ブロックの最後の重要な変換係数の位置を指示する符号化デー
タストリームから最初の構文要素を復号化することを含む、符号化データストリーム(6
)からベース層残留信号の変換ブロックの変換係数を復号(100)し、
符号化データストリームから2番目の復号化構文要素を含み、最初の構文要素と2番目
の構文要素に基づくエンハンスメント層残留信号の位置を計算する、エンハンスメント層
残留信号の変換ブロックの変換係数を復号(100)するように構成されている。
ベース層残留信号の変換ブロックの最後の重要な変換係数の位置を指示する符号化デー
タストリームから最初の構文要素を復号化することを含む、符号化データストリーム(6
)からベース層残留信号の変換ブロックの変換係数を復号(100)し、
符号化データストリームから2番目の復号化構文要素を含み、最初の構文要素と2番目
の構文要素に基づくエンハンスメント層残留信号の位置を計算する、エンハンスメント層
残留信号の変換ブロックの変換係数を復号(100)するように構成されている。
O1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号のベース層残留信号(480)を復号
(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層残留信号(480)またはベース層信号に(520と240を経由して)依存
する文脈モデルまたは予測器を使用して、符号化データストリーム(6)から、エンハン
スメント層残留信号(540)の変換係数ブロックに関係する構文要素を復号(320)
することを含む、ように構成されている。
例えば、テンプレートは、現在訪問された変換係数位置での所定の変換係数を符号化す
るための文脈を決定するために使用される。そして、また、テンプレートは、(ベース層
とエンハンスメント層の中の変換ブロックのサイズの大きさでの)位置、および、スペク
トル周波数の観点から、所定の変換係数位置に対応するベース層残留信号の中の1つ以上
の変換ブロックの中の位置に関わる。
または、ベース層残留信号(480)またはベース層信号の勾配またはスペクトル分解
の情報が、文脈モデルを決定するために使用される。
符号化データストリーム(6)からベース層信号のベース層残留信号(480)を復号
(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
ベース層残留信号(480)またはベース層信号に(520と240を経由して)依存
する文脈モデルまたは予測器を使用して、符号化データストリーム(6)から、エンハン
スメント層残留信号(540)の変換係数ブロックに関係する構文要素を復号(320)
することを含む、ように構成されている。
例えば、テンプレートは、現在訪問された変換係数位置での所定の変換係数を符号化す
るための文脈を決定するために使用される。そして、また、テンプレートは、(ベース層
とエンハンスメント層の中の変換ブロックのサイズの大きさでの)位置、および、スペク
トル周波数の観点から、所定の変換係数位置に対応するベース層残留信号の中の1つ以上
の変換ブロックの中の位置に関わる。
または、ベース層残留信号(480)またはベース層信号の勾配またはスペクトル分解
の情報が、文脈モデルを決定するために使用される。
P1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号のベース層残留信号(480)を復号
(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号(360)の部分と異なる予測モードに従って、エンハンスメ
ント層信号(360)、ベース層残留信号およびベース層信号の既に再構成された部分か
ら、エンハンスメント層信号(360)の部分を予測(260)し、
変換係数ブロックが属するエンハンスメント層信号(360)が、ベース層残留信号と
ベース層信号とのいずれかに基づいた中間層予測に関わるか否かに(520と240を経
由して)依存する文脈モデルを使用して、符号化データストリーム(6)から、エンハン
スメント層残留信号(540)の変換係数ブロックに関係する構文要素を復号(320)
し、
そして、エンハンスメント層予想信号(420)を使用して、エンハンスメント層信号
(360)を予測的に再構成(340)することを含む、
ように構成されている。
符号化データストリーム(6)からベース層信号のベース層残留信号(480)を復号
(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号(360)の部分と異なる予測モードに従って、エンハンスメ
ント層信号(360)、ベース層残留信号およびベース層信号の既に再構成された部分か
ら、エンハンスメント層信号(360)の部分を予測(260)し、
変換係数ブロックが属するエンハンスメント層信号(360)が、ベース層残留信号と
ベース層信号とのいずれかに基づいた中間層予測に関わるか否かに(520と240を経
由して)依存する文脈モデルを使用して、符号化データストリーム(6)から、エンハン
スメント層残留信号(540)の変換係数ブロックに関係する構文要素を復号(320)
し、
そして、エンハンスメント層予想信号(420)を使用して、エンハンスメント層信号
(360)を予測的に再構成(340)することを含む、
ように構成されている。
Q1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に解像
度または品質の改良を受け(220)させ、
符号化パラメータの組の各符号化パラメータ候補に対して、それぞれの試験的な再構成
または部分的な再構成の結果を得るために、それぞれの符号化パラメータ候補を使用して
、エンハンスメント層信号(360)の再構成または部分的な再構成を試験的に実行(2
60)し、
各符号化パラメータ候補に対して、中間層予測信号(380)とそれぞれの試験的な再
構成または部分的再構成の結果との間の差の大きさを決定(260)し、
各符号化パラメータ候補に対して大きさに依存して、符号化パラメータ候補の組の中で
選択(260)し、
そして、選択された符号化パラメータ候補を使用して、エンハンスメント層信号(36
0)を等しく再構成(320,340,260)することを含む、
ように構成されている。
Q2)ここで、エンハンスメント層に対して決定された符号化パラメータは、内部予測
モードに関係する。
Q3)ここで、エンハンスメント層に対して決定された符号化パラメータは、引用画像
または作動ベクトルなどの作動パラメータに関係する。
Q4)ここで、エンハンスメント層に対して決定された符号化パラメータは、融合候補
に関係する。
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
中間層予測信号(380)を得るために、再構成されたベース層信号(200)に解像
度または品質の改良を受け(220)させ、
符号化パラメータの組の各符号化パラメータ候補に対して、それぞれの試験的な再構成
または部分的な再構成の結果を得るために、それぞれの符号化パラメータ候補を使用して
、エンハンスメント層信号(360)の再構成または部分的な再構成を試験的に実行(2
60)し、
各符号化パラメータ候補に対して、中間層予測信号(380)とそれぞれの試験的な再
構成または部分的再構成の結果との間の差の大きさを決定(260)し、
各符号化パラメータ候補に対して大きさに依存して、符号化パラメータ候補の組の中で
選択(260)し、
そして、選択された符号化パラメータ候補を使用して、エンハンスメント層信号(36
0)を等しく再構成(320,340,260)することを含む、
ように構成されている。
Q2)ここで、エンハンスメント層に対して決定された符号化パラメータは、内部予測
モードに関係する。
Q3)ここで、エンハンスメント層に対して決定された符号化パラメータは、引用画像
または作動ベクトルなどの作動パラメータに関係する。
Q4)ここで、エンハンスメント層に対して決定された符号化パラメータは、融合候補
に関係する。
Z1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
符号化パラメータの組の各符号化パラメータ候補に対して、それぞれの試験的な再構成
または部分的な再構成の結果を得るために、それぞれの符号化パラメータ候補を使用して
、ベース層信号(360)の再構成または部分的な再構成を試験的に実行(260)し、
各符号化パラメータ候補に対して、実際に復号化されたベース層再構成とそれぞれの実
験的な再構成または部分的な再構成の結果との間の差の大きさを決定(260)し、
各符号化パラメータ候補に対して大きさに依存して、符号化パラメータ候補の組の中で
選択(260)し、
選択された符号化パラメータ候補をエンハンスメント層に移送し、移送は解像度の差に
従うスケーリングを含み、
そして、移送された符号化パラメータ候補を使用して、エンハンスメント層信号(36
0)を等しく再構成(320,340,260)することを含む、
ように構成されている。
符号化データストリーム(6)からベース層信号(200a,b,c)を再構成(80
)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
符号化パラメータの組の各符号化パラメータ候補に対して、それぞれの試験的な再構成
または部分的な再構成の結果を得るために、それぞれの符号化パラメータ候補を使用して
、ベース層信号(360)の再構成または部分的な再構成を試験的に実行(260)し、
各符号化パラメータ候補に対して、実際に復号化されたベース層再構成とそれぞれの実
験的な再構成または部分的な再構成の結果との間の差の大きさを決定(260)し、
各符号化パラメータ候補に対して大きさに依存して、符号化パラメータ候補の組の中で
選択(260)し、
選択された符号化パラメータ候補をエンハンスメント層に移送し、移送は解像度の差に
従うスケーリングを含み、
そして、移送された符号化パラメータ候補を使用して、エンハンスメント層信号(36
0)を等しく再構成(320,340,260)することを含む、
ように構成されている。
T1)スケーラブルビデオデコーダは、
内部ブロックのための空間内部予測および中間ブロックのための時間中間予測を使用し
て、内部ブロックおよび中間ブロックの中の副分割フレームによって、ベース層信号を予
測的に再構成(100,180,160)し、
エンハンスメント層信号(360)を予測的に再構成(320,340,260)し、
再構成(320,340,260)は、
現在再構成されるべきエンハンスメント層信号(360)の部分の副部分を得るために
、現在再構成されるべきエンハンスメント層信号(360)の部分に共同配置されたベー
ス層信号のブロックのブロック副分割を、現在再構成されるべきエンハンスメント層信号
(360)の部分に局所的に移送し、そして、関係するエンハンスメント層作動ベクトル
を、ベース層作動ベクトルに基づく副部分に局所的に移送し、
ベース層作動ベクトルに基づく副部分に関係するエンハンスメント層作動ベクトルを使
用して、エンハンスメント層信号(360)の既に再構成された部分から、現在再構成さ
れるべきエンハンスメント層信号(360)の部分を、作動補償予測によって予測(26
0)することを含む、
ように構成されている。
内部ブロックのための空間内部予測および中間ブロックのための時間中間予測を使用し
て、内部ブロックおよび中間ブロックの中の副分割フレームによって、ベース層信号を予
測的に再構成(100,180,160)し、
エンハンスメント層信号(360)を予測的に再構成(320,340,260)し、
再構成(320,340,260)は、
現在再構成されるべきエンハンスメント層信号(360)の部分の副部分を得るために
、現在再構成されるべきエンハンスメント層信号(360)の部分に共同配置されたベー
ス層信号のブロックのブロック副分割を、現在再構成されるべきエンハンスメント層信号
(360)の部分に局所的に移送し、そして、関係するエンハンスメント層作動ベクトル
を、ベース層作動ベクトルに基づく副部分に局所的に移送し、
ベース層作動ベクトルに基づく副部分に関係するエンハンスメント層作動ベクトルを使
用して、エンハンスメント層信号(360)の既に再構成された部分から、現在再構成さ
れるべきエンハンスメント層信号(360)の部分を、作動補償予測によって予測(26
0)することを含む、
ように構成されている。
T2)スケーラブルビデオデコーダは、
ベース層信号を空間的に変化させるベース層符号化パラメータを使用して、ベース層信
号を予測的に再構成(10,18,16)し、
ブロックのユニットの中でエンハンスメント層信号(36)を再構成(32,34,2
6)し、
再構成(32,34,26)は、
ブロックの予め決められたブロックに対して、ベース層信号の共同配置された部分に移
送されたとき、選択された副ブロックの副分割が、副分割される可能な副ブロックの副分
割の組の中で最も粗いように、可能な副ブロックの副分割の組の中の副ブロックの副分割
を選択し、その結果、ベース層信号は、それぞれの副ブロックの副分割の各副ブロックの
中で、ベース層符号化パラメータは互いに十分同じであり、
選択された副ブロックの副分割を使用して、予め決められたブロックを予測的に再構成
することを含む、
ように構成されている。
ベース層信号を空間的に変化させるベース層符号化パラメータを使用して、ベース層信
号を予測的に再構成(10,18,16)し、
ブロックのユニットの中でエンハンスメント層信号(36)を再構成(32,34,2
6)し、
再構成(32,34,26)は、
ブロックの予め決められたブロックに対して、ベース層信号の共同配置された部分に移
送されたとき、選択された副ブロックの副分割が、副分割される可能な副ブロックの副分
割の組の中で最も粗いように、可能な副ブロックの副分割の組の中の副ブロックの副分割
を選択し、その結果、ベース層信号は、それぞれの副ブロックの副分割の各副ブロックの
中で、ベース層符号化パラメータは互いに十分同じであり、
選択された副ブロックの副分割を使用して、予め決められたブロックを予測的に再構成
することを含む、
ように構成されている。
U1)スケーラブルビデオデコーダは、
内部ブロックのための空間内部予測と中間ブロックのための時間中間予測を使用して、
内部ブロックと中間ブロックの中のベース層信号のフレームを副分割して、そして、内部
ブロックと中間ブロックが副分割されるブロックのユニットの中で、それぞれ空間内部予
測と時間中間予測に関係した予測パラメータをセットすることによって、ベース層信号を
予測的にそれぞれ再構成(100,180,160)し、
エンハンスメント層信号(360)を予測的に再構成(320,340,260)し、
再構成(320,340,260)は、
符号化データストリームの中の予測モード構文を経由して制御され、エンハンスメント
信号のフレームが、空間内部予測モード、時間中間予測モードおよび中間層予測モードを
含む予測モードの組のそれぞれの1つに副分割される符号化ユニットの中のエンハンスメ
ント信号のフレームを割り当て、
それぞれの符号化ユニットが割り当てられたそれぞれの予測モードを使用して、各符号
化ユニットを予測的に再構成し、
割り当てられた空間内部予測モードおよび時間中間予測モードのいずれかを有する符号
化ユニットに対して、
更に予測ブロックの中の符号化ユニットを副分割して、それぞれの符号化ユニットが予
測ブロックのユニットの中で割り当てられたそれぞれの予測モードに関係する予測パラメ
ータをセットし、
割り当てられた空間内部予測を有するそれぞれの符号化ユニットの場合には、予測パラ
メータ組を使用して、全ての予測ブロックに空間内部予測を受けさせ、そして、割り当て
られた時間中間予測を有するそれぞれの符号化ユニットの場合には、予測パラメータ組を
使用して、全ての予測ブロックに時間中間予測を受けさせ、
割り当てられた中間層予測モードを有するそれぞれの符号化ユニットに対して、
内部ブロックおよび中間ブロックの両方に局所的に重なる符号化ユニットが、非時間的
モードに関係しかつ内部ブロックに局所的に一致する少なくとも1つの予測ブロックと、
時間中間予測モードに関係しかつ中間ブロックに局所的に一致する少なくとも1つの予測
ブロックとに副分割されるように、ベース層信号の内部ブロックと中間ブロックとの副分
割を、それぞれ符号化ユニットに局所的に移送し、
割り当てられた非時間的予測モードを有するそれぞれの符号化ユニットの全ての予測ブ
ロックに、局所的に一致する内部ブロックの予測パラメータから得られた予測パラメータ
を使用して、空間内部予測を受けさせ、あるいは、中間層予測の場合には、中間層予測信
号(380)を得るために、ベース層信号に、解像度または品質の改良を受け(220)
させ、
中間層予測信号(380)を使用して、割り当てられた非時間的予測モードを有するそ
れぞれの符号化ユニットの予測ブロックを予測(260)し、
そして、割り当てられた時間中間予測モードを有するそれぞれの符号化ユニットの全て
の予測ブロックに、局所的に一致する中間ブロックの予測パラメータから得られた予測パ
ラメータを使用して、時間中間予測を受けさせることを含む、ように構成されている。
内部ブロックのための空間内部予測と中間ブロックのための時間中間予測を使用して、
内部ブロックと中間ブロックの中のベース層信号のフレームを副分割して、そして、内部
ブロックと中間ブロックが副分割されるブロックのユニットの中で、それぞれ空間内部予
測と時間中間予測に関係した予測パラメータをセットすることによって、ベース層信号を
予測的にそれぞれ再構成(100,180,160)し、
エンハンスメント層信号(360)を予測的に再構成(320,340,260)し、
再構成(320,340,260)は、
符号化データストリームの中の予測モード構文を経由して制御され、エンハンスメント
信号のフレームが、空間内部予測モード、時間中間予測モードおよび中間層予測モードを
含む予測モードの組のそれぞれの1つに副分割される符号化ユニットの中のエンハンスメ
ント信号のフレームを割り当て、
それぞれの符号化ユニットが割り当てられたそれぞれの予測モードを使用して、各符号
化ユニットを予測的に再構成し、
割り当てられた空間内部予測モードおよび時間中間予測モードのいずれかを有する符号
化ユニットに対して、
更に予測ブロックの中の符号化ユニットを副分割して、それぞれの符号化ユニットが予
測ブロックのユニットの中で割り当てられたそれぞれの予測モードに関係する予測パラメ
ータをセットし、
割り当てられた空間内部予測を有するそれぞれの符号化ユニットの場合には、予測パラ
メータ組を使用して、全ての予測ブロックに空間内部予測を受けさせ、そして、割り当て
られた時間中間予測を有するそれぞれの符号化ユニットの場合には、予測パラメータ組を
使用して、全ての予測ブロックに時間中間予測を受けさせ、
割り当てられた中間層予測モードを有するそれぞれの符号化ユニットに対して、
内部ブロックおよび中間ブロックの両方に局所的に重なる符号化ユニットが、非時間的
モードに関係しかつ内部ブロックに局所的に一致する少なくとも1つの予測ブロックと、
時間中間予測モードに関係しかつ中間ブロックに局所的に一致する少なくとも1つの予測
ブロックとに副分割されるように、ベース層信号の内部ブロックと中間ブロックとの副分
割を、それぞれ符号化ユニットに局所的に移送し、
割り当てられた非時間的予測モードを有するそれぞれの符号化ユニットの全ての予測ブ
ロックに、局所的に一致する内部ブロックの予測パラメータから得られた予測パラメータ
を使用して、空間内部予測を受けさせ、あるいは、中間層予測の場合には、中間層予測信
号(380)を得るために、ベース層信号に、解像度または品質の改良を受け(220)
させ、
中間層予測信号(380)を使用して、割り当てられた非時間的予測モードを有するそ
れぞれの符号化ユニットの予測ブロックを予測(260)し、
そして、割り当てられた時間中間予測モードを有するそれぞれの符号化ユニットの全て
の予測ブロックに、局所的に一致する中間ブロックの予測パラメータから得られた予測パ
ラメータを使用して、時間中間予測を受けさせることを含む、ように構成されている。
V1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
以下の構成によって、符号化データストリームからエンハンスメント層信号を表す変換
係数の変換係数ブロックを復号し、
ベース層残留信号またはベース層信号に基づいて、可能な副ブロックの副分割の組の中
で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに続く直ぐに連続した方法で、横断されるように、変換係数ブロックが
、選択された副ブロックの副分割に従って規則的に副分割される、副ブロックのユニット
の中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、現在訪問された副ブロックが重要な変換係数を有するか否かを
示す構文要素を復号し、
仮に、構文要素が、現在訪問された副ブロックは重要な変換係数を有さないことを示す
ならば、現在訪問された副ブロックの中の変換係数をゼロにセットし、
仮に、構文要素が、現在訪問された副ブロックは重要な変換係数を有することを示すな
らば、データストリームから、現在訪問された副ブロックの中の変換係数のレベルを示す
構文要素を復号することを含む、
ように構成されている。
符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
以下の構成によって、符号化データストリームからエンハンスメント層信号を表す変換
係数の変換係数ブロックを復号し、
ベース層残留信号またはベース層信号に基づいて、可能な副ブロックの副分割の組の中
で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに続く直ぐに連続した方法で、横断されるように、変換係数ブロックが
、選択された副ブロックの副分割に従って規則的に副分割される、副ブロックのユニット
の中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、現在訪問された副ブロックが重要な変換係数を有するか否かを
示す構文要素を復号し、
仮に、構文要素が、現在訪問された副ブロックは重要な変換係数を有さないことを示す
ならば、現在訪問された副ブロックの中の変換係数をゼロにセットし、
仮に、構文要素が、現在訪問された副ブロックは重要な変換係数を有することを示すな
らば、データストリームから、現在訪問された副ブロックの中の変換係数のレベルを示す
構文要素を復号することを含む、
ように構成されている。
W1)スケーラブルビデオデコーダは、
符号化データストリーム(6)からベース層信号(200)を再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
以下の構成によって、エンハンスメント層信号のブロックを空間的に予測し、
中間層予測信号(380)を得るために、再構成されたベース層信号(200a,20
0b,200c)に、解像度または品質の改良を受け(220)させ、
中間層予測信号(380)の第1のラインを登録(260)し、エンハンスメント層信
号の既に再構成された部分の第2のラインでブロックを局所的に重ね、第1のラインと第
2のラインが両方ともライン方向に平行であるブロックを隣接させ、それによってシフト
値を得て、
第1のラインの内容で、第1のラインに共同配置されたブロックのラインを充填(26
0)し、シフト値によってシフトすることを含む、ように構成されている。
例えば、ライン方向は水平または垂直である。その結果、予測は、それぞれ、列に従っ
て、または、行に従ってなされる。
符号化データストリーム(6)からベース層信号(200)を再構成(80)し、
エンハンスメント層信号(360)を再構成(60)し、
再構成(60)は、
以下の構成によって、エンハンスメント層信号のブロックを空間的に予測し、
中間層予測信号(380)を得るために、再構成されたベース層信号(200a,20
0b,200c)に、解像度または品質の改良を受け(220)させ、
中間層予測信号(380)の第1のラインを登録(260)し、エンハンスメント層信
号の既に再構成された部分の第2のラインでブロックを局所的に重ね、第1のラインと第
2のラインが両方ともライン方向に平行であるブロックを隣接させ、それによってシフト
値を得て、
第1のラインの内容で、第1のラインに共同配置されたブロックのラインを充填(26
0)し、シフト値によってシフトすることを含む、ように構成されている。
例えば、ライン方向は水平または垂直である。その結果、予測は、それぞれ、列に従っ
て、または、行に従ってなされる。
X1)スケーラブルビデオデコーダは、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックのための内部予測パラメー
タを使用することによって、符号化データストリーム(6)からベース層信号(200)
を再構成(80)し、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたエンハンスメント層信号のブロックのための内部予
測パラメータを使用することによって、符号化データストリーム(6)からエンハンスメ
ント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号の現在のブロックに隣接する、エンハンスメント層信号の隣接
するブロックが、空間内部予測モードを使用して予測されたか否かのために、エンハンス
メント層信号の隣接するブロックをチェックし、
仮に、そうであるならば、現在のブロックのためのたぶん有利な内部予測パラメータを
、隣接するブロックの内部予測パラメータと指摘し、
仮に、そうでなければ、現在のブロックのためのたぶん有利な内部予測パラメータを、
現在のブロックに共同配置されたベース層信号のブロックの内部予測パラメータと指摘し
、
現在のブロックのための符号化データストリームの中に存在する構文要素に基づいた現
在のブロックための内部予測パラメータと、たぶん有利な内部予測パラメータとを決定す
ることを含む、ように構成されている。
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックのための内部予測パラメー
タを使用することによって、符号化データストリーム(6)からベース層信号(200)
を再構成(80)し、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたエンハンスメント層信号のブロックのための内部予
測パラメータを使用することによって、符号化データストリーム(6)からエンハンスメ
ント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号の現在のブロックに隣接する、エンハンスメント層信号の隣接
するブロックが、空間内部予測モードを使用して予測されたか否かのために、エンハンス
メント層信号の隣接するブロックをチェックし、
仮に、そうであるならば、現在のブロックのためのたぶん有利な内部予測パラメータを
、隣接するブロックの内部予測パラメータと指摘し、
仮に、そうでなければ、現在のブロックのためのたぶん有利な内部予測パラメータを、
現在のブロックに共同配置されたベース層信号のブロックの内部予測パラメータと指摘し
、
現在のブロックのための符号化データストリームの中に存在する構文要素に基づいた現
在のブロックための内部予測パラメータと、たぶん有利な内部予測パラメータとを決定す
ることを含む、ように構成されている。
Y1)スケーラブルビデオデコーダは、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックの副組のための角度内部予
測パラメータを使用することによって、符号化データストリーム(6)からベース層信号
(200)を再構成(80)し、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックの副組のための角度内部予
測パラメータを使用することによって、符号化データストリーム(6)からエンハンスメ
ント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号の現在のブロックに隣接する、エンハンスメント層信号の隣接
するブロックが、角度内部予測パラメータを有する空間内部予測モードを使用して予測さ
れたか否かのために、エンハンスメント層信号の隣接するブロックをチェックし、
仮に、そうであるならば、現在のブロックのためのたぶん有利な内部予測パラメータを
、隣接するブロックの角度内部予測パラメータと指摘し、
仮に、そうではないけれども、現在のブロックに共同配置されたベース層信号のブロッ
クが、角度内部予測パラメータで符号化されるならば、現在のブロックのためのたぶん有
利な内部予測パラメータを、現在のブロックに共同配置されたベース層信号のブロックの
角度内部予測パラメータと指摘し、
現在のブロックのための符号化データストリームの中に存在する構文要素に基づいた現
在のブロックための内部予測パラメータと、たぶん有利な内部予測パラメータと決定する
ことを含む、ように構成されている。
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックの副組のための角度内部予
測パラメータを使用することによって、符号化データストリーム(6)からベース層信号
(200)を再構成(80)し、
ブロック的予測と、空間内部予測モードと時間中間予測モードとの間のブロック的選択
と、空間内部予測モードが選択されたベース層信号のブロックの副組のための角度内部予
測パラメータを使用することによって、符号化データストリーム(6)からエンハンスメ
ント層信号(360)を再構成(60)し、
再構成(60)は、
エンハンスメント層信号の現在のブロックに隣接する、エンハンスメント層信号の隣接
するブロックが、角度内部予測パラメータを有する空間内部予測モードを使用して予測さ
れたか否かのために、エンハンスメント層信号の隣接するブロックをチェックし、
仮に、そうであるならば、現在のブロックのためのたぶん有利な内部予測パラメータを
、隣接するブロックの角度内部予測パラメータと指摘し、
仮に、そうではないけれども、現在のブロックに共同配置されたベース層信号のブロッ
クが、角度内部予測パラメータで符号化されるならば、現在のブロックのためのたぶん有
利な内部予測パラメータを、現在のブロックに共同配置されたベース層信号のブロックの
角度内部予測パラメータと指摘し、
現在のブロックのための符号化データストリームの中に存在する構文要素に基づいた現
在のブロックための内部予測パラメータと、たぶん有利な内部予測パラメータと決定する
ことを含む、ように構成されている。
いくつかの実施例が装置の文脈の中で説明されているけれども、これらの実施例が、対
応する方法の記述を表わすことも明確である。そこでは、ブロックまたはデバイスが、方
法ステップまたは方法ステップの特徴に対応する。また、類似して、方法ステップの文脈
の中で記載された実施例は、対応する装置の対応するブロックまたは項目または特徴の記
述を表わす。方法ステップのいくつかまたは全てが、ハードウェア装置、例えば、マイク
ロプロセッサのようなプログラム可能なコンピュータまたは電子回路によって(または、
使用して)実行される。いくつかの実施の形態の中で、最も重要な方法ステップの1つ以
上が、そのような装置によって実行される。
応する方法の記述を表わすことも明確である。そこでは、ブロックまたはデバイスが、方
法ステップまたは方法ステップの特徴に対応する。また、類似して、方法ステップの文脈
の中で記載された実施例は、対応する装置の対応するブロックまたは項目または特徴の記
述を表わす。方法ステップのいくつかまたは全てが、ハードウェア装置、例えば、マイク
ロプロセッサのようなプログラム可能なコンピュータまたは電子回路によって(または、
使用して)実行される。いくつかの実施の形態の中で、最も重要な方法ステップの1つ以
上が、そのような装置によって実行される。
所定の実現の要求に依存して、本発明の実施の形態が、ハードウェアまたはソフトウェ
アの中で実現することができる。実現が、それぞれの方法が実行されるように、プログラ
ム可能なコンピュータシステムと協働する(または、協働できる)、保存された電子的に
読み込み可能な制御信号を有するデジタル保存媒体、例えば、フロッピー(登録商標)デ
ィスク、DVD、ブルーレイ(登録商標)、CD、ROM、PROM、EPROM、EE
PROMまたはフラッシュメモリを使用して実行される。従って、デジタル保存媒体は、
コンピュータ読み込み可能である。
アの中で実現することができる。実現が、それぞれの方法が実行されるように、プログラ
ム可能なコンピュータシステムと協働する(または、協働できる)、保存された電子的に
読み込み可能な制御信号を有するデジタル保存媒体、例えば、フロッピー(登録商標)デ
ィスク、DVD、ブルーレイ(登録商標)、CD、ROM、PROM、EPROM、EE
PROMまたはフラッシュメモリを使用して実行される。従って、デジタル保存媒体は、
コンピュータ読み込み可能である。
本発明に従ったいくつかの実施の形態が、ここに記載された方法の1つが実行されるよ
うに、プログラム可能なコンピュータシステムと協働できる電子的に読み込み可能な制御
信号を有するデータキャリアを含む。
うに、プログラム可能なコンピュータシステムと協働できる電子的に読み込み可能な制御
信号を有するデータキャリアを含む。
一般に、本発明の実施の形態が、プログラムコードを有するコンピュータプログラム製
品として実行される。コンピュータプログラム製品がコンピュータで稼働するとき、プロ
グラムコードが、方法の1つを実行するために操作される。例えば、プログラムコードは
、機械読み込み可能なキャリアに保存される。
品として実行される。コンピュータプログラム製品がコンピュータで稼働するとき、プロ
グラムコードが、方法の1つを実行するために操作される。例えば、プログラムコードは
、機械読み込み可能なキャリアに保存される。
別の実施の形態は、機械読み込み可能なキャリアに保存された、ここに記載された方法
の1つを実行するためのコンピュータプログラムを含む。
の1つを実行するためのコンピュータプログラムを含む。
言い換えれば、発明の方法の実施の形態は、コンピュータプログラムがコンピュータで
稼働するとき、コンピュータプログラムは、方法の1つを実行するためのプログラムコー
ドを有する。
稼働するとき、コンピュータプログラムは、方法の1つを実行するためのプログラムコー
ドを有する。
従って、発明の方法の更なる実施の形態は、データキャリア(または、デジタル保存媒
体、または、コンピュータ読み込み可能な媒体)は、その上に記録された、ここに記載さ
れた方法の1つを実行するためのコンピュータプログラムを含む。データキャリア、デジ
タル保存媒体または記録媒体は、通常、触知できるおよび/または触知できない。
体、または、コンピュータ読み込み可能な媒体)は、その上に記録された、ここに記載さ
れた方法の1つを実行するためのコンピュータプログラムを含む。データキャリア、デジ
タル保存媒体または記録媒体は、通常、触知できるおよび/または触知できない。
従って、発明の方法の更なる実施の形態は、ここに記載された方法の1つを実行するた
めのコンピュータプログラムを表わすデータストリームまたは信号の系列である。例えば
、データストリームまたは信号の系列が、データ通信接続経由で(例えば、インターネッ
ト経由で)移送されるように構成される。
めのコンピュータプログラムを表わすデータストリームまたは信号の系列である。例えば
、データストリームまたは信号の系列が、データ通信接続経由で(例えば、インターネッ
ト経由で)移送されるように構成される。
更なる実施の形態は、プロセス手段(例えば、コンピュータまたはプログラム可能論理
回路)が、ここに記載された方法の1つが実行されるように構成される、または、適合さ
れる。
回路)が、ここに記載された方法の1つが実行されるように構成される、または、適合さ
れる。
更なる実施の形態は、ここに記載された方法の1つが実行するためのコンピュータプロ
グラムをインストールしたコンピュータを含む。
グラムをインストールしたコンピュータを含む。
本発明に係る更なる実施の形態は、ここに記載された方法の1つを実行するためのコン
ピュータプログラムを、受信機に(例えば、電子的または光学的に)移送するように構成
された装置またはシステムを含む。例えば、受信機は、コンピュータ、モバイル機器、メ
モリ素子または同様のものである。例えば、装置またはシステムは、コンピュータプログ
ラムを受信機に移送するためにファイルサーバーを含む。
ピュータプログラムを、受信機に(例えば、電子的または光学的に)移送するように構成
された装置またはシステムを含む。例えば、受信機は、コンピュータ、モバイル機器、メ
モリ素子または同様のものである。例えば、装置またはシステムは、コンピュータプログ
ラムを受信機に移送するためにファイルサーバーを含む。
いくつかの実施の形態において、プログラム可能論理回路(例えば、フィールドプログ
ラム可能なゲートアレイ)は、ここに記載された方法の関数性のいくつかまたは全てを実
行するために使用される。いくつかの実施の形態において、フィールドプログラム可能な
ゲートアレイは、ここに記載された方法の1つを実行するためにマイクロプロセッサと協
働する。一般に、好ましくは、方法はどんなハードウェア装置によっても実行される。
ラム可能なゲートアレイ)は、ここに記載された方法の関数性のいくつかまたは全てを実
行するために使用される。いくつかの実施の形態において、フィールドプログラム可能な
ゲートアレイは、ここに記載された方法の1つを実行するためにマイクロプロセッサと協
働する。一般に、好ましくは、方法はどんなハードウェア装置によっても実行される。
上述の実施の形態は、本発明の原理のためにのみ例示するだけである。配置および本明
細書において記載される詳細の修正および変更は、他の当業者にとって明らかであるもの
と理解される。従って、差し迫った本発明の特許請求の範囲の概要のみに制限され、本実
施の形態の記述および説明の目的により特定の詳細な表現によっては制限されないことを
意図している。
細書において記載される詳細の修正および変更は、他の当業者にとって明らかであるもの
と理解される。従って、差し迫った本発明の特許請求の範囲の概要のみに制限され、本実
施の形態の記述および説明の目的により特定の詳細な表現によっては制限されないことを
意図している。
Claims (12)
- 符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
前記エンハンスメント層信号の前記再構成(60)は、
以下の構成によって、前記符号化データストリームからエンハンスメント層信号を表わ
す変換係数の変換係数ブロック(402)を復号し、
前記ベース層残留信号もしくは前記ベース層信号に基づいて、可能な副ブロックの副分
割の組の中で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに直ぐに続く連続した方法で、横断されるように、前記変換係数ブロッ
クが、選択された前記副ブロックの副分割に従って規則的に副分割される、副ブロック(
412)のユニットの中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、前記現在訪問された副ブロックが重要な変換係数を有するか否
かを示す構文要素(416)を復号し、
仮に、構文要素(416)が、前記現在訪問された副ブロックは重要な変換係数を有さ
ないことを示すならば、前記現在訪問された副ブロックの中の変換係数をゼロにセットし
、
仮に、構文要素が、前記現在訪問された副ブロックは重要な変換係数を有することを示
すならば、前記データストリームから、前記現在訪問された副ブロックの中の前記変換係
数のレベルを示す構文要素(418)を復号することを含む、ように構成されていること
、
を特徴とする、スケーラブルビデオデコーダ。 - 予測によって前記符号化データストリーム(6)からベース層信号(200)を復号し
、前記ベース層残留信号は、前記ベース層信号のための予測信号の予測残留を表わすよう
に構成されていること、を特徴とする、請求項1に記載のスケーラブルビデオデコーダ。 - 前記エンハンスメント層信号を、空間的に、時間的に、および/または中間層予測予測
し、かつ、前記エンハンスメント層信号の予測に対する予測残留として、変換係数の逆変
換ブロックを適用することによって、前記エンハンスメント層信号を再構成(60)する
ように構成されていること、を特徴とする、請求項1または請求項2に記載のスケーラブ
ルビデオデコーダ。 - 前記ベース層信号に基づいて、前記可能な副ブロックの副分割の組の中で前記副ブロッ
クの副分割を選択するように構成されていること、を特徴とする、請求項1に記載のスケ
ーラブルビデオデコーダ。 - 前記変換係数ブロックに対応する前記ベース層残留信号もしくは前記ベース層信号の部
分の中でエッジを検出し、かつ、前記選択された副ブロックの副分割の前記副ブロックの
拡張が、前記エッジに対して垂直な空間周波数軸に沿って長くなるようにセットすること
によって、前記可能な副ブロックの副分割の組の中で前記副ブロックの副分割を選択する
ように構成されていること、を特徴とする、請求項1~請求項4のいずれかに記載のスケ
ーラブルビデオデコーダ。 - 前記変換係数ブロックに対応する前記ベース層残留信号もしくは前記ベース層信号の部
分のスペクトル分解を使用し、かつ、前記選択された副ブロックの副分割の前記副ブロッ
クの拡張が、前記スペクトル分解のスペクトルエネルギー分布がより狭くなる空間周波数
軸に対して垂直な空間周波数軸に沿って長くなるようにセットすることによって、前記可
能な副ブロックの副分割の組の中で前記副ブロックの副分割を選択するように構成されて
いること、を特徴とする、請求項1~請求項4のいずれかに記載のスケーラブルビデオデ
コーダ。 - 前記ベース層残留信号もしくは前記ベース層信号に空間領域から周波数領域への変換を
実際に適用することによって、前記ベース層残留信号もしくは前記ベース層信号の部分の
前記スペクトル分解を形成するように構成されていること、を特徴とする、請求項6に記
載のスケーラブルビデオデコーダ。 - 前記エンハンスメント層信号を表わす前記変換係数ブロックに対応する、ベース層残留
信号の変換係数ブロックを結合してスケーリングし、前記ベース層残留信号の部分と重複
する部分を仕切ることによって、前記ベース層残留信号もしくは前記ベース層信号の前記
部分の前記スペクトル分解を形成するように構成されていること、を特徴とする、請求項
6に記載のスケーラブルビデオデコーダ。 - 符号化データストリーム(6)からベース層信号(200)のベース層残留信号(48
0)を復号(100)し、
エンハンスメント層信号(360)を再構成(60)し、
前記エンハンスメント層信号の前記再構成(60)は、
以下の構成によって、前記符号化データストリームからエンハンスメント層信号を表わ
す変換係数の変換係数ブロックを復号し、
前記ベース層残留信号もしくは前記ベース層信号に基づいて、可能な副ブロックの副分
割の組の中で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに直ぐに続く連続した方法で、横断されるように、前記変換係数ブロッ
クが、前記選択された副ブロックの副分割に従って規則的に副分割される、副ブロックの
ユニットの中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、前記現在訪問された副ブロックが重要な変換係数を有するか否
かを示す構文要素を復号し、
仮に、構文要素が、前記現在訪問された副ブロックは重要な変換係数を有さないことを
示すならば、前記現在訪問された副ブロックの中の変換係数をゼロにセットし、
仮に、構文要素が、前記現在訪問された副ブロックは重要な変換係数を有することを示
すならば、前記データストリームから、前記現在訪問された副ブロックの中の変換係数の
レベルを示す構文要素を復号することを含むこと、
を特徴とする、スケーラブルビデオ復号化方法。 - 符号化データストリーム(6)の中のベース層信号(200)のベース層残留信号(4
80)を符号化し、
エンハンスメント層信号(360)を符号化し、
前記エンハンスメント層信号の前記符号化は、
以下の構成によって、前記符号化データストリームからエンハンスメント層信号を表わ
す変換係数の変換係数ブロックを符号化し、
前記ベース層残留信号もしくは前記ベース層信号に基づいて、可能な副ブロックの副分
割の組の中で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに直ぐに続く連続した方法で、横断されるように、前記変換係数ブロッ
クが、前記選択された副ブロックの副分割に従って規則的に副分割される、副ブロックの
ユニットの中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、前記現在訪問された副ブロックが重要な変換係数を有するか否
かを示す構文要素を符号化し、
仮に、構文要素が、前記現在訪問された副ブロックは重要な変換係数を有することを示
すならば、前記データストリームから、前記現在訪問された副ブロックの中の変換係数の
レベルを示す構文要素を符号化することを含む、ように構成されていること、
を特徴とする、スケーラブルビデオエンコーダ。 - 符号化データストリーム(6)の中のベース層信号(200)のベース層残留信号(4
80)を符号化し、
エンハンスメント層信号(360)を符号化し、
前記エンハンスメント層信号の前記符号化は、
以下の構成によって、前記符号化データストリームからエンハンスメント層信号を表わ
す変換係数の変換係数ブロックを符号化し、
前記ベース層残留信号もしくは前記ベース層信号に基づいて、可能な副ブロックの副分
割の組の中で副ブロックの副分割を選択し、
1つの副ブロックの中の全ての位置が、副ブロックの中で定義された副ブロックの順序
で次の副ブロックに直ぐに続く連続した方法で、横断されるように、前記変換係数ブロッ
クが、前記選択された副ブロックの副分割に従って規則的に副分割される、副ブロックの
ユニットの中の変換係数の位置を横断し、
現在訪問された副ブロックに対して、
データストリームから、前記現在訪問された副ブロックが重要な変換係数を有するか否
かを示す構文要素を符号化し、
仮に、構文要素が、前記現在訪問された副ブロックは重要な変換係数を有することを示
すならば、前記データストリームから、前記現在訪問された副ブロックの中の変換係数の
レベルを示す構文要素を符号化することを含むこと、
を特徴とする、スケーラブルビデオ符号化方法。 - プログラム符号がコンピュータ上で実行されると、前記コンピュータが請求項9に記載
のスケーラブルビデオ復号化方法または請求項11に記載のスケーラブルビデオ符号化方
法を実行する、前記プログラム符号を有するコンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261708201P | 2012-10-01 | 2012-10-01 | |
US61/708,201 | 2012-10-01 | ||
JP2020148098A JP2020205618A (ja) | 2012-10-01 | 2020-09-03 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020148098A Division JP2020205618A (ja) | 2012-10-01 | 2020-09-03 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023164991A true JP2023164991A (ja) | 2023-11-14 |
Family
ID=49274661
Family Applications (18)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015534997A Active JP6763664B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2015534996A Active JP6636802B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層予測に中間層の予測寄与を使用するスケーラブルビデオ符号化 |
JP2015534998A Active JP6788346B2 (ja) | 2012-10-01 | 2013-10-01 | ベース層からの予測のための副ブロックの副分割の派生を使用するスケーラブルビデオ符号化 |
JP2015535000A Active JP6301933B2 (ja) | 2012-10-01 | 2013-10-01 | 空間内部予測パラメータの中間層予測を使用するスケーラブルビデオ符号化 |
JP2015534999A Active JP6301932B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2017198961A Active JP6760911B2 (ja) | 2012-10-01 | 2017-10-13 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2017240170A Active JP6693940B2 (ja) | 2012-10-01 | 2017-12-15 | 空間内部予測パラメータの中間層予測を使用するスケーラブルビデオ符号化 |
JP2018122462A Active JP7030025B2 (ja) | 2012-10-01 | 2018-06-27 | エンハンスメント層予測に中間層の予測寄与を使用するスケーラブルビデオ符号化 |
JP2018193886A Active JP6912438B2 (ja) | 2012-10-01 | 2018-10-12 | ベース層からの予測のための副ブロックの副分割の派生を使用するスケーラブルビデオ符号化 |
JP2018193252A Active JP6912437B2 (ja) | 2012-10-01 | 2018-10-12 | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2020148098A Pending JP2020205618A (ja) | 2012-10-01 | 2020-09-03 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2021113490A Active JP7323577B2 (ja) | 2012-10-01 | 2021-07-08 | エンハンスメント層動きパラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2021113786A Active JP7323578B2 (ja) | 2012-10-01 | 2021-07-08 | ベース層からの予測のためのサブブロックのサブ分割の導出を使用するスケーラブルビデオ符号化 |
JP2021125888A Active JP7284221B2 (ja) | 2012-10-01 | 2021-07-30 | エンハンスメント層予測に層間予測寄与を使用するスケーラブルビデオ符号化 |
JP2023081951A Pending JP2023116468A (ja) | 2012-10-01 | 2023-05-18 | エンハンスメント層予測に層間予測寄与を使用するスケーラブルビデオ符号化 |
JP2023122201A Pending JP2023159095A (ja) | 2012-10-01 | 2023-07-27 | エンハンスメント層動きパラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2023122307A Pending JP2023159098A (ja) | 2012-10-01 | 2023-07-27 | ベース層からの予測のためのサブブロックのサブ分割の導出を使用するスケーラブルビデオ符号化 |
JP2023146612A Pending JP2023164991A (ja) | 2012-10-01 | 2023-09-11 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
Family Applications Before (17)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015534997A Active JP6763664B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2015534996A Active JP6636802B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層予測に中間層の予測寄与を使用するスケーラブルビデオ符号化 |
JP2015534998A Active JP6788346B2 (ja) | 2012-10-01 | 2013-10-01 | ベース層からの予測のための副ブロックの副分割の派生を使用するスケーラブルビデオ符号化 |
JP2015535000A Active JP6301933B2 (ja) | 2012-10-01 | 2013-10-01 | 空間内部予測パラメータの中間層予測を使用するスケーラブルビデオ符号化 |
JP2015534999A Active JP6301932B2 (ja) | 2012-10-01 | 2013-10-01 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2017198961A Active JP6760911B2 (ja) | 2012-10-01 | 2017-10-13 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2017240170A Active JP6693940B2 (ja) | 2012-10-01 | 2017-12-15 | 空間内部予測パラメータの中間層予測を使用するスケーラブルビデオ符号化 |
JP2018122462A Active JP7030025B2 (ja) | 2012-10-01 | 2018-06-27 | エンハンスメント層予測に中間層の予測寄与を使用するスケーラブルビデオ符号化 |
JP2018193886A Active JP6912438B2 (ja) | 2012-10-01 | 2018-10-12 | ベース層からの予測のための副ブロックの副分割の派生を使用するスケーラブルビデオ符号化 |
JP2018193252A Active JP6912437B2 (ja) | 2012-10-01 | 2018-10-12 | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2020148098A Pending JP2020205618A (ja) | 2012-10-01 | 2020-09-03 | エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化 |
JP2021113490A Active JP7323577B2 (ja) | 2012-10-01 | 2021-07-08 | エンハンスメント層動きパラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2021113786A Active JP7323578B2 (ja) | 2012-10-01 | 2021-07-08 | ベース層からの予測のためのサブブロックのサブ分割の導出を使用するスケーラブルビデオ符号化 |
JP2021125888A Active JP7284221B2 (ja) | 2012-10-01 | 2021-07-30 | エンハンスメント層予測に層間予測寄与を使用するスケーラブルビデオ符号化 |
JP2023081951A Pending JP2023116468A (ja) | 2012-10-01 | 2023-05-18 | エンハンスメント層予測に層間予測寄与を使用するスケーラブルビデオ符号化 |
JP2023122201A Pending JP2023159095A (ja) | 2012-10-01 | 2023-07-27 | エンハンスメント層動きパラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
JP2023122307A Pending JP2023159098A (ja) | 2012-10-01 | 2023-07-27 | ベース層からの予測のためのサブブロックのサブ分割の導出を使用するスケーラブルビデオ符号化 |
Country Status (6)
Country | Link |
---|---|
US (17) | US10477210B2 (ja) |
EP (11) | EP2904783B1 (ja) |
JP (18) | JP6763664B2 (ja) |
KR (28) | KR102367210B1 (ja) |
CN (8) | CN105009577B (ja) |
WO (5) | WO2014053519A1 (ja) |
Families Citing this family (135)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2654301A4 (en) * | 2010-12-14 | 2016-02-17 | M&K Holdings Inc | METHOD FOR INTER-PREDICTIVE DECODING OF ENCODED FILMS |
PL4124034T3 (pl) * | 2010-12-22 | 2024-01-03 | Lg Electronics Inc. | Predykcja wewnątrzramkowa w kodowaniu wideo |
JP5950541B2 (ja) * | 2011-11-07 | 2016-07-13 | キヤノン株式会社 | 動きベクトル符号化装置、動きベクトル符号化方法及びプログラム、動きベクトル復号装置、動きベクトル復号方法及びプログラム |
TWI523497B (zh) * | 2011-11-10 | 2016-02-21 | Sony Corp | Image processing apparatus and method |
CN110035286B (zh) * | 2012-07-09 | 2021-11-12 | Vid拓展公司 | 用于多层视频编码的编解码器架构 |
CN104685881B (zh) * | 2012-09-28 | 2018-05-15 | 夏普株式会社 | 图像解码装置、图像编码装置以及图像解码方法 |
KR101654814B1 (ko) | 2012-09-28 | 2016-09-22 | 브이아이디 스케일, 인크. | 비디오 코딩에서 크로마 신호 향상을 위한 교차-평면 필터링 |
US9826229B2 (en) * | 2012-09-29 | 2017-11-21 | Google Technology Holdings LLC | Scan pattern determination from base layer pixel information for scalable extension |
JP6763664B2 (ja) | 2012-10-01 | 2020-09-30 | ジーイー ビデオ コンプレッション エルエルシー | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
WO2014075552A1 (en) * | 2012-11-15 | 2014-05-22 | Mediatek Inc. | Inter-layer texture coding with adaptive transform and multiple inter-layer motion candidates |
US20140185671A1 (en) * | 2012-12-27 | 2014-07-03 | Electronics And Telecommunications Research Institute | Video encoding and decoding method and apparatus using the same |
US9596465B2 (en) * | 2013-01-04 | 2017-03-14 | Intel Corporation | Refining filter for inter layer prediction of scalable video coding |
US20140198846A1 (en) * | 2013-01-16 | 2014-07-17 | Qualcomm Incorporated | Device and method for scalable coding of video information |
KR20140121315A (ko) * | 2013-04-04 | 2014-10-15 | 한국전자통신연구원 | 참조 픽처 리스트를 이용한 다 계층 기반의 영상 부호화/복호화 방법 및 그 장치 |
WO2015007754A1 (en) | 2013-07-15 | 2015-01-22 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Low delay concept in multi-layered video coding |
FR3008840A1 (fr) * | 2013-07-17 | 2015-01-23 | Thomson Licensing | Procede et dispositif de decodage d'un train scalable representatif d'une sequence d'images et procede et dispositif de codage correspondants |
CN105765979B (zh) * | 2013-09-24 | 2019-08-09 | Vid拓展公司 | 用于可缩放视频编码的层间预测 |
US9712834B2 (en) * | 2013-10-01 | 2017-07-18 | Dolby Laboratories Licensing Corporation | Hardware efficient sparse FIR filtering in video codec |
EP2938084A4 (en) * | 2013-12-27 | 2016-10-26 | Sony Corp | IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD |
KR102071581B1 (ko) * | 2014-03-31 | 2020-04-01 | 삼성전자주식회사 | 서브블록 기반 예측을 수행하는 인터 레이어 비디오 복호화 방법 및 그 장치 및 서브블록 기반 예측을 수행하는 인터 레이어 비디오 부호화 방법 및 그 장치 |
WO2015168581A1 (en) * | 2014-05-01 | 2015-11-05 | Arris Enterprises, Inc. | Reference layer and scaled reference layer offsets for scalable video coding |
CN107077726B (zh) | 2014-10-27 | 2019-04-09 | 杜比实验室特许公司 | 使用扩展颜色范围的内容映射 |
EP3206403A4 (en) * | 2014-11-04 | 2017-11-01 | Samsung Electronics Co., Ltd. | Video encoding method and apparatus therefor, and video decoding method and apparatus therefor, in which edge type offset is applied |
EP3026913A1 (en) * | 2014-11-27 | 2016-06-01 | Thomson Licensing | Scalable encoding and decoding methods and corresponding devices with combined intraprediction and interlayer prediction |
FR3029333A1 (fr) * | 2014-11-27 | 2016-06-03 | Orange | Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants |
KR101818900B1 (ko) * | 2015-02-17 | 2018-02-21 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | 향상된 동적 범위를 갖는 신호들에 대한 계층간 예측 |
EP3292687A4 (en) * | 2015-05-06 | 2019-07-03 | NGCodec Inc. | INTRA PREDICTION PROCESSOR WITH PARTITIONING OF REDUCED COST BLOCKS AND PERFECTED SELECTION OF INTRA MODES |
EP4404572A3 (en) * | 2015-07-08 | 2024-10-16 | InterDigital Madison Patent Holdings, SAS | Enhanced chroma coding using cross plane filtering |
CN107925765B (zh) * | 2015-08-19 | 2022-01-18 | 索尼公司 | 发送装置、发送方法、接收装置及接收方法 |
GB2557809B (en) | 2015-08-28 | 2021-12-01 | Kt Corp | Method and device for processing video signal |
WO2017039501A1 (en) * | 2015-09-01 | 2017-03-09 | Telefonaktiebolaget Lm Ericsson (Publ) | Spatial improvement of transform blocks |
WO2017043816A1 (ko) * | 2015-09-10 | 2017-03-16 | 엘지전자(주) | 인터-인트라 병합 예측 모드 기반 영상 처리 방법 및 이를 위한 장치 |
CN114697679A (zh) | 2015-09-11 | 2022-07-01 | 株式会社Kt | 图像解码方法、图像编码方法和包括比特流的设备 |
CN106612433B (zh) * | 2015-10-22 | 2019-11-26 | 中国科学院上海高等研究院 | 一种层析式编码译码方法 |
US10200719B2 (en) * | 2015-11-25 | 2019-02-05 | Qualcomm Incorporated | Modification of transform coefficients for non-square transform units in video coding |
WO2017121549A1 (en) * | 2016-01-12 | 2017-07-20 | Telefonaktiebolaget Lm Ericsson (Publ) | Frequency based prediction |
CN109155847A (zh) * | 2016-03-24 | 2019-01-04 | 英迪股份有限公司 | 用于编码/解码视频信号的方法和装置 |
WO2017178827A1 (en) * | 2016-04-15 | 2017-10-19 | Magic Pony Technology Limited | In-loop post filtering for video encoding and decoding |
EP3298783B1 (en) | 2016-04-15 | 2020-11-18 | Magic Pony Technology Limited | Motion compensation using temporal picture interpolation |
US10764576B2 (en) | 2016-05-04 | 2020-09-01 | Microsoft Technology Licensing, Llc | Intra-picture prediction using non-adjacent reference lines of sample values |
WO2017209455A2 (ko) * | 2016-05-28 | 2017-12-07 | 세종대학교 산학협력단 | 비디오 신호의 부호화 또는 복호화 방법 및 장치 |
US20170374369A1 (en) * | 2016-06-24 | 2017-12-28 | Mediatek Inc. | Methods and Apparatuses of Decoder Side Intra Mode Derivation |
US10440366B2 (en) | 2016-07-01 | 2019-10-08 | Intel Corporation | Method and system of video coding using content based metadata |
US10666946B2 (en) | 2016-07-01 | 2020-05-26 | Intel Corporation | Method and system of video coding using display modification input |
CN116708782A (zh) * | 2016-07-12 | 2023-09-05 | 韩国电子通信研究院 | 图像编码/解码方法以及用于该方法的记录介质 |
KR102471208B1 (ko) | 2016-09-20 | 2022-11-25 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
EP3301925A1 (en) * | 2016-09-30 | 2018-04-04 | Thomson Licensing | Method for local inter-layer prediction intra based |
CN113873260B (zh) | 2016-10-04 | 2023-02-24 | 有限公司B1影像技术研究所 | 图像数据编码/解码方法和装置 |
WO2018097669A1 (ko) * | 2016-11-24 | 2018-05-31 | 한국전자통신연구원 | 스케일러블 비디오를 처리하기 위한 방법 및 장치 |
KR102387909B1 (ko) | 2016-11-29 | 2022-04-18 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
US10694202B2 (en) * | 2016-12-01 | 2020-06-23 | Qualcomm Incorporated | Indication of bilateral filter usage in video coding |
KR102574714B1 (ko) * | 2016-12-23 | 2023-09-06 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 미리 결정된 방향성 인트라 예측 모드들의 세트를 확장하기 위한 인트라 예측 장치 |
KR20240142572A (ko) * | 2017-01-05 | 2024-09-30 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 화상의 블록 기반 예측 코딩 및 디코딩 |
US10715827B2 (en) * | 2017-01-06 | 2020-07-14 | Mediatek Inc. | Multi-hypotheses merge mode |
CN116193110A (zh) * | 2017-01-16 | 2023-05-30 | 世宗大学校产学协力团 | 影像编码/解码方法 |
WO2018190595A1 (ko) * | 2017-04-13 | 2018-10-18 | 엘지전자(주) | 비디오 신호를 엔트로피 인코딩, 디코딩하는 방법 및 장치 |
CN117014632A (zh) * | 2017-04-27 | 2023-11-07 | 松下电器(美国)知识产权公司 | 解码装置、编码装置以及非暂时性记录介质 |
WO2018200993A1 (en) | 2017-04-28 | 2018-11-01 | Zermatt Technologies Llc | Video pipeline |
US10979685B1 (en) | 2017-04-28 | 2021-04-13 | Apple Inc. | Focusing for virtual and augmented reality systems |
US10531085B2 (en) * | 2017-05-09 | 2020-01-07 | Futurewei Technologies, Inc. | Coding chroma samples in video compression |
CN107172386B (zh) * | 2017-05-09 | 2018-06-29 | 西安科技大学 | 一种基于计算机视觉的非接触式数据传输方法 |
EP3625963A4 (en) * | 2017-06-07 | 2020-11-18 | MediaTek Inc. | INTRA-INTER PREDICTION MODE METHOD AND APPARATUS FOR VIDEO CODING |
US12058309B2 (en) * | 2018-07-08 | 2024-08-06 | Mellanox Technologies, Ltd. | Application accelerator |
US11252464B2 (en) | 2017-06-14 | 2022-02-15 | Mellanox Technologies, Ltd. | Regrouping of video data in host memory |
US20200014945A1 (en) * | 2018-07-08 | 2020-01-09 | Mellanox Technologies, Ltd. | Application acceleration |
US10861142B2 (en) * | 2017-07-21 | 2020-12-08 | Apple Inc. | Gaze direction-based adaptive pre-filtering of video data |
CN107580224B (zh) * | 2017-08-08 | 2019-11-22 | 西安理工大学 | 一种面向hevc熵编码的自适应扫描方法 |
EP3451665A1 (en) | 2017-09-01 | 2019-03-06 | Thomson Licensing | Refinement of internal sub-blocks of a coding unit |
EP3457695A1 (en) * | 2017-09-18 | 2019-03-20 | Thomson Licensing | Method and apparatus for motion vector predictor adaptation for omnidirectional video |
US10986360B2 (en) * | 2017-10-16 | 2021-04-20 | Qualcomm Incorproated | Various improvements to FRUC template matching |
FR3072850B1 (fr) | 2017-10-19 | 2021-06-04 | Tdf | Procedes de codage et de decodage d'un flux de donnees representatif d'une video omnidirectionnelle |
US11297339B2 (en) * | 2017-12-06 | 2022-04-05 | V-Nova International Limited | Methods and apparatuses for hierarchically encoding and decoding a bytestream |
US10445762B1 (en) | 2018-01-17 | 2019-10-15 | Yaoshiang Ho | Online video system, method, and medium for A/B testing of video content |
EP3742403A4 (en) * | 2018-01-19 | 2021-03-17 | Panasonic Intellectual Property Corporation of America | METHOD FOR CODING THREE-DIMENSIONAL DATA, METHOD FOR DECODING THREE-DIMENSIONAL DATA, DEVICE FOR CODING THREE-DIMENSIONAL DATA AND DEVICE FOR DECODING THREE-DIMENSIONAL DATA |
JP7187566B2 (ja) * | 2018-02-09 | 2022-12-12 | フラウンホーファー-ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | パーティションベースのイントラ符号化概念 |
US10771781B2 (en) * | 2018-03-12 | 2020-09-08 | Electronics And Telecommunications Research Institute | Method and apparatus for deriving intra prediction mode |
JP2021519546A (ja) * | 2018-03-29 | 2021-08-10 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | 映像符号化のための候補変換セットの決定 |
JP7395497B2 (ja) * | 2018-05-07 | 2023-12-11 | インターデジタル ヴイシー ホールディングス, インコーポレイテッド | コード化/復号化におけるデータ依存関係 |
KR20210016581A (ko) | 2018-06-05 | 2021-02-16 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | Ibc 및 atmvp 간의 상호 작용 |
KR102701593B1 (ko) | 2018-06-21 | 2024-08-30 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 칼라 컴포넌트 간의 서브 블록 mv 상속 |
WO2019244117A1 (en) | 2018-06-21 | 2019-12-26 | Beijing Bytedance Network Technology Co., Ltd. | Unified constrains for the merge affine mode and the non-merge affine mode |
KR102598576B1 (ko) | 2018-07-02 | 2023-11-06 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 비디오 코딩에서의 필터링을 위한 장치 및 방법 |
US10645380B2 (en) * | 2018-07-09 | 2020-05-05 | Tencent America LLC | Method and apparatus for video coding |
US10715812B2 (en) * | 2018-07-13 | 2020-07-14 | Tencent America LLC | Method and apparatus for video coding |
US11051010B2 (en) * | 2018-07-18 | 2021-06-29 | Mediatek Inc. | Merge candidates with multiple hypothesis |
EP3824631A4 (en) | 2018-07-18 | 2022-07-06 | HFI Innovation Inc. | METHOD AND APPARATUS FOR MOTION COMPENSATION BANDWIDTH REDUCTION FOR VIDEO CODING SYSTEM USING MULTIHYPOTHEC |
US11032549B2 (en) | 2018-07-26 | 2021-06-08 | Google Llc | Spatial layer rate allocation |
CN108982521A (zh) * | 2018-08-04 | 2018-12-11 | 石修英 | 可视化土壤健康水平检测设备 |
KR20230169474A (ko) | 2018-08-29 | 2023-12-15 | 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 | 서브블록 기반 시간적 모션 벡터 예측을 사용한 비디오 코딩의 방법 및 장치 |
BR112021004890A2 (pt) * | 2018-09-13 | 2021-06-01 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e. V. | intrapredições ponderadas lineares afins |
EP3844959A2 (en) | 2018-09-16 | 2021-07-07 | Huawei Technologies Co., Ltd. | Apparatus and method for filtering in video coding with look-up table selected based on bitstream information |
GB2577339A (en) * | 2018-09-24 | 2020-03-25 | Sony Corp | Image data encoding and decoding |
US11006150B2 (en) * | 2018-09-24 | 2021-05-11 | Tencent America LLC | Method and apparatus for video coding |
CN117768651A (zh) | 2018-09-24 | 2024-03-26 | 北京字节跳动网络技术有限公司 | 处理视频数据的方法、装置、介质、以及比特流存储方法 |
EP3861741A1 (en) * | 2018-10-02 | 2021-08-11 | InterDigital VC Holdings, Inc. | Method and apparatus for video encoding and decoding using list of predictor candidates |
US11184461B2 (en) | 2018-10-23 | 2021-11-23 | At&T Intellectual Property I, L.P. | VR video transmission with layered video by re-using existing network infrastructures |
CN109660794B (zh) * | 2018-11-07 | 2020-07-07 | 北京达佳互联信息技术有限公司 | 帧内预测模式的决策方法、决策装置和计算机可读存储介质 |
EP3861723A4 (en) | 2018-11-10 | 2022-04-20 | Beijing Bytedance Network Technology Co., Ltd. | ROUNDS IN PAIRS OF MEDIUM CANDIDATE BILLS |
KR102127846B1 (ko) * | 2018-11-28 | 2020-06-29 | 주식회사 카이 | 영상을 처리하는 방법, 영상을 재생하는 방법 및 그 장치들 |
PT3891980T (pt) * | 2018-12-21 | 2024-07-22 | Huawei Tech Co Ltd | Método e aparelho de filtragem de interpolação para codificação preditiva |
JP7288964B2 (ja) | 2018-12-28 | 2023-06-08 | テレフオンアクチーボラゲット エルエム エリクソン(パブル) | 動きベクトル予測因子リストを生成すること |
CN113196753B (zh) | 2018-12-28 | 2023-05-12 | 华为技术有限公司 | 用于预测译码的插值滤波锐化方法和装置 |
US11032560B2 (en) * | 2019-01-17 | 2021-06-08 | Tencent America LLC | Method and apparatus for video coding without updating the HMVP table |
CN109672690B (zh) * | 2019-01-29 | 2021-02-19 | 哈尔滨工业大学 | 一种针对数据幅值范围已知的数据流进行编码的方法 |
CN113383547A (zh) | 2019-02-01 | 2021-09-10 | 北京字节跳动网络技术有限公司 | 环路整形和帧间编解码工具之间的相互作用 |
WO2020156534A1 (en) | 2019-02-01 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Interactions between in-loop reshaping and intra block copy |
WO2020163535A1 (en) | 2019-02-05 | 2020-08-13 | Beijing Dajia Internet Information Technology Co., Ltd. | Video coding using intra sub-partition coding mode |
US11012701B2 (en) * | 2019-02-22 | 2021-05-18 | Tencent America LLC | Residual coding for transform skip mode and block differential pulse-code modulation |
US11323731B2 (en) * | 2019-03-08 | 2022-05-03 | Tencent America LLC | Method and apparatus for video coding |
WO2020182140A1 (en) * | 2019-03-11 | 2020-09-17 | Beijing Bytedance Network Technology Co., Ltd. | Motion vector refinement in video coding |
CN113574889B (zh) | 2019-03-14 | 2024-01-12 | 北京字节跳动网络技术有限公司 | 环路整形信息的信令和语法 |
WO2020192614A1 (en) * | 2019-03-23 | 2020-10-01 | Beijing Bytedance Network Technology Co., Ltd. | Restrictions on adaptive-loop filtering parameter sets |
CN113940082A (zh) * | 2019-06-06 | 2022-01-14 | 北京字节跳动网络技术有限公司 | 基于子块的帧内块复制和不同编解码工具之间的交互 |
EP3989547A4 (en) * | 2019-06-21 | 2023-04-19 | Samsung Electronics Co., Ltd. | VIDEO ENCODING METHOD AND DEVICE, AND VIDEO DECODER METHOD AND DEVICE |
WO2020256615A1 (en) * | 2019-06-21 | 2020-12-24 | Telefonaktiebolaget Lm Ericsson (Publ) | Video coding layer up-switching indication |
WO2020259426A1 (en) | 2019-06-22 | 2020-12-30 | Beijing Bytedance Network Technology Co., Ltd. | Motion candidate list construction for intra block copy mode |
EP4000258A4 (en) | 2019-08-20 | 2023-03-15 | Beijing Bytedance Network Technology Co., Ltd. | SCALING POSITION-BASED COEFFICIENTS |
CN110662071B (zh) * | 2019-09-27 | 2023-10-24 | 腾讯科技(深圳)有限公司 | 视频解码方法和装置、存储介质及电子装置 |
US11323732B2 (en) | 2020-04-13 | 2022-05-03 | Tencent America LLC | Method and apparatus for video coding |
US20230209041A1 (en) * | 2020-05-22 | 2023-06-29 | Lg Electronics Inc. | Multilayer-based image coding method in video or image coding system |
CN115443650A (zh) * | 2020-06-06 | 2022-12-06 | 阿里巴巴(中国)有限公司 | 用于帧间预测的角度加权预测 |
US11330296B2 (en) * | 2020-09-14 | 2022-05-10 | Apple Inc. | Systems and methods for encoding image data |
US12058322B2 (en) * | 2020-11-05 | 2024-08-06 | Alibaba Group Holding Limited | Methods and apparatuses for filtering intra predicted video blocks |
KR20220096624A (ko) * | 2020-12-31 | 2022-07-07 | 엘지디스플레이 주식회사 | 표시 장치 |
US11595665B2 (en) | 2021-02-11 | 2023-02-28 | Qualcomm Incorporated | Upsampling reference pixels for intra-prediction in video coding |
US12058310B2 (en) * | 2021-02-26 | 2024-08-06 | Lemon Inc. | Methods of coding images/videos with alpha channels |
US20220279185A1 (en) * | 2021-02-26 | 2022-09-01 | Lemon Inc. | Methods of coding images/videos with alpha channels |
CN113271467B (zh) * | 2021-07-19 | 2021-10-22 | 成都索贝数码科技股份有限公司 | 一种支持高效编辑的超高清视频分层编解码方法 |
GB2603559B (en) | 2021-07-22 | 2023-08-09 | Imagination Tech Ltd | Coding blocks of pixels |
GB2609218B (en) * | 2021-07-22 | 2023-08-30 | Imagination Tech Ltd | Coding blocks of pixels |
WO2023164020A2 (en) * | 2022-02-25 | 2023-08-31 | Op Solutions, Llc | Systems, methods and bitstream structure for video coding and decoding for machines with adaptive inference |
US20230396799A1 (en) * | 2022-06-06 | 2023-12-07 | Tencent America LLC | Signaling method for scaling parameter in chroma from luma intra prediction mode |
WO2024010635A1 (en) * | 2022-07-05 | 2024-01-11 | Innopeak Technology, Inc. | System and method for multiple-hypothesis prediction for video coding |
KR102617498B1 (ko) | 2022-10-13 | 2023-12-27 | 주식회사 엘지에너지솔루션 | 리튬 이차전지용 음극 및 이를 위한 음극용 자성 정렬 장치 |
US20240146902A1 (en) * | 2022-10-26 | 2024-05-02 | Tencent America LLC | Context Design for Coding and Decoding Syntax Elements in Inter Prediction Modes |
Family Cites Families (264)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62145988A (ja) * | 1985-12-20 | 1987-06-30 | Fujitsu Ltd | 適応的走査線変換画像伝送方式 |
JPS631932A (ja) | 1986-06-23 | 1988-01-06 | Toshiba Corp | 振動検出器の断線検出回路 |
US5933538A (en) | 1990-07-31 | 1999-08-03 | Fujitsu Limited | Image data processing method and apparatus |
JPH05208631A (ja) | 1992-01-30 | 1993-08-20 | Aisin Seiki Co Ltd | スライドレールの取付ブラケツト |
JP3032088B2 (ja) | 1992-03-03 | 2000-04-10 | 株式会社東芝 | 動画像符号化装置 |
JPH06153180A (ja) | 1992-09-16 | 1994-05-31 | Fujitsu Ltd | 画像データ符号化方法及び装置 |
US5408580A (en) * | 1992-09-21 | 1995-04-18 | Aware, Inc. | Audio compression system employing multi-rate signal analysis |
US6252909B1 (en) * | 1992-09-21 | 2001-06-26 | Aware, Inc. | Multi-carrier transmission system utilizing channels of different bandwidth |
US5553277A (en) | 1992-12-29 | 1996-09-03 | Fujitsu Limited | Image search method for searching and retrieving desired image from memory device |
JP3189258B2 (ja) | 1993-01-11 | 2001-07-16 | ソニー株式会社 | 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置 |
EP0607484B1 (en) | 1993-01-20 | 1998-09-09 | Samsung Electronics Co. Ltd. | Method and device for encoding and decoding image data |
JP3186307B2 (ja) | 1993-03-09 | 2001-07-11 | ソニー株式会社 | 圧縮データ記録装置及び方法 |
JPH06301932A (ja) | 1993-04-15 | 1994-10-28 | Sumitomo Metal Ind Ltd | 薄膜磁気ヘッド及びその製造方法 |
CA2127151A1 (en) | 1993-09-21 | 1995-03-22 | Atul Puri | Spatially scalable video encoding and decoding |
JP3627870B2 (ja) * | 1995-02-28 | 2005-03-09 | ソニー株式会社 | 動きベクトル検出方法及び装置 |
US5619256A (en) | 1995-05-26 | 1997-04-08 | Lucent Technologies Inc. | Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions |
DE19526366A1 (de) * | 1995-07-20 | 1997-01-23 | Bosch Gmbh Robert | Verfahren zur Redundanzreduktion bei der Codierung von mehrkanaligen Signalen und Vorrichtung zur Dekodierung von redundanzreduzierten, mehrkanaligen Signalen |
JPH0951504A (ja) | 1995-08-03 | 1997-02-18 | Matsushita Electric Ind Co Ltd | 画像符号化装置及び画像復号化装置 |
EP0857392B1 (en) * | 1995-10-25 | 2004-08-11 | Sarnoff Corporation | Overlapping block zerotree wavelet image coder |
US5852565A (en) * | 1996-01-30 | 1998-12-22 | Demografx | Temporal and resolution layering in advanced television |
US6957350B1 (en) * | 1996-01-30 | 2005-10-18 | Dolby Laboratories Licensing Corporation | Encrypted and watermarked temporal and resolution layering in advanced television |
JPH09208631A (ja) | 1996-02-07 | 1997-08-12 | Mitsubishi Chem Corp | 塩化ビニル系重合体 |
JPH09238350A (ja) | 1996-03-01 | 1997-09-09 | Matsushita Electric Ind Co Ltd | 動画像符号化装置 |
US6233017B1 (en) | 1996-09-16 | 2001-05-15 | Microsoft Corporation | Multimedia compression system with adaptive block sizes |
US6545687B2 (en) | 1997-01-09 | 2003-04-08 | Canon Kabushiki Kaisha | Thumbnail manipulation using fast and aspect ratio zooming, compressing and scaling |
US6728775B1 (en) * | 1997-03-17 | 2004-04-27 | Microsoft Corporation | Multiple multicasting of multimedia streams |
AUPO951397A0 (en) | 1997-09-29 | 1997-10-23 | Canon Information Systems Research Australia Pty Ltd | A method for digital data compression |
EP0905978A3 (en) | 1997-09-29 | 2000-04-12 | Canon Kabushiki Kaisha | An encoding method and apparatus |
US6587590B1 (en) | 1998-02-02 | 2003-07-01 | The Trustees Of The University Of Pennsylvania | Method and system for computing 8×8 DCT/IDCT and a VLSI implementation |
US8050329B2 (en) | 1998-06-26 | 2011-11-01 | Mediatek Inc. | Method and apparatus for generic scalable shape coding |
AU743246B2 (en) | 1998-11-04 | 2002-01-24 | Mitsubishi Denki Kabushiki Kaisha | Image decoder and image encoder |
US6480547B1 (en) * | 1999-10-15 | 2002-11-12 | Koninklijke Philips Electronics N.V. | System and method for encoding and decoding the residual signal for fine granular scalable video |
US6476805B1 (en) | 1999-12-23 | 2002-11-05 | Microsoft Corporation | Techniques for spatial displacement estimation and multi-resolution operations on light fields |
US8117313B2 (en) | 2001-03-19 | 2012-02-14 | International Business Machines Corporation | System and method for adaptive formatting of image information for efficient delivery and presentation |
CA2582664C (en) | 2001-09-12 | 2012-04-24 | Matsushita Electric Industrial Co., Ltd. | Picture coding method and picture decoding method |
CN101448162B (zh) | 2001-12-17 | 2013-01-02 | 微软公司 | 处理视频图像的方法 |
US20030118113A1 (en) * | 2001-12-20 | 2003-06-26 | Comer Mary Lafuze | Fine-grain scalable video decoder with conditional replacement |
MXPA04007020A (es) | 2002-01-23 | 2004-10-11 | Nokia Corp | Agrupamiento de cuadros de imagen para codificacion de video. |
AU2002951574A0 (en) * | 2002-09-20 | 2002-10-03 | Unisearch Limited | Method of signalling motion information for efficient scalable video compression |
KR20050105222A (ko) * | 2003-02-17 | 2005-11-03 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 비디오 부호화 |
US8107535B2 (en) * | 2003-06-10 | 2012-01-31 | Rensselaer Polytechnic Institute (Rpi) | Method and apparatus for scalable motion vector coding |
US6900748B2 (en) | 2003-07-17 | 2005-05-31 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Method and apparatus for binarization and arithmetic coding of a data value |
US20050013498A1 (en) * | 2003-07-18 | 2005-01-20 | Microsoft Corporation | Coding of motion vector information |
JP2005135249A (ja) | 2003-10-31 | 2005-05-26 | Kddi Corp | 映像の領域分割装置 |
US7346111B2 (en) * | 2003-12-10 | 2008-03-18 | Lsi Logic Corporation | Co-located motion vector storage |
EP1558039A1 (en) * | 2004-01-21 | 2005-07-27 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for generating/evaluating prediction information in picture signal encoding/decoding |
US7227894B2 (en) * | 2004-02-24 | 2007-06-05 | Industrial Technology Research Institute | Method and apparatus for MPEG-4 FGS performance enhancement |
US7627037B2 (en) | 2004-02-27 | 2009-12-01 | Microsoft Corporation | Barbell lifting for multi-layer wavelet coding |
US7418144B2 (en) * | 2004-03-03 | 2008-08-26 | Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada | Curved wavelet transform for image and video compression |
WO2005099271A1 (en) * | 2004-04-06 | 2005-10-20 | Koninklijke Philips Electronics N.V. | Device and method for receiving video data |
KR100586882B1 (ko) * | 2004-04-13 | 2006-06-08 | 삼성전자주식회사 | 모션 스케일러빌리티를 지원하는 코딩 방법 및 장치 |
US8442108B2 (en) * | 2004-07-12 | 2013-05-14 | Microsoft Corporation | Adaptive updates in motion-compensated temporal filtering |
US8340177B2 (en) * | 2004-07-12 | 2012-12-25 | Microsoft Corporation | Embedded base layer codec for 3D sub-band coding |
US8374238B2 (en) * | 2004-07-13 | 2013-02-12 | Microsoft Corporation | Spatial scalability in 3D sub-band decoding of SDMCTF-encoded video |
CN100466735C (zh) * | 2004-07-15 | 2009-03-04 | 三星电子株式会社 | 视频编码和解码方法以及视频编码器和解码器 |
KR100679011B1 (ko) * | 2004-07-15 | 2007-02-05 | 삼성전자주식회사 | 기초 계층을 이용하는 스케일러블 비디오 코딩 방법 및 장치 |
KR100678949B1 (ko) | 2004-07-15 | 2007-02-06 | 삼성전자주식회사 | 비디오 코딩 및 디코딩 방법, 비디오 인코더 및 디코더 |
DE102004041664A1 (de) | 2004-08-27 | 2006-03-09 | Siemens Ag | Verfahren zum Codieren und Decodieren, sowie Codier- und Decodiervorrichtung zur Videocodierung |
JP2008516556A (ja) * | 2004-10-13 | 2008-05-15 | トムソン ライセンシング | コンプレクシティスケーラブル映像符号化復号化方法及び装置 |
DE102004059993B4 (de) | 2004-10-15 | 2006-08-31 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium |
KR100703740B1 (ko) | 2004-10-21 | 2007-04-05 | 삼성전자주식회사 | 다 계층 기반의 모션 벡터를 효율적으로 부호화하는 방법및 장치 |
KR100679025B1 (ko) * | 2004-11-12 | 2007-02-05 | 삼성전자주식회사 | 다 계층 기반의 인트라 예측 방법, 및 그 방법을 이용한비디오 코딩 방법 및 장치 |
KR100679031B1 (ko) * | 2004-12-03 | 2007-02-05 | 삼성전자주식회사 | 다 계층 기반의 비디오 인코딩 방법, 디코딩 방법 및 상기방법을 이용한 장치 |
EP1817911A4 (en) * | 2004-12-03 | 2015-05-20 | Samsung Electronics Co Ltd | METHOD AND DEVICE FOR MULTILAYER VIDEO ENCODING AND DECODING |
EP1694074A1 (en) | 2005-02-18 | 2006-08-23 | Thomson Licensing | Process for scalable coding of images |
KR100888962B1 (ko) * | 2004-12-06 | 2009-03-17 | 엘지전자 주식회사 | 영상 신호의 인코딩 및 디코딩 방법 |
KR100888963B1 (ko) * | 2004-12-06 | 2009-03-17 | 엘지전자 주식회사 | 영상 신호의 스케일러블 인코딩 및 디코딩 방법 |
US20060153295A1 (en) * | 2005-01-12 | 2006-07-13 | Nokia Corporation | Method and system for inter-layer prediction mode coding in scalable video coding |
EP1836858A1 (en) | 2005-01-14 | 2007-09-26 | Sungkyunkwan University | Methods of and apparatuses for adaptive entropy encoding and adaptive entropy decoding for scalable video encoding |
KR100703748B1 (ko) | 2005-01-25 | 2007-04-05 | 삼성전자주식회사 | 다 계층 기반의 비디오 프레임을 효율적으로 예측하는 방법및 그 방법을 이용한 비디오 코딩 방법 및 장치 |
US7792385B2 (en) | 2005-01-25 | 2010-09-07 | Globalfoundries Inc. | Scratch pad for storing intermediate loop filter data |
US8576924B2 (en) | 2005-01-25 | 2013-11-05 | Advanced Micro Devices, Inc. | Piecewise processing of overlap smoothing and in-loop deblocking |
KR100703751B1 (ko) | 2005-02-14 | 2007-04-06 | 삼성전자주식회사 | 가상 영역의 영상을 참조하여 인코딩 및 디코딩 하는 방법및 장치 |
JP5213456B2 (ja) * | 2005-02-18 | 2013-06-19 | トムソン ライセンシング | 高分解能ピクチャの符号化情報を低分解能ピクチャから導き出す方法、並びにその方法を実現する符号化及び復号化装置 |
JP5065051B2 (ja) | 2005-02-18 | 2012-10-31 | トムソン ライセンシング | 低解像度画像から高解像度画像の符号化情報を導出する方法、並びに、係る方法を実現する符号化及び復号化装置 |
KR100703770B1 (ko) | 2005-03-25 | 2007-04-06 | 삼성전자주식회사 | 가중 예측을 이용한 비디오 코딩 및 디코딩 방법, 이를위한 장치 |
JP4854046B2 (ja) * | 2005-04-06 | 2012-01-11 | トムソン ライセンシング | エンハンスメント層ビデオ・データを符号化する方法および装置 |
EP1711018A1 (en) * | 2005-04-08 | 2006-10-11 | Thomson Licensing | Method and apparatus for encoding video pictures, and method and apparatus for decoding video pictures |
US7876833B2 (en) | 2005-04-11 | 2011-01-25 | Sharp Laboratories Of America, Inc. | Method and apparatus for adaptive up-scaling for spatially scalable coding |
EP1878257A1 (en) | 2005-04-12 | 2008-01-16 | Nokia Corporation | Method and system for motion compensated fine granularity scalable video coding with drift control |
KR100896279B1 (ko) * | 2005-04-15 | 2009-05-07 | 엘지전자 주식회사 | 영상 신호의 스케일러블 인코딩 및 디코딩 방법 |
US8619860B2 (en) | 2005-05-03 | 2013-12-31 | Qualcomm Incorporated | System and method for scalable encoding and decoding of multimedia data using multiple layers |
US8059608B2 (en) * | 2005-06-14 | 2011-11-15 | Qualcomm Incorporated | Transmit spatial diversity for cellular single frequency networks |
US7965773B1 (en) | 2005-06-30 | 2011-06-21 | Advanced Micro Devices, Inc. | Macroblock cache |
KR101154999B1 (ko) | 2005-07-08 | 2012-07-09 | 엘지전자 주식회사 | 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는 방법 |
KR100878827B1 (ko) * | 2005-07-08 | 2009-01-14 | 엘지전자 주식회사 | 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는방법 |
WO2007008286A1 (en) * | 2005-07-11 | 2007-01-18 | Thomson Licensing | Method and apparatus for macroblock adaptive inter-layer intra texture prediction |
JP4486560B2 (ja) * | 2005-07-14 | 2010-06-23 | 日本電信電話株式会社 | スケーラブル符号化方法および装置,スケーラブル復号方法および装置,並びにそれらのプログラムおよびその記録媒体 |
US7630882B2 (en) | 2005-07-15 | 2009-12-08 | Microsoft Corporation | Frequency segmentation to obtain bands for efficient coding of digital media |
US7562021B2 (en) | 2005-07-15 | 2009-07-14 | Microsoft Corporation | Modification of codewords in dictionary used for efficient coding of digital media spectral data |
US8369406B2 (en) | 2005-07-18 | 2013-02-05 | Electronics And Telecommunications Research Institute | Apparatus of predictive coding/decoding using view-temporal reference picture buffers and method using the same |
US8289370B2 (en) * | 2005-07-20 | 2012-10-16 | Vidyo, Inc. | System and method for scalable and low-delay videoconferencing using scalable video coding |
MX2008000906A (es) | 2005-07-21 | 2008-03-18 | Thomson Licensing | Metodo y aparato para la prediccion ponderada para la codificacion escalable de video. |
KR100678911B1 (ko) * | 2005-07-21 | 2007-02-05 | 삼성전자주식회사 | 방향적 인트라 예측의 적용을 확장하여 비디오 신호를인코딩하고 디코딩하는 방법 및 장치 |
US20070025444A1 (en) | 2005-07-28 | 2007-02-01 | Shigeyuki Okada | Coding Method |
KR100746011B1 (ko) * | 2005-08-24 | 2007-08-06 | 삼성전자주식회사 | 잔차 예측의 성능 개선 방법, 상기 방법을 이용한 비디오인코더 및 비디오 디코더 |
JP4490351B2 (ja) * | 2005-08-29 | 2010-06-23 | 日本電信電話株式会社 | 階層間予測処理方法,階層間予測処理装置,階層間予測処理プログラムおよびその記録媒体 |
KR100736086B1 (ko) | 2005-09-06 | 2007-07-06 | 삼성전자주식회사 | 엔트로피 코딩의 성능 향상 방법 및 장치, 상기 방법을이용한 비디오 코딩 방법 및 장치 |
JP4663792B2 (ja) | 2005-09-21 | 2011-04-06 | サムスン エレクトロニクス カンパニー リミテッド | 多視点動映像を符号化及び復号化する装置及び方法 |
US8340450B2 (en) * | 2005-09-23 | 2012-12-25 | Telefonaktiebolaget Lm Ericsson (Publ) | Successively refinable lattice vector quantization |
US7348903B2 (en) | 2005-09-26 | 2008-03-25 | Samsung Electronics Co., Ltd. | Method and apparatus for enhancing performance of entropy coding, and video coding method and apparatus using the entropy coding performance enhancing method |
US20070126853A1 (en) | 2005-10-03 | 2007-06-07 | Nokia Corporation | Variable length codes for scalable video coding |
KR100891662B1 (ko) * | 2005-10-05 | 2009-04-02 | 엘지전자 주식회사 | 비디오 신호 디코딩 및 인코딩 방법 |
US8180826B2 (en) * | 2005-10-31 | 2012-05-15 | Microsoft Corporation | Media sharing and authoring on the web |
FR2894421B1 (fr) * | 2005-12-07 | 2008-01-18 | Canon Kk | Procede et dispositif de decodage d'un flux video code suivant un codage hierarchique |
KR100772870B1 (ko) | 2005-12-12 | 2007-11-02 | 삼성전자주식회사 | Fgs 계층의 블록에 포함되는 계수의 특성에 따라 비디오신호를 부호화하고 복호화하는 방법 및 장치 |
JP4565392B2 (ja) | 2005-12-22 | 2010-10-20 | 日本ビクター株式会社 | 映像信号階層復号化装置、映像信号階層復号化方法、及び映像信号階層復号化プログラム |
GB0600141D0 (en) * | 2006-01-05 | 2006-02-15 | British Broadcasting Corp | Scalable coding of video signals |
CN101401440A (zh) | 2006-01-09 | 2009-04-01 | 诺基亚公司 | 可伸缩视频编码中的差错恢复模式判决 |
ZA200805337B (en) | 2006-01-09 | 2009-11-25 | Thomson Licensing | Method and apparatus for providing reduced resolution update mode for multiview video coding |
EP1977608B1 (en) | 2006-01-09 | 2020-01-01 | LG Electronics, Inc. | Inter-layer prediction method for video signal |
US20070201550A1 (en) * | 2006-01-09 | 2007-08-30 | Nokia Corporation | Method and apparatus for entropy coding in fine granularity scalable video coding |
US8315308B2 (en) * | 2006-01-11 | 2012-11-20 | Qualcomm Incorporated | Video coding with fine granularity spatial scalability |
US8619865B2 (en) | 2006-02-16 | 2013-12-31 | Vidyo, Inc. | System and method for thinning of scalable video coding bit-streams |
US8693538B2 (en) | 2006-03-03 | 2014-04-08 | Vidyo, Inc. | System and method for providing error resilience, random access and rate control in scalable video communications |
US8340179B2 (en) * | 2006-03-21 | 2012-12-25 | Canon Kabushiki Kaisha | Methods and devices for coding and decoding moving images, a telecommunication system comprising such a device and a program implementing such a method |
EP1859630B1 (en) | 2006-03-22 | 2014-10-22 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Coding scheme enabling precision-scalability |
US20070230567A1 (en) | 2006-03-28 | 2007-10-04 | Nokia Corporation | Slice groups and data partitioning in scalable video coding |
US8320450B2 (en) | 2006-03-29 | 2012-11-27 | Vidyo, Inc. | System and method for transcoding between scalable and non-scalable video codecs |
PL2008460T3 (pl) * | 2006-03-30 | 2017-10-31 | Lg Electronics Inc | Sposób i urządzenie do dekodowania/kodowania sygnału wideo |
KR100781525B1 (ko) * | 2006-04-06 | 2007-12-03 | 삼성전자주식회사 | 가중 평균합을 이용하여 fgs 계층을 인코딩 및디코딩하는 방법 및 장치 |
US8275037B2 (en) * | 2006-05-05 | 2012-09-25 | Thomson Licensing | Simplified inter-layer motion prediction for scalable video coding |
WO2007136094A1 (ja) | 2006-05-24 | 2007-11-29 | Panasonic Corporation | 動画像復号装置 |
US7773672B2 (en) * | 2006-05-30 | 2010-08-10 | Freescale Semiconductor, Inc. | Scalable rate control system for a video encoder |
CN101491107B (zh) * | 2006-07-07 | 2012-07-18 | 艾利森电话股份有限公司 | 一种对图像元素组进行解码的方法及其相关的编码器、解码器 |
WO2008004940A1 (en) * | 2006-07-07 | 2008-01-10 | Telefonaktiebolaget Lm Ericsson (Publ) | Video data management |
US8059714B2 (en) * | 2006-07-10 | 2011-11-15 | Sharp Laboratories Of America, Inc. | Methods and systems for residual layer scaling |
WO2008007792A1 (en) | 2006-07-10 | 2008-01-17 | Sharp Kabushiki Kaisha | Methods and systems for combining layers in a multi-layer bitstream |
US7885471B2 (en) | 2006-07-10 | 2011-02-08 | Sharp Laboratories Of America, Inc. | Methods and systems for maintenance and use of coded block pattern information |
US8422555B2 (en) * | 2006-07-11 | 2013-04-16 | Nokia Corporation | Scalable video coding |
JP5021739B2 (ja) | 2006-07-12 | 2012-09-12 | エルジー エレクトロニクス インコーポレイティド | 信号処理方法及び装置 |
US8155454B2 (en) | 2006-07-20 | 2012-04-10 | Qualcomm Incorporated | Method and apparatus for encoder assisted post-processing |
US8253752B2 (en) | 2006-07-20 | 2012-08-28 | Qualcomm Incorporated | Method and apparatus for encoder assisted pre-processing |
US9001899B2 (en) | 2006-09-15 | 2015-04-07 | Freescale Semiconductor, Inc. | Video information processing system with selective chroma deblock filtering |
US8942292B2 (en) | 2006-10-13 | 2015-01-27 | Qualcomm Incorporated | Efficient significant coefficients coding in scalable video codecs |
US9014280B2 (en) * | 2006-10-13 | 2015-04-21 | Qualcomm Incorporated | Video coding with adaptive filtering for motion compensated prediction |
JP2008099045A (ja) | 2006-10-13 | 2008-04-24 | Nippon Telegr & Teleph Corp <Ntt> | スケーラブル符号化方法,復号方法,これらの装置,およびこれらのプログラム並びにその記録媒体 |
EP2077038B1 (en) | 2006-10-18 | 2013-01-30 | Apple Inc. | Scalable video coding with filtering of lower layers |
US20080095228A1 (en) | 2006-10-20 | 2008-04-24 | Nokia Corporation | System and method for providing picture output indications in video coding |
WO2008051755A2 (en) * | 2006-10-20 | 2008-05-02 | Motorola, Inc. | Method and apparatus for intra-frame spatial scalable video coding |
US20080095235A1 (en) * | 2006-10-20 | 2008-04-24 | Motorola, Inc. | Method and apparatus for intra-frame spatial scalable video coding |
US8774269B2 (en) | 2006-10-25 | 2014-07-08 | Franuhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Quality scalable coding with mapping different ranges of bit depths |
MY146880A (en) | 2006-11-09 | 2012-10-15 | Invenpro M Sdn Bhd | Method for drying a substrate |
US8054885B2 (en) * | 2006-11-09 | 2011-11-08 | Lg Electronics Inc. | Method and apparatus for decoding/encoding a video signal |
US7545293B2 (en) * | 2006-11-14 | 2009-06-09 | Qualcomm Incorporated | Memory efficient coding of variable length codes |
US7573407B2 (en) * | 2006-11-14 | 2009-08-11 | Qualcomm Incorporated | Memory efficient adaptive block coding |
WO2008061211A2 (en) | 2006-11-15 | 2008-05-22 | Qualcomm Incorporated | Systems and methods for applications using channel switch frames |
US9445128B2 (en) | 2006-12-08 | 2016-09-13 | Freescale Semiconductor, Inc. | System and method of determining deblocking control flag of scalable video system for indicating presentation of deblocking parameters for multiple layers |
US9961372B2 (en) * | 2006-12-08 | 2018-05-01 | Nxp Usa, Inc. | Adaptive disabling of deblock filtering based on a content characteristic of video information |
EP1933563A1 (en) * | 2006-12-14 | 2008-06-18 | Thomson Licensing | Method and apparatus for encoding and/or decoding bit depth scalable video data using adaptive enhancement layer residual prediction |
US8331448B2 (en) | 2006-12-22 | 2012-12-11 | Qualcomm Incorporated | Systems and methods for efficient spatial intra predictabilty determination (or assessment) |
CN101622877A (zh) | 2006-12-22 | 2010-01-06 | 高通股份有限公司 | 用于有效空间帧内可预测性确定(或评估)的系统和方法 |
WO2008083296A2 (en) | 2006-12-28 | 2008-07-10 | Vidyo, Inc. | System and method for in-loop deblocking in scalable video coding |
ES2535314T3 (es) | 2006-12-28 | 2015-05-08 | Nippon Telegraph And Telephone Corporation | Método de codificación de vídeo, método de decodificación, dispositivo de los mismos, programa de los mismos, y medio de almacenamiento que contiene el programa |
RU2426267C2 (ru) | 2007-01-08 | 2011-08-10 | Нокиа Корпорейшн | Усовершенствованное межуровневое предсказание для расширенной пространственной масштабируемости при кодировании видеосигнала |
US8335261B2 (en) * | 2007-01-08 | 2012-12-18 | Qualcomm Incorporated | Variable length coding techniques for coded block patterns |
US8199812B2 (en) * | 2007-01-09 | 2012-06-12 | Qualcomm Incorporated | Adaptive upsampling for scalable video coding |
KR20080066522A (ko) | 2007-01-11 | 2008-07-16 | 삼성전자주식회사 | 다시점 영상의 부호화, 복호화 방법 및 장치 |
US8126062B2 (en) | 2007-01-16 | 2012-02-28 | Cisco Technology, Inc. | Per multi-block partition breakpoint determining for hybrid variable length coding |
US20080170611A1 (en) | 2007-01-17 | 2008-07-17 | Srikrishna Ramaswamy | Configurable functional multi-processing architecture for video processing |
KR101341111B1 (ko) * | 2007-01-18 | 2013-12-13 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 화질 스케일러블 비디오 데이터 스트림 |
US20080205508A1 (en) | 2007-02-22 | 2008-08-28 | Streaming Networks (Pvt.) Ltd. | Method and apparatus for low complexity video encoding and decoding |
WO2008111005A1 (en) * | 2007-03-15 | 2008-09-18 | Nokia Corporation | System and method for providing improved residual prediction for spatial scalability in video coding |
US8204129B2 (en) | 2007-03-27 | 2012-06-19 | Freescale Semiconductor, Inc. | Simplified deblock filtering for reduced memory access and computational complexity |
US8488677B2 (en) | 2007-04-25 | 2013-07-16 | Lg Electronics Inc. | Method and an apparatus for decoding/encoding a video signal |
KR20080107965A (ko) * | 2007-06-08 | 2008-12-11 | 삼성전자주식회사 | 객체 경계 기반 파티션을 이용한 영상의 부호화, 복호화방법 및 장치 |
CN101690231A (zh) | 2007-06-28 | 2010-03-31 | 汤姆森特许公司 | 多视图编码视频的单环解码 |
WO2009003499A1 (en) * | 2007-06-29 | 2009-01-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Scalable video coding supporting pixel value refinement scalability |
US8265144B2 (en) | 2007-06-30 | 2012-09-11 | Microsoft Corporation | Innovations in video decoder implementations |
WO2009011492A1 (en) | 2007-07-13 | 2009-01-22 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding and decoding stereoscopic image format including both information of base view image and information of additional view image |
BRPI0815108A2 (pt) | 2007-08-15 | 2015-01-27 | Thomson Licensing | Métodos e aparelho para modo de avanço de movimento em vídeo codificado de multi-visitas com o uso de vetores de disparidade regional |
US8938009B2 (en) | 2007-10-12 | 2015-01-20 | Qualcomm Incorporated | Layered encoded bitstream structure |
KR101345287B1 (ko) * | 2007-10-12 | 2013-12-27 | 삼성전자주식회사 | 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치 |
US8432968B2 (en) | 2007-10-15 | 2013-04-30 | Qualcomm Incorporated | Scalable video coding techniques for scalable bitdepths |
CN101415115B (zh) | 2007-10-15 | 2011-02-02 | 华为技术有限公司 | 基于运动跳跃模式的视频编解码方法及其编解码器 |
US7777654B2 (en) | 2007-10-16 | 2010-08-17 | Industrial Technology Research Institute | System and method for context-based adaptive binary arithematic encoding and decoding |
BRPI0817770B1 (pt) * | 2007-10-16 | 2020-11-10 | Interdigital Madison Patent Holdings | métodos e aparelhos para a remoção de artefatos para a escalabilidade de profundidade em bits |
KR100918862B1 (ko) | 2007-10-19 | 2009-09-28 | 광주과학기술원 | 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체 |
RU2461978C2 (ru) | 2007-10-25 | 2012-09-20 | Ниппон Телеграф Энд Телефон Корпорейшн | Способ масштабируемого кодирования и способ масштабируемого декодирования видеоинформации, устройства для них, программы для них и носитель записи, на котором записаны программы |
KR20090055803A (ko) | 2007-11-29 | 2009-06-03 | 광주과학기술원 | 다시점 깊이맵 생성 방법 및 장치, 다시점 영상에서의변이값 생성 방법 |
CN101198064A (zh) * | 2007-12-10 | 2008-06-11 | 武汉大学 | 一种分辨率分层技术中的运动矢量预测方法 |
US8175158B2 (en) | 2008-01-04 | 2012-05-08 | Sharp Laboratories Of America, Inc. | Methods and systems for inter-layer image prediction parameter determination |
KR101560182B1 (ko) | 2008-01-07 | 2015-10-15 | 삼성전자주식회사 | 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 |
US8126054B2 (en) * | 2008-01-09 | 2012-02-28 | Motorola Mobility, Inc. | Method and apparatus for highly scalable intraframe video coding |
BRPI0821500A2 (pt) | 2008-01-11 | 2015-06-16 | Thomson Licensing | Codificação de vídeo e profundidade |
EP2243297B1 (en) * | 2008-02-05 | 2017-03-08 | Thomson Licensing | Methods and apparatus for implicit block segmentation in video encoding and decoding |
US8861598B2 (en) * | 2008-03-19 | 2014-10-14 | Cisco Technology, Inc. | Video compression using search techniques of long-term reference memory |
PL2835976T3 (pl) * | 2008-04-16 | 2017-04-28 | Ge Video Compression, Llc | Skalowalność głębi bitowej |
WO2009131688A2 (en) | 2008-04-25 | 2009-10-29 | Thomson Licensing | Inter-view skip modes with depth |
WO2009131703A2 (en) | 2008-04-25 | 2009-10-29 | Thomson Licensing | Coding of depth signal |
CA2727569C (en) * | 2008-06-09 | 2017-09-26 | Vidyo, Inc. | Improved view layout management in scalable video and audio communication systems |
KR101663819B1 (ko) | 2008-08-20 | 2016-10-10 | 톰슨 라이센싱 | 정제된 깊이 맵 |
US8660176B2 (en) | 2008-09-26 | 2014-02-25 | Qualcomm Incorporated | Resolving geometric relationships among video data units |
US8724697B2 (en) | 2008-09-26 | 2014-05-13 | Qualcomm Incorporated | Locating motion vectors for video data units |
US8634457B2 (en) | 2008-09-26 | 2014-01-21 | Qualcomm Incorporated | Determining availability of video data units |
US8634456B2 (en) * | 2008-10-03 | 2014-01-21 | Qualcomm Incorporated | Video coding with large macroblocks |
WO2010043773A1 (en) | 2008-10-17 | 2010-04-22 | Nokia Corporation | Sharing of motion vector in 3d video coding |
EP2348733A4 (en) | 2008-10-27 | 2012-09-12 | Lg Electronics Inc | METHOD AND APPARATUS FOR THE SYNTHESIS OF VIRTUAL VISUALIZATION IMAGES |
KR101590511B1 (ko) | 2009-01-23 | 2016-02-02 | 에스케이텔레콤 주식회사 | 움직임 벡터 부호화/복호화 장치 및 방법과 그를 이용한 영상 부호화/복호화 장치 및 방법 |
WO2010090749A1 (en) | 2009-02-06 | 2010-08-12 | Thomson Licensing | Methods and apparatus for implicit and semi-implicit intra mode signaling for video encoders and decoders |
TWI468020B (zh) * | 2009-02-19 | 2015-01-01 | Sony Corp | Image processing apparatus and method |
KR20100095992A (ko) * | 2009-02-23 | 2010-09-01 | 한국과학기술원 | 비디오 부호화에서의 분할 블록 부호화 방법, 비디오 복호화에서의 분할 블록 복호화 방법 및 이를 구현하는 기록매체 |
CN102804785A (zh) * | 2009-04-13 | 2012-11-28 | 瑞尔D股份有限公司 | 编码、解码和发布增强分辨率的立体视频 |
WO2012044487A1 (en) * | 2010-10-01 | 2012-04-05 | Dolby Laboratories Licensing Corporation | Optimized filter selection for reference picture processing |
US8780999B2 (en) * | 2009-06-12 | 2014-07-15 | Qualcomm Incorporated | Assembling multiview video coding sub-BITSTREAMS in MPEG-2 systems |
US8411746B2 (en) | 2009-06-12 | 2013-04-02 | Qualcomm Incorporated | Multiview video coding over MPEG-2 systems |
EP2265026A1 (en) * | 2009-06-16 | 2010-12-22 | Canon Kabushiki Kaisha | Method and device for deblocking filtering of SVC type video streams during decoding |
US20100329361A1 (en) | 2009-06-30 | 2010-12-30 | Samsung Electronics Co., Ltd. | Apparatus and method for in-loop filtering of image data and apparatus for encoding/decoding image data using the same |
US8665964B2 (en) | 2009-06-30 | 2014-03-04 | Qualcomm Incorporated | Video coding based on first order prediction and pre-defined second order prediction mode |
WO2011005624A1 (en) | 2009-07-04 | 2011-01-13 | Dolby Laboratories Licensing Corporation | Encoding and decoding architectures for format compatible 3d video delivery |
JP5684823B2 (ja) * | 2009-11-06 | 2015-03-18 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | ハイブリッド映像符号化 |
CN102656885B (zh) * | 2009-12-14 | 2016-01-27 | 汤姆森特许公司 | 合并编码比特流 |
EP2529184A4 (en) | 2010-01-29 | 2016-03-09 | Nokia Technologies Oy | SYSTEMS, METHODS AND APPARATUSES FOR DELIVERING CONTEXT-BASED NAVIGATION SERVICES |
US20110194613A1 (en) | 2010-02-11 | 2011-08-11 | Qualcomm Incorporated | Video coding with large macroblocks |
US9973768B2 (en) | 2010-03-16 | 2018-05-15 | Texas Instruments Incorporated | CABAC decoder with decoupled arithmetic decoding and inverse binarization |
US8410959B2 (en) | 2010-04-09 | 2013-04-02 | Qualcomm, Incorporated | Variable length codes for coding of video data |
EP2375747B1 (en) * | 2010-04-12 | 2019-03-13 | Sun Patent Trust | Filter positioning and selection |
CN113556563B (zh) | 2010-04-13 | 2024-08-20 | Ge视频压缩有限责任公司 | 显著性图和变换系数块的编码 |
US9793921B2 (en) | 2010-05-12 | 2017-10-17 | Thomson Licensing Dtv | Methods and apparatus for unified significance map coding |
US9510009B2 (en) * | 2010-05-20 | 2016-11-29 | Thomson Licensing | Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding |
US20110296009A1 (en) | 2010-05-27 | 2011-12-01 | Victor Baranov | System and method for wavelets-based adaptive mobile advertising fraud detection |
US8930562B2 (en) | 2010-07-20 | 2015-01-06 | Qualcomm Incorporated | Arranging sub-track fragments for streaming video data |
KR20120012385A (ko) * | 2010-07-31 | 2012-02-09 | 오수미 | 인트라 예측 부호화 장치 |
GB2483294B (en) | 2010-09-03 | 2013-01-02 | Canon Kk | Method and device for motion estimation of video data coded according to a scalable coding structure |
JP5703781B2 (ja) | 2010-09-03 | 2015-04-22 | ソニー株式会社 | 画像処理装置および方法 |
US8780991B2 (en) | 2010-09-14 | 2014-07-15 | Texas Instruments Incorporated | Motion estimation in enhancement layers in video encoding |
US20120075436A1 (en) | 2010-09-24 | 2012-03-29 | Qualcomm Incorporated | Coding stereo video data |
CA2811660C (en) * | 2010-10-01 | 2016-08-16 | Research In Motion Limited | Methods and devices for parallel encoding and decoding using a bitstream structured for reduced delay |
US8923395B2 (en) | 2010-10-01 | 2014-12-30 | Qualcomm Incorporated | Video coding using intra-prediction |
US9532059B2 (en) * | 2010-10-05 | 2016-12-27 | Google Technology Holdings LLC | Method and apparatus for spatial scalability for video coding |
US20120082235A1 (en) * | 2010-10-05 | 2012-04-05 | General Instrument Corporation | Coding and decoding utilizing context model selection with adaptive scan pattern |
US8861617B2 (en) | 2010-10-05 | 2014-10-14 | Mediatek Inc | Method and apparatus of region-based adaptive loop filtering |
US9525884B2 (en) | 2010-11-02 | 2016-12-20 | Hfi Innovation Inc. | Method and apparatus of slice boundary filtering for high efficiency video coding |
CN106851320B (zh) | 2010-11-04 | 2020-06-02 | Ge视频压缩有限责任公司 | 数字存储介质、解码比特流的方法 |
US20120114036A1 (en) | 2010-11-10 | 2012-05-10 | Hong Kong Applied Science and Technology Research Institute Company Limited | Method and Apparatus for Multiview Video Coding |
US9497472B2 (en) | 2010-11-16 | 2016-11-15 | Qualcomm Incorporated | Parallel context calculation in video coding |
US9042440B2 (en) | 2010-12-03 | 2015-05-26 | Qualcomm Incorporated | Coding the position of a last significant coefficient within a video block based on a scanning order for the block in video coding |
US20120163448A1 (en) | 2010-12-22 | 2012-06-28 | Qualcomm Incorporated | Coding the position of a last significant coefficient of a video block in video coding |
US20120163456A1 (en) | 2010-12-22 | 2012-06-28 | Qualcomm Incorporated | Using a most probable scanning order to efficiently code scanning order information for a video block in video coding |
CA2822929C (en) * | 2011-01-04 | 2016-07-12 | Research In Motion Limited | Coding of residual data in predictive compression |
CA2822925C (en) * | 2011-01-04 | 2017-09-19 | Research In Motion Limited | Coding of residual data in predictive compression |
US9635382B2 (en) * | 2011-01-07 | 2017-04-25 | Texas Instruments Incorporated | Method, system and computer program product for determining a motion vector |
GB2487197B (en) * | 2011-01-11 | 2015-06-17 | Canon Kk | Video encoding and decoding with improved error resilience |
WO2012096164A1 (ja) | 2011-01-12 | 2012-07-19 | パナソニック株式会社 | 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置 |
US8553769B2 (en) * | 2011-01-19 | 2013-10-08 | Blackberry Limited | Method and device for improved multi-layer data compression |
JP2012149982A (ja) | 2011-01-19 | 2012-08-09 | Fujifilm Corp | 放射線画像撮影用格子ユニット及び放射線画像撮影システム、並びに格子体の製造方法 |
JP2012169762A (ja) | 2011-02-10 | 2012-09-06 | Sony Corp | 画像符号化装置と画像復号化装置およびその方法とプログラム |
US9001883B2 (en) | 2011-02-16 | 2015-04-07 | Mediatek Inc | Method and apparatus for slice common information sharing |
US9288501B2 (en) | 2011-03-08 | 2016-03-15 | Qualcomm Incorporated | Motion vector predictors (MVPs) for bi-predictive inter mode in video coding |
US9338449B2 (en) | 2011-03-08 | 2016-05-10 | Qualcomm Incorporated | Harmonized scan order for coding transform coefficients in video coding |
US20120236115A1 (en) * | 2011-03-14 | 2012-09-20 | Qualcomm Incorporated | Post-filtering in full resolution frame-compatible stereoscopic video coding |
US9071848B2 (en) | 2011-03-15 | 2015-06-30 | Broadcom Corporation | Sub-band video coding architecture for packet based transmission |
US9247249B2 (en) | 2011-04-20 | 2016-01-26 | Qualcomm Incorporated | Motion vector prediction in video coding |
CN103597827B (zh) * | 2011-06-10 | 2018-08-07 | 寰发股份有限公司 | 可伸缩视频编码方法及其装置 |
RU2583040C2 (ru) | 2011-08-30 | 2016-05-10 | Нокиа Текнолоджиз Ой | Устройство, способ и компьютерная программа для кодирования и декодирования видеосигналов |
WO2013068547A2 (en) | 2011-11-11 | 2013-05-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Efficient multi-view coding using depth-map estimate and update |
WO2013072484A1 (en) | 2011-11-18 | 2013-05-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multi-view coding with efficient residual handling |
JP2013110518A (ja) * | 2011-11-18 | 2013-06-06 | Canon Inc | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
WO2013145021A1 (ja) * | 2012-03-30 | 2013-10-03 | 株式会社日立製作所 | 画像復号方法及び画像復号装置 |
EP2853096A4 (en) * | 2012-05-21 | 2016-07-06 | Mediatek Singapore Pte Ltd | METHOD AND APPARATUS FOR FILTERING BETWEEN LAYERS FOR SCALABLE VIDEO CODING |
JP2015167267A (ja) * | 2012-07-03 | 2015-09-24 | シャープ株式会社 | 画像復号装置、および画像符号化装置 |
US9906786B2 (en) | 2012-09-07 | 2018-02-27 | Qualcomm Incorporated | Weighted prediction mode for scalable video coding |
KR20150038249A (ko) * | 2012-09-28 | 2015-04-08 | 인텔 코포레이션 | 계층간 화소 샘플 예측 |
JP6763664B2 (ja) * | 2012-10-01 | 2020-09-30 | ジーイー ビデオ コンプレッション エルエルシー | エンハンスメント層作動パラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
-
2013
- 2013-10-01 JP JP2015534997A patent/JP6763664B2/ja active Active
- 2013-10-01 KR KR1020207036488A patent/KR102367210B1/ko active IP Right Grant
- 2013-10-01 KR KR1020157011529A patent/KR101835360B1/ko active IP Right Grant
- 2013-10-01 KR KR1020247006906A patent/KR20240034863A/ko active Application Filing
- 2013-10-01 JP JP2015534996A patent/JP6636802B2/ja active Active
- 2013-10-01 KR KR1020157011364A patent/KR20150070205A/ko active Application Filing
- 2013-10-01 WO PCT/EP2013/070492 patent/WO2014053519A1/en active Application Filing
- 2013-10-01 EP EP13770936.6A patent/EP2904783B1/en active Active
- 2013-10-01 KR KR1020247012080A patent/KR20240065272A/ko active Search and Examination
- 2013-10-01 EP EP13773692.2A patent/EP2904786B1/en active Active
- 2013-10-01 WO PCT/EP2013/070490 patent/WO2014053517A1/en active Application Filing
- 2013-10-01 EP EP13773691.4A patent/EP2904785B1/en active Active
- 2013-10-01 KR KR1020227041493A patent/KR102643661B1/ko active IP Right Grant
- 2013-10-01 KR KR1020217002851A patent/KR102379609B1/ko active IP Right Grant
- 2013-10-01 KR KR1020197039023A patent/KR102257542B1/ko active IP Right Grant
- 2013-10-01 KR KR1020157011336A patent/KR102194749B1/ko active IP Right Grant
- 2013-10-01 EP EP13776752.1A patent/EP2904803A1/en not_active Ceased
- 2013-10-01 CN CN201380062694.5A patent/CN105009577B/zh active Active
- 2013-10-01 KR KR1020227009728A patent/KR102503114B1/ko active IP Right Grant
- 2013-10-01 JP JP2015534998A patent/JP6788346B2/ja active Active
- 2013-10-01 KR KR1020217015435A patent/KR102447521B1/ko active IP Right Grant
- 2013-10-01 WO PCT/EP2013/070491 patent/WO2014053518A1/en active Application Filing
- 2013-10-01 WO PCT/EP2013/070484 patent/WO2014053512A1/en active Application Filing
- 2013-10-01 WO PCT/EP2013/070486 patent/WO2014053514A1/en active Application Filing
- 2013-10-01 KR KR1020187005900A patent/KR102063306B1/ko active IP Right Grant
- 2013-10-01 KR KR1020197008139A patent/KR102095504B1/ko active IP Right Grant
- 2013-10-01 KR KR1020187000276A patent/KR102005915B1/ko active IP Right Grant
- 2013-10-01 KR KR1020197021988A patent/KR20190091377A/ko not_active IP Right Cessation
- 2013-10-01 KR KR1020227032879A patent/KR102703618B1/ko active IP Right Grant
- 2013-10-01 EP EP19187886.7A patent/EP3618436A1/en active Pending
- 2013-10-01 KR KR1020227005755A patent/KR102534713B1/ko active IP Right Grant
- 2013-10-01 JP JP2015535000A patent/JP6301933B2/ja active Active
- 2013-10-01 KR KR1020207008700A patent/KR102187179B1/ko active IP Right Grant
- 2013-10-01 CN CN201380062705.XA patent/CN105052134B/zh active Active
- 2013-10-01 KR KR1020247016757A patent/KR20240093824A/ko unknown
- 2013-10-01 KR KR1020237016616A patent/KR102668857B1/ko active IP Right Grant
- 2013-10-01 KR KR1020157011530A patent/KR102211196B1/ko active IP Right Grant
- 2013-10-01 KR KR1020207034470A patent/KR102472484B1/ko active IP Right Grant
- 2013-10-01 EP EP20211111.8A patent/EP3846468A1/en active Pending
- 2013-10-01 EP EP19171218.1A patent/EP3588947A1/en active Pending
- 2013-10-01 CN CN201380062699.8A patent/CN105052133B/zh active Active
- 2013-10-01 KR KR1020247029537A patent/KR20240135883A/ko active Search and Examination
- 2013-10-01 EP EP18210240.0A patent/EP3474546B1/en active Active
- 2013-10-01 EP EP13773689.8A patent/EP2904801B8/en active Active
- 2013-10-01 KR KR1020157011347A patent/KR101835358B1/ko active IP Right Grant
- 2013-10-01 CN CN201380062675.2A patent/CN105052132B/zh active Active
- 2013-10-01 KR KR1020217015529A patent/KR102445274B1/ko active IP Right Grant
- 2013-10-01 EP EP18177341.7A patent/EP3429203A3/en active Pending
- 2013-10-01 CN CN201910341031.6A patent/CN110267035B/zh active Active
- 2013-10-01 KR KR1020187005899A patent/KR101962442B1/ko active IP Right Grant
- 2013-10-01 EP EP22152073.7A patent/EP4054188A1/en active Pending
- 2013-10-01 KR KR1020227031961A patent/KR102657912B1/ko active IP Right Grant
- 2013-10-01 KR KR1020237005915A patent/KR20230031984A/ko not_active Application Discontinuation
- 2013-10-01 CN CN201911194632.5A patent/CN110996100B/zh active Active
- 2013-10-01 JP JP2015534999A patent/JP6301932B2/ja active Active
- 2013-10-01 CN CN201810455061.5A patent/CN108401157B/zh active Active
- 2013-10-01 CN CN201380062701.1A patent/CN104904207B/zh active Active
-
2015
- 2015-03-24 US US14/666,600 patent/US10477210B2/en active Active
- 2015-03-24 US US14/666,634 patent/US10212419B2/en active Active
- 2015-03-24 US US14/666,662 patent/US10218973B2/en active Active
- 2015-03-24 US US14/666,658 patent/US10212420B2/en active Active
- 2015-03-31 US US14/673,908 patent/US10694182B2/en active Active
-
2017
- 2017-10-13 JP JP2017198961A patent/JP6760911B2/ja active Active
- 2017-12-15 JP JP2017240170A patent/JP6693940B2/ja active Active
-
2018
- 2018-06-27 JP JP2018122462A patent/JP7030025B2/ja active Active
- 2018-09-25 US US16/140,796 patent/US10687059B2/en active Active
- 2018-09-26 US US16/142,195 patent/US10694183B2/en active Active
- 2018-10-12 JP JP2018193886A patent/JP6912438B2/ja active Active
- 2018-10-12 JP JP2018193252A patent/JP6912437B2/ja active Active
- 2018-11-05 US US16/180,292 patent/US10681348B2/en active Active
-
2019
- 2019-07-02 US US16/459,940 patent/US11134255B2/en active Active
-
2020
- 2020-04-16 US US16/850,588 patent/US12010334B2/en active Active
- 2020-04-29 US US16/861,540 patent/US11575921B2/en active Active
- 2020-05-05 US US16/867,181 patent/US11589062B2/en active Active
- 2020-05-11 US US16/871,866 patent/US11477467B2/en active Active
- 2020-09-03 JP JP2020148098A patent/JP2020205618A/ja active Pending
-
2021
- 2021-07-08 JP JP2021113490A patent/JP7323577B2/ja active Active
- 2021-07-08 JP JP2021113786A patent/JP7323578B2/ja active Active
- 2021-07-30 JP JP2021125888A patent/JP7284221B2/ja active Active
- 2021-08-25 US US17/412,171 patent/US20210409739A1/en active Pending
-
2022
- 2022-06-23 US US17/847,673 patent/US20220400271A1/en active Pending
-
2023
- 2023-02-03 US US18/164,548 patent/US20230262241A1/en active Pending
- 2023-02-06 US US18/165,318 patent/US20230262242A1/en active Pending
- 2023-05-18 JP JP2023081951A patent/JP2023116468A/ja active Pending
- 2023-07-27 JP JP2023122201A patent/JP2023159095A/ja active Pending
- 2023-07-27 JP JP2023122307A patent/JP2023159098A/ja active Pending
- 2023-09-11 JP JP2023146612A patent/JP2023164991A/ja active Pending
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7323577B2 (ja) | エンハンスメント層動きパラメータのためのベース層ヒントを使用するスケーラブルビデオ符号化 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231006 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231006 |