TWI632807B - Moving image decoding device - Google Patents

Moving image decoding device Download PDF

Info

Publication number
TWI632807B
TWI632807B TW103123396A TW103123396A TWI632807B TW I632807 B TWI632807 B TW I632807B TW 103123396 A TW103123396 A TW 103123396A TW 103123396 A TW103123396 A TW 103123396A TW I632807 B TWI632807 B TW I632807B
Authority
TW
Taiwan
Prior art keywords
layer
dependent
actual
picture
dependency
Prior art date
Application number
TW103123396A
Other languages
English (en)
Other versions
TW201503666A (zh
Inventor
豬飼知宏
山本智幸
Original Assignee
夏普股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 夏普股份有限公司 filed Critical 夏普股份有限公司
Publication of TW201503666A publication Critical patent/TW201503666A/zh
Application granted granted Critical
Publication of TWI632807B publication Critical patent/TWI632807B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability

Abstract

本發明提供一種圖像解碼裝置以及圖像編碼裝置，旨在削減多層圖像的解碼處理以及編碼處理中的與層間預測有關的碼的冗餘性。本發明的運動圖像解碼裝置具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述層依賴資訊解碼機構對實際層依賴標誌進行解碼，該實際層依賴標誌表示屬於所述依賴層清單的各層的圖片是否是被所述對象圖片參照的。

Description

運動圖像解碼裝置
本發明涉及圖像解碼裝置以及圖像編碼裝置。
作為運動圖像的編碼中的基本手法之一，有在時間方向上連續的圖像(圖片)間進行預測的幀間預測編碼。時間上接近的圖片彼此相關性高，在取圖片間的差分時，其差分值集中於零附近，因此通過利用差分值，能大幅削減碼量。
將由多個層構成的運動圖像的編碼方法一般稱為可伸縮編碼或階層編碼。在此所謂的層是指由時間方向上連續的多個圖片構成的運動圖像資料的集合。在可伸縮編碼中，除了前述的幀間預測之外，還在層間進行預測，從而實現高的編碼效率。將作為不利用層間預測的基準的層稱為基礎層，並將除此以外的層稱為擴展層。層由視點圖像構成的情況下的可伸縮編碼被稱為視圖可伸縮編碼。此時，基礎層也稱為基礎視圖，擴展層也稱為非基礎視圖(依賴視圖)。
另外，在可伸縮編碼之中，除了視圖可伸縮編碼之外，還存在空間的可伸縮編碼(作為基礎層，對解析度低的圖片進行處理，作為擴展層，對解析度高的圖片進行處理)、SNR可伸縮編碼(作為基礎層，對畫質低的圖片進行處理，作為擴展層，對畫質高的圖片進行處理)等。在可伸縮編碼中，除了將各層內的已編碼/解碼出的時間上前後的圖片用作參照圖片之外，還能將與對象層為不同的層的圖片用作參照層。將在層內的時間上的預測稱為運動預測，將表示圖片間的偏差的向量稱為運動向量。將層間的預測稱為層間預測，並將表示圖片間的偏差的向量稱為位移向量。此外，在視圖可伸縮編碼等，層由視點圖像構成的情況下，位移向量是表示視點圖像間的視差的向量，也稱為視差向量。
在運動圖像編碼方式的國際標準中，作為可伸縮編碼的例子，關於H.265/HEVC(High Efficiency Video Coding；非專利文獻1)，作為其擴展規格，多層用的可伸縮編碼方式的審議已開始。
在這樣的編碼方式的擴展中，在參數集中，對表示對象層可能參照的與對象層為不同的層的資訊即依賴層資訊進行編碼，在切片片段首部，對實際依賴層資訊進行解碼，其中，該實際依賴層資訊對由對象層的某對象圖片參照的與對象層不同的層的圖片進行表示(非專利文獻2、非專利文獻3)。
先行技術文獻
非專利文獻
非專利文獻1：“Recommendation ITU-T H.265 High efficiency video coding”, TELECOMMUNICATION STANDARDIZATION SECTOR OF ITU, 04/2013
非專利文獻2：“SHVC Working Draft 2”, JCTVC-M1008, JCT-VC, Incheon, KR, 18-26 Apr. 2013
非專利文獻3：“MV-HEVC Draft Text 4”, JCT3V-D1004, JCT-3V, Incheon, KR, 20-26 Apr. 2013
然而，在非專利文獻2或非專利文獻3中，作為實際依賴層資訊，對實際依賴層數與表示各個實際依賴層的索引進行編碼，但存在這些資訊冗餘的課題。
另外，在非專利文獻2或非專利文獻3中，存在將實際依賴層數限制為1個的標誌，但不能表示將實際依賴層數限制為1個以外的數目的情況，因此存在如下課題：對於實際依賴層數為1個以外的數，表示實際依賴層的資訊是冗餘的。
另外，在非專利文獻2或非專利文獻3中對依賴類型最大值進行解碼，但該值為2以上，因此存在必須對依賴類型進行解碼的課題。
另外，在非專利文獻2或非專利文獻3中，基於實際依賴層資訊來生成層間圖片集，並生成參照圖片清單，但由於對L0的參照圖片清單以及L1的參照圖片清單的參照清單以相同的順序來插入層間圖片集的要素，因此存在不能進行L0的參照圖片清單與L1的參照圖片清單的 區分使用、從而參照圖片索引的碼量變大這樣的課題。
本發明鑒於上述課題而提出，提供能實現實際依賴層資訊、依賴層類型、參照圖片索引的碼量減少的圖像解碼裝置、圖像編碼裝置。
根據本發明的第1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述層依賴資訊解碼機構對實際層依賴標誌進行解碼，該實際層依賴標誌表示屬於依賴層清單的各層的圖片是否是被所述對象圖片參照的。
根據上述構成的運動圖像解碼裝置，與對實際依賴層索引進行解碼的情況比較，不需要計算實際依賴層索引所需的比特數，因此起到處理變得簡單這樣的效果。另外，與對實際依賴層索引進行解碼的情況比較，起到減少碼量的效果。
根據本發明的1實施方式，所述運動圖像解碼裝置還具備：層間預測有效標誌導出機構，其導出層間預 測有效標誌，該層間預測有效標誌表示所述對象圖片是否參照與所述對象層不同的層的圖片，所述層間預測有效標誌導出機構在所述實際層依賴標誌當中的至少1個為1的情況下，將所述層間預測有效標誌設為1，在除此以外的情況下將所述層間預測有效標誌設為0。
根據上述構成的運動圖像解碼裝置，較之於顯式地解碼層間預測標誌的情況，起到減少碼量的效果。
根據本發明的1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對象層不同的層的圖片的實際依賴層資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述實際依賴層資訊解碼機構對表示由所述對象圖片參照的與所述對象層不同的層的圖片數的實際依賴層數進行解碼，在實際依賴層數與依賴層數不同的情況下，通過從編碼資料對表示依賴層清單的要素的實際依賴層索引進行解碼，來導出實際依賴層列表，並在實際依賴層數與依賴層數相等的情況下，從依賴層列表導出實際依賴層列表。
根據上述構成的運動圖像解碼裝置，在實際依賴層數與依賴層數為相同的數的情況下，不需要實際依賴層索引的解碼，因此起到減少碼量的效果。
根據本發明的第1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際依賴標誌存在標誌解碼機構，其表示是否在切片片段首部中對實際依賴層資訊進行解碼；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對象層不同的層的圖片的實際依賴層資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述實際依賴層資訊解碼機構在由所述實際依賴標誌存在標誌解碼機構解碼出的所述實際依賴標誌存在標誌為1的情況下，從編碼資料解碼實際依賴層清單RefLayerPics，在所述實際依賴標誌存在標誌為1以外的情況下，從依賴層列表RefLayerId導出所述實際依賴層列表RefLayerPics。
根據上述構成的運動圖像解碼裝置，在實際依賴標誌存在標誌為0的情況下，不需要實際依賴層索引的解碼，因此起到減少碼量的效果。
根據本發明的第1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際最大層數解碼機構，其對由對象層的某圖片參照的與所述對象層不同的層的圖片的最大值即實際最大依賴層數進行解碼；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對 象層不同的層的圖片的實際依賴層資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，實際依賴層資訊解碼機構在實際最大層數max_active_ref_layers比1大的情況下，對實際依賴層數所涉及的語法num_inter_layer_ref_pics_minus1進行解碼，在實際依賴層數為1以上的情況下，對依賴層標識符inter_layer_pred_layer_idc[]進行解碼。
根據上述構成的運動圖像解碼裝置，能限制實際最大層數，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像解碼裝置，不會進行實際最大層數以上的實際層依賴標誌的解碼，因此起到減少碼量的效果。
根據本發明的1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊是表示對象層可能參照的與對象層不同的層的資訊；實際最大層數解碼機構，其對由對象層的某圖片參照的與所述對象層不同的層的圖片的最大值即實際最大依賴層數進行解碼；實際依賴層資訊解碼機構，其對表示由所述對象層的某對象圖片參照的與所述對象層不同的層的圖片的實際依賴層資訊進行解碼；以及參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述層依賴資訊解碼機構對表示屬於所述依賴層清單的各層的圖片是否是被所述對象圖片參照的實際層依賴標誌進行解碼，在實際層依賴標誌為1的情況下，使實際依賴層數增加，進而，所述層依賴資訊解碼機構僅 在所述實際依賴層數小於所述實際最大層數的情況下，進行所述實際層依賴標誌的解碼。
根據上述構成的運動圖像解碼裝置，能限制實際最大層數，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像解碼裝置，不會進行實際最大層數以上的實際層依賴標誌的解碼，因此起到減少碼量的效果。
根據本發明的第1實施方式，具備對表示由所述對象圖片參照的與所述對象層不同的層的圖片的資訊即實際依賴層資訊進行解碼的層依賴資訊解碼機構，所述實際依賴層資訊解碼機構在所述實際最大層數大於1的情況下，對所述實際依賴層數進行解碼，在實際依賴層數與依賴層數不同的情況下，通過從編碼資料對表示依賴層清單的要素的實際依賴層索引進行解碼，來導出實際依賴層列表，在與依賴層數相等的情況下，從依賴層列表導出實際依賴層列表。
根據本發明的第1實施方式，提供一種運動圖像解碼裝置，具備：依賴類型最大值解碼機構，其對層依賴類型的最大值進行解碼；依賴類型解碼機構，其對具有所述依賴類型最大值以下的值的層依賴類型進行解碼；以及參照圖片集導出機構，其基於所述層依賴類型來生成層間參照圖片集，所述依賴類型最大值解碼機構對具有0以上的值的依賴類型最大值進行解碼，所述依賴類型解碼機構在所述依賴類型最大值為0以外的情況下，從編碼資料來解碼層依賴類型，在所述依賴類型最大值為0的情況下， 將層依賴類型作為0來導出，所述依賴類型解碼機構進而根據所述層依賴類型來導出表示依賴層是否為樣本依賴層的標誌即樣本依賴標誌SamplePredEnabledFlag、以及表示依賴層是否為運動依賴層的標誌即運動依賴標誌MotionPredEnabledFlag，在層依賴類型為0的情況下，將樣本依賴標誌SamplePredEnabledFlag以及運動依賴標誌MotionPredEnabledFlag設為1。
根據本發明的第1實施方式，提供一種運動圖像解碼裝置，具備：層依賴資訊解碼機構，其對實際依賴層資訊進行解碼，該實際依賴層資訊是表示由對象圖片參照的與對象層不同的層的圖片的資訊；參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集；以及參照圖片清單生成機構，其生成參照圖片清單，所述參照圖片清單生成機構在生成L0參照清單的情況下，從所述層間參照圖片中以給定的順序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以與所述給定的順序不同的順序進行追加。
根據上述構成的運動圖像解碼裝置，在層間參照圖片的數目為2以上的情況下，層間參照圖片在L0參照圖片與L1參照圖片中被存放於不同的位置。在此情況下，某層間參照圖片在L0參照圖片中以比L1參照圖片更小的參照圖片索引進行參照，反之，別的某層間參照圖片在L1參照圖片中以比L0參照圖片更小的參照圖片索引進行參照。小的參照圖片索引以少的碼量進行參照，因此如上所述， 起到減少參照圖片索引的碼量的效果。
根據本發明的第1實施方式，所述運動圖像解碼裝置還具備對層間參照清單追加順序標誌進行解碼的機構，其中該層間參照清單追加順序標誌對層間參照圖片清單的追加順序的標誌進行表示，所述參照圖片清單生成機構在層間參照清單追加順序標誌為某值的情況下，在生成L0參照列表時，從所述層間參照圖片中以升序進行追加，在生成L1參照列表時，從所述層間參照圖片中以降序進行追加，反之，在層間參照清單追加順序標誌並非某值的情況下，在生成L0參照列表時，從所述層間參照圖片中以降序進行追加，在生成L1參照列表時，從所述層間參照圖片中以升序進行追加。
根據上述構成的運動圖像解碼裝置，在層間參照圖片中，在L0參照圖片和L1參照圖片中能改變優先順序，同時具有在L0參照圖片中配置優先順序更高的層間參照圖片的效果。
根據本發明，在以多層為對象的可伸縮編碼/解碼中，在與層間預測有關的標誌或參數的傳輸中，能減少冗餘度來削減傳輸碼量。
1‧‧‧圖像傳輸系統
1000‧‧‧圖像資料編碼部
101‧‧‧預測圖像生成部
102‧‧‧減法部
103‧‧‧DCT/量化部
104‧‧‧熵編碼部
105‧‧‧逆量化/逆DCT部
106‧‧‧加法部
108‧‧‧預測參數存儲器(幀存儲器)
109‧‧‧參照圖片存儲器(幀存儲器)
11‧‧‧圖像編碼裝置
110‧‧‧編碼參數決定部
111‧‧‧預測參數編碼部
112‧‧‧幀間預測參數編碼部
113‧‧‧幀內預測參數編碼部
1400‧‧‧首部編碼部
1401‧‧‧參數集編碼部
1402‧‧‧切片片段首部編碼部
21‧‧‧網路
300‧‧‧圖像資料解碼部
301‧‧‧熵解碼部
302‧‧‧預測參數解碼部
303‧‧‧幀間預測參數解碼部
304‧‧‧幀內預測參數解碼部
306‧‧‧參照圖片存儲器(幀存儲器)
307‧‧‧預測參數存儲器(幀存儲器)
308‧‧‧預測圖像生成部
309‧‧‧幀間預測圖像生成部
31‧‧‧圖像解碼裝置
31A2‧‧‧圖像解碼裝置
31A3‧‧‧圖像解碼裝置
31B1‧‧‧圖像解碼裝置
31B2‧‧‧圖像解碼裝置
31C1‧‧‧圖像解碼裝置
31D1‧‧‧圖像解碼裝置
31D2‧‧‧圖像解碼裝置
310‧‧‧幀內預測圖像生成部
311‧‧‧逆量化/逆DCT部
312‧‧‧加法部
400‧‧‧首部解碼部
400A2‧‧‧首部解碼部
400A3‧‧‧首部解碼部
400B1‧‧‧首部解碼部
400B2‧‧‧首部解碼部
400B2‧‧‧首部解碼部
400C1‧‧‧首部解碼部
400D1‧‧‧首部解碼部
400D2‧‧‧首部解碼部
401‧‧‧參數集解碼部
401A3‧‧‧參數集解碼部
401B1‧‧‧參數集解碼部
401C1‧‧‧參數集解碼部
401D2‧‧‧參數集解碼部
4011‧‧‧層依賴資訊解碼部
4011C1‧‧‧層依賴資訊解碼部
4013‧‧‧實際最大層數解碼部
4012‧‧‧實際依賴標誌存在標誌解碼部
4014‧‧‧層間參照清單追加順序標誌解碼部
402‧‧‧切片片段首部解碼部
402A2‧‧‧切片片段首部解碼部
402A3‧‧‧切片片段首部解碼部
402B1‧‧‧切片片段首部解碼部
402B2‧‧‧切片片段首部解碼部
402D1‧‧‧切片片段首部解碼部
402D2‧‧‧切片片段首部解碼部
403‧‧‧實際依賴層解碼部
403A2‧‧‧實際依賴層解碼部
403A3‧‧‧實際依賴層解碼部
403B1‧‧‧實際依賴層解碼部
403B2‧‧‧實際依賴層解碼部
404‧‧‧參照圖片集導出部
404D1‧‧‧參照圖片集導出部
404D2‧‧‧參照圖片集導出部
41‧‧‧圖像顯示裝置
圖1是表示本發明所涉及的圖像傳輸系統的構成的概 略圖。
圖2是表示本發明所涉及的編碼流的數據的階層結構的圖。
圖3是表示參照圖片列表的一例的概念圖。
圖4是表示參照圖片的例子的概念圖。
圖5是表示本發明的一實施方式所涉及的圖像解碼裝置的構成的概略圖。
圖6是表示本實施方式所涉及的圖像數據解碼部的構成的概略圖。
圖7是表示本發明的實施方式所涉及的圖像編碼裝置的構成的概略圖。
圖8是表示本實施方式所涉及的圖像數據編碼部的構成的概略圖。
圖9是表示本發明所涉及的擴展視頻參數集的語法表的一例。
圖10是表示本發明所涉及的切片片段首部的語法表的一例。
圖11是說明本發明的依賴層的圖。
圖12是說明本發明的實際依賴層的圖。
圖13是說明本發明的實際樣本依賴層的圖。
圖14示出本發明的實施方式的切片片段首部解碼部402所解碼的、切片片段首部的數據結構的一例。
圖15是表示本發明的實施方式的實際依賴層解碼部403的處理的圖。
圖16是表示本發明的層間參照圖片集、總參照圖片數的導出步驟的一例。
圖17是表示本發明的實施方式的參照圖片列表的導出步驟的一例。
圖18示出本發明的實施方式的切片片段首部解碼部402A2所解碼的、切片片段首部的數據結構的一例。
圖19是表示本發明的第1實施方式所涉及的圖像解碼裝置31A3的構成的概略圖。
圖20是表示本發明的第1實施方式所涉及的實際參照層圖片數、參照層標識符的導出步驟的一例。
圖21是表示本發明的實施方式的實際依賴層解碼部403A2的處理的圖。
圖22示出本發明的實施方式的切片片段首部解碼部402A3所解碼的、切片片段首部的數據結構的一例。
圖23是表示本發明的第1實施方式所涉及的圖像解碼裝置31A4的構成的概略圖。
圖24示出本發明的第1實施方式所涉及的參數集解碼部401A4所解碼的、參數集的數據結構的一例。
圖25示出本發明的實施方式的切片片段首部解碼部402A4所解碼的、切片片段首部的數據結構的一例。
圖26是表示本發明的第2實施方式所涉及的圖像解碼裝置的構成B1的概略圖。
圖27是表示本發明的第2實施方式所涉及的圖像解碼裝置B2的構成的概略圖。
圖28示出本發明的第2實施方式所涉及的參數集解碼部401B1所解碼的、參數集的數據結構的一例。
圖29示出本發明的第2實施方式所涉及的切片片段首部解碼部402B1所解碼的、切片片段首部的數據結構的一例。
圖30示出本發明的第2實施方式所涉及的切片片段首部解碼部402B2所解碼的、切片片段首部的數據結構的一例。
圖31是表示本發明的第3實施方式所涉及的圖像解碼裝置C1的構成的概略圖。
圖32示出本發明的第3實施方式所涉及的參數集解碼部401C1所解碼的、參數集的數據結構的一例。
圖33是說明本發明的第3實施方式所涉及的層依賴類型與樣本依賴標誌、運動依賴標誌的關係的圖。
圖34是表示本發明的第4實施方式所涉及的圖像解碼裝置31D1的構成的概略圖。
圖35是表示本發明的第4實施方式的另一例所涉及的圖像解碼裝置31D2的構成的概略圖。
圖36是說明本發明的第4實施方式所涉及的參照圖片集導出部404D1的L0參照圖片列表的導出處理的圖。
圖37是說明本發明的第4實施方式所涉及的參照圖片集導出部404D1的L1參照圖片列表的導出處理的圖。
圖38是說明本發明的第4實施方式所涉及的參照圖片集導出部404D1′′的L1參照圖片列表的導出處理的 圖。
圖39示出本發明的第4實施方式所涉及的參數集解碼部401D2所解碼的、參數集的數據結構的一例。
圖40是說明本發明的第4實施方式所涉及的參照圖片集導出部404D2的L0參照圖片列表的導出處理的圖。
圖41是說明本發明的第4實施方式所涉及的參照圖片集導出部404D2的L1參照圖片列表的導出處理的圖。
(第1實施方式)
以下，參照附圖來說明本發明的實施方式。
圖1是表示本實施方式所涉及的圖像傳輸系統1的構成的概略圖。
圖像傳輸系統1是傳輸將多個層圖像進行編碼後的碼、並顯示對所傳輸的碼進行解碼後的圖像的系統。圖像傳輸系統1構成為包含：圖像編碼裝置11、網路21、圖像解碼裝置31以及圖像顯示裝置41。
對圖像編碼裝置11輸入表示多個層圖像(也稱為紋理圖像)的信號T。層圖像是指在某解析度以及某視點下所視認或拍攝的圖像。在使用多個層圖像來進行編碼三維圖像的視圖可伸縮編碼的情況下，多個層圖像各自被稱為視點圖像。在此，視點相當於拍攝裝置的位置或觀測點。例如，多個視點圖像是朝著被攝體而由左右的拍攝裝置各自拍攝出的圖像。圖像編碼裝置11對該信號各自進行 編碼來生成編碼流Te(編碼資料)。關於編碼流Te的細節將後述。視點圖像是指，在某視點下所觀測的二維圖像(平面圖像)。視點圖像例如由配置於二維平面內的每個圖元的亮度值或顏色信號值來表示。以下，將一張視點圖像或表示該視點圖像的信號稱為圖片(picture)。另外，在使用多個層圖像來進行空間可伸縮編碼的情況下，該多個層圖像由解析度低的基礎層圖像和解析度高的擴展層圖像組成。在使用多個層圖像來進行SNR可伸縮編碼的情況下，該多個層圖像由畫質低的基礎層圖像和畫質高的擴展層圖像組成。此外，可以將視圖可伸縮編碼、空間可伸縮編碼、SNR可伸縮編碼任意地組合。在本實施方式中，作為多個層圖像，至少處理包含基礎層圖像、以及基礎層圖像以外的圖像(擴展層圖像)在內的圖像的編碼以及解碼。針對多個層當中在圖像或編碼參數中處於參照關係(依賴關係)的2個層，將被參照一側的圖像稱為第1層圖像，將參照一側的圖像稱為第2層圖像。例如，在存在參照基礎層而被編碼的(基礎層以外的)擴展圖像的情況下，將基礎層圖像作為第1層圖像進行處理，將擴展圖像作為第2層圖像進行處理。此外，作為擴展層圖像的例子，有基礎視圖以外的視點圖像、測深圖像、高解析度圖像等。
網路21將由圖像編碼裝置11生成的編碼流Te傳輸給圖像解碼裝置31。網路21是互聯網(internet)、廣域網路(WAN：Wide Area Network)、小規模網路(LAN：Local Area Network)或這些的組合。網路21不必限定於雙向的 通信網，可以是對地面波數位廣播、衛星廣播等的廣播波進行傳輸的單向或雙向的通信網。另外，網路21可以代替DVD(Digital Versatile Disc)、BD(Blu-ray(注冊商標)Disc)等記錄有編碼流Te的存儲介質。
圖像解碼裝置31對由網路21傳輸的編碼流Te分別進行解碼，並生成分別解碼出的多個解碼層圖像Td(解碼視點圖像Td)。
圖像顯示裝置41對由圖像解碼裝置31生成的多個解碼層圖像Td的全部或一部分進行顯示。例如，在視圖可伸縮編碼中，在全部的情況下，對三維圖像(立體圖像)或自由視點圖像進行顯示，在一部分的情況下，對二維圖像進行顯示。圖像顯示裝置41例如具備：液晶顯示器、有機EL(Electro-luminescence)顯示器等顯示裝置。另外，在空間可伸縮編碼、SNR可伸縮編碼中，在圖像解碼裝置31、圖像顯示裝置41具有高的處理能力的情況下，對畫質高的擴展層圖像進行顯示，在僅具有更低的處理能力的情況下，對不需要擴展層那麼高的處理能力、顯示能力的基礎層圖像進行顯示。
<編碼流Te的結構>
在進行本實施方式所涉及的圖像編碼裝置11以及圖像解碼裝置31的詳細的說明之前，針對由圖像編碼裝置11生成且由圖像解碼裝置31解碼的編碼流Te的資料結構進行說明。
圖2是表示編碼流Te中的資料的階層結構的 圖。編碼流Te例示地包含序列、以及構成序列的多個圖片。圖2的(a)~(f)分別是表示對序列SEQ進行規定的序列層、對圖片PICT進行規定的圖片層、對切片S進行規定的切片層、對切片資料進行規定的切片資料層、對切片資料中所含的編碼樹單元進行規定的編碼樹層、對編碼樹中所含的編碼單位(Coding Unit；CU)進行規定的編碼單元層的圖。這些各層的編碼資料按資料的各種類，構成被稱為NAL(Network Abstraction Layer)單元的資料結構。通過NAL單元的首部部分中所含的NAL單元類型(nal_unit_type)，來示出構成對象的NAL單元的資料的種類。另外，在NAL單元首部包含層標識符(nuh_layer_id)。層標識符是用於區別成為可伸縮編碼的對象的多個層圖像(多視點的圖像等)的資訊。
(序列層)
在序列層中，為了對處理對象的序列SEQ(以下，也稱為對象序列)進行解碼而規定了圖像解碼裝置31所參照的資料的集合。序列SEQ如圖2的(a)所示，包含：視訊參數集VPS(Video Parameter Set)、序列參數集SPS(Sequence Parameter Set)、圖片參數集PPS(Picture Parameter Set)、圖片PICT以及附加擴展資訊SEI(Supplemental Enhancement Information)。在此#之後示出的值展示層ID。在圖2中示出存在# 0和# 1即層0和層1的編碼資料的例子，但層的種類以及層的數目不限於此。
在視訊參數集VPS中，在由多個層構成的運動 圖像中，規定了多個運動圖像所公共的編碼參數的集合以及運動圖像中所含的多個層以及與各層關聯的編碼參數的集合。
在序列參數集SPS中，為了解碼對象序列，規定了由圖像解碼裝置31參照的編碼參數的集合。例如，規定對象序列內的圖片的寬度或高度。
在圖片參數集PPS中，為了解碼對象序列內的各圖片，規定了由圖像解碼裝置31參照的編碼參數的集合。例如包含用於圖片的解碼的量化寬度的基準值、或表示加權預測的應用的標誌。此外，PPS可以在同一層存儲器在多個。在此情況下，從對象序列內的各圖片之中選擇應用多個PPS的哪一個。
(圖片層)
在圖片層中，為了解碼處理對象的圖片PICT(以下，也稱為對象圖片)，規定了由圖像解碼裝置31參照的資料的集合。圖片PICT如圖2的(b)所示，包含切片S0~SNS-1(NS是圖片PICT中所含的切片的總數)。
此外，以下，在無需區別切片S0~SNS-1的每一個的情況下，有時省略標號的尾碼來進行記述。另外，針對以下說明的編碼流Te中所含的資料且附上了尾碼的其他的資料也同樣。
(切片層)
在切片層中，為了解碼處理對象的切片S(也稱為對象切片)，規定了由圖像解碼裝置31參照的資料的 集合。切片S如圖2的(c)所示，包含切片首部SH以及切片資料SDATA。
在切片首部SH中，包含為了決定對象切片的解碼方法而由圖像解碼裝置31參照的編碼參數群。指定切片類型的切片類型指定資訊(slice_type)是切片首部SH中所含的編碼參數的一例。
作為通過切片類型指定資訊而能指定的切片類型，可列舉(1)在編碼之際僅使用幀內預測的I切片，(2)在編碼之際使用單向預測或幀內預測的P切片，(3)在編碼之際使用單向預測、雙向預測或幀內預測的B切片等。
另外，在切片首部SH之中，包含當切片類型為P切片或B切片時用於指定後述的時域(temporal)運動資訊的配置資訊collocated_from_l0_flag、collocated_ref_idx。
此外，切片首部SH可以包含上述序列層中所含的表示對圖片參數集PPS的參照的PPS標識符(pic_parameter_set_id)。
(切片數據層)
在切片資料層，規定了為了對處理對象的切片資料SDATA進行解碼而由圖像解碼裝置31參照的資料的集合。切片資料SDATA如圖2的(d)所示，包含編碼樹單元(CTU：Coding Tree Unit)。編碼樹單元CTU是構成切片的固定尺寸(例如圖元數64×64)的圖像區域。此外，將與編碼樹單元CTU對應的圖像塊稱為編碼樹塊(CTB： Coding Tree Block)。
此外，切片層可以以將切片進一步分割後的切片片段層為單位來進行處理，在此情況下，將前述的切片首部SH稱為切片片段首部，同樣地，將切片資料SDATA稱為切片片段資料。在以後的說明中，一部分為了簡化而記述為切片首部、切片資料，但也能分別置換為切片片段首部、切片片段資料。另外，切片片段首部、切片片段資料也能分別置換為切片首部、切片資料。
(編碼樹層)
編碼樹層如圖2的(e)所示，規定了為了對處理對象的編碼樹單元進行解碼而由圖像解碼裝置31參照的資料的集合。編碼樹單元通過遞迴的四叉樹分割而被分割。將通過遞迴的四叉樹分割而得到的樹結構稱為編碼樹(coding tree)。編碼樹單元CTU包含分割標誌(split_flag)，在split_flag為1的情況下，編碼樹單元CTU進一步被分割為4個CTU。在split_flag為0的情況下，編碼樹單元CTU被分割為4個編碼單元(CU：CodingUnit)。編碼單元CU是編碼樹層的末端節點，在該層不能再進一步分割。編碼單元CU成為編碼/解碼處理的基本的單位。
在編碼樹單元CTU的尺寸為64×64圖元的情況下，編碼單元CU的尺寸能取64×64圖元、32×32圖元、16×16圖元、以及8×8圖元的任一者。此外，將與編碼單元CU對應的圖像塊稱為編碼塊(CB：Coding Block)。
(編碼單元層)
編碼單元層如圖2的(f)所示，規定了為了對處理對象的編碼單元進行解碼而由圖像解碼裝置31參照的資料的集合。具體而言，編碼單元構成為包含：CU首部CUH、1個以上的預測單元(PU：Prediction Unit)所構成的預測樹、1個以上的變換單元(TU：Transform Unit)所構成的變換樹。
在CU首部CUH，對編碼單元是使用幀內預測的單元還是使用幀間預測的單元等進行規定。
在預測樹中，編碼單元CU被分割為1個或多個預測單元PU，對各預測單元的位置和尺寸進行規定。預測樹中的分割的種類大致來分，有幀內預測的情況和幀間預測的情況兩種。幀內預測是指同一圖片內的預測，幀間預測是指在彼此不同的圖片間(例如，顯示時刻間、層圖像間)進行的預測處理。
在幀內預測的情況下，分割方法有2N×2N(與編碼單元為同一尺寸)以及N×N。
在幀間預測的情況下，分割方法有通過CU首部CUH中所含的分割模式(part_mode)來規定的2N×2N(與編碼單元為同一尺寸)、2N×N、2N×nU、2N×nD、N×2N、nL×2N、nR×2N以及N×N等。此外，2N×nU示出將2N×2N的編碼單元從上起依次分割為2N×0.5N和2N×1.5N的2區域。2N×nD示出將2N×2N的編碼單元從上起依次分割為2N×1.5N和2N×0.5N的2區域。nL×2N示出將2N×2N的編碼單元從左起依次分割為0.5N×2N和1.5N×2N的2區域。nR×2N 示出將2N×2N的編碼單元從左起依次分割為1.5N×2N和0.5N×2N的2區域。分割數是1、2、4的任一者，因此CU中所含的PU為1個至4個。將這些PU依次表現為PU0、PU1、PU2、PU3。
另外，在變換樹中，編碼單元CU被分割為1個或多個變換單元TU，並對各變換單元的位置和尺寸進行規定。在變換樹中的分割之中，存在將與編碼單元為同一尺寸的區域作為變換單元進行分配的分割、以及與上述的編碼樹塊的分割同樣地基於遞迴的四叉樹分割的分割。
此外，將與預測單元PU、變換單元TU對應的圖像塊分別稱為預測塊(PB：Prediction Block)、變換塊(TB：Transform Block)。
(預測參數)
預測單元的預測圖像通過附隨預測單元的預測參數來導出。在預測參數之中有幀內預測的預測參數或幀間預測的預測參數。以下，說明幀間預測的預測參數(幀間預測參數)。幀間預測參數由預測清單利用標誌predFlagL0、predFlagL1、參照圖片索引refIdxL0、refIdxL1、以及向量mvL0、mvL1構成。預測清單利用標誌predFlagL0、predFlagL1分別是表示是否使用被稱為L0列表RefPicList0、L1清單RefPicList1的參照圖片清單的標誌，在值為1的情況下，使用與各標誌對應的參照圖片清單。此外，本說明書中記為“表示是否為XX的標誌”的情況下，當值為1時，設成為XX的情況，在值為0時設成為非XX的情況，在邏 輯非、邏輯與等中，將1作為真來處理，將0作為假來處理(以下同樣)。但在實際的裝置或方法中，可以使用其他的值來作為真值、假值。在使用2個參照圖片清單的情況下，也就是，predFlagL0=1、predFlagL1=1的情況下，將其預測方法稱為雙預測，在使用1個參照圖片清單的情況下，即(predFlagL0，predFlagL1)=(1,0)或(predFlagL0，predFlagL1)=(0,1)的情況下，將其預測方法稱為單預測。此外，預測清單利用標誌的資訊還能以後述的幀間預測標誌inter_pred_idc來表現。
在用於對編碼資料中所含的幀間預測參數進行導出的語法要素之中，例如有分割模式part_mode、合併標誌merge_flag、合併索引merge_idx、幀間預測標誌inter_pred_idc、參照圖片索引refIdxLX、預測向量索引mvp_LX_idx、差分向量mvdLX。
(參照圖片清單)
接下來，說明參照圖片清單Ref的一例。參照圖片清單是指，後述的參照圖片存儲器306(圖6)中所存儲的參照圖片所組成的資訊集合。圖3是表示參照圖片清單的一例的概念圖。在參照圖片清單601中，左右排列成一列的5個矩形分別表示參照圖片。從左端起向右依次示出的標號P0、P1、Q2、P3、P4是表示各參照圖片的標號。P1等的P示出某層P，而且Q2的Q示出與層P不同的層Q。P以及Q的尾碼表示圖片順序編號POC(Picture Order Count)。參照圖片清單是能以切片層為單位進行更新的資訊集合。 關於對參照圖片內的哪些參照圖片進行參照，是另外由編碼單元層內的參照圖片索引refIdxLX示出的。
(參照圖片的例子)
接下來，針對在導出向量時使用的參照圖片的例子進行說明。圖4是表示參照圖片的例子的概念圖。在圖4中，橫軸表示顯示時刻，縱軸展示層(例如視點不同的運動圖像)。圖示的多個長方形分別表示圖片。圖示的圖片當中，下行的圖片P2是解碼對象的圖片(對象圖片)。從對象圖片朝上的箭頭所示的參照圖片Q2是處於與對象圖片相同的顯示時刻但視點不同的圖片。在以對象圖片為基準的位移預測中，使用參照圖片Q0。從對象圖片朝左的箭頭所示的參照圖片P0、P1是處於與對象圖片相同的視點的過去的圖片。從對象圖片朝右的箭頭所示的參照圖片P3、P4是處於與對象圖片相同的視點的未來的圖片。在以對象圖片為基準的運動預測中，使用參照圖片P0、P1、P3、P4。
(幀間預測標誌和預測清單利用標誌)
幀間預測標誌與預測清單利用標誌predFlagL0、predFlagL1的關係能相互變換如下。故而，作為幀間預測參數，既可以使用預測清單利用標誌，也可以使用幀間預測標誌。另外，以下，利用了預測清單利用標誌的判定還能置換成幀間預測標誌。反之，利用了幀間預測標誌的判定還能置換成預測清單利用標誌。
幀間預測標誌=(predFlagL1<<1)+predFlagL0
predFlagL0=幀間預測標誌& 1
predFlagL1=幀間預測標誌>>1
在此，>>是右移位，<<是左移位。
幀間預測標誌inter_pred_idc是表示參照圖片的種類以及數量的資料，取Pred_L0、Pred_L1、Pred_Bi的任一者的值。Pred_L0、Pred_L1分別示出對參照圖片清單RefPicList0、參照圖片清單RefPicList1中所存儲的參照圖片進行使用的情形，均示出使用1張參照圖片(單預測)。將利用了參照圖片清單RefPicList0、參照圖片清單RefPicList1的預測分別稱為L0預測、L1預測。Pred_Bi示出使用2張參照圖片(雙預測)，示出使用以參照圖片清單RefPicList0和參照圖片清單RefPicList1所指定的參照圖片這2個。預測向量索引mvp_LX_idx是表示預測向量的索引，參照圖片索引refIdxLX是表示參照圖片清單中所存儲的參照圖片的索引。此外，LX是在不區別L0預測與L1預測的情況下所使用的記述方法，通過將LX置換為L0、L1，能區別針對以參照圖片清單RefPicList0所指定的參照圖片的參數、與針對以參照圖片清單RefPicList1所指定的參照圖片的參數。例如，refIdxL0是用於L0預測的參照圖片索引，refIdxL1是用於L1預測的參照圖片索引，refIdx(或refIdxLX)是在不區別refIdxL0與refIdxL1的情況下所使用的表記。
(運動向量和位移向量)
向量mvLX之中有運動向量和位移向量(disparity vector，視差向量)。運動向量是表示某層的某顯示時刻的圖片中的塊的位置、與同一層內的不同的顯示時 刻(例如，相鄰的離散時刻)的圖片中的對應的塊的位置之間的位置的偏差的向量。位移向量是表示某層的某顯示時刻的圖片中的塊的位置與同一顯示時刻中的不同的層的圖片中的對應的塊的位置之間的位置的偏差的向量。作為不同的層的圖片，存在為不同的視點的圖片的情況下或為不同的解析度的圖片的情況等。特別是將與不同的視點的圖片對應的位移向量稱為視差向量。在以後的說明中，在不區別運動向量與位移向量的情況下，僅稱為向量mvLX。將與向量mvLX有關的預測向量、差分向量分別稱為預測向量mvpLX、差分向量mvdLX。關於向量mvLX以及差分向量mvdLX是運動向量還是位移向量，使用附隨於向量的參照圖片索引refIdxLX來進行區別。
(VPS擴展)
接下來，針對展示層間預測中的層間的參照關係的參數來進行說明。層間預測中的層間的參照關係以對VPS進行了擴展後的資料集合即VPS擴展(vps_extension)來指定。圖9示出VPS擴展的資料結構的例子。其中，以層依賴標誌direct_dependency_flag[i][j]以及層依賴類型direct_dependency_type[i][j]來展示層間的參照關係。具體而言，在層依賴標誌direct_dependency_flag[i][j]為1的情況下，對象層i參照別的層j，若層依賴標誌為0，則對象層i不參照層j。在層依賴標誌為1的情況下，進而以層依賴類型direct_dependency_type[i][j]來表示針對對象層i的參照層j的層依賴類型。層依賴類型能僅指定樣本預測，僅指定運 動預測，或指定其兩者。將direct_dependency_type[i][j]的值與層依賴類型的值的關係示出如下。
direct_dependency_type[i][j]=0…樣本預測以及運動預測
direct_dependency_type[i][j]=1…僅運動預測
direct_dependency_type[i][j]=2…僅樣本預測
在後述的參數集解碼部中，根據以上的符號來導出與層間預測有關的參數。
(RPS信息)
參照圖片集(RPS)所涉及的語法值(以下，RPS資訊)包含以下資訊。
1.SPS短期RPS資訊：SPS中所含的短期參照圖片集資訊
2.SPS長期RP資訊：SPS中所含的長期參照圖片資訊
3.SH短期RPS資訊：切片首部中所含的短期參照圖片集資訊
4.SH長期RP資訊：切片首部中所含的長期參照圖片資訊
5.ILRP信息：層間參照圖片資訊
(1.SPS短期RPS信息)
SPS短期RPS資訊包含能被參照SPS的各圖片利用的多個短期RPS的資訊。此外，短期RPS是能作為通過針對對象圖片的相對的位置(例如與對象圖片的POC差分)而指定的參照圖片(短期參照圖片)的圖片的集合。
短期RPS資訊之中包含顯示順序比對象圖片早的短期參照圖片數(num_negative_pics)以及顯示順序比對象圖片晚的短期參照圖片數(num_positive_pics)。此外，以下，將顯示順序比對象圖片早的短期參照圖片稱為前方短期參照圖片，將顯示順序比對象圖片晚的短期參照圖片稱為後方短期參照圖片。
另外，在短期RPS資訊中，針對各前方短期參照圖片，包含相對於對象圖片的POC差分的絕對值(delta_poc_s0_minus1[i])、以及用作對象圖片的參照圖片的可能性的有無(used_by_curr_pic_s0_flag[i])。此外，針對各後方短期參照圖片，包含相對於對象圖片的POC差分的絕對值(delta_poc_s1_minus1[i])、以及用作對象圖片的參照圖片的可能性的有無(used_by_curr_pic_s1_flag[i])。
(2.SPS長期RP資訊)
SPS長期RP資訊包含能被參照SPS的各圖片利用的多個長期參照圖片的資訊。此外，長期參照圖片是指通過序列內的絕對性的位置(例如POC)來指定的圖片。
在SPS長期RP資訊中，包含表示以SPS所傳輸的長期參照圖片的有無的資訊(long_term_ref_pics_present_flag)、SPS中所含的長期參照圖片數(num_long_term_ref_pics_sps)以及各長期參照圖片的資訊。在長期參照圖片的資訊中，包含參照圖片的POC(lt_ref_pic_poc_lsb_sps[i])、以及用作對象圖片的參照圖片的可能性的有無(used_by_curr_pic_lt_sps_flag[i])。
此外，上述參照圖片的POC既可以使用與參照圖片建立了關聯的POC的值自身，也可以使用POC的LSB(Least Significant Bit)，即，將POC除以既定的2的冪次方的數而得到的餘數的值。
(3.SH短期RPS信息)
SH短期RPS資訊包含能被參照切片首部的圖片利用的單一的短期RPS的資訊。
(4.SH長期RP資訊)
SH長期RP資訊包含能被參照切片首部的圖片進行利用的長期參照圖片的資訊。
(5.ILRP信息)
ILRP資訊是能在層間預測中參照的層間參照圖片的資訊。ILRP資訊例如是層間預測有效標誌(inter_layer_pred_enabled_flag)、層間參照圖片數(NumActiveRefLayerPics)、表示各層間參照圖片所屬的層的層標識符(inter_layer_pred_layer_idc[i])等。
RPS導出處理被劃分為多個RPS的子集的導出處理。RPS的子集定義如下。
RPS根據可參照圖片的種類而劃分為如下2個子集。
‧當前圖片參照圖片集ListCurr：對象圖片中的可參照圖片的清單
‧後續圖片參照圖片集ListFoll：儘管在對象圖片中未被參照，但在以解碼順序而為對象圖片的後續的圖片中可參照 的圖片的清單
此外，將當前圖片參照圖片集中所含的圖片的數目稱為當前圖片可參照圖片數NumCurrList。
當前圖片參照圖片集進一步由4個部分清單構成。
‧長期參照圖片集RefPicSetLtCurr：通過SPS長期RP資訊或SH長期RP資訊而指定的當前圖片可參照圖片
‧短期前方參照圖片集ListStCurrBefore：通過SPS短期RPS資訊或SH短期RPS資訊而指定、且顯示順序比對象圖片更早的當前圖片可參照圖片
‧短期後方參照圖片集ListStCurrAfter：通過SPS短期RPS資訊或SH短期RPS資訊而指定、且顯示順序比對象圖片更晚的當前圖片可參照圖片
‧層間參照圖片集RefPicSetInterLayer：通過ILRP資訊而指定的當前圖片可參照圖片
後續圖片參照圖片集進一步由2個部分清單構成。
‧後續圖片長期參照圖片集ListLtFoll：通過SPS長期RP資訊或SH長期RP資訊而指定的後續圖片可參照圖片。
‧後續圖片短期參照圖片集ListStFoll：通過SPS短期RPS資訊或SH短期RPS資訊而指定的當前圖片可參照圖片。
(圖像解碼裝置的構成)
第1實施方式所涉及的圖像解碼裝置起到將表示對象層的某對象圖片所參照的與所述對象層不同的層的 圖片的資訊即實際依賴層資訊的碼量減少的效果。以下，作為第1實施方式所涉及的圖像解碼裝置，依次說明圖像解碼裝置31、圖像解碼裝置31A2、圖像解碼裝置31A3、圖像解碼裝置31A4。
接下來，說明本發明的一實施方式所涉及的圖像解碼裝置31的構成。圖5是表示本實施方式所涉及的圖像解碼裝置31的構成的概略圖。圖像解碼裝置31構成為包含圖像資料解碼部300和首部解碼部400。
圖像資料解碼部300基於從後述的首部解碼部400輸入的切片層編碼參數，來從所輸入的編碼流Te解碼圖像資料。解碼出的圖像資料作為解碼層圖像Td(解碼視點圖像Td)而被輸出至圖像解碼裝置的外部。關於圖像資料解碼部300的細節將後述。
首部解碼部400構成為包含參數集解碼部401和切片片段首部解碼部402。參數集解碼部401將編碼流Te中所含的視訊參數集VPS、序列參數集SPS、圖片參數集PPS等比切片層更上級的層的編碼資料遵照給定的語法規則進行解碼，並決定在對各層進行解碼時所需的參數。
參數集解碼部401構成為包含層依賴資訊解碼部4011。
層依賴資訊解碼部4011對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼。
具體而言，對表示對象層i是否依賴參照層j的層依賴標誌direct_dependency_flag[i][j]進行解碼，並導出 依賴層列表RefLayers[][]和依賴層數NumDirectRefLayers[]。依賴層列表RefLayers[][]由層ID的列表來表現。依賴層列表RefLayers[nuh_layer_id][]是由nuh_layer_id指定的對象層所參照的與對象層不同的層的列表。依賴層列表RefLayers[][]是依賴層標識符RefLayers[i][j]的集合(清單)。以下，有時將RefLayers也僅稱為依賴層。另外，通過對各依賴層標識符RefLayers[i][j]進行解碼，來解碼依賴層列表RefLayers。
在參照層j的層依賴標誌direct_dependency_flag[i][j]為1的情況下，層依賴資訊解碼部4011通過以下的式子來導出對象層i。
if(direct_dependency_flag[i][j])RefLayerId[i][NumDirectRefLayers[i]++]=j
此外，也可使用將展示層的索引i變換成層ID的表layer_id_in_nuh[]，而使用RefLayerId[layer_id_in_nuh[i]][NumDirectRefLayers[layer_id_in_nuh[i]]++]=layer_id_in_nuh[j]。在direct_dependency_flag[i][j]為1的情況下，使依賴層數NumDirectRefLayers[]增加。
全部的對象層i針對參照層j進行上述處理，從而導出依賴層列表RefLayers[][]和依賴層數NumDirectRefLayers[]。
圖11示出依賴層的例子。如圖11所示，層依賴標誌direct_dependency_flag成為1的參照層、在此為層0、層2、層3的層ID的列表PrefLayers[][]={0,2,3}是依賴層 列表。
層依賴資訊解碼部4011對依賴層RefLayers[i][j]分別解碼層依賴類型direct_dependency_type[i][j]。層依賴類型是按從層依賴標誌導出的依賴層RefLayerId的每一個來展示層間預測的種類的資訊，至少能表示用於圖元的預測的樣本預測、用於運動向量的預測的運動預測。
將這些導出的參數向切片片段首部解碼部402輸出。
(切片片段首部解碼部)
切片片段首部解碼部402基於從參數集解碼部401輸入的上級層的參數來對所輸入的編碼流Te中所含的切片片段首部進行解碼，導出對象切片片段的運動圖像資料的解碼所需的切片層編碼參數。切片片段首部解碼部402構成為還包含實際依賴層解碼部403和參照圖片集導出部404。
圖14示出切片片段首部解碼部402所解碼的、切片片段首部的資料結構的一例。
實際依賴層解碼部403根據屬於依賴層清單RefLayers的依賴層，對與作為解碼對象的切片片段首部對應的圖片中實際使用的實際依賴層的資訊(實際依賴層資訊)進行解碼。實際依賴層也與依賴層RefLayers同樣，由層ID的列表來表現。實際依賴層RefPicLayerId是實際依賴層標識符RefPicLayerId[i]的集合(清單)。以下，有時將 RefPicLayerId也僅稱為實際依賴層。
實際依賴層解碼部403對表示對象圖片中的層間預測的有無的層間預測有效標誌inter_layer_pred_enabled_flag進行解碼。
在層間預測為有效即inter_layer_pred_enabled_flag=1的情況下，實際依賴層解碼部403對實際層依賴標誌active_direct_dependency_flag(層間參照圖片標誌)進行解碼，並對實際依賴層列表RefPicLayerId[](層間參照圖片清單)進行解碼，該實際層依賴標誌active_direct_dependency_flag表示屬於依賴層列表RefLayerId[nuh_layer_id][]的各層的圖片是否是被對象圖片參照的，該依賴層列表RefLayerId[nuh_layer_id][]屬於對象圖片所屬的層nuh_layer_id。在層間預測為無效即inter_layer_pred_enabled_flag=0的情況下，不對實際層依賴標誌active_direct_dependency_flag進行解碼，而將實際依賴層數NumActiveRefLayerPics設為0。
具體而言，實際依賴層解碼部403根據圖14的編碼資料，針對對象圖片所屬層nuh_layer_id的依賴層數NumDirectRefLayers[nuh_layer_id]的各自的索引i(i=[0..NumDirectRefLayers[nuh_layer_id]-1])，來對實際層依賴標誌active_direct_dependency_flag[i]進行解碼。
接下來，實際依賴層解碼部403如圖15所示，在解碼出的實際層依賴標誌active_direct_dependency_flag[i]為1的情況下，通過以下的式子，來將對應的依賴層 RefLayerId[nuh_layer_id][i]追加至實際依賴層列表RefPicLayerId[]。
RefPicLayerId[i]=RefLayerId[nuh_layer_id][i]
進而，實際依賴層解碼部403使實際依賴層數NumActiveRefLayerPics按以下的式子來增加。
NumActiveRefLayerPics++
通過針對對象圖片所屬的層nuh_layer_id的全部的依賴層進行上述處理，來對實際依賴層列表RefPicLayerId[]以及實際依賴層數NumActiveRefLayerPics進行解碼。
圖12表示實際依賴層的例子。如圖12所示，依賴層PrefLayers[][]={0,2,3}當中，實際依賴層資訊(在本實施方式中，實際依賴層標誌active_direct_dependency_flag)成為1的層成為實際依賴層RefPicLayerId[]。在圖12中，示出了與層0、3對應的索引0和2的實際依賴層標誌為1(active_direct_dependency_flag[0]=1，active_direct_dependency_flag[2]=1)，與層2對應的索引1的實際依賴層標誌(active_direct_dependency_flag[1]=1)的例子，層2未通過實際依賴層資訊被選擇，因此不被存放於實際依賴層。層1在對層依賴標誌已解碼的階段，本來未被存放於依賴層，因此不對實際依賴層標誌進行解碼。
實際依賴層解碼部403導出樣本預測以及運動預測中參照的層間參照圖片即實際樣本依賴層清單 ActiveSamplePredRefLayerId[]以及實際運動依賴層列表ActiveMotionPredRefLayerId[]。
實際依賴層解碼部403參照針對對象層nuh_layer_id的參照層i的樣本依賴標誌SamplePredEnabledFlag[nuh_layer_id][i]，在依賴層RefLayerId[nuh_layer_id][i]表示樣本依賴的情況下，也就是，SamplePredEnabledFlag[nuh_layer_id][i]為1的情況下，將該樣本依賴的層(在此為層ID，RefLayerId[nuh_layer_id][i])如以下的式子那樣加至實際樣本預測層，並使實際樣本依賴層數NumActiveSamplePredRefLayers的計數變數k以1為單位進行增加。
ActiveSamplePredRefLayerId[k++]=RefLayerId[nuh_layer_id][i]
實際樣本依賴層數NumActiveSamplePredRefLayers根據全部的實際依賴層i的處理結束的時間點的計數變數k來求取。
通過上述處理，層依賴類型從僅包含表示樣本依賴的參照層在內的實際樣本依賴層ActiveSamplePredRefLayerId[]而得到。
圖13是說明本發明的實際樣本依賴層的圖。只有SamplePredEnabledFlag為1的依賴層(實際依賴層)被作為實際樣本依賴層而導出。
實際依賴層解碼部403，在對象層nuh_layer_id的依賴層i表示運動限定依賴的情況下，也就是， SamplePredEnabledFlag[nuh_layer_id][i]為0且MotionPredEnabledFlag[nuh_layer_id][i]為1的情況下，將該運動限定依賴的層(在此層ID，RefLayerId[nuh_layer_id][i])通過以下的式子而加至實際運動預測層。
ActiveMotionPredRefLayerId[l++]=RefLayerId[nuh_layer_id][i]
使實際運動依賴層數NumActiveMotionPredRefLayers的計數變數以l為單位元進行增加。
實際運動依賴層數NumActiveMotionPredRefLayers根據全部的實際依賴層i的處理結束的時間點的計數變數l來求取。
通過上述處理，得到層依賴類型僅包含表示運動限定依賴的依賴層在內的實際運動依賴層ActiveMotionPredRefLayerId[]。
實際依賴層解碼部403在關於對象圖片而存在樣本依賴層的情況下，即實際樣本依賴層數NumActiveSamplePredRefLayers大於0的情況下，進而，對表示是否將幀間預測限定為層間預測的層間樣本預測限定標誌inter_layer_sample_pred_only_flag進行解碼。在層間樣本預測限定標誌為1的情況下，在對象圖片的解碼時不使用同一圖像層內的幀間預測，若該標誌為0，則使用同一圖像層內的幀間預測。
參照圖片集導出部404基於所導出的實際依賴 層資訊，來導出用於對象圖片的解碼處理的參照圖片集RPS。
說明參照圖片集導出部404所進行的RPS導出處理的細節。
在下面的步驟中生成構成RPS的短期前方參照圖片集ListStCurrBefore、短期後方參照圖片集ListStCurrAfter、長期參照圖片集RefPicSetLtCurr、層間參照圖片集RefPicSetInterLayer、後續圖片短期參照圖片集RefPicSetFoll以及後續圖片長期參照圖片集ListLtFoll。此外，導出當前圖片可參照圖片數NumPocTotalCurr。此外，所述各參照圖片集在以下的處理的開始前被設定為空。
(S101)基於SPS短期RPS資訊以及SH短期RPS資訊，來確定用於對象圖片的解碼的單一的短期參照圖片集。具體而言，在SH短期RPS資訊中所含的short_term_ref_pic_set_sps的值為0的情況下，在SH短期RPS資訊中所含的切片片段首部選擇被顯式傳輸的短期RPS。除此以外在(short_term_ref_pic_set_sps的值為1的情況下，從SPS短期RPS資訊中所含的多個短期RPS之中選擇SH短期RPS資訊中所含的short_term_ref_pic_set_idx所示的短期RPS。
(S102)將選擇出的短期RPS中所含的參照圖片各自的POC導出。參照圖片的POC在參照圖片為前方短期參照圖片的情況下，從對象圖片的POC之中減去“delta_poc_s0_minus1[i]+1”的值而導出。另一方面，在參 照圖片為後方短期參照圖片的情況下，對對象圖片的POC加上“delta_poc_s1_minus1[i]+1”的值而導出。
(S103)以被傳輸的順序來確認短期RPS中所含的前方參照圖片，在建立了關聯的used_by_curr_pic_s0_flag[i]的值為1的情況下，將該前方參照圖片追加至短期前方參照圖片集RefPicSetCurrBefore。在除此以外(used_by_curr_pic_s0_flag[i]的值為0)的情況下，將該前方參照圖片追加至後續圖片短期參照圖片集RefPicSetFoll。
(S104)以被傳輸的順序來確認短期RPS中所含的後方參照圖片，在建立了關聯的used_by_curr_pic_s1_flag[i]的值為1的情況下，將該後方參照圖片追加至短期後方參照圖片集RefPicSetCurrAfter。在除此以外(used_by_curr_pic_s1_flag[i]的值為0的情況下，將該後方參照圖片追加至後續圖片短期參照圖片集RefPicSetFoll。
(S105)基於SPS長期RP資訊以及SH長期RP資訊，來確定用於對象圖片的解碼的長期參照圖片。具體而言，從SPS長期RP資訊中所含的參照圖片之中選擇num_long_term_sps的數目的參照圖片，並依次追加至長期RPS。所選擇的參照圖片是lt_idx_sps[i]所示的參照圖片。接著，針對num_long_term_pics的數目的參照圖片而將SH長期RP資訊中所含的參照圖片依次追加至長期RPS。
(S106)導出長期RPS中所含的參照圖片各自 的POC。長期參照圖片的POC是從建立關聯而解碼出的poc_lst_lt[i]或lt_ref_pic_poc_lsb_sps[i]的值直接導出的。
(S107)依次確認長期RPS中所含的參照圖片，在建立了關聯的used_by_curr_pic_lt_flag[i]或used_by_curr_pic_lt_sps_flag[i]的值為1的情況下，將該長期參照圖片追加至長期參照圖片集RefPicSetLtCurr。在除此以外(used_by_curr_pic_lt_flag[i]或used_by_curr_pic_lt_sps_flag[i]的值為0)的情況下，將該長期參照圖片追加至後續圖片長期參照圖片集ListLtFoll。
(S108)遵照在實際依賴層解碼部403中解碼出的實際依賴層資訊(ILRP資訊)，將參照圖片(層間參照圖片)追加至層間參照圖片集RefPicSetInterLayer。具體而言，如圖16(a)所示，與對象圖片相同的時間的圖片picX位於解碼圖片緩衝器內，在該picX的層nuh_layer_id等於ActiveSamplePredRefPicLayerId[i]時，對層間參照圖片集RefPicSetInterLayer[i]設定picX，picX附上長期預測參照(used for long-term reference)所示的標記。在上述條件不成立的情況下，對RefPicSetInterLayer[i]附上表示沒有參照圖片的標記。將在上述處理中附上了長期參照圖片的標記的參照圖片作為層間參照圖片而追加至層間參照圖片集RefPicSetInterLayer。
(S109)將變數NumPocTotalCurr的值設定為能被當前圖片進行參照的參照圖片之和。即，將變數NumPocTotalCurr的值設定為短期前方參照圖片集 RefPicSetCurrBefore、短期後方參照圖片集RefPicSetCurrAfter、長期參照圖片集RefPicSetLtCurr以及層間參照圖片集RefPicSetInterLayer的4個列表的各要素數之和。層間參照圖片集RefPicSetInterLayer的要素數的加法運算如圖16(b)所示，通過對樣本依賴層數(實際樣本依賴層數NumActiveSamplePredRefLayers)進行相加來執行。
參照圖片集導出部404構築參照圖片清單(RPL)。以下，說明參照圖片清單構築處理的細節。參照圖片清單導出部基於參照圖片集RPS和RPL修正資訊來生成參照圖片清單RPL。
參照圖片清單由L0參照列表和L1參照列表這2個列表構成。首先，說明LX參照列表(X為0或1)的構築步驟。如圖17(b)所示，L0參照列表由以下的S301~S307所示的步驟來構築。
(S301)生成暫定L0參照列表RefPicListTemp0，並初始化為空的列表。
(S302)在幀間預測RPL有效標誌InterRefEnabledInRPLFlag為1的情況下，對暫定LX參照列表RefPicListTempX依次追加短期前方參照圖片集RefPicSetStCurrBefore中所含的參照圖片。
(S303)在幀間預測RPL有效標誌InterRefEnabledInRPLFlag為1的情況下，對暫定LX參照列表依次追加短期後方參照圖片集RefPicSetStCurrAfter中所含的參照圖片。
(S304)在幀間預測RPL有效標誌InterRefEnabledInRPLFlag為1的情況下，對暫定LX參照清單依次追加長期參照圖片集RefPicSetLtCurr中所含的參照圖片。
(S305)對暫定LX參照清單依次追加圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片。
(S306)在從編碼資料進行解碼的lists_modification_present_flag為1的情況下，進行暫定LX參照列表的修正。
(S307)將暫定LX參照列表設為LX參照列表。
接下來，L1參照列表通過同樣的處理來構築。但在L1參照列表的構築中，S303與S302的處理順序相反。也就是，短期後方參照圖片集RefPicSetStCurrAfter比短期前方參照圖片集RefPicSetStCurrBefore先存放。
(圖像資料解碼部的構成)
接下來，說明圖像資料解碼部300的構成。
圖6是表示本實施方式所涉及的圖像資料解碼部300的構成的概略圖。圖像資料解碼部300構成為包含：熵解碼部301、預測參數解碼部302、參照圖片存儲器(參照圖像存儲部、幀存儲器)306、預測參數存儲器(預測參數存儲部、幀存儲器)307、預測圖像生成部308、逆量化/逆DCT部311、加法部312以及層間運動映射部313。
另外，預測參數解碼部302構成為包含幀間預 測參數解碼部303以及幀內預測參數解碼部304。預測圖像生成部308構成為包含幀間預測圖像生成部309以及幀內預測圖像生成部310。
熵解碼部301對所輸入的編碼資料進行熵解碼，將各個碼(語法要素)分離出來解碼。熵解碼部利用由首部解碼部400解碼出的資訊，來判定一部分的碼的有無。作為此時利用的資訊，例如有表示對象切片的編碼類型的slice_type。在分離出的碼之中，有用於生成預測圖像的預測資訊以及用於生成差分圖像的殘差資訊等。
熵解碼部301將分離出的碼的一部分輸出至預測參數解碼部302。分離出的碼的一部分例如是指預測模式predMode、分割模式part_mode、合併標誌merge_flag、合併索引merge_idx、幀間預測標誌inter_pred_idc、參照圖片索引refIdxLX、預測向量索引mvp_LX_idx、差分向量mvdLX等。關於對哪些碼進行解碼的控制是基於預測參數解碼部302的指示來進行的。熵解碼部301將量化係數輸出至逆量化/逆DCT部311。該量化係數在編碼處理中是對殘差信號進行DCT(Discrete Cosine Transform、離散餘弦變換)而量化得到的係數。
預測參數解碼部302基於從首部解碼部400輸入的切片層編碼參數以及從熵解碼部301輸入的碼，來對幀間預測參數或幀內預測參數進行解碼。然後，將解碼出的預測參數輸出至預測圖像生成部308，並存儲至預測參數存儲器307。
幀間預測參數解碼部303參照預測參數存儲器307中所存儲的預測參數來輸出幀間預測參數。幀間預測參數之中例如有預測清單利用標誌predFlagLX、參照圖片索引refIdxLX、運動向量mvLX等。
幀內預測參數解碼部304基於從熵解碼部301輸入的碼，參照預測參數存儲器307中所存儲的預測參數來對幀內預測參數進行解碼。幀內預測參數是指，在1個圖片內對圖片塊進行預測的處理中使用的參數，例如為幀內預測模式IntraPredMode。幀內預測參數解碼部304將解碼出的幀內預測參數輸出至預測圖像生成部308，並儲存至預測參數存儲器307。
參照圖片存儲器306按解碼對象的圖片以及塊的每一個而在預定的位置上儲存由後述的加法部312生成的參照圖片的塊(參照圖片塊)。
預測參數存儲器307按解碼對象的圖片以及塊的每一個而在預定的位置上存儲預測參數。具體而言，預測參數存儲器307儲存由幀間預測參數解碼部303解碼出的幀間預測參數、由幀內預測參數解碼部304解碼出的幀內預測參數以及由熵解碼部301分離出的預測模式predMode。在所存儲的幀間預測參數之中，例如有預測清單利用標誌predFlagLX(幀間預測標誌inter_pred_idc)、參照圖片索引refIdxLX、向量mvLX。
對於預測圖像生成部308，輸入從熵解碼部301輸入的預測模式predMode，另外從預測參數解碼部302輸 入預測參數。另外，預測圖像生成部308從參照圖片存儲器306讀出參照圖片。預測圖像生成部308根據由預測模式predMode所示的預測模式，使用所輸入的預測參數和已讀出的參照圖片來生成預測圖片塊P(預測圖像)。
在此，在預測模式predMode表示幀間預測模式的情況下，幀間預測圖像生成部309使用從幀間預測參數解碼部303輸入的幀間預測參數和已讀出的參照圖片來通過幀間預測而生成預測圖片塊P。預測圖片塊P與PU對應。PU如上所述是作為進行預測處理的單位的多個圖元所構成的圖片的一部分，也就是相當於1次進行預測處理的解碼物對象塊。
幀間預測圖像生成部309使用對切片片段首部進行解碼而導出的從參照圖片集導出部404輸入的參照圖片清單(RPL、RefPicListL0、RefPicListL1)、以及以幀間預測參數所指定的參照圖片，來生成預測圖像。
即，對於預測清單利用標誌predFlagLX為1的參照圖片清單(RefPicListL0或RefPicListL1)，從以參照圖片索引refIdxLX所示的參照圖片(RefPicListLX[refIdxLX])之中，以解碼物對象塊為基準，從參照圖片存儲器306讀出向量mvLX所示的位置上的參照圖片塊。幀間預測圖像生成部309針對已讀出的參照圖片塊進行預測來生成預測圖片塊P。幀間預測圖像生成部309將生成的預測圖片塊P輸出至加法部312。
在預測模式predMode表示幀內預測模式的情 況下，幀內預測圖像生成部310使用從幀內預測參數解碼部304輸入的幀內預測參數和已讀出的參照圖片來進行幀內預測。具體而言，幀內預測圖像生成部310從參照圖片存儲器306讀出解碼對象的圖片，即已解碼出的塊當中從解碼物對象塊起處於預定的範圍內的參照圖片塊。預定的範圍是指，在解碼物對象塊以所謂的光柵掃描的順序依次移動的情況下例如左、左上、上、右上的相鄰塊當中的任一者，根據幀內預測模式而不同。光柵掃描的順序是指，在各圖片中，從上端到下端針對各行，依次從左端向右端移動的順序。
幀內預測圖像生成部310針對已讀出的參照圖片塊，在幀內預測模式IntraPredMode所示的預測模式下進行預測來生成預測圖片塊。幀內預測圖像生成部310將已生成的預測圖片塊P輸出至加法部312。
逆量化/逆DCT部311對從熵解碼部301輸入的量化係數進行逆量化來求取DCT係數。逆量化/逆DCT部311針對求出的DCT係數進行逆DCT(Inverse Discrete Cosine Transform，逆離散余弦變換)，來計算解碼殘差信號。逆量化/逆DCT部311將計算出的解碼殘差信號輸出至加法部312。
加法部312針對每個圖元來將從幀間預測圖像生成部309以及幀內預測圖像生成部310輸入的預測圖片塊P與從逆量化/逆DCT部311輸入的解碼殘差信號的信號值進行相加，來生成參照圖片塊。加法部312將生成的參照 圖片塊存儲至參照圖片存儲器306，並將生成的參照圖片塊按每個圖片結合後的解碼層圖像Td輸出至外部。
(圖像解碼裝置31的總結)
以上說明的圖像解碼裝置31具備：對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼的層依賴資訊解碼機構(層依賴資訊解碼部4011)；對表示對象層的某對象圖片所參照的與對象層不同的層的圖片的資訊進行解碼的實際依賴層資訊解碼機構(實際依賴層解碼部403)；以及基於實際依賴層資訊來至少生成層間參照圖片集RefPicSetInterLayer的參照圖片集導出機構(參照圖片集導出部404)，層依賴資訊解碼機構對實際層依賴標誌active_direct_dependency_flag進行解碼，該實際層依賴標誌active_direct_dependency_flag表示屬於依賴層清單的各層的圖片是否是被所述對象圖片參照的。
根據上述構成的運動圖像解碼裝置，與對實際依賴層索引進行解碼的情況比較，不需要計算實際依賴層索引所需的比特數，因此起到處理變簡單這樣的效果。另外，與對實際依賴層索引進行解碼的情況比較，起到減少碼量的效果。
(圖像解碼裝置31A2)
作為第1實施方式的圖像解碼裝置31的變形例的圖像解碼裝置31A2構成為包含圖像資料解碼部300和首部解碼部400A2。圖像資料解碼部300與前述的第1實施方式相同，因此省略說明。同樣地，對賦予了與已說明的 機構同一標號的機構在本實施方式中也為同樣的構成，因此以後省略說明。
首部解碼部400A2構成為包含參數集解碼部401A2和切片片段首部解碼部402A2。參數集解碼部401A2構成為包含層依賴資訊解碼部4011A2。切片片段首部解碼部402A2構成為包含實際依賴層解碼部403A2和參照圖片集導出部404。
實際依賴層解碼部403A2對實際層依賴標誌active_direct_dependency_flag進行解碼，並對實際依賴層列表RefPicLayerId[]進行解碼，該實際層依賴標誌active_direct_dependency_flag表示屬於依賴層列表RefLayerId[nuh_layer_id][]的各層的圖片是否是被對象圖片參照的，該依賴層列表RefLayerId[nuh_layer_id][]屬於對象圖片所屬的層nuh_layer_id。
具體而言，實際依賴層解碼部403A2根據圖18的編碼資料，針對對象圖片所屬的層nuh_layer_id的依賴層數NumDirectRefLayers[nuh_layer_id]的各自的索引i，來對實際層依賴標誌active_direct_dependency_flag[i]進行解碼。
接下來，實際依賴層解碼部403A2如圖21所示，在解碼出的實際層依賴標誌active_direct_dependency_flag[i]為1的情況下，如以下的式子所示，將對應的依賴層RefLayerId[nuh_layer_id][i]追加至實際依賴層列表RefPicLayerId[]，並使實際依賴層數NumActiveRefLayerPics按以下的式子進行增加。
RefPicLayerId[i]=RefLayerId[nuh_layer_id][i]
NumActiveRefLayerPics++
進而，實際依賴層解碼部403A2在實際層依賴標誌active_direct_dependency_flag[i]為1的情況下，將層間預測有效標誌inter_layer_pred_enabled_flag設為1。
通過針對對象圖片所屬的層nuh_layer_id的全部的依賴層進行上述處理，來對實際依賴層列表RefPicLayerId[]以及實際依賴層數NumActiveRefLayerPics進行解碼。
實際依賴層解碼部403A2導出在樣本預測以及運動預測中參照的層間參照圖片即實際樣本依賴層清單ActiveSamplePredRefLayerId[]以及實際運動依賴層列表ActiveMotionPredRefLayerId[]。導出處理與實際依賴層解碼部403相同，因此省略說明。
以上說明的圖像解碼裝置31A2與圖像解碼裝置31不同，具有如下特徵：不對層間預測有效標誌inter_layer_pred_enabled_flag進行編碼，而使用表示屬於依賴層清單的各層的圖片是否是被所述對象圖片參照的實際層依賴標誌active_direct_dependency_flag來導出。
以上說明的圖像解碼裝置31A2還具備對層間預測有效標誌進行導出的層間預測有效標誌導出機構(實際依賴層解碼部403A2)，該層間預測有效標誌表示對象圖片是否參照與對象圖片所屬的層不同的層的圖片，層間預 測有效標誌導出機構(實際依賴層解碼部403A2)在實際層依賴標誌active_direct_dependency_flag[]當中的至少1個為1的情況下，將層間預測有效標誌設為1，在除此以外的情況下設為0。
根據上述構成的運動圖像解碼裝置，與將層間預測有效標誌inter_layer_pred_enabled_flag顯式地解碼的情況比較，起到減少碼量的效果。
(圖像解碼裝置31A3)
圖19是表示本實施方式所涉及的圖像解碼裝置31A3的構成的概略圖。
作為第1實施方式的一構成的圖像解碼裝置31A3構成為包含圖像資料解碼部300和首部解碼部400A3。圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，對賦予了與已說明的機構同一標號的機構在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400A3構成為包含參數集解碼部401和切片片段首部解碼部402A3。參數集解碼部401A3構成為包含層依賴資訊解碼部4011。切片片段首部解碼部402A3構成為包含實際依賴層解碼部403A3和參照圖片集導出部404。
實際依賴層解碼部403A3處於非基礎層(層標識符nuh_layer_id>0的層)且依賴層數NumDirectRefLayers[nuh_layer_id]大於0的情況下，將與對象切片片段中的實際依賴層有關的語法解碼如下。
實際依賴層解碼部403A3對展示層間預測的有無的層間預測有效標誌inter_layer_pred_enabled_flag進行解碼。在層間預測為有效即inter_layer_pred_enabled_flag=1的情況下，且依賴層數NumDirectRefLayers[nuh_layer_id]大於1且實際最大依賴層數max_active_ref_layers大於1的情況下，進一步對實際依賴層數所涉及的語法num_inter_layer_ref_pics_minus1進行解碼，通過以下的式子來對實際依賴層數NumActiveRefLayerPics進行解碼。
NumActiveRefLayerPics=num_inter_layer_ref_pics_minus1+1
實際依賴層解碼部403A3，在作為表示由所述對象圖片參照的與所述對象層不同的層的圖片數的實際依賴層數NumActiveRefLayerPics的實際依賴層數與依賴層數NumDirectRefLayers[nuh_layer_id]不同的情況下(NumActiveRefLayerPics小於NumDirectRefLayers[nuh_layer_id]的情況下)，從編碼資料對展示層間預測的依賴層的層間依賴標識符inter_layer_pred_layer_idc[i]進行解碼。
實際依賴層解碼部403A3，作為對象切片片段中的與層間預測有關的實際依賴層資訊，導出：每個實際依賴層圖片的層識別資訊即參照圖片層標識符RefPicLayerId[]、實際參照層圖片之中表示實際在樣本預測以及運動預測中參照的層數的實際樣本依賴層數NumActiveSamplePredRefLayers以及實際運動依賴層數 NumActiveMotionPredRefLayers、與樣本預測和運動預測各自的實際依賴層數對應的依賴層的識別資訊即實際樣本依賴層標識符ActiveSamplePredRefLayerId[]以及實際運動依賴層標識符ActiveMotionPredRefLayerId[]。這些各參數的導出步驟如圖20(a)所示。
實際依賴層解碼部403A3如圖20(a)所示，對取0至實際依賴層數NumActiveRefLayerPics-1的值的各實際依賴層i進行以下的處理。首先，根據實際依賴層i來確定依賴層標識符inter_layer_pred_layer_idc[i]。
實際依賴層解碼部403A3參照與各實際依賴層i對應的由參數集解碼部401導出的樣本依賴標誌SamplePredEnabledFlag[][]，在針對對象層nuh_layer_id的參照層inter_layer_pred_layer_idc[i]表示樣本依賴的情況下，即SamplePredEnabledFlag[nuh_layer_id][inter_layer_pred_layer_idc[i]]為1的情況下，將該樣本依賴的層通過以下的式子而加至實際樣本預測層，並使實際樣本依賴層數NumActiveSamplePredRefLayers的計數變數k增加1。
ActiveSamplePredRefLayerId[k++]=RefLayerId[nuh_layer_id][inter_layer_pred_layer_idc[i]]
實際樣本依賴層數NumActiveSamplePredRefLayers作為全部的實際依賴層i的處理已結束的時間點的計數變數k而被求出。
通過上述處理，得到層依賴類型僅包含表示樣本依賴的依賴層在內的實際樣本依賴層 ActiveSamplePredRefLayerId[]。
將ActiveSamplePredRefLayerId[]稱為與樣本預測有關的實際依賴層資訊。
實際依賴層解碼部403A3如圖20(b)所示，對於取0至實際依賴層數NumActiveRefLayerPics-1的值的各實際依賴層i進行以下處理。首先，根據實際依賴層i來確定依賴層標識符inter_layer_pred_layer_idc[i]。參照由參數集解碼部401導出的樣本依賴標誌SamplePredEnabledFlag[][]，在針對對象層nuh_layer_id的參照層inter_layer_pred_layer_idc[i]表示運動限定依賴的情況下，也就是，amplePredEnabledFlag[nuh_layer_id]S[inter_layer_pred_layer_idc[i]]為0且MotionPredEnabledFlag[nuh_layer_id][inter_layer_pred_layer_idc[i]]為1的情況下，將該運動限定依賴的層通過以下的式子而加至實際運動預測層，使實際運動依賴層數NumActiveMotionPredRefLayers的計數變數j增加1。
ActiveMotionPredRefLayerId[j++]=RefLayerId[nuh_layer_id][inter_layer_pred_layer_idc[i]]
實際運動依賴層數NumActiveMotionPredRefLayers作為全部的實際依賴層i的處理結束的時間點的計數變數j而被求出。
通過上述處理，得到層依賴類型僅包含表示運動限定依賴的依賴層在內的實際運動依賴層ActiveMotionPredRefLayerId[]。
上述構成的圖像解碼裝置31A3具備：層依賴資訊解碼機構(參數集解碼部401A3)，其對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼；實際依賴層資訊解碼機構(實際依賴層解碼部403A3)，其對表示所述對象層的某對象圖片所參照的與所述對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構(參照圖片集導出部404)，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述實際依賴層資訊解碼機構對表示由所述對象圖片參照的與所述對象層不同的層的圖片數的實際依賴層數NumActiveRefLayerPics進行解碼，在實際依賴層數NumActiveRefLayerPics與依賴層數NumDirectRefLayers[nuh_layer_id]不同的情況下，從編碼資料對表示依賴層清單的要素的實際依賴層索引inter_layer_pred_layer_idc[i]進行解碼，從而導出實際依賴層列表RefLayerPics，在與依賴層數相等的情況下，該運動圖像解碼裝置從依賴層清單RefLayerId導出實際依賴層列表RefLayerPics。
根據上述構成的運動圖像解碼裝置，在實際依賴層數為與依賴層數為相同的數目的情況下，不需要實際依賴層索引的解碼，因此起到減少碼量的效果。
(圖像解碼裝置31A4)
圖23是表示本實施方式所涉及的圖像解碼裝置31A4的構成的概略圖。作為第1實施方式的一構成的圖像解碼裝置31A4構成為包含圖像資料解碼部300和首部解 碼部400A4。圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，對賦予了與已說明的機構同一標號的機構在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400A4構成為包含參數集解碼部401A4和切片片段首部解碼部402A4。
參數集解碼部401A4包含層依賴資訊解碼部4011和實際依賴標誌存在標誌解碼部4012。圖24示出參數集解碼部401A4所解碼的、參數集的資料結構的一例。實際依賴標誌存在標誌解碼部4012對圖24所示的實際依賴標誌存在標誌active_dependency_present_flag進行解碼。此外，實際依賴標誌存在標誌active_dependency_present_flag除了VPS之外，還可以從SPS或PPS進行解碼。
切片片段首部解碼部402A4構成為包含實際依賴層解碼部403A4和參照圖片集導出部404。
圖25示出本發明的實施方式的切片片段首部解碼部402A4所解碼的、切片片段首部的資料結構的一例。
實際依賴層解碼部403A4在實際依賴標誌存在標誌active_dependency_present_flag為1的情況下，從編碼資料來解碼實際依賴層資訊。
解碼處理與實際依賴層解碼部403A3相同，故省略說明。
實際依賴層解碼部403A4在實際依賴標誌存在標誌active_dependency_present_flag為0的情況下，將實際 依賴層資訊導出如下。
實際依賴層解碼部403A4首先在依賴層數NumDirectRefLayers[nuh_layer_id]為1的情況下，將層間預測有效標誌inter_layer_pred_enabled_flag設為1，在除此以外的情況下設為0。接著，實際依賴層解碼部403A4在層間預測有效標誌inter_layer_pred_enabled_flag為1的情況下，對實際依賴層數NumActiveRefLayerPics設定依賴層數NumDirectRefLayers[nuh_layer_id]。
NumActiveRefLayerPics=NumDirectRefLayers[nuh_layer_id]
進而，實際依賴層解碼部403A4將實際依賴層RefPicLayerId[]作為依賴層RefLayerId[nuh_layer_id][i]導出如下。
for(i=0；i<NumActiveRefLayerPics；i++)RefPicLayerId[i]=RefLayerId[nuh_layer_id][i]
此外，實際依賴層解碼部403A4可以取代上述式子，導出依賴層標識符inter_layer_pred_layer_idc[i]，並通過與實際依賴層解碼部403A3相同的處理，來從依賴層標識符inter_layer_pred_layer_idc[i]導出實際依賴層RefPicLayerId[]。
for(i=0；i<NumActiveRefLayerPics；i++)inter_layer_pred_layer_idc[i]=i
實際依賴層解碼部403A4，作為對象切片片段中的與層間預測有關的實際依賴層資訊，進而還導出：參 照圖片層標識符RefPicLayerId[]、實際樣本依賴層數NumActiveSamplePredRefLayers、實際運動依賴層數NumActiveMotionPredRefLayers、實際樣本依賴層標識符ActiveSamplePredRefLayerId[]、實際運動依賴層標識符ActiveMotionPredRefLayerId[]。這些導出方法與實際依賴層解碼部403A3相同，因此省略詳細的說明。
上述構成的圖像解碼裝置31A4具備：層依賴資訊解碼機構(參數集解碼部401A4)，其對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼；實際依賴標誌存在標誌解碼機構，其解碼表示是否在切片片段首部中對實際依賴層資訊進行解碼的實際依賴標誌存在標誌；實際依賴層資訊解碼機構(實際依賴層解碼部403A4)，其對表示對象層的某對象圖片所參照的與所述對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構(參照圖片集導出部404)，其基於實際層依賴資訊來至少生成層間參照圖片集，實際依賴層資訊解碼機構在由實際依賴標誌存在標誌解碼機構解碼出的實際依賴標誌存在標誌為1的情況下，從編碼資料來對包含實際依賴層列表RefLayerPics進行解碼，在實際依賴標誌存在標誌為1以外的情況下，該運動圖像解碼裝置從依賴層清單RefLayerId導出實際依賴層列表RefLayerPics。
根據上述構成的運動圖像解碼裝置，在實際依賴標誌存在標誌為0的情況下，不需要實際依賴層索引的解碼，因此起到減少碼量的效果。
(第2實施方式)
接下來，針對本發明所涉及的圖像解碼裝置的第2實施方式進行說明。第2實施方式所涉及的圖像解碼裝置能限制實際最大層數，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像解碼裝置，不會進行實際最大層數以上的實際層依賴標誌的解碼，因此起到減少碼量的效果。
以下，作為第2實施方式所涉及的圖像解碼裝置，依次說明圖像解碼裝置31B1、圖像解碼裝置31B2。
(圖像解碼裝置31B1)
圖26是表示本實施方式所涉及的圖像解碼裝置31B1的構成的概略圖。作為本發明的第2實施方式的一構成的圖像解碼裝置31B1構成為包含圖像資料解碼部300和首部解碼部400B1。
圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，針對賦予了與已說明的機構同一標號的機構，在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400B1構成為包含參數集解碼部401B1和切片片段首部解碼部402B1。參數集解碼部401B1構成為包含層依賴資訊解碼部4011和實際最大層數解碼部4013。
圖28示出參數集解碼部401B1所解碼的、參數集的資料結構的一例。
實際最大層數解碼部4013從圖28所示的參數集的編碼資料，對與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行解碼。
切片片段首部解碼部402B1構成為包含實際依賴層解碼部403B1。
圖29示出切片片段首部解碼部402B1所解碼的、切片片段首部的資料結構的一例。
實際依賴層解碼部403B1在處於非基礎層(層標識符nuh_layer_id>0的層)且依賴層數NumDirectRefLayers[nuh_layer_id]大於0的情況下，將對象切片片段中的與實際依賴層有關的語法解碼如下。
實際依賴層解碼部403B1對展示層間預測的有無的層間預測有效標誌inter_layer_pred_enabled_flag進行解碼。在層間預測為有效即inter_layer_pred_enabled_flag=1的情況下，且依賴層數NumDirectRefLayers[nuh_layer_id]大於1，實際最大依賴層數max_active_ref_layers大於1的情況下，進而對實際依賴層數所涉及的語法num_inter_layer_ref_pics_minus1進行解碼，通過以下的式子來對實際依賴層數NumActiveRefLayerPics進行解碼。
NumActiveRefLayerPics=num_inter_layer_ref_pics_minus1+1
實際依賴層解碼部403B1在實際依賴層數NumActiveRefLayerPics為1以上的情況下，對展示層間預測的依賴層的層間依賴標識符inter_layer_pred_layer_idc[i] 進行解碼。但在對象層為基礎層(nuh_layer_id==0)的情況或參照層不存在的(NumDirectRefLayers[nuh_layer_id]==0)的情況下，或者層間預測非有效的(inter_layer_pred_enabled_flag==0)情況下，實際依賴層圖片數為0，因此對inter_layer_pred_layer_idc[i]不解碼。
實際依賴層解碼部403B1，作為對象切片片段中的與層間預測有關的實際依賴層資訊，還導出：參照圖片層標識符RefPicLayerId[]、實際樣本依賴層數NumActiveSamplePredRefLayers、實際運動依賴層數NumActiveMotionPredRefLayers、實際樣本依賴層標識符ActiveSamplePredRefLayerId[]實際運動依賴層標識符ActiveMotionPredRefLayerId[]。這些導出方法與實際依賴層解碼部403A3相同，因此省略詳細的說明。
以上說明的圖像解碼裝置31B1具備：層依賴資訊解碼機構(層依賴資訊解碼部4011)，其對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼；實際最大層數解碼機構(實際最大層數解碼部4013)，其對對象層的某圖片所參照的與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行解碼；實際依賴層資訊解碼機構(實際依賴層解碼部403B1)，其對表示對象層的某對象圖片所參照的與對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構(參照圖片集導出部404)，其基於實際依賴層資訊來至少生成層間參照圖片集，實際依賴層資訊解碼機構在實際最大層數 max_active_ref_layers大於1的情況下，對實際依賴層數所涉及的語法num_inter_layer_ref_pics_minus1進行解碼，並在實際依賴層數為1以上的情況下對依賴層標識符inter_layer_pred_layer_idc[]進行解碼。
根據上述構成的運動圖像解碼裝置31B1，在實際最大層數為1以外的情況下，也能限制實際依賴層數。由於對象層所實際使用的對象圖片所屬的層以外的層即層間參照圖片的數目被限制，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像解碼裝置，不會進行實際最大層數以上的實際層依賴標誌的解碼，因此起到減少碼量的效果。
(圖像解碼裝置31B2)
圖27是表示本實施方式所涉及的圖像解碼裝置31B2的構成的概略圖。作為本發明的第2實施方式的一構成的圖像解碼裝置31B2構成為包含圖像資料解碼部300和首部解碼部400B2。圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，對賦予了與已說明的機構同一標號的機構在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400B2構成為包含參數集解碼部401B1和切片片段首部解碼部402B2。參數集解碼部401B1構成為包含層依賴資訊解碼部4011和實際最大層數解碼部4013。
實際最大層數解碼部4013如在圖像解碼裝置 31B1中所說明，從圖28所示那樣的參數集的編碼資料，對與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行解碼。
圖30示出本發明的第2實施方式所涉及的切片片段首部解碼部402B2所解碼的、切片片段首部的資料結構的一例。
切片片段首部解碼部402B2構成為包含實際依賴層解碼部403B2和參照圖片集導出部404。實際依賴層解碼部403B2對實際層依賴標誌active_direct_dependency_flag進行解碼，並對實際依賴層列表RefPicLayerId[]進行解碼，該實際層依賴標誌active_direct_dependency_flag表示屬於依賴層列表RefLayerId[nuh_layer_id][]的各層的圖片是否是被對象圖片參照的，該依賴層列表RefLayerId[nuh_layer_id][]屬於對象圖片所屬的層nuh_layer_id。
具體而言，實際依賴層解碼部403B2根據圖30的編碼資料，針對對象圖片所屬的層nuh_layer_id的依賴層數NumDirectRefLayers[nuh_layer_id]的各自的索引i，直到實際依賴層數NumActiveRefLayerPics達到實際最大依賴層數max_active_ref_layers為止，對實際層依賴標誌active_direct_dependency_flag[i]進行解碼。
接下來，實際依賴層解碼部403B2與實際依賴層解碼部403同樣地，如圖21所示，在解碼出的實際層依賴標誌active_direct_dependency_flag[i]為1的情況下，如以下的式子所示，將對應的依賴層RefLayerId[nuh_layer_id][i] 追加至實際依賴層列表RefPicLayerId[]，並將實際依賴層數NumActiveRefLayerPics如以下的式子那樣增加。
RefPicLayerId[i]=RefLayerId[nuh_layer_id][i]
實際依賴層解碼部403B2將樣本預測以及運動預測所參照的層間參照圖片即實際樣本依賴層清單ActiveSamplePredRefLayerId[]以及實際運動依賴層列表ActiveMotionPredRefLayerId[]進行導出。導出處理與實際依賴層解碼部403相同，因此省略說明。
以上說明的圖像解碼裝置31B2具備：層依賴資訊解碼機構(層依賴資訊解碼部4011)，其對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼；實際最大層數解碼機構(實際最大層數解碼部4013)，其對對象層的某圖片所參照的、與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行解碼；實際依賴層資訊解碼機構(實際依賴層解碼部403B2)，其對表示對象層的某對象圖片所參照的與對象層不同的層的圖片的資訊進行解碼；以及參照圖片集導出機構(參照圖片集導出部404)，其基於實際依賴層資訊來至少生成層間參照圖片集，層依賴資訊解碼機構對實際層依賴標誌active_direct_dependency_flag進行解碼，該實際層依賴標誌active_direct_dependency_flag表示屬於依賴層清單的各層的圖片是否是被對象圖片參照的，在實際層依賴標誌為1的情況下，使實際依賴層數NumActiveRefLayerPics增加，進 而，層依賴資訊解碼機構僅在實際依賴層數NumActiveRefLayerPics小於實際最大層數max_active_ref_layers的情況下，進行實際層依賴標誌的解碼。
根據上述構成的運動圖像解碼裝置31B2，能限制實際最大層數，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像解碼裝置，不會進行實際最大層數以上的實際層依賴標誌的解碼，因此起到減少碼量的效果。
(第3實施方式)
接下來，針對本發明所涉及的圖像解碼裝置的第3實施方式進行說明。第3實施方式所涉及的圖像解碼裝置僅在層依賴類型為樣本依賴且運動依賴的情況下，通過將依賴類型最大值direct_dep_type_len設為0，從而能省略層依賴類型direct_dependency_type[][]的碼，因此起到減少碼量的效果。
以下，作為第3實施方式所涉及的圖像解碼裝置，說明圖像解碼裝置31C1。
(圖像解碼裝置31C1)
圖31是表示本實施方式所涉及的圖像解碼裝置31C1的構成的概略圖。本發明的第3實施方式所涉及的圖像解碼裝置31C1構成為包含圖像資料解碼部300和首部解碼部400C1。圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，針對賦予了與已說明的機 構同一標號的機構，在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400C1構成為包含參數集解碼部401C1和切片片段首部解碼部402。參數集解碼部401C1構成為包含層依賴資訊解碼部4011C1。層依賴資訊解碼部4011C1與層依賴資訊解碼部4011同樣地，對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼。具體而言，對表示對象層i是否依賴參照層j的層依賴標誌direct_dependency_flag[i][j]進行解碼。
圖32示出參數集解碼部401C1所解碼的、參數集的資料結構的一例。
層依賴資訊解碼部4011C1從圖32所示那樣的參數集的編碼資料，對層依賴類型的最大值direct_dep_type_len進行解碼。層依賴類型的最大值direct_dep_type_len取0以上的值。
層依賴資訊解碼部4011C1在依賴類型最大值direct_dep_type_len為0以外的情況下，從編碼資料解碼依賴類型。具體而言，在對象層為i、且依賴層為j的情況下的層依賴標誌direct_dependency_flag[i][j]為1的情況下，從編碼資料解碼層依賴類型direct_dependency_type[i][j]。
層依賴資訊解碼部4011C1在所述依賴類型最大值direct_dep_type_len為0的情況下，將層依賴類型作為0導出。即，在對象層為i、且依賴層為j的情況下的層依 賴標誌direct_dependency_flag[i][j]為1的情況下，對層依賴類型direct_dependency_type[i][j]設定0。
圖33(b)示出層依賴資訊解碼部4011C1的樣本依賴標誌SamplePredEnabledFlag和運動依賴標誌MotionPredEnabledFlag的導出處理。
如圖33(b)所示，層依賴資訊解碼部4011C1針對各對象層i、依賴層j，通過以下的式子來導出SamplePredEnabledFlag[iNuhLid][j]以及MotionPredEnabledFlag[iNuhLid][j]。
SamplePredEnabledFlag[iNuhLId][j]=((3-(direct_dependency_type[i][j]& 3))& 1)
MotionPredEnabledFlag[iNuhLId][j]=(((3-(direct_dependency_type[i][j]& 3))& 2)>>1)
在上述式子中，記號&表示比特積(邏輯與)，記號>>表示右比特移位。
由此，遵照上述的direct_dependency_type[i][j]的值與層依賴類型的值的關係，來導出SamplePredEnabledFlag和MotionPredEnabledFlag。
根據包含上述的處理的層依賴資訊解碼部4011C1，在direct_dependency_type[i][j]為0的情況下，按照存在樣本預測的依賴性即對應的SamplePredEnabledFlag[iNuhLId][j]為1、且存在運動預測的 依賴性即對應的MotionPredEnabledFlag[iNuhLId][j]成為1的方式，來導出樣本依賴標誌SamplePredEnabledFlag和運動依賴標誌SamplePredEnabledFlag。由此，對於使用最頻繁的存在樣本預測以及運動預測的依賴性的場景，分配以最短的比特長度來表現的0。
一般的用例場景是存在樣本預測以及運動預測的依賴性的場景。在這樣的用例場景下，通過將依賴類型最大值direct_dep_type_len設為0，能省略層依賴類型direct_dependency_type[][]的碼。
以上說明的圖像解碼裝置31C1具備：依賴類型最大值解碼機構(層依賴資訊解碼部4011C1)，其對層依賴類型的最大值direct_dep_type_len進行解碼；依賴類型解碼機構(層依賴資訊解碼部4011C1)，其對具有依賴類型最大值以下的值的層依賴類型進行解碼；以及參照圖片集導出機構(參照圖片集導出部404)，其基於層依賴類型來生成層間參照圖片集，依賴類型最大值解碼機構對具有0以上的值的依賴類型最大值direct_dep_type_len進行解碼，依賴類型解碼機構在依賴類型最大值direct_dep_type_len為0以外的情況下，從編碼資料解碼層依賴類型direct_dependency_type來設定，在所述依賴類型最大值direct_dep_type_len為0的情況下，將層依賴類型direct_dependency_type導出為0，依賴類型解碼機構進而根據層依賴類型direct_dependency_type，將表示依賴層是否為樣本依賴層的標誌即樣本依賴標誌SamplePredEnabledFlag、 以及表示依賴層是否為運動依賴層的標誌即運動依賴標誌MotionPredEnabledFlag進行導出，在層依賴類型direct_dependency_type為0的情況下，將樣本依賴標誌SamplePredEnabledFlag以及運動依賴標誌MotionPredEnabledFlag設為1。
根據上述構成的運動圖像解碼裝置31C1，通過將層依賴類型的最大值direct_dep_type_len作為0進行解碼，從而在層依賴類型為樣本依賴且運動依賴的情況下，能省略層依賴類型direct_dependency_type的解碼，因此起到減少碼量的效果。
(第4實施方式)
接下來，針對本發明所涉及的圖像解碼裝置的第4實施方式來進行說明。第4實施方式所涉及的圖像解碼裝置在生成L0參照清單的情況和生成L1參照清單的情況下，以改變層間參照圖片的插入順序為特徵，因此起到減少參照圖片索引的碼量的效果。
以下，作為第4實施方式所涉及的圖像解碼裝置，依次說明圖像解碼裝置31D1、圖像解碼裝置31D2。
(圖像解碼裝置31D1)
圖34是表示本實施方式所涉及的圖像解碼裝置31D1的構成的概略圖。
作為本發明的第4實施方式的一構成的圖像解碼裝置31D1構成為包含圖像資料解碼部300和首部解碼部400D1。
圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，賦予了與已說明的機構同一標號的機構在本實施方式中也為同樣的構成，因此以後省略說明。
首部解碼部400D1構成為包含參數集解碼部401和切片片段首部解碼部402D1。
切片片段首部解碼部402D1構成為包含實際依賴層解碼部403和參照圖片集導出部404D1。
參照圖片集導出部404D1基於所導出的實際依賴層資訊，來導出用於對象圖片的解碼處理的參照圖片集RPS。細節在參照圖片集合導出部404中已說明，因此省略說明。
圖36是說明參照圖片集導出部404D1的L0參照圖片清單的導出處理的圖。圖37是說明參照圖片集導出部404D1的L1參照圖片清單的導出處理的圖。
參照圖片集導出部404D1構築參照圖片清單(RPL)。以下，說明參照圖片清單構築處理的細節。參照圖片清單導出部基於參照圖片集RPS和RPL修正資訊來生成參照圖片清單RPL。
參照圖片清單由L0參照列表和L1參照列表這2個列表構成。首先，說明LX參照列表(X為0或1)的構築步驟。如圖36所示，L0參照列表由以下的S301~S304、S305D1、S306~S307所示的步驟構築。S301~S304、S307已說明。
(S305D1)對於暫定L0參照清單，依次追加圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片。即，如以下的式子，對索引i以升序，也就是，RefPicSetInterLayer[0]、RefPicSetInterLayer[1]、……的順序，來追加至暫定L0參照列表。
f0r(i=0；i<NumActiveRefLayerPics；rIdx++,i++)RefPicListTemp0[rIdx]=RefPicSetInterLayer[i]
接下來，通過同樣的處理來構築L1參照列表。如圖37所示，在L1參照列表的構築中，S303與S302的處理順序相反。也就是，短期後方參照圖片集RefPicSetStCurrAfter先於短期前方參照圖片集RefPicSetStCurrBefore被存放。
進而，如圖37所示，參照圖片集導出部404D1在L1參照列表的導出中取代用於L0參照列表的導出的S305D1，而使用以下的S305D1L1。
(S305D1L1)對於暫定L1參照清單，將圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片以追加至暫定L0參照清單的相反的順序來予以追加。即，按照以下的式子的對索引i進行降序，也就是，以RefPicSetInterLayer[NumActiveRefLayerPics-1]、RefPicSetInterLayer[NumActiveRefLayerPics-2]、……RefPicSetInterLayer[0]的順序來追加至暫定L1參照列表。
f0r(i=0；i<NumActiveRefLayerPics；rIdx++,i++)RefPicListTemp1[rIdx]=RefPicSetInterLayer [NumActiveRefLayerPics-i-1]
上述的構成的所述參照圖片清單生成機構在生成L0參照清單的情況下，從所述層間參照圖片中以給定的順序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以與所述給定的順序不同的順序(逆序)進行追加。
此外，在本發明的第4構成中，將在以上說明的暫定L0參照列表與暫定L1參照清單中追加圖片層間參照圖片集RefPicSetInterLayer的要素的順序設定為不同，但該方法也可以是與上述不同的方法。
(參照圖片集導出部404D1的變形例)
例如，可以將向暫定L0參照清單追加圖片層間參照圖片集RefPicSetInterLayer的要素設為降序，並將向暫定L1參照清單追加圖片層間參照圖片集RefPicSetInterLayer的要素設為升序。即，可以在暫定L1參照列表中進行與S305D1對應的處理，在暫定L0參照列表中進行與S305D1L1對應的處理。
(參照圖片集導出部404D1的另一變形例)
圖38是說明參照圖片集導出部404D1′′的L1參照圖片清單的導出處理的圖。如圖38所示，在向暫定L1參照清單追加圖片層間參照圖片集RefPicSetInterLayer的要素時，將暫定L0參照列表的排頭要素與第2個要素進行更換。
此時，向暫定L0參照清單追加圖片層間參照 圖片集RefPicSetInterLayer的要素，既可以像以下的步驟那樣設為升序也可以設為降序。
f0r(i=0；i<NumActiveRefLayerPics；rIdx++,i++)RefPicListTemp0[rIdx]=RefPicSetInterLayer[i]
以上說明的圖像解碼裝置31D1具備：層依賴資訊解碼機構(實際依賴層解碼部403)，其對表示對象圖片所參照的與所述對象層不同的層的圖片的資訊即實際依賴層資訊進行解碼；參照圖片集導出機構(參照圖片集導出部404D1)，其基於所述實際依賴層資訊來至少生成層間參照圖片集；以及參照圖片清單生成機構(參照圖片集導出部404D1)，其生成參照圖片清單，所述參照圖片清單生成機構在生成L0參照清單的情況下，從所述層間參照圖片中以給定的順序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以與所述給定的順序不同的順序來進行追加。
根據上述構成的運動圖像解碼裝置31D1，在層間參照圖片的數目為2以上的情況下，層間參照圖片在L0參照圖片與L1參照圖片被存放於不同的位置。在此情況下，某層間參照圖片在L0參照圖片，以比L1參照圖片小的參照圖片索引被參照，反之，別的某層間參照圖片在L1參照圖片，以比L0參照圖片小的參照圖片索引被參照。小的參照圖片索引以少的碼量被參照，因此如上所述，起到減少參照圖片索引的碼量的效果。
(圖像解碼裝置31D2)
圖35是表示本實施方式所涉及的圖像解碼裝置31D2的構成的概略圖。
作為本發明的第4實施方式的一構成的圖像解碼裝置31D2構成為包含圖像資料解碼部300和首部解碼部400D2。
圖像資料解碼部300與前述的第1實施方式同樣，因此省略說明。同樣地，賦予了與已說明的機構同一標號的機構在本實施方式中也是同樣的構成，因此以後省略說明。
首部解碼部400D2構成為包含參數集解碼部401D2和切片片段首部解碼部402D2。參數集解碼部401D2構成為包含層依賴資訊解碼部4011和層間參照清單追加順序標誌解碼部4014。
圖39示出參數集解碼部401D2所解碼的、參數集的資料結構的一例。圖40是說明參照圖片集導出部404D2的L0參照圖片清單的導出處理的圖。圖41是說明參照圖片集導出部404D2的L1參照圖片清單的導出處理的圖。
層間參照清單追加順序標誌解碼部4014從參數集(例如VPS或SPS、PPS)，對如圖39所示的層間參照清單追加順序標誌inter_layer_pic_list_order_flag進行解碼。
切片片段首部解碼部402D2構成為包含實際依賴層解碼部403和參照圖片集導出部404D2。
參照圖片集導出部404D2基於所導出的實際依賴層資訊，來導出用於對象圖片的解碼處理的參照圖片集RPS。細節在參照圖片集導出部404中已說明，因此省略說明。
參照圖片集導出部404D2構築參照圖片清單(RPL)。以下，說明參照圖片清單構築處理的細節。參照圖片清單導出部基於參照圖片集RPS和RPL修正資訊來生成參照圖片清單RPL。
參照圖片集導出部404D2所包含的參照圖片清單構築處理根據層間參照清單追加順序標誌inter_layer_pic_list_order_flag的值，將追加圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片的順序在L0參照清單與L1參照列表中進行切換。
參照圖片清單由L0參照列表和L1參照列表這2個列表構成。首先，說明LX參照列表(X為0或1)的構築步驟。如圖40所示，L0參照列表以以下的S301~S304、S305D2、S306~S307所示的步驟構築。S301~S304、S307已說明。
(S305D2)對於暫定L0參照清單，追加圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片。此時，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為0的情況下以升序，在層間參照清單追加順序標誌inter_laver_pic_list_order_flag為1的情況下以降序進行追加。
接下來，通過同樣的處理來構築L1參照列表。如圖41所示，在L1參照列表的構築中，S303與S302的處理順序相反。也就是，短期後方參照圖片集RefPicSetStCurrAfter先於短期前方參照圖片集RefPicSetStCurrBefore被存放。
進而，如圖41所示，參照圖片集導出部404D2在L1參照列表的導出中取代用於L0參照列表的導出的S305D2而使用以下的S305D2L1。
(S305D2L1)對於暫定L1參照清單，將圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片以與追加至暫定L0參照清單的順序相反的順序來予以追加。即，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為0的情況下以降序，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為1的情況下以升序進行追加。
此外，在暫定L0參照列表和暫定L1參照清單中追加圖片層間參照圖片集RefPicSetInterLayer的要素的順序可以是與上述不同的方法。
(參照圖片集導出部404D2的變形例)
例如，作為參照圖片集導出部404D2的變形例，可以以以下的方法來導出參照圖片清單。在參照圖片集導出部404D2的變形例中，取代S305D2、S305D2L1而使用以下的S305D2′、S305D2L1′。
(S305D2′)對於暫定L0參照清單，追加圖片 層間參照圖片集RefPicSetInterLayer中所含的參照圖片。在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為0的情況下以降序，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為1的情況下以升序進行追加。
(S305D2L1′)對於暫定L1參照清單，將圖片層間參照圖片集RefPicSetInterLayer中所含的參照圖片以與追加至暫定L0參照清單的順序相反的順序來進行追加。即，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為0的情況下以升序，在層間參照清單追加順序標誌inter_layer_pic_list_order_flag為1的情況下以降序來進行追加。
(參照圖片集導出部404D2的另一變形例)
在參照圖片集導出部404D2的另一變形例中，在向暫定L1參照清單追加圖片層間參照圖片集RefPicSetInterLayer的要素的過程中，將暫定L0參照列表的排頭要素與第2個要素更換。利用以下的步驟。
此外，關於向暫定L0參照清單追加圖片層間參照圖片集RefPicSetInterLayer的要素，使用通過層間參照清單追加順序標誌inter_layer_pic_list_order_flag來變更追加方法的已說明的方法，例如，S305D2、S305D2′。
以上說明的圖像解碼裝置31D2是運動圖像解碼裝置，除了以上說明的圖像解碼裝置31D1之外，還具備對層間參照清單追加順序標誌進行解碼的機構(參照圖片 集導出部404D2)，其中該層間參照清單追加順序標誌對層間參照圖片清單的追加順序的標誌進行表示，所述參照圖片清單生成機構在層間參照清單追加順序標誌為某值的情況下，在生成L0參照清單的情況下，從所述層間參照圖片中以升序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以降序進行追加，反之，在層間參照清單追加順序標誌非某值的情況下，在生成L0參照清單的情況下，從所述層間參照圖片中以降序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以升序進行追加。
根據上述構成的運動圖像解碼裝置31D2，在層間參照圖片，L0參照圖片與L1參照圖片被改變了優先順序，同時像L0參照圖片那樣，起到配置優先順序更高的層間參照圖片的效果。
根據上述構成的運動圖像解碼裝置31D2，在層間參照圖片的數目為2以上的情況下，層間參照圖片在L0參照圖片與L1參照圖片中被存放於不同的位置。在此情況下，某層間參照圖片在L0參照圖片中以比L1參照圖片小的參照圖片索引被參照，反之，別的某層間參照圖片在L1參照圖片以比L0參照圖片小的參照圖片索引被參照。小的參照圖片索引以少的碼量被參照，因此如上所述，起到減少參照圖片索引的碼量的效果。
(圖像編碼裝置的構成)
接下來，說明本發明的一實施方式所涉及的圖 像編碼裝置11的構成。圖7是表示本實施方式所涉及的圖像編碼裝置11的構成的概略圖。圖像編碼裝置11構成為包含圖像資料編碼部1000和首部編碼部1400。
圖像資料編碼部1000對從裝置外部輸入的多個層圖像T進行編碼來生成編碼圖像資料VD。另外，將在編碼處理的過程中所決定的編碼模式等的參數向首部編碼部1400進行輸出。
首部編碼部1400構成為包含參數集編碼部1401和切片片段首部編碼部1402。參數集編碼部1401基於多個層圖像T以及從圖像資料編碼部1000輸入的參數，生成切片層的上級層的參數集。上級層的參數例如是視訊參數集VPS、序列參數集SPS、圖片參數集PPS。切片片段首部編碼部1402同樣地生成切片層的參數。切片層的參數例如是切片片段首部、或者切片片段首部以及切片片段首部擴展。首部編碼部1400將包含這些生成的參數集等在內的首部資訊HI進行輸出。關於首部編碼部1400的細節將後述。
圖像編碼裝置11生成將所生成的首部資訊HI與編碼圖像資料VD遵照給定的規則進行了連結後的編碼流Te，並向裝置外部進行輸出。
(圖像編碼部的構成)
接下來，說明圖像資料編碼部1000的構成。
圖8是表示本實施方式所涉及的圖像資料編碼部1000的構成的概略圖。圖像資料編碼部1000構成為包含： 預測圖像生成部101、減法部102、DCT/量化部103、熵編碼部104、逆量化/逆DCT部105、加法部106、預測參數存儲器(預測參數存儲部、幀存儲器)108、參照圖片存儲器(參照圖像存儲部、幀存儲器)109、編碼參數決定部110、預測參數編碼部111以及層間運動映射部1125。預測參數編碼部111構成為包含幀間預測參數編碼部112以及幀內預測參數編碼部113。
預測圖像生成部101針對從外部輸入的層圖像T的每個視點的各圖片，按將該圖片分割出的區域即每塊來生成預測圖片塊P。在此，預測圖像生成部101基於從預測參數編碼部111輸入的預測參數來從參照圖片存儲器109讀出參照圖片塊。從預測參數編碼部111輸入的預測參數例如是運動向量或位移向量。預測圖像生成部101讀出以編碼物對象塊為起點而預測出的運動向量或位移向量所示的位置上的塊的參照圖片塊。預測圖像生成部101針對已讀出的參照圖片塊，使用多個預測方式當中的1個預測方式來生成預測圖片塊P。預測圖像生成部101將已生成的預測圖片塊P向減法部102進行輸出。此外，預測圖像生成部101進行與已經說明的預測圖像生成部308相同的動作，因此省略預測圖片塊P的生成的細節。
減法部102按每個圖元，從自外部輸入的層圖像T的對應的塊的信號值之中減去從預測圖像生成部101輸入的預測圖片塊P的信號值，來生成殘差信號。減法部102將已生成的殘差信號向DCT/量化部103進行輸出。
DCT/量化部103針對從減法部102輸入的殘差信號進行DCT，來計算DCT係數。DCT/量化部103對計算出的DCT係數進行量化來求取量化係數。DCT/量化部103將求出的量化係數向熵編碼部104以及逆量化/逆DCT部105進行輸出。
從DCT/量化部103輸入量化係數到熵編碼部104，並從預測參數編碼部111輸入編碼參數。在所輸入的編碼參數中，例如有參照圖片索引refIdxLX、向量索引mvp_LX_idx、差分向量mvdLX、預測模式predMode、以及合併索引merge_idx等的碼。
熵編碼部104對所輸入的量化係數和編碼參數進行熵編碼來生成並輸出編碼圖像資料VD。
逆量化/逆DCT部105對從DCT/量化部103輸入的量化係數進行逆量化來求取DCT係數。逆量化/逆DCT部105針對求出的DCT係數進行逆DCT，來計算解碼殘差信號。逆量化/逆DCT部105將計算出的解碼殘差信號輸出至加法部106。
加法部106按每個圖元將從預測圖像生成部101輸入的預測圖片塊P的信號值與從逆量化/逆DCT部105輸入的解碼殘差信號的信號值進行相加，來生成參照圖片塊。加法部106將生成的參照圖片塊儲存至參照圖片存儲器109。
預測參數存儲器108將由預測參數編碼部111生成的預測參數按編碼對象的圖片以及塊的每一個而儲存 至預定的位置。
參照圖片存儲器109將由加法部106生成的參照圖片塊按編碼對象的圖片以及塊的每一個而存儲至預定的位置。
編碼參數決定部110從編碼參數的多個集合當中選擇1個集合。編碼參數是指，上述的預測參數或成為與該預測參數關聯生成的編碼的對象的參數。另外，從已決定的參數當中，將在切片層以上的層中公共的參數向首部編碼部1400進行輸出。針對在切片層以上的層中公共的參數將後述。
編碼參數決定部110針對上述編碼參數的多個集合的各集合，計算表示信息量的大小和編碼誤差的成本值。成本值例如是碼量與對平方誤差乘以係數λ而得到的值之和。碼量是對量化誤差和編碼參數進行熵編碼而得到的編碼流Te的信息量。平方誤差是針對在減法部102中計算出的殘差信號的殘差值的平方值的圖元間的總和。係數λ是比預先設定的零大的實數。編碼參數決定部110選擇使計算出的成本值最小的編碼參數的集合。由此，熵編碼部104將選擇出的編碼參數的集合作為編碼流Te輸出至外部，不輸出未被選擇的編碼參數的集合。
所選擇的編碼參數的集合依賴於要選擇的預測方式。作為選擇的對象的預測方式在編碼對象的圖片為基礎視圖圖片的請況下，是幀內預測、運動預測以及合併預測。運動預測是指上述的幀間預測當中顯示時刻間的預 測。合併預測是使用作為已編碼的塊的、與從編碼物對象塊起處於預定的範圍內的塊相同的參照圖片塊以及預測參數的預測。在編碼對象的圖片為非基礎視圖圖片的情況下，作為選擇的對象的預測方式是幀內預測、運動預測、合併預測以及位移預測。位移預測(視差預測)是指上述的幀間預測當中別層圖像(別視點圖像)間的預測。
編碼參數決定部110將與選擇出的預測方式對應的預測模式predMode輸出至預測參數編碼部111。
在選擇運動預測作為預測方式的情況下，編碼參數決定部110還將運動向量mvLX一併輸出。運動向量mvLX表示從編碼物對象塊的位置起至生成預測圖片塊P時的參照圖片塊的位置為止的向量。在表示運動向量mvLX的資訊中可以包含表示參照圖片的資訊(例如，參照圖片索引refIdxLX、圖片順序編號POC)，可以表徵預測參數。
在選擇位移預測作為預測方式的情況下，編碼參數決定部110還將位移向量dvLX一併輸出。位移向量dvLX表示從編碼物對象塊的位置起到生成預測圖片塊P時的參照圖片塊的位置為止的向量。在表示位移向量dvLX的資訊之中包含表示參照圖片的資訊(例如，參照圖片索引refIdxLX、視圖標識符view_id)，可以表徵預測參數。
在選擇合併預測作為預測方式的情況下，編碼參數決定部110還將合併索引merge_idx一併輸出。
預測參數編碼部111基於從編碼參數決定部110輸入的參數來導出在生成預測圖片時使用的預測參數， 並對導出的預測參數進行編碼來生成編碼參數的集合。預測參數編碼部111將生成的編碼參數的集合輸出至熵編碼部104。
預測參數編碼部111將與生成的編碼參數的集合當中由編碼參數決定部110選擇出的集合對應的預測參數存儲至預測參數存儲器108。
在從編碼參數決定部110輸入的預測模式predMode表示幀間預測模式的情況下，預測參數編碼部111使幀間預測參數編碼部112動作。在預測模式predMode表示幀內預測模式的情況下，預測參數編碼部111使幀內預測參數編碼部113動作。
幀間預測參數編碼部112基於從編碼參數決定部110輸入的預測參數來導出幀間預測參數。幀間預測參數編碼部112作為導出幀間預測參數的構成，包含與由幀間預測參數解碼部303導出幀間預測參數的構成相同的構成。
幀內預測參數編碼部113將從編碼參數決定部110輸入的預測模式predMode所示的幀內預測模式IntraPredMode確定為幀內預測參數的集合。
在此，針對編碼參數決定部110中的與層間預測有關的參數決定以及基於所決定的參數的首部編碼部1400中的首部資訊的編碼處理的細節來進行說明。
編碼參數決定部110預先存儲表示在各層(多視點圖像等)的編碼處理過程中選擇出的預測模式或參照 圖片的資訊。其中，若與層間的依賴性有關的資訊即與樣本預測或時域運動預測有關的層間的依賴關係就全部層而被決定，則將與全部層有關的層間依賴資訊向首部編碼部1400輸出。層間依賴資訊包含展示層i是否參照層j的資訊、以及表示各參照是基於樣本預測還是基於運動預測的資訊。首部編碼部1400將來自編碼參數決定部110的層間依賴資訊向參數集編碼部1401輸入。
參數集編碼部1401基於所輸入的層間依賴資訊，對層依賴標誌direct_dependency_flag[i][j]以及層依賴類型direct_dependency_type[i][j]進行編碼，生成包含它們在內的資料結構即VPS擴展(圖9)，並將編碼出的資訊向切片片段首部編碼部1402輸出。
另外，編碼參數決定部110將包含切片片段單位的編碼處理過程中選擇出的預測模式或參照圖片資訊在內的切片層編碼參數向首部編碼部1400輸出。首部編碼部1400將來自編碼參數決定部110的切片層編碼參數向切片片段首部編碼部1402輸入。
切片片段首部編碼部1402基於所輸入的切片層編碼參數以及從參數集編碼部1401輸入的與層間依賴有關的編碼參數，對展示層間預測的有無的層間預測有效標誌inter_layer_pred_enabled_flag進行編碼。在層間預測為有效的情況下，基於與對象層有關的依賴層數(NumDirectRefLayers[])和實際依賴層圖片數(NumActiveRefLayerPics)，對層間依賴圖片數 (num_inter_layer_ref_pics_minus1)以及層間依賴標識符(inter_layer_pred_layer_idc[])進行編碼，來生成包含它們在內的切片片段首部(圖10)。具體而言，對num_inter_layer_ref_pics_minus1設定“NumActiveRefLayerPics-1”的值，對inter_layer_pred_layer_idc[i]設定表示對象層i的參照層j的層標識符。此時，在不存在實際參照層圖片的情況下(NumActiveRefLayerPics==0)，不對層標識符inter_layer_pred_layer_idc[]進行編碼，在參照層數僅為1個的情況下，對層間依賴圖片數num_inter_layer_ref_pics_minus1也不編碼。另外，關於在編碼這些碼時的比特長度，就num_inter_layer_ref_pics_minus1而言，使成為能表現NumDirectRefLayers[]的最小的比特數，就inter_layer_pred_layer_idc[]而言，使成為能表現NumActiveRefLayerPics的最小的比特數，以此分別進行編碼。
參數集編碼部1401對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行編碼。
切片片段首部編碼部1402，作為表示與對象層不同的層的圖片的資訊，對層間預測有效標誌inter_layer_pred_enabled_flag、以及表示屬於依賴層清單的各層的圖片是否是被所述對象圖片參照的實際層依賴標誌active_direct_dependency_flag進行編碼。
根據上述構成的運動圖像編碼裝置，較之於對實際依賴層索引進行解碼的情況，起到減少碼量的效果。
(圖像編碼裝置11A2)
說明本發明的一實施方式所涉及的圖像編碼裝置11A2的構成。圖像編碼裝置11A2構成為包含圖像資料編碼部1000和首部編碼部1400A2。
首部編碼部1400A2構成為包含參數集編碼部1401A2和切片片段首部編碼部1402A2。
參數集編碼部1401A2對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行編碼。
切片片段首部編碼部1402A2，作為表示與對象層不同的層的圖片的資訊，不對層間預測有效標誌inter_layer_pred_enabled_flag進行編碼，而對表示屬於依賴層清單的各層的圖片是否是被所述對象圖片參照的實際層依賴標誌active_direct_dependency_flag進行編碼。
根據上述構成的運動圖像編碼裝置A2，較之於對實際依賴層索引進行解碼的情況，起到減少碼量的效果。
(圖像編碼裝置11A3)
針對本發明的一實施方式所涉及的圖像編碼裝置11A3的構成進行說明。圖像編碼裝置11A3構成為包含圖像資料編碼部1000和首部編碼部1400A3。
首部編碼部1400A3構成為包含參數集編碼部1401A3和切片片段首部編碼部1402A3。
參數集編碼部1401A3對層依賴資訊進行編碼，該層依賴資訊對表示對象層可能參照的與對象層不同的層 的資訊即依賴層資訊進行解碼，切片片段首部編碼部1402A3對表示所述對象層的某對象圖片所參照的與所述對象層不同的層的圖片的資訊進行編碼。在此，在表示由所述對象圖片參照的與所述對象層不同的層的圖片數的實際依賴層數NumActiveRefLayerPics和實際依賴層數NumActiveRefLayerPics與依賴層數NumDirectRefLayers[nuh_layer_id]不同的情況下，實際依賴層資訊解碼機構根據編碼資料來對表示依賴層列表的要素的實際依賴層索引inter_layer_pred_layer_idc[i]進行編碼，在與依賴層數相等的情況下，不對實際依賴層索引inter_layer_pred_layer_idc[i]進行編碼。
根據上述構成的運動圖像解碼裝置，在實際依賴層數為與依賴層數相同的數目的情況下，不需要進行實際依賴層索引的解碼，因此起到減少碼量的效果。
(圖像編碼裝置11A4)
對本發明的一實施方式所涉及的圖像編碼裝置11A4的構成進行說明。圖像編碼裝置11A4構成為包含圖像資料編碼部1000和首部編碼部1400A4。
首部編碼部1400A4構成為包含參數集編碼部1401A4和切片片段首部編碼部1402A4。參數集合參數集編碼部1401A4對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行編碼。
另外，參數集參數集編碼部1401A4對表示是否將實際依賴層資訊由切片片段首部進行解碼的實際依賴 標誌存在標誌進行編碼。
切片片段首部編碼部1402A4在實際依賴標誌存在標誌為1的情況下，對表示對象層的某對象圖片所參照的與所述對象層不同的層的圖片的資訊進行編碼。在實際依賴標誌存在標誌為0的情況下，實際依賴層列表RefLayerPics與由參數集參數集編碼部1401A4編碼的依賴層清單RefLayerId相等，因此不編碼。
根據上述構成的運動圖像編碼裝置，在實際依賴層列表RefLayerPics與依賴層清單RefLayerId相等的情況下，通過將實際依賴標誌存在標誌編碼為0，從而變得不需要實際依賴層索引，因此起到減少碼量的效果。
(圖像編碼裝置11B1)
針對本發明的一實施方式所涉及的圖像編碼裝置11B1的構成進行說明。圖像編碼裝置11B1構成為包含圖像資料編碼部1000和首部編碼部1400B1。
首部編碼部1400B1構成為包含參數集編碼部1401B1和切片片段首部編碼部1402B1。
參數集編碼部1401B1對層依賴資訊進行編碼，並對實際最大層數進行編碼，該層依賴資訊對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行解碼，該實際最大層數對對象層的某圖片所參照的與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行解碼。
切片片段首部編碼部1402B1對表示對象層的 某對象圖片所參照的與對象層不同的層的圖片的資訊進行編碼。此時，在實際最大層數max_active_ref_layers大於1的情況下，對實際依賴層數所涉及的語法num_inter_layer_ref_pics_minus1進行編碼，在實際依賴層數為1以上的情況下，對依賴層標識符inter_layer_pred_layer_idc[]進行編碼。
根據上述構成的運動圖像編碼裝置31B1，在實際最大層數為1以外的情況下，也能限制實際依賴層數。由於對象層所實際使用的處於對象圖片所屬的層以外的層的層間參照圖片的數目受限，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像編碼裝置，不會進行實際最大層數以上的實際層依賴標誌的編碼，因此起到減少碼量的效果。
(圖像編碼裝置11B2)
說明本發明的一實施方式所涉及的圖像編碼裝置11B2的構成。圖像編碼裝置11B2構成為包含圖像資料編碼部1000和首部編碼部1400B2。
首部編碼部1400B2構成為包含參數集編碼部1401B2和切片片段首部編碼部1402B2。
參數集編碼部1401B2對表示對象層可能參照的與對象層不同的層的資訊即依賴層資訊進行編碼，並對表示對象層的某圖片所參照的與對象層不同的層的圖片的最大值即實際最大依賴層數max_active_ref_layers進行編碼。
切片片段首部編碼部1402B2對表示對象層的某對象圖片所參照的與對象層不同的層的圖片的資訊進行編碼。此時，對表示屬於依賴層清單的各層的圖片是否是被對象圖片參照的實際層依賴標誌active_direct_dependency_flag進行編碼。
根據上述構成的運動圖像編碼裝置31B2，能限制實際最大層數，因此起到減少複雜度的效果。另外，根據上述構成的運動圖像編碼裝置，不會進行實際最大層數以上的實際層依賴標誌的編碼，因此起到減少碼量的效果。
(圖像編碼裝置11C1)
說明本發明的一實施方式所涉及的圖像編碼裝置11C1的構成。圖像編碼裝置11B2構成為包含圖像資料編碼部1000和首部編碼部1400C1。
首部編碼部1400C1構成為包含參數集編碼部1401C1和切片片段首部編碼部1402C1。
參數集編碼部1401C1導出層依賴類型的最大值direct_dep_type_len，作為具有0以上的值的語法要素進行編碼。參數集編碼部1401C1在所導出的依賴類型最大值direct_dep_type_len為0以外的情況下，對層依賴類型direct_dependency_type進行編碼。在依賴類型最大值direct_dep_type_len為0的情況下，層依賴類型direct_dependency_type為0，因此不編碼。此外，在層依賴類型direct_dependency_type為0的情況下，將樣本依賴標 誌SamplePredEnabledFlag以及運動依賴標誌MotionPredEnabledFlag設為1。
根據上述構成的運動圖像編碼裝置31C1，在層依賴類型為樣本依賴且運動依賴的情況下，將層依賴類型的最大值direct_dep_type_len設為0來進行編碼，能省略層依賴類型direct_dependency_type的編碼，因此起到減少碼量的效果。
(圖像編碼裝置11D1)
說明本發明的一實施方式所涉及的圖像編碼裝置11D1的構成。圖像編碼裝置11D1構成為包含圖像資料編碼部1000和首部編碼部1400。
首部編碼部1400所具備的參照圖片清單生成部在生成L0參照清單的情況下，從所述層間參照圖片中以給定的順序進行追加，在生成L1參照清單的情況下，從所述層間參照圖片中以與所述給定的順序不同的順序(逆序)進行追加。
(圖像編碼裝置11D2)
針對本發明的一實施方式所涉及的圖像編碼裝置11D2的構成進行說明。圖像編碼裝置11D2構成為包含圖像資料編碼部1000和首部編碼部1400。
首部編碼部1400所具備的參照圖片清單生成部在層間參照清單追加順序標誌為某值的情況下，在生成L0參照清單的情況下，從層間參照圖片中以升序進行追加，在生成L1參照清單的情況下，從層間參照圖片中以降序進 行追加，反之，在層間參照清單追加順序標誌非某值的情況下，在生成L0參照清單的情況下，從層間參照圖片中以降序進行追加，在生成L1參照清單的情況下，從層間參照圖片中以升序進行追加。
參數集編碼部1401D2對層間參照清單追加順序標誌進行編碼，該層間參照清單追加順序標誌對展示層間參照圖片清單的追加順序的標誌進行編碼。
根據上述構成的運動圖像編碼裝置31D2，在層間參照圖片，L0參照圖片與L1參照圖片被改變優先順序，同時像L0參照圖片那樣，起到配置優先順序更高的層間參照圖片的效果。
通過具備以上那樣的構成，本實施方式所涉及的圖像編碼裝置在對多層的圖像資料進行階層編碼時，在非基礎層用的與層間預測有關的多個參數群的值為給定的組合的情況下，省略擴展首部資訊的編碼，因此削減階層編碼所需的參數的碼量，能提高編碼效率。另外，關於切片層的資訊，通過將切片片段首部分離成基本部分和擴展部分，從而起到如下效果：抑制對僅遵照單一層的規格的圖像編碼裝置或軟體造成影響，使以單一層對應的圖像編碼裝置或軟體為基礎的多層對應(多視點圖像等)變得容易。
此外，可以以電腦來實現上述的實施方式中的圖像編碼裝置11、圖像解碼裝置31以及一部分。在此情況下，可以將用於實現該控制功能的程式記錄至電腦可讀的 記錄介質，使電腦系統讀入記錄於該記錄介質的程式並執行從而予以實現。此外，在此所謂的“電腦系統”是指，包含圖像編碼裝置11或圖像解碼裝置31中所內置的電腦系統，包含OS或周邊設備等硬體。另外，“電腦可讀的記錄介質”是指，軟碟、光磁片、CD-ROM、DVD-ROM等可移動介質，電腦系統中所內置的硬碟等存儲裝置。進而，“電腦可讀的記錄介質”可以包含經由像互聯網等網路或電話線路等通信線路來反射程式的情況下的通信線那樣短時間且動態保持程式的介質、以及像成為在此情況下的伺服器或用戶端的電腦系統內部的易失性存儲器那樣將程式保持一定時間的介質。另外，上述程式既可以是用於實現前述的功能的一部分的程式，進而也可以是能以與已記錄在電腦系統中的程式的組合來實現前述的功能的程式。
另外，可以將上述的實施方式中的圖像編碼裝置11、圖像解碼裝置31的一部分或全部作為LSI(Large Scale Integration)等積體電路來實現。圖像編碼裝置11、圖像解碼裝置31的各機構既可以個別地處理器化，也可以將一部分或全部進行集成來處理器化。另外，積體電路化的手法不限於LSI，還可以以專用電路或通用處理器來實現。另外，在因半導體技術的進步而出現了代替LSI的積體電路化的技術的情況下，還可以使用基於該技術的積體電路。
以上，參照附圖詳細說明瞭本發明的多個實施方式，但具體的構成不限於上述，能在不脫離本發明的要 旨的範圍內進行各種設計變更等。本發明的各實施例中記載的技術特徵可以相互組合形成新技術方案。
工業實用性
本發明適合應用於對編碼了圖像資料的編碼資料進行解碼的圖像解碼裝置、以及生成編碼了圖像資料的編碼資料的圖像編碼裝置。另外，適合應用於由圖像編碼裝置生成且由圖像解碼裝置參照的編碼資料的資料結構。

Claims (1)

  1. 一種運動圖像解碼裝置，其特徵在於，具備：層依賴資訊解碼機構，其對依賴層資訊進行解碼，該依賴層資訊表示針對對象層進行解碼時是否參照參照層的依賴關係；實際依賴層資訊解碼機構，其對表示所述參照層的圖片的實際依賴層資訊進行解碼；和參照圖片集導出機構，其基於所述實際依賴層資訊來至少生成層間參照圖片集，所述層依賴資訊解碼機構基於所述依賴層資訊來導出依賴層清單和依賴層數，所述依賴層清單是所述對象層所參照的參照層的清單，所述依賴層數表示對象層所參照的參照層的數目，所述實際依賴層資訊解碼機構對表示所述對象層的對象圖片所參照的所述參照層的圖片數的實際依賴層數進行解碼，僅在所述實際依賴層數與所述依賴層數不同的情況下，從編碼資料對表示所述依賴層清單的要素的實際依賴層索引進行解碼，在所述實際依賴層數與所述依賴層數相等的情況下，對所述實際依賴層數的個數的所述實際依賴層索引分別設定0以上且所述實際依賴層數減1以下的值。
TW103123396A 2013-07-10 2014-07-08 Moving image decoding device TWI632807B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-144617 2013-07-10
JP2013144617 2013-07-10

Publications (2)

Publication Number Publication Date
TW201503666A TW201503666A (zh) 2015-01-16
TWI632807B true TWI632807B (zh) 2018-08-11

Family

ID=52280011

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103123396A TWI632807B (zh) 2013-07-10 2014-07-08 Moving image decoding device

Country Status (7)

Country Link
US (1) US20160191933A1 (zh)
EP (1) EP3021589A4 (zh)
JP (1) JPWO2015005331A1 (zh)
CN (1) CN105210370B (zh)
HK (1) HK1217843A1 (zh)
TW (1) TWI632807B (zh)
WO (1) WO2015005331A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9756335B2 (en) * 2013-07-02 2017-09-05 Qualcomm Incorporated Optimizations on inter-layer prediction signalling for multi-layer video coding
KR20160031990A (ko) 2013-07-12 2016-03-23 소니 주식회사 화상 부호화 장치 및 방법
US9813736B2 (en) * 2013-09-27 2017-11-07 Qualcomm Incorporated Inter-view dependency type in MV-HEVC
MY178305A (en) 2013-10-11 2020-10-07 Vid Scale Inc High level syntax for hevc extensions
WO2016204481A1 (ko) * 2015-06-16 2016-12-22 엘지전자 주식회사 미디어 데이터 전송 장치, 미디어 데이터 수신 장치, 미디어 데이터 전송 방법, 및 미디어 데이터 수신 방법
US10484701B1 (en) * 2016-11-08 2019-11-19 Amazon Technologies, Inc. Rendition switch indicator
JP6961443B2 (ja) * 2017-09-29 2021-11-05 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
MX2020009056A (es) * 2018-03-01 2020-12-03 Arris Entpr Llc Sistema y método de almacenamiento de información de movimiento para codificación y señalizacion de video.
CN110419217B (zh) 2018-04-02 2023-09-26 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
KR20220012352A (ko) * 2019-05-30 2022-02-03 후아웨이 테크놀러지 컴퍼니 리미티드 인코더, 디코더 및 대응하는 방법
US11310492B2 (en) * 2019-09-20 2022-04-19 Tencent America LLC Signaling of inter layer prediction in video bitstream
US11418813B2 (en) 2019-09-20 2022-08-16 Tencent America LLC Signaling of inter layer prediction in video bitstream
US20210092406A1 (en) * 2019-09-23 2021-03-25 Qualcomm Incorporated Inter-layer reference picture signaling in video coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090003445A1 (en) * 2006-01-10 2009-01-01 Chen Ying Method and Apparatus for Constructing Reference Picture Lists for Scalable Video
CN101668208A (zh) * 2009-09-15 2010-03-10 杭州华三通信技术有限公司 帧编码方法及装置
CN102461171A (zh) * 2009-05-01 2012-05-16 汤姆森特许公司 三维视频的参考画面列表
TW201238357A (en) * 2011-01-14 2012-09-16 Panasonic Corp Image encoding method, image decoding method, memory management method, image encoding device, image decoding device, memory management device, and image encoding/decoding device

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100931870B1 (ko) * 2005-04-13 2009-12-15 노키아 코포레이션 비디오 데이터를 효과적으로 코딩 및 디코딩하는 방법,장치 및 시스템
KR101144539B1 (ko) * 2008-06-05 2012-05-14 한국전자통신연구원 스케일러블 비디오 코딩 비트스트림의 적응 변환 장치 및 그 방법
CN102547273B (zh) * 2010-12-08 2014-05-07 中国科学院声学研究所 一种基于mkv的支持可伸缩编码的多媒体文件构造方法
JP5833682B2 (ja) * 2011-03-10 2015-12-16 ヴィディオ・インコーポレーテッド スケーラブルなビデオ符号化のための依存性パラメータセット
WO2013048324A1 (en) * 2011-09-29 2013-04-04 Telefonaktiebolaget L M Ericsson (Publ) Reference picture list handling
EP3442227B1 (en) * 2012-02-29 2020-04-22 LG Electronics Inc. Inter-layer prediction method and apparatus
US10205961B2 (en) * 2012-04-23 2019-02-12 Qualcomm Incorporated View dependency in multi-view coding and 3D coding
US9253487B2 (en) * 2012-05-31 2016-02-02 Qualcomm Incorporated Reference index for enhancement layer in scalable video coding
US9602827B2 (en) * 2012-07-02 2017-03-21 Qualcomm Incorporated Video parameter set including an offset syntax element
US20140010291A1 (en) * 2012-07-05 2014-01-09 Vid Scale, Inc. Layer Dependency and Priority Signaling Design for Scalable Video Coding
US9398284B2 (en) * 2012-08-16 2016-07-19 Qualcomm Incorporated Constructing reference picture lists for multi-view or 3DV video coding
JP5867791B2 (ja) * 2012-09-28 2016-02-24 ソニー株式会社 画像処理装置および方法、記録媒体、並びに、プログラム
US9936215B2 (en) * 2012-10-04 2018-04-03 Vid Scale, Inc. Reference picture set mapping for standard scalable video coding
US9774927B2 (en) * 2012-12-21 2017-09-26 Telefonaktiebolaget L M Ericsson (Publ) Multi-layer video stream decoding
US10805605B2 (en) * 2012-12-21 2020-10-13 Telefonaktiebolaget Lm Ericsson (Publ) Multi-layer video stream encoding and decoding
KR20140087971A (ko) * 2012-12-26 2014-07-09 한국전자통신연구원 계층적 비디오 부호화에서 다중참조계층을 적용한 화면간 부／복호화 방법 및 그 장치
US20140218473A1 (en) * 2013-01-07 2014-08-07 Nokia Corporation Method and apparatus for video coding and decoding
US10129550B2 (en) * 2013-02-01 2018-11-13 Qualcomm Incorporated Inter-layer syntax prediction control
US8958477B2 (en) * 2013-04-05 2015-02-17 Vidyo, Inc. Multiple reference layer prediction signaling techniques
US11438609B2 (en) * 2013-04-08 2022-09-06 Qualcomm Incorporated Inter-layer picture signaling and related processes
MY174134A (en) * 2013-06-18 2020-03-10 Vid Scale Inc Inter-layer parameter set for hevc extensions
US9756335B2 (en) * 2013-07-02 2017-09-05 Qualcomm Incorporated Optimizations on inter-layer prediction signalling for multi-layer video coding

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090003445A1 (en) * 2006-01-10 2009-01-01 Chen Ying Method and Apparatus for Constructing Reference Picture Lists for Scalable Video
CN102461171A (zh) * 2009-05-01 2012-05-16 汤姆森特许公司 三维视频的参考画面列表
CN101668208A (zh) * 2009-09-15 2010-03-10 杭州华三通信技术有限公司 帧编码方法及装置
TW201238357A (en) * 2011-01-14 2012-09-16 Panasonic Corp Image encoding method, image decoding method, memory management method, image encoding device, image decoding device, memory management device, and image encoding/decoding device

Also Published As

Publication number Publication date
CN105210370B (zh) 2019-04-12
US20160191933A1 (en) 2016-06-30
TW201503666A (zh) 2015-01-16
JPWO2015005331A1 (ja) 2017-03-02
HK1217843A1 (zh) 2017-01-20
WO2015005331A1 (ja) 2015-01-15
EP3021589A4 (en) 2017-02-15
CN105210370A (zh) 2015-12-30
EP3021589A1 (en) 2016-05-18

Similar Documents

Publication Publication Date Title
TWI632807B (zh) Moving image decoding device
JP6151442B2 (ja) ３ｄビデオコーディング用の結合双予測マージング候補
JP6254254B2 (ja) ３次元（３ｄ）ビデオコーディング用の進化型マージモード
JP6434012B2 (ja) ３ｄ−ｈｅｖｃのための簡素化された高度動き予測
JP6419808B2 (ja) ビデオコーディングのための照明補償を処理すること
JP6215295B2 (ja) Ｈｅｖｃおよびその拡張における動きベクトルのコーディングおよび双予測
JP6522629B2 (ja) ３ｄビデオコード化のためのブロックベースの高度残差予測
JP6337104B2 (ja) テクスチャコーディングのためのより正確な高度残差予測（ａｒｐ）
JP2018110413A (ja) マルチビューコード化及び３ｄコード化におけるビュー依存性
AU2013330031B2 (en) Method and apparatus for motion information prediction and inheritance in video coding
JP5992640B2 (ja) ビデオコード化における参照ピクチャリストのためのビュー間予測の無効化
JP2016530848A (ja) 非対称動き分割を使用するビデオコーディング技法
KR20140140073A (ko) 고효율 비디오 코딩을 위한 하이-레벨 신택스 확장들
WO2014103529A1 (ja) 画像復号装置、およびデータ構造
WO2014050948A1 (ja) 画像復号装置及び画像符号化装置
KR20150097590A (ko) 디스패리티 벡터 유도
KR20150103122A (ko) 비디오 코딩 확장안들에 대한 시간 모션 벡터 예측
JP2015015626A (ja) 画像復号装置および画像符号化装置
WO2015056735A1 (ja) 画像復号装置
JP2014204327A (ja) 画像復号装置および画像符号化装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees