TW201320753A - 圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置（一） - Google Patents

圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置（一） Download PDF

Info

Publication number
TW201320753A
TW201320753A TW101123229A TW101123229A TW201320753A TW 201320753 A TW201320753 A TW 201320753A TW 101123229 A TW101123229 A TW 101123229A TW 101123229 A TW101123229 A TW 101123229A TW 201320753 A TW201320753 A TW 201320753A
Authority
TW
Taiwan
Prior art keywords
context
unit
block
image
coding
Prior art date
Application number
TW101123229A
Other languages
English (en)
Other versions
TWI547146B (zh
Inventor
Hisao Sasai
Takahiro Nishi
Youji Shibahara
Toshiyasu Sugio
Kyoko Tanikawa
Toru Matsunobu
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Publication of TW201320753A publication Critical patent/TW201320753A/zh
Application granted granted Critical
Publication of TWI547146B publication Critical patent/TWI547146B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

關於本發明之一實施形態的圖像解碼方法，其係包含：在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制步驟；及使用已決定之前述上下文，將與前述處理區塊對應之位元列進行算術解碼之算術解碼步驟，在前述上下文控制步驟中，在前述控制參數的訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰之左區塊及上區塊的控制參數皆利用之條件來決定前述上下文，在前述控制參數的訊號類別為第2類別的情況下，使用不利用前述上區塊的控制參數之條件來決定前述上下文，前述第2類別為“intra_chroma_pred_mode”。

Description

圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置(一) 技術領域
本發明係關於一種圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編解碼裝置，尤其是關於一種使用算術編碼或算術解碼之圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編解碼裝置。
背景技術
自然圖像係具有統計性偏移，該偏移係進行變動性的行為。在利用統計偏移的變動性之熵編碼方式之1存在有Context-Based Adaptive Binary Arithmetic Coding(CABAC；上下文參考之適應性二元算術編碼)(參照非專利文獻1)。該CABAC方式係被採用在ITU/T/ISOIEC standard for video coding(視訊編碼標準)，H.264/AVC方式。
以下，說明在CABAC方式所使用之用語的意義。
(1)“Context-Based Adaptive”(依據上下文之適應)係為使編碼或解碼方法適應統計偏移的變動。換言之，“Context-Based Adaptive”也可以說是在將某個符號進行編碼或解碼的情況下，配合周圍條件的發生事象預測適當的機率作為該符號的發生機率。例如，在編碼中，在決定某個符號S的各值之發生機率p(x)的情況下，使用以實際發生的事象或事象之列F(z)作為條件之附條件發生機率。
(2)“Binary”(二元)係意指以二元配列表現符號。對於 以多值所表示之符號，一次變形為被稱為bin string之二值配列。再者，對於各個配列要素，一面切換使用預測機率(附條件機率)，一面將發生2個值之事象的哪一個進行位元列化。藉此，可以利用比訊號類別的單位更詳細的單位(二元要素單位)管理(初期化及更新)值的機率(參照非專利文獻1的圖2等)。
(3)所謂“arithmetic”(算術)，其係為前述位元列產生處理並不是根據表的對應而是利用計算予以輸出。在H.263、MPEG-4及H.264之使用可變長編碼表之編碼方式中，即使是具有發生機率為比0.5(50%)更高的發生機率之符號，也必須使符號的各個可能值與1個二元列(位元列)對應。因此，即使對於機率最高的值，最短也必須在1個符號對應附予1位元。對於此點，算術編碼係可以利用整數值1位元以下表現事象之以高機率的發生。例如，作為事象，在第1個二元之值為連續N次「0」的情況，對於各個值「0」不必將1位元的資料輸出N次。
先前技術文獻 非專利文獻
【非專利文獻1】Detlev Marpe, et .al., “Context-Based Adaptive Binary Arithmetic Coding in the H.264/AVC Video Compression Standard”, IEEE Transaction on circuits and systems for video technology, Vol. 13, No.7, July 2003.
【非專利文獻2】Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 5th Meeting: Geneva, CH, 16-23 March, 2011 JCTVC-E603, ver.7 “WD3: Working Draft 3 of High-Efficiency Video Coding” http://phenix.int-evry.fr/jct/doc_end_user/documents/5_Geneva/wg11/JCTVC-E603-v7.zip
【非專利文獻3】Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 4th Meeting: Daegu, KR, 20-28 January, 2011, “Common test conditions and software reference configurations”,JCTVC-E700
【非專利文獻4】Gisle Bjøntegaard, “Improvements of the BD-PSNR model,” ITU-T SG16 Q.6 Document, VCEG-AI11, Berlin, July 2008
發明概要
然而，在這樣的圖像編碼方法及圖像解碼方法中，期許記憶體使用量(使用的記憶體容量)的減低。
因此，本發明係以提供一種能夠削減記憶體使用量之圖像編碼方法或圖像解碼方法為目的。
為了達成上述目的，關於本發明之一形態之圖像解碼方法，其係其係為使用算術解碼之圖像解碼方法，包含； 在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制步驟；使用已決定的前述上下文，將藉由控制參數進行算術編碼所得到之與前述處理對象區塊對應之位元列進行算術解碼，藉此回復二值配列之算術解碼步驟；及藉由將前述二值配列進行多值化而回復前述控制參數之多值化步驟，在前述上下文控制步驟中，判定前述處理對象區塊的控制參數之訊號類別，在前述訊號類別為第1類別的情況，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別不同之第2類別的情況，使用前述上區塊之已解碼完成的控制參數皆不利用之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
本發明係可以提供一種能夠削減記憶體使用量之圖像編碼方法或圖像解碼方法。
圖式簡單說明
第1圖係為關於本發明之實施形態1之圖像編碼裝置的機能方塊圖。
第2圖係為關於本發明之實施形態1之可變長編碼部的機能方塊圖。
第3圖係為關於本發明之實施形態1之有關控制參數的上下文模型之表。
第4圖係為顯示關於本發明之實施形態1之算術編碼方法的流程圖。
第5圖係為關於本發明之實施形態2之圖像解碼裝置的機能方塊圖。
第6圖係為關於本發明之實施形態2之可變長解碼部的機能方塊圖。
第7圖係為顯示關於本發明之實施形態2之算術解碼方法的流程圖。
第8圖係為顯示關於本發明之實施形態2之算術解碼方法的變形例之流程圖。
第9圖係為顯示關於本發明之實施形態2之HEVC中的分割方塊(樹構造)之圖面。
第10圖係為用以說明關於本發明之實施形態2之多階層方塊構造之圖面。
第11圖係為顯示關於本發明之實施形態3之split_coding_unit_flag的算術解碼方法之表。
第12A圖係為顯示關於本發明之實施形態3之對於split_coding_unit_flag的驗證結果之表。
第12B圖係為顯示關於本發明之實施形態3之對於split_coding_unit_flag的驗證結果之表。
第13圖係為顯示關於本發明之實施形態3之skip_flag的算術解碼方法之表。
第14A圖係為顯示關於本發明之實施形態3之對於skip_flag的驗證結果之表。
第14B圖係為顯示關於本發明之實施形態3之對於skip_flag的驗證結果之表。
第15A圖係為顯示關於本發明之實施形態3之intra_chroma_pred_mode的算術解碼方法之表。
第15B圖係為顯示因應關於本發明之實施形態3的intra_chroma_pred_mode之IntraPredModeC的決定方法之表。
第16A圖係為顯示關於本發明之實施形態3之對於intra_chroma_pred_mode的驗證結果之表。
第16B圖係為顯示關於本發明之實施形態3之對於intra_chroma_pred_mode的驗證結果之表。
第17圖係為用以說明關於本發明之實施形態之利用相鄰2區塊的對應控制參數之值的上下文模型之圖面。
第18圖係為用以說明關於本發明之實施形態之利用上區塊的情況之記憶體使用量增加之圖面。
第19圖係為實現內容傳送服務之內容供給系統之整體構成圖。
第20圖係為數位播放用系統的整體構成圖。
第21圖係為顯示電視機的構成例之方塊圖。
第22圖係為顯示在光碟之記錄媒體進行資訊讀寫之資訊播放/記錄部的構成例之方塊圖。
第23圖係為顯示光碟之記錄媒體的構造例之圖面。
第24A圖係為顯示手機的一例之圖面。
第24B圖係為顯示手機的構成例之方塊圖。
第25圖係為顯示多工化資料的構成之圖。
第26圖係為示意地顯示各資料流是如何在多工化資料中進行多工化之圖面。
第27圖係為更詳細顯示視訊資料流是如何儲存在PES封包列的圖面。
第28圖係為顯示多工化資料中之TS封包與源包的構造之圖面。
第29圖係為顯示PMT的資料構成之圖面。
第30圖係為顯示多工化資料資訊的內部構成之圖面。
第31圖係為顯示資料流屬性資訊的內部構成之圖面。
第32圖係為辨識影像資料的步驟之圖面。
第33圖係為顯示實現各實施形態之動畫像編碼方法及動畫像解碼方法之積體電路的構成例之方塊圖。
第34圖係為顯示切換驅動頻率的構成之圖面。
第35圖係為顯示辨識影像資料，並且切換驅動頻率之步驟的圖面。
第36圖係為顯示影像資料的規格與驅動頻率對應之查閱表的一例之圖面。
第37A圖係為顯示將訊號處理部之模組共有化之構成的一例之圖面。
第37B圖係為顯示將訊號處理部之模組共有化之構成的其他例之圖面。
用以實施發明之形態 (構成本發明基礎之見解)
本案發明者係發現會產生以下的問題。
其中，即使在次世代編碼之高效視訊編碼(High-Efficiency Video Coding(HEVC))中，也在進行對於各種控制參數之編碼及解碼的上下文模型的檢討(非專利文獻2)。所謂控制參數，其係意指被包含在編碼位元流，並且用於編碼處理或解碼處理的參數(旗標等)，具體而言就是語法元件(syntax element)。
所謂上下文模型，其係為顯示在(1)怎樣的單位(多值、二元值、或者二元配列(位元字串(bin string)的各個要素)考量(2)怎樣的條件(condition)之資訊。其中，所謂怎樣的條件，其係為適用怎樣的條件的要素數之條件、或者作為條件進行考量之控制參數的訊號類別是何者為佳。當越詳細區分該條件，也就是越增加條件數τ(the number of conditions)，對應1個條件的次數越減少。其結果為藉由減少每個條件的學習次數，降低機率預測的精確度(例如，參照非專利文獻1的“稀釋效應”)。
又當越減少條件數，造成沒有考量上下文(周圍條件)，不會追隨(adaptive)統計的變動。
在上下文的模型設計中，在決定模型的設計方針後，藉由進行圖像內容的統計性偏移之驗證、或者控制圖像的編碼及解碼之控制參數的統計性偏移之驗證等將圖像專門化的驗證，必須考量其妥當性。
在H.264中，一邊將已限定數的事前事象用於符號的編碼作為規則的規範，一邊將上下文模型進行類型化分為4個 基本的樣態(基本設計樣態(basic design types))。
第1及第2類型係關於控制參數的編碼及解碼。
第1類型的上下文模型係利用以2個為上限(2個以下(up to two))的相鄰之已編碼完成之值(參照非專利文獻1)。相鄰之2個已編碼完成之值的定義雖然是依存於控制參數的各個訊號類別，但是通常是使用包含在與左及上相鄰的區塊之對應控制參數之值。
第2上下文模型的類型係為依據二元樹作為發生機率，決定上下文之樣態。具體而言，適用於控制參數mb_type及sub_mb_type。
第3及第4類型係關於圖像資料等的殘差值(residual data)的編碼及解碼。在第3類型中因應頻率係數(或者量化係數)的掃描順序，只利用過去已編碼或已解碼之值。在第4類型中因應已解碼累積之值(位準值)，決定上下文。
上述第1類型等之H.264中之機率遷移模組的設計方針及安裝方法係被驗證為長期有效果的，因此以也可以適用在現在檢討中的HEVC的方式進行檢討(參照非專利文獻2)。例如將第1類型(上下文模型using neighbouring syntax elements(使用相鄰的語法元件))被利用於控制參數alf_cu_flag、split_coding_unit_flag、skip_flag、merge_flag、intra_chroma_pred_mode、inter_pred_flag、ref_idx_lc、ref_idx_l0、ref_idx_l1、mvd_l0、mvd_l1、mvd_lc、no_residual_data_flag、cbf_luma、cbf_cb及cbf_cr進行檢討(參照非專利文獻2之9.3.3.1.1節)。
然而，針對利用該第1類型「利用相鄰2區塊的上下文模型」的編碼，對於其記憶體使用量，本案發明者發現以下的課題。
第17圖係為用以說明利用相鄰2區塊的對應控制參數之值的上下文模型之圖面。又第17圖係顯示H.264中之利用相鄰區塊的上下文模型。
圖中的區塊C係包含現在(Current)的編碼或解碼對象之控制參數SE之值。在將該SE之值進行編碼的情況下，利用包含在已經編碼完成之上區塊A及左區塊B之同種的控制參數SE之值。具體而言，使用將上區塊A的控制參數SE之值及左區塊B的控制參數SE之值作為條件之附條件機率p(x|(condition A(上區塊之值)且condition B(左區塊之值)))，預測區塊C的控制參數SE(或者控制參數SE的位元字串(bin string)的第1個二進制)之值x為「1」或者「0」的機率p(x)。
第18圖係為用以說明利用上區塊情況之記憶體使用量的增加之圖面。
圖中的(xP、yP)係顯示區塊C所包含之PredictionUnit(PU：動作預測單位)的左上畫素位置。其中區塊C係為包含現在的編碼對象的控制參數(例如skip_flag)之區塊。又，圖中(xP、yA)係顯示用來作為condition A(上區塊的控制參數skip_flag之值)之被包含在區塊B的畫素位置。圖中(xL、yP)係顯示用來作為condition B(左區塊的控制參數skip_flag之值)之被包含在區塊A的畫素位置。
在該情況下，為了將區塊C的控制參數skip_flag之值進行編碼或解碼，編碼或解碼裝置係必須保持與包含在上區塊B之(xP、yA)的位置對應之PU的skip_flag之值(或者條件的判定結果)、及與包含在左區塊A之(xL、yP)的位置對應之PU的skip_flag之值(或者條件的判定結果)。其中，當該圖片的橫寬幅為4096像素時，為了1個控制參數skip_flag的編碼，必須保持包含在上區塊行(第18圖所示之Line L)的所有判定值。換言之，為了1個控制參數，必須有4096像素÷區塊尺寸的記憶體容量。
其中，編碼對象之區塊C的區塊尺寸為可變動的，例如是64×64、16×16、或者4×4等。又在包含在包含(xP、yA)之上行(Line L)的編碼或解碼時，無法預測之後進行編碼或解碼之區塊C的區塊尺寸。此係因為編碼或解碼裝置在上行(區塊A所包含的行)之編碼或解碼的時點無法得知該下行(區塊C所包含的行)之各區塊尺寸。因此，編碼或解碼裝置係假設在該控制參數所適用的區塊尺寸之中使用最小的區塊尺寸作為下行的區塊尺寸之情況，必須在每個其最小的區塊尺寸保持控制參數之值(或者判定值)。又，第18圖中之黑色圓點的位置係顯示實際上在下行(區塊C所包含的行)之編碼或解碼中即使不需要該條件值也必須予以保持的條件。
再者，第18圖所示之相鄰2區塊(左區塊A及上區塊B)係顯示H.264時點之相鄰區塊的概念，對於新的階層區塊分割的觀點並未導入。如後述所示，對於在HEVC預定導入之適應於遞迴4分區塊分割樹構造(四元樹分割；quad tree partitioning)的控制參數而言，因應遞迴的實行順序、階層深度、或者區塊位置，而有使第18圖所示之參照的條件值成為無意義的情況。
如此一來，本案發明者係發現在控制參數的算術編碼或解碼中，藉由利用上區塊的條件值而增加記憶體使用量。再者，本案發明者係發現在HEVC中該記憶體使用量更為增加。
對於此點，關於本發明之一實施形態之圖像解碼方法，其係為使用算術解碼之圖像解碼方法，包含：在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制步驟；使用已決定的前述上下文並利用算術解碼，將藉由控制參數進行算術編碼而得到之與前述處理對象區塊對應的位元列回復二值配列之算術解碼步驟；及藉由將前述二值配列進行多值化回復前述控制參數之多值化步驟，在前述上下文控制步驟中，判定前述處理對象區塊之控制參數的訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別有所不同之第2類別的情況下，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
藉此，該圖像解碼方法係可以削減記憶體使用量。具 體而言，該圖像解碼方法因為對於第2類別的控制參數係不使用上區塊的控制參數，因此不必保持上區塊之第2類別的控制參數。藉此，該圖像解碼裝置係在與單一性成為「利用依據相鄰區塊的控制參數之值之上下文模型」而利用左區塊及上區塊的情況相比，可以削減記憶體使用量。再者，該圖像解碼方法係在不損傷圖像的BD-rate值評估等的情形下，可以適當削減第2類別之控制參數的記憶體使用量。
又該圖像解碼方法係可以進行在習知的H.264中不被考量之適合新穎的HEVC特有之資料構造的階層樹構造之上下文的利用、或者記憶體參考。
又，前述第2條件係只要是皆不利用前述上區塊及前述左區塊之已解碼完成的控制參數即可。
藉此，該圖像解碼方法係除了上區塊，藉由也不使用左區塊的控制參數，可以更進一步削減記憶體使用量。
又，在前述上下文控制步驟中，在前述訊號類別為前述第2類別的情況下，作為前述第2條件，將預先設定的上下文決定為使用於前述對象區塊的算術解碼之上下文亦可。
藉此，該圖像解碼方法係可以減低處理量。
又，在前述上下文控制步驟中，進一步依據前述處理對象區塊的位置，判定可否在解碼時利用前述上區塊的控制參數，在不能利用前述上區塊的控制參數的情況下，使用前述第2條件來決定前述上下文亦可。
藉此，該圖像解碼方法係可以減低處理量。
又，在前述上下文控制步驟中，在前述處理對象區塊 屬於切片界限的情況下，判定為解碼時不能利用前述上區塊的控制參數亦可。
又，在前述上下文控制步驟中，因應前述處理對象區塊之控制參數的所屬資料單位之階層深度，判定可否在解碼時利用前述上區塊的控制參數亦可。
又，前述第2類別係為具有預先設定的資料構造之控制參數亦可。
又，在前述上下文控制步驟中，進一步依據第1單位的控制參數之值，對於比前述第1單位更小之第2單位的控制參數，切換使用前述第1條件來決定前述上下文、或者使用前述第2條件來決定上下文亦可。
又前述“split_coding_unit_flag”係顯示前述處理對象區塊是否分割為複數個區塊，前述“skip_flag”係顯示是否略過前述處理對象區塊，前述“intra_chroma_pred_mode”係顯示前述處理對象區塊之色差樣本所用之畫面內預測模組亦可。
又，前述圖像解碼方法係因應包含在編碼訊號之顯示第1規格或第2規格的識別碼，切換遵照前述第1規格的解碼處理、及遵照前述第2規格的解碼處理，在前述ID顯示為第1規格的情況下，進行前述上下文控制步驟、前述算術解碼步驟、及前述多值化步驟作為遵照前述第1規格的解碼處理亦可。
又，關於本發明之一實施形態之圖像編碼方法，其係為使用算術編碼之圖像編碼方法，包含：藉由將處理對象區塊的控制參數進行二值化產生二值配列之二值化步驟； 在複數個上下文之中，決定使用於前述處理對象區塊的上下文之上下文控制步驟；及使用已決定的前述上下文並且藉由將前述二值配列進行算術編碼產生位元列之算術編碼步驟，在前述上下文控制步驟中，判定前述處理對象區塊之控制參數的訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別有所不同之第2類別的情況下，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
藉此，該圖像編碼方法係可以削減記憶體使用量。具體而言，該圖像編碼方法因為對於第2類別的控制參數係不使用上區塊的控制參數，因此不必保持上區塊之第2類別的控制參數。藉此，該圖像編碼裝置係在與單一性成為「利用依據相鄰區塊的控制參數之值之上下文模型」而利用左區塊及上區塊的情況相比，可以削減記憶體使用量。再者，該圖像編碼方法係在不損傷圖像的BD-rate值評估等的情形下，可以適當削減第2類別之控制參數的記憶體使用量。
又該圖像編碼方法係可以進行在習知的H.264中不被考量之適合新穎的HEVC特有之資料構造的階層樹構造之上下文的利用、或者記憶體參考。
又，關於本發明之一實施形態之圖像解碼裝置，其係 為使用算術解碼之圖像解碼裝置，包含：在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制部；使用已決定的前述上下文並利用算術解碼，將藉由控制參數進行算術編碼而得到之與前述處理對象區塊對應的位元列回復二值配列之算術解碼部；及藉由將前述二值配列進行多值化回復前述控制參數之多值化部，前述上下文控制部，其係判定前述處理對象區塊之控制參數的訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別有所不同之第2類別的情況下，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
藉此，該圖像解碼裝置係可以削減記憶體使用量。
又，關於本發明之一實施形態之圖像編碼裝置，其係為使用算術編碼之圖像編碼裝置，包含：藉由將處理對象區塊的控制參數進行二值化產生二值配列之二值化部；在複數個上下文之中，決定使用於前述處理對象區塊的上下文之上下文控制部；及使用已決定的前述上下文並且藉由將前述二值配列進行算術編碼產生位元列之算術編碼部，前述上下文控制部係判定前述處理對象區塊之控制參數的訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控 制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別有所不同之第2類別的情況下，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
藉此，該圖像編碼裝置係可以削減記憶體使用量。
又，關於本發明之一實施形態之圖像編碼解碼裝置係包含前述圖像解碼裝置、及前述圖像編碼裝置。
又，此等全面性或具體性的態樣係藉由系統、方法、積體電路、電腦程式或記錄媒體予以實現亦可，藉由系統、方法、積體電路、電腦程式及記錄媒體的任意組合予以實現亦可。
以下，針對關於本發明之一態樣之圖像解碼裝置及圖像編碼裝置，一邊參照圖面一邊具體說明。
又，以下所說明之實施形態係都是顯示本發明之一具體例者。以下的實施形態所示之數值、形狀、材料、構成要素、構成要素的配置位置及連接形態、步驟、步驟順序等係為一例，並非是限定本發明的主旨。又，以下的實施形態之構成要素之中，對於沒有記載於顯示最上位概念的獨立請求項之構成要素係成為任意的構成要素予以說明。
(實施形態1)
以下，針對關於本發明之實施形態1之圖像編碼裝置進行說明。關於本發明之實施形態1之圖像編碼裝置係在算術編碼中，因應控制參數的訊號類別，切換：(1)利用上區塊 決定上下文、或者(2)不利用上區塊決定上下文。藉此，可以一邊抑制畫質劣化，一邊削減記憶體使用量。
首先，說明關於本發明之實施形態1之圖像編碼裝置的構成。
第1圖係為關於本實施形態之圖像編碼裝置100的方塊圖。
第1圖所示之圖像編碼裝置100係為使用算術編碼之圖像編碼裝置，藉由將輸入圖像訊號121進行編碼產生位元流124。該圖像編碼裝置100係包含：控制部101、差分部102、轉換及量化部103、可變長編碼部104、反量化及反轉換部105、加算部106、畫面內預測部107、畫面間預測部108、及開關109。
控制部101係依據編碼對象的輸輸圖像訊號121算出控制參數130。例如，控制參數130係包含：顯示編碼對象的輸入圖像訊號121的圖片或樣態之資訊、編碼對象區塊之動作預測單位(Prediction Unit PU)的尺寸、及動作預測單位的控制資訊等。其中控制參數130(Control data)本身係成為編碼對象。因此，控制部101係將該控制參數130輸入到可變長編碼部104。
差分部102係算出區塊單位的輸入圖像訊號121與預測圖像訊號129之差分值(殘差值)，也就是殘差訊號122。
轉換及量化部103係將殘差訊號122轉換為頻率係數值，藉由將得到的頻率係數值進行量化產生量化轉換係數123(residual data)。
反量化及反轉換部105係將量化轉換係數123反量化為頻率係數值，藉由將得到的頻率係數值進行反轉換產生回復的殘差訊號125。
加算部106係藉由將殘差訊號125與預測圖像訊號129進行加算輸出回復圖像訊號126。
畫面內預測部107係使用回復圖像訊號126並藉由進行畫面內預測處理產生預測圖像訊號127。畫面間預測部108係使用回復圖像訊號126並藉由進行畫面間預測處理產生預測圖像訊號128。
開關109係選擇預測圖像訊號127及預測圖像訊號128的一方，將已選擇的訊號作為預測圖像訊號129予以輸出。
可變長編碼部104係藉由使用前述的CABAC，將每個被輸入的區塊之量化轉換係數123及控制參數130進行編碼產生位元流124。
其次，說明可變長編碼部104的構成。
第2圖係為可變長編碼部104的機能方塊圖。可變長編碼部104係包含：二值化部141、上下文控制部142、及二值算術編碼部143。以下，針對控制參數130的可變長編碼處理進行說明。又，針對量化轉換係數123的可變長編碼處理雖然是省略說明，但是可以使用例如既知的技術予以實現。
二值化部141係藉由將控制參數130進行二值化產生二值配列151。具體而言，二值化部141係為實行非專利文獻1之II.1)binarization(二值化)處理的處理部。該二值化部141係藉由依照每個訊號類別事前設定的二值化處理方法，將 控制參數130轉換為被稱為bin string的二值配列151。又，針對訊號類別與二值化處理的對應係於後面詳述。又，二值化部141係在被輸入的控制參數130為flag等1二元值的情況下，將該控制參數130直接成為二值配列151予以輸出。
上下文控制部142係在複數個上下文(機率狀態表格)之中，決定使用於包含在處理對象區塊之控制參數130的算術編碼之上下文。又，上下文控制部142係將指定決定的上下文之上下文索引152輸出到二值算術編碼部143。
具體而言，上下文控制部142係為實行非專利文獻1之2)context modeling(上下文建模)處理的處理部。在該上下文控制部142中，二值算術編碼部143為使包含在輸出的二值配列151之複數個要素依序輸入。上下文控制部142係因應控制參數130的訊號類別及該二元的二值配列151中的要素位置，在複數個上下文之中，選擇使用於該二元的上下文，並且將顯示已選擇的上下文之索引，也就是上下文索引152輸出到二值算術編碼部143。
又，上下文控制部142係保持進一步依照附條件機率的條件詳細區分化數(所謂上下文索引數)之機率狀態表格作為上下文的狀態，將該機率狀態表格進行初期化及更新。
又，上下文控制部142係依照每個訊號類別(在二值配列的要素數為2以上的情況為控制參數130之二值配列的每個要素號碼。以下相同)進一步詳細區分，保持每個發生條件τ(每個上下文)的狀態(probability state index；機率狀態索引)。該狀態係為「0」或「1」的二值之中，機率低的發生 機率P(內分比率：典型上為6bit(位元)的值)及顯示機率高者為哪一方的值(1bit)之總計7bit值。又，所謂保持狀態係為進行初期化及更新。例如，所謂更新處理，其係與H264相同在64個有限的狀態間遷移，變更現在是屬於哪個機率狀態probability state(即哪個機率)的indexing(索引)。
具體而言，上下文控制部142係在二值之中發生機率高most probable(最可能)側的事象X之情況下，使most probable側的機率比例稍微增加。例如，上下文控制部142係藉由1增減與64個表格對應之機率索引(probability state index)的值，可以使使most probable側的機率比例稍微增加。另一方面，(與預測的機率相反)在發生機率低者的事象not X之情況下，上下文控制部142係將保持的most probable之機率比例變大，依據特定的刻度係數α(例如≒0.95)使其減少(參照非專利文獻1，第6圖)。本實施形態之上下文控制部142係與H.264相同，以已考量該α的變更之方式，依據已對應之表格索引變更值遷移狀態並予以保持。
二值算術編碼部143係使用利用上下文控制部142所決定的上下文，藉由將二值配列151進行算術編碼產生位元流124(位元列)。
具體而言，二值算術編碼部143係為實行非專利文獻1之3)binary arithmetic coding(二值算術編碼)處理的處理部。該二值算術編碼部143係使用利用上下文索引152指定的上下文，藉由將二值配列151進行算術編碼產生位元流124。其中所謂算術編碼，其係針對各種訊號類別的控制參 數130處理發生事象作為機率累積，一邊將範圍狹限在1個數直線上的特定範圍，一邊對應發生哪種事象。
首先，二值算術編碼部143係因應從上下文控制部142所給予之二元為2個值的可發生機率，將1個數直線內分為2個半區間。實際發生的二元之值(例如「0」)為高機率(超過0.5的機率(例如0.75))側的值之情況下，二值算術編碼部143係不變更數直線中範圍的下限值low並予以維持，並且與將這次的機率0.75與刻度係數0.951次乘算的結果對應之值設定為新的幅度Range。一方面，實際發生的二元之值為被預測低機率側的值之情況下，二值算術編碼部143係將範圍的下限值low移動高者的機率份，因應低者的機率變更幅度Range。如此一來，雖然根據機率幅度Range的乘算結果之累積而保持區間，但是在連續發生機率低者之值的情況下，會使幅度Range變成利用運算可以確保的精確度以下。在該情況下，二值算術編碼部143係為了維持精確度而進行擴大幅度Range之處理(renorm；重整)的同時，而且輸出用以顯示現在範圍的位元列。反之，在機率高者(0.95等)之值連續發生的情況下，即使將該機率值進行乘算，直到幅度Range的長度變成比特定的長度更短為止也可以進行無數次的運算(根據表的安裝情況係為狀態遷移)。因此該情況係變成直到輸出位元列之前可以累積的符號數為多。
第3圖係為將利用依據相鄰區塊的控制參數130之值的上下文模型之控制參數130進行整理之表。
從左開始說明列的意義。
(c2)訊號類別(syntax element)係顯示控制參數130之訊號類別的具體名稱。又各訊號類別的意義係於後面詳述。
(c3)二值化方式(binarization scheme)係顯示利用左列所指定之適用於控制參數130(SE)的二值化方式。又，二值化處理係利用上述二值化部141予以實行。又，欄中所謂「固定長」，其係意指二值化部141是利用固定長度(Fixed Length)的二值配列(bin string)輸出左邊的控制參數130之值。在HVEC中以訊號類別名為“flag”結束之訊號類別的控制參數130係為形成「0」或「1」任一個之值的1二元值。因此，二值化部141之輸出的二值配列151之要素係只有第1個要素(binIdx=0)，第2個以後的要素(binIdx>=1的要素係不輸出。換言之，二值化部141係將控制參數130之值直接作為二值配列151予以輸出。
又，欄中所謂「可變長」，其係顯示以控制參數130之值的發生頻率順序將該值成為短的二元長之方式，使用已對應之可變長的二元列(bin string或者二值配列且要素≧1)，進行二值配列化後輸出。例如，二值化部141係利用與(Truncated)Unary型、或者Unary型與其他指數的Golomb方式等複數方式的組合等之訊號類別對應的方式予以輸出(參照非專利文獻1,A Binarization)。又，可變長的情況下，二值配列151的配列要素雖然也會有是1個的情況，但是也會有成為2個以上。又，在後述之圖像解碼裝置的多值化部中，藉由進行該二值化方式的反轉換，將被輸入的二值配列回復為多值或旗標值。
(c4)第1個要素(binIdx=0)上下文索引係對於包含在上下文控制部142利用c3欄所指定的二值化方式予以產生的二元配列之第1個要素，顯示適用的上下文索引(增分值)之選項。在欄中記載「0、1、2」的情況，其係意指上下文控制部142係從3個機率狀態表格(上下文)選擇1個機率狀態表格予以適用。例如，對於訊號類別“skip_flag”，其係意指針對該1種訊號類別係利用條件準備3個細分化的上下文索引，也就是準備3個上下文進行算術編碼。
同樣地，在c4欄中記載「0、1、2、3」的情況，其係意指適用於包含在將利用c2欄所指定之訊號類別的控制參數130之值利用c3欄的二值化方式進行二值配列化的二值配列151之第1要素(binIdx=0)的上下文為0、1、2或3的4種擇一。又，針對欄中的條件式於後面詳述。
(c5)左區塊條件L(condL)係顯示上下文控制部142在列c4中用以選擇0、1、2之值的任一個值之左區塊的條件(condition)。該條件係成為因應與編碼對象(或者解碼對象)的控制參數對應之左區塊的控制參數而被決定之true或false之值。
例如，在控制參數(SE)為skip_flag的情況下，skip_flag[xL][yL]之值若是true(例如「1」)就輸出true，若是false(例如「0」)就輸出false。
(c6)上區塊條件A(condA)係顯示上下文控制部142在列c4所指定之配列要素的編碼或解碼中用以選擇0、1、2之值的任一個值之上區塊的條件(condition)。該條件係成為因應 與編碼對象(或者解碼對象)的控制參數對應之上區塊的控制參數而被決定之true或false之值。例如，在控制參數(SE)為skip_flag的情況下，skip_flag[xA][yA]之值若是true(例如「1」)就輸出true，若是false(例如「0」)就輸出false。
又，雖然未圖示，但是在2位元以上的訊號類別中對應有(c7)「適用於binIdx>=1的上下文增分值」。該(c7)係顯示上下文控制部142適用於二值配列的第2要素以後的二元(具有binIdx>=1之索引值的二元配列要素的二元值)之上下文模型。
關於本實施形態之圖像編碼方法，其係對於上述左區塊條件L及上區塊條件A，因應控制訊號130的訊號類別切換以下的動作(利用不同的型態進行動作)。
(型態1)使用2個相鄰區塊(左區塊條件L的判定值及上區塊條件A的判定值)。
(型態2)使用1個相鄰區塊(只有左區塊條件L的判定值)。
(型態3)使用0個相鄰區塊(左區塊條件L的判定值及上區塊條件A的判定值都不使用)。
第4圖係為顯示第2圖所示之可變長編碼部104所實行之關於本實施形態之圖像編碼方法的流程圖。
首先，二值化部141係利用與控制參數130的訊號類別對應之方式，將該控制參數130之值進行二值配列化(S101)。
其次，上下文控制部142係取得用於該控制參數130的算術編碼之上下文基本值(S102)。例如，上下文控制部142 係因應圖片樣態(I、P、B)決定該基本值。
其次，上下文控制部142係因應控制參數130的訊號類別，使用上述型態1~型態3的任一個決定上下文值(S103)。其中，所謂決定上下文值，其係與決定對於上下文基本值的調整值(增分值CtxIdxInc)等效。
首先，上下文控制部142係判定控制參數130的訊號類別(S103)。在控制參數130的訊號類別為與型態1對應之第1類別的情況(在S104為第1類別)，上下文控制部142係使用從相鄰的2個區塊(區塊A及區塊B)的各個控制參數之值所導出的判定值，決定上下文值(S105)。換言之，上下文控制部142係使用利用左區塊及上區塊之2個相鄰區塊的控制參數之條件，決定上下文。在該情況下，上下文控制部142係利用第3圖所示之(c5)CondL判定結果及(c6)condA判定結果的兩方之值。因此，對於第1類別的控制參數而言係保持圖片的橫一列份的資料。
一方面，在控制參數130的訊號類別為與型態2對應之第2類別的情況(在S104為第2類別)，上下文控制部142係使用從1個相鄰區塊(以編碼順序為最接近的相鄰區塊)的控制參數之值決定上下文值(S106)。換言之，上下文控制部142係使用不利用上區塊的控制參數之條件來決定上下文。
一方面，在控制參數130的訊號類別為與型態3對應之第3類別的情況(在S104為第3類別)，上下文控制部142係都不利用上區塊及左區塊的控制參數，固定性決定上下文值(S107)。
其次，上下文控制部142係藉由將利用步驟S103所決定之增分值加算到利用步驟S102所決定之上下文的基本值，導出上下文索引值(S108)。
最後，二值算術編碼部143係藉由使用利用步驟S108所決定之上下文索引值所指定的上下文值，將第1要素的二元值進行算術編碼，產生位元列(位元流124)(S109)。
其次，在對於包含在二值配列的所有要素沒有完成步驟S102~S109的處理實行之情況(S110中為NO)，可變長編碼部104係對於包含在二值配列的下個要素，實行步驟S102~S109的處理。一方面，在對於包含在二值配列的所有要素完成步驟S102~S109的處理實行之情況(S110中為YES)，可變長編碼部104係結束處理對象區塊的控制參數之編碼處理。
如以上所示，關於本實施形態之圖像編碼裝置100係在算術編碼中，對於第1類別的控制參數而言利用上區塊決定上下文，對於第2類別及第3類別的控制參數而言不利用上區塊決定上下文。
根據該構成，該圖像編碼裝置100係在與單一性成為「利用依據相鄰區塊的控制參數之值之上下文模型」而利用左區塊及上區塊的情況相比，可以削減記憶體使用量。藉此，該圖像編碼裝置100係可以一邊抑制畫質的劣化，一邊削減記憶體使用量。
(實施形態2)
在本實施形態中，針對將利用上述圖像編碼裝置100所 產生的位元流124進行解碼之圖像解碼裝置進行說明。
第5圖係為關於本實施形態之圖像解碼裝置200的方塊圖。該圖像解碼裝置200係為使用算術解碼之圖像解碼裝置，藉由將位元流124進行解碼產生圖像訊號229。其中，位元流124係例如是利用上述圖像編碼裝置100所產生的位元流124。
圖像解碼裝置200係包含：控制部201、可變長解碼部202、反量化部204、反轉換部205、加算部206、畫面內預測部207、及畫面間預測部208。
圖像解碼裝置200係對於特定的處理單位之符號列進行解碼處理。其中處理單位係例如是切片單位、或者區塊單位。
可變長解碼部202係藉由在位元流124進行算術解碼，產生控制參數230(control data syntax element)、及量化轉換係數223(Residual data syntax element值)。產生的控制參數230係輸出到控制部201。
控制部201係因應控制參數230控制包含在圖像解碼裝置200的處理部。
反量化部204係藉由將量化轉換係數223進行反量化，產生直交轉換係數224。
反轉換部205係藉由將直交轉換係數224進行反轉換，回復殘差訊號225。加算部206係藉由將殘差訊號225及預測畫面訊號(圖像訊號229)進行加算產生解碼圖像訊號226。
畫面內預測部207係使用解碼圖像訊號226並藉由進行 畫面內預測處理產生預測圖像訊號227。畫面間預測部208係使用解碼圖像訊號226並藉由進行畫面間預測處理產生預測圖像訊號228。
開關209係選擇預測圖像訊號227及預測圖像訊號228的一方，並且將已選擇的訊號作為圖像訊號229(預測圖像訊號)予以輸出。
其次，說明可變長解碼部202的構成。
第6圖係為顯示可變長解碼部202的構成之機能方塊圖。可變長解碼部202係包含：二值算術解碼部243、上下文控制部242、及多值化部241。以下，針對控制參數230的可變長解碼處理進行說明。又對於量化轉換係數223的可變長解碼處理雖然是省略說明，但可以使用既知的技術予以實現。
上下文控制部242係在複數個上下文之中，決定使用於處理對象區塊的控制參數230的算術解碼之上下文。又，上下文控制部242係將指定決定的上下文之上下文索引252輸出到二值算術解碼部243。
具體而言，上下文控制部242係與第2圖所示的上下文控制部142相同，使用上下文模型作為保持的機率遷移模組。在二值算術編碼部143使用64個機率狀態的情況下，二值算術解碼部243也具有64個機率狀態。此係因為必須解釋為將被編碼的數直線上的範圍在編碼側及解碼側的兩方都必須完全相同。因此，在解碼裝置側也使用與編碼側從上述型態1~3的3個型態所選擇的型態相同型態。
二值算術解碼部243係使用利用上下文控制部242所決定的上下文並藉由將位元列(位元流124)進行算術解碼，回復二值配列251。具體而言，二值算術解碼部243係藉由從上下文控制部243所給予之上下文索引指定的上下文(機率狀態表格)，將被輸入的位元列回復成二值配列251。
多值化部241若是必要則藉由將二值配列251進行多值化回復成控制參數230。如此一來，圖像編碼裝置100所具備之上下文控制部142、及圖像解碼裝置200所具備之上下文控制部242係在某個訊號類別的控制參數之算術編碼及算術解碼時雙方都是利用相同的上下文模型。
第7圖係為顯示可變長解碼部202所實行之關於本實施形態之圖像解碼方法的流程圖。
首先，可變長解碼部202係取得位元流124(S201)。
其次，上下文控制部242係因應位元流124的資料構造決定解碼對象之控制參數的訊號類別(S202)。
其次，上下文控制部242係決定使用於解碼對象之控制參數的算術解碼之上下文基本值(S203)。例如，上下文控制部242係因應圖片樣態(I、P、B)決定該基本值。
其次，上下文控制部242係因應控制參數的訊號類別，使用上述型態1~型態3的任一個決定上下文值(S204)。其中，所謂決定上下文值，其係與決定對於上下文基本值的調整值(增分值CtxIdxInc)等效。例如，上下文控制部242係將因應控制參數的訊號類別使用型態1~型態3的哪一個的判斷，依據事前決定的表靜態進行。
上下文控制部242係將用於為了利用算術解碼得到包含在二值配列251之第1要素的二元值所用之上下文決定的相鄰區塊，因應控制參數的訊號類別予以切換。
首先，上下文控制部242係判定控制參數230的訊號類別(S205)。在訊號類別為與型態1對應之第1類別的情況(在S205為第1類別)，上下文控制部142係使用從相鄰的2個區塊的各個控制參數決定上下文值(S206)。換言之，上下文控制部242係使用利用左區塊及上區塊之2個相鄰區塊的已解碼完成的控制參數之條件來決定上下文。
一方面，在訊號類別為與型態2對應之第2類別的情況(在S205為第2類別)，上下文控制部242係使用從1個相鄰區塊(以編碼順序為最接近的相鄰區塊)的控制參數之值決定上下文值(S207)。換言之，上下文控制部242係使用不利用上區塊之已解碼完成的控制參數之條件來決定上下文。
一方面，在訊號類別為與型態3對應之第3類別的情況(在S205為第3類別)，上下文控制部242係固定性決定上下文值(S208)。換言之，上下文控制部242使用上區塊及左區塊之已解碼完成的控制參數皆不利用之條件來決定上下文。
其次，上下文控制部242係藉由將利用步驟S203所決定之上下文索引的基本值及利用步驟S204所決定之增分值進行加算，決定上下文索引值(S209)。
其次，二值算術編碼部243係使用利用從上下文控制部242所給予的上下文索引值所示之上下文值，利用解碼得到二值配列的1個要素(S210)。
其次，在對於包含在二值配列的所有要素沒有完成步驟S203~S210的處理實行之情況(S211中為NO)，可變長解碼部202係對於包含在二值配列的下個要素，實行步驟S203~S210的處理。
一方面，在對於包含在二值配列的所有要素完成步驟S203~S210的處理實行之情況(S211中為YES)，多值化部241係藉由將上述步驟S203~S210的處理反覆1次以上而得到之二值配列251的1個以上之要素進行多值化，產生控制參數230(S212)。
從以上所示，關於本實施形態之圖像解碼裝置200係在算術解碼中，對於第1類別的控制參數而言利用上區塊決定上下文，對於第2類別及第3類別的控制參數而言不利用上區塊決定上下文。根據該構成，該圖像解碼裝置200係在與單一性成為「利用依據相鄰區塊的控制參數之值之上下文模型」而利用左區塊及上區塊的情況相比，可以削減記憶體使用量。藉此，該圖像解碼裝置200係可以一邊抑制畫質的劣化，一邊削減記憶體使用量。
又，多值化部241係在二值配列251為flag等，要素數為1的情況下，也就是1binary(二元值)的情況下，將該二值配列251直接輸出亦可。
又，除了上述說明，控制部101或201係透過未圖示的訊號線進行控制各處理之處理、或者參照記憶體的值之處理等亦可。
又，在上述說明中，上下文控制部142或242雖然是因 應控制參數的訊號類別切換型態1~型態3之3個型態，但是因應訊號類別在型態1~型態3之中切換2個型態亦可。換言之，上下文控制部142或242係因應控制參數的訊號類別，切換利用/不利用上區塊條件亦可。
又，上下文控制部142或242係因應特定的圖像資訊變更如此所選擇的上下文模型之切換方法(也包含變更上下文模型增分值的情況，以下相同)。例如，上下文控制部241或242係因應對於記憶體保持量及各上下文的學習次數有所影響之圖像的橫寬幅尺寸或採樣格式等，進一步切換該切換方針本身亦可。
又，在上述說明中，為了說明的簡略化，上下文控制部142或242雖然形成為切換上區塊條件的利用/不利用，但是上下文控制部142或242係將一開始就不能利用上區塊的情況與此組合適用亦可。例如，上下文控制部142或242係因應處理對象的切片是否為熵切片(entropy_slice_flag為1或0)，變更該切換方針本身亦可。同樣，在一開始就無法擔保上相鄰區塊的利用可能性之情況下，上下文控制部142或242係將切換方針變更為不利用上區塊亦可。
例如，如第8圖所示，上下文控制部142或242係因應特定單位的參數之值(S301)，利用第1決定規範(S302)、及第2決定規範(S303)切換上下文模型的決定方針亦可。其中，所謂因應特定單位的參數之值，如上述所示，其係為因應切片是否為entropy slice等。又，所謂第1決定規範，其係為進行第7圖所示之處理。所謂第2決定規範，其係為不包含 第7圖所示之步驟S204的決定規範，例如是習知的決定規範。此係與利用局部的特定單位之參數與比該單位更大的單位之參數之值決定上下文索引的增分值等效。
換言之，上下文控制部142或242係依據第1單位的控制參數之值，將適用於比第1單位更小單位的決定規範切換為其他決定規範亦可。
又，上下文控制部142或242係因應圖像系列的特徵，變更使用的決定規範)亦可。例如，上下文控制部142或242係因應I圖片的間隔(IntraPeriod(內週期)的設定值)，變更使用的決定規範亦可。
又，其中，上下文控制部142或242雖然因應上述條件切換決定規範，但是切換是否利用上區塊亦可。
又，上下文控制部142或242係依據在編碼或解碼時是否可以利用位置性為上區塊的控制參數，決定是否利用上區塊的控制參數亦可。換言之，上下文控制部142或242係依據處理對象的區塊位置，判定在解碼時是否可以利用上區塊的控制參數，在不能利用上區塊的控制參數之情況下，使用型態2或型態3決定上下文亦可。再者，上下文控制部142或242係依據TU、CU、或PU區塊分割的樹構造決定是否可以利用該上區塊的參考值亦可。也就是說，上下文控制部142或242係因應處理對象之控制參數所屬的資料單位之階層深度，判定解碼時是否可以利用上區塊的控制參數亦可。
第9圖係顯示HEVC規格之圖片與切片與區塊的關係之 圖面。1個圖片係分割為1個以上的切片。在第9圖所示之例子中圖片係分割為2個切片(SLICE1及SLICE2)。1個切片係由複數個區塊301(例如treeblocks；樹區塊)構成。其中，區塊301係為在將切片分割為特定尺寸的情況下成為任何的控制單位就是最大的單位，將該單位成為階層分割的root的情況下之該root尺寸。
在第9圖所示之例子中，SLICE2係利用包含從區塊301A(startTb)開始，透過畫有斜線的區塊301直到右下角區塊的複數個區塊之1程序予以構造。又圖中畫有斜線的區塊係成為現在的處理對象之1個區塊(Treeblock)。
再者，各個區塊301係利用N×M像素構成。又，1個區塊301係在內部再歸性進行分割(典型上是4分割)。換言之，1個Treeblock係概念性構成1個4分木(QuadTree；四元樹)。在第9圖所示之區塊301中，被4分割之右上的區塊經過2階層再歸性進行4分割。換言之，區塊301B係包含從左上的0號到右下的9號，以特定的觀點被分割之10個論理上的單元。
其中，所謂觀點，其係對於編碼單位(CU)之tree、或者對於residua_data的Tree等，以某個root為基點可相互不同深度之複數個木觀念化。其中各種控制參數之值係成為屬於任一個葉節點。
再者，其中，在實際上包含在上區塊之訊號類別的控制參數之值為「是否可以利用(available)」係依存於該控制參數所屬的樹木類別。因此，上下文控制部142或242係根據控制參數所屬之樹木類別變更決定規範亦可。此係與變 更為語法單位等效。例如，上下文控制部142或242係對於適應檔案的alf_param等之資料構造的資料而言，利用不利用上區塊之型態2或型態3，對於其他語法係利用如習知之上下文模型方針(型態1)亦可。換言之，上述第2類別或第3類別係為具有預先決定的資料構造之控制參數亦可。又，此係意指根據相鄰之定義的樹木類別予以改變。
再者，實際上該控制參數之值為可以利用嗎、或者、對於記憶體使用量的削減是否產生效果係因應區塊之階層關係上的位置而有所不同。換言之，上下文控制部142或242係因應區塊之階層及階層內的位置切換是否利用上區塊亦可。
例如，如第9圖所示之區塊301B中的各號碼0~9係成為解碼順序。該情況，在將號碼4進行編碼或解碼的情況下，可以利用號碼1區塊及號碼2區塊的控制參數。
再者，從記憶體使用量的削減觀點看來，上下文控制部142或242係為非Depth0的區塊，而且若是自己的位置為縱方向分割中第2個以上的要素，選擇利用上區塊之型態1亦可。其中，所謂depth，係顯示從root的階層數。換言之，在將某個區塊block規定為[xn],[y0][depth]的情況下，因應處理對象區塊是否為使block[xn][(y0)+1][depth]成立的區塊，變更決定規範亦可。換言之，對於第9圖所示之號碼4~9的區塊係利用上區塊。此係因為該樹的編碼或解碼為被圖示的號碼順序(從0開始到9結束之順序)，在號碼4~9的區塊中，也知道可以利用包含在上區塊之控制參數。再者，在此等區塊中，也有對於資料的保持為暫時性為佳的優 點。又，此也可以說明除了x，y座標並且因應包含階層的三次元的位置決定上下文值。又，可以將上階層區塊的條件值作為下階層區塊的條件值予以利用(遵循)。
再者，上下文控制部142或242係考量處理對象區塊、及其他切片的位置關係，變更此等的規範亦可。以下，說明第9圖所示之3個塗有斜線之區塊301A、301B、及301C。
其中，區塊301A係為開始區塊，左區塊及上區塊都包含在其他切片。區塊301B之上區塊係包含在另一切片。區塊301C之上區塊及左區塊都包含在與含有本身區塊的切片相同之切片。上下文控制部142或242係因應這樣的條件，切換規範亦可。也就是說，上下文控制部142或242係(1)因應上區塊是否包含在其他切片切換規範亦可，(2)因應左區塊是否包含在其他切片切換規範亦可，(3)因應此等兩者切換規範亦可。換言之，上下文控制部142或242係在處理對象區塊屬於切片界限的情況下，判定為在解碼時不利用上區塊的控制參數亦可。藉此，例如，在上個切片1的解碼處理未完成的情況下，可以實現考量是否在切片2的內部得到本身的資訊之解碼處理。
以下，針對進行階層化之處理單位(多階層區塊構造)予以說明。第10圖係為用以說明階層化之處理單位(多階層區塊構造)的說明圖。
上述圖像編碼裝置100係對於每個處理單位將動圖像進行編碼，圖像解碼裝置200係對於每個處理單位將編碼資料流進行解碼。該處理單位係以分割為複數個小的處理單 位，再將該小的處理單位進一步分割為複數個更小的處理單位的方式進行階層化。又，當處理單位越小，具有該處理單位的階層越深，並且位於下位，顯示該階層之值為大。反之，當處理單位越大，具有該處理單位的階層越淺，並且位於上位，顯示該階層之值為小。
在處理單位中，有編碼單位(CU)及預測單位(PU)及轉換單位(TU)。CU係由最大128×128像素構成之區塊，其係為相當於習知的微區塊之單位。PU係為畫面間預測的基本單位。TU係為直交轉換的基本單位，該TU的尺寸係與PU相同、或是比PU更小一階層的尺寸。CU係例如分割為4個次CU，其中一個次CU係包含與其他次CU相同尺寸的PU及TU(在該情況下，PU及TU係為相互重疊的狀態)。例如，該PU係進一步分割為4個次PU，TU也進一步分割為4個次TU。又，在將處理單位分割為複數個小的處理單位之情況下，將該小的處理單位稱為次處理單位。例如，在處理單位為CU的情況下，次處理單位係為次CU，在處理單位為PU的情況下，次處理單位係為次PU，處理單位為TU的情況下，次處理單位係為次TU。
具體而言，如以下所示。
圖片係分割為切片。切片係為最大編碼單位的程序。最大編碼單位的位置係利用最大編碼單位位址lcuAddr予以表示。
包含最大編碼單位之各個編碼單位係分割為4個編碼單位。其結果為構成編碼單位之大的四元樹分割。編碼單 位的位置係利用以最大編碼單位之左上端的樣本(像素或者係數)為起點之編碼單位索引cuIdx予以表示。
在不允許編碼單位的分割之情況下，將該編碼單位作為預測單位予以處理。與編碼單位相同，預測單位的位置係利用以最大編碼單位之左上端的樣本為起點之預測單位索引puIdx予以表示。
預測單位係包含複數個部份(預測單位部份或是次PU)亦可。預測單位部份係利用以預測單位之左上端的樣本為起點之預測單位部份索引puPartIdx予以表示。
預測單位係包含複數個轉換單位亦可。與編碼單位相同，轉換單位係分割為4個小尺寸的轉換單位(次轉換單位)亦可。此係為允許殘差訊號的四元樹分割。轉換單位的位置係利用以預測單位之左上端的樣本為起點之轉換單位索引tuIdx予以表示。
其中，各處理單位的定義係如以下所示。
CTB(coding tree block)：用以特定正方形區域的四元樹分割之基本單位。CTB係具有正方形的多種尺寸。
LCTB(largest coding tree block)：在切片中可允許之最大尺寸的CTB。切片係由沒有重複之複數個LCTB組成。
SCTB(smallest coding tree block)：在切片中可允許之最小尺寸的CTB。SCTB係不允許分割為更小的CTB。
PU(prediction unit)：用以特定預測處理之基本單位。PU的尺寸係與不允許分割之CU尺寸相同。在CU中，對於可以將CU分割為4個正方形區域者，在PU中係可以將PU分 割為任意形狀的複數個部份。
TU(transform unit)：用以特定轉換及量化之基本單位。
CU(coding unit)：與CTB相同。
LCU(largest coding unit)：與最大的CTB相同。
SCU(smallest coding unit)：與最小的CTB相同。
又量化參數係包含增量量化刻度參數(delta QP或QP delta)、量化偏移參數、索引(Qmatrix select idc)及量化死區偏移參數之中的至少1個。又索引係為用以從複數個量化刻度矩陣選擇1個者。
增量量化刻度參數(delta QP或QP delta)係為應該適用於轉換係數之量化刻度參數、與利用程序標頭或切片標頭予以指定之量化刻度參數(或是以Z掃描順序為剛才的量化刻度參數)之差分。
量化偏移參數也被稱為量化偏移，其係為進行量化時之訊號四捨五入的調整值(偏移值)。因此，圖像編碼裝置100係在進行量化時，將該量化偏移進行編碼，圖像解碼裝置200係將該已編碼之量化偏移進行解碼。再者，圖像解碼裝置200係在將轉換係數進行反量化時，進行使用該量化偏移的補正。
索引(Qmatrix select idc)也稱為適應量化矩陣，其係為從複數個量化刻度矩陣顯示使用哪一個量化刻度矩陣之索引。又在Qmatrix select idc為只有1個量化刻度矩陣的情況下，顯示是否使用該量化刻度矩陣。又，適應用量化矩陣係可以利用區塊單位(處理單位)予以控制。
量化死區偏移參數也稱為適應死區，其係為用以對於每個區塊適應變更死區之控制資訊。死區係為利用量化使頻率係數成為0的幅度(在量化後成為+1或-1之前的幅度)。
又在上述說明中，雖然是以型態3將預先決定的固定值作為上下文值之例予以闡述，但只要是都不利用上區塊及左區塊的控制參數之條件即可，因此使用不包含上區塊及左區塊之控制參數的條件作為型態3亦可。例如，作為型態3，上下文控制部142或242係因應控制參數所屬之資料單位的階層深度決定上下文亦可。
(實施形態3)
在本實施形態中，針對作為上述第1類別及第2類別(或者第3類別)應該利用哪個訊號類別進行說明。
具體而言，本案發明者係在第3圖(非專利文獻2，9.3.3.1.1.1節)所示之訊號類別之中，針對以下的各個訊號類別進行驗證。所謂對於各個訊號類別進行驗證，其係因此在參數為多岐的情況，從針對1個訊號類別的驗證結果(型態1~型態3的哪一個為佳)，使其他訊號類別的各型態是否滿足妥當性的預估為困難的。
驗證係以JCTVC-E700，記載於“Common test conditions and software reference configurations(共同測試條件及軟體參考組態)”(非專利文獻3)之構成(設定參數、及軟體版本HM3.0)為基準。又，測試圖像的長度係為全部限定於49圖框的結果。
關於本實施形態之圖像編碼方法及圖像解碼方法係為 關於CABAC者。因此，作為Entropy coding(熵編碼)模組，使用SymbolMode(符號模組)之值為1(# 0：LCEC,1：CABAC)的設定值設定之以下4個測試型態，進行驗證。
4.1 Intra,high-efficiency setting(內部，高效率設定)
4.3 Random access,high-efficiency setting(隨機存取，高效率設定)
4.5 Low delay,high-efficiency setting(低延遲，高效率設定)
4.7 Low delay,high-efficiency setting(P slices only)(低延遲，高效率設定(只限P切片))
又，評估係使用在HEVC之安裝評估作為統一的評估尺寸所利用之被稱為“BD-RATE”值的評估值。Y BD-rate、U BD-rate、及V BD-rate係為對於色空間Y、U、V之“BD-rate”，是評估尺度值。其中，所謂BD-rate，其係為根據該面積比表示編碼效率之評估值。又，在BD-rate顯示為負數之值的情況下係顯示編碼效率為不佳。比較基準係為安裝型態1之參考程式的輸出結果。此次的結果係顯示各個型態2及型態3之對於型態1之值。
以下，說明各訊號類別的驗證結果。
(第1驗證)“split_coding_unit_flag”
(第2驗證)“skip_flag”
(第3驗證)“intra_chroma_pred_mode”
(第1驗證)“split_coding_unit_flag”
第11圖係為用以對於split_coding_unit_flag的算術解碼 方法進行說明之表。
在驗證中，只有驗證對象之訊號類別，將上下文模型從型態1變更為型態2或型態3，對於其他訊號類別、及以非專利文獻3指定之驗證用參數係在不變更狀態下進行驗證。又，在第11圖的欄中之值所謂「固定」，其係在上下文值(或者增分值)的導出中，不使用記載為「固定」之列的條件(左區塊條件或者上區塊條件。換言之，在只有左區塊條件及右區塊條件的一方條件為「固定」的情況下，只使用另一方的條件。又，在左區塊條件及右區塊條件兩者都為「固定」的情況下，使用預先決定之值(例如「0」)作為上下文值(或者增分值)。
訊號類別“split_coding_unit_flag”的意義係利用以下予以定義。
split_coding_unit_flag[x0][y0]係顯示對象CU是否將水平及垂直的尺寸分割為複數個CU。x0及y0係顯示以位於圖像的左上角之亮度樣本為基準之位於對象CU的左上角之亮度樣本的座標。也就是說，split_coding_unit_flag係顯示對象CU是否進行4分割。具體而言，split_coding_unit_flag之值為「1」的情況下，對象CU係進行分割，該值為「0」的情況，對象CU係不進行分割。
該split_coding_unit_flag係對於Coding tree syntax予以資料構造化作為syntax。圖像解碼裝置係以該資料構造的語法為基準將位元列進行解釋。
第12A及12B圖係為顯示對於split_coding_unit_flag的 驗證結果之表。
第12A圖係顯示(型態2)使用1個相鄰區塊(只有左區塊條件L的判定值)的情況之驗證結果。第12B圖係顯示(型態3)使用0個相鄰區塊(上區塊條件L及左都不使用)的情況之驗證結果。
又，在第12A及12B圖所示之驗證結果係顯示上述4個測試型態之BD-rate值的增減。
又，評估值係為顯示與使用左區塊及上區塊兩者之型態1的情況之評估值的相對值之評估尺寸。具體而言，若評估值為正值的話其結果為比型態1情況的評估值(BD-rate)更差。又，若評估值為負值的話其結果為比型態1情況的評估值更能夠改善。
根據該結果，關於split_coding_unit_flag，可以得知作為上下文模型之型態以型態1為優。換言之，型態2及型態3之評估值係比型態1更差。
因此，上下文控制部142及242係在控制參數的訊號類別為“split_coding_unit_flag”的情況下，從BD-rate的觀點看來，利用如習知之上下文模型的型態，也就是型態1決定上下文值。
(第2驗證)skip_flag
第13圖係為用以針對skip_flag之算術解碼方法進行說明的表。又，驗證方法係與上述之第1驗證相同。
訊號類別“skip_flag”的意義係如以下予以定義。
在將P或B切片進行解碼的情況中，skip_flag[x0][y0]之 值為「1」的情況，其係意指在該skip_flag[x0][y0]之後，除了預測動作向量索引之外，沒有現在的CU用之語法元件的存在。又，skip_flag[x0][y0]之值為「1」的情況，其係意指不能略過現在的CU。x0及y0係顯示以位於圖像的左上角之亮度樣本為基準之位於對象CU的左上角之亮度樣本的座標。也就是說，skip_flag係顯示是否略過對象CU(是否作為略過區塊處理)。
該skip_flag係對於Coding unit syntax予以資料構造化作為syntax。也就是說，skip_flag係對於每個CU予以設定。圖像解碼裝置係以該資料構造的語法為基準將位元列進行解釋。
第14A及14B圖係為顯示對於skip_flag之驗證結果的表。
第14A圖係顯示(型態2)使用1個相鄰區塊(只有左區塊條件L的判定值)的情況之驗證結果。第14B圖係顯示(型態3)使用0個相鄰區塊(上區塊條件L及左都不使用)的情況之驗證結果。
又，第14A及14B圖所示之驗證結果係與第1驗證相同，顯示上述4個測試型態的BD-rate值的增減。又，評估值的意義係與第1驗證相同。
根據該結果，關於“skip_flag”，可以得知作為上下文模型之型態以型態1為優。換言之，型態2及型態3之評估值係比型態1更差。
因此，上下文控制部142及242係在控制參數的訊號類別為“skip_flag”的情況下，從BD-rate的觀點看來，利用如 習知之上下文模型的型態，也就是型態1決定上下文值。
(第3驗證)“intra_chroma_pred_mode”
第15A圖係為用以針對intra_chroma_pred_mode之算術解碼方法進行說明的表。
該intra_chroma_pred_mode係對於“Prediction Unit”予以資料構造化作為syntax。圖像解碼裝置係以該資料構造的語法為基準將位元列進行解釋。
訊號類別“intra_chroma_pred_mode”的意義係如以下予以定義。
intra_chroma_pred_mode[x0][y0]係顯示色差樣本所用之畫面內預測模組。x0及y0係顯示以位於圖像的左上角之亮度樣本為基準之位於對象CU的左上角之luma(亮度)樣本的座標。
組合該intra_chroma_pred_mode之值(0以上4以下之值)、及現區塊的IntraPredMode[xP][yB]，決定針對色差之面內預測模組值之“chroma intra prediction mode”(IntraPredModeC)。其中，將現區塊的座標成為[xB][yB]。該[xB][yB]係顯示與[xP][yP]相同的位置。又，IntraPredMode係為針對亮度的預測模組。
第15B圖係顯示非專利文獻2所記載之因應intra_chroma_pred_mode及IntraPredMode之IntraPredModeC的導出方法之表。
又，第15A圖示之IntraPredMode(以大寫字母開頭的變數)並非是對於編碼列直接進行編碼之值，而是利用解碼器 內部進行解碼處理後之值配列。在對象區塊之IntraPredMode[xP][yP]的導出處理時，若是可以利用相鄰區塊的IntraPredMode[xP][yA]等的話則予以利用。
第16A及16B圖係為顯示針對“intra_chroma_pred_mode”的驗證結果之表。
第16A圖係顯示(型態2)使用1個相鄰區塊(只有左區塊條件L的判定值)的情況之驗證結果。第16B圖係顯示(型態3)使用0個相鄰區塊(上區塊條件L及左都不使用)的情況之驗證結果。
又，第16A及16B圖所示之驗證結果係與第1驗證相同，顯示上述4個測試型態的BD-rate值的增減。又，評估值的意義係與第1驗證相同。
根據該結果，其係與前述第1驗證之split_coding_unit_flag、及第2驗證之skip_flag結果不同，關於該intra_chroma_pred_mode，作為上下文模型之型態，在型態1與型態2或型態3之間沒有發生BD-rate的大差異。
因此，上下文控制部142及242係在混雜有複數種訊號類別的控制參數之環境中，尤其是訊號類別為intra_chroma_pred_mode的情況下，藉由不利用上區塊作為相鄰區塊決定上下文值。也就是說，上下文控制部142及242係在控制參數的訊號類別為intra_chroma_pred_mode的情況下，使用型態2或型態3決定上下文。換言之，上述第1類別係包含“split_coding_unit_flag”或者“skip_flag”，上述第2類別或第3類別係包含“intra_chroma_pred_mode”。藉此， 關於本實施形態之圖像編碼裝置及圖像解碼裝置係可以一邊抑制BD-rate值的減低，一邊削減記憶體使用量。
又，在對於intra_chroma_pred_mode之型態2及型態3進行比較的情況下，在此等的BD-rate沒有發生大的差異。因此，對於intra_chroma_pred_mode，使用型態3更佳。藉此，可以實現更進一步之記憶體使用量的削減、及處理量的削減。
其中，intra_chroma_pred_mode係全都是4位元的資訊，最先的1位元係顯示對於色差是否使用與亮度的畫面內預測相同之模組。其中，上下文控制部142及242係對於該最先的1位元使用型態2或型態3。具體而言，在對於色差使用與亮度相同的模組之情況下，intra_chroma_pred_mode係為「0」。在在對於色差使用與亮度不同的模組之情況下，intra_chroma_pred_mode係為「1」，其餘的3位元係顯示色差所用之模組。
其中，畫面內預測係利用上區塊及左區塊、與對象區塊的相關。也就是說，在畫面內預測中由於已經利用相關資訊，因此將與亮度相同的模組利用於色差乙事為有效率的。換言之，為了使其具有模組的變化，也可以將與亮度不同的模組利用於色差，但是在對於色差使用與亮度不同的模組，並且利用周圍的上下文之例子為稀少的。也就是說，利用與亮度相同的模組之將intra_chroma_pred_mode設定為「0」的例子為多。藉此，使利用周圍的上下文之優點變少，並且利用對象區塊的上下文，可以一邊維持編碼效 率，一邊削減處理量。
又，在判定上區塊是否在解碼時為“avaibale”可利用乙事為極困難。參照第18圖，考量對於利用解碼過程導出並予以配列化之IntraPredMode的配列。
包含對象區塊之行的1行上之行(LineL)的IntraPredMode係利用IntraPredMode[水平方向第n個][1行上(LineL)]予以表現。又，包含對象區塊之現在行的IntraPredMode係利用IntraPredMode[水平方向第k個][現在行]予以表現。其中，成為現在的算術解碼對象之訊號係為intra_chroma_pred_mode[水平方向第j個][現在行]。
首先，沒有保證上述之1行上的行與現在行之水平方向的第n個與第k個能夠對應。此係因為如第18圖的說明所示，PU區塊的尺寸係對於每個區塊有所變化。因此當欲管理此等時，建立某種對應表、或者如第18圖說明，以最小單位取得全部的IntraPredMode，沒有其他方法。
再者，與解碼對象之intra_chroma_pred_mode不同，上行的IntraPredMode並不是利用算術解碼部的解析可取得的訊號類別，而是利用另外的解碼過程所導出之值(H.264等之大寫字母開頭的變數)。因此，使算術解碼部單獨取得該值的可利用性乙事本身會產生大負荷。
因此，intra_chroma_pred_mode係在利用相鄰之上下文模型中，則是不利用針對上區塊的條件值(尤其是IntraPredMode[對應水平位置][一行上])之條件(判定值)condA，在記憶體使用量之點為有用的。
以上，雖然是針對關於本發明之實施形態之圖像編碼裝置及圖像解碼裝置進行說明，但是本發明係不限於該實施形態。
例如，在關於上述實施形態1~3之圖像編碼裝置、圖像解碼裝置及該等變形例的機能之中，將至少一部份予以組合亦可。
又，上述所使用之數字及論理值全部都是用以具體說明本發明加以例示者，本發明係不限於例示的數字。
又，方塊圖中之機能方塊的分割係為一例，將複數個機能方塊作為一個機能方塊予以實現、或將一個機能方塊分割為複數個、或將一部份的機能移動到其他機能方塊亦可。又，在將單一的硬體或軟體並列或暫時分割處理具有類似的機能之複數個機能方塊的機能亦可。
又，上述之根據圖像編碼裝置之圖像編碼方法、及根據圖像解碼裝置之圖像解碼方法之實行各步驟的順序係為用以具體說明本發明加以例示者，即使是上述以外的順序亦可。又，上述步驟的一部份係與其他步驟同時(並列)實行亦可。
(實施形態4)
藉由將用以實現利用上述各實施形態所示之動畫像編碼方法(圖像編碼方法)或動畫像解碼方法(圖像解碼方法)的構成之程式記錄在記憶媒體，在獨立的電腦系統中可以簡單實施上述各實施形態所示之處理。記憶媒體係為磁碟、光碟、光磁碟、IC卡、半導體記憶體等可以記錄程式 者皆可。
再者其中，說明上述各實施形態所示之動畫像編碼方法(圖像編碼方法)或動畫像解碼方法(圖像解碼方法)的應用例及使用其之系統。該系統，其特徵為：具有由使用圖像編碼方法之圖像編碼裝置、及使用圖像解碼方法之圖像解碼裝置構成之圖像編解碼裝置。對於系統中之其他構成，可以因應情況予以適當變更。
第19圖係為顯示實現內容傳送服務之內容供給系統ex100的整體構成之圖面。依照期望的尺寸分割通訊服務的提供區域，在各單元內各自設置固定無線台，也就是基地台ex106、ex107、ex108、ex109、ex110。
該內容供給系統ex100係透過網際網路服務提供者ex102及電話網ex104、以及基地台ex106至ex110，在網際網路ex101連接電腦ex111、PDA(個人數位助理器)ex112、攝影機ex113、手機ex114、遊戲機ex115等各種機器。
但是，內容供給系統ex100係不限於如第19圖所示的構成，組合連接任何的要素亦可。又即使不透過固定無線台，也就是基地台ex106至ex110，直接將各機器與電話網ex104連接亦可。又透過近距離無線等直接將各機器相互連接亦可。
攝影機ex113係為數位視訊攝影機等可進行動畫攝影之機器，攝影機ex116係為可進行數位攝影等靜止畫攝影、動畫攝影之機器。又手機ex114係為GSM(商標登錄)(Global System for Mobile Communications；全球行動通訊系統)方式、CDMA(Code Division Multiple Access；分碼多工存取) 方式、W-CDMA(Wideband-Code Division Multiple Access；寬頻分碼多工存取)方式、或是LTE(Long Term Evolution；長期演進技術)方式、HSPA(High Speed Packet Access；高速封包存取)方式的手機、或者PHS(Personal Handyphone System；個人手機系統)等，任何一個皆可。
在內容供給系統ex100中，藉由通過基地台ex109、電話網ex104將攝影機ex113等與串流伺服器ex103連接，可以達到即時傳送等。在即時傳送中，使用者係對於使用攝影機ex113所攝影的內容(例如音樂現場的影像等)進行以上述實施形態說明的編碼處理(也就是作為本發明之圖像編碼裝置的機能)，並且傳送到串流伺服器ex103。一方面，串流伺服器ex103係對於有要求的客戶將已傳送旳內容資料進行資料流傳送。就客戶而言，具有可將上述已編碼處理的內容資料進行解碼之電腦ex111、PDAex112、攝影機113、手機ex114、遊戲機ex115等。在接收已傳送的資料之各種機器中係將已接收的資料進行解碼處理再播放(也就是作為本發明之圖像解碼裝置的機能)。
又，已攝影的資料之編碼處理係即使利用攝影機ex113予以進行，或是利用進行資料的傳送處理之串流伺服器ex103予以進行皆可，使其相互分擔予以進行亦可。同樣，已傳送之資料的解碼處理係即使利用客戶予以進行，或是利用串流伺服器ex103予以進行皆可，使其相互分擔予以進行亦可。又不限於攝影機ex113，將利用攝影機ex116所攝影的靜止畫像及/或動畫像資料透過電腦ex111傳達到串流 伺服器ex103亦可。該情況的編碼處理係利用攝影機116、電腦ex111、串流伺服器ex103的任何一個予以進行皆可，使其相互分擔予以進行亦可。
又，此等編碼‧解碼處理係一般而言都是在具有電腦ex111或各種機器之LSIex500中進行處理。LSIex500係無論由單晶片或多晶片構成皆可。又將動畫像編碼‧解碼用的軟體編入可利用電腦ex111等讀取之任何的記錄媒體(CD-ROM、可撓性碟片、硬碟等)，使用該軟體進行編碼‧解碼處理亦可。再者，在手機ex114為附有攝影機的情況下，將利用該攝影機取得的動畫資料進行傳送亦可。此時的動畫資料係為利用手機ex114所具有之LSIex500進行編碼處理的資料。
又，串流伺服器ex103係為複數個伺服器或複數個電腦，將資料進行分散處理、記錄、傳送者亦可。
如以上所示，在內容供給系統ex100中，可以使客戶接收已編碼的資料再進行播放。如此一來在內容供給系統ex100中，使用者可以即時性將傳送的資訊由客戶接收並進行解碼、播放，即使是沒有特別權利或設備的使用者也可以實現個人廣播。
又不限於內容供給系統ex100的例子，如第20圖所示，即使在數位廣播用系統ex200中，也可以編入上述實施形態之至少動畫像編碼裝置(圖像編碼裝置)或動畫像解碼裝置(圖像解碼裝置)的任一個。具體而言，在廣播台ex201中係將在影像資料使音樂資料進行多工化之多工化資料透過電 波進行通訊或傳送到衛星ex202。該影像資料係為利用以上述實施形態說明的動畫像編碼方法進行編碼之資料(也就是利用本發明的圖像編碼裝置進行編碼的資料)。接收此資料的衛星ex202係發送廣播用的電波，由可進行衛星廣播的接收之家庭天線ex204接收該電波。將已接收的多工化資料由電視機(接收器)ex300或機上盒(STB)ex217等裝置進行解碼播放(也就是作為本發明之圖像解碼裝置的機能)。
又即使在讀取記錄在DVD、BD等記錄媒體ex215之多工化資料再進行解碼、或者在記錄媒體ex215將影像訊號進行編碼、進一步根據情況與音樂訊號一起多工化再寫入之讀取/記錄器，也可以安裝以上述實施形態所示之動畫像解碼裝置或動畫像編碼裝置。在該情況下，已播放的影像訊號係顯示在螢幕ex2 19，可以利用記錄有多工化資料的記錄媒體ex215在其他裝置或系統中播放影像訊號。又在有線電視機用的電線ex203或是與衛星/地面廣播的天線ex204連接之機上盒ex217內安裝動畫像解碼裝置，利用電視機的螢幕ex219顯示此訊號亦可。此時不是在機上盒，而是在電視機內安裝動畫像解碼裝置亦可。
第21圖係為顯示使用以上述實施形態說明的動畫像解碼方法及動畫像編碼方法之電視機(接收器)ex300的圖面。電視機ex300係具備：透過接收上述廣播之天線ex204或電線ex203等取得、或者輸出在影像資料使聲音資料進行多工化的多工化資料之調諧器ex301；將己接收的多工化資料進行解調、或者傳送到外部之調變為多工化資料之調變/解調 部ex302；將己解調的多工化資料分離為影像資料與聲音資料、或者利用訊號處理部ex306將已編碼的影像資料、聲音資料進行多工化之多工/分離部ex303。
又電視機ex300係具有：具有將聲音資料、影像資料各自進行解碼、或者將各個資訊進行編碼之聲音訊號處理部ex304、影像訊號處理部ex305(作為本發明之圖像編碼裝置或圖像解碼裝置的機能)之訊號處理部ex306；具有輸出已解碼的聲音訊號之揚聲器ex307、及顯示已解碼的影像訊之顯示器等顯示部ex308之輸出部ex309。再者，電視機ex300係具備有受理使用操作的輸入之操作輸入部ex312等之介面部ex317。再者電視機ex300係具有總括性控制各部之控制部ex310、將電力供給到各部之電源電路部ex311。介面部ex317係除了操作輸入部ex312以外，具有與讀取/記錄器ex218等外部機器連接之橋接器ex313；用以能夠安裝SD卡等記錄媒體ex216之插槽部ex314；用以與硬碟等外記記錄媒體連接之驅動器ex315；與電話網連接之數據機ex316等亦可。又記錄媒體ex216係為利用儲存的非揮發性/揮發性半導體記憶元件而能夠進行電氣性資訊記錄者。電視機ex300的各部係透過同步匯流排而相互連接。
首先，針對電視機ex300將利用天線ex204等從外部取得的多工化資料進行解碼、播放的構成予以說明。電視機ex300係接收來自遙控器ex220等的使用者操作，根據具有CPU等控制部ex310的控制，將利用調變/解調部ex302所解調的多工化資料利用多工/分離部ex303進行分離。再者，電 視機ex300係利用聲音訊號處理部ex304將已分離的聲音資料進行解碼，利用影像訊號處理部ex305將已分離的影像資料使用以上述實施形態說明的解碼方法進行解碼。已解碼的聲音訊號、影像訊號係各自從輸出部ex309朝向外部輸出。在輸出時，以聲音訊號與影像訊號同步播放的方式，在緩衝器ex318、ex319等將此等訊號儲存一次亦可。又電視機ex300即使不是從廣播等，而是從磁/光碟、SD卡等記錄媒體ex215、ex216讀出多工化資料亦可。其次，針對電視機ex300將聲音訊號或影像訊號進行編碼，傳送到外部或者寫入記錄媒體等的構成予以說明。電視機ex300係接收來自遙控器ex220等的使用者操作，根據控制部ex310的控制，利用聲音訊號處理部ex304將聲音訊號進行編碼，利用影像訊號處理部ex305將影像訊號使用以上述實施形態說明的編碼方法進行編碼。已編碼的聲音訊號、影像訊號係利用多工/分離部ex303進行多工化再輸出到外部。在多工化時，以聲音訊號與影像訊號同步的方式，在緩衝器ex320、ex321等將此等訊號儲存一次亦可。又緩衝器ex318、ex319、ex320、ex321係如圖示所示具備複數個亦可，成為共有1個以上的緩衝器之構成亦可。再者，在圖示以外，例如也可以作為在調變/解調部ex302或多工/分離部ex303之間等避免系統的過流、下溢之緩衝材而將資料儲存在緩衝器亦可。
又，電視機ex300係除了從廣播等或記錄媒體等取得聲音訊號、影像訊號以外，並且具備受理麥克風或攝影機的 AV輸入之構成，對於從該等取得的資料進行編碼處理亦可。又在此電視機ex300雖然形成為能夠進行上述的編碼處理、多工化、及外部輸出的構成予以說明，但是即使不能進行此等處理，只是形成為能夠進行上述接收、解碼處理、外部輸出的構成亦可。
又，利用讀取/記錄器ex218從記錄媒體讀出、或者寫入多工化資料的情況下，上述解碼處理或編碼處理係利用電視機ex300、讀取/記錄器ex218的任一個進行皆可，使電視機ex300與讀取/記錄器ex218相互分擔進行亦可。
作為一例，在第22圖顯示從光碟進行資料讀入或寫入的情況之資訊播放/記錄部ex400的構成。資訊播放/記錄部ex400係具備以下說明的要素ex401、ex402、ex403、ex404、ex405、ex406、ex407。光學頭ex401係在光碟，也就是記錄媒體ex215的記錄面照射雷射光點進行資訊寫入、檢測來自記錄媒體ex215的記錄面之反射光進行資訊讀入。調變記錄部ex402係電氣驅動內藏在光學頭ex401的半導體雷射，並且因應記錄資料進行雷射光的調變。播放解調部ex403係利用內藏在光學頭ex401的光檢測器，將電氣檢測來自記錄面的反射光之播放訊號放大，並且將記錄在記錄媒體ex215的訊號成份分離解調，播放必要的資訊。緩衝器ex404係將用以記錄在記錄媒體ex215之資訊、及從記錄媒體ex215播放的資訊暫時儲存。碟片馬達ex405係使記錄媒體ex215旋轉。伺服控制部ex406係一邊控制碟片馬達ex405的旋轉驅動，一邊將光學頭ex401移動到特定的資訊磁軌，進行雷射 光點的追踪處理。系統控制部ex407係進行資訊播放/記錄部ex400整體的控制。上述之讀出或寫入處理係藉由使系統控制部ex407利用儲存在緩衝器ex404的各種資訊，且因應必要進行新的資訊之生成‧追加的同時，而且一邊使調變記錄部ex402、播放解調部ex403、伺服控制部ex406協調動作，一邊通過光學頭ex401進行資訊的記錄播放予以實現。系統控制部ex407係例如利用微電腦予以構成，藉由實行讀出寫入的程式可以實行該等處理。
在以上，雖然光學頭ex401係以照射雷射光點進行說明，但是使用近場光進行更高密度的記錄之構成亦可。
在第23圖顯示光碟，也就是記錄媒體ex215的示意圖。在記錄媒體ex215的記錄面中係使引導溝(群組)形成為螺旋狀，在資訊磁軌ex230中係藉由預先群組形狀的變化而將顯示碟片上的絕對位置之地址訊號予以記錄。該地址訊號係包含用以特定記錄資料的單位，也就是記錄區塊ex231的位置之資訊，在進行記錄或播放的裝置中藉由播放資訊磁軌ex230讀取地址訊號，可以特定記錄區塊。又記錄媒體ex215係包含資料記錄區域ex233、內周區域ex232、外周區域ex234。被用來作為記錄使用者資料的區域為資料記錄區域ex233，配置在比資料記錄區域ex233更內周或更外周之內周區域ex234與外周區域ex234係用於使用者資料的記錄以外的特定用途。資訊播放/記錄部ex400係對於這樣的記錄媒體ex215之資料記錄區域ex233，進行已編碼的聲音資料、影像資料或者將此等多工化的多工化資料之讀寫。
在以上，雖然舉出1層的DVD、BD等光碟為例進行說明，但是不限於此等，即使是多層構造在表面以外也可以記錄之光碟亦可。又在碟片的相同處使用各種不同的波長色光記錄資訊、從各種角度記錄不同的資訊層等可進行多次元記錄/播放的構造之光碟亦可。
又，在數位廣播用系統ex200中，也可以利用具有天線ex205的汽車ex210從衛星ex202等接收資料，在汽車ex205所具有的汽車導航裝置ex211等顯示裝置播放動畫。又汽車導航裝置ex211的構成係在第21圖所示之構成中，被認為是增加GPS接收部的構成，而同樣的事在電腦ex111或手機ex114等也被認可。
第24A圖係為顯示使用以上述實施形態說明的動畫像解碼方法及動畫像編碼方法之手機ex114的圖面。手機ex114係具備：在與基地台ex110之間用以接收傳送電波之天線ex350；可拍攝影像、靜止畫之攝影機部ex365；將利用攝影機部ex365拍攝的影像、利用天線ex350接收的影像等進行解碼的資料予以顯示之液晶顯示器等顯示部ex358。手機ex114係進一步具備：具有操作鍵盤ex366之本體部；用以輸出聲音之揚聲器等聲音輸出部ex357；用以輸入聲音之麥克風等聲音輸入部ex356；將拍攝的影像、靜止畫、錄音的聲音、或者接收的影像、靜止畫、訊息等已編碼的資料或已解碼的資料進行儲存之記憶體部ex367；或者與同樣儲存資料的記錄媒體之介面部，也就是插槽部ex364。
再者，針對手機ex114的構成例，使用第24B圖進行說明。手機ex114係對於統括性控制具備顯示部ex358及操作鍵盤ex366之本體部的各部之控制部ex360，使電源電路部ex361、操作輸入控制部ex362、影像訊號處理部ex355、攝影機介面部ex363、LCD(液晶顯示器)控制部ex359、調變/解調部ex352、多工/分離部ex353、聲音訊號處理部ex354、插槽部ex364、記憶體部ex367透過匯流排ex370而相互連接。
電源電路部ex361係當藉由使用者的操作而使終話及電源鍵成為開狀態時，藉由從電池組件將電力對於各部供給而使手機ex114起動為可動作的狀態。
手機ex114係根據具有CPU、ROM、RAM等主控制部ex360的控制，在聲音通話模式時將利用聲音輸入部ex356接收的聲音訊號利用聲音訊號處理部ex354轉換為數位聲音訊號，利用調變/解調部ex352將此訊號進行頻譜擴散處理，在利用傳送/接收部ex351施行數位類比轉換處理及頻率轉換處理後透過天線ex350進行傳送。又手機ex114係在聲音通話模式時透過天線ex350將已接收的接收資料放大並且施行頻率轉換處理及數位類比轉換處理，利用調變/解調部ex352進行頻譜逆擴散處理，利用聲音訊號處理部ex354轉換為類比聲音訊號後，將該訊號從聲音輸出部ex357輸出。
再者，在資料通訊模式時傳送電子郵件的情況下，利用本體部的操作鍵盤部ex366等之操作所輸入的電子郵件的本文資料係透過操作輸入控制部ex362送出到主控制部ex360。主控制部ex360係利用調變/解調部ex352將本文資料 進行頻譜擴散處理，在利用傳送/接收部ex351施行數位類比轉換處理及頻率轉換處理後，透過天線ex350傳送到基地台ex110。在接收電子郵件的情況下，對於已接收的資料進行與此大約相反的處理，輸出到顯示部ex358。
在資料通訊模式時傳送影像、靜止畫、或影像與聲音的情況下，影像訊號處理部ex355係將從攝影機部ex365所供給的影像訊號利用以上述實施形態所示之圖像編碼方法進行壓縮編碼(也就是作為本發明之圖像編碼裝置的機能)，將已編碼的影像資料送出到多工/分離部ex353。又聲音訊號處理部ex354係將在利用攝影機部ex365拍攝影像、靜止畫中利用聲音輸入部ex356收音的聲音訊號進行編碼，將已編碼的聲音資料送出到多工/分離部ex353。
多工/分離部ex353係利用特定的方式將從影像訊號處理部ex355供給之已編碼的影像資料、及從聲音訊號處理部ex354供給之已編碼的聲音資料進行多工化，其結果為將已得到的多工化資料利用調變/解調部(調變/解調電路部)ex352進行頻譜擴散處理，在利用傳送/接收部ex351施行數位類比轉換處理及頻率轉換處理後透過天線ex350進行傳送。
在資料通訊模式時接收與網頁連結之動畫像檔案的資料之情況、或者接收附有影像及/或聲音的電子郵件之情況下，為了將透過天線ex350所接收的多工化資料進行解碼，多工/分離部ex353係利用分離多工化資料而分成為影像資料的位元流及聲音資料的位元流，透過同步匯流排ex370將 已編碼的影像資料供給到影像訊號處理部ex355的同時，而且將已編碼的聲音資料供給到聲音訊號處理部ex354。影像訊號處理部ex355係藉由利用與以上述的實施形態所示之動畫像編碼方法對應之動畫像解碼方法進行解碼而將影像訊號進行解碼(也就是作為本發明之圖像解碼裝置的機能)，透過LCD控制部ex359從顯示部ex358顯示包含在例如與網頁連結之動畫像檔案的影像、靜止畫。又聲音訊號處理部ex354係將聲音訊號進行解碼，從聲音輸出部ex357將聲音輸出。
又上述手機ex114等的終端係與電視機機ex300相同，認為有所謂除了具有編碼器‧解碼器兩方之接收傳送型終端之外，也有僅編碼器之傳送終端、僅解碼器之接收終端的3種安裝形式。再者，在數位廣播用系統ex200中，雖然就接收、傳送在影像資料將音樂資料等進行多工化之多化工資料進行說明，但是在聲音資料以外將與影像相關之文字資料等進行多工化的資料亦可，不是多工化資料只是影像資料本身亦可。
如此一來，可以將以上述的實施形態所示之動畫像編碼方法或動畫像解碼方法使用在上述之任一個機器‧系統，藉此，可以得到以上述實施形態說明的效果。
又本發明係不限於上述實施形態，在不脫離本發明的範圍下可以進行各種變形或修正。
(實施形態5)
藉由因應必要適當切換以上述各實施形態所示之動畫 像編碼方法或裝置、及以MPEG-2、MPEG4-AVC、VC-1等不同規格為基準之動畫像編碼方法或裝置，也可以產生影像資料。
其中，在產生以各種不同規格為基準的複數種影像資料的情況下，在進行解碼時，必須選擇因應各種規格的解碼方法。然而，由於無法辨識解碼的影像資料是以何種規格為基準者，因此發生了無法選擇適當的解碼方法。
為了解決該課題，在影像資料將聲音資料等進行多工化的多工化資料係構成為包含顯示影像資料是以何種規格為基準者的辨識資訊。在以下說明包含利用以上述各實施形態所示之動畫像編碼方法或裝置產生的影像資料之多工化資料的具體構成。多工化資料係為MPEG-2傳輸串流形式的數位資料流。
第25圖係為顯示多工化資料的構成。如第25圖所示多工化資料係在視訊資料流、音訊資料流、演示圖形資料流(PG)、交互圖形資料流之中，藉由將1個以上進行多工化而得到。視訊資料流係顯示電影的主影像及副影像、音訊資料流(IG)係顯示電影的主聲音部份及與該主聲混合的副聲音、演示圖形資料流係顯示電影的字幕。在此所謂主影像係表示在畫面中所顯示之通常的影像，所謂副影像係表示在主影像之中以小的畫面所顯示之影像。又交互圖形資料流係顯示藉由在畫面上配置GUI零件而作成的對話畫面。視訊資料流係利用以上述各實施形態示之動畫像編碼方法或裝置、以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基 準的動畫像編碼方法或裝置進行編碼。音訊資料流係利用杜比AC-3、Dolby Digital Plus(杜比數位技術)、MLP、DTS、DTS-HD、或線性PCM等方式進行編碼。
包含在多工化資料的各資料流係利用PID辨識。例如，在利用於電影之影像的視訊資料流中係分配到0x1011、在音訊資料流中分配到0x1100至0x111F、在演示圖形資料流分配到0x1200至0x121F、在交互圖形資料流中分配到0x1400至0x141F，在利用於電影的副影像之視訊資料流中係分配到0x1B00至0x1B1F、在利用於與主聲音混合之副聲音的音訊資料流中分配到0x1A00至0x1A1F。
第26圖係為模式顯示多工化資料是如何進行多工化的圖面。首先，將由複數個視訊框構成的視訊資料流ex235、由複數個音訊框構成的音訊資料流ex238各自轉換為PES封包列ex236及ex239，再轉換為TS封包ex237及ex240。同樣將演示圖形資料流ex241及交互圖形資料流ex244各自轉換為PES封包列ex242及ex245，進一步轉換為TS封包ex243及ex246。多工化資料ex247係藉由將此等TS封包在1條的資料流進行多工化予以構成。
第27圖係為更詳細顯示如何在PES封包列儲存視訊資料流。第27圖中的第1段係顯示視訊資料流的視訊框列。第2段係顯示PES封包列。如第27圖之箭頭方向yy1、yy2、yy3、yy4所示，視訊資料流中之複數個Video Presentation Unit(視訊演示單元)，也就是I圖片、B圖片、P圖片係分割為每個圖片，並且儲存在PES封包列的酬載。各PES封包係具有PES 標頭，在PES標頭中係儲存圖片的顯示時刻，也就是PTS(Presentation Time-Stamp；演示時間標記)或圖片的解碼時刻，也就是DTS(Decoding Time-Stamp；解碼時間標記)。
第28圖係顯示在最後寫入到多工化資料之TS封包的形式。TS封包係為由具有辨識資料流之PID等資訊之4位元的TS標頭、及儲存資料之184位元的TS酬載構成之188位元固定長度的封包，上述之PES封包係被分割並儲存在TS酬載。在BD-ROM的情況下，在TS封包中，附予4位元的TP_Extra_Header(TP附加標頭)而構成192位元的源包，被寫入到多工化資料。在TP_Extra_Header中係記載ATS(Arrival Time Stamp；到達時間標記)等資訊。ATS係顯示該TS封包之對於解碼器的PID過濾之傳送開始時刻。在多工化資料中係如第28圖下段所示，形成為源包並列，從多工化資料的前頭增加的號碼係被稱為SPN(源包號碼)。
又在包含於多工化資料之TS封包中，除了影像‧聲音‧字幕等各資料流以外，也有PAT(Program Association Table；節目關聯表)、PMT(Program Map Table；節目映射表)、PCR(Program Clock Reference；節目參考時鐘)等。PAT係顯示被利用在多工化資料中之PMT的PID為何，PAT本身的PID係以0登錄。PMT係具有包含在多工化資料中之影像‧聲音‧字幕等各資料流的PID及與各PID對應之資料流的屬性資訊，而且具有關於多工化資料的各種描述符。在描述符中係具有指示多工化資料之複製許可‧不許可之複製控制資訊。PCR係為了取得ATS之時間軸，也就是 ATC(Arrival Time Clock；到達時間時鐘)與PTS‧DTS的時間軸，也就是STC(System Time Clock；系統時間時鐘)的同步，具有與使該PCR封包被傳送到解碼器之ATS對應的STC時間資訊。
第29圖係為詳細說明PMT的資料構造之圖面。在PMT的前頭中係配置記錄有被包含在PMT的資料長度等之PMT標頭。在其後係配置複數個關於多工化資料的描述符。將上述複製控制資訊等作為描述符予以記載。在描述符之後係配置複數個關於包含在多工化資料的各資料流之資料流資訊。資料流資訊係為了辨識資料流的壓縮編解碼器等，由記載了資料流形式、資料流的PID、資料流的屬性資訊(圖框速率、長寬比等)之資料流描述符構成。資料流描述符係只存有存在於多工化資料之資料流的數量。
在記錄媒體等進行記錄的情況下，上述多工化資料係與多工化資料資訊過濾一起記錄。
多工化資料資訊檔案係如第30圖所示，是多工化資料的管理資訊，與多工化資料為1比1對應，由多工化資料資訊、資料流屬性資訊及登錄圖構成。
多工化資料資訊係如第30圖所示，由系統速率、播放開始時刻、播放結束時刻構成。系統速率係顯示多工化資料之對於系統標靶解碼器之PID過濾的最大傳送速率。包含在多工化資料中之ATS的間隔係構成為系統速率以下予以設定。播放開始時刻係為多工化資料前頭的視訊框之PTS，播放結束時刻係在多工化資料終端的視訊框之PTS設定有 滿足1圖框份的播放間隔者。
資料流屬性資訊係如第31圖所示，使對於包含在多工化資料之各資料流的屬性資料登錄在每個PID。屬性資訊係對於每個視訊資料流、音訊資料流、演示圖形資料流、交互圖形資料流具有不同的資訊。視訊資料流屬性資訊係具有該視訊資料流是以何種壓縮編解碼器進行壓縮、構成視訊資料流的各個圖片資料的解像度為多少、長寬比為多少、圖框速率為多少等資訊。音訊資料流屬性資訊係具有該音訊資料流是以何種壓縮編解碼器進行壓縮、包含在該音訊資料流的通道數為何、與何種語言對應、採樣頻率為多少等資訊。此等資訊係被利用於播放器播放前之解碼的初期化等。
在本實施形態中，利用上述多工化資料之中，被包含在PMT之資料流形式。又在將多工化資料記錄在記錄媒體的情況下，利用被包含在多工化資料之視訊資料流屬性資訊。具體而言，在以上述各實施形態所示之動畫像編碼方法或裝置中，設置將顯示被包含在PMT之資料流形式、或對於視訊資料流屬性資訊為利用以上述各實施形態所示之動畫像編碼方法或裝置產生的影像資料之固有資訊予以設定之步驟或手段。藉由該構成，可以辨識利用以上述各實施形態所示之動畫像編碼方法或裝置產生的影像資料、及以其他規格為基準之影像資料。
又在第32圖顯示本實施形態中之動畫像解碼方法的步驟。在步驟exS100中，從多工化資料取得被包含在PMT之 資料流形式、或被包含在多工化資料之視訊資料流屬性資訊。其次，在步驟exS101中，判斷資料流形式或視訊資料流屬性資訊是否為利用以上述各實施形態所示之動畫像編碼方法或裝置產生的多工化資料。再者，在判斷資料流形式或視訊資料流屬性資訊為利用以上述各實施形態所示之動畫像編碼方法或裝置產生者的情況下，在步驟exS102中，利用以上述各實施形態所示之動畫像解碼方法進行解碼。又在顯示資料流形式或視訊資料流屬性資訊為以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準者的情況下，在步驟exS103中，利用以習知規格為基準的動畫像解碼方法進行解碼。
如此一來，藉由在資料流形式或視訊資料流屬性資訊設定新的固有值，在進行解碼時，可以判斷可否利用以上述各實施形態所示之動畫像解碼方法或裝置進行解碼。因此，即使在輸入以不同規格為基準的多工化資料之情況下，由石以選擇適當的解編碼方法或裝置，因此可以達到不會產生錯誤進行解碼。又也可以將以本實施形態所示之動畫像編碼方法或裝置、或者動畫像解碼方法或裝置用於上述之任一個機器‧系統。
(實施形態6)
以上述各實施形態所示之動畫像編碼方法或裝置、動畫像解碼方法或裝置係典型而言都是利用積體電路，也就是LSI予以實現。作為一例，在第33圖顯示1晶片化之LSIex500的構成。LSIex500係具備以下說明之要素ex501、 ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509，各要素係透過匯流排ex510予以連接。電源電路ex505係在電源為開狀態的情況下藉由對於各部供給電力而起動為可動作狀態。
例如在進行編碼處理的情況下，LSIex500係根據具有CPUex502、記憶體控制器ex503、資料流控制器ex504、，驅動頻率控制部ex512等之控制部ex501的控制，利用AV I/O ex509從麥克風ex117或攝影機ex113等輸入AV訊號。已輸入的AV訊號係一次儲存在SDRAM等外部記憶體ex511。根據控制部ex501的控制，已儲存的資料係因應處理量或處理速度就這樣被適當分為複數次並且傳送到訊號處理部ex507，在訊號處理部ex507中進行聲音訊號的編碼及/或影像訊號的編碼。其中影像訊號的編碼處理係為以上述各實施形態所說明之編碼處理。在訊號處理部ex507中係進一步根據情況將已編碼的聲音資料及已編碼的影像資料進行多工化等的處理，從資料流I/Oex506朝外部輸出。該已輸出的多工化資料係朝向基地台ex107予以傳送、或者寫入到記錄媒體ex215。又在進行多工化時以同步的方式將資料一次儲存在緩衝器ex508亦可。
又在上述中，雖然使記憶體ex511成為LSI ex500的外部構成予以說明，但是成為包含在LSI ex500的內部之構成亦可。緩衝器ex508也不限定於1個，具備複數個緩衝器亦可。又LSI ex500係為1晶片化者亦可，多晶片化者亦可。
又在上述中，雖然控制部ex501是構成為具有 CPUex502、記憶體控制器ex503、資料流控制器ex504、驅動頻率控制部ex512等，但是控制部ex501的構成係不限於該構成。例如使訊號處理部ex507進一步具備CPU之構成亦可。藉由也在訊號處理部ex507內部設置CPU，可以提供處理速度。又作為其他例，使CPU ex502具備訊號處理部ex507、或訊號處理部ex507的一部份之聲音訊號處理部之構成亦可。在該情況下，控制部ex501係成為具備訊號處理部ex507、或是具有其一部份之CPUex502的構成。
又，其中，雖然是構成為LSI，但是根據積體度的不同，也被稱為IC、系統LSI、超LSI、甚大LSI。
又積體電路的手法係不限於LSI，也可以利用專用電路或廣用處理器予以實現。在LSI製造後，利用可進行程式處理之FPGA(Field Programmable Gate Array；現場可程式閘陣列)、或可再構成LSI內部的電路單元的連接或設定之可重組態處理器亦可。
進一步，若是有發展出根據半導體技術的進步或衍生的其他技術而取代LSI之積體電路化的技術，當然也可以使用該技術進行機能區塊的積體化。當然有可以進行生化技術適應等的可能性。
(實施形態7)
在將利用以上述各實施形態所示之動畫像編碼方法或裝置產生的影像資料進行解碼的情況下，與將以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準的影像資料進行解碼的情況相比，認為會使處理量增加。為此，在 LSIex500中，必須設定比將以習知規格為基準之影像資料進行解碼時之CPUex502的驅動頻率更高之驅動頻率。但是當驅動頻率變高時，會產生所謂消耗電力變高的課題。
為了解決該課題，電視機機ex300、LSIex500等動畫像解碼裝置係形成為辨識影像資料為以何種規格為基準者，並且因應規格切換驅動頻率之構成。第34圖係顯示本實施形態中之構成ex800。驅動頻率切換部ex803係在影像資料為利用以上述各實施形態所示之動畫像編碼方法或裝置產生者的情況下，將驅動頻率設定為高。再者，對於實行以上述各實施形態所示之動畫像解碼方法之解碼處理部ex801，指示將影像資料進行解碼。一方面，在影像資料為以習知規格為基準之影像資料的情況下，與影像資料是利用以上述各實施形態所示之動畫像編碼方法或裝置產生者的情況相比，將驅動頻率設定為低。再者，對於以習知規格為基準之解碼處理部ex802，指示將影像資料進行解碼。
更具體而言，驅動頻率切換部ex803係由第33圖之CPUex502及驅動頻率控制部ex512予以構成。又實行以上述各實施形態所示之動畫像解碼方法之解碼處理部ex801、及以習知規格為基準之解碼處理部ex802係相當於第33圖之訊號處理部ex507。CPUex502係辨識影像資料是以何種規格為基準者。再者，依據來自CPUex502的訊號，驅動頻率控制部ex512係設定驅動頻率。又依據來自CPUex502的訊號，訊號處理部ex507係進行影像資料的解碼。為此，在影像資料的辨識方面，例如考量利用以實施 形態5記載之辨識資訊。關於辨識資訊，不限於以實施形態3記載者，只要是可以辨識影像資料是以何種規格為基準者即可。例如，在依據辨識影像資料是利用於電視機機者、或是利用於碟片者等的外部訊號，可以辨識影像資料是以何種規格為基準者的情況下，依據這樣的外部訊號進行辨識亦可。又CPUex502中之驅動頻率的選擇係例如考量依據附有與第36圖所示之影像資料的規格、及驅動頻率對應之查閱表予以進行。預先將查閱表儲存在緩衝器ex508、或LSI的內部記憶體，藉由使CPUex502參照該查閱表，可以選擇驅動頻率。
第35圖係顯示實施本實施形態之步驟。首先在步驟exS200中，於訊號處理部ex507中從多工化資料取得辨識資訊。其次在步驟exS201中，於CPUex502中依據辨識資訊辨識影像資料是否為利用以上述各實施形態所示之動畫像編碼方法或裝置產生者。在影像資料是利用以上述各實施形態所示之動畫像編碼方法或裝置產生者的情況下，在步驟exS202中，使CPUex502將驅動頻率設定為高的訊號傳送到驅動頻率控制部ex512。再者，於驅動頻率控制部ex512中，設定為高的驅動頻率。一方面，在顯示為以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準的影像資料之情況下，在步驟exS203中，使CPUex502將驅動頻率設定為低的訊號傳送到驅動頻率控制部ex512。再者，於驅動頻率控制部ex512中，與影像資料為利用上述各實施形態所示之編碼方法或裝置所產生者的情況相比，設定為低的驅動頻率。
再者，與驅動頻率的切換連動，藉由變更施加到LSIex500或包含LSIex500的裝置之電壓，可以更為提高省電效果。例如，在將驅動頻率設定為低的情況下，伴隨此點，與將驅動頻率設定為高的情況相比，考量將施加到LSIex500或包含LSIex500的裝置之電壓設定為低。
又驅動頻率的設定方法係只要在解碼時之處理量為大的情況下，將驅動頻率設定為高，在解碼時之處理量為小的情況下，將驅動頻率設定為低即可，不限於上述的設定方法。例如，在將以習知之MPEG4-AVC規格為基準的影像資料進行解碼的處理量比將利用以上述各實施形態所示之動畫像編碼方法或裝置產生的影像資料進行解碼的處理量更大之情況下，考量將驅動頻率的設定形成為與上述情況相反。
再者，驅動頻率的設定方法係不限於將驅動頻率設定為低之構成。例如，也考量在辨識資訊顯示為利用以上述各實施形態所示之動畫像編碼方法或裝置產生之影像資料的情況下，將施加到LSIex500或包含LSIex500的裝置之電壓設定為高，在顯示為以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準的影像資料之情況下，將施加到LSIex500或包含LSIex500的裝置之電壓設定為低。又就其他例而言，在辨識資訊顯示為利用以上述各實施形態所示之動畫像編碼方法或裝置產生之影像資料的情況下，使CPUex502的驅動不停止，在顯示為以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準的影像資料之情況下，由 於處理上尚有余裕，也考量將CPUex502的驅動暫時停止。即使在辨識資訊顯示為利用以上述各實施形態所示之動畫像編碼方法或裝置產生之影像資料的情況下，若是處理上尚有余裕，也考量將CPUex502的驅動暫時停止。在該情況下，與顯示為以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準的影像資料之情況相比，考量將停止時間設定為短。
如此一來，藉由因應影像資料依據的規格，切換驅動頻率，可以圖謀省電力化。在使用電池驅動LSIex500或包含LSIex500的裝置之情況下，伴隨著省電力化，可以使電池壽命變長。
(實施形態8)
在電視機機、或手機等上述機器‧系統中，會有以不同規格為基準之複數個影像資料被輸入的情況。如此一來，為了在即使有以不同規格為基準之複數個影像資料被輸入的情況下也能夠進行解碼，必須使LSIex500的訊號處理部ex507與複數種規格對應。但是當個別使用與各規格對應之訊號處理部ex507時，會使LSIex500的電路規模變大，或產生成本增加的課題。
為了解決上述課題，將用以實行以上述各實施形態所示之動畫像解碼方法之解碼處理部、及以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之解碼處理部形成為一部份共有化的構成。在第37A圖之ex900顯示該構成例。例如，以上述各實施形態所示之動畫像解碼方法、及以MPEG4-AVC規格為基準之動畫像解碼方法係在熵編碼、反 量化、去區塊效應濾波器、動作補償等處理中使處理內容為一部份共通。考量所謂針對共通的處理內容，與MPEG4-AVC規格對應之解碼處理部ex902共有，針對不與MPEG4-AVC規格對應之本發明特有的其他處理內容，則是使用專用的解碼處理部ex901之構成。尤其是本發明之一態樣係因為在算術解碼具有特徵，因此例如對於算術解碼係使用專用的解碼處理部ex901，對於其他之反量化、去區塊濾波、動作補償的任一個、或者對於所有的處理，考量可以共有解碼處理部。關於解碼處理部的共有化，其係對於共通的處理內容係共有用以實行上述各實施形態所示之動畫像解碼方法的解碼處理部，對於在MPEG4-AVC規格特有的處理內容，使用專用的解碼處理部之構成亦可。
又，在第37B圖之ex1000顯示將處理一部份共有化之其他例。在該例中，形成使用與在本發明一態樣特有的處理內容對應之專用的解碼處理部ex1001、與在其他習知規格特有的處理內容對應之專用的解碼處理部ex1002、及與在本發明一態樣的動畫像解碼方法與其他習知規格的動畫像解碼方法共通之處理內容對應之共用解碼處理部ex1003之構成。其中，專用的解碼處理部ex1001、ex1002係不一定是專用於本發明一態樣、或其他習知規格特有的處理內容，實行其他泛用處理亦可。又，以LSIex500安裝本實施形態之構成亦可。
如此一來，針對在本發明一態樣之動畫像解碼方法、及習知規格之動畫像解碼方法共通的處理內容，藉由使解 碼處理部共有，可以使LSI的電路規格變小，而且減低成本。
產業上的可利用性
本發明係可以適用於圖像編碼方法、圖像解碼方法、圖像編碼裝置及圖像解碼裝置，尤其是可以利用於進行算術編碼及算術解碼之圖像編碼方法、圖像解碼方法、圖像編碼裝置及圖像解碼裝置。
100‧‧‧圖像編碼裝置
101,201,ex310,ex501‧‧‧控制部
102‧‧‧差分部
103‧‧‧轉換及量化部
104‧‧‧可變長編碼部
105‧‧‧反量化及反轉換部
106、206‧‧‧加算部
107、207‧‧‧畫面內預測部
108、208‧‧‧畫面間預測部
109、209‧‧‧開關
121‧‧‧輸入圖像訊號
122、125、225‧‧‧殘差訊號
123、223‧‧‧量化轉換係數
124‧‧‧位元流
126‧‧‧回復圖像訊號
127、128、129、227、228‧‧‧預測圖像訊號
130、230‧‧‧控制參數
141‧‧‧二值化部
142、242‧‧‧上下文控制部
143‧‧‧二值算術編碼部
151、251‧‧‧二值配列
152、252‧‧‧上下文索引
200‧‧‧圖像解碼裝置
202‧‧‧可變長解碼部
204‧‧‧反量化部
205‧‧‧反轉換部
224‧‧‧直交轉換係數
226‧‧‧解碼圖像訊號
229‧‧‧圖像訊號
241‧‧‧多值化部
243‧‧‧二值算術解碼部
S101-S110,S201-S212,S301-S303,exS100-exS103,exS200-exS203‧‧‧步驟
301,301A,301B,301C‧‧‧區塊
ex100‧‧‧內容供給系統
ex101‧‧‧網際網路
ex102‧‧‧網際網路服務提供者
ex103‧‧‧串流伺服器
ex104‧‧‧電話網
ex106、ex107、ex108、ex109、ex110‧‧‧基地台
ex111‧‧‧電腦
ex112‧‧‧PDA(個人數位助理器)
ex113,ex116‧‧‧攝影機
ex114‧‧‧手機
ex115‧‧‧遊戲機
ex117‧‧‧麥克風
ex200‧‧‧數位廣播用系統
ex201‧‧‧廣播台
ex202‧‧‧衛星
ex203‧‧‧電線
ex204,ex205,ex350‧‧‧天線
ex210‧‧‧汽車
ex211‧‧‧汽車導航裝置
ex215、ex216‧‧‧記錄媒體
ex217‧‧‧機上盒(STB)
ex218‧‧‧讀取/記錄器
ex219‧‧‧螢幕
ex220‧‧‧遙控器
ex230‧‧‧資訊磁軌
ex231‧‧‧記錄區塊
ex232‧‧‧內周區域
ex233‧‧‧資料記錄區域
ex234‧‧‧外周區域
ex235‧‧‧視訊資料流
ex236,ex239,ex242,ex245‧‧‧PES封包列
ex237,ex240,ex243,ex246‧‧‧TS封包
ex238‧‧‧音訊資料流
ex241‧‧‧演示圖形資料流
ex244‧‧‧交互圖形資料流
ex247‧‧‧多工化資料
ex300‧‧‧電視機
ex301‧‧‧調諧器
ex302‧‧‧調變/解調部
ex303‧‧‧多工/分離部
ex304,ex354‧‧‧聲音訊號處理部
ex305,ex355‧‧‧影像訊號處理部
ex306‧‧‧訊號處理部
ex307‧‧‧揚聲器
ex308,ex358‧‧‧顯示部
ex309‧‧‧輸出部
ex311‧‧‧電源電路部
ex312‧‧‧操作輸入部
ex313‧‧‧橋接器
ex314,ex364‧‧‧插槽部
ex315‧‧‧驅動器
ex316‧‧‧數據機
ex317‧‧‧介面部
ex318、ex319、ex320、ex321‧‧‧緩衝器
ex351‧‧‧傳送/接收部
ex352‧‧‧調變/解調部
ex353‧‧‧多工/分離部
ex356‧‧‧聲音輸入部
ex357‧‧‧聲音輸出部
ex359‧‧‧LCD(液晶顯示器)控制部
ex360‧‧‧主控制部
ex361‧‧‧電源電路部
ex362‧‧‧操作輸入控制部
ex363‧‧‧攝影機介面部
ex365‧‧‧攝影機部
ex366‧‧‧鍵盤
ex367‧‧‧記憶體部
ex370‧‧‧匯流排
ex400‧‧‧資訊播放/記錄部
ex401‧‧‧光學頭
ex402‧‧‧調變記錄部
ex403‧‧‧播放解調部
ex404,ex508‧‧‧緩衝器
ex405‧‧‧碟片馬達
ex406‧‧‧伺服控制部
ex407‧‧‧系統控制部
ex500‧‧‧LSI
ex502‧‧‧CPU
ex503‧‧‧記憶體控制器
ex504‧‧‧資料流控制器
ex505‧‧‧電源電路
ex506‧‧‧資料流I/O
ex507‧‧‧訊號處理部
ex509‧‧‧AV I/O
ex510‧‧‧匯流排
ex511‧‧‧記憶體
ex512‧‧‧驅動頻率控制部
ex800‧‧‧構成
ex801,ex802,ex901,ex902,ex1001,ex1002,ex1003‧‧‧解碼處理部
ex803‧‧‧驅動頻率切換部
PG‧‧‧圖形資料流
IG‧‧‧音訊資料流
yy1、yy2、yy3、yy4‧‧‧箭頭方向
第1圖係為關於本發明之實施形態1之圖像編碼裝置的機能方塊圖。
第2圖係為關於本發明之實施形態1之可變長編碼部的機能方塊圖。
第3圖係為關於本發明之實施形態1之有關控制參數的上下文模型之表。
第4圖係為顯示關於本發明之實施形態1之算術編碼方法的流程圖。
第5圖係為關於本發明之實施形態2之圖像解碼裝置的機能方塊圖。
第6圖係為關於本發明之實施形態2之可變長解碼部的機能方塊圖。
第7圖係為顯示關於本發明之實施形態2之算術解碼方法的流程圖。
第8圖係為顯示關於本發明之實施形態2之算術解碼方法的變形例之流程圖。
第9圖係為顯示關於本發明之實施形態2之HEVC中的 分割方塊(樹構造)之圖面。
第10圖係為用以說明關於本發明之實施形態2之多階層方塊構造之圖面。
第11圖係為顯示關於本發明之實施形態3之split_coding_unit_flag的算術解碼方法之表。
第12A圖係為顯示關於本發明之實施形態3之對於split_coding_unit_flag的驗證結果之表。
第12B圖係為顯示關於本發明之實施形態3之對於split_coding_unit_flag的驗證結果之表。
第13圖係為顯示關於本發明之實施形態3之skip_flag的算術解碼方法之表。
第14A圖係為顯示關於本發明之實施形態3之對於skip_flag的驗證結果之表。
第14B圖係為顯示關於本發明之實施形態3之對於skip_flag的驗證結果之表。
第15A圖係為顯示關於本發明之實施形態3之intra_chroma_pred_mode的算術解碼方法之表。
第15B圖係為顯示因應關於本發明之實施形態3的intra_chroma_pred_mode之IntraPredModeC的決定方法之表。
第16A圖係為顯示關於本發明之實施形態3之對於intra_chroma_pred_mode的驗證結果之表。
第16B圖係為顯示關於本發明之實施形態3之對於intra_chroma_pred_mode的驗證結果之表。
第17圖係為用以說明關於本發明之實施形態之利用相 鄰2區塊的對應控制參數之值的上下文模型之圖面。
第18圖係為用以說明關於本發明之實施形態之利用上區塊的情況之記憶體使用量增加之圖面。
第19圖係為實現內容傳送服務之內容供給系統之整體構成圖。
第20圖係為數位播放用系統的整體構成圖。
第21圖係為顯示電視機的構成例之方塊圖。
第22圖係為顯示在光碟之記錄媒體進行資訊讀寫之資訊播放/記錄部的構成例之方塊圖。
第23圖係為顯示光碟之記錄媒體的構造例之圖面。
第24A圖係為顯示手機的一例之圖面。
第24B圖係為顯示手機的構成例之方塊圖。
第25圖係為顯示多工化資料的構成之圖。
第26圖係為示意地顯示各資料流是如何在多工化資料中進行多工化之圖面。
第27圖係為更詳細顯示視訊資料流是如何儲存在PES封包列的圖面。
第28圖係為顯示多工化資料中之TS封包與源包的構造之圖面。
第29圖係為顯示PMT的資料構成之圖面。
第30圖係為顯示多工化資料資訊的內部構成之圖面。
第31圖係為顯示資料流屬性資訊的內部構成之圖面。
第32圖係為辨識影像資料的步驟之圖面。
第33圖係為顯示實現各實施形態之動畫像編碼方法及 動畫像解碼方法之積體電路的構成例之方塊圖。
第34圖係為顯示切換驅動頻率的構成之圖面。
第35圖係為顯示辨識影像資料，並且切換驅動頻率之步驟的圖面。
第36圖係為顯示影像資料的規格與驅動頻率對應之查閱表的一例之圖面。
第37A圖係為顯示將訊號處理部之模組共有化之構成的一例之圖面。
第37B圖係為顯示將訊號處理部之模組共有化之構成的其他例之圖面。
S201-S212‧‧‧步驟

Claims (14)

  1. 一種圖像解碼方法，其係為使用算術解碼之圖像解碼方法，其特徵為包含；在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制步驟；使用已決定的前述上下文，將藉由控制參數進行算術編碼所得到之與前述處理對象區塊對應之位元列進行算術解碼，藉此回復二值配列之算術解碼步驟；及藉由將前述二值配列進行多值化而回復前述控制參數之多值化步驟，在前述上下文控制步驟中，判定前述處理對象區塊的控制參數之訊號類別，在前述訊號類別為第1類別的情況，使用與前述處理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別不同之第2類別的情況，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
  2. 如申請專利範圍第1項之圖像解碼方法，其中，前述第2條件係為前述上區塊及前述左區塊之已解碼完成的控制參數皆不利用之條件。
  3. 如申請專利範圍第2項之圖像解碼方法，其中，在前述上下文控制步驟中，在前述訊號類別為前述第2類別的情況下，作為前述第2條件，將預先決定的上下文決定為使用於前述對象區塊的算術解碼的上下文。
  4. 如申請專利範圍第1項之圖像解碼方法，其中，在前述上下文控制步驟中，進一步依據前述處理對象區塊的位置，判定可否在解碼時利用前述上區塊的控制參數，在不能利用前述上區塊之控制參數的情況下，使用前述第2條件來決定前述上下文。
  5. 如申請專利範圍第4項之圖像解碼方法，其中，在前述上下文控制步驟中，在前述處理對象區塊屬於切片界限的情況下，判定在解碼時不能利用前述上區塊之控制參數。
  6. 如申請專利範圍第4項之圖像解碼方法，其中，在前述上下文控制步驟中，因應前述處理對象區塊之控制參數所屬的資料單位之階層深度，判定可否在解碼時利用前述上區塊的控制參數。
  7. 如申請專利範圍第1項之圖像解碼方法，其中，前述第2類別係為具有預先決定的資料構造之控制參數。
  8. 如申請專利範圍第1項之圖像解碼方法，其中， 在前述上下文控制步驟中，進一步依據第1單位的控制參數之值，對於比前述第1單位更小的第2單位之控制參數，切換使用前述第1條件來決定前述上下文、或是使用前述第2條件來決定上下文。
  9. 如申請專利範圍第1項之圖像解碼方法，其中，前述“split_coding_unit_flag”係顯示前述處理對象區塊是否分割為複數個區塊，前述“skip_flag”係顯示是否略過前述處理對象區塊，前述“intra_chroma_pred_mode”係顯示前述處理對象區塊之色差樣本所用之畫面內預測模式。
  10. 如申請專利範圍第1項之圖像解碼方法，其中，前述圖像解碼方法係因應包含在編碼訊號之顯示第1規格或第2規格之識別碼，切換以前述第1規格為基準之解碼處理、及以前述第2規格為基準之解碼處理，在顯示前述ID為第1規格的情況下，作為以前述第1規格為基準之解碼處理，進行前述上下文控制步驟、前述算術解碼步驟、及前述多值化步驟。
  11. 一種圖像編碼方法，其係為使用算術編碼之圖像編碼方法，其特徵為包含：藉由將處理對象區塊的控制參數進行二值化而產生二值配列之二值化步驟；在複數個上下文之中，決定使用於前述處理對象區塊的上下文之上下文控制步驟；及藉由使用已決定的前述上下文，將前述二值配列進 行算術編碼而產生位元列之算術編碼步驟；在前述上下文控制步驟中，判定前述處理對象區塊的控制參數之訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰之左區塊及上區塊的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別不同之第2類別的情況下，使用不利用前述上區塊的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
  12. 一種圖像解碼裝置，其係為使用算術解碼之圖像解碼裝置，其特徵為包含；在複數個上下文之中，決定使用於處理對象區塊的上下文之上下文控制部；使用已決定的前述上下文，將藉由控制參數進行算術編碼所得到之與前述處理對象區塊對應之位元列進行算術解碼，藉此回復二值配列之算術解碼部；及藉由將前述二值配列進行多值化而回復前述控制參數之多值化部，前述上下文控制部，其係判定前述處理對象區塊的控制參數之訊號類別，在前述訊號類別為第1類別的情況，使用與前述處 理對象區塊相鄰的左區塊及上區塊之已解碼完成的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別不同之第2類別的情況，使用不利用前述上區塊之已解碼完成的控制參數之第2條件來決定前述上下文，前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
  13. 一種圖像編碼裝置，其係為使用算術編碼之圖像編碼裝置，其特徵為包含：藉由將處理對象區塊的控制參數進行二值化而產生二值配列之二值化部；在複數個上下文之中，決定使用於前述處理對象區塊的上下文之上下文控制部；及藉由使用已決定的前述上下文，將前述二值配列進行算術編碼而產生位元列之算術編碼部；前述上下文控制部，其係判定前述處理對象區塊的控制參數之訊號類別，在前述訊號類別為第1類別的情況下，使用與前述處理對象區塊相鄰之左區塊及上區塊的控制參數皆利用之第1條件來決定前述上下文，在前述訊號類別為與前述第1類別不同之第2類別的情況下，使用不利用前述上區塊的控制參數之第2條件來決定前述上下文， 前述第1類別為“split_coding_unit_flag”或“skip_flag”，前述第2類別為“intra_chroma_pred_mode”。
  14. 一種圖像編解碼裝置，其特徵為包含：申請專利範圍第12項記載之圖像解碼裝置；及申請專利範圍第13項記載之圖像編碼裝置。
TW101123229A 2011-06-29 2012-06-28 A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device TWI547146B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201161502394P 2011-06-29 2011-06-29

Publications (2)

Publication Number Publication Date
TW201320753A true TW201320753A (zh) 2013-05-16
TWI547146B TWI547146B (zh) 2016-08-21

Family

ID=47390666

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101123229A TWI547146B (zh) 2011-06-29 2012-06-28 A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device

Country Status (5)

Country Link
US (3) US9264727B2 (zh)
KR (1) KR102006032B1 (zh)
MX (1) MX2013010892A (zh)
TW (1) TWI547146B (zh)
WO (1) WO2013001767A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304357A (zh) * 2018-01-31 2018-07-20 北京大学 一种基于字体流形的中文字库自动生成方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
RU2602672C2 (ru) 2011-06-23 2016-11-20 Сан Пэтент Траст Способ декодирования изображения, способ кодирования изображения, устройство декодирования изображения, устройство кодирования изображения и устройство кодирования и декодирования изображения
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
EP3407610B1 (en) 2011-06-24 2019-09-04 Sun Patent Trust Coding method and coding apparatus
MY169636A (en) 2011-06-27 2019-04-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
BR122022013246B1 (pt) 2011-06-28 2022-11-16 Sun Patent Trust Aparelho de decodificação para decodificar um parâmetro de controle para controlar decodificação de uma imagem, e aparelho de codificação para codificar um parâmetro de controle para controlar codificação de uma imagem
WO2013001767A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
WO2013001769A1 (ja) 2011-06-30 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
MX339141B (es) 2011-06-30 2016-05-13 Panasonic Ip Corp America Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
JP6120490B2 (ja) * 2011-11-07 2017-04-26 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
KR20130058524A (ko) * 2011-11-25 2013-06-04 오수미 색차 인트라 예측 블록 생성 방법
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
CN107770542A (zh) * 2016-08-21 2018-03-06 上海天荷电子信息有限公司 采用编码参数基值的数据压缩方法和装置

Family Cites Families (127)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS53142227A (en) 1977-05-18 1978-12-11 Toshiba Shiyashin Youhin Kk Light control type electrooflashing device
JPS60125210A (ja) 1983-12-08 1985-07-04 Agency Of Ind Science & Technol ポリイミド膜の製膜改善方法
WO2003003745A1 (en) 2001-06-29 2003-01-09 Ntt Docomo, Inc. Image encoder, image decoder, image encoding method, and image decoding method
US7457359B2 (en) 2001-09-26 2008-11-25 Mabey Danny L Systems, devices and methods for securely distributing highly-compressed multimedia content
US7457358B2 (en) 2001-09-26 2008-11-25 Interact Devices, Inc. Polymorphic codec system and method
EP2148512A3 (en) 2001-11-06 2010-07-28 Panasonic Corporation Moving image coding method, and moving image decoding method
CN101448162B (zh) 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP2004088722A (ja) 2002-03-04 2004-03-18 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
KR100931750B1 (ko) 2002-04-19 2009-12-14 파나소닉 주식회사 움직임 벡터 계산방법
EP3324624B1 (en) 2002-04-19 2019-06-12 Panasonic Intellectual Property Corporation of America Motion vector calculating method
JP3807342B2 (ja) 2002-04-25 2006-08-09 三菱電機株式会社 デジタル信号符号化装置、デジタル信号復号装置、デジタル信号算術符号化方法、およびデジタル信号算術復号方法
JP2003319391A (ja) 2002-04-26 2003-11-07 Sony Corp 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム
KR100729270B1 (ko) 2002-05-02 2007-06-15 프라운호퍼-게젤샤프트 츄어 푀르더룽 데어 안게반텐 포르슝에.파우. 이미지 및/또는 비디오 인코더 및 디코더에서의변환계수를 인코딩하는 방법 및 장치, 및 이에 대응하는컴퓨터 프로그램 및 컴퓨터로 읽을 수 있는 저장매체
CN1666532A (zh) 2002-07-02 2005-09-07 松下电器产业株式会社 图像编码方法和图像解码方法
KR100976017B1 (ko) 2002-08-08 2010-08-17 파나소닉 주식회사 동화상의 부호화 방법 및 복호화 방법
US6795584B2 (en) 2002-10-03 2004-09-21 Nokia Corporation Context-based adaptive variable length coding for adaptive block transforms
WO2004082290A1 (ja) 2003-03-10 2004-09-23 Mitsubishi Denki Kabushiki Kaisha 映像信号符号化装置、および映像信号符号化方法
JP2004297768A (ja) 2003-03-10 2004-10-21 Mitsubishi Electric Corp 映像信号符号化装置、および映像信号符号化方法
WO2004086758A1 (ja) 2003-03-24 2004-10-07 Sony Corporation データ符号化装置およびデータ符号化方法、データ出力装置およびデータ出力方法、信号処理システム、信号処理装置および信号処理方法、並びにデータ復号化装置およびデータ復号化方法
US7630440B2 (en) 2003-05-28 2009-12-08 Broadcom Corporation Context adaptive binary arithmetic code decoding engine
US7426308B2 (en) 2003-07-18 2008-09-16 Microsoft Corporation Intraframe and interframe interlace coding and decoding
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7379608B2 (en) 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
TWI330976B (en) 2003-12-05 2010-09-21 Trident Microsystems Far East Method and apparatus for encoding/decoding dynamic graphic content
JP2005184042A (ja) 2003-12-15 2005-07-07 Sony Corp 画像復号装置及び画像復号方法並びに画像復号プログラム
EP1551185A1 (en) * 2004-01-05 2005-07-06 Thomson Licensing S.A. Encoding method, decoding method, and encoding apparatus for a digital picture sequence
KR100608050B1 (ko) 2004-01-14 2006-08-02 삼성전자주식회사 사용자의 요구에 의해 활성화되는 인터랙티브 그래픽스트림을 저장한 저장 매체, 재생 장치 및 그 재생 방법
US8190003B2 (en) 2004-01-14 2012-05-29 Samsung Electronics Co., Ltd. Storage medium storing interactive graphics stream activated in response to user's command, and reproducing apparatus for reproducing from the same
WO2005076614A1 (en) 2004-01-30 2005-08-18 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and moving picture decoding method
US7599435B2 (en) 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7469070B2 (en) 2004-02-09 2008-12-23 Lsi Corporation Method for selection of contexts for arithmetic coding of reference picture and motion vector residual bitstream syntax elements
JP4273996B2 (ja) 2004-02-23 2009-06-03 ソニー株式会社 画像符号化装置及び方法、並びに画像復号装置及び方法
EP1968063B1 (en) 2004-04-28 2010-06-16 Panasonic Corporation Moving picture stream generation apparatus, moving picture coding apparatus, moving picture multiplexing apparatus and moving picture decoding apparatus
CN100563342C (zh) 2004-06-25 2009-11-25 松下电器产业株式会社 图象编码方法和图象解码方法
JP4842265B2 (ja) 2004-07-14 2011-12-21 エージェンシー フォー サイエンス，テクノロジー アンド リサーチ 信号の状況（コンテキスト）ベース符号化及び復号化
JP4375305B2 (ja) 2004-10-26 2009-12-02 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
US20060120461A1 (en) 2004-12-06 2006-06-08 Roy Knight Two processor architecture supporting decoupling of outer loop and inner loop in video decoder
WO2006075901A1 (en) 2005-01-14 2006-07-20 Sungkyunkwan University Methods of and apparatuses for adaptive entropy encoding and adaptive entropy decoding for scalable video encoding
US8885707B2 (en) 2005-04-01 2014-11-11 Panasonic Corporation Image decoding apparatus and image decoding method
KR101158439B1 (ko) 2005-07-08 2012-07-13 엘지전자 주식회사 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는 방법
KR101154999B1 (ko) 2005-07-08 2012-07-09 엘지전자 주식회사 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는 방법
RU2371881C1 (ru) 2005-07-08 2009-10-27 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ моделирования информации кодирования видеосигнала для компрессии/декомпрессии информации
US8320453B2 (en) 2005-07-08 2012-11-27 Lg Electronics Inc. Method for modeling coding information of a video signal to compress/decompress the information
US20080137744A1 (en) 2005-07-22 2008-06-12 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US8509551B2 (en) 2005-07-22 2013-08-13 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recording with image encoding program and computer readable recording medium recorded with image decoding program
US20090123066A1 (en) 2005-07-22 2009-05-14 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein,
US20080123947A1 (en) 2005-07-22 2008-05-29 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein
US20080123977A1 (en) 2005-07-22 2008-05-29 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130990A1 (en) 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20090034857A1 (en) 2005-07-22 2009-02-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130988A1 (en) 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US8488889B2 (en) 2005-07-22 2013-07-16 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080130989A1 (en) 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US20080165849A1 (en) 2005-07-22 2008-07-10 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
EP1909508A4 (en) 2005-07-22 2011-05-25 Mitsubishi Electric Corp Image Coding Device, Image Decoding Device, Image Coding Method, Image Decoding Method, Image Coding Program, Image Decoding Program, Computer Readable Recording Medium With Image Recoding Program Recorded Thereon, and Computer Readable Recording Medium With Image Image Coding Program Recorded Thereon
CN100584025C (zh) 2005-08-04 2010-01-20 华为技术有限公司 一种基于内容自适应的算术解码系统及装置
US7595743B1 (en) 2005-10-26 2009-09-29 Lsi Corporation System and method for reducing storage requirements for content adaptive binary arithmetic coding
JP5089878B2 (ja) 2005-10-28 2012-12-05 パナソニック株式会社 画像符号化装置
CN100440979C (zh) 2005-12-15 2008-12-03 清华大学 基于上下文的自适应二维变长解码方法和装置
GB0600141D0 (en) 2006-01-05 2006-02-15 British Broadcasting Corp Scalable coding of video signals
KR101215615B1 (ko) 2006-01-10 2012-12-26 삼성전자주식회사 동일 채널 내에서 서로 다른 코덱을 이용하여 부호화된 비디오 및 오디오 데이터 스트림의 재생을 위한 코덱 변경 방법 및 장치
US7983343B2 (en) 2006-01-12 2011-07-19 Lsi Corporation Context adaptive binary arithmetic decoding for high definition video
US8446960B2 (en) 2006-01-13 2013-05-21 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Picture coding using adaptive color space transformation
US20070200949A1 (en) 2006-02-21 2007-08-30 Qualcomm Incorporated Rapid tuning in multimedia applications
KR100750165B1 (ko) * 2006-02-22 2007-08-17 삼성전자주식회사 압축률 향상을 위해 개선된 컨텍스트 모델 선택을 사용하는ｃａｂａｃ 부호화 방법 및 장치, 그리고 ｃａｂａｃ복호화 방법 및 장치
JP2007300517A (ja) 2006-05-02 2007-11-15 Sony Corp 動画像処理方法、動画像処理方法のプログラム、動画像処理方法のプログラムを記録した記録媒体及び動画像処理装置
US7656326B2 (en) 2006-06-08 2010-02-02 Via Technologies, Inc. Decoding of context adaptive binary arithmetic codes in computational core of programmable graphics processing unit
US7262722B1 (en) 2006-06-26 2007-08-28 Intel Corporation Hardware-based CABAC decoder with parallel binary arithmetic decoding
JP4787100B2 (ja) 2006-07-27 2011-10-05 パナソニック株式会社 画像符号化装置
CN101553988B (zh) 2006-12-14 2012-10-17 日本电气株式会社 视频编码方法、视频编码装置
EP2105025B1 (en) * 2007-01-11 2021-04-07 InterDigital VC Holdings, Inc. Methods and apparatus for using syntax for the coded_block_flag syntax element and the coded_block_pattern syntax element for the cavlc 4:4:4 intra, high 4:4:4 intra, and high 4:4:4 predictive profiles in mpeg-4 avc high level coding
US8204129B2 (en) 2007-03-27 2012-06-19 Freescale Semiconductor, Inc. Simplified deblock filtering for reduced memory access and computational complexity
JP2008289125A (ja) 2007-04-20 2008-11-27 Panasonic Corp 算術復号化装置及びその方法
CN100531386C (zh) 2007-06-15 2009-08-19 上海富瀚微电子有限公司 一种上下文自适应二进制算术编码器及其方法
RU2339181C1 (ru) 2007-06-25 2008-11-20 Государственное образовательное учреждение высшего профессионального образования Академия Федеральной службы охраны Российской Федерации (Академия ФСО России) Способ передачи дополнительной информации при фрактальном кодировании изображений
US20090003449A1 (en) 2007-06-28 2009-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
US9237357B2 (en) 2007-09-02 2016-01-12 Lg Electronics Inc. Method and an apparatus for processing a video signal
TWI339074B (en) 2007-09-05 2011-03-11 Via Tech Inc Operating method and device of coded block flag parameter
US7777654B2 (en) 2007-10-16 2010-08-17 Industrial Technology Research Institute System and method for context-based adaptive binary arithematic encoding and decoding
CN101478672B (zh) 2008-01-04 2012-12-19 华为技术有限公司 视频编码、解码方法及装置和视频处理系统
US8542748B2 (en) 2008-03-28 2013-09-24 Sharp Laboratories Of America, Inc. Methods and systems for parallel video encoding and decoding
JP4962400B2 (ja) * 2008-04-30 2012-06-27 ソニー株式会社 算術復号装置
US7592937B1 (en) 2008-06-02 2009-09-22 Mediatek Inc. CABAC decoding unit and method
KR20090129926A (ko) * 2008-06-13 2009-12-17 삼성전자주식회사 영상 부호화 방법 및 그 장치, 영상 복호화 방법 및 그 장치
FR2932911A1 (fr) 2008-06-24 2009-12-25 France Telecom Procede et dispositif de remplissage des zones d'occultation d'une carte de profondeur ou de disparites estimee a partir d'au moins deux images.
CA2730383A1 (en) 2008-07-10 2010-01-14 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, and image decoding method
BRPI0917456B1 (pt) 2008-08-19 2020-09-15 Contentarmor Método para atendimento a fluxo de vídeo de codificação aritmética binária adaptativa com base em contexto (cabac)
US8634457B2 (en) 2008-09-26 2014-01-21 Qualcomm Incorporated Determining availability of video data units
US7932843B2 (en) 2008-10-17 2011-04-26 Texas Instruments Incorporated Parallel CABAC decoding for video decompression
EP2182732A1 (en) 2008-10-28 2010-05-05 Panasonic Corporation Switching between scans in image coding
WO2010125606A1 (en) 2009-04-29 2010-11-04 Aspa-Japan Co., Ltd. Method for image data compression and compression system of image data
CN102754442A (zh) * 2010-02-10 2012-10-24 Lg电子株式会社 处理视频信号的方法和装置
US9237355B2 (en) 2010-02-19 2016-01-12 Qualcomm Incorporated Adaptive motion resolution for video coding
CN102823248B (zh) 2010-04-08 2015-06-24 株式会社东芝 图像编码方法以及图像编码装置
CN102215396A (zh) * 2010-04-09 2011-10-12 华为技术有限公司 一种视频编解码方法和系统
US20110249754A1 (en) 2010-04-12 2011-10-13 Qualcomm Incorporated Variable length coding of coded block pattern (cbp) in video compression
US8942282B2 (en) 2010-04-12 2015-01-27 Qualcomm Incorporated Variable length coding of coded block pattern (CBP) in video compression
CN106231332B (zh) 2010-04-13 2020-04-14 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
KR102415787B1 (ko) 2010-05-04 2022-06-30 엘지전자 주식회사 비디오 신호의 처리 방법 및 장치
US20110310976A1 (en) * 2010-06-17 2011-12-22 Qualcomm Incorporated Joint Coding of Partition Information in Video Coding
EP2897365B1 (en) 2010-07-09 2017-02-01 Samsung Electronics Co., Ltd Apparatus for decoding video by using block merging
KR20120016980A (ko) 2010-08-17 2012-02-27 한국전자통신연구원 영상 부호화 방법 및 장치, 그리고 복호화 방법 및 장치
KR101583199B1 (ko) 2010-09-27 2016-01-07 엘지전자 주식회사 블록 분할 방법 및 복호화 장치
CN106878726B (zh) 2010-10-08 2020-01-17 Ge视频压缩有限责任公司 编码器和编码方法与解码器和解码方法
CN107071487B (zh) 2010-11-04 2020-09-15 Ge视频压缩有限责任公司 支持区块合并和跳过模式的图像编码
US9008181B2 (en) 2011-01-24 2015-04-14 Qualcomm Incorporated Single reference picture list utilization for interprediction video coding
KR102209693B1 (ko) 2011-02-09 2021-01-29 엘지전자 주식회사 영상 부호화 및 복호화 방법과 이를 이용한 장치
US20120224639A1 (en) 2011-03-03 2012-09-06 General Instrument Corporation Method for interpolating half pixels and quarter pixels
US9788019B2 (en) 2011-03-09 2017-10-10 Hfi Innovation Inc. Method and apparatus of transform unit partition with reduced complexity
EP4184918B1 (en) 2011-03-21 2024-02-07 LG Electronics Inc. Video decoding method, video encoding method, computer-readable digital storage medium and transmission method of data for a video
WO2012163199A1 (en) 2011-05-27 2012-12-06 Mediatek Inc. Method and apparatus for line buffer reduction for video processing
US8995523B2 (en) 2011-06-03 2015-03-31 Qualcomm Incorporated Memory efficient context modeling
CN106851319B (zh) 2011-06-10 2020-06-19 寰发股份有限公司 推导方法及推导装置
RU2602672C2 (ru) 2011-06-23 2016-11-20 Сан Пэтент Траст Способ декодирования изображения, способ кодирования изображения, устройство декодирования изображения, устройство кодирования изображения и устройство кодирования и декодирования изображения
EP3407610B1 (en) 2011-06-24 2019-09-04 Sun Patent Trust Coding method and coding apparatus
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
MY169636A (en) 2011-06-27 2019-04-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
BR122022013246B1 (pt) 2011-06-28 2022-11-16 Sun Patent Trust Aparelho de decodificação para decodificar um parâmetro de controle para controlar decodificação de uma imagem, e aparelho de codificação para codificar um parâmetro de controle para controlar codificação de uma imagem
WO2013001767A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
US20130003858A1 (en) 2011-06-30 2013-01-03 Vivienne Sze Simplified Context Selection For Entropy Coding of Transform Coefficient Syntax Elements
MX339141B (es) 2011-06-30 2016-05-13 Panasonic Ip Corp America Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
WO2013001769A1 (ja) 2011-06-30 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
CA2937885C (en) 2011-07-01 2018-01-30 Samsung Electronics Co., Ltd. Method and apparatus for entropy encoding using hierarchical data unit, and method and apparatus for decoding
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
US8804816B2 (en) 2011-08-30 2014-08-12 Microsoft Corporation Video encoding enhancements
US20130188741A1 (en) 2012-01-21 2013-07-25 General Instrument Corporation Devices and methods for sample adaptive offset coding and/or selection of band offset parameters
BR112014030935B1 (pt) 2012-06-11 2022-06-14 Samsung Electronics Co., Ltd Método de ajuste de deslocamento adaptativo de amostra (sao)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108304357A (zh) * 2018-01-31 2018-07-20 北京大学 一种基于字体流形的中文字库自动生成方法
CN108304357B (zh) * 2018-01-31 2020-09-08 北京大学 一种基于字体流形的中文字库自动生成方法

Also Published As

Publication number Publication date
US9264727B2 (en) 2016-02-16
KR102006032B1 (ko) 2019-07-31
US20190182510A1 (en) 2019-06-13
KR20140031202A (ko) 2014-03-12
US10652584B2 (en) 2020-05-12
MX2013010892A (es) 2013-12-06
TWI547146B (zh) 2016-08-21
US20130003836A1 (en) 2013-01-03
US10237579B2 (en) 2019-03-19
US20160112726A1 (en) 2016-04-21
WO2013001767A1 (ja) 2013-01-03

Similar Documents

Publication Publication Date Title
JP6712779B2 (ja) 復号方法、復号装置、符号化方法、符号化装置、符号化復号方法及び符号化復号装置
JP6650604B2 (ja) 復号方法及び復号装置
JP6660602B2 (ja) 復号方法及び復号装置
JP6685021B2 (ja) 符号化装置、符号化方法、符号化復号装置及び符号化復号方法
TWI564818B (zh) Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus (1)
TWI564819B (zh) Decoding method, encoding method, decoding apparatus, coding apparatus, and coding / decoding apparatus (3)
TWI547146B (zh) A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
TWI581615B (zh) A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
TWI587686B (zh) Decoding method, encoding method, decoding apparatus, coding apparatus, and encoding and decoding apparatus (2)