TWI556628B - Image decoding method and image decoding apparatus - Google Patents
Image decoding method and image decoding apparatus Download PDFInfo
- Publication number
- TWI556628B TWI556628B TW101121098A TW101121098A TWI556628B TW I556628 B TWI556628 B TW I556628B TW 101121098 A TW101121098 A TW 101121098A TW 101121098 A TW101121098 A TW 101121098A TW I556628 B TWI556628 B TW I556628B
- Authority
- TW
- Taiwan
- Prior art keywords
- prediction mode
- mode
- candidate
- plane prediction
- decoding
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
- H04N19/197—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本發明係有關於動態圖像之圖像解碼方法及圖像編碼方法等。特別係關於包含在產生預測像素中使用之面內(intra)預測模式編號之模式資訊的解碼方法以及編碼方法等。
在次世代圖像編碼標準規格之HEVC(High Efficiency Video Coding)規格中,為了提升編碼效率,乃進行了各式各樣之檢討(參考非專利文件1)。
編碼係有:圖框間編碼,係利用參考之前的圖框之像素資訊且產生預測圖像之圖框間預測來進行壓縮者;或面內編碼,係利用參考同畫面內之像素資訊且產生預測圖像之面內預測來進行壓縮者。
面內編碼中,為了區別產生面內預測像素之方向等,會準備對應進行編碼之編碼對象區塊之預定尺寸(例如log2TrafoSize之值或Prediction Unit之種類)的數量(intraPredModeNum)的模式。
例如,對於尺寸log2TrafoSize之值為3以上5以下之編碼對象區塊係檢討要準備34個(intraPredModeNum之值為34)模式(第15圖)。
該模式稱為面內預測模式(IntraPredMode)。面內預測
模式之值(面內預測模式編號)係代表預測之方向的值。面內預測模式有例如34個模式或17個模式。舉例言之,面內預測模式編號(或是標籤)「0」係垂直(方向)、面內預測模式編號「1」表示水平(方向)、面內預測模式編號「2」表示稱為DC模式預測之無方向,而面內預測模式編號為3以上之值(針對預定尺寸之區塊為3以上33以下之值)時,則表示已分別對應之預定角度的方向。
以下,說明書中將對應於編碼對象區塊之面內預測模式編號稱為「對象模式編號」。為了與該「對象模式編號」區別,將已利用預定之編碼方式將「對象模式編號」編碼之編碼列所顯示之值者稱為「編碼模式編號」。
解碼對象區塊(例如亮度區塊)之解碼中,係使用模式資訊,該資訊係「用以特定是否使用複數面內預測模式中的任一面內預測模式之資訊」。模式資訊係按照各預測單位(Prediction unit,以下稱為PU)來產生。
目前已檢討出模式資訊包含有以下3個資訊。
(I1)「預測模式使用旗標」(prev_intra_luma_pred_flag)係決定是否使用先前已解碼之鄰接PU之面內預測模式的值者。
(I2)「預測模式候補編號」(mpm_idx)索引係在有2以上之面內預測模式之候補時,顯示要使用哪個面內預測模式之候補的索引。例如,預設值中,將顯示面內預測模式之第1個候補之索引設為值「0」。
(I3)「編碼模式編號」(rem_intra_luma_pred_mode)係
在不使用先前已解碼之鄰接PU之面內預測模式編號時,已對應於「對象模式編號」之碼(值)。解碼過程中係(1)首先,從模式資訊包含之編碼列利用預定之可變長度解碼方式等(算術解碼方法等)抽出該「編碼模式編號」,(2)接著,使用已抽出之值來導出「對象模式編號」(前述0以上33以下之34個模式之任一者等)(或導出用以導出之資訊)。
【非專利文獻1】Joint Collaborative Team on Video Coding(JVC - VC) of ITU - T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 5th Meeting: Geneva, CH, - 6 - 23 - March, 2011 JCTVC - E603 Title: WD3: Working Draft 3 of High - Efficiency Video Coding ver.5
http://phenix.int-evry.fr/jct/doc_end_user/documents/5_Geneva/wg11/JCTVC-E603-v5.zip
然而,習知之面內編碼中係有模式資訊之壓縮效率不足之問題。
因此,本發明係為了解決上述習知之課題而成者,目的在於提供一種可提升模式資訊之壓縮效率的圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置。
為了解決上述課題,本發明之一態樣之圖像解碼方法,係依每一區塊解碼包含於編碼流之圖像資料者,其步驟係包含有:導出步驟,係導出面內預測模式之候補者,該面內預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得步驟,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定步驟,係根據已取得之前述索引,決定已導出之前述面內預測模式之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式。
為了解決上述課題,本發明之一態樣之圖像編碼方法,係依每一區塊編碼圖像資料來產生編碼流者,其步驟係包含有:導出步驟,係導出面內預測模式之候補者,該面內預測模式之候補係在與編碼對象區塊對應之解碼對象區塊之畫面內預測使用,且經常為2以上之數;決定步驟,係決定已導出之前述面內預測之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測所使用之前述面內預測模式;及附加步驟,係從已導出之前述面內預測之候補中,將用以特定已決定之前述1個候補的索引附加至前述編碼流。
為了解決上述課題,本發明之一態樣之圖像解碼裝置,係依每一區塊解碼包含於編碼流之圖像資料者,其係包含有:導出部,係導出面內預測模式之候補者,該面內
預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得部,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定部,係根據已取得之前述索引,決定已導出之前述面內預測模式之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式者。
為了解決上述課題,本發明之一態樣之圖像編碼裝置,係依每一區塊編碼圖像資料來產生編碼流者,其係包含有:導出部,係導出面內預測模式之候補者,該面內預測模式之候補係在與編碼對象區塊對應之解碼對象區塊之畫面內預測使用,且經常為2以上之數;決定部,係決定已導出之前述面內預測之候補中的1個候補,作為在前述編碼對象區塊之畫面內預測使用之前述面內預測模式者;及附加部,係從已導出之前述面內預測之候補中,將用以特定已決定之前述1個候補的索引附加至前述編碼流者。
為了解決上述課題,本發明之一態樣之圖像編碼解碼裝置,係包含有上述圖像解碼裝置與上述圖像編碼裝置。
而,該等整體或具體之態樣可使用系統、方法、積體電路、或電腦程式或記錄媒體來實現,亦可用系統、方法、積體電路、及電腦程式及記錄媒體之任意組合來實現。
根據本發明可維持編碼效率並實現處理量之削減。
第1圖係顯示實施形態1之圖像編碼裝置之構成例的方
塊圖。
第2圖係顯示實施形態1之圖像編碼方法中模式資訊之產生方法的流程圖。
第3圖係詳細說明第2圖之步驟S215的流程圖。
第4圖係顯示第1實施形態中預測模式決定方法的流程圖。
第5圖係說明一利用CABAC方式之編碼模式編號的編碼方法(步驟S217)之例的流程圖。
第6A圖係顯示習知之語法構成例的概念圖。
第6B圖係顯示實施形態1中語法構成例的概念圖。
第7圖係顯示第1實施形態中預測模式決定方法之變形例的流程圖。
第8圖係說明編碼模式編號之其他編碼方法(步驟S217)之例的流程圖。
第9A圖係顯示在編碼模式編號之其他編碼方法(步驟S217)中使用之編碼表之例的圖表。
第9B圖係顯示在編碼模式編號之其他編碼方法(步驟S217)中使用之編碼表之例的圖表。
第10圖係顯示第2實施形態中解碼裝置2之構成的方塊圖。
第11圖係顯示第2實施形態中解碼方法之流程圖。
第12A圖係顯示位元列為利用CABAC輸出者時之算術解碼處理之處理順序的流程圖。
第12B圖係顯示位元列為利用CAVLC輸出者時之算術
解碼處理之處理順序的流程圖。
第13圖係詳細說明步驟S1117之第1例的流程圖。
第14圖係詳細說明步驟S1115之流程圖。
第15圖係顯示解碼預測模式之一例的概念圖。
第16圖係實現內容傳送服務之內容供給系統之全體構成圖。
第17圖係數位廣播用系統之全體構成圖。
第18圖係顯示電視之構成例的方塊圖。
第19圖係顯示對光碟之記錄媒體進行資訊讀寫之資訊再生/記錄部之構成例的方塊圖。
第20圖係顯示光碟之記錄媒體之構造例的圖。
第21A圖係顯示行動電話之一例的圖。
第21B圖係顯示行動電話之構造例的圖。
第22圖係顯示多工資料之構成的圖。
第23圖係示意地顯示各串流在多工資料中如何多工的圖。
第24圖係更詳盡地顯示於PES封包列中如何儲存視訊流的圖。
第25圖係顯示多工資料中TS封包與來源封包之構造的圖。
第26圖係顯示PMT之資料構成的圖。
第27圖係顯示多工資料資訊之內部構成的圖。
第28圖係顯示串流屬性資訊之內部構成的圖。
第29圖係顯示辨識影像資料之步驟的圖。
第30圖係顯示積體電路之構成例的方塊圖,而該積體電路係實現各實施形態之動態圖像編碼方法及動態圖像解碼方法者。
第31圖係顯示切換驅動頻率之構成的圖。
第32圖係顯示識別影像資料之規格,且切換驅動頻率之步驟的圖。
第33圖係顯示查閱表之一例的圖,該查閱表係已將影像資料之規格及驅動頻率對應者。
第34A圖係顯示將訊號處理部之模組共有化之構成例的圖。
第34B圖係顯示將訊號處理部之模組共有化之其他構成例的圖。
為了解決上述課題,本發明之一態樣之圖像解碼方法,係依每一區塊解碼包含於編碼流之圖像資料者,其步驟係包含有:導出步驟,係導出面內預測模式之候補者,該面內預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得步驟,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定步驟,係根據已取得之前述索引,決定已導出之前述面內預測之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式。
在此,作為習知之模式資訊的構成,可考量以下三點。
(M1)使用面內預測模式之任一候補,且面內預測模式之候補數(NumMPMCand)為複數時,包含於模式資訊之資訊為(I1)「預測模式使用旗標」及(I2)「預測模式候補編號」。
(M2)使用面內預測模式之候補,且,面內預測模式之候補為1個時,包含於模式資訊之資訊僅為(I1)「預測模式使用旗標」。這是由於面內預測模式之候補為1個時,對象模式編號可以唯一方式特定,因此不必包含(I2)「預測模式候補編號」。以往,為了削減模式資訊之資訊量,當面內預測模式之候補為1個時,會構造成不含「預測模式候補編號」。
(M3)不使用面內預測模式之候補時,包含於模式資訊之資訊為(I1)「預測模式使用旗標」及(I3)已將對象模式編號編碼之「編碼模式編號」。而,「編碼模式編號」之資訊量與(I2)「預測模式候補編號」相比則非常多。
上述構成之圖像解碼方法中,由於經常導出2以上之數的候補,因此利用面內預測模式之候補的PU之比例變得很高。即,由於資訊量較少之模式資訊(M2)的比例增加,資訊量多之模式資訊(M3)的比例減少,因此可減低資訊量。而,由於相當於習知之模式資訊(M1)時也需要與模式資訊(M2)相同之資訊量,因此相當於習知之模式資訊(M1)時資訊量會增大。但,由於(I2)「預測模式候補編號」之資訊量與(I3)「編碼模式編號」之資訊量相比則非常少,因此
圖框全體或編碼對象區塊全體中,資訊之削減量會超過增大量,而可謀求模式資訊之資訊量削減。
又,例如,前述2以上之數宜為已固定之數。
根據上述構成之圖像解碼方法,由於將導出之面內預測模式之候補數固定在2以上之數,因此使用面內預測模式之候補時,不必進行判定面內預測模式之候補數的處理。
判定面內預測模式之候補數的處理係例如第6A圖之條件式901「if(NumMPMCand>1)」所示之判定面內預測模式之候補數是否為1個之處理。該處理中,必須有例如求取參考之複數PU的面內預測模式編號,並求取複數PU中之面內預測模式編號是否一致的處理。
在此,導出參考之複數PU的面內預測模式編號的處理,與求取在解碼對象區塊中使用之面內預測模式的處理,係為了高速化,會有平行演算之情況。以往,(I1)「預測模式使用旗標」在顯示使用面內預測模式之候補時,為了判定編碼流中是否包含索引,由於必須得到導出參考之複數PU的面內預測模式編號的處理結果,因此直到該處理結果出現前,將無法進展求取在解碼對象區塊使用之面內預測模式的處理,而無法充分高速化。
另一方面,上述構成之圖像解碼方法中,由於產生經常2以上之固定數的面內預測模式之候補,因此不必有判定面內預測模式之候補數之處理,而可不必依賴預測模式數(候補數),在解碼側將參數解碼。藉此,可不用等待導出參考之複數PU的面內預測模式編號的處理結果,而進展求取在
解碼對象區塊使用之面內預測模式的處理。藉此,可謀求實行上述圖像解碼方法之裝置的高速化。
又,例如,前述導出步驟係可構造成包含有:第1導出步驟,係從已在鄰接前述解碼對象區塊之各鄰接區塊之畫面內預測中所使用之面內預測模式,導出前述面內預測模式之第1候補;判定步驟,係判定已導出之前述第1候補之數是否小於前述2以上之數;及第2導出步驟,係在已判定前述第1候補之數小於前述2以上之數時,更導出前述面內預測模式之第2候補。
又,例如,前述第1導出步驟中,取得在畫面內預測模式所使用之前述鄰接區塊之數可為與前述2以上之數相同之數。
又,例如,前述第2導出步驟中,可構造成導出前述第2候補而使前述第1候補之數與前述第2候補之數的合計經常為前述2以上之數。
又,例如,前述第2導出步驟中,可構造成將與已在鄰接前述解碼對象區塊之各鄰接區塊之畫面內預測中所使用之面內預測模式相異之面內預測模式,作為前述第2候補來導出。
又,例如,前述第2導出步驟中,可構造成顯示使用前述解碼對象區塊之像素值平均值來預測之面內預測模式、顯示平面預測之面內預測模式、與顯示縱方向預測之面內預測模式當中的至少任一者,作為前述第2候補來導出。
又,例如,前述編碼流可構造成包含顯示是否使用面內
預測模式之候補的旗標,在前述旗標顯示使用面內預測模式之候補時,於前述取得步驟取得前述索引,且於前述決定步驟,決定前述1個候補作為在前述解碼對象區塊之畫面內預測使用之面內預測模式;而在前述旗標顯示不使用面內預測模式之候補時,於前述取得步驟,從前述編碼流取得模式編號,該模式編號顯示在前述解碼對象區塊之畫面內預測使用之面內預測模式,且於前述決定步驟,根據已取得之前述模式編號,決定在前述解碼對象區塊之畫面內預測使用之前述面內預測模式。
又,例如,前述導出步驟,可構造成當有與前述解碼對象區塊鄰接之鄰接區塊時,將已在前述鄰接區塊之畫面內預測中所使用之面內預測模式以外的面內預測模式,作為前述面內預測模式之候補來導出;而當無與前述解碼對象區塊鄰接之鄰接區塊時,則根據預定之條件來導出前述面內預測模式之候補。
又,例如,前述導出步驟中,可進而使用前述面內預測模式之候補來製作候補列表,且前述索引係用以識別包含於前述候補列表之前述面內預測模式之候補的編號。
為了解決上述問題,本發明之一態樣之圖像編碼方法,係藉由依每一區塊編碼圖像資料來產生編碼流者,其步驟係包含有:導出步驟,係導出面內預測模式之候補者,該面內預測模式之候補係在與編碼對象區塊對應之解碼對象區塊之畫面內預測使用,且經常為2以上之數;決定步驟,係決定已導出之前述面內預測之候補中的1個候補,作為在
前述解碼對象區塊之畫面內預測所使用之前述面內預測模式;及附加步驟,係從已導出之前述面內預測之候補中,將用以特定已決定之前述1個候補的索引附加至前述編碼流。
又,例如,前述2以上之數為已固定之數。
又,例如,前述決定步驟中,可構造成從已導出之前述面內預測之候補中,決定與已在前述編碼對象區塊之畫面內預測中所使用面內預測模式一致之候補,來作為前述1個候補。
為了解決上述問題,本發明之一態樣之圖像解碼裝置,係依每一區塊解碼包含於編碼流之圖像資料者,其係包含有:導出部,係導出面內預測模式之候補者,該面內預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得部,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定部,係根據已取得之前述索引,決定已導出之前述面內預測之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式者。
為了解決上述問題,本發明之一態樣之圖像編碼裝置,係藉由依每一區塊編碼圖像資料來產生編碼流者,其係包含有:導出部,係導出面內預測模式之候補者,該面內預測模式之候補係在與編碼對象區塊對應之解碼對象區塊之畫面內預測使用,且經常為2以上之數;決定部,係決定已導出之前述面內預測之候補中的1個候補,作為在前述編碼
對象區塊之畫面內預測使用之前述面內預測模式者;及附加部,係從已導出之前述面內預測之候補中,將用以特定已決定之前述1個候補的索引附加至前述編碼流者。
為了解決上述問題,本發明之一態樣之圖像編碼解碼裝置,係包含有上述圖像解碼裝置與上述圖像編碼裝置。
又,構成上述圖像編碼裝置與圖像解碼裝置之構成要素的一部分或全體係可由1個系統LSI(Large Scale Intergration:大型積體電路)構成。系統LSI係將複數之構成部集積在1個晶片上來製造之超多功能LSI,具體而言,係構造成包含微處理器、ROM及RAM(Random Access Memory)等之電腦系統。
以下,一面參考圖式一面說明本發明之實施形態。而,以下說明之實施形態,任一者均顯示本發明所期望之一具體例。以下實施形態所示之構成要素、構成要素之配置位置、及連接形態、處理、處理之順序等僅為一例,主旨不在侷限本發明。又,以下實施形態之構成要素中,關於顯示本發明之最上位概念的獨立項所未記載之構成要素,係可作為構成更佳形態之任意構成要素來說明。
(實施形態1)
針對本發明之實施形態1之圖像編碼方法,以及實行該圖像編碼方法之圖像編碼裝置,依據第1圖~第6B圖來說明。
圖像編碼裝置係依各PU具有產生模式資訊之功能,而該模式資訊係顯示在面內預測中所使用之面內預測模式。而,本實施形態中,為了說明,以面內預測模式之候補數
預先固定為2(將經常為2以上之固定數的面內預測模式之候補導出)之情況為例來說明。而,即使在固定為3以上時,或用2以上之數構造成可變動時,亦可用同樣之方法來實現。
[1-1.圖像編碼裝置之構成]
本實施形態之圖像編碼裝置之構成,依據第1圖來說明。第1圖係顯示圖像編碼裝置100之構成的方塊圖。
圖像編碼裝置100係當圖像訊號一被輸入後,就對圖像訊號進行編碼,並將從後述之可變長度編碼部120輸出之位元流(bitStr)輸出至圖像解碼裝置(第1圖中不圖示)者。
如第1圖所示,圖像編碼裝置100包含有:差分部101,係輸出圖像訊號顯示之圖像與預測圖像之差分圖像者;轉換部102,係對差分圖像進行DCT轉換(Discrete Cosine Transform:離散餘弦轉換)等者;量化部103,係對已被DCT轉換之差分圖像進行量化者;反量化部104,係進行反量化者;逆轉換部105,係進行逆DCT轉換等者;加法部106,係將前次之預測圖像與來自逆轉換部105之已復原差分圖像加以合成來輸出前次之圖像者;畫面間預測部107,係利用圖框間預測產生預測圖像者;畫面內預測部108,係利用面內預測產生預測圖像者;切換部109,係將來自畫面間預測部107之預測圖像與來自畫面內預測部108之預測圖像選擇性地輸出者;編碼控制部110,係控制圖像編碼裝置100之各功能者;及可變長度編碼部120,係將來自量化部103之資料進行可變長度編碼者。
編碼控制部110係保持「對象模式編號」與「可變長度編碼方式」,該「對象模式編號」與「可變長度編碼方式」係藉由預定之評價基準決定而應適用於編碼對象區塊(PU、或包含於PU之區塊等,以下相同)者。而評價基準係例如決定成可使利用滿足預定之預測精度的條件輸出之編碼列的位元數削減。
畫面內預測部108係依照編碼控制部110指定之「對象模式編號」,對現在之編碼對象區塊,利用存在於對象模式編號顯示之面內預測模式指定之方向的預測像素,來預測現在編碼對象區塊之像素值。又,編碼「對象模式編號」來產生「編碼模式編號」。
可變長度編碼部120係將畫面內預測部108中所產生之「編碼模式編號」依照編碼控制部110指定的可變長度編碼方式」,進行算術編碼等熵編碼,輸出位元流(bitStr)。
[1-2.圖像編碼方法之處理順序]
針對本實施形態之圖像編碼方法之處理順序,依據第2圖來說明。第2圖係顯示利用第1圖之圖像編碼裝置實行之模式資訊之產生方法的流程圖。
首先,編碼控制部110取得關於產生模式資訊之編碼對象區塊的「對象模式編號」(步驟S201)。
接著,編碼控制部110求取關於編碼對象區塊之面內預測模式之候補,藉此取得「預測模式排列」(candModeList)(步驟S203)。本實施形態中,由於面內預測模式之候補數固定為2,因此預測模式排列之要素數為2。
面內預測模式之候補數固定為3以上時,則預測模式排列之要素數設定為面內預測模式之候補數。而,面內預測模式之候補數設定為可變時,則預測模式排列之要素數設定為面內預測模式之候補數之最大值。
該預測模式排列係將後述之「預測模式候補編號」設為預測模式排列之要素的索引值(0開始)者。針對該步驟中面內預測模式之候補之導出方法的細節,將使用第4圖而於後述。
接著,判定對象模式編號是否與預測模式排列之任一要素值一致(步驟S205)。
在步驟S205之判定結果顯示為「對象模式編號與預測模式排列之任一要素值一致」時(步驟S205之結果為YES),編碼控制部110將預測模式使用旗標之值決定為「1」(步驟S207)。
為了從已在步驟S203取得之面內預測模式的候補中,特定是否已使用任一預測模式,編碼控制部110係利用已指定之方式將預測模式編號(預測模式排列之索引值)進行可變長度編碼(步驟S209)。
在步驟S205之判定結果顯示為「對象模式編號與預測模式排列之任一要素值不一致」時(步驟S205之結果為NO),編碼控制部110係將「預測模式使用旗標」之值決定為「0」(步驟S213)。
接著,編碼控制部110根據對象模式編號與面內預測模式之候補數來產生「編碼模式編號」(rem_intra_luma_pred_mode之值)(步驟S215)。該步驟係根據對象編號,即使為相同對象模式編號,亦對應面內預測模式之候補數來產生不同之編碼模式編號者。針對該步驟將使用第3圖而於後述。
最後,編碼控制部110利用已指定之可變長度編碼方法將編碼模式編號來編碼(步驟S217)。針對該步驟將使用第5圖(CABAC方式)、第8圖(CAVLC方式)而於後述。
[1-2-1.編碼模式編號之產生的一例]
針對產生步驟S215之編碼模式編號之步驟之一例進行說明。第3圖係顯示產生步驟S215編碼模式編號之步驟的處理順序之一例的流程圖。而,編碼模式編號亦可用其他方法產生。
首先,編碼控制部110取得面內預測模式之總數(面內預測模式之種類數,本實施形態中為34),與面內預測模式之候補數(步驟S301)。在本實施形態中,如上所述,面內預測模式之候補數為2之固定數。
且,編碼控制部110係將步驟S302到步驟S307所示之迴路的處理重覆一由面內預測模式之候補數指定之次數。本實施形態中,由於面內預測模式之候補數為2,因此索引(i)之值為1與0共2次,來實行步驟S303(以及與S303之判定對應,步驟S305)。而,預測模式之候補數為N時,則實行步驟S303(以及與S303之判定對應,步驟S305)N次。
在步驟S302中,將i設定為0。
在步驟S303中,判定現時間點之對象模式編號值是否比由索引(i)所指定之預測模式排列的要素值要大。判定之結果在顯示現時間點之對象模式編號值比預測模式排列之要素值要大時,則將現時間點之對象模式編號值遞減1(步驟S305)。
將此重覆前述面內預測模式之候補數之值的次數,最後將已反映步驟S305遞減等之結果後之現在的對象模式編號決定為「編碼模式編號」(步驟S309)。
該步驟S215之處理係等同於從例如可取得任一面內預測模式之總數0..33之34個值的「對象模式編號」之值,對應地決定「編碼模式編號」。
第1表係顯示在「預測模式之候補數」為2(存在索引0與1)時,(a)對象模式編號與(b)「編碼模式編號」之對應之表。(c)係顯示i=0時之步驟S305的處理(來自現在之對象模式編號的變更值),又(d)係顯示i=1時之步驟S305的處理(來自現在之對象模式編號的變更值)。且第1表中,candModeList[0]係顯示預測模式排列之第1個要素,candModeList[1]係顯示預測模式排列之第2個要素。
從第1表,編碼模式編號可對應對象模式編號之值而導出如下。
(1)當0≦對象模式編號<預測模式排列之第1個要素值(0≦對象模式編號<candModeList[0])時,對象模式編號與編碼模式編號一致。
(2)當預測模式排列之第1個要素值<對象模式編號<預測模式排列之第2個要素值(candModeList[0]<對象模式編號<candModeList[1])時,編碼模式編號為比對象模式編號少1之數。
(3)當預測模式排列之第2個要素值<對象模式編號(candModeList[1]<對象模式編號)時,編碼模式編號為從對象模式編號要素數少2的數。
亦即是,預測模式排列存在k個要素時(面內預測模式之候補數為k個時),可由預測模式排列之值來排序,而藉由比較對象模式編號大於到預測模式排列之第幾個為止的值,可如下所示來一般化。
(k)預測模式排列之第k-1個要素值<對象模式編號<第k個要素值(candModeList[k-1]<對象模式編號<candModeList[k])時,編碼模式編號為比對象模式編號少k-1之數。
[1-2-2.預測模式排列之產生方法]
使用第4圖來說明決定「預測模式排列」(candModeList)之方法。第4圖係顯示第2圖所示之預測模式排列取得步驟(步驟S203)之詳細處理順序的流程圖。在此,針對面內預測模式之候補數固定為2時,決定編碼對象區塊之「預測模式排列」(candModeList)的情況來說明。
而,本實施形態中係使用已編碼完成之鄰接區塊之對象模式編號來作為「預測模式排列」(candModeList)之要素。當鄰接區塊之對象模式編號為一致時(一致之對象模式編號係設為1個面內預測模式之候補)等,在已編碼完成之鄰接區塊之對象模式編號數無法滿足預測模式排列之要素數時,則從DC預測模式或平面預測(面內平面:intra planar)、縱方向預測(面內角度:intra angular)等,非鄰接區塊之對象模式編號之其他面內預測模式來決定面內預測模式之候補。
編碼控制部110係對鄰接編碼對象區塊左側之已編碼完成的左側鄰接區塊之對象模式編號設定intraPredModeLeft(步驟S401)。
詳而言之,對intraPredModeLeft,例如,當左側鄰接區塊係用面內預測編碼時,設定該編碼(解碼)所使用之對象模式編號,而在用非面內預測之編碼方法編碼時(例如使用圖框間編碼來編碼時),則設定顯示DC預測模式(第4圖中標記為DC預測)之面內預測模式編號(例如「2」)。又,判定左側鄰接區塊不存在時(例如,片狀邊界,畫面端的情況等),
則對intraPredModeLeft設定Not Available。
同樣地,編碼控制部110係將鄰接編碼對象區塊上側之已編碼完成的上側鄰接區塊之對象模式編號設定為intraPredModeAbove(步驟S402)。而intraPredModeAbove之設定方法,係除了區塊位置以外,與對左側鄰接區塊之處理(步驟S401)相同。
當編碼控制部110一設定intraPredModeLeft以及intraPredModeAbove時,就判斷左側鄰接區塊及上側鄰接區塊之對象模式編號是否存在(intraPredModeLeft以及intraPredModeAbove兩方為Not Available)(步驟S403)。
在此,步驟S403為YES時(左側鄰接區塊與上側鄰接區塊均不存在時),編碼控制部110係對作為編碼對象區塊之「預測模式排列」(candModeList)之第1個要素的列表0(candModeList[0])設定面內預測模式編號”0”,而對作為第2個要素的列表1(candModeList[1])則設定顯示DC預測模式之面內預測模式編號(例如「2」)(步驟S404)。
另一方面,步驟S403為NO時,編碼控制部110判斷是否無intraPredModeLeft以及intraPredModeAbove之一方,或intraPredModeLeft以及intraPredModeAbove是否一致(步驟S405)。
步驟S405為NO時(左側鄰接區塊與上側鄰接區塊之兩方之對象模式編號都存在,且,兩方之對象模式編號不一致時),編碼控制部110對作為編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0]),設定左側
鄰接區塊與上側鄰接區塊中較小一方之對象模式編號。再者,對列表1(candModeList[1])設定左側鄰接區塊與上側鄰接區塊中較大一方之對象模式編號(步驟S406)。
另一方面,步驟S405為YES時(只存在左側鄰接區塊與上側鄰接區塊中某一方的對象模式編號時,或左側鄰接區塊之對象模式編號與上側鄰接區塊之對象模式編號一致時),編碼控制部110判定一致或存在之對象模式編號(以下稱為「鄰接模式編號」)是否為顯示DC預測模式之面內預測模式編號(例如”2”)(步驟S407)。
步驟S407為YES時(鄰接模式編號為顯示DC預測模式之面內預測模式編號時),編碼控制部110對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定鄰接模式編號(一致或存在之對象模式編號)及顯示DC預測模式之面內預測模式編號中較小一方之面內預測模式編號。再者,編碼控制部110對列表1(candModeList[1])設定鄰接模式編號(一致或存在之對象模式編號)及顯示DC預測模式之面內預測模式編號中較大一方之面內預測模式編號(步驟S408)。
另一方面,步驟S407為NO時(鄰接模式編號非顯示DC預測模式之面內預測模式編號(例如”2”)時),編碼控制部110係判定鄰接模式編號是否為”0”(步驟S409)。
步驟S409為NO時(鄰接模式編號非”0”時),編碼控制部110係對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定面內預測模式編號”0”,並
對列表1(candModeList[1])設定鄰接模式編號(步驟S410)。
另一方面,步驟S409為YES時(鄰接模式編號為”0”時),則對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定鄰接模式編號”0”,並對列表1(candModeList[1])設定面內預測模式編號”1”(步驟S411)。
在步驟S408~步驟S411,對預測模式配列之各要素優先配置DC預測模式之編號及面內預測模式編號”0”、”1”,藉此如前述第1表所示,可縮小編碼模式編號之大小,故,可提升編碼效率。
而,在此之優先例(DC預測模式之編號以及面內預測模式編號”0”、”1”)係一例,若使小編號之面內預測模式為優先,則即使降低DC預測模式之優先度仍可提升編碼效率。
[1-2-3.編碼模式編號之編碼]
根據第5圖來說明編碼步驟S217之編碼模式編號之步驟的一例,。在此之編碼係經指定之可變長度編碼,以下以CABAC之情況為例來說明。第5圖係顯示利用CABAC方式之編碼方法的流程圖。
例如,根據第3圖所示之方法,編碼控制部110取得編碼模式編號(步驟S701、步驟S215),且針對已取得之編碼模式編號,利用與面內預測模式之總數(最大模式數)對應之二值化方法來進行二值化處理(步驟S702)。此係意味著,例如當最大模式數根據面內預測模式之編碼單位而改變時(例如,編碼單位為4×4尺寸時為17模式,而8×8以上之尺寸時為34模式等),則進行與其長度對應之二值化處理。
編碼控制部110係對已將編碼模式編號二值化處理之訊號,進行二值算術編碼處理(步驟S703)。藉此,可將編碼模式編號記錄於串流。
使用第6A圖及第6B圖來說明顯示具體資料構造之語法例。第6A圖係顯示語法構成之例的概念圖,該語法係顯示一記錄了從非專利文獻1所擷取之對象模式編號之資料構造。又,第6B圖係顯示本實施形態之語法構成之例的概念圖。
在此,無特別說明之部分係如非專利文獻1所記載動作者。習知之語法構成中,首先會編碼預測模式使用旗標(prev_intra_luma_pred_flag)。
當預測模式使用旗標為1時,則判定面內預測模式之候補數(NumMPMCand)是否大於1(901),在面內預測模式之候補數(NumMPMCand)大於1時(為2以上)時,則進行預測模式候補編號(mpm_idx)之編碼。
另一方面,預測模式使用旗標為0時,則將編碼模式編號(rem_intra_luma_pred_mode)編碼。
本發明之構成中,由於將面內預測模式之候補數固定為至少2以上,因此變得不需要第6A圖之條件式901「if(NumMPMCand)>1」,而產生第6B圖所示之語法構造的位元流。即,預測模式使用旗標為1時,一定進行預測模式候補編號(mpm_idx)之編碼。藉此,可使條件分歧減少,產生可削減解碼時之處理量的位元流。而,以往,雖未圖示,但在第2圖之步驟S207之後,會進行判定左側鄰接區塊
之對象模式編號及上側鄰接區塊之對象模式編號是否一致的處理,一致時,則實行步驟S209。
(實施形態1之變形例)
(變形例1:預測模式決定方法之變形例)
而,第4圖中已說明之預測模式排列的決定方法亦可變形如下。
該變形例中,有別於鄰接區塊所使用之對象模式編號,對編碼對象區塊選出發生機率最高之面內預測模式編號作為最高頻率模式編號,且將該最高頻率模式編號取代在第4圖中舉出之”DC預測模式2”、”模式編號0”、”模式編號1”之任一者。
最高頻率模式編號之選出方法係,例如,亦可從第5圖之步驟S703算術編碼所用之上下文的狀態,選出變成最短碼長度之面內預測模式編號。又,例如,亦可由後述第8圖之步驟S502、步驟S503中使用之可變長度表,將分配至最短位元長度之面內預測模式編號作為最高頻率模式編號,亦可利用完全不同之最高頻率模式選出步驟(例如,從統計性地鄰接模式編號與累積性之對象模式編號之經過來導出的方法)來選出。藉此,在前者2個步驟中,藉由既有步驟之共用化,可一面控制處理量之增加,一面提升編碼效率,在最後之步驟中,雖然處理量有若干增加,但仍可期待提升大幅度之編碼效率。
使用第7圖說明使用該最高頻率模式編號來決定預測模式排列之方法。第7圖係顯示預測模式排列之決定步驟
(步驟S203)之處理順序之例的流程圖。而,第7圖所示之處理順序係第4圖之流程圖所示之處理順序的變形例,除了步驟S404(步驟S804)、步驟S409(步驟S809)、步驟S410(步驟S810)、步驟S411(步驟S811)以外之步驟(步驟S401~步驟S403、步驟S405~步驟S408)皆相同。因此,針對重覆步驟,省略適宜說明。
在此,針對面內預測模式之候補數固定為2時,決定編碼對象區塊的「預測模式排列」(candModeList)之情況來說明。
編碼控制部110對鄰接於編碼對象區塊左側之已編碼完成的左側鄰接區塊之對象模式編號設定intraPredModeLeft(步驟S401),而對鄰接於編碼對象區塊上側之上側鄰接區塊的對象模式編號設定intraPredModeAbove(步驟S402)。
當編碼控制部110一設定intraPredModeLeft以及intraPredModeAbove時,就判斷左側鄰接區塊及上側鄰接區塊之對象模式編號是否存在(intraPredModeLeft以及intraPredModeAbove兩方為Not Available)(步驟S403)。
在步驟S403為YES時(左側鄰接區塊與上側鄰接區塊均不存在時),編碼控制部110係對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0]),設定最高頻率模式編號及顯示DC預測模式編號之面內預測模式編號(例如”2”)中較小一方之面內預測模式編號。進而,對列表1(candModeList[1])設定最高頻率模式編號及顯示DC
預測模式之面內預測模式編號(例如”2”)中較大一方之面內預測模式編號。(步驟S804)。
另一方面,步驟S403為NO時,編碼控制部110判定無intraPredModeLeft以及intraPredModeAbove之一方,或intraPredModeLeft以及intraPredModeAbove是否一致(步驟S405)。
步驟S405為NO時(左側鄰接區塊與上側鄰接區塊兩方之對象模式編號都存在,且,兩方之對象模式編號不一致時),編碼控制部110係對編碼對象區塊之「預測模式排列」(candModeList)之第1個要素的列表0(candModeList[0]),設定左側鄰接區塊與上側鄰接區塊中較小一方之對象模式編號,而對列表1(candModeList[1])則設定左側鄰接區塊與上側鄰接區塊中較大一方之對象模式編號(步驟S406)。
另一方面,步驟S405為YES時(只存在左側鄰接區塊與上側鄰接區塊其中一方的對象模式編號時,或,左側鄰接區塊之對象模式編號與上側鄰接區塊之對象模式編號為一致時),編碼控制部110係判定一致或存在之對象模式編號(鄰接模式編號)是否為顯示DC預測模式之面內預測模式編號(例如”2”)(步驟S407)。
步驟S407為YES時(鄰接模式編號為顯示DC預測模式之面內預測模式編號時),編碼控制部110係對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定鄰接模式編號(一致或是存在之對象模式編號)及顯示DC預測模式之面內預測模式編號中較
小一方之面內預測模式編號。進而,編碼控制部110係對列表1(candModeList[1])設定鄰接模式編號(一致或是存在之對象模式編號)及顯示DC預測模式之面內預測模式編號中較大一方之面內預測模式編號。(步驟S408)
另一方面,步驟S407為NO時(鄰接模式編號非顯示DC預測模式之面內預測模式編號(例如”2”)時),編碼控制部110係判定鄰接模式編號是否為最高頻率模式編號(步驟S809)。
步驟S809為NO時(鄰接模式編號非最高頻率模式編號時),編碼控制部110係對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定最高頻率模式編號及鄰接模式編號中較小一方之面內預測模式編號,而對列表1(candModeList[1])則設定最高頻率模式編號及鄰接模式編號中較大一方之面內預測模式編號(步驟S810)。
另一方面,步驟S809為YES時(鄰接模式編號為最高頻率模式編號時),編碼控制部110對編碼對象區塊之「預測模式排列」(candModeList)之列表0(candModeList[0])設定鄰接模式編號(=最高頻率模式編號)及顯示DC預測模式之面內預測模式編號中較小一方之面內預測模式編號,而對列表1(candModeList[1])則設定鄰接模式編號(=最高頻率模式編號)及顯示DC預測模式之面內預測模式編號中較大一方之編號(步驟S811)。
在步驟S809~步驟S811,如上所述,對預測模式排列之各要素優先配置最高頻率模式編號及DC預測模式,藉此可
提升對面內預測模式之適合率。又,如前述第1表所示,由於可縮小編碼模式編號之大小,因此可提升編碼效率。
而,在此之優先順位之例(DC預測模式編號、最高頻率模式編號、及面內預測模式編號”0”之優先順位)為一例,亦可根據統計性資訊,切換優先順位。又,面內預測模式編號”0”,係有例如,平面預測(面內平面:intra planar)或縱方向預測(面內角度:intra angular)等。
(變形例2:編碼模式編號之編碼的變形例)
而,編碼模式編號之編碼亦可不限於上述CABAC方式,而使用CAVLC方式。以下,針對利用CAVLC方式之編碼方法,使用第8圖、第9A圖、及第9B圖來說明。第8圖係顯示利用CAVLC方式之編碼方法的流程圖。第9A圖係顯示在最大模式數(面內預測模式之總數)為17時之編碼表之圖表。第9B圖係顯示在最大模式數為34編碼表之圖表。
編碼控制部110係例如,藉由第3圖所示之方法,取得編碼模式編號(步驟S501),且選擇與最大模式數對應之可變長度表(不圖示)(步驟S502)。此意味著例如,當最大模式數依照編碼單位之尺寸不同而改變時(例如,編碼單位為4×4尺寸時為17模式,而8×8以上之尺寸時為34模式等),則選擇與編碼單位之尺寸對應之可變長度表。
而,根據本實施形態,由於對編碼單位利用1種類之可變長度表即可,因此可削減編碼裝置所需要之記憶體數量。
編碼控制部110使用已選擇之可變長度表,從編碼模式編號導出編碼索引編號(步驟S503)。而,該可變長度表係利
用區塊單位或大區塊單位、片單位來更新,而使編碼模式編號之頻率愈高,則編碼索引愈小。因此,可進行後述可變長度編碼處理,使編碼索引編號愈小,則碼長度愈短。
最後,對已導出之編碼索引編號,使用預先決定好之編碼表來編碼(步驟S504)。
在此,如第2圖之說明,CAVLC方式中,係以預測模式使用旗標(步驟S207)之設定,與編碼模式編號之編碼(步驟S209)並非分開,而是包含預測模式使用旗標來將編碼模式編號編碼的情況為例來說明。
在第9A圖及第9B圖中,MPM1係顯示在預測模式使用旗標=1,預測候補編號0之情況,而該情況之碼為10。MPM2係顯示在預測模式使用旗標=1,預測候補編號0之情況,而該情況之碼為11。之後的左側之編號0~14(由於為面內預測模式之候補數=2時之例,因此與從17模式去除2模式之15模式對應),或是0~31(由於為面內預測模式之候補數=2時之例,因此與從34模式去除2模式之32模式對應)係顯示在(步驟S503)所導出之編碼模式編號,而右側之碼則顯示寫出到位元流之編碼列。
該方法係可用全部相同結構將模式資訊編碼,可削減必須之記憶體數。
而,與第2圖所示之流程相同地,亦可分別將預測模式使用旗標與編碼模式編號編碼。該情況下,只要將相當於MPM1之碼當作1,而預測模式使用旗標=1來處置,且預測模式編號係將1位元之索引編碼即可。
而,在CAVLC方式之編碼時,亦可參考在預測模式使用旗標(prev_intra_luma_pred_flag)、預測模式候補編號(mpm_idx)、及編碼模式編號(rem_intra_luma_pred_mode)已共有化之vlc表。
(實施形態2)
依據第10圖~第15圖來說明本發明之實施形態2之圖像解碼方法,及實行該圖像解碼方法之圖像解碼裝置。
本實施形態之圖像解碼方法係在算術解碼時,只使用已對解碼對象區塊之位元流算術解碼處理之結果來實施解碼。而,算術解碼處理中,由於要從1位元復原數位元之資訊量,因此緩衝量之確保及即時處理非常困難,但本實施形態之圖像解碼方法中,由於不利用其他解碼對象區塊之資訊,因此可削減演算處理所需要之內部記憶體量,可縮短處理時間。
[2-1.圖像複合裝置之構成]
依據第10圖來說明本實施形態之圖像解碼裝置之構成,係。第10圖係顯示圖像解碼裝置200之構成的方塊圖。
圖像解碼裝置200係當位元流(bitStr)一被輸入時,就輸出圖像訊號之裝置。本發明中,特別是輸入之位元流,係以利用實施形態1之圖像編碼方法所產生之位元流(bitStr)為例來說明。將寫入有第9A圖或第9B圖所示之編碼列之位元流,依照在資料構造之意義上第9A圖或第9B圖之從左至右之Prediction Unit Syntax的定義,實行右側之可變長度解碼處理(步驟S1117)、「編碼模式編號」
(rem_intra_luma_pred_mode)之取得(步驟S1115),來再生「對象模式編號」。
圖像解碼裝置200係包含有:可變長度解碼部220;反量化部201;反轉換部202;加法部203,係合成前次預測圖像與差分圖像者;畫面間預測部204,係利用圖框間預測產生預測圖像者;畫面內預測部205,藉由面內預測產生預測圖像者;切換部206,係選擇性地輸出來自畫面間預測部204之預測圖像與來自畫面內預測部205之預測圖像者;控制部210等。
可變長度解碼部220係與可變長度編碼部120進行相反之動作。即,當位元流一被輸入時,就根據面內預測模式之候補數(NumMPMCand)從位元流取得「編碼模式編號」等。進而,進行從「編碼模式編號」獲得「對象模式編號」之處理。
畫面內預測部205係與第1圖之畫面內預測部108之動作大致相同。依據已獲得之「對象模式編號」,對現在之解碼對象區塊,利用存在於與對象模式編號對應之面內預測模式之指定方向的預測像素,來預測現在解碼對象區塊之像素值。
控制部210係對可變長度解碼部220給予在取得對象模式編號上必要之資訊。本發明之解碼方法中,必要資訊只要是「用以從利用實施例1之編碼所輸出之位元流再生「對象模式編號」之資訊」即可。舉例而言,在可變長度解碼部220未保持時,給予針對解碼對象區塊之預測模式排列
(candModeList)(或該列表之初始值)。又,依照已與該現在解碼對象區塊對應之每一預定單位,給予熵解碼模式(CAVLC方式所輸出之位元列、或使用CABAC所輸出之位元列等)。
[2-2.圖像解碼方式之處理流程]
依據第11圖來說明本實施形態之圖像解碼方式之處理順序。第11圖係顯示第10圖之圖像解碼裝置所實行之「對象模式編號」(第15圖所示之34個面內預測模式)之解碼方法的流程圖。而,本實施形態中,各步驟係以用可變長度解碼部220來實行之情況為例來說明,但亦可用控制部210來實行等。
首先,從已用實施形態1之編碼方法編碼所得之位元流(bitStr)抽出與解碼對象區塊之模式資訊對應的部分。對應部分為位元列,而該位元列係將依照使用第6A圖及第6B圖說明之語法(Prediction unit syntax)而構造成之(1)「預測模式使用旗標」(prev_intra_luma_pred_flag)、(2)「預測模式候補編號」(mpm_idx)或(3)「編碼模式編號」(rem_intra_luma_pred_mode)加以熵編碼而得者。
可變長度解碼部220係當一取得位元列時,就依照第6A圖及第6B圖中已說明之語法來解碼,且取得「對象模式編號」(步驟S1103~步驟S1115)。
首先,可變長度解碼部220利用預定之熵解碼方法將「預測模式使用旗標」(prev_intra_luma_pred_flag)之值復原(步驟S1103)。以下,在無特別說明時,則以下說明及圖中之
語以及值的意思與針對實施形態1之編碼方法及第6A圖與第6B圖之語法的說明中所說明之意思相同。
可變長度解碼部220判定已解碼之預測模式使用旗標是否為1(步驟S1105)。
步驟S1105為YES時(「預測模式使用旗標」之值為1時),可變長度解碼部220將「預測模式候補編號」(mpm_idx)解碼(步驟S1109)。
詳言之,可變長度解碼部220產生預測模式排列(candModeList),且決定預測模式排列(candModeList)之要素編號(mpm_idx)的要素值(candModeList[mpm_idx])作為「對象模式編號」(步驟S1111)。而,在此之預測模式排列的產生方法可使用實施形態1之第4圖或第7圖中所說明之方法。預測模式排列之產生方法在編碼裝置與解碼裝置中係使用相同者。
步驟S1105為NO時(「預測模式使用旗標」之值非1時),可變長度解碼部220係將編碼模式編號熵解碼。詳言之,首先,根據面內預測模式之總數(最大模式數),從位元列取得編碼模式編號(步驟S1117)。該取得處理係與第2圖之步驟S217相反的處理。熵編碼方式係根據對應之位元列(1)是否為利用CABAC方式所輸出者(第5圖)、(2)是否為利用CAVLC所輸出者(第8圖),而進行不同處理。熵編碼方式之判定係例如,根據預定單位之熵編碼模式旗標所顯示之值來區別,而該預定單位係與解碼對象區塊所對應之預測單位(PU)對應者。而,該旗標亦可用上位之序列單位來指定。
首先,針對位元列為(1)利用CABAC輸出之情形,依據第12A圖來說明。第12A圖係顯示與第11圖之步驟S1117對應之算術解碼時之處理流程的流程圖。
首先,可變長度解碼部220將已取得之位元流加以算術解碼處理(步驟S1401、步驟S703之相反)。可變長度解碼部220對已利用算術解碼處理取得之二值資訊進行多值化處理,復原編碼模式編號(步驟S1402)。
接著,針對位元列為(2)顯示利用CAVLC輸出者之情形,使用第13圖來說明。第13圖係顯示位元列為(2)顯示利用CAVLC輸出者時,步驟S1117之「編碼模式編號」之取得方法的流程圖。
首先,可變長度解碼部220係使用對解碼對象區塊(PU)之「編碼模式編號」的解碼所必要之資訊(上下文),從位元列取得編碼索引編號(步驟S1201)。該解碼處理係對應於進行第8圖之步驟S504的編碼處理相反之處理。更具體而言,根據最大模式數(例如利用實施例1所說明之預測資訊的傳送單位,與17模式或34模式對應),來選擇第9A圖或第9B圖所示之可變長度編碼(可變長度解碼)表。從已選擇之可變長度編碼表之位元列,搜尋與已輸入之位元流(顯示於第9A圖或第9B圖右側之位元列)對應之位元列,來取得對應於該位元列之編碼索引編號(與顯示於第9A圖或第9B圖左側之編號對應)。
接著,可變長度解碼部220與前述相同地依照每一最大模式數選擇不同可變長度表(步驟S1202、與步驟S502相
同,不圖示),且使用已選擇之可變長度表,來導出對應於已取得之編碼索引編號的編碼模式編號(步驟S1203、步驟S503相反之處理)。而,該可變長度表係以區塊單位或大區塊單位、片單位來更新,而使編碼模式編號之頻率愈高,則編碼索引編號愈小。由於該更新係用編碼裝置側與解碼裝置側所預先決定之方法來更新,因此設計成與作為對象之編碼對象區塊對應之編碼、及對解碼對象區塊解碼所用之可變長度表相同。藉由該處理來復原編碼模式編號。
接著,從編碼模式編號復原對象模式編號(步驟S1115,與第2圖之步驟S215相反之處理)。第14圖係顯示從編碼模式編號復原對象模式編號之處理順序的流程圖。
如第14圖所示,可變長度解碼部220係從步驟S1117所取得之「編碼模式編號」取得「對象模式編號」。第14圖之各步驟係等於相反地實行第3圖之從「對象模式編號」獲得「編碼模式編號」的步驟。
首先,可變長度解碼部220係取得面內預測模式之候補數(NumMPMCand)(步驟S1301)。本實施形態中,與實施形態1相同地,面內預測模式之候補數為2之固定數。
接著,可變長度解碼部220係將從步驟S1302到步驟S1307中所示之迴路的處理,重覆一用面內預測模式之候補數(NumMPMCand)所指定之次數。本實施形態中,由於面內預測模式之候補數(NumMPMCand)為2,因此索引值為1與0共2次,來實行步驟S1303(以及步驟S1305)。而,預測模式之候補數為N時,則將步驟S1303(以及與步驟S1303之
判斷對應之步驟S1305)實行N次。
在步驟S1302中,將候補索引candIdx(與第14圖Index對應)設定為0。
在步驟S1303中,將現時間點之編碼模式編號與預測模式排列(CandModeList)之候補索引candIdx值所指定之要素值(CandModeList[candIdx]值)的大小加以比較。而,Index=0時,編碼模式編號會成為步驟S1117所取得之時間點的編碼模式編號。
步驟S1303為YES時(編碼模式編號≧CandModeList[candIdx]值時),將編碼模式編號遞增1(步驟S1305)。而,現時間點之編碼模式編號與預測模式排列CandModeList[candIdx]值為相同值時也遞增1。一面將候補索引編號candIdx遞增1,一面在直到所有候補索引之比較結束前,重覆步驟S1302到步驟S1307之迴路。
藉由該處理,根據面內預測模式之候補數,編碼模式編號會復原成對象模式編號。而,該對應於面內預測模式之候補數的「對象模式編號」之復原,係與由下行朝上行閱讀第1表者相同。
例如,面內預測模式之候補數(NumMPMCand之值)為2時,編碼模式編號與對象模式編號之對應係如第2表。該表之例中,利用將第1個(索引為0的)預測模式排列之要素值作為「i」,而第2個(索引為1的)預測模式排列之要素值作為「j」的情況來說明。
【第2表】
如此,依照本實施形態之解碼裝置及解碼方法,根據面內預測模式之候補數(或根據面內預測模式之候補數),在CAVLD方式中切換與CodeNum對應之「編碼模式編號」,且在CABAC方式中從2值排列切換「編碼模式編號」之對應方法(步驟S1117)。進而,對應面內預測模式之候補數來切換編碼模式編號與對象模式編號之對應(步驟S1115)。
利用上述構成,對應面內預測模式之候補數來切換對象模式編號之編碼,藉此可從提高編碼效率而產生之實施形態1的位元流,再現原本之「對象模式編號」。
如上所述,本發明之圖像解碼裝置及圖像解碼方法中,由於面內預測模式之候補數固定為2以上,因此算術解碼處理中,可在無判定是否面內預測模式之候補數為1之條件分歧的情況下處理。
而,第12B圖係顯示圖像解碼裝置內之算術解碼處理之處理順序例的概念圖。如前所述,由於算術解碼中針對取
得之位元長度解碼的訊號(解碼參數)之資訊量係算術性地決定,因此為不固定,為了實現實際時間處理,則需要高速演算。故,如第12B圖所示,解碼處理係藉由將取得之位元流預先決定之方法(CABAC或CAVLC)來算術解碼(步驟S1411),取得解碼參數(步驟S1412),而熵解碼步驟S1410,與依據解碼參數產生預測圖像且取得解碼圖像訊號之解碼處理步驟(步驟S1413)通常可作為其他步驟而分開平行演算。在此,算術解碼步驟S1411所必要之解碼資訊係利用來自步驟S1413之回饋取得。
此時,由於熵解碼步驟S1410必須等待解碼處理步驟S1413之處理結果而無法高速演算,因此減少該回饋對高速化係特別重要。
故,如第11圖所示,本實施形態之圖像解碼裝置中,由於預測模式使用旗標變為1時(熵解碼步驟所解碼之訊號)(步驟S1105為YES),必定會叫出預測模式候補編號之解碼步驟(步驟S1109),因此該期間不需等待解碼處理步驟(步驟S1413)之處理。
另一方面,在第6A圖所示之習知語法構成中,由於必須判定預測模式數(NumMPMCand),而該判定中如前述,必須利用上側鄰接區塊、左側鄰接區塊之對象模式編號,因此必須等待解碼處理步驟S1413之處理。故,根據本發明之構成,可實現解碼裝置之高速化。
(實施形態1以及實施形態2之變形例)
(1)而,針對第1圖之編碼控制部110、第10圖之控制部
210,雖只圖示了說明所必要之與處理部的輸出入,但亦可藉由未圖示之訊號線來進行各處理部中所必要之資訊輸出入。編碼控制部、或控制部可想做是進行各處理部之處理控制的控制器。
(2)又,雖針對以第15圖所示之33之方向與1個無方向之34個模式為例來說明34個對象模式編號之編碼,但即使模式之數係與第15圖所示程度(L0~L3)之深度對應而可變動,亦無損本發明之效果。
例如,面內預測模式之候補數為2之n平方+k個時,則編碼模式編號(rem_intra_luma_pred_mode)可用n位元、或n+1位元來表現。
藉由採用上述解碼裝置之構成,可正確地解碼第6A圖及第6B圖所示之語法構造。又,如第12B圖所示,由於在算術解碼時僅單純地實行解碼處理,不需如習知般為了判定面內預測模式之候補數為1的情況而取得、比較鄰接之對象模式編號,因此可記憶體量較小且高速正確地實行解碼處理。
(實施形態3)
將用以實現上述各實施形態所示之動態圖像編碼方法(圖像編碼方法)或動態圖像解碼方法(圖像解碼方法)之構成的程式記錄至記憶媒體,藉此可在獨立之電腦系統中簡單地實施上述各實施形態所示之處理。記憶媒體只要為磁碟片、光碟片、光磁碟片、IC卡、半導體記憶體等可記錄程式者即可。
進而在此說明上述各實施形態所示之動態圖像編碼方法(圖像編碼方法)或動態圖像解碼方法(圖像解碼方法)之應用例及使用其之系統。該系統之特徵在於具有由使用圖像編碼方法之圖像編碼裝置及使用圖像解碼方法之圖像解碼裝置所構成之圖像編碼解碼裝置。針對系統之其他構成,可視情況來適切地變更。
第16圖係顯示實現內容發送服務之內容供給系統ex100的全體構成圖。將通訊服務之提供區域分割成期望之大小,在各服務區內分別設置有固定無線台之基地台ex106、ex107、ex108、ex109、ex110。
該內容供給系統ex100係透過網路服務提供者ex102及電話網ex104、及基地台ex106到ex110,於網際網路ex101連接電腦ex111、PDA(Personal Digital Assistant)ex112、攝像機ex113、行動電話ex114、遊戲機ex115等各機器。
然而,內容供給系統ex100係不限於如第16圖之構成,亦可組合任一要素來連接。又,亦可不透過固定無線台之基地台ex106到ex110,各機器直接連接於電話網ex104。又,各機器亦可透過近距離無線等直接相互連接。
攝像機ex113係數位攝影機等之可拍攝動畫之機器,而攝像機ex116則係數位相機等之可拍攝靜止畫、動畫之機器。又,行動電話ex114為GSM(登錄商標)(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W-CDMA(Wideband-Code Division Multiple Access)方式、或是LTE(Long term Evolution)方
式、HSPA(High Speed Packet Access)之行動電話機,或PHS(Personal Handyphone System)等任一者皆可。
內容供給系統ex100中攝像機ex113等藉由透過基地台ex109、電話網ex104連接至串流伺服器ex103,而可實況發送。實況發送中,對於使用者以攝像機ex113攝影之內容(例如音樂實況之影像)進行如上述各實施形態所說明之編碼處理(即,作為本發明其中一態樣的圖像編碼裝置來作用),且傳送至串流伺服器ex103。另一方面,串流伺服器ex103係對有要求之用戶,串流發送已傳送之內容資料。用戶係有可將上述已編碼處理之資料解碼的:電腦ex111、PDAex112、攝像機ex113、行動電話ex114、遊戲機ex115等。收到所發送之資料之各機器會將收到之資料解碼處理並再生(即,作為本發明其中一態樣的圖像解碼裝置作用)。
而,攝影之資料的編碼處理可由攝像機ex113進行,亦可由做資料之傳送處理的串流伺服器ex103進行,亦可互相分擔進行。同樣地所發送之資料的解碼處理可由用戶進行,亦可由串流伺服器ex103進行,亦可互相分擔進行。又,不限於攝像機ex113,亦可將攝像機ex116所攝影之靜止圖像及/或動態圖像資料透過電腦ex111傳送至串流伺服器ex103。此時之編碼處理可由攝像機ex116、電腦ex111、串流伺服器ex103之任一者進行,亦可互相分擔進行。
又,該等編碼、解碼處理一般而言在電腦ex111或各機器所具有之LSIex500中處理。LSIex500係可構造成由單晶片或複數晶片組成。而,將動態圖像編碼、解碼用之軟體
裝入電腦ex111等可讀取之任一記錄媒體(CD-ROM、軟碟、硬碟等),且可使用該軟體進行編碼、解碼處理。進而,行動電話ex114附有攝像機時,亦可傳送用該攝像機取得之動畫資料。此時之動畫資料係利用行動電話ex114具有之LSIex500已編碼處理之資料。
又,串流伺服器ex103亦可為複數伺服器或複數電腦,將資料分散處理或記錄來發送。
如上所述,內容供給系統ex100中,用戶可將已編碼資料接收且再生。如此,內容供給系統ex100中,用戶可即時將使用者已傳送之資訊接收、解碼且再生,即使是無特別權利或設備之使用者亦可實現個人廣播。
而,如第17圖所示,不限於內容供給系統ex100之例,數位廣播用系統ex200亦可裝入上述各實施形態之至少動態圖像編碼裝置(圖像編碼裝置)或動態圖像解碼裝置(圖像解碼裝置)的任一者。具體而言,在廣播台ex201將影像資料中已多工音樂資料等之多工資料透過電波通訊,或是傳送至衛星ex202。該影像資料係藉由上述各實施形態所說明之動態圖像編碼方法所編碼之資料。(即,依據本發明其中一態樣之圖像編碼裝置所編碼之資料)。接收此之廣播衛星ex202發送廣播用之電波,而可接收衛星廣播之家庭天線ex204接收該電波。電視(接收機)ex300或機上盒(STB)ex217等裝置將接收之多工資料解碼且再生(即,作為本發明其中一態樣的圖像解碼裝置作用)。
又,讀取解碼記錄於DVD、BD等之記錄媒體ex215之
多工資料,或編碼影像訊號、進而依情況與音樂訊號多工且寫入記錄媒體ex215之讀取器/記錄器ex218亦可裝設上述各實施形態所示之動態圖像解碼裝置或動態圖像編碼裝置。此時,再生之影像訊號可顯示於螢幕ex219,且可利用記錄有多工資料之記錄媒體ex215在其他裝置或系統中再生影像訊號。又,亦可於連接於有線電視用之纜線ex203或衛星/地面電波廣播之天線ex204的機上盒ex217內裝設動態圖像解碼裝置,並將此用電視之螢幕ex219來顯示。此時亦可不將動態圖像解碼裝置裝入機上盒,而是裝入電視內。
第18圖係顯示使用上述各實施形態所說明之動態圖像解碼方法以及動態圖像編碼方法之電視(接收機)ex300的圖。電視ex300係具有:調諧器ex301,係透過接收上述廣播之天線ex204或纜線ex203等取得或輸出已於影像資料中多工聲音資料之多工資料者;調變/解調部ex302,係將已接收之多工資料解調,或調變為要傳送至外部之多工資料者;多工/解多工部ex303,係對已解調之多工資料解多工為影像資料及聲音資料,或將訊號處理部ex306所編碼之影像資料、聲音資料多工者。
又,電視ex300係具有:訊號處理部ex306,係具有將聲音資料、影像資料分別解碼、或將分別之資訊編碼的聲音訊號處理部ex304、影像訊號處理部ex305(作為本發明之一態樣的圖像編碼裝置或圖像解碼裝置作用)者;揚聲器ex307,係將已解碼之聲音訊號輸出者;輸出部ex309,係具有顯示已解碼之影像訊號之顯示器等之顯示部ex308
者。再者,電視ex300更包含具有接收使用者操作之輸入之操作輸入部ex312的介面部ex317。再者,電視ex300更具有:控制部ex310,係概括地控制各部者;電源電路部ex311,係供給電力至各部者。介面部ex317亦可除了操作輸入部ex312以外,具有:橋接器ex313,係可連接讀取器/記錄器ex218等外部機器者;插槽部ex314,係用以可裝設SD卡等記錄媒體ex216者;驅動器ex315,係用以連接硬碟等之外部記錄媒體者;數據機ex316,係與電話網連接者等。而記錄媒體ex216係可利用儲存之非依電性/依電性之半導體記憶體元件來電性記錄資訊。電視ex300之各部係透過同步匯流排來相互連接著。
首先,說明針對電視ex300將已利用天線ex204等從外部取得之多工資訊解碼且再生的構成。電視ex300係接收來自遙控器ex220等之使用者操作,根據具有CPU等之控制部ex310的控制,將已用調變/解調部ex302解調之多工資料用多工/解多工部ex303來解多工。再者,電視ex300係用聲音訊號處理部ex304將已解多工之聲音資料解碼,並利用影像訊號處理部ex305將已解多工之影像資料使用上述各實施形態所說明之解碼方法來解碼。已解碼之聲音訊號、影像訊號係分別從輸出部ex309朝外部輸出。輸出時可在緩衝器ex318、ex319等暫時儲存該等訊號而使聲音訊號、影像訊號同步且再生。又,電視ex300可不從廣播等,亦可從磁/光碟片、SD卡等記憶媒體ex215、ex216讀出多工資料。接著,說明電視ex300將聲音訊號或影像訊號編碼,傳送至外
部或寫入記錄媒體等之構成。電視ex300係接收來自遙控器ex220等之使用者操作,根據控制部ex310之控制,用聲音訊號處理部ex304將聲音訊號編碼,且用影像訊號處理部ex305將影像訊號使用上述各實施形態所說明之編碼方法來編碼。已編碼之聲音訊號、影像訊號利用多工/解多工部ex303來多工且輸出至外部。在多工時,可在緩衝器ex320、ex321等暫時儲存該等訊號而使聲音訊號、影像訊號同步。而,緩衝器ex318、ex319、ex320、ex321係可如圖示具有複數個,亦可構造成共有1個以上之緩衝器。再者,在圖示以外,例如調變/解調部ex302或多工/解多工部ex303之間等亦可於緩衝器儲存資料來作為避免系統之溢位、欠位的緩衝材料。
又,電視ex300係除了從廣播等或記錄媒體取得聲音資料、影像資料以外,亦可具有接受麥克風或攝像機等AV輸入之構成,對已從該等取得之資料進行編碼處理。而,在此雖已說明電視ex300係構造成可進行上述編碼處理、多工、及外部輸出,但亦可構造成無法進行該等處理,而只可進行上述接收、解碼處理、外部輸出。
又,在用讀取器/記錄器ex218從記錄媒體讀出多工資料、或寫入時,上述解碼處理或編碼處理係可由電視ex300與讀取器/記錄器ex218之任一者進行,亦可由電視ex300與讀取器/記錄器ex218相互分擔進行。
而作為一例,將從光碟讀入或寫入資料時之資訊再生/記錄部ex400的構成顯示於第19圖。資訊再生/記錄部ex400
係具有以下說明之要素:ex401、ex402、ex403、ex404、ex405、ex406、ex407。光學頭ex401係對為光碟之記錄媒體ex215之記錄面照射雷射光點來寫入資訊,而將來自記錄媒體ex215之記錄面的反射光檢出來讀取資訊。調變記錄部ex402係電性驅動光學頭ex401所內藏之半導體雷射,並根據記錄資料來進行雷射光之調變。再生解調部ex403,係將再生資訊放大,而該再生資訊係藉由光學頭ex401所內藏之光偵測器將來自記錄面之反射光電性檢出者,且將記錄媒體ex215所記錄之訊號成分解多工並解調,再生必要之資訊。緩衝器ex404係將用以記錄在記錄媒體ex215之資訊及從記錄媒體ex215再生之資訊暫時性地保持。碟片馬達ex405係使記錄媒體ex215旋轉。伺服控制部ex406係邊控制碟片馬達ex405之旋轉驅動,邊使光學頭ex401朝預定資訊軌移動,進行雷射光點之追蹤處理。系統控制部ex407係進行資訊再生/記錄部ex400全體的控制。上述讀出或寫入之處理,係系統控制部ex407利用緩衝器ex404所保持之各種資訊,或視需要進行新資訊之產生、追加,並邊使調變記錄部ex402、再生解調部ex403、伺服控制部ex406協調動作,邊透過光學頭ex401進行資訊之記錄再生而實現。系統控制部ex407例如由微處理器構成,利用實行讀出寫入之程式來實行該等處理。
以上雖已說明光學頭ex401照射雷射光點,但亦可構造成使用近場光線進行更高密度之記錄。
第20圖顯示光碟之記錄媒體ex215的示意圖。記錄媒體
ex215之記錄面形成有呈螺旋狀之導溝(groove),而資訊軌ex230係預先記錄有依據導溝形狀之變化來顯示碟片上絕對位置的位址資訊。該位址資訊係包含有用以特定記錄區塊ex231(記錄資料之單位)之位置的情報,可在進行記錄或再生之裝置中藉由將資訊軌ex230再生且讀取位址資訊來特定記錄區塊。又,記錄媒體ex215包含有資料記錄區域ex233、內周區域ex232、外周區域ex234。用於記錄使用者資料之區域係資料記錄區域ex233,而配置於資料記錄區域ex233內周或外周之內周區域ex232與外周區域ex234係使用於使用者資訊之記錄以外的特定用途。資訊再生/記錄部ex400係對上述記錄媒體ex215的資料記錄區域ex233,進行已編碼之聲音資料、影像資料、或已將該等資料多工之多工資料之讀寫。
以上雖以1層之DVD、BD等光碟為例來說明,但不限此,亦可為多層構造而表面以外亦可記錄之光碟。又,亦可為於碟片之相同處使用各種不同波長之顏色光來記錄資訊,或從各種角度記錄不同資訊之層等,進行多次元之記錄/再生之構造的光碟。
又,在數位再生用之系統ex200中,可利用具有天線ex205之車ex210從衛星ex202接收資料,而於車ex210所具有之車用導航ex211等顯示裝置再生動畫。而,車用導航ex211之構成可考慮於例如第18圖所示之構成中加上GPS接收部之構造,而同樣情況在電腦ex111或行動電話ex114等也可考慮。
第21A圖係顯示使用上述實施形態所說明之動態圖像解碼方法及動態圖像編碼方法之行動電話ex114的圖。行動電話ex114係具有:天線ex350,係用以傳送接收來自與基地台ex110之間的電波者;攝像機部ex365,係可拍攝影像、靜止畫面者;及,液晶顯示器等顯示部ex358,係顯示已將攝像機部ex365所拍攝之影像、天線ex350所接收之影像解碼之資料者。行動電話ex114係進而更具有:具有操作鍵部ex366之本體部;聲音輸出部ex357,係用以輸出聲音之揚聲器等;聲音輸入部ex356,係用以輸入聲音之麥克風等;記憶體部ex367,係將已拍攝之影像、靜止畫面、已錄音之聲音、或已接收之影像、靜止畫面、郵件等已編碼資料或解碼資料加以保存;或插槽部ex364,係與同樣保存資料之記錄媒體間之介面部。
進而,使用第21B圖來說明行動電話ex114之構成例。行動電話ex114係對統括地控制具有顯示部ex358及操作鍵部ex366之本體部之各部的主控制部ex360,將電源電路部ex361、操作輸入控制部ex362、影像訊號處理部ex355、攝像機介面部ex363、LCD(Liquid Crystal Display:液晶顯示器)控制部ex359、調變/解調部ex352、多工/解多工部ex353、聲音訊號處理部ex354、插槽部ex364、記憶體部ex367透過匯流排ex370相互連接著。
電源電路部ex361當利用使用者之操作在結束通話及電源鍵開啟時,從電池組對各部供給電力來將行動電話ex114啟動至可動作之狀態。
行動電話ex114係根據具有CPU、ROM、RAM等之主控制部ex360的控制,將在聲音通話模式時用聲音輸入部ex356所收音之聲音訊號利用聲音訊號處理部ex354來轉換成數位聲音訊號,將其用調變/解調部ex352光譜擴散處理,並在用傳送/接收部ex351實施數位類比轉換處理及頻率轉換處理後,透過天線ex350加以傳送。又,行動電話ex114係將在聲音通話時透過天線ex350所接收之接收資料放大來實施頻率轉換處理及類比數位轉換處理,用調變/解調部ex352光譜擴散處理,並在用聲音訊號處理部ex354轉換成類比聲音訊號後,將其從聲音輸出部ex357輸出。
進而在資料通訊模式時,在傳送電子郵件傳送之際,藉由本體部之操作鍵部ex366等之操作所輸入之電子郵件的字元資料,係透過操作輸入部ex362送出至主控制部ex360。主控制部ex360用調變/解調部ex352將字元資料光譜擴散處理,並在用傳送/接收部ex351實施數位類比轉換處理及頻率轉換處理後,透過天線ex350傳送至基地台ex110。在接收電子郵件時,對已接收之資料進行大略與此相反之處理,輸出至顯示部ex358。
在資料通訊模式時,在傳送影像、靜止畫面、或影像與聲音之際,影像訊號處理部ex355係將從攝像機部ex365所供給之影像訊號依據上述各實施形態所示之動態圖像編碼方法加以壓縮編碼(即,使其作為本發明其中一態樣的圖像編碼裝置作用),且將已編碼之影像資料送出至多工/解多工部ex353。又,聲音訊號處理部ex354係將在用攝像機部
ex365拍攝影像、靜止畫面中利用聲音輸入部ex356所收音之聲音訊號加以編碼,且將已編碼之聲音訊號資料送出至多工/解多工部ex353。
多工/解多工部ex353係用預定方式將從影像訊號處理部ex355所供給之已編碼的影像資料與從聲音訊號處理部ex354所供給之已編碼的聲音資料多工,其結果將所得之多工資料利用調變/解調部(調變/解調電路部)ex352光譜擴散處理,並在用傳送/接收部ex351實施數位類比轉換處理及頻率轉換處理後,透過天線ex350傳送。
在資料通訊模式時,在接收網頁等所連結之動態圖像檔案資料之際,或是接收附加有影像或/及聲音之電子郵件之際,為了將透過天線ex350所接收之多工資料解碼,多工/解多工部ex353係藉由將多工資料解多工,分開成影像資料之位元流與聲音資料之位元流,透過同步匯流排ex370將已編碼之影像資料供給至影像訊號處理部ex355,並將已編碼之聲音資料供給至聲音訊號處理部ex354。影像訊號處理部ex355係依據與上述各實施形態所示之動態圖像編碼方法對應之動態圖像解碼方法來解碼,藉此將影像訊號解碼(即,使其作為本發明其中一態樣的圖像解碼裝置作用),且透過LCD控制部ex359,從顯示部ex358顯示例如網頁所連結之動態圖像檔案包含之影像、靜止畫面。又,聲音訊號處理部ex354係將聲音訊號解碼,從聲音輸出部ex357輸出聲音。
又,上述行動電話ex114等之終端係與電視ex300相同
地除了具有編碼器、解碼器二者之傳送接收型終端外,可考慮僅編碼器之傳送終端、僅解碼器之接收終端等三種之裝設形式。進而,數位廣播用系統ex200中,雖已說明傳送接收影像資料中多工有音樂資料等之多工資料,但除了聲音資料以外,亦可為多工有與影像關聯之文字資料等之資料,亦可非多工資料而為影像資料本身。
如此,可將上述各實施形態所示之動態圖像編碼方法或動態圖像解碼方法使用於上述之任一者之機器或系統,如此一來,可得到上述各實施形態所說明之效果。
又,本發明係不限於上述實施形態,在不脫離本發明範圍下,可有各種變形或修正。
(實施形態4)
將上述各實施形態所示之動態圖像編碼方法或裝置、與依據MPEG-2、MPEG4-AVC、VC-1等不同規格之動態圖像編碼方法或裝置視需要適宜地加以切換,藉此亦可產生影像資料。
在此,在產生分別依據不同規格之複數影像資料的情況下,當解碼時,必須選擇與個別規格對應之解碼方法。然而,由於無法識別解碼之影像資料是依據何種規格,因此會產生無法選擇適合的解碼方法之課題。
為了解決該課題,影像資料中多工有聲音資料等之多工資料係構造成含有顯示影像資料是依據何種規格之識別資訊。以下說明包含依據上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料之多工資料的具體構成。
多工資料為MPEG-2傳輸流形式之數位流。
第22圖係顯示多工資料之構成的圖。如第22圖所示,多工資料係可從視訊流、音訊流、演示圖形串流(PG)、互動圖形串流當中,將1個以上多工來獲得。視訊流係顯示電影之主影像與副影像,音訊流(IG)係顯示電影之主聲道與跟該主聲道混合之副聲道,演示圖形串流係顯示電影之字幕。在此主影像係表示顯示於畫面之通常影像,副影像係在主畫面中用小畫面顯示之影像。又,互動圖形串流係表示藉由在畫面上配置GUI零件來作成之對話畫面。視訊流係利用上述各實施形態所示之動態圖像編碼方法或裝置、根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之動態圖像編碼方法或裝置來編碼。音訊流係利用杜比AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或線性PCM等方式來編碼。
多工資料包含之各串流係依據PID來識別。例如,對利用至電影之影像的視訊流配置0×1011,對音訊流配置從0×1100到0×111F,對演示圖形串流配置從0×1200到0×121F,對互動圖形串流配置從0×1400到0×141F,而對利用至電影之副影像的視訊流則配置從0×1B00到0×1B1F,對利用至與主聲道混合之副聲道的音訊流則配置從0×1A00到0×1A1F。
第23圖係示意地顯示多工資料如何多工之圖。首先,將複數視訊圖框所構成之視訊流ex235、複數音訊訊框所構成之音訊流ex238分別轉換成PES封包列ex236與ex239、TS封
包ex237與ex240。同樣地將演示圖形串流ex241與互動圖形串流ex244之資料分別轉換成PES封包列ex242與ex245,進而轉換成TS封包ex243與ex246。多工資料ex247係藉由將這些TS封包多工成1條串流來構成。
第24圖係更詳細地顯示位元流如何儲存於PES封包列。第24圖中第1段係顯示視訊流之視訊圖框列。第2段則顯示PES封包列。如第24圖之箭頭yy1、yy2、yy3、yy4所示,視訊流中複數Video Presentation Unit之I圖片、B圖片、P圖片係依每一圖片分割,儲存於PES封包之酬載。各PES封包係具有PES標頭,且PES標頭係儲存代表圖片之顯示時刻的PTS(Presentation Time-Stamp)或代表圖片之解碼時刻的DTS(Decoding Time-Stamp)。
第25圖係顯示有對多工資料最後寫入之TS封包的形式。TS封包係188Byte固定長度的封包,其係由具有識別串流之PID等資訊的4Byte之TS標頭與儲存資料的184Byte之TS酬載所構成,而上述PES封包係被分割,儲存於TS酬載。而BD-ROM的情況,則對TS封包,賦予4Byte之TP_Extra_Header,構成192Byte之來源封包,寫於多工資料。TP_Extra_Header係記載ATS(Arrival_Time_Stamp)等資訊。而ATS係顯示該TS封包傳到解碼器之PID檔案的傳送開始時刻。如第25圖下段所示,多工資料內會排列來源封包,從多工資料之前頭遞增之編號稱為SPN(來源封包編號:Source Packet Number)。
又,包含於多工資料之TS封包係除了影像、聲音、字幕
等各串流以外,還有PAT(Program Association Table)、PMT(Program Map Table)、PCR(Program Clock Reference)等。PAT係顯示在多工資料所利用之PMT的PID為何,而PAT自身之PID則用0來登錄。PMT係具有多工資料中包含之影像、聲音、字幕等之各串流的PID及與各PID對應之串流的屬性資訊,或具有關於多工資料之各種描述符。描述符係有指示許可或不許可多工資料之複製之複製控制資訊等。PCR係為了取得代表ATS時間軸之ATC(Arrival Time Clock)與代表PTS/DTS時間軸的STC(System Time Clock)之同步,乃具有與其PCR封包傳送至解碼器之ATS對應之STC時間的資訊。
第26圖係詳細說明PMT之資料構造的圖。PMT之前頭係配置記錄有該PMT包含之資料長度等的PMT標頭。其後則複數配置關於多工資料之描述符。上述複製控制資訊等則作為描述符來記載。描述符之後則複數配置有關於多工資料包含之各串流之串流資訊。為了識別串流之壓縮編碼器,串流資訊係由串流類型、串流之PID、記載有串流之屬性資訊(圖框更新率、影像顯示比例等)之串流描述符來構成。串流描述符只存在多工資料中存在之串流的數量。
記錄於記錄媒體等時,上述多工資料係與多工資料資訊檔案一同記錄。
如第27圖所示,多工資料檔案係多工資料之管理資訊,與多工資料1對1對應,由多工資料資訊、串流屬性資訊、登錄表(Entry map)來構成。
如第27圖所示,多工資料資訊係由系統頻率、再生開始時刻、再生結束時刻來構成。系統頻率係顯示多工資料傳到後述系統目標解碼器之PID濾過器之最大傳送頻率。多工資料中包含之ATS的間隔設定成低於系統頻率。再生開始時刻為多工資料之前頭之視訊圖框的PTS,而再生結束時刻則可設定為對多工資料之終端之視訊圖框的PTS加上1圖框份之再生間隔者。
如第28圖所示,串流屬性資訊係將關於多工資料包含之各串流的屬性資訊登錄於每一PID。屬性資訊係於每一視訊流、音訊流、演示圖形串流、互動圖形串流具有不同資訊。視訊流屬性資訊係具有:該視訊流用何種壓縮編碼器來壓縮、構成視訊流之各個圖片資料之解析度為多少、影像顯示比例為多少、圖框頻率為多少等之資訊。音訊流屬性資訊具有:該音訊流用何種壓縮編碼器來壓縮、該音訊流包含之頻道數為何、與哪種語言對應、取樣頻率為多少等之資訊。該等資訊係利用於播放器再生前之解碼器的初始化等。
本實施形態係從上述多工資料中利用PMT包含之串流類型。又,在記錄媒體記錄有多工資料時,則利用多工資料資訊包含之視訊流屬性資訊。具體而言,於上述各實施形態所示之動態圖像編碼方法或裝置中,設置一對PMT包含之串流類型或視訊流屬性資訊設定固有資訊之步驟或裝置,而該固有資訊係顯示依據上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料者。藉由該構成,
可識別上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料與根據其他規格之影像資料。
又,將本實施形態之動態圖像解碼方法之步驟顯示於第29圖。步驟exS100中,從多工資料取得PMT包含之串流類型,或多工資料資訊包含之視訊流屬性資訊。接著,步驟exS101中,判斷是否顯示串流類型或視訊流屬性資訊為依據上述各實施形態所示之動態圖像編碼方法或裝置所產生之多工資料。且,當已判斷串流類型或視訊流屬性資訊為依據上述各實施形態所示之動態圖像編碼方法或裝置所產生者時,在步驟exS102中,利用上述各實施形態所示之動態圖像解碼方法來進行解碼。又,當顯示串流類型或視訊流屬性資訊為根據習知之MPEG-2、MPEG4-AVC、VC-1等規格者時,在步驟exS103中,則利用根據習知之規格之解碼方法來進行解碼。
如此,藉由對串流類型或視訊流屬性資訊設定新的固有值,在解碼時,可判斷是否可用上述各實施形態所示之動態圖像解碼方法或裝置來解碼。因此,即使輸入了根據不同規格之多工資料時,由於可選擇適切之解碼方法或裝置,因此可在不會產生錯誤的情況下解碼。又,可將本實施形態所示之動態圖像編碼方法或裝置、或是動態圖像解碼方法或裝置,用於上述之任一機器或系統。
(實施形態5)
上述各實施形態所示之動態圖像編碼方法與裝置、動態圖像解碼方法與裝置,典型地可用積體電路之LSI實現。作
為一例,於第30圖顯示已單晶片化之LSIex500的構成。LSIex500係具有以下說明之要素ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509,而各要素透過匯流排ex510連接著。電源電路部ex505在電源開啟狀態時,藉由對各部供給電力而啟動成可動作之狀態。
例如在進行編碼處理時,LSIex500係根據具有CPUex502、記憶體控制器ex503、串流控制器ex504、驅動頻率控制部ex512等之控制部ex501的控制,利用AV I/Oex509從麥克風ex117或攝像機ex113等輸入AV訊號。已輸入之AV訊號則暫時儲存於SDRAM等之外部記憶體ex511。根據控制部ex501之控制,已儲存之資料會對應處理量或處理速度適宜地分成複數次等來傳送至訊號處理部ex507,而在訊號處理部ex507中進行聲音訊號之編碼及/或影像訊號之編碼。在此影像訊號之編碼處理為上述各實施形態所說明之編碼處理。訊號處理部ex507係進而依情況進行將已編碼之聲音資料與已編碼之影像資料多工等之處理,且從串流I/Oex506輸出至外部。該已輸出之多工資料係朝基地台ex107傳送,或是寫入至記錄媒體ex215。而,可暫時將資料儲存於緩衝器ex508而可在多工時同步。
而,如上所述,雖已說明記憶體ex511為LSIex500之外部構成,但亦可為包含於LSIex500內部之構成。緩衝器ex508亦不限於1個,亦可具有複數緩衝器。又,LSIex500可單晶片化,亦可複數晶片化。
又,如上所述,控制部ex501具有CPUex502、記憶體控
制器ex503、串流控制器ex504、驅動頻率控制部ex512等,但控制部ex501之構成係不限於該構成。例如,訊號處理部ex507亦可進而為具有CPU之構成。藉由訊號處理部ex507之內部亦設有CPU,可更提升處理速度。又,作為其他例,CPUex502亦可構造成具有訊號處理部ex507或訊號處理部ex507之一部份(例如聲音訊號處理部)。在此情況下,控制部ex501會構造成包含有訊號處理部ex507或具有其一部分之CPUex502。
而,在此雖為LSI,但依據集積度之不同,亦稱為IC、系統LSI、超級LSI、終極LSI。
又,積體電路化之手法不限LSI,亦可利用專用電路或通用處理器來實現。在LSI製造後,亦可利用可程式之FPGA(Field Programmable Gate Array)或可再構成LSI內部之電路單元之連接或設定的可重組態處理器。
進而,若因半導體技術之進步或衍生之別種技術取代LSI之積體電路化的技術登場,當然亦可使用該技術來進行功能區塊之集積化。作為生物技術之應用等也有可能性。
(實施形態6)
將依據上述實施形態所示之動態圖像編碼方法或裝置產生之影像資料解碼時,與將根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之影像資料解碼時相比,可得知處理量增加。因此,LSIex500中,必須設定為較將根據習知規格之影像資料解碼時之CPUex502的驅動頻率高的驅動頻率。然而,驅動頻率一提高,會產生消費電力變
高之課題。
為了解決該課題,電視ex300、LSIex500等之動態圖像解碼裝置係構造成識別影像資料根據何種規格,且對應規格來切換驅動頻率。第31圖係顯示本實施形態之構成ex800。驅動頻率切換部ex803係在影像資料為依據上述各實施形態所示之動態圖像編碼方法或裝置所產生者時,將驅動頻率設定的較高。接著,指示實行上述各實施形態所示之動態圖像編碼方法之解碼處理部ex801將影像資料解碼。另一方面,影像資料為根據習知規格之影像資料時,與影像資料為依據上述各實施形態所示之動態圖像編碼方法或裝置所產生者相比,將驅動頻率設定的較低。接著,指示根據習知規格之解碼處理部ex802將影像資料解碼。
更具體而言,驅動頻率切換部ex803係由第30圖之CPUex502與驅動頻率控制部ex512來構成。又,實行上述各實施形態所示之動態圖像編碼方法的解碼處理部ex801與根據習知規格之解碼處理部ex802係相當於第30圖之訊號處理部ex507。CPUex502係識別影像資料為根據何種規格。且,根據來自CPUex502之訊號,驅動頻率控制部ex512設定驅動頻率。又,根據來自CPUex502之訊號,訊號處理部ex507進行影像資料之解碼。在此,對影像資料之識別,例如可考慮利用實施形態4所記載之識別資訊。而關於識別資訊,不限實施形態4所記載者,只要是可識別影像資料係根據何種規格者即可。例如可根據識別影像資料為利用於電視者或是利用於碟片者之外部訊號,識別影像資料為根
據何種規格時,可根據上述外部訊號來識別。又,CPUex502中驅動頻率之選擇係可考慮根據例如第33圖之使影像資料的規格與驅動頻率對應之查閱表來進行。查閱表係可預先儲存於緩衝器ex508或LSI之內部記憶體,而CPUex502參考該查閱表,藉此來選擇驅動頻率。
第32圖係顯示實施本實施形態之方法的步驟。首先,在步驟exS200,訊號處理部ex507中從多工資料取得識別資訊。接著,在步驟exS201,CPUex502中根據識別資訊識別影像資料是否為上述各實施形態所示之編碼方法或裝置所產生者。影像資料為上述各實施形態所示之編碼方法或裝置所產生者時,在步驟exS202,CPUex502將把驅動頻率設定的較高之訊號傳送至驅動頻率控制部ex512。且,驅動頻率控制部ex512中設定為高驅動頻率。另一方面,在顯示為根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,在步驟exS203,CPUex502將把驅動頻率設定的較低之訊號傳送至驅動頻率控制部ex512。且,驅動頻率控制部ex512中,與影像資料為上述各實施形態所示之編碼方法或裝置所產生者時相比,可設定為低驅動頻率。
進而,可與驅動頻率之切換連動,藉由變更給予至LSIex500或包含LSIex500之裝置的電壓,可更提高省電力效果。例如,在將驅動頻率設定的較低時,隨此,與將驅動頻率設定的較高時相比,可考慮將給予至LSIex500或包含LSIex500之裝置的電壓設定的較低。
又,驅動頻率之設定方法只要在解碼時之處理量大的情
況,將驅動頻率設定的較高,而在解碼時之處理量小的情況,設定的較驅動頻率設定的較低即可,不限於上述設定方法。例如,將根據MPEG4-AVC規格之影像資料加以解碼之處理量,比將依據上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料加以解碼之處理量要大時,可考慮採用上述情況之相反來設定驅動頻率。
再者,驅動頻率之設定方法不限於將驅動頻率降低之構成。例如,在識別資訊顯示為上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料時,可考慮將給予至LSIex500或包含LSIex500之裝置的電壓設定的較高,而在顯示為根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,將給予至LSIex500或包含LSIex500之裝置的電壓設定的較低。又,作為其他例,可考慮在識別資訊顯示為上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料時,不使CPUex502之驅動停止,而在顯示為根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時,由於處理還有餘力,因此可使CPUex502之驅動暫時停止。即使在識別資訊顯示為上述各實施形態所示之動態圖像編碼方法或裝置所產生之影像資料時,只要處理還有餘力,亦可使CPUex502之驅動暫時停止。而此時,與顯示為根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之影像資料時相比,可考慮將停止時間設定的較短。
如此,與影像資料所根據之規格對應來切換驅動頻率,
藉此可謀求省電化。又,在使用電池來驅動LSIex500或包含LSIex500之裝置時,可隨著省電化來延長電池之壽命。
(實施形態7)
有時會對電視或行動電話等上述機器或系統輸入根據不同規格之複數影像資料。如此,為了在輸入根據不同規格之複數影像資料時亦可解碼,LSIex500之訊號處理部ex507必須與複數規格對應。然而,當個別使用與各自規格對應之訊號處理部ex507時,會產生LSIex500之電路規模變大,且成本增加的課題。
為了解決該課題,將實行上述各實施形態所示之動態圖像解碼方法的解碼處理部,與根據習知之MPEG-2、MPEG4-AVC、VC-1等規格之解碼處理部構造成一部分共有化。將該構成例顯示於第34A圖之ex900。例如,上述各實施形態所示之動態圖像解碼方法與根據MPEG4-AVC規格之動態圖像解碼方法,係在熵編碼、反量化、解塊濾過、移動補償等處理中,處理內容為一部分共通。而針對共通之處理內容,可考慮構造成共有與MPEG4-AVC規格對應之解碼處理部ex902,而針對不與MPEG4-AVC規格對應之本發明其中一態樣之特有的其他處理內容,則使用專用之解碼處理部ex901。關於解碼處理部之共有化,亦可構造成針對共通之處理內容,共有用以實行上述各實施形態所示之動態圖像解碼方法之解碼處理部,而針對MPEG4-AVC規格中特有之處理內容,則使用專用之解碼處理部。
又,將一部共有化之處理之其他例顯示於第34B圖之
ex1000。該例中,係構造成使用:專用之解碼處理部ex1001,係與本發明其中一態樣中特有之處理內容對應者;專用處理部ex1002,係與其他習知規格中特有之處理內容對應者;共用之解碼處理部ex1003,係與本發明其中一態樣之動態圖像解碼方法跟其他習知規格之動態圖像解碼方法中共通的處理內容對應者。在此,專用之解碼處理部ex1001、ex1002不一定為本發明其中一態樣或特殊化成其他習知規格特有之處理內容者,亦可為實行其他通用處理者。又,可在LSIex500安裝本實施形態之構成。
如此,針對在本發明其中一態樣之動態圖像解碼方法與習知規格之動態圖像解碼方法中共通之處理內容,藉由共有解碼處理部,可縮小LSI之電路規模,且減低成本。
本發明係關於動態圖像編碼解碼之方法,且關於區別畫面內編碼中面內預測像素之產生方法的模式編號的編碼解碼方法。
100‧‧‧圖像編碼裝置
101‧‧‧差分部
102‧‧‧轉換部
103‧‧‧量化部
104‧‧‧反量化部
105‧‧‧逆轉換部
106‧‧‧加法部
107‧‧‧畫面間預測部
108‧‧‧畫面內預測部
109‧‧‧切換部
110‧‧‧編碼控制部
120‧‧‧可變長度編碼部
200‧‧‧圖像解碼裝置
201‧‧‧反量化部
202‧‧‧反轉換部
203‧‧‧加法部
204‧‧‧畫面間預測部
205‧‧‧畫面內預測部
206‧‧‧切換部
210‧‧‧控制部
220‧‧‧可變長度解碼部
ex101‧‧‧網際網路
ex102‧‧‧網路服務提供者
ex103‧‧‧串流伺服器
ex104‧‧‧電話網
ex106~ex110‧‧‧基地台
ex111‧‧‧電腦
ex112‧‧‧PDA
ex113‧‧‧攝像機
ex114‧‧‧行動電話
ex115‧‧‧遊戲機
ex116‧‧‧攝像機
ex200‧‧‧數位廣播用系統
ex201‧‧‧廣播台
ex202‧‧‧衛星
ex203‧‧‧電纜
ex204‧‧‧天線
ex205‧‧‧天線
ex210‧‧‧車
ex211‧‧‧車用導航
ex212‧‧‧再生裝置
ex213‧‧‧螢幕
ex214~216‧‧‧記錄媒體(光碟)
ex217‧‧‧機上盒
ex218‧‧‧讀取器/紀錄器
ex219‧‧‧螢幕
ex230‧‧‧資訊軌
ex231‧‧‧記錄區塊
ex232‧‧‧內周區域
ex233‧‧‧資料記錄區域
ex234‧‧‧外周區域
ex235‧‧‧視訊流
ex236、ex239‧‧‧PES封包列
ex238‧‧‧音訊流
ex237、ex240、ex243、ex246‧‧‧TS封包
ex241‧‧‧同樣地將演示圖形串流
ex244‧‧‧互動圖形串流
ex242、ex245‧‧‧PES封包列
ex247‧‧‧多工資料
ex300‧‧‧電視
ex301‧‧‧調諧器
ex302‧‧‧調變/解調部
ex303‧‧‧多工/解多工部
ex304‧‧‧聲音訊號處理部
ex305‧‧‧影像訊號處理部
ex306‧‧‧訊號處理部
ex307‧‧‧揚聲器
ex308‧‧‧顯示部
ex309‧‧‧輸出部
ex310‧‧‧控制部
ex311‧‧‧電源電路部
ex312‧‧‧操作輸入部
ex313‧‧‧橋接器
ex314‧‧‧插槽部
ex315‧‧‧驅動器
ex316‧‧‧數據機
ex317‧‧‧操作輸入部
ex318~ex321‧‧‧緩衝器
ex350‧‧‧天線
ex351‧‧‧傳送/接收部
ex352‧‧‧調變/解碼部
ex353‧‧‧多工/解多工部
ex354‧‧‧聲音訊號處理部
ex355‧‧‧影像訊號處理部
ex356‧‧‧聲音輸入部
ex357‧‧‧聲音輸出部
ex358‧‧‧顯示部
ex359‧‧‧LCD控制部
ex360‧‧‧主控制部
ex361‧‧‧電源電路部
ex362‧‧‧操作輸入控制部
ex363‧‧‧攝像機I/F部
ex364‧‧‧插槽部
ex365‧‧‧攝像機部
ex366‧‧‧操作鍵部
ex367‧‧‧記憶體部
ex370‧‧‧匯流排
ex400‧‧‧資訊再生/記錄部
ex401‧‧‧光學頭
ex402‧‧‧調變記錄部
ex403‧‧‧再生解調部
ex404‧‧‧緩衝器
ex405‧‧‧碟片馬達
ex406‧‧‧伺服控制部
ex407‧‧‧系統控制部
ex500‧‧‧LSI
ex501‧‧‧控制部
ex502‧‧‧CPU
ex503‧‧‧記憶體控制器
ex504‧‧‧串流控制器
ex505‧‧‧電源電路部
ex506‧‧‧串流I/O
ex507‧‧‧訊號處理部
ex508‧‧‧緩衝器
ex509‧‧‧AV I/O
ex510‧‧‧匯流排
ex511‧‧‧外部記憶體
ex512‧‧‧驅動頻率控制部
ex800‧‧‧實施形態6之構成
ex801‧‧‧本發明之解碼處理部
ex802‧‧‧根據習知規格之解碼處理部
ex803‧‧‧驅動頻率切換部
ex900‧‧‧解碼處理部構成例
ex901‧‧‧對本發明專用之解碼處理部
ex902‧‧‧對本發明與習知規格共有之解碼處理部
ex1000‧‧‧其他共有化之例
ex1001‧‧‧專用之解碼處理部
ex1002‧‧‧專用之解碼處理部
ex1003‧‧‧共有之解碼處理部
S‧‧‧步驟
第1圖係顯示實施形態1之圖像編碼裝置之構成例的方塊圖。
第2圖係顯示實施形態1之圖像編碼方法中模式資訊之產生方法的流程圖。
第3圖係詳細說明第2圖之步驟S215的流程圖。
第4圖係顯示第1實施形態中預測模式決定方法的流程圖。
第5圖係說明一利用CABAC方式之編碼模式編號的編碼方法(步驟S217)之例的流程圖。
第6A圖係顯示習知之語法構成例的概念圖。
第6B圖係顯示實施形態1中語法構成例的概念圖。
第7圖係顯示第1實施形態中預測模式決定方法之變形例的流程圖。
第8圖係說明編碼模式編號之其他編碼方法(步驟S217)之例的流程圖。
第9A圖係顯示在編碼模式編號之其他編碼方法(步驟S217)中使用之編碼表之例的圖表。
第9B圖係顯示在編碼模式編號之其他編碼方法(步驟S217)中使用之編碼表之例的圖表。
第10圖係顯示第2實施形態中解碼裝置2之構成的方塊圖。
第11圖係顯示第2實施形態中解碼方法之流程圖。
第12A圖係顯示位元列為利用CABAC輸出者時之算術解碼處理之處理順序的流程圖。
第12B圖係顯示位元列為利用CAVLC輸出者時之算術解碼處理之處理順序的流程圖。
第13圖係詳細說明步驟S1117之第1例的流程圖。
第14圖係詳細說明步驟S1115之流程圖。
第15圖係顯示解碼預測模式之一例的概念圖。
第16圖係實現內容傳送服務之內容供給系統之全體構成圖。
第17圖係數位廣播用系統之全體構成圖。
第18圖係顯示電視之構成例的方塊圖。
第19圖係顯示對光碟之記錄媒體進行資訊讀寫之資訊再生/記錄部之構成例的方塊圖。
第20圖係顯示光碟之記錄媒體之構造例的圖。
第21A圖係顯示行動電話之一例的圖。
第21B圖係顯示行動電話之構造例的圖。
第22圖係顯示多工資料之構成的圖。
第23圖係示意地顯示各串流在多工資料中如何多工的圖。
第24圖係更詳盡地顯示於PES封包列中如何儲存視訊流的圖。
第25圖係顯示多工資料中TS封包與來源封包之構造的圖。
第26圖係顯示PMT之資料構成的圖。
第27圖係顯示多工資料資訊之內部構成的圖。
第28圖係顯示串流屬性資訊之內部構成的圖。
第29圖係顯示辨識影像資料之步驟的圖。
第30圖係顯示積體電路之構成例的方塊圖,而該積體電路係實現各實施形態之動態圖像編碼方法及動態圖像解碼方法者。
第31圖係顯示切換驅動頻率之構成的圖。
第32圖係顯示識別影像資料之規格,且切換驅動頻率
之步驟的圖。
第33圖係顯示查閱表之一例的圖,該查閱表係已將影像資料之規格及驅動頻率對應者。
第34A圖係顯示將訊號處理部之模組共有化之構成例的圖。
第34B圖係顯示將訊號處理部之模組共有化之其他構成例的圖。
S‧‧‧步驟
Claims (10)
- 一種圖像解碼方法,該方法係依每一區塊解碼包含於編碼流之圖像資料者,其步驟係包含有:導出步驟,係導出面內(intra)預測模式之候補者,該面內預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得步驟,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定步驟,係根據已取得之前述索引,決定已導出之前述面內預測模式之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式,前述導出步驟包含有:第1導出步驟,係從已在鄰接前述解碼對象區塊之各鄰接區塊之畫面內預測中被使用之面內預測模式,導出前述面內預測模式之第1候補;判定步驟,係判定已導出之前述第1候補之數是否小於前述2以上之數;及第2導出步驟,係在已判定前述第1候補之數小於前述2以上之數時,更導出前述面內預測模式之第2候補。
- 如專利申請範圍第1項之圖像解碼方法,其中前述2以上之數為已固定之數。
- 如專利申請範圍第1項之圖像解碼方法,其中前述第1導出步驟中,取得在畫面內預測中被使用之面內預測模式之前述鄰接區塊之數為與前述2以上之數相同之數。
- 如專利申請範圍第1項之圖像解碼方法,其中前述第2導出步驟中,係導出前述第2候補而使前述第1候補之數與前述第2候補之數的合計經常為前述2以上之數。
- 如專利申請範圍第1項之圖像解碼方法,其中前述第2導出步驟中,將與已在鄰接前述解碼對象區塊之各鄰接區塊之畫面內預測中被使用之面內預測模式相異之面內預測模式,作為前述第2候補來導出。
- 如專利申請範圍第1項之圖像解碼方法,其中前述第2導出步驟中,將顯示使用前述解碼對象區塊之像素值平均值來預測之面內預測模式、顯示平面預測之面內預測模式、與顯示縱方向預測之面內預測模式當中的至少任一者,作為前述第2候補來導出。
- 如專利申請範圍第1項之圖像解碼方法,其中前述編碼流係包含顯示是否使用面內預測模式之候補的旗標,在前述旗標顯示使用面內預測模式之候補時,於前述取得步驟取得前述索引,且於前述決定步驟,決定前述1個候補作為在前述解碼對象區塊之畫面內預測使用之面內預測模式;而在前述旗標顯示不使用面內預測模式之候補時,於前述取得步驟,從前述編碼流取得模式編號,該模式編號顯示在前述解碼對象區塊之畫面內預測使用之面內預測模式,且於前述決定步驟,根據已取得之前述模式編號,決定在前述解碼對象區塊之畫面內預測使用之前述面內預測模式。
- 如專利申請範圍第1項之圖像解碼方法,其中前述導出步驟係當有與前述解碼對象區塊鄰接之鄰接區塊時,將已在前述鄰接區塊之畫面內預測中被使用之面內預測模式以外的面內預測模式,作為前述面內預測模式之候補來導出;而當無與前述解碼對象區塊鄰接之鄰接區塊時,則根據預定之條件來導出前述面內預測模式之候補。
- 如專利申請範圍第1項之圖像解碼方法,其中前述導出步驟中,進而使用前述面內預測模式之候補來製作候補列表,且前述索引係用以識別包含於前述候補列表之前述面內預測模式之候補的編號。
- 一種圖像解碼裝置,係依每一區塊解碼包含於編碼流之圖像資料者,其係包含有:導出部,係導出面內預測模式之候補者,該面內預測模式之候補係在解碼對象區塊之畫面內預測使用,且經常為2以上之數;取得部,係從前述編碼流取得索引者,該索引係用以從已導出之前述面內預測模式之候補中特定1個候補;及決定部,係根據已取得之前述索引,決定已導出之前述面內預測模式之候補中的1個候補,作為在前述解碼對象區塊之畫面內預測使用之前述面內預測模式者,前述導出部包含有: 第1導出部,係從已在鄰接前述解碼對象區塊之各鄰接區塊之畫面內預測中被使用之面內預測模式,導出前述面內預測模式之第1候補;判定部,係判定已導出之前述第1候補之數是否小於前述2以上之數;及第2導出部,係在已判定前述第1候補之數小於前述2以上之數時,更導出前述面內預測模式之第2候補。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161496237P | 2011-06-13 | 2011-06-13 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201306595A TW201306595A (zh) | 2013-02-01 |
TWI556628B true TWI556628B (zh) | 2016-11-01 |
Family
ID=47356797
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW105129621A TWI602421B (zh) | 2011-06-13 | 2012-06-13 | Image decoding method and image decoding apparatus |
TW101121098A TWI556628B (zh) | 2011-06-13 | 2012-06-13 | Image decoding method and image decoding apparatus |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW105129621A TWI602421B (zh) | 2011-06-13 | 2012-06-13 | Image decoding method and image decoding apparatus |
Country Status (15)
Country | Link |
---|---|
US (7) | US9860539B2 (zh) |
EP (1) | EP2720461B1 (zh) |
JP (3) | JP5386657B2 (zh) |
KR (1) | KR101955051B1 (zh) |
CN (1) | CN103609110B (zh) |
AU (1) | AU2012270960B2 (zh) |
BR (1) | BR112013031624B1 (zh) |
CA (1) | CA2838214C (zh) |
ES (1) | ES2961495T3 (zh) |
MX (1) | MX2013013909A (zh) |
MY (1) | MY165837A (zh) |
PL (1) | PL2720461T3 (zh) |
RU (1) | RU2607246C2 (zh) |
TW (2) | TWI602421B (zh) |
WO (1) | WO2012172791A1 (zh) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
MX2013013909A (es) * | 2011-06-13 | 2014-01-24 | Panasonic Corp | Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imágenes. |
WO2012171463A1 (en) * | 2011-06-17 | 2012-12-20 | Mediatek Inc. | Method and apparatus for coding of intra prediction mode |
KR101953522B1 (ko) * | 2011-06-17 | 2019-02-28 | 가부시키가이샤 제이브이씨 켄우드 | 화상 부호화 장치, 화상 부호화 방법 및 화상 부호화 프로그램, 및 화상 복호 장치, 화상 복호 방법 및 화상 복호 프로그램 |
HUE038712T2 (hu) * | 2011-06-28 | 2018-11-28 | Samsung Electronics Co Ltd | Eljárás video dekódolására intra predikcióval |
EP2727363B1 (en) * | 2011-06-28 | 2020-11-18 | HFI Innovation Inc. | Method and apparatus of intra mode coding |
CN107197309B (zh) | 2011-10-07 | 2020-02-18 | 英迪股份有限公司 | 对视频信号进行解码的方法 |
US8811760B2 (en) * | 2011-10-25 | 2014-08-19 | Mitsubishi Electric Research Laboratories, Inc. | Coding images using intra prediction modes |
US9154796B2 (en) * | 2011-11-04 | 2015-10-06 | Qualcomm Incorporated | Intra-mode video coding |
KR20130049523A (ko) * | 2011-11-04 | 2013-05-14 | 오수미 | 인트라 예측 블록 생성 장치 |
CN103220506B (zh) | 2012-01-19 | 2015-11-25 | 华为技术有限公司 | 一种编解码方法和设备 |
US9210438B2 (en) * | 2012-01-20 | 2015-12-08 | Sony Corporation | Logical intra mode naming in HEVC video coding |
CN104104950B (zh) * | 2013-04-12 | 2018-03-02 | 浙江大学 | 一种模式信息的编解码方法及装置 |
JP6171627B2 (ja) * | 2013-06-28 | 2017-08-02 | 株式会社Jvcケンウッド | 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法および画像復号プログラム |
FR3051309A1 (fr) * | 2016-05-10 | 2017-11-17 | Bcom | Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image |
JP6669622B2 (ja) * | 2016-09-21 | 2020-03-18 | Kddi株式会社 | 動画像復号装置、動画像復号方法、動画像符号化装置、動画像符号化方法及びコンピュータ可読記録媒体 |
WO2018066863A1 (ko) * | 2016-10-04 | 2018-04-12 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
FR3058019A1 (fr) * | 2016-10-21 | 2018-04-27 | Orange | Procede de codage et de decodage de parametres d'image, dispositif de codage et de decodage de parametres d'image et programmes d'ordinateur correspondants |
US10393702B2 (en) * | 2016-11-02 | 2019-08-27 | Weatherford Technology Holdings, Llc | Defect penetration estimate using magnetic flux image enhancement |
US10785479B2 (en) * | 2018-03-30 | 2020-09-22 | Hulu, LLC | Intra prediction mode signaling for video coding |
BR112020024566A2 (pt) * | 2018-06-14 | 2021-03-09 | Panasonic Intellectual Property Corporation Of America | Método de codificação de dados tridimensionais, método de decodificação de dados tridimensionais, dispositivo de codificação de dados tridimensionais e dispositivo de decodificação de dados tridimensionais |
KR20200005480A (ko) * | 2018-07-06 | 2020-01-15 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
EP3821626A4 (en) * | 2018-08-09 | 2021-08-04 | Huawei Technologies Co., Ltd. | HISTORY-BASED INTRA MODE CODING PROCESS AND APPARATUS |
CN112887719B (zh) * | 2018-09-28 | 2022-03-15 | Jvc建伍株式会社 | 图像解码装置、图像解码方法以及图像解码程序 |
WO2020066702A1 (ja) * | 2018-09-28 | 2020-04-02 | 株式会社Jvcケンウッド | 画像復号装置、画像復号方法、及び画像復号プログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI327030B (en) * | 2004-12-06 | 2010-07-01 | Broadcom Corp | Two processor architecture supporting decoupling of outer loop and inner loop in video decoder |
TWI328357B (zh) * | 2003-12-15 | 2010-08-01 | Sony Corp | |
TWI329843B (en) * | 2004-01-14 | 2010-09-01 | Samsung Electronics Co Ltd | A reproducing apparatus for reproducing an interactive graphics stream from storage medium |
TWI330976B (en) * | 2003-12-05 | 2010-09-21 | Trident Microsystems Far East | Method and apparatus for encoding/decoding dynamic graphic content |
WO2011031332A1 (en) * | 2009-09-14 | 2011-03-17 | Thomson Licensing | Methods and apparatus for efficient video encoding and decoding of intra prediction mode |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI116819B (fi) * | 2000-01-21 | 2006-02-28 | Nokia Corp | Menetelmä kuvien lähettämiseksi ja kuvakooderi |
US7289672B2 (en) | 2002-05-28 | 2007-10-30 | Sharp Laboratories Of America, Inc. | Methods and systems for image intra-prediction mode estimation |
US7236524B2 (en) | 2002-05-28 | 2007-06-26 | Sharp Laboratories Of America, Inc. | Methods and systems for image intra-prediction mode communication |
US7386048B2 (en) | 2002-05-28 | 2008-06-10 | Sharp Laboratories Of America, Inc. | Methods and systems for image intra-prediction mode organization |
EP2860979A1 (en) * | 2002-05-28 | 2015-04-15 | Sharp Kabushiki Kaisha | Method and systems for image intra-prediction mode estimation, communication, and organization |
US8175444B2 (en) | 2004-01-14 | 2012-05-08 | Samsung Electronics Co., Ltd. | Method of reproducing from storage medium storing interactive graphics stream activated in response to user's command |
JP4495580B2 (ja) * | 2004-12-13 | 2010-07-07 | パナソニック株式会社 | 面内予測装置および面内予測方法 |
US8509551B2 (en) * | 2005-07-22 | 2013-08-13 | Mitsubishi Electric Corporation | Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recording with image encoding program and computer readable recording medium recorded with image decoding program |
JP2007116351A (ja) * | 2005-10-19 | 2007-05-10 | Ntt Docomo Inc | 画像予測符号化装置、画像予測復号装置、画像予測符号化方法、画像予測復号方法、画像予測符号化プログラム、及び画像予測復号プログラム |
JP2009060153A (ja) * | 2005-12-21 | 2009-03-19 | Panasonic Corp | 面内予測モード決定方法及び装置及びプログラム |
JP4635016B2 (ja) * | 2007-02-16 | 2011-02-16 | 株式会社東芝 | 情報処理装置およびインター予測モード判定方法 |
JP5188875B2 (ja) * | 2007-06-04 | 2013-04-24 | 株式会社エヌ・ティ・ティ・ドコモ | 画像予測符号化装置、画像予測復号装置、画像予測符号化方法、画像予測復号方法、画像予測符号化プログラム、及び画像予測復号プログラム |
US8139875B2 (en) * | 2007-06-28 | 2012-03-20 | Mitsubishi Electric Corporation | Image encoding device, image decoding device, image encoding method and image decoding method |
EP2187648A4 (en) * | 2007-09-12 | 2012-07-11 | Sony Corp | IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD |
EP2234403A4 (en) * | 2007-12-28 | 2011-12-21 | Sharp Kk | MOBILE IMAGE ENCODER AND DECODER |
KR101306834B1 (ko) * | 2008-09-22 | 2013-09-10 | 에스케이텔레콤 주식회사 | 인트라 예측 모드의 예측 가능성을 이용한 영상 부호화/복호화 장치 및 방법 |
JPWO2010087157A1 (ja) * | 2009-01-29 | 2012-08-02 | パナソニック株式会社 | 画像符号化方法及び画像復号方法 |
KR101702553B1 (ko) * | 2009-07-04 | 2017-02-03 | 에스케이 텔레콤주식회사 | 영상 부호화/복호화 방법 및 장치 |
JP6342116B2 (ja) * | 2010-07-15 | 2018-06-13 | シャープ株式会社 | イントラ予測モード推定装置 |
KR101373814B1 (ko) * | 2010-07-31 | 2014-03-18 | 엠앤케이홀딩스 주식회사 | 예측 블록 생성 장치 |
CN103262539A (zh) * | 2010-12-17 | 2013-08-21 | 三菱电机株式会社 | 运动图像编码装置、运动图像解码装置、运动图像编码方法以及运动图像解码方法 |
KR20120070479A (ko) * | 2010-12-21 | 2012-06-29 | 한국전자통신연구원 | 화면 내 예측 방향 정보 부호화/복호화 방법 및 그 장치 |
CN103392341A (zh) * | 2010-12-23 | 2013-11-13 | 三星电子株式会社 | 用于对图像预测单元的帧内预测模式进行编码的方法和装置,以及用于对图像预测单元的帧内预测模式进行解码的方法和装置 |
JP5781313B2 (ja) * | 2011-01-12 | 2015-09-16 | 株式会社Nttドコモ | 画像予測符号化方法、画像予測符号化装置、画像予測符号化プログラム、画像予測復号方法、画像予測復号装置及び画像予測復号プログラム |
JP5482735B2 (ja) * | 2011-05-30 | 2014-05-07 | 株式会社Jvcケンウッド | 画像復号装置、画像復号方法及び画像復号プログラム、並びに、受信装置、受信方法、及び受信プログラム |
MX2013012209A (es) * | 2011-05-31 | 2013-11-01 | Panasonic Corp | Metodo de codificacion de video, aparato de codificacion de video, metodo de decodificacion de video, aparato de decodificacion de video y aparato de codificacion/decodificacion de video. |
US9532058B2 (en) | 2011-06-03 | 2016-12-27 | Qualcomm Incorporated | Intra prediction mode coding with directional partitions |
US9654785B2 (en) * | 2011-06-09 | 2017-05-16 | Qualcomm Incorporated | Enhanced intra-prediction mode signaling for video coding using neighboring mode |
MX2013013909A (es) * | 2011-06-13 | 2014-01-24 | Panasonic Corp | Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imágenes. |
KR20180008797A (ko) * | 2015-06-15 | 2018-01-24 | 엘지전자 주식회사 | 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치 |
KR20180064414A (ko) * | 2015-10-13 | 2018-06-14 | 엘지전자 주식회사 | 비디오 신호의 인코딩, 디코딩 방법 및 장치 |
-
2012
- 2012-06-13 MX MX2013013909A patent/MX2013013909A/es active IP Right Grant
- 2012-06-13 RU RU2013154414A patent/RU2607246C2/ru active
- 2012-06-13 MY MYPI2013702379A patent/MY165837A/en unknown
- 2012-06-13 AU AU2012270960A patent/AU2012270960B2/en active Active
- 2012-06-13 JP JP2013520433A patent/JP5386657B2/ja active Active
- 2012-06-13 US US13/495,038 patent/US9860539B2/en active Active
- 2012-06-13 CA CA2838214A patent/CA2838214C/en active Active
- 2012-06-13 ES ES12799908T patent/ES2961495T3/es active Active
- 2012-06-13 WO PCT/JP2012/003839 patent/WO2012172791A1/ja active Application Filing
- 2012-06-13 PL PL12799908.4T patent/PL2720461T3/pl unknown
- 2012-06-13 CN CN201280028186.0A patent/CN103609110B/zh active Active
- 2012-06-13 BR BR112013031624-1A patent/BR112013031624B1/pt active IP Right Grant
- 2012-06-13 TW TW105129621A patent/TWI602421B/zh active
- 2012-06-13 TW TW101121098A patent/TWI556628B/zh active
- 2012-06-13 KR KR1020137032627A patent/KR101955051B1/ko active IP Right Grant
- 2012-06-13 EP EP12799908.4A patent/EP2720461B1/en active Active
-
2013
- 2013-08-28 JP JP2013177355A patent/JP5932733B2/ja active Active
-
2016
- 2016-04-28 JP JP2016092132A patent/JP6103408B2/ja active Active
-
2017
- 2017-11-21 US US15/819,572 patent/US10250887B2/en active Active
-
2019
- 2019-02-13 US US16/274,525 patent/US10484692B2/en active Active
- 2019-10-11 US US16/599,417 patent/US10887606B2/en active Active
-
2020
- 2020-11-30 US US17/106,691 patent/US11431989B2/en active Active
-
2022
- 2022-07-12 US US17/862,731 patent/US11758155B2/en active Active
-
2023
- 2023-07-20 US US18/224,241 patent/US20230370619A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI330976B (en) * | 2003-12-05 | 2010-09-21 | Trident Microsystems Far East | Method and apparatus for encoding/decoding dynamic graphic content |
TWI328357B (zh) * | 2003-12-15 | 2010-08-01 | Sony Corp | |
TWI329843B (en) * | 2004-01-14 | 2010-09-01 | Samsung Electronics Co Ltd | A reproducing apparatus for reproducing an interactive graphics stream from storage medium |
TWI327030B (en) * | 2004-12-06 | 2010-07-01 | Broadcom Corp | Two processor architecture supporting decoupling of outer loop and inner loop in video decoder |
WO2011031332A1 (en) * | 2009-09-14 | 2011-03-17 | Thomson Licensing | Methods and apparatus for efficient video encoding and decoding of intra prediction mode |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI556628B (zh) | Image decoding method and image decoding apparatus | |
TWI556609B (zh) | A reproducing method, a moving picture encoding method, a reproducing apparatus, a moving picture coding apparatus, and a moving picture encoding and decoding apparatus | |
TWI566580B (zh) | An image coding method, an image decoding method, an image coding apparatus, an image decoding apparatus, and an image coding / decoding apparatus | |
RU2593382C2 (ru) | Способ кодирования изображений, способ декодирования изображений, устройство кодирования изображений и устройство декодирования изображений | |
CA2771433A1 (en) | Coding and decoding of stereoscopic images with base and enhancement layers | |
TWI546778B (zh) | An image coding method, an image decoding method, an image coding apparatus, and an image decoding apparatus | |
WO2012117722A1 (ja) | 符号化方法、復号方法、符号化装置及び復号装置 | |
CA2877614A1 (en) | Image coding method, image decoding method, image coding apparatus, image decoding apparatus, image coding and decoding apparatus | |
EP3059974B1 (en) | Image encoding method, image decoding method, image encoding device, and image decoding device | |
JP6483028B2 (ja) | 画像符号化方法及び画像符号化装置 | |
JP2019118140A (ja) | 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置 | |
WO2013164903A1 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置 | |
WO2013076991A1 (ja) | 画像符号化方法、画像符号化装置、画像復号方法、および、画像復号装置 |