TW201412129A

TW201412129A - 圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置

Info

Publication number: TW201412129A
Application number: TW102128494A
Authority: TW
Inventors: Hisao Sasai; Takahiro Nishi; Youji Shibahara; Kyoko Tanikawa; Toshiyasu Sugio; Toru Matsunobu; Kengo Terada
Original assignee: Panasonic Corp
Priority date: 2012-08-09
Filing date: 2013-08-08
Publication date: 2014-03-16
Also published as: EP2884747A4; MX348737B; CN104509116A; CN104509116B; PH12015500197B1; EP2884747B1; US9800900B2; US9930372B2; US9237341B2; MX2015000630A; PL4002850T3; JP2015062324A; AU2017225114B2; BR112015001164B1; BR112015001164A2; US20140044163A1; KR102130046B1; CN108683917B; US20160088317A1; US10244267B2

Abstract

一種能以簡單之構成將圖像適切地解碼之圖像解碼方法，其是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼方法，該圖像解碼方法是將解碼對象塊算術解碼；判定解碼對象塊是否位於片之終端；當判定出不是位於片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之圖像之構成單位；當判定出是位於副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理。

Description

圖像解碼方法、圖像編碼方法、圖像解碼裝置、圖像編碼裝置及圖像編碼解碼裝置

發明領域

本發明是有關於動態圖像之編碼方法及解碼方法，尤其是有關於算術編碼方法及算術解碼方法等。

發明背景

關於作為次世代圖像編碼標準規格之HEVC(High Efficiency Video Coding)規格，為了提高編碼效率而進行著各式各樣之檢討(參照非專利文獻1)。以往，有以H.26x顯示之ITU-T(國際電信連合電信標準化部門)規格、及以MPEG-x顯示之ISO/IEC規格。現在，最新且最進展之圖像編碼規格是被作為以H.264/AVC或MPEG-4 AVC顯示之規格(參照非專利文獻2)的下個規格來檢討。

在被檢討之HEVC規格中，熵編碼是使用被稱作CABAC(Context-based Adaptive Binary Arithmetic Coding)之算術編碼。

先行技術文獻非專利文獻

非專利文獻1 Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 10th Meeting: Stockholm, SE, 11-20 July 2012, JCTVC-J1003_d7, " High efficiency video coding (HEVC) text specification draft 8

非專利文獻2 ITU-T Recommendation H.264「Advanced video coding for generic audiovisual services」、2010年3月

發明概要

然而，習知之圖像解碼方法及圖像編碼方法會有令用於執行遵循著該等方法之處理的構成變複雜之問題。

於是，本發明提供可藉由簡單之構成來將圖像解碼及編碼之圖像解碼方法及圖像編碼方法等。

與本發明之一態樣相關之動態圖像解碼方法是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼方法，該圖像解碼方法是將解碼對象塊算術解碼；判定前述解碼對象塊是否位於片(slice)之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理。

另外，該等包含態樣或具體態樣可藉由系統、方法、積體電路、電腦程式或電腦可讀取之CD-ROM(Compact Disc Read Only Memory)等記錄媒體來實現，亦可藉由系統、方法、積體電路、電腦程式及記錄媒體之任意組合來實現。

本發明之圖像解碼方法及圖像編碼方法可令用於進行圖像之解碼或編碼之構成簡單。

10、100‧‧‧圖像解碼裝置

11‧‧‧塊解碼部

12、22、112、802‧‧‧片終端判定部

13、23、113、223、803、903‧‧‧副終端判定部

14、24、115、225、805、905‧‧‧終端處理部

20、200‧‧‧圖像編碼裝置

21‧‧‧塊編碼部

110、800‧‧‧熵解碼部

111、801‧‧‧CTU解碼部

114、804‧‧‧位元組前頭探索部

116、226‧‧‧副終端處理部

120、230‧‧‧逆量化、逆轉換部

125、235‧‧‧加算器

130、240‧‧‧環路濾波器

140、250‧‧‧記憶體

150、260‧‧‧內預測部

160、280‧‧‧運動補償部

170、290‧‧‧內/間切換開關

181、851‧‧‧資料

182、852‧‧‧片終端旗標

183、853‧‧‧條件

184‧‧‧副終端位元

185、854‧‧‧位元列

185a、185b、855、856‧‧‧位元

205‧‧‧減算器

210‧‧‧轉換、量化部

220、900‧‧‧熵編碼部

221、901‧‧‧CTU編碼部

222、902‧‧‧片終端編碼部

224、904‧‧‧位元組調整部

270‧‧‧運動檢測部

ex100‧‧‧內容供給系統

ex101‧‧‧網際網路

ex102‧‧‧網際網路服務提供者

ex103‧‧‧串流伺服器

ex104‧‧‧電話網

ex106~ex110‧‧‧基地台

ex111‧‧‧電腦

ex112‧‧‧PDA

ex113、ex116‧‧‧相機

ex114‧‧‧行動電話

ex115‧‧‧遊戲機

ex117‧‧‧麥克風

ex200‧‧‧數位放送用系統

ex201‧‧‧廣播電台

ex202‧‧‧衛星

ex203‧‧‧纜線

ex204、ex205、ex350‧‧‧天線

ex210‧‧‧車

ex211‧‧‧汽車導航

ex212‧‧‧播放裝置

ex213、ex219‧‧‧顯示器

ex215、ex216‧‧‧記錄媒體

ex217‧‧‧機上盒(STB)

ex218‧‧‧讀取/記錄器

ex220‧‧‧遙控器

ex230‧‧‧資訊軌

ex231‧‧‧記錄塊

ex232‧‧‧內周領域

ex233‧‧‧資料記錄領域

ex234‧‧‧外周領域

ex235‧‧‧視訊串流

ex236、ex239、ex242、ex245‧‧‧PES封包列

ex237、ex240、ex243、ex246‧‧‧TS封包

ex238‧‧‧音訊串流

ex241‧‧‧演示圖形串流

ex244‧‧‧互動圖形

ex300‧‧‧電視

ex301‧‧‧調諧器

ex302‧‧‧調變/解調部

ex303‧‧‧多工/分離部

ex304‧‧‧聲音訊號處理部

ex305‧‧‧影像訊號處理部

ex306‧‧‧訊號處理部

ex307‧‧‧揚聲器

ex308、ex358‧‧‧顯示部

ex309‧‧‧輸出部

ex310、ex501‧‧‧控制部

ex311、ex361、ex505‧‧‧電源電路部

ex312‧‧‧操作輸入部

ex313‧‧‧橋接器

ex314‧‧‧槽部

ex315‧‧‧驅動器

ex316‧‧‧數據機

ex317‧‧‧介面部

ex318-ex321、ex404、ex508‧‧‧緩衝器

ex351‧‧‧發送/接收部

ex352‧‧‧調變/解調部

ex353‧‧‧多工/分離部

ex354‧‧‧聲音訊號處理部

ex355‧‧‧影像訊號處理部

ex356‧‧‧聲音輸入部

ex357‧‧‧聲音輸出部

ex359‧‧‧LCD控制部

ex360‧‧‧主控制部

ex362‧‧‧操作輸入控制部

ex363‧‧‧相機介面部

ex364‧‧‧槽部

ex365‧‧‧相機部

ex366‧‧‧操作鍵部

ex370、ex510‧‧‧匯流排

ex400‧‧‧資訊再生/記錄部

ex401‧‧‧光學頭

ex402‧‧‧調變記錄部

ex403‧‧‧再生解調部

ex405‧‧‧碟片馬達

ex406‧‧‧伺服控制部

ex407‧‧‧系統控制部

ex500‧‧‧LSI

ex502‧‧‧CPU

ex503‧‧‧記憶體控制器

ex504‧‧‧串流控制器

ex506‧‧‧串流I/O

ex507‧‧‧訊號處理部

ex509‧‧‧AVI/O

ex511‧‧‧記憶體

ex512‧‧‧驅動頻率控制部

ex800‧‧‧實施形態之構成

ex801-ex802、ex901-ex902、ex1001-ex1003‧‧‧解碼處理部

ex803‧‧‧驅動頻率切換部

ex900、ex1000‧‧‧構成例

BS‧‧‧位元串流

S21-S24、S101-S107、S201-S207、S801-S806、S901-S906、exS100-exS103、exS200-exS203‧‧‧步驟

圖1是顯示熵解碼部之構成的方塊圖。

圖2是顯示熵解碼部之處理動作的流程圖。

圖3A是顯示片之語法的圖。

圖3B是顯示片所包含有之位元列之語法的圖。

圖4是顯示熵編碼部之構成的方塊圖。

圖5是顯示熵編碼部之處理動作的流程圖。

圖6是顯示實施型態1之圖像解碼裝置之構成之一例的方塊圖。

圖7是顯示實施型態1之熵解碼部之構成之一例的方塊圖。

圖8是顯示實施型態1之熵解碼部之處理動作之一例的流程圖。

圖9是顯示實施型態1之片之語法之一例的圖。

圖10是顯示與實施型態1之變形例相關之位元列之語法之一例的圖。

圖11是顯示實施型態2之圖像編碼裝置之構成之一例的方塊圖。

圖12是顯示實施型態2之熵編碼部之構成之一例的方塊圖。

圖13是顯示實施型態2之熵編碼部之處理動作之一例的流程圖。

圖14A是顯示與本發明之一態樣相關之圖像解碼方法的流程圖。

圖14B是顯示與本發明之一態樣相關之圖像解碼裝置之構成的圖。

圖15A是顯示與本發明之一態樣相關之圖像編碼方法的流程圖。

圖15B是顯示與本發明之一態樣相關之圖像編碼裝置之構成的圖。

圖16是將內容遞送服務預以實現之內容供給系統的全體構成圖。

圖17是用於數位放送之系統的全體構成圖。

圖18是顯示電視之構成例的方塊圖。

圖19是顯示於記錄媒體(光碟)進行資訊之讀取寫入之資訊播放/記錄部之構成例的方塊圖。

圖20是顯示記錄媒體(光碟)之構造例的圖。

圖21A是顯示行動電話之一例的圖。

圖21B是顯示行動電話之構成例的方塊圖。

圖22是顯示多工資料之構成的圖。

圖23是示意地顯示各串流在多工資料中如何地被多工化的圖。

圖24是更詳細地顯示視訊串流如何地儲存於PES封包列的圖。

圖25是顯示多工資料中之TS封包與源(source)封包之構造的圖。

圖26是顯示PMT之資料構成的圖。

圖27是顯示多工資料資訊之內部構成的圖。

圖28是顯示串流屬性資訊之內部構成的圖。

圖29是顯示辯識影像資料之步驟的圖。

圖30是顯示將各實施形態之動態圖像編碼方法及動態圖像解碼化方法預以實現之積體電路之構成例的方塊圖。

圖31是顯示將驅動頻率預以切換之構成的圖。

圖32是顯示辯識影像資料而將驅動頻率預以切換之步驟的圖。

圖33是顯示將影像資料之規格與驅動頻率預以對應之查找表(look-up table)之一例的圖。

圖34A是顯示將訊號處理部之模組預以共有化之構成之一例的圖。

圖34B是顯示將訊號處理部之模組預以共有化之構成之另一例的圖。

用以實施發明之形態 (作為本發明之基礎之見解)

本發明人發現到習知之圖像解碼方法及圖像編碼方法會產生以下之問題。

CABAC之算術編碼之處理是將被稱作上下文之作為機率模型之索引的ctxIdx、受編碼之二進制訊號binVal輸入，一面更新作為顯示內部機率狀態之資訊的codIRange、codILow、firstBitFlag、及BitsOutstanding一面決定輸出碼列。

另外，內部機率狀態之資訊的初期值是設定成codIRange=510、codILow=0、firstBitFlag=1、BitsOutstanding=0。

另一方面，與CABAC對應之算術解碼之處理是將上述之作為機率模型之索引的ctxIdx、作為關聯資訊之ctxIdxTable、顯示出解碼對象之碼列是否有經過旁路解碼處理的bypassFlag輸入，一面更新作為顯示內部機率狀態之資訊的codIRange及codIOffset一面輸出解碼二進制訊號bin。

如上述，CABAC之處理是在算術編碼及算術解碼中分別一面更新內部機率狀態一面進行編碼或解碼之處理。又，CABAC之處理在從中途開始處理的情況下會發生針對同一構成單位(將圖像預以構成之單位，亦稱作處理單位)之內部機率狀態在編碼時與解碼時不一致。結果，圖像之編碼或解碼無法適切地進行。因此，編碼時及解碼時會進行終端處理。

在非專利文獻1所顯示之方法是於編碼時將顯示1之片終端旗標(end_of_slice)算術編碼而埋入至片的終端，進行終端處理。然後，於解碼時是將該片終端旗標預以算術解碼而進行終端處理。藉此，即使是在從中途開始CABAC之處理(算術編碼或算術解碼)的情況下，只要開始位置是片的前頭，則可使內部機率狀態在編碼時與解碼時一致。

然而，在HEVC規格中，除了片之外還有被稱作地磚(tile)之用於並列處理之構成單位、使被稱作WPP(波前處理)之並列處理成為可能之構成單位(以下叫作CTU線(CTU line))，對於該等處理單位並未進行終端處理。

圖1是顯示熵解碼部之構成的方塊圖。

該熵解碼部800進行CABAC之算術解碼，其具備CTU解碼部801、片終端判定部802、副終端判定部803、位元組前頭探索部804、及終端處理部805。

圖2是顯示熵解碼部800之處理動作的流程圖。

首先，熵解碼部800之CTU解碼部801將位元串流BS所含有之CTU(coding tree unit)算術解碼(步驟S801)。CTU是將圖片預以構成之塊。接著，片終端判定部802將片終端旗標(end_of_slice_flag)算術解碼(步驟S802)。接著，片終端判定部802判定出該經解碼之片終端旗標(end_of_slice_flag)是否顯示0(步驟S803)。在此，若判定出片終端旗標並非顯示0(在步驟S803為否)，則終端處理部805進行算術解碼之終端處理(步驟S804)。另一方面，若判定出片終端旗標是顯示0(在步驟S803為是)，則副終端判定部803判定出剛剛算術解碼之CTU是否位於副單位的終端 (步驟S805)。副單位是上述之地磚或CTU線。另外，CTU線是由排列於水平方向之複數CTU所形成之構成單位。

在此，若判定出是位於副單位之終端(在步驟 S805為是)，則位元組前頭探索部804進行位元組前頭探索(步驟S806)。位元組前頭探索是將位元串流中之位元列跳過讀取而探索位元組單位之前頭的處理。另一方面，在判定出不位於副單位之終端後(在步驟S805為否)或是在進行步驟S806之處理後，熵解碼部800對下一個CTU重覆執行由步驟S801開始之處理。

圖3A是顯示片之語法的圖。

片包含有顯示經編碼之CTU的資料 851(coding_tree_unit())、用於判定片之終端的經算術編碼之片終端旗標852(end_of_slice_flag)。再者，片在滿足條件853時包含有預定之位元列854(byte_alignment())。該條件853的條件是由資料851所顯示之CTU位於副單位之終端。

圖3B是顯示位元列854之語法的圖。

位元列854包含有顯示1的位元855(bit_equal_to_one)、個數是與需求對應之顯示0的位元856(bit_equal_to_zero)。該位元列854是以令經編碼之副單位之位元數成為位元組單位之整數倍的方式被包含在位元串流內，其並非經過算術編碼者，而是顯示0或1之碼。位元組前頭探索是跳過讀取該位元列854。

圖4是顯示熵編碼部之構成的方塊圖。

該熵編碼部900進行CABAC之算術編碼，其具備CTU編碼部901、片終端編碼部902、副終端判定部903、位元組調整部904、及終端處理部905。

圖5是顯示熵編碼部900之處理動作的流程圖。

首先，熵編碼部900之CTU編碼部901將編碼對象訊號所含有之CTU算術編碼(步驟S901)。接著，片終端編碼部902將片終端旗標(end_of_slice_flag)算術編碼(步驟S902)。接著，片終端編碼部902判定出該片終端旗標(end_of_slice_flag)是否為0(步驟S903)。在此，若判定出片終端旗標不為0(在步驟S903為否)，則終端處理部905進行算術編碼之終端處理(步驟S904)。另一方面，若判定出片終端旗標為0(在步驟S903為是)，則副終端判定部903判定出剛剛算術編碼之CTU是否位於副單位之終端(步驟S905)。

在此，若判定出是位於副單位之終端(在步驟 S905為是)，則位元組調整部904進行位元組調整(步驟S906)。又，在判定出不位於副單位之終端後(在步驟S905為否)或是在進行步驟S906之處理後，熵編碼部900對下一個CTU重覆執行由步驟S901開始之處理。

如此之圖像解碼方法及圖像編碼方法在對位於副單位之終端的CTU算術解碼或算術編碼後不進行終端處理。因此，在將複數之副單位並列處理時等，因為從位元串流BS或編碼對象訊號之中途來進行處理，故會產生與該副單位對應CABAC之內部機率狀態在編碼時與解碼時相異的情況。亦即，有著無法適切地進行圖像之編碼及解碼的課題。

為了解決如此之課題，可以想到的是不使用副單位而令片成為更細的單位。然而，此情況將會產生如編碼效率降低之其他課題。

又，作為其他之解決方法，可以想到的是在對位於副單位之終端之CTU算術解碼或算術編碼後，單純地進行終端處理。然而，此情況下會需要設置在該副單位之終端進行終端處理之新的處理部，有構成變複雜的問題。

為了解決如此之問題，與本發明之一態樣相關之圖像解碼方法是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼方法，該圖像解碼方法是將解碼對象塊算術解碼；判定前述解碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理。

藉此，即便經算術解碼之塊不位於片之終端，但只要是位於副單位之終端則進行算術解碼之終端處理，因此，可將位元串流所含有之複數副單位適切地並列地解碼。又，藉由使用片與副單位，可將抑制編碼效率降低之位元串流適切地解碼。再者，因為在副單位之終端是進行包含副終端位元之算術解碼與終端處理之處理，故在片之終端進行包含旗標之算術解碼與終端處理之處理的情況下，可將在副單位之終端與片之終端執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像解碼。

又，前述圖像解碼方法亦可更於判定出前述解碼對象塊是位於片之終端時，進行算術解碼之終端處理作為第2終端處理；在進行前述第1終端處理之際是進行與前述第2終端處理相同之處理。

藉此，因為在片之終端進行之終端處理與在副單位之終端進行之終端處理相同，故能以更簡單之構成來將圖像解碼。

又，前述圖像解碼方法亦可更將顯示前述解碼對象塊是否位於片之終端的片終端旗標予以算術解碼；前述是否位於片之終端的判定是當經算術解碼之前述片終端旗標顯示預定之值時，判定前述解碼對象塊是位於片之終端；前述副終端位元之算術解碼是利用該算術解碼而復原與前述預定之值相同之值。舉例來說，前述副終端位元之算術解碼是利用該算術解碼而復原1。

藉此，因為在片之終端進行之終端處理與在副單位之終端進行之終端處理分別在可利用1位元之算術解碼而獲得相同值的情況下被執行，故可將在副單位之終端與片之終端執行之處理更加共用化。

又，前述圖像解碼方法亦可更於進行前述第1終端處理之後進行將位元列跳過讀取之處理，該位元列是以令包含前述副單位及前述副終端位元之位元長成為預定之N(N為2以上之整數)位元之倍數的方式寫入前述位元串流。

藉此，進行例如位元組前頭探索，結果，可於位元組單位進行適切之解碼。

又，前述副終端位元之算術解碼亦可是以前述位元列之前頭之位元作為前述副終端位元來算術解碼。

藉此，可將因為不需要於位元串流包含新的位元來作為副終端位元故能抑制編碼效率降低之位元串流適切地解碼。

又，為了解決上述之問題，與本發明之一態樣相關之圖像編碼方法是藉由將圖像依各塊來予以編碼而生成位元串流之圖像編碼方法，該圖像編碼方法是將編碼對象塊算術編碼；判定前述編碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術編碼，進行算術編碼之終端處理作為第1終端處理。

藉此，即便經算術編碼之塊不位於片之終端，但只要是位於副單位之終端則進行算術編碼之終端處理，因此，可將位元串流所含有之複數副單位適切地並列地編碼。又，藉由使用片與副單位，可抑制編碼效率之降低。再者，因為在副單位之終端是進行包含副終端位元之算術編碼與終端處理之處理，故在片之終端進行包含旗標之算術編碼與終端處理之處理的情況下，可將在副單位之終端與片之終端執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像編碼。

又，前述圖像編碼方法亦可更於判定出前述編碼對象塊是位於片之終端時，進行算術編碼之終端處理作為第2終端處理；在進行前述第1終端處理之際是進行與前述第2終端處理相同之處理。

又，前述圖像編碼方法亦可更將顯示前述編碼對象塊是否位於片之終端的片終端旗標予以算術編碼；前述是否位於片之終端的判定是當前述片終端旗標顯示預定之值時，判定前述編碼對象塊是位於片之終端；前述副終端位元之算術編碼是將顯示與前述預定之值相同之值的前述副終端位元算術編碼。舉例來說，前述副終端位元之算術編碼是將顯示1的前述副終端位元算術編碼。

藉此，因為在片之終端進行之終端處理與在副單位之終端進行之終端處理分別在將顯示相同值之1位元算術編碼的情況下被執行，故可將在副單位之終端與片之終端執行之處理更加共用化。

又，前述圖像編碼方法亦可更於進行前述第1終端處理之後，以令包含經算術編碼之前述副單位及前述副終端位元之位元長成為預定之N(N為2以上之整數)位元之倍數的方式將位元列寫入前述位元串流。

藉此，可於例如位元組單位進行適切之編碼。

又，前述副終端位元之算術編碼亦可是以前述位元列之前頭之位元作為前述副終端位元來算術編碼。

藉此，因為不需要於位元串流包含新的位元來作為副終端位元，故能抑制編碼效率之降低。

另外，該等包含態樣或具體態樣可藉由系統、方法、積體電路、電腦程式或電腦可讀取之CD-ROM等記錄媒體來實現，亦可藉由系統、方法、積體電路、電腦程式或記錄媒體之任意組合來實現。

以下，一面參照圖面一面具體地說明實施型態。

另外，在以下說明之實施形態每個都是顯示包含例或具體例。在以下之實施形態所顯示之數值、形狀、材料、構成要素、構成要素之配置位置及連接形態、步驟、步驟之順序等是一例，其主旨並非限制本發明。又，在以下之實施型態中之構成要素中，未記載於顯示最上位概念之獨立請求項的構成要素是作為任意之構成要素來說明。另外，在下述中，有時編碼(coding)是作為encoding的意思來使用。

(實施型態1)

圖6是顯示本實施型態之圖像解碼裝置之構成之一例的方塊圖。

本實施型態之圖像解碼裝置100是將作為經壓縮編碼之圖像資料的位元串流BS解碼。舉例來說，圖像解碼裝置100是依各個塊來解碼位元串流BS。亦即，圖像解碼裝置100藉由對解碼對象塊進行可變長解碼、逆量化及逆轉換等而將圖像資料復原。

如圖6所示，圖像解碼裝置100具備：熵解碼部110；逆量化、逆轉換部120；加算器125；環路濾波器130；記憶體140；內(intra)預測部150；運動補償部160；內/間(intra/inter)切換開關170。

熵解碼部110藉由對位元串流BS可變長解碼，而依各個塊將該塊所含有之複數量化係數復原。又，熵解碼部110由位元串流BS取得運動資料，將所取得之運動資料朝運動補償部160輸出。

逆量化、逆轉換部120藉由對熵解碼部110所復原之量化係數進行逆量化，而將轉換係數復原。然後，逆量化、逆轉換部120對經復原之轉換係數進行逆轉換(逆頻率轉換)。藉此，依位元串流BS所含有之每個塊而復原與該塊對應之預測誤差訊號。

加算器125藉由將經復原之預測誤差訊號與預測訊號加算，而生成解碼圖像。

環路濾波器130對經生成之解碼圖像進行例如去塊過濾器(deblocking filter)處理等之環路濾波器處理。經環路濾波器處理之解碼圖像是作為解碼訊號而輸出。

記憶體140是用來儲存用於運動補償之參考圖像的記憶體。具體而言，記憶體140將實施過環路濾波器處理之解碼圖像儲存作為參考圖像。

內預測部150藉由遵循畫面內預測模式來進行內預測，而生成預測訊號(內預測訊號)。具體而言，內預測部150是藉由參考加算器125所生成之解碼圖像中之解碼對象塊之周圍的圖像，對該解碼對象塊進行內預測。藉此，內預測部150生成內預測訊號。

運動補償部160藉由基於由熵解碼部110輸出之運動資料進行運動補償，而生成針對解碼對象塊之預測訊號(間預測訊號)。

內/間切換開關170是選擇內預測訊號及間預測訊號之任一者，將所選擇之訊號作為預測訊號而朝加算器125輸出。

藉由以上之構成，本實施型態之圖像解碼裝置 100將經壓縮編碼之圖像資料解碼。

在此，本實施型態之圖像解碼裝置100之熵解碼部110是藉由將位元串流BS算術解碼，而將該位元串流BS可變長解碼。

由本實施型態之熵解碼部110所進行之算術解碼不論是並列處理或逐次處理皆可正確地將位元串流BS予以適切地解碼。因此，在HEVC中，於使用副單位且需要高速處理的情況下，安裝本實施型態之算術解碼之好處非常大。

以下，針對該熵解碼部110之算術解碼進行詳細說明。

圖7是顯示本實施型態之熵解碼部110之構成之一例的方塊圖。本實施型態之熵解碼部110具備CTU解碼部111、片終端判定部112、副終端判定部113、副終端處理部116、位元組前頭探索部114、及終端處理部115。如此之熵解碼部110將包含有量化係數等之解碼資料及片處理終端訊號從位元串流BS予以復原。

圖8是顯示本實施型態之熵解碼部110之處理動作之一例的流程圖。

首先，CTU解碼部111是基於預定之方法自位元串流BS將CTU(coding_tree_unit())算術解碼(步驟S101)。在此CTU是用於構成圖片之預先決定之編碼單位，例如16x16像素、32x32像素、或64x64像素之塊。位元串流BS所含有之經編碼之CTU舉例來說是包含如下資訊之資訊群：與針對該CTU之預測圖像(預測訊號)之生成方法相關之資訊；與將作為該預測圖像和原圖像之差分的預測誤差訊號予以轉換及量化後而獲得之訊號(量化係數)相關之資訊。

接著，片終端判定部112將顯示出在步驟S101經算術解碼之CTU是否位於片之終端的片終端旗標(end_of_slice_flag)算術解碼(步驟S102)。舉例來說，在依各CTU對圖片內進行處理的情況下，片是以依光柵(raster)順而設置之分割點將圖片予以分割而獲得之各領域(詳細請參考非專利文獻1)。又，片終端旗標是藉由顯示1而顯示出與該旗標對應之CTU(亦即剛剛算術解碼之CTU)是位於片之終端，藉由顯示0而顯示出該CTU不位於片之終端。

接著，片終端判定部112判定出片終端旗標 (end_of_slice_flag)是否顯示0(步驟S103)。在此，若判定出片終端旗標並非顯示0而是顯示1、亦即判定出CTU是位於片之終端(在步驟S103為否)，則終端處理部115進行算術解碼之終端處理(步驟S104)。算術解碼之終端處理是不將算術解碼之內部機率狀態再正規化、而以位元串流BS所含有之下一個解碼對象訊號可解碼的方式調整位元串流指標之處理。另外，該終端處理可更進一步是例如從位元串流BS讀取出7位元。又，終端處理部115將顯示CTU是位於片之終端的訊號(片處理終端訊號)予以輸出。舉例來說，該片處理終端訊號是用於下一個片之處理之執行之通知等。

另一方面，若判定出片終端旗標是顯示0(在步驟S103為是)、亦即判定出剛剛算術解碼之CTU不位於片之終端，則副終端判定部113判定出該CTU是否位於副單位的終端(步驟S105)。

副單位是例如地磚或CTU線等之處理單位。地磚是將畫面內垂直及/或水平地分割而可形成之塊，1個地磚是以1個以上之CTU構成。又，因為可以從各地磚之前頭開始處理編碼/解碼，故地磚是可用於並列處理之構成單位。又，CTU線是將前述之片或圖片依每一線(line)來分割而獲得之構成單位。在從圖片之左端來進行處理之被稱作WPP(波前處理)的手法下，相對於算術編碼及算術解碼之處理對象之CTU位於右上之CTU之終端之上下文資訊(機率資訊)被使用作為該處理對象CTU之初期機率。如此之WPP因為在初期機率取得對象之CTU的處理結束時即可開始處理對象CTU之算術編碼或算術解碼，故可將複數之CTU線並列處理(關於詳細，亦可是進行與非專利文獻1所記載之處理相同之處理)。

在此，舉例來說，當副單位是地磚時，副終端判定部113在上述步驟S105是比較剛剛算術解碼之CTU之地磚ID與下一個CTU之地磚ID而判定出是否相異。藉此，判定出該剛剛算術解碼之CTU是否位於地磚之終端(參考後述之圖9)。另外，地磚ID是用於分辨CTU目前屬於那個地磚之內部資訊。具體而言，副終端判定部113是當比較對象之2個地磚ID相異時，判定出剛剛算術解碼之CTU是位於副單位之終端。又，當副單位是CTU線時，副終端判定部113在上述步驟S105是判定出剛剛算術解碼之CTU之下一個CTU是否位於圖片之左端。另外，當圖片有被地磚分割時，則判定出下一個CTU是否位於地磚之左端。藉此，判定出剛剛算術解碼之CTU是否位於CTU線之終端(參考後述之圖9)。具體而言，副終端判定部113是當下一個CTU位於圖片(或地磚)之左端時，判定出剛剛算術解碼之CTU是位於CTU線之終端。

若在步驟S105判定出CTU是位於副單位之終端(在步驟S105為是)，則副終端處理部116將顯示副單位之終端的1位元(副終端位元)算術解碼，執行副終端處理(步驟S106)。另外，藉由將副終端位元算術解碼而總是復原1。換句話說，事先顯示1之副終端位元受算術編碼，而以配置於位於副單位之終端之CTU之後的方式被包含在位元串流BS。又，算術解碼之副終端處理是與終端處理部115在步驟S104進行之算術解碼之終端處理相同之處理。

在該副終端處理已進行後，位元組前頭探索部 114進行探索下一個位元組單位之前頭的處理，亦即進行與圖2所示之步驟S806是相同處理之位元組前頭探索(步驟S107)。亦即，因為於位元組單位決定有開始地點，故位元組前頭探索部114探索下一個位元組單位之前頭，使位元串流指標移動至該前頭。另外，被探索之位元組單位之前頭是下一個副單位之前頭。然後，在步驟S105被判定出CTU不位於副單位之終端後(在步驟S105為否)、或是在進行步驟S107之位元組前頭探索後，熵解碼部110對下一個CTU重覆執行由步驟S101開始之處理。

圖9是顯示本實施型態之片之語法之一例的圖。

本實施型態之片包含有顯示經編碼之CTU的資料181(coding_tree_unit())、用於判定片之終端的經算術編碼之片終端旗標182(end_of_slice_flag)。再者，片在滿足條件183時包含有經算術編碼之上述之副終端位元184(end_of_sub_stream_one_bit)、預定之位元列185(byte_alignment())。

在本實施型態之片中，資料181、片終端旗標182、條件183及位元列185是分別與圖3A所示之片中之資料851、片終端旗標852、條件853及位元列854相同構成。而且，本實施型態之片是與圖3A所示之片不同、包含有經算術編碼之副終端位元184(end_of_sub_stream_one_bit)。

條件183的條件是由資料181所顯示之CTU位於副單位之終端。具體而言，條件183是該CTU不位於片之終端且該CTU位於地磚之終端的第1條件、或是該CTU不位於片之終端且該CTU位於CTU線之終端的第2條件。

更具體而言，第1條件之條件是片終端旗標 (end_of_slice_flag)顯示0且tiles_enabled_flag為真、TileID[x]與TileID[x-1]相異。當tiles_enabled_flag為真時，該tiles_enabled_flag表示副單位是地磚。TileID[x]是表示由資料181顯示之CTU之下一個CTU之地磚ID，TileID[x-1]是表示由資料181顯示之CTU之地磚ID。

第2條件之條件是片終端旗標(end_of_slice_flag) 顯示0且entropy_coding_sync_enabled_flag為真、由資料181顯示之CTU之下一個CTU位於圖片之左端。當entropy_coding_sync_enabled_flag為真時，該entropy_coding_sync_enabled_flag表示副單位是CTU線。當下一個CTU位於圖片之左端時，將由資料181顯示之CTU之下一個CTU之位址除以圖片之橫寬所得到之餘數為0。另外，條件183所示之CTB(Ctb)是以與CTU相同之意思來使用。

熵解碼部110將資料181(coding_tree_unit())與片終端旗標182(end_of_slice_flag)算術解碼。然後，熵解碼部110判定出是否滿足條件183，當判定出滿足時是藉由將副終端位元184(end_of_sub_stream_one_bit)算術解碼而取得(復原)值「1」。然後，熵解碼部110以取得該值「1」為觸發(trigger)，進行算術解碼之副終端處理，進行作為跳過讀取位元列185之處理的位元組前頭探索。另外，經算術解碼後之副終端位元184(end_of_sub_stream_one_bit)總是顯示「1」，當不滿足條件183時，於片中不包含有該副終端位元184。

如此，在剛剛算術解碼之CTU位於副單位之終端的情況下，本實施型態進行與在剛剛算術解碼之CTU位於片之終端的情況下所進行之終端處理是相同處理的副終端處理。因此，圖像解碼裝置100可以從藉由步驟S107之處理而探索之下一個位元組單位之前頭、亦即位元串流BS之中途開始CTU之算術解碼。結果，圖像解碼裝置100可將位元串流BS所含有之複數構成單位逐次地解碼，並可將該等複數構成單位並列地解碼。該等複數構成單位可以是複數片，亦可以是複數副單位。

如此，因為本實施型態令對複數副單位並列地執行算術解碼成為可能，故在例如將高解析度之動態圖像予以實際時間播放等需要高速處理的情況下很有用。又，因為本實施型態是在副單位之終端藉由正確地將算術解碼之內部機率狀態重置等來進行終端處理，故即便在對複數副單位並列地執行算術解碼的情況下，亦不會於編碼時與解碼時內部機率狀態相異，使正確地解碼位元串流BS成為可能。

又，本實施型態在CTU位於片之終端的情況下是不進行副終端位元之算術解碼與副終端處理。因此，可將因為當CTU位於片之終端時不需要令作為冗餘碼之副終端位元包含於位元串流BS中故能夠一面抑制編碼效率之劣化一面執行並列處理之位元串流BS適切地解碼。

再者，因為本實施型態在副單位之終端是進行包含副終端位元之算術解碼與終端處理之處理，故可將在副單位之終端與片之終端所執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像解碼。換句話說，在片之終端所進行之處理、亦即以對1位元算術解碼而復原值「1」作為觸發來進行算術解碼之終端處理的構成不只是可用於片之終端，亦可用於副單位之終端。藉此，因為可將該構成使用於多處，故可令將圖像予以解碼之構成簡單。具體而言，副終端處理部116可利用來自片終端判定部112與終端處理部115之機能。

(變形例)

在上述實施型態1是將副終端位元184算術解碼，將包含顯示出值「1」之前頭之位元的位元列185跳過讀取，但在本變形例是將該前頭之位元作為副終端位元184來予以算術解碼。亦即，在本變形例是省略圖9所示之副終端位元184，取而代之的是上述之位元列185之前頭之位元被作為副終端位元來使用。即便是如此之本變形例，亦可發揮與上述實施型態1相同之效果。

圖10是顯示與本變形例相關之位元列185之語法之一例的圖。

與本變形例相關之位元列185包含有藉由算術解碼而復原值「1」之位元185a、未被算術解碼且個數是與需求對應之顯示0之位元185b。亦即，與本變形例相關之位元列185之前頭之位元185a並不是如上述實施型態1般之顯示值「1」之位元，其是藉由將值「1」算術編碼而獲得之位元。

另外，在圖10之Descriptor中所顯示之f(1)是表示不對位元串流所含有之與該f(1)具有對應關係之資料(位元)使用算術編碼或算術解碼。亦即，f(1)是表示位元串流所含有之資料(位元)之值本身應被當作該資料之本來之值來認識。舉例來說，當位元串流所含有之位元是顯示「0」時，以該位元之本來之值「0」來認識，當位元串流所含有之位元是顯示「1」時，以該位元之本來之值「1」來認識。另一方面，ae(v)是表示對位元串流所含有之與該ae(v)具有對應關係之資料(位元)使用算術編碼或算術解碼。更具體而言，ae(v)是表示對位元串流所含有之資料(位元)基於前述之機率資訊或顯示內部機率狀態之資訊而進行算術編碼或算術解碼。

如此之本變形例可發揮與上述實施型態1相同之效果，且可令應編碼及解碼之資料於各副單位減少1位元，可提高編碼效率。

另外，在上述實施型態1及其變形例雖然是於藉由將1位元(副終端位元)解碼來將值「1」復原時進行算術解碼之副終端處理，但亦可於將其他之值復原時進行副終端處理。舉例來說，其他之值可為「0」，只要是事先決定好即可。又，亦可是將表示CTU是否位於副單位之終端的旗標(例如end_of_sub_stream_flag)予以算術解碼來取代副終端位元。亦即，熵解碼部110是於片終端旗標(end_of_slice_flag)顯示0時，將副終端旗標(end_of_sub_stream_flag)算術解碼。然後，熵解碼部110是於判定出該副終端旗標顯示1時，進行與片終端旗標顯示1時所進行之終端處理相同之算術解碼之終端處理，且進行位元組前頭探索(byte_alignment())。又，熵解碼部110是於判定出該副終端旗標顯示0時，繼續將下一個CTU算術解碼之處理。即便是如此地使用副終端旗標，亦可發揮與上述實施型態1及其變形例相同之效果。

另外，上述實施型態1及其變形例是於剛剛算術解碼之CTU位於副單位之終端時進行算術解碼之副終端處理。換句話說，上述實施型態1及其變形例是於剛剛算術解碼之CTU的下一個被算術解碼之CTU位於副單位之前頭時，進行算術解碼之副終端處理。又，上述實施型態1及其變形例是於剛剛算術解碼之CTU位於片之終端時進行算術解碼之終端處理，當該CTU不位於片之終端而是位於副單位之終端時，進行與算術解碼之終端處理是相同處理之副終端處理。因此，可避免算術解碼之終端處理被重複執行、進行適切之算術解碼。

(實施型態2)

圖11是顯示本實施型態之圖像編碼裝置之構成之一例的方塊圖。

本實施型態之圖像編碼裝置200是生成由實施型態1之圖像解碼裝置100來解碼之位元串流BS，其具備減算器205；轉換、量化部210；熵編碼部220；逆量化、逆轉換部230；加算器235；環路濾波器240；記憶體250；內預測部260；運動檢測部270；運動補償部280；內/間切換開關290。

減算器205是把顯示將圖像資料予以構成之塊的輸入訊號與預測訊號的差分予以算出，亦即算出預測誤差訊號。轉換、量化部210是藉由將空間領域之預測誤差訊號予以轉換(頻率轉換)，而生成頻率領域之轉換係數。舉例來說，轉換、量化部210藉由對預測誤差訊號進行DCT(Discrete Cosine Transform)轉換而生成轉換係數。再者，轉換、量化部210藉由將轉換係數量化而生成量化係數。

熵編碼部220藉由將量化係數可變長編碼而生成位元串流BS。又，熵編碼部220將運動檢測部270所檢測出之運動資料(例如運動向量)可變長編碼且包含在位元串流BS而予以輸出。

逆量化、逆轉換部230藉由將量化係數予以逆量化而將轉換係數復原。再者，逆量化、逆轉換部230藉由將經復原之轉換係數予以逆轉換而將預測誤差訊號復原。另外，由於經復原之預測誤差訊號是因為量化而失去資訊，故與減算器205生成之預測誤差訊號不一致。亦即，經復原之預測誤差訊號包含有量化誤差。

加算器235藉由將經復原之預測誤差訊號與預測訊號加算而生成局部解碼圖像。環路濾波器240是對所生成之局部解碼圖像進行去塊過濾器處理等之環路濾波器處理。

記憶體250是用來儲存用於運動補償之參考圖像的記憶體。具體而言，記憶體250將實施過環路濾波器處理之局部解碼圖像儲存作為參考圖像。

內預測部260藉由遵循畫面內預測模式來進行內預測，而生成預測訊號(內預測訊號)。具體而言，內預測部260是藉由參考加算器235所生成之局部解碼圖像中之編碼對象塊(輸入訊號)之周圍的圖像，對該編碼對象塊進行內預測。藉此，內預測部260生成內預測訊號。

運動檢測部270檢測出顯示輸入訊號與記憶體250所儲存之參考圖像之間之運動的運動資料(例如運動向量)。運動補償部280則基於所檢測出之運動資料來進行運動補償，藉此生成對編碼對象塊之預測訊號(間預測訊號)。

內/間切換開關290是選擇內預測訊號及間預測訊號之任一者，將所選擇之訊號作為預測訊號而朝減算器205及加算器235輸出。

藉由以上之構成，本實施型態之圖像編碼裝置200將圖像資料予以編碼。

在此，本實施型態之圖像編碼裝置200之熵編碼部220是藉由將包含有量化係數及運動資料之編碼對象訊號、亦即包含有各CTU之編碼對象訊號算術編碼，而將該編碼對象訊號可變長編碼。

由本實施型態之熵編碼部220所進行之算術編碼可生成不論是並列處理或逐次處理皆可正確地解碼之位元串流BS。因此，在HEVC中，於使用副單位且需要高速處理的情況下，安裝本實施型態之算術編碼之好處非常大。

以下，針對該熵編碼部220之算術編碼進行詳細說明。另外，該算術編碼是與在實施型態1所說明之算術解碼對應之算術編碼。

圖12是顯示本實施型態之熵編碼部220之構成之一例的方塊圖。本實施型態之熵編碼部220具備CTU編碼部221、片終端編碼部222、副終端判定部223、副終端處理部226、位元組調整部224、及終端處理部225。如此之熵編碼部220將編碼對象訊號予以算術編碼而輸出位元串流BS。又，熵編碼部220是因應需要而輸出用於通知將對片之處理予以結束之片處理終端訊號。

圖13是顯示本實施型態之熵編碼部220之處理動作之一例的流程圖。

首先，CTU編碼部221是基於預定之方法將編碼對象訊號所含有之CTU(coding_tree_unit())算術編碼(步驟S201)。又，CTU編碼部221將經如此地算術編碼之CTU插入位元串流BS而輸出。或者是，CTU編碼部221將該經算術編碼之CTU儲存於例如圖像編碼裝置200內之記憶體。

接著，片終端編碼部222將顯示出在步驟S201經算術編碼之CTU是否位於片之終端的上述片終端旗標 (end_of_slice_flag)算術編碼(步驟S202)。接著，片終端編碼部222判定出片終端旗標(end_of_slice_flag)是否顯示0(步驟S203)。在此，若判定出片終端旗標並非顯示0而是顯示1、亦即判定出CTU是位於片之終端(在S203為否)，則終端處理部225進行算術編碼之終端處理(步驟S204)。與通常之算術編碼不同，算術編碼之終端處理是為了將算術編碼之內部機率狀態重置而執行的處理。亦即，算術編碼是在作為編碼對象之二進制訊號之編碼時、將內部機率狀態更新之後，會有未輸出位元列的情況。於是，算術編碼之終端處理是因為未輸出位元列之狀況下會失去資訊而執行之處理，具體而言，包含有如非專利文獻1之EncoderFlush這樣的處理。藉由如此之算術編碼之終端處理，內部機率狀態被寫到位元串流BS，以生成可正確地解碼之位元串流BS。又，終端處理部225將顯示CTU是位於片之終端的訊號(片處理終端訊號)予以輸出。舉例來說，該片處理終端訊號是用於下一個片之處理之執行之通知等。

另一方面，若判定出片終端旗標是顯示0(在步驟S203為是)，亦即剛剛算術編碼之CTU不位於片之終端時，副終端判定部223判定出該CTU是否位於副單位的終端(步驟S205)。副單位是上述地磚或CTU線，副終端判定部223以與實施型態1相同之方法判定出是否位於副單位之終端。

若判定出CTU是位於副單位之終端(在步驟S205 為是)，則副終端處理部226將顯示副單位之終端的1位元 (副終端位元)算術編碼，執行副終端處理(步驟S206)。另外，此時被算術編碼的是總是顯示1之副終端位元。亦即，事先顯示1之副終端位元受算術編碼，而以配置於位於副單位之終端之CTU之後的方式被包含在位元串流BS。又，算術編碼之副終端處理是與終端處理部225在步驟S204進行之算術編碼之終端處理相同之處理。

於進行該副終端處理之後，位元組調整部224是進行位元組調整，將N位元(N是0以上之整數)寫入位元串流BS以使經編碼之副單位之位元數成為位元組單位之整數倍(步驟S207)。亦即，位元組調整部224以下一個受算術編碼之CTU之前頭成為位元組單位之前頭的方式將N位元寫入，使位元串流指標移動至該前頭。

又，在判定出不位於副單位之終端後(在步驟 S205為否)或是在進行步驟S207之處理後，熵編碼部220對下一個CTU重覆執行由步驟S201開始之處理。

另外，本實施型態之熵編碼部220是遵循圖9所示之語法將片算術編碼。

亦即，熵編碼部220將經算術編碼之CTU生成資料181(coding_tree_unit())、生成經算術編碼之片終端旗標182(end_of_slice_flag)，包含於位元串流BS。然後，熵編碼部220判定出是否滿足條件183，當判定出滿足時是將顯示值「1」之副終端位元184(end_of_sub_stream_one_bit)算術編碼而包含於位元串流BS。然後，熵編碼部220以該副終端位元184之算術編碼為觸發，進行算術編碼之副終端處理，進行作為寫入位元列185之處理的位元組調整。另外，當不滿足條件183時，熵編碼部220不算術編碼副終端位元184，亦不進行位元組調整。結果，當不滿足條件183時，於片中不包含有經算術編碼之副終端位元184及位元列185。

如此，在剛剛算術編碼之CTU位於副單位之終端的情況下，本實施型態進行與在剛剛算術編碼之CTU位於片之終端的情況下所進行之終端處理是相同處理的副終端處理。因此，圖像解碼裝置200可以從藉由步驟S207之處理而寫入之位元列之後端、亦即編碼對象訊號之中途開始CTU之算術編碼。結果，圖像編碼裝置200可將編碼輸入訊號所含有之複數構成單位逐次地編碼，並可將該等複數構成單位並列地編碼。該等複數構成單位可以是複數片，亦可以是複數副單位。

如此，因為本實施型態令對複數副單位並列地執行算術編碼成為可能，故在例如將高解析度之動態圖像予以實際時間錄影等需要高速處理的情況下很有用。又，因為本實施型態是在副單位之終端藉由正確地將算術編碼之內部機率狀態重置等來進行終端處理，故即便在對複數副單位並列地執行算術編碼的情況下，亦不會於編碼時與解碼時內部機率狀態相異，使正確地生成位元串流BS成為可能。

又，本實施型態在CTU位於片之終端的情況下是不進行副終端位元之算術編碼與副終端處理。因此，因為當CTU位於片之終端時不需要令作為冗餘碼之副終端位元包含於位元串流BS中，故能夠一面抑制編碼效率之劣化一面執行並列處理。

再者，因為本實施型態在副單位之終端是進行包含副終端位元之算術編碼與終端處理之處理，故可將在副單位之終端與片之終端所執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像解碼。換句話說，在片之終端所進行之處理、亦即以對1位元算術編碼而復原值「1」作為觸發來進行算術編碼之終端處理的構成不只是可用於片之終端，亦可用於副單位之終端。藉此，因為可將該構成使用於多處，故可令將圖像予以編碼之構成簡單。具體而言，副終端處理部226可利用來自片終端編碼部222與終端處理部225之機能。

(變形例)

在上述實施型態2是將副終端位元184算術編碼，將包含顯示出值「1」之前頭之位元的位元列185跳過讀取，但在本變形例是將該前頭之位元作為副終端位元184來予以算術編碼。亦即，在本變形例是省略圖9所示之副終端位元184，取而代之的是上述之位元列185之前頭之位元185a(參考圖10)被作為副終端位元來使用。即便是如此之本變形例，亦可發揮與上述實施型態2相同之效果。另外，本變形例是對應於與實施型態1之變形例相關之圖像解碼方法的圖像編碼方法。

如圖10所示，與本變形例相關之熵編碼部220將位元列185寫入位元串流BS，該位元列185包含有藉由將顯示值「1」之位元算術編碼而生成之位元185a、未被算術編碼且個數是與需求對應之顯示0之位元185b。亦即，與本變形例相關之位元列185之前頭之位元185a並不是如上述實施型態1般之顯示值「1」之位元，其是藉由將值「1」算術編碼而獲得之位元。

另外，在上述實施型態1及其變形例雖然是於將顯示值「1」之1位元(副終端位元)編碼時進行算術編碼之副終端處理，但亦可於將顯示其他之值之位元算術編碼時進行副終端處理。舉例來說，其他之值可為「0」，只要是事先決定好即可。又，亦可是將表示CTU是否位於副單位之終端的旗標(例如end_of_sub_stream_flag)予以算術編碼來取代副終端位元。亦即，熵編碼部220是於片終端旗標(end_of_slice_flag)顯示0時，將副終端旗標(end_of_sub_stream_flag)算術編碼。然後，熵編碼部220是於判定出該副終端旗標顯示1時，進行與片終端旗標顯示1時所進行之終端處理相同之算術編碼之終端處理，且進行位元組調整(byte_alignment())。又，熵編碼部220是於判定出該副終端旗標顯示0時，繼續將下一個CTU算術編碼之處理。即便是如此地使用副終端旗標，亦可發揮與上述實施型態2及其變形例相同之效果。

另外，上述實施型態2及其變形例是於剛剛算術編碼之CTU位於副單位之終端時進行算術編碼之副終端處理。換句話說，上述實施型態2及其變形例是於剛剛算術編碼之CTU的下一個被算術編碼之CTU位於副單位之前頭時，進行算術編碼之副終端處理。又，上述實施型態2及其變形例是於剛剛算術編碼之CTU位於片之終端時進行算術解碼之終端處理，當該CTU不位於片之終端而是位於副單位之終端時，進行與算術編碼之終端處理是相同處理之副終端處理。因此，可避免算術解碼之終端處理被重複執行、進行適切之算術編碼。

以上雖然是基於各實施型態及變形例來針對與一態樣或複數態樣相關之圖像解碼方法及圖像編碼方法進行了說明，但本發明並不限定於該等實施型態及變形例。只要不脫離本發明之旨趣，將該業者可思及之各種變形施加於上述各實施型態及變形例、或是將不同之實施形態及變形例中之構成要素予以組合而建構之形態亦可包含於一態樣或複數態樣之範圍內。

該與一態樣相關之圖像解碼方法是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼方法，該圖像解碼方法是將解碼對象塊算術解碼(S11)；判定前述解碼對象塊是否位於片之終端(S12)；當判定出不是位於前述片之終端時，判定是否位於副單位之終端(S13)，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理(S14)。

該與一態樣相關之圖像解碼裝置10是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼裝置，該圖像解碼裝置具備：塊解碼部11，將解碼對象塊算術解碼；片終端判定部12，判定前述解碼對象塊是否位於片之終端；副終端判定部13，當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；終端處理部14，當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理。

藉此，即便經算術解碼之塊(CTU)不位於片之終端，但只要是位於副單位(地磚或CTU線等)之終端則進行算術解碼之終端處理，因此，可將位元串流所含有之複數副單位適切地並列地解碼。又，藉由使用片與副單位，可將抑制編碼效率降低之位元串流適切地解碼。再者，因為在副單位之終端是進行包含副終端位元之算術解碼與終端處理之處理，故在片之終端進行包含旗標之算術解碼與終端處理之處理的情況下，可將在副單位之終端與片之終端執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像解碼。

該與一態樣相關之圖像編碼方法是藉由將圖像依各塊來予以編碼而生成位元串流之圖像編碼方法，該圖像編碼方法是將編碼對象塊算術編碼(S21)；判定前述編碼對象塊是否位於片之終端(S22)；當判定出不是位於前述片之終端時，判定是否位於副單位之終端(S23)，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術編碼，進行算術編碼之終端處理作為第1終端處理(S24)。

該與一態樣相關之圖像編碼裝置20是藉由將圖像依各塊來予以編碼而生成位元串流之圖像編碼裝置，該圖像編碼裝置具備：塊編碼部21，將編碼對象塊算術編碼；片終端判定部22，判定前述編碼對象塊是否位於片之終端；副終端判定部23，當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；終端處理部24，當判定出是位於前述副單位之終端時，將副終端位元算術編碼，進行算術編碼之終端處理作為第1終端處理。

藉此，即便經算術編碼之塊(CTU)不位於片之終端，但只要是位於副單位(地磚或CTU線等)之終端則進行算術編碼之終端處理，因此，可將位元串流所含有之複數副單位適切地並列地編碼。又，藉由使用片與副單位，可抑制編碼效率之降低。再者，因為在副單位之終端是進行包含副終端位元之算術編碼與終端處理之處理，故在片之終端進行包含旗標之算術編碼與終端處理之處理的情況下，可將在副單位之終端與片之終端執行之處理共用化。亦即，因為不需要為了在副單位之終端進行之處理而設置新的處理部，故能以簡單之構成來將圖像解碼。

另外，在上述各實施型態中，各構成要素雖然是以專用硬體來構成，但亦可藉由執行適合各構成要素之軟體程式來實現。各構成要素亦可是藉由CPU或處理器等程式執行部讀取而執行硬碟或半導體記憶體等記錄媒體所記錄之軟體程式來予以實現。換句話說，圖像編碼裝置及圖像解碼裝置具備處理電路、與該處理電路電性連接(可由該處理電路存取)之記憶裝置(storage)。處理電路包含專用硬體及程式執行部之至少其中一者。又，當處理電路包含程式執行部時，記憶裝置記憶由該程式執行部來執行之軟體程式。在此，實現上述各實施形態之圖像解碼裝置及圖像編碼裝置等之軟體是使電腦執行圖14A所示之圖像解碼方法或圖15A所示之圖像編碼方法所含有之各步驟的程式。

又，在上述各實施型態及其等之變形例中未明確記載之部分可以是與非專利文獻1所記載之部分相同。

(實施型態3)

藉由將用於實現以上述各實施形態所顯示之動態圖像編碼方法(圖像編碼方法)或動態圖像解碼化方法(圖像解碼方法)之構成的程式記錄於記憶媒體，能使以上述各實施形態所顯示之處理可輕易地在獨立之電腦系統中實施。記憶媒體只要是磁碟、光碟、磁光碟、IC卡、半導體記憶體等可記錄程式者即可。

在此，更進一步說明以上述各實施形態顯示之動態圖像編碼方法(圖像編碼方法)、動態圖像解碼化方法(圖像解碼方法)之應用例及使用其之系統。該系統之特徵是具備由使用圖像編碼方法之圖像編碼裝置、及使用圖像解碼方法之圖像解碼裝置所構成之圖像編碼解碼裝置。系統中之其他構成可因應情況而作適切地改變。

圖16是顯示將內容遞送服務預以實現之內容供給系統ex100之整體構成的圖。將通訊服務之提供地區分割為想要之大小，於各胞(cell)內分別設置有作為固定無線電台之基地台ex106、ex107、ex108、ex109、ex110。

該內容供給系統ex100是於網際網路ex101透過網際網路服務提供者ex102及電話網ex104、及基地台ex106至ex110，而連接至電腦ex111、PDA(Personal Digital Assistant)ex112、相機ex113、行動電話ex114、遊戲機ex115等各機器。

然而，內容供給系統ex100並不限於如圖16之構成，亦可將任一要素預以組合而連接。又，亦可不透過作為固定無線電台之基地台ex106至ex110，各機器直接連接電話網ex104。又，亦可是各機器透過近距離無線等直接相互連接。

相機ex113是數位視訊相機等之可拍攝動畫之機器，相機ex116是數位相機等之可拍攝静止圖、拍攝動畫之機器。又，行動電話ex114是GSM(登錄商標)(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W-CDMA(Wideband-Code Division Multiple Access)方式、或是LTE(Long Term Evolution)方式、HSPA(High Speed Packet Access)之行動電話機、或PHS(Personal Handyphone System)等，任一者皆無妨。

在內容供給系統ex100，相機ex113等通過基地台ex109、電話網ex104而連接至串流伺服器ex103，藉此使線上立即遞送等成為可能。線上立即遞送是對使用者用相機ex113所拍攝之內容(例如演唱會之影像等)進行如在上述各實施形態所說明之編碼處理(亦即，作為與本發明之一態樣相關之圖像編碼裝置而發揮機能)，發送至串流伺服器ex103。另一方面，串流伺服器ex103針對有提出要求之用戶端(client)，將被發送之內容資料預以串流遞送。作為用戶端，有可將經過上述編碼處理之資料預以解碼化之電腦ex111、PDAex112、相機ex113、行動電話ex114、遊戲機ex115等。接收到被遞送之資料的各機器是對已接收之資料進行解碼化處理而預以播放(亦即，作為與本發明之一態樣相關之圖像解碼裝置而發揮機能)。

另外，已拍攝之資料的編碼處理可在相機ex113 進行，亦可在進行資料之發送處理的串流伺服器ex103進行，亦可互相分擔地進行。同樣地，已遞送之資料的解碼化處理可在用戶端進行，亦可在串流伺服器ex103進行，亦可互相分擔地進行。又，並不限於相機ex113，亦可將以相機ex116所拍攝之静止圖像及/或動態圖像資料透過電腦ex111而發送至串流伺服器ex103。此情況下之編碼處理可在相機ex116、電腦ex111、串流伺服器ex103之任一者進行，亦可互相分擔地進行。

又，該等編碼、解碼化處理一般是在電腦ex111 或各機器所具備之LSIex500中處理。LSIex500可為單晶片亦可為由複數晶片構成。另外，亦可將動態圖像編碼、解碼化用之軟體內藏於以電腦ex111等可讀取之某種記錄媒體(CD-ROM、軟性磁碟、硬碟等)，使用該軟體來進行編碼、解碼化處理。再者，當行動電話ex114具有相機時，亦可將以該相機所取得之動畫資料預以發送。此時的動畫資料是在行動電話ex114所具備之LSIex500經過編碼處理之資料。

又，串流伺服器ex103亦可是複數伺服器、複數電腦，將資料分散來處理或記錄而遞送。

如以上，內容供給系統ex100可讓用戶端接收已編碼之資料而播放。如此，內容供給系統ex100可將使用者所發送之資訊以即時方式讓用戶端接收且進行解碼化、播放，即便沒有特別之權利或設備之使用者亦可實現個人放送。

另外，並不限於內容供給系統ex100之例，如圖 17所示，數位放送用系統ex200亦可加入上述各實施形態之至少動態圖像編碼裝置(圖像編碼裝置)或動態圖像解碼化裝置(圖像解碼裝置)之任一者。具體而言，在廣播電台ex201，將音樂資料等與影像資料預以多工後之多工資料是透過電波而通訊或傳送至衛星ex202。該影像資料是藉由在上述各實施形態所說明之動態圖像編碼方法而經過編碼之資料(亦即，藉由與本發明之一態樣相關之圖像編碼裝置而經過編碼之資料)。已接收之放送衛星ex202是將放送用之電波預以發送，可接收衛星放送之家庭的天線ex204則接收該電波。電視(接收機)ex300或機上盒(STB)ex217等裝置將已接收之多工資料預以解碼化而播放(亦即，作為與本發明之一態樣相關之圖像解碼裝置發揮機能)。

又，對已記錄於DVD、BD等記錄媒體ex215之多工資料進行讀取與解碼化、或是將影像訊號預以編碼且視情況將其與音樂訊號進行多工而寫入記錄媒體ex215之讀取/記錄器ex218亦可配備以上述各實施形態所顯示之動態圖像解碼化裝置或動態圖像編碼裝置。此情況下，被播放之影像訊號是顯示於顯示器ex219，可藉由記錄有多工資料之記錄媒體ex215而在其他之裝置或系統中播放影像訊號。又，亦可在與纜線電視用之纜線ex203或衛星/地上波放送之天線ex204連接之機上盒ex217內安裝動態圖像解碼化裝置，將其顯示於電視之顯示器ex219。此時，動態圖像解碼化裝置亦可是組裝於電視內，而非機上盒。

圖18是顯示使用了在上述各實施形態所說明之動態圖像解碼化方法及動態圖像編碼方法之電視(接收機)ex300的圖。電視ex300具備調諧器ex301、調變/解調部ex302、多工/分離部ex303，調諧器ex301是透過接收上述放送之天線ex204或纜線ex203等而取得將聲音資料與影像資料預以多工後之多工資料或預以輸出，調變/解調部ex302是將已接收之多工資料預以解調、或調變朝外部發送之多工資料，多工/分離部ex303是將已解調之多工資料分離為影像資料與聲音資料、或將在訊號處理部ex306受編碼之影像資料、聲音資料預以多工。

電視ex300具有訊號處理部ex306與輸出部 ex309，訊號處理部ex306具有分別將聲音資料、影像資料預以解碼化、或將各自之資訊預以編碼之聲音訊號處理部ex304、影像訊號處理部ex305(作為與本發明之一態樣相關之圖像編碼裝置或圖像解碼裝置發揮機能)，輸出部ex309具有將已解碼化之聲音訊號預以輸出之揚聲器ex307、將已解碼化之影像訊號預以顯示之顯示器等之顯示部ex308。再者，電視ex300具有介面部ex317，介面部ex317具有接受使用者操作之輸入的操作輸入部ex312等。再者，電視ex300具有將各部總括地控制之控制部ex310、朝各部供給電力之電源電路部ex311。除了操作輸入部ex312以外，介面部ex317亦可具有與讀取/記錄器ex218等之外部機器連接之橋接器ex313、用以可裝配SD卡等記錄媒體ex216之槽部ex314、用以與硬碟等外部記錄媒體連接之驅動器ex315、與電話網連接之數據機ex316等。另外，記錄媒體ex216是藉由所收納之不變性/依電性的半導體記憶體元件而可記錄電性資訊。電視ex300之各部是透過同步匯流排而相互連接。

首先，針對電視ex300將藉由天線ex204等而從外部取得之多工資料預以解碼化、播放之構成進行說明。電視ex300是接受來自遙控器ex220等之使用者操作，基於具有CPU等之控制部ex310的控制，以多工/分離部ex303將在調變/解調部ex302經過解調之多工資料預以分離。再者，電視ex300是在聲音訊號處理部ex304將分離後之聲音資料預以解碼化，在影像訊號處理部ex305使用在上述各實施形態所說明之解碼化方法將分離後之影像資料預以解碼化。經過解碼化後之聲音訊號、影像訊號分別由輸出部ex309往外部輸出。在輸出的時候，亦可於緩衝器ex318、ex319等暫時蓄積該等訊號以使聲音訊號與影像訊號同步播放。又，電視ex300亦可不是從放送等來取得多工資料，而是從磁/光碟、SD卡等記錄媒體ex215、ex216讀取出多工資料。接著，針對電視ex300將聲音訊號、影像訊號預以編碼且朝外部發送或寫入於記錄媒體等之構成進行說明。電視ex300是接受來自遙控器ex220等之使用者操作，基於控制部ex310的控制，以聲音訊號處理部ex304將聲音訊號預以編碼，在影像訊號處理部ex305使用在上述各實施形態所說明之編碼方法將影像訊號預以編碼。編碼後之聲音訊號、影像訊號是在多工/分離部ex303受到多工而朝外部輸出。在多工的時候，亦可於緩衝器ex320、ex321等暫時蓄積該等訊號以使聲音訊號與影像訊號同步。另外，緩衝器ex318、ex319、ex320、ex321可以是如圖示般地具備複數個，亦可是將1個以上之緩衝器共用之構成。再者，於圖示之內容外，舉例來說，亦可於調變/解調部ex302與多工/分離部ex303之間等將資料蓄積於緩衝器作為避免系統發生溢流、欠位之緩衝材。

又，電視ex300除了從放送等或記錄媒體等取得聲音資料、影像資料之外，亦可具備接受麥克風或相機之AV輸入的構成，對從該等取得之資料進行編碼處理。另外，在此雖然是以可進行上述之編碼處理、多工、及外部輸出之構成來說明電視ex300，但亦可是不能進行該等處理、只能進行上述之接收、解碼化處理、外部輸出之構成。

又，當以讀取/記錄器ex218從記錄媒體讀取出多工資料或預以寫入時，上述解碼化處理或編碼處理可由電視ex300、讀取/記錄器ex218之任一者來進行，亦可由電視ex300與讀取/記錄器ex218互相分擔地進行。

圖19顯示由光碟讀取資料或預以寫入之資訊再生/記錄部ex400之構成來作為一例。資訊再生/記錄部ex400具備以下說明之要素ex401、ex402、ex403、ex404、ex405、ex406、ex407。光學頭ex401是朝記錄媒體 ex215(光碟)之記錄面照射雷射點(laser spot)而寫入資訊、檢測來自記錄媒體ex215之記錄面的反射光而讀取資訊。調變記錄部ex402是將光學頭ex401所內藏之半導體雷射預以電性驅動，因應記錄資料而進行雷射光之調變。再生解調部ex403是將藉由光學頭ex401所內藏之光檢測器而對來自記錄面的反射光電性檢測出之再生訊號預以増幅，將記錄於記錄媒體ex215之訊號成分預以分離而解調，再生必要之資訊。緩衝器ex404是暫時保持用於記錄於記錄媒體ex215之資訊及已由記錄媒體ex215再生之資訊。碟片馬達ex405是使記錄媒體ex215旋轉。伺服控制部ex406是一面控制碟片馬達ex405之旋轉驅動一面使光學頭ex401朝預定之資訊軌移動，進行雷射點之追蹤處理。系統控制部ex407是進行資訊再生/記錄部ex400整體之控制。上述之讀取或寫入之處理是藉由以下來實現：系統控制部ex407利用緩衝器ex404所保持之各種資訊、或因應需求而進行新資訊之生成、追加，一面使調變記錄部ex402、再生解調部ex403、伺服控制部ex406協調地動作，一面通過光學頭ex401進行之資訊之記錄再生。系統控制部ex407是例如以微處理器構成，藉由執行讀取寫入之程式而執行該等處理。

以上雖然是以照射雷射點來說明光學頭ex401，但其亦可是藉由使用近場光而進行高密度記錄之構造。

圖20是顯示記錄媒體ex215(光碟)的示意圖。記錄媒體ex215的記錄面形成有螺旋狀之導引溝(溝)，於資訊軌ex230預先記錄有藉由溝的形狀變化而顯示碟片上之絕對位置的位址資訊。該位址資訊包含有用於指出記錄塊(記錄塊是將資料預以記錄之單位)ex231之位置的資訊，在進行記錄或再生之裝置中可藉由將資訊軌ex230再生且讀取位址資訊而指出記錄塊。又，記錄媒體ex215包含有資料記錄領域ex233、內周領域ex232、外周領域ex234。用於記錄使用者資料之領域是資料記錄領域ex233，比資料記錄領域ex233配置於內周或外周之內周領域ex232與外周領域ex234是用於記錄使用者資料以外之特定用途。資訊再生/記錄部ex400是對於如此之記錄媒體ex215的資料記錄領域ex233讀取寫入已編碼之聲音資料、影像資料或將該等資料預以多工後之多工資料。

以上雖然是舉1層之DVD、BD等光碟為例來說明，但並不限於此，亦可是多層構造且表面以外亦可記錄之光碟。又，亦可是於碟片之相同地方使用各種不同波長顏色之光來記錄資訊、由各種角度來記錄不同資訊層等進行多元記錄/再生之構造的光碟。

又，在數位放送用系統ex200中，亦可在具有天線ex205之車ex210接收來自衛星ex202等之資料，於車ex210具有之汽車導航ex211等顯示裝置播放動畫。另外，汽車導航ex211之構成可以是例如在圖18所示之構成中加上GPS接收部之構成，同樣的事情在電腦ex111與行動電話ex114等亦可考量。

圖21A是顯示使用了在上述實施形態所說明之動態圖像解碼化方法及動態圖像編碼方法之行動電話 ex114的圖。行動電話ex114具備：用於在與基地台ex110之間接收發送電波之天線ex350；可拍攝影像、靜止圖之相機部ex365；將以相機部ex365拍攝之影像、以天線ex350所接收之影像等受解碼化後之資料預以顯示之液晶顯示器等顯示部ex358。行動電話ex114更具備：具有操作鍵部ex366之本體部；用於輸出聲音之揚聲器等聲音輸出部ex357；用於輸入聲音之麥克風等聲音輸入部ex356；將拍攝之影像、静止圖、錄音之聲音、或接收之影像、静止圖、郵件等經過編碼之資料或是經過解碼化之資料預以保存之記憶體部ex367、或是作為對同樣是保存資料之記錄媒體的介面部之槽部ex364。

更進一步，使用圖21B來針對行動電話ex114之構成例進行說明。行動電話ex114是透過匯流排ex370將電源電路部ex361、操作輸入控制部ex362、影像訊號處理部ex355、相機介面部ex363、LCD(Liquid Crystal Display)控制部ex359、調變/解調部ex352、多工/分離部ex353、聲音訊號處理部ex354、槽部ex364、記憶體部ex367與將具備顯示部ex358及操作鍵部ex366之本體部的各部總括地控制之主控制部ex360相互連接。

電源電路部ex361是當使用者之操作令通話結束及電源鍵為開狀態時，由電池組對各部供給電力，藉此使行動電話ex114起動成可動作之狀態。

行動電話ex114是基於具有CPU、ROM、RAM等之主控制部ex360的控制，於聲音通話模式時將以聲音輸入部ex356接收聲音所獲得之聲音訊號以聲音訊號處理部ex354轉換為數位聲音訊號，以調變/解調部ex352對其進行展開頻譜處理，以發送/接收部ex351實施數位類比轉換處理及頻率轉換處理後透過天線ex350預以發送。又，行動電話ex114是於聲音通話模式時將透過天線ex350所接收之接收資料増幅且實施頻率轉換處理及類比數位轉換處理，以調變/解調部ex352進行逆展開頻譜處理，以聲音訊號處理部ex354轉換為類比聲音訊號後，將其從聲音輸出部ex357輸出。

再者，於資料通訊模式發送電子郵件時，藉由本體部之操作鍵部ex366等之操作而被輸入之電子郵件的文字資料是透過操作輸入控制部ex362而朝主控制部ex360送出。主控制部ex360是以調變/解調部ex352對文字資料進行展開頻譜處理，以發送/接收部ex351實施數位類比轉換處理及頻率轉換處理後透過天線ex350往基地台ex110發送。接收電子郵件時則對接收之資料進行幾乎相反之處理，於顯示部ex358輸出。

於資料通訊模式發送影像、静止圖、或影像與聲音時，影像訊號處理部ex355是利用在上述各實施形態所顯示之動態圖像編碼方法將由相機部ex365所供給之影像訊號預以壓縮編碼(亦即，作為與本發明之一態樣相關之圖像編碼裝置而發揮機能)，將編碼後之影像資料朝多工/分離部ex353送出。又，聲音訊號處理部ex354是將當相機部ex365在拍攝影像、静止圖等時以聲音輸入部ex356接收聲音所獲得之聲音訊號預以編碼，將編碼後之聲音資料朝多工/分離部ex353送出。

多工/分離部ex353是將由影像訊號處理部ex355 所供給之經編碼之影像資料與由聲音訊號處理部ex354所供給之經編碼之聲音資料以預定之方式預以多工，將其結果所獲得之多工資料以調變/解調部(調變/解調電路部)ex352進行展開頻譜處理，以發送/接收部ex351實施數位類比轉換處理及頻率轉換處理後透過天線ex350預以發送。

於資料通信模式接收與網頁等連結之動態圖像檔案之資料時、或是接收附加有影像及/或聲音之電子郵件時，為了將透過天線ex350而接收之多工資料預以解碼化，多工/分離部ex353是藉由對多工資料進行分離而分成影像資料之位元串流與聲音資料之位元串流，透過同步匯流排ex370將經編碼之影像資料朝影像訊號處理部ex355供給、將經編碼之聲音資料朝聲音訊號處理部ex354供給。影像訊號處理部ex355是利用與在上述各實施形態所顯示之動態圖像編碼方法對應之動態圖像解碼化方法來進行解碼化，藉此將影像訊號預以解碼(亦即，作為與本發明之一態樣相關之圖像解碼裝置而發揮機能)，透過LCD控制部ex359由顯示部ex358來顯示例如與網頁連結之動態圖像檔案所含之影像、静止圖。又，聲音訊號處理部ex354將聲音訊號預以解碼，由聲音輸出部ex357輸出聲音。

又，上述行動電話ex114等之終端是與電視ex300同樣可以有如同時具備編碼器與解碼化器之發送接收型終端、只有編碼器之發送終端、只有解碼化器之接收終端之3種安裝形式。再者，在數位放送用系統ex200中雖然是說明成對將音樂資料等與影像資料預以多工後之多工資料進行接收、發送，但亦可是除了聲音資料以外還將與影像相關之文字資料等預以多工之資料，亦可以不是多工資料而是影像資料本身。

如此，可以將在上述各實施形態所顯示之動態圖像編碼方法或動態圖像解碼化方法使用於上述之任一機器、系統，藉此，可獲得在上述各實施形態所說明之效果。

又，本發明並不限定於上述實施形態，可不超出本發明之範圍而進行各種變形或修正。

(實施型態4)

亦可因應需要而將在上述各實施形態所顯示之動態圖像編碼方法或裝置、及以MPEG-2、MPEG4-AVC、VC-1等不同規格為基準之動態圖像編碼方法或裝置適當地預以切換，藉此生成影像資料。

在此，生成分別以不同規格為基準之複數影像資料的情況下，於解碼時需要選擇與各規格對應之解碼方法。然而，會有因為無法辨識進行解碼之影像資料是以何種規格為基準而無法選擇適當之解碼方法的問題。

為了解決此問題，採取包含辨識資訊之構成，該辨識資訊顯示將聲音資料等與影像資料預以多工後之多工資料中的影像資料是以何種規格為基準。以下說明多工資料之具體構成，該多工資料包含利用在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料。多工資料是MPEG-2傳輸串流形式之數位串流。

圖22是顯示多工資料之構成的圖。如圖22所顯示之多工資料可藉由將視訊串流、音訊串流、演示圖形(presentation graphics)串流(PG)、互動圖形(interactive graphics)串流中的1個以上預以多工而獲得。視訊串流是顯示電影的主影像及副影像，音訊串流(IG)是顯示電影的主聲音部分、與該主聲音混合之副聲音，演示圖形串流是顯示電影的字幕。在此，主影像是顯示在畫面所表示之通常的影像，副影像是於主影像之中以小畫面表示的影像。又，互動圖形串流是顯示藉由在畫面上配置GUI部品而作成之對話畫面。視訊串流是利用在上述各實施形態所顯示之動態圖像編碼方法或裝置、以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之動態圖像編碼方法或裝置而編碼。音訊串流是以Dolby AC-3、Dolby Digital Plus、MLP、DTS、DTS-HD、或Linear PCM等方式編碼。

多工資料所包含之各串流是藉由PID辨識。例如，用於電影的影像之視訊串流是分配0x1011，音訊串流是分配由0x1100至0x111F，演示圖形是分配由0x1200至0x121F，互動圖形串流是分配由0x1400至0x141F，用於電影的副影像之視訊串流是分配由0x1B00至0x1B1F，用於與主聲音混合之副聲音之音訊串流是分配由0x1A00至0x1A1F。

圖23是示意地顯示多工資料如何地被多工化的圖。首先，將由複數視訊畫格(frame)所構成之視訊串流ex235與由複數音訊畫格(frame)所構成之音訊串流ex238分別轉換為PES封包列ex236及ex239，轉換為TS封包ex237及ex240。同樣地，將演示圖形串流ex241及互動圖形ex244之資料分別轉換為PES封包列ex242及ex245，更進一步轉換為TS封包ex243及ex246。多工資料ex247是藉由將該等TS封包多工為1條串流所構成。

圖24是更詳細地顯示視訊串流如何地儲存於 PES封包列的圖。圖24中的第1段是顯示視訊串流之視訊畫格列。第2段是顯示PES封包列。如圖24之箭頭yy1、yy2、yy3、yy4所示，視訊串流中之複數的Video Presentation Unit(I圖片、B圖片、P圖片)是依圖片而分割，儲存於PES封包的酬載。各PES封包具有PES標頭，於PES標頭儲存有作為圖片之表示時刻的PTS(Presentation Time-Stamp)與作為圖片之解碼時刻的DTS(Decoding Time-Stamp)。

圖25顯示最後是被寫入至多工資料之TS封包的形式。TS封包是由具有辨識串流之PID等資訊之4Byte的TS標頭與儲存資料之184Byte的TS酬載所構成之188Byte固定長度的封包，上述PES封包是被分割而儲存於TS酬載。BD-ROM的情況下，於TS封包賦預4Byte之TP_Extra_Header而構成192Byte之源封包，且寫入至多工資料。於TP_Extra_Header記載有ATS(Arrival_Time_Stamp)等資訊。ATS是顯示該TS封包之往解碼器之PID過濾器的傳送開始時刻。多工資料是如圖25下段所示地排列源封包而成，從多工資料之前頭開始增加之號碼稱作SPN(源封包號碼)。

又，於多工資料所含有之TS封包，除了影像、聲音、字幕等之各串流以外還有PAT(Program Association Table)、PMT(Program Map Table)、PCR(Program Clock Reference)等。PAT是顯示在多工資料中被利用之PMT的PID是什麼，PAT本身的PID是以0登錄。PMT具有多工資料中所含有之影像、聲音、字幕等之各串流的PID、與各PID對應之串流的屬性資訊，還具有與多工資料相關之各種描述符。描述符有指示允許/不允許複製多工資料之複製控制資訊等。PCR具有與該PCR封包朝解碼器傳送之ATS對應之STC時間的資訊，以對作為ATS之時間軸的ATC(Arrival Time Clock)與作為PTS、DTS之時間軸的STC(System Time Clock)取同步。

圖26是詳細說明PMT之資料構造的圖。於PMT 之前頭配置有PMT標頭，其記述有該PMT所含有之資料的長度等。於其後方配置有複數個與多工資料相關之描述符。上述複製控制資訊等是作為描述符而被記載。於描述符之後方配置有複數個與多工資料所含有之各串流相關之串流資訊。串流資訊是由用於辨識串流之壓縮編碼解碼器等之串流類型、串流的PID、記載有串流之屬性資訊(畫格率、縱橫比等)的串流描述符所構成。串流描述符的個數與多工資料之串流的個數相同。

記錄於記錄媒體等的情況下，上述多工資料是與多工資料資訊檔案一同記錄。

如圖27所示，多工資料資訊檔案是多工資料的管理資訊，其與多工資料1對1對應，由多工資料資訊、串流屬性資訊、登錄圖所構成。

如圖27所示，多工資料資訊是由系統率、播放開始時刻、播放結束時刻所構成。系統率是顯示多工資料往後述之系統目標解碼器之PID過濾器的最大傳送率。多工資料中所含有之ATS的間隔是設定成系統率以下。播放開始時刻是多工資料之前頭之視訊畫格的PTS，播放結束時刻是設定成於多工資料之終端之視訊畫格的PTS加上1畫格分之播放間隔。

如圖28所示，串流屬性資訊中，與多工資料所含有之各串流相關之屬性資訊是依PID來登錄。屬性資訊是依視訊串流、音訊串流、演示圖形串流、互動圖形串流而具有不同之資訊。視訊串流屬性資訊是具有：該視訊串流以何種壓縮編碼解碼器來進行了壓縮、構成視訊串流之各圖片資料的解析度為多少、縱橫比為多少、畫格率為多少等資訊。音訊串流屬性資訊是具有：該音訊串流以何種壓縮編碼解碼器來進行了壓縮、該音訊串流所含有之頻道數量是什麼、對應何種語言、取樣頻率為多少等資訊。該等資訊是用於播放機播放前之解碼器的初始化等。

在本實施形態中是利用上述多工資料中之PMT所含有之串流類型。又，多工資料是記錄在記錄媒體的情況下，利用多工資料資訊所含有之視訊串流屬性資訊。具體而言，在上述各實施形態所顯示之動態圖像編碼方法或裝置中設置對PMT所含有之串流類型或視訊串流屬性資訊設定固有資訊之步驟或手段，該固有資訊顯示出是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料。藉由此構成，可辨識藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置所生成之影像資料、及以其他規格為基準之影像資料。

又，於圖29顯示本實施形態之動態圖像解碼化方法的步驟。在步驟exS100中，由多工資料取得PMT所含有之串流類型、或多工資料資訊所含有之視訊串流屬性資訊。接著，在步驟exS101中，判斷串流類型或視訊串流屬性資訊是否顯示多工資料是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置所生成。然後，當判斷出串流類型或視訊串流屬性資訊顯示是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置所生成時，在步驟exS102中，藉由在上述各實施形態所顯示之動態圖像解碼方法來進行解碼。又，當串流類型或視訊串流屬性資訊顯示是以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準時，在步驟exS103中，藉由以習知之規格為基準之動態圖像解碼方法來進行解碼。

如此，藉由於串流類型或視訊串流屬性資訊設定新的固有值，於解碼時可判斷出是否可藉由在上述各實施形態所顯示之動態圖像解碼化方法或裝置來預以解碼。因此，即使有以不同規格為基準之多工資料輸入，亦可選擇適當之解碼化方法或裝置，故可不發生錯誤地進行解碼。又，亦可將在本實施形態所顯示之動態圖像編碼方法或裝置、或是動態圖像解碼方法或裝置使用於上述之任一機器、系統。

(實施型態5)

在上述各實施形態所顯示之動態圖像編碼方法及裝置、動態圖像解碼化方法及裝置典型上是以屬於積體電路之LSI來實現。作為一例子，圖30顯示已經1晶片化之LSIex500的構成。LSIex500具備以下說明之要素ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509，各要素是透過匯流排ex510而連接。電源電路部ex505在電源為開狀態時對各部供給電力，藉此起動成可動作之狀態。

舉例來說，當進行編碼處理時，LSIex500是基於具有CPUex502、記憶體控制器ex503、串流控制器ex504、驅動頻率控制部ex512等之控制部ex501的控制，藉由AV I/Oex509而由麥克風ex117或相機ex113等輸入AV訊號。輸入後之AV訊號是暫時蓄積於SDRAM等之外部的記憶體ex511。基於控制部ex501的控制，對已蓄積之資料進行因應處理量或處理速度而適當地分成複數次等處理而送往訊號處理部ex507，在訊號處理部ex507中進行聲音訊號之編碼及/或影像訊號之編碼。在此，影像訊號之編碼處理是在上述各實施形態所說明之編碼處理。在訊號處理部ex507還視情況而更進一步對編碼後之聲音資料與編碼後之影像資料進行多工等處理，由串流I/Oex506朝外部輸出。該輸出之多工資料是往基地台ex107發送、或是寫入記錄媒體ex215。另外，在多工時亦可將資料暫時蓄積於緩衝器ex508以進行同步。

另外，上述說明中記憶體ex511雖然是LSIex500之外部的構成，但亦可是包含於LSIex500之內部的構成。緩衝器ex508亦不限於1個，亦可具備複數之緩衝器。又，LSIex500可以是1晶片化，亦可是複數晶片化。

在上述中，控制部ex501雖然是具有 CPUex502、記憶體控制器ex503、串流控制器ex504、驅動頻率控制部ex512等，但控制部ex501的構成並不限於此構成。舉例來說，訊號處理部ex507亦可是更具備CPU的構成。藉由在訊號處理部ex507的內部亦設置CPU，可使處理速度更加提高。又，作為其他之例子，CPUex502亦可是具備訊號處理部ex507、或訊號處理部ex507之一部分(例如聲音訊號處理部)的構成。此情況下，控制部ex501將成為具備CPUex502且CPLex502具有訊號處理部ex507或其一部分的構成。

另外，在此雖然是LSI，但隨著集成度不同則亦會被稱作IC、系統LSI、Super LSI、Ultra LSI。

又，積體電路化的手法並不限於LSI，亦可藉由專用電路或通用處理器來實現。亦可利用可於LSI製造後進行程式化之FPGA(Field Programmable Gate Array)、LSI內部之電路單元之連接與設定可再構成之可重組態處理器 (reconfigurable processor)。如此之可程式邏輯裝置在典型上可藉由載入或從記憶體等讀取出構成軟體或韌體之程式，而執行在上述各實施形態所顯示之動態圖像編碼方法或動態圖像解碼化方法。

再者，如果因為半導體技術之進步或衍生之其他技術而出現可代替LSI的積體電路化技術，則當然亦可用該技術來進行機能塊的積體化。生物技術等的適用就可能性而言是可能的。

(實施型態6)

與對以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之影像資料進行解碼的情況相比，對藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料進行解碼時的處理量可能増加。因此，在LSIex500中，需要設定成比對以習知規格為基準之影像資料進行解碼時之CPUex502的驅動頻率更高之驅動頻率。然而，驅動頻率增高會產生消耗電力變高之問題。

為了解決此問題，電視ex300、LSIex500等之動態圖像解碼化裝置採取之構成是：辨識出影像資料是以何種規格為基準、因應規格而切換驅動頻率。圖31顯示本實施形態之構成ex800。當影像資料是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料時，驅動頻率切換部ex803將驅動頻率設定成較高。然後，對執行在上述各實施形態所顯示之動態圖像解碼化方法之解碼處理部ex801指示去解碼影像資料。另一方面，當影像資料是以習知規格為基準之影像資料時，驅動頻率設定成比影像資料是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料時還低。然後，對以習知規格為基準之解碼處理部ex802指示去解碼影像資料。

更具體而言，驅動頻率切換部ex803是由圖30之 CPUex502與驅動頻率控制部ex512所構成。又，執行在上述各實施形態所顯示之動態圖像解碼化方法之解碼處理部ex801、及以習知規格為基準之解碼處理部ex802是對應圖30之訊號處理部ex507。CPUex502辨識出影像資料是以何種規格為基準。然後，驅動頻率控制部ex512基於來自CPUex502之訊號設定驅動頻率。又，訊號處理部ex507基於來自CPUex502之訊號進行影像資料之解碼。在此，影像資料之辨識是例如可以利用在實施形態4所記載之識別資訊。識別資訊並不限於在實施形態4所記載之識別資訊，只要是可辨識出影像資料是以何種規格為基準之資訊即可。舉例來說，一外部訊號可辨識出影像資料是用於電視之影像資料或是用於碟片之影像資料等，當基於該外部訊號可辨識出影像資料是以何種規格為基準時，則亦可基於如此之外部訊號來進行辨識。又，關於CPUex502之驅動頻率的選擇，舉例來說，可以基於如圖33之影像資料規格與驅動頻率具有對應關係之查找表來進行。將查找表儲存於緩衝器ex508、LSI之內部記憶體，則CPUex502可藉由參考該查找表來選擇驅動頻率。

圖32是顯示實施本實施形態之方法的步驟。首先，步驟exS200是於訊號處理部ex507由多工資料取得辨識資訊。接著，步驟exS201是於CPUex502基於辨識資訊來辨識影像資料是否是藉由在上述各實施形態所顯示之編碼方法或裝置而生成之影像資料。當影像資料是藉由在上述各實施形態所顯示之編碼方法或裝置而生成之影像資料時，於步驟exS202中，CPUex502朝驅動頻率控制部ex512送出把驅動頻率設定成較高之訊號。然後，於驅動頻率控制部ex512則設定較高之驅動頻率。另一方面，當顯示出是以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之影像資料時，於步驟exS203中，CPUex502朝驅動頻率控制部ex512送出把驅動頻率設定成較低之訊號。然後，於驅動頻率控制部ex512則設定與影像資料是藉由在上述各實施形態所顯示之編碼方法或裝置而生成之影像資料的情況相較之下為低之驅動頻率。

再者，藉由與驅動頻率之切換連動而將對 LSIex500或包含LSIex500之裝置賦預之電壓改變，可更加提高省電效果。舉例來說，當驅動頻率設定成較低時，可隨之而將對LSIex500或包含LSIex500之裝置賦預之電壓設定成與驅動頻率設定成較高的情況相較之下為低。

又，驅動頻率之設定方法亦可是在解碼時之處理量較大的情況下將驅動頻率設定成較高、在解碼時之處理量較小的情況下將驅動頻率設定成較低，並不限於上述之設定方法。舉例來說，當將以MPEG4-AVC規格為基準之影像資料預以解碼之處理量比將藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料預以解碼之處理量還大時，可使驅動頻率之設定是與上述相反。

再者，驅動頻率之設定方法並不限於使驅動頻率降低之構成。舉例來說，亦可考量是：當識別資訊顯示出是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料時，將對LSIex500或包含LSIex500之裝置賦預之電壓設定成較高，當顯示出是以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之影像資料時，將對LSIex500或包含LSIex500之裝置賦預之電壓設定成較高。又，作為其他之例子，亦可考量是：當識別資訊顯示出是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料時，不停止CPUex502之驅動，當顯示出是以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之影像資料時，由於還有餘裕所以暫時停止CPUex502之驅動。亦可考量是：即便識別資訊顯示出是藉由在上述各實施形態所顯示之動態圖像編碼方法或裝置而生成之影像資料，若在處理上有餘裕則暫時停止CPUex502之驅動。此情況下，可以考量將停止時間設定成與顯示出是以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之影像資料的情況相較之下為短。

如此，藉由因應影像資料之基準規格而將驅動頻率預以切換，使謀求省電化成為可能。又，當使用電池來驅動LSIex500或包含LSIex500之裝置時，可伴隨著省電化而使電池的壽命變長。

(實施型態7)

電視與行動電話等上述之機器、系統會有輸入以不同規格為基準之複數影像資料的情況。為了在如此之輸入以不同規格為基準之複數影像資料的情況下亦可預以解碼，LSIex500之訊號處理部ex507需要對應複數之規格。然而，若個別地使用與各規格對應之訊號處理部ex507，將會有LSIex500的電路規模變大、成本増加之問題。

為了解決此問題，採取的構成是將用於執行在上述各實施形態所顯示之動態圖像解碼方法的解碼處理部、及以習知之MPEG-2、MPEG4-AVC、VC-1等規格為基準之解碼處理部預以一部分共用化。於圖34A之ex900顯示該構成例。舉例來說，在上述各實施形態所顯示之動態圖像解碼方法與以MPEG4-AVC規格為基準之動態圖像解碼方法在熵編碼、逆量化、去塊過濾器(deblocking filter)、運動補償等處理中處理內容有一部分是共通。其構成可考量是：關於共通之處理內容是與對應MPEG4-AVC規格之解碼處理部ex902共用，關於不對應MPEG4-AVC規格之本發明的一態樣所特有之其他的處理內容是使用專用之解碼處理部ex901。關於解碼處理部之共用化之構成亦可以是：關於共通之處理內容是與用於執行在上述各實施形態所顯示之動態圖像解碼化方法的解碼處理部共用，關於MPEG4-AVC規格所特有之處理內容是使用專用之解碼處理部。

又，於圖34B之ex1000顯示將處理的一部分共用化之其他例子。於該例子採用之構成是使用：與本發明的一態樣所特有之處理內容對應之專用之解碼處理部ex1001、與其他之習知規格所特有之處理內容對應之專用之解碼處理部ex1002、與本發明的一態樣相關之動態圖像解碼方法和其他之習知規格之動態圖像解碼方法所共用之處理內容對應之共用之解碼處理部ex1003。在此，專用之解碼處理部ex1001、ex1002並不一定要是針對本發明的一態樣或其他之習知規格所特有之處理內容預以特化之解碼處理部，亦可是可執行其他之通用處理之解碼處理部。又，亦可藉由LSIex500來安裝本實施形態之構成。

如此，藉由針對在與本發明的一態樣相關之動態圖像解碼方法和習知規格之動態圖像解碼方法是共通之處理內容將解碼處理部預以共用，可使LSI的電路規模變小且減少成本。

產業上之可利用性

與本發明的一態樣相關之圖像編碼方法及圖像解碼方法是可利用於例如電視接收器、數位視訊記錄器、汽車導航、行動電話、數位相機、或是數位視訊相機等。

S‧‧‧步驟

Claims

一種圖像解碼方法，是將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼方法，該圖像解碼方法是：將解碼對象塊算術解碼；判定前述解碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理。
如請求項1之圖像解碼方法，其中前述圖像解碼方法更於判定出前述解碼對象塊是位於片之終端時，進行算術解碼之終端處理作為第2終端處理；在進行前述第1終端處理之際，是進行與前述第2終端處理相同之處理。
如請求項2之圖像解碼方法，其中前述圖像解碼方法更將顯示前述解碼對象塊是否位於片之終端的片終端旗標予以算術解碼；前述是否位於片之終端的判定是當經算術解碼之前述片終端旗標顯示預定之值時，判定前述解碼對象塊是位於片之終端；前述副終端位元之算術解碼是利用該算術解碼而復原與前述預定之值相同之值。
如請求項1之圖像解碼方法，其中前述副終端位元之算術解碼是利用該算術解碼而復原1。
如請求項1至4中任一項之圖像解碼方法，其中前述圖像解碼方法更於進行前述第1終端處理之後，進行將位元列跳過讀取之處理，該位元列是以令包含前述副單位及前述副終端位元之位元長成為預定之N(N為2以上之整數)位元之倍數的方式寫入前述位元串流。
如請求項5之圖像解碼方法，其中前述副終端位元之算術解碼是以前述位元列之前頭之位元作為前述副終端位元來算術解碼。
一種圖像編碼方法，是藉由將圖像依各塊來予以編碼而生成位元串流之圖像編碼方法，該圖像編碼方法是：將編碼對象塊算術編碼；判定前述編碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術編碼，進行算術編碼之終端處理作為第1終端處理。
如請求項7之圖像編碼方法，其中前述圖像編碼方法更於判定出前述編碼對象塊是位於片之終端時，進行算術編碼之終端處理作為第2終端處理；在進行前述第1終端處理之際，是進行與前述第2終端處理相同之處理。
如請求項8之圖像編碼方法，其中前述圖像編碼方法更將顯示前述編碼對象塊是否位於片之終端的片終端旗標予以算術編碼；前述是否位於片之終端的判定是當前述片終端旗標顯示預定之值時，判定前述編碼對象塊是位於片之終端；前述副終端位元之算術編碼是將顯示與前述預定之值相同之值的前述副終端位元算術編碼。
如請求項7之圖像編碼方法，其中前述副終端位元之算術編碼是將顯示1的前述副終端位元算術編碼。
如請求項7至10中任一項之圖像編碼方法，其中前述圖像編碼方法更於進行前述第1終端處理之後，以令包含經算術編碼之前述副單位及前述副終端位元之位元長成為預定之N(N為2以上之整數)位元之倍數的方式將位元列寫入前述位元串流。
如請求項11之圖像編碼方法，其中前述副終端位元之算術編碼是以前述位元列之前頭之位元作為前述副終端位元來算術編碼。
一種圖像解碼裝置，是具備處理電路、可由前述處理電路存取之記憶裝置，且將位元串流所含有之經編碼之圖像依各塊來予以解碼之圖像解碼裝置，前述處理回路是使用前述記憶裝置而將解碼對象塊算術解碼；判定前述解碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術解碼，進行算術解碼之終端處理作為第1終端處理。
一種圖像編碼裝置，是具備處理電路、可由前述處理電路存取之記憶裝置，且藉由將圖像依各塊來予以編碼而生成位元串流之圖像編碼裝置，前述處理回路是使用前述記憶裝置而將編碼對象塊算術編碼；判定前述編碼對象塊是否位於片之終端；當判定出不是位於前述片之終端時，判定是否位於副單位之終端，前述副單位是與片不同之前述圖像之構成單位；當判定出是位於前述副單位之終端時，將副終端位元算術編碼，進行算術編碼之終端處理作為第1終端處理。
一種圖像編碼解碼裝置，包含如請求項13之圖像解碼裝置、及如請求項14之圖像編碼裝置。