TW201204051A - Encoding apparatus and encoding method - Google Patents

Description

201204051 六、發明說明： 【發明所屬之技術領域】 本發明係有關於，將影像資料予以編碼的編碼裝置及 編碼方法。 【先前技術】 近年來，將影像資料數位化而操作，此時，爲了高效 率地傳送、積存資訊，利用影像資訊特有的冗長性，藉由 離散餘弦轉換（DCT: Discrete Cosine Transform)等之正交 轉換和動態補償進行壓縮的MPEG(Moving Picture Experts Group)，繼其之後，壓縮率更高的 H.264/AVC(Advanced Video Coding)等之編碼方式，依據其之編碼裝置及解碼裝 置，是已經在電視台等的資訊遞送，以及一般家庭的資訊 接收雙方面上曰漸普及。 目前，以此H.264/AVC爲基礎而擴充了可調性之機能 的 SVC(Scalable Video Coding，可調性視訊編碼），是正 在進行標準化。SVC目前的規格，係被整合在JSM(Joint Scalable Video Model)模型中。 SVC的編碼裝置中，輸入影像，係藉由影像階層化電 路，分離成例如上位圖層及下位圖層之2個階層。其後， 以上位圖層編碼電路將上位圖層加以編碼，下位圖層編碼 電路則將下位圖層加以編碼。然後，將編碼過的上位圖層 和下位圖層予以多重化而傳送。 下位圖層係也被稱作基礎圖層，是畫質較低的階層。 -5- 201204051 當僅將下位圖層的位元串流加以解碼的時候，會解碼出畫 質較低的影像。下位圖層係含有比畫質更爲重要的資訊。 上位圖層，也被稱作增強圖層（enhancement layer)， 是用來改善畫質、解碼高畫質影像用的階層。在下位圖層 的位元串流中追加上位圖層的位元串流而進行解碼時，就 可解碼出較高畫質的影像。 上述編碼裝置中，於上位圖層編碼電路，進行內在 (intra)編碼時，可在以下位圖層編碼電路進行編碼後，將 解碼過的解碼影像當成預測影像來使用。 【發明內容】 〔發明所欲解決之課題〕 上述進行先前之階層編碼的編碼裝置中，是以在上位 圖層及下位圖層兩者中，將漸進式影像資料加以編碼爲前 提。 可是在此同時，想要在上位圖層中將漸進式影像資料 加以編碼，在下位圖層中將交錯式影像資料加以編碼的需 求出現了》 由以上可知，在進行階層編碼時，可在上位圖層中將 漸進式影像資料加以編碼，且可在下位圖層中將交錯式影 像資料加以編碼的編碼裝置、編碼方法及程式的提供’是 受到期待的。 又，能夠將上位圖層中所編碼過的漸進式影像資料’ 和下位圖層中所編碼過的交錯式影像資料加以解碼的解碼 -6 - 201204051 裝置、解碼方法及程式的提供，是受到期待的。 本發明係有鑑於所述事情而硏發，目的在於提 ，在進行階層編碼時，可在上位圖層中將漸進式資 編碼，且可在下位圖層中將交錯式影像資料加以編 碼裝置及編碼方法。 〔用以解決課題之手段〕 爲了解決上述先前技術之問題點、達成上述目 1觀點之發明的編碼裝置，係具備：第一編碼手段 漸進式圖像資料所對應之交錯式圖像資料予以編碼 已被編碼之前記交錯式圖像資料、和預測了前記交 像資料的預測影像資料；和轉換手段，係藉由將前 影像予以轉換，以生成轉換預測影像；和旗標生成 係生成旗標資料，其係用來表示，將前記轉換預測 當作用來預測前記漸進式圖像資料的預測影像來使 第二編碼手段，係基於已被前記轉換手段所轉換之 測影像資料，而將前記漸進式圖像資料予以編碼。 第2觀點之發明的編碼方法，係屬於編碼裝置 方法，其係令前記編碼裝置，執行：第一編碼步驟 漸進式圖像資料所對應之交錯式圖像資料予以編碼 已被編碼之前記交錯式圖像資料、和預測了前記交 像資料的預測影像資料；和轉換步驟，係藉由將前 影像予以轉換，以生成轉換預測影像；和旗標生成 係生成旗標資料，其係用來表示，將前記轉換預測 供一種 料加以 碼的編 的，第 ，係將 ，生成 錯式圖 記預測 手段， 影像， 用；和 前記預 的編碼 ，係將 ，生成 錯式圖 記預測 步驟， 影像， 201204051 當作用來預測前記漸進式圖像資料的預測影像來使用；和 第二編碼步驟，係基於已被前記轉換步驟所轉換之前記預 測影像資料，而將前記漸進式圖像資料予以編碼° [發明效果] 若依據本發明，則可提供在進行階層編碼時’可在上 位圖層中將漸進式资料加以編碼，且可在下位圖層中將交 錯式影像資料加以編碼的編碼裝置及編碼方法。 【實施方式】 圖1係本實施形態之編碼·解碼系統的槪念圖。 編碼·解碼系統1，係具有設於送訊側的編碼裝置2 ，和設於收訊側的解碼裝置3。 編碼.解碼系統1中，於送訊側的編碼裝置2上’生 成藉由離散餘弦轉換（DCT)或卡忽南-拉維轉換等之正交轉 換和動態補償而壓縮（編碼）過的畫格編碼影像資料（位元串 流），並將該當畫格編碼影像資料調變後，透過衛星放送 波、有線電視網、電話網路、行動電話網路等之傳送媒體 而送訊。 在收訊側，於解碼裝置3將所接收到的編碼影像訊號 予以解調後，藉由上記調變時之正交轉換的逆轉換和動態 補償，生成解壓的畫格影像資料，而加以利用。 傳送媒體5，係不限於上述通訊網，亦可爲光碟、磁 碟及半導體記憶體等記錄媒體。 -8- 201204051 本實施形態中，例如圖2所示，階層化電路1 〇係構 成爲，基於編碼對象之影像資料S9，生成漸進式影像資 料（漸進式影像訊號）S1 0_1，和交錯式影像資料S 10_2。 下位圖層編碼電路1 2係構成爲，將交錯式影像資料 s 1 編碼而生成下位編碼資料S12。 轉換電路1 3係構成爲，將下位圖層編碼電路1 2所生 成之下位預測影像資料進行內插（擴增取樣）處理，而生成 和漸進式影像資料S10_l同解析度（掃描線數）的下位預測 影像資料L_PREb，並將其輸出至上位圖層編碼電路14。 上位圖層編碼電路1 4係構成爲，基於下位預測影像 資料L_PREb，將漸進式影像資料S10_l予以編碼而生成 上位編碼資料S14。 <編碼裝置> 參照圖1說明編碼裝置2。 圖2係編碼裝置2之全體構成例的圖示。 編碼裝置2，例如，具有：階層化電路1 〇、延遲電路 11、下位圖層編碼電路12、轉換電路13、上位圖層編碼 電路14及多重化電路15。 [階層化電路] 階層化電路1 〇，例如圖3所示’係構成爲’基於編碼 對象之影像資料S9，來生成漸進式影像資料（漸進式影像 訊號）S 1 0_ 1，和交錯式影像資料s 1 〇_2。又’階層化電路 -9- 201204051 10係構成爲，將構成上記已生成之漸進式影像資料SiOj 的圖像資料FR1〜6..·之每一者，寫入至延遲電路η❶ 漸進式影像資料S10_l，係例如爲60畫格/sec(60p)。 又’階層化電路10係構成爲，將構成上記已生成之 交錯式影像資料S10_2的圖像資料FI1〜6.··，輸出至下位 圖層編碼電路1 2。 交錯式影像資料S10_2，係例如爲60圖場/sec(60i)。 [延遲電路] 延遲電路11係構成爲，將構成從階層化電路10輸入 之漸進式影像資料（漸進式訊號）S10_1的各圖像資料，恰 好延遲’例如，下位圖層編碼電路12及轉換電路13上的 處理時間’然後輸出至上位圖層編碼電路14。 [下位圖層編碼電路] 下位圖層編碼電路1 2係構成爲，將從階層化電路1 0 所輸入之交錯式影像資料S10_2予以編碼而生成下位編碼 資料S12’並將其輸出至多重化電路15。又，下位圖層編 碼電路1 2係構成爲，於上記編碼中，生成下位預測影像 資料L_PRE，並將其輸出至轉換電路13。 圖4係下位圖層編碼電路12的構成例之圖示。 下位圖層編碼電路1 2，例如係具有：畫面排序電路 23、演算電路3〗、正交轉換電路32、量化電路33、速率 控制電路3 4、可逆編碼電路3 5、緩衝記億體3 6、逆量化

-10- S 201204051 電路37、逆正交轉換電路38、加算電路39、去區塊濾鏡 40、畫格記億體4 1、內在預測電路42、以及動態預測. 補償電路43。 畫面排序電路2 3係構成爲，例如，將從圖2所示之 階層化電路1〇輸入過來的漸進式影像資料S10_2的圖場 資料，隨應於由圖像形式I，P，B所成之GOP(Group Of P i c t u r e s)構造，排序成編碼的順序，然後輸出至演算電路 3 1、內在預測電路42及動態預測.補償電路43。 演算電路31係構成爲，生成出表示從畫面排序電路 2 3輸入過來的編碼對象之圖像資料，和從內在預測電路 42或動態預測·補償電路43輸入過來的預測影像資料PI 之差分的影像資料，並將其輸出至正交轉換電路32。 正交轉換電路32係構成爲，對從演算電路31輸入過 來的影像資料，施以離散餘弦轉換（DCT)或卡忽南-拉維轉 換等之正交轉換，然後生成出表示轉換係數的影像資料（ 例如DCT係數），將其輸出至量化電路33。 量化電路3 3係構成爲，將從正交轉換電路3 2輸入過 來的影像資料（量化前的轉換係數），基於從速率控制電路 34輸入過來之量化尺度QS而進行量化，生成表示量化後 轉換係數的影像資料，並將其輸出至可逆編碼電路35及 逆量化電路3 7。 速率控制電路3 4係構成爲，例如，基於從緩衝記億 體36所讀出之影像資料，生成量化尺度QS，並將其輸出 至量化電路3 3。 -11 - 201204051 可逆編碼電路35係構成爲，將從量化電路33輸入過 來的影像資料進行可變長編碼而成的影像資料，儲存至緩 衝記億體3 6。又’可逆編碼電路3 5係構成爲，將從動態 預測·補償電路43輸入之動態向量MV或其差分動態向 量’參照影像資料的識別資料，以及從內在預測電路42 輸入之內在預測模式，儲存至標頭資料等中。 緩衝記憶體3 6中儲存的影像資料，係當成下位編碼 資料S12而被圖2所示之多重化電路15讀出。 逆量化電路3 7係構成爲，將對應於量化電路3 3之量 化的逆量化處理，對來自量化電路3 3的影像資料施加， 生成藉此而得之資料，將其輸出至逆正交轉換電路38。 逆正交轉換電路38係構成爲，對從逆量化電路37輸 入過來的資料，施以正交轉換處理32上的正交轉換之逆 轉換’所生成的影像資料’輸出至加算電路39。 加算電路39係構成爲，將從逆正交轉換電路38輸入 (已解碼）之影像資料’和內在預測電路42或者從動態預測 •補償電路4 3輸入之預測影像資料p I予以加算，生成參 照（再構成）圖像資料’將其輸出至去區塊濾鏡4 〇。 去區塊濾鏡40係構成爲’將從加算電路39輸入之參 照圖像資料的區塊歪斜加以去除而寫入至畫格記憶體4 1。 寫入至畫格記憶體4 1的參照圖像資料，係被當成下 位預測影像資料L_PRE而從畫格記憶體4 1中讀出，例如 ’輸出至圖2所示之轉換電路13。 內在預測電路42係構成爲，於內在編碼的大區塊中

S -12- 201204051 ，決定殘差最小的內在預測之模式及預測區塊的區塊大小 〇 內在預測電路4 2，作爲區塊大小，例如使用4 X 4及 1 6 X 1 6像素。 內在預測電路42係構成爲，當內在預測被選擇時， 將內在預測所致之預測影像資料PI，輸出至演算電路3 1 及加算電路3 9。 動態預測·補償電路43係構成爲，基於已編碼後被 局部解碼而被記憶在畫格記憶體4 1中的參照圖像資料 REF來進行動態預測，決定殘差最小的動態向量及動態補 償之區塊大小。 動態預測•補償電路43，作爲區塊大小，係使用 16x16 ' 16x8、 8x16、 8x8、 8x4、 4x8 及 4x4 像素。 動態預測•補償電路43係構成爲，當外跨（inter)預 測被選擇時，將外跨預測所致之預測影像資料PI，輸出至 演算電路31及加算電路39。 [轉換電路] 參照圖2說明轉換電路13。 轉換電路13係將從下位圖層編碼電路12所輸入之下 位預測影像資料L_PRE內插處理，上位圖層編碼電路1 4 係生成和從延遲電路Π所輸入之漸進式影像資料S10_l 同解析度（掃描線數）的下位預測影像資料L_PREb，並將 其輸出至上位圖層編碼電路14。 -13- 201204051 圖5係轉換電路13之構成例的圖示。 轉換電路1 3，例如，係具有：圖場內預測影像生成電 路21 '畫格內預測影像生成電路22〇 在進行轉換電路13之處理內容的說明前，將本實施 形態中所使用的用語定義如下。 例如’將具有和漸進式影像資料S 1 0_1之畫格圖像資 料X相同時間戳記的交錯式影像資料s 1 0_2的圖場圖像資 料Y，稱爲圖像資料X的基礎圖像資料。圖3的例子中， 圖場圖像資料FI1，係爲畫格圖像資料fri的基礎圖像資 料。 漸進式影像資料S10_l的畫格圖像資料X的大區塊 MBX所對應之一個基礎區塊MB Y，是存在於畫格圖像資 料X的基礎圖像資料也就是圖場圖像資料Y內。 基礎區塊MBY，係具有和大區塊MBX同長的寬，且 具有其一半的高度。 此處’當相對於畫格圖像資料X之左上的像素位置而 基礎區塊MBX之左上的像素位置係位於空間位置（xP，yP) 的情況下，基礎區塊MBY之左上的像素位置係位於空間 位置（xP，yP/2)。 茲將頂圖場資料、和其接續之底圖場資料，稱作補足 圖場配對。 於一組補足圖場配對中，頂圖場資料係爲同配對內之 底圖場資料的補足圖場資料，底圖場資料係爲同配對內之 頂圖場資料的補足圖場資料。例如，於圖3中，藉由圖場 -14- 201204051 資料FI1和FI2來構成補足圖場配對，圖場資料FI2係爲 圖場資料F11的補足圖場資料，圖場資料fΠ係爲圖場資 料FI2的補足圖場資料。 ’ 考慮構成補足圖場配對的圖場資料A，B。 當區塊MBA之左上的像素位置是相對於圖場資料a 之左上的像素位置而具有空間位置（XP_A, yP_A)，且區塊 MBB之左上的像素位置是相對於圖場資料b之左上的像 素位置而具有空間位置（xP_B，yP_B)的情況下，則區塊 Μ B A和Μ B B具有相同大小；當空間位置（X p _ a，y P _ A)和 空間位置（xP_B, yP_B)係爲相同時，則區塊MBA係爲區塊 MBB的補足區塊，區塊MBB係爲區塊MBA的補足區塊。 圖場內預測影像生成電路2 1，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲頂圖場資料時， 便將編碼對象（current)之大區塊MB所對應之下位預測影 像資料L_PRE內的基礎區塊資料，例如圖6(A)所示，僅 使用該頂圖場資料來進行擴增取樣（up sample)處理，以生 成和漸進式影像資料S 1 0_ 1相同解析度的下位預測影像資 料 L_PREb(FI)。 圖場內預測影像生成電路2 1，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲底圖場資料時， 便將編碼對象之大區塊MB所對應之下位預測影像資料 L_PRE內的基礎區塊資料，例如圖6(B)所示，僅使用該底 圖場資料來進行擴增取樣處理，以生成和漸進式影像資料 Sl〇_l相同解析度的下位預測影像資料L_PREb(FI)。 -15- 201204051 圖7係用來說明圖5所示之圖場內預測影像生成電路 2 1之處理的1例的流程圖。圖場內預測影像生成電路2 1 係構成爲進行下記處理。 以下的’說明中，假設下位預測影像資料L_PRE內的 基礎區塊資料的線數爲N。又，假設基礎區塊資料的第i 個線資料爲Base[i]。此處，i係爲「〇」〜「N-1」之整數 〇 圖7所示的步驟ST12〜ST15係表示圖6(A)及圖8(A) 所示之頂圖場的擴增取樣處理，圖7所示的步驟ST16〜 ST19係表示圖6(B)及圖8(B)所示之底圖場的擴增取樣處 理。 步驟S T 1 1 : 圖場內預測影像生成電路21，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料l_PRE爲頂圖場資料時， 則進入步驟ST 1 2，或非如此時則進入步驟ST丨6。 步驟ST 12 : 圖場內預測影像生成電路2 1，係將基礎區塊資料的第 1個線資料B a s e [ i ] ’複製成下位預測影像資料[_ P R E b內 的對應之預測區塊資料的第2i個線資料PRED[2i]。 亦即’圖場內預測影像生成電路2 1，係藉由上記複製 ’而生成了 線資料 PRED[0]，[2],…，[2N-2]。

-16- 201204051 步驟S Τ 1 3 : 圖場內預測影像生成電路2 1 ’係將上記基礎區塊資料 之最下線的下一個線資料’視爲線資料B a s e [ N ]。 步驟S Τ 1 4 : 圖場內預測影像生成電路2 1，係在線資料p r e D [ 2 N ] 中，儲存在步驟S Τ 1 3中所得之線資料b a s e [ N ]。 步驟ST1 5 : 圖場內預測影像生成電路21，係藉由下記式（1)，將 線資料P R E D [ 2 i ]乘上權重値 w 1後的結果，和線資料 PRED[2i + 2]乘上權重値w2後的結果予以加算，生成下位 預測影像資料L_PREb內的對應之預測區塊資料的第2i + 1個線資料PRED[2i + 1]。 (1) PRED[2i + 1] = wl * PRED[2i] + w2* PRED[2i + 2] 步驟S Τ 1 6 : 圖場內預測影像生成電路2 1，係將基礎區塊資料的第 i個線資料Base[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i+l個線資料PREDt2i+lj 〇 亦即，圖場內預測影像生成電路2 1，係藉由上記複製 ，而生成了 線資料 PRED[1]，[3]，…，[2N-1]。 -17- 201204051 步驟STl 7 : 圖場內預測影像生成電路21，係將上記基礎區塊資料 之最上線的上一個線資料，視爲線資料^ 步驟ST18 : 圖場內預測Θ像生成電路2 1 ’係在線資料p R E D [ _ i ] 中’儲存在步驟ST17中所得之線資料Basefq]。 步驟ST1 9 : 圖場內預測影像生成電路.2 1 ’係藉由下記式（2 )，將 線資料PRED[2i-1 ]乘上權重値wl後的結果，和線資料 PRED[2i + 1]乘上權重値w2後的結果予以加算，生成下位 預測影像資料L_PREb內的對應之預測區塊資料的第2i個 線資料PRED[2i]。 PRED[2i] = wl 氺 PRED[2i-l] + w2* PRED[2i + 1] ··· (2) 步驟S T 2 0 : 圖場內預測影像生成電路2 1，係將步驟ST 1 5及步驟 ST19中所生成之預測區塊資料的線資料PRED[i]，當成下 位預測鬏像資料L_PREb(FI)而輸出至上位圖層編碼電路 14。 參照圖5說明畫格內預測影像生成電路22。 畫格內預測影像生成電路2 2係構成爲，當從下位圖

-18- 201204051 層編碼電路12輸入之下位預測影像資料L_PRE爲頂圖場 資料時，便例如圖9(A)所示，使用編碼對象（current)之大 區塊MB所對應之下位預測影像資料L_PRE(頂圖場資料） 內的基礎區塊資料Base，和該基礎區塊資料的補足區塊資 料Comp(底圖場資料）來進行擴增取樣處理，以生成和漸 進式影像資料S 1 0_ 1相同解析度的下位預測影像資料 L_PREb(FR)。 又，畫格內預測影像生成電路2 2係構成爲，當從下 位圖層編碼電路1 2輸入之下位預測影像資料L_PRE爲底 圖場資料時，便例如圖.9(B)所不，使用編碼對象（current) 之大區塊MB所對應之下位預測影像資料l_PRE(底圖場 資料）內的基礎區塊資料Base，和該基礎區塊資料的補足 區塊資料Comp(頂圖場資料）來進行擴增取樣處理，以生 成和漸進式影像資料S 1 0_ ί相同解析度的下位預測影像資 料 L_PREb(FR)。 圖1 〇係用來說明圖5所示之畫格內預測影像生成電 路22之處理的1例的流程圖。 以下的說明中，假設下位預測影像資料L_PRE內的 基礎區塊資料的線數爲N。又，假設基礎區塊資料的第i 個線資料爲Base[i]。此處，i係爲「〇」〜「n_i」之整數 〇 圖10所示的步驟ST32〜ST36係表示圖9(A)及圖11 所不之頂圖場的擴增取樣處理，圖1 〇所示的步驟S τ 3 7〜 S T 4 1係表不圖9 ( B)及圖1 2所示之底圖場的擴增取樣處理 -19- 201204051 步驟S Τ 3 1 : 畫格內預測影像生成電路22，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲頂圖場資料時， 則進入步驟S T3 2，或非如此時則進入步驟S T 3 7。 步驟ST32 ： 畫格內預測影像生成電路22，係將基礎區塊資料的第 i個線資料Base[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i個線資料PRED[2i]。 亦即，圖場內預測影像生成電路2 1，係藉由上記複製 ，而生成了 線資料 PRED[0]，[2], ...，[2N-2]。 步驟ST33 : 畫格內預測影像生成電路22，係將基礎區塊資料所對 應之補足區塊資料的第i個線資料C〇mp[i]，代入至第2i + 1 個線資料 P RE D [ 2 i + 1 ]。 步驟S T 3 4 : 圖場內預泖影像生成電路2 1 ’係將上記基礎區塊資料 之最下線的下一個線資料，視爲線資料Base[N]。 步驟ST35 :

-20- 201204051 圖場內預測影像生成電路21，係在線資料PRED[2N] 中，儲存在步驟ST34中所得之線資料Base[N]。 步驟S T 3 6 : 圖場內預測影像生成電路2 1，係藉由下記式（3 )，將 線資料 PRED[2i]乘上權重値 wl後的結果，和線資料 PRED[2i+ 2]乘上權重値w2後的結果，和線資料PRED[2i + 1 ]乘上權重値w3後的結果予以加算，生成下位預測影 像資料L_PREb內之對應的預測區塊資料的第2i + 1個線 資料 PRED[2i + 1]。 PRED[2i + 1] = wl 氺 PRED[2i] + w2 氺 PRED[2i + 2] + w3* PRED[2i + 1 ] --.(3) 步驟ST37 : 圖場內預測影像生成電路21，係將基礎區塊資料的第 i個線資料BaSe[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i+l個線資料PRED[2i+l] 〇 亦即’圖場內預測影像生成電路2 1，係藉由上記複製 ’而生成了 線資料 PRED[1]，[3],…，[2N-1]。 步驟ST38 : 畫格內預測影像生成電路22，係將基礎區塊資料所對 -21 - 201204051 應之補足區塊資料的第丨個線資肖c〇mp[i]，代入至第2i 個線資料PRED[2i]。 步驟S T 3 9 : 畫格內預測影像生成電路22 ’係將上記基礎區塊資料 之最上線的上一個線資料，視爲線資料Base[i]。 步驟ST40 : 畫格內預測影像生成電路2 2 ’係在線資料p r e D [ - 1 ] 中’儲存在步驟ST39中所得之線資料Βμμ」]。 步驟ST4 1 : 畫格內預測影像生成電路22，係藉由下記式（4)，將 線資料P RED [2 i _ 1 ]乘上權重値w 1後的結果，和線資料 PRED[2i + 1]乘上權重値W2後的結果，和線資料 PRED[2i]乘上權重値w3後的結果予以加算，生成下位預 測影像資料L_P REb內之對應的預測區塊資料的第2 i個線 資料 PRED[2i]。 PRED[2i] = wl 氺 PRED[2i-l] + w2 氺 PRED[2i + 1] + w3* PRED[2i] ... (4) 步驟ST42 : 畫格內預測影像生成電路22，係將步驟ST36及步驟 ST41中所生成之預測區塊資料的線資料PRED[i]，當成下

-22- 201204051 位預測影像資料L_PREb(FR)而輸出至上位 14。 [上位圖層編碼電路] 上位圖層編碼電路14係構成爲，使用ί 輸入之下位圖層編碼電路12中所生成之下 料L_PREb，將漸進式影像資料S10_l予以 位編碼資料S 1 4。 圖13係上位圖層編碼電路14的構成例: 上位圖層編碼電路1 4，例如係具有： 123、演算電路131、正交轉換電路132、量 速率控制電路134、可逆編碼電路135、緩衝 逆量化電路137、逆正交轉換電路138、加舅 區塊濾鏡1 40、畫格記憶體1 4 1、內在預測電 動態預測•補償電路143。 畫面排序電路123係構成爲，例如，把 延遲電路11讀出來的漸進式影像資料S10_ ，隨應於由圖像形式I，P，B所成之G Ο P構 行編碼的順序，然後當成編碼對象之圖像資: 至演算電路131、內在預測電路142及動態 路 143。 演算電路131係構成爲，生成出代表從 1 23輸入過來的編碼對象之圖像資料，和從 142、動態預測·補償電路1 43或下位圖層 圖層編碼電路 洽轉換電路13 位預測影像資 編碼而生成上 之圖示。 畫面排序電路 化電路1 3 3、 i記憶體1 3 6、 :電路139、去 :路142，以及 從圖2所示之 J的圖像資料 造，排序成進 料ORG，輸出 預測·補償電 畫面排序電路 內在預測電路 預測電路145 -23- 201204051 輸入過來的預測影像資料PI，兩者之差分的影像資料，並 將其輸出至正交轉換電路132。 正交轉換電路132係構成爲，對從演算電路131輸入 過來的影像資料，施以離散餘弦轉換或卡忽南-拉維轉換 等之正交轉換，然後生成出表示轉換係數的影像資料（例 如DCT係數），將其輸出至量化電路133。 量化電路133係構成爲，將從正交轉換電路132輸入 過來的影像資料（量化前的轉換係數），基於從速率控制電 路134輸入過來之量化尺度QS而進行量化，生成表示量 化後轉換係數的影像資料，並將其輸出至可逆.編碼電路 135及逆量化電路137。 速率控制電路1 34係構成爲，例如，基於從緩衝記憶 體136所讀出之影像資料，生成量化尺度QS，並將其輸 出至量化電路133。 可逆編碼電路135係構成爲，將從量化電路133輸入 過來的影像資料進行可變長編碼而成的影像資料，儲存至 緩衝記憶體1 3 6。此時，可逆編碼電路1 3 5，係將從階層 化電路10所輸入之屬性資料EisTop，ETime，儲存至標頭 資料等中。又，可逆編碼電路1 3 5，係將從動態預測.補 償電路1 4 3輸入之動態向量Μ V或其差分動態向量，參照 影像資料的識別資料，以及從內在預測電路】42輸入之內 在預測模式，儲存至標頭資料等中。 緩衝記憶體1 3 6中儲存的影像資料，係當成上位編碼 資料SM而被圖2所示之多重化電路15讀出。

S -24- 201204051 逆量化電路137係構成爲’將對應於量化電路133之 量化的逆量化處理’對來自量化電路1 33的影像資料施加 ’生成藉此而得之資料’將其輸出至逆正交轉換電路in 〇 逆正交轉換電路138係構成爲，對從逆量化電路137 輸入過來的資料，施以正交轉換處理132上的正交轉換之 逆轉換’所生成的影像資料，輸出至加算電路1 3 9。 加算電路139係構成爲，將從逆正交轉換電路138輸 入（已解碼）之影像資料’和內在預測電路1 4 2或者從動態 預測•補償電路1 4 3輸入之預測影像資料p:[予以加算， 生成參照（再構成）圖像資料，將其輸出至去區塊濾鏡40。 去區塊濾鏡1 4 0係構成爲，將從加算電路1 3 9輸入之 參照圖像資料的區塊歪斜加以去除而寫入至畫格記憶體 141。 內在預測電路142係構成爲，於內在編碼的大區塊中 ’決定殘差最小的內在預測之模式及預測區塊的區塊大小 。內在預測電路14 2，作爲區塊大小，例如使用4 X 4及 16x16像素。內在預測電路142係構成爲，當內在預測被 選擇時’將內在預測所致之預測影像資料PI，輸出至演算 電路131及加算電路139。 動態預測.補償電路1 43係構成爲，基於已編碼後被 局部解碼而被記憶在畫格記憶體1 3 1中的參照圖像資料 REF來進行動態預測，決定與編碼對象之圖像資料〇RG 的處理對象之區塊資料之差分爲最小的動態向量及動態補 -25- 201204051 償之區塊大小。動態預測·補償電路1 43，作爲區塊大小 ，例如，係使用 16x16、 16x8、 8x16、 8x8、 8x4、 4x8 及 4x4像素之任一者。 動態預測·捕償電路143係構成爲，當外跨（inter)預 測被選擇時，將外跨預測所致之預測影像資料PI，輸出至 演算電路131及加算電路139。 下位圖層預測電路145係構成爲，將從圖2所示之轉 換電路13所輸入之下位預測影像資料 L_PREb(FI)和 L_PREb(FR)之中，特定出與圖像資料ORG之處理對象之 區塊資料的差分爲小的預測影像資料。 圖14係下位圖層預測電路145的構成例之圖示。 下位圖層預測電路145，係具有減算電路81、減算電 路8 2及判定電路8 3。 減算電路81係構成爲，生成出代表從圖5所示之圖 場內預測影像生成電路2 1所輸入之下位預測影像資料 L_PREb(FI)，和圖13所示之編碼對象之圖像資料ORG內 的處理對象之區塊资料之間的對應之像素資料間之差分的 差分資料，並將其輸出至判定電路83。 減算電路82係構成爲，例如，生成出代表從圖5所 示之畫格內預測影像生成電路22所輸入之下位預測影像 資料L_PREb(FR)，和圖13所示之編碼對象之圖像資料 ORG內的處理對象之區塊資料之間的對應之像素資料間之 差分的差分資料，並將其輸出至判定電路83。 判定電路83係構成爲，將從減算電路81輸入之差分

S -26- 201204051 資料’以區塊資料單位加以累積而生成指標資料SAD(FI) 。又’判定電路83係構成爲，將從減算電路82輸入之差 分資料，以區塊資料單位加以累積而生成指標資料 SAD(FR)。然後，判定電路83係構成爲，將指標資料 SAD(FI)和指標資料SAD(FR)當中較小者，予以特定出來 。判定電路83係構成爲，當下位圖層預測電路1 45被選 擇時’上記已特定之較小的指標資料SAD(FI)，（FR)所對 應之下位預測影像資料L_PREb(FI)，（FR)，輸出至演算電 路 131。 內在預測電路1 42，係在動態預測.補償電路1 43及 下位圖層預測電路1 45所生成之預測影像資料PI當中， 選擇出和編碼對象之圖像資料ORG的差分爲最小的預測 影像資料P I，而輸出至演算電路1 3 1。 上位圖層編碼電路14係構成爲，將表示最終選擇好 的預測模式的預測模式資料PM，儲存在標頭資料中然後 以可逆編碼電路135進行編碼。上位圖層編碼電路14係 構成爲，當已選擇下位預測影像資料L_PREb(FI)時，則生 成表示跨圖層/圖場內預測的預測模式資料。上位圖層編 碼電路14係構成爲，當已選擇下位預測影像資料 L_PREb(FR)時，則生成表示跨圖層/畫格內預測的預測模 式資料。 上述例中’雖然係舉例了將下位圖層編碼電路1 2中 所生成之再構成影像資料，當成上位圖層編碼電路14中 的內在預測編碼的預測影像資料而使用之情形，但是亦可 -27- 201204051 爲，將下位圖層編碼電路12中所生成之再構成影像資料 或動態向量，當成上位圖層編碼電路1 4中的外跨預測編 碼的預測影像資料或動態向量而使用，並將該模式當成選 擇候補而使用。 [多重化電路] 多重化電路15係構成爲，將從下位圖層編碼電路12 輸入之下位編碼資料S12，和從上位圖層編碼電路14輸 入之上位編碼資料S14，予以多重化而生成編碼資料S2。 [編碼裝置的動作例] 說明圖2所示之編碼裝置2的動作例。 階層化電路10，係如圖2所示，基於編碼對象之影像 資料S9，來生成漸進式影像資料（漸進式訊號）S10_1，和 交錯式影像資料S10_2。階層化電路10,係將構成上記已 生成之漸進式影像資料S10_l的圖像資料FR1〜6·.·之每 —者，輸出至延遲電路1 1。然後，階層化電路1 〇，係將 上記生成之交錯式影像資料S10_2，輸出至下位圖層編碼 電路12。 下位圖層編碼電路12，係將從階層化電路10所輸入 之交錯式影像資料S 1 0_2予以編碼而生成下位編碼資料 S12’並將其輸出至多重化電路15。又，下位圖層編碼電 路1 2 ’係於上記編碼中，生成下位預測影像資料L_PRE ，並將其輸出至轉換電路13。

-28- 201204051 轉換電路13，係將從下位圖層編碼電路12所輸入之 下位預測影像資料L_PRE內插處理，上位圖層編碼電路 14係生成和從延遲電路n所輸入之漸進式影像資料 S10_l同解析度（掃描線數）的下位預測影像資料L_PREb， 並將其輸出至上位圖層編碼電路14。 延遲電路11，係將構成從階層化電路10輸入之漸進 式影像資料（漸進式訊號）S10_1的各圖像資料，恰好延遲 ，例如，下位圖層編碼電路12及轉換電路13上的處理時 間，然後輸出至上位圖層編碼電路14。 上位圖層編碼電路14，係使用從轉換電路13輸入之 下位圖層編碼電路12中所生成之下位預測影像資料 L_PREb，將漸進式影像資料S10_l予以編碼而生成上位 編碼資料S 1 4。 多重化電路15，係將從下位圖層編碼電路12輸入之 下位編碼資料S12，和從上位圖層編碼電路14輸入之上 位編碼資料S14，予以多重化而生成編碼資料S2。 <解碼裝置> 圖1 5係圖1所示之解碼裝置3的構成例之圖示。 解碼裝置3，例如，具有：分離電路51、延遲電路52 、下位圖層解碼電路53、轉換電路54及上位圖層解碼電 路55。 [分離電路] -29- 201204051 分離電路51係構成爲，輸入編碼裝置2所生成之上 述編碼資料，將其分離成下位編碼資料S12和上位編碼資 料S14，將下位編碼資料S12輸出至下位圖層解碼電路53 ，將上位編碼資料S14寫入至延遲電路52。 [延遲電路] 延遲電路52係構成爲，將從分離電路51輸入之上位 編碼資料S14，恰好延遲下位圖層解碼電路53及轉換電 路54上的處理時間，然後輸出至上位圖層解碼電路55。 [下位圖層解碼電路] 圖1 6係下位圖層解碼電路53的構成例之圖示。 下位圖層解碼電路53，例如，具有：積存緩衝區60 、可逆解碼電路61、逆量化電路62、逆正交轉換電路63 、加算電路64、去區塊濾鏡65、畫格記億體66、畫面排 序緩衝區67、內在預測電路69、動態預測.補償電路70 〇 積存緩衝區60中，係寫入了從分離電路51輸入之下 位編碼資料5 1。 可逆解碼電路61係構成爲，當判斷爲下位編碼資料 S12內的處理對象之大區塊MB，是被外跨（inter)編碼時， 則將其的標頭部中所寫入的動態向量予以解碼，而輸出至 動態預測·補償電路7 0。可逆解碼電路6 1係構成爲，當 判斷爲下位編碼資料S12內的處理對象之大區塊MB是被 -30-

S 201204051 內在（intra)編碼時，則將其標頭部中所寫入的內在預測模 式資訊予以解碼，而輸出至內在預測電路69。可逆解碼電 路6 1係構成爲，將下位編碼資料S 1 2予以解碼然後輸出 至逆量化電路62。可逆解碼電路61係構成爲，將標頭部 中所含之預測模式資料PM予以解碼，將解碼結果輸出至 例如圖1 5所示之轉換電路5 4。 逆量化電路62係構成爲，將已被可逆解碼電路61解 碼過之影像資料（正交轉換係數），基於從可逆解碼電路61 所輸入之量化參數QP而加以逆量化，然後輸出至逆正交 轉換電路6 3。 逆正交轉換電路63係構成爲，對從逆量化電路62輸 入過來的影像資料（正交轉換係數）實施4x4的逆正交轉換 處理，而生成差分影像資料，將其輸出至加算電路64。 加算電路64係構成爲，將來自動態預測•補償電路 70或內在預測電路69的預測影像資料PI，和來自逆正交 轉換電路63的差分影像資料進行加算而生成影像資料， 並將其輸出至去區塊濾鏡6 5。 去區塊濾鏡65係構成爲，對從加算電路64輸入之影 像資料實施去區塊濾鏡處理，將處理後的解碼影像資料， 寫入至畫格記憶體66及畫面排序緩衝區67。 被記憶在畫格記億體66中的解碼影像資料，係作爲 下位預測影像資料L_PRE 1而被讀出至圖1 5所示之轉換 電路54。 內在預測電路69係構成爲，基於從可逆解碼電路61 -31 - 201204051 所輸入之內在預測模式，和從畫格記憶體66讀出之解碼 影像資料，來生成預測影像資料PI，並將其輸出至加算電 路64。 動態預測•補償電路70係構成爲，基於從畫格記憶 體66中讀出之解碼影像資料，和從可逆解碼電路61輸入 進來的動態向量，來生成預測影像資料PI，並將其輸出至 加算電路6 4。 畫面排序緩衝區67係構成爲，將從去區塊濾鏡65寫 入之解碼影像資料，加以記憶。被記憶在畫面排序緩衝區 67中的解碼影像資料，係按照顯示順序，作爲下位解碼影 像資料S53而被輸出。 [轉換電路] 參照圖1 5說明轉換電路5 4 » 轉換電路54係構成爲，基於來自下位圖層解碼電路 53的預測模式資料pm，來將從下位圖層解碼電路53輸 入之下位預測影像資料L_PRE 1進行內插處理，然後生成 出和上位圖層解碼電路55從延遲電路52所讀出之上位編 碼資料SM同樣解析鍍（掃描線數）的下位預測影像資料 L_PRE lb，並將其輸出至上位圖層解碼電路55。 圖17係轉換電路54之構成例的圖示。 轉換電路54 ’例如，係具有：圖場內預測影像生成電 路221、畫格內預測影像生成電路222。 圖場內預測影像生成電路22 1係構成爲，當預測模式 -32- 201204051 資料PM爲表示跨圖層/圖場內預測時’對下位預測影像資 料L_PRE1實施參照圖6〜圖8說明過的內插處理，而生 成出和漸進式影像資料也就是上位編碼資料S Μ相同解析 度的下位預測影像資料L-PRElb(FI)。 畫格內預測影像生成電路222係構成爲，當預測模式 資料PM爲表示跨圖層/畫格內預測時’對下位預測影像資 料L_PRE1實施參照圖9〜圖12說明過的內插處理，而生 成出和漸進式影像資料也就是上位編碼資料S 1 4相同解析 度的下位預測影像資料L_PRElb(FR)。 轉換電路5 4係構成爲，將上記生成之下位預測影像 資料L_PRElb(FI)，（FR)，輸出至上位圖層解碼電路55。 [上位圖層解碼電路] 圖18係上位圖層解碼電路55的構成例之圖示。 上位圖層解碼電路55，例如，具有：積存緩衝區160 、可逆解碼電路161、逆量化電路162、逆正交轉換電路 163、加算電路164、去區塊濾鏡165、畫格記憶體166、 畫面排序緩衝區1 67、內在預測電路1 69、動態預測·補 償電路1 70及下位圖層預測電路1 7 1。 積存緩衝區160中，係寫入了從延遲電路52讀出之 上位編碼資料S14» 可逆解碼電路161係構成爲，將標頭資料中所含之預 測模式資料PM予以解碼。 可逆解碼電路1 6 1係構成爲，當預測模式資料PM是 -33- 201204051 表示上位編碼資料S14內的處理對象之大區塊 跨編碼的情況下，則將被寫入在其標頭部中的 以解碼然後輸出至動態預測.補償電路1 70。 可逆解碼電路1 6 1係構成爲，當預測模式 表示上位編碼資料S14內的處理對象之大區塊 在編碼的情況下，則將被寫入在其標頭部中的 式資訊予以解碼然後輸出至內在預測電路169< 可逆解碼電路161係構成爲，當預測模式 表示跨圖層/圖場內預測或者跨圖層/畫格內預 其意旨通知給下位圖層預測電路1 7 1。 可逆解碼電路161係構成爲，將上位編碼 以解碼然後輸出至逆量化電路162。 可逆解碼電路1 6 1係構成爲，將預測模式 輸出至動態預測•補償電路1 7 0、內在預測電g 位圖層預測電路1 7 1。 逆量化電路162係構成爲，將已被可逆解 解碼過之影像資料（正交轉換係數），基於從可 6 1所輸入之量化參數QP而加以逆量化，然後 交轉換電路163。 逆正交轉換電路163係構成爲，對從逆量 輸入過來的影像資料（正交轉換係數）實施4x4 換處理’而生成差分影像資料，將其輸出至加 〇 加算電路1 64係構成爲，將來自動態預測 MB是被外 動態向量予 資料PM是 MB是被內 內在預測模 > 資料PM爲 測時，則將 資料S 1 4予 資料 PM， 各169及下 碼電路1 6 1 逆解碼電路 輸出至逆正 化電路1 6 2 的逆正交轉 算電路164 •補償電路 -34- 201204051 1 7 0、內在預測電路1 6 9或下位圖層預測電路1 7 1的預測 影像資料ΡΙ，和來自逆正交轉換電路1 63的差分影像資料 進行加算而生成影像資料，將其輸出至去區塊濾鏡1 65。 去區塊濾鏡1 65係構成爲’對從加算電路1 64輸入之 影像資料實施去區塊濾鏡處理，將處理後的解碼影像資料 ，寫入至畫格記憶體1 66及畫面排序緩衝區1 67。 內在預測電路1 6 9係構成爲，當通常之內在預測被指 定時，則基於從可逆解碼電路1 6 1所輸入之預測模式資料 ΡΜ所指示的內在預測，和從畫格記憶體1 66中讀出之解 碼影像資料，來生成預測影像資料ΡΙ，並將其輸出至加算 電路164。 動態預測•補償電路1 70係構成爲，當預測模式資料 ΡΜ是表示外跨預測時，則基於從畫格記憶體1 66中讀出 之解碼影像資料，和從可逆解碼電路1 6 1輸入之動態向量 ，來生成預測影像資料ΡΙ，並將其輸出至加算電路1 64。 下位圖層預測電路1 7 1係構成爲，當預測模式資料 ΡΜ爲表示跨圖層/圖場內預測或者跨圖層/畫格內預測時， 則將從轉換電路 54輸入之下位預測影像資料 L_PRElb(FI)，（FR)，或對其施行過所定處理的資料，當成 預測影像資料PI而輸.出至加算電路1 64。 畫面排序緩衝區167係構成爲，將從去區塊濾鏡165 寫入之解碼影像資料’加以記憶。被記憶在畫面排序緩衝 區1 67中的解碼影像資料，係按照顯示順序，作爲上位解 碼影像資料S 5 5而被輸出❶ -35- 201204051 [解碼裝置的動作例] 分離電路51係構成爲，輸入編碼裝置2所生成之上 述編碼資料，將其分離成下位編碼資料S12和上位編碼資 料S14，將下位編碼資料S12輸出至下位圖層解碼電路53 ’將上位編碼資料S14寫入至延遲電路52» 延遲電路52係構成爲，將從分離電路51輸入之上位 編碼資料S14，恰好延遲下位圖層解碼電路53及轉換電 路54上的處理時間，然後輸出至上位圖層解碼電路55。 下位圖層解碼電路53係構成爲，將下位編碼資料 S12予以解碼，生成下位解碼影像資料S53，並將其輸出 。又’下位圖層解碼電路53係構成爲，生成下位預測影 像資料L_PRE1(FI)，（FR)，並將其輸出至轉換電路54。 於轉換電路54中，下位預測影像資料l_PRE1(FI)， (FR) ’被轉換成漸進式的解析度之下位預測影像資料 L_PHElb(FI)，（FR)’然後輸出至上位圖層解碼電路55。 上位圖層解碼電路55係構成爲，基於下位預測影像 資料L_PRElb(FI)，（FR)來將上位編碼資料予以解碼，而 生成上位解碼影像資料S 5 5，並將其加以輸出。 如以上說明’若依據本實施形態的編碼.解碼系統】 ’則於編碼裝置2中’當進行階層編碼時，在上位圖層中 可將漸進式影像資料S 1 0_ 1加以編碼，而在下位圖層中可 將交錯式影像資料S 1 〇_2加以編碼。 又’若依據編碼.解碼系統1，則於解碼裝置3中， 可將已在編碼裝置2上進行過階層編碼的漸進式影像資料 S、 -36- 201204051 S 1 0_ 1和交錯式影像資料S 1 0_2，予以解碼。 本發明係不限定於上述實施形態。 亦即，當業者可於本發明的技術範圍內或均等範圍內 ，對於上述實施形態的構成要素，作各種變更、合倂、再 合倂以及置換。 例如，亦可將上述編碼裝置2或解碼裝置3之機能的 全部或一部份，如圖1 9所示，依據記憶體3 5 2中所記憶 之程式 PRG 的記述，而由 CPU(Central Processing Unit) 等之處理電路3 5 3來執行。 此時，解碼對象之影像資料是透過介面351，而輸入 編碼對象或解碼對象之影像資料，其處理結果則透過其而 輸出。 上述實施形態中，在大區塊層新定義的程式碼之一例 不於下記表1和表2。 表1 macroblockjayer_in_scalable_extension() { C Descriptor if( basejdj)lusl != 0 && adaptive_prediclion_flag) { base_mode_flag 2 ae(v) If(! base__mode_flag && HalfSpatResBaseFIag && ! inlra base mb( CunMbAddr)) base—mode一refinement_flag 2 ae(v) } if(! base一mode一flag && ! base_mode_refmement_flag) { mb—type 2 ae(v) If( mb—type == I_NxN && base_idj)Iusl != 0) intra_base一flag 2 ae(v) } if( intra_base_flag && interlace_base_layer && progressive curr layer) { lowerjayer_intra_prediction 一mode 2 ae(v) } -37- 201204051

macroblock_layerJn_scalable_extension() { C Descriptor if( base一id_plusl != 0 && adaptive_prediction_flag) { basc_mode_flag 2 ae(v) lf(! base_mode_flag && HalfSpatResBaseFIag && ! intra base mb( CurrMbAddr)) base_mode_refinement_nag 2 ae(v) > if(! base—mode一flag && ! base_mode_refinement_flag) { mbjype 2 ae(v) If(mb_type == I_NxN && base_id_phisl != 0) intra一 base__flag 2 ae(v) } if( intra_base一flag && inter】ace_base_]ayer && progressive curr layer && frame structure base block) { lower_layer_intra_prediction_mode 2 ae(v) } 上記表1及表2中所示之“ lower#layer#intra#prediction#mode"，係和預測模式一倂 被儲存在編碼資料中的旗標資料。 該當旗標資料係例如，若使用圖6〜圖8所示之擴增 取樣手法時則表示爲「〇」，若使用圖9〜圖12所示之擴 增取樣手法時則表示爲^ 1」。 當該當旗標資料不存在時，就判斷成是表示爲「〇」 〇 “ a e (v) ”係表示，已被指定的語法（s y n t a X)，係爲上 下文適應性摘編碼（context-adaptive entropy coding)。 ·· base#id#plusr，，係將用來預測目前圖像之動態向 量、像素資料及差分資料所用之基礎圖像資料加以特定之 參數。 S1 -38- 201204051 ** adaptive#prediction#flag"，係表示可調性擴充中 的大區塊層內的語法要素之有無，若爲無則表示成「〇J 〇 當“ base#mode#flag”爲「1」時，則表示了目前大區 塊的mb#type ;當參照號碼未被表示時，則隨著對應之基 礎大區塊而表示動態向量。 當 “base#mode#flag” 爲「0」時，“ base#mode#refinement#flag"非 Γ 1」時貝 lj “mb#type” 係 未被推定。 當 “base#mode#flag”不存在時，則“ base#mode#flag”係被推定如下。 當“baSe#id#pluSl”爲「0」時，則推定“ base#mode#flag 之値爲 「0」。除此以外，“ base#mode#flag”之値均堆定爲「1」。 當“base#id#plusl”大於「0」，基礎圖層是目前圖 層的1/2寬、1/2高時，HalfSpatResBaseFlag係被設定成 「1」；除此以外均設定爲「0」。 “intra#base#mb(CurrMbAddr)” 係一函數，當 CrarmbAddr的基礎大區塊爲1大區塊時，則回送「1」， 除此以外均回送「1」。 當 “base#mode#refinement#flag” 爲「1」時，則表示 目前大區塊的mb#type和參照號碼，是根據所對應之基礎 大區塊來推定。當 “base#mode#refinement#flag” 爲「1」 時，則在使用基礎大區塊之動態向量所得到之動態向量的 -39- 201204051 預測値中，將被加過1 /4像素解析度的動態向量特定出來 當 “base#mode#refinement#flag” 爲「0」時， mb#type係未被推定。 "mb#type”係代表大區塊形式。“mb#type”的語意 ，係依存於分切形式（slice type)。 當“intra#base#flag”爲「1」時，則表示大區塊形式 I#BL奁示才。 當 “ intra#base#flag” 不存在時，“ intra#base#f 1 ag” 係推定如下。 當"base#mode#flag” 爲「1」且 “mb#type” 爲 I_NxN時，則“ intra#base#flag”係推定爲「1」.；除此此 外均推定爲「〇」。 “I#NxN”係表示，大區塊形式是屬於內在8x8、內 在4x4或者I_BL之任何一者。 “ I#BL”係表示，其預測値並非周圍像素資料，而是 從基礎圖像資料所得之內在大區塊（intr a macroblock)。 “interlace#base#layer”係表示，基礎圖層的來源， 係爲交錯式形式。 “progressive#curr#layer”係表示，目前圖層的來源 是漸進式形式。 “frame#structure#base#block” 係表示，基礎區塊是 以畫格構造而編碼。 如以上所述，在本說明書的實施形態中係揭露了例如以 S： -40- 201204051 下之發明。 〔發明1〕 一種編碼裝置’係屬於將漸進式資料、和該當漸進式 資料所對應之交錯式資料加以編碼的編碼裝置，其特徵爲 ’具有：第1編碼手段’係生成：將構成前記交錯式資料 的圖像資料予以編碼而成之第1編碼資料、和將前記第i 編碼資料予以解碼並而再構成之再構成影像資料；和擴增 取樣手段，將前記第1編碼手段所生成之前記再構成影像 資料加以擴增取樣，以生成和前記漸進式資料相同解析度 的影像資料；和第2編碼手段，將前記擴增取樣手段所生 成之前記影像資料當成預測影像資料，來將構成前記漸進 式資料的圖像資料加以編碼，以生成第2編碼資料。 〔發明2〕 如發明1所記載之編碼裝置，其中，前記第2編碼手 段，係對應於被分配有和前記編碼對象之漸進式資料的圖 像資料爲相同時間戳記的前記交錯式資料之圖像資料，將 前記擴增取樣手段所生成之前記影像資料，當成前記預測 影像資料來使用。 〔發明3〕 如發明1所記載之編碼裝置，其中’前記擴增取樣手 段，係僅使用被分配有和前記第2編碼手段所致之編碼對 象的圖像資料爲相同時間戳記的前記交錯式資料之圖像資 料來進行內插處理，以生成前記預測影像資料。 〔發明4〕 -41 - 201204051 如發明1所記載之編碼裝置，其中，前記擴增取樣手 段，係使用被分配有和前記第2編碼手段所致之編碼對象 的圖像資料爲相同時間戳記的前記交錯式資料之圖像資料 、和與該當交錯式資料之圖像資料呈配對的圖像資料，來 進行內插處理，以生成前記預測影像資料。 〔發明5〕 如發明1所記載之編碼裝置，其中，前記擴增取樣手 段，係僅使用被分配有和前記第2編碼手段所致之編碼對 象的圖像資料爲相同時間戳記的前記交錯式資料之圖像資 .料來進行內插處理，以生成第1前記預測影像資料；使用 被分配有和前記第2編碼手段所致之編碼對象的圖像資料 爲相同時間戳記的前記交錯式資料之圖像資料，和與該當 交錯式資料之圖像資料呈配對的圖像資料來進行內插處理 ，以生成第2前記預測影像資料；前記第2編碼手段，係 將前記第1預測影像資料和前記第2預測影像資料之中， 與前記編碼對象之圖像資料之間的差異較小者，當成預測 影像資料而加以選擇然後進行編碼。 〔發明6〕 如發明1所記載之編碼裝置，其中，前記第1編碼手 段及前記第2編碼手段，係分別都是進行內在（intra)編碼 來作爲前記編碼。 〔發明7〕 如發明1所記載之編碼裝置，其中，前記第2編碼手 段，係將藉由使用了前記編碼對象之圖像資料的內在預測

-42- 201204051 所生成之預測影像資料、藉由動態預測•補償所生成之預 測影像資料、將前記擴增取樣手段所生成之前記影像資料 當成的預測影像資料當中，與編碼對象之圖像資料之間差 分最小的預測影像資料，加以選擇；將編碼對象之圖像資 料和前記選擇之預測影像資料的差分，加以編碼。 〔發明8〕 如發明1所記載之編碼裝置，其中，更具有多重化手 段，將前記第1編碼手段所生成之前記第1編碼資料、和 前記第2編碼手段所生成之前記第2編碼資料，予以多重 化。 〔發明9〕 一種編碼方法，係屬於將漸進式資料、和該當漸進式 資料所對應之交錯式資料加以編碼的編碼方法，其特徵爲 ’具有：第1工程，係生成：將構成前記交錯式資料的圖 像資料予以編碼而成之第1編碼資料、和將前記第1編碼 資料予以解碼並而再構成之再構成影像資料；和第2工程 ，係將前記第1工程中所生成之前記再構成影像資料加以 擴增取樣，以生成和前記漸進式資料相同解析度的影像資 料；和第3工程，係將前記第2工程中所生成之前記影像 資料當成預測影像資料，來將構成前記漸進式資料的圖像 資料加以編碼，以生成第2編碼資料。 〔發明1 〇〕 一種程式’係屬於將漸進式資料、和該當漸進式資料 所對應之交錯式資料加以編碼的電腦所執行的程式，其特 -43- 201204051 徵爲，係令前記電腦，執行：第1程序，係生成：將構成 前記交錯式資料的圖像資料予以編碼而成之第1編碼資料 、和將前記第1編碼資料予以解碼並而再構成之再構成影 像資料；和第2程序，係將前記第1程序中所生成之前記 再構成影像資料加以擴增取樣，以生成和前記漸進式資料 相同解析度的影像資料；和第3程序，係將前記第2程序 中所生成之前記影像資料當成預測影像資料，來將構成前 記漸進式資料的圖像資料加以編碼，以生成第2編碼資料 〔發明1 1〕 一種解碼裝置，係屬於將漸進式資料予以編碼而得之 第1編碼資料、和將前記漸進式資料所對應之交錯式資料 予以編碼所得之第2編碼資料’將其加以解碼的解碼裝置 ’其特徵爲，具有：第1解碼手段，將前記第2編碼資料 予以解碼；和擴增取樣手段，將前記第丨解碼手段的解碼 所生成之第1預測影像資料進行內插處理以生成第2預測 影像資料’和第2解碼手段’基於前記擴增取樣手段所前 記生成之前記第2預測影像資料’來將前記第1編碼資料 予以解碼。 〔發明1 2〕 —種解碼方法，係屬於將漸進式資料予以編碼而得之 第1編碼資料、和將前記漸進式資料所對應之交錯式資料 予以編碼所得之第2編碼資料，將其加以解碼的解碼方法 ，其特徵爲，具有：第1工程，將前記第2編碼資料予以

S -44- 201204051 解碼；和第2工程，係將前記第1工程中解碼所生成之第 1預測影像資料進行內插處理以生成第2預測影像資料； 和第3工程’係基於前記第2工程所生成之前記第2預測 影像資料，將前記第1編碼資料予以解碼。 〔發明1 3〕 一種程式’係屬於將漸進式資料予以編碼而得之第1 編碼資料、和將前記漸進式資料所對應之交錯式資料予以 編碼所得之第2編碼資料，將其加以解碼的電腦所執行的 程式’其特徵爲’係令前記電腦，執行：第1程序，將前 記第2編碼資料予以解碼；和第2程序，係將前記第1程 序中解碼所生成之第1預測影像資料進行內插處理以生成 第2預測影像資料；和第3程序，係基於前記第2程序所 生成之前記第2預測影像資料，將前記第1編碼資料予以 解碼。 【圖式簡單說明】 〔圖1〕圖1係本發明之實施形態的編碼·解碼系統 的構成例圖示。 〔圖2〕圖2係圖1所示之編碼·解碼系統中的編碼 裝置的方塊圖。 〔圖3〕圖3係用來說明圖2所示之漸進式影像資料 和交錯式影像資料的圖。 〔圖4〕圖4係用來說明圖2所示之下位圖層編碼電 路之構成例的圖。 -45- 201204051 成 構 之 路 電 換 轉 之 示 所 2 圖 明 說 來 用 係 5 圖 /— 5 圖 。 C 圖 的 例 〔圖6〕圖6係用來說明圖5所示之圖場內（intrafield)預測 影像生 成電路 之處理 的例子 的圖。 〔圖7〕圖7係用來說明圖5所示之畫格內（intraframe)預 測影像 生成電 路之處 理的例 子的流 程圖。 〔圖8〕圖8係用來說明圖5所示之圖場內預測影像 生成電路之處理的例子的圖。 〔圖9〕圖9係用來說明圖5所示之畫格內預測影像 生成電路之處理的例子的圖。 〔圖1 0〕圖1 0係用來說明圖5所示之畫格內預測影 像生成電路之處理的例子的流程圖。 〔圖1 1〕圖1 1係用來說明圖5所示之畫格內預測影 像生成電路之處理的例子的圖。 〔圖1 2〕圖1 2係用來說明圖5所示之畫格內預測影 像生成電路之處理的例子的圖。 〔圖13〕圖13係圖2所示之上位圖層編碼電路之構 成例的圖示。 〔圖Μ〕圖1 4係圖1 3所示之下位圖層預測電路之構 成例的圖示。 〔圖15〕圖15係圖1所示之編碼.解碼系統中的解 碼裝置之構成例的画示》 〔圖16〕圖16係圖15所示之下位圖層解碼電路之構 成例的圖示。

S -46 - 201204051 〔圖1 7〕圖1 7係圖1 5所示之轉換電路之構成例的圖 示。 〔圖1 8〕圖1 8係圖1 5所示之上位圖層解碼電路之構 成例的圖示。 〔圖1 9〕圖1 9係用來說明本發明之實施形態的變形 例的圖。 【主要元件符號說明】 1 :編碼.解碼系統、2:編碼裝置、3:解碼裝置、 1〇:階層化電路、11:延遲電路、12:下位圖層編碼電路 、13:轉換電路、14:上位圖層編碼電路、15:多重化電 路、2 1 :圖場內預測影像生成電路、22 :畫格內預測影像 生成電路、23，123:畫面排序電路、31, 131:演算電路、 32，132:正交轉換電路、33, 133:量化電路、3 4，134: 速率控制電路、35，135:可逆編碼電路、36, 136:緩衝記 憶體、37，137:逆量化電路、38，138:逆正交轉換電路、 39，139:加算電路、40, 140:去區塊濾鏡、41，141:畫 格記憶體、42, 1 42 :內在預測電路、43, 143 :動態預測· 補償電路、51 :分離電路、52 :延遲電路、53 :下位圖層 解碼電路、54:轉換電路、55:上位圖層解碼電路、56: 再構成電路、60，160:積存緩衝區、61，161 :可逆解碼電 路、62, 162:逆量化電路、63，163:逆正交轉換電路、 64，164:加算電路、65，165:去區塊濾鏡、66，166:畫 格記憶體、67，167 :畫面排序緩衝區、69，169 :內在預測 -47- 201204051 電路、70，1 70 :動態預測.補償電路、1 45 :下位圖層預 測電路

S -48-

Claims (1)

1. 201204051 七、申請專利範圍： 1.一種編碼裝置，其特徵爲，具備： 第一編碼手段’係將漸進式圖像資料所對應之交錯式 圖像資料予以編碼，生成已被編碼之目1_)記交錯式圖丨象資料 、和預測了前記交錯式圖像資料的預測影像資料；和 轉換手段，係藉由將前記預測影像予以轉換，以生成 轉換預測影像；和 旗標生成手段，係生成旗標資料，其係用來表示，將 前記轉換預測影像，當作用來預測前記漸進式圖像資料的 預測影像來使用；和 第二編碼手段，係基於已被前記轉換手段所轉換之前 記預測影像資料，而將前記漸進式圖像資料予以編碼。 2·如申請專利範圍第1項所記載之編碼裝置，其中， 前記交錯式圖像資料係由頂圖場與底圖場所構成； 前記預測影像資料係由，預測了前記頂圖場的預測頂 圖場和預測了前記底圖場的預測底圖場所構成； 前記轉換預測影像係由，已被前記轉換手段所轉換過 的前記預測頂圖場、和已被前記轉換手段所轉換過的前記 預測底圖場所構成。 3 .如申請專利範圍第2項所記載之編碼裝置，其中， 前記轉換手段，係 藉由將前記預測頂圖場與前記預測底圖場予以相加， 以生成預測漸進式資料； 前記第二編碼手段，係 -49- 201204051 基於前記預測漸進式資料，而將前記漸進式圖像資料 予以編碼。 4.如申請專利範圍第3項所記載之編碼裝置，其中’ 前記轉換手段，係 將位於前記預測頂圖場的最上面之像素資料的列視爲 前記預測漸進式資料的最上面之像素資料的列，將位於前 記預測底圖場的最上面之像素資料的列視爲前記預測漸進 式資料的從上數來第二排之像素資料的列。 5·—種編碼方法，係屬於編碼裝置的編碼方法，其特 徵爲， 令前記編碼裝置，執行： 第一編碼步驟，係將漸進式圖像資料所對應之交錯式 圖像資料予以編碼，生成已被編碼之前記交錯式圖像資料 、和預測了前記交錯式圖像資料的預測影像資料；和 轉換步驟，係藉由將前記預測影像予以轉換，以生成 轉換預測影像；和 旗標生成步驟，係生成旗標資料，其係用來表示，將 前記轉換預測影像，當作用來預測前記漸進式圖像資料的 預測影像來使用：和 第二編碼步驟，係基於已被前記轉換步驟所轉換之前 記預測影像資料，而將前記漸進式圖像資料予以編碼。 6.如申請專利範圍第5項所記載之編碼方法，其中， 前記交錯式圖像資料係由頂圖場與底圖場所構成； 前記預測影像資料係由，預測了前記頂圖場的預測頂 S -50- 201204051 圖場和預測了前記底圖場的預測底圖場所構成； 前記轉換預測影像係由，已被前記轉換步驟所轉換過 的前記預測頂圖場、和已被前記轉換步驟所轉換過的前記 預測底圖場所構成。 7.如申請專利範圍第6項所記載之編碼方法，其中， 前記轉換步驟，係 藉由將前記預測頂圖場與前記預測底圖場予以相加， 以生成預測漸進式資料； 前記第二編碼步驟，係 基於前記預測漸進式資料，而將前記漸進式圖像資料 予以編碼。 8 .如申請專利範圍第7項所記載之編碼方法，其中， 前記轉換步驟，係 將位於前記預測頂圖場的最上面之像素資料的列視爲 前記預測漸進式資料的最上面之像素資料的列，將位於前 記預測底圖場的最上面之像素資料的列視爲前記預測漸進 式資料的從上數來第二排之像素資料的列。 -51 -