1351881 Π) 九、發明說明 【發明所屬之技術領域】 本發明係有關於將影像資料予以編碼的編碼裝置、編 碼方法及其程式，和將影像資料予以解碼的解碼裝置、解 碼方法及其程式。 【先前技術】 近年來’將影像資料數位化而操作，此時，爲了高效 率地傳送、積存資訊，利用影像資訊特有的冗長性，藉由 離散餘弦轉換（DCT: Discrete Cosine Transform)等之正交 轉換和動態補償進行壓縮的MPEG(Moving Picture Experts Group)，繼其之後，壓縮率更高的 H.264/AVC(Advanced Video Coding)等之編碼方式，依據其之編碼裝置及解碼裝 置，是已經在電視台等的資訊遞送，以及一般家庭的資訊 接收雙方面上日漸普及。 目前，以此H.264/AVC爲基礎而擴充了可調性之機能 的SVC(Scalable Video Coding，可調性視訊編碼），是正 在進行標準化。SVC目前的規格，係被整合在JSMUoint Scalable Video Model)模型中。 SVC的編碼裝置中，輸入影像，係藉由影像階層化電 路，分離成例如上位圖層及下位圖層之2個階層。其後， 以上位圖層編碼電路將上位圖層加以編碼，下位圖層編碼 電路則將下位圖層加以編碼。然後，將編碼過的上位圖層 和下位圖層予以多重化而傳送。 (2) (2)1351881 下位圖層係也被稱作基礎圖層，是畫質較低的階層。 富僅將下位圖層的位兀串流加以解碼的時候，會解碼出畫 質較低的影像》下位圖層係含有比畫質更爲重要的資訊。 上位圖層，也被稱作增強圖層（enhancement layer；)， 是用來改善畫質、解碼高畫質影像用的階層。在下位圖層 的位元串流中追加上位圖層的位元串流而進行解碼時，就 可解碼出較高畫質的影像。 上述編碼裝置中，於上位圖層編碼電路，進行內在 (intra)編碼時，可在以下位圖層編碼電路進行編碼後，將 解碼過的解碼影像當成預測影像來使用。 【發明內容】 〔發明所欲解決之課題〕 上述進行先前之階層編碼的編碼裝置中，是以在上位 圖層及下位圖層兩者中，將漸進式影像資料加以編碼爲前 提。 可是在此同時，想要在上位圖層中將漸進式影像資料 加以編碼，在下位圖層中將交錯式影像資料加以編碼的需 求出現了。 由以上可知，在進行階層編碼時，可在上位圖層中將 漸進式影像資料加以編碼，且可在下位圖層中將交錯式影 像資料加以編碼的編碼裝置 '編碼方法及程式的提供’是 受到期待的。 又，能夠將上位圖層中所編碼過的漸進式影像資料， -6- (3) (3)1351881 和下位圖層中所編碼過的交錯式影像資料加以解碼的解碼 裝置、解碼方法及程式的提供，是受到期待的。 〔用以解決課題之手段〕 本發明之第]實施型態的編碼裝置，係屬於將漸進式 影像資料和與該當漸進式影像資料對應之交錯式影像資料 加以編碼的編碼裝置，其特徵爲，具有：第]編碼部，其 係構成爲，生成：將構成前記交錯式影像資料的圖像資料 予以編碼而成之第1編碼資料、和將前記第1編碼資料予 以解碼並而再構成之再構成影像資料；和擴增取樣處理部 ，其係構成爲，將前記第1編碼部所生成之前記再構成影 像資料加以擴增取樣（Up Sampling)，以生成和前記漸進式 影像資料相同解析度的影像資料；和第2編碼部，其係構 成爲，將前記擴增取樣處理部所生成之前記影像資料當成 預測影像資料，來將構成前記漸進式影像資料的圖像資料 加以編碼，以生成第2編碼資料。 又本發明之編碼裝置，係屬於將漸進式影像資料和與 該當漸進式影像資料對應之交錯式影像資料加以編碼的編 碼裝置，其特徵爲，具有：第1編碼手段，生成：將構成 前記交錯式影像資料的圖像資料予以編碼而成之第〗編碼 資料、和將前記第】編碼資料予以解碼並而再構成之再構 成影像資料；和擴增取樣處理手段，將前記第〗編碼手段 所生成之前記再構成影像資料加以擴增取樣，以生成和前 記漸進式影像資料相同解析度的影像資料；和第2編碼手 (4) (4)1351881 段’將前記擴增取樣處理手段所生成之前記影像資料當成 預測影像資料’來將構成前記漸進式影像資料的圖像資料 加以編碼，以生成第2編碼資料。 本發明之第2實施形態的編碼方法，係屬於將漸進式 影像資料、和與該當漸進式影像資料對應之交錯式影像資 料加以編碼的編碼方法，其特徵爲，具有：生成：將構成 前記交錯式影像資料的圖像資料予以編碼而成之第1編碼 資料'和將前記第1編碼資料予以解碼並而再構成之再構 成影像資料的第1工程；和將前記第1工程中所生成之前 記再構成影像資料加以擴增取樣，以生成和前記漸進式影 像資料相同解析度的影像資料的第2工程；和將前記第2 工程中所生成之前記影像資料當成預測影像資料，來將構 成前記漸進式影像資料的圖像資料加以編碼，以生成第2 編碼資料的第3工程。 本發明之第3實施形態的程式，係屬於將漸進式影像 資料、和與該當漸進式影像資料對應之交錯式影像資料加 以編碼的電腦所執行的程式，其特徵爲，係令前記電腦執 行：生成：將構成前記交錯式影像資料的圖像資料予以編 碼而成之第1編碼資料、和將前記第1編碼資料予以解碼 並而再構成之再構成影像資料的第】程序；和將前記第1 程序中所生成之前記再構成影像資料加以擴增取樣’以生 成和前記漸進式影像資料相同解析度的影像資料的第2程 序；和將前記第2程序中所生成之前記影像資料當成預測 影像資料，來將構成前記漸進式影像資料的圖像資料加以 -8- (5) 1351881 編碼，以生成第2編碼資料的第3程序。 本發明之第4實施形態的解碼裝置，係屬於將漸 影像資料予以編碼而得之第1編碼資料、和將前記漸 • 影像資料所對應之交錯式影像資料予以編碼所得之第 . 碼資料’將其加以解碼的解碼裝置，其特徵爲，具有 1解碼部，其係構成爲，會將前記第2編碼資料予以 :和擴增取樣處理部，其係構成爲，將前記第1解碼 ® 解碼所生成之第1預測影像資料進行內插處理以生成 預測影像資料；和第2解碼部，其係構成爲，基於前 增取樣處理部所生成之前記第2預測影像資料，來將 第]編碼資料加以解碼。 又若依據本發明，則係屬於將漸進式影像資料予 碼而得之第1編碼資料、和將前記漸進式影像資料所 之交錯式影像資料予以編碼所得之第2編碼資料，將 以解碼的解碼裝置，其特徵爲，具有：第1解碼手段 ® 前記第2編碼資料予以解碼；和擴增取樣處理手段， 記第1解碼手段的解碼所生成之第1預測影像資料進 插處理以生成第2預測影像資料；和第2解碼手段， 前記擴增取樣處理手段所生成之前記第2預測影像資 來將前記第1編碼資料加以解碼。 本發明之第5實施形態的解碼方法，係屬於將漸 影像資料予以編碼而得之第1編碼資料、和將前記漸 影像資料所對應之交錯式影像資料予以編碼所得之第 碼資料’將其加以解碼的解碼方法，其特徵爲，具有 進式 進式 2編 :第 解碼 部的 第2 記擴 前記 以編 對應 其加 ，將 將前 行內 基於 料， 進式 進式 2編 ••將 -9 - (6) 1351881 則纪第2編碼資料予以解碼的第1工程；和將前 程中解碼所生成之第1預測影像資料進行內插處 第2預測影像資料的第2工程；和基於前記第2 生成之前記第2預測影像資料，來將前記第1編 以解碼的第3工程。 本發明之第6實施形態的程式，係屬於將漸 資料予以編碼而得之第1編碼資料、和將前記漸 資料所對應之交錯式影像資料予以編碼所得之第 料’將其加以解碼的電腦所執行的程式，其特徵 前記電腦執行：將前記第2編碼資料予以解碼的 ;和將前記第1程序中解碼所生成之第1預測影 行內插處理以生成第2預測影像資料的第2程序 前記第2程序中所生成之前記第2預測影像資料 言己第1編碼資料加以解碼的第3程序。 [發明效果] • 若依據本發明，則可提供在進行階層編碼時 1 位圖層中將漸進式影像資料加以編碼，且可在下 將交錯式影像資料加以編碼的編碼裝置、編碼方 〇 ' 又若依據本發明，則可提供能夠將上位圖層 ' 過的漸進式影像資料，和下位圖層中所編碼過的 像資料加以解碼的解碼裝置、解碼方法及程式。 記第1工 理以生成 工程中所 碼資料加 進式影像 進式影像 2編碼資 爲，係令 第〗程序 像資料進 ;和基於 ，來將前 ，可在上 位圖層中 法及程式 中所編碼 交錯式影 -10- (7) 1351881 【實施方式】 . 圖1係本實施形態之編碼.解碼系統的槪念圖。 編碼*解碼系統1 ’係具有設於送訊側的編碼裝置2 • ，和設於收訊側的解碼裝置3。 • 編碼.解碼系統1中，於送訊側的編碼裝置2上，生 成藉由離散餘弦轉換（DCT)或卡忽南-拉維轉換等之正交轉 換和動態補償而壓縮（編碼）過的畫格編碼影像資料（位元串 # 流），並將該當畫格編碼影像資料調變後，透過衛星放送 波、有線電視網、電話網路、行動電話網路等之傳送媒體 而送訊。 在收訊側，於解碼裝置3將所接收到的編碼影像訊號 予以解調後，藉由上記調變時之正交轉換的逆轉換和動態 ' 補償，生成解壓的畫格影像資料，而加以利用。 傳送媒體5，係不限於上述通訊網，亦可爲光碟、磁 碟及半導體記憶體等記錄媒體。 # 本實施形態中，例如圖2所示，階層化電路10係構 成爲，基於編碼對象之影像資料S 9，生成漸進式影像資 料（漸進式影像訊號）S1 0_1，和交錯式影像資料S10_2。 • 下位圖層編碼電路〗2係構成爲，將交錯式影像資料 S ] 〇_2編碼而生成下位編碼資料S ] 2。 . 轉換電路13係構成爲，將下位圖層編碼電路12所生 . 成之下位預測影像資料進行內插（擴增取樣）處理，而生成 和漸進式影像資料S10_l同解析度（掃描線數）的下位預測 影像資料L_PREb ’並將其輸出至上位圖層編碼電路14。 -11 - (8) (8)1351881 上位圖層編碼電路14係構成爲，基於下位預測影像 資料L_PREb’將漸進式影像資料S10_l予以編碼而生成 上位編碼資料S14。 <編碼裝置〉 參照圖]說明編碼裝置2。 圖2係編碼裝置2之全體構成例的圖示。 編碼裝置2’例如，具有：階層化電路1〇、延遲電路 11、下位圖層編碼電路12、轉換電路13'上位圖層編碼 電路14及多重化電路15。 [階層化電路] 階層化電路]0 ’例如圖3所示，係構成爲，基於編碼 對象之影像資料S9，來生成漸進式影像資料（漸進式影像 訊威）S10_l ’和交錯式影像資料si〇_2。又，階層化電路 10係構成爲’將構成上記已生成之漸進式影像資料SiOj 的圖像資料FR1〜6...之每一者，寫入至延遲電路U。 漸進式影像資料S10_1 ’係例如爲60畫格/sec(6〇p)。 又’階層化電路1〇係構成爲，將構成上記已生成之 交錯式影像資料Sl〇_2的圖像資料〜6...，輸出至下位 圖層編碼電路1 2 ^ 交錯式影像資料S 1 0 _2，係例如爲6 0圖場/ s e c (6 〇丨）。 [延遲電路] -12 - 1351881 ⑼ 延遲電路】1係構成爲，將構成從階層化電路】〇輸入 之漸進式影像資料（漸進式訊號的各圖像資料，恰 好延遲’例如’下位圖層編碼電路〗2及轉換電路13上的 處理時間’然後輸出至上位圖層編碼電路14。 [下位圖層編碼電路] 下位圖層編碼電路12係構成爲，將從階層化電路10 所輸入之交錯式影像資料S10_2予以編碼而生成下位編碼 資料S12，並將其輸出至多重化電路15。又，下位圖層編 碼電路1 2係構成爲，於上記編碼中，生成下位預測影像 資料L_PRE，並將其輸出至轉換電路13〇 圖4係下位圖層編碼電路12的構成例之圖示。 下位圖層編碼電路12，例如係具有：畫面排序電路 23'演算電路31、正交轉換電路32、量化電路33、速率 控制電路34、可逆編碼電路35、緩衝記憶體36、逆量化 電路37、逆正交轉換電路38'加算電路39、去區塊濾鏡 40 '畫格記憶體4]、內在預測電路42、以及動態預測· 補償電路43。 畫面排序電路2 3係構成爲，例如，將從圖2所示之 階層化電路1 〇輸入過來的漸進式影像資料S 1 0_2的圖場 資料，隨應於由圖像形式I，P，B所成之GOP(Group Of Pictures)構造，排序成編碼的順序，然後輸出至演算電路 3 1、內在預測電路42及動態預測·補償電路43。 演算電路31係構成爲，生成出表示從畫面排序電路 -13 - (10) (10)1351881 23輸入過來的編碼對象之圖像資料，和從內在預測電路 42或動態預測·補償電路43輸入過來的預測影像資料PI 之差分的影像資料’並將其輸出至正交轉換電路32。 正交轉換電路32係構成爲，對從演算電路31輸入過 來的影像資料，施以離散餘弦轉換（DCT)或卡忽南-拉維轉 換等之正交轉換，然後生成出表示轉換係數的影像資料（ 例如DCT係數），將其輸出至量化電路33。 量化電路33係構成爲，將從正交轉換電路32輸入過 來的影像資料（量化前的轉換係數），基於從速率控制電路 34輸入過來之量化尺度QS而進行量化，生成表示量化後 轉換係數的影像資料，並將其輸出至可逆編碼電路35及 逆量化電路3 7。 速率控制電路3 4係構成爲，例如，基於從緩衝記憶 體36所讀出之影像資料，生成量化尺度QS，並將其輸出 至量化電路33。 可逆編碼電路35係構成爲，將從量化電路33輸入過 來的影像資料進行可變長編碼而成的影像資料，儲存至緩 衝記憶體3 6。又’可逆編碼電路3 5係構成爲，將從動態 預測•補償電路43輸入之動態向量]yjV或其差分動態向 量，參照影像資料的識別資料，以及從內在預測電路42 輸入之內在預測模式，儲存至標頭資料等中。 緩衝記憶體3 6中儲存的影像資料，係當成下位編碼 資料S12而被圖2所示之多重化電路15讀出。 逆量化電路37係構成爲，將對應於量化電路33之量 -14- (11) (11)1351881 化的逆量化處理，對來自量化電路3 3的影像資料施加， 生成藉此而得之資料，將其輸出至逆正交轉換電路38。 逆正交轉換電路38係構成爲，對從逆量化電路37輸 入過來的資料，施以正交轉換處理32上的正交轉換之逆 轉換，所生成的影像資料，輸出至加算電路39。 加算電路39係構成爲，將從逆正交轉換電路38輸入 (已解碼）之影像資料，和內在預測電路42或者從動態預測 •補償電路43輸入之預測影像資料PI予以加算，生成參 照（再構成）圖像資料，將其輸出至去區塊濾鏡40 » 去區塊濾鏡40係構成爲，將從加算電路39輸入之參 照圖像資料的區塊歪斜加以去除而寫入至畫格記憶體4 1。 寫入至畫格記憶體4 1的參照圖像資料，係被當成下 位預測影像資料L_PRE而從畫格記億體4 1中讀出，例如 ，輸出至圖2所示之轉換電路13。 內在預測電路42係構成爲，於內在編碼的大區塊中 ，決定殘差最小的內在預測之模式及預測區塊的區塊大小 〇 內在預測電路42，作爲區塊大小，例如使用4x4及 1 6 X 1 6像素。 內在預測電路42係構成爲，當內在預測被選擇時， 將內在預測所致之預測影像資料PI，輸出至演算電路3 I 及加算電路3 9。 動態預測♦補償電路43係構成爲，基於已編碼後被 局部解碼而被記憶在畫格記億體4 1中的參照圖像資料 -15- (12) 1351881 REF來進行動態預測，決定殘差最小的動態向量及動態補 償之區塊大小。 動態預測·補償電路4 3，作爲區塊大小，係使用 • 16x16 ' 16x8' 8x16、 8x8、 8x4' 4x8 及 4x4 像素 ° - 動態預測·補償電路43係構成爲，當外跨（inter)預 測被選擇時，將外跨預測所致之預測影像資料P I，輸出至 演算電路31及加算電路39。 [轉換電路] 參照圖2說明轉換電路13。 轉換電路13係將從下位圖層編碼電路12所輸入之下 位預測影像資料L_PRE內插處理，上位圖層編碼電路1 4 係生成和從延遲電路11所輸入之漸進式影像資料S10_l 同解析度（掃描線數）的下位預測影像資料L_PREb，並將 其輸出至上位圖層編碼電路】4。 圖5係轉換電路13之構成例的圖示。 轉換電路1 3，例如，係具有：圖場內預測影像生成電 路2 1、畫格內預測影像生成電路22。 在進行轉換電路〗3之處理內容的說明前，將本實施 形態中所使用的用語定義如下。 例如，將具有和漸進式影像資料S I 0_ 1之畫格圖像資 料X相同時間戳記的交錯式影像資料S 1 0_2的圖場圖像資 料Y，稱爲圖像資料X的基礎圖像資料。圖3的例子中， 圖場圖像資料FI 1，係爲畫格圖像資料FR1的基礎圖像資 -16- (13) (13)1351881 料。 漸進式影像資料S]0_1的畫格圖像資料X的大區塊 MB X所對應之一個基礎區塊MB Y，是存在於畫格圖像資 料X的基礎圖像資料也就是圖場圖像資料Y內。 基礎區塊MBY，係具有和大區塊MBX同長的寬，且 具有其一半的高度。 此處，當相對於畫格圖像資料X之左上的像素位置而 基礎區塊MBX之左上的像素位置係位於空間位置（xP, yp) 的情況下，基礎區塊MBY之左上的像素位置係位於空間 位置（xP，yP/2)。 茲將頂圖場資料、和其接續之底圖場資料，稱作補足 圖場配對。 於一組補足圖場配對中，頂圖場資料係爲同配對內之 底圖場資料的補足圖場資料，底圖場資料係爲同配對內之 頂圖場資料的補足圖場資料。例如，於圖3中，藉由圖場 資料FI1和FI2來構成補足圖場配對，圖場資料FI2係爲 圖場資料FI 1的補足圖場資料，圖場資料FI 1係爲圖場資 料FI2的補足圖場資料。 考慮構成補足圖場配對的圖場資料A，B。 當區塊MBA之左上的像素位置是相對於圖場資料A 之左上的像素位置而具有空間位置（xP_A, yP_A)，且區塊 MBB之左上的像素位置是相對於圖場資料B之左上的像 素位置而具有空間位置（xP_B，yP_B)的情況下，則區塊 MBA和MBB具有相同大小；當空間位置（xP_A，yP_A)和 -17- (14) (14)1351881 空間位置（xP_B，yP_B)係爲相同時，則區塊MB a係爲區塊 MBB的補足區塊，區塊MBB係爲區塊MBA的補足區塊。 圖場內預測影像生成電路2 1，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲頂圖場資料時， 便將編碼對象（current)之大區塊MB所對應之下位預測影 像資料L —PRE內的基礎區塊資料，例如圖6(A)所示，僅 使用該頂圖場資料來進彳了擴增取樣（up sample)處理，以生 成和漸進式影像資料S 1 0_ 1相同解析度的下位預測影像資 料 L_PREb(FI)。 圖場內預測影像生成電路2 1，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲底圖場資料時， 便將編碼對象之大區塊MB所對應之下位預測影像資料 L_PRE內的基礎區塊資料，例如圖6(B)所示，僅使用該底 圖場資料來進行擴增取樣處理，以生成和漸進式影像資料 S10_l相同解析度的下位預測影像資料L_PREb(FI)。 圖7係用來說明圖5所示之圖場內預測影像生成電路 21之處理的I例的流程圖。圖場內預測影像生成電路21 係構成爲進行下記處理。 以下的說明中，假設下位預測影像資料L_PRE內的 基礎區塊資料的線數爲N。又，假設基礎區塊資料的第i 個線資料爲Base[i]。此處，i係爲「〇」〜「N-1」之整數 〇 圖7所示的步驟ST12〜ST15係表示圖6(A)及圖8(A) 所示之頂圖場的擴增取樣處理，圖7所示的步驟ST]6〜 -18- (15) (15)1351881 ST19係表示圖6(B)及圖8(B)所示之底圖場的擴增取樣處 理0 步驟ST1 1 : 圖場內預測影像生成電路21，係當從下位圖層編碼電 路1 2輸入之下位預測影像資料L_PRE爲頂圖場資料時， 則進入步驟S T 1 2，或非如此時則進入步驟s τ 1 6。 步驟ST12 : 圖場內預測影像生成電路21，係將基礎區塊資料的第 i個線資料Base[i] ’複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2 i個線資料p r e D [ 2 i ]。 亦即，圖場內預測影像生成電路2 ]，係藉由上記複製 ，而生成了 線資料 PRED[0], [2], ..., [2N-21。 步驟ST13 : 圖場內預測影像生成電路21，係將上記基礎區塊資料 之最下線的下一個線資料，視爲線資料Base丨NJ。 步驟ST14 : 圖場內預測影像生成電路2 1，係在線資料p red [2N] 中，儲存在步驟ST13中所得之線資料Base [N]。 步驟ST 15 : -19- (16) 1351881 圖場內預測影像生成電路2 1 ’係藉由下記式（])，將 線資料PRED[2i]乘上權重値wl後的結果，和線資料 PRED[2i+2]乘上權重値w2後的結果予以加算，生成下位 • 預測影像資料L_PREb內的對應之預測區塊資料的第2 i + - 1 個線資料 P RE D [ 2 i + 1 ]。 PRED[2i + i] = wi * pRED[2i] + w2* PRED[2i + 2]…（1) 步驟ST1 6 : 圖場內預測影像生成電路21，係將基礎區塊資料的第 i個線資料Base[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i+l個線資料PRED[2i+l] 〇 亦即，圖場內預測影像生成電路2 1，係藉由上記複製 ，而生成了 線資料 PRED[1]，[3]，…，[2N-1]。 步驟ST17 : 圖場內預測影像生成電路2 1，係將上記基礎區塊資料 之最上線的上一個線資料，視爲線資料Base [-1]。 - 步驟ST 1 8 : - 圖場內預測影像生成電路2 ]，係在線資料P R E D [ -1 ] 中，儲存在步驟ST17中所得之線資料Base[-1]。 -20- (17) (17)1351881 步驟ST】9 : 圖場內預測影像生成電路2 1，係藉由下記式（2)，將 線資料PRED[2i-l]乘上權重値wl後的結果，和線資料 PRED[2i+ 1]乘上權重値後的結果予以加算，生成下位 預測影像資料L_PREb內的對應之預測區塊資料的第2i個 線資料PRED[2i]。 PRED[2i]=wl* PRED[2i-l]+w2* PRED[2i + 1] ··· (2) 步驟ST20 ： 圖場內預測影像生成電路2 1，係將步驟ST1 5及步驟 ST19中所生成之預測區塊資料的線資料PRED[i]，當成下 位預測影像資料L_PREb(FI)而輸出至上位圖層編碼電路 14。 參照圖5說明畫格內預測影像生成電路22。 畫格內預測影像生成電路22係構成爲，當從下位圖 層編碼電路1 2輸入之下位預測影像資料L_PRE爲頂圖場 資料時’便例如圖9(A)所示，使用編碼對象（c urrent)之大 區塊MB所對應之下位預測影像資料l_PRE(頂圖場資料） 內的基礎區塊資料Base，和該基礎區塊資料的補足區塊資 料Comp(底圖場資料）來進行擴增取樣處理，以生成和漸 進式影像資料S 1 0 _ 1相同解析度的下位預測影像資料 L_PREb(FR)。 又，畫格內預測影像生成電路2 2係構成爲，當從下 -21 - (18) (18)1351881 位圖層編碼電路】2輸入之下位預測影像資料L_PRE爲底 圖場資料時，便例如圖9(B)所示，使用編碼對象（current) 之大區塊MB所對應之下位預測影像資料L_PRE(底圖場 資料）內的基礎區塊資料Base，和該基礎區塊資料的補足 區塊資料Comp(頂圖場資料）來進行擴增取樣處理，以生 成和漸進式影像資料S 1 0_ 1相同解析度的下位預測影像資 料 L_PREb(FR)。 圖1 〇係用來說明圖5所示之畫格內預測影像生成電 路22之處理的1例的流程圖。 以下的說明中，假設下位預測影像資料L_PRE內的 基礎區塊資料的線數爲N。又，假設基礎區塊資料的第i 個線資料爲Base[i]。此處，i係爲「0」〜「N-1」之整數 〇 圖]0所示的步驟ST32〜ST36係表示圖9(A)及圖11 所示之頂圖場的擴增取樣處理，圖10所示的步驟ST37〜 ST41係表示圖9(B)及圖12所示之底圖場的擴增取樣處理 步驟ST31 : 畫格內預測影像生成電路2 2，係當從下位圖層編碼電 路】2輸入之下位預測影像資料L_PRE爲頂圖場資料時， 則進入步驟ST32，或非如此時則進入步驟ST37。 步驟S T 3 2 : -22 - (19) (19)1351881 畫格內預測影像生成電路22’係將基礎區塊資料的第 i個線資料Base[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i個線資料PRED[2i]。 亦即，圖場內預測影像生成電路2】，係藉由上記複製 ，而生成了 線資料 PRED[0]5 [2]，_·_，[2N-2]。 步驟ST3 3 ： 畫格內預測影像生成電路2 2，係將基礎區塊資料所對 應之補足區塊資料的第i個線資料Comp[i]，代入至第2i + 1 個線資料 PRED[2i + 1 ]。 步驟ST34 : 圖場內預測影像生成電路2 1，係將上記基礎區塊資料 之最下線的下一個線資料，視爲線資料B a s e [ N ]。 步驟ST35 : 圖場內預測影像生成電路21，係在線資料pRED[2N] 中，儲存在步驟ST34中所得之線資料Base[N]。 步驟ST36 : 圖場內預測影像生成電路2 1，係藉由下記式（3 )，將 線資料PRED[2i]乘上權重値wi後的結果，和線資料 PRED[2i+2]乘上權重値w2後的結果，和線資料pRED[2i + 1]乘上權重値後的結果予以加算，生成下位預測影 -23- (20) (20)1351881 像資料L_PREb內之對應的預測區塊資料的第2i + ]個線 資料 PRED[2i + 1]。 PRED[2i + l] = wl * PRED[2i] + w2 氺 PRED[2i + 2] + w3 氺 PRED[2i + 1 ] ..(3) 步驟ST37 : 圖場內預測影像生成電路21，係將基礎區塊資料的第 i個線資料Base[i]，複製成下位預測影像資料L_PREb內 的對應之預測區塊資料的第2i+l個線資料PRED[2i+I] 〇 « 亦即，圖場內預測影像生成電路2 1，係藉由上記複製 ，而生成了 線資料 PRED[1], [3]，...，[2N-1]。 步驟S T 3 8 : 畫格內預測影像生成電路2 2，係將基礎區塊資料所對 應之補足區塊資料的第i個線資料Comp[i]，代入至第2i 個線資料PRED[2i]。 步驟S T 3 9 : 畫格內預測影像生成電路2 2，係將上記基礎區塊資料 之最上線的上一個線資料，視爲線資料B a s e [ -1 ]。 步驟ST40 ·· -24- (21) 1351881 畫格內預測影像生成電路2 2，係在線資料PRED [-1 ] 中’儲存在步驟ST39中所得之線資料Base[-i]。 • 步驟ST4 1 : . 畫格內預測影像生成電路22，係藉由下記式（4)，將 線資料PRED[2i-l]乘上權重値wl後的結果，和線資料 PRED[2i + 1]乘上權重値 W2後的結果，和線資料 ® PRED[2i]乘上權重値W3後的結果予以加算，生成下位預 測影像資料L_PREb內之對應的預測區塊資料的第2i個線 資料 P R E D [ 2 i ]。 PRED[2i] = wl * PRED[2i-l] + w2* PRED[2i + 1] + w3* PRED[2i] ... (4) 步驟ST42 ：
畫格內預測影像生成電路22，係將步驟ST36及步驟 ST41中所生成之預測區塊資料的線資料pRED[i]，當成下 位預測影像資料L_PREb(FR)而輸出至上位圖層編碼電路 1 4 〇 [上位圖層編碼電路] 上位圖層編碼電路14係構成爲，使用從轉換電路13 輸入之下位圖層編碼電路1 2中所生成之下位預測影像資 料L_PREb，將漸進式影像資料S]0_1予以編碼而生成上 位編碼資料S 1 4 ^ -25- (22) (22)1351881 圖13係上位圖層編碼電路14的構成例之圖示。 上位圖層編碼電路14，例如係具有：畫面排序電路 ]23、演算電路131、正交轉換電路132'量化電路】33、 速率控制電路134、可逆編碼電路135、緩衝記億體136、 逆量化電路137、逆正交轉換電路】38、加算電路139、去 區塊濾鏡1 40、畫格記憶體1 4 1、內在預測電路1 42，以及 動態預測·補償電路1 4 3。 畫面排序電路123係構成爲，例如，把從圖2所示之 延遲電路11讀出來的漸進式影像資料SI0_1的圖像資料 ，隨應於由圖像形式I，P，B所成之GOP構造，排序成進 行編碼的順序，然後當成編碼對象之圖像資料〇 R G，輸出 至演算電路〗3 1、內在預測電路〗42及動態預測·補償電 路 143。 演算電路131係構成爲，生成出代表從畫面排序電路 1 2 3輸入過來的編碼對象之圖像資料，和從內在預測電路 1 42、動態預測·補償電路1 43或下位圖層預測電路1 45 輸入過來的預測影像資料PI，兩者之差分的影像資料，並 將其輸出至正交轉換電路132。 正交轉換電路132係構成爲，對從演算電路131輸入 過來的影像資料，施以離散餘弦轉換或卡忽南·拉維轉換 等之正交轉換，然後生成出表示轉換係數的影像資料（例 如DCT係數），將其輸出至量化電路133。 量化電路133係構成爲，將從正交轉換電路132輸入 過來的影像資料（量化前的轉換係數），基於從速率控制電 -26- (23) 1351881 路134輸入過來之量化尺度QS而進行量化，生 化後轉換係數的影像資料，並將其輸出至可逆 135及逆量化電路】37。 速率控制電路]3 4係構成爲，例如，基於從 體1 36所讀出之影像資料，生成量化尺度qS , 出至量化電路1 3 3。 可逆編碼電路135係構成爲，將從量化電路 過來的影像資料進行可變長編碼而成的影像資料 緩衝記憶體136。此時，可逆編碼電路135，係 化電路10所輸入之屬性資料EisTop，ETime，儲 資料等中。又，可逆編碼電路135，係將從動態 償電路143輸入之動態向量MV或其差分動態向 影像資料的識別資料，以及從內在預測電路1 42 在預測模式，儲存至標頭資料等中。 緩衝記憶體1 3 6中儲存的影像資料，係當成 資料SI4而被圖2所示之多重化電路15讀出。 逆量化電路137係構成爲，將對應於量化電 量化的逆量化處理，對來自量化電路133的影像 ，生成藉此而得之資料，將其輸出至逆正交轉換 〇 逆正交轉換電路1 3 8係構成爲’對從逆量化 輸入過來的資料，施以正交轉換處理]32上的正 逆轉換，所生成的影像資料’輸出至加算電路1 3 加算電路1 3 9係構成爲’將從逆正交轉換電 成表示量 編碼電路 緩衝記億 並將其輸 133輸入 ，儲存至 將從階層 存至標頭 預測·補 量，參照 輸入之內 上位編碼 路133之 資料施加 電路 1 3 8 電路1 3 7 交轉換之 9 〇 路1 3 8輸 -27- (24) (24)1351881 入（已解碼）之影像資料’和內在預測電路1 4 2或者從動態 預測·補償電路1 4 3輸入之預測影像資料p I予以加算， 生成參照（再構成）圖像資料’將其輸出至去區塊濾鏡40。 去區塊濾鏡140係構成爲，將從加算電路】39輸入之 參照圖像資料的區塊歪斜加以去除而寫入至畫格記憶體 14 1° 內在預測電路142係構成爲，於內在編碼的大區塊中 ，決定殘差最小的內在預測之模式及預測區塊的區塊大小 。內在預測電路14 2，作爲區塊大小，例如使用4 X 4及 I6x]6像素。內在預測電路]42係構成爲，當內在預測被 選擇時，將內在預測所致之預測影像資料PI，輸出至演算 電路131及加算電路139。 動態預測•補償電路1 4 3係構成爲，基於已編碼後被 局部解碼而被記憶在畫格記憶體1 3 1中的參照圖像資料 REF來進行動態預測，決定與編碼對象之圖像資料0RG 的處理對象之區塊資料之差分爲最小的動態向量及動態補 償之區塊大小。動態預測·補償電路1 43，作爲區塊大小 ’例如’係使用】6x16' 16x8' 8x16、8x8、8x4、4x8 及 4x4像素之任一者。 動態預測.補償電路 W3係構成爲，當外跨（inter)預 測被選擇時，將外跨預測所致之預測影像資料PI，輸出至 演算電路131及加算電路139。 下位圖層預測電路1 45係構成爲，將從圖2所示之轉 換電路13所輸入之下位預測影像資料L_PREb(FI)和 -28- (25) (25)1351881 L_PREb(FR)之中，特定出與圖像資料〇RG之處理對象之 區塊資料的差分爲小的預測影像資料。 圖1 4係下位圖層預測電路1 4 5的構成例之圖示。 下位圖層預測電路145，係具有減算電路81、減算電 路8 2及判定電路8 3 » 減算電路81係構成爲，生成出代表從圖5所示之圖 場內預測影像生成電路2 1所輸入之下位預測影像資料 L_PREb(FI)，和圖13所示之編碼對象之圖像資料ORG內 的處理對象之區塊資料之間的對應之像素資料間之差分的 差分資料，並將其輸出至判定電路8 3。 減算電路8 2係構成爲，例如，生成出代表從圖5所 示之畫格內預測影像生成電路22所輸入之下位預測影像 資料L_PREb(FR)，和圖13所示之編碼對象之圖像資料 ORG內的處理對象之區塊資料之間的對應之像素資料間之 差分的差分資料，並將其輸出至判定電路83。 判定電路83係構成爲，將從減算電路81輸入之差分 資料，以區塊資料單位加以累積而生成指標資料SAD(FI) 。又，判定電路83係構成爲，將從減算電路82輸入之差 分資料，以區塊資料單位加以累積而生成指標資料 SAD(FR)。然後，判定電路83係構成爲，將指標資料 SAD(FI)和指標資料SAD(FR)當中較小者，予以特定出來 。判定電路83係構成爲，當下位圖層預測電路1 45被選 擇時，上記已特定之較小的指標資料SAD(FI)，（FR)所對 應之下位預測影像資料L_PREb(FI), (FR)，輸出至演算電 -29- (26) (26)1351881 路 131。 內在預測電路142，係在動態預測•補償電路143及 下位圖層預測電路1 4 5所生成之預測影像資料P I當中， 選擇出和編碼對象之圖像資料ORG的差分爲最小的預測 影像資料PI，而輸出至演算電路131。 上位圖層編碼電路14係構成爲，將表示最終選擇好 的預測模式的預測模式資料PM，儲存在標頭資料中然後 以可逆編碼電路135進行編碼。上位圖層編碼電路14係 構成爲，當已選擇下位預測影像資料L_PREb(FI)時，則生 成表示跨圖層/圖場內預測的預測模式資料。上位圖層編 碼電路〗4係構成爲，當已選擇下位預測影像資料 L_PREb(FR)時，則生成表示跨圖層/畫格內預測的預測模 式資料。 上述例中，雖然係舉例了將下位圖層編碼電路1 2中 所生成之再構成影像資料，當成上位圖層編碼電路14中 的內在預測編碼的預測影像資料而使用之情形，但是亦可 爲，將下位圖層編碼電路12中所生成之再構成影像資料 或動態向量，當成上位圖層編碼電路14中的外跨預測編 碼的預測影像資料或動態向量而使用，並將該模式當成選 擇候補而使用。 [多重化電路] 多重化電路15係構成爲，將從下位圖層編碼電路12 輸入之下位編碼資料S12，和從上位圖層編碼電路14輸 -30- (27) (27)1351881 入之上位編碼資料S14，予以多重化而生成編碼資料S2。 [編碼裝置的動作例] 說明圖2所示之編碼裝置2的動作例》 階層化電路1 0，係如圖2所示，基於編碼對象之影像 資料S9，來生成漸進式影像資料（漸進式訊號）S10_1，和 交錯式影像資料S 1 0_2。階層化電路1 0，係將構成上記已 生成之漸進式影像資料S10_l的圖像資料FR]〜6...之每 一者’輸出至延遲電路1 1。然後，階層化電路1 0，係將 上記生成之交錯式影像資料S ] 0_2，輸出至下位圖層編碼 電路1 2。 下位圖層編碼電路12，係將從階層化電路10所輸入 之交錯式影像資料S 1 0_2予以編碼而生成下位編碼資料 S12’並將其輸出至多重化電路15。又，下位圖層編碼電 路1 2 ’係於上記編碼中，生成下位預測影像資料l_pre ’並將其輸出至轉換電路13» 轉換電路13，係將從下位圖層編碼電路12所輸入之 下位預測影像資料L_PRE內插處理，上位圖層編碼電路 1 4係生成和從延遲電路n所輸入之漸進式影像資料 S10_1同解析度（掃描線數）的下位預測影像資料L_PREb， 並將其輸出至上位圖層編碼電路14。 延遲電路1 1，係將構成從階層化電路1 〇輸入之漸進 式影像資料（漸進式訊號）S 1 〇_]的各圖像資料，恰好延遲 ’例如’下位圖層編碼電路12及轉換電路13上的處理時 -31 - (28) 1351881 間，然後輸出至上位圖層編碼電路1 4。 上位圖層編碼電路〗4，係使用從轉換電路13輸 下位圖層編碼電路12中所生成之下位預測影像 L_PREb，將漸進式影像資料S10_l予以編碼而生成 編碼資料S 1 4。 多重化電路15，係將從下位圖層編碼電路12輸 下位編碼資料S12，和從上位圖層編碼電路14輸入 位編碼資料S14，予以多重化而生成編碼資料S2。 <解碼裝置> 圖15係圖1所示之解碼裝置3的構成例之圖示。 解碼裝置3，例如，具有：分離電路51、延遲電 、下位圖層解碼電路53、轉換電路54及上位圖層解 路55。 [分離電路] 分離電路51係構成爲，輸入編碼裝置2所生 述編碼資料，將其分離成下位編碼資料S12和上位編 料S14，將下位編碼資料S12輸出至下位圖層解碼電 ，將上位編碼資料S14寫入至延遲電路52。 [延遲電路] 延遲電路52係構成爲，將從分離電路51輸入 編碼資料S14，恰好延遲下位圖層解碼電路53及 入之 資料 上位 入之 之上 路52 碼電 之上 碼資 路53 上位 換電 -32- (29) 1351881 路54上的處理時間，然後輸出至上位圖層解碼電路55« [下位圖層解碼電路] 圖16係下位圖層解碼電路53的構成例之圖示。 下位圖層解碼電路53，例如，具有：積存緩衝區 、可逆解碼電路6〗、逆量化電路62、逆正交轉換電路 、加算電路64、去區塊濾鏡65、畫格記憶體66、畫面 序緩衝區67、內在預測電路69、動態預測·補償電路 〇 積存緩衝區60中，係寫入了從分離電路51輸入之 位編碼資料5 1。 可逆解碼電路61係構成爲，當判斷爲下位編碼資 S12內的處理對象之大區塊MB，是被外跨（inter)編碼時 則將其的標頭部中所寫入的動態向量予以解碼，而輸出 動態預測♦補償電路70。可逆解碼電路6 1係構成爲， 判斷爲下位編碼資料S12內的處理對象之大區塊MB是 內在（intra)編碼時，則將其標頭部中所寫入的內在預測 式資訊予以解碼，而輸出至內在預測電路69。可逆解碼 路6 1係構成爲，將下位編碼資料S 1 2予以解碼然後輸 至逆量化電路62。可逆解碼電路6〗係構成爲，將標頭 中所含之預測模式資料PM予以解碼，將解碼結果輸出 例如圖1 5所示之轉換電路54。 逆量化電路62係構成爲，將已被可逆解碼電路6] 碼過之影像資料（正交轉換係數），基於從可逆解碼電路 60 63 排 70 下 料 至 當 被 模 電 出 部 至 解 -33- 61 (30) 1351881 所輸入之量化參數QP而加以逆量化，然後輸出至逆正交 轉換電路63。 逆正交轉換電路63係構成爲，對從逆量化電路62輸 • 入過來的影像資料（正交轉換係數）實施4x4的逆正交轉換 - 處理，而生成差分影像資料，將其輸出至加算電路64。 加算電路64係構成爲，將來自動態預測.補償電路 70或內在預測電路69的預測影像資料pi，和來自逆正交 ^ 轉換電路63的差分影像資料進行加算而生成影像資料， 並將其輸出至去區塊濾鏡65。 去區塊濾鏡65係構成爲，對從加算電路64輸入之影 像資料實施去區塊濾鏡處理，將處理後的解碼影像資料， 寫入至畫格記憶體66及畫面排序緩衝區67。 被記憶在畫格記憶體6 6中的解碼影像資料，係作爲 下位預測影像資料L_PRE1而被讀出至圖15所示之轉換 電路54。 ® 內在預測電路69係構成爲，基於從可逆解碼電路61 . 所輸入之內在預測模式，和從畫格記億體66讀出之解碼 影像資料’來生成預測影像資料PI，並將其輸出至加算電 路6 4。 動態預測·補償電路70係構成爲，基於從畫格記憶 -體66中讀出之解碼影像資料，和從可逆解碼電路61輸入 .進來的動態向量’來生成預測影像資料PI，並將其輸出至 加算電路64。 畫面排序緩衝區67係構成爲，將從去區塊濾鏡65寫 -34- (31) (31)1351881 入之解碼影像資料’加以記億。被記憶在畫面排序緩衝區 67中的解碼影像資料，係按照顯示順序，作爲下位解碼影 像資料S 5 3而被輸出.
[轉換電路] 參照圖15說明轉換電路54。 轉換電路54係構成爲，基於來自下位圖層解碼電路 53的預測模式資料pM，來將從下位圖層解碼電路53輸 入之下位預測影像資料L_PRE 1進行內插處理，然後生成 出和上位圖層解碼電路55從延遲電路52所讀出之上位編 碼資料S14同樣解析鏟（掃描線數）的下位預測影像資料 L_PRElb’並將其輸出至上位圖層解碼電路55。 圖1 7係轉換電路54之構成例的圖示》 轉換電路54’例如’係具有：圖場內預測影像生成電 路221、畫格內預測影像生成電路222。 圖場內預測影像生成電路2 2 1係構成爲，當預測模式 資料PM爲表示跨圖層/圖場內預測時，對下位預測影像資 料L_PRE1實施參照圖6〜圖8說明過的內插處理，而生 成出和漸進式影像資料也就是上位編碼資料S14相同解析 度的下位預測影像資料L_PRElb(FI)« 畫格內預測影像生成電路2 2 2係構成爲，當預測模式 資料PM爲表示跨圖層/畫格內預測時，對下位預測影像資 料L_PRE1實施參照圖9〜圖12說明過的內插處理，而生 成出和漸進式影像資料也就是上位編碼資料S I 4相同解析 -35- (32) 1351881 度的下位預測影像資料L_PRElb(FR)。 轉換電路54係構成爲’將上記生成之下位預 資料L_PRElb(FI)，（FR)，輸出至上位圖層解碼電路 [上位圖層解碼電路] 圖18係上位圖層解碼電路55的構成例之圖示 上位圖層解碼電路55，例如，具有：積存緩衝 '可逆解碼電路161、逆量化電路162、逆正交轉 163、加算電路164、去區塊濾鏡165、畫格記憶體 畫面排序緩衝區1 67、內在預測電路1 69、動態預 償電路170及下位圖層預測電路171。 積存緩衝區160中，係寫入了從延遲電路52 上位編碼資料S 1 4。 可逆解碼電路161係構成爲，將標頭資料中所 測模式資料PM予以解碼。 可逆解碼電路161係構成爲，當預測模式資料 表示上位編碼資料S14內的處理對象之大區塊mb 跨編碼的情況下，則將被寫入在其標頭部中的動態 以解碼然後輸出至動態預測.補償電路1 70。 可逆解碼電路1 6 1係構成爲，當預測模式資料 表示上位編碼資料S14內的處理對象之大區塊MB 在編碼的情況下’則將被寫入在其標頭部中的內在 式資訊予以解碼然後輸出至內在預測電路1 6 9。 可逆解碼電路16]係構成爲，當預測模式資料 測影像 55 ° 區16 0 換電路 166、 測·補 讀出之 含之預 PM是 是被外 向量予 PM是 是被內 預測模 PM爲 -36- (33) (33)1351881 表示跨圖層/圖場內預測或者跨圖層/畫格內預測時，則將 其意旨通知給下位圖層預測電路171。 可逆解碼電路161係構成爲，將上位編碼資料S14予 以解碼然後輸出至逆量化電路162。 可逆解碼電路1 6 1係構成爲，將預測模式資料pm， 輸出至動態預測.補償電路1 7 0、內在預測電路1 6 9及下 位圖層預測電路1 7 1。 逆量化電路162係構成爲，將已被可逆解碼電路161 解碼過之影像資料（正交轉換係數），基於從可逆解碼電路 61所輸入之量化參數QP而加以逆量化，然後輸出至逆正 交轉換電路163。 逆正交轉換電路163係構成爲，對從逆量化電路162 輸入過來的影像資料（正交轉換係數）實施4x4的逆正交轉 換處理’而生成差分影像資料，將其輸出至加算電路】64 〇 加算電路〗64係構成爲，將來自動態預測.補償電路 17〇 '內在預測電路169或下位圖層預測電路171的預測 影像資料PI，和來自逆正交轉換電路163的差分影像資料 進行加算而生成影像資料，將其輸出至去區塊濾鏡165。 去區塊濾鏡165係構成爲，對從加算電路164輸入之 影像資料實施去區塊濾鏡處理，將處理後的解碼影像資料 ，寫入至畫格記億體166及畫面排序緩衝區167。 內在預測電路1 69係構成爲，當通常之內在預測被指 定時，則基於從可逆解碼電路1 6 1所輸入之預測模式資料 -37- (34) (34)1351881 PM所指示的內在預測，和從畫格記億體166中讀出之解 碼影像資料，來生成預測影像資料p I，並將其輸出至加算 電路1 64。 動態預測•補償電路1 7 0係構成爲，當預測模式資料 PM是表示外跨預測時，則基於從畫格記憶體】66中讀出 之解碼影像資料，和從可逆解碼電路〗6 I輸入之動態向量 ’來生成預測影像資料PI，並將其輸出至加算電路164。 下位圖層預測電路1 7 1係構成爲，當預測模式資料 PM爲表示跨圖層/圖場內預測或者跨圖層/畫格內預測時， 則將從轉換電路54輸入之下位預測影像資料 L_PRElb(FI)，（FR) ’或對其施行過所定處理的資料，當成 預測影像資料PI而輸出至加算電路1 64。 畫面排序緩衝區167係構成爲，將從去區塊濾鏡165 寫入之解碼影像資料’加以記憶。被記憶在畫面排序緩衝 區1 67中的解碼影像資料，係按照顯示順序，作爲上位解 碼影像資料S55而被輸出。 [解碼裝置的動作例] 分離電路51係構成爲，輸入編碼裝置2所生成之上 述編碼資料’將其分離成下位編碼資料S12和上位編碼資 料S14，將下位編碼資料S12輸出至下位圖層解碼電路53 ，將上位編碼資料SI4寫入至延遲電路52。 延遲電路52係構成爲，將從分離電路5]輸入之上位 編碼資料SI4，恰好延遲下位圖層解碼電路53及轉換電 •38· 1351881 p5) 路54上的處理時間，然後輸出至上位圖層解碼電路55。 下位圖層解碼電路53係構成爲，將下位編碼資料 S12予以解碼’生成下位解碼影像資料S53，並將其輸出 。又，下位圖層解碼電路53係構成爲，生成下位預測影 像資料L_PRE1(FI)，（FR) ’並將其輸出至轉換電路54。 於轉換電路54中’下位預測影像資料l_PRE1(FI), (FR) ’被轉換成漸進式的解析度之下位預測影像資料 L_PRElb(FI)，（FR) ’然後輸出至上位圖層解碼電路55。 上位圖層解碼電路55係構成爲，基於下位預測影像 資料L_PRElb(FI)，（FR)來將上位編碼資料予以解碼，而 生成上位解碼影像資料S55，並將其加以輸出。 如以上說明’若依據本實施形態的編碼.解碼系統1 ’則於編碼裝置2中’當進行階層編碼時，在上位圖層中 可將漸進式影像資料S10_l加以編碼，而在下位圖層中可 將交錯式影像資料Sl〇_2加以編碼。 又，若依據編碼.解碼系統1，則於解碼裝置3中， 可將已在編碼裝置2上進行過階層編碼的漸進式影像資料 S 1 0_ 1和交錯式影像資料s 1 0_2，予以解碼。 本發明係不限定於上述實施形態。 亦即’當業者可於本發明的技術範圍內或均等範圍內 ，對於上述實施形態的構成要素，作各種變更、合倂、再 合倂以及置換。 例如’亦可將上述編碼裝置2或解碼裝置3之機能的 全部或一部份，如圖19所示，依據記億體3 52中所記億 -39- (36) 1351881 之程式 PRG 的記述，而由 CPU(Central Processing Unit) 等之處理電路353來執行。 此時，解碼對象之影像資料是透過介面351，而輸入 編碼對象或解碼對象之影像資料，其處理結果則透過其而 輸出。 上述實施形態中，在大區塊層新定義的程式碼之一例 示於下記表1和表2。
macroblock_layer」n_scalab】e_extension() { C Descriptor if( basejd_plusl != 0 && adaptive_prediclion_flag) { base_mode_flag 2 ae(v) If(! base__mode__flag && HalfSpatResBaseFlag && ! intia base mb( CurrMbAddr)) base__mode_refinemen<_ilag 2 ae(v) } if(! basejnode一flag && ! base_mode_reiinement_ilag) { mb_type 2 ae(v) If(mb_type == I_NxN && basejd_plusl != 0) intra_base_flag 2 ae(v) } if( inlra一base一flag && interlace—basejayer && progressive curr layer) { lower_layer_intra_prediction 一mode 2 ae(v) } -40- (37) 1351881
macroblock_layerJn_scalable_exteTision() { C Descriptor if( base一idjlusl != 0 && adaptive_prediction_llag) { basc_mode_ilag 2 ae(v) lf(! base_mode_flag && HaliSpatResBaseFlag && ! inlra base mb( CunMbAddr)) base一motle_refinement_flag 2 ae(v) X if(! base_mode_flag && ! base_mode_refinement_flag) { mb_type 2 ae(v) type == l_NxN && base_id_plusl != 0) intra_base_ilag 2 ae(v) if< intra—base一flag && interlace_base_layer && progressive cutt layer && frame structure base block) { lower_Iayer_intra_prediction_moUe 2 ae(v) ) 上記表1及表2中所示之“ lower#layer#intra#prediction#mode” ，係和預測模式一併 被儲存在編碼資料中的旗標資料。 該當旗標資料係例如，若使用圖6〜圖8所示之擴增 取樣手法時則表示爲「〇」，若使用圖9〜圖12所示之擴 增取樣手法時則表示爲「1」。 當該當旗標資料不存在時，就判斷成是表示爲「〇j 〇 “ ae(v)”係表示，已被指定的語法（syntax)，係爲上 下文適應性熘編碼（context-adaptive entropy coding)。 "baSe#id#plUSl” ，係將用來預測目前圖像之動態向 量、像素資料及差分資料所用之基礎圖像資料加以特定之 參數。 -41 - (38) 1351881 ·· adaptive#prediction#f]ag,> ，係袠示可調性擴充中 的大區塊層內的語法要素之有無，若舄無則表示成「〇」 當‘‘ baSe#m〇de#flag’’爲「1」時’則表示了目前大區 塊的mb#type;當參照號碼未被表示時，則隨著對應之基 礎大區塊而表示動態向量。
當"base#mode#f]ag” 爲「〇」時，‘‘ bas e#mod e#refi nement#flag ” 非 Γ 1 j 時貝Ij ** mb#type "係 未被推定。 當 “base#mode#flag”不存在時，則“ base#mode#flag”係被推定如下。 當“base#id#plusl”爲「0」時，則推定" base#mode#flag 之値爲 「〇」。除此以外，“ base#mode#flag”之値均堆定爲「1」。 當“base#id#plusl”大於「0」，基礎圖層是目前圖 層的1/2寬' 1/2高時，HalfSpatResBaseFlag係被設定成 「1」；除此以外均設定爲「〇」。 intra#base#mb(CurrMbAddr)"係一函數，當 CrarmbAddr的基礎大區塊爲1大區塊時，則回送「1」， 除此以外均回送「1 j 。 當 “base#mode#refinement#flag” 爲「1」時，貝U 表示 目前大區塊的mb#type和參照號碼，是根據所對應之基礎 大區塊來推定。當"base#mode#refinement#flag” 爲「1」 時，則在使用基礎大區塊之動態向量所得到之動態向量的 -42- (39) (39)1351881 預測値中’將被加過1 Μ像素解析度的動態向量特定出來 〇 當 base#mode#refinement#flag” 爲「〇」時， mb#type係未被推定。 “mb#type”係代表大區塊形式。“mb#type”的語意 ’係依存於分切形式（slice type)。 當“ intra#base#flag”爲「1」時’則表示大區塊形式 I#BL奁示才。 當 intra#base#flag” 不存在時，“intra#base#flag” 係推定如下。 當 “ base#mode#flag ” 爲「1」且 “ mb#type ” 爲 I_NxN時，則“intra#base#flag”係推定爲「；除此此 外均推定爲「〇」。 "I#NxN”係表示，大區塊形式是屬於內在8x8、內 在4x4或者I_BL之任何一者。 “ I#BL”係表示，其預測値並非周圍像素資料，而是 從基礎圖像資料所得之內在大區塊（intra macroblock) ^ “interlace#base#layer”係表示，基礎圖層的來源， 係爲交錯式形式。 "progressive#curr#layer”係表示，目前圖層的來源 是漸進式形式。 “frame#structure#base#block” 係表示，基礎區塊是： 以畫格構造而編碼。 供參考用，說明含有本發明之編碼裝置和解碼裝置的 -43- (40) (40)1351881 編碼·解碼系統之實施形態。 說明本實施形態的編碼·解碼系統的構成和本發明之 構成的對應關係。 編碼裝置2係爲本發明之編碼裝置之一例，係將編碼 裝置2的處理內容（機能），以圖1 9所例示的程式PRG加 以撰寫時，該程式PRG係爲本發明之程式之一例。此種 程式，通常係被收容於記錄媒體中，或者，透過通訊網路 而被收授，安裝於電腦上而動作。因此，本發明的程式， 係也包含此種收授形態以及動作形態。 參照圖2所述之下位圖層編碼電路12係爲本發明之 第1編碼手段及第1編碼部之一例；轉換電路13係爲擴 增取樣處理手段及擴增取樣處理部之一例；上位圖層編碼 電路14係爲第2編碼手段及第2編碼部之一例。 解碼裝置3係爲本發明之解碼裝置之一例，係將解碼 裝置3的處理內容（機能），以圖1 9所例示的程式PRG加 以撰寫時，該程式PRG係爲本發明之程式之一例。此種 程式，通常係被收容於記錄媒體中，或者，透過通訊網路 而被收授，安裝於電腦上而動作。因此，本發明的程式’ 係也包含此種收授形態以及動作形態。 參照圖1 5所述之下位圖層解碼電路5 3係爲本發明之 第1解碼手段及第1解碼部之一例；轉換電路5 4係爲擴 增取樣處理手段及擴增取樣處理部之一例；上位圖層解碼 電路55係爲第2解碼手段及第2解碼部之一例。 -44 - (41) (41)1351881 【圖式簡單說明】 〔圖1〕圖1係本發明之實施形態的編碼·解碼系統 的構成例圖示β 〔圖2〕圖2係圖1所示之編碼·解碼系統中的編碼 裝置的方塊圖。 〔圖3〕圖3係用來說明圖2所示之漸進式影像資料 和交錯式影像資料的圖。 〔圖4〕圖4係用來說明圖2所示之下位圖層編碼電 路之構成例的圖。 〔圖5〕圖5係用來說明圖2所示之轉換電路之構成 例的圖。 〔圖6〕圖6係用來說明圖5所示之圖場內（intrafield)預測 影像生 成電路 之處理 的例子 的圖。 〔圖7〕圖7係用來說明圖5所示之畫格內（intraframe)預 測影像 生成電 路之處 理的例 子的流 程圖》 〔圖8〕圖8係用來說明圖5所示之圖場內預測影像 生成電路之處理的例子的圖。 〔圖9〕圖9係用來說明圖5所示之畫格內預測影像 生成電路之處理的例子的圖。 〔圖1 0〕圖1 0係用來說明圖5所示之畫格內預測影 像生成電路之處理的例子的流程圖》 〔圖1 1〕圖U係用來說明圖5所示之畫格內預測影 像生成電路之處理的例子的圖。 〔圖1 2〕圖1 2係用來說明圖5所示之畫格內預測影 -45- (42) 1351881 像生成電路之處理的例子的圖。 〔圖13〕圖13係圖2所示之上位圖層編碼電路之構 成例的圖示。 • 〔圖14〕圖14係圖】3所示之下位圖層預測電路之構 • 成例的圖示。 〔圖15〕圖15係圖1所示之編碼·解碼系統中的解 碼裝置之構成例的圖示。 ® 〔圖16〕圖16係圖15所示之下位圖層解碼電路之構 成例的圖示。 〔圖17〕圖17係圖15所示之轉換電路之構成例的圖 TJn ° 〔圖18〕圖18係圖15所示之上位圖層解碼電路之構 成例的圖示6 〔圖1 9〕圖1 9係用來說明本發明之實施形態的變形 例的圖。 , 【主要元件符號說明】 1 :編碼.解碼系統、2 :編碼裝置、3 :解碼裝置、 10··階層化電路、11:延遲電路、12:下位圖層編碼電路 、13:轉換電路、14:上位圖層編碼電路、15:多重化電 • 路、2 1 :圖場內預測影像生成電路' 22 :畫格內預測影像 • 生成電路、23, 123:畫面排序電路、31，131 :演算電路、 32, 132:正交轉換電路、33，133:量化電路、34, 134: 速率控制電路、35, 135:可逆編碼電路、36，]36:緩衝記 -46 - (43) (43)1351881 憶體、37，137:逆量化電路、38，138:逆正交轉換電路、 39，139:加算電路、40，]40:去區塊濾鏡' 4]; 14】：畫 格記憶體、42，142 :內在預測電路、43，！ 43 :動態預測. 補償電路、51:分離電路、52 ·_延遲電路、53··下位圖層 解碼電路、54:轉換電路、55:上位圖層解碼電路、56: 再構成電路、60，160:積存緩衝區、61，161 :可逆解碼電 路、62，162:逆量化電路' 63, 163:逆正交轉換電路、 64，164:加算電路、65，165:去區塊濾鏡、66，166:畫 格記憶體、67, 1 67 :畫面排序緩衝區、69，169 :內在預測 電路、70, 1 70 :動態預測.補償電路、145 :下位圖層預 測電路
-47-