201215156 六、發明說明: 【發明所屬之技術領域】 本發明係關於一種圖像解碼裝置、圖像編碼裝置及其方 法以及程式。詳細而言,提供一種可進行有效之解碼或編 碼之圖像解碼裝置、圖像編碼裝置及其方法以及程式。 【先前技術】 近年來,將圖像資訊作為數位進行處理,此時’以效率 較高之資訊之傳輸、儲存為目的,利用圖像資訊特有之冗 餘性,依據藉由正交轉換與移動補償壓縮之MPEG(Moving Picture Experts Group,動晝專家群)等方式的裝置在廣播 事業機構等資訊發送、及一般家庭之資訊接收雙方不斷普 及。 尤其,MPEG2(ISO(International Organization for Standardization,國際標準化組織)/IEC(International Electrotechnical Commission,國際電工委員會)13818-2)被 定義為通用圖像編碼方式。MPEG2壓縮方式為包羅交錯掃 描圖像及依序掃描圖像雙方、以及標準解像度圖像及高精 細圖像之標準,目前正廣泛地用於專業用途及消費用途之 廣泛之應用。藉由使用MPEG2壓縮方式,例如若為具有 1920x1088像素之高解像度之交錯掃描圖像,則分配18〜22 Mbps之碼量(位元率),藉此可實現高壓縮率與良好之晝 質。 MPEG2主要將適合於播放用之高晝質編碼作為對象,但 無法應對較MPEG1更低之碼量(位元率)、即更高之壓縮率 154151.doc 201215156 之編碼方式。可認為藉由行動終端之普及,今後此種編碼 方式之需求會高漲,與此對應而進行MPEG4編碼方式之標 準化。關於圖像編碼方式,於1998年12月該規格作為 ISO/IEC 14496-2而被承認為國際標準》 進而,近年來,與MPEG2或MPEG4之類的編碼方式相 比,其編碼、解碼要求更多之運算量、但可實現更高之編 碼效率之稱為 H.264 及 MPEG-4 PartlO(Advanced Video Coding,以下記作H.264/AVC)為國際標準。該H.264/AVC 以H.26L為基礎,並亦導入H.26L並不支持之功能。 又,專利文獻1等中揭示使用H.264/AVC更有效地對圖像 資料進行編碼。 [先前技術文獻] [專利文獻] [專利文獻1]日本專利特開2008-4984號公報 【發明内容】 [發明所欲解決之問題] 然而,畫面内預測中提出有配合晝面内預測之方向進行 轉換方法之切換之被稱作MDDT(Mode dependent directional transform)的方式。於使用此種MDDT方式之情 形時,若配合晝面内預測之方向所進行之轉換未能最佳 化,則難以改善編碼效率。 因此,本發明之目的在於提供一種可改善編碼效率之圖 像解碼裝置、圖像編碼裝置及其方法以及程式。 [解決問題之技術手段] 154151.doc 201215156 本發明之第1態樣在於一種圖像解碼裝置,其係針對— 個轉換區塊對作為圖像資料與預測圖像資料之誤差之,》母 誤差資料進行正交轉換,由對該正交轉換後之係數 仃處理而生成之編碼位元流將上述圖像資料解碼;且包 含.資料處理部,其係對上述編碼位元流進行處理,從而 獲得上述正交轉換後之係數資料與編碼參數資訊;逆正交 轉換部’其係使用根據上述編碼參數資訊所示之巨集區^ 内之上述轉換區塊的位置而預先設定之基準,進行上述係 數資料之逆正交轉換從而獲得預測誤差;預測圖像資料生 成部,其生成上述預測圖像資料;及加法部,其係對由上 述逆正交轉換部所獲得之上述預測誤差加上由上述預測圖 像資料生成部所生成之預測圖像資_,而對上述圖像資料 進行解碼。 本發明之圖像解碼裝置中,進行對編碼位元流進行處理 而獲得之正交轉換後之係數資料的逆正交轉換時,使用根 據用以對上述編碼位元流中所包含之圖像資料進行解碼之 編碼參數資訊所示之巨集區塊内之轉換區塊的區塊位置、 或區塊位置與編碼參數資訊所示之預測模而預先設定的基 準,進行逆正交轉換例如卡忽南.拉維(Karhunen L〇eve)逆 轉換。又,巨集區塊中所包含之轉換區塊為複數個時,對 使用各轉換區塊之正交轉換後之最低頻率成分之係數的區 塊之正交轉換後之係數資料,使用根據預測模式而預先設 定之基準進行卡忽南.拉維逆轉換。又,逆正交轉換部所 使用之基準為針對每個轉換區塊將預測誤差資料正交轉換 154151.doc 201215156 時所使用之基準的逆行例。預先設定此種基準,選擇使用 對應於區塊位置等之基準而進行逆正交轉換從而生成進行 正交轉換之前之預測誤差資料。 本發明之第2態樣在於一種圖像解碼方法,其係針對每 個轉換區塊對作為圖像資料與預測圖像資料之誤差之預測 誤差資料進行正交轉換,由對該正交轉換後之係數資料進 行處理而生成之編碼位元流將上述圖像資料解碼;且設 有:資料處理步驟,其係對上述編碼位元流進行處理,從 而獲得上述正交轉換後之係數資料與編碼參數資訊;逆正 交轉換步驟,其係使用根據上述編碼參數資訊所示之巨集 區塊内之上述轉換區塊的位置而預先設定之基準,進行上 述係數資料之逆正交轉換從而獲得預測誤差;預測圖像資 料生成步驟,其係生成上述預測圖像資料;及相加步驟, 其係對由上述逆正交轉換部所獲得之上述預測誤差加上上 述所生成之預測圖像資料’而對上述圖像資料進行解碼。 本發明之第3態樣在於一種程式,其係使圖像編碼由電 腦執行’該圖像編碼係針對每個轉換區塊對作為圖像資料 與預測圖像資料之誤差之預測誤差資料進行正交轉換,由 對該正交轉換後之係數資料進行處理而生成之編碼位元流 而對上述圖像資料進行解碼;且由上述電腦執行:資料處 理程序’其係對上述編碼位元流進行處理,從而獲得上述 正交轉換後之係數資料與編碼參數資訊;逆正交轉換程 序’其係使用根據上述編碼參數資訊所示之巨集區塊内之 上述轉換區塊的位置而預先設定之基準,進行上述係數資 154151.doc 201215156 料之逆正交轉換從而獲得預測誤差;預測圖像資料生成程 序,其係生成上述預測圖像資料;及相加程序,其係對由 上述逆正交轉換部所獲得之上述預測誤差加上上述所生成 之預測圖像資料,而對上述圖像資料進行解碼。 本發明之第4態樣在於一種圖像編碼裝置,其係進行圖 像資料之編碼;且包含:預測部,其生成上述圖像資料之 預測圖像資料;減法部,其生成作為上述圖像資料與上述 預測圖像資料之誤差之預測誤差資料;正交轉換部,其係 針對每個轉換區塊進行上述預測誤差之正交轉換,並使用 根據巨集區塊内之上述轉換區塊的位置而預先設定之基準 進打上述正交轉換;及資料處理部,其係對上述正交轉換 部之輸出資料進行處理而生成編碼位元流。 本發明之圖像編碼裝置中,針對每個轉換區塊將表示圖 像資料與預測圖像資料之誤差之預測誤差資料正交轉換 時,使用根據巨集區塊内之轉換區塊之區塊位置或生成區 塊位置與預測圖像資料時之預測模式而預先設定的基準, 進行正交轉換例如卡忽南.拉維轉換。又,巨集區塊中所 包含之轉換區塊為複數個時,進行由各轉換區塊中之正交 轉換後之最低頻率成分之係數構成的區塊之卡忽南·拉維 轉換。該卡忽南.拉維轉換中使用根據預測模式而預先設 定之基準。該基準為與矩陣之固有值對應之固有向量,其 係使用預先準備作基準之學習用之複數個圖像,根據每個 巨集區塊尺寸、每個轉換區塊尺寸、每個巨集區塊内中之 轉換區塊之位置、及每個預測模式之各轉換區塊内的預測 i54151.doc 201215156 誤差資料而算出。又,基準根據基準間之距離或自參照像 素算起之距離而分組化。預先設置此種基準,選擇使用對 應於區塊位置等之基準進行正交轉換。進而,對正交轉換 後之係數資料進行量子化或可逆編碼等之處理,從而進行 編碼位元流之生成。 本發明之第5態樣在於一種圖像編碼方法,其係進行圖 像資料之編瑪;且設有:預測圖像資料生成步驟,其係生 成上述圖像資料之預測圖像資料;相減步驟,其係生成作 為上述圖像資料與上述預測圖像資料之誤差之預測誤差資 料,及正交轉換步驟,其係針對每個轉換區塊進行上述預 測誤差之正交轉換,並使用根據巨集區塊内之上述轉換區 塊的位置而預先設定之基準進行上述正交轉換。 本發明之第6態樣在於一種程式,其係使圖像資料之編 碼由電腦執行’且由上述電腦執行:預測圖像資料生成程 序,其係生成上述圖像資料之預測圖像資料丨減法程序, 其係生成作為上述圖像資料與上述預測圖像資料之誤差之 預測誤差資料;及正交轉換程序,其係針對每個轉換區塊 進行上述預測誤差之正交轉換,並使用根據巨集區塊内之 上述轉換區塊的位置而預先設定之基準進行上述正交 換。 再者’本發明之程式為如下程式,即,對於例如可執行 各種程式·代碼之通用電腦 '系、統’可藉由以電腦可讀之 形式提供之記憶介質、通訊介質、例如、光碟或磁碟、半 導體記憶體等記憶介質、或者網路等通訊介質而提供。藉 154151.doc 201215156 由以電服可3賣之形式提供此種程式,而可於電腦、系統上 實現程式所對應之處理。 [發明之效果] 根據本發明,圖像資料之編碼時所進行之正交轉換中, 使用根據巨集區塊内之轉換區塊之區塊位置而預先設定之 基準來進行正交轉換。又,對使用根據區塊位置而預先設 疋之基準來進行正交轉換所獲得之係數資料進行處理而生 成之編碼位元流的解碼中,使用根據編碼位元流中所包含 之編碼參數資訊所示之巨集區塊内之區塊位置而預先設定 的基準,進行逆正交轉換,因此可將正交轉換後之係數資 料恢復為正交轉換前之預測誤差資料。如此,使用對應於 巨集區塊内之區塊位置之基準進行正交轉換或逆正交轉 換,因此可根據區塊位置進行經最佳化之轉換,從而可改
善編碼效率D 【實施方式】 以下,對用以實施發明之形態進行說明。再者,說明以 如下順序進行。 1·圖像編碼裝置之構成 2·正交轉換部之構成 3. 圖像編碼裝置之動作 4. 圖像解碼裝置之構成 5 ·逆正交轉換部之構成 6. 圖像解碼裝置之動作 7. 基準之學習動作 154151.doc 201215156 8_軟體處理之情形 9·應用於電子機器之情形 <1.圖像編碼裝置之構成> 圖1表示圖像編碼裝置之構成。圖像編碼裝置丨〇包含類 比/數位轉換部(A/D(analog to digital)轉換部)11、畫面重 排序緩衝器12、減法部1 3、正交轉換部14、量子化部15、 可逆編碼部16、儲存緩衝器17、速率控制部18 ^進而,圖 像編碼裝置1 〇包含逆量子化部21、逆正交轉換部22、加法 部23、解塊濾波器24、圖框記憶體27、畫面内預測部31、 移動預測.補償部32、預測圖像·最佳模式選擇部33。 A/D轉換部U將類比之圖像信號轉換成數位之圖像資料 並輸出至畫面重排序緩衝器12» 畫面重排序緩衝器12對自A/D轉換部丨丨輸出之圖像資料 進行圖框之重排序。晝面重排序緩衝器12根據有關編碼處 理之GOP(Gr〇Up of Pictures,圖像群組)構造進行圖框之重 排序,並將重排序後之圖像資料輸出至減法部13、畫面内 預測部3 1及移動預測·補償部32。 減法部13中供給有自畫面重排序緩衝器12輸出之圖像 料、與由後述之預測圖像.最佳模式選擇部33所選擇之 測圖像資料。減法部13算出自畫面重排序緩衝器12輪出 圖像資料與自預測圖像·最佳模式選擇部33供給之預測 像資料之差分即預測誤差資料,並輸出至正交轉換部= 正交轉換部i4對自減法部13輸出之預測誤差資料進一 交轉換處理。又’正交轉換部14於進行晝面内預測之: 154151.doc -10- 201215156 時,進行對應於預測模式之正交轉換處理。正交轉換部14 將藉由進行正交轉換處理而獲得之係數資料輸出 部15。 化 量子化部15令供給有自正交轉換部Μ輸出之係數資料、 及來自後述速率控制部18之速率控制信號。量子化部㈣ 行係數資料之量子化,並將量子化資料輸出至可逆編碼部 16與逆量子化部21。又,量子化部15基於來自速率控制部 18之速率控制信號而切換量子化參數(量子化比例),從而 改變量子化資料之位元率。 可逆編碼部16中供給有自量子化部15輸出之量子化資 料、及來自後述之畫面内預測部31、移動預測補償部Μ 或預測圖像.最佳模式選擇部33之編碼參數資訊。再者, 編碼參數資訊中包含表示畫面内預測或畫面間預測之資 訊·、表示巨集區塊尺寸之巨集區塊資訊、有關畫面内預測 之資《孔有關畫面間預測之資訊等。可逆編碼部16對量子 化資料藉由例如可變長度編碼或算術編碼等進行可逆編碼 處理,生成編碼位元流並輸出至儲存緩衝器17。又,可逆 編碼部16對編碼參數資訊進行可逆編碼,並附加於編碼位 元流之例如標頭資訊。再者,量子化部15或可逆編碼部16 相當於對正交轉換部14之輸出資料進行處理而生成編碼位 元流之資料處理部。 儲存緩衝器17儲存來自可逆編碼部16之編碼位元流。 又’儲存緩衝器17以與傳輸路徑對應之傳輸速度輸出所儲 存之編碼位元流。 154151.doc 201215156 速率控制部18進行儲存緩衝器17之間置容量之監控,並 根據間置容量生成速率控制信號而輸出至量子化部15。速 率控制部18例如自儲存緩衝器17取得表示閒置容量之資 訊。速率控制部18於閒置容量變少時,藉由速率控制信號 而使量子化資料之位元率降低。又,速率控制部丨8於儲存 緩衝器17之閒置容量足夠大時,藉由速率控制信號而使量 子化資料之位元率升高。 逆量子化部21進行自量子化部15供給之量子化資料之逆 量子化處理。逆量子化部21將藉由進行逆量子化處理而獲 得之係數資料輸出至逆正交轉換部22。 逆正交轉換部22將藉由進行自逆量子化部21供給之係數 資料之逆正交轉換處理而獲得之資料輸出至加法部23。 加法部23將自逆正交轉換部22供給之資料與自預測圖像 •最佳模式選擇部3 3供給之預測圖像資料相加而生成參照 圖像資料,並將其輸出至解塊濾波器24與畫面内預測部 31 〇 解塊濾波器2 4進行用以使對圖像進行編碼時所產生之區 塊失真減少的濾波處理。解塊濾波器24進行從由加法部23 供給之參照圖像資料中去除區塊失真之濾波處理,並將濾 波處理後之參照圖像資料輸出至圖框記憶體27。 圖框記憶體27保持自解塊濾波器24供給之濾波處理後之 參照圖像資料。 畫面内預測部31使用自畫面重排序緩衝器12輸出之編碼 對象圖像之圖像資料與自加法部23供給之參照圖像資料進 154151.doc -12· 201215156 仃晝面内預測處理。畫面内預測部31針對每個正交轉換中 之轉換區塊尺寸、及每個晝面内預測之預測模式進行晝面 内預別處理。畫面内預測部3 1將所生成之預測圖像資料輸 出至預測圖像.最佳模式選擇部33。又,畫面内預測部^ 生成有關畫面内預測處理之編碼參數資訊,並輸出至可逆 編碼部16與預測圖像.最佳模式選擇部33。畫面内預測部 31係於編碼參數資訊中包含例如巨集區塊尺寸或轉換區塊 尺寸、巨集區塊内之轉換區塊之位置、預測模式等。 又,畫面内預測部31係於各畫面内預測處理中算出成本 函數值ϋ選擇所算出之成本函數值為最小之畫面内Hu 處理、即編碼效率為最高之最佳晝面内預測處理。畫面内 預測部3旧最佳畫面内預測處理中之編碼參數資訊與成本 值與最佳畫面内預測處理所生成之預測圖像資料輸出至預 測圖像·最佳模式選擇部33。 移動預測.補償部32以對巨集區塊之所有移動補償區塊 尺寸而進行晝面間預測處理,生成預測圖像資料並輸出至 預測圖像.最佳模式選擇部33。移動預測補償部Μ針對自 晝面重排序緩衝器丨2讀取之編碼對象圖像中之各移動補償 區塊尺寸之圖像的每一個’使用自圖框記憶體27讀取之濾 波處理後之參照圖像資料來檢測移動向量。進而,移動預 測.補償部3 2基於已檢測之移動向量對參照圖像實施移動 補償處理並生成預測圖像資n移動預測補償部32 生成有關畫面間預測處理之編碼參數資訊、例如表示巨集 區塊尺寸或移動補償區塊尺寸、移動向量等之編碼參數資 154151.doc •13· 201215156 =並輸出至可逆編碼部16與預測圖像最佳模式選擇部 又,移動預測.補償部32對各移動補償區塊尺寸 本函數值,並選擇所算出之成本函數值為最小之畫面間預 測處理、即編碼效率為最高之畫面間預測處理。移動預測 .補償部32將最佳晝面間預測處理中之編碼參數資% 本值及最佳畫面間預測處理所生成之預測圖像資料輸出至 預測圖像.最佳模式選擇部33。 預測圖像.最佳模式選擇部33於畫面内預測部叫 個轉換區塊尺寸或預測模式進行畫面内預測處理而選擇最 佳畫面内預測處理時,將編碼參數資訊輸出至正 14與可逆編碼部16,將預測圖像資料輸出 ^預_像·最佳模式選擇㈣於移動補償部 ::測區塊進行畫面間預測處理而選擇最佳畫面間預 .將編碼參數資訊輸出至正交轉換部】 崎㈣,將預測圖像資料輸出至減法部⑴ 圖扁 像·最佳模式選擇㈣卿最佳畫面㈣測處㈣== 面間制纽之任—者作為最佳模式時,比較最佳畫 Π理之成本函數值與最佳4面間制處理之成本函數 ,°預_像·最佳模式選擇㈣基Μ較 ^ 為最佳描/ 碼效率較高之預測處理作 資:式,並將由所選擇之最佳模式所生成 資科輸出至減法部13。 固像 將表示最佳模式之預制卢 模式選擇部33 》,'彳處理之編碼參數資訊輸出至正交轉 15415l.doc 201215156 換部14與可逆編碼部16 β <2.正交轉換部之構成> 畫面内預測處理中進行如下處理:制已完成編瑪之鄰 接區塊之像素進行預測,自複數個預測方向選擇最佳之預 測方向《例如H.264/AVC中設定有預測模式〇〜預測模式3之 四個模式作為有關16x16像素之區塊之預测模式。又,嗖 定有預測模式〇〜預測模式8之九個預測模式作為有關8χ8像 素之區塊之預測模式。進而,設定有預測模式〇〜預測模式 8之九個預測模式作為有關4χ4像素之區塊之預測模式。 圖2表示例如有關4χ4像素之區塊之預測模式。以下,對 圖2之各預測模式進行簡單說明。再者,圖2中箭頭表示預 測方向。 圖2之(Α)表示預測模式0(vertica卜垂直)^預測模式〇係 由在垂直方向鄰接之參照像素(reference pixel)A〜D生成預 測值之模式《圖2之(B)表示預測模式1(h〇riz〇ntai,水 平)。預測模式1如箭頭所示,係藉由在水平方向鄰接之參 照像素I〜L而生成預測值之模式。圖2之表示預測模式 2(DC(Direct Current,直流。預測模式2係藉由13個參照 像素A〜Μ中之於該區塊之垂直方向及水平方向鄰接之參照 像素Α〜D及I〜L生成預測值之模式。 圖2之(D)表示預測模式3(diagonal down-left,斜向左下 方)。預測模式3係藉由13個參照像素a〜Μ中之於水平方向 連續之參照像素Α〜Η而生成預測值之模式。圖2之(Ε)表示 預測模式4(diagonal down-right,斜向右下方)。預測模式4 15415J.doc 15 201215156 係藉由13個參照像素A〜M中之與該區塊鄰接之參照像素 A〜D、I〜Μ而生成預測值之模式。圖2之(F)表示預測模式 5(vertiCal-right,垂直向右p預測模式5係藉由13個參照 像素A〜Μ中之與該區塊鄰接之參照像素A〜D、而生成 預測值之模式。 圖2之(G)表示預測模式6(horizontal-down,水平向下)〇 預測模式6與預測模式4及預測模式5同樣地係藉由13個參 照像素A〜Μ中之與該區塊鄰接之參照像素a〜〇、pm而生 成預測值之模式。圖2之(H)表示預測模式7(verticai_left, 垂直向左)。預測模式7係藉由13個參照像素A〜M中之與該 區塊之上方鄰接之四個參照像素A〜D、及該四個緊接參照 像素A〜D之四個參照像素E〜G而生成預測值之模式。圖2之 (I)表示預測模式8(horizontal-up,水平向上)。預測模式$ 係藉由13個參照像素A〜M中之與該區塊之左方之鄰接之四 個參照像素I〜L而生成預測值之模式。 如此生成預測值之情形時,如下情形較多:區塊内之像 素中,越為與用於預測之像素接近之像素,則與預測值之 誤差(預測誤差)越少。因此,例如如圓3之(A)所示選擇預 測模式0(vertiCal)作為最佳模式之情形時,像素p〇〜p3與像 素P12〜P15相比預測誤差較少。又,如圖3之(B)所示選 擇預測模式l(horizontal)之情形時,像素P〇、p4、p8、pi2 與像素P3、P7、Pll、P15相比預測誤差較少。又,如圖3 之(C)所示選擇預測模式4(diagonal down-right)之情形時, 像素P0與像素P15相比預測誤差較少。如此,預測誤差依 154151.doc .16· 201215156 賴於預測模式。又,有關巨集區塊内之區塊位置,亦為如 下情形較多··越接近已完成編碼之鄰接巨集區塊的區塊預 測誤差越少,預測誤差亦依賴於巨集區塊中之區塊位置。 因此,正交轉換部14藉由針對每個預測模式及進行巨集區 塊内之正父轉換之區塊之位置設定最佳之基準,從而將預 測誤差之正交轉換最佳化。 又,已知正父轉換中,卡忽南.拉維轉換(以下稱為「κι (KarhUnen-L〇eve)」)係以轉換後之係數相互不相關之方式 轉換的轉換方式、即欲獲得最大之編碼效率之最佳之轉換 方式。然而,為了明白KL轉換之基準,必需算出基於預 測誤差之矩陣之生成或所生成之矩陣之固有值所對應之固 有6量此處,右由圖像編碼裝置計算該次基準,則導致 圖像編碼裝置中之運算量變大。又,若對所計算之基準附 加編碼位元流,則導致編碼效率之惡化。因此,針對每個 巨集區塊内之進行正交轉換之區塊位置或預測模式藉由預 先學習而算出最佳之基準。若將該所算出之基準用在圖像 編碼裝置與圖像解碼裝置,則無需由圖像編碣裝置與圖像 解碼裝置進行基準之算出,圖像編碼裝置與圖像解碼裝置 之構成與算出基準之情形相比變得簡易。進而,因無需傳 輸基準’故而可使用KL轉換而提高編碼效率。再者, 關基準之學習稍後闡述。 畫面内預測中,巨集區塊為16χ16像素時,作為編碼對 象圖像之區塊尺寸之轉換區塊尺寸例如設為16χΐ6像素 8x8像素、4x4像素之任一區塊尺寸。又, 、 芒第區塊為 154151.doc •17- 201215156 像素時’轉換區塊尺寸設為例如8x8像素、4x4像素之任一 區塊尺寸。因此,如圖4所示’正交轉換部14於巨集區塊 為16x16像素時,構成為可以16x16像素、8x8像素、4x4像 素之區塊尺寸進行對應於預測模式之KL轉換。又,正交 轉換部14於巨集區塊為8x8像素時,構成為可以8x8像素、 4x4像素之區塊尺寸進行對應於預測模式之kl轉換。進 而,正交轉換部14於在巨集區塊内設置有複數個轉換區塊 之情形時,進行對應於巨集區塊内之區塊位置1〇c之尺1^轉 換。 圖5例示使用KL轉換之正交轉換部14之構成。正交轉換 部14包含16X16KL轉換部141、8x8KL轉換部142、2x2KL 轉換部 143、146、4X4KL轉換部 144、145、DCT(discrete cosine transform,離散餘弦轉換)部147及係數選擇部 148 〇 16xl6KL轉換部141使用針對每個預測模式而預先學習 之最佳之基準’以16 X 16像素之區塊單位進行預測誤差資 料之KL轉換,並將所獲得之係數輸出至係數選擇部148。 8x8KL轉換部142使用針對每個預測模式及巨集區塊内 之區塊位置而預先學習之最佳之基準,以8χ8像素之區塊 單位進行預測誤差資料之KL轉換。又,預測誤差資料為 與16x16像素之區塊尺寸對應之資料時,於16><16像素之區 塊中包含四個8x8像素之區塊。因此,8x8KL轉換部142將 8x8像素之各區塊中之最低之頻率成分之係數(以下稱為 「最低頻率成分係數」)輸出至2 x2KL轉換部143,並將其 lS4151.doc 18 · 201215156 他係數輸出至係數選擇部148。又,8x8kl轉換部142於預 測誤差資料為與8x8像素之區塊尺寸龍之資料時,使用 針對每個預測模式而預先學習之最佳之基準,以8χ8像素 之區塊單位進行預測誤差資料之KL轉換。8x8KL轉換部 142將藉由KL轉換而獲得之係數輸出至係數選擇部148。 2x2KL轉換部143使用針對每個預測模式而預先學習之 最佳之基準,使用與預測模式對應之基準進行自轉 換部142供給之2x2區塊分之係數的艮1轉換,並將所獲得 之係數輸出至係數選擇部148。 4x4KL轉換部144使用針對每個預測模式及巨集區塊内 之區塊位置而預先學習之最佳之基準,以4χ4像素之區塊 單位進行預測誤差資料之KL轉換。又,預測誤差資料為 與16x16像素之區塊尺寸對應之資料時,於16><16像素之區 塊中包含16個4x4像素之區塊。因此,4x4KL轉換部144將 4χ4像素之各區塊中之最低頻率成分係數輸出至4 χ 轉 換部145,並將其他係數輸出至係數選擇部148。又,預測 誤差資料為與8x8像素之區塊尺寸對應之資料時,於8χ8像 素之區塊中包含四個4x4像素之區塊》因此,4x4KL轉換 部144將4x4像素之各區塊之中之最低頻率成分係數輸出至 2x2KL轉換部146 ’並將其他係數輸出至係數選擇部148。 4x4KL轉換部145使用針對每個預測模式而預先學習之 最佳之基準,使用由4x4KL轉換部144所示之預測模式所 對應之基準,對自4x4KL轉換部144供給之4x4區塊之最低 頻率成分係數之區塊進行KL轉換。4MKL轉換部145將藉 154151.doc •19- 201215156 由KL轉換而獲得之係數輸出至係數選擇部148。 2x2KL轉換部146使用針對每個預測模式而預先學習之 最佳之基準,使用與預測模式對應之基準對自4x4KL轉換 部144供給之2x2區塊之最低頻率成分係數之區塊進rkl 轉換。2x2KL轉換部146將藉由K:L轉換而獲得之係數輪出 至係數選擇部148。 0(:丁部〗47進行預測誤差資料之離散餘弦轉換,並將所 獲得之係數輸出至係數選擇部丨48。 係數選擇部148根據巨集區塊尺寸與轉換區塊尺寸即對 應於預測誤差資料之區塊尺寸而進行係數之選擇。係數選 擇部148於巨集區塊尺寸為16xl6像素時,基於轉換區塊尺 寸而選擇自16X16KL轉換部141輸出之係數、自8χ8κχ轉換 4 142與2x2KL轉換部143輸出之係數、自4MKL轉換部144 與4x4KL轉換部145輸出之係數中之任一個。係數選擇部 148將所選擇之係數輸出至量子化部15。 又,係數選擇部148於巨集區塊尺寸為8x8像素時,基於 轉換區塊尺寸選擇自8x8KL轉換部142輸出之係數、自 4X4KL轉換部144與2x2KL轉換部146輸出之係數中之任一 個。係數選擇部148將所選擇之係數輸出至量子化部15 ^ 再者,係數選擇部148於藉由自預測圖像·最佳模式選擇部 33供給之編碼參數資訊而表示為畫面間預測模式時,將自 DCT部147輸出之係數輸出至量子化部15。 <3.圖像編碼裝置之動作> 其次,對圖像編碼處理動作進行說明。圖6係表示圖像 154151.doc •20· 201215156 編碼處理動作之流程圖。步驟ST11中,A/D轉換部11對所 輸入之圖像信號進行A/D轉換。 步驟ST12中’畫面重排序緩衝器12進行圖像重排序。畫 面重排序緩衝器12記憶自a/d轉換部11供給之圖像資料, 並根據各畫面之顯示順序對進行編碼之順序進行重排序。 步驟ST13中,減法部13進行預測誤差資料之生成。減法 部13算出步驟ST12中經重排序之圖像之圖像資料與由預測 圖像·最佳模式選擇部33所選擇之預測圖像資料的差分而 生成預測誤差資料。預測誤差資料與原本之圖像資料相比 資料量較小。因此,與直接將圖像編碼之情形相比,可壓 縮資料量。 步驟ST14中,正交轉換部14進行正交轉換處理。正交轉 換部14對自減法部13供給之預測誤差資料進行正交轉換。 正交轉換部14例如對預測誤差資料進行卡忽南拉維轉換 或離散餘弦轉換等正交轉換,並輸出係數資料。再者,對 正交轉換部14之動作之詳情稍後闡述。 步驟ST15中,量子化部15進行量子化處理。量子化部 將係數資料量子化。量子化時,如後述之步驟ST26之處理 所說明般進行速率控制。 步驟ST16中,逆量子化部21進行逆量子化處理。逆量子 化部21以與量子化部15之特性對應之特性對藉由量子化部 15量子化之係數資料進行逆量子化。 步驟ST17中,逆正交轉換部22進行逆正交轉換處理。逆 正交轉換部22以與正交轉換部14之特性對應之特性對藉由 154151.doc •21· 201215156 ♦ 豢 逆量子化部21逆量子化之係數資料進行逆正交轉換。 步驟3丁18中,加法部23進行參照圖像資料之生成。加法 部23將自預測圖像·最佳模式選擇部33供給之預測圖像資 料與對應於該預測圖像資料之區塊位置之逆正交轉換後之 資料相加,從而生成參照圖像資料。 步驟3丁19中,解塊濾、波器24進行據波處理。解塊滤波器 24對自加法部23輸出之參照圖料料進行過濾而絲 失真。 步驟ST20中,圖框記憶體27記憶參照圖像資料。圖框託 憶體2 7記憶濾波處理後之參照圖像資料。 步驟灯21中,晝面内預測部31與移動預測補償部”分 別進行預測處理。即,畫面内預測部31進行畫面内預測模 式之畫面内預測處理,移動預測.補償部32進行畫面間預 測模式之移動預測·補償處理。預測處理之料將參照圖? 稍後閣述,藉由該處理,於成為候補之所有預測模式分別 進行預測處理,分㈣出成為候補之所有關模式下之成 本函數值。接下來,基於所算出之成本函數值, 畫面内預測處理與最佳畫面間預測處理,並將由所選擇之 預測處賴生叙制圖像資料與該成本聽及編碼參數 資訊供給至預測圖像·最佳模式選擇部3 3。 步驟ST22卜預測圖像.最佳模式選擇部^進行預測圖 像資料之選擇》預_像.最佳模式選擇部33基於自畫面 内預測部31及移動預測.補償部32輸出之各成本函數值, 而決定編瑪效率最佳之最佳模式。又,預測圖像最佳模 154151.doc -22· 201215156 $選擇部33選擇所決定之最佳模式之預測圖像資料,並供 給至減法部13與加法部23。該預測圖像資料如上所述,用 於步驟ST13、ST18之運算。 =驟咖中’預測圖像·最佳模式選擇部33進行編碼參 讯生成處理。預測圖像.最佳模式選擇部33將有關所 預測圓像資料之編財數資訊作為最佳模式之編碼 參數貝訊輸出至正交轉換部14與可逆編碼部… 步驟ST24巾,可逆編碼部16進行可逆編 碼部16對自量子化部15輸 〇 置于化資枓進行可逆編碼。 Ι,Γ 進行可變長度編碼或算術編碼等可逆編 可逆二仃資枓壓縮。此時’上述步驟ST23中,供給至 可逆編碼部1 6之編碼參數資 對量子化資料進行可逆編喝而生成之編碼:碼、;進而’於 訊中附加有編碼參數資訊等可逆編碼資料广之標頭資 步驟ST25中,儲存緩衝器 逆編碼部16輪出之編=理:存緩衝器 緩衝器17之編⑽_適 ^料於該儲存 解碼側。 §被讀取而經由傳輸路徑傳輸至 步驟㈣中’速率控制部18進行速率控制。速粋制部 8於由儲存緩衝器17儲存編竭位元 之量子化動作之速率,以使得儲存緩衝器17 == 或下溢》 w 7 T不產生溢流 其次,參照圖7之流程圖, 理進行說明。 、_ST2I中之預測處 154151.doc -23. 201215156 步驟ST34,畫面内預測部31進行畫面内__ 面内預測部31對處理對象之區塊之圖像以成為候補之所^ 預測模式進行畫面内預測處理。再者 ^ ^ ^ Α 畫面内預測處理 中,使用自加法部23供給之參照圖像資料。 量面内預測如 後述般以各預測模式進行畫面内預測處理, 式中之成本函數值。接下來,基於所算出之::各預測模 ^异®之成本函數值, 選擇編碼效率最高之畫面内預測處理。 步驟ST32中,移動預測.補償部32進行畫面間預測。移 動預測.補償部32使用記憶於圖框記憶體27中之濾波處理 後之參照圖像資料,以各移動補償區塊尺寸進行畫面間預 測處理。畫面間預測中’以各移動補償區塊尺寸進行畫面 間預測處理,#出各預測區塊中之成本函數值。接下來, 基於所算出之成本函數值選擇編碼效率最高之畫面間預測 其次,參照圖8之流程圖對圖7之步驟ST31中之畫面内預 測處理進行說明。 步驟ST41中,畫面内預測部31以各預測模式及轉換區塊 尺寸暫時進行畫面内預測處理。畫面内預測部31以各預測 模式及轉換區塊尺寸,暫時使用自加法部23供給之參照圖 像資料進行預測圖像資料之生成、並進行自預測誤差資料 之生成起至可逆編碼為止之處理。再者,畫面内預測部31 於各畫面内預測處理中,將有關畫面内預測處理之編碼參 數資訊輸出至正交轉換部14與可逆編碼部16 » 步驟ST42中,畫面内預測部3丨算出相對於各預測模式與 154151.doc • 24· 201215156 各轉換區塊尺寸之成本函數值。作為成本函數值,以由作 為H.264/AVC方式中之參照軟體之JM(J〇int Model,聯合模 型)決疋之方式’基於南複雜度(High Complexity)模式或低 複雜度(Low Complexity)模式之任一方法而進行。 即,高複雜度模式中’作為步驟ST41之處理,對各預測 模式及轉換區塊尺寸暫時進行至可逆編碼處理為止,對各 預測模式及轉換區塊尺寸算出如下式(丨)所示之成本函數 值。
Cost(Mode €Ω)=ϋ+λ·Κ 〇) Ω表示用以對該區塊或巨集區塊進行編碼之成為候補之 預測模式與轉換區塊尺寸之整體集合。D表示以預測模式 及轉換區塊尺寸進行編碼之情形之參照圖像與輸入圖像的 差能(失真)。R為包含正交轉換係數或編碼參數資訊等之 產生碼量,λ為作為量子化參數QP之函數而賦予之拉格朗 曰乘數(Lagrange multiplier)。 即’於進行高複雜度模式下之編碼時,為了算出上述參 數D及R,必需藉由成為候補之所有預測模式及轉換區塊 尺寸一次進行虛擬編碼處理,而需要更高之運算量。 另一方面,於低複雜度模式下,作為步驟3丁41之處理, 對成為候補之所有預測模式及轉換區塊尺寸,甚至算出預 測圖,之生成、及編碼參數資訊等標頭位元,且對各預測 模式算出如下式(2)所示之成本函數值。
Cost(Modeen)=D+QPtoQuant(QP).Header_Bit (2) Ω表示用於對該區塊或巨集區塊進行編碼之成為候補之 154151.doc •25· 201215156 預測模式與轉換區塊尺寸的整體集合^ D表示以預測模式 » 與轉換區塊尺寸進行編碼之情形之參照圖像與輸入圖像的 差能(失真)。Header_Bit為相對於預測模式與轉換區塊尺 寸之標頭位元,QPt〇Quant為作為量子化參數Qp之函數而 賦予之函數》 即,於低複雜度模式下,必需關於各個預測模式及轉換 區塊尺寸進行預測處理,但解碼圖像並無需進行預測處 理,因此能夠以較高複雜度模式低之運算量實現。 步驟ST43中,4面内預測部3 i決定最佳畫面内預測處 理。畫面内預測部31基於步驟8丁42中所算出之成本函數 值,自該等之中選擇成本函數值為最小值之一種晝面内預 測處理而決定作為最佳畫面内預測處理。 其次,參照圖9之流程圖,對圖7之步驟sn2之畫面間預 測處理進行說明。 ……π丨只口r 蚵谷移動補償區姨 寸暫時進行畫面間預測處理1動_.補償扣以各 動補償區塊尺寸暫時使用編碼處理對象區塊之圖像資料 參照圖像資料進行移動預測。移動預測.補償㈣基於 檢測之移動向量進行參照圖像資 圖像資料之生成等》再者,/叙移動補償而進行預 間預測處理中,將有關畫面間預 畺 Φ 5 -r ^ . 處之編碼參數資訊. 出至正交轉換部14與可逆編碼部Μ。 步驟ST52中,移動預測·補 償區塊尺寸之成本函數值。移動相對於各移& 移動預測.補償部32使用上3 154151.doc • 26 · 201215156 式(1)或式(2)進行成本函數值之算出。成本函數值之算出 時,使用包含編碼參數資訊等之產生碼量。再者,相對於 晝面間預測模式之成本函數值之算出亦包含H 264/avc方 式中所決定之跳過模式(Skip M〇de)及直接模式 Mode)之成本函數值的評估。 步驟ST53中,移動預測.補償部32決定最佳晝面間預測 處理。移動預測.補償部32基於步驟ST52中所算出之成本 函數值’自該等之令選擇成本函數值為最小值之一種畫面 間預測處理而決定最佳晝面間預測處理。 其··人,參照圖10之流程圖,對於圖6中之步驟$ T2 3之編 碼參數資訊生成處理,說明畫面内預測處理之情形。編碼 參數資訊如上所述由晝面内預測部3 1生成。又,由預測圖 像·最佳模式選擇部33選擇最佳模式時,亦可由預測圖像. 最佳模式選擇部33生成與所選擇之預測處理對應之編碼參 數資訊。 步驟ST61中,晝面内預測部31判別巨集區塊尺寸是否為 16x16像素。晝面内預測部31於巨集區塊尺寸為16χ16像素 時進入步驟ST62 ’於不為16x16像素時進入步驟ST63。 步驟ST62中,畫面内預測部31設定16xl6像素中之轉換 區塊尺寸資訊而進入步驟ST65。晝面内預測部31於例如將 由正交轉換部14進行KL轉換時之轉換區塊尺寸設為4Χ4像 素時’將表示轉換區塊尺寸之轉換區塊尺寸資訊設定為 「〇」。又,於將由晝面内預測部31於正交轉換部14進行 KL轉換時之轉換區塊尺寸设為8x8像素時,將轉換區塊尺 154151.doc •27· 201215156 寸資訊設定為「1」,設為16x16像素時設定為「2」。 步驟ST63中,畫面内預測部31判別巨集區塊尺寸是否為 8x8像素。晝面内預測部31於巨集區塊尺寸為8x8像素時進 入步驟ST64,於不為8x8像素時進入步驟ST65。 步驟ST64中,畫面内預測部31設定8x8像素中之轉換區 塊尺寸資訊而進入步驟ST65。畫面内預測部3 1於例如將由 正交轉換部14進行KL轉換時之轉換區塊尺寸設為4M像素 時,將轉換區塊尺寸資訊設定為「0」。又,晝面内預測部 31於將由正交轉換部14進行KL轉換時之轉換區塊尺寸設 為8x8像素時,將轉換區塊尺寸資訊設為r丨」。 步驟ST65中,畫面内預測部3 1生成編碼參數資訊。晝面 内預測部3 1使用表示為晝面内預測之資訊、巨集區塊尺 寸、轉換區塊尺寸資訊、預測模式、巨集區塊内之區塊位 置等而構成編碼參數資訊。 其次,參照圖11之流程圖,對正交轉換處理進行說明。 步驟ST71中,正交轉換部14判別是否為畫面内預測。正交 轉換部14於由編碼參數資訊表示為晝面内預測時進入步驟 ST72 ’不表示為畫面内預測時進入步驟ST8工。 步驟ST72 t,正交轉換部14判別巨集區塊尺寸是否為 16χ!6像素。正交轉換部14於由編碼參數資訊表示巨集區 塊尺寸為16M6像素時進入步驟ST73,$表示為“Μ像素 時進入步驟ST78。 、 步驟ST73中,正交轉換部14判別轉換區塊尺寸是否為 4x4像素。正交轉換部14於由編碼參數資訊表示轉換區塊 I5415I.doc • 28 · 201215156 =寸為4x4像素時進人步_74,不表示⑽罐 步驟ST75。 」 74中,正交轉換部14進行4x4正交轉換處理。正 '轉奐P14使用根據預測模式與區塊位置而預先學習之基 準對每個4X4像素之區塊進行KL轉換。此處,16xl6像素 之區塊中’ ϋ包含16個4><4像素之區塊故而進行Μ次以 轉換‘進而,正交轉換部14自對4Μ像素之區塊進行KL轉 、而獲得之係數中選擇最低頻率成分係數,並對所選擇之 4x4之係數使用與預測模式對應之基準進行kl轉換。正交 轉換。卩14將對最低頻率成分係數進行KL轉換而獲得之係 數、與除了最低頻率成分係數以外之其他係數輸出至量子 化部15»即,圖5所示之正交轉換部14之係數選擇部148選 擇自4MKL轉換部144、146輸出之係數而輸出至量子化部 15。 步驟ST75中,正交轉換部14判別轉換區塊尺寸是否為 8 8像素正父轉換部14於由編碼參數資訊表示轉換區塊 尺寸為8x8像素時進入步驟ST76,不表示為8x8像素時進入 步驟ST77。 步驟ST76中’正交轉換部14進行8x8正交轉換處理。正 交轉換部14使用根據預測模式與區塊位置而預先學習之基 準對每個8x8像素之區塊進行KL轉換。此處,ι6χ16像素 之區塊中’因包含四個8x8像素之區塊,故而進行四& KL 轉換。進而’正交轉換部14自對8x8像素之區塊進行KL轉 換而獲得之係數中選擇最低頻率成分係數,並對所選擇之 154151.doc -29- 201215156 2x2之係數使用根據對應於預測模式之基準進rkl轉換。 正交轉換部14將對最低頻率成分係數進行KL轉換而獲得 之係數、與& 了最低頻率成分係冑以外之其他係數輸出至 量子化σρ 15。gp,圖5所示之正交轉換部i 4之係、數選擇部 i48選擇自8x8KL轉換部142與2><21^1^轉換部143輸出之係數 而輸出至量子化部15。 步驟ST77中,正交轉換部14進行16χ16正交轉換處理。 正交轉換部14使用根據預測模式而預先學習之基準進行 16x16像素之區塊之KL轉換,並將所獲得之係數輸出至量 子化部15。即,圖5所示之正交轉換部14之係數選擇部148 選擇自16X16KL轉換部141輸出之係數而輸出至量子化部 15 〇 若自步驟ST72進入步驟ST78,則正交轉換部14判別轉 換區塊尺寸是否為4x4像素。正交轉換部14於由編碼參數 資afl表示轉換區塊尺寸為4x4像素時進入步驟ST79,不表 示為4x4像素時進入步驟ST80。 步驟ST79中,正交轉換部14進行4x4正交轉換處理。正 父轉換部14使用根據預測模式與區塊位置而預先學習之基 準對每個4x4像素之區塊進行KL轉換。此處,8x8像素之 區塊中,因包含四個4x4像素之區塊,故而進行四&Kl轉 換。進而’自對4x4像素之區塊進行KL轉換而獲得之係數 中選擇最低頻率成分係數,並對所選擇之2x2之係數使用 對應於預測模式之基準進行KL轉換。正交轉換部14將對 最低頻率成分係數進行KL轉換而獲得之係數、與除了最 154151.doc •30· 201215156 低頻率成分係數以外之其他係數輸出至量子化部丨5。即, 圖5所示之正交轉換部14之係數選擇部148選擇自4x4KL轉 換部144與2x2KL轉換部146輸出之係數而輸出至量子化部 15 ° 步驟ST80中,正交轉換部14以8><8像素之區塊單位進行 . 正交轉換。正交轉換部14使用根據預測模式而預先學習之 基準進行8x8像素之區塊之KL轉換,並將所獲得之係數輸 出至量子化部15。即,圖5所示之正交轉換部14之係數選 擇部148選擇自8x8KL轉換部142輸出之係數而輸出至量子 化部15。 步驟ST81中,正交轉換部14進行離散餘弦轉換(dct^ 正交轉換部14將進行離散餘弦轉換而獲得之係數輸出至量 子化邙15。即,圖5所示之正交轉換部〗4之係數選擇部丨48 選擇自DCT部147輸出之係數而輸出至量子化部15。 圖12係用以對正交轉換動作進行說明之圖巨集區塊尺 寸如圖12之(A)所示般為16><16像素,轉換區塊尺寸為4χ4 像素時,如圖12之(Β)所示,於巨集區塊内包含16個轉換 區塊。再者,區塊内之數字表示區塊位置1〇^。正交轉換 部14之4MKL轉換部144對於各轉換區塊,使用對各區塊 之預測模式與區塊位置最佳化之基準進行KL轉換,如圖 2之(C)所示般生成母個區塊之係數。進而,4X4kl轉換部 145使用各區塊中之最低頻率成分係數(以斜線表示”如圖 12之(D)所示構成4x4之區塊。4x4KL轉換部145對該區塊 使用根據預測模式而最佳化之基準來進行KL轉換,如圖 I54151.doc •31· 201215156 12之(E)所示般生成每個區塊之係數。正交轉換部14將圖 12之(E)所示之係數、與圖12之((:)中之除了最低頻率成分 係數以外之其他係數輸出至量子化部15。 巨集區塊尺寸如圖12之(F)所示般為8x8像素,若轉換區 塊尺寸為4x4像素,則如圖12之((5)所示,於巨集區塊内包 含四個轉換區塊。再者’區塊内之數字表示區塊位置 loc。正交轉換部14之4MKL轉換部144對於各轉換區塊, 使用對各區塊之預測模式與區塊位置最佳化之基準進行 KL轉換,如圖12之(H)所示般生成每個區塊之係數。進 而,2x2KL轉換部146使用各區塊中之最低頻率成分係數 (以斜線表示),如圖12之(I)所示般構成2x2之區塊。2x2KL 轉換部146對該區塊使用根據預測模式而最佳化之基準進 行KL轉換,如圖12之(J)所示般生成每個區塊之係數。正 交轉換部14將圖12之(J)所示之係數、與圖丨2之(H)中之除 了最低頻率成分係數以外之其他係數輸出至量子化部15。 如此’根據本案發明之圖像編碼裝置及方法,圖像資料 之編碼時所進行之正交轉換中,使用根據巨集區塊内之轉 換區塊之區塊位置而預先設定之基準來進行正交轉換。因 此’可進行根據區塊位置而最佳化之轉換,從而可改善編 碼效率。又,使用不僅根據區塊位置還根據預測模式而預 先設定之基準來進行正交轉換,藉此可進行進一步最佳化 之正交轉換,從而可進一步改善編碼效率。又,藉由改盖 編碼效率,即便不增加例如編碼位元流之資料量亦可改善 晝質。 154151.doc •32- 201215156 <4.圖像解碼裝置之構成> 對輸入圖像進行編碼而生成之編碼位元流係經由特定之 傳輸路徑或記錄介質等而供給至圖像解碼裝置並進行解 碼。 圖13表示圖像解碼裝置之構成。圖像解碼裝置5〇包含儲 存緩衝器51、可逆解碼部52、逆量子化部53、逆正交轉換 部54、加法部55、解塊濾波器56、晝面重排序緩衝器57、 數位/類比轉換部(D/A轉換部)58。進而,圖像解碼裝置5〇 包含圖框δ己憶體61、畫面内預測部62、移動補償部63、選 擇器64。 儲存緩衝器51儲存傳輸而來之編碼位元流。可逆解碼部 52以與圖1之可逆編碼部16之編碼方式對應之方式將自儲 存緩衝器51供給之編碼位元流解碼。 /可逆解碼部52將對編碼位元流之標财料行解碼而獲 得之編碼參數資訊輸出至畫面内預測部或移動補償部 63、解塊濾波器心又,可逆解碼部52制解碼對象之區 塊與已完成解碼之鄰接區塊之移動向量來設定預測移動向 f之候補。可稍碼部52基於將編聽元流可逆解碼而獲 仔之預測移動向量選擇資訊,自預測移動向量之候補中選 擇移動向量’將所選擇之移動向量作為預測移動向量。 可逆解碼52對將編竭位元流可逆解碼而獲得之差分 :動向量加上預測移動向量而算出解碼對象之區塊之移動 向量,並輸出至移動補償部63。 逆量子化部53以與圖 1之量子化部15之量子化方式對應 154151.doc • 33 · 201215156 之方式將由可逆解碼部52解碼之量子化資料逆量子化。逆 正交轉換部54以與圖1之正交轉換部14之正交轉換方式對 應之方式將逆量子化部53之輸出逆正交轉換並輸出至加法 ^ 55 « 加法部5 5將逆正交轉換後之資料與自選擇器料供給之預 測圖像資料相加而生成解碼圖像資料並輸出至解塊濾波器 56與畫面内預測部62。 解塊濾波器56對自加法部55供給之解碼圖像資料進行濾 波處理,去除區塊失真之後供給至圖框記憶體61並儲存, 並且輸出至畫面重排序緩衝器57 » 畫面重排序緩衝器57進行圖像之重排序。即,將藉由圖 1之畫面重排序緩衝器12為了編碼之順序而重排序之圖框 的順序重排序為原本之顯示順序,並輸出至D/a轉換部 58 〇 D/A轉換部58對自畫面重排序緩衝器57供給之圖像資料 進行D/Α轉換’並輸出至未圖示之顯示器,藉此顯示圖 像。 圖框記憶體61保持自解塊濾波器24供給之濾波處理後之 解碼圖像資料。 晝面内預測部62基於自可逆解碼部52供給之編碼參數資 訊進行預測圖像之生成,並將所生成之預測圖像資料輸出 至選擇器64。 移動補償部63基於自可逆解碼部52供給之編碼參數資訊 或移動向量進行移動補償,生成預測圖像資料並輸出至選 154151.doc -34· 201215156 擇器64。即,移動補償部63基於自可逆解碼部52供給之移 動向量及參照圖框資訊,對由參照圖框資訊所示之參照圖 像基於移動向量進行移動補償,從而生成移動補償區塊尺 寸之預測圖像資料。 選擇器64將由畫面内預測部62生成之預測圖像資料供給 至加法部55。又,選擇器64將由移動補償部63生成之預測 圖像資料供給至加法部5 5。 <5·逆正交轉換部之構成> 圖14表不逆正交轉換部54之構成。逆正交轉換部54包含 16X16KL逆轉換部 541、2x2KL逆轉換部 542、、8x8kl 逆轉換部 543、4MKL 逆轉換部 544、546、mcT(inverse discrete cosine transf〇rm,逆離散餘弦轉換)部547及資料 選擇部548。 16X16KL逆轉換部541進行與由圖5所示之16xl6KL轉換 4 141進行之〖1^轉換對應的1(^逆轉換。16\161〇^逆轉換部 541使用與自可逆解碼部52供給之最佳模式之編碼參數資 訊所示之預測模式(最佳預測模式)對應的基準,進行自逆 量子化部53輸出之逆量子化後資料之KL逆轉換。i6x16kl 逆轉換。卩541將藉由進行KL逆轉換而獲得之圖像資料輸出 至資料選擇部548。 2 2KL逆轉換部542進行與由圖5所示之2x2KL轉換部143 進行之KL轉換對應的!〇^逆轉換。2><2艮]1逆轉換部542使用 與最佳模式之編碼參數資訊所示之預測模式對應的基準, 進行自逆量子化部53輸出之逆量子化後資料之kl逆轉 15415l.doc -35· 201215156 換。2X2KL逆轉換部542將藉由進行KL逆轉換而獲得之最 低頻率成分係數輸出至8><81!:[逆轉換部543。 8X8KL逆轉換部543進行與由圖5所示之8><8kl轉換部Mg 進行之KL轉換對應之KL逆轉換。8x8KL逆轉換部⑷基於 自可逆解碼部52供給之最佳模式之編碼參數資訊而進行 KL逆轉換。例如,8x8KL$轉換部M3於巨集區塊尺寸為 16X16像素時’使用對應於最佳模式之編碼參數資訊所示 之預測模式與區塊位置之基準,進行自2x2KL逆轉換部 542輸出之最低頻率成分係數與自逆量子化部^輸出之逆 量子化後資料的KL逆轉換。8x8KL逆轉換部543將藉由進 行KL逆轉換而獲得之圖像資料輸出至資料選擇部548。 又,8X8KL逆轉換部543於巨集區塊尺寸為8χ8像素時,使 用對應於預測模式與區塊位置之基準,進行自逆量子化部 53輸出之逆量子化後資料之KL逆轉換,並將所獲得之圖 像資料輸出至資料選擇部548 » 4MKL逆轉換部544進行與由圖5所示之4χ4κχ轉換部145 進行之KL轉換對應的KL逆轉換。4x4KL逆轉換部544使用 與最佳模式之編碼參數資訊所示之預測模式對應之基準, 進行自逆量子化部53輸出之逆量子化後資料之KL逆轉 換。4MKL逆轉換部544將藉由進行KL逆轉換而獲得之最 低頻率成分係數輸出至4x4KL逆轉換部546。 2><2KL逆轉換部545進行與由圖5所示之2x2KL轉換部146 進行之KL轉換對應的KL逆轉換。2x2KL逆轉換部545使用 與最佳模式之編碼參數資訊所示之預測模式對應之基準, 154151.doc -36· 201215156 進行自逆量子化部53輸出之逆量子化後資料之kl逆轉 換。2x2KL逆轉換部545將藉由進行KL逆轉換而獲得之最 低頻率成分係數輸出至4x4KL逆轉換部546。 4x4KL逆轉換部546進行與由圖5所示之4x4KL轉換部144 進行之KL轉換對應之KL逆轉換。4x4KL逆轉換部546基於 自可逆解碼部52供給之最佳模式之編碼參數資訊而進行 KL逆轉換。例如,4x4KL逆轉換部546於巨集區塊尺寸為 16 X 16像素時,使用對應於最佳模式之編碼參數資訊所示 之預測模式與區塊位置之基準,進行自4X4KL逆轉換部 544輸出之最低頻率成分係數與自逆量子化部兄輸出之逆 量子化後資料之KL逆轉換。4x4KL逆轉換部546將藉由進 行KL逆轉換而獲得之圖像資料輸出至資料選擇部548。 又,4X4KL逆轉換部546於巨集區塊尺寸為8x8像素時,使 用對應於預測模式與區塊位置之基準,進行|2x2KL逆轉 換部545輸出之最低頻率成分係數與自逆量子化部幻輸出 之逆量子化後資料之KL逆轉換。4x4KL逆轉換部546將藉 由進行KL逆轉換而獲得之圖像資料輸出至資料選擇部 548。 IDCT部547使用自逆量子化部53輸出之逆量子化後資料 進行逆離散餘弦轉換,並將所獲得之圖像資料輸出至資料 選擇部548。 資料選擇部548基於編碼參數資訊,進行自i &丨逆 轉換部541、8x8KL逆轉換部543、4X4KL逆轉換部546、 IDCT部547輸出之圖像資料的選擇。資料選擇部548將所 154151.doc •37- 201215156 選擇之圖像資料作為預測誤差資料而輸出至加法部55。 <6.圖像解碼裝置之動作> 其次’參照圖15之流程圖,對由圖像解碼裝置5〇進行之 圖像解瑪處理動作進行說明。 步驟ST91中’儲存緩衝器51儲存傳輸而來之編碼位元 流。步驟ST92中,可逆解碼部52進行可逆解碼處理。可逆 解碼部52對自儲存緩衝器51供給之編碼位元流進行解碼。 即,獲得藉由圖1之可逆編碼部16而編碼之各晝面之量子 化資料。又,可逆解碼部5 2進行編碼位元流之標頭資訊中 所包含之編碼參數資訊之可逆解碼,並將所獲得之編碼參 數資訊供給至解塊濾波器56或選擇器64。進而,可逆解碼 部52於編碼參數資訊為有關晝面内預測模式之資訊之情形 時,將編碼參數資訊輸出至畫面内預測部62。又,可逆解 碼部52於編碼參數資訊為有關畫面間預測模式之資訊之情 形時,將編碼參數資訊輸出至移動補償部63。 步驟ST93令,逆量子化部53進行逆量子化處理。逆量子 化部53以與圖1之量子化部15之特性對應之特性對藉由可 逆解碼部52而解碼之量子化資料進行逆量子化。 步驟ST94中’逆正父轉換部54進行逆正交轉換處理。逆 正交轉換部54對來自逆量子化部53之逆量子化後資料進行 與圖1之正交轉換部14之正交轉換對應之逆正交轉換。 步驟ST95_,加法部55進行解碼圖像資料之生成。加法 部55將藉由進行逆正交轉換處理而獲得之預測誤差資料與 由後述之步驟ST99所選擇之預測圖像資料相加來生成解碼 154151.doc -38- 201215156 圖像資料。藉此,原本之圖像得以解碼。 步驟ST96中,解塊濾波器56進行濾波處理。解塊滤波器 56進行自加法部55輸出之解碼圖像資料之渡波處理,並去 除解碼圖像中所包含之區塊失真。 步驟ST97中,圖框記憶體61進行解碼圖像資料之記憶處 理〇 步驟ST98中,畫面内預測部62與移動補償部63進行預測 處理。畫面内預測部62與移動補償部63對應於自可逆解碼 部5 2供給之編碼參數資訊而分別進行預測處理。 即’表示自可逆解碼部52供給之編碼參數資訊為畫面内 預測之情形時’晝面内預測部62基於編碼參數資訊而進行 畫面内預測處理,從而生成預測圖像資料。又,表示自可 逆解碼部52供給之編碼參數資訊為畫面間預測之情形時, 移動補償部63基於編碼參數資訊而進行移動補償,從而生 成預測圖像資料。 步驟ST99中,選擇器64進行預測圖像資料之選擇。即, 選擇器64選擇自畫面内預測部62供給之預測圖像資料與由 移動補償部63生成之預測圖像資料而供給至加法部“,並 如上所述,於步驟ST95中與逆正交轉換部54之輸出相加。 步驟stioo中,晝面重排序緩衝器57進行圖像重排序。 即,畫面重排序緩衝器57將藉由圖丨之圖像編碼裝置丨❾之 晝面重排序緩衝器12為了編碼而重排序之圖框的順序重排 序為原本之顯示順序。 步驟ST101中,D/A轉換部58對來自畫面重排序緩衝器 154151.doc -39· 201215156 57之圖像資料進行D/A轉換。該圖像被輸出至未圖示之顯 示器,且顯示有圖像。 其次’使用圖16所示之流程圖對逆正交轉換處理進行說 明。步驟ST111中,逆正交轉換部54判別是否為畫面内預 測。逆正交轉換部54判別例如基於由可逆解碼部52自編碼 位元流取出之編碼參數資訊而進行解碼的區塊是否為晝面 内預測。逆正交轉換部54於表示編碼參數資訊為畫面内預 測時進入步驟ST11 2,於不表示為晝面内預測時,即為晝 面間預測時進入步驟ST 121。 步驟ST112中,逆正交轉換部54判別巨集區塊尺寸是否 為16x1 6像素。逆正交轉換部54於表示以編碼參數資訊巨 集區塊尺寸為16x16像素時進入步驟ST113,於不表示為 16><16像素時進入步驟8丁118。 步驟ST113中,逆正交轉換部54判別轉換區塊尺寸是否 為4x4像素。逆正交轉換部54於編碼參數資訊中之轉換區 塊尺寸資訊為「〇」、轉換區塊尺寸為4x4像素時進入步驟 ST114’於不為「〇」時進入步驟ST115。 --w ar ^ ^ 5t ^ ^ 理。逆正交轉換部54使用根據預測模式與區塊位置 學習之基準來進行4x4KL逆轉換。巨集區塊尺寸為 像素時,、蝙碼係自16次紅轉換與進行紅轉換而獲 數中選擇最低頻率成分係數來進行灯轉換n正 交轉換部54❹與㈣^龍之基準進行最低頻率成八 係數之逆量子化後f料之KL逆轉換。又,逆正交轉^ 154151.doc 201215156 54對包含使用該κχ逆轉換而獲得之最低頻率成分係數與 其他成分係數的16個區塊,使用對應於預測模式與區塊位 置之基準來進行KL逆轉換。逆正交轉換部54將藉由進行 KL逆轉換而獲得之預測誤差資料輸出至加法部55。即, 圖14所示之逆正交轉換部54之資料選擇部548選擇藉由使 用4x4KL逆轉換部544之輸出並由4x4KL逆轉換部546進行 KL逆轉換而獲得的資料並輸出至加法部55。 步驟ST115中’逆正交轉換部54判別轉換區塊尺寸是否 為8x8像素。逆正交轉換部54於編碼參數資訊中之轉換區 塊尺寸資訊為「1」、轉換區塊尺寸為8x8像素時進入步驟 ST116,於不為「1」時進入步驟ST117。 步驟ST116中’逆正交轉換部54進行8x8逆正交轉換處 理。逆正交轉換部54使用根據預測模式與區塊位置而預先 學習之基準進行8x8KL逆轉換。巨集區塊尺寸為16><16像 素時,編碼係自四次KL轉換與藉由進行KL轉換而獲得之 係數中選擇最低頻率成分係數來進行KL轉換。因此,逆 正交轉換部54使用與預測模式對應之基準,進行最低頻率 成分係數之逆量子化後資料之KL逆轉換。又,逆正交轉 換部54對包含藉由該KL逆轉換而獲得之最低頻率成分係 數與其他成分之係數的四個區塊,使用對應於預測模式與 區塊位置之基準來進行KL逆轉換。逆正交轉換部54將藉 由進行KL逆轉換而獲得之預測誤差資料輸出至加法部 55。即,圖14所示之逆正交轉換部54之資料選擇部548選 擇藉由使用2><2KL逆轉換部542之輪出由8x8KL逆轉換部 154151.doc -41 ^ 201215156 543進行KL逆轉換而獲得之資料並輸出至加法部55。 步驟ST117中’逆正交轉換部54進行16x16逆正交轉換處 理。逆正交轉換部54使用根據預測模式而預先學習之基準 進行16X16KL逆轉換。逆正交轉換部54將藉由進行KL逆轉 換而獲得之預測誤差資料輸出至加法部55。即,圖14所示
之逆正交轉換部54之資料選擇部548選擇藉由由16x16KL 逆轉換部541進行KL逆轉換而獲得之資料並輸出至加法部 55 » 若自步驟ST112進入步驟ST118,則逆正交轉換部54判別 轉換區塊尺寸是否為4x4像素。逆正交轉換部54於編碼參 數資讯中之轉換區塊尺寸資訊為「〇」、轉換區塊尺寸為 4x4像素時進入步驟ST119,不為「〇」時進入步驟 ST120。 步驟ST119中,逆正交轉換部54進行4χ4逆正交轉換處 理》逆正交轉換部54使用根據預測模式與區塊位置而預先 學習之基準進行4x4KL逆轉換處理。巨集區塊尺寸為8χ8 像素時,編碼係自四次KL轉換與進行尺乙轉換而獲得之係 數中選擇最低頻率成分係數來進行KL轉換。因此,逆正 交轉換部54使用與預測模式對應之基準,進行最低頻率成 分係數之逆量子化後資料之KL逆轉換。又,逆正交轉換 邛54對包含藉由該!^]^逆轉換而獲得之最低頻率成分係數 與其他成分之係數的四個區塊,使用對應於預測模式與區 塊位置之基準來進行KL逆轉換。逆正交轉換部54將藉由 進行KL逆轉換而獲得之預測誤差資料輸出至加法部55。 15415l.doc •42- 201215156 即,圖14所示之逆正交轉換部54之資料選擇部548選擇藉 由使用2X2KL逆轉換部545之輸出由4MKL逆轉換部546進 行KL逆轉換而獲得之資料並輸出至加法部55。 步驟ST120中,逆正交轉換部54進行8χ8逆正交轉換處 理。逆正父轉換部54使用根據預測模式而預先學習之基準 來進行8x8KL逆轉換。逆正交轉換部54將藉由進行KL逆轉 換而獲得之預測誤差資料輸出至加法部55。即,圖丨4所示 之逆正交轉換部54之資料選擇部548選擇藉由8x8KL逆轉 換部543進行KL逆轉換而獲得之資料並輸出至加法部55。 步驟ST121中,逆正交轉換部54進行逆離散餘弦轉換 (IDCT)。逆正交轉換部54將藉由進行逆離散餘弦轉換而獲 得之係數輸出至加法部55。即,圖14所示之逆正交轉換部 54之資料選擇部548選擇自IDCT部547輸出之資料而輸出 至加法部5 5 » 圖17係用以對逆正交轉換動作進行說明之圖,例示由圖 12之正交轉換動作生成之轉換係數之逆正交轉換。 例如,設為巨集區塊尺寸為16χ16像素且轉換區塊尺寸 為4x4像素》於此情形時,4MKL逆轉換部544使用與最佳 模式之編碼參數資訊所示之預測模式對應之基準來進行圖 17之(A)所示之最低頻率成分係數之kl轉換後資料(逆量子 化資料)的KL逆轉換^ 4x4KL逆轉換部544藉由該KL逆轉換 而生成圖17之(B)所示之最低之頻率成分之係數。如圖17 之(C)所示,4MKL逆轉換部546將最低頻率成分係數與其 他K L轉換後資料(逆量子化資料)恢復為每個區塊之係數。 154151.doc • 43· 201215156 進而,如圖17之(D)所示,4x4KL逆轉換部546使用對應於 編碼參數資訊所示之預測模式與區塊位置之基準對16個 4M區塊之每個進rkl逆轉換,從而生成圖17之(£)所示之 預測誤差資料。資料選擇部548選擇所生成之預測誤差資 料並輸出至加法部5 5。 又’設為巨集區塊尺寸為8x8像素且轉換區塊尺寸為4x4 像素。於此情形時,2x2KX逆轉換部545使用與最佳模式 之編碼參數資訊所示之預測模式對應之基準,進行圖丨了之 (F)所不之最低頻率成分係數之KL轉換後資料(逆量子化資 料)之KL逆轉換。2x2KL逆轉換部545藉由該KL逆轉換而生 成圖1 7之(G)所示之最低頻率成分係數。如圖丨7之(H)所 示,4x4KL逆轉換部546將最低頻率成分係數與其#KL轉 換後資料(逆量子化資料)恢復為每個區塊之係數。進而, 如圖17之⑴所示,4x4KL逆轉換部546使用對應於編碼參 數資訊所示之預測模式與區塊位置之基準而對四個4x4區 塊之每個進行KL逆轉換,從而生成圖17之⑺所示之預測 誤差資料》資料選擇部548選擇所生成之預測誤差資料並 輸出至加法部55。 其··人,參照圖18之流程圖,對圖15之步驟ST98之預測處 理進行說明。 步驟ST131中,可逆解碼部52判定對象區塊是否被畫面 内編碼。可逆解碼部52於藉由進行可逆解碼而獲得之編碼 參數資訊為畫面内預測之資訊時,將編碼參數資訊供給至 畫面内預測部62並進入步驟ST132。又,可逆解碼部52於 154151.doc 44· 201215156 編碼參數資訊不為晝面内預測之資訊時,將編碼參數資訊 供給至移動補償部63並進入步驟ST133。 步驟ST132中,畫面内預測部62進行畫面内預測處理。 畫面内預測部62使用自加法部55供給之解碼圖像資料與編 碼參數資訊而進行晝面内㈣,從而生成賴圖像資料。 步驟ST133中,移動補償部63進行畫面間預測處理。移 動補償部63基於來自可逆解碼部52之編碼參數資訊或移動 向量而今進行自圖框記憶體6丨供給之解碼圖像資料之移動 補償。進而’#動補償部63將藉由移動補償而生成之預測 圖像資料輸出至選擇器64。 如此’本案發明之圖像解碼裝置及方法中,對藉由使用 根據區塊位置而預先設定之基準進行正交轉換而獲得之係 數資料進行處理而生成之編碼位元流的解碼中,使用根據 由編碼位元流巾所包含之編財數資簡^之巨集區塊内 之區塊位置而縣設定之基準來進行逆正交轉換。因此, 可將正交轉換後之係數資料恢復為正交轉換前之預測誤差 資料,因此即便❹與巨㈣塊内之區塊位置對應之基準 來進行正交轉換,亦可恢復為正交轉換前之預測誤差資 料拉又’即便使用與預測模式對應之基準來進行編碼,亦 用根據編碼參數資訊所示之預測模式而預先設定 誤«料將正交轉換後之絲資料回到正交轉換前之預測 <7.基準之學習動作> 其次,對藉由學習動作預先生成於正交轉換部14與逆正 154151.doc -45- 201215156 茭轉換部54使用之基準的基準生成部進行說明。圖19表示 基準之學習動作流程圖,基準生成部使用為了學習用而準 備之圖像進行圖19所示之處理來生成基準。再者,作為學 習用之圖像’以藉由圖像之内容而不會於學習中引起偏移 之方式,儘量使用不同之多個圖像。 步驟ST141中’基準生成部判別是否殘留未用於學習之 圖像。基準生成部於殘留未用於學習之圖像時進入步驟 ST142 ’於使用所有圖像進行學習時進入步驟ST152 〇 步驟ST142中’基準生成部判別是否殘留未用於學習之 巨集區塊。基準生成部於用於學習之圖像中殘留未用於學 習之巨集區塊時進入步驟ST143 ’於使用所有巨集區塊進 行學習時回到步驟ST141。 步驟ST143中,基準生成部判別巨集區塊尺寸是否為 16x16像素。基準生成部於巨集區塊尺寸為16><16像素時進 入步驟ST144,於巨集區塊尺寸不為16><16像素時進入步驟 ST148 » 步驟ST144中,基準生成部生成16χ16預測誤差資料。基 準生成部進行畫面内預測而生成16χ16像素之預測誤差資 料。 步驟ST145中,基準生成部算出4x4正交轉換之對稱矩 陣。基準生成部將16x16預測誤差資料分割成作為4χ4像素 之16個轉換區塊,對預測模式與巨集區塊内之轉換區塊之 區塊位置之每個算出對稱矩陣Μ。基準生成部排列4χ4像 素之轉換區塊之預測誤差資料而作為丨6次之向量,算出】6 154I51.doc •46- 201215156 次之向量之平均與各 「q」進行式(3)之運算 [數1] 之差°基準生成部將該差作為 而求出對稱矩陣!^。 M(mdt,mdi,l〇c) = ^qaql ...(3) a=num 再者,式(3)中,「mdt」為可判別巨集區塊尺寸與轉換 品龙尺寸之轉換模式Ll「mid」為畫面内預測之預測模 式。「1〇。」為巨集區塊内之轉換區塊之區塊位置〜… 為學習次數。又’「T」表示為轉置矩陣。 步驟ST146中,基準生成部算出8χ8正交轉換之對稱矩 陣基準生成部將16χ 16預測誤差資料分割成作為8χ8像素 之四個轉換區塊’對預測模式與巨集區塊内之轉換區塊之 區塊位置之每個算出對稱矩陣基準生成部排列8巧像 素之轉換區塊之預測誤差資料而作為64次之向量,算出Μ _人之向罝之平均與各向量之差。基準生成部將該差作為 「q」進行式(3)之運算而求出對稱矩陣Μ。 步驟ST147中’基準生成部算出16χ16正交轉換之對稱矩 陣。基準生成部對每個預測模式排列16χ16像素之轉換區 塊之預測誤差資料而作為256次之向量,算出256次之向量 之平均與各向量之差。基準生成部將該差作為「q」進行 式(3)之運算,從而對每個預測模式求出對稱矩陣μ。 若自步驟ST143進入步驟ST148,則基準生成部判別巨 集區塊尺寸是否為8x8像素。基準生成部於巨集區塊尺寸 154151.doc •47- 201215156 為8x8像素時進入步驟ST149,於巨集區塊尺寸不為8χ8像 素時進入步驟ST142 » 步驟ST149中,基準生成部生成8x8預測誤差資料。基準 生成部進行畫面内預測而生成8 x 8像素之預測誤差資料。 步驟ST150中,基準生成部算出4χ4正交轉換之對稱矩 陣》基準生成部將8x8預測誤差資料分割成作為4χ4像素之 四個轉換區塊,對預測模式與巨集區塊内之轉換區塊之區 塊位置之每個算出對稱矩陣Μ ^基準生成部排列4χ4像素 之轉換區塊之預測誤差資料作為16次之向量,算出16次向 量之平均與各向量之差。基準生成部將該差作為「q」進 行式(3)之運算而求出對稱矩陣μ。 步驟st151中,基準生成部算出8χ8正交轉換之對稱矩 陣。基準生成部對每個預測模式排列8χ8像素之轉換區塊 之預測誤差資料作為64次之向量,算出64次之向量之平均 與各向量之差基準生成部將該差作為「q」進行式之 運算,從而對每個預測模式求出對稱矩陣Μ^ 步驟ST152中’基準生成部算出KL轉換之基準。基準生 成部求出與各對稱矩陣M之固有值對應之固有向量,以固 有值之大小順序排列固有向量,設為KL轉換之基準。 ’則可生成由16x16KL轉換部141、 X2KL轉換部143、146、4MKL轉換部 若進行此種處理 8x8KL轉換部 142、2 M4、145進行KL轉換時之基準。又,藉由進行各基準之 逆矩陣之算出,而可生成由16)<16]^乙逆轉換部54i、 逆轉換部542、545、 8x8KL逆轉換部543、4x4KL逆轉換部 154151.doc •48- 201215156 544、546進行KL逆轉換時之基準。 進而,若由圖像編碼裝置與圖像解碼裝置各自記憶用以 對每個巨集區塊尺寸、每個預測模式及每個巨集區塊内之 區塊位置進行各區塊之KL轉換或KL逆轉換的基準,則導 致所記憶之基準之個數變多。即,需要容量較大之記憶 體。因此,進行基準之分組化,削減進行記憶之基準。 其次,關於分組化之方法例示兩種方法。第t方法中, 對於由學習所求出之基準’於基準間計算歐幾里德距離, 對距離較小者進行分組,並置換成代表組内之複數個基準 之一個基準。若如此進行分組化,可削減基準之個數。 第2方法係根據自參照像素算起之距離而分組化之方 法。如圖20所示’預測模式0(Vertical)中例如 Gr〇uPl = {P4、P5、P6、P7}之區塊中自參照像素算起之距 離相等。於此種情形時,較多為像素P4 ' P5、p6、p7之預 測誤差為相同之特性。因此,該Groupl全部採用相同基 準。同樣地,GroupO、2、3亦採用相同基準,藉此可將基 準自16種削減為4種。 同樣地’預測模式l(horizontal)中,例如Groupl = {pi、 P5、P9、P13 }之區塊中自參照像素算起之位置關係(或者 距離)相等。於此種情形時,較多為像素PI、P5、p9、p1;3 之預測誤差為相同之特性。因此,該Group 1全部採用相同 基準。同樣地,GroupO、2、3亦採用相同基準,藉此可將 基準自16種削減為4種。 又,預測模式4(diagonal down-right)中,參照像素與各 154151.doc • 49- 201215156 區塊之位置關係不同。然而,藉由旋轉9〇度,P3、pl2與 參照像素之位置關係變為相同。因此,藉由旋轉90度而將 與參照像素之位置關係相同之{P1、P4}、{P2、py {P6 ' P9}、{P7、P13}、{P11、P14}分別分組化以採用相 同基準。 進而,將預測模式〇(Vertica〇旋轉90度時之參照像素與 各區塊之位置關係與預測模式yhorizontai)相等,因此若 將預測模式0(VerticaI)與預測模式1(h〇riz〇ntai)進行分組 化,則可進一步削減基準。 <8.軟體處理之情形> 說明書中所說明之-系列之處理可藉由硬體、或軟體、 或兩者之複合構成而執行。於藉由軟體執行處理之情形 時’將記錄有處理序列之程式安裝至組裝於專用之硬體之 電腦内之記憶體而執行H亦可將程式安裝至可執行 各種處理之通用電腦而執行。 例如,程式可預先記錄於作為記錄介質之硬碟或尺⑽ (Read Only Memory,唯讀記憶體)中。或者,程式可暫時 地或永久地儲存(記錄)於軟碟、⑽心 广〇叫,唯讀光碟)、Magnet。—al,磁 ^碟、DVD(DigitalVe細ileDise,數位多功能光碟)、磁 碟、半導體記憶體等可移動記錄介 介質可提供作為所謂之封裝㈣。㈣可移動記錄 :程式除可自如上所述之可移動記錄介質安㈣ 外,亦可自下載網站無線傳送至電腦,或經, 154151.doc •50- 201215156 N(L〇cal Area Netw〇rk ’區域網路卜網際網路等網路, 以有線之方式傳送至電腦,藉由電腦接收以如此之方式傳 送而來之程式,並安裝至内置之硬碟等記錄介質。 、述程式之步驟’當然包含沿著所記載之順序按時間序 列進行的處理,亦包含即便未必按時間序列處理而並列地 或個別地執行的處理。 〈9.應用於電子機器之情形> 又,以上内容中,使用H.264/AVC方式作為編碼方式/解 碼方式,但本發明亦可應用於使用其他編碼方式/解碼方 式之圖像編碼裝置/圖像解碼裝置。 進而,本發明中例如可應用於如MPEG、H.26X等般於經 由衛星廣播 '有線TV(電視)、網際網路、及行動電話機等 網路介質接收藉由離散餘弦轉換等正交轉換與移動補償而 壓縮之圖像資訊(編碼位元流)時、或者於如光、磁碟、及 快閃記憶體般之記憶介質上進行處理時所使用之圖像編碼 裝置及圖像解碼裝置。 上述之圖像編碼裝置10或圖像解碼裝置5〇可應用於任意 電子機器。以下對其例進行說明。 •圖21例示應用本發明之電視裝置之概略構成。電視裝置 90包含天線901、調諧器902、解多工器903、解碼器904、 影像彳§號處理部905、顯示部906、聲音信號處理部907、 揚聲器908、外部介面部909。進而,電視裝置90包含控制 部910、使用者介面部911等。 調諧器902從由天線901接收之播放波信號對所期望之頻 154151.doc -51 · 201215156 道而進行選台而解調, 多工器903。 並將所獲得之編碼位元流輸出至解 解多工器9〇3自編踩你-上 、1 70流抽4作為視聽對象之節目之 影像或聲音之封包, « Qn 所才出之封包之資料輸出至解碼 器904 。又,解客 Γ ^ 多 15 903 將 EPG(EIectronic Program 電子節目指南)等資料之封包供給至控制部9iq。 ^受到干擾之情形時,由解多工器等進行干擾之解 解碼器904進行封句夕金2 E + ^ ^ 解碼處理,並將藉由解碼處理化 而生成之影像資料輪小 翰出至影像6唬處理部905,將聲音資 料輸出至聲音信號處理部907。 影像k號處理部9〇5對影傻眘祖.仓/ T务诼貧枓進行與雜訊去除或使用 者設定對應之影像處理等。螯 寻影像k號處理部905生成基於 顯示於顯示部906之節目之…金咨以 如像資料、或經由網路而供給 ^用程式的處理所產生之圖像資料等。又,影像信號處 二〇5生成m項目之選擇等之選單畫面等的影像 貢料,並將其與節目之影傻眘4立去晶 ΩΛ <知像資枓重疊。影像信號處理部 9 05基於如此生成之影傻咨 风“象資科而生成驅動信號並驅動顯示 部 906。 顯示部_基於來自影像信號處理部9〇5之驅動信號而驅 動顯示裝置(例如液晶顯示元件等),從而顯示節目之影像 等。 聲音信號處理部907對聲音資料實施雜訊去除等特定之 處理,並進行處理後之聲音眘袓 便心琴a資枓之D/A轉換處理或放大處 15415】.d〇c -52· 201215156 理而供給至揚聲器9〇8,藉此進行聲音輸出β 外部介面部909為用以與外部機器或網路連接之介面, 進行景> 像資料或聲音資料等之資料收發。 於控制部910連接有使用者介面部911。使用者介面部 9Π由操作開關或遠程控制信號接收部等構成,並將與使 用者操作對應之操作信號供給至控制部910。 控制口Ρ 910使用 cPU(Central Processing Unit’ 中央處理 單元)或記憶體等而構成。記憶體記憶藉由cpu執行之程式 或CPU進行處理所必要之各種資料、EPG資料、經由網路 而取得之資料等。記憶於記憶體之程式於電視裝置90之啟 動時等特定之時序藉由CPU讀取而執行。cpu藉由執行程 式而以電視裝置9〇成為與使用者操作對應之動作之方式控 制各部。 再者’電視裝置90中為了將調諧器902、解多工器903、 影像信號處理部905、聲音信號處理部9〇7、外部介面部 9〇9等與控制部910連接而設置有匯流排912。 如此構成之電視裝置中,於解碼器9〇4設有本申請案之 圖像解碼裝置(圖像解碼方法)之功能。因此,藉由於廣播 事業機構側使用本申請案之圖像編碼裝置之功能,編碼效 率及畫質之改善得以實現而即便進行編碼位元流之生成, 亦可於電視裝置準確地進行編碼位元流之解碼。 圖22例示應用本發明之行動電話機之概略構成。行動電 活機92包含通訊部922、聲音編解碼器923、相機部926、 圖像處理部927、多工分離部928、記錄再生部929、顯示 154151.doc -53· 201215156 部930、控制部931。該等經由匯流排933而相互連接。 又,於通訊部922連接有天線921,於聲音編解碼器923 連接有揚聲器924與麥克風925。進而於控制部931連接有 操作部932。 行動電話機92以聲音通話模式或資料通訊模式等各種模 式進行聲音信號之收發、電子郵件或圖像資料之收發圓 像攝像或資料記錄等各種動作。 於聲音通話模式下,由麥克風925生成之聲音信號由聲 音編解碼器923轉換成聲音資料並進行資料壓縮,供給至 通訊部922。通訊部922進行聲音資料之調變處理及頻率轉 換處理等而生成發送信號。又,通訊部922將發送信號供 給至天線921而向未圖示之基地台發送。又,通訊部922進 行由天線921接收之接收信號之放大及頻率轉換處理及解 調處理等,並將所獲得之聲音資料供給至聲音編解碼器 923。聲音編解碼器923進行聲音資料之資料擴展及對類比 聲音信號之轉換並輸出至揚聲器924。 又,於資料通訊模式下,進行郵件發送之情形時,控制 部931接收藉由操作部932之操作而輸入之文字資料,並將 所輸入之文字顯示於顯示部930。又,控制部93丨基於操作 部932中之使用者指示等而生成郵件資料並供給至通訊部 922 »通訊部922進行郵件資料之調變處理及頻率轉換處理 專’並自天線921發送所獲得之發送信號。又,通訊部922 進行由天線921接收之接收信號之放大及頻率轉換處理及 解調處理等,將郵件資料解碼《將該郵件資料供給至顯示 154I51.doc •54- 201215156 部930進行郵件内容之顯示。 者行動電話機92亦可由記錄再生部929使所接收之 郵件資料記憶於記憶介質。記憶介質為可覆寫之任意記憶 質例如’ s己憶介質為 RAM(Random Access Memory, 隨機存取圮憶體)或内置型快閃記憶體等半導體記憶體、 硬碟、磁碟、光磁碟、光碟、USB(Universal Serial Bus, 通用串列匯流排)記憶體、或記憶卡等可移動介質。 於資料通減式下發送时㈣之情料,將由相機部 926生成之圖像資料供給至圖像處理部927。圖像處理部 927進行圖像資料之編碼處理而生成編碼資料。 多工刀離928以特定之方式將由圖像處理部927生成之 編碼資料與自聲音編解碼器923供給之聲音資料多工化而 供給至通訊部922。通訊部922進行多工化資料之調變處理 或頻率轉換處理等,並自天線921發送所獲得之發送信 號。又,通訊部922進行由天線921接收之接收信號之放大 或頻率轉換處理及解調處理等,從而進行多工化資料。將 該多工化資料供給至多工分離部928。多工分離部928進行 多工化資料之分離,並將編碼資料供給至圖像處理部 927,將聲音資料供給至聲音編解碼器923。圖像處理部 927進行編碼資料之解碼處理而生成圖像資料。將該圖像 資料供給至顯示部93 0,並顯示所接收之圖像。聲音編解 碼器923將聲音資料轉換成類比聲音信號而供給至揚聲器 9之4,並輸出所接收之聲音。 如此構成之行動電話裝置中,於圖像處理部927設有本 154151.doc -55- 201215156 置(圖 ,可 申請案之圖像編碼裝置(圖像編碼方法)及圖像解碼裝 像解碼方法)之功能n進行圖像資料之通訊時 改善編碼效率及晝質。 圖23例示應用本發明之記錄再生裝置之概略構成。記錄 再生裝置94例如將所接收之播放節目之音訊資料與視訊資 料記錄於記錄介質’於與使用者之指示對應之時序將該所 記錄之資料提供給使用者。χ,記錄再生裝置叫列如亦可 自其他裝置取得音訊資料或視訊資料,並將該等記錄於記 錄介質。it而,記錄再生裝置94藉由將記錄於記錄介質之 音訊資料或視訊資料解碼並輸出,而可於監視器裝置等中 進行圖像顯示或聲音輸出。 記錄再生裝置94包含調諸器941、外部介面部942、編碼 器 943、HDD(Harci Disk Drive,硬磁碟驅動機)部 944、磁 碟驅動器945、選擇器946、解碼器947、〇SD(〇n Screen
Display,螢幕顯示)部948、控制部949、使用者介面部 950。 調譜器94i從由未圖示《天線接收之廣#信號對所期望 之頻道進行選台。調諧器941將所期望之頻道之接收信號 解調而獲得之編碼位元流輸出至選擇器946。 外部介面部 942 由 iEEE(Institute of Electrical and
Electronic Engineers,電氣與電子工程師協會)i394介面、 網路介面部、USB介面、快閃記憶體介面等至少任一者構 成。外部介面部942為用以與外部機器或網路、記憶卡等 連接之介面,進行所記錄之影像資料或聲音資料等之資料 154151.doc •56- 201215156 接收。 編碼器943於自外部介面部942供給之影像資料或聲音資 料未被編碼時以特定之方式進行編碼,並將編碼位元流輸 出至選擇器946。 HDD部944將影像及聲音等内容資料、各種程式及其他 資料等記錄於内置之硬碟,又,於再生時等自該硬碟讀取 該等。 磁碟驅動器945對所安裝之光碟進行信號之記錄及再 生。光碟例如為DVD碟片(DVD-Video(DVD影碟)、DVD-RAM(DVD隨機存取記憶體)、DVD-R(DVD Recordable, 可記錄式 DVD)、DVD-RW(DVD Rewritable,可重寫式 DVD) ' DVD+R(DVD Recordable,可記錄式 DVD)、 DVD+RW(DVD Rewritable,可重寫式 DVD)等)或 Blu-ray (藍光)碟片等。 選擇器946於記錄影像及聲音時,選擇來自調諧器941或 編碼器943之任一編碼位元流,並供給至HDD部944或磁碟 驅動器945之任一者。又’選擇器946於再生影像及聲音 時,將自HDD部944或磁碟驅動器945輸出之編碼位元流供 給至解碼器947。 解碼器947進行編碼位元流之解碼處理。解碼器947將藉 由解碼處理化而生成之影像資料供給至081)部948。又, 解碼器947輸出藉由進行解碼處理化而生成之聲音資料。 0SD部948生成用以顯示項目之選擇等之選單畫面等之 影像資料,並將其與自解碼器947輸出之影像資料重疊而 154151.doc •57· 201215156 輸出。 於控制部949連接有使用者介面部95〇。使用者介面部 950由操作開關或遠程控制信號接收部等構成,將與使用 者操作對應之操作信號供給至控制部949。 控制部949使用CPU及記憶體等而構成。記憶體記憶藉 由CPU而執行之程式及CPU進行處理所必要之各種資料。 記憶於記憶體之程式於記錄再生裝置94啟動時等特定之時 序藉由CPU讀取而執行。CPU藉由執行程式而以記錄再生 裝置94成為與使用者操作對應之動作之方式控制各部。 如此構成之記錄再生裝置中,於編碼器943設有本申請 案之圖像編碼裝置(圖像編碼方法)之功能,於解碼器947設 有圖像解碼裝置(圖像解碼方法)之功能,改善編碼效率及 畫質’從而可高效地進行影像之記錄再生。 圖24例示應用本發明之攝像裝置之概略構成。攝像裝置 96對被攝體進行攝像,使被攝體之圖像顯示於顯示部,將 其作為圖像資料而記錄於記錄介質。 攝像裝置96包含光學區塊961、攝像部962、相機信號處 理部963、圖像資料處理部964、顯示部965、外部介面部 966、記憶體部967、介質驅動器968、OSD部969、控制部 970。又’於控制部97〇連接有使用者介面部971。進而, 圖像資料處理部964或外部介面部966、記憶體部967、介 質驅動器968、OSD部969、控制部970等經由匯流排972而 連接。 光學區塊961使用聚焦透鏡及光闌機構等而構成。光學 15415I.doc -58 · 201215156 區塊961使被攝體之光學影像於攝像部962之攝像面成像》 攝像部962使用CCD(Charge Coupled Device,電荷柄合器 件)或 CMOS(Complementary Metal Oxide Semiconductor, 互補金屬氧化物半導體)而構成,藉由光電轉換生成與光 學影像對應之電氣信號並供給至相機信號處理部963。 相機信號處理部963對自攝像部962供給之電氣信號進行 拐點修正(Knee Correction)、伽瑪修正(Gamma Correction)、 顏色修正等各種相機信號處理。相機信號處理部963將相 機信號處理後之圖像資料供給至圖像資料處理部964。 圖像資料處理部964進行自相機信號處理部963供給之圖 像資料之編碼處理。圖像資料處理部964將藉由進行編碼 處理而生成之編碼資料供給至外部介面部966或介質驅動 器968。又,圖像資料處理部964進行自外部介面部966或 介質驅動器968供給之編碼資料之解碼處理。圖像資料處 理部964將藉由進行解碼處理而生成之圖像資料供給至顯 示部965。又’圖像資料處理部964進行將自相機信號處理 部963供給之圖像資料供給至顯示部965的處理、或使自 OSD部969取得之顯示用資料與圖像資料重疊而供給至顯 不部9 6 5的處理。 OSD部969生成包含記號、文字或圖形之選單畫面或圖 符等顯示用資料並輸出至圖像資料處理部964。 外部介面部966例如由USB輸入輸出端子等構成,於進 行圖像之印刷之情形時,與印表機連接。又,視需要於外 部介面部966連接有驅動器,適當安裝磁碟、光碟等可移 154151.doc •59· 201215156 動介質,並視需要安裝有自該等讀取之電腦程式。進而, 外部介面部966包含與LAN(Local Area Netw〇rk,區域網 路)或網際網路等特定網路連接之網路介面。控制部例 如可按照來自使用者介面部971之指示,自記憶體部w讀 取編碼資料,自外部介面部966將其供給至經由網路而連 接之其他裝置。又,控制部970或者可經由外部介面部 取得經由網路而自其他裝置供給之編碼資料或圖像資料, 共將其供給至圖像資料處理部964。 作為由介質驅動器968驅動之記錄介質,例如可使用磁 碟、光磁碟、光碟或半導體記憶體等可讀寫之任意可移動 介質。又,記錄介質係作為可移動介質之種類亦為任意, 既可為卡帶裝f,亦可為碟片,還可為記憶卡。當然,亦 可為非接觸1C卡等。 又,將介質驅動器968與記錄介質一體化,例如亦可如 内置型硬碟驅動器或SSD(S〇lid State DHve,固態驅動器) 等般藉由非可攜性之記憶介質而構成。 控制部970使用CPU及記憶體等而構成。記憶體記憶藉 由CPU執行之程式或CPU進行處理所必要之各種資料等二 記憶於記憶體之程式於攝像裝置96啟動時等特定時序藉由 CPU讀取並執行。CPU藉由執行程以以攝像裳置%成為 與使用者操作對應之動作之方式控制各部。 如此構成之攝像裝置中,於圖像資料處理部964設有本 申請案之圖像編碼裝置(圖像編碼方法)或圖像解碼裝置(圊 像解碼方法)之功能。因此,將攝像圖像記錄於記憶體部 154151.doc •60· 201215156 967或記錄介質料,實現編碼效率及畫質之改善而可高 效地進行攝像圖像之記錄再生。 進而’本發明不應限^於上述發明之實施形態而進行解 釋。例如不應限定於上述巨㈣塊尺寸或轉換區塊尺寸及 預測模式。當然、應瞭解本發明之實施形態係以例示之形態 揭不本發明,業者可於不脫離本發明之主旨之範圍内進行 實施形態之修正或替換。即’為了判斷本發明之主旨,應 參考斟酌申請專利範圍。 [產業上之可利用性] 本發明之圖像解碼裝置、圖像編碼裝置及其方法以及程 式中’圖像資料編碼時所進行之正交轉換中,使用根據巨 集區塊Θ中之轉換區塊之區塊位i而預先設定之基準來進 仃正交轉換。又,對藉由使用區塊位置而預先設定之基準 來進行正交轉換所獲得之係數資料進行處理而生成的編碼 位元抓之解碼中,使用根據編碼位元流中所包含之編碼參 數資訊所示之巨集區塊内的區塊位置而預先設定之基準, 進行逆正交轉換,將正交轉換後之係數資料恢復為正交轉 換前之預測誤差資料。如此,使用與巨集區塊内之區塊位 置對應之基準而進行正交轉換或逆正交轉換,因此可進行 根據區塊位置而最佳化之轉換,從而可改善編碼效率。因 此,如MPEG、H.26x等般,適合於經由衛星廣播、有線 TV、網際網路、行動電話等網路介質來收發藉由以區塊 單位進行編碼而獲得之圖像資訊(編碼位元流)時,或者光 碟磁碟、快閃記憶體般之記憶介質上進行處理時所使用 154151.doc 201215156 的圖像解碼裝置或圖像編碼裝置等。 【圖式簡單說明】 圖1係表示圖像編碼裝置之構成之圖。 圖2(A)〜圖2(1)係表示關於4x4像素之區塊之畫面内預測 模式之圖。 圖3(A)〜圖3(C)係表示預測模式與預測誤差之關係之 圖。 圖4係表示正交轉換部中之KL轉換之圖。 圖5係表示正交轉換部之構成之圖。 圖6係表示圖像編碼處理動作之流程圖。 圖7係表示預測處理之流程圖。 圖8係表示畫面内預測處理之流程圖》 圖9係表示晝面間預測處理之流程圖。 圖1〇係表示編碼參數生成處理之流程圖。 圖11係表示正交轉換處理之流程圖。 圖(A)圖12(J)係用以對正交轉換動作進行說明之圖。 圖13係表示圖像解碼裝置之構成之圖。 圖U係表示逆正交轉換部之構成之圖。 圖係表示圖像解碼處理動作之流程圖。 圖16係表示逆正交轉換處理之流程圖。 ()圖17(J)係用以對逆正交轉換處理進行說明之 圖。 圖18係表示預測處理之流程圖。 圖19係表示基準之學習動作之流程圖。 154151.doc -62· 201215156 圖20(A)〜圖20(C)係用以對基準之分組化進行說明之 圖。 圖21係例示電視裝置之概略構成之圖。 圖22係例示行動電話機之概略構成之圖。 圖23係例示記錄再生裝置之概略構成之圖。 圖24係例示攝像裝置之概略構成之圖。 【主要元件符號說明】 10 圖像編碼裝置 11 A/D轉換部 12 畫面重排序緩衝器 13 減法部 14 正交轉換部 15 量子化部 16 可逆編碼部 17 儲存緩衝器 18 速率控制部 21 逆量子化部 22 逆正交轉換部 23 加法部 24 解塊濾波器 27 圖框記憶體 31 晝面内預測部 32 移動預測·補償部 33 預測圖像·最佳模式選擇部 154151.doc •63- 201215156 50 圖像解碼裝置 51 儲存緩衝器 52 可逆解碼部 53 逆量子化部 54 逆正交轉換部 55 加法部 56 解塊濾波器 57 晝面重排序緩衝器 58 D/A轉換部 61 圖框記憶體 62 畫面内預測部 63 移動預測·補償部 64 選擇器 90 電視裝置 92 行動電話機 94 記錄再生裝置 96 攝像裝置 141 16xl6KL轉換部 142 8x8KL轉換部 143 2x2KL轉換部 144 4x4KL轉換部 145 4x4KL轉換部 146 2x2KL轉換部 147 DCT部 154151.doc 64- 201215156 148 係數選擇部 541 16xl6KL逆轉換部 542 2x2KL逆轉換部 543 8x8KL逆轉換部 544 KL逆轉換部 545 2x2KL逆轉換部 546 KL逆轉換部 547 IDCT 部 548 資料選擇部 901 天線 902 調諧器 903 解多工器 904 解碼器 905 影像信號處理部 906 顯示部 907 聲音信號處理部 908 揚聲器 909 外部介面部 910 控制部 911 使用者介面部 912 匯流排 921 天線 922 通訊部 923 聲音編解碼器 154151.doc •65- 201215156 924 揚聲器 925 麥克風 926 相機部 927 圖像處理部 928 多工分離部 929 記錄再生部 930 顯示部 931 控制部 932 使用者介面部 933 匯流排 941 調諧器 942 外部介面部 943 編碼器 944 HDD部 945 磁碟驅動器 946 選擇器 947 解碼器 948 OSD部 949 控制部 950 使用者介面部 961 光學區塊 962 攝像部 963 相機信號處理部 964 圖像資料處理部 154151.doc -66- 201215156 965 顯示部 966 外部介面部 967 記憶體部 968 介質驅動器 969 OSD部 970 控制部 971 使用者介面部 972 匯流排 Loc 區塊位置 154151.doc -67-