TWI276359B - Picture coding method and picture decoding method - Google Patents

Description

1276359 玖、發明說明 (發明說明應敘 :發明所屬之技術領域、先前技術1容、實施方…式簡單 說明） 5 10 15 【發明所屬之技術領域】 本發明係有關於一種利用畫面間關聯性以可有效率地 壓縮動態影像信號之影像編碼方法、正確地對前述㈣予 以解碼之影像解碼方法，以及記錄有以軟體實施前述方。法 之程式之記錄媒體。 【先前技術3 近年來，隨著統合處理聲音、影像及其他像辛值之多 媒體時代的來臨，而用習有之資訊媒體，即諸如新聞、雜 遠、電視、收音機、電話等可將資訊傳遞給吾人之手段作 為多媒體之對象。一般而言，多媒體係指：不只是文字， 連圖形4曰，尤其是影像等之間同時付與關聯性俾予以 顯不者，但令上述習知之資訊媒體為多媒體對象時，其必 然條件則是須將上述資訊作成數位形式後才能顯示者。 惟，將上述各資訊媒體所具有之資訊量作為數位資訊 量後再予以評估後可知··在文字方面，每一文字之資訊量 為1至2位元組，而聲音方面則是每一秒有64_s(電話 品質）、進而關於動晝則為每一秒是1〇〇Μ_(現行電視收 D貝）以上之資訊量等為所需，在上述資訊媒體上以數 位元式處理原來這樣龐大之資訊，是不符現狀。例如，視 汛電話係已藉具有64kbps〜15Mbps之傳送速度之服務综 b 數位網（ISDN · Integrated Services Digital Network)付諸 只用中，但電視及相機之影像以原貌用ISDN傳送，仍為 不可能者。 20 1276359 玖、發明說明 在此，成為情勢所需者就是壓縮資訊的壓縮技術，例 如，視訊電話方面，是使用業經ITU-T(國際電氣通訊協會 之電氣通訊標準化部門）而成國際標準化之H.261或H.263 規格之動畫壓縮技術。又，藉MPEG-1規格之資訊壓縮技 5 術，亦可於通常之音樂用CD(光碟；compact disc)中連同 聲音資訊加入影像資訊。 在此，MPEG(Moving Picture Experts Group)係指動態 影像信號之數位壓縮之國際規格，MPEG-1係指將動態影 像信號壓縮到1.5Mbps，即，將視訊信號之資訊壓縮到約 10 100分之一的規格。又，在MPEG-1規格上，係將成為對 象之品質作成中等程度之品質，即主要以傳送速度約1.5 Mbps時可予以實現之程度者，因此在須滿足更進一步的 高晝質化要求且業經規格化之MPEG-2上，是將動態影像 信號壓縮到2〜15Mbps。 15 進而以現狀而言，經由MPEG-1、MPEG-2以及已邁 進標準化之作業群組（ISO/IEC JTC1/SC29/WG11)，而實現 一具有更高壓縮率之MPEG-4，且已經規格化。當時在 MPEG-4上，不但可以較低位元率進行高效率之編碼，亦 可將一用以於即使產生傳送路徑錯誤亦能使主觀之晝質劣 20 化縮小之強勢抗錯誤性技術導入其中。又，以ISO/IEC與 ITU-T共同策劃一 JVT(Joint Video Team)之標準化活動作 為下一世代之畫面編碼方式，以目前來說是以稱為聯合模 型2(JM2)為最新者。 將不具參考影像之狀態下進行畫面内預測編碼者稱做 1276359 玖、發明說明 I圖像。又，將只參考丨枚圖像之狀態下進行晝面間預測 編碼者稱為P圖像。又，將可同時參考2枚圖像之狀態下 進行晝面間預測編碼者稱為B圖像。 在此圖像係指表示晝面1枚之用語；在遞增（pr〇 5 greSSiVe)影像時則意指框（frame)，在交錯（interlace)影像時 則指框或攔（field)。纟⑶，交錯影像係指由一框在時刻不 同之兩攔所構成之影像。在交錯影像之編碼及解碼處理上 ’可對一個框以其原有之狀態下進行處理，亦可以兩攔進 打處理，亦可就每一攔内之方塊下以框結構或搁結構進行 10 處理。 在JVT方面，與習知之動態影像編碼不同，前方來考 影像可由多數影像（圖像）選擇任意影像（圖像）作為參考影 像。又，可引進-諸如能以特定圖像將業經編碼之流予以 刀換之機制，使s圖像（稱為SI圖像及SP圖像，各以S 圖像對應於晝面内預測編碼、晝面間預測編碼）予以引進 .你指一種機制’保證由多數之流在S圖像之义 將流:換，亦可正確地對位於S圖像之後之流進行解碼: 乂刀运動畫伺服器等配合與收訊終端機之間的通訊容旦 及收訊者之嗜好，可以㈣ϋ將流切換者。 谷里 女此之自知的影像編碼方法及影像解碼方法 ()可由則林考影像之多數影像（圖像）選擇任— 圖像)作為茶相像，以為前方參考影像，·⑺引進s圖 ，俾可以特定圖像將流切換者"隹，儘管如此…種技 20 1276359 玖、發明說明 術’但疋針對就組合兩者時所發生的問題並沒有充分考慮 ，由以下所記載之課題來看，實際上很難將兩者併用。 第1圖係-用以說日月對輸人影像㈣Vin進行編碼時 圖像與圖像號碼PN間之對應圖。第i流、第2流、第3 流係指：以不同圖像率（每一秒之圖像數）而對同-影像信 號進行編瑪者。圖像號妈PN係用以辨識業經編碼之圖像 的说碼’在JM2方面，作為參考影像而在後續之編碼予以 參考者係分配有以「！」—個—個增加之號碼。為了簡單 »兄月起見在第1圖之形態中只記載：於各流上所有的圖 10 15 像係作為在後續的編碼時予以參考者，使圖像號碼PN值 始終以「1」-個-個增加之形態。而未能在後續之編碼 參考之圖像係不對於圖像號碼pN之增減有影響，亦不儲 存於記憶射。因此，就後續編碼上不予轉考之圖像而 言’對於隨後之動作說明上沒有影響，因此省略其說明。 然後如第1圖所不，在時刻〇時，各流中以斜線顯 示之圖像係編碼為S圖像。帛2圖係—示意圖，顯示在對 S圖像進行編碼及解碼時，料於參考f彡像記憶體Mem 中之影像的圖像號碼PN。 第2圖係表示記憶於參考影像記憶體Mem之影像及 其位置。在參考影像記憶體Mem内，Μ左方位置之圖 像的時刻係較位於右方位置之圖像還新。在進行預測編碼 時’在編碼及解碼時須參考同-影像，如同JM2，可由多 數參考影像中選擇參考影像時’必須明示已參考哪一影像 者0 20 1276359 坎、發明說明 在明示參考影像上有後述之兩種方法，在m2方面則 因應目的而分別採用之。 ① 明不由時刻是新的開始幾個圖像之前的資訊；及 ② 藉圖像號媽PN，明示欲參考之圖像。 5 以s圖像切換流時，為了正確地對S圖像及S圖像之 後之圖像進行編碼，且可正碟地在解碼時段進行解碼，因 此不官用S圖像由哪一流切換到哪一流時，參考影像記憶 體Mem之内容勢必要一致。 10 惟’由儲存於第2圖之參考影像記憶體Mem之影像 的圖像號碼PN之說明圖可知，就每一流，在對$圖像編 碼及解碼開始時間點上，參切像記憶體Mem 不-致’因此以原有習知方法之……* 内合都 “ 乃沄之形您犄，就不能組合使用 :參考影像記憶體Mem内選擇參考圖像之編碼方法及切 換流之S圖像機制者。 15 【發明内容】 在Λ本㈣之目的料提供-«彡像編碼方法及影 像解碼方法，用以解決以上課 ， 、者俾可組合使用S圖像 、制與由參考影像記憶體Mem 20 1 k释芩考圖像之編碼方 率者。’在使用S圖像時，亦可提昇前述編瑪方式中之屡縮 為解決該課題，第！發明係—種影像編碼方法，即， 炎:已儲存於記憶體中之參考圖像藉圖像號碼特定後予以 評後俾生成動畫之編碼流者，其特徵在於包含有以 驟’即··-圖像號碼編碼步驟’係用以對與編碼對象圖像 10 1276359 玫、發明說明 5 10 15 相對應之圖像號碼予以編碼者；一編碼步驟，係對該與編 碼對象圖像相對應之圖像號碼進行編碼者；一全部圖像不 使用化步驟，係俟執行前述編碼步驟後，使除前述記憶對 象▲圖像之外的圖像且記憶體中所記憶之圖像全部呈不使用 狀悲者；-圖像編碼初始化步驟，係對記憶體内之前述編 碼對象圖像之圖像號石馬施以初始化處理者；及，一全部圖 像不使用化資訊編碼步驟，係將全部圖像不使用化資訊進 行編碼者，前述全部圖像不使用化資訊係指：用以指示於 影像解碼裳置將除前述編碼對象圖像之外之圖像且業已儲 存於記憶體之圖像全部呈不使用狀態者。 第2毛明係冑影像解碼方法，係使業已儲存於記憶 體中之參考圖像藉圖像號碼特定後予以參考，並對動畫之 編瑪流進行解碼者；其特徵在於包含有以下步H一 全部影像不使用化資訊解碼步驟，係由編碼流檢測全部圖 像不使用化資訊後予以解碼者，前述全部圖像不使用化資 訊係指將除前述編碼對象圖像之外的圖像且業已儲存於記 憶體之圖像全部呈不使用狀態者；一解碼步驟，係由前述 編碼流’對前述解碼對象圖像進行解碼者；一全部圖像不 ❹化步驟’係於執行前述解碼步驟之後，按業經解碼之 “全部圖像不使用化資訊’將除前述解碼對象圖像之外 的圖像且業已儲存於記憶體之圖像全部呈不使用狀態者； 及’一圖像號碼初始化步驟，係對於記憶體内之前述解碼 對象圖像付與-業經初始化處理之新圖像號碼。 弟3發明係一種影像編石馬方法，係對多數影像信號進 20 1276359 玖、發明說明 行編碼後生成與各影像相對應之編碼錢者；令可將前述 夕數、.扁馬5虎i刀換之切換圖像及位於切換圖像之後可予以 茶考之圖像係只為前述編碼信號且處於同—時刻之圖像群 第t月係_影像解碼方法，係對編碼信號進行解 碼其係具有以下步驟，即：對位於可切換之切換圖像 呈不使用狀悲之圖像貢訊進行解碼，根據前述解碼 後之結果’使來自參考影像記憶體且業經解碼之圖像呈不 使用狀心後’，、麥考位於切換圖像之後未做成不使用狀態 1〇之參考圖像，再將編碼信號解碼者。 第5發明係-種影像編财法，係對多數影像信號編 碼後生成相對於各影像之編石馬信號者；其係具有一種機制 “㈣可切換前述多數編瑪信號之切換圖像之圖像號瑪， 藉前述編碼號碼變更成同一值者。 15 “發明係一種影像解碼方法’係對編碼信號進行解 碼者；使於以可切換之切換圖像切換前述編碼信號時，以 了切換之編碼信號將參考圖像之圖像號碼變更成同一值者 戈口上 20 明之影像編碼方法及影像解碼方法，即 可提供-卿㈣碼方法衫彡轉碼方法，即構建成使s 圖像之機制與由參考影像記憶體Mem㈣擇參考圖像之 、*扁石馬方法組合使用者，在 十、 便用S圖像時亦可提高前述編碼 法中之壓縮率者，其實用價值極高。 此外，該說明書係編入有之前的日本專利申請案「特 12 1276359 玫、發明說明 願 2002-112787」、「特願 2002-192533」、「特願 2002-204718」、「特願2〇〇3-9249〇」及美國暫時申請案r 60_ 377638」之内容。 L實方包方式】 5 以下’針對本發明之實施形態，用第3至30圖進行 說明。 (實施形態1) 第3圖係一說明儲存於參考影像記憶體Mem之影像 的圖像號碼PN之說明圖。以下說明該圖與第2圖之儲存 10於蒼考影像記憶體Mem之影像的圖像號碼PN之說明圖 間之不同。 已"兒明習知係於對S圖像進行編碼及解碼時，在切換 流日守便讓芩考影像記憶體Mem之内容不一致者。在此， 在本發明之編碼暨解碼方法中，對第1圖之輸入影像信號 15 Vin進行編碼時之圖像及圖像號碼pn之對應說明圖，在 全部的流中只將圖像一致之時刻t〇、u、t2之影像記憶於 麥考影像圮憶體Mem中，除其等之外的影像則在S圖像 之編碼及解碼則由參考影像記憶體刪除。顯示該結 果就疋苐圖之儲存於參考影像記憶體Mem中之影像圖 20 像號碼PN之說明圖。 由第3圖之儲存於參考影像記憶體Mem之影像的圖 像號碼PN之說明圖即可明白：於編碼及解碼中明示參考 影像時，使用「明示由時刻是新的影像開始且在多少圖像 之前的資訊」之方法如卜卜 卜卜 乃忐蚪，在苐1流、第2流、第3流之任 13 1276359 砍、發明說明 -流中，/亦可參考同一時刻之影像，因此可正確地進行編 碼及解碼者。 ---------’八π巧々成程圖，該資訊 5 10 15 20 係有關於本發明之影像編碼方法及影像解碼方法之儲存於 參考影像記憶體Mem中之影像控制者。 第4(a)圖之編碼方法的流程圖係顯示用第3圖說明之 動作實現方法及供此所需之資訊的編碼及解碼方法。 在步驟step 0日寺，於多數編碼資訊（流）中選擇時刻同 -之圖像。在步驟stepl日寺’對一顯示將除㈣_〇選 擇之圖像之外的圖像刪除之刪除資訊進行編碼。在步驟 柳2時’由參考影像記憶體Mem刪除除步驟step〇選擇 之圖像之外的圖像。如此進行後，如第3圖所示，可實現 一種參考影像記憶體Mem儲存狀態，其係用以實現即使 切換編碼信號亦可解碼之流者。 ^外，可將步驟step i及步驟_ 2的順序對調，此 種形態係成為第4(b)圖所示之影像編碼方法之流程圖。 用以第4⑷圖之解碼方法的流程所示之方法將第叫 圖之編财法的流輯編碼之删”訊進行解碼時，如第 3圖所示，可以影像解碼方法實現—種參考影像記憶體 ⑽、儲存狀態，其侧以實現即使切換編碼信號亦可解 碼之流者。 碼 其 “在步驟Step5中將刪除資訊Μ解碼，可在多數編 資訊（流）中明科刻不同的圖像。其係相^在第4⑷ 之步驟_ G所選擇之除㈣同—之圖像之外的圖像。 14 1276359 玖、發明說明 10 15 次、，在步驟Step6中，由參考影像記憶體Mem刪除步驟5 所選擇之圖像。具體而言，欲將參考影像記憶體Mem内 所儲存之圖像刪除（或消去）時’是藉於須刪除之圖像設定 一禁作為參考影像❹之識別資⑽進行，諸如「不使 用」等哉別貝机。對應該資訊，影像解碼單元WcDec和 影像編碼單元picEnc係於欲參考前述參考影像記憶體 Mem内所料之圖料，必财先確認是否有設定「不 使用」之識別資訊；如果有設定「不使用」之識別資訊時 ，即不參考該圖像，而只參考未料有「不使用」之識別 貢訊之圖像。在以下實施形態中同樣，將參考影像記憶體 m内之圖像刪除（或消去）。當然該刪除方法只是其中一 例亦可藉由參考影像記憶體Mem實際地將前述圖像資 料刪除（或消去）來進行刪除者。如上進行後，可實現―種 茶考影像記憶體Mem儲存狀態，如第3圖所示，其係用 以實現即使切換編碼信號亦可解碼之流者。 (實施形態2) 第5(a)圖係儲存於參考影像記憶體心立中之影像的 圖像號碼PN之說明圖。第5⑷圖與第3圖之說明圖，即 儲存於參考影像記憶體Mem中之影像的圖像號碼pN之 同在於.芩考影像記憶體Mem内之圖像號碼pN是 否一致者。 赭使不僅是業已儲存於參考影像記憶體Mem内之圖 勺π刻連翏考景以象記憶體Mem内之圖像號碼ρν在 内王邛的編碼唬碼都一致，於編碼及解碼中明示參考影 15 1276359 坎、發明說明 像時，即可利用「藉圖像號石,IPN明示欲參考之圖像」之 !法，在第1流、第2流…流之任-形態中，亦形成 麥考同-時刻之影像’便可正確地進行編碼以及解碼者。 而要實現如此形態時，只要在進行S圖像編碼及解碼 之前’將參考影像記憶體Mem内所儲存之圖像的圖像號 碼PN替換成同一值後，再對該替換用之資訊進行編碼及 解碼者即可。 進而’其次儲存S圖像時，亦必須做成同一圖像號碼 PN後予以儲存，因此s圖像之圖像號碼係於任一流 10 中也須為一致者。 第6圖係本發明之影像編碼方法及影像解碼方法之與 儲存於參考影像記憶體Mem之影像控制有關之資訊的編 碼方法及解碼方法的流程圖；顯示用帛5⑷圖說明之動作 的貝現方法及為此所需之資訊的編碼及解碼方法。 15 在步驟Step10中，以切換對象之編碼信號，檢測參考 影像記憶體Mem中所含之圖像的圖像號碼pN之最大值（ 在第5(a)圖之形悲中為g)。在步驟stepi2中以圖像號碼 PN之最大值為基準，對一供業已儲存於參考影像記憶體 Mem中之各圖像之圖像號碼PN重新分配用之資訊進行編 20碼。又，因應所需，對須分配給下一 s圖像之圖像號碼 PN亦予以編碼。又，第5(a)圖之第3流及第3圖之第3 流為相同者，因此針對第3流無須重新分配。是故，圖像 號碼PN的重新分配只須對必要者實施，只有必須重新分 配之貧訊在步驟stepll予以編碼即可。最後將以於步驟 16 1276359 玫、發明說明 stepll進行編碼之資訊所示之圖像號石馬pN的重新分配在 步驟中實施。如此進行後，如第5圖所示，可實現 一種參考影像記憶體Mem儲存狀態，即藉此實現即使切 換編碼信號亦可解碼之流者。 5 又，S圖像之圖像號碼PN & 12，為使於S圖像之編 碼及解碼後可使圖像號碼PN連續時，如第圖所示， 亦可使用位於s圖像之前的圖像號碼PN(第i圖之第U 的S圖像之前）的u。此時，s圖像之圖像號碼pN為12 ’而在編碼及解碼過程中圖像號碼PN始終呈增加狀態， 10因此亦可實現一令處於圖像號碼PN呈減少狀態為錯誤之 錯誤檢測機能，使更具有效果。 第7圖係本發明對輸人影像㈣Vin進行編碼時之圖 像與圖像號碼P N之對應說明圖。第7圖係—以第5 (b)圖 中所說明之方法進行圖像號碼PN之重新分配的形態，由 15此可知：以S圖像而使圖像號碼PN全部成為12，在s圖 像之編碼及解碼時’可使參考影像記憶體^之影像不 ^流之影響而呈—㈣狀態，即使以s圖像將流切換，亦 可正確地對於S圖像之後之全部影像進行解碼者。 …又，㈣stepU及步驟stepl2的順序可以調換，此種 20形態則為第6⑻圖所示之影像編碼方法之流程圖。 、#將以第6⑷圖之編碼方法的流程所編碼之删除資訊用 以第6(c)圖之解碼方法之流程所示之方法解碼時，如第 ()圖所不，可以影像解碼方法實現一種參考影像記憶體 Mem健存狀態，藉以實現即使切換編碼信號亦可解碼之 17 1276359 玖、發明說明 流者。 在步驟steP15中，對圖像號碼PN之重新分配資訊進 行解碼時，可特定圖像號碼PN之重新分配所需之影像及 其方法。其次，在步驟stepl6中根據歩驟stepl5所解碼 5之圖像號碼pN的重新分配所需之影像及其方法，進行參 考影像記憶體Mem之圖像號碼PN的重新分配。如上進 行後’可實現一種參考影像記憶體Mem儲存狀態，藉以 貫現即使切換編碼信號亦可解碼之流者。 又，在本實施形態中，係說明組合實施形態1之形態 1〇的有效性，在「藉圖像號碼PN明示欲參考之圖像」時可 正確地進行編碼及解碼之優點係可以只用實施形態2實現 ’只用該效果即足矣之形態係亦可利用在不能與實施形態 1組合使用之狀態。 (實施形態3) 15 第8圖係顯示另一實施形態，用以實現儲存於第5圖 之芩考影像記憶體Mem之影像的圖像號碼PN之說明圖 〇 圖像形式係可以圖像形式資訊picType予以識別。因 此’該圖像形式資訊PicType為可切換流之S圖像時，訂 20疋一進行參考影像記憶體Mem之圖像號碼PN的重新分 配，俾與S圖像之圖像號碼PN相配合，即可省略參考影 像圯憶體Mem之每一個圖像號碼的重新分配方法之資訊 的編碼及解碼。 以下’說明第8(a)圖之動作。在步驟step2〇中，將編 18 1276359 玖、發明說明 碼信號解碼後取得影像之圖像號碼PN。取得在步驟 step21所取到之影像的圖像形式資訊picType，而該圖像 形式資訊PicType為S圖像時，在步驟step22利用預定的 方法，進行參考影像記憶體Mem的圖像號碼pn之重新 5 分配，俾與S圖像之圖像號碼pn相配合者。如上進行後 ，如第5圖所示，可實現一種參考影像記憶體Mem儲存 狀態，藉以實現即使切換編碼信號亦可解碼之流者。 此外，可將步驟step21及步驟step22的順序對調，此 時即為第8(b)圖所示之影像編碼方法之流程。 10 又，組合第8圖及第6圖所示之儲存於第5圖之參考 影像記憶體Mem之影像之圖像號碼PN的說明圖，亦可 在第6圖之步驟stepll及步驟stepl5中，只對部分的圖 像號碼PN之重新分配資訊（指不能用以進行參考影像記憶 體Mem之圖像號碼pn的重新分配俾與s圖像之圖像號 15碼PN相配合之規則予以表現者）進行編碼及解碼。 (實施形態4) 第9圖係顯示本發明之影像編碼裝置之結構方塊圖。 第9圖之本發明的影像編碼裝置方塊圖係一實現實施形態 1及貫施形態2之影像編碼方法之一形態。 20 圖像號碼生成單元PNGen係可生成圖像號碼pn。圖

像號馬PN係一用以區別參考影像記憶體Mern中所記憶 之〜像的識別付’該參考影像記憶體Mem中所記憶之相 異影像係付與有相異之圖像號碼PN。通常，在每次將影 像儲存於參考影像記憶體Mem時，按次將圖像號碼pN 19 1276359 玖、發明說明 曰加1仁如果在影像解碼裝置所接收之圖像號碼PN是 立曰加2以上蚪，亦可用影像解碼裝置測出因傳送路徑錯誤 而遺漏須儲存之影像後，施以錯誤校正或錯誤修整處理者 〇 5 最大圖像號碼檢測單元MaxPN係用以比較另一編碼 信號圖像號碼Qthe·及以圖像號碼生成單元腦如所 產生之圖像號碼PN，檢出圖像號碼pN之最大值後，通知 可變長度編碼單元VLC，並通知圖像號碼生成單元 PNGen，以該圖像號碼pN之最大值而對以圖像號碼生成 單元PNGen生成之圖像號碼pN施行初始化處理。另一編 碼信號圖像號碼0therPN係指：對應於同一編碼對象圖像 之不同流的圖像之圖像號碼。結果，圖像號碼生成單元 PNGen係於爾後，輸出一較前述圖像號碼pN最大值還大 之圖像號碼PN者。 15 編碼圖像時刻比較單元TimeCmp係用以比較迄今編 碼後之輸入影像信號Vin之各圖像的時刻與做為另一編碼 L 5虎（流）而編碼之各圖像之圖像時刻FrarneTime後，再將 以全部的編碼信號予以編碼之時刻的圖像資訊通知影像除 去單元PicDel。 '〇 影像除去單元picDel係用以於圖像形式資訊PicType 顯示下一圖像為S圖像時，根據由編碼圖像時刻比較單元 TimeCmp所通知之資訊，將除以全部編碼信號所編碼之時 亥J之圖像之外且儲存於參考影像記憶體Mern之影像消去 之指令通知參考影像記憶體Mem，同時也將該資訊通知 20 1276359 玖、發明說明 可受長度編碼單元Vlc。 …影像編碼單元PicEnc係用以參考業已儲存於參考影像 L體Mem之影像’將輸人影像信號vin進行編碼暨頻 率變換及量化等處理，作為以圖像形式資訊PicType表示 5 =圖像形式’將其結果送往影像解碼單元以及可 變長度編碼單元VLC。影像解碼單元pkDec係用以將以 影像編碼單元pieEne編碼之結果作為以圖像形式資訊 PicType表示之圖像形式而進行逆量化及逆頻變換，以圖 像號碼PN之形式供後續影像之編碼而參考之用，儲存於 10麥考影像記憶體Mem。 可變長度編碼單元VLC係用以將以影像編碼單元 PicEnc編碼之結果進行可變長度編碼作成位元列，並對以 下解碼時所需之資訊諸如：由影像除去單元picDei所通 知之業已儲存於參考影像記憶體Mem之影像消去用之資 15訊以及前述圖像號碼PN最大值或圖像號碼PN進行解碼 ，當做編碼信號Str而予以輸出者。又，亦對於由影像除 去單元PicDel所通知之資訊，以及由圖像號碼pN而根據 實施形態2所載之方法而換取業已儲存於參考影像記憶體 Mem中之影像的圖像號碼PN之資訊進行編碼。 20 第1 〇圖係顯示本發明之編碼信號Str的結構例。以下 針對第10(a)圖之各資料進行說明。 首先將圖像號碼PN編碼。接著對於須換取之最大pN 以及用以消去參考影像記憶體Mem中所儲存之影像資訊 、換取參考影像記憶體Mem中所儲存之影像的圖像號碼 21 1276359 玖、發明說明 PN之資訊進行編碼。隨即配置圖像形式資訊…加以 及影像編碼單元PicEnc之輸出的影像編碼資料。 斤此外，第10⑷圖係只是資料配置的一形態，亦可如 第10(b)圖所示，對調資料的順序以實現者。 如以上結構，可實現一種影像編碼裝置，藉此以實現 實施形態1及實施形態2之影像編碼方法。 (實施形態5 ) 實施形態1、實施形態及實施形態 弟η圖係顯示本發明之影像解碼裝置之結構方塊圖 第11圖之本發明影像解碼裝置之方塊圖m現 10 之影像解碼裝置之一 形態。如下說明其動作。 可變長度解碼單元VLD係用以對編碼信號加進行解 碼後’並將各式各樣之資訊（用以消去業已儲存於參考影 像記憶體Mem之影像之指令、換取圖像形式資訊PicType 15、圖像號瑪PN及圖像號碼pN之資訊以及影像資料等嫩 出0 百先’將一用以將以可變長度解碼單元vld所得且 業已儲存方、參考衫像記憶體Mem之影像消去之指令係通 知於影像料單元PieDel，該影像除去單元pi·係用 20以將業已儲存於參考影像記憶體Mem且被予以指令之影 像消去。 以可變長度解碼單元VLD所得到之圖像形式資訊 PicType係通知於$彡像料單元，以指讀碼方法 22 1276359 玖、發明說明 以可變長度解碼單元VLD所得到之圖像號碼PN係通 知於參考影像兄憶體Mem，作為儲存以影像解碼單元 PicDec解碼之影像時所用之圖像號碼pN。 對欲替換以可變長度解碼單元VLD所得到之參考影 5像記憶體Mem中所儲存之影像的圖像號碼PN之資訊係 通知圖像號碼變更單元PNchg，圖像號碼變更單元pNchg 係按其指示而替換參考影像記憶體Mem内所儲存之影像 的圖像號碼PN。更具體言之，即圖像號碼變更單元 PNchg係讀出參考影像記憶體Mem中所儲存之影像的圖

號碼Mem寫入參考影像記憶體Mem。

如上進行後，即可實現一 形態2及實施形態3之影像解 (實施形態6) 用以實現實施形態1、 之影像解碼裝置。 由實施形態1乃至實施形態 ’以S圖像切換流的時候， 形悲5所載之影像編碼裝置中 是將位於可切換之圖像之前的 23 1276359 玖、發明說明 圖像之圖像號碼，以與可切換之圖像的圖像號碼相連續者 。在本實實施形態中’則是在可切換之圖像中切換圖像號 對切換流之形態而言係諸如一種處理，即關於具有使 5同一影像相異之圖像率或相異之位元率、及相異之圖像結 構之夕机的編碼方面，由正在進行編碼的圖像所屬之流切 換成屬於另-流之圖像後再進行編碼者。以下為方便說明 上’簡稱為流的切換。 10 15 ，進而，在本實施形態中，是否要將編碼對象圖像 儲存於麥考記憶體’是按照各流中以編碼對象圖像之編碼 順序（流序）’與前一個相鄰接之圖像（以下稱為前一圖像） ^圖像號碼與編碼對象之圖像號碼間之變化程度來加以判 斷的。具11而言’編碼對象®像之圖像號碼錢於前一圖 像之圖像號碼是處於增加％的狀態時，則表示編碼對 象圖像係儲存於參考記憶體者。另一方面，編媽對象圖像 之圖像號碼係對於前一圖像之圖像號碼而言，與前一圖像 號碼相同時，則表示編碼對象圖像不儲存於參考記憶體者 20 /下針對於可切換之圖像中切換圖像號碼之處理，一 邊參考圖示而一邊具體說明之。 第12圖麵㈣輸人料錢-進行編碼時之圖 像與圖像號石馬PN間之對應例者。第i流、第2流及 流係各自以各異之圖像率而對同一影像信號 第3 者。在第12圖中， 進行編碼所成 按所編碼之順序使圖像排列於每—流 24 1276359 玖、發明說明 中。

在第1流中，圖像號碼PN 係就各圖像而所分配，俾 使於各圖像間以「1」逐步辦★ ^ ^ 曰加。又，在流中具有一可使 於圖像間…」逐步增加下而分配有圖像號碼之圖像以 及分配有與前-圖像相同之圖像號碼之圖像。進而，在第 3流中，與第1流同樣，就夂同 ^就各圖像而分配有圖像號碼pn 以使於各圖像間以「1」逐步增加者。 10 15 按此’在第1流及第3流中，圖像號碼係於各圖像間 以「L 步增力口，而I編碼對象圖像儲存於參考記憶體 。在第2 &中，如同圖像間以Γι」逐步增加下以分配有 圖像號碼之®像係儲存於參考記,障射，且分配有與前一 圖像相同之圖像號碼之圖像係不儲存於其中者。 又，第1流之圖像號碼「〇」的圖像、帛2流之圖像 號碼「0」之圖像及第3流之圖像號碼、的圖像係於時 刻to下呈相對應之狀態。以下同樣，第丨流之圖像叫、 第2流的圖像F22及第3流之圖像F31係於時刻u ;第i 流之圖像F18、第2流之圖像F24及第3流之圖像F32係 於時刻t2 ;第1流之圖像F丨12、第2流之圖像F26及第3 流之圖像F33係於時刻t3 ;第}流之圖像FU7、第2流 之圖像F215及弟3流之圖像F34係於時刻t4下各呈相對 應之狀態。此外，圖像F112、F26、F33係相當於實施形 態1、2中之S圖像。 在第12圖中，圖像BPi、BP2係指一種切換圖像， 即，於切換流時予以經過，在切換源之圖像及切換處之圖 25 20 1276359 玖、發明說明 像之間，在切換處之圖像所屬之流中，與位於切換處之圖 像之前一圖像對應同一時刻後予以編碼者。 例如，切換流俾由第2流之圖像F026(切換源之圖像） 往第1流之圖像F113(切換處之圖像）時，在圖像F24與圖 5像F113間使用切換圖像BP1作為時刻t3的圖像。此時， 將作為切換圖像之切換圖像BP 1之圖像號碼變更成「12」 ’使之與切換處之圖像FU3之圖像號碼「13」相連續者 〇 又，同樣切換流使由第3流之圖像F32(切換源之圖像 1〇 )切換成第2流之圖像F213(切換處之圖像）時，在圖像F32 與圖像F213間，用切換圖像BP2作為時刻t3之圖像。此 時’變更作為切換圖像之切換圖像BP2之圖像號碼，使之 與切換處之圖像F213之圖像號碼「13」相連續者。 如此分配切換圖像之圖像號碼以使與切換處之圖像的 15圖像號碼相連續者，按每一流流動而編碼之形態與切換流 後之形態下，切換處的圖像的圖像號碼成為同一值。 其次’針對切換流時之圖像號碼的分配處理進行說明 〇 第13圖係一顯示對第12圖之流的各圖像付與圖像號 20碼後編碼的方法之流程圖。 在步驟stepl401中，判定編碼對象圖像是否為s圖像 果、扁碼對象圖像為S圖像時，在步驟step 1402中，將 、·扁馬對象圖像之圖像號碼變更成初始值Μ。如果編碼對象 圖像不疋S圖像時，則不變更編碼對象圖像之圖像號碼。 26 1276359 玫、發明說明 、2步驟SteP14G3中’判定編瑪對象圖像是否為s圖像 的下1像。如果編碼對象圖像為s圖像之下一圖像時， 乃將判斷S圖像是否須記憶於記憶體之判斷於步驟 14 0 4 r|| I « 士 θ 果，編碼對象圖像不是§圖像之下一圖像 5日寸，疋否將編碼對象圖像記憶於記憶體之判斷在步驟 Μ〇5執行。 Ρ ν驟step 1404巾，判斷s圖像將記憶於記憶體中時 ，在步驟Stepl4〇6中，將圖像號碼M增加到^^卜所增 加之圖像號碼成為一新的圖像號碼。 1〇 在步驟Step1404巾，判斷S圖像不記憶於記憶體時， 則於步驟Stepl407中，則令圖像號碼為M本身。（不變更 圖像號竭。）在步驟stepl彻中，判斷是否將編碼對象圖 像記憶於記憶體。當判斷編碼對象圖像記憶於記憶體中時 ，在步驟steP1408中，使圖像號碼PN增加到pN+1，使 15增加後之圖像號碼成為一新的圖像號碼。 畜判斷編碼對象圖像不記憶於記憶體中時，不進行圖 像號碼的變更。 在步驟steP1409中，將對象圖像編碼。在步驟以邛 M10中，判斷所有的編碼對象圖像是否已編碼。當編碼 20對象圖像沒有全部被編碼時，即返回步驟stepl401，而所 有的編碼對象圖像已被編碼時，則結束處理。 藉第13圖所示之處理，即可生成—在切換圖像之後 的圖像中圖像號碼呈連續狀態之編碼資料。 又’如此進行後所生成之編碼信號Str只要可按實施 27 1276359 玖、發明說明 形恶5之影像解碼裝置中之解碼裝置進行解碼即可。如此 進行後，即可實現-本實施形態中之將編碼信號解碼 像解碼裝置。 / 又，由上述實施形態1迄至實施形態6所示之編碼方 去及解碼方法係可藉LSI等半導體而裝設於行動電話、導 航系、、充等私動體通訊機器和數位攝影機、數位相機等撮影 機器上。又，以裝設方式方面而言，除了具備編碼器及解 碼器等兩者之收訊送訊型終端機外，還有只備編碼器之送 訊終端機及只備解碼器之收訊終端機等三種。 10 (實施形態7) 解碼對象圖像所參考之圖像係藉圖像號碼pN而明示 。又，可藉圖像號碼PN之增減，進行圖像號碼pN的錯 誤檢測。第14圖係顯示程序，諸如第1〇(b)圖所示之圖像 資料中，以圖像號碼PN為基礎，進行圖像號碼pN之錯 15 誤檢測暨校正之程序者。 首先在步驟step20中，檢測圖像號碼PN。其次，在 步驟steP21中，檢測圖像形式Pic丁ype。然後，在步驟 step A2中，判斷所檢測之圖像號碼PN是否呈連續狀•能。 在步驟stePA2中，圖像號碼PN呈連續狀態時，結束圖像 20號碼PN之錯誤檢測暨校正處理。另一方面，在步驟st邛 A2中，圖像號碼PN不呈連續狀態時，則在步驟st^A3 進行錯誤校正。又，所謂第6圖所示之最大儲存完畢pN 檢測以及PN再分配等處理係可在該錯誤檢測暨校正處理 結束後再實施，亦可與該錯誤檢測暨校正處理並列實施。 28 1276359 玫、發明說明 5 10 15 20 有關於步驟stePA3中之錯誤校正處理之第丨方法，係 心·可要求與已產生錯誤之圖像號碼pN冑關之資料等的 再ϋ »)欠到再送貧料後再次依照圖像號碼之錯誤檢測 的程序進行處理者。惟，也不是因為s圖像而使圖像號碼 PN之不連續狀態發生傳送錯誤。也就是說，在於s圖像 之圖像號碼PN的不連續狀態係指每一流在s圖像之前記 憶於記憶體上之圖像數有不同的可能性，因此即使要求與 圖像號碼PN相關之資料再送，也有可能不存在相對應之 圖像，因此使得與不連續的圖像相對應之圖像無法再送之 可能性極大。所以一亩巫七* χ丨 直要求直到可再次傳送無法再送之圖 像，因此恐有無法進行影像的再生之虞。在下列實施形態 10砰細說明對於因為該原因而無法順利進行影像的再生 之形態之解決方式。 又’在切換流之時間上， 子應於切換處之流的記憶體 内的圖像數不完全與對應於不進行切換時之流之記憶體内 之圖像數一致時，則有無法正確地進行影像再生之可能性 存在。

首先記憶體係如第1 R _ 圖所不’包含有：短時間儲存 έ己|思脰，係作為先入先出 ^ _ + 心版者，及，長時間儲存記憶 體二咖時間健存記憶體還能長時間儲存圖像，不 ==出，而是直接進行記憶地點的指定後記錄者。短 «體係具有可儲存7圖像量之大小，長時間保 存^思體可錯存4圖像量時，指定所參考之圖像係進入記 憶肢之圖像中由短時間儲存記憶體開始算起是進入第幾個 29 1276359 玖、發明說明 圖像。例如位於長時間儲存記憶體之usedLT2係可說為進 入第8個之圖像（Idx=7)。如昝以虹机a/w · )如此以相對的位置關係而指定參 考圖像。 > 5 10 又如第7圖所不，.流有三條時，如第2圖所示，用 以指定同-圖像(諸如第7圖所示之8圖像)之記憶體上的 位置係按各流而不同。接著，藉S圖像參考另—流的圖像 時’用以指定參考圖像之記憶體上位置係按每—流的記憶 體而不同。又，S _有多數流，由預定流而朝另 移動時，成為一使參考位於移動前之流的s圖像之前的圖 像後予以制編碼像以及參考位於移動處之流的s圖 像還前面之圖像後予以預測編碼之圖像形成同_影像之圖 像（第12圖）。 此外，如果是I圖像而不是s圖像時，在參考記憶體 内在夕數机進行解碼後之景多像完全一至欠日寺，由方令可切換流 口此可以與S圖像相同的用途（流之切換）來使用〗圖像 如此考慮種種條件後，記憶體内之圖像數不一致時， 難以正確地指定所參考之圖像，即使指定了所要參考之圖 像後，引起錯誤之可能性仍然極大。 在此’在本實施形態中，針對避免圖像號碼PN之不 連、買狀心°己丨思體内容之不一致等問題而使圖像號碼pn 之錯祆檢測處理無法結束時所使用之附加資訊的編碼方法 及解碼方法進行說明。該附加資訊（全部圖像删除資訊）係 才曰種卞々’即：由編碼或解碼時所參考之記憶體中將編 30 1276359 玖、發明說明 碼對象之I圖像或s圖像以外之圖像全部删除，以使用以 進行畫面内編碼之；[圖像或上述s圖像在編瑪後之圖像編 碼處理上不產生問題者。 藉此’由預定流移動至另一流後，多數流各自的記憶 5體狀態成為同一狀態，因此在晝面間預測編碼等需要參考 圖像時，亦可在記憶體上正確指定預定圖像者。又，由預 定流移動至另-流時，使圖像號碼不連續之狀態當做錯誤 而不予以校正後，實際要求不存在影像的再送，亦 不能解碼之不宜處。 、 以下，針對編碼方法利用f 16⑷圖進行說明。第 _)圖係顯示本實施形態中之編碼信號作成程序者。 15 20 f先，在步驟steP20中檢測圖像號碼pN。其次，在 步驟中檢測圖像形式PicType。然後在步驟卿^ 中’判斷檢測後之圖像形式是否為1圖像。如果檢測後之 圖像形式為！圖像時，在㈣_八1〇中，將除編碼對象 之I圖像外位於記憶體上之全部圖像刪除。接著，在步驟 p 以曰將位於記憶體上之全部圖像刪除之 全部圖像刪除f訊進行編碼，結束附加資訊的編碼程序。 卜如第16(b)圖所不’第16⑷圖之步驟系 判斷圖像形式是在；為< '疋否為S圖像。以步驟而言亦可進行同樣的 、扁碼處理。又’組合步驟StePA1及步驟stePA2，將是否 為I圖像或S圖像之判斷亦可在步驟21之圖像形式檢測 後進行。 此外，如第17(a)圖所示 進行步驟step21中之圖像 31 1276359 玖、發明說明 形式檢測後，在步驟stepA1中編碼對象圖像為u像時， 。驟tepA3判斷圖像號碼pN是否呈連續狀態，當圖 像號碼PN不連續時，亦可將除編瑪對象之工圖像之外且 在記憶體上所有的圖像全部刪除。另-方面，在步驟 _Α3中圖像號碼PN呈連續狀態時，則不刪除記憶體上 之圖像。檢測圖像形式糸 式為S圖像4，亦可使第17(a)圖同 ^之說明成立。又，組合步驟叫幻及步驟卿Μ，將 是否為I圖像或s圖像之判斷亦可在步驟21中之圖像形 式檢測後進行。 10 15 20 此外，亦可構建成在於帛17⑷圖所示之步驟_幻 處理之後，如第l7(b)圖所示’施以判斷記憶於記憶體上 之圖像數是否相同之步驟stepA3〇處理，以防止在圖像號 j呈連續狀態’而記憶於記憶體上之圖像數不同下產生錯 决者。又，亦可構建成在施行第n_中之步驟卿A3 ^處理前進行步驟siepA3G處理後，圖像數在各流之間不 疋同數時’進行步驟stepA1〇之全部圖像刪除之處理，而 圖像數量在各流間為相同且圖像號碼不是連續狀態時，即 施行步驟StepA1G之全部圖像刪除之處理封第_)。 如此，藉第17圖所示之程序，將-有成為參考影像 之可能性之圖像儘可能地殘留在記憶體上時，可一邊減少 ㈣一邊提高影像的再現性。又，在I圖像或S圖像中2 憶體上所記憶之圖像數不同或圖像號碼不連續時，不需要 錯誤校正處理’因此可簡化編碼裝置中之記憶體管理。 進而’身為I圖像以及位於記憶體上全部圓像刪除者 32 !276359 玖、發明說明 亦可藉顯示其為特殊I圖像之圖像形式來表示者。 (實施形態8) 第19圖係顯示本發明影像編碼裝置之結構方塊圖。 第i9圖所示之本發明影像編碼裝置之方塊圖係一用以實 現弟1 ό圖之影像編碼方法之一種形熊。 、 10 15 圖像號碼生成單元PNGen係用以生成圖像號碼叫。 圖像號碼PN係-用以區別參考影像記憶體中所吃 憶之影像的識別符，對於參考影像記憶體Mem中所記情 之不同影像付與-不同的圖像號碼pN。通常是將每次: 參考影像記憶體Mem中儲存影像時將圖像號碼pN增加 「1」，以影像解碼裝置所接收之圖像號碼⑼增加到/2」 以上時’可以影像解碼裝置檢測為傳送路徑錯誤而須予以 儲存之影像有遺漏後，施以錯誤修整（使錯誤不要明顯）或 錯誤校正（藉再送而再生沒有錯誤之圖像）等錯誤修復處理 〇 20 7厂除去早（Ρΐ_3係用以於顯示《像形式資訊 ❿e為S圖像時（對應於第16圖之步驟卿μ之處理） 德將了肖去儲存於參考影像記憶體Mem中除編碼對象圖 以夕―之影像的指令通知參考影像記憶體^，同時也 將该貪訊通知可變長度編碼單元VLc。 影像除去單元Plc⑽係用以於顯示圖像形式資 理-為！圖像時(對應於第16圖之步驟stepAi之處 圖像之考影像記憶體如中除編碼對象 衫像的“通知參考影像記憶體]W同時 33 1276359 玖、發明說明 也將該資訊通知可變長度編碼單元VLC：。 7編碼單元PicEnc係參考儲存於參考影像記憶體 ⑽中之影像，對輸人影像信號vin進行編碼暨頻率變換 、二化等處理’作為以圖像形式資訊PieType顯示之圖像 形工’將其結料㈣像解碼單元PieDee以及 編碼單元VLC。 影像解碼單元PicDec係用以將以影像編石馬單元 • ne、扁碼之結果作為以圖像形式資^ p . …飞貝Λ PicType顯示之圖 10 15 20 ㈣式，而進行逆量化暨逆頻變換之處理，以後續影像的 編碼作為參考之用，而作為圖像號碼PN而儲存於參考影 像記憶體Mem。 / 可變長度編碼單元VLC係用以對以影像編碼單元 Plc=編碼之結果進行可變長度編碼後做成位元列，同時 對解碼所需之資訊、用以將由影像除去單元Pic⑽通 知且儲存於參考影像記憶體Mem之影像消去之資訊、圖 像號碼PN、圖像形式資訊PieType進行編碼，將之輪出 ’以為編碼信號Str。 ' …弟10⑷及10(d)圖係顯示本發明編碼信號如之結構 形悲。以下針對各資料進行說明。 -開始即對圖像號碼PN進行編碼。接著，配置用以 :參考影像記憶體Mem中所儲存之影像消去之資訊，接 者配置圖像形式資訊PieType及影像編碼單元等之 輸出之影像編碼資料。 可 此外’第1〇(C)圖係只有資料配置的_種形態，亦 34 1276359 玫、發明說明 如弟10(d)圖所示，蔣咨輕 將貝科的順序予以對调而實現者。 以上之結構，"δΤ τ日 — 了貝現一種用以貫施第16圖所示之 影像編碼方法之哥彡德姐讲 像編碼裝置。又，可提供一種抗錯誤性 高之編碼裝置。 5 (實施形態9) 弟20圖係顯示本發明影像編碼裝置之結構方塊圖。 第20圖之本發明影像編碼裝置之方塊圖係顯示可實現第 17圖之影像編碼方法一 種φ悲。此外，在以下說明中 ’將有關於與第1 9圖同_夕留一，、 口1 J 之早兀之說明予以省略。 10 弟20圖係與第同 • 罘9圖不同之點係於影像除去單元

PicDel4中之處理。且辦 + 體而5，影像除去單元PicDel4係 用以於顯示圖像形式資訊PicType^s圖像時（對應第η ㈤/驟stepA2之處理)’比較記憶體内之圖像數後非同 一時（對應第17圖之步驟st a30夕走田、 15 ^ 邓tepA30之處理），將一消去儲存 於參考影像記憶體Mem中除飨石艮番丄备 T除編碼對象圖像之外的影像的 指令通知參考影像記憶體 ^ 版Mem冋時也將該資訊通知可 受長度編碼單元VLC。又，圖像來★ 一 回像形式貧訊PicType為I圖 像時亦同樣。又，本發明 月之、，扁碼^唬係與第10(c)及10(d) 圖同樣的結構。 20 藉以上之結構，可實現一箱 ^ 、見種用从貫施第17圖所示之 影像編碼方法之影像編碼裝賢。 _ 置又’可提供一種抗錯誤性 高之編碼裝置。 (實施形態10)

在上述實施形態7中揭示·· A Q 在S圖像時產生圖像號碼 35 1276359 玖、發明說明 PN不連續狀態時1卜直要求迄至再次傳Μ 圖像為止，而導致將發生無法進行影像再生之虞= 對因該理由而無法順利進行寻' 卜針 進仃知像再生之形態的解 以說明。 刀沄f 5 10 15 第21(a)圖係顯示將編碼信號解碼之程序。 首先在步驟step20中檢測圖像號碼pN。接著，在牛 驟柳21中檢測圖像形式PicType。其次，在步驟^ 中，判斷檢測後之圖像形式是 為1圖像。所檢出之圖像 形式不是I圖像時，則在舟炉.A ^ . 貝J在步^stepA3中判斷圖像號碼州 疋否王連纟買狀態。另一方面，4里^ ^ 面如果所檢測之圖像形式為工 圖像時’則不進行錯誤檢測暨校正處理，逕結束—連串的 處理。 在步驟卿八3巾圖像號石馬PN不呈連續狀態時，則在 步驟一中進行錯誤校正。另一方面，在步驟a⑽ 中’如果圖像號瑪PN呈連續狀態時，則結束錯誤檢 理。 步驟_Α4中之錯誤校正係指：諸如上述實施例中所 述之最大财完畢PN㈣或pN再分配等處理，或者是 在接收到意指刪除記憶體上所有的圖像之全部圖像削除資 20訊後，刪除記憶體上所有之圖像之處理。 、 此外，如第21(b)圖所示，將第21⑷圖之步驟_αι 當做判斷圖像形式是否為S圖像之步驟時，亦可進行同樣 的編碼處理。又，組合步驟_Α1及步驟stepA2，將是 否為I圖像或s圖像之判斷亦可在步驟step21之圖像形式 36 1276359 玖、發明說明 檢測後進行。 如上，可防止在I圖像或S圖像中圖像號碼非連續時 ，為了錯誤校正而反覆再送要求而致使不能解碼者。此外 ，該I圖像之處理對於可將流切換之特殊丨圖像時尤為有 5 效。 (實施形態11) 第22圖係顯示本發明影像解碼裝置之結構方塊圖。 第22圖之本發明影像解碼裝置之方塊圖係顯示用以實現 第21 W之影像解碼方法之一種形態。料，細下說明 10中有關與第11圖同一單元之說明予以省略。 第22圖與第11圖不同點係於PN連續判定單元 PNchk與圖像形式PieType之錯誤檢測單元此⑽中的處 理。具體而S，輸入於PN連續判定單元？賴之圖像號 碼PN不連續且圖像形式PicType不是！圖像或s圖像， 15則由錯誤檢測單元ErrChk輸出錯誤校正命令如。一有錯 杈正P ^ Err日寸，即進行諸如最大儲存完| 檢測及 再刀配等處理，或者是，收到意指刪除記憶體上所有 之圖像之全部圖像刪除資訊後刪除記憶體上所有之圖像之 處理。 20 藉以上結構，可實現一 像解碼方法之影像解碼裝置 之解碼裝置。 (實施形態12) 種用以實施第21圖所示之影 。又’可提供一種抗錯誤性高 在本實施形態中 况明另一方法，藉此可避免因圖像 37 1276359 玖、發明說明 號碼PN不連續以及記憶體内容不一致等問題所造成之圖 像號碼PN之錯誤檢測處理無法結束者。本實施形態與實 施形悲7不同點在於·雖有實施形態7中之編碼處理中刪 除全部圖像之步驟，不過在刪除全部圖像時，進而將圖像 5 號碼由「〇」再分配者。 藉此，由預定流移動到另一流後，使多數流各自的記 憶體狀態形成同一狀態，進而將圖像號碼施以初始化處理 ，因此即使在晝面間預測編碼等需要參考圖像時，亦可在 記憶體上正確指定預定圖像。又，亦可將在使成為解碼對 10象之編碼流由預定流移動（切換）到另一流時，將一圖像號 碼不連績狀態作為錯誤而不予以校正而導致無法解碼之問 題予以解決。 15 20 中，對於流内之各圖像，付與-按顯示時刻之順序而連續 之圖像號碼PN。圖像號碼阳係予以付與使其等按各圖像 之顯示時刻順序而呈連續狀態之理由係在於：影像解碼裝 置透過傳送途徑而接㈣料流時，可檢_編碼流中之 圖像因傳送錯誤等而有所遺漏者。如此之影像解碼裝置係 於收訊後之編料錢碼巾_科狀料㈣入之圖 像間的圖像號碼⑼增加到2以上時，在收到前—圖像後 =至收到後-圖像之間檢測到有傳送錯誤，在送訊側 1漏圖像之再送者。因此，只要影像解碼裝置^個編 碼流持績解碼，即可照檨- ϋi ，仃，按此即能有效地檢測傳送 块，接“關像㈣生，對完全的編碼流進行解碼。 38 1276359 玖、發明說明

惟，在如士卜> I 衫像解碼裝置，即，以不同的圖像率對 同一動態影像進行繞 力 仃、扁碼後所得之多數編碼流作為輪入，在 l〇 15 20 ::中：個編碼流切換成另一圖像率不同之編碼流後繼 =下來的解碼之裝置中，如此之錯誤檢測反倒成為圖像 =PN的錯誤檢测處理無法結束之不當原因所在。這是 (口於在母一個編碼流内只將各圖像之圖像號碼PN按 員丁才刻的順序呈連續狀態，在圖像率不同之編碼流間， 即使是須顯示於同一時刻之圖像，除了前頭圖像以外 餘圖像的圖像號碼州仍舊無法一致者。因此，在影像解 馬衣置中’於早_編碼流的解碼途中，將解碼對象切換成 另、扁碼*日守，即使為在同一時刻下予以顯示之圖像，圖 像號碼P N仍呈不遠碎处能本 ° 不連..只狀悲者。如此，為了避免因圖像號 "、々不連、戈或者疋記憶體内容的不-致等問題而使圖 像號碼ΡΝ之錯誤檢測處理無法結束，已於實施形態7中 就使用附加資訊（全部圖像刪除資訊）之編碼方法進行♦兒明 。該附加資訊係指一種命令，即：在於對進行畫面内編石馬 之I圖像或對上述S圖像編碼後之圖像的編碼處理中，由 供編碼或解碼時參考用之記憶體刪除全部除了編碼對象之 外之圖像，俾不致產生流切換時之錯誤者。 —以y利用第23圖說明編碼方法。第23⑷圖係顯示本 貝施形悲中之編碼信號之作成程序者。 首先在步驟stepOl中檢測圖像號碼PN。其次，在+ 驟_〇2中’將步驟step01中所檢出之圖像號碼阳予: 編碼。接著，在步驟step〇3中檢測圖像形式pkTy㈧。在 39 1276359 玖、發明說明 步驟steP04中，判斷所檢出之圖像形式是否為s圖像。 如果所檢出之圖像形式是s圖像時，在步驟step〇5中 對一意指將記憶體上所有的圖像刪除之全部圖像刪除資訊 進行編碼。其次，在步驟step〇6A中，對8圖像予以編碼 5 。隨後，在步驟steP07中將圖像號碼施行初始化處理，接 著，在步驟Step08中將除編碼對象之s圖像之外且在記憶 一上所有之王σ卩圖像刪除。按以上之處理，結束附加資訊 之編碼及圖像號碼ΡΝ之初始化處理。 如果所檢出之圖像形式不是s圖像時，由於圖像號碼 0係壬連續狀態，在步驟steP〇6B中對其圖像進行編碼，不 過在不進行附加資訊的編碼及圖像號碼PN之初始化處理 、全部圖像的刪除之狀態下結束處理。 在步驟Step〇7中之圖像號碼PN的初始化處理係指對 於諸如結束編碼處理後之S圖像上付與圖像號碼〇者。意 15即’於S圖像時對圖像號碼施行初始化處理，以顯示時間 勺貭序而對於接在s圖像後面之圖像付與一由s圖像(pN =〇)開始之號碼（例如PN=1)。結果即為：該圖像號碼PN 之初始化處理係於對S圖像進行編碼（亦即對s圖像之圖 像號碼編碼後）後才進行者。 20 又，在步驟step04中進行是否為s圖像之判斷，不過 亦可進行疋否為！圖像之判斷。又，在第U⑷圖中，具 有刪除全部圖像之步驟時可一併對圖像號碼施行初始化處 理，且執行圖像號碼之初始化處理之判斷亦不限於ι圖像 或S圖像者。又，在步驟_〇2中之圖像號碼pN編碼處 40 1276359 玖、發明說明 理係於較步驟step01之圖像號碼檢測處理還後面之處理， 其只要是在步驟step07中之圖像號碼PN初始化處理之前 的違，即可在任一時段進行。又，亦可在步驟卿〇8中進 行將除編碼對象之s圖像之外且在記憶體上所有的圖像刪 5除之處理之後，㈣行步驟_07中之圖像號碼PN初始 化處里又，對於步驟step05中意指刪除記憶體上所有之 圖像之全部圖像刪除資訊進行編碼之處理係一於步驟 step04中是否為s圖像之判斷之後的處理，其只要是在第 23⑷圖所示之處理結束前進行的話，即可在任一時候進行 10 °又’亦可使用-特殊的圖像形< PicType，如圖像形式

PicType包含有一意指由供編碼或解碼時予以參考用之記 憶體刪除全部除編碼對象圖像之外的圖像之附加資訊，俾 不對附加資訊進行編碼者。進而，為了用s圖像或！圖像 予以切換而採用替換圖像號碼PN之方式，亦非常有效， 15但也不是只對s圖像或j圖像有效而已，如果可切換流， 也可用P圖像等，如果有刪除全部圖像之步驟時，亦可對 於圖像號碼PN施行同樣的處理。 第24圖係顯示肋實現本實施耗12之編碼方法之 影像編碼裝置之結構方塊圖。 20 目像號碼生成單元PN^制以產生圖像號碼PN。 圖像號碼PN係指用以區別記憶於參考影像記憶體如万 中之影像之識別符，藉以對記憶於參考影像記憶體 中之不同影像付與不同的圖像號碼PN。通常，每次在表 考影像記憶體Mem儲存影像時，將圖像號碼pN增加厂玉 41 59

认、發明說明 飨又，依照來自影像編碼單元之通知’對SQ傻 蝙碼後，將該S圖像之圖像⑼pMp 圖像 0。 ⑽唬碼PN施行初始化處理為「 5 β -像除去單元PicDel5係用以於圖像形式資 -不為S圖像時(對應於第23圖之步驟_ 广 7消^編碼對象圖像之外且儲存於參考影像記憶)體 em之衫像的指令（全部、^ ^ 豕册J除貝Λ)通知於芩考影像記 I思月豆 Mem，並同日卑胳兮次#， vlc 门守將*亥貝矾通知於可變長度編碼單元 影像編碼單a PicEnc係用以參考儲存於參考影像記卜 體⑽中之影像，對輸入影像信號Vin施行編碼暨頻; 變換、量化等處理，作為以圖像形式資訊…加所示之 圖像形式’將其結果送往影像解碼單元及可變長 度編碼單元VLC。又，影像編碼單元pkEnc係用以於^ 15 S圖像編碼後’再對圖㈣碼i成單元觸⑶]通知圖像 5虎碼PN初始化指示。 影像解碼單元PicDec係用以對影像編碼單元 所編碼之結果進行逆量化及逆頻變換，使之作為以圖像形 式資訊PicType顯示之圖像形式，為可於後續之影像編碼 20予以參考，對其付與一相對應之圖像號碼PN後儲存於參 考影像記憶體Mem。 可變長度編碼單元VLC係用以對以影像編碼單元 PicEnc編碼之結果施行可變長度編碼後形成位元列，對於 解碼所需之資訊之諸如··刪除影像除去單元PicDel5所通 42 1276359 玖、發明說明 删参考影像記憶體Mem之影像之資訊（全部圖像 圖像號碼PN、圖像形式資訊p 竭’形成編碼信號Str予以輪出。 T'" 、人肖弟23⑷圖說明解竭方法。第23(b)圖係顯示 、扁碼信號之解碼程序。 、’先在步驟steP〇9中，將圖像號碼ρΝ解碼。其次 在步驟step010中判斷全部圖像刪除資訊是否已編碼者 10 纟㈣step_中判斷全部圖像刪除資訊已被編碼時 在步驟stepOll巾將圖像删除資訊解碼。接著，在步驟 P〇12A中將圖像予以解碼。進而，在步驟uep〇13中， 刪除除解碼對象圖像之外且記憶體上所有之圖像，接著在 步驟stepOU中施行圖像號碼PN之初始化處理。按以上 處理後，結束附加資訊之解碼及圖像號碼pN之初始化處 15 理。 在步驟stepOlO中判斷沒有對全部圖像刪除資訊進行 編碼時，在步驟steP012B中將圖像解碼後，結束附加資 sfl解碼及圖像號碼pn初始化處理。 步驟step014中之圖像號碼pn初始化處理係指於已 20 經結束解碼處理之圖像付與一圖像號碼「〇」者。意即， 對於第23(a)圖所示之編碼程序進行編碼後之編碼信號進 行角午碼時’於S圖像對圖像號碼施行初始化處理，以顯示 時間的順序而對接在S圖像之後的圖像，附與一由s圖像 開始之號碼。 43 1276359 玖、發明說明 此外，在第23(b)圖中有删除全部圖像之步驟時，口 要進仃對圖像號碼施行初始化處理即可，是否進行該處理 之判斷係與欲解碼之圖像形式無關。又’步驟step〇"中 之圖像號碼PN初始化處理亦可為步驟ste_中删除除 、扁碼對象圖像之外且記憶體上所有之圖像的處理之前的處 理。又’亦可❹-特殊的圖像形式pieType，如圖像形 式PicType包含有一意指由供解碼時予以參考用之記憶體 刪除全部除了編碼對象之圖像以外之圖像的附加資訊，俾 不對附加資訊進行編碼者。 1〇 第25圖係-顯示用以實現本實施形態12之解碼方法 之景> 像解碼裝置之結構方塊圖。 可變長度解碼單元V L D係用以對編碼信號s t r進行解 碼後輸出各種魏（諸如消去儲存於參考影像記憶體Μ⑽ 之影像的指令、圖像形式資訊PicType、圖像號碼ρΝ、替 15換圖像號碼ΡΝ之資訊及影像資料等等）。 首先，將以可變長度解碼單元VLD所得且儲存於參 考影像記憶體Mem之影像消去之指令（全部圖像刪除資訊） 係通知於影像除去單元picDel6，該影像除去單元

PicDel6 係用以將儲存於麥考影像記憶體Mem且被指令之影像消 20 去者。 以可變長度解碼單元VLD所得之圖像形式資訊

PicType係通知於影像解碼單元picDec，以指示解碼方法 〇 以可變長度解碼單元VLD所得之圖像號碼PN係通知 44 1276359 玖、發明說明 於參考影像記憶體Mem，以當做儲存業經影像解碼單元 PicDec解碼之影像時之圖像號碼PN。 以可變長度解碼單元VLD所得之全部圖像刪除資訊 係通知於圖像號碼變更單元PNchg2，該圖像號碼變更單 5 元PNchg2係按該指示，而替換儲存於參考影像記憶體 Mem内之影像的圖像號碼PN(初始化）。更詳而言之，圖 像號碼變更單元PNchg2係將參考影像記憶體Mem内之解 碼對象圖像（S圖像）之外的圖像全部刪除後，讀出儲存於 參考影像記憶體Mem之影像的圖像號碼PN，將所讀出之 10 圖像號碼PN值變更成「0」，接著將該圖像號碼PN寫入 於參考影像記憶體Mem。 以可變長度解碼單元VLD所得之影像資料係於影像 解碼單元PicDec中，用以與圖像形式資訊PicType所示之 圖像形式相對應之解碼方法進行解碼者。亦即，I圖像係 15 於不參考參考影像記憶體Mem之影像之狀態下予以解碼 ，而P圖像及B圖像則參考儲存於參考影像記憶體Mem 之影像後予以解碼者。如此進行後所得到之解碼影像係儲 存於參考影像記憶體Mem内，並當做解碼影像信號Vout 輸出。 20 藉以上結構，可實現一用以實現第23圖所示之影像 解碼方法之影像解碼裝置。又，可提供一種抗錯誤性高之 解碼裝置。 如此，藉本實施形態所示之編碼方法及解碼方法，以 於預定流移動到另一流後，使多數流各自之記憶體狀態形 45 1276359 玖、發明說明 成同一狀態，因此在進行晝面間預測編碼等需要參考圖像 時，亦可於記憶體上正確指定預定圖像者。 10 15 此外’在上述實施形態中，說明亦可對附加資訊(全部 圖像刪除資訊）連同圖像PieType 1進行編碼者，但於z 圖像時刪除參考記憶體之全部圖像時，可作成由該工圖像 再生流之特殊圖像。將此稱為騰(Instantaneous Dec〇der Refresh;瞬時解碼再新）圖像。該賺圖像係可由成為隨 機存取之再生開始位置，有效地作為位於G〇p(G·〆 Picture;圖像群）之前頭的！圖像。對該酿圖像進行編 碼％ ’先規定每-次將記憶體内除該圖像之外的圖像全部 刪除，且於該圖像之編碼後對圖像號碼施行初始化處理的 居，亦可在影像編碼裝置中記憶體内除該圖像之外的圖像 全部刪除時’不須將附加資訊予以編碼。此時，在影像解 碼裝置中，由圖像形式檢出編碼流内之idr圖像，並對 聰圖像予以解碼時，亦可不須對附加資訊進行編碼，每 一次將記憶體内且除該IDR圖像之外的圖像全部刪除，且 在該圖像之編碼及解碼後，對圖像號碼施行初始化處理即 可。 (實施形態13) 進而，可將用以實現以上述各實施形態所示之編竭處 理及解碼處理之結構之程式’記憶於軟碟等記憶媒體中， 即可容易以獨立型態之電腦系統實施上述各實施形態所示 之處理。 第26圖係一用以說明該形態之圖；即，說明用以儲 46 1276359 玖、發明說明 存藉電腦系統實現上述實施形態1至實施形態12之影像 編碼方法及影像解碼方法之程式之記憶媒體者。 第26(b)圖係由軟碟正面觀察之外觀、截面結構及軟 碟；第26(a)圖係顯示記錄媒體本體之軟碟之物理格式例 。軟碟FD係内藏於殼體F内，該光碟之表面係形成有由 外周向内周而呈同心圓狀之多數磁執Tr，各磁軌h係於 角度方向而劃分成16個扇區Se。因此，以存放有上述程 式之軟碟中，在於上述軟碟FD上所劃分之區域上記錄有 作為上述程式之影像編碼方法及影像解碼方法。 10 15 20 又’第26(c)圖係顯示用以於軟碟fd進行上述程式之 °己錄再生之結構者。將上述程式記錄於軟碟FD時，由電 腦系統Cs透過軟碟驅動器寫入上述程式之影像編石馬方法 及影像解碼方法。X ’藉軟·之程式，將上述影像編碼 方法及影像解碼方法構建於電腦系統巾時，藉軟碟驅動器 由軟碟讀出程式，傳送至電腦系統Cs。 此外，在上述說明中，使用軟碟作為記錄媒體進行說 明’不過使用光碟亦可照樣執行。又，上述記錄媒想係不 限於此’只要是CD_R0M、記憶卡、R〇M匣等可記錄程 式者，即可照樣實施。 進而在此，說明以上述實施形態所示之影像編碼方法 及影像解碼方法之應用例以及使用該例之系統。 第27圖係顯示用以實現内容傳送服務之内容供給系 統exlGG之全體結狀錢圖。將通訊服務之提供區域劃 分成預期大小單元，在各單元内各設有固定無線台之基地 47 1276359 玖、發明說明 攝影之動畫資料亦可經由電腦exiu而送往流飼服器 全xl〇3。相機exll6係指數位相機等可拍攝靜止畫面或動 晝等之機器。此時，動晝資料之編碼係可用相機仙6進 5 10 15 20 行亦可用電腦eXlU進行。X，編碼處理係於電腦exlll 或相機exll6所備有之τ ςτ 稽有之LSI exll7中予以進行者。又，影 像編碼冀解碼用之軟體係可灌進於電腦exiu等可讀取之 記錄媒體之任—種儲存媒體（CD-ROM、軟碟、硬碟等）。 進而’亦可用附有相機之行動電話灿5傳送動畫資料。 此時之動畫㈣仙以㈣魏灿5所財之^進行 編碼處理之資料。 在該内容供給系統ex⑽中，諸如用戶以相機MU 、才旦目機灿6等攝影之内容（例如攝取切現場演唱會等 /像等等）與上述貫施形態同樣進行編碼處理後傳往 流伺服器exl〇3’另_方面流伺服器exi〇3係對於有要求 ^各戶源’以流分送之方式送出上述内容資料。客戶源係 =如有可將上述業經編、^ ^ ^ I貝枓進行解碼之電腦 exlll、PDA exll2、相機……y 機exll3、仃動電話exn4等。按 此進行後，内容供給系統exl〇〇 ^ 係可成為一種糸統，即： 在客戶源接收業經編碼之資 《貝科後再予以再生，進而在客戶 源以實時接收之後再予 、， 卞以％碼，亚加以再生，亦可實現個 人播放者。 構造成該系統各機哭之红 ra 。。之編碼及解石馬上，只要能做成使 用上述各貫施形態中所 ㈣p 來扁料置或聽解碼裝置 49 1276359 玖、發明說明 將行動電話作為其中一例，進行說明。 第28圖係顯示使用上述實施形態中所說明之影像編 碼方法及影像解碼方法之行動電話exll5之示意圖。行動 電話exll5係包含有：用以於與基地台exll5之間收授電 5 波之天線ex201 ; CCD相機等可攝取影像及靜止影像之相 機部ex203 ;顯示相機部ex203等所攝影之影像及以天線 ex201接收之影像等進行解碼後之資料之液晶顯示器等顯 示部ex202 ;由操作鍵ex204群所構建成之本體部；用以 將聲音輸出之屬於揚聲器之類的聲音輸出部ex208;用以 10 將聲音輸入之屬於麥克風等之聲音輸入部ex205 ;用以儲 存所攝影之動畫或靜晝之資料等、業經接收之電子郵件的 資料、動畫資料或靜畫資料等、業經編碼之資料或解碼之 資料之記錄媒體ex207 ;及，用以將記錄媒體ex207裝設 在行動電話exll5之插槽部ex206。記錄媒體ex207係儲 15 存有快閃記憶體元件者，該快閃記憶體係屬於一種在SD 卡等塑膠箱體内可做電性改寫或刪除之不揮發性記憶體之 EEPROM(電子式可抹除可程式化唯讀記憶體；Electrically Erasable and Programmable Read Only Memory) 〇 進而，用第29圖說明行動電話exl 15。該行動電話 20 exll5係對於可構造成對於將具有顯示部ex202及操作鍵 ex204之本體部各部分做統合控制之主控制部ex311，透 過同步匯流排ex3 13，而與電源電路部ex3 10、操作輸入 控制部ex304、影像編碼部ex312、相機介面部ex303、 LCD(液晶顯示器；Liquid Crystal Display)控制部 ex302、 50 1276359 玖、發明說明 影像解碼部ex309、多重分離部ex3〇8、記錄再生部^3〇7 、調變解調電路部ex306及聲音處理部ex3〇5相互連接。 5 10 15 20 電源電路部eX310係藉用戶的操作使結束通話以及電 源鍵呈開啟狀態時，由電池裝置對各部分供給電力，便可 起動附有相機之數位式行動電話exll5呈可作動之狀態。 行動電話exll5係根據由cpu、R〇M及Ram等所組 成之主控㈣6X311讀制，在聲音通㈣柄藉聲音處 理部eX3G5，將以聲音輪人部ex2()5㈣之聲音信號變換 成數位式聲音⑽，再以調變解調電路部ex進行頻譜 擴散處理’並以信號收授電路部ex3Q1施有數位類比變換 處理及頻率變換處理後，再透過天線ex2(n傳送者。又， 行動電話exU5係㈣音㈣模式時將m劇接收 之接收資料放大，施行頻率變換處理及類比數位變換處理 ’以调變解調電路部ex3〇6施行頻譜逆擴散處理，並藉聲

曰處理。p ex305將之變換成類比聲音資料後’透過聲音輸 出部ex208輸出之。 J 進而，在於資料通訊模式下傳送電子郵件時，藉本體 部之操作鍵eX2G4之操作而輸人之電子郵件的正文資料係 透過操作輸人控制部ex3G4而送往主控制冑ex3n。主控 制4 ex311係對於正文㈣以調變解調電路部以3()6進行 頻譜擴散處理’以信號收授電路部ex3Ql施行數位類比= 換處理及料變換處理後，再透過天線e鑛送往基地Γ exl1〇 〇 σ 在於資料通訊模式下傳送影像資料時，將用相機邹 51 1276359 玖、發明說明 ex203攝影之影像資料經由相機介面部ex303而供給至影 像編碼部ex3 12。又，不傳送影像資料時，亦可將相機部 ex203所攝影之影像資料經由相機介面部ex303及LCD控 制部ex302而直接顯示於顯示部ex202者。 5 影像編碼部ex312係一具有本發明所說明之影像編碼 裝置之構造，將由相機部ex203供給之影像資料藉以上述 實施形態所示之影像編碼裝置所採用之編碼方法施行壓縮 編碼，便可變換成編碼影像資料，並將之送往多重分離部 ex308。又，此時，行動電話exl 15係將以相機部ex203 10 攝影中以聲音輸入部ex205收取之聲音，透過聲音處理部 ex305，將之作為數位化之聲音資料，而送出於多重分離 部 ex308 〇 多重分離部308係用以將由影像編碼部ex3 12所供給 之編碼影像資料以及由聲音處理部ex305所供給之聲音資 15 料，以預定方式進行多重化，將該結果所得到之多重化資 料以調變解調電路部ex306進行頻譜擴散處理，並以信號 收授電路部ex301施行數位類比變換處理及頻率變換處理 後，再透過天線ex201傳送。 在資料通訊模式中，收到以首頁等連結之動態影像檔 20 之資料時，將透過天線ex201而由基地台exl 10接收之收 訊資料，以調變解調電路部ex306進行頻譜逆擴散處理， 將結果所得到之多重化資料送到多重分離部ex308。 又，對經由天線ex201收到之多重化資料進行解碼時 ，多重分離部ex308係藉分離多重化資料，分成影像資料 52 1276359 玖、發明說明 之位元流及聲音資料之位元流，並透過同步匯流排ex3 13 ，而將該編碼影像資料傳送至影像解碼部ex309，並將該 聲音資料送往聲音處理部ex305。 其次，影像解碼部ex309係一具有本發明所說明之影 5 像解碼裝置之構造，藉以與上述實施形態所示之編碼方法 相對應之解碼方法，對影像資料之位元流進行解碼，便生 成再生動態影像資料，將之透過LCD控制部ex302而送 往顯示部ex202，藉此，顯示與諸如首頁相連結之動態影 像檔中所含之動畫資料。此時，聲音處理部ex305同時將 10 聲音資料變換成類比聲音資料後，將該資料送往聲音輸出 部ex208，藉此，使與諸如首頁相連結之動態影像檔中所 含之聲音資料再生。 此外，不限於上述系統之形態，最近也有藉衛星或地 上電波之數位播放成為熱門話題，如第30圖所示，可在 15 數位廣播用系統中組裝上述實施形態中至少影像編碼裝置 或影像解碼裝置之任一裝置。具體而言，在廣播台ex409 中，使影像資訊之位元流透過電波而通訊或傳送至廣播衛 星ex410。接收該資料之廣播衛星ex410係發出播放用的 電波，以具有衛星廣播收訊設備之家庭用天線ex406接收 20 該電波，經由電視（收訊機器）ex401或數位視訊接收解碼 器（Set Top Box; STB)ex407等之裝置，將位元流解碼後 予以再生。又，將在記錄媒體之CD或DVD等儲存媒體 ex402中所記錄之位元流進行讀取及解碼之再生裝置 ex403亦可安裝上述實施形態中所示之影像解碼裝置。此 53 1276359 玖、發明說明 時，業經再生之影像信號係顯示於監視器ex404。又，亦 可思及一種結構，即，於與有線電視用之電纜ex405或衛 星/地上波播放之天線ex406相連線之數位視訊接收解碼 器ex407内安裝影像解碼裝置，以電視的螢幕ex408予以 5 再生者。此時，除了數位視訊接收解碼器之外，亦可在電 視内裝設影像解碼裝置。又，亦可以具有天線ex411之車 ex412接收來自衛星ex410或基地台107等之訊號，以車 ex412上所備有之導航系統ex413等之顯示裝置，將動畫 再生者。 10 進而，亦可將影像信號藉以上述實施形態所示之影像 編碼裝置進行編碼後記憶於前述前述記錄媒體。舉一具體 例，即，諸如於DVD光碟ex421記憶影像信號之DVD錄 影機或記憶在硬碟之光碟錄影機等錄影機ex420。進而亦 可記憶於SD卡ex422。錄影機ex420如果具備有上述實 15 施形態所示之影像解碼裝置時，就可將記憶於DVD光碟 ex421或SD卡ex422中之影像信號再生，以螢幕ex408 顯示之。 此外，導航系統ex413之結構係可以想到諸如第29 圖所示之結構中除去相機部ex203及相機介面部ex303、 20 影像編碼部ex312之構造，亦可在電腦exlll或電視（收訊 機器）ex401做同樣形態。 又，上述行動電話exll4之類之終端機係除了具有編 碼器及解碼器兩者之傳送接收兼具型之終端機外，還可思 • 及只有編碼器之傳送終端機、只有解碼器之接收終端機等 54 1276359 玖、發明說明 三種類型之安裝形式。 如此，可將上述實施形態中所示之影像編碼方法及影 像解碼方法用於上述任一種機器及系統，按此，即可獲得 上述實施形態中所說明之效果。 5 又，本發明並不限於上述實施形態，可在不脫離本申 請案申請專利範圍下做各種變形或變更。 [産業利用性] 本發明之影像編碼裝置係可有效地作為諸如具有通訊 功能之個人電腦、PDA、數位廣播之廣播台及行動電話等 10 所備者。 又，本發明之影像解碼裝置係可有效地作為具有通訊 功能之個人電腦、PDA、接收數位廣播之STB及行動電話 等所備者。 【圖式簡單說明】 15 第1圖係用以說明對輸入影像信號Vin進行編碼時圖 像與圖像號碼PN之間的對應關係之示意圖。 第2圖係對S圖像進行編碼及解碼時儲存於參考影像 記憶體Mem之影像的圖像號碼pn之示意圖。 第3圖係用以說明儲存於參考影像記憶體Mem之影 20 像的圖像號碼PN之說明圖。 第4(a)、4(b)、4(c)圖係資料之編碼方法及解碼方法之 流程圖，該資訊係指儲存於本發明影像編碼方法及影像解 碼方法之參考影像記憶體Mem中且與影像控制有關者。 第5⑷及5⑻圖係一說明圖，即說明儲存於參考影像 55 1276359 玖、發明說明 記憶體Mem之影像的圖像號碼pn者。 第6(a)、6(b)、6(c)圖係資料之編碼方法及解碼方法之 流程圖，該資訊係指儲存於本發明影像編碼方法及影像解 碼方法之參考影像記憶體Mem中且與影像控制有關者。 5 第7圖係用以說明本發明對輸入影像信號vin進行編 碼時圖像與圖像號碼PN之間的對應關係之示意圖。 苐8(a)及8(b)圖係資料之解碼方法之流程圖，該資訊 係指儲存於本發明影像解碼方法之參考影像記憶體Mem 中且與影像控制有關者。 10 第9圖係顯示本發明影像編碼裝置之結構方塊圖。 第10(a)、10(b)、10(c)及10(d)圖係顯示本發明之編碼 信號Str之資料結構例之示意圖。 第11圖係顯示本發明影像解碼裝置之結構方塊圖。 第12圖係用以說明本發明對輸入影像信號vin進行 15編碼時各圖像與圖像號碼PN之間的對應關係之示意圖。 第13圖係一流程圖；顯示對本發明之流的各圖像付 與圖像5虎碼後進行編碼之方法者。 第14圖係顯示本實施形態7之解碼方法之流程圖。 第15圖係本實施形態7中記憶體之結構示意圖。 弟16(a)及16(b)圖係顯示本實施形態7之編碼方法之 流程圖。 第17(a)及17(b)圖係顯示本實施形態7之另一編碼方 法之流程圖。 第18圖係顯示本實施形態7之另一編碼方法之流程 56 1276359 玖、發明說明 圖。 第19圖係顯示本實施形態8之編碼裝置之結構方塊 圖。 第20圖係顯示本實施形態8之另一編碼裝置之結構 5 方塊圖。 第21(a)及21(b)圖係顯示本實施形態10之解碼方法 之流程圖。 第22圖係顯示本實施形態n之解碼裝置之結構方塊 圖。 〇 第23(a)及23(b)圖係顯示編碼信號作成程序及編碼信 號解碼程序之流程圖。 第24圖係顯示用以實現本實施形態12之編碼方法的 影像編碼裝置之結構方塊圖。 第25圖係顯示用以實現本實施形態12之解碼方法之 15 影像解碼裝置結構之方塊圖。 第26⑷、26⑻及26(c)圖係針對記憶媒體之說明圖； 該記憶媒體係可儲存一用以藉電腦系統實現實施形態^至 實施形態U之影像編碼方法及影像解碼方法之程式者。 弟27圖係-方塊圖，顯示用以實現本發明内容傳送 20服務之内容供給系統之全部結構者。 第28圖係本發明之行動電話例之示意圖。 第29圖係該行動電話之結構方塊圖。 第3 0圖係本發明數位廣播用线之結構示意圖。 57 1276359 玖、發明說明 【圖式之主要元件代表符號表】

Err"·錯誤校正命令 ErrChk...錯誤檢測單元 FrameTime...圖像時刻 MaxPN...最大圖像號碼檢測單元 Mem...參考影像記憶體 OtherPN…另一編碼信號圖像號碼 PicDec...影像解碼單元 PicDel...影像除去單元 PicEnc...影像編碼單元 PicType...圖像形式資訊 PN"·圖像號碼 PNchg…圖像號碼變更單元 PNchk.. .PN連續判定單元 PNGen…圖像號碼生成單元 Sir…編碼信號

TimeCmp…編碼圖像時刻比較單元 Vin...輸入影像信號 VLC. ..可變長度編碼單元 VLD. ..可變長度解碼單元 Vout...解碼影像信號 FD…軟碟 F...殼體 Tr...磁執

Se.. ·扇區 Cs...電腦糸統 exlOO···内容供給系統 exl07 〜exllO···基地台 exlOl···網際網路 exl02···網際網路服務提供者 exl03…流伺服器 exl04...電話網 exlll...電腦 exll2...PDA exll3··.相機 exll4...行動電話 exl 15...附有相機之行動電話 exll6···相機 exl 17...LSI ex201…天線 ex202...顯示部 ex203...相機部 ex204...操作鍵 ex205…聲音輸入部 ex206...插槽部 ex207…記錄媒體 58 1276359 玖、發明說明 ex208...聲音輸出部 ex404...監視器 ex301...信號收授電路部 ex405...電纜 ex302...LCD 控制部 ex406…天線 ex303...相機介面部 ex407…數位視訊接收解碼器 ex304...操作輸入控制部 ex408...螢幕 ex305 · ·.聲音處理部 ex409...廣播台 ex306...調變解調電路部 ex410...廣播衛星 ex307…記錄再生部 ex411...天線 ex308…多重分離部 ex412· ••車 ex309…影像解碼部 ex413…導航系統 ex310...電源電路部 ex414…行動電話 ex311…主控制部 ex420...錄影機 ex312...影像編碼部 ex421...DVD 光碟 ex313…同步匯流排 ex422...SD 卡

59

Claims (1)

1. ί276359 [敗㈣泛為一〜—~ —j I： 1 ·. j ：' ；； 浐 '*' ~x:^^t~r-rr-rjr—. ..，.. :.….Λ· j ^、申請專利範圍 mi_08714號皮青專利範圍替換太95牟1〇月26日修正 .種解碼方法，係用以將編碼信號解碼之影像解碼方法 ’包含有以下步驟： 由前述編碼信號取得圖像編號； 由丽述編碼信號抽出第1資訊，該第1資訊係包含 使儲存於5己憶體内之所有圖像呈不使用化的指示； 將刖述編碼信號解碼後，取得經解碼之圖像； 將該經解碼之前述圖像儲存於前述記憶體； 則述第1資訊由前述編碼信號抽出後，使抽出前述 第1貧訊两儲存於前述記憶體之圖像全部呈不使用化； 將丽述編碼信號解碼後，將取得之前述圖像編號初 始化，並於前述第i資訊由前述編碼信號抽出後，將新 的圖像編號附加於經解碼之前述圖像。 2.如申請專利範圍帛i項之解碼方法，其係於前述編碼信 號之前述解碼結束後，執行前述不使用化。 3·如申請專利嶋i項之解碼方法，其中儲存於前述記 憶體之圖像為參考圖像’且所有w像之前述不使用化中 ，所有呈不使用化之圖像亦為參考圖像。 4·如申請專利議i項之解碼方法，其中儲存於前述記 憶體之所㈣像之前述不❹化，係對儲存於前述記情 體之所有解碼圖像設定一表示不使用化之資訊。 〜 5.如申請專利範圍帛i項之解碼方法，其中前述第丄資訊 包含於前述編碼信號。 60 1276359 11画11111 ' ιι·τι·μι—ιι> ι·ιι 严年呼曰修{^正替換頁 拾、申請專利範圍 6·如申請專利範圍第1項之解碼方法，其中前述第1資訊 為表示 IDR (Instantaneous Decoder Refresh)圖像的資 訊。 7.如申請專利範圍第6項之解碼方法，其中前述IDR圖像 為晝面内預測編碼圖像。 8·如申請專利範圍第1項之解碼方法，其中前述第1資訊 係表示晝面内預測編碼圖像之圖像類型資訊。 9·如申請專利範圍第1項之解碼方法，其中包含前述第1 貝Λ之晝面内預測編碼圖像係作為隨機存取解碼之解碼 開始位置而解碼。 種解碼衣置，係用以將編碼信號解碼之解碼裝置， 包含有： 圖像編號取得機構，係可由編碼信號取得圖像編號 者； 抽出機構，係可由以前述圖像編號取得機構取得之 前述編碼信號抽出第！資訊，該第i f訊係包含__ 存於記憶體内之圖像全部呈不使用化的指示； 圖像解碼機構，係可將前述編碼信號解碼後，獲得 經解碼之圖像者； X $ 儲存機構，係可將該經解碼之前述圖像儲存於 記憶體者； ' α 不使用化機構’係可於前述第丨：纽由前述編竭作 號抽出後’使前述抽出機構抽出前述第1資訊前儲存： 前述記憶體之圖像全部呈不使用者；及 ； 61 1276359 拾、申請專利範圍

   。附加機構，係可於前述圖像解碼機構將前述編碼信 旒解碼後，將取得之前述圖像編號初始化，並於前述第 1貝訊由前述編碼信號抽出後，將新的圖像編號附加於 經解碼之前述圖像者。 5 u·如巾請專利範圍帛1G項之解碼裝置，其中前述不使用 化機構係於前述圖像解碼機構將前述編碼信號解碼後， 使儲存於前述記憶體之經解碼之圖像全部呈不使用化。 如申請專利範圍帛10項之解碼裝置，其中以前述儲存 機構儲存於前述記憶體之前述圖像為參考圖像，且以前 述不使用化機構呈不使用化之所有圖像亦為參考圖像。 u·如申請專利範圍第10項之解碼裝置，其中前述不使用 化機構可對儲存於前述記憶體之所有解碼圖像設定一表 示不使用化之資訊，藉此執行儲存於前述記憶體之所有 圖像之前述不使用化。 15 Μ·如申請專利範圍第1〇項之解碼裝置，其中前述第工資 訊包含於前述編碼信號。 15_如申請專利範圍第1〇項之解碼裝置，其中前述第1資 訊為表示IDR圖像的資訊。 16·如申請專利範圍第15項之解碼裝置，其中前述idr圖 20 像為畫面内預測編碼圖像。 17·如申請專利範圍第1〇項之解碼裝置，其中前述第^資 Λ係表示晝面内預測編碼圖像之圖像類型資訊。 18, 如申請專利範圍第1〇項之解碼裝置，其中前述圖像解 碼機構係將包含前述第1資訊之晝面内預測編碼圖像作 25 為隨機存取解碼之解碼開始位置而解碼。 19. 一種編碼方法，係用以將動影像編碼之編碼方法，包 62 1276359 拾、申請專利範圍一 一一一 含有以下步驟·· 將編竭對象圖像之圖像編號編碼； 將第1賁訊編碼，該第1資訊係包含-表示使前述 編碼對象圖億^结f H 奂知»_ 豕、、扁馬則儲存於記憶體之所有圖像呈不使用 化之指示； 將月il述編碼對象圖像編碼後，輸出編碼圖像； 將前述編碼圖像解碼，並產生經解碼之圖像； 使W述編碼對象圖像編碼前儲存於前述記憶體之所 有圖像呈不使用化； 將經解碼之前述圖像儲存於前述記憶體； 將W述編碼對象圖像之前述圖像編號初始化後，將 新的圖像編號附加於接連於前述編碼對象圖像後之編碼 對象圖像。 20.如申請專利範圍第19項之編碼方法，其係將前述編码 15 圖像解碼，藉此於經解碼之前述圖像之產生結束後，執 行前述所有圖像之不使用化。 21·如申請專利範圍f 19項之編媽方法，其中儲存於前述 記憶體之圖像為參考圖像，且儲存於前述記憶體之所有 圖像之前述不使用化中，呈不使用化之所有圖像亦為參 2〇 考圖像。 22·如申請專利範圍第19項之編碼方法，其中儲存於前述 記憶體之所有圖像之前述不使用化，係藉對儲存於前述 記憶體之所有解碼圖像設定一表示不使用化之資訊來執 行0 63 ^276359 拾、申請專利範圍 23:如申請專利議19項之編辱方法，其中前述第u A為一表示IDR圖像之資訊。 24.如申請專利範圍第23項之 、 ’乃去，其中前述IDR圖 像為晝面内預測編碼圖像。 25·如申請專利範圍第19項之編碼 # ^ ..+.^ t ^ 1々念，其中W述第1資 訊為-表示畫面内預測編碼圖像之圖像類型資訊。、 26·-種編碼裝置，係用以將動影像編竭者，包含有： 。圖像編號編碼機構，係可將編碼對象圖像之圖像編 就編碼者； *不使用化資訊編碼機構，係可將第i資訊編碼者， 該第1資訊係包含-表示使前述編碼對象圖像編碼前儲 存於記憶體之所有圖像呈不使用化之指示· 圖像編碼機構，係可將前述編碼對象圖像編碼後， 輪出編碼圖像者； 15 圖像解碼機構’係可將前述編碼圖像解碼，並產生 經解碼之圖像者； 不使用化機構，係可使前述編碼對象圖像編碼前儲 存於前述記憶體之所有圖像呈不使用化者； 儲存機構，係可將經解碼之前述圖像儲存於前述記 憶體者；及 附加機構，係可將前述編碼對象圖像之前述圖像編 號初始化後，將新的圖像編號附加於接連於前述編碼對 象圖像後之編碼對象圖像。 27.如申請專利範圍第26項之編碼裝置，其中前述不使用 64 1276359 、::::： 拾、申請專利範圍 化機構係藉前述圖像解碼機構將前述編碼圖像解碼，而 於經解碼之前述圖像之產生結束後，使儲存於前述記憶 體之圖像全部呈不使用化。 28·如申請專利範圍第26項之編碼裝置，其中以前述儲存 5 機構儲存於前述記憶體之前述圖像為參考圖像，且以前 述不使用化機構全部呈不使用化之圖像亦為參考圖像。 29.如申請專利範圍第26項之編碼裝置，其中前述不使用 化機構係可對儲存於前述記憶體之圖像設定一表示全部 不使用化之資訊，藉此使儲存於前述記憶體之圖像全部 10 呈不使用化。 30·如申請專利範圍第26項之編碼裝置，其中前述第^資 訊為一表示IDR圖像之資訊。 31.如申請專利範圍第3〇項之編碼裝置，其中前述IDR圖 像為晝面内預測編碼圖像。 15 32·如申請專利範圍第26項之編碼裝置，其中前述第1資 訊為一表示晝面内預測編碼圖像之圖像類型資訊。 33· ~種解碼方法，係用以將編碼信號解碼之影像解碼方 法’包含有以下步驟： 由前述編碼信號取得圖像編號； 20 由前述編碼信號抽出第1資訊，該第1資訊係包含 一使儲存於記憶體内之所有圖像呈應不使用狀態的指示 5 將前述編碼信號解碼後，取得經解碼之圖像； 將該經解碼之前述圖像儲存於前述記憶體； 65 1276359 “— Λ 一 \ ； 拾、申請專利範圍 …」 雨述第1資訊由前述編碼信號抽出後，使抽出前述 第1資訊前儲存於前述記憶體之所有圖像呈應不使用狀 態； 前述編碼信號進行前述解碼後，將取得之前述圖像 編號初始化，並於前述第1資訊由前述編碼信號抽出後 ，對經解碼之前述圖像附加新的圖像編號。 34·—種編碼方法，係用以將動影像編碼之編碼方法，包 含有以下步驟·· 將編碼對象圖像之圖像編號編碼； 將第1 f訊編碼，該第1資訊係包含-表示使前述 編碼對象圖像編碼前儲存於記憶體之所有圖像呈不使用 狀態之指示； 將前述編碼對象圖編碼，藉此輸出編碼圖像； 將前述編碼圖像解碼，藉此產生經解碼之圖像； 15 20

   使前述編碼對象圖像編碼前儲存於前述記憶體之所 有圖像呈應不使用狀態； 將經解碼之前述圖像儲存於前述記憶體； 將前述編碼對象圖像之前述圖像編號初始化後，將 新的圖像編號附加於接連於前述編碼#象时後之編碼 對象圖像。 66 1276359 顰正替換頁

   9/30 1276359 日修(9正㈣ I π—_ 二- —..一

   οθαοο: αΊ> 11/30 1276359 第13圖

   13/30 1276359 曰. 「頁 换 I替

   19/30 1276359 ________—^ 、8·月一2日修(4)正替换頁

   11103¾

   20/30 1276359 2 U 1 一 αΡ祖，Γ 頁 換 替 ®Ζ(Ν賊

   edAloQ: 22/30 靄 1276359 -J

   24/30 1276359

   25/30 1276359 8. -2 t

   29/30