TWI436286B - 畫像解碼方法及裝置 - Google Patents

Description

畫像解碼方法及裝置

本發明係關於一種畫像解碼(Image Decoding)技術，尤其是關於一種為了可將畫像之一部分區域予以優先解碼之解碼方法及裝置。

於ISO(International Standard Organization，國際標準組織)/ITU－T(International Telecommunications Union Telecommunication Standardization Sector，國際電信聯盟標準化部門)中，繼作為靜止畫像之壓縮編碼標準技術之JPEG(Joint Photographic Expert Group，聯合照相專家群)之後，採用離散小波轉換(Discrete Wavelet Transformation，DWT)的JPEG2000已經標準化。在JPEG2000中，自低位元率(bit rate)編碼至無失真(lossless)壓縮為止，可以高性能將廣範圍的畫質予以編碼，而且慢慢提高畫質之可調整性(scalability)功能亦易於實現。此外，JPEG2000係備有在以往的JPEG標準中所沒有的多樣功能。

以JPEG2000之功能之一而言，將畫像的矚目區域(Region of Interest，ROI)比其他區域優先進行編碼並進行傳送之ROI編碼已受到規格化。藉由ROI編碼，當編碼率有上限時，除了可優先使矚目區域之再生畫質高品質化之外，當依序將編碼流(encode stream)解碼時，可早期以高品質將矚目區域再生。

專利文獻1係揭示一種當對於操作者所指定的重要範圍的畫像進行編碼時，重點式達成畫質提升之目的的技術。

[專利文獻1]日本專利特開平7－203434號公報

然而，上述專利文獻1由於將所指定的範圍及其以外之範圍的畫像以分別所指定的畫質加以編碼，因此，在解碼時，將受該畫質限制，而難以以各種解析度來進行解碼。此外，亦難以實現例如僅再生所指定之範圍的再生處理。

本發明係有鑑於前述課題所研創者，其目的在於提供一種當指定有對於部分畫像矚目的區域時，得以在解碼側實現活用該區域的各種處理的畫像編碼方法及裝置，及畫像解碼方法及裝置。

為解決上述課題，本發明之某態樣的畫像編碼方法係將用以特定在畫像上所定義的矚目區域的資訊明示性記述在包含畫像之編碼資料的編碼流內。「用以特定矚目區域的資訊」亦可為參照圖框間的差分資訊而進行編碼後的資訊。該「差分資訊」亦可以圖框間的變化量來表示矚目區域的位置、大小及形狀之至少一者。此外，亦可為表示各圖框中的矚目區域的位置、大小及形狀的值的至少一個平均值與編碼對象之圖框之該等所對應的值的差分。或者，亦可為表示矚目區域之位置、大小及形狀之值的至少一個圖框間之變化量的平均值與編碼對象之圖框中之圖框間所對應之值的變化量的差分。再者，亦可為圖框間的變化量的平均值與表示各圖框中之矚目區域之位置、大小及形狀的值之至少一個的差分。該等係在矚目區域擴大或縮小較大程度時較為有效。亦可將「用以特定在畫像上所定義之矚目區域的資訊」作為對於時間的函數而予以編碼。在矚目區域具有一定規則性而改變時較為有效。

根據該態樣，將上述資訊明示性記述在編碼流內，藉此將矚目區域設定在畫像內時，可提供對於解碼側有益的資訊，且可實現關於矚目區域之各種處理。

本發明之其他態樣係一種畫像編碼裝置。該裝置係具備：在畫像上定義矚目區域的矚目區域設定部；將畫像進行編碼之畫像編碼部；將用以特定矚目區域的資訊予以編碼的矚目區域資訊編碼部；以及明示性包含經編碼的畫像與前述資訊，而產生編碼流的編碼流產生部。「矚目區域設定部」亦可藉由使用者的指定，或藉由自動辨識物件等，而在畫像上定義矚目區域。

根據該態樣，將前述資訊明示性記述在編碼流內而產生編碼流，藉此將矚目區域設定在畫像內時，可提供對於解碼側有益的資訊，且可實現關於矚目區域之各種處理。

當將複數個矚目區域設定在畫像內時，在前述資訊中含有其優先度。根據該態樣，可在解碼側辨識複數個矚目區域的優先度，亦可進行更為精確的處理。

當在前述畫像上定義有複數個矚目區域時，亦可按其優先度順序記述前述資訊。根據該態樣，可以較少的編碼量，在解碼側辨識複數個矚目區域的優先度。

本發明之另一其他態樣係一種畫像解碼方法。該方法係參照明示性記述在包含畫像之編碼資料的編碼流內且用以特定在畫像上所定義的矚目區域的資訊，且根據編碼流將包含矚目區域的區域予以解碼。「包含矚目區域的區域」亦可為矚目區域、包含矚目區域與其周邊區域的區域、或畫像全體的區域。

根據該態樣，可參照明示性記述在編碼流內之前述資訊，而實現有關矚目區域之各種處理。

本發明之另一其他態樣係一種畫像解碼裝置。該裝置係具備：將明示性記述在包含畫像之編碼資料的編碼流內且用以特定在畫像上所定義的矚目區域的資訊予以解碼的矚目區域資訊解碼部；以及參照經解碼的資訊，且根據前述編碼流將包含矚目區域的區域予以解碼的畫像解碼部。

根據該態樣，可參照明示性記述在編碼流內之前述資訊，而實現有關矚目區域之各種處理。

此外，以上構成要素之任意組合或在方法、裝置、系統、電腦程式、記錄媒體等之間轉換本發明之表現者亦可有效作為本發明之態樣。

根據本發明，當指定有對於部分畫像矚目的區域時，得以實現在解碼側活用該區域的各種處理。

第1實施形態

第1圖係第1實施形態之畫像編碼裝置100之構成圖。畫像編碼裝置100的構成在硬體上係可藉由：任意電腦的CPU、記憶體及其他LSI(large scale integration，大型積體電路)予以實現，在軟體上則可藉由載有記憶體且具有編碼功能的程式等予以實現，惟在此係描繪出藉由連結該等構件而予以實現的功能方塊。因此，該等功能方塊可藉由僅有硬體、僅有軟體或該等硬體與軟體的組合，而以各種形式予以實現，而這乃是熟習該項技術者所能理解的。

畫像編碼裝置100係以所輸入的原畫像為一例，藉由JPEG2000方式進行壓縮編碼。被輸入至畫像編碼裝置100的原畫像係動態畫像的圖框(frame)。畫像編碼裝置100係可以JPEG2000方式將動態畫像的各圖框連續編碼，而產生動態畫像的編碼流(stream)。

小波轉換部(wavelet transforming unit)10係將所輸入的原畫像進行次頻帶(subband)分割，計算各次頻帶畫像的小波轉換係數，而產生經階層化的小波轉換係數。具體而言，小波轉換部10係於原畫像的x、y各個方向，使用低通濾波器(low pass filter)及高通濾波器(high pass filter)，分割成4個頻率次頻帶後進行小波轉換。該等次頻帶係為：於x、y兩個方向具有低周波成分的LL次頻帶；於x、y的任一方向具有低周波成分，且在另一方向具有高周波成分的HL及LH次頻帶；於x、y兩個方向具有高周波成分的HH次頻帶。各次頻帶的縱橫畫像數係處理前之畫像的各1/2，以一次的濾波(filtering)，可得解析度，亦即畫像大小為1/4的次頻帶畫像。

小波轉換部10係對於如上所得的次頻帶中的LL次頻帶再度進行濾波處理，再將其分割為LL、HL、LH、HH等4個次頻帶後進行小波轉換。小波轉換部10係進行預定次數的濾波，將原畫像階層化為次頻帶畫像，且輸出各次頻帶的小波轉換係數。量子化部12係將由小波轉換部10輸出的小波轉換係數以預定的量子化寬度(quantization width)來進行量子化。

熵編碼部(entropy coding unit)14係將由量子化部12進行量子化後的量子化值進行熵編碼。例如，一面由上位位元平面(Bit Plane)依序掃描(scan)一面編碼。藉此方式，熵編碼部14的編碼對象為原畫像，且作為畫像編碼部來發揮作用。

ROI設定部20係在原畫像的一部分區域設定ROI區域。ROI區域的形狀可為矩形、圓形或其他複雜形狀。其形狀可為固定，亦可動態變化。例如，亦可在畫像的中心部分與周邊部分使ROI區域的形狀改變。此外，ROI區域亦可在一張畫像中設定複數個。

可由使用者以手動方式來設定上述ROI區域，亦可由系統自動辨識動態的區域等而設定。具體而言，使用者或系統係將ROI區域的位置、大小、形狀、設定成複數個時的優先順位等作為初始值而設定在ROI設定部20。其中，當使用者指定物件(object)時，或系統進行自動辨識時，亦可由ROI設定部20將包含該物件的預定範圍自動設定在ROI區域。當為動態畫像時，使用者或系統可按每一圖框設定ROI區域，亦可一開始先指定ROI區域，然後再使ROI區域跟從該ROI區域內的物件的動向。此可藉由檢測物件的動態向量而予以實現。

ROI設定部20係將ROI區域的開始位置、大小等用以特定ROI區域的資訊(以下稱為ROI資訊)輸出至ROI預測處理部22。當進行上述跟從處理時，亦可輸出根據物件的動態向量而設定的ROI區域的動態向量。

ROI預測處理部22係對於ROI資訊進行圖框間預測處理。ROI預測處理部22係具備用以儲存ROI資訊的記憶體，例如，將作為基準的圖框的ROI資訊儲存在該記憶體，且計算出與目前圖框的差分資訊。

第2圖係表示ROI區域遷移之一例圖。第2圖(a)係表示在畫像內設定ROI區域R的狀態。該ROI區域R由於為長方形，因此可以左上的頂點座標、水平方向的大小、以及垂直方向的大小來表現。在此係將其標記為座標(A，B)、大小(X，Y)。首先，ROI預測處理部22係將該等資訊作為ROI資訊，且輸出至ROI資訊編碼部24，同時，儲存在上述記憶體。該圖框係成為對於下一圖框的基準。

第2圖(b)係表示第2圖(a)所示之圖框的下一圖框，表示ROI區域R的移動狀態。在此，於畫像內，ROI區域R向右移動M1畫素份。將該ROI區域R的ROI資訊以與上述相同的方法表現時，即標記為座標(A＋M1，B)、大小(X，Y)。關於這點，ROI預測處理部22係利用儲存在上述記憶體的前圖框的ROI資訊，而可以該差分來表現目前圖框的ROI資訊。例如，當從在目前圖框內產生的ROI資訊減去前一圖框之ROI資訊時，可表現為座標△(M1，0)、大小△(0，0)。ROI預測處理部22係將該ROI資訊再度輸出至ROI資訊編碼部24，同時儲存在上述記憶體。

第2圖(c)係表示第2圖(b)所示之圖框的下一圖框，表示ROI區域R移動，且ROI區域本身的形狀發生改變的狀態。在此，於畫像內，ROI區域R向下移動N2畫素份，且ROI區域R於水平方向增加M2畫素份。ROI預測處理部22係利用儲存在上述記憶體的前一圖框的ROI資訊，而以與上述相同的方法來表現目前圖框的ROI資訊時，可表現為座標△(0，－N2)、大小△(M2，0)。ROI預測處理部22係將該ROI資訊再度輸出至ROI資訊編碼部24，同時儲存在上述記憶體。

藉此方式，當利用圖框間預測處理時，0及其附近的值的出現頻率變高，而可使ROI資訊具有統計上的誤差。若以後述之ROI資訊編碼部24將該ROI資訊進行熵編碼，即可削減其編碼量。熵編碼係當出現頻率的偏差愈大，越可削減編碼量。

其中，圖框間預測處理並非侷限於如上述之單純取出與前一圖框的差分的處理，亦可使用例如動態補償預測處理。動態補償預測處理係可求取表示ROI區域R的移動方向或距離的動態向量，且將以該動態向量表示的位置資訊與目前圖框的差分設為ROI資訊。尤其是對於ROI區域R的移動較大的動態畫像，可提高0及其附近的值的出現頻率。如上所述，作為圖框間預測之對象的圖框並非侷限為1個之前的圖框，亦可為1個之後的後來的圖框。此外，不限於前後1個圖框，而利用前後數個圖框，再利用其平均值的處理等亦得以實現。

當然，不使用圖框間預測處理，亦可於各圖框內產生ROI資訊。此時，可減少記憶體容量或計算量。因此，使用者亦可按照動態畫像的特性，來選擇是否利用圖框間預測處理。尤其是在移動較快的動態畫像中，即便利用圖框間預測處理，雖然運算量增加，亦會有不太能減少編碼量的情形產生。此時，亦可單純地按每一圖框產生ROI資訊。

ROI資訊編碼部24係將由ROI預測處理部22輸入的ROI資訊進行編碼。例如進行熵編碼。接著，將已編碼的ROI資訊輸出至編碼流產生部16。

編碼流產生部16係根據由熵編碼部14輸入的畫像的編碼資料、由ROI資訊編碼部24輸入的ROI資訊的編碼資料等，而產生編碼流。接著，將所產生的編碼流輸出至記錄媒體或網路(network)。在此，可使用SDRAM(Synchronous Dynamic Random Access Memory，同步動態隨機存取記憶體)或快閃硬碟驅動器等來作為記錄媒體。

ROI資訊的編碼資料係記述於標頭(header)。在標頭雖亦存在各種層級(level)，但亦可記述在任一層級。亦可在例如：編碼流標頭(stream header)、序列標頭(sequence header)、GOP(Group of Picture)標頭、圖框標頭、圖像標頭(picture header)、以區域單位標註的標頭等記述ROI資訊。

所謂以區域單位標註的標頭係指以下所述的標頭。例如在1張圖框或圖像設定有複數個ROI區域時，依ROI區域1的畫像資料→ROI區域2的畫像資料→…→周邊區域的畫像資料的順序排列圖框或圖像。上述所謂標頭係指此時按每一ROI區域1的畫像資料或ROI區域2的畫像資料標註的標頭。

第3圖係表示編碼流之一例圖。在此係以在MPEG(Moving Picture Experts Group，動畫專家群)所使用之稱為序列(sequence)的用語來表示編碼流。在MPEG中，係將1個視頻程式整體的編碼信號稱為序列。序列係如第3圖所示，以序列標頭(sequence header)開始，以序列標尾(sequence end)結束，且在其間記述複數個GOP。GOP係記述GOP標頭與複數個圖像。在第3圖的例中，係在該GOP標頭記述複數個ROI資訊。在GOP標頭係記述有編碼條件等解碼所需的各種參數。在本實施形態中，亦在GOP標頭記述有ROI資訊。

上述之ROI資訊係表示頂點座標與大小的資訊。關於此點，ROI資訊並非侷限於上述資訊，亦可包含各種資訊，且可藉由該資訊來特定ROI資訊。以下列舉其例。

首先，需要有基本座標。如上所述，相當於頂點座標、中心點座標、重心座標等。在這些座標內，可使用適於ROI區域4之形狀的座標。例如，當ROI區域為圓形時，中心點座標即成為最適座標。接著，當以各圖框內的資訊來特定ROI資訊時，則需要有關大小的資訊。例如需要水平方向的大小、垂直方向的大小。接著，當使用圖框間預測處理時，可使用與前一圖框的差分資料、使用動態向量後之與後一圖框的差分資料、仿射(Affine)轉換係數等各種函數的係數等。

接著，當在1張畫像設定複數個ROI區域時，亦可在ROI資訊中包含其優先度。例如，不僅其優先順位，亦可包含是否必須顯示該ROI區域的資訊。此外，亦可以ROI資訊的排列順序來表現該優先順位。亦即，優先順位越高的ROI區域的資訊，越可使用之前記述的方法。此外，亦可包含各ROI區域的資訊量。例如其ROI區域的編碼量或壓縮率、運算量等。此外，亦可在每一ROI區域包含畫質或與ROI區域以外之區域的畫質比。

再者，亦可包含該ROI區域是否可獨立解碼的資訊。例如，在JPEG2000方式中，係使用S程序(significance propagation pass，有意義點判斷程序)、R程序(magnitude refinement pass，數值增量點判斷程序)、C程序(cleanup pass，清除程序)等3種處理程序(pass)來作為位元平面內的各係數位元。在S程序中係對於重要係數(significant coefficient)存在周圍的非重要係數進行解碼，在R程序中係對於重要係數進行解碼，在C程序中則係對於剩餘的係數進行解碼。S程序、R程序、C程序等各處理程序，係依上述順序對於畫像的畫質貢獻度較大。各處理程序係依此順序執行，各係數的上下文(context)係在考慮附近係數的資訊的情況下而予以決定。因此，按每一程序獨立編碼時，亦可在中途中斷可變長度的解碼。上述資訊係有益於解碼側的資訊。其他，若為可利用為有益於解碼時的資訊，亦可將在上述例中所列舉的其他資訊包含在ROI資訊。其中，雖就將ROI資訊記述在標頭之例加以說明，但亦可記述在使用者可自由使用的使用者區域。

根據以上說明的第1實施形態，將ROI區域之解碼所需或有益於解碼的資訊作為ROI資訊而明示性地包含於編碼流，藉此可實現在解碼側活用該資訊的各種處理。例如，在快速播放等時，可取出ROI區域或包含其周邊數像素的區域，而輕易將其再生顯示。

此外，利用圖框間預測處理將ROI資訊進行編碼，藉此可削減ROI資訊的編碼量。例如，在JPEG2000中，由於係將畫像作為靜止畫像處理來進行編碼，因此，在進行ROI區域的編碼時，必須對每1張畫像提供ROI資訊。因此，當對於未移動的畫像進行ROI編碼時，會對連續的各畫像資料附加完全相同的ROI資訊，而產生對整體而言為多餘的碼(code)。此時，利用圖框間預測處理的態樣尤其會發揮效果。此外，藉由減少編碼量，可使處理高速化，且可減少消耗電力。

第2實施形態

第4圖係第2實施形態之畫像解碼裝置200之構成圖。在第2實施形態中，畫像解碼裝置200係對於在第1實施形態中經編碼的編碼流進行解碼。將作為編碼流而被輸入的動態畫像的各編碼圖框連續解碼，藉此可再生動畫。

ROI資訊解碼部40係將記述於編碼流內的ROI資訊進行解碼，且輸出至ROI預測處理部42。ROI資訊係記述於編碼流內之任一層級(level)的標頭。

ROI預測處理部42係對於經解碼的ROI資訊進行圖框間預測處理。ROI預測處理部42係具備用以儲存ROI資訊的記憶體，例如，將作為基準的圖框的ROI資訊儲存在該記憶體。將以差分資訊所提供的目前圖框的ROI資訊、與儲存在記憶體的ROI資訊進行加算，藉此將目前圖框的ROI資訊還原為原始的資料形式。

例如，當作為基準之圖框的ROI區域為長方形時，可將其ROI區域以左上的頂點座標(A，B)、水平方向的大小及垂直方向的大小(X，Y)來表現。首先，ROI預測處理部42係將該等資訊作為ROI資訊，而輸出至ROI區域控制部44，同時儲存於上述記憶體。該圖框係成為對於下一圖框的基準。

使用第1實施形態的方法使ROI資訊編碼時，若在下一圖框使該ROI區域向右移動M1像素份，即提供座標△(M1，0)、大小△(0，0)與ROI資訊件為該差分資訊。ROI預測處理部42係將該差分資訊加算在儲存於上述記憶體的前一圖框的ROI資訊，藉此可求出目前圖框之絕對座標(A＋M1，B)、大小(X，Y)。

ROI預測處理部42藉此方式在對畫像進行解碼之前，將下一畫面的ROI資訊進行解碼且取得。藉此方式，可進行關於ROI區域的各種處理。其中，當使用其他圖框間預測編碼時，係使用與其相對應的還原方法。

ROI區域控制部44係根據使用者或系統的要求來設定關於ROI區域的各種處理。例如，可進行僅有ROI區域的畫像，或是包含其周邊像素的區域的再生處理。該周邊像素的決定方法容後敘述。此外，使用物件辨識來搜尋(search)某場景(scene)時，亦可進行僅以ROI區域內的物件為對象的檢索處理。任一者均可高速處理。在進行該等處理時，可參照ROI資訊中所包含的優先順位資訊，來進行處理。例如，顯示非為必須，或者使優先順位較低的ROI區域不顯示，亦可從檢索對象中去除。

其他，ROI區域控制部44係可藉由基於ROI資訊的指定、使用者或系統的要求，來設定ROI區域的畫質或與其他區域的畫質比。

編碼資料抽出部30係從所輸入的編碼流中抽出編碼資料。此時，有時亦會有由ROI區域控制部44僅抽出所指定的區域的編碼資料的情形。熵解碼部32係按每一位元平面(bit plane)將所抽出的編碼資料進行解碼，而取得經解碼結果所得之經量子化的小波轉換係數。逆量子化部34係將小波轉換係數進行逆量子化。小波逆轉換部36係將經逆量子化的小波轉換係數進行逆轉換，再將所得的解碼畫像輸出。

接著，說明以ROI區域控制部44決定包含ROI區域與其周邊區域之區域的座標與大小的方法。第5圖係表示小波轉換係數之各分割層級中的ROI區域的示意圖。第5圖(a)係表示在分割層級0之原畫像80上設定ROI區域90的狀態。第5圖(b)係表示將原畫像80藉由僅1次的小波轉換所得之分割層級1的轉換畫像82。分割層級1的轉換畫像82係由4個次頻帶LL1、HL1、LH1、HH1所構成。ROI區域控制部44係於分割層級1的各次頻帶LL1、HL1、LH1、HH1中特定為了將原畫像80的ROI區域90還原而所需之分割層級1的轉換畫像82上的ROI區域91至94。

第5圖(c)係表示進一步將第5圖(b)之轉換畫像82的最低頻率成分的次頻帶LL1進行小波轉換所得之分割層級2的轉換畫像84。分割層級2的轉換畫像84如圖所示，係除了分割層級1的3個次頻帶HL1、LH1、HH1之外，還包含分割層級2的4個次頻帶LL2、HL2、LH2、HH2。ROI區域控制部44係於各次頻帶LL2、HL2、LH2、HH2中特定為了將分割層級1的轉換畫像82的次頻帶LL1中的ROI區域91還原而所需之分割層級2的轉換畫像84上的ROI區域95至98。

同樣地，於各分割層級中，僅以小波轉換的次數將對應於原畫像80的ROI區域90的ROI區域以迴歸式特定，藉此於最後分割層級的轉換畫像中，可特定所有為了還原ROI區域90而所需之ROI轉換區域。

ROI區域控制部44係為了不會在原畫像80上所設定的ROI區域的周邊區域產生雜訊(noise)即可連原畫像80亦進行解碼，而在各分割層級的各次頻帶內，決定應進行解碼的小波轉換係數的對象區域的開始位置與大小。將其設定在編碼資料抽出部30。

將原畫像80中的ROI區域開始的x或y座標設為P，ROI區域的x或y方向的大小設為Q時，在各分割層級中的解碼對象區域的開始座標及大小係如下所示。

分割層級1…開始座標P/2－α，大小Q/2＋β分割層級2…開始座標(P/2－α)/2－α、大小(Q/2＋β)/2＋β分割層級3…開始座標{(P/2－α)/2－α}/2－α、大小{(Q/2＋β)/2＋β}/2＋β分割層級J…開始座標〔…〕/2－α，大小〔…〕/2＋β

藉由對於x及y進行上述計算，可求出在各分割層級中的解碼對象區域的開始座標及大小。在開始座標中，當在減去最後的α之前的值產生小數點以下時，即將其捨去。另一方面，關於大小，當在加上最後的β之前的值產生小數點以下時，即將其進位。α、β的值雖可由設計者任意設定，但是亦可設定為例如α＝1、β＝2或α＝2、β＝4。當在ROI區域的上下左右對稱設置周邊區域時，β的值是α的2倍。該值係依存於所使用的濾波器。濾波次數愈多，則最好取較多的周邊區域的像素。

根據以上說明的第2實施形態，將明示性記述於編碼流的ROI資訊進行解碼，以可活用該資訊而實現各種處理。例如，可抽出ROI區域或包含其周邊畫素的區域，以輕易將其再生顯示。此外亦可分別以所希望的畫質將ROI區域以及該ROI區域以外的區域予以再生。

以上係根據實施形態來說明本發明。實施形態僅為例示，對於該等之各構成要素或各處理程序的組合可能有各種變形例，此外，該等變形例亦在本發明之範圍內，而為熟習該項技術者所能理解。以下表示該等變形例。

在上述實施形態中，ROI區域亦可為僅有物件(object)的區域。此時，系統可將作為ROI資訊的用以特定物件的資訊記述於標頭等。與實施形態同樣地，利用圖框間預測處理將有關該物件之形狀變化的資訊等加以記述，藉此可減少該資訊的編碼量。

在上述實施形態中，雖係將以JPEG2000方式連續編碼的動態畫像的編碼流進行解碼，但是並不限於JPEG2000方式，簡言之，只要是將動態畫像的編碼流進行解碼的方式即可。

於上述實施形態中，以供畫像編碼之用的空間濾波而言，對於小波轉換加以說明，但是亦可使用其他的空間頻率轉換。例如，亦可使用在JPEG標準中所使用的離散餘弦轉換(discrete cosine transformation)。

(產業利用可能性)

本發明係可利用在將畫像進行編碼的裝置或將畫像進行解碼的裝置。

10．．．小波轉換部

12．．．量子化部

14．．．熵編碼部

16．．．編碼流產生部

20．．．ROI設定部

22．．．ROI預測處理部

24．．．ROI資訊編碼部

30．．．編碼資料抽出部

32．．．熵解碼部

34．．．逆量子化部

36．．．小波逆轉換部

40．．．ROI資訊解碼部

42．．．ROI預測處理部

44．．．ROI區域控制部

100．．．畫像編碼裝置

200．．．畫像解碼裝置

第1圖係為第1實施形態之畫像編碼裝置的構成圖。

第2圖(a)至(c)係表示ROI區域遷移之一例圖。

第3圖係表示編碼流之一例圖。

第4圖係為第2實施形態之畫像解碼裝置的構成圖。

第5圖(a)至(c)係表示各分割層級(level)中之ROI區域之示意圖。

10．．．小波轉換部

12．．．量子化部

14．．．熵編碼部

16．．．編碼流產生部

20．．．ROI設定部

22．．．ROI預測處理部

24．．．ROI資訊編碼部

100．．．畫像編碼裝置

Claims (4)

1. 一種畫像解碼方法，其特徵為：參照用以特定在原畫像上所定義的矚目區域之資訊，從編碼流將包括矚目區域在內之區域予以解碼，其中，前述資訊係明示地敘述在包含前述畫像之編碼資料之編碼流內；當有複數個矚目區域定義在前述原畫像上時，即參照用以特定在前述原畫像上所定義之複數個矚目區域之資訊，從前述編碼流將前包含述複數個矚目區域之區域予以解碼；前述用以特定前述複數個矚目區域之資訊包括各該矚目區域之優先度，而依各矚目區域之優先度處理各矚目區域。
2. 一種畫像解碼裝置，包括：矚目區域資訊解碼部，將明示地敘述在包含畫像之編碼資料之編碼流內而用以特定在原畫像上所定義的矚目區域之資訊予以解碼；畫像解碼部，將包括矚目區域在內之區域參照解碼資訊從編碼流予以解碼；當有複數個矚目區域定義在前述原畫像上時，前述矚目區域資訊解碼部將用以特定在前述原畫像上所定義之複數個矚目區域之資訊予以解碼；前述畫像解碼部參照該解碼資訊將包含前述複數個矚目區域之區域從前述編碼流予以解碼； 前述用以特定複數個矚目區域之資訊含有各矚目區域之優先度；前述畫像解碼部即依各矚目區域之優先度處理各前述矚目區域。
3. 一種畫像解碼方法，其特徵為：參照用以特定在原動態畫像上定義之矚目區域而且明示地敘述在包含前述動態畫像之編碼資料之編碼流之資訊，將包含矚目區域在內之區域從前述編碼流予以解碼；當有複數個矚目區域定義在前述原動態畫像時，即參照用以特定在前述原動態畫像上所定義之複數個矚目區域之資訊，將包含前述複數個矚目區域之區域從前述編碼流予以解碼；前述用以特定複數個矚目區域之資訊包含各矚目區域之優先度，而依各矚目區域之優先度處理各矚目區域。
4. 一種畫像解碼裝置，包括：矚目區域資訊解碼部，將用以特定在原動態畫像上之矚目區域而明示地敘述於包含動態畫像之編碼資料在內之編碼流之資訊予以解碼；以及畫像解碼部，參照解碼資訊將包含前述矚目區域在內之區域從前述編碼流予以解碼；當有複數個矚目區域定義在前述原動態畫像時，前述矚目區域資訊解碼部將用以特定在前述動態畫像上 所定義之複數個矚目區域之資訊予以解碼；前述畫像解碼部則參照解碼資訊將包含前述複數個矚目區域之區域從前述編碼流予以解碼；前述用以特定前述複數個矚目區域之資訊包含各矚目區域之優先度；前述畫像解碼部依各個矚目區域之優先度處理各矚目區域。