TWI643490B - Video decoding device, image decoding method, and recording medium storing image decoding program - Google Patents
Video decoding device, image decoding method, and recording medium storing image decoding program Download PDFInfo
- Publication number
- TWI643490B TWI643490B TW106144240A TW106144240A TWI643490B TW I643490 B TWI643490 B TW I643490B TW 106144240 A TW106144240 A TW 106144240A TW 106144240 A TW106144240 A TW 106144240A TW I643490 B TWI643490 B TW I643490B
- Authority
- TW
- Taiwan
- Prior art keywords
- filter
- ctb
- block
- flag
- image
- Prior art date
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
一種影像解碼裝置,係將編碼列串流進行解碼所得之圖像予以濾波,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其係具備:領域資訊取得部,係將圖像被分割成區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得部,係將用來表示是否從身為解碼對象之區塊的上邊方向所相鄰之已解碼區塊取得身為解碼對象之區塊的濾波器參數的取得旗標,從編碼列串流中加以取得,當取得旗標是表示進行取得之意旨時,則從上邊方向所相同之已解碼區塊取得濾波器參數,當取得旗標是表示不取得之意旨時,則從編碼列串流中取得關於濾波器參數之資訊;和影像資料解碼部,係將區塊編碼列予以解碼而取得身為解碼對象之區塊的解碼影像資料;和濾波部,係將解碼影像資料基於濾波器參數而進行濾波;濾波器參數取得部,係檢查身為解碼對象之區塊是否在上邊方向銜接於瓷磚交界,若身為解碼對象之區塊是在上邊方向銜接於瓷磚交界,則不從編碼列串流取得取得旗標。
Description
本發明係有關於利用運動補償預測的動態影像編碼及解碼技術,尤其是有關於,將作為迴圈濾波器而發揮機能之濾波器資訊而進行編碼及解碼的動態影像編碼及解碼技術。
在一般的動態影像壓縮編碼亦即MPEG-4AVC/H.264(以下簡稱AVC)中,作為迴圈濾波器會利用去區塊濾波器。AVC的去區塊濾波器,係將對象影像分割成細緻的區塊,對每一區塊將相鄰之區塊的交界附近之像素進行補正的技術。
去區塊濾波器係將因區塊間之量化寬度或預測方法之相異等而產生的區塊之交界附近的誤差,以像素單位進行補正,將已補正之圖像當作參照圖像而在運動補償預測中做利用,藉此以提升預測效率。
專利文獻1中係揭露AVC的去區塊濾波器之控制方法。
[專利文獻1]WO2009/093472號公報
AVC的去區塊濾波器係只會補正區塊交界附近的像素,因此無法補正非區塊交界的區塊內部之像素。因此,在非區塊交界之區塊內部之像素有產生誤差的情況下,會導致預測效率不佳。
此種狀況下,本發明人們係在使用迴圈濾波器的動態影像編碼方式中,即使在非區塊交界之區塊內部之像素有產生誤差的情況下,仍必須要提升預測效率,認知到此一必要性。
本發明係有鑑於此種狀況而研發,其目的在於,在非區塊交界之區塊內部之像素有產生誤差的情況下,仍藉由補正非區塊交界之區塊內部之像素,以謀求預測效率之提升而提供一種促進編碼效率提升的動態影像編碼及解碼技術。
提供一種影像解碼裝置,係將編碼列串流進行解碼所得之圖像予以濾波的影像解碼裝置,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,具備:領域資訊取得部,係將前記圖像被
分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得部,係將用來表示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼部,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波部,係將前記解碼影像資料基於前記濾波器參數而進行濾波;前記濾波器參數取得部,係檢查前記身為解碼對象之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
提供一種影像解碼方法,係將編碼列串流進行解碼所得之圖像予以濾波的影像解碼方法,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,具備:領域資訊取得步驟,係將前記圖像被分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得步驟,係將用來表
示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼步驟,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波步驟,係將前記解碼影像資料基於前記濾波器參數而進行濾波;前記濾波器參數取得步驟,係檢查前記身為解碼對象之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
提供一種記錄媒體,係儲存有,將編碼列串流進行解碼所得之圖像予以濾波的影像解碼程式之記錄媒體,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,前記影像解碼程式係令電腦執行:領域資訊取得步驟,係將前記圖像被分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得步驟,係將用來表示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗
標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼步驟,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波步驟,係將前記解碼影像資料基於前記濾波器參數而進行濾波;前記濾波器參數取得步驟,係檢查前記身為解碼對象之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
此外,即使將以上構成要素之任意組合、本發明之表現,在方法、裝置、系統、記錄媒體、電腦程式等之間做轉換而成者,對本發明的態樣而言皆為有效。
若依據本發明,則在非區塊交界之區塊內部之像素有產生誤差的情況下,仍藉由補正非區塊交界之區塊內部之像素,而可實現預測效率之提升。
100‧‧‧動態影像編碼裝置
101‧‧‧影像資料取得部
102‧‧‧CTB編碼部
103‧‧‧濾波器參數決定部
104‧‧‧迴圈濾波器
105‧‧‧濾波器參數編碼部
106‧‧‧畫格記憶體
107‧‧‧編碼列多工部
110‧‧‧編碼控制部
111‧‧‧瓷磚設定部
112‧‧‧迴圈濾波器設定部
113‧‧‧領域資訊設定部
120‧‧‧濾波器參數設定部
121‧‧‧迴圈濾波器執行部
122‧‧‧誤差計測部
123‧‧‧濾波器參數確定部
130‧‧‧濾波器類型判定部
131‧‧‧邊緣型濾波器
132‧‧‧頻帶型濾波器
141‧‧‧邊緣角度設定部
142‧‧‧相鄰像素設定部
143‧‧‧邊緣類型判定部
144‧‧‧邊緣偏置值設定部
145‧‧‧邊緣偏置值加算部
151‧‧‧頻帶寬設定部
152‧‧‧頻帶位置設定部
153‧‧‧頻帶偏置值設定部
154‧‧‧頻帶偏置值加算部
200‧‧‧動態影像解碼裝置
201‧‧‧編碼列分離部
202‧‧‧CTB解碼部
203‧‧‧迴圈濾波器
204‧‧‧濾波器參數解碼部
205‧‧‧畫格記憶體
210‧‧‧解碼控制部
[圖1]CTB與CU之關係的說明圖。
[圖2]瓷磚的說明圖。
[圖3]第1實施形態所述之動態影像編碼裝置之構成
的說明圖。
[圖4]第1實施形態所述之動態影像編碼裝置之動作的流程圖。
[圖5]CTB位址與CTB編碼順序的說明圖。
[圖6]圖3的濾波器參數決定部之構成的說明圖。
[圖7]圖3的濾波器參數決定部之動作的說明用流程圖。
[圖8]圖6的邊緣型濾波器部之動作的說明用流程圖。
[圖9]相應於邊緣角度的相鄰像素A與相鄰像素B的說明圖。
[圖10]右邊或下邊與瓷磚交界銜接的CTB之像素A與像素X的說明圖。
[圖11]圖6的頻帶型濾波器部之動作的說明用流程圖。
[圖12]編碼對象CTB與編碼對象CTB所相鄰之CTB的說明圖。
[圖13]圖3的濾波器參數編碼部之動作的說明用流程圖。
[圖14]相鄰CTB之有效性之導出的說明用流程圖。
[圖15]語法的說明圖。
[圖16]語法的說明圖。
[圖17]第1實施形態所述之編碼串流之構成之一例的說明圖。
[圖18]第1實施形態所述之動態影像解碼裝置之構成的說明圖。
[圖19]第1實施形態所述之動態影像解碼裝置之動作的流程圖。
[圖20]圖18的濾波器參數解碼部之動作的說明用流程圖。
[圖21]第2實施形態所述之動態影像編碼裝置之動作的流程圖。
[圖22]第2實施形態所述之編碼串流之構成之一例的說明圖。
[圖23]第2實施形態所述之動態影像解碼裝置之動作的流程圖。
[圖24]第3實施形態所述之PPS之語法的說明圖。
[圖25]第3實施形態所述之動態影像編碼裝置之動作的流程圖。
[圖26]第3實施形態所述之動態影像解碼裝置之動作的流程圖。
[圖27]第3實施形態之邊緣型濾波器部之動作的流程圖。
[圖28]第3實施形態中的相鄰CTB之有效性之導出的流程圖。
[圖29]第4實施形態所述之PPS之語法的說明圖。
[圖30]第4實施形態中的相鄰CTB之有效性之導出的流程圖。
[圖31]第5實施形態中的隨應於CTB之位置而可利用之濾波器類型的說明圖。
[圖32]第5實施形態中的邊緣型濾波器部之動作的流程圖。
[圖33]第6實施形態所述之loopfliter_type_idx之編碼列的說明圖。
[圖34]第6實施形態中的相鄰CTB之有效性之導出的流程圖。
[圖35]第7實施形態所述之迴圈濾波器單元之語法的說明圖。
[圖36]第7實施形態所述之loopfliter_type_idx之編碼列的說明圖。
[圖37]第4實施形態所述之動態影像解碼裝置200之動作的流程圖。
首先說明作為本發明的實施形態之前提的技術。
在2003年,由國際標準化機構(ISO)與國際電氣標準會議(IEC)之聯合技術委員會(ISO/IEC),和國際電氣通訊聯合電氣通訊標準化部門(ITU-T)的共同作業,一種稱作AVC的動態影像編碼方式(在ISO/IEC中稱作14496-10、在ITU-T中編號為H.264之規格號碼)是被制
定成為國際標準。在AVC中作為迴圈濾波器係利用了去區塊濾波器。
首先說明去區塊濾波器。去區塊濾波器係藉由量化參數或表示是否為Intra預測(畫面內預測)還是畫面間預測(運動補償預測)等之資訊,將去區塊濾波器之強度以區塊單位做適應性改變,藉由區塊交界附近之像素間的像素值之差異,以像素單位來控制去區塊濾波器的ON/OFF,同時,將因區塊間之量化寬度或預測方法之相異等而產生的區塊之交界附近的誤差,以像素單位進行補正以降低誤差之技術。去區塊濾波器係降低視覺上容易醒目的區塊交界之誤差以促進主觀畫質提升,甚至還將降低了區塊交界誤差的影像,當作參照影像來使用,藉此,來提升畫面間預測之效率,具有如此效果。
作為去區塊濾波器的控制資訊,在AVC中係為,將去區塊濾波器以切片單位進行ON/OFF所需的旗標、用來調整去區塊濾波器之適用程度(像素單位之ON/OFF)所需的資訊,是被放在切片標頭中。
近年來硬體或CPU係採取以平行處理為前提之構成,但就一般而言,動態影像編碼也要支援平行處理,會是重要的課題。影像的尺寸越大,則此課題也會越大。因此,在一般的動態影像編碼方式亦即AVC等中,是將動態影像圖像分割成複數領域,為了將各領域平行地進行編碼或解碼,而會採用切片。將切片做平行處理時,各切片交界的去區塊濾波器之處理,會是一個課題。在
AVC的去區塊濾波器中,從影像的左上之區塊按照逐線掃描順序而針對各區塊依序地處理垂直方向之濾波器與水平方向之濾波器,因此無法事先處理領域交界的去區塊濾波器。因此,在AVC中係導入了以切片單位來將去區塊濾波器進行ON/OFF所需之旗標,在容易實現包含迴圈濾波器之平行處理等時候,會被利用。
可是,AVC的去區塊濾波器係只能夠補正區塊交界附近的像素,因此在非區塊交界之區塊內部之像素有產生誤差的情況下,有可能導致預測效率不佳。於是,作為不只有區塊交界,就連區塊內部像素也進行補正的濾波器,而導入SAO濾波器(Sample Adaptative Offset Filter)。
此處,說明SAO濾波器之概要。SAO濾波器係不僅對區塊交界附近之像素、就連區塊內部之所有像素,都會施加所定的偏置值,將像素予以補正的濾波器。對了為區塊內部之所有像素進行處理,像是去區塊濾波器這樣利用區塊間之相異等之資訊來進行詳細的適應處理是有困難的,必須要用比去區塊濾波器還細緻的領域單位來調整偏置值,以謀求性能的提升。藉由以細緻的領域單位來調整偏置值,雖然可以提升誤差補正的精度,但以細緻的領域單位將偏置值進行編碼所需的編碼量會增加,因此必須要抑制之。SAO濾波器的細節,將於後述。
以下,實現可使SAO濾波器有效動作的動態影像編碼裝置及動態影像解碼裝置。
在本實施形態中,已被輸入之影像訊號(圖像)係被分割成編碼樹區塊單位而進行編碼與解碼之處理。編碼樹區塊(CTB)係被階層式4分割,而成為編碼單元(CU)。CTB內的各CU係分別使用畫面內預測或畫面間預測而被預測編碼。
在本實施形態中,係將CTB設成64(像素)×64(像素),最大的分割次數是3次。因此,作為CU之大小,係存在有8×8、16×16、32×32、64×64。圖1係CTB與CU之關係的說明圖。
在本實施形態中,雖然是將CTB設成64(像素)×64(像素),CTB的最大分割次數是3次,但不限定於該組合。又,CU係亦可又再被分割成1個至4個預測區塊,針對各個預測區塊,使用畫面內預測或畫面間預測而被預測編碼。
圖像係為身為編碼與解碼之單位的1張影像。在圖像中係有:僅使用畫面內預測的I圖像、使用畫面內預測與單預測之畫面間預測的P圖像、使用畫面內預測、單預測與雙預測之畫面間預測的B圖像。
在本實施形態中,導入了一種可定義成將圖像做垂直方向與水平方向分割而成之領域的「瓷磚」(Tile)。
接著用圖來說明瓷磚。圖2係瓷磚的說明圖。圖2(a)係為圖像被垂直方向分割成2個,圖像是由瓷磚0與瓷磚1所構成的例子。圖2(b)係為圖像被垂直方向與水平方向分別分割成2個,圖像是由瓷磚0至瓷磚3所構成的例子。圖像內的瓷磚係按照逐線掃描順序而被處理。又,瓷磚內的CTB係按照逐線掃描順序而被處理。此處,雖然為了便於說明而將瓷磚設成在圖像內同一大小,但瓷磚並不一定要是同一大小。如圖2(a)與圖2(b)所示,瓷磚係被定義成矩形領域。
在本實施形態中,切片係將瓷磚內的CTB,以逐線掃描順序而加以包含。此處,雖然圖像內之切片是設成1個來說明,但切片係可由1個瓷磚內的1個以上之CTB所構成。亦即,瓷磚係亦可被分割成1個以上的切片。又,切片係亦可包含有複數個瓷磚。亦即,亦可將複數瓷磚整合成1個切片。
在本實施形態中,藉由導入瓷磚,而可實現切片所無法實現的垂直方向之領域分割。藉由在垂直方向分割領域,可減少各瓷磚的水平像素數,在將各瓷磚進行獨立處理(平行處理)時,可削減掃描線記憶體量。另一方面,藉由分割成瓷磚而會使垂直方向之交界變長,因此垂
直方向之交界的處理,會有編碼效率或被被認知成視覺性異樣感等課題。這是越大畫面則影響越大。又,瓷磚內的CTB係依照逐線掃描順序而被處理而切片係將瓷磚內的CTB按照逐線掃描順序而予以包含之構成,因此由於將瓷磚與切片做組合,而會導致關於切片的垂直方向之交界,有時候也會產生同樣的課題。此外,僅以切片來構成領域的情況下,垂直方向之交界係僅在切片的開始CTB中發生,因此對垂直方向之交界的課題係較小。
以下,連同圖式來說明本發明的理想實施形態所述之動態影像編碼裝置、動態影像編碼方法及動態影像編碼程式、以及動態影像解碼裝置、動態影像解碼方法及動態影像解碼程式之細節。此外,圖式的說明中,對同一要素係賦予同一符號,並省略重複說明。
圖3係第1實施形態所述之動態影像編碼裝置100之構成的說明圖。動態影像編碼裝置100係將所被輸入之動態影像,以1圖像單位來進行編碼的裝置。
動態影像編碼裝置100,係由具備CPU(Central Processing Unit)、畫格記憶體、硬碟等的資訊處理裝置等硬體所實現。動態影像編碼裝置100,係藉由上記的構成要素的作動,而實現以下說明的機能性構成要素。
本實施形態的動態影像編碼裝置100係含
有:影像資料取得部101、CTB編碼部102、濾波器參數決定部103、濾波器參數編碼部105、迴圈濾波器104、畫格記憶體106、編碼列多工部107、及編碼控制部110。編碼控制部110係含有:瓷磚設定部111、迴圈濾波器設定部112、及領域資訊設定部113。
圖4係第1實施形態所述之動態影像編碼裝置100之動作的說明用流程圖。以下使用圖3與圖4來說明各部的機能與動作。此處,假設所被輸入之圖像的尺寸係為768×384,位元深度係為8位元。此時,CTB係在水平方向上存在12個、在垂直方向上存在6個,在圖像內有72個CTB存在。以下,令圖像的水平方向之CTB數為NumCtbInPicWidth。由於位元深度是8位元,因此像素值係為0至255。假設已被輸入之圖像係作為GOP(Group of Picture)而以一般的M=3、N=15而被編碼,I圖像係只有I切片,P圖像係只有P切片,B圖像係只有B切片而被編碼。此處,雖然將圖像之尺寸設成768×384而設定成CTB的倍數,但並非限定於此。又,雖然令GOP為M=3、N=15,但以可為會變成只有I圖像的N=1等,並非限定於此些。
首先,瓷磚設定部111係設定瓷磚(S100)。其後,除非特別聲明,否則都是假設圖像是如圖2(b)所示般地由4個瓷磚所構成。
接著,迴圈濾波器設定部112係設定迴圈濾波器資訊(S101)。此處,說明迴圈濾波器資訊。所謂迴圈濾波器資訊,係為迴圈濾波器交錯旗標(loopfilter_interleave_flag)。迴圈濾波器交錯旗標係為用來表示濾波器參數的編碼單位是以CTB單位來進行多工化還是以圖像單位來進行多工化的旗標。若迴圈濾波器交錯旗標為1,則表示濾波器參數是以CTB單位而被多工化,若迴圈濾波器交錯旗標為0,則表示濾波器參數是以圖像單位而被多工化。以下,令旗標係為0或1之值的1位元之資訊。
在本實施形態中,loopfilter_interleave_flag係被設定成1。亦即,濾波器參數係以CTB單位而被多工化。
首先,領域資訊設定部113係對CTB,設定CTB位址與CTB編碼順序(S102)。此處說明CTB位址與CTB編碼順序。圖5係CTB位址與CTB編碼順序的說明圖。
圖5(a)係表示,對圖像內的各CTB所被設定的CTB位址。CTB位址係如圖5(a)所示,是對圖像內的各CTB,按照逐線掃描順序而每次增加1地被設定。圖5(b)係表示,如圖2(b)般地圖像是由4個瓷磚所構成時的對圖像內的各CTB所設定之CTB編碼順序。第1瓷磚的CTB編碼順序係為0至17,第2瓷磚的CTB編碼順序係為18至35,第3瓷磚的CTB編碼順序係為36至53,第
4瓷磚的CTB編碼順序係為54至71。CTB編碼順序係如圖5(b)所示,是對瓷磚內的各CTB,按照逐線掃描順序而每次增加1地被設定。如圖5所示,當瓷磚被垂直方向分割時,就會產生CTB位址(CTB的位址順序)與CTB被編碼之順序無法相同的區塊。又,如圖5所示,CTB位址係隨應於圖像之逐線掃描順序而定,CTB編碼順序係隨應於瓷磚之逐線掃描順序而定。
如圖5所示,CTB位址係不依存於瓷磚而隨圖像的尺寸而被設定,CTB編碼順序係隨著圖像的尺寸與瓷磚的尺寸而被設定。亦即,CTB位址係表示圖像內之位置,藉由CTB位址就可獲得CTB在圖像內的位置關係。為了識別CTB是隸屬於哪個瓷磚,可以使用CTB位址與CTB編碼順序之任一者或雙方。
又,編碼控制部110,係將SPS、PPS、切片標頭等圖像進行編碼所必須之資訊,因應需要而加以設定並管理。關於SPS、PPS、切片標頭,將於後述。然後,控制影像資料取得部101、CTB編碼部102、濾波器參數決定部103、濾波器參數編碼部105、迴圈濾波器104、畫格記憶體106、及編碼列多工部107,生成編碼串流。
此外,瓷磚、迴圈濾波器資訊、SPS、PPS、切片標頭等圖像編碼所必須之資訊,是在動態影像編碼裝置100內被共用,這些資料的流向之說明,在沒有特別情況下,係被省略。
接著,依照CTB編碼順序,針對圖像內的所
有CTB,重複進行以下處理(S103至S111)。
接著,影像資料取得部101係基於身為編碼對象之CTB亦即編碼對象CTB在圖像內之位置,從端子10所輸入之影像資料,取得該當於編碼對象CTB的CTB的原影像資料(S104)。然後,影像資料取得部101係將CTB的原影像資料,供給至CTB編碼部102。又,影像資料取得部101係將CTB的原影像資料,供給至濾波器參數決定部103。此處,將編碼對象CTB所屬之瓷磚令作編碼對象瓷磚,將編碼對象CTB所屬之切片令作編碼對象切片。
接著,進行熵編碼部之設定(S105)。此處,說明熵編碼部之設定。若編碼對象CTB是切片或瓷磚的最初之CTB,則CTB編碼部102係將CTB編碼部102內部的熵編碼部予以初期化,濾波器參數編碼部105係將濾波器參數編碼部105內部的熵編碼部予以初期化。此外,假設CTB編碼部102內部的熵編碼部與濾波器參數編碼部105內部的熵編碼部,係為被AVC所利用之算術編碼的CABAC。
接著,CTB編碼部102係將影像資料取得部101所供給之CTB的原影像資料基於切片類型,進行畫面內預測(Intra預測)或運動補償預測(畫面間預測)而算出誤差訊號,針對誤差訊號使用正交轉換或量化處理來進行編碼,生成CTB編碼列,並且進行局部解碼而生成解碼影像資料(S106)。此外,CTB編碼部102所進行之編碼的處
理,係只要是將CTB進行階層式量化等而有產生編碼失真之可能性的方法即可,這裡省略詳細說明。又,針對局部解碼也是一般的動態影像編碼中所會進行之手法因此這裡省略詳細說明,但解碼影像資料係為,將動態影像編碼裝置100所輸出之編碼串流予以解碼之際所得之影像資料。CTB編碼部102,係將已生成之CTB編碼列,供給至編碼列多工部107。又,CTB編碼部102係將解碼影像資料供給至濾波器參數決定部103與迴圈濾波器104。
接著,濾波器參數決定部103係基於影像資料取得部101所供給之CTB的原影像資料與CTB編碼部102所供給之解碼影像資料,來決定濾波器參數(S107)。濾波器參數決定部103,係將濾波器參數供給至濾波器參數編碼部105與迴圈濾波器104。濾波器參數決定部103的細節,將於後述。
迴圈濾波器104,係基於濾波器參數決定部103所供給之濾波器參數,而對CTB編碼部102所供給之解碼影像資料,執行迴圈濾波器(S108)。將執行迴圈濾波器而獲得之新的解碼影像資料,供給至畫格記憶體106。
接著,濾波器參數編碼部105係將濾波器參數決定部103所供給之濾波器參數,編碼成迴圈濾波器單元(S109),將迴圈濾波器單元供給至編碼列多工部107。關於濾波器參數編碼部105與迴圈濾波器單元,將於後述。
接著,編碼列多工部107係將CTB編碼部
102所供給之CTB編碼列與濾波器參數編碼部105所供給之迴圈濾波器單元,因應需要而連同SPS、PPS、切片標頭等一起多工化成為編碼串流(S110),將編碼串流由端子11予以輸出。編碼列多工部107的細節,將於後述。
若對圖像內的全部CTB都處理完成,則結束處理。
接著說明濾波器參數決定部103的詳細構成。圖6係濾波器參數決定部103之構成的說明圖。如圖6所示,濾波器參數決定部103係由濾波器參數設定部120、迴圈濾波器執行部121、誤差計測部122、及濾波器參數確定部123所構成。端子12係連接至CTB編碼部102,端子13係連接至影像資料取得部101,端子14係連接至濾波器參數編碼部105與迴圈濾波器104。迴圈濾波器執行部121係含有:濾波器類型判定部130、邊緣型濾波器131、頻帶型濾波器132。
接下來,說明濾波器參數決定部103的動作。圖7係濾波器參數決定部103之動作的說明用流程圖。以下使用圖6與圖7,來說明濾波器參數決定部103的動作。
首先,濾波器參數設定部120係基於端子12所供給之解碼影像資料與端子13所供給之原影像資料,而生成濾波器參數候補清單(S120),將已生成之濾波器參
數候補清單,供給至迴圈濾波器執行部121。濾波器參數設定部120的細節,將於後述。
接著,針對濾波器參數候補清單中所被登錄的所有濾波器參數,重複以下之處理(S121至S126)。
首先,迴圈濾波器執行部121係對端子12所供給之解碼影像資料,基於濾波器參數而適用迴圈濾波器以生成新的解碼影像資料(S122),將該當解碼影像資料供給至誤差計測部122。迴圈濾波器執行部121的細節,將於後述。
誤差計測部122係算出迴圈濾波器執行部121所供給之解碼影像資料與端子13所供給之原影像資料的誤差評價值(S123)。此處,令誤差評價值係為區塊內的解碼影像資料與原影像資料的絕對差分和(SAD)。
接著,誤差計測部122係檢查誤差評價值是否為最小(S124)。若誤差評價值為最小(S124的Y),則將濾波器參數供給至濾波器參數確定部123,濾波器參數確定部123係將該當濾波器參數予以保持(S125)。
若誤差評價值並非最小(S124的N),則下個濾波器參數會被處理(S126)。一旦濾波器參數候補清單中所被登錄的所有濾波器參數之處理都完成,則將濾波器參數確定部123所保持之誤差評價值為最小的濾波器參數,確定成為濾波器參數(S127),結束處理。
此處,雖然作為誤差評價值是使用了SAD,但只要是能夠算出濾波器參數即可,並不限於此,亦可使
用SSD等。又,亦可不只是解碼影像資料與原影像資料之誤差,還加上濾波器參數傳輸時所必須的編碼量來一起評估。
接著說明濾波器參數設定部120的細節。
首先說明濾波器參數。濾波器參數係由:濾波器類型、頻帶寬、頻帶位置、偏置0、偏置1、偏置2、偏置3、偏置4所構成。
濾波器類型中係有:濾波器類型0、濾波器類型1、濾波器類型2、濾波器類型3、濾波器類型4、及濾波器類型5這6者。
濾波器類型0係表示不處理迴圈濾波器,濾波器類型1係表示迴圈濾波器是頻帶型濾波器,濾波器類型2至濾波器類型5係表示迴圈濾波器是邊緣型濾波器。
濾波器參數設定部120係若解碼影像資料與原影像資料之誤差評價值是在閾值以下,則生成僅以濾波器類型0來構成濾波器類型的濾波器參數候補清單,若誤差評價值是閾值以下,則生成含有濾波器參數所能採取之全部組合之濾波器參數的濾波器參數候補清單。
接著說明迴圈濾波器執行部121的細節。迴圈濾波器執行部121係由:濾波器類型判定部130、邊緣型濾波器
131、頻帶型濾波器132所構成。
接下來,說明迴圈濾波器執行部121的動作。
首先,濾波器類型判定部130係進行濾波器類型之判定。若濾波器類型為0,則將端子12所供給之解碼影像資料當作濾波器適用後的解碼影像資料而輸出至誤差計測部122。若濾波器類型為1,則頻帶型濾波器132係對端子12所供給之解碼影像資料基於濾波器參數而適用頻帶型濾波器,將濾波器適用後的解碼影像資料,輸出至誤差計測部122。若濾波器類型是2至5,則邊緣型濾波器131係對端子12所供給之解碼影像資料基於濾波器參數而適用邊緣型濾波器,將濾波器適用後的解碼影像資料,輸出至誤差計測部122。
接著說明邊緣型濾波器131的細節。邊緣型濾波器131係含有:邊緣角度設定部141、相鄰像素設定部142、邊緣類型判定部143、邊緣偏置值設定部144、及邊緣偏置值加算部145。
圖8係邊緣型濾波器131之動作的說明用流程圖。以下使用圖8來說明邊緣型濾波器131之動作。
首先,邊緣角度設定部141,係進行邊緣角度之判定(S130)。邊緣角度n係設為濾波器類型n。n係為2,3,4,5。接著,對編碼樹區塊內的64個像素X,按照
逐線掃描順序而重複進行以下處理(S131至S139)。X係為0、1、2、‧‧‧、63。
首先,相鄰像素設定部142係設定相應於邊緣角度的相鄰像素A與相鄰像素B(S132)。至於相應於邊緣角度的相鄰像素A與相鄰像素B將於後述。接著,相鄰像素設定部142係檢查相鄰像素A或相鄰像素B是否為圖像外(S133)。若相鄰像素A或相鄰像素B是圖像外(S133的Y),則邊緣偏置值設定部144係將偏置值設定成0(S137),邊緣偏置值加算部145係對像素X加算偏置值而算出處理像素X’(S138)。若相鄰像素A或相鄰像素B並非圖像外(S133的N),則檢查loopfilter_interleave_flag是否為1(S140)。若loopfilter_interleave_flag為1(S140的Y),則相鄰像素設定部142係檢查相鄰像素A或相鄰像素B是否為瓷磚外(S134)。所謂相鄰像素A或相鄰像素B是瓷磚外係指,相鄰像素A或相鄰像素B是被包含在,與像素X不同之瓷磚中所屬之CTB裡。若loopfilter_interleave_flag並非1(S140的N),則邊緣類型判定部143係進行邊緣類型之判定(S135)。
若相鄰像素A或相鄰像素B是瓷磚外(S134的Y),則邊緣偏置值設定部144係將偏置值設定成0(S137),邊緣偏置值加算部145係對像素X加算偏置值而算出處理像素X’(S138)。若相鄰像素A或相鄰像素B並非瓷磚外(S134的N),則邊緣類型判定部143係進行邊緣類型之判定(S135)。關於邊緣類型之判定將於後述。接
著,邊緣偏置值設定部144係進行偏置值之設定(S136)。接著,邊緣偏置值加算部145係對像素X加算偏置值而算出處理像素X’(S138)。關於處理像素X’之算出將於後述。
圖9係相應於邊緣角度的相鄰像素A與相鄰像素B的說明圖。邊緣角度1的情況下,相鄰像素A係為像素X的左方之像素,相鄰像素B係為像素X的右方之像素(圖9(a))。邊緣角度2的情況下,相鄰像素A係為像素X的上方之像素,相鄰像素B係為像素X的下方之像素(圖9(b))。邊緣角度3的情況下,相鄰像素A係為像素X的右上之像素,相鄰像素B係為像素X的左下之像素(圖9(c))。邊緣角度4的情況下,相鄰像素A係為像素X的左上之像素,相鄰像素B係為像素X的右下之像素(圖9(d))。如此,對水平方向、垂直方向、右斜方向、及左斜方向,施加邊緣型濾波器而令其作用,就可補正各方向上所產生之誤差。此處,邊緣角度1、邊緣角度2、邊緣角度3、及邊緣角度4係分別被指派至濾波器類型2、濾波器類型3、濾波器類型4、及濾波器類型5。
如以上所述,於邊緣型濾波器131中,當濾波器參數是以CTB單位而被多工化(loopfilter_interleave_flag為1)時,若相鄰像素A或相鄰像素B是瓷磚外,則藉由將偏置值設定成0所令迴圈濾波
器不作用,就可使迴圈濾波器之動作,在CTB單位中就完結。因此,如圖10所示,為了對CTB內之像素且右邊或下邊銜接於瓷磚交界的CTB內之像素X,使迴圈濾波器產生作用所必須的濾波器適用前的像素A與像素X,就沒有必要跨過瓷磚交界而被保持。
邊緣類型係由,將像素X與相鄰像素A之差分的符號、與像素X與相鄰像素B之差分的符號之和所加算而成的值,亦即符號和SS所決定。若令像素m之像素為P(m),則符號和SS係以式(1)而被算出。
SS=Sign(P(X)-P(A))+Sign(P(X)-P(B)); 式(1)
此處,Sign(i)係為,若輸入值i未滿0則回送-1,若輸入值i是0以上則回送1的函數。
SS是0、-2、-1、1、2時的邊緣類型,分別令作0、1、2、3、4。作為邊緣類型的0、1、2、3、4之偏置值,係分別設定偏置0、偏置1、偏置2、偏置3、偏置4。此處,SS為0時,像素X、相鄰像素A、及相鄰像素B是呈直線排列,因此認為沒有誤差而偏置0係設定成0。SS非0時係為了補正失真而將偏置0至偏置4分別設定成適切的值。
像素X的邊緣型濾波器適用後之處理像素X’,係用式(2)而算出。
P(X')=P(X)+OFFSET[SS]; 式(2)
此處,OFFSET[m]係為m(m=0,1,‧‧‧,4)。
如以上所述,在邊緣型濾波器中,係可對水平方向、垂直方向、右斜方向、及左斜方向,藉由與相鄰像素之差分的符號,以像素單位來適應性地補正誤差。
接著說明頻帶型濾波器132的細節。頻帶型濾波器132係含有:頻帶寬設定部151、頻帶位置設定部152、頻帶偏置值設定部153、及頻帶偏置值加算部154。
圖11係頻帶型濾波器132之動作的說明用流程圖。以下使用圖11來說明頻帶型濾波器之動作。
首先,頻帶寬設定部151係設定頻帶寬(S150)。
此處,說明頻帶寬。頻帶寬係為,將輸入影像所可能出現的像素值之範圍,分割成複數頻帶之際的頻帶寬。在本實施形態中,係令頻帶寬為32。在本實施形態中,由
於輸入影像是為8位元因此具有0至255的像素值之範圍,所以被分割成0至31(頻帶0)、32至63(頻帶1)、64至95(頻帶2)、96至127(頻帶3)、128至159(頻帶4)、160至191(頻帶5)、192至223(頻帶6)、224至255(頻帶7)這8個頻帶。
藉由如此設定頻帶寬,而將頻帶寬加大,就可將廣範圍的像素值整批進行補正,藉由縮小頻帶寬,就可將窄範圍的像素值整批進行補正。例如,某圖像內的像素所可能出現之像素值的範圍較廣時則將頻帶寬設成較大,某圖像內的像素所可能出現之像素值的範圍較廣時,則將頻帶寬縮小,就可隨應於圖像的特性,來適切地補正解碼影像。在本實施形態中,頻帶寬係為固定值來說明,但只要能將輸入影像所可能出現之像素值之範圍分割成1個以上之頻帶即可,亦可為16或128。又,將頻帶寬多工化至PPS等中而予以傳輸,配合圖像內的像素所可能出現之像素值的範圍等而做適應性變更,藉此可使頻帶型濾波器有效作用。
接在步驟S150之後,針對3個頻帶位置重複以下之處理(S151至S158)。此處,說明3個頻帶位置。第1個頻帶位置係為濾波器參數中所含之頻帶位置。第2個頻帶位置係為將第1個頻帶位置挪移1個後的頻帶位置。例如,若第1個頻帶位置是頻帶2,則第2個頻帶位置係為頻帶3。同樣地,第3個頻帶位置係為將第2個頻帶位置挪移1個後的頻帶位置。
頻帶位置設定部152係設定第b個頻帶位置(S152)。此處,b係為0與1。頻帶位置,係為表示藉由頻帶寬而被分割成的頻帶之任一者的值,此處係為0至7的整數。例如,頻帶位置0係表示頻帶0,頻帶位置2係表示頻帶3。
接在步驟S152之後,頻帶偏置值設定部153係設定每頻帶的偏置值(S153)。頻帶位置所示之頻帶的偏置值係被設定成偏置0,頻帶位置所示之頻帶以外之頻帶的偏置值係被設定成0。
接著,對像素值的編碼樹區塊內的64個像素X,按照逐線掃描順序而進行以下處理(S154至S157)。X係為0、1、‧‧‧、63。
首先,頻帶偏置值加算部154係決定像素X所屬之頻帶亦即xb(S155)。接著,頻帶偏置值加算部154係對像素X,加算像素X所屬之頻帶的偏置值Ob[xb]而算出處理像素X’(S156)。
像素X的頻帶型濾波器適用後之處理像素X’,係用式(3)而算出。
P(X')=P(X)+Ob[xb]; 式(3)
如以上所述,頻帶型濾波器係可僅將特定範
圍內之像素值的像素予以補正,因此具有降低平坦領域容易發生之雜訊的效果。尤其是,針對因為4:2:0格式等亮度訊號而減少了解像度的色差訊號,係由於相較於亮度訊號,DC中容易發生誤差之邊緣是比較少,因此頻帶型濾波器的效果較大。又,由於不參照相鄰像素,因此相較於邊緣類型之偏置,可實現更少的濾波處理量或記憶體量。
接著說明迴圈濾波器104。迴圈濾波器104,係具有與迴圈濾波器執行部121相同機能與動作,因此這裡省略說明。
接著說明濾波器參數編碼部105的細節。圖12係編碼對象CTB與編碼對象CTB所相鄰之CTB的說明圖。圖13係濾波器參數編碼部105之動作的說明用流程圖。以下使用圖12與圖13,來說明濾波器參數編碼部105的動作。
首先,將相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag,予以導出(S160)。接著,檢查available_left_ctb_flag是否為1(S161)。若available_left_ctb_flag為1(S161的Y),則檢查編碼對象CTB與編碼對象CTB之左方位置的CTB的
濾波器參數是否相同(S162)。此處,編碼對象CTB之左方位置的CTB,係為圖12的CTB的A。若編碼對象CTB與編碼對象CTB之左方位置的CTB的濾波器參數是相同(S162的Y),則將loopfilter_merge_left_flag設成1而將loopfilter_merge_left_flag進行編碼(S163),結束處理。若編碼對象CTB與編碼對象CTB之左方位置的CTB的濾波器參數並非相同(S162的N),則將loopfilter_merge_left_flag設成0而將loopfilter_merge_left_flag進行編碼(S164)。
若available_left_ctb_flag並非1(S161的N),則接在步驟S164之後,檢查available_above_ctb_flag是否為1(S165)。若available_above_ctb_flag為1(S165的Y),則檢查編碼對象CTB與編碼對象CTB之上方位置的CTB的濾波器參數是否相同(S166)。此處,編碼對象CTB之上方位置的CTB,係為圖12的CTB的B。若編碼對象CTB與編碼對象CTB之上方位置的CTB的濾波器參數是相同(S166的Y),則將loopfilter_merge_above_flag設成1而將loopfilter_merge_above_flag進行編碼(S167),結束處理。若編碼對象CTB與編碼對象CTB之上方位置的CTB的濾波器參數並非相同(S166的N),則將loopfilter_merge_above_flag設成0而將loopfilter_merge_above_flag進行編碼(S168)。接在步驟S168之後,將迴圈濾波器編碼參數
loopfilter_cod_param()予以編碼。此處,迴圈濾波器編碼參數,係將濾波器參數的所有要素予以編碼而成的編碼列。
此外,濾波器參數編碼部105係由於參照編碼對象CTB之左方與上方位置的CTB的濾波器參數,因此會將圖像內的所有CTB的濾波器參數加以保持。
此處,以CTB單位將濾波器參數進行編碼時,若將所有的濾波器參數當作迴圈濾波器編碼參數而予以編碼,則濾波器參數的編碼會需要龐大的編碼量,無法對影像資料所編碼而成之CTB編碼列分配足夠的編碼量,結果而言有可能導致編碼效率降低。又,當對同一物件中所屬之CTB使用了不同濾波器參數的情況下,同一物件內的迴圈濾波器之特性的差異,有可能會被視覺性辨識成為區塊失真。因此,一般而言在同一物件內,濾波器參數被設定成使得濾波器參數會是相同的可能性很高。因此如以上所述,當編碼對象CTB的濾波器參數是與編碼對象CTB所相鄰之已編碼之CTB的濾波器參數相同時,藉由將表示利用編碼對象CTB所相鄰之已編碼之CTB的濾波器參數來作為編碼對象CTB之濾波器參數這件事的1位元之旗標予以編碼,就可不會伴隨視覺性劣化,將迴圈濾波器編碼參數所需要之編碼量削減成1位元,提升編碼效率。此外,迴圈濾波器編碼參數的細節將於後述,但迴圈濾波器編碼參數之編碼所需之編碼量,係為遠大於1位元的編碼量。另一方面,當編碼對象CTB的濾波器參數
並非與編碼對象CTB所相鄰之已編碼之CTB的濾波器參數相同時,則將表示不利用編碼對象CTB所相鄰之已編碼之CTB的濾波器參數來作為編碼對象CTB之濾波器參數這件事的1位元之旗標予以編碼,將迴圈濾波器編碼參數予以編碼,藉此就可每CTB地變更濾波器參數。
此處,說明相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag之導出。圖14係相鄰CTB之有效性之導出的說明用流程圖。首先,available_left_ctb_flag與available_above_ctb_flag係被設定成1(S180)。接著,檢查編碼對象CTB的左邊是否銜接於圖像交界(S181)。若編碼對象CTB的左邊是銜接於圖像交界(S181的Y),則將available_left_ctb_flag設成0(S184)。若編碼對象CTB的左邊未銜接於圖像交界(S181的N),則檢查編碼對象CTB的左邊是否銜接於瓷磚交界(S182)。此處,所謂編碼對象CTB的左邊是銜接於瓷磚交界,係指編碼對象CTB與編碼對象CTB之左方位置的CTB是隸屬於個別之瓷磚。另一方面,所謂編碼對象CTB的左邊未銜接於瓷磚交界,係指編碼對象CTB與編碼對象CTB之左方位置的CTB是隸屬於同一之瓷磚。若編碼對象CTB的左邊是銜接於瓷磚交界(S182的Y),則檢查loopfilter_interleave_flag是否為1(S183)。若loopfilter_interleave_flag為1(S183的Y),則將available_left_ctb_flag設成0(S184)。若loopfilter_interleave_flag並非1(S183的N),則略過步驟
S184。若編碼對象CTB的左邊並未銜接於瓷磚交界(S182的N),則步驟S183與步驟S184係被略過。
接著,檢查編碼對象CTB的上邊是否銜接於圖像交界(S185)。若編碼對象CTB的上邊是銜接於圖像交界(S185的Y),則將available_above_ctb_flag設成0(S188)。若編碼對象CTB的上邊未銜接於圖像交界(S185的N),則檢查編碼對象CTB的上邊是否銜接於瓷磚交界(S186)。此處,所謂編碼對象CTB的上邊是銜接於瓷磚交界,係指編碼對象CTB與編碼對象CTB之上方位置的CTB是隸屬於個別之瓷磚。另一方面,所謂編碼對象CTB的上邊未銜接於瓷磚交界,係指編碼對象CTB與編碼對象CTB之上方位置的CTB是隸屬於同一之瓷磚。若編碼對象CTB的上邊是銜接於瓷磚交界(S186的Y),則檢查loopfilter_interleave_flag是否為1(S187)。若loopfilter_interleave_flag為1(S187的Y),則將available_above_ctb_flag設成0(S188)。若loopfilter_interleave_flag並非1(S187的N),則略過步驟S188。若編碼對象CTB的上邊並未銜接於瓷磚交界(S186的N),則步驟S187與步驟S188係被略過。
此處,濾波器參數是以CTB單位而被多工化(loopfilter_interleave_flag為1),編碼處理是以瓷磚單位而獨立(平行)進行的此種情況下,針對編碼對象CTB的左邊是銜接於瓷磚交界的編碼對象CTB,若許可從位於左方之CTB取得濾波器參數,則直到位於左方之CTB的濾波
器參數被確定之前,都無法檢查編碼對象CTB與濾波器參數與位於左方之CTB的濾波器參數是否相同,因此會有產生等待時間的可能性。於是,針對CTB之左邊是銜接於瓷磚交界的此種編碼對象CTB,係禁止位於左方之CTB的濾波器參數之利用。然後,藉由將available_left_ctb_flag設成0而變成不將loopfilter_merge_left_flag予以編碼,就可削減loopfilter_merge_left_flag的編碼量,抑制編碼效率的降低。又,藉由設定成不將loopfilter_merge_left_flag進行編碼,就可明示性地禁止位於左方之CTB的濾波器參數之利用。同樣地,當編碼對象CTB的上邊是銜接於瓷磚交界時,藉由將available_above_ctb_flag設成0而變成不將loopfilter_merge_above_flag予以編碼,就可抑制編碼效率的降低,可明示性地禁止位於上方之CTB的濾波器參數之利用。
接著,說明本實施形態所述之語法。在編碼時,語法中所含有之各要素,會被編碼至編碼串流中。另一方面,在解碼時,語法中所含有之各要素會從編碼串流中被解碼,可取得和編碼時所被編碼之要素相同的值。以下在沒有特別聲明的情況下,都假設構成語法之各要素係以固定長度位元而成之編碼列。圖15與圖16是說明語法的圖。以下使用圖15與圖16來說明語法。此處,雖然為了容易
說明而假設構成語法之各要素係以固定長度位元而成之編碼列,但亦可為可變長度位元。
首先說明SPS(Sequence Parameter Set)。SPS係為將用來決定序列(編碼串流)之特性所需之參數群加以定義的參數集。定義了圖像的尺寸、位元深度、CTB的尺寸、CTB的分割次數等。
接著說明PPS(Picture Parameter Set)。圖15(a)係為PPS之語法之一例的說明圖。PPS係為將用來決定圖像特性所需之參數群加以定義的參數集。PPS中係有loopfilter_interleave_flag、pic_loopfilter_param()、tiles_coding_flag、num_tile_columns_minus1、num_tile_rows_minus1、uniform_spacing_flag、colmn_width、colmn_height依照語法而被設置,於動態影像編碼時會被編碼,於動態影像解碼時會被解碼。
PPS之語法要素亦即tiles_coding_flag、以上的語法要素係num_tile_columns_minus1、num_tile_rows_minus1、uniform_spacing_flag、colmn_width、colmn_height,係為瓷磚資訊。tiles_coding_flag,係若為1則表示圖像是由複數瓷磚所構成,若為0則表示圖像並未以瓷磚所構成。num_tile_columns_minus1與num_tile_rows_minus1係分別表示將瓷磚在垂直方向與水平方向進行分割的數目。uniform_spacing_flag係用來決定是否將圖像以預先決定之方法進行分割的資訊。此處,所謂預先決定之方法,係
表示將圖像分割成相同大小之瓷磚。colmn_width[i]與colmn_height[i]係分別表示第i個瓷磚的寬度與高度。圖2(b)的情況下,num_tile_columns_minus1與num_tile_rows_minus1係設成1、uniform_spacing_flag係設成1而被編碼。此外,在序列單位內瓷磚之構成未被變更時,亦可將這些瓷磚資訊的語法要素,設置在SPS中。
接著說明切片標頭。圖15(b)係為切片標頭之語法之一例的說明圖。切片標頭係為定義了用來決定切片特性之參數群的標頭資訊。在切片標頭中,係有slice_address、slice_type、num_of_tiles、tile_position依照語法而被設置,於動態影像編碼時會被編碼,於動態影像解碼時會被解碼。
slice_address(切片位址),係表示切片中所含之最初CTB的CTB位址。slice_type(切片類型)係用來表示,僅使用畫面內預測的I切片、使用畫面內預測與單預測之畫面間預測(運動補償預測)的P切片、使用畫面內預測、單預測與雙預測之畫面間預測的B切片的值。num_of_tiles係表示切片中所含之瓷磚數。tile_position係表示瓷磚的開頭位元組之切片標頭從開頭位元組起算之位元組數。
圖16(a)係為PPS內的圖像迴圈濾波器參數(pic_loopfilter_param())之語法之一例的說明圖。在圖像迴圈濾波器參數中,loopfilter_unit()係依照語法而被設置,於動態影像編碼時會被編碼,於動態影像解碼時會被解碼。num_of_ctbs係為圖像內的總CTB數,PPS內係儲存有圖像內的所有CTB的loopfilter_unit()。
圖16(b)係為迴圈濾波器編碼參數(loopfilter_cod_param())之語法之一例的說明圖。在迴圈濾波器編碼參數中,係有loopfilter_type_idx、loopfilter_band_position、loopfilter_offset依照語法而被設置,於動態影像編碼時會被編碼,於動態影像解碼時會被解碼。
loopfilter_type_idx係為表示濾波器參數之濾波器類型的索引,是0至5之整數。loopfilter_type_idx係為3位元的編碼列。loopfilter_band_position係為濾波器參數之頻帶位置,係為表示0至7之整數的3位元之編碼列。loopfilter_offset係為濾波器參數的偏置,loopfilter_type_idx為1時係為-32至31之整數而為6位元之編碼列,loopfilter_type_idx為2至5時係為0至31之整數而為5位元之編碼列。
此處,邊緣型濾波器所需要之編碼量係為loopfilter_type_idx的3位元與loopfilter_offset的5位元是4個,而為23位元。頻帶型濾波器所需要之編碼量係為loopfilter_type_idx的3位元與
loopfilter_band_position的3位元與oopfilter_offset的6位元是3個,而為24位元。
此處,本實施形態中係將邊緣型濾波器與頻帶型濾波器之偏置數,分別設定成4個和3個。這是因為,頻帶型濾波器的濾波器參數係比邊緣型濾波器的濾波器參數,每1個的編碼量都較大,因此為了使得邊緣型濾波器與頻帶型濾波器之每一者所需要之編碼量變得均衡。藉由使得邊緣型濾波器與頻帶型濾波器之每一者所需要之編碼量變得均衡,可使邊緣型濾波器與頻帶型濾波器各自的迴圈濾波器編碼參數的編碼時間與解碼時間變得均衡,可使硬體的電路設計或軟體設計變得容易。此處,雖然將邊緣型濾波器與頻帶型濾波器之偏置分別設定成4個與3個,但例如,亦可將邊緣型濾波器與頻帶型濾波器之偏置分別設定成2個與1個等。
圖16(c)係為迴圈濾波器單元(loopfilter_unit())之語法之一例的說明圖。在迴圈濾波器單元中,係有loopfilter_merge_left_flag、loopfilter_merge_above_flag、loopfilter_cod_param()依照語法而被設置,於動態影像編碼時會被編碼,於動態影像解碼時會被解碼。
以下,說明被編碼列多工部107所多工化之編碼串流的構成。圖17係第1實施形態所述之編碼串流之構成之
一例的說明圖。圖17係表示loopfilter_interleave_flag為1時的編碼串流之構成。SPS係藉由編碼列多工部107而被編碼,被多工化至編碼串流的開頭。PPS係藉由編碼列多工部107而被編碼,被多工化至圖像的開頭。切片標頭係藉由編碼列多工部107而被編碼,被多工化至切片的開頭。接續於切片標頭,針對該切片中所屬之CTB,按照CTB編碼順序而重複進行以下處理。首先,CTB之迴圈濾波器單元係被多工化,其後,CTB編碼列係被多工化。
此處,對SPS、PPS、切片標頭係賦予一般的同步碼,使得SPS、PPS、切片標頭係可從編碼串流中分離出來。又,對瓷磚係賦予標頭,但可藉由切片標頭之tile_position從編碼串流中予以分離。
如以上所述,將loopfilter_interleave_flag設定成1而按照CTB編碼順序將CTB之濾波器參數以CTB單位進行多工化,藉此就可實現抑制了濾波器參數之傳輸延遲的動態影像編碼裝置。
圖18係第1實施形態所述之動態影像解碼裝置200之構成的說明圖。動態影像解碼裝置200,係被輸入著已被動態影像編碼裝置100所生成之編碼串流,以圖像單位將解碼圖像進行再生的裝置。
動態影像解碼裝置200,係由具備CPU(Central Processing Unit)、畫格記憶體、硬碟等的資
訊處理裝置等硬體所實現。動態影像解碼裝置200,係藉由上記的構成要素的作動,而實現以下說明的機能性構成要素。
本實施形態的動態影像解碼裝置200,係含有:編碼列分離部201、CTB解碼部202、迴圈濾波器203、濾波器參數解碼部204、畫格記憶體205、及解碼控制部210。
解碼控制部210係將領域資訊、迴圈濾波器資訊、SPS、PPS、切片標頭等圖像解碼所必須之資訊加以管理,控制著編碼列分離部201、CTB解碼部202、迴圈濾波器203、濾波器參數解碼部204、畫格記憶體205而將編碼串流予以解碼。此外,領域資訊、迴圈濾波器資訊、SPS、PPS、切片標頭等圖像解碼所必須之資訊,是在動態影像解碼裝置200內被共用,這些資料的流向之說明係省略。
圖19係第1實施形態所述之動態影像解碼裝置200之動作的說明用流程圖。圖18係表示圖像單位的解碼動作。以下使用圖18與圖19來說明各部的機能與動作。
在本實施形態中,假設輸入的是loopfilter_interleave_flag被設定成1的編碼串流。
首先,編碼列分離部201係從端子20所輸入
之編碼串流中,取得圖像串流(S500)。此處,所謂圖像串流係為圖像單位之編碼串流,圖像串流的最初CTB之編碼列之前若存在有SPS則亦包含SPS。
接著,編碼列分離部201係若瓷磚串流中含有SPS則將SPS予以解碼,取得圖像的尺寸。又,依照圖15之語法而將PPS予以解碼,取得迴圈濾波器資訊與瓷磚資訊(S501)。
解碼控制部210,係根據圖像之尺寸與瓷磚資訊,導出領域資訊。此處,領域資訊係假設被導出了與動態影像編碼裝置100所設定之領域資訊相同者。此外,藉由圖像之尺寸與瓷磚資訊而被設定的CTB位址(CTB的位址順序)、和CTB被編碼之順序的關係,也是和被動態影像編碼裝置100所設定之動態影像編碼裝置100所設定之關係相同。
接著,針對圖像串流中所含之所有CTB,重複進行以下處理(S502至S508)。
首先,若有切片標頭,則依照圖15之語法而將切片標頭予以解碼並取得切片位址,將切片位址當作CTB位址,從領域資訊獲得該當於CTB位址的CTB編碼順序。若無切片標頭則將CTB編碼順序增加1,從領域資訊獲得該當於CTB編碼順序的CTB位址(S503)。此處,CTB位址係根據CTB編碼順序而基於圖5所示之CTB位址與CTB編碼順序的關係而被導出。例如,CTB編碼順序為8的CTB的CTB位址,係為14。在下個CTB中,
CTB編碼順序被增加1而變成9,CTB位址係變成15。如以上,由CTB編碼順序而基於CTB位址與CTB編碼順序之關係,獲得CTB位址。
接著,CTB解碼部202係進行CTB解碼部202內部的熵解碼部之設定(S504)。此處,CTB解碼部202內部的熵解碼部,係為可將動態影像編碼裝置100所生成之編碼列進行解碼的CABAC,在切片或瓷磚之開始時,會被初期化。
接著,編碼列分離部201係將解碼對象CTB之迴圈濾波器單元供給至濾波器參數解碼部204,濾波器參數解碼部204係將迴圈濾波器單元解碼成濾波器參數(S505),將該當濾波器參數供給至迴圈濾波器203。濾波器參數解碼部204的細節,將於後述。
接著,編碼列分離部201係將解碼對象CTB之CTB編碼列,供給至CTB解碼部202,CTB解碼部202係將解碼對象CTB的CTB編碼列,進行解碼,取得解碼對象CTB的解碼影像資料(S506),將該當解碼影像資料供給至迴圈濾波器203。
接著,迴圈濾波器203係對CTB解碼部202所供給之解碼影像資料,基於編碼列分離部201所供給之濾波器參數來執行迴圈濾波器(S507),生成新的解碼影像資料,將該當解碼影像資料供給至畫格記憶體205。迴圈濾波器203,係具有與動態影像編碼裝置100之迴圈濾波器104相同機能,因此省略說明。
接著說明濾波器參數解碼部204的機能與動作。
圖20係濾波器參數解碼部204之動作的說明用流程圖。以下,使用圖20,說明濾波器參數解碼部204的機能與動作。
首先,濾波器參數解碼部204係導出available_left_ctb_flag與available_above_ctb_flag(S510)。此處,available_left_ctb_flag與available_above_ctb_flag的導出方法,係和圖14中所說明之處理中把「編碼對象CTB」置換成「解碼對象CTB」之後相同。
接著,檢查available_left_ctb_flag是否為1(S511)。若available_left_ctb_flag為1(S511的Y),則將loopfilter_merge_left_flag予以解碼(S512)。接著,檢查loopfilter_merge_left_flag是否為1(S513)。若loopfilter_merge_left_flag為1(S513的Y),則將解碼對象CTB之左方位置的CTB的濾波器參數,當作解碼對象CTB的濾波器參數(S514),結束處理。
若available_left_ctb_flag並非1(S511的N),或loopfilter_merge_left_flag並非1(S513的N),則檢查available_above_ctb_flag是否為1(S515)。若available_above_ctb_flag為1(S515的Y),則將loopfilter_merge_above_flag予以解碼(S516)。接著,檢查
loopfilter_merge_above_flag是否為1(S517)。若loopfilter_merge_above_flag為1(S517的Y),則將解碼對象CTB之上方位置的CTB的濾波器參數,當作解碼對象CTB的濾波器參數(S518),結束處理。若available_above_ctb_flag並非1(S515的N),或loopfilter_merge_above_flag並非1(S517的N),則將loopfilter_cod_param()予以解碼(S519),結束處理。
如以上所述,將loopfilter_interleave_flag設定成1而按照CTB編碼順序將CTB之濾波器參數以CTB單位進行分離並解碼,以CTB單位執行迴圈濾波器,藉此就可實現圖像內的所有CTB之解碼處理一完成就能夠輸出解碼影像資料的低延遲之動態影像解碼裝置。此外,濾波器參數解碼部204係由於參照解碼對象CTB之左方與上方位置的CTB的濾波器參數,因此會將圖像內的所有CTB的濾波器參數加以保持。
又,當解碼對象CTB之左邊是銜接於瓷磚交界時,若作為解碼對象CTB之濾波器參數是利用位於解碼對象CTB之左方位置的已解碼CTB的濾波器參數,則會變成直到解碼對象CTB之左邊所銜接之CTB之處理完成之前,都無法確定解碼對象CTB的濾波器參數。於是,當解碼對象CTB之左邊是銜接於瓷磚交界時,藉由不將用來表示作為解碼對象CTB之濾波器參數是否利用位於解碼對象CTB之左方位置的已解碼CTB的濾波器參數的旗標亦即loopfilter_merge_left_flag進行解碼,就可
將位於解碼對象CTB之左方位置的已解碼CTB的濾波器參數,設成不可利用。藉由如此設計,即使當解碼對象CTB之左邊是銜接於瓷磚交界時,仍可在解碼對象CTB之迴圈濾波器單元解碼之後立刻獲得濾波器參數。然後,不必等待解碼對象CTB之左邊所銜接之CTB之處理完成,就可使迴圈濾波器203之處理以CTB單位而作動,可將迴圈濾波器適用後的解碼影像資料的輸出延遲,降低至最小程度。
同樣地,當解碼對象CTB之上邊是銜接於瓷磚交界時,藉由不將用來表示作為解碼對象CTB之濾波器參數是否利用位於解碼對象CTB之上方位置的已解碼CTB的濾波器參數的旗標亦即loopfilter_merge_above_flag進行解碼,就可將位於解碼對象CTB之上方位置的已解碼CTB的濾波器參數,設成不可利用。藉由如此設計,即使當解碼對象CTB之上邊是銜接於瓷磚交界時,仍可在解碼對象CTB之迴圈濾波器單元解碼之後立刻獲得濾波器參數。然後,不必等待解碼對象CTB之上邊所銜接之CTB之處理完成,就可使迴圈濾波器203之處理以CTB單位而作動,可將迴圈濾波器適用後的解碼影像資料的輸出延遲,降低至最小程度。
接著,說明第2實施形態。第2實施形態係與第1實施形態是在loopfilter_interleave_flag被設定成0這點有
所不同。亦即,濾波器參數係以圖像單位而被編碼。
以下說明與第1實施形態的不同點。
首先說明,本實施形態所涉及之動態影像編碼裝置100之動作。圖21係第2實施形態所述之動態影像編碼裝置100之動作的說明用流程圖。如圖21所示,步驟S107至步驟S110是在圖像內的所有CTB之編碼處理都進行後,才被執行。依照CTB位址之順序,針對圖像內的所有CTB,重複進行步驟S107、步驟S108、步驟S109之處理(S112至S113)。
接著,針對圖像的所有CTB,編碼列多工部107係將CTB編碼部102所供給之CTB編碼列與濾波器參數編碼部105所供給之迴圈濾波器單元,因應需要而連同SPS、PPS、切片標頭等一起多工化成為編碼串流(S110)。此處,說明被編碼列多工部107所多工化之編碼串流的構成。圖22係第2實施形態所述之編碼串流之構成之一例的說明圖。圖22係表示loopfilter_interleave_flag為0時的編碼串流之構成。SPS係被多工化至編碼串流的開頭。PPS係被多工化至圖像的開頭。此時,PPS中係被多工化了,將迴圈濾波器單元以圖像單位而被集結的圖像迴圈濾波器參數。在切片之開頭係被多工化有切片標頭。接續於切片標頭,針對該切片中所屬之CTB,按照CTB編碼順序而有CTB編碼列被多工化。
又,步驟S105的熵編碼部之設定的動作係為
不同。在本實施形態中,當編碼對象CTB是切片或瓷磚的最初之CTB時,濾波器參數編碼部105係不將濾波器參數編碼部105內部的熵編碼部予以初期化。
此處,針對濾波器參數之編碼,在第1實施形態中loopfilter_interleave_flag係被設定成1,因此當編碼對象CTB的左邊是銜接於瓷磚交界時,available_left_ctb_flag會被設定成0,但在第2實施形態中loopfilter_interleave_flag係被設定成0,因此即使當編碼對象CTB的左邊是銜接於瓷磚交界時,available_left_ctb_flag仍被設定成1。因此,即使當編碼對象CTB的左邊是銜接於瓷磚交界時,仍可將loopfilter_merge_left_flag進行編碼,可促使編碼效率提升。同樣地,即使當編碼對象CTB的上邊是銜接於瓷磚交界時,仍可將loopfilter_merge_left_flag進行編碼,可促使編碼效率提升。
又,將loopfilter_interleave_flag設定成0而將濾波器參數以圖像單位予以集結而進行多工化,藉此可實現抑制了濾波器參數之編碼量的編碼裝置。
接著說明,本實施形態所涉及之動態影像解碼裝置200之動作。圖23係第2實施形態所述之動態影像解碼裝置200之動作的說明用流程圖。如圖23所示,步驟S505與步驟S507是在圖像內的所有CTB之解碼處理都進行後,才被執行。依照CTB位址之順序,針對圖像內的所有CTB,重複進行步驟S505、步驟S507之處理
(S510至S511)。
此處,說明本實施形態中的步驟S505。編碼列分離部201係將圖像迴圈濾波器參數中的解碼對象CTB之迴圈濾波器單元供給至濾波器參數解碼部204,濾波器參數解碼部204係將迴圈濾波器單元解碼成濾波器參數(S505),將該當濾波器參數供給至迴圈濾波器203。
又,迴圈濾波器203之動作係有所不同。在本實施形態中,迴圈濾波器係在圖像內的所有CTB之解碼處理都進行後才執行,因此迴圈濾波器203係保持有圖像內的所有CTB的解碼影像資料。
又,步驟S504的熵解碼部之設定的動作係為不同。在本實施形態中,即使解碼對象CTB是切片或瓷磚的最初之CTB,濾波器參數解碼部204係仍不將濾波器參數解碼部204內部的熵解碼部進行初期化,這點是與第1實施形態不同。
如以上所述,本實施形態所述之動態影像解碼裝置200,係可將本實施形態所述之動態影像編碼裝置100所生成之編碼串流予以解碼,輸出解碼影像資料。
接著,說明第3實施形態。本實施形態與第1實施形態係為,適用迴圈濾波器的像素。在第1實施形態中係以在CTB中就完結的方式來令迴圈濾波器作動,但在本實施形態中係可跨過CTB來執行迴圈濾波器。
以下說明與第1實施形態的不同點。
首先,PPS的語法係為不同。圖24係第3實施形態所述之PPS之語法的說明圖。在PPS中追加有loopfilter_across_tiles_flag,這是與第1實施形態不同。loopfilter_across_tiles_flag係為用來表示,是否許可跨越瓷磚交界來處理迴圈濾波器的1位元之旗標。若loopfilter_across_tiles_flag為1,則許可跨越瓷磚交界來處理迴圈濾波器,若loopfilter_across_tiles_flag為0,則不許可跨越瓷磚交界來處理迴圈濾波器。在本實施形態中,係令loopfilter_across_tiles_flag為1。
圖25係第3實施形態所述之動態影像編碼裝置100之動作的說明用流程圖。使用圖25來說明與第1實施形態不同的本實施形態所述之動態影像編碼裝置100之動作。接續於步驟S102,圖像的所有CTB的濾波器參數,會被決定(S112)。此處,針對圖像的所有CTB的濾波器是被決定的方法,係可實現例如一般的2回合編碼或參照之前的圖像之資料而加以生成等的手法。
又,取代步驟S107而改為實施步驟S115。在步驟S115中,係針對已被步驟S112所決定之濾波器參數,會取得編碼對象CTB的濾波器參數。
又,接續於步驟S111,針對跨過瓷磚交界的像素,執行迴圈濾波器(S116)。所謂跨越瓷磚交界之像素,係若是垂直方向之瓷磚交界,則為位於瓷磚交界之左方的像素與位於瓷磚交界之右方的像素,若是水平方向之
瓷磚交界,則為位於瓷磚交界之上方的像素與位於瓷磚交界之下方的像素。步驟S116係為,將步驟S103至步驟S111,以瓷磚單位進行獨立處理(平行處理)時,所必要之處理。
如以上所述,在CTB單位之編碼處理之前,決定圖像內的所有CTB的濾波器,針對圖像內的所有CTB而在CTB單位之編碼處理結束後,執行迴圈濾波器,藉此編碼串流的輸出,係可在CTB單位之編碼處理中進行輸出,因此可實現低延遲的動態影像編碼裝置。
圖26係第3實施形態所述之動態影像解碼裝置200之動作的說明用流程圖。使用圖26來說明與第1實施形態不同的本實施形態所述之動態影像解碼裝置200之動作。在步驟S506之後不實施步驟S507。接在步驟S508之後,針對圖像內的所有CTB,以CTB位址之順序,重複執行步驟S512與步驟S507之處理(S510至S511)。以下,針對步驟S512與步驟S507加以說明。
若處理對象CTB之loopfilter_merge_left_flag為1,則從位於處理對象CTB之左方位置的CTB,取得濾波器參數。若處理對象CTB之loopfilter_merge_left_flag為0,且處理對象CTB之loopfilter_merge_above_flag為1,則從位於處理對象CTB之上方位置的CTB,取得濾波器參數。若處理對象CTB之loopfilter_merge_left_flag為0,且處理對象CTB之loopfilter_merge_above_flag為0,則取得處理對象CTB的檔案參數(S512)。
迴圈濾波器104係對處理對象CTB之解碼影像資料,基於處理對象CTB之濾波器參數而執行迴圈濾波器,生成新的解碼影像資料,將該當解碼影像資料供給至畫格記憶體205(S507)。此處,雖然設計成,迴圈濾波器104係保持有圖像內的所有CTB的解碼影像資料,但亦可設計成,將CTB解碼部202所供給之解碼影像資料,供給至畫格記憶體205而記憶之,在步驟S507中係從畫格記憶體205取得處理對象CTB之解碼影像資料。
接著說明邊緣型濾波器131的動作。圖27係第3實施形態之邊緣型濾波器131之動作的流程圖。步驟S140係與第1實施形態不同。在步驟S140中,係若loopfilter_across_tiles_flag為1,則步驟S134的像素A或像素B是否為瓷磚外的檢查解果係被略過,進行執行邊緣型濾波器之步驟亦即步驟S135以後的動作。
如此,即使loopfilter_interleave_flag是設成1而縮小濾波器參數之傳輸延遲的情況下,若loopfilter_across_tiles_flag為1,則於邊緣型濾波器中藉由參照瓷磚外的像素A與像素B,就可對瓷磚交界的左右或上下銜接之2像素,適用迴圈濾波器,可減少瓷磚交界之失真。又,在運動補償預測等中所被利用的參照圖像之畫質係被改善,因此可提升編碼效率。
接著,說明濾波器參數編碼部105與濾波器參數解碼部204之動作中的相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag之導
出。圖28係第3實施形態中的相鄰CTB之有效性之導出的流程圖。步驟S190與步驟S191被追加這點,係與第1實施形態不同。步驟S190與步驟S191係檢查loopfilter_across_tiles_flag是否為1。以下,針對步驟S190與步驟S191加以說明。
若loopfilter_across_tiles_flag為1(S190的Y),則步驟182、步驟183、及步驟184係被略過,無論編碼對象CTB的左邊是否銜接於瓷磚交界,available_left_ctb_flag都被設定成1。若loopfilter_across_tiles_flag並非1(S190的N),則執行步驟S182。
若loopfilter_across_tiles_flag為1(S190的Y),則步驟186、步驟187、及步驟188係被略過,無論編碼對象CTB的上邊是否銜接於瓷磚交界,available_above_ctb_flag都被設定成1。若loopfilter_across_tiles_flag並非1(S191的N),則執行步驟S186。
如以上所述,若loopfilter_across_tiles_flag被設定成1,則在濾波器參數之編碼中,允許將表示跨過瓷磚交界來取得濾波器參數之旗標loopfilter_merge_left_flag與loopfilter_merge_above_flag予以編碼,若跨過瓷磚交界而濾波器參數是相同,則將loopfilter_merge_left_flag或loopfilter_merge_above_flag設定成1以將濾波器參數所需之編碼量變成1位元,藉此
可促使編碼效率提升。
又,若loopfilter_across_tiles_flag被設定成1,則在檔案單元的解碼中,先將loopfilter_merge_left_flag、loopfilter_merge_above_flag、及loopfilter_cod_param()予以解碼,在全部的CTB之解碼處理都結束後,在迴圈濾波器執行前,針對loopfilter_merge_left_flag為1之CTB係從位於該當CTB左方之CTB取得濾波器參數,針對loopfilter_merge_above_flag為1之CTB係從位於該當CTB上方之CTB取得濾波器參數,藉此,就可不必停止濾波器參數的解碼處理,而在圖像的所有CTB之解碼處理都結束後,令迴圈濾波器被正確地執行。
此處,藉由將檔案單元之語法要素中具有最複雜結構的loopfilter_cod_param()予以事前解碼,就可使取得濾波器參數之延遲,抑制在最小程度。
又,在抑制迴圈濾波器之執行延遲的情況下,亦可為,於步驟S505中,針對瓷磚交界之外的不利用濾波器參數的CTB係先執行迴圈濾波器,在全部的CTB之解碼處理都結束後,針對瓷磚交界之外的會利用濾波器參數的CTB係執行迴圈濾波器。
接著,說明第4實施形態。第4實施形態與第3實施形態係為瓷磚交界上的濾波與濾波器參數之編碼控制不
同。
以下說明與第3實施形態的不同點。
首先,PPS的語法係為不同。圖29係第4實施形態所述之PPS之語法的說明圖。在PPS中追加有loopfilter_interleave_across_tiles_flag,這是與第3實施形態不同。loopfilter_interleave_across_tiles_flag係為用來表示,是否許可跨越瓷磚交界來取得濾波器參數的1位元之旗標。若loopfilter_interleave_across_tiles_flag為1,則許可跨越瓷磚交界來取得濾波器參數,若loopfilter_interleave_across_tiles_flag為0,則不許可跨越瓷磚交界來取得濾波器參數。在本實施形態中,係令loopfilter_interleave_across_tiles_flag為0。
接著,說明濾波器參數編碼部105與濾波器參數解碼部204之動作中的相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag之導出。圖30係第4實施形態中的相鄰CTB之有效性之導出的流程圖。步驟S190和步驟S191係與第3實施形態不同。步驟S190與步驟S191係檢查loopfilter_interleave_across_tiles_flag是否為1。
接著說明,動態影像解碼裝置200之動作。圖37係第4實施形態所述之動態影像解碼裝置200之動作的說明用流程圖。使用圖37來說明與第3實施形態不同的本實施形態所述之動態影像解碼裝置200之動作。
接在步驟S506之後,針對銜接於瓷磚交界之像素以
外的像素,執行迴圈濾波器(S520)。又,接在步驟S508之後,針對銜接於瓷磚交界之像素,執行迴圈濾波器(S521)。
如以上所述,將loopfilter_interleave_flag設定成1、將loopfilter_across_tiles_flag設定成1、將loopfilter_interleave_across_tiles_flag設定成0,就可使全部的CTB之解碼處理都結束後的迴圈濾波器所涉及之處理,僅對銜接於瓷磚交界之像素來施行,藉此可減少瓷磚交界之失真同時使迴圈濾波器的執行延遲變成最小程度。又,圖像內的所有CTB之解碼處理都完成後,為了執行迴圈濾波器而記憶的必要之解碼像素,可變成只有對銜接於瓷磚交界之像素的相鄰像素A與相鄰像素B,可削減解碼影像資料的記憶容量。又,將loopfilter_interleave_flag設定成1、將loopfilter_across_tiles_flag設定成1、將loopfilter_interleave_across_tiles_flag設定成1,藉此可獲得和第3實施形態相同的效果。
接著,說明第5實施形態。第5實施形態與第1實施形態係為可利用之濾波器類型不同。在第1實施形態中係位於瓷磚交界之CTB和其以外之CTB上,可利用之濾波器類型係為相同,但在本實施形態中則是,位於瓷磚交界之CTB和其以外之CTB上,可利用之濾波器類型係為不
同。
以下說明與第1實施形態的不同點。
圖31係第5實施形態中的隨應於CTB之位置而可利用之濾波器類型的說明圖。使用圖31而隨著CTB位置來說明可利用之濾波器類型。針對available_left_ctb_flag與available_above_ctb_flag係皆為0,CTB的左邊與上邊皆未銜接於圖像交界與瓷磚交界的CTB,係和第1實施形態同樣地,許可濾波器類型0至濾波器類型5的所有濾波器類型之利用,按照濾波器類型的升順而將loopfliter_type_idx從0開始分配之。針對CTB之左邊是銜接於圖像交界或瓷磚交界的CTB,係僅許可利用濾波器類型1與濾波器類型2,對濾波器類型1和濾波器類型2,作為loopfliter_type_idx係分別分配0與1。針對CTB之上邊是銜接於圖像交界或瓷磚交界的CTB,係僅許可利用濾波器類型1與濾波器類型3,對濾波器類型1和濾波器類型3,作為loopfliter_type_idx係分別分配0與1。
接著,說明邊緣型濾波器131的動作。圖32係第5實施形態中的邊緣型濾波器131之動作的流程圖。檢查像素A或像素B是否為圖像交界的步驟S133、檢查像素A或像素B是否為瓷磚交界的步驟S134、將偏置值設定成0的步驟S137係被省略,這點有所不同。
如以上所述,若loopfilter_interleave_flag為1,則針對CTB之左邊是銜接於圖像交界或瓷磚交界的
CTB,係將參照圖像交界或瓷磚交界之外之像素的濾波器類型亦即濾波器類型2、濾波器類型4、及濾波器類型5設成無效,藉此就沒有必要參照圖像交界或瓷磚交界之外的像素,所以邊緣型濾波器131的步驟S133、步驟S134、及步驟S137就變成不需要,可削減邊緣型濾波器131的處理量。同樣地,針對CTB之上邊是銜接於圖像交界或瓷磚交界的CTB,係將參照圖像交界或瓷磚交界之外之像素的濾波器類型亦即濾波器類型1、濾波器類型4、及濾波器類型5設成無效,藉此就沒有必要參照圖像交界或瓷磚交界之外的像素,所以邊緣型濾波器131的步驟S133、步驟S134、及步驟S137就變成不需要,可削減邊緣型濾波器131的處理量。
又,藉由僅對有效之濾波器類型分配loopfliter_type_idx,針對CTB之左邊或上邊是銜接於圖像交界或瓷磚交界的CTB,係將loopfliter_type_idx之編碼量削減成1位元之旗標,就可促使編碼效率提升。此處,針對濾波器類型0、亦即不處理迴圈濾波器的濾波器類型,係以濾波器類型1或濾波器類型2將偏置設定成0的方式,就可對應。
甚至,在第3實施形態或第4實施形態的動態影像編碼裝置中,藉由如本實施形態般地對瓷磚交界上的濾波器類型設置限制,就可實現總是在CTB內完結的低延遲之動態影像編碼裝置與動態影像解碼裝置。
接著,說明第6實施形態。第6實施形態係與第4實施形態是在loopfliter_type_idx的編碼列與available_left_ctb_flag與available_above_ctb_flag之導出有所不同。
以下說明與第4實施形態的不同點。
首先,loopfliter_type_idx的編碼列係不同。圖33係第6實施形態所述之loopfliter_type_idx之編碼列的說明圖。loopfliter_type_idx為0係表示濾波器類型0,編碼列(bin)係為'0'。loopfliter_type_idx為1係表示濾波器類型1,編碼列(bin)係為'10'。loopfliter_type_idx為2係表示濾波器類型2,編碼列(bin)係為'1100'。loopfliter_type_idx為3係表示濾波器類型3,編碼列(bin)係為'1101'。loopfliter_type_idx為4係表示濾波器類型4,編碼列(bin)係為'1110'。loopfliter_type_idx為5係表示濾波器類型5,編碼列(bin)係為'1111'。
此處,頻帶型濾波器的濾波器參數係比邊緣型濾波器的濾波器參數,每1個的編碼量都較大,因此藉由對頻帶型濾波器的loopfliter_type_idx分配比邊緣型濾波器loopfliter_type_idx短的編碼量,就可使得邊緣型濾波器與頻帶型濾波器之每一者所需要之編碼量變得均衡。
藉由使得邊緣型濾波器與頻帶型濾波器之每一者所需要之編碼量變得均衡,可使邊緣型濾波器與頻帶型濾波器各自的迴圈濾波器編碼參數的編碼時間與解碼時
間變得均衡,可使硬體的電路設計或軟體設計變得容易。此處,雖然是將頻帶型濾波器的loopfliter_type_idx設成2位元、邊緣型濾波器loopfliter_type_idx設定成4位元,但只要頻帶型濾波器的loopfliter_type_idx是比邊緣型濾波器loopfliter_type_idx還短的編碼量即可,並非限定於此。
接著,available_left_ctb_flag與available_above_ctb_flag之導出係為不同。接著,說明濾波器參數編碼部105與濾波器參數解碼部204之動作中的相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag之導出。圖34係第6實施形態中的相鄰CTB之有效性之導出的流程圖。步驟S196與步驟S197被追加這點,係與第4實施形態不同。以下,針對步驟S196與步驟S197加以說明。
檢查編碼對象CTB之左方位置的CTB的濾波器參數的濾波器類型是否為濾波器類型0(濾波器OFF)(S196)。若編碼對象CTB之左方位置的CTB的濾波器參數的濾波器類型是濾波器類型0(S196的Y),則將available_left_ctb_flag設成0(S184)。若編碼對象CTB之左方位置的CTB的濾波器參數的濾波器類型不是濾波器類型0(S196的N),則執行S182。
檢查編碼對象CTB之上方位置的CTB的濾波器參數的濾波器類型是否為濾波器類型0(濾波器OFF)(S197)。若編碼對象CTB之上方位置的CTB的濾波
器參數的濾波器類型是濾波器類型0(S197的Y),則將available_above_ctb_flag設成0(S188)。若編碼對象CTB之上方位置的CTB的濾波器參數的濾波器類型不是濾波器類型0(S197的N),則執行S186。
此處,若濾波器類型為濾波器類型0,則loopfliter_type_idx係為1位元,因此比較有可能使編碼量比使用loopfilter_merge_left_flag或loopfilter_merge_above_flag來進行編碼還少。這是因為,若位於左方之CTB的濾波器參數的濾波器類型是濾波器類型0,則loopfilter_merge_left_flag只要1位元即可,但若位於左方之CTB的濾波器參數的濾波器類型不是濾波器類型0,而位於上方之CTB的濾波器參數的濾波器類型是濾波器類型0,則會變成loopfilter_merge_left_flag與loopfilter_merge_above_flag的2位元,若位於左方之CTB的濾波器參數的濾波器類型不是濾波器類型0,而位於上方之CTB的濾波器參數的濾波器類型不是濾波器類型0,則會變成loopfilter_merge_left_flag、loopfilter_merge_above_flag、loopfliter_type_idx的3位元。
因此,若濾波器類型為濾波器類型0,則不將loopfilter_merge_left_flag與loopfilter_merge_above_flag進行編碼,僅將迴圈濾波器編碼參數進行編碼,而可促使編碼效率提升。
接著,說明第7實施形態。第7實施形態係與第6實施形態是在迴圈濾波器單元的語法與loopfliter_type_idx之編碼列有所不同。
以下說明與第6實施形態的不同點。
首先,迴圈濾波器單元的語法係為不同。圖35係第7實施形態所述之迴圈濾波器單元之語法的說明圖。迴圈濾波器許可旗標enable_loopfilter_flag係被追加。enable_loopfilter_flag係為控制CTB之迴圈濾波器的ON與OFF的旗標,針對enable_loopfilter_flag為1的CTB係執行迴圈濾波器,針對enable_loopfilter_flag為0的CTB係不執行迴圈濾波器。
其次,loopfliter_type_idx的編碼列係不同。圖36係第7實施形態所述之loopfliter_type_idx之編碼列的說明圖。loopfliter_type_idx為0係表示濾波器類型1,編碼列(bin)係為'0'。loopfliter_type_idx為1係表示濾波器類型2,編碼列(bin)係為'100'。loopfliter_type_idx為2係表示濾波器類型3,編碼列(bin)係為'101'。loopfliter_type_idx為3係表示濾波器類型4,編碼列(bin)係為'110'。loopfliter_type_idx為4係表示濾波器類型5,編碼列(bin)係為'111'。
其次,濾波器參數編碼部105與濾波器參數解碼部204之動作中的相鄰CTB之有效性亦即available_left_ctb_flag與available_above_ctb_flag之導
出,係為不同。與第6實施形態係為步驟S196和步驟S197是有所不同,針對步驟S196和步驟S197加以說明。
檢查編碼對象CTB之左方位置的CTB的濾波器參數的迴圈濾波器許可旗標是否為0(S196)。若編碼對象CTB之左方位置的CTB的濾波器參數的迴圈濾波器許可旗標為0(S196的Y),則將available_left_ctb_flag設成0(S184)。若編碼對象CTB之左方位置的CTB的濾波器參數的迴圈濾波器許可旗標不是0(S196的N),則執行S182。
檢查編碼對象CTB之上方位置的CTB的濾波器參數的迴圈濾波器許可旗標是否為0(S197)。若編碼對象CTB之上方位置的CTB的濾波器參數的迴圈濾波器許可旗標為0(S197的Y),則將available_above_ctb_flag設成0(S188)。若編碼對象CTB之上方位置的CTB的濾波器參數的迴圈濾波器許可旗標不是0(S197的N),則執行S186。
以上所述之實施形態的動態影像編碼裝置與動態影像解碼裝置中,雖然說明了以瓷磚交界來作為領域之交界,但瓷磚內的CTB係依照逐線掃描順序而被處理而切片係將瓷磚內的CTB按照逐線掃描順序而予以包含的方式而構成了瓷磚與切片的情況下,藉由將瓷磚與切片做組合,針對切片交界也藉由將瓷磚交界置換成切片交界就可同樣地適用。
以上所述之實施形態的動態影像編碼裝置與動態影像解碼裝置中,雖然作為迴圈濾波器是使用了SAO濾波器,但例如,亦可使去區塊濾波器與SAO濾波器做組合。
以上所述的實施形態的動態影像編碼裝置所輸出的動態影像的編碼串流,係為了可隨著實施形態中所使用之編碼方法來進行解碼,而具有特定的資料格式,對應於動態影像編碼裝置的動態影像解碼裝置係可將此特定資料格式的編碼串流加以解碼。
動態影像編碼裝置與動態影像解碼裝置之間為了收授編碼串流,而使用有線或無線網路的情況下,可將編碼串流轉換成適合於通訊路之傳輸形態的資料形式來進行傳輸。此情況下,會設置有:將動態影像編碼裝置所輸出之編碼串流轉換成適合於通訊路之傳輸形態之資料形式的編碼資料然後發送至網路的動態影像送訊裝置、和從網路接收編碼資料並復原成編碼串流而供給至動態影像解碼裝置的動態影像收訊裝置。
動態影像送訊裝置,係含有:將動態影像編碼裝置所輸出之編碼串流予以緩衝的記憶體、將編碼串流予以封包化的封包處理部、將已被封包化的編碼資料透過網路而進行發送的送訊部。動態影像收訊裝置,係含有:將已被封包化的編碼資料透過網路而進行接收的收訊部、將已被接收之編碼資料予以緩衝的記憶體、將編碼資料進行封包處理而生成編碼串流並提供給動態影像解碼裝置的
封包處理部。
以上的關於編碼及解碼之處理,係可用硬體而以傳輸、積存、收訊裝置的方式來加以實現,當然,也可藉由記憶在ROM(唯讀記憶體)或快閃記憶體等中的韌體、或電腦等之軟體來加以實現。亦可將該韌體程式、軟體程式記錄至電腦等可讀取之記錄媒體來加以提供,或可透過有線或無線網路從伺服器來提供,也可用地表波或衛星數位播送的資料播送方式來提供之。
以上係依據實施形態來說明了本發明。實施形態係為例示,這些各構成要素或各處理程序之組合中還有各種可能的變形例,而這些變形例也都屬於本發明之範圍,而能被當業者所理解。
本發明係可利用於,使用了運動補償預測的動態影像編碼及解碼技術。
Claims (3)
- 一種影像解碼裝置,係將編碼列串流進行解碼所得之圖像予以濾波的影像解碼裝置,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,具備:領域資訊取得部,係將前記圖像被分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得部,係將用來表示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼部,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波部,係將前記解碼影像資料基於前記濾波器參數而進行濾波;前記濾波器參數取得部,係檢查前記身為解碼對象之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記 身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
- 一種影像解碼方法,係將編碼列串流進行解碼所得之圖像予以濾波的影像解碼方法,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,具備:領域資訊取得步驟,係將前記圖像被分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得步驟,係將用來表示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼步驟,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波步驟,係將前記解碼影像資料基於前記濾波器參數而進行濾波;前記濾波器參數取得步驟,係檢查前記身為解碼對象 之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
- 一種記錄媒體,係儲存有,將編碼列串流進行解碼所得之圖像予以濾波的影像解碼程式之記錄媒體,該編碼列串流係含有,以構成圖像之區塊單位而被編碼成的區塊編碼列;其特徵為,前記影像解碼程式係令電腦執行:領域資訊取得步驟,係將前記圖像被分割成前記區塊以上之大小的複數瓷磚(tile)而成的分割領域的資訊,從表示前記編碼列串流之圖像特性的圖像參數集中,加以取得;和濾波器參數取得步驟,係將用來表示是否從身為解碼對象之區塊的上邊方向及左邊方向所相鄰之已解碼區塊取得前記身為解碼對象之區塊的濾波器參數的取得旗標,從前記編碼列串流中加以取得,當前記取得旗標是表示進行取得之意旨時,則從前記上邊方向及左邊方向所相鄰之已解碼區塊取得前記濾波器參數,當前記取得旗標是表示不取得之意旨時,則從前記編碼列串流中取得關於前記濾波器參數之資訊;和影像資料解碼步驟,係將前記區塊編碼列予以解碼而取得前記身為解碼對象之區塊的解碼影像資料;和濾波步驟,係將前記解碼影像資料基於前記濾波器參數而進行濾波; 前記濾波器參數取得步驟,係檢查前記身為解碼對象之區塊是否在上邊方向及左邊方向銜接於瓷磚交界,若前記身為解碼對象之區塊是在上邊方向及左邊方向銜接於瓷磚交界,則不從前記編碼列串流取得前記取得旗標。
Applications Claiming Priority (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012087581 | 2012-04-06 | ||
JP2012-087580 | 2012-04-06 | ||
JP2012087580 | 2012-04-06 | ||
JP2012-087581 | 2012-04-06 | ||
JP2013-079865 | 2013-04-05 | ||
JP2013079864A JP5888278B2 (ja) | 2012-04-06 | 2013-04-05 | 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム |
JP2013079865A JP5888279B2 (ja) | 2012-04-06 | 2013-04-05 | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム |
JP2013-079864 | 2013-04-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201811033A TW201811033A (zh) | 2018-03-16 |
TWI643490B true TWI643490B (zh) | 2018-12-01 |
Family
ID=50550663
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW102112622A TWI548280B (zh) | 2012-04-06 | 2013-04-08 | An image decoding apparatus, an image decoding method, and an image decoding program |
TW107137797A TWI666915B (zh) | 2012-04-06 | 2013-04-08 | Image coding device, image coding method, and recording medium storing image coding program |
TW106144240A TWI643490B (zh) | 2012-04-06 | 2013-04-08 | Video decoding device, image decoding method, and recording medium storing image decoding program |
TW106125316A TWI613906B (zh) | 2012-04-06 | 2013-04-08 | 影像解碼裝置、影像解碼方法、及儲存有影像解碼程式之記錄媒體 |
TW105117376A TWI597967B (zh) | 2012-04-06 | 2013-04-08 | Video decoding apparatus, video decoding method, and video decoding program medium |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW102112622A TWI548280B (zh) | 2012-04-06 | 2013-04-08 | An image decoding apparatus, an image decoding method, and an image decoding program |
TW107137797A TWI666915B (zh) | 2012-04-06 | 2013-04-08 | Image coding device, image coding method, and recording medium storing image coding program |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW106125316A TWI613906B (zh) | 2012-04-06 | 2013-04-08 | 影像解碼裝置、影像解碼方法、及儲存有影像解碼程式之記錄媒體 |
TW105117376A TWI597967B (zh) | 2012-04-06 | 2013-04-08 | Video decoding apparatus, video decoding method, and video decoding program medium |
Country Status (1)
Country | Link |
---|---|
TW (5) | TWI548280B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090262837A1 (en) * | 2004-10-29 | 2009-10-22 | Yasuaki Tokumo | Moving Image Decoding Apparatus and moving image decoding method |
US20100296588A1 (en) * | 2008-01-24 | 2010-11-25 | Fujii Syouzou | Dynamic image compression device |
US20100316130A1 (en) * | 2009-06-11 | 2010-12-16 | Michiyo Morimoto | Video decoder |
TW201143461A (en) * | 2010-04-08 | 2011-12-01 | Ntt Docomo Inc | Moving image prediction encoder apparatus, moving image prediction decoder apparatus, moving image prediction encoding method, moving image prediction decoding method, moving image prediction encoding program, and moving image prediction decoding pro |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1672927A4 (en) * | 2003-09-04 | 2010-06-16 | Nec Corp | IMPLEMENTATION PROCESS, DEVICE AND PROGRAM FOR MOTION IMAGE DATA |
US7664176B2 (en) * | 2004-07-09 | 2010-02-16 | Nokia Corporation | Method and system for entropy decoding for scalable video bit stream |
CN100584025C (zh) * | 2005-08-04 | 2010-01-20 | 华为技术有限公司 | 一种基于内容自适应的算术解码系统及装置 |
JPWO2009157580A1 (ja) * | 2008-06-27 | 2011-12-15 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
WO2012011432A1 (ja) * | 2010-07-20 | 2012-01-26 | 株式会社エヌ・ティ・ティ・ドコモ | 画像予測符号化装置、画像予測符号化方法、画像予測符号化プログラム、画像予測復号装置、画像予測復号方法、及び、画像予測復号プログラム |
-
2013
- 2013-04-08 TW TW102112622A patent/TWI548280B/zh active
- 2013-04-08 TW TW107137797A patent/TWI666915B/zh active
- 2013-04-08 TW TW106144240A patent/TWI643490B/zh active
- 2013-04-08 TW TW106125316A patent/TWI613906B/zh active
- 2013-04-08 TW TW105117376A patent/TWI597967B/zh active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090262837A1 (en) * | 2004-10-29 | 2009-10-22 | Yasuaki Tokumo | Moving Image Decoding Apparatus and moving image decoding method |
US20100296588A1 (en) * | 2008-01-24 | 2010-11-25 | Fujii Syouzou | Dynamic image compression device |
US20100316130A1 (en) * | 2009-06-11 | 2010-12-16 | Michiyo Morimoto | Video decoder |
TW201143461A (en) * | 2010-04-08 | 2011-12-01 | Ntt Docomo Inc | Moving image prediction encoder apparatus, moving image prediction decoder apparatus, moving image prediction encoding method, moving image prediction decoding method, moving image prediction encoding program, and moving image prediction decoding pro |
Also Published As
Publication number | Publication date |
---|---|
TW201907711A (zh) | 2019-02-16 |
TW201811033A (zh) | 2018-03-16 |
TWI666915B (zh) | 2019-07-21 |
TWI597967B (zh) | 2017-09-01 |
TW201640891A (zh) | 2016-11-16 |
TW201740726A (zh) | 2017-11-16 |
TW201408072A (zh) | 2014-02-16 |
TWI613906B (zh) | 2018-02-01 |
TWI548280B (zh) | 2016-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6234994B2 (ja) | ビデオ・コーディングのためのウェーブフロント並列処理 | |
JP6634151B2 (ja) | ビデオ符号化における適応インター予測の方法と装置 | |
EP2608540B1 (en) | Method and apparatus for encoding video, and decoding method and apparatus | |
JP6288348B2 (ja) | 画像復号装置、画像復号方法、画像復号プログラム | |
JP2017108424A (ja) | 映像復号化方法および映像符号化方法 | |
TWI643490B (zh) | Video decoding device, image decoding method, and recording medium storing image decoding program | |
JP6135803B2 (ja) | 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法及び送信プログラム | |
US20160261862A1 (en) | Fast rate-distortion optimized quantization | |
WO2013150805A1 (ja) | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム、並びに動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム |