TWI469643B - 視訊壓縮之去區塊效應濾波裝置與方法 - Google Patents
視訊壓縮之去區塊效應濾波裝置與方法 Download PDFInfo
- Publication number
- TWI469643B TWI469643B TW99105715A TW99105715A TWI469643B TW I469643 B TWI469643 B TW I469643B TW 99105715 A TW99105715 A TW 99105715A TW 99105715 A TW99105715 A TW 99105715A TW I469643 B TWI469643 B TW I469643B
- Authority
- TW
- Taiwan
- Prior art keywords
- data
- pixel data
- filter
- deblocking filtering
- format
- Prior art date
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本揭露係關於一種視訊壓縮之去區塊(de-blocking)效應濾波裝置與方法。
以區塊為基礎的視訊壓縮(block based video compression)會引起在區塊邊界間,視覺上品質不一致的區塊效應。時下的視訊壓縮技術使用一種後處理裝置(post-processing),例如去區塊效應濾波器,來減少此區塊效應與增進壓縮效能。如第一A圖的範例所示,不含在視訊編碼器/解碼器的編碼/解碼迴路裡的去區塊效應濾波器稱為外迴路(out-loop)濾波器110。而H.264/進階視訊編碼(Advanced Video Coding,AVC)技術所使用的去區塊效應濾波器是在編碼/解碼迴路內,分別採用內迴路(in-loop)濾波器122與124,如第一B圖的範例所示,來去除(remove)區塊效應與增進壓縮效能。
如第二A圖之影像序列(video sequence)的範例所示,H.264/AVC視訊壓縮標準可以容許一已壓縮的影像序列200是由交織式(interlaced)的框畫面(frame-picture)210和場畫面(field-picture)220來任意組合。如第二B圖的範例所示,一張框畫面230又可分為一上場畫面(top-field)232與一下場畫面(bottom-field)234,上場畫面是由偶數的像素列(pixel row)組成的,下場畫面是由奇數的像素列組成的。交織式影像序列200的格式稱為畫面適應性框場(picture adaptive frame field,PICAFF)格式。
如第三圖之巨區塊格式(macroblock format)的範例所示,一張框畫面300可分割成多個巨區塊(macroblock,MB)302,每一巨區塊是由一個16×16畫素點灰階部件(pixels luma component)310和兩個顏色部件(chroma component),例如顏色部件312與314,組成的,而16×16畫素點灰階部件(pixels luma component)310是由16個4×4小區塊(block)組成的。H.264/AVC的顏色部件有三種格式,分別為4:2:0、4:2:2、以及4:4:4格式。如第三圖的範例所示,一個4:2:0格式的顏色部件是由8×8畫素點組成的,例如顏色部件312與314;一個4:2:2格式的顏色部件是由16×8畫素點組成的,例如顏色部件322與324;一個4:4:4格式的顏色部件是由16×16畫素點組成的,例如顏色部件332與334。
如第四圖的範例所示,在一框畫面400內的一對巨區塊,可以是一框-巨區塊對(frame-MB pair)410或是一場-巨區塊對(field-MB pair)420,其中此對巨區塊有相同的水平位置(the same horizontal position)且其垂直位置在框畫面內是相鄰的(adjacent)。在場-巨區塊對420裡的上場-巨區塊(top-field macroblock)422是由偶數的像素列組成的,而下場-巨區塊(bottom-field macroblock)424是由奇數的像素列組成的。H.264/AVC視訊壓縮標準可以容許一張框畫面400是由框-巨區塊對410和場-巨區塊對420來任意組合,此種格式稱為巨區塊適應性框場(macroblock adaptive frame field,MBAFF)格式。
對於備有4:2:0格式之顏色部件的一巨區塊,去區塊效應濾波器需要處理48個區塊邊(block edge),包括24個垂直邊(vertical edge)與24個水平邊(horizontal edge);對於備有4:2:2格式之顏色部件的一巨區塊,則需要處理64個區塊邊;對於備有4:4:4格式之顏色部件的一巨區塊,則需要處理96個區塊邊。如第五圖的範例所示,H.264/AVC視訊壓縮的去區塊效應濾波器在處理去區塊效應時,是先處理區塊的垂直邊510,之後再處理水平邊。並且,垂直邊被去除區塊效應的畫素會被用來做為水平邊520去除區塊效應時的輸入資料,其中v指的是垂直邊的畫素,在510的左方為未濾除畫素,在510的右方為已濾除畫素;而h指的是水平邊的畫素,在520的上方為未濾除畫素,在520的下方為己濾除畫素。換句話說,被垂直濾波器(vertical filter)去除區塊效應的畫素被當作輸入,再被水平濾波器(horizontal filter)去除區塊效應。
如第六圖的範例所示,對於一個垂直區塊邊510或水平區塊邊520,會依序以一排畫素接著一排畫素來處理4排總共32個畫素,而每一排畫素是由8個跨該區塊邊的畫素所組成的。這8個畫素以p3、p2、p1、p0、q0、q1、q2、q3來表示,其中p0和q0是位於該區塊邊的各一方(each side)的兩鄰近畫素。此8個畫素和相關參數,例如邊界強度(boundary strength),當作是去區塊效應濾波器的輸入資料,由去區塊效應濾波器去除區塊效應後的8個畫素以p’3、p’2、p’1、p’0、q’0、q’1、q’2、q’3來表示。此去區塊效應濾波器一次處理一排的畫素,稱之為線濾波器(line filter)。
依此,對於一個每秒30張畫面的高畫質(full HD)影像序列,如果其顏色部件使用4:2:0格式,則去區塊效應濾波器每秒需要處理高達11,705,280個區塊邊。如果去區塊效應濾波器是以處理器上的軟體方法來實現,則此處理器的工作時脈(working clock)也會超過500MHz。當影像序列使用MBAFF格式的視訊壓縮,如第七圖的範例所示,如果目前的框-巨區塊(current frame MB)705的鄰近上方是一場-巨區塊,則去區塊效應濾波器必須額外處理兩個上方巨區塊(上場-巨區塊710與下場-巨方塊720)的邊界,對於該影像序列,總共每秒需要處理高達12,194,880個區塊邊;並且,進行垂直方向處理時,讀取與寫入記憶體總共高達32×195840×2個位元組,進行水平方向處理時,讀取與寫入記憶體總共高達32×(195840+16320)×2個位元組。換句話說,去區塊效應濾波器之記憶體頻寬的需求高達每秒780,472,320個位元組。
在美國專利公開號2008/0043853的文獻中,揭露一去區塊效應濾波器。如第八圖的範例所示,去區塊效應濾波器801使用一處理單元(processing unit)802,來對被安排在目前巨區塊(current MB)804之跨邊812之多列上的多群畫素,同時處理行方向邊去除(column-direction edge filtering)區塊效應,例如在第一時脈週期(clock cycle)處理畫素E4至E7與畫素G4至G7,在第二時脈週期處理畫素F4至F7與畫素H4至H7。並且使用一重新安排單元(rearrangement unit)803,將已處理過的畫素重排至不同的行,例如將列E裡的畫素E4至E7安排至行4裡的畫素E4、F4、G4、H4,列F裡的畫素F4至F7安排至行5裡的畫素E5、F5、G5、H5,列G裡的畫素G4至G7安排至行6裡的畫素E6、F6、G6、H6,列H裡的畫素H4至H7安排至行7裡的畫素E7、F7、G7、H7。如此,以減少水平邊之去區塊效應的處理時間,此處理時間是讀出必要畫素的等待時間。
Cheng-An Chien等人於2008和2009年提出一種具有高吞吐量(high throughput)的內迴路去區塊效應濾波器,如第九圖的範例所示,去區塊效應濾波器910採用一4×4/8×8線濾波器912和一種緩衝器管理方法(buffer management scheme),來支援H.264/AVC之多種視訊編碼標準,例如PICAFF格式與MBAFF格式。此緩衝器管理方法採用兩種內部緩衝器來儲存參考巨區塊對(reference MB pair)的資料,並且於切換水平與垂直邊之濾除運作(filtering operation)之際,幫內部畫素重新安排處理時程,而無需將此畫素寫入外部記憶體920。
本揭露的實施範例可提供一種視訊壓縮之去區塊效應濾波裝置與方法,用來濾除一影像序列之巨區塊間的邊界區塊效應,每兩相鄰巨區塊之垂直或水平方向的每一邊界資料是由一前段畫素資料與一後段畫素資料所組成。
在一實施範例中,所揭露者是關於一種視訊壓縮之去區塊效應濾波裝置。此裝置包含一適應性佇列(adaptive queue)、一第一與一第二交換緩衝器(swap buffer)、一第一濾波器、以及一第二濾波器。此第一濾波器將先前儲存於此第一交換緩衝器的一前段畫素資料輸入,並且將一目前正要處理之巨區塊的未濾除畫素資料(non-filtered pixel data)輸入並當成是一後段畫素資料,經進行一垂直方向的去區塊效應濾除過程之後,輸出一前段已濾除畫素資料(filtered pixel data)至此適應性佇列,並輸出一後段已濾除畫素資料且回存至此第一交換緩衝器;此第二濾波器將先前儲存於此第二交換緩衝器的一前段畫素資料輸入,並且將此適應性佇列的一輸出資料當成是一後段畫素資料,經進行一水平方向的去區塊效應濾除過程之後,將所有輸出的一全段已濾除畫素資料回存至此第二交換緩衝器。
在另一實施範例中,所揭露者是關於一種視訊壓縮之去區塊效應濾波方法。此方法包含:輸入先前儲存於一第一交換緩衝器的一前段畫素資料,並且將一目前正要處理之巨區塊的未濾除畫素輸入並當成是一後段畫素資料;進行一垂直方向的去區塊效應濾除過程之後,輸出一前段已濾除畫素資料至一適應性佇列,並輸出一後段已濾除畫素資料且回存至此第一交換緩衝器;將先前儲存於一第二交換緩衝器的一前段畫素資料輸入,並且將此適應性佇列的一輸出資料當成是一後段畫素資料;以及進行一水平方向的去區塊效應濾除過程之後,將所有輸出的一全段已濾除畫素資料回存至此第二交換緩衝器。
茲配合下列圖示、實施範例之詳細說明及申請專利範圍,將上述及本發明之其他目的與優點詳述於後。
本揭露的實施範例提供一種裝置與方法,利用緩衝(buffer)巨區塊之一第一與一第二濾波器所需之部分資料,並以暫存器(register)實現緩衝功能來增加資料交換彈性(flexibility of data exchange),以減少記憶體存取次數、提升去區塊效應濾波器的效能和吞吐量、以及減少其內部緩衝器的大小。此第一與第二濾波器分別獨立進行一影像序列之相鄰巨區塊間之垂直與水平方向之去區塊效應濾除過程。
第十圖是一去區塊效應濾波裝置的一個範例示意圖,與所揭露的某些實施範例一致。第十圖的範例中,去區塊效應濾波裝置1000用來濾除一影像序列之巨區塊間的邊界區塊效應,在兩相鄰巨區塊間之垂直或水平方向的每一邊界資料被分成兩部分,一部分稱為前段畫素資料,記為{p3、p2、p1、p0},而另一部分稱為後段畫素資料,記為{q0、q1、q2、q3}。濾波裝置1000可包含一適應性佇列1030、一第一交換緩衝器1012、一第二交換緩衝器1022、一第一濾波器1010、以及一第二濾波器1020。
第一濾波器1010與第二濾波器1020分別獨立進行該影像序列之巨區塊間之垂直與水平方向之邊界資料的去區塊效應濾除過程。第一濾波器1010進行垂直方向之去區塊效應濾除過程後,將輸出的部分資料寫入適應性佇列1030。一但適應性佇列1030裡有任何資料,第二濾波器1020則讀出此資料並當成是輸入資料的一部分,來開始進行水平方向之去區塊效應濾除過程。
目前正要處理之巨區塊的未濾除畫素資料可來自一樣本解碼器(sample decoder)1052,並且當成是輸入第一濾波器1010的一後段畫素資料{q0、q1、q2、q3}。而輸入第一濾波器1010的一前段畫素資料{p3、p2、p1、q0}是來自先前儲存於第一交換緩衝器1012的資料。第一濾波器1010進行一垂直方向去區塊效應濾除過程(vertical deblocking filtering)後,輸出一後段已濾除畫素資料{q’0、q’1、q’2、q’3},且回存至第一交換緩衝器1012;並且輸出一前段已濾除畫素資料{p’3、p’2、p’1、p’0},且由適應性佇列1030來儲存。
輸入第二濾波器1020的一前段畫素資料{p3、p2、p1、p0}是來自先前儲存於第二交換緩衝器1022的資料。輸入第二濾波器1020的一後段畫素資料{q0、q1、q2、q3}是來自適應性佇列1030的輸出資料。第二濾波器1020進行一水平方向之去區塊效應濾除過程(horizontal deblocking filtering)後,將所有輸出的一全段已濾除畫素資料{p’3、p’2、p’1、p’0、q’0、q’1、q’2、q’3},回存至第二交換緩衝器1022。
當處理之巨區塊是MBAFF格式時,可將第二濾波器1020輸出之已濾除畫素資料{p’3、p’2、p’1、p’0、q’0、q’1、q’2、q’3}的一部份資料經由第二交換緩衝器1022,再回存至第一交換緩衝器1012。去區塊效應濾波裝置1000可藉由一參數計算器(parameter calculator)1054來產生相關參數,例如邊界強度,或旗幟(flag)等,並可提供給第一濾波器1010與第二濾波器1020,作為進行去區塊效應濾除過程的輸入參數。
去區塊效應濾波裝置1000可包括一適應性記憶體讀取器(adaptive memory reader)1062與一適應性記憶體寫入器(adaptive memory writer)1064。第二交換緩衝器1022的初始資料可由適應性記憶體讀取器1062來提供,而適應性記憶體讀取器1062可從一記憶體1070讀取資料。進行去區塊效應濾除過程的期間,儲存於第一交換緩衝器1012與第二交換緩衝器1022的資料可經由適應性記憶體寫入器1064來寫入記憶體1070。記憶體1070不限制設置在去區塊效應濾波裝置1000的外部或是內部。
例如,當去區塊效應濾除過程是進行水平邊之橫跨目前正要處理之巨區塊以及其上方緊鄰之巨區塊的邊界時,第二交換緩衝器1022的初始資料可由適應性記憶體讀取器1062來提供,而適應性記憶體讀取器1062是從記憶體1070讀取此初始資料。從記憶體1070讀取此初始資料的次數與參數計算器1054產生的相關參數和旗幟有關。例如,當邊界強度等於4時,則從記憶體1070讀取整個4×4的區塊;當邊界強度等於1或2或3時,則從記憶體1070讀取一4×3的區塊;對於使用MBAFF格式之巨區塊的特殊情況下,則從記憶體1070讀取一4×3的區塊;如果其水平邊屬於顏色部件,則從記憶體1070讀取一4×2的區塊;當邊界強度等於0或一全域旗幟(global flag)等於1(或True)時,則沒有從記憶體1070讀取任何資料。
當去區塊效應濾波器進行的垂直與水平方之向去區塊效應濾除過程完成後,存在第一交換緩衝器1012與第二交換緩衝器1022裡的已濾除畫素資料會被回存至記憶體1070。寫入資料至記憶體1070的總次數與一些旗幟有關,此旗幟是由第一濾波器1010與第二濾波器1020產生的,因為當第一濾波器1010與第二濾波器1020進行相對應之垂直與水平邊之去區塊效應濾除過程後,會產生相對應的旗幟來代表已濾除畫素資料的數值是否與濾除之前不同,如果不同則將相對應的旗幟設定為1(或True),反之設定為0(或False)。
例如第十一A圖的範例所示,當第一濾波器1010進行垂直方向去區塊效應濾除過程完成後,第一濾波器1010將區塊1102中行0與行3中部分畫素資料的數值進行修改,並設定已濾除畫素資料之相對應的旗幟,例如flag=1,來別於未被修改的畫素資料,例如flag=0,其中行0之畫素資料中有標記p’2、p’1、p’0、q’0、q’1、q’2以及行3之畫素資料中有標記p’1、p’0、q’0、q’1者皆代表是數值有被修改的已濾除畫素資料;而行1與行2之畫素資料未被寫入記憶體,因為其相對應的旗幟會顯示出其濾除後的數值與濾除前相同,所以不需寫入記憶體而可降低寫入次數。類似地,如第十一B圖的範例所示,當第二濾波器1020對區塊1103進行水平方向去區塊效應濾除過程完成後,只會將行3之畫素資料寫入記憶體,因為第二濾波器1020產生的相對應的旗幟只顯示行3之畫素資料被第二濾波器1020修改過。
以下以H.264/AVC之顏色部件的三種格式,即4:2:0、4:2:2、以及4:4:4格式,為範例來說明進行去區塊效應濾除過程時,區塊之巨區塊進行水平與垂直方向之邊界畫素的濾除順序。第十二A圖與第十二B圖的範例分別說明對使用4:2:0格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十二A圖的範例中,垂直邊界之畫素資料是依圖中垂直邊0至垂直邊23的順序(如圖中虛線上的數字所示)來進行垂直方向去區塊效應濾除過程,其中,垂直邊0至15是16×16畫素點灰階部件310的垂直邊,而垂直邊16至19與垂直邊20至23分別是8×8畫素點顏色部件312與314的垂直邊。而第十二B圖的範例中,水平邊界之畫素資料是依圖中水平邊0至水平邊23的順序(如圖中虛線上的數字所示)來進行水平方向去區塊效應濾除過程,其中,水平邊0至15是16×16畫素點灰階部件310的水平邊,而水平邊16至19與水平邊20至23分別是8×8畫素點顏色部件312與314的水平邊。
第十三A圖與第十三B圖的範例分別說明對使用4:2:2格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十三A圖的範例中,垂直邊界之畫素資料是依圖中垂直邊0至垂直邊31的順序(如圖中虛線上的數字所示)來進行垂直方向去區塊效應濾除過程,其中,垂直邊0至15是16×16畫素點灰階部件310的垂直邊,而垂直邊16至23與垂直邊24至31分別是16×8畫素點顏色部件322與324的垂直邊。而第十三B圖的範例中,水平邊界之畫素資料是依圖中水平邊0至水平邊31的順序(如圖中虛線上的數字所示)來進行水平方向去區塊效應濾除過程,其中,水平邊0至15是16×16畫素點灰階部件310的水平邊,而水平邊16至23與水平邊24至31分別是16×8畫素點顏色部件322與324的水平邊。
第十四A圖與第十四B圖的範例分別說明對使用4:4:4格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十四A圖的範例中,垂直邊界之畫素資料是依圖中垂直邊0至垂直邊47的順序(如圖中虛線上的數字所示)來進行垂直方向去區塊效應濾除過程,其中,垂直邊0至15是16×16畫素點灰階部件310的垂直邊,而垂直邊16至31與垂直邊32至47分別是16×16畫素點顏色部件332與334的垂直邊。而第十四B圖的範例中,水平邊界之畫素資料是依圖中水平邊0至水平邊47的順序(如圖中虛線上的數字所示)來進行水平方向去區塊效應濾除過程,其中,水平邊0至15是16×16畫素點灰階部件310的水平邊,而水平邊16至31與水平邊31至47分別是16×16畫素點顏色部件332與334的水平邊。
當去區塊效應濾除過程所處理之巨區塊是MBAFF格式時,第十五A圖的範例說明對使用4:2:0格式之巨區塊的特殊情況,當第二濾波器1020進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十五A圖的範例中,水平邊界之畫素資料是依圖中之下列水平邊的順序來進行垂直方向去區塊效應濾除過程,亦即0→0’→1→1’→2→2’→3→3’,然後依序4至15,然後16→16’→17→17’→18→19→20→20’→21→21’→22→23,其中,水平邊0至3是16×16畫素點灰階部件1510與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊0’至3’是灰階部件1510與上方緊鄰之下場-巨區塊之邊界的水平邊,而4至15是灰階部件1510內部的水平邊;水平邊16至17是8×8畫素點顏色部件1512與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊16’至17’是顏色部件1512與上方緊鄰之下場-巨區塊之邊界的水平邊,而18至19是顏色部件1512內部的水平邊;水平邊20至21是8×8畫素點顏色部件1514與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊20’至21’是顏色部件1514與上方緊鄰之下場-巨區塊之邊界的水平邊,而22至23是顏色部件1514內部的水平邊。
第十五B圖的範例說明對使用4:2:2格式及MBAFF格式之巨區塊的特殊情況,當第二濾波器進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十五B圖的範例中,水平邊界之畫素資料是依圖中之下列水平邊的順序來進行垂直方向去區塊效應濾除過程,亦即0→0’→1→1’→2→2’→3→3’,然後依序4至15,然後16→16’→17→17’→18→18’→19→19’→20→21→22→23,然後24→24’→25→25’→26→26’→27→27’→28→29→30→31,其中,水平邊16至19是16×8畫素點顏色部件1522與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊16’至19’是顏色部件1522與上方緊鄰之下場-巨區塊之邊界的水平邊,而20至23是顏色部件1522內部的水平邊;水平邊24至27是16×8畫素點顏色部件1524與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊24’至27’是顏色部件1524與上方緊鄰之下場-巨區塊之邊界的水平邊,而28至31是顏色部件1524內部的水平邊。
第十五C圖的範例說明對於使用4:4:4格式及MBAFF格式之巨區塊的特殊情況,當第二濾波器進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。第十五B圖的範例中,水平邊界之畫素資料是依圖中之下列水平邊的順序來進行垂直方向去區塊效應濾除過程,亦即0→0’→1→1’→2→2’→3→3’,然後依序4至15,然後16→16’→17→17’→18→18’→19→19’,然後依序20至31,然後32→32’→33→33’→34→34’→35→35’,然後依序36至47,其中,水平邊16至19是16×16畫素點顏色部件1532與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊16’至19’是顏色部件1532與上方緊鄰之下場-巨區塊之邊界的水平邊,而20至31是顏色部件1532內部的水平邊;水平邊32至35是16×16畫素點顏色部件1534與上方緊鄰之上場-巨區塊之邊界的水平邊,水平邊32’至35’是顏色部件1534與上方緊鄰之下場-巨區塊之邊界的水平邊,而36至47是顏色部件1534內部的水平邊。
如前所述,第一濾波器1010進行垂直方向之去區塊效應濾除過程後,將輸出的部分資料寫入適應性佇列1030。一但適應性佇列1030裡有任何資料,第二濾波器1020則讀出此資料並當成是輸入資料的一部分,來開始進行水平方向之去區塊效應濾除過程。
第十六圖是一範例示意圖,說明適應性佇列1030的結構,與所揭露的某些實施範例一致。在第十六圖的範例中,適應性佇列1030的接收資料是第一濾波器1010輸出的部分資料1610,然後這些資料以一佇列方式被暫存於內部緩衝器裡,適應性佇列1030的輸出資料作為第二濾波器1020之輸入資料的一部分。對於使用MBAFF格式之巨區塊的特殊情況,適應性佇列1030會先將資料從框格式(frame format),例如框格式資料1620,轉換成第二濾波器1020所需要的場格式(field format)資料,例如場格式資料1632或場格式資料1634,後,再輸出至第二濾波器1020。
也就是說,本揭露之實施範例可透過適應性佇列1030,來接收第一濾波器1010輸出的部分資料,並以一佇列方式暫存於至少一內部緩衝器裡;透過適應性佇列1030,可先將資料從巨區塊使用的格式轉換成第二濾波器1020所需要的格式資料後,再輸出至第二濾波器1020;然後,適應性佇列1030的輸出資料作為第二濾波器1020之輸入資料的一部分。
因為垂直與水平方向的邊界資料可同時由第一濾波器1010與第二濾波器1020獨立進行去區塊效應濾除過程,所以,適應性佇列1030可於此兩濾波器之間緩衝資料的進出。並且,對於使用MBAFF格式之巨區塊,適應性佇列1030也可以接收框區塊(frame block)並輸出場區塊(field block),以減少調換(transposition)與框/場轉換(frame-field conversion)所衍生的延遲時間(latency)。
第十七A圖至第十七H圖是範例示意圖,說明對使用4:2:0格式之巨區塊,第一濾波器1010與第二濾波器1020進行去區塊效應濾除過程期間,其區塊邊界的濾除順序,與所揭露的某些實施範例一致。如第十七A圖至第十七H圖的範例步驟所示,第一濾波器1010分別對垂直邊0至垂直邊7(圖中以v0至v7表示)進行去區塊效應濾除過程,當第一濾波器1010處理完垂直邊1(v1)之後,將輸出的部份資料寫入適應性佇列1030,而第二濾波器1020則讀出此資料並當成是輸入資料的一部分,來開始對水平邊0至水平邊5(圖中以h0至h5表示)進行去區塊效應濾除過程。如第十七C圖的範例步驟所示,當第二濾波器1020處理水平邊0(h0)的時候,第一濾波器1010也同時處理垂直邊2(v2),再者如第十七D圖的範例步驟所示,當第二濾波器1020處理水平邊1(h1)的時候,第一濾波器1010也同時處理垂直邊3(v3),也就是說,本揭露之實施範例可以讓第一濾波器1010與第二濾波器1020分別獨立進行去區塊效應濾除過程,以提升去區塊效應濾波器的效能和吞吐量。
第十八A圖至第十八H圖是範例示意圖,說明對使用4:2:0格式及MBAFF格式之巨區塊,第一濾波器1010與第二濾波器1020進行去區塊效應濾除過程期間,其區塊邊界的濾除順序,與所揭露的某些實施範例一致。如第十八A圖至第十八H圖的範例步驟所示,第一濾波器1010分別對垂直邊0至垂直邊7(圖中以v0至v7表示)進行去區塊效應濾除過程,當第一濾波器1010處理完垂直邊5(v5)之後,將輸出的部份資料寫入適應性佇列1030,而適應性佇列1030會先將框格式的資料,轉換成第二濾波器1020之輸入資料所需要的場格式的資料,而第二濾波器1020則讀出此場格式的資料並當成是輸入資料的一部分,來開始對水平邊0與水平邊0’(圖中以h0與h0’表示)進行去區塊效應濾除過程。如第十八G圖的範例步驟所示,當第二濾波器1020處理水平邊0(h0)的時候,第一濾波器1010也同時處理垂直邊6(v6),再者如第十八H圖的範例步驟所示,當第二濾波器1020處理水平邊0’(h0’)的時候,第一濾波器1010也同時處理垂直邊7(v7),也就是說對使用MBAFF格式的巨區塊而言,本揭露之實施範例同樣能讓第一濾波器1010與第二濾波器1020分別獨立進行去區塊效應濾除過程,以提升去區塊效應濾波器的效能和吞吐量。
在進行去區塊效應濾除過程期間,既有的習知技術是緩衝整個巨區塊的資料,而本揭露之實施範例是緩衝(buffering)巨區塊的部份資料,這些被緩衝的部份資料是第一濾波器1010與第二濾波器1020需要的資料,並且可採用暫存器來達成緩衝的效益,以增加資料交換(data exchange)的彈性,也較適合使用MBAFF格式的巨區塊。以第十九圖的範例來說,對於使用4:2:0格式之巨區塊,一共用了32個暫存器,此32個暫存器記為V0至V7、VX0至VX7、H0至H7、以及HX0至HX7。暫存器群組(register group)VREG由暫存器V0至V7共同組成;而暫存器群組VREG_EXT由暫存器VX0至VX7共同組成。暫存器群組HREG由暫存器H0至H7共同組成;而暫存器群組HREG_EXT由暫存器HX0至HX7共同組成。
第一交換緩衝器1012是由暫存器群組VREG以及暫存器群組VREG_EXT組成的,用來儲存第一濾波器1010需要的資料。第二交換緩衝器1022是由暫存器群組HREG以及暫存器群組HREG_EXT組成的,用來儲存第二濾波器1020需要的資料。暫存器群組中暫存器的數量在某些實施範例中可以是不同的。也就是說,本揭露之實施範例係利用緩衝器儲存巨區塊之第一濾波器1010與第二濾波器1020所需之部分資料,並以多個暫存器群組實現緩衝功能來增加資料交換彈性。第十九圖至第二十一圖的範例分別說明使用三種格式之巨區塊,其去區塊效應濾波器需要之暫存器群組,與所揭露的某些實施範例一致。其中,巨區塊中的各區塊上的符號數字代表區塊號碼,例如#5代表區塊5。
對於使用4:2:0格式之巨區塊,如第十九圖的範例所示,暫存器V0至V3、VX0至VX3、H0至H3、以及HX0至HX3用來儲存灰階部件310的資料,每一暫存器的大小為32-位元×4;而暫存器V4至V7、VX4至VX7、H4至H7、以及HX4至HX7是用來儲存顏色部件312與314的資料,其中暫存器V4至V5、VX4至VX5、H4至H5、以及HX4至HX5是用來儲存顏色部件312的資料,每一暫存器的大小為32-位元×2;而暫存器V6至V7、VX6至VX7、H6至H7、以及HX6至HX7是用來儲存顏色部件314的資料,每一暫存器的大小為32-位元×2。
對於使用4:2:2格式之巨區塊,如第二十圖的範例所示,一共用了40個暫存器,此40個暫存器記為V0至V7、VX0至VX7、H0至H11、以及HX0至HX11。其與使用4:2:0格式之巨區塊的不同處為,暫存器群組HREG由暫存器H0至H11共同組成;而暫存器群組HREG_EXT由暫存器HX0至HX11共同組成。暫存器V4至V7、VX4至VX7、H4至H11、以及HX4至HX11是用來儲存顏色部件322與324的資料,其中暫存器V4至V5、VX4至VX5、H4至H7、以及HX4至HX7是用來儲存顏色部件322的資料,每一暫存器的大小為32-位元×2;而暫存器V6至V7、VX6至VX7、H8至H11、以及HX8至HX11是用來儲存顏色部件324的資料,每一暫存器的大小為32-位元×2。
對於使用4:4:4格式之巨區塊,如第二十一圖的範例所示,一共用了48個暫存器,此48個暫存器記為V0至V11、VX0至VX11、H0至H11、以及HX0至HX11。其與使用4:2:2格式之巨區塊的不同處為,暫存器群組VREG由暫存器V0至V11共同組成;而暫存器群組VREG_EXT由暫存器VX0至VX11共同組成。暫存器V4至V11、VX4至VX11、H4至H11、以及HX4至HX11是用來儲存顏色部件332與334的資料,其中暫存器V4至V7、VX4至VX7、H4至H7、以及HX4至HX7是用來儲存顏色部件332的資料,每一暫存器的大小為32-位元×2;而暫存器V8至V11、VX8至VX11、H8至H11、以及HX8至HX11是用來儲存顏色部件334的資料,每一暫存器的大小為32-位元×2。
承上述,以第十七圖之區塊邊界的濾除順序以及第十九圖之使用4:2:0格式的暫存器群組為範例,第二十二圖說明如何再使用(re-use)巨區塊的部份資料來減少緩衝器的大小,與所揭露的某些實施範例一致。參考第二十二圖,以暫存器V0為例,第一濾波器1010在處理垂直邊0之後,其輸出資料{q’0、q’1、q’2、q’3}回存至暫存器V0而成為第一濾波器1010處理垂直邊界1所需的前段輸入資料{p3、p2、p1、q0};也就是說,使用同一暫存器來儲存目前邊之已濾除資料(filtered data of current edge),作為處理下一個邊的部分輸入資料。所以,當處理垂直邊1、2、3時,存在暫存器V0的資料是第一濾波器1010的前段輸入資料{p3、p2、p1、p0},可以再被使用,如此可以減少緩衝器裡的資料量;而其輸出資料{p’3、p’2、p’1、p’0}則寫入適應性佇列1030。
第二十三圖的範例示意圖,進一步說明如何分享(share)緩衝器,來儲存資料以同時提供給一記憶體和第二濾波器1020,與所揭露的某些實施範例一致。參考第二十三圖,在第二濾波器1020處理任何水平邊之前,暫存器H0-H7與HX0-HX7用來儲存由適應性記憶體讀取器1062從記憶體1070讀取的資料。而這些被存在暫存器H0-H7與HX0-HX7的資料是用來作為第二濾波器1020的前段輸入資料{p3、p2、p1、p0}。第二濾波器1020的後段輸入資料{q0、q1、q2、q3}則來自適應性佇列1030。
承第十七圖之區塊邊界的濾除順序所述,以暫存器H0為例,第二濾波器1020在處理水平邊0之後,其輸出資料{p’3、p’2、p’1、p’0}回存至暫存器HX0;其輸出資料{q’0、q’1、q’2、q’3}回存至暫存器H0而成為第二濾波器1020處理水平邊界4所需的前段輸入資料{p3、p2、p1、p0},所以,當處理水平邊4、8、12時,存在暫存器H0的資料可以再被使用,如此可以減少緩衝器裡的資料量。在第二濾波器1020處理完水平邊12後,因為已濾除資料(filtered data of current edge)已經儲存在暫存器H0與HX0裡,所以暫存器H0與HX0可用來作為一適應性記憶體寫入器1064的暫時緩衝器(temporary buffer)。換句話說,可分享暫存器H0與HX0來儲存由記憶體1070讀取的資料,以及來儲存已濾除資料,並經由適應性記憶體寫入器1064寫入記憶體1070。
第二十四圖的範例示意圖進一步說明前述暫存器群組裡具有彼此之間交換(swap)與轉換(convert)資料的能力,與所揭露的某些實施範例一致。參考第二十四圖,暫存器V0-V3與VX0-VX3包含巨區塊對2410的畫素資料,巨區塊對2410位於目前正在處理之巨區塊對2412的左邊。當巨區塊對2412使用場格式時,儲存在暫存器V0-V3與VX0-VX3的資料從框格式被轉換成場格式。所以,儲存在暫存器V0-V3與VX0-VX3的資料分別成為上場-部分(top-field portion)2422和下場-部分(bottom-field portion)2424。
如果目前的巨區塊是上場巨區塊,則儲存在暫存器V0-V3的資料會被第一濾波器1010使用。如果目前的巨區塊是下場巨區塊,則儲存在暫存器V0-V3的資料與VX0-VX3的資料彼此先交換2430後,儲存在暫存器V0-V3的資料再被第一濾波器1010使用。第一濾波器1010處理完巨區塊邊界(macroblock boundary)的垂直邊之後,儲存在暫存器V0-V3的資料與VX0-VX3的資料從場格式被轉換成框格式。此資料交換與格式轉換是在一個時脈週期(clock cycle)裡進行,可減少因格式轉換所引起的資料轉換的延遲(latency)。
第二十五A圖與第二十五B圖的範例示意圖進一步說明對對於使用MBAFF格式的巨區塊,處理其水平邊去區塊效應時,如何利用暫存器群組進行資料轉換,與所揭露的某些實施範例一致。參考第二十五A圖,暫存器H0-H3與HX0-HX3包含了上方巨區塊對2510的畫素資料,上方巨區塊對2510位於正在處理之目前巨區塊對2512的上方。如標號2530所指,當巨區塊對2512使用框格式,而其上方鄰近的巨區塊對2510使用場格式時,則儲存在暫存器H0-H3(即暫存器群組HREG)與HX0-HX3(即暫存器群組HREG_EXT)的資料從框格式被轉換成場格式。所以,儲存在暫存器H0-H3與HX0-HX3的資料分別成為上場-部分(top-field portion)2522和下場-部分(bottom-field portion)2524;並且分別是第二濾波器1020處理完水平邊0、1、2、3以及水平邊0’、1’、2’、3’時的輸入資料。
如第二十五B圖的範例所示,第二濾波器1020處理完此水平邊之後,儲存在暫存器H0-H3與HX0-HX3的資料(上場-部分2522與下場-部分2524)從場格式被轉換成框格式資料2532與2534。轉換成框格式的資料然後作為第二濾波器1020處理目前正在處理之巨區塊之其他水平邊,例如水平邊4、5、6、7,的輸入資料。
綜上所述,本揭露之實施範例所提供之視訊壓縮之去區塊效應濾波裝置與方法係利用緩衝器儲存巨區塊之兩濾波器所需之部分資料,並以暫存器群組實現緩衝功能來增加資料交換彈性。此去區塊效應濾波裝置中的兩濾波器係分別獨立進行一影像序列之相鄰巨區塊間之垂直與水平方向之去區塊效應濾除過程。此實施範例可減少記憶體存取次數、提升去區塊效應濾波器的效能和吞吐量、以及減少其內部緩衝器的大小。
以上所述者僅為本發明之實施範例,當不能依此限定本發明實施之範圍。即大凡本發明申請專利範圍所作之均等變化與修飾,皆應仍屬本發明專利涵蓋之範圍。
200...已壓縮的影像序列
210...框畫面
220...場畫面
230...框畫面
232...上場畫面
234...下場畫面
300...框畫面
302...巨區塊
310...16×16畫素點灰階部件
312、314...4:2:0格式的顏色部件
322、324...4:2:2格式的顏色部件
332、334...4:4:4格式的顏色部件
400...框畫面
410...框-巨區塊對
420...場-巨區塊對
422...上場-巨區塊
424...下場-巨區塊
510...垂直邊
520...水平邊
705...目前的框-巨區塊
710...上方的上-場巨區塊
720‧‧‧上方的下-場巨區塊
801‧‧‧去區塊效應濾波器
802‧‧‧處理單元
803‧‧‧重新安排單元
804‧‧‧目前巨區塊
812‧‧‧邊
910‧‧‧去區塊效應濾波器
912‧‧‧線濾波器
920‧‧‧外部記憶體
1000‧‧‧去區塊效應濾波裝置
1010‧‧‧第一濾波器
1020‧‧‧第二濾波器
1012‧‧‧第一交換緩衝器
1022‧‧‧第二交換緩衝器
1030‧‧‧適應性佇列
1052‧‧‧樣本解碼器
1054‧‧‧參數計算器
1062‧‧‧適應性記憶體讀取器
1064‧‧‧適應性記憶體寫入器
1070‧‧‧記憶體
1102‧‧‧區塊p’2、p’1、p’0、q’0、q’1、q’2
1510‧‧‧灰階部件
1512、1514‧‧‧8×8畫素點顏色部件
1522、1524‧‧‧16×8畫素點顏色部件
1532、1534‧‧‧16×16畫素點顏色部件
1610‧‧‧第一濾波器輸出的部分資料
1620‧‧‧框格式資料
1632、1634‧‧‧場格式資料
2410‧‧‧巨區塊對
2412‧‧‧使用場格式之巨區塊對
2422...上場-部分
2424...下場-部分
2430...交換
2510...上方巨區塊對
2512...使用框格式之巨區塊對
2522...上場-部分
2524...下場-部分
第一A圖是一範例示意圖,說明外迴路去區塊效應濾波器。
第一B圖是一範例示意圖,說明內迴路去區塊效應濾波器。
第二A圖是一範例示意圖,說明已壓縮的影像序列是由交織式的框畫面和場畫面來組合。
第二B圖是一範例示意圖,說明框畫面、上場畫面、以及下場畫面。
第三圖是一範例示意圖,說明巨方塊格式。
第四圖是一範例示意圖,說明巨區塊適應性框場格式。
第五圖是一範例示意圖,說明被垂直濾波器去除區塊效應的畫素被當作輸入,再被水平濾波器去除區塊效應。
第六圖是一範例示意圖,說明線濾波器的輸入和輸出資料。
第七圖是一範例示意圖,說明使用MBAFF格式時,對於目前的框-巨區塊,去區塊效應濾波器需要處理緊鄰上方的下場-巨區塊之間的邊,以及與上方的上場-巨區塊之間的邊。
第八圖是一種去區塊效應濾波器之架構的一個範例示意圖。
第九圖是一具有高吞吐量之內迴路去區塊效應濾波器的一個範例示意圖。
第十圖是一去區塊效應濾波裝置的一個範例示意圖,與所揭露的某些實施範例一致。
第十一A圖與第十一B圖是範例示意圖,說明濾波器將區塊中的畫素資料寫入記憶體時,設定已濾除畫素資料之相對應的旗幟,與所揭露的某些實施範例一致。
第十二A圖與第十二B圖的範例分別說明對使用4:2:0格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十三A圖與第十三B圖的範例分別說明對使用4:2:2格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十四A圖與第十四B圖的範例分別說明對使用4:4:4格式編碼之巨區塊,當進行垂直方向與水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十五A圖是一範例示意圖,說明對使用4:2:0格式與MBAFF格式的巨區塊的特殊情況,當第二濾波器進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十五B圖是一範例示意圖,說明對使用4:2:2格式與MBAFF格式的巨區塊的特殊情況,當第二濾波器進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十五C圖是一範例示意圖,說明對使用4:4:4格式與MBAFF格式的巨區塊的特殊情況,當第二濾波器進行水平方向去區塊效應濾除過程時,邊界之畫素資料的濾除順序,與所揭露的某些實施範例一致。
第十六圖是一範例示意圖,說明適應性佇列的結構,與所揭露的某些實施範例一致。
第十七A圖至第十七H圖是範例示意圖,說明對使用4:2:0格式之巨區塊,第一濾波器與第二濾波器進行去區塊效應濾除過程期間,其區塊邊界的濾除順序,與所揭露的某些實施範例一致。
第十八A圖至第十八H圖是範例示意圖,說明對使用4:2:0格式與MBAFF格式之巨區塊,第一濾波器與第二濾波器進行去區塊效應濾除過程期間,其區塊邊界的濾除順序,與所揭露的某些實施範例一致。
第十九圖是一範例示意圖,說明對於使用4:2:0格式之巨區塊,其去區塊效應濾波器需要之暫存器群組,與所揭露的某些實施範例一致。
第二十圖是一範例示意圖,說明對於使用4:2:2格式之巨區塊,其去區塊效應濾波器需要之暫存器群組,與所揭露的某些實施範例一致。
第二十一圖是一範例示意圖,說明對於使用4:4:4格式之巨區塊,其去區塊效應濾波器需要之暫存器群組,與所揭露的某些實施範例一致。
第二十二圖是一範例示意圖,說明如何再使用巨區塊的部份資料來減少緩衝器的大小,與所揭露的某些實施範例一致。
第二十三圖是一範例示意圖,說明如何分享緩衝器,來儲存資料以同時提供給一記憶體和第二濾波器,與所揭露的某些實施範例一致。
第二十四圖是一範例示意圖,說明前述暫存器群組裡具有彼此之間交換與轉換資料的能力,與所揭露的某些實施範例一致。
第二十五A圖與第二十五B圖的範例示意圖說明對於使用MBAFF格式的巨區塊,處理其水平邊去區塊效應時,如何利用暫存器群組進行資料轉換,與所揭露的某些實施範例一致。
1000...去區塊效應濾波裝置
1010...第一濾波器
1020...第二濾波器
1012...第一交換緩衝器
1022...第二交換緩衝器
1030...適應性佇列
1052...樣本解碼器
1054...參數計算器
1062...適應性記憶體讀取器
1064...適應性記憶體寫入器
1070...記憶體
Claims (18)
- 一種視訊壓縮之去區塊效應濾波裝置,用於濾除具有巨區塊適應性框場格式的一影像之區塊間的邊界區塊效應,每兩相鄰巨區塊之垂直或水平方向的每一邊界資料是由一前段畫素資料與一後段畫素資料所組成,該裝置包含:一適應性佇列,用來儲存垂直邊界的前段已濾除畫素、轉換框格式的畫素為場格式的畫素資料、以及儲存水平邊界的後段的未濾除畫素資料;一第一交換緩衝器,用來儲存左方鄰近巨區塊對的未濾除畫素資料、轉換框格式的畫素資料為場格式的畫素資料、儲存垂直邊界的前段未濾除畫素資料、儲存垂直邊界的後段已濾除畫素資料、以及在執行所有垂直去區塊效應濾波過程之後,轉換場格式的畫素資料為框格式的畫素資料;一第二交換緩衝器,用來儲存上方鄰近巨區塊對的未濾除畫素資料、轉換框格式的畫素資料為場格式的畫素資料、儲存水平邊界的前段未濾除畫素資料、儲存水平邊界的全段已濾除畫素資料、在執行第一次水平去區塊效應濾波過程之後轉換場格式的畫素資料為框格式的畫素資料、以及在執行所有水平去區塊效應濾波過程之後,輸出一部份的已濾除畫素資料至該第一交換緩衝器;一第一濾波器,將先前儲存於該第一交換緩衝器的一第一前段畫素資料輸入,並且將一目前正要處理之巨區塊的未濾除畫素輸入並當成是一第一後段畫素資料,經進 行一垂直方向的去區塊效應濾除過程之後,輸出一前段已濾除畫素資料至該適應性佇列,並輸出一後段已濾除畫素資料且回存至該第一交換緩衝器;以及一第二濾波器,將先前儲存於該第二交換緩衝器的一第二前段畫素資料輸入,並且將該適應性佇列的一輸出資料當成是一第二後段畫素資料,經進行一水平方向的去區塊效應濾除過程之後,將所有輸出的一全段已濾除畫素資料回存至該第二交換緩衝器。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,其中當該目前正要處理之巨區塊是使用巨區塊適應性框場格式時,該第二濾波器輸出之該已濾除畫素資料的一部份資料經由該第二交換緩衝器,再回存至該第一交換緩衝器。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,其中該第二交換緩衝器的初始資料係藉由一適應性記憶體讀取器從一記憶體讀取的資料來提供,而且該適應性記憶體讀取器讀取該記憶體的次數是由該目前正要處理之巨區塊的格式與一參數計算器所提供的至少一參數來決定。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,其中該第一與第二交換緩衝器分別以多個第一暫存器群組與多個第二暫存器群組來實現。
- 如申請專利範圍第4項所述之去區塊效應濾波裝置,其中該多個第一與第二暫存器群組裡具有彼此之間交換與轉換資料的能力。
- 如申請專利範圍第4項所述之去區塊效應濾波裝置,該裝置分享該多個第一與第二暫存器群組,一方面藉以儲存由一記憶體讀取的資料,另一方面藉以儲存該第一與第二交換緩衝器裡已濾除畫素資料,以經由一適應性記憶體寫入器寫入該記憶體,而且該適應性記憶體寫入器寫入該記憶體的次數是由該第一與該第二濾波器的一輸出旗幟來決定。
- 如申請專利範圍第4項所述之去區塊效應濾波裝置,其中該第一濾波器需要的資料儲存於該多個第一暫存器群組,而該第二濾波器需要的資料儲存於該多個第二暫存器群組。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,其中該第一濾波器分別連接至該適應性佇列與該第一交換緩衝器,而該第二濾波器分別連接至該適應性佇列與該第二交換緩衝器。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,該裝置透過一參數計算器來產生至少一相關參數,並提供給該第一與第二濾波器,作為進行去區塊效應濾除過程的輸入參數。
- 如申請專利範圍第1項所述之去區塊效應濾波裝置,該裝置還包括:一適應性記憶體讀取器,該第二交換緩衝器的初始資料係藉由該適應性記憶體讀取器從一記憶體讀取的資料來提供;以及一適應性記憶體寫入器,經由該適應性記憶體寫入器, 將該第一與第二交換緩衝器裡已濾除畫素資料寫入該記憶體。
- 一種視訊壓縮之去區塊效應濾波方法,用於濾除具有巨區塊適應性框場格式的一影像之區塊間的邊界區塊效應,每兩相鄰巨區塊之垂直或水平方向的每一邊界資料是由一前段畫素資料與一後段畫素資料所組成,該方法包含:當一目前正要處理之巨區塊是場格式並且一左方鄰近巨區塊對是框格式時,藉由一第一交換緩衝器將該左方鄰近巨區塊對的未濾除畫素資料轉換為場格式的畫素資料;輸入先前儲存於該第一交換緩衝器的一第一前段畫素資料,並且將該目前正要處理之巨區塊的未濾除畫素輸入並當成是一第一後段畫素資料;進行一垂直方向的去區塊效應濾除過程之後,輸出一前段已濾除畫素資料至一適應性佇列,並輸出一後段已濾除畫素資料且回存至該第一交換緩衝器;當該目前正要處理之巨區塊是框格式並且一上方鄰近巨區塊對是場格式時,藉由該適應性佇列將來自該垂直方向的去區塊效應濾除過程的該前段已濾除畫素資料轉換為場格式的畫素資料;當該目前正要處理之巨區塊是框格式並且該上方鄰近巨區塊對是場格式時,藉由一第二交換緩衝器將該上方鄰近巨區塊對之框格式的未濾除畫素資料轉換為場格式的畫素資料; 將先前儲存於該第二交換緩衝器的一第二前段畫素資料輸入,並且將該適應性佇列的輸出資料當成是一第二後段畫素資料;進行一水平方向的去區塊效應濾除過程之後,將所有輸出的一全段已濾除畫素資料回存至該第二交換緩衝器;當該目前正要處理之巨區塊是框格式並且該上方鄰近巨區塊對是場格式時,在執行第一次水平去區塊效應濾波過程之後,藉由該第二交換緩衝器轉換場格式的該全段已濾除畫素資料為框格式的畫素資料;當該目前正要處理之巨區塊是場格式時,在執行所有水平去區塊效應濾波過程之後,藉由該第一交換緩衝器將框格式的該後段已濾除畫素資料轉換為場格式的畫素資料;以及在執行所有水平去區塊效應濾波過程之後,輸出一部份的該全段已濾除畫素資料至該第一交換緩衝器。
- 如申請專利範圍第11項所述之去區塊效應濾波方法,該方法還包括:利用該第一與第二交換緩衝器儲存該目前正要處理之巨區塊之該垂直方向與該水平方向的去區塊效應濾除過程所需之部分資料,並以多個暫存器群組實現緩衝功能來增加資料交換彈性。
- 如申請專利範圍第12項所述之去區塊效應濾波方法,該方法還包括:分享該多個暫存器群組,一方面藉以儲存由一適應性記憶體讀取器從一記憶體讀取的資料,另一方面藉以儲存 該第一與第二交換緩衝器裡已濾除資料,以經由一適應性記憶體寫入器寫入該記憶體。
- 如申請專利範圍第13項所述之去區塊效應濾波方法,該方法還包括:該適應性記憶體讀取器從該記憶體讀取的次數是由該目前正要處理之巨區塊的格式與一參數計算器所提供的至少一參數來決定;以及該適應性記憶體寫入器寫入該記憶體的次數是由該垂直方向與該水平方向的去區塊效應濾除過程的一輸出旗幟來決定。
- 如申請專利範圍第11項所述之去區塊效應濾波方法,該方法還包括:透過一第一與一第二濾波器來分別進行該垂直方向與該水平方向的去區塊效應濾除過程。
- 如申請專利範圍第15項所述之去區塊效應濾波方法,該方法還包括:透過該適應性佇列,接收該第一濾波器輸出的部分資料,並以一佇列方式暫存於至少一內部緩衝器裡;透過該適應性佇列,先將資料從巨區塊使用的一格式轉換成該第二濾波器所需要的另一格式資料後,再輸出至該第二濾波器;將該適應性佇列的輸出資料作為該第二濾波器之輸入資料的一部分。
- 如申請專利範圍第15項所述之去區塊效應濾波方法,該方法還包括: 該第一濾波器進行一目前垂直邊的去區塊效應濾除過程之後,儲存該目前垂直邊之已濾除資料於一暫存器;以及將該暫存器裡該已濾除資料作為處理下一個垂直邊的部分輸入資料。
- 如申請專利範圍第15項所述之去區塊效應濾波方法,該方法還包括:該第二濾波器進行一目前水平邊的去區塊效應濾除過程之後,儲存該目前水平邊之已濾除資料於一暫存器;以及將該暫存器裡該已濾除資料作為處理下一個水平邊的部分輸入資料。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010086302A JP5183664B2 (ja) | 2009-10-29 | 2010-04-02 | ビデオ圧縮のためのデブロッキング装置及び方法 |
US12/858,440 US8494062B2 (en) | 2009-10-29 | 2010-08-18 | Deblocking filtering apparatus and method for video compression using a double filter with application to macroblock adaptive frame field coding |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US25600009P | 2009-10-29 | 2009-10-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201116064A TW201116064A (en) | 2011-05-01 |
TWI469643B true TWI469643B (zh) | 2015-01-11 |
Family
ID=43959839
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW99105715A TWI469643B (zh) | 2009-10-29 | 2010-02-26 | 視訊壓縮之去區塊效應濾波裝置與方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN102055971B (zh) |
TW (1) | TWI469643B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2724544B1 (en) * | 2011-06-22 | 2017-02-22 | Koninklijke Philips N.V. | Autostereoscopic display apparatus having optical magnification |
EP2769550A4 (en) * | 2011-10-14 | 2016-03-09 | Mediatek Inc | METHOD AND APPARATUS FOR LOOP FILTRATION |
TWI652941B (zh) | 2011-11-03 | 2019-03-01 | 太陽專利信託 | 用於解區塊之有效修整技術(二) |
US9438911B2 (en) * | 2012-08-03 | 2016-09-06 | Mediatek Inc. | Video processing system with shared/configurable in-loop filter data buffer architecture and related video processing method thereof |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200629909A (en) * | 2004-12-01 | 2006-08-16 | Samsung Electronics Co Ltd | A pipelined deblocking filter |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1989876A2 (en) * | 2005-08-31 | 2008-11-12 | Micronas USA, Inc. | Systems and methods for video transformation and in loop filtering |
CN101184227A (zh) * | 2006-11-13 | 2008-05-21 | 扬智科技股份有限公司 | 除区块滤波器 |
CN101080009B (zh) * | 2007-07-17 | 2011-02-23 | 智原科技股份有限公司 | 运用于图像编解码器中的去方块过滤方法与装置 |
ATE526788T1 (de) * | 2007-11-16 | 2011-10-15 | St Microelectronics Sa | Deblockierungsfilter |
CN101527841B (zh) * | 2008-03-06 | 2011-05-11 | 瑞昱半导体股份有限公司 | 去除图像区块效应的方法及装置 |
-
2010
- 2010-02-26 TW TW99105715A patent/TWI469643B/zh active
- 2010-04-07 CN CN 201010140254 patent/CN102055971B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200629909A (en) * | 2004-12-01 | 2006-08-16 | Samsung Electronics Co Ltd | A pipelined deblocking filter |
Also Published As
Publication number | Publication date |
---|---|
CN102055971A (zh) | 2011-05-11 |
CN102055971B (zh) | 2012-08-29 |
TW201116064A (en) | 2011-05-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5183664B2 (ja) | ビデオ圧縮のためのデブロッキング装置及び方法 | |
KR20060060919A (ko) | H.264/mpeg-4 에서의 블록킹 효과를 제거하기 위한디블록 필터 및 필터링 방법 | |
TWI469643B (zh) | 視訊壓縮之去區塊效應濾波裝置與方法 | |
WO2014023207A1 (en) | Method and apparatus for sample adaptive offset in a video decoder | |
US20110013696A1 (en) | Moving image processor and processing method for moving image | |
CN111147849B (zh) | 后处理装置和后处理方法 | |
JP2013146080A (ja) | 小さな画像又は大きな画像を処理する小さなラインバッファを容易に用いる技術 | |
JP2007293533A (ja) | プロセッサシステム及びデータ転送方法 | |
EP2880861B1 (en) | Method and apparatus for video processing incorporating deblocking and sample adaptive offset | |
US20070147516A1 (en) | Decoding apparatus | |
CN101459839A (zh) | 去块效应滤波方法及实现该方法的装置 | |
US20120200748A1 (en) | Image processing apparatus, electronic camera, and storage medium storing image processing program | |
Eldeken et al. | High throughput parallel scheme for HEVC deblocking filter | |
US7636490B2 (en) | Deblocking filter process with local buffers | |
JP2007258882A (ja) | 画像復号装置 | |
KR101331093B1 (ko) | 프레임 메모리의 단일뱅크 내 참조 영상의 픽셀 인터리빙 방법 및 장치, 이를 포함하는 영상코덱 시스템 | |
CN103702132B (zh) | 滤波方法、装置及设备 | |
CN104754363A (zh) | 用于hevc的环路滤波方法及装置、编码器及解码器 | |
KR100824287B1 (ko) | 저전력 고속 디블록킹 필터 | |
JP2009130599A (ja) | 動画像復号装置 | |
CN103731674A (zh) | 一种h.264二维并行后处理去块滤波器硬件实现方法 | |
US20080159637A1 (en) | Deblocking filter hardware accelerator with interlace frame support | |
KR100816461B1 (ko) | 실시간 디블록킹 필터 및 이를 이용한 디블록킹 방법 | |
Li et al. | A dual-mode deblocking filter design for HEVC and H. 264/AVC | |
JP6225137B2 (ja) | 車載カメラ画像処理装置 |