TWI729746B - 具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法 - Google Patents

具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法 Download PDF

Info

Publication number
TWI729746B
TWI729746B TW109109914A TW109109914A TWI729746B TW I729746 B TWI729746 B TW I729746B TW 109109914 A TW109109914 A TW 109109914A TW 109109914 A TW109109914 A TW 109109914A TW I729746 B TWI729746 B TW I729746B
Authority
TW
Taiwan
Prior art keywords
frame
video encoding
circuit
reference pixel
coding unit
Prior art date
Application number
TW109109914A
Other languages
English (en)
Other versions
TW202037155A (zh
Inventor
陳立恆
吳東興
黃翊鑫
陳聯霏
林亭安
周漢良
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202037155A publication Critical patent/TW202037155A/zh
Application granted granted Critical
Publication of TWI729746B publication Critical patent/TWI729746B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

視頻編碼設備包括資料緩衝器和視頻編碼電路。第一幀的編碼包括:分別根據第一幀的重建後的像素匯出參考幀的參考像素,並且將參考像素資料存儲到資料緩衝器中用於幀間預測,其中,參考像素資料包括參考像素的像素值的資訊。第二幀的編碼包括:對第二幀中的編碼單元執行預測,以確定編碼單元的目標預測子。對編碼單元執行的預測步驟包括:檢查針對參考幀的搜索範圍是否包括參考幀的無法由視頻編碼電路訪問的至少一個參考像素,該搜索範圍用於在幀內預測模式下尋找編碼單元的預測子,並且根據檢查結果來確定編碼單元的目標預測子。

Description

具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼 方法
本發明涉及視頻編碼,更具體地,涉及包括具有固定大小和/或頻寬限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法。
常規的視頻編碼標準通常採用基於編碼單元(CU:coding unit)的編碼技術來利用空間和時間冗餘。例如,該基本方法是將整個源幀劃分成多個CU,對各個CU執行幀內(intra)預測/幀間(inter)預測,轉換各個CU的殘差,以及執行量化和熵編碼。此外,生成重建後的幀以充當參考幀,該參考幀提供被用於對後續CU進行編碼的參考像素資料。對於某些視頻編碼標準,可以使用環內(in-loop)濾波器來增強重建後的幀/參考幀的圖像品質。使用視頻解碼器來執行由視訊轉碼器執行的視頻編碼操作的逆操作。例如,在視頻解碼器中生成重建後的幀以充當參考幀,該參考幀提供被用於對後續CU進行解碼後的參考像素資料。
在常規的視頻編碼系統中,使用重建/參考緩衝器來對可以被用於幀間預測的重建後的幀/參考幀進行緩衝。通常,通過在動態隨機存取記憶體 (DRAM)中分配緩衝器來實現重建/參考緩衝器。因此,允許重建/參考緩衝器的大小根據輸入源幀的解析度而變化。可變大小緩衝器能夠完全存儲重建後的幀/參考幀的資訊。結果,常規的視頻編碼系統設計需要高的DRAM頻寬,並且具有高功耗。
要求保護的發明的目的之一是,提供一種包括具有固定大小和/或頻寬限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法。
根據本發明的第一方面,公開了一種示例性的視頻編碼設備。所述示例性的視頻編碼設備包括資料緩衝器和視頻編碼電路。所述視頻編碼電路被設置成將多個幀編碼成位元流,其中,各個幀包括多個編碼單元,各個編碼單元包括多個像素,並且所述幀包括第一幀和第二幀。所述第一幀的編碼操作包括:分別從所述第一幀的多個重建後的像素匯出參考幀的多個參考像素;以及將參考像素資料存儲到所述資料緩衝器中用於幀間預測,其中,所述參考像素資料包括所述參考像素的像素值的資訊。所述第二幀的編碼操作包括:對所述第二幀中的編碼單元執行預測,以確定所述編碼單元的目標預測子(predictor)。所述對編碼單元執行的預測步驟包括:通過檢查針對所述參考幀的搜索範圍是否包括所述參考幀的所述視頻編碼電路無法訪問的至少一個參考像素來獲得檢查結果,所述搜索範圍用於在幀間預測模式下尋找所述編碼單元的預測子;並且根據所述檢查結果來確定所述編碼單元的所述目標預測子。
根據本發明的第二方面,公開了一種將多個幀編碼成位元流的示例性視頻編碼方法,其中,各個幀包括多個編碼單元,並且各個編碼單元包括多個像素。所述視頻編碼方法包括以下步驟:對所述幀中所包括的第一幀進行編碼,並且對所述幀中所包括的第二幀進行編碼。編碼所述第一幀的步驟包括: 分別從所述第一幀的多個重建後的像素匯出參考幀的多個參考像素;以及將參考像素資料存儲到資料緩衝器中用於幀間預測,其中,所述參考像素資料包括所述參考像素的像素值的資訊。編碼所述第二幀的步驟包括:對所述第二幀中的編碼單元執行預測,以確定所述編碼單元的目標預測子,其中,所述對編碼單元執行的預測步驟包括:視頻編碼電路通過檢查針對所述參考幀的搜索範圍是否包括所述參考幀的所述視頻編碼電路無法訪問的至少一個參考像素來生成檢查結果,所述搜索範圍用於在幀間預測模式下尋找所述編碼單元的預測子;並且根據所述檢查結果來確定所述編碼單元的所述目標預測子。
在閱讀了以下在各個附圖中例示的優選實施方式的詳細描述之後,本發明的這些和其它目的對於本領域普通技術人員無疑將變得顯而易見。
100,300,1000,1200,2400:視頻編碼設備
102,302,4002,1202,2402:視頻編碼電路
104,304:資料緩衝器
111:加法器
112:變換電路
113:量化電路
114:熵編碼電路
115:逆量化電路
116:逆變換電路
117:加法器
118:環內濾波器
119:預測電路
124:幀內/幀間模式選擇開關
120:幀間預測電路
121:運動估計電路
122:運動補償電路
123:幀內預測電路
202:像素
204:當前編碼單元
208:重建的像素
206:塊
306,1006:丟棄電路
402,602,802,1402,1802,2202,2502:有效參考像素
404,504,604,704,804,904,1404,1804,2204,2304,2504,2506,2604,2606:無效參考像素
502,702,902,1902,2302,2602:編碼單元
1004:壓縮電路
1008:解壓縮電路
2402:預丟棄電路
第1圖是例示根據本發明的實施方式的第一視頻編碼設備的圖。
第2圖示例由預測電路119執行的用於尋找編碼單元的預測子的預測操作的圖。
第3圖是例示根據本發明的實施方式的第二視頻編碼設備的圖。
第4圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第一示例的圖。
第5圖是例示在第4圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
第6圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第二示例的圖。
第7圖是例示在第6圖所示的參考幀上限制具有搜索範圍的編碼單元的運動 向量搜索的示例的圖。
第8圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第三示例的圖。
第9圖是例示在第8圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
第10圖是例示根據本發明的實施方式的第三視頻編碼設備的圖。
第11圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第一示例的圖。
第12圖是例示根據本發明的實施方式的第四視頻編碼設備的圖。
第13圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第二示例的圖。
第14圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第四示例的圖。
第15圖是例示在第14圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
第16圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第三示例的圖。
第17圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第四示例的圖。
第18圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第五示例的圖。
第19圖是例示在第18圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
第20圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進 行訪問的第五示例的圖。
第21圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第六示例的圖。
第22圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第六示例的圖。
第23圖是例示在第22圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
第24圖是例示根據本發明的實施方式的第五視頻編碼設備的圖。
第25圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第七示例的圖。
第26圖是例示在第25圖所示的參考幀上限制具有搜索範圍的編碼單元的運動向量搜索的示例的圖。
貫穿下面的描述和權利要求書使用某些術語來指代特定的元件。如本領域技術人員應當清楚,電子設備製造商可能用不同的名稱來指代元件。本文無意在名稱不同而非功能不同的元件之間加以區分。在下面的描述和權利要求中,術語“包括”以開放式的方式來使用,因此應被解釋成意指“包括,但不限於...”。而且,術語“耦接(couple)”旨在意指間接或直接的電氣連接。因此,如果一個裝置耦接至另一裝置,則該連接可以通過直接電氣連接,或者通過經由其它裝置和連接物的間接電氣連接。
第1圖是例示根據本發明的實施方式的第一視頻編碼設備的圖。視頻編碼設備100包括視頻編碼電路102和資料緩衝器104。關於視頻編碼電路102,該視頻編碼電路包括:加法器111(該加法器用於執行資料減法)、變換電路(用 “T”表示)112、量化電路(用“Q”表示)113、熵編碼電路(例如,可變長度編碼器)114、逆量化電路(用“IQ”表示)115、逆變換電路(用“IT”表示)116、加法器(該加法器被用於執行資料求和)117、至少一個環內濾波器(例如,去塊濾波器)118、預測電路119以及幀內/幀間模式選擇開關124。預測電路119支援幀間預測模式和幀內預測模式,並且包括幀間預測電路120(該幀間預測電路包括運動估計電路(用“ME”表示)121和運動補償電路(用“MC”表示)122)以及幀內預測電路(用“IP”表示)123)。應注意到,第1圖所示的視頻編碼電路102的結構僅僅是出於例示的目的,而不是意指對本發明的限制。
加法器111是殘差計算電路,該殘差計算電路用於從輸入源幀IMG的編碼單元減去預測的塊,以向變換電路112生成編碼單元的殘差。當根據作為針對編碼單元所選擇的最佳編碼模式的幀內預測模式來控制幀內/幀間模式選擇開關124時,可以從幀內預測電路123生成預測的塊,而當根據作為針對編碼單元所選擇的最佳編碼模式的幀間預測模式來控制幀內/幀間模式選擇開關124時,可以從幀間預測電路120生成預測的塊。在由變換電路112和量化電路113順序地進行處理之後,將編碼單元的殘差轉換成量化後的變換係數,其中,在熵編碼電路114處將該量化後的變換係數熵編碼成為位元流BS的一部分。
視頻編碼電路102具有內部解碼電路。因此,經由逆量化電路115和逆變換電路116對量化後的變換係數順序地進行處理,以向加法器117生成編碼單元的解碼後的殘差。加法器117充當重建電路,該重建電路將編碼單元的解碼後的殘差與編碼單元的預測的塊進行組合,以生成重建後的幀中的重建後的編碼單元。在將重建後的幀存儲到資料緩衝器104中之前,環內濾波器118可以對重建後的幀執行指定的環內濾波。例如,環內濾波器118可以包括:旨在減少由於基於CU的編碼而引入的成塊偽像(blocking artifact)的去塊濾波器。
在該示例中,根據輸入源幀IMG的重建後的像素匯出參考幀的參考 像素,並且將參考像素資料存儲到充當重建/參考緩衝器的資料緩衝器104中,其中,參考像素資料包括參考像素的像素值的資訊。視頻編碼電路102(特別地,幀間預測電路120)可以檢索存儲在資料緩衝器104中的參考像素資料的一部分,以在幀間預測模式下找到編碼單元的預測子。
第2圖是例示由預測電路119執行的用於尋找編碼單元的預測子的預測操作的圖。該視頻編碼電路102被設置成將多個輸入源幀IMG編碼成位元流BS,其中,各個幀包括多個編碼單元,並且各個編碼單元包括多個像素。如第2圖所示,輸入源幀IMG包括第一幀IMG1和第二幀IMG2。以第一幀IMG1為例,將該第一幀劃分成多個編碼單元201,各個編碼單元具有多個像素202。第一幀IMG1和第二幀IMG2是饋送到視頻編碼電路102中的連續幀。因此,對第一幀IMG1進行編碼的開始時間早於對第二幀IMG2進行編碼的開始時間。視頻編碼電路102將第一幀IMG1編碼成位元流BS,並且進一步在重建電路(即加法器117)處生成重建後的幀。可以通過使重建後的幀(該重建後的幀是根據第一幀IMG1的編碼後的資料生成的)通過環內濾波器118來匯出參考幀IMG_R。第二幀IMG2的當前編碼單元204是利用由預測電路119支援的預測方法中的一種預測方法來進行編碼的。在為當前編碼單元204選擇的最佳編碼模式是幀內預測模式、調色板(Palette)模式或塊內複製模式的情況下,可以根據同一幀(即,第二幀IMG2)中的先前重建的像素208來匯出當前編碼單元204的預測子。在為當前編碼單元204選擇的最佳編碼模式是幀間預測模式的另一情況下,可以根據其它幀(例如,參考幀IMG_R)中的參考像素匯出當前編碼單元204的預測子。當前編碼單元204的搜索範圍SRW,H是由兩個參數W和H來進行限定的。更具體地,搜索範圍SRW,H是由(±W、±H)來進行限定的。在參考幀IMG_R中可以找到共同定位的塊206。將指派給當前編碼單元204的搜索範圍SRW,H應用於參考幀IMG_R,並且以共同定位的塊206為中心。因此,參考幀IMG_R中的搜索範圍SRW,H限定了運 動向量的邊界,並且限制了要評估的參考塊的數量。換句話說,僅參考幀IMG_R的位於搜索範圍SRW,H內的參考像素可以通過運動估計來進行參考,以找到當前編碼單元204的預測子(即,運動向量)。
為了減少DRAM頻寬和/或功耗,可以利用靜態隨機存取記憶體(SRAM)來實現重建/參考緩衝器(例如,資料緩衝器104)。然而,可以仍將記憶體頻寬(BW:memory bandwidth)限制應用於資料緩衝器104。根據記憶體BW限制,可以阻止從資料緩衝器104中讀取並向視頻編碼電路102(特別地,預測電路119的運動估計電路121)發送存儲在資料緩衝器104中的一個或更多個參考像素。換句話說,存儲在資料緩衝器104中的參考像素包括:視頻編碼電路102可訪問的有效參考像素,和視頻編碼電路102無法訪問的無效參考像素。在這個實施方式中,視頻編碼電路102(特別地,預測電路119)對第2圖所示的第二幀IMG2中的當前編碼單元204執行預測,以確定當前編碼單元204的目標預測子。由於存儲在資料緩衝器104中的一個或更多個參考像素可能是無效參考像素,因此視頻編碼電路102(特別地,預測電路119)通過檢查針對參考幀IMG_R的搜索範圍SRW,H是否包括參考幀IMG_R的視頻編碼電路102無法訪問的至少一個參考像素來生成檢查結果,該搜索範圍用於在幀間預測模式下尋找當前編碼單元204的預測子,並且根據該檢查結果來確定當前編碼單元204的目標預測子。
可以利用SRAM來實現重建/參考緩衝器(例如,資料緩衝器104)。因此,資料緩衝器104的大小是固定的,而與輸入源幀的解析度無關。然而,參考幀(該參考幀是根據重建後的幀匯出的)的大小可以大於固定大小的重建/參考緩衝器的大小。為尋求解決這個問題,本發明提出丟棄包括在參考幀(該參考幀是根據重建後的幀匯出的)中的參考像素的一部分,以使不將參考幀中的所有參考像素都存儲在固定大小的重建/參考緩衝器中。
第3圖是例示根據本發明的實施方式的第二視頻編碼設備的圖。視頻 編碼設備300與視頻編碼設備100之間的主要區別在於,視頻編碼設備300的視頻編碼電路302包括耦接在資料緩衝器304與環內濾波器118之間的丟棄電路(用“DS”表示)306。應注意到,第3圖所示的視頻編碼電路302的結構僅僅是出於例示的目的,而不是意指對本發明的限制。在這個實施方式中,根據輸入源幀IMG的重建後的像素匯出參考幀的參考像素,並且將參考像素資料存儲到充當重建/參考緩衝器的資料緩衝器304中,其中,參考像素資料包括參考像素的像素值的資訊。視頻編碼電路302(特別地,幀間預測電路120)可以檢索存儲在資料緩衝器304中的參考像素資料的一部分,以在幀間預測模式下找到編碼單元的預測子。
在這個實施方式中,參考幀(該參考幀是根據重建後的幀匯出的)的一個或更多個參考像素被丟棄電路306丟棄,而不是存儲到具有比參考幀的大小小的固定大小的資料緩衝器304中。換句話說,存儲在資料緩衝器304中的參考幀的參考像素是該參考幀的僅一部分。因此,該參考幀包括存儲在資料緩衝器304中並且視頻編碼電路302可訪問的有效參考像素,並且還包括無效參考像素,該無效參考像素因被丟棄電路306丟棄而使視頻編碼電路302無法訪問。在這個實施方式中,視頻編碼電路302(特別地,預測電路119)對第2圖所示的第二幀IMG2中的當前編碼單元204執行預測,以確定當前編碼單元204的目標預測子。由於未存儲在資料緩衝器304中的一個或更多個參考像素是無效參考像素,因此視頻編碼電路302(特別地,預測電路119)通過檢查針對參考幀IMG_R的搜索範圍SRW,H是否包括參考幀IMG_R的視頻編碼電路302無法訪問的至少一個參考像素來生成檢查結果,該搜索範圍用於在幀內預測模式下尋找當前編碼單元204的預測子,並且根據該檢查結果來確定當前編碼單元204的目標預測子。
第4圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第一示例的圖。在該示例中,參考幀IMG_R的解析度 為1280x720。在參考幀IMG_R的左半部分(即,具有解析度540x720的一部分參考幀)中所包括的參考像素是有效參考像素402,而在參考幀IMG_R的右半部分(即,具有解析度540x720的另一部分參考幀)中所包括的參考像素為無效參考像素404。在參考幀IMG_R是由第1圖所示的視頻編碼電路102生成的情況下,該無效參考像素404是存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路102發送的參考像素。在參考幀IMG_R是由第3圖所示的視頻編碼電路302生成的另一情況下,該無效參考像素404是因被丟棄電路306丟棄而未存儲在資料緩衝器304中的參考像素。
如第4圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素404。根據檢查結果,視頻編碼電路102/302強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路102/302強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第4圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素402和無效參考像素404。根據檢查結果,視頻編碼電路102/302通過將運動向量(MV)搜索限制於僅有效參考像素402,在幀內預測模式下尋找編碼單元“b”的預測子。第5圖是例示在第4圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第5圖所示,待編碼的編碼單元502在第4圖所示的參考幀IMG_R上具有搜索範圍SRW,H。例如,編碼單元502可以是第4圖所示的編碼單元“b”,並且搜索範圍SRW,H可以是第4圖所示的搜索範圍SRb。在搜索範圍SRW,H記憶體在無效參考像素504。因此,如果對應的預測子的推導包括任何無效參考像素504,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
第6圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第二示例的圖。在該示例中,參考幀IMG_R的解析度為1280x720。在參考幀IMG_R的上半部分(即,具有解析度1280x360的一部分參考幀)中所包括的參考像素是有效參考像素602,而在參考幀IMG_R的下半部分(即,具有解析度1280x360的另一部分參考幀)中所包括的參考像素為無效參考像素604。在參考幀IMG_R是由第1圖所示的視頻編碼電路102生成的情況下,該無效參考像素604是存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路102發送的參考像素。在參考幀IMG_R是由第3圖所示的視頻編碼電路302生成的另一情況下,該無效參考像素604是因被丟棄電路306丟棄而未存儲在資料緩衝器304中的參考像素。
如第6圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素604。根據檢查結果,視頻編碼電路102/302強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路102/302強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第6圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素602和無效參考像素604。根據檢查結果,視頻編碼電路102/302通過將MV搜索限制於僅有效參考像素602,在幀內預測模式下尋找編碼單元“b”的預測子。第7圖是例示在第6圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第7圖所示,待編碼的編碼單元702在第6圖所示的參考幀IMG_R上具有搜索範圍SRW,H。例如,編碼單元702可以是第6圖所示的編碼單元“b”,並且搜索範圍SRW,H可以是第6圖所示的搜索範圍SRb。在搜索範圍SRW,H記憶體在無效參考像素704。因此,如果對應的預測子的推導包括任何 無效參考像素704,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
第8圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第三示例的圖。在該示例中,參考幀IMG_R的解析度為1280x720。靠近參考幀IMG_R的中心(即,具有矩形形狀的一部分參考幀)中的參考像素是有效參考像素802,而靠近參考幀IMG_R的四個邊的參考像素(即,具有環形形狀的另一部分參考幀)是無效參考像素804。在參考幀IMG_R是由第1圖所示的視頻編碼電路102生成的情況下,該無效參考像素804是存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路102發送的參考像素。在參考幀IMG_R是由第3圖所示的視頻編碼電路302生成的另一情況下,該無效參考像素804是因被丟棄電路306丟棄而未存儲在資料緩衝器304中的參考像素。
如第8圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素804。根據檢查結果,視頻編碼電路102/302強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路102/302強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第8圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素802和無效參考像素804。根據檢查結果,視頻編碼電路102/302通過將MV搜索限制於僅有效參考像素802,在幀內預測模式下尋找編碼單元“b”的預測子。第9圖是例示在第8圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第9圖所示,待編碼的編碼單元902在第8圖所示的參考幀IMG_R上具有搜索範圍SRW,H。例如,編碼單元902可以是第8圖所示 的編碼單元“b”,並且搜索範圍SRW,H可以是第8圖所示的搜索範圍SRb。在搜索範圍SRW,H記憶體在無效參考像素904。因此,如果對應的預測子的推導包括任何無效參考像素904,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
如上提及,可以利用SRAM來實現資料緩衝器304(該資料緩衝器充當重建/參考緩衝器)。因此,資料緩衝器304的大小是固定的,而與輸入源幀的解析度無關。為了在參考幀(該參考幀是根據重建後幀的匯出的)的大小大於資料緩衝器304的大小的條件下保留視頻編碼電路可訪問的更多參考像素,本發明提出將資料壓縮應用於參考幀中所包括的參考像素。
第10圖是例示根據本發明的實施方式的第三視頻編碼設備的圖。視頻編碼設備1000與視頻編碼設備300之間的主要區別在於,視頻編碼設備1000的視頻編碼電路1002包括壓縮電路(用“C”表示)1004、丟棄電路(用“DS”表示)1006以及解壓縮電路(用“D”表示)1008。應注意到,第10圖所示的視頻編碼電路1002的結構僅僅是出於例示的目的,而不是意指對本發明的限制。在這個實施方式中,根據輸入源幀IMG的重建後的像素匯出參考幀的參考像素,並且將參考像素資料存儲到充當重建/參考緩衝器的資料緩衝器304中,其中,參考像素資料包括參考像素的像素值的資訊。由於壓縮電路1004位於環內濾波器118與資料緩衝器304之間,因此資料緩衝器304中的參考像素資料是以壓縮格式存儲的。具體地,壓縮電路1004通過向參考像素的像素值應用資料壓縮來生成參考像素資料的編碼後的位元流,並且將參考像素資料的編碼後的位元流存儲到資料緩衝器304中。例如,壓縮電路1004採用了無失真壓縮方案。解壓縮電路1008可以從資料緩衝器304中檢索參考像素資料的編碼後的位元流的一部分,並且可以通過將資料解壓縮應用於參考像素資料的編碼後的位元流的所述部分來獲得參考像素資料的一部分。因此,視頻編碼電路1002(特別地,幀間預測電路120) 可以參考從解壓縮電路1008提供的參考像素資料的所述部分,以在幀間預測模式下找到編碼單元的預測子。
然而,壓縮後的參考幀的大小可能仍大於固定大小的重建/參考緩衝器的大小。在這個實施方式中,參考幀(該參考幀是根據重建後的幀匯出的)的一個或更多個參考像素的編碼後的位元流被丟棄電路1006丟棄,而不是存儲到具有比壓縮後的參考幀的大小小的固定大小的資料緩衝器304中。換句話說,被壓縮並接著存儲在資料緩衝器304中的參考幀的參考像素是該參考幀的僅一部分。因此,該參考幀包括在壓縮之後存儲在資料緩衝器104中並且視頻編碼電路1002可以經由解壓縮電路1008訪問的有效參考像素,並且還包括無效參考像素,該無效參考像素在壓縮之後因被丟棄電路1006丟棄而使視頻編碼電路1002無法訪問。
第11圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第一示例的圖。在該示例中,將丟棄電路1006設置成以編碼單元行作為基礎進行操作。如第11圖所示,參考幀(該參考幀是根據重建後的幀匯出的)的一個編碼單元行CU_R包括多個編碼單元A1至A12。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於編碼單元行CU_R,以生成編碼單元行CU_R的編碼後的位元流BS_R,其中,編碼後的位元流BS_R的前一半(即,前50%的大小)是由編碼單元A1至A8組成的編碼單元組GP_1的編碼後的位元流BS_1,而編碼後的位元流BS_R的後一半(即,後50%的大小)是由編碼單元A9至A12組成的編碼單元組GP_2的編碼後的位元流BS_2。在該示例中,丟棄電路1006丟棄編碼後的位元流BS_R的後一半(即,後50%的大小),以使由編碼單元A9至A12組成的編碼單元組GP_2的編碼後的位元流BS_2不被存儲到資料緩衝器304中。由於編碼位元流BS_1在資料緩衝器304中可用,因此解壓縮電路1008可以從資料緩衝器304中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位 元流BS_1應用資料解壓縮,來恢復編碼單元組GP_1(該編碼單元組GP_1是由編碼單元A1至A8組成的)。因此,包括在編碼單元A1至A8中的參考像素是視頻編碼電路1002可訪問的有效參考像素,而包括在編碼單元A9至A12中的參考像素是無效參考像素,該無效參考像素因壓縮後被丟棄而使視頻編碼電路1002無法訪問。
在這個實施方式中,視頻編碼電路1002(特別地,預測電路119)對第2圖所示的第二幀IMG2中的當前編碼單元204執行預測,以確定當前編碼單元204的目標預測子。由於在壓縮之後未被存儲在資料緩衝器304中的一個或更多個參考像素是無效參考像素,因此視頻編碼電路1002(特別地,預測電路119)通過檢查針對參考幀IMG_R的搜索範圍SRW,H是否包括參考幀IMG_R的無法由視頻編碼電路1002訪問的至少一個參考像素,來生成檢查結果,該搜索範圍用於在幀內預測模式下尋找當前編碼單元204的預測子,並且根據該檢查結果來確定當前編碼單元204的目標預測子。
為了減少DRAM頻寬和/或功耗,可以利用SRAM來實現重建/參考緩衝器。但是,可以仍將記憶體BW限制應用於由SRAM實現的重建/參考緩衝器。第12圖是例示根據本發明的實施方式的第四視頻編碼設備的圖。視頻編碼設備1200與視頻編碼設備100之間的主要區別在於,視頻編碼設備1200的視頻編碼電路1202包括壓縮電路(用“C”表示)1004和解壓縮電路(用“D”表示)1008。應注意到,第12圖所示的視頻編碼電路1202的結構僅僅是出於例示的目的,而不是意指對本發明的限制。在這個實施方式中,根據輸入源幀IMG的重建後的像素匯出參考幀的參考像素,並且將參考像素資料存儲到充當重建/參考緩衝器的資料緩衝器104中,其中,參考像素資料包括參考像素的像素值的資訊。由於壓縮電路1004位於環內濾波器118與資料緩衝器104之間,因此資料緩衝器104中的參考像素資料是以壓縮格式存儲的。具體地,壓縮電路1004通過向參考像素的 像素值應用資料壓縮來生成參考像素資料的編碼後的位元流,並且將參考像素資料的編碼後的位元流存儲到資料緩衝器104中。例如,壓縮電路1004採用了無失真壓縮方案。解壓縮電路1008可以從資料緩衝器104中檢索參考像素資料的編碼後的位元流的一部分,並且可以通過將資料解壓縮應用於參考像素資料的編碼後的位元流的所述部分來獲得參考像素資料的一部分。因此,視頻編碼電路1202(特別地,幀間預測電路120)可以參考從解壓縮電路1008提供的參考像素資料的該部分,以在幀間預測模式下找到編碼單元的預測子。
在這個實施方式中,仍將記憶體BW限制應用於由SRAM實現的資料緩衝器104。根據記憶體BW限制,可以阻止從資料緩衝器104中讀取並向視頻編碼電路102(特別地,預測電路119的運動估計電路121)發送存儲在資料緩衝器104中的一個或更多個參考像素的編碼後的位元流。換句話說,不是被壓縮並接著存儲在資料緩衝器104中的參考幀(該參考幀是根據重建後的幀匯出的)的所有參考像素都可被視頻編碼電路1202訪問。因此,該參考幀包括在壓縮之後存儲在資料緩衝器104中並且視頻編碼電路1202可以經由解壓縮電路1008訪問的有效參考像素,並且還包括在壓縮之後存儲在資料緩衝器104中並且視頻編碼電路1202因記憶體BW限制而無法經由解壓縮電路1008訪問的無效參考像素。
第13圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第二示例的圖。在這個實施方式中,以編碼單元行作為基礎來應用記憶體BW限制。如第13圖所示,參考幀(該參考幀是根據重建後的幀匯出的)的一個編碼單元行CU_R包括多個編碼單元A1至A12。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於編碼單元行CU_R,以生成編碼單元行CU_R的編碼後的位元流BS_R,其中,編碼後的位元流BS_R的前一半(即,前50%的大小)是由編碼單元A1至A8組成的編碼單元組GP_1的編碼後的位元流BS_1,而編碼後的位元流BS_R的後一半(即,後50%的大小)是由編碼單元A9 至A12組成的編碼單元組GP_2的編碼後的位元流BS_2。在該示例中,將編碼後的位元流BS_R全部存儲到資料緩衝器104中。將記憶體BW限制應用於資料緩衝器104,以使阻止從資料緩衝器104中讀取並向視頻編碼電路1202發送的編碼後的位元流BS_R的後一半(即,後50%的大小)。由於編碼位元流BS_1在資料緩衝器104中可用,因此解壓縮電路1008可以從資料緩衝器104中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位元流BS_1應用資料解壓縮,來恢復編碼單元組GP_1(該編碼單元組GP_1是由編碼單元A1至A8組成的)。因此,包括在編碼單元A1至A8中的參考像素是視頻編碼電路1202可訪問的有效參考像素,而包括在編碼單元A9至A12中的參考像素是無效參考像素,該無效參考像素因記憶體BW限制而使視頻編碼電路1202無法訪問。
在這個實施方式中,視頻編碼電路1202(特別地,預測電路119)對第2圖所示的第二幀IMG2中的當前編碼單元204執行預測,以確定當前編碼單元204的目標預測子。由於在壓縮之後存儲在資料緩衝器104中的一個或更多個參考像素可能是無效參考像素,因此視頻編碼電路1202(特別地,預測電路119)通過檢查針對參考幀IMG_R的搜索範圍SRW,H是否包括參考幀IMG_R的無法由視頻編碼電路1202訪問的至少一個參考像素來生成檢查結果,該搜索範圍用於在幀內預測模式下尋找當前編碼單元204的預測子,並且根據該檢查結果來確定當前編碼單元204的目標預測子。
第14圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第四示例的圖。在該示例中,參考幀IMG_R的解析度為1280x720,並且包括有效參考像素1402和無效參考像素1404。由於丟棄電路1006是以編碼單元行作為基礎進行操作的,和/或記憶體BW限制是以編碼單元行作為基礎應用於資料緩衝器104的,因此各個編碼單元行中的無效參考像素的數量因各個編碼單元行的經無失真壓縮的位元流不具有固定大小的事實而不是固 定的。在參考幀IMG_R是由第12圖所示的視頻編碼電路1202生成的情況下,該無效參考像素是在壓縮之後存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路1202發送的參考像素。在參考幀IMG_R是由第10圖所示的視頻編碼電路1002生成的另一情況下,該無效參考像素是在壓縮之後因被丟棄電路1006丟棄而未存儲在資料緩衝器304中的參考像素。
如第14圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素1404。根據檢查結果,視頻編碼電路1002/1202強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路1002/1202強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第14圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素1402和無效參考像素1404。根據檢查結果,視頻編碼電路1002/1202通過將MV搜索限制於僅有效參考像素1402,在幀內預測模式下尋找編碼單元“b”的預測子。第15圖是例示在第14圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第15圖所示,待編碼的編碼單元1502在第14圖所示的參考幀IMG_R上具有搜索範圍SRW,H。在搜索範圍SRW,H記憶體在無效參考像素1504。因此,如果對應的預測子的推導包括任何無效參考像素1504,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
如第11圖所示,丟棄電路1006是以編碼單元行作為基礎來進行操作的。如第13圖所示,將記憶體BW限制以編碼單元行作為基礎應用於資料緩衝器104。然而,這些僅僅是出於例示的目的,而不是意指對本發明的限制。
在一種另選設計中,可以將丟棄電路1006設置成以幀為基礎進行操 作,和/或可以將記憶體BW限制以幀為基礎應用於資料緩衝器104。
第16圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第三示例的圖。在該示例中,將丟棄電路1006設置成以幀為基礎進行操作。如第16圖所示,參考幀IMG_R是根據重建後的幀匯出的,並且包括多個編碼單元。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於參考幀IMG_R,以生成參考幀IMG_R的編碼後的位元流BS_IMG,其中,編碼後的位元流BS_IMG的前一半(即,前50%的大小)是由參考幀IMG_R的一些編碼單元組成的編碼單元組GP_1的編碼後的位元流BS_1,而編碼後的位元流BS_IMG的後一半(即,後50%的大小)是由參考幀IMG_R的剩餘編碼單元組成的編碼單元組GP_2的編碼後的位元流BS_2。在該示例中,丟棄電路1006丟棄編碼後的位元流BS_IMG的後一半(即,後50%的大小),以使編碼單元組GP_2的編碼後的位元流BS_2不被存儲到資料緩衝器304中。由於編碼位元流BS_1在資料緩衝器304中可用,因此解壓縮電路1008可以從資料緩衝器304中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位元流BS_1應用資料解壓縮,來恢復編碼單元組GP_1。因此,包括在編碼單元組GP_1的編碼單元中的參考像素是視頻編碼電路1002可訪問的有效參考像素,而包括在編碼單元組GP_2的編碼單元中的參考像素是無效參考像素,該無效參考像素因壓縮後被丟棄而使視頻編碼電路1002無法訪問。
第17圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第四示例的圖。在該示例中,以幀為基礎來應用記憶體BW限制。如第17圖所示,參考幀IMG_R是根據重建後的幀匯出的,並且包括多個編碼單元。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於參考幀IMG_R,以生成參考幀IMG_R的編碼後的位元流BS_IMG,其中,編碼後的位元流BS_IMG的前一半(即,前50%的大小)是由參考幀IMG_R的一些編碼單元組成 的編碼單元組GP_1的編碼後的位元流BS_1,而編碼後的位元流BS_IMG的後一半(即,後50%的大小)是由參考幀IMG_R的剩餘編碼單元組成的編碼單元組GP_2的編碼後的位元流BS_2。將編碼後的位元流BS_IMG全部存儲到資料緩衝器104中。將記憶體BW限制應用於資料緩衝器104,以使阻止從資料緩衝器104中讀取並向視頻編碼電路1202發送的編碼後的位元流BS_IMG的後一半(即,後50%的大小)。由於編碼位元流BS_1在資料緩衝器104中可用,因此解壓縮電路1008可以從資料緩衝器104中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位元流BS_1應用資料解壓縮,來恢復編碼單元組GP_1。因此,包括在編碼單元組GP_1的編碼單元中的參考像素是視頻編碼電路1202可訪問的有效參考像素,而包括在編碼單元組GP_2的編碼單元中的參考像素是無效參考像素,該無效參考像素因記憶體BW限制而使視頻編碼電路1202無法訪問。
第18圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第五示例的圖。在該示例中,參考幀IMG_R的解析度為1280x720,並且包括有效參考像素1802和無效參考像素1804。由於丟棄電路1006是以幀為基礎進行操作的,和/或記憶體BW限制是以幀為基礎應用於資料緩衝器104的,因此參考幀IMG_R可以具有至多一個編碼單元行,該編碼單元行包括至少一個有效參考像素1802和至少一個無效參考像素1804。在參考幀IMG_R是由第12圖所示的視頻編碼電路1202生成的情況下,該無效參考像素1804是在壓縮之後存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路1202發送的參考像素。在參考幀IMG_R是由第10圖所示的視頻編碼電路1002生成的另一情況下,該無效參考像素1804是在壓縮之後因被丟棄電路1006丟棄而未存儲在資料緩衝器304中的參考像素。
如第18圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素1804。根據檢查結果,視頻編碼電路1002/1202強制根據 正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路1002/1202強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第18圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素1402和無效參考像素1404。根據檢查結果,視頻編碼電路1002/1202通過將MV搜索限制於僅有效參考像素1802,在幀內預測模式下尋找編碼單元“b”的預測子。第19圖是例示在第18圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第19圖所示,待編碼的編碼單元1902在第18圖所示的參考幀IMG_R上具有搜索範圍SRW,H。例如,編碼單元1902可以是第18圖所示的編碼單元“b”,並且搜索範圍SRW,H可以是第18圖所示的搜索範圍SRb。在搜索範圍SRW,H記憶體在無效參考像素1904。因此,如果對應的預測子的推導包括任何無效參考像素1904,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
在另一另選設計中,可以將丟棄電路1006設置成以像素行作為基礎進行操作,和/或可以將記憶體BW限制以像素行作為基礎應用於資料緩衝器104。
第20圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第五示例的圖。在該示例中,將丟棄電路1006設置成以像素行作為基礎進行操作。如第16圖所示,參考幀(該參考幀是根據重建後的幀匯出的)的一個像素行P_L包括多個像素。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於像素行P_L,以生成像素行P_L的編碼後的位元流BS_L,其中,編碼後的位元流BS_L的前一半(即,前50%的大小)是由像素行P_L的一些像素組成的像素組PG_1的編碼後的位元流BS_1,而編碼後的位元流BS_L的後一半(即,後50%的大小)是由像素行P_L的剩餘像素組成的像素組PG_2的編碼後 的位元流BS_2。在該示例中,丟棄電路1006丟棄編碼後的位元流BS_L的後一半(即,後50%的大小),以使像素組PG_2的編碼後的位元流BS_2不被存儲到資料緩衝器304中。由於編碼位元流BS_1在資料緩衝器304中可用,因此解壓縮電路1008可以從資料緩衝器304中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位元流BS_1應用資料解壓縮,來恢復像素組PG_1。因此,包括在像素組GP_1中的參考像素是視頻編碼電路1002可訪問的有效參考像素,而包括在像素組PG_2中的參考像素是無效參考像素,該無效參考像素因壓縮後被丟棄而使視頻編碼電路1002無法訪問。
第21圖是例示根據本發明的實施方式的通過壓縮/解壓縮來對資料緩衝器進行訪問的第六示例的圖。在該示例中,以像素行作為基礎來應用記憶體BW限制。如第21圖所示,參考幀(該參考幀是根據重建後的幀匯出的)的一個像素行P_L包括多個像素。壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於像素行P_L,以生成像素行P_L的編碼後的位元流BS_L,其中,編碼後的位元流BS_L的前一半(即,前50%的大小)是由像素行P_L的一些像素組成的像素組PG_1的編碼後的位元流BS_1,而編碼後的位元流BS_L的後一半(即,後50%的大小)是由像素行P_L的剩餘像素組成的像素組PG_2的編碼後的位元流BS_2。在該示例中,將編碼後的位元流BS_L全部存儲到資料緩衝器104中。將記憶體BW限制應用於資料緩衝器104,以使阻止從資料緩衝器104中讀取並向視頻編碼電路1202發送的編碼後的位元流BS_L的後一半(即,後50%的大小)。由於編碼位元流BS_1在資料緩衝器104中可用,因此解壓縮電路1008可以從資料緩衝器104中讀取編碼後的位元流BS_1,並且可以通過對編碼後的位元流BS_1應用資料解壓縮,來恢復像素組PG_1。因此,包括在像素組PG_1中的參考像素是視頻編碼電路1202可訪問的有效參考像素,而包括在像素值PG_2中的參考像素是無效參考像素,該無效參考像素因記憶體BW限制而使視頻編碼電路1202無法 訪問。
第22圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第六示例的圖。在該示例中,參考幀IMG_R的解析度為1280x720,並且包括有效參考像素2202和無效參考像素2204。由於丟棄電路1006是以像素行作為基礎進行操作的,和/或記憶體BW限制是以像素行作為基礎應用於資料緩衝器104的,因此各個像素行中的無效參考像素的數量因各個像素行的經無失真壓縮的位元流不具有固定大小的事實而不是固定的。在參考幀IMG_R是由第12圖所示的視頻編碼電路1202生成的情況下,該無效參考像素2204是在壓縮之後存儲在資料緩衝器104中但因記憶體BW限制而被阻止向視頻編碼電路1202發送的參考像素。在參考幀IMG_R是由第10圖所示的視頻編碼電路1002生成的另一情況下,該無效參考像素2204是在壓縮之後因被丟棄電路1006丟棄而未存儲在資料緩衝器304中的參考像素。
如第22圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素2204。根據檢查結果,視頻編碼電路1002/1202強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路1002/1202強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第22圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素2202和無效參考像素2204。根據檢查結果,視頻編碼電路1002/1202通過將MV搜索限制於僅有效參考像素2202,在幀內預測模式下尋找編碼單元“b”的預測子。第23圖是例示在第22圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第23圖所示,待編碼的編碼單元2302在第22圖所示的參考幀IMG_R上具有搜索範圍SRW,H。在搜索範圍SRW,H記憶 體在無效參考像素2304。因此,如果對應的預測子的推導包括任何無效參考像素2304,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所有像素均為有效參考像素,則運動向量是有效的。
如上提及,可以利用SRAM來實現資料緩衝器304(該資料緩衝器充當重建/參考緩衝器)。因此,資料緩衝器304的大小是固定的,而與輸入源幀的解析度無關。本發明還提出在壓縮之前應用預丟棄。因此,允許資料緩衝器304具有較小的大小。
第24圖是例示根據本發明的實施方式的第五視頻編碼設備的圖。視頻編碼設備2400與視頻編碼設備1000之間的主要區別在於,視頻編碼設備2400的視頻編碼電路2402包括耦接在環內濾波器118與壓縮電路1004之間的預丟棄電路(用“PDS”表示)2402。應注意到,第24圖所示的視頻編碼電路2402的結構僅僅是出於例示的目的,而不是意指對本發明的限制。根據輸入源幀IMG的重建後的像素匯出參考幀的參考像素。在這個實施方式中,將預丟棄電路2402設置成將屬於參考幀的一部分的參考像素丟棄,並且將屬於所述參考幀的剩餘部分的參考像素輸出至壓縮電路1004。
將參考像素資料存儲到充當重建/參考緩衝器的資料緩衝器304中,其中,參考像素資料包括屬於參考幀的剩餘部分的參考像素的像素值的資訊(即,參考幀中的未被預丟棄電路2402丟棄的參考像素)。由於壓縮電路1004位於預丟棄電路2402與資料緩衝器304之間,因此資料緩衝器304中的參考像素資料是以壓縮格式存儲的。具體地,壓縮電路004通過向屬於參考幀的剩餘部分的參考像素的像素值應用資料壓縮來生成參考像素資料的編碼後的位元流,並且將參考像素資料的編碼後的位元流存儲到資料緩衝器304中。例如,壓縮電路1004採用了無失真壓縮方案。解壓縮電路1008可以從資料緩衝器304中檢索參考像素資料的編碼後的位元流的一部分,並且可以通過將資料解壓縮應用於參考像素資料 的編碼後的位元流的該部分來獲得參考像素資料的一部分。因此,視頻編碼電路2402(特別地,幀間預測電路120)可以參考從解壓縮電路1008提供的參考像素資料的所述部分,以在幀間預測模式下找到編碼單元的預測子。
由於將參考幀中的參考像素進行了預丟棄,因此壓縮電路1004將資料壓縮(例如,無失真壓縮)應用於部分參考幀。然而,壓縮後的部分參考幀的大小可能仍大於資料緩衝器304的大小。在這個實施方式中,所述部分參考幀的一個或更多個參考像素的編碼後的位元流被丟棄電路1006丟棄,而不是存儲到具有比所述壓縮後的部分參考幀的大小小的固定大小的資料緩衝器304中。換句話說,被壓縮並接著存儲在資料緩衝器304中的所述部分參考幀的參考像素是該部分參考幀的僅一部分。因此,該參考幀包括在進行預丟棄並壓縮之後存儲在資料緩衝器304中並且視頻編碼電路1002可以經由解壓縮電路1008訪問的有效參考像素,並且還包括無效參考像素,該無效參考像素在壓縮之前因被預丟棄電路2402預丟棄或者在壓縮之後因被丟棄電路1006丟棄而使視頻編碼電路1002無法訪問。
在這個實施方式中,視頻編碼電路2402(特別地,預測電路119)對第2圖所示的第二幀IMG2中的當前編碼單元204執行預測,以確定當前編碼單元204的目標預測子。由於在壓縮之後未被存儲在資料緩衝器304中的該部分參考幀的一個或更多個參考像素是無效參考像素,因此視頻編碼電路2402(特別地,預測電路119)通過檢查針對參考幀IMG_R的搜索範圍SRW,H是否包括參考幀IMG_R的無法由視頻編碼電路2402訪問的至少一個參考像素來生成檢查結果,該搜索範圍用於在幀內預測模式下尋找當前編碼單元204的預測子,並且根據該檢查結果來確定當前編碼單元204的目標預測子。
第25圖是例示根據本發明的實施方式的對編碼單元執行預測以確定編碼單元的目標預測子的第七示例的圖。在該示例中,參考幀IMG_R的解析度 為1280x720,並且包括有效參考像素2502和無效參考像素2504、2506。在參考幀IMG_R是由第24圖所示的視頻編碼電路2402生成的情況下,無效參考像素2506是因被預丟棄電路2402預丟棄而未被壓縮電路1004接收的參考像素,而該無效像素2504是在壓縮之後因被丟棄電路1006丟棄而未存儲在資料緩衝器304中的參考像素。在該示例中,丟棄電路1006是以像素行作為基礎進行操作的。因此,各個像素行中的無效參考像素的數量因各個像素行的經無失真壓縮的位元流不具有固定大小的事實而不是固定的。
如第25圖所示,用“a”標注的編碼單元的搜索範圍SRa內的所有參考像素均為無效參考像素。包括無效參考像素2504和無效參考像素2506。根據檢查結果,視頻編碼電路2402強制根據正被編碼的當前幀中的先前重建的像素匯出編碼單元“a”的目標預測子。假設編碼單元“a”是第2圖所示的當前編碼單元204,視頻編碼電路2402強制根據先前重建的像素208匯出編碼單元“a”的目標預測子。例如,將編碼單元“a”的編碼模式強制為幀內預測模式、調色板模式或塊內複製模式。
如第25圖所示,用“b”標注的編碼單元的搜索範圍SRb內的參考像素包括有效參考像素2502和無效參考像素2504。根據檢查結果,視頻編碼電路1202通過將MV搜索限制於僅有效參考像素2502,在幀內預測模式下尋找編碼單元“b”的預測子。第26圖是例示在第25圖所示的參考幀IMG_R上限制具有搜索範圍的編碼單元的MV搜索的示例的圖。如第26圖所示,待編碼的編碼單元2602在第25圖所示的參考幀IMG_R上具有搜索範圍SRW,H。在搜索範圍SRW,H記憶體在無效參考像素2604和2606。例如,無效參考像素2604可以是第25圖所示的無效參考像素2504的一部分,而無效參考像素2606可以是第25圖所示的無效參考像素2506的一部分。因此,如果對應的預測子的推導包括任何無效參考像素2604/2606,則運動向量是無效的。相反地,如果被用於匯出對應的預測子的所 有像素均為有效參考像素,則運動向量是有效的。
在上面第4圖、第6圖以及第8圖所示的示例中,視頻編碼電路無法訪問參考幀的50%。在上面第11圖所示的示例中,視頻編碼電路無法訪問作為編碼後的位元流的50%的編碼後的位元流11、13、16、17、20以及21這幾者的50%。然而,這些僅僅是出於例示的目的,而不是意指對本發明的限制。在實踐中,可以按與50%不同的百分比值來設定丟棄閾值。即,可以根據實際的實現考慮因素來調整丟棄閾值。
本領域技術人員將容易地觀察到,在保持本發明的教導的同時,可以對所述裝置和方法進行多種修改和變更。因此,上面的公開應被解釋為僅由所附權利要求的界限來限定。以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100:視頻編碼設備
102:視頻編碼電路
104:資料緩衝器
111:加法器
112:變換電路
113:量化電路
114:熵編碼電路
115:逆量化電路
116:逆變換電路
117:加法器
118:環內濾波器
119:預測電路
124:幀內/幀間模式選擇開關
120:幀間預測電路
121:運動估計電路
122:運動補償電路
123:幀內預測電路

Claims (20)

  1. 一種視頻編碼設備,所述視頻編碼設備包括:資料緩衝器;以及視頻編碼電路,所述視頻編碼電路被設置成將多個幀編碼成位元流,其中,各個幀包括多個編碼單元,各個編碼單元包括多個像素,該幀包括第一幀和第二幀;其中所述第一幀的編碼操作包括:分別從所述第一幀的多個重建後的像素匯出參考幀的多個參考像素;以及將參考像素資料存儲到所述資料緩衝器中用於幀間預測,其中,所述參考像素資料包括所述參考像素的像素值的資訊;其中所述第二幀的編碼操作包括:對所述第二幀中的編碼單元執行預測,以確定所述編碼單元的目標預測子,包括如下步驟:通過檢查針對所述參考幀的搜索範圍是否包括所述參考幀的無法由所述視頻編碼電路訪問的至少一個參考像素來生成檢查結果,所述搜索範圍用於在幀間預測模式下尋找所述編碼單元的預測子;以及根據所述檢查結果來確定所述編碼單元的所述目標預測子;其中,所述檢查結果表示所述視頻編碼電路可訪問所述搜索範圍內的參考像素的一部分,並且所述視頻編碼電路無法訪問所述搜索範圍內的參考像素的另一部分,並且所述視頻編碼電路通過將運動向量搜索限制於僅所述搜索範圍內的參考像素的所述一部分,而在所述幀間預測模式下尋找所述編碼單元的所述預測子。
  2. 如申請專利範圍第1項所述的視頻編碼設備,其中,所述視頻編碼電路直接將所述參考像素的像素值存儲到所述資料緩衝器中,以充當所述參考像素資料。
  3. 如申請專利範圍第2項所述的視頻編碼設備,其中,所述資料緩衝器的大小小於所述參考幀的大小,所述參考像素是所述參考幀的僅一部分,並且所述視頻編碼電路包括:丟棄電路,所述丟棄電路被設置成將所述參考幀的所述至少一個參考像素丟棄,以使所述至少一個參考像素不被存儲在所述資料緩衝器中。
  4. 如申請專利範圍第2項所述的視頻編碼設備,其中,所述至少一個參考像素是所述參考像素的一部分;並且根據應用至所述資料緩衝器的頻寬限制,阻止從所述資料緩衝器讀取並向所述視頻編碼電路發送所述至少一個參考像素。
  5. 如申請專利範圍第1項所述的視頻編碼設備,其中,所述視頻編碼電路包括:壓縮電路,所述壓縮電路被設置成通過向所述參考像素的像素值應用資料壓縮來生成所述參考像素資料的編碼後的位元流,其中,將所述參考像素資料的所述編碼後的位元流存儲到所述資料緩衝器中。
  6. 如申請專利範圍第5項所述的視頻編碼設備,其中,通過所述資料壓縮來採用無失真壓縮方案。
  7. 如申請專利範圍第5項所述的視頻編碼設備,其中,所述資料緩衝器的大小小於由向所述參考幀施加所述資料壓縮而匯出的壓縮後的參考幀的大小,所述參考像素是所述參考幀的僅一部分,並且所述視頻編碼電路包括:丟棄電路,所述丟棄電路被設置成將所述參考幀的所述至少一個參考像素的編碼後的位元流丟棄,以使所述至少一個參考像素的所述編碼後的位元流不被存儲到所述資料緩衝器中。
  8. 如申請專利範圍第5項所述的視頻編碼設備,其中,所述至少一個參考像素是所述參考像素的一部分;並且根據應用至所述資料緩衝器的頻寬限制,阻止從所述資料緩衝器讀取並向所述視頻編碼電路發送所述至少一個參考像素的編碼後的位元流。
  9. 如申請專利範圍第5項所述的視頻編碼設備,其中,所述參考像素是所述參考幀的一部分,並且所述視頻編碼電路還包括:預丟棄電路,所述預丟棄電路被設置成將屬於所述參考幀的另一部分的參考像素丟棄,以使屬於所述參考幀的所述另一部分的參考像素不被饋送到所述壓縮電路中。
  10. 如申請專利範圍第9項所述的視頻編碼設備,其中,所述至少一個參考像素是所述參考像素的、屬於所述參考幀的所述另一部分的一部分。
  11. 一種將多個幀編碼成位元流的視頻編碼方法,各個幀包括多個編碼單元,各個編碼單元包括多個像素,所述視頻編碼方法包括以下步驟:對所述幀中所包括的第一幀進行編碼,包括如下步驟:分別從所述第一幀的多個重建後的像素匯出參考幀的多個參考像素;以及將參考像素資料存儲到資料緩衝器中用於幀間預測,其中,所述參考像素資料包括所述參考像素的像素值的資訊;以及對所述幀中所包括的第二幀進行編碼,包括如下步驟:對所述第二幀中的編碼單元執行預測,以確定所述編碼單元的目標預測子,包括如下步驟:視頻編碼電路通過檢查針對所述參考幀的搜索範圍是否包括所述參考幀的無法由所述視頻編碼電路訪問的至少一個參考像素來生成檢查結果,所述搜索範圍用於在幀間預測模式下尋找所述編碼單元的預測子;以及根據所述檢查結果來確定所述編碼單元的所述目標預測子;其中,所述檢查結果表示所述視頻編碼電路可訪問所述搜索範圍內的參考像素的一部分,並且所述視頻編碼電路無法訪問所述搜索範圍內的參考像素的另一部分,並且根據所述檢查結果來確定所述編碼單元的所述目標預測子的步驟包括:通過將運動向量搜索限制於僅所述搜索範圍內的參考像素的所述一部分,而在所述幀間預測模式下尋找所述編碼單元的所述預測子。
  12. 如申請專利範圍第11項所述的視頻編碼方法,其中,直接將所述 參考像素的像素值存儲到所述資料緩衝器中,以充當所述參考像素資料。
  13. 如申請專利範圍第12項所述的視頻編碼方法,其中,所述資料緩衝器的大小小於所述參考幀的大小,所述參考像素是所述參考幀的僅一部分,並且對所述幀中所包括的所述第一幀進行編碼的步驟還包括:將所述參考幀的所述至少一個參考像素丟棄,以使所述至少一個參考像素不被存儲到所述資料緩衝器中。
  14. 如申請專利範圍第12項所述的視頻編碼方法,其中,所述至少一個參考像素是所述參考像素的一部分,並且對所述幀中所包括的所述第二幀進行編碼的步驟還包括:根據應用至所述資料緩衝器的頻寬限制,阻止從所述資料緩衝器讀取所述至少一個參考像素用於發送。
  15. 如申請專利範圍第11項所述的視頻編碼方法,其中,將所述參考像素資料存儲到所述資料緩衝器中用於幀間預測的步驟包括:通過向所述參考像素的像素值應用資料壓縮來生成所述參考像素資料的編碼後的位元流;以及將所述參考像素資料的所述編碼後的位元流存儲到所述資料緩衝器中。
  16. 如申請專利範圍第15項所述的視頻編碼方法,其中,通過所述資料壓縮來採用無失真壓縮方案。
  17. 如申請專利範圍第15項所述的視頻編碼方法,其中,所述資料緩 衝器的大小小於由向所述參考幀施加所述資料壓縮而匯出的壓縮後的參考幀的大小,所述參考像素是所述參考幀的僅一部分,並且對所述幀中所包括的所述第一幀進行編碼的步驟還包括:將所述參考幀的所述至少一個參考像素的編碼後的位元流丟棄,以使所述至少一個參考像素的所述編碼後的位元流不被存儲到所述資料緩衝器中。
  18. 如申請專利範圍第15項所述的視頻編碼方法,其中,所述至少一個參考像素是所述參考像素的一部分,並且對所述幀中所包括的所述第二幀進行編碼的步驟還包括:根據應用至所述資料緩衝器的頻寬限制,阻止從所述資料緩衝器讀取所述至少一個參考像素的編碼後的位元流用於發送。
  19. 如申請專利範圍第15項所述的視頻編碼方法,其中,所述參考像素是所述參考幀的一部分,並且對所述幀中所包括的所述第一幀進行編碼的步驟還包括:將屬於所述參考幀的另一部分的參考像素丟棄,以使屬於所述參考幀的所述另一部分的參考像素不通過所述資料壓縮進行處理。
  20. 如申請專利範圍第19項所述的視頻編碼方法,其中,所述至少一個參考像素是所述參考像素的、屬於所述參考幀的所述另一部分的一部分。
TW109109914A 2018-03-29 2020-03-25 具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法 TWI729746B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862649626P 2018-03-29 2018-03-29
US16/367,237 2019-03-27
US16/367,237 US10972738B2 (en) 2018-03-29 2019-03-27 Video encoding apparatus having reconstruction buffer with fixed size and/or bandwidth limitation and associated video encoding method

Publications (2)

Publication Number Publication Date
TW202037155A TW202037155A (zh) 2020-10-01
TWI729746B true TWI729746B (zh) 2021-06-01

Family

ID=68055776

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109109914A TWI729746B (zh) 2018-03-29 2020-03-25 具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法

Country Status (3)

Country Link
US (2) US10972738B2 (zh)
CN (2) CN115714863A (zh)
TW (1) TWI729746B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7224892B2 (ja) * 2018-12-18 2023-02-20 ルネサスエレクトロニクス株式会社 動画像符号化装置及びその動作方法、動画像符号化装置を搭載する車両
CN115190305A (zh) * 2021-04-01 2022-10-14 Oppo广东移动通信有限公司 在视频编码装置中进行图像处理的方法、装置、介质及系统
CN116506628B (zh) * 2023-06-27 2023-10-24 苇创微电子(上海)有限公司 一种基于像素块的编码预测器方法、编码系统及编码装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150091920A1 (en) * 2013-09-27 2015-04-02 Apple Inc. Memory latency tolerance in block processing pipelines
US20150264358A1 (en) * 2014-03-11 2015-09-17 Kabushiki Kaisha Toshiba Video transmitter, video transceiver system and video transmission method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUP0301368A3 (en) * 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
US20070195882A1 (en) * 2004-03-08 2007-08-23 Koninklijke Philips Electronics N.V. A Corporation Video decoder with scalable compression and buffer for storing and retrieving reference frame data
US20070110155A1 (en) * 2005-11-15 2007-05-17 Sung Chih-Ta S Method and apparatus of high efficiency image and video compression and display
US20080260023A1 (en) * 2007-04-18 2008-10-23 Chih-Ta Star Sung Digital video encoding and decoding with refernecing frame buffer compression
KR20140133770A (ko) * 2012-02-23 2014-11-20 가부시키가이샤 스퀘어.에닉스.홀딩스 동화상 배신 서버, 동화상 재생 장치, 제어 방법, 및 컴퓨터 판독 가능한 기록 매체
US10356426B2 (en) * 2013-06-27 2019-07-16 Google Llc Advanced motion estimation
CN105263022B (zh) * 2015-09-21 2018-03-02 山东大学 一种针对hevc视频编码的多核混合存储管理方法
WO2017156669A1 (en) * 2016-03-14 2017-09-21 Mediatek Singapore Pte. Ltd. Methods for motion vector storage in video coding
US9866862B2 (en) * 2016-03-18 2018-01-09 Google Llc Motion vector reference selection through reference frame buffer tracking
US10390021B2 (en) * 2016-03-18 2019-08-20 Mediatek Inc. Method and apparatus of video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150091920A1 (en) * 2013-09-27 2015-04-02 Apple Inc. Memory latency tolerance in block processing pipelines
US20150264358A1 (en) * 2014-03-11 2015-09-17 Kabushiki Kaisha Toshiba Video transmitter, video transceiver system and video transmission method

Also Published As

Publication number Publication date
US10972738B2 (en) 2021-04-06
CN111757116A (zh) 2020-10-09
US11166029B2 (en) 2021-11-02
CN115714863A (zh) 2023-02-24
US20210195207A1 (en) 2021-06-24
CN111757116B (zh) 2022-11-04
US20190306510A1 (en) 2019-10-03
TW202037155A (zh) 2020-10-01

Similar Documents

Publication Publication Date Title
TWI729746B (zh) 具有限制的重建緩衝器的視頻編碼設備以及關聯的視頻編碼方法
US9106933B1 (en) Apparatus and method for encoding video using different second-stage transform
JP3118237B1 (ja) 画像予測復号化方法
US7813429B2 (en) System and method for segmentation of macroblocks
US7277587B2 (en) System and method for lossless video coding
Chen et al. Dictionary learning-based distributed compressive video sensing
JP4393875B2 (ja) 複雑さの軽減された復号化に適したシングルレイヤビデオ符号化されたビットストリームを供給するシステム及び方法
JP2004521583A (ja) 非スケーラブル符号化ビデオ信号からスケーラブル符号化ビデオ信号を発生する方法及び装置
KR20130070574A (ko) 메모리 요건을 완화한 영상 전송 시스템
US7054497B2 (en) Method and system for optimizing image sharpness during coding and image enhancement
JP2891773B2 (ja) ディジタル画像シーケンスを処理する方法および装置
JPH10271516A (ja) 圧縮符号化装置、符号化方法、復号化装置および復号化方法
JP2005518163A (ja) メモリ−帯域幅が効率的なファイン・グラニュラ・スケーラビリティ(finegranularscalability:FGS)エンコーダ
US20020159526A1 (en) Video encoder and video recording apparatus provided with such a video encoder
JP2000023162A (ja) 符号化装置及び符号化方法
JP6234770B2 (ja) 動画像復号処理装置、動画像符号化処理装置およびその動作方法
TWI808840B (zh) 視訊解碼器及其視訊解碼方法
US11889057B2 (en) Video encoding method and related video encoder
JP3343554B1 (ja) 画像予測復号化方法及び画像予測符号化装置
JP2002359852A (ja) 画像予測復号化装置及び方法
JP3343553B1 (ja) 画像予測符号化装置及び方法
WO2023173025A2 (en) Adaptive context initialization for entropy coding in video coding
TW202318879A (zh) 用於通過及早確定是否解碼逆變換需要的信息來控制係數傳輸的方法和設備
Miura et al. A simple compression method using movion vector of video encoder in the destributed system
JP2002300587A (ja) 動画像画像圧縮装置と方法