TWI549483B - 用來動態地調整視訊解碼複雜度之裝置與方法 - Google Patents

用來動態地調整視訊解碼複雜度之裝置與方法 Download PDF

Info

Publication number
TWI549483B
TWI549483B TW100149205A TW100149205A TWI549483B TW I549483 B TWI549483 B TW I549483B TW 100149205 A TW100149205 A TW 100149205A TW 100149205 A TW100149205 A TW 100149205A TW I549483 B TWI549483 B TW I549483B
Authority
TW
Taiwan
Prior art keywords
frames
resolution
frame
video decoding
dynamically adjusting
Prior art date
Application number
TW100149205A
Other languages
English (en)
Other versions
TW201244485A (en
Inventor
謝芳易
林建良
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201244485A publication Critical patent/TW201244485A/zh
Application granted granted Critical
Publication of TWI549483B publication Critical patent/TWI549483B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

用來動態地調整視訊解碼複雜度之裝置與方法
本發明係有關於視訊解碼(Video Decoding),尤其有關於用來動態地調整視訊解碼複雜度之裝置及相關方法。
當終端使用者正在家中通過家庭電影院系統觀賞視訊節目時,該視訊節目之編碼資料需被解碼,以顯示於家庭電影院系統的顯示面板上,且該編碼資料之解碼結果可被放大或縮小以符合顯示面板之大小與解析度。不論解碼該編碼資料之演算法有多麼複雜,也不論該視訊節目之解析度是高或低,家庭電影院系統之解碼裝置在典型的狀況下可輕易地對編碼資料進行解碼。
對終端使用者而言,如果能擁有一種可用來隨處觀賞相同的視訊節目之可攜式電子裝置,諸如行動電話或個人數位助理(Personal Digital Assistant,以下簡稱為「PDA」),將會感到非常便利。然而,當製造廠商的研發團隊正在設計這樣的一種可攜式電子裝置時,可能會浮現某些問題。例如:在解碼該編碼資料之演算法太複雜及/或該視訊節目之解析度很高的狀況下,該可攜式電子裝置之解碼能力可能會不足。又例如:當該可攜式電子裝置中一個或多個處理電路運作於其可用之最高頻率時,電力消耗可能會過高。如此,需要高效能且具備成本效益的視訊解碼器,以實現上述之可攜式電子裝 置。
有鑑於此,本發明提供一種用來動態地調整視訊解碼複雜度之裝置及方法。
本發明提供一種用來動態地調整視訊解碼複雜度之裝置,包含有:解碼解析度控制電路,用來動態地決定複數個訊框中之至少一部分是否應依照特定解析度來解碼,其中該特定解析度異於該複數個訊框之原解析度;以及適應性空間解析度解碼器,用來依據所述決定該複數個訊框中之該至少一部分是否應依照該特定解析度來解碼的結果,來對該複數個訊框進行解碼。
本發明提供一種用來動態地調整視訊解碼複雜度之方法,包含有下列步驟:動態地決定複數個訊框中之至少一部分是否應依照一特定解析度來解碼,其中該特定解析度異於該複數個訊框之原解析度;以及依據所述決定該複數個訊框中之該至少一部分是否應依照該特定解析度來解碼的結果,對該複數個訊框進行解碼。
所述用來動態地調整視訊解碼複雜度之裝置及相關方法的好處之一是,藉由動態地調整一部分訊框的解碼複雜度,解碼運作的複雜度得以降低。
閱讀完下述段落以及附圖等對本發明較佳實施例的描述後,本領域技術人員可理解本發明之精神和目的。
在本專利說明書及後續的申請專利範圍當中使用了某些詞彙來 指稱特定的元件。所屬領域中具有通常知識者應可理解,硬體製造商可能會用不同的名詞來稱呼同一個元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區分元件的方式,而是以元件在功能上的差異來作為區分的準則。在通篇說明書及後續的請求項當中所提及的「包含」係為一開放式的用語,故應解釋成「包含但不限定於」。另外,「耦接」一詞在此係包含任何直接及間接的電氣連接手段。因此,若文中描述一第一裝置耦接於一第二裝置,則代表該第一裝置可直接電氣連接於該第二裝置,或透過其他裝置或連接手段間接地電氣連接至該第二裝置。
請參考第1A圖,第1A圖為依據本發明一第一實施例之一種用來動態地調整視訊解碼複雜度之裝置100的示意圖。裝置100包含解碼解析度控制電路102、適應性空間解析度解碼器104與系統能力分析電路106,其中標號108係用來代表輸入位元流。依據某些實施例,諸如該第一實施例或其某些變化例,裝置100可代表一可攜式電子裝置之至少一部分(例如:一部分或全部),而該可攜式電子裝置之例子可為行動電話或PDA。例如:裝置100可代表該可攜式電子裝置之全部。又例如:裝置100可代表該可攜式電子裝置之 一處理電路。
依據該第一實施例,解碼解析度控制電路102係用來動態地決定複數個訊框中之至少一部分(尤其是輸入位元流108所載之訊框當中之至少一訊框)是否應依照一特定解析度來解碼,以動態地針對考慮中的訊框調整其解碼複雜度,尤其是逐訊框地調整解碼複雜度,其中該特定解析度異於該複數個訊框之原解析度。另外,適應性空間解析度解碼器104係用來對該複數個訊框進行解碼,尤其是依據「該複數個訊框中之該至少一部分是否應依照該特定解析度解碼」對該複數個訊框(尤其是輸入位元流108所載之訊框;輸入位元流108係輸入進到適應性空間解析度解碼器104)進行解碼。若解碼解析度控制電路102決定一考慮中的訊框應該依照該特定解析度來解碼,適應性空間解析度解碼器104依照該特定解析度對該考慮中的訊框進行解碼。相反地,若解碼解析度控制電路102決定一考慮中的訊框不應該依照該特定解析度來解碼,適應性空間解析度解碼器104依照該原解析度對該考慮中的訊框進行解碼。此外,系統能力分析電路106係用來分析裝置100之至少一部分(例如:裝置100中之適應性空間解析度解碼器104及/或其它元件/模組)當中的系統能力,以產生分析結果供送至解碼解析度控制電路102,其中該些分析結果係用來進行解碼解析度控制。
請注意,於本實施例中,上述之原解析度對應於每訊框(W * H)個像素,且上述之特定解析度對應於每訊框(M * N)個像素,其中該 特定解析度通常低於該原解析度。這只是為了說明的目的而已,並非對本發明之限制。依據本實施例之某些變化例,該特定解析度可高於或等同於該原解析度。
第1B圖為第1A圖所示之適應性空間解析度解碼器104於一實施例中的實施細節。如第1B圖所示,適應性空間解析度解碼器104包含可變大小/解析度空間預測模組(Variable Dimension/Resolution Spatial Prediction Module)110、可變大小時間預測模組(Variable Dimension Temporal Prediction Module)120、可變長度解碼與反量化模組(Variable Length Decoding and Inverse Quantization Module,以下簡稱為「VLD與IQ模組」)132、可變大小/解析度反轉換單元(Variable Dimension/Resolution Inverse Transform Unit,以下簡稱為「可變大小/解析度IT單元」)134、算術單元(諸如加法器136(於第1B圖中係標示為「+」))、訊框儲存器140(諸如訊框緩衝器)、可變大小/解析度重建訊框輸出單元150、以及參考訊框抽取單元160,其中可變大小/解析度重建訊框輸出單元150包含諸如迴圈內濾波器(in-loop filter)152的去區塊濾波器(de-blocking filter)。另外,可變大小/解析度空間預測模組110包含訊框內預測(Intra Prediction)初始處理單元112與訊框內預測單元114,而可變大小時間預測模組120包含運動向量預測(motion vector prediction)單元122與運動補償(motion compensation)單元124。這只是為了說明的目的而已,並非對本發明之限制。依據本實施例之某些變化例,該去區塊濾波器可實施成 為位於可變大小/解析度重建訊框輸出單元150之外的元件/模組/單元,尤其是可實施成為一迴圈外濾波器(out-loop filter)。
於第1B圖所示之實施例中,可變大小/解析度空間預測模組110係用來依據輸入位元流108及/或依據暫時地儲存於訊框儲存器140中之訊框資料進行空間預測,其中訊框內預測初始處理單元112進行訊框內預測初始處理,而訊框內預測單元114進行訊框內預測運作。可變大小時間預測模組120係用來依據輸入位元流108且依據參考訊框抽取單元160所抽取之一個或多個參考訊框進行時間預測,其中運動向量預測單元122進行運動向量預測,而運動補償單元124進行運動補償。另外,VLD與IQ模組132係用來對輸入位元流108進行可變長度解碼與反量化運作以產生反量化結果,而可變大小/解析度IT單元134係用來對該些反量化結果進行反轉換運作以產生反轉換結果。如第1B圖所示,上述之算術模組(諸如加法器136)係用來對訊框內預測單元114的輸出、運動補償單元124的輸出、以及可變大小/解析度IT單元134的輸出進行加總以產生訊框資料,其中該訊框資料可暫時地儲存於訊框儲存器140。此外,可變大小/解析度重建訊框輸出單元150係用來依據暫時地儲存於訊框儲存器140中之訊框資料產生複數個重建訊框,其中上述之去區塊濾波器(例如:迴圈內濾波器152)係用來進行去區塊濾波運作。
依據本實施例之某些變化例,適應性空間解析度解碼器104之 至少一部分可忽略正在交由適應性空間解析度解碼器104之該部分進行處理之部分資訊,以降低解碼輸入位元流108的運作之複雜度。
依據各種的實施例,諸如第1B圖所示實施例及其某些變化例,解碼解析度控制電路102可選擇性地控制適應性空間解析度解碼器104當中的元件/模組/單元之至少一部分依照異於「輸入位元流108所載之任一訊框的原解析度」之另一解析度來進行運作,以逐訊框地動態調整解碼複雜度;而該些元件/模組/單元的例子可包含:可變大小/解析度空間預測模組110、可變大小時間預測模組120、可變大小/解析度IT單元134以及可變大小/解析度重建訊框輸出單元150。於是,解碼解析度控制電路102可藉由逐訊框地動態調整解碼複雜度來降低解碼運作的複雜度。
第2圖為依據本發明一實施例之一種用來動態地調整視訊解碼複雜度之方法200的流程圖。第2圖所示之方法可應用於第1A圖所示之裝置100。該方法說明如下:於步驟210中,解碼解析度控制電路102動態地決定複數個訊框中之至少一部分(尤其是上述輸入位元流108所載之訊框當中之至少一訊框)是否應依照特定解析度來解碼,以逐訊框地動態調整解碼複雜度,其中該特定解析度異於該複數個訊框之原解析度。
於步驟220中,依據該複數個訊框中之該至少一部分是否應依 照該特定解析度來解碼,適應性空間解析度解碼器104對該複數個訊框進行解碼。例如:適應性空間解析度解碼器104藉由控制適應性空間解析度解碼器104當中的元件/模組/單元之至少一部分依照該特定解析度運作,來解碼該複數個訊框中之至少一訊框。
實作上,步驟210與步驟220的運作可重複地進行。另外,步驟210的運作之至少一部分以及步驟220的運作之至少一部分可同時進行。例如:在解碼解析度控制電路102完成「決定當前訊框是否應依照該特定解析度來解碼」的運作之前,適應性空間解析度解碼器104可仍然對先前訊框進行解碼。又例如:當適應性空間解析度解碼器104正在解碼該當前訊框時,解碼解析度控制電路102可開始「決定下一訊框是否應依照該特定解析度來解碼」的運作。
依據第2圖所示之實施例,系統能力分析電路106分析裝置100之至少一部分當中的系統能力,從而產生諸如上述的分析結果,以供解碼解析度控制之用。基於該些分析結果,解碼解析度控制電路102動態地決定上述該複數個訊框中之該至少一部分是否應依照該特定解析度來解碼。在某些實施例中,諸如第2圖所示實施例及其某些變化例當中,該些分析結果可對應於裝置100的電力消耗、裝置100之中/之外的顯示緩衝器中之訊框數量、裝置100的系統負荷、及/或至少一訊框的解碼時間(例如:某些訊框的平均解碼時間,或某些訊框的整體解碼時間)。也就是說,在這些實施例中,該些分析結果可對應於裝置100的電力消耗、裝置100之中/之外的 該顯示緩衝器中之訊框數量、裝置100的系統負荷、以及上述之至少一訊框的解碼時間當中的一者或一部分/全部的組合。
依據某些實施例,諸如第2圖所示實施例及其某些變化例,解碼解析度控制電路102可基於顯示模組(例如:液晶顯示模組(Liquid Crystal Display Module,以下簡稱為「LCM」))之顯示解析度、裝置100的系統能力、載有上述該複數個訊框之輸入位元流108、該些訊框之目標訊框速率(target frame rate)、該些訊框之訊框種類、及/或圖片群(Group Of Picture,以下簡稱為「GOP」)的結構,來適應性地控制某(些)解碼解析度(尤其是上述該複數個訊框之至少一部分訊框的解碼解析度),其中上述之顯示模組可位於裝置100之內或之外。也就是說,在這些實施例中,解碼解析度控制電路102基於該顯示模組(例如:LCM)之顯示解析度、裝置100的系統能力、載有上述該複數個訊框之輸入位元流108、該些訊框之該目標訊框速率、該些訊框之訊框種類、以及GOP的結構當中的一者或一部分/全部的組合,來適應性地控制上述之至少一解碼解析度,尤其是上述該複數個訊框之至少一部分訊框的解碼解析度。
例如:若上述該複數個訊框中之該至少一部分包含一非參考訊框(Non-Reference Frame),該非參考訊框可為一雙向預測訊框(bi-directional predicted frame,以下簡稱為「B訊框」)。又例如:若上述該複數個訊框中之該至少一部分包含一參考訊框,該參考訊框可為訊框內訊框(intra frame,以下簡稱為「I訊框」)、預測訊框 (predicted frame,以下簡稱為「P訊框」)或參考B訊框。
第3A圖至第3H圖分別為第2圖所示之方法200於不同的實施例中所涉及之視訊解碼方法。在這些實施例中之至少一部分中,解碼運作的複雜度可藉由動態地調整該複數個訊框中之每一訊框的解碼複雜度而顯著地降低。例如:解碼解析度控制電路102可依照步驟210所述之特定解析度控制某些解碼運作,諸如時間預測、空間預測、可變長度解碼與反量化、反轉換、運動補償、重建相加以及去區塊濾波。尤其是,針對上述該複數個訊框中之該至少一部分(例如:輸入位元流108所載之訊框當中之至少一訊框),適應性空間解析度解碼器104容許原始域或下取樣(down-sampling)域中之運動補償參考,且容許依照系統能力適應調整解碼複雜度,並且另容許解碼複雜度改變(或參考域的改變),其中縮小尺度(down-scaled)解碼運作可應用於I訊框、P訊框以及B訊框,而放大尺度(up-scaled)解碼運作可應用於I訊框、P訊框以及B訊框。另外,針對某些訊框,可依照顯示器(例如:在第3A圖至第3H圖所示實施例中之某些實施例當中,該顯示器可為上述之諸如LCM的顯示模組)之顯示尺寸(或顯示解析度)子以重新取樣,或是利用在裝置100當中(尤其是在適應性空間解析度解碼器104當中)之尺寸重調器(resizer)來進行尺寸重調(resize)。
請參考第3A圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之原解析度,對一個I訊 框、三個B訊框以及一個P訊框(於第3A圖中依顯示順序分別標示為「I」、「B」、「B」、「B」與「P」)進行解碼。也就是說,上述訊框均依照相同的解析度來進行解碼。於本實施例中,上述之尺寸重調器依照LCM的顯示尺寸(或顯示解析度),對第3A圖所示訊框中之全部訊框進行尺寸重調,尤其是對該I訊框、該些B訊框以及該P訊框進行下取樣運作。其中第3A圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一標準解碼器模式。
請參考第3B圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之原解析度對一個I訊框(於第3B圖中標示為「I」)進行解碼,且依照步驟210所述之特定解析度對三個B訊框(於第3B圖中依顯示順序分別標示為「B」、「B」與「B」)進行解碼,並且依照步驟210所述之原解析度對一個P訊框(於第3B圖中標示為「P」)進行解碼。其中,本實施例中之該特定解析度低於該LCM之顯示解析度。依據本實施例,上述三個B訊框係以低複雜度進行解碼,因此,它們可稱為低複雜度B訊框。例如:該些低複雜度B訊框可為有損的(lossy)。又例如:該些低複雜度B訊框可為無損的(lossless)。於本實施例中,上述之尺寸重調器依照LCM之顯示尺寸(或其顯示解析度),對第3B圖所示之全部訊框進行尺寸重調,尤其是對該I訊框與該P訊框進行下取樣運作並且對該些B訊框進行上取樣(up sampling)運作。其中第3B圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度B訊框模式。
請參考第3C圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之原解析度對一個I訊框(於第3C圖中標示為「I」)進行解碼,且依照步驟210所述之特定解析度對三個B訊框(於第3C圖中依顯示順序分別標示為「B」、「B」與「B」)進行解碼,並且依照步驟210所述之原解析度對一個P訊框(於第3C圖中標示為「P」)進行解碼。其中,本實施例中之該特定解析度等同於該LCM之顯示解析度。依據本實施例,上述三個B訊框係以低複雜度進行解碼,因此,它們可稱為低複雜度B訊框。例如:該些低複雜度B訊框可為有損的。又例如:該些低複雜度B訊框可為無損的。於本實施例中,上述之尺寸重調器依照該LCM之顯示尺寸(或其顯示解析度),對第3C圖所示訊框中之某些訊框進行尺寸重調,尤其是對該I訊框與該P訊框進行下取樣運作。其中第3C圖所示之視訊解碼方法對應於適應性空間解析度解碼器104之一低複雜度B訊框模式。
關於第3B圖與第3C圖分別所示之實施例中之任一者當中的低複雜度B訊框模式,針對諸如上述實施例中所述之任一B訊框(即該些低複雜度B訊框中之任一者)的非參考訊框,解碼解析度控制電路102基於上述之顯示模組(例如:第3B圖與第3C圖分別所示之實施例中之任一者當中的LCM)之顯示解析度、裝置100的系統能力、載有上述該複數個訊框之輸入位元流108、該些訊框之該目標訊框速率、該些訊框之訊框種類及/或GOP的結構,來適應性地 控制某(些)解碼解析度。例如:解碼解析度控制電路102解析(parse)輸入位元流108,並控制適應性空間解析度解碼器104對部分影像進行解碼以及重建,以產生低複雜度B訊框。若本實施例中之該特定解析度係等同於該LCM之顯示解析度,該些低複雜度B訊框可直接顯示。
請參考第3D圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之原解析度對一個I訊框(於第3D圖中標示為「I」)進行解碼,且依照步驟210所述之特定解析度對三個B訊框與一個P訊框(於第3D圖中依顯示順序分別標示為「B」、「B」、「B」與「P」)進行解碼。其中,本實施例中之該特定解析度低於該LCM之顯示解析度。依據本實施例,上述三個B訊框與該P訊框係以低複雜度進行解碼,因此,它們可分別稱為低複雜度B/P訊框。例如:該些低複雜度B/P訊框可為有損的。 又例如:該些低複雜度B/P訊框可為無損的。於本實施例中,上述之尺寸重調器依照LCM之顯示尺寸(或其顯示解析度),對第3D圖所示全部訊框進行尺寸重調,尤其是對該I訊框進行下取樣運作並且對該些B訊框與該P訊框進行上取樣運作。其中第3D圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度P/B訊框模式。
請參考第3E圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之特定解析度,對一個I 訊框、三個B訊框以及一個P訊框(於第3E圖中依顯示順序分別標示為「I」、「B」、「B」、「B」與「P」)進行解碼。其中,在本實施例中,諸如原始I訊框(於第3E圖中標示為「I0」,僅供比較之目的而已)之解析度的原解析度高於該LCM之顯示解析度,該特定解析度低於該LCM之顯示解析度。依據本實施例,該I訊框(於第3E圖中標示為「I」)、上述三個B訊框以及該P訊框均以低複雜度進行解碼,因此,它們可分別稱為低複雜度I/B/P訊框。例如:該些低複雜度B/P訊框可為有損的。又例如:該些低複雜度B/P訊框可為無損的。於本實施例中,上述之尺寸重調器依照LCM之顯示尺寸(或其顯示解析度),對該些訊框(例如:第3E圖中分別標示為「I」、「B」與「P」之訊框)進行尺寸重調,尤其是對該I訊框(於第3E圖中標示為「I」)、該些B訊框以及該P訊框進行上取樣運作。 其中第3E圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度流(low complexity flow)模式。
請參考第3F圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之原解析度對一個I訊框(於第3F圖中標示為「I」)進行解碼,且依照步驟210所述之特定解析度對三個B訊框與一個P訊框(於第3F圖中依顯示順序分別標示為「B」、「B」、「B」與「P」)進行解碼。其中,本實施例中之該特定解析度等同於該LCM之顯示解析度。依據本實施例,這三個B訊框與該P訊框係以低複雜度進行解碼,因此,它們可分別稱為低複雜度B/P訊框。例如:該些低複雜度B/P訊框可為有損的。 又例如:該些低複雜度B/P訊框可為無損的。於本實施例中,上述之尺寸重調器依照LCM之顯示尺寸(或其顯示解析度),對第3F圖所示訊框中之至少一訊框進行尺寸重調,尤其是對該I訊框進行下取樣運作。其中第3F圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度P/B訊框模式。
請參考第3G圖,在解碼解析度控制電路102的控制下,適應性空間解析度解碼器104依照步驟210所述之特定解析度對一個I訊框、三個B訊框以及一個P訊框(於第3G圖中依顯示順序分別標示為「I」、「B」、「B」、「B」與「P」)來進行解碼。其中,在本實施例中,諸如原始I訊框(於第3G圖中標示為「I0」,僅供比較之目的而已)之解析度的原解析度高於該LCM之顯示解析度,且該特定解析度等同於該LCM之顯示解析度。依據本實施例,該I訊框(於第3G圖中標示為「I」)、上述三個B訊框以及該P訊框均以低複雜度進行解碼,因此,它們可分別稱為低複雜度I/B/P訊框。例如:該些低複雜度B/P訊框可為有損的。又例如:該些低複雜度B/P訊框可為無損的。於本實施例中,並不需要依照LCM之顯示尺寸(或其顯示解析度)對該些訊框(例如:第3G圖中分別標示為「I」、「B」與「P」之訊框)進行尺寸重調,因此,就不需要進行上/下取樣運作,其中第3G圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度流模式。
請參考第3H圖,在解碼解析度控制電路102的控制下,適應性 空間解析度解碼器104依照步驟210所述之特定解析度對一個I訊框、三個B訊框以及一個P訊框(於第3H圖中依顯示順序分別標示為「I」、「B」、「B」、「B」與「P」)進行解碼。其中,在本實施例中,諸如原始I訊框(於第3H圖中標示為「I0」,僅供比較之目的而已)之解析度的原解析度高於該LCM之顯示解析度,且該特定解析度高於該LCM之顯示解析度。依據本實施例,該I訊框(於第3H圖中標示為「I」)、上述三個B訊框以及該P訊框均以低複雜度進行解碼,因此,它們可分別稱為低複雜度I/B/P訊框。例如:該些低複雜度B/P訊框可為有損的。又例如:該些低複雜度B/P訊框可為無損的。於本實施例中,上述之尺寸重調器依照LCM之顯示尺寸(或其顯示解析度),對該些訊框(例如:第3H圖中分別標示為「I」、「B」與「P」之訊框)進行尺寸重調,尤其是對該I訊框(於第3H圖中標示為「I」)、該些B訊框以及該P訊框進行下取樣運作。 其中第3H圖所示之視訊解碼方案對應於適應性空間解析度解碼器104之一低複雜度流模式。
關於第3D圖與第3F圖分別所示之實施例中之任一者當中的低複雜度P/B訊框模式以及第3E圖、第3G圖與第3H圖分別所示之實施例中之任一者當中的低複雜度流模式,針對諸如第3E圖與第3G圖至第3H圖所示實施例中所述之任一I訊框(標示為「I」)、第3D圖至第3H圖所示實施例中所述之該些B訊框當中之任一參考B訊框(即該些低複雜度B訊框當中之任一參考訊框)、以及第3D圖至第3H圖所示實施例中所述之任一P訊框(即該些低複雜度P訊 框中之任一者)的非參考訊框,解碼解析度控制電路102基於上述之顯示模組(例如:第3D圖至第3H圖所示實施例中之任一者當中的LCM)之顯示解析度、裝置100的系統能力、載有上述該複數個訊框之輸入位元流108、該些訊框之該目標訊框速率、該些訊框之訊框種類及/或GOP的結構,來適應性地控制某(些)解碼複雜度。 例如:解碼解析度控制電路102解析輸入位元流108,並控制適應性空間解析度解碼器104對部分影像進行解碼以及重建,以產生該些低複雜度I/P/B訊框。尤其是,針對某些後續的訊框(按照解碼順序而言),適應性空間解析度解碼器104基於該些重建的部分影像,依照該特定解析度(而非原解析度)進行運動補償。若本實施例中之該特定解析度係等同於該LCM之顯示解析度,該些低複雜度I/P/B訊框可直接顯示。
實作上,當控制適應性空間解析度解碼器104部分地重建一訊框時,解碼解析度控制電路102可適應性地控制適應性空間解析度解碼器104當中的元件/模組/單元之至少一部分依照異於「原始訊框的解析度」之另一解析度來進行運作,以降低複雜度,減少記憶體使用量並且降低電力消耗。例如:可變大小/解析度空間預測模組110可於訊框內預測期間產生一幅部分影像,可變大小時間預測模組120可於訊框內預測期間在運動補償中產生一幅部分影像,一反量化與反轉換模組(其可包含該VLD與IQ模組132之至少一部分並可包含可變大小/解析度IT單元134)可於反量化與反轉換運作期間輸出一幅部分重建殘餘影像(Partial Reconstructed Residual Image),訊框儲存器140可儲存一幅部分影像,而上述之去區塊濾波器(例如:迴圈內濾波器152)可對一幅部分影像進行濾波,其中部分資訊可在熵解碼(entropy decoding)期間被解碼。
本發明之各個實施例的好處之一是,藉由動態地調整至少一部分訊框的解碼複雜度,解碼運作的複雜度得以降低。於是,諸如上述的一可攜式電子裝置當中之計算負荷與電力消耗得以降低,其中相關技術的問題(例如:不足的解碼能力以及過高的電力消耗)均得以解決。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100‧‧‧裝置
102‧‧‧解碼解析度控制電路
104‧‧‧適應性空間解析度解碼器
106‧‧‧系統能力分析電路
108‧‧‧輸入位元流
110‧‧‧可變大小/解析度空間預測模組
112‧‧‧訊框內預測初始處理單元
114‧‧‧訊框內預測單元
120‧‧‧可變大小時間預測模組
122‧‧‧運動向量預測單元
124‧‧‧運動補償單元
132‧‧‧可變長度解碼與反量化模組
134‧‧‧可變大小/解析度反轉換單元
136‧‧‧加法器
140‧‧‧訊框儲存器
150‧‧‧可變大小/解析度重建訊框輸出
單元
152‧‧‧迴圈內濾波器
160‧‧‧參考訊框抽取單元
200‧‧‧用來動態地調整視訊解碼複雜度之方法
210、220‧‧‧步驟
B、I、I0、P‧‧‧訊框
第1A圖為依據本發明一第一實施例之一種用來動態地調整視訊解碼複雜度之裝置示意圖。
第1B圖為第1A圖所示之適應性空間解析度解碼器於一實施例中的實施細節。
第2圖為依據本發明一實施例之一種用來動態地調整視訊解碼複雜度之方法的流程圖。
第3A圖至第3H圖分別為第2圖所示之方法於不同的實施例中所涉及之視訊解碼方法。
100‧‧‧裝置
102‧‧‧解碼解析度控制電路
104‧‧‧適應性空間解析度解碼器
106‧‧‧系統能力分析電路
108‧‧‧輸入位元流

Claims (16)

  1. 一種用來動態地調整視訊解碼複雜度之裝置,包含有:一解碼解析度控制電路,用來動態地決定複數個訊框中之至少一部分訊框是否應依照一特定解析度來解碼,其中該特定解析度異於該複數個訊框之原解析度;以及一適應性空間解析度解碼器,用來依據所述決定該複數個訊框中之該至少一部分訊框是否應依照該特定解析度來解碼的結果,來對該複數個訊框進行解碼;一系統能力分析電路,用來分析該用來動態地調整視訊解碼複雜度之裝置之至少一部分當中的系統能力,以產生分析結果來提供至該解碼解析度控制電路;其中基於該些分析結果,該解碼解析度控制電路動態地決定該複數個訊框中之該至少一部分訊框是否應依照該特定解析度來解碼。
  2. 如申請專利範圍第1項所述之用來動態地調整視訊解碼複雜度之裝置,其中該適應性空間解析度解碼器藉由控制該適應性空間解析度解碼器本身依照該特定解析度運作,來對該複數個訊框中之至少一訊框進行解碼。
  3. 如申請專利範圍第1項所述之用來動態地調整視訊解碼複雜度之裝置,其中該些分析結果對應於電力消耗、一顯示緩衝器中 之訊框數量、系統負荷以及一解碼時間當中的一者或一部分/全部的組合。
  4. 如申請專利範圍第1項所述之用來動態地調整視訊解碼複雜度之裝置,其中該解碼解析度控制電路基於一顯示模組之顯示解析度、系統能力、載有該些訊框之輸入位元流、該些訊框之目標訊框速率、該些訊框之訊框種類以及圖片群的結構當中的一者或一部分/全部的組合,適應性地控制至少一解碼解析度。
  5. 如申請專利範圍第4項所述之用來動態地調整視訊解碼複雜度之裝置,其中該複數個訊框中之該至少一部分包含一非參考訊框。
  6. 如申請專利範圍第5項所述之用來動態地調整視訊解碼複雜度之裝置,其中該非參考訊框係為一雙向預測訊框。
  7. 如申請專利範圍第4項所述之用來動態地調整視訊解碼複雜度之裝置,其中該複數個訊框中之該至少一部分包含一參考訊框。
  8. 如申請專利範圍第7項所述之用來動態地調整視訊解碼複雜度之裝置,其中該參考訊框係為一訊框內訊框、一預測訊框或一參考雙向預測訊框。
  9. 一種用來動態地調整視訊解碼複雜度之方法,包含有下列步驟:分析系統能力,以產生分析結果,其中該些分析結果係用來進行解碼解析度控制;基於該些分析結果,動態地決定複數個訊框中之至少一部分訊框是否應依照一特定解析度來解碼,其中該特定解析度異於該複數個訊框之原解析度;以及依據所述決定該複數個訊框中之該至少一部分訊框是否應依照該特定解析度來解碼的結果,對該複數個訊框進行解碼。
  10. 如申請專利範圍第9項所述之用來動態地調整視訊解碼複雜度之方法,其中對該複數個訊框進行解碼之步驟另包含:藉由控制一適應性空間解析度解碼器依照該特定解析度運作,來對該複數個訊框中之至少一訊框解碼。
  11. 如申請專利範圍第9項所述之用來動態地調整視訊解碼複雜度之方法,其中該些分析結果對應於電力消耗、一顯示緩衝器中之訊框數量、系統負荷、以及一解碼時間當中的一者或一部分/全部的組合。
  12. 如申請專利範圍第9項所述之用來動態地調整視訊解碼複雜度 之方法,其中動態地決定該複數個訊框中之該至少一部分是否應依照該特定解析度來解碼之步驟另包含:基於一顯示模組之顯示解析度、系統能力、載有該些訊框之輸入位元流、該些訊框之目標訊框速率、該些訊框之訊框種類以及圖片群的結構當中的一者或一部分/全部的組合,適應性地控制至少一解碼複雜度。
  13. 如申請專利範圍第12項所述之用來動態地調整視訊解碼複雜度之方法,其中該複數個訊框中之該至少一部分包含一非參考訊框。
  14. 如申請專利範圍第13項所述之用來動態地調整視訊解碼複雜度之方法,其中該非參考訊框係為一雙向預測訊框。
  15. 如申請專利範圍第12項所述之用來動態地調整視訊解碼複雜度之方法,其中該複數個訊框中之該至少一部分包含一參考訊框。
  16. 如申請專利範圍第15項所述之用來動態地調整視訊解碼複雜度之方法,其中該參考訊框係為一訊框內訊框、一預測訊框或一參考雙向預測訊框。
TW100149205A 2011-04-26 2011-12-28 用來動態地調整視訊解碼複雜度之裝置與方法 TWI549483B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/094,787 US20120275502A1 (en) 2011-04-26 2011-04-26 Apparatus for dynamically adjusting video decoding complexity, and associated method

Publications (2)

Publication Number Publication Date
TW201244485A TW201244485A (en) 2012-11-01
TWI549483B true TWI549483B (zh) 2016-09-11

Family

ID=47056044

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100149205A TWI549483B (zh) 2011-04-26 2011-12-28 用來動態地調整視訊解碼複雜度之裝置與方法

Country Status (3)

Country Link
US (2) US20120275502A1 (zh)
CN (1) CN102761739B (zh)
TW (1) TWI549483B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8780976B1 (en) 2011-04-28 2014-07-15 Google Inc. Method and apparatus for encoding video using granular downsampling of frame resolution
US8681866B1 (en) 2011-04-28 2014-03-25 Google Inc. Method and apparatus for encoding video by downsampling frame resolution
US9532074B2 (en) * 2011-10-26 2016-12-27 Mediatek Inc. Method and system for video coding system with loop filtering
EP3528450B1 (en) * 2012-10-18 2021-12-01 Vid Scale, Inc. Decoding complexity for mobile multimedia streaming
CN104703030B (zh) * 2013-12-10 2018-05-22 扬智科技股份有限公司 影像编码方法及影像编码装置
US20170208315A1 (en) * 2016-01-19 2017-07-20 Symbol Technologies, Llc Device and method of transmitting full-frame images and sub-sampled images over a communication interface
US11025942B2 (en) 2018-02-08 2021-06-01 Samsung Electronics Co., Ltd. Progressive compressed domain computer vision and deep learning systems
CN112040090A (zh) * 2020-08-10 2020-12-04 浙江大华技术股份有限公司 视频流处理方法、装置、电子设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010043751A1 (en) * 1997-03-17 2001-11-22 Matushita Electric Industrial Co., Ltd. Hierarchical image decoding apparatus and multiplexing method
US20020196853A1 (en) * 1997-06-04 2002-12-26 Jie Liang Reduced resolution video decompression
US20040086189A1 (en) * 1997-07-11 2004-05-06 Sony Corporation Integrative encoding system and adaptive decoding system
US20050117647A1 (en) * 2003-12-01 2005-06-02 Samsung Electronics Co., Ltd. Method and apparatus for scalable video encoding and decoding
US20080304567A1 (en) * 2004-04-02 2008-12-11 Thomson Licensing Complexity Scalable Video Encoding
US20110051808A1 (en) * 2009-08-31 2011-03-03 iAd Gesellschaft fur informatik, Automatisierung und Datenverarbeitung Method and system for transcoding regions of interests in video surveillance

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5821986A (en) * 1994-11-03 1998-10-13 Picturetel Corporation Method and apparatus for visual communications in a scalable network environment
US6477202B1 (en) * 1997-09-03 2002-11-05 Matsushita Electric Industrial Co., Ltd. Apparatus of layered picture coding, apparatus of picture decoding, methods of picture decoding, apparatus of recording for digital broadcasting signal, and apparatus of picture and audio decoding
JP4092734B2 (ja) * 1997-11-05 2008-05-28 ソニー株式会社 ディジタル信号変換方法およびディジタル信号変換装置
EP1018840A3 (en) * 1998-12-08 2005-12-21 Canon Kabushiki Kaisha Digital receiving apparatus and method
JP2000358183A (ja) * 1999-06-14 2000-12-26 Canon Inc 画像処理装置及びその方法
JP2002094994A (ja) * 2000-09-19 2002-03-29 Nec Corp 動画再生処理装置および動画再生処理方法
DE10048735A1 (de) * 2000-09-29 2002-04-11 Bosch Gmbh Robert Verfahren zur Codierung und Decodierung von Bildsequenzen sowie Einrichtungen hierzu
EP1231793A1 (en) * 2001-02-09 2002-08-14 STMicroelectronics S.r.l. A process for changing the syntax, resolution and bitrate of MPEG bitstreams, a system and a computer program product therefor
JP4067281B2 (ja) * 2001-02-20 2008-03-26 三洋電機株式会社 画像処理方法とその方法を利用可能な画像符号化装置および画像復号装置
SG144737A1 (en) * 2001-04-12 2008-08-28 Sony Corp Signal processing apparatus, storage rack, and connection apparatus
JP2002359846A (ja) * 2001-05-31 2002-12-13 Sanyo Electric Co Ltd 画像復号方法および装置
US6704362B2 (en) * 2001-07-06 2004-03-09 Koninklijke Philips Electronics N.V. Resource scalable decoding
CN1527968A (zh) * 2001-07-13 2004-09-08 �ʼҷ����ֵ������޹�˾ 运行媒体应用的方法及具有作业控制的媒体系统
US6639793B2 (en) * 2001-10-19 2003-10-28 Chuntex Electronic Co., Ltd. Video/audio module for a flat-panel display
JP4193406B2 (ja) * 2002-04-16 2008-12-10 三菱電機株式会社 映像データ変換装置および映像データ変換方法
US7006572B2 (en) * 2002-05-09 2006-02-28 Mitsubishi Electric Research Labs, Inc. Method and apparatus for decoding video bitstreams to reduced spatial resolutions
EP1445958A1 (en) * 2003-02-05 2004-08-11 STMicroelectronics S.r.l. Quantization method and system, for instance for video MPEG applications, and computer program product therefor
US20040158878A1 (en) * 2003-02-07 2004-08-12 Viresh Ratnakar Power scalable digital video decoding
CN1723702B (zh) * 2003-02-13 2010-04-28 松下电器产业株式会社 数据处理装置
US7502073B2 (en) * 2003-04-04 2009-03-10 Panasonic Corporation Signal processor
US20050002453A1 (en) * 2003-05-13 2005-01-06 Leigh Chang Network-aware adaptive video compression for variable bit rate transmission
TWI248011B (en) * 2003-07-30 2006-01-21 Benq Corp Production apparatus of dynamic jigsaw puzzle game and method thereof
KR100834749B1 (ko) * 2004-01-28 2008-06-05 삼성전자주식회사 스케일러블 비디오 스트림 재생장치 및 그 방법
WO2005104543A1 (ja) * 2004-04-20 2005-11-03 Matsushita Electric Industrial Co., Ltd. データ処理装置
US7071939B2 (en) * 2004-08-12 2006-07-04 Broadcom Corporation Unique method for performing zoom-in and zoom-out operations with horizontal and vertical video decimation within a wireless device having a video display
US20060256857A1 (en) * 2005-05-16 2006-11-16 Douglas Chin Method and system for rate control in a video encoder
US7593032B2 (en) * 2005-07-20 2009-09-22 Vidyo, Inc. System and method for a conference server architecture for low delay and distributed conferencing applications
US8184712B2 (en) * 2006-04-30 2012-05-22 Hewlett-Packard Development Company, L.P. Robust and efficient compression/decompression providing for adjustable division of computational complexity between encoding/compression and decoding/decompression
US9209934B2 (en) * 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US20080181298A1 (en) * 2007-01-26 2008-07-31 Apple Computer, Inc. Hybrid scalable coding
US8855459B2 (en) * 2008-06-17 2014-10-07 Apple Inc. Method and apparatus for prolonging battery life of a media player
IT1394245B1 (it) * 2008-09-15 2012-06-01 St Microelectronics Pvt Ltd Convertitore per video da tipo non-scalabile a tipo scalabile
US20110142129A1 (en) * 2009-12-11 2011-06-16 General Instrument Corporation Mpeg video resolution reduction system
US9172980B2 (en) * 2010-03-25 2015-10-27 Mediatek Inc. Method for adaptively performing video decoding, and associated adaptive complexity video decoder and adaptive audio/video playback system
CN102025994B (zh) * 2010-12-16 2013-07-03 深圳市融创天下科技股份有限公司 自适应解码复杂度的编码方法、装置、编解码系统和设备
US9602819B2 (en) * 2011-01-31 2017-03-21 Apple Inc. Display quality in a variable resolution video coder/decoder system
US8976857B2 (en) * 2011-09-23 2015-03-10 Microsoft Technology Licensing, Llc Quality-based video compression

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010043751A1 (en) * 1997-03-17 2001-11-22 Matushita Electric Industrial Co., Ltd. Hierarchical image decoding apparatus and multiplexing method
US20020196853A1 (en) * 1997-06-04 2002-12-26 Jie Liang Reduced resolution video decompression
US20040086189A1 (en) * 1997-07-11 2004-05-06 Sony Corporation Integrative encoding system and adaptive decoding system
US20050117647A1 (en) * 2003-12-01 2005-06-02 Samsung Electronics Co., Ltd. Method and apparatus for scalable video encoding and decoding
US20080304567A1 (en) * 2004-04-02 2008-12-11 Thomson Licensing Complexity Scalable Video Encoding
US20110051808A1 (en) * 2009-08-31 2011-03-03 iAd Gesellschaft fur informatik, Automatisierung und Datenverarbeitung Method and system for transcoding regions of interests in video surveillance

Also Published As

Publication number Publication date
US9930361B2 (en) 2018-03-27
CN102761739A (zh) 2012-10-31
CN102761739B (zh) 2017-07-07
US20120275502A1 (en) 2012-11-01
TW201244485A (en) 2012-11-01
US20170006307A1 (en) 2017-01-05

Similar Documents

Publication Publication Date Title
TWI549483B (zh) 用來動態地調整視訊解碼複雜度之裝置與方法
JP7331095B2 (ja) 補間フィルタトレーニング方法及び装置、ビデオピクチャエンコーディング及びデコーディング方法、並びに、エンコーダ及びデコーダ
US11889096B2 (en) Video codec assisted real-time video enhancement using deep learning
US9661329B2 (en) Constant quality video coding
US7907789B2 (en) Reduction of block effects in spatially re-sampled image information for block-based image coding
US20090129478A1 (en) Deblocking filter
CN112995663B (zh) 视频编码的方法、视频解码的方法及相应装置
JP2006254230A (ja) 情報処理装置およびプログラム
US9641847B2 (en) Method and device for classifying samples of an image
US9386310B2 (en) Image reproducing method, image reproducing device, image reproducing program, imaging system, and reproducing system
KR20180037186A (ko) 비디오 코딩을 위한 프레임 재정렬 방법 및 시스템
US9185417B2 (en) Video decoding switchable between two modes
JP2012085001A5 (zh)
WO2019179401A1 (zh) 图像滤波方法、装置及视频编解码器
CN102316319A (zh) 自适应视频解码方法、解码器以及音频/视频播放系统
US20080170628A1 (en) Video decoding method and apparatus having image scale-down function
EP1751984B1 (en) Device for producing progressive frames from interlaced encoded frames
US8767831B2 (en) Method and system for motion compensated picture rate up-conversion using information extracted from a compressed video stream
JP2013524659A (ja) ハンドヘルド及びモバイル用途に適した低減された記憶容量及び処理要求を有するブロードキャストビデオレコーダ
KR102281154B1 (ko) 비디오 데이터의 통합된 공간 다운샘플링
CN106550269A (zh) 自适应视频解码方法、解码器以及音频/视频播放系统
WO2005104560A1 (en) Method of processing decoded pictures.
KR20070023732A (ko) 인터레이스 인코딩 프레임으로부터 프로그레시브 프레임을생성하는 장치