TWI523540B - 在視訊寫碼中之訊框分離 - Google Patents

在視訊寫碼中之訊框分離 Download PDF

Info

Publication number
TWI523540B
TWI523540B TW101100370A TW101100370A TWI523540B TW I523540 B TWI523540 B TW I523540B TW 101100370 A TW101100370 A TW 101100370A TW 101100370 A TW101100370 A TW 101100370A TW I523540 B TWI523540 B TW I523540B
Authority
TW
Taiwan
Prior art keywords
frame
independently decodable
lcu
code
segment
Prior art date
Application number
TW101100370A
Other languages
English (en)
Other versions
TW201234857A (en
Inventor
陳盈
陳培松
馬塔 卡茲維克茲
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201234857A publication Critical patent/TW201234857A/zh
Application granted granted Critical
Publication of TWI523540B publication Critical patent/TWI523540B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Description

在視訊寫碼中之訊框分離
本發明係關於視訊寫碼技術,且更特定而言係關於視訊寫碼技術之訊框分離態樣。
此申請案主張2011年1月5日申請之美國臨時申請案第61/430,104號、2011年1月21日申請之美國臨時申請案第61/435,098號、2011年3月18日申請之美國臨時申請案第61/454,166號及2011年6月2日申請之美國臨時申請案第61/492,751號的權利,所有該等臨時申請案之全部內容以引用的方式併入本文中。
數位視訊能力可併入廣泛範圍之器件中,該等器件包括數位電視、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型或桌上型電腦、數位相機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲控制台、蜂巢式或衛星無線電電話、視訊電傳會議器件及其類似者。數位視訊器件實施視訊壓縮技術(諸如,在MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分進階視訊寫碼(AVC)所定義之彼等標準及此等標準之擴展中所描述的技術),以更有效率地傳輸及接收數位視訊資訊。正在開發諸如藉由「聯合合作小組-視訊寫碼」(JCT-VC)(其係MPEG與ITU-T之間的合作)開發之高效視訊寫碼(HEVC)標準之新視訊寫碼標準。新興HEVC標準有時被稱為H.265,但未正式地作出此指定。
本發明描述用於將視訊資料之訊框分離為訊框之獨立可解碼部分(有時稱為切片)的技術。與新興HEVC標準一致,視訊資料之區塊可被稱為寫碼單元(CU)。CU可根據階層式四分樹結構而分離為子CU。舉例而言,在位元串流內之語法資料可定義最大寫碼單元(LCU),就像素之數目而言,LCU為視訊資料之訊框的最大寫碼單元。一LCU可分離為多個子CU,且每一子CU可進一步分離為多個子CU。用於位元串流之語法資料可定義可分離LCU之次數,該次數被稱為最大CU深度。
大體而言,描述用於將視訊資料之訊框分離為訊框之獨立可解碼部分的技術,該等獨立可解碼部分在新興HEVC標準中被稱為「切片」。勝於將此等切片之內容限制於一或多個完整寫碼單元(CU),諸如訊框之一或多個完整最大寫碼單元(LCU),本發明中所描述之技術可提供切片可藉以包括LCU之一部分的方式。在使得能夠將LCU劃分為兩個區段之情況下,該等技術可減少在分離任何給定訊框時所需要之切片的數目。減少切片之數目可減少呈儲存用以解碼經壓縮視訊資料之語法元素的切片標頭資料形式之附加項資料,從而改良壓縮效率,此係因為附加項資料之量相對於經壓縮視訊資料之量減少。以此方式,該等技術可促進編碼視訊資料之更有效儲存及傳輸。
在一實例中,本發明之態樣係關於一種解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的方法,該複數 個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該方法包括:判定在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及解碼包括該LCU之該第一區段而無該LCU之該第二區段的該訊框之一獨立可解碼部分。
在另一實例中,本發明之態樣係關於一種用於解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該裝置包括經組態以執行以下操作的一或多個處理器:判定在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及解碼包括該LCU之該第一區段而無該LCU之該第二區段的該訊框之一獨立可解碼部分。
在另一實例中,本發明之態樣係關於一種用於解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該裝置包括:用於判定在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個 較小寫碼單元之一細微度的構件;用於使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU的構件;及用於解碼包括該LCU之該第一區段而無該LCU之該第二區段的該訊框之一獨立可解碼部分的構件。
在另一實例中,本發明之態樣係關於一種儲存指令之電腦可讀儲存媒體,該等指令在藉由一或多個處理器執行時使該一或多個處理器執行用於解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的一方法,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該方法包括:判定在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及解碼包括該LCU之該第一區段而無該LCU之該第二區段的該訊框之一獨立可解碼部分。
在另一實例中,本發明之態樣係關於一種編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的方法,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該方法包括:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不 包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及該所判定細微度之一指示。
在另一實例中,本發明之態樣係關於一種用於編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該裝置包括經組態以執行以下操作的一或多個處理器:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及該所判定細微度之一指示。
在另一實例中,本發明之態樣係關於一種用於編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該裝置包括:用於判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度的構件;用於使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段的構件;用於產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段的構 件;及用於產生一位元串流以包括該訊框之該獨立可解碼部分及該所判定細微度之一指示的構件。
在另一實例中,本發明之態樣係關於一種儲存指令之電腦可讀儲存媒體,該等指令在藉由一或多個處理器執行時使該一或多個處理器執行用於編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的一方法,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。該方法包括:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度;使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及該所判定細微度之一指示。
本發明之一或多個態樣的細節闡述於附圖及下文之描述中。本發明中所描述之技術的其他特徵、目標及優點將自描述及圖式且自[申請專利範圍]而顯而易見。
本發明之技術大體而言包括將視訊資料之訊框分離為獨立可解碼部分,其中在獨立可解碼部分之間的邊界可定位於寫碼單元(CU)(諸如,HEVC標準中指定之最大CU(LCU))內。舉例而言,本發明之態樣可係關於判定藉以分離視訊資料之訊框的細微度,使用所判定細微度分離訊框,及使 用CU深度識別細微度。本發明之技術亦可包括產生及/或解碼與將訊框分離為獨立可解碼部分相關聯之多種參數。舉例而言,本發明之態樣可係關於使用CU深度識別用以分離視訊資料之訊框的細微度,識別用於每一獨立可解碼部分之階層式四分樹結構的單獨部分,及識別用於每一獨立可解碼部分之量化參數的改變(亦即,差量)(亦即,差量QP)。
圖1係說明可經組態以利用本發明中所描述之技術的實例視訊編碼及解碼系統10之方塊圖,該技術用於將視訊資料之訊框分離為獨立可解碼部分。根據本發明之態樣,視訊資料之訊框的獨立可解碼部分可大體上被稱為與各種視訊寫碼標準(包括所提議之所謂的高效視訊寫碼(HEVC)標準)一致之視訊資料的「切片」。切片可描述為係獨立可解碼的,此係因為對於資訊,訊框之一切片不依賴於同一訊框之其他切片,且因此可獨立於任何其他切片而經解碼,因此得名「獨立可解碼部分」。藉由確保切片為獨立可解碼的,一切片中之錯誤或遺漏資料不傳播至訊框內之任何其他切片中。將錯誤隔離至訊框內之單一切片亦可對試圖補償此等錯誤有輔助。
如圖1之實例中所展示,系統10包括產生供目的地器件14解碼之經編碼視訊的源器件12。源器件12可經由通信頻道16將經編碼視訊傳輸至目的地器件14或可將經編碼視訊儲存於儲存媒體34或檔案伺服器36上,以使得經編碼視訊可由目的地器件14視需要存取。源器件12及目的地器件14 可包含廣泛範圍之器件中之任一者,該等器件包括桌上型電腦、筆記型(亦即,膝上型)電腦、平板電腦、機上盒、諸如所謂的智慧型手機之電話手機、電視、相機、顯示器件、數位媒體播放器、視訊遊戲控制台或其類似者。
在許多狀況下,此等器件可經裝備以用於無線通信。因此,通信頻道16可包含無線頻道、有線頻道或適用於傳輸經編碼視訊資料之無線及有線頻道的組合。舉例而言,通信頻道16可包含任何無線或有線通信媒體,諸如射頻(RF)頻譜或一或多個實體傳輸線或無線及有線媒體之任何組合。通信頻道16可形成基於封包之網路(諸如,區域網路、廣域網路或諸如網際網路之全球網路)的一部分。通信頻道16大體上表示用於將視訊資料自源器件12傳輸至目的地器件14之任何合適的通信媒體或不同通信媒體之集合,包括有線或無線媒體之任何合適組合。通信頻道16可包括路由器、交換器、基地台或可用於促進自源器件12至目的地器件14之通信的任何其他設備。
根據本發明之實例,用於將視訊資料之訊框分離為切片之本發明中所描述的技術可應用於視訊寫碼以支援多種多媒體應用中之任一者,諸如空中電視廣播、有線電視傳輸、衛星電視傳輸、(例如)經由網際網路之串流視訊傳輸、數位視訊之編碼以供儲存於資料儲存媒體上、儲存於資料儲存媒體上之數位視訊的解碼,或其他應用。在一些實例中,系統10可經組態以支援單向或雙向視訊傳輸以支援諸如視訊串流傳輸、視訊播放、視訊廣播及/或視訊電 話之應用。
如圖1之實例中進一步所展示,源器件12包括視訊源18、視訊編碼器20、調變器/解調變器22及傳輸器24。在源器件12中,視訊源18可包括諸如視訊攝取器件之源。作為實例,視訊攝取器件可包括以下各者中之一或多者:視訊攝影機、含有先前攝取之視訊的視訊存檔、自視訊內容提供者接收視訊之視訊饋送介面,及/或用於產生電腦圖形資料以作為源視訊之電腦圖形系統。作為一實例,若視訊源18為視訊攝影機,則源器件12及目的地器件14可形成所謂的攝影機電話或視訊電話。然而,本發明之技術不必限於無線應用或設定,且可應用於包括視訊編碼及/或解碼能力之非無線器件。源器件12及目的地器件16僅為可支援本文中所描述之技術之寫碼器件的實例。
所攝取、預攝取或電腦產生之視訊可藉由視訊編碼器20編碼。經編碼視訊資訊可藉由數據機22根據通信標準(諸如,無線通信協定)調變,且經由傳輸器24傳輸至目的地器件14。數據機22可包括各種混頻器、濾波器、放大器或經設計以用於信號調變之其他組件。傳輸器24可包括經設計以用於傳輸資料的電路,包括放大器、濾波器及一或多個天線。
藉由視訊編碼器20編碼之所攝取、預攝取或電腦產生之視訊亦可儲存至儲存媒體34或檔案伺服器36上以供稍後消耗。儲存媒體34可包括藍光(Blu-ray)光碟、DVD、CD-ROM、快閃記憶體或用於儲存經編碼視訊之任何其他合適 的數位儲存媒體。儲存於儲存媒體34上之經編碼視訊可接著藉由目的地器件14存取以用於解碼及播放。
檔案伺服器36可為能夠儲存經編碼視訊且將該經編碼視訊傳輸至目的地器件14之任何類型的伺服器。實例檔案伺服器包括web伺服器(例如,用於網站)、FTP伺服器、網路附接儲存(NAS)器件、本端磁碟機或能夠儲存經編碼視訊資料且將其傳輸至目的地器件之任何其他類型的器件。檔案伺服器36可藉由目的地器件14經由任何標準資料連接(包括網際網路連接)存取。此標準資料連接可包括無線頻道(例如,Wi-Fi連接)、有線連接(例如,DSL、有線電視數據機等)或適用於存取儲存於檔案伺服器上之經編碼視訊資料之無線頻道及有線連接的組合。來自檔案伺服器36之經編碼視訊資料之傳輸可為串流傳輸、下載傳輸或兩者之組合。
本發明可大體上指代將特定資訊「用信號發出」至另一器件(諸如,視訊解碼器30)之視訊編碼器20。然而,應理解,視訊編碼器20可藉由使特定語法元素與視訊資料之各種經編碼部分相關聯來用信號發出資訊。亦即,視訊編碼器20可藉由將特定語法元素儲存至視訊資料之各種經編碼部分的標頭來「用信號發出」資料。在一些狀況下,此等語法元素可在藉由視訊解碼器30接收及解碼之前經編碼及儲存(例如,儲存至儲存媒體34或檔案伺服器36)。因此,術語「用信號發出」可大體上指代解碼經壓縮視訊資料所必需之語法或其他資料的傳達,無論此傳達是即時地或近 即時地發生抑或經過一時間跨度而發生,諸如可在編碼時將語法元素儲存至媒體時發生,該等語法元素接著可在經儲存至此媒體之後的任何時間藉由解碼器件擷取。
在圖1之實例中,目的地器件14包括接收器26、數據機28、視訊解碼器30及顯示器件32。目的地器件14之接收器26經由頻道16接收資訊,且數據機28解調變該資訊以產生用於視訊解碼器30之經解調變位元串流。經由頻道16傳達之資訊可包括藉由視訊編碼器20產生之多種語法資訊以供視訊解碼器30用於解碼視訊資料。此種語法亦可包括於儲存於儲存媒體34或檔案伺服器36上之經編碼視訊資料中。視訊編碼器20及視訊解碼器30中之每一者可形成能夠編碼或解碼視訊資料之各別編碼器-解碼器(CODEC)之部分。
顯示器件32可與目的地器件14整合或在目的地器件14外部。在一些實例中,目的地器件14可包括整合式顯示器件且亦經組態以與外部顯示器件介接。在其他實例中,目的地器件14可為顯示器件。大體而言,顯示器件32向使用者顯示經解碼視訊資料,且可包含多種顯示器件中之任一者,諸如液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示器件。
視訊編碼器20及視訊解碼器30可根據視訊壓縮標準(諸如,目前處於開發中之高效視訊寫碼(HEVC)標準)而操作,且可遵照HEVC測試模型(HM)。或者,視訊編碼器20及視訊解碼器30可根據其他專屬或工業標準(諸如,ITU-T H.264標準,替代地稱為MPEG-4第10部分進階視訊寫碼 (AVC))或此等標準之擴展而操作。然而,本發明之技術不限於任何特定編碼標準。其他實例包括MPEG-2及ITU-T H.263。
HEVC標準指代作為寫碼單元(CU)之視訊資料的一區塊。大體而言,CU具有與根據H.264編碼之巨集區塊類似的目的,除了CU不具有大小差別以外。因此,CU可分離為子CU。大體而言,本發明中對CU之參考可指代圖像之最大寫碼單元(LCU)或LCU之子CU。舉例而言,在位元串流內之語法資料可定義LCU,就像素之數目而言,LCU係最大寫碼單元。一LCU可分離為多個子CU,且每一子CU可分離為多個子CU。用於位元串流之語法資料可定義可分離LCU之最大次數,此最大次數被稱為最大CU深度。因此,位元串流亦可定義最小寫碼單元(SCU)。
LCU可與階層式四分樹資料結構相關聯。大體而言,四分樹資料結構每CU包括一節點,其中根節點對應於LCU。若將CU分離為四個子CU,則對應於該CU之節點包括四個葉節點,該等葉節點中之每一者對應於該等子CU中之一者。四分樹資料結構之每一節點可提供用於相應CU之語法資料。舉例而言,在四分樹中之節點可包括指示對應於該節點之CU是否分離為子CU的分離旗標。用於CU之語法元素可遞回地定義,且可取決於CU是否分離為子CU。
未經分離之CU可包括一或多個預測單元(PU)。大體而言,PU表示相應CU之全部或一部分,且包括用於擷取用於PU之參考樣本的資料。舉例而言,當以框內模式編碼 PU時,PU可包括描述用於PU之框內預測模式的資料。作為另一實例,當以框間模式編碼PU時,PU可包括定義用於PU之運動向量的資料。定義運動向量之資料可描述(例如)運動向量之水平分量、運動向量之垂直分量、運動向量之解析度(例如,四分之一像素精度或八分之一像素精度)、運動向量指向之參考訊框,及/或用於運動向量之參考清單(例如,清單0或清單1)。定義PU之用於CU的資料亦可描述(例如)將CU分割為一或多個PU。分割模式可視CU未經編碼、以框內預測模式經編碼抑或以框間預測模式經編碼而不同。
具有一或多個PU之CU亦可包括一或多個變換單元(TU)。在使用PU預測之後,視訊編碼器可計算對應於PU之CU之部分的殘餘值。可變換、量化及掃描殘餘值。TU不必限於PU之大小。因此,TU可大於或小於用於同一CU之相應PU。在一些實例中,TU之最大大小可為相應CU之大小。本發明亦使用術語「區塊」以指代CU、PU或TU中之任一者。
儘管本發明之態樣可指代如在所提議之HEVC標準中所指定的「最大寫碼單元(LCU)」,但應理解,術語「最大寫碼單元」之範疇不限於所提議之HEVC標準。舉例而言,當寫碼單元與經編碼視訊資料之其他寫碼單元有關時,術語最大寫碼單元大體上可指代寫碼單元之相對大小。換言之,最大寫碼單元可指代在具有一或多個不同大小之寫碼單元之視訊資料的訊框中的相對最大寫碼單元(例如,相比 於訊框中之其他寫碼單元)。在另一實例中,術語最大寫碼單元可指代如在所提議之HEVC標準中指定的最大寫碼單元,其可具有相關聯之語法元素(例如,描述階層式四分樹結構的語法元素及其類似者)。
大體而言,經編碼視訊資料可包括預測資料及殘餘資料。視訊編碼器20可在框內預測模式或框間預測模式期間產生預測資料。框內預測大體上涉及相對於圖像中之相鄰的先前經編碼區塊中之參考樣本預測同一圖像之區塊中的像素值。框間預測大體上涉及相對於先前經編碼圖像之資料預測圖像之區塊中的像素值。
在框內預測或框間預測之後,視訊編碼器20可計算該區塊之殘餘像素值。殘餘值大體上對應於區塊之預測像素值資料與區塊之真實像素值資料之間的差。舉例而言,殘餘值可包括指示經編碼像素與預測像素之間的差之像素差值。在一些實例中,經編碼像素可與待編碼之像素的區塊相關聯,且預測像素可與用以預測經編碼區塊之像素的一或多個區塊相關聯。
為了進一步壓縮區塊之殘餘值,殘餘值可變換為變換係數之集合,該等變換係數將儘可能多之資料(亦稱為「能量」)壓縮為儘可能少之係數。變換技術可包含離散餘弦變換(DCT)程序或概念上類似之程序、整數變換、小波變換或其他類型之變換。變換將像素之殘餘值自空間域轉換為變換域。變換係數對應於通常具有與原始區塊相同之大小之二維係數矩陣。換言之,僅存在與原始區塊中之像素 一樣多的變換係數。然而,歸因於變換,變換係數中之許多可具有等於零之值。
視訊編碼器20可接著量化變換係數以進一步壓縮視訊資料。量化大體上涉及將相對大範圍內之值映射至相對小範圍中之值,因此減少表示經量化變換係數所需要之資料的量。更具體而言,可根據量化參數(QP)而應用量化,量化參數(QP)可以LCU層級定義。因此,同一層級之量化可適用於與LCU內之CU之不同PU相關聯的TU中之所有變換係數。然而,勝於用信號發出QP自身,QP中之改變(亦即,差量)可藉由LCU用信號發出。差量QP定義LCU之量化參數相對於某參考QP(諸如,先前傳達之LCU之QP)的改變。
在量化之後,視訊編碼器20可掃描變換係數,從而自包括經量化變換係數之二維矩陣產生一維向量。視訊編碼器20可接著熵編碼所得陣列以甚至進一步壓縮資料。大體而言,熵寫碼包含共同地壓縮經量化變換係數之序列及/或其他語法資訊的一或多個程序。舉例而言,諸如差量QP、預測向量、寫碼模式、濾波器、偏移或其他資訊之語法元素亦可包括於經熵寫碼之位元串流中。接著(例如)經由內容適應性可變長度寫碼(CAVLC)、內容脈絡適應性二進位算術寫碼(CABAC)或另一熵編碼程序來熵寫碼經掃描之係數連同任何語法資訊。
再次,本發明之技術包括將視訊資料之訊框分離為獨立可解碼切片。在一些例子中,視訊編碼器20可形成具有特定大小之切片。一個此例子可為在準備經由乙太網路或任 何其他類型之網路傳輸切片時,該任何其他類型之網路的第二層(L2)架構利用乙太網路協定(其中後面接著數字之層在此內容脈絡中指代開放系統互連(OSI)模型之相應層)。在此實例中,視訊編碼器20可形成切片,該等切片僅稍小於可為1500個位元組之最大傳輸單元(MTU)。
通常,視訊編碼器依據LCU來分離切片。亦即,視訊編碼器可經組態以將切片細微度限制為LCU之大小,以使得切片含有一或多個全LCU。然而,將切片細微度限制為LCU可在試圖形成特定大小之切片時呈現挑戰。舉例而言,以此方式組態之視訊編碼器可能不能在具有相對大LCU之訊框中產生具有特定大小的切片(例如,包括預定資料量之切片)。亦即,相對大LCU可導致切片顯著低於所要大小。本發明大體而言將「細微度」稱為在產生切片時,視訊資料之區塊(諸如,LCU)可分解(例如,劃分)為較小部分的程度。此細微度亦可大體上被稱為「切片細微度」。亦即,細微度(或切片細微度)可指代可劃分為不同切片之LCU內之子CU的相對大小。如下文更詳細地描述,可根據藉以發生切片分離之階層式CU深度來識別細微度。
為了說明,考慮上文提供之1500位元組之目標最大切片大小的實例。在此說明中,經組態以具有全LCU切片細微度之視訊編碼器可產生500位元組之第一LCU、400位元組之第二LCU及900位元組之第三LCU。視訊編碼器可將第一及第二LCU儲存至切片以獲得900位元組之總切片大小,其中第三LCU之添加可超過1500位元組之最大切片大 小達約300位元組(900位元組+900位元組-1500位元組=300位元組)。因此,切片之最終LCU可能不會將切片填充至此目標最大容量,且切片之剩餘容量可能不足夠大以容納另一全LCU。因此,切片僅可儲存第一及第二LCU,其中產生另一切片以儲存第三LCU及具有小於1500位元組之目標大小減去第三LCU之900位元組的大小或900位元組之潛在任何額外LCU。因為需要兩個切片而非三個,所以第二切片引入呈切片標頭之形式的額外附加項,從而引起頻寬及儲存低效率。
根據本發明中所描述之技術,視訊編碼器20可以小於LCU之細微度將視訊資料之訊框分離為切片。亦即,根據本發明之態樣,視訊編碼器20可使用可定位於LCU內之邊界來將視訊資料之訊框分離為切片。在一實例中,視訊編碼器20可將具有包括一或多個LCU之複數個區塊大小之CU的視訊資料之訊框分離為獨立可解碼切片,該一或多個LCU包括以階層方式配置之複數個相對較小寫碼單元。在此實例中,視訊編碼器20可判定在形成訊框之獨立可解碼部分時將藉以分離以階層方式配置之複數個較小寫碼單元之細微度。視訊編碼器20亦可使用所判定細微度分離LCU以產生LCU之第一區段及LCU之第二區段。視訊編碼器20亦可產生訊框之獨立可解碼部分以包括LCU之第一區段而不包括LCU之第二區段。視訊編碼器20亦可產生位元串流以包括訊框之獨立可解碼部分及所判定細微度之指示。
視訊解碼器20可在判定藉以將訊框分離為獨立可解碼切 片之細微度時考慮多種參數。舉例而言,如上文所指出,視訊編碼器20可基於所要切片大小來判定藉以分離訊框之細微度。在其他實例中,如關於圖4更詳細地描述,視訊編碼器20可考慮誤差結果對用信號發出視訊資料所需要之位元的數目(例如,有時稱為速率-失真)且使細微度之判定基於此等誤差結果對(或相比於)用信號發出視訊資料所需要之位元的數目。
在一實例中,視訊編碼器20可判定視訊資料之訊框將以小於LCU之細微度分離為切片。作為出於說明之目的而提供的僅一個實例,與視訊資料之訊框相關聯之LCU的大小可為64像素×64像素。在此實例中,視訊編碼器20可判定將使用32像素×32像素之CU細微度將訊框分離為切片。亦即,視訊編碼器20可使用大小為32像素×32像素或更大之CU之間的邊界將訊框劃分為切片。可實施此細微度(例如)以便達成特定切片大小。在一些實例中,可使用CU深度表示該細微度。亦即,對於以32像素×32像素之細微度而分離為切片之大小為64像素×64像素的LCU,細微度可由CU深度1表示。
接下來,視訊編碼器20可藉由以所判定細微度分離LCU以產生LCU之第一區段及LCU之第二區段來將訊框分離為切片。在上文提供之實例中,視訊編碼器20可將預期切片之最終LCU分離為第一及第二區段。亦即,LCU之第一區段可包括與LCU相關聯之視訊資料的一或多個32像素×32像素區塊,而LCU之第二區段可包括與LCU相關聯之剩餘 32像素×32像素區塊。儘管在以上實例中指定為包括相同大小之像素區塊,但每一區段可包括不同數目個像素區塊。舉例而言,第一區段可包括8像素×8像素區塊,而第二區段可包括剩餘三個8像素×8像素區塊。另外,儘管在以上實例中描述為正方形像素區塊,但每一區段可包含矩形像素區塊或任何其他類型之像素區塊。
以此方式,視訊編碼器20可產生包括LCU之第一區段而不包括LCU之第二區段的訊框之獨立可解碼部分(例如,切片)。舉例而言,視訊編碼器20可產生含有一或多個全LCU以及上文所識別之經分離LCU之第一區段的切片。視訊編碼器20可因此實施本發明中所描述之技術以按小於LCU之細微度產生切片,此情形可在試圖形成特定大小之切片(例如,預定資料量)時提供靈活性。在一些實例中,視訊編碼器20可將所判定細微度應用於圖像之群組(例如,一個訊框以上)。
視訊編碼器20亦可產生位元串流以包括訊框之獨立可解碼部分及所判定細微度之指示。亦即,視訊解碼器20可用信號發出可藉以將一或多個圖像分離為切片之細微度,其後接著為該一或多個圖像。在一些實例中,視訊編碼器20可藉由識別可藉以將訊框分離為切片之CU深度來指示細微度。在此等實例中,視訊編碼器20可包括基於細微度之一或多個語法元素,該細微度可作為CU深度而在位元串流中用信號發出。另外,視訊編碼器20可指示切片開始之位址(例如,「切片位址」)。切片位址可指示切片在訊框內 開始之相對位置。切片位址可以切片細微度層級提供。在一些實例中,切片位址可提供於切片標頭中。
根據本發明之態樣,視訊解碼器30可解碼視訊訊框之獨立可解碼部分。舉例而言,視訊解碼器30可接收含有視訊訊框之一或多個獨立可解碼部分之位元串流且解碼該位元串流。更具體而言,視訊解碼器30可解碼視訊資料之獨立可解碼切片,其中切片係以小於訊框之LCU的細微度形成。亦即,例如,視訊解碼器30可經組態以接收以小於LCU之細微度形成的切片且使用包括於位元串流中之資料來重建構切片。在一實例中,如下文更詳細地描述,視訊解碼器30可基於包括於位元串流中之一或多個語法元素(例如,識別藉以分離切片之CU深度的語法元素、一或多個分離旗標及其類似者)來判定細微度。
切片細微度可應用於一圖像或可應用於數個圖像(例如,圖像之群組)。舉例而言,可在參數集(諸如,圖像參數集(PPS))中用信號發出切片細微度。PPS大體上含有可應用於一序列之圖像(例如,視訊資料之一或多個訊框)內的一或多個圖像之參數。通常,可在解碼切片之前(例如,在解碼切片標頭及切片資料之前)將PPS發送至解碼器30。切片標頭中之語法資料可參考特定PPS,語法資料可「啟動」用於該切片之該PPS。亦即,視訊解碼器30可在解碼切片標頭時應用在PPS中用信號發出之參數。根據一些實例,一旦PPS已啟動以用於特定切片,PPS即可保持作用中直至啟動不同圖像參數集(例如,藉由在另一切片 標頭中參考)為止。
如上文所指出,根據本發明之態樣,可在諸如PPS之參數集中用信號發出切片細微度。因此,切片可藉由參考特定PPS而經指派特定細微度。亦即,視訊解碼器30可解碼與切片相關聯之標頭資訊,該標頭資訊可參考用於切片之特定PPS。視訊解碼器30可接著在解碼切片時將PPS中所識別之切片細微度應用於該切片。另外,根據本發明之態樣,視訊解碼器30可解碼指示切片開始之位址(例如,「切片位址」)的資訊。切片位址可以切片細微度層級而提供於切片標頭中。儘管未展示於圖1中,但在一些態樣中,視訊編碼器20及視訊解碼器30可各自與音訊編碼器及解碼器整合,且可包括適當MUX-DEMUX單元或其他硬體及軟體以處置共同資料串流或單獨資料串流中之音訊及視訊兩者的編碼。在一些實例中,若適用,則MUX-DEMUX單元可遵照ITU H.223多工器協定或諸如使用者資料報協定(UDP)之其他協定。
視訊編碼器20及視訊解碼器30各自可實施為多種合適編碼器電路中之任一者,諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當該等技術以軟體部分地實施時,器件可將用於軟體之指令儲存於合適的非暫時性電腦可讀媒體中且使用一或多個處理器來執行硬體中之指令以執行本發明之技術。視訊編碼器20及視訊解碼器30中之每一者可包括於一或多個 編碼器或解碼器中,其中之任一者可整合為各別器件中之組合式編碼器/解碼器(CODEC)的部分。
圖2係說明與本發明之技術及新興HEVC標準一致的經編碼單元(CU)之階層式四分樹分割的概念圖。在圖2中所展示之實例中,LCU(CU0)之大小係128像素×128像素。亦即,在未劃分之CU深度0處,CU0之大小係128像素×128像素(例如,N=64)。視訊編碼器20可判定是否將CU0分離為各自包含子CU之四個象限或是否編碼CU0而無分離。可(例如)基於與CU0相關聯之視訊資料的複雜性作出此決策,其中較複雜視訊資料增加分離之機率。
分離CU0之決策可由分離旗標表示。大體而言,分離旗標可作為語法元素包括於位元串流中。亦即,若CU0未分離,則分離旗標可設定為0。相反,若CU0分離為包含子CU之象限,則分離旗標可設定為1。如關於圖3A及圖3B更詳細地描述,諸如視訊編碼器20(圖1)之視訊編碼器可表示使用分離旗標來指示LCU及LCU之子CU之分離的四分樹資料結構。
CU深度可用以指示LCU(諸如,CU0)已分離之次數。舉例而言,在分離CU0之後(例如,分離旗標=1),所得子CU具有深度1。倘若LCU大小已知,則CU之CU深度亦可提供該CU之大小的指示。在圖2中所展示之實例中,CU0之大小係128像素×128像素。因此,在深度1處之每一CU(圖2之實例中展示為CU1)之大小係64像素×64像素。
以此方式,CU可遞回地劃分為子CU直至達到最大階層 深度為止。一CU不能劃分超出最大階層深度。在圖2中所展示之實例中,CU0可劃分為子CU直至已達到最大階層深度4為止。在CU深度4(例如,CU4)處,CU之大小為8像素×8像素。
儘管CU0在圖2之實例中展示為大小為128像素×128像素且具有最大階層深度4,但出於說明之目的而提供其作為僅一個實例。其他實例可包括較大或較小且具有相同或替代最大階層深度之LCU。
圖3A及圖3B係說明與本發明之技術一致的實例四分樹50及相應最大寫碼單元80之概念圖。四分樹50包括以階層方式配置之節點。每一節點可為無子代之葉節點或可具有四個子代節點,因此得名「四分樹」。在圖3A之實例中,四分樹50包括根節點52。根節點52具有四個子代節點,包括葉節點54A及54B(葉節點54)與節點56A及56B(節點56)。因為節點56並非葉節點,所以節點56各自包括四個子代節點。亦即,在圖3A中所展示之實例中,節點56A具有四個子代葉節點58A至58D,而節點56B具有三個葉節點60A至60C(葉節點60)及節點62。另外,節點62具有四個葉節點64A至64D(葉節點64)。
四分樹50可包括描述相應最大寫碼單元(LCU)(諸如,此實例中之LCU 80)之特性的資料。舉例而言,四分樹50藉由其結構可描述LCU 80至子CU之分離。假定LCU 80具有2N×2N之大小。在此實例中,LCU 80具有四個子CU,其中兩個子CU 82A及82B(子CU 82)具有大小N×N。LCU 80 之剩餘兩個子CU進一步分離為較小子CU。亦即,在圖3B中所展示之實例中,LCU 80之子CU中之一者分離為具有大小N/2×N/2之子CU 84A至84D,而LCU 80之另一子CU分離為具有大小N/2×N/2之子CU 86A至86C(子CU 86)及識別為具有大小N/4×N/4之子CU 88A至88D(子CU 88)的進一步劃分之子CU。
在圖3A及圖3B中所展示之實例中,四分樹50之結構對應於LCU 80之分離。亦即,根節點52對應於LCU 80且葉節點54對應於子CU 82。此外,葉節點58(其係節點56A之子代節點,其通常意謂節點56A包括參考葉節點58之指標)對應於子CU 84,葉節點60(例如,屬於節點56B)對應於子CU 86,且葉節點64(屬於節點62)對應於子CU 88。
在圖3A及圖3B中所展示之實例中,LCU 80(其對應於根節點52)分離為第一區段90及第二區段92。根據本發明之態樣,視訊編碼器(諸如,視訊編碼器20)可將LCU 80分離為第一區段90及第二區段92,且包括具有LCU 80所屬之訊框之第一獨立可解碼部分的第一區段90,且可包括具有LCU 80所屬之訊框之第二獨立可解碼部分的第二區段92。亦即,視訊編碼器20可將含有LCU 80之視訊資料的訊框分離為切片(例如,如由「切片分離」箭頭94所指示),以使得第一切片(例如,如由箭頭96所指示)包括第一區段90且第二切片(例如,如由箭頭98所指示)包括第二區段92。舉例而言,第一切片96除了LCU 80之第一區段90之外亦可包括一或多個完整LCU,第一區段90可作為切片之相對末尾 而定位。同樣地,第二切片98可以LCU 80之第二區段92開始且包括一或多個額外其他LCU。
為了以關於圖3A及圖3B所展示及描述的方式將含有LCU 80之視訊資料的訊框分離為獨立可解碼切片,根據本發明之技術,藉以產生切片之細微度必須小於LCU 80之大小。在一實例中,出於解釋之目的,假定LCU 80之大小為64像素×64像素(例如,N=32)。在此實例中,切片細微度係16像素×16像素。舉例而言,由切片邊界分開之最小CU的大小係16像素×16像素大小。
可藉以將訊框之LCU(諸如,LCU 80)分離為切片之細微度可根據藉以發生分離之CU深度值來識別。在圖3A之實例中,切片分離94以CU深度2發生。舉例而言,可包括於第一切片96內之第一區段90與可包括於第二切片98內之第二區段92之間的邊界定位於葉節點58B與58C之間,葉節點58B及58C位於CU深度2處。
圖3B中所展示之實例進一步在概念上說明藉以劃分LCU 80之細微度。舉例而言,本發明大體上可將「細微度」稱為在產生切片時將LCU劃分至的程度。如圖3B中所展示,LCU 80之子CU 84係最小CU,第一區段90與第二區段92之間的邊界穿過該等最小CU而定位。亦即,第一區段90藉以與第二區段92分開之邊界定位於子CU 84A/84B與子CU 84C/84D之間。因此,在此實例中,切片96之最終CU係子CU 84B,而切片98之初始CU係子CU 84C。
使用小於LCU 80之CU細微度產生切片可在試圖形成特 定大小之切片(例如,預定資料量)時提供靈活性。此外,如上文所指出,根據本發明之技術將訊框分離為切片可減少指定經壓縮視訊資料所需要之切片的數目。減少指定經壓縮資料所需要之切片的數目可減少附加項資料(例如,與切片標頭相關聯之附加項),藉此改良壓縮效率,此係因為附加項資料之量相對於經壓縮視訊資料之量減少。
根據本發明之態樣,當將含有LCU 80之訊框分離為獨立可解碼切片96及98時,用於LCU 80之階層四分樹資訊可分開且向每一獨立可解碼切片呈現。舉例而言,如上文所指出,用於四分樹50之節點的資料可描述是否分離對應於節點之CU。若分離了CU,則四個額外節點可存在於四分樹50中。在一些實例中,四分樹之節點可類似於以下偽碼實施:
split_flag值可為表示對應於當前節點之CU是否分離的一位元值。若CU未分離,則split_flag值可為「0」,而若CU分離,則split_flag值可為「1」。關於四分樹50之實例,分離旗標值之陣列可為10011000001000000。
四分樹資訊(諸如,與LCU 80相關聯之四分樹50)通常提供於含有LCU 80之切片的開始處。然而,若LCU 80經劃分為不同切片,且含有四分樹資訊之切片遺失或惡化,則視訊解碼器可能不能適當地解碼第二切片98(例如,無四分樹資訊之切片)中含有之LCU 80的部分。亦即,視訊解碼器可能不能識別LCU 80之剩餘者分離為子CU的方式。
本發明之態樣包括分開用於經分離為不同切片之LCU(諸如,LCU 80)的階層式四分樹資訊,且向每一切片呈現四分樹資訊之經分開部分。舉例而言,視訊編碼器20可通常在LCU 80之開始處提供呈分離旗標形式的四分樹資訊。然而,若LCU 80之四分樹資訊係以此方式提供,則第一區段90可包括所有分離旗標而第二區段92不包括任何分離旗標。若第一切片96(其含有第一區段90)遺失或惡化,則第二切片98(其含有第二區段92)可能不能經適當地解碼。
根據本發明之態樣,當將LCU 80分離為不同切片時,視訊編碼器20亦可分開相關聯之四分樹資訊,以使得向第一切片96提供適用於第一區段90之四分樹資訊且向第二切片96提供適用於第二區段92之四分樹資訊。亦即,當將LCU 80分離為第一區段90及第二區段92時,視訊編碼器20可將相關聯於第一區段90之分離旗標與相關聯於第二區段92之分離旗標分開。視訊編碼器20可接著向第一切片96提供用於第一區段90之分離旗標且向第二切片98提供用於第二區段92之分離旗標。以此方式,若第一切片96惡化或遺失,則視訊解碼器仍可能夠適當地解碼包括於第二切片98內之LCU 80的剩餘部分。
在一些實例中,為了適當地解碼含有用於LCU之四分樹資訊之僅一部分的LCU之區段,視訊解碼器30可重建構與LCU之其他區段相關聯的四分樹資訊。舉例而言,在接收第二區段92後,視訊解碼器30即可重建構四分樹50之遺漏部分。為了進行此操作,視訊解碼器30可識別所接收切片之第一CU的索引值。索引值可識別子CU屬於之象限,藉此提供子CU在LCU內之相對位置的指示。亦即,在圖3B中所展示之實例中,子CU 84A可具有索引值0,子CU 84B可具有索引值1,子CU 84C可具有索引值2,且子CU 84D可具有索引值3。此等索引值可作為語法元素而提供於切片標頭中。
因此,在接收第二區段92後,視訊解碼器30即可識別子CU 84C之索引值。視訊解碼器30可接著使用該索引值識別出子CU 84C屬於左下象限,且子CU 84C之父代節點必須包括分離旗標。亦即,因為子CU 84C係具有索引值之子CU,所以父代CU有必要包括分離旗標。
另外,視訊解碼器30可推斷四分樹50之所有節點包括於 第二區段92內。在一實例中,視訊解碼器30可使用四分樹50之所接收部分及使用深度優先四分樹遍歷演算法來推斷此資訊。根據深度優先遍歷演算法,視訊解碼器30擴展四分樹50之所接收部分的第一節點直至經擴展節點無葉節點為止。視訊解碼器30遍歷經擴展節點直至返回到尚未經擴展之最近節點為止。視訊解碼器30以此方式繼續直至四分樹50之所接收部分的所有節點經擴展為止。
當將LCU 80分離為不同切片時,視訊編碼器20亦可提供其他資訊以輔助視訊解碼器30解碼視訊資料。舉例而言,本發明之態樣包括使用包括於位元串流中之一或多個語法元素來識別切片之相對末尾。在一實例中,視訊編碼器(諸如,視訊編碼器20)可產生切片旗標之一位元末尾且向訊框之每一CU提供切片旗標之該末尾以指示特定CU是否為切片之最終CU(例如,在分離之前的最終CU)。在此實例中,視訊編碼器20可在CU非定位於切片之相對末尾處時將切片旗標之末尾設定為值「0」,且在CU定位於切片之相對末尾處時將切片旗標之末尾設定為值「1」。在圖3B中所展示之實例中,子CU 84B將包括切片旗標末尾「1」,而剩餘CU將包括切片旗標末尾「0」。
在一些實例中,視訊編碼器20可僅針對等於或大於用以將訊框分離為切片之細微度的CU提供切片指示之末尾(例如,切片旗標之末尾)。在圖3B中所展示之實例中,視訊編碼器20可僅提供關於等於或大於16像素×16像素細微 度之CU(亦即,CU 82A、82B、84A至84D及86A至86C)之切片旗標的末尾。以此方式,視訊編碼器20可達成優於關於訊框之每一CU提供切片旗標之末尾之方法的位元節省。
在將LCU(諸如,LCU 80)分離為不同切片之實例中,亦可以針對每一切片提供單獨量化資料。舉例而言,如上文所指出,可根據可以LCU層級定義之量化參數(QP)(例如,其可藉由差量QP識別)來應用量化。然而,根據本發明之態樣,視訊編碼器20可針對已分離為不同切片之LCU之每一部分指示差量QP值。在圖3B中所展示之實例中,視訊編碼器20可針對第一區段90及第二區段92提供單獨差量QP,第一區段90及第二區段92可分別包括於第一切片96及第二切片98內。
儘管出於解釋之目的而關於視訊編碼器20及視訊解碼器30描述圖3A及圖3B之特定態樣,但應理解,諸如其他處理器、處理單元、包括編碼器/解碼器(CODEC)之基於硬體的寫碼單元及其類似者之其他視訊寫碼單元亦可經組態以執行關於圖3A及圖3B描述之實例及技術。
圖4係說明可實施本發明中描述之用於將視訊資料之訊框分離為獨立可解碼部分的技術中之任何或全部的視訊編碼器20之實例的方塊圖。大體而言,視訊編碼器20可執行視訊訊框內之CU的框內寫碼及框間寫碼。框內寫碼依賴於空間預測以減少或移除給定視訊訊框內之視訊的空間冗餘。框間寫碼依賴於時間預測以減少或移除視訊序列之當 前訊框與先前經寫碼訊框之間的時間冗餘。框內模式(I模式)可指代若干基於空間之壓縮模式中的任一者,且諸如單向預測(P模式)或雙向預測(B模式)之框間模式可指代若干基於時間之壓縮模式中的任一者。
如圖4中所展示,視訊編碼器20接收待編碼之視訊訊框內之當前視訊區塊。在圖4之實例中,視訊編碼器20包括運動補償單元144、運動估計單元142、框內預測單元146、參考訊框儲存器164、求和器150、變換單元152、量化單元154及熵寫碼單元156。圖4中所說明之變換單元152係執行實際變換而不與CU之TU混淆的單元。對於視訊區塊重建構,視訊編碼器20亦包括反量化單元158、反變換單元160及求和器162。解區塊濾波器(圖4中未展示)亦可經包括以對區塊邊界濾波以自經重建構視訊移除方塊效應假影。必要時,解區塊濾波器將通常對求和器162之輸出濾波。
在編碼程序期間,視訊編碼器20接收待編碼之視訊訊框或切片。可將該訊框或切片劃分為多個視訊區塊,例如,最大寫碼單元(LCU)。運動估計單元142及運動補償單元144關於一或多個參考訊框中之一或多個區塊來執行所接收視訊區塊之框間預測寫碼以提供時間壓縮。框內預測單元146可關於與待寫碼之區塊在同一訊框或切片中的一或多個相鄰區塊來執行所接收視訊區塊的框內預測寫碼以提供空間壓縮。
模式選擇單元140可(例如)基於誤差結果與在每一寫碼模 式下用信號發出視訊資料所需要之位元的數目(例如,有時稱為速率失真)來選擇寫碼模式(框內或框間)中之一者,且將所得框內或框間經編碼區塊提供至求和器150以產生殘餘區塊資料且提供至求和器162以重建構經編碼區塊以供參考訊框中使用。一些視訊訊框可經指定為I訊框,其中I訊框中之所有區塊以框內預測模式編碼。在一些狀況下,框內預測單元146可(例如)在藉由運動估計單元142執行之運動搜尋不導致區塊之足夠預測時執行P訊框或B訊框中之區塊的框內預測編碼。
根據一些實例,除了選擇寫碼模式中之一者之外,視訊編碼器20可執行其他功能,諸如判定藉以分離視訊資料之訊框的細微度,其可小於LCU。舉例而言,視訊編碼器20可計算用於各種切片組態之速率失真(例如,試圖最大化壓縮而不超過預定失真)且選擇產生最佳結果之細微度。視訊編碼器20可在選擇細微度時考慮目標切片大小。舉例而言,如上文所指出,在一些例子中,可需要形成特定大小之切片。一此實例可準備經由網路傳輸切片。視訊編碼器20可判定藉以將視訊資料之訊框分離為切片以試圖緊密匹配目標大小的細微度。
在視訊編碼器20判定藉以分離視訊資料之訊框的細微度之實例中,視訊編碼器20可指示此細微度。亦即,視訊編碼器20(諸如,模式選擇單元140、熵寫碼單元156或視訊編碼器20之另一單元)可提供細微度之指示以輔助視訊解碼器解碼視訊資料。舉例而言,視訊編碼器20可根據可藉以 發生分離之CU深度來識別細微度。
出於解釋之目的,假定視訊資料之訊框具有大小為128像素×128像素的一或多個LCU。在此實例中,視訊編碼器20可判定訊框可以32像素×32像素之細微度分離為切片(例如)以便達成目標切片大小。視訊編碼器20可根據可藉以發生切片分離之階層深度來指示此細微度。亦即,根據圖3A及圖3B中所展示之階層式四分樹配置,32像素×32像素子CU具有CU深度2。因此,在此實例中,視訊編碼器20可藉由指示切片分離可以CU深度2發生來用信號發出切片細微度。
在一實例中,視訊編碼器20可在圖像參數集(PPS)中提供可藉以將視訊資料之訊框分離為切片之細微度的指示。舉例而言,藉由背景,視訊編碼器20可格式化經壓縮視訊資料以用於經由網路傳輸至所謂的「網路抽象層單元」或NAL單元。每一NAL單元可包括識別儲存至NAL單元之資料之類型的標頭。存在通常儲存至NAL單元的兩種類型之資料。儲存至NAL單元之第一類型之資料係視訊寫碼層(VCL)資料,其包括經壓縮視訊資料。儲存至NAL單元之第二類型之資料稱為非VCL資料,其包括額外資訊,諸如定義為大量NAL單元與互補增強資訊(SEI)所共有之標頭資料的參數集。舉例而言,參數集可含有序列層級標頭資訊(例如,呈序列參數集(SPS))及很少改變之圖像層級標頭資訊(例如,呈圖像參數集(PPS))。參數集中含有之很少改變之資訊不需要針對每一序列或圖像重複,藉此改良寫碼效 率。另外,參數集之使用使得標頭資訊能夠帶外傳輸,藉此避免冗餘傳輸之需要而達成錯誤回復。
在一實例中,可藉以將視訊資料之訊框分離為切片之細微度的指示可根據以下表1指示:
在表1中所展示之實例中,slice_granu_CU_depth可指定用以將視訊資料之訊框分離為切片之細微度。舉例而言,slice_granu_CU_depth可藉由識別相比於LCU(例如,LCU=深度0)可藉以發生切片分離之階層深度來指定作為用以將訊框分離為切片之細微度的CU深度。根據本發明之態樣,切片可含有一系列LCU(例如,包括在相關聯之階層 式四分樹結構中的所有CU)及不完整LCU。不完整LCU可含有具有小至max_coding_unit_width>>slice_granu_CU_depth×max_coding_unit_height>>slice_granu_CU_depth但不更小之大小的一或多個完整CU。舉例而言,切片不能含有具有小於max_coding_unit_width>>slice_granu_CU_depth×max_coding_unit_height>>slice_granu_CU_depth之大小及不屬於完全含有於切片中之LCU的CU。亦即,切片邊界可不發生於等於或小於max_coding_unit_width>>slice_granu_CU_depth×max_coding_unit_height>>slice_granu_CU_depth之CU大小的CU內。
在視訊編碼器20判定小於用於將視訊資料之訊框分離為切片之LCU的細微度之實例中,視訊編碼器20可分開用於經分離為不同切片之LCU的階層式四分樹資訊且向每一切片呈現四分樹資訊之分開部分。舉例而言,如上文關於圖3A及圖3B所描述,視訊編碼器20可分開與經分離為切片之LCU的每一區段相關聯之分離旗標。視訊編碼器20可接著向第一切片提供與分離LCU之第一區段相關聯的分離旗標且向第二切片提供與分離LCU之另一區段相關聯的分離旗標。以此方式,若第一切片惡化或遺失,則視訊解碼器仍可能夠適當地解碼包括於第二切片內之LCU的剩餘部分。
或者或另外,視訊編碼器20可使用一或多個語法元素識別切片之相對末尾。舉例而言,視訊編碼器20可產生切片旗標之一位元末尾且提供關於訊框之每一CU的切片旗標 之末尾以指示特定CU是否為切片之最終CU(例如,在分離之前的最終CU)。舉例而言,視訊編碼器20可在CU定位於切片之相對末尾時將切片旗標之末尾設定為值「0」且在CU定位於切片之相對末尾時將切片旗標之末尾設定為值「1」。
在一些實例中,視訊編碼器20可僅提供用於等於或大於用以將訊框分離為切片之細微度的CU之切片指示的末尾(例如,切片旗標之末尾)。舉例而言,出於解釋之目的,假定視訊編碼器20判定藉以將視訊資料之訊框分離為切片的細微度係32像素×32像素,其中LCU大小為64像素×64像素。在此實例中,模式選擇單元140可僅提供關於大小為32像素×32像素或更大之CU的切片旗標之末尾。
在一實例中,視訊編碼器20可根據以下所展示之表2來產生切片旗標之末尾:
儘管本發明之特定態樣大體而言係關於視訊編碼器20描述,但應理解,此等態樣可藉由視訊編碼器20之一或多個單元(諸如,模式選擇單元140或視訊編碼器20之一或多個其他單元)執行。
運動估計單元142及運動補償單元144可高度整合,但出於概念目的而分別說明。運動估計為產生運動向量之程序,該等運動向量估計用於框間寫碼之視訊區塊的運動。舉例而言,運動向量可指示相對於參考訊框之參考樣本的當前訊框中之預測單元的位移。參考樣本係被發現為在像素差方面緊密匹配包括經編碼之PU的CU之部分的區塊,該像素差可藉由絕對差之總和(SAD)、平方差之總和(SSD)或其他差量度來判定。藉由運動補償單元144執行之運動補償可涉及基於藉由運動估計所判定之運動向量而獲取或產生預測單元之值。再次,在一些實例中,運動估計單元142及運動補償單元144可為功能上整合的。
運動估計單元142藉由比較框間編碼訊框之一預測單元與儲存於參考訊框儲存器164中之參考訊框的參考樣本來計算用於該預測單元的運動向量。在一些實例中,視訊編碼器20可計算用於儲存於參考訊框儲存器164中之參考訊框之子整數像素位置的值。舉例而言,視訊編碼器20可計算參考訊框之四分之一像素位置、八分之一像素位置或其他分數像素位置的值。因此,運動估計單元142可執形關於全像素位置及分數像素位置之運動搜尋且輸出 具有分數像素精度之運動向量。運動估計單元142將經計算運動向量發送至熵寫碼單元156及運動補償單元144。藉由運動向量識別之參考訊框的部分可稱為參考樣本。運動補償單元144可(例如)藉由擷取由用於PU之運動向量識別之參考樣本來計算用於當前CU之預測單元的預測值。
框內預測單元146可執行用於寫碼所接收區塊之框內預測以作為藉由運動估計單元142及運動補償單元144執行之框間預測的替代方案。框內預測單元146可相對於相鄰之先前經編碼區塊(例如,當前區塊之上方、右上方、左上方或左方之區塊)來編碼所接收區塊,假定用於區塊之自左至右、自頂部至底部之編碼次序。框內預測單元146可經組態以具有多種不同框內預測模式。舉例而言,框內預測單元146可基於經編碼之CU的大小而經組態以具有特定數目個預測模式(例如,35個預測模式)。
框內預測單元146可藉由(例如)計算用於各種框內預測模式之速率失真(例如,試圖最大化壓縮而不超過預定失真)及選擇產生最佳結果之模式來自可用框內預測模式選擇框內預測模式。框內預測模式可包括組合空間相鄰像素之值及將經組合值應用於用以預測PU之預測區塊中的一或多個像素位置之功能。一旦已計算用於預測區塊中之所有像素位置的值,框內預測單元146即可基於PU與預測區塊之間的像素差來計算用於預測模式之誤差值。框內預測單元146可繼續測試框內預測模式直至發現產生可 接受誤差值與用信號發出視訊資料所需要之位元的框內預測模式為止。框內預測單元146可接著將PU發送至求和器150。
視訊編碼器20藉由自經編碼之原始視訊區塊減去藉由運動補償單元144或框內預測單元146計算之預測資料來形成殘餘區塊。求和器150表示執行此減法運算之組件或若干組件。殘餘區塊可對應於值之二維矩陣,其中殘餘區塊中之值的數目與對應於殘餘區塊之PU中之像素的數目相同。殘餘區塊中之值可對應於預測區塊與待編碼之原始區塊中之分配像素之間的差。
變換單元152將變換(諸如,離散餘弦變換(DCT)、整數變換或概念上類似之變換)應用於殘餘區塊,從而產生包含殘餘變換係數值之視訊區塊。變換單元152可執行其他變換,諸如藉由H.264標準所定義之變換,該等變換在概念上類似於DCT。亦可使用小波變換、整數變換、子頻帶變換或其他類型之變換。在任何狀況下,變換單元152將變換應用於殘差區塊,從而產生殘差變換係數之一區塊。變換單元152可將殘餘資訊自像素值域轉換至諸如頻域之變換域。
量化單元154量化殘餘變換係數以進一步減少位元速率。該量化程序可減少與該等係數中之一些或全部相關聯的位元深度。可藉由調整量化參數(QP)來修改量化之程度。在一些實例中,QP可以LCU層級定義。因此,同一層級之量化可適用於與LCU內之CU之不同PU相關聯的TU中 之所有變換係數。然而,勝於用信號發出QP自身,QP中之改變(亦即,差量)可藉由LCU用信號發出。差量QP定義LCU之量化參數相對於某參考QP(諸如,先前傳達之LCU之QP)的改變。
根據本發明之態樣,在LCU經劃分為兩個切片之實例中,量化單元154可定義用於經劃分LCU之每一部分的單獨QP(或差量QP)。出於解釋之目的,假定LCU經分離為兩個切片,以使得LCU之第一區段包括於第一切片內且LCU之第二區段包括於第二切片內。在此實例中,量化單元154可定義用於LCU之第一區段的第一差量QP及用於LCU之第二區段之獨立於第一差量QP的第二差量QP。在一些實例中,向第一切片提供之差量QP可不同於向第二切片提供之差量QP。
在一實例中,量化單元154可根據以下所展示之表3提供差量QP值之指示:
在表2之實例中,cu_QP_delta可改變CU層中之QPY的值。亦即,單獨cu_QP_delta值可經定義以用於已分離為不同切片之LCU的兩個不同區段。根據一些實例,cu_QP_delta之經解碼值可在-26至+25之範圍中。若cu_QP_delta值未針對CU而提供,則視訊解碼器可推斷 cu_QP_delta值等於零。
在一些實例中,QPY值可根據以下方程式(1)導出,其中QPY,PREV係當前切片之解碼次序的先前CU之亮度量化參數(QPY)。
QPY=(QPY,PREV+cu_qp_delta+52)% 52 (1)另外,對於切片之第一CU,QPY,PREV值最初可設定為等於SliceQPY,SliceQPY可為用於切片之所有區塊的初始QPY直至量化參數經修改為止。此外,firstCUFlag可在每一切片之開始處設定為「真」。
根據本發明之一些態樣,量化單元154可判定可經指派QPY值之最小CU大小。舉例而言,量化單元154可僅設定用於等於或大於MinQPCodingUnitSize之CU的QP值。在一些實例中,當MinQPCodingUnitSize等於MaxCodingUnitSize(例如,最大支援CU(LCU)之大小)時,量化單元154可僅用信號發出用於LCU及切片中之第一CU的QP值。在另一實例中,替代於僅用信號發出用於切片之第一CU及/或LCU之差量QP值,量化單元154可用信號發出差量QP可經設定之最小QP CU大小,最小QP CU大小對於特定序列(例如,訊框之序列)可為固定的。舉例而言,量化單元154可(例如)在參數集(諸如,圖像參數集(PPS)或序列參數集(SPS))中用信號發出最小QP CU大小。
在另一實例中,量化單元154可識別可根據CU深度而經指派QP值之最小CU大小。亦即,量化單元154可僅設 定用於定位得等於或高於(例如,在四分樹結構上相對較高)MinQPCUDepth之CU的QP值。在此實例中,MinQPCodingUnitSize可基於MinQPCUDepth及MaxCodingUnitSize導出。最小QP深度可(例如)在諸如PPS或SPS之參數集中用信號發出。
在量化之後,熵寫碼單元156對量化變換係數熵寫碼。舉例而言,熵寫碼單元156可執行內容適應性可變長度寫碼(CAVLC)、內容脈絡適應性二進位算術寫碼(CABAC)或另一熵寫碼技術。在藉由熵寫碼單元156之熵寫碼之後,可將經寫碼之視訊傳輸至另一器件或經存檔以供稍後傳輸或擷取。在內容脈絡適應性二進位算術編碼(CABAC)之狀況下,內容脈絡可基於相鄰編碼單元。
在一些狀況下,除了執行熵寫碼以外,熵寫碼單元156或視訊編碼器20之另一單元可經組態以亦執行其他寫碼功能。舉例而言,熵寫碼單元156可經組態以判定用於寫碼單元及分割區的CBP值。又,在一些狀況下,熵寫碼單元156可執行寫碼單元或其分割區中之係數的延行長度寫碼。詳言之,熵寫碼單元156可應用鋸齒形掃描或其他掃描型樣以掃描寫碼單元或分割區中之變換係數,且編碼零之延行以用於進一步壓縮。熵寫碼單元156亦可藉由適當語法元素來建構標頭資訊,以用於在經編碼視訊位元串流中傳輸。
根據本發明之態樣,在熵寫碼單元156建構用於切片之標頭資訊的實例中,熵寫碼單元156可判定滲透切片參數 之集合。滲透切片參數可(例如)包括為兩個或兩個以上切片共有之語法元素。如上文所指出,語法元素可輔助解碼器解碼切片。在一些實例中,滲透切片參數在本文中可稱為「訊框參數集」(FPS)。根據本發明之態樣,FPS可適用於多個切片。FPS可參考圖像參數集(PPS)且切片標頭可參考FPS。
大體而言,FPS可含有典型切片標頭之資訊的大多數。然而,FPS不需要針對每一切片重複。根據一些實例,熵編寫單元156可產生參考FPS之標頭資訊。標頭資訊可包括(例如)識別FPS之訊框參數集識別符(ID)。在一些例子中,熵寫碼單元156可定義複數個FPS,其中複數個FPS中之每一者與不同訊框參數集識別符相關聯。熵寫碼單元156可接著產生識別複數個FPS中之切合者的切片標頭資訊。
在一些例子中,若經識別FPS不同於與同一訊框之先前經解碼切片相關聯的FPS,則熵寫碼單元156可僅識別FPS。在此等例子中,熵寫碼單元156可定義識別FPS識別符是否經設定之每一切片標頭中的旗標。若此旗標未經設定(例如,旗標具有值「0」),則來自訊框之先前經解碼切片的FPS識別符可再使用於當前切片。以此方式使用FPS識別符旗標可進一步減少藉由切片標頭消耗之位元的量,尤其在大量FPS經定義時。
在一實例中,熵寫碼單元156可根據如下所展示之表4產生FPS:
與包括於以上表4之實例中的語法元素相關聯的語意與新興HEVC標準相同,然而,語意適用於參考此FPS標頭之所有切片。亦即,舉例而言,fra_parameter_set_id指示訊框參數集標頭的識別符。因此,共用同一標頭資訊之一或多個切片可參考FPS識別符。若標頭具有相同的fra_parameter_set_id、frame_num及圖像序列號(POC),則兩個FPS標頭係相同的。
根據一些實例,FPS標頭可含有於圖像參數集(PPS)原始位元組序列有效負載(RBSP)中。在一實例中,FPS標頭可根據以下所展示之表5含有於PPS中:
根據一些實例,FPS標頭可含有於訊框之一或多個切片中。在一實例中,FPS標頭可根據以下所展示之表6含有於訊框之一或多個切片中:
在表6之實例中,fps_present_flag可指示用於當前切片之切片標頭是否含有FPS標頭。另外,fra_parameter_set_id可指定當前切片參考之FPS標頭的識別符。另外,根據表6中所展示之實例,end_picture_flag指示當前切片是否為當前圖像之最後切片。
儘管本發明之特定態樣(例如,諸如產生標頭語法及/或參數集)係關於熵寫碼單元156描述,但應理解,此描述僅出於解釋之目的而提供。亦即,在其他實例中,多種其他寫碼模組可用以產生標頭資料及/或參數集。舉例而言,標頭資料及/或參數集可藉由固定長度寫碼模組(例如,uuencoding(UUE)或其他寫碼方法)產生。
仍參看圖4,反量化單元58及反變換單元60分別應用反量化及反變換以在像素域中重建構殘餘區塊(例如)以供稍後用作參考區塊。運動補償單元44可藉由將殘餘區塊加至參考訊框儲存器64之訊框中之一者的預測區塊來計算參考區塊。運動補償單元44亦可將一或多個內插濾波器應用於經重建構殘餘區塊,以計算子整數像素值以用於運動估計中。求和器162將經重建構殘餘區塊加至藉由運動補償單元44產生之經運動補償預測區塊,以產生經重建構視訊區塊以用於儲存於參考訊框儲存器64中。運動估計單元42及運動補償單元44可將經重建構視訊區塊用作參考區塊,以框間編碼後續視訊訊框中之區塊。
本發明之技術亦係關於定義用於控制序列可使用之最精細切片細微度的設定檔及/或一或多個層級。舉例而言, 如同大多數視訊寫碼標準一樣,H.264/AVC定義用於無誤位元串流之語法、語意及解碼程序,該等無誤位元串流中之任一者符合特定設定檔或層級。H.264/AVC不指定編碼器,但編碼器之任務係保證所產生位元串流對於解碼器係標準順應式的。在視訊寫碼標準之背景中,「設定檔」對應於演算法、特徵或工具及施加至演算法、特徵或工具之約束的子集。舉例而言,如藉由H.264標準所定義,「設定檔」為藉由H.264標準指定之整個位元串流語法的子集。「層級」對應於諸如(例如)解碼器記憶及計算之解碼器資源消耗的限制,該等限制與圖像之解析度、位元速率及巨集區塊(MB)處理速率有關。設定檔可以profile_idc(設定檔指示符)值用信號發出,而層級可以level_idc(層級指示符)值用信號發出。
舉例而言,H.264標準認識到,在藉由給定設定檔之語法強加的界限內,取決於藉由位元串流中之語法元素採取的值(諸如,解碼圖像之指定大小),仍有可能需要編碼器及解碼器之效能的大變化。H.264標準進一步認識到,在許多應用中,實施能夠處理在特定設定檔內之語法之所有假設使用的解碼器係既不實務亦不經濟的。因此,H.264標準將「層級」定義為強加於位元串流中之語法元素之值上的特定約束集合。此等約束可為對值之簡單限制。或者,此等約束可採取對值之算術組合(例如,圖像寬度×圖像高度×每秒解碼之圖像的數目)之約束的形式。H.264標準進一步指定,個別實施可支援針對每一受支援設定檔之 不同層級。
符合設定檔之解碼器(諸如,視訊解碼器30)通常支援設定檔中所定義之所有特徵。舉例而言,作為寫碼特徵,B圖像寫碼在H.264/AVC之基線設定檔中未受到支援,但在H.264/AVC之其他設定檔中受到支援。符合層級之解碼器應能夠解碼不需要超出層級中所定義之限制之資源的任何位元串流。設定檔及層級之定義可有助於解譯能力。舉例而言,在視訊傳輸期間,可針對整個傳輸作業階段而協商及同意一對設定檔及層級定義。更具體而言,在H.264/AVC中,層級可定義(例如)對需要處理之巨集區塊之數目、解碼圖像緩衝器(DPB)大小、編碼圖像緩衝器(CPB)大小、垂直運動向量範圍、每兩個連續MB之運動向量之最大數目及B區塊是否可具有小於8×8像素之子巨集區塊分割區的限制。以此方式,解碼器可判定解碼器是否能夠適當地解碼位元串流。
本發明之態樣係關於定義用於控制切片細微度可經修改之程度的設定檔。亦即,視訊編碼器20可利用設定檔來停用以小於特定CU深度之細微度將視訊資料之訊框分離為切片的能力。在一些實例中,設定檔可不支援至低於LCU深度之一CU深度的切片細微度。在此等實例中,編碼視訊序列中之切片可為LCU對準的(例如,每一切片含有一或多個完全形成之LCU)。
另外,如上文所指出,切片細微度可(例如)在序列參數集中以序列層級用信號發出。在此等實例中,針對圖像而 用信號發出(例如,在圖像參數集中用信號發出)之切片細微度大體上等於或大於序列參數集中所指示之切片細微度。舉例而言,若切片細微度係8×8,則三個圖像參數集可在位元串流中輸送,其中圖像參數集中之每一者具有不同切片細微度(例如,8×8、16×16及32×32)。在此實例中,特定序列中之切片可參考圖像參數集中之任一者,且因此細微度可為8×8、16×16或32×32(例如,但非4×4或更小)。
本發明之態樣亦係關於定義一或多個層級。舉例而言,一或多個層級可指示符合該層級之解碼器實施支援特定切片細微度層級。亦即,特定層級可具有對應於32×32之CU大小的切片細微度,而較高層級可具有對應於16×16之CU大小的切片細微度,且另一較高層級可允許相對較小切片細微度(例如,8×8像素之細微度)。
如表7中所展示,不同層級之解碼器可對切片細微度可達到CU大小之哪一程度具有不同約束。
在圖4之實例中,本發明之特定態樣(例如,與以小於LCU之細微度將視訊資料之訊框分離為切片有關的態樣) 係關於視訊編碼器20之特定單元而描述。然而,應理解,圖4之實例中所提供的功能單元係出於解釋之目的而提供。亦即,視訊編碼器20之特定單元可出於解釋之目的單獨展示及描述,但可高度整合(例如)於積體電路或其他處理單元內。因此,歸於視訊編碼器20之一單元之功能可藉由視訊編碼器20之一或多個其他單元執行。
以此方式,視訊編碼器20係可編碼包含複數個區塊大小之寫碼單元的視訊資料之訊框之視訊編碼器的實例,該等寫碼單元包括一或多個最大寫碼單元(LCU),該等最大寫碼單元(LCU)包括以階層方式配置之複數個相對較小寫碼單元。根據一實例,視訊編碼器20可判定在形成訊框之獨立可解碼部分時將藉以分離以階層方式配置之複數個較小寫碼單元之細微度。視訊編碼器20可使用所判定細微度分離LCU以產生LCU之第一區段及LCU之第二區段,且產生包括LCU之第一區段而不包括LCU之第二區段的訊框之獨立可解碼部分。視訊編碼器20亦可產生包括訊框之獨立可解碼部分及所判定細微度之指示的位元串流。
圖5係說明可實施本發明中描述之用於解碼已分離為獨立可解碼部分的視訊資料之訊框的技術中之任何或全部的視訊解碼器30之實例的方塊圖。亦即,舉例而言,視訊解碼器30可經組態以解碼關於視訊編碼器20所描述之任何語法、參數集、標頭資料或其他資料,該等語法、參數集、標頭資料或其他資料與解碼已分離為獨立可解碼部分之視訊資料的訊框相關聯。
在圖5之實例中,視訊解碼器30包括熵解碼單元170、運動補償單元172、框內預測單元174、反量化單元176、反變換單元178、參考訊框儲存器182及求和器180。應理解,如上文關於圖4所指出,關於視訊解碼器30所描述之單元可為高度整合的,但出於解釋之目的而單獨描述。
在視訊解碼器30處所接收之視訊序列可包含編碼影像訊框集合、訊框切片集合、共同編碼圖像群組(GOP)或包括編碼LCU及語法資訊之視訊資訊的廣泛多種單元,語法資訊提供關於解碼此等LCU之方式之指令。在一些實例中,視訊解碼器30可執行一解碼步驟(pass),該解碼步驟大體上與關於視訊編碼器20(圖4)所描述之編碼步驟互逆。舉例而言,熵解碼單元170可執行藉由圖4之熵編碼單元156執行之編碼的互逆解碼功能。詳言之,熵解碼單元170可執行CAVLC或CABAC解碼,或藉由視訊編碼器20使用之任何其他類型的熵解碼。
另外,根據本發明之態樣,熵解碼單元170或視訊解碼器30之另一模組(諸如,剖析模組)可使用語法資訊(例如,如藉由所接收四分樹提供)以在編碼經編碼視訊序列之訊框時判定所使用之LCU的大小、描述經編碼視訊序列之訊框的每一CU分離之方式(及同樣地,子CU分離之方式)之分離資訊、指示每一分離經編碼之方式之模式(例如,框內或框間預測,且對於框內預測為框內預測編碼模式)、用於每一框間編碼PU之一或多個參考訊框(及/或含有用於參考訊框之識別符的參考清單)及解碼經編碼視訊序列之 其他資訊。
根據本發明之技術,在視訊資料之訊框已按小於LCU之細微度分離為切片之實例中,視訊解碼器30可經組態以識別此細微度。亦即,舉例而言,視訊解碼器30可根據所接收或用信號發出之細微度值判定已藉以分離視訊資料之訊框的細微度。在一些實例中,如上文關於視訊編碼器20所描述,可根據切片分離可發生之CU深度來識別細微度。CU深度值可包括於諸如圖像參數集(PPS)之參數集的所接收語法中。舉例而言,可藉以將視訊資料之訊框分離為切片之細微度的指示可根據如上文所描述之表1指示。
另外,視訊解碼器30可判定切片開始之位址(例如,「切片位址」)。切片位址可指示切片在訊框內開始之相對位置。切片位址可以切片細微度層級提供。在一些實例中,切片位址可提供於切片標頭中。在特定實例中,slice_address語法元素可指定切片開始之切片細微度解析度的位址。在此實例中,slice_address可藉由位元串流中之(Ceil(Log2(NumLCUsInPicture))+SliceGranularity)位元表示,其中NumLCUsInPicture係圖像(或訊框)中之LCU的數目。可變LCUAddress可經設定為(slice_address>>SliceGranularity)且可表示呈光柵掃描次序之切片位址的LCU部分。可變GranularityAddress可經設定為(slice_address-(LCUAddress<<SliceGranularity))且可表示以z掃描次序表現之切片位址的子LCU部分。可變SliceAddress可接著經設定為(LCUAddress<<(log2_diff_max_min_coding_block_size<<1))+ (GranularityAddress<<((log2_diff_max_min_coding_block_size<<1)-SliceGranularity)且切片解碼可以可能在切片開始座標處的最大編碼單元開始。
另外,為了識別切片分離發生之位置,視訊解碼器30可經組態以接收識別切片之相對末尾的一或多個語法元素。舉例而言,視訊解碼器30可經組態以接收包括於訊框之每一CU內的切片旗標之一位元末尾,該一位元末尾指示經解碼之CU是否為切片之最終CU(例如,在分離之前的最終CU)。在一些實例中,視訊解碼器30可僅接收用於等於或大於用以將訊框分離為切片之細微度的CU之切片指示的末尾(例如,切片旗標之末尾)。
另外,視訊解碼器30可經組態以接收用於已分離為不同切片之LCU的單獨階層式四分樹資訊。舉例而言,視訊解碼器30可接收與已在切片之間分離之LCU之不同區段相關聯的分開之分離旗標。
在一些實例中,為了適當地解碼含有用於LCU之四分樹資訊之僅一部分的LCU之當前區段,視訊解碼器30可重建構與LCU之先前區段相關聯的四分樹資訊。舉例而言,如上文關於圖3A及圖3B所描述,視訊解碼器30可識別所接收切片之第一子CU的索引值。視訊解碼器30可接著使用索引值來識別所接收子CU屬於之象限。另外,視訊解碼器30可(例如,使用如上文描述之深度優先四分樹遍歷演算法及所接收分離旗標)推斷LCU之所接收區段之四分樹的所有節點。
如上文關於視訊編碼器20(圖4)指出,本發明之態樣亦係關於定義用於控制可藉以將視訊資料之訊框分離為切片之細微度的一或多個設定檔及/或層級。因此,在一些實例中,視訊解碼器30可經組態以利用關於圖4所描述之此等設定檔及/或層級。此外,視訊解碼器30可經組態以接收及利用藉由視訊編碼器20定義之任何訊框參數集(FPS)。
儘管本發明之特定態樣大體而言係關於視訊解碼器30描述,但應理解,此等態樣可藉由視訊解碼器30之一或多個單元(諸如,熵解碼單元170、剖析模組或視訊解碼器30之一或多個其他單元)執行。
運動補償單元172可基於自熵解碼單元170所接收之運動向量產生預測資料。舉例而言,運動補償單元172產生經運動補償之區塊,其可能基於內插濾波器執行內插。具有子像素精度之待用於運動估計之內插濾波器的識別符可包括於語法元素中。運動補償單元172可在視訊區塊之編碼期間使用如藉由視訊編碼器20使用之內插濾波器,以計算參考區塊之子整數像素的內插值。運動補償單元172可根據所接收語法資訊來判定藉由視訊編碼器20使用之內插濾波器,且使用該等內插濾波器來產生預測區塊。
框內預測單元174可基於用信號發出之框內預測模式及來自當前訊框之先前解碼區塊的資料產生用於當前訊框之當前區塊的預測資料。
在一些實例中,反量化單元176可使用藉由視訊編碼器 20使用之掃描鏡像來掃描所接收值。以此方式,視訊解碼器30可自所接收的係數之一維陣列產生量化變換係數之二維矩陣。反量化單元176反量化(亦即,解量化)在位元串流中提供且藉由熵解碼單元170解碼之量化變換係數。
反量化程序可包括(例如)如由H.264解碼標準或由HEVC所定義的習知程序。反量化程序亦可包括使用由視訊編碼器20針對CU計算及用信號發出之量化參數(QP)或差量QP,以判定量化之程度,且同樣判定應被應用之反量化的程度。
根據本發明之態樣,在LCU經劃分為兩個切片之實例中,反量化單元176可接收用於經劃分LCU之每一部分的單獨QP(或差量QP)。出於解釋之目的,假定LCU經分離為兩個切片,以使得LCU之第一區段包括於第一切片內且LCU之第二區段包括於第二切片內。在此實例中,反量化單元176可接收用於LCU之第一區段的第一差量QP及用於LCU之第二區段之獨立於第一差量QP的第二差量QP。在一些實例中,向第一切片提供之差量QP可不同於向第二切片提供之差量QP。
反變換單元178應用反變換,例如,反DCT、反整數變換、反旋轉變換或反方向變換。求和器180組合殘餘區塊與藉由運動補償單元72或框內預測單元74所產生之相應預測區塊以形成解碼區塊。若需要,亦可應用解區塊濾波器來對經解碼區塊濾波以便移除方塊效應假影。接著將經解碼視訊區塊儲存於參考訊框儲存器82中,參考訊框儲存器 82提供參考區塊以用於後續運動補償,且亦產生經解碼視訊以用於呈現於顯示器件(諸如,圖1之顯示器件32)上。
在圖5之實例中,本發明之特定態樣(例如,與接收及解碼視訊資料之訊框有關的態樣,該訊框以小於LCU之細微度經分離為切片)係關於視訊解碼器30之特定單元而描述。然而,應理解,圖5之實例中所提供的功能單元係出於解釋之目的而提供。亦即,視訊解碼器30之特定單元可出於解釋之目的單獨展示及描述,但可高度整合(例如)於積體電路或其他處理單元內。因此,歸於視訊解碼器30之一單元之功能可藉由視訊解碼器之一或多個其他單元執行。
因此,圖5提供可解碼包含複數個區塊大小之寫碼單元的視訊資料之訊框之視訊解碼器30的實例,該等寫碼單元包括一或多個最大寫碼單元(LCU),該等最大寫碼單元(LCU)包括以階層方式配置之複數個相對較小寫碼單元。亦即,視訊解碼器30可判定在形成訊框之獨立可解碼部分時已藉以分離以階層方式配置之複數個較小寫碼單元之細微度,且使用所判定細微度識別分離為第一區段及第二區段的LCU。視訊解碼器30亦可解碼包括LCU之第一區段而無LCU之第二區段的訊框之獨立可解碼部分。
圖6係說明與本發明一致之編碼技術的流程圖。儘管出於解釋之目的而大體上描述為藉由視訊編碼器20(圖4)之組件執行,但應理解,諸如視訊解碼器、處理器、處理單元、基於硬體之寫碼單元(諸如,編碼器/解碼器(CODEC)) 及其類似者之其他視訊編碼單元亦可經組態以執行圖6之方法。
在圖6中所展示之實例方法200中,視訊編碼器20最初判定藉以將訊框劃分為切片之細微度(204),根據本發明之技術,該細微度可小於LCU。如上文所描述,當判定藉以將視訊資料之訊框分離為切片之細微度時,視訊編碼器20可考慮(例如)各種切片組態之速率失真且選擇達成在可接受位元速率範圍內之位元速率同時亦提供在可接受失真範圍內之失真的細微度。可接受位元速率範圍及可接受失真範圍可藉由設定檔定義,諸如在視訊寫碼標準(諸如,所提議之HEVC標準)中所指定的設定檔。或者或另外,視訊編碼器20可在選擇細微度時考慮目標切片大小。大體而言,增加細微度可允許關於切片之大小的較大控制,但亦可增加編碼或解碼切片時利用之寫碼單元資源。
若視訊編碼器20判定用於將視訊資料之訊框分離為切片的細微度小於LCU,則視訊編碼器20可在產生切片之程序中使用所判定細微度來將LCU分離為第一區段及第二區段(206)。亦即,視訊編碼器20可識別包括於LCU內之切片邊界。在此實例中,視訊編碼器20可將LCU分離為第一區段及與第一區段分開之第二區段。
當將LCU分離為兩個區段時,視訊編碼器20亦可將與LCU相關聯之四分樹分開為兩個相應區段,且將四分樹之各別區段包括於LCU之兩個區段內(208)。舉例而言,如上文所描述,視訊編碼器20可將相關聯於LCU之第一區段的 分離旗標與相關聯於LCU之第二區段的分離旗標分開。當編碼含有LCU之區段的切片時,視訊編碼器20可僅將與LCU之第一區段相關聯的分離旗標包括於含有LCU之第一區段的切片內,且將與LCU之區段相關聯的分離旗標包括於含有LCU之第二區段的切片內。
另外,當在切片形成期間將LCU分離為兩個區段時,視訊編碼器20可針對LCU之每一區段產生單獨量化參數(QP)或差量QP值。舉例而言,視訊編碼器20可針對LCU之第一區段產生第一QP或差量QP值,且針對LCU之第二區段產生第二QP或差量QP值。在一些實例中,用於第一區段之QP或差量QP值可不同於用於第二區段之QP或差量QP值。
視訊編碼器20可接著產生含有LCU之訊框的獨立可解碼部分(例如,切片),其包括LCU之第一區段而無LCU之第二區段(212)。舉例而言,視訊編碼器20可產生含有視訊資料之訊框的一或多個全LCU以及訊框之經劃分LCU之第一區段的切片。在此實例中,視訊編碼器20可包括與經劃分LCU之第一區段相關聯的分離旗標及差量QP值。
視訊編碼器20亦可提供用以將視訊資料之訊框分離為切片之細微度的指示(214)。舉例而言,視訊編碼器20可使用可藉以發生切片分離之CU深度值來提供細微度之指示。在其他實例中,視訊編碼器20可以不同方式指示細微度。舉例而言,視訊編碼器20可藉由以其他方式識別切片分離可發生之子CU的大小來指示細微度。或者或另外,如上文所描述,視訊編碼器20可將多種其他資訊(諸如,切片 旗標之末尾、訊框參數集(FPS)及其類似者)包括於切片內。
視訊編碼器20可接著產生含有與切片相關聯之視訊資料以及用於解碼切片之語法資訊的位元串流(216)。根據本發明之態樣,所產生位元串流可即時地傳輸至解碼器(例如,在視訊會議中)或儲存於電腦可讀媒體上以供解碼器未來使用(例如,以串流傳輸、下載、磁碟存取、卡存取、DVD、藍光及其類似者方式)。
亦應理解,關於圖6所展示及描述之步驟僅作為一實例而提供。亦即,圖6之方法的步驟不必按圖6中所展示之次序執行,且可執行更少、額外或替代步驟。舉例而言,根據另一實例,視訊編碼器20可在產生切片之前產生語法元素(例如,諸如細微度之指示(214))。
圖7係說明與本發明一致之解碼技術的流程圖。儘管出於解釋之目的而大體上描述為藉由視訊解碼器30(圖5)之組件執行,但應理解,諸如視訊解碼器、處理器、處理單元、基於硬體之寫碼單元(諸如,編碼器/解碼器(CODEC))及其類似者之其他視訊編碼單元亦可經組態以執行圖7之方法。
在圖7中所展示之實例方法220中,視訊解碼器30接收視訊資料之訊框的獨立可解碼部分,其在本文中稱為切片(222)。在接收切片之後,視訊解碼器30判定藉以形成切片之細微度(224),細微度可小於LCU。舉例而言,如上文所描述,視訊編碼器可產生將LCU分離為兩個區段之切片, 以使得LCU之第一區段包括於所接收切片內,而LCU之第二區段包括於另一切片內。為了判定藉以將訊框分離為切片之細微度,視訊解碼器30可接收細微度之指示。亦即,視訊解碼器30可接收識別可藉以發生切片分離之CU深度的CU深度值。
在視訊資料之訊框已按小於LCU之細微度分離為切片的實例中,視訊解碼器30可接著識別已分離為多個區段之所接收切片的LCU(226)。視訊解碼器30亦可判定用於LCU之所接收區段的四分樹(228)。亦即,視訊解碼器30可識別與LCU之所接收區段相關聯的分離旗標。另外,如上文所描述,視訊解碼器30可重建構與已分離之整個LCU相關聯的四分樹以便適當地解碼所接收區段。視訊解碼器30亦可判定用於LCU之所接收區段的QP或差量QP值(230)。
使用視訊資料及相關聯之語法資訊,視訊解碼器30可接著解碼含有LCU之所接收區段的切片(232)。如上文關於圖6所描述,視訊解碼器30可接收及利用用於解碼切片之多種資訊,該等資訊包括(例如)切片旗標之末尾、訊框參數集(FPS)及其類似者。
亦應理解,關於圖7所展示及描述之步驟僅作為一實例而提供。亦即,圖7之方法的步驟不必按圖7中所展示之次序執行,且可執行更少、額外或替代步驟。
在一或多個實例中,所描述功能可以硬體、軟體、韌體或其任何組合實施。若以軟體實施,則該等功能可作為一或多個指令或程式碼而儲存於電腦可讀媒體上或經由電腦 可讀媒體進行傳輸,且藉由基於硬體之處理單元執行。電腦可讀媒體可包括電腦可讀儲存媒體(其對應於諸如資料儲存媒體之有形媒體)或通信媒體,通信媒體包括(例如)根據通信協定促進電腦程式自一處傳送至另一處的任何媒體。
以此方式,電腦可讀媒體通常可對應於(1)非暫時性的有形電腦可讀儲存媒體,或(2)諸如信號或載波之通信媒體。資料儲存媒體可為可藉由一或多個電腦或一或多個處理器存取以擷取指令、程式碼及/或資料結構以用於實施本發明中所描述之技術的任何可用媒體。電腦程式產品可包括電腦可讀媒體。
藉由實例而非限制,此等電腦可讀儲存媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存器件、快閃記憶體,或可用以儲存呈指令或資料結構之形式之所要程式碼且可藉由電腦存取的任何其他媒體。又,將任何連接適當地稱為電腦可讀媒體。舉例而言,若使用同軸電纜、光纖電纜、雙絞線、數位訂戶線(DSL)或無線技術(諸如,紅外線、無線電及微波)而自網站、伺服器或其他遠端源傳輸指令,則同軸電纜、光纖電纜、雙絞線、DSL或無線技術(諸如,紅外線、無線電及微波)包括於媒體之定義中。
然而,應理解,電腦可讀儲存媒體及資料儲存媒體不包括連接、載波、信號或其他暫時性媒體,而是針對非暫時性有形儲存媒體。如本文中所使用,磁碟及光碟包括緊密 光碟(CD)、雷射光碟、光學光碟、數位影音光碟(DVD)、軟性磁碟及藍光光碟,其中磁碟通常以磁性方式再生資料,而光碟藉由雷射以光學方式再生資料。以上各物之組合亦應包括於電腦可讀媒體之範疇內。
可藉由諸如一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效積體或離散邏輯電路之一或多個處理器來執行指令。因此,如本文中所使用之術語「處理器」可指代上述結構或適於實施本文中所描述之技術的任何其他結構中之任一者。另外,在一些態樣中,可將本文中所描述之功能性提供於經組態以用於編碼及解碼之專用硬體及/或軟體模組內,或併入於組合式編碼解碼器中。又,該等技術可完全實施於一或多個電路或邏輯元件中。
本發明之技術可以廣泛多種器件或裝置實施,該等器件或裝置包括無線手機、積體電路(IC)或IC集合(例如,晶片集)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示技術之器件的功能態樣,但未必需要藉由不同硬體單元實現。相反地,如上文所描述,可將各種單元組合於編碼解碼器硬體單元中,或藉由互操作性硬體單元(包括如上文所描述之一或多個處理器)之集合結合合適軟體及/或韌體來提供該等單元。
已描述本發明之各種態樣。此等及其他態樣係在以下[申請專利範圍]之範疇內。
10‧‧‧視訊編碼及解碼系統
12‧‧‧源器件
14‧‧‧目的地器件
16‧‧‧通信頻道
18‧‧‧視訊源
20‧‧‧視訊編碼器
22‧‧‧調變器/解調變器/數據機
24‧‧‧傳輸器
26‧‧‧接收器
28‧‧‧數據機
30‧‧‧視訊解碼器
32‧‧‧顯示器件
34‧‧‧儲存媒體
36‧‧‧檔案伺服器
50‧‧‧四分樹
52‧‧‧根節點
54A‧‧‧葉節點
54B‧‧‧葉節點
56A‧‧‧節點
56B‧‧‧節點
58A‧‧‧葉節點
58B‧‧‧葉節點
58C‧‧‧葉節點
58D‧‧‧葉節點
60A‧‧‧葉節點
60B‧‧‧葉節點
60C‧‧‧葉節點
62‧‧‧節點
64A‧‧‧葉節點
64B‧‧‧葉節點
64C‧‧‧葉節點
64D‧‧‧葉節點
80‧‧‧最大寫碼單元(LCU)
82A‧‧‧子寫碼單元(CU)
82B‧‧‧子寫碼單元(CU)
84A‧‧‧子寫碼單元(CU)
84B‧‧‧子寫碼單元(CU)
84C‧‧‧子寫碼單元(CU)
84D‧‧‧子寫碼單元(CU)
86A‧‧‧子寫碼單元(CU)
86B‧‧‧子寫碼單元(CU)
86C‧‧‧子寫碼單元(CU)
88A‧‧‧子寫碼單元(CU)
88B‧‧‧子寫碼單元(CU)
88C‧‧‧子寫碼單元(CU)
88D‧‧‧子寫碼單元(CU)
90‧‧‧第一區段
92‧‧‧第二區段
94‧‧‧「切片分離」箭頭/切片分離
96‧‧‧第一切片/箭頭
98‧‧‧第二切片/箭頭
140‧‧‧模式選擇單元
142‧‧‧運動估計單元
144‧‧‧運動補償單元
146‧‧‧框內預測單元
150‧‧‧求和器
152‧‧‧變換單元
154‧‧‧量化單元
156‧‧‧熵寫碼單元
158‧‧‧反量化單元
160‧‧‧反變換單元
162‧‧‧求和器
164‧‧‧參考訊框儲存器
170‧‧‧熵解碼單元
172‧‧‧運動補償單元
174‧‧‧框內預測單元
176‧‧‧反量化單元
178‧‧‧反變換單元
180‧‧‧求和器
182‧‧‧參考訊框儲存器
200‧‧‧方法
220‧‧‧方法
圖1係說明可實施本發明之技術中之一或多者的視訊編碼及解碼系統之方塊圖。
圖2係說明與本發明之技術一致的經寫碼單元(CU)之四分樹分割的概念圖。
圖3A係說明與本發明之技術一致而將CU之四分樹分離為切片之概念圖。
圖3B係說明與本發明之技術一致而將CU分離為切片之概念圖。
圖4係說明可實施本發明之技術之視訊編碼器的方塊圖。
圖5係說明可實施本發明之技術之視訊解碼器的方塊圖。
圖6係說明與本發明中所描述之技術一致的編碼視訊資料之方法的流程圖。
圖7係說明與本發明中所描述之技術一致的解碼視訊資料之方法的流程圖。
80‧‧‧最大寫碼單元(LCU)
82A‧‧‧子寫碼單元(CU)
82B‧‧‧子寫碼單元(CU)
84A‧‧‧子寫碼單元(CU)
84B‧‧‧子寫碼單元(CU)
84C‧‧‧子寫碼單元(CU)
84D‧‧‧子寫碼單元(CU)
86A‧‧‧子寫碼單元(CU)
86B‧‧‧子寫碼單元(CU)
86C‧‧‧子寫碼單元(CU)
88A‧‧‧子寫碼單元(CU)
88B‧‧‧子寫碼單元(CU)
88C‧‧‧子寫碼單元(CU)
88D‧‧‧子寫碼單元(CU)
90‧‧‧第一區段
92‧‧‧第二區段
96‧‧‧第一切片
98‧‧‧第二切片

Claims (60)

  1. 一種解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的方法,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該方法包含:解碼指示在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度的一或多個語法元素,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;基於該一或多個語法元素以判定該細微度;使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及自一位元串流解碼該訊框之一獨立可解碼部分,其中該獨立可解碼部分包括該LCU之該第一區段而無該LCU之該第二區段。
  2. 如請求項1之方法,其中解碼指示該細微度之該一或多個語法元素包含解碼已藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度之一指示。
  3. 如請求項2之方法,其中解碼該CU深度之該指示包含解碼在一圖像參數集中之一CU深度值。
  4. 如請求項1之方法,其進一步包含判定該LCU之該第一區段的一位址。
  5. 如請求項4之方法,其中判定該LCU之該第一區段的該位址包含解碼一切片標頭之一切片位址。
  6. 如請求項1之方法,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,及其中該方法進一步包含:解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分;藉由該第一獨立可解碼部分來解碼一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配置;及藉由該第二獨立可解碼部分來解碼與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  7. 如請求項6之方法,其中解碼該四分樹結構之該第一部分包含:解碼指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標;及解碼指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標。
  8. 如請求項1之方法,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,及其中該方法進一步包含:解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分;識別用於該第一獨立可解碼部分之一量化參數的一改 變;及與該第一獨立可解碼部分分開而識別用於該第二獨立可解碼部分之量化參數的一改變。
  9. 如請求項1之方法,其進一步包含解碼該獨立可解碼部分之一末尾的一指示。
  10. 如請求項1之方法,其中指示該細微度之該一或多個語法元素係自指示該一或多個LCU之一最小寫碼單元大小的語法元素中分離。
  11. 如請求項1之方法,其中基於該一或多個語法元素以判定該細微度包含判定大於該訊框之一最小寫碼單元的一大小及小於該一或多個LCU之一大小的一細微度。
  12. 一種用於解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括以階層方式配置之複數個較小寫碼單元,該裝置包含:一記憶體,其經組態以儲存視訊資料之該訊框;及一或多個處理器,其經組態以執行以下操作:解碼指示在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度的一或多個語法元素,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;基於該一或多個語法元素以判定該細微度; 使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及自一位元串流解碼該訊框之一獨立可解碼部分,其中該獨立可解碼部分包括該LCU之該第一區段而無該LCU之該第二區段。
  13. 如請求項12之裝置,其中為解碼指示該細微度之該一或多個語法元素,該一或多個處理器經組態以解碼已藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度之一指示。
  14. 如請求項13之裝置,其中為解碼該CU深度之該指示,該一或多個處理器經組態以解碼在一圖像參數集中之一CU深度值。
  15. 如請求項12之裝置,其中該一或多個處理器進一步經組態以判定該LCU之該第一區段的一位址。
  16. 如請求項15之裝置,其中為判定該LCU之該第一區段的該位址,該一或多個處理器經組態以解碼一切片標頭之一切片位址。
  17. 如請求項12之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,且其中該一或多個處理器進一步經組態以執行以下操作:解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分;藉由該第一獨立可解碼部分來解碼一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配 置;及藉由該第二獨立可解碼部分來解碼與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  18. 如請求項17之裝置,其中為解碼該四分樹結構之該第一部分,該一或多個處理器經組態以:解碼指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標;及解碼指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標。
  19. 如請求項12之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該一或多個處理器進一步經組態以執行以下操作:解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分;識別用於該第一獨立可解碼部分之一量化參數的一改變;及與該第一獨立可解碼部分分開而識別用於該第二獨立可解碼部分之量化參數的一改變。
  20. 如請求項12之裝置,其中該一或多個處理器進一步經組態以解碼該獨立可解碼部分之一末尾的一指示。
  21. 如請求項12之裝置,其中該裝置包含一行動器件。
  22. 一種用於解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相 對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該裝置包含:用於解碼指示在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度的一或多個語法元素的構件,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;用於基於該一或多個語法元素以判定該細微度的構件;用於使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU的構件;及用於自一位元串流解碼該訊框之一獨立可解碼部分的構件,其中該獨立可解碼部分包括該LCU之該第一區段而無該LCU之該第二區段。
  23. 如請求項22之裝置,其中用於解碼指示該細微度之該一或多個語法元素之該構件包含用於解碼已藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度之一指示的構件。
  24. 如請求項23之裝置,其中用於解碼該CU深度之該指示之該構件包含用於解碼在一圖像參數集中之一CU深度值的構件。
  25. 如請求項22之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該裝置進一步包含: 用於解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分的構件;用於藉由該第一獨立可解碼部分來解碼一四分樹結構之一第一部分的構件,該第一部分識別較小寫碼單元之該階層式配置;及用於藉由該第二獨立可解碼部分來解碼與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分的構件。
  26. 一種儲存指令之電腦可讀儲存媒體,該等指令在藉由一或多個處理器執行時使一視訊解碼器件之該一或多個處理器經組態以解碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該等指令使該一或多個處理器以:解碼指示在形成該訊框之獨立可解碼部分時已藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度的一或多個語法元素,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;基於該一或多個語法元素以判定該細微度;使用該所判定細微度識別已分離為一第一區段及一第二區段之一LCU;及 自一位元串流解碼該訊框之一獨立可解碼部分,其中該獨立可解碼部分包括該LCU之該第一區段而無該LCU之該第二區段。
  27. 如請求項26之電腦可讀儲存媒體,其中為解碼指示該細微度之該一或多個語法元素,該等指令使該一或多個處理器以解碼已藉以分離以階層方式配置之該複數個較小編寫單元之該一或多個LCU之一寫碼單元(CU)深度之一指示。
  28. 如請求項27之電腦可讀儲存媒體,其中為解碼該CU深度之該指示,該等指令使該一或多個處理器以解碼在一圖像參數集中之一CU深度值。
  29. 如請求項26之電腦可讀儲存媒體,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該等指令進一步使該一或多個處理器以:解碼包括該LCU之該第二區段的該訊框之一第二獨立可解碼部分;藉由該第一獨立可解碼部分來解碼一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配置;及藉由該第二獨立可解碼部分來解碼與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  30. 一種編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的方法,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於 該一或多個LCU以階層方式配置之複數個較小寫碼單元,該方法包含:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及指示該所判定細微度之一或多個語法元素。
  31. 如請求項30之方法,其中判定該細微度包括判定將藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度;且其中產生該位元串流以包括該一或多個語法元素包括產生該位元串流以包括指示一CU深度值的一或多個語法元素。
  32. 如請求項31之方法,其中產生該位元串流以包括指示該CU深度值之該一或多個語法元素包含包括指示該CU深度值的該一或多個語法元素在一圖像參數集中。
  33. 如請求項30之方法,該訊框之該獨立可解碼部分包含一 第一獨立可解碼部分,其中該方法進一步包含:產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段;藉由該第一獨立可解碼部分來指示一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配置;及藉由該第二獨立可解碼部分來指示與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  34. 如請求項33之方法,其中指示該四分樹結構之該第一部分包含:產生指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標;及產生指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標。
  35. 如請求項30之方法,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該方法進一步包含:產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段;指示用於該第一獨立可解碼部分之一量化參數的一改變;及與該第一獨立可解碼部分分開而指示用於該第二獨立可解碼部分之量化參數的一改變。
  36. 如請求項30之方法,其中產生一位元串流以包括該訊框之該獨立可解碼部分包含產生該獨立可解碼部分之一末 尾的一指示。
  37. 如請求項36之方法,其中產生該獨立可解碼部分之該末尾的該指示包含產生識別該獨立可解碼部分之該末尾的一個一位元旗標。
  38. 如請求項37之方法,其中該一位元旗標並非係針對具有比藉以分離以階層方式配置之該複數個較小寫碼單元之該細微度小的一細微度的寫碼單元而產生。
  39. 如請求項30之方法,其中指示該細微度之該一或多個語法元素係自指示該一或多個LCU之一最小寫碼單元大小的語法元素中分離。
  40. 如請求項30之方法,其中判定該細微度包含判定大於該訊框之一最小寫碼單元的一大小及小於該一或多個LCU之一大小的一細微度。
  41. 一種用於編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該裝置包含經組態以執行以下操作的一或多個處理器:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小寫碼單元之一細微度,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分; 使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及指示該所判定細微度之一或多個語法元素。
  42. 如請求項41之裝置,其中為判定該細微度,該一或多個處理器經組態以判定將藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度;且其中為產生該位元串流以包括該一或多個語法元素,該一或多個處理器經組態以產生指示一CU深度值的一或多個語法元素。
  43. 如請求項42之裝置,其中為產生指示該CU深度值之該一或多個語法元素,該一或多個處理器經組態以產生該位元串流以在一圖像參數集中包括該CU深度值。
  44. 如請求項41之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該一或多個處理器進一步經組態以執行以下操作:產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段;藉由該第一獨立可解碼部分來指示一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配置;及 藉由該第二獨立可解碼部分來指示與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  45. 如請求項44之裝置,其中為指示該四分樹結構之該第一部分,該一或多個處理器經組態以:產生指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標;及產生指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標。
  46. 如請求項41之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該一或多個處理器進一步經組態以執行以下操作:產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段;指示用於該第一獨立可解碼部分之一量化參數的一改變;及與該第一獨立可解碼部分分開而指示用於該第二獨立可解碼部分之量化參數的一改變。
  47. 如請求項41之裝置,其中為產生一位元串流以包括該訊框之該獨立可解碼部分,該一或多個處理器經組態以產生該獨立可解碼部分之一末尾的一指示。
  48. 如請求項47之裝置,其中為產生該獨立可解碼部分之該末尾的該指示,該一或多個處理器經組態以產生識別該獨立可解碼部分之該末尾的一個一位元旗標。
  49. 如請求項48之裝置,其中該一或多個處理器經組態以不 針對具有比藉以分離以階層方式配置之該複數個較小寫碼單元之該細微度小的一細微度的寫碼單元而產生該一位元旗標。
  50. 如請求項41之裝置,其中該裝置包含一行動器件。
  51. 一種用於編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框的裝置,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該裝置包含:用於判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小編碼單元之一細微度的構件,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;用於使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段的構件;用於產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段的構件;及用於產生一位元串流以包括該訊框之該獨立可解碼部分及指示該所判定細微度之一或多個語法元素的構件。
  52. 如請求項51之裝置,其中用於判定該細微度之該構件包括用於判定將藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度之構件;且 其中用於產生該位元串流以包括該一或多個語法元素之該構件包括用於產生該位元串流以包括指示一CU深度值的一或多個語法元素之構件。
  53. 如請求項52之裝置,其中用於產生該位元串流以包括指示該CU深度值之該一或多個語法元素之該構件包含用於包括指示該CU深度值的該一或多個語法元素在一圖像參數集中之構件。
  54. 如請求項51之裝置,該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,其中該裝置進一步包含:用於產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段的構件;用於藉由該第一獨立可解碼部分來指示一四分樹結構之一第一部分的構件,該第一部分識別較小寫碼單元的該階層式配置;及用於藉由該第二獨立可解碼部分來指示與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分的構件。
  55. 如請求項54之裝置,其中用於指示該四分樹結構之該第一部分之該構件包含:用於產生指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標之構件;及用於產生指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標之構件。
  56. 一種儲存指令之電腦可讀儲存媒體,該等指令在藉由一 或多個處理器執行時使一視訊編碼器件之該一或多個處理器經組態以編碼包含複數個區塊大小之寫碼單元的視訊資料之一訊框,該複數個區塊大小之寫碼單元包括一或多個最大寫碼單元(LCU),該一或多個LCU包括相對於該一或多個LCU以階層方式配置之複數個較小寫碼單元,該等指令使該一或多個處理器以:判定在形成該訊框之獨立可解碼部分時將藉以分離以階層方式配置之該複數個較小編碼單元之一細微度,其中該細微度指示該等區塊大小之寫碼單元之複數個大小之一相對大小,該等區塊大小之寫碼單元係用以將該訊框劃分該訊框之該等獨立可解碼部分;使用該所判定細微度分離一LCU以產生該LCU之一第一區段及該LCU之一第二區段;產生該訊框之一獨立可解碼部分以包括該LCU之該第一區段而不包括該LCU之該第二區段;及產生一位元串流以包括該訊框之該獨立可解碼部分及指示該所判定細微度之一或多個語法元素。
  57. 如請求項56之電腦可讀儲存媒體,其中為判定該細微度,該等指令使該一或多個處理器以判定將藉以分離以階層方式配置之該複數個較小寫碼單元之該一或多個LCU之一寫碼單元(CU)深度;且其中為產生該位元串流以包括該一或多個語法元素,該等指令使該一或多個處理器以產生該位元串流以包括指示一CU深度值的一或多個語法元素。
  58. 如請求項57之電腦可讀儲存媒體,其中為產生該位元串流以包括指示該CU深度值之該一或多個語法元素,該等指令使該一或多個處理器以包括指示該CU深度值的該一或多個語法元素在一圖像參數集中。
  59. 如請求項56之電腦可讀儲存媒體,其中該訊框之該獨立可解碼部分包含一第一獨立可解碼部分,且其中該等指令進一步使該一或多個處理器以:產生該訊框之一第二獨立可解碼部分以包括該LCU之該第二區段;藉由該第一獨立可解碼部分來指示一四分樹結構之一第一部分,該第一部分識別較小寫碼單元之該階層式配置;及藉由該第二獨立可解碼部分來指示與該四分樹分割結構之該第一部分分開的該四分樹結構之一第二部分。
  60. 如請求項59之電腦可讀儲存媒體,其中為指示該四分樹結構之該第一部分,該等指令使該一或多個處理器以:產生指示在該第一獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標;及產生指示在該第二獨立可解碼部分內之一寫碼單元劃分的一或多個分離旗標。
TW101100370A 2011-01-05 2012-01-04 在視訊寫碼中之訊框分離 TWI523540B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161430104P 2011-01-05 2011-01-05
US201161435098P 2011-01-21 2011-01-21
US201161454166P 2011-03-18 2011-03-18
US201161492751P 2011-06-02 2011-06-02
US13/341,368 US20120170648A1 (en) 2011-01-05 2011-12-30 Frame splitting in video coding

Publications (2)

Publication Number Publication Date
TW201234857A TW201234857A (en) 2012-08-16
TWI523540B true TWI523540B (zh) 2016-02-21

Family

ID=46380763

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101100370A TWI523540B (zh) 2011-01-05 2012-01-04 在視訊寫碼中之訊框分離

Country Status (9)

Country Link
US (1) US20120170648A1 (zh)
EP (1) EP2661889A1 (zh)
JP (2) JP2014506066A (zh)
KR (1) KR101547743B1 (zh)
CN (1) CN103299627B (zh)
AR (1) AR084787A1 (zh)
BR (1) BR112013017141A2 (zh)
TW (1) TWI523540B (zh)
WO (1) WO2012094342A1 (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106231335B (zh) 2010-04-13 2019-07-02 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
CN106067985B (zh) 2010-04-13 2019-06-28 Ge视频压缩有限责任公司 跨平面预测
KR102159896B1 (ko) 2010-04-13 2020-09-25 지이 비디오 컴프레션, 엘엘씨 샘플 배열 멀티트리 세부분할에서 계승
TWI678916B (zh) 2010-04-13 2019-12-01 美商Ge影像壓縮有限公司 樣本區域合倂技術
CN103416062A (zh) * 2011-01-07 2013-11-27 三星电子株式会社 能够执行双向预测和单向预测的视频预测方法及其装置、视频编码方法及其装置以及视频解码方法及其装置
US20130251022A1 (en) * 2011-06-10 2013-09-26 Telefonaktiebolaget L M Ericsson (Publ) Signaling of end of slices
US20130022108A1 (en) * 2011-06-30 2013-01-24 General Instrument Corporation Quantization parameter derivation from qp predictor
TW201315246A (zh) * 2011-09-27 2013-04-01 Sony Corp 圖像處理裝置及方法
KR20130050406A (ko) * 2011-11-07 2013-05-16 오수미 머지 모드에서의 움직임 정보 생성 방법
KR20130050403A (ko) * 2011-11-07 2013-05-16 오수미 인터 모드에서의 복원 블록 생성 방법
SG11201406086UA (en) * 2012-04-06 2014-11-27 Sony Corp Decoder and decoding method, as well as encoder and encoding method
US9813705B2 (en) 2012-04-26 2017-11-07 Qualcomm Incorporated Parameter set coding
TWI669952B (zh) 2012-09-18 2019-08-21 美商Vid衡器股份有限公司 使用圖塊及圖塊組的感興趣區域視訊編碼的方法及裝置
EP2887663B1 (en) 2012-09-29 2017-02-22 Huawei Technologies Co., Ltd. Method, apparatus and system for encoding and decoding video
US10038899B2 (en) * 2012-10-04 2018-07-31 Qualcomm Incorporated File format for video data
WO2014081261A1 (ko) * 2012-11-23 2014-05-30 인텔렉추얼 디스커버리 주식회사 움직임 정보 병합을 이용한 비디오 부호화/복호화 방법 및 장치
US10057590B2 (en) 2014-01-13 2018-08-21 Mediatek Inc. Method and apparatus using software engine and hardware engine collaborated with each other to achieve hybrid video encoding
US10142642B2 (en) * 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
CN105338281B (zh) 2014-06-27 2018-07-31 阿里巴巴集团控股有限公司 一种视频显示方法和装置
CN106664203B (zh) * 2014-08-07 2021-02-12 帝威视有限公司 用于保护结合独立编码的方格的单元位流的系统和方法
US20180091810A1 (en) * 2015-03-23 2018-03-29 Lg Electronics Inc. Method for processing video signal and device therefor
US10187640B2 (en) * 2015-09-01 2019-01-22 Mediatek Inc. Method of hard-limited packet size for video encoding
EP3363199B1 (en) * 2015-11-27 2021-05-19 MediaTek Inc. Method and apparatus of entropy coding and context modelling for video and image coding
US10212444B2 (en) 2016-01-15 2019-02-19 Qualcomm Incorporated Multi-type-tree framework for video coding
US11223852B2 (en) * 2016-03-21 2022-01-11 Qualcomm Incorporated Coding video data using a two-level multi-type-tree framework
CN107315535B (zh) * 2016-04-27 2019-09-20 北京京东尚科信息技术有限公司 信息处理方法和装置
CN115022625A (zh) * 2016-10-04 2022-09-06 有限公司B1影像技术研究所 图像数据编码/解码方法和计算机可读记录介质
CN117176946A (zh) * 2016-10-04 2023-12-05 有限公司B1影像技术研究所 图像编码/解码方法、记录介质和传输比特流的方法
US10986152B2 (en) * 2016-12-29 2021-04-20 Arris Enterprises Llc Method for dynamically managing content delivery
US10848788B2 (en) 2017-01-06 2020-11-24 Qualcomm Incorporated Multi-type-tree framework for video coding
WO2018172234A2 (en) * 2017-03-20 2018-09-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Advanced video data stream extraction and multi-resolution video transmission
CN112601084A (zh) * 2017-06-28 2021-04-02 华为技术有限公司 一种图像数据的编码、解码方法及装置
WO2019012555A1 (en) * 2017-07-10 2019-01-17 Sangra Nagender SYSTEM AND METHOD FOR VIDEO FILE ANALYSIS IN A SHORTCUT TEMPORARY FRAME
WO2019103491A1 (ko) * 2017-11-22 2019-05-31 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
EP3742403A4 (en) * 2018-01-19 2021-03-17 Panasonic Intellectual Property Corporation of America METHOD FOR CODING THREE-DIMENSIONAL DATA, METHOD FOR DECODING THREE-DIMENSIONAL DATA, DEVICE FOR CODING THREE-DIMENSIONAL DATA AND DEVICE FOR DECODING THREE-DIMENSIONAL DATA
KR102584502B1 (ko) * 2018-05-10 2023-10-04 삼성전자주식회사 영상의 부호화 및 복호화를 위한 영상의 분할 방법 및 장치
TW202015428A (zh) * 2018-08-19 2020-04-16 大陸商北京字節跳動網絡技術有限公司 擴展四叉樹分割的邊界處理
US11412260B2 (en) * 2018-10-29 2022-08-09 Google Llc Geometric transforms for image compression
WO2020143442A1 (en) * 2019-01-10 2020-07-16 Mediatek Inc. Methods and apparatuses of processing video data of out-of-bounds nodes
US11363306B2 (en) * 2019-04-05 2022-06-14 Comcast Cable Communications, Llc Methods, systems, and apparatuses for processing video by adaptive rate distortion optimization
CN111654947A (zh) * 2020-06-08 2020-09-11 浙江方大智控科技有限公司 基于物联网的太阳能灯控制系统及方法
CN111741555A (zh) * 2020-06-28 2020-10-02 浙江方大智控科技有限公司 适用于太阳能路灯控制系统的通讯器

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10300048B4 (de) * 2002-01-05 2005-05-12 Samsung Electronics Co., Ltd., Suwon Verfahren und Vorrichtung zur Bildcodierung und -decodierung
KR100624404B1 (ko) * 2002-01-05 2006-09-18 삼성전자주식회사 사람의 시각적 특성을 고려한 적응적 부호화 방법 및 장치
FI114679B (fi) * 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
US20090300692A1 (en) * 2008-06-02 2009-12-03 Mavlankar Aditya A Systems and methods for video streaming and display
PL3288268T3 (pl) * 2009-07-01 2019-11-29 Interdigital Vc Holdings Inc Sposoby i urządzenie do sygnalizacji predykcji wewnątrz-ramkowej dla dużych bloków do koderów i dekoderów wideo
US8654860B2 (en) * 2010-11-01 2014-02-18 Mediatek Inc. Apparatus and method for high efficiency video coding using flexible slice structure

Also Published As

Publication number Publication date
AR084787A1 (es) 2013-06-26
KR20130095324A (ko) 2013-08-27
US20120170648A1 (en) 2012-07-05
JP2015156648A (ja) 2015-08-27
TW201234857A (en) 2012-08-16
CN103299627A (zh) 2013-09-11
KR101547743B1 (ko) 2015-08-26
BR112013017141A2 (pt) 2016-09-20
JP5847970B2 (ja) 2016-01-27
WO2012094342A1 (en) 2012-07-12
EP2661889A1 (en) 2013-11-13
CN103299627B (zh) 2016-08-24
JP2014506066A (ja) 2014-03-06

Similar Documents

Publication Publication Date Title
TWI523540B (zh) 在視訊寫碼中之訊框分離
US11943484B2 (en) Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
TWI569633B (zh) 補充增強資訊訊息寫碼
TWI511572B (zh) 具有包含多個編碼圖案區段之網路提取層之視訊寫碼
EP3123726B1 (en) Generic use of hevc sei messages for multi-layer codecs
TWI520583B (zh) 用於解碼及編碼視訊資料之方法、器件及電腦可讀儲存媒體
TWI552574B (zh) 用於高效率視訊寫碼(hevc)及延伸之視訊參數集合
RU2576590C2 (ru) Вывод позиции в порядке сканирования последнего значимого коэффициента преобразования при кодировании видеосигнала
TWI527465B (zh) 已寫碼區塊旗標寫碼
TWI481237B (zh) 在視訊寫碼中分組經旁路寫碼語法元素
TW201830965A (zh) 用於時間延展性支持之修改適應性迴路濾波器時間預測
CN114097209A (zh) 视频译码中的存取单元中的适应性参数集
TW201336312A (zh) 在視訊寫碼中波前平行處理之子流
TW201320754A (zh) 支援內側景觀運動預測模式之以多重景觀寫碼為基礎的三維視訊寫碼的編解碼器
CN115462073A (zh) 视频译码中的参数集语法元素和变量
TW202103496A (zh) 用於適應性迴路濾波器之剪切值計算之簡化
TWI679880B (zh) 用於載送視訊寫碼延伸之傳輸串流
TW202110180A (zh) 跨逐線掃描切片之適應性迴圈濾波