TWI597975B - 視訊解碼裝置 - Google Patents

視訊解碼裝置 Download PDF

Info

Publication number
TWI597975B
TWI597975B TW105134471A TW105134471A TWI597975B TW I597975 B TWI597975 B TW I597975B TW 105134471 A TW105134471 A TW 105134471A TW 105134471 A TW105134471 A TW 105134471A TW I597975 B TWI597975 B TW I597975B
Authority
TW
Taiwan
Prior art keywords
unit
coding
coding unit
bit string
depth
Prior art date
Application number
TW105134471A
Other languages
English (en)
Other versions
TW201701675A (zh
Inventor
金壹求
西芹瓦汀
Original Assignee
三星電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三星電子股份有限公司 filed Critical 三星電子股份有限公司
Publication of TW201701675A publication Critical patent/TW201701675A/zh
Application granted granted Critical
Publication of TWI597975B publication Critical patent/TWI597975B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1883Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]

Description

視訊解碼裝置
本發明是關於分別以算術編碼及算術解碼做視訊編碼及視訊解碼。
隨著用於再生以及儲存高解析度或高品質視訊內容之硬體正被開發以及供應,對用於有效地對高解析度或高品質視訊內容做編碼或解碼之視訊編解碼器的需要增加。在習知視訊編解碼器中,視訊是基於具有預定大小之巨集區塊根據有限編碼方法(limited encoding method)而編碼。
藉由使用頻率轉換方法而將空間域之影像資料轉換為頻率區域之係數。藉由將影像劃分為具有預定大小之多個區塊並執行離散餘弦轉換(discrete cosine transformation;DCT)轉換以快速操作頻率轉換,視訊編解碼器以區塊為單位而對頻率係數做編碼。與空間域之影像資料相比,頻率區域之係數較容易被壓縮。特定言之,空間域中之影像之像素值被表示為預測誤差,因此,若對預測誤差執行頻率轉換,則大量資料可轉換為0。視訊編解碼器將連續且重複產生之資料轉換為小資料以減少資料量。
本發明提供一種用於藉由將符號分類為首碼位元串及尾碼位元串而對視訊執行算術編碼及算術解碼之方法及裝置。
根據本發明之一態樣,提供一種經由符號解碼來對視訊做解碼之方法,所述方法包含:自所接收之位元串流解析影像區塊之符號;基於根據當前區塊之大小而判定之臨限值,將當前符號分類為首碼位元串及尾碼位元串;藉由使用針對首碼位元串及尾碼位元串中之每一者判定之算術解碼方法來執行算術解碼;藉由使用針對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化;以及藉由使用經由算術解碼及逆二元化而復原之當前符號來對當前區塊執行逆轉換及預測而復原影像區塊。
執行逆二元化的步驟可包含:藉由根據針對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化而復原符號之首碼區域及尾碼區域。
執行算術解碼之步驟可包含:根據位元之位置對首碼位元串執行用於判定內容脈絡模型化的算術解碼;以及在旁路模式中對尾碼位元串執行省略內容脈絡模型化的算術解碼。
執行算術解碼之步驟可包含:當符號為轉換係數之最終係數位置資訊時,藉由使用先前分配給首碼位元串之位元之位置的預定索引之內容脈絡來執行算術解碼。
當前符號可包含當前區塊之畫面內預測模式及最終係數位置資訊中之至少一者。
二元化方法可更包含自下列二元化方法所組成之群組選擇之至少一者:一元二元化、截斷一元二元化、指數哥倫布二元化以及固定長度二元化。
本發明提供一種視訊編碼方法,經由符號編碼來對視訊做編碼,所述方法包含以下步驟。藉由對影像區塊執行預測及轉換來產生符號。基於根據當前區塊之大小而判定的臨限值,將當前符號分類為首碼區域及尾碼區域;藉由使用針對首碼區域及尾碼區域中之每一者判定之二元化方法來產生首碼位元串及尾碼位元串。藉由使用針對首碼位元串及尾碼位元串中之每一者判定之算術編碼方法來執行符號編碼。以位元串流之形式輸出經由符號編碼而產生之位元串。
執行符號編碼之步驟可包含:藉由根據位元之位置使用用於執行內容脈絡模型化的算術編碼方法而對首碼位元串執行符號編碼;以及藉由在旁路模式中使用省略內容脈絡模型化的算術編碼方法而對尾碼位元串執行符號編碼。
執行算術編碼之步驟可包含:當符號為轉換係數之最終係數位置資訊時,藉由使用先前分配給首碼位元串之位元之位置的預定索引之內容脈絡來執行算術編碼。
當前符號可包含當前區塊之畫面內預測模式及最終係數位置資訊中之至少一者。
二元化方法可更包含自下列二元化方法所組成之群組選擇之至少一者:一元二元化、截斷一元二元化、指數哥倫布二元化以及固定長度二元化。
本發明提供一種視訊解碼裝置,用於經由符號解碼來對視訊做解碼,所述裝置包含:解析器,用於自所接收之位元串流解析影像區塊之符號;符號解碼器,用於基於根據當前區塊之大小而判定之臨限值,將當前符號分類為首碼位元串及尾碼位元串,並藉由使用針對首碼位元串及尾碼位元串中之每一者判定之算術解碼方法來執行算術解碼,且接著藉由使用針對首碼位元串及尾碼位元串中之每一者而判定之二元化方法來執行逆二元化;以及影像復原單元,用於藉由使用經由算術解碼及逆二元化而復原之當前符號來對當前區塊執行逆轉換及預測而復原影像區塊。
本發明提供一種視訊編碼裝置,用於經由符號編碼來對視訊做編碼,所述裝置包含:影像編碼器,用於藉由對影像區塊執行預測及轉換來產生符號;符號編碼器,用於基於根據當前區塊之大小而判定之臨限值,將當前符號分類為首碼區域及尾碼區域,並藉由使用針對首碼區域及尾碼區域中之每一者判定之二元化方法來產生首碼位元串及尾碼位元串,且接著藉由使用針對首碼位元串及尾碼位元串中之每一者判定之算術編碼方法來執行符號編碼;以及位元串流輸出單元,其用於以位元串流之形式輸出經由符號編碼而產生之位元串。
本發明提供一種電腦可讀記錄媒體,所述電腦可讀記錄媒體上體現有用於執行經由符號解碼來對視訊做解碼之方法的電腦程式。
本發明提供一種電腦可讀記錄媒體,所述電腦可讀記錄媒體上體現有用於執行經由符號編碼來對視訊做編碼之方法的電腦程式。
藉由參考附圖詳細描述本發明之例示性實施例,本發明之上述及其他特徵以及優點將變得更顯而易見。
下文中,將參考附圖更全面地描述本發明,附圖中展示了本發明之例示性實施例。當例如「……中之至少一者」之表達位於一列元件之前時,修飾整列元件且不是修飾該列元件中之個別元件。
將參考圖1至圖6描述根據本發明之一實施例的涉及算術編碼的視訊編碼方法以及包括算術解碼的視訊解碼方法。且,將參考圖7至圖19描述根據本發明之一實施例的基於具有樹狀結構之編碼單位,涉及算術編碼的視訊編碼方法以及包括算術解碼視訊解碼方法。下文中,「影像」可指視訊或影片之靜態影像,亦即,視訊自身。
下文中,將參考圖1至圖6描述根據本發明之一實施例的基於畫面內預測模式中之預測方法的視訊編碼方法及視訊解碼方法。
圖1為根據本發明之一實施例之視訊編碼裝置10的方塊圖。
視訊編碼裝置10可經由畫面內預測/畫面間預測、轉換、量化以及符號編碼而對空間域之視訊資料做編碼。下文中,將詳細描述視訊編碼裝置10經由算術編碼來對藉由畫面內預測/畫面間預測、轉換、以及量化而產生之符號(symbol)做編碼時發生之操作。
視訊編碼裝置10包含影像編碼器12、符號編碼器14以及位元串流輸出單元16。
視訊編碼裝置10可將視訊之影像資料分割為多個資料單位並根據資料單位而對影像資料做編碼。資料單位可為正方形形狀或矩形形狀,或者可為任意的幾何形狀,但是資料單位不限於具有預定大小之資料單位。根據基於具有樹狀結構之編碼單位之視訊編碼方法,資料單位可為最大編碼單位、編碼單位、預測單位、轉換單位等。將參考圖7至圖19描述根據本發明之一實施例之算術編碼/解碼方法用於基於具有樹狀結構之編碼單位之視訊編碼/解碼方法中的實例。
為便於描述,將詳細描述「區塊」之視訊編碼方法,「區塊」為一種資料單位。然而,根據本發明之各種實施例之視訊編碼方法不限於「區塊」之視訊編碼方法,且可用於各種資料單位。
影像編碼器12對影像區塊執行諸如畫面內預測/畫面間預測、轉換或量化之操作以產生符號。
符號編碼器14基於根據當前區塊之大小而判定之臨限值將當前符號分類為首碼區域及尾碼區域,以對根據區塊而產生之符號中之當前符號做編碼。符號編碼器14可判定用於基於當前區塊之寬度及高度中之至少一者而將當前符號分類為首碼區域及尾碼區域的臨限值。
符號編碼器14可針對首碼區域及尾碼區域中之每一者判定符號編碼方法,並根據所述符號編碼方法而對首碼區域及尾碼區域中之每一者做編碼。
符號編碼可劃分為用於將符號轉換為位元串之二元化程序以及用於對所述位元串執行基於內容脈絡(context-based)之算術編碼的算術編碼程序。符號編碼器14可針對符號之首碼區域及尾碼區域中之每一者判定二元化方法,並根據所述二元化方法而對首碼區域及尾碼區域中之每一者執行二元化。首碼位元串及尾碼位元串可分別自首碼區域及尾碼區域產生。
或者,符號編碼器14可針對符號之首碼位元串及尾碼位元串中之每一者判定算術編碼方法,並根據所述算術編碼方法而對首碼位元串及尾碼位元串中之每一者執行算術編碼。
且,符號編碼器14可針對符號之首碼區域及尾碼區域中之每一者判定二元化方法,並根據所述二元化方法對首碼區域及尾碼區域中之每一者執行二元化,且可針對符號之首碼位元串及尾碼位元串中之每一者判定算術編碼方法,並根據所述算術編碼方法對首碼位元串及尾碼位元串執行算術編碼。
根據本發明之一實施例之符號編碼器14可針對首碼區域及尾碼區域中之每一者判定二元化方法。針對首碼區域及尾碼區域判定之二元化方法可彼此不同。
符號編碼器14可針對首碼位元串及尾碼位元串中之每一者判定算術編碼方法。針對首碼位元串及尾碼位元串判定之算術編碼方法可彼此不同。
因此,符號編碼器14可僅在符號解碼程序之二元化程序中藉由使用不同方法而對首碼區域及尾碼區域進行二元化,或者可僅在算術編碼程序中藉由使用不同方法而對首碼位元串及尾碼位元串做編碼。且,符號編碼器14可在二元化及算術編碼兩個程序中藉由使用不同方法而對首碼區域(首碼位元串)及尾碼區域(尾碼位元串)做編碼。
所選擇之二元化方法可為下列二元化方法中之至少一者:一般二元化(general binarization)、一元二元化(unary binarization)、截斷一元二元化(truncated unary binarization)、指數哥倫布二元化(exponetial golomb binarization)以及固定長度二元化(fixed length binarization)方法。
符號編碼器14可藉由根據位元之位置對首碼位元串執行用於執行內容脈絡模型化(context modeling)的算術編碼以及在旁路模式中對尾碼位元串執行省略內容脈絡模型化的算術編碼來執行符號編碼。
符號編碼器14可關於包含畫面內預測模式以及轉換係數之最終係數位置資訊中之至少一者的符號對首碼區域及尾碼區域單獨執行符號編碼。
符號編碼器14亦可藉由使用先前分配給首碼位元串之預定索引之內容脈絡來執行算術編碼。舉例而言,當符號為轉換係數之最終係數位置資訊時,符號編碼器14可藉由使用先前分配給首碼位元串之位元之每一位置的預定索引之內容脈絡來執行算術編碼。
位元串流輸出單元16以位元串流之形式輸出經由符號編碼而產生之位元串。
視訊編碼裝置10可對視訊之區塊之符號執行算術編碼並輸出符號。
視訊編碼裝置10可包含用於控制影像編碼器12、符號編碼器14以及位元串流輸出單元16三者之中央處理器(未圖示)。或者,影像編碼器12、符號編碼器14以及位元串流輸出單元16可由分別安裝於三者中之處理器(未圖示)來操作,且整個視訊編碼裝置10可藉由系統地操作所述處理器(未圖示)來操作。或者,影像編碼器12、符號編碼器14以及位元串流輸出單元16可由視訊編碼裝置10之外部處理器(未圖示)控制。
視訊編碼裝置10可包含用於儲存輸入至影像編碼器12、符號編碼器14及位元串流輸出單元16或自影像編碼器12、符號編碼器14及位元串流輸出單元16輸出之資料之至少一個資料儲存單元(未圖示)。視訊編碼裝置10可包含用於控制儲存在資料儲存單元(未圖示)中之資料之輸入/輸出的記憶體控制器(未圖示)。
視訊編碼裝置10藉由與內部視訊編碼處理器或外部視訊編碼處理器鏈接來操作以執行包含預測及轉換之視訊編碼,藉此輸出視訊編碼之結果。視訊編碼裝置10之內部視訊編碼處理器不僅可藉由使用單獨的處理器來執行基礎視訊編碼操作,而且可藉由將視訊編碼處理模組包含於視訊編碼裝置10、中央操作裝置或圖形操作裝置中來執行基礎視訊編碼操作。
圖2為根據本發明之一實施例之視訊解碼裝置20的方塊圖。
視訊解碼裝置20可經由解析、符號解碼、逆量化、逆轉換、畫面內預測/運動補償等對由視訊編碼裝置10編碼之視訊資料做解碼,並復原接近空間域之原始視訊資料的視訊資料。下文中,將描述視訊解碼裝置20對來自位元串流之所解析之符號執行算術解碼以復原符號之程序。
視訊解碼裝置20包含解析器22、符號解碼器24以及影像復原單元26。
視訊解碼裝置20可接收包含視訊之經編碼之資料的位元串流。解析器22可自所述位元串流解析影像區塊之符號。
解析器22可自位元串流解析關於視訊之區塊經由算術編碼而編碼之符號。
解析器22可自所接收之位元串流解析包含視訊之區塊之畫面內預測模式及轉換係數之最終係數位置資訊等的符號。
符號解碼器24判定用於將當前符號分類為首碼位元串及尾碼位元串的臨限值。符號解碼器24可判定用於基於當前區塊之大小(亦即,當前區塊之寬度及高度中之至少一者)而將當前符號分類為首碼位元串及尾碼位元串的臨限值。符號解碼器24針對首碼位元串及尾碼位元串中之每一者判定算術解碼方法。符號解碼器24藉由使用針對首碼位元串及尾碼位元串中之每一者判定之算術解碼方法而執行符號解碼。
針對首碼位元串及尾碼位元串判定之算術解碼方法可彼此不同。
符號解碼器24可針對符號之首碼位元串及尾碼位元串中之每一者判定二元化方法。因此,符號解碼器24可藉由使用二元化方法而對符號之首碼位元串執行逆二元化。針對首碼位元串及尾碼位元串判定之二元化方法可彼此不同。
且,符號解碼器24可藉由使用針對符號之首碼位元串及尾碼位元串中之每一者判定之算術解碼方法而執行算術解碼。並且可藉由使用針對經由算術解碼而產生之首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化。
因此,符號解碼器24可僅在符號解碼程序之算術解碼程序中藉由使用不同方法而對首碼位元串及尾碼位元串做解碼,或者可僅在逆二元化程序中藉由使用不同方法而執行逆二元化。且,符號解碼器24可在算術解碼及逆二元化兩個程序中藉由使用不同方法而對首碼位元串及尾碼位元串做解碼。
針對符號之首碼位元串及尾碼位元串中之每一者判定之二元化方法不僅可為一般二元化方法,而且可為下列二元化方法中之至少一者:一元二元化、截斷一元二元化、指數哥倫布二元化以及固定長度二元化方法。
符號解碼器24可根據位元之位置而對首碼位元串執行用於執行內容脈絡模型化的算術解碼。符號解碼器24可在旁路模式中對尾碼位元串使用省略內容脈絡模型化的算術解碼方法。因此,符號解碼器24可經由對符號之首碼位元串及尾碼位元串中之每一者執行之算術解碼來執行符號解碼。
符號編碼器24可對包含畫面內預測模式以及轉換係數之最終係數位置資訊中之至少一者的符號的首碼位元串及尾碼位元串執行算術解碼。
當符號為關於轉換係數之最終係數位置之資訊時,符號解碼器24可藉由使用根據首碼位元串之位元之位置而預先分配之預定索引之內容脈絡來執行算術解碼。
影像復原單元26可藉由對首碼位元串及尾碼位元串中之每一者執行算術解碼及逆二元化而復原符號之首碼區域及尾碼區域。影像復原單元26可藉由合成符號之首碼區域及尾碼區域而復原符號。
影像復原單元26藉由使用經由算術解碼及逆二元化而復原之當前符號來對當前區塊執行逆轉換及預測。影像復原單元26可藉由使用影像區塊中之每一者之對應符號來執行諸如逆量化、逆轉換或畫面內預測/運動補償之操作而復原影像區塊。
根據本發明之一實施例之視訊解碼裝置20可包含用於控制解析器22、符號解碼器24以及影像復原單元26三者之中央處理器(未圖示)。或者,解析器22、符號解碼器24以及影像復原單元26可由分別安裝於三者中之處理器(未圖示)來操作,且整個視訊解碼裝置20可藉由系統地操作所述處理器(未圖示)來操作。或者,解析器22、符號解碼器24以及影像復原單元26可由視訊解碼裝置20之外部處理器(未圖示)控制。
視訊解碼裝置20可包含用於儲存輸入至解析器22、符號解碼器24以及影像復原單元26或自解析器22、符號解碼器24以及影像復原單元26輸出之資料之至少一個資料儲存單元(未圖示)。視訊解碼裝置20可包含用於控制儲存在資料儲存單元(未圖示)中之資料之輸入/輸出的記憶體控制器(未圖示)。
視訊解碼裝置20藉由與內部視訊解碼處理器或外部視訊解碼處理器鏈接而操作以執行包含逆轉換之視訊解碼。視訊解碼裝置20之內部視訊解碼處理器不僅可藉由使用單獨的處理器來執行基礎視訊解碼操作,而且可藉由將視訊解碼處理模組包含於視訊解碼裝置20、中央操作裝置或圖形操作裝置中來執行基礎視訊解碼操作。
基於內容脈絡之適應性二進位算術編碼(Context-based adaptive binary arithmetic coding;CABAC)廣泛用作用於符號編碼/解碼之基於內容脈絡之算術編碼/解碼方法。根據基於內容脈絡之算術編碼/解碼,符號位元串之每一位元可為內容脈絡之二進位位元(bin),且每一位元之位置可映射至二進位位元索引。位元串之長度(亦即,二進位位元之長度)可根據符號值之大小而變化。需要進行判定符號之內容脈絡的內容脈絡模型化,以執行基於內容脈絡之算術編碼/解碼。內容脈絡根據符號位元串之位元之位置來更新,亦即,在每一二進位位元索引中更新,從而執行內容脈絡模型化,且因此需要複雜的操作程序。
根據參考圖1及圖2描述之視訊編碼裝置10及視訊解碼裝置20,符號被分類為首碼區域及尾碼區域,且與首碼區域相比,可將相對簡單之二元化方法用於尾碼區域。且,對首碼位元串執行經由內容脈絡模型化而進行之算術編碼/解碼,且並不對尾碼位元串執行內容脈絡模型化,且因此可減輕基於內容脈絡之算術編碼/解碼之操作量的負擔。因此,視訊編碼裝置10及視訊解碼裝置20可藉由以下方式而提高符號編碼/解碼程序之效率:對尾碼區域或尾碼位元串執行操作負擔量相對小之二元化方法,或者在符號編碼/解碼之基於內容脈絡之算術編碼/解碼期間,省略內容脈絡模型化。
下文中,將描述可由視訊編碼裝置10及視訊解碼裝置20執行之算術編碼之各種實施例。
圖3及圖4為用於描述根據本發明之一實施例藉由根據預定臨限值而將符號分類為首碼位元串及尾碼位元串來進行算術編碼之圖式。
參考圖3,將詳細描述根據本發明之一實施例的對符號之最終係數位置資訊執行符號編碼之程序。最終係數位置資訊為表示區塊之轉換係數中之非0最終係數的位置的符號。由於區塊之大小被定義為寬度及高度,因此最終係數位置資訊可由二維座標(亦即,在寬度方向上之x座標以及在高度方向上之y座標)表示。為便於描述,圖3所示為在區塊之寬度為w時對最終係數位置資訊中之寬度方向上之x座標執行符號編碼的狀況。
最終係數位置資訊之x座標之範圍在區塊之寬度內,且因此最終係數位置資訊之x座標等於0或大於0且等於w-1或小於w-1。對於符號之算術編碼,可基於預定臨限值th將符號分類為首碼區域及尾碼區域。因此,基於經由內容脈絡模型化而判定之內容脈絡,可對首碼區域被二元化之首碼位元串執行算術編碼。且,在省略了內容脈絡模型化之旁路模式中,可對尾碼區域被二元化之尾碼位元串執行算術編碼。
此處,可基於區塊之寬度w來判定用於將符號分類為首碼區域及尾碼區域之臨限值th。舉例而言,可將臨限值th判定為(w/2)-1,從而將位元串分為兩份(臨限值判定公式1)。或者,區塊之寬度w一般為2的平方,且因此可基於寬度w之對數值來判定臨限值th(臨限值判定公式2)。 <臨限值判定公式1> th = (w/2) – 1; <臨限值判定公式2> th = (log2w << 1) – 1。
在圖3中,根據臨限值判定公式1,當區塊之寬度w為8時,公式給出臨限值th = (8/2) - 1 = 3。因此,在最終係數位置資訊之x座標中,3可分類為首碼區域,而除3之外之其餘值可分類為尾碼區域。可根據針對首碼區域及尾碼區域中之每一者判定之二元化方法而對首碼區域及尾碼區域進行二元化。
在當前最終係數位置資訊之x座標N為5時,最終係數位置資訊之x座標可按照N = th + 2 = 3 + 2分類。換言之,在最終係數位置資訊之x座標中,3可分類為首碼區域,而2可分類為尾碼區域。
根據本發明之一實施例,可分別根據針對首碼區域及尾碼區域判定之不同二元化方法而對首碼區域及尾碼區域進行二元化。舉例而言,可根據一元二元化方法而對首碼區域進行二元化,而可根據一般二元化方法而對尾碼區域進行二元化。
因此,在根據一元二元化方法對3進行二元化之後,首碼位元串32「0001」可自首碼區域產生,且在根據一般二元化方法對2進行二元化之後,尾碼位元串34「010」可自尾碼區域產生。
且,可經由內容脈絡模型化而對首碼位元串32「0001」執行基於內容脈絡之算術編碼。因此,可針對首碼位元串32「0001」中之每一二進位位元判定內容脈絡索引。
在不執行內容脈絡模型化之旁路模式中,可對尾碼位元串34「010」執行算術編碼。假設在旁路模式中,每一二進位位元之內容脈絡為相等機率狀態,亦即,內容脈絡為50%,則可在不執行內容脈絡模型化之情況下執行算術編碼。
因此,可對首碼位元串32「0001」及尾碼位元串34「010」中之每一者執行基於內容脈絡之算術編碼,以完成關於當前最終係數位置資訊之x座標N之符號編碼。
儘管已描述經由二元化及算術編碼來執行符號編碼之實施例,但是可用同一方式執行符號解碼。換言之,可基於區塊之寬度w將所解析之符號位元串分類為首碼位元串及尾碼位元串,可經由內容脈絡模型化而對首碼位元串32執行算術解碼,且可在不執行內容脈絡模型化之情況下對尾碼位元串34執行算術解碼。在藉由使用一元二元化方法而進行算術解碼之後,可對首碼位元串32執行逆二元化,且可復原首碼區域。且,在藉由使用一般二元化方法而進行算術編碼之後,可對尾碼位元串34執行逆二元化,且因此可復原尾碼區域。可藉由合成所復原之首碼區域及尾碼區域而復原符號。
儘管已描述將一元二元化方法用於首碼區域(首碼位元串)並且將一般二元化方法用於尾碼區域(尾碼位元串)之實施例,但是二元化方法不限於此。或者,可將截斷一元二元化方法用於首碼區域(首碼位元串),且將固定長度二元化方法用於尾碼區域(尾碼位元串)。
儘管僅描述與區塊之寬度方向上之最終係數位置資訊相關之實施例,但是亦可使用與區塊之高度方向上之最終係數位置資訊相關之實施例。
且,雖然不需要對尾碼位元串執行內容脈絡模型化以藉由使用具有固定機率之內容脈絡來執行算術編碼,但是需要對首碼位元串執行可變內容脈絡模型化。可根據區塊之大小來判定待對首碼位元串執行之內容脈絡模型化。 <內容脈絡映射表>
在內容脈絡映射表中,每一編號之位置對應於首碼位元串之二進位位元索引,且編號表示待用於對應位元之位置處之內容脈絡索引。為便於描述,舉例而言,在4×4區塊中,首碼位元串包括總共四個位元,且當k為0、1、2及3時,根據內容脈絡映射表,針對第k二進位位元索引判定內容脈絡索引0、1、2及2,且因此可執行基於內容脈絡模型化之算術編碼。
圖4所示為畫面內預測模式包含分別指示亮度區塊及色度區塊之畫面內預測方向之亮度畫面內模式及色度畫面內模式的實施例。當畫面內預測模式為6時,根據一元二元化方法而產生符號位元串40「0000001」。在此狀況下,可經由內容脈絡模型化而對畫面內預測模式之符號位元串40之第一位元「0」執行算術編碼,且可在旁路模式中對符號位元串40之其餘位元45「000001」執行算術編碼。換言之,符號位元串40之第一位元41對應於首碼位元串,而符號位元串40之其餘位元45對應於尾碼位元串。
可根據區塊之大小或區塊集合之大小來判定符號位元串40中經由內容脈絡模型化而在算術編碼中編碼為首碼位元串之位元之數目,以及符號位元串40中在旁路模式中在算術編碼中編碼為尾碼位元串之位元之數目。舉例而言,對於64×64區塊,可僅對畫面內預測模式之位元串中之第一位元執行算術編碼,且可在旁路模式中對其餘位元執行算術編碼。對於具有其他大小之區塊,可在旁路模式中對畫面內預測模式之位元串中之所有位元執行算術編碼。
一般而言,與關於接近符號位元串之最高有效位元(most significant bit, MSB)之位元的資訊相比,關於接近最低有效位元(least significant bit, LSB)之位元的資訊的重要性相對較低。因此,即使存在操作量之負擔,關於接近MSB之首碼位元串,視訊編碼裝置10及視訊解碼裝置20仍可根據具有相對高之準確度之二元化方法來選擇算術編碼方法,且,關於接近LSB之尾碼位元串,可根據能夠執行簡單操作之二元化方法來選擇算術編碼方法。且,關於內容脈絡模型化,視訊編碼裝置10及視訊解碼裝置20可選擇基於內容脈絡模型化之算術編碼方法,且,關於接近LSB之尾碼位元串,可選擇不執行內容脈絡模型化之算術編碼方法。
在上文之描述中,已參考圖3描述藉由使用不同方法來對轉換係數之最終係數位置資訊之首碼位元串及尾碼位元串執行二元化之實施例。且,已參考圖4描述藉由使用不同方法來對畫面內預測模式之位元串中之首碼位元串及尾碼位元串執行算術編碼之實施例。
然而,根據本發明之各種實施例,使用針對首碼位元串及尾碼位元串單獨判定之二元化/算術編碼方法或使用不同二元化/算術編碼方法之符號編碼方法不限於參考圖3及圖4描述之實施例,且各種二元化/算術編碼方法可用於各種符號。
圖5為用於描述根據本發明之一實施例之視訊編碼方法的流程圖。
在操作步驟51中,藉由對影像區塊執行預測及轉換來產生符號。
在操作步驟53中,基於根據當前區塊之大小而判定之臨限值,將當前符號分類為首碼區域及尾碼區域。
在操作步驟55中,藉由使用針對符號之首碼區域及尾碼區域單獨判定之二元化方法來產生首碼位元串及尾碼位元串。
在操作步驟57中,藉由使用針對首碼位元串及尾碼位元串單獨判定之算術編碼方法來執行符號編碼。
在操作步驟59中,以位元串流之形式輸出經由符號編碼而產生之位元串。
在操作步驟57中,可藉由根據位元之位置使用用於執行內容脈絡模型化之算術編碼方法來對首碼位元串執行符號編碼;且亦可藉由在旁路模式中使用省略內容脈絡模型化之算術編碼方法來對尾碼位元串執行符號編碼。
在操作步驟57中,當符號為轉換係數之最終係數位置資訊時,可藉由使用先前分配給首碼位元串之位元之位置的預定索引之內容脈絡來執行算術編碼。
圖6為用於描述根據本發明之一實施例之視訊解碼方法的流程圖。
在操作步驟61中,自所接收之位元串流解析影像區塊之符號。
在操作步驟63中,基於根據當前區塊之大小而判定之臨限值,將當前符號分類為首碼位元串及尾碼位元串。
在操作步驟65中,藉由使用針對當前符號之首碼位元串及尾碼位元串中之每一者判定之算術解碼方法來執行算術解碼。
在操作步驟67中,在算術解碼之後,藉由使用針對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化。
可藉由使用針對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化而復原符號之首碼區域及尾碼區域。
在操作步驟69中,可藉由使用經由算術解碼及逆二元化而復原之當前符號對當前區塊執行逆轉換及預測來復原影像區塊。
在操作步驟65中,可對首碼位元串執行用於根據位元之位置而判定內容脈絡模型化之算術解碼,且可在旁路模式中對尾碼位元串執行省略內容脈絡模型化之算術解碼。
在操作步驟65中,當符號為轉換係數之最終係數位置資訊時,可藉由使用先前分配給首碼位元串之位元之位置的預定索引之內容脈絡來執行算術解碼。
在根據本發明之一實施例之視訊編碼裝置10以及根據本發明之另一實施例之視訊解碼裝置20中,視訊資料分割而成之區塊分割為具有樹狀結構之編碼單位,預測單位用於對所述編碼單位執行畫面內預測,且轉換單位用於轉換所述編碼單位。
下文中,將描述基於具有樹狀結構之編碼單位、預測單位及轉換單位的對視訊編碼方法及裝置,以及基於具有樹狀結構之編碼單位、預測單位及轉換單位的視訊解碼方法及裝置。
圖7為根據本發明之一實施例的基於具有樹狀結構之編碼單位的視訊編碼裝置100的方塊圖。
涉及基於具有樹狀結構之編碼單位之視訊預測的視訊編碼裝置100包含最大編碼單位分割器110、編碼單位判定器120以及輸出單元130。為便於描述,涉及基於具有樹狀結構之編碼單位之視訊預測的視訊編碼裝置100將稱作視訊編碼裝置100。
最大編碼單位分割器110可基於影像之當前圖像之最大編碼單位來分割當前圖像。若當前圖像大於最大編碼單位,則當前圖像之影像資料可分割為至少一個最大編碼單位。根據本發明之一實施例的最大編碼單位可為大小為32×32、64×64、128×128、256×256等之資料單位,其中資料單位之形狀是寬度以及長度為2的平方之正方形。影像資料可根據至少一個最大編碼單位而輸出至編碼單位判定器120。
根據本發明之一實施例的編碼單位可藉由最大大小以及深度來表徵。深度表示編碼單位自最大編碼單位在空間上分割之次數,且隨著深度加深,根據深度之較深編碼單位可自最大編碼單位分割為最小編碼單位。最大編碼單位之深度為最上層深度,且最小編碼單位之深度為最下層深度。由於對應於每一深度之編碼單位的大小隨著最大編碼單位之深度加深而減小,因此對應於較上層深度之編碼單位可包含對應於較下層深度的多個編碼單位。
如上文所述,當前圖像之影像資料根據編碼單位之最大大小分割為最大編碼單位,且最大編碼單位中的每一者可包含根據深度而分割的較深編碼單位。由於根據本發明之一實施例的最大編碼單位是根據深度來分割,因此包含於最大編碼單位中之空間域的影像資料可根據深度而階層式分類。
限制最大編碼單位之高度以及寬度階層式分割之總次數的編碼單位之最大深度以及最大大小可為預定的。
編碼單位判定器120對藉由根據深度來分割最大編碼單位之區域而獲得的至少一個分割區域做編碼,並判定深度以根據所述至少一個分割區域輸出最終編碼之影像資料。換言之,編碼單位判定器120藉由根據當前圖像之最大編碼單位來對根據深度之較深編碼單位中之影像資料做編碼以及選擇具有最小編碼誤差的深度來判定經編碼之深度。所判定之經編碼之深度以及根據所判定之經編碼之深度的經編碼之影像資料輸出至輸出單元130。
基於對應於等於或低於最大深度之至少一個深度的較深編碼單位而對最大編碼單位中之影像資料做編碼,且基於較深編碼單位中的每一者而比較對影像資料做編碼之結果。可在比較較深編碼單位之編碼誤差之後選擇具有最小編碼誤差的深度。可針對每一最大編碼單位選擇至少一個經編碼之深度。
隨著編碼單位根據深度而階層式分割,且隨著編碼單位之數目增大,最大編碼單位的大小被分割。且,即使編碼單位對應於一個最大編碼單位中之同一深度,仍藉由單獨量測每一編碼單位之影像資料的編碼誤差而判定是否將對應於同一深度之編碼單位中的每一者分割為較下層深度。因此,即使當影像資料包含於一個最大編碼單位中時,影像資料仍根據深度分割為區域,且編碼誤差可根據此一個最大編碼單位中之區域而不同,且因此經編碼之深度可根據影像資料中之區域而不同。因此,可在一個最大編碼單位中判定一或多個經編碼之深度,且可根據至少一個經編碼之深度的編碼單位而劃分最大編碼單位之影像資料。
因此,編碼單位判定器120可判定包含於最大編碼單位中之具有樹狀結構的編碼單位。根據本發明之一實施例的「具有樹狀結構之編碼單位」包含最大編碼單位中所包含之所有較深編碼單位中的對應於判定為經編碼之深度的深度的編碼單位。可根據最大編碼單位之同一區域中的深度而階層式判定經編碼之深度的編碼單位,且可在不同區域中獨立地進行判定。類似地,可獨立於另一區域中之經編碼之深度而判定當前區域中之經編碼之深度。
根據本發明之一實施例的最大深度為與自最大編碼單位至最小編碼單位執行之分割次數相關的索引。根據本發明之一實施例的第一最大深度可表示自最大編碼單位至最小編碼單位執行之總分割次數。根據本發明之一實施例的第二最大深度可表示自最大編碼單位至最小編碼單位之總深度層級數。舉例而言,當最大編碼單位之深度為0時,最大編碼單位被分割一次之編碼單位的深度可設定為1,且最大編碼單位被分割兩次之編碼單位的深度可設定為2。此處,若最小編碼單位為最大編碼單位被分割四次之編碼單位,則存在深度0、1、2、3以及4的5個深度層級,且因此第一最大深度可設定為4,且第二最大深度可設定為5。
可根據最大編碼單位執行預測編碼以及轉換。根據最大編碼單位,亦基於根據等於最大深度之深度或小於最大深度之深度的較深編碼單位來執行預測編碼以及轉換。
由於無論何時根據深度來分割最大編碼單位,較深編碼單位之數目便增大,因此對隨著深度加深而產生的所有較深編碼單位執行包含預測編碼以及轉換的編碼。為便於描述,在最大編碼單位中,現將基於當前深度之編碼單位來描述預測編碼以及轉換。
視訊編碼裝置100可按各種方式選擇用於對影像資料做編碼之資料單位的大小或形狀。為了對影像資料做編碼,執行諸如預測編碼、轉換以及熵編碼之操作,且此時,同一資料單位可用於所有操作或不同資料單位可用於每一操作。
舉例而言,視訊編碼裝置100可不僅選擇用於對影像資料做編碼之編碼單位,而且選擇不同於編碼單位之資料單位,以便對編碼單位中之影像資料執行預測編碼。
為了在最大編碼單位中執行預測編碼,可基於對應於經編碼之深度之編碼單位(亦即,基於不再分割為對應於較下層深度之編碼單位之編碼單位)來執行預測編碼。下文中,不再分割且變為用於預測編碼之基礎單元之編碼單位現將稱作「預測單位」。藉由分割預測單位而獲得之分區可包含藉由分割預測單位之高度及寬度中之至少一者而獲得之預測單位或資料單位。分區為具有編碼單位之預測單位劃分而成之形狀之資料單位,且預測單位可為具有與編碼單位相同之大小的分區。
舉例而言,當2N×2N(其中N為正整數)之編碼單位不再分割且變為2N×2N之預測單位時,分區之大小可為2N×2N、2N×N、N×2N或N×N。分區類型之實例包含藉由對稱地分割預測單位之高度或寬度而獲得的對稱分區、藉由非對稱地分割預測單位之高度或寬度(諸如,1:n或n:1)而獲得的分區、藉由用幾何方式分割預測單位而獲得之分區,以及具有任意形狀的分區。
預測單位之預測模式可為畫面內模式、畫面間模式以及跳過模式中之至少一者。舉例而言,可對2N×2N、2N×N、N×2N或N×N之分區執行畫面內模式或畫面間模式。且,可僅對2N×2N之分區執行跳過模式。在編碼單位中對一個預測單位獨立地執行編碼,藉此選擇具有最小編碼誤差的預測模式。
視訊編碼裝置100亦可不僅基於用於對影像資料做編碼之編碼單位而且基於不同於編碼單位之資料單位而對編碼單位中的影像資料執行轉換。為了在編碼單位中執行轉換,可基於具有小於或等於編碼單位之大小的轉換單位來執行轉換。舉例而言,轉換單位可包含用於畫面內模式之轉換單位以及用於畫面間模式之轉換單位。
類似於編碼單位,編碼單位中之轉換單位可按遞迴方式分割為具有較小大小之區域。因此,可根據轉換深度根據具有樹狀結構之轉換來劃分編碼單位中之殘餘資料。
亦可在轉換單位中設定指示藉由分割編碼單位之高度以及寬度執行分割以達到轉換單位之分割次數的轉換深度。舉例而言,在2N×2N之當前編碼單位中,當轉換單位之大小亦為2N×2N時,轉換深度可為0,當轉換單位大小為N×N時,轉換深度可為1,且當轉換單位大小為N/2×N/2時,轉換深度可為2。換言之,可根據轉換深度來設定具有樹狀結構之轉換單位。
根據對應於經編碼之深度之編碼單位的編碼資訊不僅需要關於經編碼之深度的資訊,而且需要與預測編碼以及轉換相關的資訊。因此,編碼單位判定器120不僅判定具有最小編碼誤差之經編碼之深度,而且判定預測單位中之分區類型、根據預測單位之預測模式以及用於轉換之轉換單位之大小。
稍後將參考圖7至圖19詳細描述根據本發明之實施例的最大編碼單位中之根據樹狀結構的編碼單位以及判定預測單位/分區與轉換單位的方法。
編碼單位判定器120可藉由基於拉格朗日乘數(Lagrangian multiplier)使用位元率-失真最佳化(Rate-Distortion Optimization)來量測根據深度之較深編碼單位之編碼誤差。
輸出單元130按照位元串流的形式輸出基於由編碼單位判定器120判定之至少一個經編碼之深度而編碼的最大編碼單位之影像資料,以及根據經編碼之深度關於編碼模式的資訊。
可藉由對影像之殘餘資料做編碼來獲得經編碼之影像資料。
根據經編碼之深度關於編碼模式的資訊可包含關於經編碼之深度、預測單位中之分區類型、預測模式以及轉換單位之大小的資訊。
可藉由使用根據深度之分割資訊來定義關於經編碼之深度的資訊,根據深度之分割資訊指示是否對較下層深度而非當前深度之編碼單位執行編碼。若當前編碼單位之當前深度為經編碼之深度,則對當前編碼單位中之影像資料做編碼並輸出,且因此分割資訊可定義為不將當前編碼單位分割為較下層深度。或者,若當前編碼單位之當前深度不是經編碼之深度,則對較下層深度之編碼單位執行編碼,且因此分割資訊可定義為分割當前編碼單位以獲得較下層深度之編碼單位。
若當前深度不是經編碼之深度,則對分割為較下層深度之編碼單位之編碼單位執行編碼。由於較下層深度之至少一個編碼單位存在於當前深度之一個編碼單位中,因此對較下層深度之每一編碼單位重複地執行編碼,且因此可對具有同一深度之編碼單位按遞迴方式執行編碼。
由於針對一個最大編碼單位而判定具有樹狀結構之編碼單位,且針對經編碼之深度的編碼單位而判定關於至少一個編碼模式的資訊,因此可針對一個最大編碼單位而判定關於至少一個編碼模式的資訊。且,最大編碼單位之影像資料的經編碼之深度可根據位置而不同,此是因為根據深度而階層式分割影像資料,且因此可針對影像資料而設定關於經編碼之深度以及編碼模式的資訊。
因此,輸出單元130可將關於對應經編碼之深度以及編碼模式之編碼資訊指派給包含於最大編碼單位中之編碼單位、預測單位以及最小單位中的至少一者。
根據本發明之一實施例的最小單位為藉由將構成最下層深度的最小編碼單位分割為4份而獲得的矩形資料單位。或者,最小單位可為可包含於最大編碼單位中所包含之所有編碼單位、預測單位、分區單元以及轉換單位中的最大矩形資料單位。
舉例而言,經由輸出單元130而輸出之編碼資訊可分類為根據編碼單位之編碼資訊,以及根據預測單位的編碼資訊。根據編碼單位之編碼資訊可包含關於預測模式以及關於分區之大小的資訊。根據預測單位之編碼資訊可包含關於畫面間模式之估計方向、關於畫面間模式之參考影像索引、關於運動向量、關於畫面內模式之色度分量以及關於畫面內模式之內插方法的資訊。且,關於根據圖像、片段或圖像群組(group of pictures, GOP)所定義之編碼單位之最大大小的資訊以及關於最大深度之資訊可插入至序列參數集合(Sequence Parameter Set, SPS)或圖像參數集合(Picture Parameter Set, PPS)中。
且,關於可供當前視訊使用的轉換單位之最大大小之資訊以及關於轉換單位之最小大小之資訊可經由位元串流之標頭、SPS或PPS而輸出。輸出單元130可對與上文參考圖1至圖6所述之預測相關之參考資訊、單向預測資訊、包含第四片段類型之片段類型資訊等做編碼並輸出。
在視訊編碼裝置100中,較深編碼單位可為藉由將較上層深度之編碼單位(其為上一層)的高度或寬度劃分為2份而獲得的編碼單位。換言之,在當前深度之編碼單位的大小為2N×2N時,較下層深度之編碼單位的大小為N×N。且,大小為2N×2N之當前深度的編碼單位可包含較下層深度的最多4個編碼單位。
因此,視訊編碼裝置100可基於考慮當前圖像之特性而判定的最大編碼單位之大小以及最大深度,藉由針對每一最大編碼單位判定具有最佳形狀以及最佳大小的編碼單位而形成具有樹狀結構之編碼單位。且,由於藉由使用各種預測模式以及轉換中之任一者對每一最大編碼單位執行編碼,因此可考慮各種影像大小之編碼單位的特性來判定最佳編碼模式。
因此,若在習知巨集區塊(macroblock)中對具有高解析度或大資料量之影像做編碼,則每圖像之巨集區塊的數目過度地增大。因此,針對每一巨集區塊產生之壓縮資訊之片段的數目增大,且因此難以傳輸壓縮資訊,且資料壓縮效率降低。然而,藉由使用視訊編碼裝置100,因為在考慮影像之大小而增大編碼單位的最大大小的同時考慮影像之特性而調整編碼單位,所以影像壓縮效率可提高。
圖7之視訊編碼裝置100可執行參考圖1描述之視訊編碼裝置10之操作。
編碼單位判定器120可執行視訊編碼裝置10之影像編碼器12之操作。編碼單位判定器120可針對每一最大編碼單位根據具有樹狀結構之編碼單位而判定用於畫面內預測之預測單位,在每一預測單位中執行畫面內預測,判定用於轉換之轉換單位,並在每一轉換單位中執行轉換。
輸出單元130可執行視訊編碼裝置10之符號編碼單元14及位元串流輸出單元16之操作。產生諸如圖像、片段、最大編碼單位、編碼單位、預測單位以及轉換單位之各種資料單位之符號,且根據基於對應資料單位之大小而判定之臨限值,將所述符號中之每一者分類為首碼區域及尾碼區域。輸出單元130可藉由使用針對符號之首碼區域及尾碼區域中之每一者判定之二元化方法來產生首碼位元串及尾碼位元串。選擇一般二元化、一元二元化、截斷一元二元化、指數哥倫布二元化以及固定長度二元化中之任一者來對首碼區域及尾碼區域進行二元化,藉此產生首碼位元串及尾碼位元串。
輸出單元130可藉由執行針對首碼位元串及尾碼位元串中之每一者判定之算術編碼來執行符號編碼。輸出單元130可藉由根據位元之位置對首碼位元串執行用於執行內容脈絡模型化的算術編碼以及在旁路模式中對尾碼位元串執行省略內容脈絡模型化的算術編碼來執行符號編碼。
舉例而言,在對轉換單位之轉換係數之最終係數位置資訊做編碼時,可根據轉換單位之大小(寬度或高度)來判定用於將首碼位元串及尾碼位元串分類之臨限值。或者,可根據包含當前轉換單位、最大編碼單位、編碼單位、預測單位等之片段之大小來判定臨限值。
或者,可藉由畫面內預測模式之最大索引來判定符號位元串中在畫面內預測模式中經由內容脈絡模型化在算術編碼中編碼為首碼位元串之位元之數目,以及符號位元串中在旁路模式中在算術編碼中編碼為尾碼位元串之位元之數目。舉例而言,總共34個畫面內預測模式可用於大小為8×8、16×16及32×32之預測單位,總共17個畫面內預測模式可用於大小為4×4之預測單位,且所有畫面內預測模式可用於大小為64×64之預測單位。在此狀況下,由於能夠使用同一數目之畫面內預測模式之預測單位被視為具有類似統計特性,因此,針對大小為8×8、16×16及32×32之預測單位的算術編碼,可經由內容脈絡模型化而對畫面內預測模式中之位元串中之第一位元做編碼。且,針對其餘預測單位(亦即,大小為4×4及64×64之預測單位)之算術編碼,可在旁路模式中對畫面內預測模式中之位元串中之所有位元做編碼。
輸出單元130可用位元串流之形式輸出經由符號編碼而產生之位元串。
圖8為根據本發明之一實施例的基於具有樹狀結構之編碼單位的視訊解碼裝置200的方塊圖。
基於具有樹狀結構之編碼單位來執行視訊預測之視訊解碼裝置200包含接收器210、影像資料以及編碼資訊提取器220以及影像資料解碼器230。
用於視訊解碼裝置200之各種操作的各種術語(諸如,編碼單位、深度、預測單位、轉換單位以及關於各種編碼模式之資訊)的定義與參考圖7以及參考視訊編碼裝置100所述的術語相同。
接收器210接收且解析經編碼之視訊之位元串流。影像資料以及編碼資訊提取器220自所解析之位元串流提取每一編碼單位之經編碼之影像資料,其中編碼單位具有根據每一最大編碼單位之樹狀結構,且將所提取之影像資料輸出至影像資料解碼器230。影像資料以及編碼資訊提取器220可自關於當前圖像之標頭、或SPS或PPS提取關於當前圖像之編碼單位之最大大小的資訊。
且,影像資料以及編碼資訊提取器220自所解析之位元串流針對具有根據每一最大編碼單位之樹狀結構之編碼單位提取關於經編碼之深度以及編碼模式的資訊。關於經編碼之深度以及編碼模式之所提取之資訊輸出至影像資料解碼器230。換言之,位元串中之影像資料分割為最大編碼單位,使得影像資料解碼器230對每一最大編碼單位之影像資料做解碼。
可針對關於對應於經編碼之深度之至少一個編碼單位的資訊而設定關於根據最大編碼單位之經編碼之深度及編碼模式的資訊,且關於編碼模式之資訊可包含關於對應於經編碼之深度的對應編碼單位之分區類型、預測模式以及轉換單位之大小之資訊。且,可將根據深度之分割資訊作為關於經編碼之深度的資訊來提取。
由影像資料以及編碼資訊提取器220提取的根據每一最大編碼單位關於經編碼之深度以及編碼模式的資訊為關於經判定以在諸如視訊編碼裝置100之編碼器根據每一最大編碼單位對根據深度之每一較深編碼單位重複地執行編碼時產生最小編碼誤差的經編碼之深度以及編碼模式的資訊。因此,視訊解碼裝置200可藉由根據產生最小編碼誤差之經編碼之深度以及編碼模式來對影像資料做解碼而復原影像。
由於關於經編碼之深度以及編碼模式之編碼資訊可指派給對應編碼單位、預測單位以及最小單位中的預定資料單位,因此影像資料以及編碼資訊提取器220可提取根據預定資料單位關於經編碼之深度以及編碼模式的資訊。被指派關於經編碼之深度以及編碼模式之相同資訊的預定資料單位可推斷為包含於同一最大編碼單位中的資料單位。
影像資料解碼器230藉由基於根據最大編碼單位關於經編碼之深度以及編碼模式之資訊而對每一最大編碼單位中的影像資料做解碼來復原當前圖像。換言之,影像資料解碼器230可基於關於每一最大編碼單位中所包含之具有樹狀結構的編碼單位中的每一編碼單位之分區類型、預測模式以及轉換單位的所提取之資訊而對經編碼之影像資料做解碼。解碼程序可包含:包含畫面內預測以及運動補償之預測;以及逆轉換。
影像資料解碼器230可基於根據經編碼之深度關於每一編碼單位之預測單位之分區類型以及預測模式的資訊根據所述編碼單位之分區以及預測模式來執行畫面內預測或運動補償。
且,影像資料解碼器230可基於根據具有樹狀結構之編碼單位關於轉換單位之資訊,根據編碼單位中之每一轉換單位來執行逆轉換,以便根據最大編碼單位來執行逆轉換。可經由逆轉換而復原編碼單位中之空間域的像素值。
影像資料解碼器230可藉由使用根據深度之分割資訊而判定當前最大編碼單位之至少一個經編碼之深度。若分割資訊指示影像資料在當前深度中不再分割,則當前深度為經編碼之深度。因此,影像資料解碼器230可藉由使用關於對應於經編碼之深度之每一編碼單位的預測單位之分區類型、預測模式以及轉換單位大小的資訊來對對應於當前最大編碼單位中之每一經編碼之深度的至少一個編碼單位之經編碼之資料做解碼,且輸出當前最大編碼單位之影像資料。
換言之,可藉由觀測針對編碼單位、預測單位以及最小單位中的預定資料單位指派的編碼資訊集合而收集含有包含相同分割資訊之編碼資訊的資料單位,且可將所收集之資料單位視為待由影像資料解碼器230在同一編碼模式中解碼的一個資料單位。可藉由針對以此方式判定之每一編碼單位獲得關於編碼模式之資訊來執行當前編碼單位之解碼。
且,圖8之視訊解碼裝置200可執行上文參考圖2描述之視訊解碼裝置20之操作。
接收器210以及影像資料以及編碼資訊提取器220可執行視訊解碼裝置20之解析器22及符號解碼器24之操作。影像資料解碼器230可執行視訊解碼裝置20之符號解碼器24之操作。
接收器210接收影像之位元串流,且影像資料以及編碼資訊提取器220自所接收之位元串流解析影像區塊之符號。
影像資料以及編碼資訊提取器220可基於根據當前區塊之大小而判定之臨限值將當前符號分類為首碼位元串及尾碼位元串。舉例而言,在對轉換單位之轉換係數之最終係數位置資訊做解碼時,可根據轉換單位之大小(寬度或高度)來判定用於將首碼位元串及尾碼位元串分類之臨限值。或者,可根據包含當前轉換單位、最大編碼單位、編碼單位、預測單位等之片段之大小來判定臨限值。或者,可藉由畫面內預測模式之最大索引來判定符號位元串中在畫面內預測模式中經由內容脈絡模型化而在算術編碼中編碼為首碼位元串之位元之數目,以及符號位元串中在旁路模式中在算術編碼中編碼為尾碼位元串之位元之數目。
使用針對當前符號之首碼位元串及尾碼位元串中之每一者判定之算術解碼方法來執行算術解碼。可對首碼位元串執行用於根據位元位置來判定內容脈絡模型化之算術解碼,且可藉由使用旁路模式來對尾碼位元串執行用於省略內容脈絡模型化之算術解碼。
在算術解碼之後,根據針對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化。可藉由根據對首碼位元串及尾碼位元串中之每一者判定之二元化方法來執行逆二元化而復原符號之首碼區域及尾碼區域。
影像資料解碼器230可藉由使用經由算術解碼及逆二元化而復原之當前符號來對當前區塊執行逆轉換及預測而復原影像區塊。
因此,視訊解碼裝置200可獲得關於對每一最大編碼單位按遞迴方式執行編碼時產生最小編碼誤差的至少一個編碼單位之資訊,且可使用所述資訊以對當前圖像做解碼。換言之,可對判定為每一最大編碼單位中之最佳編碼單位的具有樹狀結構之編碼單位做解碼。
因此,即使影像資料具有高解析度及大量資料,仍可藉由使用自編碼器接收之關於最佳編碼模式之資訊,藉由使用根據影像資料之特性適應性地判定之編碼單位之大小及編碼模式而有效地對影像資料做解碼及復原。
圖9為根據本發明之一實施例之編碼單位的概念圖。
編碼單位之大小可表達成寬度×高度,且可為64×64、32×32、16×16及8×8。64×64之編碼單位可分割為64×64、64×32、32×64或32×32之分區,32×32之編碼單位可分割為32×32、32×16、16×32或16×16之分區,16×16之編碼單位可分割為16×16、16×8、8×16或8×8之分區,且8×8之編碼單位可分割為8×8、8×4、4×8或4×4之分區。
在視訊資料310中,解析度為1920×1080,編碼單位之最大大小為64,且最大深度為2。在視訊資料320中,解析度為1920×1080,編碼單位之最大大小為64,且最大深度為3。在視訊資料330中,解析度為352×288,編碼單位之最大大小為16,且最大深度為1。圖9所示之最大深度表示自最大編碼單位至最小解碼單元之總分割次數。
若解析度高或者資料量大,則編碼單位之最大大小可為大,以便提高編碼效率以外更準確地反映影像之特性。因此,具有高於視訊資料330之解析度的視訊資料310及320之編碼單位之最大大小可為64。
由於視訊資料310之最大深度為2,因此視訊資料310之編碼單位315可包含長軸大小為64之最大編碼單位以及長軸大小為32及16之編碼單位,此是因為深度藉由分割最大編碼單位兩次而加深為兩層。同時,由於視訊資料330之最大深度為1,因此視訊資料330之編碼單位335可包含長軸大小為16之最大編碼單位以及長軸大小為8之編碼單位,此是因為深度藉由分割最大編碼單位一次而加深為一層。
由於視訊資料320之最大深度為3,因此視訊資料320之編碼單位325可包含長軸大小為64之最大編碼單位以及長軸大小為32、16及8之編碼單位,此是因為深度藉由分割最大編碼單位三次而加深為三層。隨著深度加深,可精確地表達詳細資訊。
圖10為根據本發明之一實施例的基於編碼單位之影像編碼器400之方塊圖。
影像編碼器400執行視訊編碼裝置100之編碼單位判定器120的操作以對影像資料做編碼。換言之,畫面內預測器410對當前畫面405中的處於畫面內模式中之編碼單位執行畫面內預測,且運動估計器420以及運動補償器425藉由使用當前畫面405以及參考畫面495而對當前畫面405中的處於畫面間模式中的編碼單位執行畫面間估計以及運動補償。
自畫面內預測器410、運動估計器420以及運動補償器425輸出之資料經由轉換器430以及量化器440作為經量化之轉換係數而輸出。經量化之轉換係數經由逆量化器460以及逆轉換器470復原為空間域中之資料,且空間域中之所復原之資料在經由解區塊單元480以及迴路濾波單元490後處理之後作為參考畫面495輸出。經量化之轉換係數可經由熵編碼器450作為位元串流455輸出。
為了使影像編碼器400應用於視訊編碼裝置100中,影像編碼器400之所有元件(亦即,畫面內預測器410、運動估計器420、運動補償器425、轉換器430、量化器440、熵編碼器450、逆量化器460、逆轉換器470、解區塊單元480以及迴路濾波單元490)在考慮每一最大編碼單位之最大深度的同時基於具有樹狀結構之編碼單位中的每一編碼單位來執行操作。
具體言之,畫面內預測器410、運動估計器420以及運動補償器425在考慮當前最大編碼單位之最大大小及最大深度的同時判定具有樹狀結構之編碼單位中之每一編碼單位的分區及預測模式,而轉換器430判定具有樹狀結構之編碼單位中之每一編碼單位的轉換單位大小。
特定言之,熵編碼器450可藉由根據預定臨限值而將符號分類為首碼區域及尾碼區域並關於首碼區域及尾碼區域而使用不同二元化及算術編碼方法來對首碼區域及尾碼區域執行符號編碼。
可基於符號之資料單位(即,片段(slice)、最大編碼單位、編碼單位、預測單位、轉換單位等)之大小來判定用於將符號分類為首碼區域及尾碼區域之臨限值。
圖11為根據本發明之一實施例的基於編碼單位之影像解碼器500的方塊圖。
解析器510自位元串流505解析待解碼之經編碼之影像資料以及解碼所需之關於編碼的資訊。經編碼之影像資料經由熵解碼器520以及逆量化器530作為經逆量化之資料而輸出,且經逆量化之資料經由逆轉換器540而復原為空間域中的影像資料。
畫面內預測器550關於空間域中之影像資料對處於畫面內模式中之編碼單位執行畫面內預測,且運動補償器560藉由使用參考畫面585對處於畫面間模式中的編碼單位執行運動補償。
通過畫面內預測器550以及運動補償器560之空間域中的影像資料可在經由解區塊單元570以及迴路濾波單元580後處理之後作為所復原之畫面595輸出。且,經由解區塊單元570以及迴路濾波單元580後處理之影像資料可作為參考畫面585輸出。
為了在視訊解碼裝置200之影像資料解碼器230中對影像資料做解碼,影像解碼器500可執行在解析器510之後執行的操作。
為了使影像解碼器500應用於視訊解碼裝置200中,影像解碼器500之所有元件(亦即,解析器510、熵解碼器520、逆量化器530、逆轉換器540、畫面內預測器550、運動補償器560、解區塊單元570以及迴路濾波單元580)針對每一最大編碼單位基於具有樹狀結構之編碼單位來執行操作。
具體言之,畫面內預測器550及運動補償器560基於具有樹狀結構之編碼單位中之每一分區及預測模式來執行操作,且逆轉換器540基於每一編碼單位之轉換單位之大小來執行操作。
特定言之,熵解碼器520可藉由根據預定臨限值而將所解析之符號位元串分類為首碼位元串及尾碼位元串並關於首碼位元串及尾碼位元串而使用不同二元化及算術解碼方法來對首碼位元串及尾碼位元串中之每一者執行符號解碼。
可基於符號之資料單位(即,片段、最大編碼單位、編碼單位、預測單位、轉換單位等)之大小來判定用於將符號位元串分類為首碼位元串及尾碼位元串之臨限值。
圖12為用於繪示根據本發明之一實施例的根據深度之較深編碼單位及分區的圖式。
視訊編碼裝置100以及視訊解碼裝置200使用階層式編碼單位以便考慮影像之特性。可根據影像之特性來適應性地判定編碼單位之最大高度、最大寬度以及最大深度,或可由使用者不同地進行設定。可根據編碼單位之預定最大大小判定根據深度之較深編碼單位的大小。
在根據本發明之一實施例的編碼單位之階層式結構600中,編碼單位之最大高度及最大寬度各自為64,而最大深度為4。此處,最大深度表示自最大編碼單位至最小編碼單位執行之總分割次數。由於深度沿著階層式結構600之垂直軸加深,因此將較深編碼單位之高度及寬度各自分割。且,沿著階層式結構600之水平軸展示作為用於每一較深編碼單位之預測編碼之基礎的預測單位以及分區。
換言之,編碼單位610為階層式結構600中之最大編碼單位,其中深度為0且大小(亦即,高度乘寬度)為64×64。深度沿著垂直軸而加深,且存在大小為32×32且深度為1之編碼單位620、大小為16×16且深度為2之編碼單位630、大小為8×8且深度為3之編碼單位640,以及大小為4×4且深度為4的編碼單位(未繪示)。大小為4×4且深度為4之編碼單位(未繪示)為最小編碼單位。
編碼單位之預測單位以及分區根據每一深度沿著水平軸而配置。換言之,若大小為64×64且深度為0之編碼單位610為預測單位,則預測單位可分割為包含於經編單位610中的分區,亦即,大小為64×64之分區610、大小為64×32之分區612、大小為32×64之分區614或大小為32×32的分區616。
類似地,大小為32×32且深度為1之編碼單位620的預測單位可分割為包含於編碼單位620中的分區,亦即,大小為32×32之分區620、大小為32×16之分區622、大小為16×32之分區624以及大小為16×16的分區626。
類似地,大小為16×16且深度為2之編碼單位630之預測單位可分割為包含於編碼單位630中之分區,亦即,包含於編碼單位中之大小為16×16之分區630、大小為16×8之分區632、大小為8×16之分區634以及大小為8×8之分區636。
類似地,大小為8×8且深度為3之編碼單位640之預測單位可分割為包含於編碼單位640中之分區,亦即,包含於編碼單位中之大小為8×8之分區640、大小為8×4之分區642、大小為4×8之分區644以及大小為4×4之分區646。
大小為4×4且深度為4之編碼單位(未繪示)為最小編碼單位以及最下層深度之編碼單位。編碼單位(未繪示)之預測單位僅指派給大小為4×4之分區(未繪示)。
為了判定構成最大編碼單位610之編碼單位的至少一個經編碼之深度,視訊編碼裝置100之編碼單位判定器120對包含於最大編碼單位610中之對應於每一深度的編碼單位執行編碼。
隨著深度加深,包含相同範圍中之資料以及相同大小的根據深度之較深編碼單位的數目增大。舉例而言,需要對應於深度2之四個編碼單位來涵蓋包含於對應於深度1之一個編碼單位中的資料。因此,為了比較根據深度之相同資料的編碼結果,將對應於深度1之編碼單位以及對應於深度2之四個編碼單位各自編碼。
為了針對深度中之當前深度執行編碼,可藉由沿著階層式結構600之水平軸對對應於當前深度之編碼單位中的每一預測單位執行編碼而針對當前深度選擇最小編碼誤差。或者,可藉由比較根據深度之最小編碼誤差、藉由隨著深度沿著階層式結構600之垂直軸加深而針對每一深度執行編碼來搜尋最小編碼誤差。可選擇編碼單位610中具有最小編碼誤差之深度以及分區作為編碼單位610之經編碼之深度以及分區類型。
圖13為用於描述根據本發明之一實施例之編碼單位與轉換單位之間的關係的圖式。
視訊編碼裝置100或200針對每一最大編碼單位根據具有小於或等於最大編碼單位之大小的編碼單位來對影像做編碼或解碼。可基於不大於對應編碼單位之資料單位而選擇在編碼期間用於轉換之轉換單位的大小。
舉例而言,在視訊編碼裝置100或200中,若編碼單位710之大小為64×64,則可藉由使用大小為32×32之轉換單位720來執行轉換。
且,可藉由對大小為小於64×64之32×32、16×16、8×8以及4×4之轉換單位中的每一者執行轉換而對大小為64×64之編碼單位710的資料做編碼,且接著可選擇具有最小編碼誤差的轉換單位。
圖14為用於描述根據本發明之一實施例的根據深度之編碼單位之編碼資訊的圖式。
視訊編碼裝置100之輸出單元130可對關於分區類型之資訊800、關於預測模式之資訊810,以及關於對應於經編碼之深度的每一編碼單位的轉換單位之大小的資訊820做編碼且作為關於編碼模式之資訊而傳輸。
資訊800指示關於藉由分割當前編碼單位之預測單位而獲得的分區之形狀的資訊,其中分區為用於當前編碼單位之預測編碼的資料單位。舉例而言,大小為2N×2N之當前編碼單位CU_0可分割為大小為2N×2N之分區802、大小為2N×N之分區804、大小為N×2N之分區806以及大小為N×N的分區808中之任一者。此處,關於分區類型之資訊800設定為指示大小為2N×N之分區804、大小為N×2N之分區806以及大小為N×N的分區808中之一者。
資訊810指示每一分區之預測模式。舉例而言,資訊810可指示對由資訊800指示之分區執行的預測編碼之模式,亦即,畫面內模式812、畫面間模式814或跳過模式816。
資訊820指示待基於何時對當前編碼單位執行轉換之轉換單位。舉例而言,轉換單位可為第一畫面內轉換單位822、第二畫面內轉換單位824、第一畫面間轉換單位826或第二畫面間轉換單位828。
根據每一較深編碼單位,視訊解碼裝置200之影像資料以及編碼資訊提取器220可提取且使用資訊800、810以及820以用於解碼。
圖15為用於繪示根據本發明之一實施例的根據深度之較深編碼單位的圖式。
分割資訊可用以指示深度之改變。分割資訊指示當前深度之編碼單位是否分割為較下層深度之編碼單位。
用於深度為0且大小為2N_0×2N_0之編碼單位900之預測編碼的預測單位910可包含大小為2N_0×2N_0之分區類型912、大小為2N_0×N_0之分區類型914、大小為N_0×2N_0之分區類型916以及大小為N_0×N_0的分區類型918之分區。圖15僅說明藉由對稱地分割預測單位910而獲得之分區類型912至918,但分區類型不限於此,且預測單位910之分區可包含非對稱分區、具有預定形狀之分區以及具有幾何形狀的分區。
根據每一分區類型,對大小為2N_0×2N_0之一個分區、大小為2N_0×N_0之兩個分區、大小為N_0×2N_0之兩個分區以及大小為N_0×N_0的四個分區重複地執行預測編碼。可對大小為2N_0×2N_0、N_0×2N_0、2N_0×N_0以及N_0×N_0之分區執行在畫面內模式以及畫面間模式中之預測編碼。僅對大小為2N_0×2N_0之分區執行在跳過模式中之預測編碼。
比較包含分區類型912至918中之預測編碼的編碼之誤差,並在分區類型中判定最小編碼誤差。若編碼誤差在分區類型912至916中之一者中最小,則預測單位910可能不分割為較下層深度。
若編碼誤差在分區類型918中最小,則深度自0改變為1以在操作920中分割分區類型918,且對深度為2且大小為N_0×N_0之編碼單位930重複地執行編碼以搜尋最小編碼誤差。
用於深度為1且大小為2N_1×2N_1(=N_0×N_0)之編碼單位930之預測編碼的預測單位940可包含大小為2N_1×2N_1之分區類型942、大小為2N_1×N_1之分區類型944、大小為N_1×2N_1之分區類型946以及大小為N_1×N_1的分區類型948之分區。
若編碼誤差在分區類型948中最小,則深度自1改變為2以在操作950中分割分區類型948,且對深度為2且大小為N_2×N_2之編碼單位960重複地執行編碼以搜尋最小編碼誤差。
當最大深度為d時,可對根據每一深度之編碼單位執行直至深度變為d-1時,且可對分割資訊做編碼直至深度為0至d-2中之一者時。換言之,當執行編碼直至在對應於深度d-2之編碼單位在操作970中分割之後深度為d-1時,用於深度為d-1且大小為2N_(d-1)×2N_(d-1)之編碼單位980之預測編碼的預測單位990可包含大小為2N_(d-1)×2N_(d-1)之分區類型992、大小為2N_(d-1)×N_(d-1)之分區類型994、大小為N_(d-1)×2N_(d-1)之分區類型996以及大小為N_(d-1)×N_(d-1)的分區類型998之分區。
可對分區類型992至998中的大小為2N_(d-1)×2N_(d-1)之一個分區、大小為2N_(d-1)×N_(d-1)之兩個分區、大小為N_(d-1)×2N_(d-1)之兩個分區、大小為N_(d-1)×N_(d-1)的四個分區重複地執行預測編碼以搜尋具有最小編碼誤差的分區類型。
即使當分區類型998具有最小編碼誤差時,由於最大深度為d,因此深度為d-1之編碼單位CU_(d-1)不再分割為較下層深度,且將構成當前最大編碼單位900之編碼單位的經編碼之深度判定為d-1,且可將當前最大編碼單位900的分區類型判定為N_(d-1)×N_(d-1)。且,由於最大深度為d且具有最下層深度d-1之最小編碼單位980不再分割為較下層深度,因此不設定最小編碼單位980之分割資訊。
資料單位999可為當前最大編碼單位之「最小單位」。根據本發明之一實施例的最小單位可為藉由將最小編碼單位980分割為4份而獲得的矩形資料單位。藉由重複地執行編碼,視訊編碼裝置100可藉由根據編碼單位900之深度比較編碼誤差而選擇具有最小編碼誤差的深度以判定經編碼之深度,且將對應分區類型以及預測模式設定為經編碼之深度的編碼模式。
因而,在所有深度1至d中比較根據深度之最小編碼誤差,且可將具有最小編碼誤差之深度判定為經編碼之深度。可對經編碼之深度、預測單位之分區類型以及預測模式做編碼且作為關於編碼模式之資訊而傳輸。且,由於編碼單位自深度0分割為經編碼之深度,因此僅將經編碼之深度的分割資訊設定為0,且排除經編碼之深度的深度之分割資訊設定為1。
視訊解碼裝置200之影像資料以及編碼資訊提取器220可提取且使用關於編碼單位900之經編碼之深度以及預測單位的資訊以對分區912做解碼。視訊解碼裝置200可藉由使用根據深度之分割資訊而將分割資訊為0之深度判定為經編碼之深度,且使用關於對應深度之編碼模式的資訊以用於解碼。
圖16至圖18為用於描述根據本發明之一實施例的編碼單位、預測單位與轉換單位之間的關係的圖式。
編碼單位1010為最大編碼單位中的對應於由視訊編碼裝置100判定之經編碼之深度的具有樹狀結構之編碼單位。預測單位1060為編碼單位1010中之每一者之預測單位的分區,且轉換單位1070為編碼單位1010中之每一者的轉換單位。
當最大編碼單位之深度在編碼單位1010中為0時,編碼單位1012以及1054之深度為1,編碼單位1014、1016、1018、1028、1050以及1052之深度為2,編碼單位1020、1022、1024、1026、1030、1032以及1048之深度為3,且編碼單位1040、1042、1044以及1046的深度為4。
在預測單位1060中,藉由分割經編單位1010中之編碼單位來獲得一些經編單位1014、1016、1022、1032、1048、1050、1052及1054。換言之,編碼單位1014、1022、1050以及1054中之分區類型的大小為2N×N,編碼單位1016、1048以及1052中之分區類型的大小為N×2N,且編碼單位1032之分區類型的大小為N×N。編碼單位1010之預測單位以及分區小於或等於每一編碼單位。
對小於編碼單位1052之資料單位中之轉換單位1070中的編碼單位1052之影像資料執行轉換或逆轉換。且,轉換單位1070中之編碼單位1014、1016、1022、1032、1048、1050以及1052的大小以及形狀不同於預測單位1060中的編碼單位。換言之,視訊編碼裝置100以及視訊解碼裝置200可對同一編碼單位中之資料單位個別地執行畫面內預測、運動估計、運動補償、轉換以及逆轉換。
因此,對在最大編碼單位之每一區域中具有階層式結構之編碼單位中的每一者以遞迴方式執行編碼以判定最佳編碼單位,且因此可獲得具有遞迴樹狀結構之編碼單位。編碼資訊可包含關於編碼單位之分割資訊、關於分區類型之資訊、關於預測模式之資訊,以及關於轉換單位之大小的資訊。表1展示可由視訊編碼裝置100以及視訊解碼裝置200設定之編碼資訊。 表1
視訊編碼裝置100之輸出單元130可輸出關於具有樹狀結構之編碼單位的編碼資訊,且視訊解碼裝置200之影像資料以及編碼資訊提取器220可自所接收之位元串流提取關於具有樹狀結構之編碼單位的編碼資訊。
分割資訊指示當前編碼單位是否分割為較下層深度之編碼單位。若當前深度d之分割資訊為0,則當前編碼單位不再分割為較下層深度之深度為經編碼之深度,且因此可針對經編碼之深度而定義關於分區類型、預測模式以及轉換單位之大小的資訊。若根據分割資訊進一步分割當前編碼單位,則對較下層深度之四個分割編碼單位獨立地執行編碼。
預測模式可為畫面內模式、畫面間模式以及跳過模式中之一者。可在所有分區類型中定義畫面內模式以及畫面間模式,且僅在大小為2N×2N之分區類型中定義跳過模式。
關於分區類型之資訊可指示:大小為2N×2N、2N×N、N×2N以及N×N之對稱分區類型,其是藉由對稱地分割預測單位之高度或寬度而獲得;以及大小為2N×nU、2N×nD、nL×2N以及nR×2N之非對稱分區類型,其是藉由非對稱地分割預測單位之高度或寬度而獲得。可藉由以1:3以及3:1分割預測單位之高度而分別獲得大小為2N×nU以及2N×nD之非對稱分區類型,且可藉由以1:3以及3:1分割預測單位的寬度而分別獲得大小為nL×2N以及nR×2N之非對稱分區類型。
轉換單位大小可在畫面內模式中設定為兩種類型且在畫面間模式中設定為兩種類型。換言之,若轉換單位之分割資訊為0,則轉換單位大小可為2N×2N,此為當前編碼單位之大小。若轉換單位之分割資訊為1,則可藉由分割當前編碼單位而獲得轉換單位。且,若大小為2N×2N之當前編碼單位的分區類型為對稱分區類型,則轉換單位之大小可為N×N,且若當前編碼單位之分區類型為非對稱分區類型,則轉換單位大小可為N/2×N/2。
關於具有樹狀結構之編碼單位的編碼資訊可包含對應於經編碼之深度的編碼單位、預測單位以及最小單位中的至少一者。對應於經編碼之深度的編碼單位可包含含有相同編碼資訊之預測單位以及最小單位中的至少一者。
因此,藉由比較鄰近資料單位之編碼資訊而判定鄰近資料單位是否包含於對應於經編碼之深度的同一編碼單位中。且,藉由使用資料單位之編碼資訊而判定對應於經編碼之深度的對應編碼單位,且因此可判定最大編碼單位中之經編碼之深度的分佈。
因此,若基於鄰近資料單位之編碼資訊而預測當前編碼單位,則可直接參考且使用鄰近於當前編碼單位的較深編碼單位中之資料單位的編碼資訊。
或者,若基於鄰近資料單位之編碼資訊而預測當前編碼單位,則使用資料單位之經編碼之資訊而搜尋鄰近於當前編碼單位之資料單位,且可參考所搜尋之鄰近編碼單位以用於預測當前編碼單位。
圖19為用於描述根據表1之編碼模式資訊的編碼單位、預測單位與轉換單位之間的關係的圖式。
最大編碼單位1300包含經編碼之深度的編碼單位1302、1304、1306、1312、1314、1316以及1318。此處,由於編碼單位1318為經編碼之深度的編碼單位,因此分割資訊可設定為0。關於大小為2N×2N之編碼單位1318之分區類型的資訊可設定為大小為2N×2N之分區類型1322、大小為2N×N之分區類型1324、大小為N×2N之分區類型1326、大小為N×N之分區類型1328、大小為2N×nU之分區類型1332、大小為2N×nD之分區類型1334、大小為nL×2N之分區類型1336以及大小為nR×2N之分區類型1338中的一者。
轉換單位之分割資訊(TU大小旗標)為一種轉換索引,且對應於轉換索引之轉換單位大小可根據編碼單位之預測單位或分區之類型而變化。
舉例而言,當分區類型設定為對稱(亦即,分區類型1322、1324、1326或1328)時,若轉換單位之分割資訊為0,則設定大小為2N×2N之轉換單位1342,且若TU大小旗標為1,則設定大小為N×N之轉換單位1344。
當分區類型設定為非對稱(亦即,分區類型1332、1334、1336或1338時),若TU大小旗標為0,則設定大小為2N×2N之轉換單位1352,且若TU大小旗標為1,則設定大小為N/2×N/2之轉換單位1354。
參考圖19,TU大小旗標為具有值0或1之旗標,但TU大小旗標不限於1個位元,且轉換單位可在TU大小旗標自0增大時階層式分割為具有樹狀結構。TU大小旗標可用作轉換索引之實施例。
在此狀況下,若轉換單位之分割資訊與最大轉換單位大小以及最小轉換單位大小一起使用,則可表達實際使用之轉換單位大小。視訊編碼裝置100可對最大轉換單位大小資訊、最小轉換單位大小資訊以及最大轉換單位分割資訊做編碼。經編碼之最大轉換單位大小資訊、最小轉換單位大小資訊以及最大轉換單位分割資訊可插入至SPS中。視訊解碼裝置200可藉由使用最大轉換單位大小資訊、最小轉換單位大小資訊以及最大轉換單位分割資訊來執行視訊解碼。
舉例而言,若當前編碼單位之大小為64×64且最大轉換單位大小為32×32,則當轉換單位分割資訊為0時,轉換單位大小可設定為32×32,當轉換單位分割資訊為1時,轉換單位大小可設定為16×16,且當轉換單位分割資訊為2時,轉換單位大小可設定為8×8。
或者,若當前編碼單位之大小為32×32且最小轉換單位大小為32×32,則當轉換單位分割資訊為1時,轉換單位大小可設定為32×32,且由於轉換單位大小等於或大於32×32,因此不可設定其他轉換單位分割資訊。
或者,若當前編碼單位之大小為64×64且最大轉換單位分割資訊為1,則轉換單位分割資訊可設定為0或1,且不可設定其他轉換單位分割資訊。
或者,若最大轉換單位分割資訊定義為「MaxTransformSizeIndex」,若最小轉換單位大小定義為「MinTransformSize」,且若在轉換單位分割資訊為0時將轉換單位大小定義為「RootTuSize」,則「CurrMinTuSize」,即,在當前編碼單位中可獲之最小轉換單位大小,可由以下公式(1)來定義 CurrMinTuSize = max (MinTransformSize, RootTuSize/(2^MaxTransformSizeIndex))...(1)
與「CurrMinTuSize」相比較,即,與在當前編碼單位中可獲之最小轉換單位大小相比較,「RootTuSize」,即,當轉換單位分割資訊為0時之轉換單位大小,可表示可在系統中採用之最大轉換單位大小。換言之,根據公式(1),「RootTuSize/(2^MaxTransformSizeIndex)」為「RootTuSize」分割對應於最大轉換單位分割資訊之次數的情況下的轉換單位大小,且「MinTransformSize」為最小轉換單位大小,且因此「RootTuSize/(2^MaxTransformSizeIndex)」與「MinTransformSize」中之較小值可為「CurrMinTuSize」,即,在當前編碼單位中可獲之最小轉換單位大小。
「RootTuSize)」,即,最大轉換單位大小,可根據預測模式而變化。
舉例而言,若當前預測模式為畫面間模式,則可根據下文中之公式(2)來判定「RootTuSize」(2)。在公式(1)中,「MaxTransformSize」表示最大轉換單位大小,而「PUSize」表示當前預測單位大小。 RootTuSize=min(MaxTransformSize, PUSize).......(2)
換言之,若當前預測模式為畫面間模式,則「RootTuSize」,即,當轉換單位分割資訊為0時之轉換單位大小,可設定為最大轉換單位大小與當前預測單位大小中之較小值。
若當前分區單元之預測模式為畫面內模式,則可根據下文中之公式(3)來判定「RootTuSize」。「PartitionSize」表示當前分區單元大小。 RootTuSize=min(MaxTransformSize, PartitionSize)....(3)
換言之,若當前預測模式為畫面內模式,則「RootTuSize」可設定為最大轉換單位大小與當前分區單元大小中之較小值。
然而,根據分區單元之預測模式而變化之當前最大轉換單位大小「RootTuSize」僅為一實例,且用於判定當前最大轉換單位大小之因素不限於此。
藉由使用基於上文中參考圖7至圖19描述之具有樹狀結構之編碼單位的視訊編碼方法,針對具有樹狀結構之每一編碼單位來對空間域之影像資料做編碼,且藉由使用基於具有樹狀結構之編碼單位的視訊解碼方法對每一最大編碼單位執行解碼,且因此空間域之影像資料得以復原,藉此復原視訊,所述視訊為圖像及圖像序列。所復原之視訊可由再生裝置再生,可儲存在儲存媒體中,或可經由網路而傳輸。
本發明之實施例可寫為電腦程式,且可在使用電腦可讀記錄媒體執行程式的通用數位電腦中實施。電腦可讀記錄媒體之實例包含磁性儲存媒體(例如,ROM、軟碟、硬碟等)以及光學記錄媒體(例如,CD-ROM或DVD)。
儘管已參考本發明之較佳實施例特定地展示且描述了本發明,但一般熟習此項技術者將理解,在不脫離如由所附申請專利範圍界定的本發明之精神以及範疇的情況下,可對本發明進行形式以及細節上的各種改變。較佳實施例應僅在描述性意義上考慮且並非用於限制目的。因此,本發明之範疇並非由本發明之詳細描述界定而是由所附申請專利範圍界定,且在此範疇內之所有差異將解釋為包含於本發明中。
10‧‧‧視訊編碼裝置
12‧‧‧影像編碼器
14‧‧‧符號編碼器/符號編碼單元
16‧‧‧位元串流輸出單元
20‧‧‧視訊解碼裝置
22‧‧‧解析器
24‧‧‧符號解碼器
26‧‧‧影像復原單元
32‧‧‧首碼位元串
34‧‧‧尾碼位元串
40‧‧‧符號位元串
41‧‧‧第一位元
45‧‧‧其餘位元
51~59、61~69‧‧‧操作步驟
100‧‧‧視訊編碼裝置
110‧‧‧最大編碼單位分割器
120‧‧‧編碼單位判定器
130‧‧‧輸出單元
200‧‧‧視訊解碼裝置
210‧‧‧接收器
220‧‧‧影像資料以及編碼資訊提取器
230‧‧‧影像資料解碼器
310、320、330‧‧‧視訊資料
315、325、335‧‧‧編碼單位
400‧‧‧影像編碼器
405‧‧‧當前畫面
410‧‧‧畫面內預測器
420‧‧‧運動估計器
425‧‧‧運動補償器
430‧‧‧轉換器
440‧‧‧量化器
450‧‧‧熵編碼器
455‧‧‧位元串流
460‧‧‧逆量化器
470‧‧‧逆轉換器
480‧‧‧解區塊單元
490‧‧‧迴路濾波單元
495‧‧‧參考畫面
500‧‧‧影像解碼器
505‧‧‧位元串流
510‧‧‧解析器
520‧‧‧熵解碼器
530‧‧‧逆量化器
540‧‧‧逆轉換器
550‧‧‧畫面內預測器
560‧‧‧運動補償器
570‧‧‧解區塊單元
580‧‧‧迴路濾波單元
585‧‧‧參考畫面
595‧‧‧所復原之畫面
600‧‧‧階層式結構
610‧‧‧編碼單位/分區/最大編碼單位
612、614、616、622、624、626、632、634、636、、642、644、646‧‧‧分區
620、630、640‧‧‧編碼單位/分區
710、720‧‧‧編碼單位
800、810‧‧‧資訊
802、804、806、808‧‧‧分區
812‧‧‧畫面內模式
814‧‧‧畫面間模式
816‧‧‧跳過模式
822‧‧‧第一畫面內轉換單位
824‧‧‧第二畫面內轉換單位
826‧‧‧第一畫面間轉換單位
828‧‧‧第二畫面間轉換單位
900‧‧‧編碼單位/當前最大編碼單位
910‧‧‧預測單位
912‧‧‧分區類型/編碼單位
914、916、918、942、944、946、948、992、994、996、998‧‧‧分區類型
920、950、970‧‧‧操作
930、960、980‧‧‧編碼單位
940、990‧‧‧預測單位
999‧‧‧資料單位
1010、1012、1014、1016、1018、1020、1022、1024、1026、1028、1030、1032、1040、1042、1044、1046、1048、1050、1052、1054‧‧‧編碼單位
1060‧‧‧預測單位
1070‧‧‧轉換單位
1300‧‧‧最大編碼單位
1302、1304、1306、1312、1314、1316、1318‧‧‧編碼單位
1322、1324、1326、1328、1332、1334、1336、1338‧‧‧分區類型
1342、1342、1344、1352、1354‧‧‧轉換單位
CU_0‧‧‧當前編碼單位
CU_1、CU_(d-1)‧‧‧編碼單位
圖1為根據本發明之一實施例之視訊編碼裝置的方塊圖。 圖2為根據本發明之一實施例之視訊解碼裝置的方塊圖。 圖3及圖4為用於描述根據本發明之一實施例藉由根據預定臨限值而將符號分類為首碼位元串及尾碼位元串來進行算術編碼之圖式。 圖5為用於描述根據本發明之一實施例之視訊編碼方法的流程圖。 圖6為用於描述根據本發明之一實施例之視訊解碼方法的流程圖。 圖7為根據本發明之一實施例的基於具有樹狀結構之編碼單位的視訊編碼裝置的方塊圖。 圖8為根據本發明之一實施例的基於具有樹狀結構之編碼單位的視訊解碼裝置的方塊圖。 圖9為根據本發明之一實施例之編碼單位之概念圖。 圖10為根據本發明之一實施例的基於編碼單位之影像編碼器的方塊圖。 圖11為根據本發明之一實施例的基於編碼單位之影像解碼器的方塊圖。 圖12為用於繪示根據本發明之一實施例的根據深度之編碼單位及分區的圖式。 圖13為用於描述根據本發明之一實施例之編碼單位與轉換單位之間的關係的圖式。 圖14為用於描述根據本發明之一實施例的根據深度之編碼單位之編碼資訊的圖式。 圖15為用於繪示根據本發明之一實施例的根據深度之編碼單位的圖式。 圖16至圖18為用於描述根據本發明之一實施例的編碼單位、預測單位與轉換單位之間的關係的圖式。 圖19為用於描述根據表1之編碼模式資訊之編碼單位、預測單位與轉換單位之間的關係的圖式。
20‧‧‧視訊解碼裝置
22‧‧‧解析器
24‧‧‧符號解碼器
26‧‧‧影像復原單元

Claims (1)

  1. 一種視訊解碼裝置,包括: 接收器,用以接收包括轉換區塊的最終係數位置的資訊的位元串流; 算術解碼器,用以藉由針對所述位元串流執行基於內容脈絡的算數解碼,自所述最終係數位置的所述資訊取得所述最終係數位置的首碼位元串,其中當該首碼位元串大於預定值時,藉由針對所述位元串流執行旁路模式的算數解碼,自所述位元串流取得所述最終係數位置的尾碼位元串; 逆二元化器,用以根據截斷二元化架構針對所述首碼位元串來執行逆二元化,以取得逆二元化的首碼,並且根據固定長度二元化架構針對所述尾碼位元串來執行逆二元化,以取得逆二元化的尾碼;以及 符號重建器,用以利用所述逆二元化的首碼以及所述逆二元化的尾碼來重建代表所述轉換區塊的所述最終係數位置的符號,   其中所述首碼位元串的所述基於內容脈絡的算數解碼是利用根據所述轉換區塊的大小以及二進位位元索引所判定之內容脈絡索引來執行,   其中所述最終係數位置的所述資訊包括所述最終係數位置在所述轉換區塊的寬度方向上的x座標資訊以及所述最終係數位置在所述轉換區塊的高度方向上的y座標資訊至少之一者。
TW105134471A 2011-06-28 2012-06-28 視訊解碼裝置 TWI597975B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201161502038P 2011-06-28 2011-06-28

Publications (2)

Publication Number Publication Date
TW201701675A TW201701675A (zh) 2017-01-01
TWI597975B true TWI597975B (zh) 2017-09-01

Family

ID=47424665

Family Applications (4)

Application Number Title Priority Date Filing Date
TW106124837A TWI615020B (zh) 2011-06-28 2012-06-28 視訊解碼方法
TW106146130A TWI661716B (zh) 2011-06-28 2012-06-28 視訊解碼裝置、視訊編碼方法與裝置、電腦可讀記錄媒體
TW105134471A TWI597975B (zh) 2011-06-28 2012-06-28 視訊解碼裝置
TW101123244A TWI562618B (en) 2011-06-28 2012-06-28 Method for video decoding

Family Applications Before (2)

Application Number Title Priority Date Filing Date
TW106124837A TWI615020B (zh) 2011-06-28 2012-06-28 視訊解碼方法
TW106146130A TWI661716B (zh) 2011-06-28 2012-06-28 視訊解碼裝置、視訊編碼方法與裝置、電腦可讀記錄媒體

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW101123244A TWI562618B (en) 2011-06-28 2012-06-28 Method for video decoding

Country Status (27)

Country Link
US (7) US9565455B2 (zh)
EP (7) EP2728866B1 (zh)
JP (6) JP5735710B2 (zh)
KR (7) KR101457399B1 (zh)
CN (9) CN105516732A (zh)
AU (6) AU2012276453B2 (zh)
BR (5) BR112013033708A2 (zh)
CA (2) CA2975695C (zh)
CY (2) CY1119931T1 (zh)
DK (2) DK2728866T3 (zh)
ES (4) ES2711671T3 (zh)
HR (2) HRP20180051T1 (zh)
HU (4) HUE044112T2 (zh)
LT (2) LT2728866T (zh)
MX (4) MX337232B (zh)
MY (5) MY160179A (zh)
NO (1) NO3064648T3 (zh)
PH (4) PH12017501002A1 (zh)
PL (4) PL3402206T3 (zh)
PT (2) PT2884749T (zh)
RS (2) RS58373B1 (zh)
RU (4) RU2586321C2 (zh)
SI (2) SI2728866T1 (zh)
TR (1) TR201902208T4 (zh)
TW (4) TWI615020B (zh)
WO (1) WO2013002555A2 (zh)
ZA (5) ZA201400647B (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PT2884749T (pt) * 2011-06-28 2018-01-18 Samsung Electronics Co Ltd Aparelho para descodificar vídeo acompanhado com descodificação aritmética e sinalização do último coeficiente significativo de duas dimensões
SG187781A1 (en) * 2011-07-18 2013-03-28 Panasonic Corp Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
CN103597834B (zh) * 2011-08-04 2016-12-21 寰发股份有限公司 基于上下文自适应二进制算术编码的方法及装置
EP2779648A4 (en) 2011-11-07 2016-06-01 Panasonic Ip Corp America PICTURE CODING METHOD, PICTURE DECODING METHOD, PICTURE CODING DEVICE, PICTURE DECODING DEVICE, AND PICTURE CODING / DECODING DEVICE
CN105007496B (zh) * 2012-04-15 2019-05-10 三星电子株式会社 对视频进行解码的方法和设备
GB2513111A (en) * 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
US9930348B2 (en) * 2014-03-14 2018-03-27 Qualcomm Incorporated Coefficient level coding in a video coding process
JP6352452B2 (ja) 2014-06-20 2018-07-04 寰發股▲ふん▼有限公司HFI Innovation Inc. ビデオ符号化における構文の2値化とコンテキスト適応型符号化の方法と装置
US20160044339A1 (en) * 2014-08-07 2016-02-11 Qualcomm Incorporated System and method for reordering of prefixes and suffixes in variable length coding to increase throughput
WO2016119726A1 (en) * 2015-01-30 2016-08-04 Mediatek Inc. Method and apparatus for entropy coding of source samples with large alphabet
KR102473209B1 (ko) * 2015-12-14 2022-12-02 삼성전자주식회사 스토리지 장치 및 스토리지 장치의 동작 방법
US10142629B2 (en) * 2015-12-28 2018-11-27 Mediatek Inc. Method and apparatus for entropy coding in image compression
US10708164B2 (en) 2016-05-03 2020-07-07 Qualcomm Incorporated Binarizing secondary transform index
KR102636388B1 (ko) 2018-03-29 2024-02-15 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 변환 계수 블록 코딩
AU2018204786A1 (en) * 2018-06-29 2020-01-16 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a transformed block of video samples
PT3799690T (pt) 2018-07-11 2023-12-22 Huawei Tech Co Ltd Sinalização intramodo de luma
BR122021011813A2 (pt) 2018-11-12 2021-08-10 Lg Electronics Inc. Método de decodificação de imagens através de um aparelho de decodificação, método de codificação de imagens através de um aparelho de codificação e mídia de armazenamento legível por computador não transitória
WO2020130514A1 (ko) * 2018-12-17 2020-06-25 엘지전자 주식회사 고주파 제로잉을 기반으로 변환 계수 스캔 순서를 결정하는 방법 및 장치
WO2020145698A1 (ko) * 2019-01-13 2020-07-16 엘지전자 주식회사 비디오 신호를 처리하기 위한 방법 및 이를 위한 장치
US10986334B2 (en) * 2019-03-09 2021-04-20 Tencent America LLC Method and apparatus for video coding
EP4277278A1 (en) * 2019-03-12 2023-11-15 LG Electronics Inc. Transform-based image coding
JP7332873B2 (ja) * 2019-09-10 2023-08-24 富士通株式会社 符号化回路、復号化回路、符号化方法、復号化方法、伝送装置、及び光伝送システム
CN110995274B (zh) * 2019-11-18 2022-02-08 中国科学院自动化研究所 一种解压缩方法及装置
JP7388900B2 (ja) 2019-12-06 2023-11-29 日本放送協会 符号化装置、復号装置、及びプログラム
CN114079774A (zh) * 2020-08-21 2022-02-22 北京三星通信技术研究有限公司 帧间预测信息的编解码方法及装置
CN114615504A (zh) * 2020-12-04 2022-06-10 腾讯科技(深圳)有限公司 视频解码方法、视频编码方法、装置及设备
CN113518222B (zh) * 2021-06-07 2022-11-08 同济大学 不同类型串采用不同长度二值化方案的编解码方法及装置
JP2023026969A (ja) * 2021-08-16 2023-03-01 キヤノン株式会社 撮像システム、サーバ装置、サーバ装置の制御方法、プログラム、および記憶媒体

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2755527B1 (fr) * 1996-11-07 1999-01-08 Thomson Multimedia Sa Procede de prediction compensee en mouvement et codeur utilisant un tel procede
US6859840B2 (en) 2001-01-29 2005-02-22 Kasenna, Inc. Prefix caching for media objects
EP1467491B1 (de) 2002-05-02 2007-01-24 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Arithmetische Codierung von Transformationskoeffizienten
DE10301362B4 (de) * 2003-01-16 2005-06-09 GEMAC-Gesellschaft für Mikroelektronikanwendung Chemnitz mbH Blockdatenkompressionssystem, bestehend aus einer Kompressionseinrichtung und einer Dekompressionseinrichtung, und Verfahren zur schnellen Blockdatenkompression mit Multi-Byte-Suche
US6900748B2 (en) * 2003-07-17 2005-05-31 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and apparatus for binarization and arithmetic coding of a data value
US7379608B2 (en) * 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
US7599435B2 (en) * 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
JP4418762B2 (ja) * 2004-05-07 2010-02-24 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体
DE102004049156B4 (de) * 2004-10-08 2006-07-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codierschema für einen ein zeitlich veränderliches Graphikmodell darstellenden Datenstrom
KR100647295B1 (ko) * 2004-11-10 2006-11-23 삼성전자주식회사 비디오 디코더에서의 인접 정보 처리 장치 및 방법과 그방법을 수행하기 위한 프로그램이 저장된 기록 매체
US7430238B2 (en) * 2004-12-10 2008-09-30 Micronas Usa, Inc. Shared pipeline architecture for motion vector prediction and residual decoding
US20060153293A1 (en) * 2005-01-12 2006-07-13 Ulead Systems, Inc. Method for transcoding compressed data
KR100703776B1 (ko) * 2005-04-19 2007-04-06 삼성전자주식회사 향상된 코딩 효율을 갖는 컨텍스트 기반 적응적 산술 코딩및 디코딩 방법과 이를 위한 장치, 이를 포함하는 비디오코딩 및 디코딩 방법과 이를 위한 장치
KR100718134B1 (ko) 2005-07-21 2007-05-14 삼성전자주식회사 비트율에 적응적인 영상 데이터 이진 산술 부호화/복호화장치 및 방법
CN100466739C (zh) * 2005-10-12 2009-03-04 华为技术有限公司 Cabac解码系统及方法
KR100873636B1 (ko) 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
WO2007065351A1 (en) 2005-12-05 2007-06-14 Huawei Technologies Co., Ltd. Binarizing method and device thereof
CN1984336A (zh) 2005-12-05 2007-06-20 华为技术有限公司 一种二进制化方法及装置
US7778472B2 (en) 2006-03-27 2010-08-17 Qualcomm Incorporated Methods and systems for significance coefficient coding in video compression
FR2900004A1 (fr) * 2006-04-18 2007-10-19 Thomson Licensing Sas Procede et dispositif de decodage arithmetique
US7262722B1 (en) * 2006-06-26 2007-08-28 Intel Corporation Hardware-based CABAC decoder with parallel binary arithmetic decoding
CN101175210B (zh) * 2006-10-30 2010-08-11 中国科学院计算技术研究所 用于视频预测残差系数解码的熵解码方法及熵解码装置
JP4878262B2 (ja) 2006-10-31 2012-02-15 キヤノン株式会社 エントロピー符号化装置
JP4739167B2 (ja) * 2006-10-31 2011-08-03 キヤノン株式会社 正規化処理装置
JP4825644B2 (ja) 2006-11-14 2011-11-30 ルネサスエレクトロニクス株式会社 画像復号装置、画像符号化装置、およびシステムlsi
PT2123052E (pt) * 2007-01-18 2011-03-02 Fraunhofer Ges Forschung Corrente de dados de vídeo de qualidade escalonável
JP5278827B2 (ja) * 2007-09-06 2013-09-04 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、映像符号化あるいは復号プログラム
US8782379B2 (en) * 2007-09-27 2014-07-15 Qualcomm Incorporated H.264 video decoder CABAC core optimization techniques
US8938009B2 (en) * 2007-10-12 2015-01-20 Qualcomm Incorporated Layered encoded bitstream structure
US9008171B2 (en) 2008-01-08 2015-04-14 Qualcomm Incorporated Two pass quantization for CABAC coders
US8891615B2 (en) 2008-01-08 2014-11-18 Qualcomm Incorporated Quantization based on rate-distortion modeling for CABAC coders
US8509555B2 (en) * 2008-03-12 2013-08-13 The Boeing Company Error-resilient entropy coding for partial embedding and fine grain scalability
US8705622B2 (en) 2008-04-10 2014-04-22 Qualcomm Incorporated Interpolation filter support for sub-pixel resolution in video coding
JP2009272739A (ja) * 2008-05-01 2009-11-19 Olympus Corp 撮像装置
KR20090129926A (ko) 2008-06-13 2009-12-17 삼성전자주식회사 영상 부호화 방법 및 그 장치, 영상 복호화 방법 및 그 장치
JP5083579B2 (ja) * 2008-06-23 2012-11-28 日本電気株式会社 復号処理装置、プロセッサ、電子機器、復号処理方法、及び復号処理プログラム
EP2321904B1 (en) * 2008-08-19 2014-05-28 Thomson Licensing Context-based adaptive binary arithmetic coding (cabac) video stream compliance
US20100054326A1 (en) * 2008-08-26 2010-03-04 General Instrument Corporation Method and apparatus for detecting start and end of a video sequence
EP2164176A1 (en) * 2008-09-12 2010-03-17 Thomson Licensing Method for lossless compressing prefix-suffix-codes, method for decompressing a bit sequence representing integers or symbols encoded in compressed prefix-suffix-codes and storage medium or signal carrying compressed prefix-suffix-codes
JP2010200281A (ja) * 2009-02-27 2010-09-09 Josho Gakuen 復号装置、及びプログラム
TWI387314B (zh) * 2009-03-10 2013-02-21 Univ Nat Central Image processing apparatus and method thereof
WO2011002914A1 (en) * 2009-06-30 2011-01-06 Massachusetts Institute Of Technology System and method for providing high throughput entropy coding using syntax element partitioning
US8948241B2 (en) 2009-08-07 2015-02-03 Qualcomm Incorporated Signaling characteristics of an MVC operation point
WO2011050641A1 (en) 2009-10-28 2011-05-05 Mediatek Singapore Pte. Ltd. Video coding methods and video encoders and decoders with localized weighted prediction
US20110110591A1 (en) 2009-11-09 2011-05-12 Ming-Hwa Sheu Multi-point image labeling method
JP4819940B2 (ja) 2009-12-04 2011-11-24 株式会社日立国際電気 動画像符号化装置
CN101771879B (zh) * 2010-01-28 2011-08-17 清华大学 基于cabac的并行归一化编码实现电路及编码方法
PL2559166T3 (pl) * 2010-04-13 2018-04-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Koder i dekoder dzielący interwał prawdopodobieństwa
WO2011142817A1 (en) * 2010-05-12 2011-11-17 Thomson Licensing Methods and apparatus for unified significance map coding
PT3101900T (pt) 2010-07-09 2017-09-08 Samsung Electronics Co Ltd Aparelho para a descofificação de entropia um coeficiente de transformação
CN102014283A (zh) * 2010-11-30 2011-04-13 上海大学 一阶差分前缀表示的图像数据无损压缩的编码方法
US9042440B2 (en) * 2010-12-03 2015-05-26 Qualcomm Incorporated Coding the position of a last significant coefficient within a video block based on a scanning order for the block in video coding
US8976861B2 (en) * 2010-12-03 2015-03-10 Qualcomm Incorporated Separately coding the position of a last significant coefficient of a video block in video coding
JP5041060B2 (ja) * 2010-12-27 2012-10-03 ソニー株式会社 符号化装置及び符号化方法
WO2012134246A2 (ko) * 2011-04-01 2012-10-04 엘지전자 주식회사 엔트로피 디코딩 방법 및 이를 이용하는 디코딩 장치
RU2642373C1 (ru) 2011-06-16 2018-01-24 ДжиИ Видео Компрешн, ЭлЭлСи Инициализация контекста при энтропийном кодировании
PT2884749T (pt) * 2011-06-28 2018-01-18 Samsung Electronics Co Ltd Aparelho para descodificar vídeo acompanhado com descodificação aritmética e sinalização do último coeficiente significativo de duas dimensões
SG187781A1 (en) * 2011-07-18 2013-03-28 Panasonic Corp Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
US9357185B2 (en) * 2011-11-08 2016-05-31 Qualcomm Incorporated Context optimization for last significant coefficient position coding
US9154792B2 (en) * 2011-11-08 2015-10-06 Qualcomm Incorporated Progressive coding of position of last significant coefficient
US9621894B2 (en) * 2012-01-13 2017-04-11 Qualcomm Incorporated Determining contexts for coding transform coefficient data in video coding
EP3328086A1 (en) * 2012-02-04 2018-05-30 Google Technology Holdings LLC Devices and methods for context reduction in last significant coefficient position coding
US9237344B2 (en) * 2012-03-22 2016-01-12 Qualcomm Incorporated Deriving context for last position coding for video coding
US9621921B2 (en) * 2012-04-16 2017-04-11 Qualcomm Incorporated Coefficient groups and coefficient coding for coefficient scans

Also Published As

Publication number Publication date
CN107820098B (zh) 2021-01-08
US20180376144A1 (en) 2018-12-27
BR122015021376A2 (pt) 2019-08-27
ES2797423T3 (es) 2020-12-02
AU2016206258A1 (en) 2016-08-04
JP2015149774A (ja) 2015-08-20
PH12017501001B1 (en) 2017-10-02
EP2728866B1 (en) 2019-02-13
EP2884749A1 (en) 2015-06-17
US9554157B2 (en) 2017-01-24
AU2016206261B2 (en) 2017-10-19
EP3402206B1 (en) 2020-05-20
KR20140075658A (ko) 2014-06-19
SI2728866T1 (sl) 2019-03-29
KR20130002285A (ko) 2013-01-07
TWI661716B (zh) 2019-06-01
PH12017501000B1 (en) 2017-10-02
KR20150046773A (ko) 2015-04-30
CN105516732A (zh) 2016-04-20
EP3021591A1 (en) 2016-05-18
ES2816059T3 (es) 2021-03-31
US20160156939A1 (en) 2016-06-02
US20150139299A1 (en) 2015-05-21
AU2016206261A1 (en) 2016-08-04
AU2012276453B2 (en) 2016-05-05
PH12017501002B1 (en) 2017-10-02
KR101560549B1 (ko) 2015-10-16
US20150181224A1 (en) 2015-06-25
ZA201502760B (en) 2017-01-25
CA2975695A1 (en) 2013-01-03
PH12017500999A1 (en) 2017-10-02
RS56754B1 (sr) 2018-04-30
RU2654491C1 (ru) 2018-05-21
CN107835421A (zh) 2018-03-23
PL2728866T3 (pl) 2019-05-31
TR201902208T4 (tr) 2019-03-21
CN107835431B (zh) 2021-05-25
PL3306939T3 (pl) 2020-11-02
MX336876B (es) 2016-02-04
CY1121340T1 (el) 2020-05-29
US20150181225A1 (en) 2015-06-25
US9668001B2 (en) 2017-05-30
EP2728866A2 (en) 2014-05-07
TW201737713A (zh) 2017-10-16
EP3306939A1 (en) 2018-04-11
PH12017500999B1 (en) 2017-10-02
PH12017501000A1 (en) 2017-10-02
CN105357540B (zh) 2019-09-06
HRP20180051T1 (hr) 2018-02-09
RU2618511C1 (ru) 2017-05-04
AU2016206260B2 (en) 2017-10-19
TWI615020B (zh) 2018-02-11
TWI562618B (en) 2016-12-11
EP3306939B1 (en) 2020-08-05
US10091510B2 (en) 2018-10-02
JP5873201B2 (ja) 2016-03-01
MY160178A (en) 2017-02-28
BR112013033708A2 (pt) 2017-06-27
JP2015149773A (ja) 2015-08-20
US9247270B2 (en) 2016-01-26
HUE044112T2 (hu) 2019-09-30
MX337232B (es) 2016-02-18
CN107835421B (zh) 2020-08-11
AU2012276453A1 (en) 2014-01-30
ES2655917T3 (es) 2018-02-22
PT2728866T (pt) 2019-02-21
WO2013002555A2 (ko) 2013-01-03
MY160326A (en) 2017-02-28
BR122015021373A2 (pt) 2019-08-27
MY160181A (en) 2017-02-28
CA2840481A1 (en) 2013-01-03
JP2015149772A (ja) 2015-08-20
AU2018200070B2 (en) 2019-02-14
KR20180023939A (ko) 2018-03-07
PL3402206T3 (pl) 2020-07-13
AU2016206259B2 (en) 2017-07-13
KR20150046772A (ko) 2015-04-30
ZA201502761B (en) 2017-01-25
LT2728866T (lt) 2019-03-12
CN105357540A (zh) 2016-02-24
ZA201400647B (en) 2015-09-30
TW201701675A (zh) 2017-01-01
CA2975695C (en) 2019-02-05
BR122015021374A2 (pt) 2019-08-27
KR101560551B1 (ko) 2015-10-16
PT2884749T (pt) 2018-01-18
DK2728866T3 (en) 2019-03-18
JP5735710B2 (ja) 2015-06-17
AU2016206258B2 (en) 2017-05-25
KR20150046774A (ko) 2015-04-30
AU2016206259A1 (en) 2016-08-04
KR101560550B1 (ko) 2015-10-16
PH12017501001A1 (en) 2017-10-02
JP5934413B2 (ja) 2016-06-15
KR101835641B1 (ko) 2018-03-07
WO2013002555A3 (ko) 2013-04-11
HUE050522T2 (hu) 2020-12-28
CN107835431A (zh) 2018-03-23
PL2884749T3 (pl) 2018-04-30
KR20140146561A (ko) 2014-12-26
US9565455B2 (en) 2017-02-07
LT2884749T (lt) 2018-01-25
US20170237985A1 (en) 2017-08-17
NO3064648T3 (zh) 2018-02-24
ZA201502759B (en) 2017-01-25
HRP20190301T1 (hr) 2019-04-05
US9258571B2 (en) 2016-02-09
US10547842B2 (en) 2020-01-28
JP5873203B2 (ja) 2016-03-01
JP5873200B2 (ja) 2016-03-01
AU2018200070A1 (en) 2018-01-25
BR122015021375A2 (pt) 2019-08-27
ZA201502762B (en) 2022-11-30
KR101917239B1 (ko) 2018-11-09
KR101457399B1 (ko) 2014-11-04
MX2014000172A (es) 2014-02-19
CN105357541A (zh) 2016-02-24
CN107835432A (zh) 2018-03-23
EP2849445A1 (en) 2015-03-18
CN105554510B (zh) 2019-06-28
KR101560552B1 (ko) 2015-10-16
JP5873202B2 (ja) 2016-03-01
PH12017501002A1 (en) 2017-10-02
CY1119931T1 (el) 2018-12-12
CN103782597A (zh) 2014-05-07
JP2015149770A (ja) 2015-08-20
RU2014102581A (ru) 2015-08-10
CA2840481C (en) 2017-09-26
JP2014525166A (ja) 2014-09-25
MX337230B (es) 2016-02-18
US20150139332A1 (en) 2015-05-21
RS58373B1 (sr) 2019-03-29
EP2728866A4 (en) 2015-03-18
RU2689135C1 (ru) 2019-05-24
EP3013054A1 (en) 2016-04-27
CN107820098A (zh) 2018-03-20
JP2015149771A (ja) 2015-08-20
TW201813401A (zh) 2018-04-01
HUE038521T2 (hu) 2018-10-29
EP2884749B1 (en) 2018-01-10
AU2016206260A1 (en) 2016-08-04
EP3402206A1 (en) 2018-11-14
CN107835432B (zh) 2020-08-11
RU2586321C2 (ru) 2016-06-10
HUE051665T2 (hu) 2021-03-29
CN105554510A (zh) 2016-05-04
MY160180A (en) 2017-02-28
DK2884749T3 (en) 2018-01-22
ES2711671T3 (es) 2019-05-06
TW201309031A (zh) 2013-02-16
SI2884749T1 (en) 2018-03-30
MY160179A (en) 2017-02-28

Similar Documents

Publication Publication Date Title
TWI597975B (zh) 視訊解碼裝置
TWI590649B (zh) 視訊之算術解碼裝置
TWI615017B (zh) 熵編碼視訊的方法與裝置、以及熵解碼視訊的方法與裝置
TWI574550B (zh) 視訊解碼的方法