TW201143447A - Block type signalling in video coding - Google Patents

Block type signalling in video coding Download PDF

Info

Publication number
TW201143447A
TW201143447A TW100105533A TW100105533A TW201143447A TW 201143447 A TW201143447 A TW 201143447A TW 100105533 A TW100105533 A TW 100105533A TW 100105533 A TW100105533 A TW 100105533A TW 201143447 A TW201143447 A TW 201143447A
Authority
TW
Taiwan
Prior art keywords
syntax element
video
prediction
data
block
Prior art date
Application number
TW100105533A
Other languages
English (en)
Other versions
TWI493964B (zh
Inventor
Rahul P Panchal
Marta Karczewicz
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW201143447A publication Critical patent/TW201143447A/zh
Application granted granted Critical
Publication of TWI493964B publication Critical patent/TWI493964B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

201143447 六、發明說明: 【發明所屬之技術領域】 本發明係關於視訊編碼’且更特定而言係關於使用雙向 預測之視訊編碼技術。 本申請案主張2010年2月19曰申請之美國臨時申請案第 61/306,261號之權利,該案之全文以引用的方式併入本文 中。 【先前技術】 數位多媒體能力可併入至廣泛範圍之器件中,包括數位 電視、數位直播系統、無線通信器件、無線廣播系統、個 人數位助理(PDA)、膝上型電腦或桌上型電腦、平板型電 腦(tablet computer)、數位相機、數位記錄器件、視訊遊戲 器件、視訊遊戲控制台、蜂巢式電話或衛星無線電電話、 數位媒體播放器及其類似者。數位多媒體器件可實施視訊 編碼技術’諸如 MPEG-2、ITU-H.263、MPEG-4 或 ITU-H.264/MPEG-4第10部分(進階視訊編碼(Avc)),以更有效 地傳輸及接收或儲存及擷取數位視訊資料。視訊編碼技術 可經由空間及時間預測執行視訊壓縮以減少或移除視訊序 列中所固有之冗餘。藉由IS〇/IEC動晝專家群組(MpEG)& itu-t視訊編碼專家群組(VCEG)建立之視訊編碼聯合合作 小組(JCT-VC)所開發的新視訊標準(諸如,高效率視訊編 碼(HEVC)標準)繼續出現並演進。 在視訊編碼中,壓縮常包括空間預測、運動估計及運動 補償。框内編碼依賴於空間預測及諸如離散餘弦變換 154324.doc 201143447 (DCT)之變換編碼來減少或移除給定視訊圖框内的視訊區 塊之間的空間冗餘。框間編碼依賴於時間預測及變換編碼 來減少或移除視訊序列的連續視訊圖框之視訊區塊之間的 時間冗餘。經框内編碼之圖框(「I圖框」)常用作隨機存取 點以及用於其他圖框之框間編碼之參考。然而,I圖框通 常展現比其他圖框少之壓縮。 對於框間編碼’視訊編碼器執行運動估計以追蹤兩個或 兩個以上相鄰圖框或包括經編碼之視訊區塊的具有視訊資 訊之其他單元(諸如,圖框之片段)之間的匹配視訊區塊之 移動。經框間編碼之圖框可包括:預測性圖框(「Ρ圖 框」)’其可包括自前一圖框預測之視訊區塊;及雙向預 測性圖框(「Β圖框」),其可包括自視訊序列之前一圖框 及後一圖框預測之視訊區塊。術語r ρ圖框」及「Β圖框」 在早期編碼技術將預測限於特定方向的意義上為稍具歷史 性的《較新編碼格式及標準可不限制Ρ圖框或Β圖框之預測 方向。因此,術語「雙向」現指代基於參考資料之兩個或 兩個以上清單之預測,而不管此參考資料相對於正編碼之 資料之時間關係。 與諸如ITU Η.264之較新視訊標準一致,例如,雙向預 測可基於未必需要具有在時間上駐留於當前視訊區塊之前 及之後的資料的兩個不同清單。換言之,可自兩個資料清 單預測Β視訊區塊,該兩個資料清單可對應於來自兩個先 前圖框、兩個後續圖框,或一個先前圖框及一個後續圖框 之資料。相比之下,基於一個清單(亦即,一個資料結構) 154324.doc 201143447 一個預測性圖框(例 預測p視訊圖框,該一個清單可對應於 如,一個先前圖框或一個後續圖框)。 對於P視訊圖框及B視訊圖框,運動估計產生運動向量, •亥等運動向1指不視訊區塊相對於(多個)預測性參考圖框 或(多個)其他參考單元巾之對應預龍訊區塊之位移。運 動補償使用言亥等運動向#自該(等)預測性參考圖框或該 (4)多考單元產生預測視訊區塊。在運動補償之後藉由 自待編碼之原始視訊區塊減去預測視訊區塊來形成殘餘視 訊區塊。視訊編碼器通常應用變換、量化及熵編碼程序來 進步減小與殘餘區塊之傳達相關聯的位元速率。通常使 用I單元及P單元定義用於P單元及8單元之框間編碼之參考 區塊。 【發明内容】 本發明描述適用於雙向預測之視訊編碼及解碼技術。在 雙向預測中,基於預測性參考資料之兩個不同清單來預測 性地編碼及解碼一視訊區塊。在本發明之一態樣中,描述 用於將一視訊區塊之區塊類型自一編碼器用信號發送至一 解碼器之技術’其中該區塊類型之發信號包括分開地用信 號發送用於該視訊區塊之一分割區大小、用於該視訊區塊 之一第一預測方向’及(在一些情形中)用於該視訊區塊之 一第二預測方向。本發明之技術可將單獨語法元素用於用 信號發送該分割區大小、該第一預測方向及該第 二預測方 向。另外,描述用於將一子區塊類型自一編碼器用信號發 送至一解碼器之技術,其中用信號發送該子區塊類型亦可 154324.doc 201143447 包括使用單獨語法元素分開地用信號發送一分割區大小及 一預測方向。該等單獨語法元素可經個別地編碼且自該編 碼器傳輸至該解碼器。 在一實例中,本發明描述一種編碼一雙向視訊區塊(B視 訊區塊)之方法。該方法包含:產生用於該B視訊區塊之第 一預測資料;產生用於該B視訊區塊之第二預測資料;基 於一或多個速率-失真度量選擇該第一預測資料及該第二 預測資料中之一者;基於該選定預測資料,產生指示用於 該B視訊區塊之一分割區大小的一第一語法元素;基於該 選定預測資料,產生與該第一語法元素分開且指示用於該 B視訊區塊之一分割區之一預測方向的一第二語法元素; 及輸出該第一語法元素及該第二語法元素。 在另一實例中,本發明描述一種用於編碼一雙向視訊區 塊(B視訊區塊)之視訊編碼器。該視訊編碼器包含:一或 多個預測單元,該一或多個預測單元經組態以產生用於該 B視訊區塊之第一預測資料及用於該b視訊區塊之第二預 測資料;一速率-失真分析單元,其經組態以選擇該第一 預測資料及該第二預測資料中之待包括於位元串流中之一 者;及一或多個預測單元,該一或多個預測單元經組態以 基於該選定預測資料產生指示用於該B視訊區塊之一分割 區大小的一第一語法元素,且基於該選定預測資料產生指 示用於該B視訊區塊之一預測方向的一第一語法元素。 在另一實例中,本發明描述一種包含指令之電腦可讀儲 存媒體,該等指令在一處理器中執行時使該處理器執行一 154324.doc -6 - 201143447 雙向視訊區塊(B視訊區塊)之編碼。該編碼包含:產生用 於該B視訊區塊之第一預測資料;產生用於該B視訊區塊 之第二預測資料;基於一或多個速率·失真度量選擇該第 一預測資料及該第二預測資料中之一者;基於該選定預測 資料產生指示用於該B視訊區塊之一分割區大小的一第一 語法元素;基於該選定預測資料產生與該第一語法元素分 開且指示用於該B視訊區塊之一分割區之一預測方向的一 第二語法元素;及輸出該第一語法元素及該第二語法元 素。 在另一實例中,本發明描述一種用於編碼一雙向視訊區 塊(B視讯區塊)之器件。該器件包含:用於產生用於該3視 讯區塊之第一預測資料的構件;用於產生用於該B視訊區 塊之第二預測資料的構件;用於基於一或多個速率·失真 度量選擇該第-預測資料及該第二預測f料中之—者的構 件;用於基於該選定預測資料產生指示用於該城訊區塊 之-分割區大小的—第—語法元素的構件;及用於基於該
選定預測資料產生斑# @ - * X 王興6亥第一语法兀素分開且指示用於該Β 視訊區塊之一分史丨r? + . 刀。j &之一預測方向的一第二語法元素的構 件;及用於較f屮士方势 . 出u第一语法元素及該第二語法元素的構 件。 / |
歹,本發明描述一種解碼一雙向視訊區塊(E 視訊區塊)之方沬。#山 该方法包含:接收經編碼之視訊資 料,在該經編碼之相 見sfL _貝料中接收指示用以編碼該B視訊 區塊之一分割區+ 小之一第一語法元素及指示用以編碼該 154324.doc 201143447 B視訊區塊之一預測方向之一第二語法元素,其中該第一 語法元素與該第二語法元素分開;及至少部分地基於該所 接收之第一語法元素及該第二語法元素來解碼該B視訊區 塊0 在另-實例中’本發明描述-種用於解碼—雙向視訊區 塊(B視訊區塊)之視訊解碼器。該視訊解碼器包含:—預 測單元’其經組“接㈣編敎視訊資料,祕編碼之 視訊資料包含指示用以編碼該B視訊區塊之一分割區大小 之一第一語法元素及指示用以編碼該B視訊區塊之一預測 方向之-第二語法元素’其中該第一語法元素與該第二語 其經組態以基於該所接收 法元素分開;一運動補償單元 之第一語法元素及該第二語法元素來解碼該B視訊區塊。 在另一實例中,本發明描述一種包含指令之電腦可讀儲 存媒體,該等指令在-處理H巾執行時使域理器執行一 雙向視訊區塊(B視訊區塊)之解碼。該解碼包含:接收經 編碼之視訊資料;在該經編碼之視訊資料中接收指示用以 編碼該B視訊區塊之—分割區大小之一第一語法元素及指 示用以編碼該B視訊區塊之一預測方向之一第二語法元 素’其中該第-語法元素與該第二語法元素分開;及至少 部分地基於該所接收之第一語法元素及該第二語法元素來 解碼該B視訊區塊。 在另一實例中,本發明描述一種用於解碼一雙向視訊區 塊(B視區塊)之器件。該器件包含:用於接收經編碼之 視Λ資料的構件;用於接收指示用以編碼該Β視訊區塊之 154324.doc 201143447 ,—分割® 士 〇 °° '、之一第一語法元素及指示用以編碼該B視訊 區塊之一預測方向之一第二語法元素的構件,其中該第一 =、_ 、與該第一語法元素分開;及用於至少部分地基於 S 欠之第—3吾法元素及該第二語法元素來解碼該B視 訊區塊的構件。 可乂硬體、軟體、韌體或其組合來實施本發明中所描述 之技術。若以硬體來實施,則一裝置可實現為一積體電 處理器、離散邏輯或其任何組合。若以軟體來實 施,則軟體可執行於一或多個處理器(諸如,微處理器、 特殊應用積體電路(ASIC)、場可程式化閘陣列(FpGA)或數 位信號處理器(DSP))中。執行該等技術之軟體可最初儲存 於有形電腦可讀儲存媒體中^載人於處理器中並在處理器 中執行。 ° 在隨附圖式及下文之描述中闡述本發明之一或多個態樣 之細節。本發明中所描述之技術之其他特徵、目標及優點 將自該描述及圖式以及自申請專利範圍變得顯而易見。 【實施方式】 本發明描述適用於雙向預測之視訊編碼及解碼技術。在 雙向預測中,基於預測性參考資料之兩個不同清單預測性 地編碼及解碼視訊區塊。在本發明之一態樣中,描述用於 將一視訊區塊之區塊類型自一編碼器用信號發送至—解碼 器之技術,其中該區塊類型之發信號包括分開地用信號發 送用於該視訊區塊之分割區大小、用於該視訊區塊之第一 預測方向,及(在一些情形中)用於該視訊區塊之第二預測 J54324.doc -9- 201143447 方向。本發明之技術可將單獨語法元素用於用信號發送分 割區大小、第一預測方向及第二預測方向。另外,描述用 於將子區塊類型自一編碼器用信號發送至一解碼器之技 術,其中用信號發送該子區塊類型亦可包括使用單獨語法 凡素分開地用信號發送分割區大小及預測方向。該等單獨 浯法兀素可經個別地編碼且自編碼器傳輸至解碼器。 如本發明中所使用t單獨言吾法元素一般指π用以將複數 筆資訊(諸如,分龍大小及預測方向)自編碼器用信號發 送至解碼器的複數個語法元素。相比之下,聯合語法元素 指代用以將複數筆資訊自編碼器用信號發送至解碼器的單 -語法元素。舉例而言,與聯合語法元素可用以用信號發 送分割區大小及預測方向兩者的現有編碼方案相比,本發 明之技術包括使用第—語法元素來用冑號發送分割區大 小,且使用單獨的第二語法元素來用信號發送預測方向。 在一些情形中,聯合語法元素亦可為相對於另一語法元素 之單獨語法元素。舉例而言’用於用信號發送第一預測方 向及第一預測方向之聯合語法元素可為相對於用以用信號 發送分割區大小之語法元素的單獨語法元素。如將在下文 更羊’田地’述的,單獨語法元素可彼此獨立地編碼及處 理。舉例而言’兩個單獨語法元素可在傳輸之前經歷兩個 不同之熵編碼程序。 與使用聯合語法元素之編碼方案相比較,將單獨語法元 素用於用信號發送分割區大小及預測方向之編碼方案可更 易於擴展以用於供較大視訊區塊大小使用。舉例而言,如 154324.doc 201143447 本發明中所描述,與分開 方 用^號發送分割區大小及預測 .21 將新硯訊區塊大小或新分割區大 :二利用聯合語法元素之編碼方案中可能需要引入更 素。另外,與使用聯合語法元素相比較,在一 : ,使用早獨語法元素可歸因於改良之熵編碼而產 生編碼效率增益。 圖1為說明可實施本發明之技術的一例示性視訊編碼及 碼系統10的方塊圖。>圖1中所示,系統1〇包括經由通 仏頻道15將經編碼之視訊傳輸至目的地器件16之源器件 12。源器件12及目的地器件16可包含廣泛範圍之器件中的 任一者。在-些狀況下’源器件12及目的地器件16包含無 線通信器# ’諸如無線手機、所謂的蜂巢式或衛星無線電 電話或可經由通信頻道15傳達視訊資訊之任何器件,通信 頻道15可為或可不為無線的。然而,關於將用於B單元之 區塊類型及子區塊類型自編碼器用信號發送至解碼器的本 發明之技術不必限於無線應用或設定(setting)。 在圖1之實例中,源器件12可包括視訊源20、視訊編碼 器22、調變器/解調變器(數據機)23及傳輸器24。目的地器 件16可包括接收器26、數據機27、視訊解碼器28及顯示器 件30。根據本發明’源器件12之視訊編碼器22可經組態以 產生用以指示用於視訊區塊之分割區大小、第一預測方向 及第二方向的單獨語法元素’且另外產生用以指示用於子 區塊之分割區大小及預測方向之單獨語法元素。該等單獨 語法元素可經個別地編碼且自視訊編碼器22傳輸至視訊解 154324.doc 11 201143447 示選擇之單獨語法元素。 收之語法元素來執行適當 碼器28。視訊解碼器28可接收指 因此,視訊解碼器28可基於所接 視訊解碼。 圖1之所說明之系統1〇僅為一實例。本發明之發信號技 術可由支援雙向運動補償預測之任何編碼器件執行。源器 件12及目的地器件16僅為此等編碼器件之實例,其中源器 件12產生用於傳輸至目的地器件㈣經編碼之視訊資料。 在:Ϊ狀況下’器件12、16可以實質上對稱之方式操作, 使得器件12、16中之每—者包括視訊編瑪及解碼組件。因 此,系統H)可支援視訊器件12、16之間的單向或雙向視訊 傳輸(例如)以用於視訊串流傳輸、視訊播放、視訊廣播或 視訊電話。 源器件12之視訊源20可包括諸如視訊相機之視訊俘獲器 件、含有先前俘獲之視訊之視訊封存檔,或來自視訊内容 提供者之視訊饋入。作為另一替代例,視訊源2〇可產生基 於電腦圓形之資料作為源視訊,或實況視訊、經封存之視 Λ與電腦產生之視訊的、組合。在一些狀況了,若才見訊源2〇 為視訊相機,則源器件12與目的地器件16可形成所謂的相 機電話或視訊電話》在每一狀況下,可藉由視訊編碼器22 編碼經俘獲之視訊、經預先俘獲之視訊或電腦產生之視 訊。經編碼之視訊資訊可接著由數據機23根據通信標準 (諸如,分碼多重存取(CDMA)、正交分頻多工(〇FDM)或 另—通信技術或標準)進行調變,且經由傳輸器24傳輸至 目的地器件16。數據機23可包括各種混頻器、濾波器、放 154324.doc •12- 201143447 大器或經SX a十以用於信號調變之其他組件。傳輸器24可包 括經設計以用於傳輸資料之電路,包括放大器、濾波器及 一或多個天線。 目的地器件16之接收器26經由頻道15接收資訊,且數據 機27解調變該資訊。經由頻道15傳達之資訊可包括由視訊 編碼器22定義之資訊’該資訊亦可由與本發明—致之視訊 解碼器28使用。顯示器件30向使用者顯示經解碼之視訊資 料且可包3多種顯示器件中之任一者,諸如,陰極射線 管、液晶顯示器(LCD)、電漿顯示器、有機發光二極體 (OLED)顯示器或另一類型之顯示器件。 /圖1之實例中,通信頻道15可包含任何無線或有線通 媒體諸如射頻(RF)頻譜或一或多個實體傳輸線,或 無線媒體與有線媒體之㈣組合1此,數據機23及傳輸 器24可支援許多可能的無線協定、有線協定,或有線及無 線協定it仏頻道! 5可形成諸如區域網路(以N)、廣域網 路⑽N)或全球網路(諸如,包含—或多個網路之互連之網 際網路)之基於封包之網路的一部分。通信頻道15一般表 不用於將視5fl資料自源器件12傳輸至目的地器件W之任何 合適通仏媒體或不同通信媒體之集合。通信頻道15可包括 路由器、交換器、基地台或可用於促進自源器件12至目的 地器件16之通信的任何其他設備。 、扁I器22及視訊解碼器28可根據視訊壓縮標準(諸 新八ITU-T H.265標準)而操作。然而,本發明之技術 F於任何特疋編碼標準。儘管未在圖^中展示,但在一 】54324.doc •13- 201143447 些態樣中’視訊編碼器22及視訊解碼器28可各自與音訊編 碼器及解碼器整合,且可包括適當多工器-解多工器 (MUX-DEMUX)單元或其他硬體及軟體’以處置共同資料 串流或單獨資料串流中之音訊及視訊兩者的編碼。若適 用,則MUX-DEMUX單元可遵照ITU H.223多工器協定或 諸如使用者資料報協定(UDP)之其他協定。 視訊編碼器22及視訊解碼器28可各自實施為一或多個微 處理器、數位信號處理器(DSP)、特殊應用積體電路 (ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬 體、勤體或其任何組合。視訊編碼器22及視訊解碼器28中 之每一者可包括於一或多個編碼器或解碼器中,其中任一 者可整合為各別行動器件、用戶器件、廣播器件、伺服器 或其類似者中的組合之編碼器/解碼器(CODEC)之部分。 一視訊序列通常包括一系列視訊圖框。視訊編碼器2〇對 個別視訊圖框内之視訊區塊進行操作以便編碼視訊資料。 在一實例中’視訊區塊可對應於巨集區塊或巨集區塊之分 割區。巨集區塊為藉由ITU H.264標準及其他標準定義之 類型的視訊區塊。巨集區塊通常指代16x 16資料區塊,但 該術語亦通常用以一般指代具有ΝχΝ大小之任何視訊區 塊。ITU-T Η.264標準支援各種區塊大小(諸如,關於明度 分量之16x16、8x8或4x4及關於色度分量之8x8)之框内預 測,以及各種區塊大小(諸如,關於明度分量之16 X 16、 16x8、8x16、8x8、8x4、4x8及4x4及關於色度分量之對 應按比例調整之大小)之框間預測。在本發明中,「ΝχΝ」 154324.doc 14· 201143447 指代依據垂直尺寸與水平尺寸之區塊之像素尺寸(例如, 16x16像素)。一般而言,16xl6區塊將在垂直方向上具有 16個像素且在水平方向上具有16個像素。同樣地,NxN區 塊一般在垂直方向上具有N個像素且在水平方向上具有N 個像素’其中N表示正整數值。區塊中之像素可排列成列 及行。 新興ITU H.265標準定義用於視訊區塊之新術語。詳言 之,在使用ITU H.265之情況下,視訊區塊(或其分割區)可 被稱為「經編碼之單元」。在使用^仏丁 H.265標準之情況 下’可根據四元樹分割方案(quadtree partitioning scheme) 將最大經編碼之單元(LCU)劃分成愈來愈小 之經編碼之單 元(CU),且可將在該方案中定義之不同CU進一步分割成 所謂的預測單元(PU)。LCU、CU及PU為在本發明之意義 内之所有視訊區塊。亦可使用與ITU H.265標準或其他視 訊編碼標準一致的其他類型之視訊區塊。因此,片語「視 訊區塊」指代任何大小之視訊區塊。 視訊區塊可具有固定或變化之大小,且可根據指定編碼 標準而在大小上不同。每一視訊圖框可包括複數個片段。 每一片段可包括複數個視訊區塊,視訊區塊可配置成分割 區(亦被稱為子區塊)。根據上文提及之四元樹分割方案, N/2xN/2第一 CU可為NxN LCU之子區塊,且N/4XN/4第二 CU亦可為第一 cu之子區塊。N/8xN/8 PU可為第二CU之子 區塊。類似地’作為另一實例’小於16 X16之區塊大小可 被稱為16x16視訊區塊之分割區,或被稱為16><16視訊區塊 154324.doc -15- 201143447 之子區塊。同樣地,對於ΝχΝ區塊,小於ΝχΝ之區塊大小 可被稱為ΝχΝ區塊之分割區或子區塊。視訊區塊可包含像 素域中之像素資料之區塊,或(例如)在將諸如離散餘弦變 換(DCT)、整數變換、小波變換或概念上類似之變換的變 換應用於殘餘視訊區塊資料之後的變換域中之變換係數之 區塊,該殘餘視訊區塊資料表示經編碼之視訊區塊與預測 性視訊區塊之間的像素差。在一些狀況下,視訊區塊可包 含變換域中之經量化之變換係數的區塊。 較小視訊區塊可提供較好解析度,且可用於包括高層級 細節之視訊圖框的定位。較大視訊區塊可提供較大編碼效 率’且可用於包括低層級細節之視訊圖框的定位。可將片 段視為複數個視訊區塊及/或子區塊。每一片段可為視訊 圖框之可獨立解碼之視訊區塊系列。或者,圖框自身可為 可解碼之視訊區塊系列’或可將圖框之其他部分定義為可 解碼之視訊區塊系列。術語「視訊區塊系列」可指代視訊 圖框之任何可獨立解碼之部分,諸如,整個圖框、圖框之 片段、圖像群組(GOP)(亦被稱為序列),或根據適用編碼 技術定義之另一可獨立解碼之單元。 在基於框間之預測性編瑪之後且在任何變換(諸如,4χ4 或8x8整數變換或離散餘弦變換或dct)之後,可執行量 化。量化一般指代將係數量化以可能地減少用以表示該等 係數之資料之量的程序。該量化程序可減小與該等係數中 之一些或全部相關聯之位元深度。在量化之後,可(例如) 根據内容適應性可變長度編碼(CAVLC) '内容脈絡適應性 154324.doc • 16 - 201143447 二進位算術編碼(CABAC)或另一熵編碼方法來執行蝴編 碼。 本發明之技術尤其適用於利用雙向預測之B視訊區塊, 雙向預測可包括加權雙向預測及非加權雙向預測兩者。在 本發明中,術語r B單元」將用於一般指代任何類型之B 單元,其可包括B圖框、B片段,或包括至少一些b視訊區 塊之可能的其他視訊單元。 如上文提及,雙向預測為所謂的「B視訊區塊」基於兩 個不同資料清單之預測。B視訊區塊使用先前編竭之參考 圖像之兩個清單(清單〇及清單1}。此等兩個清單可各自含 有按時間次序之過去及/或未來經編碼之圖像。可按以下 若干種方式中之一者預測B視訊區塊:自清單〇參考圖像之 運動補償預測、自清單1參考圖像之運動補償預測,或自 清單0參考圖像及清單1參考圖像兩者之運動補償預測。為 得到清單0參考圖像與清單1參考圖像兩者之組合,分別自 清單〇參考圖像及清單1參考圖像獲得兩個運動補償參考區 域。 可自來自兩個先前圖框之資料的兩個清單、來自後續圖 框之資料的兩個清單或來自前一圖框之資料的一個清單及 來自後一圖框之資料的一個清單來預測B視訊區塊。即使 清單〇及清單1未必與一特定時間方向相關,是執行藉由清 單〇、清單1抑或清單〇及清單1兩者之運動補償的選擇仍通 常被稱為預測方向。與B視訊區塊相比,基於一個清單預 測P視訊圖框,該一個清單可對應於一個預測性圖框(例 154324.doc 17 201143447 如,一個先前圖框或一個後續圓框)。B圖框及P圖框可更 一般地被稱為P單元及B單元。P單元及B單元亦可以諸如 圖框之片段或圖框之部分的較小單元來實現β B單元可包 括B視訊區塊、p視訊區塊或I視訊區塊β p單元可包括p視 訊區塊或I視訊區塊^ I單元可僅包括I視訊區塊。 可使用加權雙向預測或非加權雙向預測來編碼利用雙向 預測(亦即’清單0及清單1兩者)之B視訊區塊。加權雙向 預測指代允許將加權因數指派給兩個不同清單之雔向預 測。每一清單可包含與一預測性圖框或其他視訊區塊系列 相關聯之一資料集合。在加權雙向預測中,在產生預測性 資料時一個清單可較重地加權。舉例而言,若該等清單中 之一者具有較類似於正編碼之視訊區塊之資料,則該清單 可比另一清單更重地加權。 對於根據(例如)ITU-T H.264之不同類型之加權雙向預 測,視訊編碼器22及視訊解碼器28可一船*松-# 取文後二種不同類 型之預測模式。第一預測模式(被稱為「預設加權預測」) 指代藉由一些預設之設定來預定義與兩個或兩個以上不^
清早相關聯之加權因數的加權預測β在_此业、W 二狀况下,預設 加權預測可將相等加權指派給該等清單中之每—者彳針 對預設加權預測模式亦可預定義不相等加權。 第二預測模式(被稱為「隱含加權預測」)指代基於與資 料相關聯之一些隱含因數定義與兩個或兩個以上不同清單 相關聯之加權因數的加權預測。舉例而言, 口 』稽由兩個不 同清單中之資料相對於正預測性地編碼之資料的相對時間 154324.doc • 18- 201143447 位置來定義隱含加權因數。在預設加權預測及隱含加權預 測兩!中,加權因數不包括於位元串流中。實情為,視訊 解碼益28可經程式化以知曉加權因數(對於預設),或可經 程式化以知曉導出加權因數之方式(對於隱含)。 第三預測模式(被稱為「顯式加權預測」)指代作為編碼 程序之部分動態地定義加權因數且將加權因數編碼至位元 串流中的加權預測。絲· μμ Α “ 權制,沈此而s,帛式加權預測不同於預設
加權預測及隱含加權預測彳丨L 催_例如,顯式加權預測產生經編 碼為位元串流之部分的加權因數。 僅呈現此等三個加權雙向預測模式以提供用於本發明中 所描述之發信號技術之背景。然而,觀本發明之技術亦 可結合非加權雙向預測或除所描述之彼等加權雙向預測模 式之外的加權雙向預測模式來實施。舉例而言,預期可使 用包括於H.265標準中之所有各種雙向預測模式來實施本 發明之技術。 視訊編碼器22可選擇得到有利速率·失真度量之視訊區 塊大小及分割區大小。根據本發明之態樣,視訊編碼器22 可判定用於視訊區塊之分龍之預測方向。若選取雙向預 測,則視訊編碼器22可進一步判定以上加權雙向預測模式 中之-者以用於視訊區塊之分割區。冑了選擇得到有利速 率-失真度量之視訊區塊大小,可針對具有不同分割方案 (亦即,不同分割區大小)之大視訊區塊(例如,32χ32、 64x64或更大)及小視訊區塊(例如,Uxl6或更小)兩者分析 速率失真度量。如下文將更多說明的,可將㈣視二區 154324.doc 19- 201143447 塊分割成單一 ΝχΝ分割區、兩個Ν/2χΝ分割區、兩個 NxN/2分割區或四個Ν/2χΝ/2分割區。在一些情形中,一 分割區可進一步加以分割。 對於經編碼之視訊區塊系列(諸如,圖棍或片段),編碼 器可比較具有不同大小及分割方案之視訊區塊(諸如,具 有多種分割方案之16x16視訊區塊、具有多種分割方案之 32x32視訊區塊,及具有多種分割方案之64x64視訊區塊) 之間的速率-失真度量。編碼器可接著選擇產生最好速率_ 失真之視訊區塊大小及分割方案’且使用選定視訊區塊大 小(亦即’具有最好速率-失真之視訊區塊大小)編碼該視訊 區塊。 該選擇可基於以三個或三個以上遍次(例如,使用16 X16 像素視訊區塊之第一遍次、使用32x32像素視訊區塊之第 二遍次,及使用64 X 64像素視訊區塊之第三遍次)編碼圖框 或片段’且比較每一遍次之速率-失真度量。以此方式, 對於給定視訊區塊系列(諸如,片段或圖框),編碼器可藉 由變化視訊區塊大小及分割方案且選擇產生最好或最佳速 率-失真之視訊區塊大小及分割方案來改良速率-失真。編 碼器可進一步傳輸用於視訊區塊系列之語法資訊(例如, 作為圖框標頭或片段標頭之部分),該語法資訊識別用於 視訊區塊系列中之視訊區塊之大小。在區塊標頭中,編碼 器可進一步傳輸識別所使用之分割方案及用於區塊之每一 分割區之預測方向的單獨語法元素。若將一區塊分割成4 個子區塊,則編碼器可在子區塊標頭中傳輸識別用於子區 154324.doc •20· 201143447 塊之分割方案及預測方向之單獨語法元素。 將此·#概念擴展至針對H.265而出現之術語,該選擇可 基於以三個或三個以上遍次(例如,使用16xl6 LCU之第一 遍次、使用32x32 LCU之第二遍次,及使用64x64 LCUi 第二遍次)編碼圖框或片段,且比較每一遍次之速率-失真 度量。以此方式,對於給定視訊區塊系列(諸如,片段或 圖框),編碼器可藉由變化LCU大小及分割方案且選擇產 生最好或最佳速率-失真之LCU大小及分割方案來改良速 率-失真。編碼器可進一步傳輸用於視訊區塊系列之語法 資訊(例如,作為圖框標頭或片段標頭之部分),該語法資 訊識別用於視訊區塊系列中之LCU大小。在LCU標頭中, 編碼器可進一步傳輸識別用於!之分割方案及用於LCU 之每一分割區之預測方向的單獨語法元素。若將一 Leu分 割成4個CU,則編碼器可在cu標頭中傳輸識別用於cui 分割方案及預測方向之單獨語法元素。 對於一些視訊圖框或片段,大視訊區塊可呈現實質的位 元速率節省且藉此在給定相對較低失真之情況下產生最好. 的速率-失真結果。然而,對於其他視訊圖框或片段,較 小視訊區塊可呈現較小失真,勝過速率_失真成本分析中 之位元速率。因此,在不同狀況下,(例如)取決於視訊内 容及複雜性,64x64、32x32或16x16可適用於不同視訊圖 框或片段。類似地,取決於視訊内容及複雜性,不同分割 方案亦可適用於不同視訊區塊。 可產生兩個或兩個以上單獨語法元素且將該兩個或兩個 154324.doc -21- 201143447 以上單獨語法元素編碼至位元率流中,以便識別用於視訊 區塊之分割區大小及用於分割區之一或多個預測方向。器 件12將該兩個或兩個以上單獨語法元素傳輸至解碼器μ。 解碼器28可解碼並解譯該(等)語法元素,且基於該(等)語 法元素’解碼器2 8可重建構視訊區塊。 圖2為說明與本發明一致的可執行技術之視訊編碼器^ 之實例的方塊圖。視訊編碼器5〇可對應於源器件12之視訊 編碼器22或不同器件之視訊編碼器。視訊編碼器5〇可執行 視訊圖框内之區塊的框内編碼及框間編碼,但為了說明容 易起見’框内編碼組件未展示於圖2中。框内編碼依賴於 空間預測以減小或移除給定視訊圖框内之視訊的空間冗 餘。框間編碼依賴於時間預測以減小或移除視訊序列之相 鄰圖框内之視訊的時間冗餘。框内模式(1模式)可指代基於 空間之壓縮模式,且諸如預測(P模式)或雙向(B模式)之框 間模式可指代基於時間之壓縮模式。 如圖2中所展示,視訊編碼器5〇接收待編碼之視訊圖相 或片段内之當前視訊區塊。在圖2之實例中,視訊編碼塞 50包括預測單元31(包括運動估 計單元32及運動補償單元 、變換單元38、量化單元40及 塊重建構,視訊編碼器5〇亦包 35)、記憶體34、加法器48 熵編碼單元46。對於視訊區 括逆量化單元42、逆變換單元料及加法器$卜視訊編碼器 亦可括解區塊遽波器(未圖示)以對區塊邊界進行滤 波’從而自經重建構之視訊移除方塊效應假影。必要時, 解區塊滤波器將通常對加法器51之輸出進行據波。 154324.doc •22- 201143447 在編碼程序期門 、 S,視訊編碼器50接收待編碼之視訊區 編瑪。if動彳^單元32及運動㈣單元35執行框間預測性 内古声㈣古什單元32與運動補償單元35可在預測單元31 内尚度地整合,作 出於說明目的而分開地展示。通常將運 動估計視為產生估士+ ^目士 r 汁視汛區塊之運動的運動向量的程序。 舉例而言,運動h b 1 _ ° $可扎示預測性圖框(或其他視訊區塊 系列)内之預測性區坡相 鬼相對於在當前圖框(或其他視訊區塊 系列)内正編碼之春命p 田】Q塊的位移。通常將運動補償視為 土於由運動估計判定之運動向量提取或產生預測性區塊之 程序。再次,運動估計單元32與運動補償單元^在功能 整。出於不範之目的’本發明中所描述之技術經描述 為由運動補償單兀35執行,但更一般地可由預測單元^之 任何部分執行。 運動估計單元32藉由比較待編碼之視訊區塊與—或多個 預測性視訊區塊系列(例如,依據時間或在相上的先前 及/或未來圖框)之視訊區塊來選擇待編碼之視訊區塊的適 當運動向量。作為-實例’運動估計單元32可以許多方式 來選擇Β圖框之運動向量。在—方式中,運動估計單元32 可自第一圖框集合(被稱為清單0)選擇先前或未來圖框,且 僅使用來自清單〇之此先前或未來圖框來判定運動向量。 或者,運動估計單元32可自第二圖框集合(被稱為清單丨)選 擇先前或未來圖框,且僅使用來自清單丨之此先前或未來 圖框來判定運動向量。在又一實例令,運動估計單元32可 自清單0選擇第一圖框及自清單1選擇第二圖框,且自清單 154324.doc -23. 201143447 〇之第一圖框及清單】之第二圖框選擇一或多個運動向量。 此第三種形式之預測可被稱為雙向預測性運動估計。用於 任何給定清單t選定運動向量可指向最類似於正編碼之視 訊區塊(例如,如由諸如預測性區塊之像素值相對於正編 碼之區塊之像素值的絕對差和(SAD)或丨方差和(咖)之度 量所定義)的預測性視訊區塊。 n \y%\ τ Τ Τ〜评叉冋運動估計以用 於視訊區塊,則可使用三種運動補償雙向預測性演算法或 模式來預測Β圖框或其部分(諸如,視訊區塊、巨集區塊、 LCU、CU及PU’或„框之任何其他離散及/或連續部 分)。第-運動補償雙向預測性演算法或模式(其通常被稱 為預設^預測)可涉及將預設權重施加至清^之第一圖 框及清早1之第二圖框的每_經識別之視訊區塊 π根據標準來程式化,且常針對預設加權預測而選定為 接著將第一圖框之加權區塊與第二圖框之加權區 鬼:在-起且除以用以預測_框之圖 在此例子中為二)。 u J ^ 單碼之參考圖像之兩個清單(清單。及清 來丄:各自含有按時間次序之過去及/或未 元中之(I塊冑。可按以下若干種方式中之—者預測8單 兀中之Q塊:自清單〇參考圖像 參考圖像之運動補償預測,•自清單動:=、自清單1 考圖像兩者之運動_測。===象/清單1參 單1參考圖像兩者之組合,分別自?單=參考圖像與清 目α单0參考圖像及清單1 154324.doc -24· 201143447 將使用其組合來預 參考圖像獲得兩個運動補償參考區域。 測當前區塊。 如所提及’ Β單元可允許三種類型之加權預測。為簡單 起見’在下文僅展示單向預測中之前向預測,但亦可使用 後向預測。預設加權預測可藉由分別用於單向預測及雙向 預測之以下方程式定義。 單向預測:pred(i,j)=pred〇(i,j) 雙向預測. 其中pred0(i,j)及predl(i,j)為來自清單〇及清單2之預測資 料。 隱含加權預測可藉由分別用於單向預測及雙向預測之以 下方程式定義。 單向預測:pred(i,j)=predO(i,j) 雙向預測:pred(i,j)=(predO(i,j)*w〇+predl(i,j)*wi+32)>>6 在此狀況下,藉由加權因數w0或w 1按比例調整每一預 測’其中基於清單0參考圖像及清單1參考圖像之相對時間 位置來計算wO及wl。 顯式加權預測可藉由分別用於單向預測及雙向預測之以 下方程式定義。 單向預測·· pred(i,j)=(pred0(i,j)*w0 + 2r-1)»r+ol 雙向預測: pred(i,j )=(predO(i ,j) * wO+pred 1 (i,j)* w 1 +2r)»(r+1 )+((〇 1 +〇2+1)»l) 154324.doc -25- 201143447 在此狀況下,加權因數藉由編碼器判定且在片段標頭中 傳輸,且〇1及〇2為分別針對清單〇參考圖像及清單1參考圖 像之圖像偏移。 下文之表1展示用於編碼B單元之16x16視訊區塊之23種 不同區塊類型(標示為〇至22) ’但相同概念可擴展至1<[><1^視 訊區塊。標示為「區塊類型」之行展示與用於識別區塊類 型之區塊類型編號分開的速記記法。標示為「分割區大 小」之行識別分割視訊區塊之方式(Ε)·16><16、16χ16、 8x16、16x8或8x8)。對於使用直接模式(D_16xl6)之區塊 類型’因為在解碼器處基於相鄰視訊區塊來判定運動向 量,所以無運動向量且因此無預測方向自編碼器用信號發 送至解碼器。對於包括一個分割區(亦即,分割區大小為 16 16)之區塊類型,標示為「預測方向〇」之行識別用於 該一個分割區之預測方向。對於包括兩個分割區(亦即, 分割區大小為8x16及16x8)之區塊類型,標示為「預測方 向〇」之行識別用於第一分割區之預測方向,且標示為 「預測方向1」之行識別用於第二分割區之預測方向。如 上文所論述,預測方向包括僅使用清單〇(L〇)、僅使用清 單1(L0) ’及使用清單0及清單1兩者的雙向預測性運動估 計(Bi)。 154324.doc -26- 201143447 區塊類型編號 區塊類型 分割區大小 預測方向0 預測方向1 0 B_Direct_16><16 D-16xl6 - - 1 B_L0_16xl6 16x16 L0 - 2 B_Ll_16xl6 16χ16 LI - 3 B_Bi_16xl6 16x16 Bi - 4 B_L0_L0_16x8 16x8 L0 L0 5 B_L0_L0_8xl6 8x16 L0 L0 6 B_L1_L1_16><8 16χ8 LI LI 7 B_L1_L1_8><16 8χ16 LI LI 8 B_L0_L1_16><8 16χ8 L0 LI 9 B L0 LI 8x16 8χ16 L0 LI 10 B_L1_L0_16><8 16χ8 LI L0 11 B_Ll_L0_8xl6 8χ16 LI L0 12 B_L0_Bi_16><8 16χ8 L0 Bi 13 B_L0_Bi_8xl6 8χ16 L0 Bi 14 B_Ll_Bi_16x8 16χ8 LI Bi 15 B_Ll_Bi_8xl6 8χ16 LI Bi 16 B_Bi_L0_16x8 16χ8 Bi L0 17 B_Bi_L0_8xl6 8χ16 Bi L0 18 B_Bi_Ll_16x8 16χ8 Bi LI 19 B_Bi_Ll_8xl6 8χ16 Bi LI 20 B_Bi_Bi_16x8 16x8 Bi Bi 21 B_Bi_Bi_8xl6 8χ16 Bi Bi 22 B_8x8 8χ8 - - 表1 替代具有單一唯一語法元素之上文的23種區塊類型中之 每一者(亦即,23個不同語法元素),本發明之技術包括將 單獨語法元素用於分割區大小、預測方向0及預測方向1中 154324.doc -27- 201143447 之每一者》因此,可將上文之23種區塊類型表示為5個分 割區大小(D-16X 16、16X 16、8 X 16、16X8及 8X 8)與 3個預測 方向(L0、L1及Bi)之組合。因此’使用選項12作為一實 例,對於使用16x8分割之視訊區塊(其中使用清單0預測第 一分割區及使用清單〇及清單1兩者預測第二分割區),可 產生三個單獨語法元素。第一語法元素可識別16x8分割; 第二語法元素可識別清單0(L0),且第三語法元素可識別 雙向預測(Bi)。 表1之區塊類型22對應於分割成4個8x8子區塊之16χ 16視 訊區塊’在該狀況下,每一子區塊可使用其自身之分割方 案。因此’回應於接收指示用於16x16視訊區塊之8x8分割 的語法元素’視訊編碼器將知曉尋找子區塊標頭中用以指 示子區塊類型之額外語法。如同上文之區塊類型實例,可 使用兩個或兩個以上單獨語法元素來用信號發送子區塊類 型。對於8 X 8子區塊’在指示分割區大小及用於子區塊之 分割區之預測方向方面,第一語法元素可識別分割區大 小’且第二語法元素可識別預測方向。下文之表2展示可 用於8x8子區塊之子區塊類型(標示為〇至13)之實例。標示 為「子區塊類型編號」之行給出用於每一子區塊類型之編 號’而標示為「子區塊類型」之行給出用於子區塊類型之 速°己δ己法。標不為「分割區大小」之行識別用於子區塊之 分割方案,且標示為「預測方向」之行識別用於子區塊之 分割區之預測方向。 154324.doc -28- 201143447
表2 ^ _實施中’如在表2之實例中,子區塊之兩個㈣八 割區可使用相同預測方向。舉例而言,表2之子 二 之兩個分割區且右4日n猫、B, + , ^ H㈣預測方向(LG)n在其他實施 中,子區塊之不同分割區可各自具有唯一預測方向,此情 形類似於表1但具有較小分割區。 -視訊區塊可具有多個分割層級。舉例而言,片段或圖 框可在片段標頭或圖框標頭中含有指示片段或圖框具有為 64x64之LCU大小的語法元素。每一 LCU(^ LCL^頭中發 k號)可具有指示分割區大小及用於LCU之分割區之一個 或兩個預測方向的單獨語法元素,或[(:1;標頭可具有指示 LCU分割成4個32x32 CU的語法元素。每一 32x32 CU(在 154324.doc -29· 201143447 cu標頭中發信號)可具有指示分割區大小及分割區之一個 或兩個預測方向的單獨語法元素,或可具有指示32χ32π 進一步分割成4個16><16 CU的語法元素。同樣地,每一 M6CU標頭可具有指示分割區大小及—個或兩個預測方 向之單獨語法it素,或指示進—步分割之語法元素。 如同在I中論述之區塊類_,可使用單獨|#法元素來 用信號發送表2之子區塊類型。替代具有單一唯一語法元 素之上文的13種區塊類型中之每一者(亦即,13個不同語 法元素),本發明之技術包括將單獨語法元素用於分割區 大小及預測方向中之每一者。因此,可將上文之13種區塊 類型表示為5個分割區大小(D_8x8、8χ8、4χ8、8m及私句 與3個預測方向(L0、L1及Bi)之組合。因此,使用選項7作 為一實例,對於使用4x8分割之視訊子區塊(其中分割區使 用清單1預測),可產生兩個單獨語法元素。第一單獨元素 可識別4x8分割,且第二單獨元素可識別清單1(1^)。 如本文中所描述,一旦藉由運動補償單元35識別所要預 測資料,視訊編碼器50便接著藉由自正編碼之原始視訊區 塊減去預測資料來形成殘餘視訊區塊。加法器48表示執行 此減法運算之一或多個組件。變換單元38將諸如離散餘弦 It換(DC Τ)或概念上類似之變锋的變換應用於殘餘區塊, 從而產生包含殘餘變換區塊係數之視訊區塊。舉例而言, 變換單元3 8可執行概念上蛘似於DCT之其他變換,諸如由 編碼標準所定義之變換。亦可使用小波變換、整數變換、 次頻帶變換或其他類型之變換。在任何狀況下,變換單元 154324.doc -30- 201143447 38將變換應用於殘餘區塊,從而產生殘餘變換係數之區 塊。變換可將殘餘資訊自像素域轉換至頻域。 量化單元40量化殘餘變換係數以進一步減小位元速率。 在量化之後,熵編碼單元46熵編碼經量化之變換係數。熵 編碼單元46進一步熵編碼藉由運動補償單元35產生之語法 元素舉例而吕,熵編碼單元46可執行内容適應性可變長 度編碼(CAVLC)、内容脈絡適應性二進位算術編碼 (CAB AC)或另一熵編碼方法。由於藉由運動補償單元”產 生之語法元素為單獨語法元素,因此每—語法元素可經歷 不同熵編碼程序°舉例而言,熵編碼單元46可維持用於應 用CAVLC至用於》割區大小之語法元素的統計及用於應用 CAVLC至用於預測方向之語法元素的單獨統計。在藉由熵 編碼單元46進行之熵編碼之後,可將經編碼之視訊傳輸至 另-器件或經封存以供補後傳輸㈣取。經編碼之位元串 流可包括經熵編碼之殘餘區塊、此等區塊之運動向量,及 諸如本文中所描述之語法之其他語法。 逆量化單元42及逆變換單元44分別應用逆量化及逆變換 以在像素域巾重建構殘餘“,以(❹)用於按上文所描 述之方式而稱㈣作參考區塊。加法器51將經重建構之殘 餘區塊加至藉由運動補償單元3 5產生之經運動補償之預測 區塊以產纟經重建構之視訊區&,以#儲存於記憶體34 中。該經重建構之視訊區塊可藉由運動估計單元32及運動 補償早7G 3 5用作框間編碼後續視訊圖框中之區塊的參考區 塊0 154324.doc •31- 201143447 圖3為更詳細地說明圖2之運動補償單元乃之實例的方塊 圖。如上文所論述,運動補償單元35很可能在預測單元Η 内與運動估計單元32高度地整合。因此,應理解,在本發 明中運動估計單元32與運動補償單元35之功能性之劃分係 僅出於解釋之目的。如圖3之實例中所展示,運動補償單 元35耦接至記憶體34,記憶體34將參考單元或參考圖框之 第一集合及參考單元或參考圖框之第二集合儲存為清單〇 52A及清單1 52B。另外,記憶體34可儲存經編碼之當前視 訊資料53。記憶體34可包含共用記憶體結構,或可能包含 若干不同記憶體、儲存單元、緩衝器,或促進本文中所論 述之任何資料之儲存的其他類型之儲存器。清單〇 52A及 清單1 52B為根據雙向預測與兩個不同預測性單元相關聯 之資料,例如,來自兩個不同圖框或片段或巨集區塊之資 料。再次,雙向預測未必限於任何預測方向,且因此清單 0 52A及清單1 52B可儲存來自兩個先前圖框或片段、兩個 後續圖框或片段,或一個先前圖框或片段及一個後續圖框 或片段的資料。此外,在一些狀況下,清單〇 52八及/或清 單1 52B可各自包括與多個圆框、片段或視訊區塊相關聯 之資料。凊單0 52A及/或清單1 52B簡單地為可能預測性資 料之兩個不同集合,且每一清單可包括一個圖框或片段, 或若干圖框、片段,或相對於正編碼之當前視訊區塊的在 任何方向上之視訊區塊。 如圖3中所展示,運動補償單元35包括用於判定待用於 編碼視訊區塊之分割區的雙向預測之類型的預設加權預測 154324.doc -32· 201143447 早疋54、隱含加權預測單元%及顯式加權預測單元& ^償單元35進—步包括用於判定應將前向預測(例如, >月早〇)抑或後向預測(例如,清單1}用於編碼視訊區塊之主 單_測單元嶋料丨預财元仏如先前所提及,錐向 預測可不限於特定時間方向。因此’雖然術語「前向」及 「後向」在論述預測時仍通常用以指代兩個不同清單,但 該兩個清單未必具有任何特定時間方向。單元⑷⑽以 別可執订如本文中所描述之預設加權預測、隱含加權預 測及顯式加權預測。速率-失真㈣)分析單元以可選擇此 等可能性中之加權預測資料中之一者,或可選擇清單〇預 測資料或清單1預測資料中一 術以促進選擇程序。中之“可貫施本發明之技 運動補償單元35亦可包括:捨位單元,其使單元心 60及62中之一或多者產生各別加權預測資料之捨 位版本及未捨位版本兩者;及偏移計算單元,其計算作為 正編碼之區塊之視訊區塊值的平均值與預測區塊之視訊區 塊值的平均值之間的差的偏移。出於簡單性目的,未在圖 3中展示捨位單元及偏移單元。 R_D分析單元64可分析單元54、56、58、60及62之不同 預測性資料’且可依據品質或依據速率及失真來選擇產生 ^結果之預㈣資料。取決於各種實施偏好,Μ分析 早二可經組態以平衡編碼速率(亦即,位元數目)與影像品 質等、及之競爭利益。R_D分析單元64輸出選定預測性資 料可經由加法器48(圖2)自經編碼之視訊區塊減去該選定 154324.doc -33- 201143447 預測性資料。如上文所論述,除了分析哪種類型之預測資 料產生最好結果之外,R_D分析單元64亦可分析經編碼之 早兀的哪個大小及用於經編竭之單元的哪種類型 生最好結果。 語法元素可用以告知解碼器運動補償單元35使用以編碼 資料之方式或方法,及因此解碼器應使用以產生加權預測 性資料的方式及方法。根據本發明,語法元素可包括用於 用W發送分割區大小及預測方向之單獨語法元素。若選 擇雙向預測,則語法元素(例如)可進一步指示是應使用預 設加權額、隱含加權制抑或顯式加權制。若應使用 顯式加權預測,則語法Μ可進-步識別加權因數及偏 移力權因數及偏移再次可為與顯式加權預測相關聯之加 權因數及偏移,或可為實際上藉由預設加權預測單元咐 隱含加權預測單元⑽義之加權因數外加來自偏移計算單 元62之偏移。 圖4為說明例示性視訊解碼器7〇之方塊圖視訊解碼器 70可執行與上文所描述之編碼技術互逆的解碼技術。視訊 解碼器70可包括嫡解碼單元72、預測單元75、逆量化單元 76、逆變換單it78、記憶體74及加法器79。預測單元別 包括運動補償(MC)單元88以及空間預測組件,出於說明之 簡單及容易起見未展示空間預測組件。 視訊解碼器7G可接㈣編碼之視訊資料,及指示分割區 大小及預測方向之兩個或兩個以上單獨語法元素。如本文 中所描述’基於該兩個或兩個以上單獨語法元素預測單 154324.doc •34· 201143447 元75之MC單元86可產生取決於兩個或兩個以上資料清單 之加權預測資料。視訊解碼器7〇可使用加權預測資料解碼 視訊資料’例如,藉由調用加法器79來將加權預測資料 (例如’預測區塊)加至殘餘資料(例如,殘餘區塊)。 -般而言’燏解碼單元72接收經編碼之位元串流且烟解 碼該位元Φ流以產生經量化之係數、運動資訊及其他語法 元素。根據本發明之技術’其他語法元素可包括用信號發 送分割1大小及_方向之兩個或兩個以上單獨語法元 素。將運動資訊(例如,運動向量)及其他語法轉發至預測 單元75以供產生預測性資料。預測單元乃執行盘本發明一 致之雙向預測,且根據所接收之語法元素可能地實施預設 加權預測、隱含加權預測或顯式加權預測。該等語法元素 可識別待使用之加權預測之類型、在使㈣式加權預測之 情況下之係數及偏移,且如先前所論述,1包括識別分割 區大小及預測方向之兩個或兩個以上單獨語法元素。 將經里化之係數自烟解碼單元72發送至逆量化單元% , 逆量化單元76執行逆量化。逆變換單元78接著將經解量化 之係數逆變換回至像素域以產生殘餘區塊。加法器Μ組合 藉由預測單元75產生之預測資料(例如,預測區塊)與來自 逆變換單元78之殘餘區塊以產生經重建構之視訊區塊,該 經重建構之視訊區塊可儲存於記憶體74中及/或自視訊解 碼器70輸出作為經解碼之視訊輸出。 圖5為說明與本發明一致的藉由視訊編碼器執行之實例 程序的流程圖。將自圖2之視訊編碼器5〇之觀點來描述圖 154324.doc -35- 201143447 5。如圖5中所展示,運動補償單元 :广生第二加權預測資_二 權預測資料選擇預測資料⑽)。詳言之,運動補^:加 可判定量化及平衡與第—加權預測㈣及第二 = =關聯之編碼速率及編物的用於第一 = 及第二加權預測資料之成本度量,且可依據速率及失= 具有最低成本之預測資料。視訊編碼器50可接著基 ==_視訊資料(5〇4)。舉例而言,視訊編碼 資料,且/^48U自正柄之視訊歸減去選定預測 資抖且接者調用變換單元38以用於變換、調用量化單元 ⑽用於量化’及調用熵編碼單元46以用於熵編碼經量化 且經變換之殘餘係數。在此狀況下,運動補償單心可產 生用以指示用於預测資料之分割區大小及預測方向之兩個 或兩個以上單猶任、土;主 皁獨”。法兀素,且可將此等語法元素轉遞至熵 編碼車元46以包括於經編碼之位元串流中(505)。圖5之程 序可針對片段或圖框内之複數個賴訊區塊或其他視訊區 塊系列而執行’且亦可針對B視訊區塊之子區塊而執行。 舉例而言,圖5之程序可針對LCU、CU或PU中之任一者而 執行》 圖6為說明與本發明一致的藉由視訊解碼器執行之實例 程序的流程圖。將自圖4之視訊解碼器7G之觀點來描述圖 6。如圈 6 Φ 6li* Θ - τ所展不’視訊解碼器接收經編碼之視訊資料 (601),且接收指示用以編碼視訊資料之分割區大小及預測 154324.doc •36- 201143447 方向之兩個或兩個以上單獨語法元素(602)。詳言之,熵解 碼單元72可接I經編碼之位元串流,該經編碼之位元串流 包括視訊資料及該兩個或兩個以上單獨語法元素。在熵解 碼之後,熵解碼單元72可輸出視訊資料作為經量化之變換 係數經量化之變換係數藉由單元76逆量化且藉由單元78 逆變換。熵解碼單元72可將語法元素輸出至預測單元乃, 語法兀素包括指示用以編碼視訊資料之分割區大小及預測 方向之該兩個或兩個以上單獨語法元素、運動向量及可能 其他語法。 預測單元75調用運動補償單元86以進行基於區塊之預測 性解碼。在進行此操作時,運動補償單元86基於指示分割 區大小及預測方向之該兩個或兩個以上單獨語法元素產生 加權預測資料(6 0 3 )。視訊解碼器7 〇可接著使用加權預測資 料解碼視訊資料(604)。詳言之,視訊解碼器7〇可調用加法 器79以組合加權預測資料(例如,預測區塊)與殘餘視訊資 料(例如,殘餘區塊)’以便產生視訊資料夂重建構(例如, 經重建構之視訊區塊p圖6之程序可針對片段或圖框内之 複數個B視訊區塊或其他視訊區塊系列而執行,且亦可針 對B視訊區塊之子區塊而執行。舉例而言,圖5之程 7 斜 對LCU、CU或PU中之任一者而執行。 本發明之技術可實施於廣泛多種器件或裝置中,包括 線手機及積體電路(ic)或一組ic(亦即,晶片組、。 無 ^ 任何乡且 件、模組或單元已描述為經提供以強調功能態樣, , 且禾必 需要由不同硬體單元實現。亦可以硬體、軟體、韌 A其 154324.doc -37· 201143447 任何組合來實施本文中所描述之技術。可將被描述為模 、且單兀或組件之任何特徵一起實施於整合式邏輯器件中 或分開地實施為離散但可交互操作之邏輯器件。在—些狀 況下,可將各種特徵實施為積體電路器件(諸如’積體電 路晶片或晶片組)。 若以軟體來實施’則該等技術可至少部分地藉由電腦可 讀媒體來實現,該電腦可讀媒體包含在處理器中執行時執 订上述方法中之-或多者的指令。該電腦可讀媒體可包含 電腦可讀儲存媒體且可形成電腦程式產品之部分,該電腦 程式產品可包括封裝材料。該電腦可讀儲存媒體可包含隨 機存取記憶體(RAM)(諸如,同步動態隨機存取記憶體 (SDRAM))、唯讀記憶體(R〇M)、非揮發性隨機存取記憶 體(NVRAM)、電可抹除可程式化唯讀記憶體(EEPR〇M)、 快閃記憶體、磁性或光學資料儲存媒體,及其類似者。或 者或另外’該等技術可至少部分地藉由攜載或傳達呈指令 或資料結構之形式的程式崎且可由電腦存取、讀取及/或 執行的電腦可讀通信媒體來實現。 程式碼或指令可藉由諸如以下各者之一或多個處理器來 執打:-或多個數位信號處理器_)、通用微處理器、 特殊應用積體電路(ASIC)、場可程式化邏輯陣列(PGA), 或其他等效積體或離散邏輯電路。因&,如本文中所使用 之術語「處理器」可指代上述結構或適於實施本文中所描 述之技術的任何其他結構中之任一者。另外,在一些態樣 中,本文中所描述之功能性可提供於經組態以用於編碼及 154324.doc -38· 201143447 專用軟體模組或硬體模組内,或併入於組合之視訊 編碼解竭器中。又,該等技術可完全實施於—或多個電路 或邏輯元件中。 本發明亦預期多種積體電路器件中之任一者,該等積體 電路器件包括用以實施本發明中所描述之技術中的一或多 者的電路。可將此電路提供於單一積冑電路晶片中或提供 於位於所謂的晶片組中之多個可交互操作之積體電路晶片 中。可將此等積體電路器件用於多種應用中,該等應用中 之二可包括在無線通信器件(諸如,行動電話手機)中之 使用。 已描述本發明之各種實施例。此等及其他實施例係在以 下申請專利範圍之範嘴内。 【圖式簡單說明】 圖1為說明可實施本發明之技術的一實例視訊編碼及解 碼系統的方塊圖。 圖2為說明與本發明一致的可執行技術之視訊編碼器之 實例的方塊圖。 圖3為更詳細地說明運動補償單元之實例的方塊圖。 圖4為說明與本發明一致的可執行技術之視訊解竭器之 實例的方塊圖。 圖5為說明與本發明一致的藉由視訊編碼器執行之程序 之實例的流程圖。 圖6為說明與本發明一致的藉由視訊解碼器勃 订之程序 之實例的流程圖。 154324.doc -39- 201143447 【主要元件符號說明】 10 視訊編碼及解碼系統 12 源器件/視訊器件 15 通信頻道 16 目的地器件/視訊器件 20 視訊源 22 視訊編碼器 23 調變器/解調變器(數據機) 24 傳輸器 26 接收器 27 數據機 28 視訊解碼器 30 顯示器件 31 預測單元 32 運動估計單元 34 記憶體 35 運動補償單元 38 變換單元 40 量化單元 42 逆量化單元 44 逆變換單元 46 烟編碼单元 48 加法器 50 視訊編碼1§ 154324.doc -40- 201143447 51 加法器 52A 52B 53 54 56 58 60 62 64 70 72 74 75 76 78 79 清單〇 清單1 當前視訊資料 預設加權預測單元 隱含加權預測單元 顯式加權預測單元 清單〇預測單元 清單1預測單元 速率-失真(R-D)分析單元 視訊解碼器 熵解碼單元 記憶體 預測單元 逆量化單元 逆變換單元 加法器 86 運動補償(MC)單元 154324.doc •41 -

Claims (1)

  1. 201143447 七、申請專利範圍: 1. 一種編碼一雙向視訊區塊(B視訊區塊)之方法,該方法包 含: 產生用於該B視訊區塊之第一預測資料; 產生用於該B視訊區塊之第二預測資料; 基於一或多個速率-失真度量來選擇該第一預測資料及 該第二預測資料中之一者; 基於該選定預測資料’產生指示用於該B視訊區塊之 一分割區大小的一第一語法元素; 基於該選定預測資料,產生與該第一語法元素分開且 才曰不用於該B視訊區塊之一分割區之一預測方向的—第 一語法元素;及 輸出該第一語法元素及該第二語法元素。 ’其中選擇該第一預測資料及該第二
    ,、< w 调迷平—失異度量係至少部分地基於 與該第-預測資料及該第二預測資料中之每一者相二 的一編碼速率及—編碼品質。 2.如凊求項1之方法 3.如请求項1之方法 一第一運動向量, 二運動向量。 ,其中產生該第一預測資料包含判定 且產生該第二預測資料包含判定—第 如睛求項3之方法 分地基於該第一 其中產生該第二語法元素係至少部 運動向量或該第二運動向量中之哪—者 154324.doc 201143447 對應於該選定預測資料 5·如請求項〗之方法,其中產生該第 -第-分割區大小,且產峰”⑺,資枓包含判疋 第二分割區大小。產生該第-預測資料包含判定- 6·如請求項5之方法’其中產生該第—語 分地基於該第一分割丨素係至^泮 H 大小或该第二分割區大小中之哪 一者對應於該選定預測資料。 7.如請求項1之方法,1中輪屮兮 語法元素包含:^出5亥第一邊法元素及該第二 輸出指示該第-語法元素之第一複數個位元;及 :出和不該第二語法元素之第二複數個位元,該第一 '個位兀與該第二複數個位元彼此獨立。 奪长項1之方法,其中該預測方向係選自由以下各者 、·且成之預測方向之—雜知. 群組·一第—清單、—第二清單, 及该第-清單及該第二清單兩者。 9·如請求項1之方法,其進一步包含: 基於該選定預測資料,產生用於該Β視訊區塊之一第 -分割區之-第二預測方向的一第三語法元素。 1〇·如請求項1之方法,其進一步包含: 對該第-語法元素執行一熵編碼程序。 11·如請求項10之方法’其進一步包含: 對該第二語法元素執行―第二熵編媽程序。 12. —種用於編碼一罅 。 又呵说汛區塊(Β視訊區塊)之視訊編碼 器,該視訊編碼器包含. 154324.doc 201143447 或夕個預測單疋’該一或多個預測單元經組態以產 生;於該⑽訊區塊之第-預測資料及用於該Β視訊區塊 之第二預測資料; -速率-失真分析單元,其經組態以選擇該第一預測資 料及該第二預測資料中之待包括於位元串流中之一者;及 一或多個預測單元,該―或多個預測單it經組態以基 於該較預測資料產生指示用於該B視訊區塊之一分割 ^大小的—第一語法元素’且基於該選定預測資料產生 指不用於該8視訊區塊之—預測方向的-第-語法元 素。 13. 14. 15. 16. 如=求項12之視訊編碼器,其中該速率·失真分析單元經 進-步組態以基於針對該第一預測資料及該第二預測資 料中^每—者評估—或多個速率-失真度量而選擇該第-預測育料及該第二預測資料中之該一者,且其中該一或 夕個速率-失真度量係至少部分地基於與該第一預測資料 及該第二預測資料t之每—者相關聯的—編碼速率及一 編碼品質。 =4求項12之視訊編碼器,其中產生該第—預測資料包 3判疋—第-運動向量’且產生該第二預測資料包含判 定一第二運動向量。 如凊求項14之視訊編碼器,其中產生該第二語法元素係 至少部分地基於該第一運動向量或該第二運動向量中之 哪一者對應於該選定預測資料。 如月求項12之視訊編碼器,其中產生該第一預測資料包 154324.doc 201143447 含判定一第一分割區大小, 八j且產生該第二預測資料包含 判定一第二分割區大小。 17. 如4求項16之視訊編碼器’其中產生該第—語法元素係 至少部分地基於該第-分割區大小或該第二分割區大小 中之哪—者對應於該選定預測資料。 18. 如請求項12之視訊編碼器,其中經組態以產生該第一語 法元素及該第二語法元素之該一或多個預測單元經組態 以輸出指示該第-語法元素之第—複數個位元且輸出指 示該第二語法元素之第二複數個位元,該第一複數個位 元與該第二複數個位元彼此獨立。 19. 如凊求項12之視汛編碼器,其中該預測方向係選自由以 下各者組成之預測方向之一群組:一第一清單、一第二 清單’及該第一清單及該第二清單兩者。 20·如請求項12之視訊編碼器,其中經組態以產生該第一語 法元素及該第二語法元素之該一或多個預測單元經進一 步組態以基於該選定預測資料產生用於該B視訊區塊之 一第二分割區之一第二預測方向的一第三語法元素。 21. 如請求項12之視訊編碼器,其進一步包含: 一燏編碼模組,其經組態以對該第一語法元素執行一 第一熵編碼程序》 22. 如請求項21之視訊編碼器,其中該熵編碼模組經進一步 組態以對該第二語法元素執行一第二熵編碼程序。 23. —種包含指令之電腦可讀儲存媒體,該等指令在一處理 器中執行時使該處理器執行一雙向視訊區塊(B視訊區塊) 154324.doc -4. 201143447 之編碼,該編碼包含: 產生用於該B視訊區塊之第一預測資料; 產生用於該B視訊區塊之第二預測資料; 基於一或多個速率-失真度量來選擇該第一預測資料及 該第一預測資料中之'一者; 基於該選定預測資料產生指示用於該B視訊區塊之一 分割區大小的一第一語法元素; 基於該選定預測資料產生與該第一語法元素分開且指 示用於該B視訊區塊之一分割區之一預測方向的一第二 語法元素;及 輸出該第一語法元素及該第二語法元素。 24. 25. 26. 27. 如凊求項23之電腦可讀儲存媒體,其中選擇該第一預測 資料及該第二預測資料中之該一者包含針對該第一預測 育料及該第二預測資料中之每一者評估該一或多個速率_ 失真度量,且其中該一或多個速率_失真度量係至少部分 地基於與該第一預測資料及該第二預測資料中之每一者 相關聯的一編碼速率及一編碼品質。 如請求項23之電腦可讀健存媒體,其中產生該第一預測 資料包含判H運動向量,且產生該第二預測資料 包含判定一第二運動向量。 如請求項25之電腦可讀儲存媒體,其中產生該第二語法 元素係至少部分地基於該第一運動向量或該第二運動向 量中之哪一者對應於該選定預測資料。 如請求項23之電腦可讀儲存媒體,其中產生該第一預測 154324.doc 201143447 資料包含狀-第-分割區大小且產生該第二預測資料 包含判定一第二分割區大小。 28. 如請求項27之電腦可讀儲存媒體,其中產生該第一語法 元素係至少部分地基於該第一分割區大小或該第二分割 區大小中之哪一者對應於該選定預測資料。 29. 如請求項23之電腦可讀儲存媒體,其中輸出該第一語法 元素及該第二語法元素包含: 輸出指示該第一語法元素之第一複數個位元;及 輸出指不該第二語法元素之第二複數個位元,該第一 複數個位元與該第二複數個位元彼此獨立。 3〇_如請求項23之電腦可讀儲存媒體,其中該預測方向係選 自由以下各者組成之預測方向之一群組:一第—清單、 一第二清單,及該第一清單及該第二清單兩者。 31. 如請求項23之電腦可讀儲存媒體,其進一步包含: 基於該選定預測資料,產生用於該B視訊區塊之一第 二分割區之一第二預測方向的一第三語法元素。 32. 如請求項23之電腦可讀儲存媒體,其進一步包含: 對該第一語法元素執行一熵編碼程序。 33. 如請求項32之電腦可讀儲存媒體,其進一步包含: 對該第二語法元素執行一第二熵編碼程序。 34. —種用於編碼一雙向視訊區塊(B視訊區塊)之器件,嗲器 件包含: / 用於產生用於該B視訊區塊之第一預測資料的構件. 用於產生用於該B視訊區塊之第二預測資料的構件. 154324.doc -6 - 201143447 用於基於一或多個速率-失真度量選擇該第-預測資料 及該第二預測資料中之一者的構件; 用於基於該選定預測資料產生指示用於該B視訊區塊 之一分割區大小的一第一語法元素的構件,· 用於基於該選定預測資料產生與該第一語法元素分開 且指示用於該B視訊區塊之-分割區之-預測方向的一 第二語法元素的構件;及 用於輸出該第一語法元素及該第二語法元素的構件。 35.如請求項34之器件,其中該用於選擇該第一預測資料及 該第二預測資料中之該一者的構件包含用於針對該第一 預測資料及該第二預測資料中之每—者評估該一或多個 速率-失真度量的構件,且其中該_或多個速率-失真度 量係至少部分地基於與該第—預測資料及該第二預測= 料中之每-者相關聯的—編碼速率及一編碼品質。 %如請求項34之器件’其中該用於產生該第—預測資料的 構件包含用於判定-第—運動向量的構件,且該用於產 生該第二預測資料的構件包含用於判定—第二運動向量 的構件。 3'如請求項36之器件’其中該用於產生該第二 構件至少部分地基於今第 .g ^ 、 乂 I刀地暴於。亥第-運動向量或該第二運動向量 中之哪-者對應於該選定預測f料來產生該第二語法_ 素。 。几 38.=ίΓ之器件,其中該用於產生該第一預測資料的 構件包含用於判定一第—分割區大小的構件,且該用於 154324.doc 201143447 料的構件包含用於判定一第二分割區 產生該第二預測 大小的構件》 39·如請求項38之器件,其中 爐杜;p, V , 於產生該第一語法元素的 構件至少部分地基於該第〒 女丨击 ^ Q大小或該第二分割區 大小中之哪一者對應於該選 法元素。 ^疋預冽資料來產生該第一語 4〇·如請求項34之器件,其中 辞笛Λ i -用於輸出該第一語法元素及 k第—语法凡素的構件 各々咕 L以輪出指示該第一語法元 素之第一複數個位元且輸出 _ 铷出扎不該第二語法元素之第二 複數個位元’該第一複數個你-办 ㈣個位%與該第二複數 此獨立。 41. 如請求項34之器件,其中钤猫、B,‘ 、中該預測方向係選自由以下各者 組成之預測方向之-群組:_第—清單、一第 , 及該第一清單及該第二清單兩者。 42. 如§青求項34之器件’其進—步包含. 用於基於該選定預測資料產生用於該B視訊區塊之一 第二分割區之一第二預測方向的一第三語法元素的構 件0 43. 如請求項34之器件,其進一步包含· 用於對該第一語法元素執行一熵編碼程序的構件。 44. 如請求項43之器件,其進一步包含: 用於對該第二語法元素執行一第二熵編碼程序的構 件。 45. —種解碼一雙向視訊區塊(B視訊區塊)之方法,該方法包 154324.doc 201143447 含: 接收經編碼之視訊資料; 在該經編碼之視訊資料中接收指示用以編碼該B視訊 區塊之一分割區大小之一第一語法元素及指示用以編碼 該B視訊區塊之一預測方向之一第二語法元素,其中該 第一語法元素與該第二語法元素分開;及 至少部分地基於該所接收之第一語法元素及該第二語 法元素來解碼該B視訊區塊。 46. 47. 48. 49. 50. 如請求項45之方法,其中解碼該b視訊區塊包含至少部 刀地基於該第一浯法元素及該第二語法元素產生預測資 料。 如洧求項45之方法 語法元素包含: 接收指示該第-語法元素之第一複數個位元;及 接收指示該第二語法元素之第二複數個位元,該第一 複數個位元與該第二複數個位元彼此獨立。 如請求項45之方法’其中該預測方向係選自由以下各者 組成之預測方向之一群組:一第一清單、一第二清單, 及该第一清單及該第二清單兩者。 如請求項45之方法,其進一步包含: 在s亥經編碼之視訊資料中 _ ⑼夕@ 中接收^不用以編碼該B視訊 塊之一第二預測方向的-第三語法元素。 如凊求項45之方法’其進_步包含·· 對該第-語法元純行—熵解碼程序。 154324.doc 201143447 5 1.如请求項50之方法,其進一步包含: 對該第二語法元素執行一第二熵解碼程序。 52· —種用於解碼一雙向視訊區塊(B視訊區塊)之視訊解碼 器,該視訊解碼器包含: 一預測單元,其經組態以接收經編碼之視訊資料,該 經編碼之視訊資料包含指示用以編碼該B視訊區塊之— 分割區大小之一第一語法元素及指示用以編碼該B視訊 區塊之一預測方向之一第二語法元素,其中該第一語法 元素與該第二語法元素分開; 一運動補償單元,其經組態以基於該所接收之第一語 法兀素及該第二語法元素來解碼該B視訊區塊。 53. 如請求項52之視訊解碼器,該運動補償單元經組態以至 少部分地基於該第一語法元素及該第二語法元素產生預 測資料。 54. 如請求項52之視訊解碼器,其中該預測單元經組態以接 收指示該第-語法元素之第一複數個位元且接收指示該 第二語法元素之第二複數個位元,該第—複數個位元與 該第二複數個位元彼此獨立。 55. 如請求項52之視訊解碼器,其中該預測方向係選自由以 下各者組成之預測方向之一群組:一第—清單、一第二 清單’及該第一清單及該第二清單兩者。 56. 如請求項52之視訊解碼器,其中該預測單元經進一步組 態以接收用於該B視訊區塊之一第二分割區之一第二預 測方向的一第三語法元素。 154324.doc 201143447 57·如請求項52之視訊解碼器,其進一步包含: 一熵解碼單元,其經紐能 、,“以對該第一語法元素執行一 第一熵解碼程序。 58·如請求項57之視訊解碼器,其中該熵解碼單元經進一步 組態以對該第二語法元素執行一第二熵解碼程序。 认:種包含指令之電腦可讀儲存媒體,該等指令在一處理 器中執仃時使該處理器執行—雙向視訊區塊(Β視訊區塊) 之解碼,該解碼包含: 接收經編碼之視訊資料; 在該經編碼之視訊資料_接收指示用以編碼該Β視訊 區塊之分割區大小之一第一語法元素及指示用以編碼 該Β視訊區塊之一預測方向之一第二語法元素,其令該 第一語法元素與該第二語法元素分開;及 至少部分地基於該所接收之第一語法元素及該第二語 法元素來解碼該Β視訊區塊β, 60.如請求項59之電腦可讀儲存媒體,其中解碼該Β視訊區 塊包含至少部分地基於該第一語法元素及該第二語法元 素產生預測資料。 61. 如請求項59之電腦可讀儲存媒體,其中接收該第一語法 元素及該第二語法元素包含: 接收指示該第一語法元素之第一複數個位元;及 接收指示該第二語法元素之第二複數個位元,該第一 複數個位元與該第二複數個位元彼此獨立。 62. 如請求項59之電腦可讀儲存媒體,其中該預測方向係選 154324.doc -11- 201143447 自由以下各者組成之預測方向之一群組:一第一清單、 一第二清單,及該第一清單及該第二清單兩者。 63. 如請求項59之電腦可讀儲存媒體,其中該解碼進一步包 含: 在該經編碼之視訊資料中接收指示用以編碼該B視訊 區塊之一第二預測方向的一第三語法元素。 64. 如請求項59之電腦可讀儲存媒體,其中該解碼進一夕包 含; 對該第一語法元素執行一熵解碼程序。 65. 如請求項64之電腦可讀儲存媒體,其中該解碼進一少包 含: 對該第二語法元素執行一第二熵解碼程序。 66. -種用於解碼一雙向視訊區塊(B視訊區塊)之器件,該器 件包含: 用於接收經編碼之視訊資料的構件; 用於接收指示用以編碼該B視訊區塊之一分割區大小 第°°法元素及指示用以編碼該B視訊區塊之一預 測方向之一第二語法元素的構件,纟中該第一語法元素 與該第二語法元素分開;及 用於至少部分地基於該所接收之第一語法元素及該第 一 °。法元素來解碼該B視訊區塊的構件。 67·如請=項66之器件’其中該用於解碼該倾訊區塊的構 牛L 3用於至少部分地基於該第—語法元素及該第二語 法元素產生預測資料的構件。 154324.doc •12- 201143447 68. 如請求項66之器件,其中該用於接收該第一語法元素及 該第二語法元素的構件包含: 用於接收指不該第一扭法开去+姑 ^ 法兀素之第一複數個位元的構 件;及 用於接收指示該第二語法元辛夕苗 *几京之第二複數個位元的構 件’該第-複數個位it與該第二複數個位元彼此獨立。 69. 如請求項66之器件,其中該預測方向係選自由以下各者 組成之預測方向之-群組:一第—清單、一第二清單, 及該第一清單及該第二清單兩者。 70. 如請求項66之器件,其進一步包含·· 用於接收指示用以編碼該B視訊區 匕坭之一第二預測方 向的一第三語法元素的構件。 71. 如請求項66之器件,其進一步包含: 用於對該第-語法^素執行i解碼⑽的構件。 72. 如請求項71之器件,其進一步包含: 用於對該第二語法元素執行—筮_ 件。 C帛-熵解碼程序的構 154324.doc -13·
TW100105533A 2010-02-19 2011-02-18 在視訊編碼中的區塊類型發信號 TWI493964B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US30626110P 2010-02-19 2010-02-19
US13/029,967 US8995527B2 (en) 2010-02-19 2011-02-17 Block type signalling in video coding

Publications (2)

Publication Number Publication Date
TW201143447A true TW201143447A (en) 2011-12-01
TWI493964B TWI493964B (zh) 2015-07-21

Family

ID=44476475

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100105533A TWI493964B (zh) 2010-02-19 2011-02-18 在視訊編碼中的區塊類型發信號

Country Status (11)

Country Link
US (1) US8995527B2 (zh)
EP (1) EP2537344B1 (zh)
JP (1) JP5642806B2 (zh)
KR (1) KR101384077B1 (zh)
CN (1) CN102783150B (zh)
BR (1) BR112012020733B1 (zh)
DK (1) DK2537344T3 (zh)
ES (1) ES2757703T3 (zh)
HU (1) HUE047076T2 (zh)
TW (1) TWI493964B (zh)
WO (1) WO2011103482A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI561063B (en) * 2012-01-30 2016-12-01 Samsung Electronics Co Ltd Apparatus for decoding video

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101791078B1 (ko) 2010-04-16 2017-10-30 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법
US9307262B2 (en) * 2011-01-13 2016-04-05 Texas Instruments Incorporated Methods and systems for facilitating multimedia data encoding utilizing configured buffer information
US10362327B2 (en) 2011-01-14 2019-07-23 Sony Corporation B-picture syntax change for generalized bi-prediction in high efficiency video coding (HEVC)
WO2012140821A1 (ja) 2011-04-12 2012-10-18 パナソニック株式会社 動画像符号化方法、動画像符号化装置、動画像復号化方法、動画像復号化装置、および動画像符号化復号化装置
US9247266B2 (en) 2011-04-18 2016-01-26 Texas Instruments Incorporated Temporal motion data candidate derivation in video coding
EP3337172B1 (en) 2011-05-24 2020-09-09 Velos Media International Limited Image encoding method, image encoding apparatus
EP4213483A1 (en) 2011-05-27 2023-07-19 Sun Patent Trust Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus
US9762918B2 (en) * 2011-05-27 2017-09-12 Hfi Innovation Inc. Method and apparatus for line buffer reduction for video processing
US9485518B2 (en) 2011-05-27 2016-11-01 Sun Patent Trust Decoding method and apparatus with candidate motion vectors
SG194746A1 (en) 2011-05-31 2013-12-30 Kaba Gmbh Image encoding method, image encoding device, image decoding method, image decoding device, and image encoding/decoding device
US8989271B2 (en) 2011-05-31 2015-03-24 Panasonic Intellectual Property Corporation Of America Decoding method and apparatus with candidate motion vectors
PL2728878T3 (pl) 2011-06-30 2020-06-15 Sun Patent Trust Sposób dekodowania obrazów, sposób kodowania obrazów, urządzenie do dekodowania obrazów, urządzenie do kodowania obrazów oraz urządzenie do kodowania/dekodowania obrazów
MX341415B (es) 2011-08-03 2016-08-19 Panasonic Ip Corp America Metodo de codificacion de video, aparato de codificacion de video, metodo de decodificacion de video, aparato de decodificacion de video y aparato de codificacion/decodificacion de video.
PL3454561T3 (pl) * 2011-09-14 2020-05-18 Samsung Electronics Co., Ltd. Sposób i urządzenie do kodowania jednostki predykcji (pu) w oparciu o jej rozmiar i odpowiadające urządzenie do dekodowania
US10499063B2 (en) * 2011-09-16 2019-12-03 Hfi Innovation Inc. Method and apparatus for prediction mode and partition mode syntax coding for coding units in HEVC
US9332283B2 (en) * 2011-09-27 2016-05-03 Broadcom Corporation Signaling of prediction size unit in accordance with video coding
CN108881903B (zh) 2011-10-19 2022-01-04 太阳专利托管公司 图像编码方法及装置、图像解码方法及装置、编解码装置
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US9247258B2 (en) 2011-10-26 2016-01-26 Qualcomm Incorporated Unified design for picture partitioning schemes
MX346477B (es) 2011-10-28 2017-03-22 Samsung Electronics Co Ltd Método para inter-predicción y dispositivo para el mismo, y método para compensación de movimiento y dispositivo para el mismo.
US9077998B2 (en) * 2011-11-04 2015-07-07 Qualcomm Incorporated Padding of segments in coded slice NAL units
JP2013102297A (ja) * 2011-11-07 2013-05-23 Canon Inc 画像符号化方法、画像符号化装置及びプログラム、画像復号方法、画像復号装置及びプログラム
TWI523497B (zh) * 2011-11-10 2016-02-21 Sony Corp Image processing apparatus and method
US9386305B2 (en) * 2011-11-28 2016-07-05 Qualcomm Incorporated Largest coding unit (LCU) or partition-based syntax for adaptive loop filter and sample adaptive offset in video coding
RU2577320C1 (ru) * 2012-01-19 2016-03-20 Мицубиси Электрик Корпорейшн Устройство декодирования изображений, устройство кодирования изображений, способ декодирования изображений и способ кодирования изображений
US20130195169A1 (en) * 2012-02-01 2013-08-01 Vidyo, Inc. Techniques for multiview video coding
JP6012014B2 (ja) * 2012-03-30 2016-10-25 サン パテント トラスト 画像符号化方法および画像復号方法
MX340383B (es) * 2012-04-15 2016-07-07 Samsung Electronics Co Ltd Metodo y aparato para determinar imagenes de referencia para inter-prediccion.
CN105379255A (zh) * 2013-07-22 2016-03-02 索尼公司 信息处理装置和方法
WO2015062002A1 (en) * 2013-10-31 2015-05-07 Mediatek Singapore Pte. Ltd. Methods for sub-pu level prediction
US10574986B2 (en) 2014-03-31 2020-02-25 Samsung Electronics Co., Ltd. Interlayer video decoding method for performing sub-block-based prediction and apparatus therefor, and interlayer video encoding method for performing sub-block-based prediction and apparatus therefor
US9883187B2 (en) 2015-03-06 2018-01-30 Qualcomm Incorporated Fast video encoding method with block partitioning
CN107787582A (zh) * 2015-06-10 2018-03-09 三星电子株式会社 使用用于自适应加权预测的语法信令对图像进行编码或解码的方法和设备
US10244249B2 (en) * 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
US10630992B2 (en) 2016-01-08 2020-04-21 Samsung Electronics Co., Ltd. Method, application processor, and mobile terminal for processing reference image
EP3413563A4 (en) * 2016-02-03 2019-10-23 Sharp Kabushiki Kaisha DEVICE FOR DECODING MOVEMENT PICTURES, APPARATUS FOR CODING MOVEMENT IMAGES AND DEVICE FOR GENERATING FORECAST PICTURES
KR102471208B1 (ko) * 2016-09-20 2022-11-25 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN110832859B (zh) * 2017-07-11 2022-02-25 华为技术有限公司 一种基于模板匹配的解码方法及装置
WO2019167849A1 (en) * 2018-02-28 2019-09-06 Sharp Kabushiki Kaisha Systems and methods for partitioning regions of a picture for video coding using different coding unit sizes
TW202029755A (zh) * 2018-09-26 2020-08-01 美商Vid衡器股份有限公司 視訊編碼雙預測
CN112889287A (zh) * 2018-10-02 2021-06-01 交互数字Vc控股公司 广义双向预测和加权预测
CN113574877B (zh) * 2019-03-12 2024-06-28 现代自动车株式会社 用于有效地对残差块解码的方法和装置
CN112004091B (zh) * 2020-07-31 2021-08-03 浙江大华技术股份有限公司 帧间预测方法及其相关装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003035B2 (en) * 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US8085845B2 (en) 2003-08-26 2011-12-27 Thomson Licensing Method and apparatus for encoding hybrid intra-inter coded blocks
KR100965881B1 (ko) * 2003-10-10 2010-06-24 삼성전자주식회사 비디오 데이터 인코딩 시스템 및 디코딩 시스템
US7453938B2 (en) * 2004-02-06 2008-11-18 Apple Inc. Target bitrate estimator, picture activity and buffer management in rate control for video coder
JP4031455B2 (ja) * 2004-03-29 2008-01-09 株式会社東芝 画像符号化装置
US7894530B2 (en) * 2004-05-07 2011-02-22 Broadcom Corporation Method and system for dynamic selection of transform size in a video decoder based on signal content
JP4889231B2 (ja) 2005-03-31 2012-03-07 三洋電機株式会社 画像符号化方法および装置、画像復号方法
KR100728031B1 (ko) 2006-01-23 2007-06-14 삼성전자주식회사 가변 블록 크기 움직임 예측을 위한 부호화 모드 결정 방법및 장치
WO2008000292A1 (en) * 2006-06-30 2008-01-03 Telecom Italia S.P.A. Method, apparatus and system for robust video transmission
US8457200B2 (en) * 2006-07-07 2013-06-04 Telefonaktiebolaget Lm Ericsson (Publ) Video data management
US8250618B2 (en) * 2006-09-18 2012-08-21 Elemental Technologies, Inc. Real-time network adaptive digital video encoding/decoding
FR2906433B1 (fr) * 2006-09-22 2009-02-27 Canon Kk Procedes et dispositifs de codage et de decodage d'images, programme d'ordinateur les mettant en oeuvre et support d'informaton permettant de les mettre en oeuvre
US8213511B2 (en) * 2007-04-30 2012-07-03 Texas Instruments Incorporated Video encoder software architecture for VLIW cores incorporating inter prediction and intra prediction
US7991237B2 (en) * 2007-06-28 2011-08-02 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
US8432968B2 (en) * 2007-10-15 2013-04-30 Qualcomm Incorporated Scalable video coding techniques for scalable bitdepths
KR101579394B1 (ko) 2007-10-16 2015-12-21 톰슨 라이센싱 기하학적으로 분할된 수퍼 블록들의 비디오 인코딩 및 디코딩 방법 및 장치
US9967590B2 (en) * 2008-04-10 2018-05-08 Qualcomm Incorporated Rate-distortion defined interpolation for video coding based on fixed filter or adaptive filter
US8811484B2 (en) * 2008-07-07 2014-08-19 Qualcomm Incorporated Video encoding by filter selection
US8483285B2 (en) * 2008-10-03 2013-07-09 Qualcomm Incorporated Video coding using transforms bigger than 4×4 and 8×8

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI561063B (en) * 2012-01-30 2016-12-01 Samsung Electronics Co Ltd Apparatus for decoding video
US9571845B2 (en) 2012-01-30 2017-02-14 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area
US9800878B2 (en) 2012-01-30 2017-10-24 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area
US9800877B2 (en) 2012-01-30 2017-10-24 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area
US9807404B2 (en) 2012-01-30 2017-10-31 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area
US9807405B2 (en) 2012-01-30 2017-10-31 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area
US10225565B2 (en) 2012-01-30 2019-03-05 Samsung Electronics Co., Ltd. Method and apparatus for video encoding for each spatial sub-area, and method and apparatus for video decoding for each spatial sub-area

Also Published As

Publication number Publication date
HUE047076T2 (hu) 2020-04-28
US8995527B2 (en) 2015-03-31
EP2537344B1 (en) 2019-08-21
CN102783150A (zh) 2012-11-14
BR112012020733B1 (pt) 2021-12-21
CN102783150B (zh) 2015-11-25
KR101384077B1 (ko) 2014-04-10
ES2757703T3 (es) 2020-04-29
JP2013520882A (ja) 2013-06-06
WO2011103482A1 (en) 2011-08-25
EP2537344A1 (en) 2012-12-26
TWI493964B (zh) 2015-07-21
JP5642806B2 (ja) 2014-12-17
DK2537344T3 (da) 2019-11-11
KR20120118507A (ko) 2012-10-26
US20110206123A1 (en) 2011-08-25
BR112012020733A2 (pt) 2016-04-26

Similar Documents

Publication Publication Date Title
TW201143447A (en) Block type signalling in video coding
JP6042470B2 (ja) ビデオコーディングのための適応動き解像度
EP2225887B1 (en) Adaptive coding of video block header information
JP5722468B2 (ja) ビデオコーディングにおける量子化パルスコード変調
DK2834975T3 (en) LOW DELAYED VIDEO STORAGE IN VIDEO CODING
TWI408966B (zh) 用於視訊編碼中單向預測及雙向預測之不同權重
EP2449786B1 (en) Template matching for video coding
TW201123909A (en) Video coding based on first order prediction and pre-defined second order prediction mode
JP2012505601A (ja) 効率的な予測モード選択
TW201223286A (en) Coding motion vectors in video coding
JP2018533281A (ja) 改善されたビデオストリームスイッチングおよびランダムアクセスの方法およびシステム
TW201141239A (en) Temporal and spatial video block reordering in a decoder to improve cache hits
JP2018514985A (ja) ビデオデータを処理するためのデバイスおよび方法
TW202203650A (zh) 解碼圖片緩衝器(dpb)操作和存取單元定界符(aud)
TW202236852A (zh) 高效視訊編碼器架構
JP2017507546A (ja) マルチレイヤコード化において参照ピクチャセット(rps)をコード化するための方法
CN115668930A (zh) 基于层之间是否进行参考确定子层的图像编码/解码方法和设备及发送比特流的方法
KR20230024341A (ko) 최대 시간 식별자에 기반하여 서브 비트스트림 추출과정을 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 컴퓨터 판독가능한 기록매체
CN115769579A (zh) 基于子层的所需数目确定子层的图像编码/解码方法和装置以及比特流发送方法