TW201244491A - Transforms in video coding - Google Patents

Transforms in video coding Download PDF

Info

Publication number
TW201244491A
TW201244491A TW101107931A TW101107931A TW201244491A TW 201244491 A TW201244491 A TW 201244491A TW 101107931 A TW101107931 A TW 101107931A TW 101107931 A TW101107931 A TW 101107931A TW 201244491 A TW201244491 A TW 201244491A
Authority
TW
Taiwan
Prior art keywords
rqt
depth
chrominance
rqt depth
information
Prior art date
Application number
TW101107931A
Other languages
English (en)
Inventor
Ying Chen
Li-Wei Guo
Pei-Song Chen
Marta Karczewicz
Xianglin Wang
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW201244491A publication Critical patent/TW201244491A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

201244491 六、發明說明: 【發明所屬之技術領域】 本發明係關於視訊編碼,且更具體而言’係關於在視訊 編碼中使用轉換。 本申請案主張於2011年3月1〇曰申請之美國臨時專利申 凊案第61/451,581號及於2011年η月4曰申請之美國臨時專 利申請案第61/5 55,986號之優先權,兩案之全部内容均特 此以引用之方式全文併入於本文中。 【先前技術】 數位視訊能力可併入於廣泛範圍之器件中,包括數位電 視、數位直接廣播系統、無線廣播系統、個人數位助理 (PDA)、膝上型或桌上型電腦、平板型電腦、電子書閱讀 器、數位攝影機、數位記錄器件、數位媒體播放器、視訊 遊戲器件、視訊遊戲主機、蜂巢式或衛星無線電電話、所 謂的「智慧型電話」、視訊電話會議器件、視訊串流器件 及其類似者。數位視訊器件實施視訊壓縮技術,諸如在由 MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264腑EG-4、 第10部分、進階視訊編碼(AVC)、當前正在研發之高效率 視訊編碼(HEVC)標準及此類標準之擴展所定義之標準中 所描述之視訊壓縮技術。該等視訊器件可藉由實施此類視 訊壓縮技術來更有效率地傳輸、接收、編碼、解碼及/或 儲存數位視訊資訊。 視訊壓縮技術執行空間(圖片内)預測及/或時間(圖片間) 預測以減少或移除在視訊序列中固有之冗餘。對於基於區 162975.doc 201244491 塊之視訊編碼’可將一視訊片段(亦即,視訊圖框或視訊 圖框之一部分)分割成視訊區塊,亦可將該等視訊區塊稱 作樹區塊、編碼單元(cu)及/或編碼節點。在一圖片的經 框内編碼(I)片段中之視訊區塊係使用關於在同一圖片中的 鄰近區塊中之參考樣本的空間預測來編碼。在一圖片之經 框間編碼(P或B)片段中之視訊區塊可使用關於在同一圖片 中之鄰近區塊中的參考樣本之空間預測或關於在其他參考 圖片中的參考樣本之時間預測。可將圖片稱作圖框,且可 將參考圖片稱作參考圖框。 空間或時間預測產生待編碼的區塊之預測性區塊。殘餘 資料表示在待編碼之原始區塊與預測性區塊之間的像素差 異。根據一指向形成預測性區塊的參考樣本區塊之運動向 量及指示在經編碼區塊與預測性區塊之間的差異之殘餘資 料來編碼一框間編碼區塊。根據一框内編碼模式及殘餘資 料來編碼一框内編碼區塊。為了進一步壓縮,可將殘餘資 料自像素域轉換至一轉換域’從而產生殘餘轉換係數,該 等殘餘轉換係數可接著經量化。可掃描初始地以二維陣列 配置之量化轉換係數以產生轉換係數之一維向量,且可應 用熵編碼以達成甚至更大之壓縮。 【發明内容】 本發明之技術大體上係關於在視訊編碼中應用轉換。舉 例而言,本發明之技術包括對與一視訊資料區塊相關聯之 7C度資讯及色度資訊應用不同大小之轉換。亦即,在視訊 編碼期間,一視訊編碼器可根據一階層式四分樹分割結構 162975.doc 201244491 來劃分一視訊資料區塊。此外,對於每一區塊,該視訊編 碼器可計算對應於在未經編碼的圖片之像素與所預測像素 值之間的像素差之殘餘值。該視訊編碼器可接著對該殘餘 視訊資料應用一轉換(例如,離散餘弦轉換(D(:T)、整數轉 換、小波轉換或概念上相似之轉換)以產生殘餘轉換係 數。 本發明之技術包括在一不同於色度資訊之四分樹深度處 對亮度資訊應用轉換。舉例而言,本發明之態樣係關於使 對亮度資訊及色度資訊應用轉換之方式解耦。因此,在一 些例子中,可在一第一四分樹深度處(例如,表示已將視 訊資料區塊劃分之次數)對亮度資訊應用某一轉換,同時 可在一不同於亮度資訊之第二四分樹深度處對色度資訊應 用另一轉換。在其他例子中,可在相同四分樹深度處應用 該等轉換。 在一實例中,本發明之態樣係關於一種編碼視訊資料之 方法。該方法包括:判定對與一視訊資料區塊相關聯之亮 度資訊應用一第一轉換之一第一殘餘四分樹(RQT)深度, 其中該RQT表示對亮度資訊及色度資訊應用轉換之一方 式,判定對與該視訊資料區塊相關聯之色度資訊應用一第 一轉換之一第二RQT深度’其中該第二rqt深度不同於該 第一 RQT深度;及在該第一 rqt深度處編碼該亮度資訊及 在該第二RQT深度處編碼該色度資訊。 在另一實例中’本發明之態樣係關於一種用於編碼視訊 資料之裝置。該裝置包括一或多個處理器,該一或多個處 162975.doc 201244491 理器經組態以:判定對與一視訊資料區塊相關聯之亮度資 訊應用一第一轉換之一第一殘餘四分樹(RQT)深度,其中 該RQT表示對亮度資訊及色度資訊應用轉換之一方式;判 定對與該視訊資料區塊相關聯之色度資訊應用一第二轉換 之一第二RQT深度,其中該第二Rqt深度不同於該第一 RQT深度;及在該第一 RQT深度處編碼該亮度資訊及在該 第二RQT深度處編碼該色度資訊。 在另一實例中,本發明之態樣係關於一種用於編碼視訊 資料之裝置。該裝置包括.用於判定對與一視訊資料區塊 相關聯之亮度資訊應用一第一轉換之一第一殘餘四分樹 (RQT)深度之一構件,其中該RqT表示對亮度資訊及色度 資讯應用轉換之一方式;用於判定對與該視訊資料區塊相 關聯之色度資訊應用一第二轉換之一第二RQT深度之一構 件,其中該第一 RQT深度不同於該第一 Rqt深度;及用於 在該第一 RQT深度處編碼該亮度資訊及在該第二RqT深度 處編碼該色度資訊之一構件。 在另一實例中,本發明之態樣係關於一種電腦程式產 品,該電腦程式產品包含一在上面儲存有指令之電腦可讀 儲存媒體m旨令在執行時使得—用於編碼視訊資料之 器件之-或多個處理器:判定對與一視訊資料區塊相關聯 之亮度資訊應用-第-轉換之—第—殘餘四分樹(RQT)深 度,其中該RQT表示對亮度資訊及色度資訊應用轉換之-方式’判定對與該視訊資料區塊相關聯之色度資訊應用一 第二轉換之一第二RQT深度,其中該第二RQT深度不同於 162975.doc 201244491 該第一 RQT深度;及在該第一 RQT深度處編碼該亮度資訊 及在5亥第一 RQT深度處編碼該色度資訊。 本發明之一或多個態樣的細節閣述於隨附圖式及下文之 描述中β本發明中所描述之技術的其他特徵、目標及優點 將自描述及圖式且自申請專利範圍而顯而易見。 【實施方式】 JCT-VC正致力於HEVC標準之研發。該等HEVC標準化 努力係基於被稱作HEVC測試模型(ΗΜ)之視訊編碼器件的 演進模型。一般而言,根據所提議之HEVC標準,可將一 視訊圖框或圖片劃分成包括亮度及色度樣本之樹區塊或最 大編碼單元(LCU)之序列。舉例而言,對於具有三個樣本 陣列之圖片,樹區塊一般包括亮度樣本(γ)之ΝχΝ區塊連 同色度樣本(Cb、Cr)之兩個對應區塊。在一些實例中,可 相對於免度資§fl來子取樣色度資訊。亦即,對於一給定視 訊資料區塊’可以色度分量之取樣率兩倍來取樣亮度分 量。 在位元串流内之語法資料可定義LCU之大小,該LCU為 就像素數目而言之最大編瑪單元。一片段包括按編碼次序 之數個連續樹區塊。可將一視訊圖框或圖片分割成一或多 個片段。可根據四分樹來將每一樹區塊分裂成編碼單元 (CU)。舉例而言’可將作為四分樹之根節點(例如,LCU) 之樹區塊分裂成四個子節點,且每一子節點又可為一父節 點且可分裂成另外四個子節點。作為四分樹之葉節點之最 終的未分裂子節點包含一編碼節點,亦即經編碼之視訊區 162975.doc 201244491
標,其指示 CU。用於 '、..ti稱之每一節點可提供用於對應cu之語 料舉例而έ,在該四分樹中之節點可包括一分裂旗 其指不對應於該節點之CU是否經分裂成子CU。用於 (:11之<•。法元素吓遞迴地加以定義且可取決於該匚卩是 否經为裂成子CU若一⑶未經進一步分裂,貝其被稱作 一葉CU。在本發明中,即使不存在原始葉CU之明顯分 裂,一葉CU之四個子cu亦會被稱作葉CU。舉例而言,若 16X16大小之CU未經進一步分裂,則四個8χ 8子cu亦會 被稱作葉cu,儘管該16xl6 cu從未經分裂。 除CU不具有大小區分之外,CU具有與H.264標準的巨集 區塊相似之用途。舉例而言,一樹區塊可經分裂成四個子 節點(亦被稱作子CU),且每一子節點又可為一父節點且可 經分裂成另外四個子節點。被稱作四分樹之葉節點之最終 的未为裂子節點包含一編碼節點,該編碼節點亦被稱作葉 CU。與一經編碼的位元串流相關聯之語法資料可定義可 分裂一樹區塊之最大次數(其被稱作最大CU深度),且亦可 疋義該4編碼節點之最小大小。因此,位元串流亦可定義 最小編碼單元(scu)。本發明使用術語「區塊」來指代在 HEVC之内容脈絡中的cu、PU或TU中之任一者,或在其 他標準之内容脈絡中的相似資料結構(例如,在H.264/AVC 中之巨集區塊及其子區塊)。 162975.doc 201244491 - cu包括-編碼節點及與該編碼節㈣目關 元(PU)及轉換單元(TU卜該心大小對應於該編^: 之大小且形狀必須為正方形之大小的範二 8x8個像素直至具有最大64x_像素或更多像素之樹 的大小。每一⑶可含有一或多個叩及―或多個TU。舉例 而言,與一cu相關聯之語法資料可描述將該〇1;分判成一 或多個PU。在該CU是被跳躍或直接模式編碼、被柩内預 測模式編碼或被框間預測模式編碼之間,分割模式可不 同。pu可經分割成非正方形之形狀。與―cu相關聯之語 法資料亦可描述(例如)根據四分樹將該cu分割成一或多個 TU。TU可為正方形或非正方形(例如,矩形)之形狀。 HEVC標準允許根據TU之轉換,該等轉換可對於不同的 CU而不同。通常基於對於一經分割的Lcu定義之一給定 CU内的PU之大小來設定該等τυ之大小,儘管可能並非總 是如此。在一些實例中,可使用一稱為「殘餘四分樹」 (RQT)之四分樹結構來將對應於一 cu之殘餘樣本再分成較 小單元。該RQT可應用於該CU之亮度及色度分量兩者。因 此’大體而言’ RQT為CU至TU之分割的遞迴表示β τυ定 義將轉換應用於亮度及色度樣本之方式。亦即,舉例而 言’與該等TU相關聯之像素差值可被轉換以產生可經量 化之轉換係數。 一葉CU可包括一或多個預測單元(pu)。大體而言,pu 表示對應於對應CU之全部或一部分的空間區域,且可包 括用於取回用於該PU的參考樣本之資料。另外,PU包括 162975.doc -10- 201244491 有關預測之資料。舉例而t ’當該Pu經框内模式編碼時, 用於該pu之資料可包括於一殘餘四分樹(RQT)中該 可包括描述對應於該PU的TU之框内預測模式之資料。作 為另一實例,當將該PU框間模式編碼時,該Pu可包括定 義用於該PU的一或多個運動向量之資料。定義用於的 運動向量之資料可描述(舉例而言)該運動向量之水平分 量、該運動向量之垂直分量、料動向量之解析度二 如,四分之一像素精確度或八分之一像素精確度)、該運 動向量指向之參考圖片’及/或針對該運動向量之參考圖 片清單(例如,清單0、清單1或清單C)。 具有一或多個PU之葉CU亦可包括一或多個轉換單元 (TU)。可如上文論述使用一 RQT(亦稱作TU四分樹結構)來 規定該等轉換單元。舉例而言,一分裂旗標可指示一葉 CU是否經分裂成四個轉換單元。接著,可將每一轉換單 元進一步分裂成四個子TU。當一 TU未經進一步分裂時, 其可被稱作一葉TU。大體而言,對於框内編碼,屬於_ 葉Cu之所有葉TU共用相同框内預測模式。亦即,—般應 用相同框内預測模式來計算一葉CU的所有TU之預測值。 對於框内編碼,視訊編碼器可將使用框内預測模式的每_ 葉TU之殘餘值計算為在CU之對應於該TU的部分與原始區 塊之間的差。TU不一定受限於PU之大小。因此,TU可大 於或小於PU。對於框内編碼,一 PU可與用於同一 cu之一 對應葉TU共置。在一些實例中,一葉TU之最大大小可對 應於對應葉CU之大小。 162975.doc -11 - 201244491 另外,葉CU之TU亦可與被稱作殘餘四分樹(RQT)之各別 四分樹資料結構相關聯。亦即,一葉cu可包括一指示汝 何將該葉CU分割成TU之四分樹。一 τυ四分樹之根節點— 般對應於一葉CU,而一 CU四分樹之根節點一般對應於一 樹區塊(或LCU)。RQT的未經分裂之TU被稱作葉τυ β大體 而言,本發明使用術SCU&TU來分別指代葉cu及葉τυ, 除非另有說明。 可藉由避免與一給定TU相關聯之殘餘值之大的變化來 改良編碼效率。亦即,對大體上均一的殘餘值應用一轉換 可造成將能量集中於相對小數目個轉換係數中,進而改良 熵編碼效率(例如,如下文關於圖2更詳細描述)。給定圖框 (或片段)之亮度樣本通常可經受比色度樣本更寬及/或更劇 烈之變化《另一方面,對於一給定區塊,色度樣本可相對 均°因此’在可能需要相對小的轉換大小以避免大的亮 度殘餘變化的同時,可對於色度殘餘使用較大的轉換而不 影響編瑪效率。 通常,視訊編碼器在相同RQT深度處對亮度及色度樣本 應用轉換。然而,因為可以一高於色度資訊之取樣率來取 樣亮度資訊,所以對亮度及色度樣本應用之轉換的大小可 不同。在出於說明目的之一實例中,可根據一 RQT結構來 將一 32x32 TU分裂兩次。在此實例中,可對該等葉TU2 亮度樣本應用8x8轉換大小,而可對該等葉71;之色度樣本 應用4x4轉換大小(假定以色度資訊之取樣率的兩倍來取樣 亮度資訊)。 I62975.doc •12· 201244491 本發明之技術係關於對殘餘視訊資料區塊之亮度樣本及 色度樣本應用不同大小之轉換。更敎言之,本發明之技 術包括在-τυ之不同深度處(例如,根據結構)對與 - TU相關聯之亮度及色度分量應用轉換,舉例而 吕’可在TU之葉節點處對τυ之亮度樣本應用一轉換,而 可在TU之較高深度處對色度分量應用—轉換(例如,其 中’「較高」係與在RQT結構中的—較淺位置相關聯)。 在出於解釋目的之實例中,可根據一RQT將一 64X64 TU(例如,64x64個殘餘亮度樣本及32χ32個殘餘色度樣 本,假定以色度之取樣率的兩倍取樣亮度)分裂三次。在 此實例中,該TU在深度3處包括8χ8個葉τυ。視訊編碼器 可在一深度三處對亮度樣本應用一轉換(例如,對葉TU2 8x8個亮度樣本),而在深度丨處對色度樣本應用一轉換(例 如,對16x16個色度樣本)。 為了清晰起見,本發明之一些態樣不僅係關於對一給定 區塊之冗度及色度樣本應用不同大小之轉換,亦係關於在 一 RQT結構之不同深度處對亮度及色度樣本應用轉換。亦 即,在一些視訊編碼系統中,如上文提及,通常以高於色 度分量之取樣率來取樣亮度分量,且因此一般對一給定區 塊之亮度樣本應用一大於色度樣本之轉換(歸因於亮度樣 本之較大數目)。本發明之態樣係關於解耦應用轉換之方 式’使得可在一第一深度處對亮度樣本應用一轉換,而可 在一不同於亮度樣本之第二深度處對色度樣本應用一轉 換。 162975.doc •13- 201244491 以此方式,對於一給定視訊資料區塊,可以比亮度樣本 相對更粗糙之粒度來對色度樣本應用轉換。以此方式應用 轉換可引發降低之編碼複雜性。舉例而言,本發明之技術 允許對比亮度樣本大之色度樣本區塊應用轉換,色度樣本 可需要較少特定性,亮度樣本可需要較多特定性。 圖1為說明實例視訊編碼及解碼系統10之方塊圖,該實 例視訊編碼及解碼系統10可利用在本發明中所描述的用於 在一不同於一殘餘資料區塊之色度樣本之RQT深度處對亮 度樣本應用一轉換之技術。如在圖丨中所展示,系統1〇包 括一源器件12,源器件12產生經編碼之視訊資料,該經編 碼之視訊資料將在一稍後時間由一目的地器件14解碼。源 器件12及目的地器件14可包含廣泛範圍之器件中之任一 者,包括桌上型電腦、筆記型(亦即,膝上型)電腦、平板 型電腦、機上盒、諸如所謂「智慧型」電話之電話手機、 所謂「智慧型」平板電腦(pads or tablets)、電視、攝影 機、顯示器件、數位媒體播放器、視訊遊戲主機、視訊率 流或播放器件或其類似者》在一些狀況中,源器件丨2及目 的地器件14可經裝備以用於無線通信。 目的地器件14可經由一鏈路16接收待解碼之經編碼視訊 資料。鏈路16可包含能夠將該經編碼視訊資料自源器件12 移動至目的地器件14之任何類型的媒體或器件。在一實例 中’鏈路16可包含使得源器件12能夠即時地將經編碼的視 訊資料直接傳輸至目的地器件14之通信媒體。可根據諸如 無線通信協定之通信標準來調變該經編碼的視訊資料且將 162975.doc 14 201244491 其傳輸至目的地器件14β該通信媒體可包含任何 體,:如射頻_譜或一或多個實體傳輸線。該 網: = = :於封包之網路(諸如,區域網路、廣域 包括= 之全球網路)的部分。該通信媒體可 目的地^ ϋ基地台或可用於促進自源器件12至 目的地器件14之通信的任何其他設備。 M 資料自輸出介面22輸出至—儲存器件 相似地’可藉由輸入介面自儲存器件神取經編
=ΓΓ::種分散式或本端存取式編存 體中之任一者,堵如硬碟機、藍光光碟、DVD、CD 職、快閃記憶體、揮發性或非揮發性記憶體,或用於儲 存經編碼的視訊資料之任何其他適宜的數位儲存媒體。在 一另外實例中,儲存器件24可對應於可保持由源器件12產 生的經編碼視訊之-標案伺服器或另—中_0件D目 的地器件14可經由W或下載自儲存存取所儲存之 視訊資料。該標㈣服器可為能夠儲存經編碼的視訊資料 及將彼經編碼的視訊資料傳輸至目的地器㈣之任何類型 的伺服器。實例檀案伺服器包括網站伺服器“列如,對於 一網站)、FTP飼服器、網路附接儲存(NAS)器件,或本端 碟片驅動器。目的地器件14可經由包括網際網路連接之任 何標準資料連接來存取經編碼之視訊資料。此標準資料連 接可包括無線頻道(例如’ Wi_Fi連接)、有線連接(例如, DSL、線鏡數據機等)’或兩者之適宜於存取儲存於稽案祠 服器上的經編碼視tfi資㈣組合4自儲存料24的經編 162975.doc •15· 201244491 碼視訊f料之傳輸可為_流傳輸、下載傳輸或兩者之組 合〇 本發明之技術不一定受限於無線應用或設置。可對視訊 編碼應用該等技術以支援各種多媒體應用中之任—者,該 各種多媒體應用諸如空中電視廣播、有線電視傳輸、衛星 電視傳輸、串流視訊傳輸(例如,經由網際網路),用於儲 存於資料儲存媒體上之數位視訊的編碼、儲存於資料儲存 媒體上的數位視訊之解碼,或其他應用。在一些實例中, 系統1 0可經組態以支援單向或雙向視訊傳輸以支援諸如視 訊串流、視訊播放、視訊廣播及/或視訊電話之應用。 在圖1之實例中’源器件12包括視訊源18、視訊編碼器 2〇及輸出介面22。在一些狀況中,輸出介面22可包括一調 變器/解調變器(數據機)及/或一傳輸器。在源器件12中, 視訊源18可包括一源’諸如視訊擷取器件(例如,視訊攝 影機)、含有先前擷取的視訊之視訊存檔、用以自視訊内 容提供者接收視訊之視訊饋給介面,及或用於產生電腦圖 形資料來作為源視訊之電腦圖形系統,或此類源之組合。 作為一實例,若視訊源18為視訊攝影機,則源器件丨2及目 的地器件14可形成所謂的相機手機或視訊電話。然而,本 發明所描述之技術一般可應用於視訊編碼,且可應用於無 線及/或有線應用。 經擷取、經預先擷取或經電腦產生之視訊可由視訊編碼 器20來編碼。可經由源器件12之輪出介面22將經編碼之視 訊資料直接傳輸至目的地器件14 ^亦可(或替代地)將經編 162975.doc -16 · 201244491 碼之視訊資料儲存於儲存器件24上以供目的地器件14或其 他器件隨後存取以用於解碼及/或播放。 目的地器件14包括一輸入介面28、一視訊解碼器3〇及一 .4示器件3 2在一些狀況中,輸入介面2 8可包括接收器及/ 或數據機目的地器件14之輸入介面28經由鍵路Μ接收經 編碼之視訊資料。經由鏈路16傳達或在儲存器件24上提供 之經編碼視訊資料可包括由視訊編碼器2〇產生之各種語法 元素’其供諸如視訊解碼!^的視訊解碼器在解碼該視訊 資料時使用。可將此類語法元素與在通信媒體上傳輸、在 儲存媒體上料或在㈣上儲存之㈣碼視訊資料 包括在一起。 顯示器件32可與目的地器件14整合或位於目的地器件^ 外部。在一些實例中,目的地器件14可包括一整合顯示器 件且亦可經組態以與一外部顯示器件介面連接。在其他實 例中,目的地器件14可為一顯示器件。一般而言,顯示器 件32將經解碼的視訊資料顯示給使用者,且可包含各種顯 示器件中之任一者,諸如液晶顯示器(LCD)、電漿顯示 器、有機發光二極體(OLED)顯示器或另一類型之顯示器 件。 視訊編碼器20及視訊解碼器30可根據一視訊壓縮標準 (諸如當前正在研發之高效率視訊編碼(HEVC)標準)操作, 且可符合HEVC測試模型(HM)。或者,視訊編碼器2〇及視 訊解碼器30可根據其他專屬或行業標準(諸如,Ιτυ_τ Η·264標準(或者被稱為MPEG-4第10部分,進階視訊編石馬 162975.doc -17- 201244491 (AVC))或此類標準之擴展)進行操作。然而,本發明之技 術不受限於任何特定編碼標準。視訊壓縮標準之其他實例 包括 MPEG-2及 ITU-T H.;26:3。 儘管未在圖1中展 + . '、’但在一些態樣中,視訊編碼器20 及視訊解碼器30可各自盥立% μ „ 分目興音汛編碼器及解碼器整合,且可 包括恰當MUX-DEMUX置;屮廿从 入皁το或其他硬體及軟體來處置在共 同資料串流或獨立資料击泣由+立^ ^ 八 爭/巩中之音gft及視訊兩者的編碼。 在一些實例中,若適用,則mux_demux單元可符合汀^ Η·223多工器協定或諸如使用者資料包協定(腑)之其他協 定。 視訊編碼器20及視訊解碼器3〇各自可實施為各種適宜編 碼器或解碼器電路中之任—者(在適用時),包括處理器(諸 如一或多個微處理器、數位信號處理器(DSp)、專用處理 器或處理電路)、特殊應用積體電路(ASIC)、場可程式化 閘陣列(FPGA)、固定邏輯電路、離散邏輯、軟體、硬體、 韌體或其任何組合。因此,在視訊編碼器2〇及視訊解碼器 3〇内之各種電路同樣可由各種此類結構元件或其組合中之 任一者來實施。當部分地以軟體來實施該等技術時一器 件可將用於該軟體之指令儲存於適宜的非暫時性電腦可讀 媒體中且使用一或多個處理器在硬體中執行該等指令以執 行本發明之技術》視訊編碼器2〇及視訊解碼器3〇中之每— 者可包括於一或多個編碼器或解碼器中,其中之任—者可 整合為在一各別器件中之組合式編碼器/解碼器(c〇de^ 之部分。 162975.doc -J8· 201244491 本發月可大體上涉及視訊編碼器2 0將某些資訊「傳信」 諸如視訊解碼器3G之另-器件。^而,應理解,視訊編 碼器20可藉由將某些語法元素與視訊資料之各種經編碼部 ,相關聯來傳信資訊。亦即,視訊編碼器2()可藉由將某些 二,兀素儲存至視訊資料之各種經編碼部分的標頭來將資 料傳彳5」。在一些狀況中,可在由視訊解碼器3〇接收及 解馬之則編碼及儲存此類語法元素(例如,健存至儲存器 件24)。因此,術語「傳信」可大體上指代用於解碼壓縮 視甙資料之語法或其他資料的通信,而不論此類通信是即 時還是接近即時還是在一時間範圍内發生,諸如在編碼時 將語法元素儲存至一媒體且可接著在被儲存至此媒體之後 的任何時間由一解碼器件來取回該等語法元素時可能發生 的0 如上文所提及’ JCT-VC正致力於HEVC標準之研發。該 4 HEVCk準化努力係基於被稱作hevC測試模型(HM)之 視訊編碼器件的演進模型。該HM假定了相對於根據(例 如)ITU-T H.264/AVC之現存器件的視訊編碼器件之若干額 外能力。本發明通常使用術語「視訊區塊」來指代cu之 編碼節點。在一些特定狀況中,本發明亦可使用術語「視 訊區塊」來指代一樹區塊(亦即,LCU)或一CU,該樹區塊 或該CU包括一編碼節點及pu及TU。 視訊序列通常包括一系列視訊圖框或圖片。圖片群組 (GOP) —般包含一系列一或多個視訊圖片。G〇p可在該 GOP之標頭、該等圖片中之一或多者之標頭中或在別處包 162975.doc •19- 201244491 括語法資料,該語法資料描述包括於該GOP中之若干圖 片。一圆片之每一片段可包括描述各別片段之編碼模式的 片段語法資料。視訊編碼器20通常對在個別視訊片段内之 視訊區塊操作以便編碼該視訊資料。視訊區塊可對應於在 一 CU内之一編碼節點。該等視訊區塊可具有固定或變化 之大小’且可根據一規定編碼標準而大小不同。 作為一實例,該HM支援按各種pu大小之預測。假定特 定CU之大小為2Νχ2Ν,該HM支援按2Νχ2Ν或ΝχΝ之PU大 小的框内預測,及按2Νχ2Ν、2ΝχΝ、Νχ2Ν或ΝχΝ之對稱 Ρϋ大小的框間預測。該HM亦支援按2NxnU、2NxnD、 nLx2N及nRx2N之PU大小的用於框間預測的不對稱分割。 在不對稱分割中,CU之一個方向不被分割,而將另一方 向分割為25%及75%。該CU之對應於該25%分割的部分由 「η」繼之以「上」、「下」、「左」或「右」的指示來指 示。因此,舉例而言,「2Νχηϋ」指代被水平分割的 2Nx2N CU ’ 其中 2Νχ〇·5Ν PU在頂部及 2Nxl.5N PU在底 部。 在本發明中,可互換地使用「ΝχΝ」及「Ν乘Ν」來在 垂直及水平維度中指代視訊區塊之像素尺寸,例如16χ16 像素或16乘16像素。一般而言,ι6χ16區塊在垂直方向上 具有16個像素(y= 16)且在水平方向上具有16個像素 (x=16)。類似地,ΝχΝ區塊一般在垂直方向上具有N個像 素且在水平方向上具有>^個像素,其中N表示非負整數 值》可按列及行來配置一區塊中之像素。另外,區塊不一 162975.doc • 20- 201244491 定需要在水平方向上與在垂直方向上具有相同數目個像 素。舉例而言’區塊可包含ΝχΜ個像素,其中μ不一定等 於Ν。 在使用一 CU之PU進行框内預測性或框間預測性編碼之 後’視訊編碼器20可計算針對該CU的TU之殘餘資料。該 等PU可包含在空間域(亦被稱作像素域)中之像素資料,且 該等TU可包含在對殘餘視訊資料應用一轉換之後在轉換 域中之係數’該轉換例如離散餘弦轉換(DCT)、整數轉 換小波轉換或概念上相似之轉換。該殘餘資料可對應於 在未編碼原始圖片的像素與對應於該等PU之預測值之間的 像素差。視訊編碼器20可形成包括用於CU的殘餘資料之 TU’且接著轉換該等丁^;以產生用於該CU之轉換係數。 在一些實例中,可根據一殘餘四分樹㊉卩丁)來定義TU。 舉例而言,RQT可表示對與一視訊資料區塊相關聯之殘餘 免度樣本及殘餘色度樣本應用轉換(例如,DCT、整數轉 換、小波轉換或一或多個其他轉換)之方式。亦即,如上 文所提及,可使用一 RQT將對應於一 Cu之殘餘樣本再分成 較小之單元。大體上’該RQT為CU至TU的分割之遞迴表 7]^ 。 視訊編碼器20通常可在RQT之相同深度處對亮度及色度 樣本應用轉換。舉例而言,大體上,視訊編碼器2〇可對相 對最低之RQT深度應用轉換,其中較低Rqt深度轉譯為具 有較少的關聯殘餘資料之較小TU(例如,葉TU)。然而, 在一些例子中’對於一給定視訊資料區塊,色度資訊可能 162975.doc -21 · 201244491 並不像亮度資訊那樣寬地及/或劇烈地變化。實情為,與 一 cu相關聯之色度資訊可能比亮度資訊更平滑。因此, 為了達成將儘可能多的資料(亦被稱作「能量」)壓縮到儘 可能少的轉換係數中之色度轉換,在與亮度資訊相同之 RQT深度處對色度資訊應用轉換可能為不必要的。亦即, 對色度樣本應用一相對較大之轉換(例如,在一較高RqT 深度處)仍可將色度資料壓縮到相對少之係數中。 根據本發明之態樣,視訊編碼器20可解耦對亮度樣本及 色度樣本應用轉換之方式。舉例而言,視訊編碼器2 〇可判 定對殘餘亮度樣本應用一轉換之一第一 RQT深度,及對殘 餘色度樣本應用一第二轉換之一第二RQT深度,其中該第 一 RQT深度與該第二RQT深度可彼此不同。在一些例子 中,該第二RQT深度(與色度樣本相關聯)可不同於該第一 RQT深度。視訊編碼器20可接著在該第一 RQT深度處對殘 餘亮度樣本應用該第一轉換以產生亮度轉換係數,且在該 第二RQT深度處對殘餘色度樣本應用該第二轉換以產生色 度轉換係數。 因此,對於一給定視訊資料區塊,視訊編碼器2〇可以比 亮度樣本相對更粗糙之粒度來對色度樣本應用一轉換。以 此方式,視訊編碼器20可減少總體編碼複雜性。舉例而 言,可對一給定資料區塊之色度樣本應用一相對較大之轉 換,進而減少與對該等色度樣本應用多個相對較小之轉換 相關聯之複雜性。 在對殘餘資料應用任何轉換以產生轉換係數之後,視訊 J62975.doc -22- 201244491 編碼器20可執行該等轉換係數之量化。量化一般指代將轉 換係數量化以可能地減少用以表示該等係數之資料量從而 提供進一步壓縮之程序。該量化程序可減少與該等係數中 之一些或全部相關聯的位元深度。舉例而言,可在量化期 間將η位元值降值捨位至m位元值,其中^大於m。 在一些實例中’視訊編碼器20可利用一預定義掃描次序 來掃描該等量化轉換係數以產生一可經熵編碼之序列化向 量。在其他實例中,視訊編碼器20可執行一適應性掃描。 在掃描s亥等量化轉換係數以形成一維向量之後,視訊編碼 器20可熵編碼該一維向量,例如根據上下文適應性可變長 度編碼(CAVLC)、上下文適應性二進位算術編碼 (CABAC)、基於語法之上下文適應性二進位算術編碼 (SBAC)、概率間隔分割熵(ριρΕ)編碼或另一熵編碼方法。 視訊編碼器2 0亦可熵編碼與經編碼的視訊資料相關聯之語 法元素以供視訊解碼器3〇在解碼該視訊資料時使用。 HEVC之當前版本經設計以使用^ABAC來熵編碼。 為了執行CABAC,視訊編碼器2〇可將在一上下文模型 内之一上下文指派給一待傳輸之符號。舉例而言該上下 文可係關於該符號之鄰近值是否為非零。為了執行 CAVLC’視訊編碼器2G可針對待傳輪之符號選擇—可變長 度碼。在VIX中之碼?可輯構以使得相對較短的碼對麻 於概率較大之符號,而較長的钱應於概率較小之符號。 以此方式’與(例如决於待傳輸之每—符號❹相等長度 碼字相比,使用VLC可達成位元節省。概率判定可基於指 162975.doc •23- 201244491 派給符號之上下文。 視訊解碼mo在自視訊編碼器20接收到經編碼之視 料夺可執订-與關於視訊編碼器2〇描述之編碼遍次大體 =之解碼遍次。⑽本發明之態樣,舉例而言,視訊解石馬 益3 〇可接收經編碼之視訊f料且判定針對與—視訊資料區 塊相關聯之殘餘亮度樣本及殘餘色度樣本之。視訊解 碼器30亦可判^對殘餘亮度樣本應用—反轉換之一第— QT冰度及對殘餘色度樣本應用一第二反轉換之一第二 RQT冰度。在一些例子中,該第二RQT深度(與色度樣本相 關聯)可不同於該第一 Rqt深度。視訊解碼器3〇可接著在 該第一 RQT深度處對殘餘亮度樣本應用該第一反轉換以產 生亮度轉換係數’且在該第二RQT深度處對殘餘色度樣本 應用該第二反轉換以產生色度轉換係數。 圖2為說明實例視訊編碼器2〇之方塊圖,該實例視訊編 碼器20可實施在本發明中所描述之用於在一不同於一殘餘 資料區塊的色度樣本之RQT深度處對亮度樣本應用一轉換 的技術。視訊編碼器20可執行在視訊片段内之視訊區塊的 框内編碼及框間編碼。框内編碼依賴於空間預測來減少或 移除在一給定視訊圖框或圖片内的視訊之空間冗餘。框間 編碼依賴於時間預測來減少或移除在一視訊序列的鄰近圖 框或圖片内之視訊的時間冗餘。框内模式(I模式)可指代若 干基於空間的壓縮模式中之任一者。框間模式(諸如單向 預測(P模式)或雙向預測(B模式))可指代若干基於時間的壓 縮模式中之任一者。 162975.doc -24 - 201244491 如在圖2中所展示’視訊編碼器2Q接收待編碼之視訊資 料。在圖2之實例中’視訊編碼器20包括-模式選擇單元 40、求和器50、轉換單元52、量化單心、滴編瑪單元% 及參考圖片記憶體60模式選擇單元似包括運動估計單 & 42 '運動補償單元44、框内預測單元46及分割單元料。 為了視訊區塊重建’視訊編碼器20亦包括反量化單元58、 反轉換單元60及求和器62。亦可包括一解區塊遽波器(未 展示於圖2中)來缝區塊邊界以自經重建之視訊移除成塊 性假影。若需要,則該解區塊濾波器通常濾波求和器Μ之 輸出。除解區塊濾波器以外,亦可使用額外的迴路濾波器 (迴路内或迴路後)。出於簡明而未展示此類濾波器,但若 4要則此類濾波器可濾波求和器5 〇之輸出(如迴路内濾波 器)。 …’ 在編碼程序期間,視訊編碼器20接收待編碼之視訊圖框 或片段。可將該圖框或片段劃分成多個視訊區塊。運動估 計單元42及運動補償單元44相對於在一或多個參考圖框中 之一或多個區塊來執行所接收視訊區塊之框間預測性編 碼,以提供時間壓縮。替代地,框内預測單元钧可相對於 在與待編碼之區塊相同的圖框或片段中之一或多個鄰近區 塊來執行所接收的視訊區塊之框内預測性編碼以提供空間 壓縮。視訊編碼器20可執行多個編碼遍次(例如)以針對每 一視訊資料區塊選擇一恰當的編碼模式。 另外,分割單元48可基於在先前編碼遍次中的對先前分 割方案之評估來將視訊資料區塊分割成子區塊。舉例而 162975.doc -25- 201244491 言,分割單元48可初始地將一圖框或片段分割成£(:υ,且 基於位元率-失真分析(例如,位元率_失真最佳化)來將該 等LCU中之每一者分割成子CUe模式選擇單元的可進一步 產生一指不將LCU分割成子CU之四分樹資料結構。該四分 樹之葉節點CU可包括一或多個PU及一或多個τυ。 模式選擇單元40可(例如)基於誤差結果來選擇編碼模式 (框内或框間)中之一者,且將所得經框内編碼區塊或經框 間編碼區塊提供至求和器5〇以產生殘餘區塊資料,及提供 至求和器62以重建該經編碼區塊以供用作一參考圖框。模 式選擇單元40亦將諸如運動向量、框内模式指示元、分割 資訊及其他此類語法資訊之語法元素提供至熵編碼單元 56 ° 運動估計單元42及運動補償單元44可高度整合,但出於 概念目的而分別說明。由運動估計單元42執行之運動估計 為產生運動向量之程序,該等運動向量估計視訊區塊之運 動。舉例而言,運動向量可指示在一當前視訊圖框或圖片 内之一視訊區塊的一 PU相對於在一參考圖框(或其他經編 碼單元)内的一預測性區塊(其關於在該當前圖框(或其他經 編碼單元)内正經編碼的當前區塊)之位移。預測性區塊為 被發現在像素差方面緊密地匹配待編碼區塊之區塊,該像 素差可藉由絕對差和(SAD)、平方差和(SSD)或其他差量度 予以判定。在一些實例中,視訊編碼器2〇可計算儲存於參 考圖框記憶體64中之參考圖片的次整數像素位置之值。舉 例而言,視訊編碼器20可内插該參考圖片之四分之一像素 162975.doc •26- 201244491 位置、八分之一像素位置或其他分率像素位置之值。因 m十單元42可執行關於全像素位置及分率像素位 、搜哥’且輸出具有分率像素精確度之運動向量。 運動估#早%42藉由將在—經框間編碼的片段中之-視 訊區塊的-PU之位置與—參考圖片之—預測性區塊的位置 一較來指針對該PU4l __運動向量。該參考圖片可選自 第…參考圖片清單(清單g)或—第二參考®片清單(清單 υ ’清單g或清單1中之每—者識別儲存於參考圖框記憶體 64中之—或多個參考圖片。運動估計單元42將所計算之運 動向量發送至熵編碼單元56及運動補償單元44。 由,動補償單元44執行之運動補償可涉及到基於由運動 1*單/0 42所判定之運動向量來提取或產生該預測性區 一再人在些貫例中,運動估計單元42及運動補償單 凡44可在功能上整合。在接收到針對當前視訊 區塊的PU之 運動向量時’運動補償單元44可在該等參考圖片清單中之 一者中定位該運動向量所指向的該預測性區塊。求和器50 藉由自正被編糾當前視訊區塊之像素值減去預測性區塊 之像素值從而形成像素差值(其亦被稱作殘餘資料,如下 文,述)來形成一殘餘視訊區塊。一般而言,運動估計單 元42執:關於亮度分量之運動估計,且運動補償單元44針 對色度77量及免度分量兩者使用基於亮度分量計算之運動 向量。模式選擇單元4〇亦可產生與該等視訊區塊及該視訊 片&相關聯之語法元素以供視訊解碼器30在解碼該視訊片 段之視訊區塊時使用。 162975.doc •27· 201244491 作為如上文所描述由運動估計單元42及運動補償單元44 執行之框間預測之替代例,框内預測單元46可框内預測一 當前區塊。尤其地’框内預測單元46可判定一用以編码一 當刖區塊之框内預測模式。在一些實例中,框内預測單元 46可使用各種框内預測模式來編碼一當前區塊(例如,在 獨立的編碼遍次期間且框内預測單元46(或在一些實例 中,模式選擇單元40)可自經測試之模式中選擇一恰當框 内預測模式來使用。 舉例而§,框内預測單元46可使用對於各種經測試的框 内預測模式之位元率-失真分析來計算位元率·失真值,且 選擇在該等經測試的模式中具有最佳位元率_失真特性之 框内預測模式。位元率-失真分析大體上判定在一經編碼 區塊與曾被編碼而產生該編碼區塊之一原始未編碼區塊之 間的失真(或誤差)量,以及用以產生該經編碼區塊之位元 率(亦即,位元之數目)。框内預測單元46可根據各個經編 碼區塊之失真及位元率來計算比率以判定哪一框内預測模 式對於該區塊展現出最佳位元率-失真值。 在對於一區塊選擇一框内預測模式之後,框内預測單元 46可將指示對於該區塊所選擇之框内預測模式之資訊提供 至熵編碼單元56。熵編碼單元56可編碼指示該所選擇的框 内預測模式之該資訊《視訊編碼器20可在所傳輸之位元串 流中包括組態資料’該組態資料可包括複數個框内預測模 式索引表格及複數個經修改的框内預測模式索引表格(亦 被稱作碼字映射表格)、各個區塊之編碼上下文的定義, 162975.doc •28· 201244491 及供該等上下文中之每一者使用之一最有可能的框内預測 模式 框内預'則模式索引表格及一經修改的框内預測模 式索引表格之指示。 視訊編碼器20藉由自正經編碼之原始視訊區塊減去來自 模式選擇單元40之預測資料來形成—殘餘視訊區塊。求和 器50表示執行此減法運算之該或該等組件。轉換處理單元 52對該殘餘區塊應用一轉換(諸如,離散餘弦轉換(dc巧或 概念上相似之轉換)’從而產生包含殘餘轉換係數值之視 訊區塊。轉換處理單元52可執行概念上與DCT相似之其他 轉換。亦可使用小波轉換、整數轉換、子頻帶轉換或其他 類型之轉換。在任何狀況中,轉換處理單元52對該殘餘區 塊應用該轉換,從而產生一殘餘轉換係數區塊。該轉換可 將殘餘資訊自一像素值域轉化至一轉換域,諸如頻域, 根據本發明之態樣’轉換處理單元5 2可判定一 RQT,其 表不對與一視訊資料區塊相關聯之殘餘亮度樣本及殘餘色 度樣本應用轉換(例如,DCT '整數轉換、小波轉換,或 一或多個其他轉換)之方式。根據本發明之態樣,轉換處 理單元52可解耦對亮度樣本及色度樣本應用轉換之方式。 舉例而言,轉換處理單元52亦可判定對殘餘亮度樣本應用 一轉換之一第一RQT深度,及對殘餘色度樣本應用一第二 轉換之一第二RQT深度。在一些例子中,該第二Rqt深度 (與色度樣本相關聯)可不同於該第一 RQT深度。轉換處理 單元52可接著在該第一 RQT深度處對殘餘亮度樣本應用該 第一轉換以產生亮度轉換係數,且在該第二RQT深度處對 162975.doc •29· 201244491 殘餘色度樣本應用該第二轉換以產生色度轉換係數。 在出於說明目的之實例中,假定32x32殘餘視訊資料區 塊具有相對於亮度樣本子取樣之色度樣本,使得該32x32 區塊包括32x32個殘餘亮度樣本及16)^16個殘餘色度樣本 (例如,如在4:2:0子取樣方案中所發生)。轉換處理單元 52(或另一單元,諸如模式選擇單元4〇)可執行一位元率失 真分析以判定對該殘餘值區塊應用轉換之方式。在此實例 中,假定轉換處理單元52出於轉換之目的而將該殘餘值區 塊分裂兩次。亦即’轉換處理單元52對每一 8χ8亮度樣本 區塊應用一轉換。根據本發明之態樣,不同於對對應4χ4 色度樣本區塊(例如,在相同深度處)應用一轉換,轉換處 理單元52可對一相對較大的色度樣本區塊應用一轉換。舉 例而言,轉換處理單元52可對一 Ι6χΐό色度樣本區塊(例 如,未經劃分),或一 8x8色度樣本區塊應用一轉換。 轉換處理單元52可將所得的轉換係數發送至量化單元 54。量化單元54量化該等轉換係數以進一步減少位元率。 該量化程序可減少與該等係數中之一些或全部相關聯的位 元深度。可藉由調整量化參數來修改量化程度。在一些實 例中,量化單元54可接著執行包括該等量化轉換係數的矩 陣之一掃描。或者,熵編碼單元56可執行該掃描。 在量化之後,熵編碼單元56熵編碼該等量化轉換係數。 舉例而έ,熵編碼單元5 6可執行上下文適應性可變長度編 碼(CAVLC)、上下文適應性二進位算術編碼(CABAC)、基 於語法之上下文適應性二進位算術編碼(SBAC)、概率間隔 162975.doc -30. 201244491 分割熵(PIPE)編碼或另一熵編碼技術。在基於上下文之熵 編碼之狀況中,上下文可基於鄰近區塊。在由熵編碼單元 5 6進行熵編碼之後,可將經編碼之位元串流傳輸至另一器 件(例如’視訊解碼器3〇)或存檔以供稍後傳輸或取回。 反量化單元58及反轉換單元60分別應用反量化及反轉換 以在像素域中重建殘餘區塊(例如)以供稍後用作參考區 塊。運動補償單元44可藉由將該殘餘區塊添加至參考圖框 記憶體64之圖框中之一者的一預測性區塊來計算一參考區 塊。運動補償單元44亦可對該經重建的殘餘區塊應用一或 多個插值遽波器以s十算用於在運動估計中使用之次整數像 素值。求和器62將該經重建的殘餘區塊添加至由運動補償 單元44產生之經運動補償的預測區塊以產生一經重建的視 訊區塊以用於儲存於參考圖框記憶體64中。該經重建的視 訊區塊可由運動估計單元42及運動補償單元44用作一參考 區塊以框間編碼在隨後視訊圖框中之區塊。 以此方式’視訊編碼器2 0為一可執行一種方法之視訊編 碼器的實例,該方法包括:判定對與一視訊資料區塊相關 聯之亮度資訊應用一第一轉換之一第一殘餘四分樹(RqT) 深度’其中該RQT表示對亮度資訊及色度資訊應用轉換之 一方式;判定對與該視訊資料區塊相關聯之該色度資訊應 用一第二轉換之一第二RQT深度,其中該第二RQT深度不 同於該第一 RQT深度;及在該第一 RQT深度處編碼該亮度 資訊及在該第二RQT深度處編碼該色度資訊。 圖3為說明實例視訊解碼器30之方塊圖,該實例視訊解 162975.doc -31· 201244491 碼器30可實施在本發明中所描述的用於在一不同於一殘餘 資料區塊的色度樣本之RQT深度處對亮度樣本應用一轉換 之技術。在圖3之實例中,視訊解碼器3〇包括一熵解碼單 元8〇、預測單元81、反量化單元86、反轉換單元88、求和 器90及參考圖片記憶體92。預測單元“包括運動補償單元 82及框内預測單元84。 - 在解碼程序期間’視訊解碼器3〇自視訊編碼器接收表 · 示一經編碼視訊片段的視訊區塊及相關聯語法元素之—經 編碼視訊位元串流。視訊解碼器3〇之嫡解碼單元8〇熵解蝎 該位元串流以產生量化係數、運動向量及其他語法元素。 烟解碼單元80將該等運動向量及其他語法元素轉遞至預測 單元81視π解碼器3 〇可在視訊片段層級及/或視訊區塊 層級接收該等語法元素。 舉j而。作為寺景,視訊解瑪器3 〇可接收壓縮視訊資 料’該壓縮視訊資料已為了經由一網路傳輸而壓縮成所謂 「網路抽象層單元」或NAL單元。每一組單元可包括_ 識別儲存至該NAL單元的資料之類型的標頭。存在共同儲 存至MAL單元之兩種類型的f料。儲存至腿單元之第― 種類里的資料為包括該壓縮視訊資料之視訊編碼層(WL) 資料儲存至NAL單元之第二種類型的資料被稱作非, 資料’該非VCL資料包括額外資訊’諸如定義對許多NAL ’ 單凡八同的;^頭資料之參數集及補充增強資訊⑽…舉例 而言’參數集可含有序列層級標頭資訊(例如,在序列參 數集(m)中)及極少改變之圖片層級標頭資訊(例如’在圖 162975.doc -32- 201244491 片參數集(PPS)中)。在該等參數集中所含有之極少改變的 資訊不需要對於每一序列或圖片重複,進而改良了編碼效 率。此外,參數集之使用使得能夠進行標頭資訊之帶外傳 輸’進而避免需要用於錯誤恢復之冗餘傳輸。 當該視訊片段經編碼為一框内編碼(j)片段時,預測單元 81之框内預測單元84可基於所傳信的框内預測模式及來自 當前圖框或圖片之先前經解碼區塊之資料來產生當前視訊 片段之-視訊區塊的預測資料。當該視訊圖框經編碼為一 框間編碼(亦即’ B、P或GPB)片段時,預測單元Μ之運動 補償單元82基於自熵解碼單元8〇接收之運動向量及其他語 法元素來產生當刖視訊片段之一視訊區塊的預測性區塊。 可根據在參考圖片清單中之一者内的參考圖片中之一者產 生該等預測性區塊。視訊解碼器3〇可基於儲存於參考圖片 記憶體92中之參考圖片使用預設建構技術來建構參考圖框 清單,清單〇及清單i。 運動補償單元82藉由刮析運動向量及其他語法元素來判 疋針對當前視訊片段之一視訊區塊的預測資訊,且使用該 預測資訊來產生針對正被解碼的當前視訊區塊之預測性區 塊。舉例而言,運動補償單元82使用該等所接收的語法元 素中之一些來判定用於編碼該視訊片段的視訊區塊之預測 模式(例如’框内或框間預測)、框間預測片段類型(例如, B片奴P片奴或GPB片段)、用於該片段的參考圖片清單 中之一或多者的建構資訊、用於該片段之每一經框間編碼 的視Λ區塊之運動向量、該片段之每一經框間編碼的視訊 162975.doc -33- 201244491 區塊之框間預測狀態,及用以解碼當前視訊片段中的視訊 區塊之其他資訊。 運動補償單元82亦可基於插值濾波器執行插值》運動補 償單元82可使用如由視訊編碼器20在視訊區塊之編碼期間 使用之插值濾波器來計算參考區塊之次整數像素的内插 值。在此狀況中,運動補償單元82可自所接收之語法元素 來判定由視訊編碼器20使用之插值濾波器且使用該等插值 濾波器來產生預測性區塊。 反量化單元86反量化(亦即,解量化)在位元串流中提供 且由熵解碼單元80解碼之量化轉換係數。該反量化程序可 包括使用由視訊編碼器20針對在視訊片段中之每一視訊區 塊計算之量化參數來判定量化程度及(類似地)應予以應用 的反量化程度。 反轉換單元88對轉換係數應用一反轉換(例如,反 DCT、反整數轉換或概念上相似之反轉換程序),以便在 像素域中產生殘餘區塊。根據本發明之態樣,反轉換單元 88可判定對殘餘資料應用轉換之方式。亦即,舉例而言, 反轉換單元88可#定-RQT,纟表示對與一所接收㈣訊 資料區塊相關聯之殘餘亮度樣本及殘餘色度樣本應用轉換 (例如’ DCT、整數轉換、小波轉換,或一或多個其他轉 換)之方式。 根據本發明之態樣’可軸對亮度樣本及色度樣本應用 轉換之方式。因此’反轉換單以8亦可判^對殘餘亮度樣 本應用-反轉換之-第—RQT深度,及對殘餘色度樣本應 J62975.doc •34· 201244491 用第—反轉換之一第二RQT深度》在一些例子中,應用 、之該第—RQT深度(與色度樣本相關聯)可不同於應 轉換之該第—RQT深度。反轉換單元88可接著在該第 RQT/衣度處對殘餘亮度樣本應用該第一反轉換以產生亮 • ㈣換係數’且在該第二RQTS度處對殘餘色度樣本應用 . 該第二反轉換以產生色度轉換係數。 在運動補償單% 82基於運動向量及其他語法元素來產生 針ί田則視訊區塊之預測性區塊之後,視訊解碼器藉由 將來自反轉換單元88之殘餘區塊與由運動補償單元Μ產生 〇對應預測性區塊求和來形成一經解碼的視訊區塊。求和 =90表不執行此求和運算之該或該等組件。若需要,則亦 11心用解區塊濾波器來濾波該等經解碼區塊以便移除成 塊性假景彡。其他迴路濾波器(在編碼迴路内或在編碼迴路 後)亦可用來使像素轉變平滑,< 以其他方式改良視訊品 質。在-給定圖框或圖片中之經解碼的視訊區塊接著被儲 存於參考圖片記憶體92中,該參考圖片記憶體㈣存用於 稍後運動補償之參考圖片。參考圖片記憶體92亦儲存經解 . 力之視訊以供隨後呈現於-顯示器件上,諸如^之顯示 器件32。 以此方式,視訊解碼H3G為—可執行—種方法之視訊解 碼态的實例’該方法包括:判定對與一視訊資料區塊相關 聯之亮度資訊應用-第-轉換之_第_殘餘四分樹(Rqt) 冰度’其中該RQT表示對亮度資訊及色度資訊應用轉換之 方式’判定對與該視訊資料區塊相關聯之該色度資訊應 162975.doc •35· 201244491 用一第二轉換之一第二RQT深度,其中該第二rqt深度不 同於該第一 RQT深度;及在該第一 RQT深度處編碼該亮度 資訊及在該第二RQT深度處編碼該色度資訊。 圖4說明包括亮度樣本106A至106D(亮度樣本1〇6)及色度 樣本108(Cb)及110(Cr)之實例視訊資料區塊100。在圖4中 所展示之實例大體說明已根據4:2:0取樣方案取樣之亮度樣 本106及色度樣本108、110之標稱垂直及水平位置。舉例 而言,如在圖4中所展示,在水平及垂直方向中以色度樣 本108、110之取樣率的兩倍來取樣亮度樣本1〇6,其中以 相同取樣率來取樣色度樣本1〇8、11〇。 在圖4中所展示之實例僅為出於解釋目的而提供之一個 可能的取樣方案》亦即,在其他實例中,不同格式可規定 在亮度分量與色度分量之間的不同之水平及垂直取樣率比 率。舉例而言,對於具有4格式之視訊資料區塊,亮度 刀量之寬度可為色度分量的寬度之兩倍。然而,亮度分量 之高度可與色度分量之高度相同。對於具有4:4:4格式之視 訊資料區塊,可按相同取樣率來取樣亮.度分量及色度分 量。除非另有規定,用於亮度及色度陣列之語法可如此排 序,使得在所有三個顏色分量之資料皆存在時用於亮度 陣列之資料為第-,繼之以用於Cb陣列之資料繼之以用 於Cr陣列之資料。 在圖4中所展示之實例說明正以一高於色度分量之取樣 率來取樣亮度分量。在-些例子中,可以-高於色度之取 樣率來取樣亮度’此係因為人眼通常對亮度的變化比對色 162975.doc -36 - 201244491 度的變化更敏感。另外,—般而言,肖色度樣本相比,亮 度樣本可在-給定.圖框内經受更寬且更劇烈之變化。 如上文所提及,本發明之技術包括對與一㈣資料區塊 之亮度分量及色度分量應用不同大小之轉換。然而,如在 圖4之實例中所展示’在—些視訊編碼方案中,可以一高 於色度分#之取樣率來取樣錢分量。在此類料中,一 般對-給定區塊(諸如在圖4中所展示之視訊資料區塊)之亮 度樣本應用比色度樣本大之轉換(歸因於較大數目個樣 本)。 因此’本發明之技術不僅包括對—區塊之亮度及色度樣 本應用不同大小之轉換,且亦包括解耗對亮度及色度分量 應用轉換之方式。亦即,本發明之技術包括,纟出於轉換 目的而劃分-視訊資料區塊之例子中,在四分樹結構之不 同深度處對與一視訊資料區塊相關聯之亮度及色度分量應 用轉換|例而5 ’在符合當前正在研發的標準之 實例中可在TCJ之葉節點處對—τυ之亮度分量應用一 轉換,而在該TU之一鲂古、、π ή点,, 較呵/木度處對色度分量應用一轉 換。 圖5 Α及圖5Β為分別說明根據本發明之技術的實例殘餘 四刀樹(RQT)130(圖5A)及對應轉換單元15〇(圖3B)之概念 圖。RQT 13 0包括以一卩由思+ 、 卩自層方式配置之節點。每一節點可 為一無子節點之葉節點,-Γ Θ丄 朱即點或可具有四個子節點,故名「四 刀树」在圖5A之實例中,殘餘四分樹13〇包括根節點 132。根節點132具有四個子節點,包括葉節點134A及 162975.doc -37, 201244491 134B(葉節點134)及節點136八及U6B(節點136)。因為節點 136並非葉節點,所以節點136各自包括四個子節點。亦 即,在圖5 Α中所展示之實例中,節點丨3 6 a具有四個子葉 節點138八至138D,而節點136B具有三個葉節點14〇八至 140C(葉節點140)及節點142。此外,節點142具有四個葉 節點144A至144D(葉節點144)。 RQT 130可包括描述一對應轉換單元(τυ只諸如在此實例 中之TU 1 50)的特性之資料。舉例而言,RqT i 3〇可藉由其 結構來描述將圖5B之TU 150分裂成子TU。假定TU 150具 有2Νχ2Ν之大小。在此實例中,τυ 15〇具有四個子τυ,其 中兩個子TU 152Α及152Β(子TU 152)具有大小ΝχΝ。Τϋ 150之剩餘的兩個子丁υ經進一步分裂成較小之子cu。亦 即,在圖5B中所展示之實例中,Τυ 150之子TU中之一者 經分裂成大小為N/2xN/2之子TU 154A至154D,而TU 150 之其他子TU經分裂成大小為n/2xN/2之子TU 1 56A至 15 6C(子TU 156)及一經進一步劃分之子τυ ,該經進一步劃 分之子TU被識別為大小為ΝΜχΝ/4之子TU 158Α至158D(子 TU 158) » 在圖5Α及圖5Β中所展示之實例中,RqT 13〇之結構對應 於TU 150之分裂。亦即,根節點132對應於τυ 15〇且葉節 點134對應於子TU 152。另外,葉節點138(其為節點136A 之一子卽點,其通常意謂節點i 3 6 A包括一參考葉節點13 8 之指標)對應於子TU I54,葉節點丨4〇(例如,屬於節點 136B)對應於子TU 156 ’且葉節點144(例如,屬於節點 162975.doc -38- 201244491 142)對應於子TU 158。 用於RQT 13 0的節點之資料可描述對應於該節點之-是 否經分裂。若該TU經分裂,則在RQT 130中可存在四個額 外節點。在一些實例中,可由藉由以下偽代碼表示之程序 來定義四分樹之節點: quadtree_node { boolean split_flag( 1); // signaling data if (split_flag) { quadtree node childl; quadtree node child2; quadtree_node child3; quadtree_node child4; } 一 } 該split_flag值可為一表示對應於當前節點之TU是否經分 裂之單位元值。若該TU未經分裂,則該split_flag值可為 「0」;而若該TU經分裂,則該split一flag值可為「1」。對 於殘餘四分樹130之實例,分裂旗標值陣列可為 10011000001000000 ’其定義自根節點132直至最小葉節點 (144A至144D)的分裂結構。 諸如視訊編碼器20及/或視訊解碼器30之視訊編碼器通 常在相同RQT深度處對亮度樣本及色度樣本應用轉換。 RQT深度大體上係關於一 TU經分裂之次數(例如,RQT深 度1對應於該TU之一次劃分,如在圖5B中所展示)。在一 些實例中,該視訊編碼器可對葉節點之亮度及色度樣本應 用轉換,該等葉節點諸如在圖5 A中所展示之葉節點1 :M、 162975.doc -39- 201244491 138、對應於在圖5B中所展示之葉τυ η]、 154 、 156及158)。 本發明之技術包括在不$的深度處⑼%,諸%在圖Μ 中所展示的RQT13(^RqT的不同深度)對與一叩相關聯之 亮度及色度分量應用轉換。亦即,舉例而t,視訊編碼器 可對葉節點134、138、14〇及144之亮度分量應用一轉換, 而在其他非葉節點處對色度分量應用一轉換。儘管在下文 將圖5A及圖5B之某些態樣描述為由視訊編碼器2()(圖i及圖 2)來實行,但應理解該等技術亦可由諸如視訊解碼器⑽(圖 1及圖3)之另一視訊編碼器來實行。舉例而言,視訊解碼 器30可根據本發明之態樣來判定且對經編碼的視訊資料應 用反轉換。 在出於解釋目的之實例中,τυ 15〇(對應於根節點132) 可為64x64 TU(例如,64x64個亮度樣本及32x32個色度樣 本,假疋根據4:2:0色度格式按色度取樣率之兩倍來取樣亮 度)。視訊編碼器20可大體上將轉換應用於葉節點之τυ, 該等葉節點諸如葉節點134、138、140及I44。亦即,視訊 編碼器20可對於葉節點134在RQT深度1處,對於葉節點 138及140在RQT深度2處及對於葉節點144在RQT深度3處 對亮度及色度樣本應用轉換。因此,在此實例中,視訊編 碼器20可對子TU 152之亮度樣本應用32x32轉換而對色度 樣本應用16x16轉換,對子TU 154及156之亮度樣本應用 16x16轉換及對色度樣本應用8x8轉換,及對子TU 158之亮 度樣本應用8x8轉換及對色度樣本應用4x4轉換。 162975.doc • 40- 201244491 本發明之態樣係關於在四分樹結構之不同深度處對亮度 及色度樣本應用轉換。在上文之實例中,視訊編碼器2〇可 在葉節點134(RQT深度1)、葉節點138(RqT深度2)、葉節 點140(RQT深度2)及葉節點144(RQT深度3)處對亮度樣本 應用轉換,同時在一更高深度處對色度樣本應用一單一轉 換。在一貫例中,視訊編碼器2〇可在RQT深度〇處對色度 樣本應用轉換。在此實例中,視訊編碼器20可對TU i 50之 色度樣本應用32x32轉換,同時以一更精細之粒度對亮度 樣本應用轉換。 在另一貫例中,視訊編碼器2〇可在其他RqT深度處對色 度樣本應用轉換。舉例而言,視訊編碼器2〇可在葉節點 144處對亮度樣本應用轉換,同時在節點142處對色度樣本 應用一轉換。參看圖5B,視訊編碼器2〇可對子τυ 15 8中之 每一者的亮度樣本應用8x8轉換,同時對所有子τυ 15 8之 色度樣本應用8 X 8轉換。以此方式,對於一給定視訊資料 區塊,視訊編碼器20可以與亮度樣本相較就RqT而論相對 更粗縫之粒度來對色度樣本應用轉換。 在一些貫例中’視訊編碼器2〇可根本上限制分裂與τυ 相關聯之色度樣本之能力。舉例而言,視訊編碼器2〇可根 據RQT 130來分裂TU 15〇之亮度樣本。然而,視訊編碼器 20可不根據RQT 130來分裂TU 150之色度樣本。實情為, 根據本發明之態樣’視訊編碼器2〇可在rqT深度0處(在根 節點132處)對色度樣本應用一轉換。在一實例中,視訊編 碼器20仍可根據RQT 130來分裂亮度樣本,及對RQT i30 162975.doc 201244491 之葉節點應用恰當之轉換。 在其他實例中,視訊編碼器20可實施一旗標,該旗標用 來識別對色度樣本應用轉換之RQT深度是否不同於對亮度 樣本應用轉換之RQT深度。舉例而言,當TU四分樹之一節 點經分裂成四個節點時,視訊編碼器2〇可設定一旗標來指 示亮度樣本及色度樣本是否經分裂。亦即,視訊編碼器2〇 可设疋一旗標來指示是否在無分裂之情況下對色度樣本應 用一轉換。在一實例中,若亮度樣本及色度樣本均被根據 RQT分裂,則視訊編碼器2〇可將一旗標值設定為「〇」;且 若亮度樣本被根據RQT分裂但色度樣本未經分裂,則視訊 編碼器20可將一旗標值設定為「L。在此實例中,視訊編 碼器20了對亮度樣本應用大小不同於色度樣本之轉換。亦 即,舉例而言,視訊編碼器2〇可對亮度樣本應用一比對色 度樣本應用的轉換小之轉換。 在出於解釋目的之實例中,假定視訊編碼器20在RQT深 H處對色度樣本應用一轉換。在此實例中’視訊編碼器 20可使用一旗標來傳信在節點136a&136b處色度樣本未 經分裂。此外,視訊編碼器20可對與節點134及136相關聯 之色度樣本應用一轉換且藉由節點134及136傳信該等色度 · 樣本根據本發明之態樣,視訊編碼器2()可解躺對亮度樣 · 本及色度樣本應用轉換之方式,且根據rqt 13〇來分裂亮 度樣本。 在一些實例中’視訊編碼器20可將針對TU 150的色度樣 本之最小轉換大小或RQT深度傳信。舉例而言,視訊編碼 I62975.doc -42· 201244491 器20可將TU 150之色度樣本可分裂之最小轉換大小傳信。 替代性地或額外地,視訊編碼器20可將色度樣本可分裂之 最低RQT深度傳信。視訊編碼器20可在一參數集(諸如一 序列參數集(SPS)、一圖片參數集(PPS)或在一片段標頭)中 提供此類傳信。在此實例中,視訊編碼器20可在最小轉換 大小或最低RQT深度(下文稱作「色度劃分下限」)處對色 度樣本應用一轉換,而不論亮度樣本是否被根據RQT進一 步劃分。 在視訊編碼器20實施一色度劃分下限之實例中,視訊編 碼器20可以各種方式將該色度劃分下限傳信。在一實例 中,視訊編碼器20可將在亮度樣本可分裂之最小RQT深度 與色度樣本可分裂之最小RQT深度之間的差傳信。亦即, 在圖5Α中所展示之實例中,可根據RQT 130將亮度樣本劃 分至RQT深度3。視訊編碼器20可藉由自3減去色度劃分下 限且將所得值傳信來將該色度劃分下限傳信。 在一些實例中,可使用一序列參數集(SPS)來將該色度 劃分下限傳信。舉例而言,可根據以下之表1來形成SPS :
表1-用於色度劃分下限之實例SPS seq_parameter_set_rbsp() { 描述符 profile_idc u(8) reserved一zero一8bits /* equal to 0 */ u(8) level idc u(8) seq parameter set id ue(v) pic_width_in_luma_samples u(16) piC-height一in 一 lumajsamples u(16) bit一depth」uma 一 minus8 ue(v) bit一depth一chroma minus8 ue(v) 162975.doc -43· 201244491 bit一 depth-luma 一 increment ue(v) bit—depth 一 chroma 一 increment ue(v) log2—max一frame—num_minus4 ue(v) pic一order一cnt一type ue(v) if( pic_order_cnt_type== 0 ) 里 og2」max_pic—order一cnt_lsb一 minus4 ue(v) else if( pic_order_cnt_type— 1) { deIta_pic_order_always_zero_flag u(l) offset一for-iion—refjic se(v) nuni-ref一frames一injpic一order_cnt一cycle ue(v) for( i=0; i < num ref frames in_pic order cnt cycle; i-H-) offset一for一ref_frame【i ] se(v) } max 一 num_ref—frames ue(v) gaps in frame num value allowed flag u(l) log2_min 一 codingJblock-Size一 minus3 ue(v) log2_diff-max—min 一 codingjblock—size ue(v) log2—min—transform 一 block—size_minus2 ue(v) log2—diff_maX-inin 一 transform一blockjsize ue(v) max_transform_hierarchy_depth_inter ue(v) delta一transform_hierarchy_depth_chroma_inter ue(v) max_transformHhierarchy_depth_intra ue(v) delta-transform—hierarchy一depth 一chroma—intra ue(v) interpolationMfilter_flag u(l) rbsp_trailing_bits() } 在表1中所展示之實例中,識別為delta_transform_ hierarchy_depth_chroma_inter之語法元素可指示在圖片間 的亮度樣本之最小轉換大小與色度樣本之最小轉換大小之 間的差。可根據以下等式來形成該語法元素: log2MinTrafoSizeChroma= log2_min_coding_block_size_minus3+3+log2_diflF_max_min_coding_block_size-max_transform_hierarchy_depth_inter -delta_transform_hierarchy_depth_chroma_inter-l • 44- 162975.doc 201244491 在此實例中 ’ delta—transform_hierarchy_depth_chri)ma inter語法元素之值可為正、零或負。舉例而言,當色度轉 換深度小於亮度轉換深度(例如,應用轉換之RQT深度) 時,delta_transform_hierarchy_depth_chr〇ma inter語法元 素可小於零。 此外,根據在表1中所展示之實例,識別為delta_ transform_hierarchy_depth_chroma_intra之語法元素可指示 在圖片内的亮度樣本之最小轉換大小與色度樣本之最小轉 換大小之間的差。可根據以下等式來形成該語法元素: log2MinTrafoSizeChroma= log2_min_coding_block_size_minus3+3+log2_difF_max_min_coding_block_size-max_transform_hierarchy_depth_intra -delta_transform_hierarchy_depth_chroma_intra-l 如上文提及,在此實例中,delta_transform_hierarchy_ depth_chroma_inter語法元素之值可為正、零或負。舉例而 言,當色度轉換深度小於亮度轉換深度(例如,應用轉換 之 RQT深度)時,delta_transform_hierarchy_depth_chroma_ inter語法元素可小於零。 在另一實例中,視訊編碼器20可將在TU 150所對應的葉 CU與色度樣本可分裂之最小深度之間的差傳信°舉例而 言,視訊編碼器20可將在根節點132之RQT深度(RQT深度 零)與TU 1 50之色度樣本可分裂之最小深度之間的差傳 信,根節點132對應於一大小等於該TU所對應之葉CU的未 經劃分之TU。在一些實例中,可設定一預設值。舉例而 162975.doc -45- 201244491 言,可設定一預設值以使得色度樣本之最小轉換大小等於 cu之大小。 在一些實例中,可使用一序列參數集(SPS)來將該色度 劃分下限傳信。舉例而言,可根據以下之表2來形成一 SPS :
表2-用於色度劃分下限之實例SPS seq_parameter_set_rbsp() { 描述符 profile_idc u(8) reserved_zero_8bits /* equal to 0 */ u(8) level」dc u(8) seq parameter set id ue(v) pic一width 一 in-luma一samples u(16) pic_height一 in—luma 一samples u(16) bit一 depthjuma 一 minus8 ue(v) bit_depth_chroma_minus8 ue(v) bit-depth 一 luma_increment ue(v) bit_depth_chroma_increment ue(v) log2 一 max 一 frame一 num 一 minus4 ue(v) pic_order—cnt-type ue(v) if( pic一order一cnt一type== 0 ) log2_maxjpic_order_cnt_lsb_minus4 ue(v) else if( pic_order一cnt一type= 1 ) { delta_pic_order_always_zero_flag u⑴ offset一 for一 non_ref_pic se(v) num ref frames injpic order cnt cycle ue(v) for( i=0; i < num ref frames in_pic order cnt cycle; i-H-) offset_for_ref一frame[ i ] se(v) } max 一 num 一 ref_frames ue(v) gaps in frame num value allowed flag u(l) log2_min 一 codingjblock一 size_minus3 ue(v) log2_diff_max_min_coding^block_size ue(v) log2 一 min-transform 一 block一 size一 minus2 ue(v) 里 og2-diff_max一 min 一 transforni-block-Size ue(v) 162975.doc -46- 201244491 max_transform_hierarchy_depth_inter ue(v) chroma_transform_depth_delta_CU_inter ue(v) max一transform一 hierarchy一 depth—intra ue(v) chroma_transform_depth_delta_CU_intra ue(v) interpolation_filter_flag u(l) rbsp_trailing_bits() } 在表2中所展示之實例中,chroma_transform_depth_ delta_CU」nter可指示所預測圖片間的編碼單元的深度與 最小色度轉換大小的深度之間的深度差。對於所預測圖片 間,可根據以下等式來形成該語法元素。此值範圍可至少 等於1 : log2MinTrafoSizeChroma=log2CUSize-chroma_transform_depth_delta_C'U_inter 此外,根據在表2中所展示之實例,識別為chroma_ transform_depth_delta_CU_intra之語法元素可指示所預測 圖片内之編碼單元的深度與最小色度轉換大小的深度之間 的深度差。對於所預測圖片内,可根據以下等式來形成該 語法元素。此值範圍可至少等於1 : log2MinTrafoSizeChroma=log2CUSize-chroma_transform_depth_delta_C!U_intra 在另一實例中,按預設將chroma_transform_depth一 delta_CU_inter 及 chroma_transform_depth_delta_CU_:intra 之預設值設定為值1,且因此無需被傳信。 在根據上文的表2將色度劃分下限傳信之例子中,可根 據以下之表3來將轉換樹傳信》 162975.doc -47- 201244491 表3-轉換樹語法 transform—tree( x0, y0, log2TrafoSize,trafoDepth,blkldx) { 描述符 if (trafoDepth= 0 && IntraSplitFlag— 0){ if( !entropy_coding一mode一flag && PredMode !=MODE一INTRA) { cbp_yuv 一 root vlc(n,v) cbf_luma[ xO ][ yO ] [trafoDepth ]=cbp_yuv_root & 1 cbf_cb[x0][y0] [trafoDepth ]=(cbp_yuv_root» 1) & 1 cbf_cr[x0][y0] [trafoDepth ]=(cbp_yuv_root» 2) & 1 residualDataPresentFlag=(cbp_yuv_root! =0) } else { if( PredMode != MODE一INTRA) no一residual一data一flag u(l) | ae(v) residualDataPresentFlag=! no_residual_data_flag } } else { residualDataPresentFlag=TRUE > if (residualDataPresentFlag) { intraSplitFlag=( IntraSplitFlag && trafoDepth== 0 ? 1 :0) maxDepth=( PredMode = MODE一 INTRA ? max一transform_hierarchy一depth一intra + IntraSplitFlag : max一transform一hierarchy 一depth一inter) if( log2TrafoSize <=Log2MaxTrafoSize && log2TrafoSize > Log2MinTrafoSize && trafoDepth < maxDepth && !intraSplitFlag) split一transform_flag[ xO ][ y0 ][ trafoDepth ] u(l) | ae(v) if( PredMode != MODEJNTRA && Iog2TrafoSize <= Log2MaxTrafoSize && entropy_coding_mode_flag) { firstChromaCbf_flag=(( log2TrafoSize= Log2MaxTrafoSize 11 trafoDepth= 0 ? 1 : 0 ) && log2MinTrafoSizeChroma>=log2TrafoSize -1) if( firstChromaCbf_flag 11 log2TrafoSize > Log2MinTrafoSize) { xBase=xO - (xO & ((1 «log2TrafoSize) - 1 )) yBase=yO - (yO & ((1 «log2TrafoSize) - 1 )) if( firstChromaCbf 11 cbf_cb[ xBase ][ yBase ][ trafoDepth - 1 ]) 162975.doc • 48- 201244491 cbf_cb[ xO ][ yO ][ trafoDepth ] u(l) | ae(v) if( flrstChromaCbf 11 cbf_cr[ xBase ][ yBase ][ trafoDepth - 1 ]) cbf_cr[ xO ][ yO ][ trafoDepth ] u(l) | ae(v) } } if( split_transfomi_flag[ x〇 ][ y〇 ][ trafoDepth ]) { xl=x0 + ((1 «log2TrafoSize)» 1) yl=y0 + ((1 «log2TrafoSize)» 1) transform一tree( x0, y0, log2TrafoSize - 1,trafoDepth + 1,0) transform_tree( xl, yO, log2TrafoSize - 1, trafoDepth + 1,1 ) transform_tree( x〇, yl, log2TrafoSize - 1, trafoDepth + 1,2) transform tree( xl,yl,log2TrafoSize - 1,trafoDepth + 1,3 ) } else if( entropy_coding_mode_flag){ if( PredMode== MODE_INTRA 11 trafoDepth != 0 11 cbf_cb[ xO ][ yO ][ trafoDepth ]丨 | cbf_cr[ xO ][ y〇 ][ trafoDepth ]) cbf_luma[ xO ][ yO ][ trafoDepth ] u(l) | ae(v) if( PredMode== MODE_INTRA) if( log2TrafoSize > Log2MinTrafoSize && log2MinTrafoSizeChroma>=log2TrafoSize -1 ) { cbf_cb[ x〇 ][ y〇 ][ trafoDepth ] u(l) | ae(v) cbf_cr[ x〇 ][ y〇 ][ trafoDepth ] u(l) | ae(v) } } if(trafoDepth= 0 && ! entropy一coding一mode一flag && PredMode=MODE_INTRA) { cbp_yuv_root vlc(n,v) cbf_luma[ xO ][ yO ] [0 ]~cbp_yuv_root & 1 cbf_cb[x0][y0] [ 0 ]=(cbp_yuv_root» 1) & 1 cbf_cr[x0][y0] [ 0 ]=(cbp _yuv_root» 2) & 1 } } 在表3之實例中,色度分量仍可使用一 RQT結構。舉例 而言,nrstChromaCbf_flag係根據以下等式來加以定義: firstChromaCbf_flag=(( logZTrafoSize^ Log2MaxTrafoSize 11 trafoDepth== 0 •49- 162975.doc 201244491 ? 1 : 0 ) && log2MinTrafoSizeChroma>=log2TrafoSize -1) 在其他實例中,色度分量可不使用該RQT結構。亦即, 舉例而言,可在CU層級處(RQT之零深度)將色度分量傳 信。在一此類實例中,可根據以下表4來產生轉換樹語 法: 表4-轉換樹語法 transform_tree( x0, y0, log2TrafoSize,trafoDepth,blkldx) { 描述符 if (trafoDepth== 0 && entropy一coding一mode一flag &&( PredMode = MODE INTRA) { cbf_cb[\0][y0] [trafoDepth ] u(l)丨 ae(v) cbf_cr[x0] [yO] [trafoDepth ] u(l) | ae(v) } if (trafoDepth= 0 && IntraSplitFlag= 0){ if( !entropy_coding_mode_flag && PredMode !=MODE_INTRA) { cbp_yuv一 root vlc(n,v) cbf」uma[ xO ][ yO ] [trafoDepth ]=cbp一yuv一root & 1 cbf_cb[x0][y0] [trafoDepth ]=(cbp_yuv_root» 1) & 1 cbf_cr[x0][y0] [trafoDepth ]=(cbp_yuv_root» 2) & 1 residualDataPresentFlag=(cbp_yuv_root! =0) } else { if( PredMode != MODE_INTRA) no_residual一 data一 flag u(l) | ae(v) residualDataPresentFlag:! no_residual_data_flag } } else { residualDataPresentFlag=TRUE } if (residualDataPresentFlag) { if (trafoDepth= 0 && entropy_coding_mode_flag && PredMode != MODE_INTRA) { cbf_cb[x0][y0] [trafoDepth ] u⑴丨ae(v) cbf_cr[x0] [yO] [trafoDepth ] u(l)丨 ae(v) } 162975.doc -50- 201244491 intraSplitFlag=( IntraSplitFlag && trafoDepth= 0 ? 1 :0) maxDepth=( PredMode== MODEEMTRA ? max_transform_hierarchy_depth_intra + IntraSplitFlag : max_transform—hierarchy一 depth一inter) if( log2TrafoSize <=Log2MaxTrafoSize && log2TrafoSize > Log2MinTrafoSize && trafoDepth < maxDepth && !intraSplitFlag) split—transform一flag[ x() ][ y0 ][ trafoDepth ] u(l) | ae(v) if( split_transform_flag[ x〇 ][ y〇 ][ trafoDepth ]) { xl=x0 + ( ( 1 «log2TrafoSize)» 1) yl=y0 + ((1 «log2TrafoSize)» 1) transform_tree( xO, y0, log2TrafoSize — 1,trafoDepth + 1,0 ) transform_tree( xl, yO, log2TrafoSize - 1, trafoDepth + 1,1) transform一tree( xO, yl,log2TrafoSize — 1,trafoDepth + 1,2 ) transform_tree( xl, yl5 log2TrafoSize - 15 trafoDepth + 1, 3 ) } else if( entropy_coding_mode_flag){ if( PredMode== MODE_INTRA 11 trafoDepth != 0 11 cbf—cb[ xO ][ yO ][ trafoDepth ] 11 cbf_cr[ xO ][ yO ][ trafoDepth ]) cbf_luma[ xO ][ yO ][ trafoDepth ] u⑴丨ae(v) } } if( ! entropy—coding一mode_flag && PredMode==MODE—INTRA) { cbp_yuv一 root vlc(n,v) cbf_luma[ x〇 ][ yO ] [0 ]==cbp_yuv_root & 1 cbf_cb[x0][y0] [ 0 ]=(cbp_yuv_root >*> 1) & 1 cbf_cr[x0][y0] [ 0 ]=(cbp_yuv_root» 2) & 1 } > 此外,當色度分量不使用該RQT結構時,可根據以下表 5來產生轉換係數語法: -51 - 162975.doc 201244491 表5-轉換係數語法 transform_coeff( x0, yO, log2TrafoSize, trafoDepth, cldx) { 描述符 if( ((cldx=0 && cbf_luma[ x〇 ][ y〇 ][ trafoDepth ] ) 11 (cldx=l && cbf_cb[ xO ][ yO ][ trafoDepth ]) 11 (cldx=2 && cbf—cr[ xO ][ yO ][ trafoDepth ]))) { if( split_transform_flag[ x〇 ][ y〇 ][ trafoDepth ]) { xl=x0 + ((1 «log2TrafoSize)» 1) yl=y0 + ((1 «log2TrafoSize)» 1) if( !entropy_coding_mode_flag] && (cldx= 0 11 log2TrafoSize > Log2MinTrafoSize + 1 ) ) { if (cldx=0) { cbp_luma[ trafoDepth +1 ] vlc(n,v) cbf_]uma[ xO ][ yO ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth + 1 ]» 3 cbf_luma[ xl ][ y〇 ][ trafoDepth + 1 ]= cbp_lnma[ trafoDepth+1 ]» 2 cbf_luma[ xO ][ yl ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth + 1 ] » 1 cbf_luma[ xl ][ yl ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth + 1 ] } else if(cldx=l && log2MinTrafoSizeChroma>=log2TrafoSize -1) { cbp_cb[ trafoDepth + 1 ] vlc(n,v) cbf_cb[ x〇 ][ y〇 ][ trafoDepth + 1 ]= cbp_cb[ trafoDepth + 1 ] » 3 cbf_cb[ xl ][ y〇 ][ trafoDepth + 1 ]= cbp_cb[ trafoDepth+1 ] » 2 cbf_cb[ x〇 ][ yl ][ trafoDepth + 1 ]= cbp_cb[ trafoDepth + 1 ] » 1 cbf_cb[ xl ][ yl ][ trafoDepth + 1 ]= cbp_cb[ trafoDepth + 1 ] } else if(cldx=2&& log2MinTrafoSizeChroma>=log2TrafoSize -1) { 162975.doc •52· 201244491 cbp_cr[ trafoDepth + 1 ] vlc(n,v) cbf_cr[ x0 ][ y0 ][ trafoDepth + 1 ]= cbp_cr[ trafoDepth + 1 ]» 3 cbf_cr[ xl ][ y0 ][ trafoDepth + 1 ]= cbp_cr[ trafoDepth+1 ] » 2 cbf_cr[ x〇 ][ yl ][ trafoDepth + 1 ]= cbp_cr[ trafoDepth + 1 ] » 1 cbf_cr[ xl ][ yl ][ trafoDepth + 1 ]= cbp_cr[ trafoDepth + 1 ] } } } if( split一transform一flag[ xO ][ y0 ][ trafoDepth ]&& (cldx==0 || log2MinTrafoSizeChrorria < log2TrafoSize -1)) { transform_coeff( x0, y0, log2TrafoSize - 1,trafoDepth + 1,cldx) transform_coeff( xl, yO, log2TrafoSize - 1, trafoDepth + 1, cldx) transform一coeff( x0, yl, log2TrafoSize - 1,trafoDepth + 1,cldx) transform_coeff( xl, yl, log2TrafoSize - 1, trafoDepth + 1, cldx) } else { nMax=( 1 «(log2TrafoSize « 1 ))»(cldx > 0 ? 2 : 0) for( n=0; n < nMax; n++ ) transCoe£fLevel[ x0 ][ y〇 ][ trafoDepth ][ cldx ][ n ]=0 if (entropy coding—mode_flag) residual_coding_cabac( )c0, yO, log2TrafoSize, trafoDepth, cldx) else if (!entropy_coding一mode—flag) residual_coding_cavlc( xO, yO, log2TrafoSize, trafoDepth, cldx) } } } 在表5之實例中,cbp_cb[trafoDepth]可為4位元值,其中 每一位元等於在再分層級trafoDepth處的四個色度(Cb)轉 換區塊中之一者的cbf_cb。該陣列索引trafoDepth可規定將 一編碼單元再分成用於轉換編碼之目的的區塊之當前再分 -53- 162975.doc 201244491 層級。此外,對於對應於編碼單元之區塊,trafoDepth可 等於零。根據本發明之態樣,當cbp_cb[trafoDepth]不存在 時,可將cbf_cb[trafoDepth]之值推斷為等於零。 此外,cbp_cr[trafoDepth]可為4位元值,其中每一位元 等於在再分層級trafoDepth處的四個色度(Cr)轉換區塊中之 一者的cbf_cr。該陣列索引trafoDepth可規定將一編碼單元 再分成用於轉換編碼之目的的區塊之當前再分層級。此 外,對於對應於編碼單元之區塊,trafoDepth可等於零。 根據本發明之態樣,當cbp_cr[trafoDepth]不存在時,可將 cbf_cb[trafoDepth]之值推斷為等於零。 根據在表5中所展示之實例,當條件:else if(cldx==l && log2MinTrafoSizeChroma>=log2TrafoSize -1)未被滿足 時,在父節點中執行對於色度樣本之轉換。類似地,當條 件:else if(cldx==2&& log2MinTrafoSizeChroma>=log2TrafoSize-l) 未被滿足時,在父節點中執行對於色度樣本之轉換。類似地, 當條件:if( split_transform_flag[ x0 ][ y0 ][ trafoDepth ] && (cldx==0 || log2MinTrafoSizeChroma < log2TrafoSize -1)) 未被滿足時,在父節點中執行對於色度樣本之轉換。 此外,當色度分量不使用該RQT結構時,可根據以下表 6來產生轉換係數語法: 表6-轉換係數語法 transform_coeff( x0, y0, log2TrafoSize} trafoDepth, cldx) { 描述符 if( ((cldx=0 && cbf_luma[ x〇 ][ yO ][ trafoDepth ]'))) { if( split_transform_flag[ x0 ][ yO ][ trafoDepth ]) { xl=x0 + (( 1 « log2TrafoSize)» 1) 162975.doc .54- 201244491 yl=y0 + ( ( 1 «log2TrafoSize) » 1 ) if( !entropy_coding_mocle_flag] && cldx= 0 ) cbp—luma[ trafoDepth + 1 ] vlc(n,v) cbf_luma[ x〇 ][ y〇 ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth + 1 ]» 3 cbf_luma[ xl ][ yO ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth+1 ] » 2 cbf_luma[ xO ][ yl ][ trafoDepth + 1 ]= cbp—luma[ trafoDepth + 1 ]» 1 cbf_luma[ xl ][ yl ][ trafoDepth + 1 ]= cbp_luma[ trafoDepth + 1 ] transform_coefF( xO, yO, log2TrafoSize - 1, trafoDepth + 1, cldx) transform_coeff( xl, yO, log2TrafoSize - 1, trafoDepth + 1, cldx) transform一coeff( xO, yl, log2TrafoSize - 1,trafoDepth + 1,cldx) transform_coeff( xl, yl, log2TrafoSize - 1, trafoDepth + 1, cldx) } else { nMax=( 1 «(log2TrafoSize « 1))» ( cldx > 0 ? 2 : 0) for( n=0; n < nMax; n++) transCoeffLevel[ xO ][ yO ][ trafoDepth ][ cldx ][ n ]=0 if (entropy一coding—mode一flag ) residual_coding_cabac( xO, yO, log2TrafoSize, trafoDepth, cldx) else if ( ! entropy coding mode flag) residual_coding_cavlc( xO, yO, log2TrafoSize, trafoDepth, cldx) } } } 儘管出於解釋之目的關於視訊編碼器20及視訊解碼器30 描述了圖5A及圖5B之某些態樣,但應理解其他視訊編碼 單元(諸如其他處理器、處理單元、包括編碼器/解瑪器 (CODEC)之基於硬體的編碼單元,及其類似者)亦可經組 態以執行關於圖5A及圖5B描述之實例及技術。 圖6為說明根據本發明之編碼視訊資料的技術之流程 圖β —般將在圖6中所展示之實例描述為由一視訊編碼器 162975.doc •55· 201244491 來執仃。應理解,在—些實例中圖6之方法可由上文描 、’c —視編碼器20(圖i及圆2)或視訊解碼器(圖^及圖來 實仃。在其他實例中’圖6之方法可由各種其他處理器、 處Γ單70、諸如編碼器/解碼器(c〇dec)之基於硬體的編 碼單元及其類似者來執行。 :根據本發明之態樣,該視訊編碼器可判定對與一視訊資 料區鬼相關聯之亮度資訊應用一轉換之第一 RQT深度 (182)。亮度資訊一般可包括與視訊資料之一亮度分量相關 聯之資料’而不論該亮度資訊之具體域如何。亦即,亮度 資Λ可包括殘餘亮度樣本(例如,空間,像素域),視訊編碼 器(視訊編碼器2G)可對該等殘餘亮度樣本應用—轉換以產 生轉換係、數(例如’轉換域)^相反地,亮度資訊可包括亮 度轉換係數(例如,轉換域),視訊解碼器(解碼器3◦可對 '•亥等7C度轉換係數應用一反轉換以產生殘餘亮度樣本(例 如’空間/像素域)。 此外在一些實例中,對於RQT深度,該視訊編碼器可 判定對於-LCU的每-葉cu之—RQTe亦即,對於一給定 CU,該視訊編碼器可判定出於轉換之目的來劃分該cui 方式(例如,根據一RQT來將該cu劃分成一或多個丁叼。該 視訊編碼器可在所判定的RQT之最低深度處(例如,該RQT 之葉節點)對亮度資訊應用轉換。 該視訊編碼器亦可判定對該視訊資料區塊之色度資訊應 用一轉換之第二RQT深度(i 84)。類似亮度資訊,色度資訊 一般可包括與視訊資料之一色度分量(例如,包括以及Cb 162975.doc -56- 201244491 分量)相關聯之資料,而不論該色度資訊之具體域如何。 亦即,色度資訊可包括殘餘色度樣本(例如,空間/像素 域)’視訊編碼器(視訊編碼器20)可對該等殘餘色度樣本應 用一轉換以產生轉換係數(例如,轉換域)。相反地,色度 資訊了匕括色度轉換係數(例如,轉換域),視訊解碼器(解 碼器30)可對該等色度轉換係數應用—反轉換以產生殘餘 色度樣本(例如,空間/像素域)。 根據本發明之態樣,該視訊編碼器可獨立於對亮度資訊 應用一轉換之RQ丁深度來判定對色度資訊應用一轉換之 RQT深度。在一些實例中,該視訊編碼器可在一相對高於 亮度樣本之RQT深度處對色度資訊應用一轉換。舉例而 言’該視訊編碼器可不對與該RQT的葉節點相關聯之色度 資訊應用-轉換。實情為,該視訊編碼器可在一較高RQ; 冰度處對色度資訊應用一轉換(例如,進而相對於在葉節 點處應用一轉換來應用一較大轉換)。 該視訊編碼器可接著在該第一RQT深度處編碼亮度資訊 及在該第二RQT深度處編碼色度資訊(186)。舉例而言,在 s亥視Ifl編碼器為一視訊編瑪器(你丨如,+目如μ π_
進而產生在像素域中之殘餘亮度及色度樣本。 轉換係數應用恰當之反轉換來編碼亮度資訊及 兩碼益為一視訊解碼器 該視訊編碼器可藉由對 亮度資訊及色度資訊, 162975.doc -57- 201244491 =應理解’將關於圖6展示及描述之步驟僅作為一實例 來提供。亦即,未必需要以在圖6中所展示之次序來執行 圖6之方法的步驟,且可執行更少、額外或替代步驟。 圖7為說明根據本發明之編碼視訊資料的技術之流程 圖。儘管出於解釋之目的而大體上描述為由視訊編碼器 2〇(圖1及圆2)之組件來執行,但應理解其他視訊編碼單 一處理器、處理單元、諸如編碼器/解碼器(c〇DEC)之 基於硬體的編碼單元及其類似者亦可經組態以執行圖7之 方法》 根據在g 7中所展示之實例方法,視訊編碼器可判定 疋否在不同於殘餘色度樣本之RQT深度處對殘餘亮度樣 ^應用轉換(2GG) »舉例而言,視訊編碼器2()可基於位元 率-失真或其他編碼分析來作出該判^。若視訊編碼器20 在不同於殘餘色度樣本之RQT深度處對殘餘亮度樣本應 用轉換(步驟200之「是」分支),則視訊編碼 器20可產生一 在不同的RQT深度處應用轉換之指示(2〇2)。舉例而言,視 I.扁碼器20可设定一指示在不同的RqT深度處應用轉換之 旗標。 在一些貫例中,視訊編碼器20亦產生RQT深度差之一指 示(204)。亦即,視訊編碼器2〇產生在對亮度樣本應用轉換 之RQT深度與對色度樣本應用轉換之RQT深度之間的差之 一才曰示。在其他實例中,可不需要此類指示。舉例而言, 視訊編碼器20可實施對色度樣本應用轉換之一預設RqT深 度。在一此類實例中,視訊編碼器2〇可不產生RQT深度差 162975.doc •58· 201244491 之一指示。 視„il編碼器20亦對亮度樣本及色度樣本應用轉換 (206)因此,視訊編碼器20產生用於視訊資料之亮度轉換 '、 色度轉換係數。視訊編碼器20產生一含有亮度及色 轉、係數之位元串流(2〇8)(例如,在一些實例中,在量 化之後)。視訊編碼器2〇亦可在位元串流中包括在不同的 深度處應用轉換之指示及/或RQT深度差之-指示。因為視 I爲碼器20可在一高於亮度轉換係數之RQT深度處將色度 轉換係數傳^,所以在—些例子中,視訊編碼器2阿在亮 久之^將色度轉換係數傳信。亦即,視訊編碼器20可 在-尚於葉節點之深度處將與節點相關聯之色度轉換係數 傳k,在葉節點處視訊編碼器2〇將亮度轉換係數傳信。 亦應理解,將關於圖7展示及描述之步驟僅作為一實例 來提供。亦即,未必需要以在圖7中所展示之次序來執行 圖7之方法的步驟’且可執行更少、額外或替代步驟。舉 例而β纟#例子中,視訊編碼器2Q可不提供在不同的 RQT深度處應用轉換之一指示_),及/或可不提供RQT 深度差之一指示(2〇4)。 圖8為說明根據本發明之解碼視訊資料的技術之流程 圖。儘管出於解釋之目的而大體上描述為由視訊解碼器 及圖3)之組件來執行’但應理解其他視訊編碼單 元、處理器、處理單元、諸如編碼器/解碼器(c〇dec)之 基於硬體的編碼單元及其類似者亦可經組態以執行圖8之 162975.doc 59· 201244491 視訊解碼器30接收一經編碼之位元串流(22〇)。視訊解 碼器3 0接著判定是否在一不同於色度轉換係數之RqT深度 處對所接收之亮度轉換係數應用反轉換(222)。在一些例子 中’視訊解碼器3 0可基於在所接收的位元串流中所包括之 指示來做出此判定。舉例而言’如上文關於圖7所描述, 視訊解碼器30可基於在所接收的位元串流中所包括之指示 在不同於色度樣本的深度處對亮度樣本應用轉換之一旗標 來作出此判定。在其他實例中,視訊解碼器3〇可判定是否 在無此類傳信的情況下按預設在對於亮度及色度係數之不 同RQT深度處應用反轉換。 若在不同深度處應用轉換(步驟222之「是」分支),則 視訊解碼器30可判定對亮度轉換係數應用一反轉換之Rqt 深度(224)。在一些實例中,視訊解碼器3〇可經預先程式化 以在RQT之葉節點處對亮度轉換係數應用一反轉換。 此外,視訊解碼器30可判定對色度係數應用一反轉換之 RQT深度(226)。在一些實例中,視訊解碼器3〇可經預先程 式化以在某一預設RQT深度處對色度轉換係數應用一反轉 換。舉例而言’視訊解碼器30可經預先程式化以在一為零 的RQT深度處或在一為1的RQT深度處對色度轉換係數應 用反轉換。 在另一實例中,視訊解碼器30可基於在位元串流中所接 收之一指示來判定應用一反轉換之RQT深度。舉例而言, 視訊解碼器30可接收在對亮度轉換係數應用一反轉換之 RQT深度與對色度轉換係數應用一反轉換之rqt深度之間 162975.doc -60· 201244491 的差之一指示。在其他實例中,視訊解碼器30可接收表示 對色度轉換係數應用一反轉換之RQT深度的一替代指示。 舉例而έ ’視訊解碼器3 0可基於所接收區塊之大小或其他 準則來推斷應用一反轉換之RQT深度》在判定應用該等反 轉換之RQT深度之後,視訊解碼器3〇可對該等亮度轉換係 數及該等色度轉換係數應用該等反轉換(228)。在一些實例 中,在位元串流中可在亮度轉換係數之前包括色度轉換係 數。因此,視訊解碼器30可在對亮度係數應用一反轉換之 則對色度轉換係數應用一反轉換。藉由對該等亮度及色度 轉換係數應用該等反轉換,視訊解碼器y可產生殘餘亮度 及色度樣本。 ' ^又 亦應理解’將關於_ 8展示及描述之步驟僅作為一實例 來提供。亦即,未必需要以在圖8中所展示之次序來執行 圖8之方法的步驟,^可執行更少、額外或替代步驟。 同時執行而非順序執行。此, 發明之某些態樣描述為由單 解本發明之技術可由 應理解’取決於實例,本文中所描述之方法的任一者之 某些動作或事件可以―不同的順序來執行,可經添加合 併或一起略去(例如,並非所有所描述的動作或事件對於 該方法之實踐皆為必需的另外,在某些實例中,動作 或事件可(例如)經由多線緒處理、中斷處理或多個處理器
162975.doc 。此外,儘管出於清晰之目的將本 ,由單一模組或單元執行,但應理 與視訊編碼器相關聯之單元或模組 儘管已關於即將出現之HEVC標準描述了本 •61 · 201244491 發明之某些態樣(例如,關於cu、PU及τυ),但本發明不 限於此方式。亦即,本發明之技術廣泛地適於對與一視1 資料區塊相關聯之亮度及色度樣本應用轉換,且不受限於 任何特定編碼標準。 在-或多個實例中,可以硬體、軟體、韌體或其任何組 口來實施在本發明中所描述之功能。若以軟體來實施,則 功能可作為-或多個指令或程式碼而儲存於電腦可讀媒體 上或經由電腦可讀媒體來傳輸且由一基於硬體的處理單元 來執订。電腦可讀媒體可包括電腦可讀儲存媒體(其對應 於諸如資料儲存媒體之有形媒體)或通信媒體,通信媒體 包括(例#)根據-通信$定促進電腦程式自一處傳送至另 一處的任何媒體。 以此方式,電腦可讀媒體一般可對應於(1)非暫時性的 有形電腦可㈣存媒體,或⑺諸如信號或載波之通传媒 H 料儲存媒體可為可由—或多個電腦或—或多個處理 器存取以取回指令、程式碼及/或資料結構以用於實施在 本發明中所描述之技術的任何可用媒體。電腦程式產品可 包括電腦可讀媒體。 藉由實例而非限制,此類電腦可讀儲存媒體可包含 RAM、ROM、EEPR0M、CD_R〇M或其他光碟儲存器、磁 碟儲存器或其他磁性儲存器件,快閃記憶體,或可用以儲 存呈指令或資料結構之形式之所要程式碼且可由電腦存取 的任何其他媒體。而且’將任何連接適當地稱為電腦可讀 媒體。舉例而言’若使用同軸電纔、光親、雙絞線'數位 162975.doc -62· 201244491 二線技_如’紅外線、無線電及微波) 而自網站、祠服器或其他遠端源傳輸指令,則同軸電規、 =、雙絞線、肌或無線技術(諸如,紅外線、無線電及 臧波)包括於媒體之定義中。 然而,應理解’電腦可讀儲存媒體及資料儲存媒體不包 括連接、載波、信號或其他暫時性媒體,而是有關非暫時 性有形儲存媒體。如本文中所使用,磁碟及光碟包括緊密 先碟(CD)、雷射光碟、光學光碟、數位影音光碟(DVD)、 軟性磁碟及藍光光碟,其巾磁碟通fj^性 :’而光碟藉由雷射以光學方式再生資料。以上各物之組 合亦應包括於電腦可讀媒體之範疇内。 可藉由諸如一或多個數位信號處理器(Dsp)、通用微處 理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列 (FPGA)或其他等效積體或離散邏輯電路之_或多個處理器 來執打指令。因此,本文中所使用之術語「處理器」可指 代上述結構中之任—者或適宜於實施本文中所描述之技術 的任何其他結構。此外’纟一些態樣中,彳冑本文所描述 之功能性提供於經組態以用於編碼及解碼之專用硬體及/ 或軟體模組内,或併入於組合式編解碼器中。而且,該等 技術可完全實施於一或多個電路或邏輯元件中。 本發明之技術可在廣泛的各種器件或裝置中實施,該等 器件或襞置包括無線手機、積體電路(1(:)或1(:集合(例如, B曰片集)。在本發明令描述各種組件、模組或單元以強調 '··""、·心以執竹所揭示技術之器件之功能態樣,但未必需要 162975.doc -63· 201244491 藉由不同硬體單元予以實現。實情為,如上文所描述,吁 將各種單元組合於編解碼器硬體單元中,或藉由互操作性 硬體單元(包括如上文所描述之一或多個處理器)之集合真 結合適宜軟體及/或韌體來提供該等單元。 已描述本發明之各種態樣。此等及其他態樣係在以下申 請專利範圍之範疇内。 【圖式簡單說明】 圖1為說明可利用在本發明中所描述的技術之實例視訊 編碼及解碼系統之方塊圖。 圖2為說明可實施在本發明中所描述的技術之實例視訊 編碼器之方塊圖。 圖3為說明可實施在本發明中所描述的技術之實例視訊 解碼器之方塊圖。 圖4說明一實例視訊資料區塊,該實例視訊資料區塊包 括與β亥視訊資料區塊相關聯之亮度及色度樣本。 圖5Α說明根據本發明之態樣的實例階層式四分樹結構。 圖5Β說明根據在圖5Α中所展示的階層式四分樹結構之 轉換單元的實例劃分。 圖6為說明根據本發明之態樣的對殘餘亮度及色度資訊 應用轉換之實例方法的流程圖。 、圖7為說明根據本發明之態樣的編碼轉換資訊之實例方 法的流程圖。 圖8為說明根據本發明之態樣的解碼轉換資訊之實例方 法的流程圖。 162975.doc -64- 201244491 【主要元件符號說明】 10 視訊編碼及解碼系統 12 源器件 14 目的地器件 16 鏈路 18 視訊源 20 視訊編瑪 22 輸出介面 24 儲存器件 28 輸入介面 30 視訊解碼器 32 顯示器件 40 模式選擇單元 42 運動估計單元 44 運動補償單元 46 框内預測單元 48 分割單元 50 求和器 52 轉換單元/轉換處理單元 54 量化單元 56 烟編碼单元 58 反量化單元 60 反轉換單元 62 求和器 162975.doc -65- 201244491 64 參考圖片記憶體/參考圖框記憶體 80 熵解碼單元 81 預測單元 82 運動補償單元 84 框内預測單元 86 反量化單元 δδ 反轉換單元 90 求和器 92 參考圖片記憶體 100 視訊資料區塊 106Α 亮度樣本 106Β 亮度樣本 106C 亮度樣本 106D 亮度樣本 108 色度樣本 110 色度樣本 130 殘餘四分樹/RQT 132 根節點 134Α 葉節點 134Β 葉節點 136Α 節點 136Β 節點 138Α 葉節點 138Β 葉節點 162975.doc -66- 201244491
138C 葉節點 138D 葉節點 140A 葉節點 140B 葉節點 140C 葉節點 142 節點 144A 葉節點 144B 葉節點 144C 葉節點 144D 葉節點 150 轉換單元/TU 152A 子TU/葉TU 152B 子TU/葉TU 154A 子TU/葉TU 154B 子TU/葉TU 154C 子TU/葉TU 154D 子TU/葉TU 156A 子TU/葉TU 156B 子TU/葉TU 156C 子TU/葉TU 158A 子TU/葉TU 158B 子TU/葉TU 158C 子TU/葉TU 158D 子TU/葉TU 162975.doc -67

Claims (1)

  1. 201244491 七、申請專利範圍: 1 · 一種編碼視訊資料之方法,該方法包含: 判定對與一視訊資料區塊相關聯之亮度資訊應用一第 一轉換之一第一殘餘四分樹(RQT)深度,其令該RQT表 示對亮度資訊及色度資訊應用轉換之一方式; 判定對與該視訊資料區塊相關聯之該色度資訊應用一 第二轉換之一第二RQT深度,其中該第二rqt深度不同 於該第一 RQT深度;及 在該第一 RQT深度處編碼該亮度資訊及在該第二rqt 深度處編碼該色度資訊。 2. 如請求項1之方法,其中編碼該亮度資訊及該色度資訊 包含編碼該亮度資訊及該色度資訊,其中該亮度資訊包 含殘餘亮度樣本且該色度資訊包含殘餘色度樣本,且編 碼包含: 在該第一 RQT深度處對該等殘餘亮度樣本應用該第一 轉換以產生亮度轉換係數;及 在該第二RQT深度處對該等殘餘色度樣本應用該第二 轉換以產生色度轉換係數。 3. 如凊求項2之方法,其中編碼該亮度資訊及該色度資訊 - 進一步包含: 產生包含在該第一 RQT深度處的該等亮度轉換係數之 一指不的一位元串流;及 產生包含在該第二RQT深度處的該等色度轉換係數之 一才曰示的一位元串流。 162975.doc 201244491 4.如請求項1之方法’其中編碼該亮度資訊及該色度資訊 包含解碼該亮度資訊及該色度資訊,其中該亮度資訊包 含亮度轉換係數且該色度資訊包含色度轉換係數,且解 碼包含: 在該第一RQT深度處對該等亮度轉換係數應用該第一 轉換以產生殘餘亮度樣本;及 在該第二RQT深度處對該等色度轉換係數應用該第二 轉換以產生殘餘色度樣本。 5_如請求項1之方法,其中該第二rqt深度高於該第一 rqT 深度以使得該第一轉換小於該第二轉換。 6.如請求項1之方法,其中判定該第二rqt深度包含判定在 該第一 RQT深度與該第二rqt深度之間的一差。 7·如睛求項6之方法,其中判定該差包含解碼含有該差的 一指不之以下各者中之一者:一序列參數集(SPS)、一圖 片參數集(PPS)及一片段標頭。 8. 如請求項1之方法’其中判定該第二rqt深度包含判定一 預定之RQT深度。 9. 如請求項1之方法,其中判定該預定rqt深度包含判定一 為零的RQT深度,及在與該視訊資料區塊相關聯之一編 碼單元層級處對該色度資訊應用一轉換。 10. 如凊求項1之方法’其進一步包含編碼該第二尺卩丁深度不 同於該第一 RQT深度之一指示。 11 _如清求項丨〇之方法,其中編碼該指示包含編碼一旗標, 該旗標指示在一不同於亮度資訊之RQT深度處將色度資 I62975.doc 201244491 • 机傳信。 12. —種用於編碼視訊資料之裝置,該裝置包含一或多個處 理器’該一或多個處理器經組態以: 判定對與一視訊資料區塊相關聯之亮度資訊應用一第 , 一轉換之一第一殘餘四分樹(RQT)深度,其中該RQT表 不對亮度資訊及色度資訊應用轉換之一方式; 判定對與該視訊資料區塊相關聯之該色度資訊應用一 第一轉換之一第二RQT深度,其中該第二rqt深度不同 於該第一 RQT深度;及 在該第一 RQT深度處編碼該亮度資訊及在該第二rqT 深度處編碼該色度資訊。 13. 如請求項12之裝置,其中該裝置包含一視訊編碼器,該 視訊編碼器包含用於編碼該亮度資訊及該色度資訊之該 一或多個處理器,其中該亮度資訊包含殘餘亮度樣本且 該色度資訊包含殘餘色度樣本,且其中該視訊編碼器之 該一或多個處理器經組態以: 在該第一 RQT深度處對該等殘餘亮度樣本應用該第一 轉換以產生亮度轉換係數;及 在該第一 RQT深度處對該等殘餘色度樣本應用該第二 轉換以產生色度轉換係數。 14. 如請求項13之裝置,其中為了編碼該亮度資訊及該色度 資訊’該視訊編碼器之該一或多個處理器經組態以: 產生包含在該第一 RQT深度處的該等亮度轉換係數之 一指示的一位元串流;及 162975.doc 201244491 產生包含在該第二RQT深度處的該等色度轉換係數之 一指示的一位元串流。 15.如請求項12之裝置,其中該裝置包含一視訊解碼器,該 視訊解碼器包含用於解碼該亮度資訊及該色度資訊之該 一或多個處理器,其中該亮度資訊包含亮度轉換係數且 該色度資訊包含色度轉換係數’且其中該視訊解碼器之 該一或多個處理器經組態以: 在該第一 RQT深度處對該等亮度轉換係數應用該第一 轉換以產生殘餘亮度樣本;及 在該第二RQT深度處對該等色度轉換係數應用該第二 轉換以產生殘餘色度樣本。 16·如請求項12之裝置,其中該第二rqt深度高於該第一 RQT深度以使得該第一轉換小於該第二轉換。 17·如請求項12之裝置’其中為了判定該第二rqt深度,該 一或多個處理器經組態以判定在該第一 RQT深度與該第 二RQT深度之間的一差。 18. 如請求項17之裝置,其中為了判定該差,該一或多個處 理器經組態以解碼含有該差的一指示之以下各者中之一 者.一序列參數集(SPS)、一圖片參數集(PPS),及一片 段標頭。 19. 如請求項12之裝置,其中為了判定該第二RQT深度,該 一或多個處理器經組態以判定一預定RQT深度。 20. 如请求項12之裝置,其中為了判定該預定RqT深度,該 一或多個處理器經組態以判定一為零的RqT深度,及在 162975.doc -4- 201244491 與該視訊資料區塊相關聯之一編碼單元層級處對該色度 資讯應用一轉換。 21. 如請求項12之裝置,其中該一或多個處理器進_步經組 態以編碼該第二RQT深度不同於該第一 rqt深度之一指 示0 22. 如請求項21之裝置,其中為了編碼該指示,該一或多個 處理器經組態以編碼一旗標,該旗標指示在一不同於亮 度資訊之RQT深度處將色度資訊傳信。 23. 如味求項12之裝置,其中該裝置包含一視訊編碼器。 24. 士 β月求項12之裝置,其中該裝置包含一視訊解碼器。 25_ —種用於編碼視訊資料之裝置,該裝置包含: 用於判定對與一視訊資料區塊相關聯之亮度資訊應用 一第一轉換之一第一殘餘四分樹(RQT)深度之構件,其 中該RQT表示對亮度f訊及色度資訊應用轉換之—方 式; 用於判定對與該視訊資料區塊相關聯之該色度資訊應 用一第二轉換之HQT深度之構件,纟中該:第二 RQT深度不同於該第一RQT深度;及 用於在該第一RQT深度處編碼該亮度資訊及在該第二 RQT深度處編碼該色度資訊之構件。 26.如請求項25之裝置,其中用於編碼該亮度資訊及該色度 資訊之該構件包含用於編碼該亮度資訊及該色度資訊之 構件’其t該亮度資訊包含殘餘亮度樣本且該色度資訊 包含殘餘色度樣本,且用於編碼之該構件經組態以: 162975.doc 201244491 在該第一 RQT深度處對該等殘餘亮度樣本應用該第一 轉換以產生亮度轉換係數;及 在該第二RQT深度處對該等殘餘色度樣本應用該第二 轉換以產生色度轉換係數。 27. 如請求項26之裝置,其中用於編碼該亮度資訊及該色度 資sfl之s亥構件進一步經組態以: 產生包含在該第一 RQT深度處的該等亮度轉換係數之 一指示的一位元串流;及 產生包含在該第二RQT深度處的該等色度轉換係數之 一指示的一位元串流。 28. 如凊求項25之裝置,其中用於編碼該亮度資訊及該色度 資讯之該構件包含用於解碼該亮度資訊及該色度資訊之 構件,其中該亮度資訊包含亮度轉換係數且該色度資訊 包含色度轉換係數,且用於解碼之該構件經組態以: 在該第一 RQT深度處對該等亮度轉換係數應用該第一 轉換以產生殘餘亮度樣本;及 在該第二RQT深度處對該等色度轉換係數應用該第二 轉換以產生殘餘色度樣本。 29. 如凊求項25之裝置,其中該第二RQT深度高於該第一 RQT深度以使得該第—轉換小於該第二轉換。 3 0·如請求項25之裝置’其中用於判^該第二rqt深度之該 構件包含用於判定在該第一RQT深度與該第二RQT深度 之間的一差之構件。 31.如明求項25之裝置,其中用於判定該第二rqt深度之該 162975.doc • 6 - 201244491 構件包含用於判定一預定RQT深度之構件。 32. 33. 34. 35. 如*奢求項25之裝置’其中用於判定該預定RQT深度之該 構件包含用於判定一為零的RQT深度之構件,及用於在 與該視訊資料區塊相關聯之一編碼單元層級處對該色度 資訊應用一轉換之構件。 如晴求項25之裝置’其進一步包含用於編碼該第二RQT 深度不同於該第一 RQT深度之一指示之構件。 一種電腦程式產品’其包含一電腦可讀儲存媒體,該電 腦可讀儲存媒體具有儲存於該電腦可讀儲存媒體上之指 令’該等指令在執行時令用於編碼視訊資料的一器件之 一或多個處理器: 判定對與一視訊資料區塊相關聯之亮度資訊應用一第 一轉換之一第一殘餘四分樹(RQT)深度,其中該RQT表 示對亮度資訊及色度資訊應用轉換之一方式; 判定對與該視訊資料區塊相關聯之該色度資訊應用一 第二轉換之一第二RQT深度’其中該第二RQT深度不同 於該第一 RQT深度;及 在該第一 RQT深度處編碼該亮度資訊及在該第二rqT ;衣度處編碼該色度資訊。 如請求項34之電腦程式產品,其中該等指令使該一或多 個處理器編碼該亮度資訊及該色度資訊,其中該亮度資 訊包含殘餘亮度樣本且該色度資訊包含殘餘色度樣本, 且其中編碼包含: 在該第一 RQT深度處對該等殘餘亮度樣本應用該第一 i62975,doc 201244491 轉換以產生亮度轉換係數;及 在該第二RQT深度處對該等殘餘色度樣本應用該第二 轉換以產生色度轉換係數。 36. 如請求項34之電腦程式產品,其中該等指令使該一或多 個處理器解碼該亮度資訊及該色度資訊,其中該亮度資 訊包含亮度轉換係數且該色度資訊包含色度轉換係數, 且其中解碼包含: 在該第一 RQT深度處對該等亮度轉換係數應用該第一 轉換以產生殘餘亮度樣本;及 在該第二RQT深度處對該等色度轉換係數應用該第二 轉換以產生殘餘色度樣本。 37. 如請求項34之電腦程式產品,其中該第二rqt深度高於 該第一 RQT深度以使得該第一轉換小於該第二轉換。 38. 如請求項34之電腦程式產品,其中該等指令使該一或多 個處理器藉由判定在該第一 RQT深度與該第二RQT深度 之間的一差來判定該第二RQT深度。 39. 如請求項34之電腦程式產品,該等指令使該一或多個處 理器藉由判定一預定RQT深度來判定該第二RQT深度。 40. 如請求項34之電腦程式產品,其中該等指令使該一或多 個處理器藉由判定一為零的RQTS度及在與該視訊資料 區塊相關聯之一編碼單元層級處對該色度資訊應用一轉 換來判定該預定RQT深度。 162975.doc
TW101107931A 2011-03-10 2012-03-08 Transforms in video coding TW201244491A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161451581P 2011-03-10 2011-03-10
US201161555986P 2011-11-04 2011-11-04
US13/414,232 US9848197B2 (en) 2011-03-10 2012-03-07 Transforms in video coding

Publications (1)

Publication Number Publication Date
TW201244491A true TW201244491A (en) 2012-11-01

Family

ID=46795579

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101107931A TW201244491A (en) 2011-03-10 2012-03-08 Transforms in video coding

Country Status (7)

Country Link
US (1) US9848197B2 (zh)
EP (2) EP2684361A1 (zh)
JP (1) JP5869008B2 (zh)
KR (2) KR20130129469A (zh)
CN (1) CN103444177B (zh)
TW (1) TW201244491A (zh)
WO (1) WO2012122355A1 (zh)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101590511B1 (ko) * 2009-01-23 2016-02-02 에스케이텔레콤 주식회사 움직임 벡터 부호화/복호화 장치 및 방법과 그를 이용한 영상 부호화/복호화 장치 및 방법
US8548057B2 (en) 2011-01-25 2013-10-01 Microsoft Corporation Video coding redundancy reduction
CN103828364B (zh) 2011-09-29 2018-06-12 夏普株式会社 图像解码装置、图像解码方法及图像编码装置
WO2013047805A1 (ja) 2011-09-29 2013-04-04 シャープ株式会社 画像復号装置、画像復号方法および画像符号化装置
US9807401B2 (en) 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
US9237358B2 (en) * 2011-11-08 2016-01-12 Qualcomm Incorporated Context reduction for context adaptive binary arithmetic coding
EP2779643A4 (en) * 2011-11-08 2015-09-02 Samsung Electronics Co Ltd METHOD AND DEVICE FOR VIDEO ARITHMETIC ENCODING, AND METHOD AND DEVICE FOR VIDEO ARITHMETIC DECODING
US20130128971A1 (en) * 2011-11-23 2013-05-23 Qualcomm Incorporated Transforms in video coding
WO2013107027A1 (en) 2012-01-19 2013-07-25 Mediatek Singapore Pte. Ltd. Methods and apparatuses of cbf coding in hevc
US9462275B2 (en) 2012-01-30 2016-10-04 Qualcomm Incorporated Residual quad tree (RQT) coding for video coding
US9185405B2 (en) * 2012-03-23 2015-11-10 Qualcomm Incorporated Coded block flag inference in video coding
US9467701B2 (en) 2012-04-05 2016-10-11 Qualcomm Incorporated Coded block flag coding
US9961368B2 (en) * 2012-04-24 2018-05-01 Lg Electronics Inc. Method and device for determining a unit of a transform unit used in video signal processing
US9749645B2 (en) 2012-06-22 2017-08-29 Microsoft Technology Licensing, Llc Coded-block-flag coding and derivation
KR102134367B1 (ko) * 2012-09-10 2020-07-15 선 페이턴트 트러스트 화상 부호화 방법, 화상 복호화 방법, 화상 부호화 장치, 화상 복호화 장치, 및 화상 부호화 복호화 장치
CN103716607B (zh) * 2012-09-28 2017-02-08 中兴通讯股份有限公司 一种应用于HEVC‑based 3DVC的编码方法和装置
AU2012232992A1 (en) 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US10271067B2 (en) 2013-01-07 2019-04-23 Telefonaktiebolaget L M Ericsson (Publ) Encoding and decoding of slices in pictures of a video stream using different maximum transform sizes
KR20150058324A (ko) 2013-01-30 2015-05-28 인텔 코포레이션 차세대 비디오용 콘텐츠 적응적 엔트로피 코딩
US20160065974A1 (en) * 2013-04-05 2016-03-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding video with respect to filtering
CN105103555A (zh) * 2013-04-11 2015-11-25 Lg电子株式会社 处理视频信号的方法及装置
KR101631281B1 (ko) * 2013-07-12 2016-06-16 삼성전자주식회사 뷰 합성 예측을 이용한 인터 레이어 비디오 복호화 방법 및 그 장치 뷰 합성 예측을 이용한 인터 레이어 비디오 부호화 방법 및 장치
US10531105B2 (en) * 2013-12-17 2020-01-07 Qualcomm Incorporated Signaling partition information for 3D lookup table for color gamut scalability in multi-layer video coding
US9756337B2 (en) 2013-12-17 2017-09-05 Qualcomm Incorporated Signaling color values for 3D lookup table for color gamut scalability in multi-layer video coding
WO2016037363A1 (en) * 2014-09-12 2016-03-17 Mediatek Singapore Pte. Ltd. Methods of residue transform tree representation
CA2946779C (en) * 2014-05-05 2019-10-01 Mediatek Singapore Pte. Ltd. Method and apparatus for determining residue transform tree representation
US10142642B2 (en) * 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
WO2016074147A1 (en) * 2014-11-11 2016-05-19 Mediatek Singapore Pte. Ltd. Separated coding tree for luma and chroma
RU2739251C2 (ru) 2016-02-11 2020-12-22 Томсон Лайсенсинг Способ и устройство для кодирования/декодирования элемента изображения, содержащего данные изображения, представленные каналом составляющей яркости и, по меньшей мере, одним каналом составляющей цветности
WO2017173593A1 (en) * 2016-04-06 2017-10-12 Mediatek Singapore Pte. Ltd. Separate coding secondary transform syntax elements for different color components
WO2018022011A1 (en) * 2016-07-26 2018-02-01 Hewlett-Packard Development Company, L.P. Indexing voxels for 3d printing
US10778976B2 (en) * 2016-09-28 2020-09-15 Sharp Kabushiki Kaisha Image decoding apparatus and image coding apparatus
CN110089114A (zh) * 2016-10-10 2019-08-02 三星电子株式会社 用于对亮度块和色度块进行编码或解码的方法和装置
CN116647677A (zh) * 2016-10-28 2023-08-25 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
EP3618439A4 (en) * 2017-04-28 2020-09-02 Sharp Kabushiki Kaisha IMAGE DECODING DEVICE AND IMAGE CODING DEVICE
WO2018217024A1 (ko) 2017-05-26 2018-11-29 에스케이텔레콤 주식회사 다양한 블록 크기를 지원하는 영상 부호화 또는 복호화를 위한 장치 및 방법
KR102435881B1 (ko) * 2017-05-26 2022-08-24 에스케이텔레콤 주식회사 영상 부호화 또는 복호화하기 위한 장치 및 방법
WO2019135629A1 (ko) * 2018-01-05 2019-07-11 에스케이텔레콤 주식회사 크로마 블록의 복원 방법 및 이를 이용한 영상 복호화 장치
WO2019172202A1 (ja) * 2018-03-05 2019-09-12 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置及び符号化方法
CN108737819B (zh) * 2018-05-20 2021-06-11 北京工业大学 一种基于四叉树二叉树结构的灵活编码单元划分方法
EP3804315A4 (en) * 2018-05-31 2022-03-09 Sharp Kabushiki Kaisha SYSTEMS AND METHODS FOR PARTITIONING VIDEO BLOCKS INTO A SLOT FOR INTERPRETING VIDEO DATA
NZ773632A (en) 2018-08-28 2022-10-28 Huawei Tech Co Ltd Picture partitioning method and apparatus
WO2020043136A1 (zh) * 2018-08-28 2020-03-05 华为技术有限公司 图像划分方法及装置
US11095921B2 (en) 2018-12-18 2021-08-17 Tencent America LLC Method and apparatus for video encoding or decoding
CN112075077B (zh) * 2019-01-08 2022-01-11 华为技术有限公司 图像预测方法、装置、设备、系统及存储介质
JP2022523925A (ja) * 2019-03-04 2022-04-27 アリババ グループ ホウルディング リミテッド 映像コンテンツを処理するための方法及びシステム
US11496774B2 (en) 2019-08-27 2022-11-08 Tencent America LLC Header syntax for QT/BT/TT size
WO2021056211A1 (zh) * 2019-09-24 2021-04-01 富士通株式会社 视频编码、解码方法及装置、电子设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6005981A (en) * 1996-04-11 1999-12-21 National Semiconductor Corporation Quadtree-structured coding of color images and intra-coded images
HUP0301368A3 (en) * 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
US7242812B2 (en) * 2003-06-26 2007-07-10 Academia Sinica Coding and decoding of video data
JP5383674B2 (ja) 2007-06-27 2014-01-08 トムソン ライセンシング ビット深さスケーラビリティのために向上層残差予測を使ってビデオ・データをエンコードおよび/またはデコードする方法および装置
US7991237B2 (en) 2007-06-28 2011-08-02 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
EP2051527A1 (en) 2007-10-15 2009-04-22 Thomson Licensing Enhancement layer residual prediction for bit depth scalability using hierarchical LUTs
CN105120284B (zh) 2009-08-12 2019-06-25 汤姆森特许公司 用于改进的帧内色度编码和解码的方法及装置
KR101624649B1 (ko) 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101841783B1 (ko) 2009-12-04 2018-03-23 톰슨 라이센싱 비디오 인코딩 및 디코딩에서 인터 프레임을 위한 개선된 색차 변환을 위한 방법 및 장치
KR101703327B1 (ko) 2010-01-14 2017-02-06 삼성전자 주식회사 계층적 데이터 단위의 패턴 정보를 이용하는 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
KR101789634B1 (ko) 2010-04-09 2017-10-25 엘지전자 주식회사 비디오 데이터 처리 방법 및 장치
ES2904650T3 (es) 2010-04-13 2022-04-05 Ge Video Compression Llc Codificación de vídeo que usa subdivisiones multiárbol de imágenes
US8467412B2 (en) * 2010-04-14 2013-06-18 Ericsson Television Inc. Adaptive rate shifting for delivery of video services to service groups
WO2012042884A1 (ja) 2010-09-29 2012-04-05 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
US9210442B2 (en) 2011-01-12 2015-12-08 Google Technology Holdings LLC Efficient transform unit representation
US8948271B2 (en) 2011-01-13 2015-02-03 Texas Instruments Incorporated Method and apparatus for a low complexity transform unit partitioning structure for HEVC
WO2013102299A1 (en) 2012-01-04 2013-07-11 Mediatek Singapore Pte. Ltd. Residue quad tree depth for chroma components

Also Published As

Publication number Publication date
JP5869008B2 (ja) 2016-02-24
EP2684361A1 (en) 2014-01-15
US9848197B2 (en) 2017-12-19
CN103444177A (zh) 2013-12-11
WO2012122355A1 (en) 2012-09-13
CN103444177B (zh) 2016-12-21
US20120230421A1 (en) 2012-09-13
KR20130129469A (ko) 2013-11-28
JP2014509160A (ja) 2014-04-10
EP3013051B1 (en) 2018-12-19
KR20160032249A (ko) 2016-03-23
EP3013051A1 (en) 2016-04-27

Similar Documents

Publication Publication Date Title
TW201244491A (en) Transforms in video coding
EP3158758B1 (en) Signaling hrd parameters for bitstream partitions
CA2884422C (en) Signaling layer identifiers for operation points in video coding
EP3562161A1 (en) Indication of video properties
CA2884881C (en) Improved signaling of layer identifiers for operation points of a video coder
AU2013280659A1 (en) Signaling long-term reference pictures for video coding
WO2015057830A1 (en) Parallel extensions of parameter sets