TWI702833B - 一種用於視訊編解碼系統的視訊編解碼方法和裝置 - Google Patents

一種用於視訊編解碼系統的視訊編解碼方法和裝置 Download PDF

Info

Publication number
TWI702833B
TWI702833B TW108113547A TW108113547A TWI702833B TW I702833 B TWI702833 B TW I702833B TW 108113547 A TW108113547 A TW 108113547A TW 108113547 A TW108113547 A TW 108113547A TW I702833 B TWI702833 B TW I702833B
Authority
TW
Taiwan
Prior art keywords
block
decoding
transformation
current block
transform
Prior art date
Application number
TW108113547A
Other languages
English (en)
Other versions
TW201946469A (zh
Inventor
蔡佳銘
徐志瑋
莊子德
陳慶曄
向時達
黃毓文
林芷儀
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201946469A publication Critical patent/TW201946469A/zh
Application granted granted Critical
Publication of TWI702833B publication Critical patent/TWI702833B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明揭露一種使用區塊分割進行視訊編解碼的方法和裝置。根據本發明，對應於將當前塊遞迴地分割為較小變換單元(transform unit，簡稱TU)塊的分割結構被確定，直到分割結構達到最大允許分割深度，或者直到較小TU塊中的至少一個的塊大小是一可支援的核心變換大小為止，其中根據分割結構當前塊被分割為最終的較小TU塊。根據分區結構變換編解碼處理被應用於當前塊，其中對最終較小TU塊中的至少一個變換編解碼處理被跳過。標誌被發送用於當前塊以指示當前塊是否被允許跳過對所述至少一個最終較小TU塊的變換編碼過程。

Description

一種用於視訊編解碼系統的視訊編解碼方法和裝置
本發明涉及視訊編解碼中的變換編解碼過程，更具體地說，涉及跳過從當前塊分割出的最終變換單元(transform unit，簡稱TU)塊中至少之一的該變換編解碼過程的一種視訊編解碼方法。
高效率視訊編解碼(High Efficiency Video Coding,HEVC)標準是在ITU-T視訊編解碼專家組(Video Coding Experts Group,VCEG)和ISO/IEC運動圖像專家組(Moving Picture Experts Group,MPEG)標準化組織的聯合視訊項目下開發的，尤其是與稱為視訊編解碼聯合協作小組(Joint Collaborative Team on Video Coding,JCT-VC)的合作而開發的。在HEVC中，將一個片段(Slice)分割為複數個編解碼樹單元(coding tree units，以下簡稱為CTU)。在主配置文件(profile)中，CTU的最小尺寸和最大尺寸由序列參數集(sequence parameter set,SPS)中的語法元素指定。允許的CTU大小可以是8x8，16x16，32x32或64x64。對於每個片段，依據光栅掃描(raster scan)順序處理片段內的CTU。
CTU還被劃分為複數個編解碼單元(multiple coding units,CU)以適應各種局部特性。被稱為編解碼樹(coding tree)的四分樹被用於將CTU分割成複數個CU。使CTU大小為MxM，其中M是64，32或16中的一個。CTU可以是單個CU(即，不分割)或可以分成四個相同大小的較小單元(即每個尺寸 為M/2xM/2)，其對應於編解碼樹的節點。如果單元是編解碼樹的葉節點，則單元變為CU。否則，可以迭代四分樹分割過程，直到節點的大小達到序列參數集(Sequence Parameter Set,SPS)中指定的最小允許CU大小。該表示方式形成由第1圖中的編解碼樹(也稱為分割樹結構)120指定的遞迴結構。第1圖中示出了CTU分割110，其中實綫表示CU的邊界。是否使用圖像間(時間)或圖像內(空間)預測編碼圖像區域的決定在CU層做出。由於最小CU尺寸可以為8x8，所以在不同的基本預測類型之間切換的最小粒度(granularity)是8×8。
此外，依據HEVC，每個CU可以被分割為一個或複數個預測單元(prediction units,PU)。與CU一起，PU作為共享預測信息的基本代表塊。在每個PU內部，應用相同的預測處理，並且以PU為基礎將相關信息發送到解碼器。依據PU分割類型，CU可以分為一個，兩個或者四個PU。HEVC定義了將CU分解為PU的八種形狀，包括分割類型2Nx2N，2NxN，Nx2N，NxN，2NxnU，2NxnD，nLx2N和nRx2N。與CU不同，PU只能依據HEVC分割一次。第二行(row)中顯示的分割對應於非對稱分割，其中兩個分割部分具有不同的大小。
在透過基於PU分割類型的預測處理獲得殘差塊之後，可以依據與第1圖所示的CU的編解碼樹類似的另一四分樹結構，將CU的預測殘差分割成變換單元(transform unit,TU)。實綫表示CU邊界，虛綫表示TU邊界。TU是具有殘差或變換係數的基本代表塊，以用於應用整數變換(integer transform)和量化。對於每個TU，對TU應用一個具有相同大小的整數變換以獲得殘差係數。這些係數在基於TU的量化之後被傳送到解碼器。
定義術語編解碼樹塊(coding tree block,CTB)，編碼塊(coding block,CB)，預測塊(prediction block,PB)和變換塊(transform block,TB)，以指定分別與CTU，CU，PU和TU相關的一個顏色成分的2-D樣本陣列。因此，CTU由一個亮度CTB，兩個色度CTB和相關聯的語法元素組成。類似的關係對於 CU，PU和TU是有效的。樹分割通常同時應用於亮度和色度兩者，儘管當達到用於色度的某些最小尺寸時有例外情況。
或者，在JCTVC-P1005中(D.F.Flynn等人，“HEVC Range Extensions Draft 6”,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,16th Meeting：San Jose,US,9-17 January 2014,Document：JCTVC-P1005)，二元樹塊分割結構被提出。如第2圖所示，在提出的二元樹塊分割結構中，塊可以使用各種二元分割類型遞迴地分割成兩個較小的塊。最有效和最簡單的是第2圖的前兩個分割類型中所示的對稱水平分割和對稱垂直分割。對於給定的大小為MxN的塊，發送一個標誌以指示給定的塊是否被分成兩個較小的塊。如果是，則發出另一個語法元素以指示使用哪種分割類型。如果使用水平分割，給定的塊被分成兩個大小為Mx(N/2)的塊。如果使用垂直分割，給定的塊被分成兩個大小為(M/2)xN的塊。可以重複二元樹分割過程，直到分割塊的大小(寬度或高度)達到允許的最小塊大小(寬度或高度)為止。允許的最小塊大小可以在諸如SPS的高級語法中定義。由於二元樹具有兩種分割類型(即水平和垂直)，所以最小允許的塊寬度和塊高度應該被指出。當分割會導致塊高度小於指定的最小值時，非水平分割是隱含指示的。當分割會導致塊寬度小於指定的最小值時，非垂直分割是隱含指示的。
在支援各種分割類型的視訊編解碼系統中，計算複雜度可能很高。降低與變換編解碼相關聯的計算複雜度是衆望所歸。
本發明公開了一種使用塊分割進行視訊編解碼的方法和裝置。根據本發明，對應於將當前塊遞迴地分割為較小變換單元(transform unit，簡稱TU)塊的分割結構被確定，直到分割結構達到最大允許分割深度，或者直到分 割結構支援較小TU塊中的至少一個的塊大小是一可支援的核心變換大小為止，其中根據分割結構將當前塊分割為最終的較小TU塊。根據分區結構變換編解碼過程被應用於當前塊，其中最終的較小TU塊中的至少一個的變換編解碼過程被跳過。
在一個實施例中，標誌被發送用於當前塊以指示當前塊是否被允許跳過所述至少一個最終較小TU塊的變換編解碼過程。如果該標誌指示允許當前塊跳過對所述至少一個最終較小TU塊的變換編解碼過程，則一指示符進一步的被明確地發送或暗示地推斷用於每個最終較小TU塊以指示是否跳過或不跳過每個最終較小TU塊的變換編解碼過程。如果除最後TU塊之外的所有最終較小TU塊皆跳過變換編解碼過程，則最後TU塊被隱含地推斷為不跳過變換編解碼過程。如果除最後TU塊之外的所有最終較小TU塊皆不跳過的變換編解碼過程，則最後TU塊被隱含地推斷為跳過變換編解碼過程。該標誌可根據當前塊的塊大小或寬高比來確定。
在一個實施例中，最大允許分割深度等於1。分割結構可使用由對稱水平二元分割，對稱垂直二元分割，非對稱水平二元分割和非對稱垂直二元分割組成的受限分割來生成。
在一個實施例中，第一標誌被發送用於當前塊以指示當前塊是否被允許跳過最終較小TU塊中的至少一個的變換編解碼過程。如果第一標誌指示允許當前塊跳過最終較小TU塊中的至少一個的變換編解碼過程，則僅二元或三元分割類型被用於生成分割結構，並且第二標誌被發送以指示該分割類型的方向。第三標誌被發送以指示該分割的類型，其中該分割類型對應於對稱二元分割，非對稱二元分割或三元分割。指示符可被明確地發送或隱含地推斷用於每個最終較小TU塊中，以指示是否跳過每個最終較小的TU塊的變換編解碼過程。
在另一實施例中，標誌被標示於(signalled)視訊參數集合(Video Parameter Set，簡稱VPS)，序列參數集合(Sequence Parameter Set，簡稱SPS)，圖像參數集合(Picture Parameter Set，簡稱PPS)，片段頭或編解碼單元(Coding Unit，簡稱CU)用於在一各自的視訊，序列，圖像，片段或CU的相應塊以指示是否允許相應塊跳過相應塊中的最終較小TU塊中的至少一個的變換編解碼過程。標誌可根據與一相應圖像，片段，CU或預測單元(prediction Unit，簡稱PU)相關聯的編解碼模式來確定，其中編解碼模式屬於包括幀間編解碼和幀內編解碼的組。標誌還可根據與一相應的圖像，片段，CU或PU相關聯的顏色分量來確定，其中顏色分量屬於包括亮度和色度分量或紅色，綠色和藍色分量的組。
在一實施例中，如果一目標最終較小TU塊的塊大小不是可支援的變換大小，該目標最終較小TU塊被隱含地推斷為跳過變換編解碼過程。在這種情況下，該目標最終較小TU塊的殘差被隱含地推斷為0。
在一實施例中，當對一目標最終較小TU塊跳過變換編解碼過程，該目標最終較小TU塊的殘差可被設置為0，並且熵編解碼、量化和變換過程不應用於該目標最終較小TU塊。在另一實施例中，當可用分割類型的最大數量是M時，僅M個可用分割類型中的N個被用於分割當前塊，其中M和N是整數並且M
Figure 108113547-A0305-02-0007-1
N。
本發明的這些和其它目的在閱讀以下各個附圖和附圖中所示的優選實施例的詳細描述後，對於所屬技術領域中具有通常知識者來說無疑將變得顯而易見。
110:CTU分割
120:編解碼樹
310:四分樹分割
320:垂直二元樹分割
330:水平二元樹分割
340:垂直中心側三元樹分割
350:水平中心側三元樹分割
360:垂直左不對稱樹分割
370:垂直右非對稱樹分割
380:水平頂部非對稱樹分割
390:水平底部非對稱樹分割
410、412、414、416、420、422、424、426、430、432、434、436:圖案
510、520、530、540、550、560、570、580:變換類型
610、620、630:步驟
第1圖是示出塊分割的示例，其中塊分割的結果顯示在左側，編解碼樹(也稱 為分割樹結構)顯示在右側。
第2圖是示出二元分割類型的示例，包括對稱的水平分割和垂直分割以及不對稱的水平分割和垂直分割。
第3圖是示出分割類型的示例，包括四分樹分割，垂直二元樹分割，水平二元樹分割，垂直中心側三元樹分割，水平中心側三元樹分割，垂直左不對稱樹分割，垂直右不對稱樹分割，水平頂部非對稱樹分割和水平底部非對稱樹分割。
第4圖是示出使用預定義子採樣模式的殘差子採樣的示例。
第5圖是示出用於各種變換類型的子塊的選擇性可選擇變化跳過(Alternative Transform Skip，簡稱ATS)模式的示例。
第6圖是示出根據本發明實施例的包含ATS的示例性編解碼系統的流程圖。
以下描述是實現本發明的最佳實施方式。這一描述是為了說明本發明的一般原理，而不應被認為是限制性的。本發明的範圍最好透過申請專利範圍來確定。
在本發明中，提出了稱為“可選擇變化跳過(Alternative Transform Skip，簡稱ATS)”模式的編解碼模式，以改善TU分割以獲得更高的編解碼效率或更低的編碼器複雜度。
方法1：ATS模式
當將所提出的ATS模式應用於塊時，塊被遞迴地分割為較小的TU塊，直到其達到最大允許的分割深度，或者較小TU塊大小中的至少一個是可支援的核心變換大小。在塊分割過程完成之後，由塊分割產生的較小TU塊也稱為最終較小TU塊。當達到該條件時，至少一個較小TU塊被選擇用於跳過變換編解碼過程。第3圖示出存在用於將塊分割成較小塊的不同分割類型，包括 四分樹分割310，垂直二元樹分割320，水平二元樹分割330，垂直中心側三元樹分割340，水平中心側三元樹分割350，垂直左不對稱樹分割360，垂直右非對稱樹分割370，水平頂部非對稱樹分割380和水平底部非對稱樹分割390。在一個實施例中，標誌首先被指定為指示是否將建議的ATS模式應用於塊。如果是，則允許的分割類型之一被用於將塊分割為較小TU塊。分割過程被遞迴地應用於由分割產生的較小TU塊。另一語法元素被遞迴地發出以指示使用哪種分割類型。根據本發明的實施例，對於每個較小的TU，指示符被明確地指定或隱含地推斷以指示是否跳過每個較小TU塊的變換編解碼過程。注意，如果較小TU塊大小不是可支援的變換大小，則隱含地推斷跳過較小TU塊的變換編解碼過程。此外，如果除了最後TU塊之外的所有較小TU塊都被變換跳過，則最後TU塊被隱含地推斷為非變換跳過。類似地，如果除了最後TU塊之外的所有較小TU塊都是非變換跳過的，則最後TU塊被隱含地推斷為變換跳過。
對於簡化設計，最大允許分割深度被設置為1，並且變換跳過塊的殘差全部被設置為0(即，跳過殘差的熵編解碼，量化和變換編解碼過程)。在一個實施例中，標誌首先被指定為指示所提出的ATS模式是否被應用於塊。如果是，則允許分割類型之一被用於將塊分割為較小TU塊，並且另一語法元素被發送以指示使用哪種分割類型。對於每個較小TU，指示符被明確地指定或隱含地推斷是否殘差全部被設置為0。此外，如果較小TU塊大小不是可支援的變換大小，則較小TU塊的殘差被隱含地推斷為0。
在根據本發明實施例的另一簡化設計中，如果所提出的ATS模式被應用並且對稱水平二元分割類型、對稱垂直二元分割類型、非對稱水平二元或非對稱垂直二元分割類型之一被選擇，則在指示該分割類型之後，僅最後的較小TU塊總是隱含地被推斷以指示變換編解碼過程是否被跳過。
在根據本發明實施例的另一簡化設計中，允許分割類型的最大數 量被限制為N。即，即使所有可用分割類型的數量也是M(M
Figure 108113547-A0305-02-0010-2
N)，但僅M種類型中的N種被允許。例如，在一個實施例中，如果所提出的ATS模式被應用，則根據預定義的分割類型插入順序(例如，對稱二元分割類型，三元分割類型，然後是非對稱二元分割類型)候選清單被填充。在一個示例中，僅候選清單的前N個分割類型被允許用於將塊分割為較小TU塊。然後語法元素被發送以指示分割類型的候選清單索引。最後，指示符被明確地或隱含地推斷以指示是否跳過每個較小TU塊的變換編碼過程。
在根據本發明實施例的另一簡化設計中，標誌首先被指定以指示所提出的ATS模式是否被應用於塊。如果所提出的ATS模式被應用並且僅二元分割類型或三元分割類型被使用，則標誌被用於指示分割方向(即，水平或垂直分割)。此外，另一個標誌被用於指示分割類型(即，對稱二元分割，非對稱二元分割或三元分割)。最後，指示符被明確地或隱含地推斷以指示是否跳過每個較小TU塊的變換編解碼過程。
此外，如果所提出的ATS模式被應用，則指示是否允許較小TU塊被用於變換跳過的指示符的順序總是遵循塊編解碼順序。例如，作為一個實施例，指示符的順序可以是水平掃描順序，垂直掃描順序，水平遍歷掃描順序，垂直遍歷掃描順序或z-掃描掃描順序。作為另一個實施例，指示符的順序可以取決於分割類型。作為又一個實施例，指示符的順序可被隱含地指示。
是否應用所提出的ATS模式可取決於許多因素。在一個實施例中，至少一個標誌被標示於視訊參數集合(Video Parameter Set，簡稱VPS)，序列參數集合(Sequence Parameter Set，簡稱SPS)，圖像參數集合(Picture Parameter Set，簡稱PPS)，片段頭或編解碼單元(Coding Unit，簡稱CU)中，以指示所提出的ATS模式是否被致能用於CU/PU/TU塊。在另一實施例中，是否應用所提出的ATS模式可取決於當前圖像/片段/CU/PU的編解碼模式(例如，幀間/幀 內編解碼)。在一個實施例中，當當前CU被幀間編解碼時，所提出的ATS模式被致能。在又一個實施例中，是否應用所提出的ATS模式可取決於當前圖像/片段/CU/PU的顏色分量(例如，亮度/色度或R/G/B顏色分量)。在又一個實施例中，當當前片段的顏色分量是亮度時，所提出的ATS模式被致能。在又一個實施例中，是否應用所提出的ATS模式可取決於塊的塊大小或寬高比。在又一個實施例中，當塊寬度和高度都等於或小於64時，所提出的ATS模式被致能。在另一實施例中，當塊大小比率小於1：4或4：1時，所提出的ATS模式被致能。
方法2：具有子采樣，下采樣和上采樣的ATS模式
所提出的ATS模式還可以通過在變換編解碼之前對進行子採樣，下採樣或上採樣殘差到另一可支援的核心變換大小來實現。為了重建殘差，在逆變換編解碼之後，藉由插入零樣本，上採樣或下採樣樣本殘差可被恢復到原始大小。
在一個實施例中，殘差子採樣可被使用。殘差的一個方向或兩個方向可以藉由如第4圖所示的預定義子採樣模式之一被子採樣到另一可支援的核心變換大小。在第4圖中，圖案410對應於左上側圖案；圖案412對應於右上側圖案；圖案414對應於左下側圖案；圖案416對應於右下側圖案；圖案420對應於左側圖案；圖案422對應於右側圖案；圖案424對應於上方圖案；圖案426對應於下方圖案；圖案430對應於具有左側列(column)圖案的多列；圖案432對應於具有右側列(column)圖案的多列；圖案434對應於具有上方行(row)圖案的多行；圖案436對應於具有下側行(row)圖案的多行。灰色位置處的殘差被保持以應用變換編解碼，並且白色位置處的殘差被强制為0。為了重建殘差塊，在應用逆變換之後，零樣本被填充到殘差以恢復原始塊大小。所選擇的子採樣圖案可被明確地標示於位元流中，或者使用預定義的方法導出。子採樣圖案的選擇或推導可取決於當前塊的形狀和/或大小或來自相鄰編解碼塊的相關資 訊。例如，如果所提出的ATS模式應用於給定的12×8TU，則語法元素被用於指示使用哪個預定義的子採樣圖案。假設使用的圖案是圖案420，則右側4x8殘差被強制為0，並且僅對左側8×8殘差應用8×8變換。為了重建12×8殘差塊，應用8×8逆變換，然後藉由填充4×8個零樣本來擴展8×8殘差的左側，以恢復到12×8殘差塊。
在另一個實施例中，殘差下採樣可被使用。殘差的一個方向或兩個方向可被下採樣到等於2的冪數的大小。例如，大小可以是小於原始大小的最接近2的冪數。例如，如果TU大小等於12×8(寬度=12，高度=8)，則可以在執行變換之前x方向殘差可被下採樣到每行(row)8個樣本。換句話說，12×8TU首先被下採樣到8×8TU，然後應用8×8變換。為了重建殘差，應用8×8逆變換，然後將8×8殘差上採樣為12×8殘差塊。在另一示例中，如果TU大小等於12×12，則將12×12殘差塊下採樣到8×8塊，然後執行8×8變換。
在又一個實施例中，殘差上採樣可被使用。殘差的一個方向或兩個方向可以被上採樣到等於2的冪數的大小。例如，大小可以是大於原始大小的最接近2的冪數。例如，如果TU大小等於12×8(寬度=12，高度=8)，則在執行變換之前，x方向殘差可被上採樣到每行(row)16個樣本。換句話說，12×8TU首先被上採樣到16×8TU，然後應用16×8變換。為了重建殘差，應用16×8逆變換，然後將16×8殘差下採樣到12×8殘差塊。在另一示例中，如果TU大小等於12×12，則將12×12殘差塊上採樣到16×16塊，然後執行16×16變換。
方法3：選擇性ATS模式
用於子塊變換的分割模式可以是四分樹分割，二元分割，三元樹或上述兩種方法中提到的其他分割模式。對於每個分割方向，一個子塊被選擇用於變換處理。也就是說，只有所選擇的子塊中的殘差將經歷變換過程。未選擇的子塊中的係數都等於0。這需要一個或多個語法來指示哪個分割類型和哪個 子塊被選擇為變換塊。
在一個實施例中，僅二元分割被允許，如第5圖所示。指示哪個子塊被選擇作為變換塊的語法可基於最後係數的位置被保留或修改。在一個示例中，當當前TU藉由水平分割被進一步分割，並且最後係數的位置位於位置(xLast，yLast)時，其中xLast和yLast是最後有效係數的水平和垂直位置。如果yLast小於CU_height/2，則所選擇的子分割被推斷是上方的(即第5圖中的變換類型540)；否則，所選擇的子塊被推斷是底部的(即第5圖中的變換類型520)。在另一示例中，當當前TU藉由垂直分割進一步被分割時，並且如果xLast小於CU_width/2，則所選擇的子塊被推斷是左邊的(即第5圖中的變換類型510)；否則，所選擇的子塊被推斷是右邊的(即第5圖中的變換類型530)。
在一個實施例中，二元分割和四分樹分割被允許，如第5圖中的變換類型510到580所示。指示哪個子塊被選擇作為變換塊的語法可以基於最後係數的位置被保留或修改。在一個示例中，當前TU藉由水平分割被進一步分割時，並且最後係數的位置是(xLast，yLast)。如果yOffset小於CU_height/2，則所選擇的子塊被推斷是上方的(即第5圖中的變換類型540)；否則，所選擇的子塊被推斷為底部的(即第5圖中的變換類型520)。在一個示例中，當前TU藉由垂直分割被進一步分割時，如果xLast小於CU_width/2，則所選擇的子分割被推斷是左側的(即第5圖中的變換類型510)；否則，所選擇的子分割被推斷是右側的(即第5圖中的變換類型530)。在另一示例中，當前TU藉由四分樹分割被進一步分割時，如果xLast小於CU_width/2並且yLast小於CU_height/2，則所選擇的子塊被推斷是左上側的(即第5圖中的變換類型550)；否則，如果xLast大於或等於CU_width/2並且yLast小於CU_height/2，則所選擇的子塊被推斷是右上側的(即第5圖中的變換類型560)，否則，如果xLast小於CU_width/2並且yLast大於或等於CU_height/2，則所選擇的子分割被推斷是左下側的(即 第5圖中的變換類型580)；否則，如果xLast大於或等於CU_width/2並且yLast大於或等於CU_height/2，則所選擇的子分割被推斷是右下側(即第5圖中的變換類型570)。
當可所選擇的變換子塊可被推斷時，用於指示哪個子塊被選擇為變換子塊的語法被保留。
在另一實施例中，第5圖中子塊變換類型510到580的索引被發送。一個或多個語法(例如，範圍從0到7的索引)被發送以指示使用哪個子塊變換類型。為了減少語法的開銷，指示子塊變換類型的語法可根據最後係數的位置來減少。在一個示例中，最後係數的位置位於位置(xLast，yLast)，其中xLast和yLast是最後有效係數的水平和垂直位置。如果xLast小於CU_width/2，yLast小於CU_height/2，則第5圖中僅子塊變換類型510，540和550可被選擇，這導致用於分割類型的索引的範圍減小為0到2之間。如果xLast大於或等於CU_width/2，並且yLast小於CU_height/，則僅子塊變換類型530，540和560可被選擇，這導致用於分割類型的索引的範圍減小為0到2之間。如果xLast小於CU_width/2，並且yLast大於或等於CU_height/2，則僅子塊變換類型510，520和580可被選擇，這導致用於分割類型的索引的範圍減小為0到2之間。如果xLast大於或等於CU_width/2，並且yLast大於或等於CU_height/2，則僅子塊變換類型520，530和570可被選擇，這導致用於分割類型的索引的範圍減小為0到2之間。
在另一實施例中，僅包含DC係數的變換子塊類型被允許。也就是說，僅第5圖中的變換類型510，540和550被允許。範圍從0到2的語法被用於指示哪個子塊變換類型已被選擇。該語法的範圍可根據最後係數的位置來減小。例如，如果xLast大於或等於CU_width/2，並且yLast小於CU_height/2，則子塊變換類型被推斷為第5圖中的類型540。如果xLast小於CU_width/2並且 yLast大於或等於CU_height/2，則子塊變換類型被推斷為第5圖中的類型510。在另一實施例中，整個CU可以由大TU變換，並且第4圖或第5圖中的包括DC係數的圖案可被用於係數掃描。例如，第5圖中的圖案540意味著僅需要掃描TU的上面部分。第5圖中的圖案550意味著僅需要掃描TU的左上部分。在一個例子中，可使用整個TU的掃描圖案，即第5圖中的圖案510，540和550。最後有效係數位置被首先發送。如果xLast大於width/2並且yLast小於height/2，則可以選擇圖案540。一個或多個語法被用於指示是否使用第5圖中的掃描圖案540。如果xLast大於width/2且yLast大於height/2，則只能使用整個TU掃描。如果xLast小於width/2並且yLast小於height/2，則可以使用第5圖中的整個TU掃描圖案510，540和550。一個或多個語法被用於指示使用哪種掃描圖案。在另一示例中，一個或多個語法被用於指示是否使用第5同中的整個TU掃描或550。在另一個示例中，僅整個TU掃描被使用。
方法4：ATS模式和符號標誌編解碼
當變換跳過被應用於當前TU時，符號標誌編解碼可被修改如下。
根據本方法，一種用於指示預定義區域中係數的符號值是否相同的語法被使用。如果語法為真，則另一語法被用於指示符號值(即+或-)；否則，將應用原始方法。
在一個實施例中，對於每個TU，一語法被用於指示整個TU的係數的符號值是否相同。如果語法為真，則另一語法被用於指示符號值，即(+或-)；否則，將應用原始方法。
在另一個實施例中，對於一TU中的每個4x4係數組，一語法被用於指示4x4係數組的符號值是否相同。如果語法為真，則另一語法被用於4x4係數組來指示符號值(即+或-)；否則，將應用原始方法。
在另一個實施例中，對於每個TU，一語法被用於指示整個TU中的符號值是否相同。如果語法為真，則另一語法被用於指示符號值(即+或-)；否則，對於每個4x4係數組，一語法被用於指示4x4係數組中的符號值是否相同。如果語法為真，則另一語法被用於4x4係數組來指示符號值(即+或-)；否則，將應用原始方法。
在另一個實施例中，對於每個TU，第一語法被用於指示整個TU中的符號值是否相同。如果第一語法為真，則第二語法被用於指示符號值(即+或-)；否則，第三語法被用於指示每個4x4係數組是否具有用來指示4x4係數塊中的符號值是否相同的第四語法。如果第三語法為真，那麼對於每個4x4係數組，第四語法將被用於指示4x4係數塊中的符號值是否相同。如果第四語法為真，則第五語法將被用於指示符號值(即+或-)；否則，將應用原始方法。
在另一個實施例中，對於每個TU，第一語法被用於指示每個4x4係數組是否具有用來指示4x4係數塊中的符號值是否相同的第二語法。如果第二個語法為真，那麼對於每個4x4係數組，第三語法被用於指示4x4係數塊中的符號值是否相同。如果第三個語法為真，那麼第四語法將被用於指示符號值(即+或-)；否則，將應用原始方法。
方法5：ATS和減少的最大變換大小
視訊編解碼器可利用與大尺寸變化結合的大尺寸編解碼單元來實現高解析度的視訊應用。HEVC標準可支援CTU大小高達64x64亮度樣本，變換塊大小高達32x32樣本。在JEM中，支援的CTU大小可高達256x256亮度樣本，支援的變換單元大小可高達128x128亮度樣本。然而，與變換過程相關聯的實現複雜性和計算成本往往隨著變換大小的增加而顯著增加。因此，為了降低編解碼的複雜性，視訊編解碼器可選擇採用減小的最大變換大小對視訊資料進行編解碼。
在HEVC中，以亮度樣本為單位的CTU大小和最大變換塊大小可在SPS中指定。最大CU大小與指定的CTU大小相同。當當前變換單元大小大於指定的最大變換塊大小時，當前變換單元被强制分割為四個四分之一大小的TU。用於指示是否分割當前TU的關聯語法“split_transform_flag”未被編解碼並被推斷為等於1。
在JEM中，以亮度樣本為單位CTU大小可在SPS中指定，並且寬度和高度的最大TU大小被預先確定等於128亮度樣本。使用遞迴分割結構，每個CTU可被進一步分割為多個CU。編解碼單元也被用作預測和變換處理的基本單元，無需進一步分割。因此，最大CU大小與最大TU大小相同。當當前CU的以亮度樣本為單位的寬度或高度大於最大TU大小時，當前CU將被強制分割為四分之一大小的CU。如果視訊編解碼器選擇採用減小的最大TU大小，則最大CU大小應被相應減小，這可能導致所產生的位元流的壓縮效率損失。
此方法涉及處理寬度或高度大於指定閾值的非方形CU。非方形CU可以藉由二元樹分割或多類型樹分割生成。一個非方形CU的寬度或高度可以大於指定的最大變換大小，寬度/高度的比率可以是1：2、1：4、1：8、1：16、2：1、4：1、8：1、16：1等，具體取決於二元樹分割或多類型樹分割的分割方向和深度。當一個非方形CU的寬度或高度大於指定閾值時，該CU可隱含地被進一步分割為多個TU，其大小等於或小於指定閾值。
在一個實施例中，遞迴二元變換被提出。遞迴二元變換遞迴地將一個非方形CU分割為兩個TU。當當前CU寬度大於或等於當前CU高度時，則藉由使用遞迴二元變換分割為大小等於寬度/2x高度的兩個TU。如果當前CU寬度小於當前CU高度，則分割的TU大小等於寬度x高度/2。此過程以遞迴方式執行，直到分割的TU寬度和高度等於或小於指定閾值。在另一個實施例中，首先寬度或高度大於指定閾值的一個非方形CU被分割為大小等於min(寬度， 高度)x min(寬度，高度)的幾個方形TU。對於每個TU，如果其尺寸大於指定閾值，將使用RQT進一步分割TU。在另一個實施例中，RQT也用於非方形CU。分割的TU大小首先是寬度/2x高度/2，每個TU可進一步被分割，直到分割的TU寬度和高度等於或小於指定閾值。
在另一個實施例中，指定閾值可基於視訊解析度或壓縮文件被預先定義，或在序列級、圖像級或片段級被標示。它也可以是指定的最大變換大小。對於尺寸小於或等於指定最大變換大小的CU，一個CU中只允許有一個TU。
在另一實施例中，所提出的方法可被應用於方形CU。
在另一實施例中，所述方法可進一步與變換和量化前的殘差子採樣/上採樣過程結合。在變換和量化之前的殘差子採樣/上採樣過程是處理尺寸大於可支援的變換大小的CU情況的另一種方法。當CU的大小大於可支持的變換大小時，子採樣首先被應用於殘差，子採樣后的殘差再被變換和量化處理，量化後的信號被編解碼在位元流中。在解碼器端，量化後的信號從位元流中被解碼出來，接著進行逆量化和逆變換。然後，重建後的殘差被上採樣到原始解析度。下面舉一個例子。假設CU大小為128x128，可支援的最大變換大小為32x32。因此，當前殘差塊為128x128。然後在變換前，子采樣過程應用於大小為128x128的當前殘差塊並產生大小為32x32的子采樣殘差塊，然後進行變換和量化處理。量化後的資料在編碼器的位元流中進行編解碼。在解碼器中，量化後的資料首先從位元流中解碼，然後藉由逆量化和逆變換進行處理。因此，一個32x32殘差塊被重建，並且該塊進一步被上採樣至128x128。這一過程可以與上述方法相結合。
在一個實施例中，當前CU大小大於指定閾值時，首先藉由使用上述方法當前CU被分成多於一個TU，並且在變換之前每個TU藉由子採樣/上採樣過程進一步被處理，如果CU大小大於最大變換大小，則被量化。例如， 假設CU大小為128x128，可支援的最大變換大小為32x32。大小為128x128的CU首先進一步分為四個大小為64x64的TU。對於每個大小為64x64的TU，子採樣過程用於生成一個大小為32x32子採樣塊。大小為32×32的子採樣塊再藉由變換和量化處理，並且該量化后的資料在位元流中被編解碼。通過組合這兩種方法，子採樣和上採樣過程的比率可被減少，從而在這兩個過程中節省更多資訊。指定的閾值以及子採樣和上採樣過程的可支援的比率可基於視訊解析度或壓縮文件來被預定義，或者在序列級別，圖像級別或片段級別被標示出。
任何前述提出的方法可在編碼器和/或解碼器中實現。例如，任何所提出的方法可在編碼器的幀間/幀內/預測/變換模組和/或解碼器的幀間/幀內/預測/逆變換模組中實現。或者，任何所提出的方法可實現為耦合到編碼器的幀間/幀內/預測/變換模組和/或解碼器的幀間/幀內/預測/逆變換模組的電路，以提供幀間/幀內/預測/變換/逆變換模組所需的資訊。
第6圖示出了根據本發明實施例的包含ATS的示例性編解碼系統的流程圖。流程圖中示出的步驟可實現為在編碼器側的一個或多個處理器(例如，一個或多個CPU)上可執行的程式碼。流程圖中示出的步驟還可以基於諸如被設置為執行流程圖中的步驟的一個或多個電子設備或處理器的硬體來實現。根據該方法，在步驟610中接收與當前圖像中的當前塊相關聯的輸入資料，其中編碼器側與當前塊相關聯的輸入資料對應於當前塊的預測殘差，以及解碼器側與該當前塊相關聯的輸大資料對應於當前塊的編解碼后的預測殘差。在步驟620中，對應於將當前塊遞迴地劃分為較小的TU塊直到分割結構達到最大允許分割深度或者直到至少一個較小TU塊的塊大小是可支援的核心變換大小的分割結構被確定，其中根據分割結構該當前塊被分割為最終的較小TU塊。在步驟630中，根據分割結構變換編解碼過程被應用於當前塊，其中至少一個最終較小TU塊中的變換編解碼過程被跳過。
所示的流程圖旨在說明依據本發明的示範性視訊編解碼的示例。在不脫離本發明的精神的情況下，本領域通常知識者可修改每個步驟，重新排列步驟，拆分步驟或組合步驟來實施本發明。在本公開中，已經使用具體的語法和語義來說明實現本發明的實施例的示例。本領域通常知識者可以用相同的語法和語義來代替該些語法和語義來實踐本發明，而不脫離本發明的精神。
呈現上述描述以使得本領域通常知識者能夠在特定應用及其要求的上下文中實施本發明。對所描述的實施例的各種修改對於本領域通常知識者將是顯而易見的，並且本文定義的一般原理可以應用於其他實施例。因此，本發明並不限於所示出和描述的特定實施例，而是符合與本文所公開的原理和新穎特徵相一致的最寬範圍。在上述詳細描述中，示出了各種具體細節以便提供對本發明的透徹理解。然而，本領域通常知識者將理解，本發明可以被實施。
如上所述的本發明的實施例可以以各種硬體，軟體代碼或兩者的組合來實現。例如，本發明的實施例可以是整合到視訊壓縮芯片中的一個或複數個電路電路，或整合到視訊壓縮軟體中的程式代碼以執行本文所述的處理。本發明的實施例也可以是要在數位訊號處理器(DSP)上執行的程式代碼，以執行本文所述處理。本發明還可以涉及由計算機處理器，數位訊號處理器，微處理器或現場可程式邏輯閘陣列(FPGA)執行的許多功能。可以透過執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼來將這些處理器配置成執行依據本發明的特定任務。軟體代碼或韌體代碼可以以不同的編程語言和不同的格式或風格而被開發。也可以為不同的目標平台編譯軟體代碼。然而，執行與本發明一致任務的不同的代碼格式，軟體代碼的樣式和語言以及配置代碼的其他方式將不會脫離本發明的精神和範圍。
在不脫離本發明的精神或基本特徵的情況下，本發明可以以其他具體形式實施。所描述的例子僅在所有方面被認為是說明性的而不是限制性 的。因此，本發明的範圍由申請專利範圍而不是前面的描述來指示。屬於申請專利範圍的等同物的含義和範圍的所有變化將被包括在其範圍內。
610、620、630:步驟

Claims (20)

  1. 一種用於視訊編解碼系統的視訊編解碼方法，包括： 接收與一當前圖像中的一當前塊相關聯的輸入資料，其中在編碼器側與該當前塊相關聯的該輸入資料對應於該當前塊的預測殘差，以及在解碼器側與該當前塊相關的該輸入資料對應於該當前塊的已編解碼的預測殘差； 確定對應於將該當前塊遞迴地分割為較小變換單元塊的一分割結構，直到該分割結構達到一最大允許分割深度，或者直到較小變換單元塊中的至少一個的塊大小是一可支援的核心變換大小為止，其中根據該分割結構該當前塊被分割為最終較小變換單元塊；以及 根據該分割結構應用一變換編解碼過程於該當前塊，其中至少一個最終較小變換單元塊的該變換編解碼過程被跳過。
  2. 如申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，一標誌被發送用於該當前塊以指示該當前塊是否被允許跳過該至少一個最終較小變換單元塊的該變換編解碼過程。
  3. 如申請專利範圍第2項所述之用於視訊編解碼系統的視訊編解碼方法，其中，如果該標誌指示允許當前塊跳過該至少一個最終較小變換單元塊的該變換編解碼過程，一指示符被明確地發送或隱含地推斷用於該最終較小變換單元塊的每個以指示該最終較小變換單元塊的每個的該變換編解碼過程是否被跳過。
  4. 根據申請專利範圍第3項所述之用於視訊編解碼系統的視訊編解碼方法，其中，如果除了一最後變換單元塊之外的所有該最終較小變換單元的該變換編解碼過程都被跳過，則該最後變換單元塊被隱含地推斷為不跳過該變換編解碼過程。
  5. 根據申請專利範圍第3項所述之用於視訊編解碼系統的視訊編解碼方法，其中，如果除了一最後變換單元塊之外的所有該最終較小變換單元的該變換編解碼過程沒有被跳過，則該最後變換單元塊被隱含地推斷為跳過該變換編解碼過程。
  6. 根據申請專利範圍第2項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該標誌可根據該當前塊的一塊大小或一寬高比確定。
  7. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該最大可允許分割深度等於1。
  8. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該分割結構是使用由對稱水平二元分割，對稱垂直二元分割，非對稱水平二元分割和非對稱垂直二元分割組成的受限制的分割來產生的。
  9. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，一第一標誌被發送用於該當前塊以指示該當前塊是否被允許跳過該至少一個最終較小變換單元塊的該變換編解碼過程。
  10. 根據申請專利範圍第9項所述之用於視訊編解碼系統的視訊編解碼方法，如果該第一標誌指示允許當前塊跳過該至少一個最終較小變換單元塊的該變換編解碼過程，則僅二元分割或三元分割被用於產生該分割結構以及一第二標誌被發送以指示該二元分割或三元分割類型的一分割方向。
  11. 根據申請專利範圍第10項所述之用於視訊編解碼系統的視訊編解碼方法，其中，一第三標誌被發送以指示該二元分割或三元分割類型的一分割類型，其中該分割類型對應於對稱二元分割、非對稱二元分割或三元分割。
  12. 根據申請專利範圍第11項所述之用於視訊編解碼系統的視訊編解碼方法，其中，一指示符被明確地發送或隱含地推斷用於該最終較小變換單元的每個以指示該最終較小變換單元的該變換編解碼過程是否被跳過。
  13. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，一標誌被標示於視訊參數集合，序列參數集合，圖像參數集合，片段頭或編解碼單元用於在一各自的視訊，序列，圖像，片段或編解碼單元的多個相應塊以指示是否允許該多個相應塊跳過多個相應塊中的該至少一個最終較小變換單元塊中的變換編解碼過程。
  14. 根據申請專利範圍第13項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該標誌是根據與一相應圖像，片段，編解碼單元或預測單元相關聯的一編解碼模式確定的，其中該編解碼模式屬於包括幀間編解碼和幀內編解碼的一組。
  15. 根據申請專利範圍第13項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該標誌是根據與一相應圖像，片段，編解碼單元或預測單元相關聯的一顏色分量確定的，其中該顏色分量屬於包括亮度和色度分量或紅色，綠色和藍色分量的一組。
  16. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中如果一目標最終較小變換單元塊的一塊大小不是一可支援的變換大小，該目標最終較小變換單元是隱含地被推斷跳過該變換編解碼過程。
  17. 根據申請專利範圍第16項所述之用於視訊編解碼系統的視訊編解碼方法，其中，該目標最終較小變換單元塊的殘差被隱含地推斷為0。
  18. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中，當一目標最終較小變換單元塊的該變換編解碼過程被跳過，該目標最終較小變換單元的殘差被設置為0，以及熵編解碼、量化和變換過程不應用於該目標最終較小變換單元塊。
  19. 根據申請專利範圍第1項所述之用於視訊編解碼系統的視訊編解碼方法，其中當可用分割類型的一最大數量是M，僅M中的N個可用分割類型被用於分割該當前塊，其中M和N是整數，以及M
    Figure 108113547-A0305-02-0024-3
    N。
  20. 一種用於視訊編解碼系統的視訊編解碼裝置，該裝置包括一個或多個電子電路或處理器被設置為： 接收與一當前圖像中的一當前塊相關聯的輸入資料，其中在編碼器側與該當前塊相關聯的該輸入資料對應於該當前塊的預測殘差，以及在解碼器側與該當前塊相關的該輸入資料對應於該當前塊的已編解碼的預測殘差； 確定對應於將該當前塊遞迴地分割為較小變換單元塊的一分割結構，直到該分割結構達到一最大允許分割深度或者直到較小變換單元塊中的至少一個的塊大小是一可支援的核心變換大小為止，其中根據該分割結構該當前塊被分割為最終較小變換單元塊；以及 根據該分割結構應用一變換編解碼過程於該當前塊，其中至少一個最終較小變換單元塊的該變換編解碼過程被跳過。
TW108113547A 2018-04-24 2019-04-18 一種用於視訊編解碼系統的視訊編解碼方法和裝置 TWI702833B (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201862661663P 2018-04-24 2018-04-24
US62/661,663 2018-04-24
US201862675235P 2018-05-23 2018-05-23
US62/675,235 2018-05-23
US201962792388P 2019-01-14 2019-01-14
US62/792,388 2019-01-14
WOPCT/CN2019/083005 2019-04-17
PCT/CN2019/083005 WO2019205998A1 (en) 2018-04-24 2019-04-17 Methods and apparatus of alternative transform skip mode for image and video coding

Publications (2)

Publication Number Publication Date
TW201946469A TW201946469A (zh) 2019-12-01
TWI702833B true TWI702833B (zh) 2020-08-21

Family

ID=68294321

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108113547A TWI702833B (zh) 2018-04-24 2019-04-18 一種用於視訊編解碼系統的視訊編解碼方法和裝置

Country Status (5)

Country Link
US (1) US11272182B2 (zh)
EP (2) EP3782364A4 (zh)
CN (1) CN112055966B (zh)
TW (1) TWI702833B (zh)
WO (1) WO2019205998A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112204967A (zh) * 2018-05-31 2021-01-08 夏普株式会社 用于划分视频数据的帧间预测片段中的视频块的系统和方法
AU2018217333A1 (en) * 2018-08-17 2020-03-05 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a transformed block of video samples
US11240499B2 (en) * 2019-05-24 2022-02-01 Tencent America LLC Method and apparatus for video coding
JP7323709B2 (ja) * 2019-09-09 2023-08-08 北京字節跳動網絡技術有限公司 イントラブロックコピーの符号化および復号化
US11356698B2 (en) 2019-12-30 2022-06-07 Tencent America LLC Method for parameter set reference constraints in coded video stream
JP7469904B2 (ja) 2020-02-21 2024-04-17 シャープ株式会社 画像復号装置、画像符号化装置、画像復号方法及び画像符号化方法
CN115299064A (zh) * 2020-03-11 2022-11-04 抖音视界有限公司 基于颜色格式的自适应参数集信令通知
WO2021244420A1 (en) 2020-05-31 2021-12-09 Beijing Bytedance Network Technology Co., Ltd. Palette mode with local dual tree modetype definition
CN111757108B (zh) * 2020-07-01 2023-03-24 格兰菲智能科技有限公司 集成电路及递归划分解码区块的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102447907A (zh) * 2012-01-31 2012-05-09 北京工业大学 一种针对hevc的视频序列的编码方法
US20170244964A1 (en) * 2016-02-23 2017-08-24 Mediatek Inc. Method and Apparatus of Flexible Block Partition for Video Coding

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2742690B1 (en) * 2011-08-08 2016-07-27 Google Technology Holdings LLC Residual tree structure of transform unit partitioning
EP2829065B1 (en) * 2012-03-21 2020-05-13 MediaTek Singapore Pte Ltd. Method and apparatus for intra mode derivation and coding in scalable video coding
US9749645B2 (en) * 2012-06-22 2017-08-29 Microsoft Technology Licensing, Llc Coded-block-flag coding and derivation
US9247255B2 (en) * 2013-02-28 2016-01-26 Research & Business Foundation Sungkyunkwan University Method and apparatus for image encoding/decoding
US20140307780A1 (en) * 2013-04-11 2014-10-16 Mitsubishi Electric Research Laboratories, Inc. Method for Video Coding Using Blocks Partitioned According to Edge Orientations
AU2016231584A1 (en) * 2016-09-22 2018-04-05 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
EP3383043A1 (en) * 2017-03-27 2018-10-03 Thomson Licensing Methods and apparatus for picture encoding and decoding
CA3094439C (en) * 2018-03-19 2023-05-23 University-Industry Cooperation Group Of Kyung Hee University Method and apparatus for encoding/decoding image using geometrically modified reference picture

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102447907A (zh) * 2012-01-31 2012-05-09 北京工业大学 一种针对hevc的视频序列的编码方法
US20170244964A1 (en) * 2016-02-23 2017-08-24 Mediatek Inc. Method and Apparatus of Flexible Block Partition for Video Coding

Also Published As

Publication number Publication date
US11272182B2 (en) 2022-03-08
US20210092394A1 (en) 2021-03-25
WO2019205998A1 (en) 2019-10-31
CN112055966A (zh) 2020-12-08
EP3782364A1 (en) 2021-02-24
EP3782364A4 (en) 2022-04-20
TW201946469A (zh) 2019-12-01
CN112055966B (zh) 2023-11-24
EP4102837A1 (en) 2022-12-14

Similar Documents

Publication Publication Date Title
TWI702833B (zh) 一種用於視訊編解碼系統的視訊編解碼方法和裝置
TWI669948B (zh) 編碼或解碼視頻資料之方法及裝置
CN108605130B (zh) 一种用于对与区块相关的符号进行熵编解码的方法和装置
CN107005718B (zh) 使用二叉树块分区的视频编码的方法
CN107836117B (zh) 一种块分割的方法及装置
TWI720584B (zh) 視訊處理系統中色度量化參數導出的方法以及裝置
TWI734328B (zh) 帶有約束的亮度-色度單獨的編碼樹編碼的方法和設備
CN113727109A (zh) 用于彩色视频数据的调色板模式编解码的方法及装置
CN111937404B (zh) 一种用于视频编码器或解码器的视频编解码方法及装置
KR20110066109A (ko) 트리 구조를 이용한 부호화/복호화 방법 및 장치
TW201935930A (zh) 利用自適應運動向量解析度和子塊預測模式進行視訊編解碼的當前圖像參考的方法和裝置
TWI729569B (zh) 帶有約束的亮度-色度單獨的編碼樹編碼的方法和設備
TWI737097B (zh) 越界節點視訊資料之處理方法及裝置
TWI761166B (zh) 圖像和視訊編解碼中發信切片分割資訊之方法和裝置
TWI796654B (zh) 圖片和視訊編解碼中以信號通知片和切片分區資訊的方法和裝置
TWI789649B (zh) 用於樣本區塊之經變換表示型態的寫碼概念
TW202349960A (zh) 用於影像編碼系統中的熵編碼分區劃分決策的方法和裝置
TW202341737A (zh) 在視訊編解碼中使用發送預定分區的cu劃分方法和裝置