TWI586152B - 資料編碼及解碼 - Google Patents

資料編碼及解碼 Download PDF

Info

Publication number
TWI586152B
TWI586152B TW102114850A TW102114850A TWI586152B TW I586152 B TWI586152 B TW I586152B TW 102114850 A TW102114850 A TW 102114850A TW 102114850 A TW102114850 A TW 102114850A TW I586152 B TWI586152 B TW I586152B
Authority
TW
Taiwan
Prior art keywords
samples
prediction
color
sample
block
Prior art date
Application number
TW102114850A
Other languages
English (en)
Other versions
TW201408079A (zh
Inventor
詹姆士 蓋美
尼可拉斯 桑德斯
卡爾 桑德斯
保羅 希卡克
Original Assignee
新力股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 新力股份有限公司 filed Critical 新力股份有限公司
Publication of TW201408079A publication Critical patent/TW201408079A/zh
Application granted granted Critical
Publication of TWI586152B publication Critical patent/TWI586152B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/24High-definition television systems
    • H04N11/28High-definition television systems involving bandwidth reduction, e.g. subsampling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/547Motion estimation performed in a transform domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/649Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding the transform being applied to non rectangular image segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Description

資料編碼及解碼
本發明係有關資料編碼及解碼。
文中所提出之「先前技術」描述係為了一般性地呈現本發明之背景的目的。目前具名的發明人之工作(達其在此先前技術段落中所描述之程度、以及其無法另合格為申請時之習知技術的描述之形態)不被明確地或暗示性地承認為對抗本發明之習知技術。
有數種視頻資料編碼及解碼系統,其涉及將視頻資料轉變為頻域表示、將頻域係數量化及接著將某形式的熵(entropy)編碼應用至已量化的係數。如此可獲得視頻資料之壓縮。相應的解碼或解壓縮技術被應用以恢復原始視頻資料之已重建版本。
諸如那些於H.264/MPEG-4高階視頻編碼(AVC)中所使用之當前的視頻編解碼器(編碼器-解碼器)主要係藉由僅將介於連續視頻框之間的差異編碼來獲得資料壓縮。這些編解碼器係使用所謂巨集區塊之規律陣列,其每 個被使用為與先前視頻框中之相應巨集區塊的比較區,且巨集區塊內之影像區接著依據介於視頻序列中之相應的當前與先前巨集區塊間、或者介於視頻序列之單一框內的相鄰巨集區塊間所發現之移動等級(level)而被編碼。
高效率視頻編碼(HEVC),亦已知為H.265或MPEG-H Part 2,是H.264/MPEG-4 AVC之一種已提議的後繼者。期望HEVC得以增進品質及加倍資料壓縮比(相較於H.264),並期望其可縮放從128×96至7680×4320像素解析度,約略等於從128kbit/s至800Mbit/s之位元率。
於HEVC中,一種所謂的4:2:0區塊結構被提議給消費者設備,其中各色度(chroma)頻道中所使用之資料的量為亮度(luma)頻道中所使用的四分之一。此係因為主觀地人類對於亮度變化較顏色變化更為敏感,而因此得以使用較大的壓縮及/或較少的資料於顏色頻道中而不會有主觀的品質喪失。
HEVC以一種基於編碼單元(CU,其為可變尺寸結構)之更有彈性技術來取代現存H.264及MPEG標準中所發現的巨集區塊。
因此,當編碼視頻框中之影像資料時,CU尺寸可回應於明顯的影像複雜度或檢測的移動等級而被選擇,以取代使用均勻分佈的巨集區塊。結果,可獲得明顯較大的壓縮於具有少量移動於框之間的區中以及具有少量變化於框之內的區中,而同時可保留較佳的影像品質於高框間移動 或影像複雜度之區域中。
各CU含有:圖像內或圖像間預測類型之任一者的一或更多可變區塊尺寸的預測單元(PU)、及其含有針對空間區塊轉變及量化之係數的一或更多轉變單元(TU)。
再者,PU和TU區塊被提供給三個頻道之每一者:亮度(Y),其為照度或亮度頻道、且其可被視為灰階頻道;及兩顏色差異或色彩(色度)頻道Cb和Cr。這些頻道提供亮度頻道之灰階影像的顏色。術語Y、照度(lumimance)及亮度被交替地使用於本說明書中,而類似的術語Cb和Cr、色彩(chrominance)及色度被適當地交替使用,注意其色彩或色度通常可被用於Cr和Cb之一者或兩者;而當討論特定色彩頻道時其將由術語Cb或Cr來識別。
一般而言,PU被視為頻道獨立的,除了其PU具有亮度部分及色度部分。一般而言,此表示形成各頻道之PU的部分之樣本代表影像之相同區,以致有固定的關係介於三個頻道間的PU之間。例如,針對4:2:0視頻,亮度之8×8 PU永遠具有色度之相應的4×4 PU,其PU之色度部分代表如亮度部分之相同區域,但由於4:2:0視頻中相較於亮度資料之4:2:0色度資料之次取樣本質而含有較少數的像素。(於4:4:4中,取樣率是相同的,而因此相同的PU結構可用於亮度及色度樣本)。兩色度頻道共用預測內資訊;而三個頻道共用預測間資訊。類似地, TU結構亦具有固定關係於三個頻道之間。
然而,針對專業的廣播及數位劇院設備,希望具有較少的壓縮(或較多的資訊)於色度頻道中,且此可影響當前及已提議的HEVC處理將如何運作。
本發明係應付或減緩由此處理所發生之問題。
本發明之形態及特徵係界定於後附申請專利範圍中。
應理解之前的一般性描述及之後的詳細描述為本技術之範例性的,而非限制性的。
10‧‧‧輸入音頻/視頻信號
20‧‧‧壓縮設備
30‧‧‧傳輸路由
40‧‧‧解壓縮設備
50‧‧‧輸出音頻/視頻信號
60‧‧‧壓縮設備
70‧‧‧解壓縮設備
100‧‧‧已壓縮音頻/視頻信號
110‧‧‧解壓縮設備
120‧‧‧顯示
130‧‧‧輸入音頻/視頻信號
140‧‧‧壓縮設備
150‧‧‧儲存裝置
160‧‧‧解壓縮設備
170‧‧‧輸出音頻/視頻信號
180‧‧‧影像擷取裝置
190‧‧‧壓縮設備
200‧‧‧麥克風
210‧‧‧已壓縮音頻/視頻信號
220‧‧‧概略級
300‧‧‧輸入視頻信號
310‧‧‧相加器
320‧‧‧影像預測器
330‧‧‧殘留影像信號
340‧‧‧轉變單元
343‧‧‧控制器
350‧‧‧量化器
360‧‧‧掃描單元
370‧‧‧熵編碼器(EE)
380‧‧‧已壓縮的輸出視頻信號
390‧‧‧返回路徑
400‧‧‧反轉掃描單元
410‧‧‧熵解碼器
420‧‧‧反向量化器
430‧‧‧反向轉變單元
440‧‧‧影像信號
450‧‧‧相加器
460‧‧‧輸出影像
470‧‧‧接收的已壓縮視頻信號
480‧‧‧輸出的解壓縮視頻信號
500‧‧‧多工器
510‧‧‧模式信號
520‧‧‧模式內選擇器
530‧‧‧影像內預測器
540‧‧‧動作補償(MC)預測器
550‧‧‧動作評價器
560‧‧‧過濾器單元
570‧‧‧影像儲存
580‧‧‧內插過濾器
600‧‧‧乘法器
610‧‧‧除法器
700‧‧‧最大編碼單元(LCU)
710‧‧‧編碼單元
720‧‧‧編碼單元
730‧‧‧編碼單元
800‧‧‧部分編碼影像
810‧‧‧區塊
820‧‧‧陰影區
830‧‧‧當前TU
840‧‧‧左上位置
1000‧‧‧除區塊過濾器
1010‧‧‧樣本調適補償(SAO)過濾器
1020‧‧‧調適迴路過濾器(ALF)
1030‧‧‧編碼決定區塊
1040‧‧‧係數產生器
1050‧‧‧係數產生器
1200‧‧‧TU
1210‧‧‧陰影區域
1220‧‧‧像素
1230‧‧‧點
1240‧‧‧虛線
1250‧‧‧色度像素
1260‧‧‧寬度
1300‧‧‧亮度PU
1310‧‧‧色度PU
1320‧‧‧內插陣列
1330‧‧‧陣列
1350‧‧‧亮度PU
1360‧‧‧色度PU
本發明之更完整的理解以及許多其伴隨的優點將隨著其藉由參考以下的詳細描述(當配合後附圖形而考量時)變得更為瞭解而被輕易地獲得,其中:圖1概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻(A/V)資料傳輸及接收系統;圖2概略地闡明一種使用視頻資料解壓縮之視頻顯示系統;圖3概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻儲存系統;圖4概略地闡明一種使用視頻資料解壓縮之視頻相機;圖5提供視頻資料壓縮及解壓縮設備之概略概視圖; 圖6概略地闡明預測影像之產生;圖7概略地闡明最大編碼單元(LCU);圖8概略地闡明一組四個編碼單元(CU);圖9和10概略地闡明將圖8之編碼單元次分割為較小的編碼單元;圖11概略地闡明預測單元(PU)之陣列;圖12概略地闡明轉變單元(TU)之陣列;圖13概略地闡明部分編碼影像;圖14概略地闡明一組可能的預測內方向;圖15概略地闡明一組預測模式;圖16概略地闡明筆直對角掃描;圖17概略地闡明視頻壓縮設備;圖18A和18B概略地闡明可能的區塊尺寸;圖19概略地闡明來自色度及亮度區塊之共置資訊的使用;圖20概略地闡明一種情況,其中來自一色度頻道之共置資訊被用於另一色度頻道;圖21概略地闡明用於LM-CHROMA模式之像素;圖22概略地闡明一組亮度預測方向;圖23概略地闡明圖22之方向,如應用於水平上稀疏的色度頻道;圖24概略地闡明映射至矩形色度像素陣列之圖22的方向;圖25-28概略地闡明亮度及色度像素內插; 圖29A和29B個別概略地闡明4:2:0及4:2:2之量化參數表;及圖30和31概略地闡明量化變異表。
現在參考圖形,圖1-4被提供以給出利用壓縮及/或解壓縮設備之設備或系統的概略圖示,以供配合本技術之實施例而描述於下。
所有將描述於下之資料壓縮及/或解壓縮設備可被實施以硬體、以運作在諸如通用電腦等通用資料處理設備上之軟體,當成諸如特定應用積體電路(ASIC)或場可編程閘陣列(FPGA)等可編程硬體或當成這些的組合。於其中實施例係藉由軟體及/或韌體來實施的情況下,應理解此類軟體及/或韌體、及藉以儲存或提供此類軟體及/或韌體之非暫態資料儲存媒體被視為本技術之實施例。
圖1概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻資料傳輸及接收系統。
輸入音頻/視頻信號10被供應至視頻資料壓縮設備20,其壓縮音頻/視頻信號10之至少視頻成分以供傳輸沿著傳輸路由30,諸如纜線、光纖、無線鏈路等等。已壓縮信號係由解壓縮設備40所處理以提供輸出音頻/視頻信號50。針對返回路徑,壓縮設備60係壓縮音頻/視頻以供傳輸沿著傳輸路由30而至解壓縮設備70。
壓縮設備20及解壓縮設備70可因此形成傳輸鏈路之 一節點。解壓縮設備40及壓縮設備60可形成傳輸鏈路之另一節點。當然,於其中傳輸鏈路為單向之例子中,僅有節點之一需要壓縮設備而另一節點僅需要解壓縮設備。
圖2概略地闡明一種使用視頻資料解壓縮之視頻顯示系統。特別地,已壓縮音頻/視頻信號100係由解壓縮設備110所處理以提供其可被顯示於顯示120上之解壓縮信號。解壓縮設備110可被實施為顯示120之部分,例如被提供於與顯示裝置相同的外殼內。另一方面,解壓縮設備110可被提供為(例如)所謂得機上盒(STB),注意:用詞「機上」並非暗示機盒需設置相對於顯示120之任何特定方位或位置;其僅為用以指示可連接至顯示以當作周邊裝置之裝置的本技術中所使用的術語。
圖3概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻儲存系統。輸入音頻/視頻信號130被供應至壓縮設備140,其產生已壓縮信號以供由儲存裝置150所儲存,諸如磁碟裝置、光碟裝置、磁帶裝置、固態儲存裝置(如半導體記憶體或其他儲存裝置)。為了播放,已壓縮資料被讀取自儲存裝置150並傳遞至解壓縮設備160以供解壓縮,以提供輸出音頻/視頻信號170。
應理解:已壓縮或已編碼信號、及儲存該信號之儲存媒體被視為本技術之實施例。
圖4概略地闡明一種使用視頻資料解壓縮之視頻相機。於圖4中,影像擷取裝置180,諸如電荷耦合裝置(CCD)影像電感器及相關的控制和讀出電子電路,產生 視頻信號,其被傳遞至壓縮設備190。一麥克風(或複數麥克風)200產生一音頻信號以供被傳遞至壓縮設備190。壓縮設備190產生已壓縮音頻/視頻信號210以便被儲存及/或傳輸(通常顯示為概略級220)。
將描述於下之技術主要係有關於視頻資料壓縮及解壓縮。應理解:許多現有的技術可配合將被描述之視頻資料壓縮技術而被用於音頻資料壓縮,以產生已壓縮音頻/視頻信號。因此,將不提供音頻資料壓縮之個別討論。亦應理解:與視頻資料(特別是廣播品質視頻資料)相關的資料率一般是極高於與音頻資料相關的資料率(無論已壓縮或未壓縮)。因此應理解:未壓縮音頻資料可伴隨已壓縮視頻資料以形成已壓縮音頻/視頻信號。應進一步理解:雖然目前的範例(圖1-4中所顯示者)係有關音頻/視頻資料,但以下將描述之技術可發現其應用於僅處理(亦即,壓縮、解壓縮、儲存、顯示及/或傳輸)視頻資料之系統。換言之,實施例可應用於視頻資料壓縮而不一定具有任何相關的音頻資料處置。
圖5提供視頻資料壓縮及解壓縮設備之概略概視圖。
控制器343控制設備之整體操作及;特別當針對壓縮模式時,控制試驗編碼程序(將描述於下),藉由作用為選擇器以選擇諸如CU、PU和TU區塊尺寸之操作的各種模式及視頻資料是否應無損地或其他方式地被編碼。
輸入視頻信號300之連續影像被供應至相加器310及影像預測器320。影像預測器320將參考圖6而被更詳細 地描述於下。相加器310事實上執行相減(負相加)操作,其中其輸入視頻信號300於「+」輸入上及影像預測器320之輸出於「-」輸入上,以致從輸入影像減去預測影像。結果係產生代表介於實際與投影影像間之差異的所謂殘留影像信號330。
殘留影像信號為何被產生之一原因係說明如下。將描述之資料編碼技術(亦即將應用於殘留影像信號之技術)傾向於更有效率地作用在當待編碼之影像中有較少「能量」時。於此,術語「有效率地」指的是少量已編碼資料之產生;針對特定影像品質等級,希望產生實際上盡可能少的資料。殘留影像中所謂「能量」是有關殘留影像中所含有之資訊量。假如預測影像將全同於實際影像,則兩者之間的差異(亦即,殘留影像)將含有零資訊(零能量)且將極易於編碼成少量的已編碼資料。通常,假如可使預測程序合理地作用良好,則預期殘留影像資料將含有較輸入影像更少的資訊(較少能量)而因此將較易於編碼成少量的已編碼資料。
現在將描述作用為編碼器(用以編碼殘留或差異影像)之設備的剩餘者。殘留影像信號330被耦合至轉變單元340,其產生殘留影像資料之離散餘弦轉變(DCT)表示。DCT技術本身是眾所周知的且將不會詳細地描述於此。然而,仍有將被更詳細地描述於下之本設備中所使用的技術之形態,特別是有關於可應用DCT操作之不同區塊的資料之選擇。這些將參考圖7-12而被描述於下。
轉變單元340之輸出(亦即,針對影像資料之各轉變區塊的一組DCT係數)被供應至量化器350。各種量化技術為視頻資料壓縮之領域中所已知的,範圍涵蓋從藉由量化標度因數之簡單相乘直至複雜查找表之應用,於量化參數之控制下。一般目標是兩倍。首先,量化程序減少已轉變資料之可能值的數目。其次,量化程序可增加其已轉變資料為零之值的可能性。這兩者可使得熵編碼程序(將描述於下)更有效率地作用於產生少量的已壓縮視頻資料。
由掃描單元360施加一資料掃描程序。掃描程序之目的係重新排列量化的已轉變資料以將盡可能多的非零已量化已轉變係數收集在一起,而當然因而將盡可能多的零值係數收集在一起收集。這些特徵可容許有效率地施加所謂的運行長度編碼或類似技術。因此,掃描程序涉及從已量化已轉變資料選擇係數,且特別是從相應於一已依據「掃描順序」而被轉變並量化的影像資料之區塊的係數之區塊,以致:(a)所有係數當作掃描之部分而被選擇一次;及(b)掃描常提供所欲的重新排列。一種可常提供有用結果之範例掃描順序是一種所謂的筆直對角掃描順序。
已掃描係數被接著傳遞至熵編碼器(EE)370。再次地,可使用各種類型的熵編碼。兩個範例是所謂的CABAC(上下文適應二進制算術編碼)系統之變異及所謂的CAVLC(上下文適應可變長度編碼)系統之變異。一般而言,CABAC被視為提供較佳的效率,且於某些研 究中已顯示出針對相當影像品質(相較於CAVLC)之已編碼輸出資料的量提供10-20%的減少。然而,CAVLC被視為代表相較於CABAC之複雜度更低甚多的等級(依照其實施方式)。注意:掃描程序及熵編碼程序被顯示為分離的程序,但事實上可被結合或一起處理。亦即,資料之讀入熵編碼器可發生以掃描順序。相應的考量適於以下將描述之個別的反向程序。注意:本案申請時於考量下之當前的HEVC文件不再包括CAVLC係數編碼器之可能性。
熵編碼器370之輸出,連同額外資料(以上所提及/或以下所討論),例如界定其中預測器320產生預測影像之方式,提供已壓縮的輸出視頻信號380。
然而,亦提供返回路徑,因為預測器320本身之操作取決於已壓縮輸出資料之解壓縮版本。
此特徵之原因係如下。於適當階段,在解壓縮程序(以下將描述)中,產生殘留資料之解壓縮版本。此已解壓縮的殘留資料需被加至預測影像以產生輸出影像(因為原始殘留資料為介於輸入影像與預測影像之間的差異)。為了使此程序是相當的,如介於壓縮側與解壓縮側之間,則由預測器320所產生之預測影像應是相同的於壓縮程序期間及於解壓縮程序期間。當然,在解壓縮時,設備對於原始輸入影像不具有存取權,而僅對於解壓縮影像有。因此,於壓縮時,預測器320係以壓縮影像之解壓縮版本為其預測(至少,針對影像間編碼)之基礎。
由熵編碼器370所執行之熵編碼程序被視為「無 損」,也就是說其可被反轉以達成與其被首先供應至熵編碼器370之完全相同的資料。因此,返回路徑可被實施在熵編碼階段之前。確實,由掃描單元360所執行之掃描程序亦被視為無損的,但於本實施例中,返回路徑390是從量化器350之輸出至一互補反向量化器420之輸入。
一般而言,熵解碼器410、反轉掃描單元400、反向量化器420及反向轉變單元430提供熵編碼器370、掃描單元360、量化器350及轉變單元340之個別反向功能。現在,將繼續遍及壓縮程序之討論;用以解壓縮輸入已壓縮視頻信號之程序將被分離地討論於下。
於壓縮程序中,掃描係數係由返回路徑390從量化器350傳遞至反向量化器420,其執行掃描單元360之反向操作。反向量化及反向轉變程序係由單元420、430所執行以產生壓縮解壓縮的殘留影像信號440。
影像信號440被加(於相加器450)至預測器320之輸出以產生重建的輸出影像460。此形成影像預測器320之輸入,如以下將描述者。
現在回到用以解壓縮一接收的已壓縮視頻信號470之程序,信號被供應至熵解碼器410並從該處至反轉掃描單元400、反向量化器420及反向轉變單元430之鏈,在藉由相加器450而被加至影像預測器320之輸出以前。因此,於解碼器側,解碼器係重建殘留影像之一版本並接著將此供應(藉由相加器450)至影像之預測版本(以逐區塊之方式)以解碼各區塊。明確地,相加器450之輸出 460係形成輸出的解壓縮視頻信號480。實際上,可在信號被輸出之前施加進一步過濾。
因此,圖5及6之設備可作用為壓縮設備或解壓縮設備。兩種類型的設備之功能非常大量地重疊。掃描單元360及熵編碼器370未被使用於解壓縮模式,而預測器320(其將被詳細地描述於下)及其他單元之操作係依循所接收的已壓縮位元流中所含有的模式及參數,而非產生其本身之此類資訊。
圖6概略地闡明預測影像之產生,及更明確地為影像預測器320之操作。
有兩種由影像預測器320所執行之基本模式:所謂的影像內預測及所謂的影像間(或動作補償(MC))預測。於編碼器側上,每個係涉及檢測相對於待預測之當前區塊的預測方向,並依據其他樣本以產生樣本的預測區塊(於相同(內)或另一(間)影像中)。依據單元310或450,介於預測區塊與實際區塊之間的差異被編碼或施加以個別地編碼或解碼該區塊。
影像內預測係基於來自相同影像內之資料以執行影像之一區塊的內容之預測。此係相應於其他視頻壓縮技術中之所謂的I框編碼。相對於I框編碼(其中整個影像均被內編碼),於本實施例中,可以逐區塊之方式來進行介於內-與間-編碼之間的選擇,雖然於其他實施例中仍以逐影像之方式進行選擇。
動作補償預測為影像間預測之範例且係利用其嘗試界 定將被編碼於當前影像中之影像細節的來源(於另一鄰接或附近影像中)之動作資訊。因此,於一理想範例中,於預測影像中之影像資料的一區塊之內容可極簡單被編碼為一參考(動作向量),其係指向一相鄰影像中位於相同或稍微不同位置上的相應區塊。
回到圖6,顯示兩個影像預測配置(相應於影像內及影像間預測),其結果係於模式信號510之控制下由多工器500所選擇以提供預測影像之區塊,以便供應至相加器310及450。其選擇之進行係根據哪個選擇提供最低「能量」(其,如上所討論,可被視為需要編碼之資訊內容),且該選擇被發送給編碼器於已編碼輸出資料流之內。影像能量(於本文中)可被檢測,例如,藉由從輸入影像執行預測影像之兩版本的區域之試驗相減、將差異影像之各像素值平方、加總平方值、及識別兩版本之哪個係導致相關於該影像區域之差異影像的較低均方根值。
於內編碼系統中,實際預測係基於其被接收為信號460之部分的影像區塊來進行,換言之,預測係基於已編碼-已解碼影像區塊,以致可於解壓縮設備上進行完全相同的預測。然而,資料可由模式內選擇器520獲取自輸入視頻信號300,以控制影像內預測器530之操作。
針對影像間預測,動作補償(MC)預測器540係使用動作資訊,諸如由動作評價器550從輸入視頻信號300所取得的動作向量。那些動作向量藉由動作補償預測器540而被施加至重建影像460之已處理版本,以產生影像 間預測之區塊。
因此,單元530及540(操作與評價器550)各作用為用以檢測關於待預測之當前區塊的預測方向之檢測器;及作用為用以產生樣本之預測區塊的產生器(形成傳遞至單元310及450之預測的部分),依據由該預測方向所定義之其他樣本。
現在將描述施加至信號460之處理。首先,信號係由過濾器單元560所過濾,其將被更詳細地描述於下。此涉及應用「除區塊」過濾器以移除或至少嘗試減少由轉變單元340所執行之區塊為基的處理及後續操作。亦可使用樣本調適補償(SAO)過濾器(進一步描述於下)。同時,應用一種使用藉由處理重建信號460及輸入視頻信號300所取得之係數的樣本迴路過濾器。調適迴路過濾器是一種過濾器類型,其(使用已知的技術)將調適過濾器係數應用於待過濾之資料。亦即,過濾器係數可根據各種因數而改變。定義應使用哪些過濾器係數之資料被包括為已編碼輸出資料流之部分。
調適過濾代表用於影像復原之迴路內過濾。LCU可由高達16個過濾器過濾,其針對LCU內之各CU取得過濾器之選擇及ALF開/關狀態(調適迴路過濾器一參見如下)。目前控制係於LCU等級,而非CU等級。
來自過濾器單元560之已過濾輸出實際上形成輸出視頻信號480,當設備操作為壓縮設備時。其亦被緩衝於一或更多影像或框儲存570中;連續影像之儲存為動作補償 預測處理之必要條件,且特別是動作向量之產生。為了節省儲存需求,影像儲存570中之儲存影像可被保持以壓縮形式並接著解壓縮以用於產生動作向量。為了此特定目的,可使用任何已知的壓縮/解壓縮系統。儲存影像被傳遞至內插過濾器580,其產生已儲存影像之較高解析度版本;於此範例中,中間樣本(次樣本)被產生以致:由內插過濾器580所輸出之內插影像的解析度為針對4:2:0之照度頻道而儲存於影像儲存570中的影像之解析度的4倍(於各維度);以及為針對4:2:0之色彩頻道而儲存於影像儲存570中的影像之解析度的8倍(於各維度)。內插影像被傳遞為送至動作評價器550及亦送至動作補償預測器540之輸入。
於實施例中,提供進一步的可選擇階段,其係使用乘法器600而將輸入視頻信號之資料值乘以四之因數(效果上僅將資料值向左移兩位元);及使用除法器或右移器610而施加一相應的除法操作(右移兩位元)於設備之輸出處。因此,左移及右移純粹針對設備之內部操作而改變資料。此處置可提供較高的計算準確度於設備內,當作減少任何資料捨入誤差之效果。
現在將描述其中影像針對壓縮處理而被分割的方式。於基本等級上,一待壓縮影像被視為樣本之區塊的陣列。針對本討論之目的,考量下之最大此類區塊是所謂的最大編碼單元(LCU)700(圖7),其代表通常為64×64樣本之方形陣列(LCU尺寸可由編碼器組態,高達諸如由 HEVC文件所定義之最大尺寸)。於此,討論係有關照度樣本。根據色彩模式,諸如4:4:4、4:2:2、4:2:0或4:4:4:4(GBR+密鑰資料),將有相應於照度區塊之不同數目的相應色彩樣本。
將描述三種基本的區塊類型:編碼單元、預測單元及轉變單元。一般而言,LCU之遞迴次劃分容許輸入圖像被分割成使得區塊尺寸及區塊編碼參數(諸如預測或殘留編碼模式)可依據待編碼影像之特定特性而被設定。
LCU可被次劃分為所謂的編碼單元(CU)。編碼單元總是方形的且具有介於8×8樣本與LCU 700之完整尺寸間的尺寸。編碼單元可被配置為一種樹狀結構,以致第一次劃分可發生如圖8中所示者,給定32×32樣本之編碼單元710;後續次劃分可接著依選擇性方式而發生,以給定16×16樣本之某些編碼單元720(圖9)及8×8樣本之潛在的某些編碼單元730(圖10)。總之,此程序可提供CU區塊之內容調適的編碼樹狀結構,其每一者可如LCU一般大或者如8×8樣本一般小。輸出視頻資料之編碼係基於編碼單元結構而發生,也就是說一LCU被編碼、及接著該程序移至下一LCU,依此類推。
圖11概略地闡明預測單元(PU)之陣列。預測單元為一基礎單元,用以攜載關於影像預測程序之資訊、或者(換言之)被加至熵編碼殘留影像資料以形成來自圖5之設備的輸出視頻信號之額外資料。一般地,預測單元不限於形狀為方形。其可具有其他形狀,特別是形成方形編碼 單元之一的一半之矩形形狀(例如,8×8 CU可具有8×4或4×8 PU)。利用其匹配影像特徵之PU並非HEVC系統之強制部分,但一般目標將是容許良好的編碼器匹配相鄰預測單元之邊界以吻合(盡可能地)圖像中之實際物體的邊界,以致不同的預測參數可被應用於不同的實際物體。各編碼單元可含有一或更多預測單元。
圖12概略地闡明轉變單元(TU)之陣列。轉變單元為轉變和量化程序之基礎單元。轉變單元可或不可為方形並得以具有4×4至32×32樣本之尺寸。各編碼單元可含有一或更多轉變單元。圖12中之縮寫SDIP-P表示一種所謂的短距離內預測分割。於此配置中,僅使用一維轉變,所以4×N區塊被傳遞通過N轉變,其中該些轉變之輸入資料係基於當前SDIP-P內之先前解碼的相鄰區塊及先前解碼的相鄰線。在本案提出申請時SDIP-P尚未被包括於HEVC中。
如上所述,編碼係發生為一LCU、接著下一LCU,依此類推。於LCU內,編碼係CU接CU地被執行。於CU內,編碼之執行係針對一TU、接著下一TU,依此類推。
現在將討論內預測程序。一般而言,內預測係涉及從相同影像中之先前編碼及解碼的樣本產生樣本之當前區塊的預測(預測單元)。圖13概略地闡明部分編碼影像800。於此,影像係基於LCU而從左上至右下被編碼。部分透過完整影像之處置而編碼的範例LCU被顯示為區塊 810。區塊810之左上半的陰影區820已被編碼。區塊810之內容的影像內預測可利用陰影區820之任一者但無法利用其下方之無陰影區域。然而,注意其針對當前LCU內之個別TU,以上所討論之編碼的階層順序(CU接CU然後TU接TU)表示可能有於當前LCU中並可用於的該TU之編碼的先前已編碼樣本,其為(例如)該TU之右上或左下。
區塊810代表LCU;如以上所討論,針對影像內預測處理之目的,此可被次劃分為一組較小的預測單元及轉變單元。當前TU 830之一範例被顯示於LCU 810內。
影像內預測係考量在考慮當前TU之前被編碼的樣本,諸如那些當前TU之上方及/或左方的那些。來源樣本(從該些樣本預測所需樣本)可被置於不同位置上或者相對於當前TU之方向。為了決定哪個方向適於當前預測單元,一樣本編碼器之模式選擇器520可測試各候選方向之可用TU結構的所有組合並選擇具有最佳壓縮效率之PU方向及TU結構。
圖像樣可被編碼以「片(slice)」為基礎。於一範例中,一片為一水平相鄰族群的LCU。但更一般而言,完整殘留影像可形成一片,或者一片可為單一LCU,或者一片可為一列LCU,依此類推。片可提供對誤差之韌性,因為其被編碼為獨立單元。編碼器及解碼器被完全地重設於切邊界。例如,內預測不被執行跨越切邊界;切邊界被視為針對此目的之影像邊界。
圖14概略地闡明一組可能的(候選)預測方向。整組34個候選方向可用於8×8、16×16、32×32樣本之預測單元。4×4及64×64樣本之預測單元尺寸的特殊情況具有其可用的一減少組的候選方向(個別為17個候選方向及5個候選方向)。該些方向係由相對於當前區塊位置之水平及垂直位移所決定,但被編碼為預測「模式」,其一組被顯示於圖15中。注意:所謂的DC模式代表周圍的上及左邊樣本之簡單算術平均值。
一般而言,在檢測關於各預測單元之預測方向以後,系統可操作以依據由預測方向所定義之其他樣本而產生一預測區塊的樣本。
圖16概略地闡明所謂的筆直對角掃描,其為可由掃描單元360所應用的範例掃描型態。於圖16中,該型態被顯示針對一範例區塊的8×8 DCT係數,以其DC係數被置於該區塊之左上位置840上,且增加水平和垂直空間頻率係由在朝下及朝向左上位置840增加距離時的係數所表示。可取代地使用其他替代的掃描順序。
區塊配置和CU、PU及TU結構之變化將被討論如下。這些將被討論以圖17之設備的背景,其在許多方面係類似於如上討論之圖5及6中所闡明者。確實,已使用了許多相同的參考數字,且將不進一步地討論這些部分。
針對圖5及6之主要顯著差異係關於過濾器560(圖6),其在圖17中被更詳細地顯示為包含除區塊過濾器1000及相關的編碼決定區塊1030、樣本調適補償 (SAO)過濾器1010及相關的係數產生器1040、和調適迴路過濾器(ALF)1020及相關的係數產生器1050。
除區塊過濾器1000嘗試減少失真並增進視覺品質和預測性能,藉由使其當使用區塊編碼技術時可形成於CU、PU與TU邊界之間的尖銳邊緣平順化。
SAO過濾器1010將重建的像素分類為不同的範疇並接著嘗試藉由僅為各範疇的像素增加補償以減少失真。像素強度及邊緣性質被用於像素分類。為了進一步增進編碼效率,一圖像可被劃分為用於補償參數之局部化的區。
ALF 1020嘗試復原已壓縮圖像,以致介於重建的與來源框之間的差異被減至最小。ALF之係數係以框為基礎來計算及傳輸。ALF可被應用於整個框或者局部區域。
如上所述,已提議的HEVC文件係使用已知為4:2:0技術之特定的色度取樣技術。4:2:0技術可被用於本地/消費者設備。然而,數種其他技術亦為可能的。
特別地,一種所謂的4:4:4技術將適於專業廣播、主控(mastering)及數位劇院,且理論上將具有最高的品質及資料率。
類似地,一種所謂的4:2:2技術可被用於具有某些保真度喪失之專業廣播、主控及數位劇院。
這些技術及其相應可能的PU和TU區塊結構被描述如下。
此外,其他的技術包括4:0:0單色技術。
於4:4:4技術中,三個Y、Cb及Cr頻道之每一者 均具有相同的樣本率。因此,原則上,於此技術中將有如亮度資料之兩倍般多的色度資料。
因此於HEVC中,於此技術中,三個Y、Cb及Cr頻道之每一者將具有其為相同尺寸之相應的PU和TU區塊;例如,8×8亮度區塊將具有針對兩個色度頻道之每一個的相應的8×8色度區塊。
因此,於此技術中,通常將有直接的1:1關係於各頻道中的區塊尺寸之間。
於4:2:2技術中,兩個色度成分被取樣以亮度之取樣率的一半(例如,使用垂直或水平次取樣,但為了本說明之目的,假設為水平次取樣)。因此,原則上,於此技術中將有如亮度資料一般多的色度資料,雖然色度資料將被分開於兩個色度頻道之間。
因此於HEVC中,於此技術中,Cb及Cr頻道將具有針對亮度頻道之不同尺寸的PU和TU區塊;例如,8×8亮度區塊將具有針對各色度頻道之相應的寬4×高8色度區塊。
因此,應注意:於此技術中,色度區塊可為非方形的,即使其相應於方形亮度區塊。
於當前已提議的HEVC 4:2:0技術中,兩個色度成分被取樣以亮度之取樣率的四分之一(例如,使用垂直及水平次取樣)。因此,原則上,於此技術中將有如亮度資料之一半的色度資料,色度資料將被分裂於兩個色度頻道之間。
因此於HEVC中,於此技術中,再次地Cb及Cr頻道將具有針對亮度頻道之不同尺寸的PU和TU區塊。例如,8×8亮度區塊將具有針對各色度頻道之相應的4×4色度區塊。
上述技術於本技藝中係口語地已知為「頻道比」,如以「4:2:0頻道比」;然而,從以上描述應理解:事實上此並非永遠表示其Y、Cb及Cr頻道係以該比例被壓縮或者被提供。因此雖稱之為頻道比,此不應被假設為照字面的。事實上,4:2:0技術之正確比例為4:1:1(4:2:2技術和4:4:4技術之比例是事實上正確的)。
在參考圖18A和18B以討論特定的配置前,將概述或重述一些一般性術語。
最大編碼單元(LCU)是根圖像標的。通常,其涵蓋相當於64×64亮度像素之區域。其被遞迴地分裂以形成樹狀階層的編碼單元(CU)。一般而言,三個頻道(一亮度頻道及二色度頻道)具有相同的CU樹狀階層。然而,如此一來,根據頻道比,一特定的亮度CU可包含針對相應色度CU之不同數目的像素。
於樹狀階層之末端上的CU,亦即,得自遞迴分裂程序之最小CU(其可被稱為葉CU)被接著分裂為預測單元(PU)。三個頻道(一亮度頻道及二色度頻道)具有相同的PU結構,除了當色度頻道之相應PU將具有太少樣本時,於此情況下該頻道僅有一PU可用。此為可組態的,但常見地一內PU之最小尺寸為4樣本;一間PU之 最小尺寸為4亮度樣本(或針對4:2:0為2色度樣本)。針對任何頻道之至少一PU最小CU尺寸之限制總是夠大的。
葉CU亦被分裂為轉變單元(TU)。TU可以,及當其為太大時(例如,超過32×32樣本)時必須,被分裂為進一步的TU。加諸一限制以致TU可被向下分裂至最大的樹狀深度,目前組態為2層。亦即,針對各CU不得有多於16個TU。一例示性的最小可容許TU尺寸為4×4樣本及最大可容許TU尺寸為32×32樣本。再次,只要有可能則三個頻道具有相同的TU結構,但假如由於尺寸限制而使TU無法被分裂為針對既定頻道之特定深度,則其保持於較大尺寸。所謂的非方形四倍樹狀轉變配置(NSQT)是類似的,但分裂為四個TU之方法無需為2×2而可為4×1或1×4。
參考圖18A及18B,針對CU、PU及TU區塊概述可能的不同區塊尺寸,以「Y」指稱亮度區塊而「C」一般性地指稱色度區塊之一代表者,及數字指稱像素。「間」指稱框間預測PU(相對於框內預測PU)。於許多情況下,僅顯示亮度區塊之區塊尺寸。相關色度區塊之相應尺寸係關於依據頻道比之亮度區塊尺寸。
因此,針對4:4:4,色度頻道具有如圖18A和18B中所示之亮度區塊般的相同區塊尺寸。因此,色度PU結構係反映(或個別地相同於)所有分裂等級上之亮度PU結構(其中「分裂等級」指的是CU尺寸選項之選擇,以 及於CU尺寸選項內,PU尺寸及形狀選項之選擇)。雖然將可能利用相同組的可能區塊尺寸和形狀,但為了容許(該組之)不同者針對CU之亮度和色度成分而被選擇,於本發明之某些實施例中,相同的PU區塊尺寸和形狀係針對相應於CU之色度和亮度成分而被選擇。因此,針對亮度CU所選擇之任何PU尺寸和形狀,其相同的尺寸和形狀PU係針對該CU之色度成分而被選擇。注意:如以下所討論,PU的區塊尺寸和形狀之選擇是基於編碼器的決定,在控制器343之控制下。於此類配置中,照度和色彩樣本係以4:4:4格式且被配置為各包含照度和色彩樣本之區塊的複數編碼單元;且預測方向係針對當前預測單元而被檢測,其為代表個別編碼單元之至少一子集的照度和色彩樣本之區塊。針對特定編碼單元,各包含來自該編碼單元之照度和色彩樣本的一或更多預測單元之尺寸和形狀被做出(例如藉由控制器343)以致預測單元尺寸和形狀之選擇針對照度樣本及針對色彩樣本是相同的。
針對4:2:2及4:2:0,色度區塊將各具有較相應亮度區塊更少的像素,依據頻道比。
圖18A和18B中所示之配置考量四種可能的CU尺寸:64×64、32×32、16×16及8×8亮度像素,個別地。這些CU之每一者均具有PU選項(顯示於行1140中)及TU選項(顯示於行1150中)之一相應列。針對如上所界定之可能CU尺寸,該些列選項個別被參照為1100、1110、1120及1130。
注意:64×64為當前的最大CU尺寸,但此限制可能會改變。
於各列1100...1130中,不同的PU選項被顯示可應用於該CU尺寸。可應用於那些PU組態之TU選項被顯示水平地對齊與個別的PU選項。
注意:於數種情況下,提供多重PU選項。如以上所討論,設備選擇PU組態之目標在於匹配(盡可能地接近)圖像中之真實物件的邊界,以致不同的預測參數可被應用於不同的真實物件。
區塊尺寸和形狀及PU是基於編碼器的決定,於控制器343之控制下。當前方法係涉及針對許多方向進行許多TU樹狀結構之試驗、取得各等級上之最佳「成本」。於此,成本可被表示為得自各區塊結構之失真、或雜訊、或誤差、或位元率的測量。因此,編碼器可嘗試在以上所討論之樹狀結構和階層下所容許者之內的區塊尺寸和形狀之二或更多(或及甚至所有可能的)排列,在選擇其針對某所需的品質測量提供最低位元率、或針對所需的位元率提供最低失真(或誤差、或雜訊、或這些測量之組合)、或這些測量之組合的試驗之一以前。
給定特定PU組態之選擇,則各種等級的分裂可被應用以產生相應的TU。參考列1100,於64×64 PU之情況下,此區塊尺寸針對使用為TU是太大的,而因此第一等級的分裂(從「等級0」(未分裂)至「等級1」)是必要的,其導致四個32×32亮度TU之陣列。這些之每一者 可接受樹狀階層中之進一步分裂(從「等級1」至「等級2」)如所需,以其分裂在轉變或量化該TU被執行前被履行。TU樹中之等級的最大數目係由HEVC文件所限制(舉例而言)。
其他的選項被提供給PU尺寸及形狀於64×64亮度像素CU之情況。這些被限制僅使用以內編碼圖像,以及(於某些情況下)以所謂的AMP選項致能。AMP指的是非對稱動作分割並容許PU被非對稱地分割。
類似地,於某些情況下,選項被提供給TU尺寸及形狀。假如NQST(非方形四倍樹狀轉變,基本上容許非方形TU)被致能,則分裂為等級1及/或等級2可被執行如所示,而假如NQST未被致能,則TU尺寸依循該CU尺寸之個別最大TU的分裂型態。
類似的選項被提供給其他CU尺寸。
除了圖18A和18B中所示之圖形表示以外,相同資訊之數字部分被提供於後續表中,雖然圖18A和18B中之表示被視為限定性的。「n/a」指示其不容許之模式。水平像素尺寸被首先引述。假如第三數字被提供,則其係有關該區塊尺寸之例子的數目,如於(水平)×(垂直)×(例子數)區塊。N為整數。
4:2:0、4:2:2及4:4:4區塊結構變異
已理解其4:2:0及4:4:4技術兩者均具有方形PU區塊以供內預測編碼。此外,目前4:2:0技術允許4×4像素PU及TU區塊。
於實施例中,因此提議其針對4:4:4技術,針對CU區塊之遞迴被允許向下至4×4像素而非8×8像素,因為如上所述:於4:4:4模式中,亮度與色度區塊將為相同尺寸(亦即,色度資料未被次取樣)而因此針對4×4 CU並無PU或TU將需為少於4×4像素之已容許的最小值。此因而為從該編碼單元之至少一子集選擇(針對特定編碼單元)一或更多各包含照度或色彩樣本之預測單元的尺寸及形狀之範例,該預測單元尺寸及形狀之選擇針對照度樣本及針對色彩樣本是相同的。
類似地,於4:4:4技術中,於一實施例中,每一Y、Cr、Cb頻道(或者Y與兩個Cr、Cb頻道一起)可具有個別的CU樹狀階層。一旗標可接著被用以告知應使用哪個階層或階層之配置。此方式亦可被用於4:4:4 RGB顏色空間技術。然而,替代地,色度和亮度之樹狀階層可為獨立的。
於4:2:0技術之8×8 CU的範例中,如此導致四個4×4亮度PU及一個4×4色度PU。因此於4:2:2技術中,具有色度資料的兩倍之多,一選項係於此情況下具有兩個4×4色度PU,其中(例如)底部色度區塊將於位置上相應於底部左邊亮度區塊。然而,已理解於此情況下使用一個非方形4×8亮度PU將更為對齊4:2:0色度格式之配置。
於4:2:0技術中,原則上有一些非方形TU區塊允許於間預測編碼之某些類型,但非於內預測編碼。然而,於間預測編碼時,當非方形四倍樹狀轉變(NSQT)被禁止(其為4:2:0技術之當前預設值)時,所有TU均為方形的。因此效果上4:2:0技術目前係強制為方形TU。例如,16×16 4:2:0亮度TU將相應與個別的Cb & Cr 8×8 4:2:0色度TU。
然而,如先前所述,4:2:2技術可具有非方形PU。因此於一實施例中,提議針對4:2:2技術容許非方形。
例如,雖然16×16 4:2:2亮度TU可相應與兩個個別的Cb及Cr 8×8 4:2:2色度TU,於此實施例中,其可替代地相應與個別的Cb及Cr 8×16 4:2:2色度TU。
類似地,四個4×4 4:2:2亮度TU可相應與兩個個別的4×4 Cb+Cr 4:2:2 TU,或者於此實施例中可替代地相應與個別的4×8 Cb及Cr 4:2:2 TU。
具有非方形色度TU(而因此較少的TU)可為更有效率的,因為其可能含有較少的資訊。然而,此可能影響此類TU之轉變及掃描程序,如將描述於後。
最後,針對4:4:4技術,可最好是使TU結構為頻道獨立的、可選擇於序列、圖片、片或更細的等級。
如上所述,NSQT目前被禁止於HEVC之4:2:0技術。然而,假如針對圖像間預測,NSQT被致能且非對稱動作分割(AMP)被允許,此容許PU被非對稱地分割;因此例如16×16 CU可具有4×16 PU及12×16 PU。於這些情況下,針對4:2:0及4:2:2技術之每一者,區塊結構之進一步考量是重要的。
針對4:2:0技術,於NSQT中,TU之最小寬度/高度可被限制於4個亮度/色度樣本:
因此,於非限制性範例中,16×4/16×12亮度PU結構 具有四個16×4亮度TU及四個4×4色度TU,其中亮度TU係於1×4垂直區塊配置而色度TU係於2×2區塊配置。
於其中分割為垂直而非水平之一類似配置中,4×16/12×16亮度PU結構具有四個4×16亮度TU及四個4×4色度TU,其中亮度TU係於4×1水平區塊配置而色度TU係於2×2區塊配置。
針對4:2:2技術,於NSQT中,當作一非限制性範例,4×16/12×16亮度PU結構具有四個4×16亮度TU及四個4×8色度TU,其中亮度TU係於4×1水平區塊配置;色度TU係於2×2區塊配置。
然而,已理解其不同結構可被考量於某些情況。因此於一實施例中,於NSQT中,當作一非限制性範例,16×4/16×12亮度PU結構具有四個16×4亮度TU及四個8×4色度TU,但現在亮度和色度TU係於1×4垂直區塊配置,對齊與PU佈局(相對於四個4×8色度TU之4:2:0型配置於2×2區塊配置)。
類似地,32×8 PU可具有四個16×4亮度TU及四個8×4色度TU,但現在亮度和色度TU係於2×2區塊配置。
因此,更一般地,針對4:2:2技術,於NSQT中,TU區塊尺寸被選擇以對齊非對稱PU區塊佈局。因此,NSQT有用地容許TU邊界對齊PU邊界,其減少否則可能發生之高頻人為因素(artefacts)
一般而言,本發明之實施例可相關於一種可針對4: 2:2格式視頻信號而操作之視頻編碼方法、設備或程式,待編碼影像被劃分為編碼單元、預測單元及轉變單元以供編碼,編碼單元為照度樣本及相應的色彩樣本之方形陣列,有一或更多預測單元於一編碼單元中,且有一或更多轉變單元於一編碼單元中;其中預測單元為預測之基本單元以致單一預測單元內之所有樣本係使用共同預測技術而被預測,而轉變單元為轉變和量化之基礎單元。
非方形轉變模式(諸如NSQT模式)被致能以容許非方形預測單元。選擇性地,非對稱動作分割被致能以容許相應於單一編碼單元的二或更多預測單元之間的非對稱。
控制器343控制轉變單元區塊尺寸之選擇以對齊預測單元區塊佈局,例如,藉由檢測相應於一PU之影像的部分中之影像特徵並針對該PU選擇TU區塊尺寸以使TU邊界對齊影像之部分中的影像特徵之邊緣。
以上所討論之規則規定區塊尺寸之哪些組合是可用的。編碼器可嘗試不同的組合。如以上所討論,試驗可包括二或更多直到所有可得的選項。試驗編碼程序可被執行依據成本函數度量(metric)及依據成本函數之評價所選擇的結果。
假定有三個等級的變異,依據CU尺寸及形狀、PU尺寸及形狀和TU尺寸及形狀,則此可導致待試驗編碼之大量的排列。為了減少此變異,系統可藉由使用各CU尺寸可容許之PU/TU組態的任意選定一者以針對CU尺寸試驗編碼;接著,已選定了CU尺寸,則可藉由試驗編碼不 同的PU(其各具有單一任意選定的TU組態)以選擇PU尺寸和形狀。接著,已選定了CU和PU,系統可嘗試所有可應用的TU組態以選擇一最終TU組態。
另一可能性是某些編碼器可使用區塊組態之固定選擇,或者可容許以上討論中所設定之組合的有限子集。
內預測
4:2:0內預測
現在回到圖22,針對內預測,HEVC容許角度色度預測。
經由介紹,圖22闡明35個可應用於亮度區塊之預測模式,其中33個係指明用以參照當前預測樣本位置110之樣本的方向。剩餘的兩模式為模式0(平面)及模式1(dc)。
HEVC容許色度具有DC、垂直、水平、平面、DM_CHROMA及LM_CHROMA模式。
DM_CHROMA指示其待使用之預測模式係相同於共同位置的亮度PU之預測模式(亦即,圖22中所示的35個之一)。
LM_CHROMA(線性模式色度)指示其共同位置的亮度樣本(適當地向下取樣至頻道比)被用以取得預測的色度樣本。於此情況下,假如亮度PU(DM_CHROMA預測模式將從該亮度PU取得)選擇DC、垂直、水平或平面,則色度預測列中之該項目係使用模式34而被取代。 於LM_CHROMA模式中,亮度像素(色度像素係從該些亮度像素所預測)係依據亮度與色度之間的線性關係而被定標(且適當的話應用補償)。此線性關係被取自周圍的像素,且該取得可依區塊接區塊之方式被執行,以解碼器在持續移動至下一個之前解碼一區塊。
值得注意的:預測模式2-34係取樣從45度至225度之角度範圍;換言之,方形之對角線的一半。此可用於4:2:0技術之情況,其(如上所述)僅使用方形色度PU於圖像內預測。
4:2:2內預測變異
然而,同樣如上所述,4:2:2技術可具有矩形(非方形)色度PU,即使當亮度PU為方形時。或確實地,其相反可為真:矩形亮度PU可相應於方形亮度PU。其差異之原因在於:於4:2:2中,色度被水平地次取樣(相對於亮度)而非垂直地。所以亮度區塊與相應色度區塊之寬高比將預期為不同的。
結果,於一實施例中,有關對於相應亮度區塊具有不同寬高比之色度PU,可能需要針對該方向之映射表。假設(例如)針對矩形色度PU之1至2寬高比,則例如模式18(當前以135度之角度)可被重新映射至123度。替代地,當前模式18之選擇可被重新映射至當前模式22之選擇,至幾乎相同的效果。
因此,更一般地,針對非方形PU,介於參考樣本的 方向與選定的內預測模式之間的不同映射可被提供以比較與方形PU之映射。
又更一般地,任何這些模式(包括非方向性模式)亦可根據經驗證據而被重新映射。
有可能此映射將導致多對一的關係,使得模式之完整集合的規格對於4:2:2色度PU而言是多餘的。於此情況下,例如,可能僅有17個模式(相應於角度解析度的一半)是需要的。替代地或另加地,這些模式可被角度地分佈以非均勻方式。
類似地,用於參考樣本(當預測樣本位置上之像素時)上之平順化過濾器可被不同地使用;於4:2:0技術中,其僅被用於平順化亮度像素,而非色度像素。然而,於4:2:2及4:4:4技術中,此過濾器亦可被用於色度PU。於4:2:2技術中,再次地過濾器可回應於PU之不同寬高比而被修改,例如僅被用於接近水平模式之子集。模式之範例子集最好是2-18及34;或更理想的7-14。於4:2:2中,僅有參考樣本之左邊欄位的平順化可被執行於實施例中。
這些配置被更詳細地討論於後。
4:4:4內預測變異
於4:4:4技術中,色度和亮度PU為相同尺寸,而因此色度PU之內預測模式可相同於共同位置的亮度PU(因此藉由無需編碼分離的模式而節省位元流中之某些額 外負擔)、或者替代地,其可被獨立地選擇。
因此,於後者的情況下,於一實施例中,系統可具有1、2或3個不同的預測模式,針對CU中之每一PU。
於第一範例中,Y、Cb及Cr PU可全使用相同的內預測模式。
於第二範例中,Y PU可使用一個內預測模式,而Cb及Cr PU可均使用另一獨立地選擇的內預測模式。
於第三範例中,Y、Cb及Cr PU各使用個別獨立地選擇的內預測模式。
應理解:針對多數色度頻道(或各色度頻道)具有獨立的預測模式將增進顏色預測準確性。但此需要附加的資料額外負擔以將獨立的預測模式傳遞為已編碼資料的部分。
為了減輕此負擔,模式數目之選擇可被指示以高階語法(例如,以序列、圖像、或片等級)。替代地,獨立模式數目可被取得自視頻格式;例如,GBR可具有高達3,而YCbCr可被限制於高達2。
除了獨立地選擇模式之外,可用的模式可被容許於4:4:4技術中不同於4:2:0技術。
例如,當亮度和色度PU為相同尺寸於4:4:4中時,色度PU可由於對所有可得的35+LM_CHROMA+DM_CHROMA方向之存取權而受惠。因此,針對各具有獨立預測模式之Y、Cb及Cr的情況,則Cb頻道可具有對DM_CHROMA & LM_CHROMA之存取權,而Cr頻道 可具有對DM_CHROMA_Y、DM_CHROMA_Cb、LM_CHROMA_Y及LM_CHROMA_Cb之存取權,其中這些係以對Y或Cb色度頻道之參考來取代對亮度頻道之參考。
當亮度預測模式係藉由取得大部分可攜模式之列表並傳送該列表之指標而被告知時,則假如色度預測模式為獨立的,其可能必須針對各頻道取得大部分可攜模式之獨立列表。
最後,以一類似於如上針對4:2:2情況所述之方式,於4:4:4技術中,當預測樣本位置上之像素時使用於參考樣本上之平順化過濾器可以類似於亮度PU之方式被用於色度PU。目前,[1,2,1]低通過濾器可在內預測之前被應用於參考樣本。此僅被用於亮度TU,當使用某些預測模式時。
可用於色度TU的內預測模式之一係將預測樣本基於共同位置的亮度樣本。此一配置被概略地闡明於圖19中,其顯示由Cb、Cr及Y頻道中之小方形所代表的TU 1200之陣列(來自一來源影像之一區),其顯示於Cb和Y頻道中及於Cr和Y頻道中的影像特徵(概略地由暗和亮陰影方塊1200所表示)之間的特殊對齊。於此範例中,有利的是迫使色度TU將預測樣本基於共同位置的亮度樣本。然而,並非總是其影像特徵於三個頻道之間對應的情況。事實上,某些特徵可能僅出現於頻道之一或二中,且通常三個頻道之影像可能不同。
於實施例中,針對Cr TU,LM_Chroma可選擇性地基於來自Cb頻道之共同位置的樣本(或者,於其他實施例中,其依存性可為反向的)。此一配置被顯示以概略形式於圖20中。於此,空間對齊的TU被顯示介於Cr、Cb和Y頻道之間。標示為「來源」之另一組TU為彩色圖像之概略表示(整體所見)。來源影像中所見之影像特徵(左上方三角形及右下方三角形)事實上不代表照度之改變,而僅為介於兩三角區之間的照度之改變。於此情況下,使Cr之LM_Chroma基於照度樣本將產生不佳的預測,但使其基於Cb樣本則可提供較佳的預測。
有關應使用哪個LM_Chroma模式之決定可由控制器343及/或模式控制器520來做出,基於不同選項之試驗編碼(包括使LM_Chroma基於共同位置的亮度或共同位置的色度樣本之選項),其有關應選擇哪個模式之決定係藉由針對不同試驗編碼以存取成本函數(類似於上述者)而做出。成本函數之範例為雜訊、失真、誤差率、或位元率。來自接受其提供一或更多這些成本函數之最低者的試驗編碼之那些中的模式被選擇。
圖21概略地闡明用於獲得實施例中之內預測的參考樣本模式之方法。於觀看圖21時,應注意其編碼係依據掃描型態而被執行,以致(一般而言)當前待編碼區塊之左上方的區塊之已編碼版本可用於編碼程序。有時候係使用左下或右上的樣本,假如其已被事先編碼為當前LCU內之其他已編碼TU的部分。舉例而言,參考如上所述之 圖13。
陰影區域1210代表當前TU,亦即,當前正被編碼的TU。
於4:2:0及4:2:2中,緊接於當前TU之左邊的像素行不含共同位置的照度及色彩樣本,由於水平次取樣。換言之,此係因為4:2:0及4:2:2格式具有如照度像素之一半的色彩像素(於水平方向),因此並非每一照度樣本位置具有共同位置的色彩樣本。因此,雖然照度樣本可出現在緊接於TU之左邊的像素行中,色彩樣本並未出現。因此,於某些實施例中,位於當前TU左邊兩樣本的行被使用以提供參考樣本給LM_Chroma。注意:情況在4:4:4中是不同的,其中緊接於當前TU之左邊的行確實含有共同位置的亮度及色度樣本。此行因而可被用以提供參考樣本。
參考樣本被使用如下。
於LM_Chroma模式下,預測的樣本係依據線性關係而被取自重建的亮度樣本。因此,一般而言,可以說於TU內之預測的色彩值由下式提供:PC=a+bPL其中PC為色彩樣本值,PL為於該樣本位置上之重建的照度樣本值,及a和b為常數。這些常數係針對特定區塊而得,藉由檢測就在該區塊上方之列中以及就在該區塊左方之行中的重建亮度樣本與色度樣本之間的關係,這些為已被編碼之樣本位置(參見上述)。
於某些實施例中,常數a和b被求得如下:a=R(PL’,PC’)/R(PL’,PL’)其中R代表線性(最少方形)回歸函數,而PL’及PC’為個別地來自相鄰列及行之照度及色彩樣本,如以上所討論,以及:b=mean(PC’)-a.mean(PL’)
針對4:4:4,PL’及PC’值被取自緊接在當前TU左方之行、及緊接在當前TU上方之列。針對4:2:2,PL’及PC’值被取自緊接在當前TU上方之列及在離開當前TU之左邊緣兩個樣本位置之行。針對4:2:0(其被垂直地及水平地次取樣),PL’及PC’值將理想地被取自當前TU上方兩列之列,但實際上是被取自當前TU上方一個樣本位置的相鄰區塊中之列、以及在離開當前TU之左邊緣兩個樣本位置的相鄰區塊中之行。其原因是為了避免必須維持資料之額外的整列於記憶體中。因此於此方面,4:2:2及4:2:0被處置以類似的方式。
因此,這些技術適用於具有色彩預測模式之視頻編碼方法,其中代表影像之一區的色彩樣本之當前區塊係藉由取得並編碼色彩樣本相對於代表影像之相同區的一共同位置區塊的照度樣本(諸如重建的照度樣本)之關係而被編碼。此關係(諸如線性關係)係藉由比較來自相鄰已編碼區塊之共同位置的(另表達為相應位置的)照度及色彩樣本。色彩樣本係依據該關係而被取得自照度樣本;而介於預測色彩樣本與實際色彩樣本之間的差異被編碼為殘留資 料。
有關第一取樣解析度(諸如4:4:4),其中色彩樣本具有與照度樣本相同的取樣率,共同位置的樣本為鄰近當前區塊之樣本位置中的樣本。
有關第二取樣解析度(諸如4:2:2或4:2:0),其中色彩樣本具有較照度樣本低的取樣率,來自相鄰已編碼區塊之共同位置的照度和色彩樣本之最近行或列被用以提供共同位置的樣本。或者其中,於第二取樣解析度為4:2:0取樣解析度之情況下,相應位置的樣本為鄰近當前區塊之相應列的樣本以及相應位置的照度和色彩樣本之最近行或列,來自相鄰已編碼區塊。
圖22概率地闡明亮度樣本之可用的預測角度。當前像素被預測為顯示於圖形之中央為像素1220。較小的點1230代表相鄰像素。那些位於當前像素之上或左側者係可用為用以產生預測之參考樣本,因為其已被先前地編碼。其他像素當前為未知(於預測像素1220之時刻)且本身將於適當時機被預測。
各已編號的預測方向係指向其被用以產生當前預測像素之當前區塊的上或左邊緣上的參考樣本1230。於較小區塊之情況下,其中預測方向係指向介於參考樣本之間的位置,則使用介於相鄰參考樣本之間的線性內插。
現在回到色度樣本之角度內預測,針對4:2:0,由於色度樣本之相對稀少而有較少的預測方向可得。然而,假如選擇了DM_CHROMA模式則當前色度區塊將使用如 共同位置亮度區塊之相同預測方向。於是,此表示內預測之亮度方向亦可用於色度。
然而,針對4:2:2中之色度樣本,可視為反本能地使用如亮度之相同預測演算法(當選擇DM_CHROMA時),假定色度區塊現在具有與亮度區塊不同的寬高比。例如,方形亮度陣列的樣本之45度線仍應映射至色度樣本之45度線,雖然具有矩形尺寸樣本之陣列。將矩形柵格疊置於方形柵格之上指示其45度線將接著實際上映射至26.6度線。
圖23概略地闡述如應用於4:2:2中之色度像素的亮度內預測方向,針對待預測之當前像素1220。注意:水平上有垂直上一半的像素,因為4:2:2具有在色度頻道一半的水平取樣率(相較於亮度頻道)。
圖24概略地闡明4:2:2色度像素之轉變或映射至方形柵格,及因而闡述此轉變如何改變預測方向。
亮度預測方向被顯示為虛線1240。色度像素1250被再映射至方形柵格,其提供相應亮度陣列之寬度1260的一半之矩形陣列(諸如圖22中所顯示者)。圖23中所示之預測方向已被再映射至矩形陣列。可看出針對一些方向對(一對為一亮度方向及一色度方向),有重疊或接近關係之任一者。例如,於亮度陣列中之方向2實質上位於色度陣列中之方向6之上。然而,亦將注意:某些亮度方向(大約其一半)並無相應的色度方向。一範例為編號3之亮度方向。同時,某些色度方向(2-5)無相等物於亮度 陣列中,而某些亮度方向(31-34)無相等物於色度陣列中。但一般地,圖24中所示之疊置展現其將不適於使用相同角度於亮度及色度頻道兩者。
因此,為了取得色度之適當預測角度,當(a)DM_CHROMA被選擇及(b)目前使用中之DM_CHROMA模式指示其色度預測方向應為共同位置的亮度區塊之方向時,則下列程序適用:
(i)依據亮度方向以取得內預測角度步進(step)及其反數,依據一般HEVC規則。
(ii)假如亮度方向是顯著地垂直的(亦即,例如,編號從18至34內之模式),則內預測角度步進被減半且其反數被乘兩倍。
(iii)否則,假如亮度方向是顯著地水平的(亦即,例如,編號從2至17內之模式),則內預測角度步進被乘兩倍且其反數被減半。
因此,這些實施例係有關視頻編碼或解碼方法、設備或程式,其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本。於諸如4:2:2之模式中,色彩樣本具有較照度樣本更低的水平及/或垂直取樣率,以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比。簡言之,此表示照度樣本之區塊具有與色彩樣本之相應區塊不同的寬高比。
框內預測器530(例如)可操作以針對一組待預測當 前樣本檢測一相關於第一寬高比之柵格而界定的第一預測方向;並將方向映射應用於該預測方向以產生相關於該相同組待預測當前樣本之不同寬高比的樣本之柵格的第二預測方向。
於實施例中,第一預測方向係針對照度或色彩樣本之一而被界定,及第二預測方向係針對照度或色彩樣本之另一而被界定。於本說明書所討論之特定範例中,照度預測方向可被修改以提供色彩預測方向。但亦可使用相反的方式。
此技術特別可應用於內預測,以致參考樣本為如待預測樣本之相同個別影像的樣本。
於至少某些配置中,第一預測方向係針對照度樣本(包括當前照度樣本)之方形區塊而被界定;及第二預測方向係針對色彩樣本(包括當前色彩樣本)之矩形區塊而被界定。
得以提供獨立的預測模式給兩個色彩成分。於此一配置中,色彩樣本包含第一及第二色彩成分之樣本,及該技術包含針對該第一色彩成分(諸如Cb)以應用以上步驟所討論之方向映射;及針對該第二色彩成分(諸如Cr)以提供不同的預測模式。
視頻資料可為4:2:2格式或4:4:4格式,舉例而言。
一般而言,本發明之實施例可提供獨立的預測模式給色彩成分(例如,分別地給照度及色彩成分之每一者)。 這些實施例係有關視頻編碼方法,其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自該相同影像之其他個別參考樣本,色彩樣本具有較照度樣本更低的水平及/或垂直取樣率以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比,以致照度樣本之區塊具有與色彩樣本之相應區塊不同的寬高比,而色彩樣本代表第一及第二色彩樣本。
框內模式選擇器520選擇一預測模式,其界定一或更多參考樣本的選擇以供預測第一色彩成分(諸如Cb)之當前色彩樣本。其亦選擇一不同的預測模式,其界定一或更多參考樣本的不同選擇以供預測第二色彩成分(諸如Cr)之當前色彩樣本,其係與第一色彩成分之當前色彩樣本位於相同位置。
一參考樣本過濾器可選擇性地被應用(例如,當作框儲存570及/或作用為過濾器配置之預測器530、540之操作的部分)於水平樣本或垂直樣本(或兩者)。過濾器可為3分接頭「1 2 1」過濾器,當前應用於除了左下及右上之外的所有亮度參考樣本(N×N區塊之樣本被集合在一起以形成尺寸2N+1之單一1D陣列,並接著被選擇性地過濾)。於本技術之實施例中,其僅被應用於4:2:2之第一(左手邊緣)或最後(頂部邊緣)N+1色度樣本,但注意其左下、右上及左上於是將不被調整;或是針對4:2:2及4:4:4之所有色度樣本(如同亮度)。
實施例亦可提供視頻編碼或解碼方法、設備或程式,其中照度及第一和第二色彩成分樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本,其涉及來自第一色彩成分之樣本的第二色彩成本。
實施例亦可提供視頻編碼或解碼方法、設備或程式,其中照度及第一和第二色彩成分樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本,其涉及過濾參考樣本。
如參考圖19及20所討論,有可能其不同的預測模式包含一模式,藉由該模式第二色彩成分之樣本被預測自第一色彩成分之樣本。
注意:模式0及1並非角度預測模式而因此未被包括於此程序中。如上所示之程序的效果係用以將色度預測方向映射至圖24中之亮度預測方向上。
針對4:2:0,當純水平預測模式(亮度模式10)或純垂直預測模式(亮度模式26)被選擇時,則所預測的TU之上或左邊緣接受僅針對亮度頻道之過濾。針對水平預測模式,頂部列被過濾於垂直方向。針對垂直預測模式,左邊行被過濾於水平方向。
於水平方向過濾一行樣本可被理解為將水平定向的過濾器應用於該樣本行順序中之各樣本。因此,針對一獨立樣本,其值將由過濾器之動作所修改,基於從該樣本及水平方向上移開自該樣本之樣本位置上的一或更多其他樣本之當前值所產生的已過濾值(亦即,相關的該樣本之左及 /或右邊的一或更多其他樣本)。
於垂直方向過濾一列樣本可被理解為將垂直定向的過濾器應用於該樣本列順序中之各樣本。因此,針對一獨立樣本,其值將由過濾器之動作所修改,基於從該樣本及垂直方向上移開自該樣本之樣本位置上的一或更多其他樣本之當前值所產生的已過濾值(亦即,相關的該樣本之上及/或下方的一或更多其他樣本)。
上述邊緣像素過濾程序之一目的在於用以減少預測中基於邊緣效果的區塊,藉此用以減少殘留影像資料中之能量。
於實施例中,一相應的過濾程序亦被提供給4:4:4及4:2:2中之色度TU。考量水平次取樣,一提議是僅過濾4:2:2中之色度TU的頂部列,而非過濾4:4:4中之頂部列及左邊行兩者(適當地,依據選定的模式)。被認為適當的是僅於這些區中過濾以避免將太多有用的細節過濾掉,其(假如過濾掉的話)將導致殘留資料之增加的能量。
針對4:2:0,當DC模式被選擇時,預測的TU之頂部及/或左邊緣的一者或兩者便接受僅針對亮度頻道之過濾。於此,此為一情況之範例,其中照度樣本代表照度成分而個別的色彩樣本代表兩個色彩成分,過濾步驟被應用於三個成分之一子集,該子集為該三個成分之一者或兩者。子集可由照度成分所組成。過濾可涉及過濾樣本之預測區塊中之樣本的左邊行及樣本之預測區塊中之樣本的頂 部列之一者或兩者。
過濾可為致使於DC模式中,過濾器進行一針對兩邊緣上之所有樣本的(1x相鄰外部樣本+3*邊緣樣本)/4平均化運算。然而,針對左上方,過濾器函數為(2x當前樣本+1x上樣本+1x左樣本)/4。此為一操作之範例,其中於DC模式(其中預測樣本被產生為周圍樣本之簡單算術平均值)中,過濾步驟包含過濾樣本之預測區塊中的左邊行樣本及過濾樣本之預測區塊中的頂部列樣本。
H/V過濾器為介於相鄰外部樣本與邊緣樣本之間的平均。
於某些實施例中,此過濾程序亦被提供給4:4:4及4:2:2中之色度TU。再次地,考量水平次取樣,於某些實施例中,僅有色度樣本之頂部列針對4:2:2而被過濾,但色度TU之頂部列及左邊行係針對4:4:4而被過濾。
因此,此技術可應用於有關視頻編碼或解碼方法、設備或程式,其中於(例如)4:4:4格式或4:2:2格式中之照度及色彩樣本係依據一關聯與待預測樣本之區塊的預測方向而被預測自其他個別樣本。
於本技術之實施例中,預測方向係關於待預測當前區塊而被檢測。色彩樣本之預測區塊係依據由預測方向所界定之其他色彩樣本而被產生。假如測得的預測方向為實質上垂直的(例如,於其中n為(例如)2之完全垂直模式的+/- n角度模式內),則左邊行樣本被過濾(例如,於 使用水平定向過濾器之水平方向)於色彩樣本之預測區塊。或者,假如測得的預測方向為實質上水平的(例如,於其中n為(例如)2之完全水平模式的+/- n角度模式內),則頂部列樣本被過濾(例如,於使用垂直定向過濾器之垂直方向)於色彩樣本之預測區塊。於各情況下,該操作可個別地僅應用於左邊行或頂部列。接著介於已過濾的預測色彩區塊與實際色彩區塊之間的差異被編碼(例如)為殘留資料。替代地,此測試可針對完全垂直或水平模式而非實質上垂直或水平模式。+/- n之容限可被應用於該些測試之一(垂直或水平)而非另一。於本發明之實施例中,僅有預測區塊之左邊行或頂部列可被過濾,且過濾可個別地由水平定向的過濾器或垂直定向的過濾器來執行。
過濾可由個別的預測器520、530(於此方面作用為過濾器)來執行。
在過濾程序之後,本技術之實施例便將介於已過濾的預測色彩區塊與實際色彩區塊之間的差異編碼(於編碼器上)或者將已解碼的差異應用於已過濾的預測色彩區塊以編碼該區塊(於解碼器上)。
間預測
注意:HEVC中之間預測已容許矩形PU,因此4:2:2模式及4:4:4模式已相容與PU間預測處理。
視頻影像之各框為實際景象之離散取樣,而因此各像 素為顏色和亮度之真實世界梯度的步進近似。
有鑑於此,當從先前視頻框中之值預測新視頻框中之Y、Cb或Cr值時,該先前視頻框中之像素被內插以產生原始真實世界梯度的較佳估計,以容許新像素之亮度或顏色的更準確選擇。因此,用以指向視頻框之間的動作向量不限於整數像素解析度。反之,其可指向內插影像內之子像素位置。
4:2:0間預測
現在參考圖25及26,於如上所述之4:2:0技術中,通常8×8亮度PU 1300將關聯與Cb及Cr 4×4色度PU 1310。因此,為了內插亮度及色度像素資料直到相同的有效解析度,不同的內插過濾器被使用。
例如,針對8×8 4:2:0亮度PU,內插為1/4像素,而因此8分接頭×4過濾器被首先水平地應用,且接著相同的8分接頭×4過濾器被垂直地應用,以致亮度PU被有效地伸展4次於各方向,以形成如圖25中所示之內插陣列1320。同時,相應的4×4 4:2:0色度PU被1/8像素內插以產生相同的最終解析度,而因此4分接頭×8過濾器被首先水平地應用,接著相同的4分接頭×8過濾器被垂直地應用,以致4:2:0色度PU被有效地伸展8次於各方向,以形成如圖26中所示之陣列1330。
4:2:2間預測
現在將參考圖27及28以描述4:2:2之類似配置,其闡明亮度PU 1350及一對相應的色度PU 1360。
參考圖28,如先前所述,於4:2:2技術中,色度PU 1360可為非方形的,而針對8×8 4:2:2亮度PU之情況,每一Cb及Cr頻道通常將為寬4×高8的4:2:2色度PU。注意:色度PU被描繪(為了圖28之目的)為非方形像素之方形形狀陣列,但一般而言,可注意其PU 1360為4(水平)×8(垂直)像素陣列。
雖然其可能因此使用現存的8分接頭×4亮度過濾器垂直地於色度PU上,於本發明之實施例中,其已被理解該現存的4分接頭×8色度過濾器將滿足垂直內插如實際上,僅有興趣於內插色度PU之甚至小部分位置。
因此,圖27顯示如前內插以8分接頭×4過濾器之8×8 4:2:2亮度PU 1350、及內插以4分接頭×8色度過濾器之4×8 4:2:2色度PU 1360,於水平及垂直方向,但僅以其用於形成垂直方向上之內插影像的甚至小部分結果。
這些技術可應用於使用影像間預測以編碼輸入視頻資料之視頻編碼或解碼方法、設備或程式,其中各色彩成分具有照度成分之水平解析度的1/Mth及照度成分之垂直解析度的1/Nth,其中M及N為等於1或更大的整數。例如,針對4:2:2,M=2、N=1。針對4:2:0,M=2、N=2。
框儲存570可操作以儲存當前影像前之一或更多影 像。
內插過濾器580可操作以內插已儲存影像之預測單元的更高解析度版本,以致一已內插的預測單元具有該已儲存影像之相應部分的P倍之水平解析度及該已儲存影像之相應部分的Q倍之垂直解析度,其中P及Q為大於1的整數。於當前範例中,P=Q=4以致內插過濾器580可操作以產生具1/4樣本解析度之已內插影像。
動作估計器550可操作以檢測介於當前影像與一或更多已內插儲存影像之間的影像間動作,以產生介於當前影像的預測單元與一或更多先前影像的區域之間的動作向量。
動作補償預測器540可操作以產生當前影像之預測單元的動作補償預測,針對由個別動作向量所指出的已內插儲存影像。
回到內插過濾器580之操作的討論,此過濾器之實施例可操作以將×R水平及×S垂直內插過濾器應用於一儲存影像之色彩成分,以產生已內插色彩預測單元,其中R等於(U×M×P)而S等於(V×N×Q),U及V為等於1或更大的整數;並次取樣該已內插色彩預測單元,以致其水平解析度被除以U之因數且其垂直解析度被除以V之因數,藉此獲致MP×NQ樣本之區塊。
因此,於4:2:2之情況下,內插過濾器580將×8內插應用於水平及垂直方向,但接著以2之因數垂直地次取樣,例如藉由使用已內插輸出中之每第二個樣本。
此技術因此容許相同(例如,×8)過濾器被使用於4:2:0及4:2:2,但於4:2:2情況下需要次取樣之進一步步驟。
於實施例中,如先前之討論,該已內插色彩預測單元具有其使用相同的×R及×S內插過濾器所內插之4:2:0格式預測單元的樣本之兩倍高度。
使用這些技術可避免或減輕提供不同過濾器之需求,而特別是藉由使用相同的×R水平及×S垂直內插過濾器,針對4:2:0輸入視頻資料及4:2:2輸入視頻資料。
如以上之討論,次取樣該已內插色彩預測單元之步驟包含使用垂直方向上該已內插色彩預測單元之每第V個樣本,及/或使用垂直方向上該已內插色彩預測單元之每第U個樣本。
實施例可涉及取得一預測單元之照度動作向量;並獨立地取得該預測單元之一或更多色彩動作向量。
於某些實施例中,R與S之至少一者係等於2或更大,且於某些實施例中,×R水平及×S垂直內插過濾器亦被應用於儲存影像之照度成分。
4:4:4間預測變體
藉由延伸,僅使用現存4分接頭×8色度過濾器之甚至小部分結果的相同原理可垂直地暨水平地應用於8×8 4:4:4色度PU。
進一步針對這些範例,×8色度過濾器可被用於所有 內插,包括亮度。
進一步間預測變體
於動作向量(MV)之一實施方式中,一向量被產生給P片中之一PU以及二向量被產生給B片中之一PU(其中P片從先前框取得預測,而B片從先前及後續框取得預測,以一種類似於MPEG P及B框之方式)。值得注意的,於4:2:0技術之此實施方式中,向量對於所有頻道是共同的,而此外,色度資料無需被用以計算動作向量。換言之,所有頻道係使用一基於亮度資料之動作向量。
於一實施例中,於4:2:2技術中,色度向量可被取得以獨立自亮度(亦即,用於Cb和Cr頻道之單一向量可被分離地取得),且於4:4:4技術中,色度向量可進一步針對Cb和Cr頻道之每一者為獨立的。
轉變
於HEVC中,大部分影像係從先前編碼/解碼的框被編碼為動作向量,以其動作向量告知解碼器從(於這些其他已解碼框中)何處複製當前影像之良好近似。其結果為當前影像之近似版本。HEVC接著編碼所謂的殘留,其為介於近似版本與正確影像之間的誤差。此殘留需要甚少於直接指明實際影像的資訊。然而,一般而言仍最好是壓縮此殘留資訊以進一步減少整體位元率。
於包括HEVC之許多編碼方法中,此類資料係使用整數餘弦轉變(ICT)而被為轉變為空間頻率領域,且通常某壓縮係接著藉由保留低空間頻率資料並丟棄較高空間頻率資料而獲得,依據所欲的壓縮位準。
4:2:0轉變
HEVC中所使用之空間頻率轉變傳統上是產生4之羃次的係數(例如,64個頻率係數),因為此為特別能接受共同量化/壓縮方法。4:2:0技術中之方形TU均為4之羃次而因此為直接可獲得。
假如NSQT選項被致能,一些非方形轉變可用於非方形TU(諸如4×16),但再次值得注意地,這些導致64個係數(亦即,再次4之羃次)。
4:2:2及4:4:4轉變變體
4:2:2技術可導致其並非4之羃次的非方形TU;例如,4×8 TU具有32個像素,而32並非4之羃次。
於一實施例中,因此,可使用針對非4數字之羃次的係數之非方形轉變,已知其需要對後續量化程序進行修改。
替代地,於一實施例中,非方形TU被分裂為具有用於轉變之4區域的羃次之方形區塊,且接著所得的係數可被交錯。
例如,針對4×8區塊,奇數/偶數垂直樣本可被分裂 為兩方形區塊。替代地,針對4×8區塊,頂部4×4像素及底部4×4像素可形成兩方形區塊。替代地,再次地,針對4×8區塊,哈爾(Haar)小波分解可被用以形成較低及較高頻率4×4區塊。
這些選項之任一者可變為可用的,且特定替代方式之選擇可由解碼器通知或取得。
其他轉變模式
於4:2:0技術中,有一建議旗標(所謂的「qpprime_y_zero_transquant_bypass_flag」),其容許殘留資料被無損地包括於位元流中(亦即,未被轉變、量化或進一步過濾)。於4:2:0技術中,該旗標係應用於所有頻道。
因此,此類實施例代表視頻編碼或解碼方法、設備或程式,其中照度及色彩樣本被預測且介於樣本與個別預測樣本之間的差異被編碼,利用一種指示器,其被組態成指示照度差異資料是否被無損地包括於輸出位元流中;並獨立地指示色彩差異資料是否無損地被包括於位元流中。此一旗標或多數旗標(或指示器)可由(例如)控制器343所插入。
於一實施例中,已提議其用於亮度頻道之旗標對於色度頻道是分離的。因此,針對4:2:2技術,此類旗標應被分離地提供給亮度頻道及給色度頻道,而針對4:4:4技術,此類旗標應被分離地提供給亮度及色度頻道;或者 一旗標被提供給該三個頻道之每一者。如此認知其關聯與4:2:2及4:4:4技術之增加的色度資料率,並致能(例如)無損的亮度資料連同壓縮的色度資料。
針對預測內編碼,模式取決的方向性轉變(MDDT)容許針對一TU之水平或垂直ICT(或兩ICT)被取代以整數正弦轉變,根據內預測方向。於4:2:0技術中,此未被應用於色度TU。然而,於一實施例中,提議將其應用於4:2:2及4:4:4色度TU,注意其IST目前僅被定義於4樣本轉變維度(水平地或垂直地),而因此目前無法被垂直地應用於4×8色度TU。
於視頻編碼之方法中,各種實施例可被配置以指示照度差異資料是否被無損地包括於輸出位元流中;並獨立地指示色彩差異資料是否被無損地包括於位元流中、及編碼或包括相關資料於由此類指示所定義之形式中。
量化
於4:2:0技術中,針對色彩之量化計算係相同於針對照度之量化計算。僅有量化參數(QP)有差異。
針對色彩之QP被計算自照度QP如下:Qp Cb =scalingTable[Qp tuminance +chroma_qp_index_offset] Qp Cr =scalingTable[Qp tuminance +second_chroma_qp_index_offset]
其中定標表(scaling table)被定義如圖29A或29B中所見者(個別針對4:2:0及4:2:2),且「chroma_qp_index_offset」及「second_chroma_qp_index_offset」被定義於圖形參數組中且針對Cr及Cb為相同的或不同 的。換言之,方形括弧中之值於各情況下將一「指標」定義入定標表(圖29A和29B)且定標表接著給定Qp(「值」)之修訂值。
注意:「chroma_qp_index_offset」及「second_chroma_qp_index_offset」可另被個別地稱為cb_qp_offset及cr_qp_offset。
色彩頻道通常含有較照度更少的資訊,而因此具有較小值的係數;此對於色彩QP之限制可防止所有色彩細節喪失在大量的量化等級下。
4:2:0中之QP除數關係是對數關係,以致QP之6的增加係相當於除數之兩倍(本說明書別處所討論之量化步進尺寸,雖然注意到其可在使用前由Q矩陣所進一步修改)。因此在51-39=12之定標表中的最大差異代表除數之4的因數之改變。
然而,於一實施例中,針對4:2:2技術,其潛在地含有4:2:0技術中的色度資訊之兩倍,定標表中之最大色彩QP值可被升高至45(亦即,除數的一半)。類似地針對4:4:4技術,定標表中之最大色彩QP值可被升高至51(亦即,相同的除數)。於此情況下,定標表在效果上是多餘的,但可僅被保留以供操作上效益(亦即,以致系統係以針對各技術之相同方式參考一表而工作)。因此,更一般地,於一實施例中,色度QP除數係回應於編碼技術(相對於4:2:0技術)中之資訊量而被修改。
因此,實施例應用於一種視頻編碼或解碼方法,其可 操作以依據一定義量化步進尺寸之選定的量化參數而量化4:4:4或4:2:2格式之頻道轉變的照度和色彩成分視頻資料之區塊。量化參數關聯(諸如,例如,圖29A或29B中之適當表格)被定義於照度與色彩量化參數之間,其中該關聯係使得最大色彩量化步進尺寸小於針對4:2:2格式(例如45)之最大照度量化步進尺寸,但等於針對4:4:4格式(例如51)之最大照度量化步進尺寸。量化程序操作以使得頻率轉變的資料之各成分被除以從個別量化步進尺寸所取得的個別值,且其結果被捨入至整數值,以產生已量化空間頻率資料之相應區塊。
應理解其除法及捨入步驟係指示一般性量化階段之範例,依據個別的量化步進尺寸(或從其取得之資料,例如,藉由Q矩陣之應用)。
實施例包括選擇用以量化空間頻率係數之量化參數或指數(照度之QP)的步驟,該量化參數係作用為依據可應用於照度資料的QP表之一組量化步進尺寸的個別者之參考。定義量化參數關聯之程序於是可包含:針對色彩成分,依據選定量化參數以參考已修改量化參數之表(諸如圖29A和29B之表),其因而可涉及(i)針對第一色彩成分,將第一補償(諸如chroma_qp_index_offset)加至量化參數並選擇相應於該項目(於該表中)之已修改量化指數,針對量化指數加上第一補償;及(ii)針對第二色彩成分,將第二補償(諸如second_chroma_qp_index_offset)加至量化參數並選擇相應於該項目(於該表中)之已修改 量化指數,針對量化指數加上第二補償;及依據照度資料及第一和第二色彩成分之第一和第二已修改量化指數以參考該組中之個別的量化步進尺寸。以不同方式來看,此為一涉及選擇用以量化空間頻率係數之量化參數的程序之範例,該量化參數係作用為對於一組量化步進尺寸的個別者之參考;且其中定義步驟包含:針對色彩成分,依據選定量化參數以參考已修改量化參數之表,參考步驟包含:針對各色彩成分,將個別補償加至量化參數並選擇相應於該項目(於該表中)之已修改量化指數,針對量化指數加上個別補償;及依據照度資料及第一和第二色彩成分之第一和第二已修改量化參數以參考該組中之個別的量化步進尺寸。
這些技術特別可應用於其中該組中之量化步進尺寸的連續值為對數相關的配置,以致m(其中m為整數)之量化參數的改變代表具有p(其中p為大於1的整數)之因數的量化步進尺寸之改變。於本實施例中,m=6而p=2。
於實施例中,如以上所討論,最大照度量化參數針對4:2:2格式為45;而最大色彩量化參數針對4:4:4格式為51。
於實施例中,第一和第二補償可關聯與已編碼視頻資料而被傳遞。
於4:2:0中,轉變矩陣A被初始地產生(藉由轉變單元340)自那些真實正規化的N×N DCT A’,其係使 用: 其中i和j係指示矩陣中之位置。此相對於正規化轉變矩陣之定標提供了精確度之增加,避免分數計算的需求並增加內部精確度。
忽略由於Aij之捨入的差異,因為X被乘以A及AT(矩陣A之換位)兩者,故所得的係數係不同於真實正規化的M×N(M=高度;N=寬度)DCT之那些係數,藉由以下共同定標因數:
注意:共同定標因數可不同於此範例。亦注意:矩陣乘以A及AT兩者可被執行以各種方式,諸如所謂的蝴蝶(Butterfly)方法。重要的事實是:其被執行之操作是否等同於傳統的矩陣相乘,而非其是否被履行以一特定的傳統操作順序。
此定標因數係等同於二元左移位元操作以位元transformShift之數目,因為於HEVC中此導致2之羃次:transformShift=(12+0.5 log2(N)+0.5 log2(M))
為了減少對於內部位元精確度之要求,該些係數被右移(使用正捨入)兩次於轉變程序期間:shift1=log2(N)+bitDepth-9 shift2=log2(M)+6
結果,該些係數(隨著其離開前向轉變程序並進入量 化器)被有效地左移以:resultingShift=(12+0.5 log2(NM))-(shift1+shift2)=(12+0.5 log2(N)+0.5 log2(M))-(log2(N)+bitDepth-9+log2(M)+6)=15-(0.5 log2(N)+0.5 log2(M)+bitDepth)
於4:2:0中,由頻率轉變所產生的頻率分離(例如,DCT)係數為(2resultingShift)之因數大於其正規化DCT所將生成之係數。
於某些實施例中,區塊為方形的或者為具有2:1寬高比之矩形的。因此,針對N×M之區塊尺寸,任何:N=M,於此情況下,resultingShift為整數且S=N=M=sqrt(NM);或者0.5N=2M或2N=0.5M,於此情況下resultingShift仍為整數且S=sqrt(NM)resultingShift=15-(0.5 log2(N)+0.5 log2(M)+bitDepth)=15-(log2(S)+bitDepth)
該些係數被接續地量化,其中量化除數係依據量化參數QP而被取得。
注意:resultingShift係等同於一整數,所以共同定標因數為2之整數羃次,轉變程序之整體左移「resultingShift」亦被考量於此階段,藉由應用一相等但相反的右移「quantTransformRightShift」。
此位元移位操作是可能的,因為resultingShift為一整數。
同時注意:除數-QP(量化參數或指數)關係是依循基於2羃次曲線,如以上所述,其中QP增加6具有除數變兩倍的效果,而QP增加3具有增加除數sqrt(2)(2之 平方根)之因數的效果。
由於4:2:2之色度格式,有更大的TU寬度:高度(N:M)比:N=M(來自先前) 其中S=N=M=sqrt(NM)(resultingShift為整數)0.5N=2M及2N=0.5M(來自先前),其中S=sqrt(NM)(resultingShift為整數)N=2M 其中S=sqrt(NM) 2M=N 其中S=sqrt(NM) 4N=0.5M 其中S=sqrt(NM) resultingShift=15-(log2(S)+bitDepth)
於這後三者情況下,resultingShift不是整數。例如,此可適用於其中視頻資料樣本之至少一些區塊包含M×N樣本,其中N/M之平方根不等於2之整數羃次。此類區塊尺寸可針對色度樣本而發生於某些本實施例中。
因此,於此類例子中,下列技術是相關的,亦即,於視頻編碼或解碼方法、設備或程式,其可操作以藉由在視頻資料樣本上履行頻率轉變而產生已量化空間頻率資料之區塊,使用一包含各針對正規化轉變矩陣(藉由取決於轉變矩陣之維度的量)之個別值而被定標的整數值陣列之轉變矩陣;及依據選定量化步進尺寸以量化空間頻率資料,其具有藉由對區塊進行矩陣乘法乘以轉變矩陣以及轉變矩陣之換位而進行頻率轉變的步驟,來產生各以共同定標因數(例如,resultingShift)大於空間頻率係數(其將得自 視頻資料樣本之區塊的正規化頻率轉變)之已定標空間頻率係數的區塊。
因此在量化階段,一適當的位元移位操作無法被使用來取消該操作以簡單的方式。
針對此提議一解決方式如下:在量化器階段,應用右移:quantTransformRightShift=15-log2(S’)-bitDepth
其中值S’被取得以致 quantTransformRightShift為整數
介於1/2之移位之間的差異係等同於乘以sqrt(2),亦即,在此時刻,係數為大於其應該者的sqrt(2)倍,使得該位元移位為整數位元移位。
對於量化程序,應用(QP+3)之量化參數,表示量化除數被有效率地增加sqrt(2)之因數,因而從先前步驟消除sqrt(2)定標因數。
因此,這些步驟可被總結,於視頻編碼或解碼方法(或者相應的設備或程式)的上下文,其可操作以藉由在視頻資料樣本之區塊上履行頻率轉變而產生已量化空間頻率資料之區塊,使用一包含各針對正規化轉變矩陣之個別值而被定標的整數值陣列之轉變矩陣;及依據選定量化步進尺寸以量化空間頻率資料,其涉及藉由對區塊進行矩陣乘法乘以轉變矩陣以及轉變矩陣之換位而頻率轉變視頻資料樣本之區塊,來產生各以共同定標因數大於空間頻率係 數(其將得自視頻資料樣本之區塊的正規化頻率轉變),如下:選擇用以量化空間頻率係數之量化步進尺寸;應用n位元移位(例如,quantTransformRightShift)以將已定標空間頻率係數之每一者除以2n之因數,其中n為整數;及檢測殘留定標因數(例如,resultingShift-quantTransformRightShift),其為除以2n之共同定標因數。例如,於以上所討論之情況下,量化步進尺寸於是依據殘留定標因數以產生修改的量化步進尺寸;且區塊中之已定標空間頻率係數的每一者被除以一取決於已修改量化步進尺寸之值並將該結果捨入至整數值,以產生已量化空間頻率資料之區塊。如以上所討論,量化步進尺寸之修改可僅藉由將一補償加至QP而被執行,以選擇不同的量化步進尺寸,當QP被映射入量化步進尺寸之表時。
係數現在是原始QP之正確大小。
轉變矩陣可包含整數值之陣列,其各針對正規化轉變矩陣之個別值而被定標以一取決於該轉變矩陣之維度的量。
可得知其S’之所需值可總是被取得如下:S’=sqrt(2*M*N)
當作一替代提議,S’可被取得以致:
於此情況下,,且已應用的量化參數為(QP-3)。
於這些情況之任一者下,(將3加至QP或從QP減 去3),選擇量化步進尺寸之步驟包含選擇量化指數(例如,QP),量化指數係定義量化步進尺寸之表中的個別項目,而修改步驟包含改變量化指數以選擇不同的量化步進尺寸,以致不同量化步進尺寸相對於原始選擇的量化步進尺寸之比係實質上等於殘留定標因數。
此特別地良好工作於其中(如於本實施例中)該表中之量化步進尺寸的值係對數相關的,以致m(其中m為整數)之量化指數(例如,QP)的改變代表量化步進尺寸之改變以p之因數(其中p為大於1之整數)。於本實施例中,m=6而p=2,以致QP之6的增加代表所應用的量化步進尺寸之兩倍,而QP之6的減少代表所得量化步進尺寸之一半。
如以上所討論,修改可藉由:選擇關於照度樣本之量化指數(例如,基礎QP);針對色彩成分之每一者或兩者的樣本產生量化指數補償(相對於針對照度樣本所選擇的量化指數);依據殘留定標因數以改變量化指數補償;及傳遞與已編碼視頻資料相關的量化指數補償。於HEVC之實施例中,針對兩色度頻道之QP補償被傳送於位元流中。這些步驟係相應於一系統,其中+/-3之QP補償(以因應殘留定標因數)可被結合入這些補償內,或者當用於取得色度QP時其可被遞增/遞減。
注意:假如使用不同形狀區塊的話QP補償不一定要是+/-3;只是+/-3代表一可應用於以上關於4:2:2視頻(舉例而言)所討論之區塊形狀及寬高比的補償。
於某些實施例中,n(如所應用之位元移位)被選擇以致2n係大於或等於共同定標因數。於其他實施例中,n被選擇以致2n係小於或等於共同定標因數。於實施例(使用這些配置之任一者)中,位元移位n可被選擇以成為次接近(於任一方向)於共同定標因數,以致殘留定標因數代表一具有小於2之大小的因數。
於其他實施例中,量化步進尺寸之修改可僅藉由將量化步進尺寸乘以一取決於殘留定標因數之因數來履行。亦即,此修改無需涉及指數QP之修改。
亦注意:所討論之量化步進尺寸不一定是已轉變樣本所被分割之實際量化步進尺寸。以此方式所取得之量化步進尺寸可被進一步修改。例如,於某些配置中,量化步進尺寸係由值之矩陣(Q矩陣)中的個別項目所進一步修改,以致不同的最終量化步進尺寸被用於係數之已量化區塊中的不同係數位置上。
亦值得注意的:於4:2:0技術中,最大色度TU為16×16,而針對4:2:2技術則16×32 TU是可能的;以及針對4:4:4技術,32×32色度TU是可能的。因此,於一實施例中,提議針對32×32色度TU之量化矩陣(Q矩陣)。類似地,Q矩陣應被定義給非方形TU,諸如16×32 TU,以其一實施例為較大方形Q矩陣之次取樣Q矩陣可由下列之任一者來定義:柵格中之值(針對4×4及8×8 Q矩陣);空間地內插自個別較小或較大的矩陣; -於HEVC中,較大的Q矩陣可被取得自較小參考者之係數的個別族群,或者較小的矩陣可被次取樣自較大的矩陣。注意:此內插或次取樣可被執行於一頻道比之內-例如,針對一頻道比之較大矩陣可被內插自針對該頻道比之較小者。
相對於其他Q矩陣(亦即,差異值、或差量); -因此僅有該些差量需被傳送。
僅為闡明之目的舉一小範例,針對一頻道比之特定矩陣可被定義,諸如關於4:2:0之4×4矩陣(a b) (c d)
其中a,b,c及d為個別係數。此作用為參考矩陣。
本發明之實施例可接著針對關於另一頻道比之類似尺寸矩陣定義一組差異值:(diff1 diff2) (diff3 diff4)
以致為了產生針對其他頻道比之Q矩陣,差異之矩陣被矩陣相加至參考矩陣。
取代差異,多重因數之一矩陣可針對其他頻道比而被定義,以使得(i)多重因數之矩陣被矩陣相乘與參考矩陣而產生針對其他頻道比之Q矩陣,或(ii)參考矩陣中之各係數被獨立地乘以個別因數以產生針對其他頻道比之Q矩陣。
當作另一Q矩陣之函數; -例如,相對於另一矩陣之定標比(以致上述範例中之a,b,c及d之每一者被乘以相同的因數,或者具有加入該數之相同差異)。如此減少用以傳輸差異或因數資料之資料需求。
-因此,僅有該些函數之係數需被傳送(諸如定標比),當作一等式/函數(例如,塊狀線性曲線、指數、多項式);-因此,僅有該些等式之係數需被傳送以取得該矩陣,或者任何上述之組合。例如,a,b,c及d之每一者可事實上由一函數所定義,該函數可包括根據該矩陣內之係數位置(i,j)的依存性。(i,j)可代表(例如)從左至右之係數位置,接續以從矩陣之頂部至底部的係數位置。一範例為:係數i,j=3i+2j
注意:Q矩陣可被稱為HEVC環境內之定標表列。於其中在掃描程序後施加等化的實施例中,掃描資料可為連續資料樣本之線性流。於此類例子中,Q矩陣之概念仍適用,但矩陣(或掃描表列)可被視為1×N矩陣,以致1×N矩陣內之N資料值的順序係相應於掃描樣本(個別Q矩陣值將被應用於該些樣本)之順序。換言之,掃描資料(一具掃描型態之空間頻率)中的資料順序與1×N Q矩陣中的資料順序之間有1:1的關係。
注意:於某些實施方式中,有可能越過或省略DCT(頻率分離)階段,但保持量化階段。
其他有用的資訊包括該些值係關於哪些其他矩陣的選擇性指示器,亦即,先前頻道或第一(主要)頻道;例如,針對Cr之矩陣可為針對Y(或針對Cb)之矩陣的已定標因數,如所示者。
因此,本發明之實施例可提供一種視頻編碼或解碼方法(及一種相應的設備或電腦程式),其可操作以產生已量化的空間頻率之區塊,藉由(選擇性地)對視頻資料樣本履行頻率轉變並量化視頻資料(諸如空間頻率資料),依據選定的量化步進尺寸及一修改用於樣本之一依序區塊(諸如頻率轉變樣本之依序區塊)內的不同個別位置上之量化步進尺寸的資料之矩陣,此方法可關於至少兩不同色彩次取樣格式而操作。
針對色彩次取樣格式之至少一者,一或更多量化矩陣被定義為關於一或更多針對色彩次取樣格式之一參考者所定義的參考量化矩陣之一或更多預定的修改。
於本發明之實施例中,定義步驟包含將一或更多量化矩陣定義為各內插自一參考量化矩陣之個別複數值的值之矩陣。於其他實施例中,定義步驟包含將一或更多量化矩陣定義為各次取樣自一參考量化矩陣之值的值之矩陣。
於本發明之實施例中,定義步驟包含將一或更多量化矩陣定義為關於一參考量化矩陣之相應值的差異之矩陣。
於本發明之實施例中,定義步驟包含將一或更多量化 矩陣定義為一參考量化矩陣之值的預定函數。於此類例子中,預定函數可為多項式函數。
於本發明之實施例中,提供下列之一或兩者,例如,當作已編碼視頻資料之部分或關聯與已編碼視頻資料:(i)參考指示器資料,用以指示(關於已編碼視頻資料)參考量化矩陣;及(ii)修改指示器資料,用以指示(關於已編碼資料值)一或更多預定修改。
這些技術特別可用於其中色彩次取樣格式之兩者為4:4:4及4:2:2格式。
對於各轉變尺寸:3其HEVC 4:2:0中之Q矩陣的數目當前為6(針對相應的頻道),且一組針對內及一組針對間。於4:4:4 GBR技術之情況下,應理解其量化矩陣之任一組可被用於所有頻道,或者量化矩陣之三個個別組可被使用。
於本發明之實施例中,該些矩陣之至少一者為1×N矩陣。此將為其中該些矩陣之一或更多者事實上為定標表列等等之情況(如文中所述者),其為線性1×N階的係數陣列。
已提議之解決方式涉及遞增或遞減已應用的QP。然而,此可被達成以數個方式:
於HEVC中,兩個色度頻道之QP補償被傳送於位元流中。+/- 3可被結合入這些補償中,或者其可被遞增/遞減在當其被用以取得色度QP時。
如以上所討論,於HEVC中,(亮度QP+色度補 償)被使用為對於一用來取得色度QP之表的指標。此表可被修改以結合+/- 3(亦即,藉由將原始表之值遞增/遞減3)。
在色度QP已被取得之後,有關正常HEVC程序,其結果可接著被遞增(或遞減)3。
當作修改QP之替代方式,sqrt(2)或1/sqrt(2)可被用以修改量化係數。
針對前向/反向量化,除/乘程序係藉由使用(QP% 6)為對於一表之指標而實施,來獲得量化係數或量化步進尺寸,inverseQStep/scaledQStep。(於此,QP% 6表示QP模數6)。注意:如以上所討論,此可不代表其被應用於已轉變資料之最終量化步進尺寸;其可在使用前由Q矩陣進一步修改。
HEVC中之預設表為長度6,涵蓋值之倍數(雙倍)。此僅為減少儲存需求之手段;該些表係針對實際使用而被延伸,藉由依據QP之模數(mod 6)以選擇表中之項目並接著乘以或除以2之適當羃次,取決於來自預定基礎值之差異(QP-QP模數6)。
此配置可被改變以容許QP值中之+/- 3的補償。該補償可被應用於表查找程序,或者以上所討論之模數程序可使用已修改QP而取代地被執行。假設補償被應用於表查找上,然而,該表中之額外項目可被提供如下:
一替代方式係延伸該些表3個項目,其中新的項目為如下(針對6-8之指數值)。
圖30中所示之範例表將由[(QP% 6)+3]來索引(一種「QP遞增方法」),其中代號QP% 6係表示「QP模數6」。
圖31中所示之範例表將由[(QP% 6)-3]來索引(一種「QP遞減方法」),其具有針對-1至-3之指標值的額外項目。
熵編碼
基本熵編碼包含將碼字指定給輸入資料符號,其中最短可用碼字被指定給輸入資料中之最可攜符號。平均而言,此結果為輸入資料之無損但更小得多的表示。
基本技術可被進一步改良,藉由得知其符號機率經常對於最近先前資料是條件性的,而因此讓該指定程序為內容調適的。
於此一技術中,內容變數(CV)被用以判定個別機率模型之選擇,且此類CV被提供於HEVC 4:2:0技術。
為了延伸對4:2:2技術之熵編碼,其例如針對8×8亮度TU將使用4×8色度TU而非4×4 TU,選擇性地其內容變數可僅藉由垂直地重複同等CV選擇而被提供。
然而,於本發明之一實施例中,CV選擇並未針對左上係數(亦即,高能量、DC及/或低空間頻率係數)而重複,而替代地取得新的CV。於此情況下,例如,映射可被取得自亮度圖。此方式亦可被用於4:4:4技術。
於編碼期間,於4:2:0技術中,一種所謂的曲折掃描從高至低頻率依序地掃描該些係數。然而,再次注意4:2:2技術中之色度TU可為非方形的,而因此於本發明之一實施例中,提議一種不同的色度掃描,其掃描之角度被傾斜以使其更為水平,或更一般地,回應於TU之寬高比。
類似地,重要性圖CV選擇之附近及大於一和大於二CV選擇之c1/c2系統可因此被調適。
同樣地,於本發明之一實施例中,最低有效係數位置(其變為解碼期間之開始點)亦可針對4:4:4而調整,其色度TU之最低有效位置係不同於共同位置亮度TU中之最低有效位置而被編碼。
係數掃描亦可變為取決於某TU尺寸之預測模式。因此不同掃描順序可根據內預測模式而被用於某些TU尺寸。
於4:2:0技術中,模式取決的係數掃描(MDCS)僅被應用於4×4/8×8亮度TU及4×4色度TU,針對內預測。MDCS係根據內預測模式而被使用,考量從水平及垂直+/-4之角度。
於本發明之一實施例中,提議於4:2:2技術中,MDCS被應用於4×8及8×4色度TU,針對內預測。類似地,提議於4:4:4技術中,MDCS被應用於8×8及4×4色度TU。針對4:2:2之MDCS僅可被進行於水平或垂直方向,且角度範圍可不同針對4:4:4色度vs.4:4: 4亮度vs.4:2:2色度vs.4:2:2亮度vs.4:2:0亮度。
迴路內過濾器
解塊(deblocking)
解塊被應用於所有CU、PU及TU邊界,而CU/PU/TU形狀不列入考量。過濾器強度及尺寸係取決於局部統計,而解塊具有8×8亮度像素之粒度。
因此,預期應用於4:2:0技術之當前解塊亦應可應用於4:2:2及4:4:4技術。
樣本調適補償
於樣本調適補償(SAO)中,各頻道是完全獨立的。SAO係使用四倍樹以分裂各頻道之影像資料,且所得的區塊尺寸為至少一LCU。葉區塊被對齊於LCU邊界且各葉可運作於三個模式之一,如由編碼器所決定者(「中央頻帶補償」、「側邊頻帶補償」或「邊緣補償」)。各葉分類其像素,且編碼器針對16個類別之每一者取得補償值,藉由將SAO輸入資料比較與來源資料。這些補償被傳送至解碼器。針對已解碼像素之類別的補償被加至其值以將其與來源之偏移最小化。
此外,SAO被致能或除能於圖形等級;假如針對亮度而致能,其亦可針對各色度頻道而被分離地致能。SAO因此將被應用於色度僅於其被應用於亮度的話。
因此,此程序對於重要的區塊技術是極透明的且預期應用於4:2:0技術之當前SAO亦應可應用於4:2:2及4:4:4技術。
調適迴路過濾
於4:2:0技術中,調適迴路過濾(ALF)是預設為除能的。然而,理論上(亦即,假如容許的話)則ALF將被應用於色度之整個圖形。
於ALF中,亮度樣本可被分類為數個類別之一,如由HEVC文件所判定者;各類別係使用不同之威能(Wiener)為基的過濾器。
反之,於4:2:0中,色度樣本未被分類-僅有一個威能為基的過濾器用於Cb,及一個用於Cr。
因此,於本發明之一實施例中,由於4:2:2及4:4:4技術中之增加的色度資訊,提議其色度樣本被分類,例如K類別於4:2:2及J類別於4:4:4。
雖然於4:2:0技術中ALF可使用ALF控制旗標而針對亮度被除能以每CU之基礎(向下至其由ALF控制深度所指明的CU等級),但其僅可針對色度被除能以每圖形之基礎。注意:於HEVC中,此深度目前被限制僅於LCU等級。
因此,於本發明之一實施例中,4:2:2及4:4:4技術被提供以針對色度之一或二頻道特定的ALF控制旗標。
語法
於HEVC中,語法已提出以指示4:2:0、4:2:2或4:4:4技術,且被指示於序列等級。然而,於本發明之一實施例中,提議亦指示4:4:4 GBR編碼於此等級。
資料信號
應理解其由以上討論之編碼設備的變異所產生之資料信號(及攜載此類信號之儲存或傳輸媒體)被視為代表本發明之實施例。
本技術之至少實施例的各種個別形態及特徵係由下列編號的條款所界定:
1.一種視頻編碼或解碼方法,其中4:4:4格式或4:2:2格式中之照度及色彩樣本係依據一與待預測樣本之區塊關聯的預測方向而被預測自其他個別參考樣本;此方法包含:檢測關於當前待預測區塊之預測方向;依據由該預測方向所界定之其他色彩樣本以產生色彩樣本之一預測區塊;假如該檢測的預測方向為實質上垂直的,則過濾色彩樣本之該預測區塊中的左邊行樣本,或假如該檢測的預測方向為實質上水平的,則過濾色彩樣本之該預測區塊中的頂部列樣本;及 將介於該已過濾的預測色彩區塊與實際色彩區塊之間的差異編碼或者將已解碼差異應用於該已過濾的預測色彩區塊以個別地編碼或解碼該區塊。
2.依據條款1之方法,其中,於其該檢測的預測方向為實質上垂直的情況下,該過濾步驟包含使用水平定向的過濾器以過濾該些左邊行樣本。
3.依據條款2之方法,其中該過濾步驟包含僅過濾該些左邊行樣本。
4.依據條款1之方法,其中,於其該檢測的預測方向為實質上水平的情況下,該過濾步驟包含使用垂直定向的過濾器以過濾該些頂部列樣本。
5.依據條款4之方法,其中該過濾步驟包含僅過濾該些頂部列樣本。
6.依據上述條款之任一者的方法,包含下列步驟:指示照度差異資料是否將被無損地包括於一輸出位元流中;及獨立地指示色彩差異資料是否將被無損地包括於該位元流中。
7.依據上述條款之任一者的方法,其中:該些照度及色彩樣本為4:4:4格式且被配置為各包含照度及色彩樣本之區塊的複數編碼單元;及該檢測步驟組態成檢測關於當前預測單元之預測方向,其為代表個別編碼單元之至少一子集的照度或色彩樣本之區塊。
8.依據條款7之方法,包含下列步驟:針對特定編碼單元選擇一或更多各包含來自該編碼單元之照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的。
9.一種視頻編碼或解碼方法,其中照度及色彩樣本被預測且介於該些樣本與個別預測的樣本之間的差異被編碼,該方法包含下列步驟:指示照度差異資料是否將被無損地包括於一輸出位元流中;及獨立地指示色彩差異資料是否將被無損地包括於該位元流中。
10.一種視頻編碼或解碼方法,其中4:4:4格式中之照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該方法包含:針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的;檢測關於各預測單元之預測方向;及依據由該預測方向所界定之其他色彩樣本以產生樣本之一預測區塊。
11.一種電腦軟體,當由電腦執行時該電腦軟體係致使該電腦履行依據上述條款之任一者的方法。
12.一種機器可讀式非暫態儲存媒體,其係儲存依據條款11之軟體。
13.一種資料信號,其包含依據條款1至10之任一者的方法所產生之編碼資料。
14.一種視頻編碼或解碼設備,其中4:4:4格式或4:2:2格式中之照度及色彩樣本係依據一與待預測樣本之區塊關聯的預測方向而被預測自其他個別參考樣本;此設備包含:檢測器,組態成檢測關於當前待預測區塊之預測方向;產生器,組態成依據由該預測方向所界定之其他色彩樣本以產生色彩樣本之一預測區塊;過濾器,組態成以致假如該檢測的預測方向為實質上垂直的,則該過濾器被配置以過濾色彩樣本之該預測區塊中的左邊行樣本,或假如該檢測的預測方向為實質上水平的,則該過濾器被配置以過濾色彩樣本之該預測區塊中的頂部列樣本;及編碼器,組態成將介於該已過濾的預測色彩區塊與實際色彩區塊之間的差異編碼或者將已解碼差異應用於該已過濾的預測色彩區塊以個別地編碼或解碼該區塊。
15.一種視頻編碼或解碼設備,其中照度及色彩樣本被預測且介於該些樣本與個別預測的樣本之間的差異被編碼,該設備包含:指示器,組態成指示照度差異資料是否將被無損地包 括於一輸出位元流中;及獨立地指示色彩差異資料是否將被無損地包括於該位元流中。
16.一種視頻編碼或解碼設備,其中4:4:4格式中之照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該方法包含:選擇器,組態成針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的;檢測器,組態成檢測關於各預測單元之預測方向;及產生器,組態成依據由該預測方向所界定之其他色彩樣本以產生樣本之一預測區塊。
在本發明之實施例已被描述為(至少部分地)由軟體控制的資料處理設備所實施的範圍內,應理解其攜載此類軟體(諸如光碟、磁碟、半導體記憶體等)亦被視為代表本發明之實施例。
很清楚的本發明之各種修改及變異根據上述教導是可能的。因此應瞭解在後附申請專利範圍之範圍內,此技術可被實行以如文中所明確描述者之外的方式。
1210‧‧‧陰影區域

Claims (20)

  1. 一種視頻解碼方法,其中照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該方法包含:針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,以使該預測單元尺寸及形狀針對照度樣本和針對色彩樣本是相同的;檢測關於各預測單元之預測方向;過濾樣本之該預測區塊中的該些左邊行樣本和樣本之該預測區塊中的該些頂部列樣本之一或兩者,其中該些照度樣本代表照度成分而個別的色彩樣本代表兩個色彩成分,且該過濾步驟被應用於三個成分之一子集,該子集為該三個成分之一者或兩者;及依據由該預測方向所界定之其他樣本以產生樣本之一預測區塊。
  2. 如申請專利範圍第1項之方法,該方法包含:假如該檢測的預測方向為實質上垂直的,以使該檢測預測方向於完全垂直模式的+/-2角度模式內,則過濾色彩樣本之該預測區塊中的左邊行樣本;或假如該檢測的預測方向為實質上水平的,以使該檢測預測方向於完全水平模式的+/-2角度模式內,則過濾色彩樣本之該預測區塊中的頂部列樣本;及將已解碼差異應用於該已過濾的預測色彩區塊以解碼 該區塊。
  3. 如申請專利範圍第2項之方法,其中,於該檢測的預測方向為實質上垂直的情況下,該過濾步驟包含使用水平定向的過濾器以過濾該些左邊行樣本。
  4. 如申請專利範圍第3項之方法,其中該過濾步驟包含僅過濾該些左邊行樣本。
  5. 如申請專利範圍第2項之方法,其中,於該檢測的預測方向為實質上水平的情況下,該過濾步驟包含使用垂直定向的過濾器以過濾該些頂部列樣本。
  6. 如申請專利範圍第5項之方法,其中該過濾步驟包含僅過濾該些頂部列樣本。
  7. 如申請專利範圍第1項之方法,其中,於其中預測樣本被產生為周圍樣本之簡單算術平均值的DC模式中,該過濾步驟包含:過濾樣本之該預測區塊中的該些左邊行樣本並過濾樣本之該預測區塊中的該些頂部列樣本。
  8. 如申請專利範圍第1項之方法,其中該子集由該照度成分所組成。
  9. 如申請專利範圍第1至8項之任一項的方法,包含下列步驟:指示照度差異資料是否將被無損地包括於輸出位元流中;及獨立地指示色彩差異資料是否將被無損地包括於該位元流中。
  10. 一種視頻編碼方法,其中照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該方法包含:針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的;檢測關於各預測單元之預測方向;過濾樣本之該預測區塊中的該些左邊行樣本和樣本之該預測區塊中的該些頂部列樣本之一或兩者,其中該些照度樣本代表照度成分而個別的色彩樣本代表兩個色彩成分,且該過濾步驟被應用於三個成分之一子集,該子集為該三個成分之一者或兩者;及依據由該預測方向所界定之其他樣本以產生樣本之一預測區塊。
  11. 如申請專利範圍第10項之方法,該方法包含:假如該檢測的預測方向為實質上垂直的,則過濾色彩樣本之該預測區塊中的左邊行樣本;或假如該檢測的預測方向為實質上水平的,則過濾色彩樣本之該預測區塊中的頂部列樣本;及將介於該已過濾的預測色彩區塊與實際色彩區塊之間的差異編碼。
  12. 如申請專利範圍第10項之方法,其中該子集由該照度成分所組成。
  13. 一種電腦軟體,當由電腦執行時該電腦軟體係致使該電腦履行依據申請專利範圍第1至12項之任一項的方法。
  14. 一種機器可讀式非暫態儲存媒體,其係儲存依據申請專利範圍第13項之軟體。
  15. 一種資料儲存媒體,其上具有依據申請專利範圍第1至12項之任一項的方法所產生之編碼資料。
  16. 一種視頻編碼設備,其中照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該設備包含:選擇器,組態成針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的;檢測器,組態成檢測關於各預測單元之預測方向;過濾器,組態成過濾樣本之該預測區塊中的該些左邊行樣本和樣本之該預測區塊中的該些頂部列樣本之一或兩者,其中該些照度樣本代表照度成分而個別的色彩樣本代表兩個色彩成分,且該過濾步驟被應用於三個成分之一子集,該子集為該三個成分之一者或兩者;及產生器,組態成依據由該預測方向所界定之其他樣本以產生樣本之一預測區塊。
  17. 如申請專利範圍第16項之設備,其中該子集由該照度成分所組成。
  18. 一種視頻解碼設備,其中照度及色彩樣本被配置為各包含照度及色彩樣本之區塊的複數編碼單元,該設備包含:選擇器,組態成針對特定編碼單元選擇一或更多各包含來自該編碼單元之至少一子集的照度及色彩樣本的預測單元之尺寸及形狀,該預測單元尺寸及形狀之選擇針對照度樣本和針對色彩樣本是相同的;檢測器,組態成檢測關於各預測單元之預測方向;過濾器,組態成過濾樣本之該預測區塊中的該些左邊行樣本和樣本之該預測區塊中的該些頂部列樣本之一或兩者,其中該些照度樣本代表照度成分而個別的色彩樣本代表兩個色彩成分,且該過濾步驟被應用於三個成分之一子集,該子集為該三個成分之一者或兩者;及產生器,組態成依據由該預測方向所界定之其他樣本以產生樣本之一預測區塊。
  19. 如申請專利範圍第18項之設備,其中該子集由該照度成分所組成。
  20. 一種視頻儲存、擷取、傳輸或接收設備,其包含依據申請專利範圍第16或18項之設備。
TW102114850A 2012-04-26 2013-04-25 資料編碼及解碼 TWI586152B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1207459.7A GB2501535A (en) 2012-04-26 2012-04-26 Chrominance Processing in High Efficiency Video Codecs
GB1211067.2A GB2501547A (en) 2012-04-26 2012-06-22 Filtering Predicted Chrominance Samples When Encoding 4:2:2 Format Video Using HEVC
GB1220836.9A GB2501566A (en) 2012-04-26 2012-11-19 Filtering Predicted Chrominance Samples When Encoding 4:2:2 Format Video Using HEVC

Publications (2)

Publication Number Publication Date
TW201408079A TW201408079A (zh) 2014-02-16
TWI586152B true TWI586152B (zh) 2017-06-01

Family

ID=46330504

Family Applications (5)

Application Number Title Priority Date Filing Date
TW102114851A TWI575942B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW108118597A TWI711301B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備
TW102114850A TWI586152B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW106131037A TWI677236B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備
TW102114853A TWI611689B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備

Family Applications Before (2)

Application Number Title Priority Date Filing Date
TW102114851A TWI575942B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW108118597A TWI711301B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備

Family Applications After (2)

Application Number Title Priority Date Filing Date
TW106131037A TWI677236B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備
TW102114853A TWI611689B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及/或儲存設備

Country Status (13)

Country Link
US (20) US9948929B2 (zh)
EP (8) EP2842321A2 (zh)
JP (11) JP2015518339A (zh)
KR (6) KR102104400B1 (zh)
CN (14) CN104285445A (zh)
AU (5) AU2013254448B2 (zh)
BR (3) BR112014026035B1 (zh)
CA (6) CA2871556C (zh)
GB (13) GB2501535A (zh)
MX (3) MX343351B (zh)
RU (4) RU2751080C2 (zh)
TW (5) TWI575942B (zh)
WO (9) WO2013160656A2 (zh)

Families Citing this family (212)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5688136B2 (ja) * 2010-04-23 2015-03-25 エム アンド ケー ホールディングス インコーポレイテッド 映像を符号化する装置及び方法
CN103283237B (zh) * 2010-12-22 2017-03-22 Lg电子株式会社 帧内预测方法和使用该方法的设备
US10645398B2 (en) * 2011-10-25 2020-05-05 Texas Instruments Incorporated Sample-based angular intra-prediction in video coding
CN103918265B (zh) 2011-11-07 2018-09-18 英特尔公司 跨通道残余预测
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9591302B2 (en) * 2012-07-02 2017-03-07 Microsoft Technology Licensing, Llc Use of chroma quantization parameter offsets in deblocking
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
AU2012232992A1 (en) 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US9667994B2 (en) * 2012-10-01 2017-05-30 Qualcomm Incorporated Intra-coding for 4:2:2 sample format in video coding
CN104782125B (zh) * 2012-11-08 2019-03-15 佳能株式会社 对编码单位的变换单位编码和解码的方法、设备和系统
US9743091B2 (en) 2012-12-17 2017-08-22 Lg Electronics Inc. Method for encoding/decoding image, and device using same
JP6005572B2 (ja) * 2013-03-28 2016-10-12 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
CN109379600B (zh) 2013-03-29 2023-04-11 Jvc 建伍株式会社 图像解码装置以及图像解码方法
AU2013202653A1 (en) * 2013-04-05 2014-10-23 Canon Kabushiki Kaisha Method, apparatus and system for generating intra-predicted samples
GB2513110A (en) 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
GB2513111A (en) 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
EP2984837B1 (en) * 2013-04-08 2018-01-17 GE Video Compression, LLC Inter-component prediction
US9961358B2 (en) 2013-04-09 2018-05-01 Mediatek Singapore Pte. Ltd. Method and apparatus for non-square intra mode coding
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
CN105474639B (zh) * 2013-07-10 2018-08-07 凯迪迪爱通信技术有限公司 视频编码装置、视频解码装置、视频系统、视频编码方法、视频解码方法以及程序
CA2917419C (en) * 2013-07-24 2020-07-14 Microsoft Technology Licensing, Llc Scanning orders for non-transform coding
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
US9813737B2 (en) * 2013-09-19 2017-11-07 Blackberry Limited Transposing a block of transform coefficients, based upon an intra-prediction mode
KR101530774B1 (ko) * 2013-09-30 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
CN105659602B (zh) 2013-10-14 2019-10-08 微软技术许可有限责任公司 用于视频和图像编码的帧内块复制预测模式的编码器侧选项
RU2654129C2 (ru) 2013-10-14 2018-05-16 МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи Функциональные возможности режима внутреннего предсказания с блочным копированием для кодирования и декодирования видео и изображений
WO2015054812A1 (en) 2013-10-14 2015-04-23 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
KR101530782B1 (ko) 2013-12-03 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
MX364028B (es) * 2013-12-27 2019-04-11 Sony Corp Aparato y metodo de procesamiento de imagenes.
US10469863B2 (en) 2014-01-03 2019-11-05 Microsoft Technology Licensing, Llc Block vector prediction in video and image coding/decoding
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US10368097B2 (en) * 2014-01-07 2019-07-30 Nokia Technologies Oy Apparatus, a method and a computer program product for coding and decoding chroma components of texture pictures for sample prediction of depth pictures
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
JP5897159B2 (ja) 2014-02-25 2016-03-30 キヤノン株式会社 表示装置及びその制御方法
EP3334159A1 (en) 2014-03-03 2018-06-13 Sony Corporation Strong intra smoothing for in rext 4:4:4 and 32x32
EP3253059A1 (en) 2014-03-04 2017-12-06 Microsoft Technology Licensing, LLC Block flipping and skip mode in intra block copy prediction
JP6731574B2 (ja) * 2014-03-06 2020-07-29 パナソニックIpマネジメント株式会社 動画像符号化装置および動画像符号化方法
WO2015182342A1 (ja) * 2014-05-26 2015-12-03 シャープ株式会社 画像復号装置、および、画像符号化装置
US10715833B2 (en) * 2014-05-28 2020-07-14 Apple Inc. Adaptive syntax grouping and compression in video data using a default value and an exception value
US10142642B2 (en) 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
CN105493505B (zh) 2014-06-19 2019-08-06 微软技术许可有限责任公司 统一的帧内块复制和帧间预测模式
CN106664416B (zh) * 2014-07-06 2019-11-05 Lg电子株式会社 处理视频信号的方法及其装置
AU2014408228B2 (en) 2014-09-30 2019-09-19 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled
GB2532420A (en) 2014-11-18 2016-05-25 Sony Corp Data encoding and decoding
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
EP3051818A1 (en) 2015-01-30 2016-08-03 Thomson Licensing Method and device for decoding a color picture
US10057587B2 (en) * 2015-01-31 2018-08-21 Qualcomm Incorporated Coding escape pixels for palette mode coding
WO2016124158A1 (en) * 2015-02-05 2016-08-11 Mediatek Inc. Methods and apparatus of decoding process for palette syntax
US10462461B2 (en) 2015-02-27 2019-10-29 Kddi Corporation Coding device and decoding device which allow encoding of non-square blocks
US10291932B2 (en) * 2015-03-06 2019-05-14 Qualcomm Incorporated Method and apparatus for low complexity quarter pel generation in motion search
WO2016145162A2 (en) * 2015-03-12 2016-09-15 NGCodec Inc. Intra-picture prediction processor with progressive block size computations and dual stage computations
CN107409208B (zh) * 2015-03-27 2021-04-20 索尼公司 图像处理装置、图像处理方法以及计算机可读存储介质
JP6593934B2 (ja) * 2015-05-21 2019-10-23 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 映像動き補償のための装置および方法
TWI816224B (zh) * 2015-06-08 2023-09-21 美商Vid衡器股份有限公司 視訊解碼或編碼方法及裝置
US10659783B2 (en) 2015-06-09 2020-05-19 Microsoft Technology Licensing, Llc Robust encoding/decoding of escape-coded pixels in palette mode
FR3038484B1 (fr) * 2015-07-01 2017-07-28 Ateme Procede d'encodage d'image et equipement pour la mise en oeuvre du procede
CN108353185B (zh) * 2015-08-28 2022-09-13 株式会社Kt 用于处理视频信号的方法和设备
WO2017043786A1 (ko) * 2015-09-10 2017-03-16 엘지전자 주식회사 비디오 코딩 시스템에서 인트라 예측 방법 및 장치
WO2017041271A1 (en) * 2015-09-10 2017-03-16 Mediatek Singapore Pte. Ltd. Efficient context modeling for coding a block of data
WO2017073362A1 (ja) * 2015-10-30 2017-05-04 ソニー株式会社 画像処理装置および方法
BR112018010207A2 (pt) 2015-11-18 2018-11-21 Mediatek Inc método e aparelho para o modo de predição intra usando filtro de predição intra em compressão de vídeo e imagem
US10194170B2 (en) * 2015-11-20 2019-01-29 Mediatek Inc. Method and apparatus for video coding using filter coefficients determined based on pixel projection phase
KR20180075660A (ko) * 2015-11-24 2018-07-04 삼성전자주식회사 비디오 복호화 방법 및 그 장치 및 비디오 부호화 방법 및 그 장치
US20170150186A1 (en) * 2015-11-25 2017-05-25 Qualcomm Incorporated Flexible transform tree structure in video coding
CA3014259A1 (en) * 2016-02-12 2017-08-17 Thomson Licensing A method and device for intra-predictive encoding/decoding a coding unit comprising picture data, said intra-predictive encoding depending on a prediction tree and a transform tree
RU2706228C1 (ru) 2016-02-12 2019-11-15 Хуавей Текнолоджиз Ко., Лтд. Способ и устройство выбора порядка сканирования
EP3412028B1 (en) 2016-02-12 2024-04-03 Huawei Technologies Co., Ltd. Method and apparatus for scan order selection
EP3220643A1 (en) * 2016-03-14 2017-09-20 Thomson Licensing Method and device for encoding at least one image unit, and method and device for decoding a stream representative of at least one image unit
US10455228B2 (en) * 2016-03-21 2019-10-22 Qualcomm Incorporated Determining prediction parameters for non-square blocks in video coding
US20170332103A1 (en) * 2016-05-13 2017-11-16 Intel Corporation Interleaving luma and chroma coefficients to reduce the intra prediction loop dependency in video encoders and decoders
CA3025334C (en) * 2016-05-25 2021-07-13 Arris Enterprises Llc Binary ternary quad tree partitioning for jvet coding of video data
US11039175B2 (en) * 2016-05-27 2021-06-15 Sharp Kabushiki Kaisha Systems and methods for varying quantization parameters
US11039147B2 (en) 2016-05-28 2021-06-15 Mediatek Inc. Method and apparatus of palette mode coding for colour video data
ES2935261T3 (es) * 2016-05-28 2023-03-03 Hfi Innovation Inc Método y aparato de codificación de modo de paleta para datos de video de color
CN114222137A (zh) * 2016-05-28 2022-03-22 世宗大学校产学协力团 构成预测运动矢量列表的方法
US10687003B2 (en) 2016-08-04 2020-06-16 Omnivision Technologies, Inc. Linear-logarithmic image sensor
US10326986B2 (en) 2016-08-15 2019-06-18 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10368107B2 (en) 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10652575B2 (en) * 2016-09-15 2020-05-12 Qualcomm Incorporated Linear model chroma intra prediction for video coding
CN116389728A (zh) * 2016-09-20 2023-07-04 株式会社Kt 对视频进行解码和编码的方法以及传输方法
EP3509298A4 (en) * 2016-09-30 2020-07-22 LG Electronics Inc. -1- METHOD AND DEVICE FOR BLOCK PARTITIONING AND INTRAPREDICATION IN AN IMAGE CODING SYSTEM
US10506228B2 (en) * 2016-10-04 2019-12-10 Qualcomm Incorporated Variable number of intra modes for video coding
US10341659B2 (en) * 2016-10-05 2019-07-02 Qualcomm Incorporated Systems and methods of switching interpolation filters
CN117041574A (zh) 2016-10-28 2023-11-10 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
US20190342545A1 (en) * 2016-10-28 2019-11-07 Lg Electronics Inc. Intra-prediction mode-based image processing method and apparatus for same
US10192295B2 (en) * 2016-11-09 2019-01-29 AI Analysis, Inc. Methods and systems for normalizing images
US10666937B2 (en) * 2016-12-21 2020-05-26 Qualcomm Incorporated Low-complexity sign prediction for video coding
KR102327944B1 (ko) * 2016-12-23 2021-11-17 후아웨이 테크놀러지 컴퍼니 리미티드 미리 결정된 방향성 인트라 예측 모드들의 세트로부터 방향성 인트라 예측 모드를 제거하기 위한 인트라 예측 장치
CN110115035B (zh) * 2016-12-23 2022-12-06 华为技术有限公司 一种用于通知定向帧内预测模式集合中的扩展定向帧内预测模式的编码装置
WO2018117892A1 (en) * 2016-12-23 2018-06-28 Huawei Technologies Co., Ltd. An intra-prediction apparatus for extending a set of predetermined directional intra-prediction modes
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
KR20230124092A (ko) * 2017-03-31 2023-08-24 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법및 화상 복호 방법
KR102257829B1 (ko) * 2017-04-13 2021-05-28 엘지전자 주식회사 영상의 부호화/복호화 방법 및 이를 위한 장치
CN114501005A (zh) * 2017-04-28 2022-05-13 夏普株式会社 图像解码装置以及图像编码装置
CN108989820B (zh) * 2017-06-03 2022-07-05 上海天荷电子信息有限公司 各阶段采用各自相应色度采样格式的数据压缩方法和装置
RU2759218C2 (ru) * 2017-06-21 2021-11-11 Вид Скейл, Инк. Адаптивное квантование для кодирования 360-градусного видео
CN117336509A (zh) * 2017-07-06 2024-01-02 Lx 半导体科技有限公司 图像编码/解码方法、发送方法和数字存储介质
US10567772B2 (en) * 2017-07-11 2020-02-18 Google Llc Sub8×8 block processing
CN109274969B (zh) * 2017-07-17 2020-12-22 华为技术有限公司 色度预测的方法和设备
CN115442606A (zh) * 2017-07-31 2022-12-06 韩国电子通信研究院 对图像编码和解码的方法及存储比特流的计算机可读介质
CN107483934B (zh) * 2017-08-17 2019-12-10 西安万像电子科技有限公司 编解码方法、装置和系统
JP2021005741A (ja) * 2017-09-14 2021-01-14 シャープ株式会社 画像符号化装置及び画像復号装置
RU2669874C1 (ru) * 2017-09-15 2018-10-16 Федеральное государственное унитарное предприятие "Государственный научно-исследовательский институт авиационных систем" (ФГУП "ГосНИИАС") Способы и устройство сжатия изображений. Способ и устройство восстановления изображений
CN117201779A (zh) * 2017-09-21 2023-12-08 株式会社Kt 视频信号处理方法及装置
US11166013B2 (en) 2017-10-09 2021-11-02 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
US10812798B2 (en) * 2017-10-19 2020-10-20 Qualcomm Incorporated Chroma quantization parameter (QP) offset
US10368071B2 (en) * 2017-11-03 2019-07-30 Arm Limited Encoding data arrays
EP3490253A1 (en) * 2017-11-23 2019-05-29 Thomson Licensing Encoding and decoding methods and corresponding devices
CN108063947B (zh) * 2017-12-14 2021-07-13 西北工业大学 一种基于像素纹理的无损参考帧压缩方法
US10986349B2 (en) 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
CN111602393B (zh) * 2018-01-15 2022-10-21 三星电子株式会社 编码方法及其设备以及解码方法及其设备
GB2570711B (en) * 2018-02-05 2023-04-05 Sony Corp Data encoding and decoding
US10922783B2 (en) 2018-03-02 2021-02-16 Mediatek Inc. Cube-based projection method that applies different mapping functions to different square projection faces, different axes, and/or different locations of axis
US11069026B2 (en) 2018-03-02 2021-07-20 Mediatek Inc. Method for processing projection-based frame that includes projection faces packed in cube-based projection layout with padding
EP3764645A4 (en) 2018-03-09 2021-12-08 Electronics and Telecommunications Research Institute METHOD AND APPARATUS FOR IMAGE CODING / DECODING USING SAMPLE FILTER
JP6982525B2 (ja) * 2018-03-16 2021-12-17 Kddi株式会社 動画像の符号化装置および方法、復号装置および方法ならびに符号化復号システム
JP2021523586A (ja) 2018-03-25 2021-09-02 ビー1、インスティテュート、オブ、イメージ、テクノロジー、インコーポレイテッドB1 Institute Of Image Technology, Inc. 映像符号化/復号化方法及び装置
WO2019188467A1 (ja) * 2018-03-30 2019-10-03 ソニー株式会社 画像処理装置および方法
EP3688986B1 (en) * 2018-04-01 2021-10-27 LG Electronics Inc. An image coding method based on a quantization parameter derivation
EP3777172A4 (en) 2018-04-02 2022-01-19 Sharp Kabushiki Kaisha SYSTEMS AND METHODS FOR DRIVING QUANTIFICATION PARAMETERS FOR VIDEO BLOCKS DURING VIDEO CODING
US11259023B2 (en) * 2018-04-12 2022-02-22 Qualcomm Incorporated Harmonization of transform-based quantization and dynamic range adjustment scale derivation in video coding
CN112042190B (zh) * 2018-04-24 2024-01-23 三星电子株式会社 视频编码方法和装置以及视频解码方法和装置
US10949087B2 (en) 2018-05-15 2021-03-16 Samsung Electronics Co., Ltd. Method for rapid reference object storage format for chroma subsampled images
US11449256B2 (en) 2018-05-15 2022-09-20 Samsung Electronics Co., Ltd. Method for accelerating image storing and retrieving differential latency storage devices based on access rates
WO2019234613A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Partition tree with partition into 3 sub-blocks by horizontal and vertical splits
KR20210015963A (ko) * 2018-06-29 2021-02-10 후아웨이 테크놀러지 컴퍼니 리미티드 인트라-예측을 위한 디바이스 및 방법
US10284844B1 (en) 2018-07-02 2019-05-07 Tencent America LLC Method and apparatus for video coding
US10382772B1 (en) 2018-07-02 2019-08-13 Tencent America LLC Method and apparatus for video coding
US11509932B2 (en) 2018-07-11 2022-11-22 Intellectual Discovery Co., Ltd. Intra-frame prediction-based video coding method and device
US11265579B2 (en) * 2018-08-01 2022-03-01 Comcast Cable Communications, Llc Systems, methods, and apparatuses for video processing
CN116132668A (zh) * 2018-08-09 2023-05-16 Oppo广东移动通信有限公司 视频图像分量的预测方法和装置、及计算机存储介质
CN112567743A (zh) * 2018-08-15 2021-03-26 日本放送协会 图像编码装置、图像解码装置及程序
CN112771865A (zh) * 2018-08-23 2021-05-07 交互数字Vc控股法国公司 使用参数化模型对量化矩阵进行编解码
CN110876061B (zh) * 2018-09-03 2022-10-11 华为技术有限公司 色度块预测方法及装置
CN112740685B (zh) 2018-09-19 2024-06-07 韩国电子通信研究院 图像编码/解码方法和装置以及存储有比特流的记录介质
WO2020060077A1 (ko) * 2018-09-20 2020-03-26 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US10469845B1 (en) * 2018-09-21 2019-11-05 Tencent America, Llc Method and apparatus for intra mode coding
WO2020060449A1 (en) * 2018-09-23 2020-03-26 Huawei Technologies Co., Ltd. Method and apparatus for intra reference sample interpolation filter switching
US11303904B2 (en) * 2018-09-28 2022-04-12 Qualcomm Incorporated Rectangular block transform scaling
EP3854087A4 (en) * 2018-10-09 2022-07-06 HFI Innovation Inc. METHOD AND APPARATUS FOR CODING OR DECODING USING REFERENCE SAMPLES DETERMINED BY PREDEFINED CRITERIA
US11140404B2 (en) * 2018-10-11 2021-10-05 Tencent America LLC Method and apparatus for video coding
CN112889277A (zh) * 2018-10-22 2021-06-01 松下电器(美国)知识产权公司 编码装置、解码装置、编码方法和解码方法
WO2020085955A1 (en) * 2018-10-26 2020-04-30 Huawei Technologies Co., Ltd. Method and apparatus for reference sample filtering
CN113039791B (zh) 2018-11-06 2024-02-23 北京字节跳动网络技术有限公司 帧内预测的参数推导中的复杂度降低
WO2020094153A1 (en) * 2018-11-09 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Component based loop filter
WO2020098786A1 (en) * 2018-11-16 2020-05-22 Mediatek Inc. Method and apparatus of luma-chroma separated coding tree coding with constraints
US11438583B2 (en) * 2018-11-27 2022-09-06 Tencent America LLC Reference sample filter selection in intra prediction
KR20210084567A (ko) 2018-11-28 2021-07-07 주식회사 윌러스표준기술연구소 화면 내 예측 필터링을 이용한 비디오 신호 처리 방법 및 장치
CN113170122B (zh) 2018-12-01 2023-06-27 北京字节跳动网络技术有限公司 帧内预测的参数推导
EP3893507A4 (en) * 2018-12-07 2022-09-21 Sharp Kabushiki Kaisha PREDICTIVE PICTURE GENERATING DEVICE, MOVING PICTURE DECODING DEVICE, MOVING PICTURE CODING DEVICE AND PREDICTIVE PICTURE GENERATING METHOD
CN116962710A (zh) 2018-12-15 2023-10-27 华为技术有限公司 图像重建方法和装置
JP2020098984A (ja) * 2018-12-17 2020-06-25 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
HUE065272T2 (hu) * 2018-12-21 2024-05-28 Beijing Dajia Internet Information Eljárás és berendezés video kódolásnál affine mozgásvektorok származtatására színkomponensekhez
EP3895423A4 (en) 2018-12-23 2022-06-22 Huawei Technologies Co., Ltd. ENCODER, DECODER AND RELATED METHODS USING AN ADAPTIVE LOOP FILTER
BR112021016925A2 (pt) 2019-02-27 2021-11-03 Huawei Tech Co Ltd Codificador, decodificador e métodos correspondentes
US20200288130A1 (en) * 2019-03-07 2020-09-10 Qualcomm Incorporated Simplification of sub-block transforms in video coding
CN117956147A (zh) * 2019-03-08 2024-04-30 佳能株式会社 自适应环路滤波器
KR102639936B1 (ko) 2019-03-08 2024-02-22 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 처리에서 모델-기반 변형에 대한 제약들
CN114143548B (zh) 2019-03-11 2023-02-14 北京达佳互联信息技术有限公司 视频编解码中变换系数的编解码
AU2019201653A1 (en) * 2019-03-11 2020-10-01 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a tree of blocks of video samples
CA3122752A1 (en) * 2019-03-24 2020-10-01 Huawei Technologies Co., Ltd. Method and apparatus for chroma intra prediction in video coding
CN116320472A (zh) * 2019-03-25 2023-06-23 Oppo广东移动通信有限公司 图像预测方法、编码器、解码器以及存储介质
CN113785588B (zh) 2019-04-12 2023-11-24 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的色度编解码模式确定
CN118200567A (zh) 2019-04-16 2024-06-14 Lg电子株式会社 图像解码和编码方法、数据的发送方法及存储介质
CN113767623B (zh) * 2019-04-16 2024-04-02 北京字节跳动网络技术有限公司 用于视频编解码的自适应环路滤波
US10764507B1 (en) 2019-04-18 2020-09-01 Kneron (Taiwan) Co., Ltd. Image processing system capable of generating a snapshot image with high image quality by using a zero-shutter-lag snapshot operation
CA3135968C (en) * 2019-04-18 2024-05-14 Beijing Bytedance Network Technology Co., Ltd. Restriction on applicability of cross component mode
JP7317991B2 (ja) 2019-04-23 2023-07-31 北京字節跳動網絡技術有限公司 クロスコンポーネント依存性を低減するための方法
BR112021000379A2 (pt) * 2019-04-26 2021-04-13 Huawei Technologies Co., Ltd. Método e aparelho para sinalização de função de mapeamento de parâmetro de quantização de croma
KR20210148321A (ko) * 2019-04-27 2021-12-07 주식회사 윌러스표준기술연구소 인트라 예측 기반 비디오 신호 처리 방법 및 장치
CN110266316B (zh) * 2019-05-08 2023-02-21 创新先进技术有限公司 一种数据压缩、解压方法、装置和设备
WO2020228718A1 (en) * 2019-05-13 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Interaction between transform skip mode and other coding tools
JP7265040B2 (ja) 2019-05-13 2023-04-25 北京字節跳動網絡技術有限公司 変換スキップ・モードのブロック寸法設定
CN113841397A (zh) * 2019-05-15 2021-12-24 现代自动车株式会社 影像编码和解码方法及装置
CN117354528A (zh) 2019-05-22 2024-01-05 北京字节跳动网络技术有限公司 基于子块使用变换跳过模式
WO2020239017A1 (en) 2019-05-31 2020-12-03 Beijing Bytedance Network Technology Co., Ltd. One-step downsampling process in matrix-based intra prediction
CN113950836B (zh) * 2019-06-05 2024-01-12 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的上下文确定
US11212545B2 (en) 2019-06-07 2021-12-28 Tencent America LLC Method and apparatus for improved implicit transform selection
KR102594690B1 (ko) 2019-06-11 2023-10-26 엘지전자 주식회사 크로마 양자화 파라미터 데이터 기반 영상 디코딩 방법 및 그 장치
CN114208169A (zh) * 2019-06-11 2022-03-18 Lg电子株式会社 用于色度分量的图像解码方法及其装置
TW202106017A (zh) * 2019-06-21 2021-02-01 法商內數位Vc控股法國公司 用於視訊編碼及解碼的單一索引量化矩陣設計
JP7418478B2 (ja) 2019-06-22 2024-01-19 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのためのシンタックス要素
KR102452870B1 (ko) * 2019-06-25 2022-10-07 닛폰 호소 교카이 인트라 예측 장치, 화상 복호 장치, 및 프로그램
US11368693B2 (en) * 2019-07-01 2022-06-21 Sony Group Corporation Forward and inverse quantization for point cloud compression using look-up tables
CN116668699A (zh) * 2019-07-05 2023-08-29 Lg电子株式会社 图像编码/解码设备和图像数据的发送方法
CN117395396A (zh) 2019-07-07 2024-01-12 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
EP3994886A4 (en) 2019-08-06 2022-12-28 Beijing Bytedance Network Technology Co., Ltd. VIDEO ZONE PARTITION ACCORDING TO COLOR FORMAT
CN117395420A (zh) 2019-08-15 2024-01-12 字节跳动有限公司 用于调色板逸出符号的熵编解码
EP4000269A4 (en) 2019-08-15 2022-09-07 ByteDance Inc. PALLET MODE WITH DIFFERENT DIVISION STRUCTURES
WO2021040251A1 (en) * 2019-08-23 2021-03-04 Samsung Electronics Co., Ltd. Intra prediction method and device using the same, encoding and decoding method and device using the same based on intra prediction
EP4013058A4 (en) * 2019-08-27 2023-02-22 Hyundai Motor Company VIDEO ENCODING AND DECODING USING DIFFERENTIAL ENCODING
EP4008109A4 (en) 2019-09-02 2022-09-14 Beijing Bytedance Network Technology Co., Ltd. ENCODING MODE DETERMINATION BASED ON COLOR FORMAT
JP7321364B2 (ja) 2019-09-14 2023-08-04 バイトダンス インコーポレイテッド ビデオコーディングにおけるクロマ量子化パラメータ
JP7232160B2 (ja) * 2019-09-19 2023-03-02 Tvs Regza株式会社 画質回路、映像処理装置および信号特徴検出方法
CN114424545A (zh) * 2019-09-19 2022-04-29 字节跳动有限公司 用于调色板模式的量化参数推导
CN118055248A (zh) 2019-09-21 2024-05-17 北京字节跳动网络技术有限公司 处理视频数据的方法、装置以及计算机可读记录介质
EP4035384A4 (en) * 2019-09-23 2023-08-16 Alibaba Group Holding Limited MOTION COMPENSATION INTERPOLATION FILTER WITH REFERENCE DOWNSAMPLE
WO2021061018A1 (en) * 2019-09-24 2021-04-01 Huawei Technologies Co., Ltd. Method and apparatus of combined intra-inter prediction
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
JP7443509B2 (ja) 2019-10-14 2024-03-05 バイトダンス インコーポレイテッド ビデオコーディングにおけるクロマ量子化パラメータの使用
WO2021108676A1 (en) * 2019-11-27 2021-06-03 Beijing Dajia Internet Information Technology Co., Ltd Deblocking filtering for video coding
WO2021118977A1 (en) 2019-12-09 2021-06-17 Bytedance Inc. Using quantization groups in video coding
WO2021133236A1 (en) * 2019-12-24 2021-07-01 Telefonaktiebolaget Lm Ericsson (Publ) Virtual boundary processing for adaptive loop filtering
KR20230107417A (ko) * 2019-12-30 2023-07-14 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 비디오 데이터의 크로마 및 루마 성분의 교차 성분결정
CN114902657A (zh) 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
US11197001B2 (en) 2020-02-05 2021-12-07 Tencent America LLC Method and apparatus for interactions between decoder-side intra mode derivation and adaptive intra prediction modes
CN116193125A (zh) * 2020-04-30 2023-05-30 北京达佳互联信息技术有限公司 用于针对视频编解码的预测相关残差缩放的方法和设备
GB2599433A (en) * 2020-10-02 2022-04-06 Sony Group Corp Data encoding and decoding
TWI776294B (zh) * 2020-11-30 2022-09-01 中華電信股份有限公司 光框架交換機
CN113099229B (zh) * 2021-02-22 2022-08-09 浙江大华技术股份有限公司 块划分方法、帧间预测方法、视频编码方法及相关装置
WO2023131211A1 (en) * 2022-01-05 2023-07-13 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200824467A (en) * 2006-10-10 2008-06-01 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
TW200833124A (en) * 2006-11-30 2008-08-01 Lsi Corp Memory reduced H264/MPEG-4 AVC codec
TW200943967A (en) * 2007-12-10 2009-10-16 Qualcomm Inc Resource-adaptive video interpolation or extrapolation
CN101938657A (zh) * 2010-10-07 2011-01-05 西安电子科技大学 高效视频编码中编码单元自适应划分方法
US20120027083A1 (en) * 2009-04-03 2012-02-02 Matthias Narroschke Video coding method, video decoding method, video coding apparatus, and video decoding apparatus
CN102355579A (zh) * 2011-02-24 2012-02-15 中兴通讯股份有限公司 一种预测模式的编码或解码方法及装置
TW201208381A (en) * 2010-04-13 2012-02-16 Panasonic Corp Encoding distortion removal method, encoding method, decoding method, encoding distortion removal device, encoding device and decoding device
TW201215161A (en) * 2010-07-20 2012-04-01 Ntt Docomo Inc Image prediction encoding device, image prediction encoding method, image prediction encoding program, image prediction decoding device, image prediction decoding method, and image prediction decoding program

Family Cites Families (132)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4602285A (en) * 1983-04-08 1986-07-22 Ampex Corporation System and method for transforming and filtering a video image
GB9013217D0 (en) * 1990-06-13 1990-08-01 Indep Broadcasting Authority Evaluation of detail in video images,and applications thereof
US5294974A (en) * 1992-07-24 1994-03-15 Matsushita Electric Corporation Of America High-definition video encoding system having color-sensitive quantization
JPH07121687A (ja) * 1993-10-20 1995-05-12 Sony Corp 画像コーデック用プロセッサおよびアクセスパターン変換方法
KR100208375B1 (ko) * 1995-12-27 1999-07-15 윤종용 동화상 부호화 방법 및 장치
US5737023A (en) * 1996-02-05 1998-04-07 International Business Machines Corporation Hierarchical motion estimation for interlaced video
EP1835762A3 (en) * 1996-05-28 2007-10-03 Matsushita Electric Industrial Co., Ltd. decoding apparatus with intra prediction
FR2752474B1 (fr) 1996-08-14 1998-12-31 Iona Donescu Procede de transformation du signal image sur des supports de forme arbitraire
KR100442229B1 (ko) * 1996-09-13 2004-10-08 엘지전자 주식회사 간이형hdtv비디오디코더및디코딩방법
TW366648B (en) 1996-10-24 1999-08-11 Matsushita Electric Ind Co Ltd Method of supplementing pixel signal coding device, and pixel signal decoding device
WO1999016252A1 (en) * 1997-09-19 1999-04-01 Sony Electronics Inc. Motion compensated digital video decoding with buffered picture storage memory map
AR025609A1 (es) 1999-09-13 2002-12-04 Hoffmann La Roche Formulaciones lipidas solidas
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
US6788338B1 (en) * 2000-11-20 2004-09-07 Petko Dimitrov Dinev High resolution video camera apparatus having two image sensors and signal processing
JP4254147B2 (ja) * 2001-11-30 2009-04-15 ソニー株式会社 画像情報符号化方法及び装置、並びにプログラム及び記録媒体
EP1467569A4 (en) * 2002-01-18 2007-11-14 Toshiba Kk METHOD AND APPARATUS FOR ENCODING IMAGES IN MOTION, DECODING METHOD AND APPARATUS
CN100448285C (zh) 2002-12-18 2008-12-31 索尼株式会社 信息处理设备和信息处理方法
US8824553B2 (en) * 2003-05-12 2014-09-02 Google Inc. Video compression method
AU2003246127A1 (en) * 2003-06-06 2005-01-04 Mediatek Inc. Apparatus and method for format converting and mixing video signal
US7333544B2 (en) * 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
JP4617644B2 (ja) * 2003-07-18 2011-01-26 ソニー株式会社 符号化装置及び方法
US7193656B2 (en) * 2003-08-14 2007-03-20 Broadcom Corporation Line address computer for providing coefficients to a chroma filter
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7620106B2 (en) * 2003-09-07 2009-11-17 Microsoft Corporation Joint coding and decoding of a reference field selection and differential motion vector information
KR101136629B1 (ko) * 2004-01-30 2012-04-23 파나소닉 주식회사 화상 부호화 방법, 화상 복호화 방법, 화상 부호화 장치,화상 복호화 장치, 및 그 프로그램
KR100813958B1 (ko) 2004-06-07 2008-03-14 세종대학교산학협력단 동영상의 무손실 인코딩 및 디코딩 방법, 그 장치
JP4763422B2 (ja) * 2004-12-03 2011-08-31 パナソニック株式会社 イントラ予測装置
KR100843196B1 (ko) * 2004-12-17 2008-07-02 삼성전자주식회사 H.264/avc 비디오 디코더의 디블록킹 필터
KR101138392B1 (ko) * 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
CN101176087B (zh) 2005-03-23 2011-12-28 阿尔卡特朗讯公司 从网络节点实现对数字多媒体内容的播放列表搜索的系统和方法
CA2609648A1 (en) * 2005-04-29 2006-11-09 Samsung Electronics Co., Ltd. Video coding method and apparatus supporting fast fine granular scalability
WO2007027008A1 (en) * 2005-07-15 2007-03-08 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding image
CA2610276C (en) * 2005-07-22 2013-01-29 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US7933337B2 (en) * 2005-08-12 2011-04-26 Microsoft Corporation Prediction of transform coefficients for image compression
EP2733951A1 (en) 2005-10-21 2014-05-21 Electronics and Telecommunications Research Institute Method for decoding moving picture using adaptive scanning
CN101496406B (zh) * 2006-03-23 2012-02-01 三星电子株式会社 图像编码/解码方法和设备
US9001899B2 (en) 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
US20080170793A1 (en) 2007-01-12 2008-07-17 Mitsubishi Electric Corporation Image encoding device and image encoding method
JP2008193627A (ja) * 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
JP5026092B2 (ja) * 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
KR101539240B1 (ko) * 2007-06-14 2015-07-30 삼성전자주식회사 영상 데이터의 엔트로피 부호화, 복호화 방법 및 장치
US8488668B2 (en) * 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
JP2009004920A (ja) * 2007-06-19 2009-01-08 Panasonic Corp 画像符号化装置および画像符号化方法
US8345968B2 (en) * 2007-06-28 2013-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
US8265144B2 (en) * 2007-06-30 2012-09-11 Microsoft Corporation Innovations in video decoder implementations
WO2009035149A1 (ja) * 2007-09-12 2009-03-19 Sony Corporation 画像処理装置及び画像処理方法
JP2009081579A (ja) * 2007-09-25 2009-04-16 Toshiba Corp 動画像復号装置、および動画像復号方法
US8194741B2 (en) * 2007-10-12 2012-06-05 Broadcom Corporation Method and system for processing B pictures with missing or invalid forward reference pictures
JP2009206911A (ja) * 2008-02-28 2009-09-10 Mitsubishi Electric Corp 動画像変換装置
US8804831B2 (en) * 2008-04-10 2014-08-12 Qualcomm Incorporated Offsets at sub-pixel resolution
KR101493905B1 (ko) * 2008-08-12 2015-03-02 삼성전자 주식회사 영상처리장치 및 영상처리방법
EP2157799A1 (en) * 2008-08-18 2010-02-24 Panasonic Corporation Interpolation filter with local adaptation based on block edges in the reference frame
JP4952685B2 (ja) * 2008-08-26 2012-06-13 株式会社Jvcケンウッド 映像信号符号化装置
US8548041B2 (en) * 2008-09-25 2013-10-01 Mediatek Inc. Adaptive filter
US8483285B2 (en) * 2008-10-03 2013-07-09 Qualcomm Incorporated Video coding using transforms bigger than 4×4 and 8×8
US9078007B2 (en) * 2008-10-03 2015-07-07 Qualcomm Incorporated Digital video coding with interpolation filters and offsets
US9055293B2 (en) * 2008-10-15 2015-06-09 France Telecom Prediction of an image by compensation during forward movement
EP2187647A1 (en) * 2008-11-12 2010-05-19 Sony Corporation Method and device for approximating a DC coefficient of a block of pixels of a frame
CN101742328B (zh) * 2008-11-14 2013-03-27 北京中星微电子有限公司 图像残差矩阵整数变换方法及装置、反变换方法及装置
US8578272B2 (en) 2008-12-31 2013-11-05 Apple Inc. Real-time or near real-time streaming
TW201028018A (en) 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
US20100178038A1 (en) * 2009-01-12 2010-07-15 Mediatek Inc. Video player
JP2010177809A (ja) * 2009-01-27 2010-08-12 Toshiba Corp 動画像符号化装置および動画像復号装置
JP5502336B2 (ja) * 2009-02-06 2014-05-28 パナソニック株式会社 映像信号符号化装置及び、映像信号符号化方法
JP5275454B2 (ja) 2009-03-31 2013-08-28 パナソニック株式会社 画像復号装置
JP5158003B2 (ja) * 2009-04-14 2013-03-06 ソニー株式会社 画像符号化装置と画像符号化方法およびコンピュータ・プログラム
JP5169978B2 (ja) 2009-04-24 2013-03-27 ソニー株式会社 画像処理装置および方法
US8761531B2 (en) * 2009-07-09 2014-06-24 Qualcomm Incorporated Image data compression involving sub-sampling of luma and chroma values
JP5234368B2 (ja) 2009-09-30 2013-07-10 ソニー株式会社 画像処理装置および方法
US8477845B2 (en) 2009-10-16 2013-07-02 Futurewei Technologies, Inc. Predictive adaptive scan ordering for video coding
KR101751559B1 (ko) * 2009-10-30 2017-06-27 선 페이턴트 트러스트 복호방법, 복호장치, 부호화 방법 및 부호화 장치
TW201143448A (en) * 2009-10-30 2011-12-01 Panasonic Corp Image encoding method, image decoding method, image encoding device and image decoding device
WO2011061880A1 (ja) 2009-11-19 2011-05-26 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
JP5488612B2 (ja) 2009-12-28 2014-05-14 富士通株式会社 動画像符号化装置および動画像復号装置
TWI562600B (en) * 2010-02-08 2016-12-11 Nokia Technologies Oy An apparatus, a method and a computer program for video coding
US20110200108A1 (en) * 2010-02-18 2011-08-18 Qualcomm Incorporated Chrominance high precision motion filtering for motion interpolation
CN102164284A (zh) * 2010-02-24 2011-08-24 富士通株式会社 视频解码方法和系统
KR101503269B1 (ko) * 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
US8929440B2 (en) 2010-04-09 2015-01-06 Sony Corporation QP adaptive coefficients scanning and application
JP2011223303A (ja) * 2010-04-09 2011-11-04 Sony Corp 画像符号化装置と画像符号化方法および画像復号化装置と画像復号化方法
CN102236502A (zh) 2010-04-21 2011-11-09 上海三旗通信科技有限公司 一种移动终端压力触控手势识别的人机交互方式
US20110317757A1 (en) * 2010-06-25 2011-12-29 Qualcomm Incorporated Intra prediction mode signaling for finer spatial prediction directions
US9172968B2 (en) 2010-07-09 2015-10-27 Qualcomm Incorporated Video coding using directional transforms
PT3125561T (pt) * 2010-08-17 2018-05-08 M&K Holdings Inc Método para restaurar um modo de previsão intra
ES2868133T3 (es) * 2010-09-27 2021-10-21 Lg Electronics Inc Método para partición de bloque y dispositivo de decodificación
CN102447895B (zh) 2010-09-30 2013-10-02 华为技术有限公司 扫描方法及装置、反扫描方法及装置
US8885704B2 (en) * 2010-10-01 2014-11-11 Qualcomm Incorporated Coding prediction modes in video coding
US20120134425A1 (en) * 2010-11-29 2012-05-31 Faouzi Kossentini Method and System for Adaptive Interpolation in Digital Video Coding
EP2651137A4 (en) * 2010-12-08 2016-03-02 Lg Electronics Inc INTRA-PREDICTION METHOD, ENCODING APPARATUS, AND DECODING APPARATUS USING THE SAME
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
US10045046B2 (en) * 2010-12-10 2018-08-07 Qualcomm Incorporated Adaptive support for interpolating values of sub-pixels for video coding
US9049444B2 (en) * 2010-12-22 2015-06-02 Qualcomm Incorporated Mode dependent scanning of coefficients of a block of video data
US9172972B2 (en) * 2011-01-05 2015-10-27 Qualcomm Incorporated Low complexity interpolation filtering with adaptive tap size
GB2487242A (en) * 2011-01-17 2012-07-18 Sony Corp Interpolation Using Shear Transform
JP2012186617A (ja) 2011-01-31 2012-09-27 Sony Corp 画像処理装置および方法
RU2609094C2 (ru) 2011-02-10 2017-01-30 Сони Корпорейшн Устройство и способ обработки изображений
JP2012175615A (ja) 2011-02-24 2012-09-10 Sony Corp 画像処理装置及び画像処理方法
US20120230418A1 (en) * 2011-03-08 2012-09-13 Qualcomm Incorporated Coding of transform coefficients for video coding
US8494290B2 (en) * 2011-05-05 2013-07-23 Mitsubishi Electric Research Laboratories, Inc. Method for coding pictures using hierarchical transform units
US9602839B2 (en) * 2011-06-15 2017-03-21 Futurewei Technologies, Inc. Mode dependent intra smoothing filter table mapping methods for non-square prediction units
WO2012176405A1 (ja) * 2011-06-20 2012-12-27 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号装置、画像復号方法及び画像復号プログラム
JP5678814B2 (ja) 2011-06-20 2015-03-04 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに、送信装置、送信方法及び送信プログラム
JP5990948B2 (ja) * 2011-06-22 2016-09-14 セイコーエプソン株式会社 プロジェクター
GB2492130A (en) * 2011-06-22 2012-12-26 Canon Kk Processing Colour Information in an Image Comprising Colour Component Sample Prediction Being Based on Colour Sampling Format
WO2012176684A1 (ja) * 2011-06-22 2012-12-27 ソニー株式会社 画像処理装置および方法
KR101668583B1 (ko) * 2011-06-23 2016-10-21 가부시키가이샤 제이브이씨 켄우드 화상 인코딩 장치, 화상 인코딩 방법 및 화상 인코딩 프로그램, 및 화상 디코딩 장치, 화상 디코딩 방법 및 화상 디코딩 프로그램
JP5614381B2 (ja) 2011-06-23 2014-10-29 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、送信装置、送信方法、及び送信プログラム
US9854275B2 (en) * 2011-06-25 2017-12-26 Qualcomm Incorporated Quantization in video coding
JP5907367B2 (ja) * 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
US20130044811A1 (en) * 2011-08-18 2013-02-21 Hyung Joon Kim Content-Based Adaptive Control of Intra-Prediction Modes in Video Encoding
EP2745506A2 (en) * 2011-09-08 2014-06-25 Motorola Mobility LLC Methods and apparatus for quantization and dequantization of a rectangular block of coefficients
US9787982B2 (en) * 2011-09-12 2017-10-10 Qualcomm Incorporated Non-square transform units and prediction units in video coding
US9762899B2 (en) * 2011-10-04 2017-09-12 Texas Instruments Incorporated Virtual memory access bandwidth verification (VMBV) in video coding
US9807401B2 (en) * 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
GB201119180D0 (en) 2011-11-07 2011-12-21 Sony Corp Data encoding and decoding
GB2496194A (en) 2011-11-07 2013-05-08 Sony Corp Entropy encoding video data using reordering patterns
GB2496201A (en) 2011-11-07 2013-05-08 Sony Corp Context adaptive data encoding and decoding
GB2496197A (en) 2011-11-07 2013-05-08 Sony Corp Frequency Domain Video Data Reordering for Encoding
ES2794582T3 (es) * 2011-11-08 2020-11-18 Toshiba Kk Procedimiento de decodificación de imágenes y aparato de decodificación de imágenes
US9451252B2 (en) * 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
US9538200B2 (en) * 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
JP5995448B2 (ja) 2012-01-19 2016-09-21 シャープ株式会社 画像復号装置、および画像符号化装置
US8581753B2 (en) * 2012-01-19 2013-11-12 Sharp Laboratories Of America, Inc. Lossless coding technique for CABAC in HEVC
US9363516B2 (en) * 2012-01-19 2016-06-07 Qualcomm Incorporated Deblocking chroma data for video coding
EP2805492B1 (en) * 2012-01-19 2018-11-14 VID SCALE, Inc. System and method of video coding quantization and dynamic range control
US9106936B2 (en) * 2012-01-25 2015-08-11 Altera Corporation Raw format image data processing
US9123278B2 (en) * 2012-02-24 2015-09-01 Apple Inc. Performing inline chroma downsampling with reduced power consumption
US9325991B2 (en) * 2012-04-11 2016-04-26 Qualcomm Incorporated Motion vector rounding
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9253483B2 (en) * 2012-09-25 2016-02-02 Google Technology Holdings LLC Signaling of scaling list
US9667994B2 (en) * 2012-10-01 2017-05-30 Qualcomm Incorporated Intra-coding for 4:2:2 sample format in video coding

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200824467A (en) * 2006-10-10 2008-06-01 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
TW200833124A (en) * 2006-11-30 2008-08-01 Lsi Corp Memory reduced H264/MPEG-4 AVC codec
TW200943967A (en) * 2007-12-10 2009-10-16 Qualcomm Inc Resource-adaptive video interpolation or extrapolation
US20120027083A1 (en) * 2009-04-03 2012-02-02 Matthias Narroschke Video coding method, video decoding method, video coding apparatus, and video decoding apparatus
TW201208381A (en) * 2010-04-13 2012-02-16 Panasonic Corp Encoding distortion removal method, encoding method, decoding method, encoding distortion removal device, encoding device and decoding device
TW201215161A (en) * 2010-07-20 2012-04-01 Ntt Docomo Inc Image prediction encoding device, image prediction encoding method, image prediction encoding program, image prediction decoding device, image prediction decoding method, and image prediction decoding program
CN101938657A (zh) * 2010-10-07 2011-01-05 西安电子科技大学 高效视频编码中编码单元自适应划分方法
CN102355579A (zh) * 2011-02-24 2012-02-15 中兴通讯股份有限公司 一种预测模式的编码或解码方法及装置

Also Published As

Publication number Publication date
US9686548B2 (en) 2017-06-20
CA2870591A1 (en) 2013-10-31
JP2015518341A (ja) 2015-06-25
GB2501547A (en) 2013-10-30
US20150063460A1 (en) 2015-03-05
EP4243421A3 (en) 2023-11-29
EP4243420A2 (en) 2023-09-13
BR112014026021A8 (pt) 2021-06-22
MX2014012847A (es) 2015-10-22
GB2501555A (en) 2013-10-30
GB201211619D0 (en) 2012-08-15
CN104247425A (zh) 2014-12-24
RU2014147451A (ru) 2016-06-20
CA2870602A1 (en) 2013-10-31
GB201220836D0 (en) 2013-01-02
JP6606794B2 (ja) 2019-11-20
GB201211067D0 (en) 2012-08-01
CN104255029B (zh) 2017-11-24
KR20140145606A (ko) 2014-12-23
GB2501550A (en) 2013-10-30
JP2015518340A (ja) 2015-06-25
US20150063457A1 (en) 2015-03-05
EP2842317A1 (en) 2015-03-04
AU2016204227B2 (en) 2018-09-06
AU2013254443A1 (en) 2014-10-23
MX2014012565A (es) 2014-12-05
CA2871556A1 (en) 2013-10-31
CN108347604A (zh) 2018-07-31
GB2501554B (en) 2014-09-24
JP2018129858A (ja) 2018-08-16
JP5965054B2 (ja) 2016-08-03
CN108347604B (zh) 2022-03-04
GB2501553A (en) 2013-10-30
EP2842315B1 (en) 2023-07-12
US20200014916A1 (en) 2020-01-09
WO2013160697A1 (en) 2013-10-31
RU2017116180A (ru) 2019-01-28
GB2501546A (en) 2013-10-30
EP4243421A2 (en) 2023-09-13
CA2871556C (en) 2017-08-29
WO2013160656A3 (en) 2013-12-19
CN107734330A (zh) 2018-02-23
JP2017055444A (ja) 2017-03-16
GB201211073D0 (en) 2012-08-01
JP2016201813A (ja) 2016-12-01
BR112014026021A2 (pt) 2017-06-27
RU2751080C2 (ru) 2021-07-08
CN111182299A (zh) 2020-05-19
AU2013254448A1 (en) 2014-11-06
CN108366257B (zh) 2022-03-25
KR20190077110A (ko) 2019-07-02
MX345237B (es) 2017-01-23
BR112014026024A8 (pt) 2021-06-22
GB2501556A (en) 2013-10-30
WO2013160696A1 (en) 2013-10-31
US20190222833A1 (en) 2019-07-18
JP2018142970A (ja) 2018-09-13
US20170339402A1 (en) 2017-11-23
BR112014026035B1 (pt) 2023-02-07
JP6231647B2 (ja) 2017-11-15
US20170272743A1 (en) 2017-09-21
JP2015518343A (ja) 2015-06-25
CN104255030B (zh) 2018-04-03
RU2599935C2 (ru) 2016-10-20
AU2013254444A1 (en) 2014-10-23
TW201817239A (zh) 2018-05-01
US10841572B2 (en) 2020-11-17
US10440358B2 (en) 2019-10-08
US10827169B2 (en) 2020-11-03
GB2501551A (en) 2013-10-30
US10205941B2 (en) 2019-02-12
TW201408081A (zh) 2014-02-16
US20150172652A1 (en) 2015-06-18
MX343351B (es) 2016-11-03
US20180227577A1 (en) 2018-08-09
US10419750B2 (en) 2019-09-17
JP6050478B2 (ja) 2016-12-21
JP2015515236A (ja) 2015-05-21
US20170359576A1 (en) 2017-12-14
US20150078447A1 (en) 2015-03-19
CN104272739A (zh) 2015-01-07
CA2870596A1 (en) 2013-10-31
WO2013160700A1 (en) 2013-10-31
TWI575942B (zh) 2017-03-21
JP6325606B2 (ja) 2018-05-16
US20150085924A1 (en) 2015-03-26
KR20170054561A (ko) 2017-05-17
WO2013160695A1 (en) 2013-10-31
GB201211072D0 (en) 2012-08-01
CN104285445A (zh) 2015-01-14
US9674531B2 (en) 2017-06-06
WO2013160656A2 (en) 2013-10-31
US9693058B2 (en) 2017-06-27
RU2014147453A (ru) 2016-06-20
CN110225337A (zh) 2019-09-10
EP4243420A3 (en) 2023-11-22
EP3442229A1 (en) 2019-02-13
KR101734974B1 (ko) 2017-05-15
CN104247425B (zh) 2018-11-06
AU2018217304A1 (en) 2018-09-06
KR20150003219A (ko) 2015-01-08
GB2501548A (en) 2013-10-30
BR112014026024A2 (pt) 2017-06-27
CN104272739B (zh) 2018-04-20
CN104255029A (zh) 2014-12-31
GB2501549A (en) 2013-10-30
US11252402B2 (en) 2022-02-15
EP2842321A2 (en) 2015-03-04
GB201211069D0 (en) 2012-08-01
CN104255030A (zh) 2014-12-31
US20150043641A1 (en) 2015-02-12
GB201211070D0 (en) 2012-08-01
BR112014026035A2 (pt) 2020-06-30
CN109068135A (zh) 2018-12-21
US20150117527A1 (en) 2015-04-30
GB201211628D0 (en) 2012-08-15
JP6503492B2 (ja) 2019-04-17
CN108366257A (zh) 2018-08-03
TWI711301B (zh) 2020-11-21
CA3028883A1 (en) 2013-10-31
EP2842314A2 (en) 2015-03-04
WO2013160694A4 (en) 2014-01-03
TWI611689B (zh) 2018-01-11
JP5986294B2 (ja) 2016-09-06
GB2501566A (en) 2013-10-30
US20220150468A1 (en) 2022-05-12
GB201211623D0 (en) 2012-08-15
CA2870596C (en) 2019-02-12
JP6128707B2 (ja) 2017-05-17
CN104247426A (zh) 2014-12-24
CA2870591C (en) 2023-10-03
TWI677236B (zh) 2019-11-11
GB2501554A (en) 2013-10-30
CN110933409A (zh) 2020-03-27
RU2619888C2 (ru) 2017-05-19
TW201937934A (zh) 2019-09-16
US10291909B2 (en) 2019-05-14
CN111182299B (zh) 2024-02-09
RU2014147445A (ru) 2016-06-10
US10531083B2 (en) 2020-01-07
CA2870602C (en) 2022-08-09
EP2842315A1 (en) 2015-03-04
MX2014012846A (es) 2015-10-22
CN108134931B (zh) 2022-03-01
US10616572B2 (en) 2020-04-07
KR20170041288A (ko) 2017-04-14
JP6328613B2 (ja) 2018-05-23
TW201408080A (zh) 2014-02-16
WO2013160698A1 (en) 2013-10-31
WO2013160693A2 (en) 2013-10-31
GB201211629D0 (en) 2012-08-15
AU2018217304B2 (en) 2020-08-06
WO2013160699A1 (en) 2013-10-31
TW201408079A (zh) 2014-02-16
US20200213584A1 (en) 2020-07-02
CA3028883C (en) 2021-10-26
JP2015518339A (ja) 2015-06-25
JP2015518342A (ja) 2015-06-25
CN108134931A (zh) 2018-06-08
US11109019B2 (en) 2021-08-31
GB2501535A (en) 2013-10-30
US20180160112A1 (en) 2018-06-07
BR112014026021B1 (pt) 2023-12-19
MX346235B (es) 2017-03-13
EP2842314B1 (en) 2021-06-02
GB201211066D0 (en) 2012-08-01
CA3128787A1 (en) 2013-10-31
CN109068135B (zh) 2023-03-14
AU2013254444B2 (en) 2015-10-29
CN107734330B (zh) 2020-04-28
US9948929B2 (en) 2018-04-17
US9686547B2 (en) 2017-06-20
KR20180030263A (ko) 2018-03-21
US20190191154A1 (en) 2019-06-20
WO2013160693A3 (en) 2013-12-19
KR101840025B1 (ko) 2018-03-20
AU2013254448B2 (en) 2015-11-19
AU2016204227A1 (en) 2016-07-14
RU2603548C2 (ru) 2016-11-27
JP6407389B2 (ja) 2018-10-17
US10244232B2 (en) 2019-03-26
GB201211075D0 (en) 2012-08-01
US20200177874A1 (en) 2020-06-04
US10674144B2 (en) 2020-06-02
GB201207459D0 (en) 2012-06-13
EP2842316A1 (en) 2015-03-04
US10499052B2 (en) 2019-12-03
US9826231B2 (en) 2017-11-21
US20180124392A1 (en) 2018-05-03
CA3128787C (en) 2023-09-26
US20190253702A1 (en) 2019-08-15
JP2018042263A (ja) 2018-03-15
GB2501557A (en) 2013-10-30
US11770519B2 (en) 2023-09-26
KR101994597B1 (ko) 2019-06-28
KR102104400B1 (ko) 2020-04-24
CN110933409B (zh) 2023-06-27
RU2017116180A3 (zh) 2020-05-27
WO2013160694A1 (en) 2013-10-31

Similar Documents

Publication Publication Date Title
TWI586152B (zh) 資料編碼及解碼
EP2858367A2 (en) Quantisation parameter selection for different colour sampling formats