TW201408080A - 資料編碼及解碼 - Google Patents

資料編碼及解碼 Download PDF

Info

Publication number
TW201408080A
TW201408080A TW102114851A TW102114851A TW201408080A TW 201408080 A TW201408080 A TW 201408080A TW 102114851 A TW102114851 A TW 102114851A TW 102114851 A TW102114851 A TW 102114851A TW 201408080 A TW201408080 A TW 201408080A
Authority
TW
Taiwan
Prior art keywords
color
sample
samples
prediction
predicted
Prior art date
Application number
TW102114851A
Other languages
English (en)
Other versions
TWI575942B (zh
Inventor
James Alexander Gamei
Nicholas Ian Saunders
Karl James Saunders
Paul James Silcock
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201408080A publication Critical patent/TW201408080A/zh
Application granted granted Critical
Publication of TWI575942B publication Critical patent/TWI575942B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00—Colour television systems
    • H04N11/24—High-definition television systems
    • H04N11/28—High-definition television systems involving bandwidth reduction, e.g. subsampling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/547—Motion estimation performed in a transform domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/649—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding the transform being applied to non rectangular image segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

一種視頻編碼或解碼方法，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比；該方法包含：針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；及將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格而界定的第二預測方向。

Description

資料編碼及解碼
本發明係有關資料編碼及解碼。
文中所提出之「先前技術」描述係為了一般性地呈現本發明之背景的目的。目前具名的發明人之工作(達其在此先前技術段落中所描述之程度、以及其無法另合格為申請時之習知技術的描述之形態)不被明確地或暗示性地承認為對抗本發明之習知技術。
有數種視頻資料編碼及解碼系統，其涉及將視頻資料轉變為頻域表示、將頻域係數量化及接著將某形式的熵(entropy)編碼應用至已量化的係數。如此可獲得視頻資料之壓縮。相應的解碼或解壓縮技術被應用以恢復原始視頻資料之已重建版本。
諸如那些於H.264/MPEG-4高階視頻編碼(AVC)中所使用之當前的視頻編解碼器(編碼器-解碼器)主要係藉由僅將介於連續視頻框之間的差異編碼來獲得資料壓縮。這些編解碼器係使用所謂巨集區塊之規律陣列，其每 個被使用為與先前視頻框中之相應巨集區塊的比較區，且巨集區塊內之影像區接著依據介於視頻序列中之相應的當前與先前巨集區塊間、或者介於視頻序列之單一框內的相鄰巨集區塊間所發現之移動等級(level)而被編碼。
高效率視頻編碼(HEVC)，亦已知為H.265或MPEG-H Part 2，是H.264/MPEG-4 AVC之一種已提議的後繼者。期望HEVC得以增進品質及加倍資料壓縮比(相較於H.264)，並期望其可縮放從128×96至7680×4320像素解析度，約略等於從128kbit/s至800Mbit/s之位元率。
於HEVC中，一種所謂的4：2：0區塊結構被提議給消費者設備，其中各色度(chroma)頻道中所使用之資料的量為亮度(luma)頻道中所使用的四分之一。此係因為主觀地人類對於亮度變化較顏色變化更為敏感，而因此得以使用較大的壓縮及/或較少的資料於顏色頻道中而不會有主觀的品質喪失。
HEVC以一種基於編碼單元(CU，其為可變尺寸結構)之更有彈性技術來取代現存H.264及MPEG標準中所發現的巨集區塊。
因此，當編碼視頻框中之影像資料時，CU尺寸可回應於明顯的影像複雜度或檢測的移動等級而被選擇，以取代使用均勻分佈的巨集區塊。結果，可獲得明顯較大的壓縮於具有少量移動於框之間的區中以及具有少量變化於框之內的區中，而同時可保留較佳的影像品質於高框間移動 或影像複雜度之區域中。
各CU含有：圖像內或圖像間預測類型之任一者的一或更多可變區塊尺寸的預測單元(PU)、及其含有針對空間區塊轉變及量化之係數的一或更多轉變單元(TU)。
再者，PU和TU區塊被提供給三個頻道之每一者：亮度(Y)，其為照度或亮度頻道、且其可被視為灰階頻道；及兩顏色差異或色彩(色度)頻道Cb和Cr。這些頻道提供亮度頻道之灰階影像的顏色。術語Y、照度(luminance)及亮度被交替地使用於本說明書中，而類似的術語Cb和Cr、色彩(chrominance)及色度被適當地交替使用，注意其色彩或色度通常可被用於Cr和Cb之一者或兩者；而當討論特定色彩頻道時其將由術語Cb或Cr來識別。
一般而言，PU被視為頻道獨立的，除了其PU具有亮度部分及色度部分。一般而言，此表示形成各頻道之PU的部分之樣本代表影像之相同區，以致有固定的關係介於三個頻道間的PU之間。例如，針對4：2：0視頻，亮度之8×8 PU永遠具有色度之相應的4×4 PU，其PU之色度部分代表如亮度部分之相同區域，但由於4：2：0視頻中相較於亮度資料之4：2：0色度資料之次取樣本質而含有較少數的像素。兩色度頻道共用預測內資訊；而三個頻道共用預測間資訊。類似地，TU結構亦具有固定關係於三個頻道之間。
然而，針對專業的廣播及數位劇院設備，希望具有較 少的壓縮(或較多的資訊)於色度頻道中，且此可影響當前及已提議的HEVC處理將如何運作。
本發明係應付或減緩由此處理所發生之問題。
本發明之形態及特徵係界定於後附申請專利範圍中。
應理解之前的一般性描述及之後的詳細描述為本技術之範例性的，而非限制性的。
10‧‧‧輸入音頻/視頻信號
20‧‧‧壓縮設備
30‧‧‧傳輸路由
40‧‧‧解壓縮設備
50‧‧‧輸出音頻/視頻信號
60‧‧‧壓縮設備
70‧‧‧解壓縮設備
100‧‧‧已壓縮音頻/視頻信號
110‧‧‧解壓縮設備
120‧‧‧顯示
130‧‧‧輸入音頻/視頻信號
140‧‧‧壓縮設備
150‧‧‧儲存裝置
160‧‧‧解壓縮設備
170‧‧‧輸出音頻/視頻信號
180‧‧‧影像擷取裝置
190‧‧‧壓縮設備
200‧‧‧麥克風
210‧‧‧已壓縮音頻/視頻信號
220‧‧‧概略級
300‧‧‧輸入視頻信號
310‧‧‧相加器
320‧‧‧影像預測器
330‧‧‧殘留影像信號
340‧‧‧轉變單元
343‧‧‧控制器
350‧‧‧量化器
360‧‧‧掃描單元
370‧‧‧熵編碼器(EE)
380‧‧‧已壓縮的輸出視頻信號
390‧‧‧返回路徑
400‧‧‧反轉掃描單元
410‧‧‧熵解碼器
420‧‧‧反向量化器
430‧‧‧反向轉變單元
440‧‧‧影像信號
450‧‧‧相加器
460‧‧‧輸出影像
470‧‧‧接收的已壓縮視頻信號
480‧‧‧輸出的解壓縮視頻信號
500‧‧‧多工器
510‧‧‧模式信號
520‧‧‧模式內選擇器
530‧‧‧影像內預測器
540‧‧‧動作補償(MC)預測器
550‧‧‧動作評價器
560‧‧‧過濾器單元
570‧‧‧影像儲存
580‧‧‧內插過濾器
600‧‧‧乘法器
610‧‧‧除法器
700‧‧‧最大編碼單元(LCU)
710‧‧‧編碼單元
720‧‧‧編碼單元
730‧‧‧編碼單元
800‧‧‧部分編碼影像
810‧‧‧區塊
820‧‧‧陰影區
830‧‧‧當前TU
840‧‧‧左上位置
1000‧‧‧除區塊過濾器
1010‧‧‧樣本調適補償(SAO)過濾器
1020‧‧‧調適迴路過濾器(ALF)
1030‧‧‧編碼決定區塊
1040‧‧‧係數產生器
1050‧‧‧係數產生器
1200‧‧‧TU
1210‧‧‧陰影區域
1220‧‧‧像素
1230‧‧‧點
1240‧‧‧虛線
1250‧‧‧色度像素
1260‧‧‧寬度
1300‧‧‧亮度PU
1310‧‧‧色度PU
1320‧‧‧內插陣列
1330‧‧‧陣列
1350‧‧‧亮度PU
1360‧‧‧色度PU
1500‧‧‧修改器
1510‧‧‧支援資料
1520‧‧‧列
1530‧‧‧行
1540‧‧‧樣本位置
1550‧‧‧位置
1560‧‧‧當前區塊
1570‧‧‧樣本位置
1580‧‧‧角度步進
1600‧‧‧修改的角度步進
1620‧‧‧選擇器
1630‧‧‧查找表
1700‧‧‧選擇器
1710‧‧‧轉變引擎
1900‧‧‧二元轉換器
1920‧‧‧旁通編碼器
1930,1940‧‧‧示意開關
1950‧‧‧背景模擬器
1960‧‧‧編碼引擎
本發明之更完整的理解以及許多其伴隨的優點將隨著其藉由參考以下的詳細描述(當配合後附圖形而考量時)變得更為瞭解而被輕易地獲得，其中：圖1概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻(A/V)資料傳輸及接收系統；圖2概略地闡明一種使用視頻資料解壓縮之視頻顯示系統；圖3概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻儲存系統；圖4概略地闡明一種使用視頻資料解壓縮之視頻相機；圖5提供視頻資料壓縮及解壓縮設備之概略概視圖；圖6概略地闡明預測影像之產生；圖7概略地闡明最大編碼單元(LCU)； 圖8概略地闡明一組四個編碼單元(CU)；圖9和10概略地闡明將圖8之編碼單元次分割為較小的編碼單元；圖11概略地闡明預測單元(PU)之陣列；圖12概略地闡明轉變單元(TU)之陣列；圖13概略地闡明部分編碼影像；圖14概略地闡明一組可能的預測內方向；圖15概略地闡明一組預測模式；圖16概略地闡明筆直對角掃描；圖17概略地闡明視頻壓縮設備；圖18A和18B概略地闡明可能的區塊尺寸；圖19概略地闡明來自色度及亮度區塊之共置資訊的使用；圖20概略地闡明一種情況，其中來自一色度頻道之共置資訊被用於另一色度頻道；圖21概略地闡明用於LM-CHROMA模式之像素；圖22概略地闡明一組亮度預測方向；圖23概略地闡明圖22之方向，如應用於水平上稀疏的色度頻道；圖24概略地闡明映射至矩形色度像素陣列之圖22的方向；圖25-28概略地闡明亮度及色度像素內插；圖29A和29B個別概略地闡明4：2：0及4：2：2之量化參數表； 圖30和31概略地闡明量化變異表；及圖32概略地闡明用以修改角度步進之配置；圖33概略地闡明角度步進之修改；圖34和35概略地闡明掃描型態；圖36概略地闡明依據預測模式之掃描型態的選擇；圖37概略地闡明依據預測模式之掃描型態的選擇，針對矩形色度區塊；圖38概略地闡明用以選擇掃描型態之配置；圖39概略地闡明用以選擇頻率分離轉變之配置；圖40概略地闡明CABAC編碼器；圖41A-41D概略地闡明先前提議的鄰近分配(allocation)；及圖42A至45概略地闡明依據本發明之實施例的背景可變分配。
現在參考圖形，圖1-4被提供以給出利用壓縮及/或解壓縮設備之設備或系統的概略圖示，以供配合本發明之實施例而描述於下。
所有將描述於下之資料壓縮及/或解壓縮可被實施以硬體、以運作在諸如通用電腦等通用資料處理設備上之軟體，當成諸如特定應用積體電路(ASIC)或場可編程閘陣列(FPGA)等可編程硬體或當成這些的組合。於其中實施例係藉由軟體及/或韌體來實施的情況下，應理解此 類軟體及/或韌體、及藉以儲存或提供此類軟體及/或韌體之非暫態資料儲存媒體被視為本發明之實施例。
圖1概略地闡明一種使用視頻資料壓縮及解壓縮之音頻/視頻資料傳輸及接收系統。
輸入音頻/視頻信號10被供應至視頻資料壓縮設備20，其壓縮音頻/視頻信號10之至少視頻成分以供傳輸沿著傳輸路由30，諸如纜線、光纖、無線鏈路等等。已壓縮信號係由解壓縮設備40所處理以提供輸出音頻/視頻信號50。針對返回路徑，壓縮設備60係壓縮音頻/視頻以供傳輸沿著傳輸路由30而至解壓縮設備70。
壓縮設備20及解壓縮設備70可因此形成傳輸鏈路之一節點。解壓縮設備40及壓縮設備60可形成傳輸鏈路之另一節點。當然，於其中傳輸鏈路為單向之例子中，僅有節點之一需要壓縮設備而另一節點僅需要解壓縮設備。
圖2概略地闡明一種使用視頻資料解壓縮之視頻顯示系統。特別地，已壓縮音頻/視頻信號100係由解壓縮設備110所處理以提供其可被顯示於顯示120上之解壓縮信號。解壓縮設備110可被實施為顯示120之部分，例如被提供於與顯示裝置相同的外殼內。另一方面，解壓縮設備110可被提供為(例如)所謂得機上盒(STB)，注意：用詞「機上」並非暗示機盒需設置相對於顯示120之任何特定方位或位置；其僅為用以指示可連接至顯示以當作周邊裝置之裝置的本技術中所使用的術語。
圖3概略地闡明一種使用視頻資料壓縮及解壓縮之音 頻/視頻儲存系統。輸入音頻/視頻信號130被供應至壓縮設備140，其產生已壓縮信號以供由儲存裝置150所儲存，諸如磁碟裝置、光碟裝置、磁帶裝置、固態儲存裝置(如半導體記憶體或其他儲存裝置)。為了播放，已壓縮資料被讀取自儲存裝置150並傳遞至解壓縮設備160以供解壓縮，以提供輸出音頻/視頻信號170。
應理解：已壓縮或已編碼信號、及儲存該信號之儲存媒體被視為本發明之實施例。
圖4概略地闡明一種使用視頻資料解壓縮之視頻相機。於圖4中，影像擷取裝置180，諸如電荷耦合裝置(CCD)影像電感器及相關的控制和讀出電子電路，產生視頻信號，其被傳遞至壓縮設備190。一麥克風(或複數麥克風)200產生一音頻信號以供被傳遞至壓縮設備190。壓縮設備190產生已壓縮音頻/視頻信號210以便被儲存及/或傳輸(通常顯示為概略級220)。
將描述於下之技術主要係有關於視頻資料壓縮及解壓縮。應理解：許多現有的技術可配合將被描述之視頻資料壓縮技術而被用於音頻資料壓縮，以產生已壓縮音頻/視頻信號。因此，將不提供音頻資料壓縮之個別討論。亦應理解：與視頻資料(特別是廣播品質視頻資料)相關的資料率一般是極高於與音頻資料相關的資料率(無論已壓縮或未壓縮)。因此應理解：未壓縮音頻資料可伴隨已壓縮視頻資料以形成已壓縮音頻/視頻信號。應進一步理解：雖然目前的範例(圖1-4中所顯示者)係有關音頻/視頻 資料，但以下將描述之技術可發現其應用於僅處理(亦即，壓縮、解壓縮、儲存、顯示及/或傳輸)視頻資料之系統。換言之，實施例可應用於視頻資料壓縮而不一定具有任何相關的音頻資料處置。
圖5提供視頻資料壓縮及解壓縮設備之概略概視圖。
控制器343控制設備之整體操作及；特別當針對壓縮模式時，控制試驗編碼程序(將描述於下)以選擇諸如CU、PU和TU區塊尺寸之操作的各種模式。
輸入視頻信號300之連續影像被供應至相加器310及影像預測器320。影像預測器320將參考圖6而被更詳細地描述於下。相加器310事實上執行相減(負相加)操作，其中其輸入視頻信號300於「+」輸入上及影像預測器320之輸出於「-」輸入上，以致從輸入影像減去預測影像。結果係產生代表介於實際與預測影像間之差異的所謂殘留影像信號330。
殘留影像信號為何被產生之一原因係說明如下。將描述之資料編碼技術(亦即將應用於殘留影像信號之技術)傾向於更有效率地作用在當待編碼之影像中有較少「能量」時。於此，術語「有效率地」指的是少量已編碼資料之產生；針對特定影像品質等級，希望產生實際上盡可能少的資料。殘留影像中所謂「能量」是有關殘留影像中所含有之資訊量。假如預測影像將全同於實際影像，則兩者之間的差異(亦即，殘留影像)將含有零資訊(零能量)且將極易於編碼成少量的已編碼資料。通常，假如可使預 測程序合理地作用良好，則預期殘留影像資料將含有較輸入影像更少的資訊(較少能量)而因此將較易於編碼成少量的已編碼資料。
殘留影像信號330被耦合至轉變單元340，其產生殘留影像資料之離散餘弦轉變(DCT)表示。DCT技術本身是眾所周知的且將不會詳細地描述於此。然而，仍有將被更詳細地描述於下之本設備中所使用的技術之形態，特別是有關於可應用DCT操作之不同區塊的資料之選擇。這些將參考圖7-12而被描述於下。於一些實施例中，不同的頻率分離轉變可被選擇性地使用以取代DCT，於一種已知為MDDT(模式取決的方向性轉變)之系統中，其將被描述於下。現在，將假設DCT轉變正使用中。
轉變單元340之輸出(亦即，針對影像資料之各轉變區塊的一組DCT係數)被供應至量化器350。各種量化技術為視頻資料壓縮之領域中所已知的，範圍涵蓋從藉由量化標度因數之簡單相乘直至複雜查找表之應用，於量化參數之控制下。一般目標是兩倍。首先，量化程序減少已轉變資料之可能值的數目。其次，量化程序可增加其已轉變資料為零之值的可能性。這兩者可使得熵編碼程序(將描述於下)更有效率地作用於產生少量的已壓縮視頻資料。
由掃描單元360施加一資料掃描程序。掃描程序之目的係重新排列量化的已轉變資料以將盡可能多的非零已量化已轉變係數收集在一起，而當然因而將盡可能多的零值係數收集在一起收集。這些特徵可容許有效率地施加所謂 的運行長度編碼或類似技術。因此，掃描程序涉及從已量化已轉變資料選擇係數，且特別是從相應於一已依據「掃描順序」而被轉變並量化的影像資料之區塊的係數之區塊，以致：(a)所有係數當作掃描之部分而被選擇一次；及(b)掃描常提供所欲的重新排列。一種可常提供有用結果之範例掃描順序是一種所謂的筆直對角掃描順序。於一些實施例中，可使用一種所謂的MDCS(模式取決的係數掃描)系統，以致掃描型態可隨區塊而改變。此類配置將被更詳細地描述於下。現在，假設其使用筆直對角掃描。
已掃描係數被接著傳遞至熵編碼器(EE)370。再次地，可使用各種類型的熵編碼。兩個範例是所謂的CABAC(上下文適應二進制算術編碼)系統之變異及所謂的CAVLC(上下文適應可變長度編碼)系統之變異。一般而言，CABAC被視為提供較佳的效率，且於某些研究中已顯示出針對相當影像品質(相較於CAVLC)之已編碼輸出資料的量提供10-20%的減少。然而，CAVLC被視為代表相較於CABAC之複雜度更低甚多的等級(依照其實施方式)。注意：掃描程序及熵編碼程序被顯示為分離的程序，但事實上可被結合或一起處理。亦即，資料之讀入熵編碼器可發生以掃描順序。相應的考量適於以下將描述之個別的反向程序。注意：本案申請時於考量下之當前的HEVC文件不再包括CAVLC係數編碼器之可能性。
熵編碼器370之輸出，連同額外資料(以上所提及/ 或以下所討論)，例如界定其中預測器320產生預測影像之方式，提供已壓縮的輸出視頻信號380。
然而，亦提供返回路徑，因為預測器320本身之操作取決於已壓縮輸出資料之解壓縮版本。
此特徵之原因係如下。於適當階段，在解壓縮程序(以下將描述)中，產生殘留資料之解壓縮版本。此已解壓縮的殘留資料需被加至預測影像以產生輸出影像(因為原始殘留資料為介於輸入影像與預測影像之間的差異)。為了使此程序是相當的，如介於壓縮側與解壓縮側之間，則由預測器320所產生之預測影像應是相同的於壓縮程序期間及於解壓縮程序期間。當然，在解壓縮時，設備對於原始輸入影像不具有存取權，而僅對於解壓縮影像有。因此，於壓縮時，預測器320係以壓縮影像之解壓縮版本為其預測(至少，針對影像間編碼)之基礎。
由熵編碼器370所執行之熵編碼程序被視為「無損」，也就是說其可被反轉以達成與其被首先供應至熵編碼器370之完全相同的資料。因此，返回路徑可被實施在熵編碼階段之前。確實，由掃描單元360所執行之掃描程序亦被視為無損的，但於本實施例中，返回路徑390是從量化器350之輸出至一互補反向量化器420之輸入。
一般而言，熵解碼器410、反轉掃描單元400、反向量化器420及反向轉變單元430提供熵編碼器370、掃描單元360、量化器350及轉變單元340之個別反向功能。現在，將繼續遍及壓縮程序之討論；用以解壓縮輸入已壓 縮視頻信號之程序將被分離地討論於下。
於壓縮程序中，掃描係數係由返回路徑390從量化器350傳遞至反向量化器420，其執行掃描單元360之反向操作。反向量化及反向轉變程序係由單元420、430所執行以產生壓縮解壓縮的殘留影像信號440。
影像信號440被加(於相加器450)至預測器320之輸出以產生重建的輸出影像460。此形成影像預測器320之輸入，如以下將描述者。
現在回到用以解壓縮一接收的已壓縮視頻信號470之程序，信號被供應至熵解碼器410並從該處至反轉掃描單元400、反向量化器420及反向轉變單元430之鏈，在藉由相加器450而被加至影像預測器320之輸出以前。明確地，相加器450之輸出460係形成輸出的解壓縮視頻信號480。實際上，可在信號被輸出之前施加進一步過濾。
因此，圖5及6之設備可作用為壓縮設備或解壓縮設備。兩種類型的設備之功能非常大量地重疊。掃描單元360及熵編碼器370未被使用於解壓縮模式，而預測器320(其將被詳細地描述於下)及其他單元之操作係依循所接收的已壓縮位元流中所含有的或者與其關聯的模式及參數，而非產生其本身之此類資訊。
圖6概略地闡明預測影像之產生，及更明確地為影像預測器320之操作。
有兩種預測之基本模式：所謂的影像內預測及所謂的影像間(或動作補償(MC))預測。
影像內預測係基於來自相同影像內之資料以執行影像之一區塊的內容之預測。此係相應於其他視頻壓縮技術中之所謂的I框編碼。相對於I框編碼(其中整個影像均被內編碼)，於本實施例中，可以逐區塊之方式來進行介於內-與間-編碼之間的選擇，雖然於本發明之其他實施例中仍以逐影像之方式進行選擇。
動作補償預測為影像間預測之範例且係利用其嘗試界定將被編碼於當前影像中之影像細節的來源(於另一鄰接或附近影像中)之動作資訊。因此，於一理想範例中，於預測影像中之影像的一區塊之內容可極簡單被編碼為一參考(動作向量)，其係指向一相鄰影像中位於相同或稍微不同位置上的相應區塊。
回到圖6，顯示兩個影像預測配置(相應於影像內及影像間預測)，其結果係於模式信號510之控制下由多工器500所選擇以提供預測影像之區塊，以便供應至相加器310及450。其選擇之進行係根據哪個選擇提供最低「能量」(其，如上所討論，可被視為需要編碼之資訊內容)，且該選擇被發送給編碼器於已編碼輸出資料流之內。影像能量(於本文中)可被檢測，例如，藉由從輸入影像執行預測影像之兩版本的區域之試驗相減、將差異影像之各像素值平方、加總平方值、及識別兩版本之哪個係導致相關於該影像區域之差異影像的較低均方根值。
於內編碼系統中，實際預測係基於其被接收為信號460之部分的影像區塊來進行，換言之，預測係基於已編 碼-已解碼影像區塊，以致可於解壓縮設備上進行完全相同的預測。然而，資料可由模式內選擇器520獲取自輸入視頻信號300，以控制影像內預測器530之操作。
針對影像間預測，動作補償(MC)預測器540係使用動作資訊，諸如由動作評價器550從輸入視頻信號300所取得的動作向量。這些動作向量。那些動作向量藉由動作補償預測器540而被施加至重建影像460之已處理版本，以產生影像間預測之區塊。
現在將描述施加至信號460之處理。首先，信號係由過濾器單元560所過濾，其將被更詳細地描述於下。此涉及應用「除區塊」過濾器以移除或至少嘗試減少由轉變單元340所執行之區塊為基的處理及後續操作。亦可使用樣本調適補償(SAO)過濾器(進一步描述於下)。同時，應用一種使用藉由處理重建信號460及輸入視頻信號300所取得之係數的樣本迴路過濾器。調適迴路過濾器是一種過濾器類型，其(使用已知的技術)將調適過濾器係數應用於待過濾之資料。亦即，過濾器係數可根據各種因數而改變。定義應使用哪些過濾器係數之資料被包括為已編碼輸出資料流之部分。
調適過濾代表用於影像復原之迴路內過濾。LCU可由高達16個過濾器過濾，其針對LCU內之各CU取得過濾器之選擇及ALF開/關狀態。目前控制係於LCU等級，而非CU等級。
來自過濾器單元560之已過濾輸出實際上形成輸出視 頻信號480，當設備操作為壓縮設備時。其亦被緩衝於一或更多影像或框儲存570中；連續影像之儲存為動作補償預測處理之必要條件，且特別是動作向量之產生。為了節省儲存需求，影像儲存570中之儲存影像可被保持以壓縮形式並接著解壓縮以用於產生動作向量。為了此特定目的，可使用任何已知的壓縮/解壓縮系統。儲存影像被傳遞至內插過濾器580，其產生已儲存影像之較高解析度版本；於此範例中，中間樣本(次樣本)被產生以致：由內插過濾器580所輸出之內插影像的解析度為針對4：2：0之照度頻道而儲存於影像儲存570中的影像之解析度的4倍(於各維度)；以及為針對4：2：0之色彩頻道而儲存於影像儲存570中的影像之解析度的8倍(於各維度)。內插影像被傳遞為送至動作評價器550及亦送至動作補償預測器540之輸入。
於本發明之實施例中，提供進一步的可選擇階段，其係使用乘法器600而將輸入視頻信號之資料值乘以四之因數(效果上僅將資料值向左移兩位元)；及使用除法器或右移器610而施加一相應的除法操作(右移兩位元)於設備之輸出處。因此，左移及右移純粹針對設備之內部操作而改變資料。此處置可提供較高的計算準確度於設備內，當作減少任何資料捨入誤差之效果。
現在將描述其中影像針對壓縮處理而被分割的方式。於基本等級上，一待壓縮影像被視為樣本之區塊的陣列。針對本討論之目的，考量下之最大此類區塊是所謂的最大 編碼單元(LCU)700，其代表通常為64×64樣本之方形陣列(LCU尺寸可由編碼器組態，高達諸如由HEVC文件所定義之最大尺寸)。於此，討論係有關照度樣本。根據色彩模式，諸如4：4：4、4：2：2、4：2：0或4：4：4：4(GBR+密鑰資料)，將有相應於照度區塊之不同數目的相應色彩樣本。
將描述三種基本的區塊類型：編碼單元、預測單元及轉變單元。一般而言，LCU之遞迴次劃分容許輸入圖像被分割成使得區塊尺寸及區塊編碼參數(諸如預測或殘留編碼模式)可依據待編碼影像之特定特性而被設定。
LCU可被次劃分為所謂的編碼單元(CU)。編碼單元總是方形的且具有介於8×8樣本與LCU 700之完整尺寸間的尺寸。編碼單元可被配置為一種樹狀結構，以致第一次劃分可發生如圖8中所示者，給定32×32樣本之編碼單元710；後續次劃分可接著依選擇性方式而發生，以給定16×16樣本之某些編碼單元720(圖9)及8×8樣本之潛在的某些編碼單元730(圖10)。總之，此程序可提供CU區塊之內容調適的編碼樹狀結構，其每一者可如LCU一般大或者如8×8樣本一般小。輸出視頻資料之編碼係基於編碼單元結構而發生，也就是說一LCU被編碼、及接著該程序移至下一LCU，依此類推。
圖11概略地闡明預測單元(PU)之陣列。預測單元為一基礎單元，用以攜載關於影像預測程序之資訊、或者(換言之)被加至熵編碼殘留影像資料以形成來自圖5之 設備的輸出視頻信號之額外資料。一般地，預測單元不限於形狀為方形。其可具有其他形狀，特別是形成方形編碼單元之一的一半之矩形形狀(例如，8×8 CU可具有8×4或4×8 PU)。利用其匹配影像特徵之PU並非HEVC系統之強制部分，但一般目標將是容許良好的編碼器匹配相鄰預測單元之邊界以吻合(盡可能地)圖像中之實際物體的邊界，以致不同的預測參數可被應用於不同的實際物體。各編碼單元可含有一或更多預測單元。
圖12概略地闡明轉變單元(TU)之陣列。轉變單元為轉變和量化程序之基礎單元。轉變可或不可為方形並得以具有4×4至32×32樣本之尺寸。各編碼單元可含有一或更多轉變單元。圖12中之縮寫SDIP-P表示一種所謂的短距離內預測分割。於此配置中，僅使用一維轉變，所以4×N區塊被傳遞通過N轉變，其中該些轉變之輸入資料係基於當前SDIP-P內之先前解碼的相鄰區塊及先前解碼的相鄰線。在本案提出申請時SDIP-P尚未被包括於HEVC中。
如上所述，編碼係發生為一LCU、接著下一LCU，依此類推。於LCU內，編碼係CU接CU地被執行。於CU內，編碼之執行係針對一TU、接著下一TU，依此類推。
現在將討論內預測程序。一般而言，內預測係涉及從相同影像中之先前編碼及解碼的樣本產生樣本之當前區塊的預測(預測單元)。圖13概略地闡明部分編碼影像 800。於此，影像係基於LCU而從左上至右下被編碼。部分透過完整影像之處置而編碼的範例LCU被顯示為區塊810。區塊810之左上半的陰影區820已被編碼。區塊810之內容的影像內預測可利用陰影區820之任一者但無法利用其下方之無陰影區域。然而，注意其針對當前LCU內之個別TU，以上所討論之編碼的階層順序(CU接CU然後TU接TU)表示可能有於當前LCU中並可用於的該TU之編碼的先前已編碼樣本，其為(例如)該TU之右上或左下。
區塊810代表LCU；如以上所討論，針對內影像預測處理之目的，此可被次劃分為一組較小的預測單元及轉變單元。當前TU 830之一範例被顯示於LCU 810內。
內影像預測係考量在考慮當前TU之前被編碼的樣本，諸如那些當前TU之上方及/或左方的那些。來源樣本(從該些樣本預測所需樣本)可被置於不同位置上或者相對於當前TU之方向。為了決定哪個方向適於當前預測單元，一樣本編碼器之模式選擇器520可測試各候選方向之可用TU結構的所有組合並選擇具有最佳壓縮效率之PU方向及TU結構。
圖像樣可被編碼以「片(slice)」為基礎。於一範例中，一片為一水平相鄰族群的LCU。但更一般而言，完整殘留影像可形成一片，或者一片可為單一LCU，或者一片可為一列LCU，依此類推。片可提供對誤差之韌性，因為其被編碼為獨立單元。編碼器及解碼器被完全地重設於切 邊界。例如，內預測不被執行跨越切邊界；切邊界被視為針對此目的之影像邊界。
圖14概略地闡明一組可能的(候選)預測方向。整組34個候選方向可用於8×8、16×16、32×32樣本之預測單元。4×4及64×64樣本之預測單元尺寸的特殊情況具有其可用的一減少組的候選方向(個別為17個候選方向及5個候選方向)。該些方向係由相對於當前區塊位置之水平及垂直位移所決定，但被編碼為預測「模式」，其一組被顯示於圖15中。注意：所謂的DC模式代表周圍的上及左邊樣本之簡單算術平均值。
圖16概略地闡明所謂的筆直對角掃描，其為可由掃描單元360所應用的範例掃描型態。於圖16中，該型態被顯示針對一範例區塊的8×8DCT係數，以其DC係數被置於該區塊之左上位置840上，且增加水平和垂直空間頻率係由在朝下及朝向左上位置840增加距離時的係數所表示。可取代地使用其他替代的掃描順序。
區塊配置和CU、PU及TU結構之變化將被討論如下。這些將被討論以圖17之設備的背景，其在許多方面係類似於如上討論之圖5及6中所闡明者。確實，已使用了許多相同的參考數字，且將不進一步地討論這些部分。
針對圖5及6之主要顯著差異係關於過濾器560(圖6)，其在圖17中被更詳細地顯示為包含除區塊過濾器1000及相關的編碼決定區塊1030、樣本調適補償(SAO)過濾器1010及相關的係數產生器1040、和調適 迴路過濾器(ALF)1020及相關的係數產生器1050。
除區塊過濾器1000嘗試減少失真並增進視覺品質和預測性能，藉由使其當使用區塊編碼技術時可形成於CU、PU與TU邊界之間的尖銳邊緣平順化。
SAO過濾器1010將重建的像素分類為不同的範疇並接著嘗試藉由僅為各範疇的像素增加補償以減少失真。像素強度及邊緣性質被用於像素分類。為了進一步增進編碼效率，一圖像可被劃分為用於補償參數之局部化的區。
ALF 1020嘗試復原已壓縮圖像，以致介於重建的與來源框之間的差異被減至最小。ALF之係數係以框為基礎來計算及傳輸。ALF可被應用於整個框或者局部區域。
如上所述，已提議的HEVC文件係使用已知為4：2：0技術之特定的色度取樣技術。4：2：0技術可被用於本地/消費者設備。然而，數種其他技術亦為可能的。
特別地，一種所謂的4：4：4技術將適於專業廣播、主控(mastering)及數位劇院，且理論上將具有最高的品質及資料率。
類似地，一種所謂的4：2：2技術可被用於具有某些保真度喪失之專業廣播、主控及數位劇院。
這些技術及其相應可能的PU和TU區塊結構被描述如下。
此外，其他的技術包括4：0：0單色技術。
於4：4：4技術中，三個Y、Cb及Cr頻道之每一者均具有相同的樣本率。因此，原則上，於此技術中將有如 亮度資料之兩倍般多的色度資料。
因此於HEVC中，於此技術中，三個Y、Cb及Cr頻道之每一者將具有其為相同尺寸之相應的PU和TU區塊；例如，8×8亮度區塊將具有針對兩個色度頻道之每一個的相應的8×8色度區塊。
因此，於此技術中，通常將有直接的1：1關係於各頻道中的區塊尺寸之間。
於4：2：2技術中，兩個色度成分被取樣以亮度之取樣率的一半(例如，使用垂直或水平次取樣，但為了本說明之目的，假設為水平次取樣)。因此，原則上，於此技術中將有如亮度資料一般多的色度資料，雖然色度資料將被分開於兩個色度頻道之間。
因此於HEVC中，於此技術中，Cb及Cr頻道將具有針對亮度頻道之不同尺寸的PU和TU區塊；例如，8×8亮度區塊將具有針對各色度頻道之相應的寬4×高8色度區塊。
因此，應注意：於次技術中，色度區塊可為非方形的，即使其相應於方形亮度區塊。
於當前已提議的HEVC 4：2：0技術中，兩個色度成分被取樣以亮度之取樣率的四分之一(例如，使用垂直及水平次取樣)。因此，原則上，於此技術中將有如亮度資料之一半的色度資料，色度資料將被分裂於兩個色度頻道之間。
因此於HEVC中，於此技術中，再次地Cb及Cr頻道 將具有針對亮度頻道之不同尺寸的PU和TU區塊。例如，8×8亮度區塊將具有針對各色度頻道之相應的4×4色度區塊。
上述技術於本技藝中係口語地已知為「頻道比」，如以「4：2：0頻道比」；然而，從以上描述應理解：事實上此並非永遠表示其Y、Cb及Cr頻道係以該比例被壓縮或者被提供。因此雖稱之為頻道比，此不應被假設為照字面的。事實上，4：2：0技術之正確比例為4：1：1(4：2：2技術和4：4：4技術之比例是事實上正確的)。
在參考圖18A和18B以討論特定的配置前，將概述或重述一些一般性術語。
最大編碼單元(LCU)是根圖像標的。通常，其涵蓋相當於64×64亮度像素之區域。其被遞迴地分裂以形成樹狀階層的編碼單元(CU)。一般而言，三個頻道(一亮度頻道及二色度頻道)具有相同的CU樹狀階層。然而，如此一來，根據頻道比，一特定的亮度CU可包含針對相應色度CU之不同數目的像素。
於數狀階層之末端上的CU，亦即，得自遞迴分裂程序之最小CU被接著分裂為預測單元(PU)。三個頻道(一亮度頻道及二色度頻道)具有相同的PU結構，除了當色度頻道之相應PU將具有太少樣本時，於此情況下該頻道僅有一PU可用。此為可組態的，但常見地一內PU之最小尺寸為4樣本；一間PU之最小尺寸為4亮度樣本(或針對4：2：0為2色度樣本)。針對任何頻道之至少 一PU最小CU尺寸之限制總是夠大的。
葉CU亦被分裂為轉變單元(TU)。TU可以，及當其為太大時(例如，超過32×32樣本)時必須，被分裂為進一步的TU。加諸一限制以致TU可被向下分裂至最大的樹狀深度，目前組態為2層。亦即，針對各CU不得有多於16個TU。一例示性的最小可容許TU尺寸為4×4樣本及最大可容許TU尺寸為32×32樣本。再次，只要有可能則三個頻道具有相同的TU結構，但假如由於尺寸限制而使TU無法被分裂為針對既定頻道之特定深度，則其保持於較大尺寸。所謂的非方形四倍樹狀轉變配置(NSQT)是類似的，但分裂為四個TU之方法無需為2×2而可為4×1或1×4。
參考圖18A及18B，針對CU、PU及TU區塊概述可能的不同區塊尺寸，以「Y」指稱亮度區塊而「C」一般性地指稱色度區塊之一代表者，及數字指稱像素。「間」指稱框間預測PU(相對於框內預測PU)。於許多情況下，僅顯示亮度區塊之區塊尺寸。相關色度區塊之相應尺寸係關於依據頻道比之亮度區塊尺寸。因此，針對4：4：4，色度頻道具有如圖18A和18B中所示之亮度區塊般的相同區塊尺寸。針對4：2：2及4：2：0，色度區塊將各具有較相應亮度區塊更少的像素，依據頻道比。
圖18A和18B中所示之配置考量四種可能的CU尺寸：64×64、32×32、16×16及8×8亮度像素，個別地。這些CU之每一者均具有PU選項(顯示於行1140中)及 TU選項(顯示於行1150中)之一相應列。針對如上所界定之可能CU尺寸，該些列選項個別被參照為1100、1110、1120及1130。
注意：64×64為當前的最大CU尺寸，但此限制可能會改變。
於各列1100...1130中，不同的PU選項被顯示可應用於該CU尺寸。可應用於那些PU組態之TU選項被顯示水平地對齊與個別的PU選項。
注意：於數種情況下，提供多重PU選項。如以上所討論，設備選擇PU組態之目標在於匹配(盡可能地接近)圖像中之真實物件的邊界，以致不同的預測參數可被應用於不同的真實物件。
區塊尺寸和形狀及PU是基於編碼器的決定，於控制器343之控制下。當前方法係涉及針對許多方向進行許多TU樹狀結構之試驗、取得各等級上之最佳「成本」。於此，成本可被表示為得自各區塊結構之失真、或雜訊、或誤差、或位元率的測量。因此，編碼器可嘗試在以上所討論之樹狀結構和階層下所容許者之內的區塊尺寸和形狀之二或更多(或及甚至所有可能的)排列，在選擇其針對某所需的品質測量提供最低位元率、或針對所需的位元率提供最低失真(或誤差、或雜訊、或這些測量之組合)、或這些測量之組合的試驗之一以前。
給定特定PU組態之選擇，則各種等級的分裂可被應用以產生相應的TU。參考列1100，於64×64 PU之情況 下，此區塊尺寸針對使用為TU是太大的，而因此第一等級的分裂(從「等級0」(未分裂)至「等級1」)是必要的，其導致四個32×32亮度TU之陣列。這些之每一者可接受樹狀階層中之進一步分裂(從「等級1」至「等級2」)如所需，以其分裂在轉變或量化該TU被執行前被履行。TU樹中之等級的最大數目係由HEVC文件所限制(舉例而言)。
其他的選項被提供給PU尺寸及形狀於64×64亮度像素CU之情況。這些被限制僅使用以內編碼圖像，以及(於某些情況下)以所謂的AMP選項致能。AMP指的是非對稱動作分割並容許PU被非對稱地分割。
類似地，於某些情況下，選項被提供給TU尺寸及形狀。假如NQST(非方形四倍樹狀轉變，基本上容許非方形TU)被致能，則分裂為等級1及/或等級2可被執行如所示，而假如NQST未被致能，則TU尺寸依循該CU尺寸之個別最大TU的分裂形態。
類似的，選項被提供給其他CU尺寸。
除了圖18A和18B中所示之圖形表示以外，相同資訊之數字部分被提供於後續表中，雖然圖18A和18B中之表示被視為限定性的。「n/a」指示其不容許之模式。水平像素尺寸被首先引述。假如第三數字被提供，則其係有關該區塊尺寸之例子的數目，如於(水平)×(垂直)×(例子數)區塊。N為整數。
4：2：0、4：2：2及4：4：4區塊結構變異
已理解其4：2：0及4：4：4技術兩者均具有方形PU區塊以供內預測編碼。此外，目前4：2：0技術允許4×4像素PU及TU區塊。
於本發明之實施例中，因此提議其針對4：4：4技術，針對CU區塊之遞迴被允許向下至4×4像素而非8×8像素，因為如上所述：於4：4：4模式中，亮度與色度區塊將為相同尺寸(亦即，色度資料未被次取樣)而因此針對4×4 CU並無PU或TU將需為少於4×4像素之已容許的最小值。
類似地，於4：4：4技術中，於本發明之一實施例中，每一Y、Cr、Cb頻道(或者Y與兩個Cr、Cb頻道一起)可具有個別的CU樹狀階層。一旗標可接著被用以告知應使用哪個階層或階層之配置。此方式亦可被用於4：4：4 RGB顏色空間技術。然而，替代地，色度和亮度之樹狀階層可為獨立的。
於4：2：0技術之8×8 CU的範例中，如此導致四個4×4亮度PU及一個4×4色度PU。因此於4：2：2技術中，具有色度資料的兩倍之多，一選項係於此情況下具有兩個4×4色度PU，其中(例如)底部色度區塊將於位置上相應於底部左邊亮度區塊。然而，已理解於此情況下使用一個非方形4×8亮度PU將更為對齊4：2：0色度格式之配置。
於4：2：0技術中，原則上有一些非方形TU區塊允 許於間預測編碼之某些類型，但非於內預測編碼。然而，於間預測編碼時，當非方形四倍樹狀轉變(NSQT)被禁止(其為4：2：0技術之當前預設值)時，所有TU均為方形的。因此效果上4：2：0技術目前係強制為方形TU。例如，16×16 4：2：0亮度TU將相應與個別的Cb & Cr 8×8 4：2：0色度TU。
然而，如先前所述，4：2：2技術可具有非方形PU。因此於本發明之一實施例中，提議針對4：2：2技術容許非方形。
例如，雖然16×16 4：2：2亮度TU可相應與兩個個別的Cb及Cr 8×8 4：2：2色度TU，於此實施例中，其可替代地相應與個別的Cb及Cr 8×16 4：2：2色度TU。
類似地，四個4×4 4：2：2亮度TU可相應與兩個個別的4×4 Cb+Cr 4：2：2 TU，或者於此實施例中可替代地相應與個別的4×8 Cb及Cr 4：2：2 TU。
具有非方形色度TU(而因此較少的TU)可為更有效率的，因為其可能含有較少的資訊。然而，此可能影響此類TU之轉變及掃描程序，如將描述於後。
針對4：4：4，有可能於本發明之實施例中防止亮度區塊向下分裂為(例如)4×4區塊，假如其為進行中之色度區塊以外的進一步分裂。此可導致更有效率的編碼。
最後，針對4：4：4技術，可最好是使TU結構為頻道獨立的、可選擇於序列、圖片、片或更細的等級。
如上所述，NSQT目前被禁止於HEVC之4：2：0技 術。然而，假如針對圖像間預測，NSQT被致能且非對稱動作分割(AMP)被允許，此容許PU被非對稱地分割；因此例如16×16 CU可具有4×16 PU及12×16 PU。於這些情況下，針對4：2：0及4：2：2技術之每一者，區塊結構之進一步考量是重要的。
針對4：2：0技術，於NSQT中，TU之最小寬度/高度可被限制於4個亮度/色度樣本：因此，於非限制性範例中，16×4/16×12亮度PU結構具有四個16×4亮度TU及四個4×4色度TU，其中亮度TU係於1×4垂直區塊配置而色度TU係於2×2區塊配置。
於其中分割為垂直而非水平之一類似配置中，4×16/12×16亮度PU結構具有四個4×16亮度TU及四個4×4色度TU，其中亮度TU係於4×1水平區塊配置而色度TU係於2×2區塊配置。
針對4：2：2技術，於NSQT中，當作一非限制性範例，4×16/12×16亮度PU結構具有四個4×16亮度TU及四個4×8色度TU，其中亮度TU係於4×1水平區塊配置；色度TU係於2×2區塊配置。
然而，已理解其不同結構可被考量於某些情況。因此於本發明之一實施例中，於NSQT中，當作一非限制性範例，16×4/16×12亮度PU結構具有四個16×4亮度TU及四個8×4色度TU，但現在亮度和色度TU係於1×4垂直區塊配置，對齊與PU佈局(相對於四個4×8色度TU之 4：2：0型配置於2×2區塊配置)。
類似地，32×8 PU可具有四個16×4亮度TU及四個8×4色度TU，但現在亮度和色度TU係於2×2區塊配置。
因此，更一般地，針對4：2：2技術，於NSQT中，TU區塊尺寸被選擇以對齊非對稱PU區塊佈局。因此，NSQT有用地容許TU邊界對齊PU邊界，其減少否則可能發生之高頻人為因素(artefacts)
一般而言，本發明之實施例可相關於一種可針對4：2：2格式視頻信號而操作之視頻編碼方法、設備或程式，待編碼影像被劃分為編碼單元、預測單元及轉變單元以供編碼，編碼單元為照度樣本及相應的色彩樣本之方形陣列，有一或更多預測單元於一編碼單元中，且有一或更多轉變單元於一編碼單元中；其中預測單元為預測之基本單元以致單一預測單元內之所有樣本係使用共同預測技術而被預測，而轉變單元為轉變和量化之基礎單元。
非方形轉變模式(諸如NSQT模式)被致能以容許非方形預測單元。選擇性地，非對稱動作分割被致能以容許相應於單一編碼單元的二或更多預測單元之間的非對稱。
控制器343控制轉變單元區塊尺寸之選擇以對齊預測單元區塊佈局，例如，藉由檢測相應於一PU之影像的部分中之影像特徵並針對該PU選擇TU區塊尺寸以使TU邊界對齊影像之部分中的影像特徵之邊緣。
以上所討論之規則規定區塊尺寸之哪些組合是可用的。編碼器可嘗試不同的組合。如以上所討論，試驗可包 括二或更多直到所有可得的選項。試驗編碼程序可被執行依據成本函數度量(metric)及依據成本函數之評價所選擇的結果。
假定有三個等級的變異，依據CU尺寸及形狀、PU尺寸及形狀和TU尺寸及形狀，則此可導致待試驗編碼之大量的排列。為了減少此變異，系統可藉由使用各CU尺寸可容許之PU/TU組態的任意選定一者以針對CU尺寸試驗編碼；接著，已選定了CU尺寸，則可藉由試驗編碼不同的PU(其各具有單一任意選定的TU組態)以選擇PU尺寸和形狀。接著，已選定了CU和PU，系統可嘗試所有可應用的TU組態以選擇一最終TU組態。
另一可能性是某些編碼器可使用區塊組態之固定選擇，或者可容許以上討論中所設定之組合的有限子集。
內預測 4：2：0內預測
現在回到圖22，針對內預測，HEVC容許角度色度預測。
經由介紹，圖22闡明35個可應用於亮度區塊之預測模式，其中33個係指明用以參照當前預測樣本位置110之樣本的方向。剩餘的兩模式為模式0(平面)及模式1(dc)。
HEVC容許色度具有DC、垂直、水平、平面、DM_CHROMA及LM_CHROMA模式。
DM_CHROMA指示其待使用之預測模式係相同於共同位置的亮度PU之預測模式(亦即，圖22中所示的35個之一)。
LM_CHROMA(線性模式色度)指示其共同位置的亮度樣本(適當地向下取樣至頻道比)被用以取得預測的色度樣本。於此情況下，假如亮度PU(DM_CHROMA預測模式將從該亮度PU取得)選擇DC、垂直、水平或平面，則色度預測列中之該項目係使用模式34而被取代。於LM_CHROMA模式中，亮度像素(色度像素係從該些亮度像素所預測)係依據亮度與色度之間的線性關係而被定標(且適當的話應用補償)。此線性關係被取自周圍的像素，且該取得可依區塊接區塊之方式被執行，以解碼器在持續移動至下一個之前解碼一區塊。
值得注意的：預測模式2-34係取樣從45度至225度之角度範圍；換言之，方形之對角線的一半。此可用於4：2：0技術之情況，其(如上所述)僅使用方形色度PU於圖像內預測。
4：2：2內預測變異
然而，同樣如上所述，4：2：2技術可具有矩形(非方形)色度PU，即使當亮度PU為方形時。或確實地，其相反可為真：矩形亮度PU可相應於方形亮度PU。其差異之原因在於：於4：2：2中，色度被水平地次(相對於亮度)取樣而非垂直地。所以亮度區塊與相應色度區塊之寬 高比將預期為不同的。因此，4：2：2格式代表一視頻格式之一範例(且有諸如4：2：0之其他範例)，其他色彩樣本具有較照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度的比係不同於照度垂直解析度相對於色彩垂直解析度的比，以致照度樣本之區塊具有與色彩樣本之相應區塊不同的寬高比。
結果，於本發明之一實施例中，有關對於相應亮度區塊具有不同寬高比之色度PU，可能需要針對該方向之映射表。假設(例如)針對矩形色度PU之1至2寬高比，則例如模式18(當前以135度之角度)可被重新映射至123度。替代地，當前模式18之選擇可被重新映射至當前模式22之選擇，至幾乎相同的效果。
因此，更一般地，針對非方形PU，介於參考樣本的方向與選定的內預測模式之間的不同映射可被提供以比較與方形PU之映射。
又更一般地，任何這些模式(包括非方向性模式)亦可根據經驗證據而被重新映射。
有可能此映射將導致多對一的關係，使得模式之完整集合的規格對於4：2：2色度PU而言是多餘的。於此情況下，例如，可能僅有17個模式(相應於角度解析度的一半)是需要的。替代地或另加地，這些模式可被角度地分佈以非均勻方式。
類似地，用於參考樣本(當預測樣本位置上之像素時)上之平順化過濾器可被不同地使用；於4：2：0技術 中，其僅被用於平順化亮度像素，而非色度像素。然而，於4：2：2及4：4：4技術中，此過濾器亦可被用於色度PU。於4：2：2技術中，再次地過濾器可回應於PU之不同寬高比而被修改，例如僅被用於接近水平模式之子集。模式之範例子集最好是2-18及34；或更理想的7-14。於4：2：2中，僅有參考樣本之左邊欄位的平順化可被執行於本發明之實施例中。
一般而言，於即將描述之實施例中，第一預測方向被界定相關於第一寬高比之第一柵格，關於一組待預測之當前樣本；且一方向映射被應用於預測方向以產生一相關於不同寬高比之第二柵格而界定的第二預測方向。第一預測方向可被界定關於包括當前照度樣本之照度樣本的方形區塊；且第二預測方向可被界定關於包括當前色彩樣本之色彩樣本的矩形區塊
這些配置被更詳細地討論於後。
4：4：4內預測變異
於4：4：4技術中，色度和亮度PU為相同尺寸，而因此色度PU之內預測模式可相同於共同位置的亮度PU(因此藉由無需編碼分離的模式而節省位元流中之某些額外負擔)、或者替代地，其可被獨立地選擇。
因此，於後者的情況下，於本發明之一實施例中，可具有1、2或3個不同的預測模式，針對CU中之每一PU。
於第一範例中，Y、Cb及Cr PU可全使用相同的內預測模式。
於第二範例中，Y PU可使用一個內預測模式，而Cb及Cr PU可均使用另一獨立地選擇的內預測模式。
於第三範例中，Y、Cb及Cr PU各使用個別獨立地選擇的內預測模式。
應理解：針對多數色度頻道(或各色度頻道)具有獨立的預測模式將增進顏色預測準確性。但此需要附加的資料額外負擔以將獨立的預測模式傳遞為已編碼資料的部分。
為了減輕此負擔，模式數目之選擇可被指示以高階語法(例如，以序列、圖像、或片等級)。替代地，獨立模式數目可被取得自視頻格式；例如，GBR可具有高達3，而YCbCr可被限制於高達2。
除了獨立地選擇模式之外，可用的模式可被容許於4：4：4技術中不同於4：2：0技術。
例如，當亮度和色度PU為相同尺寸於4：4：4中時，色度PU可由於對所有可得的35+LM_CHROMA+DM_CHROMA方向之存取權而受惠。因此，針對各具有獨立預測模式之Y、Cb及Cr的情況，則Cb頻道可具有對DM_CHROMA & LM_CHROMA之存取權，而Cr頻道可具有對DM_CHROMA_Y、DM_CHROMA_Cb、LM_CHROMA_Y及LM_CHROMA_Cb之存取權，其中這些係以對Y或Cb色度頻道之參考來取代對亮度頻道之參 考。
當亮度預測模式係藉由取得大部分可攜模式之列表並傳送該列表之指標而被告知時，則假如色度預測模式為獨立的，其可能必須針對各頻道取得大部分可攜模式之獨立列表。
最後，以一類似於如上針對4：2：2情況所述之方式，於4：4：4技術中，當預測樣本位置上之像素時使用於參考樣本上之平順化過濾器可以類似於亮度PU之方式被用於色度PU。目前，[1,2,1]低通過濾器可在內預測之前被應用於參考樣本。此僅被用於亮度TU，當使用某些預測模式時。
可用於色度TU的內預測模式之一係將預測樣本基於共同位置的亮度樣本。此一配置被概略地闡明於圖19中，其顯示由Cb、Cr及Y頻道中之小方形所代表的TU 1200之陣列(來自一來源影像之一區)，其顯示於Cb和Y頻道中及於Cr和Y頻道中的影像特徵(概略地由暗和亮陰影方塊1200所表示)之間的特殊對齊。於此範例中，有利的是迫使色度TU將預測樣本基於共同位置的亮度樣本。然而，並非總是其影像特徵於三個頻道之間對應的情況。事實上，某些特徵可能僅出現於頻道之一或二中，且通常三個頻道之影像可能不同。
於實施例中，針對Cr TU，LM_Chroma可選擇性地基於來自Cb頻道之共同位置的樣本(或者，於其他實施例中，其依存性可為反向的)。此一配置被顯示以概略形式 於圖20中。於此，空間對齊的TU被顯示介於Cr、Cb和Y頻道之間。標示為「來源」之另一組TU為彩色圖像之概略表示(整體所見)。來源影像中所見之影像特徵(左上方三角形及右下方三角形)事實上不代表照度之改變，而僅為介於兩三角區之間的照度之改變。於此情況下，使Cr之LM_Chroma基於照度樣本將產生不佳的預測，但使其基於Cb樣本則可提供較佳的預測。
有關應使用哪個LM_Chroma模式之決定可由控制器343及/或模式控制器520來做出，基於不同選項之試驗編碼(包括使LM_Chroma基於共同位置的亮度或共同位置的色度樣本之選項)，其有關應選擇哪個模式之決定係藉由針對不同試驗編碼以存取成本函數(類似於上述者)而做出。成本函數之範例為雜訊、失真、誤差率、或位元率。來自接受其提供一或更多這些成本函數之最低者的試驗編碼之那些中的模式被選擇。
圖21概略地闡明用於獲得本發明之實施例中之內預測的參考樣本模式之方法。於觀看圖21時，應注意其編碼係依據掃描型態而被執行，以致(一般而言)當前待編碼區塊之左上方的區塊之已編碼版本可用於編碼程序。有時候係使用左下或右上的樣本，假如其已被事先編碼為當前LCU內之其他已編碼TU的部分。舉例而言，參考如上所述之圖13。
陰影區域1210代表當前TU，亦即，當前正被編碼的TU。
於4：2：0及4：2：2中，緊接於當前TU之左邊的像素行不含共同位置的照度及色彩樣本，由於水平次取樣。換言之，此係因為4：2：0及4：2：2格式具有如照度像素之一半的色彩像素(於水平方向)，因此並非每一照度樣本位置具有共同位置的色彩樣本。因此，雖然照度樣本可出現在緊接於TU之左邊的像素行中，色彩樣本並未出現。因此，於本發明之實施例中，位於當前TU左邊兩樣本的行被使用以提供參考樣本給LM_Chroma。注意：情況在4：4：4中是不同的，其中緊接於當前TU之左邊的行確實含有共同位置的亮度及色度樣本。此行因而可被用以提供參考樣本。
參考樣本被使用如下。
於LM_Chroma模式下，預測的樣本係依據線性關係而被取自重建的亮度樣本。因此，一般而言，可以說於TU內之預測的色彩值由下式提供：PC=a+bPL
其中PC為色彩樣本值，PL為於該樣本位置上之重建的照度樣本值，及a和b為常數。這些常數係針對特定區塊而得，藉由檢測就在該區塊上方之列中以及就在該區塊左方之行中的重建亮度樣本與色度樣本之間的關係，這些為已被編碼之樣本位置(參見上述)。
於本發明之實施例中，常數a和b被求得如下：a=R(PL’,PC’)/R(PL’,PL’)
其中R代表線性(最少方形)回歸函數，而PL’及 PC’為個別地來自相鄰列及行之照度及色彩樣本，如以上所討論，以及：b=mean(PC’)-a.mean(PL’)
針對4：4：4，PL’及PC’值被取自緊接在當前TU左方之行、及緊接在當前TU上方之列。針對4：2：2，PL’及PC’值被取自緊接在當前TU上方之列及在離開當前TU之左邊緣兩個樣本位置之行。針對4：2：0(其被垂直地及水平地次取樣)，PL’及PC’值將理想地被取自當前TU上方兩列之列，但實際上是被取自當前TU上方一個樣本位置的相鄰區塊中之列、以及在離開當前TU之左邊緣兩個樣本位置的相鄰區塊中之行。其原因是為了避免必須維持資料之額外的整列於記憶體中。因此於此方面，4：2：2及4：2：0被處置以類似的方式。
因此，這些技術適用於具有色彩預測模式之視頻編碼方法，其中代表影像之一區的色彩樣本之當前區塊係藉由取得並編碼色彩樣本相對於代表影像之相同區的一共同位置區塊的照度樣本(諸如重建的照度樣本)之關係而被編碼。此關係(諸如線性關係)係藉由比較來自相鄰已編碼區塊之共同位置的(另表達為相應位置的)照度及色彩樣本。色彩樣本係依據該關係而被取得自照度樣本；而介於預測色彩樣本與實際色彩樣本之間的差異被編碼為殘留資料。
有關第一取樣解析度(諸如4：4：4)，其中色彩樣本具有與照度樣本相同的取樣率，共同位置的樣本為鄰近 當前區塊之樣本位置中的樣本。
有關第二取樣解析度(諸如4：2：2或4：2：0)，其中色彩樣本具有較照度樣本低的取樣率，來自相鄰已編碼區塊之共同位置的照度和色彩樣本之最近行或列被用以提供共同位置的樣本。或者其中，於第二取樣解析度為4：2：0取樣解析度之情況下，相應位置的樣本為鄰近當前區塊之相應列的樣本以及相應位置的照度和色彩樣本之最近行或列，來自相鄰已編碼區塊。
圖22概率地闡明亮度樣本之可用的預測角度。當前像素被預測為顯示於圖形之中央為像素1220。較小的點1230代表相鄰像素。那些位於當前像素之上或左側者係可用為用以產生預測之參考樣本，因為其已被先前地編碼。其他像素當前為未知(於預測像素1220之時刻)且本身將於適當時機被預測。
各已編號的預測方向係指向其被用以產生當前預測像素之當前區塊的上或左邊緣上之來自一群候選參考樣本的參考樣本1230。於較小區塊之情況下，其中預測方向係指向介於參考樣本之間的位置，則使用介於相鄰參考樣本之間的線性內插(樣本位置之任一側係由當前預測模式所指示之方向來指向)。
現在回到色度樣本之角度內預測，針對4：2：0，由於色度樣本之相對稀少而有較少的預測方向可得。然而，假如選擇了DM_CHROMA模式則當前色度區塊將使用如共同位置亮度區塊之相同預測方向。於是，此表示內預測 之亮度方向亦可用於色度。
然而，針對4：2：2中之色度樣本，可視為反本能地使用如亮度之相同預測演算法(當選擇DM_CHROMA時)，假定色度區塊現在具有與亮度區塊不同的寬高比。例如，方形亮度陣列的樣本之45度線仍應映射至色度樣本之45度線，雖然具有矩形尺寸樣本之陣列。將矩形柵格疊置於方形柵格之上指示其45度線將接著實際上映射至26.6度線。
圖23概略地闡明如應用於4：2：2中之色度像素的亮度內預測方向，針對待預測之當前像素1220。注意：水平上有垂直上一半的像素，因為4：2：2具有在色度頻道一半的水平取樣率(相較於亮度頻道)。
圖24概略地闡明4：2：2色度像素之轉變或映射至方形柵格，及因而闡明此轉變如何改變預測方向。
亮度預測方向被顯示為虛線1240。色度像素1250被再映射至方形柵格，其提供相應亮度陣列之寬度1260的一半之矩形陣列(諸如圖22中所顯示者)。圖23中所示之預測方向已被再映射至矩形陣列。可看出針對一些方向對(一對為一亮度方向及一色度方向)，有重疊或接近關係之任一者。例如，於亮度陣列中之方向2實質上位於色度陣列中之方向6之上。然而，亦將注意：某些亮度方向(大約其一半)並無相應的色度方向。一範例為編號3之亮度方向。同時，某些色度方向(2-5)無相等物於亮度陣列中，而某些亮度方向(31-34)無相等物於色度陣列 中。但一般地，圖24中所示之疊置展現其將不適於使用相同角度於亮度及色度頻道兩者。
圖33概略地闡明一種用以修改一界定預測方向之「角度步進」的配置(其可被實施為控制器343之功能的部分)。於圖33中，角度步進被供應至一修改器1500，藉由利用諸如由輸入角度步進所指引之查找表等支援資料1510、映射輸入角度步進至輸出角度步進、或資料界定一預定的修改演算法或函數，修改器1500將輸入角度步進所界定的方向映射至輸出角度步進所界定的方向上。
但在詳細地討論圖33之操作前，將提供關於預測角度(及特別是「角度步進」)之取得的一些進一步背景。
如以所討論，於內預測操作中，當前區塊內之樣本可被預測自一或更多參考樣本。這些被選自一群候選參考樣本，其形成當區塊1560上方之列及當前區塊左邊之行。圖33概略地闡明候選參考樣本之此一列1520及行1530。
於候選參考樣本內，將用於特定預測操作之實際樣本係由預測方向所指向。此被表達為「角度步進」。針對一明顯垂直的預測方向(其於本文背景中為一將處理列1520中之參考樣本者)，角度步進為偏移至一樣本位置1540(其被垂直地移位於所預測之當前樣本的位置1550上方)之左邊或右邊。針對一明顯水平的預測方向(其於本文背景中為一將處理行1530中之參考樣本者)，角度步進為偏移至一樣本位置1570(其被水平地移位於所預 測之當前樣本的位置1550左邊)之上方或下方。
因此應理解其角度步進可為零(於純水平或純垂直預測方向之情況下)，或者可代表任一意思(上/下/左/右)中之移位。
事實上，為了本發明之實施例內的計算之目的，行1530及列1520可被視為提供一組候選參考樣本之單一線性陣列，從行1530之底部開始並前進至列1520之右端。於本發明之實施例中，線性陣列被過濾(藉由一過濾器，其形成預測器530之部分)以沿著線性陣列應用一平順化或低通過濾操作。適當平順化過濾器之一範例為標稱化的1-2-1過濾器，其也就是說過濾器取代一特定樣本(僅為了作用為參考樣本之目的)以左邊樣本(於線性陣列中)之1/4、該樣本之1/2及右邊樣本(於線性陣列中)之1/4的總和。平順化過濾器可被應用於所有陣列或者應用於陣列之子集(諸如從列或行開始之樣本)。
為了取得色度之適當預測角度，當(a)DM_CHROMA被選擇及(b)目前使用中之DM_CHROMA模式指示其色度預測方向應為共同位置的亮度區塊之方向時，則下列程序由修改器1500所應用以修改角度步進值。注意：該程序指的是角度步進(step)之反數。此值可被使用為執行以產生預測之計算的便利特徵，但其為本說明書中很重要的角度步進之變異。
(i)依據亮度方向以取得內預測角度步進(及選擇性地，其反數)。
(ii)假如亮度方向是顯著地垂直的(亦即，例如，編號從18至34內之模式)，則內預測角度步進被減半且其反數被乘兩倍。
(iii)否則，假如亮度方向是顯著地水平的(亦即，例如，編號從2至17內之模式)，則內預測角度步進被乘兩倍且其反數被減半。
這些計算代表藉由預定演算法之修改器1500以修改角度步進值之應用的範例，以將關於樣本位置之亮度柵格所取得之方向映射至一可應用於4：2：2或樣本位置之其他子取樣色度柵格的方向。可藉由修改器1500替代地參考一個將輸入角度步進映射至輸出角度步進的查找表而獲得類似的結果。
因此，於這些實施例中，預測方向係界定相對於一群候選參考樣本之樣本位置，該群候選參考樣本包含個別置於該組當前待預測樣本之上方及左邊的水平列及垂直行樣本。預測器530係實施過濾操作，其(如上所述)將該群候選參考樣本排列為參考樣本之一線性陣列；並將一平順化過濾器應用於該線性陣列參考樣本以一沿著該線性陣列之方向。
執行映射之程序可被執行(例如)相關於角度步進，其中當前樣本之預測方向被界定以一相關的角度步進；針對一明顯垂直預測方向之角度步進為一沿著該群候選參考樣本之樣本位置的水平列之補償，相對於其被垂直地移位自當前樣本之該列中的樣本位置；針對一明顯水平預測方 向之角度步進為一沿著該群候選參考樣本之樣本位置的垂直列之補償，相對於其被水平地移位自當前樣本之該行中的樣本位置；且沿著由補償所指示之水平列或垂直行的樣本位置提供了對於將使用於當前樣本之預測的樣本位置之指標。
於一些實施例中，應用方向映射之步驟可包含對相應於第一預測方向之角度步進的預定函數。此一函數之範例被描述如上，亦即：依據第一預測方向以取得角度步進；及(i)假如第一預測方向是明顯垂直的，則將個別角度步進減半以產生第二預測方向之角度步進；或(ii)假如第一預測方向是明顯水平的，則將個別角度步進加倍以產生第二預測方向之角度步進。
於本發明之實施例中，假如角度步進(諸如以上所取得之已修改步驟)不是整數，則角度步進被用以界定用於內插之該群候選參考樣本內的一群二或更多樣本位置(例如，於該方向所指出之位置的任一邊的兩個樣本)，以提供當前樣本之預測。
於本發明之其他實施例中，應用方向映射之步驟包含使用第一預測方向以索引一查找表，該表提供第二預測方向之相應值。
依據本發明之實施例，檢測第一預測方向之步驟可包含：於編碼操作之情況下，依據二或更多候選預測方向之試驗以選擇預測方向；或者於解碼操作之情況下，檢測其 界定一與待解碼視頻資料關聯的預測方向之資訊。亦即，區別編碼與解碼系統之實施例的一般要點如下：於解碼器中，某些參數被提供於已編碼資料或者與其關聯者中。於一編碼器中，此類參數被產生以供將已編碼資料傳遞至解碼器。
於本發明之實施例中，第一預測方向被用於一組樣本之照度樣本的預測；而由該應用步驟從第一預測方向所取得的第二預測方向被用於該組樣本之色彩樣本的預測。
本發明之實施例可提供一種視頻編碼或解碼方法，其中照度及第一和第二色彩成分樣本係依據與一待預測樣本關聯的預測模式而被預測，此方法包含從第一色彩成分之樣本預測第二色彩成分之樣本。
本發明之實施例可提供一種視頻編碼或解碼方法，其中係依據與一待預測樣本關聯之預測方向以從其他個別參考樣本預測複數組樣本，該預測方向界定一樣本位置，相對於一群相對於該組當前待預測樣本而配置的候選參考樣本，該方法包含：將該組候選參考樣本排列為參考樣本之線性陣列；及將平順化過濾器應用於參考樣本之線性陣列的子集，依沿著線性陣列之方向。
本發明之實施例可提供一種視頻編碼或解碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自從相同影像所取得之其他個別參考樣本，色彩樣本具有較照度樣本更低的水平及/或垂直取樣 率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，色彩樣本代表第一及第二色彩成分；此方法包含：選擇一預測模式，其界定用以預測第一色彩成分之當前色彩樣本的一或更多參考樣本或值之選擇；及選擇一不同的預測模式，其界定用以預測第二色彩成分之當前色彩樣本(與第一色彩成分之當前色彩樣本共同位置)的一或更多參考樣本或值之不同選擇。
本發明之實施例可提供一種視頻編碼或解碼方法，其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，色彩樣本具有較照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，此方法包含：根據寬高比之差異以將一不同的個別預測演算法應用於照度及色彩樣本。
圖33顯示使用中之此技術的範例。角度步進1580依據亮度柵格而被取得。(有可能其亦被使用關於亮度樣本預測，但針對其依據亮度柵格及程序而被取得的本討論是足夠的。換言之，其實際上無法被用於亮度預測)。4：2：2色度樣本1580之陣列被顯示為相同柵格上之雙倍寬 度；但使用相同的預測方向1590指向不同的參考樣本(來自垂直定位樣本1540之不同補償)於此一情況下。因此，角度步進係依據上述程序而被修改以提供修改的角度步進1600，其係指向正確的色度參考樣本，以代表色度柵格中之相同預測方向。
因此，本發明之這些實施例係有關視頻編碼或解碼方法、設備或程式，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本。於諸如4：2：2之模式中，色彩樣本具有較照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比。簡言之，此表示照度樣本之區塊具有與色彩樣本之相應區塊不同的寬高比。
框內預測器530(例如)可操作為檢測器以針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；並操作為方向映射器以將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格的第二預測方向。因此，預測器530代表方向映射器之範例。預測器540可提供另一相應範例。
於本發明之實施例中，用以檢測第一預測方向之第一柵格係針對照度或色彩樣本之一的樣本位置而被界定，及用以檢測第二預測方向之第二柵格係針對照度或色彩樣本之另一的樣本位置而被界定。於本說明書所討論之特定範例中，照度預測方向可被修改以提供色彩預測方向。但亦 可使用相反的方式。
此技術特別可應用於內預測，以致參考樣本為取得自(例如，重建自取得自如下之壓縮資料)如待預測樣本之相同個別影像的樣本。
於至少某些配置中，第一預測方向係針對照度樣本(包括當前照度樣本)之方形區塊而被界定；及第二預測方向係針對色彩樣本(包括當前色彩樣本)之矩形區塊而被界定。
得以提供獨立的預測模式給兩個色彩成分。於此一配置中，色彩樣本包含第一及第二色彩成分之樣本，及該技術包含針對該第一色彩成分(諸如Cb)以應用以上步驟所討論之方向映射；及針對該第二色彩成分(諸如Cr)以提供不同的預測模式。
視頻資料可為4：2：2格式，舉例而言。
一般而言，本發明之實施例可提供獨立的預測模式給色彩成分(例如，分別地給照度及色彩成分之每一者)。這些實施例係有關視頻編碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其取得自該相同影像之其他個別參考樣本，色彩樣本具有較照度樣本更低的水平及/或垂直取樣率以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之區塊具有與色彩樣本之相應區塊不同的寬高比，而色彩樣本代表第一及第二色彩樣本。
框內模式選擇器520選擇一預測模式，其界定一或更多參考樣本的選擇以供預測第一色彩成分(諸如Cb)之當前色彩樣本。其亦選擇一不同的預測模式，其界定一或更多參考樣本的不同選擇以供預測第二色彩成分(諸如Cr)之當前色彩樣本，其係與第一色彩成分之當前色彩樣本位於相同位置。
一參考樣本過濾器可選擇性地被應用於水平樣本或垂直樣本(或兩者)。如以上所討論，過濾器可為3分接頭標稱化的「1 2 1」過濾器，當前應用於除了左下及右上之外的所有亮度參考樣本(N×N區塊之樣本被集合在一起以形成尺寸2N+1之單一1D陣列，並接著被選擇性地過濾)。於本發明之實施例中，其僅被應用於4：2：2之第一(左手邊緣)或最後(頂部邊緣)N+1色度樣本，但注意其左下、右上及左上於是將不被調整；或是針對4：2：2及4：4：4之所有色度樣本(如同亮度)。
本發明之實施例亦可提供視頻編碼或解碼方法、設備或程式，其中照度及第一和第二色彩成分樣本係依據一關聯與待預測樣本之預測模式而被預測(例如，自其他個別參考樣本或值)，其涉及來自第一色彩成分之樣本的第二色彩成本。於一些實施例中，與待預測樣本關聯的預測模式可指示一預測方向，其界定該樣本所將被預測自之一或更多其他個別參考樣本。
本發明之實施例亦可提供視頻編碼或解碼方法、設備或程式，其中照度及第一和第二色彩成分樣本係依據一關 聯與待預測樣本之預測方向而被預測自其他個別參考樣本，其涉及過濾參考樣本。
如參考圖19及20所討論，有可能其不同的預測模式包含一模式，藉由該模式第二色彩成分之樣本被預測自第一色彩成分之樣本。
注意：模式0及1並非角度預測模式而因此未被包括於此程序中。如上所示之程序的效果係用以將色度預測方向映射至圖24中之亮度預測方向上。
針對4：2：0，當純水平預測模式(亮度模式10)或純垂直預測模式(亮度模式26)被選擇時，則所預測的TU之上或左邊緣接受僅針對亮度頻道之過濾。針對水平預測模式，頂部列被過濾於垂直方向。針對垂直預測模式，左邊行被過濾於水平方向。
於水平方向過濾一行樣本可被理解為將水平定向的過濾器應用於該樣本行順序中之各樣本。因此，針對一獨立樣本，其值將由過濾器之動作所修改，基於從該樣本及水平方向上移開自該樣本之樣本位置上的一或更多其他樣本之當前值所產生的已過濾值(亦即，相關的該樣本之左及/或右邊的一或更多其他樣本)。
於垂直方向過濾一列樣本可被理解為將垂直定向的過濾器應用於該樣本列順序中之各樣本。因此，針對一獨立樣本，其值將由過濾器之動作所修改，基於從該樣本及垂直方向上移開自該樣本之樣本位置上的一或更多其他樣本之當前值所產生的已過濾值(亦即，相關的該樣本之上及 /或下方的一或更多其他樣本)。
上述邊緣像素過濾程序之一目的在於用以減少預測中基於邊緣效果的區塊，藉此用以減少殘留影像資料中之能量。
於本發明之實施例中，一相應的過濾程序亦被提供給4：4：4及4：2：2中之色度TU。考量水平次取樣，一提議是僅過濾4：2：2中之色度TU的頂部列，而非過濾4：4：4中之頂部列及左邊行兩者(適當地，依據選定的模式)。被認為適當的是僅於這些區中過濾以避免將太多有用的細節過濾掉，其(假如過濾掉的話)將導致殘留資料之增加的能量。
針對4：2：0，當DC模式被選擇時，預測的TU之頂部及/或左邊緣便接受僅針對亮度頻道之過濾。
過濾可為致使於DC模式中，過濾器進行一針對兩邊緣上之所有樣本的(1×相鄰外部樣本+3*邊緣樣本)/4平均化運算。然而，針對左上方，過濾器函數為(2×當前樣本+1×上樣本+1×左樣本)/4。
H/V過濾器為介於相鄰外部樣本與邊緣樣本之間的平均。
於本發明之實施例中，此過濾程序亦被提供給4：4：4及4：2：2中之色度TU。再次地，考量水平次取樣，於本發明之某些實施例中，僅有色度樣本之頂部列針對4：2：2而被過濾，但色度TU之頂部列及左邊行係針對4：4：4而被過濾。
因此，此技術可應用於有關視頻編碼或解碼方法、設備或程式，其中於4：4：4格式或4：2：2格式中之照度及色彩樣本係依據一關聯與待預測樣本之區塊的預測方向而被預測自其他個別樣本。
於本技術之實施例中，預測方向係關於待預測當前區塊而被檢測。色彩樣本之預測區塊係依據由預測方向所界定之其他色彩樣本而被產生。假如測得的預測方向為實質上垂直的(例如，於其中n為(例如)2之完全垂直模式的+/- n角度模式內)，則左邊行樣本被過濾(例如，於水平方向)於色彩樣本之預測區塊。或者，假如測得的預測方向為實質上水平的(例如，於其中n為(例如)2之完全水平模式的+/- n角度模式內)，則頂部列樣本被過濾(例如，於垂直方向)於色彩樣本之預測區塊。接著介於已過濾的預測色彩區塊與實際色彩區塊之間的差異被編碼(例如)為殘留資料。替代地，此測試可針對完全垂直或水平模式而非實質上垂直或水平模式。+/- n之容限可被應用於該些測試之一(垂直或水平)而非另一。
間預測
注意：HEVC中之間預測已容許矩形PU，因此4：2：2模式及4：4：4模式已相容與PU間預測處理。
視頻影像之各框為實際景象之離散取樣，而因此各像素為顏色和亮度之真實世界梯度的步進近似。
有鑑於此，當從先前視頻框中之值預測新視頻框中之 Y、Cb或Cr值時，該先前視頻框中之像素被內插以產生原始真實世界梯度的較佳評價，以容許新像素之亮度或顏色的更準確選擇。因此，用以指向視頻框之間的動作向量不限於整數像素解析度。反之，其可指向內插影像內之子像素位置。
4：2：0間預測
現在參考圖25及26，於如上所述之4：2：0技術中，通常8×8亮度PU 1300將關聯與Cb及Cr 4×4色度PU 1310。因此，為了內插亮度及色度像素直到相同的有效解析度，不同的內插過濾器被使用。
例如，針對8×8 4：2：0亮度PU，內插為1/4像素，而因此8分接頭×4過濾器被首先水平地應用，且接著相同的8分接頭×4過濾器被垂直地應用，以致亮度PU被有效地伸展4次於各方向，以形成如圖25中所示之內插陣列1320。同時，相應的4×4 4：2：0色度PU被1/8像素內插以產生相同的最終解析度，而因此4分接頭×8過濾器被首先水平地應用，接著相同的4分接頭×8過濾器被垂直地應用，以致4：2：0色度PU被有效地伸展8次於各方向，以形成如圖26中所示之陣列1330。
4：2：2間預測
現在將參考圖27及28以描述4：2：2之類似配置，其闡明亮度PU 1350及一對相應的色度PU 1360。
參考圖28，如先前所述，於4：2：2技術中，色度PU 1360可為非方形的，而針對8×8 4：2：2亮度PU之情況，每一Cb及Cr頻道通常將為寬4×高8的4：2：2色度PU。注意：色度PU被描繪(為了圖28之目的)為非方形像素之方形形狀陣列，但一般而言，可注意其PU 1360為4(水平)×8(垂直)像素陣列。
雖然其可能因此使用現存的8分接頭×4亮度過濾器垂直地於色度PU上，於本發明之實施例中，其已被理解該現存的4分接頭×8色度過濾器將滿足垂直內插如實際上，僅有興趣於內插色度PU之甚至小部分位置。
因此，圖27顯示如前內插以8分接頭×4過濾器之8×8 4：2：2亮度PU 1350、及內插以4分接頭×8色度過濾器之4×8 4：2：2色度PU 1360，於水平及垂直方向，但僅以其用於形成垂直方向上之內插影像的甚至小部分結果。
這些技術可應用於使用影像間預測以編碼輸入視頻資料之視頻編碼或解碼方法、設備或程式，其中各色彩成分具有照度成分之水平解析度的1/Mth及照度成分之垂直解析度的1/Nth，其中M及N為等於1或更大的整數。例如，針對4：2：2，M=2、N=1。針對4：2：0，M=2、N=2。
框儲存570可操作以儲存當前影像前之一或更多影像。
內插過濾器580可操作以內插已儲存影像之預測單元 的更高解析度版本，以致一已內插的預測單元具有該已儲存影像之相應部分的P倍之水平解析度及該已儲存影像之相應部分的Q倍之垂直解析度，其中P及Q為大於1的整數。於當前範例中，P=Q=4以致內插過濾器580可操作以產生具1/4樣本解析度之已內插影像。
動作評價器550可操作以檢測介於當前影像與一或更多已內插儲存影像之間的影像間動作，以產生介於當前影像的預測單元與一或更多先前影像的區域之間的動作向量。
動作補償預測器540可操作以產生當前影像之預測單元的動作補償預測，針對由個別動作向量所指出的已內插儲存影像。
回到內插過濾器580之操作的討論，此過濾器之實施例可操作以將xR水平及xS垂直內插過濾器應用於一儲存影像之色彩成分，以產生已內插色彩預測單元，其中R等於(U×M×P)而S等於(V×N×Q)，U及V為等於1或更大的整數；並次取樣該已內插色彩預測單元，以致其水平解析度被除以U之因數且其垂直解析度被除以V之因數，藉此獲致MP×NQ樣本之區塊。
因此，於4：2：2之情況下，內插過濾器580將x8內插應用於水平及垂直方向，但接著以2之因數垂直地次取樣，例如藉由使用已內插輸出中之每第二個樣本。
此技術因此容許相同(例如，x8)過濾器被使用於4：2：0及4：2：2，但於4：2：2情況下需要次取樣之 進一步步驟。
於本發明之實施例中，如先前之討論，該已內插色彩預測單元具有其使用相同的xR及xS內插過濾器所內插之4：2：0格式預測單元的樣本之兩倍高度。
使用這些技術可避免或減輕提供不同過濾器之需求，而特別是藉由使用相同的xR水平及xS垂直內插過濾器，針對4：2：0輸入視頻資料及4：2：2輸入視頻資料。
如以上之討論，次取樣該已內插色彩預測單元之步驟包含使用垂直方向上該已內插色彩預測單元之每第V個樣本，及/或使用垂直方向上該已內插色彩預測單元之每第U個樣本。
本發明之實施例可涉及取得一預測單元之照度動作向量；並獨立地取得該預測單元之一或更多色彩動作向量。
於本發明之某些實施例中，R與S之至少一者係等於2或更大，且於本發明之實施例中，xR水平及xS垂直內插過濾器亦被應用於儲存影像之照度成分。
4：4：4間預測變體
藉由延伸，僅使用現存4分接頭×8色度過濾器之甚至小部分結果的相同原理可垂直地暨水平地應用於8×8 4：4：4色度PU。
進一步針對這些範例，x8色度過濾器可被用於所有內插，包括亮度。
進一步間預測變體
於動作向量(MV)之一實施方式中，一向量被產生給P片中之一PU以及二向量被產生給B片中之一PU(其中P片從先前框取得預測，而B片從先前及後續框取得預測，以一種類似於MPEGP及B框之方式)。值得注意的，於4：2：0技術之此實施方式中，向量對於所有頻道是共同的，而此外，色度資料無需被用以計算動作向量。換言之，所有頻道係使用一基於亮度資料之動作向量。
於本發明之一實施例中，於4：2：2技術中，色度向量可被取得以獨立自亮度(亦即，用於Cb和Cr頻道之單一向量可被分離地取得)，且於4：4：4技術中，色度向量可進一步針對Cb和Cr頻道之每一者為獨立的。
本發明之實施例可提供一種視頻編碼或解碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測模式而被預測自從相同影像所取得之其他個別參考樣本，色彩樣本代表第一及第二色彩樣本；此方法包含：針對至少一些樣本，選擇相同的預測模式給相應於一影像區之每一照度及色彩成分。
本發明之實施例可提供一種視頻編碼或解碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測模式而被預測自從相同影像所取得之其他個別參考樣本，色彩樣本代表第一及第二色彩樣本；此方法包含：針對至少一些樣本，選擇不同的個別預測模式給相應於一影 像區之每一照度及色彩成分。
於任一情況下，相同預測模式或不同的個別預測模式之任一者可被用於相應於一影像區之每一照度及色彩成分，依據影像順序、影像、或影像之區而做出選擇。
為了於一編碼操作中選擇一預測模式技術，實施例可(例如)使用針對照度及色彩成分之相同預測模式以執行影像區之第一試驗編碼；使用針對照度及色彩成分之不同的個別預測模式以執行該影像區之第二試驗編碼；及根據由第一和第二試驗編碼所編碼之資料以選擇相同預測模式或不同的個別預測模式之任一者來用於圖片序列、圖片、或圖片之區。
試驗結果之處理可(於本發明之實施例中)涉及檢測由第一和第二試驗編碼所編碼之資料的一或更多預定的性質；及根據所檢測的一或更多性質以選擇相同預測模式或不同的個別預測模式之任一者來用於圖片序列、圖片、或圖片之區。該些一或更多性質可(例如)包含選自以下所構成之組的性質：影像雜訊、影像失真、及影像資料量。該選擇可針對單獨的影像片或影像區塊而做出。本發明之實施例可操作以將資訊關聯與已編碼視頻信號(例如，當作已編碼資料流之部分、當作資料流內之一或更多資料旗標)，其指示：是否使用相同預測模式或不同預測模式；以及於其使用相同預測模式之情況下，指示單一預測模式之識別；或者於其使用不同個別預測模式之情況下，指示那些不同個別預測模式之識別，例如使用關於預測模式之 本申請案中所討論的編號技術。
針對執行解碼操作之實施例，此方法可包含：檢測與解碼用之視頻資料關聯的資訊，該資訊係界定相同預測模式或不同預測模式係關聯與該解碼用之視頻資料。假如此資訊(例如，在關於資料流之預定位置上的一位元旗標)指示其相同預測模式被使用，則解碼器將關於一成分(諸如亮度)所界定之預測模式資訊應用於其他成分(諸如色度)之解碼。否則，解碼器便將單獨指明的預測模式應用於各成分。
於本發明之實施例中，如以上所討論，影像形成4：2：2或4：4：4視頻信號之部分。
轉變
於HEVC中，大部分影像係從先前編碼/解碼的框被編碼為動作向量，以其動作向量告知解碼器從(於這些其他已解碼框中)何處複製當前影像之良好近似。其結果為當前影像之近似版本。HEVC接著編碼所謂的殘留，其為介於近似版本與正確影像之間的誤差。此殘留需要甚少於直接指明實際影像的資訊。然而，一般而言仍最好是壓縮此殘留資訊以進一步減少整體位元率。
於包括HEVC之許多編碼方法中，此類資料係使用整數餘弦轉變(ICT)而被為轉變為空間頻率領域，且通常某壓縮係接著藉由保留低空間頻率資料並丟棄較高空間頻率資料而獲得，依據所欲的壓縮位準。
4：2：0轉變
HEVC中所使用之空間頻率轉變傳統上是產生4之羃次的係數(例如，64個頻率係數)，因為此為特別能接受共同量化/壓縮方法。4：2：0技術中之方形TU均為4之羃次而因此為直接可獲得。
假如NSQT選項被致能，一些非方形轉變可用於非方形TU(諸如4×16)，但再次值得注意地，這些導致64個係數(亦即，再次4之羃次)。
4：2：2及4：4：4轉變變體
4：2：2技術可導致其並非4之羃次的非方形TU；例如，4×8 TU具有32個像素，而32並非4之羃次。
於本發明之一實施例中，因此，可使用針對非4數字之羃次的係數之非方形轉變，已知其需要對後續量化程序進行修改。
替代地，於本發明之一實施例中，非方形TU被分裂為具有用於轉變之4區域的羃次之方形區塊，且接著所得的係數可被交錯。
例如，針對4×8區塊，奇數/偶數垂直樣本可被分裂為兩方形區塊。替代地，針對4×8區塊，頂部4×4像素及底部4×4像素可形成兩方形區塊。替代地，再次地，針對4×8區塊，哈爾(Haar)小波分解可被用以形成較低及較高頻率4×4區塊。
這些選項之任一者可變為可用的，且特定替代方式之選擇可由解碼器通知或取得。
其他轉變模式
於4：2：0技術中，有一建議旗標(所謂的「qpprime_y_zero_transquant_bypass_flag」)，其容許殘留資料被無損地包括於位元流中(亦即，未被轉變、量化或進一步過濾)。於4：2：0技術中，該旗標係應用於所有頻道。
因此，此類實施例代表視頻編碼或解碼方法、設備或程式，其中照度及色彩樣本被預測且介於樣本與個別預測樣本之間的差異被編碼，利用一種指示器，其被組態成指示照度差異資料是否被無損地包括於輸出位元流中；並獨立地指示色彩差異資料是否無損地被包括於位元流中。
於本發明之一實施例中，已提議其用於亮度頻道之旗標對於色度頻道是分離的。因此，針對4：2：2技術，此類旗標應被分離地提供給亮度頻道及給色度頻道，而針對4：4：4技術，此類旗標應被分離地提供給亮度及色度頻道；或者一旗標被提供給該三個頻道之每一者。如此認知其關聯與4：2：2及4：4：4技術之增加的色度資料率，並致能(例如)無損的亮度資料連同壓縮的色度資料。
針對預測內編碼，模式取決的方向性轉變(MDDT)容許針對一TU之水平或垂直ICT(或兩ICT)被取代以整數正弦轉變，根據內預測方向。於4：2：0技術中，此 未被應用於色度TU。然而，於本發明之一實施例中，提議將其應用於4：2：2及4：4：4色度TU，注意其IST目前僅被定義於4樣本轉變維度(水平地或垂直地)，而因此目前無法被垂直地應用於4×8色度TU。MDDT將被進一步討論如下。
於視頻編碼之方法中，本發明之各種實施例可被配置以指示照度差異資料是否被無損地包括於輸出位元流中；並獨立地指示色彩差異資料是否被無損地包括於位元流中、及編碼或包括相關資料於由此類指示所定義之形式中。
量化
於4：2：0技術中，針對色彩之量化計算係相同於針對照度之量化計算。僅有量化參數(QP)有差異。
針對色彩之QP被計算自照度QP如下：Qp Cb =scalingTable[Qp luminance +chroma_qp_index_offset]
Qp Cr =scalingTable[Qp luminance +second_chroma_qp_index_offset]
其中定標表(scaling table)被定義如圖29A或29B中所見者(個別針對4：2：0及4：2：2)，且「chroma_qp_index_offset」及「second_chroma_qp_index_offset」被定義於圖形參數組中且針對Cr及Cb為相同的或不同的。換言之，方形括弧中之值於各情況下將一「指標」定義入定標表(圖29A和B)且定標表接著給定Qp(「值」)之修訂值。
注意：「chroma_qp_index_offset」及「second_chroma_qp_index_offset」可另被個別地稱為cb_qp_offset及cr_qp_offset。
色彩頻道通常含有較照度更少的資訊，而因此具有較小值的係數；此對於色彩QP之限制可防止所有色彩細節喪失在大量的量化等級下。
4：2：0中之QP除數關係是對數關係，以致QP之6的增加係相當於除數之兩倍(本說明書別處所討論之量化步進尺寸，雖然注意到其可在使用前由Q矩陣所進一步修改)。因此在51-39=12之定標表中的最大差異代表除數之4的因數之改變。
然而，於本發明之一實施例中，針對4：2：2技術，其潛在地含有4：2：0技術中的色度資訊之兩倍，定標表中之最大色彩QP值可被升高至45(亦即，除數的一半)。類似地針對4：4：4技術，定標表中之最大色彩QP值可被升高至51(亦即，相同的除數)。於此情況下，定標表在效果上是多餘的，但可僅被保留以供操作上效益(亦即，以致系統係以針對各技術之相同方式參考一表而工作)。因此，更一般地，於本發明之一實施例中，色度QP除數係回應於編碼技術(相對於4：2：0技術)中之資訊量而被修改。
因此，本發明之實施例應用於一種視頻編碼或解碼方法，其可操作以依據一定義量化步進尺寸之選定的量化參數而量化4：4：4或4：2：2格式之頻道轉變的照度和色 彩成分視頻資料之區塊。量化參數關聯(諸如，例如，圖29A或29B中之適當表格)被定義於照度與色彩量化參數之間，其中該關聯係使得最大色彩量化步進尺寸小於針對4：2：2格式(例如45)之最大照度量化步進尺寸，但等於針對4：4：4格式(例如51)之最大照度量化步進尺寸。量化程序操作以使得頻率轉變的資料之各成分被除以從個別量化步進尺寸所取得的個別值，且其結果被捨入至整數值，以產生已量化空間頻率資料之相應區塊。
應理解其除法及捨入步驟係指示一般性量化階段之範例，依據個別的量化步進尺寸(或從其取得之資料，例如，藉由Q矩陣之應用)。
本發明之實施例包括選擇用以量化空間頻率係數之量化參數或指數(照度之QP)的步驟，該量化參數係作用為依據可應用於照度資料的QP表之一組量化步進尺寸的個別者之參考。定義量化參數關聯之程序於是可包含：針對色彩成分，依據選定量化參數以參考已修改量化參數之表(諸如圖29A和29B之表)，其因而可涉及(i)針對第一色彩成分，將第一補償(諸如chroma_qp_index_offset)加至量化參數並選擇相應於該項目(於該表中)之已修改量化指數，針對量化指數加上第一補償；及(ii)針對第二色彩成分，將第二補償(諸如second_chroma_qp_index_offset)加至量化參數並選擇相應於該項目(於該表中)之已修改量化指數，針對量化指數加上第二補償；及依據照度資料及第一和第二色彩成 分之第一和第二已修改量化指數以參考該組中之個別的量化步進尺寸。以不同方式來看，此為一涉及選擇用以量化空間頻率係數之量化參數的程序之範例，該量化參數係作用為對於一組量化步進尺寸的個別者之參考；且其中定義步驟包含：針對色彩成分，依據選定量化參數以參考已修改量化參數之表，參考步驟包含：針對各色彩成分，將個別補償加至量化參數並選擇相應於該項目(於該表中)之已修改量化指數，針對量化指數加上個別補償；及依據照度資料及第一和第二色彩成分之第一和第二已修改量化參數以參考該組中之個別的量化步進尺寸。
這些技術特別可應用於其中該組中之量化步進尺寸的連續值為對數相關的配置，以致m(其中m為整數)之量化參數的改變代表具有p(其中p為大於1的整數)之因數的量化步進尺寸之改變。於本實施例中，m=6而p=2。
於本發明之實施例中，如以上所討論，最大照度量化參數針對4：2：2格式為45；而最大色彩量化參數針對4：4：4格式為51。
於本發明之實施例中，第一和第二補償可關聯與已編碼視頻資料而被傳遞。
於4：2：0中，轉變矩陣A被初始地產生(藉由轉變單元340)自那些真實正規化的N×N DCT A’，其係使用：
其中i和j係指示矩陣中之位置。此相對於正規化轉變矩陣之定標提供了精確度之增加，避免分數計算的需求並增加內部精確度。
忽略由於Aij之捨入的差異，因為X被乘以A及AT(矩陣A之換位)兩者，故所得的係數係不同於真實正規化的M×N(M=高度；N=寬度)DCT之那些係數，藉由以下共同定標因數：
注意：共同定標因數可不同於此範例。亦注意：矩陣乘以A及AT兩者可被執行以各種方式，諸如所謂的蝴蝶(Butterfly)方法。重要的事實是：其被執行之操作是否等同於傳統的矩陣相乘，而非其是否被履行以一特定的傳統操作順序。
此定標因數係等同於二元左移位元操作以位元transformShift之數目，因為於HEVC中此導致2之羃次：transformShift=(12+0.5log2(N)+0.5log2(M))
為了減少對於內部位元精確度之要求，該些係數被右移(使用正捨入)兩次於轉變程序期間：shift1=log2(N)+bitDepth-9
shift2=log2(M)+6
結果，該些係數(隨著其離開前向轉變程序並進入量化器)被有效地左移以： resultingShift=(12+0.5log2(NM))-(shift1+shift2)=(12+0.5log2(N)+0.5log2(M))-(log2(N)+bitDepth-9+log2(M)+6)=15-(0.5log2(N)+0.5log2(M)+bitDepth)
於4：2：0中，由頻率轉變所產生的頻率分離(例如，DCT)係數為(2resultingShift)之因數大於其正規化DCT所將生成之係數。
於本發明之某些實施例中，區塊為方形的或者為具有2：1寬高比之矩形的。因此，針對N×M之區塊尺寸，任何：N=M，於此情況下，resultingShift為整數且S=N=M=sqrt(NM)；或者0.5N=2M或2N=0.5M，於此情況下resultingShift仍為整數且S=sqrt(NM)
resultingShift=15-(0.5log2(N)+0.5log2(M)+bitDepth)=15-(log2(S)+bitDepth)
該些係數被接續地量化，其中量化除數係依據量化參數QP而被取得。
注意：resultingShift係等同於一整數，所以共同定標因數為2之整數羃次，轉變程序之整體左移「resultingShift」亦被考量於此階段，藉由應用一相等但相反的右移「quantTransformRightShift」。
此位元移位操作是可能的，因為resultingShift為一整數。
同時注意：除數-QP(量化參數或指數)關係是依循基於2羃次曲線，如以上所述，其中QP增加6具有除數變兩倍的效果，而QP增加3具有增加除數sqrt(2)(2之 平方根)之因數的效果。
由於4：2：2之色度格式，有更大的TU寬度：高度(N：M)比：N=M(來自先前) 其中S=N=M=sqrt(NM)(resultingShift為整數
0.5N=2M及2N=0.5M(來自先前) 其中S=sqrt(NM)(resultingShift為整數
N=2M 其中S=sqrt(NM)
2M=N 其中S=sqrt(NM)
4N=0.5M 其中S=sqrt(NM)
resultingShift=15-(log2(S)+bitDepth)
於這後三者情況下，resultingShift不是整數。例如，此可適用於其中視頻資料樣本之至少一些區塊包含M×N樣本，其中N/M之平方根不等於2之整數羃次。此類區塊尺寸可針對色度樣本而發生於某些本實施例中。
因此，於此類例子中，下列技術是相關的，亦即，於視頻編碼或解碼方法、設備或程式，其可操作以藉由在視頻資料樣本上履行頻率轉變而產生已量化空間頻率資料之區塊，使用一包含各針對正規化轉變矩陣(藉由取決於轉變矩陣之維度的量)之個別值而被定標的整數值陣列之轉變矩陣；及依據選定量化步進尺寸以量化空間頻率資料，其具有藉由對區塊進行矩陣乘法乘以轉變矩陣以及轉變矩陣之換位而進行頻率轉變的步驟，來產生各以共同定標因數(例如，resultingShift)大於空間頻率係數(其將得自 視頻資料樣本之區塊的正規化頻率轉變)之已定標空間頻率係數的區塊。
因此在量化階段，一適當的位元移位操作無法被使用來取消該操作以簡單的方式。
針對此提議一解決方式如下：在量化器階段，應用右移：quantTransformRightShift=15-log2(S’)-bitDepth
其中值S’被取得以致resultingShift-quantTransformRightShift=+½
quantTransformRightShift為整數
介於½之移位之間的差異係等同於乘以sqrt(2)，亦即，在此時刻，係數為大於其應該者的sqrt(2)倍，使得該位元移位為整數位元移位。
對於量化程序，應用(QP+3)之量化參數，表示量化除數被有效率地增加sqrt(2)之因數，因而從先前步驟消除sqrt(2)定標因數。
因此，這些步驟可被總結，於視頻編碼或解碼方法(或者相應的設備或程式)的上下文，其可操作以藉由在視頻資料樣本之區塊上履行頻率轉變而產生已量化空間頻率資料之區塊，使用一包含各針對正規化轉變矩陣之個別值而被定標的整數值陣列之轉變矩陣；及依據選定量化步進尺寸以量化空間頻率資料，其涉及藉由對區塊進行矩陣乘法乘以轉變矩陣以及轉變矩陣之換位而頻率轉變視頻資料樣本之區塊，來產生各以共同定標因數大於空間頻率係 數(其將得自視頻資料樣本之區塊的正規化頻率轉變)，如下：選擇用以量化空間頻率係數之量化步進尺寸；應用n位元移位(例如，quantTransformRightShift)以將已定標空間頻率係數之每一者除以2n之因數，其中n為整數；及檢測殘留定標因數(例如，resultingShift-quantTransformRightShift)，其為除以2n之共同定標因數。例如，於以上所討論之情況下，量化步進尺寸於是依據殘留定標因數以產生修改的量化步進尺寸；且區塊中之已定標空間頻率係數的每一者被除以一取決於已修改量化步進尺寸之值並將該結果捨入至整數值，以產生已量化空間頻率資料之區塊。如以上所討論，量化步進尺寸之修改可僅藉由將一補償加至QP而被執行，以選擇不同的量化步進尺寸，當QP被映射入量化步進尺寸之表時。
係數現在是原始QP之正確大小。
轉變矩陣可包含整數值之陣列，其各針對正規化轉變矩陣之個別值而被定標以一取決於該轉變矩陣之維度的量。
可得知其S’之所需值可總是被取得如下：S’=sqrt(2*M*N)
當作一替代提議，S’可被取得以致：resultingShift-quantTransformRightShift=-½
於此情況下，S’=sqrt(½*M*N)，且已應用的量化參數為(QP-3)。
於這些情況之任一者下，(將3加至QP或從QP減 去3)，選擇量化步進尺寸之步驟包含選擇量化指數(例如，QP)，量化指數係定義量化步進尺寸之表中的個別項目，而修改步驟包含改變量化指數以選擇不同的量化步進尺寸，以致不同量化步進尺寸相對於原始選擇的量化步進尺寸之比係實質上等於殘留定標因數。
此特別地良好工作於其中(如於本實施例中)該表中之量化步進尺寸的值係對數相關的，以致m之量化指數(例如，QP)的改變代表量化步進尺寸之改變以p之因數(其中p為大於1之整數)。於本實施例中，m=6而p=2，以致QP之6的增加代表所應用的量化步進尺寸之兩倍，而QP之6的減少代表所得量化步進尺寸之一半。
如以上所討論，修改可藉由：選擇關於照度樣本之量化指數(例如，基礎QP)；針對色彩成分之每一者或兩者的樣本產生量化指數補償(相對於針對照度樣本所選擇的量化指數)；依據殘留定標因數以改變量化指數補償；及傳遞與已編碼視頻資料相關的量化指數補償。於HEVC之實施例中，針對兩色度頻道之QP補償被傳送於位元流中。這些步驟係相應於一系統，其中+/-3之QP補償(以因應殘留定標因數)可被結合入這些補償內，或者當用於取得色度QP時其可被遞增/遞減。
注意：假如使用不同形狀區塊的話QP補償不一定要是+/-3；只是+/-3代表一可應用於以上關於4：2：2視頻(舉例而言)所討論之區塊形狀及寬高比的補償。
於某些實施例中，n(如所應用之位元移位)被選擇 以致2n係大於或等於共同定標因數。於其他實施例中，n被選擇以致2n係小於或等於共同定標因數。於本發明之實施例(使用這些配置之任一者)中，位元移位n可被選擇以成為次接近(於任一方向)於共同定標因數，以致殘留定標因數代表一具有小於2之大小的因數。
於其他實施例中，量化步進尺寸之修改可僅藉由將量化步進尺寸乘以一取決於殘留定標因數之因數來履行。亦即，此修改無需涉及指數QP之修改。
亦注意：所討論之量化步進尺寸不一定是已轉變樣本所被分割之實際量化步進尺寸。以此方式所取得之量化步進尺寸可被進一步修改。例如，於某些配置中，量化步進尺寸係由值之矩陣(Q矩陣)中的個別項目所進一步修改，以致不同的最終量化步進尺寸被用於係數之已量化區塊中的不同係數位置上。
亦值得注意的：於4：2：0技術中，最大色度TU為16×16，而針對4：2：2技術則16×32 TU是可能的；以及針對4：4：4技術，32×32色度TU是可能的。因此，於本發明之一實施例中，提議針對32×32色度TU之量化矩陣(Q矩陣)。類似地，Q矩陣應被定義給非方形TU，諸如16×32 TU，以其一實施例為較大方形Q矩陣之次取樣
Q矩陣可由下列之任一者來定義：柵格中之值(針對4×4及8×8 Q矩陣)；空間地內插自較小或較大的矩陣； - 於HEVC中，較大的Q矩陣可被取得自較小參考者之係數的個別族群，或者較小的矩陣可被次取樣自較大的矩陣。注意：此內插或次取樣可被執行於一頻道比之內一例如，針對一頻道比之較大矩陣可被內插自針對該頻道比之較小者。
相對於其他Q矩陣(亦即，差異值、或差量)；- 因此僅有該些差量需被傳送。
僅為闡明之目的舉一小範例，針對一頻道比之特定矩陣可被定義，諸如關於4：2：0之4×4矩陣
(a b)
(c d)
其中a,b,c及d為個別係數。此作用為參考矩陣。
本發明之實施例可接著針對關於另一頻道比之類似尺寸矩陣定義一組差異值：
(diff1 diff2)
(diff3 diff4)
以致為了產生針對其他頻道比之Q矩陣，差異之矩陣被矩陣相加至參考矩陣。
取代差異，多重因數之一矩陣可針對其他頻道比而被定義，以使得(i)多重因數之矩陣被矩陣相乘與參考矩陣而產生針對其他頻道比之Q矩陣，或(ii)參考矩陣中之各係數被獨立地乘以個別因數以產生針對其他頻道比之Q矩陣。
當作另一Q矩陣之函數； - 例如，相對於另一矩陣之定標比(以致上述範例中之a,b,c及d之每一者被乘以相同的因數，或者具有加入該數之相同差異)。如此減少用以傳輸差異或因數資料之資料需求。
- 因此，僅有該些函數之係數需被傳送(諸如定標比)，當作一等式/函數(例如，塊狀線性曲線、指數、多項式)；- 因此，僅有該些等式之係數需被傳送以取得該矩陣，或者任何上述之組合。例如，a,b,c及d之每一者可事實上由一函數所定義，該函數可包括根據該矩陣內之係數位置(i,j)的依存性。(i,j)可代表(例如)從左至右之係數位置，接續以從矩陣之頂部至底部的係數位置。一範例為：係數i,j=3i+2j
注意：Q矩陣可被稱為HEVC環境內之定標表列。於其中在掃描程序後施加等化的實施例中，掃描資料可為連續資料樣本之線性流。於此類例子中，Q矩陣之概念仍適用，但矩陣(或掃描表列)可被視為1×N矩陣，以致1×N矩陣內之N資料值的順序係相應於掃描樣本(個別Q矩陣值將被應用於該些樣本)之順序。換言之，掃描資料(一具掃描型態之空間頻率)中的資料順序與1×N Q矩陣中的資料順序之間有1：1的關係。
注意：於某些實施方式中，有可能越過或省略DCT(頻率分離)階段，但保持量化階段。
其他有用的資訊包括該些值係關於哪些其他矩陣的選擇性指示器，亦即，先前頻道或第一(主要)頻道；例如，針對Cr之矩陣可為針對Y(或針對Cb)之矩陣的已定標因數，如所示者。
因此，本發明之實施例可提供一種視頻編碼或解碼方法(及一種相應的設備或電腦程式)，其可操作以產生已量化的空間頻率之區塊，藉由(選擇性地)對視頻資料樣本履行頻率轉變並量化視頻資料(諸如空間頻率資料)，依據選定的量化步進尺寸及一修改用於樣本之一依序區塊(諸如頻率轉變樣本之依序區塊)內的不同個別位置上之量化步進尺寸的資料之矩陣，此方法可關於至少兩不同色彩次取樣格式而操作。
針對色彩次取樣格式之至少一者，一或更多量化矩陣被定義為關於一或更多針對色彩次取樣格式之一參考者所定義的參考量化矩陣之一或更多預定的修改。
於本發明之實施例中，定義步驟包含將一或更多量化矩陣定義為各內插自一參考量化矩陣之個別複數值的值之矩陣。於其他實施例中，定義步驟包含將一或更多量化矩陣定義為各次取樣自一參考量化矩陣之值的值之矩陣。
於本發明之實施例中，定義步驟包含將一或更多量化矩陣定義為關於一參考量化矩陣之相應值的差異之矩陣。
於本發明之實施例中，定義步驟包含將一或更多量化 矩陣定義為一參考量化矩陣之值的預定函數。於此類例子中，預定函數可為多項式函數。
於本發明之實施例中，提供下列之一或兩者，例如，當作已編碼視頻資料之部分或關聯與已編碼視頻資料：(i)參考指示器資料，用以指示(關於已編碼視頻資料)參考量化矩陣；及(ii)修改指示器資料，用以指示(關於已編碼資料值)一或更多預定修改。
這些技術特別可用於其中色彩次取樣格式之兩者為4：4：4及4：2：2格式。
對於各轉變尺寸：3其HEVC 4：2：0中之Q矩陣的數目當前為6(針對相應的頻道)，且一組針對內及一組針對間。於4：4：4 GBR技術之情況下，應理解其量化矩陣之任一組可被用於所有頻道，或者量化矩陣之三個個別組可被使用。
於本發明之實施例中，該些矩陣之至少一者為1×N矩陣。此將為其中該些矩陣之一或更多者事實上為定標表列等等之情況(如文中所述者)，其為線性1×N階的係數陣列。
已提議之解決方式涉及遞增或遞減已應用的QP。然而，此可被達成以數個方式：於HEVC中，兩個色度頻道之QP補償被傳送於位元流中。+/- 3可被結合入這些補償中，或者其可被遞增/遞減在當其被用以取得色度QP時。
如以上所討論，於HEVC中，(亮度QP+色度補 償)被使用為對於一用來取得色度QP之表的指標。此表可被修改以結合+/- 3(亦即，藉由將原始表之值遞增/遞減3)。
在色度QP已被取得之後，有關正常HEVC程序，其結果可接著被遞增(或遞減)3。
當作修改QP之替代方式，sqrt(2)或1/sqrt(2)可被用以修改量化係數。
針對前向/反向量化，除/乘程序係藉由使用(QP% 6)為對於一表之指標而實施，來獲得量化係數或量化步進尺寸，inverseQStep/scaledQstep。(於此，QP% 6表示QP模數6)。注意：如以上所討論，此可不代表其被應用於已轉變資料之最終量化步進尺寸；其可在使用前由Q矩陣進一步修改。
HEVC中之預設表為長度6，涵蓋值之倍數(雙倍)。此僅為減少儲存需求之手段；該些表係針對實際使用而被延伸，藉由依據QP之模數(mod 6)以選擇表中之項目並接著乘以或除以2之適當羃次，取決於來自預定基礎值之差異(QP-QP模數6)。
此配置可被改變以容許QP值中之+/- 3的補償。該補償可被應用於表查找程序，或者以上所討論之模數程序可使用已修改QP而取代地被執行。假設補償被應用於表查找上，然而，該表中之額外項目可被提供如下：一替代方式係延伸該些表3個項目，其中新的項目為如下(針對6-8之指數值)。
圖30中所示之範例表將由[(QP% 6)+3]來索引(一種「QP遞增方法」)，其中代號QP% 6係表示「QP模數6」。
圖31中所示之範例表將由[(QP% 6)-3]來索引(一種「QP遞減方法」)，其具有針對-1至-3之指標值的額外項目。
熵編碼
基本熵編碼包含將碼字指定給輸入資料符號，其中最短可用碼字被指定給輸入資料中之最可攜符號。平均而言，此結果為輸入資料之無損但更小得多的表示。
基本技術可被進一步改良，藉由得知其符號機率經常對於最近先前資料是條件性的，而因此讓該指定程序為內容調適的。
於此一技術中，內容變數(CV)被用以判定個別機率模型之選擇，且此類CV被提供於HEVC 4：2：0技術。
為了延伸對4：2：2技術之熵編碼，其例如針對8×8亮度TU將使用4×8色度TU而非4×4 TU，選擇性地其內容變數可僅藉由垂直地重複同等CV選擇而被提供。
然而，於本發明之一實施例中，CV選擇並未針對左上係數(亦即，高能量、DC及/或低空間頻率係數)而重複，而替代地取得新的CV。於此情況下，例如，映射可被取得自亮度圖。此方式亦可被用於4：4：4技術。
於編碼期間，於4：2：0技術中，一種所謂的曲折掃描從高至低頻率依序地掃描該些係數。然而，再次注意4：2：2技術中之色度TU可為非方形的，而因此於本發明之一實施例中，提議一種不同的色度掃描，其掃描之角度被傾斜以使其更為水平，或更一般地，回應於TU之寬高比。
類似地，重要性圖CV選擇之附近及大於一和大於二CV選擇之c1/c2系統可因此被調適。
同樣地，於本發明之一實施例中，最低有效係數位置(其變為解碼期間之開始點)亦可針對4：4：4而調整，其色度TU之最低有效位置係不同於共同位置亮度TU中之最低有效位置而被編碼。
係數掃描亦可變為取決於某TU尺寸之預測模式。因此不同掃描順序可根據內預測模式而被用於某些TU尺寸。
於4：2：0技術中，模式取決的係數掃描(MDCS)僅被應用於4×4/8×8亮度TU及4×4色度TU，針對內預測。MDCS係根據內預測模式而被使用，考量從水平及垂直+/-4之角度。
於本發明之一實施例中，提議於4：2：2技術中，MDCS被應用於4×8及8×4色度TU，針對內預測。類似地，提議於4：4：4技術中，MDCS被應用於8×8及4×4色度TU。針對4：2：2之MDCS僅可被進行於水平或垂直方向，且角度範圍可不同針對4：4：4色度vs.4：4： 4亮度vs.4：2：2色度vs.4：2：2亮度vs.4：2：0亮度。
迴路內過濾器 解塊(deblocking)
解塊被應用於所有CU、PU及TU邊界，而CU/PU/TU形狀不列入考量。過濾器強度及尺寸係取決於局部統計，而解塊具有8×8亮度像素之粒度。
因此，預期應用於4：2：0技術之當前解塊亦應可應用於4：2：2及4：4：4技術。
樣本調適補償
於樣本調適補償(SAO)中，各頻道是完全獨立的。SAO係使用四倍樹以分裂各頻道之影像資料，且所得的區塊尺寸為至少一LCU。葉區塊被對齊於LCU邊界且各葉可運作於三個模式之一，如由編碼器所決定者(「中央頻帶補償」、「側邊頻帶補償」或「邊緣補償」)。各葉分類其像素，且編碼器針對16個類別之每一者取得補償值，藉由將SAO輸入資料比較與來源資料。這些補償被傳送至解碼器。針對已解碼像素之類別的補償被加至其值以將其與來源之偏移最小化。
此外，SAO被致能或除能於圖形等級；假如針對亮度而致能，其亦可針對各色度頻道而被分離地致能。SAO因此將被應用於色度僅於其被應用於亮度的話。 因此，此程序對於重要的區塊技術是極透明的且預期應用於4：2：0技術之當前SAO亦應可應用於4：2：2及4：4：4技術。
調適迴路過濾
於4：2：0技術中，調適迴路過濾(ALF)是預設為除能的。然而，理論上(亦即，假如容許的話)則ALF將被應用於色度之整個圖形。
於ALF中，亮度樣本可被分類為數個類別之一，如由HEVC文件所判定者；各類別係使用不同之威能(Wiener)為基的過濾器。
反之，於4：2：0中，色度樣本未被分類-僅有一個威能為基的過濾器用於Cb，及一個用於Cr。
因此，於本發明之一實施例中，由於4：2：2及4：4：4技術中之增加的色度資訊，提議其色度樣本被分類，例如K類別於4：2：2及J類別於4：4：4。
雖然於4：2：0技術中ALF可使用ALF控制旗標而針對亮度被除能以每CU之基礎(向下至其由ALF控制深度所指明的CU等級)，但其僅可針對色度被除能以每圖形之基礎。注意：於HEVC中，此深度目前被限制僅於LCU等級。
因此，於本發明之一實施例中，4：2：2及4：4：4技術被提供以針對色度之一或二頻道特定的ALF控制旗標。
語法
於HEVC中，語法已提出以指示4：2：0、4：2：2或4：4：4技術，且被指示於序列等級。然而，於本發明之一實施例中，提議亦指示4：4：4 GBR編碼於此等級。
MDDT及MDCS
現在將描述模式取決的方向性轉變及模式取決的係數掃描之使用。注意：兩者可被實施於相同系統中，或者一者可被使用而另一者不被使用，或者兩者可均不使用。
將首先描述MDCS，參考圖34至38。
一種所謂的筆直對角掃描型態係參考圖16而被描述於上。掃描型態被使用以取得一順序，該順序為頻率分離的係數(諸如DCT係數)所被處理的順序。筆直對角型態為掃描型態之一範例，但其他型態亦可得。兩個進一步範例被概略地顯示於圖34及35，此次係使用4×4區塊之範例。這些是：水平掃描型態(圖34)，及垂直掃描型態(圖35)。
於MDCS中，掃描型態被選自一群取決於使用中預測模式之二或更多候選掃描型態。
本範例係有關一群三個候選掃描型態、筆直對角型態、水平型態及垂直型態。但亦可使用一不同群的二或更多候選掃描型態。
參考圖36，垂直掃描型態被用於模式6至14，其為水平(明顯水平)之臨限角度(或模式編號)內的模式。水平掃描型態被用於模式22至30，其為垂直(明顯垂直)之臨限角度(或模式編號)內的模式。筆直對角掃描(於圖36中僅稱為「對角掃描」)被用於其他模式。
圖37概略地闡明兩候選掃描型態(垂直及水平)對其可應用於色度樣本之矩形陣列的方向性預測模式之可能映射。該型態係不同於針對亮度樣本所使用的型態(圖36)。
圖38概略地闡明用以選擇掃描型態之配置。此可形成控制器343之功能的部分，舉例而言。
選擇器1620係回應於當前區塊之預測模式及一將預測模式映射至掃描型態之查找表1630。選擇器1620係輸出其指示選定的掃描型態之資料。
MDCS可被致能於4：2：2及4：4：4。掃描型態對預測模式之映射針對4：2：0可為相同的，或者可為不同的。各頻道比可具有個別的映射(於該情況下選擇器1620亦可回應於頻道比)或者映射可涵蓋頻道比均為恆定的。MDCS可僅被應用於某些區塊尺寸，例如，不大於臨限區塊尺寸。例如，MDCS所應用之最大TU尺寸可為：
針對色度，MDCS可被除能，僅限於4×4(亮度)TU或限於僅使用水平或垂直掃描之TU。MDCS特徵之實施方式。MDCS特徵之實施方式可隨著頻道比而改變。
本發明之實施例因此提供一種編碼4：2：2或4：4：4視頻資料之方法，其中介於預測的與原始的樣本之間的差異被頻率分離並編碼，包含：依據與待預測樣本關聯之預測模式以從其取得自相同影像之其他個別參考樣本預測影像之照度及/或色彩樣本，該預測模式係針對複數樣本區塊之每一者而被選擇，自一組二或更多候選預測模式；檢測介於該些樣本與個別預測的樣本之間的差異；使用頻率分離轉變以頻率分離針對樣本之一區塊所測得的差異，來產生一相應組的頻率分離係數；從一組二或更多候選掃描型態選擇一掃描型態，各掃描型態係界定編碼該組頻率分離係數之順序，根據樣本之該區塊的預測模式，其係使用一介於掃描型態與預測模式之間的映射，針對至少4：4：4格式該映射係介於不同者之間，如介於色彩與照度樣本之間(因此，換言之，該映射針對4：4：4色度及4：4：4亮度資料是不同的，且可或不可為不同的如介於4：2：2亮度及4：2：2色度資料之間)；及依據選定的掃描型態而依頻率分離係數的順序以編碼頻率分離的差異資料。
映射可針對4：2：2照度及色彩資料為不同的。
映射可針對4：2：2及4：4：4視頻資料為不同的。
於本發明之實施例中，照度樣本之當前區塊為4×4或8×8樣本。替代地，本發明之實施例包含從一組候選尺寸選擇樣本之當前區塊的尺寸；及假如選定的區塊尺寸為該組候選尺寸的預定子集之一則應用選擇掃描型態之步驟。以此方式，映射程序可被應用於某些區塊尺寸而非其他尺寸。映射可僅被應用(針對4：2：2)於照度樣本。
於本發明之實施例中，該組候選掃描型態針對用於照度及色彩樣本是不同的。
選擇步驟可被組態成選擇關於一組明顯水平預測模式之水平掃描型態；選擇關於一組明顯垂直預測模式之垂直掃描型態；及選擇關於其他預測模式之對角掃描型態。
本發明之實施例亦提供一種編碼4：2：2或4：4：4視頻資料之方法，其中介於預測的與原始的樣本之間的差異被頻率分離並編碼，包含：依據與待預測樣本關聯之預測模式以從其取得自相同影像之其他個別參考樣本預測影像之照度及/或色彩樣本，該預測模式係針對複數樣本區塊之每一者而被選擇，自一組二或更多候選預測模式；從一組二或更多候選掃描型態選擇掃描型態，各掃描型態係界定編碼該組頻率分離係數之順序，根據樣本之該區塊的預測模式，其係使用一介於掃描型態與預測模式之間的映射，針對至少4：4：4格式該映射係介於不同者之間，如介於色彩與照度樣本之間(因此，換言之，該映射針對4：4：4色度及4：4：4亮度資料是不同的，且可或不可為不同的如介於4：2：2亮度及4：2：2色度資料之 間)；及解碼頻率分離的差異資料，其係代表指示介於待解碼樣本與個別預測樣本間之差異的資料之頻率分離版本，依據選定的掃描型態而依頻率分離係數的順序。
關於MDDT，圖39概略地闡明一種依據預測模式以選擇頻率分離轉變的配置。此配置可形成控制器之轉變單元的功能之部分。
選擇器1700接收其界定當前預測模式之資料並根據該模式以選擇一轉變(從一組二或更多候選轉變)。該轉變係由轉變引擎1710所應用以將影像樣本轉換為頻率轉變的係數，根據其儲存在轉變資料儲存中指示所需轉變的資料。
候選轉變之範例包括離散餘弦轉變(DCT)、離散正弦轉變(DST)、Karhunen-Loeve轉變、及由用於矩陣乘以樣本之當前區塊的個別列和行矩陣所界定的轉變。
MDDT可被致能(例如)於4：4：4系統中之4×4色度區塊。然而，於本發明之實施例中，MDDT被致能於4：2：2資料。
因此，本發明之實施例可提供一種編碼4：2：2或4：4：4視頻資料之方法，包含：依據與待預測樣本關聯之預測模式以從其取得自相同影像之其他個別參考樣本預測影像之照度及/或色彩樣本，該預測模式係針對複數樣本區塊之每一者而被選擇，自一組二或更多候選預測模式；檢測介於樣本與個別預測的樣本之間的差異；依據與樣本之當前區塊關聯的預測模式以從二或更多候選頻率分 離轉變選擇一頻率分離轉變，其係使用一介於轉變與預測模式之間的映射，針對至少4：4：4格式該映射係介於不同者之間，如介於色彩與照度樣本之間(因此，換言之，該映射針對4：4：4色度及4：4：4亮度資料是不同的，且可或不可為不同的如介於4：2：2亮度及4：2：2色度資料之間)；及藉由頻率分離該些差異以編碼該些測得的差異，其係使用選定的頻率分離轉變。
候選轉變可包含選自由以下組成之列表的二或更多轉變：離散餘弦轉變、離散正弦轉變、Karhunen-Loeve轉變、及由用於矩陣乘以樣本之當前區塊的個別列和行矩陣所界定的轉變(以致，例如，轉變係由TXTT所界定，其中T為轉變矩陣，上標T代表矩陣之轉置(transpose)，而X代表矩陣形式中之樣本的區塊)。
如前所述，於本發明之實施例中，與待預測樣本之區塊關聯的預測模式係指示一預測方向，其界定該區塊之各樣本所將被預測自之一或更多其他個別參考樣本，或者可指示(例如)dc預測模式。
於本發明之實施例中，提供於預測模式與頻率分離轉變之間的映射可針對4：2：2格式而不同於照度與色彩資料之間。
於本發明之實施例中，照度樣本之當前區塊的尺寸為4×4樣本。替代地，此方法可包含：從一組候選尺寸選擇樣本之當前區塊的尺寸；及假如選定的區塊尺寸為該組候選尺寸的預定子集之一則應用選擇頻率分離轉變之步驟， 以致MDDT僅被用於某些而非所有區塊(例如，TU)尺寸。
於本發明之實施例中，編碼該些測得的差異之步驟包含從一組二或更多候選掃描型態選擇一掃描型態，各掃描型態係界定將該組頻率分離係數編碼的順序，根據樣本之該區塊的預測模式；及依據選定的掃描型態而依頻率分離係數的順序以編碼頻率分離的差異資料。換言之，此代表一使用MDCS及MDDT兩者之系統。
已編碼區塊旗標
已編碼區塊旗標(CBF)被用以指示-針對亮度TU-該TU是否含有任何非零的係數。其提供容許該編碼程序跳過不具有待編碼資料之區塊的簡單是/否答案。
於某些配置中，CBF被用於色度資料，但被提供於各分裂等級。此係因為色度成分常具有較少量的資訊，而因此相較於相應亮度區塊所被發現不含資料的等級，色度區塊可在較高的分裂等級上被發現含有零資料。
然而，於某些實施例中，色度被處理成完全相同於亮度，以供分配CBF旗標之目的。
CABAC編碼及背景模擬
圖40概略地闡明CABAC熵編碼器之操作。
CABAC編碼器係操作於二元資料，亦即，僅由兩個符號0與1所代表的資料。編碼器利用一種所謂的背景模 擬程序，其根據先前編碼的資料以選擇後續資料之「背景」或機率模型。背景之選擇被執行以一種確定性方式，以致相同的決定(根據先前解碼的資料)可被履行於該解碼器上而無需進一步資料(指明該背景)被加至其傳遞至該解碼器的已編碼資料流。
參考圖40，待編碼輸入資料可被傳遞至二元轉換器1900(假如其尚未於二元形式)；假如該資料已於二元形式，則轉換器1900被旁通(由示意開關1910)。於目前實施例中，轉換至二元形式係藉由將量化的DCT(或其他頻率分離的)係數資料表達為一連串二元「映圖」而被實際執行，其將被進一步描述於下。
二元資料接著可由兩處理路徑之一所處理：「一般」及「旁通」路徑(其被概略地顯示為分離的路徑，但於以下所討論之本發明的實施例中，其可實際上由相同的處理階段來實施，僅使用稍微不同的參數)。旁通路徑係利用一種所謂的旁通編碼器1920，其不一定利用以如一般路徑之相同形式的背景模擬。於CABAC編碼之某些範例中，假如有需要特別快速地處理一批次資料時則可選擇此旁通路徑，但於目前實施例中，注意到所謂的「旁通」資料之兩個特徵：第一，旁通資料係由CABAC編碼器(1950、1960)所處理，僅使用一代表50%機率之固定背景模型；及第二，旁通資料係有關資料之某些類別，一特別的範例為係數符號資料。否則，一般路徑係由示意開關1930、1940所選擇。此涉及由背景模擬器1950(接續 以編碼引擎1960)所處理之資料。
圖40中所示之熵編碼器將資料(亦即，例如，相應於有關殘留影像之區塊的係數之區塊的資料)之區塊編碼為單一值，假如該區塊係完全由零值資料所形成時。針對非落入此類別之各區塊，亦即，含有至少某些非零資料區塊，準備「重要性映圖」。重要性映圖係指示(針對待編碼之資料的區塊中之各位置)該區塊中之相應係數是否為非零的。重要性映圖資料(其為二元形式)為本身CABAC編碼的。重要性映圖之使用以壓縮來協助，因為無任何資料需針對一具有其重要性映圖指示為零之大小的係數來被編碼。同時，重要性映圖可包括一用以指示區塊中之最終非零係數的特殊碼，以致所有最終高頻/落後零係數可被省略自編碼。重要性映圖被接續(於已編碼位元流中)以其界定由重要性映圖所指明之非零係數的值之資料。
映圖資料之進一步等級亦被準備且被CABAC編碼。一範例為一映圖，其係由二元值(1=是，0=否)界定於其重要性映圖已指示為「非零」之映圖位置上的係數資料是否實際上具有「一」之值。另一映圖指明於其重要性映圖已指示為「非零」之映圖位置上的係數資料是否實際上具有「二」之值。進一步映圖(針對那些其中重要性映圖已指示其係數資料為「非零」之映圖位置)指示該資料是否具有「大於二」之值。另一映圖(再次針對識別為「非零」之資料)指示資料值之符號(使用預定的二元標號， 諸如針對+為1、針對-為0，或當然反之亦可)。
於本發明之實施例中，重要性映圖及其他映圖被產生自量化的DCT係數，例如由掃描單元360，並接受鋸齒掃描程序(或一種選自那些以上所討論者的掃描程序)，在接受CABAC編碼之前。
一般而言，CABAC編碼涉及針對待編碼之下一位元預測背景、或機率模型，根據其他先前編碼的資料。假如下一位元相同於由機率模型所識別為「最可能」的位元，則其「下一位元符合機率模型」之資訊的編碼可被編碼以極佳的效率。較無效率的是編碼其「下一位元不符合機率模型」，因此背景資料之取得對於編碼器之良好操作是重要的。術語「調適性」指的是背景或機率模型被調適、或改變於編碼期間，以嘗試提供與(如仍未編碼者)下一資料之良好匹配。
使用簡單的類比，於所書寫之英文語言中，字母「U」是相對不常見的。但於緊接在字母「Q」之後的字母位置中，則確實為極常見的。因此，機率模型可將「U」之機率設為極低的值，但假如當前字母為「Q」，則針對「U」為下一字母的機率模型可被設為極高的機率值。
於本配置中，CABAC編碼被使用於至少重要性映圖及其指示非零值為一或二之映圖。旁通處理一其於這些配置中係相同於CABAC編碼，但針對其機率模型被固定於1與0之相等(0.5：0.5)機率分佈上的事實，被用於至 少符號資料及指示值是否>2之映圖。針對那些識別為>2之資料位置，一分離的所謂逃脫資料編碼可被使用以編碼資料之實際值。此可包括Golomb-Rice編碼技術。
CABAC背景模擬及編碼程序被更詳細地描述於WD4：Working Draft 4 of High-Efficiency Video Coding,JCTVC-F803_d5,Draft ISO/IEC 23008-HEVC；201x(E)2011-10-28。
背景變數被重設於處理一片之結束時。
現在將參考一種視頻資料編碼之方法，包含：從其他個別參考樣本或值預測一影像之照度及/或色彩樣本的區塊；檢測介於一區塊中的樣本與個別預測的樣本之間的差異；頻率分離關於各區塊之測得差異以產生頻率分離係數之相應陣列，其係依據由係數所代表之遞增空間頻率來排列；及使用背景調適性算術碼以熵編碼該些頻率分離係數，該背景調適性算術碼係將關於其指示具有特定係數值之係數的機率之背景變數的係數編碼；其中熵編碼步驟包含：將各陣列分割為二或更多係數群，該些群為非方形子陣列；及選擇一背景變數以編碼一係數，其係依據由該係數所代表之空間頻率並根據於該陣列中或者於一相應於樣本之相鄰區塊的陣列中之係數的一或更多鄰近群中之係數的值。
此有時係已知為鄰近背景變數分配，其容許對於係數位置之背景變數的分配型態被設於一子陣列上，以依據是否有任何非零係數於鄰近子陣列中之子陣列基礎(子陣列 為系統之區塊的部分)。配合頻率分離資料之使用所選擇的掃描型態可為相關的，以致熵編碼步驟包含依一順序來編碼一陣列之係數，該順序係取決於一選自一組一或更多候選掃描型態之掃描型態。係數之各子陣列可被視為一連續組的n係數，依其由可應用於該陣列之掃描型態所界定的順序，其中n為該陣列中之係數數目的整數因數。例如，n可為16。
圖41A至41D概略地闡明先前所提議之鄰近配置的情況。
於本發明之實施例中，選擇步驟將一群中之係數分配給一組候選背景變數之一以致(於各群中)依掃描順序之連續子集的係數被分配給候選背景變數之個別一者。於圖42A至43B所示之範例中，使用垂直掃描順序並以該順序進行分配。於圖44中，使用水平掃描順序並以該順序進行分配。
如前所述，選擇步驟係根據鄰近係數是否具有零值。針對各群係數可能有兩個候選背景變數。
現在回到圖42A、42B、43B、43B及44，所示之圖式的格式為該些係數被排列於一陣列內，以致水平空間頻率係於該陣列中從左至右增加而垂直空間頻率係於一陣列中從頂部至底部增加。
針對如何處理遺失資料(例如，於圖片或片之邊緣上的資料、或尚未被編碼的資料)有兩個選擇。於一選擇中(圖42A)，假如一當前群附近之一群係數尚未被頻率分 離，則選擇步驟將零指定給該群以供選擇該當前群中之一係數的背景變數之目的。於另一選擇中(圖42B)，假如一當前群附近之一第一群係數尚未被頻率分離，但一當前群附近之一第二群已被頻率分離，則選擇係將該第二群之值指定給該第一群以供選擇該當前群中之一係數的背景變數之目的。
參考圖42A至42B，假如當前群之右邊及底下的兩群均含有非零係數資料，則一背景變數係藉由選擇步驟而被分配給依掃描順序之該當前群的前m個係數，而另一背景變數被分配給該當前群之剩餘係數。假如當前群之右邊的群具有非零資料但當前群之底下的群沒有，則一背景變數係藉由選擇步驟而被分配給該當前群的上半部，而另一背景變數被分配給該當前群之剩餘係數。假如當前群之底下的群具有非零資料但當前群之右邊的群沒有，則一背景變數係藉由選擇步驟而被分配給依掃描順序之該當前群的前p個係數，而另一背景變數被分配給該當前群之剩餘係數。假如當前群之底下的群具有非零資料但當前群之右邊的群沒有，則一背景變數係藉由選擇步驟而被分配給該當前群的左半部，而另一背景變數被分配給該當前群之剩餘係數。於所示之範例中，m及p為整數，且m不等於p。特別地，於所示之範例中，當前群包含8×2或2×8係數之子陣列；且m=13及p=6。
所示之方法可應用於其具有至少8個樣本之尺寸於至少一維的樣本之區塊。一範例為8×8區塊或更大。
無論至少某些樣本之區塊(TU)是否為方形或至少某些樣本之區塊(TU)是否為非方形，此技術均為可用的。
現在參考圖45，本發明之實施例亦提供一種視頻資料編碼之方法，包含：從其他個別參考樣本或值預測一影像之照度及/或色彩樣本的區塊；檢測介於一區塊中的樣本與個別預測的樣本之間的差異；頻率分離關於各區塊之測得差異以產生頻率分離係數之相應陣列，其係依據由係數所代表之遞增空間頻率來排列，該些係數之一代表該區塊之一dc值；及使用背景調適性算術碼以熵編碼該些頻率分離係數，該背景調適性算術碼係將關於其指示具有特定係數值之係數的機率之背景變數的係數編碼；其中熵編碼步驟包含：將各陣列分割為二或更多係數群，該些群為非方形子陣列；及產生背景變數之分配以將依據由該係數所代表之該些空間頻率而關於非方形子陣列所產生的個別係數編碼，藉由位置重複其可應用於方形子陣列之該些背景變數分配，但不位置重複其對於該dc係數之背景變數的分配。如圖45中所示，針對8×16子陣列之分配型態為從8×8子陣列分配型態所取得之值重複的型態，但dc分配(如所示之左上角落)不是值重複的。換言之，分配給dc係數之背景變數未被分配給任何其他係數。
資料信號
應理解其由以上討論之編碼設備的變異所產生之資料 信號(及攜載此類信號之儲存或傳輸媒體)被視為代表本發明之實施例。
雖然以上討論了處理、編碼或解碼之方法，應理解其組態成履行此類方法之設備亦被考量以代表本發明之實施例。亦應理解其結合此類技術之視頻儲存、傳輸、擷取及/或顯示設備被視為代表本發明之實施例。
在本發明之實施例已被描述為(至少部分地)由軟體控制的資料處理設備所實施的範圍內，應理解其攜載此類軟體(諸如光碟、磁碟、半導體記憶體等)亦被視為代表本發明之實施例。
很清楚的本發明之各種修改及變異根據上述教導是可能的。因此應瞭解在後附申請專利範圍之範圍內，此技術可被實行以如文中所明確描述者之外的方式。
1520‧‧‧列
1530‧‧‧行
1540‧‧‧樣本位置
1550‧‧‧位置
1560‧‧‧當前區塊
1570‧‧‧樣本位置
1580‧‧‧角度步進
1600‧‧‧修改的角度步進

Claims (38)

  1. 一種視頻解碼方法，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比；該方法包含：針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；及將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格而界定的第二預測方向。
  2. 如申請專利範圍第1項之方法，其中用以檢測該第一預測方向之該第一柵格係針對照度或色彩樣本之一者的樣本位置而被界定，以及用以產生該第二預測方向之該第二柵格係針對照度或色彩樣本之另一者的樣本位置而被界定。
  3. 如申請專利範圍第1項之方法，其中該預測方向為內預測方向，而該些參考樣本為從該相同個別影像被取得為該些待預測樣本之樣本。
  4. 如申請專利範圍第1至3項之任一項的方法，其中：該第一預測方向係針對包括當前照度樣本之照度樣本 的方形區塊而被界定；及該第二預測方向係針對包括當前色彩樣本之色彩樣本的矩形區塊而被界定。
  5. 如申請專利範圍第1項之方法，其中色彩樣本包含第一及第二色彩成分之樣本，及該方法包含：針對該第一色彩成分應用該方向映射步驟；針對該第二色彩成分提供不同的預測模式。
  6. 如申請專利範圍第5項之方法，包含：提供不同的個別預測模式給該些照度及色彩成分之每一者。
  7. 如申請專利範圍第5項之方法，其中一不同的預測模式包含一模式，該第二色彩成分之樣本係藉由該模式而被預測自該第一色彩成分之樣本。
  8. 如申請專利範圍第5項之方法，其中該第一色彩成分為Cb成分，而該第二色彩成分為Cr成分。
  9. 如申請專利範圍第1項之方法，包含提供照度樣本及色彩樣本為4：2：2格式視頻信號之步驟。
  10. 如申請專利範圍第1項之方法，其中該預測方向係界定相對於一群候選參考樣本之樣本位置，該群候選參考樣本包含個別地配置於該組當前待預測樣本之上方及左邊的水平列及垂直行的樣本。
  11. 如申請專利範圍第10項之方法，包含下列步驟：將該組候選參考樣本排列為參考樣本之線性陣列；及將平順化過濾器應用於該些線性陣列參考樣本，依沿 著該線性陣列之方向。
  12. 如申請專利範圍第10項之方法，其中：當前樣本之預測方向被界定以一相關的角度步進；針對一明顯垂直預測方向之該角度步進為一沿著該群候選參考樣本之樣本位置的水平列之補償，相對於其被垂直地移位自該當前樣本之該列中的樣本位置；針對一明顯水平預測方向之角度步進為一沿著該群候選參考樣本之樣本位置的垂直行之補償，相對於其被水平地移位自該當前樣本之該行中的樣本位置；及沿著由該補償所指示之該水平列或垂直行的該樣本位置提供了對於將使用於該當前樣本之預測的樣本位置之指標。
  13. 如申請專利範圍第12項之方法，其中應用該方向映射之該步驟包含將預定功能應用於相應於該第一預測方向之該角度步進。
  14. 如申請專利範圍第13項之方法，其中應用該方向映射之該步驟包含下列步驟：依據該第一預測方向以取得角度步進；及(i)假如該第一預測方向是明顯垂直的，則將個別角度步進減半以產生該第二預測方向之角度步進；或(ii)假如該第一預測方向是明顯水平的，則將個別角度步進加倍以產生該第二預測方向之角度步進。
  15. 如申請專利範圍第14項之方法，其中假如該角度步進不是整數，則該角度步進被用以界定用於內插之該群 候選參考樣本內的一群二或更多樣本位置，以提供該當前樣本之預測。
  16. 如申請專利範圍第1項之方法，其中應用該方向映射之步驟包含使用該第一預測方向以索引一查找表，該表提供該第二預測方向之相應值。
  17. 如申請專利範圍第1項之方法，其中檢測該第一預測方向之該步驟包含檢測其界定一與待解碼視頻資料關聯的預測方向之資訊。
  18. 如申請專利範圍第1項之方法，其中：該第一預測方向被用於一組樣本之照度樣本的預測；及由該應用步驟從該第一預測方向所取得的該第二預測方向被用於該組樣本之色彩樣本的預測。
  19. 一種視頻編碼或解碼方法，其中照度及第一和第二色彩成分樣本係依據與一待預測樣本關聯的預測模式而被預測，該方法包含從該第一色彩成分之樣本預測該第二色彩成分之樣本。
  20. 如申請專利範圍第19項之方法，其中與一待預測樣本關聯的該預測模式係指示一界定一或更多其他個別參考樣本之預測方向，以便從該預測方向預測該樣本。
  21. 一種視頻編碼方法，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平 解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比；該方法包含：針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；及將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格而界定的第二預測方向。
  22. 如申請專利範圍第21項之方法，其中檢測該第一預測方向之該步驟包含依據二或更多候選預測方向之試驗以選擇預測方向。
  23. 一種視頻解碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自從相同影像所取得之其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該些色彩樣本代表第一及第二色彩成分；該方法包含：選擇一預測模式，其界定用以預測該第一色彩成分之當前色彩樣本的一或更多參考樣本或值之選擇；及選擇一不同的預測模式，其界定用以預測該第二色彩成分之當前色彩樣本的一或更多參考樣本或值之不同選 擇，該第二色彩成分之該當前色彩樣本與該第一色彩成分之該當前色彩樣本共同位置。
  24. 一種視頻解碼方法，其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該方法包含：根據寬高比之差異以將一不同的個別預測演算法應用於該些照度及色彩樣本。
  25. 一種視頻編碼方法，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自從相同影像所取得之其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該些色彩樣本代表第一及第二色彩成分；該方法包含：選擇一預測模式，其界定用以預測該第一色彩成分之當前色彩樣本的一或更多參考樣本或值之選擇；及選擇一不同的預測模式，其界定用以預測該第二色彩成分之當前色彩樣本的一或更多參考樣本或值之不同選 擇，該第二色彩成分之該當前色彩樣本與該第一色彩成分之該當前色彩樣本共同位置。
  26. 一種視頻編碼方法，其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該方法包含：根據寬高比之差異以將一不同的個別預測演算法應用於該些照度及色彩樣本。
  27. 一種電腦軟體，當由電腦執行時該電腦軟體係致使該電腦履行依據申請專利範圍第1至26項之任一項的方法。
  28. 一種機器可讀式非暫態儲存媒體，其係儲存依據申請專利範圍第27項之軟體。
  29. 一種資料信號，其包含依據申請專利範圍第1至26項之任一項的方法所產生之編碼資料。
  30. 一種視頻解碼設備，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區 塊不同的寬高比；該設備包含：檢測器，組態成針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；及方向映射器，組態成將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格而界定的第二預測方向。
  31. 一種視頻解碼設備，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自從相同影像所取得之其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該些色彩樣本代表第一及第二色彩成分；該設備包含：選擇器，組態成選擇一預測模式，其界定用以預測該第一色彩成分之當前色彩樣本的一或更多參考樣本或值之選擇；及選擇一不同的預測模式，其界定用以預測該第二色彩成分之當前色彩樣本的一或更多參考樣本或值之不同選擇，該第二色彩成分之該當前色彩樣本與該第一色彩成分之該當前色彩樣本共同位置。
  32. 一種視頻解碼設備，其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考 樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該設備包含：預測器，組態成根據寬高比之差異以將一不同的個別預測演算法應用於該些照度及色彩樣本。
  33. 一種視頻解碼設備，其中照度及第一和第二色彩成分樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，該設備包含預測器，組態成從該第一色彩成分之樣本預測該第二色彩成分之樣本。
  34. 一種視頻編碼設備，其中照度及色彩樣本係依據一關聯與當前待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比；該設備包含：檢測器，組態成針對一組當前待預測樣本檢測一相關於第一寬高比之第一柵格而界定的第一預測方向；及方向映射器，組態成將方向映射應用於該預測方向以產生相關於不同寬高比之第二柵格而界定的第二預測方向。
  35. 一種視頻編碼設備，其中影像之照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自從相同影像所取得之其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該些色彩樣本代表第一及第二色彩成分；該設備包含：選擇器，組態成選擇一預測模式，其界定用以預測該第一色彩成分之當前色彩樣本的一或更多參考樣本或值之選擇；及選擇一不同的預測模式，其界定用以預測該第二色彩成分之當前色彩樣本的一或更多參考樣本或值之不同選擇，該第二色彩成分之該當前色彩樣本與該第一色彩成分之該當前色彩樣本共同位置。
  36. 一種視頻編碼設備，其中照度及色彩樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，該些色彩樣本具有較該些照度樣本更低的水平及/或垂直取樣率，以致照度水平解析度相對於色彩水平解析度之比係不同於照度垂直解析度相對於色彩垂直解析度之比，以致照度樣本之一區塊具有與色彩樣本之相應區塊不同的寬高比，該設備包含：預測器，組態成根據寬高比之差異以將一不同的個別預測演算法應用於該些照度及色彩樣本。
  37. 一種視頻編碼設備，其中照度及第一和第二色彩成分樣本係依據一關聯與待預測樣本之預測方向而被預測自其他個別參考樣本，該設備包含預測器，組態成從該第一色彩成分之樣本預測該第二色彩成分之樣本。
  38. 一種視頻儲存、傳輸、擷取或顯示設備，其包含依據申請專利範圍第30至37項之設備。
TW102114851A 2012-04-26 2013-04-25 資料編碼及解碼 TWI575942B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1207459.7A GB2501535A (en) 2012-04-26 2012-04-26 Chrominance Processing in High Efficiency Video Codecs
GB1211075.5A GB2501553A (en) 2012-04-26 2012-06-22 Predictive video coding and decoding based upon aspect ratios of blocks of sampled luminance and chrominance components
GB201211619A GB2501554B (en) 2012-04-26 2012-06-29 Data encoding and decoding

Publications (2)

Publication Number Publication Date
TW201408080A true TW201408080A (zh) 2014-02-16
TWI575942B TWI575942B (zh) 2017-03-21

Family

ID=46330504

Family Applications (5)

Application Number Title Priority Date Filing Date
TW108118597A TWI711301B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備
TW102114851A TWI575942B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW106131037A TWI677236B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備
TW102114850A TWI586152B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW102114853A TWI611689B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW108118597A TWI711301B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備

Family Applications After (3)

Application Number Title Priority Date Filing Date
TW106131037A TWI677236B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備
TW102114850A TWI586152B (zh) 2012-04-26 2013-04-25 資料編碼及解碼
TW102114853A TWI611689B (zh) 2012-04-26 2013-04-25 視頻解碼方法、電腦軟體、機器可讀取非暫態儲存媒體、編碼設備、視頻解碼設備以及視頻捕獲、顯示、傳輸、接收及／或儲存設備

Country Status (13)

Country Link
US (20) US9948929B2 (zh)
EP (8) EP2842321A2 (zh)
JP (11) JP2015518339A (zh)
KR (6) KR101840025B1 (zh)
CN (14) CN104285445A (zh)
AU (5) AU2013254443A1 (zh)
BR (3) BR112014026024A8 (zh)
CA (6) CA2870591C (zh)
GB (13) GB2501535A (zh)
MX (3) MX345237B (zh)
RU (4) RU2599935C2 (zh)
TW (5) TWI711301B (zh)
WO (9) WO2013160656A2 (zh)

Families Citing this family (212)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013067667A1 (en) * 2011-11-07 2013-05-16 Intel Corporation Cross-channel residual prediction
JP5688136B2 (ja) * 2010-04-23 2015-03-25 エム アンド ケー ホールディングス インコーポレイテッド 映像を符号化する装置及び方法
EP4124034B1 (en) * 2010-12-22 2023-08-23 LG Electronics Inc. Intra prediction in video coding
US10645398B2 (en) * 2011-10-25 2020-05-05 Texas Instruments Incorporated Sample-based angular intra-prediction in video coding
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US9591302B2 (en) * 2012-07-02 2017-03-07 Microsoft Technology Licensing, Llc Use of chroma quantization parameter offsets in deblocking
AU2012232992A1 (en) 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US9332257B2 (en) * 2012-10-01 2016-05-03 Qualcomm Incorporated Coded black flag coding for 4:2:2 sample format in video coding
CN104782125B (zh) * 2012-11-08 2019-03-15 佳能株式会社 对编码单位的变换单位编码和解码的方法、设备和系统
US9743091B2 (en) 2012-12-17 2017-08-22 Lg Electronics Inc. Method for encoding/decoding image, and device using same
JP6005572B2 (ja) * 2013-03-28 2016-10-12 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
EP3697090B1 (en) 2013-03-29 2022-01-05 JVCKENWOOD Corporation Image decoding device, image decoding method, and image decoding program
AU2013202653A1 (en) * 2013-04-05 2014-10-23 Canon Kabushiki Kaisha Method, apparatus and system for generating intra-predicted samples
GB2513110A (en) 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
CN113259684A (zh) * 2013-04-08 2021-08-13 Ge视频压缩有限责任公司 分量间预测
GB2513111A (en) 2013-04-08 2014-10-22 Sony Corp Data encoding and decoding
EP2936816B1 (en) * 2013-04-09 2020-04-29 MediaTek Singapore Pte Ltd. Method and apparatus for non-square intra mode coding
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
EP3021578B1 (en) * 2013-07-10 2019-01-02 KDDI Corporation Sub-sampling of reference pixels for chroma prediction based on luma intra prediction mode
CN105453567B (zh) * 2013-07-24 2019-04-23 微软技术许可有限责任公司 用于非变换编码的扫描次序
US9510002B2 (en) 2013-09-09 2016-11-29 Apple Inc. Chroma quantization in video coding
US9813737B2 (en) * 2013-09-19 2017-11-07 Blackberry Limited Transposing a block of transform coefficients, based upon an intra-prediction mode
KR101530774B1 (ko) 2013-09-30 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
CN105659602B (zh) 2013-10-14 2019-10-08 微软技术许可有限责任公司 用于视频和图像编码的帧内块复制预测模式的编码器侧选项
WO2015054812A1 (en) 2013-10-14 2015-04-23 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
WO2015054811A1 (en) 2013-10-14 2015-04-23 Microsoft Corporation Features of intra block copy prediction mode for video and image coding and decoding
KR101530782B1 (ko) * 2013-12-03 2015-06-22 연세대학교 산학협력단 영상 부호화 및 복호화 방법, 장치 및 시스템
WO2015098562A1 (ja) 2013-12-27 2015-07-02 ソニー株式会社 画像処理装置および方法
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
MX360926B (es) 2014-01-03 2018-11-22 Microsoft Technology Licensing Llc Prediccion de vector de bloque en codificacion/descodificacion de video e imagen.
US10368097B2 (en) * 2014-01-07 2019-07-30 Nokia Technologies Oy Apparatus, a method and a computer program product for coding and decoding chroma components of texture pictures for sample prediction of depth pictures
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
JP5897159B2 (ja) * 2014-02-25 2016-03-30 キヤノン株式会社 表示装置及びその制御方法
JP6504174B2 (ja) * 2014-03-03 2019-04-24 ソニー株式会社 装置及び方法
EP3253059A1 (en) 2014-03-04 2017-12-06 Microsoft Technology Licensing, LLC Block flipping and skip mode in intra block copy prediction
JP6731574B2 (ja) * 2014-03-06 2020-07-29 パナソニックＩｐマネジメント株式会社 動画像符号化装置および動画像符号化方法
WO2015182342A1 (ja) * 2014-05-26 2015-12-03 シャープ株式会社 画像復号装置、および、画像符号化装置
US10715833B2 (en) * 2014-05-28 2020-07-14 Apple Inc. Adaptive syntax grouping and compression in video data using a default value and an exception value
US10142642B2 (en) 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
EP3158734A4 (en) 2014-06-19 2017-04-26 Microsoft Technology Licensing, LLC Unified intra block copy and inter prediction modes
KR20170026334A (ko) * 2014-07-06 2017-03-08 엘지전자 주식회사 비디오 신호의 처리 방법 및 이를 위한 장치
KR102330740B1 (ko) 2014-09-30 2021-11-23 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 파면 병렬 프로세싱이 인에이블되는 경우의 인트라 픽쳐 예측 모드에 대한 규칙
GB2532420A (en) 2014-11-18 2016-05-25 Sony Corp Data encoding and decoding
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
EP3051818A1 (en) 2015-01-30 2016-08-03 Thomson Licensing Method and device for decoding a color picture
US10057587B2 (en) * 2015-01-31 2018-08-21 Qualcomm Incorporated Coding escape pixels for palette mode coding
US9900624B2 (en) * 2015-02-05 2018-02-20 Mediatek Inc. Methods and apparatus of decoding process for palette syntax
CN107251558B (zh) * 2015-02-27 2019-12-31 Kddi株式会社 编码装置以及解码装置
US10291932B2 (en) * 2015-03-06 2019-05-14 Qualcomm Incorporated Method and apparatus for low complexity quarter pel generation in motion search
WO2016145162A2 (en) * 2015-03-12 2016-09-15 NGCodec Inc. Intra-picture prediction processor with progressive block size computations and dual stage computations
WO2016157924A1 (ja) * 2015-03-27 2016-10-06 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
AU2015395514B2 (en) * 2015-05-21 2019-10-10 Huawei Technologies Co., Ltd. Apparatus and method for video motion compensation
US10306240B2 (en) * 2015-06-08 2019-05-28 Vid Scale, Inc. Intra block copy mode for screen content coding
US10659783B2 (en) 2015-06-09 2020-05-19 Microsoft Technology Licensing, Llc Robust encoding/decoding of escape-coded pixels in palette mode
FR3038484B1 (fr) * 2015-07-01 2017-07-28 Ateme Procede d'encodage d'image et equipement pour la mise en oeuvre du procede
ES2719132B1 (es) 2015-08-28 2020-05-05 Kt Corp Procedimiento y dispositivo para procesar señales de vídeo
WO2017041271A1 (en) * 2015-09-10 2017-03-16 Mediatek Singapore Pte. Ltd. Efficient context modeling for coding a block of data
CN108028923B (zh) * 2015-09-10 2021-08-20 Lg电子株式会社 视频编码系统中的帧内预测方法和设备
US20180302629A1 (en) * 2015-10-30 2018-10-18 Sony Corporation Image processing apparatus and method
BR112018010207A2 (pt) * 2015-11-18 2018-11-21 Mediatek Inc método e aparelho para o modo de predição intra usando filtro de predição intra em compressão de vídeo e imagem
US10194170B2 (en) * 2015-11-20 2019-01-29 Mediatek Inc. Method and apparatus for video coding using filter coefficients determined based on pixel projection phase
CN108293116A (zh) * 2015-11-24 2018-07-17 三星电子株式会社 视频解码方法及设备和视频编码方法及设备
US20170150156A1 (en) * 2015-11-25 2017-05-25 Qualcomm Incorporated Illumination compensation with non-square predictive blocks in video coding
EP3412027B1 (en) 2016-02-12 2024-04-24 Huawei Technologies Co., Ltd. Method and apparatus for scan order selection
US11778190B2 (en) 2016-02-12 2023-10-03 Interdigital Vc Holdings, Inc. Method and device for intra-predictive encoding/decoding a coding unit comprising picture data, said intra-predictive encoding depending on a prediction tree and a transform tree
EP3412028B1 (en) 2016-02-12 2024-04-03 Huawei Technologies Co., Ltd. Method and apparatus for scan order selection
EP3220643A1 (en) * 2016-03-14 2017-09-20 Thomson Licensing Method and device for encoding at least one image unit, and method and device for decoding a stream representative of at least one image unit
US10567759B2 (en) 2016-03-21 2020-02-18 Qualcomm Incorporated Using luma information for chroma prediction with separate luma-chroma framework in video coding
US20170332103A1 (en) * 2016-05-13 2017-11-16 Intel Corporation Interleaving luma and chroma coefficients to reduce the intra prediction loop dependency in video encoders and decoders
CA3025334C (en) * 2016-05-25 2021-07-13 Arris Enterprises Llc Binary ternary quad tree partitioning for jvet coding of video data
US11039175B2 (en) * 2016-05-27 2021-06-15 Sharp Kabushiki Kaisha Systems and methods for varying quantization parameters
CN114222137A (zh) * 2016-05-28 2022-03-22 世宗大学校产学协力团 构成预测运动矢量列表的方法
CN109479137B (zh) * 2016-05-28 2021-09-21 联发科技股份有限公司 用于彩色视频数据的调色板模式编解码的方法及装置
US11039147B2 (en) 2016-05-28 2021-06-15 Mediatek Inc. Method and apparatus of palette mode coding for colour video data
US10687003B2 (en) 2016-08-04 2020-06-16 Omnivision Technologies, Inc. Linear-logarithmic image sensor
US10368107B2 (en) 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10326986B2 (en) 2016-08-15 2019-06-18 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10652575B2 (en) * 2016-09-15 2020-05-12 Qualcomm Incorporated Linear model chroma intra prediction for video coding
WO2018056701A1 (ko) 2016-09-20 2018-03-29 주식회사 케이티 비디오 신호 처리 방법 및 장치
US20200036985A1 (en) * 2016-09-30 2020-01-30 Lg Electronics Inc. Method and apparatus for block partitioning and intra prediction in image coding system
US10506228B2 (en) * 2016-10-04 2019-12-10 Qualcomm Incorporated Variable number of intra modes for video coding
US10341659B2 (en) * 2016-10-05 2019-07-02 Qualcomm Incorporated Systems and methods of switching interpolation filters
CN116647677A (zh) * 2016-10-28 2023-08-25 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
WO2018079888A1 (ko) * 2016-10-28 2018-05-03 엘지전자(주) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US10192295B2 (en) * 2016-11-09 2019-01-29 AI Analysis, Inc. Methods and systems for normalizing images
US10666937B2 (en) * 2016-12-21 2020-05-26 Qualcomm Incorporated Low-complexity sign prediction for video coding
EP3552392A1 (en) 2016-12-23 2019-10-16 Huawei Technologies Co., Ltd. An intra-prediction apparatus for removing a directional intra-prediction mode from a set of predetermined directional intra-prediction modes
WO2018117892A1 (en) * 2016-12-23 2018-06-28 Huawei Technologies Co., Ltd. An intra-prediction apparatus for extending a set of predetermined directional intra-prediction modes
CN115733973A (zh) * 2016-12-23 2023-03-03 华为技术有限公司 一种用于矩形视频编码块的编码方法、装置及计算机可读存储介质
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
CN116684602A (zh) 2017-03-31 2023-09-01 松下电器（美国）知识产权公司 图像编码装置及方法、图像解码装置及方法、存储介质
CA3060201C (en) * 2017-04-13 2023-09-19 Lg Electronics Inc. Image encoding/decoding method and device therefor
EP3618439A4 (en) * 2017-04-28 2020-09-02 Sharp Kabushiki Kaisha IMAGE DECODING DEVICE AND IMAGE CODING DEVICE
CN108989820B (zh) * 2017-06-03 2022-07-05 上海天荷电子信息有限公司 各阶段采用各自相应色度采样格式的数据压缩方法和装置
RU2759218C2 (ru) * 2017-06-21 2021-11-11 Вид Скейл, Инк. Адаптивное квантование для кодирования 360-градусного видео
WO2019009540A1 (ko) * 2017-07-06 2019-01-10 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US10567772B2 (en) * 2017-07-11 2020-02-18 Google Llc Sub8×8 block processing
CN109274969B (zh) 2017-07-17 2020-12-22 华为技术有限公司 色度预测的方法和设备
CN115474043A (zh) * 2017-07-31 2022-12-13 韩国电子通信研究院 对图像编码和解码的方法及存储比特流的计算机可读介质
CN107483934B (zh) * 2017-08-17 2019-12-10 西安万像电子科技有限公司 编解码方法、装置和系统
JP2021005741A (ja) * 2017-09-14 2021-01-14 シャープ株式会社 画像符号化装置及び画像復号装置
RU2669874C1 (ru) * 2017-09-15 2018-10-16 Федеральное государственное унитарное предприятие "Государственный научно-исследовательский институт авиационных систем" (ФГУП "ГосНИИАС") Способы и устройство сжатия изображений. Способ и устройство восстановления изображений
CN117201802A (zh) 2017-09-21 2023-12-08 株式会社Kt 视频信号处理方法及装置
US11166013B2 (en) 2017-10-09 2021-11-02 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
US10812798B2 (en) * 2017-10-19 2020-10-20 Qualcomm Incorporated Chroma quantization parameter (QP) offset
US10368071B2 (en) * 2017-11-03 2019-07-30 Arm Limited Encoding data arrays
EP3490253A1 (en) * 2017-11-23 2019-05-29 Thomson Licensing Encoding and decoding methods and corresponding devices
CN108063947B (zh) * 2017-12-14 2021-07-13 西北工业大学 一种基于像素纹理的无损参考帧压缩方法
US10986349B2 (en) 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
CN115695789A (zh) * 2018-01-15 2023-02-03 三星电子株式会社 编码方法及其设备以及解码方法及其设备
GB2570711B (en) * 2018-02-05 2023-04-05 Sony Corp Data encoding and decoding
US10922783B2 (en) 2018-03-02 2021-02-16 Mediatek Inc. Cube-based projection method that applies different mapping functions to different square projection faces, different axes, and/or different locations of axis
TWI690728B (zh) * 2018-03-02 2020-04-11 聯發科技股份有限公司 用於處理包括堆疊在具有填充的基於立方體的投影佈局中的投影面的基於投影的圖框的方法
EP3764645A4 (en) 2018-03-09 2021-12-08 Electronics and Telecommunications Research Institute METHOD AND APPARATUS FOR IMAGE CODING / DECODING USING SAMPLE FILTER
JP6982525B2 (ja) * 2018-03-16 2021-12-17 Kddi株式会社 動画像の符号化装置および方法、復号装置および方法ならびに符号化復号システム
CA3185207A1 (en) 2018-03-25 2019-10-03 B1 Institute Of Image Technology, Inc. Image encoding/decoding method and device
WO2019188467A1 (ja) * 2018-03-30 2019-10-03 ソニー株式会社 画像処理装置および方法
CN116320455A (zh) * 2018-04-01 2023-06-23 Lg电子株式会社 编码设备、解码设备及数据发送设备
WO2019194147A1 (en) 2018-04-02 2019-10-10 Sharp Kabushiki Kaisha Systems and methods for deriving quantization parameters for video blocks in video coding
US11259023B2 (en) * 2018-04-12 2022-02-22 Qualcomm Incorporated Harmonization of transform-based quantization and dynamic range adjustment scale derivation in video coding
CN117834857A (zh) 2018-04-24 2024-04-05 三星电子株式会社 视频编码方法和装置以及视频解码方法和装置
US10949087B2 (en) 2018-05-15 2021-03-16 Samsung Electronics Co., Ltd. Method for rapid reference object storage format for chroma subsampled images
US11449256B2 (en) 2018-05-15 2022-09-20 Samsung Electronics Co., Ltd. Method for accelerating image storing and retrieving differential latency storage devices based on access rates
WO2019234604A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Extended quad-tree with asymmetric sub-blocks
AU2018429284B2 (en) * 2018-06-29 2023-01-19 Huawei Technologies Co., Ltd. Device and method for intra-prediction
US10284844B1 (en) 2018-07-02 2019-05-07 Tencent America LLC Method and apparatus for video coding
US10382772B1 (en) 2018-07-02 2019-08-13 Tencent America LLC Method and apparatus for video coding
WO2020013609A1 (ko) * 2018-07-11 2020-01-16 인텔렉추얼디스커버리 주식회사 화면내 예측 기반의 비디오 코딩 방법 및 장치
US11265579B2 (en) * 2018-08-01 2022-03-01 Comcast Cable Communications, Llc Systems, methods, and apparatuses for video processing
CN115988204A (zh) * 2018-08-09 2023-04-18 Oppo广东移动通信有限公司 视频图像分量的预测方法和装置、及计算机存储介质
JP7424982B2 (ja) 2018-08-15 2024-01-30 日本放送協会 画像符号化装置、画像復号装置、及びプログラム
CN112771865A (zh) * 2018-08-23 2021-05-07 交互数字Vc控股法国公司 使用参数化模型对量化矩阵进行编解码
CN110876061B (zh) * 2018-09-03 2022-10-11 华为技术有限公司 色度块预测方法及装置
WO2020060185A1 (ko) 2018-09-19 2020-03-26 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2020060077A1 (ko) * 2018-09-20 2020-03-26 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US10469845B1 (en) 2018-09-21 2019-11-05 Tencent America, Llc Method and apparatus for intra mode coding
WO2020060449A1 (en) * 2018-09-23 2020-03-26 Huawei Technologies Co., Ltd. Method and apparatus for intra reference sample interpolation filter switching
US11303904B2 (en) * 2018-09-28 2022-04-12 Qualcomm Incorporated Rectangular block transform scaling
CA3113854A1 (en) * 2018-10-09 2020-04-16 Mediatek, Inc. Method and apparatus of encoding or decoding using reference samples determined by predefined criteria
US11140404B2 (en) * 2018-10-11 2021-10-05 Tencent America LLC Method and apparatus for video coding
CN112889277A (zh) * 2018-10-22 2021-06-01 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法
WO2020085955A1 (en) * 2018-10-26 2020-04-30 Huawei Technologies Co., Ltd. Method and apparatus for reference sample filtering
KR20210087928A (ko) 2018-11-06 2021-07-13 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 예측을 위한 파라미터 유도의 복잡성 감소
CN112997500B (zh) * 2018-11-09 2023-04-18 北京字节跳动网络技术有限公司 对基于区域的自适应环路滤波器的改进
CN112997481B (zh) * 2018-11-16 2024-01-12 寰发股份有限公司 带有约束的亮度-色度单独的编码树编解码的方法和设备
US11438583B2 (en) * 2018-11-27 2022-09-06 Tencent America LLC Reference sample filter selection in intra prediction
WO2020111843A1 (ko) * 2018-11-28 2020-06-04 주식회사 윌러스표준기술연구소 화면 내 예측 필터링을 이용한 비디오 신호 처리 방법 및 장치
CN113170122B (zh) 2018-12-01 2023-06-27 北京字节跳动网络技术有限公司 帧内预测的参数推导
CN113170169B (zh) * 2018-12-07 2024-01-30 夏普株式会社 预测图像生成装置、运动图像解码装置、运动图像编码装置以及预测图像生成方法
CN116962710A (zh) * 2018-12-15 2023-10-27 华为技术有限公司 图像重建方法和装置
JP2020098984A (ja) * 2018-12-17 2020-06-25 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
EP4297403A3 (en) * 2018-12-21 2024-02-28 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding for deriving affine motion vectors for chroma components
KR20210100737A (ko) 2018-12-23 2021-08-17 후아웨이 테크놀러지 컴퍼니 리미티드 인코더, 디코더 및 적응 루프 필터를 사용한 대응 방법들
MX2021010337A (es) * 2019-02-27 2021-09-28 Huawei Tech Co Ltd Un codificador, un decodificador y metodos correspondientes.
US20200288130A1 (en) * 2019-03-07 2020-09-10 Qualcomm Incorporated Simplification of sub-block transforms in video coding
JP7256874B2 (ja) * 2019-03-08 2023-04-12 キヤノン株式会社 アダプティブループフィルタ
KR20210135502A (ko) 2019-03-08 2021-11-15 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 처리에서 변형 정보의 시그널링
CN113508586A (zh) * 2019-03-11 2021-10-15 北京达佳互联信息技术有限公司 视频编解码中变换系数的编解码
AU2019201653A1 (en) * 2019-03-11 2020-10-01 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a tree of blocks of video samples
CA3122752A1 (en) * 2019-03-24 2020-10-01 Huawei Technologies Co., Ltd. Method and apparatus for chroma intra prediction in video coding
KR20210139328A (ko) * 2019-03-25 2021-11-22 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드 화상 예측 방법, 인코더, 디코더 및 저장 매체
WO2020207493A1 (en) 2019-04-12 2020-10-15 Beijing Bytedance Network Technology Co., Ltd. Transform coding based on matrix-based intra prediction
KR102470695B1 (ko) 2019-04-16 2022-11-25 엘지전자 주식회사 인트라 예측 기반 영상 코딩에서의 변환
KR20210145749A (ko) * 2019-04-16 2021-12-02 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 적응형 루프 필터링
CN113692741B (zh) * 2019-04-18 2022-12-13 北京字节跳动网络技术有限公司 跨分量模式中的参数推导
US10764507B1 (en) * 2019-04-18 2020-09-01 Kneron (Taiwan) Co., Ltd. Image processing system capable of generating a snapshot image with high image quality by using a zero-shutter-lag snapshot operation
BR112021019675A2 (pt) 2019-04-23 2021-12-07 Beijing Bytedance Network Tech Co Ltd Método para processamento de mídia visual, aparelho codificador de vídeo, aparelho decodificador de vídeo, e, mídia legível por computador
EP3949402A4 (en) * 2019-04-26 2022-06-08 Huawei Technologies Co., Ltd. METHOD AND DEVICE FOR SIGNALING THE MAPPING FUNCTION OF A CHROMA QUANTIZATION PARAMETER
KR20210148321A (ko) * 2019-04-27 2021-12-07 주식회사 윌러스표준기술연구소 인트라 예측 기반 비디오 신호 처리 방법 및 장치
CN110266316B (zh) * 2019-05-08 2023-02-21 创新先进技术有限公司 一种数据压缩、解压方法、装置和设备
BR112021022307A2 (pt) 2019-05-13 2021-12-28 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processamento de dados de vídeo, meios de armazenamento e de gravação não transitórios legíveis por computador
WO2020228718A1 (en) * 2019-05-13 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Interaction between transform skip mode and other coding tools
KR20200132753A (ko) * 2019-05-15 2020-11-25 현대자동차주식회사 영상 부호화 및 복호화 방법 및 장치
CN113853787B (zh) 2019-05-22 2023-12-22 北京字节跳动网络技术有限公司 基于子块使用变换跳过模式
CN114051735A (zh) 2019-05-31 2022-02-15 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的一步下采样过程
EP3963885A4 (en) 2019-06-05 2022-12-14 Beijing Bytedance Network Technology Co., Ltd. DETERMINING CONTEXT FOR MATRIX-BASED INTRAPREDICTION
US11212545B2 (en) 2019-06-07 2021-12-28 Tencent America LLC Method and apparatus for improved implicit transform selection
CN116828176A (zh) * 2019-06-11 2023-09-29 Lg电子株式会社 解码设备、编码设备和发送设备
MX2021015275A (es) * 2019-06-11 2022-01-18 Lg Electronics Inc Metodo de decodificacion de imagenes para componente de croma y dispositivo para el mismo.
TW202106017A (zh) * 2019-06-21 2021-02-01 法商內數位Ｖｃ控股法國公司 用於視訊編碼及解碼的單一索引量化矩陣設計
CN113994697A (zh) 2019-06-22 2022-01-28 北京字节跳动网络技术有限公司 色度残差缩放的语法元素
KR20220138876A (ko) * 2019-06-25 2022-10-13 닛폰 호소 교카이 인트라 예측 장치, 화상 복호 장치, 및 프로그램
US11368693B2 (en) * 2019-07-01 2022-06-21 Sony Group Corporation Forward and inverse quantization for point cloud compression using look-up tables
CN116668699A (zh) * 2019-07-05 2023-08-29 Lg电子株式会社 图像编码/解码设备和图像数据的发送方法
JP7460748B2 (ja) 2019-07-07 2024-04-02 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのシグナリング
EP3994889A4 (en) 2019-08-06 2023-01-11 Beijing Bytedance Network Technology Co., Ltd. SIZE RESTRICTION BASED ON A COLOR FORMAT
KR20220044278A (ko) 2019-08-15 2022-04-07 바이트댄스 아이엔씨 상이한 분할 구조들을 갖는 팔레트 모드
KR20220044279A (ko) 2019-08-15 2022-04-07 바이트댄스 아이엔씨 팔레트 이스케이프 심벌에 대한 엔트로피 코딩
WO2021040251A1 (en) * 2019-08-23 2021-03-04 Samsung Electronics Co., Ltd. Intra prediction method and device using the same, encoding and decoding method and device using the same based on intra prediction
KR20210025507A (ko) * 2019-08-27 2021-03-09 현대자동차주식회사 차등 부호화를 이용하는 비디오 부호화 및 복호화
MX2022002247A (es) * 2019-09-02 2022-03-22 Beijing Bytedance Network Tech Co Ltd Particion de region de video basada en formato de color.
KR20220058889A (ko) 2019-09-14 2022-05-10 바이트댄스 아이엔씨 비디오 코딩의 크로마 양자화 파라미터
WO2021055782A1 (en) * 2019-09-19 2021-03-25 Bytedance Inc. Quantization parameter derivation for palette mode
JP7232160B2 (ja) * 2019-09-19 2023-03-02 Ｔｖｓ Ｒｅｇｚａ株式会社 画質回路、映像処理装置および信号特徴検出方法
MX2022003122A (es) 2019-09-21 2022-04-06 Beijing Bytedance Network Tech Co Ltd Modo intra basado para croma de restriccion de tama?o.
EP4035384A4 (en) * 2019-09-23 2023-08-16 Alibaba Group Holding Limited MOTION COMPENSATION INTERPOLATION FILTER WITH REFERENCE DOWNSAMPLE
EP4022922A4 (en) * 2019-09-24 2022-11-23 Huawei Technologies Co., Ltd. METHOD AND APPARATUS FOR COMBINED INTRA-INTER PREDICTION
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
CN114556924B (zh) 2019-10-14 2024-01-26 字节跳动有限公司 视频处理中色度残差的联合编解码与滤波的方法、装置及介质
CN114762352A (zh) * 2019-11-27 2022-07-15 北京达佳互联信息技术有限公司 用于视频编解码的去块滤波
KR20220106116A (ko) 2019-12-09 2022-07-28 바이트댄스 아이엔씨 비디오 코딩에서 양자화 그룹 사용
CA3129687A1 (en) * 2019-12-24 2021-07-01 Telefonaktiebolaget Lm Ericsson (Publ) Virtual boundary processing for adaptive loop filtering
KR102558336B1 (ko) * 2019-12-30 2023-07-20 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 비디오 데이터의 크로마 및 루마 성분의 교차 성분 결정
CN114902657A (zh) 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
US11197001B2 (en) 2020-02-05 2021-12-07 Tencent America LLC Method and apparatus for interactions between decoder-side intra mode derivation and adaptive intra prediction modes
CN115462076A (zh) * 2020-04-30 2022-12-09 北京达佳互联信息技术有限公司 用于针对视频编解码的预测相关残差缩放的方法和设备
GB2599433A (en) * 2020-10-02 2022-04-06 Sony Group Corp Data encoding and decoding
TWI776294B (zh) * 2020-11-30 2022-09-01 中華電信股份有限公司 光框架交換機
CN113099229B (zh) * 2021-02-22 2022-08-09 浙江大华技术股份有限公司 块划分方法、帧间预测方法、视频编码方法及相关装置
WO2023131211A1 (en) * 2022-01-05 2023-07-13 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing

Family Cites Families (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4602285A (en) * 1983-04-08 1986-07-22 Ampex Corporation System and method for transforming and filtering a video image
GB9013217D0 (en) * 1990-06-13 1990-08-01 Indep Broadcasting Authority Evaluation of detail in video images,and applications thereof
US5294974A (en) * 1992-07-24 1994-03-15 Matsushita Electric Corporation Of America High-definition video encoding system having color-sensitive quantization
JPH07121687A (ja) 1993-10-20 1995-05-12 Sony Corp 画像コーデック用プロセッサおよびアクセスパターン変換方法
KR100208375B1 (ko) * 1995-12-27 1999-07-15 윤종용 동화상 부호화 방법 및 장치
US5737023A (en) * 1996-02-05 1998-04-07 International Business Machines Corporation Hierarchical motion estimation for interlaced video
CN100361536C (zh) * 1996-05-28 2008-01-09 松下电器产业株式会社 图像预测编码/解码装置和方法以及记录媒体
FR2752474B1 (fr) 1996-08-14 1998-12-31 Iona Donescu Procede de transformation du signal image sur des supports de forme arbitraire
KR100442229B1 (ko) * 1996-09-13 2004-10-08 엘지전자 주식회사 간이형hdtv비디오디코더및디코딩방법
TW366648B (en) 1996-10-24 1999-08-11 Matsushita Electric Ind Co Ltd Method of supplementing pixel signal coding device, and pixel signal decoding device
WO1999016252A1 (en) * 1997-09-19 1999-04-01 Sony Electronics Inc. Motion compensated digital video decoding with buffered picture storage memory map
AR025609A1 (es) 1999-09-13 2002-12-04 Hoffmann La Roche Formulaciones lipidas solidas
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
US6788338B1 (en) * 2000-11-20 2004-09-07 Petko Dimitrov Dinev High resolution video camera apparatus having two image sensors and signal processing
JP4254147B2 (ja) * 2001-11-30 2009-04-15 ソニー株式会社 画像情報符号化方法及び装置、並びにプログラム及び記録媒体
EP1833262A1 (en) * 2002-01-18 2007-09-12 Kabushiki Kaisha Toshiba Video encoding method and apparatus and video decoding method and apparatus
CN100448285C (zh) 2002-12-18 2008-12-31 索尼株式会社 信息处理设备和信息处理方法
US8824553B2 (en) * 2003-05-12 2014-09-02 Google Inc. Video compression method
WO2004110072A1 (fr) * 2003-06-06 2004-12-16 Mediatek Inc. Dispositif et procede pour conversion de format et melange de signal video
JP4815107B2 (ja) * 2003-07-16 2011-11-16 三星電子株式会社 カラー平面間予測を利用した無損失映像符号化／復号化方法及び装置
JP4617644B2 (ja) 2003-07-18 2011-01-26 ソニー株式会社 符号化装置及び方法
US7193656B2 (en) * 2003-08-14 2007-03-20 Broadcom Corporation Line address computer for providing coefficients to a chroma filter
US7620106B2 (en) 2003-09-07 2009-11-17 Microsoft Corporation Joint coding and decoding of a reference field selection and differential motion vector information
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
EP1714484A4 (en) * 2004-01-30 2009-03-18 Panasonic Corp BILDCODE AND DECODE PROCESSING; DEVICE AND PROGRAM THEREFOR
KR100813958B1 (ko) 2004-06-07 2008-03-14 세종대학교산학협력단 동영상의 무손실 인코딩 및 디코딩 방법, 그 장치
JP4763422B2 (ja) * 2004-12-03 2011-08-31 パナソニック株式会社 イントラ予測装置
KR100843196B1 (ko) * 2004-12-17 2008-07-02 삼성전자주식회사 Ｈ.264/ａｖｃ 비디오 디코더의 디블록킹 필터
KR101138392B1 (ko) * 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
EP1869568A4 (en) 2005-03-23 2009-04-29 Alcatel Lucent SYSTEM AND METHOD FOR SEARCHING A DIGITAL MEDIA CONTENT FROM A BROADCAST LIST FROM A NETWORK NODE
RU2340115C1 (ru) * 2005-04-29 2008-11-27 Самсунг Электроникс Ко., Лтд. Способ кодирования видеосигналов и устройство, поддерживающее быстрый алгоритм точной масштабируемости по качеству
KR101424969B1 (ko) * 2005-07-15 2014-08-04 삼성전자주식회사 영상 복호화 방법
CN101815224A (zh) 2005-07-22 2010-08-25 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
US7933337B2 (en) * 2005-08-12 2011-04-26 Microsoft Corporation Prediction of transform coefficients for image compression
WO2007046644A1 (en) 2005-10-21 2007-04-26 Electronics And Telecommunications Research Institute Apparatus and method for encoding and decoding moving picture using adaptive scanning
CN101496406B (zh) * 2006-03-23 2012-02-01 三星电子株式会社 图像编码/解码方法和设备
US9001899B2 (en) * 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
EP2066134A4 (en) * 2006-10-10 2011-01-12 Nippon Telegraph & Telephone VIDEO ENCODING AND DECODING METHODS, THEIR DEVICE, PROGRAM, AND STORAGE MEDIUM CONTAINING THE PROGRAM
US8121195B2 (en) 2006-11-30 2012-02-21 Lsi Corporation Memory reduced H264/MPEG-4 AVC codec
US20080170793A1 (en) 2007-01-12 2008-07-17 Mitsubishi Electric Corporation Image encoding device and image encoding method
JP2008193627A (ja) * 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
JP5026092B2 (ja) * 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
KR101539240B1 (ko) * 2007-06-14 2015-07-30 삼성전자주식회사 영상 데이터의 엔트로피 부호화, 복호화 방법 및 장치
US8428133B2 (en) * 2007-06-15 2013-04-23 Qualcomm Incorporated Adaptive coding of video block prediction mode
JP2009004920A (ja) * 2007-06-19 2009-01-08 Panasonic Corp 画像符号化装置および画像符号化方法
US7991237B2 (en) * 2007-06-28 2011-08-02 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
US8265144B2 (en) * 2007-06-30 2012-09-11 Microsoft Corporation Innovations in video decoder implementations
TWI410139B (zh) * 2007-09-12 2013-09-21 Sony Corp Image processing apparatus and image processing method
JP2009081579A (ja) * 2007-09-25 2009-04-16 Toshiba Corp 動画像復号装置、および動画像復号方法
US8194741B2 (en) * 2007-10-12 2012-06-05 Broadcom Corporation Method and system for processing B pictures with missing or invalid forward reference pictures
US8953685B2 (en) * 2007-12-10 2015-02-10 Qualcomm Incorporated Resource-adaptive video interpolation or extrapolation with motion level analysis
JP2009206911A (ja) * 2008-02-28 2009-09-10 Mitsubishi Electric Corp 動画像変換装置
US8804831B2 (en) * 2008-04-10 2014-08-12 Qualcomm Incorporated Offsets at sub-pixel resolution
KR101493905B1 (ko) * 2008-08-12 2015-03-02 삼성전자 주식회사 영상처리장치 및 영상처리방법
EP2157799A1 (en) * 2008-08-18 2010-02-24 Panasonic Corporation Interpolation filter with local adaptation based on block edges in the reference frame
JP4952685B2 (ja) 2008-08-26 2012-06-13 株式会社Ｊｖｃケンウッド 映像信号符号化装置
US8548041B2 (en) * 2008-09-25 2013-10-01 Mediatek Inc. Adaptive filter
US9078007B2 (en) * 2008-10-03 2015-07-07 Qualcomm Incorporated Digital video coding with interpolation filters and offsets
US8483285B2 (en) * 2008-10-03 2013-07-09 Qualcomm Incorporated Video coding using transforms bigger than 4×4 and 8×8
CN102187670B (zh) * 2008-10-15 2014-05-14 法国电信公司 通过前向移动期间的补偿来预测图像
EP2187647A1 (en) * 2008-11-12 2010-05-19 Sony Corporation Method and device for approximating a DC coefficient of a block of pixels of a frame
CN101742328B (zh) * 2008-11-14 2013-03-27 北京中星微电子有限公司 图像残差矩阵整数变换方法及装置、反变换方法及装置
US8578272B2 (en) 2008-12-31 2013-11-05 Apple Inc. Real-time or near real-time streaming
TW201028018A (en) 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
US20100178038A1 (en) * 2009-01-12 2010-07-15 Mediatek Inc. Video player
JP2010177809A (ja) * 2009-01-27 2010-08-12 Toshiba Corp 動画像符号化装置および動画像復号装置
JP5502336B2 (ja) * 2009-02-06 2014-05-28 パナソニック株式会社 映像信号符号化装置及び、映像信号符号化方法
WO2010113227A1 (ja) 2009-03-31 2010-10-07 パナソニック株式会社 画像復号装置
EP2237557A1 (en) * 2009-04-03 2010-10-06 Panasonic Corporation Coding for filter coefficients
JP5158003B2 (ja) * 2009-04-14 2013-03-06 ソニー株式会社 画像符号化装置と画像符号化方法およびコンピュータ・プログラム
JP5169978B2 (ja) 2009-04-24 2013-03-27 ソニー株式会社 画像処理装置および方法
US8761531B2 (en) * 2009-07-09 2014-06-24 Qualcomm Incorporated Image data compression involving sub-sampling of luma and chroma values
JP5234368B2 (ja) 2009-09-30 2013-07-10 ソニー株式会社 画像処理装置および方法
US8477845B2 (en) * 2009-10-16 2013-07-02 Futurewei Technologies, Inc. Predictive adaptive scan ordering for video coding
WO2011052215A1 (ja) * 2009-10-30 2011-05-05 パナソニック株式会社 復号方法、復号装置、符号化方法、および符号化装置
WO2011052216A1 (ja) * 2009-10-30 2011-05-05 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
JPWO2011061880A1 (ja) * 2009-11-19 2013-04-04 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
WO2011080806A1 (ja) 2009-12-28 2011-07-07 富士通株式会社 動画像符号化装置および動画像復号装置
CN102845063B (zh) * 2010-02-08 2016-05-11 诺基亚技术有限公司 用于视频编码的设备、方法和计算机程序
US20110200108A1 (en) * 2010-02-18 2011-08-18 Qualcomm Incorporated Chrominance high precision motion filtering for motion interpolation
CN102164284A (zh) * 2010-02-24 2011-08-24 富士通株式会社 视频解码方法和系统
KR101503269B1 (ko) * 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
US8929440B2 (en) 2010-04-09 2015-01-06 Sony Corporation QP adaptive coefficients scanning and application
JP2011223303A (ja) * 2010-04-09 2011-11-04 Sony Corp 画像符号化装置と画像符号化方法および画像復号化装置と画像復号化方法
JPWO2011129090A1 (ja) * 2010-04-13 2013-07-11 パナソニック株式会社 符号化歪み除去方法、符号化方法、復号化方法、符号化歪み除去装置、符号化装置、および復号化装置
CN102236502A (zh) 2010-04-21 2011-11-09 上海三旗通信科技有限公司 一种移动终端压力触控手势识别的人机交互方式
US20110317757A1 (en) * 2010-06-25 2011-12-29 Qualcomm Incorporated Intra prediction mode signaling for finer spatial prediction directions
US9661338B2 (en) 2010-07-09 2017-05-23 Qualcomm Incorporated Coding syntax elements for adaptive scans of transform coefficients for video coding
RU2619202C1 (ru) * 2010-07-20 2017-05-12 Нтт Докомо, Инк. Устройство кодирования изображений с предсказанием, способ кодирования изображений с предсказанием, программа кодирования изображений с предсказанием, устройство декодирования изображений с предсказанием, способ декодирования изображений с предсказанием и программа декодирования изображений с предсказанием
RS57166B1 (sr) * 2010-08-17 2018-07-31 M&K Holdings Inc Postupak za kodiranje intra prediktivnog moda
EP3849194B1 (en) 2010-09-27 2022-08-03 LG Electronics, Inc. Method for partitioning block and decoding device
CN102447895B (zh) * 2010-09-30 2013-10-02 华为技术有限公司 扫描方法及装置、反扫描方法及装置
US8885704B2 (en) * 2010-10-01 2014-11-11 Qualcomm Incorporated Coding prediction modes in video coding
CN101938657B (zh) * 2010-10-07 2012-07-04 西安电子科技大学 高效视频编码中编码单元自适应划分方法
US20120134425A1 (en) * 2010-11-29 2012-05-31 Faouzi Kossentini Method and System for Adaptive Interpolation in Digital Video Coding
KR102295680B1 (ko) * 2010-12-08 2021-08-31 엘지전자 주식회사 인트라 예측 방법과 이를 이용한 부호화 장치 및 복호화 장치
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
US10045046B2 (en) * 2010-12-10 2018-08-07 Qualcomm Incorporated Adaptive support for interpolating values of sub-pixels for video coding
US9049444B2 (en) * 2010-12-22 2015-06-02 Qualcomm Incorporated Mode dependent scanning of coefficients of a block of video data
US9172972B2 (en) * 2011-01-05 2015-10-27 Qualcomm Incorporated Low complexity interpolation filtering with adaptive tap size
GB2487242A (en) * 2011-01-17 2012-07-18 Sony Corp Interpolation Using Shear Transform
JP2012186617A (ja) 2011-01-31 2012-09-27 Sony Corp 画像処理装置および方法
CN103780912B (zh) 2011-02-10 2017-11-24 威勒斯媒体国际有限公司 图像处理装置和图像处理方法
JP2012175615A (ja) 2011-02-24 2012-09-10 Sony Corp 画像処理装置及び画像処理方法
WO2012113197A1 (zh) * 2011-02-24 2012-08-30 中兴通讯股份有限公司 一种预测模式的编码或解码方法及装置
US20120230418A1 (en) * 2011-03-08 2012-09-13 Qualcomm Incorporated Coding of transform coefficients for video coding
US8494290B2 (en) * 2011-05-05 2013-07-23 Mitsubishi Electric Research Laboratories, Inc. Method for coding pictures using hierarchical transform units
US9602839B2 (en) * 2011-06-15 2017-03-21 Futurewei Technologies, Inc. Mode dependent intra smoothing filter table mapping methods for non-square prediction units
JP5678814B2 (ja) 2011-06-20 2015-03-04 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに、送信装置、送信方法及び送信プログラム
WO2012176405A1 (ja) * 2011-06-20 2012-12-27 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号装置、画像復号方法及び画像復号プログラム
CN103597833A (zh) * 2011-06-22 2014-02-19 索尼公司 图像处理装置以及方法
JP5990948B2 (ja) * 2011-06-22 2016-09-14 セイコーエプソン株式会社 プロジェクター
GB2492130A (en) * 2011-06-22 2012-12-26 Canon Kk Processing Colour Information in an Image Comprising Colour Component Sample Prediction Being Based on Colour Sampling Format
JP5614381B2 (ja) 2011-06-23 2014-10-29 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、送信装置、送信方法、及び送信プログラム
WO2012176406A1 (ja) * 2011-06-23 2012-12-27 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム、並びに画像復号装置、画像復号方法及び画像復号プログラム
US9854275B2 (en) * 2011-06-25 2017-12-26 Qualcomm Incorporated Quantization in video coding
JP5907367B2 (ja) * 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
US20130044811A1 (en) * 2011-08-18 2013-02-21 Hyung Joon Kim Content-Based Adaptive Control of Intra-Prediction Modes in Video Encoding
KR20140046055A (ko) * 2011-09-08 2014-04-17 모토로라 모빌리티 엘엘씨 계수들의 직사각형 블록의 양자화 및 역양자화를 위한 방법들 및 장치
US9787982B2 (en) * 2011-09-12 2017-10-10 Qualcomm Incorporated Non-square transform units and prediction units in video coding
US9762899B2 (en) * 2011-10-04 2017-09-12 Texas Instruments Incorporated Virtual memory access bandwidth verification (VMBV) in video coding
US9807401B2 (en) * 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
GB2496197A (en) 2011-11-07 2013-05-08 Sony Corp Frequency Domain Video Data Reordering for Encoding
GB2496194A (en) 2011-11-07 2013-05-08 Sony Corp Entropy encoding video data using reordering patterns
GB2496201A (en) 2011-11-07 2013-05-08 Sony Corp Context adaptive data encoding and decoding
GB201119180D0 (en) 2011-11-07 2011-12-21 Sony Corp Data encoding and decoding
KR101665921B1 (ko) * 2011-11-08 2016-10-12 가부시끼가이샤 도시바 이미지 부호화 방법, 이미지 복호화 방법, 이미지 부호화 장치 및 이미지 복호화 장치
US9451252B2 (en) * 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
US9749633B2 (en) * 2012-01-19 2017-08-29 Vid Scale, Inc. System and method of video coding quantization and dynamic range control
US8581753B2 (en) * 2012-01-19 2013-11-12 Sharp Laboratories Of America, Inc. Lossless coding technique for CABAC in HEVC
US9363516B2 (en) * 2012-01-19 2016-06-07 Qualcomm Incorporated Deblocking chroma data for video coding
JP5995448B2 (ja) * 2012-01-19 2016-09-21 シャープ株式会社 画像復号装置、および画像符号化装置
US9538200B2 (en) * 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
US9106936B2 (en) * 2012-01-25 2015-08-11 Altera Corporation Raw format image data processing
US9123278B2 (en) * 2012-02-24 2015-09-01 Apple Inc. Performing inline chroma downsampling with reduced power consumption
US9325991B2 (en) * 2012-04-11 2016-04-26 Qualcomm Incorporated Motion vector rounding
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9253483B2 (en) * 2012-09-25 2016-02-02 Google Technology Holdings LLC Signaling of scaling list
US9332257B2 (en) * 2012-10-01 2016-05-03 Qualcomm Incorporated Coded black flag coding for 4:2:2 sample format in video coding

Also Published As

Publication number Publication date
JP2015515236A (ja) 2015-05-21
US9674531B2 (en) 2017-06-06
CA2870591A1 (en) 2013-10-31
CN104247426A (zh) 2014-12-24
US10440358B2 (en) 2019-10-08
GB201220836D0 (en) 2013-01-02
US10499052B2 (en) 2019-12-03
US9826231B2 (en) 2017-11-21
EP2842315B1 (en) 2023-07-12
CN108134931B (zh) 2022-03-01
US20150063457A1 (en) 2015-03-05
GB201211066D0 (en) 2012-08-01
GB2501554B (en) 2014-09-24
RU2017116180A3 (zh) 2020-05-27
TWI611689B (zh) 2018-01-11
JP2017055444A (ja) 2017-03-16
CN104272739A (zh) 2015-01-07
US20180227577A1 (en) 2018-08-09
MX345237B (es) 2017-01-23
RU2014147453A (ru) 2016-06-20
KR102104400B1 (ko) 2020-04-24
GB2501557A (en) 2013-10-30
WO2013160694A4 (en) 2014-01-03
AU2013254444B2 (en) 2015-10-29
JP2015518343A (ja) 2015-06-25
EP4243420A3 (en) 2023-11-22
GB201211619D0 (en) 2012-08-15
MX343351B (es) 2016-11-03
RU2014147445A (ru) 2016-06-10
TW201408081A (zh) 2014-02-16
CA3028883C (en) 2021-10-26
AU2016204227B2 (en) 2018-09-06
RU2599935C2 (ru) 2016-10-20
US20150172652A1 (en) 2015-06-18
TWI677236B (zh) 2019-11-11
EP2842317A1 (en) 2015-03-04
GB2501566A (en) 2013-10-30
GB201211070D0 (en) 2012-08-01
CA2871556A1 (en) 2013-10-31
JP5986294B2 (ja) 2016-09-06
WO2013160656A3 (en) 2013-12-19
US20190253702A1 (en) 2019-08-15
US10841572B2 (en) 2020-11-17
JP2016201813A (ja) 2016-12-01
JP2015518342A (ja) 2015-06-25
CN107734330B (zh) 2020-04-28
CN104247425B (zh) 2018-11-06
AU2013254448A1 (en) 2014-11-06
GB201211628D0 (en) 2012-08-15
CN104285445A (zh) 2015-01-14
CN111182299A (zh) 2020-05-19
CN110933409B (zh) 2023-06-27
JP6606794B2 (ja) 2019-11-20
BR112014026035B1 (pt) 2023-02-07
RU2751080C2 (ru) 2021-07-08
CN108366257B (zh) 2022-03-25
GB201211623D0 (en) 2012-08-15
EP2842316A1 (en) 2015-03-04
WO2013160699A1 (en) 2013-10-31
WO2013160698A1 (en) 2013-10-31
GB2501535A (en) 2013-10-30
RU2014147451A (ru) 2016-06-20
US10419750B2 (en) 2019-09-17
US20180160112A1 (en) 2018-06-07
EP2842314A2 (en) 2015-03-04
TW201817239A (zh) 2018-05-01
TWI586152B (zh) 2017-06-01
CN108134931A (zh) 2018-06-08
CN104272739B (zh) 2018-04-20
BR112014026021B1 (pt) 2023-12-19
AU2016204227A1 (en) 2016-07-14
TWI711301B (zh) 2020-11-21
KR20140145606A (ko) 2014-12-23
TW201408079A (zh) 2014-02-16
AU2018217304B2 (en) 2020-08-06
CN108366257A (zh) 2018-08-03
EP3442229A1 (en) 2019-02-13
GB201211067D0 (en) 2012-08-01
GB2501553A (en) 2013-10-30
AU2013254448B2 (en) 2015-11-19
JP2018129858A (ja) 2018-08-16
JP6231647B2 (ja) 2017-11-15
US20170272743A1 (en) 2017-09-21
KR20190077110A (ko) 2019-07-02
US10674144B2 (en) 2020-06-02
JP2015518341A (ja) 2015-06-25
GB2501550A (en) 2013-10-30
JP2018142970A (ja) 2018-09-13
RU2619888C2 (ru) 2017-05-19
WO2013160696A1 (en) 2013-10-31
CN104255030B (zh) 2018-04-03
CA3128787A1 (en) 2013-10-31
US10205941B2 (en) 2019-02-12
JP2015518340A (ja) 2015-06-25
JP6325606B2 (ja) 2018-05-16
CN104255030A (zh) 2014-12-31
CN107734330A (zh) 2018-02-23
US9693058B2 (en) 2017-06-27
US20190191154A1 (en) 2019-06-20
EP4243421A3 (en) 2023-11-29
MX2014012846A (es) 2015-10-22
GB201207459D0 (en) 2012-06-13
CN104255029B (zh) 2017-11-24
AU2013254443A1 (en) 2014-10-23
RU2603548C2 (ru) 2016-11-27
US9686548B2 (en) 2017-06-20
EP4243420A2 (en) 2023-09-13
US9686547B2 (en) 2017-06-20
US9948929B2 (en) 2018-04-17
US20180124392A1 (en) 2018-05-03
JP6050478B2 (ja) 2016-12-21
GB201211073D0 (en) 2012-08-01
KR20180030263A (ko) 2018-03-21
BR112014026024A2 (pt) 2017-06-27
CN108347604A (zh) 2018-07-31
WO2013160693A2 (en) 2013-10-31
US20150063460A1 (en) 2015-03-05
AU2018217304A1 (en) 2018-09-06
US20190222833A1 (en) 2019-07-18
KR101734974B1 (ko) 2017-05-15
GB2501546A (en) 2013-10-30
JP6128707B2 (ja) 2017-05-17
EP2842315A1 (en) 2015-03-04
MX346235B (es) 2017-03-13
US10531083B2 (en) 2020-01-07
CN104247425A (zh) 2014-12-24
EP2842314B1 (en) 2021-06-02
CA3128787C (en) 2023-09-26
GB2501554A (en) 2013-10-30
GB201211075D0 (en) 2012-08-01
US20150085924A1 (en) 2015-03-26
BR112014026021A8 (pt) 2021-06-22
WO2013160700A1 (en) 2013-10-31
KR101840025B1 (ko) 2018-03-20
JP6328613B2 (ja) 2018-05-23
US11109019B2 (en) 2021-08-31
WO2013160693A3 (en) 2013-12-19
KR20170041288A (ko) 2017-04-14
CN104255029A (zh) 2014-12-31
GB2501549A (en) 2013-10-30
JP2015518339A (ja) 2015-06-25
KR20150003219A (ko) 2015-01-08
GB2501547A (en) 2013-10-30
CA3028883A1 (en) 2013-10-31
EP4243421A2 (en) 2023-09-13
US20150078447A1 (en) 2015-03-19
CA2870602C (en) 2022-08-09
CA2870596C (en) 2019-02-12
US20170359576A1 (en) 2017-12-14
US10244232B2 (en) 2019-03-26
US10827169B2 (en) 2020-11-03
CA2871556C (en) 2017-08-29
CA2870596A1 (en) 2013-10-31
AU2013254444A1 (en) 2014-10-23
US20200177874A1 (en) 2020-06-04
KR20170054561A (ko) 2017-05-17
RU2017116180A (ru) 2019-01-28
GB201211069D0 (en) 2012-08-01
US11252402B2 (en) 2022-02-15
US20220150468A1 (en) 2022-05-12
CN109068135B (zh) 2023-03-14
EP2842321A2 (en) 2015-03-04
CN110225337A (zh) 2019-09-10
CN109068135A (zh) 2018-12-21
GB2501556A (en) 2013-10-30
BR112014026021A2 (pt) 2017-06-27
US20150043641A1 (en) 2015-02-12
WO2013160694A1 (en) 2013-10-31
KR101994597B1 (ko) 2019-06-28
JP6503492B2 (ja) 2019-04-17
GB2501548A (en) 2013-10-30
GB2501551A (en) 2013-10-30
CA2870602A1 (en) 2013-10-31
MX2014012847A (es) 2015-10-22
US20170339402A1 (en) 2017-11-23
US20150117527A1 (en) 2015-04-30
US20200014916A1 (en) 2020-01-09
JP6407389B2 (ja) 2018-10-17
GB2501555A (en) 2013-10-30
GB201211629D0 (en) 2012-08-15
JP2018042263A (ja) 2018-03-15
BR112014026024A8 (pt) 2021-06-22
CN111182299B (zh) 2024-02-09
US11770519B2 (en) 2023-09-26
WO2013160695A1 (en) 2013-10-31
US20200213584A1 (en) 2020-07-02
WO2013160656A2 (en) 2013-10-31
CA2870591C (en) 2023-10-03
MX2014012565A (es) 2014-12-05
CN108347604B (zh) 2022-03-04
TW201937934A (zh) 2019-09-16
US10291909B2 (en) 2019-05-14
WO2013160697A1 (en) 2013-10-31
TWI575942B (zh) 2017-03-21
GB201211072D0 (en) 2012-08-01
JP5965054B2 (ja) 2016-08-03
BR112014026035A2 (pt) 2020-06-30
CN110933409A (zh) 2020-03-27
US10616572B2 (en) 2020-04-07

Similar Documents

Publication Publication Date Title
TWI575942B (zh) 資料編碼及解碼