TWI604718B - 視訊解碼方法 - Google Patents

視訊解碼方法 Download PDF

Info

Publication number
TWI604718B
TWI604718B TW105123818A TW105123818A TWI604718B TW I604718 B TWI604718 B TW I604718B TW 105123818 A TW105123818 A TW 105123818A TW 105123818 A TW105123818 A TW 105123818A TW I604718 B TWI604718 B TW I604718B
Authority
TW
Taiwan
Prior art keywords
sao
information
lcu
offset
current
Prior art date
Application number
TW105123818A
Other languages
English (en)
Other versions
TW201640896A (zh
Inventor
雅希納艾爾納
雅辛亞歷山大
Original Assignee
三星電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三星電子股份有限公司 filed Critical 三星電子股份有限公司
Publication of TW201640896A publication Critical patent/TW201640896A/zh
Application granted granted Critical
Publication of TWI604718B publication Critical patent/TWI604718B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process

Description

視訊解碼方法
一或多個實施例是關於用於將原始影像與經重新建構的影像之間的誤差最小化的視訊編碼以及解碼。
隨著用於再生以及儲存高解析度或高品質視訊內容的硬體正被開發以及供應,對用於有效地對高解析度或高品質視訊內容做編碼或解碼的視訊編解碼器的需要增加。根據習知視訊編解碼器,基於具有預定大小的巨集區塊而根據有限編碼方法來對視訊做編碼。
經由頻率變換而將空間域的影像資料變換為頻率域的係數。根據視訊編解碼器,將影像分割為具有預定大小的區塊,對每一區塊執行離散餘弦變換(discrete cosine transformation, DCT),且以區塊為單位來對頻率係數做編碼,以實現頻率變換的快速計算。相比空間域的影像資料,容易壓縮頻率域的係數。特定言之,由於經由視訊編解碼器的畫面間預測或畫面內預測根據預測誤差來表達空間域的影像像素值,因此在對預測誤差執行頻率變換時,可將大量資料變換為0。根據視訊編解碼器,可藉由將連續且重複產生的資料替換為較小大小的資料而減少資料量。
技術問題 一或多個實施例提供用於產生經重新建構的影像而使得在原始影像與經重新建構的影像之間具有最小化的誤差的視訊編碼方法及裝置以及視訊解碼方法及裝置。 技術解決方案
根據一或多個實施例的態樣,提供一種取樣自適應偏移(sample adaptive offset, SAO)調整方法,所述方法包含:自所接收的位元串流的片段標頭獲得關於當前片段的片段SAO參數;自所述片段SAO參數獲得用於所述當前片段的明度成分的明度SAO使用資訊以及用於所述當前片段的色度成分的色度SAO使用資訊;基於所述所獲得的明度SAO使用資訊而判定是否對所述當前片段的所述明度成分執行SAO調整;以及基於所述所獲得的色度SAO使用資訊而相同地判定是否對所述當前片段的第一色度成分以及第二色度成分執行所述SAO調整。 有利效應
根據各種實施例的用於每一色成分的取樣自適應偏移(SAO)調整方法可共享與當前樣本的第一色度成分以及第二色度成分的SAO調整相關的各種SAO參數,藉此同時對所述第一色度成分以及所述第二色度成分執行SAO調整,且預先防止並行處理延時。此外,與獨立發送關於所述第一色度成分以及所述第二色度成分的SAO參數相比,SAO參數的傳輸位元的總數可減半。
根據一或多個實施例的態樣,提供一種取樣自適應偏移(SAO)調整方法,所述方法包含:自所接收的位元串流的片段標頭獲得關於當前片段的片段SAO參數;自所述片段SAO參數獲得用於所述當前片段的明度成分的明度SAO使用資訊以及用於所述當前片段的色度成分的色度SAO使用資訊;基於所述所獲得的明度SAO使用資訊而判定是否對所述當前片段的所述明度成分執行SAO調整;以及基於所述所獲得的色度SAO使用資訊而相同地判定是否對所述當前片段的第一色度成分以及第二色度成分執行所述SAO調整。
所述方法可更包含:關於所述當前片段的最大寫碼單元(LCU)中的當前LCU而獲得LCU的SAO參數;自所述LCU的所述SAO參數獲得左側SAO合併資訊;以及基於所述左側SAO合併資訊而判定是否藉由使用與所述當前LCU相鄰的上方LCU的明度成分以及第一色度成分及第二色度成分來預測用於所述當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
所述判定是否預測所述SAO參數可包含:若基於所述左側SAO合併資訊而判定不藉由使用左側LCU的SAO參數來預測所述當前LCU的所述SAO參數,則自所述LCU的所述SAO參數獲得上方SAO合併資訊;以及基於所述上方SAO合併資訊而判定是否藉由使用與所述當前LCU相鄰的所述上方LCU的所述明度成分以及所述第一色度成分及所述第二色度成分來預測用於所述當前LCU的所述明度成分以及所述第一色度成分及所述第二色度成分的所述SAO參數。
所述方法可更包含:自所述LCU的所述SAO參數獲得用於所述當前LCU的明度成分的明度SAO類型資訊以及用於所述當前LCU的色度成分的色度SAO類型資訊;基於所述所獲得的明度SAO類型資訊而判定是否對所述當前LCU的所述明度成分執行SAO調整;以及基於所述所獲得的色度SAO類型資訊而相同地判定是否對所述當前LCU的第一色度成分以及第二色度成分執行所述SAO調整。
所述方法可更包含:基於所述所獲得的明度SAO類型資訊而判定對所述當前LCU的所述明度成分執行邊緣SAO調整或級區(band)SAO調整;以及基於所述所獲得的色度SAO類型資訊而判定對所述當前LCU的所述第一色度成分以及所述第二色度成分執行所述邊緣SAO調整或所述級區SAO調整。
所述方法可更包含:基於所述所獲得的SAO參數而判定關於所述當前LCU的所述第一色度成分以及所述第二色度成分的同一邊緣方向。
所述獲得所述明度SAO類型資訊以及所述色度SAO類型資訊可包含:對所述明度SAO類型資訊的第一內文二進位執行內文自適應二進位算術寫碼(CABAC)解碼,及獲得指示是否對所述當前LCU的所述明度成分執行所述SAO調整的資訊;在旁路模式中對所述明度SAO類型資訊的剩餘內文二進位執行CABAC解碼,及獲得指示對所述當前LCU的所述明度成分執行所述邊緣SAO調整或所述級區SAO調整的資訊;對所述色度SAO類型資訊的第一內文二進位執行CABAC解碼,及獲得指示是否對所述當前LCU的所述色度成分執行所述SAO調整的資訊;以及在所述旁路模式中對所述色度SAO類型資訊的剩餘內文二進位執行CABAC解碼,及獲得指示對所述當前LCU的所述色度成分執行所述邊緣SAO調整或所述級區SAO調整的資訊。
所述方法可更包含:藉由使用同一內文模式而針對關於所述當前LCU的所述明度成分以及所述色度成分的所述左側SAO合併資訊以及所述上方SAO合併資訊執行CABAC解碼。
所述方法可更包含:在旁路模式中執行CABAC解碼以自所述LCU的所述SAO參數獲得偏移的量值資訊,其中所述偏移的所述所獲得的量值資訊指示基於視訊的位元深度的範圍內的偏移量值,且其中,若所述位元深度為8個位元,則所述偏移量值大於等於0且小於等於7,且若所述位元深度為10個位元,則所述偏移量值大於等於0且小於等於31。
所述方法可更包含:若判定對所述當前LCU執行所述級區SAO調整,則在旁路模式中對不可變位元長度的位元執行CABAC解碼以便自所述所獲得的明度SAO類型資訊以及所述所獲得的色度SAO類型資訊中的至少一段獲得關於級區左側開始位置的資訊。
所述方法可更包含:若判定對所述當前LCU執行所述級區SAO調整,則自所述LCU的所述SAO參數獲得用於所述SAO調整的偏移值;以及若所述所獲得的偏移值並非0,則自所述LCU的所述SAO參數進一步獲得所述偏移值的正負號資訊。
所述方法可更包含:自所述LCU的所述SAO參數獲得用於所述邊緣類型SAO調整的偏移值;以及基於所述所判定的邊緣方向而判定所述偏移值的正負號。
根據一或多個實施例的另一態樣,提供一種SAO調整方法,所述方法包含:判定是否對當前片段的明度成分執行SAO調整;相同地判定是否對所述當前片段的第一色度成分以及第二色度成分執行所述SAO調整;產生關於所述當前片段的片段SAO參數,所述片段SAO參數包含指示是否對所述當前片段的所述明度成分執行所述SAO調整的明度SAO使用資訊以及指示是否對所述第一色度成分以及所述第二色度成分執行所述SAO調整的色度SAO使用資訊;以及輸出包含片段SAO參數的片段標頭。
所述方法可更包含:基於所述當前片段的LCU而判定是否藉由使用關於與當前LCU相鄰的左側LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測用於所述當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數;基於所述判定而產生用於所述當前LCU的左側SAO合併資訊;判定是否藉由使用關於與所述當前LCU相鄰的上方LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測用於所述當前LCU的所述明度成分以及所述第一色度成分及所述第二色度成分的所述SAO參數;基於所述判定而產生用於所述當前LCU的上方SAO合併資訊;以及產生關於所述當前LCU的LCU的SAO參數,所述SAO參數包含所述左側SAO合併資訊以及所述上方SAO合併資訊中的至少一段。
所述方法可更包含:判定是否對所述當前LCU的明度成分執行所述SAO調整;相同地判定是否對所述當前LCU的第一色度成分以及第二色度成分執行所述SAO調整;以及產生關於所述當前LCU的所述LCU的SAO參數,所述SAO參數包含指示是否對所述當前LCU的所述明度成分執行所述SAO調整的明度SAO類型資訊以及指示是否對所述第一色度成分以及所述第二色度成分執行所述SAO調整的色度SAO類型資訊。
所述方法可更包含:判定對所述當前LCU的所述明度成分執行邊緣SAO調整或級區SAO調整;判定對所述當前LCU的所述第一色度成分以及所述第二色度成分執行所述邊緣SAO調整或所述級區SAO調整;以及產生指示對所述明度成分執行所述邊緣SAO調整或所述級區SAO調整的明度SAO類型資訊以及指示對所述第一色度成分以及所述第二色度成分執行所述邊緣SAO調整或所述級區SAO調整的色度SAO類型資訊。
所述方法可更包含:產生關於所述當前LCU的所述第一色度成分以及所述第二色度成分的同一邊緣方向的資訊。
所述產生所述明度SAO類型資訊以及所述色度SAO類型資訊可包含:對指示是否對所述當前LCU的所述明度成分執行所述SAO調整的資訊的第一內文二進位執行CABAC編碼,以及在旁路模式中對指示對所述當前LCU的所述明度成分執行所述邊緣SAO調整或所述級區SAO調整的資訊的剩餘內文二進位執行CABAC編碼。
所述產生所述LCU的所述SAO參數可包含:藉由使用同一內文模式而針對關於所述當前LCU的所述LCU的所述SAO參數中的所述左側SAO合併資訊以及所述上方SAO合併資訊執行CABAC編碼。
所述方法可更包含:在所述旁路模式中對所述LCU的所述SAO參數中的偏移的量值資訊執行CABAC編碼。
所述方法可更包含:若判定對所述當前LCU執行所述級區SAO調整,則在所述旁路模式中對關於來自所述所獲得的明度SAO類型資訊以及所述所獲得的色度SAO類型資訊中的至少一段的級區左側開始位置的資訊的不可變位元長度的位元執行CABAC編碼。
所述產生所述LCU的所述SAO參數可包含:若判定對所述當前LCU執行所述級區SAO調整,則判定用於所述級區SAO調整的偏移值;以及產生更包含所述所判定的偏移值的所述LCU的所述SAO參數,其中所述產生所述SAO參數包含:若所述所獲得的偏移值並非0,則判定所述偏移值的正負號;以及產生更包含所述偏移值的正負號資訊的所述LCU的所述SAO參數。
根據一或多個實施例的另一態樣,提供一種視訊解碼裝置,所述裝置包含:SAO參數獲得器,用於自所接收的位元串流的片段標頭獲得關於當前片段的片段SAO參數,及自所述片段SAO參數獲得用於所述當前片段的明度成分的明度SAO使用資訊以及用於所述當前片段的色度成分的色度SAO使用資訊;SAO判定器,用於基於所述所獲得的明度SAO使用資訊而判定是否對所述當前片段的所述明度成分執行SAO調整,及基於所述所獲得的色度SAO使用資訊而相同地判定是否對所述當前片段的第一色度成分以及第二色度成分執行所述SAO調整;以及SAO調整器,用於基於所述SAO判定器的判定而對藉由對自所述所接收的位元串流獲得的所述當前片段的經編碼的符號執行解碼而重新建構的所述當前片段的所述明度成分以及所述第一色度成分及所述第二色度成分執行所述SAO調整。
根據一或多個實施例的另一態樣,提供一種視訊編碼裝置,所述裝置包含:編碼器,用於對視訊的當前片段執行預測、變換以及量化,及對經量化的變換係數執行逆預測、逆變換以及運動補償;SAO判定器,用於判定是否對所述當前片段的明度成分執行SAO調整,及相同地判定是否對所述當前片段的第一色度成分以及第二色度成分執行所述SAO調整;以及SAO參數編碼器,用於產生關於所述當前片段的片段SAO參數,所述片段SAO參數基於所述SAO判定器的判定而包含指示是否對所述明度成分執行所述SAO調整的明度SAO使用資訊以及指示是否對所述第一色度成分以及所述第二色度成分執行所述SAO調整的色度SAO使用資訊,及產生包含所述片段SAO參數的片段標頭。
根據一或多個實施例的另一態樣,提供一種非暫時性電腦可讀記錄媒體,其上記錄有用於執行所述SAO調整方法的電腦程式。
下文中,將參看圖1至圖7F來描述根據一或多個實施例的使用基於像素分類的取樣自適應偏移(SAO)調整的視訊編碼操作以及視訊解碼操作。且,將參看圖8至圖20來描述根據一或多個實施例的在基於具有樹狀結構的寫碼單元的視訊編碼操作以及視訊解碼操作中的基於像素分類的SAO調整。下文中,「影像」可表示視訊的靜態影像或動態影像或視訊自身。
現將參看圖1至圖7F來描述根據一或多個實施例的使用基於像素分類的SAO調整的視訊編碼操作以及視訊解碼操作。將在下文參看圖1A、圖1B、圖2A及圖2B所述的視訊編碼裝置10以及視訊解碼裝置20執行SAO調整便使原始像素與經重新建構的像素之間的誤差最小化。藉由執行根據實施例的SAO調整,視訊編碼裝置10將每一影像區塊的像素分類為預先設定的像素群組,將每一像素分配給對應像素群組,且對指示同一像素群組中所包含的原始像素與經重新建構的像素之間的誤差的平均值的偏移值做編碼。
在視訊編碼裝置10與視訊解碼裝置20之間用信號發送樣本。亦即,視訊編碼裝置10可按照位元串流的形式來對樣本做編碼且進行傳輸,且視訊解碼裝置20可自所接收的位元串流剖析且重新建構所述樣本。為了藉由根據像素分類而判定的偏移來調整經重新建構的像素的像素值,從而使原始像素與經重新建構的像素之間的誤差最小化,視訊編碼裝置10以及視訊解碼裝置20用信號發送用於SAO調整的SAO參數。在視訊編碼裝置10與視訊解碼裝置20之間,將偏移值作為SAO參數來編碼及收發,以使得偏移值是自SAO參數解碼。
因此,根據實施例的視訊解碼裝置20可藉由以下方式而產生在原始影像與經重新建構的影像之間具有最小化的誤差的經重新建構的影像:對所接收的位元串流做解碼,產生影像區塊中的每一者的經重新建構的像素,自位元串流重新建構偏移值,以及按照所述偏移值來調整經重新建構的像素。
現將參看圖1A及圖1B來描述執行SAO調整的視訊編碼裝置10的操作。現將參看圖2A及圖2B來描述執行SAO調整的視訊解碼裝置20的操作。
諸如「......中的至少一者」的表達在部件的清單之前時修飾部件的整個清單,而不是修飾清單的個別部件。
圖1A及圖1B分別為根據一或多個實施例的視訊編碼裝置10的方塊圖以及由視訊編碼裝置10執行的SAO調整的流程圖。
視訊編碼裝置10包含編碼器12、SAO判定器14以及SAO參數編碼器16。
視訊編碼裝置10接收影像(諸如,視訊的片段)的輸入,將每一影像分割為區塊,且對每一區塊做編碼。區塊可具有正方形形狀、矩形形狀或任意幾何形狀且不限於具有預定大小的資料單元。根據一或多個實施例的區塊可為根據樹狀結構的寫碼單元中的最大寫碼單元(LCU)或寫碼單元。下文將參看圖8至圖20來描述基於根據樹狀結構的寫碼單元的視訊編碼以及解碼方法。
視訊編碼裝置10可將每一輸入影像分割為LCU,且可將藉由對每一LCU的樣本執行預測、變換以及熵編碼而產生的所得資料作為位元串流輸出。LCU的樣本可為LCU中所包含的像素的像素值資料。
編碼器12可對圖像的LCU個別地做編碼。編碼器12可基於自當前LCU分割且具有樹狀結構的寫碼單元來對當前LCU做編碼。
為了對當前LCU做編碼,編碼器12可藉由對當前LCU中所包含且具有樹狀結構的寫碼單元中的每一者執行畫面內預測、畫面間預測、變換以及量化,而對樣本做編碼。
編碼器12可藉由對具有樹狀結構的寫碼單元中的每一者執行解量化、逆變換以及畫面間預測或畫面內補償以便對寫碼單元做解碼,而重新建構當前LCU中所包含的經編碼的樣本。
為了將對當前LCU做編碼之前的原始像素與對當前LCU做解碼之後的經重新建構的像素之間的誤差最小化,視訊編碼裝置10可判定指示原始像素與經重新建構的像素之間的差值的偏移值。
編碼器12可對視訊的當前片段執行預測、變換以及量化,且對經量化的變換係數執行解量化、逆變換以及運動補償。編碼器12可首先對視訊的當前片段的寫碼單元中的每一者執行預測、變換以及量化。為了產生用於畫面間預測的參考影像,編碼器12可對經量化的變換係數執行解量化、逆變換以及運動補償,以產生經重新建構的影像。針對下一影像的畫面間預測,可參考先前影像的經重新建構的影像。
SAO判定器14可針對每一色成分而執行SAO調整。舉例而言,關於YCrCb彩色影像,可對明度成分(Y成分)以及第一色度成分及第二色度成分(Cr成分及Cb成分)執行SAO調整。在YCrCb彩色影像的像素值中,明度成分包含Y個像素值,第一色度成分包含Cr個像素值,且第二色度成分包含Cb個像素值。
SAO判定器14可判定是否對當前片段的明度成分執行SAO調整。SAO判定器14可相同地判定是否對當前片段的第一色度成分及第二色度成分執行SAO調整。亦即,若可對第一色度色成分執行SAO調整,則可對第二色度成分執行SAO調整,且若可以不對第一色度色成分執行SAO調整,則可以不對第二色度成分執行SAO調整。
SAO參數編碼器16可產生關於當前片段的片段SAO參數以將片段SAO參數包含於當前片段的片段標頭中。
SAO參數編碼器16可根據SAO判定器14的判定而產生指示是否對明度成分執行SAO調整的明度SAO使用資訊。SAO參數編碼器16可根據SAO判定器14的判定而產生指示是否對第一色度成分及第二色度成分執行SAO調整的色度SAO使用資訊。
SAO參數編碼器16可將明度SAO使用資訊以及色度SAO使用資訊包含於片段SAO參數中。
SAO判定器14可關於LCU而判定偏移值。亦可關於LCU而判定SAO參數,所述SAO參數包含偏移值、SAO類型以及SAO類別。
SAO判定器14可根據當前LCU的像素值分類方法而判定SAO類型。可將根據實施例的SAO類型判定為邊緣類型或級區類型(band type)。根據當前區塊的像素值分類方法,可判定是根據邊緣類型還是級區類型來對當前區塊的像素分類。
若SAO類型為邊緣類型,則根據當前LCU的經重新建構的像素與其鄰近像素之間形成的邊緣的方向以及形狀,可判定經重新建構的像素與原始像素之間的偏移。
若SAO類型為級區類型,則在藉由劃分當前LCU的經重新建構的像素的像素值的總範圍而獲得的多個級區中,可判定每一級區中所包含的經重新建構的像素與原始像素之間的偏移。可藉由均勻地或不均勻地劃分像素值的總範圍來獲得級區。
因此,SAO判定器14可基於當前LCU的像素值的空間特性來判定當前LCU的SAO類型,所述SAO類型指示邊緣類型或級區類型。
SAO判定器14可根據當前LCU的SAO類型而判定經重新建構的像素中的每一者的SAO類別。可將SAO類別判定為邊緣類別或級區類別。
關於邊緣類型,邊緣類別可指示經重新建構的像素與其鄰近像素之間形成的邊緣的方向。邊緣類別可指示0˚、90˚、45˚或135˚的邊緣方向。
若SAO類型為邊緣類型,則SAO判定器14可判定當前LCU的經重新建構的像素中的每一者的邊緣類別。
關於級區類型,在作為藉由劃分當前LCU的像素值的總範圍而獲得的預定數目的連續像素值間隔的多個級區中,級區類別可指示經重新建構的像素的像素值所屬的級區的位置。
舉例而言,關於具有8個位元的像素值的樣本,像素值的總範圍為0至255,且像素值可分類為總計32個級區。在此狀況下,在總計32個級區中,可判定經重新建構的像素的像素值所屬的預定數目的級區。級區類別可藉由使用0至31的級區索引中的一者來指示預定數目的連續級區的開始位置(左側開始位置)。
關於邊緣類型,根據經重新建構的像素與其鄰近像素之間形成的邊緣的形狀,可將當前LCU的經重新建構的像素分類為預定數目的種類。舉例而言,根據四個邊緣形狀(諸如,凹入邊緣的局部凹部、凹入邊緣的彎曲角落、凸出邊緣的彎曲角落以及凸出邊緣的局部凸部),可將經重新建構的像素分類為四個種類。根據當前LCU的經重新建構的像素中的每一者的邊緣形狀,可判定四個種類中的一者。
關於級區類型,根據當前LCU的經重新建構的像素的像素值所屬的級區的位置,可將經重新建構的像素分類為預定數目的種類。舉例而言,根據自級區類別所指示的開始級區位置(亦即,最左側級區的開始位置)開始的四個連續級區的級區索引,可將經重新建構的像素分類為四個種類。根據當前LCU的經重新建構的像素中的每一者所屬的四個級區中的一者,可判定四個種類中的一者。
SAO判定器14可判定當前LCU的經重新建構的像素中的每一者的種類。關於屬於同一種類的當前LCU的經重新建構的像素,SAO判定器14可藉由使用經重新建構的像素與原始像素之間的差值而判定偏移值。在每一種類中,可將經重新建構的像素與原始像素之間的差值的平均值(亦即,經重新建構的像素的平均誤差)判定為對應於當前種類的偏移值。SAO判定器14可判定每一種類的偏移值,且可將所有種類的偏移值判定為當前LCU的偏移值。
舉例而言,若當前LCU的SAO類型為邊緣類型且經重新建構的像素根據邊緣形狀而分類為四個種類,或若當前LCU的SAO類型為級區類型且經重新建構的像素根據四個連續級區的索引而分類為四個種類,則SAO判定器14可藉由判定經重新建構的像素與原始像素之間的平均值來判定四個偏移值,所述偏移值屬於四個種類中的每一者。
偏移值中的每一者可大於等於預先設定的最小值,且可小於等於預先設定的最大值。
SAO參數編碼器16可對SAO判定器14所判定的SAO參數做編碼以及輸出,所述SAO參數包含當前LCU的SAO類型、SAO類別以及SAO值。
每一區塊的SAO參數可包含所述區塊的SAO類型以及SAO值。作為SAO類型,可輸出中斷類型、邊緣類型或級區類型。
若SAO類型為中斷類型,則可指示SAO調整未應用於當前LCU。在此狀況下,無需對當前LCU的其他SAO參數做編碼。
若SAO類型為邊緣類型,則SAO參數可包含個別地對應於邊緣類別的偏移值。且,若SAO類型為級區類型,則SAO參數可包含個別地對應於級區的偏移值。亦即,SAO參數編碼器16可對每一區塊的SAO參數做編碼。
現將在下文參看圖1B的SAO調整的流程圖來詳細描述輸出SAO參數的程序。
編碼器12可基於具有樹狀結構的寫碼單元而對當前片段的多個LCU中的當前LCU做編碼。
在操作11中,SAO判定器14可判定是否對當前片段的明度成分執行SAO調整。在操作13中,SAO判定器14可相同地判定是否對當前片段的第一色度成分及第二色度成分執行SAO調整。
在操作15中,SAO判定器14可根據操作11中的判定而產生色度SAO使用資訊,且可根據操作13中的判定而產生色度SAO使用資訊。SAO判定器14可產生片段SAO參數,所述片段SAO參數包含關於當前片段的明度SAO使用資訊以及色度SAO使用資訊。
在操作17中,SAO判定器14可輸出包含操作15中所產生的片段SAO參數的片段標頭
SAO判定器14可判定當前LCU的第一SAO參數。第一SAO參數可包含指示當前LCU的像素值分類方法是邊緣類型還是級區類型的SAO類型、根據邊緣類型指示邊緣方向或根據級區類型指示級區範圍的SAO類別,以及指示SAO類別中所包含的經重新建構的像素與原始像素之間的差值的SAO值。
SAO參數編碼器16可輸出對應於預定數目的種類的偏移值。
在操作17中,若SAO參數編碼器16輸出指示邊緣類型的SAO類型資訊,則根據當前LCU中所包含的經重新建構的像素的邊緣方向,可輸出指示0˚、90˚、45˚或135˚的方向的邊緣類別。
在操作17中,若SAO參數編碼器16輸出指示級區類型的SAO類型資訊,則可輸出指示當前LCU中所包含的經重新建構的像素的級區位置的級區類別。
在操作17中,若SAO參數編碼器16輸出指示級區類型的SAO類型資訊以作為偏移值,則可將指示偏移值是否為0的零值資訊作為偏移值輸出。若偏移值為0,則SAO參數編碼器16可僅將零值資訊作為偏移值輸出。
若偏移值並非0,則SAO參數編碼器16可進一步輸出指示偏移值為正數還是負數的正負號資訊以及剩餘部分,所述正負號資訊與所述剩餘部分之後是零值資訊。
在操作17中,若SAO參數編碼器16輸出指示邊緣類型的SAO類型資訊,則可輸出零值資訊以及剩餘部分。關於邊緣類型,無需輸出偏移值的正負號資訊,此是因為可僅基於根據邊緣形狀的種類來預測偏移值的正負號。下文將參看圖5A及圖5B來描述預測偏移值的正負號的程序。
SAO判定器14可根據色成分關於LCU來判定是否執行SAO調整且判定SAO類型。
SAO判定器14可判定是否對當前LCU的明度成分執行SAO調整。SAO參數編碼器16可產生指示是否對當前LCU的明度成分執行SAO調整的明度SAO類型資訊。
SAO判定器14可相同地判定是否對當前LCU的第一色度成分及第二色度成分執行SAO調整。SAO參數編碼器16可產生指示是否對當前LCU的第一色度成分及第二色度成分執行SAO調整的色度SAO類型資訊。
SAO判定器14可判定對當前LCU的明度成分執行邊緣SAO調整或以級區SAO調整。SAO參數編碼器16可產生指示對當前LCU的明度成分執行邊緣SAO調整或級區SAO調整的明度SAO類型資訊。
SAO判定器14可判定對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整或級區SAO調整。SAO參數編碼器16可產生指示對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整或級區SAO調整的色度SAO類型資訊。
若SAO判定器14判定對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整,則SAO判定器14可在關於當前LCU的第一色度成分及第二色度成分的同一邊緣方向上判定SAO類別。因此,SAO參數編碼器16可產生包含關於當前LCU的第一色度成分及第二色度成分的同一邊緣方向的資訊的SAO參數。
SAO參數編碼器16可將明度SAO類型資訊以及色度SAO類型資訊包含於當前LCU的SAO參數中。
基於當前LCU的第一SAO參數與相鄰於當前LCU的左側LCU以及上方LCU中的一者的第二SAO參數之間的相同性, SAO參數編碼器16可輸出當前LCU的SAO合併資訊,所述SAO合併資訊指示是否將第二SAO參數用作第一SAO參數。
若當前LCU的左側以及上方LCU中的至少一者的SAO參數與當前LCU的SAO參數相同,則SAO參數編碼器16可以不對當前LCU的SAO參數做編碼,且可僅對SAO合併資訊做編碼。在此狀況下,可輸出SAO合併資訊,所述SAO合併資訊指示左側或上方LCU的SAO參數用作當前LCU的SAO參數。
若左側以及上方LCU的SAO參數不同於當前LCU的SAO參數,則SAO參數編碼器16可對當前LCU的SAO合併資訊以及SAO參數做編碼。在此狀況下,可輸出SAO合併資訊,所述SAO合併資訊指示左側或上方LCU的SAO參數未用作當前LCU的SAO參數。
若當前LCU的左側LCU或上方LCU的第二SAO參數與第一SAO參數相同,則可基於第二SAO參數來預測第一SAO參數。當SAO參數編碼器16將第二SAO參數用作第一SAO參數時,SAO參數編碼器16可僅輸出SAO合併資訊,且可以不輸出當前LCU的SAO類型、SAO類別以及偏移值。
若當前LCU的左側LCU或上方LCU的第二SAO參數並不與第一SAO參數相同,則可與第二SAO參數獨立地預測第一SAO參數。在操作19中,當SAO參數編碼器16並不將第二SAO參數用作第一SAO參數時,SAO參數編碼器16可除當前LCU的SAO合併資訊之外,亦輸出包含LCU的SAO類型、SAO類別以及偏移值的第一SAO參數。
當SAO參數編碼器16輸出第一SAO參數的SAO類型、SAO類別以及偏移值時,SAO參數編碼器16可依序輸出當前LCU的SAO類型、每一種類的偏移值以及SAO類別。
若執行SAO調整,SAO判定器14可判定LCU中的每一者的SAO合併資訊以及SAO參數。在此狀況下,SAO參數編碼器16可輸出指示對當前片段執行SAO調整的SAO使用資訊,且接著可輸出LCU中的每一者的SAO合併資訊以及SAO參數。
若不對當前片段執行SAO調整,則SAO判定器14可以不需要判定當前片段的LCU中的每一者的偏移,且SAO參數編碼器16可僅輸出指示不對當前片段執行偏移調整的SAO使用資訊。
SAO判定器14可以不針對每一色成分而不同地判定當前LCU的SAO參數,而是可基於與當前LCU相鄰的左側LCU或上方LCU的SAO參數關於明度成分以及色度成分而相同地判定SAO參數。
SAO判定器14可判定是否藉由使用關於當前片段的LCU中的當前LCU的左側LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
SAO參數編碼器16可基於是否藉由使用左側LCU的SAO參數來預測當前LCU的SAO參數而產生用於當前LCU的左側SAO合併資訊。亦即,可產生相同左側SAO合併資訊,而不管明度成分以及第一色度成分及第二色度成分。
SAO判定器14可判定是否藉由使用關於當前片段的LCU中的當前LCU的上方LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測關於當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
SAO參數編碼器16可基於是否藉由使用上方LCU的SAO參數來預測當前LCU的SAO參數而產生用於當前LCU的上方SAO合併資訊。
SAO參數編碼器16可關於當前LCU而產生LCU的SAO參數,所述SAO參數包含左側LCU的SAO合併資訊以及上方LCU的SAO合併資訊。
視訊編碼裝置10可對包含經量化的變換係數以及編碼資訊的編碼符號執行熵編碼以產生位元串流。視訊編碼裝置10可對SAO參數執行內文自適應二進位算術寫碼(CABAC)式熵編碼。
視訊編碼裝置10可對第一內文二進位執行CABAC編碼,所述第一內文二進位指示關於是否對當前LCU的明度成分執行SAO調整的明度SAO類型資訊中所包含的資訊。
視訊編碼裝置10可在旁路模式中對剩餘內文二進位執行CABAC編碼,所述剩餘內文二進位指示關於對當前LCU的明度成分執行邊緣SAO調整或級區SAO調整的明度SAO類型資訊中所包含的資訊。
視訊編碼裝置10可關於當前LCU在相同內文模式中對LCU的SAO參數中的左側SAO合併資訊以及上方SAO合併資訊執行CABAC編碼。
視訊編碼裝置10可在旁路模式中對LCU的SAO參數中所包含的偏移的量值資訊執行CABAC編碼。偏移的量值資訊可指示基於視訊的位元深度的範圍內的偏移量值。舉例而言,當位元深度為8個位元時,偏移量值可大於等於0且小於等於7。另外舉例而言,當位元深度為10個位元時,偏移量值可大於等於0且小於等於31。
當判定對當前LCU執行級區SAO調整時,視訊編碼裝置10可在旁路模式中對關於明度SAO類型資訊以及色度SAO類型資訊中的至少一者的級區左側開始位置的資訊的不可變位元長度的位元執行CABAC編碼。
當判定對當前LCU執行級區SAO調整時,SAO判定器140可判定用於級區SAO調整的偏移值。因此,SAO參數編碼器10可產生更包含用於級區SAO調整的偏移值的LCU的SAO參數。
當用於級區SAO調整的偏移值並非0時,SAO判定器140可進一步判定偏移值的正負號。因此,SAO參數編碼器16可產生更包含偏移值的正負號資訊的LCU的SAO參數。
視訊編碼裝置10可包含中央處理器(未圖示),所述中央處理器用於整體控制編碼器12、SAO判定器14以及SAO參數編碼器16。或者,編碼器12、SAO判定器14以及SAO參數編碼器16可由其個別處理器(未圖示)驅動,所述處理器協同操作以控制視訊編碼裝置10。或者,視訊編碼裝置10外部的外部處理器(未圖示)可控制編碼器12、SAO判定器14以及SAO參數編碼器16。
視訊編碼裝置10可包含一或多個資料儲存器(未圖示),所述資料儲存器用於儲存編碼器12、SAO判定器14以及SAO參數編碼器16的輸入以及輸出資料。視訊編碼裝置10可包含記憶體控制器(未圖示),所述記憶體控制器用於管理輸入至資料儲存器以及自資料儲存器輸出的資料。
為了執行視訊編碼操作(包含變換)且輸出視訊編碼操作的結果,視訊編碼裝置10可結合內部或外部視訊編碼處理器而操作。視訊編碼裝置10的內部視訊編碼處理器可為用於執行視訊編碼操作的獨立處理器。且,視訊編碼裝置10、中央處理單元或圖形處理單元可包含用於執行基本視訊編碼操作的視訊編碼處理器模組。
圖2A及圖2B分別為根據一或多個實施例的視訊解碼裝置20的方塊圖以及由視訊解碼裝置20執行的SAO調整的流程圖。
視訊解碼裝置20包含SAO參數獲得器22、SAO判定器24以及SAO調整器26。
視訊解碼裝置20接收包含視訊的經編碼的資料的位元串流。視訊解碼裝置20可自所接收的位元串流剖析經編碼的視訊樣本,可對每一影像區塊執行熵解碼、解量化、逆變換、預測以及運動補償,以產生經重新建構的像素,且因此可產生經重新建構的影像。
視訊解碼裝置20可接收指示原始像素與經重新建構的像素之間的差值的偏移值,且可將原始影像與經重新建構的影像之間的誤差最小化。視訊解碼裝置20可接收影像的每一LCU的經編碼的資料,且可基於自LCU分割且具有樹狀結構的寫碼單元而重新建構LCU。
SAO參數獲得器22可自所接收的位元串流的片段標頭獲得關於當前片段的片段SAO參數。SAO參數獲得器22可自片段SAO參數獲得用於當前片段的明度成分的明度SAO使用資訊以及用於色度成分的色度SAO使用資訊。
SAO判定器24可基於由SAO參數獲得器22獲得的明度SAO使用資訊而判定是否對當前片段的明度成分執行SAO調整。
SAO判定器24可基於由SAO參數獲得器22獲得的色度SAO使用資訊而相同地判定是否對當前片段的第一色度成分及第二色度成分執行SAO調整。亦即,若對第一色度成分執行SAO調整,則可對第二色度成分執行SAO調整,且若並不對第一色度成分執行SAO調整,則可以不對第二色度成分執行SAO調整。
視訊解碼裝置20可對包含自所接收的位元串流獲得的當前片段的經編碼的樣本以及編碼資訊的經編碼的符號執行解碼以重新建構當前片段。SAO調整器26可根據SAO判定器24的判定而對經重新建構的當前片段的明度成分以及第一色度成分及第二色度成分中的每一者執行SAO調整。
現將參看圖2B來描述重新建構當前LCU的樣本且調整偏移的操作。
在操作21中,SAO參數獲得器22可自所接收的位元串流的片段標頭獲得關於當前片段的片段SAO參數。在操作23中,SAO參數獲得器22可自片段SAO參數獲得明度SAO使用資訊以及色度SAO使用資訊。
在操作25中,SAO判定器24可基於在操作23中獲得的明度SAO使用資訊而判定是否對當前片段的明度成分執行SAO調整。若明度SAO使用資訊指示執行SAO調整,則SAO調整器26可對當前片段的明度色成分執行SAO調整。
在操作27中,SAO判定器24可基於在操作23中獲得的色度SAO使用資訊而相同地判定是否對當前片段的第一色度成分及第二色度成分執行SAO調整。若色度SAO使用資訊指示執行SAO調整,則SAO調整器26可對當前片段的第一色度成分及第二色度成分執行SAO調整。
SAO參數獲得器22可自所接收的位元串流提取當前LCU的SAO合併資訊。當前LCU的SAO合併資訊指示是否將當前LCU的左側或上方LCU的第二SAO參數用作當前LCU的第一SAO參數。
SAO參數獲得器22可基於SAO合併資訊而重新建構第一SAO參數,所述第一SAO參數包含當前LCU的SAO類型、偏移值以及SAO類別。
SAO參數獲得器22可基於SAO合併資訊而判定將當前LCU的SAO類型、偏移值以及SAO類別重新建構為與第二SAO參數的SAO類型、偏移值以及SAO類別相同,還是自位元串流提取SAO類型、偏移值以及SAO類別。
SAO判定器24可基於SAO參數獲得器22所判定的SAO類型而判定當前LCU的像素值分類方法為邊緣類型還是級區類型。基於SAO類型,可判定中斷類型、邊緣類型或級區類型。
若SAO類型為中斷類型,則可判定SAO調整未應用於當前LCU。在此狀況下,無需剖析當前LCU的其他SAO參數。
SAO判定器24可基於SAO參數獲得器22所判定的SAO類別而根據當前LCU的邊緣類型判定邊緣方向或根據當前LCU的級區類型而判定級區範圍。
SAO判定器24可基於SAO參數獲得器22所判定的偏移值而判定上述SAO類別中所包含的經重新建構的像素與原始像素之間的差值。
SAO調整器26可按照由SAO判定器24判定的差值而調整基於自當前LCU分割且具有樹狀結構的寫碼單元而重新建構的樣本的像素值。
SAO參數獲得器22可基於SAO合併資訊而判定將左側或上方LCU的第二SAO參數用作第一SAO參數。在此狀況下,SAO判定器24可以不提取當前LCU的第一SAO參數,且可將第一SAO參數重新建構為與先前重新建構的第二SAO參數相同。
SAO參數獲得器22可基於SAO合併資訊而判定並不將第二SAO參數用作第一SAO參數。在此狀況下,SAO判定器24可自位元串流提取且重新建構第一SAO參數,所述第一SAO參數之後是SAO合併資訊。
SAO參數獲得器22可提取當前LCU的明度成分、第一色度成分以及第二色度成分的共同SAO合併資訊。SAO判定器24可基於共同SAO合併資訊而判定是否將明度成分的SAO參數、第一色度成分的SAO參數以及第二色度成分的SAO參數重新建構為與鄰近LCU的SAO參數相同。
SAO判定器24可重新建構當前LCU的第一色度成分及第二色度成分的共同SAO類型。
SAO判定器24可基於SAO參數而判定對應於預定數目的種類的偏移值。偏移值中的每一者可大於等於預先設定的最小值,且可小於等於預先設定的最大值。
若SAO類型資訊指示邊緣類型,則SAO判定器24可基於SAO類別而將當前LCU中所包含的經重新建構的像素的邊緣方向判定為0˚、90˚、45˚或135˚。
若SAO類型資訊指示級區類型,則SAO判定器24可基於SAO類別而判定經重新建構的像素的像素值所屬的級區的位置。
若SAO類型資訊指示級區類型,則SAO判定器24可基於偏移值的零值資訊而判定偏移值是否為0。若基於零值資訊,將偏移值判定為0,則並不重新建構除零值資訊之外的偏移值的資訊。
若基於零值資訊,未將偏移值判定為0,則SAO判定器24可基於偏移值的正負號資訊而判定偏移值為正數還是負數,所述正負號資訊之後是零值資訊。SAO判定器24可藉由重新建構偏移值的剩餘部分(其之後是正負號資訊)而最終判定偏移值。
若SAO類型資訊指示邊緣類型,且若基於偏移值的零值資訊,未將偏移值判定為0,則SAO判定器24可藉由重新建構偏移值的剩餘部分(其之後是零值資訊)而最終判定偏移值。
視訊解碼裝置20可基於色成分而獲得SAO參數以執行SAO調整。
SAO參數獲得器22可自位元串流獲得當前片段的LCU中的每一者的SAO參數。SAO參數獲得器22可自LCU的SAO參數獲得左側SAO合併資訊以及上方SAO合併資訊中的至少一者。
SAO參數獲得器22可基於左側SAO合併資訊而判定是否藉由使用關於與當前LCU相鄰的左側LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測關於當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
若左側SAO合併資訊指示將藉由使用左側LCU的SAO參數來預測當前SAO參數,則可針對每一色成分將用於關於左側LCU的每一色成分的SAO參數用作用於當前LCU的每一色成分的SAO參數。
若基於左側SAO合併資訊而判定不藉由使用左側LCU的SAO參數來預測當前LCU的SAO參數,則SAO參數獲得器22可進一步自位元串流獲得上方SAO合併資訊。
SAO參數獲得器22可基於上方SAO合併資訊而判定是否藉由使用關於與當前LCU相鄰的上方LCU的明度成分以及第一色度成分及第二色度成分的SAO參數來預測當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
若上方SAO合併資訊指示將藉由使用上方LCU的SAO參數來預測當前SAO參數,則可針對每一色成分將用於關於上方LCU的每一色成分的SAO參數用作用於當前LCU的每一色成分的SAO參數。
若上方SAO合併資訊指示不藉由使用上方LCU的SAO參數來預測當前LCU的SAO參數,則SAO參數獲得器22可自位元串流獲得用於當前LCU的每一色成分的SAO參數。
SAO參數獲得器22可自LCU的SAO參數獲得用於當前LCU的明度成分的明度SAO類型資訊以及用於當前LCU的色度成分的色度SAO類型資訊。
SAO判定器24可基於明度SAO類型資訊而判定是否對當前LCU的明度成分執行SAO調整。根據SAO判定器24的判定,SAO調整器26可對當前LCU的明度成分執行SAO調整或可以不對當前LCU的明度成分執行SAO調整。
SAO判定器24可基於色度SAO類型資訊而相同地判定是否對當前LCU的第一色度成分及第二色度成分執行SAO調整。根據SAO判定器24的判定,SAO調整器26可對當前LCU的第一色度成分及第二色度成分執行SAO調整或可以不對當前LCU的第一色度成分及第二色度成分執行SAO調整。
SAO判定器24可基於明度SAO類型資訊以及色度SAO類型資訊中的每一者的第一位元而判定是否執行SAO調整。若判定針對每一色成分而執行SAO調整,則可獲得對應SAO類型資訊的第二位元以及剩餘位元。
SAO判定器24可基於明度SAO類型資訊而判定對當前LUC的明度成分執行邊緣SAO調整或級區SAO調整。明度SAO類型資訊的第二位元可指示邊緣SAO調整或級區SAO調整。SAO調整器26可根據SAO判定器24的判定而對當前LCU的明度成分執行邊緣SAO調整以及級區SAO調整中的一者。
SAO判定器24可基於色度SAO類型資訊而相同地判定對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整或級區SAO調整。色度SAO類型資訊的第二位元可指示邊緣SAO調整或級區SAO調整。SAO調整器26可根據SAO判定器24的判定而同時對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整或級區SAO調整。
當判定對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整時,SAO判定器24可基於色度SAO類型資訊而判定當前LCU的第一色度成分及第二色度成分具有同一邊緣方向。
SAO參數獲得器24可對明度SAO類型資訊的第一內文二進位執行CABAC解碼以便獲得明度SAO類型資訊。可藉由對明度SAO類型資訊的第一內文二進位做解碼而獲得指示是否對當前LCU的明度成分執行SAO調整的資訊。
SAO參數獲得器24可在旁路模式中對明度SAO類型資訊的剩餘內文二進位執行CABAC解碼。可藉由對明度SAO類型資訊的剩餘內文二進位做解碼而獲得指示對當前LCU的明度成分執行邊緣SAO調整或級區SAO調整的資訊。
類似地,SAO參數獲得器24可對色度SAO類型資訊的第一內文二進位執行CABAC解碼以便獲得色度SAO類型資訊。可藉由對色度SAO類型資訊的第一內文二進位做解碼而獲得指示是否對當前LCU的第一色度成分及第二色度成分執行SAO調整的資訊。
SAO參數獲得器24可在旁路模式中對色度SAO類型資訊的剩餘內文二進位執行CABAC解碼。可藉由對色度SAO類型資訊的剩餘內文二進位做解碼而獲得指示對當前LCU的第一色度成分及第二色度成分執行邊緣SAO調整或級區SAO調整的資訊。
SAO參數獲得器24可藉由使用同一內文模式來執行CABAC解碼以便獲得當前LCU的左側SAO合併資訊以及上方SAO合併資訊。
SAO參數獲得器24可在旁路模式中執行CABAC解碼以便獲得當前LCU的SAO參數中所包含的偏移的量值資訊。偏移的所獲得的量值資訊可限於小於等於基於視訊的位元深度的限制值的值。偏移的量值資訊可指示基於視訊的位元深度的範圍內的偏移量值。舉例而言,當位元深度為8個位元時,偏移量值可大於等於0且小於等於7,且當位元深度為10個位元時,偏移量值可大於等於0且小於等於31。
當自色度SAO類型資訊的第二位元獲悉對當前LCU執行級區SAO調整時,SAO參數獲得器24可在旁路模式中對色度SAO類型資訊的第二位元之後的不可變位元長度的位元執行CABAC解碼。可自明度SAO類型資訊以及色度SAO類型資訊中的至少一者的不可變位元長度的位元獲得關於級區左側開始位置的資訊。
SAO參數獲得器24可自LCU的SAO參數獲得用於SAO調整的偏移值。
當根據明度SAO類型資訊或色度SAO類型資訊而判定對當前LCU執行級區SAO調整時,若所獲得的偏移值並非0,則SAO參數獲得器24可進一步自LCU的SAO參數獲得偏移值的正負號資訊。
當根據明度SAO類型資訊或色度SAO類型資訊而判定對當前LCU執行邊緣SAO調整時,可基於根據SAO類別資訊而判定的邊緣方向來判定偏移值的正負號。
視訊解碼裝置20可包含中央處理器(未圖示),所述中央處理器用於整體控制SAO參數獲得器22、SAO判定器24以及SAO調整器26。或者,SAO參數獲得器22、SAO判定器24以及SAO調整器26可由其個別處理器(未圖示)驅動,所述處理器協同操作以控制視訊解碼裝置20。或者,視訊解碼裝置20外部的外部處理器(未圖示)可控制SAO參數獲得器22、SAO判定器24以及SAO調整器26。
視訊解碼裝置20可包含一或多個資料儲存器(未圖示),所述資料儲存器用於儲存SAO參數獲得器22、SAO判定器24以及SAO調整器26的輸入以及輸出資料。視訊解碼裝置20可包含記憶體控制器(未圖示),所述記憶體控制器用於管理輸入至資料儲存器以及自資料儲存器輸出的資料。
為了執行視訊解碼操作以重新建構視訊,視訊解碼裝置20可結合內部或外部視訊解碼處理器而操作。視訊解碼裝置20的內部視訊解碼處理器可為用於執行基本視訊解碼操作的獨立處理器。且,視訊解碼裝置20、中央處理單元或圖形處理單元可包含用於執行基本視訊解碼操作的視訊解碼處理器模組。
現將參看圖3來詳細描述使用SAO調整的視訊解碼操作。圖3為根據一或多個實施例的視訊解碼裝置30的方塊圖。
視訊解碼裝置30包含熵解碼器31、解量化器32、逆變換器33、重新建構器34、畫面內預測器35、參考圖像緩衝器36、運動補償器37、解區塊濾波器38以及SAO執行器39。
視訊解碼裝置30可接收包含經編碼的視訊資料的位元串流。熵解碼器31可自位元串流剖析畫面內模式資訊、畫面間模式資訊、SAO資訊以及留數(residue)。
由熵解碼器31提取的留數可為經量化的變換係數。因此,解量化器32可對留數執行解量化以重新建構變換係數,且逆變換器33可對經重新建構的經重新建構的係數執行逆變換,以重新建構空間域的殘餘值。
為了預測且重新建構空間域的殘餘值,可執行畫面內預測或運動補償。
若畫面內模式資訊由熵解碼器31提取,則畫面內預測器35可藉由使用畫面內模式資訊而判定待參考以自空間上鄰近於當前樣本的樣本重新建構當前樣本的參考樣本。可自先前由重新建構器34重新建構的樣本選擇參考樣本。重新建構器34可藉由使用基於由逆變換器33重新建構的畫面內模式資訊以及殘餘值而判定的參考樣本來重新建構當前樣本。
若畫面間模式資訊由熵解碼器31提取,則運動補償器37可藉由使用畫面間模式資訊而判定待參考以自當前圖像之前重新建構的圖像重新建構當前圖像的當前樣本的參考圖像。畫面間模式資訊可包含運動向量、參考索引等。藉由使用參考索引,在當前圖像之前重新建構且儲存於參考圖像緩衝器36中的圖像中,可判定待用於對當前樣本執行運動補償的參考圖像。藉由使用運動向量,可判定待用於對當前區塊執行運動補償的參考圖像的參考區塊。重新建構器34可藉由使用基於由逆變換器33重新建構的畫面間模式資訊以及殘餘值而判定的參考區塊來重新建構當前樣本。
重新建構器34可重新建構樣本,且可輸出經重新建構的像素。重新建構器34可基於具有樹狀結構的寫碼單元而產生LCU中的每一者的經重新建構的像素。
解區塊濾波器38可執行濾波,以減少安置在LCU或具有樹狀結構的寫碼單元中的每一者的邊緣區域處的像素的結塊現象(blocking phenomenon)。
且,SAO執行器39可根據SAO調整而調整每一LCU的經重新建構的像素的偏移。SAO執行器39可基於由熵解碼器31提取的SAO資訊而判定當前LCU的SAO類型、SAO類別以及偏移值。
由熵解碼器31進行的提取SAO資訊的操作可對應於視訊解碼裝置20的SAO參數獲得器22的操作,且SAO執行器39的操作可對應於視訊解碼裝置20的偏移判定器24以及偏移調整器26的操作。
SAO執行器39可基於自SAO資訊判定的偏移值,關於當前LCU的經重新建構的像素,而判定偏移值的正負號以及差值。SAO執行器39可藉由按照基於偏移值而判定的差值來增大或減小經重新建構的像素的像素值,而減小經重新建構的像素與原始像素之間的誤差。
包含由SAO執行器39偏移調整的經重新建構的像素的圖像可儲存於參考圖像緩衝器36中。因此,藉由使用根據SAO調整而在經重新建構的樣本與原始像素之間具有最小化的誤差的參考圖像,可對下一圖像執行運動補償。
根據SAO調整,基於經重新建構的像素與原始像素之間的差值,可判定包含經重新建構的像素的像素群組的偏移。針對SAO調整,現將詳細描述用於將經重新建構的像素分類為像素群組的實施例。
根據SAO調整,可基於(i)經重新建構的像素的邊緣類型或(ii)經重新建構的像素的級區類型來對像素分類。可藉由使用SAO類型來定義是基於邊緣類型還是級區類型來對像素分類。
現將詳細描述根據SAO調整基於邊緣類型來對像素分類的實施例。
在判定當前LCU的邊緣類型偏移時,可判定當前LCU中所包含的經重新建構的像素中的每一者的邊緣類別。亦即,藉由比較當前的經重新建構的像素與鄰近像素之間的像素值,可定義當前的經重新建構的像素的邊緣類別。現將參看圖4來描述判定邊緣類別的實例。
圖4為展示根據一或多個實施例的邊緣類型的邊緣類別的表格。
可依序將索引0、1、2及3分配給邊緣類別41、42、43及44。若邊緣類型頻繁出現,則可將小的索引分配給邊緣類型。
邊緣類別可指示當前的經重新建構的像素X0與兩個鄰近像素之間形成的1維邊緣的方向。具有索引0的邊緣類別41指示在邊緣形成於當前的經重新建構的像素X0與兩個水平鄰近的像素X1及X2之間時的狀況。具有索引1的邊緣類別42指示在邊緣形成於當前的經重新建構的像素X0與兩個垂直鄰近的像素X3及X4之間時的狀況。具有索引2的邊緣類別43指示在邊緣形成於當前的經重新建構的像素X0與兩個135˚對角線鄰近的像素X5及X8之間時的狀況。具有索引3的邊緣類別44指示在邊緣形成於當前的經重新建構的像素X0與兩個45˚對角線鄰近的像素X6及X7之間時的狀況。
因此,藉由分析當前LCU中所包含的經重新建構的像素的邊緣方向且因此判定當前LCU中的強邊方向,可判定當前LCU的邊緣類別。
關於每一邊緣類別,可根據當前像素的邊緣形狀而對種類分類。現將參看圖5A及圖5B來描述根據邊緣形狀的種類的實例。
圖5A及圖5B為展示根據一或多個實施例的邊緣類型的種類的表格及圖表。
邊緣類別指示當前像素對應於凹入邊緣的最低點、安置於凹入邊緣的最低點周圍的彎曲角落處的像素、凸出邊緣的最高點還是安置於凸出邊緣的最高點周圍的彎曲角落處的像素。
圖5A例示性地展示用於判定邊緣的種類的條件。圖5B例示性地展示經重新建構的像素與鄰近像素之間的邊緣形狀,及所述像素的像素值c、a以及b。
c指示當前的經重新建構的像素的索引,且a以及b指示根據邊緣方向在當前的經重新建構的像素的兩側的鄰近像素的索引。Xa、Xb以及Xc分別指示具有索引a、b以及c的經重新建構的像素的像素值。在圖5B中,x軸指示當前的經重新建構的像素以及當前的經重新建構的像素的兩側的鄰近像素的索引,且y軸指示樣本的像素值。
種類1指示在當前樣本對應於凹入邊緣的最低點(亦即,局部凹部)時的狀況。如圖表51(Xc<Xa && Xc<Xb)所示,若鄰近像素a與b之間的當前的經重新建構的像素c對應於凹入邊緣的最低點,則當前的經重新建構的像素可分類為種類1。
種類2指示在當前樣本安置於凹入邊緣的最低點周圍的彎曲角落(亦即,凹入角落)處時的狀況。如圖表52(Xc<Xa && Xc==Xb)所示,若鄰近像素a與b之間的當前的經重新建構的像素c安置於凹入邊緣的向下曲線的結束點處,或如圖表53 (Xc==Xa && Xc<Xb)所示,若當前的經重新建構的像素c安置於凹入邊緣的向上曲線的開始位置處,則當前的經重新建構的像素可分類為種類2。
種類3指示在當前樣本安置於凸出邊緣的最高點周圍的彎曲角落(亦即,凸出角落)處時的狀況。如圖表54(Xc>Xb && Xc==Xa)所示,若鄰近像素a與b之間的當前的經重新建構的像素c安置於凸出邊緣的向下曲線的開始位置處,或如圖表55(Xc==Xb && Xc>Xa)所示,若當前的經重新建構的像素c安置於凸出邊緣的向上曲線的結束點處,則當前的經重新建構的像素可分類為種類3。
種類4指示在當前樣本對應於凸出邊緣的最高點(亦即,局部凸部)時的狀況。如圖表56(Xc>Xa && Xc>Xb)所示,若鄰近像素a與b之間的當前的經重新建構的像素c對應於凸出邊緣的最高點,則當前的經重新建構的像素可分類為種類1。
若當前的經重新建構的像素並不滿足種類1、2、3以及4的條件的任一者,則當前的經重新建構的像素並不對應於邊緣,且因此分類為種類0,且種類0的偏移無需編碼。
根據一或多個實施例,關於對應於同一種類的經重新建構的像素,可將經重新建構的像素與原始像素之間的差值的平均值判定為當前種類的偏移。且,可判定所有種類的偏移。
若藉由使用正偏移值來調整經重新建構的像素值,則可將種類1及2的凹入邊緣平滑化,且可由於負偏移值而將所述凹入邊緣銳化。可由於負偏移值而將種類3及4的凸出邊緣平滑化,且可由於正偏移值而將所述凸出邊緣銳化。
視訊編碼裝置10可以不允許對邊緣的銳化效應。此處,種類1及2的凹入邊緣需要正偏移值,且種類3及4的凸出邊緣需要負偏移值。在此狀況下,若邊緣的種類是已知的,則可判定偏移值的正負號。因此,視訊編碼裝置10可以不傳輸偏移值的正負號,且可僅傳輸偏移值的絕對值。且,視訊解碼裝置20可以不接收偏移值的正負號,且可僅接收偏移值的絕對值。
因此,視訊編碼裝置10可對根據當前邊緣類別的種類的偏移值做編碼並進行傳輸,且視訊解碼裝置20可按照所接收的偏移值而調整所述種類的經重新建構的像素。
舉例而言,若將邊緣類型的偏移值判定為0,則視訊編碼裝置10可僅將零值資訊作為偏移值傳輸。
舉例而言,若邊緣類型的偏移值並非0,則視訊編碼裝置10可將零值資訊以及絕對值作為偏移值傳輸。並不需要傳輸偏移值的正負號。
視訊解碼裝置20自所接收的偏移值讀取零值資訊,且若偏移值並非0,則可讀取偏移值的絕對值。可基於經重新建構的像素與鄰近像素之間的邊緣形狀,根據邊緣種類來預測偏移值的正負號。
因此,視訊編碼裝置10可根據邊緣方向以及邊緣形狀而對像素分類,可將具有相同特性的像素之間的平均誤差值判定為偏移值,且可判定根據種類的偏移值。視訊編碼裝置10可對指示邊緣類型的SAO類型資訊、指示邊緣方向的SAO類別資訊以及偏移值做編碼且進行傳輸。
視訊解碼裝置20可接收SAO類型資訊、SAO類別資訊以及偏移值,且可根據SAO類型資訊以及SAO類別資訊而判定邊緣方向。視訊解碼裝置20可根據邊緣方向而判定對應於邊緣形狀的種類的經重新建構的像素的偏移值,且可按照偏移值來調整經重新建構的像素的像素值,藉此使原始影像與經重新建構的影像之間的誤差最小化。
現將詳細描述根據SAO調整基於級區類型來對像素分類的實施例。
根據一或多個實施例,經重新建構的像素的像素值中的每一者可屬於多個級區中的一者。舉例而言,像素值可根據p位元取樣而具有自最小值Min至最大值Max的總範圍,其中Min為0且Max為2^(p-1)。若將像素值的總範圍(Min, Max)劃分為K個間隔,則可將像素值的每一間隔稱為級區。若Bk 指示第k級區的最大值,則可劃分級區[B0 , B1 -1]、[B1 , B2 -1]、[B2 , B3 -1]、……、以及[Bk -1, Bk ]。若當前的經重新建構的像素Rec(x,y)的像素值屬於級區[Bk -1, Bk ],則可將當前級區判定為k。可均勻地或不均勻地劃分所述級區。
舉例而言,若將像素值分類為相等的8位元像素級區,則可將像素值劃分為32個級區。更詳細言之,可將像素值分類為級區[0, 7]、[8, 15]、……、 [240, 247]以及[248, 255]。
在根據級區類型而分類的多個級區中,可判定經重新建構的像素的像素值中的每一者所屬的級區。且,可判定指示每一級區中的原始像素與經重新建構的像素之間的誤差的平均值的偏移值。
因此,視訊編碼裝置10以及視訊解碼裝置20可對對應於根據當前級區類型而分類的級區中的每一者的偏移做編碼且進行收發,且可按照所述偏移來調整經重新建構的像素。
因此,關於級區類型,視訊編碼裝置10以及視訊解碼裝置20可根據經重新建構的像素的像素值所屬的級區來對經重新建構的像素分類,可按照屬於同一級區的經重新建構的像素的誤差值的平均值來判定偏移,且可按照所述偏移來調整經重新建構的像素,藉此使原始影像與經重新建構的影像之間的誤差最小化。
在根據級區類型來判定偏移時,視訊編碼裝置10以及視訊解碼裝置20可根據級區位置而將經重新建構的像素分類為多個種類。舉例而言,若將像素值的總範圍劃分為K個級區,則可根據指示第k級區的級區索引k來對種類編索引。可將種類的數目判定為對應於級區的數目。
然而,為了減少資料的量,視訊編碼裝置10以及視訊解碼裝置20可限制用於根據SAO調整來判定偏移的種類的數目。舉例而言,可將在級區索引增大的方向上自具有預定開始位置的級區開始的連續的預定數目的級區作為種類來分配,且可僅判定每一種類的偏移。
舉例而言,若將具有索引12的級區判定為開始級區,則可將自開始級區開始的四個級區(亦即,具有索引12、13、14以及15的級區)作為種類1、2、3以及4來分配。因此,可將具有索引12的級區中所包含的經重新建構的像素與原始像素之間的平均誤差判定為種類1的偏移。同樣,可將具有索引13的級區中所包含的經重新建構的像素與原始像素之間的平均誤差判定為種類2的偏移,可將具有索引14的級區中所包含的經重新建構的像素與原始像素之間的平均誤差判定為種類3的偏移,且可將具有索引15的級區中所包含的經重新建構的像素與原始像素之間的平均誤差判定為種類4的偏移。
在此狀況下,需要關於級區範圍開始位置(亦即,左側級區位置)的資訊,以判定作為種類分配的級區的位置。因此,視訊編碼裝置10可將關於開始級區位置的資訊作為SAO類別來編碼且進行傳輸。視訊編碼裝置10可對指示級區類型的SAO類型、SAO類別以及根據種類的偏移值做編碼且進行傳輸。
視訊解碼裝置20可接收SAO類型、SAO類別以及根據種類的偏移值。若所接收的SAO類型為級區類型,則視訊解碼裝置20可自SAO類別讀取開始級區位置。視訊解碼裝置20可在自開始級區開始的四個級區中判定經重新建構的像素所屬的級區,可在根據種類的偏移值中判定分配給當前級區的偏移值,且可按照所述偏移值來調整經重新建構的像素的像素值。
上文中,將邊緣類型以及級區類型作為SAO類型介紹,且詳細描述了根據SAO類型的SAO類別以及種類。現將詳細描述由視訊編碼裝置10以及視訊解碼裝置20編碼且收發的SAO參數。
視訊編碼裝置10以及視訊解碼裝置20可根據每一LCU的經重新建構的像素的像素分類方法來判定SAO類型。
可根據每一區塊的影像特性來判定SAO類型。舉例而言,關於包含垂直邊緣、水平邊緣以及對角線邊緣的LCU,為了改變邊緣值,可藉由根據邊緣類型來對像素值分類而判定偏移值。關於不包含邊緣區域的LCU,可根據級區分類來判定偏移值。因此,視訊編碼裝置10以及視訊解碼裝置20可關於LCU中的每一者用信號發送SAO類型。
視訊編碼裝置10以及視訊解碼裝置20可關於每一LCU來判定SAO參數。亦即,可判定LCU的經重新建構的像素的SAO類型,可將LCU的經重新建構的像素分類為多個種類,且可根據種類來判定偏移值。
在LCU中所包含的經重新建構的像素中,視訊編碼裝置10可將分類為同一種類的經重新建構的像素的平均誤差判定為偏移值。可判定每一種類的偏移值。
根據一或多個實施例,SAO參數可包含SAO類型、偏移值以及SAO類別。視訊編碼裝置10以及視訊解碼裝置20可收發關於每一LCU而判定的SAO參數。
在LCU的SAO參數中,視訊編碼裝置10可對SAO類型以及偏移值做編碼且進行傳輸。若SAO類型為邊緣類型,則視訊編碼裝置10可進一步傳輸指示邊緣方向的SAO類別,所述SAO類別之後是SAO類型以及根據種類的偏移值。若SAO類型為級區類型,則視訊編碼裝置10可進一步傳輸指示開始級區位置的SAO類別,所述SAO類別之後是SAO類型以及根據種類的偏移值。
視訊解碼裝置20可接收每一LCU的SAO參數,所述SAO參數包含SAO類型、偏移值以及SAO類別。且,視訊解碼裝置20可在根據種類的偏移值中選擇每一經重新建構的像素所屬的種類的偏移值,且可按照所選擇的偏移值來調整經重新建構的像素。
現將描述用信號發送SAO參數中的偏移值的實施例。
為了傳輸偏移值,視訊編碼裝置10可進一步傳輸零值資訊。根據零值資訊,可進一步傳輸正負號資訊以及剩餘部分。
零值資訊可為1位元旗標。亦即,可傳輸指示偏移值為0的「0」旗標或指示偏移值並非0的「1」旗標。
若零值資訊為「0」旗標,則無需對正負號資訊或剩餘部分做編碼。然而,若零值資訊為「1」旗標,則可進一步傳輸正負號資訊以及剩餘部分。
然而,如上所述,關於邊緣類型,由於可根據種類而按照正數或負數來預測偏移值,因此,無需傳輸正負號資訊。因此,若零值資訊為「1」旗標,則可進一步傳輸剩餘部分。
根據一或多個實施例,在判定偏移值Off-Set之前,可預先將偏移值限制於自最小值MinOffSet至最大值MaxOffSet的範圍內(MinOffSet ≤ Off-Set ≤ MaxOffSet)。
舉例而言,關於邊緣類型,可將種類1及2的經重新建構的像素的偏移值判定為處於自最小值0至最大值7的範圍內。關於邊緣類型,可將種類3及4的經重新建構的像素的偏移值判定為處於自最小值-7至最大值0的範圍內。
舉例而言,關於級區類型,可將所有種類的經重新建構的像素的偏移值判定為處於自最小值-7至最大值7的範圍內。
為了減少偏移值的傳輸位元,可將剩餘部分限制為p位元值而不是負數。在此狀況下,剩餘部分可大於等於0,且可小於等於最大值與最小值之間的差值(0 ≤剩餘部分≤ MaxOffSet - MinOffSet + 1 ≤ 2^p)。若視訊編碼裝置10傳輸剩餘部分,且視訊解碼裝置20知曉偏移值的最大值以及最小值中的至少一者,則可藉由僅使用所接收的剩餘部分來重新建構原始偏移值。
圖6A至圖6C展示第一色度成分61與第二色度成分62之間的關係。
在對彩色影像的視訊做編碼及解碼的操作期間,針對每一色成分,將影像資訊大體上分類為明度成分以及第一色度成分及第二色度成分,且儲存於記憶體中。在圖6A至圖6C中,第一色度成分61及第二色度成分62在同一影像區塊的色成分中以交錯次序儲存於記憶體中。
圖6A展示當對第一色度成分61及第二色度成分62執行畫面內預測時左側區塊以及上方區塊的相鄰樣本中被參考的樣本。第一色度成分61可參考與左側區塊相鄰的第一色度成分65或與上方區塊相鄰的第一色度成分63。第二色度成分62可參考與左側區塊相鄰的第二色度成分66或與上方區塊相鄰的第二色度成分64。
然而,在畫面內預測中,第一色度成分61及第二色度成分62可共享畫面內預測方向。因此,可藉由獲得以交錯次序儲存於記憶體中的左側區塊或上方區塊的第一色度成分及第二色度成分63、64、65及66而對第一色度成分61及第二色度成分62同時執行畫面內預測。
當執行運動補償時,同一影像區塊的明度成分以及第一色度成分61及第二色度成分62共享運動向量,且因此,可同時對第一色度成分61及第二色度成分62執行畫面間預測。
當執行迴路濾波時,具有相同大小以及係數的濾波器用於第一色度成分61及第二色度成分62,且因此,可同時對第一色度成分61及第二色度成分62執行迴路濾波。
舉例而言,現將參看圖6B及圖6C來描述當執行邊緣類型SAO調整時,關於第一色度成分61及第二色度成分62的SAO調整之間的關係。
假設,類似於圖6B,將當前第一色度成分611的SAO邊緣方向判定為垂直方向,且將當前第二色度成分621的SAO邊緣方向不同地判定為水平方向。為了對當前第一色度成分611執行SAO調整,需要自記憶體獲得安置於當前第一色度成分611上方以及下方的第一色度成分613及615。為了對當前第二色度成分621執行SAO調整,需要自記憶體獲得安置於當前第二色度成分621左側以及右側的第二色度成分623及625。
第一色度成分61及第二色度成分62以交錯方式儲存於記憶體中,且因此儲存於不同方向上的樣本可以不經由解交錯程序同時自記憶體獲得。在經由解交錯程序對第一色度成分61執行SAO調整之後,對第二色度成分62執行SAO調整,且接著需要執行解交錯程序。
因此,當SAO邊緣方向不同時,可以不對第一色度成分61及第二色度成分62同時執行SAO調整。若依序對第一色度成分61及第二色度成分62執行SAO調整,則在視訊寫碼的並行處理期間發生延時,此可在整個視訊寫碼調整期間導致延遲。
然而,假設類似於圖6C,將當前第一色度成分611及當前第二色度成分621的SAO邊緣方向相同地判定為水平方向。為了對當前第一色度成分611執行SAO調整,可自記憶體獲得安置於當前第一色度成分611左側以及右側的第一色度成分617及619。為了對當前第二色度成分621執行SAO調整,可自記憶體獲得安置於當前第二色度成分621左側以及右側的第二色度成分623及625。在此狀況下,可自記憶體同時獲得儲存於同一方向上的樣本,且因此可對第一色度成分61及第二色度成分62同時執行SAO調整。
因此,若第一色度成分61及第二色度成分62如圖6C所示共享SAO類型,則可預先防止並行處理延時,且可將關於色度成分的SAO參數的位元數目減少二分之一。
現將在下文詳細描述根據實施例的SAO參數中的SAO合併資訊。
鄰近區塊的SAO類型及/或偏移值可能相同。視訊編碼裝置10可比較當前區塊的SAO參數與鄰近區塊的SAO參數,且若SAO參數相同,則可對當前區塊以及鄰近區塊的SAO參數做合併以及編碼。若先前對鄰近區塊的SAO參數做編碼,則可將鄰近區塊的SAO參數用作當前區塊的SAO參數。因此,視訊編碼裝置10可以不對當前區塊的SAO參數做編碼,且可僅對當前區塊的SAO合併資訊做編碼。
在自所接收的位元串流剖析SAO參數之前,視訊解碼裝置20可最初剖析SAO合併資訊,且可判定是否剖析SAO參數。視訊解碼裝置20可基於SAO合併資訊來判定SAO參數與當前區塊的SAO參數相同的鄰近區塊是否存在。
舉例而言,若基於SAO合併資訊,SAO參數與當前區塊的SAO參數相同的鄰近區塊存在,則視訊解碼裝置20可以不剖析當前區塊的SAO參數,且可將鄰近區塊的經重新建構的SAO參數用作當前區塊的SAO參數。因此,視訊解碼裝置20可將當前區塊的SAO參數重新建構為與鄰近區塊的SAO參數相同。且,基於SAO合併資訊,可判定具有待參考的SAO參數的鄰近區塊。
舉例而言,若基於SAO合併資訊,鄰近區塊的SAO參數不同於當前區塊的SAO參數,則視訊解碼裝置20可自位元串流剖析且重新建構當前區塊的SAO參數。
圖7A為展示根據一或多個實施例的經參考以合併SAO參數的鄰近LCU 652及653的圖式。
視訊編碼裝置10可在當前LCU 651之前重新建構的鄰近LCU中判定待參考以預測當前LCU 651的SAO參數的鄰近LCU的候選者清單。視訊編碼裝置10可比較當前LCU 651與候選者清單中的鄰近LCU的SAO參數。
舉例而言,簡言之,當前圖像65中的當前LCU 651的左側LCU 653以及上方LCU 652可包含於候選者清單中。
因此,視訊編碼裝置10可根據參考次序而比較候選者清單中所包含的鄰近LCU的SAO參數與當前LCU 651的SAO參數。舉例而言,可按照左側LCU 653以及上方LCU 652的次序來將SAO參數與當前LCU 651的SAO參數進行比較。在所比較的左側LCU 653以及上方LCU 652中,可將SAO參數與當前LCU 651的SAO參數相同的LCU判定為參考LCU。
為了預測當前LCU 651的SAO參數,視訊編碼裝置10以及視訊解碼裝置20可參考相同鄰近LCU。且,可傳輸及獲得指示具有待參考的SAO參數的LCU的SAO合併資訊。視訊解碼裝置20可基於SAO合併資訊而選擇鄰近LCU中的一者,且可將當前LCU 651的SAO參數重新建構為與所選擇的鄰近LCU的SAO參數相同。
舉例而言,假設參考左側LCU 653以及上方LCU 652。SAO參數編碼器16可將指示當前LCU 651的左側LCU 653的SAO參數是否與當前LCU 651的SAO參數相同的左側SAO合併資訊以及指示上方LCU 652的SAO參數是否與當前LCU 651的SAO參數相同的上方SAO合併資訊作為SAO合併資訊來編碼。在此狀況下,最初,可比較當前LCU 651以及左側LCU 653的SAO參數以判定所述SAO參數是否相同,且接著可比較當前LCU 651與上方LCU 652的SAO參數以判定所述SAO參數是否相同。根據比較結果,可判定SAO合併資訊。
若左側LCU 653以及上方LCU 652中的至少一者的SAO參數與當前LCU 651的SAO參數相同,則SAO參數編碼器16可僅對左側或上方SAO合併資訊做編碼,且可以不對當前LCU 651的SAO參數做編碼。
若左側LCU 653與上方LCU 652兩者的SAO參數不同於當前LCU 651的SAO參數,則SAO參數編碼器16可對左側或上方SAO合併資訊以及當前LCU 651的SAO參數做編碼。
現將詳細描述根據色成分的SAO參數。
視訊編碼裝置10以及視訊解碼裝置20可相互預測色成分之間的SAO參數。
視訊編碼裝置10以及視訊解碼裝置20可在YCrCb色彩格式中對所有明度區塊以及色度區塊執行SAO調整。可分別判定當前LCU的明度成分Y以及色度成分Cr及Cb的偏移值。
舉例而言,可將共同SAO合併資訊應用於當前LCU的Y成分、Cr成分以及Cb成分。亦即,基於一段SAO合併資訊,可判定Y成分的SAO參數是否與鄰近LCU的Y成分的SAO參數相同,可判定當前LCU的Cr成分的偏移參數是否與鄰近LCU的Cr成分的SAO參數相同,且可判定當前LCU的Cb成分的SAO參數是否與鄰近LCU的Cb成分的SAO參數相同。
舉例而言,可將共同SAO類型資訊應用於當前LCU的Cr成分以及Cb成分。亦即,基於一段SAO類型資訊,可判定是否對Cr成分以及Cb成分同時執行SAO調整。基於一段SAO類型資訊,亦可判定是根據邊緣類型還是級區類型來判定Cr成分以及Cb成分的偏移值。若基於一段SAO類型資訊,SAO類型為邊緣類型,則Cr成分以及Cb成分可共享同一邊緣方向。
基於一段SAO類型資訊,Cr成分以及Cb成分亦可共享同一SAO類別。若基於一段SAO類型資訊,SAO類型為級區類型,則Cr成分以及Cb成分可共享同一左側級區開始位置。
現將在下文參看圖7B至圖7G來詳細描述定義根據當前LCU的色成分的SAO參數的語法結構。視訊解碼裝置20可剖析圖7B至圖7G所展示的語法,獲得SAO參數且執行SAO調整。
圖7B展示根據一或多個實施例的片段標頭700以及片段資料705的語法結構。
根據實施例的片段標頭700包含指示是否對當前片段執行SAO調整的一或多個參數701、702及703。
視訊解碼裝置20可自片段標頭700獲得「slice_sample_adaptive_offset_flag[0]」701,且判定是否對明度成分執行SAO調整。
若執行用於明度成分的SAO調整,則視訊解碼裝置20可自片段標頭700獲得「slice_sample_adaptive_offset_flag[1]」702,且判定是否對第一色度成分執行SAO調整。
就此而言,視訊解碼裝置20可不進一步自片段標頭700獲得指示是否對第二色度成分執行SAO調整的參數。可自獲自片段標頭700的「slice_sample_adaptive_offset_flag[1]」702相同地預測指示是否對第二色度成分執行SAO調整的資訊「slice_sample_adaptive_offset_flag[2]」703。因此,可對第一色度成分及第二色度成分同時執行SAO調整或可以不對第一色度成分及第二色度成分同時執行SAO調整。
視訊解碼裝置20可基於自片段標頭700判定的「slice_sample_adaptive_offset_flag[0]」701、「slice_sample_adaptive_offset_flag[1]」702以及「slice_sample_adaptive_offset_flag[2]」703而判定是否自片段資料705獲得根據LUC的SAO參數706。
圖7C及圖7D展示根據一或多個實施例的關於LCU的SAO參數706及709的語法結構。
視訊解碼裝置20可自關於LCU的SAO參數706「sao_unit_cabac(rx, ry, cIdx)」獲得左側SAO合併資訊707。就此而言,可獲得共同左側SAO合併資訊707「sao_merge_left_flag [rx][ry]」,而不管明度成分以及第一色度成分及第二色度成分。因此,視訊解碼裝置20可基於共同左側SAO合併資訊707而同時且相同地判定是否將左側LCU的SAO參數用作當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
若基於左側SAO合併資訊707而判定不參考左側LCU的SAO參數,則視訊解碼裝置20可自關於LCU的SAO參數706獲得上方SAO合併資訊708「sao_merge_up_flag [rx][ry]」。同樣,可獲得共同左側SAO合併資訊707,而不管明度成分以及第一色度成分及第二色度成分。因此,視訊解碼裝置20可基於共同上方SAO合併資訊708而同時且相同地判定是否將上方LCU的SAO參數用作當前LCU的明度成分以及第一色度成分及第二色度成分的SAO參數。
若基於上方SAO合併資訊708而判定亦不參考上方LCU的SAO參數,則視訊解碼裝置20可自關於LCU的SAO參數706直接獲得關於當前LCU的當前SAO參數709。
當前SAO參數709可包含當前LCU的SAO類型資訊711。視訊解碼裝置20可自當前SAO參數709獲得關於明度成分以及色度成分而獨立定義的SAO類型資訊711。因此,可關於第一色度成分以及第二色度成分而獲得共同SAO類型資訊711「sao_type_idx [cIdx][rx][ry]」。舉例而言,若關於當前LCU的第一色度成分而獲得SAO類型資訊711,則可自關於第二色度成分的SAO類型資訊711而預測關於第二色度成分的SAO類型資訊。
可自SAO類型資訊711獲得指示是否對當前LCU執行SAO調整的1個位元。若判定對第一1個位元執行SAO調整,則可自SAO類型資訊711獲得第二1個位元,且可自第二1個位元判定當前LCU的SAO類型是邊緣類型還是級區類型。
若將SAO類型資訊711的第二1個位元判定為邊緣類型,則視訊解碼裝置20可自SAO類型資訊711的剩餘位元獲得關於邊緣種類的資訊。
若將SAO類型資訊711的第二1個位元判定為級區類型,則視訊解碼裝置20可自SAO類型資訊711的剩餘位元獲得關於級區種類的資訊。
視訊解碼裝置20可基於關於明度成分的SAO類型資訊711的1個位元而判定是否對當前LCU的明度成分執行SAO調整。視訊解碼裝置20可基於關於色度成分的SAO類型資訊711的1個位元而判定是否對當前LCU的第一色度成分及第二色度成分執行SAO調整。
若基於用於明度成分或色度成分的SAO類型資訊711而判定並不對當前LCU的明度成分或色度成分執行SAO調整,則不自SAO類型資訊711獲得下一位元。可接收呈截頭一元碼形式(truncated unary code form)的SAO類型資訊711。
對根據實施例的用於色度成分的僅一段SAO類型資訊711做編碼,且可將針對第一色度成分而判定的SAO類型資訊711判定為用於第二色度成分的SAO類型資訊。
視訊解碼裝置20可自關於當前LCU的SAO參數709「sao_offset_cabac(rx, ry, cIdx)」獲得用於明度成分的邊緣類型資訊以及用於色度成分的邊緣類型資訊。邊緣類別可指示四個邊緣方向,包含水平邊緣方向(0˚)、垂直邊緣方向(90˚)、135˚對角線邊緣方向以及45˚對角線邊緣方向,且因此可將邊緣類別定義為2個位元。
圖7F展示根據一或多個實施例的關於SAO類型的SAO參數的語法結構。參看圖7D及圖7F,若基於SAO類型資訊711而執行SAO調整,則SAO參數706及709可更包含偏移值713「sao_offset[cIdx][rx][ry][i]」以及偏移正負號資訊715「sao_offset_sign[cIdx][rx][ry][i]」中的至少一者。
將參看圖7E來描述用於偏移值713的CABAC編碼的內文模型化。圖7E展示根據一或多個實施例的用於SAO參數的CABAC編碼的內文資訊的語法結構。
亦即,如圖7D及圖7F所示,視訊解碼裝置20並不自SAO參數706與709兩者獲得偏移值713,而是可首先獲得如圖7E所示的偏移值713的量值的第一1個位元721「sao_offset_abs_1st_bin[cIdx][rx][ry][i]」。當第一1個位元由於偏移值713並非0而並非0時,視訊解碼裝置20獲得偏移值713的量值的剩餘位元723「sao_offset_abs_remain_bins[cIdx][rx][ry][i]」。
偏移值713的第一1個位元以及剩餘位元彼此分離,且因此,可在旁路模式中對剩餘位元做CABAC編碼。
僅當偏移值713並非0時,視訊解碼裝置20方可自SAO參數706及709獲得偏移值713的偏移正負號資訊715「sao_offset_sign[cIdx][rx][ry][i]」。
僅當SAO類型為級區類型且偏移值713並非0時,方可獲得偏移正負號資訊715「sao_offset_sign[cIdx][rx][ry][i]」。當SAO類型為邊緣類型時,可根據邊緣類別是局部凸部、局部凹部、凹入邊緣還是凸出邊緣而判定偏移值713的正負號。
參看圖7F,當SAO類型為級區類型時,可自SAO參數706獲得關於左側級區開始位置的資訊717「sao_band_position[cIdx][rx][ry]」以及偏移正負號資訊715。
視訊解碼裝置20可對SAO參數706及709執行CABAC編碼。為了對SAO參數706及709執行CABAC編碼,可執行關於SAO參數706及709中的左側SAO合併資訊707、上方SAO合併資訊708、關於偏移值713的資訊以及SAO類型資訊711的內文模型化。
可根據位元深度來限制關於偏移值713的資訊中的偏移值713的絕對值量值。可根據以下方程式來判定絕對值量值的最大值。 Offset_abs_max = (1<<(Min(bitDepth, 10)-5))-1
舉例而言,在8位元的位元深度解碼中,偏移值713的絕對值量值可為0到7。另外舉例而言,在10位元的位元深度解碼中,偏移值713的絕對值量值可為0及31。
為了確保偏移值713的量值限制,可藉由使用截頭一元碼來對關於偏移值713的資訊做編碼。
視訊解碼裝置20可僅使用與關於偏移值713的資訊的第一1個位元相關的內文模型。視訊解碼裝置20可在旁路模式中對關於偏移值713的資訊的剩餘位元執行CABAC解碼。
SAO類型資訊711包含值0至5。可對指示是否執行當前LCU的SAO調整的SAO類型資訊711的第一1個位元執行使用2個內文模型的CABAC解碼。可在旁路模式中對除第一1個位元之外的SAO類型資訊711的剩餘位元執行CABAC解碼。
可藉由使用由明度成分以及第一色度成分及第二色度成分共享的單個內文模型來對左側SAO合併資訊707做CABAC解碼。可藉由使用由明度成分以及第一色度成分及第二色度成分共享的單個內文模型來對上方SAO合併資訊708做CABAC解碼。
因此,總計5個內文模型可用於對SAO參數706及709執行CABAC解碼。因此,相比關於偏移值713的所有二進位而判定內文模型且並未針對色成分而共享左側SAO合併資訊707的狀況,可減少三個內文模型。由於用於CABAC解碼的內文模型的減少,可減少需要儲存於記憶體中的資料儲存的量。在旁路模式中對多個SAO參數的二進位做CABAC編碼,且因此可減少CABAC計算及傳輸位元的量。
SAO參數709中所包含的關於左側級區開始位置的資訊717「sao_band_position[cIdx][rx][ry]」具有5位元不可變位元長度以及最大值31。視訊解碼裝置20可在不可變位元長度的旁路模式中對關於左側級區開始位置的資訊717執行CABAC解碼。
現將在下文描述經由CABAC而自SAO參數剖析各段SAO相關資訊的程序。
自SAO參數剖析明度成分的SAO類型。若SAO類型為中斷類型(OFF),則由於未對明度成分執行根據SAO調整的偏移調整,因此可剖析色度成分的SAO參數。
若明度成分的SAO類型為邊緣類型(EO),則可剖析四個種類的明度偏移值。可剖析邊緣類型的偏移值,而無正負號資訊。可自SAO參數剖析2個位元的明度邊緣類別(明度EO類別)。可基於明度邊緣類別來判定當前LCU的明度成分的邊緣方向。
如上所述,由於接收到指示邊緣形狀的四個種類的偏移值,因此接收到總計四個偏移值。由於可根據邊緣方向來將當前LCU的每一經重新建構的明度像素與鄰近像素進行比較且因此可判定所述經重新建構的明度像素的邊緣形狀以及種類,因此可在所接收的偏移值中選擇當前種類的偏移值。可藉由使用所選擇的偏移值來調整經重新建構的明度像素的像素值。
若明度成分的SAO類型為級區類型(BO),則可剖析四個種類的明度偏移值。可剖析級區類型的偏移值與正負號資訊。可剖析5個位元的明度級區類別。可基於明度級區類別而在當前LCU的經重新建構的像素的像素值的多個級區中判定左側級區開始位置。
如上所述,由於接收到指示自開始級區位置開始的四個連續級區的四個種類的偏移值,因此接收到總計四個偏移值。由於可判定當前LCU的每一經重新建構的明度像素所屬的級區且因此可判定所述經重新建構的明度像素的種類,因此可在所接收的偏移值中選擇當前種類的偏移值。可藉由使用所選擇的偏移值來調整經重新建構的明度像素的像素值。
接著,自SAO參數剖析色度成分的SAO類型。可將SAO類型共同應用於Cr成分以及Cb成分。若SAO類型為中斷類型(OFF),則由於未對色度成分執行根據SAO調整的偏移調整,因此終止當前LCU的程序。
若色度成分的SAO類型為邊緣類型(EO),則可自SAO參數剖析四個種類的Cb偏移值。可剖析邊緣類型的Cb偏移值,而無正負號資訊。可自SAO參數剖析2個位元的色度邊緣類別(色度EO類別)。可基於色度邊緣類別來判定當前LCU的色度成分的邊緣方向。亦可將色度邊緣類別共同應用於Cr成分以及Cb成分。可自SAO參數剖析四個種類的Cr偏移值。
類似於對明度成分及Cr成分以及Cb成分中的每一者的邊緣類型的偏移調整,可在所接收的偏移值中選擇當前種類的偏移值。可藉由使用所選擇的偏移值來調整Cr成分或Cb成分的經重新建構的像素的像素值。
若色度成分的SAO類型為級區類型(BO),則可自SAO參數剖析四個種類的Cb成分的偏移值以及正負號資訊。可自SAO參數剖析5個位元的Cb級區類別。可基於Cb級區類別來判定當前LCU的Cb成分的經重新建構的像素的Cb左側級區開始位置。可剖析四個種類的Cr成分的偏移值與正負號資訊。可剖析5個位元的Cr級區類別。可基於Cr級區類別來判定當前LCU的Cr成分的經重新建構的像素的Cr左側級區開始位置。
類似於對明度成分及Cr成分以及Cb成分中的每一者的級區類型的偏移調整,可在所接收的偏移值中選擇當前種類的偏移值。可藉由使用所選擇的偏移值來調整Cr成分或Cb成分的經重新建構的像素的像素值。
因此,使用SAO調整的視訊編碼裝置10以及視訊解碼裝置20或30可根據影像特性(諸如,邊緣類型或級區類型)而將每一LCU的像素值分類,可用信號發送偏移值(其為具有相同特性的像素值的平均誤差值),且可按照所述偏移值來調整經重新建構的像素的不可預測的像素值,藉此將原始影像與經重新建構的影像之間的誤差最小化。
在視訊編碼裝置10以及視訊解碼裝置20中,如上所述,可將視訊資料分割為LCU,可基於具有樹狀結構的寫碼單元來對每一LCU做編碼以及解碼,且每一LCU可根據像素分類來判定偏移值。下文中,將參看圖1A至圖20來描述基於具有樹狀結構的寫碼單元以及變換單元的視訊編碼方法、視訊編碼裝置、視訊解碼方法以及視訊解碼裝置。
圖8為根據一或多個實施例的基於根據樹狀結構的寫碼單元的視訊編碼裝置100的方塊圖。
涉及基於根據樹狀結構的寫碼單元的視訊預測的視訊編碼裝置100包含LCU分割器110、寫碼單元判定器120以及輸出器130。
LCU分割器110可基於LCU來分割當前圖像,LCU為影像的當前圖像的最大大小的寫碼單元。若當前圖像大於LCU,則當前圖像的影像資料可分割為至少一個LCU。根據一或多個實施例的LCU可為大小為32×32、64×64、128×128、256×256等的資料單元,其中資料單元的形狀是寬度以及長度為2的平方的正方形。影像資料可根據至少一個LCU而輸出至寫碼單元判定器120。
根據一或多個實施例的寫碼單元可藉由最大大小以及深度來表徵。深度表示寫碼單元自LCU在空間上分割的次數,且隨著深度加深,根據深度的較深寫碼單元可自LCU分割為最小寫碼單元(smallest coding unit, SCU)。LCU的深度為最上層深度,且SCU的深度為最下層深度。由於對應於每一深度的寫碼單元的大小隨著LCU的深度加深而減小,因此對應於較上層深度的寫碼單元可包含對應於較下層深度的多個寫碼單元。
如上所述,當前圖像的影像資料根據寫碼單元的最大大小而分割為LCU,且LCU中的每一者可包含根據深度而分割的較深寫碼單元。由於根據一或多個實施例的LCU是根據深度來分割,因此包含於LCU中的空間域的影像資料可根據深度而階層式分類。
限制LCU的高度以及寬度階層式分割的總次數的寫碼單元的最大深度以及最大大小可為預定的。
寫碼單元判定器120對藉由根據深度來分割LCU的區域而獲得的至少一個分割區域做編碼,且判定深度以根據所述至少一個分割區域來輸出最終編碼的影像資料。換言之,寫碼單元判定器120藉由根據當前圖像的LCU來對根據深度的較深寫碼單元中的影像資料做編碼以及選擇具有最小編碼誤差的深度來判定經寫碼的深度。所判定的經寫碼的深度以及根據所判定的經寫碼的深度的經編碼的影像資料輸出至輸出器130。
基於對應於等於或低於最大深度的至少一個深度的較深寫碼單元而對LCU中的影像資料做編碼,且基於較深寫碼單元中的每一者而比較對影像資料做編碼的結果。可在比較較深寫碼單元的編碼誤差之後選擇具有最小編碼誤差的深度。可針對每一LCU選擇至少一個經寫碼的深度。
隨著寫碼單元根據深度而階層式分割,且隨著寫碼單元的數目增大,LCU的大小被分割。且,即使寫碼單元對應於一個LCU中的同一深度,仍藉由獨立量測每一寫碼單元的影像資料的編碼誤差而判定是否將對應於同一深度的寫碼單元中的每一者分割為較下層深度。因此,即使當影像資料包含於一個LCU中時,編碼誤差仍可根據所述一個LCU中的區域而不同,且因此經寫碼的深度可根據影像資料中的區域而不同。因此,可在一個LCU中判定一或多個經寫碼的深度,且可根據至少一個經寫碼的深度的寫碼單元而劃分LCU的影像資料。
因此,寫碼單元判定器120可判定包含於LCU中的具有樹狀結構的寫碼單元。根據一或多個實施例的「具有樹狀結構的寫碼單元」包含LCU中所包含的所有較深寫碼單元中的對應於判定為經寫碼的深度的深度的寫碼單元。可根據LCU的同一區域中的深度而階層式判定經寫碼的深度的寫碼單元,且可在不同區域中獨立地進行判定。類似地,可獨立於另一區域中的經寫碼的深度而判定當前區域中的經寫碼的深度。
根據一或多個實施例的最大深度為與自LCU至SCU的分割次數相關的索引。根據一或多個實施例的第一最大深度可表示自LCU至SCU的總分割次數。根據一或多個實施例的第二最大深度可表示自LCU至SCU的總深度層級數。舉例而言,當LCU的深度為0時,LCU被分割一次的寫碼單元的深度可設定為1,且LCU被分割兩次的寫碼單元的深度可設定為2。此處,若SCU為LCU被分割四次的寫碼單元,則存在深度0、1、2、3以及4的5個深度層級,且因此第一最大深度可設定為4,且第二最大深度可設定為5。
可根據LCU執行預測編碼以及變換。根據LCU,亦基於根據等於最大深度的深度或小於最大深度的深度的較深寫碼單元來執行預測編碼以及變換。
由於每當根據深度來分割LCU,較深寫碼單元的數目便增大,因此對隨著深度加深而產生的所有較深寫碼單元執行包含預測編碼以及變換的編碼。為便於描述,在LCU中,現將基於當前深度的寫碼單元來描述預測編碼以及變換。
視訊編碼裝置100可按各種方式選擇用於對影像資料做編碼的資料單元的大小或形狀。為了對影像資料做編碼,執行諸如預測編碼、變換以及熵編碼的操作,且此時,同一資料單元可用於所有操作或不同資料單元可用於每一操作。
舉例而言,視訊編碼裝置100可不僅選擇用於對影像資料做編碼的寫碼單元,而且選擇不同於寫碼單元的資料單元,以便對寫碼單元中的影像資料執行預測編碼。
為了在LCU中執行預測編碼,可基於對應於經寫碼的深度的寫碼單元(亦即,基於不再分割為對應於較下層深度的寫碼單元的寫碼單元)來執行預測編碼。下文中,不再分割且變為用於預測編碼的基礎單元的寫碼單元現將被稱為「預測單元」。藉由分割預測單元而獲得的分區可包含藉由分割預測單元的高度以及寬度中的至少一者而獲得的預測單元或資料單元。分區為分割寫碼單元的預測單元的資料單元,且預測單元可為大小與寫碼單元相同的分區。
舉例而言,當2N×2N(其中N為正整數)的寫碼單元不再分割且變為2N×2N的預測單元,且分區的大小可為2N×2N、2N×N、N×2N或N×N。分區類型的實例包含藉由對稱地分割預測單元的高度或寬度而獲得的對稱分區、藉由非對稱地分割預測單元的高度或寬度(諸如,1:n或n:1)而獲得的分區、藉由用幾何方式分割預測單元而獲得的分區,以及具有任意形狀的分區。
預測單元的預測模式可為畫面內模式、畫面間模式以及跳過模式中的至少一者。舉例而言,可對2N×2N、2N×N、N×2N或N×N的分區執行畫面內模式或畫面間模式。且,可僅對2N×2N的分區執行跳過模式。在寫碼單元中對一個預測單元獨立地執行編碼,藉此選擇具有最小編碼誤差的預測模式。
視訊編碼裝置100亦可不僅基於用於對影像資料做編碼的寫碼單元而且基於不同於寫碼單元的資料單元而對寫碼單元中的影像資料執行變換。為了在寫碼單元中執行變換,可基於具有小於等於寫碼單元的大小的資料單元來執行變換。舉例而言,用於變換的資料單元可包含用於畫面內模式的資料單元以及用於畫面間模式的資料單元。
以類似於根據樹狀結構的寫碼單元的方式,寫碼單元中的變換單元可按遞迴方式分割為較小大小的區域。因此,可根據具有根據變換深度的樹狀結構的變換單元而劃分寫碼單元中的留數。
亦可在變換單元中設定指示藉由分割寫碼單元的高度以及寬度而達到變換單元的分割次數的變換深度。舉例而言,在2N×2N的當前寫碼單元中,當變換單元的大小為2N×2N時,變換深度可為0,當變換單元的大小為N×N時,變換深度可為1,且當變換單元的大小為N/2×N/2時,變換深度可為2。換言之,可根據變換深度而設定具有樹狀結構的變換單元。
根據對應於經寫碼的深度的寫碼單元的編碼資訊不僅需要關於經寫碼的深度的資訊,而且需要與預測編碼以及變換相關的資訊。因此,寫碼單元判定器120不僅判定具有最小編碼誤差的經寫碼的深度,而且判定預測單元中的分區類型、根據預測單元的預測模式,以及用於變換的變換單元的大小。
下文將參看圖7至圖19詳細描述根據一或多個實施例的LCU中的根據樹狀結構的寫碼單元及判定預測單元/分區以及變換單元的方法。
寫碼單元判定器120可藉由基於拉格朗日乘數(Lagrangian multiplier)使用位元率-失真最佳化(Rate-Distortion Optimization)來量測根據深度的較深寫碼單元的編碼誤差。
輸出器130按照位元串流的形式輸出基於由寫碼單元判定器120判定的至少一個經寫碼的深度而編碼的LCU的影像資料,以及根據經寫碼的深度關於編碼模式的資訊。
可藉由對影像的留數做編碼來獲得經編碼的影像資料。
根據經寫碼的深度關於編碼模式的資訊可包含關於經寫碼的深度、關於預測單元中的分區類型、預測模式以及變換單元的大小的資訊。
可藉由使用根據深度的分割資訊來定義關於經寫碼的深度的資訊,根據深度的分割資訊指示是否對較下層深度而非當前深度的寫碼單元執行編碼。若當前寫碼單元的當前深度為經寫碼的深度,則對當前寫碼單元中的影像資料做編碼且輸出,且因此,分割資訊可定義為不將當前寫碼單元分割為較下層深度。或者,若當前寫碼單元的當前深度並非經寫碼的深度,則對較下層深度的寫碼單元執行編碼,且因此分割資訊可定義為分割當前寫碼單元以獲得較下層深度的寫碼單元。
若當前深度並非經寫碼的深度,則對分割為較下層深度的寫碼單元的寫碼單元執行編碼。由於較下層深度的至少一個寫碼單元存在於當前深度的一個寫碼單元中,因此對較下層深度的每一寫碼單元重複地執行編碼,且因此可對具有同一深度的寫碼單元按遞迴方式執行編碼。
由於針對一個LCU而判定具有樹狀結構的寫碼單元,且針對經寫碼的深度的寫碼單元而判定關於至少一個編碼模式的資訊,因此可針對一個LCU而判定關於至少一個編碼模式的資訊。且,LCU的影像資料的經寫碼的深度可根據位置而不同,此是因為根據深度而階層式分割影像資料,且因此可針對影像資料而設定關於經寫碼的深度以及編碼模式的資訊。
因此,輸出器130可將關於對應經寫碼的深度以及編碼模式的編碼資訊指派給包含於LCU中的寫碼單元、預測單元以及最小單元中的至少一者。
根據一或多個實施例的最小單元為藉由將構成最下層深度的SCU分割為4份而獲得的正方形資料單元。或者,根據實施例的最小單元可為可包含於LCU中所包含的所有寫碼單元、預測單元、分區單元以及變換單元中的最大正方形資料單元。
舉例而言,由輸出器130輸出的編碼資訊可分類為根據較深寫碼單元的編碼資訊,以及根據預測單元的編碼資訊。根據較深寫碼單元的編碼資訊可包含關於預測模式以及關於分區的大小的資訊。根據預測單元的編碼資訊可包含關於畫面間模式的估計方向、關於畫面間模式的參考影像索引、關於運動向量、關於畫面內模式的色度成分以及關於畫面內模式的內插方法的資訊。
關於根據圖像、片段或GOP而定義的寫碼單元的最大大小的資訊,以及關於最大深度的資訊可插入至位元串流的標頭、序列參數集合(Sequence Parameter Set)或圖像參數集合(picture parameter set)中。
關於針對當前視訊而允許的變換單元的最大大小的資訊,以及關於變換單元的最小大小的資訊亦可經由位元串流的標頭、序列參數集合或圖像參數集合而輸出。輸出器130可對與上文參看圖1A至圖7F而描述的SAO調整相關的SAO參數做編碼以及輸出。
在視訊編碼裝置100中,較深寫碼單元可為藉由將較上層深度的寫碼單元(其為上一層)的高度或寬度劃分為2份而獲得的寫碼單元。換言之,在當前深度的寫碼單元的大小為2N×2N時,較下層深度的寫碼單元的大小為N×N。且,大小為2N×2N的當前深度的寫碼單元可包含較下層深度的最多4個寫碼單元。
因此,視訊編碼裝置100可藉由基於考慮當前圖像的特性而判定的LCU的大小以及最大深度,藉由針對每一LCU判定具有最佳形狀以及最佳大小的寫碼單元而形成具有樹狀結構的寫碼單元。且,由於藉由使用各種預測模式以及變換中的任一者對每一LCU執行編碼,因此可考慮各種影像大小的寫碼單元的特性來判定最佳編碼模式。
因此,若在習知巨集區塊中對具有高解析度或大資料量的影像做編碼,則每圖像的巨集區塊的數目過度地增大。因此,針對每一巨集區塊產生的壓縮資訊的段數增大,且因此難以傳輸壓縮資訊,且資料壓縮效率降低。然而,藉由使用視訊編碼裝置100,因為在考慮影像的大小而增大寫碼單元的最大大小的同時考慮影像的特性而調整寫碼單元,所以影像壓縮效率可提高。
圖8的視訊編碼裝置100可執行上文參看圖1A所述的視訊編碼裝置10的操作。
寫碼單元判定器120可執行視訊編碼裝置10的SAO判定器14的操作。可關於每一LCU而判定SAO類型、根據種類的偏移值以及SAO類別。
輸出器130可執行SAO參數編碼器16的操作。可輸出關於每一LCU而判定的SAO參數。最初,可輸出指示是否將當前LCU的鄰近LCU的SAO參數用作當前LCU的SAO參數的SAO合併資訊。作為SAO類型,可輸出中斷類型、邊緣類型或級區類型。可按照如下次序輸出偏移值:零值資訊、正負號資訊以及剩餘部分。關於邊緣類型,可以不輸出偏移值的正負號資訊。
若當前LCU的SAO合併資訊允許採用鄰近LCU的SAO參數,則可以不輸出當前LCU的SAO類型以及偏移值。
可根據色成分來判定是否執行SAO調整。可關於每一片段來判定是否執行用於明度成分以及第一色度成分及第二色度成分的SAO調整。輸出器130可輸出包含明度SAO使用資訊以及色度SAO使用資訊的片段標頭。
輸出器130可將指示是否執行用於明度成分的SAO調整且指示SAO類型的明度SAO類型資訊以及指示是否執行用於第一色度成分及第二色度成分的SAO調整且指示SAO類型的色度SAO類型資訊包含於關於每一LCU而判定的SAO參數中。
圖9為根據一或多個實施例的基於具有樹狀結構的寫碼單元的視訊解碼裝置200的方塊圖。
基於具有樹狀結構的寫碼單元的涉及視訊預測的視訊解碼裝置200包含接收器210、影像資料以及編碼資訊提取器220以及影像資料解碼器230。
用於視訊解碼裝置200的解碼操作的各種術語(諸如,寫碼單元、深度、預測單元、變換單元以及關於各種編碼模式的資訊)的定義與參看圖7A至圖7F且參考視訊編碼裝置100所述的術語相同。
接收器210接收且剖析經編碼的視訊的位元串流。影像資料以及編碼資訊提取器220自所剖析的位元串流提取每一寫碼單元的經編碼的影像資料,其中寫碼單元具有根據每一LCU的樹狀結構,且將所提取的影像資料輸出至影像資料解碼器230。影像資料以及編碼資訊提取器220可自關於當前圖像的標頭、序列參數集合或圖像參數集合提取關於當前圖像的寫碼單元的最大大小的資訊。
且,影像資料以及編碼資訊提取器220自所剖析的位元串流針對具有根據每一LCU的樹狀結構的寫碼單元提取關於經寫碼的深度以及編碼模式的資訊。關於經寫碼的深度以及編碼模式的所提取的資訊輸出至影像資料解碼器230。換言之,位元串流中的影像資料分割為LCU,以使得影像資料解碼器230對每一LCU的影像資料做解碼。
可針對關於對應於經寫碼的深度的至少一個寫碼單元的資訊而設定根據LCU關於經寫碼的深度以及編碼模式的資訊,且關於編碼模式的資訊可包含關於對應於經寫碼的深度的對應寫碼單元的分區類型、關於預測模式以及變換單元的大小的資訊。且,可將根據深度的分割資訊作為關於經寫碼的深度的資訊來提取。
由影像資料以及編碼資訊提取器220提取的根據每一LCU關於經寫碼的深度以及編碼模式的資訊為關於經判定以在諸如視訊編碼裝置100的編碼器根據每一LCU對根據深度的每一較深寫碼單元重複地執行編碼時產生最小編碼誤差的經寫碼的深度以及編碼模式的資訊。因此,視訊解碼裝置200可藉由根據產生最小編碼誤差的經寫碼的深度以及編碼模式來對影像資料做解碼而重新建構影像。
由於關於經寫碼的深度以及編碼模式的編碼資訊可指派給對應寫碼單元、預測單元以及最小單元中的預定資料單元,因此影像資料以及編碼資訊提取器220可提取根據預定資料單元關於經寫碼的深度以及編碼模式的資訊。若根據預定資料單元而記錄關於對應LCU的經寫碼的深度以及編碼模式的資訊,則被指派關於經寫碼的深度以及編碼模式的相同資訊的預定資料單元可推斷為包含於同一LCU中的資料單元。
影像資料解碼器230可藉由基於根據LCU關於經寫碼的深度以及編碼模式的資訊對每一LCU中的影像資料做解碼來重新建構當前圖像。換言之,影像資料解碼器230可基於關於每一LCU中所包含的具有樹狀結構的寫碼單元中的每一寫碼單元的分區類型、預測模式以及變換單元的所提取的資訊而對經編碼的影像資料做解碼。解碼程序可包含:包含畫面內預測以及運動補償的預測;以及逆變換。
影像資料解碼器230可基於根據經寫碼的深度關於每一寫碼單元的預測單元的分區類型以及預測模式的資訊根據所述寫碼單元的分區以及預測模式來執行畫面內預測或運動補償。
此外,影像資料解碼器230可針對每一寫碼單元根據樹狀結構來讀取關於變換單元的資訊,以便基於每一寫碼單元的變換單元來執行逆變換,以實現每一LCU的逆變換。經由逆變換,可重新建構寫碼單元的空間域的像素值。
影像資料解碼器230可藉由使用根據深度的分割資訊而判定當前LCU的經寫碼的深度。若分割資訊指示影像資料在當前深度中不再分割,則當前深度為經寫碼的深度。因此,影像資料解碼器230可針對對應於經寫碼的深度的每一寫碼單元藉由使用關於預測單元的分區類型、預測模式以及變換單元的大小的資訊來對當前LCU中的經編碼的資料做解碼。
換言之,可藉由觀測針對寫碼單元、預測單元以及最小單元中的預定資料單元而指派的編碼資訊集合來收集含有包含相同分割資訊的編碼資訊的資料單元,且可將所收集的資料單元視為待由影像資料解碼器230在同一編碼模式中解碼的一個資料單元。因此,可藉由針對每一寫碼單元獲得關於編碼模式的資訊來對當前寫碼單元做解碼。
且,圖9的視訊解碼裝置200可執行上文參看圖2A所述的視訊解碼裝置20的操作。
影像資料以及編碼資訊提取器220以及接收器210可執行視訊解碼裝置20的SAO參數獲得器22的操作。影像資料解碼器230可執行視訊解碼裝置20的SAO判定器24以及SAO調整器26的操作。
可根據色成分來判定是否執行SAO調整。
影像資料以及編碼資訊提取器220可自片段標頭獲得明度SAO使用資訊以及色度SAO使用資訊。可自明度SAO使用資訊判定是否執行用於明度成分的SAO調整且可自色度SAO使用資訊判定是否執行用於第一色度成分及第二色度成分的SAO調整。
影像資料以及編碼資訊提取器220可自關於每一LCU而判定的SAO參數獲得指示是否執行用於明度成分的SAO調整且指示SAO類型的明度SAO類型資訊。影像資料以及編碼資訊提取器220可自關於每一LCU而判定的SAO參數獲得指示是否執行用於第一色度成分及第二色度成分的SAO調整且指示SAO類型的色度SAO類型資訊。
若自位元串流僅剖析SAO合併資訊,而不剖析當前LCU的SAO參數,則影像資料以及編碼資訊提取器220可將當前LCU的SAO參數重新建構為鄰近LCU中的至少一者的SAO參數相同。基於SAO合併資訊,可判定具有待參考的SAO參數的鄰近LCU。若基於自位元串流剖析的當前LCU的SAO合併資訊而判定當前LCU的SAO參數不同於鄰近LCU的SAO參數,則影像資料以及編碼資訊提取器220可自位元串流剖析且重新建構當前LCU的SAO參數。
影像資料以及編碼資訊提取器220可自位元串流剖析每一LCU的SAO參數。基於SAO參數,可判定SAO類型、根據種類的偏移值以及SAO類別。若當前LCU的SAO類型為中斷類型,則可終止當前LCU的偏移調整。若SAO類型為邊緣類型,則基於指示邊緣類別(其指示經重新建構的像素中的每一者的邊緣方向)的種類以及邊緣形狀,可在所接收的偏移值中選擇當前偏移值。若SAO類型為級區類型,則判定經重新建構的像素中的每一者所屬的級區,且可在偏移值中選擇對應於當前級區的偏移值。
影像資料解碼器230可藉由按照對應偏移值來調整經重新建構的像素的像素值而產生能夠將原始像素與經重新建構的像素之間的誤差最小化的經重新建構的像素。可基於所剖析的SAO參數來調整每一LCU的經重新建構的像素的偏移。
因此,視訊解碼裝置200可獲得關於在對每一LCU按遞迴方式執行編碼時產生最小編碼誤差的至少一個寫碼單元的資訊,且可使用所述資訊來對當前圖像做解碼。換言之,可對判定為每一LCU中的最佳寫碼單元的具有樹狀結構的寫碼單元做解碼。
因此,即使影像資料具有高解析度以及大量資料,仍可藉由使用自編碼器接收的關於最佳編碼模式的資訊藉由使用根據影像資料的特性而自適應地判定的寫碼單元的大小以及編碼模式來有效地對影像資料做解碼以及重新建構。
圖10為用於描述根據一或多個實施例的寫碼單元的概念的圖式。
寫碼單元的大小可用寬度×高度來表達,且可包含64×64、32×32、16×16以及8×8。64×64的寫碼單元可分割為64×64、64×32、32×64或32×32的分區,且32×32的寫碼單元可分割為32×32、32×16、16×32或16×16的分區,16×16的寫碼單元可分割為16×16、16×8、8×16或8×8的分區,且8×8的寫碼單元可分割為8×8、8×4、4×8或4×4的分區。
在視訊資料310中,解析度為1920×1080,寫碼單元的最大大小為64,且最大深度為2。在視訊資料320中,解析度為1920×1080,寫碼單元的最大大小為64,且最大深度為3。在視訊資料330中,解析度為352×288,寫碼單元的最大大小為16,且最大深度為1。圖10所示的最大深度表示自LCU至最小解碼單元的總分割次數。
若解析度高或資料量大,則寫碼單元的最大大小可為大的,以便不僅提高編碼效率而且準確地反映影像的特性。因此,具有高於視訊資料330的解析度的視訊資料310以及320的寫碼單元的最大大小可為64。
由於視訊資料310的最大深度為2,因此視訊資料310的寫碼單元315可包含長軸大小為64的LCU,以及長軸大小為32以及16的寫碼單元,此是因為深度藉由分割LCU兩次而加深為兩層。由於視訊資料330的最大深度為1,因此視訊資料330的寫碼單元335可包含長軸大小為16的LCU,以及長軸大小為8的寫碼單元,此是因為深度藉由分割LCU一次而加深為一層。
由於視訊資料320的最大深度為3,因此視訊資料320的寫碼單元325可包含長軸大小為64的LCU,以及長軸大小為32、16以及8的寫碼單元,此是因為深度藉由分割LCU三次而加深為三層。隨著深度加深,可精確地表達詳細資訊。
圖11為根據一或多個實施例的基於寫碼單元的影像編碼器400的方塊圖。
影像編碼器400執行視訊編碼裝置100的寫碼單元判定器120的操作以對影像資料做編碼。換言之,畫面內預測器410對當前畫面405中的處於畫面內模式中的寫碼單元執行畫面內預測,且運動估計器420以及運動補償器425分別藉由使用當前畫面405以及參考畫面495而對當前畫面405中的處於畫面間模式中的寫碼單元執行畫面間估計以及運動補償。
自畫面內預測器410、運動估計器420以及運動補償器425輸出的資料經由變換器430以及量化器440作為經量化的變換係數而輸出。經量化的變換係數經由解量化器460以及逆變換器470而重新建構為空間域中的資料,且空間域中的經重新建構的資料在經由解區塊濾波器480以及偏移調整器490後處理之後作為參考畫面495輸出。經量化的變換係數可經由熵編碼器450作為位元串流455輸出。
為了使影像編碼器400應用於視訊編碼裝置100中,影像編碼器400的所有部件(亦即,畫面內預測器410、運動估計器420、運動補償器425、變換器430、量化器440、熵編碼器450、解量化器460、逆變換器470、解區塊濾波器480以及偏移調整器490)在考慮每一LCU的最大深度的同時基於具有樹狀結構的寫碼單元中的每一寫碼單元來執行操作。
具體言之,畫面內預測器410、運動估計器420以及運動補償器425在考慮當前LCU的最大大小以及最大深度的同時判定具有樹狀結構的寫碼單元中的每一寫碼單元的分區以及預測模式,且變換器430判定具有樹狀結構的寫碼單元中的每一寫碼單元中的變換單元的大小。
具體言之,在運動估計器420使用長期參考畫面來執行畫面間預測時,長期參考畫面的POC資訊可作為長期參考索引而輸出。熵編碼器450可將長期參考畫面的POC資訊的LSB資訊作為長期參考索引來編碼以及輸出。可將用於當前片段的預測單元的長期參考畫面的POC資訊的LSB資訊包含於片段標頭中,且接著進行傳輸。
偏移調整器490可根據參考畫面495的每一LCU的邊緣類型(或級區類型)來對像素分類,可判定邊緣方向(或開始級區位置),且可判定每一種類中所包含的經重新建構的像素的平均誤差值。關於每一LCU,可對SAO合併資訊、SAO類型以及偏移值做編碼且用信號發送。
熵編碼器450可對SAO參數執行CABAC編碼,所述SAO參數包含用於SAO調整的SAO合併資訊、SAO類型資訊以及偏移值。舉例而言,熵編碼器450可藉由使用一個內文模型而對SAO類型資訊的第一位元執行CABAC編碼,且在旁路模式中對SAO類型資訊的其他位元執行CABAC編碼。兩個內文模型可用於偏移值。一個內文模型可用於左側SAO合併資訊以及上方SAO合併資訊中的每一者。因此,總計五個內文模型可用於對SAO參數執行CABAC編碼。
圖12為根據一或多個實施例的基於寫碼單元的影像解碼器500的方塊圖。
剖析器510自位元串流505剖析待解碼的經編碼的影像資料以及解碼所需的關於編碼的資訊。經編碼的影像資料經由熵解碼器520以及解量化器530作為經逆量化的資料而輸出,且經逆量化的資料經由逆變換器540而重新建構為空間域中的影像資料。
畫面內預測器550關於空間域中的影像資料對處於畫面內模式中的寫碼單元執行畫面內預測,且運動補償器560藉由使用參考畫面585對處於畫面間模式中的寫碼單元執行運動補償。
通過畫面內預測器550以及運動補償器560的空間域中的影像資料可在經由解區塊濾波器570以及偏移調整器580後處理之後作為經重新建構的畫面595輸出。且,經由解區塊濾波器570以及偏移調整器580後處理的影像資料可作為參考畫面585輸出。
為了在視訊解碼裝置200的影像資料解碼器230中對影像資料做解碼,影像解碼器500可執行在剖析器510之後執行的操作。
為了使影像解碼器500應用於視訊解碼裝置200中,影像解碼器500的所有部件(亦即,剖析器510、熵解碼器520、解量化器530、逆變換器540、畫面內預測器550、運動補償器560、解區塊濾波器570以及偏移調整器580)針對每一LCU基於具有樹狀結構的寫碼單元來執行操作。
具體言之,畫面內預測550以及運動補償器560針對具有樹狀結構的寫碼單元中的每一者基於分區以及預測模式而執行操作,且逆變換器540針對每一寫碼單元基於變換單元的大小而執行操作。
熵解碼器520可對SAO參數執行CABAC解碼,且自SAO參數剖析用於SAO調整的SAO合併資訊、SAO類型資訊以及偏移值。舉例而言,熵解碼器520可藉由使用一個內文模型而對SAO類型資訊的第一位元執行CABAC解碼,且在旁路模式中對SAO類型資訊的其他位元執行CABAC解碼。兩個內文模型可用於偏移值。一個內文模型可用於左側SAO合併資訊以及上方SAO合併資訊中的每一者。因此,總計五個內文模型可用於對SAO參數執行CABAC解碼。
偏移調整器580可自位元串流提取LCU的SAO參數。基於當前LCU的SAO參數中的SAO合併資訊,可重新建構當前LCU的SAO參數,當前LCU的SAO參數與鄰近LCU的SAO參數相同。藉由使用當前LCU的SAO參數中的SAO類型以及偏移值,可按照對應於根據邊緣類型或級區類型的種類的偏移值來調整經重新建構的畫面595的LCU的經重新建構的像素中的每一者。
圖13為說明根據一或多個實施例的根據深度的較深寫碼單元以及分區的圖式。
視訊編碼裝置100以及視訊解碼裝置200使用階層式寫碼單元以便考慮影像的特性。可根據影像的特性來自適應地判定寫碼單元的最大高度、最大寬度以及最大深度,或可由使用者不同地進行設定。可根據寫碼單元的預定最大大小判定根據深度的較深寫碼單元的大小。
根據一或多個實施例,在寫碼單元的階層式結構600中,寫碼單元的最大高度以及最大寬度各為64,且最大深度為3。在此狀況下,最大深度指寫碼單元自LCU分割至SCU的總分割次數。由於深度沿著階層式結構600的垂直軸加深,因此將較深寫碼單元的高度以及寬度各自分割。且,沿著階層式結構600的水平軸展示作為用於每一較深寫碼單元的預測編碼的基礎的預測單元以及分區。
換言之,寫碼單元610為階層式結構600中的LCU,其中深度為0且大小(亦即,高度乘寬度)為64×64。深度沿著垂直軸而加深,且存在大小為32×32且深度為1的寫碼單元620、大小為16×16且深度為2的寫碼單元630以及大小為8×8且深度為3的寫碼單元640。大小為8×8且深度為3的寫碼單元640為SCU。
寫碼單元的預測單元以及分區根據每一深度沿著水平軸而配置。換言之,若大小為64×64且深度為0的寫碼單元610為預測單元,則預測單元可分割為包含於編碼單元610中的分區,亦即,大小為64×64的分區610、大小為64×32的分區612、大小為32×64的分區614或大小為32×32的分區616。
類似地,大小為32×32且深度為1的寫碼單元620的預測單元可分割為包含於寫碼單元620中的分區,亦即,大小為32×32的分區620、大小為32×16的分區622、大小為16×32的分區624以及大小為16×16的分區626。
類似地,大小為16×16且深度為2的寫碼單元630的預測單元可分割為包含於寫碼單元630中的分區,亦即,包含於寫碼單元中的大小為16×16的分區630、大小為16×8的分區632、大小為8×16的分區634以及大小為8×8的分區636。
類似地,大小為8×8且深度為3的寫碼單元640的預測單元可分割為包含於寫碼單元640中的分區,亦即,包含於寫碼單元中的大小為8×8的分區640、大小為8×4的分區642、大小為4×8的分區644以及大小為4×4的分區646。
為了判定構成LCU 610的寫碼單元的至少一個經寫碼的深度,視訊編碼裝置100的寫碼單元判定器120對包含於LCU 610中的對應於每一深度的寫碼單元執行編碼。
隨著深度加深,包含相同範圍中的資料以及相同大小的根據深度的較深寫碼單元的數目增大。舉例而言,需要對應於深度2的四個寫碼單元來涵蓋包含於對應於深度1的一個寫碼單元中的資料。因此,為了比較根據深度的相同資料的編碼結果,將對應於深度1的寫碼單元以及對應於深度2的四個寫碼單元各自編碼。
為了針對深度中的當前深度執行編碼,沿著階層式結構600的水平軸,可藉由針對對應於當前深度的寫碼單元中的每一預測單元執行編碼而針對當前深度選擇最小編碼誤差。或者,可藉由比較根據深度的最小編碼誤差、藉由隨著深度沿著階層式結構600的垂直軸加深而針對每一深度執行編碼來搜尋最小編碼誤差。可選擇寫碼單元610中具有最小編碼誤差的深度以及分區作為寫碼單元610的經寫碼的深度以及分區類型。
圖14為用於描述根據一或多個實施例的寫碼單元710與變換單元720之間的關係的圖式。
視訊編碼裝置100或視訊解碼裝置200針對每一LCU根據具有小於等於LCU的大小的寫碼單元來對影像做編碼或解碼。可基於不大於對應寫碼單元的資料單元而選擇在編碼期間用於變換的變換單元的大小。
舉例而言,在視訊編碼裝置100或視訊解碼裝置200中,若寫碼單元710的大小為64×64,則可藉由使用大小為32×32的變換單元720來執行變換。
且,可藉由對大小為小於64×64的32×32、16×16、8×8以及4×4的變換單元中的每一者執行變換而對大小為64×64的寫碼單元710的資料做編碼,且接著可選擇具有最小寫碼誤差的變換單元。
圖15為用於描述根據一或多個實施例的對應於經寫碼的深度的寫碼單元的編碼資訊的圖式。
視訊編碼裝置100的輸出器130可對關於分區類型的資訊800、關於預測模式的資訊810,以及關於對應於經寫碼的深度的每一寫碼單元的變換單元的大小的資訊820做編碼且作為關於編碼模式的資訊而傳輸。
資訊800指示關於藉由分割當前寫碼單元的預測單元而獲得的分區的形狀的資訊,其中分區為用於當前寫碼單元的預測編碼的資料單元。舉例而言,大小為2N×2N的當前寫碼單元CU_0可分割為大小為2N×2N的分區802、大小為2N×N的分區804、大小為N×2N的分區806以及大小為N×N的分區808中的任一者。此處,關於分區類型的資訊800設定為指示大小為2N×N的分區804、大小為N×2N的分區806以及大小為N×N的分區808中的一者。
資訊810指示每一分區的預測模式。舉例而言,資訊810可指示對由資訊800指示的分區執行的預測編碼的模式,亦即,畫面內模式812、畫面間模式814或跳過模式816。
資訊820指示待基於何時對當前寫碼單元執行變換的變換單元。舉例而言,變換單元可為第一畫面內變換單元822、第二畫面內變換單元824、第一畫面間變換單元826或第二畫面間變換單元828。
根據每一較深寫碼單元,視訊解碼裝置200的影像資料以及編碼資訊提取器220可提取且使用資訊800、810以及820以用於解碼。
圖16為根據一或多個實施例的根據深度的較深寫碼單元的圖式。
分割資訊可用以指示深度的改變。分割資訊指示當前深度的寫碼單元是否分割為較下層深度的寫碼單元。
用於深度為0且大小為2N_0×2N_0的寫碼單元900的預測編碼的預測單元910可包含大小為2N_0×2N_0的分區類型912、大小為2N_0×N_0的分區類型914、大小為N_0×2N_0的分區類型916以及大小為N_0×N_0的分區類型918的分區。圖16僅說明藉由對稱地分割預測單元910而獲得的分區類型912至918,但分區類型不限於此,且預測單元910的分區可包含非對稱分區、具有預定形狀的分區以及具有幾何形狀的分區。
根據每一分區類型,對大小為2N_0×2N_0的一個分區、大小為2N_0×N_0的兩個分區、大小為N_0×2N_0的兩個分區以及大小為N_0×N_0的四個分區重複地執行預測編碼。可對大小為2N_0×2N_0、N_0×2N_0、2N_0×N_0以及N_0×N_0的分區執行在畫面內模式以及畫面間模式中的預測編碼。僅對大小為2N_0×2N_0的分區執行在跳過模式中的預測編碼。
若編碼誤差在分區類型912至916中的一者中最小,則預測單元910可能不分割為較下層深度。
若編碼誤差在分區類型918中最小,則深度自0改變為1以在操作920中分割分區類型918,且對深度為2且大小為N_0×N_0的寫碼單元930重複地執行編碼以搜尋最小編碼誤差。
用於深度為1且大小為2N_1×2N_1(=N_0×N_0)的寫碼單元930的預測編碼的預測單元940可包含大小為2N_1×2N_1的分區類型942、大小為2N_1×N_1的分區類型944、大小為N_1×2N_1的分區類型946以及大小為N_1×N_1的分區類型948的分區。
若編碼誤差在分區類型948中最小,則深度自1改變為2以在操作950中分割分區類型948,且對深度為2且大小為N_2×N_2的寫碼單元960重複地執行編碼以搜尋最小編碼誤差。
當最大深度為d時,可執行根據每一深度的分割操作直至深度變為d-1時,且可對分割資訊做編碼直至深度為0至d-2中的一者時。換言之,當執行編碼直至在對應於深度d-2的寫碼單元在操作970中分割之後深度為d-1時,用於深度為d-1且大小為2N_(d-1)×2N_(d-1)的寫碼單元980的預測編碼的預測單元990可包含大小為2N_(d-1)×2N_(d-1)的分區類型992、大小為2N_(d-1)×N_(d-1)的分區類型994、大小為N_(d-1)×2N_(d-1)的分區類型996以及大小為N_(d-1)×N_(d-1)的分區類型998的分區。
可對分區類型992至998中的大小為2N_(d-1)×2N_(d-1)的一個分區、大小為2N_(d-1)×N_(d-1)的兩個分區、大小為N_(d-1)×2N_(d-1)的兩個分區、大小為N_(d-1)×N_(d-1)的四個分區重複地執行預測編碼以搜尋具有最小編碼誤差的分區類型。
即使當分區類型998具有最小編碼誤差時,由於最大深度為d,因此不再將深度為d-1的寫碼單元CU_(d-1)分割為較下層深度,且將構成當前LCU 900的寫碼單元的經寫碼的深度判定為d-1,且可將當前LCU 900的分區類型判定為N_(d-1)×N_(d-1)。且,由於最大深度為d且具有最下層深度d-1的SCU 980不再分割為較下層深度,因此不設定用於SCU 980的分割資訊。
資料單元999可為當前LCU的「最小單元」。根據一或多個實施例的最小單元可為藉由將SCU 980分割為4份而獲得的正方形資料單元。藉由重複地執行編碼,視訊編碼裝置100可藉由根據寫碼單元900的深度比較編碼誤差而選擇具有最小編碼誤差的深度以判定經寫碼的深度,且將對應分區類型以及預測模式設定為經寫碼的深度的編碼模式。
因而,在所有深度1至d中比較根據深度的最小編碼誤差,且可將具有最小編碼誤差的深度判定為經寫碼的深度。可對經寫碼的深度、預測單元的分區類型以及預測模式做編碼且作為關於編碼模式的資訊而傳輸。且,由於寫碼單元自深度0分割為經寫碼的深度,因此僅經寫碼的深度的分割資訊設定為0,且排除經寫碼的深度的深度的分割資訊設定為1。
視訊解碼裝置200的影像資料以及編碼資訊提取器220可提取且使用關於寫碼單元900的經寫碼的深度以及預測單元的資訊以對分區912做解碼。視訊解碼裝置200可藉由使用根據深度的分割資訊而將分割資訊為0的深度判定為經寫碼的深度,且使用關於對應深度的編碼模式的資訊以用於解碼。
圖17至圖19為用於描述根據一或多個實施例的寫碼單元1010、預測單元1060與變換單元1070之間的關係的圖式。
寫碼單元1010為在LCU中對應於由視訊編碼裝置100判定的經寫碼的深度的具有樹狀結構的寫碼單元。預測單元1060為寫碼單元1010中的每一者的預測單元的分區,且變換單元1070為寫碼單元1010中的每一者的變換單元。
當LCU的深度在寫碼單元1010中為0時,寫碼單元1012以及1054的深度為1,寫碼單元1014、1016、1018、1028、1050以及1052的深度為2,寫碼單元1020、1022、1024、1026、1030、1032以及1048的深度為3,且寫碼單元1040、1042、1044以及1046的深度為4。
在預測單元1060中,藉由在編碼單元1010中分割寫碼單元而獲得一些編碼單元1014、1016、1022、1032、1048、1050、1052以及1054。換言之,寫碼單元1014、1022、1050以及1054中的分區類型的大小為2N×N,寫碼單元1016、1048以及1052中的分區類型的大小為N×2N,且寫碼單元1032的分區類型的大小為N×N。寫碼單元1010的預測單元以及分區小於等於每一寫碼單元。
對小於寫碼單元1052的資料單元中的變換單元1070中的寫碼單元1052的影像資料執行變換或逆變換。且,變換單元1070中的寫碼單元1014、1016、1022、1032、1048、1050以及1052的大小以及形狀不同於預測單元1060中的寫碼單元。換言之,視訊編碼裝置100以及視訊解碼裝置200可對同一寫碼單元中的資料單元個別地執行畫面內預測、運動估計、運動補償、變換以及逆變換。
因此,對在LCU的每一區域中具有階層式結構的寫碼單元中的每一者以遞迴方式執行編碼以判定最佳寫碼單元,且因此可獲得具有遞迴樹狀結構的寫碼單元。編碼資訊可包含關於寫碼單元的分割資訊、關於分區類型的資訊、關於預測模式的資訊,以及關於變換單元的大小的資訊。表1展示可由視訊編碼裝置100以及視訊解碼裝置200設定的編碼資訊。 表1
視訊編碼裝置100的輸出器130可輸出關於具有樹狀結構的寫碼單元的編碼資訊,且視訊解碼裝置200的影像資料以及編碼資訊提取器220可自所接收的位元串流提取關於具有樹狀結構的寫碼單元的編碼資訊。
分割資訊指示當前寫碼單元是否分割為較下層深度的寫碼單元。若當前深度d的分割資訊為0,則當前寫碼單元不再分割為較下層深度的深度為經寫碼的深度,且因此可針對經寫碼的深度而定義關於分區類型、預測模式以及變換單元的大小的資訊。若根據分割資訊進一步分割當前寫碼單元,則對較下層深度的四個分割寫碼單元獨立地執行編碼。
預測模式可為畫面內模式、畫面間模式以及跳過模式中的一者。可在所有分區類型中定義畫面內模式以及畫面間模式,且僅在大小為2N×2N的分區類型中定義跳過模式。
關於分區類型的資訊可指示:大小為2N×2N、2N×N、N×2N以及N×N的對稱分區類型,其是藉由對稱地分割預測單元的高度或寬度而獲得;以及大小為2N×nU、2N×nD、nL×2N以及nR×2N的非對稱分區類型,其是藉由非對稱地分割預測單元的高度或寬度而獲得。可藉由以1:3以及3:1分割預測單元的高度而分別獲得大小為2N×nU以及2N×nD的非對稱分區類型,且可藉由以1:3以及3:1分割預測單元的寬度而分別獲得大小為nL×2N以及nR×2N的非對稱分區類型。
變換單元的大小可在畫面內模式中設定為兩種類型且在畫面間模式中設定為兩種類型。換言之,若變換單元的分割資訊為0,則變換單元的大小可為2N×2N,此為當前寫碼單元的大小。若變換單元的分割資訊為1,則可藉由分割當前寫碼單元而獲得變換單元。且,若大小為2N×2N的當前寫碼單元的分區類型為對稱分區類型,則變換單元的大小可為N×N,且若當前寫碼單元的分區類型為非對稱分區類型,則變換單元的大小可為N/2×N/2。
關於具有樹狀結構的寫碼單元的編碼資訊可包含對應於經寫碼的深度的寫碼單元、預測單元以及最小單元中的至少一者。對應於經寫碼的深度的寫碼單元可包含含有相同編碼資訊的預測單元以及最小單元中的至少一者。
因此,藉由比較鄰近資料單元的編碼資訊而判定鄰近資料單元是否包含於對應於經寫碼的深度的同一寫碼單元中。且,藉由使用資料單元的編碼資訊而判定對應於經寫碼的深度的對應寫碼單元,且因此可判定LCU中的經寫碼的深度的分佈。
因此,若基於鄰近資料單元的編碼資訊而預測當前寫碼單元,則可直接參考且使用鄰近於當前寫碼單元的較深寫碼單元中的資料單元的編碼資訊。
或者,若基於鄰近資料單元的編碼資訊而預測當前寫碼單元,則使用資料單元的經編碼的資訊而搜尋鄰近於當前寫碼單元的資料單元,且可參考所搜尋的鄰近寫碼單元以用於預測當前寫碼單元。
圖20為用於描述根據表1的編碼模式資訊的寫碼單元、預測單元與變換單元之間的關係的圖式。
LCU 1300包含經寫碼的深度的寫碼單元1302、1304、1306、1312、1314、1316以及1318。此處,由於寫碼單元1318為經寫碼的深度的寫碼單元,因此分割資訊可設定為0。關於大小為2N×2N的寫碼單元1318的分區類型的資訊可設定為大小為2N×2N的分區類型1322、大小為2N×N的分區類型1324、大小為N×2N的分區類型1326、大小為N×N的分區類型1328、大小為2N×nU的分區類型1332、大小為2N×nD的分區類型1334、大小為nL×2N的分區類型1336以及大小為nR×2N的分區類型1338中的一者。
變換單元的分割資訊(TU大小旗標)為一種類型的變換索引。對應於變換索引的變換單元的大小可根據寫碼單元的預測單元類型或分區類型而改變。
舉例而言,在分區類型設定為對稱(亦即,分區類型1322、1324、1326或1328)時,若變換單元的TU大小旗標為0,則設定大小為2N×2N的變換單元1342,且若TU大小旗標為1,則設定大小為N×N的變換單元1344。
當分區類型設定為非對稱(亦即,分區類型1332、1334、1336或1338)時,若TU大小旗標為0,則設定大小為2N×2N的變換單元1352,且若TU大小旗標為1,則設定大小為N/2×N/2的變換單元1354。
參看圖20,TU大小旗標為具有值0或1的旗標,但TU大小旗標不限於1個位元,且變換單元可在TU大小旗標自0增大時階層式分割為具有樹狀結構。變換單元的分割資訊(TU大小旗標)可為變換索引的實例。
根據一或多個實施例,在此狀況下,藉由將變換單元的TU大小旗標與變換單元的最大大小及最小大小一起使用,可表達已實際使用的變換單元的大小。視訊編碼裝置100能夠對最大變換單元大小資訊、最小變換單元大小資訊以及最大TU大小旗標做編碼。對最大變換單元大小資訊、最小變換單元大小資訊以及最大TU大小旗標做編碼的結果可插入至SPS中。視訊解碼裝置200可藉由使用最大變換單元大小資訊、最小變換單元大小資訊以及最大TU大小旗標來對視訊做解碼。
舉例而言,(a)若當前寫碼單元的大小為64×64且最大變換單元大小為32×32,則(a-1)當TU大小旗標為0時,變換單元的大小可為32×32,(a-2)當TU大小旗標為1時,變換單元的大小可為16×16,且(a-3)當TU大小旗標為2時,變換單元的大小可為8×8。
作為另一實例,(b)若當前寫碼單元的大小為32×32且最小變換單元大小為32×32,則(b-1)當TU大小旗標為0時,變換單元的大小可為32×32。此時,TU大小旗標無法設定為除0之外的值,此是因為變換單元的大小無法小於32×32。
作為另一實例,(c)若當前寫碼單元的大小為64×64且最大TU大小旗標為1,則TU大小旗標可為0或1。此時,TU大小旗標無法設定為除0或1之外的值。
因此,若定義最大TU大小旗標為「MaxTransformSizeIndex」、最小變換單元大小為「MinTransformSize」且在TU大小旗標為0時的變換單元大小為「RootTuSize」,則可在當前寫碼單元中判定的當前最小變換單元大小「CurrMinTuSize」可由方程式(1)來定義: CurrMinTuSize = max (MinTransformSize, RootTuSize/(2^MaxTransformSizeIndex)) ... (1)
與可在當前寫碼單元中判定的當前最小變換單元大小「CurrMinTuSize」相比,在TU大小旗標為0時的變換單元大小「RootTuSize」可表示可在系統中選擇的最大變換單元大小。在方程式(1)中,「RootTuSize/(2^MaxTransformSizeIndex)」表示在TU大小旗標為0時的變換單元大小「RootTuSize」分割對應於最大TU大小旗標的次數時的變換單元大小,且「MinTransformSize」表示最小變換大小。因此,「RootTuSize/(2^MaxTransformSizeIndex)」以及「MinTransformSize」中的較小值可為可在當前寫碼單元中判定的當前最小變換單元大小「CurrMinTuSize」。
根據一或多個實施例,最大變換單元大小RootTuSize可根據預測模式的類型而變化。
舉例而言,若當前預測模式為畫面間模式,則可藉由使用下文方程式(2)來判定「RootTuSize」。在方程式(2)中,「MaxTransformSize」表示最大變換單元大小,且「PUSize」表示當前預測單元大小。 RootTuSize = min(MaxTransformSize, PUSize) ......... (2)
亦即,若當前預測模式為畫面間模式,則在TU大小旗標為0時的變換單元大小「RootTuSize」可為最大變換單元大小以及當前預測單元大小中的較小值。
若當前分區單元的預測模式為畫面內模式,則可藉由使用下文方程式(3)來判定「RootTuSize」。在方程式(3)中,「PartitionSize」表示當前分區單元的大小。 RootTuSize = min(MaxTransformSize, PartitionSize) ........ (3)
亦即,若當前預測模式為畫面內模式,則在TU大小旗標為0時的變換單元大小「RootTuSize」可為最大變換單元大小以及當前分區單元的大小中的較小值。
然而,根據分區單元的預測模式的類型而變化的當前最大變換單元大小「RootTuSize」僅為一實例,且實施例不限於此。
根據如參看圖8至圖20而描述的基於具有樹狀結構的寫碼單元的視訊編碼方法,針對樹狀結構的每一寫碼單元來對空間域的影像資料做編碼。根據基於具有樹狀結構的寫碼單元的視訊解碼方法,針對每一LCU來執行解碼以重新建構空間域的影像資料。因此,可重新建構圖像以及視訊(其為圖像序列)。經重新建構的視訊可由再生裝置再生,儲存於儲存媒體中或經由網路而傳輸。
且,可關於每一圖像、每一片段、每一LCU、具有樹狀結構的寫碼單元中的每一者、寫碼單元中的每一預測單元或寫碼單元的每一變換單元來用信號發送SAO參數。舉例而言,可藉由使用基於所接收的SAO參數而重新建構的偏移值來調整每一LCU的經重新建構的像素的像素值,且因此,可重新建構在原始區塊與LCU之間具有最小化的誤差的LCU。
本發明可寫為電腦程式,且可在使用電腦可讀記錄媒體執行程式的通用數位電腦中實施。電腦可讀記錄媒體的實例包含磁性儲存媒體(例如,ROM、軟碟、硬碟等)以及光學記錄媒體(例如,CD-ROM或DVD)。
儘管已參考一或多個實施例特定地展示且描述了實施例,但一般熟習此項技術者將理解,在不脫離如由所附申請專利範圍界定的根據實施例的精神以及範疇的情況下,可對本發明進行形式以及細節上的各種改變。
儘管已參考例示性實施例特定地展示且描述了一或多個實施例,但一般熟習此項技術者將理解,在不脫離如由所附申請專利範圍界定的本發明的精神以及範疇的情況下,可對本發明進行形式以及細節上的各種改變。例示性實施例應僅在描述性意義上考慮且並非用於限制目的。因此,本發明的範疇並非由本發明的詳細描述界定而是由隨附申請專利範圍界定,且在此範疇內的所有差異將解釋為包含於一或多個實施例中。
為便於描述,上文參看圖1A至圖20所述的根據樣本偏移的調整的視訊編碼方法將稱為「根據一或多個實施例的視訊編碼方法」。此外,上文參看圖1A至圖20所述的根據樣本偏移的調整的視訊解碼方法將稱為「根據一或多個實施例的視訊解碼方法」。
且,上文參看圖1A至圖20所述的包含視訊編碼裝置10、視訊編碼裝置100或影像編碼器400的視訊編碼裝置將稱為「根據一或多個實施例的視訊編碼裝置」。此外,上文參看圖1A至圖20所述的包含視訊解碼裝置20、視訊解碼裝置200或影像解碼器500的視訊解碼裝置將稱為「根據一或多個實施例的視訊解碼裝置」。
現將詳細描述根據一或多個實施例的儲存程式的電腦可讀記錄媒體(例如,光碟26000)。
圖21為根據一或多個實施例的儲存程式的光碟26000的實體結構的圖式。光碟26000(其為儲存媒體)可為硬碟機(hard drive)、緊密光碟-唯讀記憶體(compact disc-read only memory, CD-ROM)光碟、藍光光碟(Blu-ray disc)或數位多功能光碟(digital versatile disc, DVD)。光碟26000包含多個同心磁軌Tr,其各自劃分為在光碟26000的圓周方向上的具體數目的磁區Se。在光碟26000的具體區域中,可指派並儲存執行上述量化參數判定方法、視訊編碼方法以及視訊解碼方法的程式。
現將參看圖22描述電腦系統,所述電腦系統是使用儲存媒體來體現的,所述儲存媒體儲存用於執行如上所述的視訊編碼方法以及視訊解碼方法的程式。
圖22為藉由使用光碟26000而記錄以及讀取程式的光碟機26800的圖式。電腦系統26700可經由光碟機26800而在光碟26000中儲存程式,所述程式執行根據一或多個實施例的視訊編碼方法以及視訊解碼方法中的至少一者。為了在電腦系統26700中執行儲存於光碟26000中的程式,可藉由使用光碟機26700而自光碟26000讀取程式,並將其傳輸至電腦系統26700。
執行根據一或多個實施例的視訊編碼方法以及視訊解碼方法中的至少一者的程式可不僅儲存於圖21或圖22所說明的光碟26000中,而且儲存於記憶卡、ROM卡匣(ROM cassette)或固態磁碟(solid state drive, SSD)中。
下文將描述應用了上述視訊編碼方法以及視訊解碼方法的系統。
圖23為提供內容散佈服務的內容供應系統11000的整體結構的圖式。通信系統的服務區域劃分為預定大小的小區,且無線基地台11700、11800、11900以及12000分別安裝於此等小區中。
內容供應系統11000包含多個獨立元件。舉例而言,諸如電腦12100、個人數位助理(personal digital assistant, PDA)12200、視訊攝影機12300以及行動電話12500的所述多個獨立元件經由網際網路服務提供商11200、通信網路11400以及無線基地台11700、11800、11900以及12000而連接至網際網路11100。
然而,內容供應系統11000不限於如圖24所說明的內容供應系統,且多個元件可選擇性連接至所述內容供應系統。多個獨立元件可直接連接至通信網路11400,而不是經由無線基地台11700、11800、11900以及12000來連接。
視訊攝影機12300為能夠攝取視訊影像的成像元件,例如,數位視訊攝影機。行動電話12500可使用各種協定中的至少一種通信方法,例如,個人數位通信(Personal Digital Communications, PDC)、分碼多重存取(Code Division Multiple Access, CDMA)、寬頻分碼多重存取(Wideband-Code Division Multiple Access, W-CDMA)、全球行動通信系統(Global System for Mobile Communications, GSM)以及個人手持電話系統(Personal Handyphone System, PHS)。
視訊攝影機12300可經由無線基地台11900以及通信網路11400而連接至串流伺服器11300。串流伺服器11300允許經由視訊攝影機12300自使用者接收的內容經由即時廣播(real-time broadcast)而串流傳輸。可使用視訊攝影機12300或串流伺服器11300來對自視訊攝影機12300接收的內容做編碼。可將由視訊攝影機12300攝取的視訊資料經由電腦12100傳輸至串流伺服器11300。
亦可將由相機12600攝取的視訊資料經由電腦12100傳輸至串流伺服器11300。相機12600為類似於數位相機能夠攝取靜態影像與視訊影像兩者的成像元件。可使用相機12600或電腦12100來對由相機12600攝取的視訊資料做編碼。執行視訊編碼以及解碼的軟體可儲存於可由電腦12100存取的電腦可讀記錄媒體中,電腦可讀記錄媒體例如為CD-ROM光碟、軟碟(floppy disc)、硬碟機、SSD或記憶卡。
若視訊資料是由內建於行動電話12500中的相機攝取,則可自行動電話12500接收視訊資料。
視訊資料亦可由安裝於視訊攝影機12300、行動電話12500或相機12600中的大型積體電路(large scale integrated circuit, LSI)系統編碼。
內容供應系統11000可對由使用者使用視訊攝影機12300、相機12600、行動電話12500或另一成像元件記錄的內容資料(例如,在音樂會期間記錄的內容)做編碼,且將經編碼的內容資料傳輸至串流伺服器11300。串流伺服器11300可將經編碼的內容資料以串流內容的類型傳輸至請求內容資料的其他用戶端。
用戶端為能夠對經編碼的內容資料做解碼的元件,例如,電腦12100、PDA 12200、視訊攝影機12300或行動電話12500。因此,內容供應系統11000允許用戶端接收並再生經編碼的內容資料。且,內容供應系統11000允許用戶端接收經編碼的內容資料並即時地對經編碼的內容資料做解碼以及再生,藉此實現個人廣播。
內容供應系統11000中所包含的多個獨立元件的編碼以及解碼操作可類似於根據一或多個實施例的視訊編碼裝置以及視訊解碼裝置的編碼以及解碼操作。
現將參看圖24及圖25更詳細地描述根據一或多個實施例的內容供應系統11000中所包含的行動電話12500。
圖24說明根據一或多個實施例的應用了視訊編碼方法以及視訊解碼方法的行動電話12500的外部結構。行動電話12500可為智慧型電話,其功能不受限制,且其大量功能可被改變或擴展。
行動電話12500包含內部天線12510,可經由內部天線12510而與圖21的無線基地台12000交換射頻(radio-frequency, RF)信號,且行動電話12500包含用於顯示由相機12530攝取的影像或經由天線12510而接收並被解碼的影像的顯示螢幕12520,例如,液晶顯示器(liquid crystal display, LCD)或有機發光二極體(organic light-emitting diode, OLED)螢幕。行動電話12500包含操作面板12540,其包含控制按鈕以及觸控面板。若顯示螢幕12520為觸控螢幕,則操作面板12540更包含顯示螢幕12520的觸摸感測面板。行動電話12500包含用於輸出語音以及聲音的揚聲器12580或另一類型的聲音輸出器,以及用於輸入語音以及聲音的麥克風12550或另一類型的聲音輸入器。行動電話12500更包含相機12530(諸如,電荷耦合元件(charge-coupled device, CCD)相機)以攝取視訊以及靜態影像。行動電話12500可更包含:儲存媒體12570,其用於儲存經編碼/經解碼的資料,例如,由相機12530攝取、經由電子郵件而接收或根據各種方式而獲得的視訊或靜態影像;以及插槽12560,儲存媒體12570經由插槽12560而裝載至行動電話12500中。儲存媒體12570可為快閃記憶體,例如,安全數位(secure digital, SD)卡或包含於塑膠外殼中的電可抹除可程式化唯讀記憶體(electrically erasable and programmable read only memory, EEPROM)。
圖25說明根據一或多個實施例的行動電話12500的內部結構。為了系統地控制包含顯示螢幕12520以及操作面板12540的行動電話12500的多個部分,電力供應電路12700、操作輸入控制器12640、影像編碼器12720、相機介面12630、LCD控制器12620、影像解碼器12690、多工器/解多工器12680、記錄器/讀取器12670、調變器/解調變器12660以及聲音處理器12650經由同步匯流排12730而連接至中央控制器12710。
若使用者操作電源按鈕且自「電源關閉」狀態設定至「電源開啟」狀態,則電力供應電路12700將電力自電池組(battery pack)供應至行動電話12500的所有部分,藉此將行動電話12500設定於操作模式。
中央控制器12710包含中央處理單元(central processing unit, CPU)、ROM以及RAM。
雖然行動電話12500將通信資料傳輸至外部,但數位資料在中央控制器12710的控制下由行動電話12500產生。舉例而言,聲音處理器12650可產生數位聲音信號,影像編碼器12720可產生數位影像信號,且訊息的文字資料可經由操作面板12540以及操作輸入控制器12640而產生。在數位信號在中央控制器12710的控制下傳輸至調變器/解調變器12660時,調變器/解調變器12660調變數位信號的頻帶,且通信電路12610對經頻帶調變的數位聲音信號執行數位至類比轉換(DAC)以及頻率轉換。自通信電路12610輸出的傳輸信號可經由天線12510而傳輸至語音通信基地台或無線基地台12000。
舉例而言,在行動電話12500處於交談模式時,經由麥克風12550而獲得的聲音信號在中央控制器12710的控制下由聲音處理器12650變換為數位聲音信號。數位聲音信號可經由調變器/解調變器12660以及通信電路12610而變換為變換信號,且可經由天線12510而傳輸。
當在資料通信模式中傳輸文字訊息(例如,電子郵件)時,文字訊息的文字資料經由操作面板12540而輸入,且經由操作輸入控制器12640而傳輸至中央控制器12710。在中央控制器12710的控制下,文字資料經由調變器/解調變器12660以及通信電路12610變換為傳輸信號,且經由天線12510而傳輸至無線基地台12000。
為了在資料通信模式中傳輸影像資料,由相機12530攝取的影像資料經由相機介面12630而提供至影像編碼器12720。所攝取的影像資料可經由相機介面12630以及LCD控制器12620直接顯示在顯示螢幕12520上。
影像編碼器12720的結構可對應於根據一或多個實施例的上述視訊編碼方法的視訊編碼裝置的結構。影像編碼器12720可基於根據一或多個實施例的上述視訊編碼方法而將自相機12530接收的影像資料變換為經壓縮且編碼的影像資料,且接著將經編碼的影像資料輸出至多工器/解多工器12680。在相機12530的記錄操作期間,由行動電話12500的麥克風12550獲得的聲音信號可經由聲音處理器12650而變換為數位聲音資料,且所述數位聲音資料可傳輸至多工器/解多工器12680。
多工器/解多工器12680將自影像編碼器12720接收的經編碼的影像資料以及自聲音處理器12650接收的聲音資料一起多工。對資料進行多工的結果可經由調變器/解調變器12660以及通信電路12610而變換為變換信號,且可接著經由天線12510而傳輸。
雖然行動電話12500自外部接收通信信號,但對經由天線12510而接收的信號執行頻率恢復以及ADC,以將信號變換為數位信號。調變器/解調變器12660調變數位信號的頻帶。經頻帶調變的數位信號根據數位信號的類型而傳輸至影像解碼器12690、聲音處理器12650或LCD控制器12620。
在交談模式中,行動電話12500放大經由天線12510而接收的信號,且藉由對經放大的信號執行頻率轉換以及ADC而獲得數位聲音信號。在中央控制器12710的控制下,所接收的數位聲音信號經由調變器/解調變器12660以及聲音處理器12650而變換為類比聲音信號,且所述類比聲音信號經由揚聲器12580而輸出。
在處於資料通信模式時,接收在網際網路網站處存取的視訊檔案的資料,且將經由天線12510而自無線基地台12000接收的信號經由調變器/解調變器12660作為經多工的資料而輸出,且將經多工的資料傳輸至多工器/解多工器12680。
為了對經由天線12510而接收的經多工的資料做解碼,多工器/解多工器12680將經多工的資料解多工為經編碼的視訊資料串流以及經編碼的音訊資料串流。經由同步匯流排12730而分別將經編碼的視訊資料串流以及經編碼的音訊資料串流提供至影像解碼器12690以及聲音處理器12650。
影像解碼器12690的結構可對應於根據一或多個實施例的上述視訊解碼方法的視訊解碼裝置的結構。藉由使用根據一或多個實施例的上述視訊解碼方法,影像解碼單元12690可對經編碼的視訊資料做解碼以獲得經重新建構的視訊資料且經由LCD控制器12620而將經重新建構的視訊資料提供至顯示螢幕12520。
因此,在網際網路網站處存取的視訊檔案的資料可顯示於顯示螢幕12520上。同時,聲音處理器12650可將音訊資料變換為類比聲音信號,且將類比聲音信號提供至揚聲器12580。因此,在網際網路網站處存取的視訊檔案中所含有的音訊資料亦可經由揚聲器12580而再生。
行動電話12500或另一類型的通信終端機可為包含根據一或多個實施例的視訊編碼裝置與視訊解碼裝置兩者的收發終端機,可為僅包含視訊編碼裝置的收發終端機,或可為僅包含視訊解碼裝置收發終端機。
根據一或多個實施例的通信系統不限於上文參看圖24所述的通信系統。舉例而言,圖26說明根據一或多個實施例的使用通信系統的數位廣播系統。圖26的數位廣播系統可藉由使用根據一或多個實施例的視訊編碼裝置以及視訊解碼裝置而接收經由衛星或地面網路傳輸的數位廣播。
具體言之,廣播站12890藉由使用無線電波而將視訊資料串流傳輸至通信衛星或廣播衛星12900。廣播衛星12900傳輸廣播信號,且廣播信號經由家用天線12860而傳輸至衛星廣播接收器。在每個家庭中,經編碼的視訊串流可由TV接收器12810、機上盒(set-top box)12870或另一元件解碼並再生。
在根據一或多個實施例的視訊解碼裝置實施於再生裝置12830中時,再生裝置12830可對記錄於儲存媒體12820(諸如,光碟或記憶卡)上的經編碼的視訊串流進行剖析以及解碼以重新建構數位信號。因此,經重新建構的視訊信號可再生於(例如)監視器12840上。
在連接至用於衛星/地面廣播的天線12860或用於接收有線電視(TV)廣播的電纜天線12850的機上盒12870中,可安裝有根據一或多個實施例的視訊解碼裝置。自機上盒12870輸出的資料亦可再生於TV監視器12880上。
作為另一實例,根據一或多個實施例的視訊解碼裝置可安裝於TV接收器12810而非機上盒12870上。
具有合適天線12910的汽車12920可接收自衛星12900或圖21的無線基地台11700傳輸的信號。經解碼的視訊可再生於安裝於汽車12920中的汽車導航系統12930的顯示螢幕上。
視訊信號可由根據一或多個實施例的視訊編碼裝置編碼且可接著儲存於儲存媒體中。具體言之,影像信號可由DVD記錄器儲存於DVD光碟12960中或可由硬碟記錄器12950儲存於硬碟中。作為另一實例,視訊信號可儲存於SD卡12970中。若硬碟記錄器12950包含根據一或多個實施例的視訊解碼裝置,則DVD光碟12960、SD卡12970或另一儲存媒體上所記錄的視訊信號可再生於TV監視器12880上。
汽車導航系統12930可能不包含圖24的相機12530以及圖25的相機介面12630及影像編碼器12720。舉例而言,電腦12100以及TV接收器12810可能不包含相機12530、相機介面12630以及影像編碼器12720。
圖27為說明根據一或多個實施例的使用視訊編碼裝置以及視訊解碼裝置的雲端計算系統的網路結構的圖式。
雲端計算系統可包含雲端計算伺服器14000、使用者資料庫(database, DB)14100、多個計算資源14200以及使用者終端機。
雲端計算系統回應於來自使用者終端機的請求而經由資料通信網路(例如,網際網路)提供多個計算資源14200的應需委外服務(on-demand outsourcing service)。在雲端計算環境下,服務提供商藉由使用虛擬化技術來組合位於實體上不同位置處的資料中心的計算資源而向使用者提供所要服務。服務使用者並不需要將計算資源(例如,應用程式、儲存器、作業系統(operating system, OS)或安全機制)安裝於其自身的終端機上以便進行使用,而是可在所要時間點自經由虛擬化技術而產生的虛擬空間中的服務選擇所要服務並進行使用。
指定服務使用者的使用者終端機經由資料通信網路(包含網際網路以及行動電信網路)而連接至雲端計算伺服器14000。可自雲端計算伺服器14000對使用者終端機提供雲端計算服務且特定言的視訊再生服務。使用者終端機可為能夠連接至網際網路的各種類型的電子元件,例如,桌上型PC 14300、智慧型TV 14400、智慧型電話14500、筆記型電腦14600、攜帶型多媒體播放器(PMP)14700、平板型PC 14800及其類似者。
雲端計算伺服器14000可組合雲端網路中所分散的多個計算資源14200且向使用者終端機提供組合的結果。多個計算資源14200可包含各種資料服務,且可包含自使用者終端機上傳的資料。如上所述,雲端計算伺服器14000可藉由根據虛擬化技術來組合不同區域中所分散的視訊資料庫而向使用者終端機提供所要服務。
關於已預訂雲端計算服務的使用者的使用者資訊儲存於使用者DB 14100中。使用者資訊可包含使用者的登錄資訊、地址、姓名以及個人信用資訊。使用者資訊可更包含視訊的索引。此處,索引可包含已再生的視訊的清單、正再生的視訊的清單、再生的視訊的暫停點(pausing point)以及其類似者。
關於儲存於使用者DB 14100中的視訊的資訊可在使用者元件之間共享。舉例而言,在視訊服務回應於來自筆記型電腦14600的請求而提供至筆記型電腦14600時,視訊服務的再生歷史儲存於使用者DB 14100中。在自智慧型電話14500接收到對再生此視訊服務的請求時,雲端計算伺服器14000基於使用者DB 14100而搜尋並再生此視訊服務。在智慧型電話14500自雲端計算伺服器14000接收視訊資料串流時,藉由對視訊資料串流做解碼而再生視訊的程序類似於上文參看圖24所述的行動電話12500的操作。
雲端計算伺服器14000可參考儲存於使用者DB 14100中的所要視訊服務的再生歷史。舉例而言,雲端計算伺服器14000自使用者終端機接收對再生儲存於使用者DB 14100中的視訊的請求。若正再生此視訊,則由雲端計算伺服器14000執行的串流傳輸此視訊的方法可根據來自使用者終端機的請求(亦即,根據將始於視訊的開始還是其暫停點而再生視訊)而變化。舉例而言,若使用者終端機請求始於視訊的開始而再生視訊,則雲端計算伺服器14000始於視訊的第一畫面而將視訊的資料串流傳輸至使用者終端機。舉例而言,若使用者終端機請求始於視訊的暫停點而再生視訊,則雲端計算伺服器14000始於對應於暫停點的畫面而將視訊的資料串流傳輸至使用者終端機。
在此狀況下,使用者終端機可包含如上文參看圖1A至圖20而描述的視訊解碼裝置。作為另一實例,使用者終端機可包含如上文參看圖1A至圖20而描述的視訊編碼裝置。或者,使用者終端機可包含如上文參看圖1A至圖20而描述的視訊解碼裝置與視訊編碼裝置兩者。
上文已參看圖21至圖27而描述上文參看圖1A至圖20所述的根據一或多個實施例的視訊編碼方法、視訊解碼方法、視訊編碼裝置以及視訊解碼裝置的各種應用。然而,根據各種實施例的將視訊編碼方法以及視訊解碼方法儲存於儲存媒體中的方法或將視訊編碼裝置以及視訊解碼裝置實施在元件中的方法不限於上文參看圖21至圖27所述的實施例。
儘管已參考實施例特定地展示且描述了一或多個實施例,但一般熟習此項技術者將理解,在不脫離如由所附申請專利範圍界定的本發明的精神以及範疇的情況下,可對本發明進行形式以及細節上的各種改變。實施例應僅在描述性意義上考慮且並非用於限制目的。因此,本發明的範疇並非由本發明的詳細描述界定而是由隨附申請專利範圍界定,且在此範疇內的所有差異將解釋為包含於一或多個實施例中。
10‧‧‧視訊編碼裝置
11‧‧‧操作
12‧‧‧編碼器
13‧‧‧操作
14‧‧‧SAO判定器
15‧‧‧操作
16‧‧‧SAO參數編碼器
17‧‧‧操作
20‧‧‧視訊解碼裝置
21‧‧‧操作
22‧‧‧SAO參數獲得器
23‧‧‧操作
24‧‧‧SAO判定器
25‧‧‧操作
26‧‧‧SAO調整器
27‧‧‧操作
30‧‧‧視訊解碼裝置
31‧‧‧熵解碼器
32‧‧‧解量化器
33‧‧‧逆變換器
34‧‧‧重新建構器
35‧‧‧畫面內預測器
36‧‧‧參考圖像緩衝器
37‧‧‧運動補償器
38‧‧‧解區塊濾波器
39‧‧‧SAO執行器
41~44‧‧‧邊緣類別
51~56‧‧‧圖表
61‧‧‧第一色度成分
62‧‧‧第二色度成分
63‧‧‧第一色度成分
64‧‧‧第二色度成分
65‧‧‧第一色度成分
66‧‧‧第二色度成分
100‧‧‧視訊編碼裝置
110‧‧‧LCU分割器
120‧‧‧寫碼單元判定器
130‧‧‧輸出器
200‧‧‧視訊解碼裝置
210‧‧‧接收器
220‧‧‧影像資料以及編碼資訊提取器
230‧‧‧影像資料解碼器
310‧‧‧視訊資料
315‧‧‧寫碼單元
320‧‧‧視訊資料
325‧‧‧寫碼單元
330‧‧‧視訊資料
335‧‧‧寫碼單元
400‧‧‧影像編碼器
405‧‧‧當前畫面
410‧‧‧畫面內預測器
420‧‧‧運動估計器
425‧‧‧運動補償器
430‧‧‧變換器
440‧‧‧量化器
450‧‧‧熵編碼器
455‧‧‧位元串流
460‧‧‧解量化器
470‧‧‧逆變換器
480‧‧‧解區塊濾波器
490‧‧‧偏移調整器
495‧‧‧參考畫面
500‧‧‧影像解碼器
505‧‧‧位元串流
510‧‧‧剖析器
520‧‧‧熵解碼器
530‧‧‧解量化器
540‧‧‧逆變換器
550‧‧‧畫面內預測器
560‧‧‧運動補償器
570‧‧‧解區塊濾波器
580‧‧‧偏移調整器
585‧‧‧參考畫面
595‧‧‧經重新建構的畫面
600‧‧‧階層式結構
610‧‧‧寫碼單元/分區/LCU/編碼單元
611‧‧‧當前第一色度成分
612‧‧‧分區
613‧‧‧第一色度成分
614‧‧‧分區
615‧‧‧第一色度成分
616‧‧‧分區
617‧‧‧第一色度成分
619‧‧‧第一色度成分
620‧‧‧寫碼單元/分區
621‧‧‧當前第二色度成分
622‧‧‧分區
623‧‧‧第二色度成分
624‧‧‧分區
625‧‧‧第二色度成分
626‧‧‧分區
630‧‧‧寫碼單元/分區
632‧‧‧分區
634‧‧‧分區
636‧‧‧分區
640‧‧‧寫碼單元/分區
642‧‧‧分區
644‧‧‧分區
646‧‧‧分區
651‧‧‧當前LCU
652‧‧‧上方LCU
653‧‧‧左側LCU
700‧‧‧片段標頭
701‧‧‧參數
702‧‧‧參數
703‧‧‧參數
705‧‧‧片段資料
706‧‧‧SAO參數
707‧‧‧左側SAO合併資訊
708‧‧‧上方SAO合併資訊
709‧‧‧SAO參數
710‧‧‧寫碼單元
711‧‧‧SAO類型資訊
713‧‧‧偏移值
715‧‧‧偏移正負號資訊
717‧‧‧資訊
720‧‧‧變換單元
721‧‧‧第一1個位元
723‧‧‧剩餘位元
800‧‧‧資訊
802‧‧‧分區
804‧‧‧分區
806‧‧‧分區
808‧‧‧分區
810‧‧‧資訊
812‧‧‧畫面內模式
814‧‧‧畫面間模式
816‧‧‧跳過模式
820‧‧‧資訊
822‧‧‧第一畫面內變換單元
824‧‧‧第二畫面內變換單元
826‧‧‧第一畫面間變換單元
828‧‧‧第二畫面間變換單元
900‧‧‧寫碼單元/當前LCU
910‧‧‧預測單元
912‧‧‧分區類型/分區
914‧‧‧分區類型
916‧‧‧分區類型
918‧‧‧分區類型
920‧‧‧操作
930‧‧‧寫碼單元
940‧‧‧預測單元
942‧‧‧分區類型
944‧‧‧分區類型
946‧‧‧分區類型
948‧‧‧分區類型
950‧‧‧操作
960‧‧‧寫碼單元
970‧‧‧操作
980‧‧‧寫碼單元
990‧‧‧預測單元
992‧‧‧分區類型
994‧‧‧分區類型
996‧‧‧分區類型
998‧‧‧分區類型
999‧‧‧資料單元
1010‧‧‧寫碼單元/編碼單元
1012‧‧‧寫碼單元
1014‧‧‧寫碼單元/編碼單元
1016‧‧‧寫碼單元/編碼單元
1018‧‧‧寫碼單元
1020‧‧‧寫碼單元
1022‧‧‧寫碼單元/編碼單元
1024‧‧‧寫碼單元
1026‧‧‧寫碼單元
1028‧‧‧寫碼單元
1030‧‧‧寫碼單元
1032‧‧‧寫碼單元/編碼單元
1040‧‧‧寫碼單元
1042‧‧‧寫碼單元
1044‧‧‧寫碼單元
1046‧‧‧寫碼單元
1048‧‧‧寫碼單元/編碼單元
1050‧‧‧寫碼單元/編碼單元
1052‧‧‧寫碼單元/編碼單元
1054‧‧‧寫碼單元/編碼單元
1060‧‧‧預測單元
1070‧‧‧變換單元
1300‧‧‧LCU
1302‧‧‧寫碼單元
1304‧‧‧寫碼單元
1306‧‧‧寫碼單元
1312‧‧‧寫碼單元
1314‧‧‧寫碼單元
1316‧‧‧寫碼單元
1318‧‧‧寫碼單元
1322‧‧‧分區類型
1324‧‧‧分區類型
1326‧‧‧分區類型
1328‧‧‧分區類型
1332‧‧‧分區類型
1334‧‧‧分區類型
1336‧‧‧分區類型
1338‧‧‧分區類型
1342‧‧‧變換單元
1344‧‧‧變換單元
1352‧‧‧變換單元
1354‧‧‧變換單元
11000‧‧‧內容供應系統
11100‧‧‧網際網路
11200‧‧‧網際網路服務提供商
11300‧‧‧串流伺服器
11400‧‧‧通信網路
11700‧‧‧無線基地台
11800‧‧‧無線基地台
11900‧‧‧無線基地台
12000‧‧‧無線基地台
12100‧‧‧電腦
12200‧‧‧個人數位助理
12300‧‧‧視訊攝影機
12500‧‧‧行動電話
12510‧‧‧內部天線
12520‧‧‧顯示螢幕
12530‧‧‧相機
12540‧‧‧操作面板
12550‧‧‧麥克風
12560‧‧‧插槽
12570‧‧‧儲存媒體
12580‧‧‧揚聲器
12600‧‧‧相機
12610‧‧‧通信電路
12620‧‧‧LCD控制器
12630‧‧‧相機介面
12640‧‧‧操作輸入控制器
12650‧‧‧聲音處理器
12660‧‧‧調變器/解調變器
12670‧‧‧記錄器/讀取器
12680‧‧‧多工器/解多工器
12690‧‧‧影像解碼器
12700‧‧‧電力供應電路
12710‧‧‧中央控制器
12720‧‧‧影像編碼器
12730‧‧‧同步匯流排
12810‧‧‧TV接收器
12820‧‧‧儲存媒體
12830‧‧‧再生裝置
12840‧‧‧監視器
12850‧‧‧電纜天線
12860‧‧‧天線
12870‧‧‧機上盒
12880‧‧‧TV監視器
12890‧‧‧廣播站
12900‧‧‧廣播衛星
12910‧‧‧天線
12920‧‧‧汽車
12930‧‧‧汽車導航系統
12950‧‧‧硬碟記錄器
12960‧‧‧DVD光碟
12970‧‧‧SD卡
14000‧‧‧雲端計算伺服器
14100‧‧‧使用者資料庫
14200‧‧‧計算資源
14300‧‧‧桌上型PC
14400‧‧‧智慧型TV
14500‧‧‧智慧型電話
14600‧‧‧筆記型電腦
14700‧‧‧攜帶型多媒體播放器
14800‧‧‧平板型PC
26000‧‧‧光碟
26700‧‧‧電腦系統
26800‧‧‧光碟機
CU‧‧‧寫碼單元
CU_0‧‧‧當前寫碼單元
CU_1‧‧‧寫碼單元
CU_(d-1)‧‧‧寫碼單元
PU‧‧‧預測單元
Se‧‧‧磁區
Tr‧‧‧同心磁軌
TU‧‧‧變換單元
圖1A及圖1B分別為根據一或多個實施例的視訊編碼裝置的方塊圖以及由視訊編碼裝置執行的取樣自適應偏移(SAO)調整方法的流程圖。 圖2A及圖2B分別為根據一或多個實施例的視訊解碼裝置的方塊圖以及由視訊解碼裝置執行的SAO調整的流程圖。 圖3為根據另一實施例的視訊解碼裝置的方塊圖。 圖4為展示根據一或多個實施例的邊緣類型的邊緣類別的表格。 圖5A及圖5B為展示根據一或多個實施例的邊緣類型的種類的表格及圖表。 圖6A至圖6C展示第一色度成分與第二色度成分之間的關係。 圖7A為展示根據一或多個實施例的經參考以合併SAO參數的鄰近最大寫碼單元(largest coding unit, LCU)的圖式。 圖7B展示根據一或多個實施例的片段標頭以及片段資料的語法結構。 圖7C及圖7D展示根據一或多個實施例的關於LCU的SAO參數的語法結構。 圖7E展示根據一或多個實施例的用於SAO參數的內文自適應二進位算術寫碼(context adaptive binary arithmetic coding, CABAC)編碼的內文資訊的語法結構。 圖7F展示根據一或多個實施例的關於SAO類型的SAO參數的語法結構。 圖8為根據一或多個實施例的基於根據樹狀結構的寫碼單元的視訊編碼裝置的方塊圖。 圖9為根據一或多個實施例的基於根據樹狀結構的寫碼單元的視訊解碼裝置的方塊圖。 圖10為用於描述根據一或多個實施例的寫碼單元的概念的圖式。 圖11為根據一或多個實施例的基於寫碼單元的影像編碼器的方塊圖。 圖12為根據一或多個實施例的基於寫碼單元的影像解碼器的方塊圖。 圖13為說明根據一或多個實施例的根據深度的較深寫碼單元以及分區的圖式。 圖14為用於描述根據一或多個實施例的寫碼單元與變換單元之間的關係的圖式。 圖15為用於描述根據一或多個實施例的對應於經寫碼的深度的寫碼單元的編碼資訊的圖式。 圖16為根據一或多個實施例的根據深度的較深寫碼單元的圖式。 圖17至圖19為用於描述根據一或多個實施例的寫碼單元、預測單元與變換單元之間的關係的圖式。 圖20為用於描述根據表1的編碼模式資訊的寫碼單元、預測單元與變換單元之間的關係的圖式。 圖21為根據一或多個實施例的儲存程式的光碟的實體結構的圖式。 圖22為藉由使用光碟而記錄以及讀取程式的光碟機的圖式。 圖23為提供內容散佈服務的內容供應系統的整體結構的圖式。 圖24及圖25分別為根據一或多個實施例的應用了視訊編碼方法以及視訊解碼方法的行動電話的外部結構以及內部結構的圖式。 圖26為根據一或多個實施例的應用了通信系統的數位廣播系統的圖式。 圖27為說明根據一或多個實施例的使用視訊編碼裝置以及視訊解碼裝置的雲端計算系統的網路結構的圖式。
21‧‧‧操作
23‧‧‧操作
25‧‧‧操作
27‧‧‧操作

Claims (2)

  1. 一種視訊解碼方法,包括:獲得片段偏移資訊以指示是否對當前片段施加偏移;當根據所述片段偏移資訊對所述當前片段施加所述偏移時,藉由使用第一內文資訊對位元串流執行熵解碼以獲得包括在所述當前片段的區塊中的當前區塊的左側偏移合併資訊;當根據所述左側偏移合併資訊、根據左側區塊的偏移參數、所述當前區塊的偏移參數未被判定時,藉由使用所述第一內文資訊對所述位元串流執行熵解碼以獲得所述當前區塊的上方偏移合併資訊;當根據所述上方偏移合併資訊、根據上方區塊的偏移參數、所述當前區塊的所述偏移參數未被判定時,自所述位元串流獲得所述當前區塊的偏移類型資訊和多個偏移值;以及藉由在所述多個偏移值中使用用於當前樣本的偏移值對在所述當前區塊的樣本中的所述當前樣本的樣本值進行補償,其中自所述位元串流獲得所述當前區塊的所述偏移類型資訊和所述多個偏移值的步驟包括:當所述偏移類型資訊指示指示級區偏移類型或邊緣偏移類型時,藉由在旁路模式對所述位元串流執行熵解碼以獲得所述多個偏移值的絕對值;且當所述偏移類型資訊指示所述級區偏移類型時,藉由在所述旁路模式對所述位元串流執行熵解碼以獲得所述多個偏移值的正負號,當所述偏移類型資訊指示所述級區偏移類型且所述多個偏移 值中的一偏移值的絕對值非0時,自所述位元串流獲得所述偏移值的正負號資訊,所述正負號資訊指示所述偏移值為正數或負數,並獲得所述當前區塊的級區分類,所述級區分類指示多個連續級區中的一左側級區開始位置。
  2. 如申請專利範圍第1項所述的視訊解碼方法,其中,當所述上方偏移合併資訊指示根據所述上方區塊的所述偏移參數、所述當前區塊的所述偏移參數被判定時,所述當前區塊的所述偏移參數不是自所述位元串流中獲得。
TW105123818A 2012-06-11 2013-06-11 視訊解碼方法 TWI604718B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201261657967P 2012-06-11 2012-06-11

Publications (2)

Publication Number Publication Date
TW201640896A TW201640896A (zh) 2016-11-16
TWI604718B true TWI604718B (zh) 2017-11-01

Family

ID=49758427

Family Applications (5)

Application Number Title Priority Date Filing Date
TW106133050A TWI632805B (zh) 2012-06-11 2013-06-11 視訊解碼方法、視訊編碼方法、視訊解碼裝置、視訊編碼裝置以及非暫態的電腦可讀取儲存媒體
TW102120780A TWI549484B (zh) 2012-06-11 2013-06-11 視訊解碼方法
TW104121142A TWI519135B (zh) 2012-06-11 2013-06-11 視訊解碼裝置
TW107122955A TWI687091B (zh) 2012-06-11 2013-06-11 視訊解碼方法
TW105123818A TWI604718B (zh) 2012-06-11 2013-06-11 視訊解碼方法

Family Applications Before (4)

Application Number Title Priority Date Filing Date
TW106133050A TWI632805B (zh) 2012-06-11 2013-06-11 視訊解碼方法、視訊編碼方法、視訊解碼裝置、視訊編碼裝置以及非暫態的電腦可讀取儲存媒體
TW102120780A TWI549484B (zh) 2012-06-11 2013-06-11 視訊解碼方法
TW104121142A TWI519135B (zh) 2012-06-11 2013-06-11 視訊解碼裝置
TW107122955A TWI687091B (zh) 2012-06-11 2013-06-11 視訊解碼方法

Country Status (27)

Country Link
US (6) US9807392B2 (zh)
EP (5) EP3297284B1 (zh)
JP (5) JP5990326B2 (zh)
KR (6) KR101529994B1 (zh)
CN (10) CN108965874B (zh)
AU (3) AU2013275098B2 (zh)
BR (1) BR112014030935B1 (zh)
CA (2) CA2985277C (zh)
CY (1) CY1119864T1 (zh)
DK (5) DK3300364T3 (zh)
ES (5) ES2746341T3 (zh)
HR (1) HRP20171936T1 (zh)
HU (5) HUE047709T2 (zh)
IN (1) IN2014MN02643A (zh)
LT (1) LT2854398T (zh)
MX (2) MX342394B (zh)
MY (2) MY192340A (zh)
NO (1) NO2938424T3 (zh)
PH (5) PH12014502761A1 (zh)
PL (5) PL3300364T3 (zh)
PT (1) PT2854398T (zh)
RS (1) RS56675B1 (zh)
RU (4) RU2595578C2 (zh)
SG (4) SG10201605050RA (zh)
SI (1) SI2854398T1 (zh)
TW (5) TWI632805B (zh)
WO (1) WO2013187654A1 (zh)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120035096A (ko) * 2010-10-04 2012-04-13 한국전자통신연구원 쿼드 트리 변환 구조에서 부가 정보의 시그널링 방법 및 장치
RU2602672C2 (ru) 2011-06-23 2016-11-20 Сан Пэтент Траст Способ декодирования изображения, способ кодирования изображения, устройство декодирования изображения, устройство кодирования изображения и устройство кодирования и декодирования изображения
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
EP3407610B1 (en) 2011-06-24 2019-09-04 Sun Patent Trust Coding method and coding apparatus
MY169636A (en) 2011-06-27 2019-04-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
BR122022013246B1 (pt) 2011-06-28 2022-11-16 Sun Patent Trust Aparelho de decodificação para decodificar um parâmetro de controle para controlar decodificação de uma imagem, e aparelho de codificação para codificar um parâmetro de controle para controlar codificação de uma imagem
WO2013001767A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
WO2013001769A1 (ja) 2011-06-30 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
MX339141B (es) 2011-06-30 2016-05-13 Panasonic Ip Corp America Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
US9253482B2 (en) * 2011-11-08 2016-02-02 Texas Insturments Incorporated Method and apparatus for sample adaptive offset without sign coding
US9560362B2 (en) * 2011-12-22 2017-01-31 Mediatek Inc. Method and apparatus of texture image compression in 3D video coding
BR112014030935B1 (pt) 2012-06-11 2022-06-14 Samsung Electronics Co., Ltd Método de ajuste de deslocamento adaptativo de amostra (sao)
TWI595776B (zh) * 2012-06-27 2017-08-11 Sony Corp Image processing device and method
TWI557727B (zh) * 2013-04-05 2016-11-11 杜比國際公司 音訊處理系統、多媒體處理系統、處理音訊位元流的方法以及電腦程式產品
EP2996269A1 (en) 2014-09-09 2016-03-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio splicing concept
US9942551B2 (en) * 2015-01-30 2018-04-10 Qualcomm Incorporated Palette index grouping for video coding
US9729885B2 (en) * 2015-02-11 2017-08-08 Futurewei Technologies, Inc. Apparatus and method for compressing color index map
US9877024B2 (en) * 2015-03-06 2018-01-23 Qualcomm Incorporated Low complexity sample adaptive offset (SAO) coding
CN105049853A (zh) * 2015-07-06 2015-11-11 深圳市云宙多媒体技术有限公司 一种基于片源分析的sao编码方法及系统
WO2017014585A1 (ko) * 2015-07-21 2017-01-26 엘지전자(주) 그래프 기반 변환을 이용하여 비디오 신호를 처리하는 방법 및 장치
CN107925762B (zh) * 2015-09-03 2020-11-27 联发科技股份有限公司 基于神经网络的视频编解码处理方法和装置
EP3375188A1 (en) * 2015-11-10 2018-09-19 VID SCALE, Inc. Systems and methods for coding in super-block based video coding framework
US10841581B2 (en) * 2016-07-14 2020-11-17 Arris Enterprises Llc Region specific encoding and SAO-sensitive-slice-width-adaptation for improved-quality HEVC encoding
US10567775B2 (en) * 2016-10-01 2020-02-18 Intel Corporation Method and system of hardware accelerated video coding with per-frame parameter control
KR20190123745A (ko) * 2017-03-22 2019-11-01 한양대학교 산학협력단 영상을 구성하는 화소값 범위를 이용한 영상 부호화/복호화 방법
CA3060089C (en) * 2017-04-21 2023-06-13 Zenimax Media Inc. Player input motion compensation by anticipating motion vectors
MX2019014443A (es) * 2017-05-31 2020-02-10 Interdigital Vc Holdings Inc Un metodo y un dispositivo para codificacion y decodificacion de imagenes.
EP3750320B1 (en) * 2018-02-09 2023-11-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Adaptive in-loop filter with multiple feature-based classifications
WO2020005363A1 (en) 2018-06-26 2020-01-02 Futurewei Technologies, Inc. High-level syntax designs for point cloud coding
KR20210145851A (ko) * 2018-08-31 2021-12-02 삼성전자주식회사 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR20200044662A (ko) * 2018-10-19 2020-04-29 삼성전자주식회사 영상의 ai 부호화 및 ai 복호화를 위한 장치, 및 방법
JP7157246B2 (ja) 2018-11-06 2022-10-19 北京字節跳動網絡技術有限公司 ジオメトリック分割を用いたインター予測のためのサイド情報信号通知方法
US10727868B2 (en) * 2018-12-03 2020-07-28 Samsung Electronics Co., Ltd. Apparatus and method for offset optimization for low-density parity-check (LDPC) code
WO2020140862A1 (en) 2018-12-30 2020-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditional application of inter prediction with geometric partitioning in video processing
EP4252418A1 (en) * 2020-11-30 2023-10-04 Beijing Dajia Internet Information Technology Co., Ltd. Chroma coding enhancement in cross-component sample adaptive offset
CN113099221B (zh) * 2021-02-22 2023-06-02 浙江大华技术股份有限公司 跨分量样点自适应补偿方法、编码方法及相关装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110305274A1 (en) * 2010-06-15 2011-12-15 Mediatek Inc. Apparatus and method of adaptive offset for video coding

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0896300B1 (en) * 1997-08-07 2002-01-30 Matsushita Electric Industrial Co., Ltd. Device and method for motion vector detection
KR20060105409A (ko) 2005-04-01 2006-10-11 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
US7010044B2 (en) 2003-07-18 2006-03-07 Lsi Logic Corporation Intra 4×4 modes 3, 7 and 8 availability determination intra estimation and compensation
US7912122B2 (en) * 2004-01-20 2011-03-22 Panasonic Corporation Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus
US7630435B2 (en) 2004-01-30 2009-12-08 Panasonic Corporation Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof
WO2005076614A1 (en) * 2004-01-30 2005-08-18 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and moving picture decoding method
KR100657268B1 (ko) * 2004-07-15 2006-12-14 학교법인 대양학원 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
KR100880640B1 (ko) 2005-04-01 2009-01-30 엘지전자 주식회사 스케일러블 비디오 신호 인코딩 및 디코딩 방법
TW200806040A (en) 2006-01-05 2008-01-16 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
JP4650894B2 (ja) * 2006-04-03 2011-03-16 三菱電機株式会社 画像復号装置
CN100578618C (zh) * 2006-12-04 2010-01-06 华为技术有限公司 一种解码方法及装置
JP4956180B2 (ja) * 2006-12-26 2012-06-20 株式会社東芝 順次走査変換装置及び順次走査変換方法
CN101578874B (zh) 2007-01-04 2011-12-07 汤姆森特许公司 用于减少多视图编码视频中的照度补偿和/或色彩补偿的编码伪像的方法和装置
US8938009B2 (en) 2007-10-12 2015-01-20 Qualcomm Incorporated Layered encoded bitstream structure
BRPI0818444A2 (pt) 2007-10-12 2016-10-11 Qualcomm Inc codificação adaptativa de informação de cabeçalho de bloco de vídeo
KR101624649B1 (ko) 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US9406252B2 (en) 2009-12-31 2016-08-02 Broadcom Corporation Adaptive multi-standard video coder supporting adaptive standard selection and mid-stream switch-over
KR101529992B1 (ko) 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
WO2011128268A1 (en) 2010-04-13 2011-10-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Probability interval partioning encoder and decoder
US9094658B2 (en) 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
US8902978B2 (en) 2010-05-30 2014-12-02 Lg Electronics Inc. Enhanced intra prediction mode signaling
JP5165083B2 (ja) * 2010-06-15 2013-03-21 聯發科技股▲ふん▼有限公司 ビデオコーディングの適応オフセットに用いる装置および方法
US9456111B2 (en) * 2010-06-15 2016-09-27 Mediatek Inc. System and method for content adaptive clipping
PL3907999T3 (pl) 2010-09-02 2024-04-08 Lg Electronics, Inc. Predykcja międzyramkowa
WO2012044093A2 (ko) * 2010-09-29 2012-04-05 한국전자통신연구원 필터 정보 예측을 이용한 영상 부호화/복호화 방법 및 장치
CN107087180B (zh) * 2010-10-05 2019-10-29 寰发股份有限公司 基于分区基础的自适应环路滤波方法和装置
US8861617B2 (en) * 2010-10-05 2014-10-14 Mediatek Inc Method and apparatus of region-based adaptive loop filtering
ES2939601T3 (es) * 2010-11-25 2023-04-25 Lg Electronics Inc Método para señalizar información de imagen y método para decodificar información de imagen usando la misma
CN102595119B (zh) * 2011-01-14 2014-03-12 华为技术有限公司 条带编码方法及装置、条带解码方法及装置
EP2700230A4 (en) 2011-04-21 2014-08-06 Mediatek Inc METHOD AND APPARATUS FOR ENHANCED LOOP FILTERING
US9008170B2 (en) * 2011-05-10 2015-04-14 Qualcomm Incorporated Offset type and coefficients signaling method for sample adaptive offset
US20120294353A1 (en) * 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
CN104980756A (zh) * 2011-06-28 2015-10-14 三星电子株式会社 根据像素分类使用偏移调整的视频解码方法及其设备
US20130003829A1 (en) * 2011-07-01 2013-01-03 Kiran Misra System for initializing an arithmetic coder
US10070152B2 (en) * 2011-08-24 2018-09-04 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
US9591331B2 (en) * 2012-03-28 2017-03-07 Qualcomm Incorporated Merge signaling and loop filter on/off signaling
CN103636221B (zh) 2012-05-25 2017-11-17 太阳专利托管公司 图像编码方法、图像解码方法、图像编码装置、图像解码装置以及图像编码解码装置
MX2013015089A (es) * 2012-05-25 2014-02-21 Panasonic Corp Metodo de codificacion de imagenes en movimiento, metodo de decodificacion de imagenes en movimiento, aparato de codificacion de imagenes en movimiento, aparato de decodificacion de imágenes en movimiento y aparato de codificacion y decodificacion de imagenes en movimiento.
CA2937449C (en) 2012-05-29 2018-12-04 Mediatek Inc. Method and apparatus for coding of sample adaptive offset information
JP6132161B2 (ja) * 2012-06-08 2017-05-24 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
BR112014030935B1 (pt) 2012-06-11 2022-06-14 Samsung Electronics Co., Ltd Método de ajuste de deslocamento adaptativo de amostra (sao)
CN103634603B (zh) 2012-08-29 2017-07-07 中兴通讯股份有限公司 视频编解码方法、装置及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110305274A1 (en) * 2010-06-15 2011-12-15 Mediatek Inc. Apparatus and method of adaptive offset for video coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 9th Meeting: Geneva, CH, 27 April – 7 May 2012 *

Also Published As

Publication number Publication date
CA2876167A1 (en) 2013-12-19
US20180352233A1 (en) 2018-12-06
US10609375B2 (en) 2020-03-31
CN104869395B (zh) 2018-12-14
BR112014030935B1 (pt) 2022-06-14
CA2985277A1 (en) 2013-12-19
RS56675B1 (sr) 2018-03-30
PH12018500804A1 (en) 2018-09-24
JP6081648B2 (ja) 2017-02-15
KR20150041771A (ko) 2015-04-17
HRP20171936T1 (hr) 2018-02-09
HUE047873T2 (hu) 2020-05-28
CN108965876B (zh) 2022-02-01
ES2755811T3 (es) 2020-04-23
CN104902273B (zh) 2019-03-15
CY1119864T1 (el) 2018-06-27
TWI549484B (zh) 2016-09-11
TW201743613A (zh) 2017-12-16
KR101603687B1 (ko) 2016-03-15
MX352119B (es) 2017-11-09
CN104902272B (zh) 2017-09-01
AU2016204699B2 (en) 2017-08-31
PL3300365T3 (pl) 2020-01-31
KR20150041768A (ko) 2015-04-17
JP5990326B2 (ja) 2016-09-14
EP3300364A1 (en) 2018-03-28
CN108965874A (zh) 2018-12-07
TW201412123A (zh) 2014-03-16
PH12018500803A1 (en) 2018-09-24
HUE047709T2 (hu) 2020-05-28
MX342394B (es) 2016-09-28
US9219918B2 (en) 2015-12-22
PL2854398T3 (pl) 2018-02-28
HUE047710T2 (hu) 2020-05-28
PH12018500804B1 (en) 2018-09-24
US20150181252A1 (en) 2015-06-25
CN104869396A (zh) 2015-08-26
JP6034534B1 (ja) 2016-11-30
EP3300365B1 (en) 2019-09-04
AU2016204699A1 (en) 2016-07-21
NO2938424T3 (zh) 2018-08-18
PL3300364T3 (pl) 2019-12-31
TW201836355A (zh) 2018-10-01
RU2638742C1 (ru) 2017-12-15
TWI632805B (zh) 2018-08-11
CA2985277C (en) 2019-06-04
DK2854398T3 (en) 2018-01-08
EP3300364B1 (en) 2019-09-04
TW201640896A (zh) 2016-11-16
CN104902273A (zh) 2015-09-09
DK3300365T3 (da) 2019-09-16
CN104869396B (zh) 2018-10-19
US20150189330A1 (en) 2015-07-02
CN104869395A (zh) 2015-08-26
EP2854398A4 (en) 2015-12-23
EP3297284A1 (en) 2018-03-21
CN108965875A (zh) 2018-12-07
AU2017265158A1 (en) 2017-12-14
ES2746936T3 (es) 2020-03-09
KR102028688B1 (ko) 2019-10-04
JP2015519853A (ja) 2015-07-09
ES2746341T3 (es) 2020-03-05
CN104471938B (zh) 2018-08-21
RU2595578C2 (ru) 2016-08-27
KR101603704B1 (ko) 2016-03-25
PL3297283T3 (pl) 2019-12-31
US9826235B2 (en) 2017-11-21
JP6034533B1 (ja) 2016-11-30
AU2013275098A1 (en) 2015-01-29
KR20150009497A (ko) 2015-01-26
CN104471938A (zh) 2015-03-25
JP2016208545A (ja) 2016-12-08
PH12018500805B1 (en) 2018-09-24
EP2854398A1 (en) 2015-04-01
ES2746824T3 (es) 2020-03-09
TWI687091B (zh) 2020-03-01
JP6034535B1 (ja) 2016-11-30
JP2016220238A (ja) 2016-12-22
EP3297283A1 (en) 2018-03-21
SG10201605050RA (en) 2016-08-30
EP2854398B1 (en) 2017-12-13
AU2017265158B2 (en) 2018-11-08
MY171147A (en) 2019-09-27
SG10201503487VA (en) 2015-06-29
JP2016226022A (ja) 2016-12-28
US9807392B2 (en) 2017-10-31
AU2013275098B2 (en) 2016-05-05
PH12014502761B1 (en) 2015-03-02
CN108600752A (zh) 2018-09-28
PH12018500808A1 (en) 2018-09-24
US10075718B2 (en) 2018-09-11
LT2854398T (lt) 2018-01-10
PL3297284T3 (pl) 2019-12-31
US9807393B2 (en) 2017-10-31
KR20150041769A (ko) 2015-04-17
KR101529994B1 (ko) 2015-06-29
EP3297284B1 (en) 2019-09-11
CA2876167C (en) 2018-01-02
CN108965876A (zh) 2018-12-07
DK3297283T3 (da) 2019-09-16
PH12018500805A1 (en) 2018-09-24
IN2014MN02643A (zh) 2015-10-16
US20150181251A1 (en) 2015-06-25
HUE047442T2 (hu) 2020-04-28
HUE037047T2 (hu) 2018-08-28
RU2014153865A (ru) 2016-08-10
PT2854398T (pt) 2018-01-16
JP2016226021A (ja) 2016-12-28
CN104869394B (zh) 2018-10-19
KR20130138701A (ko) 2013-12-19
SG11201408246QA (en) 2015-03-30
EP3300365A1 (en) 2018-03-28
SI2854398T1 (en) 2018-02-28
KR101603703B1 (ko) 2016-03-15
US20150189284A1 (en) 2015-07-02
CN108600752B (zh) 2021-09-21
ES2652608T3 (es) 2018-02-05
US20150172678A1 (en) 2015-06-18
RU2666311C1 (ru) 2018-09-06
TWI519135B (zh) 2016-01-21
PH12014502761A1 (en) 2015-03-02
WO2013187654A1 (ko) 2013-12-19
KR101603705B1 (ko) 2016-03-15
MY192340A (en) 2022-08-17
DK3297284T3 (da) 2019-09-23
BR112014030935A8 (pt) 2019-12-10
CN104902272A (zh) 2015-09-09
CN104869394A (zh) 2015-08-26
SG10201510803WA (en) 2016-01-28
EP3297283B1 (en) 2019-09-04
PH12018500808B1 (en) 2018-09-24
MX2014015240A (es) 2015-02-20
KR20150041770A (ko) 2015-04-17
TW201537955A (zh) 2015-10-01
DK3300364T3 (da) 2019-09-16
CN108965875B (zh) 2022-02-01
BR112014030935A2 (pt) 2017-06-27
RU2693307C1 (ru) 2019-07-02
PH12018500803B1 (en) 2018-09-24
CN108965874B (zh) 2021-04-27

Similar Documents

Publication Publication Date Title
TWI604718B (zh) 視訊解碼方法
TWI568248B (zh) 取樣自適應偏移解碼裝置與其方法、取樣自適應偏移編碼裝置與其方法、以及電腦可讀記錄媒體
TWI569636B (zh) 視訊解碼裝置
TWI605702B (zh) 視訊解碼裝置
US20170318289A1 (en) Video encoding method applying multi-offset scheme and apparatus therefor, and video decoding method and apparatus therefor