TW201724854A - 使用交叉平面濾波增強色度編碼 - Google Patents

使用交叉平面濾波增強色度編碼 Download PDF

Info

Publication number
TW201724854A
TW201724854A TW105121738A TW105121738A TW201724854A TW 201724854 A TW201724854 A TW 201724854A TW 105121738 A TW105121738 A TW 105121738A TW 105121738 A TW105121738 A TW 105121738A TW 201724854 A TW201724854 A TW 201724854A
Authority
TW
Taiwan
Prior art keywords
sample
luma
samples
chroma
cross
Prior art date
Application number
TW105121738A
Other languages
English (en)
Other versions
TWI715598B (zh
Inventor
永 何
何玉文
言 葉
修小玉
Original Assignee
Vid衡器股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid衡器股份有限公司 filed Critical Vid衡器股份有限公司
Publication of TW201724854A publication Critical patent/TW201724854A/zh
Application granted granted Critical
Publication of TWI715598B publication Critical patent/TWI715598B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/467Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

交叉平面濾波可以用於增強色度編碼。與目前圖像相關聯的交叉平面濾波器的指示可以被接收。目前圖像可以包括內編碼視訊區塊和多個參考樣本。多個參考樣本可以用於預測內編碼視訊區塊。亮度樣本區可以在目前圖像中被確定。亮度樣本區可以被確定以增強目前圖像中的對應色度樣本。交叉平面濾波器可以被應用到亮度樣本區中的多個亮度樣本以確定偏移。交叉平面濾波器可以是高通濾波器。偏移可以被應用到對應色度樣本以確定增強的色度樣本。

Description

使用交叉平面濾波增強色度編碼
相關申請案的交叉引用 本申請案要求2015年7月8日申請的美國臨時專利申請案No. 62/190,008的優先權,其整體藉由引用的方式結合於此。
視訊編碼系統可以用於壓縮數位視訊信號。例如,視訊編碼系統可以降低所消耗的儲存空間及/或降低與視訊訊號相關聯的傳輸頻寬消耗。例如,基於區塊的混合視訊編碼系統可以被使用。
數位視訊信號可以包括三種顏色平面。這三種顏色平面可以包括亮度平面、藍色差色度平面以及紅色差色度平面。色度平面的像素的動態範圍可以比亮度平面的像素的動態範圍小。例如,視訊圖像的色度平面可以比視訊圖像的亮度平面更平滑及/或具有更少細節。視訊圖像的色度區塊可以更容易預測(例如精確預測)。例如,色度區塊的預測可以消耗更少的資源及/或產生更少的預測誤差。
高動態範圍(HDR)視訊可以提供比標準動態範圍(SDR)視訊更寬的動態範圍。HDR視訊的動態範圍可以更接近人眼的能力。HDR視訊中的色度假影針對更亮的背景比SDR視訊中的色度假影更可見。HDR視訊編碼可以包括預處理、編碼、解碼及/或後處理。
揭露了用於使用交叉平面(cross plane)濾波的增強色度編碼的系統、方法和手段。與目前圖像相關聯的交叉平面濾波器的指示可以被接收。該指示可以包括與交叉平面濾波器相關聯的一個或多個濾波器係數。目前圖像可以包括內編碼視訊區塊和多個參考樣本。多個參考樣本可以用於預測內編碼視訊區塊。亮度樣本區可以在目前圖像中被確定。亮度樣本區可以包括多個亮度樣本。例如,亮度樣本區可以是3x3區塊亮度樣本。多個亮度樣本可以包括預測的亮度樣本,使得交叉平面濾波器在亮度樣本重建之前被應用到預測的亮度樣本。多個亮度樣本可以包括重建亮度樣本,使得交叉平面濾波器可以在重建之後被應用到重建亮度樣本。亮度樣本區可以基於所選的內預測模式被確定。
亮度樣本區可以被確定以用於增強目前圖像中的對應色度樣本。對應色度樣本可以是預測的色度樣本或重建色度樣本。當對應色度樣本是內編碼視訊區塊中的預測的色度樣本時,增強的色度樣本可以用於預測。當對應的色度樣本是在環內濾波之前的重建色度樣本時,在應用環內濾波之前,增強的色度樣本可以用於取代對應色度樣本。對應色度樣本可以是參考色度樣本,用於預測內編碼視訊區塊中的一個或多個色度樣本。確定是否應用交叉平面濾波器是基於接收到的色度增強指示符。接收到的色度增強指示符可以在區塊級被接收。交叉平面濾波器可以被應用到亮度樣本區中的多個亮度樣本以確定偏移。交叉平面濾波器可以是高通濾波器。偏移可以被應用到對應色度樣本以確定增強的色度樣本。亮度樣本區可以包括不可用亮度樣本。例如在將交叉平面濾波器應用到多個亮度樣本之前,可以鄰近可用亮度樣本取代不可用亮度樣本。應用交叉平面濾波器可以基於選擇的內預測模式來確定。
多個亮度樣本區可以被確定以用於目前圖像。例如,第一亮度樣本區和第二亮度樣本區可以被確定。第一亮度樣本區可以包括第一多個亮度樣本。第二亮度樣本區可以包括第二多個亮度樣本。第一亮度樣本區可以鄰近目前圖像中的第一對應色度樣本。第二亮度樣本區可以鄰近目前圖像中的第二對應色度樣本。交叉平面濾波器可以被應用到第一多個亮度樣本和第二多個亮度樣本以分別確定第一偏移和第二偏移。第一偏移可以被應用到第一對應色度樣本以確定第一增強的色度樣本。第二偏移可以被應用到第二對應色度樣本以確定第二增強的色度樣本。
現在將參考各附圖描述示意性實施方式的詳細描述。雖然此描述提供了可能實施的詳細示例,但是應當注意這些細節只是示意性且絕不限制本申請案的範圍。
視訊編碼系統可以壓縮數位視訊信號,例如以降低數位視訊信號的儲存及/或傳輸頻寬。有多種視訊編碼系統,例如基於區塊的、基於小波的、基於物件的系統和基於區塊的混合視訊編碼系統。基於區塊的視訊編碼系統的示例是H.261、(移動圖像專家組)MPEG-1、MPEG-2、H.263、H.264/高級視訊編碼(AVC)和H.265/高效視訊編碼(HEVC)。
第1圖顯示基於區塊的混合視訊編碼器的示例。空間預測(例如內預測)或時間(temporal)預測(例如間預測)可以例如針對(例如每個)視訊區塊被執行,以降低視訊區塊中的空間和時間冗餘。從內或間預測產生的預測區塊可以從目前視訊區塊中被減掉。得到的預測殘差可以被變換和量化。可以例如藉由對量化的殘差係數進行逆量化和逆變換來重建殘差。重建的殘差可以被加到預測區塊,例如以形成重建視訊區塊。環內濾波可以被應用到重建視訊區塊。濾波的重建視訊區塊(其可以被儲存在解碼圖像緩衝器中)可以用於對一個或多個接下來的視訊區塊進行編碼。
第2圖顯示基於區塊的混合視訊解碼器的示例。第2圖中的解碼器可以對應於第1圖中的編碼器。已編碼視訊位元流可以被解析並熵解碼。編碼模式和相關聯的預測資訊可以被傳遞到例如空間預測或運動補償預測,例如以形成預測區塊。殘差變換係數可以被逆量化並逆變換,例如以重建殘差區塊。預測區塊和重建殘差區塊可以被加在一起,例如以形成重建區塊。環內濾波可以被應用到重建視訊區塊。濾波後的重建視訊區塊(其可以被儲存在參考圖像緩衝器中)可以用於預測將來的視訊區塊。
內編碼可以用於例如消除例如聯合圖像專家組(JPEG)、H.261、MPEG-1、MPEG-2、H.263、H.264/AVC和H.265/HEVC的一些圖像和視訊編碼技術中的空間相關。可以例如在H.264/AVC和H.265/HEVC中使用方向性內預測,例如以改善編碼效率。內預測模式可以使用例如來自要被預測的目前區塊的上面和左邊的參考樣本的集合。參考樣本可以被表示為Rx,y 。在一個示例中,位置(x,y)可以具有其原點在區塊的左上角的上面和左邊一個像素。在位置(x,y)的預測樣本值可以被表示為Px,y
第3圖顯示用於預測的參考樣本Rx,y 以得到針對區塊尺寸NxN樣本的預測樣本Px,y 的示例。
第4圖顯示用於內預測單元(PU)的分區模式的示例。HEVC內編碼可以支援多種類型的PU分割,例如PART_2Nx2N和PART_NxN,其可以將編碼單元(CU)分別分成一個或四個相等尺寸的PU。當CU尺寸是配置的最小CU尺寸時,PART_2Nx2N可以是可用的。
分成四個4x4 PU的8x8 CU例如針對4:2:0色度格式可以具有四個亮度預測區塊(PB)。針對內編碼區塊,每個色度頻道可以是一個4x4 PB,例如以避免2x2色度內預測區塊導致的高輸送量。
CU可以被分成多個變換單元(TU)。內預測可以循序被應用到TU。例如,與在PU級應用內預測相比,循序內預測可以允許在內預測中使用來自之前重建TU的離目前TU樣本更近的鄰近參考樣本。
第5圖顯示角度內預測模式的示例。HEVC可以支援一個或多個(例如35個)內預測模式。一個或多個內預測模式可以包括DC模式、平面模式及/或33個方向性或‘角度’內預測模式。
角度內預測模式可以用於有效塑造視訊和圖像內容中的不同方向性結構。預測方向的數量和角度可以基於編碼複雜性和編碼效率之間的權衡來選擇。
預測的樣本Px,y 可以例如藉由以下方式來得到:將其位置投影到像素的參考列或行、應用所選的預測方向,以及以1/32像素精確度內插該樣本的預測值。內插可以使用兩個最近參考樣本而被線性執行,例如針對垂直預測(例如第5圖中示出的模式18~34)使用且以及針對水平預測(例如第5圖中示出的模式2~17)使用
HEVC可以支援針對多種(例如所有)PU尺寸的亮度內預測的一個或多個內預測模式。HEVC可以例如基於一個或多個鄰近PU的模式定義針對(例如每一個)PU的多種(例如三種)最可能的模式(MPM)。目前內預測模式可以等於MPM集合中的元素之一。集合中的索引可以被傳送給解碼器。代碼(例如5位元固定長度代碼)可以用於確定在MPM集合範圍之外所選擇的模式。
參考樣本可以被平滑。在一個示例中,3分接頭平滑濾波器可以被應用到一個或多個參考樣本。例如當 _ 平滑 _ 去能 _ 旗標intra_smoothing_disabled_flag )被設定為0時,可以應用該平滑。可以例如藉由給定內預測模式及/或變換區塊尺寸來控制濾波。在一個示例中,例如針對32x32區塊,角度模式可以使用濾波的參考樣本(例如除了水平和垂直角度模式)。在另一示例中,例如針對16x16區塊,沒有使用濾波的參考樣本的模式可以被擴展到離水平和垂直最近的四種模式(例如9、11、25、27),如第5圖中所示。在另一個示例中,例如針對8x8區塊,對角模式(2、18、34)可以使用濾波的參考樣本。
可以針對色度分量應用內預測。在一個示例中,內預測模式可以被指定為例如平面、DC、水平、垂直、‘DM_CHROMA’模式、對角模式(34),例如用於與色度相關聯的一個或多個預測區塊(PB)。
表1示出了針對色度的內預測模式與內預測方向之間的示例映射。色度顏色頻道內預測模式可以基於對應的亮度PB內預測模式及/或 _ 色度 _ 預測 _ 模式intra_chroma_pred_mode )語法元素。 1
表2顯示例如當DM_CHROMA模式被選擇且使用4:2:2色度格式時針對4:2:2色度格式的內預測模式的示例規範。可以例如從對應亮度PB的內預測模式導出色度PB的內預測模式,例如如在表2中指定的。 2
第6圖示出了內邊界濾波器的示例。例如,當重建內預測變換區塊(TB)時,可以使用內邊界濾波器。內邊界濾波器可以用於例如針對使用水平、垂直及/或DC內預測模式的PB濾波沿著TB的左及/或頂邊緣的預測的亮度樣本,例如如第6圖中所示。
可以例如基於作為輸入的預測的樣本p及/或作為輸出的predSamples的陣列來定義內邊界濾波器。
由等式(1)提供的內邊界濾波可以用於產生作為輸出的predSamples,例如用於被應用到尺寸(nTbS)小於32x32的亮度變換區塊的水平內預測,去能內邊界濾波器(disableIntraBoundaryFilter )等於0,其中x=0…nTbS −1, y=0: predSamplesx,y = Clip1Y ( P-1,y + (( Px,-1 −P-1,-1 )>>1))                                    (1)
由等式(2)提供的內邊界濾波可以用於產生作為輸出的predSamples,例如用於應用到尺寸(nTbS)小於32x32的亮度變換區塊的垂直內預測,disableIntraBoundaryFilter 等於0,其中x=0…nTbS−1, y=0: predSamplesx,y = Clip1Y (Px,-1 +(( P-1,y −P-1,-1 )>>1))                                      (2)
等式(3)、等式(4)和等式(5)提供的內邊界濾波可以用於產生作為輸出的predSamples,例如用於應用到尺寸(nTbS)小於32x32的亮度變換區塊的DC內預測和DC預測符dcVal: predSamples0,0 = ( P-1,0 + 2*dcVal + P0,-1 + 2) >> 2                                     (3) predSamplesx,0 = ( Px,-1 + 3 * dcVal + 2)>>2,其中x=1…nTbS–1             (4) predSamples0,y = ( P-1,y + 3*dcVal + 2 )>>2,其中 y=1…nTbS–1             (5)
邊界平滑可以提供改進,例如平均0.4%改進。可以對亮度分量應用內邊界濾波器。例如因為用於色度分量的預測趨向平滑,內邊界濾波器可以不被應用到色度分量。
HEVC內模式殘差編碼可以使用內模式相關變換及/或係數掃描來編碼殘差資訊。離散正弦變換(DST)可以被選擇用於4x4亮度區塊。離散餘弦變換(DCT)可以被選擇/用於其他類型的區塊。
基於線性模型(LM)的色度內預測模式可以用於例如根據等式(6)以例如使用線性模型(LM)從共置的重建亮度樣本預測色度樣本:錯誤 ! 物件無法用編輯功能變數代碼來建立。 (6) 其中可以表明區塊中的預測的色度樣本,以及可以表明區塊中的對應重建亮度樣本。參數可以從目前區塊周圍的因果重建亮度和色度樣本被導出。
線性模型色度內預測可以改善編碼效率。作為示例,測試配置的實驗結果表明Y、Cb、Cr分量的平均Bjøntegaard delta率(BD率)分別包括1.3%、6.5%和5.5%。在一個示例中,在測試配置中可以提供色度分量的相似等級的編碼效率改進。
第7圖示出了HEVC間預測編碼的不同分區的示例。間編碼可以例如用於移除或降低時間冗餘。HEVC間預測編碼比內預測編碼(例如內編碼)可以支援更多的PB分區形狀。內預測可以支援例如分區PART_2Nx2N、PART_2NxN、PART_Nx2N、PART_NxN。間圖像預測可以支援例如分區PART_2Nx2N、PART_2NxN、PART_Nx2N、PART_NxN和不對稱運動分區PART_2NxnU、PART_2NxnD、PART_nLx2N和PART_nRx2N。
(例如每個)間預測的PU可以具有運動參數的集合,包括一或多個運動向量以及一或多個參考圖像索引。P片可以例如使用一個參考圖像列表且B片可以例如使用兩個參考圖像列表。PB的間預測樣本可以從參考圖像索引所識別的參考圖像中的對應區塊區的一或多個樣本來確定。參考圖像索引可以位於被運動向量(MV)的水平和垂直分量置換的位置。
第8A圖示出了使用運動向量(MV)的運動補償預測的示例。水平和垂直運動向量可以分別被表示為dx 和dy
第8B圖示出了分數樣本內插的示例。例如當運動向量具有分數值時,可以使用分數樣本內插。分數樣本內插可以產生非整數樣本位置的預測樣本。HEVC可以支援例如具有亮度樣本之間的距離的1/4的單位的MV。HEVC可以支援例如具有色度樣本之間的距離的1/8的單位(例如在4:2:0格式中)的MV。
運動向量預測可以利用運動向量與鄰近PU的空間-時間相關。合併模式可以用於例如降低運動向量傳訊消耗。合併模式合併候選列表可以包括來自鄰近PU位置(例如空間鄰近及/或時間鄰近)的運動向量候選的列表及/或零向量。編碼器可以從合併候選列表選擇(例如最佳)預測符並可以傳送表明從合併候選列表選擇的該預測符的對應索引。
交叉平面濾波可以使用來自亮度的高頻資訊,例如以改善並增強色度品質。高頻資訊可以藉由例如對亮度分量應用高通濾波器從亮度擷取。
亮度和色度分量可以具有一些相關,例如物件輪廓和邊緣區域。用於色度增強的交叉平面濾波可以包括將高通濾波應用到亮度分量。高通濾波的輸出可以被添加到色度分量以確定增強的色度分量。高通濾波的輸出可以是偏移。等式7和等式8表明了色度增強的示例: Yoffset = Yrec cross_plane_filter                                                                (7) Cenh = Crec +Yoffset (8) 其中Y是亮度,C是色度,交叉_平面_濾波器(cross_plane_filter)是應用到亮度信號的濾波器,Yrec 是重建亮度信號,Yoffset 是濾波的輸出,Crec 是重建色度信號,其可以是Cb或Cr分量,以及Cenh 是增強色度信號。濾波器可以是1D或2D濾波器。交叉平面濾波器可以例如基於原始色度和亮度及/或重建色度和亮度被導出(例如使用最小平方法)。
可以在用於內預測的DM_CHROMA模式中使用亮度預測模式,例如以導出降低色度預測模式的傳訊負荷的色度預測模式。例如,當色度預測區塊(PB)使用與對應亮度PB相同的預測模式時,該色度預測模式可以被傳訊為DM_CHROMA。線性模式(LM)色度預測模式可以例如藉由線性模型從共置的重建亮度樣本預測一或多個色度樣本。
參考色度樣本(Rx,y )、對應色度預測樣本(Px,y )和重建色度樣本可以獨立於其對應亮度分量而被處理。例如,針對間預測,色度預測樣本和色度重建樣本可以獨立於其對應亮度分量而被產生。交叉平面濾波可以被應用在內編碼過程的不同階段。
交叉平面濾波可以用於增強一或多個鄰近色度樣本。一或多個鄰近色度樣本可以鄰近目前視訊區塊。鄰近色度樣本可以包括參考色度樣本、重建色度樣本及/或預測色度樣本。例如,預測色度樣本可以用於預測。鄰近參考色度樣本Rx,y 可以用於針對內編碼產生預測色度樣本Px,y ,例如如第3圖中所示。交叉平面色度濾波可以從與一或多個鄰近色度樣本的色度樣本對應的一或多個亮度樣本導出高保真資訊,例如以用於改善編碼顏色空間中的色度。
交叉平面濾波器可以被應用到一或多個鄰近亮度樣本。鄰近亮度樣本可以包括參考亮度樣本、重建亮度樣本及/或預測亮度樣本。導出的高通資訊可以用於例如增強色度參考樣本的品質。增強的參考色度樣本可以用於產生預測色度樣本。
可以使用交叉平面濾波確定一或多個增強的色度樣本。例如,交叉平面濾波器可以被應用到一或多個鄰近亮度樣本。交叉平面濾波器可以是高通濾波器。一或多個鄰近亮度樣本可以與要被增強的色度樣本對應。交叉平面濾波器可以被應用到可用及/或不可用亮度樣本。預測亮度樣本及/或重建亮度樣本(例如在環濾波之前或之後)可以是可用亮度樣本。非重建亮度樣本及/或非預測亮度樣本可以是不可用亮度樣本。
第9圖是色度參考樣本增強900的示例,具有不使用來自目前視訊區塊的重建亮度樣本的交叉平面濾波。目前視訊區塊可以包括4x4區塊的樣本,例如如在第9圖中實線定義的。
諸如902A、902B的一或多個亮度樣本區可以被確定以用於目前圖像。如圖所示,諸如902A、902B的亮度樣本區可以包括鄰近對應色度樣本的多個亮度樣本及/或與對應色度樣本共置的亮度樣本。如果樣本在另一樣本的上面、下面、左邊、右邊及/或對角,則樣本鄰近另一樣本。例如,鄰近樣本可以在對應樣本的旁邊。共置樣本可以包括與色度樣本在相同位置的亮度樣本。亮度樣本區902A可以被確定包括一或多個鄰近亮度樣本及/或共置亮度樣本。亮度樣本區902A可以被確定,使得用於增強的色度樣本(例如增強的色度樣本912A)分別在一或多個亮度樣本區902A、902B的每一個的中心。例如,位於亮度樣本區的中心的色度樣本可以使用交叉平面濾波被增強。
諸如902A的亮度樣本區中的亮度樣本可以包括一或多個亮度樣本904A、參考亮度樣本906A及/或預測亮度樣本908A。參考亮度樣本906A可以是用於取代預測亮度樣本908A的重建亮度樣本。例如,一或多個預測亮度樣本908A、908B的每一個可以被一或多個重建亮度樣本906的各自鄰近重建亮度樣本取代(例如從其填充)。例如,亮度樣本區902A、902B可以是亮度樣本的MxN視窗,例如諸如第9圖中的虛線框突出顯示的3x3視窗。MxN視窗中的亮度樣本可以對應於色度樣本位置。交叉平面濾波器可以被應用到亮度樣本區902A、902B的多個亮度樣本。偏移可以被確定為將交叉平面濾波器應用到亮度樣本區902A、902B的多個亮度樣本的輸出。偏移可以被應用910A、910B(例如添加)到對應色度樣本,例如以確定增強的色度樣本,例如912A、912B。交叉平面濾波器可以被應用到多個亮度樣本區,例如目前圖像中的902A、902B,以確定多個增強的色度樣本912A、912B。增強的色度樣本(諸如增強的色度樣本912A、912B)可以用作用於目前視訊區塊的內預測的參考樣本。
在一個示例中,MxN亮度樣本區(例如3x3視窗)中的多個亮度樣本在環內濾波之前或之後可以包括(例如僅包括)重建亮度樣本。例如,MxN亮度樣本區中的多個亮度樣本可以是可用的。在另一示例中,MxN亮度樣本區中的一或多個亮度樣本可以尚未被重建,例如如在第9圖中所示。尚未被重建的亮度樣本可以是不可用亮度樣本。不可用亮度樣本可以被鄰近可用(例如重建)亮度樣本取代(例如使用該鄰近可用亮度樣本來填充)。目前區塊中的亮度和色度樣本的預測和重建可以被平行執行。
第10圖是利用使用來自目前區塊的重建亮度樣本的交叉平面濾波進行色度參考樣本增強1000的示例。在一個示例中,例如當可以容忍不同顏色頻道之間的較高等待時間時,目前區塊中的亮度樣本可以在各自對應色度樣本之前被重建。當應用交叉平面濾波器時,MxN(例如3x3)亮度樣本區1002A、1002B中的重建亮度樣本可以是可用的,例如不用填充。亮度樣本區1002A、1002B可以是MxN(例如3x3)視窗。
例如,諸如1002A、1002B的亮度樣本區可以被確定用於目前圖像。諸如1002A、1002B的亮度樣本區可以包括鄰近對應色度樣本的多個亮度樣本及/或與對應色度樣本共置的亮度樣本。亮度樣本區1002A、1002B的每一個中的多個亮度樣本可以包括目前區塊之外的一個或多個重建亮度樣本1004A、1004B及/或在目前區塊內的一個或多個重建亮度樣本1008A、1008B。
交叉平面濾波可以被應用到一或多個亮度樣本區1002A、1002B中的多個亮度樣本。一或多個亮度樣本區1002A、1002B中的亮度樣本可以包括目前區塊內的一些亮度樣本(例如,如第9圖中所示)。例如在環濾波之前或之後,目前區塊中的亮度樣本可以包括一個或多個重建亮度樣本。
例如可以根據等式9產生一個或多個增強的參考色度樣本1012A、1012B:               RC_enh [x][y] = RC [x][y] + SL (xL , yL )cross_plane_filter           (9) 其中RC [x][y]可以是在增強之前的重建參考色度樣本,RC_enh [x][y]可以是增強的參考色度樣本,SL (xL , yL )可以是以位置(xL , yL )為中心的重建亮度樣本的陣列。一個或多個增強參考色度樣本1012A、1012B可以對應於一或多個亮度樣本區1002A、1002B的中心。
可以例如根據等式10基於色度格式來計算對應色度樣本位置(x,y)的亮度樣本位置(xL , yL ): xL = scaleX * x                                                                                          (10) yL = scaleY * y 其中scaleX和scaleY針對色度格式4:2:0、4:2:2和4:4:4可以例如分別是(2,2)、(2,1)、(1,1)。可以在內預測過程中例如使用方向性/DC/平面內預測模式來使用增強色度參考樣本RC_enh [x][y],例如如第5圖中所示。
二維(2-D)交叉平面濾波器可以被應用到亮度樣本區(例如亮度樣本的NxN區,如第9圖和第10圖所示)。一維(1-D)交叉平面濾波器可以被應用到1xN或Nx1亮度樣本區中的一或多個亮度樣本。作為一個示例,例如當在交叉平面濾波中使用Nx1亮度樣本區時,可以濾波目前區塊上面的N個水平亮度參考樣本。作為示例,例如當在交叉平面濾波中使用1xN亮度樣本區時,可以濾波目前區塊左邊的N個垂直亮度參考樣本。
在一個示例中,可以例如基於內預測模式自適應選擇亮度樣本區。內預測模式可以是方向性(例如垂直、水平等)內預測模式、DC內預測模式、平面內預測模式或任何其他內預測模式。要應用的交叉平面濾波器可以基於選擇哪種內預測模式來確定。可以選擇交叉平面濾波器的不同集合,例如以匹配各種不同模式的邊緣及/或邊界特性。作為示例,垂直預測模式可以使用參考樣本的頂列。當選擇垂直預測模式時,目前視訊區塊之上的一個或多個色度參考樣本可以被增強。例如,亮度樣本區可以被選擇,使得其包括鄰近目前視訊區塊上面的對應色度參考樣本的一或多個亮度樣本。亮度樣本區可以包括與目前視訊區塊上面的對應色度參考樣本共置的亮度樣本。作為另一示例,當選擇水平預測模式時,目前視訊區塊左邊或右邊的一個或多個色度參考樣本可以被增強。亮度樣本區可以被選擇,使得其包括鄰近目前視訊區塊左邊或右邊的對應色度參考樣本的一或多個亮度樣本。亮度樣本區可以包括與目前視訊區塊左邊或右邊的對應色度參考樣本共置的亮度樣本。例如當選擇垂直預測模式時,邊緣可以垂直出現。
例如與第9圖和第10圖中示出的示例中描繪的方形2-D亮度樣本區相比,亮度樣本區可以被選擇具有水平矩形形狀。例如,1-D水平亮度樣本區可以針對垂直選擇模式而被選擇及/或應用。1-D水平濾波(例如使用上鄰近亮度樣本)可以用於例如更有效獲取垂直高通邊緣資訊及/或降低濾波複雜性。在用於水平預測模式的自適應濾波的示例中,可以使用左邊行的參考樣本。例如當選擇水平預測模式時,邊緣可以水平出現。可以使用具有垂直矩形形狀的亮度樣本區。例如,可以選擇及/或應用1-D垂直亮度樣本區。1D垂直濾波(例如使用左邊鄰近亮度樣本)可以更有效獲取水平高通邊緣及/或降低濾波複雜性。
亮度樣本區可以被選擇為‘L’形,使得亮度樣本區與目前視訊區塊中的色度樣本對應。例如,當選擇DC內預測模式時,目前視訊區塊的左邊和上面的一個或多個參考樣本的平均值可以用於預測目前視訊區塊中的一個或多個樣本。作為另一示例,當選擇平面內預測模式時,目前視訊區塊的左邊和上面的一個或多個參考樣本的線性函數可以用於預測目前視訊區塊中的一個或多個樣本。當選擇DC內預測及/或平面內預測模式時,亮度樣本區可以被選擇,使得目前視訊區塊左邊和上面的一個或多個參考色度樣本被增強。
色度增強指示符可以被傳訊,例如以表明是賦能還是禁用色度增強。色度增強指示符可以例如在片級、圖像級、圖像組級或序列級被傳訊。
色度增強指示符可以在區塊級被傳訊,例如以表明色度增強處理是否被應用到目前編碼區塊。例如當目前區塊是內編碼區塊時,可以傳訊色度增強指示符。
可以在編碼器處導出一個或多個交叉平面濾波器係數並將其傳送給解碼器。濾波器係數訓練(例如用於應用到內編碼區塊的增強濾波器以改善參考樣本)可以使用內部編碼樣本。可以例如在片級、圖像級、圖像組級或序列級傳送一個或多個交叉平面濾波器係數。可以在區塊級傳送一個或多個交叉平面濾波器係數。
第11圖是使用預測色度樣本增強的基於區塊的混合視訊編碼裝置1100(例如編碼器或解碼器)的示例。可以對輸入視訊1102執行預測(例如內預測1104及/或間預測1106)。可以例如藉由從輸入視訊1102的原始區塊中減去預測區塊1114來確定預測殘差1108。可以例如使用DCT及/或DST區塊變換及/或量化1110來變換預測殘差1108。預測殘差1108可以針對輸入視訊1102的亮度及/或色度分量被變換。改善預測色度樣本的精確度可以改善編碼效率。可以例如藉由使用交叉平面(例如高通)濾波器來實施色度增強1112,以增強一個或多個預測色度樣本。可以例如針對物件輪廓及/或邊緣區域而增強色度樣本。
交叉平面濾波器可以例如使用相同區塊和鄰近區塊的重建亮度樣本而用在目前區塊的一個或多個(例如所有)預測色度樣本上。例如,目前區塊的一個或多個預測色度樣本可以藉由將交叉平面濾波器應用到與一個或多個預測色度樣本對應的多個亮度樣本而被增強。目前區塊可以是內編碼視訊區塊。增強的預測色度樣本可以被產生,例如如等式11表明的: PC_enh [x][y] = PC [x][y] + SL (xL , yL )cross_plane_filter                           (11) 其中PC [x][y]可以是在色度位置(x,y)產生的預測色度樣本。預測色度樣本PC [x][y]可以使用內預測或間預測被預測。雖然在等式(11)中沒有示出,但是例如依據用於目前區塊的編碼模式(例如內或間),在色度增強中使用的交叉平面濾波器可以變化。在一個示例中,可以分開訓練交叉平面濾波器的多個(例如兩個)集合。交叉平面濾波器的第一集合可以被應用到一個或多個內預測色度樣本。交叉平面的第二集合可以被應用到一個或多個間預測色度樣本。
SL (xL , yL )可以是在位置(xL , yL )的重建亮度樣本,其中(xL , yL )可以基於色度格式來計算,例如如等式12所示: xL = scaleX * x                                                                                          (12) yL = scaleY * y 其中(scaleX, scaleY)針對色度格式4:2:0、4:2:2和4:4:4可以分別是(2,2)、(2,1)和(1,1)。
交叉平面濾波器可以被應用到一個或多個鄰近對應參考亮度樣本,例如以改善一個或多個預測色度樣本的精確度。
交叉平面濾波器可以增強一個或多個預測色度樣本的品質。例如,當增強的預測色度樣本用於產生預測殘差時,預測殘差資訊可以更小,導致改善的編碼性能。
交叉平面濾波可以用於導出一個或多個增強的色度樣本。例如,交叉平面濾波器可以被應用到與目前色度樣本位置對應的亮度樣本(例如亮度樣本區)附近。
第12圖是使用交叉平面濾波增強預測色度樣本的示例。可以確定多個亮度樣本區1202A、1202B、1202C。多個亮度樣本區1202A、1202B、1202C的每一個可以對應於預測色度樣本。交叉平面濾波器可以被應用到亮度樣本區1202A、1202B、1202C(例如第12圖中示出的虛線框中的亮度樣本的3x3視窗)內的多個亮度樣本。交叉平面濾波器可以被應用到目前區塊(例如,如垂直條狀圈表明的)內的重建亮度樣本。目前區塊可以是內編碼視訊區塊。可以確定輸出。應用交叉平面濾波器的輸出可以是偏移,例如由等式11給出的。增強的預測色度樣本1206A、1206B、1206C可以被確定,例如藉由將偏移1204A、1204B、1204C應用(例如加到)到對應色度樣本來確定增強的色度樣本1206A、1206B、1206C。在增強預測色度樣本中使用的要被濾波的目前區塊的對應重建亮度樣本的可用性可以在特定區塊的亮度和色度分量之間帶來編碼等待時間。
可以在沒有被重建的亮度樣本1208上應用交叉平面濾波器。例如可以使用鄰近沒有重建的亮度樣本1208(在其左邊或上面)的重建亮度樣本來填充沒有被重建的亮度樣本1208。例如,不可用亮度樣本可以被鄰近重建亮度樣本取代。
可以例如依據預測模式(例如內或間預測)應用分開(例如不同)的濾波器。其他技術(例如程序)可以用於分類和應用不同交叉平面濾波器。作為示例,例如依據是使用整數還是分數(例如一半或四分之一)像素運動向量,可以針對可應用性進一步分類或子分類交叉平面濾波器。例如依據在間預測中使用哪個參考圖像,可以針對可應用性分類或子分類交叉平面濾波器。交叉平面濾波器可以是自適應選擇的及/或應用的這些和其他編碼參數。
第13圖是對重建色度樣本使用色度增強的基於區塊的混合視訊編碼裝置1300(例如編碼器或解碼器)的示例。例如,可以在預測和重建之後應用色度增強。可以例如藉由將來自逆量化/逆變換1306的重建殘差區塊添加到預測區塊1308來產生輸入視訊1302的重建區塊1304(例如在環內濾波之前)。重建色度樣本的增強可以改善總圖像品質及/或可以改善之後的區塊或圖像的編碼效率。可以例如藉由應用交叉平面濾波器實施色度增強1312。應用交叉平面濾波器可以增強例如在物件輪廓及/或邊緣區域的一個或多個重建色度樣本。在環內濾波之前或之後可以增強一個或多個重建色度樣本。
在一個示例中,交叉平面濾波器可以被應用到重建亮度樣本SL [x][y],例如以增強目前區塊的重建色度樣本。可以例如根據等式13計算增強的重建色度樣本: SC_enh [x][y] = SC [x][y] + SL (xL , yL )cross_plane_filter                          (13) 其中SC [x][y]可以是重建色度樣本且SC_enh [x][y]可以是增強的重建色度樣本。
第14圖是使用交叉平面濾波的一個或多個色度重建樣本增強的示例。
可以確定多個亮度樣本區1402、1404。第一亮度樣本區1402可以包括來自目前區塊1410的多個重建亮度樣本。第二亮度樣本區1404可以包括來自目前區塊1410的多個重建亮度樣本和來自一個或多個之前區塊的多個重建亮度樣本。
交叉平面濾波器可以被應用到一個或多個重建亮度樣本SL (xL , yL )。例如藉由將所選及應用的交叉平面濾波器的輸出應用1406、1408(例如加到)到對應重建色度樣本以產生一個或多個增強的重建色度樣本1412、1414、SC_enh [x][y],目前區塊1410的一個或多個重建色度樣本SC [x][y]可以被增強。例如諸如亮度樣本區1402的亮度樣本區可以包括來自目前區塊1410的一個或多個重建亮度樣本和來自一個或多個之前區塊的一個或多個重建亮度樣本。
交叉平面濾波器分類、自適應選擇和應用(例如如這裡所述的)可以應用於重建色度樣本的增強。交叉平面濾波器分類可以依據例如區塊預測模式(例如內或間)、運動向量精確度及/或參考圖像等。
可以執行濾波器係數的傳訊,例如如這裡所述的。交叉平面濾波器的一個或多個集合可以在位元流中被傳訊。交叉平面濾波器的一個或多個集合可以基於使用的濾波器分類方法而被傳訊。要被傳訊的濾波器集合的數量可以被表示為N。交叉平面濾波器的N個集合的濾波器係數可以在片級、圖像級、圖像組級或序列級被傳送。解碼器可以基於目前區塊的編碼模式、運動向量精確度及/或參考圖像來選擇一個或多個合適的交叉平面濾波器。解碼器可以例如基於目前區塊的編碼模式、運動向量精確度及/或參考圖像應用一個或多個合適的交叉平面濾波器。
第15A圖是在其中可以實施一個或多個揭露的實施方式的示例通信系統100的圖。通信系統100可以是向多個使用者提供內容(例如語音、資料、視訊、訊息發送、廣播等)的多重存取系統。通信系統100可以使多個無線使用者能夠經由系統資源分享(包括無線頻寬)存取這些內容。例如,通信系統100可以使用一種或多種頻道存取方法,例如分碼多重存取(CDMA)、分時多重存取(TDMA)、分頻多重存取(FDMA)、正交FDMA(OFDMA)、單載波FMDA(SC-FDMA)等。
如第15A圖所示,通信系統100可以包括:無線傳輸/接收單元(WTRU)102a、102b、102c及/或102d(其通常或整體上被稱為WTRU 102)、無線電存取網路(RAN)103/104/105、核心網路106/107/109、公共交換電話網路(PSTN)108、網際網路110和其他網路112。不過應該理解的是,揭露的實施方式考慮到了任何數量的WTRU、基地台、網路及/或網路元件。WTRU 102a、102b、102c、102d的每一個可以是配置為在無線環境中進行操作及/或通信的任何類型的裝置。作為示例,可以將WTRU 102a、102b、102c、102d配置為發送及/或接收無線信號、並可以包括使用者設備(UE)、行動站、固定或者行動使用者單元、呼叫器、行動電話、個人數位助理(PDA)、智慧型電話、筆記型電腦、隨身型易網機、個人電腦、無線傳感器、消費電子產品等等。
通信系統100還可以包括基地台114a和基地台114b。基地台114a、114b的每一個都可以是配置為與WTRU 102a、102b、102c、102d中的至少一個進行無線介接以促進存取一個或者多個通信網路(例如核心網路106/107/109、網際網路110及/或網路112)的任何類型的裝置。作為示例,基地台114a、114b可以是基地收發站(BTS)、節點B、e節點B、本地節點B、本地e節點B、網站控制器、存取點(AP)、無線路由器等等。雖然基地台114a、114b的每一個被描述為單一元件,但是應該理解的是,基地台114a、114b可以包括任何數量的互連的基地台及/或網路元件。
基地台114a可以是RAN 103/104/105的一部分,RAN 103/104/105還可以包括其他基地台及/或網路元件(未顯示),例如基地台控制器(BSC)、無線電網路控制器(RNC)、中繼節點等。可以將基地台114a及/或基地台114b配置為在特定地理區域之內發送及/或接收無線信號,該區域可以被稱為胞元(未顯示)。胞元還可以被劃分為胞元扇區。例如,與基地台114a關聯的胞元可以劃分為三個扇區。因此,在一種實施方式中,基地台114a可以包括三個收發器,即每一個用於胞元的一個扇區。在另一種實施方式中,基地台114a可以使用多輸入多輸出(MIMO)技術,因此可以將多個收發器用於胞元的每一個扇區。
基地台114a、114b可以經由空中介面115/116/117以與WTRU 102a、102b、102c、102d中的一個或者多個進行通信,該空中介面115/116/117可以是任何合適的無線通訊鏈路(例如,射頻(RF)、微波、紅外(IR)、紫外線(UV)、可見光等)。可以使用任何合適的無線電存取技術(RAT)來建立空中介面115/116/117。
更具體地,如上所述,通信系統100可以是多重存取系統、並可以使用一種或者多種頻道存取方案,例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等等。例如,RAN 103/104/105中的基地台114a和WTRU 102a、102b、102c可以使用例如通用行動電信系統(UMTS)陸地無線電存取(UTRA)的無線電技術,其可以使用寬頻CDMA(WCDMA)來建立空中介面115/116/117。WCDMA可以包括例如高速封包存取(HSPA)及/或演進的HSPA(HSPA+)的通信協定。HSPA可以包括高速下鏈封包存取(HSDPA)及/或高速上鏈封包存取(HSUPA)。
在另一種實施方式中,基地台114a和WTRU 102a、102b、102c可以使用例如演進的UMTS陸地無線電存取(E-UTRA)的無線電技術,其可以使用長期演進(LTE)及/或高級LTE(LTE-A)來建立空中介面115/116/117。
在其他實施方式中,基地台114a和WTRU 102a、102b、102c可以使用例如IEEE 802.16(即,全球互通微波存取(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、暫行標準 2000(IS-2000)、暫行標準95(IS-95)、暫行標準856(IS-856)、全球行動通信系統(GSM)、GSM演進的增強型資料速率(EDGE)、GSM EDGE(GERAN)等等的無線電技術。
第15A圖中的基地台114b可以是例如無線路由器、本地節點B、本地e節點B或者存取點,並且可以使用任何適當的RAT以促進例如商業場所、住宅、車輛、校園等等的局部區域中的無線連接。在一種實施方式中,基地台114b和WTRU 102c、102d可以實施例如IEEE 802.11的無線電技術來建立無線區域網路(WLAN)。在另一種實施方式中,基地台114b和WTRU 102c、102d可以使用例如IEEE 802.15的無線電技術來建立無線個人區域網路(WPAN)。在另一種實施方式中,基地台114b和WTRU 102c、102d可以使用基於蜂巢的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A等)來建立微微胞元或毫微微胞元。如第15A圖所示,基地台114b可以具有到網際網路110的直接連接。因此,基地台114b可以不需要經由核心網路106/107/109而存取網際網路110。
RAN 103/104/105可以與核心網路106/107/109通信,該核心網路106/107/109可以是被配置為向WTRU 102a、102b、102c、102d中的一個或多個提供語音、資料、應用及/或基於網際網路協定的語音(VoIP)服務等的任何類型的網路。例如,核心網路106/107/109可以提供呼叫控制、計費服務、基於移動位置的服務、預付費呼叫、網際網路連接、視訊分配等及/或執行高階安全功能,例如使用者認證。雖然第15A圖中未示出,應該理解的是,RAN 103/104/105及/或核心網路106/107/109可以與使用和RAN 103/104/105相同的RAT或不同RAT的其他RAN進行直接或間接的通信。例如,除了連接到正在使用E-UTRA無線電技術的RAN 103/104/105之外,核心網路106/107/109還可以與使用GSM無線電技術的另一個RAN(未示出)通信。
核心網路106/107/109還可以充當WTRU 102a、102b、102c、102d存取PSTN 108、網際網路110及/或其他網路112的閘道。PSTN 108可以包括提供普通老式電話服務(POTS)的電路交換電話網路。網際網路110可以包括使用公共通信協定的互連電腦網路和裝置的全球系統,該公共通信協定例如有TCP/IP網際網路協定組中的傳輸控制協定(TCP)、使用者資料包通訊協定(UDP)和網際網路協定(IP)。網路112可以包括被其他服務提供者擁有及/或操作的有線或無線的通信網路。例如,網路112可以包括連接到一個或多個RAN的另一個核心網路,該一個或多個RAN可以使用和RAN 103/104/105相同的RAT或不同的RAT。
通信系統100中的WTRU 102a、102b、102c、102d中的一者或多者可以包括多模式能力,即WTRU 102a、102b、102c、102d可以包括用於在不同無線鏈路上與不同無線網路進行通信的多個收發器。例如,第15A圖中示出的WTRU 102c可被配置為與基地台114a通信,以及與基地台114b通信,該基地台114a可以使用基於蜂巢的無線電技術,該基地台114b可以使用IEEE 802無線電技術。
第15B圖是WTRU 102示例的系統圖。如第15B圖所示,WTRU 102可以包括處理器118、收發器120、傳輸/接收元件122、揚聲器/麥克風124、鍵盤126、顯示器/觸控板128、不可移式記憶體130、可移式記憶體132、電源134、全球定位系統(GPS)晶片組136和其他週邊裝置138。應該理解的是,在保持與實施方式一致時,WTRU 102可以包括前述元件的任何子組合。而且,實施方式考慮了基地台114a和114b及/或基地台114a和114b可以表示的節點除了別的之外可以包括第15B圖所描繪和這裡描述的一個或多個元件,該節點諸如但不限於收發站(BTS)、節點B、網站控制器、存取點(AP)、本地節點B、演進型本地節點B(e節點B)、本地演進型節點B(HeNB)、本地演進型節點B閘道和代理節點。
處理器118可以是通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、多個微處理器、與DSP核心相關聯的一或多個微處理器、控制器、微控制器、專用積體電路(ASIC)、現場可編程閘陣列(FPGA)電路、任何其他類型的積體電路(IC)、狀態機等等。處理器118可執行信號編碼、資料處理、功率控制、輸入/輸出處理及/或使WTRU 102能夠於無線環境中操作的任何其他功能。處理器118可以耦合到收發器120,該收發器120可耦合到傳輸/接收元件122。雖然第15B圖描述了處理器118和收發器120是單獨的元件,但是應該理解的是,處理器118和收發器120可以一起集成在電子封裝或晶片中。
傳輸/接收元件122可以被配置為經由空中介面115/116/117將信號發送到基地台(例如,基地台114a),或從基地台(例如,基地台114a)接收信號。例如,在一種實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收RF信號的天線。在另一種實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收例如IR、UV或可見光信號的發射器/偵測器。在另一種實施方式中,傳輸/接收元件122可以被配置為發送和接收RF和光信號兩者。應當理解,傳輸/接收元件122可以被配置為發送及/或接收無線信號的任何組合。
另外,雖然傳輸/接收元件122在第15B圖中描述為單一元件,但是WTRU 102可以包括任何數量的傳輸/接收元件122。更具體的,WTRU 102可以使用例如MIMO技術。因此,在一種實施方式中,WTRU 102可以包括用於經由空中介面115/116/117發送和接收無線信號的兩個或更多個傳輸/接收元件122(例如,多個天線)。
收發器120可以被配置為調變要由傳輸/接收元件122發送的信號以及被配置為解調由傳輸/接收元件122接收的信號。如上面提到的,WTRU 102可以具有多模式能力。因此收發器120可以包括使WTRU 102能夠經由多個例如UTRA和IEEE 802.11之類的RAT進行通信的多個收發器。
WTRU 102的處理器118可以耦合到下述裝置,並且可以從下述裝置中接收使用者輸入資料:揚聲器/麥克風124、鍵盤126及/或顯示器/觸控板128(例如,液晶顯示器(LCD)顯示單元或有機發光二極體(OLED)顯示單元)。處理器118還可以輸出使用者資料到揚聲器/麥克風124、鍵盤126及/或顯示器/觸控板128。另外,處理器118可以從任何類型的適當的記憶體存取資訊、並且可以儲存資料到該任何類型的適當的記憶體中,例如不可移式記憶體130及/或可移式記憶體132。不可移式記憶體130可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟或任何其他類型的記憶體裝置。可移式記憶體132可以包括使用者身份模組(SIM)卡、記憶條、安全數位(SD)記憶卡等等。在其他實施方式中,處理器118可以從在實體位置上沒有位於WTRU 102上(例如位於伺服器或家用電腦(未示出)上)的記憶體存取資訊,並且可以將資料儲存在該記憶體中。
處理器118可以從電源134接收電能、並且可以被配置為分配及/或控制到WTRU 102中的其他元件的電能。電源134可以是為WTRU 102供電的任何適當的裝置。例如,電源134可以包括一個或更多個乾電池(例如,鎳鎘(NiCd)、鎳鋅(NiZn)、鎳氫(NiMH)、鋰離子(Li-ion)等等)、太陽能電池、燃料電池等等。
處理器118還可以耦合到GPS晶片組136,該GPS晶片組136可以被配置為提供關於WTRU 102目前位置的位置資訊(例如,經度和緯度)。另外,除了來自GPS晶片組136的資訊或作為其替代,WTRU 102可以經由空中介面115/116/117從基地台(例如,基地台114a、114b)接收位置資訊及/或基於從兩個或更多個鄰近基地台接收的信號的時序來確定其位置。應當理解,在保持實施方式的一致性時,WTRU 102可以用任何適當的位置確定方法獲得位置資訊。
處理器118還可以耦合到其他週邊裝置138,該週邊裝置138可以包括一個或多個提供附加特性、功能及/或有線或無線連接的軟體及/或硬體模組。例如,週邊裝置138可以包括加速計、電子羅盤、衛星收發器、數位相機(用於照片或視訊)、通用序列匯流排(USB)埠、振動裝置、電視收發器、免提耳機、藍牙®(Bluetooth®)模組、調頻(FM)無線電單元、數位音樂播放器、媒體播放器、視訊遊戲器模組、網際網路瀏覽器等等。
第15C圖是根據實施方式的RAN 103和核心網路106的系統圖。如上面提到的,RAN 103可使用UTRA無線電技術經由空中介面115以與WTRU 102a、102b、102c通信。RAN 103還可以與核心網路106通信。如第15C圖所示,RAN 103可以包括節點B 140a、140b、140c,節點B 140a、140b、140c的每一個包括用於經由空中介面115以與WTRU 102a、102b、102c通信的一個或多個收發器。節點B 140a、140b、140c的每一個可以與RAN 103內的特定胞元(未顯示)關聯。RAN 103還可以包括RNC 142a、142b。應當理解的是,在保持實施方式的一致性時,RAN 103可以包括任何數量的節點B和RNC。
如第15C圖所示,節點B 140a、140b可以與RNC 142a通信。此外,節點B 140c可以與RNC 142b通信。節點B 140a、140b、140c可以經由Iub介面分別與RNC 142a、142b通信。RNC 142a、142b可以經由Iur介面相互通信。RNC 142a、142b的每一個可以被配置為控制其連接的各自的節點B 140a、140b、140c。另外,RNC 142a、142b的每一個可以被配置以執行或支援其他功能,例如外環功率控制、負載控制、允許控制、封包排程、切換控制、宏分集、安全功能、資料加密等等。
第15C圖中所示的核心網路106可以包括媒體閘道(MGW)144、行動交換中心(MSC)146、服務GPRS支援節點(SGSN)148、及/或閘道GPRS支援節點(GGSN)150。儘管前述元件的每一個被描述為核心網路106的部分,應當理解的是,這些元件中的任何一個可以被不是核心網路操作者的實體擁有或操作。
RAN 103中的RNC 142a可以經由IuCS介面而連接至核心網路106中的MSC 146。MSC 146可以連接至MGW 144。MSC 146和MGW 144可以向WTRU 102a、102b、102c提供到電路切換式網路(例如PSTN 108)的存取,以促進WTRU 102a、102b、102c和傳統陸地線路通信裝置之間的通信。
RAN 103中RNC 142a還可以經由IuPS介面而連接至核心網路106中的SGSN 148。SGSN 148可以連接至GGSN 150。SGSN 148和GGSN 150可以向WTRU 102a、102b、102c提供到封包交換網路(例如網際網路110)的存取,以促進WTRU 102a、102b、102c和IP賦能裝置之間的通信。
如上所述,核心網路106還可以連接至網路112,網路112可以包括由其他服務提供者擁有或操作的其他有線或無線網路。
第15D圖是根據實施方式的RAN 104和核心網路107的系統圖。如上面提到的,RAN 104可使用E-UTRA無線電技術經由空中介面116以與WTRU 102a、102b、102c通信。RAN 104還可以與核心網路107通信。
RAN 104可包括e節點B 160a、160b、160c,但可以理解的是,在保持與各種實施方式的一致性時,RAN 104可以包括任何數量的e節點B。e節點B 160a、160b、160c的每一個可包括用於經由空中介面116以與WTRU 102a、102b、102c通信的一個或多個收發器。在一種實施方式中,e節點B 160a、160b、160c可以使用MIMO技術。因此,e節點B 160a例如可以使用多個天線來向WTRU 102a發送無線信號及/或從其接收無線信號。
e節點B 160a、160b、160c的每一個可以與特定胞元相關聯(未顯示),並可以被配置為處理無線資源管理決策、切換決策、在上鏈及/或下鏈中的使用者排程等等。如第15D圖所示,e節點B 160a、160b、160c可以經由X2介面相互通信。
第15D圖中所示的核心網路107可以包括移動性管理實體(MME)162、服務閘道164及/或封包資料網路(PDN)閘道166。雖然前述元件的每一個被描述為核心網路107的一部分,應當理解的是,這些元件中的任一個可以由除了核心網路操作者之外的實體擁有及/或操作。
MME 162可以經由S1介面而連接到RAN 104中的e節點B 160a、160b、160c的每一個、並可以作為控制節點。例如,MME 162可以負責WTRU 102a、102b、102c的使用者認證、承載啟動/停用、在WTRU 102a、102b、102c的初始連結期間選擇特定服務閘道等等。MME 162還可以提供控制平面功能,用於在RAN 104和使用例如GSM或者WCDMA的其他無線電技術的其他RAN(未顯示)之間切換。
服務閘道164可以經由S1介面而連接到RAN 104中的e節點B 160a、160b、160c的每一個。服務閘道164通常可以向/從WTRU 102a、102b、102c路由和轉發使用者資料封包。服務閘道164還可以執行其他功能,例如在e節點B間切換期間錨定使用者平面、當下鏈資料對於WTRU 102a、102b、102c可用時觸發傳呼、管理和儲存WTRU 102a、102b、102c的上下文(context)等等。
服務閘道164還可以連接到PDN閘道166,PDN閘道166可以向WTRU 102a、102b、102c提供到封包交換網路(例如網際網路110)的存取,以促進WTRU 102a、102b、102c與IP賦能裝置之間的通信。
核心網路107可以促進與其他網路的通信。例如,核心網路107可以向WTRU 102a、102b、102c提供到電路切換式網路(例如PSTN 108)的存取,以促進WTRU 102a、102b、102c與陸地線路通信裝置之間的通信。例如,核心網路107可以包括IP閘道(例如IP多媒體子系統(IMS)伺服器)、或者與之通信,該IP閘道作為核心網路107與PSTN 108之間的介面。另外,核心網路107可以向WTRU 102a、102b、102c提供到網路112的存取,該網路112可以包括被其他服務提供者擁有及/或操作的其他有線或無線網路。
第15E圖是根據實施方式的RAN 105和核心網路109的系統圖。RAN 105可以是使用IEEE 802.16無線電技術經由空中介面117以與WTRU 102a、102b、102c進行通信的存取服務網路(ASN)。如下面進一步討論的,WTRU 102a、102b、102c、RAN 105和核心網路109的不同功能實體之間的鏈路可以被定義為參考點。
如第15E圖所示,RAN 105可以包括基地台180a、180b、180c和ASN閘道182,但應當理解的是,在與實施方式保持一致的同時,RAN 105可以包括任何數量的基地台和ASN閘道。基地台180a、180b、180c的每一個可以與RAN 105中特定胞元(未示出)相關聯並可以包括一個或多個經由空中介面117以與WTRU 102a、102b、102c通信的收發器。在一個實施方式中,基地台180a、180b、180c可以使用MIMO技術。因此,基地台180a例如可以使用多個天線來向WTRU 102a發送無線信號,或從其接收無線信號。基地台180a、180b、180c可以提供移動性管理功能,例如呼叫切換(handoff)觸發、隧道建立、無線電資源管理、訊務分類、服務品質(QoS)策略執行等等。ASN閘道182可以充當訊務聚合點、並且負責傳呼、快取使用者資料(profile)、路由到核心網路109等等。
WTRU 102a、102b、102c和RAN 105之間的空中介面117可以被定義為使用IEEE 802.16規範的R1參考點。另外,WTRU 102a、102b、102c的每一個可以與核心網路109建立邏輯介面(未顯示)。WTRU 102a、102b、102c和核心網路109之間的邏輯介面可以定義為R2參考點,其可以用於認證、授權、IP主機(host)配置管理及/或移動性管理。
基地台180a、180b、180c的每一個之間的通信鏈路可以定義為R8參考點,該R8參考點包括促進WTRU切換和基地台間資料轉移的協定。基地台180a、180b、180c和ASN閘道182之間的通信鏈路可以定義為R6參考點。R6參考點可以包括用於促進基於與WTRU 102a、102b、102c的每一個相關聯的移動性事件的移動性管理的協定。
如第15E圖所示,RAN 105可以連接至核心網路109。RAN 105和核心網路109之間的通信鏈路可以定義為包括例如促進資料轉移和移動性管理能力的協定的R3參考點。核心網路109可以包括行動IP本地代理(MIP-HA)184、認證、授權、記帳(AAA)伺服器186和閘道188。儘管前述的每一元件被描述為核心網路109的部分,應當理解的是,這些元件中的任一個可以由不是核心網路操作者的實體擁有或操作。
MIP-HA可以負責IP位址管理,並可以使WTRU 102a、102b、102c能夠在不同ASN及/或不同核心網路之間漫遊。MIP-HA 184可以向WTRU 102a、102b、102c提供封包交換網路(例如網際網路110)的存取,以促進WTRU 102a、102b、102c和IP賦能裝置之間的通信。AAA伺服器186可以負責使用者認證和支援使用者服務。閘道188可促進與其他網路互通。例如,閘道188可以向WTRU 102a、102b、102c提供電路切換式網路(例如PSTN 108)的存取,以促進WTRU 102a、102b、102c和陸地線路通信裝置之間的通信。此外,閘道188可以向WTRU 102a、102b、102c提供網路112,其可以包括由其他服務提供者擁有或操作的其他有線或無線網路。
儘管未在第15E圖中顯示,應當理解的是,RAN 105可以連接至其他ASN,並且核心網路109可以連接至其他核心網路。RAN 105和其他ASN之間的通信鏈路可以定義為R4參考點,其可以包括用於協調RAN 105和其他ASN之間的WTRU 102a、102b、102c的移動性的協定。核心網路109和其他核心網路之間的通信鏈路可以定義為R5參考點,其可以包括用於促進本地核心網路和被訪問核心網路之間的互通的協定。
已經揭露了用於使用交叉平面濾波的增強色度編碼的系統、方法和手段。可以例如使用從分別與參考、預測或重建色度樣本對應的亮度樣本的1-D或2-D MxN視窗(濾波器支援區)的交叉平面濾波導出的資訊來增強參考、預測及/或重建色度樣本。亮度樣本可以被重建或填充。可以例如基於方向性內預測模式自適應選擇濾波器支援區。可以例如針對應用性而分類交叉平面濾波器,並可以例如基於濾波器支援區、針對目前區塊使用內還是間預測模式、使用整數還是分數像素運動向量及/或在間預測中是否使用參考圖像來自適應選擇交叉平面濾波器。傳訊可以被提供給解碼器,例如以表明以下的至少一者:是否賦能色度增強、色度增強是否被應用到目前區塊、交叉平面濾波器類型、交叉平面濾波器(例如濾波器集合)和對應交叉平面濾波器係數。解碼器可以基於接收的傳訊來選擇要應用到濾波器支援區的交叉平面濾波器。
雖然上文以特定的組合描述了特徵和元素,但是本領域中具有通常知識者將理解每個特徵或元素能夠單獨使用或與其他特徵和元素進行任何組合使用。此外,這裡描述的方法可以用電腦程式、軟體或韌體實現,其可包含到由電腦或處理器執行的電腦可讀媒體中。電腦可讀媒體的示例包括電子信號(經由有線或無線連接傳送)和電腦可讀儲存媒體。電腦可讀儲存媒體的示例包括但不限制為:唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體記憶體裝置、磁性媒體(例如內部硬碟和抽取式磁碟)、磁光媒體和光學媒體(例如CD-ROM磁碟和數位多功能光碟(DVD))。與軟體相關聯的處理器用於實現射頻收發器,用於WTRU、UE、終端、基地台、RNC或任何主機電腦。
100‧‧‧通信系統
102、102a、102b、102c、102d‧‧‧無線發射/接收單元(WTRU)
103/104/105、RAN‧‧‧無線電存取網路
106/107/109‧‧‧核心網路
108、PSTN‧‧‧公共交換電話網路
110‧‧‧網際網路
112‧‧‧其他網路
114a、114b、180a、180b、180c‧‧‧基地台
115/116/117‧‧‧空中介面
118‧‧‧處理器
120‧‧‧收發器
122‧‧‧傳輸/接收元件
124‧‧‧揚聲器/麥克風
126‧‧‧鍵盤
128‧‧‧顯示器/觸控板
130‧‧‧不可移式記憶體
132‧‧‧可移式記憶體
134‧‧‧電源
136‧‧‧全球定位系統(GPS)晶片組
138‧‧‧週邊裝置
140a、140b、140c‧‧‧節點B
142a、142b、RNC‧‧‧無線電網路控制器
144、MGW‧‧‧媒體閘道
146、MSC‧‧‧行動交換中心
148、SGSN‧‧‧服務GPRS支援節點
150、GGSN‧‧‧閘道GPRS支援節點
160a、160b、160c‧‧‧e節點B(eNB)
162、MME‧‧‧移動性管理閘道
164‧‧‧服務閘道
166‧‧‧封包資料網路(PDN)閘道
182‧‧‧存取服務網路(ASN)閘道
184、MIP-HA‧‧‧移動IP本地代理
186‧‧‧驗證、授權、記帳(AAA)伺服器
188‧‧‧閘道
900、1000‧‧‧色度參考樣本增強的示例
902A、902B、1002A、1002B、1202A、1202B、1202C、1402、1404‧‧‧亮度樣本區
904A、904B‧‧‧亮度樣本
906A、906B‧‧‧參考亮度樣本
908A、908B‧‧‧預測亮度樣本
910A、910B、1406、1408‧‧‧應用
912A、912B、1012A、1012B‧‧‧增強參考色度樣本
1004A、1004B、1008A、1008B‧‧‧重建亮度樣本
1100、1300‧‧‧混合視訊編碼裝置
1102、1302‧‧‧輸入視訊
1104‧‧‧內預測
1106‧‧‧間預測
1108‧‧‧預測殘差
1110‧‧‧變換及/或量化
1112、1312‧‧‧色度增強
1114、1308‧‧‧預測區塊
1204A、1204B、1204C‧‧‧偏移
1206A、1206B、1206C‧‧‧色度樣本
1208‧‧‧沒有被重建的亮度樣本
1304‧‧‧重建區塊
1306‧‧‧逆量化/逆變換
1410‧‧‧目前區塊
1412、1414‧‧‧增強的重建色度樣本
dx 、dy ‧‧‧向量
Iub、IuCS、Iur、IuPS、S1、X2‧‧‧介面
PART_2Nx2N、PART_2NxN、PART_Nx2N、PART_NxN、PART_2NxnU、PART_2NxnD、PART_nLx2N、PART_nRx2N‧‧‧分區
R1、R3、R6、R8‧‧‧參考點
本專利或申請案檔案包含至少一張彩色圖。經請求並支付必要費用,專利局可以提供帶有彩色附圖的專利或專利申請公開的副本。 第1圖顯示基於區塊的混合視訊編碼器的示例; 第2圖顯示基於區塊的混合視訊解碼器的示例; 第3圖顯示用於預測的參考樣本Rx,y 以得到針對區塊尺寸NxN樣本的預測樣本Px,y 的示例; 第4圖顯示用於內預測單元的分區模式的示例; 第5圖顯示角度內預測模式的示例; 第6圖顯示內邊界濾波器的示例; 第7圖顯示不同分區HEVC間預測編碼的示例; 第8A圖顯示使用運動向量的運動補償預測的示例; 第8B圖顯示分數像素內插的示例; 第9圖顯示使用交叉平面濾波的色度參考樣本增強的示例,其不使用來自目前區塊的重建亮度樣本; 第10圖顯示利用使用來自目前區塊的重建亮度樣本的交叉平面濾波進行色度參考樣本增強的示例; 第11圖顯示使用預測色度樣本增強的基於區塊的混合編碼器的示例; 第12圖顯示使用交叉平面濾波的增強預測色度樣本的示例; 第13圖顯示使用重建色度樣本的色度增強的基於區塊的混合編碼器的示例; 第14圖顯示使用交叉平面濾波的色度重建樣本增強的示例; 第15A圖是可以實施一個或多個揭露的實施方式的示例通信系統的系統圖; 第15B圖是可以在第15A圖中示出的通信系統中使用的示例無線傳輸/接收單元(WTRU)的系統圖; 第15C圖是可以在第15A圖中示出的通信系統中使用的示例無線電存取網路和示例核心網路的系統圖; 第15D圖是可以在第15A圖中示出的通信系統中使用的另一示例無線電存取網路和示例核心網路的系統圖; 第15E圖是可以在第15A圖中示出的通信系統中使用的另一示例無線電存取網路和示例核心網路的系統圖。
1000‧‧‧色度參考樣本增強的示例
1002A、1002B‧‧‧亮度樣本區
1004A、1004B、1008A、1008B‧‧‧重建亮度樣本
1012A、1012B‧‧‧增強參考色度樣本

Claims (26)

  1. 一種視訊編碼的方法,該方法包括: 接收與一目前圖像相關聯的一交叉平面濾波器的一指示,該目前圖像包括一內編碼視訊區塊以及用於預測該內編碼視訊區塊的多個參考樣本; 確定用於增強該目前圖像中的一對應色度樣本的該目前圖像中的一亮度樣本區; 將該交叉平面濾波器應用到該亮度樣本區中的多個亮度樣本以確定一偏移,該交叉平面濾波器包括一高通濾波器;以及 將該偏移應用到該對應色度樣本以確定一增強的色度樣本。
  2. 如申請專利範圍第1項所述的方法,其中該亮度樣本區包括一不可用亮度樣本,以及該方法更包括在將該交叉平面濾波器應用到該多個亮度樣本之前以一鄰近可用亮度樣本取代該不可用亮度樣本。
  3. 如申請專利範圍第1項所述的方法,更包括基於一接收到的色度增強指示符來確定是否應用該交叉平面濾波器,其中該接收到的色度增強指示符在一區塊級被接收。
  4. 如申請專利範圍第1項所述的方法,其中該亮度樣本區是一第一亮度樣本區,該多個亮度樣本是一第一多個亮度樣本,該偏移是一第一偏移,該對應色度樣本是一第一對應色度樣本,以及該增強的色度樣本是一第一增強的色度樣本,該方法更包括: 確定該目前圖像中的一第二亮度樣本區,以用於增強該目前圖像中的一第二對應色度樣本; 將該交叉平面濾波器應用到該第二亮度樣本區中的一第二多個亮度樣本以確定一第二偏移;以及 將該第二偏移應用到該第二對應色度樣本以確定一第二增強的色度樣本。
  5. 如申請專利範圍第1項所述的方法,其中該亮度樣本區是基於一選出的內預測模式而被確定。
  6. 如申請專利範圍第1項所述的方法,更包括基於一選出的內預測模式確定要應用的該交叉平面濾波器。
  7. 如申請專利範圍第1項所述的方法,其中該對應色度樣本是該內編碼視訊區塊中的一預測色度樣本,以及該增強的色度樣本用於預測。
  8. 如申請專利範圍第1項所述的方法,其中該多個亮度樣本包括一預測的亮度樣本,使得該交叉平面濾波器在該亮度樣本的重建之前被應用到該預測的亮度樣本。
  9. 如申請專利範圍第1項所述的方法,其中該對應色度樣本是在環內濾波之前的一重建的色度樣本,以及該增強的色度樣本用於在應用環內濾波之前取代該對應色度樣本。
  10. 如申請專利範圍第1項所述的方法,其中該對應色度樣本是用於預測該內編碼視訊區塊中的一個或多個樣本的一參考色度樣本。
  11. 如申請專利範圍第1項所述的方法,其中該多個亮度樣本包括一重建的亮度樣本,使得該交叉平面濾波器在重建之後被應用到該重建的亮度樣本。
  12. 如申請專利範圍第1項所述的方法,其中該亮度樣本區包括一3x3區塊亮度樣本。
  13. 如申請專利範圍第1項所述的方法,其中所接收的指示包括與該交叉平面濾波器相關聯的一個或多個濾波器係數。
  14. 一種視訊編碼裝置,包括: 一處理器,被配置為: 接收與一目前圖像相關聯的一交叉平面濾波器的一指示,其中該目前圖像包括一內編碼視訊區塊以及用於預測該內編碼視訊區塊的多個參考樣本; 確定該目前圖像中的一亮度樣本區,以用於增強該目前圖像中的一對應色度樣本; 將該交叉平面濾波器應用到該亮度樣本區中的多個亮度樣本以確定一偏移,該交叉平面濾波器包括一高通濾波器;以及 將該偏移應用到該對應色度樣本以確定一增強的色度樣本。
  15. 如申請專利範圍第14項所述的視訊編碼裝置,其中該亮度樣本區包括一不可用亮度樣本,以及其中該處理器進一步被配置為在將該交叉平面濾波器應用到該多個亮度樣本之前以一鄰近可用亮度樣本取代該不可用亮度樣本。
  16. 如申請專利範圍第14項所述的視訊編碼裝置,其中該處理器進一步被配置為基於一接收到的色度增強指示符來確定是否應用該交叉平面濾波器,其中該接收到的色度增強指示符在一區塊級被接收。
  17. 如申請專利範圍第14項所述的視訊編碼裝置,其中該亮度樣本區是一第一亮度樣本區,該多個亮度樣本是一第一多個亮度樣本,該偏移是一第一偏移,該對應色度樣本是一第一對應色度樣本,以及該增強的色度樣本是一第一增強的色度樣本,該處理器進一步被配置為: 確定該目前圖像中的一第二亮度樣本區以用於增強該目前圖像中的一第二對應色度樣本; 將該交叉平面濾波器應用到該第二亮度樣本區中的一第二多個亮度樣本以確定一第二偏移;以及 將該第二偏移應用到該第二對應色度樣本以確定一第二增強的色度樣本。
  18. 如申請專利範圍第14項所述的視訊編碼裝置,其中該亮度樣本區是基於一選出的內預測模式而被確定。
  19. 如申請專利範圍第14項所述的視訊編碼裝置,其中該處理器進一步被配置為基於一選出的內預測模式確定要應用的該交叉平面濾波器。
  20. 如申請專利範圍第14項所述的視訊編碼裝置,其中該對應色度樣本是該內編碼視訊區塊中的一預測色度樣本,以及該增強的色度樣本用於預測。
  21. 如申請專利範圍第14項所述的視訊編碼裝置,其中該多個亮度樣本包括一預測的亮度樣本,使得該交叉平面濾波器在該亮度樣本的重建之前被應用到該預測的亮度樣本。
  22. 如申請專利範圍第14項所述的視訊編碼裝置,其中該對應色度樣本是在環內濾波之前的一重建的色度樣本,以及該增強的色度樣本用於在應用環內濾波之前取代該對應色度樣本。
  23. 如申請專利範圍第14項所述的視訊編碼裝置,其中該對應色度樣本是用於預測該內編碼視訊區塊中的一個或多個色度樣本的一參考色度樣本。
  24. 如申請專利範圍第14項所述的視訊編碼裝置,其中該多個亮度樣本包括一重建的亮度樣本,使得該交叉平面濾波器在重建之後被應用。
  25. 如申請專利範圍第14項所述的視訊編碼裝置,其中該亮度樣本區包括一3x3區塊亮度樣本。
  26. 如申請專利範圍第14項所述的視訊編碼裝置,其中所接收的指示包括與該交叉平面濾波器相關聯的一個或多個濾波器係數。
TW105121738A 2015-07-08 2016-07-11 使用交叉平面濾波增強色度編碼的裝置及方法 TWI715598B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562190008P 2015-07-08 2015-07-08
US62/190,008 2015-07-08

Publications (2)

Publication Number Publication Date
TW201724854A true TW201724854A (zh) 2017-07-01
TWI715598B TWI715598B (zh) 2021-01-11

Family

ID=56555775

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105121738A TWI715598B (zh) 2015-07-08 2016-07-11 使用交叉平面濾波增強色度編碼的裝置及方法

Country Status (7)

Country Link
US (2) US11438605B2 (zh)
EP (1) EP3320684A1 (zh)
JP (2) JP2018527784A (zh)
KR (4) KR20230128138A (zh)
CN (2) CN113810691A (zh)
TW (1) TWI715598B (zh)
WO (1) WO2017007989A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111434109A (zh) * 2017-11-28 2020-07-17 韩国电子通信研究院 图像编码/解码方法和装置以及存储有比特流的记录介质

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
WO2019059107A1 (ja) * 2017-09-20 2019-03-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
US20210067802A1 (en) * 2017-09-26 2021-03-04 Samsung Electronics Co., Ltd. Video decoding method and device using cross-component prediction, and video encoding method and device using cross-component prediction
KR102207258B1 (ko) * 2018-01-15 2021-01-25 삼성전자주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
WO2019147403A1 (en) 2018-01-29 2019-08-01 Interdigital Vc Holdings, Inc. Encoding and decoding with refinement of the reconstructed picture
WO2020057506A1 (zh) * 2018-09-21 2020-03-26 华为技术有限公司 色度块预测方法及装置
MX2021003166A (es) * 2018-09-21 2021-05-14 Huawei Tech Co Ltd Aparato y metodo para cuantificacion inversa.
WO2020069667A1 (en) * 2018-10-05 2020-04-09 Huawei Technologies Co., Ltd. Intra prediction method and device
KR102653562B1 (ko) 2018-11-06 2024-04-02 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 위치에 따른 인트라 예측
WO2020108591A1 (en) 2018-12-01 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
JP7317965B2 (ja) 2018-12-07 2023-07-31 北京字節跳動網絡技術有限公司 コンテキストベースのイントラ予測
CN113396584A (zh) * 2018-12-07 2021-09-14 弗劳恩霍夫应用研究促进协会 用于增强交叉分量线性模型参数的计算的稳健性的编码器、解码器和方法
AU2018454766A1 (en) * 2018-12-25 2021-04-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Decoding prediction method and apparatus, and computer storage medium
CA3128429C (en) 2019-02-22 2023-11-21 Beijing Bytedance Network Technology Co., Ltd. Neighbouring sample selection for intra prediction
BR112021015017B1 (pt) 2019-02-24 2022-07-26 Bytedance Inc. Método e aparelho para codificar dados de vídeo, e, mídia de armazenamento
CN113767631B (zh) 2019-03-24 2023-12-15 北京字节跳动网络技术有限公司 用于帧内预测的参数推导中的条件
CN115720268A (zh) * 2019-03-26 2023-02-28 北京字节跳动网络技术有限公司 用于帧间预测的参数推导
EP3935839A4 (en) * 2019-04-09 2022-06-22 Beijing Dajia Internet Information Technology Co., Ltd. METHODS AND DEVICES FOR SIGNALING MERGE MODES IN VIDEO ENCODING
SG11202110936PA (en) 2019-04-12 2021-11-29 Beijing Bytedance Network Technology Co Ltd Chroma coding mode determination based on matrix-based intra prediction
JP7403555B2 (ja) 2019-04-16 2023-12-22 北京字節跳動網絡技術有限公司 イントラコーディングモードにおけるマトリクスの導出
CN117097912A (zh) 2019-05-01 2023-11-21 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的上下文编码
CN113812150B (zh) 2019-05-01 2023-11-28 北京字节跳动网络技术有限公司 使用滤波的基于矩阵的帧内预测
BR112021022868A2 (pt) 2019-05-22 2022-01-04 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeos, aparelho para processar dados de vídeo e meios de armazenamento e gravação não transitórios legíveis por computador
CN113924775B (zh) 2019-05-31 2023-11-14 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的限制的上采样
WO2020244610A1 (en) 2019-06-05 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Context determination for matrix-based intra prediction
JP2022536967A (ja) * 2019-06-21 2022-08-22 ヴィド スケール インコーポレイテッド オプティカルフローによる動き補償のための精度精緻化
CN114270850A (zh) * 2019-08-08 2022-04-01 松下电器(美国)知识产权公司 用于视频编码的系统和方法
WO2021025168A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
WO2021025167A1 (en) * 2019-08-08 2021-02-11 Panasonic Intellectual Property Corporation Of America System and method for video coding
CN114128284A (zh) * 2019-08-08 2022-03-01 松下电器(美国)知识产权公司 用于视频编码的系统和方法
US11197030B2 (en) 2019-08-08 2021-12-07 Panasonic Intellectual Property Corporation Of America System and method for video coding
GB2586484B (en) * 2019-08-20 2023-03-08 Canon Kk A filter
US20220295056A1 (en) * 2019-08-28 2022-09-15 Kt Corporation Video signal processing method and device
JP7368602B2 (ja) 2019-08-29 2023-10-24 エルジー エレクトロニクス インコーポレイティド 映像コーディング装置及び方法
WO2021049593A1 (en) 2019-09-11 2021-03-18 Panasonic Intellectual Property Corporation Of America System and method for video coding
CN117615155A (zh) 2019-09-19 2024-02-27 北京字节跳动网络技术有限公司 视频编解码中的参考样点位置推导
KR20220065758A (ko) 2019-09-20 2022-05-20 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 코딩 블록의 스케일링 프로세스
EP4035362A1 (en) * 2019-09-23 2022-08-03 VID SCALE, Inc. Joint component video frame filtering
EP4042689A4 (en) 2019-10-28 2023-06-07 Beijing Bytedance Network Technology Co., Ltd. SIGNALING AND SYNTAX ANALYSIS BASED ON A COLOR COMPONENT
EP4042684A4 (en) 2019-10-29 2022-11-30 Beijing Bytedance Network Technology Co., Ltd. SIGNALING AN ADAPTIVE CROSS-COMPONENT LOOP FILTER
CN113132739B (zh) * 2019-12-31 2022-11-01 杭州海康威视数字技术股份有限公司 边界强度确定、编解码方法、装置及其设备
US11303936B2 (en) * 2020-02-21 2022-04-12 Tencent America LLC Method and apparatus for filtering
US11575909B2 (en) * 2020-04-07 2023-02-07 Tencent America LLC Method and apparatus for video coding
CN114007067B (zh) * 2020-07-28 2023-05-23 北京达佳互联信息技术有限公司 对视频信号进行解码的方法、设备和介质
EP3984222A4 (en) * 2020-08-13 2022-10-26 Beijing Dajia Internet Information Technology Co., Ltd. ENHANCED CHROMINANCE CODING IN INTER-COMPONENT ADAPTIVE SAMPLE SHIFT
WO2023097064A1 (en) * 2021-11-25 2023-06-01 Beijing Dajia Internet Information Technology Co., Ltd. Cross-component sample adaptive offset

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4701783A (en) 1982-09-14 1987-10-20 New York Institute Of Technology Technique for encoding and decoding video with improved separation of chrominance and luminance
US5450216A (en) * 1994-08-12 1995-09-12 International Business Machines Corporation Color image gamut-mapping system with chroma enhancement at human-insensitive spatial frequencies
US6462790B1 (en) * 1999-03-12 2002-10-08 Fortel Dtv, Inc. Digital comb filter for decoding composite video signals
US7102669B2 (en) 2002-04-02 2006-09-05 Freescale Semiconductor, Inc. Digital color image pre-processing
US7333544B2 (en) 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7822286B2 (en) * 2003-11-07 2010-10-26 Mitsubishi Electric Research Laboratories, Inc. Filtering artifacts in images with 3D spatio-temporal fuzzy filters
US7397515B2 (en) 2004-01-30 2008-07-08 Broadcom Corporation Method and system for cross-chrominance removal using motion detection
US7724949B2 (en) * 2004-06-10 2010-05-25 Qualcomm Incorporated Advanced chroma enhancement
JP2008536414A (ja) 2005-04-13 2008-09-04 ゴットフリート・ヴィルヘルム・ライプニッツ・ウニヴェルジテート・ハノーヴァー ビデオの拡張された符号化方法及び装置
TWI314720B (en) 2005-05-31 2009-09-11 Himax Tech Inc 2d yc separation device and yc separation system
CN101009842B (zh) 2006-01-11 2012-02-01 华为技术有限公司 可分级视频压缩中插值的方法与装置
KR101266168B1 (ko) 2006-08-16 2013-05-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
BRPI0915591A2 (pt) * 2008-07-04 2016-08-02 Toshiba Kk método e aparelho de codificação/decodificação de imagem em movimento
US8270466B2 (en) 2008-10-03 2012-09-18 Sony Corporation Adaptive decimation filter
CN101778371B (zh) 2009-01-09 2012-08-29 电信科学技术研究院 寻呼方法及装置
JPWO2011033643A1 (ja) 2009-09-17 2013-02-07 株式会社東芝 動画像符号化方法及び動画像復号化方法
US8638342B2 (en) * 2009-10-20 2014-01-28 Apple Inc. System and method for demosaicing image data using weighted gradients
EP2502115A4 (en) * 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
KR101682147B1 (ko) * 2010-04-05 2016-12-05 삼성전자주식회사 변환 및 역변환에 기초한 보간 방법 및 장치
CN201726499U (zh) 2010-05-04 2011-01-26 武汉光华芯科技有限公司 复合视频信号亮色分离系统
CN101902653B (zh) 2010-06-25 2013-04-24 杭州爱威芯科技有限公司 一种基于亮度样本的方向预测的场内yc分离方法
US20120008687A1 (en) 2010-07-06 2012-01-12 Apple Inc. Video coding using vector quantized deblocking filters
US9154788B2 (en) 2011-06-03 2015-10-06 Panasonic Intellectual Property Corporation Of America Image coding method and image decoding method
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
EP2849444A3 (en) 2011-06-28 2015-06-24 Samsung Electronics Co., Ltd Video encoding method using merge information to code offset parameters and apparatus therefor, video decoding method and apparatus therefor
US9641866B2 (en) 2011-08-18 2017-05-02 Qualcomm Incorporated Applying partition-based filters
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
US9344715B2 (en) * 2011-11-07 2016-05-17 Futurewei Technologies, Inc. Angular table for improving intra prediction
EP2804377A4 (en) * 2012-01-13 2015-12-09 Sharp Kk Image Decoding Device, Image Coding Device and Data Structure of the Coded Data
WO2013155662A1 (en) 2012-04-16 2013-10-24 Mediatek Singapore Pte. Ltd. Methods and apparatuses of simplification for intra chroma lm mode
US20150036744A1 (en) 2012-05-02 2015-02-05 Sony Corporation Image processing apparatus and image processing method
US20140086316A1 (en) 2012-09-24 2014-03-27 Louis Joseph Kerofsky Video compression with color space scalability
TWI652935B (zh) * 2012-09-28 2019-03-01 Vid衡器股份有限公司 視訊編碼方法及裝置
KR102257542B1 (ko) * 2012-10-01 2021-05-31 지이 비디오 컴프레션, 엘엘씨 향상 레이어에서 변환 계수 블록들의 서브블록-기반 코딩을 이용한 스케일러블 비디오 코딩
US9357211B2 (en) * 2012-12-28 2016-05-31 Qualcomm Incorporated Device and method for scalable and multiview/3D coding of video information
WO2014115283A1 (ja) * 2013-01-24 2014-07-31 シャープ株式会社 画像復号装置、および画像符号化装置
WO2014163241A1 (ko) * 2013-04-02 2014-10-09 주식회사 칩스앤미디어 동영상 처리 방법 및 장치
US9503732B2 (en) 2013-04-10 2016-11-22 Arris Enterprises, Inc. Re-sampling with phase offset adjustment for luma and chroma to select filters in scalable video coding
US8810727B1 (en) * 2013-05-07 2014-08-19 Qualcomm Technologies, Inc. Method for scaling channel of an image
US9686561B2 (en) 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
WO2015003753A1 (en) 2013-07-12 2015-01-15 Nokia Solutions And Networks Oy Redirection of m2m devices
US10129542B2 (en) * 2013-10-17 2018-11-13 Futurewei Technologies, Inc. Reference pixel selection and filtering for intra coding of depth map
WO2015062098A1 (zh) 2013-11-01 2015-05-07 华为技术有限公司 一种网络选择方法及核心网设备
JP6750234B2 (ja) 2016-01-28 2020-09-02 横浜ゴム株式会社 タイヤ運用サービスシステムおよび方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111434109A (zh) * 2017-11-28 2020-07-17 韩国电子通信研究院 图像编码/解码方法和装置以及存储有比特流的记录介质

Also Published As

Publication number Publication date
CN113810691A (zh) 2021-12-17
KR20220146717A (ko) 2022-11-01
KR102570911B1 (ko) 2023-08-24
KR20180039052A (ko) 2018-04-17
KR20210104929A (ko) 2021-08-25
CN107836116B (zh) 2021-08-06
JP7208288B2 (ja) 2023-01-18
KR20230128138A (ko) 2023-09-01
US11438605B2 (en) 2022-09-06
JP2021103889A (ja) 2021-07-15
US20180220138A1 (en) 2018-08-02
US20220329831A1 (en) 2022-10-13
WO2017007989A1 (en) 2017-01-12
KR102291835B1 (ko) 2021-08-23
JP2023030205A (ja) 2023-03-07
TWI715598B (zh) 2021-01-11
EP3320684A1 (en) 2018-05-16
CN107836116A (zh) 2018-03-23
KR102460912B1 (ko) 2022-10-28
JP2018527784A (ja) 2018-09-20

Similar Documents

Publication Publication Date Title
JP7208288B2 (ja) クロスプレーンフィルタリングを使用する強化されたクロマコーディング
JP7390300B2 (ja) ビデオコーディングにおける適応ループフィルタを簡略化する方法
JP7398442B2 (ja) ビデオコーディングのための双予測
CN110199523B (zh) 用于帧内平面编码的预测方法
TWI816224B (zh) 視訊解碼或編碼方法及裝置
CN107431817B (zh) 用于调色板译码的方法及装置
JP2020129845A (ja) ビデオ符号化のための成分間相関解除
JP7307184B2 (ja) オプティカルフローを用いたインター予測リファインメントのためのシステム、装置、および方法
CN111345041A (zh) 重叠块运动补偿的复杂度降低
TW201637448A (zh) 非4:4:4螢幕內容視訊調色盤編碼
TW201637449A (zh) 區塊間複製檢索
TW201540053A (zh) Rgb視訊編碼增強系統及方法
CN113396591A (zh) 针对用于基于模板的视频译码的改进的线性模型估计的方法、架构、装置和系统
CN113228634A (zh) 组合的帧内及帧间预测
KR20210142610A (ko) Affine 모션 모델 유도 방법
TW201427426A (zh) 視訊編碼邊緣導向處理方法及裝置
JP7485798B2 (ja) クロスプレーンフィルタリングを使用する強化されたクロマコーディング
JP2022518382A (ja) マージモード動きベクトル候補を用いる改良されたイントラプラナー予測
RU2811563C2 (ru) Системы, устройства и способы для уточнения интерпрогнозирования с помощью оптического потока
WO2024079185A1 (en) Equivalent intra mode for non-intra predicted coding blocks
TW202416715A (zh) 非幀內預測編碼區塊的等效幀內模式
TW201444342A (zh) 功率感知視訊串流複雜性感知視訊編碼