TW201947932A - 濾波器 - Google Patents

濾波器 Download PDF

Info

Publication number
TW201947932A
TW201947932A TW108115545A TW108115545A TW201947932A TW 201947932 A TW201947932 A TW 201947932A TW 108115545 A TW108115545 A TW 108115545A TW 108115545 A TW108115545 A TW 108115545A TW 201947932 A TW201947932 A TW 201947932A
Authority
TW
Taiwan
Prior art keywords
chroma
boundary
samples
image
filter
Prior art date
Application number
TW108115545A
Other languages
English (en)
Inventor
克里斯托 吉克
派翠斯 昂諾
喬納森 泰格特
吉羅姆 拉契
Original Assignee
日商佳能股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商佳能股份有限公司 filed Critical 日商佳能股份有限公司
Publication of TW201947932A publication Critical patent/TW201947932A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明提供一種處理影像的一或多部分之方法，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該方法包含：針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。

Description

濾波器
本發明相關於視訊分量區塊之編碼或解碼。本發明實施例特別有用於，但非排他性的，當控制濾波器用於將此等分量之樣本濾波。
當編碼或解碼視訊分量區塊時，通常施加濾波以降低區塊失真，例如，在視訊分量的重建訊號中(預測或轉換)區塊邊界所發生的可見不連續性。當基於區塊(運動)預測與轉換編碼一起使用時，通常會發生此類區塊失真。
故，例如在諸如H.264與HEVC(高效率視訊編碼(High Efficiency Video Coding)或H.265)等視訊編碼標準時，使用去區塊濾波器(亦已知為in-loop filter)以將此等區塊失真濾波(例如，移除或降低該等區塊失真造成之影響)。舉例而言，為了編碼或解碼色度(Chroma (chrominance))分量之區塊，HEVC使用基於Chroma控制參數選擇方法之簡易色度去區塊濾波器，該方法使用基於如HEVC標準文件協議書ITU-T H.265(ITU-T H.265(12/2016))中所指定的色度量化參數Q來確定的參數tC 。相較之下，HEVC使用較複雜的亮度去區塊濾波器用於編碼或解碼亮度(Luma)分量之區塊，該亮度去區塊濾波器例如基於使用兩個參數β和tC 的Luma控制參數選擇方法，兩者都基於如 HEVC標準文件協議書ITU-T H.265(ITU-T H.265(12/2016))中所指定的亮度量化參數Q來確定。
色度與亮度去區塊濾波器之間的此等差異意味在對亮度分量之區塊樣本施加較精細濾波(例如，以較高解析度或較具細節般濾波)同時對色度分量樣本之區塊施加相對/比較粗糙濾波(例如，以較低解析度或較不具細節般濾波)。為了使色度去區塊濾波更精細，故使用相同Luma控制參數選擇方法，惟由於已經針對Chroma去區塊濾波器考慮過之緣故，因此控制參數之評估緊根據Chroma樣本值。然而，這會導致複雜性顯著的提升，而僅極些微(甚至無)改進色度去區塊濾波之有效性(或解析度)。此外，這僅被應用於一些色彩格式。
本發明實施例目標在於解決一或多前記視訊分量區塊之編碼或解碼的問題或缺點。
根據本發明之態樣，提供如所附申請專利範圍所記載之裝置、方法、程式、電腦可讀取儲存媒體以及訊號。根據本發明之其他態樣，提供一種系統，一種用於控制這種系統的方法，一種用於執行如所附申請專利範圍所記載之方法的裝置，一種用於處理的裝置，一種用於控制去區塊濾波器的裝置，一種儲存如所附申請專利範圍所記載之訊號的媒體儲存裝置，一種儲存如所附申請專利範圍所記載之程式的電腦可讀取儲存媒體或非暫態電腦可讀取儲存媒體，以及一種使用如所附申請專利範圍所記載之編碼方法所產生的位元流。從附屬請求項與隨後說明將能瞭解本發明之其他特徵。
根據本發明之第一態樣，提供一種針對影像的一或多部分控制濾波器之方法，該方法包含基於該影像之第二分量的樣本值來控制對該影像之一或多部分的第一分量樣本的濾波。適當地，第一分量樣本是取自兩或更多個第一分量影像部分，該第一分量影像部分包括在第一邊界的一側上的第一分量影像部分和在第一邊界的另一側上的另一第一分量影像部分，以及該樣本值是第二分量樣本之樣本值，該第二分量樣本是取自與對應第二邊界相鄰的一個或多第二分量影像部分。適當地，該第一分量是色度以及該第二分量是亮度。適當地，該第一分量影像部分是色度樣本區塊以及該第二分量影像部分是亮度樣本區塊。適當地，該色度樣本區塊(或色度樣本或第一分量樣本)以及該亮度樣本區塊(或亮度樣本或第二分量樣本)對應於/相關於或並置於該影像中像素/元素之相同群組/區塊/單元。適當地，該第一邊界與第二邊界位於相同位置及/或對應於/相關於或並置於該影像部分之相同像素。適當地，所述控制係基於三個或更多第二分量樣本值之間的變異。適當地，所述變異係基於變異之測量。適當地，所述控制係基於取自第二分量樣本之至少兩個相鄰區塊的三個或更多第二分量樣本值之間的變異，以針對該第一分量樣本之第一分量區塊執行。適當地，該第二分量樣本之至少兩個相鄰區塊包含該第一分量區塊之對應區塊與其相鄰區塊。適當地，對應區塊係該第一分量樣本之第一分量區塊之並置區塊(亦即，在對應位置(並且具有相同尺寸))。適當地，該對應區塊與第一分量區塊係相關於該影像之相同像素/元素區塊。適當地，所述控制包含判定是否基於該變異對該第一分量樣本使用濾波器。適當地，該樣本值是取自與邊界相鄰的二或更多第二分量影像部分之第二分量樣本的樣本值；以及該變異係基於取自該樣本值之測量。適當地，所述變異係基於測量d；並且針對第二分量樣本pJi 與qJi ，其中J=0..2 以及i={0,3}時，d=|p20 -2p10 +p00 |+|p23 -2p13 +p03 |+|q20 -2q10 +q00 |+|q23 -2q13 +q03 |。適當地，針對J=0..2且i={0,3}，該第二分量樣本pJi 是取自第二分量區塊P，而qJi 是取自另一第二分量區塊Q，以及該判定包含比較測量d與臨界值，該臨界值係取決於針對第二分量區塊P及Q之量化參數。適當地，不論是測量d或臨界值中任一者或兩者皆是獨立於第一分量樣本之樣本值或用於第一分量樣本之量化參數。適當地，濾波器之控制或判定是否使用該濾波器係獨立於針對第二分量樣本之濾波所做出的濾波決策。適當地，針對第一分量樣本的濾波器之控制或判定是否使用該濾波器係取決於根據該變異以及測量d或臨界值之第一處理/條件/判定，以及針對第二分量樣本的濾波器之濾波決策係取決於根據(該)變異、其(該)測量或(該)臨界值之第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對第二分量樣本所做出之濾波決策至少相關於下述一者：是否針對第二分量樣本使用濾波器；針對第二分量樣本賦能或去能濾波器之使用；或當將第二分量樣本濾波時用於濾波器之濾波參數。替代地，不論是測量d或臨界值中任一者或兩者皆是取決於下述一或多者：第一分量樣本之樣本值、用於第一分量樣本之量化參數或編碼參數。適當地，該測量指示橫跨至少兩個相鄰區塊的至少一些第二分量樣本值(例如，亮度樣本)和/或橫跨至少兩個相鄰區塊之間的邊界的變異/平滑度/平坦度，以及對在第一分量樣本(例如，色度樣本)的至少兩個相鄰區塊之間的對應邊界使用該濾波。適當地，該控制包含基於取決於該測量之條件而賦能或去能濾波器之使用。適當地，該控制包含：獲得測量；以及基於該獲得到的測量來做出判定。適當地，基於該獲得的/計算得到的測量之所述判定包括：比較獲得的/計算得到的測量與臨界值(例如，基於諸如bS、β、QP(或Q或Qp或qP)、pJi & qJi 等一或多樣本值、編碼參數或量化參數的任意組合之函數的臨界值，該等樣本值或參數是基於亮度及色度樣本之任一者或兩者所評估的)；以及基於該比較判定對第一分量樣本(例如，色度樣本)使用濾波，及/或當判定要使用該濾波時，判定用於該濾波之濾波參數。適當地，該控制包含基於第二分量的至少一樣本值，或若依附於請求項2則根據該變異，來判定用於該濾波器之濾波參數。適當地，該濾波參數適用於控制下述之至少一者：濾波強度；濾波類型；或濾波範圍。適當地，該影像之第二分量樣本之樣本值是重建的第二分量樣本值。適當地，第一分量樣本之樣本值是重建的第一分量樣本值。適當地，第一分量樣本值與相關聯重建的第二分量樣本值透過預設關係而彼此相關聯。適當地，該預設關係是它們彼此對應的或彼此相互關聯或並置。可針對各樣本值個別界定其對應關係、或相關聯性或並置、關係，或者界定第一分量樣本值之區塊/群組/單元與第二分量樣本值之區塊/群組/單元之間的該對應關係、或相關聯性或並置、關係。適當地，該預設關係是它們與要處理的當前像素/元素區塊的至少一個像素/元素相關聯，例如它們對應於或與至少一個像素/元素的樣本值相關聯或並置。可針對各樣本值個別界定其對應關係、或相關聯性或並置、關係，或者界定樣本值之區塊/群組/單元對樣本值之區塊/群組/單元之間的該對應關係、或相關聯性或並置、關係。應瞭解，可對第一分量樣本或第二分量樣本之區塊施加降取樣或上取樣，以在降取樣/上取樣之後可以建立該等區塊之間的預設關係或建立與當前像素/元素區塊之至少一像素/元素之預設關係。適當地，該第一分量樣本及該相關第二分量樣本是與將被處裡之相同影像或影像部分或訊框之像素/元素區塊相關聯。替代地，只要在處理第一分量樣本時重建樣本值是可用的，則該第一分量樣本及該相關第二分量樣本是與不同影像或影像部分或訊框之像素/元素區塊相關聯。適當地，針對該影像的一個或多個部分，對應的第一分量樣本之數量是小於對應的第二分量樣本之數量。適當地，該影像的一個或多個部分可以以一種令對應的第一分量樣本之數量是小於對應的第二分量樣本之數量的格式處理。適當地，該影像或影像部分係以4：2：0之色彩格式處理。適當地，該第一分量樣本是該影像之一或多部分之色度樣本且該第二分量樣本是該影像之一或多部分之亮度樣本，以及該濾波器是用於該影像之一或多部分之色度去區塊濾波器。適當地，該影像或影像部分已經色度次取樣。適當地，基於該影像的第二分量的樣本值之控制包括基於用於亮度去區塊濾波器的一或多個參數來控制色度去區塊濾波器。適當地，亮度去區塊濾波器是HEVC相容的。
根據本發明之第二態樣，提供一種處理影像的一或多部分之方法，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該方法包含：基於亮度部分中複數個亮度樣本判定下述至少一者：是否對色度部分的邊界使用濾波器；對色度部分之邊界賦能或去能濾波器之使用；當對色度部分之邊界濾波時用於濾波器之濾波參數；或(針對)色度部分中複數個色度樣本之間的變異之測量(的預測子/估計)。適當地，該影像部分已經色度次取樣以獲得該色度部分。適當地，該判定是獨立於針對亮度樣本或亮度部分之濾波所做出的濾波決策。適當地，該判定係取決於基於複數個亮度樣本之間的變異、該複數個亮度樣本之間的變異的測量或基於該複數個亮度樣本的臨界值的第一處理/條件/判定，以及針對亮度樣本或亮度部分做出的濾波決策係取決於基於根據(該)複數個亮度樣本之(該)變異、(該)其測量或(該)臨界值的第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對亮度樣本或亮度部分所做出之濾波決策至少相關於下述一者：是否針對亮度樣本/亮度部分使用濾波器；針對亮度樣本/亮度部分賦能或去能濾波器之使用；或當將亮度樣本/亮度部分濾波時用於濾波器之濾波參數。適當地，該判定亦是基於一或多色度樣本或編碼資訊/參數，諸如用於色度樣本之運動、編碼類型或量化參數。
根據本發明之第三態樣，提供一種針對影像的一或多部分之色度樣本控制去區塊濾波器之方法，該方法包含基於用於亮度去區塊濾波器之一或多參數來控制該去區塊濾波器，其中該亮度去區塊濾波器是HEVC相容的。適當地，該控制是獨立於針對亮度去區塊濾波器所做出的濾波決策。適當地，該控制是取決於第一處理/條件/判定，以及針對該亮度去區塊濾波器所做出的濾波決策是取決於第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對亮度去區塊濾波器所做出的濾波決策至少相關於下述一者：是否使用亮度去區塊濾波器；賦能或去能亮度去區塊濾波器之使用；或用於亮度去區塊濾波器之濾波參數。適當地，該控制亦是基於一或多色度樣本或編碼資訊/參數，諸如用於色度樣本之運動、編碼類型或量化參數。
根據本發明之第四態樣，提供一種將影像編碼之方法，該方法包含針對該影像之一或多部分根據第一態樣來控制濾波器，或根據第二態樣之處理，或是根據本發明第三態樣來控制去區塊濾波器。適當地，該方法更包含：接收影像；將該接收到的影像編碼以產生位元流；以及處理該經編碼影像，其中該處理包含根據第一態樣之控制，根據第二態樣之處理，或根據本發明第三態樣之控制。適當地，該接收構成接收一系列影像之部分，該編碼構成將該接收到系列影像編碼之部分，以產生位元流，以及該處理構成處理至少一該經編碼影像之部分，以產生可用作用於將另一影像編碼的參考影像之重建影像。適當地，該方法更包含在位元流中提供旗標或資料，該旗標或資料指示下述至少一者：是否使用濾波；濾波之賦能或去能；對應第一及第二分量樣本之識別；基於所考慮濾波之邊界的位置；用於濾波之濾波參數；或者變異之測量。
根據本發明之第五態樣，提供一種將影像解碼之方法，該方法包含針對該影像之一或多部分根據第一態樣來控制濾波器，或根據第二態樣之處理，或是根據本發明第三態樣來控制去區塊濾波器。適當地，該方法更包含：接收位元流；將該接收到位元流解碼以獲得影像；以及處理該獲得的影像，其中該處理包含根據第一態樣之控制，根據第二態樣之處理，或根據本發明第三態樣之控制。適當地，該影像構成一系列影像之部分，該解碼構成將該接收到位元流解碼之部分，以獲得該系列影像，以及該處理構成處理至少一影像之部分，以產生可用作用於將另一影像解碼的參考影像之重建影像。適當地，該方法更包含：從位元流獲得旗標或資料，該旗標或資料指示下述至少一者：是否使用濾波；濾波之賦能或去能；對應第一及第二分量樣本之識別/位置/索引(indice(index))；基於所考慮濾波之邊界的位置；用於濾波之濾波參數；或者變異之測量；以及使用該獲得資料以執行該處理，該處理包含根據第一態樣之控制，根據第二態樣之處理，或根據本發明第三態樣之控制。
根據本發明之第六態樣，提供一種針對影像的一或多部分控制濾波器之裝置，該裝置包含控制器，其經組態以基於該影像之第二分量的樣本值來控制對該影像之一或多部分的第一分量樣本的濾波。適當地，該控制器經組態以執行根據本發明第一態樣、第二態樣、及第三態樣之方法。
根據本發明之第七態樣，提供一種處理影像的一或多部分之裝置，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該裝置包含判定機構，用於：基於亮度部分中複數個亮度樣本判定下述至少一者：是否對色度部分的邊界使用濾波器；對色度部分之邊界賦能或去能濾波器之使用；當對色度部分之邊界濾波時用於濾波器之濾波參數；或色度部分中複數個色度樣本之間的變異之測量。適當地，該影像部分已經色度次取樣以獲得該色度部分。
根據本發明之第八態樣，提供一種針對影像的一或多部分之色度樣本控制去區塊濾波器之裝置，該裝置包含控制器，其經組態以基於用於亮度去區塊濾波器之一或多參數來控制該去區塊濾波器，其中該亮度去區塊濾波器是HEVC相容的。
根據本發明之第九態樣，提供一種用於將影像編碼之裝置，該裝置包含根據第六態樣、第七態樣或第八態樣之裝置。適當地，該裝置更包含：接收器，其經組態以接收影像；編碼器，其經組態以將該接收到的影像編碼以產生位元流；以及處理器，其經組態以處理該經編碼影像，其中該處理器經組態以執行包含根據本發明第一態樣、第二態樣或第三態樣之方法的處理。適當地，該裝置經組態以執行根據第四態樣之方法。根據本發明之第十態樣，提供一種用於將影像解碼之裝置，該裝置包含根據第六態樣、第七態樣或第八態樣之裝置。適當地，該裝置更包含：接收器，其經組態以接收位元流；解碼器，其經組態以將該接收到位元流解碼以獲得影像；以及處理器，其經組態以處理該經獲得影像，其中該處理器經組態以執行包含根據本發明第一態樣、第二態樣或第三態樣之方法的處理。適當地，該裝置經組態以執行根據第五態樣之方法。
根據本發明之第十一態樣，提供一種供應影像之方法，該方法包含：將使用根據第四態樣之編碼方法所編碼之影像之經編碼資料儲存；提供有關該儲存的編碼資料之資訊；以及在請求該影像時提供該儲存的編碼資料。適當地，該提供該儲存的編碼資料包含直接或間接串流該經編碼資料。根據本發明之第十二態樣，提供一種供應影像之系統，該系統包含：根據第六到第十態樣之任意者之裝置；儲存器，經組態以針對或從根據第六到第十態樣之任意者之裝置儲存影像之編碼資料；以及提供機構，經組態以提供有關儲存的編碼資料之資訊，以及在請求該影像時提供該儲存的編碼資料。適當地，該提供該儲存的編碼資料包含直接或間接串流該經編碼資料。
根據本發明之第十三態樣，提供一種包含指令之電腦程式，當該程式被電腦執行時導致該電腦執行根據本發明第一、第二、第三、第四及第五態樣中任一者之方法。根據本發明之第十四態樣，提供一種儲存電腦程式之電腦可讀取儲存媒體，當該程式被執行時導致執行根據本發明第一、第二、第三、第四及第五態樣中任一者之方法。根據本發明之第十五態樣，提供一種攜有針對影像的資訊資料集之訊號或載波，該影像係使用根據第四態樣之方法所編碼且由位元流所表示，該影像包含一組可重建樣本，各可重建樣本具有樣本值，其中該資訊資料集包含基於可重建樣本之第二分量樣本的樣本值用於控制對第一分量樣本之濾波的控制資料。根據本發明之第十六態樣，提供一種儲存根據第十五態樣之訊號或載波之媒體儲存裝置。根據本發明之第十七態樣，提供一種儲存電腦程式之非暫態電腦可讀取儲存媒體，當該程式被執行時導致執行根據本發明第一、第二、第三、第四及第五態樣中任一者之方法。根據本發明之第十八態樣，提供一種電路，或提供一或多處理器及記憶體，經組態以執行根據本發明第一、第二、第三、第四及第五態樣中任一者之方法。根據本發明之第十九態樣，提供一種使用根據本發明第四態樣的編碼方法所產生之位元流。
根據本發明之第二十態樣，提供一種用於處理影像的一或多部分之方法，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該方法包含：針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。適當地，該影像部分已經色度次取樣以獲得該色度部分。適當地，該控制包括針對另一邊界判定一個或多可濾波的色度樣本是否可由另一濾波器所濾波，如果是，則將下述一或多者去能：對一或多可濾波色度樣本使用該濾波器或另一濾波器中任一者或兩者；對該另一邊界使用另一濾波器；或對該邊界使用該濾波器。適當地，該控制包含判定可濾波色度樣本之一或多者是否與另一邊界相鄰，如果是，則將下述一或多者之使用去能：與另一邊界相鄰之一或多色度樣本；該另一邊界；或該邊界。適當地，色度部分包含色度樣本之二或多色度群組/區塊/單元，其間有該邊界。適當地，可被濾波器濾波器之樣本的範圍係經界定為少於(或等於)在一維度(例如，長度或寬度)之色度群組/區塊/單元(與該邊界相鄰)中樣本數量之半數。適當地，亮度部分包含亮度樣本之二或多亮度群組/區塊/單元，其間有該邊界。適當地，該方法更包含針對該亮度部分的邊界控制亮度濾波器，以令亮度樣本可以被該亮度濾波器濾波，其中：當該可濾波色度樣本係與該可濾波亮度樣本相關聯時，或者當該亮度部分邊界係與該色度部分邊界相關聯時，所述針對該色度部分邊界控制該濾波器係基於用於控制該亮度濾波器的參數。適當地，該控制濾波器包含：判定色度部分邊界是否與亮度部分邊界相關聯；以及如果是，則基於複數個亮度樣本或基於用於控制該亮度濾波器的參數來針對該色度部分邊界控制該濾波器；或如果為否，則僅基於色度部分，或者獨立於複數個亮度樣本或獨立於用於控制該亮度濾波器的參數，來針對該色度部分邊界控制該濾波器。適當地，該色度樣本(或色度部分)以及該亮度樣本(或亮度部分)對應於/相關於或並置於該影像或該影像部分中像素/元素之相同群組/區塊/單元。適當地，該色度部分邊界與亮度部分邊界位於相同位置及/或對應於/相關於或並置於該影像或該影像部分之相同像素。適當地，該控制該濾波器包含基於亮度部分中複數個亮度樣本判定下述至少一者：是否對色度部分的邊界使用濾波器；對色度部分之邊界賦能或去能濾波器之使用；當對色度部分之邊界濾波時用於濾波器之濾波參數；或(針對)色度部分中複數個色度樣本之間的變異之測量(的預測子/估計)。適當地，該判定是基於針對對一或多亮度邊界控制或使用亮度濾波器所做出的濾波決策。替代地，該判定是獨立於針對控制亮度濾波器所做出的濾波決策。適當地，該判定是取決於基於亮度樣本之第一處理/條件/判定，以及針對該亮度濾波器所做出的濾波決策是取決於基於亮度樣本之第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對亮度濾波器所做出之濾波決策至少相關於下述一者：是否針對亮度樣本/亮度部分使用該亮度濾波器；針對亮度樣本/亮度部分賦能或去能亮度濾波器之使用；或當將亮度樣本/亮度部分濾波時用於亮度濾波器之濾波參數。替代地，該判定亦是基於一或多色度樣本或用於色度樣本之量化參數。適當地，該亮度部分邊界係可使用HEVC或H.264相容亮度去區塊濾波器而濾波的。適當地，該亮度濾波器係HEVC或H.264相容亮度去區塊濾波器。適當地，對該濾波器施加濾波參數，該濾波參數係獨立於距離該邊界兩個以上樣本之色度樣本。適當地，當該亮度部分之對應邊界對應於該色度部分之另一邊界時，對該濾波器施加濾波參數，該濾波參數係獨立於距離該邊界預定數量以上個樣本之色度樣本。適當地，該預定數量是基於對應於一色度樣本之亮度樣本的數量，例如，該預定數量代表色度與亮度部分之間解析度/密度/尺寸之差異(例如，亮度樣本對色度樣本之比率)。適當地，該預定數量是二(例如，在4：2：0的YUV色彩格式之情況下)，該濾波參數係獨立於距離該邊界兩個以上樣本之色度樣本。適當地，該亮度部分之對應邊界部分重疊色度部分之邊界與另一邊界之任一者或兩者。適當地，對該濾波器施加濾波參數，該濾波參數係獨立於不與該邊界相鄰之可濾波色度樣本。適當地，當該不與邊界相鄰的可濾波色度樣本可透過(或使用下述者將被濾波)針對對不同邊界濾波的濾波器而濾波時，對施加於色度樣本之該濾波器施加濾波參數，該濾波參數係獨立於該可濾波色度樣本。適當地，該濾波參數適用於控制下述之至少一者：濾波強度；濾波類型；或濾波範圍。適當地，對該濾波器施加濾波參數，該濾波參數係獨立於比不與邊界相鄰之一或多樣本之間的最遠樣本還距離該邊界更遠的色度樣本。適當地，在該邊界一側上之第一色度樣本係獨立於在該邊界另一側上之第二色度樣本而被濾波。適當地，該控制濾波器包含判定：是否對第一色度樣本使用濾波器，該判定獨立於是否對第二色度樣本使用濾波器；或者，針對第一色度樣本賦能或去能濾波器之使用，該判定獨立於針對第二色度樣本賦能或去能濾波器之使用。適當地，用於將第一色度樣本濾波之(一或多)第一濾波參數與用於將第二色度樣本濾波之(一或多)第二濾波參數不同。適當地，該獨立濾波係基於該第一或第二色度樣本所屬的色度區塊或單元之類型。適當地，若色度區塊/單元之類型是框間編碼之部分/區塊/單元/片/切片(亦即，色度區塊/單元是框間編碼的)，則發生第一處理/判定；以及若為否，則發生第二處理/判定，其中該第一及第二處理/判定不同。適當地，若色度區塊/單元之類型是框內編碼之部分/區塊/單元/片/切片(亦即，色度區塊/單元是框內編碼的)，則發生第一處理/判定；以及若為否，則發生第二處理/判定，其中該第一及第二處理/判定不同。適當地，該第一處理/判定包含：判定色度部分邊界是否在亮度部分中具有相關聯邊界；以及如果是，則基於亮度部分中複數個亮度樣本或基於用於將相關聯亮度部分邊界濾波所用的參數來針對該色度區塊/單元/樣本控制該濾波器；或如果為否，則僅基於色度樣本，或者獨立於亮度部分中複數個亮度樣本或獨立於用於將相關聯亮度部分邊界濾波所用的參數，來針對該色度區塊/單元/樣本控制該濾波器。適當地，該獨立濾波係基於該第一或第二色度樣本所屬的色度區塊或單元之尺寸。適當地，若色度區塊/單元在一維度中之尺寸(例如，在長度或寬度方向中之樣本數)是小於濾波器之濾波範圍中可濾波色度樣本之數量的兩倍(亦即，由濾波器可濾波或在該濾波器濾波範圍內之色度樣本之數量的兩倍)時，則發生第一處理/判定，以及若為否，則發生第二處理/判定，其中該第一及第二處理/判定不同。適當地，第一處理/判定包含判定不使用或去能針對色度區塊/單元之濾波，抑或不使用或去能針對距離該邊界最遠的樣本之濾波範圍數量之濾波。適當地，第二處理/判定包含判定要使用或賦能針對色度區塊/單元或針對第一/第二色度樣本之濾波。適當地，對該濾波器施加濾波參數，該濾波參數係基於量化參數Q(或QP或Qp或qP)與下述一或多者所判定的：在該邊界一側上遠離該邊界J個樣本之色度樣本的樣本值pJi ，使得p0i 是最近的色度樣本；以及該邊界另一側上遠離該邊界J個樣本之色度樣本的樣本值qJi ，使得q0i 是最近的色度樣本。適當地，濾波參數係基於下述者所判定：
Δ=Clip3(-tC ,tC ,((((q0i -p0i )＜＜2)+p1i -q1i +4)＞＞3))；Δp=Δ＞＞1；Δq=Δ＞＞1；p1i ′=Clip1C(p1i +Δp)；以及q1i ′=Clip1C(q1i -Δq)，
其中：＞＞是按位元右移運算子以及＜＜是按位元左移運算子；Clip3(min, max, val)是一種其中若val＜min則Clip3(min, max, val)=min；抑或若val＞max則Clip3(min, max, val)=max；以及其他情況下Clip3(min, max, val)=val之函數；Clip1C(val)=Clip3(minC, maxC, val)，以及minC與maxC是色度樣本最小值及最大值；tC 是基於量化參數Q所判定的參數；pJi 是在該邊界一側上距離該邊界J個樣本之色度樣本的樣本值，使得p0i 是最近的色度樣本；以及qJi 是該邊界另一側上距離該邊界J個樣本之色度樣本的樣本值，使得q0i 是最近的色度樣本。適當地，該量化參數Q是(或QP或Qp)亮度部分或色度部分之量化參數Q，該濾波參數係使用變數tC 所判定的，以及tC 係基於Q與tC 之間的映射函數所判定的。適當地，該映射函數係根據以下所示之表：
適當地，該影像部分係以4：2：0之色彩格式處理。
根據本發明之第二十一態樣，提供一種針對影像的一或多部分控制濾波器之方法，該一或多影像部分之亮度樣本可透過HEVC相容亮度去區塊濾波器而濾波，該方法包含針對該一或多影像部分的色度部分之間的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。適當地，該控制是獨立於針對HEVC相容的亮度去區塊濾波器所做出的濾波決策。適當地，該控制是取決於第一處理/條件/判定，以及針對該亮度去區塊濾波器所做出的濾波決策是取決於第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對亮度去區塊濾波器所做出的濾波決策至少相關於下述一者：是否使用亮度去區塊濾波器；賦能或去能亮度去區塊濾波器之使用；或用於亮度去區塊濾波器之濾波參數。適當地，該控制亦是基於一或多色度樣本或用於色度樣本之量化參數。適當地，當該可濾波色度樣本係與該可濾波亮度樣本相關聯時，所述針對該色度樣本之間的該邊界控制該濾波器係基於複數個該可濾波亮度樣本或基於用於控制該HEVC相容亮度去區塊濾波器的參數。適當地，該控制濾波器包含：判定色度邊界是否與一或多影像部分之亮度樣本之間的邊界(亦即，亮度邊界)相關聯；以及如果是，則基於複數個亮度樣本或基於用於控制該HEVC相容的亮度去區塊濾波器的參數來控制該濾波器；或如果為否，則僅基於色度部分，或者獨立於複數個亮度樣本或獨立於用於控制該HEVC相容的亮度去區塊濾波器的參數，來控制該濾波器。適當地，該色度樣本(或色度部分)以及該亮度樣本(或亮度部分)對應於/相關於或並置於該影像或該影像部分中像素/元素之相同群組/區塊/單元。適當地，該色度邊界與亮度邊界位於相同位置及/或對應於/相關於或並置於該影像或該影像部分之相同像素。適當地，該控制該濾波器包含基於複數個亮度樣本判定下述至少一者：是否使用濾波器；賦能或去能濾波器之使用；當對色度邊界濾波時用於濾波器之濾波參數；或(針對)複數個色度樣本之間的變異之測量(的預測子/估計)。適當地，該判定是獨立於針對HEVC相容的亮度去區塊濾波器所做出的濾波決策。適當地，該判定是取決於基於亮度樣本之第一處理/條件/判定，以及針對該HEVC相容的亮度去區塊濾波器所做出的濾波決策是取決於基於亮度樣本之第二處理/條件/判定，其中該第一處理/條件/判定與第二處理/條件/判定彼此不同。適當地，針對HEVC相容的亮度去區塊濾波器所做出的濾波決策至少相關於下述一者：是否針對亮度樣本使用HEVC相容的亮度去區塊濾波器；或針對亮度樣本賦能或去能HEVC相容的亮度去區塊濾波器之使用。適當地，該判定亦是基於一或多色度樣本或用於色度樣本之量化參數。
根據本發明之第二十二態樣，提供一種將影像編碼之方法，該方法包含針對該影像之一或多部分根據本發明第二十態樣之處理，或根據本發明第二十一態樣來控制濾波器。適當地，該方法更包含：接收影像；將該接收到的影像編碼以產生位元流；以及處理該經編碼影像，其中該處理包含根據第二十態樣之處理，或根據本發明第二十一態樣之控制。
根據本發明之第二十三態樣，提供一種將影像解碼之方法，該方法包含針對該影像之一或多部分根據第二十態樣之處理，或根據本發明第二十一態樣之控制。適當地，該方法更包含：接收位元流；將該接收到的位元流解碼以獲得影像；以及處理該獲得的影像，其中該處理包含根據第二十態樣之處理，或根據本發明第二十一態樣之控制。
根據本發明之第二十四態樣，提供一種用於處理影像的一或多部分之裝置，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，該裝置包含：控制器，其經組態以針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。適當地，該影像部分已經色度次取樣以獲得該色度部分。適當地，該控制器經組態以執行根據本發明第二十態樣或第二十一態樣之方法。
根據本發明之第二十五態樣，提供一種用於針對影像的一或多部分控制濾波器之裝置，該一或多影像部分之亮度樣本可透過HEVC相容亮度去區塊濾波器而濾波，該裝置包含控制器，該控制器經組態以針對該一或多影像部分的色度部分之間的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。
根據本發明之第二十六態樣，提供一種用於將影像編碼之裝置，該裝置包含根據本發明第二十四態樣或第二十五態樣之裝置。適當地，該裝置經組態以執行根據本發明第二十二態樣之方法。根據本發明之第二十七態樣，提供一種用於將影像解碼之裝置，該裝置包含根據本發明第二十四態樣或第二十五態樣之裝置。適當地，該裝置經組態以執行根據本發明第二十三態樣之方法。
根據本發明之第二十八態樣，提供一種供應影像之方法，該方法包含：將使用根據第二十二態樣之編碼方法所編碼之影像之經編碼資料儲存；提供有關該儲存的編碼資料之資訊；以及在請求該影像時提供該儲存的編碼資料。適當地，該提供該儲存的編碼資料包含直接或間接串流該經編碼資料。根據本發明之第二十九態樣，提供一種供應影像之系統，該系統包含：根據第二十四到第二十七態樣之任意者之裝置；儲存器，經組態以針對或從根據第二十四到第二十七態樣之任意者之裝置儲存影像之編碼資料；以及提供機構，經組態以提供有關儲存的編碼資料之資訊，以及在請求該影像時提供該儲存的編碼資料。適當地，該提供該儲存的編碼資料包含直接或間接串流該經編碼資料。
根據本發明之第三十態樣，提供一種包含指令之電腦程式，當該程式被電腦執行時導致該電腦執行根據本發明第二十、第二十一、第二十二或第二十三態樣中任一者之方法。根據本發明之第三十一態樣，提供一種儲存電腦程式之電腦可讀取儲存媒體，當該程式被執行時導致執行根據本發明第二十、第二十一、第二十二或第二十三態樣中任一者之方法。根據本發明之第三十二態樣，提供一種攜有針對影像的資訊資料集之訊號或載波，該影像係使用根據本發明第二十二態樣之方法所編碼且由位元流所表示，該影像之影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該資訊資料集包含：控制資料，用於針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。適當地，該影像部分已經色度次取樣以獲得該色度部分。
根據本發明之第三十三態樣，提供一種儲存根據第三十二態樣之訊號或載波之媒體儲存裝置。根據本發明之第三十四態樣，提供一種儲存電腦程式之非暫態電腦可讀取儲存媒體，當該程式被執行時導致執行根據本發明第二十、第二十一、第二十二或第二十三態樣中任一者之方法。根據本發明之第三十五態樣，提供一種電路，或提供一或多處理器及記憶體，經組態以執行根據本發明第二十、第二十一、第二十二或第二十三態樣中任一者之方法。
根據本發明之第三十六態樣，提供一種使用根據本發明第二十二態樣的編碼方法所產生之位元流。
本發明實施例之進一步特徵、態樣及優勢將隨參照該等所附圖式對本發明實施例之以下描述而趨向顯而易見。下述本發明之各實施例可單獨實作或以該複數個實施例之組合而實作。另外，必要時或者在單一實施例中來自個別實施例的元素或特徵之組合是有利時，可組合不同實施例之特徵。
將在下文中透過參考隨附圖式而詳細說明本發明之實施例。應瞭解以下實施例並非旨在限制本發明之申請專利範圍，以及相對於用於解決根據本發明之問題的機構而言，並非所有根據以下實施例所述之態樣的組合皆是必需的。
為了說明如何實施本發明，本文描述的實施例是基於如何根據HEVC執行編碼及解碼處理。然而本發明並不受限於此。應瞭解，本發明之其他實施例可以是基於涉及處理視訊分量之區塊的任何處理或裝置。舉例而言，根據本發明實施例之去區塊濾波器可用於任何視訊編碼或解碼處理或裝置，諸如未來視訊編碼標準相容之裝置，其中對應於影像部分之第一分量區塊是在處理對應於相同影像部分之第二分量區塊之至少部分或全部之後而經處理。
[編碼器/解碼器/系統實施例]
圖1A示出根據本發明實施例之(視訊)解碼器，經描繪成解碼器100之方塊圖，該解碼器根據本發明實施例可用於接收來自編碼器之資料。該解碼器由相連(功能)模組(或單元)所表示，各模組經組態以實作由解碼器100所實作方法之對應步驟，舉例而言上述模組組態形式如由裝置的電路(或電路組)或處理器(諸如CPU)來執行程式化指令的形式。解碼器100接收包含諸如編碼單元等資料之位元流101，各編碼單元包含標頭與本體，其中標頭包含有關編碼(coding)或解碼參數之資訊以及本體包含該經編碼視訊資料。所述經編碼視訊資料是熵編碼的，以及用於將該經編碼視訊資料編碼(coding)或解碼之其他資料亦可被經編碼，所述其他資料例如針對給定區塊之運動向量預測子之索引及/或指示來自濾波器控制判定之結果的資料。該接收熵編碼視訊資料是透過(熵)解碼模組102所解碼。接著透過反量化模組103將殘餘資料反量化，並接著透過反轉換模組104對其執行反轉換以獲得像素值。
應瞭解像素對應於典型上包含些許分量的影像之元素，例如紅色分量、綠色分量、及藍色分量(或色度分量以及亮度分量)。樣本或是影像樣本是僅包含一此類分量的影像之元素。
指示編碼模式之模式資料亦可被熵解碼，並且基於該模式，對影像資料之編碼區塊執行框內(INTRA)類型解碼或框間(INTER)類型解碼。在框內模式之情況下，基於位元流中所指定之框內預測模式，框內預測模組105判定框內預測子。若該模式是框間模式，則從位元流擷取出運動預測資訊，以找尋道由編碼器所用之參考區域/訊框/影像/畫面。運動預測資訊包含參考訊框/影像/畫面索引以及殘餘運動向量。將運動向量預測子新增到殘餘運動向量中，以透過運動向量(Mv)解碼模組110獲得運動向量。運動向量解碼模組110針對透過運動預測所編碼的各當前區塊(當前正被處理或解碼之區塊)執行運動向量解碼。一旦獲得用於處理當前區塊的運動向量預測子之索引後，與當前區塊相關聯之運動向量的實際值可被解碼並用以透過運動補償模組106來執行運動補償。由解碼運動向量指示之參考影像/畫面部分係從參考影像/畫面108而擷取出的，以執行運動補償。利用解碼運動向量更新運動向量欄位資料111，以令其可用於預測將被解碼之其他或接續運動向量。
一旦透過此方式獲得解碼區塊後，透過後濾波模組107執行後濾波。舉例而言，執行諸如樣本適應性偏移(Sample Adaptive Offset (SAO))及/或根據本發明的去區塊濾波等後濾波技術。在已執行後濾波之後，由解碼器100提供(輸出)解碼視訊訊號109。
應注意通常而言，至少解碼器100之若干模組亦存在於對應編碼器中。舉例而言，編碼器中可存在後濾波模組107、反量化模組103或反轉換模組104，以令對應編碼器能夠獲得/判定解碼器100可用之資料，因此這個獲得/判定的資料(例如，重建影像資料)可用於參考影像/畫面或熵的預測。
圖1B示出根據本發明實施例之編碼器，經描繪成編碼器150之方塊圖，該編碼器150對應於圖1A之解碼器100。該編碼器150由相連(功能)模組/單元所表示，各模組經適應以實作由編碼器100所實作方法之對應步驟，舉例而言上述模組適應形式如由裝置的電路(或電路組)或處理器(諸如CPU)來執行程式化指令的形式。(視訊)編碼器150接收/獲得原始序列151(例如，影像或複數個影像)，該序列被劃分成像素區塊152，其在HEVC中稱作編碼區塊或編碼單元(應瞭解此等像素之區塊是彼此相關聯以用於諸如處理、編碼或解碼等功能性目的之一群組或集合之像素)。接著對各區塊執行基於編碼模式之處理。舉例而言，典型上在視訊編碼中有兩類編碼模式：基於空間預測(「框內模式(INTRA模式)」或框內預測153)之編碼模式；與基於根據運動估計154與運動補償155的時間預測(「框間模式(INTER模式)」或框間預測)之編碼模式。
在空間預測中(亦即，框內模式)，透過稱作框內預測之處理，框內編碼區塊通常是從在其因果邊界(causal boundary)處(亦即，在相同訊框或影像中靠近(一或多)重建或可用編碼像素之(一或多)邊界處或周圍之像素)的編碼像素所預測出。針對框內編碼區塊之各像素的預測子因此形成預測子區塊。取決於用於預測框內編碼區塊之何等像素，可使用各種框內模式：例如DC模式、平面模式及角模式。時間預測(亦即，框間模式)包含在先前或未來訊框中被稱作參考訊框(影像/畫面)168中，透過運動估計模組154識別被視為最靠近編碼區塊之參考區域(例如，參考影像/畫面部分)。此參考區域構成用於此編碼區塊之預測子區塊。接著，透過運動補償模組155使用預測子區塊判定/計算剩餘或殘餘區塊，以預測出本編碼區塊。在空間及時間預測等兩者中，透過從編碼區塊減去獲得的預測子區塊來判定/計算出剩餘或殘餘區塊。在框內模式中，預測模式經編碼。在框間模式中，將指示/識別所使用的參考訊框/影像/畫面之索引與指示/識別該參考訊框/影像/畫面中的參考區域之運動向量進行編碼。然而，為了進一步降低與運動向量編碼相關之位元率成本，運動向量可以不被直接編碼。當然，假設該運動是同質的，則將該運動向量編碼成此運動向量與其周圍運動向量(或運動向量預測子)之間的差值是特別有利的。以僅令透過「Mv預測與編碼」模組160獲得的差值(亦稱作殘餘運動向量)可被編碼到位元流中。各編碼向量之值接著被儲存在運動向量欄161中。接著，該預測用之相鄰運動向量從此運動向量欄161中擷取出。HEVC標準使用三種不同框間模式：Inter模式、Merge模式以及Merge Skip模式，其彼此差異主要在於位元流101中運動資訊之發訊(亦即，運動向量與透過其參考訊框/影像/畫面索引之其相關聯參考訊框/影像/畫面)。為了簡潔性，術語運動向量與運動資訊將在下文中為可互換的。有關運動向量預測，HEVC提供在率失真競爭期間評估的運動向量預測子之些許候選者，以為了針對Inter或Merge模式找尋最佳運動向量預測子或最佳運動資訊。接著，將對應於最佳預測子之索引或運動資訊最佳候選者插入位元流101中，以令解碼器可導出相同組的預測子或候選者，並根據該解碼索引使用最佳者。
接著，將用於當前正處理之編碼區塊的率失真準則最佳化之編碼模式(框間或框內模式)是透過選擇模組156中所選出的。為了進一步降低在所獲得剩餘資料內之冗餘，透過轉換模組157對殘餘區塊執行典型上為DCT之轉換，以及透過量化模組158對該獲得的係數執行量化。接著透過熵編碼模組159將係數之量化區塊進行熵編碼，並且將該結果插入位元流101中。
接著，為了在模組173至177中的未來運動估計，編碼器150執行訊框/影像/影像部分之各編碼區塊的解碼。此等步驟允許編碼器150與解碼器100具有相同的(一或多)參考訊框/影像/畫面168。為了重建該編碼之訊框，量化與轉換的殘餘區塊之各者透過反量化模組173而被反量化以及透過反轉換模組174而被反轉換，以為了獲得/提供像素域中對應的「重建」殘餘區塊。由於量化損失之問題，此「重建」殘餘區塊與在MV預測與編碼模組160處所獲得/處理的該原始殘餘區塊不同。故根據選擇模組156處所選之編碼(框間或框內)模式，此「重建」殘餘區塊被運動補償模組176新增到框間預測子區塊中或被框內預測模組175新增到框內預測子區塊中，以獲得預重建之區塊(一編碼區塊)。接著，在後濾波模組177中透過執行一或數類型之後濾波(包含根據本發明之去區塊濾波)將該重建區塊濾波，以獲得最終/實際「重建」區塊(該編碼區塊)。相同的後濾波器(包含根據本發明之去區塊濾波)被整合在編碼器(在解碼迴路173-177中)處與解碼器處，以移除壓縮(量化)失真。以相同方式(或以一致方式)使用該等濾波器，以在編碼器與解碼器側兩處獲得相同參考訊框/影像/畫面，以使得在編碼與解碼處理兩者期間可使用相同的參考訊框/影像/畫面。
圖1C示出根據本發明實施例包含編碼器150與解碼器100中至少一者以及通訊網路199之系統191與195。根據實施例，系統195是用於處理以及提供內容(例如，用於顯示器/輸出之視訊與音訊內容或串流視訊/音訊內容)給使用者，該使用者例如透過包含解碼器100的使用者終端或與解碼器100通訊的使用者終端之使用者介面可操作解碼器100。此等使用者終端可以是電腦、行動電話、輸入板或能夠提供/顯示該(提供/串流)內容給使用者之任何類型的裝置。經由通訊網路199，系統195獲得/接收位元流101(例如當稍早視訊/音訊正被顯示器/輸出時，該位元流以連續流或訊號之形式)。根據實施例，系統191係用於處理內容並儲存處理後的內容，例如處理用於稍後顯示/輸出/串流的視訊和音訊內容。系統191獲得/接收包含原始序列之影像151的內容，該內容被編碼器150接收與處理(包括利用根據本發明之去區塊濾波器濾波)，以及編碼器150產生位元流101，該位元流將經由通訊網路191來與解碼器100通訊。接著，以數種方式將位元流101通訊到解碼器100，例如該位元流可預先由編碼器150產生並當作資料儲存於通訊網路199的儲存裝置中(例如，在伺服器上或雲端儲存上)，直到使用者自儲存裝置請求該內容(亦即，位元流資料)，在該時刻該資料從該儲存裝置通訊/串流到解碼器100。該系統191亦包含內容提供裝置，該裝置用於(例如，透過通訊資料給使用者介面以令其被顯示在使用者終端上)提供/串流針對被儲存在儲存裝置中內容之內容資訊(例如，內容之標題與其他元/儲存位置資料，用於識別、選擇及請求該內容)給使用者，並且該裝置用於接收及處理使用者對於內容的請求，以令所請求內容從儲存裝置傳送/串流到使用者終端。替代地，編碼器150產生位元流101並且當使用者請求內容時將位元流直接通訊/串流到解碼器100。接著，解碼器100接收位元流101(或訊號)並使用根據本發明之去區塊濾波器執行濾波以獲得/產生視訊訊號109及/或音訊訊號，該訊號接著被使用者終端使用以提供該請求內容給使用者。
[HEVC亮度去區塊濾波器]
本文將描述用於HEVC中之(迴路內(in-loop))亮度去區塊濾波器，以作為如何在編碼與解碼情境下可使用較精細(或高解析度或更複雜)去區塊濾波器之實例。應瞭解，根據本發明實施例之去區塊濾波器可以與此等亮度去區塊濾波器或任何其他亮度去區塊濾波器(或實際上用於任何分量之任何其他去區塊濾波器)一起使用。
圖2示出樣本(分量)之兩區塊P與Q之間的垂直邊界/邊緣/邊線201。此垂直邊界201是4個樣本長度，以及HEVC中亮度去區塊是基於第一列與最終列之亮度樣本203、205。在本實例中，區塊P與Q是來自相同分量的樣本。應瞭解根據另一實施例，區塊P與Q可以是任何與像素或像素/影像部分之其他元素相關之值，該元素可例如對應於針對(一或多)像素區塊或針對影像部分之(一或多)像素區塊。舉例而言，在本實施例中，此等區塊之各像素對應於針對各分量(亦即，色度或亮度分量)之一組樣本。爾後，區塊P與Q之樣本將被共同參照為樣本集200。樣本pJi 是在區塊P中，該區塊P已在區塊Q之前被處理/編碼，而區塊Q包含樣本qJi 。應瞭解雖然在本文中描述垂直邊界，惟本發明並不受限於此。舉例而言，本發明之實施例可用於兩個或更多區塊之間的水平或任何其他類型(諸如對角線、角度、傾斜或非線性)邊界/邊緣/邊線，並且可具有適當調整，諸如將最接近或鄰近邊界之樣本定義成p0i 和q0i (即J=0)，其中J隨著樣本距該邊界的距離的增加而增加。
圖3示出描繪用於HEVC的亮度去區塊濾波器之方塊圖。使用去區塊濾波器(deblocking filter，簡稱為DBF)之目的在於降低通常透過轉換編碼所造成之區塊失真：當轉換係數經量化時，圖1A所示模組103與104與圖1B所示模組173與174中發生不完美重建。這可能導致轉換或預測區塊之邊界處(例如，垂直邊界201處)的不連續性(亦即，在邊界或邊緣處，其中各邊界或邊緣是劃分至少兩個區塊或兩個或更多群組之樣本/像素之間的邊界/界面)。除了由降低的編碼效率所造成的失真之外，這可能是最令觀看者分心的失真之一。
在HEVC中，使用下述三步驟來施加亮度去區塊濾波器：
(1)在垂直或水平邊界處的濾波類型確定，通常是根據邊界的一側上的元素(即，樣本或像素)是否係以框內模式編碼，或者在該邊界處存在運動不連續性；
(2)測量之計算(類似於「平坦度」或「平滑度」指示)並將其與臨界值進行比較，從而判定是否對一組樣本/像素濾波，以及如果是，則選擇出要使用哪個濾波器；以及
(3)一旦選擇出要使用之濾波器後，對該等樣本濾波，通常是透過使用該等值之線性組合來執行，並且對與該等值相關的線性組合結果之範圍施加限制。
可透過以下表來描述針對步驟(1)&(2)邊界強度(boundary strength(bS))判定之實例：
- bS表
因此，取決於針對P&Q之預測類型(框內或框間)、殘餘資料及/或運動資訊之存在/不存在，bS可以為0、1或2中之值。因此，這種邊界強度判定不取決於實際樣本值(例如，pJi 或qJi )，而是相依於諸如模式或運動資訊等編碼資訊。若bS為零，則該組樣本(或對應像素)沒有發生濾波，以及該隨後濾波器控制步驟並沒有被執行(亦即，跳過該等步驟)。
應瞭解，根據本發明實施例之去區塊濾波器之使用，並不限於以此等特定三個步驟或來自HEVC的亮度去區塊濾波器來使用其。舉例而言，本發明其他實施例可使用不同的邊界強度(bS)定義，其定義基於是否滿足(另)一條件之附加或替代邊界強度值(例如，「4」)。
一旦經判定要執行濾波時，需要判定去區塊濾波器參數以執行步驟(3)。針對HEVC亮度去區塊濾波器，使用兩參數β與tC 來選擇出亮度控制參數。用於限制(limiting/restricting)橫跨多於一個樣本的平坦度或值的變異之臨界值，是從bS值以及可變qPL 、在訊框或切片層級處的偏移組(slice_beta_offset_div2或
slice_tc_offset_div2)、諸如在邊界各側上的區塊的QPq和QPp等量化參數(QP)、以及亮度的位元深度值BitDepthY 和色度的BitDepthC 所導出的。舉例而言，用於判斷此等HEVC中參數之公式為：
針對β′，qPL =((QpQ +QpP +1)＞＞1)，
Q=Clip3(0,51,qPL +(slice_beta_offset_div2＜＜1))，
其中，Q是亮度量化參數，變數QpQ 和QpP 分別是區塊塊Q和P的量化步驟(即，量化參數)，該等變數被設定成等於包含含有樣本q00 和p00 的P＆Q的編碼單元的變數QpY 值；以及
從Q到β′之映射經提供於以下表中。
針對tC ′，Q=Clip3(0,53,qPL +2*(bS-1)+ (slice_tc_offset_div2＜＜1))，以及
從Q到tC ′之映射經提供於以下相同表中。
接著，為了要獲得β & tC ，如下根據位元深度(bitdepths)縮放β′ & tC ′：
β=β′*(1＜＜(BitDepthY -8))；以及tC =tC ′*(1＜＜(BitDepthY -8))。
應注意，Clip3(min, max, val)是一種函數，其中：若val ＜ min則判定結果是min；若val ＞ max則判定結果是max；以及否則結果為val。
應注意，「＞＞」是按位元右移運算子；以及「＜＜」是按位元左移運算子。
- Q對β′/tC ′對映表
圖3示出描繪HEVC亮度去區塊濾波器之方塊圖。在步驟310，檢查一組樣本之邊界是否在預測單元(Prediction Unit(PU))或轉換單元(Transform Unit(TU))邊界上。步驟311，檢查邊界強度bS(例如，根據先前討論bS表界定)是否為非零值。若是，則將該邊界濾波(若否，則不對該邊界濾波)。在步驟312中，測量/考慮各種梯度強度(例如，衡量相鄰或附近樣本的變化程度)。舉例而言，測量與比較此等強度之總和(dLuma )與α，該dLuma 指示來自該邊界各側之多於一個樣本之間值的變異或平坦度(亦即，表示/指示平坦度/變異之測量或指示符)。在HEVC中，此比較是基於以下條件並使用圖2中第一列與最後一列之亮度樣本203、205：
dLuma =|p20 -2p10 +p00 |+|p23 -2p13 +p03 |+|q20 -2q10 +q00 |+ |q23 -2q13 +q03 |；以及dLuma ＜β。
若此總和夠低(亦即，低於β)，則該邊界一側上之至少一區塊被視為夠平坦(一致)以令區塊失真為可見的，並且去區塊處理繼續到步驟313。否則，該組樣本被視為不需要濾波，並且其去區塊處理結束於步驟318。
應注意，先前討論之β & tC 的判定亦可在步驟312執行，因為該等參數可能取決於相對於邊界之位置(這是因為例如由於使用QTBT時，色度和亮度劃分可能無法完全重合/對齊之緣故，故P側上之QP可有變化)。
HEVC中可使用強316或弱315濾波來將亮度樣本濾波。為了決定要使用何種濾波，測量該邊界各側上變異的梯度或測量。在HEVC中，接著使用以下條件將其與β比較：|p2i -2p1i +p0i |+|q2i -2q1i +q0i |＜β/8；以及|p3i -p0i | +|q0i -q3i |＜β/4。
若這兩個條件皆被滿足，則施加強濾波，否則施加弱濾波。另一要做出之濾波決策係相關於要對該邊界之何側施加該濾波。為了降低複雜性，此等決策可再使用上述條件中所計算出變數之若干者(例如，針對dLuma )，例如：若|p20 -2p10 +p00 |+|p23 -2p13 +p03 |＜(β+β/2)/8，則P個樣本確實被濾波；以及若|q20 -2q10 +q00 |+|q23 -2q13 +q03 |＜ (β+β/2)/8，則Q個樣本確實被濾波。
取決於所選亮度濾波器類型，HEVC可濾波所有的qJi或pJi，或僅對若干特定者濾波。舉例而言，兩個濾波器對被處理的樣本周圍之樣本使用卷積(例如樣本之線性組合)。該卷積/線性組合之結果可直接(如同在強濾波之情況下)或間接(例如弱濾波)用於濾波、替換、或調整樣本。
在HEVC亮度強濾波中，針對樣本p2i到p0i以及q0i到q2i，計算該等樣本經加權後之線性組合。舉例而言，若該等樣本中任一者不屬於樣本集200中，則省略其並相應調整剩餘樣本在該線性組合中之權重。在不列出所有者之情況下(例如，其對於qji為對稱的)，這將導致以下表達式用於在HEVC中強濾波各亮度樣本：
p2i =Clip3(p2i -2*tC ,p2i +2*tC ,(2*p3i +3*p2i + p1i +p0i +q0i +4)＞＞3)；
p1i =Clip3(p1i -2*tC ,p1i +2*tC ,(p2i +p1i +p0i + q0i +2)＞＞2)；以及
p0i =Clip3(p0i -2*tC ,p0i +2*tC ,(p2i +2*p1i + 2p0i +2*q0i +q1i +4)＞＞3)。
在HEVC亮度弱濾波中，是否對一個完整的1D(1維)子集弱濾波之決定是基於：Δ=(9*(q0i -p0i )-3*(q1i -p1i )+8)＞＞4；以及∆＜10*tC 。
若滿足該條件，則使用：Δ=Clip3(-tC ,tC , Δ)；p0i =Clip1Y(p0i +Δ)；以及q0i =Clip1Y(q0i -Δ)，來執行針對q0i 與p0i 之弱濾波，其中Clip1Y(val)=Clip3(minY, maxY, val) 以及minY與maxY個別是針對8位元內容之最小與最大樣本值(亦即0與255)。接著，假若要(根據取決於β之條件)對p1i 濾波時，則適用下述者：
Δp=Clip3(-(tC ＞＞1),tC ＞＞1,(((p2i +p0i +1)＞＞1)-p1i +Δ)＞＞ 1)；以及p1i ′=Clip1Y(p1i +Δp)。
相似地，假若要對q1i 濾波時，則適用下述者：
Δq=Clip3(-(tC ＞＞1),tC ＞＞1,(((q2i +q0i +1)＞＞1)-q1i -Δ)＞＞ 1)；以及q1i ′=Clip1Y (q1i +Δq)。
[HEVC色度去區塊濾波器]
本文將描述用於HEVC中之(迴路內(in-loop))色度去區塊濾波器，以作為如何在編碼與解碼情境下可使用粗糙(或低解析度或較簡單)去區塊濾波器之實例。根據本發明實施例之去區塊濾波器改善或取代此種色度去區塊濾波器。然而，應瞭解任何用於分量之其他去區塊濾波器可根據本發明另一實施例而被改進或取代，提供一種用於將另一分量去區塊的可用測量或參數。亦應瞭解，根據本發明實施例之去區塊濾波器可以連同HEVC色度去區塊濾波器或任何其他去區塊濾波器一起使用，以取決於何者在降低區塊失真方面最有用或較有效而作為可選/所選附加選項。
有關是否使用HEVC色度去區塊濾波器的決定是基於上面討論的bS表中定義的bS。僅有當bS＞1時(亦即，當bS為2時)，亦即當區塊P & Q之至少一者以框內(INTRA)編碼時，會使用HEVC色度去區塊濾波器。
對於HEVC中的色度去區塊濾波器控制參數，僅有tC 是基於色度樣本而計算出的，因為不存在涉及β的運算。因此，針對色度去區塊控制參數方面，使用公式「qPi=((QpQ +QpP +1)＞＞1)+cQpPicOffset」來評估qPi，其中cQpPicOffset指定畫面層級之色度量化參數偏移，以及QpQ & QpP 是用於亮度之量化參數。接著使用此值以導出qPc值(不論透過對映表或限制於低於51之值)。接著，使用公式「Q=Clip3(0,53,QpC +2+(slice_tc_offset_div2 ＜＜1))」來評估值Q(色度量化參數)。與HEVC亮度去區塊濾波器相同方式，可利用上面所示的Q對β'/tC '映射表中的該Q值來判定tC '。接著，tC ′可縮放以獲得tC ：tC =tC ′*(1＜＜ (BitDepthC -8))。其他對邊界各側濾波之規則與先前討論亮度去區塊濾波器相似。
在HEVC中，透過設定(具有參數)來施加色度去區塊濾波器：
Δ=Clip3(-tC ,tC ,((((q0i -p0i )＜＜2)+p1i -q1i +4)＞＞ 3))；
p0i ′=Clip1C(p0i +Δ)；以及q0i ′=Clip1C(q0i -Δ)。
如上可見，在HEVC中，是否施加色度去區塊濾波器的決策是基於使用色度樣本值的相對較簡單的條件(與HEVC亮度去區塊濾波器決策相比)，並且相對較簡單的濾波參數(使用色度樣本值而判定出)僅是用於濾波/調整最接近/鄰近該邊界的樣本(與亮度去區塊濾波器相反，其不僅濾波/調整不是最接近/鄰近該邊界之樣本值，亦濾波/調整遠離該邊界的樣本值，前提是該樣本要在區塊 P或Q中)。
[根據本發明實施例之色度去區塊濾波器]
圖4A與4B示出描繪根據本發明實施例之去區塊濾波器的方塊圖，該濾波器可以用作HEVC的色度去塊濾波器的替代或連同HEVC的色度去塊濾波器一起使用(例如，結合HEVC的亮度去區塊濾波器或結合具有較精細控制/較高解析度的任何其他亮度去區塊濾波器使用，這可能是使用色度次取樣來對影像進行採樣之結果)。圖4A示出控制濾波器用於將影像的一或多部分(例如，區塊P或Q)濾波的方法/處理，其中該方法包括基於影像之第二分量(例如，亮度分量)的樣本值來控制對影像之一或多部分的第一分量樣本(例如，色度樣本)之濾波的步驟1000。這樣的控制可包含基於第二分量之樣本值之間(例如，由邊界/界面/邊線/邊緣201上的任一側或兩側上或跨越邊界/界面/邊線/邊緣201的變異/平滑度/平坦度的測量來指示/表示之)變異來判定對第一分量樣本(例如，色度樣本)的濾波之使用(或不使用/未使用)(例如，用於濾波色度樣本之測量dLuma 是基於亮度樣本而判定的)。
根據實施例，基於來自第二分量樣本(例如，亮度樣本)之至少兩個相鄰(即，鄰近/最接近或形成邊界201)區塊(例如，P和Q)的樣本值之間的測量，執行用於對第一分量樣本(例如，色度樣本)的區塊進行濾波的判定。該測量指示至少兩個相鄰區塊(例如，沿垂直於邊界201的方向的樣本值的行203,205)中的至少若干(例如，三個或更多)樣本值之間及/或跨越第二分量樣本(例如，亮度樣本)之所述至少兩個相鄰區塊之間的邊界201(例如基於樣本值pJi & qJi 之dLuma ，其中i={0,3}以及J=0..3)的變異，對第一分量樣本(例如，色度樣本)之至少兩相鄰區塊之間的對應邊界使用濾波。該至少兩相鄰第二分量區塊(例如，P與Q，或亮度樣本區塊)包含與至少兩個第一分量區塊(例如，色度區塊)對應之第二分量區塊，它們之間具有對應邊界(對該邊界使用濾波器)。對應區塊/邊界是並置/關聯/相關的區塊/邊界(例如，在相同或對應的位置，以及也可以具有相同的尺寸)，例如，第二分量區塊(例如，亮度區塊)之對應區塊與第一分量區塊(例如，色度區塊)相關於/關於/對應於該影像部分之相同像素/元素，抑或，其在第一分量區塊(例如，色度區塊)之間第一分量樣本之間的對應邊界與形成該邊界之第二分量區塊(例如，亮度區塊)相關於/關於/對應於該影像部分之相同像素/元素。因此，舉例而言，第一分量樣本(例如，色度樣本)區塊與對應的第二分量樣本(例如，亮度樣本)區塊可以與影像的相同元素/像素區塊相關聯(相關)。
該控制1000可包含基於使用該測量的條件而賦能或去能該濾波。該控制1000亦可包含基於第二分量樣本(例如，亮度樣本)或前述測量來判定用於濾波之一或多濾波參數。
應瞭解根據另一實施例，該測量不是基於與第一分量樣本(例如，色度樣本)並置/對應的第二分量樣本(例如，亮度樣本)之區塊，而是基於已被處理且屬於該影像或參考影像(例如，在其上施加去區塊濾波器之前的參考訊框或參考畫面，使得其中存在至少一個區塊失真)之相關/相關聯部分之第二分量樣本(例如，亮度樣本)。
如圖4B所示，根據實施例，控制1000包括：獲得1100測量(例如，透過計算亮度樣本的變異或接收指示已經計算出測量的資料)；並且基於該所獲得的測量來控制1200。根據實施例，基於該獲得的/計算得到的測量之所述控制1200包括：比較獲得的/計算得到的測量與臨界值(例如，基於諸如tC 、bS、β、QPq、QPp、pJi & qJi等一或多者的任意組合之函數的臨界值，該等樣本值或參數是基於亮度及色度樣本之任一者或兩者所評估的)；以及基於該比較判定是否對第一分量樣本(例如，色度樣本)使用濾波，及/或當判定要使用該濾波時，判定用於該濾波之濾波參數。該影像之第二分量樣本(例如，亮度樣本)之樣本值可以是重建的第二分量樣本值。
根據實施例，當與HEVC亮度去區塊濾波器一起使用時，根據圖4A或4B實施例的色度去區塊濾波器利用來自HEVC亮度去區塊濾波器的已經可用(即，先前計算出的)dLuma 之測量，以致於不需要進一步的資源及/或增加複雜性。另外，可施加基於 bS、β、QPq、QPp、pJi & qJi 等一或多者的任意組合之函數的不同規則/條件，該等樣本值或參數是基於亮度及色度樣本之任一者或兩者所評估的。該函數可以與用於HEVC亮度去區塊濾波器中臨界值的函數相同或者不同，以便考慮色度樣本和亮度樣本之間的差異，例如與相同影像部分相對應/相關聯者(即影像的一組元素/像素)的差異。此外，它還能夠基於該測量判定用於濾波的濾波參數，同樣考慮上述的考量因素。
如前述，用於HEVC中色度濾波之規則/方法是粗糙的，與用於HEVC中亮度濾波施加者相比時特別如此。這部份是因為4：2：0格式內容之緣故，因為色度不具有極高頻率內容，以及僅管具有高實作/複雜性成本，惟用於4：4：4格式之習知亮度濾波方法在濾波色度方面不是非常有效。這也是在框間編碼區塊的邊界上沒有HEVC色度濾波的原因(即，僅當bS=2時，會使用HEVC色度濾波)。因此，根據本發明實施例，至少若干用於色度去區塊濾波器之條件及/或參數是基於根據亮度樣本所做出之決策或測量。根據實施例，其中若干者可以透過色度樣本為基的參數/變數以進一步細化/調整或控制。相較於HEVC中之色度去區塊濾波，根據本發明實施例基於圖4A或4B的方法之色度去區塊濾波僅需要增加有限的複雜性(因為無消耗額外頻寬用於判斷其他色度樣本為基參數與變數，以用於濾波色度樣本)，即可達到實質編碼效率或視覺改進，對框間編碼訊框而言特別是如此。
用於HEVC色度濾波的規則/方法也是粗糙的，因為受濾波影響的色度樣本的數量非常有限/受限制。因此，會期望要增加此數量。然而，取決於元素/像素是如何被劃分或樣本是如何被取樣，並且由於濾波所取決之相關樣本之可用性或缺乏可用性，這可能是有困難的。舉例而言，由JVET(針對ITU-T VCEG以及ISO/IEC MPEG之未來視訊編碼(FVC)的聯合視頻探索小組)所考慮之QuadTree加二元樹(QTBT)，與任何其他具有複雜劃分與其階層之編碼/解碼結構格式可受限於此等問題。
圖5A示出在HEVC中將(數位)影像分割(劃分或區分)成像素區塊，因為像素區塊在編碼或解碼期間會被使用。此處第一類型之感興趣區塊是稱作編碼樹區塊(Coding Tree Block(CTB))401之方形單元，其接著根據四元樹結構(quadtree structure)被劃分成較小方形單元，其通常已知為區塊但亦已知做HEVC中之編碼單元(Coding unit(CU))(該四元樹結構中，葉被分成四個子葉直到劃分到葉節點，亦即到達不能劃分/分割節點)。看向圖5A中CU 402，其中該CU 402有兩種進一步分割。該預測分割可以是2Nx2N或NxN以用於框內模式編碼，以及2Nx2N、Nx2N、2NxN中之任意者，另外預測分割可以是非對稱運動分割(Asymmetrical Motion Partitions(AMP)) nLx2N、...、2NxnB以用於框間模式編碼。各分割接著被稱作預測單元(prediction unit(PU))。殘餘四元樹(Residual Quad Tree(RQT))將所述編碼單元CU 402分割成較小的方形轉換區塊，其被稱為轉換單元(transform units (TU))。該四元數結構允許高效指示CU是如何被分割成TU與PU。
圖5B與5C示出基於由JVET(針對ITU-T VCEG以及ISO/IEC MPEG之未來視訊編碼(FVC)的聯合視頻探索小組)所考慮之QuadTree加二元樹(QTBT)的(數位)影像的分割(劃分或區分)。該QTBT結構是其中CTB首先分割成四元樹，並且當到達終結葉(termination leaf)後，透過二元樹對應區塊被進一步分割(劃分或區分)成水平或垂直部分/分割，兩類型皆是對稱的。圖5B與5C描繪JVET中之分割，該四分樹分割由連續線表示且二進制分割由虛線表示。在圖5B中，像素區塊(CTB)410被劃分成不同區域/部分/區塊420至431，以及劃分/區分460至471的相應發訊/指示符450(亦即，對應劃分/區分與發訊/指示符之參考編號之間的偏移量為40)被示出於圖5C中。CTB 410透過四元樹450被分割成四個區塊與對應節點，如連續線所示。當各區塊對應分割旗標為1時，該各區塊接著被再次分割成(子)區塊(與對應節點)。若分割旗標為0，則對應節點為葉節點且區塊不會進一步(次)劃分為四元樹。因此可以看出，區塊420和430(以及個別葉節點460和470)不進一步(次)劃分為四元樹，而區塊440(和對應的節點480)則進一步(次)劃分為四元樹。接著是針對四元樹各葉節點之二元樹(前提是其並未到達會避免其可以被進一步分割之最小尺寸)。例如，針對區塊420之二進制分割旗標460指示垂直對稱分割(延著垂直線/邊緣/邊界/邊線之分割，並相關於垂直線/邊緣/邊界/邊線為對稱的)。區塊421對應於葉節點461，並且因此不會被進一步分割。另一方面，區塊430被分割成兩個對稱水平區域，其中區塊431不會被進一步分割，如其對應端部葉節點471所示般。二元樹從節點460開始有兩個垂直節點(垂直劃分/分割的區塊)，兩者之一為不能劃分/分割之區塊421(亦即，葉節點461)。另一者沿著垂直線(邊緣/邊界/邊線)被進一步分割成兩個區塊422 & 423(亦即，兩個葉節點462 & 463)，其不會再被分割。
應瞭解本發明並不受限於特定方式，只要前提是區塊/影像部分之最小可能維度/尺寸為可判定的(例如，當可以判斷特定最小維度/尺寸的區塊/影像部分是否為CU/PU時，則該判斷包含判定該區塊/影像部分是否為CU/PU，或最小可能維度/尺寸可以是被指定成其內包含之CU/PU數或橫跨/高/包含於其內之像素/樣本數量)，則可執行此等分割與其發訊。據此，本發明實施例亦可用於(數位)影像之替代分割(例如，用於分割之其他結構/格式，諸如使用三元分割作為其他將(數位)影像的分割/劃分執行分割和發訊的方式)。舉例而言，當不同結構/格式被用於將對應於相同影像部分/區塊之不同分量樣本分割時，其亦會奏效，例如，兩個QTBT樹(一個用於亮度樣本且一個用於色度樣本)用於框內切片，以及用於亮度和色度樣本區塊的單一QTBT樹用於框間切片。應注意，在框內切片中使用不同結構/格式代表亮度樣本區塊之邊界可能不會直接對應於色度樣本區塊之邊界，且反之亦然。在此情況下，本發明實施例考慮此等差異，並基於各邊界位置、尺寸及/或相鄰亮度或色度樣本區塊而指定用於建立亮度樣本區塊之邊界與色度樣本區塊之邊界之間的對應/相關聯/並置關係之準則或條件。根據實施例，其採用邊界之色度座標，基於該準則/條件以判定/找尋對應亮度座標，並且因此推導/判定出對應亮度樣本。
另外，當處理影像之分割時，亦可執行邊界位置之各種估計/捨入(estimating/rounding)、及/或該邊界之抑制/忽略/跳過(suppression/ignoring/skipping)(例如，將該位置捨入到該等預界定位置之一)。令亮度區塊邊界之一部分與色度區塊邊界之一部分重疊(例如跨越)亦是可行的。應瞭解，本發明實施例可被輕易調整以解決此等影像分割之差異(例如，亮度與色度樣本個別邊界之差異)。
舉例而言，圖5D示出不同類型之邊界，以及將在下文中與圖5D所示邊界相關地描述如何達成對相關區塊/編碼單元之處理的此等調整。圖5D頂部兩圖式示出在HEVC分割結構/格式中可存在之不同的垂直與水平邊界。HEVC以第一通濾波501(亦即，單一垂直掃掠)與接著第二通濾波502(對應單一水平掃掠)處理影像之所有的區塊邊界。HEVC去區塊濾波器之設計在於，就給定的通(pass)，要濾波之所有邊界可同時被並行濾波。這是可行的緣故在於要處理之垂直或水平邊界無重疊，例如個別邊界510 & 511或520 & 521無重疊。對一邊界之濾波不應調整對另一邊界，或就此而言對同一pass之任何邊界，之濾波的輸出或輸入，例如針對邊界511之濾波不應影響針對邊界510與512之濾波。
參照圖3，可看出在若干情況下HEVC亮度去區塊濾波器可能需要有高達四個樣本在邊界之各側上。如果要考慮需要更多樣本之濾波器，則濾波之樣本數量的增加可能會造成問題。這是因為若pJi 個樣本之任意者透過例如濾波邊界511而被調整，則會針對邊界512之濾波發生潛在相依性問題(例如，更新後值之不可用性)，這是因為該濾波取決於此等pJi 個樣本中至少若干者之值(此等pJi 個樣本是輸出自所述對邊界511之濾波)。相似地，邊界511之濾波亦可能會影響針對邊界510濾波之輸入或輸出。為避免未界定/不一致行為，此等邊界之濾波順序需要被指定，因此需要序列濾波(亦即，並行處理不再是可行)。然而，此類順序排序是不被期望的，因為其會造成更複雜性(諸如，延遲與緩衝)。因此，HEVC限制了濾波能力(亦即，限制當針對特定邊界濾波時可以被濾波之樣本/像素之範圍。)因為針對HEVC之濾波單元/區塊(亦即，基於其而執行濾波之單元或區塊)是8×8樣本區塊，並且支援之最大濾波器具有4之尺寸範圍，這有助於確保不會發生重疊。儘管實際上框內編碼允許4×4 CU，並且通常使用4×4 TU。這會造成這些CU的內部邊界，或者在CU內部但落入8×8濾波單元(例如，8×8樣本網格之分量)內部的TU的邊界，根本不會被濾波，雖然已知該等處仍會發生區塊失真。這對色度樣本而言特別屬實，其中若使用針對HEVC亮度去區塊濾波器之濾波參數而未對其作調整，則為了濾波遠離邊界之第二樣本(例如，p1i 或q1i ，其不與邊界201相鄰)，將會需要操作第三樣本(例如，p2i 與q2i )。當使用的色彩格式代表色度樣本具有比相同影像部分的亮度樣本更低的解析度/密度時，這些色度樣本更可能(與亮度樣本相比)與另一個相鄰邊界的其他可濾波/待濾波的色度樣本重疊(例如，來自色度次取樣或使用諸如4：2：0的色彩格式)。這代表若調整色度濾波參數而未考慮此問題，則不可能並行地對不同邊界執行去區塊濾波，並且潛在造成濾波處理之未界定/無預期行為。
圖5D底部兩圖式示出在基於QTBT分割結構/格式中可能存在之不同的垂直與水平邊界。QTBT允許4之維度(並且由於其具有一半的垂直與水平取樣，因此在色度樣本中對應2)。此外，允許對4×4區塊為基礎執行該濾波。因此，一種針對基於QTBT分割中相依性問題(亦即，不可用性問題)之解決方法會是將針對相關邊界之色度濾波去能即可。圖5D下方兩圖式描繪此種解決方式會如何作用。針對給定CTB(例如，此處所示出之128×128的尺寸)，任何可能會具有重疊部分之邊界將不會被濾波。此類不會被濾波之邊界將在圖5D中以虛線表示。
因此，取代僅使用相同的亮度濾波條件與控制參數(其中，由於相鄰邊界之濾波的緣故，故用於此等條件與控制參數之一組亮度樣本的值可能會改變)，下文所述本發明實施例再使用先前亮度(以及潛在地，色度)樣本之卷積/線性組合之結果並相應地適應/調整其以用於色度去區塊濾波器之較精細控制。此外，基於附加條件的進一步控制亦是可行的。這賦能本發明實施例以對更多色度樣本濾波而無顯著增加最壞情況相依性情境，導致實質編碼效率與視覺改進。
圖6示出描繪具有針對根據本發明實施例之色度濾波器on/off/旁路控制的亮度樣本為基測量之去區塊濾波器的方塊圖。參照圖6，圖4A&4B中控制對第一分量樣本(例如，色度樣本)濾波之步驟1000包含圖6中的第一判定步驟601(判定是否使用色度去區塊濾波器)或第二判定步驟603(判定是否旁路/跳過色度去區塊濾波器)，可選地進一步調整步驟602和603。圖6中步驟601、605、607-610及606＆611個別類似於圖3中步驟311、312、313-317及318。基於第一或第二判定步驟601、603之結果，於步驟604執行色度濾波。更詳細而言，步驟600透過判定/選擇當前正被評估/考慮/處理之邊界的邊界強度(bS)來計算/判定/獲得針對第一層級濾波(控制)決策之測量。接著，步驟601檢查當前邊界(亦即，正被處理或考慮濾波之邊界)是否將被濾波。
應瞭解，可在此步驟中導出新的強度測量或來自HEVC實例之其他參數，在此情況下，步驟601、603中的決策/判定與步驟604中的濾波可被進一步適應/調整以應對此點。
舉例而言，根據實施例，HEVC中檢查針對亮度之邊界強度bS是否為0，以及若針對亮度之bS為0則判定針對當前邊界亦無發生色度濾波，並且處理於步驟611結束。若需要執行色度濾波，則該處理繼續到步驟602。本實施例假設針對亮度和色度濾波，根據基於bS條件的第一層級濾波(控制)決策都是相同的。然而，應瞭解根據另一實施例，亦可實作對此第一層級條件之調整。舉例而言，可針對亮度與色度濾波評估第一層級的不同條件，在該情況下，亮度濾波決策與色度濾波決策路徑被分割成分離的路徑/流程，步驟602處於亮度濾波決策路徑中(步驟602之結果被饋送到色度濾波決策路徑中)。
接著，在步驟603做出有關是否旁路色度濾波之第二層級濾波(控制)決策(類似於針對亮度濾波的步驟605或312)。為了在步驟603做出確定(例如，使用基於dLuma 的條件)，在步驟602獲得與評估之與亮度樣本相關的測量(或度量)。舉例而言，這可包含計算/評估/獲得與HEVC(H.265)中相同的測量，或獲得任何其他可採用於JVET/H.266之測量。在已獲得/判定相關(一或多)測量後，執行基於條件之判定步驟603。至少根據基於亮度樣本之(一或多)測量，判定/決定是否濾波(或旁路)對應的色度邊界。應瞭解本處所述「對應」是具有廣義定義，例如，色度邊界可能不會完全重疊(或並置)亮度邊緣(例如，其可能僅部分重疊或具有對應/相關聯/並置位置)，在該情況下須要適應/調整。舉例而言，在此情況下可用圖8所示之替代去區塊濾波器。
根據本發明另一實施例，步驟603可涉及基於以下任何一個或多個條件的判定。若亮度濾波器旁路決策是基於條件「dLuma ＜β」，如步驟605，則針對色度濾波器旁路決策的條件是基於「dLuma ＜(bS*β)/2」。然而，這假設如上述bS表中般，使用相同的定義來判定bS。在其他情況下，此條件可取而代之是：「dLuma ＜TABLE [bS]*β」，其中「TABLE[bS]」函數將bS值映射到另一值。應瞭解，在此條件，或實際上任何其他條件中的其他變化/調整(例如，以實現整數表示及/或期望類型的捨入)也是可能的。舉例而言，β是一整數且bS範圍從0到2(包括0和2)，以及函數/表TABLE為[0, 3, 8]，此條件可以是：「dLuma ＜(TABLE[BS]*β+4)/8」。
另一種可能性是不使用針對亮度計算/判定的β，而是以與針對上述HEVC色度去塊濾波器控制參數判定所討論般針對色度樣本的tc 類似的方式導出β。如上述計算Q值(亦即，使用「Q=Clip3(0,53,QpC +2+ (slice_tc_offset_div2＜＜1))」)，同時考慮參數/函數中亮度之差異，諸如：cQpPicOffset以獲得qPi(取代qPL )；剪切(在[0；53]範圍內而不是[0；51])和表查找該值；以及色度通道之bitdepth。
替代地，為了根據亮度與色度(樣本)之間的鏈接/關係賦能更精細控制，可導入針對β之色度偏移，其可舉例而言相對於預設值(例如0或2或負值)或相對於β之(亮度)偏移而發訊。使用此等偏移對諸如當網路攝影機在低光源條件下運作的情境下特別有用，在該情境中各分量之雜訊量與在白天運作時相比有所不同(由於去區塊濾波器亦可作為低通濾波器/模糊濾波器，故對該分量增加去區塊偏移通常在編碼效率方面有正面影響)，並且可因此受益於使用此偏移調整針對日/夜不同時間之決策。可透過用於設定日夜條件的圖形使用者介面(GUI)中的設定來實作偏移之改變。另一種使用此偏移可為有用之情境為當用以擷取內容/影像之感測器由於其低性能品質(例如相較於較先進感測器)造成對特定分量產生較大雜訊(保證增加偏移用於雜訊之較佳處理/移除)的時候。另一實例是在做出基於內容的決策時：例如，當一些內容具有非常特定色度內容時，例如運動，醫療或自然內容(例如，葉枝、內視鏡視圖、身體掃描)或視訊監視(人臉和牌照)。因此，編碼器可以根據目標內容適應該偏移，該偏移亦可由操作者透過GUI(例如，顯示在行動電話上，MRI醫療裝置上或視訊管理系統上)例如取決於擷取影像之位置及/或擷取影像之原因而設定。根據又另一替代方案，用於HEVC亮度樣本之β偏移也可以僅用於色度(樣本)。
在任何情況下，用於獲得/判定Q之公式將為：Q=Clip3(0,53,QpC+(slice_chroma_beta_offset_div2＜＜ 1))。這需要查找色度量化參數(QpP /Qpq ，其取決於色度QP偏移)，以判定/計算/評估QpC 。因此取而代之的，根據實施例，該針對Q之公式為：QChroma =Clip3(0,51+ N,QLuma +N)，其中QLuma 是使用HEVC亮度控制參數判定(例如，使用基於兩個參數β和tC 選擇出的亮度控制參數，即使用Q對β'/tC '映射表)與N(表示亮度與色度之間關係的偏移)所判定之Q值。在上述所有實施例中，接著可計算出一新βchroma ，且該βchroma 取代β用於以上公式中，例如：「dLuma ＜(bS*βChroma )/2」。
作為實例，可將下述值用作N(表示/指示亮度與色度之間關係的偏移)：0，其賦能與亮度相同範圍之切片層級控制；2，如同可見於HEVC中其他QP相關控制；或諸如-2之負值，觀察到當針對亮度時給定QP處誤差會比針對色度時大。
另一考量是可能會發生亮度與色度邊界之去耦合。舉例而言如上述，針對框內切片(僅由框內編碼區塊構成)，針對亮度與色度之QTBT樹是分離的(亦即，可以不同)，以使得針對亮度之邊界可以不會(完全)對應於任何針對色度之邊界。舉例而言，針對(部分)對應色度邊界之邊界強度bS可設定成0。在此情況下，可能需要附加準則/條件，以令針對色度之bSChroma 不為0(亦即，沒有非本意/自動地確判定色度濾波)。相應地，使用分離/不同bSChroma 以取代使用針對亮度之bS可以被實作於上述所有或若干包括bS的條件中。
在所有情況下，這表示控制色度去區塊濾波器的兩種替代方法：透過考慮色度的附加資訊，提供/啟用更加細緻/準確/更精細的控制，無論它們是否基於亮度樣本；並且將色度濾波決策進一步移遠離亮度濾波決策步驟，儘管這仍然可能會導致與圖8的替代濾波器中相同的功能行為。
參照回圖6及步驟601和603如何涉及基於上述不同條件中的任何一或多者的判定，如果已經判定要使用(並且沒有旁路)色度濾波，則執行步驟604並且對色度邊界濾波(即，將濾波器施加於色度邊界附近/周圍的色度樣本)。
根據實施例，施加之色度濾波器是用於HEVC或JVET之色度濾波器(亦即，使用HEVC或JVET色度濾波參數)。根據替代實施例，基於步驟603(及/或601)，進一步判定/決定色度濾波器(以及其其他濾波參數)。再次參考圖8以最佳地描繪該判定。然而，本實施例考慮到在HEVC中，當bS=1時，沒有對色度施加去區塊濾波器之事實。因此，若步驟603經調整以令即使在bS＝1時亦是強迫/執行色度之濾波，則此濾波行為會被改變。一實例會是調整HEVC色度去區塊濾波器的操作，即透過以下方式調整其設定：不同地計算/判定諸如Δ等參數，例如，透過使用較低量級的值(例如除以2)；及/或限制經調整值的允許/可能範圍，例如，在過濾參數中使用「tC /2」代替「tC 」。
接著，習知亮度濾波在步驟605繼續，該步驟例如，如HEVC或JVET中般透過比較dLuma 與β來判定是否對亮度邊界濾波。再來，應瞭解調整後條件或經調整步驟605可用於步驟605與之後步驟。
根據另一實施例，其中不對色度濾波器單獨執行圖6中的步驟603，並且步驟604被移動到步驟605和607之間，在步驟603處的色度濾波決策與步驟605處的亮度濾波決策相同：如果要對亮度施加濾波則亦對色度施加濾波，且反之亦然。有關其中無執行針對亮度的濾波之情況，例如透過更新資料或只要透過什麼都不做，則步驟606執行此決策，並且針對當前亮度邊界之濾波會停止/終結於步驟611。否則，在步驟607執行(一或多)梯度或(一或多)測量之判定以及條件之評估，基於該條件用於在HEVC中做出亮度濾波器類型決策(例如，圖3中的步驟313-317中的強316或弱315濾波)。如圖7或圖8之濾波器中所示，步驟608之強與弱濾波之間的選擇取決於該(一或多)梯度或(一或多)測量。舉例而言，無論其是否考慮到有關是否僅對該邊界一側濾波或選擇濾波類型之決策，做出濾波參數決策。參照回圖6，如果要施加/使用其，則在步驟610根據其控制參數執行弱濾波，否則在步驟609執行強濾波。接著，處理結束於步驟611。
圖7示出描繪具有針對根據本發明實施例之色度濾波器類型控制的亮度樣本為基測量之去區塊濾波器的方塊圖。圖7與圖6極其相似。所有步驟600至610具有對應步驟700至710，除了步驟703，其與603相比已有所調整，並且由於已新增步驟720至723以使用不同類型的色度濾波器1和2，故已移除步驟604。因此，圖7之說明與圖6之說明相似，因此省略重覆說明並僅在下文中描述新步驟/部分。
在步驟703，根據已經針對圖6描述的步驟，做出濾波色度的決策以用於稍後使用：在一些實施例中，這可包含儲存該決策/判定的結果(例如，指示所做出決策的資料) 在緩衝器(記憶體、陣列或快取)中。按照圖6的處理繼續，直到在步驟708或709(608或609)要做出(亮度)濾波器類型(例如，弱或強)之決策/判定。然而，針對弱濾波器，已知將特定類型亮度濾波器施加到該亮度邊界，以及若於步驟722判定/檢查出色度需要濾波，則於步驟723將特定色度濾波器(例如，Chroma濾波器2)施加到對應色度邊界。
理當而言，可能不存在色度邊界需要濾波(例如，由於如先前所提使用不同QTBT之緣故)，或假若該亮度邊界在與兩個色度邊界重疊位置中則可能有多於1個的對應色度邊界。在此情況下，可相應地調整於步驟720或722做出之判定，例如透過判定若沒有對應色度邊界則不執行色度濾波。
對亮度使用強濾波可能暗示於步驟721將施加另一類型色度濾波(色度濾波器1)，前提是步驟720處之檢查/判定允許的話。將於下文中描述根據實施例的色度濾波器1＆2之間的差異。舉例而言，色度濾波器1或色度濾波器2可以是HEVC中定義的色度去區塊濾波器或甚至亮度去區塊濾波器(弱或強)中的任何一者。兩濾波器之間的差異也可以是判定/評估濾波參數的方式，例如，HEVC中所定義色度濾波中的參數Δ是使用與本文所述不同的表達式/公式而判定/評估出來的。在任何情況下，一旦做出使用亮度與色度邊界濾波器兩者之判定，並且在判定要使用其之情況下已經執行其濾波後，處理結束於步驟711。
圖8示出描繪具有用於控制根據本發明實施例之色度去區塊濾波器的亮度樣本為基測量之替代去區塊濾波器的方塊圖。圖8更詳細地描繪在色度去區塊處理期間如何使用亮度樣本為基的資訊(即亮度資訊)。圖7和圖6中所示的實施例之間的差異強調亮度資訊可以如何以各種方式用以控制色度去區塊。然而，在圖7和圖6之此等實施例中，所有此等操作(例如，使用亮度資訊用於控制色度去區塊)是嵌套在(新增到)現有的亮度濾波處理中。圖8描繪另一實施例，其在功能上相似於基於圖7和圖6之實施例中若干者，僅管以不同方式實作。
在此實施例中，色度樣本之濾波使用基於亮度樣本所判定出的濾波參數。在用於色度與亮度的QTBT樹未對準(例如，當它們不同時)的情況下，來自亮度的這些參數可能是可用的但是未使用的，或者由於針對給定色度邊界不存在對應的亮度邊界之緣故而是不可用的。此外，獲得/判定(例如，對先前處理的區塊/單元的)色度濾波參數資料可能需要隨時間累積這些資料，因此需要用於開始該累積的初始值並且將其用於第一濾波處理。舉例而言，若亮度樣本為基參數不可用或由於時間或對準問題而為不適用，則步驟800之初始化處理期間所設定之初始/預設值可被使用。因此，步驟800透過設定預設濾波參數將該處理初始化(即，提供用於濾波參數的預設/初始值，該參數將在步驟810中取回並在步驟811中被使用)。例如，此等預設參數可以是：「無濾波」；取決於切片類型，例如如果是框內切片，則正常濾波，否則不進行濾波；及/或若在先前運行中已累積資訊，則資訊的初始化(例如，如果步驟804包括評估諸如參數dTotal =dTotal + dLuma _for_this_unit之類的資訊，則dTotal 必須具有用於進行該評估的初始/預設值)。
根據實施例，由於複數個(亦即，多)組濾波參數(取決於受影響色度邊界之數量)可能需要被儲存在緩衝器中，故此初始化包含對其所有者設定預設參數並將其儲存在緩衝器中。
步驟801接著獲得/接收/識別/選擇出要濾波之第一亮度濾波單元/區塊。此濾波單元/區塊可對應於固定(預定)數量個樣本，或一分割之完整邊界(亦即，諸如編碼/處理/預測等分割的單元邊界)。應瞭解，可對針對影像濾波通中所識別的所有邊界執行此處理，或對當前CTB(正被處裡之CTB)執行此處理，這可以是有利的因為其對緩衝器大小要求設置了上限。因此判定/識別一邊界，以及在該邊界各側上之相關樣本與編碼單元/區塊。這賦能在步驟802判定亮度濾波參數，以及判定亮度濾波活動，諸如：亮度邊界是否已經濾波；哪一側必須/已被濾波；(將)使用的亮度濾波器類型；以及已濾波何等樣本或行(line)或列，及/或它們的計數。
步驟803接著嘗試找尋一位置。此位置相關於一系列用於(例如存取)濾波參數之儲存器，例如上述緩衝器中濾波參數之位置。根據實施例，其儲存器可以經「壓縮」，亦即具有比亮度單元/區塊數量更小之大小，以儲存將其快取所需之記憶體。在此類實施例中，儲存在相同位置中之濾波參數被用於多於一個的亮度單元/區塊。根據實施例，透過將當前亮度單位/區塊的索引或座標除以數字N(理想情況下為2的冪並且如果需要，將除出來的數值捨入(即調整或校正)成整數，該整數值表示每個儲存濾波參數的位置)來存取/取回/獲得這樣的濾波參數。該數量N還可以與亮度和色度通道的採樣鏈接：例如，以4：2：0色度格式，每個色度通道具有亮度樣本數量的四分之一，在這種情況下N=4可能更為合適。
根據實施例，當針對亮度與色度之去區塊單元不對準時可採取相似方法。舉例而言，若(亮度樣本之)4×4(濾波)單元/區塊被用於亮度(其以4：2：0對應於用於色度之2×2濾波單元/區塊)但(色度樣本之)4×4濾波單元/區塊亦被用於色度，在該情況下N可以為2(用於劃分色度濾波參數的座標以獲得相關聯基於亮度的濾波參數)或4(用於劃分色度濾波參數的索引以獲得相關聯基於亮度的濾波參數之索引/位置)因為各最小長度色度邊界對應於兩個最小長度亮度邊界。亦即，當4×4色度濾波單元對應於8×8個樣本之亮度區塊時，則可使用僅與一4×4亮度濾波單元(亦即，四個裡面中一個)相關之資訊/參數。根據另一實施例，使用1對1映射：針對各亮度(或色度)單元/區塊，有對應的儲存單元在緩衝器中。應瞭解，適當儲存位置(以及與其一起使用的合適實施例)取決於步驟804。
步驟804執行針對色度(濾波器)之控制參數的判定。如先前所述，一色度邊界可能對應於多於一個(例如，兩個)的亮度邊界。因此，針對該情況，根據實施例步驟804可包括更新任何給定數量的亮度邊界之累積器/更新器(基於C色度邊界/樣本/區塊與L亮度邊界/樣本/區塊之間的C對L映射)。在實施例中，參數dLuma 之值經累積/組合/更新(並且儲存)以產生色度參數dChroma 之值。在另一實施例中，為了獲得dChroma ，複數個dLuma 值在經累積/組合之前使用下述者將其加權：針對對應於比儲存器調整的色度索引/位置少一個亮度單元/區塊的亮度索引/位置之亮度索引/位置，其權重為1；針對對應當前儲存器調整的色度索引/位置的亮度索引/位置，其權重為2；以及針對比儲存器調整的色度索引/位置多一個亮度單元/區塊的亮度索引/位置，其權重為1。例如，若idx被用以表示用於在儲存器中分配之該位置/索引，則此類權重對應於以下公式：
「dChroma [idx/N]=dLuma [idx-1]+2*dLuma [idx]+dLuma [idx+1]」。
應瞭解，有數種方式可以執行此累積(亦即，dChroma 之基於dLuma 判定)。根據實施例，存在一種一對一映射，以使得此等累積/判定是基於：「dChroma [idx]=dLuma [idx]」。
在另一實施例中，此等「d」值可劃分或限制在特定範圍內，以令用於dChroma 之儲存器並因而令緩衝器具有(預定)界定/有限限制之大小。舉例而言，飽和8-bit累積器可能是足夠的，以及具有此類累積之實施例因此可使用：dChroma [idx]=Clip3(0,255,dLuma [idx-1])；dChroma [idx] =Clip3(0,255,dChroma [idx]+2*dLuma [idx])；以及dChroma [idx]= Clip3(0,255,dChroma [idx]+2*dLuma [idx+1])。
根據實施例，還可以以類似的方式計算/判定要/正在/已經被過濾的亮度邊界的數量：假設若dLuma [idx]＜(bS[idx]*β[idx])/2，則fLuma [idx]之值被設定成0，否則fLuma [idx]之值被設定成1，則會獲得以下濾波參數：「fChroma [idx/N]=fLuma [idx-1]+2*fLuma [idx]+fLuma [idx+1]」。因此fLuma 被定義為一比較之二進制結果(即0或1)，並且fChroma 是對亮度邊界/樣本/區塊執行處理時所累積的參數。在步驟810，可取回針對fChroma 之最終/最後值(亦即，在編碼/解碼處理期間將使用之值)。例如，如果累積/最終/最後值為2或更高，則idx處的色度邊界/邊緣(因此，fChroma [idx])被濾波，否則不被濾波(即，如果處於idx之亮度邊界/邊緣，或者處於idx-1和idx+1之亮度邊界/邊緣兩者皆被濾波，則對應的色度邊界/邊緣亦被濾波)。
在另一實施例中，亦可執行與步驟603等效之判定。在此等實施例中，步驟804因此極其相似於步驟703。又在另一實施例中，對亮度濾波之更多控制參數被儲存/用於色度濾波參數判定/導出。舉例而言，步驟802處判定之所有或若干亮度濾波參數可被儲存/用於色度濾波之這種用途。
既然已經更新或儲存亮度(以及色度，如果亮度已經被確定/導出)濾波參數，則在步驟805發生當前亮度單位/區塊的實際濾波。然後在步驟806檢查/確定是否所有亮度單元/區塊都已被考慮用於濾波。這可以對應於判定/識別當前單元/區塊是否為CTB中或影像中的最後一者。若為否，則步驟807在繞回步驟802之前獲得/接收/識別/選擇出下個亮度單元/區塊。否則，在步驟808開始色度濾波，其透過以類似於步驟801中所用以評估/考慮的條件/參數來獲得/接收/識別/選擇出要處理之第一色度單元/區塊，該等條件/參數例如，要濾波之該組單元/區塊是CTB或影像，或其是否為固定量/數量之樣本，或在邊界周圍/相關之所有樣本都要被處理。
與步驟803相似，步驟809判定當前色度單元/區塊之位置，該位置用於存取/選擇/獲得於步驟804所儲存之相關儲存資訊。這可僅透過使用該當前色度單元/區塊之索引或座標來達成。然而，若已執行濾波參數儲存器之壓縮(在該情況下，儲存器中之位置可能不會與該當前色度單元/區塊之索引/座標相同)，則此可能再次需要若干處理以導出/判定/獲得該儲存器中之「壓縮」位置，例如透過將該索引/座標除以與上述步驟803處用於基於亮度位置的儲存位置導出的數字潛在不同的數字。接著在步驟810處可獲得/取回濾波參數。基於該所獲得/取回之濾波參數，可接著執行色度單元/區塊之濾波。
舉例而言，根據實施例，透過使用以下判定/評估中的一個或多者來執行這樣的濾波：如果已經將對應的亮度單位/區塊濾波，則色度單位/區塊亦被濾波；如果亮度單位/區塊的計數，或經濾波的列或行(lines)的計數，或經濾波的亮度樣本的計數，或其組合，諸如fChroma [idx]，嚴格高於臨界值(例如，針對fChroma [idx]為1)，然後將色度單位/區塊濾波；及/或如果亮度邊界的一側已被濾波，則也將色度邊界的對應側濾波。
根據實施例，當以與HEVC色度去區塊濾波器參數相同的方式判定其他色度控制參數(例如，tC )時，會提供用於判定/計算亮度β參數的色度等效物之足夠資訊，因此可在該階段(即，在執行步驟810時或緊接著之後執行)執行步驟603/703的判定/檢查(例如，在步驟603做出有關是否旁路色度濾波之第二層級濾波器(控制)決策，類似於用於亮度濾波之步驟605、705或312)。
所儲存資訊是用於當前位置之累積dLuma 值，並且接著將其與適當臨界值做比較。根據實施例，針對無累積之1對1映射(例如，dChroma [idx]=dLuma [idx])，此類比較是基於以下條件：「dChroma [idx]＜(bSChroma [idx]*βChroma [idx])/2」。根據實施例，若有累積(亦即，dChroma [idx/N]=dLuma [idx-1]+2*dLuma [idx]+dLuma [idx+1])，則此比較是基於以下條件：「dChroma [idx]＜2*bSChroma [idx]*βChroma [idx]」。應瞭解，透過累積，我們指的是判定dChroma 需要存取關於多於一個dLuma 值的資料/資訊，亦即與多於一個亮度邊界/區塊相關的資料/資訊，之情況。
在其中針對所儲存濾波參數執行預設初始化之另一實施例中，此類初始化賦能識別/區別並接著根據以下不同情況有所處理，該等情況包括：無對應的亮度邊界；對應亮度邊界已被濾波，以及對應亮度邊界並未被濾波。若無對應的亮度邊界，則可使用諸如預設dChroma 值之預設濾波參數。其可被設定以迫使對應色度邊界之濾波或非濾波。舉例而言，針對具有至少一框內區塊之邊界而言，此種濾波可被執行/賦能，否則此種濾波器即被去能，或者最終決策被延緩直到評估出符合至少一其他條件。
根據本文所述若干實施例，dChroma [idx]值之判定並不會使用任何色度樣本，並且只有亮度樣本被使用以判定出此等值。其他實施例亦示出(例如，除了前一實施例的特徵之外)可以使用與色度(即，具有對色度樣本的相依性的值)相關的一些語法來賦能用於色度去區塊濾波器之bSChroma [idx]與βChroma [idx]的導出。這是有利的，因為此等與色度樣本之獨立性與分離的色度濾波參數避免潛在可用性/相依性問題，同時透過使用具有較高解析度亮度樣本與考慮到色度與亮度樣本之間差異的色度濾波參數以賦能色度去區塊濾波器之較精細控制。
根據本發明另一實施例，如本文所述透過色度去區塊濾波器對更多色度樣本(多於HEVC色度去區塊濾波器)進行濾波。在前述針對圖6、圖7與圖8所示實施例之說明中，有提及亮度控制可以包括選擇具有附加/額外長度/範圍的色度濾波器(例如，與步驟721處的色度濾波器1或與圖7中步驟723處的色度濾波器2相比)，而不選擇具有HEVC中的長度/範圍的色度濾波器。為達成此目的，根據實施例，再使用來自HEVC中亮度弱濾波的p1i與q1i 樣本之弱濾波。然而，這種方法的缺點是它需要存取更多樣本(即，亮度樣本)，從而導致記憶體頻寬成本，並且可能阻止其在濾波方向被用於小於4的分割中，因為與濾波相關的色度樣本中可能存在重疊。此外，在QTBT情況下，可能有並排兩個樣本之兩個分割。這導致與並行處理不相容的問題，而根據一個實施例，該問題可以透過禁止對這些單元/區塊之間的邊界進行濾波來減輕/解決。然而，這代表在此等邊界周圍的區塊失真會保持/為未濾波的。
根據實施例，作為僅禁止濾波的替代方案，使用以下濾波參數(例如，基於色度樣本)來賦能對較大量樣本的濾波，而不需要將更多樣本作為輸入：Δp=Δ＞＞1；Δq=Δ＞＞1；p1i ′=Clip1C(p1i +Δp)；以及q1i ′=Clip1C(q1i -Δq)。因此，針對Δq與Δp之判定/計算非常簡單，並且不倚賴(亦即，獨立於)樣本pJi 與qJi ，其中J ＞ 1(亦即，遠離邊界超過2個樣本之樣本)。這代表有可能可以執行並行處理，因為濾波順序並無相依性。仍根據另一實施例，針對參數Δp與Δq之公式可被調整，例如，考慮到對應側中之單元/區塊類型，例如，若Q區塊是框間編碼區塊，則Δq=Δ＞＞2，否則Δq=Δ＞＞1。樣本p1i & q1i 亦可被獨立濾波，亦即一者經濾波而另一者未濾波或使用不同的濾波參數/方法：例如，與亮度弱濾波中發生情況相比，這麼做的原因可以是因為在邊界相關側上色度編碼單元/區塊之不同尺寸。
又在另一實施例中，當判斷Δq & Δp時，考慮到針對p1i ,′的p1i & p0i 樣本之值與針對q1i ′的q1i & q0i 樣本之值，例如：Δp=Clip3(-abs(p0i -p1i )＞＞5,abs(p0i -p1i )＞＞5,Δ＞＞1)；以及Δq=Clip3(-abs(q0i -q1i )＞＞5,abs(q0i -q1i )＞＞5,Δ＞＞1)。應瞭解，上述者僅供以作說明用，以及本發明之不同實施例可以不同方式使用此等樣本值以獲得 Δq & Δp，並最終獲得p1i ,′ & q1i ,′。在另一實施例中，若Δ不為零，則取決於(p0i -p1i )與(q0i -q1i )之符號，將Δp與Δp設成-1或1。
濾波多樣本之一原因在於賦能使用不同類型之濾波器，包括相對/比較強之濾波器(透過對更都樣本執行濾波所實作)，例如，步驟721。
圖9A示出根據本發明實施例的邊界濾波去能/賦能之組合，該圖式說明判定/計算之使用。黑色粗邊界被一般地處理。然而，虛線(dashed line)與點線(dotted line)較有問題，因為其無法被並行處理。仍期望盡可能多地並行處理越多邊界越好。因此，一實施例包含去能點線邊界901, 902 & 903之濾波。然而，期望對對應的虛線邊界910至914執行濾波，可能甚至比其他濾波邊界更多因為901至903並未被濾波。因此，根據實施例，執行下述者：根據上公式至少對910之q1i 樣本(p1i 為可選的)執行濾波；至少對911之p1i 樣本(q1i 為可選的)執行濾波；至少對912之q1i 樣本(p1i 為可選的)執行濾波；至少對913之p1i 樣本與q1i 樣本執行濾波；以及至少對914之p1i 樣本(q1i 為可選的)執行濾波。
應瞭解根據另一實施例，根據上述實施例之去區塊濾波器(假設是「新的濾波器」)可與已知濾波器結合使用，舉例而言當達成特定條件時僅使用新濾波器而若否則使用已知濾波器，或反之亦然。圖9B示出根據本發明實施例的不同類型之邊界以及該等邊界如何被處理。例如，根據實施例，用於決定/判定濾波器尺寸的規則/條件(即，是否使用已知濾波器或能夠對更多樣本濾波的新濾波器)如下：如果邊界910的右側部分/側是已知有2個尺寸為2的分區，則910的右側部分將根據樣本q00 ，q10 和q20 的值以至多對樣本q00 和q10 執行濾波，並且僅對它們濾波；沒有濾波器應用於901(例如，它被跳過)；以及邊界911的左側部分/側則可以至多使用樣本q20 和q30 (在其左側)來僅對樣本q30 執行濾波。
另外，若以邊界910對稱，例如910之左側部分/側有相似樣本/邊界之分布，則可對稱地應用相同規則。舉例而言，相同規則被應用於邊界921(如針對邊界901所述)與邊界922(如針對邊界911所述)，以及將p樣本替換成上述規則中的對應q樣本。
[其他實施例]
根據本發明之方法/處理中任何步驟或本文所述功能可被實作於硬體、軟體、韌體、若其任意組合中。如果以軟體實施，則步驟/功能可作為一個或多個指令或程式碼或程式被儲存或傳輸於電腦可讀取媒體中，並由一個或多個基於硬體的處理單元(例如可程式計算機器)執行，該硬體可以是PC(「個人電腦」)、DSP(「數位訊號處理器」)、電路、電路組、處理器以及記憶體、通用微處理器或中央處理單元、微控制器、ASIC(「專用積體電路」)、現場可程式邏輯陣列(FPGA)、或其他等效整合或分離邏輯電路組。據此，本文所用術語「處理器」可指任何前述結構或適合於實現本文描述技術的任何其他結構。
本發明實施例亦可透過包括無線手機、積體電路(IC)或JC組(例如，晶片組)等各式各樣裝置或設備來實現。本文描述了各種組件、模組或單元以說明被配置為執行該等實施例的設備/裝置的功能性態樣，但並不一定需要由不同的硬體單元來實現。反之，各種模組/單元可被結合於編解碼器硬體單元中或由一組互操作硬體單元提供，包括一個或多個處理器結合適當軟體/韌體。
本發明實施例可透過下述者來實現：系統或裝置之電腦，其讀出並執行記錄在儲存媒體上的電腦可執行指令(例如一或多程式)以執行一或多上述實施例之模組/單元/功能，及/或包括一或多處理單元或電路用於執行一或多上述實施例之功能；或是透過由該系統或裝置之電腦所執行之方法，例如透過從儲存媒體讀出並執行電腦可執行指令以執行一或多上述實施例之功能，及/或控制該一或多處理單元或電路以執行一或多上述實施例之功能。該電腦可包括一網路之分離電腦或分離處理單元，用以讀出並執行電腦可執行指令。例如經由網路或有形儲存媒體，可從諸如通訊媒體等電腦可讀取媒體提供該電腦可執行指令給該電腦。該通訊媒體亦可是訊號/位元流/載波。該有形儲存媒體是「非暫態電腦可讀取儲存媒體」，其可例如包括下述一或多者：硬碟、隨機存取記憶體(RAM)、唯讀記憶體(ROM)、分散式計算系統之儲存器、光碟(諸如，CD、數位多功能碟片(DVD)或藍光光碟(BD)™)、快閃記憶體裝置、以及記憶卡等相似者。透過機器或專用組件，亦可在硬體中實作至少若干步驟/功能，上述機器或專用組件諸如是現場可程式閘陣列(Field-Programmable Gate Array，FPGA)或專用積體電路(Application-Specific Integrated Circuit，ASIC)。
圖10是用於實作本發明之一或多實施例的計算裝置1300的示意性方塊圖。計算裝置1300可以是諸如微電腦、工作站或便攜式裝置等裝置。計算裝置1300包含通訊匯流排，該匯流排連接到：-中央處理單元(CPU)1301，諸如微處理器；-隨機存取記憶體(RAM)1302，用於儲存本發明實施例之方法的可執行碼，以及經適應以記錄用於實作根據本發明實施例對至少部分影像之編碼或解碼之方法所需的變數與參數之暫存器，可舉例而言透過連接到擴充埠之可選RAM來擴充其記憶體容量；-唯讀記憶體(ROM)1303，用於儲存電腦程式用於實作本發明實施例；-網路介面(NET)1304，其典型上連接到通訊網路，透過其可傳輸或接收要處理之數位資料。網路介面(NET)1304可以是單一網路介面，或由一組不同網路介面(例如有線及無線介面，或不同類型之有線或無線介面)所構成。受在CPU 1301中執行的軟體應用程式之控制，資料封包被寫入網路介面以用於傳輸或從網路介面讀取以用於接收；-使用者介面(UI)1305，可被用於接收來自使用者之輸入或用以對使用者顯示資訊；-硬碟(HD)1306，可作為大容量裝置而被設置；-輸入/輸出模組(IO)1307，可用於從/到外部裝置(諸如視訊源或顯示器)接收/傳送資料。可執行碼可被儲存在ROM 1303中、在HD 1306上或在諸如例如磁碟(disk)等可卸式數位媒體上。根據變體，經由NET 1304，程式之可執行碼可以藉由通訊網路而被接收，以為了在執行之前被儲存在通訊裝置1300之儲存機構之一，諸如HD 1306。CPU 1301經適應以控制並且主導根據本發明實施例的程式之軟體碼的部分或是指令之執行，其指令被儲存在上述儲存機構之一者中。在通電後，在從例如程式ROM 1303或HD 1306載入指令後，CPU 1301能夠從與軟體應用程式相關之主要RAM記憶體1302執行該等指令。此類軟體應用程式當被CPU 1301執行時，會導致執行根據本發明方法之步驟。
亦應瞭解，上述比較、判定、評估、選擇、執行或考慮的任何結果，例如在編碼或濾波處理期間進行的選擇，可以在位元流中資料，例如，旗標或指示結果的資料，來指示或可確定/可推斷，使得所指示的或確定的/推斷的結果可以用於該處理中，而不用例如在解碼處理期間實際執行該比較、判定、評估、選擇、執行或考慮。
雖然本發明已透過參照實施例而說明，惟應瞭解本發明並未受限於所揭示實施例。在該技術領域中具有通常知識者應能瞭解可對其做出各種改變與調整而不會脫離由所附申請專利範圍所界定之本發明的範疇。本說明書(包括任何所附申請專利範圍、摘要、及圖式)中揭示之所有特徵及/或所揭示任何方法或處理之所有步驟，可以以任何組合方式被結合，除了會使這些特徵及/或步驟中的至少若干者是互斥的組合以外。揭示於本說明書(包括任何所附申請專利範圍、摘要、及圖式)中的各特徵可被提供相同、等效或類似功用之替代特徵所替換，除非被明確指明這是禁止的。因此，除非被明確指明被禁止，否則各揭示之特徵僅係通用系列的等效或相似特徵中之一實例。
在申請專利範圍中，用字「包含」並不會排除其他元素或步驟，且不定冠詞「a或an」並不排除複數個。在相互不同的附屬項中記載不同特徵之純粹事實並不表示不能有利地使用該等特徵的組合。
應瞭解，HEVC相容方法/處理或裝置(例如，HEVC之編碼器、解碼器、亮度去區塊濾波器或色度去區塊濾波器)是相關於本發明實施例而說明的，並非HEVC相容方法/處理或裝置之所有特徵需要被包括在該實施例中。只要有包括該等與實施例其他部分互動之特徵(例如，取決於實施例，該接收/獲得亮度樣本或HEVC亮度去區塊濾波器之濾波參數設定步驟)，則本發明之實施例可以被實作。
亦應瞭解根據本發明其他實施例，根據前述實施例之解碼器被提供於使用者終端中，該使用者終端諸如是電腦、行動電話(蜂巢式電話)、平板電腦或可對使用者提供/顯示內容之任何其他類型裝置(例如，顯示器裝置)。仍又根據另一實施例，根據前述實施例之編碼器被提供在影像擷取裝置中，該影像擷取裝置亦包括攝影機、視訊攝影機、或網路攝影機(例如，閉路電視或視訊監視攝影機)，其擷取並提供該內容給編碼器編碼。
100‧‧‧解碼器
101‧‧‧位元流
102‧‧‧熵解碼模組
103‧‧‧反量化模組
104‧‧‧反轉換模組
105‧‧‧框內預測模組
106‧‧‧運動補償模組
107‧‧‧後濾波模組
108‧‧‧參考畫面
109‧‧‧視訊訊號
110‧‧‧運動向量解碼模組
111‧‧‧運動向量欄位資料
150‧‧‧編碼器
151‧‧‧原始序列
152‧‧‧像素區塊
153‧‧‧框內預測
154‧‧‧運動估計
155‧‧‧運動補償
156‧‧‧選擇模組
157‧‧‧轉換模組
158‧‧‧量化模組
159‧‧‧熵編碼模組
160‧‧‧MV預測與編碼模組
161‧‧‧運動向量欄
168‧‧‧參考畫面
173‧‧‧反量化模組
174‧‧‧反轉換模組
175‧‧‧框內預測模組
176‧‧‧運動補償模組
177‧‧‧後濾波模組
191‧‧‧系統
195‧‧‧系統
199‧‧‧通訊網路
200‧‧‧樣本集
201‧‧‧邊界
203‧‧‧第一列亮度樣本
205‧‧‧最終列亮度樣本
310‧‧‧步驟
311‧‧‧步驟
312‧‧‧步驟
313‧‧‧步驟
314‧‧‧步驟
315‧‧‧步驟
316‧‧‧步驟
317‧‧‧步驟
318‧‧‧步驟
319‧‧‧步驟
1000‧‧‧步驟
1100‧‧‧步驟
1200‧‧‧步驟
401‧‧‧編碼樹區塊
402‧‧‧編碼單元
410‧‧‧像素區塊
420‧‧‧區域/部分/區塊
421‧‧‧區域/部分/區塊
422‧‧‧區域/部分/區塊
423‧‧‧區域/部分/區塊
430‧‧‧區域/部分/區塊
431‧‧‧區域/部分/區塊
440‧‧‧區塊
450‧‧‧四元樹
460‧‧‧葉節點
461‧‧‧葉節點
462‧‧‧葉節點
463‧‧‧葉節點
470‧‧‧葉節點
471‧‧‧葉節點
480‧‧‧節點
501‧‧‧第一通濾波
502‧‧‧第二通濾波
510‧‧‧邊界
511‧‧‧邊界
512‧‧‧邊界
520‧‧‧邊界
521‧‧‧邊界
600‧‧‧步驟
601‧‧‧步驟
602‧‧‧步驟
603‧‧‧步驟
604‧‧‧步驟
605‧‧‧步驟
606‧‧‧步驟
607‧‧‧步驟
608‧‧‧步驟
609‧‧‧步驟
610‧‧‧步驟
611‧‧‧步驟
700‧‧‧步驟
701‧‧‧步驟
702‧‧‧步驟
703‧‧‧步驟
705‧‧‧步驟
706‧‧‧步驟
707‧‧‧步驟
708‧‧‧步驟
709‧‧‧步驟
710‧‧‧步驟
711‧‧‧步驟
720‧‧‧步驟
721‧‧‧步驟
722‧‧‧步驟
723‧‧‧步驟
800‧‧‧步驟
801‧‧‧步驟
802‧‧‧步驟
803‧‧‧步驟
804‧‧‧步驟
805‧‧‧步驟
806‧‧‧步驟
807‧‧‧步驟
808‧‧‧步驟
809‧‧‧步驟
810‧‧‧步驟
811‧‧‧步驟
812‧‧‧步驟
813‧‧‧步驟
901‧‧‧邊界
902‧‧‧邊界
903‧‧‧邊界
910‧‧‧邊界
911‧‧‧邊界
912‧‧‧邊界
913‧‧‧邊界
914‧‧‧邊界
921‧‧‧邊界
922‧‧‧邊界
1300‧‧‧計算裝置
1301‧‧‧中央處理單元
1302‧‧‧隨機存取記憶體
1303‧‧‧唯讀記憶體
1304‧‧‧網路介面(NET)
1305‧‧‧使用者介面(UI)
1306‧‧‧硬碟(HD)
1307‧‧‧輸入/輸出模組(IO)
圖1A-1C示出描繪根據本發明實施例的解碼器、編碼器或包含編碼器及/或解碼器的系統之方塊圖；
圖2示出兩區塊之間的垂直邊界；
圖3示出描繪用於HEVC的亮度去區塊濾波器之方塊圖；
圖4A與4B示出描繪根據本發明實施例的去區塊濾波器之方塊圖；
圖5A示出在HEVC中將(數位)影像分割成像素區塊；
圖5B與5C示出基於由JVET(針對ITU-T VCEG以及ISO/IEC MPEG之未來視訊編碼(FVC)或多功能視頻編碼(VVC)的聯合視頻探索小組)所考慮之QuadTree加二元樹(QTBT)的(數位)影像的分割；
圖5D示出基於HEVC與QTBT分割中不同類型之邊界；
圖6示出描繪具有針對根據本發明實施例之色度濾波器on/off控制的亮度樣本為基測量之去區塊濾波器的方塊圖；
圖7示出描繪具有針對根據本發明實施例之色度濾波器類型控制的亮度樣本為基測量之去區塊濾波器的方塊圖；
圖8示出描繪具有用於控制根據本發明實施例之色度濾波器的亮度樣本為基測量之去區塊濾波器的方塊圖；
圖9A示出根據本發明實施例的去能與賦能濾波之邊界；
圖9B示出根據本發明實施例的不同類型之邊界以及該等邊界如何被處理；以及
圖10示出根據本發明實施例的例示性環境。

Claims (25)

  1. 一種處理影像的一或多部分之方法，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該方法包含： 針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。
  2. 如請求項1所述之方法，更包含針對該亮度部分的邊界控制亮度濾波器，以令亮度樣本可以被該亮度濾波器濾波，其中： 當該可濾波色度樣本係與該可濾波亮度樣本相關聯時，或者當該亮度部分邊界係與該色度部分邊界相關聯時，所述針對該色度部分邊界控制該濾波器係基於用於控制該亮度濾波器的參數。
  3. 如請求項1或2所述之方法，其中對該濾波器施加濾波參數，該濾波參數係獨立於距離該邊界兩個以上樣本之色度樣本。
  4. 如請求項1至3中任一項所述之方法，其中在該邊界一側上之第一色度樣本係獨立於在該邊界另一側上之第二色度樣本而被濾波。
  5. 如請求項4所述之方法，其中該獨立濾波係基於該第一或第二色度樣本所屬的色度區塊或單元之類型。
  6. 如請求項4或5所述之方法，其中該獨立濾波係基於該第一或第二色度樣本所屬的色度區塊或單元之尺寸。
  7. 如請求項1至6中任一項所述之方法，其中對該濾波器施加濾波參數，該濾波參數係基於量化參數Q與下述一或多者所判定的：在該邊界一側上距離該邊界J個樣本之色度樣本的樣本值pJi ，使得p0i 是最近的色度樣本；以及該邊界另一側上距離該邊界J個樣本之色度樣本的樣本值qJi ，使得q0i 是最近的色度樣本。
  8. 如請求項7所述之方法，其中該量化參數Q是亮度部分或色度部分之量化參數Q，該濾波參數係使用變數tC 所判定的，以及tC 係基於Q與tC 之間的映射函數所判定的。
  9. 如請求項8所述之方法，其中該映射函數係根據以下所示之表：。
  10. 如請求項1至9所述之方法，其中該影像部分係以4：2：0之色彩格式處理。
  11. 一種針對影像的一或多部分控制濾波器之方法，該一或多影像部分之亮度樣本可透過HEVC相容亮度去區塊濾波器而濾波，該方法包含針對該一或多影像部分的色度樣本之間的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。
  12. 如請求項11所述之方法，其中： 當該可濾波色度樣本係與該可濾波亮度樣本相關聯時，所述針對該色度樣本之間的該邊界控制該濾波器係基於複數個該可濾波亮度樣本或基於用於控制該HEVC相容亮度去區塊濾波器的參數。
  13. 一種將影像編碼之方法，該方法包含針對該影像之一或多部分根據請求項1至10中任一項所述之方法來處理、或根據請求項11或12所述之方法來控制濾波器。
  14. 如請求項13所述之方法，更包含： 接收影像； 將該接收到的影像編碼，以產生位元流；以及 處理該經編碼的影像，其中該處理包含：根據請求項1至10中任一項所述之方法的處理、或根據請求項11或12所述之方法的控制。
  15. 一種將影像解碼之方法，該方法包含針對該影像之一或多部分根據請求項1至10中任一項所述之方法的處理、或根據請求項11或12所述之方法來控制濾波器。
  16. 如請求項15所述之方法，更包含： 接收位元流； 將該接收到的位元流解碼，以獲得影像；以及 處理該所獲得的影像，其中該處理包含：根據請求項1至10中任一項所述之方法的處理、或根據請求項11或12所述之方法的控制。
  17. 一種用於處理影像的一或多部分之裝置，影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，該裝置包含：控制器，其經組態以針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。
  18. 如請求項17所述之裝置，其中該控制器經組態以執行如請求項1至10中任一項所述之方法、或執行如請求項11或12所述之方法。
  19. 一種用於將影像編碼之裝置，該裝置包含如請求項17或18所述之裝置。
  20. 如請求項19所述之裝置，該裝置經組態以執行如請求項13或14所述之方法。
  21. 一種用於將影像解碼之裝置，該裝置包含如請求項17或18所述之裝置。
  22. 如請求項21所述之裝置，該裝置經組態以執行如請求項15或16所述之方法。
  23. 一種包含指令之電腦程式，當該程式被電腦執行時該指令導致該電腦執行如請求項1至10、11至12、13至14、或15至16中任一項所述之方法。
  24. 一種儲存電腦程式之電腦可讀取儲存媒體，當該程式被執行時導致執行如請求項1至10、11至12、13至14、或15至16中任一項所述之方法。
  25. 一種攜有針對影像的資訊資料集之訊號，該影像係使用如請求項13或14所述之方法所編碼且由位元流所表示，該影像之影像部分具有色度部分與亮度部分，該色度部分包含與該影像部分相關聯之色度樣本，以及該亮度部分包含與該相同影像部分相關聯之亮度樣本，其中該資訊資料集包含：控制資料，用於針對該色度部分的邊界控制濾波器，以令與該邊界相鄰的色度樣本以及不與該邊界相鄰的至少一個色度樣本是可濾波的。
TW108115545A 2018-05-17 2019-05-06 濾波器 TW201947932A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB1808067.1 2018-05-17
GB1808067.1A GB2573798A (en) 2018-05-17 2018-05-17 A filter

Publications (1)

Publication Number Publication Date
TW201947932A true TW201947932A (zh) 2019-12-16

Family

ID=62723229

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108115545A TW201947932A (zh) 2018-05-17 2019-05-06 濾波器

Country Status (3)

Country Link
GB (1) GB2573798A (zh)
TW (1) TW201947932A (zh)
WO (1) WO2019219878A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115918081A (zh) * 2020-04-16 2023-04-04 弗劳恩霍夫应用研究促进协会 用于彩色滤波器阵列模式影像的去相关变换

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
US9167269B2 (en) * 2011-10-25 2015-10-20 Qualcomm Incorporated Determining boundary strength values for deblocking filtering for video coding
US10412419B2 (en) * 2013-07-12 2019-09-10 Qualcomm Incorporated Adaptive filtering in video coding

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115918081A (zh) * 2020-04-16 2023-04-04 弗劳恩霍夫应用研究促进协会 用于彩色滤波器阵列模式影像的去相关变换

Also Published As

Publication number Publication date
GB2573798A (en) 2019-11-20
WO2019219878A1 (en) 2019-11-21
GB201808067D0 (en) 2018-07-04

Similar Documents

Publication Publication Date Title
US10743033B2 (en) Method and device for optimizing encoding/decoding of compensation offsets for a set of reconstructed samples of an image
US11870986B2 (en) Encoder, a decoder and corresponding methods using an adaptive loop filter
KR102483942B1 (ko) 비디오 인코더, 비디오 디코더 및 대응하는 인코딩 및 디코딩 방법
US10412419B2 (en) Adaptive filtering in video coding
US10623740B2 (en) Determination of QP values
US10194150B2 (en) Method and device for coding image, and method and device for decoding image
CN111630857B (zh) 视频编解码方法/装置和相应非易失性计算机可读介质
GB2531004A (en) Residual colour transform signalled at sequence level for specific coding modes
KR20220013415A (ko) Mpm 리스트 구성 방법, 크로마 블록 인트라 예측 모드 획득 방법, 및 장치
CA3120828A1 (en) An encoder, a decoder and corresponding methods of deblocking filter adaptation
KR20220127314A (ko) 적응적 루프 필터링을 위한 인코더, 디코더, 및 대응하는 방법
TW201947932A (zh) 濾波器
TW201947933A (zh) 濾波器
WO2022077490A1 (zh) 一种帧内预测方法、编码器、解码器及存储介质
WO2024093994A1 (zh) 编解码方法和装置
WO2024188102A1 (zh) 编解码方法和装置
WO2024192733A1 (zh) 视频编解码方法、装置、设备、系统、及存储介质
JP2023030585A (ja) 画像符号化装置及び方法及びプログラム