TWI794639B - 存取單元定界符及適應參數集使用技術 - Google Patents

存取單元定界符及適應參數集使用技術 Download PDF

Info

Publication number
TWI794639B
TWI794639B TW109128290A TW109128290A TWI794639B TW I794639 B TWI794639 B TW I794639B TW 109128290 A TW109128290 A TW 109128290A TW 109128290 A TW109128290 A TW 109128290A TW I794639 B TWI794639 B TW I794639B
Authority
TW
Taiwan
Prior art keywords
video
data stream
predetermined
access unit
unit
Prior art date
Application number
TW109128290A
Other languages
English (en)
Other versions
TW202114429A (zh
Inventor
雅構 夏契茲德拉富恩特
卡斯登 蘇荷寧
寇尼拉斯 黑爾吉
湯瑪士 夏以爾
羅伯特 史庫濱
湯瑪士 威剛德
Original Assignee
弗勞恩霍夫爾協會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 弗勞恩霍夫爾協會 filed Critical 弗勞恩霍夫爾協會
Publication of TW202114429A publication Critical patent/TW202114429A/zh
Application granted granted Critical
Publication of TWI794639B publication Critical patent/TWI794639B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明提供一種視訊解碼器，其包含：一解碼核心，其經組配以使用經運動補償之預測及基於變換之殘餘解碼自一視訊資料串流之一存取單元AU內之一或多個視訊寫碼單元重建構一經解碼圖像以獲得該經解碼圖像之一經重建構版本；一迴路內濾波器，其經組配以濾波該經解碼圖像之該經重建構版本以獲得要插入至該視訊解碼器之經解碼圖像緩衝器DPB中的該經解碼圖像之一版本；及一參數化器，其經組配以藉由自以下各者讀取用於參數化該迴路內濾波器之迴路內濾波器控制資訊及參數化該迴路內濾波器以便以取決於該迴路內濾波器控制資訊之一方式濾波該經解碼圖像之該經重建構版本來參數化該迴路內濾波器：位於該經解碼圖像之該存取單元AU內之一或多個參數集，其沿著資料串流次序在該一或多個視訊寫碼單元之後；及/或該一或多個視訊寫碼單元之一部分，其沿著資料串流次序在由該一或多個視訊寫碼單元包含之資料之後，該部分攜載基於區塊之預測參數資料及預測殘餘資料。

Description

存取單元定界符及適應參數集使用技術
發明領域
本申請案係關於用於發信寫碼參數的存取單元定界符及適應參數集之使用。
發明背景
現代視訊寫碼標準利用類似於適應性迴路濾波器(ALF)、樣本適應性偏移(SAO)及解塊濾波器之迴路內濾波器。
迴路內濾波器位於編碼器之解碼迴路中。在所有視訊寫碼階段期間及尤其是在量化階段中執行的有損壓縮中，可降低視訊序列之主觀品質，從而產生區塊、振鈴或模糊假影的形態。為了移除此等假影，及增加經重建構序列之主觀及客觀品質，使用迴路內濾波器之集合。編碼器中之迴路內濾波器估計最大程度增加訊框之客觀品質的最佳濾波器參數。此等參數接著經傳輸至解碼器以使得解碼器之迴路內濾波器可使用此等參數以最佳濾波經重建構訊框並達成針對編碼器中之經重建構訊框所達至的相同品質改良。
解塊濾波器旨在移除看起來在寫碼單元(CU)(且特定言之預測單元(PU)及變換單元(TU))之邊緣中的區塊假影，由於在編碼器之每一階段的處理中使用區塊結構。
SAO濾波器旨在減少不合需要的可見假影，諸如振鈴。SAO之主要想法係藉由首先將經重建構樣本分類成不同類別、獲得每一類別之偏移及接著添加偏移至類別之每一樣本來減少樣本失真。
ALF之主要想法係使用基於維納適應性濾波器係數來最小化原始像素與經解碼像素之間的均方誤差。ALF位於每一圖像之最後處理階段處且可視為嘗試自先前階段捕獲及固定假影的工具。合適之濾波器係數係由編碼器判定並經明確地發信至解碼器。亦即，ALF需要要發送至解碼器的參數(亦即合適之濾波器係數)之集合。此等參數係在高層級語法結構(例如適應參數集(APS))中發送。APS為在視訊寫碼層(VCL)NAL(網路抽象層)單元(亦即圖像之圖塊)之前在位元串流中發送的參數集。ALF在重建構之後應用於完整圖像。此外，在編碼器處，ALF估計編碼程序中之最後步驟中之一者。
在低延遲環境中，此引起一問題，此係因為編碼器想要儘快(尤其是在完成圖像之編碼程序之前)開始發送圖像之經處理部分。ALF不能最佳用於此等環境，此係因為具有經估計用於經編碼圖像的濾波器參數的APS必須在圖像之第一圖塊之前被發送。
另外，呈指定形式之NAL單元之集合被稱作存取單元AU，且每一AU之解碼產生一個經解碼圖像。每一AU含有共同組成初級經寫碼圖像的VCL NAL單元之集合。亦可用存取單元定界符(AUD)來前綴以輔助定位AU的開始。
AUD用於在位元串流中分隔AU。其可任擇地含有關於以下圖像的資訊，比如經允許圖塊類型(I、P、B)。
在通用視訊寫碼(VVC)中，若干不同參數集可由圖像參考：視訊參數集(VPS)、解碼器參數集(DPS)、序列參數集(SPS)、多圖像參數集(PPS)及不同類型的適應參數集(APS)，亦多於一個。解碼器需要具有可用於能夠解碼圖像的所有參數集。
圖像之不同圖塊可參考不同PPS及APS。因此，可能難以判定是否所有需要的參數集可用於解碼器，此係因為需要剖析圖像之所有圖塊標頭並解碼被參考的那一參數。
發明概要
本申請案之主題的目標係提供自存取單元導出必要參數的解碼器。
此目標係藉由本申請案之申請專利範圍之主題來達成。
根據本申請案之實施例，一種視訊解碼器包含：一解碼核心(94)，其經組配以使用經運動補償之預測及基於變換之殘餘解碼自一視訊資料串流之一存取單元AU內之一或多個視訊寫碼單元(100) (例如，VCL NAL單元)重建構一經解碼圖像(例如一當前經解碼圖像或一隨後經解碼圖像)以獲得該經解碼圖像之一經重建構版本(46a)；一迴路內濾波器(90) (例如包括ALF)，其經組配以濾波該經解碼圖像之經重建構版本以獲得要插入至該視訊解碼器之經解碼圖像緩衝器(92)(DPB)中的該經解碼圖像之一版本(46b)；及一參數化器，其經組配以藉由自以下各者讀取用於參數化該迴路內濾波器之迴路內濾波器控制資訊(例如，ALF係數(或參數)及每CTU(寫碼樹型單元)之ALF旗標)及參數化該迴路內濾波器以便以取決於該迴路內濾波器控制資訊之一方式濾波該經解碼圖像之該經重建構版本來參數化該環路內濾波：位於該經解碼圖像之該存取單元AU內之一或多個參數集(102、104)(例如，ALF APS及每CTU之ALF APS)，其沿著資料串流次序在該一或多個視訊寫碼單元(100)之後，亦即個別地與VCL NALU一起或在其全部之後；及/或沿著資料串流次序在由該一或多個視訊寫碼單元(100)包含之資料(108)之後的該一或多個視訊寫碼單元(100)之一部分(106) (例如，每CTU之ALF資料)，該部分攜載基於區塊之預測參數資料及預測殘餘資料。亦即，迴路內濾波器控制資訊經導出用於一或多個視訊寫碼單元，且因此，有可能在接收到圖像之所有視訊寫碼單元之前開始解碼。因此，在低延遲環境中減少解碼延遲。
根據本申請案之實施例，迴路內濾波器控制資訊包含用於依據轉移函數參數化迴路內濾波器之一或多個濾波器係數。亦即，ALF為例如有限脈衝回應(FIR)或無限脈衝回應(IIR)濾波器及控制濾波器轉移函數的濾波器係數FIR或IIR係數。
根據本申請案之實施例，迴路內濾波器控制資訊包含用於由迴路內濾波器空間上改變該經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)之經重建構版本之濾波的空間上選擇性迴路內濾波器控制資訊。
根據本申請案之實施例，每一視訊寫碼單元(100)沿著資料串流次序跨越資料經持續算術寫碼至部分(106)的末端，亦即ALF。一或多個參數集之預定參數集(102)按資料串流次序在一或多個視訊寫碼單元(100)中之每一者之後且包含用於依據轉移函數參數化迴路內濾波器之一或多個濾波器係數。
根據本申請案之實施例，一或多個參數集(104)針對一或多個視訊寫碼單元(100)中之每一者包含一另外預定參數集，該另外預定參數集按資料串流次序在各別視訊寫碼單元(100)之後且包含用於在經編碼成該各別視訊寫碼單元(100)的圖像之一部分內由迴路內濾波器空間上改變該經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)之經重建構版本之濾波的空間上選擇性迴路內濾波器控制資訊。
根據本申請案之實施例，一或多個視訊寫碼單元(100)中之每一者包含按資料串流次序在各別視訊寫碼單元(100)之資料區段(108)之後的濾波器資訊區段(106)，其中該濾波器資訊區段包含用於在基於區塊之預測參數資料及預測殘餘資料經編碼成各別視訊寫碼單元(100)之資料區段所針對的圖像之一部分內由迴路內濾波器空間上改變該經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)之經重建構版本之濾波的空間上選擇性迴路內濾波器控制資訊。
根據本申請案之實施例，參數化器可經組配以在沿著資料串流次序在視訊資料串流中之預定指示採取第一狀態之情況下在該經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)之存取單元AU內之在一或多個視訊寫碼單元(100)之後(亦即個別地與VCL NALU一起或在其全部之後)的位置處，及在視訊資料串流中之預定指示採取第二狀態之情況下在存取單元內之在一或多個視訊寫碼單元(100)之全部之前的不同位置處定位一或多個參數集(102、104)，例如，ALF APS及每CTU之ALF APS。
根據本申請案之實施例，一或多個視訊寫碼單元(100)的部分(106)(例如，每CTU之ALF資料)在視訊資料串流中之預定指示採取一第一狀態之情況下在沿著資料串流次序在由一或多個視訊寫碼單元(100)包含之資料(108)之後的一位置處，且在視訊資料串流中之預定指示採取一第二狀態之情況下在以基於區塊之預測參數資料及預測殘餘資料穿插的一或多個視訊寫碼單元內之一不同位置處，該部分攜載該基於區塊之預測參數資料及預測殘餘資料。
根據本申請案之實施例，視訊解碼器經組配以自一或多個視訊寫碼單元(100)讀取預定指示。該預定指示在採取第一狀態之情況下由一或多個識別符指示該一或多個參數集，並在採取第二狀態之情況下指示不同的一或多個迴路內濾波器控制資訊參數集。視訊解碼器經組配以在一每存取單元基礎上回應於該預定指示以便在預定指示對於該視訊資料串流之不同存取單元而不同之情況下針對該等不同存取單元以不同方式執行定位。參數化器經組配以使用包括於該先前發信之存取單元AU中的迴路內濾波器控制資訊重建構經解碼圖像。
根據本申請案之實施例，視訊解碼器經組配以：在偵測存取單元(AU)之邊界時，將攜載呈參數集(102、104)中之一或多者(例如字尾APS)形式的迴路內濾波器控制資訊(例如ALF濾波器資料)之視訊寫碼單元解譯為不自其開始存取單元(AU)，例如在AU邊界偵測中忽略其且藉此偵測到AU邊界不存在；及將攜載不呈參數集(102、104)中之一或多者(例如前綴APS)形式的迴路內濾波器控制資訊之視訊寫碼單元解譯為自其開始存取單元，例如自此類視訊寫碼單元偵測到一AU邊界。
根據本申請案之實施例，視訊解碼器經組配以使用一或多個預定寫碼參數參數化的方式藉由解碼來自視訊資料串流之存取單元(AU)內之一或多個視訊寫碼單元(100)的經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)而解碼來自視訊資料串流之視訊；自穿插至視訊資料串流中之複數個參數集(120)導出預定寫碼參數(122)；自存取單元(AU)之預定單元(124)讀取識別符(200)，該等識別符識別複數個參數集中之預定參數集，其包含預定寫碼參數。亦即，寫碼參數之存在或不存在係由識別符指示，且因此有效辨識哪一參數集可自所接收視訊寫碼單元導出。此外，識別符包括於AU之預定單元中，且因此，易於包括用於不同視訊寫碼單元之不同參數集。
根據本申請案之實施例，AU之預定單元包含指示識別符(200)是否存在於預定單元中的旗標(204)。亦即，有可能由旗標指示哪些識別符包括於AU之預定單元中，例如，存取單元定界符。
根據本申請案之實施例，複數個參數集(120)具有不同階層層級，其中一或多個視訊寫碼單元包含例如在圖塊標頭中的參考一或多個第一預定階層層級內之第一預定參數集(126)的識別符，其中一或多個第一預定階層層級內之第一預定參數集(126)包含參考一或多個第二預定階層層級內之第二預定參數集(128)的識別符，第一預定參數集及第二預定參數集由預定參數集(122)含有。自存取單元(AU)之預定單元(124)讀取的識別符識別由存取單元之一或多個視訊寫碼單元直接或間接參考的所有預定參數集，使得若由識別符識別之所有預定參數集可用，則存取單元係可解碼的。
根據本申請案之實施例，AU之預定單元包含指示(205)以下各者的旗標(204)；識別符(200)中之參考特定預定參數集(126b)(例如，特定APS)的預定識別符存在於預定單元(124)中，抑或參考特定預定參數集(126b)之預定識別符存在於一或多個視訊寫碼單元(100)中。
根據本申請案之實施例，第一預定參數集(126)包含：第三預定參數集(126a)，其由一或多個視訊寫碼單元(100)中之識別符參考；第四預定參數集(126b)，其由存在於預定單元(124)中之識別符(200)參考，但既不由一或多個視訊寫碼單元(100)中之識別符中之任一者亦不由預定參數集中之任一者參考。
根據本申請案之實施例，AU之預定單元包含一或多個適應性參數集(APS)的一或多個識別符、一或多個圖像參數集(PPS)之一或多個識別符、視訊參數集(VPS)之識別符、解碼器參數集(DPS)之識別符及一或多個序列參數集(SPS)之一或多個識別符中的一或多者。複數個參數集包含視訊參數集(VPS)、解碼器參數集(DPS)、序列參數集(SPS)、一或多個圖像參數集(PPS)及一或多個適應性參數集(APS)。
根據本申請案之實施例，一種視訊解碼器經組配以：藉由解碼來自視訊資料串流之存取單元AU之一或多個視訊寫碼單元(100)之圖像而解碼來自視訊資料串流之視訊；自存取單元定界符(AUD)讀取一或多個參數，該等定界符經配置於資料串流中以便形成存取單元AU之開始，該一或多個參數控制(300)單獨存取單元是否經界定於與一個時刻相關但與視訊資料串流之不同層相關的圖像之視訊資料串流中，或與一個時刻相關但與視訊資料串流之不同層相關的圖像是否經寫碼成存取單元中之一者，及/或指示(302)包含於存取單元中之視訊寫碼單元之一視訊寫碼類型，在視訊寫碼類型指示含有彼此不同的一個存取單元內的視訊寫碼單元之情況下，該視訊寫碼類型將指派給一個存取單元內之視訊寫碼單元，及/或指示(304)哪些存取單元之圖像不由任何其他圖像參考，及/或指示(306)圖像不被輸出。亦即，解碼圖像所需要的參數由AUD指示，且因此，有可能在獲得用於解碼完整圖像之所有參數集之前開始解碼包括於AU中的圖像之圖塊。換言之，每一圖塊所需要的參數集由AUD有效指示，且因此有可能改良解碼速度。
根據本申請案之實施例，一或多個參數形成相對於由先前AUD界定之參數的偏差。該AUD包含由一先前AUD界定之參數是否被採用的一指示。該AUD包含該一或多個參數應用於該視訊資料串流之所有層抑或僅僅應用於其一單層的一指示。該等視訊寫碼單元之該視訊寫碼類型係藉由描述一多圖像之一隨機存取性質而指示。
根據本申請案之實施例，一種視訊解碼器經組配以：藉由解碼來自視訊資料串流的存取單元AU之一或多個視訊寫碼單元(100)之圖像來解碼來自視訊資料串流之視訊；自存取單元定界符(AUD)讀取一或多個參數(308)，該等定界符經配置於資料串流中以便形成存取單元(AU)之開始，該一或多個參數指示存取單元之特性，及該特性應用於視訊資料串流之所有層抑或僅僅應用於其單層的一指示。
根據本申請案之實施例，一種方法包含：使用經運動補償之預測及基於變換之殘餘解碼自一視訊資料串流之存取單元AU內之一或多個視訊寫碼單元(100)(例如，VCL NAL單元)重建構一經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)以獲得該經解碼圖像之一經重建構版本；濾波該經解碼圖像之該經重建構版本以獲得要插入至該視訊解碼器之經解碼圖像緩衝器(DPB)中的該經解碼圖像之一版本；及藉由自以下各者讀取用於參數化該迴路內濾波器之迴路內濾波器控制資訊：位於該經解碼圖像之該存取單元(AU)內之一或多個參數集(102、104)，例如ALF APS及每CTU之ALF APS，其沿著資料串流次序在該一或多個視訊寫碼單元(100)之後；及/或沿著資料串流次序在由該一或多個視訊寫碼單元(100)包含之資料之後的該一或多個視訊寫碼單元(100)之一部分(104)，例如每CTU之ALF資料，該部分攜載基於區塊之預測參數資料及預測殘餘資料，以便以取決於該迴路內濾波器控制資訊之一方式濾波該經解碼圖像之該經重建構版本。
根據本申請案之實施例，一種方法包含以使用一或多個預定寫碼參數參數化的方式藉由解碼來自視訊資料串流之存取單元(AU)內之一或多個視訊寫碼單元(100)的經解碼圖像(例如，當前經解碼圖像或隨後經解碼圖像)而解碼來自視訊資料串流之視訊；自穿插至視訊資料串流中之複數個參數集導出預定寫碼參數；自存取單元(AU)之預定單元讀取識別符(200)，該等識別符識別複數個參數集中之預定參數集，其包含預定寫碼參數。
根據本申請案之實施例，一種方法包含：藉由解碼來自視訊資料串流之存取單元(AU)的一或多個視訊寫碼單元(100)之圖像而解碼來自視訊資料串流之視訊；自存取單元定界符(AUD)讀取一或多個參數，該等定界符經配置於資料串流中以便形成存取單元(AU)之開始，該一或多個參數控制(300)單獨存取單元是否經界定於與一個時刻相關但與視訊資料串流之不同層相關的圖像之視訊資料串流中，或與一個時刻相關但與視訊資料串流之不同層相關的圖像是否經寫碼成存取單元中之一者；指示(302)包含於存取單元中之視訊寫碼單元之一視訊寫碼類型，在視訊寫碼類型指示含有彼此不同的一個存取單元內的視訊寫碼單元之情況下，該視訊寫碼類型將指派給一個存取單元內之視訊寫碼單元，及/或指示(304)哪些存取單元之圖像不由任何其他圖像參考，及/或指示(306)圖像不被輸出。
根據本申請案之實施例，一種方法包含：藉由解碼來自視訊資料串流的存取單元(AU)之一或多個視訊寫碼單元(100)之圖像來解碼來自視訊資料串流之視訊；自存取單元定界符(AUD)讀取一或多個參數(308)，該等定界符經配置於資料串流中以便形成存取單元(AU)之開始，該一或多個參數指示存取單元之特性，及該特性應用於視訊資料串流之所有層抑或僅僅應用於其單層的一指示。
較佳實施例之詳細說明
相等或等效元件或具有相等或等效功能性之元件在以下描述中由相等或等效參考編號指示。
在以下說明中，闡述複數個細節以提供對本申請案之實施例之更透徹解釋。然而，可在無此等特定細節的情況下實踐本申請案之實施例對於熟習此項技術者係將顯而易見的。在其他情況下，熟知結構及器件係以方塊圖形式而不是詳細地展示以便避免混淆本申請案之實施例。另外，除非另外特定指出，否則可將下文中所描述之不同實施例的特徵彼此組合。引言
在以下內容中，應注意，本文中所描述的個別態樣可個別地或組合地使用。因此，細節可添加至該等個別態樣中之各者，而不將細節添加至該等態樣中之另一者。
亦應注意，本揭露內容明確地或隱式地描述可用於視訊解碼器(用於基於經編碼表示提供視訊信號之經解碼表示的設備)中的特徵。因此，本文所描述之特徵中之任一者可用於視訊解碼器之上下文中。
此外，本文中所揭露之與方法相關之特徵及功能性亦可用於裝置(經組配以執行此類功能性)中。此外，本文中相對於裝置所揭露之任何特徵及功能性亦可用於對應方法中。換言之，本文所揭露之方法可藉由關於裝置所描述的特徵及功能性中之任一者加以補充。
諸圖之以下描述以用於寫碼視訊之圖像以便形成分層視訊資料串流編解碼器之實施例可建置至其中的寫碼框架之實例的基於區塊之預測性編解碼器的視訊編碼器及視訊解碼器之描述的呈現開始。關於圖1至圖3描述視訊編碼器及視訊解碼器。在下文中，呈現本申請案之分層視訊資料串流編解碼器的概念之實施例之描述以及關於此類概念可如何分別建置至圖1及圖2之視訊編碼器及解碼器中的的描述，但隨後描述之實施例亦可用以形成不根據構成圖1及圖2之視訊編碼器及視訊解碼器基礎之寫碼框架操作的視訊編碼器及視訊解碼器。
圖1展示作為其中可實施根據本申請案之實施例的經框間預測區塊的經運動補償之預測的視訊解碼器之實例的用於預測性寫碼視訊之裝置的方塊圖。亦即，圖1展示用於預測性地將由一連串圖像12構成之一視訊11寫碼至一資料串流14內之裝置。為此目的，使用逐區塊預測性寫碼。另外，例示性地使用基於變換之殘餘寫碼。使用參考符號10指示裝置或編碼器。
圖2展示作為其中可實施根據本申請案之實施例的經框間預測區塊之經運動補償之預測的視訊解碼器之實例的用於預測性地解碼視訊的裝置之方塊圖。亦即，圖2展示對應的解碼器20，亦即，經組配以自資料串流14以圖像區塊預測性地解碼由圖像12'構成之視訊11'的裝置20，此處亦例示性地使用基於變換之殘餘解碼，其中單引號已用以分別指示就由預測殘餘信號之量化引入的寫碼損失而言，如由解碼器20重建構之圖像12'及視訊11'偏離最初由裝置10編碼之圖像12。圖1及圖2例示性地使用基於變換之預測殘餘寫碼，但本申請案之實施例不限於此類預測殘餘寫碼。對於參看圖1及圖2所描述之其他細節亦係如此，如將在下文所概述的。
編碼器10經組配以使預測殘餘信號經受空間至頻譜變換且將因此獲得之預測殘餘信號編碼成資料串流14。同樣，解碼器20經組配以自該資料串流14解碼預測殘餘信號且使因此獲得之預測殘差信號經受頻譜至空間變換。
在內部，編碼器10可包含預測殘餘信號形成器22，該預測殘餘信號形成器產生一預測殘餘24以便量測預測信號26與原始信號(亦即，視訊11或當前圖像12)之偏差。預測殘餘信號形成器22可例如係自初始信號(亦即，當前圖像12)減去預測信號之減法器。編碼器10接著進一步包含變換器28，該變換器使預測殘餘信號24經受空間至頻譜變換以獲得譜域預測殘餘信號24'，該譜域預測殘餘信號接著經受由亦由編碼器10包含之量化器32進行的量化。因此，將經量化預測殘餘信號24''寫碼至資料串流14中。為此目的，編碼器10可任擇地包含熵寫碼器34，該熵寫碼器將如變換及量化之預測殘餘信號熵寫碼至資料串流14中。預測殘餘26係由編碼器10之預測階段36基於解碼至資料串流14中且可自該資料串流解碼的預測殘餘信號24''產生。為此目的，預測階段36可在內部包含：解量化器38，其解量化預測殘餘信號24"以便獲得譜域預測殘餘信號24"'，該信號除量化損失以外對應於信號24'；繼之以反向變換器40，其使後一預測殘餘信號24"'經受反向變換，亦即，頻譜至空間變換，以獲得除量化損失以外對應於原始預測殘餘信號24之預測殘餘信號24""。預測階段36之組合器42接著諸如藉由相加來重組合預測信號26與預測殘餘信號24''''，以便獲得經重建構信號46a，亦即，原始信號12之重建構(經重建構版本)。經重建構信號46a可對應於信號12'。
迴路內濾波器90濾波經重建構信號46a以獲得要插入至經解碼圖像緩衝器(DPB) 92中的經解碼圖像(例如當前經解碼圖像或隨後經解碼圖像，經解碼信號46b)之版本。
預測階段36之預測模組44接著藉由使用例如空間預測(亦即，框內預測)及/或時間預測(亦即，框間預測)基於信號46b產生預測信號26。與此有關的細節描述於下文中。
解碼器20包含包含熵解碼器50、解量化器52、反向變換器54、組合器56及預測模組58的解碼核心94，及迴路內濾波器90及DPB 94。
同樣，解碼器20可在內部由對應於預測階段36並以對應於該預測階段之方式互連的組件組成。特定言之，解碼器20之熵解碼器50可對來自資料串流之經量化譜域預測殘餘信號24"進行熵解碼，接著以上文關於預測階段36之模組描述的方式互連及協作的解量化器52、反向轉換器54、組合器56及預測模組58基於預測殘餘信號24"恢復經重建構信號以使得如圖3中所示組合器56之輸出產生經重建構信號，亦即視訊11'或其當前圖像12'。
儘管上文未特定地描述，但顯然，編碼器10可根據某一最佳化方案諸如以最佳化某一速率及失真相關準則(亦即寫碼成本)及/或使用某一速率控制的方式設定一些寫碼參數，包括例如預測模式、運動參數及其類似者。如下文更詳細地描述，編碼器10及解碼器20及對應模組44、58分別支援不同預測模式，諸如框內寫碼模式及框間寫碼模式，該等模式形成按以下更詳細地描述之一方式構成圖像區塊之預測所基於的一種原始預測模式之集合或集合體。編碼器及解碼器在此等預測組成之間切換的粒度可對應於圖像12及12'分別分成區塊之細分。應注意，此等區塊中的一些可僅為經框內寫碼區塊，且一些區塊可僅為經框間寫碼區塊，且任擇地，其他區塊可為使用框內寫碼及框間寫碼二者獲得之區塊，但細節闡述於下文中。根據框內寫碼模式，用於區塊之預測信號係基於各別區塊之空間已經寫碼/經解碼鄰域而獲得。可存在若干框內寫碼子模式，在該等框內寫碼子模式當中之選擇即表示一種框內預測參數。可存在定向或角度框內寫碼子模式，根據該等子模式，各別區塊之預測信號藉由將鄰域之樣本值沿著特定用於各別定向框內寫碼子模式之某一方向外插至各別區塊中來填充。框內寫碼子模式可例如亦包含一或多個其他子模式，諸如：DC寫碼模式，根據該DC寫碼模式，各別區塊之預測信號指派一DC值給各別區塊內之所有樣本；及/或一平面框內寫碼模式，根據該平面框內寫碼模式，各別區塊之預測信號經估計或經判定為藉由二維線性函數描述的樣本值在各別區塊之樣本位置上的空間分佈，其中基於相鄰樣本導出由二維線性函數界定的平面之傾斜及偏移。與其相比較，根據框間預測模式，可例如藉由在時間上預測區塊內部來獲得區塊之預測信號。對於框間預測模式之參數化，運動向量可在資料串流內發信，運動向量指示視訊11之先前經寫碼圖像之部分的空間位移，在該部分處取樣先前經寫碼/經解碼圖像以便獲得各別區塊之預測信號。此意謂，除由資料串流14包含之諸如表示經量化譜域預測殘餘信號24''之經熵寫碼之變換係數位準的殘餘信號寫碼以外，資料串流14亦可具有編碼於其中的用於指派給區塊預測模式之預測相關參數、用於所指派預測模式之預測參數(諸如用於框間預測模式之運動參數)，及任擇地，使用所指派預測模式及預測參數控制區塊之最終預測信號之組成的另外參數，如下文將更詳細地概述。另外，資料串流可包含控制及發信圖像12及12'分別分成區塊之細分的參數。解碼器20使用此等參數以與編碼器進行細分相同之方式細分圖像，從而將相同預測模式及參數指派給區塊且執行相同預測以產生相同預測信號。
圖3展示說明預測殘餘信號、預測信號及經重建構信號之間的關係以便說明設定分別用於界定預測信號、處置預測殘餘信號等的細分可能性之實例的示意圖。亦即，圖3說明經重建構信號(亦即一方面經重建構圖像12')與如在資料串流中發信之預測殘餘信號24""與預測信號26之組合(另一方面)之間的關係。如上文已指示，該組合可為相加。預測信號26為圖像區域分成具有變化大小之區塊80的細分，但此僅係實例。該細分可為任何細分，諸如，圖像區域分成區塊之列及行之常規細分，或圖像12分成具有變化大小之葉區塊的多分樹細分，諸如，四分樹細分或類似者，其中在圖3中說明該等細分之混合，其中將圖像區域首先細分為樹根區塊之列及行，接著進一步根據遞歸多分樹細分來細分樹根區塊以產生區塊80。
在以下內容中解釋本申請案的本發明之每一態樣。 字尾-APS
根據本申請案之本發明之一個態樣，有可能編碼器在完成整個圖像之編碼程序之前開始發送圖像之部分(例如圖塊)，同時仍使用圖塊。此係藉由允許適應參數集(APS)在圖像之經寫碼圖塊在實際圖塊資料之後移動每CTU(寫碼樹型單元)ALF參數之後發送來達成。
圖4展示當前最新技術編碼器之說明。首先整個圖像經編碼(框內預測、運動估計、殘餘編碼等)，接著開始ALF估計程序。ALF濾波器係數經寫入至APS，接著可寫入圖塊資料，包括每CTU之ALF參數(其以其他參數穿插)。圖像可僅僅在ALF編碼完成之後發送。
圖5展示由本發明設想的低延遲編碼器之實例。圖塊可在圖像編碼程序完成之前發出。尤其是攜載係數的APS在圖塊資料(VCL NAL單元)之後移動。
在此方法中，編碼器可首先在收集經估計ALF參數(濾波器係數、濾波器控制資訊)的同時發出圖像之經寫碼圖塊，且接著在經寫碼圖像之後發出含有ALF參數之APS。一旦圖像之圖塊到達，解碼器便可開始剖析及解碼圖像之圖塊。由於ALF為最後解碼步驟中之一者，因此ALF參數可在經寫碼圖像之後到達以在其他解碼步驟之後應用。
本發明包括以下態樣： -   APS類型，其指示APS屬於先前圖像。 -   APS類型係以語法元素寫碼。實施例為： o 在NAL單元標頭中寫碼的新的NAL單元類型(例如字尾APS) o 在APS中寫碼的新的APS類型(例如字尾ALF APS) o 旗標，其指示APS應用於先前圖像抑或隨後圖像。 -   解碼程序之變化，其僅僅假定新的存取單元AU之以經發信前綴APS而非字尾APS開始。 -   替代地，APS類型(前綴或字尾)可由在位元串流中相對於周圍存取單元定界符(AUD)及圖像之經寫碼圖塊的相對位置判定： o 若APS定位於圖像之最後VCL NAL單元與AUD之間，則其應用於先前圖像。 o 若APS定位於AUD與圖像之第一VCL NAL單元之間，則其應用於隨後圖像。 -   在此情況下，解碼器應僅僅由AUD之方位判定新的存取單元之開始。 -   在一個實施例中，圖塊標頭指示使用字尾APS代替前綴APS，以使得在圖像之解碼程序結束時例如藉由以下操作解決依賴性： o 取決於其前綴或字尾性質發信在圖塊標頭中之一位置處的APS識別符。 發信指示參考APS按位元串流次序將在經寫碼圖塊之後的旗標。
通常，不僅ALF參數(濾波器係數)之導出在編碼程序即將結束之際實施(基於經重建構樣本值)，而且另一ALF控制資訊(關於寫碼樹型單元(CTU)是否經濾波且其如何經濾波的資訊)在此階段亦被導出。在圖塊有效負載中每coding_tree_unit之若干語法元素中攜載ALF控制資訊，以區塊分裂(例如如在圖6b中所指示)、變換係數等穿插。舉例而言，可呈現以下語法元素： ●   alf_ctb_flag：指定適應性迴路濾波器是否應用於寫碼樹型區塊(CTB)。 ●   alf_ctb_use_first_aps_flag：指定具有等於slice_alf_aps_id_luma[0]之adaptive_parameter_set_id的APS中之濾波器資訊是否被使用。 ●   alf_use_aps_flag：指定來自APS之濾波器集合是否應用於明度CTB。 ●   等。
所有此ALF控制資訊取決於在圖像之編碼程序即將結束之際ALF之濾波器參數的導出。
在一個實施例中，在單獨迴路中在各別圖塊有效負載末端的圖塊之CTU上發信ALF控制資訊，以使得編碼器可在ALF實施之前完成圖塊有效負載(變換係數、區塊結構等)的第一部分。在圖6a及圖6b中說明此實施例。
如圖6a中所指示，視訊寫碼單元(VCL NAL單元)100包含圖塊標頭、圖塊資料108及一部分(每CTU之ALF APS)106，且一或多個參數集(ALF係數) 102亦即作為字尾APS(非VCL-NAL單元)經單獨地發信。亦即，每一視訊寫碼單元100沿著資料串流次序跨越資料經持續算術寫碼至部分之末端。
圖6b展示部分106係以圖塊資料108穿插。亦即，每CUT之ALF APS係以區塊穿插且一或多個參數集102作為字尾APS經單獨地發信。
在另一實施例中，圖塊標頭將指示ALF控制資訊未在經寫碼圖塊有效負載內之語法元素中(亦即在上述CTU迴路中)指示，但ALF控制資訊例如經由參考屬於字尾APS類型之APS而包括至字尾APS中，亦即在各別字尾APS中之CTU內的單獨迴路中。
在另一實施例中，圖塊標頭將指示ALF控制資訊未在經寫碼圖塊有效負載內之語法元素中(亦即在上述CTU迴路中)指示，但ALF控制資訊例如經由參考屬於字尾APS類型之APS而包括至一種新類型的字尾APS中(亦即在各別字尾APS中之CTU內的單獨迴路中)，該新類型字尾APS不同於攜載ALF係數之字尾APS。每CTU資料可任擇地經CABAC編碼。此實施例說明於圖7中。
如圖7中所指示，資料單元係以資料串流次序發信，視訊寫碼單元(VCL NAL單元)100包括圖塊標頭及圖塊資料108、參數集104(字尾ALF CTU資料APS：非VCL NAL單元)、一另外視訊寫碼單元100、一另外參數集104及一參數集(濾波器控制資訊)102(字尾ALF係數APS：非VCLNAL單元)。亦即，與圖6a及圖6b中指示的資料串流相反，濾波器係數不必在每一視訊寫碼單元之後發信。換言之，濾波器係數可按位元串流次序在其之後經共同地發送用於多於一個視訊寫碼單元100或按位元串流次序在濾波器係數之後由另外視訊寫碼單元使用。
在另一實施例中，參考字尾APS之圖塊標頭及所有CTU經推斷具有運用在字尾APS中發信的濾波器參數及ALF控制資訊之預設值應用的適應性迴路濾波器。參考 AUD 中之參數集 ID 的發信
在以下內容中，描述本申請案之本發明的另一態樣，亦即一種用於較容易存取在圖像中參考的所有參數集之列表之方法。
根據本申請案之本發明之此態樣，解碼器可容易地判定所有必要參數集在開始解碼之前是否可用。 所有使用過的參數集之列表包括於高層級語法結構中。 列表由以下各者組成 一個VPS(視訊參數集) 一個DPS(解碼器參數集) 一或多個SPS(序列參數集) 一或多個PPS(圖像參數集) 一或多個APS(適應參數集)，其按APS類型排序。 任擇地，一或多個語法元素在列表中之每一者之前存在，指示參數集類型中之哪一者為列表(包括停用發送的選項)。 保存資訊之語法結構包括至存取單元定界符(AUD)中。
實例語法係在圖8中(亦即在預定單元(亦即AUD)中)展示，包括複數個識別符200。舉例而言，VPS之識別符「aud_vps_id」、DPS之識別符「aud_dps_id」、SPS之識別符「aud_sps_id」、PPS之識別符「aud_pps_id」等。AUD 中之僅僅 APS ID 的發信
APS由圖像之每一圖塊參考。當組合位元串流時，不同APS可需要被重寫及/或組合。
為避免重寫圖塊標頭，APS ID係在存取單元定界符而非圖塊標頭中發信。因此，在變化之情況下，圖塊標頭不必被重寫。重寫存取單元定界符係一容易得多的操作。
在圖9中展示實例語法。
在另一實施例中，APS ID僅僅在針對另一語法元素調節之AUD中發送。若語法元素指示APS ID不存在於AUD中，則APS ID存在於圖塊標頭中。在圖10中展示實例語法。亦即，如圖10中所描繪，AUD包括旗標204，例如語法「aps_ids_in_aud_enabled_flag」。
圖11a至圖11a展示指示根據圖8至10中展示的上文所提及實施例之在預定寫碼參數與AU之間的關係的實例之示意性說明。
如圖11a中所描繪，複數個參數集120包含一或多個第一預定參數集126 (例如包括APA及PPS)及第二預定參數集128 (例如，包括SPS、DPS及VPS)中之一或多者。與第一預定參數集126相比，第二預定參數集128屬於更高階層層級。如圖11a中所展示，AU包含複數個圖塊資料(例如，VCL 0至VCL n)，且第一預定參數集及第二預定參數集含有預定參數集122，例如，用於VCL 0之參數集。複數個參數集120儲存於AU之AUD中並發信至解碼器。
在旗標204包括於如圖11b中所指示之AUD中的情況下，旗標204指示205參考特定預定參數集126b的識別符200之預定識別符存在於預定單元124中，抑或參考特定預定參數集126b的預定識別符存在於一或多個視訊寫碼單元100中。亦即，旗標204指示(如圖11b中之箭頭所描繪)APS 126b是在AUD抑或VLC中。
如圖11c中所描繪，第一預定參數集126包含由一或多個視訊寫碼單元100 (例如，AU)中之識別符參考的第三預定參數集126a (例如，PPS)，及由存在於預定單元124 (例如，AUD)中之識別符200 (如圖8及圖9中所展示)參考但既不由一或多個視訊寫碼單元100 (AU)中的識別符中之任一者參考亦不由預定參數集中之任一者參考的第四預定參數集126b (例如，APS)。存取單元性質至 AUD 中的發信
當前，AUD指示以下圖塊是具有I型、B型抑或P型。在大多數系統中，此特徵並不非常有用，此係因為I圖像不必意謂存在隨機存取點。AU之優先排序在大約需要下降的情況下可通常藉由其他方式進行，例如剖析時間ID、剖析其是否為可拋棄圖像(不藉由任何其他來參考)等。
可指示NAL單元類型，以及其是否為可拋棄圖像的事實等，而非指示圖像類型。另外，在多層情況下，性質可能更難以被描述： • 圖像之隨機存取性質，由要用於存取單元中之所有VCL NAL單元的整個NAL單元類型(例如IDR、CRA等)指定，而非在NAL單元標頭中指定性質。 • 一層中之圖像可能在一個層中係可拋棄的而非為在另一層中之共置圖像。 • 一層中之圖像可能經標記用於在一個層中的非輸出(pic_output_flag)而非為在另一層中之共置圖像。
因此，在圖12a中描繪之實施例中，AUD指示資訊應用於單層抑或應用於所有層。亦即，在AUD中，旗標參考關於如下文所指示的AU性質之資訊，例如： 「layer_specific_aud_flag」300：控制單獨存取單元是否經界定於與一個時刻相關但與視訊資料串流之不同層相關的圖像之視訊資料串流中，或與一個時刻相關但與視訊資料串流之不同層相關的圖像是否經寫碼成該等存取單元中之一者，及/或 「nal_unit_type_present_flag」302：指示包含於存取單元中之視訊寫碼單元之一視訊寫碼類型，在視訊寫碼類型指示含有彼此不同的一個存取單元內的視訊寫碼單元之情況下，該視訊寫碼類型將指派給一個存取單元內之視訊寫碼單元，亦即，藉由指示nald單元類型之語法元素的存在，指示nald單元類型，及/或 「discardable_flag」304：指示哪些存取單元之圖像不由任何其他圖像參考，及/或 「pic_output_flag」306：指示圖像未被輸出。在另一實施例中，AUD可指示其為依賴AUD，此意謂： • 繼承來自依賴層之先前AUD的參數但添加一些層特定資訊及/或 • 無新的AU開始
圖12b描繪AUD中之指示，亦即視訊寫碼單元之視訊寫碼類型係藉由描述多個圖像之隨機存取性質而指示。亦即，語法「random_access_info_present_flag」指示圖像之隨機存取性質，例如如在圖12b中「all_pics_in_au_random_access_flag」所指示，由要用於存取單元中之所有VCL NAL單元的整個NAL單元類型(例如IDR、CRA等)所指定，而非在NAL單元標頭中指定的性質。
根據本發明之實施例在圖13中展示實例語法。
在此實例中，參數集308，亦即實施「layer_specific_aud_flag」指示AUD中之資訊是否應用於所有層，「dependent_aud_flag」指示AUD是開始新的全域存取單元抑或僅僅開始一「層存取單元」。在依賴AUD中，自基礎層AUD之繼承係由「aud_inheritance_flag」指示。
儘管已在裝置之上下文中描述一些態樣，但顯然，此等態樣亦表示對應方法之描述，其中區塊或器件對應於方法步驟或方法步驟之特徵。類似地，方法步驟之上下文中所描述之態樣亦表示對應區塊或項目或對應裝置之特徵的描述。可由(或使用)硬體裝置(比如微處理器、可程式化電腦或電子電路)執行方法步驟中之一些或全部。在一些實施例中，可由此器件執行最重要之方法步驟中之一或多者。
本發明的資料串流可儲存於數位儲存媒體上或可在諸如無線傳輸媒體之傳輸媒體或諸如網際網路之有線傳輸媒體上傳輸。
取決於特定實施要求，本申請案之實施例可以硬體或軟體予以實施。實施可使用數位儲存媒體來執行，該媒體例如軟性磁碟、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體，該媒體上儲存有電子可讀控制信號，該等電子可讀控制信號與可程式化電腦系統協作(或能夠協作)，使得執行各別方法。因此，數位儲存媒體可係電腦可讀的。
根據本發明之一些實施例包含具有電子可讀控制信號之資料載體，其能夠與可程式化電腦系統協作，使得執行本文中所描述之方法中的一者。
一般而言，本申請案之實施例可實施為具有程式碼之電腦程式產品，當電腦程式產品在電腦上運行時，該程式碼操作性地用於執行該等方法中之一者。程式碼可例如儲存於機器可讀載體上。
其他實施例包含儲存於機器可讀載體上的用於執行本文中所描述之方法中的一者的電腦程式。
換言之，本發明方法之實施例因此為電腦程式，其具有用於在電腦程式於電腦上運行時執行本文中所描述之方法中之一者的程式碼。
因此，本發明方法之另一實施例為資料載體(或數位儲存媒體，或電腦可讀媒體)，其包含記錄於其上的用於執行本文中所描述之方法中之一者的電腦程式。資料載體、數位儲存媒體或所記錄的媒體通常為有形及/或非暫時性的。
因此，本發明方法之另一實施例為表示用於執行本文中所描述之方法中的一者之電腦程式之資料串流或信號序列。資料串流或信號序列可例如經組配以經由資料通信連接而傳送，例如經由網際網路。
另一實施例包含處理構件，例如，經組配或經調適以執行本文中所描述之方法中的一者的電腦或可程式化邏輯器件。
另一實施例包含電腦，其上安裝有用於執行本文中所描述之方法中之一者的電腦程式。
根據本發明之另一實施例包含經組配以(例如，電子地或光學地)傳送用於執行本文中所描述之方法中之一者的電腦程式至接收器的裝置或系統。舉例而言，接收器可為電腦、行動器件、記憶體器件等等。裝置或系統可例如包含用於傳送電腦程式至接收器之檔案伺服器。
在一些實施例中，可程式化邏輯器件(例如，場可程式化閘陣列)可用以執行本文中所描述之方法的功能性中之一些或全部。在一些實施例中，場可程式化閘陣列可與微處理器協作，以便執行本文中所描述之方法中之一者。一般而言，該等方法較佳地由任何硬體裝置執行。
本文中所描述之裝置可使用硬體裝置或使用電腦或使用硬體裝置與電腦之組合來實施。
本文所描述之裝置或本文所描述之裝置的任何組件可至少部分地以硬體及/或以軟體予以實施。
10:裝置/編碼器 11,11':視訊 12,12':圖像 14:資料串流 20:裝置/解碼器 22:預測殘餘信號形成器 24,24'',24'''':預測殘餘信號 24',24''':譜域預測殘餘信號 26:預測信號 28:變換器 32:量化器 34:熵寫碼器 36:預測階段 38,52:解量化器 40,54:反向變換器 42,56:組合器 44,58:預測模組 46a:經解碼圖像之經重建構版本/經重建構信號 46b:經解碼圖像之版本/經解碼信號 50:熵解碼器 80:區塊 90:迴路內濾波器 92:經解碼圖像緩衝器/DPB 94:解碼核心 100:視訊寫碼單元 102,104,120:參數集 106:部分/濾波器資訊區段 108:資料/資料區段 122:預定寫碼參數 124:預定單元 126:第一預定參數集 126a:第三預定參數集 126b:第四預定參數集 128:第二預定參數集 200:識別符 204:旗標 205,302,304,306:指示 300:控制 308:一或多個參數
下文中關於諸圖來描述本申請案之較佳實施例，在諸圖中： 圖1展示作為其中根據本申請案之實施例的分層視訊資料串流可經編碼的視訊編碼器之實例的用於預測性編碼視訊的裝置的方塊圖； 圖2展示作為其中根據本申請案之實施例的分層視訊資料串流可經解碼的視訊解碼器之實例的用於預測性解碼視訊的裝置的方塊圖，該裝置與圖1之裝置配合； 圖3展示說明預測殘餘信號、預測信號及經重建構信號之間的關係以便說明設定分別用於界定預測信號、處置預測殘餘信號等的細分可能性之實例的示意性說明； 圖4展示根據先前技術之用於編碼程序的實例之示意性說明； 圖5展示根據本申請案之實施例的用於發信圖像至解碼器的編碼程序之實例的示意性說明； 圖6a、圖6b展示根據本申請案之實施例的存取單元AU之實例的示意性說明； 圖7展示根據本申請案之實施例的另一AU之實例的示意性說明； 圖8展示根據本申請案之實施例的指示關於包括於存取單元定界符AUD中的參數集識別符ID之資訊之實例的圖式； 圖9展示根據本申請案之實施例的指示關於包括於AUD中的預定參數集之資訊之實例的圖式； 圖10展示根據本申請案之實施例的指示關於包括於AUD中的預定參數集之資訊之實例的圖式； 圖11a展示根據本申請案之實施例的指示預定寫碼參數集之間的關係之實例的示意性說明； 圖11b展示根據本申請案之實施例的指示AU之哪一部分指示哪一參數集之哪一識別符的實例之示意性說明； 圖11c展示根據本申請案之實施例的指示AU之哪一部分指示哪一參數集之哪一識別符的另一實例之示意性說明； 圖12a、圖12b展示根據本申請案之實施例的指示包括於AUD中的參數之實例的圖式；且 圖13展示根據本申請案之實施例的指示包括於AUD中之參數之另一實例的圖式。

Claims (29)

  1. 一種視訊解碼器，其包含：一解碼核心，其組配來使用經運動補償之預測、及基於變換之殘餘解碼，自一視訊資料串流之一存取單元(AU)內之一或多個視訊寫碼單元來重建構一經解碼圖像，以獲得該經解碼圖像之一經重建構版本；一迴路內濾波器，其組配來濾波該經解碼圖像之該經重建構版本，以獲得要插入該視訊解碼器之經解碼圖像緩衝器(DPB)中的該經解碼圖像之一版本；及一參數化器，其組配來藉由以下操作參數化該迴路內濾波器：從位於該經解碼圖像之該存取單元(AU)內的一或多個參數集讀取用於參數化該迴路內濾波器之迴路內濾波器控制資訊，該一或多個參數集沿著資料串流次序在該一或多個視訊寫碼單元之後，其中該參數化器組配來在該視訊資料串流中之一預定指示採取一第一狀態之情況下，將該經解碼圖像之該存取單元(AU)內之該一或多個參數集定位在沿著資料串流次序在該一或多個視訊寫碼單元之後的一位置處，及在該視訊資料串流中之該預定指示採取一第二狀態之情況下，將該經解碼圖像之該存取單元(AU)內之該一或多個參數集定位在該存取單元內之在所有該一或多個視訊寫碼單元之前的一不同位置處，以及參數化該迴路內濾波器以便以取決於該迴路內濾波器控制資訊之一方式濾波該經解碼圖像之該經重建構版本。
  2. 如請求項1之視訊解碼器，其中：該迴路內濾波器控制資訊包含用於依據轉移函數參數化該迴路內濾波器之一或多個濾波器係數。
  3. 如請求項1之視訊解碼器，其中： 該迴路內濾波器控制資訊包含用於空間上改變由該迴路內濾波器對該經解碼圖像之該經重建構版本所作之該濾波的空間上選擇性迴路內濾波器控制資訊。
  4. 如請求項1之視訊解碼器，其中：該一或多個參數集中之一預定參數集按資料串流次序在該一或多個視訊寫碼單元中之每一者之後，且包含用於依據轉移函數參數化該迴路內濾波器之一或多個濾波器係數。
  5. 如請求項1之視訊解碼器，其中：該一或多個參數集針對該一或多個視訊寫碼單元中之每一者包含一另外預定參數集，該另外預定參數集按資料串流次序在該個別視訊寫碼單元之後，且包含用於在經編碼成該個別視訊寫碼單元的該圖像之一部分內，空間上改變由該迴路內濾波器對該經解碼圖像之該經重建構版本所作之該濾波的空間上選擇性迴路內濾波器控制資訊。
  6. 如請求項1之視訊解碼器，其中：該一或多個視訊寫碼單元中之每一者包含按資料串流次序在該個別視訊寫碼單元之一資料區段之後的一濾波器資訊區段，其中該濾波器資訊區段包含用於在基於區塊之預測參數資料及預測殘餘資料經編碼入該個別視訊寫碼單元之該資料區段所針對的該圖像之一部分內，空間上改變由該迴路內濾波器對該經解碼圖像之該經重建構版本所作之該濾波的空間上選擇性迴路內濾波器控制資訊。
  7. 如請求項1之視訊解碼器，其組配來從該一或多個視訊寫碼單元讀取該預定指示。
  8. 如請求項1之視訊解碼器，其中該預定指示在採取該第一狀態之情況下由一或多個識別符指出該一或多個參數集，並在採取該第二狀態之 情況下指出不同的一或多個迴路內濾波器控制資訊參數集。
  9. 如請求項1之視訊解碼器，其組配來在一每存取單元基礎上回應於該預定指示，而在該預定指示對於該視訊資料串流之不同存取單元而不同之情況下針對該等不同存取單元以不同方式執行定位。
  10. 如請求項1之視訊解碼器，其中該參數化器組配來：使用包括於先前發信之存取單元(AU)中的該迴路內濾波器控制資訊來重建構該經解碼圖像。
  11. 如請求項1之視訊解碼器，其中該視訊解碼器組配來在偵測存取單元(AU)之邊界時，將攜載呈參數集中之一或多者形式之該迴路內濾波器控制資訊的視訊寫碼單元解譯為不自其開始一存取單元(AU)，及將攜載不呈參數集中之一或多者形式之該迴路內濾波器控制資訊的視訊寫碼單元解譯為自其開始一存取單元。
  12. 一種視訊解碼器，其組配來進行下列動作：藉由以使用一或多個預定寫碼參數予以參數化之一方式自一視訊資料串流之一存取單元(AU)內之一或多個視訊寫碼單元解碼出一經解碼圖像，來從該視訊資料串流解碼出一視訊；自穿插至視訊資料串流中之多個參數集導出該等預定寫碼參數，自該存取單元(AU)之一預定單元讀取識別符，該等識別符識別該等多個參數集中之預定參數集，其包含該等預定寫碼參數，其中該AU之該預定單元包含指出以下各者中之任一者之一旗標：參照特定預定參數集的該等識別符之預定識別符是否存在於該預定單元中，或參照該等特定預定參數集的該等預定識別符是否存在於該一或多個視 訊寫碼單元中。
  13. 如請求項12之視訊解碼器，其中：該等多個參數集具有不同階層層級，其中該一或多個視訊寫碼單元包含：參照一或多個第一預定階層層級內之第一預定參數集的識別符，其中該一或多個第一預定階層層級內之該等第一預定參數集包含參照一或多個第二預定階層層級內之第二預定參數集的識別符，該等第一預定參數集及該等第二預定參數集為該等預定參數集所包含。
  14. 如請求項13之視訊解碼器，其中自該存取單元(AU)之該預定單元讀取的該等識別符識別由該存取單元之該一或多個視訊寫碼單元直接或間接參照的所有預定參數集，使得若由該等識別符識別之所有預定參數集可用，則該存取單元即可解碼。
  15. 如請求項12之視訊解碼器，其中：該等第一預定參數集包含：第三預定參數集，其由該一或多個視訊寫碼單元中之識別符參照，及第四預定參數集，其由存在於該預定單元中之識別符參照，但既不由該一或多個視訊寫碼單元中之該等識別符中之任一者參照，亦不由該等預定參數集中之任一者參照。
  16. 如請求項12之視訊解碼器，其中：該AU之該預定單元包含以下各者中之一或多者：一或多個適應性參數集(APS)之一或多個識別符，一或多個圖像參數集(PPS)之一或多個識別符，用於一視訊參數集(VPS)之一識別符，用於一解碼器參數集(DPS)之一識別符，及一或多個序列參數集(SPS)之一或多個識別符。
  17. 如請求項12之視訊解碼器，其中：該等多個參數集包含：一視訊參數集(VPS)，一解碼器參數集(DPS)，一序列參數集(SPS)，一或多個圖像參數集(PPS)，及一或多個適應性參數集(APS)。
  18. 如請求項12之視訊解碼器，其中：該AU之該預定單元為一存取單元定界符(AUD)。
  19. 一種視訊解碼器，其組配來進行下列動作：藉由自一視訊資料串流之存取單元(AU)之一或多個視訊寫碼單元解碼出圖像，來從該視訊資料串流解碼出一視訊；自存取單元定界符(AUD)讀取一或多個參數，該等存取單元定界符(AUD)係配置於該資料串流中以便形成該等存取單元(AU)之開始點，該一或多個參數：控制各自的存取單元是否針對與一個時刻相關但與該視訊資料串流之不同層相關的圖像界定於該視訊資料串流中，或與一個時刻相關但與該視訊資料串流之不同層相關的該等圖像是否經寫碼入該等存取單元中之一者，及/或指出包含於該等存取單元中之視訊寫碼單元之一視訊寫碼類型，在一視訊寫碼類型指示含有彼此不同的一個存取單元內之視訊寫碼單元之情況下，該視訊寫碼類型將指派給該一個存取單元內之該等視訊寫碼單元，及/或指出哪些存取單元之圖像不由任何其他圖像參照，及/或指出未被輸出之圖像。
  20. 如請求項19之視訊解碼器，其中：該一或多個參數形成相對於由一先前AUD界定之參數的一偏差。
  21. 如請求項19之視訊解碼器，其中：該AUD包含由一先前AUD界定之參數是否被採用的一指示。
  22. 如請求項19之視訊解碼器，其中：該AUD包含該一或多個參數是否應用於該視訊資料串流之所有層抑或僅僅應用於其一單層的一指示。
  23. 如請求項19之視訊解碼器，其中：該等視訊寫碼單元之該視訊寫碼類型係藉由描述一多圖像之一隨機存取性質而指出。
  24. 一種視訊解碼器，其組配來進行下列動作：藉由自一視訊資料串流之存取單元(AU)之一或多個視訊寫碼單元解碼出圖像來從該視訊資料串流解碼出一視訊；自存取單元定界符(AUD)讀取一或多個參數，該等存取單元定界符(AUD)係配置於該資料串流中以便形成該等存取單元(AU)之開始點，該一或多個參數指出該存取單元之一特性，及該特性是否應用於該視訊資料串流之所有層抑或僅僅應用於其一單層的一指示。
  25. 一種視訊解碼方法，其包含：使用經運動補償之預測、及基於變換之殘餘解碼，自一視訊資料串流之一存取單元(AU)內之一或多個視訊寫碼單元來重建構一經解碼圖像，以獲得該經解碼圖像之一經重建構版本；藉由使用一迴路內濾波器濾波該經解碼圖像之該經重建構版本，以獲得要插入視訊解碼器之經解碼圖像緩衝器(DPB)中的該經解碼圖像之一版本；及藉由以下各者參數化該迴路內濾波器： 從位於該經解碼圖像之該存取單元(AU)內的一或多個參數集讀取用於參數化該迴路內濾波器之迴路內濾波器控制資訊，該一或多個參數集沿著資料串流次序在該一或多個視訊寫碼單元之後，其中之參數化器組配來在該視訊資料串流中之一預定指示採取一第一狀態之情況下，將該經解碼圖像之該存取單元(AU)內之該一或多個參數集定位在沿著資料串流次序在該一或多個視訊寫碼單元之後的一位置處，及在該視訊資料串流中之該預定指示採取一第二狀態之情況下，將該經解碼圖像之該存取單元(AU)內之該一或多個參數集定位在該存取單元內之在所有該一或多個視訊寫碼單元之前的一不同位置處，以及以便以取決於該迴路內濾波器控制資訊之一方式濾波該經解碼圖像之該經重建構版本。
  26. 一種視訊解碼方法，其包含：藉由以使用一或多個預定寫碼參數予以參數化之一方式自一視訊資料串流之一存取單元(AU)內之一或多個視訊寫碼單元解碼出一經解碼圖像，來從該視訊資料串流解碼出一視訊；自穿插至視訊資料串流中之多個參數集導出該等預定寫碼參數，自該存取單元(AU)之一預定單元讀取識別符，該等識別符從該等多個參數集中識別出預定參數集，其包含該等預定寫碼參數，其中該AU之該預定單元包含指出以下各者中之任一者之一旗標：參照特定預定參數集的該等識別符中之預定識別符是否存在於該預定單元中，或參照該等特定預定參數集的該等預定識別符是否存在於該一或多個視訊寫碼單元中。
  27. 一種視訊解碼方法，其包含：藉由自一視訊資料串流之存取單元(AU)之一或多個視訊寫碼單元解碼出圖像，來從該視訊資料串流解碼出一視訊；自存取單元定界符(AUD)讀取一或多個參數，該等存取單元定界符(AUD)係配置於該資料串流中以便形成該等存取單元(AU)之開始點，該一或多個參數：控制各自的存取單元是否針對與一個時刻相關但與該視訊資料串流之不同層相關的圖像界定於該視訊資料串流中，或與一個時刻相關但與該視訊資料串流之不同層相關的該等圖像是否寫碼入該等存取單元中之一者，指出包含於該等存取單元中之視訊寫碼單元之一視訊寫碼類型，在一視訊寫碼類型指示含有彼此不同的一個存取單元內之視訊寫碼單元之情況下，該視訊寫碼類型將指派給該一個存取單元內之該等視訊寫碼單元，及/或指出哪些存取單元之圖像不由任何其他圖像參照，及/或指出未被輸出之圖像。
  28. 一種視訊解碼方法，其包含：藉由自一視訊資料串流之存取單元(AU)之一或多個視訊寫碼單元解碼出圖像，而自該視訊資料串流解碼出一視訊；自存取單元定界符(AUD)讀取一或多個參數，該等存取單元定界符(AUD)係配置於該資料串流中以便形成該等存取單元(AU)之開始點，該一或多個參數指出該存取單元之一特性，及該特性是否應用於該視訊資料串流之所有層抑或僅僅應用於其一單層的一指示。
  29. 一種具有程式碼之電腦程式，該程式碼用以在運行於一電腦上時執行如請求項25至28中任一項之方法。
TW109128290A 2019-08-19 2020-08-19 存取單元定界符及適應參數集使用技術 TWI794639B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19192413 2019-08-19
EP19192413.3 2019-08-19

Publications (2)

Publication Number Publication Date
TW202114429A TW202114429A (zh) 2021-04-01
TWI794639B true TWI794639B (zh) 2023-03-01

Family

ID=67659343

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109128290A TWI794639B (zh) 2019-08-19 2020-08-19 存取單元定界符及適應參數集使用技術

Country Status (11)

Country Link
EP (1) EP4018661A1 (zh)
JP (2) JP7377953B2 (zh)
KR (1) KR20220046679A (zh)
CN (1) CN114556925B (zh)
AU (1) AU2020332558A1 (zh)
BR (1) BR112022003176A2 (zh)
CA (1) CA3151829A1 (zh)
IL (1) IL290601A (zh)
TW (1) TWI794639B (zh)
WO (1) WO2021032747A1 (zh)
ZA (1) ZA202202114B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4395324A1 (en) * 2022-12-28 2024-07-03 Beijing Xiaomi Mobile Software Co., Ltd. Signaling coded blocks data and in-loop filtering parameters of a video sequence

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016057432A1 (en) * 2014-10-06 2016-04-14 Microsoft Technology Licensing, Llc Syntax structures indicating completion of coded regions

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2116059A2 (en) * 2007-01-04 2009-11-11 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video
US9001883B2 (en) * 2011-02-16 2015-04-07 Mediatek Inc Method and apparatus for slice common information sharing
DK2882190T3 (en) * 2011-04-21 2019-02-18 Hfi Innovation Inc Method and apparatus for improved ring-structured filtration
US9277228B2 (en) * 2011-07-18 2016-03-01 Qualcomm Incorporated Adaptation parameter sets for video coding
KR20130034566A (ko) * 2011-09-28 2013-04-05 한국전자통신연구원 제한된 오프셋 보상 및 루프 필터를 기반으로 하는 영상 부호화 및 복호화 방법 및 그 장치
US9143802B2 (en) * 2011-10-31 2015-09-22 Qualcomm Incorporated Fragmented parameter set for video coding
KR101950657B1 (ko) * 2012-04-13 2019-02-20 미쓰비시덴키 가부시키가이샤 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법, 화상 복호 방법 및 기록 매체
US10057574B2 (en) * 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016057432A1 (en) * 2014-10-06 2016-04-14 Microsoft Technology Licensing, Llc Syntax structures indicating completion of coded regions

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
期刊 Ming Li et.al, " Comments on carriage of coding tool parameters in Adaptation Parameter Set" JVET -N0065, Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 14th Meeting: Geneva, CH, March 19-27 2019, pp. 1~3 *
期刊 Ming Li et.al, " Comments on carriage of coding tool parameters in Adaptation Parameter Set" JVET -N0065, Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 14th Meeting: Geneva, CH, March 19-27 2019, pp. 1~3。

Also Published As

Publication number Publication date
JP2022545236A (ja) 2022-10-26
EP4018661A1 (en) 2022-06-29
ZA202202114B (en) 2024-02-28
CN114556925B (zh) 2024-08-13
US20220303582A1 (en) 2022-09-22
TW202329697A (zh) 2023-07-16
KR20220046679A (ko) 2022-04-14
JP7377953B2 (ja) 2023-11-10
TW202114429A (zh) 2021-04-01
WO2021032747A1 (en) 2021-02-25
IL290601A (en) 2022-04-01
JP2024001276A (ja) 2024-01-09
BR112022003176A2 (pt) 2022-05-17
AU2020332558A1 (en) 2022-03-10
CN114556925A (zh) 2022-05-27
CA3151829A1 (en) 2021-02-25

Similar Documents

Publication Publication Date Title
US10419755B2 (en) Confusion of multiple filters in adaptive loop filtering in video coding
EP3205092B1 (en) Intra block copy prediction restrictions for parallel processing
JP7403633B2 (ja) ビデオの符号化及び復号のための高レベルシンタックス
KR20190089890A (ko) 비디오 코딩에서의 양방향 필터 사용의 표시
CA2952456C (en) Improved video coding using end of sequence network abstraction layer units
CN115176477A (zh) 用于视频编码和解码的高级句法
US11683532B2 (en) Image coding device and method for controlling loop filtering
GB2501125A (en) Providing adaptation parameters to a decoder by including an identifier to a relevant characteristic set in a bit stream portion.
US20230344986A1 (en) Filtering-based image coding device and method
GB2590632A (en) Video coding and decoding
JP2024001276A (ja) アクセスユニットデリミタおよび適応パラメータセットの使用
JP2021527343A (ja) 符号化ビデオビットストリーム中に含まれているデータの量を低減するためのパラメータセット中のパラメータ値情報をシグナリングすること
KR20220156029A (ko) 구문 요소를 사용한 비디오 프로세싱
US20230239512A1 (en) Image coding device and method for controlling loop filtering
TWI851108B (zh) 存取單元定界符及適應參數集使用技術
US12108088B2 (en) Usage of access unit delimiters and adaptation parameter sets
KR20080055685A (ko) 비디오 신호의 디코딩 방법 및 장치
US20160330486A1 (en) Method and apparatus for processing video signal for reducing visibility of blocking artifacts
RU2787884C1 (ru) Оборудование и способ для кодирования изображений на основе фильтрации
RU2803187C1 (ru) Способ и устройство кодирования изображения на основе подкартинки
RU2820304C1 (ru) Способ и устройство кодирования изображения на основе подкартинки
RU2800596C1 (ru) Конфигурация срезов и плиток для кодирования изображений/видео
RU2810200C2 (ru) Способ и устройство кодирования изображения на основе подкартинки
KR20240107160A (ko) 동영상 처리 방법, 장치 및 매체