TW202042554A - 具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法 - Google Patents

具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法 Download PDF

Info

Publication number
TW202042554A
TW202042554A TW109107864A TW109107864A TW202042554A TW 202042554 A TW202042554 A TW 202042554A TW 109107864 A TW109107864 A TW 109107864A TW 109107864 A TW109107864 A TW 109107864A TW 202042554 A TW202042554 A TW 202042554A
Authority
TW
Taiwan
Prior art keywords
video
encoded
value
video signal
decoder
Prior art date
Application number
TW109107864A
Other languages
English (en)
Other versions
TWI761783B (zh
Inventor
亞當 維克沃斯基
羅伯特 史庫濱
雅構 夏契茲德拉富恩特
寇尼拉斯 黑爾吉
湯瑪士 夏以爾
迪特利夫 馬皮
卡斯登 蘇荷寧
湯瑪士 威剛德
Original Assignee
弗勞恩霍夫爾協會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 弗勞恩霍夫爾協會 filed Critical 弗勞恩霍夫爾協會
Publication of TW202042554A publication Critical patent/TW202042554A/zh
Application granted granted Critical
Publication of TWI761783B publication Critical patent/TWI761783B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/537—Motion estimation other than block-based
    • H04N19/54—Motion estimation other than block-based using feature points or meshes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/563—Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

提供一種根據實施例之視訊編碼器。該視訊編碼器經組配以用於藉由產生一經編碼視訊信號而編碼一視訊之多個圖像，其中該等多個圖像中之每一者包含原始圖像資料。該視訊編碼器包含一資料編碼器，該資料編碼器經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料。此外，該視訊編碼器包含一輸出介面，該輸出介面經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料。另外，提供根據實施例之用於編碼及解碼之視訊解碼器、系統、方法、電腦程式及經編碼視訊信號。

Description

具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法
本發明係關於視訊編碼及視訊解碼，且詳言之，係關於具輪廓與位階相依寫碼選項之編碼器及解碼器、編碼方法及解碼方法。
H.265/HEVC (HEVC =高效率視訊寫碼)為視訊編解碼器，其已經提供用於促進或甚至致能編碼器及/或解碼器處的並行處理之工具。舉例而言，HEVC支援將圖像細分成彼此獨立地編碼之影像塊之陣列。HEVC支援之另一概念係關於WPP，根據WPP，可自左向右例如以條帶並行地處理圖像之CTU列或CTU排，其限制條件為在處理連續CTU排時遵從某一最小CTU偏移(CTU=寫碼樹單元)。然而，具有甚至更高效地支援視訊編碼器及/或視訊解碼器之並行處理能力的視訊編碼解碼器將係有利的。
在下文中，描述根據目前先進技術對VCL劃分之介紹(VCL =視訊寫碼層)。
通常，在視訊寫碼中，圖像樣本之寫碼程序需要較小分區，在該等分區中，樣本被分成用於諸如預測或變換寫碼之聯合處理的一些矩形區域。因此，將圖像劃分成在視訊序列之編碼期間恆定的特定大小之區塊。在H.264/AVC標準中，使用16×16個樣本之固定大小區塊(所謂的巨集區塊)(AVC =先進視訊寫碼)。
在目前先進技術HEVC標準(參見[1])中，存在64×64個樣本之最大大小的經寫碼樹型區塊(CTB)或寫碼樹型單元(CTU)。在HEVC之進一步描述中，對於此類區塊，使用更常見術語CTU。
CTU係以光柵掃描次序進行處理，以左上方CTU開始，逐排處理圖像中之CTU，向下至右下方CTU。
經寫碼CTU資料被組織成一種被稱作圖塊之容器。最初，在先前視訊寫碼標準中，圖塊意謂包含圖像之一或多個連續CTU的區段。圖塊用於經寫碼資料之分段。自另一視角，整個圖像亦可定義為一個大的區段且因此在歷史上，仍應用術語圖塊。除了經寫碼圖像樣本以外，圖塊亦包含與圖塊自身之寫碼程序相關的額外資訊，該資訊置放於所謂的圖塊標頭中。
根據目前先進技術，視訊寫碼層(VCL)亦包含用於分片及空間劃分之技術。此劃分可例如出於各種原因而應用於視訊寫碼中，各種原因包括並行化中之處理負載平衡、網路傳輸中之CTU大小匹配、誤差緩解等。
本發明之目標為提供用於視訊編碼及視訊解碼之改良概念。
本發明之目標係藉由獨立技術方案之標的物來解決。
在附屬請求項中提供較佳實施例。
諸圖之以下描述以呈現基於區塊之預測性編解碼器的編碼器及解碼器之描述開始，該基於區塊之預測性編解碼器用於對視訊之圖像進行寫碼以便形成其中可構建本發明之實施例之寫碼框架的實例。關於圖9至圖11描述各別編碼器及解碼器。在下文中，呈現本發明之概念之實施例的描述以及關於此等概念可如何分別構建至圖9及圖10之編碼器及解碼器中的描述，但運用圖1至圖3及後續圖描述的實施例亦可用以形成並不根據在圖9及圖10之編碼器及解碼器下層的寫碼框架操作的編碼器及解碼器。
圖9展示視訊編碼器，即用於例示性地使用基於變換之殘餘寫碼將圖像12預測性地寫碼至資料串流14中的設備。使用參考符號10指出設備或編碼器。圖10展示對應視訊解碼器20，即經組配以亦使用基於變換之殘餘解碼自資料串流14預測性地解碼圖像12'的設備20，其中撇號用以指出就由預測殘餘信號之量化引入的寫碼損失而言，如由解碼器20重建構之圖像12'與最初由設備10編碼之圖像12偏離。圖9及圖10例示性地使用基於變換之預測殘餘寫碼，但本申請案之實施例不限於此種預測殘餘寫碼。對於關於圖9及圖10所描述之其他細節亦係如此，如將在下文所概述。
編碼器10經組配以使預測殘餘信號經受空間至頻譜變換且將因此獲得之預測殘餘信號編碼成資料串流14。同樣，解碼器20經組配以自該資料串流14解碼預測殘餘信號且使因此獲得之預測殘差信號經受頻譜至空間變換。
在內部，編碼器10可包含產生預測殘差24之預測殘餘信號形成器22，以便量測預測信號26與原始信號(即，與圖像12)之偏差。預測殘餘信號形成器22可例如為自原始信號(即，自圖像12)減去預測信號之減法器。編碼器10接著進一步包含變換器28，該變換器使預測殘餘信號24經受空間至頻譜變換以獲得譜域預測殘餘信號24'，該譜域預測殘餘信號接著經受藉由亦由編碼器10包含之量化器32的量化。將如此經量化之預測殘餘信號24''寫碼至位元串流14中。為此目的，編碼器10可視情況包含熵寫碼器34，該熵寫碼器將經變換及量化之預測殘餘信號熵寫碼至資料串流14中。預測信號26由編碼器10之預測級36基於編碼至資料串流14中且可自資料串流解碼的預測殘餘信號24''產生。為此目的，如圖9中所展示，預測級36可在內部包含：一解量化器38，其解量化預測殘餘信號24''以便獲得譜域預測殘餘信號24'''，該信號除量化損失以外對應於信號24'；接著為一反變換器40，其使後一預測殘餘信號24'''經受反變換，即頻譜至空間變換，以獲得除量化損失以外對應於原始預測殘餘信號24之預測殘餘信號24''''。預測級36之組合器42接著諸如藉由相加來重組合預測信號26與預測殘餘信號24''''，以便獲得經重建構信號46，即初始信號12之重建構。經重建構信號46可對應於信號12'。預測級36之預測模組44接著藉由使用例如空間預測(即，圖像內預測)及/或時間預測(即，圖像間預測)基於信號46產生預測信號26。
同樣，如圖10中所展示，解碼器20可在內部由對應於預測級36且以對應於預測級之方式互連的組件構成。詳言之，解碼器20之熵解碼器50可對來自資料串流之經量化譜域預測殘餘信號24"進行熵解碼，接著以上文參看預測級36之模組描述的方式互連及協作的解量化器52、反變換器54、組合器56及預測模組58基於預測殘餘信號24"恢復經重建構信號以使得如圖10中所展示，組合器56之輸出產生經重建構信號，即圖像12'。
儘管上文未特定描述，但容易瞭解編碼器10可根據某一最佳化方案(諸如以最佳化某一速率及變形相關準則(即寫碼成本)方式)設定一些寫碼參數，包括例如預測模式、運動參數及類似者。舉例而言，編碼器10及解碼器20及對應模組44、58可分別支援不同預測模式，諸如框內寫碼模式及框間寫碼模式。編碼器及解碼器在此等預測模式類型之間切換所藉以的粒度可對應於圖像12及12'分別細分成寫碼區段或寫碼區塊。在此等寫碼區段之單元中，舉例而言，圖像可再分成經框內寫碼之區塊及經框間寫碼之區塊。經框內寫碼區塊係基於如在下文更詳細地概述的各別區塊之空間已經寫碼/經解碼鄰域來預測。若干框內寫碼模式可存在並經選擇用於各別經框內寫碼區段，包括定向或角度框內寫碼模式，各別區段根據定向或角度框內寫碼模式藉由沿著對各別定向框內寫碼模式具專一性的某一方向將鄰域之取樣值外推成各別經框內寫碼區段而填充。框內寫碼模式可例如亦包含一或多個其他模式，諸如：DC寫碼模式，各別經框內寫碼區塊之預測根據該模式將DC值指派至各別經框內寫碼區段內之所有樣本；及/或平面框內寫碼模式，各別區塊之預測根據該模式估算或判定為由二維線性函數描述之樣本值在各別經框內寫碼區塊之樣本位置上的空間分佈，該各別經框內寫碼區塊具有由二維線性函數基於相鄰樣本定義的平面之驅動傾斜及偏移。與其比較，可例如在時間上預測經框間寫碼區塊。對於經框間寫碼區塊，運動向量可在資料串流內發信號，該等運動向量指出圖像12所屬於的視訊之先前經寫碼圖像的部分之空間位移，先前經寫碼/解碼圖像在資料串流處經取樣以便獲得用於各別經框間寫碼區塊之預測信號。此意謂除了藉由資料串流14包含的殘餘信號寫碼(諸如表示經量化譜域預測殘餘信號24"之熵寫碼變換係數層級)之外，資料串流14可已將其編碼成用於指派寫碼模式至各種區塊的寫碼模式參數、用於區塊中之一些的預測參數(諸如用於經框間寫碼區段之運動參數)，及視情況選用之其他參數(諸如用於控制及發信號圖像12及12'分別成區段的細分之參數)。解碼器20使用此等參數以與編碼器相同之方式細分圖像，從而將相同預測模式指派給區段，且執行相同預測以產生相同預測信號。
圖11說明一方面經重建構信號(即，經重建構圖像12')與另一方面如在資料串流14中發信之預測殘餘信號24''''與預測信號26之組合之間的關係。如上文已指示，該組合可為相加。預測信號26在圖11中說明為圖像區域成使用陰影線例示性指出之經框內寫碼區塊及非陰影例示性指出的經框間寫碼區塊之細分。該細分可為任何細分，諸如圖像區域成正方形區塊或非正方形區塊之列及行之常規細分或來自樹根區塊之圖像12成多個具有不同大小之葉區塊之多分樹細分，諸如四分樹細分等等，其中圖11中說明其混合，在圖11中，圖像區域首先細分成樹根區塊之列及行，該等樹根區塊接著根據遞歸多分樹細分而另外細分成一或多個葉區塊。
再次，資料串流14可針對經框內寫碼區塊80而在其中寫碼框內寫碼模式，其將若干所支援框內寫碼模式中之一者指派給各別經框內寫碼區塊80。對於經框間寫碼區塊82，資料串流14可具有寫碼於其中之一或多個運動參數。一般而言，經框間寫碼區塊82並不受限於在時間上寫碼。替代地，經框間寫碼區塊82可為超出當前圖像12 (諸如圖像12屬於的視訊之先前經寫碼圖像，或在編碼器及解碼器分別為可調式編碼器及解碼器之情況下，另一視圖之圖像或階層式下部層)自身的自先前寫碼部分預測之任何區塊。
圖11中之預測殘餘信號24''''亦說明為圖像區域分成區塊84之細分。此等區塊可被稱作變換區塊，以便將其與寫碼區塊80及82區分開。實際上，圖11說明編碼器10及解碼器20可使用圖像12及圖像12'分別成區塊之兩個不同細分，即成寫碼區塊80及82之一個細分及成變換區塊84之另一細分。兩種細分可能相同，即各寫碼區塊80及82可同時形成變換區塊84，但圖11說明如下情況：其中例如成變換區塊84之細分形成成寫碼區塊80、82之細分的擴展，使得區塊80及82之兩個區塊之間的任何邊界與兩個區塊84之間的邊界重疊，或者各區塊80、82與變換區塊84中之一者重合或與變換區塊84之叢集重合。然而，亦可獨立於彼此判定或選擇細分，使得變換區塊84可替代地跨越區塊80、82之間的區塊邊界。就細分成變換區塊84而言，如關於細分成區塊80、82所提出之彼等陳述，類似陳述因此成立，即區塊84可為圖像區域成區塊(具有或不具有成列及行之配置)之常規細分的結果、圖像區域之遞歸多分樹細分的結果，或其組合，或任何其他類別之分塊。順便指出，應注意，區塊80、82及84不限於正方形、矩形或任何其他形狀。
圖11進一步說明預測信號26與預測殘餘信號24''''之組合直接產生經重建構信號12'。然而，應注意，多於一個預測信號26可根據替代實施例與預測殘餘信號24""組合以產生圖像12'。
在圖11中，變換區塊84應具有以下意義。變換器28及反變換器54以此等變換區塊84為單位執行其變換。舉例而言，許多編碼解碼器將某種DST或DCT用於所有變換區塊84。一些編碼解碼器允許跳過變換，使得對於變換區塊84中之一些，直接在空間域中寫碼預測殘餘信號。然而，根據下文描述之實施例，編碼器10及解碼器20以使得其支援若干變換之方式進行組配。舉例而言，由編碼器10及解碼器20支援之變換可包含： ™   DCT-II (或DCT-III)，其中DCT代表離散餘弦變換 ™   DST-IV，其中DST代表離散正弦變換 ™   DCT-IV ™   DST-VII ™   標識變換(IT)
當然，雖然變換器28將支援此等變換之所有正向變換版本，但解碼器20或反變換器54將支援其對應的後向或反向版本： ™   反DCT-II (或反DCT-III) ™   反DST-IV ™   反DCT-IV ™   反DST-VII ™   標識變換(IT)
後續描述提供關於編碼器10及解碼器20可支援哪些變換之更多細節。在任何情況下，應注意，所支援變換之集合可包含僅一個變換，諸如一個頻譜至空間或空間至頻譜變換。
如上文已概述，已呈現圖9至圖11作為實例，在該實例中可實施下文進一步描述之本發明概念以便形成根據本申請案的編碼器及解碼器之特定實例。就此而言，圖9及圖10之編碼器及解碼器可分別表示本文中在下文所描述的編碼器及解碼器的可能實施。然而，圖9及圖10僅為實例。然而，根據本申請案之實施例之編碼器可使用下文更詳細地概述之概念執行圖像12之基於區塊之編碼，且與諸如圖9之編碼器的不同之處例如在於根據本申請案之實施例之編碼器並非視訊編碼器，但為靜態圖像編碼器，不同之處在於根據本申請案之實施例之編碼器不支援框間預測，或不同之處在於細分成區塊80係以不同於圖11中例示之方式執行。同樣，根據本申請案之實施例之解碼器可使用下文進一步概述之寫碼概念自資料串流14執行圖像12'之基於區塊之解碼，但與例如圖10之解碼器20之不同之處可在於根據本申請案之實施例之解碼器並非視訊解碼器，但為靜態圖像解碼器，不同之處在於根據本申請案之實施例之解碼器不支援框內預測，或不同之處在於根據本申請案之實施例之解碼器係以不同於關於圖11所描述之方式將圖像12'細分成區塊，及/或不同之處在於根據本申請案之實施例之解碼器不自變換域中而自例如空間域中之資料串流14導出預測殘差。
在下文中，在圖1中描述根據實施例之通用視訊編碼器，在圖2中描述根據實施例之通用視訊解碼器，且在圖3中描述根據實施例之通用系統。
圖1說明根據實施例之通用視訊編碼器101。
視訊編碼器101經組配以用於藉由產生一經編碼視訊信號而編碼一視訊之多個圖像，其中該等多個圖像中之每一者包含原始圖像資料。
視訊編碼器101包含一資料編碼器110，該資料編碼器經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料。
此外，該視訊編碼器101包含一輸出介面120，該輸出介面經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料。
圖2說明根據實施例之通用視訊解碼器151。
視訊解碼器151經組配以用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構一視訊之多個圖像。
視訊解碼器151包含經組配以用於接收經編碼視訊信號中輸入介面160。
此外，視訊解碼器包含資料解碼器170，該資料解碼器經組配以用於藉由解碼經編碼圖像資料來重建構視訊之多個圖像。
圖3說明根據實施例之通用系統。
該系統包含圖1之視訊編碼器101及圖2之視訊解碼器151。
視訊編碼器101經組配以產生經編碼視訊信號。視訊解碼器151經組配以解碼經編碼視訊信號以重建構視訊之圖像。
請求項1至15中主張本發明之第一態樣。
請求項16至30中主張本發明之第二態樣。
請求項31至45中主張本發明之第三態樣。
請求項46至58中主張本發明之第四態樣。
請求項59至71中主張本發明之第五態樣。
請求項72至90中主張本發明之第六態樣。
在下文中，現在詳細地描述本發明之第一態樣。
詳言之，第一態樣係關於運動向量繞回。
在使用諸如廣泛部署的ERP格式(ERP=等矩形投影)之特定投影格式寫碼全向內容時，經投影圖像之左右邊界上的樣本在重新投影之後實際上在3d空間中相鄰。為了在目前先進技術視訊寫碼中利用此特性且防止視覺假影，在基於運動補償區塊之框間預測達到圖像邊界外側時，調整在左右圖像邊界上外插影像樣本值之典型過程。
替代經由圖像之左側及右側上的最末像素行之垂直外插產生傳統邊界填補樣本值，如下使用截割操作導出參考樣本位置，其導致運動向量及參考區塊將繞著所界定樣本行繞回 xInti = sps_ref_wraparound_enabled_flag  ? ClipH( sps_ref_wraparound_offset, picW, ( xIntL + i − 3 ) ) : Clip3( 0, picW − 1, xIntL + i − 3 ) yInti = Clip3( 0, picH − 1, yIntL + i − 3 ) where ClipH ( o, W, x ) is defined as mod(x,o); for x＜0 mod((x-W),o)+W-o; for x ＞ W-1, or X; otherwise Clip3在[1]中界定為：
Figure 02_image002
在此類內容進一步諸如基於使用圖像塊的OMAF視埠相依輪廓(OMAF=全向媒體格式)用於全向視訊服務時，問題出現。在此類服務中，ERP內容版本之低解析度變體常常與完整內容之其他高解析度片段混合以建立視埠相依性串流。將高解析度完整場景之片段及內容之低解析度變體配置至矩形視訊圖框上之必要性可導致低解析度ERP內容之旋轉，由此寫碼不可利用上述特性來避免視覺假影。例如，在圖4中，展示兩個配置，其特徵為低解析度ERP概述及高解析度圖像塊。可見，ERP影像塊旋轉或與圖像塊在右側相鄰。
因此，圖4中所說明之兩個影像塊配置要求MV繞回，目前先進技術設計並不滿足該等要求。
圖4概述性地說明根據一實施例之視埠相依性影像塊配置。
根據此態樣，MV繞回可例如以如下方式調適以允許以上影像塊配置。在一個實施例中，使用信令sps_ref_wraparound_idc來區分MV繞回選項以如下應對如在圖4的左側中的旋轉： If ( sps_ref_wraparound_idc == 0 ) { xInti = ClipH( sps_ref_wraparound_offset, picW, ( xIntL + i − 3 ) ) yInti = Clip3( 0, picH − 1, yIntL + i − 3 ) } else if ( sps_wraparound_idc == 1 ) { xInti = Clip3( 0, picW − 1, xIntL + i − 3 ) yInti = ClipH( sps_ref_wraparound_offset_second, picH, ( yIntL + i − 3 ) ) } else if ( sps_wraparound_idc == 2 ) { xInti = ClipH( sps_ref_wraparound_offset, picW, ( xIntL + i − 3 ) ) yInti = ClipH( sps_ref_wraparound_offset_second, picH, ( yIntL + i − 3 ) ) }
在另一實施例中，界定繞回區以涵蓋在圖4的右側上所描繪的情形。
在下文中，現在詳細地描述本發明之第二態樣。
詳言之，第二態樣係關於仿射預測運轉時間成本。
現有技術水平視訊編解碼器通常經設計以涵蓋大範圍的應用、使用情況及情形。例如，諸如HEVC之編解碼器包括旨在用於串流傳輸、廣播、即時交談或監測服務之技術。彼等服務中之每一者通常以取決於以下服務約束之不同解析度操作：廣播通常使用比交談等更高的解析度。儘管編解碼器包含的眾多個別工具經調諧以適合於此寬範圍之相關聯要求，但在每一個別操作點可能存在效率損失或複雜性增大。
例如，視訊寫碼傳統上使用僅平移動作模型，即矩形區塊根據二維運動向量移位以形成用於當前區塊的經動作補償預測子。此類模型不可表達常見於許多視訊序列中的旋轉或縮放動作，且因此已努力略微超越傳統平移動作模型，例如稱為JEM (JEM=聯合勘探模型)中的仿射動作。如圖5中所說明，在此仿射動作模型中，每區塊(v0 、v1 、…)兩個(或三個)所謂的控制點運動向量用來模型化旋轉及縮放動作。控制點運動向量選自鄰近區塊之MV候選項。所得經運動補償之預測子係經由計算基於子區塊之運動向量場而導出，且依賴於矩形子區塊之傳統平移運動補償。
圖5說明經由子區塊分割之仿射運動。詳言之，圖5例示性地說明用於右上方子區塊(紅色實線)的所得子區塊參考或預測子(紅色虛線)。
儘管圖5取決於控制點運動向量而表示或多或少簡單的旋轉動作，但可能個別子區塊參考跨過圖像中的寬距離，諸如在表示縮放動作時。在此類情況下，所得子區塊參考可例如如圖6中所說明而定位，其例示性展示為具有導致2×2子區塊的較小區塊大小。
詳言之，圖6說明仿射預測的縮放運動。
在此類情況下，需要解碼器自由完整當前區塊覆蓋的較大總圖像區域提取個別子區塊參考。為了具成本效益地實施此類仿射預測模式，需要協調對當前可用硬體上的個別子區塊參考之提取。此類協調可例如為對包含所有子區塊參考的連續參考圖像區域之聯合提取。因此，極端縮放運動可能由於排除有效的參考提取策略而在解碼器側上實施起來係昂貴的。
為了限制最壞情況參考圖像存取而不犧牲仿射預測模式之實質性寫碼增益，目前先進技術中提出限制參考圖像中的預測區塊之擴展的方法。
根據此態樣，此類限制可例如取決於所允許的最大記憶體頻寬而導出。此可在總體最大記憶體頻寬(例如，位階限制之規範)方面指定(從而大致限制記憶體頻寬額外負擔(界定所需參考記憶體存取相對於通常平移預測之最大增大))，或藉由編碼器在高位階參數中明確地發信。該等方法可混合。
在一個實施例中，經由保證圍繞所得子區塊參考區塊的限界框不超過臨限值來實行對參考子區塊擴展之限制。此類臨限值可自區塊大小、圖像解析度、最大允許頻寬導出或在高位階參數中明確地發信。
在另一實施例中，對參考子區塊擴展的限制取決於經寫碼圖像解析度或由位階限制界定。
在下文中，現在詳細地描述本發明之第三態樣。
詳言之，第三態樣係關於仿射預測色度處置。
上文所描述的仿射預測模型之寫碼效率與子區塊大小成反比，因為較小子區塊允許利用基於底層平動區塊之運動模型更佳地近似得出仿射運動。然而，精細粒度的參考圖像存取以顯著運轉時間費用出現。
在視訊之明度與色度分量不相等地取樣時，諸如在主要消費者視訊格式4:2:0中，預測/參考區塊通常以相同比率取樣。例如，在經由傳統方法(諸如基於平動運動補償區塊之預測)預測16×16明度區塊時，使用相同明度區塊運動向量預測8×8之各別色度區塊。
在以上仿射預測模型之上下文中，由於明度子區塊已經具有非常精細粒度或已經非常小，因此用於處置色度區塊之目前先進技術解決方案使色度處理基於相同明度區塊大小而不顧及格式子取樣。因此，仿射預測中的明度頻道中的4×4子區塊導致色度頻道中的4×4子區塊，其藉此在色度頻道中比在明度頻道中的數目少，如圖7中所說明。
圖7說明用於不同頻道中的仿射預測之子區塊分割。
因此，需要導出用於對應色度區塊的運動資訊之方式。存在不同形式的解決方案。例如，最簡單的目前先進技術解決方案將對所有四個對應明度子區塊之運動資訊mvLX[]求平均，例如如下： mvAvgLX = ( mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1) ][ (ySbIdx＞＞1＜＜1) ] + mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1) + 1 ][ ( ySbIdx ＞＞ 1 ＜＜ 1) ] + mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1 ) ][ ( ySbIdx ＞＞ 1 ＜＜ 1) + 1 ] + mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1 ) + 1 ][ (ySbIdx＞＞1＜＜1) + 1 ] + 2 ) ＞＞ 2
另一選項為僅對對應左上及右下明度運動向量求平均，如下： mvAvgLX = ( mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1) ][ (ySbIdx＞＞1＜＜1) ] + mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1 ) + 1 ][ (ySbIdx＞＞1＜＜1) + 1 ] + 1 ) ＞＞ 1
另外，可如下引入對稱捨入： mvAvgLX = ( mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1) ][ (ySbIdx＞＞1＜＜1) ] + mvLX[ ( xSbIdx ＞＞ 1 ＜＜ 1 ) + 1 ][ (ySbIdx＞＞1＜＜1) + 1 ] ) mvAvgLX[ 0 ] = ( mvAvgLX[ 0 ] ＞= 0 ? ( mvAvgLX[ 0 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 0 ] + 1 ) ＞＞1 ) ) mvAvgLX[ 1 ] = ( mvAvgLX[ 1 ] ＞= 0 ? ( mvAvgLX[ 1 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 1 ] + 1 ) ＞＞ 1 ) )
然而，在使用不同於4:2:0之色度格式(其中需要超出以上目前先進技術形式的額外求平均方案)時，問題出現。例如，在使用4:4:4色度格式時，應避免求平均，因為每一4×4色度子區塊對應於恰好一個4×4明度子區塊，且4:2:2色度格式僅需要在一個維度上求平均。因此，根據此態樣，經由將色度子取樣比率引入至mvAvgLX之導出中來導出求平均操作所涉及的正確明度區塊。在一個實施例中，如下實現導出 mvAvgLX = ( mvLX[ ( xSbIdx ＞＞ SubWidthC ＜＜ SubWidthC) ][ (ySbIdx＞＞ SubHeightC ＜＜ SubHeightC) ] +    mvLX[ ( xSbIdx ＞＞ SubWidthC ＜＜ SubWidthC ) + SubWidthC  ][ (ySbIdx＞＞ SubHeightC ＜＜ SubHeightC) + SubHeightC ] ) mvAvgLX[ 0 ] = ( mvAvgLX[ 0 ] ＞= 0 ? ( mvAvgLX[ 0 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 0 ] + 1 ) ＞＞1 ) ) mvAvgLX[ 1 ] = ( mvAvgLX[ 1 ] ＞= 0 ? ( mvAvgLX[ 1 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 1 ] + 1 ) ＞＞ 1 ) ) 其中如下自所應用的色度格式導出SubWidthC及SubHeightC：
色度格式 SubWidthC SubHeightC
4:2:0 1 1
4:2:2 1 0
4:4:4 0 0
在下文中，現在詳細地描述本發明之第四態樣。
詳言之，第四態樣係關於內插濾波器額外負荷
經運動補償之框間預測可在子樣本位置(例如，半像素、四分之一像素)使用樣本值，該等子樣本位置經由來自樣本值之卷積濾波器內插於整數樣本位置。目前先進技術編解碼器通常使用固定抽頭濾波器內核(例如，8抽頭)來產生此類子像素樣本值。
然而，在諸如仿射預測或DMVR (解碼器側運動向量改進)之基於子區塊的框間預測導致相對較小的明度及色度子區塊(諸如大小4×4)時，發生記憶體頻寬問題。在(子)區塊大小相對於固定內插濾波器大小減小的情況下，在用於(子)區塊之所產生參考明度子像素樣本的所存取樣本之總數目方面的額外負荷增大。因此，已提出使用相對較短抽頭濾波器內核用於諸如4×4之小子區塊之子像素內插，其展示隨著內容解析度增大而減小的最少寫碼處罰。
根據此態樣，取決於經寫碼內容之解析度調適用於子像素內插的較短抽頭內插濾波器之選擇，以便對於高解析度內容自峰值記憶體頻寬減小方面的增益獲益而不犧牲較低解析度內容的寫碼效率。
在一個實施例中，若干子像素內插濾波器可用(例如，雙線性、4抽頭、6抽頭、8抽頭)，且內容解析度及區塊大小用來判定適用的濾波器。
由於需要在編碼器或解碼器中實施且保持隨時可用的單獨濾波器之量的每一增大而使實施較昂貴。因此，減少將在編碼器或解碼器中並行實施的單獨濾波器之量係有利的。
例如，在目前先進技術中，視訊信號之色度分量使用空間子取樣，例如在使用4:2:0色度格式時。在此類情況下，色度分量通常亦使用比明度分量短的較短抽頭子像素內插濾波器。因此，除了用於亮度分量的傳統較長抽頭子像素內插濾波器內核之外，此類較短抽頭子像素內插濾波器亦需要由解碼器/編碼器實施準備好。在一實施例中，在子區塊處理需要抽頭減小的濾波器以減小峰值記憶體頻寬的情況下，引入較短抽頭子像素內插濾波器之重新使用，例如取決於經寫碼圖像大小或藉由編碼器選擇及位元串流指示。
在下文中，現在詳細地描述本發明之第五態樣。
詳言之，第五態樣係關於位元串流性質描述及輪廓集合操作
通常，視訊串流伴隨著描述其特性且允許識別視訊解碼器解碼位元串流所需的能力之類型的信令。
諸如AVC (先進視訊寫碼)、HEVC之目前先進技術視訊寫碼標準在位元串流中的參數集中包括輪廓及位階指示，其允許識別需要支援哪些工具以及例如視訊寫碼序列之解析度限制，以使得可容易地識別解碼器是否可解碼視訊序列。
在輪廓方面，吾人可識別僅支援框內寫碼工具或框內及框間工具(但僅8位元組態、或10位元組態、分層或非分層寫碼，等)之輪廓。
在位階(更多地與位元速率、解析度及/或圖框速率相關)方面，吾人可區分1080p@30 Hz、4Kp@30 Hz、4Kp@60 Hz、8Kp@30 Hz，等。
該資訊通常用於視訊串流傳輸系統中以用於能力交換，以使得特性被曝露且不同接收器可使其能力匹配解碼所提供位流之要求。
例如，在DASH (HTTP動態自適應串流傳輸)中，媒體呈現描述(MPD)可包含利用對應不同參數為相同內容提供的若干視訊。此藉由在稱作@codec=「xxx」之屬性中指示來進行，其中指出編解碼器、輪廓、位階等等。類似地，在RTP串流傳輸(RTP=即時傳輸協定)中，存在會話描述協定(SDP)，藉此協商用於會話之操作點。接著，會話所涉及的各方同意應使用哪一編解碼器、輪廓及位階來建立會話。又，在傳輸串流MPEG2-TS (MPEG=動畫專業團體；TS=傳輸串流)(在廣播傳輸中廣泛使用)，存在用以曝露此值至最終裝置之手段。此藉由在節目表中包括對應視訊描述符來進行，該節目表識別一節目(即，例如TV頻道)之編解碼器、輪廓及位階，且因此可選取可由最終裝置解碼之足夠頻道。
當前，包括於位元串流中之特性僅適用於經寫碼視訊序列(CVS)。CVS開始於第一IRAP (框內隨機存取點)，且以具有一個以下特性之IRAP結束： •       其為IDR (瞬時解碼器再新) •       其為BLA (斷鏈存取)(僅與HEVC相關) •       其具有序列結束(EOS) SEI訊息(SEI=補充增強資訊)。
在大部分視訊服務中，「會話」可包含若干在時間上連續的CVS，且因此在用於AVC及HEVC的參數集中指出的參數並不足夠，此係由於其僅描述「會話」中所涉及的所有CVS中的第一CVS。此問題已在MPEG2-TS中藉由以下文字解決：「註釋 - 在AVC 視訊串流中的一或多個序列中 ， 位階可低於AVC 視訊描述符中傳信的位階 ， 但亦可能存在為在AVC 視訊描述符中傳信的輪廓之一子集的輪廓。然而，在整個AVC 視訊串流中，僅應使用包括於在AVC 視訊描述符中傳信的輪廓中之工具 ( 若存在 ) 。舉例而言，若傳信主要輪廓，則基線輪廓可用於一些序列中，但僅使用在主要輪廓中的彼等工具。若AVC 視訊串流中的序列參數集傳信不同輪廓，且不傳信額外約束，則串流可能需要檢查以判定整個串流符合哪一輪廓 ( 若存在 ) 。若AVC 視訊描述符將與不符合單一輪廓之AVC 視訊串流相關聯，則AVC 視訊串流必須分割成兩個或更多個子串流，以使得AVC 視訊描述符可對於每一此類子串流傳信單一輪廓。」
換言之，在描述符中指出的輪廓及位階係為在AVC視訊串流之CVS中使用的任何輪廓之超集的輪廓，且位階為任一CVS之最高位階。
以類似方式，在MPD (媒體呈現描述)或SDP中指出的輪廓及位階可「高於」(意謂輪廓超集，或需要的工具比每一CVS之輪廓多)視訊位元串流中之輪廓及位階。
將需要位元串流自身包括此類信令，以使得自開始起就清楚需要哪組工具來解碼視訊「會話」之所有CVS。(此處，術語視訊會話亦例如包含TV頻道節目。) 信令由適用於若干CVS之參數集組成，即適用於位元串流之參數集組成。
存在兩種尤其相關之情況： •       不存在同時為超集之輪廓的具有輪廓的CVS。 •       可相對於層之數目而隨時間推移改變的CVS。
一個選項將為利用每個工具旗標傳信解碼所有CVS所需的所有工具，但此將導致不合乎需要的解決方案，因為基於更易於比較的輪廓工作比可能導致極其高數目的組合的多個工具通常更為方便。
在位元串流內有多於一個輪廓在起作用可能導致四個以下情況。解碼位元串流所需的工具對應於： •       兩個輪廓之交叉點，其中不存在對應於交叉點之輪廓。 •       兩個輪廓之交叉點，其中一個輪廓為兩個輪廓之交叉點。 •       兩個輪廓之聯合，其中不存在對應於交叉點之輪廓。 •       兩個輪廓之聯合，其中存在對應於交叉點之輪廓。
對於存在對應於所需的所有工具之輪廓，單一輪廓指示將足夠。
然而，在不存在描述所有必要工具的輪廓的情況下，應傳信多於一個輪廓，且應傳信交叉點或聯合以指出支援單一輪廓是否足以解碼位元串流(交叉點)或是否需要支援兩個輪廓以能夠解碼位元串流。
在下文中，現在詳細地描述本發明之第六態樣。
詳言之，第六態樣係關於緩衝週期SEI及圖像時序SEI訊息剖析相依性
在如HEVC之現有設計中，緩衝週期SEI訊息(SEI=補充增強資訊)、圖像時序SEI訊息及解碼單元SEI訊息中之語法元素取決於在SPS (序列參數集)中載送之語法元素。此相依性包括用以寫碼特定語法元素以及語法元素之存在的位元之數目。
然而，不需要將所有緩衝週期/圖像時序/解碼單元相關資訊置於相同語法位置，此係因為： 1)   當前在SPS中之語法元素適用於會話/能力協商，其藉由交換參數集進行。因此，其不可僅在緩衝週期SEI訊息中傳信。 2)   在緩衝週期SEI訊息中之語法元素不可移動至SPS，此係因為啟動新SPS僅可能在IRAP圖像(IRAP=框內隨機存取點)處進行，而緩衝週期可在與時間子層0相關聯的任一圖像處開始。需要在每一緩衝週期啟動新參數集亦為不合需要的。
以上剖析相依性導致起動問題：在剖析視訊位元串流之第一VCL NAL單元之前，不存在作用中SPS。由於SEI訊息係在第一VCL NAL單元(NAL=網絡抽象層)之前發送，因此其將在啟動SPS之前到達。
又，在參數集之頻帶外信令中，諸如對理解位元串流之HRD參數感興趣(例如，用於剪接位元串流)之剪接器的中間裝置可能不能夠剖析各別SEI訊息，此係因為相關參數集並不包括於位元串流中。
對於諸如剪接器之簡單中間裝置，亦可能難以剖析整個SPS直至其達到VUI中之HRD參數。
又，NAL單元之次序不明確地約束為需要SPS在參考SPS之緩衝週期SEI訊息之前發送。在此等情形下，解碼器可能須以位元串流格式儲存各別SEI訊息(而不能夠剖析其)，直至SPS到達且啟動。僅在彼時，才可剖析SEI訊息。
圖8展示用於此類情況的目前先進技術實例位元串流次序。
在一實施例中，剖析各別SEI訊息以如下方式獨立於SPS進行： 所有語法元素，其 •       在各別SEI訊息中指定另一語法元素之長度，或 •       並不需要用於會話/能力協商(子圖像時脈刻度除數) 移動至緩衝週期SEI訊息中。
緩衝週期SEI中之所有語法元素的長度完全獨立於其他語法結構。時序SEI訊息及解碼單元SEI訊息中之語法元素的長度可取決於緩衝週期SEI訊息中的語法元素，但不取決於任何參數集值。
特定HRD參數(NAL、VCL、DU，等)之存在旗標、CPB參數(vui_cpb_cnt_minus1[i]及bp_cpb_cnt_minus1)之計數及其他語法區段在參數集及緩衝週期SEI訊息中重複，且此態樣包含約束此等重複語法元素之值在兩個位置上相等。
圖像時序SEI訊息與解碼單元SEI訊息藉由將指出其他語法元素之存在的所有語法元素移動至各別SEI訊息(例如，frame_field_info_present_flag)中或複製其而被使得獨立。
作為此態樣之部分，為達成位元串流一致性，以上語法元素之值應等於參數集中之各別值。
作為此態樣之部分，緩衝週期中之tick_devisor(指出子圖像時序粒度)將具有相同值，除非concatenation_flag等於1 (即，剪接發生)。
如已經概述，在實施例中，提出將HRD參數、緩衝週期、圖像時序及解碼單元資訊SEI訊息添加至VVC規範。通用語法及語義係基於對應HEVC結構。使得SEI訊息之剖析可能獨立於SPS之存在而進行。
如上文所概述，為檢查位元串流一致性，需要緩衝模型。VVC緩衝模型可例如基於假想參考解碼器(HRD)規範，其以一些簡化使用於HEVC中。
HRD參數存在於SPS VUI中。緩衝週期SEI、圖像時序SEI及解碼單元資訊SEI訊息添加至其參考之存取單元。
在HEVC中，剖析相依性存在於SPS與HRD相關SEI訊息之間。儘管語義僅允許參考在相同存取單元中在作用中的SPS，但位元串流次序允許SEI可在SPS之前到達的情境。在此類情況下，需要儲存經寫碼SEI訊息，直至正確SPS到達。
此剖析相依性成問題的另一情境為網路元件及剪接器，尤其是在參數集在頻帶外交換(例如，在會話協商中)時。在此類情況下，參數集可能根本不包括於位元串流中，以使得網路元件或剪接器可根本不解碼緩衝/定時資訊。使此等元素辨識如解碼時間及圖框/欄位資訊之值仍然可能受關注。
在實施例中，提出使緩衝週期、圖像時序及解碼單元資訊SEI訊息之剖析獨立於SPS VUI/HRD參數，具體係藉由： -      將指出其他語法元素之長度或存在的所有語法元素自VUI移動至緩衝週期SEI訊息中。# -      複製在兩個位置皆需要的語法元素。此等語法元素之值被約束為相同。
設計決策： -      並非全部語法元素應自VUI移動至緩衝週期SEI，此係由於參數集通常經交換以用於會話協商。因此，對於會話協商重要的參數保持在VUI中。 -      將所有緩衝週期參數移動至SPS中並不可能，此係由於緩衝週期可能在非IRAP圖像處開始，其中啟動新SPS將不可能。 -      緩衝週期SEI與(圖像時序SEI或解碼單元SEI)之間的相依性不視為有害，此係因為此等訊息之間亦存在邏輯相依性。
下文給出基於HEVC語法之語法實例。
以下語法圖係基於HEVC語法，改變之處以紅色標出。語義通常移動至語法元素之新位置(對語法元素名稱具有改編)。每當語法元素重複時，添加位元串流約束：此等語法元素應具有相同值。 VUI/HRD參數：
…  
   vui_frame_field_info_present_flag  
…  
vui_timing_info_present_flag u(1)
    if( vui_timing_info_present_flag ) {  
vui_num_units_in_tick u(32)
vui_time_scale u(32)
      vui_poc_proportional_to_timing_flag u(1)
       if( vui_poc_proportional_to_timing_flag )  
          vui_num_ticks_poc_diff_one_minus1 ue(v)
vui_hrd_parameters_present_flag u(1)
       if( vui_hrd_parameters_present_flag )  
           hrd_parameters( 1, sps_max_sub_layers_minus1 )  
    }  
… u(1)
hrd_parameters( commonInfPresentFlag, maxNumSubLayersMinus1 ) { 描述符
    if( commonInfPresentFlag ) {  
vui_nal_hrd_parameters_present_flag u(1)
vui_vcl_hrd_parameters_present_flag u(1)
       if( vui_nal_hrd_parameters_present_flag  | | vui_ vcl_hrd_parameters_present_flag ) {  
vui_sub_pic_hrd_params_present_flag u(1)
if( sub_pic_hrd_params_present_flag ) {  
              tick_divisor_minus2 u(8)
              du_cpb_removal_delay_increment_length_minus1 u(5)
              sub_pic_cpb_params_in_pic_timing_sei_flag u(1)
              dpb_output_delay_du_length_minus1 u(5)
}  
          bit_rate_scale u(4)
          cpb_size_scale u(4)
           if( vui_sub_pic_hrd_params_present_flag )  
             cpb_size_du_scale u(4)
           initial_cpb_removal_delay_length_minus1 u(5)
           au_cpb_removal_delay_length_minus1 u(5)
           dpb_output_delay_length_minus1 u(5)
       }  
    }  
    for( i = 0; i  ＜=  maxNumSubLayersMinus1; i++ ) {  
fixed_pic_rate_general_flag [ i ] u(1)
       if( !fixed_pic_rate_general_flag[ i ] )  
          fixed_pic_rate_within_cvs_flag [ i ] u(1)
       if( fixed_pic_rate_within_cvs_flag[ i ] )  
          elemental_duration_in_tc_minus1 [ i ] ue(v)
       else  
low_delay_hrd_flag [ i ] u(1)
       if( !low_delay_hrd_flag[ i ] )  
          vui_cpb_cnt_minus1 [ i ] ue(v)
       if( nal_hrd_parameters_present_flag )  
           sub_layer_hrd_parameters( i )  
       if( vcl_hrd_parameters_present_flag )  
           sub_layer_hrd_parameters( i )  
    }  
}  
緩衝週期SEI訊息：
buffering_period( payloadSize ) {
bp_seq_parameter_set_id
bp_nal_hrd_parameters_present_flag
bp_vcl_hrd_parameters_present_flag
    if( bp_nal_hrd_parameters_present_flag  | | bp_ vcl_hrd_parameters_present_flag ) {
bp_sub_pic_hrd_params_present_flag
       if( bp_sub_pic_hrd_params_present_flag ) {
tick_divisor_minus2
          du_cpb_removal_delay_increment_length_minus1
sub_pic_cpb_params_in_pic_timing_sei_flag
dpb_output_delay_du_length_minus1
       }
initial_cpb_removal_delay_length_minus1
au_cpb_removal_delay_length_minus1
dpb_output_delay_length_minus1
    }
    if( !bp_sub_pic_hrd_params_present_flag )
      irap_cpb_params_present_flag
    if( irap_cpb_params_present_flag ) {
      cpb_delay_offset
      dpb_delay_offset
    }
concatenation_flag
au_cpb_removal_delay_delta_minus1
   bp_cpb_cnt_minus1
    if(bp_nal_hrd_parameters_present_flagNalHrdBpPresentFlag ) {
       for( i = 0; i ＜bp_cpb_cnt_minus1 + 1CpbCnt; i++ ) {
nal_initial_cpb_removal_delay [ i ]
nal_initial_cpb_removal_offset [ i ]
           if( sub_pic_hrd_params_present_flag  | |  irap_cpb_params_present_flag ) {
nal_initial_alt_cpb_removal_delay [ i ]
nal_initial_alt_cpb_removal_offset [ i ]
           }
       }
    }
    if(bp_vcl_hrd_parameters_present_flagVclHrdBpPresentFlag ) {
       for( i = 0; i ＜bp_cpb_cnt_minus1 + 1CpbCnt ; i++ ) {
vcl_initial_cpb_removal_delay [ i ]
vcl_initial_cpb_removal_offset [ i ]
           if( sub_pic_hrd_params_present_flag  | |  irap_cpb_params_present_flag ) {
vcl_initial_alt_cpb_removal_delay [ i ]
vcl_initial_alt_cpb_removal_offset [ i ]
           }
       }
    }
    if( payload_extension_present( ) )
      use_alt_cpb_params_flag
}
圖像時序SEI訊息：
pic_timing( payloadSize ) { 描述符
   frame_field_info_present_flag  
    if( frame_field_info_present_flag ) {  
      pic_struct u(4)
      source_scan_type u(2)
      duplicate_flag u(1)
    }  
    if( CpbDpbDelaysPresentFlag ) {  
      au_cpb_removal_delay_minus1 u(v)
      pic_dpb_output_delay u(v)
       if( sub_pic_hrd_params_present_flag )  
          pic_dpb_output_du_delay u(v)
       if( sub_pic_hrd_params_present_flag  &&             sub_pic_cpb_params_in_pic_timing_sei_flag ) {  
          num_decoding_units_minus1 ue(v)
          du_common_cpb_removal_delay_flag u(1)
           if( du_common_cpb_removal_delay_flag )  
             du_common_cpb_removal_delay_increment_minus1 u(v)
           for( i = 0; i  ＜=  num_decoding_units_minus1; i++ ) {  
             num_nalus_in_du_minus1 [ i ] ue(v)
              if( !du_common_cpb_removal_delay_flag  &&  i ＜ num_decoding_units_minus1 )  
                 du_cpb_removal_delay_increment_minus1 [ i ] u(v)
           }  
       }  
    }  
}  
解碼單元資訊SEI訊息：
decoding_unit_info( payloadSize ) { 描述符
decoding_unit_idx ue(v)
    if( !sub_pic_cpb_params_in_pic_timing_sei_flag )  
       du_spt_cpb_removal_delay_increment u(v)
   dpb_output_du_delay_present_flag u(1)
    if( dpb_output_du_delay_present_flag )  
      pic_spt_dpb_output_du_delay u(v)
}  
儘管已在設備之上下文中描述一些態樣，但顯然，此等態樣亦表示對應方法之描述，其中區塊或裝置對應於方法步驟或方法步驟之特徵。類似地，在方法步驟之上下文中所描述之態樣亦表示一對應區塊或項目或一對應設備之特徵的描述。可由(或使用)硬體設備(比如微處理器、可規劃電腦或電子電路)執行方法步驟中之一些或全部。在一些實施例中，可由此設備執行最重要之方法步驟中之一者或多者。
視某些實施要求而定，本發明之實施例可以硬體或軟體，或至少部分以硬體或至少部分以軟體實施。實施可使用數位儲存媒體來執行，該媒體例如軟性磁碟、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體，該媒體上儲存有電子可讀控制信號，該等電子可讀控制信號與可規劃電腦系統協作(或能夠協作)，使得執行各別方法。因此，數位儲存媒體可為電腦可讀的。
根據本發明之一些實施例包含具有電子可讀控制信號之資料載體，其能夠與可規劃電腦系統協作，使得執行本文中所描述之方法中的一者。
通常，本發明之實施例可實施為具有程式碼之電腦程式產品，當電腦程式產品在電腦上執行時，程式碼操作性地用於執行該等方法中之一者。程式碼可例如儲存於機器可讀載體上。
其他實施例包含儲存於機器可讀載體上，用於執行本文中所描述之方法中的一者的電腦程式。
換言之，本發明方法之實施例因此為電腦程式，其具有用於在電腦程式於電腦上執行時執行本文中所描述之方法中之一者的程式碼。
因此，本發明方法之另一實施例為資料載體(或數位儲存媒體，或電腦可讀媒體)，其包含記錄於其上的用於執行本文中所描述之方法中之一者的電腦程式。資料載體、數位儲存媒體或所記錄的媒體通常為有形及/或非暫時性的。
因此，本發明方法之另一實施例為表示用於執行本文中所描述之方法中的一者之電腦程式之資料串流或信號序列。資料串流或信號序列可例如經組配以經由資料通訊連接(例如，經由網際網路)而傳送。
另一實施例包含處理構件，例如經組配或經調適以執行本文中所描述之方法中的一者的電腦或可規劃邏輯裝置。
另一實施例包含電腦，其上安裝有用於執行本文中所描述之方法中之一者的電腦程式。
根據本發明之另一實施例包含經組配以(例如，電子地或光學地)傳送用於執行本文中所描述之方法中之一者的電腦程式至接收器的裝置或系統。舉例而言，接收器可為電腦、行動裝置、記憶體裝置等等。設備或系統可例如包含用於傳送電腦程式至接收器之檔案伺服器。
在一些實施例中，可規劃邏輯裝置(例如，場可規劃閘陣列)可用以執行本文中所描述之方法的功能性中之一些或全部。在一些實施例中，場可規劃閘陣列可與微處理器協作，以便執行本文中所描述之方法中之一者。通常，該等方法較佳地由任何硬體設備來執行。
本文中所描述之設備可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來實施。
本文中所描述之方法可使用硬體設備或使用電腦或使用硬體設備與電腦的組合來進行。
上述實施例僅說明本發明之原理。應理解，對本文中所描述之組配及細節的修改及變化將對熟習此項技術者顯而易見。因此，其僅意欲由接下來之申請專利範圍之範疇限制，而非由藉由本文中實施例之描述解釋所呈現的特定細節限制。 參考文獻 [1]  ISO/IEC, ITU-T. High efficiency video coding. ITU-T Recommendation H.265 | ISO/IEC 23008 10 (HEVC), edition 1, 2013; edition 2, 2014.
10:設備/編碼器 12,12':圖像 14:資料串流 20:設備/視訊解碼器 22:預測殘餘信號形成器 24,24',24'',24''',24'''':預測殘餘信號 26:預測信號 28:變換器 32:量化器 34:熵寫碼器 36:預測級 38,52:解量化器 40,54:反變換器 42,56:組合器 44,58:預測模組 46:經重建構信號 50:熵解碼器 80:經框內寫碼區塊 82:經框間寫碼區塊 84:變換區塊 101:通用視訊編碼器 110:資料編碼器 120:輸出介面 151:通用視訊解碼器 160:輸入介面 170:資料解碼器
在下文中，參考諸圖更詳細地描述本發明的實施例，其中： 圖1說明根據一實施例之視訊編碼器。 圖2說明根據一實施例之視訊解碼器。 圖3說明根據一實施例之系統。 圖4概述性地說明視埠相依性影像塊配置。 圖5說明經由子區塊分割之仿射運動。 圖6說明仿射預測的縮放運動。 圖7說明用於不同頻道中的仿射預測之子區塊分割。 圖8展示用於此類情況的目前先進技術實例位元串流次序。 圖9說明視訊編碼器。 圖10說明視訊解碼器。 圖11說明一方面經重建構信號(即，經重建構圖像)與另一方面如在資料串流中發信之預測殘餘信號及預測信號之組合之間的關係。
101:通用視訊編碼器
110:資料編碼器
120:輸出介面

Claims (90)

  1. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以取決於該等多個圖像中之一當前圖像而判定該等多個圖像中的一後續圖像之一重建構樣本，其中該資料解碼器經組配以判定該當前圖像內的一參考樣本之一參考位置， 其中該資料解碼器經組配以解碼在該經編碼視訊信號內編碼的一繞回參數之一值， 其中該資料解碼器經組配以取決於該重建構樣本之一位置、取決於一運動向量且取決於該繞回參數之該值而判定該參考樣本之該參考位置， 其中該資料解碼器經組配以取決於該參考樣本位於該參考位置而判定該後續圖像之該重建構樣本。
  2. 如請求項1之視訊解碼器， 其中該當前圖像具有在一下界x值處的一第一垂直邊界，其中該當前樣本具有在一上界x值處的一第二垂直邊界，該上界x值大於該下界x值， 其中該當前圖像具有在一下界y值處之一第一水平邊界，其中該當前樣本具有在一上界y值處之一第二水平邊界，該上界y值大於該下界y值，且 其中該資料解碼器經組配以取決於該下界x值、該上界x值、該下界y值及該上界y值中的至少一者而判定該參考位置。
  3. 如請求項2之視訊解碼器， 其中該參考位置具有一x值及一y值， 其中該資料解碼器經組配以取決於要判定的該重建構樣本之該位置且取決於該運動向量而判定具有一x值及一y值之一中間位置， 其中，若該中間位置之該x值小於該下界x值或大於該上界x值，則該資料解碼器經組配以取決於該中間位置之該x值且取決於該繞回參數之該值而判定該參考位置，使得該參考位置之該x值大於或等於該下界x值且使得該參考位置之該x值小於或等於該上界x值，且 其中，若該中間位置之該y值小於該下界y值或大於該上界y值，則該資料解碼器經組配以取決於該中間位置之該y值且取決於該繞回參數之該值而判定該參考位置，使得該參考位置之該y值大於或等於該下界y值且使得該參考位置之該y值小於或等於該上界y值。
  4. 如請求項3之視訊解碼器， 其中若該中間位置之該x值大於或等於該下界x值且若該中間位置之該x值小於或等於該上界x值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該x值等於該中間位置之該x值， 其中若該中間位置之該y值大於或等於該下界y值且若該中間位置之該y值小於或等於該上界y值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該y值等於該中間位置之該y值。
  5. 如請求項3或4之視訊解碼器， 其中，若該繞回參數具有一第一值，且若該中間位置之該y值小於該下界y值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該y值等於該下界y值， 其中，若該繞回參數具有該第一值，且若該中間位置之該y值大於該上界y值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該y值等於該上界y值，且 其中，若該繞回參數具有一第二值，且若該中間位置之該y值小於該下界y值或大於該上界y值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該y值大於該下界y值且小於該上界y值。
  6. 如請求項5之視訊解碼器， 其中，若該繞回參數具有一第三值，且若該中間位置之該y值小於該下界y值或大於該上界y值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該y值大於該下界y值且小於該上界y值 其中，若該繞回參數具有該第二值，且若該中間位置之該x值小於該下界x值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該x值等於該下界x值， 其中，若該繞回參數具有該第二值，且若該中間位置之該x值大於該上界x值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該x值等於該上界x值，且 其中，若該繞回參數具有該第一值或該第三值，且若該中間位置之該x值小於該下界x值或大於該上界x值，則該資料解碼器經組配以判定該參考位置，使得該參考位置之該x值大於該下界x值且小於該上界x值。
  7. 如請求項6之視訊解碼器， 其中，若該繞回參數具有該第一值或該第三值，且若該中間位置之該x值小於該下界x值或大於該上界x值，則該資料解碼器經組配以取決於一第一偏移參數而判定該參考位置，且 其中，若該繞回參數具有該第二值或該第三值，且若該中間位置之該y值小於該下界y值或大於該上界y值，則該資料解碼器經組配以取決於一第二偏移參數而判定該參考位置。
  8. 如請求項7之視訊解碼器， 其中該資料解碼器經組配以基於以下判定該參考位置： If ( sps_ref_wraparound_idc == 0 ) { xInti = ClipH( sps_ref_wraparound_offset, picW, ( xIntL + i − 3 ) ) yInti = Clip3( 0, picH − 1, yIntL + i − 3 ) } else if ( sps_wraparound_idc == 1 ) { xInti = Clip3( 0, picW − 1, xIntL + i − 3 ) yInti = ClipH( sps_ref_wraparound_offset_second, picH, ( yIntL + i − 3 ) ) } else if ( sps_wraparound_idc == 2 ) { xInti = ClipH( sps_ref_wraparound_offset, picW, ( xIntL + i − 3 ) ) yInti = ClipH( sps_ref_wraparound_offset_second, picH, ( yIntL + i − 3 ) ) } 其中sps_ref_wraparound_idc指出該繞回參數，其中0為該第一值，1為該第二值，且2為該繞回參數之該第三值， 其中xInti 指出該參考位置之該x值，其中yInti 指出該參考位置之該y值， 其中xIntL 指出該中間位置之該x值，其中yIntL 指出該中間位置之該y值， 其中picW - 1指出該上界x值，且0指出該下界x值， 其中picH -1指出該上界y值，且0指出該下界y值， 其中sps_ref_wraparound_offset指出該第一偏移參數， 其中sps_ref_wraparound_offset_second指出該第二偏移參數， 其中 ClipH ( o, W, x ) is defined as mod(x,o); for x＜0 mod((x-W),o)+W-o; for x ＞ W-1, or X; otherwise 其中mod為一模數運算。
  9. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中該資料編碼器經組配以產生包含一運動向量之一編碼及一繞回參數之一值的一編碼之該經編碼視訊信號。
  10. 如請求項9之視訊編碼器， 其中該資料解碼器經組配以產生包含一第一偏移參數及/或一第二偏移參數之一編碼的該經編碼視訊信號，使得該解碼器能夠取決於該第一偏移參數及/或該第二偏移參數而判定該當前圖像內的該參考樣本之該參考位置。
  11. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該解碼方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該重建構該等多個圖像包含解碼在該經編碼視訊信號內編碼的一繞回參數之一值， 其中重建構該等多個圖像包含取決於該等多個圖像之一當前圖像而判定該等多個圖像中的一後續圖像之一重建構樣本，其中該方法包含判定該當前圖像內的一參考樣本之一參考位置，其中判定該參考樣本之該參考位置係取決於該重建構樣本之一位置、取決於一運動向量且取決於該繞回參數之該值而進行，且 其中判定該後續圖像之該重建構樣本係取決於該參考樣本位於該參考位置而進行。
  12. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中產生該經編碼視訊信號經進行而使得該經編碼視訊信號包含一運動向量之一編碼及一繞回參數之一值的一編碼。
  13. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項11或12之方法。
  14. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中該經編碼視訊信號包含一運動向量之一編碼及一繞回參數之一值的一編碼，使得一解碼器能夠取決於該等多個圖像中的一後續圖像內的一重建構樣本之一位置、取決於該運動向量且取決於該繞回參數之該值而判定該等多個圖像中的一當前圖像內的一參考樣本之一參考位置。
  15. 一種系統，其包含： 如請求項9或10之該視訊編碼器，及 如請求項1至8中任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
  16. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中該資料編碼器經組配以藉由取決於一所允許最大參考圖像記憶體頻寬、或取決於圍繞所得參考子區塊之一所允許最大限界框、或取決於一參考子區塊擴展之一限制而編碼限制資訊來產生該經編碼視訊信號。
  17. 如請求項16之視訊編碼器， 其中該資料編碼器經組配以藉由界定所需參考記憶體存取相對於通常平移預測之一最大增大來編碼該限制資訊，其包含用於一最大頻寬額外負擔之一限制的一指示。
  18. 如請求項16或17之視訊編碼器， 其中該資料編碼器經組配以編碼該限制資訊，其包含圍繞子區塊參考區塊的一限界框之一大小之一臨限值。
  19. 如請求項18之視訊編碼器， 其中該臨限值取決於一圖像解析度及/或一最大允許頻寬。
  20. 如請求項16至19中任一項之視訊編碼器， 其中該資料編碼器經組配以編碼該限制資訊，其包含對一參考子區塊擴展之一限制。
  21. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以取決於一所允許最大記憶體頻寬、或取決於圍繞所得參考子區塊之一所允許最大限界框、或取決於一參考子區塊擴展之一限制而自該經編碼視訊信號解碼限制資訊，且 其中該資料解碼器經組配以取決於該限制資訊而重建構該視訊之該等多個圖像。
  22. 如請求項21之視訊解碼器， 其中該資料解碼器經組配以藉由界定所需參考記憶體存取相對於通常平移預測之一最大增大來由該經編碼視訊信號解碼該限制資訊，其包含用於一最大頻寬額外負擔之一限制的一指示。
  23. 如請求項21或22之視訊解碼器， 其中該資料解碼器經組配以自該經編碼視訊信號解碼該限制資訊，其包含圍繞子區塊參考區塊的一限界框之一大小之一臨限值。
  24. 如請求項23之視訊解碼器， 其中該臨限值取決於一圖像解析度及/或一最大允許頻寬。
  25. 如請求項21至24中任一項之視訊解碼器， 其中該資料解碼器經組配以自該經編碼視訊信號解碼該限制資訊，其包含取決於一經寫碼圖像解析度或取決於一位階限制的對一參考子區塊擴展之一限制。
  26. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中產生該經編碼視訊信號包含取決於一所允許最大記憶體頻寬、或取決於圍繞所得參考子區塊之一所允許最大限界框、或取決於一參考子區塊擴展之一限制而編碼限制資訊。
  27. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該方法進一步包含取決於一所允許最大記憶體頻寬、或取決於圍繞所得參考子區塊之一所允許最大限界框、或取決於一參考子區塊擴展之一限制而自該經編碼視訊信號解碼限制資訊，且 其中重建構該視訊之該等多個圖像係取決於該限制資訊而進行。
  28. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項26或27之方法。
  29. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中該經編碼視訊信號包含取決於一所允許最大記憶體頻寬、或取決於圍繞所得參考子區塊之一所允許最大限界框、或取決於一參考子區塊擴展之一限制的限制資訊。
  30. 一種系統，其包含： 如請求項16或20之該視訊編碼器，及 如請求項21至25中任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
  31. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以解碼該經編碼視訊信號內編碼的色度格式資訊， 其中該資料解碼器經組配以取決於該色度格式資訊而自多個明度子區塊中的一或多者之運動資訊判定多個色度子區塊中之一色度子區塊的運動資訊， 其中該資料解碼器經組配以取決於該明度子區塊中的一或多者之該運動資訊且取決於該色度子區塊之該運動資訊來重建構該等多個圖像。
  32. 如請求項31之視訊解碼器， 其中該資料解碼器經組配以將該色度子區塊之一運動向量判定為該色度子區塊之該運動資訊， 其中，若該色度格式資訊指出一第一格式，則該資料解碼器經組配以取決於該等明度子區塊中的恰好一者之一運動向量來判定該色度子區塊之該運動向量，且 其中，若該色度格式資訊指出不同於該第一格式之一格式，則該資料解碼器經組配以取決於該等明度子區塊中的至少兩者之每一運動向量來判定該色度子區塊之該運動向量。
  33. 如請求項32之視訊解碼器， 其中，若該色度格式資訊指出不同於該第一格式之一第二格式，則該資料解碼器經組配以取決於該等明度子區塊中之恰好兩者之每一運動向量來判定該色度子區塊之該運動向量。
  34. 如請求項33之視訊解碼器， 其中，若該色度格式資訊指出該第二格式，則該資料解碼器經組配以藉由對該等明度子區塊中之該等恰好兩者的該等運動向量求平均，或藉由對稱地捨入該等明度子區塊中之該等恰好兩者的該等運動向量來判定該色度子區塊之該運動向量。
  35. 如請求項33或34之視訊解碼器， 其中一明度區塊包含該等明度子區塊中之至少四者，其中該明度區塊之兩個或更多個列中之每一列包含該等明度子區塊中之該等至少四者中的至少兩者，其中該明度區塊之兩個或更多個行中之每一行包含該等明度子區塊中之該等至少四者中的兩者或更多者， 其中，若該色度格式資訊指出該第二格式，則該資料解碼器經組配以取決於該等明度子區塊中之該等至少四者中之該等恰好兩者來判定該色度子區塊之該運動向量。
  36. 如請求項35之視訊解碼器， 其中該等兩個或更多個列中之一第一列包含一左上明度子區塊，其中該等兩個或更多個列中之一第二列包含一右下明度子區塊，其中該左上明度子區塊與該右下明度子區塊相對於彼此對角地配置，且 其中，若該色度格式資訊指出該第二格式，則該資料解碼器經組配以取決於該左上明度子區塊之該運動向量且取決於該右下明度子區塊之該運動向量來判定該色度子區塊之該運動向量。
  37. 如請求項35或36之視訊解碼器， 其中，若該色度格式資訊指出不同於該第一格式且不同於該第二格式之一第三格式，則該資料解碼器經組配以取決於來自該明度區塊之該等兩個或更多個列中之恰好一個列的該等明度子區塊中之恰好兩者的每一運動向量來判定該色度子區塊之該運動向量；或該資料解碼器經組配以取決於來自該明度區塊之該等兩個或更多個行中之恰好一個行的該等明度子區塊中之恰好兩者的每一運動向量來判定該色度子區塊之該運動向量。
  38. 如請求項35至27中任一項之視訊解碼器， 其中，若該色度格式資訊指出該第三格式，則該資料解碼器經組配以取決於來自該明度區塊之該等兩個或更多個列中之恰好一個列的該等明度子區塊中之恰好兩者的每一運動向量來判定該色度子區塊之該運動向量；且 其中，若該色度格式資訊指出不同於該第三格式且不同於該第一格式且不同於該第一格式之一第四格式，則該資料解碼器經組配以取決於來自該明度區塊之該等兩個或更多個行中之恰好一個行的該等明度子區塊中之恰好兩者的每一運動向量來判定該色度子區塊之該運動向量。
  39. 如請求項38之視訊解碼器， 其中該資料解碼器經組配以基於以下來判定該色度子區塊之該運動資訊： mvAvgLX = ( mvLX[ ( xSbIdx ＞＞ SubWidthC ＜＜ SubWidthC) ] [ (ySbIdx＞＞ SubHeightC ＜＜ SubHeightC) ] + mvLX[ ( xSbIdx ＞＞ SubWidthC ＜＜ SubWidthC ) + SubWidthC  ] [ (ySbIdx＞＞ SubHeightC ＜＜ SubHeightC) + SubHeightC ] ) 其中mvAvgLX為該色度子區塊之該運動向量， 其中mvLX[][]為該等明度子區塊中的一者之該運動向量， 其中xSbIdx為該等明度子區塊中的該一者之一x索引， 其中ySbIdx為該等明度子區塊中的一者之一y索引， 其中mvAvgLX[0]係根據以下界定 mvAvgLX[ 0 ] = ( mvAvgLX[ 0 ] ＞= 0 ? ( mvAvgLX[ 0 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 0 ] + 1 ) ＞＞1 ) ) 其中mvAvgLX[1]係根據以下界定 mvAvgLX[ 1 ] = ( mvAvgLX[ 1 ] ＞= 0 ? ( mvAvgLX[ 1 ] + 1) ＞＞ 1 : − ( (− mvAvgLX[ 1 ] + 1 ) ＞＞ 1 ) ). 其中SubWidthC及SubHeightC係根據以下界定： 色度格式 SubWidthC SubHeightC 4:2:0 1 1 4:2:2 1 0 4:4:4 0 0
    。
  40. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中該資料編碼器經組配以產生該經編碼視訊信號，使得該經編碼視訊信號包含色度格式資訊之一編碼及多個明度子區塊中的一或多者之運動資訊之一編碼。
  41. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中重建構該等多個圖像包含解碼該經編碼視訊信號內編碼的色度格式資訊， 其中重建構該等多個圖像包含取決於該色度格式資訊而自多個明度子區塊中的一或多者之運動資訊判定多個色度子區塊之一色度子區塊的運動資訊， 其中重建構該等多個圖像係取決於該等明度子區塊中的一或多者之該運動資訊且取決於該色度子區塊之該運動資訊而進行。
  42. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中產生該經編碼視訊信號經進行而使得該經編碼視訊信號包含色度格式資訊之一編碼及多個明度子區塊中的一或多者之運動資訊之一編碼。
  43. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項41或42之方法。
  44. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中該經編碼視訊信號進一步包含色度格式資訊之一編碼及多個明度子區塊中的一或多者之運動資訊之一編碼。
  45. 一種系統，其包含： 如請求項40之該視訊編碼器，及 如請求項31至39任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
  46. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以取決於該經編碼圖像資料之寫碼內容之一解析度及/或取決於該經編碼圖像資料之一區塊大小而將來自兩個或更多個內插濾波器之一內插濾波器選擇為一所選內插濾波器，且 其中該資料解碼器經組配以使用該所選內插濾波器重建構該等多個圖像。
  47. 如請求項46之視訊解碼器， 其中該等兩個或更多個內插濾波器為用於子像素內插之兩個或更多個抽頭內插濾波器。
  48. 如請求項46或47之視訊解碼器， 其中該等兩個或更多個內插濾波器包含一雙線性內插濾波器、一4抽頭內插濾波器、一6抽頭內插濾波器及一8抽頭內插濾波器。
  49. 如請求項46至48中任一項之視訊解碼器， 其中該等兩個或更多個內插濾波器包含適合於色度子像素內插且適合於明度子像素內插之一色度子像素內插濾波器。
  50. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中該資料編碼器經組配以取決於該經編碼圖像資料之寫碼內容之一解析度及/或取決於該經編碼圖像資料之一區塊大小而將來自兩個或更多個內插濾波器之一內插濾波器選擇為一所選內插濾波器，且其中該資料編碼器經組配以產生該經編碼視訊信號，使得該經編碼視訊信號包含指出該所選內插濾波器之一指示的一編碼，或 其中該資料編碼器經組配以產生該經編碼視訊信號，使得該經編碼視訊信號編碼指出該等兩個或更多個內插濾波器之一指示。
  51. 如請求項50之視訊編碼器， 其中該等兩個或更多個內插濾波器為用於子像素內插之兩個或更多個抽頭內插濾波器。
  52. 如請求項50或51之視訊編碼器， 其中該等兩個或更多個內插濾波器包含一雙線性內插濾波器、一4抽頭內插濾波器、一6抽頭內插濾波器及一8抽頭內插濾波器。
  53. 如請求項50至52中任一項之視訊編碼器， 其中該等兩個或更多個內插濾波器包含適合於色度子像素內插且適合於明度子像素內插之一色度子像素內插濾波器。
  54. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中重建構該等多個圖像包含取決於該經編碼圖像資料之寫碼內容之一解析度及/或取決於該經編碼圖像資料之一區塊大小而將來自兩個或更多個內插濾波器之一內插濾波器選擇為一所選內插濾波器，且 其中重建構該等多個圖像係使用該所選內插濾波器而進行。
  55. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中產生該經編碼視訊信號包含取決於該經編碼圖像資料之寫碼內容之一解析度及/或取決於該經編碼圖像資料之一區塊大小而將來自兩個或更多個內插濾波器之一內插濾波器選擇為一所選內插濾波器，且其中產生該經編碼視訊信號使得該經編碼視訊信號包含指出該所選內插濾波器之一指示的一編碼，或 其中產生該經編碼視訊信號經進行而使得該經編碼視訊信號包含指出該等兩個或更多個內插濾波器之一指示的一編碼。
  56. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項54或55之方法。
  57. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中該經編碼視訊信號包含指出取決於該經編碼圖像資料之寫碼內容之一解析度及/或取決於該經編碼圖像資料之一區塊大小的一所選內插濾波器之一指示，或 其中該經編碼視訊信號包含指出兩個或更多個內插濾波器之一指示。
  58. 一種系統，其包含： 如請求項50至53中任一項之該視訊編碼器，及 如請求項46至49中任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
  59. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中一視訊會話包含多個經寫碼視訊序列，其中多個視訊輪廓中之一CVS輪廓指派至該等多個經寫碼視訊序列中之每一經寫碼視訊序列，其中該經寫碼視訊序列之該CVS輪廓界定解碼該經寫碼視訊序列所需的多個工具中之一或多個工具，其中該等多個視訊輪廓中之每一者界定解碼該等多個經寫碼視訊序列中的至少一者所需的至少一個工具， 其中該資料編碼器經組配以取決於該視訊會話之該等多個經寫碼視訊序列之該CVS輪廓來判定用於該視訊會話之一會話輪廓，其中該會話輪廓界定解碼該視訊會話之該等多個經寫碼視訊序列所需的該等多個工具中之至少一個工具， 其中該資料編碼器經組配以產生該經編碼視訊信號，使得該經編碼視訊信號包含指出該會話輪廓之一指示的一編碼， 其中該資料編碼器經組配以自該等多個視訊輪廓判定該會話輪廓，使得該會話輪廓包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具。
  60. 如請求項59之視訊編碼器， 其中該資料編碼器經組配以判定該會話輪廓，使得若該等多個視訊輪廓中不存在包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具的視訊輪廓，則該會話輪廓為該等多個視訊輪廓中的至少兩者之一聯合。
  61. 如請求項59之視訊編碼器， 其中若該等多個視訊輪廓中存在包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具的一視訊輪廓，則該資料編碼器經組配以自該等多個視訊輪廓判定恰好一個視訊輪廓作為該會話輪廓，其中該視訊輪廓為該恰好一個會話輪廓。
  62. 如請求項59之視訊編碼器， 其中該資料編碼器經組配以判定該會話輪廓，使得若該等多個視訊輪廓中不存在包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具的視訊輪廓，則該會話輪廓為該等多個視訊輪廓中的至少兩者之一交叉點。
  63. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以自該經編碼視訊信號解碼用於包含多個經寫碼視訊序列之一視訊會話的一會話輪廓，其中多個視訊輪廓中之每一者界定解碼該等多個經寫碼視訊序列中的至少一者所需的多個工具中之一或多個工具，其中該會話輪廓界定解碼該視訊會話之該等多個經寫碼視訊序列所需的該等多個工具中之至少一個工具， 其中該資料解碼器經組配以取決於該會話輪廓來重建構該視訊之該等多個圖像。
  64. 如請求項63之視訊解碼器， 其中該會話輪廓為該等多個視訊輪廓中的至少兩者之一聯合。
  65. 如請求項63之視訊解碼器， 其中若該等多個視訊輪廓中存在包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具的一視訊輪廓，則該資料解碼器經組配以自該等多個視訊輪廓判定恰好一個視訊輪廓作為該會話輪廓。
  66. 如請求項63之視訊解碼器， 其中該會話輪廓為該等多個視訊輪廓中的至少兩者之一交叉點。
  67. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中一視訊會話包含多個經寫碼視訊序列，其中多個視訊輪廓中之一CVS輪廓指派至該等多個經寫碼視訊序列中之每一經寫碼視訊序列，其中該經寫碼視訊序列之該CVS輪廓界定解碼該經寫碼視訊序列所需的多個工具中之一或多個工具，其中該等多個視訊輪廓中之每一者界定解碼該等多個經寫碼視訊序列中的至少一者所需的至少一個工具， 其中該方法包含取決於該視訊會話之該等多個經寫碼視訊序列之該CVS輪廓來判定用於該視訊會話之一會話輪廓，其中該會話輪廓界定解碼該視訊會話之該等多個經寫碼視訊序列所需的該等多個工具中之至少一個工具， 其中產生該經編碼視訊信號經進行而使得該經編碼視訊信號包含指出該會話輪廓之一指出的一編碼， 其中自該等多個視訊輪廓判定該會話輪廓經進行而使得該會話輪廓包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具。
  68. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該方法包含自該經編碼視訊信號解碼用於包含多個經寫碼視訊序列之一視訊會話的一會話輪廓，其中多個視訊輪廓中之每一者界定解碼該等多個經寫碼視訊序列中的至少一者所需的多個工具中之一或多個工具，其中該會話輪廓界定解碼該視訊會話之該等多個經寫碼視訊序列所需的該等多個工具中之至少一個工具， 其中重建構該視訊之該等多個圖像係取決於該會話輪廓而進行。
  69. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項67或68之方法。
  70. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中一視訊會話包含多個經寫碼視訊序列，其中多個視訊輪廓中之一CVS輪廓指派至該等多個經寫碼視訊序列中之每一經寫碼視訊序列，其中該經寫碼視訊序列之該CVS輪廓界定解碼該經寫碼視訊序列所需的多個工具中之一或多個工具，其中該等多個視訊輪廓中之每一者界定解碼該等多個經寫碼視訊序列中的至少一者所需的至少一個工具， 其中用於該視訊會話之該會話輪廓取決於該視訊會話之該等多個經寫碼視訊序列之該CVS輪廓， 其中該經編碼視訊信號包含指出該會話輪廓之一指出的一編碼， 其中該會話輪廓包含解碼該視訊會話之所有經寫碼視訊序列所需的該等多個工具中之所有工具。
  71. 一種系統，其包含： 如請求項59至62中任一項之該視訊編碼器，及 如請求項63至66中任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
  72. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的視訊編碼器，其中該等多個圖像中之每一者包含原始圖像資料，其中該視訊編碼器包含： 一資料編碼器，其經組配以用於產生包含經編碼圖像資料之該經編碼視訊信號，其中該資料編碼器經組配以將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 一輸出介面，其經組配以用於輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中該資料編碼器經組配以藉由編碼一序列參數集且藉由編碼一補充增強資訊訊息來產生該經編碼視訊信號，其中該序列參數集係關於該等多個圖像中的兩者或更多者且包含多個語法元素中之一或多個語法元素之一第一群組，且其中該補充增強資訊訊息係關於該等多個圖像中的恰好一者且包含該等多個語法元素中之一或多個語法元素之一第二群組， 其中該資料編碼器經組配以產生該序列參數集及該補充增強資訊訊息，使得該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個語法元素，且使得該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個語法元素的長度資訊。
  73. 如請求項72之視訊編碼器， 其中該資料編碼器經組配以產生該序列參數集及該補充增強資訊訊息，使得該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個其他語法元素，且使得該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個其他語法元素的存在資訊。
  74. 如請求項72或73之視訊編碼器， 其中該資料編碼器經組配以產生該序列參數集，使得該序列參數集包含該等多個語法元素中包含會話協商資訊及/或能力協商資訊之至少一個第一語法元素， 其中該資料編碼器經組配以產生該補充增強資訊訊息，使得該補充增強資訊訊息不包含包含該會話協商資訊及/或該能力協商資訊之該至少一個第一語法元素， 其中該資料編碼器經組配以產生該補充增強資訊訊息，使得該補充增強資訊訊息包含該等多個語法元素中不包含該會話協商資訊及/或該能力協商資訊之至少一個第二語法元素，且 其中該資料編碼器經組配以產生該序列參數集，使得該序列參數集不包含不包含會話協商資訊及/或能力協商資訊之該至少一個第一語法元素。
  75. 如請求項72至74中任一項之視訊編碼器， 其中該資料編碼器經組配以產生該序列參數集，使得該序列參數集包含該等多個語法元素中包含會話協商資訊及/或能力協商資訊之所有語法元素， 其中該資料編碼器經組配以產生該補充增強資訊訊息，使得該補充增強資訊訊息不包含該等多個語法元素中包含該會話協商資訊及/或該能力協商資訊之該任一語法元素， 其中該資料編碼器經組配以產生該補充增強資訊訊息，使得該補充增強資訊訊息包含該等多個語法元素中不包含該會話協商資訊及/或該能力協商資訊之所有語法元素，且 其中該資料編碼器經組配以產生該序列參數集，使得該序列參數集不包含該等多個語法元素中不包含會話協商資訊及/或能力協商資訊之任一語法元素。
  76. 如請求項72至75中任一項之視訊編碼器， 其中該補充增強資訊訊息為一緩衝週期補充增強資訊訊息，或為一時序補充增強資訊訊息，或為一解碼單元補充增強資訊訊息。
  77. 如請求項72至76中任一項之視訊編碼器， 其中，對於該等多個語法元素中之至少一個語法元素，該資料編碼器經組配以產生該序列參數集及該補充增強資訊訊息，使得該序列參數集包含該至少一個語法元素，且使得該補充增強資訊訊息亦包含該語法元素，且 其中該資料編碼器經組配以產生該序列參數集及該補充增強資訊訊息，使得對於存在於該序列參數集且亦存在於該補充增強資訊訊息中的該等多個語法元素中之每一者，該語法元素之一值在該序列參數集與在該補充增強資訊訊息中相等。
  78. 如請求項72至77中任一項之視訊編碼器， 其中該資料編碼器經組配以產生該序列參數集及該補充增強資訊訊息，使得若一串接旗標不設定至1，則一子圖像時序粒度在該序列參數集與在該補充增強資訊訊息中相等。
  79. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之視訊解碼器，其中該視訊解碼器包含： 一輸入介面，其經組配以用於接收該經編碼視訊信號，及 一資料解碼器，其經組配以用於藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該資料解碼器經組配以自該經編碼視訊信號解碼一序列參數集及一補充增強資訊訊息，其中該序列參數集係關於該等多個圖像中的兩者或更多者且包含多個語法元素中之一或多個語法元素之一第一群組，且其中該補充增強資訊訊息係關於該等多個圖像中的恰好一者且包含該等多個語法元素中之一或多個語法元素之一第二群組，其中該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個語法元素，且其中該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個語法元素的長度資訊， 其中該資料解碼器經組配以取決於該序列參數集且取決於該補充增強資訊訊息來重建構該視訊之該等多個圖像。
  80. 如請求項79之視訊解碼器， 其中該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個其他語法元素，且其中該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一種其他語法元素的存在資訊。
  81. 如請求項79或80之視訊解碼器， 其中該序列參數集包含該等多個語法元素中包含會話協商資訊及/或能力協商資訊之至少一個第一語法元素， 其中該補充增強資訊訊息不包含包含該會話協商資訊及/或該能力協商資訊之該至少一個第一語法元素， 其中該補充增強資訊訊息包含該等多個語法元素中不包含該會話協商資訊及/或該能力協商資訊之至少一個第二語法元素，且 其中該序列參數集不包含不包含會話協商資訊及/或能力協商資訊之該至少一個第一語法元素。
  82. 如請求項79至81中任一項之視訊解碼器， 其中該序列參數集包含該等多個語法元素中包含會話協商資訊及/或能力協商資訊之所有語法元素， 其中該補充增強資訊訊息不包含該等多個語法元素中包含該會話協商資訊及/或該能力協商資訊之該任一語法元素， 其中該補充增強資訊訊息包含該等多個語法元素中不包含該會話協商資訊及/或該能力協商資訊之所有語法元素，且 其中該序列參數集不包含該等多個語法元素中不包含會話協商資訊及/或能力協商資訊之任一語法元素。
  83. 如請求項79至82中任一項之視訊解碼器， 其中該補充增強資訊訊息為一緩衝週期補充增強資訊訊息，或為一時序補充增強資訊訊息，或為一解碼單元補充增強資訊訊息。
  84. 如請求項79至83中任一項之視訊解碼器， 其中，對於該等多個語法元素中之至少一個語法元素，該序列參數集包含該至少一個語法元素，且使得該補充增強資訊訊息亦包含該語法元素，且 其中，對於存在於該序列參數集且亦存在於該補充增強資訊訊息中的該等多個語法元素中之每一者，該語法元素之一值在該序列參數集中與在該補充增強資訊訊息中相等。
  85. 如請求項79至84中任一項之視訊解碼器， 其中若一串接旗標不設定至1，則一子圖像時序粒度在該序列參數集與在該補充增強資訊訊息中相等。
  86. 一種用於藉由產生經編碼視訊信號而編碼視訊之多個圖像的方法，其中該等多個圖像中之每一者包含原始圖像資料，其中該方法包含： 產生包含經編碼圖像資料之該經編碼視訊信號，其中產生該經編碼視訊信號包含將該視訊之該等多個圖像編碼為該經編碼圖像資料，及 輸出該等多個圖像中之每一者的該經編碼圖像資料， 其中產生該經編碼視訊信號係藉由編碼一序列參數集且藉由編碼一補充增強資訊訊息來進行，其中該序列參數集係關於該等多個圖像中的兩者或更多者且包含多個語法元素中之一或多個語法元素之一第一群組，且其中該補充增強資訊訊息係關於該等多個圖像中的恰好一者且包含該等多個語法元素中之一或多個語法元素之一第二群組， 其中該方法包含產生該序列參數集及該補充增強資訊訊息，使得該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個語法元素，且使得該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個語法元素的長度資訊。
  87. 一種用於解碼包含經編碼圖像資料之經編碼視訊信號以重建構視訊之多個圖像之方法，其中該方法包含： 接收該經編碼視訊信號，及 藉由解碼該經編碼圖像資料來重建構該視訊之該等多個圖像， 其中該方法包含自該經編碼視訊信號解碼一序列參數集及一補充增強資訊訊息，其中該序列參數集係關於該等多個圖像中的兩者或更多者且包含多個語法元素中之一或多個語法元素之一第一群組，且其中該補充增強資訊訊息係關於該等多個圖像中的恰好一者且包含該等多個語法元素中之一或多個語法元素之一第二群組，其中該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個語法元素，且其中該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個語法元素的長度資訊， 其中重建構該視訊之該等多個圖像係取決於該序列參數集且取決於該補充增強資訊訊息而進行。
  88. 一種電腦程式，其用於在執行於一電腦或信號處理器上時實施如請求項86或87之方法。
  89. 一種編碼圖像之經編碼視訊信號，其中該經編碼視訊信號包含編碼該圖像之經編碼圖像資料， 其中該經編碼視訊信號包含一序列參數集之一編碼及一補充增強資訊訊息之一編碼，其中該序列參數集係關於該等多個圖像中的兩者或更多者且包含多個語法元素中之一或多個語法元素之一第一群組，且其中該補充增強資訊訊息係關於該等多個圖像中的恰好一者且包含該等多個語法元素中之一或多個語法元素之一第二群組， 其中該序列參數集不包含該補充增強資訊訊息之該第二群組語法元素中之至少一個語法元素，且其中該序列參數集不包含用於該補充增強資訊訊息之該第二群組語法元素中之該至少一個語法元素的長度資訊。
  90. 一種系統，其包含： 如請求項72至78中任一項之該視訊編碼器，及 如請求項79至85中任一項之該視訊解碼器， 其中該視訊編碼器經組配以產生該經編碼視訊信號，且 其中該視訊解碼器經組配以解碼該經編碼視訊信號以重建構該視訊之該圖像。
TW109107864A 2019-03-11 2020-03-10 具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法 TWI761783B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19162052.5 2019-03-11
EP19162052 2019-03-11

Publications (2)

Publication Number Publication Date
TW202042554A true TW202042554A (zh) 2020-11-16
TWI761783B TWI761783B (zh) 2022-04-21

Family

ID=65766854

Family Applications (2)

Application Number Title Priority Date Filing Date
TW111110144A TWI826969B (zh) 2019-03-11 2020-03-10 具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法
TW109107864A TWI761783B (zh) 2019-03-11 2020-03-10 具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW111110144A TWI826969B (zh) 2019-03-11 2020-03-10 具輪廓與位階相依寫碼選項之編碼器與解碼器、編碼方法及解碼方法

Country Status (9)

Country Link
US (1) US20210409718A1 (zh)
EP (1) EP3939271A1 (zh)
JP (2) JP7379518B2 (zh)
KR (1) KR20210152475A (zh)
CN (1) CN113812151A (zh)
BR (1) BR112021017841A2 (zh)
MX (1) MX2021010917A (zh)
TW (2) TWI826969B (zh)
WO (1) WO2020182815A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4030764A4 (en) * 2019-09-11 2022-11-23 Panasonic Intellectual Property Corporation of America CODING DEVICE, DECODING DEVICE, CODING METHOD AND DECODING METHOD
CN114731441A (zh) * 2019-09-11 2022-07-08 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3797209B2 (ja) * 2001-11-30 2006-07-12 ソニー株式会社 画像情報符号化方法及び装置、画像情報復号方法及び装置、並びにプログラム
MX2009011217A (es) * 2007-04-18 2009-12-07 Thomson Licensing Sistemas de codificacion.
JP5234368B2 (ja) 2009-09-30 2013-07-10 ソニー株式会社 画像処理装置および方法
CN107071461B (zh) * 2010-12-14 2019-11-12 M&K控股株式会社 用于解码运动画面的设备
KR101675707B1 (ko) * 2011-06-23 2016-11-11 가부시키가이샤 제이브이씨 켄우드 화상 인코딩 장치, 화상 인코딩 방법 및 화상 인코딩 프로그램, 및 화상 디코딩 장치, 화상 디코딩 방법 및 화상 디코딩 프로그램
KR101641863B1 (ko) * 2011-10-19 2016-07-22 주식회사 케이티 영상 부호화/복호화 방법 및 그 장치
US8934726B2 (en) * 2011-12-19 2015-01-13 Dolby Laboratories Licensing Corporation Video codecs with integrated gamut management
US9716892B2 (en) 2012-07-02 2017-07-25 Qualcomm Incorporated Video parameter set including session negotiation information
US9161039B2 (en) * 2012-09-24 2015-10-13 Qualcomm Incorporated Bitstream properties in video coding
US9749627B2 (en) * 2013-04-08 2017-08-29 Microsoft Technology Licensing, Llc Control data for motion-constrained tile set
WO2015069734A1 (en) * 2013-11-05 2015-05-14 Arris Enterprises, Inc. Bit depth variable for high precision data in weighted prediction syntax and semantics
US10412387B2 (en) * 2014-08-22 2019-09-10 Qualcomm Incorporated Unified intra-block copy and inter-prediction
US9918105B2 (en) * 2014-10-07 2018-03-13 Qualcomm Incorporated Intra BC and inter unification
US9854237B2 (en) * 2014-10-14 2017-12-26 Qualcomm Incorporated AMVP and merge candidate list derivation for intra BC and inter prediction unification
JP6559337B2 (ja) * 2015-09-23 2019-08-14 ノキア テクノロジーズ オーユー ３６０度パノラマビデオの符号化方法、符号化装置、及びコンピュータプログラム
KR102347034B1 (ko) 2015-09-23 2022-01-04 애리스 엔터프라이지즈 엘엘씨 전송 스트림들 내의 하이 다이내믹 레인지 및 와이드 컬러 가무트 콘텐츠의 시그널링
EP3371974B1 (en) * 2015-11-06 2024-05-01 Microsoft Technology Licensing, LLC Flexible reference picture management for video encoding
WO2017143467A1 (en) * 2016-02-22 2017-08-31 Mediatek Singapore Pte. Ltd. Localized luma mode prediction inheritance for chroma coding
CN117560504A (zh) * 2017-03-17 2024-02-13 Vid拓展公司 基于几何图形填充的用于360度视频的预测编码
EP3843403A4 (en) * 2018-08-24 2022-06-08 Samsung Electronics Co., Ltd. IMAGE CODING METHOD AND APPARATUS, AND IMAGE DECODING METHOD AND APPARATUS
JP7317965B2 (ja) * 2018-12-07 2023-07-31 北京字節跳動網絡技術有限公司 コンテキストベースのイントラ予測
PT3884675T (pt) 2018-12-21 2024-02-02 Beijing Dajia Internet Information Tech Co Ltd Métodos e aparelhos de codificação de vídeo para derivação de vetores de movimento afins para componentes de croma
CN113273205A (zh) * 2018-12-21 2021-08-17 北京字节跳动网络技术有限公司 使用更高比特深度精度的运动矢量推导
US11632563B2 (en) * 2019-02-22 2023-04-18 Qualcomm Incorporated Motion vector derivation in video coding
AU2020226574A1 (en) 2019-02-22 2021-09-30 Huawei Technologies Co., Ltd. Method and apparatus for affine based inter prediction of chroma subblocks
CA3132485A1 (en) * 2019-03-12 2020-09-17 Tencent America LLC Method and apparatus for video encoding or decoding

Also Published As

Publication number Publication date
TWI761783B (zh) 2022-04-21
US20210409718A1 (en) 2021-12-30
CN113812151A (zh) 2021-12-17
JP2022524110A (ja) 2022-04-27
BR112021017841A2 (pt) 2021-11-30
KR20210152475A (ko) 2021-12-15
EP3939271A1 (en) 2022-01-19
TW202301875A (zh) 2023-01-01
WO2020182815A1 (en) 2020-09-17
TWI826969B (zh) 2023-12-21
MX2021010917A (es) 2021-11-12
JP7379518B2 (ja) 2023-11-14
JP2024001318A (ja) 2024-01-09

Similar Documents

Publication Publication Date Title
US10523953B2 (en) Frame packing and unpacking higher-resolution chroma sampling formats
EP3205092B1 (en) Intra block copy prediction restrictions for parallel processing
TWI693821B (zh) 用於線性模型預測模式之降低取樣處理
RU2648592C2 (ru) Управляющие данные для набора мозаичных фрагментов с ограничениями движения
TWI606718B (zh) 規定視覺動態範圍編碼操作及參數
EP2813079B1 (en) Method and apparatus of inter-layer prediction for scalable video coding
US9756350B2 (en) Inter-layer motion vector scaling for scalable video coding
JP2010166133A (ja) 動画像符号化装置
JP2024001318A (ja) プロファイルおよびレベル依存コーディングオプションによる符号化器および復号器、符号化方法および復号方法
US11363301B2 (en) Conditionally parsed extension syntax for HEVC extension processing
US20140269920A1 (en) Motion Estimation Guidance in Transcoding Operation
KR20240050414A (ko) 비디오 처리를 위한 방법, 기기 및 매체
TWI789632B (zh) 用於參考圖像重新取樣擴展之編碼器與解碼器、編碼方法及解碼方法
KR20080055685A (ko) 비디오 신호의 디코딩 방법 및 장치
RU2773642C1 (ru) Сигнализация для передискретизации опорного изображения
CN112887738A (zh) 用于hevc扩展处理的条件解析扩展语法
JP2023529198A (ja) マルチレイヤビデオコーディングのピクチャヘッダ制約