TW201717617A - 支援區塊合倂及跳越模式之圖像編碼技術(一) - Google Patents
支援區塊合倂及跳越模式之圖像編碼技術(一) Download PDFInfo
- Publication number
- TW201717617A TW201717617A TW105131691A TW105131691A TW201717617A TW 201717617 A TW201717617 A TW 201717617A TW 105131691 A TW105131691 A TW 105131691A TW 105131691 A TW105131691 A TW 105131691A TW 201717617 A TW201717617 A TW 201717617A
- Authority
- TW
- Taiwan
- Prior art keywords
- block
- flag
- image
- bit stream
- coding
- Prior art date
Links
- 238000000034 method Methods 0.000 claims description 50
- 238000006243 chemical reaction Methods 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 12
- 239000000284 extract Substances 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 8
- 230000009471 action Effects 0.000 claims description 3
- 238000003780 insertion Methods 0.000 claims 2
- 230000037431 insertion Effects 0.000 claims 2
- 238000007670 refining Methods 0.000 abstract description 3
- 230000004913 activation Effects 0.000 abstract 2
- 239000000523 sample Substances 0.000 description 147
- 238000000926 separation method Methods 0.000 description 138
- 238000005192 partition Methods 0.000 description 90
- 230000033001 locomotion Effects 0.000 description 47
- 230000011218 segmentation Effects 0.000 description 45
- 230000011664 signaling Effects 0.000 description 41
- 239000013598 vector Substances 0.000 description 26
- 230000005540 biological transmission Effects 0.000 description 17
- 230000006870 function Effects 0.000 description 16
- 230000002123 temporal effect Effects 0.000 description 12
- 241000023320 Luma <angiosperm> Species 0.000 description 9
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 9
- 238000000638 solvent extraction Methods 0.000 description 9
- 238000005259 measurement Methods 0.000 description 8
- 230000007246 mechanism Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000009467 reduction Effects 0.000 description 6
- 239000000463 material Substances 0.000 description 5
- 238000005457 optimization Methods 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 238000009991 scouring Methods 0.000 description 4
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 3
- 108091026890 Coding region Proteins 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 230000002441 reversible effect Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 1
- 108010076504 Protein Sorting Signals Proteins 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000013074 reference sample Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
一種編碼效率提昇藉由使用位元流內關於合併致動以及跳越模式致動之通用信號化而被達成。亦即,在位元流內之一個或多個語法元素的可能狀態之一者可對於一圖像之目前樣本集合傳信關於各別樣本集合是將被合併並且不具有預測殘餘被編碼以及被插入該位元流。另外地,一通用旗標可通用地傳信關聯於一目前樣本集合之編碼參數是否將依據一合併候選者被設定或自該位元流被取得,並且該圖像之目前樣本集合是否僅以依照關聯於該目前樣本集合之編碼參數之一預測信號為基礎,不必任何殘餘資料,而被重建、或將利用在該位元流內之殘餘資料而藉由精練依照關聯於該目前樣本集合之該等編碼參數的預測信號而被重建。
Description
本申請係關於圖像及/或視訊編碼,並且尤其是關於支援區塊分隔及跳越模式之編解碼器。
許多圖像及/或視訊編解碼器以區塊為單位而處理圖像。例如,預測式編解碼器使用一區塊間隔尺寸以便達成在一方面花費太多的側資訊在預測參數上,以高空間解析度被設定之非常精確地設定之預測參數,以及另一方面由於較低空間解析度的預測參數而導致編碼預測殘餘所需的位元數量增加之太粗糙地設定預測參數之間的良好妥協。實際上,該等預測參數的最佳設定是位於兩極端點之某處。
為了得到上述問題之最佳解決辦法,已經有許多的嘗試。例如,取代使用規則地被配置成為列與行之區塊的圖像之規則細分割,多樹型分隔細分割在對於細分割資訊的合理要求之下尋求增加細分割一圖像成為區塊之自由度。然而,即使多樹型細分割需要可觀的資料數量,即使在使用此多樹型細分割之情況中,細分割一圖像之自由度是相當被限制的。
為了使在一方面傳信圖像細分割所需的側資訊數量以及另一方面細分割圖像之自由度之間能夠有較佳的折衷,
區塊合併可被使用,以便在在傳信合併資訊所需的額外資料之合理數量下增加可能的圖像細分割數目。對於被合併之區塊,編碼參數需要在位元流之內僅完全被發送一次,相似於猶如產生的合併區塊族群是圖像之直接細分割部份一般。
為了另外地增加編碼圖像內容之效能,跳越模式已被引介進入一些區塊為基礎的圖像編解碼器中,該跳越模式使編碼器抑制不發送某一區塊之殘餘資料至解碼器。亦即,跳越模式是可能抑制對於某些區塊的殘餘資料發送。抑制對於某些區塊之殘餘資料的發送之能力,導致對於將編碼/預測參數加以編碼之較寬的間隔尺寸區間,其中在一方面編碼品質以及另一方面的花費總位元率之間的最佳交換可被預期:當然,增加編碼/預測參數之編碼的空間解析度導致側資訊率之增加,但同時也減少殘餘量,因而降低必須編碼殘餘資料的位元率。但是,由於跳越模式之可利用性,其可利用僅適度地進一步增加編碼/預測參數被發送之間隔尺寸,而殘餘量是如此地小而使殘餘量之各別發送可被省去,而有利於得到一意外的編碼率節省。
但是,由於因區塊合併組合以及跳越模式使用所新近引起之留下的冗餘量,仍然有需要達到較佳的編碼效能。
因此,本發明之目的是提供具有增加編碼效率之編碼概念。這目的將利用待決之獨立的申請專利範圍被達成。
本發明的構想是如果關於合併致動以及跳越模式致動
之通用傳信在位元流之內被使用,則可達成進一步的編碼效能之增加。亦即,在位元流之內一個或多個語法元素的可能狀態之一者可傳信,對於一圖像的一目前樣本集合,各別樣本集合是將被合併並且沒有預測殘餘量被編碼且被嵌入位元流內。另外地說,一通用旗標可通用地傳信,關於關聯一目前樣本集合之編碼參數是否將依據一合併候選者被設定或將自該位元流取得,以及關於該圖像之目前樣本集合是否將僅以依照關聯於該目前樣本集合之編碼參數的一預測信號為基礎而不必任何殘餘資料地被重建,或將利用在位元流內之殘餘資料藉由精練依照關聯於目前樣本集合之編碼參數的預測信號而被重建。
本發明之發明者發現一方面合併之致動以及另一方面跳越模式之致動的通用傳信引介節省位元率,因為彼此分開之合併及/或跳越模式的致動之傳信的附加經常支出可被減低或可能僅在合併以及跳越模式不同時地被致動的情況中方必須被花費。
本發明的有利實作是依附申請專利範圍的主題。
10、76‧‧‧編碼器
20‧‧‧圖像
30‧‧‧位元流
40‧‧‧區塊
50、60‧‧‧子區塊
70‧‧‧編碼順序
72、82‧‧‧細分割器
74、84‧‧‧合併器
78‧‧‧位元流產生器
80、86‧‧‧解碼器
88‧‧‧抽取器
100‧‧‧轉換器
102‧‧‧熵編碼器
104、152‧‧‧反向轉換器
106、156‧‧‧預測器
108‧‧‧減法器
110、154‧‧‧加法器
112、158‧‧‧輸入
114、160‧‧‧輸出
150‧‧‧熵解碼器
200‧‧‧樹根區塊
500‧‧‧邊界
本申請較佳實施例將配合有關圖形於下面更詳細地被說明,其中:第1圖展示依據一實施例而用以編碼之裝置的方塊圖;第2圖展示依據更詳細的實施例而用以編碼之裝置的方塊圖;第3圖展示依據一實施例而用以解碼之裝置的方塊圖;
第4圖展示依據更詳細的實施例而用以解碼之裝置的方塊圖;第5圖展示第1或2圖之編碼器的可能內部結構之方塊圖;第6圖展示第3或4圖之解碼器的可能內部結構之方塊圖;第7a圖分解地展示一圖像成為樹根區塊、編碼單位(區塊)以及預測單位(分隔)之可能的細分割;第7b圖展示依據一說明範例,展示在第7a圖中之向下至分隔位準的樹根區塊之細分割樹型;第8圖展示依據一實施例對於一組可能支援的分隔樣型之實施例;第9圖展示,當依據第8圖使用區塊分隔時,將有效地自組合區塊合併以及區塊分隔中產生的可能分隔樣型;第10圖分解地展示依據一實施例之用於一跳越/直接(SKIP/DIRECT)模式的候選區塊;第11-13圖展示依據一實施例之一語法的語法部份;以及第14圖分解地展示依據一實施例之用於一分隔的鄰近分隔之界定。
關於下面的說明,應注意到,每當相同的參考符號被使用於不同圖形時,關於相對這些圖形之一者的各別元件之說明將同樣地適用至其他圖形,只要自一圖形轉移至另一圖形之說明是不與另一圖形之其餘說明衝突。
第1圖展示用以編碼一圖像20使成為一位元流30之裝置10。當然,圖像20可以是視訊之部份,於其情況中,編碼器10將是視訊編碼器。
雖然不在第1圖中明確地被展示,圖像20被表示如一樣本陣列。圖像20之樣本陣列被分隔成為樣本集合40,其可以是任何樣本集合,例如,含蓋圖像20之非重疊單一連接區域的樣本集合。為容易了解起見,樣本集合40被展示如,並且在下面被稱為,區塊40,但是其中,下面的說明將不被視為對任何特別類型之樣本集合40的限制。依據一具體實施例,樣本集合40是矩形及/或正方形區塊。
例如,圖像20可被細分割成為區塊40的規則性配置,因而區塊40如第1圖之展示而範例地以列及行方式配置。但是,任何將圖像20細分成為區塊40的其他細分割也是可能。尤其是,使圖像20細分成為區塊40之細分割可以是固定的,亦即,為解碼器已知之原定值或可在位元流30內被傳信至解碼器。尤其是,圖像20之區塊40可以有變化間隔尺寸。例如,多樹型細分割,例如,四分式樹型細分割可被應用至圖像20或應用至圖像20之規則性預細分割使成為規則地被配置的樹根區塊,以便得到區塊40,於此情況中,區塊40形成樹根區塊之多樹型細分割的葉部區塊。
於任何情況中,編碼器10被組態以對於目前樣本集合40,編碼一旗標進入位元流30而通用地傳信關聯於目前樣本集合40之編碼參數是否依據一合併候選者被設定或自位元流30被取得,以及圖像20之目前樣本集合是否僅以依照
關聯於目前樣本集合之編碼參數的一預測信號為基礎,而不必任何殘餘資料被重建,或利用在位元流30內的殘餘資料藉由精練依照關聯於目前樣本集合40之編碼參數的預測信號而被重建。例如,編碼器10被組態以對於目前樣本集合40,編碼一旗標成為位元流30而通用地傳信,如果假設一第一狀態,關聯於目前樣本集合40之編碼參數是依據一合併候選者被設定而不是自位元流30被取得,並且圖像20之目前樣本集合是僅以依照關聯於目前樣本集合之編碼參數的一預測信號為基礎,而不必任何殘餘資料地被重建,以及如果假設任何其他的狀態,關聯於目前樣本集合40之編碼參數是自位元流30被取得,或圖像20之目前樣本集合是利用在位元流30內之殘餘資料藉由精練依照關聯於目前樣本集合40之編碼參數的預測信號而被重建。這表示下列事項。編碼器10支援區塊40之合併。該合併是要被授權的。亦即,不是每個區塊40遭受合併。對於一些區塊40,例如,在位元率/失真最佳化意義上,是適於合併目前區塊40與一合併候選者,但是對於其他者卻是相反。為了決定某一區塊40是否應合併,編碼器10決定合併候選者之一集合或列表,並且,對於這些合併候選者之各者,例如,在位元率/失真最佳化意義上,是否合併目前區塊40與合併候選者將形成較佳編碼選擇。編碼器10被組態以依位元流30先前被編碼部份為基礎而決定對於一目前區塊40之合併候選者的集合或列表。例如,編碼器10藉由接受關聯於已先前依照編碼器10所應用的編碼順序被編碼之區域性及/或時間性
鄰近區塊40的編碼參數而取得至少一部份的合併候選者之集合或列表。時間性鄰近表示,例如,圖像20所屬之先前被編碼的視訊圖像之區塊,具有時間性鄰近區塊,其空間上被安置以便空間地重疊目前圖像20之目前區塊40。因此,對於合併候選者之集合或列表的這部份,在各合併候選者以及空間及/或時間鄰近區塊之間有一種一對一的關聯性。各合併候選者具有與之相關的編碼參數。如果目前區塊40與任何合併候選者合併,則編碼器10依據合併候選者設定目前區塊40之編碼參數。例如,編碼器10可設定目前區塊40之編碼參數使等於各別的合併候選者,亦即,編碼器10可自各別的合併候選者複製目前區塊40之編碼參數。因此,對於合併候選者的集合或列表之這描述部份,一合併候選者之編碼參數直接地自一空間及/或時間鄰近區塊被採用,或藉由同樣地採用相同者,亦即,相等地設定合併候選者,使各別合併候選者的編碼參數自此一空間及/或時間鄰近區塊之編碼參數被得到,但是,同時考慮區域改變,例如,藉由依據該區域改變而尺度調整所採用的編碼參數。例如,經歷合併之至少一部份的編碼參數可包含移動參數。但是,移動參數可指示不同的參考圖像索引。更確切地說,被採用的移動參數可指示在目前圖像以及參考圖像之間的某一時間區間,並且在合併目前區塊與具有各別移動參數之各別的合併候選者中,編碼器10可被組態以調整各別合併候選者的移動參數尺度以便調適其之時間區間至選擇給目前區塊之時間區間。
於任何情況中,到目前為止上述之合併候選者共同地具有它們相關的編碼參數,並且在這些合併候選者以及鄰近區塊之間有一種一對一關聯性。因此,合併區塊40與剛描述合併候選者可被視為將這些區塊合併成為一個或多個區塊40族群,因而編碼參數不變化跨越這些區塊40族群內之圖像20,除了尺度調適或其類似者之外。實際上,與任何剛描述合併候選者之合併將減低編碼參數越過圖像20變化之尺度。此外,與任何剛描述的合併候選者之合併將導致細分割圖像20分別地成為區塊40以及區塊40之族群的額外自由度。因此,就此而言,使區塊40合併成為此些區塊族群可被認為是導致編碼器10使用以這些區塊40族群為單位變化跨越圖像20之編碼參數而編碼圖像20。
除了剛提到之合併候選者外,編碼器10也可增加合併候選者至合併候選者之集合/列表中,其是二個或更多個鄰近區塊之編碼參數的組合結果,例如,其算術平均、幾何平均或鄰近區塊的編碼參數之中數以及其類似者。
因此,比較至使圖像20為區塊40之細分割所定義的間隔尺寸,編碼器10有效地減低編碼參數明確地在位元流30之內被發送的間隔尺寸。這些區塊40的一些藉由使用上面概述的合併選擇以使用一者以及其編碼參數而形成區塊族群。一些區塊經由合併彼此耦合,但是經由各別的尺度調適及/或組合功能使用在彼此間相關聯之不同的編碼參數。一些區塊40並不受合併,並且因此編碼器10直接地編碼該等編碼參數進入位元流30。
編碼器10使用因此被定義之區塊40的編碼參數以便決定對於圖像20之預測信號。編碼器10進行區塊方式的預測信號之決定,其中預測信號依照關聯於各別區塊40的編碼參數。
利用編碼器10被進行之另一決定是關於殘餘量,亦即,在目前區塊40之各別的局部區域之預測信號以及原始圖像內容間的差量,是否將在位元流30之內被發送。亦即,編碼器10決定,對於區塊40,是否跳越模式將被應用至各別的區塊。如果跳越模式被應用,則編碼器10僅以自關聯於各別區塊40的編碼參數被導出、或依照關聯於各別區塊40的編碼參數之預測信號形式,編碼在目前部份區塊40之內的圖像20,並且於跳越模式被取消之情況中,編碼器10使用預測信號以及殘餘資料編碼在區塊40之內的圖像20成為位元流30。
為了節省傳信關於一方面之合併決定以及另一方面之跳越模式的位元率,編碼器10通用地使用一個旗標傳信對於區塊40的兩個決定。更精確地說,通用傳信可被實現,以至於合併以及跳越模式兩者之致動,通用地在位元流30之內藉由假設一第一可能旗標狀態之各別區塊40的旗標被指示,然而,該旗標的其他旗標狀態僅指示解碼器關於合併或跳越模式之一者不被致動。例如,編碼器10可決定對於某一區塊40致動合併,但是撤銷該跳越模式。該情況中,編碼器10使用其他旗標狀態以便在位元流30之內傳信關於合併以及跳越模式至少一者之撤銷,同時在位元流30之內
依序地,例如,利用另一旗標而傳信合併之致動。因此,僅在區塊40是合併以及跳越模式不同時被致動的情況中,編碼器10必須發送這進一步的旗標。於下面進一步說明的實施例中,第一旗標被稱為mrg_cbf或跳越_旗標(skip_flag),而輔助合併指示旗標被稱為mrg或合併_旗標(merge_flag)。本申請發明者已發現這一傳信狀態之共同使用,以便通用地傳信合併以及跳越模式之致動可降低位元流30的整體位元率。
關於剛剛提及之傳信狀態,應注意到,此一傳信狀態可利用位元流30之一位元狀態被決定。但是,編碼器10可被組態而以熵編碼技術將位元流30編碼,並且因此在旗標傳信狀態以及位元流30之間的對應性可能更複雜化。該情況中,狀態可對應至熵解碼領域中之位元流30的一位元。更進一步地,傳信狀態可對應至對於編碼字組依據可變長度編碼機構被指定的旗標兩個狀態之一者。於算術編碼之情況中,通用地傳信合併以及跳越模式之致動的傳信狀態,可對應至算術編碼機構下之符號文字的符號之一者。
如上面之描述,編碼器10使用位元流30之內的一旗標以傳信合併以及跳越模式的同時致動。如下面將更詳細之描述,這旗標可在具有多於二個可能狀態的一語法元素之內被發送。這語法元素同樣地也可,例如,傳信其他的編碼選擇。下面將更詳細說明其細節。但是,於那情況中,一個或多個語法元素的可能狀態之一者將傳信同時發生的致動。亦即,每當剛剛描述之目前區塊40之語法元素確定
這預定的可能狀態時,編碼器10因而傳信合併以及跳越模式兩者之致動。解碼器因此不需要進一步各別地傳信關於合併之致動以及跳越模式之致動。
關於上面的說明,應注意到,使圖像20分隔成為區塊40可能不代表對於圖像20所決定編碼參數之最佳解析度。反而,編碼器10可將進一步的分隔資訊附加於各區塊40,以便在位元流30內傳信供各別地分隔目前區塊40成為子區塊50以及60,亦即,樣本子集,之所支援分隔樣型之一者。該情況中,同時的合併/跳越決定是以區塊40為單位利用編碼器10被進行,因而編碼參數以及,例如,彼此分開的輔助合併決定及/或跳越模式決定,以區塊40之次分隔為單位,亦即,以第1圖區塊40展示範例之子區塊50以及60為單位,對於圖像20被定義。當然,一非分隔模式可代表所支援分隔樣型之一者,因而導致編碼器10僅決定對於區塊40之一組編碼參數。無關於各別的分隔樣型之子區塊50以及60數目,合併決定可應用至所有的子區塊,亦即,一個或多個子區塊。亦即,如果對於區塊40之合併被致動,這致動對於所有的子區塊可以是有效的。依據下面進一步描述的一實施例,上述通用狀態之通用地傳信合併以及跳越模式致動,可另外地同時傳信對於目前區塊40之所支援分隔樣型間的非分隔樣型,因而在旗標或語法元素假設這狀態之情況中,不需要進一步發送對於目前區塊之分隔資訊。當然,除了合併以及跳越模式的致動之外,任何在支援分隔樣型之間的其他分隔樣型可另外地同時被指示。
依據本申請之一些實施例,編碼器10避免一方面自區塊40之區塊分隔的共同使用以及另一方面來自子區塊50以及60之合併所產生的位元效能損失。為更精確故,例如,於位元率/失真最佳化意義,編碼器10可決定是否對進一步的分隔區塊40是較佳,以及關於那個支援分隔樣型應被使用於目前區塊40中,以便調適某些編碼參數在圖像20之目前區塊40內被設定或被定義的間隔尺寸。如將在下面更詳細之描述,編碼參數,例如,可代表預測參數,例如,像框間預測參數。此些像框間預測參數,例如,可包括一參考圖像索引、一移動向量以及其類似者。支援分隔樣型,例如,可包括一非分隔模式,亦即,依據其使目前區塊40是不進一步被分隔之一選擇,一水平分隔模式,亦即,依據其使目前區塊40沿著一水平延伸線被細分割成為一上方或頂部部份與一底部或下方部份之一選擇,以及一垂直分隔模式,亦即,依據其使目前區塊40沿著一垂直延伸線垂直地被細分割成為一左方部份與一右方部份之一選擇。除此之外,支援分隔樣型也可包括一選擇,依據其使目前區塊40進一步規則性地被細分割成為各假設為目前區塊40之四分之一的四個進一步區塊。進一步地,分隔可以是有關圖像20的所有區塊40或僅是其之一適當的子集,例如,那些具有與之相關的某一編碼模式者,例如,像框間預測模式。同樣地,應注意到,就其本身而言,合併可僅是供用於某些區塊,例如,那些以像框間預測模式被編碼者。依據下面進一步描述的一實施例,上述通用地說明之狀態也
同時傳信關於各別的區塊是像框間預測模式而不是像框內預測模式。因此,對於區塊40之上述旗標之一狀態可傳信關於這區塊是不進一步被分隔並且合併與跳越模式針對其被致動之像框間預測編碼區塊。但是,如於旗標假設另一狀態的情況中之一輔助決定,各分隔或樣本子集50以及60可在位元流30之內各別地附有一進一步的旗標,以便傳信合併是否將被應用至各別的分隔50以及60。進一步地,支援分隔模式之不同子集可能是可供用於區塊40,例如,於多樹型細分割葉部區塊情況中,組合或各別地取決於區塊40之區塊尺寸、細分割位準。
亦即,使圖像20細分割成為區塊,以便得到,尤其是,區塊40可在位元流之內被固定或被傳信。同樣地,將被使用於進一步分隔目前區塊40之分隔樣型可以分隔資訊形式在位元流30之內被傳信。因此,分隔資訊因此可被視為圖像20細分割成為區塊40之一種延伸。另一方面,使圖像20成為區塊40之細分割的原始間隔尺寸之另外的關聯性仍然可保持。例如,編碼器10可被組態以在位元流30之內傳信將被使用於利用區塊40所定義的間隔尺寸之圖像20的各別部份或區塊40之編碼模式,同時編碼器10可被組態以藉由針對各別區塊40所選擇之各別分隔樣型所定義的一增加(較細)間隔尺寸,而在各別區塊40之內變化各別編碼模式之編碼參數。例如,以區塊40之間隔尺寸傳信的編碼模式可區分像框內預測模式、像框間預測模式以及其類似者,例如,時間性像框間預測模式、視圖間預測模式等等。自各
別區塊40之分隔產生之關聯於一個或多個子區塊(分隔)的編碼參數類別,接著取決於被指定至各別區塊40的編碼模式。例如,對於一像框內編碼區塊40,編碼參數可包括一空間方向,沿著該空間方向之圖像20先前被解碼部份之圖像內容被使用以充填各別區塊40。於一像框間編碼區塊40之情況中,編碼參數可包括,尤其,用於移動補償預測的一移動向量。
第1圖範例地展示被細分割成為兩個子區塊50以及60之目前區塊40。尤其是,一垂直分隔模式範例地被展示。較小的區塊50以及60也可被稱為子區塊50以及60或分隔部份50以及60或預測單位50以及60。尤其是,編碼器10可被組態,以於被傳信的支援分隔樣型之一者指定使目前區塊40成為兩個或更多個進一步區塊50以及60的一細分割之情況中,對於除了編碼順序中之子區塊50以及60的一第一子區塊之外的所有進一步區塊,自供用於各別子區塊的一組編碼參數候選者,移除具有編碼參數相同於關聯於任何子區塊(其當與各別子區塊合併時,將形成支援分隔樣型之一者)之編碼參數的編碼參數候選者。為更精確故,對於支援分隔樣型各者,一編碼順序被定義在產生的一個或多個分隔樣型50以及60之中。於第1圖之情況中,編碼順序利用箭號70被範例地展示,其定義左方分隔50優先於右方分隔60被編碼。於水平分隔模式情況中,其可被定義上方分隔優先於下方分隔被編碼。於任何情況中,編碼器10被組態而對於以編碼順序70之第二分隔60,自對於各別第二分隔60
之該組編碼參數候選者,移除具有相同於關聯第一分隔50之編碼參數的編碼參數之編碼參數候選者,以便避免這合併之產生,亦即,事實上分隔50以及60兩者皆將具有與之相關的相同編碼參數,實際上,其可藉由選擇對於目前區塊40之非分隔模式而以較低編碼率等效地產生。
為更精確故,編碼器10可被組態以有效方法與區塊分隔一起使用區塊合併。就關於區塊合併而言,編碼器10可針對分隔50以及60各者而決定編碼參數候選者之各別的集合。編碼器可被組態以關聯先前被解碼區塊之編碼參數為基礎而決定對於分隔50以及60各者之編碼參數候選者集合。尤其是,在編碼參數候選者集合內之至少一些編碼參數候選者可以是等於,亦即,可被採用自先前被解碼的分隔之編碼參數。另外地,至少一些的編碼參數候選者可經由一適當的組合(例如,中值數、均數或其類似者),而自關聯多於一個先前被編碼分隔之編碼參數候選者被導出。但是,因為編碼器10被組態以進行編碼參數候選者減低集合之決定,並且,如果在移除之後多於一個的編碼參數候選者留下,對於非第一分隔60各者,在留下的非移除編碼參數候選者之間的選擇,以便依照一非移除或被選擇的編碼參數候選者而設定關聯各別分隔之編碼參數,編碼器10被組態以進行移除以至於將有效地導致分隔50以及60之再聯合的編碼參數候選者被移除。亦即,語法群集有效地被避免,依據其一有效的分隔情況被編碼將比僅藉由單獨的使用分隔資訊而直接地傳信這分隔的情況更複雜。
此外,由於編碼參數候選者集合成為較小,編碼合併資訊進入位元流30所需之側資訊數量可能由於這些候選者集合中較低的元素數量而減少。尤其是,由於解碼器是可如第1圖之編碼器般,以相同方式決定並且依序地減低編碼參數候選者集合,第1圖之編碼器10是可利用編碼參數候選者的減低集合(藉由,例如,使用較少的位元),以便將一語法元素塞進入位元流30中,指明非移除編碼參數候選者之何者是將被使用於合併。當然,於各別分隔的非移除編碼參數候選者數目僅是一的情況中,進入位元流30之語法元素的引進可完全被抑制。於任何情況中,由於合併,亦即,依照非移除的編碼參數候選者之其餘的一者,或被選擇之一者而設定關聯各別分隔之編碼參數,編碼器10是可完全地抑制對於各別分隔的編碼參數之一新嵌入於位元流30中,因而也減低側資訊。依據本申請之一些實施例,編碼器10可被組態以在位元流30之內傳信用以精練關於各別分隔的編碼參數候選者之餘留一者、或被選擇之一者的精練資訊。
依據剛描述之減低合併候選者列表的可能性,編碼器10可被組態以經由它們的編碼參數與分隔的編碼參數之比較而決定將被移除的合併候選者,其合併將產生另一支援分隔樣型。這處理編碼參數候選者之方式,將有效地移除第1圖展示的情況中之至少一個編碼參數候選者,例如,假設左方分隔50之編碼參數形成供用於右方分隔60之編碼參數候選者集合的一元素。但是,於它們是等於左方分隔50
之編碼參數的情況中,進一步的編碼參數候選者也可被移除。但是,依據本發明另一實施例,編碼器10可被組態,以藉由自一組候選者區塊移除那個或那些的候選者區塊(其當與各別的分隔合併時,將產生支援分隔樣型之一者),而決定編碼順序中之各第二以及下面的分隔的一組候選者區塊。於某些意義上而言,這表示下面的意思。編碼器10可被組態以決定供用於一各別分隔50或60(亦即,編碼順序中第一以及下面的一者)之合併候選者,以至於候選者集合之各元素確切地具有與候選者採用相關分隔之各別的編碼參數相關之先前被編碼的區塊40之任一者或目前區塊40的一分隔。例如,候選者集合之各元素可以是等於,亦即,被採用自先前被編碼分隔的此些編碼參數之一者,或可以至少自僅一此先前被編碼分隔之一者的編碼參數被導出,例如,藉由另外地調整尺度或使用另外地被傳送的精練資訊之精練處理。但是,編碼器10也可被組態,以使此候選者集合附隨有進一步的元素或候選者,亦即,編碼參數候選者,其已自多於一個的先前被編碼分隔之編碼參數的組合被導出,或其已藉由修改-自一先前被編碼分隔之編碼參數而被導出,例如,藉由僅採取一移動參數列表之編碼參數。對於“被組合”元素,在各別候選者元素的編碼參數以及一各別的分隔之間沒有1:1關聯性。依據第1圖說明之第一選擇,編碼器10可被組態以自整體的候選者集合移除編碼參數等於分隔50之編碼參數的所有候選者。依據第1圖說明的後面選擇,編碼器10可被組態以僅移除關聯於分隔50
之候選者集合的元素。協調兩論點,編碼器10可被組態以自展示一個1:1關聯性至一些(例如鄰近的)先前被編碼之分隔的候選者集合部份以移除候選者,而不延伸該移除(並且搜尋具有相等編碼參數之候選者)至具有利用組合所得到的編碼參數之候選者集合的其餘部份。但是當然,如果一組合也將導致冗餘的表示,這可藉由自列表移除冗餘的編碼參數或也可藉由對於被組合候選者進行冗餘檢查而被解決。
在敘述適合於剛描述之第1圖實施例的解碼器實施例之前,用以編碼之一裝置,亦即,一編碼器,依據第1圖而更詳細描述之實作例將參考第2圖在下面更詳細地被說明。第2圖展示編碼器為包括一細分割器72(其被組態以細分割圖像20成為區塊40)、一合併器74(其被組態以合併區塊40成為如上面描述的一個或多個樣本集合族群)、一編碼器或編碼級76(其被組態以使用以樣本集合族群為單位變化跨越圖像20之編碼參數而編碼圖像20)、以及位元流產生器78。編碼器76被組態以藉由預測圖像20而將圖像20編碼以及編碼對於預定區塊的一預測殘餘量。亦即,編碼器76編碼,如上所述,不是所有的區塊40之預測殘餘量。反而,它們的一些具有被致動的跳越模式。位元流產生器78被組態,以將預測殘餘量以及編碼參數一起嵌進位元流30中,同時有對於區塊40之至少一子集各者的一個或多個語法元素,其傳信各別的區塊40是否與另一區塊一起被合併進入該等族群之一者中,以及各別的區塊是否使用跳越模式。
如上所述,於細分割器72的細分割之下的細分割資訊也可利用位元流產生器78將圖像20編碼成為位元流30。這在第2圖中利用虛線被指示。藉由合併器74進行之合併決定以及藉由編碼器76進行之跳越模式決定,如上面描述的,是通用地利用位元流產生器78被編碼成為位元流30,以至於目前區塊40之一個或多個語法元素的可能狀態之一者傳信,關於各別的區塊將與圖像20之另一區塊一起被合併成為區塊族群之一者,並且不具有預測殘餘量被編碼並且被嵌入位元流30中。位元流產生器78,例如,可使用熵編碼技術,以便進行嵌入。細分割器72可能需負責使圖像20細分割成為區塊40之細分割,以及進一步各別地分隔成為分隔50以及60之選擇。合併器74是負責於上面所描述的合併決定,而編碼器76,例如,可決定區塊40之跳越模式。當然,所有的這些決定整體影響位元率/失真量測,並且因此裝置10可被組態以試驗許多決定選擇,以便確定那個選擇是較佳的。
在說明依據本發明關於第1及2圖的一實施例之編碼器後,用以解碼之一裝置,亦即,依據一實施例之解碼器80將參考第3圖被說明。第3圖之解碼器80被組態以解碼位元流30,如上所述地,圖像20被編碼在其中。尤其是,解碼器80被組態,以對於一目前樣本集合或區塊40,通用地回應於在位元流30內之上述旗標關於關聯目前區塊40之編碼參數是否將依據一合併候選者被設定或將自位元流30被取得的一第一決定,以及圖像20之目前區塊40是否僅以依照
關聯目前區塊40之編碼參數的一預測信號為基礎,而不必任何殘餘資料地被重建、或將利用位元流30內之殘餘資料藉由精練依照關聯目前區塊40之編碼參數的預測信號而被重建之一第二決定。
亦即,解碼器之功能主要與有關第1以及2圖所說明的編碼器一致。例如,解碼器80可被組態以進行使圖像20成為區塊40之細分割。這細分割可以是原定解碼器80所已知的,或解碼器80可被組態以自位元流30抽取各別的細分割資訊。每當區塊40被合併時,解碼器80可被組態以藉由依據一合併候選者而設定編碼參數以得到關聯於區塊40之編碼參數。為了決定合併候選者,解碼器80可以完全地相同於編碼器處理之方式而進行上面描述的合併候選者集合或列表之決定。依據本申請之一些實施例,這甚至包含合併候選者之初步集合/列表的減縮,以便避免上面描述之在一方面的區塊分隔以及另一方面的區塊合併之間的冗餘。每當合併被致動時,在決定的合併候選者集合或列表之間的選擇可藉由自位元流30抽取一各別合併索引利用解碼器80被進行。合併索引指示自上述所決定之(減縮)合併候選者集合或列表中將被使用之合併候選者。進一步地,也如上所述,解碼器80也可被組態而使區塊40依據支援分隔樣型之一者接受分隔。當然,這些分隔樣型之一者可包含一非分隔模式,區塊40依據其而不進一步被分隔。於假設通用地被定義之狀態指示對於某一區塊40之合併以及跳越模式致動之詳細說明的旗標情況中,解碼器80可被組態而僅以預
測的信號而不是其與任何殘餘信號之組合為基礎而重建目前區塊40。換言之,該情況中解碼器80抑制對於目前區塊40的殘餘資料抽取並且僅藉由使用自目前區塊編碼參數所導出的預測信號重建在目前區塊40內之圖像20。也如先前所述地,解碼器80可解釋旗標之通用狀態作為目前區塊40之一傳信,而這區塊是一像框間預測區塊及/或不進一步被分隔之區塊。亦即,解碼器80可被組態以至於藉由依據一合併候選者以設定這些編碼參數而得到關聯於目前區塊40之編碼參數,並且如果在30位元流內的目前區塊40之討論中的旗標傳信關聯目前區塊40之編碼參數是將使用合併被設定,則僅以依照目前區塊40之編碼參數而不必任何殘餘資料的預測信號為基礎而重建圖像20之目前區塊40。但是,如果討論中的旗標,傳信目前區塊40不遭受合併或跳越模式不被使用,則解碼器80可以回應在30位元流內之另一旗標,以至於解碼器80,依照這另一旗標,藉由依據一各別的合併候選者設定編碼參數而得到關聯於目前區塊之編碼參數、自位元流30得到對於目前區塊的殘餘資料並且以預測信號以及殘餘資料為基礎重建圖像20之目前區塊40、或自位元流30抽取關聯於目前區塊40之編碼參數、自位元流30得到對於目前區塊40的殘餘資料並且以預測信號以及殘餘資料為基礎重建圖像20之目前區塊40。如上面之描述,解碼器80可被組態以僅在第一旗標不假設通用地傳信狀態同時地傳信合併以及跳越模式之致動的情況中,預期在位元流30內之另一旗標的存在。接著,解碼器80自位
元流抽取另一旗標,以便確定合併是否將發生而無跳越模式。當然,於第二旗標傳信合併撤銷,而有第三旗標傳信跳越模式致動或撤銷之情況中,解碼器80可另外地被組態以等待對於目前區塊40之在位元流30內的另一個第三旗標。
類似於第2圖,第4圖展示用於第3圖之解碼的裝置之可能實作例。因此,第4圖展示用以解碼之裝置,亦即,解碼器80,其包括一細分割器82(其被組態以將被編碼成為位元流30之圖像20細分割成為區塊40)、一合併器84(其被組態以合併該等區塊40成為一個或多個區塊各者之族群)、一解碼器86(其被組態以使用樣本集合族群為單位變化跨越圖像20的編碼參數而解碼或重建圖像20)以及一抽取器88。解碼器86也被組態,以對於該等預定區塊40,亦即,那些具有被關閉的跳越模式者,藉由預測圖像20、解碼對於預定區塊40之預測殘餘以及組合預測殘餘與自預測圖像20所產生的一預測而解碼圖像20。抽取器88被組態以自位元流30一起抽取預測殘餘以及編碼參數、與對於區塊40的至少一子集之各者的一個或多個語法元素,其傳信各別的區塊40是否將與另一區塊40一起被合併成為該等族群之一者,其中合併器84被組態以回應於一個或多個語法元素而執行該合併,其中一個或多個語法元素之可能狀態的一者傳信關於各別的區塊40是將與另一區塊40一起被合併成為區塊族群之一者並且不具有被編碼以及被嵌入位元流30中之預測殘餘。
因此,比較第4圖與第2圖,細分割器82作用類似細分割器72,以便恢復利用細分割器72所產生之細分割。細分割器82藉由原定值或經由抽取器88自位元流30抽取細分割資訊而辨別關於圖像20之細分割。同樣地,合併器84形成區塊40之合併並且關於經由上述在位元流30內之傳信關於區塊40以及區塊部份被致動。解碼器86使用在位元流30內之編碼參數進行圖像20之預測信號之產生。於合併情況中,解碼器86自相鄰區塊/分隔複製一目前區塊40或目前區塊之分隔的編碼參數或另外依據合併候選者而以不同方式設定其編碼參數。
如上面的描述,抽取器88被組態以解釋一目前區塊之一旗標或語法元素的可能狀態之一者,作為同時地傳信合併以及跳越模式之致動的一信號。同時地,抽取器88可解釋該狀態為也傳信對於目前區塊40之在支援分隔樣型中的一預定之一者。例如,預定的分隔樣型可以是區塊40依據其而保持不被分隔的非分割模式,並且它本身因此形成一分隔。因此,僅於各別旗標或語法元素不確定該同時地傳信狀態的情況中,抽取器8預測位元流30包括傳信區塊40分隔之分隔資訊。如將在下面更詳細地描述,分隔資訊可經由一語法元素在位元流30之內被傳送,該語法元素同時地控制目前區塊40之編碼模式,亦即,分割區塊40成為像框被編碼之一者以及像框內編碼之一者。該情況中,第一旗標/語法元素之通用地傳信狀態也可被解釋作為像框間預測編碼模式之一傳信。對於自傳信的分隔資訊所產生之各
分隔,在對於區塊40之第一旗標/語法元素不確定通用地傳信狀態同時地傳信合併以及跳越模式之致動的情況中,抽取器88可自位元流抽取另一合併旗標。該情況中,跳越模式必然可被抽取器88解釋為關閉,並且雖然合併可各別地對於該等分隔利用位元流30被致動,殘餘信號對於這目前區塊40自位元流30被抽取。
因此,第3或4圖之解碼器80被組態以解碼位元流30。如上所述,位元流30可傳信對於圖像20之一目前區塊40的支援分隔樣型之一者。如果被傳信的支援分隔樣型之一者指定目前區塊40細分割成為兩個或更多個分隔50以及60,則解碼器80可被組態,而以編碼順序70自對於具有相同或等於關聯任何該等分隔之編碼參數之各別分隔編碼參數候選者之一編碼參數候選者集合,將除了該等分隔的第一分隔50之外的所有分隔予以移除,亦即,第1以及3圖展示之範例的分隔60,其中該等分隔當與各別分隔合併時,將導致支援分隔樣型之一者,亦即不在位元流30之內被傳信之一者,但卻是該等支援分隔樣型之一者。
例如,如果不被移除的編碼參數候選者數目不是零,則解碼器80可被組態以依照不被移除的參數候選者之一者而設定關聯各別分隔60之編碼參數。例如,解碼器80依據編碼參數涉及之時間距離,各別地藉由或不藉由另外的精練及/或藉由或不藉由尺度調整而設定分隔60之編碼參數,以便使等於非移除的編碼參數候選者之一者。例如,編碼參數候選者與出自非移除候選者之合併,除了明確地
在位元流30之內對於分隔60而傳信的一參考圖像索引外,可具有與之相關的另一參考圖像索引。該情況中,編碼參數候選者之編碼參數可定義各關於一各別的參考圖像索引之移動向量,並且解碼器80可被組態以依據在兩參考圖像索引之間的比例而尺度調整最後被選擇之非移除的編碼參數候選者之移動向量。因此,依據剛剛提及之選擇,接受合併之編碼參數將包含移動參數,因而參考圖像索引將從該處分離。但是,如上面之指示,依據另外的實施例,該等參考圖像索引可也以是接受合併之編碼參數的一部份。
同樣地適用於第1與2圖之編碼器以及第3與4圖之解碼器,該合併行為可被限制於像框間預測區塊40中。因此,解碼器80以及編碼器10可被組態,以支援目前區塊40之像框內以及像框間預測模式,並且僅於目前區塊40以像框間預測模式被編碼之情況中進行合併。因此,僅此些像框間預測先前被編碼的分隔之編碼/預測參數可被使用以決定/建構候選者列表。
如上面之討論,編碼參數可以是預測參數,並且解碼器80可被組態以使用分隔50以及60之預測參數,以便導出對於各別分隔之一預測信號。當然,編碼器10也以此相同方式進行預測信號之導出。但是,編碼器10另外地設定預測參數與在位元流30內之所有其他的語法元素,以便以一適當之最佳化意義達成一些最佳化。
進一步地,如先前所述,編碼器可被組態以僅在對於一各別的分隔之(非移除)編碼參數候選者數目是較大於1的
情況中,將一索引嵌入至一(非移除)編碼參數候選者。因此,解碼器80可被組態,以依據(非移除)編碼參數候選者數目(例如,對於分隔60),如果(非移除)編碼參數候選者數目是較大於1,則僅預期位元流30包括指明(非移除)編碼參數候選者之哪一者被採用於合併之語法元素。但是,於候選者集合數目變為比2較小的情況,可通常地被排除發生,如上所述,藉由使用組合編碼參數延伸候選者列表/集合而達成,亦即,該等參數係自多於一個-或多於二個先前被編碼的分隔之編碼參數的組合被導出,其限制候選者集合減少之性能為藉由採取自或導自正好一先前被編碼分隔之而被得到之那些候選者。相對者也是可能的,亦即,通常地移除具有導致另一支援分隔樣型的那些分隔之相同數值的所有編碼參數候選者。
關於決定,解碼器80作用如同編碼器10所為。亦即,解碼器80可被組態而以關聯於先前被解碼之分隔的編碼參數為基礎以決定供用於一區塊40之分隔的合併候選者集合。亦即,一編碼順序不僅在各別的區塊40分隔50以及60之中被定義,同時也在圖像20本身之區塊40之中被定義。所有先前於分隔60被編碼的分隔,因此,可作為任何依序的分隔(例如,第3圖情況中之分隔60)之合併候選者集合的決定基礎。同時也如上所述,編碼器以及解碼器可限定合併候選者集合分隔之決定在某一空間及/或時間相鄰者中。例如,解碼器80可被組態以以關聯鄰近目前分隔之先前被解碼的分隔之編碼參數為基礎而決定合併候選者集
合,其中此些分隔可置於目前區塊40外面以及內部。當然,合併候選者的決定也可以對於編碼順序之第一分隔被進行。僅移除可被移開。
相同於第1圖之說明,除了以一像框內預測模式被編碼的一者之外,解碼器80可被組態以對於出自先前被解碼分隔之一啟始集合的各別之非第一分隔60決定編碼參數候選者集合。
進一步地,於編碼器將細分割資訊引介進入位元流以便細分割圖像20成為區塊40之情況中,解碼器80可被組態以依據位元流30中之細分割資訊而恢復圖像20的細分割成為此些編碼區塊40。
關於第1至4圖,應注意到,對於目前區塊40之殘餘信號可經由位元流30以可能不同於利用關於編碼參數之分隔所定義的一間隔尺寸之間隔尺寸被發送。例如,對於跳越模式是不被引動之區塊,第1圖之編碼器10可被組態以平行於、或無關於分隔成為分隔50以及60之方式而細分割區塊40成為一個或多個轉換區塊。編碼器可藉由進一步的細分割資訊而傳信對於區塊40之各別的轉換區塊細分割。解碼器80,接著,可被組態以依據位元流中之進一步的細分割資訊,將這區塊40的進一步細分割恢復成為一個或多個轉換區塊,並且以這些轉換區塊為單位自位元流取得目前區塊40之一殘餘信號。轉換區塊分隔之含義可以是編碼器中之轉換,例如,DCT,以及對應的解碼器中之反向轉換,例如,IDCT分別地在區塊40的各轉換區塊之內被進行。為
了重建在區塊40之內的圖像20,編碼器10接著組合,例如,分別地相加,藉由應用編碼參數在各別的分隔50與60所導出的預測信號,以及殘餘信號。但是,應注意到,殘餘編碼可能不分別地涉及任何轉換以及反向轉換,並且預測殘餘,例如,卻在空間領域中被編碼。
在進一步地說明下面進一步實施例的可能細節之前,第1至4圖的編碼器以及解碼器之可能內部結構將關於第5與6圖被說明,但是其中,合併器以及細分割器不在這些圖形中被展示,以便集中於混合編碼性質。第5圖範例地展示關於編碼器10可如何內部地被構成。如所展示,編碼器10可包括一減法器108、轉換器100、以及位元流產生器102,如第5圖所指示地,其可進行一熵編碼。元件108、100以及102被串連在接收圖像20的一輸入112,以及輸出上述位元流30的一輸出114之間。尤其是,減法器108具有連接到輸入112之非反相輸入並且轉換器100被連接在減法器108輸出以及位元流產生器102的一第一輸入之間,位元流產生器102具有接著連接到輸出114之一輸出。第5圖編碼器10進一步包括以所述順序串連至轉換器100輸出的一反向轉換器104以及一加法器110。編碼器10進一步包括連接在加法器110輸出以及加法器110進一步輸入與減法器108反向輸入之間的一預測器106。
第5圖之元件如下所示地互動:預測器106預測圖像20之部份,而預測結果,亦即,預測信號,被施加至減法器108之反相輸入。減法器108之輸出,接著,代表在預測信
號以及圖像20的各別部份之間的差量,亦即,殘餘信號。殘餘信號在轉換器100中接受轉換編碼。亦即,轉換器100可進行一轉換,例如,一DCT或其類似者,以及在轉換的殘餘信號(亦即,轉換係數)上之一隨後的量化,以便得到轉換係數位準。反向轉換器104重建藉由轉換器100輸出的最後殘餘信號,以得到對應至輸入轉換器100的殘餘信號之一重建的殘餘信號(除了由於在轉換器100中之量化的資訊損失之外)。重建殘餘信號以及利用預測器106輸出之預測信號相加將導致圖像20的各別部份之重建並且自加法器110輸出被傳送至預測器106輸入。預測器106以如上所述之不同模式操作,例如,一像框內預測模式、像框間預測模式以及其類似者。被預測器106所應用以便得到預測信號之預測模式以及對應的編碼或預測參數,利用預測器106被傳送至熵編碼器102以供嵌入位元流中。
第3以及4圖之解碼器80內部結構的一可能實作例,對應至第5圖中展示之有關編碼器的可能者,被展示於第6圖中。如其中所展示,解碼器80可包括一位元流抽取器150,其如於第6圖之展示,被實作如一熵解碼器、一反向轉換器152以及一加法器154,其是,以上述順序,連接在解碼器輸入158以及輸出160之間。進一步地,第6圖之解碼器包括一連接在加法器154輸出以及其進一步的輸入之間的預測器156。熵解碼器150連接到預測器156之參數輸入。
簡要地敘述第6圖之解碼器功能,熵解碼器150是用以抽取包含在位元流30中的所有資訊。被使用之熵編碼機構
可以是可變長度編碼或算術編碼。藉由這樣,熵解碼器150自位元流恢復代表殘餘信號之轉換係數位準並且傳送其至反向轉換器152。進一步地,熵解碼器150作用如同上述之抽取器88並且自位元流恢復所有的編碼模式以及相關的編碼參數並且傳送其至預測器156。另外地,分隔資訊以及合併資訊利用抽取器150自位元流被抽取。反向地被轉換,亦即,被重建殘餘信號以及如利用預測器156所導出的預測信號被組合,例如,相加,利用加法器154,接著,在輸出160輸出因此重建之信號並且傳送其至預測器156。
自第5以及6圖之比較而清楚,元件152、154以及156在功能上對應至第5圖之元件104、110以及106。
在上面第1至6圖的說明中,關於圖像20可能的細分割以及包含在編碼圖像20中的一些參數變化之對應的間隔尺寸的許多不同可能性已呈現。此一可能性再次參考於第7a圖以及第7b圖被說明。第7a圖展示圖像20之一部份。依據第7a圖之實施例,編碼器以及解碼器被組態以首先將圖像20細分割成為樹根區塊200。此一個樹根區塊在第7a圖中被展示。細分割成為樹根區塊之圖像20以列以及行方式的細分割規則地被完成,如利用虛線所展示。樹根區塊200之大小可利用編碼器被選擇並且利用位元流30被傳信至解碼器。另外地,這些樹根區塊200之大小可利用原定值被固定。該等樹根區塊200藉由使用構成四分樹分隔被細分割,以便產生與上面一致之區塊40,其可被稱為編碼區塊或編碼單位。這些編碼區塊或編碼單位在第7a圖中以細實線被
畫出。藉由這點,編碼器將細分割資訊伴隨著於各個樹根區塊200並且將該細分割資訊塞入位元流中。這細分割資訊指示關於樹根區塊200是如何被細分割成為區塊40。以這些區塊40的間隔尺寸以及單位,預測模式在圖像20之內變化。如上面所指示,各個區塊40-或具有某一預測模式,例如,像框間預測模式之各個區塊-被伴隨著關於哪一支援分隔樣型被使用於各別區塊40的分隔資訊。就此而言,但是,回想至上述旗標/語法元素,當假設通用地傳信狀態時,可同時地也傳信對於各別區塊40的支援分隔模式之一者,因而對於這區塊40之另一分隔資訊的明確發送可在編碼器端被抑制並且不被預期,因此,在解碼器端亦然。於第7a圖展示的情況中,對於許多編碼區塊40,非分割模式已被選擇,因而編碼區塊40空間地與對應的分隔一致。換言之,編碼區塊40,同時地,是具有與之相關的預測參數之一各別集合的一分隔。預測參數之分類,接著,依照關聯於各別編碼區塊40的模式。其他編碼區塊,但是,範例地被展示將進一步地被分隔。在樹根區塊200頂部右手邊角落之編碼區塊40,例如,被展示被分隔為四個分隔,因而在樹根區塊200底部右手邊角落之編碼區塊範例地被展示垂直地被細分割為二個分隔。用以分隔為多數分隔之細分割利用虛線被展示。第7a圖也展示在因此被定義的多數分隔之間的編碼順序。如所展示,一深度-首先經過順序被使用。跨越樹根區塊邊沿,編碼順序可以一掃描順序(依據該掃描順序樹根區塊200之列自圖像20頂部至底部以列方式被掃描)
被繼續。藉由這措施,其可能具有一最大機會,某一分隔具有相鄰至其之頂部邊沿以及左手邊沿的一先前編碼分隔。各個區塊40-或具有某一預測模式,例如,像框間預測模式之各個區塊-可在位元流之內具有一合併切換指示器而指示關於合併是否對於其中對應的分隔被致動。應注意到,分隔區塊成為分隔/預測單位可被限制至最大為二個分隔的一分隔,這法則的唯一例外是區塊40之最小可能區塊尺寸。於使用四分樹細分割以便得到區塊40的情況,這可避免在用以細分割圖像20成為區塊40的細分割資訊以及用以細分割區塊40成為分隔的分隔資訊之間的冗餘。另外地,僅分隔成為一個或二個分隔可被允許,而包含或不包含非對稱者。
第7b圖展示一細分割樹。樹根區塊200之細分割藉由實線被展示,而虛線標誌出四分樹細分割的葉部區塊之分隔,其是編碼區塊40。亦即,編碼區塊之分隔代表一種四分式細分割之延伸。
如在上面所提到,各個編碼區塊40可以是平行地被細分割成為轉換區塊,因而轉換區塊可代表各別編碼區塊40之一不同的細分割。對於這些轉換區塊各者,其不被展示於第7a以及7b圖中,轉換編碼區塊的殘餘信號之一轉換可分別地被進行。
在下面,本發明進一步實施例將被說明。雖然上面之實施例集中在一方面的區塊合併以及另一方面的區塊分隔之間的關係,下面的說明也包含關於目前編解碼器中所知
的其他編碼原理之本申請的論點,例如,跳越/直接模式。然而,隨後之說明將不被視為僅描述分別之實施例,亦即,自上面所述分別的那些實施例。當然,下面之說明也揭露如上所述之實施例的可能實作細節。因此,下面之說明使用如先前所述之圖形的參考符號,因而在下面被說明之一各別的可能實作,將也定義如上所述之實施例的可能變化。多數的這些變化可分別地被轉移至上面之實施例。
換言之,本申請實施例說明用以藉由組合合併的傳信以及對於樣本集合殘餘資料的不存在而減低在影像以及視訊編碼應用中之側資訊率的方法。換言之,藉由組合指示合併機構之利用的語法元素以及指示殘餘資料不存在的語法元素,在影像以及視訊編碼應用中之側資訊率被減低。
進一步地,在說明這些變化以及進一步的細節之前,一圖像以及視訊編解碼器之概述被提出。
於影像以及視訊編碼應用中,關聯於一圖像之樣本陣列通常地被分隔成為特定的樣本(或樣本集合)之集合,其可代表矩形或正方形區塊或包含任意形狀區域、三角形或任何其他形狀之任何其他的樣本集合。樣本陣列之細分割可藉由語法被固定或細分割(至少部份地)在位元流內部被傳信。為了使用以傳信細分割資訊的側資訊率維持小量,該語法通常地僅允許導致簡單分隔(例如,使區塊成為較小區塊的細分割)之一有限數目選擇。一時常被使用的分隔機構是使正方形區塊分隔成為四個較小正方形區塊、或使成為二個相同尺寸之矩形區塊、或使成為二個不同尺寸的矩形
區塊,其中實際上被採用之分隔在位元流內部被傳信。樣本集合是關聯於特定的編碼參數,其可指明預測資訊或殘餘編碼模式,等等。於視訊編碼應用中,一分隔時常為了移動呈現目的而被完成。一區塊的所有樣本(在一分隔樣型內部)是關聯於相同移動參數集合,其可包含指明預測型式(例如,列表0、列表1、或雙向預測;及/或移轉或仿射預測或具有一不同的移動模型之預測)的參數、指明被採用的參考圖像之參數、指明對於該等參考圖像的移動之參數(例如,位移向量、仿射移動參數向量、或用於任何其他移動模型的移動參數向量),其通常地作為一差量被發送至預測器、指明移動參數之精確度(例如,一半樣本或四分之一樣本精確度)的參數、指明參考樣本信號之加權(例如,用於亮度補償目的)的參數、或指明被採用以導出目前區塊之移動補償預測信號的插補濾波器之參數。假設,對於各樣本集合,各別的編碼參數(例如,用以指明預測及/或殘餘編碼)被發送。為了達成一改進的編碼效率,本發明提出用以合併二個或更多個樣本集合使成為所謂的樣本集合族群之一方法以及特定實施例。此一族群的所有樣本集合共用相同的編碼參數,其可與族群中的樣本集合之一者一起被發送。藉由如此處理,編碼參數不需要分別地對於樣本集合族群的各樣本集合被發送,反而編碼參數對於樣本集合之整個族群僅被發送一次。
因而用以發送編碼參數之側資訊率被減低並且整體的編碼效率被改進。如另一個方法,對於一個或多個編碼參
數之一另外的精練可對於樣本集合族群之一個或多個樣本集合被發送。該精練可任意地被施加至一族群的所有樣本集合或僅被施加至供發送的樣本集合。
本發明之一些實施例組合合併處理程序與使一區塊成為各子區塊50、60(如上所述)之一分隔。通常地,影像或視訊編碼系統支援供用於區塊40之各種分隔樣型。如一範例,一正方形區塊可不被分隔或其可被分隔成為四個相同尺寸之正方形區塊、或使成為二個相同尺寸之矩形區塊(其中該正方形區塊可垂直地或水平地被分割)、或使成為不同尺寸的矩形區塊(水平地或垂直地)。上述之範例分隔樣型被展示在第8圖中。除了上面的說明之外,分隔甚至可包含多於一個之分隔位準。例如,正方形子區塊也可選擇地使用相同分隔樣型進一步被分隔。當此一分隔處理程序與一合併處理程序(允許一(正方形或矩形)區塊與,例如,其相鄰區塊之一者合併)被組合時所形成之議題是相同產生之分隔可藉由分隔樣型以及合併信號的不同組合被達成。因此,相同資訊可使用不同編碼字組而在位元流中被發送,其清楚地對於編碼效率是近似最佳的。如一簡單範例,吾等考慮正方形區塊,其不進一步被分隔(如第8圖頂部左方角落之展示)。這分隔可直接地藉由傳送這區塊40不被細分割的一語法元素被傳信。但是,相同樣型也可藉由傳送指定這區塊,例如,被細分割成為二個垂直地(或水平地)對齊之矩形區塊50、60的一語法元素而被傳信。接著吾等可發送指明這些矩形區塊之第二者與第一矩形區塊被合併之合
併資訊,其正好導致如同當吾等傳信區塊是不進一步被分隔時之相同分隔。其也可藉由首先指明區塊以四個正方形子區塊中被細分割並且接著發送有效地合併所有的這些四區塊之合併資訊而被達成。這概念是清楚地近似最佳的(因為吾等具有供用於傳信相同事件之不同的編碼字組)。
本發明之一些實施例減低側資訊率並且因此增加對於合併概念與提供對於一區塊的不同分隔樣型之概念的組合之編碼效率。如果吾等參看第8圖中之分割樣型範例,當吾等禁止(亦即,排除位元流語法指明)一矩形區塊與一第一矩形區塊被合併之情況時,不利用具有二個矩形區塊的任何分隔樣型被進一步分割區塊之“模擬”可被避免。當更深地參看該議題時,也可能藉由合併第二矩形與關聯於如第一矩形區塊之相同參數(例如,用以指明預測之資訊)的任何另一相鄰者(亦即,不是第一矩形區塊),而“模擬”不被細分割的樣型。藉由調節合併資訊之傳送的方式使得當這些合併參數導致也可藉由傳信支援分隔樣型之一者而被達成之一樣型時,特定合併參數的傳送不包括位元流語法,而使冗餘可被避免。如一範例,如果目前分隔樣型指明細分割成為二個矩形區塊,如於第1與3圖之展示,例如,在傳送對於第二區塊,亦即,第1以及3圖情況中之區塊60的合併資訊之前,其可被檢查哪一可能合併候選者具有如第一矩形區塊,亦即,第1以及3圖情況中之區塊50的相同參數(例如,用以指明預測信號之參數)。並且具有相同移動參數(包含第一矩形區塊本身)的所有候選者自合併候選者集合
被移除。被發送以供傳信合併資訊之編碼字組或旗標是適用於產生之候選者集合。如果候選者集合由於參數檢查而成為空集合,則沒有合併資訊可被發送。如果候選者集合剛好包含一個項目,其僅傳信區塊是否被合併,但是候選者不需要被傳信,因為其可在解碼器端被導出。對於上面之範例,相同概念也被採用至分割一正方形區塊成為四個較小的正方形區塊之分隔樣型。於此處,合併旗標的傳送之適用的方式是既不是指明沒有細分割的分隔樣型也不是指明細分割成為二個相同尺寸之矩形區塊之二個分隔樣型之任一者可利用合併旗標之組合被達成。雖然,吾等在上面之範例說明具有特定分隔樣型的多數概念,應明白,相同概念(避免藉由另一分隔樣型以及對應的合併資訊之組合的一特定分隔樣型之說明)可被採用於任何其他分隔樣型之集合。
需要被考慮之另一論點是合併概念於某些意義是相似於在視訊編碼設計中被發現之跳越或直接模式。於跳越/直接模式中,根本上沒有移動參數對於一目前區塊被發送,而是自一空間及/或時間相鄰者被推斷。於跳越/直接模式之一特定有效的觀念中,一移動參數候選者列表(參考訊框索引、位移向量、等等)自一空間及/或時間相鄰者被產生並且進入這列表中而指明哪一候選者參數被選擇的一索引被發送。對於雙向預測區塊(或多假設像框),一個別之候選者可對於各參考列表被傳信。可能的候選者可包含至目前區塊頂部之區塊、至目前區塊左方之區塊、至目前區塊頂部左
方之區塊、至目前區塊頂部右方之區塊、各種這些候選者之中間預測器、於一個或多個先前參考像框(或任何其他先前已被編碼的區塊、或自先前已被編碼的區塊所得到的組合)中之相同座落的區塊。
以合併概念組合跳越/直接意謂著一區塊可使用一跳越/直接或一合併模式之任一者被編碼。雖然跳越/直接以及合併概念是相似的,但在二個概念之間卻有差異,其將在部份1中更詳細地被說明。在跳越以及直接之間的主要差異是,跳越模式進一步地傳信沒有殘餘信號被發送。當合併概念被使用時,通常地一旗標被發送,其傳信一區塊是否包含非零轉換係數位準。
為了達成一改進的編碼效率,如上面以及下面所述實施例組合是否一樣本集合使用另一樣本集合之編碼參數之傳信以及是否沒有殘餘信號對於該區塊被發送之傳信。組合旗標指示一樣本集合使用另一樣本集合之編碼參數並且沒有殘餘資料被發送。對於這情況,僅一個旗標,而非二個,需要被發送。
如上所述,本發明一些實施例同時也提供具較大自由度供產生一位元流之一編碼器,因為合併方法顯著地增加用以選擇圖像樣本陣列分隔而不引介冗餘於位元流之數目可能性。因為編碼器可在更多選項之間選擇,例如,使一特定的位元率/失真量測最小化,編碼效率可被改進。如一範例,可利用次分割和合併組合表示的一些另外樣型(例如,第9圖樣型)可另外地被測試(使用用於移動估計和模式
決定的對應區塊尺寸)並且利用單純分隔(第8圖)以及利用分隔和合併(第9圖)被提供之最佳樣型可依據一特定的位元率/失真量測被選擇。此外,對於各個區塊可被測試是否與任何先前被編碼候選者集合之合併產生特定的位元率/失真量測之減少並且接著對應的合併旗標在編碼程序期間被設定。概要言之,有許多可能性以操作一編碼器。一簡單方法中,編碼器可首先決定樣本陣列之最佳細分割(如目前技術編碼機構)。接著其檢查對於各樣本集合,是否與另一樣本集合或另一樣本集合族群合併減低一特定的位元率/失真成本量測。此時,關聯於合併之樣本集合族群之預測參數可被重新估計(例如,利用進行新的移動搜尋)或對於先前被決定之合併目前樣本集合以及候選者樣本集合(或樣本集合族群)之預測參數可對於考慮樣本集合族群被估計。於更廣泛方法中,一特定的位元率/失真成本量測可對於另外的樣本集合候選者族群被估計。如一特定的範例,當測試各種可能分隔樣型時(例如參考第8圖),利用分隔和合併組合表示之一些或所有的樣型(例如參考第9圖)可另外地被測試。亦即,對於所有的樣型,一特定移動估計和模式決定程序被執行並且其產生最小位元率/失真量測之樣型被選擇。這處理程序同時也可如上所述與低複雜性處理程序被組合,因而對於產生之區塊,其另外地測試是否與先前被編碼區塊(例如,在第8圖和第9圖樣型之外)之合併產生位元率/失真量測減少。
下面,對於上述實施例的一些可能詳細實作被說明,
例如對於第1、2和5圖編碼器以及第3、4和6圖解碼器。如上面已經注意到,相同者可使用於影像和視訊編碼。如上所述,圖像或對於圖像的特定樣本陣列集合可以被分解成為區塊,其是關聯於特定的編碼參數。該等圖像通常包含複數個樣本陣列。此外,一圖像也可關聯於另外的輔助樣本陣列,例如,其指定透明度資訊或深度圖。該圖像樣本陣列(包含輔助樣本陣列)可被族群化成為一個或多個所謂的平面族群,其中各平面族群包括一個或多個樣本陣列。一圖像之平面族群可獨立地被編碼或,如果圖像是關聯於多於一個平面族群,則從相同圖像的其他平面族群預測。各平面族群通常被分解成為區塊。該等區塊(或樣本陣列的對應區塊)利用像框間-圖像預測或像框內-圖像預測任一者被預測。該等區塊可具有不同的尺寸並且可以是方形或矩形。分隔圖像成為區塊可以是利用語法被固定,或其可在位元流內部被(至少部份地)傳信。通常語法元素被發送,其傳信對於預定尺寸區塊之細分割。此些語法元素可以指明是否以及如何一區塊被細分割成為較小的區塊並且關聯於編碼參數,例如用於預測用途。一可能分隔樣型範例被展示於第8圖。對於一區塊的所有樣本(或樣本陣列的對應區塊)相關編碼參數的解碼以某種方式被指定。於該範例中,一區塊的所有樣本使用相同預測參數集合被預測,例如參考索引(辨識先前被編碼圖像之集合中參考圖像),移動參數(指明對於在參考圖像和目前圖像之間區塊移動之量測),指明插補濾波器,像框內預測模式,等等之參數。移動參數
可利用具有水平和垂直成分之位移向量表示或利用較高階移動參數,例如包括六成分之仿射移動參數。同時也可能有多於一個特定預測參數的集合(例如參考索引和移動參數)是關聯於單一區塊。因此,對於這些特定預測參數的各集合,對於區塊(或樣本陣列的對應區塊)之一單一中間預測信號被產生,並且最後預測信號利用包括重合該等中間預測信號之組合被建立。對應的加權參數以及可能一固定偏移量(其被添加至被加權的總和)可對於一圖像,或一參考圖像,或一參考圖像集合任一者被固定,或它們可被包含對於對應區塊的預測參數集合。在原始區塊(或對應的樣本陣列區塊)以及它們的預測信號之間差量,同時也被稱為殘餘信號,其通常被轉換並且被量化。通常,一個二維轉換被應用至該殘餘信號(或對於殘餘區塊的對應樣本陣列)。對於轉換編碼,該等區塊(或對應的樣本陣列區塊),其中一特定的預測參數集合已被被使用,在應用轉換之前可進一步地分隔。該等轉換區塊可相等於或較小於被使用於預測之區塊。同時也可能是一轉換區塊包含多於一個被使用於預測之區塊。不同的轉換區塊可具有不同的尺寸並且該等轉換區塊可代表正方形或矩形區塊。在上面對於第1-7圖範例中,應注意到,可能是首先細分割之葉部節點,亦即,編碼區塊40,可以一方面平行地進一步分隔成為定義編碼參數間隔尺寸之分隔,並且另一方面二維轉換分別地被應用至轉換區塊。在轉換之後,產生之轉換係數被量化並且所謂的轉換係數位準被得到。該等轉換係數位準以及該等預
測參數,並且,如果呈現,該細分割資訊被熵編碼。尤其是,對於該等轉換區塊之編碼參數被稱為殘餘參數。該等殘餘參數以及該等預測參數並且,如果呈現,細分割資訊可以被熵編碼。於目前技術H.264視訊編碼標準中,稱為編碼區塊旗標(CBF)之一旗標可以傳信所有轉換係數位準是零並且因此,沒有殘餘參數被編碼。依據本發明,這傳信被組合成為合併致動傳信。
於目前技術影像和視訊編碼標準中,對於細分割一圖像(或平面族群)成為利用語法提供之區塊的可能性非常受限制。通常,其僅可指明是否(及如何)一預定尺寸區塊可被細分割成為較小的區塊。如一範例,H.264中最大的區塊尺寸是16x16。16x16區塊同時也被稱為巨區塊並且各個圖像於第一階段中被分隔成為巨區塊。對於各16x16巨區塊,其可傳信是否被編碼為一個16x16區塊,或兩個16x8區塊,或兩個8x16區塊,或四個8x8區塊。如果一個16x16區塊被細分割成為四個8x8區塊,則這些8x8區塊各者可被編碼為一個8x8區塊,或兩個8x4區塊,或兩個4x8區塊,或四個4x4區塊之任一者。於目前技術影像和視訊編碼標準中用以指明分隔成為區塊的可能小集合之優點是用以傳信細分割資訊之側資訊率can被維持小量,但是其缺點是發送對於該區塊預測參數所需的位元率成為顯著,如下面的說明。用以傳信預測資訊之側資訊率通常代表一區塊的全部位元率的主要數量。當這側資訊減低時,例如,可使用較大區塊尺寸達成,編碼效率可被增加。比較至H.264,同時也可能增
加支援分隔樣型集合。例如,展示於第8圖之分隔樣型可被提供至所有尺寸(或選擇尺寸)的方形區塊。一視訊序列的真正影像或圖像包括特定性質的任意形狀物件。如一範例,此些物件或物件部份具特徵於唯一的紋理結構或唯一的移動。通常,相同預測參數集合可被應用於此些物件或物件部份。但是物件邊界通常不與大預測區塊之可能區塊邊界(例如,H.264中16x16巨區塊)重合。一編碼器通常決定細分割(在有限可能集合之中),其導致特定的位元率/失真成本量測最小化。對於任意地形狀物件這可導致大量的小區塊。當更多分隔樣型(如上所述)被提供時,這說明同時也維持真實性。應該注意到分隔樣型數量不應該成為太大,因為接著會有很多側資訊及/或編碼器/解碼器複雜性需用以傳信和處理這些樣型。因此,任意形狀物件通常由於分隔而導致大量的小區塊。且因為這些小的區塊各者是關聯於一預測參數集合,其需要被發送,側資訊率可成為全部位元率的一主要部份。但是因為許多小的區塊仍然代表相同物件或物件部份之區域,對於一些所得到區塊之預測參數是相同或非常相似。直覺地,當語法以不僅允許細分割一區塊,但是同時也允許合併在細分割之後得到之二個或更多個區塊方式延伸時,編碼效率可被增加。因而,吾人將得到以相同預測參數被編碼之區塊族群。對於此一區塊族群之預測參數僅需要被編碼一次。在上面第1-7圖範例中,例如,如果合併發生則目前區塊40之編碼參數不被發送。亦即,編碼器不發送關聯於目前區塊之編碼參數,並且解
碼器不預期位元流30包含目前區塊40之編碼參數。反而,依據其之特定實施例,僅精練資訊可以對於合併之目前區塊40被傳送。候選者集合及其減少以及合併和其它者之決定同時也對於圖像20之其他的編碼區塊40被進行。該等編碼區塊通常形成編碼區塊族群以及編碼鏈,其中對於這些族群之編碼參數在位元流內僅完全被發送一次。
如果利用減低被編碼預測參數之數量被節省之位元率是較大於對於編碼合併資訊另外地花費之位元率,則上面說明之合併導致增加編碼效率。應該進一步提及,上面說明之語法延伸(對於合併)提供編碼器有另外的自由度可選擇分隔一圖像或平面族群成為區塊,而不引介冗餘量。該編碼器不被限制於首先細分割並且接著檢查是否一些產生之區塊具有相同預測參數集合。如一簡單的不同情況,該編碼器可首先決定細分割,如目前編碼技術。且接著對於各個區塊檢查,是否與其之相鄰者區塊(或相關的先前決定區塊族群)之一個的合併減低位元率/失真成本量測。這情況中,關聯於新區塊族群之預測參數可被重新估計(例如,利用進行一新的移動搜尋)或對於目前區塊以及相鄰區塊或區塊族群的先前決定預測參數可對於區塊族群被估計。一編碼器同時也可直接地檢查利用切割和合併之組合提供的樣型(或其一子集);亦即,移動估計和模式決定可依上述產生形狀進行。該合併資訊可依區塊基礎被傳信。有效地,該合併同時也可被解釋為對於目前區塊預測參數之推理,其中該等推理預測參數被設定為等於相鄰區塊之一個的預
測參數。
對於跳越外的其他模式,需要另外的旗標,其類似於CBF,以傳信沒有殘餘的信號被發送。目前技術視訊編碼標準H.264中有二種不同的跳越/直接模式,其依圖像位準被選擇:時間直接模式和空間直接模式。兩直接模式僅可應用至B圖像。於時間直接模式,對於參考圖像列表0之參考索引被設定為等於0並且對於參考圖像列表1之參考索引以及對於兩參考列表之移動向量依據參考圖像列表1之第一參考圖像相同座落巨區塊之移動資料被導出。時間直接模式使用來自時間相同座落區塊之移動向量並且依據在目前和相同座落區塊之間時間距離調整移動向量尺寸。於空間直接模式中,對於兩者參考圖像列表之參考索引和移動向量基本上依據空間相鄰移動資料被推導。參考索引被選擇為空間相鄰者中對應的參考索引之最小者並且各移動向量成分被設定為等於空間相鄰者中對應的移動向量成分之中值。跳越模式僅可被使用於編碼H.264中16x16巨區塊(P和B圖像中)並且直接模式可被使用於編碼16x16巨區塊或8x8次巨區塊。相對於直接模式,如果合併被應用至目前區塊,則所有的預測參數可以自目前區塊與之合併的區塊複製。合併也可被應用至導致上述更多彈性分隔樣型的任意區塊尺寸,其中一個樣型的所有樣本使用相同預測參數被預測。
本發明實施例描述的基本觀念是利用組合合併和CBF旗標而減低發送CBF旗標所需的位元率。如果一樣本集合
使用合併並且沒有殘餘資料被發送,則一個旗標被發送而傳信兩者。
為了減低影像和視訊編碼應用中之側資訊率,特定的樣本集合(其可代表矩形或正方形區塊或任意地形狀區域或任何其他的樣本集合)通常是關聯於一特定的編碼參數集合。對於這些樣本集合各者,編碼參數被包含於位元流。該等編碼參數可以代表預測參數,其指明對應的樣本如何使用先前被編碼樣本而被預測。分隔圖像樣本陣列成為樣本集合可以利用語法被固定或可以利用在位元流內部的對應細分割資訊被傳信。對於一區塊可以允許複數個分隔樣型。對於樣本集合之編碼參數以預定順序被發送,其利用語法所給予。其可對於與一個或多個其他的樣本集合合併(例如,用於預測目的)成為樣本集合族群之目前樣本集合被傳信。對於對應合併資訊的可能數值集合可以調適於被採用之分隔樣型,其方式為特定的分隔樣型不能利用其他的分隔樣型和對應的合併資料之組合表示。對於一樣本集合族群之編碼參數僅需要被發送一次。除預測參數之外,殘餘參數(例如轉換和量化側資訊以及轉換係數位準)可以被發送。如果目前樣本集合被合併,則描述合併程序之側資訊被發送。這側資訊將進一步地被稱為合併資訊。本發明實施例說明一概念,其使合併資訊之傳信與被編碼區塊旗標(指明殘餘資料是否對於一區塊呈現)之傳信組合。
於一特定的實施例中,合併資訊包含一組合旗標,稱為mrg_cbf,如果目前樣本集合被合併並且沒有殘餘資料被
發送則其等於1。於此情況中,沒有進一步的編碼參數和殘餘參數被發送。如果被組合mrg_cbf旗標是等於0,則指示是否合併被應用之另一旗標被編碼。指示沒有殘餘參數被發送的更多旗標被編碼。於CABAC和脈絡適應式VLC,對於有關合併資訊之語法元素之可能性推導(及VLC列表切換)脈絡可被選擇為先前被發送語法元素及/或被解碼參數(例如被組合mrg_cbf旗標)之函數。
於一較佳實施例中,包含被組合mrg_cbf旗標之合併資訊在編碼參數(例如預測資訊和細分割資訊)之前被編碼。
於一較佳實施例中,包含被組合mrg_cbf旗標之合併資訊在編碼參數子集(例如預測資訊和細分割資訊)之後被編碼。對於每一樣本集合,產生自細分割資訊,合併資訊可以被編碼。
在下面參考第11至13圖所說明實施例中,mrg_cbf稱為skip_flag。一般,mrg_cbf可被稱為merge_skip以便展示其是關於區塊合併之另一跳越版本。
下面的較佳實施例對於代表矩形和正方形區塊之樣本集合被說明,但是其可直接被延伸至任意形狀區域或其他的樣本集合。較佳實施例說明關於合併機構語法元素以及指示無殘餘資料語法元素之組合。殘餘資料包含殘餘的側資訊以及轉換係數位準。對於所有的較佳實施例,無殘餘資料利用被編碼區塊旗標(CBF)方式指明,但是其也可利用其他的方式或旗標表示。一CBF等於0係有關於其中沒有殘餘資料被發送之情況。
下面,輔助合併致動旗標稱為mrg,而稍後,有關於第11至13圖,相同者稱為merge_flag。相似地該合併索引目前稱為mrg_idx,而稍後merge_idx被使用。
使用一語法元素之合併旗標和CBF旗標之可能組合在這部份被說明。在下面所述這可能組合之說明,可以被轉移至第1至6圖展示之上面說明任何一者。
於一較佳實施例中,高至三種語法元素被發送以指明合併資訊和CBF。
第一語法元素,其在下面稱為mrg_cbf,指明目前集合樣本是否與另一樣本集合合併並且是否所有對應的CBF等於0。如果一候選者樣本集合之導出集合不是空集合(在將產生可利用不同的分隔樣型被傳信之分隔而無合併之候選者移除之後),mrg_cbf語法元素才可以被編碼。但是,其可by合併候選者列表不會消失之原定值保證,至少有一個或甚至於至少二個合併候選者可用。於本發明一較佳實施例中,如果一候選者樣本集合之導出集合不是空集合,則mrg_cbf語法元素被編碼,如下所述。
- 如果目前區塊被合併並且CBF對於所有的成分(例如一亮度以及二色度成分)是等於0,則mrg_cbf語法元素被設定為1並且被編碼。
- 否則,mrg_cbf語法元素被設定為等於0並且被編碼。
對於mrg_cbf語法元素之數值0和1也可被切換。
第二語法元素,進一步地稱為mrg,其指明目前樣本集
合是否與另一樣本集合合併。如果mrg_cbf語法元素是等於1,則mrg語法元素不被編碼並且被推論為等於1。如果mrg_cbf語法元素不呈現(因為所導出候選者樣本集合是空集合),則mrg語法元素同時也不呈現,但是被推論為等於0。但是,其可by合併候選者列表不會消失之原定值保證,至少有一個或甚至於至少二個合併候選者可用。
第三語法元素,進一步地稱為mrg_idx,僅如果mrg語法元素是等於1(或被推論為等於1)其才被編碼,指明哪一候選者樣本集合之集合被採用於合併。於一較佳實施例中,僅如果一候選者樣本集合之導出集合包含多於一個候選者樣本集合,mrg_idx語法元素才被編碼。於進一步的較佳實施例中,僅如果一候選者樣本集合之導出集合的至少二組樣本集合是關聯於不同的編碼參數,mrg_idx語法元素才被編碼。
應該提及,合併候選者列表可被固定以便解耦合分析和重建而改進分析產能並且對於資訊損失更強健。為更精確故,解耦合可使用固定配置之列表項目以及編碼字組被確定。這將不需固定列表長度。但是,利用添加另外的候選者而同時固定列表長度允許補償固定(較長)編碼字組之編碼效率損失。因此,如上所述,僅如果候選者列表包含多於一個候選者時合併索引語法元素可以被被發送。但是,這將需要在分析合併索引之前導出列表,防止平行地進行這二程序。為允許增加分析產能並且使分析程序更強健對於傳輸錯誤,可對於各索引數值使用固定編碼字組以
及固定數目候選者而移除這相依性。如果這數目不能利用候選者選擇被達到,則可能導出輔助候選者以完成該列表。這些另外的候選者可包含所謂的組合候選者,其自先前已經在列表中可能不同的候選者之移動參數,以及零移動向量被建立。
於一較佳實施例中,對於一樣本集合之合併資訊在預測參數(或,更一般地,關聯於樣本集合的特定編碼參數)之子集已被發送之後被編碼。該預測參數子集可包括一個或多個參考圖像索引或一個或多個移動參數向量成分或一個參考圖像索引以及一個或多個移動參數向量成分,等等。
於一較佳實施例中,合併資訊之mrg_cbf語法元素僅對於分隔模式之減小集合被編碼。分隔模式之一可能集合呈現於第8圖。於一較佳實施例中,這分隔模式之減小集合是受限制於一並且對應至第一分隔模式(第8圖列表之頂部-左方)。如一範例,僅如果一區塊不進一步地被分隔mrg_cbf才被編碼。如進一步的範例,mrg_cfb可以僅對於正方形區塊被編碼。
在另一較佳實施例中,該合併資訊之mrg_cbf語法元素僅對於一分隔之一個區塊被編碼,其中這分隔是被展示於第8圖中之一個可能分隔模式,例如該分隔模式具有四左方底部區塊。於一較佳實施例中,如果有多於一個區塊以這些分隔模式之一被合併,則該第一合併區塊(以解碼順序)之合併資訊包含供用於完全分隔之mrg_cbf語法元素。對於隨後被解碼之該相同分隔模式的所有其他的區塊,該合併
資訊僅包含mrg語法元素指明是否該目前樣本集合另一樣本集合合併。殘餘資料是否呈現之資訊是自該第一區塊中被編碼mrg_cbf語法元素推斷出。
在本發明進一步的較佳實施例中,一樣本集合之合併資訊在預測參數(或者,更一般地說,關聯於該樣本集合的特定編碼參數)之前被編碼。該合併資訊,包括mrg_cbf,mrg以及mrg_idx語法元素,是上面第一較佳實施例說明方式被編碼。該等預測或編碼參數以及該等殘餘參數僅如果合併資訊傳信目前樣本集合是不與另一樣本集合合併並且該CBF,對於至少一個構件,是等於1時才發送。於一較佳實施例中,如果mrg_cbf語法元素指明目前區塊被合併並且對於所有構件的CBF等於0,則對於這目前區塊在合併資訊之後將不需要更多的傳信。
於本發明另一較佳實施例中,語法元素mrg_cbf,mrg,以及mrg_idx被組合並且被編碼為一個或二個語法元素。於一較佳實施例中,mrg_cbf以及mrg被組合成為一語法元素,其指明下面的任何情況:(a)該區塊被合併並且其不包含殘餘的資料,(b)該區塊被合併並且包含殘餘的資料(或可包含殘餘的資料),(c)該區塊不被合併。於另一較佳實施例中,該語法元素mrg以及mrg_idx被組合成為一語法元素。如果N是合併候選者數量,則被組合語法元素指明下面情況之一:該區塊不被合併,該區塊是與候選者1合併,該區塊是與候選者2合併,…,該區塊是與候選者N合併。在本發明進一步的較佳實施例中,語法元素mrg_cfb,mrg,以及
mrg_idx被組合成為一語法元素,其指明下面的情況之一(N是候選者數量):該區塊不被合併,該區塊是與候選者1合併並且不包含殘餘的資料,該區塊是與候選者2合併並且不包含殘餘的資料,…,該區塊是與候選者N合併並且不包含殘餘的資料,該區塊是與候選者1合併並且包含殘餘的資料,該區塊是與候選者2合併並且包含殘餘的資料,…,該區塊是與候選者N合併並且包含殘餘的資料。被組合語法元素可以用可變長度碼發送或可以用算術編碼發送或可以用使用任何特定的二進制機構之二進制算術編碼發送。
跳越/直接模式可以對於所有的或僅特定的區塊尺寸及/或區塊形狀被支援。在目前技術視訊編碼標準H.264說明之跳越/直接模式延伸技術中,一組候選者區塊被使用於跳越/直接模式。在跳越以及直接模式之間的差異為殘餘參數是否被傳送。該等跳越以及直接參數(例如,供預測)可自對應候選者的任何一者被推斷。一候選者索引被編碼,其傳信哪一候選者被使用以推斷該等編碼參數。如果複數個預測被組合以形成目前區塊之最後預測信號(如於H.264之B-訊框中被使用之雙向-預測區塊),則每一預測可涉及不同的候選者。因此一候選者索引可對於每一預測被編碼。
於本發明一較佳實施例中,跳越/直接之候選者列表可包含合併模式候選者列表的不同候選者區塊。其範例如第10圖展示。該候選者列表包含下面的區塊(目前區塊利用Xi表示):
●移動向量(0,0)
●中間(在左方,上面,角落之間)
●左方區塊(Li)
●上面區塊(Ai)
●角落區塊(依序地:上面右方(Ci1),下面左方(Ci2),上面左方(Ci3))
●於不同,但是先前已經被編碼圖像中的相同位置區塊
●下面的標誌被使用以說明下面的實施例:
●set_mvp_ori是被使用於跳越/直接模式之一候選者集合。這集合由{中間,左方,上面,角落,相同位置}構成,其中中間是中間數值(左方,上面以及角落之順序集合的中間數值),並且相同位置是最接近的參考訊框所給予(或參考圖像列表之一中的第一參考圖像)並且對應的移動向量依據時間距離被量度。兩成分等於0之移動向量可另外地被插入候選者列表,例如如果有沒有左方,沒有上面,沒有角落區塊。
●set_mvp_comb是set_mvp_ori之子集。
於一較佳實施例中,跳越/直接模式以及區塊合併模式兩者皆被支援。跳越/直接模式使用原始的候選者集合,set_mvp_ori。關於區塊合併模式之合併資訊可包含被組合mrg_cbf語法元素。
於另一實施例中,跳越/直接模式以及區塊合併模式兩者皆被支援,但是跳越/直接模式使用被修改之候選者集
合,set_mvp_comb。這被修改候選者集合可以是原始集合set_mvp_ori的特定子集。於一較佳實施例中,該被修改候選者集合是由角落區塊以及相同位置區塊構成。於一較佳實施例中,該被修改候選者集合是僅被相同位置區塊構成。進一步的子集也是可能。
於一較佳實施例中,包含mrg_cbf語法元素之合併資訊是在跳越模式相關參數之前被編碼。
於一較佳實施例中,該跳越模式相關參數在包含mrg_cbf語法元素的合併資訊之前被編碼。
依據另一實施例,直接模式可能不被致動(甚至不呈現)並且區塊合併具有跳越模式以mrg_cbf取代之候選者延伸集合。
於一較佳實施例中,區塊合併之候選者列表可包含不同的候選者區塊。一範例如第10圖展示。該候選者列表包含下面的區塊(目前區塊是利用Xi代表):
●移動向量(0,0)
●左方區塊(Li)
●上面區塊(Ai)
●於不同,但是先前已經被編碼圖像中的相同位置區塊
●角落區塊(依序地:上面右方(Ci1),下面左方(Ci2),在上面左方(Ci3))
●被組合雙向-預測候選者
●非尺度調整雙向-預測候選者
應該注意,區塊合併候選者位置可相同於像框間-預測
中MVP列表以便節省記憶體存取。
進一步地,該列表可如上所述“固定”以便將語法分析和重建解耦合而改進語法分析且關於資訊損失更強健。
於一較佳實施例中,如果mrg_cfb語法元素是等於0(其傳信關於區塊是不被合併或其包含非零殘餘資料),一旗標是被發送而傳信是否所有殘餘資料的成分(例如,一亮度以及二彩度成分)均為零。如果mrg_cfb是等於1,則這旗標不被發送。於一特定組態中,如果mrg_cfb是等於0則這旗標不被發送並且語法元素mrg指明區塊被合併。
於另一較佳實施例中,如果mrg_cfb語法元素是等於0(其傳信關於區塊是不被合併或其包含非零殘餘資料),對於各成分之一分別語法元素被發送而傳信對於該成分之殘餘資料是否為零。
不同的脈絡模式可被使用於mrg_cbf。
因此,在上面實施例說明用以編碼一圖像之裝置,其包含一細分割器,其被組態以細分割該圖像成為樣本之樣本集合;一合併器,其被組態以合併該等樣本集合成為一個或多個樣本集合之互斥集合;一編碼器,其被組態而使用以該等樣本集合之互斥集合為單位變化跨越該圖像之編碼參數而編碼該圖像,其中該編碼器被組態,以對於預定樣本集合藉由預測該圖像及
編碼一預測殘餘而編碼該圖像;以及一位元流產生器,其被組態以將該預測殘餘以及該等編碼參數,與對於該等樣本集合之至少一子集的各者之一個或多個語法元素一起地嵌入一位元流,該等語法元素傳信關於各別的樣本集合是否與另一樣本集合一起被合併成為該等互斥集合之一。
進一步地,用以解碼具有圖像被編碼於其中的位元流之裝置已被說明,其包含一細分割器,其被組態以將該圖像細分割成為多個樣本之樣本集合;一合併器,其被組態以將該等樣本集合合併成為各為一個或多個樣本集合之互斥集合;一解碼器,其被組態而使用以該等樣本集合之互斥集合為單位變化跨越圖像之編碼參數而解碼該圖像,其中該解碼器被組態,以對於預定樣本集合藉由預測該圖像、對於該等預定樣本集合解碼一預測殘餘、以及組合該預測殘餘與自預測該圖像所產生的一預測,而解碼圖像;一抽取器,其被組態以與對於該等樣本集合之至少一子集的各者之一個或多個語法元素一起地,自該位元流抽取該預測殘餘以及該等編碼參數,該等語法元素傳信關於各別樣本集合是否將與另一樣本集合一起被合併進入該等互斥集合之一者內,其中該合併器被組態以回應於該語法元素而進行合併。
其中一個或多個語法元素之可能狀態的一者將傳信關
於該各別樣本集合將與另一樣本集合一起被合併進入該等互斥集合之一者內以及無預測殘餘被編碼且被嵌入該位元流中。
該抽取器也被組態以自該位元流抽取細分割資訊,並且該細分割器被組態以回應於該細分割資訊而將該圖像細分割成為樣本集合。
該抽取器以及該合併器被組態以依據一樣本集合掃描順序依序地步進經由該等樣本集合,並且,對於一目前樣本集合,自該位元流抽取一第一個二進制語法元素(mrg_cbf);如果該第一個二進制語法元素確定為是一第一個二進制狀態,則藉由推論對於該目前樣本集合之編碼參數是等於關聯這互斥集合之編碼參數而合併該目前樣本集合進入該等互斥集合之一者、跳越對於該目前樣本集合之預測殘餘的抽取並且以樣本集合掃描順序步進至下一個樣本集合;如果該第一個二進制語法元素確定為是一第二個二進制狀態,則自該位元流抽取一第二語法元素(mrg,mrg_idx);並且依照該第二語法元素,藉由推論對於該目前樣本集合之編碼參數是等於關聯這互斥集合的編碼參數而合併該目前樣本集合進入該等互斥集合之一者,或進行對於該目前樣本集合的該等編碼參數之抽取,其抽取有關對於該目前樣本集合的預測殘餘之至少一個進一步的語法元素。
對於該等樣本集合之至少一子集各者的一個或多個語法元素也傳信,如果各別樣本集合是將與另一樣本集合一起被合併進入互斥集合的任何一集合內,則該各別樣本集合是將與鄰近於該各別樣本集合的預定候選者樣本集合之哪一集合被合併。
該抽取器也被組態以便,如果一個或多個語法元素不傳信關於各別的樣本集合將與另一樣本集合一起被合併進入任一互斥集合,則自該位元流抽取一個或多個進一步的語法元素(跳越/直接模式)而傳信關於是否,以及來自鄰近各別樣本集合之預定候選者樣本集合的進一步集合之何者,對於各別樣本集合的編碼參數之至少一部份將被預測。
在該情況中,該預定候選者樣本集合的集合以及該預定候選者樣本集合進一步的集合可以是分別地有關於該預定候選者樣本集合之集合之少數預定候選者樣本集合以及該進一步的預定候選者樣本集合之集合而彼此互斥或相交。
該抽取器也被組態以自該位元流抽取細分割資訊,並且該細分割器被組態以回應於該細分割資訊而將該圖像階級式細分割成為樣本集合,並且該抽取器被組態以依序地步進經過一親系樣本集合之子系樣本集合,其中該親系樣本集合由該圖像被細分割之樣本集合所組成,並且對於一目前子系樣本集合,自該位元流抽取一第一個二進制語法元素(mrg_cbf);
如果該第一個二進制語法元素確定為是一第一個二進制狀態,則藉由推論對於該目前子系樣本集合之編碼參數是等於關聯這互斥集合之編碼參數而合併該目前子系樣本集合進入該等互斥集合之一者中、跳越對於該目前子系樣本集合之預測殘餘的抽取、並且步進至下一個子系樣本集合;如果該第一個二進制語法元素確定為是一第二個二進制狀態,則自該位元流抽取一第二語法元素(mrg,mrg_idx);並且依照該第二語法元素,藉由推論對於該目前子系樣本集合之編碼參數是等於關聯這族群的編碼參數而合併該目前子系樣本集合進入該等族群之一者,或進行對於該目前子系樣本集合的該等編碼參數之抽取,其抽取有關對於該目前子系樣本集合的預測殘餘之至少一個進一步的語法元素,並且接著步進至下一個子系樣本集合,對於下一個子系樣本集合,如果目前子系樣本集合之該第一個二進制語法元素確定為是該第一個二進制狀態,則跳越該第一個二進制語法元素之抽取,並且反而開始抽取該第二語法元素,而且如果目前子系樣本集合之該第一個二進制語法元素確定為是該第二個二進制狀態,則抽取該第一個二進制語法元素。
假設,例如,一個親系樣本集合(CU)被分割成為二個子系樣本集合(PU)。接著,如果對於第一個PU,該第一個二進制語法元素(merge_cbf)具有第一個二進制狀態,1)第
一個PU使用合併並且第一個和第二個PU(整個CU)在位元流中不具有殘餘資料,並且2)對於第二個PU,第二個二進制語法元素(merge_flag,merge_idx)被傳信。但是,如果第一個二進制語法元素對於第一PU具有第二個二進制狀態,接著則1)對於第一個PU,第二個二進制語法元素(merge_flag,merge_idx)被傳信,並且殘餘資料是在位元流中,然而2)對於第二個PU,第一個二進制語法元素(merge_cbf)被傳信。因此,可以是merge_cbf同時也在一PU位準傳信,亦即,對於依序子系樣本集合,如果對於所有的先前的子系樣本集合,merge_cbf是在第二個二進制狀態。如果對於依序子系樣本集合,merge_cbf是在第一個二進制狀態,則在這子系樣本集合下面的所有的子系樣本集合在位元流中不具有殘餘資料。例如,對於一CU分割成為,例如,4個PU,可能對於第二個PU,merge_cbf是在第一個二進制狀態,而表示編碼順序中第三個和第四個PU在位元流中不具有殘餘資料,但是第一個PU具有或可具有。
第一個和第二個二進制語法元素可以使用脈絡-適應式可變長度編碼或脈絡-適應式(二進制)算術編碼被編碼並且用以編碼該等語法元素之脈絡是依據先前已經被編碼區塊中對於這些語法元素之數值被導出。
如於另一較佳實施例被說明,語法元素merge_idx可以僅如果候選者列表包含多於一個候選者被發送。這需要在分析合併索引前從該列表導出,防止平行地進行這二程序。為允許增加分析產能並且使分析程序對於發送傳輸錯
誤更強健,可能對於各索引數值以及固定數目候選者使用固定編碼字組而移除這相關性。如果這數目不能被一候選者選擇達到,則可能導出輔助的候選者以完成該列表。這些另外的候選者可包含所謂的被組合候選者,其可從已經在該列表中之可能不同的候選者之移動參數,以及零移動向量被建立。
在另一較佳實施例中,用以傳信該等候選者集合之哪一區塊之語法同時地調適於編碼器和解碼器。如果例如,供合併區塊之3種選擇被給予,那三種選擇僅出現在語法中並且被考慮供熵編碼。所有其他的選擇之機率被考慮為0並且熵編解碼器在編碼器和解碼器同時地被調整。
由於合併程序結果被推論之預測參數可以代表關聯於一區塊之預測參數完全集合或它們可以代表這些預測參數(例如,對於多個假設預測被使用之區塊的一個假設預測參數)之子集。
於一較佳實施例中,關於合併資訊之語法元素使用脈絡模式被熵編碼。
轉移上述的實施例至一特定語法之方法在下面關於下面的圖形被說明。尤其是,第11-13圖展示採用上述實施例優點的一語法之不同部份。尤其是,依據在下面說明的實施例,圖像20首先向上-分割成為編碼樹區塊,其圖像內容使用第11圖中展示之語法coding_tree被編碼。如其中所展示,對於entropy_coding_mode_flag=1,其係關於,例如,脈絡適應式二進制算術編碼或另一特定熵編碼模式,目前
編碼樹區塊之四分樹細分割經由在標誌400稱為split_coding_unit_flag之旗標在語法部份coding_tree之內被傳信。如於第11圖之展示,依據在此處之後被說明之實施例,該樹根區塊被細分割如於第7a圖展示之深度-首先經過順序利用split_coding_unit_flag被傳信。每當達到一葉部節點時,該相同者代表一編碼單位,其使用語法函數coding_unit直接被編碼。這可自第11圖看出,當觀看在402之if-clause時,其檢查關於目前split_coding_unit_flag是否被設定。如果是,則函數coding_tree反覆地被呼叫,導致進一步的split_coding_unit_flag分別地在編碼器和解碼器進一步的發送/抽取。如果不是,亦即,如果split_coding_unit_flag=0,則第7a圖樹根區塊200之目前子區塊是葉部區塊並且為了編碼這編碼單位,第10圖之函數coding_unit在404被呼叫。
在目前說明實施例中,上述選擇被使用,依據其,合併僅可使用於像框間預測模式可用的圖像。亦即,像框內編碼切片/圖像不使用合併。這自第12圖可知,其中僅在切片型式不等於像框內-圖像切片型式情況,亦即,如果目前編碼單位所屬之目前切片允許分隔被像框間編碼,旗標skip_flag才在406被發送。合併係僅關於,依據本實施例,相關於像框間預測之預測參數。依據本實施例,skip_flag對於整體編碼單位40傳信並且如果skip_flag等於1,這旗標數值同時傳信至解碼器:1)目前編碼單位分隔模式是非分割模式,依據其,相
同者不被分隔並且呈現它本身為該編碼單位之唯一分隔,2)目前編碼單位/分隔是像框間編碼,亦即,是被指定至像框間編碼模式,3)目前編碼單位/分隔接受合併,以及4)目前編碼單位/分隔接受跳越模式,亦即,具有被致動跳越模式。
因此,如果skip_flag被設定,則函數prediction_unit在408被呼叫,其指示目前編碼單位為預測單位。但是,這不是切換於合併選擇之僅可能者。反而,如果關於整體編碼單位之skip_flag在406不被設定,則非像框內-圖像切片之編碼單位的預測型式利用語法元素pred_type在410被傳信,依據於該者,在目前編碼單位不進一步地被分隔情況,例如,在412,對於目前編碼單位之任何分隔呼叫函數prediction_unit。在第12圖中,僅四個不同的分隔選擇被展示,但是被展示於第8圖的其他分隔選擇同樣地也是可用的。另一可能性是分隔選擇PART_NxN不可用,但是其他者可用。在第12圖中被使用之分隔模式之名稱與第8圖中被展示之分隔選擇之間關聯性是利用在第8圖中各別的分隔選擇之下的各別下標被指示。請注意到,預測型式語法元素pred_type不僅傳信預測模式,亦即,像框內或像框間編碼,但是同時也傳信像框間編碼模式情況中之分隔。像框間-編碼模式情況進一步地被討論。函數prediction_unit對於各分隔被呼叫,例如上述編碼順序中分隔50以及60。函數prediction_unit在414以檢查skip_flag開始。如果skip_flag被
設定,merge_idx在416接在後面。在步驟414之檢查,是檢查關於在406被傳信關於整體編碼單位之skip_flag是否已被設定。如果否,則一merge_flag再次在418被傳信,並且如果後者被設定,則在420有一merge_idx接在後面,其指示目前分隔之合併候選者。再次地,僅目前編碼單位之目前預測模式是一像框間預測模式情況(參考422),merge_flag才在418對於目前分隔被傳信。亦即,skip_flag不被設定情況,在410預測模式經由pred_type被傳信,其中,對於各預測單位,假設pred_type傳信該像框間編碼模式被致動(參考422),一合併特定旗標,亦即merge_flag,對於接在下面之各分隔各別地被發送,如果合併藉由合併索引merge_idx對於各別的分隔被致動。
如自第13圖可見,在424使用於目前預測單位之預測參數發送是,依據本實施例,僅合併不被使用於目前預測單位情況中才被進行,亦即,因為合併不利用skip_flag被致動,也不利用各別分隔的各別merge_flag被致動。
如已於上面被指示,skip_flag=1同時地傳信沒有殘餘資料被發送。這可自對於目前編碼單位在第12圖中在426之殘餘資料發送僅skip_flag等於0情況下發生之事實導出,也可自即時地在其發送之後檢查skip_flag狀態在if-clause428之else選擇之內這殘餘資料發送之事實導出。
目前為止,第11至13圖之實施例僅在entropy_coding_mode_flag等於1之假設下被說明。但是,第11至13圖之實施例同時也包括entropy_coding_mode_flag=0
情況中上述實施例之實施例,於其情況中另一熵編碼模式被使用以便將語法元素進行熵編碼,例如,可變長度編碼並且,為了更精確故,脈絡適應式可變長度編碼,例如,尤其是,同時地一方面傳信合併致動並且另一方面傳信跳越模式之可能性存在於上述的實施例,依據其,通用地傳信狀態僅是在各別語法元素的多於二組狀態之中的一個狀態。這現在更詳細被說明。但是,應注意在兩種熵編碼模式之間切換的可能性是可選擇的,並且因此,不同的實施例可以僅允許兩種熵編碼模式之一而容易地自第11至13圖導出。
例如,參看第11圖。如果entropy_coding_mode_flag等於0並且slice_type語法元素傳信目前樹根區塊屬於像框間編碼切片,亦即,像框間編碼模式是可用的,則一語法元素cu_split_pred_part_mode在430被發送,並且這語法元素傳信,如經由其名稱被指示,目前編碼單位的進一步細分割資訊,跳越模式之致動或撤銷,合併以及預測模式致動或撒銷以及各別的分隔資訊。參看列表1:
列表1指明目前編碼單位不是目前樹根區塊四分樹細分割中最小的一個尺寸之情況中,語法元素cu_split_pred_part_mode可能狀態之主要性。該等可能狀態被列表於列表1最外面左行。因列表1指示其中目前編碼單位不最小尺寸的情況,有一狀態cu_split_pred_part_mode,亦即狀態0,其傳信目前編碼單位不是一實際編碼單位,但是須被進一步細分割成為四單位,其接著以深度-首先行經順序被經過,再次地,如在432呼叫函數coding_tree所述。亦即,cu_split_pred_part_mode=0傳信目前樹根區塊之目前四分樹細分割單位將被進一步再次細分割成為四個較小的單位,亦即,split_coding_unit_flag=1。但是,如果cu_split_pred_part_mode假定為任何其他的可能狀態,則split_coding_unit_flag=0並且目前單位形成目前樹根區塊之葉部區塊,亦即,一編碼單位。該情況中,cu_split_pred_part_mode之一個其餘可能狀態代表上面說明通用地傳信狀態,其同時地傳信目前編碼單位接受合併並且具有跳越模式被致動,利用列表1第三行skip_flag等於1被指示,而同時地傳信目前編碼單位沒有進一步的分隔發生,亦即,PART_2Nx2N被選擇為分隔模式。cu_split_pred_part_mode同時也具一可能狀態,其傳信合併致動與跳越模式不被引動。這是可能狀態2,對應至skip_flag=0而merge_flag=1,且無分隔模式作用,亦即,PART_2Nx2N。亦即,在該情況,merge_flag預先被傳信而不是在prediction_unit語法之內。在cu_split_pred_part_mode
其餘可能狀態,具有其他的分隔模式之像框間預測模式被傳信,而這些分隔模式分隔目前編碼單位成為多於一個分隔。
列表2展示依據目前樹根區塊之四分樹細分割具有最小的可能尺寸之目前編碼單位情況中,cu_split_pred_part_mode可能狀態之主要性或語法。該情況中,依據split_coding_unit_flag=0,所有的可能狀態cu_split_pred_part_mode對應至沒有進一步的細分割。但是,該可能狀態0傳信skip_flag=1,亦即,同時地傳信合併被致動並且跳越模式作用。此外,相同者亦傳信沒有分割發生,亦即,分隔模式PART_2Nx2N。可能狀態1對應至列表1之可能狀態2並且相同情況適用至列表2之可能狀態2,其對應至列表1之可能狀態3。
雖然在第11-13圖實施例之上面說明已經說明大部份功能和語法,一些進一步的資訊呈現在下面。
skip_flag[x0]y0]等於1指明目前編碼單位(參看圖形中40),當解碼P或B切片時,除了移動向量預測器索引(merge_idx)之外,在skip_flag[x0][y0]之後沒有更多語法元
素剖析。skip_flag[x0][y0]等於0指明編碼單位不跳越。陣列索引x0,y0指示相對於圖像之頂部-左方亮度樣本(圖形中20)所考慮編碼單位頂部-左方亮度樣本之位置(x0,y0)。
當skip_flag[x0][y0]不呈現時,其將被推論等於0。
如上所述,如果skip_flag[x0][y0]等於1,
- 預測模式被推論等於MODE_SKIP
- 分隔模式被推論等於PART_2Nx2N
cu_split_pred_part_mode[x0][y0]指明split_coding_unit_flag以及何時編碼單位不切割skip_flag[x0][y0],merge_flag[x0][y0],編碼單位之預測模式和分隔模式。陣列索引x0,y0指示相對於圖像之頂部-左方亮度樣本所考慮編碼單位頂部-左方亮度樣本之位置(x0,y0)。
merge_flag[x0][y0]指示是否對於目前預測單位(圖形中50以及60,亦即,在編碼單位40之內的分隔)之像框間預測參數自相鄰像框間-預測分隔推論出。陣列索引x0,y0指示相對於圖像之頂部-左方亮度樣本所考慮預測區塊頂部-左方亮度樣本之位置(x0,y0)。
merge_idx[x0][y0]指示合併候選者列表之合併候選者索引,其中x0,y0指示相對於圖像之頂部-左方亮度樣本所考慮預測區塊頂部-左方亮度樣本之位置(x0,y0)。
雖然未明確地被指示在上面第11-13圖說明中,合併候選者或合併候選者列表之決定這在實施例中是範例地不僅使用空間相鄰預測單位/分隔之編碼參數或預測參數,同時,候選者列表之形成也使用時間相鄰的時間相鄰分隔預
測參數以及先前編碼圖像。此外,空間及/或時間相鄰預測單位/分隔之預測參數組合被使用並且被包含於合併候選者列表。當然,僅其子集可以被使用。尤其是,第14圖展示決定空間相鄰,亦即,空間相鄰分隔或預測單位之一個可能性。第14圖範例地展示一預測單位或分隔60以及像素B0至B2以及A0和A1其直接地座落相鄰於分隔60之邊界500,亦即B2是對角線相鄰分隔60之頂部左方像素,B1是座落於分隔60之垂直上面並且相鄰頂部右方像素,B0是座落於對角線至分隔60之頂部右方像素,A1是座落於分隔60之水平左方,並且相鄰於底部左方像素,以及A0是座落於對角線至分隔60之底部左方像素。包含B0至B2以及A0和A1之至少一個像素的分隔形成一空間相鄰並且其預測參數形成一合併候選者。
為了進行上述選擇移除其將導致其中候選者同時也可用的另一分隔模式之那些候選者,下面的函數可被使用:尤其是,候選者N,亦即,編碼/預測參數自含蓋像素N=(B0,B1,B2,A0,A1),亦即,位置(xN,yN)之預測單位/分隔還原,自候選者列表移除,如果任何下面的條件為真(參看第8圖之分隔模式(PartMode)以及檢索在編碼單位內部的各別分隔的對應分隔索引(PartIdx)):- 目前預測單位之分隔模式是PART_2NxN且分隔索引是等於1並且含蓋亮度位置(xP,yP-1)(PartIdx=0)以及亮度位置(xN,yN)(Cand.N)之預測單位具有相同的移動參數:mvLX[xP,yP-1]==mvLX[xN,yN]
refIdxLX[xP,yP-1]==refIdxLX[xN,yN]
predFlagLX[xP,yP-1]==predFlagLX[xN,yN]
- 目前預測單位分隔模式是PART_Nx2N且PartIdx是等於1並且含蓋亮度位置(xP-1,yP)(PartIdx=0)及亮度(xN,yN)(Cand.N)之預測單位具有相同的移動參數:mvLX[xP-1,yP]==mvLX[xN,yN]
refIdxLX[xP-1,yP]==refIdxLX[xN,yN]
predFlagLX[xP-1,yP]==predFlagLX[xN,yN]
- 目前預測單位之分隔模式是PART_NxN且PartIdx是等於3並且含蓋亮度位置(xP-1,yP)(PartIdx=2)及亮度位置(xP-1,yP-1)(PartIdx=0)之預測單位具有相同的移動參數:mvLX[xP-1,yP]==mvLX[xP-1,yP-1]
refIdxLX[xP-1,yP]==refIdxLX[xP-1,yP-1]
predFlagLX[xP-1,yP]==predFlagLX[xP-1,yP-1]
並且含蓋亮度位置(xP,yP-1)(PartIdx=1)及亮度位置(xN,yN)(Cand.N)之預測單位具有相同的移動參數:mvLX[xP,yP-1]==mvLX[xN,yN]
refIdxLX[xP,yP-1]==refIdxLX[xN,yN]
predFlagLX[xP,yP-1]==predFlagLX[xN,yN]
- 目前預測單位之分隔模式是PART_NxN且PartIdx是等於3並且含蓋亮度位置(xP,yP-1)(PartIdx=1)及亮度位置(xP-1,yP-1)(PartIdx=0)之預測單位具有相同的移動參數:mvLX[xP,yP-1]==mvLX[xP-1,yP-1]
refIdxLX[xP,yP-1]==refIdxLX[xP-1,yP-1]
predFlagLX[xP,yP-1]==predFlagLX[xP-1,yP-1]
並且含蓋亮度位置(xP-1,yP)(PartIdx=2)及亮度位置(xN,yN)(Cand.N)之預測單位相同的移動參數:mvLX[xP-1,yP]==mvLX[xN,yN]
refIdxLX[xP-1,yP]==refIdxLX[xN,yN]
於這方面,請注意到,位置(xP,yP)指示目前分隔/預測單位之最上方像素。亦即,依據第一項,所有的編碼參數候選者被檢查,其利用直接地採用相鄰預測單位,亦即預測單位N,的各別編碼參數被導出。但是,其他的編碼參數候選者可依相同方式被檢查,關於其是否相同於各別預測單位的編碼參數,與其合併將導致也被語法支援之另一分隔樣型的分隔。依據剛好上述被說明之實施例,編碼參數之相等性包括檢查移動向量,亦即,mvLX,參考索引,亦即,refIxLX,以及預測旗標predFlagLX之相等性,其指示關聯於參考列表X之參數,亦即,移動向量和參考索引,是具有X為0或1,被使用於像框間預測。
請注意到,剛剛提及之相鄰預測單位/分隔之編碼參數候選者移除可能性也可應用於被第8圖右半部展示的支援非對稱分隔模式情況。該情況中,模式PART_2NxN可代表所有的水平細分割模式並且PART_Nx2N可對應至所有的垂直細分割模式。進一步地,模式PART_NxN可從支援分隔模式或分隔樣型排除並且該情況中,僅首先二次移除檢查將被進行。
關於第11-14圖實施例,同時也應該注意到,可能自候
選者列表排除像框內預測分隔,亦即,它們的編碼參數,當然,不被包含進入候選者列表。
進一步地,應注意到,三組脈絡可分別地被使用於skip_flag,merge_flag以及merge_idx。
雖然一些論點以裝置脈絡被說明,應明白,這些論點同時也代表對應方法的說明,其中一區塊或裝置對應至方法步驟或一方法步驟之特點。類似地,以方法步驟脈絡被說明之論點同時也代表一對應的區塊或項目之說明或一對應裝置的特點。一些或所有的方法步驟可以藉由(或使用)一硬體裝置被執行,例如,微處理機、可編程序電腦或電子電路。於一些實施例中,最重要方法步驟之一些或多個可以利用此些裝置被執行。
取決於某些實作需要,本發明實施例可以硬體或軟體被實作。該實作可利用具有電子式可讀取控制信號儲存在其上之數位儲存媒體而被進行,例如,軟磁碟、DVD、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體,其與可程規電腦系統配合(或能夠配合),以至於分別的方法被進行。因此,該數位儲存媒體可以被電腦讀取。
依據本發明之一些實施例包含具有電子式可讀取控制信號之資料攜載器,其可與可程規電腦系統配合,以至於此處說明的方法之一者被進行。
通常,本發明之實施例可被實作如具有程式碼之電腦程式產品,當在電腦上執行該電腦程式產品時,該程式碼是可供用於進行該等方法之一者的操作。該程式碼,例如,
可被儲存在一機器可讀取攜載器上。
其他實施例包含用以進行此處說明的方法之一者的電腦程式,其被儲存在機器可讀取攜載器上。
換言之,本發明方法之一實施例,因此,是當在一電腦上執行一電腦程式時,該電腦程式是用以進行此處說明的方法之一者的程式碼之電腦程式。
本發明方法之一進一步的實施例,因此,是一資料攜載器(或數位儲存媒體,或電腦可讀取媒體),其包含被記錄其之上而用以進行此處說明的方法之一者的電腦程式。該資料攜載器,該數位儲存媒體或該記錄媒體是一般的實體及/或非暫態性。
本發明方法之一進一步的實施例,因此是一資料流或一信號序列,其代表用以進行此處說明的方法之一者的電腦程式。該資料流或信號序列,例如,可被組態以經由資料通訊連接(例如,經由網際網路)而被傳輸。
一進一步的實施例包含一處理構件,例如,電腦、或可程規邏輯裝置,其被組態或被調適以進行此處說明的方法之一者。
一進一步的實施例包含一電腦,其具有被安裝在其上之用以進行此處說明的方法之一者的電腦程式。
依據本發明的進一步實施例包含一裝置或一系統,其被組態以傳送(例如,電子式或光學式)供進行此處說明的方法之一的電腦程式至一接收器。該接收器,例如,為一電腦、一移動式裝置、一記憶體裝置或其類似者。該裝置或
系統,例如,包含用以傳送電腦程式至接收器之一檔案伺服器。
於一些實施例中,一可程規邏輯設備(例如,場式可程規閘陣列)可被使用以進行此處說明的方法之一些或所有的功能。於一些實施例中,一場式可程規閘陣列可與微處理器共同操作以便進行此處說明的方法之一者。通常,該等方法最好是利用任何之硬體裝置被進行。
上面說明之實施例僅是供展示本發明原理。熟習本技術者應了解,本發明之配置以及此處說明之細節可有各種的修改與變化。因此其欲僅受限定於本發明待決之申請專利範圍的範疇並且不受限定於經由此處本發明實施例之說明以及敘述的特定細節。
10‧‧‧編碼器
20‧‧‧圖像
30‧‧‧位元流
40‧‧‧區塊
50、60‧‧‧子區塊
70‧‧‧編碼順序
Claims (18)
- 一種用以解碼使用切片將圖像編碼入其中的位元串流之解碼器,該等切片係由編碼單位所組成,該解碼器係組配來進行下列動作:從與一目前切片之一切片類型預測模式有關的該位元串流抽取資訊,若該切片類型預測模式與一像框內預測模式不同,從該位元串流抽取一旗標,若該旗標為假,從該位元串流抽取預測類型資訊。
- 如請求項1之解碼器,其組配來:若該旗標為真,將該預測類型資訊推斷為指示一像框間預測模式。
- 如請求項1或2之解碼器,其組配來:若該旗標為假,從該位元串流抽取一預測殘餘之轉換係數;及若該旗標為真,跳過從該位元串流抽取該等轉換係數。
- 如請求項2至3中任一項之解碼器,其組配來執行針對組成該目前切片之各編碼單位的該旗標之抽取、該預測類型資訊之推斷、該等轉換係數之抽取、該預測類型資訊之跳越及抽取。
- 如請求項1之解碼器,其中該圖像具有與其相關聯之一深度地圖作為額外資訊。
- 如請求項1之解碼器,其中資訊樣本之陣列為與該圖像之不同平面有關的樣本陣列中之一者,該圖像之不同平 面係彼此獨立編碼。
- 一種用以使用切片將圖像編碼入位元串流中之編碼器,該等切片係由編碼單位所組成,該編碼器係組配來進行下列動作:將資訊插入與一目前切片之一切片類型預測模式有關的該位元串流,若該切片類型預測模式與一像框內預測模式不同,將一旗標插入該位元串流,若該旗標為假,將預測類型資訊插入該位元串流。
- 如請求項7之編碼器,其組配來:若該旗標為真,使用一像框間預測模式。
- 如請求項7或8之編碼器,其組配來:若該旗標為假,將一預測殘餘之轉換係數插入該位元串流;及若該旗標為真,跳過將該等轉換係數插入該位元串流。
- 如請求項7至9中任一項之編碼器,其組配來執行針對組成該目前切片之各編碼單位的該旗標之插入、該預測類型資訊之推斷、該等轉換係數之插入、該預測類型資訊之跳越及插入。
- 如請求項7之編碼器,其中該圖像具有與其相關聯之一深度地圖作為額外資訊。
- 如請求項7之編碼器,其中資訊樣本之陣列為與該圖像之不同平面有關的樣本陣列中之一者,該圖像之不同平面係彼此獨立編碼。
- 一種用以解碼使用切片將圖像編碼入其中的位元串流之方法,該等切片係由編碼單位所組成,該方法包含下列步驟:從與一目前切片之一切片類型預測模式有關的該位元串流抽取資訊,若該切片類型預測模式與一像框內預測模式不同,從該位元串流抽取一旗標,若該旗標為假,從該位元串流抽取預測類型資訊。
- 一種用以使用切片將圖像編碼入位元串流中之方法,該等切片係由編碼單位所組成,該方法包含下列步驟:將資訊插入與一目前切片之一切片類型預測模式有關的該位元串流,若該切片類型預測模式與一像框內預測模式不同,將一旗標插入該位元串流,若該旗標為假,將預測類型資訊插入該位元串流。
- 一種藉由用以使用切片將圖像編碼入位元串流中之方法被編碼的位元串流,該等切片係由編碼單位所組成,該方法包含下列步驟:將資訊插入與一目前切片之一切片類型預測模式有關的該位元串流,若該切片類型預測模式與一像框內預測模式不同,將一旗標插入該位元串流, 若該旗標為假,將預測類型資訊插入該位元串流。
- 如請求項15之位元串流,其中該圖像具有與其相關聯之一深度地圖作為額外資訊。
- 如請求項15之位元串流,其中資訊樣本之陣列為與該圖像之不同平面有關的樣本陣列中之一者,該圖像之不同平面係彼此獨立編碼。
- 一種具有程式碼之電腦程式,該程式碼於一電腦上運行時,用以執行如請求項13或14之方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US41024610P | 2010-11-04 | 2010-11-04 | |
US61/410,246 | 2010-11-04 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201717617A true TW201717617A (zh) | 2017-05-16 |
TWI644561B TWI644561B (zh) | 2018-12-11 |
Family
ID=44925528
Family Applications (7)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW105131691A TWI644561B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合倂及跳越模式之圖像編碼技術、以及相關裝置、方法、電腦程式及數位儲存媒體 |
TW107137593A TWI725348B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置、方法、電腦程式及數位儲存媒體 |
TW112112476A TWI833626B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置及方法 |
TW100140313A TWI513277B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術 |
TW104135588A TWI559740B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合倂及跳越模式之圖像編碼技術(一) |
TW110110237A TWI799816B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置、方法、電腦程式及數位儲存媒體 |
TW112112474A TWI832743B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置及方法 |
Family Applications After (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW107137593A TWI725348B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置、方法、電腦程式及數位儲存媒體 |
TW112112476A TWI833626B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置及方法 |
TW100140313A TWI513277B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術 |
TW104135588A TWI559740B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合倂及跳越模式之圖像編碼技術(一) |
TW110110237A TWI799816B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置、方法、電腦程式及數位儲存媒體 |
TW112112474A TWI832743B (zh) | 2010-11-04 | 2011-11-04 | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置及方法 |
Country Status (17)
Country | Link |
---|---|
US (10) | US9924193B2 (zh) |
EP (6) | EP2636218B1 (zh) |
JP (7) | JP6258704B2 (zh) |
KR (10) | KR102126374B1 (zh) |
CN (11) | CN107071487B (zh) |
DK (2) | DK3962088T3 (zh) |
ES (2) | ES2891598T3 (zh) |
FI (1) | FI3962088T3 (zh) |
HK (1) | HK1245543A1 (zh) |
HU (2) | HUE063103T2 (zh) |
LT (2) | LT3962088T (zh) |
PL (2) | PL3962088T3 (zh) |
PT (2) | PT3962088T (zh) |
RS (2) | RS62555B1 (zh) |
SI (2) | SI3962088T1 (zh) |
TW (7) | TWI644561B (zh) |
WO (1) | WO2012059577A1 (zh) |
Families Citing this family (118)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106067983B (zh) * | 2010-04-13 | 2019-07-12 | Ge视频压缩有限责任公司 | 解码数据流的方法、生成数据流的方法及解码器 |
EP3703369B1 (en) | 2010-04-13 | 2024-07-24 | GE Video Compression, LLC | Sample region merging |
CN106231337B (zh) | 2010-04-13 | 2020-06-19 | Ge视频压缩有限责任公司 | 解码器、解码方法、编码器以及编码方法 |
BR122020008249B1 (pt) | 2010-04-13 | 2021-02-17 | Ge Video Compression, Llc | herança em amostra de arranjo em subdivisão multitree |
KR102126374B1 (ko) * | 2010-11-04 | 2020-06-24 | 지이 비디오 컴프레션, 엘엘씨 | 블록 병합 및 스킵 모드를 지원하는 화상 코딩 |
WO2012118358A2 (ko) * | 2011-03-03 | 2012-09-07 | 한국전자통신연구원 | 변환 계수 스캔 방법 및 그 장치 |
US11102494B2 (en) * | 2011-03-03 | 2021-08-24 | Electronics And Telecommunication Research Institute | Method for scanning transform coefficient and device therefor |
US9066110B2 (en) | 2011-03-08 | 2015-06-23 | Texas Instruments Incorporated | Parsing friendly and error resilient merge flag coding in video coding |
JP5982734B2 (ja) | 2011-03-11 | 2016-08-31 | ソニー株式会社 | 画像処理装置および方法 |
KR20120140181A (ko) | 2011-06-20 | 2012-12-28 | 한국전자통신연구원 | 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치 |
US9313494B2 (en) * | 2011-06-20 | 2016-04-12 | Qualcomm Incorporated | Parallelization friendly merge candidates for video coding |
US8743969B2 (en) | 2011-06-23 | 2014-06-03 | Panasonic Corporation | Image decoding method and apparatus based on a signal type of the control parameter of the current block |
WO2012176464A1 (ja) | 2011-06-24 | 2012-12-27 | パナソニック株式会社 | 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置 |
KR102062283B1 (ko) * | 2011-06-24 | 2020-01-03 | 선 페이턴트 트러스트 | 화상 복호 방법, 화상 부호화 방법, 화상 복호 장치, 화상 부호화 장치 및 화상 부호화 복호 장치 |
CA2842646C (en) | 2011-06-27 | 2018-09-04 | Panasonic Corporation | Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus |
CN106878724B (zh) | 2011-06-28 | 2020-06-05 | 太阳专利托管公司 | 图像编码解码装置 |
MX2013010892A (es) | 2011-06-29 | 2013-12-06 | Panasonic Corp | Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes. |
CA2837537C (en) | 2011-06-30 | 2019-04-02 | Panasonic Corporation | Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus |
AU2012277219A1 (en) | 2011-06-30 | 2013-09-19 | Sun Patent Trust | Image decoding method, image encoding method, image decoding device, image encoding device, and image encoding/decoding device |
CA2838575C (en) | 2011-07-11 | 2018-06-12 | Panasonic Corporation | Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus |
US9300975B2 (en) | 2011-09-11 | 2016-03-29 | Texas Instruments Incorporated | Concurrent access shared buffer in a video encoder |
EP2803190B1 (en) * | 2012-01-09 | 2017-10-25 | Dolby Laboratories Licensing Corporation | Hybrid reference picture reconstruction method for multiple layered video coding systems |
US9749645B2 (en) * | 2012-06-22 | 2017-08-29 | Microsoft Technology Licensing, Llc | Coded-block-flag coding and derivation |
US10230956B2 (en) | 2012-09-26 | 2019-03-12 | Integrated Device Technology, Inc. | Apparatuses and methods for optimizing rate-distortion of syntax elements |
WO2014053518A1 (en) | 2012-10-01 | 2014-04-10 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Scalable video coding using subblock-based coding of transform coefficient blocks in the enhancement layer |
US9699450B2 (en) | 2012-10-04 | 2017-07-04 | Qualcomm Incorporated | Inter-view predicted motion vector for 3D video |
WO2014058280A1 (ko) * | 2012-10-12 | 2014-04-17 | 한국전자통신연구원 | 영상의 부호화/복호화 방법 및 이를 이용하는 장치 |
CN104782123A (zh) * | 2012-10-22 | 2015-07-15 | 数码士控股有限公司 | 用于预测视点间运动的方法以及用于确定3维视频中的视点间合并候选的方法 |
US20140219331A1 (en) * | 2013-02-06 | 2014-08-07 | Magnum Semiconductor, Inc. | Apparatuses and methods for performing joint rate-distortion optimization of prediction mode |
US9300906B2 (en) * | 2013-03-29 | 2016-03-29 | Google Inc. | Pull frame interpolation |
WO2014186542A1 (en) * | 2013-05-15 | 2014-11-20 | Vid Scale, Inc. | Single loop decoding based inter layer prediction |
WO2015000108A1 (en) * | 2013-07-01 | 2015-01-08 | Mediatek Singapore Pte. Ltd. | An improved texture merging candidate in 3dvc |
KR102257269B1 (ko) | 2013-10-14 | 2021-05-26 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 이미지 코딩 및 디코딩을 위한 인트라 블록 카피 예측 모드의 피쳐 |
KR102275639B1 (ko) | 2013-10-14 | 2021-07-08 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 영상 코딩 및 디코딩에 대한 기본 색상 인덱스 맵 모드의 특징 |
CN105659602B (zh) | 2013-10-14 | 2019-10-08 | 微软技术许可有限责任公司 | 用于视频和图像编码的帧内块复制预测模式的编码器侧选项 |
EP3061253A4 (en) | 2013-10-25 | 2016-08-31 | Microsoft Technology Licensing Llc | PAIRING OF BLOCKS BY HASHING VIDEO AND IMAGE CODING |
WO2015058397A1 (en) | 2013-10-25 | 2015-04-30 | Microsoft Technology Licensing, Llc | Representing blocks with hash values in video and image coding and decoding |
US10390034B2 (en) | 2014-01-03 | 2019-08-20 | Microsoft Technology Licensing, Llc | Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area |
US10469863B2 (en) | 2014-01-03 | 2019-11-05 | Microsoft Technology Licensing, Llc | Block vector prediction in video and image coding/decoding |
US11284103B2 (en) | 2014-01-17 | 2022-03-22 | Microsoft Technology Licensing, Llc | Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning |
US10542274B2 (en) | 2014-02-21 | 2020-01-21 | Microsoft Technology Licensing, Llc | Dictionary encoding and decoding of screen content |
KR102185245B1 (ko) | 2014-03-04 | 2020-12-01 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 해시 기반 블록 매칭을 위한 해시 테이블 구성 및 이용가능성 검사 |
US10368092B2 (en) | 2014-03-04 | 2019-07-30 | Microsoft Technology Licensing, Llc | Encoder-side decisions for block flipping and skip mode in intra block copy prediction |
US10368091B2 (en) | 2014-03-04 | 2019-07-30 | Microsoft Technology Licensing, Llc | Block flipping and skip mode in intra block copy prediction |
US10250895B2 (en) * | 2014-03-14 | 2019-04-02 | Sharp Kabushiki Kaisha | DPB capacity limits |
WO2015192353A1 (en) | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
US10681372B2 (en) | 2014-06-23 | 2020-06-09 | Microsoft Technology Licensing, Llc | Encoder decisions based on results of hash-based block matching |
ES2625733T3 (es) | 2014-07-16 | 2017-07-20 | Saint-Gobain Glass France | Sustrato OLED difusor transparente y método para producir dicho sustrato |
JP6462119B2 (ja) | 2014-09-30 | 2019-01-30 | マイクロソフト テクノロジー ライセンシング,エルエルシー | コンピューティングデバイス |
EP3202150B1 (en) | 2014-09-30 | 2021-07-21 | Microsoft Technology Licensing, LLC | Rules for intra-picture prediction modes when wavefront parallel processing is enabled |
EP3028999B1 (en) | 2014-12-01 | 2017-05-24 | Saint-Gobain Glass France | Transparent diffusive oled substrate and method for producing such a substrate |
US9591325B2 (en) | 2015-01-27 | 2017-03-07 | Microsoft Technology Licensing, Llc | Special case handling for merged chroma blocks in intra block copy prediction mode |
US9936201B2 (en) * | 2015-01-27 | 2018-04-03 | Qualcomm Incorporated | Contexts for large coding tree units |
EP3310055A4 (en) * | 2015-06-09 | 2018-06-20 | Huawei Technologies Co. Ltd. | Image encoding/decoding method and apparatus |
CN106664405B (zh) | 2015-06-09 | 2020-06-09 | 微软技术许可有限责任公司 | 用调色板模式对经逸出编码的像素的稳健编码/解码 |
US10091506B2 (en) * | 2015-06-11 | 2018-10-02 | Sony Corporation | Data-charge phase data compression architecture |
CN106559669B (zh) | 2015-09-29 | 2018-10-09 | 华为技术有限公司 | 预测图像编解码方法及装置 |
US11695958B2 (en) * | 2016-02-01 | 2023-07-04 | Lg Electronics Inc. | Method and apparatus for encoding/decoding video signal by using edge-adaptive graph-based transform |
US10390015B2 (en) * | 2016-08-26 | 2019-08-20 | Qualcomm Incorporated | Unification of parameters derivation procedures for local illumination compensation and cross-component linear model prediction |
US10390039B2 (en) | 2016-08-31 | 2019-08-20 | Microsoft Technology Licensing, Llc | Motion estimation for screen remoting scenarios |
US11095892B2 (en) | 2016-09-20 | 2021-08-17 | Kt Corporation | Method and apparatus for processing video signal |
WO2018062892A1 (ko) * | 2016-09-28 | 2018-04-05 | 엘지전자(주) | 가중치 인덱스에 기초하여 최적의 예측을 수행하는 방법 및 장치 |
WO2018062950A1 (ko) * | 2016-09-30 | 2018-04-05 | 엘지전자(주) | 영상 처리 방법 및 이를 위한 장치 |
KR20190053238A (ko) * | 2016-10-06 | 2019-05-17 | 엘지전자 주식회사 | 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치 |
KR20180045530A (ko) * | 2016-10-26 | 2018-05-04 | 디지털인사이트 주식회사 | 임의의 블록 분할을 사용하는 비디오 코딩 방법 및 장치 |
CN117119179A (zh) * | 2016-11-18 | 2023-11-24 | 株式会社Kt | 视频解码方法、视频编码方法和压缩视频数据发送设备 |
CN116744022A (zh) | 2016-11-25 | 2023-09-12 | 株式会社Kt | 用于对视频进行编码和解码的方法 |
US11095877B2 (en) | 2016-11-30 | 2021-08-17 | Microsoft Technology Licensing, Llc | Local hash-based motion estimation for screen remoting scenarios |
US10715827B2 (en) * | 2017-01-06 | 2020-07-14 | Mediatek Inc. | Multi-hypotheses merge mode |
US10943100B2 (en) | 2017-01-19 | 2021-03-09 | Mindmaze Holding Sa | Systems, methods, devices and apparatuses for detecting facial expression |
WO2018142228A2 (en) | 2017-01-19 | 2018-08-09 | Mindmaze Holding Sa | Systems, methods, apparatuses and devices for detecting facial expression and for tracking movement and location including for at least one of a virtual and augmented reality system |
WO2018146558A2 (en) * | 2017-02-07 | 2018-08-16 | Mindmaze Holding Sa | Systems, methods and apparatuses for stereo vision and tracking |
WO2018174591A1 (ko) * | 2017-03-22 | 2018-09-27 | 김기백 | 영상을 구성하는 화소값 범위를 이용한 영상 부호화/복호화 방법 |
CN116828179A (zh) * | 2017-03-31 | 2023-09-29 | 松下电器(美国)知识产权公司 | 图像编码装置及存储介质 |
US10630978B2 (en) | 2017-05-12 | 2020-04-21 | Blackberry Limited | Methods and devices for intra-coding in video compression |
JP7147145B2 (ja) * | 2017-09-26 | 2022-10-05 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法、及び動画像符号化プログラム |
US10986349B2 (en) | 2017-12-29 | 2021-04-20 | Microsoft Technology Licensing, Llc | Constraints on locations of reference blocks for intra block copy prediction |
KR102524628B1 (ko) | 2018-01-05 | 2023-04-21 | 에스케이텔레콤 주식회사 | 영상을 부호화 또는 복호화하는 방법 및 장치 |
CN115002459A (zh) | 2018-01-05 | 2022-09-02 | Sk电信有限公司 | 视频解码设备、视频编码设备和非暂时性计算机可读介质 |
US11328533B1 (en) | 2018-01-09 | 2022-05-10 | Mindmaze Holding Sa | System, method and apparatus for detecting facial expression for motion capture |
TWI749297B (zh) * | 2018-02-28 | 2021-12-11 | 弗勞恩霍夫爾協會 | 合成式預測及限制性合併技術 |
KR20210005326A (ko) * | 2018-03-05 | 2021-01-13 | 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 | 부호화 장치, 복호 장치, 부호화 방법 및 복호 방법 |
CN118741096A (zh) * | 2018-03-27 | 2024-10-01 | 数码士有限公司 | 使用运动补偿的视频信号处理方法及设备 |
RU2752011C1 (ru) | 2018-04-01 | 2021-07-21 | Б1 Инститьют Оф Имидж Текнолоджи, Инк. | Способ и оборудование для кодирования/декодирования изображения |
US10659781B2 (en) * | 2018-04-02 | 2020-05-19 | Tencent America LLC | Concatenated coding units in flexible tree structure |
CN110505482B (zh) * | 2018-05-16 | 2021-10-26 | 华为技术有限公司 | 一种编解码方法及装置 |
US11051025B2 (en) * | 2018-07-13 | 2021-06-29 | Tencent America LLC | Method and apparatus for video coding |
TW202304207A (zh) * | 2018-07-13 | 2023-01-16 | 弗勞恩霍夫爾協會 | 分區框內寫碼技術 |
WO2020044196A1 (en) | 2018-08-26 | 2020-03-05 | Beijing Bytedance Network Technology Co., Ltd. | Combined history-based motion vector predictor and multi-motion model decoding |
WO2020060374A1 (ko) * | 2018-09-21 | 2020-03-26 | 엘지전자 주식회사 | 어파인 예측을 이용하여 비디오 신호를 처리하기 위한 방법 및 장치 |
FR3086485A1 (fr) * | 2018-09-21 | 2020-03-27 | Orange | Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image. |
BR112021005558A2 (pt) * | 2018-09-24 | 2021-06-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | aparelho para codificar e decodificar um bloco de coeficientes de transformação, codificador para codificar e decodificador para decodificar um bloco de coeficiente de transformação, método para codificar e decodificar um bloco de coeficientes de transformação, corrente de dados |
US20210400298A1 (en) * | 2018-09-28 | 2021-12-23 | Lg Electronics Inc. | Method and apparatus for processing video signal by using affine prediction |
CN118175301A (zh) | 2018-10-08 | 2024-06-11 | Lg电子株式会社 | 图像解码方法、图像编码方法、存储介质和发送方法 |
WO2020084506A1 (en) | 2018-10-23 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Harmonized local illumination compensation and intra block copy coding |
WO2020084502A1 (en) | 2018-10-23 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Video processing using local illumination compensation |
CN111107354A (zh) * | 2018-10-29 | 2020-05-05 | 华为技术有限公司 | 一种视频图像预测方法及装置 |
US10931958B2 (en) | 2018-11-02 | 2021-02-23 | Fungible, Inc. | JPEG accelerator using last-non-zero (LNZ) syntax element |
US10827191B2 (en) | 2018-11-02 | 2020-11-03 | Fungible, Inc. | Parallel coding of syntax elements for JPEG accelerator |
US10827192B2 (en) * | 2018-11-02 | 2020-11-03 | Fungible, Inc. | Work allocation for JPEG accelerator |
US10848775B2 (en) | 2018-11-02 | 2020-11-24 | Fungible, Inc. | Memory layout for JPEG accelerator |
EP3878179A1 (en) * | 2018-11-06 | 2021-09-15 | InterDigital VC Holdings, Inc. | Parameter grouping among plural coding units for video encoding and decoding |
US11115652B2 (en) | 2018-12-07 | 2021-09-07 | Tencent America LLC | Method and apparatus for further improved context design for prediction mode and coded block flag (CBF) |
US10893298B2 (en) | 2018-12-12 | 2021-01-12 | Tencent America LLC | Method and apparatus for video coding |
CN118741097A (zh) | 2018-12-12 | 2024-10-01 | 数码士有限公司 | 使用当前图片参考的视频信号处理方法和设备 |
WO2020123998A1 (en) * | 2018-12-13 | 2020-06-18 | Tencent America LLC | Video decoding by determining block reconstruction based on signaling information |
KR102625145B1 (ko) * | 2018-12-17 | 2024-01-16 | 삼성전자주식회사 | 예측 모드를 시그널링하는 비디오 신호 처리 방법 및 장치 |
MX2021007328A (es) * | 2018-12-20 | 2021-08-24 | Fraunhofer Ges Forschung | Intrapredicciones usando transformaciones lineales o afines con reduccion de muestras vecinas. |
CN113302918A (zh) | 2019-01-15 | 2021-08-24 | 北京字节跳动网络技术有限公司 | 视频编解码中的加权预测 |
CN113302927B (zh) * | 2019-01-18 | 2024-04-09 | 韦勒斯标准与技术协会公司 | 使用运动补偿的视频信号处理方法和设备 |
WO2020171681A1 (ko) * | 2019-02-19 | 2020-08-27 | 주식회사 윌러스표준기술연구소 | 인트라 예측 기반 비디오 신호 처리 방법 및 장치 |
JP7148739B2 (ja) | 2019-03-04 | 2022-10-05 | エルジー エレクトロニクス インコーポレイティド | 映像コーディングシステムにおいて文脈コーディングされたサインフラグを使用する映像デコーディング方法及びその装置 |
US12120289B2 (en) | 2019-08-21 | 2024-10-15 | Lg Electronics Inc. | Image encoding/decoding method and device for performing prediction on basis of HMVP candidate, and method for transmitting bitstream |
CN111050165B (zh) * | 2019-11-29 | 2022-02-22 | 苏州浪潮智能科技有限公司 | 一种视频解码的方法、设备及介质 |
US11405628B2 (en) | 2020-04-06 | 2022-08-02 | Tencent America LLC | Method and apparatus for video coding |
US11202085B1 (en) | 2020-06-12 | 2021-12-14 | Microsoft Technology Licensing, Llc | Low-cost hash table construction and hash-based block matching for variable-size blocks |
US20220408098A1 (en) * | 2021-06-18 | 2022-12-22 | Tencent America LLC | Block-wise entropy coding method in neural image compression |
WO2023135518A1 (en) * | 2022-01-12 | 2023-07-20 | Nokia Technologies Oy | High-level syntax of predictive residual encoding in neural network compression |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3353968B2 (ja) | 1992-09-25 | 2002-12-09 | オリンパス光学工業株式会社 | 画像処理装置 |
JPH08298665A (ja) | 1994-04-21 | 1996-11-12 | Sanyo Electric Co Ltd | 動きベクトル検出回路、検出方法、及び動画像圧縮回路 |
US6026232A (en) | 1995-07-13 | 2000-02-15 | Kabushiki Kaisha Toshiba | Method and system to replace sections of an encoded video bitstream |
KR100287868B1 (ko) | 1998-06-17 | 2001-05-02 | 구자홍 | 디지털 저장 매체의 신호 기록재생장치 |
JP3561485B2 (ja) * | 2000-08-18 | 2004-09-02 | 株式会社メディアグルー | 符号化信号分離・合成装置、差分符号化信号生成装置、符号化信号分離・合成方法、差分符号化信号生成方法、符号化信号分離・合成プログラムを記録した媒体および差分符号化信号生成プログラムを記録した媒体 |
WO2003053066A1 (en) | 2001-12-17 | 2003-06-26 | Microsoft Corporation | Skip macroblock coding |
JP4088205B2 (ja) | 2002-06-11 | 2008-05-21 | 松下電器産業株式会社 | 符号化装置、コンピュータ読取可能なプログラム、符号化方法。 |
US20060133475A1 (en) * | 2003-02-17 | 2006-06-22 | Bruls Wilhelmus H A | Video coding |
US20060047522A1 (en) | 2004-08-26 | 2006-03-02 | Nokia Corporation | Method, apparatus and computer program to provide predictor adaptation for advanced audio coding (AAC) system |
US8948266B2 (en) | 2004-10-12 | 2015-02-03 | Qualcomm Incorporated | Adaptive intra-refresh for digital video encoding |
EP1647937A1 (en) * | 2004-10-15 | 2006-04-19 | Sony Deutschland GmbH | Method for motion estimation |
US7551772B2 (en) * | 2004-11-30 | 2009-06-23 | Hewlett-Packard Development Company, L.P. | Blur estimation in a digital image |
KR101246915B1 (ko) * | 2005-04-18 | 2013-03-25 | 삼성전자주식회사 | 동영상 부호화 또는 복호화 방법 및 장치 |
CN101375605A (zh) * | 2006-01-31 | 2009-02-25 | 汤姆森许可贸易公司 | 用于实现降低分辨率更新模式的限制预测以及视频编码器和解码器中的复杂度可分级的方法和装置 |
KR20090005001A (ko) | 2006-04-21 | 2009-01-12 | 가부시끼가이샤 도시바 | 엔트로피 부호화 방법 및 장치와, 엔트로피 복호화 방법 및장치 |
US20080025390A1 (en) * | 2006-07-25 | 2008-01-31 | Fang Shi | Adaptive video frame interpolation |
JP4956304B2 (ja) | 2006-08-08 | 2012-06-20 | キヤノン株式会社 | 画像符号化装置及びその制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体 |
JP5666293B2 (ja) * | 2007-04-12 | 2015-02-12 | トムソン ライセンシングThomson Licensing | ビデオ・エンコーディング、およびデコーディングのためのスキップ/ダイレクトモードのコンテクストに依存するマージのための方法と装置 |
JP4774382B2 (ja) * | 2007-05-08 | 2011-09-14 | 株式会社リコー | 画像処理装置、画像処理回路、及び、画像処理方法 |
EP2191652B1 (en) * | 2007-09-02 | 2017-02-08 | Lg Electronics Inc. | A method and an apparatus for processing a video signal |
CN101415115B (zh) * | 2007-10-15 | 2011-02-02 | 华为技术有限公司 | 基于运动跳跃模式的视频编解码方法及其编解码器 |
WO2009091383A2 (en) | 2008-01-11 | 2009-07-23 | Thomson Licensing | Video and depth coding |
JP5071721B2 (ja) | 2008-02-27 | 2012-11-14 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
WO2010041855A2 (en) * | 2008-10-06 | 2010-04-15 | Lg Electronics Inc. | A method and an apparatus for processing a video signal |
TWI370410B (en) * | 2008-12-30 | 2012-08-11 | Ind Tech Res Inst | Image processing method for providing depth information |
US8873626B2 (en) | 2009-07-02 | 2014-10-28 | Qualcomm Incorporated | Template matching for video coding |
US20110090954A1 (en) * | 2009-10-21 | 2011-04-21 | Cohen Robert A | Video Codes with Directional Transforms |
CN101835044B (zh) * | 2010-04-23 | 2012-04-11 | 南京邮电大学 | 一种频率域分布式视频编码中的分类组合方法 |
WO2012005520A2 (en) * | 2010-07-09 | 2012-01-12 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding video by using block merging, and method and apparatus for decoding video by using block merging |
KR101484281B1 (ko) * | 2010-07-09 | 2015-01-21 | 삼성전자주식회사 | 블록 병합을 이용한 비디오 부호화 방법 및 그 장치, 블록 병합을 이용한 비디오 복호화 방법 및 그 장치 |
KR102126374B1 (ko) | 2010-11-04 | 2020-06-24 | 지이 비디오 컴프레션, 엘엘씨 | 블록 병합 및 스킵 모드를 지원하는 화상 코딩 |
CN103229507B (zh) * | 2010-11-25 | 2017-09-08 | Lg电子株式会社 | 使用信号通知图像信息的方法和使用该方法来解码图像信息的方法 |
US20120189052A1 (en) * | 2011-01-24 | 2012-07-26 | Qualcomm Incorporated | Signaling quantization parameter changes for coded units in high efficiency video coding (hevc) |
US20120195366A1 (en) | 2011-02-01 | 2012-08-02 | Mediatek Singapore Pte. Ltd. | Method and Apparatus of Adaptive Inter Mode Coding Using Variable Length Codes |
US9648334B2 (en) * | 2011-03-21 | 2017-05-09 | Qualcomm Incorporated | Bi-predictive merge mode based on uni-predictive neighbors in video coding |
-
2011
- 2011-11-04 KR KR1020197013440A patent/KR102126374B1/ko active IP Right Grant
- 2011-11-04 EP EP11781501.9A patent/EP2636218B1/en active Active
- 2011-11-04 CN CN201710067801.3A patent/CN107071487B/zh active Active
- 2011-11-04 LT LTEP21182527.8T patent/LT3962088T/lt unknown
- 2011-11-04 KR KR1020137014189A patent/KR101527666B1/ko active IP Right Grant
- 2011-11-04 DK DK21182527.8T patent/DK3962088T3/da active
- 2011-11-04 RS RS20211216A patent/RS62555B1/sr unknown
- 2011-11-04 KR KR1020147030835A patent/KR101607426B1/ko active IP Right Grant
- 2011-11-04 TW TW105131691A patent/TWI644561B/zh active
- 2011-11-04 DK DK11781501.9T patent/DK2636218T3/da active
- 2011-11-04 EP EP23179369.6A patent/EP4270957A3/en active Pending
- 2011-11-04 CN CN201710067975.XA patent/CN106851320B/zh active Active
- 2011-11-04 KR KR1020247008039A patent/KR20240038124A/ko active Search and Examination
- 2011-11-04 EP EP21182527.8A patent/EP3962088B1/en active Active
- 2011-11-04 TW TW107137593A patent/TWI725348B/zh active
- 2011-11-04 KR KR1020227018195A patent/KR102648076B1/ko active IP Right Grant
- 2011-11-04 SI SI201132092T patent/SI3962088T1/sl unknown
- 2011-11-04 TW TW112112476A patent/TWI833626B/zh active
- 2011-11-04 KR KR1020207017633A patent/KR102286294B1/ko active IP Right Grant
- 2011-11-04 ES ES11781501T patent/ES2891598T3/es active Active
- 2011-11-04 CN CN201710067802.8A patent/CN107071488B/zh active Active
- 2011-11-04 WO PCT/EP2011/069408 patent/WO2012059577A1/en active Application Filing
- 2011-11-04 EP EP24163024.3A patent/EP4398569A3/en active Pending
- 2011-11-04 FI FIEP21182527.8T patent/FI3962088T3/fi active
- 2011-11-04 PT PT211825278T patent/PT3962088T/pt unknown
- 2011-11-04 PT PT11781501T patent/PT2636218T/pt unknown
- 2011-11-04 CN CN201710067793.2A patent/CN107105303B/zh active Active
- 2011-11-04 TW TW100140313A patent/TWI513277B/zh active
- 2011-11-04 TW TW104135588A patent/TWI559740B/zh active
- 2011-11-04 KR KR1020187024669A patent/KR102024178B1/ko active IP Right Grant
- 2011-11-04 CN CN201710067934.0A patent/CN107105304B/zh active Active
- 2011-11-04 CN CN201710067876.1A patent/CN107071490B/zh active Active
- 2011-11-04 PL PL21182527.8T patent/PL3962088T3/pl unknown
- 2011-11-04 HU HUE21182527A patent/HUE063103T2/hu unknown
- 2011-11-04 CN CN201710067972.6A patent/CN107071492B/zh active Active
- 2011-11-04 TW TW110110237A patent/TWI799816B/zh active
- 2011-11-04 RS RS20230823A patent/RS64610B1/sr unknown
- 2011-11-04 JP JP2013537146A patent/JP6258704B2/ja active Active
- 2011-11-04 EP EP24163026.8A patent/EP4398571A3/en active Pending
- 2011-11-04 CN CN201710067799.XA patent/CN107071486B/zh active Active
- 2011-11-04 HU HUE11781501A patent/HUE056453T2/hu unknown
- 2011-11-04 LT LTEPPCT/EP2011/069408T patent/LT2636218T/lt unknown
- 2011-11-04 EP EP24163025.0A patent/EP4398570A3/en active Pending
- 2011-11-04 KR KR1020217024268A patent/KR102405537B1/ko active IP Right Grant
- 2011-11-04 SI SI201132004T patent/SI2636218T1/sl unknown
- 2011-11-04 CN CN201180064204.6A patent/CN103299623B/zh active Active
- 2011-11-04 PL PL11781501T patent/PL2636218T3/pl unknown
- 2011-11-04 KR KR1020167007532A patent/KR101894355B1/ko active IP Right Grant
- 2011-11-04 TW TW112112474A patent/TWI832743B/zh active
- 2011-11-04 CN CN201710067883.1A patent/CN107071491B/zh active Active
- 2011-11-04 CN CN201710067804.7A patent/CN107071489B/zh active Active
- 2011-11-04 KR KR1020147030834A patent/KR101603860B1/ko active IP Right Grant
- 2011-11-04 ES ES21182527T patent/ES2955542T3/es active Active
-
2013
- 2013-05-02 US US13/875,779 patent/US9924193B2/en active Active
-
2015
- 2015-10-09 JP JP2015201551A patent/JP6659299B2/ja active Active
- 2015-10-09 JP JP2015201550A patent/JP6659298B2/ja active Active
-
2016
- 2016-06-28 US US15/195,609 patent/US9788009B2/en active Active
-
2017
- 2017-09-05 US US15/695,433 patent/US10027976B2/en active Active
-
2018
- 2018-01-04 JP JP2018000341A patent/JP6856554B2/ja active Active
- 2018-01-04 JP JP2018000340A patent/JP6727238B2/ja active Active
- 2018-02-06 US US15/890,168 patent/US10382776B2/en active Active
- 2018-02-24 HK HK18102673.0A patent/HK1245543A1/zh unknown
- 2018-06-13 US US16/007,084 patent/US10382777B2/en active Active
-
2019
- 2019-01-18 US US16/251,785 patent/US10785500B2/en active Active
- 2019-04-17 US US16/386,403 patent/US10602182B2/en active Active
-
2020
- 2020-02-14 US US16/790,892 patent/US10841608B2/en active Active
- 2020-09-21 US US17/027,168 patent/US11785246B2/en active Active
-
2021
- 2021-03-18 JP JP2021044196A patent/JP7381513B2/ja active Active
-
2023
- 2023-08-01 US US18/363,057 patent/US20240146954A1/en active Pending
- 2023-11-02 JP JP2023188257A patent/JP2024020281A/ja active Pending
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI559740B (zh) | 支援區塊合倂及跳越模式之圖像編碼技術(一) | |
US11785229B2 (en) | Picture coding supporting block partitioning and block merging | |
TW202431850A (zh) | 支援區塊合併及跳越模式之圖像編碼技術及相關裝置及方法 |