TWI746414B - 解碼器、編碼器、及相關聯方法與資料串流 - Google Patents

解碼器、編碼器、及相關聯方法與資料串流 Download PDF

Info

Publication number
TWI746414B
TWI746414B TW110121017A TW110121017A TWI746414B TW I746414 B TWI746414 B TW I746414B TW 110121017 A TW110121017 A TW 110121017A TW 110121017 A TW110121017 A TW 110121017A TW I746414 B TWI746414 B TW I746414B
Authority
TW
Taiwan
Prior art keywords
block
blocks
sub
information
tree
Prior art date
Application number
TW110121017A
Other languages
English (en)
Other versions
TW202139138A (zh
Inventor
辛納爾 克曲后弗
馬汀 文肯
菲利浦 希利
迪特利夫 馬皮
希克 史瓦茲
湯瑪士 威剛德
Original Assignee
美商Ge影像壓縮有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=44115570&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TWI746414(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 美商Ge影像壓縮有限公司 filed Critical 美商Ge影像壓縮有限公司
Publication of TW202139138A publication Critical patent/TW202139138A/zh
Application granted granted Critical
Publication of TWI746414B publication Critical patent/TWI746414B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1883Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/53Multi-resolution motion estimation; Hierarchical motion estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Abstract

一種使用次分割以編碼一空間取樣資訊信號之編碼結構以及編碼一次分割或一多樹型結構之編碼結構被說明,其中代表性實施例是有關圖像及/或視訊編碼應用。

Description

解碼器、編碼器、及相關聯方法與資料串流
本發明係有關使用次分割技術以編碼空間取樣資訊信號之編碼結構以及用以編碼次分割或多樹結構之編碼結構,其中代表性實施例係有關圖像及/或視訊編碼應用。
於影像以及視訊編碼中,圖像或對於圖像之樣本陣列的特定組集通常被分解成為與特定編碼參數關聯的區塊。該等圖像通常由複數個樣本陣列組成。此外,一圖像也可以是與另外的輔助樣本陣列相關聯的,該等另外的輔助樣本陣列可以是,例如,指示透明資訊或深度圖。一圖像之樣本陣列(包含輔助樣本陣列)可被群集成為一個或多個所謂的平面群組,其中各平面群組包含一個或多個樣本陣列。一圖像平面群組可單獨地被編碼,或如果該圖像被關聯於一個以上的平面群組,則可具有來自相同圖像之其他平面群組的預測。各平面群組通常被分解成為區塊。該等區塊(或樣本陣列的對應區塊)藉由圖像間預測或圖像內預測之一者被預測。該等區塊可具有不同的尺寸並且可以是正方形或矩形之一者。成為區塊之圖像的分割可利用語法被固定,或其可以(至少部份地)在位元流內部被傳信。通常語法元素被發送而傳信供用於預定尺寸區塊之次分割。此些語法元素可指明一區塊是否以及如何被次分割為較小的區塊以及關聯的編碼參數,例如,用於預測目的。對於所有區塊樣本(或樣本陣列的對應區塊),相關編碼參數之解碼以某種方式明確地被指明。在這個範例中,在一區塊中的所有樣本使用相同組集之預測參數被預測,例如,參考指標(辨認已被編碼的圖像組集中之一參考圖像)、移動參數(指明用於在一參考圖像以及目前圖像之間的區塊移動之量測)、用以指明插值濾波器及框內預測模式等等之參數。移動參數可藉由具有水平以及垂直分量之位移向量或藉由較高階移動參數(例如,由六個分量組成的仿射移動參數)被表示。其也有可能是,一組以上之特定預測參數(例如,參考指標以及移動參數)被關聯於一單一區塊。因此,對於這些特定預測參數之各組參數,對於區塊(或樣本陣列之對應區塊)之一單一中間預測信號被產生,並且最後的預測信號藉由包含加疊中間預測信號之組合被建立。對應的加權參數並且也可有一固定偏移量(其被加到加權和上)可被固定於一圖像、或一參考圖像、或一組參考圖像,或它們可被包含在供用於對應區塊的該組預測參數中。在原始區塊(或樣本陣列之對應區塊)以及它們的預測信號之間的差量,同時也稱為殘差信號,通常被轉換並且被量化。通常,一種二維轉換技術被施加至該殘差信號(或對於殘差區塊之對應樣本陣列)上。對於轉換編碼,一特定組集之預測參數已被使用其上之區塊(或樣本陣列之對應區塊),可在施加轉換之前進一步地被切割。轉換區塊可以是等於或較小於被使用於預測之區塊。其也有可能是,一轉換區塊被包含在被使用於預測之一個以上的區塊中。不同的轉換區塊可具有不同的尺寸並且該等轉換區塊可被表示為正方形或矩形區塊。在轉換之後,產生的轉換係數被量化並且所謂的轉換係數級別被取得。轉換係數級別以及預測參數,並且如果存在的話,則次分割資訊被進行熵編碼。
於影像以及視訊編碼規格中,對於次分割一圖像(或一平面群組)成為藉由語法提供之區塊的可能性是非常有限的。通常,其可能僅被指明一預定尺寸區塊是否以及(可能如何地)可被次分割為較小的區塊。如一範例,H.264中之最大區塊尺寸是16x16。該等16x16區塊同時也被稱為巨區塊,並且於第一步驟中,各圖像被劃分為巨區塊。對於各個16x16之巨區塊,其可被傳信關於其被編碼為16x16區塊,或為二個16x8區塊,或為二個8x16區塊,或為四個8x8區塊。如果一16x16區塊被次分割為四個8x8區塊,則這些8x8區塊各可被編碼為下列之一者:被編碼為一8x8區塊、或為二個8x4區塊、或為二個4x8區塊、或為四個4x4區塊。於目前影像以及視訊編碼規格中,用以指明分割為區塊之可能的小組集具有用以傳信次分割資訊之側資訊率可被保留為小量的優點,但其亦具有下面之缺點:用以發送用於區塊之預測參數的必須位元率可能如下面所說明地成為顯著。用以傳信預測資訊之側資訊率通常表示對於一區塊之所有位元率的一重要數量。並且當這側資訊被縮小時,編碼效率將可被增加,例如,其將可藉由使用較大的區塊尺寸而被達成。真實的影像或視訊序列圖像是由具有特定性質之任意形狀物件組成。如於一範例中,此些物件或物件部份具有獨特條理或一獨特移動之特徵。並且通常,相同組集之預測參數可被應用於此一物件或物件部份。但是對於大的預測區塊(例如,H.264中之16x16巨區塊),物件邊界通常不重疊於可能之區塊邊界。一編碼器通常決定次分割(在可能的有限組集之中),那將導致最小量之特定位元率失真成本量測。對於任意形狀之物件,這可能導致大量的小區塊。並且由於這些小區塊各者被關聯於一組預測參數,其將需要被傳送,因此側資訊率可能成為所有位元率之一重要部份。但是由於數個小區塊仍然表示相同物件或物件部份之區域,對於一些被取得之區塊的預測參數是相同的或非常相似的。
亦即,次分割或鋪排一圖像成為較小部分或如瓷磚塊或區塊,大體上將會影響編碼效率以及編碼複雜性。如上所述,使一圖像次分割為較高數量之較小區塊,將使編碼參數有一空間較細設定,因而可引動這些編碼參數對圖像/視訊素材有較佳的調適性。另一方面,為了告知解碼器關於必要的設定,將以一較細的區塊尺寸設定編碼參數,將在必要的側資訊數量上造成較高的負擔。更進一步地,應注意到,對於使編碼器(進一步地)空間次分割圖像/視訊成為區塊之任何自由度,將極端地增大可能的編碼參數設定之數量,並且因此大體上使得對於導致最佳位元率/失真折衷之搜查甚至更困難者。
依據本申請之第一論點,其目的是用以提供一編碼結構,例如,用以編碼表示空間取樣資訊信號,例如,但是並不限定於,視訊之圖像或靜態圖像,的一資訊樣本陣列,其將可達成在編碼複雜性以及可達成位元率/失真比之間的較佳折衷,及/或達成一較佳位元率/失真比。
這目的藉由依據以下被達成。
依據第一論點,本申請是依據空間地分割表示一空間取樣資訊信號之一資訊樣本陣列使首先成為樹根區,接著依據自一資料流抽取的多樹型次分割資訊,藉由遞迴式多劃分該等樹根區之子集,次分割該等樹根區之至少一子集使成為不同尺寸之較小簡單連接區,使得當資訊樣本陣列空間地被分割成為樹根區之最大區尺寸,被包含在資料流之內並且在解碼側自資料流被抽取時,則將可在失真率意義上於一非常細的次分割以及一非常粗的次分割之間找到具有適當編碼複雜性之好的折衷。
因此,依據本發明第一論點,一解碼器包括一抽取器,該抽取器被組配以自一資料流抽取一最大區尺寸以及多樹型次分割資訊;一次分割器被組配以空間地分割表示空間取樣資訊信號之一資訊樣本陣列成為最大區尺寸之樹根區,並且依據多樹型次分割資訊,藉由遞迴式多劃分該等樹根區之子集,次分割樹根區之至少一子集成為不同尺寸之較小的簡單連接區;以及一重建器被組配,以自使用該次分割使成為較小的簡單連接區之資料流而重建該等資訊樣本陣列。
依據本發明一實施例,資料流同時也包含最大階層級別,當高至該最大階層級別時,樹根區子集接受遞迴式多劃分。藉由這措施,使得多樹型次分割資訊之傳信更容易並且對於編碼則只需較少之位元。
更進一步地,重建器可被組配以依據多樹型次分割之一區塊尺寸進行一個或多個下面的措施:決定在至少框內以及框間的預測模式中使用哪一預測模式;於自頻譜至空間領域之轉換,進行一框間預測,及/或對其設定參數;進行一框內預測,及/或對其設定參數。
更進一步地,抽取器可被組配而以一深度優先走訪順序自資料流抽取出關聯於被劃分的樹型區塊之支葉區的語法元素。藉由這措施,抽取器可利用比使用一廣度優先走訪順序具有較高可能性之已被編碼的鄰近支葉區之語法元素的統計資料。
依據另外的實施例,一進一步的次分割器被使用,以便依據進一步的多樹型次分割資訊,次分割較小簡單連接區之至少一子集成為更小簡單連接區。第一級次分割可被重建器所使用,以供進行資訊樣本之區域預測,而第二級次分割可被重建器所使用,以進行自頻譜至空間領域之再轉換。定義殘差次分割為相對於預測次分割之從屬者,將使得所有次分割之編碼有較少的位元消耗,並且另一方面,由於大多情況下具有相似移動補償參數之圖像部分是比具有相似的頻譜特性部分較大,故對於自從屬者產生的殘差次分割之限定以及自由性,在編碼效率上將僅具有較少的負面影響。
依據更進一步的一實施例,一進一步的最大區尺寸被包含在資料流中,定義樹根子區尺寸成為較小的簡單連接區之進一步的最大區尺寸,在次分割樹根子區至少一子集之前,依據進一步的多樹型次分割資訊,首先被分割為更小簡單連接區。如此,依次地,一方面將可使預測次分割最大區尺寸之一獨立設定成為可能,並且另一方面,因此,殘差次分割將可使發現一較佳的位元率/失真折衷。
更依據本發明進一步的實施例,資料流包括自形成多樹型次分割資訊之一語法元素的第二子集脫連之一語法元素的第一子集,其中在解碼側之一合併器是可依據語法元素第一子集,而結合空間地鄰近多樹型次分割之較小的簡單連接區,以得到樣本陣列之一中間次分割。重建器可被組配以使用中間次分割重建樣本陣列。利用這措施,編碼器可較容易地將有效的次分割調適至資訊樣本陣列性質之空間分配,而發現一最理想的位元率/失真折衷。例如,如果最大區尺寸是高的,則由於樹根區成為較大,故多樹型次分割資訊是有可能成為更複雜。然而,另一方面,如果最大區尺寸是小的,則其將極可能是鄰近樹根區具有相似性能的資訊內容,以至於這些樹根區也可共同地被處理。此合併步驟填補在先前所提到的極端之間的隙縫,因而導致近乎最佳的區塊尺寸次分割。自編碼器觀點而言,合併的語法元素允許更輕鬆或計算上較不複雜的編碼程序,由於如果編碼器錯誤地使用一太細的次分割,這錯誤於隨後可藉由在其後設定合併語法元素,或可僅調適已在設定合併語法元素之前被設定的一小部份語法元素,利用編碼器被補償。
依據更進一步的實施例,最大區尺寸以及多樹型次分割資訊被使用於殘差次分割而非用於預測次分割。
依據本發明一進一步的論點,本申請之一目的是提供一編碼結構,藉由其可達成一較佳的位元率/失真折衷。
這目的可藉由依據申請專利範圍第1項之解碼器、依據申請專利範圍第7項之編碼器,以及依據申請專利範圍第6或8項之方法來達成。
這論點之下的構想是,用以處理表示空間取樣資訊信號之資訊樣本陣列的四叉樹次分割之簡單連接區的深度優先走訪順序,是比廣度優先走訪順序更好,該事實是由於,當使用深度優先走訪順序時,各簡單連接區將具有較高的可能性以具有已先前被移動之鄰近的簡單連接區,以至於當重建各別之目前簡單的連接區時,關於這些鄰近的簡單連接區之資訊可明確地被利用。
當資訊樣本陣列首先被分割為零階階層級別尺寸之樹根區規則性排列,接著將該等樹根區至少一子集次分割為不同尺寸之較小的簡單連接區時,重建器可使用一曲折掃描,以便藉由對於將被劃分之各個樹根區,在以曲折掃描順序進一步地進入下一個樹根區之前,以深度優先走訪順序先處理簡單連接之支葉區。此外,依據深度優先走訪順序,相同階層級別之簡單連接支葉區同時也可以曲折掃描順序被走訪。因此,具有鄰近簡單連接支葉區的增大可能性被保留。
依據本發明進一步的論點,其目的是提供用以編碼一多樹型結構之傳信的編碼結構,該多樹型結構標示一樹根區之空間多樹型次分割,依據該標示,樹根區遞迴式多劃分為較小的簡單連接區,以至於用以編碼傳信所必要的資料量減少。
這目的利用依據以下而被達成。
這論點之下的構想是,雖然其是有利於以一深度優先走訪順序,依序地排列被關聯於多樹型結構節點的旗標,依序的旗標編碼應使用機率估計脈絡,其對於被關聯於位於多樹型結構相同階層級別內之多樹型結構節點的旗標是相同,但是對於位於多樹型結構不同階層級別內之多樹型結構的節點是不同,因此另一方面允許在將被提供的脈絡數目以及對於旗標之實際符號統計的調適性之間有一好的折衷。
依據一實施例,對於所使用預定旗標的機率估計脈絡同時也取決於在依據深度優先走訪順序所預定旗標之前的旗標以及對應至樹根區的區域,該樹根區對於預定旗標對應的區域具有一預定相對位置關係。相似於先前論點之下的構想,深度優先走訪順序之使用保證已被編碼的旗標同時也包括對應至鄰近對應於預定旗標區域的區域之旗標的高度機率性,以至於這知識可被使用以較佳地調適脈絡被使用於預定旗標。
可被使用對於一預定旗標設定脈絡之旗標,可以是對應至位於預定旗標對應的區域之頂部及/或左方的區域。此外,被使用於挑選脈絡之旗標可被限定在屬於與預定旗標關聯的節點之相同階層級別的旗標。
因此,本發明提供一種解碼器,其用以解碼出標示一樹根區塊之一空間多樹型次分割的一多樹型結構之編碼傳信,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼傳信包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應至各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該解碼器被組態以使用機率估計脈絡而依序地熵解碼出該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於關聯位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
其中該空間多樹型次分割是一四叉樹次分割,並且依照該深度優先走訪順序,一曲折掃描被定義於具有一共同親源節點的四叉樹次分割之相同階層級別的節點之中,其中該解碼器組配來對於一預定旗標之機率估計脈絡,同時也取決於依照該深度優先走訪順序先前於該預定旗標以及對應至對於該預定旗標對應的一區域具有一預定相對位置關係的樹根區塊之區域的旗標。
其中該解碼器同時也組配來自該資料流抽取出一最高階層級別之一指示,該樹形區塊遞迴式地在其下被多劃分,該旗標序列僅包括不等於最高階層級別之階層級別的旗標。
其中該解碼器組配來解碼出標示複數個樹根區塊之一空間多樹型次分割的多樹型結構之傳信,該等複數個樹根區塊以在該等複數個樹根區塊之中被定義的一曲折掃描順序,共同形成一較大之二維部分的一連續以及規則性的網格分割。
其中該解碼器組配來解碼出標示複數個樹根區塊的一空間多樹型次分割之多樹型結構的傳信,該等樹根區塊是依次地,以在複數個樹根區塊之中被定義之一深度優先走訪順序之一較大二維部分之另外的多樹型次分割之支葉區塊,並且其中該等多樹型結構之編碼傳信各包括以深度優先走訪順序被關聯於各別的多樹型結構節點之一旗標序列,並且各旗標指明對應至各別的旗標所關聯的節點之各別樹根區塊的一區域是否被多劃分,該解碼器被組態以使用對於被關聯於相同尺寸區域之旗標是相同之機率估計脈絡依序地熵解碼該等旗標。
本發明還提供一種用以解碼出標示一樹根區塊之一空間多樹型次分割的一多樹型結構之編碼傳信的方法,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼傳信包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應至各別的旗標關聯之節點的樹根區塊之一區域是否被多劃分,該方法包括使用機率估計脈絡而依序地熵解碼出該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於關聯位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
本發明還提供一種用以產生標示一樹根區塊之一空間多樹型次分割的一多樹型結構之編碼傳信的編碼器,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼傳信包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應至各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該編碼器被組態以使用機率估計脈絡而依序地熵編碼該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
本發明還提供一種用於編碼器以供產生標示一樹根區塊之一空間多樹型次分割的一多樹型結構之編碼傳信的方法,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼傳信包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應至各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該方法包括使用機率估計脈絡而依序地熵編碼該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
本發明還提供一種具有一電腦程式被儲存在其上之電腦可讀取數位儲存媒體,該電腦程式具有一程式碼,當在一電腦上執行時,該程式碼進行依據上述方法。
本發明還提供一種資料流,其中被編碼具有標示一樹根區塊之一空間多樹型次分割的一多樹型結構之編碼傳信,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼傳信包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應至各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,其中該等旗標使用機率估計脈絡而依序地被熵編碼成為該資料流,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
因此,依據進一步的一論點,用以編碼多樹型結構傳信之一編碼構造被提供,其可引動更有效的編碼。
這目的可藉由以下被達成。
依據這論點,編碼傳信包括一最高階層級別以及不等於最高階層級別而被關聯於多樹型結構節點的一旗標序列之指示,各旗標指明被關聯的節點是否為一中間節點或子系節點,並且隨著跳過最高階層級別節點並且自動地指定相同支葉節點,以一深度優先或廣度優先走訪順序,發生自資料串流之旗標序列的依序解碼,因此降低編碼率。
依據進一步的一實施例,多樹型結構的編碼傳信可包括最高階層級別之指示。藉由這措施,由於最高階層級別區塊之進一步分割被排除時,其可將旗標之存在限定在不是最高階層級別之階層級別。
在空間多樹型次分割是支葉節點之第二次分割以及主要多樹型次分割之未劃分的樹根區之部份的情況,則被使用於編碼第二次分割之旗標脈絡可被挑選,使得此些脈絡對於被關聯於相同尺寸區域之旗標是相同的。
依據進一步的實施例,資訊樣本陣列被次分割所成的簡單連接區之一有利合併或群集被編碼而具有一降低資料量。為了這目的,對於多個簡單連接區,一預定相對位置關係被定義,而引動對於在複數個簡單連接區內之多個簡單連接區之一預定簡單連接區的辨認,而該等複數個簡單連接區則對於該預定簡單連接區具有預定相對位置關係。亦即,如果數目是零,對於預定簡單連接區之一合併指示器不在資料流之內出現。進一步地,如果具有對於預定簡單連接區之預定相對位置關係的簡單連接區數目是1的話,則簡單連接區之編碼參數可被採用或可被使用於對於預定簡單連接區之編碼參數之預測而不需要任何進一步的語法元素。否則,如果具有對於預定簡單連接區之預定相對位置關係的簡單連接區數目是較大於1,即使被關聯於這些辨認的簡單連接區之編碼參數是彼此相同,進一步的語法元素之引介亦可被抑制。
依據一實施例,如果鄰近簡單連接區之編碼參數是彼此不相等,則一參考鄰近識別符可識別具有對於預定簡單連接區之預定相對位置關係的簡單連接區數目之一適當子集,並且當採用編碼參數或預測預定簡單連接區之編碼參數時,這適當子集被使用。
依據更進一步之實施例,藉由遞迴式多劃分使表示一個二維資訊信號空間取樣的一樣本區域成為不同尺寸的複數個簡單連接區之空間次分割,依據被包含在資料流中之語法元素的第一子集被進行,其後緊隨著依據自第一子集脫連的資料流內之語法元素的一第二子集之一空間鄰近簡單連接區組合,以取得成為簡單連接區之脫連組集的樣本陣列之一中間次分割,其之結合是複數個簡單連接區。當自資料流重建樣本陣列時,中間次分割被使用。由於一太細的次分割可在之後藉由合併被補償之事實,這可使得有關次分割之最佳化較不緊要。進一步地,次分割以及合併之組合將可實現中間次分割,其將不可能僅僅經由遞迴式多劃分得到,以至於藉由語法元素的脫連組集之使用的次分割以及合併之串連使得對於二維資訊信號實際內容之有效中間次分割將可有較佳調適。對照於一些優點,用以指示合併細節而自增加的語法元素子集所產生之額外的經常支出是可以忽略的。
因此本發明提供一種用以解碼一多樹型結構之一編碼傳信之解碼器,該編碼傳信包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該解碼器組配來自一資料串流解碼出該最高階層級別之指示,並且接著隨著跳過最高階層級別節點並且自動地指定相同支葉節點,而以一深度優先或廣度優先走訪順序,自資料串流依序地解碼出該旗標序列。
本發明還提供一種用以解碼一多樹型結構之一編碼傳信之方法,該編碼傳信包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該方法包括自一資料串流解碼出該最高階層級別之指示,並且接著隨著跳過最高階層級別節點並且自動地指定相同支葉節點,而以一深度優先或廣度優先走訪順序,自資料串流依序地解碼出該旗標序列。
本發明還提供一種用以產生一多樹型結構之一編碼傳信之編碼器,該編碼傳信包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該編碼器組配來編碼來自一資料串流之最高階層級別指示,並且接著隨著跳過最高階層級別節點並且自動地指定相同支葉節點,而以一深度優先或廣度優先走訪順序,依序地編碼來自資料串流之該旗標序列。
本發明還提供一種用以產生一多樹型結構之一編碼傳信之方法,該編碼傳信包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該方法包括編碼來自一資料串流之最高階層級別指示,並且接著隨著跳過最高階層級別節點並且自動地指定相同支葉節點,而以一深度優先或廣度優先走訪順序,依序地編碼來自資料串流之該旗標序列。
本發明還提供一種具有一電腦程式被儲存在其上之電腦可讀取數位儲存媒體,該電腦程式具有一程式碼,當在一電腦上執行時,該程式碼進行上述方法。
於下面的圖形說明中,出現在多數這些圖形中的元件利用共同的參考數目被指示並且將避免重複解說這些元件。當然,有關出現在一圖形內之元件的說明同時也可應用至其他圖形,於該等圖形中只要在這些其他的圖形中呈現說明指出偏差,則各別的元件將產生。
進一步地,下面的說明開始於將參考第1至11圖解釋之編碼器以及解碼器的實施例。參考這些圖形所說明之實施例結合本申請之許多論點,然而,其如果在一編碼結構之內分別地實作則將同時也可以是有利的,並且因此,有關隨後的圖形,實施例簡潔地被論述,其分別地說明剛提到的論點,而這些實施例之各者以不同的意義表示對於第1以及11圖所說明的實施例概念。
第1圖展示依據本發明一實施例之編碼器。第1圖之編碼器10包括預測器12、殘差預編碼器14、殘差重建器16、資料流插入器18以及區塊分割器20。編碼器10是用以將時間空間取樣資訊信號編碼成為資料流22。時間空間取樣資訊信號可以是,例如,視訊,亦即,一圖像序列。各圖像表示一圖像樣本陣列。時間空間資訊信號之其他範例包括,例如,利用,例如,光時相機所獲得的深度影像。進一步地,應注意到,一空間取樣資訊信號之每個訊框或時戳可包括一個以上的陣列,例如於每個訊框,例如,彩色視訊之情況中,其包括與二個色度樣本陣列在一起之亮度樣本陣列。其同時也可以是對於資訊信號不同的分量,亦即,亮度以及色度,之時間取樣率是不同的。相同情況適用於空間解析度。一視訊同時也可被伴隨著進一步的空間取樣資訊,例如,深度或透明度資訊。然而,下面的說明,為較佳地了解本申請之主要問題起見,將先聚焦於這些陣列之一者的處理,接著再轉向一個以上平面的處理。
第1圖之編碼器10被組配以產生資料流22,因而資料流22之語法元素以位於整個圖像以及個別的影像樣本之間的一區塊尺寸說明圖像。為此目的,分割器20被組配以次分割各個圖像24成為不同尺寸的簡單連接區26。下面,這些區將簡單地被稱為區塊或子區26。
如下面之更詳細的論述,分割器20使用一多樹型次分割以便將圖像24次分割為不同尺寸之區塊26。甚至更精確地,下面有關第1至11圖之論述的特定實施例大多數使用四叉樹次分割。同時下面將更詳細說明,分割器20可內部地包括用以次分割圖像24使成為剛提及之區塊26的次分割器28串連,隨後一合併器30將可結合這些區塊26群集,以便取得位於圖像24之非次分割以及利用次分割器28被定義的次分割之間的有效次分割或區塊尺寸。
如第1圖虛線之展示,預測器12、殘差預編碼器14、殘差重建器16以及資料流插入器18在利用分割器20被定義之圖像次分割上運作。例如,下面將更詳細論述,預測器12使用藉由分割器20被定義之預測次分割,以便對於預測次分割之個別的子區,藉由依據選擇之預測模式對於各別的子區設定對應的預測參數而決定關於該各別的子區是否應接受圖像內預測或圖像間預測。
殘差預編碼器14,依次地,可使用圖像24之殘差次分割,以便編碼利用預測器12被提供之圖像24的預測殘差。因殘差重建器16自利用殘差預編碼器14被輸出之語法元素而重建殘差,殘差重建器16同時也在剛提及的殘差次分割上運作。資料流插入器18可利用剛提及的分割,亦即,預測以及殘差次分割,以便決定在對於由殘差預編碼器14以及預測器12輸出的語法元素之插入的語法元素之中的插入順序以及鄰近關係,例如,使用熵編碼技術使成為資料流22。
如第1圖之展示,編碼器10包括原始資訊信號進入編碼器10之輸入32。減法器34、殘差預編碼器14以及資料流插入器18以所提及之順序連續地在輸入32以及編碼資料流22被輸出之資料流插入器18的輸出之間被連接。減法器34以及殘差預編碼器14是預測迴路之部份,該預測迴路藉由以所提及之順序連續地在殘差預編碼器14輸出以及減法器34反相輸入之間被連接的殘差重建器16、加法器36以及預測器12而閉合。預測器12之輸出也被連接至加法器36之進一步的輸入。此外,預測器12包括直接地連至輸入32之一輸入並且可能包括再進一步之輸入,該輸入同時也經由選用的迴路內濾波器38被連接至加法器36的輸出。進一步地,預測器12在運作期間產生側資訊,並且因此,預測器12一輸出也被耦接至資料流插入器18。同樣地,分割器20包括一輸出,其被連接至資料流插入器18之另一輸入。
說明編碼器10結構之後,下面將更詳細地說明操作模式。
如上面之說明,分割器20決定如何次分割各圖像24成為子區26。依據將被使用於預測之圖像24的次分割,預測器12決定對應至這次分割的各子區,如何預測各別的子區。預測器12將子區之預測輸出至減法器34之反相輸入並且至加法器36之進一步的輸入,並且將反映預測器12如何自視訊之先前編碼部分取得這預測之方式的預測資訊輸出至資料流插入器18。
在減法器34之輸出,預測殘差因此被取得,在其中殘差預編碼器14依據也利用分割器20被標示之殘差次分割而處理這預測殘差。如在下面有關第3至10圖之進一步的詳細說明,殘差預編碼器14所使用之圖像24的殘差次分割可以是有關於預測器12使用之預測次分割,因而各預測子區被採用作為殘差子區或進一步地被次分割為較小的殘差子區。然而,完全獨立的預測以及殘差次分割將也是可能的。
殘差預編碼器14利用二維轉換支配各殘差子區自空間至頻譜域之一轉換,其後緊隨著,或固有地涉及,所形成轉換區塊之形成轉換係數之一量化,因而失真自量化雜訊產生。資料流插入器18可藉由使用,例如,熵編碼技術,例如,無損地將上述之轉換係數之語法元素編碼成為資料流22。
殘差重建器16,依次地,藉由使用其後跟隨著再轉換之一再量化,使轉換係數再轉變成為一殘差信號,其中在加法器36內之殘差信號與減法器34使用之預測結合,以供取得預測殘差,因此在加法器36輸出取得目前圖像之重建部分或子區。預測器12可直接地使用重建的圖像子區以供用於框內預測,其是用以藉由自鄰近區中之先前重建的預測子區之推斷而預測某一預測子區。然而,藉由自鄰近一子區而直接地預測目前子區之頻譜,在頻域內進行一框內預測理論上也是可能的。
對於框間預測,預測器12可使用藉由選用的迴路內濾波器38同樣地被過濾的版本之一先前編碼以及重建的圖像。迴路內濾波器38,例如,可包括一解區塊效應濾波器及/或一調適濾波器,後者具有調適以有利地形成先前所提到的量化雜訊的轉移函數。
預測器12藉由使用在圖像24內之對於原始樣本之對照而預測某一預測子區之方式以選擇預測參數。預測參數,如下面更詳細之論述,可包括對於各預測子區之預測模式的一指示,例如,圖像內預測以及圖像間預測。於圖像內預測情況中,預測參數同時也可包括一角度指示,沿著該角度,將被框內預測的預測子區之邊緣主要地延伸,並且於圖像間預測之情況中,可包括移動向量、移動圖像指標及最後較高階移動轉換參數,以及於圖像內及/或圖像間圖像預測兩情況中,包括用於過濾目前預測子區被預測所依據重建影像樣本之選用的過濾器資訊。
如下面更詳細的論述,先前提及利用分割器20被定義的次分割大體上影響藉由殘差預編碼器14、預測器12以及資料流插入器18最大可得的位元率/失真比。於太細的次分割情況中,利用預測器12被輸出將被插進入資料流22中之預測參數40使一太大的編碼率成為必需,雖然利用預測器12所取得的預測可能是較佳並且將利用殘差預編碼器14被編碼的殘差信號可能是較小,以至於同一者可能以較少的位元被編碼。於太粗的次分割情況,則情況相反。進一步地,剛提及的思維同時也以相似的方式適用於殘差次分割:使用個別的轉換區塊之較細區塊尺寸之圖像轉換將導致對於計算轉換之較低的複雜性以及形成轉換之增大的空間解析度。亦即,較小的殘差子區將能夠使在個別的殘差子區內之內容頻譜分配更均勻。然而,頻譜解析度被降低並且在顯著和非顯著之間的比率,亦即,被量化為零值,係數將更差。亦即,轉換區塊尺寸應局域性地被調適至圖像內容。此外,無關於來自較細區塊尺寸的實際影響,一較細的區塊尺寸規則地增大必要的側資訊數量,以便指示針對解碼器所選擇之次分割。如下面將更詳細之論述,下面說明的實施例將提供編碼器10,其具有可將被編碼的資訊信號內容非常有效地次分割的調適能力,並且將藉由指示資料流插入器18將次分割資訊插入被編碼資料流22中而傳信將被使用的次分割至解碼側。下面將說明其細節。
然而,在更詳細地定義分割器20次分割之前,依據本申請一實施例將參考第2圖的解碼器更詳細地被說明。
第2圖解碼器利用參考標號100被指示並且包括一抽取器102、分割器104、殘差重建器106、加法器108、預測器110、選用迴路濾波器112以及選用後級濾波器114。抽取器102在解碼器100之輸入116接收被編碼的資料流並且自被編碼的資料流抽取出次分割資訊118、預測參數120以及殘差資料122,抽取器102將其分別地輸出至圖像分割器104、預測器110以及殘差重建器106者。殘差重建器106具有被連接至加法器108之第一輸入的一輸出。加法器108的其他輸入以及其輸出被連接於預測迴路,選用迴路濾波器112以及預測器110以所提到之順序連續地連接於預測迴路,其具有自加法器108的輸出至預測器110的旁通途徑,相似於上面提到在第1圖的加法器36以及預測器12之間的連接方式,亦即,一者對於圖像內預測以及另一者對於圖像間預測。加法器108之輸出或迴路內濾波器112的輸出之任一者可被連接至,例如,重建的資訊信號被輸出至再生裝置之解碼器100的輸出124。一選用後級濾波器114可被連接於通到輸出124之途徑,以便改進在輸出124之重建信號的視覺感受之視覺品質。
大體而言,殘差重建器106、加法器108以及預測器110作用如同第1圖之元件16、36以及12。換句話說,同樣地仿效在先前提及的第1圖之元件的操作。因此,殘差重建器106以及預測器110分別地依據來自抽取器102之次分割資訊118,利用預測參數120及利用圖像分割器104標示之次分割被控制,以便如預測器12所進行或決定進行之相同方式而預測該等預測子區,並且如殘差預編碼器14進行之相同方式而再轉換以相同區塊尺寸所接收的轉換係數。圖像分割器104,依次地,依據次分割資訊118之同步方式,而重建利用第1圖之分割器20所選擇的次分割。抽取器可依次地使用次分割資訊,以便控制資料抽取,例如,就脈絡挑選、鄰近區決定、機率估計、分析資料流語法等等而言。
多數個變化可在上面實施例上被進行。其一些在下面利用次分割器28進行次分割以及利用合併器30進行合併的詳細說明之內被提到並且其他者將參考第12至16圖被說明。在無任何障礙之下,所有這些變化可分別地是或群集地被應用至先前在第1圖以及第2圖分別地提到的說明。例如,分割器20以及104可不用僅決定每個圖像之一預測次分割以及殘差次分割。反之,它們同時也可分別地對於選用迴路內濾波器38以及112決定一濾波器次分割。不論無關或有關於分別地對於預測或殘差編碼之其他的次分割。此外,利用這些元件的次分割之決定可能不依訊框接訊框之基礎上被進行。反之,對於某一訊框所決定的次分割,可由僅轉移一新的次分割而供接著下面的某些訊框再使用或採用。
為提供關於使圖像成為子區之分割的進一步詳細說明,下面的說明首先聚焦於次分割器28以及104a被假定有任務之次分割部份上。接著將說明合併器30以及合併器104b被假定有任務之合併處理。最後,將說明平面間調適/預測。
次分割器28以及104a分割圖像之方式,使得為影像或視訊資料之預測以及殘差編碼目的,因而一圖像是可分割為可能不同尺寸的一些區塊。如在先前提到的,圖像24可能是為一個或多個影像樣本數值陣列。於YUV/YCbCr彩色空間情況中,例如,第一陣列可表示亮度頻道而其他二陣列可表示色度頻道。這些陣列可具有不同尺寸。所有陣列可被群集成為一個或多個平面群組,其具有由一個或多個連續的平面組成的各平面群組,因而各平面被包含在一個並且僅一個平面群組中。下面的情況適用於各平面群組。一特定平面群組之第一陣列可被稱為這平面群組之主要陣列。可能跟隨的陣列是次級陣列。主要陣列之區塊分割可依據如下面說明之一四叉樹方法被完成。次級陣列的區塊分割可依據主陣列的分割被得到。
依據下面說明之實施例,次分割器28以及104a被組配以分割主要陣列成為一些相等尺寸之正方形區塊,即下面所謂的樹型區塊。樹型區塊之邊緣長度典型地是二的次方,例如,當四叉樹被使用時,其是16、32或64。然而,為完整起見,值得注意的是,其他樹型的型式之使用將也是可能,例如,二元樹型或具有任何支葉數目之樹型。此外,樹型子系之數目可依據樹型級別以及依據樹型正表示之信號而變化。
除此之外,如上面所提到的,樣本陣列同時也可分別地表示除視訊序列之外的其他資訊,例如,深度圖或光場。為簡明起見,下面的說明將集中於對多樹型之代表範例的四叉樹上。四叉樹是在每個內部節點正好具有四個子系之樹型。每個樹型區塊構成一主要四叉樹與一起在主要四叉樹之每個支葉上之次級四叉樹。主要四叉樹決定用於預測之一給與樹型區塊之次分割,而次級四叉樹則決定用於殘差編碼目的之給與預測區塊之次分割。
主要四叉樹的根節點對應至整個之樹型區塊。例如,第3a圖展示一樹型區塊150。應注意,每個圖像被分割為此些樹型區塊150之列及行的規則性網格,以至於它們,例如,無隔閡地涵蓋樣本陣列。然而,應注意到,對於隨後展示的所有區塊次分割,無重疊之無縫次分割是無關緊要的。反之,只要無支葉區塊是一鄰近支葉區塊之適當的子部份,則鄰近區塊是可彼此重疊。
沿著對於樹型區塊150之四叉樹結構,每個節點可進一步地被分割為四個子系節點,其於主要四叉樹之情況中,指示每個樹型區塊150可被分切成為具有樹型區塊150之一半寬度以及一半高度的四個次區塊。於第3a圖中,這些子區塊利用參考符號152a至152d被標示。以相同方式,這些子區塊各可進一步地被切割成為具有原始子區塊一半寬度以及一半高度的四個較小子區塊。於第3c圖中,這對於子區塊152c展示範例,其被次分割為四個小的子區塊154a至154d。目前為止,第3a至3c圖展示樹型區塊150如何首先被分割為其之四個子區塊152a至152d之範例,接著左下方的子區塊152c進一步地被分割為四個小的子區塊154a至154d,並且最後,如第3c圖之展示,這些較小的子區塊之右上方的區塊154b再次被分割為四個原始樹型區塊150的八分之一寬度以及高度的區塊,這些更小區塊以156a至156d被表示。
第4圖展示如第3a-3c圖所展示之對於四叉樹為基礎之分割範例的下面樹型結構。樹型節點之旁的數目是所謂的次分割旗標之數值,其稍後當討論四叉樹結構之傳信時,將更詳細地被說明。四叉樹之根節點被描述於圖形頂部上(被標示“級別0”)。在這根節點之級別1的四個分支對應至如第3a圖展示之四個子區塊。因這些子區塊之第三者進一步地被次分割為如第3b圖中之四個子區塊,第4圖中在級別1之第三節點同時也具有四個分支。再次地,對應至第3c圖之第二(頂部右方)子系節點的次分割,有四個子分支與四叉樹階層級別2之第二節點連接。在級別3之節點不再進一步地被次分割。
主要四叉樹之各個支葉對應至個別的預測參數(亦即,框內或框間預測模式、移動參數等等)可指明之一可變尺寸的區塊。於下面,這些區塊被稱為預測區塊。尤其,這些支葉區塊是第3c圖展示之區塊。藉由簡要地返回參考第1以及2圖之說明,分割器20或次分割器28決定如剛說明之四叉樹次分割。次分割器152a-d進行樹型區塊150、子區塊152a-d、小的子區塊154a-d等等之分割決定,以進一步地次分割或劃分,以在如已先於上面被指出之一太細預測次分割以及一太粗預測次分割之間找到一最理想的取捨。預測器12,依次地,使用標示的預測次分割,以便依據預測次分割或對於,例如,利用第3c圖展示之區塊被表示的各個預測子區之區塊尺寸,以決定在上面提及之預測參數。
第3c圖展示之預測區塊可進一步地被分割為用於殘差編碼目的之較小區塊。對於各個預測區塊,亦即,對於主要四叉樹之各個支葉節點,對應的次分割藉由用於殘差編碼之一個或多個次級的四叉樹被決定。例如,當允許一16x16之最大的殘差區塊尺寸時,一給與的32×32預測區塊可被分割為四個16×16區塊,其各利用殘差編碼之一次級的四叉樹被決定。這範例中之各個16×16區塊對應至一次級的四叉樹之根節點。
如對於一給與的樹型區塊之次分割使成為預測區塊之情況中之說明,各個預測區塊可藉由使用次級的四叉樹分解被分割為一些殘差區塊。一次級四叉樹的各個支葉對應至一殘差區塊,該殘差區塊可利用殘差預編碼器14指明個別的殘差編碼參數(亦即,轉換模式、轉換係數等等),該殘差預編碼器14之殘差編碼參數依次地分別控制殘差重建器16以及106。
換句話說,次分割器28可被組配,以對於各圖像或對於各圖像群集,而決定一預測次分割以及一次級殘差次分割,其首先分割圖像成為樹型區塊150之一規則性排列,利用四叉樹次分割以遞迴式劃分這些樹型區塊之一子集,以便取得成為預測區塊之預測次分割–如果在各別的樹型區塊無分割發生,則其可以是樹型區塊或四叉樹次分割之支葉區塊–接著進一步地以相似方式次分割這些預測區塊之一子集,如果一預測區塊是較大於次級殘差次分割之最大尺寸,則藉由首先分割各別的預測區塊使成為子樹型區塊一規則性排列,接著依據四叉樹次分割程序,次分割這些次樹型區塊之一子集,以便取得殘差區塊-如果在各別的預測區塊無成為次樹型區塊之分割發生則其可以是預測區塊,如果在各別的次樹型區塊無分割使成為更小區發生則可以是次樹型區塊,或殘差四叉樹次分割之支葉區塊。
如上面之簡要論述,對於一主要陣列所選擇之次分割可被映射至次級陣列上。當考慮到如主陣列相同尺寸之次級陣列時,這是容易的。然而,當次級陣列的尺寸不同於主陣列的尺寸時,特定措施必須被採用。大體而言,於不同尺寸的情況中,主陣列次分割至次級陣列上的映射可藉由空間映射被完成,亦即,藉由空間地映射主陣列次分割的區塊邊緣至次級的陣列。特別是,對於各個次級陣列,其可能有決定主陣列對次級陣列的尺寸比率之水平以及垂直方向的尺度調整因素。用於預測以及殘差編碼之使次級陣列分割為子區塊的分割可分別地藉由主要陣列之所排列的樹型區塊各者之主要四叉樹以及次級四叉樹被決定,而次級陣列所產生的樹型區塊利用相對尺度調整因素被尺度調整。於水平以及垂直方向之尺度調整因素不同(例如,於4:2:2色度次取樣)的情況中,次級陣列之產生的預測以及殘差區塊將可能不再是正方形。於這情況中,其可適應性地預定或挑選非正方形殘差區塊是否將可被切割成為正方形區塊(對於整個序列、得自序列的一圖像,或對於一個別的預測或殘差區塊)。於第一種情況中,例如,編碼器以及解碼器將可接受,對於每次被映射的區塊不是正方形時使成為正方形區塊之次分割。於第二種情況中,次分割器28將經由資料流插入器18以及資料流22傳信挑選至次分割器104a。例如,於4:2:2色度次取樣之情況中,其中次級陣列具有如主要陣列的一半寬度但卻有相同高度,殘差區塊將是如寬度的兩倍高。藉由垂直地切割這區塊,將可能再次得到二個正方形區塊。
如上面所提到的,次分割器28或分割器20,分別地經由資料流22將四叉樹為基礎之分割傳信至次分割器104a。因此,次分割器28告知資料流插入器18關於針對圖像24所選擇之次分割。資料流插入器接著傳送主要以及次要四叉樹之結構,以及因此,圖像陣列成為在資料流或位元流22內之預測或殘差編碼的可變尺寸區塊分割,分別至解碼側。
最小以及最大的可接受區塊尺寸作為側資訊被發送並且可能自圖像至圖像地改變。或者,最小以及最大的可接受區塊尺寸可在編碼器以及解碼器中被固定。這些最小以及最大的區塊尺寸對於預測以及殘差區塊可以是不同的。對於四叉樹結構之傳信,四叉樹必須被移動,並且對於各節點其必須被指明,這特定節點是否為該四叉樹之一支葉節點(亦即,對應的區塊不再進一步地被次分割)或其是否將分支成為其之四個子系節點(亦即,對應的區塊將被分割為具有一半尺寸的四個子區塊)。
在一圖像內之傳信以一光束掃描順序依樹型區塊至樹型區塊方式進行,例如在第5a圖之140所示自左方至右方以及頂部至下面之順序。這掃描順序也可以是不同的,如自底部右方至頂部左方或以一棋盤式順序。於一較佳實施例中,各個樹型區塊以及因此各個四叉樹以深度優先順序被走訪以供傳信次分割資訊。
於一較佳實施例中,不僅次分割資訊,亦即,樹型之結構,但同時也有預測資料等等,亦即,關聯於樹型支葉節點的酬載,以深度優先順序被發送/被處理。這被完成,因為深度優先走訪具有超過廣度優先順序之大量優點。於第5b圖中,一四叉樹結構以被呈現被標示著a、b、…、j之支葉節點。第5a圖展示所產生的區塊分割。如果區塊/支葉節點以廣度優先順序被走訪,則將取得下面的順序:abjchidefg。然而,以深度優先順序,則其順序是abc…ij。如自第5a圖所見,以深度優先順序,左方鄰近的區塊以及頂部鄰近的區塊永遠在目前區塊之前被發送/被處理。因此,移動向量預測以及脈絡模型可永遠使用被指示用於左方以及頂部鄰近區塊的參數,以便得到一改進的編碼性能。對於廣度優先順序,則不是如此,因區塊j,例如,在區塊e、g、以及i之前被發送。
因此,對於各個樹型區塊之傳信遞迴式是沿著主要四叉樹之四叉樹結構被完成,因而對於各節點,一旗標被發送,其指明對應的區塊是否被切割成為四個子區塊。如果這旗標具有數值“1”(代表“真”),則對於所有四個子系節點,亦即,子區塊,這傳信處理程序以光束掃描順序(頂部左方、頂部右方、底部左方、底部右方)遞迴式被重複,直到抵達主要四叉樹之支葉節點為止。應注意到,一支葉節點是具特徵於具有一數值“0”的一次分割旗標。對於一節點存在於主要四叉樹最低階層級別上並且因此對應至最小可接受的預測區塊尺寸之情況,則將無次分割旗標必須被發送。對於第3a-c圖中之範例,將可能首先發送“1”,如在第6a圖中之190所展示,其指明樹型區塊150被切割成為其之四個子區塊152a-d。接著,將可能以光束掃描順序200遞迴式編碼所有的四個子區塊152a-d之次分割資訊。對於首先的二個子區塊152a、b,將可能發送“0”,其指明它們不被次分割(參看第6a圖中之202)。對於第三個子區塊152c(底部左方),將可能發送“1”,其指明這區塊被次分割(參看第6a圖中之204)。接著,依據遞迴式方法,這區塊之四個子區塊154a-d將可能被處理。在此,將可能對於第一子區塊(206)發送“0”並且對於第二(頂部右方)子區塊(208)發送“1”。接著,第3c圖中最小的區塊尺寸之四個區塊156a-d將可被處理。於這情況中,已到達最小的容許區塊尺寸之情況,由於進一步的次分割是不可能的,故無更多的資料將必須被發送。另外指明這些區塊將不進一步地被分割之“0000”,將被發送,如在第6a圖中之210的指示。在此步驟之後,將可對於第3b圖之下方的二個區塊發送“00”(參看第6a圖中之212),並且最後對於第3a圖中之底部右方的區塊發送“0”(參看214)。因此,表示四叉樹結構之全部的二元序列將是第6a圖中所展示者。
於第6a圖之這二元序列表示中不同的背景斜線對應至四叉樹為基礎之次分割的階層中之不同級別。斜線216表示級別0(對應至等於原始樹型區塊尺寸之一區塊尺寸),斜線218表示級別1(對應至等於一半原始樹型區塊尺寸之一區塊尺寸),斜線220表示級別2(對應至等於四分之一原始樹型區塊尺寸之一區塊尺寸),並且斜線222表示級別3(對應至等於八分之一原始樹型區塊尺寸之一區塊尺寸)。相同階層級別之所有次分割旗標(對應至二元序列表示範例中之相同區塊尺寸以及相同顏色),例如,可利用插入器18使用一相同機率模型被熵編碼。
應注意,對於廣度優先走訪之情況,次分割資訊將以不同的順序被發送,如第6b圖中之展示。
相似於對於預測目的之各樹型區塊的次分割,使成為殘差區塊之各形成預測區塊之分割必須於位元流中被發送。同時,可以有被發送作為側資訊並且自圖像至圖像改變之用於殘差編碼的一最大以及最小區塊尺寸。或者,用於殘差編碼之最大的以及最小區塊尺寸可在編碼器以及解碼器中被固定。在主要四叉樹之各個支葉節點,如第3c圖展示者,對應的預測區塊可被分割為最大可接受尺寸之殘差區塊。這些區塊是用於殘差編碼之次級四叉樹結構的組成根節點。例如,如果用於圖像之最大的殘差區塊尺寸是64×64並且預測區塊尺寸是32x32,則整體預測區塊將對應至尺寸32x32之一次級(殘差)四叉樹根節點。另一方面,如果對於圖像之最大的殘差區塊尺寸是16×16,則32x32預測區塊將由各個尺寸為16×16之四個殘差四叉樹根節點所組成。在各個預測區塊之內,次級四叉樹結構之傳信是以光束掃描順序(左方至右方,頂部至底部)利用根節點接根節點方式所完成。如同於主要(預測)四叉樹結構之情況中,對於各個節點,一旗標被編碼,其指明這特定節點是否被分割為其之四個子系節點。接著,如果這旗標具有一數值“1”,則這程序步驟對於所有四個對應的子系節點以及其之對應的子區塊,以光束掃描順序(頂部左方、頂部右方、底部左方、底部右方)遞迴式被重複,直到抵達次級四叉樹之一支葉節點為止。如於主要四叉樹之情況中,對於次級四叉樹最低階層級別上之節點不需要傳信,由於那些節點對應至不可更進一步被分割之最小可能殘差區塊尺寸的區塊。
對於熵編碼,屬於相同區塊尺寸之殘差區塊的殘差區塊次分割旗標可使用一相同的機率模型被編碼。
因此,依據上面有關第3a至6a圖所呈現之範例,次分割器28對於預測目的定義一主要的次分割並且對於殘差編碼目的定義主要次分割之不同尺寸區塊的次級次分割。資料流插入器18藉由對於各個樹型區塊以一曲折掃描順序傳信而編碼主要的次分割,一位元序列依據第6a圖與編碼主要次分割的最大主要區塊尺寸以及最大階層級別一起建立。因此,對於各個定義的預測區塊,關聯的預測參數已被包含進入資料流。此外,相似資訊,亦即,依據第6a圖之最大尺寸、最大階層級別以及位元序列,之編碼發生於其尺寸是等於或較小對於殘差次分割之最大尺寸的各個預測區塊,並且發生於其尺寸超過對於殘差區塊所定義的最大尺寸之預測區塊被預分割成之各個殘差樹根區塊。因此,對於各個被定義的殘差區塊,殘差資料被插進資料流內。
抽取器102在輸入116自資料流抽取各別的位元序列並且告知分割器104關於因此被取得之次分割資訊。除此之外,資料流插入器18以及抽取器102可在預測區塊以及殘差區塊之中使用先前提及的順序以進一步地發送語法元素,例如,藉由殘差預編碼器14輸出之殘差資料以及藉由預測器12輸出之預測參數。使用這順序具有優點,其中用以編碼某一區塊之個別的語法元素之適當脈絡可藉由利用鄰近區塊之先前被編碼/被解碼的語法元素被選擇。此外,同樣地,殘差預編碼器14以及預測器12、殘差重建器106以及預編碼器110可以上面敘述之順序處理個別的預測以及殘差區塊。
第7圖展示步驟流程圖,其可藉由抽取器102被進行,以便當如上面論述的方式編碼時可自資料流22抽取出次分割資訊。於第一步驟中,抽取器102分割圖像24成為樹根區塊150。這步驟被指示如第7圖中之步驟300。步驟300可涉及自資料流22抽取最大預測區塊尺寸之抽取器102。同時或可選擇地,步驟300可涉及自資料流22抽取最大階層級別的抽取器102。
接著,於步驟302中,抽取器102自資料流解碼出一旗標或位元。第一次步驟302被進行,抽取器102了解各別的旗標是屬於樹根區塊掃描順序140之第一樹根區塊150的位元序列之第一旗標。由於這旗標是階層級別0之一旗標,抽取器102於步驟302中可使用關聯於階層級別0的一脈絡模型,以便決定一脈絡。各個脈絡可具有用以熵解碼與之關聯的旗標之一各別的機率估計。該等脈絡之機率估計可對各別脈絡符號統計量分別脈絡地被調適。例如,為了於步驟302中決定用以解碼階層級別0之旗標的一適當脈絡,抽取器102可挑選一組脈絡之一脈絡,其取決於鄰近樹型區塊的階層級別0旗標被關聯於階層級別0,或甚至進一步地取決於,包含在位元串列內之資訊,該位元串列是定義目前處理的樹型區塊之鄰近樹型區塊(例如,頂部以及左方的鄰近樹型區塊)之四叉樹次分割。
於接著之步驟中,亦即,步驟304,抽取器102檢查關於最近被解碼之旗標是否建議一劃分。如果是這情況,則抽取器102劃分當前之區塊–目前是一樹型區塊–或於步驟306中指示這劃分至次分割器104a,並且檢查,於步驟308中,關於目前之階層級別是否等於最大階層級別減一。例如,於步驟300中,抽取器102,例如,同時也可具有自資料流抽取的最大階層級別。如果目前之階層級別不等於最大的階層級別減一,則於步驟310中抽取器102增加1至目前之階層級別,並且回至步驟302以自資料流解碼下一個旗標。這時,將於步驟302中被解碼的旗標屬於另外的階層級別,並且,因此,依據一實施例,抽取器102可挑選一不同組集脈絡之一者,該組集屬於目前之階層級別。該挑選同時也可以是取決於依據第6a圖已被解碼之鄰近樹型區塊的次分割位元序列。
如果一旗標被解碼,並且於步驟304中之檢查揭露這旗標並不建議目前區塊之一分割,則抽取器102繼續進行步驟312以檢查關於目前之階層級別是否為0。如果是這情況,則抽取器102於步驟314中以掃描順序140對於下一個樹根區塊繼續進行處理或如果沒有將被處理的樹根區塊留下,則停止處理抽取次分割資訊。
應注意到,第7圖之說明僅集中在預測次分割的次分割指示旗標之解碼,以至於,事實上,步驟314可能涉及例如,有關目前樹型區塊之進一步的二元值或語法元素之解碼。於任何情況中,如果一進一步的或下一個樹根區塊存在,則抽取器102自步驟314繼續進行至步驟302以自次分割資訊解碼下一個旗標,亦即,關於新樹根區塊的旗標序列之第一旗標。
如果於步驟312中,階層級別結果是不等於0,則於步驟316中操作繼續進行關於目前節點之進一步的子系節點是否存在之檢查。亦即,當抽取器102於步驟316中進行檢查時,於步驟312中其已被檢查目前之階層級別是否為除了0階層級別之外的一階層級別。接著,這表示一親源節點存在,其屬於一樹根區塊150或較小的區塊152a-d,或更小的區塊152a-d,以及等等之一者。最近被解碼的旗標所屬之樹型結構節點具有一親源節點,其是相用於目前樹型結構之三個進一步的節點。在具有一共同親源節點之此些子系節點中的掃描順序已在第3a圖中對於階層級別0以參考標號200作為範例地被說明。因此,於步驟316中,抽取器102檢查關於所有的這些四個子系節點是否已在第7圖處理程序之內被視訪過。如果不是這情況,亦即,如果有目前親源節點之進一步的子系節點,則第7圖處理程序繼續進行步驟318,其中下一個子系節點依據在目前階層級別內之一曲折掃描順序200將被視訪,以至於其之對應的子區塊此刻代表處理程序7之目前區塊,並且隨後,於步驟302中,一旗標將自關於目前區塊或目前節點之資料流被解碼出。然而,如果於步驟316中,對於目前之親源節點無進一步的子系節點,則第7圖之處理程序繼續進行至步驟320,其中目前之階層級別在處理程序繼續進行步驟312之後將被減去1。
藉由進行第7圖展示之步驟,抽取器102以及次分割器104a相配合以自資料流重新獲得在編碼器側被選擇之次分割。第7圖之處理程序是集中在上面所說明的預測次分割情況。第8圖展示,與第7圖的流程圖組合,抽取器102以及次分割器104a如何相配合以自資料流重新獲得殘差次分割。
尤其是,第8圖展示對於自預測次分割所產生的各個預測區塊,分別地藉由抽取器102以及次分割器104a所進行之步驟。這些預測區塊被走訪,如上面提到的,其是依據在預測次分割的樹型區塊150中之一曲折掃描順序140並且使用用以走訪支葉區塊之目前視訪的各個樹型區塊150內之一深度優先走訪順序,例如,於第3c圖中所展示。依據深度優先走訪順序,劃分的主要樹型區塊之支葉區塊以深度優先走訪順序被視訪,其以曲折掃描順序200視訪某一階層級別之子區塊是否具有一共用之目前節點並且在繼續進行至下一個子區塊之前首先以這曲折掃描順序200主要地掃描各個這些子區塊之次分割。
對於第3c圖中之範例,在樹型區塊150支葉節點之中所產生的掃描順序以參考標號350被展示。
對於一目前視訪的預測區塊,第8圖之處理程序開始於步驟400。於步驟400中,指示目前區塊之目前尺寸的一內在參數被設定而等於殘差次分割階層級別0之尺寸,亦即,殘差次分割的最大區塊尺寸。應記得,最大殘差區塊尺寸可能較低於預測次分割的最小區塊尺寸或可能等於或較大於後者。換句話說,依據一實施例,編碼器是自由地選擇任何剛提及的可能性。
於接著的步驟中,亦即,步驟402,關於目前視訪的區塊之預測區塊尺寸是否較大於指示目前尺寸之內部參數的檢查被進行。如果是這情況,則目前視訪的預測區塊,其可能是預測次分割之一支葉區塊或預測次分割之一樹型區塊,其不更進一步地被劃分,是較大於最大的殘差區塊尺寸,並且於這情況中,第8圖之處理程序繼續進行第7圖之步驟300。亦即,目前視訪的預測區塊被分割為殘差樹根區塊,並且在這目前視訪的預測區塊內之第一殘差樹型區塊的旗標序列之第一旗標,於步驟302中被解碼以及等等。
然而,如果目前視訪之預測區塊具有等於或較小於指示目前尺寸之內部參數的尺寸,則第8圖之處理程序繼續進行至步驟404,其中預測區塊尺寸被檢查以決定其是否等於指示目前尺寸之內部參數。如果是這情況,則分割步驟300可被跳過並且處理程序繼續直接地進行第7圖之步驟302。
然而,如果,目前視訪的預測區塊之預測區塊尺寸是較小於指示目前尺寸之內部參數,則第8圖之處理程序繼續進行步驟406,其中階層級別被增加1並且目前之尺寸被設定而使得新的階層級別之尺寸,例如被除以2(於四叉樹次分割情況之兩個軸方向中)。隨後,再次進行步驟404之檢查。利用步驟404以及406所形成之迴路的作用是階層級別經常對應至將被劃分之對應的區塊尺寸,無關於各別的預測區塊較小於或等於/較大於最大殘差區塊尺寸。因此,當於步驟302中解碼旗標時,進行之脈絡模型同時依據旗標指示之區塊的階層級別以及尺寸。對於不同階層級別或區塊尺寸的旗標之不同脈絡的分別地使用之一優點是,其中機率估計可在旗標評估發生之中良好地適用於實際機率分配,另一方面,其具有一相對適度之將被處理的脈絡數目,因此降低脈絡管理經常支出以及增大脈絡對實際符號統計資料之調適性。
如上面所提到的,其可能有一個以上的樣本陣列並且這些樣本陣列可被群集成為一個或多個平面群組。將被編碼之輸入信號,進入輸入32,例如,可能是一視訊序列之一圖像或一靜止影像。因此,該圖像可能以一個或多個樣本陣列形式被給與。於一視訊序列之一圖像或一靜止影像的編碼脈絡中,樣本陣列可指示三個彩色平面,例如紅、綠以及藍或指示亮度以及色度平面,如以YUV或YCbCr之彩色表示。此外,表示屬性,亦即,對於3D視訊素材之透明度,及/或深度資訊之樣本陣列也可呈現。一些這種樣本陣列可群集一起而形成所謂的平面群組。例如,亮度(Y)可以是僅具有一樣本陣列之一平面群組並且色度,例如CbCr,可以是具有二個樣本陣列之另外的平面群組,或於另外的範例中,YUV可以是具有三個矩陣之一平面群組,並且對於3D視訊素材之一深度資訊可以是僅具有一樣本陣列之一不同的平面群組。對於每個平面群組,一主要四叉樹結構可在資料流22之內被編碼而表示成為預測區塊之分割並且對於各個預測區塊,一次要四叉樹結構表示成為殘差區塊之分割。因此,依據剛提及之第一範例,其中亮度分量是一平面群組,而色度分量則形成其他的平面群組,其可能是用於亮度平面預測區塊之一個四叉樹結構,用於亮度平面殘差區塊之一個四叉樹結構,用於色度平面預測區塊之一個四叉樹結構以及用於色度平面殘差區塊之一個四叉樹結構。然而,於先前提及的第二範例中,其可能是一起用於亮度以及色度(YUV)預測區塊之一個四叉樹結構,一起用於亮度以及色度(YUV)殘差區塊之一個四叉樹結構,用於3D視訊素材之深度資訊預測區塊的一個四叉樹結構以及用於3D視訊素材之深度資訊殘差區塊的一個四叉樹結構。
進一步地,於先前的說明中,輸入信號使用一主要四叉樹結構被分割為預測區塊並且其說明這些預測區塊如何進一步地使用一次級四叉樹結構被次分割為殘差區塊。依據一不同實施例,次分割可能不在次級四叉樹級結束。亦即,自使用次級四叉樹結構之一分割所取得的區塊可使用一第三代四叉樹結構進一步地被次分割。這分割,依次地,可能被使用於使用可幫助編碼殘差信號之進一步的編碼工具之目的上。
先前的說明集中在分別地藉由次分割器28以及次分割器104a所進行之次分割上。如上面所提到的,藉由次分割器28以及104a被定義之次分割,可能分別地控制先前提到的編碼器10以及解碼器100模組之處理區塊尺寸。然而,依據下面說明之實施例,分別地,次分割器228以及104a,於其之後分別地接隨著一合併器30以及合併器104b。然而,應注意到,合併器30以及104b是選用的並且可被去除。
然而,實際上,並且如下面更詳細之論述,合併器提供結合一些預測區塊或殘差區塊為群集或聚集給編碼器之機會,以至於其他者,或至少一些其他的模組可一起處理這些區塊群集。例如,預測器12可犧牲在一些預測區塊的預測參數間之小的偏移,其藉由使用次分割器28之次分割而最佳化地被決定,且如果對於屬於這群集所有區塊之一共同參數一起傳送之群集的預測區塊之傳信,在位元率/失真比意義上比傳信分別地對於所有這些預測區塊之預測參數是更有希望的話,則其將替代地使用共用於所有這些預測區塊之預測參數。對於預測器12以及110重新獲得預測之處理,其本身,依據這些共用預測參數,仍可以預測區塊方式發生。然而,其也有可能是預測器12以及110對於全體預測區塊群集進行一次預測處理。
如下面更詳細之論述,其也有可能是,預測區塊的群集不僅是對於使用供用於一群集的預測區塊之相同或共用之預測參數,其同時也可以是,可選擇地,或另外地,使編碼器10一起發送對於這群集之一預測參數以及屬於這群集之預測區塊之預測殘差,以至於對於這群集之預測參數的傳信經常費用可被降低。於後者之情況中,合併處理程序可能僅影響資料流插入器18而不影響殘差預編碼器14以及預測器12之決定。然而,下面將呈現更多細節。然而,為完整起見,應注意到,剛提及的論點同時也可應用至其他的次分割上,例如,上面提及之殘差次分割或過濾器次分割。
首先,樣本組集之合併,例如,先前所提到的預測以及殘差區塊,以更普遍的意義被激發,亦即,非限定於上面所提及之多樹型次分割。然而,對於上面剛說明之實施例,接著之說明將集中於自多樹型次分割所產生的區塊之合併。
大體而言,對於發送關聯的編碼參數之目的,合併關聯於樣本特定組集的語法元素將可降低影像以及視訊編碼應用中之側資訊率。例如,將被編碼之信號的樣本陣列通常被劃分成為樣本的特定組集或樣本組集,其可表示矩形或正方形區塊,或任何其他的樣本採集,包含成任意形狀之區,三角形或其他的形狀。在先前所說明之實施例中,簡單地連接區是自多樹型次分割所產生的預測區塊以及殘差區塊。樣本陣列之次分割可被固定,如利用語法,或,如上面的說明,次分割可以是,至少部份地,在位元流內部被傳信。為維持對於傳信次分割資訊之側資訊率為小量的,語法通常僅允許導致簡易分割之限定數目選擇,例如,區塊次分割為較小的區塊。樣本組集被關聯於特定編碼參數,其可指定預測資訊或殘差編碼模式,等等。關於這論題之細節已在上面被說明。對於各個樣本組集,例如,用以指明預測及/或殘差編碼之個別的編碼參數可被發送。為了達成改進的編碼效率,下面說明之合併論點,亦即,將二個或更多個樣本組集合併成為所謂的樣本組集之群集,將可具有一些優點,其將在下面進一步地被說明。例如,樣本組集可被合併,因而此一群集的所有樣本之組集共用相同的編碼參數,其可與群集中的樣本組集之一者共同被發送。藉由如此進行,編碼參數不必須得對於樣本組集之群集的各個樣本組集分別地被發送,反而,編碼參數對於樣本組集之所有群集僅被發送一次。因而,對於發送編碼參數之側資訊率可被降低並且全面之編碼效率可被改進。如一供選擇之方法,對於一個或多個編碼參數之一另外的精緻度可對於一樣本組集的群集之一個或多個樣本組集而被發送。該精緻度可以是應用於一群集之所有樣本組集或僅僅應用於將被發送的樣本組集之其中一者。
將在下面進一步地被說明之合併論點同時也提供產生位元流22之較大的自由度給編碼器,因為該合併方法顯著地增大對於挑選供用於一圖像之樣本陣列的分割之可能性數量。因為該編碼器可在更多的選項之間做出選擇,例如,對於最小化一特定位元率/失真量測,故編碼效率可被改進。操作一編碼器可以有數個可能性。於一簡易的方法中,編碼器可首先決定樣本陣列之最佳的次分割。概略地參看至第1圖,次分割器28可在第一階段中決定最理想的次分割。隨後,其可對於各個樣本組集被檢查,是否另外的樣本組集或樣本組集之另外的群集之合併,降低特定位元率/失真成本量測。於此,關聯於樣本組集之一合併群集的預測參數可重新被估計,例如,藉由進行一新的移動搜尋,或已對於共有之樣本組集被決定之預測參數以及供用於合併之候選樣本組集或樣本組集之群集可針對被考慮的樣本組集之群集而被評估。一更廣泛之方法中,對於樣本組集之附加候選群集的一特定位元率/失真成本量測可被評估。
應注意到,此後說明之合併方法並不改變樣本組集之處理順序。亦即,合併概念可以使延遲不會增大的方式被實作,亦即,各個樣本組集可如不使用合併方法之相同時間,而保持可解碼。
如果,例如,藉由降低編碼預測參數之數目而被儲存之位元率,是較大於附加地耗費於供指示對解碼側之合併的編碼合併資訊之位元率,將在下面進一步地被說明之合併方法將導致一增大的編碼效率。應進一步注意到,對於合併所說明的語法延伸部份,關於挑選一圖像或平面群組成為區塊之分割方面,提供編碼器額外之自由度。換句話說,編碼器並不被限定於首先處理次分割而接著去檢查產生的一些區塊是否具有相同的組集或相似組集的預測參數。如一簡易的選擇,編碼器可首先依據位元率失真成本量測決定次分割並且接著編碼器可檢查,對於各個區塊,關於與其之鄰近區塊或被關聯之先前被決定的區塊群集之一者的合併,是否降低位元率失真成本量測。於此,關聯於新的區塊群集之預測參數可重新被估計,例如,藉由進行一新的移動搜尋,或對於目前之區塊以及鄰近的區塊或區塊群集已被決定的預測參數可對於新的區塊群集被評估。合併資訊可以區塊基礎之方式被傳信。有效地,合併同時也可以解釋為對於一目前區塊之預測參數的推論,其中被推論之預測參數被設定為等於鄰近區塊之一者的預測參數。可選擇地,殘差量可對於一區塊群集內之區塊被發送。
因此,在下面進一步被說明之合併概念下的基本構想將藉由合併鄰近的區塊使成為區塊群集,而降低發送預測參數或其他編碼參數所需的位元率,其中各區塊群集被關聯於唯一的編碼參數組集,例如,預測參數或殘差編碼參數。除了次分割資訊之外,如果出現的話,合併資訊在位元流之內部被傳信。合併概念之優點是對於編碼參數自一減少的側資訊率所產生之增大的編碼效率。應注意到,此處說明之合併處理程序同時也可延伸至除了空間維度之外的其他維度。例如,一樣本或區塊之組集的群集,分別地,位於數個不同的視訊圖像之內,可被合併成為一個區塊群集。合併同時也可被應用至4D壓縮以及光場編碼。
因此,概要地返回至先前第1至8圖的說明,值得注意的是,次分割之後隨著合併處理具有分別地無關於特定方式次分割圖像之次分割器28以及104a之優點。更確切地說,後者也可以相似,例如,H.264,的方式次分割圖像,亦即,藉由次分割各個圖像使成為預定尺寸(例如,16x16亮度樣本或在資料流內被傳信的尺寸)之矩形或正方形巨區塊的規則性排列,各巨區塊具有某些與之關聯的編碼參數,其包括,尤其是,分割參數,其對各個巨區塊,定義使成為一規則性子網格1、2、4之分割或一些被視為用以預測之區塊尺寸的其他劃分數目以及於資料流中與用以定義殘差量以及對應的殘差轉換區塊尺寸的劃分之對應的預測參數。
於任何情況中,合併提供上面所提概述的優點,例如,降低影像以及視訊編碼應用中之側資訊位元率。特定的樣本組集,其可代表矩形或正方形區塊或任意形狀之區或任何其他樣本收集,例如,任何簡單連接區或樣本通常被連接於編碼參數之一特定組集並且對於各個樣本組集,編碼參數被包含在位元流中,該等編碼參數表示,例如,預測參數,其指明對應的樣本組集如何使用已先前被編碼的樣本被預測。使圖像的樣本陣列成為樣本組集之劃分可藉由語法被固定或可藉由對應的次分割資訊在位元流內部被傳信。對於樣本組集之編碼參數可以利用語法被給與的一預定順序被發送。依據合併功能,合併器30可傳信,對於一共同樣本組集或一目前區塊,例如,一預測區塊或殘差區塊,其與一個或多個其他樣本組集被合併成為樣本組集之一群集。對於一樣本組集之群集的編碼參數,因此,將僅需要被發送一次。於一特定實施例中,如果目前之樣本組集與編碼參數已先前地被發送之一樣本組集或一已存在的樣本組集群集合併的話,則一目前樣本組集之編碼參數將不被發送。反之,對於目前之樣本組集的編碼參數被設定為等於目前之樣本組集被合併的樣本組集或樣本組集之群集的編碼參數。如另一選擇方法,對於一個或多個編碼參數之另外的精緻度可對於一目前之樣本組集被發送。該精緻度可以被應用至一群集的所有樣本組集或僅被應用至被發送的樣本組集。
依據一實施例,對於各個樣本組集,例如,如上面提到的一預測區塊、上面提到的一殘差區塊、或上面提到的一多樹型次分割之支葉區塊,所有先前被編碼/被解碼的樣本組集之組集被稱為“因果性樣本組集之組集”。參看,例如,第3c圖。這圖形中所展示的所有區塊是某一次分割之結果,例如,一預測次分割或一殘差次分割或任何多樹型次分割,或其類似者,並且在這些區塊之中被定義的編碼/解碼順序利用箭號350被定義。考慮在這些區塊中之某一區塊是目前之樣本組集或目前之簡單地連接區時,則其之因果性樣本組集之組集將是由沿著順序350之先前於目前區塊的所有區塊所組成。然而,再次地,回顧到不使用多樹型次分割之另外的次分割,其將不但可能是而且是下面的合併原理之關切議題。
樣本組集,其可被使用於與一目前樣本組集之合併,在下面將被稱為“候選樣本組集之組集”,並且經常是“因果性樣本組集之組集”的一子集。子集如何被形成之方式可以是已知於解碼器或其可在資料流或位元流內部自編碼器被指定至解碼器。如果一特定之目前樣本組集被編碼/被解碼,並且其候選樣本組集之組集不是空的,則其在編碼器處被傳信於資料流內或在解碼器處自資料流被得到,是否共同樣本組集與得自這候選樣本組集之組集的一樣本組集合併,並且,如果如此,則與它們合併。否則,該合併不能被使用於這區塊,由於候選樣本組集之組集反正總是空的。
有不同的方法以決定因果性多個樣本組集之組集的子集,其將表示多個候選樣本組集之組集。例如,候選樣本組集之決定可依據目前樣本組集內部之一樣本,其是唯一幾何式被定義,例如,一矩形或正方形區塊之左上方影像樣本。自這唯一幾何式被定義的樣本開始,一特定非零值數目之樣本被決定,其直接地表示這唯一幾何式被定義的樣本之空間鄰近者。例如,這特定非零值數目之樣本包括唯一地幾何式被定義的目前樣本組集之樣本的頂部鄰近者以及左方鄰近者,因而鄰近樣本的非零值數目可以是,最大為二,如果頂部或左方鄰近者之一是不可供用的或位於圖像之外則是一,或於兩鄰近者皆是缺失的情況中,則為零值。
候選樣本組集之組集接著可被決定以包括含有非零值數目之剛提及鄰近樣本的至少一者的那些樣本組集。參看,例如,第9a圖。被考慮作為合併物件之目前樣本組集,可能是區塊X並且其是幾何式唯一被定義的樣本,應可範例式作為在400所指示之頂部左方樣本。樣本400之頂部以及左方鄰近者以402以及404被指示。因果性樣本組集之組集或因果性區塊之組集以斜線方式被強調。在這些區塊之中,區塊A以及B包括鄰近樣本402以及404之一者,並且因此,這些區塊形成候選區塊之組集或候選樣本組集之組集。
依據另外的實施例,為合併目的被決定的候選樣本組集之組集也可額外地或專門地被包含多個樣本組集,該等樣本組集含有一特定非零值數目樣本,其可以是具有相同空間位置之一個或二個,但是卻被包含在一不同圖像中,亦即,例如,一先前被編碼/被解碼的圖像。例如,除了第9a圖中A以及B區塊之外,先前被編碼的圖像之一區塊可被使用,其包括在如樣本400之相同位置樣本。順便地,值得注意的是,僅有頂部鄰近樣本404或僅有左方鄰近樣本402可被使用,以定義在先前提及的非零值數目之鄰近樣本。大體上,候選樣本組集之組集可在目前圖像之內或其他圖像中自先前所處理的資料被得到。有關組集得到之資訊可包含空間方向資訊,例如,有關於一特定方向的轉換係數和目前圖像之影像梯度或其可包含時間方向資訊,例如,鄰近移動表示。候選樣本組集之組集可被得自可供用於接收器/解碼器之此等資料以及其他資料與在資料流內之側資訊,如果存在的話。
應注意到,候選樣本組集之得到程序利用在編碼器側之合併器30以及在解碼器側之合併器104b兩者平行地被進行。如剛所提到的,兩者可依據其兩者所知的預定方式而彼此無關地決定候選樣本組集之組集或編碼器可在位元流內傳信注意事項,其將合併器104b帶入一位置,以相當於合併器30在編碼器側所決定的候選樣本組集之組集的方式而進行這些候選樣本組集之得到程序。
如將在下面更詳細之說明,合併器30以及資料流插入器18合作,以便發送供用於各樣本組集之一個或多個語法元素,其指明該等樣本組集是否與另外的樣本組集合併,依次地,其可以是已先前合併之樣本組集的群集之部份並且其中用於合併之候選樣本組集的組集被採用。抽取器102,依次地,抽取這些語法元素並且因此通知合併器104b。尤其是,依據稍後說明之特定實施例,一個或二個語法元素被發送以供指明用於一特定樣本組集之合併資訊。第一語法元素指明目前之樣本組集是否與另外的樣本組集合併。第二語法元素,其僅如果第一語法元素指明目前之樣本組集與另外的樣本組集合併,指明供用於合併的哪個候選樣本組集之組集被採用時方被發送。如果得到的候選樣本組集之一組集是空的,則第一語法元素之發送可被抑制。換句話說,僅如果所得到的候選樣本組集之一組集不是空的話,第一語法元素方可被發送。僅如果得到的候選樣本組集之一組集包含一個以上的樣本組集時,第二語法元素方可被發送,因為如果僅一個樣本組集被包含在候選樣本組集之組集中,則進一步的挑選無論如何是不可能的。更進一步地,如果候選樣本組集之組集包括一個以上的樣本組集,但是如果候選樣本組集之組集的所有樣本組集被關聯於相同的編碼參數,則第二語法元素之發送可能被抑制。換句話說,僅如果候選樣本組集之一得到組集之至少二個樣本組集被關聯於不同的編碼參數,則第二語法元素方可被發送。
在位元流之內,對於一樣本組集之合併資訊可在預測參數或其他特定編碼參數被關聯於樣本組集之前被編碼。僅如果合併資訊傳信目前之樣本組集將不與任何其他樣本組集合併,則預測或編碼參數方可被發送。
對於某一樣本組集,亦即,一區塊,之合併資訊,例如,可在預測參數,或更廣義地,關聯於各別的樣本組集之編碼參數之一適當子集被發送之後被編碼。預測/編碼參數之子集可由一個或多個參考圖像指標或移動參數向量之一個或多個分量或一參考指標以及一移動參數向量之一個或多個分量等等所組成。已先前被發送預測或編碼參數之子集可被使用以供得到自候選樣本組集的一較大暫定組集之候選樣本組集的一組集,其可如上面說明被得到。如一範例,在目前樣本組集之已編碼之預測與編碼參數以及候選樣本組集之初步組集的對應的預測或編碼參數之間,依據一預定距離量測之一差異量測或距離可被計算出。接著,僅被計算的差異量測或距離較小於或等於一預定或被得到的臨界值之那些樣本組集,被包含在候選樣本組集之最後,亦即,減小組集。例如,參看第9a圖。目前之樣本組集可以是區塊X。關於這區塊之編碼參數的一子集可已經被插入資料流22中。想像,例如,區塊X是一預測區塊,於其情況中,編碼參數之適當子集可以是對於這區塊X之預測參數的一子集,例如,得自包括一圖像參考指標以及移動映射資訊,例如,一移動向量之一組集的一子集。如果區塊X是殘差區塊,則編碼參數之子集是一殘差資訊之子集,例如,轉換係數或指示在區塊X內之重要轉換係數的位置之映射圖。依據這資訊,資料流插入器18以及抽取器102兩者皆可使用這資訊,以便決定得自區塊A以及B的一子集,於這特定實施例中,其形成先前所提到的候選樣本組集之初步組集。尤其是,由於區塊A以及B屬於因果性樣本組集之組集,在區塊X之編碼參數目前正被編碼/被解碼之時,其編碼參數是可供用於編碼器以及解碼器兩者。因此,在先前所提到的使用差異量測之對照可被使用以排除候選樣本組集A以及B之初步組集的任何數目區塊。候選樣本組集之減小組集接著可如上面說明地被使用,亦即,以便決定關於指示一合併之一合併指示符是否在其內部被發送或者是否將依據在候選樣本組集之減小組集內之樣本組集數目自資料流被抽取出,以及決定關於一第二語法元素是否必須在其內部被發送,或必須自資料流被抽取出一第二語法元素,該第二語法元素指示在候選樣本組集之減小組集內之哪些樣本組集將是用於合併之搭配區塊。
對照於先前所提到的臨界值,在先前所提到被比較的距離可被固定並且是已知於編碼器以及解碼器兩者或可依據所計算的距離,例如,差異數值之中間數,或一些其他中央傾向值或其類似者被得到。於這情況,候選樣本組集之減小組集將無可避免地是候選樣本組集的初步組集之一適當子集。可選擇地,僅對於依據距離量測之距離被最小化的那些樣本組集自候選樣本組集之初步組集被挑選出。可選擇地,使用先前所提到距離量測,則正好有一樣本組集自候選樣本組集之初步組集被挑選出。於後面情況中,合併資訊將僅需要指示目前之樣本組集是否將與一個別的候選樣本組集合併。
因此,候選區塊之組集可如下面關於第9a圖之說明被形成或被得到。開始於第9a圖中目前區塊X之頂部左方的樣本位置400,其之左方鄰近的樣本402位置以及其之頂部鄰近樣本404位置在其之編碼器以及解碼器側被得到。候選區塊之組集因此可僅具有高至二個元素,亦即,得自第9a圖中包含二個樣本位置之一者的因果性區塊之斜線組集的那些區塊,其於第9a圖之情況中,是區塊B以及A。因此,候選區塊之組集可僅具有目前區塊之頂部左方樣本位置的二個直接鄰近區塊作為其之元素。依據另外的實施例,候選區塊之組集可利用已在目前區塊之前被編碼並且包含表示目前區塊之任何樣本直接空間鄰近者之一個或多個樣本的所有區塊被給與。該直接空間鄰近區可被限定於目前區塊之任何樣本的直接左方鄰近者及/或直接頂部鄰近者及/或直接右方鄰近者及/或直接底部鄰近者。例如,參看第9b圖,其展示另外的區塊次分割。於這情況中,候選區塊包括四個區塊,亦即,區塊A、B、C、以及D。
可選擇地,候選區塊之組集,額外地,或專門地,可含有包括將被置放在相同於目前區塊之任何樣本位置的一個或多個樣本之區塊,但是被包含在一不同者,亦即,已被編碼/被解碼的圖像中。
更不同地,區塊之候選組集表示在上面說明之區塊組集的一子集,其藉由以空間或時間方向表示之鄰近區被決定。候選區塊之子集可被固定,被傳信或被得到。候選區塊子集之得到可考慮對於該圖像中或其他圖像中的其他區塊之決定。如一範例,被關聯於相同或比其他候選區塊更相似的編碼參數之區塊,可能不被包含在區塊之候選組集中。
下面實施例之說明,將應用於僅包含目前區塊之頂部-左方樣本的左方以及頂部鄰近樣本之被考慮作為最大可能的候選者之二個區塊的情況中。
如果候選區塊之組集不是空的,則被稱為merge_flag(合併_旗標)之一旗標被傳信,該旗標指明目前區塊是否與任何候選區塊合併。如果merge_flag是等於0 (“假”),則這區塊不與其候選區塊之一者合併,並且所有編碼參數如常地被發送。如果merge_flag是等於1(“真”),則下述適用。如果候選區塊之組集包含一個並且僅一個區塊,則這候選區塊被使用於合併。否則,候選區塊之組集確切地僅包含二個區塊。如果這二個區塊之預測參數是相同的,則這些預測參數被使用於目前之區塊。否則(二個區塊具有不同的預測參數),被稱為merge_left_flag (合併_左方_旗標)之一旗標被傳信。如果merge_left_flag是等於1 (“真”),則包含目前區塊之頂部-左方樣本位置的左方鄰近樣本位置之區塊自候選區塊之組集被挑選出。如果merge_left_flag是等於0(“假”),得自候選區塊之組集的其他(亦即,頂部鄰近)區塊被挑選。被挑選的區塊之預測參數被使用於目前之區塊。
總結有關合併的一些上面說明實施例,參考第10圖,其展示利用抽取器102進行以自進入輸入116之資料流22抽取出合併資訊之步驟。
處理程序開始於450,其辨識用於一目前樣本組集或區塊之候選區塊或樣本組集。應記得,用於區塊之編碼參數以某種一維順序在資料流22之內被發送,並且因此,第10圖是有關於目前被視訪的樣本組集或區塊重新獲得合併資訊之處理程序。
如在先前所提到的,辨識以及步驟450可包括依據鄰近區論點在先前被解碼的區塊,亦即,因果性區塊組集之中的辨識。例如,那些鄰近區塊可被指定為候選者,其包含在空間或時間方面鄰近於目前區塊X之一個或多個幾何式預定樣本之某些鄰近的樣本。進一步地,辨識步驟可包括二個階段,亦即,第一階段包含如剛提及的辨識,亦即,依據鄰近區,導致候選區塊之一初步組集的辨識;以及第二階段,依據該第二階段,僅被指定候選的那些區塊(其已被發送之編碼參數滿足對於目前區塊X之編碼參數的一適當子集之某種關係),已在步驟450之前自資料流被解碼。
接著,處理步驟至步驟452,其決定關於候選區塊數目是否較大於零值。如果是這情況,則於步驟454中一merge_flag自資料流被抽取出。抽取步驟454可包含熵解碼。於步驟454中,用於熵解碼merge_flag之脈絡可依據語法元素被決定,該等語法元素屬於,例如,候選區塊之組集或候選區塊之初步組集,其中語法元素上之相依性可被限定於屬於相關組集之區塊是否已接受合併之資訊。被挑選的脈絡之機率估計可被調適。
然而,如果候選區塊數目被決定為零值取代452時,則第10圖之處理程序繼續進行步驟456,於其中目前區塊之編碼參數自位元流被抽取出,或於上面提到之二個階段辨識選擇的情況中,自其餘的編碼參數被抽取出,其中在抽取器102以區塊掃描順序(例如,第3c圖中展示之順序350)繼續進行處理下一個區塊之後。
返回至步驟454,處理程序在步驟454之抽取後,繼續進行步驟458關於被抽取之merge_flag是否建議目前區塊合併之發生或無的檢查。如果沒有合併將發生,則處理程序繼續進行在先前所提到的步驟456。否則,處理程序繼續進行步驟460,其包含關於候選區塊數目是否等於一之檢查。如果是這情況,則關於在候選區塊之中的某一候選區塊的指示之發送是不需要的,並且因此第10圖之處理程序繼續進行步驟462,依據該步驟,目前區塊之合併搭配者被設定而僅為在其之後的候選區塊,於步驟464中,合併的搭配區塊之編碼參數被使用於編碼參數或目前區塊之其餘編碼參數的調適或預測。於調適情況中,目前區塊之缺失的編碼參數僅自合併搭配區塊被複製。於其他情況中,亦即,於預測情況中,步驟464可涉及自資料流進一步抽取出殘差資料,該殘差資料是有關目前區塊之缺失編碼參數之預測殘差量,以及這殘差資料與自合併搭配區塊取得之這些缺失的編碼參數之預測的組合。
然而,如果於步驟460中,候選區塊數目被決定為較大於一,則第10圖之處理程序進至步驟466,其中關於編碼參數或編碼參數之相關部份–亦即,有關其對於目前區塊之在資料流之內尚未被轉換的部份之子部份–是否彼此相同的檢查被進行。如果是這情況,於步驟468中,這些共同的編碼參數被設定為合併參考或候選區塊被設定為合併搭配者,並且於步驟464中,各別的相關編碼參數被使用於調適或預測。
應注意到,合併搭配者其本身可能已經是其合併被傳信的區塊。於這情況中,於步驟464中,被採用的或預測地被取得的合併搭配之編碼參數被使用。
否則,亦即,於編碼參數是不相同的情況中,第10圖之處理程序繼續進行至步驟470,其中進一步的語法元素自資料流被抽取出,亦即,這merge_left_flag。一分別的脈絡組集可被使用於熵-解碼這旗標。被使用於熵-解碼merge_left_flag之脈絡組集同時也可僅包括一個脈絡。在步驟470之後,利用merge_left_flag被指示之候選區塊於步驟472中被設定為合併搭配者,並且被使用於步驟464中之調適或預測。在步驟464之後,抽取器102繼續以區塊順序進行處理下一個區塊。
當然,其存在著許多的選擇。例如,一結合語法元素可在資料流之內,替代先前所說明之分別的語法元素merge_flag以及merge_left_flag,而被發送,該結合語法元素傳信合併處理程序。進一步地,無關於二個候選區塊是否具有相同預測參數,在先前所提到的merge_left_flag可在資料流之內被發送,因此降低對於進行第10圖之處理程序的計算式經常支出。
如先前有關,例如,第9b圖之表示,多於二個以上的區塊可被包含在候選區塊之組集中。進一步地,合併資訊,亦即,傳信一區塊是否被合併之資訊,並且,如果是合併,則候選區塊將與其合併,而利用一個或多個語法元素被傳信。一語法元素可指明該區塊是否與任何的候選區塊合併,例如,上面所說明之merge_flag。僅如果候選區塊之組集不是空的,則旗標可被發送。一第二語法元素可傳信哪些候選區塊被採用於合併,例如,在先前所提到的merge_left_flag,但是一般指示在二個或二個以上的候選區塊之中的一選擇。僅如果第一語法元素傳信目前之區塊將與候選區塊之一者合併,則第二語法元素可被發送。僅如果候選區塊之組集包含一個以上的候選區塊及/或如果任何的候選區塊比任何其他的候選區塊具有不同的預測參數,則第二語法元素可進一步地被發送。該語法可以是依據於有多少的候選區塊被給與及/或依據於不同的預測參數如何被關聯於該等候選區塊。
用以傳信哪些候選區塊之區塊將被使用的語法,可在編碼器以及解碼器側同時地及/或平行地被設定。例如,如果對於在步驟450中被辨識的候選區塊有三種選擇,則語法被選擇,因而僅這三個選擇是可供選擇的並且被考慮用於熵編碼,例如,於步驟470中。換句話說,語法元素被選擇,因而其之符號字母僅具有如候選區塊之選擇存在般的許多元素。對於所有其他選擇的機率可被考慮為零值並且可在編碼器以及解碼器同時地調整熵-編碼/解碼。
進一步地,如先前有關步驟464所提到者,被推斷作為合併處理之結果的預測參數,可能表示被關聯於目前區塊的預測參數之完整組集或它們可表示這些預測參數之一子集,例如,對於使用多個假設預測之一區塊的一假設之預測參數。
如在上面所提到的,有關於合併資訊之語法元素可使用脈絡模型被熵編碼。語法元素可以是由上面所說明的merge_flag以及merge_left_flag(或相似的相似語法元素)所組成。於一具體之範例中,出自三個脈絡模型或多個脈絡之一者可於步驟454中被使用於編碼/解碼merge_flag。被使用的脈絡模型指標merge_flag_ctx可如下所述地被得到:如果候選區塊之組集包含二個元素,則merge_flag_ctx數值是等於二個候選區塊之merge_flag之總數值。然而,如果候選區塊之組集包含一個元素,則merge_flag_ctx數值可能是等於這一候選區塊之merge_flag的二倍數值。由於鄰近候選區塊之各個merge_flag可能是一或零值之任一者,則有三個脈絡是可供用於merge_flag。merge_left_flag可僅使用一單一機率模型被編碼。
然而,依據另一實施例,不同的脈絡模型可被使用。例如,非二元語法元素可被映射至一個二元符號序列上,即所謂的二元值。對於定義合併資訊的一些語法元素二元值或語法元素之脈絡模型,可依據先前被發送之鄰近區塊的語法元素或候選區塊數目或其他的量測被得到,而其他的語法元素或語法元素二元值可利用一固定脈絡模型被編碼。
關於上面區塊合併之說明,值得注意的是,候選區塊之組集同時也可以如上面說明之任何實施例之相同方式卻具有下面的修正而被得到:候選區塊分別地被限定在使用移動補償預測或框間預測之區塊。僅那些可以是候選區塊之組集的元素。合併資訊之傳信以及脈絡模型化可如上面說明地被完成。
返回至上面說明之多樹型次分割實施例以及接著說明之合併論點的組合,假設圖像藉由四叉樹為基礎之次分割結構之使用而被分割成為可變尺寸之正方形區塊,例如,指明合併的merge_flag以及merge_left_flag或其他的語法元素,可被交錯於對於四叉樹結構之各個支葉節點被發送的預測參數中。再次考慮到,例如,第9a圖。第9a圖展示用於圖像之四叉樹為基礎之次分割使成為可變尺寸之預測區塊的範例。最大尺寸的頂部二個區塊是所謂的樹型區塊,亦即,它們是最大的可能尺寸之預測區塊。這圖形中的其他區塊如同它們對應樹型區塊之次分割般地被取得。目前之區塊被標記為“X”。所有斜線區塊在目前區塊之前被編碼/解碼,因而它們形成因果性區塊組集。如於實施例之一者的候選區塊組集之得到的說明中所說明地,僅包含目前區塊之頂部-左方樣本位置的直接(亦即,頂部或左方)鄰近樣本之區塊可以是候選區塊組集之成員。因此目前之區塊可與區塊“A”或區塊“B”之任一者合併。如果merge_flag是等於0 (“假”),則目前之區塊“X”不與任何的二個區塊合併。如果區塊“A”以及“B”具有相同的預測參數,則不需要區分,因為與任何二個區塊之合併將導致相同的結果。因此,於這情況中,merge_left_flag不被發送。否則,如果區塊“A”以及“B”具有不同的預測參數,則merge_left_flag等於1(“真”)將合併區塊“X”以及“B”,因而merge_left_flag等於0(“假”)將合併區塊“X”以及“A”。於其他較佳實施例中,另外的鄰近(已被發送)區塊表示用於合併之候選者。
於第9b圖中,另一範例被展示。此處目前之區塊“X”以及左方的鄰近區塊“B”是樹型區塊,亦即,它們具有最大之允許的區塊尺寸。頂部鄰近區塊“A”之尺寸是樹型區塊尺寸的四分之一。斜線區塊是因果性區塊組集之元素。注意,依據較佳實施例之一者,目前區塊“X”僅可能與二個區塊“A”或“B”合併,而不與任何其他頂部鄰近的區塊合併。於其他較佳實施例中,另外的鄰近(已被發送)區塊表示用於合併之候選者。
在進行關於如何處理依據本申請實施例之圖像的不同樣本陣列之論點的說明之前,應注意,上面關於多樹型次分割以及一方面的傳信與另一方面之合併論點的論述,明白地表示這些論點能提供可彼此無關地被利用之優點。亦即,如上面先前的說明,一多樹型次分割與合併的組合具有特定優點,但是優點同時也因此產生自不同者,例如,合併特點利用次分割器30以及104a被進行的次分割被實施,而不是依據一四叉樹或多樹型次分割,但卻是對應至一巨區塊次分割,使這些巨區塊成為較小的劃分之規則性劃分。另一方面,依次地,組合多樹型次分割與最大樹型區塊尺寸指示的發送在位元流內,以及多樹型次分割的使用與輸送區塊對應的編碼參數之深度優先走訪順序的使用,是有利地無關於合併特點是否同時地被使用。大體上,合併之優點可被了解,當考慮那點時,直覺地,編碼效率可被增大,當樣本陣列編碼之語法以一方式被延伸時,其不僅是允許次分割一區塊,但同時也允許合併在次分割之後被取得的二個或更多個區塊。因此,取得以相同預測參數被編碼的一區塊群集。對於此一區塊群集的預測參數將僅需要被編碼一次。進一步地,有關樣本組集的合併,應再注意到,被考慮的樣本組集可能是矩形或正方形區塊,於其情況中,合併的樣本組集表示矩形及/或正方形區塊之採集。可選擇地,然而,考慮的樣本組集是任意成形之圖像區並且合併的樣本組集表示任意地成形的圖像區之採集。
下面的說明將集中於,每個圖像有一個以上的樣本陣列情況中,一圖像之不同樣本陣列之處理,並且在下面的附屬說明所論述的一些論點是有利地無關於被使用之次分割的類型,亦即,無關於次分割是否依據多樹型次分割,並且無關於是否使用合併。在開始說明關於一圖像的不同樣本陣列之處理的特定實施例之前,這些實施例的主要議題經由進入每個圖像之不同樣本陣列的處理領域的短介紹被引發。
下面的論述將集中在一影像或視訊編碼應用中一圖像之不同樣本陣列的區塊之間的編碼參數,並且,尤其是,集中於調適地預測在一圖像的不同樣本陣列之間的編碼參數之方式,該圖像的不同樣本陣列是在,例如,但不是專門地,分別地在第1與第2圖之編碼器以及解碼器中,或在另外的影像或視訊編碼環境中。該等樣本陣列,如上面所提到的,可表示有關於不同色彩成份的樣本陣列或關聯一圖像與添加資訊(例如,透明度資料或深度圖)的樣本陣列。有關於一圖像之色彩成份的樣本陣列同時也被稱為色彩平面。下面說明之技術同時也被稱為平面間採納/預測,並且其可被使用於區塊為基礎之影像以及視訊編碼器與解碼器中,而對於一圖像之樣本陣列的區塊之處理順序可以是任意的。
影像以及視訊編碼器大體上針對編碼彩色圖像(一靜止影像或一視訊序列圖像)被設計。一彩色圖像是由複數個色彩平面所組成,其表示對於不同色彩成份的樣本陣列。通常,彩色圖像被編碼為由一亮度平面以及二個色度平面組成的一組樣本陣列,其之二個色度平面指定色彩差異成份。於一些應用區域中,其通常是被編碼的樣本陣列之組集由表示對於紅色、綠色、以及藍色之三個主要色彩的樣本陣列之三個彩色平面所組成。此外,對於一被改進的色彩表示,一彩色圖像可以是由三個以上的色彩平面組成。更進一步地,一圖像可被關聯於輔助樣本陣列,其指定用於圖像之附加資訊。例如,此些輔助樣本陣列可以是指定用於被關聯的色彩樣本陣列的透明度(適合於特定顯示目的)之樣本陣列,或指定一深度圖(適合於產生複數個觀看圖像,例如,用於3-D顯示器)之樣本陣列。
於習見的影像以及視訊編碼標準中(例如H.264),色彩平面通常一起被編碼,因而特定的編碼參數,例如,巨區塊以及子巨區塊預測模式、參考指標、以及移動向量被使用於一區塊之所有色彩成份上。亮度平面可被考慮作為特定編碼參數在位元流中被指定之主色彩平面,並且色度平面可被考慮作為次要平面,其對應的編碼參數自主亮度平面被推斷。各亮度區塊被關聯於表示一圖像中相同區域的二個色度區塊。依據被使用的色度取樣形式,色度樣本陣列可以是較小於對於一區塊之亮度樣本陣列。對於由一亮度以及二個色度成份組成的各個巨區塊,使成為較小的區塊之相同分割被使用(假設該巨區塊被次分割)。對於由一亮度樣本區塊以及二個色度樣本區塊組成的各個區塊(其可以是巨區塊本身或該巨區塊之一子區塊),相同的預測參數組集,例如,參考指標、移動參數、並且有時是框內預測模式,被採用。於習見的視訊編碼標準之特定概況(例如,於H.264中之4:4:4)中,其也有可能是獨立地用以編碼一圖像之不同的色彩平面。於那組配中,巨區塊劃分、預測模式、參考指標、以及移動參數,可分別地被選擇以供用於一巨區塊或子區塊之色彩成份。習見編碼標準中,所有色彩平面使用特定編碼參數之相同組集(例如,次分割資訊以及預測參數)一起被編碼或所有色彩平面彼此完全獨自地被編碼。
如果色彩平面一起被編碼,則一組次分割以及預測參數必須被使用於一區塊之所有色彩成份。這確保側資訊被維持在小量,但比較於一獨立的編碼,其可能導致編碼效率之降低,因為不同的區塊分解以及對於不同色彩成份的預測參數之使用可能導致較小的位元率-失真成本。如一範例,對於色度成份使用一不同的移動向量或參考訊框可主要地降低對於色度成份之殘差信號能量並且增大它們整體的編碼效率。如果彩色平面獨自地被編碼,編碼參數,例如,區塊劃分、參考指標、以及移動參數可被挑選以個別地供用於各色彩成份,以便最佳化各色彩成份之編碼效率。但是卻不可能採用在色彩成份之間的冗餘。特定編碼參數之複數發送將導致增大的側資訊率(比較於結合編碼)並且這增大的側資訊率可對整體編碼效率具有一負面影響。同時,對於目前視訊編碼標準(例如,H.264)中之輔助樣本陣列的支援被限定於輔助樣本陣列使用它們獨有的編碼參數組集被編碼之情況中。
因此,在到目前為止被說明的所有實施例中,圖像平面可如上面說明地被處理,但是同時也如上面之論述,當可能依據一區塊基礎而決定,例如,對於一區塊是否所有樣本陣列以相同編碼參數被編碼或是否不同的編碼參數被使用時,對於複數個樣本陣列(其可能是有關於不同的色彩平面及/或輔助樣本陣列)之編碼的所有編碼效率可被增加。下面之平面間預測的基本構想允許,例如,以一區塊為基礎之調適性決定。編碼器可選擇,例如,依據一位元率-失真準則,對於一特定區塊之所有或一些樣本陣列是否使用相同編碼參數被編碼或是否不同的編碼參數使用於不同的樣本陣列。這挑選同時也可藉由對於一樣本陣列之一特定區塊傳信關於特定編碼參數是否自在不同樣本陣列之同一位置而被編碼的區塊被推斷而達成。也有可能安排對於一圖像中的不同樣本陣列於群集,其同時也稱為樣本陣列群集或平面群組。各平面群組可包含一圖像之一個或多個樣本陣列。接著,一平面群組內之樣本陣列的區塊共用相同被挑選之編碼參數,例如,次分割資訊、預測模式、以及殘差編碼模式,而其他的編碼參數,例如,轉換係數分別地對於平面群組內之各樣本陣列被發送。一平面群組被編碼作為主平面群組,亦即,無編碼參數自其他的平面群組被推斷或被預測。對於一次要平面群組之各區塊,其可能調適地被選擇,被挑選的編碼參數之一新的組集是否被發送,或被挑選的編碼參數是否自主要的或另外的次要平面群組被推斷或被預測。對於一特定區塊被挑選的編碼參數是否被推斷或被預測之決定將被包含在位元流中。相對於由複數個樣本陣列組成之目前圖像編碼技術,平面間預測允許較大的自由度以挑選在側資訊率以及預測品質之間的折衷。相對於由複數個樣本陣列組成之習見的圖像編碼技術,其優點是編碼效率被改進。
平面內採納/預測可能以可調適地被選擇之方式而延伸一影像或視訊編碼器,例如,上面實施例的那些,其方式係對於一色彩樣本陣列或一輔助樣本陣列或一組色彩樣本陣列及/或輔助樣本陣列之一區塊而可調適地選擇一被挑選的編碼參數組集是否自在相同圖像中的其他樣本陣列之同一位置而編碼的區塊被推斷或被預測,或對於區塊之被挑選的編碼參數組集是否獨自地被編碼而不必參考在相同圖像中的其他樣本陣列之同一位置的區塊。對於一樣本陣列之一區塊或複數個樣本陣列之一區塊,被挑選的編碼參數組集是否被推斷或被預測之決定,可被包含在位元流中。關聯於一圖像之不同的樣本陣列不需要具有相同尺寸。
如上面之說明,關聯於一圖像之樣本陣列(該等樣本陣列可表示色彩成份及/或輔助樣本陣列)可被配置成為二個或更多個所謂的平面群組,其中各平面群組由一個或多個樣本陣列所組成。被包含在一特定平面群組中之樣本陣列不需要具有相同尺寸。注意到,這成為平面群組之配置包含各樣本陣列分別地被編碼的情況。
更確切地,依據一實施例,對於一平面群組之各區塊,其調適地被選擇指明一區塊如何被預測之編碼參數是否自在相同圖像之不同平面群組的同一位置而編碼的區塊被推斷或被預測,或對於該區塊的這些編碼參數是否分別地被編碼。指定一區塊如何被預測之編碼參數被包含在一個或多個下面的編碼參數中:指明哪個預測被使用於一區塊之區塊預測模式(框內預測、使用一單一移動向量以及參考圖像之框間預測、使用二個移動向量以及參考圖像之框間預測、使用一較高階,亦即,非平移移動模型以及一個別的參考圖像之框間預測、使用複數個移動模型以及參考圖像之框間預測)、指明一框內預測信號如何被產生之框內預測模式、指明多少預測信號被結合以供產生區塊的最後預測信號之一識別符、指明哪些參考圖像被採用於移動補償預測之參考指標、指明預測信號如何使用參考圖像被產生之移動參數(例如,位移向量或仿射移動參數)、指明參考圖像如何被過濾以供產生移動補償預測信號之一識別符。應注意到,通常一區塊僅可被關聯於所提到的編碼參數之一子集。例如,如果區塊預測模式指明一區塊是框內預測,則對於一區塊之編碼參數同時也可另包含框內預測模式,但是指定一框間預測信號如何被產生的編碼參數,例如,參考指標以及移動參數,將不被指定;或如果區塊預測模式指定框間預測,則被關聯的編碼參數同時可包含參考指標以及移動參數,但是框內預測模式將不被指定。
二個或更多平面群組之一者可在位元流之內被編碼或被指示作為主要平面群組。對於這主要平面群組的所有區塊,指明預測信號如何被產生之編碼參數被發送而不必參考相同圖像的其他平面群組。其餘平面群組被編碼作為次要平面群組。對於次要平面群組之各區塊,一個或多個語法元素被發送,其傳信用以指明區塊如何被預測之編碼參數是否自其他平面群組之同一位置的區塊被推斷或被預測,或這些編碼參數之一新的組集是否對於該區塊被發送。一個或多個語法元素之一者可被稱為平面間預測旗標或平面間預測參數。如果語法元素傳信對應的編碼參數不被推斷或被預測,則對於該區塊之對應的編碼參數之一新的組集於位元流中被發送。如果語法元素傳信號對應的編碼參數被推斷或被預測,則在一所謂的參考平面群組中之同一位置的區塊被決定。對於該區塊之參考參考平面群組分配可以複數個方式被組配。於一實施例中,一特定參考平面群組被指定至各個次要平面群組;這分配可被固定或其可以高級別語法結構(例如,參數組集、接取單元檔頭、圖像檔頭、或片頭)被傳信。
於第二實施例中,參考平面群組之分配在位元流內部被編碼並且藉由對於一區塊被編碼的一個或多個語法元素被傳信,以便指明被挑選的編碼參數是否被推斷或被預測或分別地被編碼。
為了減輕剛提及與平面間預測以及下面詳細實施例有關之可能性,參考至第11圖,其說明地展示由三個樣本陣列502、504以及506構成之圖像500。為更容易了解起見,僅有樣本陣列502-506之子部分被展示於第11圖中。樣本陣列被展示好似它們空間相互地被對齊,因而樣本陣列502-506沿著方向508彼此相互覆蓋並且因而沿著方向508之樣本陣列502-506的樣本之投射導致所有這些樣本陣列502-506之樣本將彼此正確地被空間定位。換句話說,平面502以及506已沿著水平以及垂直方向被延伸,以便相互調適它們空間解析度並且相互對齊它們。
依據一實施例,一圖像之所有樣本陣列屬於一空間景象之相同部份,其中在個別的樣本陣列502-506之間沿著垂直以及水平方向之解析度可能不同。進一步地,為說明之目的,樣本陣列502以及504被考慮屬於一個平面群組510,而樣本陣列506被考慮屬於另外的平面群組512。進一步地,第11圖說明範例情況,其中沿著樣本陣列504水平軸之空間解析度是二倍於樣本陣列502之水平方向的解析度。此外,樣本陣列504被考慮以形成相對於樣本陣列502之主要陣列,後者形成相對於主要陣列504之一次級陣列。如較早的說明,於這情況中,如利用第1圖之次分割器30所決定成為區塊的樣本陣列504之次分割被次級陣列502所採用,其中依據第11圖範例,由於樣本陣列502之垂直解析度是主要陣列504垂直方向之解析度的一半,各個區塊已被對分成為二個水平並列區塊,當在樣本陣列502之內以樣本位置單位被量測時,對分再次地成為正方形區塊。
如第11圖之範例展示,對於樣本陣列506被選擇之次分割是不同於其他平面群組510之次分割。如先前的說明,次分割器30可分別地或無關於平面群組510之次分割而挑選像素陣列506之次分割。當然,樣本陣列506之解析度同時也可以不同於平面群組510之平面502以及504的解析度。
接著,當編碼個別的樣本陣列502-506時,編碼器10可開始於編碼平面群組510的主要陣列504,例如,以上面說明之方式。第11圖展示之區塊,例如,可以是上面提及的預測區塊。可選擇地,該等區塊是殘差區塊或用以定義某些編碼參數之定義區塊尺寸的其他區塊。平面間預測不被限定於四叉樹或多樹型次分割,雖然這在第11圖中被展示。
在對於主要陣列504的語法元素發送之後,編碼器10可決定聲明主要陣列504將為次級平面502的參考平面。編碼器10以及抽取器30,分別地,可經由位元流22傳信這決定,而其關聯性可由於樣本陣列504形成平面群組510的主要陣列之事實而清楚,該資訊,依次地,也可以是位元流22之部份。於任何情況中,對於在樣本陣列502之各個區塊,插入器18或與插入器18一起之編碼器10的任何其他模組,可決定抑制在位元流之內這區塊的編碼參數之一轉換並且在位元流之內傳信關於那區塊在主要的陣列504之內同一位置的一區塊之編碼參數將可替代地被使用,或在主要的陣列504之內在同一位置的區塊之編碼參數將可被使用作為對於樣本陣列502的目前區塊之編碼參數的一預測,而僅在位元流之內傳送對於樣本陣列502之目前區塊的殘差資料。於否定的決定情況中,編碼參數照例地在資料流內被傳送。對於各個區塊之決定在資料流22之內被傳信。在解碼器側,抽取器102使用對於各個區塊之這平面間預測資訊,以便因此得到樣本陣列502各別的區塊之編碼參數,亦即,如果平面間採納/預測資訊建議平面間採納/預測,或無關於主要陣列504照例地抽取樣本陣列502目前區塊之編碼參數的話,則藉由推斷在主要陣列504同一位置的區塊之編碼參數,或可選擇地,自資料流抽取出對於那區塊之殘差資料並且結合這殘差資料與自主要陣列504同一位置的區塊之編碼參數所取得的一預測。
同時也如先前的說明,參考平面不被限定於存在如同對於目前相關的平面間預測之區塊之相同平面群組內。因此,如上面之說明,平面群組510可表示對於次要平面群組512之主要平面群組或參考平面群組。於這情況中,位元流可包含一語法元素,該語法元素指示對於樣本陣列506各個區塊關於在先前提到的主要平面群組或參考平面群組510之任何平面502以及504在同一位置的巨區塊之編碼參數的採納/預測是否將可被進行,而在後者之情況中,樣本陣列506目前區塊之編碼參數照例地被發送。
應注意到,對於一平面群組內部之平面的次分割及/或預測參數可以是相同的,亦即,因為對於一平面群組它們僅被編碼一次(一平面群組之所有次要平面自相同平面群組內部之主要平面推斷次分割資訊及/或預測參數),並且次分割資訊及/或預測參數之調適性預測或推斷在平面群組之間被完成。
應注意到,參考平面群組可以是一主要平面群組或一次要平面群組。
在一平面群組內不同平面的區塊之間的同一位置是容易理解的,因主要樣本陣列504之次分割被次級樣本陣列502空間地採納,除了剛說明的區塊次分割以便使採納的支葉區塊成為正方形區塊之外。於不同平面群組之間的平面間採納/預測情況中,同一位置可以一方式被定義,以便允許在這些平面群組次分割之間有較大的自由度。給與參考平面群組,在參考平面群組內部之同一位置的區塊被決定。在同一位置以及參考平面群組的區塊之取得可藉由相似於下面的處理程序被完成。於次要平面群組512樣本陣列506之一者的目前區塊516中之一特定樣本514被挑選。同樣地,為了說明目的,其可能是如第11圖中以514展示的目前區塊516之頂部-左方樣本,或接近目前區塊516中間的目前區塊516中之一樣本或目前區塊內部之任何其他的樣本,其是幾何式唯一地被定義。參考參考平面群組510之樣本陣列502以及504內部之這挑選的樣本515之位置被計算。在樣本陣列502以及504內之樣本514的位置,在第11圖中分別地以518以及520被指示。在參考平面群組510內的平面502以及504何者實際上被使用可被預定或可在位元流之內被傳信。在參考平面群組510對應的樣本陣列502或504內之樣本,分別地是最接近位置518以及520,被決定並且包含這樣本之區塊被選擇,作為分別地在各別的樣本陣列502以及504內之同一位置的區塊。於第11圖情況中,這些分別地是區塊522以及524。稍後將說明,用以決定在其他平面中的同一位置之區塊的另一選擇方法。
於一實施例中,指明對於目前區塊516之預測的編碼參數,使用相同圖像500之一不同的平面群組510中在同一位置的區塊522/524之對應的預測參數而完全地被推斷,而不必發送附加的側資訊。該推斷可由一簡單地複製對應的編碼參數或考慮在目前512以及參考平面群組510之間的差量之編碼參數調適所組成。如一範例,這調適可由對於考慮在亮度以及色度樣本陣列之間的相位差量而增加一移動參數更正(例如,一位移向量更正)所構成;或該調適可由對於考慮亮度以及色度樣本陣列之不同解析度而修改移動參數之精確性(例如,修改位移向量之精確性)所構成。於一進一步的實施例中,用以指明預測信號產生的一個或多個被推斷之編碼參數不直接地被使用於目前區塊516,但是可被使用作為對於目前區塊516之對應的編碼參數之一預測並且對於目前區塊516之這些編碼參數的精緻度於位元流22中被發送。如一範例,被推斷之移動參數不直接地被使用,但是指明在被使用於目前區塊516之移動參數以及被推斷的移動參數之間的偏移之移動參數差量(例如,一位移向量差量)於位元流中被編碼;在解碼器側,實際被使用的移動參數藉由結合被推斷的移動參數以及被發送的移動參數差量而被取得。
於另外的實施例中,一區塊之次分割,例如,在先前提及的預測次分割成為預測區塊之樹型區塊(亦即,其預測參數之相同組集被使用的樣本區塊)調適地自在對於相同圖像之一不同平面群組的同一位置而編碼之區塊被推斷或被預測,亦即,依據第6a或6b圖之位元序列。於一實施例中,二個或更多個平面群組之一者被編碼作為主要平面群組。對於這主要平面群組的所有區塊,次分割資訊被發送而不必參考至相同圖像的其他平面群組。其餘平面群組被編碼作為次要平面群組。對於次要平面群組之區塊,一個或多個語法元素被發送,該等語法元素傳信次分割資訊是否自一在其他平面群組之同一位置的區塊被推斷或被預測,或次分割資訊是否於位元流中被發送。一個或多個語法元素之一者可被當為平面間預測旗標或平面間預測參數。如果語法元素傳信,次分割資訊不被推斷或被預測,則對於該區塊之次分割資訊於位元流中被發送,而不必參考相同圖像的其他平面群組。如果語法元素傳信,次分割資訊被推斷或被預測,則在一所謂的參考平面群組中同一位置的區塊被決定。對於該區塊之參考平面群組的分配可以複數個方式被組配。於一實施例中,一特定參考平面群組被指定至各個次要平面群組;這分配可被固定或其可以高級別語法結構(如參數組集、接取單元檔頭、圖像檔頭、或片頭)被傳信。於第二實施例中,參考平面群組之分配於位元流內部被編碼並且藉由對於一區塊被編碼的一個或多個語法元素被傳信,以便指明次分割資訊是否被推斷或被預測或分別地被編碼。參考平面群組可以是主要平面群組或另外的次要平面群組。給與參考平面群組,在參考平面群組內部之同一位置的區塊被決定。在同一位置的區塊是在對應至相同影像區域之參考平面群組中如目前之區塊的區塊,或該區塊表示與目前區塊共用影像區域最大部份之參考參考平面群組內部的區塊。在同一位置的區塊可被劃分成為較小的預測區塊。
於進一步的實施例中,對於目前區塊之次分割資訊,例如,依據第6a或6b圖之四叉樹為基礎的次分割資訊,完全地使用在相同圖像之一不同平面群組中之同一位置的區塊之次分割資訊被推斷,而不必發送附加的側資訊。如一特定範例,如果在同一位置的區塊被劃分成為二個或四個預測區塊,目前之區塊同時也因預測目的被劃分成為二個或四個子區塊。如另一特定範例,如果在同一位置的區塊被劃分成為四個子區塊並且這些子區塊之一者進一步地被劃分成為四個較小的子區塊,該目前之區塊同時也被劃分成為四個子區塊並且這些子區塊之一者(對應至在同一位置而進一步地被分解的區塊之一子區塊)同時也被劃分成為四個較小的子區塊。於進一步之較佳實施例中,被推斷的次分割資訊不直接地被使用於目前之區塊,但其被使用作為對於目前區塊之實際次分割資訊的一預測,並且對應的精緻度資訊於位元流中被發送。如一範例,自在同一位置之區塊被推斷的次分割資訊可進一步地被精緻化。對於各個子區塊,其對應至在同一位置而不被劃分成為較小區塊之區塊中的一子區塊,一語法元素可在位元流中被編碼,其指明該子區塊是否於目前平面群組中進一步地被分解。此一語法元素之發送可依子區塊尺寸被調整。或其可於位元流中傳信,關於進一步地於參考平面群組中被劃分的一子區塊不於目前平面群組中被劃分成為較小的區塊。
於進一步的實施例中,一區塊成為預測區塊之次分割以及指明那子區塊如何被預測之編碼參數兩者皆調適地自對於在相同圖像之一不同平面群組之同一位置而編碼的一區塊被推斷或被預測。於本發明一較佳實施例中,二個或更多個平面群組之一者被編碼作為主要平面群組。對於這主要平面群組之所有區塊,次分割資訊以及預測參數被發送而不必參考相同圖像的其他平面群組。其餘平面群組被編碼作為次要平面群組。對於次要平面群組之區塊,一個或多個語法元素被發送,其傳信次分割資訊以及預測參數是否自在其他平面群組之同一位置的一區塊被推斷或被預測或次分割資訊以及預測參數是否於位元流中被發送。一個或多個語法元素之一者可被當為平面間預測旗標或平面間預測參數。如果語法元素傳信,次分割資訊以及預測參數不被推斷或被預測,則對於該區塊之次分割資訊以及對於產生的子區塊之預測參數於位元流中被發送,而不必參考相同圖像的其他平面群組。如果語法元素傳信,對於該子區塊之次分割資訊以及預測參數被推斷或被預測,則在一所謂的參考平面群組中之同一位置的區塊被決定。對於該區塊之參考平面群組的分配可以複數個方式被組配。於一實施例中,一特定參考平面群組被指定至各個次要平面群組;這分配可被固定或其可以高級別語法結構(例如,參數組集、接取單元檔頭、圖像檔頭、或片頭)被傳信。於第二實施例中,參考平面群組之分配在位元流內部被編碼並且藉由對於一區塊被編碼之一個或多個語法元素被傳信,以便指明次分割資訊以及預測參數是否被推斷或被預測或分別地被編碼。參考平面群組可以是主要平面群組或另外的次要平面群組。給定參考平面群組,在參考平面群組內部之同一位置的區塊被決定。在同一位置的區塊可以是對應至相同影像區域的參考平面群組中作為目前區塊之區塊,或該區塊表示與目前區塊共用影像區域最大部份之參考平面群組內部的區塊。在同一位置的區塊可被劃分成為較小的預測區塊。於一較佳實施例中,對於目前區塊之次分割資訊以及對於產生的子區塊之預測參數使用在相同圖像之一不同平面群組中之同一位置的區塊之次分割資訊以及對應的子區塊之預測參數完全地被推斷,而不必發送附加的側資訊。如一特定範例,如果在同一位置的區塊被劃分成為二個或四個預測區塊,則目前區塊同時也因為預測目的而被劃分成為二個或四個子區塊,並且對於目前區塊之子區塊的預測參數如上面說明地被得到。如另外的特定範例,如果在同一位置的區塊被劃分成為四個子區塊並且這些子區塊之一者進一步地被劃分成為四個較小子區塊,則目前區塊同時也被劃分成為四個子區塊並且這些子區塊之一者(對應至在同一位置進一步地被分解的區塊之一子區塊)同時也被劃分成為四個較小的子區塊並且對於所有不進一步地被劃分之子區塊的預測參數如上面說明地被推斷。於進一步的較佳實施例中,次分割資訊完全地依據在參考平面群組中同一位置的區塊之次分割資訊被推斷,但是對於該等子區塊之被推斷的預測參數僅被使用作為對於子區塊之實際預測參數的預測。在實際預測參數以及被推斷的預測參數之間的偏移量於位元流中被編碼。於進一步的實施例中,被推斷的次分割資訊被使用作為用於目前區塊之實際次分割資訊之預測並且該差量於位元流中被發送(如上面之說明),但是預測參數被完全地推斷。於另外的實施例中,推斷的次分割資訊以及推斷的預測參數兩者皆被使用作為預測並且在實際次分割資訊與預測參數之間的差量以及它們的推斷數值於位元流中被發送。
於另一實施例中,其調適地被選擇,對於一平面群組之一區塊,殘差編碼模式(例如,轉換型式)是否自在同相同圖像之一不同平面群組之一位置而編碼的區塊被推斷或被預測或殘差編碼模式對於該區塊是否分別地被編碼。這實施例是相似於在上面說明之預測參數的調適性推斷/預測之實施例。
於另外的實施例中,一區塊(例如,一預測區塊)成為轉換區塊(亦即,一個二維轉換被應用的樣本區塊)之次分割自在相同圖像之一不同平面群組之同一位置而編碼的區塊被調適地推斷或預測。這實施例是相似於在上面說明之次分割成為預測區塊的調適性推斷/預測之實施例。
於另外的實施例中,一區塊成為轉換區塊之次分割以及對於產生的轉換區塊之殘差編碼模式(例如,轉換型式)自在相同圖像之一不同平面群組之同一位置而編碼的區塊被調適地推斷或預測。這實施例是相似於在上面說明之對於次分割成為預測區塊之調適性推斷/預測以及對於產生的預測區塊之預測參數的實施例。
於另外的實施例中,一區塊成為預測區塊之次分割,關聯的預測參數、預測區塊之次分割資訊、以及對於轉換區塊之殘差編碼模式自在相同圖像之一不同平面群組之同一位置而編碼的區塊被調適地推斷或預測。這實施例表示上面所說明之實施例的組合。其也有可能是,僅一些所提到的編碼參數被推斷或被預測。
因此,平面間採納/預測可增加先前說明之編碼效率。然而,經由平面間採納/預測之編碼效率增益同時也是可得自多樹型為基礎的次分割被使用之外的其他區塊次分割之情況中,並且無關於區塊合併是否被執行。
在上面論述之有關平面間調適/預測的實施例是可應用至影像以及視訊編碼器與解碼器,其分割一圖像之彩色平面,以及,如果呈現的話,關聯於一圖像之輔助樣本陣列成為區塊,並且關聯這些區塊與編碼參數。對於各個區塊,一組編碼參數可被包含在於位元流中。例如,這些編碼參數可以是說明一區塊如何被預測或在解碼器側如何被解碼的參數。如特定範例,編碼參數可表示巨區塊或區塊預測模式、次分割資訊、框內預測模式、被使用於移動補償預測之參考指標、移動參數,例如位移向量、殘差編碼模式、轉換係數等等。關聯於一圖像之不同的樣本陣列可具有不同的尺寸。
接著將說明一結構,其是用於在一樹型為基礎之分割結構,例如,在上面有關第1至8圖之說明那些,之內的編碼參數之提高傳信。如其他的結構,亦即,合併以及平面間採納/預測,提高傳信結構之作用以及優點,於下面通常被稱為繼承結構,將無關於上面之實施例地被說明,雖然在下面說明之結構是可單獨地或以組合方式,與上面任何的實施例結合。
大體上,對於接著說明在一樹型為基礎之分割結構內之編碼側資訊的改進編碼結構,其被稱為繼承結構,相對於習見的編碼參數處理結構可具有下面的優點。
於習見的影像以及視訊編碼中,圖像或對於圖像樣本陣列之特定組集通常被分解成為區塊,其與特定編碼參數相關聯。該等圖像通常由複數個樣本陣列組成。此外,一圖像同時也可關聯於附加輔助樣本陣列,例如,其可能指明透明資訊或深度圖。一圖像之樣本陣列(包含輔助樣本陣列)可被群集成為一個或多個所謂的平面群組,其中各個平面群組由一個或多個樣本陣列所組成。一圖像之平面群組可獨自地被編碼,或如果該圖像被關聯於一個以上的平面群組,則具有可自相同圖像的其他平面群組之預測。各個平面群組通常被分解成為區塊。該等區塊(或樣本陣列對應的區塊)藉由圖像間預測或圖像內預測之任一者被預測。該等區塊可具有不同的尺寸並且可以是正方形或矩形。使成為區塊之一圖像的分割可以利用語法被固定,或其可在位元流內部被傳信(至少部份地)。通常語法元素被發送,其傳信對於預定尺寸之區塊的次分割。此些語法元素可指明一區塊是否並且如何被次分割成為較小的區塊,例如,以及用於預測目的之關聯編碼參數。對於一區塊之所有樣本(或樣本陣列對應的區塊)關聯編碼參數之解碼被指定以某種方式進行。於範例中,一區塊中的所有樣本使用相同預測參數組集被預測,例如,參考指標(其辨識已被編碼的圖像組集中之一參考圖像)、移動參數(其指明對於在一參考圖像以及目前圖像之間一區塊的移動之量測)、用以指明插值過濾器之參數、框內預測模式等等。移動參數可利用具有一水平以及垂直分量之位移向量被表示,或利用較高階移動參數,例如,由6個分量組成之仿射移動參數被表示。其也有可能是,一個以上的特定預測參數組集(例如,參考指標以及移動參數)關聯於一個別的的區塊。因此,對於這些特定預測參數之各個組集,一個別的中間預測信號對於該區塊(或樣本陣列的對應區塊)被產生,並且最後的預測信號藉由包含疊加中間預測信號之組合而被建立。對應的加權參數並且同時也可能是一固定偏移量(其被添加至加權總和上)可對於一圖像、或一參考圖像、或一組參考圖像被固定,或它們可被包含在用於對應的區塊之預測參數組集中。在原始區塊(或樣本陣列對應的區塊)以及它們的預測信號之間的差量,同時也被稱為殘差信號,其通常被轉換並且被量化。通常,一個二維轉換被應用至殘差傳信號(或對於殘差區塊之對應樣本陣列)。對於轉換編碼,對於一預測參數特定組集已被使用之區塊(或樣本陣列的對應區塊),其可在施加轉換之前進一步地被切割。該等轉換區塊可等於或較小於被使用於預測之區塊。也有可能是,一轉換區塊包含一個以上被使用於預測的區塊。不同的轉換區塊可具有不同的尺寸並且該等轉換區塊可表示正方形或矩形區塊。在轉換之後,產生的轉換係數被量化並且所謂的轉換係數被得到。該等轉換係數以及該等預測參數,並且如果呈現的話,次分割資訊被熵編碼。
於一些影像以及視訊編碼標準中,對於利用語法所提供之次分割一圖像(或一平面群組)成為區塊的可能性是非常有限的。通常,其可僅被指明,一預定尺寸之區塊是否(以及可能如何)可被次分割成為較小的區塊。如一範例,於H.264中之最大區塊尺寸是16x16。該等16x16區塊同時也被稱為巨區塊並且各個圖像在第一步驟中被劃分成為巨區塊。對於各個16x16巨區塊,其可被傳信,其是否被編碼作為16x16區塊,或作為二個16x8區塊,或作為二個8x16區塊,或作為四個8x8區塊。如果一16x16區塊被次分割成為四個8x8區塊,則這些8x8區塊各可被編碼作為一個8x8區塊,或作為二個8x4區塊,或作為二個4x8區塊,或作為四個4x4區塊。於目前影像以及視訊編碼標準中,對於用以指明劃分成為區塊之小組集的可能性,具有用以傳信次分割資訊之側資訊率可被維持為小量之優點,但是亦具有下列缺點,對於發送供用於區塊之預測參數所需的位元率可能如下面說明地成為顯著。用以傳信預測資訊之側資訊率通常表示對於一區塊之所有位元率的顯著數量。並且當這側資訊被降低時,則編碼效率可被增加,例如,其可藉由使用較大的區塊尺寸被達成。一視訊序列的真正影像或圖像是由具有特定性質之任意形狀物件組成。如一範例,此些物件或該等物件之部份是具有唯一紋理或唯一移動的特徵。並且通常,相同組集之預測參數可被應用於此一物件或一物件之部份上。但是,物件邊界通常不是與大的預測區塊(例如,H.264中之16x16巨區塊)之可能的區塊邊界一致的。一編碼器通常決定次分割(在限定的可能性組集之中),其導致最小的特定位元率-失真成本量測。對於任意形狀之物件,這可導致大數量的小區塊。並且由於這些小區塊各關聯於一組預測參數,其需要被發送,則側資訊率可能成為所有位元率之主要部份。但是由於數個小區塊仍然表示相同物件或一物件部份之區域,對於一些所取得的區塊之預測參數是相同或非常相似的。直覺地,當語法以一方式被延伸時,編碼效率可被增大,其不僅允許次分割一區塊,但同時也允許共用在次分割之後取得的多個區塊之間的編碼參數。於一樹型為基礎之次分割中,對於給與區塊組集之編碼參數的共用可藉由排定編碼參數或其部份至樹型為基礎階層中之一個或多個親源節點而被達成。因而,被共用的參數或其部份可被使用,以便降低傳信在次分割之後所取得的區塊之編碼參數的實際選擇所必需的側資訊。側資訊之降低可藉由忽略隨後區塊之參數傳信或藉由使用對於預測及/或對於隨後區塊的參數脈絡模型化之共用參數被達成。
下面說明之繼承結構的基本構想是降低藉由共用沿著區塊之樹型為基礎階層的資訊而發送編碼參數所需的位元率。共用資訊在位元流內部被傳信(除了次分割資訊之外)。該繼承結構之優點是因減少用於編碼參數之側資訊率所產生的增加編碼效率。
依據下面說明之實施例,為了降低側資訊率,對於特定樣本組集之各別的編碼參數,亦即,簡單連接區,其可表示一多樹型次分割之矩形或正方形區塊或任意形狀的區或任何其他的樣本採集,其以有效率之方式在資料流之內被傳信。下面說明之繼承結構,將使得對於這些全部樣本組集之各者的編碼參數不需要明確地被包含在位元流中。該等編碼參數可表示預測參數,其指明對應的樣本組集如何使用已被編碼的樣本被預測。許多可能性以及範例已在上面被說明並且同時也適用於此。同時也如上面指示的,並且將在下面進一步地說明,就下面的繼承結構而言,其是關係到,使一圖像的樣本陣列之樹型為基礎的分割成為樣本組集可利用語法被固定或可藉由對應的次分割資訊在位元流內部被傳信。對於樣本組集之編碼參數,可如上面的說明,以藉由語法給與的一預定順序被發送。
依據繼承結構,解碼器或解碼器之抽取器102被組配以一特定方式而得到個別的簡單連接區或樣本組集之編碼參數上的資訊。尤其是,編碼參數或其部份,例如,作為預測目的之那些參數,在沿著給與的樹型基礎之劃分結構的區塊與沿著分別地利用編碼器插入器18被決定之樹型結構的共用群集之間被共用。於一特定實施例中,對於給與的劃分樹型內部節點之所有子系節點,編碼參數之共用藉由使用一特定二元值共用旗標被指示。如一選擇方法,編碼參數之精緻度可對於各個節點被發送,因而沿著區塊之樹型為基礎階層的參數之累積精緻度可被應用至在一給與的支葉節點之區塊的所有樣本組集。於另外的實施例中,對於沿著區塊的樹型為基礎之階層的內部節點被發送之編碼參數的部份,可被使用於對於在一給與的支葉節點之區塊編碼的參數或其部份之脈絡調適熵編碼以及解碼技術。
第12a以及12b圖說明,對於使用一四叉樹為基礎之劃分的特定情況之繼承的基本構想。然而,如在上面之多次指示,其他的多樹型次分割結構也可被使用。樹型結構被展示於第12a圖中,而對應至第12a圖的樹型結構之對應的空間分割展示於第12b圖。在其中展示之分割是相似於有關第3a至3c圖之展示。大體而言,繼承結構將允許側資訊被指定至在樹型結構內之不同的非支葉層之節點。依據分配至樹型中的不同層之節點的側資訊分配,例如,第12a圖之樹型中的內部節點或其根節點,不同程度之共用側資訊可在第12b圖中展示的區塊樹型階層之內被達成。例如,如果決定,第4層中所有的支葉節點,其於第12a圖的情況中都具有相同親源節點,將實際地共用側資訊,這意謂著第12b圖中以156a至156d指示之最小區塊將共用這側資訊並且其不再需要對於所有的這些小區塊156a至156d全部地發送側資訊,亦即,不需要發送四次,雖然這被保留作為對於編碼器之一選擇。然而,同時也可決定第12a圖之階層級別1(層2)的整個區,亦即,在樹型區塊150頂部右手邊角落包含子區塊154a、154b、與154d以及剛提及之更小子區塊156a至156d,作為其中編碼參數被共用之區。因此,共用側資訊之區域被增大。增大的下一個級別將可總和層1所有子區塊,亦即,子區塊152a、152c、和152d以及在先前提到的較小區塊。換句話說,於這情況中,整個樹型區塊將可具有被指定至該處的側資訊,使這樹型區塊150之所有子區塊共用側資訊。
於下面繼承的說明中,下面的標誌被使用於說明實施例: a.      目前支葉節點之重建樣本:
Figure 02_image001
b.     鄰近支葉之重建樣本:
Figure 02_image003
c.      目前支葉節點之預測器:
Figure 02_image005
d.     目前支葉節點之殘差量:
Figure 02_image007
e.      目前支葉節點之重建殘差量:
Figure 02_image009
f.      尺度調整以及逆向轉換:
Figure 02_image011
g.      共用旗標:
Figure 02_image013
作為繼承之第一範例,在內部節點之框內預測傳信可被說明。更確切地,將說明如何傳信用於預測目的之在一樹型為基礎之區塊劃分的內部節點之框內預測模式。藉由在樹型上自根節點走訪至支葉節點,內部節點(包含根節點)可傳送將被其之對應的子系節點所利用的部份側資訊。更明確地,對於內部節點一共用旗標f被發送,其具有下面的意義: Ÿ如果f具有一數值1(“真”),所給與的內部節點之所有子系節點將共用相同的框內預測模式。除了具有數值1的共用旗標f之外,內部節點同時也傳信將被使用於所有子系節點的框內預測模式參數。因此,所有隨後的子系節點不攜帶任何預測模式資訊以及任何共用旗標。對於所有關於支葉節點之重建,解碼器應用來自對應的內部節點之框內預測模式。 Ÿ如果具有一數值0(“假”),對應的內部節點之子系節點不共用相同的框內預測模式並且是為一內部節點的各子系節點攜帶一個別的共用旗標。
第12c圖展示如上面說明之內部節點的框內預測傳信。層1中的內部節點傳送共用旗標以及利用框內預測模式資訊所給與的側資訊並且該等子系節點不攜帶任何側資訊。
作為繼承之第二範例,框間預測精緻度可被說明。更確切地,其說明對於移動參數(例如,利用移動向量所給與)精緻度目的而如何在一樹型為基礎之區塊分割的內部節點傳信框間預測模式之側資訊。藉由在樹型上自根節點走訪至支葉節點,內部節點(包含根節點)可傳送將藉由其之對應的子系節點被精緻化之部份的側資訊。更明確地,一共用旗標f對於內部節點被發送,而具有下面的意義: Ÿ如果f具有數值1(“真”),所給與的內部節點之所有子系節點將共用相同的移動向量參考。除了具有數值1的共用旗標f之外,內部節點同時也傳信移動向量以及參考指標。因此,所有隨後的子系節點不攜帶進一步的共用旗標,但是可能攜帶這繼承的移動向量參考之一精緻化。對於所有關於支葉節點之重建,解碼器在給與的支葉節點增加移動向量精緻化至繼承的移動向量參考,該繼承移動向量參考是屬於其之對應的具有數值1之共用旗標f的內部親源節點。這意謂著在一給與的支葉節點之移動向量精緻化是在將被應用於這支葉節點的移動補償預測之實際移動向量以及其之對應的內部親源節點之移動向量參考之間的差量。 Ÿ如果f具有一數值0(“假”),則對應的內部節點之子系節點不必定得共用相同的框間預測模式並且在子系節點藉由使用來自對應的內部節點節點之移動參數而沒有移動參數精緻化被進行,並且為一內部節點的各個子系節點攜帶一個別的共用旗標。
第12d圖展示如在上面說明的移動參數精緻化。層1中之內部節點節點傳送共用的旗標以及側資訊。作為支葉節點之子系節點僅攜帶移動參數精緻度,並且,例如,層2中之內部子系節點則不攜帶側資訊。
接著參考第13圖。第13圖展示一流程圖,其說明解碼器之操作模式,例如第2圖的解碼器,用於重建表示一空間範例資訊信號的一資訊樣本陣列,其中來自一資料流之資訊信號藉由多樹型次分割被次分割成為不同尺寸之支葉區。如上面的說明,各支葉區相關聯於得自多樹型次分割之一序列階層級別的一階層級別。例如,第12b圖中展示之所有區塊是支葉區。支葉區156c,例如,關聯於層4之階層(或級別3)。各支葉區與編碼參數關聯。這些編碼參數範例已在上面被說明。編碼參數,對於各個支葉區,藉由一各別的語法元素組集被表示。各個語法元素是出自一組語法元素型式之一各別的語法元素型式。此些語法元素型式是,例如,一預測模式、一移動向量成份、一框內預測模式之指示或其類似者。依據第13圖,解碼器進行下面的步驟。
於步驟550中,一繼承資訊自資料流被抽取出。於第2圖情況中,抽取器102是負責步驟550。繼承資訊指示關於繼承是否針對目前之資訊樣本陣列被使用。下面的說明將揭示對於繼承資訊有數種可能性,例如,尤其是,共用旗標f以及被分割成為一主要以及次要部份之多樹型結構的傳信。
資訊樣本陣列可能先前已是一圖像之次要部份,例如,一樹型區塊,亦即,例如,第12b圖之樹型區塊150。因此,繼承資訊指示關於繼承是否對於特定樹型區塊150被使用。例如,對於預測次分割之所有樹型區塊,此繼承資訊可被插入資料流中。
進一步地,繼承資訊指示,如果繼承被指示將被使用,至少資訊樣本陣列之一個繼承區,其是由一組支葉區所構成並且對應至多樹型次分割階層級別之序列的一階層級別,該階層級別是較低於與支葉區組集關聯的各個階層級別。換句話說,繼承資訊指示,對於目前之樣本陣列,例如,樹型區塊150,繼承是否將被使用。如果是,則其表示這樹型區塊150之至少一個繼承區或子區,於其之內支葉區共用編碼參數。因此,繼承區可以不是一支葉區。於第12b圖之範例中,這繼承區可能是,例如,利用子區塊156a至156b所形成的區。可選擇地,繼承區可以是較大的並且同時也可能包圍著子區塊154a、b以及d,並且甚至可選擇地,繼承區可能是樹型區塊150其本身,而其所有支葉區塊共用關聯於繼承區之編碼參數。
應注意到,然而,一個以上的繼承區可分別地在一個樣本陣列或樹型區塊150之內被定義。可想像,例如,底部左方子區塊152c同時也被劃分成為較小的區塊。於這情況中,子區塊152c同時也可形成一繼承區。
於步驟552中,繼承資訊被檢查關於繼承是否將被使用。如果是,則第13圖之處理程序繼續進行步驟554,其中至少包含預定語法元素型式之一語法元素的一繼承子集於每繼承間區自資料流被抽取。於下面的步驟556中,這繼承子集接著被複製進入,或被使用作為預測,語法元素之一對應的繼承子集,該語法元素是在表示關聯於各別的至少一繼承區構成的支葉區組集之編碼參數的語法元素組集之內。換句話說,對於在繼承資訊之內被指示的各個繼承區,資料流包括語法元素之一繼承子集。更換句話說,繼承是有關可供用於繼承之至少某一語法元素型式或語法元素類型。例如,語法元素可能接受以繼承之預測模式或框間預測模式或框內預測模式。例如,包含在對於繼承區的資料流之內的繼承子集可包括一框間預測模式語法元素。繼承子集同時也可包括進一步的語法元素,該等語法元素型式取決於在先前提及的關聯於繼承結構之固定語法元素型式的數值。例如,於框間預測模式是繼承子集之一固定成份的情況中,定義移動補償(例如,移動向量分量)之語法元素,可能或不可利用語法而被包含在繼承子集中。想像,例如,樹型區塊150頂部右方四分之一處,亦即,子區塊152b,是繼承區,接著框間預測模式可對於這繼承區單獨地被指示或框間預測模式與移動向量以及移動向量指標一起被指示。
被包含在繼承子集中之所有語法元素被複製至或被使用作為預測,對於支葉區塊之對應的編碼參數,該等支葉區塊對應的編碼參數是在繼承區之內,亦即,支葉區塊154a、b、d、以及156a至156d。於預測被使用之情況中,殘差量對於個別的支葉區塊被發送。
對於樹型區塊150發送繼承資訊之一可能性是在先前所提到之一共用旗標f的發送。於步驟550中之繼承資訊的抽取,於這情況中,可包括下面步驟。尤其是,解碼器可被組配,以使用自較低階層級別至較高階層級別的一階層級別順序,而對於對應至多樹型次分割之至少一階層級別的任一繼承組集之非支葉區,自資料流抽取並且檢查共用旗標f,關於各別的繼承旗標或共用旗標是否有標示繼承。例如,階層級別之繼承組集可利用第12a圖中層1至3之階層被形成。因此,對於不是一支葉節點並且位於任何層1至3之內的任何子樹型結構節點可具有在資料流之內與之關聯的共用旗標。解碼器以自層1至層3順序抽取這些共用旗標,例如,以一深度優先或寬度優先走訪順序。只要是共用旗標之一者等於1,解碼器就了解,包含在一對應的繼承區中之支葉區塊於步驟554中的抽取之後則共用繼承子集。對於目前節點之子系節點,繼承旗標之檢查不再是必需的。換句話說,對於這些子系節點之繼承旗標不在資料流之內被發送,由於明顯地這些節點區域早已屬於語法元素繼承子集在其內被共用之繼承區。
共用旗標f可被插入先前所提的傳信四叉樹次分割之位元。例如,包含次分割旗標以及共用旗標兩者之一插入位元序列可以是: 1 0001 101(0000)000,
其是如第6a圖中展示之相同次分割資訊,具有二個以底線被強調的散置共用旗標,以便指示於第3c圖中在樹型區塊150底部左手邊四分之一內的所有子區塊共用編碼參數。
定義繼承資訊之另一方式,指示繼承區將可以是以次級方式被定義的二個次分割之相互使用,如上面有關分別地對於預測以及殘差次分割的說明。大體而言,主要次分割的支葉區塊可形成定義多個區之繼承區,在該等區之內語法元素之繼承子集被共用,而次級次分割則定義在其中語法元素之繼承子集被複製或被使用作為預測的這些繼承區內之區塊。
考慮到,例如,殘差樹型作為預測樹型之一延伸。進一步地,考慮到一情況,其中對於殘差編碼之目的,預測區塊可進一步地被分割成為較小的區塊。對於對應至關於預測之四叉樹的一支葉節點的各個預測區塊,用於殘差編碼之對應的次分割利用一個或多個次級四叉樹被決定。
於這情況中,不是使用在內部節點的任何預測傳信,吾等考慮解釋殘差樹型之方式為,就使用一固定預測模式之意義上而言,其同時也指明預測樹型之精緻化(利用預測相關的樹型之對應的支葉節點之傳信),但是具有精緻化參考樣本。下面的範例說明這情況。
例如,第14a以及14b圖展示對於主要次分割的一特定支葉節點被強調的鄰近參考樣本之用於框內預測的四叉樹分割,而第14b圖則展示對於具有精緻化參考樣本之相同預測支葉節點的殘差四叉樹次分割。第14b圖展示的所有子區塊,共用包含在對於第14a圖中被強調之各別的支葉區塊的資料流內之相同的框間預測參數。因此,第14a圖展示對於用於框內預測之習見的四叉樹劃分之範例,其中用於一特定支葉節點之參考樣本被展示。於我們之較佳實施例中,然而,對於殘差樹型中各個支葉節點之一分別的框內預測信號,藉由使用已重建殘差樹型中的支葉節點的鄰近樣本被計算,例如,如利用第4(b)圖中之灰色斜線所指示者。接著,一給與的殘差支葉節點之重建信號以藉由增加量化的殘差信號至這預測信號的一般方式被取得。這重建信號接著被使用作為對於下面預測處理程序之參考信號。應注意到,對於預測之解碼順序是相同於殘差解碼順序。
於解碼處理程序中,如第15圖中之展示,對於各個殘差支葉節點,預測信號依據實際框內預測模式(如利用預測相關之四叉樹支葉節點被指示)藉由使用參考樣本
Figure 02_image015
被計算。
在SIT處理程序之後,
Figure 02_image017
重建信號
Figure 02_image019
被計算並且被儲存以供用於下一個預測計算處理程序:
Figure 02_image021
對於預測之解碼順序是相同於殘差解碼順序,其在第16圖中被說明。
各個殘差支葉節點如先前段落所說明地被解碼。重建信號
Figure 02_image019
被儲存在緩衝器中,如第16圖之展示。參考樣本
Figure 02_image015
將自這緩衝器被拿取,以供用於接著之預測以及解碼處理程序。
在說明具有上面概述論點的組合不同子集之有關第1至16圖之特定實施例之後,本申請之進一步的實施例將被說明,其將集中在已先前在上面說明的某些論點,但是其實施例則表示上面說明的一些實施例之歸納。
第17圖展示依據此進一步的實施例之解碼器。該解碼器包括一抽取器600、一次分割器602以及一重建器604。這些區塊以所提到的順序在第17圖之解碼器輸入606以及輸出608之間被串列地連接。抽取器600被組配以在輸入606自利用解碼器所接收的資料流抽取一最大區尺寸及一多樹型次分割資訊。該最大區尺寸可對應至,例如,在上面提到的最大區塊尺寸,其指示簡單連接區的尺寸,現在簡要地被稱為預測次分割之“區塊”,或對應至定義殘差次分割之樹型區塊尺寸的最大區塊尺寸。多樹型次分割資訊,依次地,可對應至四叉樹次分割資訊並且可以相似於第6a以及6b圖之方式被編碼成為位元流。然而,在上面有關先前圖形說明之四叉樹次分割僅是出自可能的高數目範例之一範例。例如,對一親源節點之子系節點數目可以是較大於一的任何數目,並且該數目可依據階層級別變更。此外,一次分割節點之劃分可能不被形成,因而對應至某一節點之子系節點的子區塊區域是彼此相等。當然,其他的劃分法則也可應用並且可自階層級別至階層級別地變更。進一步地,多樹型次分割最大階層級別上的一資訊,或其對應者,自多樹型次分割產生的子區最小尺寸不需要在資料流之內被發送並且抽取器因此可不自資料流抽取此資訊。
次分割器602被組配以空間地分割一資訊樣本陣列,例如,陣列24,成為最大區尺寸的樹根區150。資訊樣本陣列,如在上面的說明,可能表示一時間上變化資訊信號,例如,一視訊或一3D視訊或其類似者。可選擇地,資訊樣本陣列可表示一靜態圖像。次分割器602進一步地被組配,以依據利用抽取器600所抽取的多樹型次分割資訊,藉由遞迴式多劃分樹根區子集,將樹根區之至少一子集次分割成為不同尺寸之較小簡單連接區。如剛剛有關抽取器600之說明,分割不被限定於四個一組之分割。
重建器604,依次地,被組配以使用成為較小簡單連接區的次分割,重建來自資料流606之資訊樣本陣列。較小簡單連接區,例如,對應至第3c圖展示之區塊,或對應至第9a以及9b圖展示之區塊。處理順序不被限定於深度優先走訪順序。
當映射第2圖展示之元件至第17圖展示之元件上時,接著第2圖之元件102對應至第12圖之元件600,第2圖之元件104a對應至第12圖之次分割器602,並且元件104b、106、108、110、112以及114形成重建器604。
在資料流之內發送最大區尺寸之優點是,編碼器將可藉由使用較少之側資訊調適次分割至一般的圖像內容,因為編碼器被給與機會以依據圖像而決定圖像上的最大區尺寸。於一較佳實施例中,對於各個圖像之最大區尺寸在位元流之內被傳送。可選擇地,最大區尺寸以較粗的區塊尺寸,例如,以圖像群集單元,在位元流之內被發送。
第18圖是圖解地展示第17圖之解碼器可解碼的一資料流內容。資料流包括資料610,例如,編碼參數以及殘差資訊,基於其與多樹型次分割資訊之組合,重建器可重建資訊樣本陣列。除了這之外,當然,資料流包括多樹型次分割資訊612以及最大區尺寸614。依解碼順序,最大區尺寸之編碼/解碼順序最好是優先於多樹型次分割資訊612以及其餘資料610。多樹型次分割資訊612以及其餘資料610可被編碼成為資料流而使多樹型次分割資訊612優先於其餘資料610,但同時也如上面的說明,多樹型次分割資訊612可依子區單元方式而與其餘資料610交錯,其中資訊樣本陣列依據多樹型次分割資訊被分割。同時,次分割資訊也可隨時間改變,例如,對於各個圖像。編碼可使用時間方式之預測被進行。亦即,僅對先前次分割資訊的差量可被編碼。剛剛所提的內容也適用於最大的區尺寸。然而,後者也可以粗的時間解析度而改變。
如利用點線之指示,資料流可進一步包括最大階層級別上之資訊,亦即,資訊616。以點線展示之618的三個空白方格將指示,資料流也可包括於另外的時間用於進一步的多樹型次分割之資料元素612-616,其可以是相對於利用元素612-616被定義之多樹型次分割的次級次分割,或可以是獨立地被定義之資訊樣本陣列的一次分割。
第19圖以一非常簡要方式展示藉由第17圖的解碼器以產生第18圖之可解碼的資料流之編碼器。該編碼器包括一次分割器650以及一最後的編碼器652。次分割器被組配以決定一最大區尺寸以及多樹型次分割資訊,並且以空間地分割且次分割資訊樣本陣列,因此剛好如同次分割器602,因此利用在資料流之內被發送的資訊612以及614被控制。最後編碼器652被組配以使用該次分割成為藉由次分割器650與最大區尺寸以及多樹型次分割資訊一起定義之較小的簡單連接區,而編碼資訊樣本陣列成為資料流。
如先前提及的,為簡要起見,應了解展示第19圖編碼器之第19圖的區塊圖示作為建構成為一次分割器650以及一最後編碼器652。更確切地,次分割器650以及最後編碼器652兩者皆必須決定包括兩者之最佳的語法元素組集,其關於次分割之指示,亦即,最大區尺寸614以及多樹型次分割資訊612,以及其餘資料610並且為了決定這最佳化語法元素組集,一疊代演算法可被使用,依據該演算法,語法元素之初步組集分別地利用次分割器602以及重建器604被嘗試。這將於第19圖藉由既有的嘗試編碼器654被說明,其被展示,以便說明元素610-614的一些語法元素組集可能已初步地在利用次分割器650以及最後編碼器652之實際資料流插入以及編碼串流產生之前在嘗試編碼器654之內被使用於編碼。雖然以分別的實體被展示,嘗試編碼器654以及最後編碼器652,就最大程度,可分別地由副程式、電路部件、或韌體邏輯而製作。
依照另外的實施例,一解碼器可如第20圖展示地被構成。第20圖之解碼器包括一次分割器700以及一重建器702。次分割器被組配以使用一四叉樹次分割,藉由遞迴式四叉樹劃分方式,而空間地次分割,表示一空間取樣資訊信號之一資訊樣本陣列,例如,資訊樣本陣列24,成為不同尺寸區塊,例如,分別地有關第3c圖以及第9a與9b圖的說明。重建器702被組配以使用,例如,藉由以深度優先走訪順序處理區塊之次分割,而重建來自一資料流之資訊樣本陣列成為區塊或簡單連接區,該深度優先走訪順序,例如,已在上面被說明並且以350在第3c圖中被展示。
如上面的說明,使用該深度優先走訪順序於重建與四叉樹次分割有關之影像樣本陣列中將有助於利用在鄰近區塊的資料流之內已先前被解碼的語法元素,以便增加目前區塊之編碼效率。
應注意到,第20圖之次分割器700可能不預期資料流包括四叉樹次分割的最大區尺寸514上之資訊。進一步地,依照第20圖之實施例,一最大階層級別616可能不在資料流中被指示。依照第20圖之實施例,就特定專用語法元素而言,即使四叉樹次分割資訊不需要明確地在資料流之內被傳信。反之,次分割器700可自其餘資料流資料之分析而預測四叉樹次分割,例如,可能地包含在資料流內之極小圖像的分析。可選擇地,於資訊樣本陣列屬於一視訊圖像或一些其他時間上變化資訊信號之情況中,次分割器700被組配,於自資料流抽取四叉樹次分割資訊中,自一先前被解碼的資訊樣本陣列之一先前被重建/被解碼的四叉樹次分割,預測對於資訊樣本之目前陣列的次分割資訊。進一步地,如於上面說明之第1至16圖的實施例之情況,使成為樹型區塊之樣本陣列的預分割不需要被進行。反之,四叉樹次分割可在樣本陣列上直接地被進行。
關於第20圖展示之元件以及第2圖展示之元件的一致性,次分割器700對應至第2圖之次分割器104a,而重建器702對應至元件104b、106、108、110、112、以及114。相似於第17圖之說明,合併器104b可被停用。進一步地,重建器702不被限定於混合編碼。相同情況適用至第12圖之重建器604。如利用點線之展示,第15圖解碼器可包括抽取,例如,四叉樹次分割資訊之一抽取器,依據該四叉樹次分割資訊,次分割器空間地次分割器資訊樣本陣列,這抽取器對應至第2圖的抽取器102。如以點線箭號之展示,次分割器700甚至可自利用重建器702輸出的資訊樣本之一重建陣列而預測資訊樣本之目前陣列的次分割。
一編碼器可提供一資料流,該資料流是可利用第15圖之解碼器而解碼,解碼器是如第19圖展示地被構成,亦即,被構成為一次分割器和一最後編碼器,而次分割器被組配以決定四叉樹次分割並且因此空間地次分割資訊樣本陣列,並且最後的編碼器被組配以使用藉由深度優先走訪順序處理區塊之次分割而編碼資訊樣本陣列使成為資料流。
第21圖展示一解碼器,其用以解碼標示一樹型區塊之空間多樹型次分割的多樹型結構之被編碼的傳信,例如,第6a以及6b圖中所展示有關四叉樹次分割之傳信。如上面所提到的,多樹型次分割不被限定於四叉樹次分割。進一步地,依據親源節點階層級別,以編碼以及解碼兩側已知的方式,或以指示至解碼器作為側資訊之方式,每個親源節點之子系節點數目可能不同。以一深度優先走訪順序(例如,第3c圖中之順序350)之編碼的傳信包括關聯於多樹型結構節點的一序列旗標。各個旗標指明對應至被關聯於各別的旗標節點之樹型區塊的一區域是否被多重劃分,例如,第6a以及6b圖中旗標序列之旗標。第21圖之解碼器接著被組配,以使用機率估計脈絡而依序地熵解碼該等旗標,該等機率估計脈絡對於關聯位於多樹型結構相同階層級別之內的多樹型結構節點之旗標是相同,但是對於位於多樹型結構不同階層級別之內的多樹型結構節點是不同。深度優先走訪順序有助於利用多樹型結構鄰近子區塊之鄰近樣本的統計性,而對於關聯於不同階層級別節點的旗標之不同機率估計脈絡的使用將可使得在一方面之脈絡管理經常支出以及另一方面之編碼效率之間有一折衷方案。
可選擇地,第21圖可歸納在先前以另外的方式有關第1-16圖所提到的說明。第16圖之解碼器可被組配,以解碼一多樹型結構之被編碼的信號,其是不必定得標示一樹型區塊之空間多樹型次分割,但是其包括以深度優先走訪順序關聯於多樹型結構節點的一序列旗標,如在上面的說明。例如,多樹型結構可在解碼側被使用,以供用於其他的目的,例如,其他的編碼應用中,例如,音訊編碼或其他的應用。進一步地,依據對於第21圖的這不同選擇,被編碼的傳信同時也包括多樹型結構最大階層級別上的資訊並且旗標序列僅以深度優先順序與多樹型結構節點關聯,而不與位於這最大階層級別內之節點關聯。藉由這措施,旗標數目顯著地被降低。
關於第21圖的上面說明之選擇,值得注意的是,用以提供藉由第21圖解碼器所解碼之多樹型結構的編碼傳信之一各別的編碼器,同時也可無關於上面說明的應用情景而被使用。
雖然一些論點已依一裝置之脈絡被說明,應清楚,這些論點同時也表示對應方法之說明,其中一區塊或裝置對應至一方法步驟或一方法步驟特點。類似地,依方法步驟之脈絡所說明的論點同時也表示對應的區塊或對應的裝置項目或特點之說明。一些或所有的方法步驟可利用(或使用)一硬體裝置(例如,一微處理器、一可程式電腦或一電子電路)被執行。於一些實施例中,一個或多個這些最重要方法步驟可利用此一裝置被執行。
本發明之編碼/壓縮的信號可被儲存在一數位儲存媒體上或可於一發送媒體上被發送,例如,無線發送媒體或有線發送媒體,例如,網際網路。
依據某些實作例需要,本發明實施例可以硬體或軟體被實作。該實作例可使用數位儲存媒體被進行,例如,軟式磁碟片、DVD、藍光片、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體,其等具有被儲存在其上之電子式可讀取控制信號,其配合(或能夠配合)於可程式電腦系統,因而各別的方法被進行。因此,數位儲存媒體可以是電腦可讀取。
依據本發明之一些實施例包括具有電子式可讀取控制信號之一資料載體,其是可配合於一可程式電腦系統,因而於此處說明的各種方法之一者被進行。
大體上,本發明實施例可被實作如具有一程式碼之電腦程式產品,當該電腦程式產品在一電腦上執行時,該程式碼是可操作用於進行該等方法之一者。該程式碼,例如,可被儲存在一機器可讀取載體上。
其他的實施例包括用以進行於此處說明的各種方法之一者的電腦程式,其被儲存在一機器可讀取載體上。
換句話說,本發明方法之一實施例,因此是一電腦程式,其具有當該電腦程式在一電腦上執行時,用以進行於此說明的各種方法之一者的一程式碼。
本發明方法之進一步的實施例,因此,是一資料載體(或一數位儲存媒體、或一電腦可讀取媒體),其包括被記錄在其上,用以進行於此處說明的各種方法之一者的電腦程式。
本發明方法之進一步的實施例,因此,是一資料流或一信號序列,其表示用以進行於此處說明的各種方法之一者的電腦程式。該資料流或信號序列,例如,可被組配以經由一資料通訊連接(例如,經由網際網路)被傳送。
進一步的一實施例包括一處理構件,例如,電腦或可程式邏輯裝置,其被組配或調適,以進行於此處說明的各種方法之一者。
進一步的一實施例包括一電腦,在其上被安裝電腦程式而用以進行於此處說明的各種方法之一者。
於一些實施例中,一可程式邏輯裝置(例如,一場可程式閘陣列)可被使用以進行於此處說明的各種方法之一些或所有的功能。於一些實施例中,一場可程式閘陣列可配合於一微處理器,以便進行於此處說明的各種方法之一者。大體上,該等方法最好是利用任何硬體裝置被進行。
由上述討論,將可理解,本發明可以多種實施例形式體現,包含但不限於下列:
1. 一種解碼器,其包括: 一抽取器,其組配來從一資料串流抽取一最大區尺寸以及多樹型次分割資訊; 一次分割器,其組配來空間地分割表示一空間取樣資訊信號之一資訊樣本陣列成為一最大區尺寸之樹根區,並且依照一多樹型次分割資訊,藉由遞迴式多劃分該等樹根區之一子集,至少將該等樹根區之該子集予以次分割成為不同尺寸之較小簡單連接區;以及 一重建器,其組配來從該資料串流使用次分割成為較小簡單連接區而重建該樣本陣列。
2. 如實施例1之解碼器,其中該次分割器組配來進行使該等資訊樣本陣列成為樹根區之分割,使得該等樹根區是由最大區尺寸決定之尺寸的矩形區塊,其規則地排列以便無隔閡地覆蓋該等資訊樣本陣列。
3. 如實施例1或2之解碼器,其中該次分割器組配來在次分割該等樹根區之子集時,進行下列步驟: 對於各樹根區,檢查該多樹型次分割資訊關於各別的樹根區是否要被劃分,並且 如果該各別的樹根區要被劃分的話,則: 依據關聯於一第一階層級別的一劃分規則,而將該各別的樹根區劃分成該第一階層級別之區,並且 對於該第一階層級別之該等區,遞迴式重複該檢查以及劃分,以便使用與之關聯的劃分規則而取得較高階之階層級別的區, 當依據該多樹型次分割資訊而無進一步的劃分將被進行,或達到一最大階層級別時,則停止該遞迴式重複動作, 其中依照該多樹型次分割資訊不進一步劃分之樹根區之該子集的區,分別表示該多樹型次分割之較小的簡單連接區以及支葉區。
4. 如實施例3之解碼器,其中該抽取器組配成也自該資料串流抽取最大階層級別。
5. 如實施例3或4之解碼器,其中該次分割器組配來依照關聯於該第一以及較高階之階層級別的劃分規則,進行成為相等尺寸之子區之一劃分,因此被取得之子區數目於所有階層級別是共同的。
6. 如實施例3至5中任一者的解碼器,其中該抽取器組配來從該資料串流抽取以一深度優先走訪順序關聯於樹根區子集的該等支葉區之語法元素。
7. 如實施例3至6中任一者的解碼器,其中該多樹型次分割資訊具有分別地關聯於各樹根區以及不屬於最大階層級別區之該第一以及較高階之階層級別之區之劃分指示旗標,該等劃分指示旗標指示分別地關聯的樹根區以及該第一與較高階之階層級別之區是否被劃分。
8. 如實施例7之解碼器,其中該抽取器組配來使用脈絡而依在分別地關聯的樹根區以及該第一與較高階之階層級別之區中定義的一深度優先走訪順序,脈絡調適地解碼該等劃分指示旗標,其中該等脈絡對於有關相同階層級別之劃分指示旗標是相同,但是對於有關不同階層級別之劃分指示旗標是不同。
9. 如實施例3至8中任一者的解碼器,其中各支葉區具有與之關聯的編碼參數,對於各支葉區,該等編碼參數是利用一各別的語法元素組集表示,各語法元素是得自一語法元素型式組集之一各別的語法元素型式,並且其中該抽取器組配來進行下列步驟: 對於各樹根區,自該資料串流抽取一繼承資訊,該繼承資訊指示繼承是否被使用於該各別的樹根區之內,並且如果指示繼承將被使用,在各別的樹根區之區中的一繼承區,依據次分割資訊,將被劃分, 對於依據該各別的繼承資訊,其中有使用到繼承之樹根區的該繼承區: 自該資料串流抽取一繼承子集,其包含一預定語法元素型式之至少一語法元素, 複製該繼承子集使成為在語法元素組集內之一對應的語法元素繼承子集,或使用該繼承子集作為該對應的語法元素繼承子集之預測,其中該對應的語法元素繼承子集表示關聯於空間上位於各別繼承區內之支葉區的編碼參數。
10. 如實施例3至9中任一者的解碼器,其中各支葉區具有與其關聯的編碼參數,對於各支葉區,該等編碼參數由一各別的語法元素組集表示,各語法元素是得自一語法元素型式組集之一各別的語法元素型式,並且其中該抽取器組配來進行下列步驟: 對於依據次分割資訊將被劃分的至少一階層級別之一繼承組集區,且使用自較低階層級別至較高階層級別之一階層級別順序,自該資料串流抽取一關聯的繼承旗標,並檢查各別的繼承旗標是否標示繼承; 對於關聯的繼承旗標標示繼承之各區: 自該資料串流抽取一繼承子集,該子集包含一預定語法元素型式之至少一語法元素, 複製該繼承子集使成為在語法元素組集內之一對應的語法元素繼承子集,或使用該繼承子集作為該對應的語法元素繼承子集之預測,其中該對應的語法元素繼承子集表示關聯於空間上位於關聯繼承旗標標示繼承之各別繼承區內之支葉區的編碼參數;並且 在使用自較低階層級別至較高階層級別之階層級別順序以檢查該等繼承旗標時,抑止對於空間上位於關聯繼承旗標標示繼承之各別繼承區內之支葉區的進一步繼承旗標之抽取與檢查。
11. 如實施例1至10中任一者的解碼器,其中該重建器組配來以依據成為較小簡單連接區之次分割而定的粒度而進行一個或多個下面的措施: 決定在至少框內以及框間的預測模式中要使用哪一預測模式; 自頻譜至空間域之轉換; 進行一框間預測,及/或對其設定參數;及 進行一框內預測,及/或對其設定參數。
12. 如實施例1至10中任一者的解碼器,其中該重建器組配來以依據成為較小簡單連接區之次分割而定的粒度而進行資訊樣本陣列的一預測,且該抽取器組配來從該資料串流抽取下級次的多樹型次分割資訊,並且其中該解碼器進一步包括: 一進一步的次分割器,其組配來依照該下級次的多樹型次分割資訊,藉由遞迴式地多劃分該等較小簡單連接區之一子集,至少將該等較小簡單連接區之該子集,次分割成為更小簡單連接區,其中該重建器組配來以該等更小簡單連接區為單位進行自頻譜至空間域的再轉換。
13. 如實施例12之解碼器,其中該抽取器組配來從該資料串流抽取一進一步的最大區尺寸,並且其中該次分割器組配來將超過該進一步的最大區尺寸之各個較小簡單連接區分割成為該進一步的最大區尺寸之樹根子區,並且依照該下級次的多樹型次分割資訊,至少次分割該等樹根子區之子集成為該等更小簡單連接區。
14. 如實施例13之解碼器,其中該次分割器組配來於次分割該等較小簡單連接區之子集時: 對於各較小簡單連接區,檢查該下級次的多樹型次分割資訊,有關各別的較小簡單連接區是否超過該進一步的最大區尺寸,並且,如果該各別的較小簡單連接區超過該進一步的最大區尺寸,則將該各別的較小簡單連接區分割成為該進一步的最大區尺寸之樹根子區; 對於各樹根子區: 檢查該下級次的多樹型次分割資訊,有關該各別的樹根子區是否將被劃分,並且 如果該各別的樹根子區將被劃分的話,則: 劃分該各別的樹根子區成為次子區,並且 遞迴式地重複對於該等次子區之檢查以及劃分,直到依據該下級次的多樹型次分割資訊無進一步劃分將被進行或達到進一步的最大階層級別為止,並且 其中對於不超過該進一步的最大區尺寸之較小簡單連接區,跳過成為樹根子區之分割。
15. 如實施例1至14中任一者的解碼器,其進一步包括: 一合併器,其組配來依據該資料串流之語法元素之一第一子集,其與形成該多樹型次分割資訊之資料串流的語法元素之一第二子集脫連,將該等較小簡單連接區中之空間上鄰近者結合,以取得該資訊樣本陣列之一中間次分割,其中該重建器被組配來使用該中間次分割來重建該資訊樣本陣列。
16. 如實施例15之解碼器,其中該資訊樣本陣列是得自一資訊樣本整體陣列之一簡單連接部分,該解碼器包括: 一預測器,其組配來從該資料串流預測該資訊樣本陣列,其中該重建器組配來以該等較小簡單連接區為單位,進行自頻譜至空間域之再轉換,以取得對於該資訊樣本陣列之一殘差量,並且結合該殘差量以及該資訊樣本陣列之預測以重建該資訊樣本陣列。
17. 一種解碼方法,其包括下列步驟: 自一資料串流抽取一最大區尺寸以及多樹型次分割資訊;及 空間地分割表示一空間取樣資訊信號之一資訊樣本陣列成為該最大區尺寸之樹根區,並且依照一多樹型次分割資訊,藉由遞迴式多劃分該等樹根區之一子集,至少次分割該等樹根區之該子集成為不同尺寸之較小簡單連接區;及 使用次分割成為較小簡單連接區而自該資料串流重建該樣本陣列。
18. 一種編碼器,其包括: 一次分割器,其組配來空間地分割表示一空間取樣資訊信號之一資訊樣本陣列成為最大區尺寸之樹根區,並且依照一多樹型次分割資訊,藉由遞迴式多劃分該等樹根區之一子集,至少次分割該等樹根區之該子集成為不同尺寸之較小簡單連接區;以及 一資料串流產生器,其組配來使用成為較小簡單連接區之次分割,將該樣本陣列編碼成為一資料串流且將最大區尺寸以及多樹型次分割資訊插入該資料串流。
19. 一種用以編碼之方法,其包括下列步驟: 空間地分割表示一空間取樣資訊信號之一資訊樣本陣列成為一最大區尺寸之樹根區,並且依照一多樹型次分割資訊,藉由遞迴式地多劃分該等樹根區之一子集,至少次分割該等樹根區之該子集成為不同尺寸之較小的簡單連接區;及 使用成為較小簡單連接區之次分割,將該樣本陣列編碼成為一資料串流且將最大區尺寸以及多樹型次分割資訊插入該資料串流。
20. 一種儲存有電腦程式之電腦可讀數位儲存媒體,該電腦程式具有一程式碼,該程式碼在一電腦上執行時,用以進行如實施例17或19之方法。
21. 一種資料串流,其中有表示空間取樣資訊信號的一資訊樣本陣列被編碼入該資料串流,該資料串流包括一最大區尺寸以及一多樹型次分割資訊,依據該資訊,表示該空間取樣資訊信號之該資訊樣本陣列被分割成的該最大區尺寸之樹根區之至少一子集,將藉由遞迴式多劃分該等樹根區之該子集而被次分割成為不同尺寸的較小簡單連接區。
22. 一種解碼器,其包括: 一次分割器,其組配來使用一四叉樹次分割方式,藉由遞迴式四叉樹劃分,而空間地次分割表示一空間取樣資訊信號之一資訊樣本陣列成為不同尺寸的區塊; 一重建器,其組配來依一深度優先走訪順序處理區塊之方式使用空間地次分割成為區塊來重建該資料串流之該資訊樣本陣列。
23. 如實施例22之解碼器,其中該次分割器組配來在空間地次分割該資訊樣本陣列時,將該資訊樣本陣列分割成為零階階層級別尺寸之樹根區塊的一規則性排列,並且次分割樹根區塊之至少一子集成為不同尺寸的較小區塊,其是藉由對於各樹根區塊,檢查該資訊樣本陣列被編碼所成之資料串流中所含之四叉樹次分割資訊來進行,其中該檢查係要查知各別的樹根區塊是否將被劃分,並且如果該各別的樹根區塊將被劃分,則將該各別的樹根區塊劃分成為一第一階層級別之四個區塊,並且遞迴式重複對於該等第一階層級別區塊之檢查以及分割,以便取得較高階級之階層級別區塊,當依據該四叉樹次分割資訊而無分割要進行、或達到一最大的階層級別時則停止該遞迴式重複動作,其中不進一步被劃分之樹根區塊的子集之區塊以及不被劃分之樹根區塊表示不同尺寸的區塊,其中該重建器組配來於重建該資訊樣本陣列時,以一掃描順序走訪該等不同尺寸的區塊,依據該掃描順序,該等樹根區塊以一曲折掃描順序被掃描,其對屬於該樹根區塊之子集的各樹根區塊,在以該曲折掃描順序進一步地進入下一個樹根區塊之前,以深度優先走訪順序處理該等不同尺寸的區塊。
24. 如實施例23之解碼器,其中該重建器包括: 一抽取器,其組配來從該資料串流以該掃描順序,抽取關聯於該等不同尺寸的區塊之語法元素。
25. 如實施例24之解碼器,其中該抽取器組配來對於一目前被抽取的語法元素,使用與相對目前被抽取的該語法元素所關聯之區塊具有一預定相對位置關係之不同尺寸的區塊相關聯之語法元素,以設定一機率估計脈絡,並且使用所設定的機率估計脈絡於熵解碼該目前被抽取的語法元素,或對於該目前被抽取的語法元素所關聯之區塊之編碼參數進行一預測,並且結合該預測與該目前被抽取之語法元素作為殘差量,以取得目前被抽取的語法元素所關聯之區塊的編碼參數。
26. 如實施例25之解碼器,其中依照該深度優先走訪順序,相同階層級別之區塊也以一曲折掃描順序被掃描。
27. 如實施例22至26中任一者的解碼器,其中該重建器組配來以依據該四叉樹次分割而定的粒度進行一個或多個下面的措施: 決定在至少框內以及框間的預測模式中要使用哪一預測模式; 自頻譜至空間域之轉換; 進行一框間預測,及/或對其設定參數;及 進行一框內預測,及/或對其設定參數。
28. 如實施例22至27中任一者的解碼器,其中該重建器包括一抽取器,該抽取器使用依據在已自該資料串流抽取出之該等不同尺寸區塊之中的鄰近區塊之語法元素而定的脈絡,自該資料串流抽取關聯於該等不同尺寸的區塊之語法元素。
29. 一種用以解碼之方法,其包括下列步驟: 使用一四叉樹次分割,藉由遞迴式進行四叉樹劃分,而空間地次分割表示一空間取樣資訊信號之一資訊樣本陣列成為不同尺寸的區塊;及 以一深度優先走訪順序處理區塊之方式使用空間地次分割成為區塊來重建該資料串流之該資訊樣本陣列。
30. 一種編碼器,其包括: 一次分割器,其組配來使用一四叉樹次分割方式,藉由遞迴式進行四叉樹劃分,而空間地次分割表示一空間取樣資訊信號之一資訊樣本陣列成為不同尺寸的區塊; 一資料串流產生器,其組配來以依一深度優先走訪順序處理區塊之方式使用空間次分割成為區塊來將該資料串流之資訊樣本陣列編碼入一資料串流。
31. 一種用以編碼之方法,其包括下列步驟: 使用一四叉樹次分割方式,藉由遞迴式進行四叉樹劃分,而空間地次分割表示一空間取樣資訊信號之一資訊樣本陣列成為不同尺寸的區塊; 以依一深度優先走訪順序處理區塊之方式使用空間次分割成為區塊將資料串流之該資訊樣本陣列編碼入一資料串流。
32. 一種儲存有電腦程式之電腦可讀數位儲存媒體,該電腦程式具有一程式碼,該程式碼在一電腦上執行時,用以進行如實施例29或31之方法。
33. 一種編碼有資訊樣本陣列之資料串流,該資訊樣本陣列表示一空間取樣資訊信號,該資訊樣本陣列使用一四叉樹次分割方式,藉由遞迴式四叉樹劃分,而空間地次分割成為不同尺寸的區塊,該資訊樣本陣列以依一深度優先走訪順序處理區塊之方式使用空間次分割成為資料串流的區塊而被編碼入一資料串流。
34. 一種解碼器,其用以解碼出標示樹根區塊之空間多樹型次分割的多樹型結構之編碼信令,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼信令包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,並且各旗標指明對應於各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該解碼器組配來使用機率估計脈絡而依序地熵解碼出該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
35. 如實施例34之解碼器,其中該空間多樹型次分割是一四叉樹次分割,並且依照該深度優先走訪順序,一曲折掃描被定義於具有一共同親源節點的四叉樹次分割之相同階層級別的節點間,其中該解碼器組配成使得對於一預定旗標之機率估計脈絡也取決於依照該深度優先走訪順序居於該預定旗標之前以及對應於相對於該預定旗標所對應的一區域具有一預定相對位置關係的樹根區塊區域的旗標。
36. 如實施例32之解碼器,其中該解碼器組配成使得被使用於該預定旗標之一機率估計脈絡取決於依照該深度優先走訪順序居於該預定旗標之前以及對應於相對於該預定旗標所對應的區域之頂部或左方的樹根區塊區域的旗標。
37. 如實施例35或36之解碼器,其中該解碼器組配成使得被使用於該預定旗標之該機率估計脈絡僅取決於位於該預定旗標所關聯的節點之相同階層級別內之旗標。
38. 如實施例35至37中任一者的解碼器,其中該解碼器也組配來從該資料串流抽取出一最高階層級別之一指示,該樹形區塊遞迴式地被多劃分到該級別,其中之旗標序列僅包括不等於最高階層級別之階層級別的旗標。
39. 如實施例34至38中任一者的解碼器,其中該解碼器組配來解碼出標示多個樹根區塊之一空間多樹型次分割的多樹型結構之信令,該等多個樹根區塊以在該等多個樹根區塊間定義的一曲折掃描順序,共同形成一較大之二維部分的一連續以及規則性的網格分割。
40. 如實施例34至38中任一者的解碼器,其中該解碼器組配來解碼出標示多個樹根區塊的一空間多樹型次分割之多樹型結構的信令,該等樹根區塊則是以在該等多個樹根區塊間定義之一深度優先走訪順序之一較大二維部分之另外的多樹型次分割之支葉區塊,且其中該等多樹型結構之編碼信令各包括以深度優先走訪順序關聯於各別的多樹型結構節點之一旗標序列,且各旗標指明對應於各別的旗標所關聯的節點之各別樹根區塊的一區域是否被多劃分,該解碼器組配來使用對於關聯於相同尺寸區域之旗標是相同之機率估計脈絡依序地熵解碼該等旗標。
41. 一種用以解碼出標示樹根區塊之空間多樹型次分割的多樹型結構之編碼信令的方法,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼信令包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,且各旗標指明對應於各別的旗標關聯之節點的樹根區塊之一區域是否被多劃分,該方法包括使用機率估計脈絡而依序地熵解碼出該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
42. 一種用以產生標示樹根區塊之空間多樹型次分割的多樹型結構之編碼信令的編碼器,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼信令包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,且各旗標指明對應於各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該編碼器組配來使用機率估計脈絡而依序地熵編碼該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
43. 一種用於編碼器以供產生標示樹根區塊之空間多樹型次分割的多樹型結構之編碼信令的方法,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼信令包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,且各旗標指明對應於各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,該方法包括使用機率估計脈絡而依序地熵編碼該等旗標,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
44. 一種儲存有電腦程式之電腦可讀數位儲存媒體,該電腦程式具有一程式碼,該程式碼在一電腦上執行時,用以進行如實施例41或43之方法。
45. 一種編碼有多樹型結構之編碼信令的資料串流,該編碼信令標示樹根區塊之空間多樹型次分割,依據該空間多樹型次分割,該樹根區塊遞迴式被多劃分成為支葉區塊,該編碼信令包括以一深度優先順序關聯於多樹型結構節點之一旗標序列,且各旗標指明對應於各別旗標關聯之節點的樹根區塊之一區域是否被多劃分,其中該等旗標使用機率估計脈絡而依序地被熵編碼入該資料串流,該等機率估計脈絡對於關聯位在多樹型結構之相同階層級別內的多樹型結構節點之旗標是相同,但是對於位在多樹型結構之不同階層級別內的多樹型結構節點是不同。
46. 一種用以解碼多樹型結構之編碼信令之解碼器,該編碼信令包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該解碼器組配來進行下列步驟: 自一資料串流解碼出該最高階層級別之指示,並且接著 以一深度優先或廣度優先走訪順序,藉由跳過最高階層級別節點並且自動地指定相同支葉節點,而自該資料串流依序地解碼出該旗標序列。
47. 一種用以解碼多樹型結構之編碼信令之方法,該編碼信令包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該方法包括下列步驟: 自一資料串流解碼出該最高階層級別之指示,並且接著 以一深度優先或廣度優先走訪順序,藉由跳過最高階層級別節點並且自動地指定相同支葉節點,而自該資料串流依序地解碼出該旗標序列。
48. 一種用以產生多樹型結構之編碼信令之編碼器,該編碼信令包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該編碼器組配來進行下列步驟: 編碼該最高階層級別指示進入一資料串流,及接著 以一深度優先或廣度優先走訪順序,藉由跳過最高階層級別節點並且自動地指定相同支葉節點,而依序地編碼該旗標序列進入該資料串流。
49. 一種用以產生多樹型結構之編碼信令之方法,該編碼信令包括一最高階層級別之一指示以及一關聯不等於該最高階層級別之多樹型結構節點的旗標序列,各旗標指明關聯的節點是否為一中間節點或是子系節點,該方法包括下列步驟: 編碼該最高階層級別指示進入一資料串流,及接著 以一深度優先或廣度優先走訪順序,藉由跳過最高階層級別節點並且自動地指定相同支葉節點,而依序地編碼該旗標序列進入該資料串流。
50. 一種儲存有電腦程式之電腦可讀數位儲存媒體,該電腦程式具有一程式碼,該程式碼在一電腦上執行時,用以進行如實施例47或49之方法。
在上面說明的實施例是僅對於本發明原理的說明。熟習本技術者應了解,本發明在配置上可有各種修改以及變化。因此,本發明將僅由待決之申請專利範圍之範疇所限定而非此處實施例之說明以及解說所表示之特定細節所限定。
10:編碼器 12,110:預測器 14:殘差預編碼器 16,106:殘差重建器 18:資料流插入器 20:區塊分割器 22:資料流 24:圖像 26:子區 28,602,650,700:次分割器 30,104b:合併器 32,116:輸入 34:減法器 36,108:加法器 38,112,114:濾波器 40,120:預測參數 100:解碼器 102,600:抽取器 104a:分割器 118:次分割資訊 122:殘差資料 124:輸出 140,200:光束掃描順序 150:樹型區塊 152a~152d, 154a~154d, 156a~156d:子區塊 190:切割區塊 202:不次分割之區塊 204:次分割之區塊 206:不次分割之第一子區塊 208:次分割之第二子區塊 210,212,214:不再分割之區塊 216,218,220,222:區塊尺寸 300~320:解碼旗標步驟 350:掃描順序 400,402,404:樣本 400~406:預測區塊產生步驟 450~472:合併資訊抽取步驟 500:圖像 502,504,506: 樣本陣列 508:方向 510,512:平面群組 514:特定樣本區塊 516:目前區塊 518,520:位置 522,524:區塊 550~556:解碼器進行步驟 604,702:重建器 606:解碼器輸入 608:解碼器輸出 610:編碼參數/殘差資訊 612:多樹型次分割資訊 614:最大區尺寸 616:最大階層級別 618:資訊 652:最後編碼器 654:嘗試編碼器
下面將參照下面有關的圖形而說明本發明之較佳實施例,其中:
第1圖展示依據本申請之一實施例的編碼器區塊圖;
第2圖展示依據本申請之一實施例的解碼器區塊圖;
第3a-c圖是圖解地展示對於一四叉樹次分割之說明範例,其中第3a圖展示第一階層級別,第3b圖展示第二階層級別並且第3c圖展示第三階層級別;
第4圖是圖解地展示依據一實施例之第3a至3c圖之四叉樹次分割的樹型結構;
第5a、5b圖是圖解地展示第3a至3c圖的四叉樹次分割以及具有指示個別支葉區塊之指標的樹型結構;
第6a、6b圖是分別地依據不同實施例圖解地展示表示第4圖樹型結構以及第3a至3c圖之四叉樹次分割的旗標之二元數列或序列;
第7圖展示依據一實施例示出藉由一資料流抽取器被進行之步驟的流程圖;
第8圖展示依據進一步的實施例示出資料流抽取器之功能的流程圖;
第9a、9b圖展示依據一實施例之四叉樹次分割的分解圖,其中對於一預定區塊的鄰近候選區塊被強調;
第10圖展示依據一進一步的實施例之資料流抽取器的功能之流程圖;
第11圖是圖解地展示依據一實施例,得自多數平面以及平面群組的圖像結構並且展示使用平面間調適/預測之編碼;
第12a以及12b圖是圖解地展示依據一實施例之一子樹型結構以及對應的次分割以便示出繼承結構;
第12c以及12d圖是分別圖解地展示依據實施例之一子樹型結構,以便展示具有採納以及預測之繼承結構;
第13圖展示依據一實施例展示藉由實現一繼承結構之編碼器而被進行之步驟的流程圖;
第14a以及14b圖展示依據一實施例之一主要的次分割以及一次級的次分割,以便示出可能地實作與框間預測有關之一繼承結構;
第15圖展示依據一實施例以示出與繼承結構有關之解碼處理程序的區塊圖;
第16圖展示對於解碼處理程序之範例殘差解碼順序;
第17圖展示依據一實施例之解碼器區塊圖;
第18圖展示依據一實施例以說明資料流內容之分解圖;
第19圖展示依據一實施例之編碼器區塊圖;
第20圖展示依據一進一步實施例之解碼器的區塊圖;以及
第21圖展示依據一進一步實施例之解碼器的區塊圖。
10:編碼器 12:預測器 14:殘差預編碼器 16:殘差重建器 18:資料流插入器 20:區塊分割器 22:資料流 24:圖像 26:子區 28:次分割器 30:合併器 32:輸入 34:減法器 36:加法器 38:濾波器 40:預測參數

Claims (8)

  1. 一種解碼器,其包含: 一次分割器,其組配來將表示一空間取樣資訊信號之一資訊樣本陣列空間地次分割成不同尺寸的區塊,其係藉由: 將該資訊樣本陣列分割成零階階層級別尺寸之樹根區塊的一規則性排列,及 藉由遞迴四叉樹劃分,將該等樹根區塊次分割,其係藉由: 針對每個樹根區塊,檢查含括於該資訊樣本陣列寫碼成的一資料串流中之四叉樹劃分資訊,關於各別之樹根區塊是否要被劃分,及 若該各別之樹根區塊要被劃分,則將該各別之樹根區塊劃分成一第一階層級別的四個區塊,及 遞迴地重複針對該第一階層級別的區塊之該檢查與劃分,以便獲得較高階層級別的區塊,而當根據該四叉樹劃分資訊不執行劃分,或達到一最大階層級別時,停止此遞迴重複, 一重建器,其組配來使用該資訊樣本陣列被空間地次分割成的該等不同尺寸的區塊而從該資料串流重建該資訊樣本陣列,其係藉由以一掃描順序走訪該等不同尺寸的區塊,根據該掃描順序,該等樹根區塊以一曲折掃描順序被掃描,而針對每個被劃分的樹根區塊,在進一步地進到該曲折掃描順序中的下一個樹根區塊之前,以深度優先走訪順序處理其中該等不同尺寸的區塊, 其中該解碼器進一步包含: 一抽取器,其組配來從該資料串流以該掃描順序,抽取與該等不同尺寸的區塊相關聯之語法元素, 其中該四叉樹劃分資訊係由按該深度優先走訪順序與該遞迴四叉樹劃分之節點相關聯的一旗標序列形成,且該抽取器係組配來使用該深度優先走訪順序從該資料串流抽取具該四叉樹劃分資訊之該旗標序列並使用下列旗標選擇一脈絡以解碼該旗標序列之一各自旗標: 依據該深度優先走訪順序在該各自旗標之前的旗標,以及 與位在該各自旗標所屬的一區域之頂端及/或左方之上的區域相關聯的旗標。
  2. 如請求項1之解碼器,其中該抽取器係組配來針對一當前抽取的語法元素,使用與跟該當前抽取的語法元素所關聯的區塊具有一預定相對位置關係之該等不同尺寸的區塊相關聯的語法元素,設定一機率估計脈絡並在熵解碼該當前抽取的語法元素時使用所設定之該機率估計脈絡,或執行對該當前抽取的語法元素所關聯的區塊之一寫碼參數的一預測並將該預測與該當前抽取的語法元素結合做為殘差量以取得該當前抽取的語法元素所關聯的區塊之該寫碼參數。
  3. 如請求項2之解碼器,其中依據該深度優先走訪順序,具相同階層級別的區塊亦以一曲折掃描順序掃描。
  4. 如請求項1之解碼器,其中該重建器係組配來在取決於該遞迴四叉樹劃分的一粒度上執行一個或多個以下步驟: 決定在至少框內與框間預測模式當中要使用哪一預測模式; 自頻譜至空間域之轉換; 執行一框間預測,及/或設定該框間預測之參數;以及 執行一框內預測,及/或設定該框內預測之參數。
  5. 如請求項1之解碼器,其中該重建器包含一抽取器,其用以依據在已自該資料串流抽取出之該等不同尺寸的區塊當中之鄰近方塊的語法元素之脈絡,自該資料串流抽取與該等不同尺寸的區塊相關聯的語法元素。
  6. 一種用以解碼之方法,其包含: 將表示一空間取樣資訊信號之一資訊樣本陣列空間地次分割成不同尺寸的區塊,其係藉由: 將該資訊樣本陣列分割成零階階層級別尺寸之樹根區塊的一規則性排列,及 藉由遞迴四叉樹劃分,將該等樹根區塊次分割,其係藉由: 針對每個樹根區塊,檢查含括於該資訊樣本陣列寫碼成的資料串流中之四叉樹劃分資訊,關於各別之樹根區塊是否要被劃分,及 若該各別之樹根區塊要被劃分,則將該各別之樹根區塊劃分成一第一階層級別的四個區塊,及 遞迴地重複針對該第一階層級別的區塊之該檢查與劃分,以便獲得較高階層級別的區塊,而當根據該四叉樹劃分資訊不執行劃分,或達到一最大階層級別時,停止此遞迴重複, 使用該資訊樣本陣列被空間地次分割成的該等不同尺寸的區塊而從該資料串流重建該資訊樣本陣列,其係藉由以一掃描順序走訪該等不同尺寸的區塊,根據該掃描順序,該等樹根區塊以一曲折掃描順序被掃描,而針對每個被劃分的樹根區塊,在進一步地進到該曲折掃描順序中的下一個樹根區塊之前,以深度優先走訪順序處理其中該等不同尺寸的區塊, 其中該方法包含: 從該資料串流以該掃描順序,抽取與該等不同尺寸的區塊相關聯之語法元素, 其中該四叉樹劃分資訊係由按該深度優先走訪順序與該遞迴四叉樹劃分之節點相關聯的一旗標序列形成,且具該四叉樹劃分資訊之該旗標序列係使用該深度優先走訪順序從該資料串流抽取,及用以解碼該旗標序列之一各自旗標的一脈絡係使用下列旗標選擇: 依據該深度優先走訪順序在該各自旗標之前的旗標,以及 與位在該各自旗標所屬的一區域之頂端及/或左方之上的區域相關聯的旗標。
  7. 一種編碼器,其包含: 一次分割器,其組配來將表示一空間取樣資訊信號之一資訊樣本陣列空間地次分割成不同尺寸的區塊,其係藉由: 將該資訊樣本陣列分割成零階階層級別尺寸之樹根區塊的一規則性排列,及 藉由遞迴四叉樹劃分,根據含括於該資訊樣本陣列寫碼成的資料串流中之四叉樹劃分資訊將該等樹根區塊次分割,並針對每個樹根區塊,指示關於: 各別之樹根區塊是否要被劃分,其中若指示該各別之樹根區塊要被劃分,則將該各別之樹根區塊劃分成一第一階層級別的四個區塊,及 是否要遞迴地重複針對該第一階層級別的區塊的該劃分以便獲得較高階層級別的區塊,而當根據該四叉樹劃分資訊不執行劃分,或達到一最大階層級別時,停止此遞迴重複,以及 一資料串流產生器,其組配來使用該資訊樣本陣列被空間地次分割成的該等不同尺寸的區塊而將該資訊樣本陣列編碼成該資料串流,其係藉由以一掃描順序走訪該等不同尺寸的區塊,根據該掃描順序,該等樹根區塊以一曲折掃描順序被掃描,而針對每個被劃分的樹根區塊,在進一步地進到該曲折掃描順序中的下一個樹根區塊之前,以深度優先走訪順序處理其中該等不同尺寸的區塊, 其中該資料串流產生器係組配來以該掃描順序將與該等不同尺寸的區塊相關聯之語法元素插入該資料串流中, 其中該四叉樹劃分資訊係由按該深度優先走訪順序與該遞迴四叉樹劃分之節點相關聯的一旗標序列形成,且該資料串流產生器係組配來使用該深度優先走訪順序將具該四叉樹劃分資訊之該旗標序列插入該資料串流中及使用下列旗標選擇一脈絡以編碼該旗標序列之一各自旗標: 依據該深度優先走訪順序在該各自旗標之前的旗標,以及 與位在該各自旗標所屬的一區域之頂端及/或左方之上的區域相關聯的旗標。
  8. 一種用以編碼之方法,其包含: 將表示一空間取樣資訊信號之一資訊樣本陣列空間地次分割成不同尺寸的區塊,其係藉由: 將該資訊樣本陣列分割成零階階層級別尺寸之樹根區塊的一規則性排列,及 藉由遞迴四叉樹劃分,根據含括於該資訊樣本陣列寫碼成的資料串流中之四叉樹劃分資訊將該等樹根區塊次分割,並針對每個樹根區塊,指示關於: 各別之樹根區塊是否要被劃分,其中若指示該各別之樹根區塊要被劃分,則將該各別之樹根區塊劃分成一第一階層級別的四個區塊,及 是否要遞迴地重複針對該第一階層級別的區塊的該劃分以便獲得較高階層級別的區塊,而當根據該四叉樹劃分資訊不執行劃分,或達到一最大階層級別時,停止此遞迴重複,以及 使用該資訊樣本陣列被空間地次分割成的該等不同尺寸的區塊而將該資訊樣本陣列編碼成該資料串流,其係藉由以一掃描順序走訪該等不同尺寸的區塊,根據該掃描順序,該等樹根區塊以一曲折掃描順序被掃描,而針對每個被劃分的樹根區塊,在進一步地進到該曲折掃描順序中的下一個樹根區塊之前,以深度優先走訪順序處理其中該等不同尺寸的區塊, 其中該資料串流之該資訊樣本陣列的該編碼進一步包含: 以該掃描順序將與該等不同尺寸的區塊相關聯之語法元素插入該資料串流中, 其中該四叉樹劃分資訊係由按該深度優先走訪順序與該遞迴四叉樹劃分之節點相關聯的一旗標序列形成,且使用該深度優先走訪順序將具該四叉樹劃分資訊之該旗標序列插入該資料串流中,及使用下列旗標選擇一脈絡以編碼該旗標序列之一各自旗標: 依據該深度優先走訪順序在該各自旗標之前的旗標,以及 與位在該各自旗標所屬的一區域之頂端及/或左方之上的區域相關聯的旗標。
TW110121017A 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流 TWI746414B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP10159819 2010-04-13
EP10159819.1 2010-04-13
EP2010054843 2010-04-13
WOPCT/EP2010/054843 2010-04-13

Publications (2)

Publication Number Publication Date
TW202139138A TW202139138A (zh) 2021-10-16
TWI746414B true TWI746414B (zh) 2021-11-11

Family

ID=44115570

Family Applications (11)

Application Number Title Priority Date Filing Date
TW104123545A TWI553593B (zh) 2010-04-13 2011-04-12 解碼器、用以解碼之方法及相關編碼器、用以編碼之方法與數位儲存媒體
TW106105964A TWI664607B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW109128744A TWI733566B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW109106524A TWI726635B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW111117967A TWI775719B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW110121017A TWI746414B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW110121018A TWI764752B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW108118367A TWI705418B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW111134064A TWI801315B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與非暫態電腦可讀媒體
TW105124461A TWI578273B (zh) 2010-04-13 2011-04-12 解碼器、用以解碼之方法及相關編碼器、用以編碼之方法與數位儲存媒體
TW100112640A TWI545526B (zh) 2010-04-13 2011-04-12 解碼器、解碼方法及相關編碼器、編碼方法與數位儲存媒體

Family Applications Before (5)

Application Number Title Priority Date Filing Date
TW104123545A TWI553593B (zh) 2010-04-13 2011-04-12 解碼器、用以解碼之方法及相關編碼器、用以編碼之方法與數位儲存媒體
TW106105964A TWI664607B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW109128744A TWI733566B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW109106524A TWI726635B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW111117967A TWI775719B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流

Family Applications After (5)

Application Number Title Priority Date Filing Date
TW110121018A TWI764752B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW108118367A TWI705418B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與資料串流
TW111134064A TWI801315B (zh) 2010-04-13 2011-04-12 解碼器、編碼器、及相關聯方法與非暫態電腦可讀媒體
TW105124461A TWI578273B (zh) 2010-04-13 2011-04-12 解碼器、用以解碼之方法及相關編碼器、用以編碼之方法與數位儲存媒體
TW100112640A TWI545526B (zh) 2010-04-13 2011-04-12 解碼器、解碼方法及相關編碼器、編碼方法與數位儲存媒體

Country Status (18)

Country Link
US (18) US10771822B2 (zh)
EP (7) EP3621306B1 (zh)
JP (2) JP5856143B2 (zh)
KR (13) KR101747201B1 (zh)
CN (20) CN106231328B (zh)
BR (2) BR122020007669B1 (zh)
DK (6) DK3621306T3 (zh)
ES (6) ES2953850T3 (zh)
FI (2) FI3955579T3 (zh)
HK (1) HK1218033A1 (zh)
HU (6) HUE062603T2 (zh)
LT (4) LT3703377T (zh)
PL (6) PL2559245T3 (zh)
PT (6) PT3955579T (zh)
RS (4) RS63059B1 (zh)
SI (4) SI3955579T1 (zh)
TW (11) TWI553593B (zh)
WO (1) WO2011128269A1 (zh)

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8867854B2 (en) * 2008-10-01 2014-10-21 Electronics And Telecommunications Research Institute Image encoder and decoder using undirectional prediction
KR102480988B1 (ko) 2010-04-13 2022-12-26 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
CN106231328B (zh) 2010-04-13 2020-06-12 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
CN102939750B (zh) * 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
LT3697089T (lt) * 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
ES2834902T3 (es) 2010-12-06 2021-06-21 Sun Patent Trust Método de decodificación de imagen, y dispositivo de decodificación de imágenes
US9848197B2 (en) 2011-03-10 2017-12-19 Qualcomm Incorporated Transforms in video coding
MX2013013508A (es) 2011-06-23 2014-02-27 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, aparato de decodificacion de imagenes, aparato de codificacion de imagenes y aparato de codificacion y decodificacion de imagenes.
USRE47366E1 (en) 2011-06-23 2019-04-23 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
TWI581615B (zh) 2011-06-24 2017-05-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, and a coding / decoding device
EP2725792B1 (en) 2011-06-24 2018-08-22 Sun Patent Trust Image decoding method and image decoding device
AU2012277214B2 (en) 2011-06-27 2016-05-05 Sun Patent Trust Decoding method, coding method, decoding apparatus, coding apparatus, and coding and decoding apparatus
WO2013001765A1 (ja) 2011-06-28 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
WO2013001767A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置及び画像符号化復号装置
KR102060619B1 (ko) 2011-06-30 2019-12-30 선 페이턴트 트러스트 화상 복호 방법, 화상 부호화 방법, 화상 복호 장치, 화상 부호화 장치 및 화상 부호화 복호 장치
AU2012277220B2 (en) 2011-06-30 2016-08-11 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN106851295B (zh) 2011-07-11 2019-10-18 太阳专利托管公司 编码方法及编码装置
US11496760B2 (en) 2011-07-22 2022-11-08 Qualcomm Incorporated Slice header prediction for depth maps in three-dimensional video codecs
US9521418B2 (en) 2011-07-22 2016-12-13 Qualcomm Incorporated Slice header three-dimensional video extension for slice header prediction
US9288505B2 (en) 2011-08-11 2016-03-15 Qualcomm Incorporated Three-dimensional video with asymmetric spatial resolution
US9161060B2 (en) * 2011-09-30 2015-10-13 Broadcom Corporation Multi-mode error concealment, recovery and resilience coding
US9485503B2 (en) 2011-11-18 2016-11-01 Qualcomm Incorporated Inside view motion prediction among texture and depth view components
US20130128971A1 (en) * 2011-11-23 2013-05-23 Qualcomm Incorporated Transforms in video coding
US9332257B2 (en) 2012-10-01 2016-05-03 Qualcomm Incorporated Coded black flag coding for 4:2:2 sample format in video coding
JP6055555B2 (ja) * 2012-11-13 2016-12-27 インテル コーポレイション 次世代ビデオのためのビデオコーデックアーキテクチャ
CN104704827B (zh) * 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
BR112015015575A2 (pt) * 2013-01-30 2020-02-04 Intel Corp particionamento adaptativo ao conteúdo para a previsão e codificação para vídeo da próxima geração
GB2512829B (en) * 2013-04-05 2015-05-27 Canon Kk Method and apparatus for encoding or decoding an image with inter layer motion information prediction according to motion information compression scheme
ES2665908T3 (es) * 2013-04-08 2018-04-30 Ge Video Compression, Llc Predicción inter-componente
US20140325152A1 (en) * 2013-04-26 2014-10-30 Samsung Electronics Company, Ltd. Quadtree based data management for memory
US20150063455A1 (en) * 2013-09-02 2015-03-05 Humax Holdings Co., Ltd. Methods and apparatuses for predicting depth quadtree in three-dimensional video
WO2015055832A1 (en) * 2013-10-18 2015-04-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multi-component picture or video coding concept
US9842424B2 (en) * 2014-02-10 2017-12-12 Pixar Volume rendering using adaptive buckets
CN104125469B (zh) * 2014-07-10 2017-06-06 中山大学 一种用于hevc的快速编码方法
CN105992000B (zh) * 2015-03-06 2019-03-22 扬智科技股份有限公司 影像流的处理方法及其影像处理装置
EP3099072A1 (en) * 2015-05-28 2016-11-30 Parabola Research Limited Method, system and device for image and video coding
US10009620B2 (en) 2015-06-22 2018-06-26 Cisco Technology, Inc. Combined coding of split information and other block-level parameters for video coding/decoding
US10003807B2 (en) 2015-06-22 2018-06-19 Cisco Technology, Inc. Block-based video coding using a mixture of square and rectangular blocks
US10972731B2 (en) * 2015-11-10 2021-04-06 Interdigital Madison Patent Holdings, Sas Systems and methods for coding in super-block based video coding framework
CN108605130B (zh) * 2015-11-27 2021-05-11 联发科技股份有限公司 一种用于对与区块相关的符号进行熵编解码的方法和装置
US10212444B2 (en) 2016-01-15 2019-02-19 Qualcomm Incorporated Multi-type-tree framework for video coding
US9942548B2 (en) * 2016-02-16 2018-04-10 Google Llc Entropy coding transform partitioning information
US11223852B2 (en) 2016-03-21 2022-01-11 Qualcomm Incorporated Coding video data using a two-level multi-type-tree framework
US10623774B2 (en) * 2016-03-22 2020-04-14 Qualcomm Incorporated Constrained block-level optimization and signaling for video coding tools
CN117041547A (zh) 2016-04-29 2023-11-10 世宗大学校产学协力团 用于对图像信号进行编码/解码的方法和设备
US10560712B2 (en) * 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
US20190327476A1 (en) * 2016-06-24 2019-10-24 Industry Academy Cooperation Foundation Of Sejong University Video signal processing method and device
US10609423B2 (en) 2016-09-07 2020-03-31 Qualcomm Incorporated Tree-type coding for video coding
US10812795B2 (en) 2016-09-30 2020-10-20 Lg Electronic Inc. Method for processing picture based on intra-prediction mode and apparatus for same
US20200045305A1 (en) * 2016-09-30 2020-02-06 Lg Electronics Inc. Picture processing method and apparatus for same
US20180109814A1 (en) * 2016-10-14 2018-04-19 Mediatek Inc. Method And Apparatus Of Coding Unit Information Inheritance
IT201600122898A1 (it) * 2016-12-02 2018-06-02 Ecole Polytechnique Fed Lausanne Epfl Metodi e apparati per codificare e decodificare immagini o flussi video digitali
US10373384B2 (en) * 2016-12-12 2019-08-06 Google Llc Lightfield compression using disparity predicted replacement
US10848788B2 (en) 2017-01-06 2020-11-24 Qualcomm Incorporated Multi-type-tree framework for video coding
KR20180089290A (ko) * 2017-01-31 2018-08-08 세종대학교산학협력단 영상의 부호화/복호화 방법 및 장치
WO2018169571A1 (en) * 2017-03-15 2018-09-20 Google Llc Segmentation-based parameterized motion models
US10855997B2 (en) * 2017-04-14 2020-12-01 Mediatek Inc. Secondary transform kernel size selection
NL2018969B1 (en) 2017-05-23 2018-12-04 Boskalis Bv Baggermaatschappij Method and system for forming structures in fluid, especially under water
CN110999295B (zh) * 2017-07-04 2024-03-26 华为技术有限公司 边界强制分区的改进
US11877001B2 (en) 2017-10-10 2024-01-16 Qualcomm Incorporated Affine prediction in video coding
EP3474233A1 (en) * 2017-10-19 2019-04-24 Thomson Licensing A method and apparatus for encoding/decoding the geometry of a point cloud representing a 3d object
US11144523B2 (en) * 2017-11-17 2021-10-12 Battelle Memorial Institute Methods and data structures for efficient cross-referencing of physical-asset spatial identifiers
US11297339B2 (en) * 2017-12-06 2022-04-05 V-Nova International Limited Methods and apparatuses for hierarchically encoding and decoding a bytestream
CN109996075B (zh) * 2017-12-29 2022-07-12 华为技术有限公司 一种图像解码方法及解码器
EP3514969B1 (en) * 2018-01-18 2021-08-04 BlackBerry Limited Methods and devices using direct coding in point cloud compression
WO2019190202A1 (ko) * 2018-03-27 2019-10-03 주식회사 케이티 비디오 신호 처리 방법 및 장치
KR20230003413A (ko) * 2018-03-29 2023-01-05 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 픽쳐 경계 처리를 사용하여 픽쳐를 인코딩하고 디코딩하는 장치 및 방법
US10659781B2 (en) * 2018-04-02 2020-05-19 Tencent America LLC Concatenated coding units in flexible tree structure
KR20200047723A (ko) * 2018-05-03 2020-05-07 엘지전자 주식회사 영상 코딩 시스템에서 블록 사이즈에 따른 변환을 사용하는 영상 디코딩 방법 및 그 장치
CN110636314B (zh) * 2018-06-21 2022-09-27 北京字节跳动网络技术有限公司 改进的边界分割
KR20210020924A (ko) 2018-06-27 2021-02-24 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 삼차원 데이터 부호화 방법, 삼차원 데이터 복호 방법, 삼차원 데이터 부호화 장치, 및 삼차원 데이터 복호 장치
CN110662029A (zh) * 2018-06-30 2020-01-07 上海天荷电子信息有限公司 动态和自适应地限制取值范围的数据压缩方法和装置
JP7195073B2 (ja) * 2018-07-10 2022-12-23 古野電気株式会社 グラフ生成装置
KR20210027477A (ko) * 2018-07-13 2021-03-10 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 분할 인트라 코딩 개념
CN110753222B (zh) * 2018-08-14 2022-03-25 北京达佳互联信息技术有限公司 视频编码方法和确定采用帧间编码方式的方法及设备
CN113170193A (zh) * 2018-11-28 2021-07-23 北京字节跳动网络技术有限公司 帧内块复制模式中块矢量列表的独立构造方法
US10917636B2 (en) 2018-12-03 2021-02-09 Tencent America LLC Method and apparatus for video coding
CN117750022A (zh) * 2018-12-18 2024-03-22 寰发股份有限公司 在区块分割中条件式编码或解码视频区块的方法和装置
MX2021006569A (es) * 2018-12-21 2021-07-07 Panasonic Ip Corp America Metodo de codificacion de datos tridimensionales, metodo de decodificacion de datos tridimensionales, dispositivo codificador de datos tridimensionales y dispositivo decodificador de datos tridimensionales.
JP7277599B2 (ja) 2019-03-08 2023-05-19 北京字節跳動網絡技術有限公司 映像処理におけるモデルベース再整形に対する制約
MX2021010897A (es) * 2019-03-12 2021-11-12 Fraunhofer Ges Forschung Concepto de intracodificacion basado en particion eficiente de implementacion.
US11240499B2 (en) * 2019-05-24 2022-02-01 Tencent America LLC Method and apparatus for video coding
CN111699684B (zh) * 2019-06-14 2022-05-06 深圳市大疆创新科技有限公司 三维数据点的编解码方法和装置
WO2020259427A1 (en) 2019-06-22 2020-12-30 Beijing Bytedance Network Technology Co., Ltd. Syntax element for chroma residual scaling
CN117395396A (zh) 2019-07-07 2024-01-12 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
FR3102631A1 (fr) * 2019-10-25 2021-04-30 Valeo Vision Procédé de gestion des données d'images et dispositif d'éclairage automobile
KR20210066291A (ko) * 2019-11-28 2021-06-07 주식회사 피제이팩토리 멀티 뎁스 이미지 생성 방법 및 이를 위한 프로그램을 기록한 기록매체
CN111325044B (zh) * 2020-01-31 2021-08-20 中国原子能科学研究院 一种用于核电站新组件编码的确定方法、识别系统及识别方法
WO2023020446A1 (en) * 2021-08-16 2023-02-23 Mediatek Inc. Candidate reordering and motion vector refinement for geometric partitioning mode
US11917283B2 (en) * 2021-10-27 2024-02-27 Tencent America LLC Split rendering for lightfield/immersive media using edge-cloud architecture and peer-to-peer streaming
CN114494711B (zh) * 2022-02-25 2023-10-31 南京星环智能科技有限公司 一种图像特征的提取方法、装置、设备及存储介质
US20230308651A1 (en) * 2022-03-22 2023-09-28 Tencent America LLC Systems and methods for regularization-free multi-hypothesis arithmetic coding
EP4345994A1 (en) 2022-04-27 2024-04-03 LG Energy Solution, Ltd. Battery module, battery pack and vehicle including same

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6269192B1 (en) * 1997-07-11 2001-07-31 Sarnoff Corporation Apparatus and method for multiscale zerotree entropy encoding
US20040028049A1 (en) * 2000-10-06 2004-02-12 Wan Ernest Yiu Cheong XML encoding scheme
TW200907860A (en) * 2007-08-03 2009-02-16 Via Tech Inc Method and apparatus for block-based digital encoded picture
CN100545870C (zh) * 2001-11-27 2009-09-30 三星电子株式会社 基于深度图像表示三维物体的装置和方法
US20100086031A1 (en) * 2008-10-03 2010-04-08 Qualcomm Incorporated Video coding with large macroblocks

Family Cites Families (268)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2633468B1 (fr) 1988-06-24 1990-11-09 France Etat Procede de codage de donnees d'assistance a la reconstruction d'images electroniques animees sous-echantillonnees
US7095783B1 (en) 1992-06-30 2006-08-22 Discovision Associates Multistandard video decoder and decompression system for processing encoded bit streams including start codes and methods relating thereto
US5809270A (en) 1992-06-30 1998-09-15 Discovision Associates Inverse quantizer
US5842033A (en) 1992-06-30 1998-11-24 Discovision Associates Padding apparatus for passing an arbitrary number of bits through a buffer in a pipeline system
US6408097B1 (en) * 1993-08-30 2002-06-18 Sony Corporation Picture coding apparatus and method thereof
US5446806A (en) 1993-11-15 1995-08-29 National Semiconductor Corporation Quadtree-structured Walsh transform video/image coding
CA2145361C (en) 1994-03-24 1999-09-07 Martin William Sotheran Buffer manager
DE69527525T2 (de) 1995-08-21 2003-04-03 Alcatel Sa Verfahren zur Schachtelung von Datenrahmen, Übertragungsfehlerkorrekturanordnung und Modulator damit
JP2000500887A (ja) 1995-09-25 2000-01-25 アドビ システムズ インコーポレイテッド 電子文書への最適アクセス
WO1997015146A1 (en) 1995-10-18 1997-04-24 Philips Electronics N.V. Method of encoding video images
WO1997017797A2 (en) * 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation
TW346571B (en) 1996-02-06 1998-12-01 Matsushita Electric Ind Co Ltd Data reception apparatus, data transmission apparatus, information processing system, data reception method
US6005981A (en) 1996-04-11 1999-12-21 National Semiconductor Corporation Quadtree-structured coding of color images and intra-coded images
DE19615493A1 (de) 1996-04-19 1997-10-23 Philips Patentverwaltung Verfahren zur Bildsegmentierung
CN100539695C (zh) 1996-05-28 2009-09-09 松下电器产业株式会社 图像预测编码/解码装置和方法以及记录媒体
US6639945B2 (en) 1997-03-14 2003-10-28 Microsoft Corporation Method and apparatus for implementing motion detection in video compression
US6057884A (en) 1997-06-05 2000-05-02 General Instrument Corporation Temporal and spatial scaleable coding for video object planes
CN1882092B (zh) 1998-03-10 2012-07-18 索尼公司 利用编码历史信息的编码转换系统
US6067574A (en) * 1998-05-18 2000-05-23 Lucent Technologies Inc High speed routing using compressed tree process
US6269175B1 (en) 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US6563953B2 (en) 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US7085319B2 (en) 1999-04-17 2006-08-01 Pts Corporation Segment-based encoding system using segment hierarchies
JP2000350207A (ja) 1999-06-08 2000-12-15 Matsushita Electric Ind Co Ltd 低解像度ビデオ復号化のための一般化直交変換方法および装置
FI116992B (fi) 1999-07-05 2006-04-28 Nokia Corp Menetelmät, järjestelmä ja laitteet audiosignaalin koodauksen ja siirron tehostamiseksi
MXPA02004015A (es) * 1999-10-22 2003-09-25 Activesky Inc Un sistema de video orientado a los objetos.
JP3957937B2 (ja) 1999-12-21 2007-08-15 キヤノン株式会社 画像処理装置及び方法並びに記憶媒体
FI116819B (fi) 2000-01-21 2006-02-28 Nokia Corp Menetelmä kuvien lähettämiseksi ja kuvakooderi
WO2001054418A1 (en) 2000-01-21 2001-07-26 Nokia Corporation A motion estimation method and a system for a video coder
US6910001B2 (en) * 2000-03-22 2005-06-21 Schlumberger Technology Corp. Distributed multiresolution geometry modeling system and method
US6785423B1 (en) 2000-05-26 2004-08-31 Eastman Kodak Company Producing a compressed digital image organized into layers having information relating to different viewing conditions and resolutions
JP2004503964A (ja) * 2000-06-14 2004-02-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ カラービデオ符号化及び復号方法
WO2002009438A2 (en) 2000-07-25 2002-01-31 Koninklijke Philips Electronics N.V. Video encoding method using a wavelet decomposition
US7929610B2 (en) 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
US7450641B2 (en) 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
JP2003018602A (ja) 2001-04-24 2003-01-17 Monolith Co Ltd 画像データ符号化および復号のための方法および装置
US6987866B2 (en) 2001-06-05 2006-01-17 Micron Technology, Inc. Multi-modal motion estimation for video sequences
US7483581B2 (en) 2001-07-02 2009-01-27 Qualcomm Incorporated Apparatus and method for encoding digital image data in a lossless manner
JP2003018604A (ja) 2001-07-04 2003-01-17 Matsushita Electric Ind Co Ltd 画像信号符号化方法、画像信号符号化装置および記録媒体
US6971770B2 (en) 2001-09-06 2005-12-06 Martin Professional A/S Lighting apparatus
EP2819411B1 (en) 2001-09-14 2018-08-29 NTT DoCoMo, Inc. Coding method and decoding method
US6950469B2 (en) * 2001-09-17 2005-09-27 Nokia Corporation Method for sub-pixel value interpolation
JP2005506775A (ja) * 2001-10-16 2005-03-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビデオ符号化方法及び対応する送信可能なビデオ信号
US7228001B2 (en) 2001-11-16 2007-06-05 Ntt Docomo, Inc. Image encoding method, image decoding method, image encoder, image decode, program, computer data signal, and image transmission system
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
EP1324615A1 (en) 2001-12-28 2003-07-02 Deutsche Thomson-Brandt Gmbh Transcoding MPEG bitstreams for adding sub-picture content
KR20030065606A (ko) * 2002-01-30 2003-08-09 양송철 개인 자동독립코드를 이용한 멀티트리구조의 보너스 적립순환 시스템과 그 방법
CN101132528B (zh) * 2002-04-12 2011-08-03 三菱电机株式会社 元数据再生、分发、检索装置、元数据再生成条件设定装置
JP4130780B2 (ja) 2002-04-15 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
US20030198290A1 (en) 2002-04-19 2003-10-23 Dynamic Digital Depth Pty.Ltd. Image encoding system
US7433526B2 (en) 2002-04-30 2008-10-07 Hewlett-Packard Development Company, L.P. Method for compressing images and image sequences through adaptive partitioning
CN1666532A (zh) 2002-07-02 2005-09-07 松下电器产业株式会社 图像编码方法和图像解码方法
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
US6975773B1 (en) 2002-07-30 2005-12-13 Qualcomm, Incorporated Parameter selection in data compression and decompression
US7266247B2 (en) 2002-09-30 2007-09-04 Samsung Electronics Co., Ltd. Image coding method and apparatus using spatial predictive coding of chrominance and image decoding method and apparatus
JP3950777B2 (ja) 2002-09-30 2007-08-01 キヤノン株式会社 画像処理方法、画像処理装置および画像処理プログラム
JP2004135252A (ja) 2002-10-09 2004-04-30 Sony Corp 符号化処理方法、符号化装置及び復号化装置
US7254533B1 (en) 2002-10-17 2007-08-07 Dilithium Networks Pty Ltd. Method and apparatus for a thin CELP voice codec
EP1431919B1 (en) 2002-12-05 2010-03-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding three-dimensional object data by using octrees
AU2004217221B2 (en) 2003-03-03 2009-09-03 Agency For Science, Technology And Research Fast mode decision algorithm for intra prediction for advanced video coding
US7366352B2 (en) 2003-03-20 2008-04-29 International Business Machines Corporation Method and apparatus for performing fast closest match in pattern recognition
US7643558B2 (en) 2003-03-24 2010-01-05 Qualcomm Incorporated Method, apparatus, and system for encoding and decoding side information for multimedia transmission
GB2454195A (en) 2007-10-30 2009-05-06 Sony Corp Address generation polynomial and permutation matrix for DVB-T2 16k OFDM sub-carrier mode interleaver
BRPI0408835A (pt) 2003-03-28 2006-04-04 Digital Accelerator Corp método e aparelho de codificação de quadro residual de movimento com base em transformada com base supercompleta para compressão de vìdeo
HUP0301368A3 (en) 2003-05-20 2005-09-28 Amt Advanced Multimedia Techno Method and equipment for compressing motion picture data
US7083903B2 (en) 2003-06-17 2006-08-01 Lam Research Corporation Methods of etching photoresist on substrates
KR100624429B1 (ko) 2003-07-16 2006-09-19 삼성전자주식회사 칼라 영상을 위한 비디오 부호화/복호화 장치 및 그 방법
US7333544B2 (en) 2003-07-16 2008-02-19 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using inter-color plane prediction
US7010044B2 (en) 2003-07-18 2006-03-07 Lsi Logic Corporation Intra 4×4 modes 3, 7 and 8 availability determination intra estimation and compensation
FR2858741A1 (fr) 2003-08-07 2005-02-11 Thomson Licensing Sa Dispositif et procede de compression d'images numeriques
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
CN1322472C (zh) * 2003-09-08 2007-06-20 中国人民解放军第一军医大学 基于小波变换的预测四叉树图像压缩及解压方法
TW200518481A (en) * 2003-10-29 2005-06-01 Nec Corp Decoder and encoder of arithmetic code, encoding apparatus and decoding apparatus having intermediate buffer inserted between reverse binary converter and binary converter
KR20050045746A (ko) 2003-11-12 2005-05-17 삼성전자주식회사 계층 구조의 가변 블록 크기를 이용한 움직임 추정 방법및 장치
EP1534018B1 (en) 2003-11-21 2008-11-12 Samsung Electronics Co., Ltd. Apparatus and method for generating coded block pattern for alpha channel image and alpha channel image encoding/decoding apparatus and method using the same
US7418455B2 (en) 2003-11-26 2008-08-26 International Business Machines Corporation System and method for indexing weighted-sequences in large databases
KR100556911B1 (ko) 2003-12-05 2006-03-03 엘지전자 주식회사 무선 동영상 스트리밍 서비스를 위한 동영상 데이터의 구조
US7362809B2 (en) 2003-12-10 2008-04-22 Lsi Logic Corporation Computational reduction in motion estimation based on lower bound of cost function
US7599435B2 (en) * 2004-01-30 2009-10-06 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Video frame encoding and decoding
US7649539B2 (en) * 2004-03-10 2010-01-19 Microsoft Corporation Image formats for video capture, processing and display
US20050206741A1 (en) 2004-03-19 2005-09-22 Raber Gregory W Law enforcement vehicle surveillance system
CN1691087B (zh) 2004-04-26 2011-07-06 图形安全系统公司 用于解码数字编码图像的系统和方法
DE602005021926D1 (de) * 2004-04-28 2010-07-29 Panasonic Corp Stream-Erzeugungsvorrichtung für bewegliche Bilder, Kodierungsvorrichtung für bewegliche Bilder, Multiplex-Vorrichtung für bewegliche Bilder und Decodierungsvorrichtung für bewegliche Bilder
CN1281065C (zh) 2004-05-20 2006-10-18 复旦大学 基于树状结构的等级树集合划分视频图像压缩方法
EP1754378A1 (en) 2004-05-25 2007-02-21 Koninklijke Philips Electronics N.V. Method and device for encoding digital video data
US20060002474A1 (en) 2004-06-26 2006-01-05 Oscar Chi-Lim Au Efficient multi-block motion estimation for video compression
CN1750656B (zh) 2004-06-27 2012-04-18 苹果公司 编码和解码图像
US7292257B2 (en) 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
CN1268136C (zh) 2004-07-02 2006-08-02 上海广电(集团)有限公司中央研究院 基于图像切片结构的帧场自适应编码方法
KR100657268B1 (ko) 2004-07-15 2006-12-14 학교법인 대양학원 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
CN101124589A (zh) 2004-08-09 2008-02-13 图形安全系统公司 通过使用多级图像编码和解码来认证对象的系统和方法
CN1589022A (zh) * 2004-08-26 2005-03-02 中芯联合(北京)微电子有限公司 多模式运动估计中由朝向树决定的宏块分割模式选择方法
DE102004059993B4 (de) 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
CN101416149A (zh) 2004-10-21 2009-04-22 索尼电子有限公司 以高级视频编解码器文件格式支持保真度范围扩展
CN1780278A (zh) 2004-11-19 2006-05-31 松下电器产业株式会社 子载波通信系统中自适应调制与编码方法和设备
US20060120454A1 (en) 2004-11-29 2006-06-08 Park Seung W Method and apparatus for encoding/decoding video signal using motion vectors of pictures in base layer
CN101073265B (zh) 2004-12-03 2012-08-22 汤姆森许可贸易公司 可缩放视频编码方法
KR100703734B1 (ko) 2004-12-03 2007-04-05 삼성전자주식회사 Dct 업샘플링을 이용한 다 계층 비디오 인코딩/디코딩방법 및 장치
US7970219B2 (en) 2004-12-30 2011-06-28 Samsung Electronics Co., Ltd. Color image encoding and decoding method and apparatus using a correlation between chrominance components
KR101138392B1 (ko) 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
US20060153300A1 (en) 2005-01-12 2006-07-13 Nokia Corporation Method and system for motion vector prediction in scalable video coding
US20060153295A1 (en) 2005-01-12 2006-07-13 Nokia Corporation Method and system for inter-layer prediction mode coding in scalable video coding
CN101204092B (zh) 2005-02-18 2010-11-03 汤姆森许可贸易公司 从低分辨率图像导出高分辨率图像的编码信息的方法以及实施所述方法的编码和解码设备
JP5213456B2 (ja) 2005-02-18 2013-06-19 トムソン ライセンシング 高分解能ピクチャの符号化情報を低分解能ピクチャから導き出す方法、並びにその方法を実現する符号化及び復号化装置
JP4504230B2 (ja) 2005-03-02 2010-07-14 株式会社東芝 動画像処理装置、動画像処理方法、及び動画像処理プログラム
TWI259727B (en) 2005-03-09 2006-08-01 Sunplus Technology Co Ltd Method for rapidly determining macroblock mode
US7961963B2 (en) 2005-03-18 2011-06-14 Sharp Laboratories Of America, Inc. Methods and systems for extended spatial scalability with picture-level adaptation
EP1711018A1 (en) 2005-04-08 2006-10-11 Thomson Licensing Method and apparatus for encoding video pictures, and method and apparatus for decoding video pictures
US20060233262A1 (en) 2005-04-13 2006-10-19 Nokia Corporation Signaling of bit stream ordering in scalable video coding
KR101246915B1 (ko) 2005-04-18 2013-03-25 삼성전자주식회사 동영상 부호화 또는 복호화 방법 및 장치
KR100746007B1 (ko) 2005-04-19 2007-08-06 삼성전자주식회사 엔트로피 코딩의 컨텍스트 모델을 적응적으로 선택하는방법 및 비디오 디코더
KR100763181B1 (ko) 2005-04-19 2007-10-05 삼성전자주식회사 기초계층과 향상계층의 데이터를 바탕으로 예측 정보를코딩하여 코딩율을 향상시키는 방법 및 장치
US8150151B2 (en) 2005-05-12 2012-04-03 Bracco Imaging S.P.A. Method for coding pixels or voxels of a digital image and a method for processing digital images
US7548853B2 (en) 2005-06-17 2009-06-16 Shmunk Dmitry V Scalable compressed audio bit stream and codec using a hierarchical filterbank and multichannel joint coding
WO2007000657A1 (en) 2005-06-29 2007-01-04 Nokia Corporation Method and apparatus for update step in video coding using motion compensated temporal filtering
KR100644490B1 (ko) 2005-07-01 2006-11-10 엘에스전선 주식회사 난연성 전선 피복재료 조성물 및 이를 이용한 해양 케이블
JP2007043651A (ja) 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
JP4444180B2 (ja) 2005-07-20 2010-03-31 株式会社東芝 テクスチャ符号化装置、テクスチャ復号化装置、方法、およびプログラム
BRPI0613657B1 (pt) 2005-07-21 2019-05-07 Thomson Licensing Método e aparelho para o prognóstico ponderado para uma codificação de vídeo redimensionável
KR20070012201A (ko) 2005-07-21 2007-01-25 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
CN101815224A (zh) 2005-07-22 2010-08-25 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
US9113147B2 (en) 2005-09-27 2015-08-18 Qualcomm Incorporated Scalability techniques based on content information
CN101313579B (zh) 2005-09-29 2010-11-03 意大利电信股份公司 可伸缩视频编码方法
EP1949702A2 (en) 2005-10-12 2008-07-30 Thomson Licensing Methods and apparatus for weighted prediction in scalable video encoding and decoding
WO2007047736A2 (en) 2005-10-19 2007-04-26 Thomson Licensing Multi-view video coding using scalable video coding
KR100763196B1 (ko) 2005-10-19 2007-10-04 삼성전자주식회사 어떤 계층의 플래그를 계층간의 연관성을 이용하여부호화하는 방법, 상기 부호화된 플래그를 복호화하는방법, 및 장치
KR100873636B1 (ko) 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
CN101129063B (zh) 2005-11-18 2010-05-19 索尼株式会社 编码设备和方法、解码设备和方法以及传输系统
KR100717055B1 (ko) 2005-11-18 2007-05-10 삼성전자주식회사 Cabac 복호기에서 복수의 이진 값들을 파이프라인방식에 의하여 복호화하는 방법 및 이를 위한 복호화 장치
GB0600141D0 (en) 2006-01-05 2006-02-15 British Broadcasting Corp Scalable coding of video signals
EP1969853A1 (en) 2006-01-05 2008-09-17 Thomson Licensing Inter-layer motion prediction method
KR20070074453A (ko) 2006-01-09 2007-07-12 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
KR100904442B1 (ko) 2006-01-09 2009-06-24 엘지전자 주식회사 영상 신호의 레이어 간 예측 방법
US8315308B2 (en) 2006-01-11 2012-11-20 Qualcomm Incorporated Video coding with fine granularity spatial scalability
US8861585B2 (en) 2006-01-20 2014-10-14 Qualcomm Incorporated Method and apparatus for error resilience algorithms in wireless video communication
CA2681668C (en) 2006-03-23 2014-04-01 Michael S. Singer Compositions comprising prostaglandin f2-alpha analogs and methods for reducing body fat
US7929608B2 (en) 2006-03-28 2011-04-19 Sony Corporation Method of reducing computations in intra-prediction and mode decision processes in a digital video encoder
GB2449036B (en) 2006-03-31 2011-08-24 Intel Corp Layered decoder and method for performing layered decoding
US7916934B2 (en) 2006-04-04 2011-03-29 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring, encoding, decoding and displaying 3D light fields
CN101052120A (zh) 2006-04-06 2007-10-10 丁宜良 用于数字广播节目的复合式播放系统
US8461082B2 (en) 2006-06-14 2013-06-11 Eureka Agresearch Pty Ltd Herbicidal composition and method for removing unwanted foliage
CN101047733B (zh) * 2006-06-16 2010-09-29 华为技术有限公司 短信处理方法以及装置
EP2047687B1 (en) 2006-08-02 2018-05-16 Thomson Licensing DTV Adaptive geometric partitioning for video encoding
US20080086545A1 (en) 2006-08-16 2008-04-10 Motorola, Inc. Network configuration using configuration parameter inheritance
WO2008027192A2 (en) * 2006-08-25 2008-03-06 Thomson Licensing Methods and apparatus for reduced resolution partitioning
US8428144B2 (en) 2006-09-07 2013-04-23 Lg Electronics Inc. Method and apparatus for decoding/encoding of a video signal
CN100471275C (zh) 2006-09-08 2009-03-18 清华大学 用于h.264/avc编码器的运动估计方法
CN100486336C (zh) 2006-09-21 2009-05-06 上海大学 基于h.264压缩域运动对象实时分割方法
US7965896B2 (en) 2006-10-12 2011-06-21 Kabushiki Kaisha Toshiba Method and apparatus for encoding image
US9014280B2 (en) 2006-10-13 2015-04-21 Qualcomm Incorporated Video coding with adaptive filtering for motion compensated prediction
JP2008097498A (ja) 2006-10-16 2008-04-24 Olympus Corp プロセッシング・エレメント、コントロール・ユニット、及びこれらを備える処理システム、分散処理方法
KR20080034417A (ko) 2006-10-16 2008-04-21 한국전자통신연구원 개선된 ar-fgs 및 fgs 모션 리파인먼트 기법을적용하는 svc 부호화기, 복호화기 및 그곳에서의 부호화및 복호화 방법
US20080095238A1 (en) 2006-10-18 2008-04-24 Apple Inc. Scalable video coding with filtering of lower layers
US7775002B2 (en) 2006-11-10 2010-08-17 John Puchniak Portable hurricane and security window barrier
CN101401430B (zh) 2006-11-17 2012-02-29 Lg电子株式会社 用于解码/编码视频信号的方法及装置
CN1976488A (zh) 2006-12-01 2007-06-06 陈锋 基于第三代移动通信网络的汽车防盗系统
EP1933564A1 (en) 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding video data using adaptive prediction order for spatial and bit depth prediction
JP4999864B2 (ja) 2006-12-28 2012-08-15 日本電信電話株式会社 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記憶媒体
EP2106666B1 (en) 2007-01-08 2019-06-12 Nokia Technologies Oy Improved inter-layer prediction for extended spatial scalability in video coding
CN101222641B (zh) 2007-01-11 2011-08-24 华为技术有限公司 帧内预测编解码方法及其装置
EP2105025B1 (en) 2007-01-11 2021-04-07 InterDigital VC Holdings, Inc. Methods and apparatus for using syntax for the coded_block_flag syntax element and the coded_block_pattern syntax element for the cavlc 4:4:4 intra, high 4:4:4 intra, and high 4:4:4 predictive profiles in mpeg-4 avc high level coding
US8718139B2 (en) 2007-01-12 2014-05-06 Mitsubishi Electric Corporation Image decoding device and image decoding method
JP5026092B2 (ja) 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
JP2008193627A (ja) 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
CN101018333A (zh) 2007-02-09 2007-08-15 上海大学 空域可分级信噪比精细可分级视频编码方法
JP2010135863A (ja) 2007-03-28 2010-06-17 Toshiba Corp 画像符号化方法及び装置
WO2008127597A2 (en) 2007-04-12 2008-10-23 Thomson Licensing Method and apparatus for context dependent merging for skip-direct modes for video encoding and decoding
US20100202512A1 (en) 2007-04-16 2010-08-12 Hae-Chul Choi Color video scalability encoding and decoding method and device thereof
TW200845723A (en) 2007-04-23 2008-11-16 Thomson Licensing Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal
US20090165041A1 (en) 2007-12-21 2009-06-25 Penberthy John S System and Method for Providing Interactive Content with Video Content
CN100515087C (zh) * 2007-05-30 2009-07-15 威盛电子股份有限公司 决定二相邻的宏区块是否位于相同条带区域的方法和装置
KR100906243B1 (ko) 2007-06-04 2009-07-07 전자부품연구원 Rgb 색 공간 신호의 영상 부호화 방법
CN100496129C (zh) 2007-06-05 2009-06-03 南京大学 基于h.264多路视频转码复用的方法
CN101321283B (zh) 2007-06-10 2010-04-07 华为技术有限公司 兼容不同大小块变换的编解码方法及编解码器
BRPI0810517A2 (pt) 2007-06-12 2014-10-21 Thomson Licensing Métodos e aparelho suportando estrutura de sintaxe de vídeo de multipasso para dados de seção
JP2008311781A (ja) 2007-06-12 2008-12-25 Ntt Docomo Inc 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム及び動画像復号化プログラム
CN101325714B (zh) 2007-06-13 2010-10-27 华为技术有限公司 变换数据处理方法和装置以及编码、解码方法和装置
JP4551948B2 (ja) 2007-06-13 2010-09-29 シャープ株式会社 線状光源装置、面発光装置、面状光源装置、および、液晶表示装置
WO2008154041A1 (en) 2007-06-14 2008-12-18 Thomson Licensing Modifying a coded bitstream
US8488668B2 (en) 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
US8085852B2 (en) 2007-06-26 2011-12-27 Mitsubishi Electric Research Laboratories, Inc. Inverse tone mapping for bit-depth scalable image coding
US20090003449A1 (en) 2007-06-28 2009-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
CN100534186C (zh) 2007-07-05 2009-08-26 西安电子科技大学 基于码率预分配的jpeg2000自适应率控制系统及方法
US8458612B2 (en) 2007-07-29 2013-06-04 Hewlett-Packard Development Company, L.P. Application management framework for web applications
CN101119493B (zh) * 2007-08-30 2010-12-01 威盛电子股份有限公司 区块式数字编码图像的译码方法及装置
KR20090030681A (ko) 2007-09-20 2009-03-25 삼성전자주식회사 영상처리장치, 디스플레이장치, 디스플레이 시스템 및 그제어방법
JP4461165B2 (ja) 2007-09-26 2010-05-12 株式会社東芝 画像処理装置、方法およびプログラム
US8374446B2 (en) * 2007-09-28 2013-02-12 Vsevolod Yurievich Mokrushin Encoding and decoding of digital signals based on compression of hierarchical pyramid
KR101403343B1 (ko) * 2007-10-04 2014-06-09 삼성전자주식회사 부화소 움직임 추정을 이용한 인터 예측 부호화, 복호화방법 및 장치
BRPI0818344A2 (pt) 2007-10-12 2015-04-22 Thomson Licensing Métodos e aparelhos para codificação e decodificação de vídeo de partições de modo bi-preditivo geometricamente particionadas
US7777654B2 (en) 2007-10-16 2010-08-17 Industrial Technology Research Institute System and method for context-based adaptive binary arithematic encoding and decoding
WO2009051719A2 (en) * 2007-10-16 2009-04-23 Thomson Licensing Methods and apparatus for video encoding and decoding geometically partitioned super blocks
CN101676744B (zh) * 2007-10-31 2012-07-11 北京航空航天大学 一种复杂背景低信噪比下弱小目标高精度跟踪方法
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
US8553781B2 (en) 2007-12-07 2013-10-08 Thomson Licensing Methods and apparatus for decoded picture buffer (DPB) management in single loop decoding for multi-view video
US8540158B2 (en) 2007-12-12 2013-09-24 Yiwu Lei Document verification using dynamic document identification framework
US20090154567A1 (en) 2007-12-13 2009-06-18 Shaw-Min Lei In-loop fidelity enhancement for video compression
US8126054B2 (en) 2008-01-09 2012-02-28 Motorola Mobility, Inc. Method and apparatus for highly scalable intraframe video coding
KR20100105877A (ko) 2008-01-11 2010-09-30 톰슨 라이센싱 비디오 및 깊이 코딩
US8155184B2 (en) 2008-01-16 2012-04-10 Sony Corporation Video coding system using texture analysis and synthesis in a scalable coding framework
EP2245596B1 (en) 2008-01-21 2017-07-12 Telefonaktiebolaget LM Ericsson (publ) Prediction-based image processing
CN101919254B (zh) 2008-01-21 2013-01-23 艾利森电话股份有限公司 基于预测的图像处理
KR101291196B1 (ko) 2008-01-25 2013-07-31 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8711948B2 (en) 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
US8179974B2 (en) 2008-05-02 2012-05-15 Microsoft Corporation Multi-level representation of reordered transform coefficients
US20100220469A1 (en) 2008-05-23 2010-09-02 Altair Engineering, Inc. D-shaped cross section l.e.d. based light
TWI373959B (en) * 2008-06-09 2012-10-01 Kun Shan University Of Technology Wavelet codec with a function of adjustable image quality
KR101517768B1 (ko) * 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
CN101632763A (zh) 2008-07-24 2010-01-27 夏范音 一种固血丸
KR20100018810A (ko) 2008-08-07 2010-02-18 전자부품연구원 초고화질 영상 부호화, 복호화 방법 및 장치 및 컴퓨터로판독가능한 기록매체
US8406307B2 (en) 2008-08-22 2013-03-26 Microsoft Corporation Entropy coding/decoding of hierarchically organized data
EP2161936A1 (en) 2008-09-04 2010-03-10 Panasonic Corporation Locally adaptive filters for video coding controlled by local correlation data
US8750379B2 (en) 2008-09-11 2014-06-10 General Instrument Corporation Method and apparatus for complexity-scalable motion estimation
JP5422168B2 (ja) 2008-09-29 2014-02-19 株式会社日立製作所 動画像符号化方法および動画像復号化方法
US8503527B2 (en) * 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
US8619856B2 (en) * 2008-10-03 2013-12-31 Qualcomm Incorporated Video coding with large macroblocks
US8634456B2 (en) 2008-10-03 2014-01-21 Qualcomm Incorporated Video coding with large macroblocks
CN101404774B (zh) 2008-11-13 2010-06-23 四川虹微技术有限公司 运动搜索中宏块划分模式的选择方法
JP5394212B2 (ja) 2008-12-19 2014-01-22 トムソン ライセンシング データを挿入する方法、挿入されたデータを読み出す方法
JP5001964B2 (ja) 2009-02-18 2012-08-15 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、方法およびプログラム、並びに、画像復号装置、方法およびプログラム
CN101493890B (zh) 2009-02-26 2011-05-11 上海交通大学 基于特征的动态视觉注意区域提取方法
WO2010131903A2 (en) 2009-05-12 2010-11-18 Lg Electronics Inc. Method and apparatus for processing a video signal
US8810562B2 (en) 2009-05-19 2014-08-19 Advanced Micro Devices, Inc. Hierarchical lossless compression
US8306355B2 (en) 2009-07-13 2012-11-06 Sharp Laboratories Of America, Inc. Methods and systems for reducing compression artifacts
WO2011011542A1 (en) * 2009-07-21 2011-01-27 Integrated Device Technology, Inc. A method and system for detection and enhancement of video images
KR101624649B1 (ko) 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101456498B1 (ko) * 2009-08-14 2014-10-31 삼성전자주식회사 계층적 부호화 단위의 스캔 순서를 고려한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101452860B1 (ko) 2009-08-17 2014-10-23 삼성전자주식회사 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치
CN104602013B (zh) * 2009-10-01 2017-10-31 Sk电信有限公司 视频编码装置和方法
KR101457418B1 (ko) * 2009-10-23 2014-11-04 삼성전자주식회사 계층적 부호화 단위의 크기에 따른 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
US8594200B2 (en) 2009-11-11 2013-11-26 Mediatek Inc. Method of storing motion vector information and video decoding apparatus
JP5475409B2 (ja) 2009-11-20 2014-04-16 三菱電機株式会社 動画像符号化装置および動画像符号化方法
WO2011063397A1 (en) 2009-11-23 2011-05-26 General Instrument Corporation Depth coding as an additional channel to video sequence
US8315310B2 (en) 2010-01-08 2012-11-20 Research In Motion Limited Method and device for motion vector prediction in video transcoding using full resolution residuals
US20110170608A1 (en) 2010-01-08 2011-07-14 Xun Shi Method and device for video transcoding using quad-tree based mode selection
US20120300850A1 (en) 2010-02-02 2012-11-29 Alex Chungku Yie Image encoding/decoding apparatus and method
KR20110135471A (ko) * 2010-06-11 2011-12-19 (주)휴맥스 블록 병합을 이용한 영상 부호화/복호화 장치 및 방법
US20110194613A1 (en) 2010-02-11 2011-08-11 Qualcomm Incorporated Video coding with large macroblocks
KR101847072B1 (ko) * 2010-04-05 2018-04-09 삼성전자주식회사 영상 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR101750046B1 (ko) * 2010-04-05 2017-06-22 삼성전자주식회사 트리 구조에 따른 부호화 단위에 기반한 인루프 필터링을 수반하는 비디오 부호화 방법과 그 장치 및 복호화 방법과 그 장치
KR101529992B1 (ko) * 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
US20110249743A1 (en) 2010-04-09 2011-10-13 Jie Zhao Super-block for high performance video coding
US8942282B2 (en) 2010-04-12 2015-01-27 Qualcomm Incorporated Variable length coding of coded block pattern (CBP) in video compression
CN106231328B (zh) 2010-04-13 2020-06-12 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
LT3697089T (lt) 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
CN106028045B (zh) 2010-04-13 2019-06-25 Ge视频压缩有限责任公司 解码数据流的方法、生成数据流的方法及其解码器
CN105872562B (zh) 2010-04-13 2019-05-17 Ge视频压缩有限责任公司 跨平面预测
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
KR102480988B1 (ko) 2010-04-13 2022-12-26 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
US9532059B2 (en) 2010-10-05 2016-12-27 Google Technology Holdings LLC Method and apparatus for spatial scalability for video coding
KR102647083B1 (ko) 2010-10-08 2024-03-14 지이 비디오 컴프레션, 엘엘씨 블록 분할 및 블록 병합을 지원하는 픽처 코딩
JP6258704B2 (ja) 2010-11-04 2018-01-10 ジーイー ビデオ コンプレッション エルエルシー ブロック統合およびスキップモードをサポートする画像符号化および画像復号化
US20120170648A1 (en) 2011-01-05 2012-07-05 Qualcomm Incorporated Frame splitting in video coding
CN103119944B (zh) 2011-05-20 2017-04-12 太阳专利托管公司 用于使用色彩平面间预测对视频进行编码和解码的方法和装置
MY170940A (en) 2011-06-16 2019-09-19 Ge Video Compression Llc Entropy coding of motion vector differences
WO2013170198A2 (en) 2012-05-10 2013-11-14 Drawbridge, Inc. System and method for determining related digital identities
US20150229957A1 (en) 2012-09-24 2015-08-13 Qualcomm Incorporated Depth map coding
KR102021028B1 (ko) 2012-12-04 2019-09-16 삼성디스플레이 주식회사 유기 발광 표시 장치
ES2665908T3 (es) 2013-04-08 2018-04-30 Ge Video Compression, Llc Predicción inter-componente
US9264728B2 (en) 2014-01-10 2016-02-16 Sony Corporation Intra-plane and inter-plane predictive method for Bayer image coding
US9783149B2 (en) 2014-07-22 2017-10-10 Autoliv Development Ab Side airbag device
US10820007B2 (en) 2015-01-21 2020-10-27 Samsung Electronics Co., Ltd. Method and apparatus for decoding inter-layer video, and method and apparatus for encoding inter-layer video
CN106325631B (zh) 2015-07-10 2023-03-07 宸鸿科技(厦门)有限公司 一种具有压力侦测的触控显示模组及其驱动方法
WO2018124957A1 (en) 2016-12-30 2018-07-05 Telefonaktiebolaget Lm Ericsson (Publ) Decoded picture buffer management for handling cross-picture data prediction
CN113597760A (zh) 2019-01-02 2021-11-02 北京字节跳动网络技术有限公司 视频处理的方法
WO2020216175A1 (en) 2019-04-20 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Signaling of syntax elements for joint coding of chrominance residuals
CN117499625A (zh) 2019-09-01 2024-02-02 北京字节跳动网络技术有限公司 视频编解码中预测权重的对准
CN115606184A (zh) 2020-04-01 2023-01-13 抖音视界有限公司(Cn) 对量化参数增量的信令通知的控制
US20220103847A1 (en) 2020-09-29 2022-03-31 Lemon Inc. Dependent random access point indication in video bitstreams

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6269192B1 (en) * 1997-07-11 2001-07-31 Sarnoff Corporation Apparatus and method for multiscale zerotree entropy encoding
US20040028049A1 (en) * 2000-10-06 2004-02-12 Wan Ernest Yiu Cheong XML encoding scheme
CN100545870C (zh) * 2001-11-27 2009-09-30 三星电子株式会社 基于深度图像表示三维物体的装置和方法
TW200907860A (en) * 2007-08-03 2009-02-16 Via Tech Inc Method and apparatus for block-based digital encoded picture
US20100086031A1 (en) * 2008-10-03 2010-04-08 Qualcomm Incorporated Video coding with large macroblocks

Also Published As

Publication number Publication date
CN106231333B (zh) 2020-06-19
EP3955579B1 (en) 2023-06-07
CN102893608B (zh) 2016-09-14
KR20200117064A (ko) 2020-10-13
TW201717163A (zh) 2017-05-16
TWI726635B (zh) 2021-05-01
US10805645B2 (en) 2020-10-13
PT3703377T (pt) 2022-01-28
ES2549734T3 (es) 2015-11-02
CN106231334B (zh) 2019-07-05
KR101747201B1 (ko) 2017-06-27
ES2904650T3 (es) 2022-04-05
CN106231326A (zh) 2016-12-14
EP2559245B1 (en) 2015-08-12
US10764608B2 (en) 2020-09-01
TWI545526B (zh) 2016-08-11
KR102129404B1 (ko) 2020-07-02
CN106231335A (zh) 2016-12-14
EP2947884B1 (en) 2019-07-24
DK3621306T3 (da) 2022-03-07
KR101704668B1 (ko) 2017-02-08
TWI775719B (zh) 2022-08-21
US10721495B2 (en) 2020-07-21
PL3955579T3 (pl) 2023-10-16
JP2015149737A (ja) 2015-08-20
CN106231324B (zh) 2019-11-05
PL2559245T3 (pl) 2015-11-30
TWI764752B (zh) 2022-05-11
TW202011355A (zh) 2020-03-16
TW202123175A (zh) 2021-06-16
PT3955579T (pt) 2023-08-31
US20190089992A1 (en) 2019-03-21
US11856240B1 (en) 2023-12-26
EP4228269A1 (en) 2023-08-16
CN106231330A (zh) 2016-12-14
CN106231333A (zh) 2016-12-14
CN106231331B (zh) 2019-12-13
US20170134760A1 (en) 2017-05-11
SI3621306T1 (sl) 2022-04-29
SI3703377T1 (sl) 2022-04-29
CN102893608A (zh) 2013-01-23
CN106231326B (zh) 2020-03-03
BR122020007668B1 (pt) 2022-08-23
KR20200016997A (ko) 2020-02-17
HUE057597T2 (hu) 2022-05-28
CN105120287A (zh) 2015-12-02
TWI801315B (zh) 2023-05-01
CN105120287B (zh) 2019-05-17
CN106231336A (zh) 2016-12-14
CN106231327B (zh) 2020-04-21
US20240022768A1 (en) 2024-01-18
KR102451474B1 (ko) 2022-10-06
TW201727581A (zh) 2017-08-01
EP3958573B1 (en) 2023-06-07
US11546642B2 (en) 2023-01-03
EP3621306A1 (en) 2020-03-11
CN106231338B (zh) 2019-08-27
US20200252658A1 (en) 2020-08-06
PT2947884T (pt) 2019-10-31
CN106231336B (zh) 2020-06-12
KR101872281B1 (ko) 2018-06-28
EP2947884A1 (en) 2015-11-25
CN106231328A (zh) 2016-12-14
KR20230051624A (ko) 2023-04-18
PL3958573T3 (pl) 2023-10-16
LT3958573T (lt) 2023-09-25
LT3703377T (lt) 2022-02-10
ES2907203T3 (es) 2022-04-22
CN106358045B (zh) 2019-07-19
EP3703377B1 (en) 2021-11-24
BR122020007669B1 (pt) 2022-07-12
US10681390B2 (en) 2020-06-09
CN106231335B (zh) 2019-07-02
KR20140130223A (ko) 2014-11-07
PL3703377T3 (pl) 2022-03-07
EP2559245A1 (en) 2013-02-20
KR20230053700A (ko) 2023-04-21
DK2947884T3 (da) 2019-10-28
SI3955579T1 (sl) 2023-10-30
US20190306539A1 (en) 2019-10-03
DK3703377T3 (da) 2022-02-28
US10771822B2 (en) 2020-09-08
CN105120288A (zh) 2015-12-02
LT3955579T (lt) 2023-09-11
JP6150832B2 (ja) 2017-06-21
CN106231325B (zh) 2020-02-04
CN106231329A (zh) 2016-12-14
TWI578273B (zh) 2017-04-11
US20230089318A1 (en) 2023-03-23
TWI553593B (zh) 2016-10-11
US20210211743A1 (en) 2021-07-08
WO2011128269A1 (en) 2011-10-20
US10687086B2 (en) 2020-06-16
EP3621306B1 (en) 2021-12-01
HUE057200T2 (hu) 2022-04-28
KR20150065913A (ko) 2015-06-15
SI3958573T1 (sl) 2023-10-30
US20160360239A1 (en) 2016-12-08
TW202234348A (zh) 2022-09-01
US9596488B2 (en) 2017-03-14
US10893301B2 (en) 2021-01-12
FI3958573T3 (fi) 2023-08-23
HK1218033A1 (zh) 2017-01-27
CN106231332A (zh) 2016-12-14
KR20200118231A (ko) 2020-10-14
JP2013526143A (ja) 2013-06-20
CN106231338A (zh) 2016-12-14
RS63034B1 (sr) 2022-04-29
TW201211942A (en) 2012-03-16
KR20190077603A (ko) 2019-07-03
HUE025960T2 (en) 2016-04-28
US20190394497A1 (en) 2019-12-26
HUE062603T2 (hu) 2023-11-28
CN106231331A (zh) 2016-12-14
EP3958573A1 (en) 2022-02-23
US11910029B2 (en) 2024-02-20
US9591335B2 (en) 2017-03-07
FI3955579T3 (fi) 2023-08-16
US10856013B2 (en) 2020-12-01
KR102592133B1 (ko) 2023-10-20
HUE063343T2 (hu) 2024-01-28
CN106231328B (zh) 2020-06-12
KR20130027504A (ko) 2013-03-15
KR20220138020A (ko) 2022-10-12
US10250913B2 (en) 2019-04-02
TWI733566B (zh) 2021-07-11
US11736738B2 (en) 2023-08-22
CN106358045A (zh) 2017-01-25
TWI705418B (zh) 2020-09-21
US20190037245A1 (en) 2019-01-31
LT3621306T (lt) 2022-03-10
EP3955579A1 (en) 2022-02-16
PL3621306T3 (pl) 2022-04-04
ES2953668T3 (es) 2023-11-15
PL2947884T3 (pl) 2020-01-31
US20200366942A1 (en) 2020-11-19
KR20180072881A (ko) 2018-06-29
CN106231323B (zh) 2020-07-28
KR102520192B1 (ko) 2023-04-11
US11778241B2 (en) 2023-10-03
TW202139139A (zh) 2021-10-16
RS64605B1 (sr) 2023-10-31
CN105120288B (zh) 2019-05-17
PT3958573T (pt) 2023-09-06
TW202304206A (zh) 2023-01-16
TW202025786A (zh) 2020-07-01
CN106231327A (zh) 2016-12-14
BR112012026383A2 (pt) 2016-08-02
US20190045227A1 (en) 2019-02-07
ES2953850T3 (es) 2023-11-16
RS63059B1 (sr) 2022-04-29
TW202335501A (zh) 2023-09-01
DK3955579T3 (da) 2023-08-21
US20130039422A1 (en) 2013-02-14
KR101994900B1 (ko) 2019-06-28
KR102311520B1 (ko) 2021-10-13
DK2559245T3 (en) 2015-08-24
PT3621306T (pt) 2022-03-02
RS64606B1 (sr) 2023-10-31
TWI664607B (zh) 2019-07-01
CN106231325A (zh) 2016-12-14
KR101598510B1 (ko) 2016-03-02
TW202139138A (zh) 2021-10-16
CN106231337B (zh) 2020-06-19
US20170134761A1 (en) 2017-05-11
CN106231324A (zh) 2016-12-14
PT2559245E (pt) 2015-09-24
CN106231330B (zh) 2019-07-19
KR102245669B1 (ko) 2021-04-28
CN106231334A (zh) 2016-12-14
EP3703377A1 (en) 2020-09-02
CN106231332B (zh) 2020-04-14
CN106231329B (zh) 2019-07-05
CN106231323A (zh) 2016-12-14
JP5856143B2 (ja) 2016-02-09
KR20170070256A (ko) 2017-06-21
TW201541411A (zh) 2015-11-01
US20200007897A1 (en) 2020-01-02
US11102518B2 (en) 2021-08-24
CN106231337A (zh) 2016-12-14
ES2752227T3 (es) 2020-04-03
KR20210123430A (ko) 2021-10-13
DK3958573T3 (da) 2023-08-28
US20200169761A1 (en) 2020-05-28
US20160366448A1 (en) 2016-12-15
KR102163680B1 (ko) 2020-10-08
US10708628B2 (en) 2020-07-07
HUE045693T2 (hu) 2020-01-28

Similar Documents

Publication Publication Date Title
TWI746414B (zh) 解碼器、編碼器、及相關聯方法與資料串流
TWI605706B (zh) 樣本區域合倂技術
TWI500273B (zh) 在樣本陣列多元樹細分中之繼承技術
CN106412607B (zh) 用于解码、生成、存储数据流和传输视频的方法