TWI425836B - 預測運動與紋理資料的方法 - Google Patents

預測運動與紋理資料的方法 Download PDF

Info

Publication number
TWI425836B
TWI425836B TW095144569A TW95144569A TWI425836B TW I425836 B TWI425836 B TW I425836B TW 095144569 A TW095144569 A TW 095144569A TW 95144569 A TW95144569 A TW 95144569A TW I425836 B TWI425836 B TW I425836B
Authority
TW
Taiwan
Prior art keywords
image
resolution image
low
resolution
field
Prior art date
Application number
TW095144569A
Other languages
English (en)
Other versions
TW200803519A (en
Inventor
Nicolas Burdin
Gwenaelle Marquant
Pierre Dagois
Original Assignee
Thomson Licensing
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing filed Critical Thomson Licensing
Publication of TW200803519A publication Critical patent/TW200803519A/zh
Application granted granted Critical
Publication of TWI425836B publication Critical patent/TWI425836B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

預測運動與紋理資料的方法
本發明係關於一種為了一高解析度交錯式序列之圖像而從與一低解析度漸進式序列之圖像相關的運動資料和在適當時之紋理資料產生至少一運動預測器以及在適當時之紋理預測器的方法。
具有空間可調性的階層式編碼方法係為已知。可調性係指能夠交錯式地處理資訊以使其能夠於多種解析度與/或質量等級下解碼的能力。更具體的是，經由這種類型的編碼方法所產生之一資料流可被分為複數層，特別地為一基層與一或多個增強層。這些方法係用以使一單一資料流適應可變動的傳輸條件(如頻寬、誤差比例等)、客戶的期待及其接收器(中央處理器、顯示器的規格等)變化的能力。在空間可調性的具體例子中，可個別地自該資料流中對應高解析度圖像的部份，對該資料流中對應序列之低解析度圖像的部份進行解碼。另一方面，可僅由資料流中對應序列之低解析度圖像的部份，對資料流中對應序列之高解析度圖像的部份進行解碼。
具有空間可調性的階層式編碼可相對於低解析度圖像，對被稱為基層的一第一資料部份，以及從此基層，相對於高解析度圖像，對被稱為增強層的一第二資料部份進行編碼。通常，高解析度圖像的每一巨集區塊係根據一習知的預測模式(例如：雙向預測模式、直接模式、向前預測模式等)，或更確切地係根據一層間預測模式來進行時間預測。在後面的例子中，運動資料(例如：巨集區塊至區塊的分割、可能的運動向量與參考圖像索引)以及在適當時與高解析度圖像之一像素區塊相關的紋理資料係可自與一低解析度圖像之像素區塊相關的運動資料、紋理資料分別推導或繼承而來。然而，已 知的方法並不允許在低解析度序列為漸進式或高解析度序列為交錯式的例子中產生這樣的預設器。
本發明之目的在於克服習知技術中之至少一缺點。
本發明有關於一種用以針對稱為高解析度序列之高解析度交錯式圖像之一序列之一圖像的至少一像素區塊，而從與稱為低解析度序列之低解析度漸進式圖像之一序列之圖像相關的運動資料中產生至少一運動預測器的方法。每一交錯式圖像包含交錯之一頂圖場與一底圖場。每一漸進式圖像與一交錯式圖像之每一圖場具有與其相關之一時間參考，且上述方法尤其是在於：-若高解析度序列之時間頻率係等於低解析度序列之時間頻率，可針對上述至少一像素區塊而從下列其中一者產生至少一運動預測器：˙從與和該高解析度圖像之該頂圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的運動資料；以及/或˙從與和該高解析度圖像之該底圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的運動資料；-若高解析度序列之時間頻率係等於兩倍之低解析度序列之時間頻率，針對上述至少一像素區塊，而從與和該高解析度圖像之該頂圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的運動資料產生至少一運動預測器。
有利地，若高解析度序列之時間頻率係等於低解析度序列之時間頻率，上述至少一運動預測器係藉由以該圖像之水平方向上之一水平層間比與在該圖像之垂直方向上之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運 動資料進行次取樣而產生，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場具有相同的時間參考。
根據另一實施例，若高解析度序列之時間頻率係等於低解析度序列之時間頻率，上述至少一運動預測器係藉由以該圖像之水平方向上之一水平層間比與在該圖像之垂直方向上之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運動資料進行次取樣而產生，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該底圖場具有相同的時間參考。
根據另一實施例，若高解析度序列之時間頻率係等於兩倍之低解析度序列之時間頻率，上述至少一運動預測器係藉由以該圖像之水平方向上之一水平層間比與在該圖像之垂直方向上之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運動資料進行次取樣而產生，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場具有相同的時間參考。
根據本發明之方法也可：-若高解析度序列之時間頻率係等於低解析度序列之時間頻率，針對上述至少一像素區塊而從下列其中一者產生至少一紋理預測器：˙從與和該高解析度圖像之該頂圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料；以及/或˙從與和該高解析度圖像之該底圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料；以及/或˙從與和該高解析度圖像之該頂圖場或該底圖場中一者具有相同時間參考之該低解析度圖像之每一該至少一像素區塊相關的紋理資料；以及 -若高解析度序列之時間頻率係等於兩倍之低解析度序列之時間頻率，針對上述至少一像素區塊，而從與和該高解析度圖像之該頂圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料產生至少一紋理預測器。
較佳地，上述與低解析度圖像相關的運動資料包含複數個運動向量。
有利地，上述方法係藉由一自低解析度圖像對高解析度圖像進行編碼的方法以及一自低解析度圖像對高解析度圖像進行解碼的方法來使用。
較佳地，根據MPEG-4 AVC標準對低解析度圖像進行編碼。
本發明係關於一種層內預設方法，其在於針對高解析度交錯式圖像之一有序序列之的圖像(稱為高解析度序列)而從低解析度漸進式圖像之一有序序列的圖像(稱為低解析度序列)產生運動預測器以及在適當時產生紋理預測器。序列被分割為圖像群組(group of picture,GOP)。每一高解析度圖像包含有交錯之一頂圖場與一底圖場。在第1圖與第2圖中，索引為k的交錯式圖像係由標號為kT之一頂圖場與標號為kB之一底圖場所組成以及一漸進式圖像係由其索引k所標號。時間參考係與一漸進式序列的每一圖像以及一交錯式序列的每一圖場相關。而具有相同時間參考之一高解析度圖像之一圖場(稱為高解析度圖場)以及一低解析度圖像之一圖場係在垂直方向上重疊。低解析度圖像(亦標號為LR圖像)具有一寬度w(w代表像素或列的)與一高度2h(2h代表像素或行的數目，且其意味著2乘以h)。高解析度圖像(亦標號為HR圖像)具有一寬度W(W代表像素或列的數目)與一高度2H(2H代表像素或行的數目，且其意味著2乘以H)。一高解析度圖像之每一 圖場具有一寬度W與一高度H。在所述的實施例中，交錯式圖像可以圖場圖像模式進行編碼，亦即每一圖場被編碼為一單獨的圖像，或者交錯式圖像甚至可以以圖框圖像模式進行編碼，亦即兩圖場係被一起編碼。圖像中的行係由0開始編號而因此第一行為一偶數行，而第二行(編號為1)為一奇數行。
因此，本發明在於針對高解析度序列之圖像或針對後者之至少一像素區塊，產生至少一運動預測器以及在適當時產生至少一紋理預測器。與一高解析度圖像或一高解析度圖像之至少一像素區塊相關的一紋理預測器為一與其每一像素紋理資料(例如：一亮度值，以及在適合時之一色度值)相關的圖像或預測區塊，且該紋理資料係根據一對紋理進行次取樣的方法而從與至少一圖像(或圖場)或一低解析度圖像之至少一像素區塊(或一圖場之至少一像素區塊)相關的紋理資料來產生。其中，上述對紋理進行次取樣的方法例如應用於紋理的ESS方法(ESS係指擴充空間可調性)係描述於J.Reichel,H.Schwarz,M.Wien之標題名為"Joint Scalable Video Model JSVM3 Annex-S"，且標號為JVT-P202之ISO/IEC MPEG & ITU-T VCEG文件的S.8.3.6.4與S.8.5.14.2章節中。以下將此文件標號為JSVM3。與一高解析度圖像相關或與一高解析度圖像之至少一像素區塊相關的一運動預測器係定義為與其運動資料(例如：一種分割、使之得以辨別運動向量所指之參考圖像的可能參考圖像索引)相關的一預測圖像或一預測區塊。運動預測器係根據一運動次取樣方法而從與至少一圖像(或圖場)或一低解析度圖像之至少一像素區塊(或一圖場之至少一像素區塊)相關的運動資料來產生，且上述運動次採樣方法例如應用於運動的ESS方法係描述於JSVM3之S.8.4.1.6.3章節中，或例如描述如下之修改的ESS方法，其係延伸自應用於運動的ESS方法。上述修改的ESS方法(於第3圖中標 號為MESS)係具體地使其得以處理高與/或低解析度交錯式序列。更具體地來說，上述修改的ESS方法使其得以處理高解析度圖像之高度或寬度係少於低解析度圖像之高度或寬度的情況。此例係描繪於第2圖中，圖中一高解析度圖像之頂圖層或底圖層的高度H(H=540)係少於一低解析度圖框圖像的高度2h(2h=720)。再者，當根據本發明之預測方法係由一階層式編碼或解碼方法來使用時，上述修改的ESS方法可有利地避免產生具有無效運動向量(例如：指向不可用之參考圖像的向量)的運動預測器。舉例來說，請參考第2圖，在時間上，低解析度圖像6可參考較早進行之低解析度圖像5。然而，高解析度圖場2B無法提供參考給高解析度圖場3T，其在時間上當圖場2B進行時已為不可用。
根據修改的ESS方法，中間預測運動預測器係藉由在圖像之垂直方向、水平方向或兩個方向上對與低解析度圖像相關的運動資料，更具體地，對與低解析度圖像之每一巨集區塊相關的運動資料進行係數為2的次取樣而產生。只要該中間預測器的高度大於高解析度圖像的高度，便在圖像之垂直方向上重複上述係數為2的次取樣方法，以及只要該中間預測器的寬度大於高解析度圖像的寬度，便在圖像之水平方向上重複上述係數為2的次取樣方法。次取樣具體地是在於將與像素區塊相關的運動向量的座標除以2。舉例來說，請參考第5圖，基於兩個可被分割為複數個像素區塊之低解析度圖像的巨集區塊MB1或MB2，可產生一中間運動預設器之一巨集區塊MB。至於在一巨集區塊中像素區塊的大小係標示於該巨集區塊上方。舉例來說，在第5圖的第二行中，巨集區塊MB1並未被分割，而巨集區塊MB2係被分割為兩個測量為8個像素乘以16個像素的區塊(記為8 x 16)以及經由這兩個巨集區塊所產生之巨集區塊MB係分割為四個8 x 8的區塊，且其中兩個被分割為4 x 8的區塊。參考圖像的索引在 一巨集區塊MB中8個像素乘以8個像素大小的區塊間變得均勻，並且以與描述於JSVM3中應用在運動的ESS層內預測方法相同的方式刪除在一巨集區塊中的區隔之層內類型的區塊。
藉由應用在圖像之水平方向上具有等於W/wi與在圖像之垂直方向上具有等於2H/2hi之一層間比的ESS方法，從由此種方法所產生之最終中間運動預測器來產生與高解析度圖像相關的運動預測器，其中wi與2hi係分別為所產生之最終的中間運動預設器的寬度與高度。再者，對於每一預測巨集區塊來說，運動向量繼承方法可經修改以使其不產生無效的運動向量，即在時間崩潰過程中指向不可用之圖場或圖框圖像的向量。在此例中，若與一預設巨集區塊MB_pred相關的所有運動向量為無效的，則不對此巨集區塊進行層間運動預設。否則，即至少一向量為有效，可進行應用於運動之ESS預測方法。
根據本發明之方法，如第1圖至第4圖所繪示，係針對一圖像所描述，但其係可應用於圖像的一部份及具體地來說係應用於一像素區塊，例如一巨集區塊。第3圖的左手邊部份繪示了與第1圖中索引為k之高解析度圖像相關之紋理預測器的產生。這些紋理預測器係如下列方式所產生，且在這種情況中低解析度序列之時間頻率等於一半之高解析度序列之時間頻率(例如：低解析度序列為一30Hz且採取CIF格式之漸進式序列，即測量為352像素乘以288像素的尺寸，而高解析度序列為一60Hz且採取SD格式之交錯式序列，即720像素乘以576像素的尺寸)：˙藉由應用在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比的紋理預測ESS方法，而從索引為k之低解析度圖像之紋理資料中產生一尺寸測量為W乘以2H的圖框紋理預 測器30；以及˙針對高解析度圖像之頂圖場，對前述步驟中所產生之圖框紋理預測器進行垂直方向上的次取樣，以產生一尺寸測量為W乘以H的紋理預測器31。
在此具體例子中，並未針對底圖場產生紋理預測器。若對底圖場進行編碼係在頂圖場之前(底圖場優先模式)，則不針對頂圖場產生紋理預測器，而針對高解析度圖像之底圖場係藉由對圖框紋理預測器進行垂直方向上的次取樣(即藉由保留其奇數行)來產生尺寸測量為W乘以H的紋理預測器。
第3圖的右手邊部份繪示了與第2圖中索引為k之高解析度圖像相關之紋理預測器的產生。在此例中低解析度序列之時間頻率與高解析度序列之時間頻率為相同(例如：低解析度序列為一60Hz且採取720p格式之漸進式序列，即測量為1280像素乘以720像素的尺寸，而高解析度序列為一60Hz且採取1080i格式之交錯式序列，即1920像素乘以540像素的尺寸)：˙藉由應用在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比的ESS方法，而從索引為2k之低解析度圖像之紋理資料中產生一尺寸測量為W乘以2H的一第一中間圖框紋理預測器32；˙針對高解析度圖像之頂圖場，對前述步驟中所產生之第一中間圖框紋理預測器進行垂直方向上的次取樣(即藉由保留其偶數行)，以產生一尺寸測量為W乘以H的紋理預測器34；˙藉由應用在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比的ESS方法，而從索引為2k+1之低解析度圖像之紋理資料 中產生一尺寸測量為W乘以2H的一第二中間圖框紋理預測器33；˙針對高解析度圖像之底圖場，對前述步驟中所產生之第二中間圖框紋理預測器進行垂直方向上的次取樣(即藉由保留其奇數行)，以產生一尺寸測量為W乘以H的紋理預測器35；以及˙交錯分別與底圖場與頂圖場相關的紋理預測器以產生一尺寸測量為W乘以2H的一圖框紋理預測器36。
然而，針對目前圖像群組的最後圖像，尺寸測量為W乘以2H的圖框紋理預測器係藉由應用在圖像之水平方向上具有等於1與在圖像之垂直方向上具有等於2之一層間比的ESS方法，而從與高解析度圖像之頂圖場相關的紋理預測器產生而得。由於相對應之低解析度圖像(於第2圖中標號為9)屬於下一個圖像群組，高解析度序列之圖像群組的最後圖像(於第2圖中標號為4B)不具有預測器。
與第1圖中索引為k之高解析度圖像相關之運動預測器係以下列方式產生(如第4圖所示)，且在這種情況中低解析度序列之時間頻率等於一半之高解析度序列之時間頻率：˙針對高解析度圖像之頂圖場，藉由應用如上所述之在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比的修改的ESS方法，而從索引為k之低解析度圖像之運動資料中產生一尺寸測量為W乘以H的運動預測器40；以及˙藉由應用如上所述之在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比的修改的ESS方法，而從索引為k之低解析度圖像之運動資料中產生一尺寸測量為W乘以2H的圖框運動預測器41。
在此具體例子中，並未針對底圖場產生運動預測器。若對底圖場進行編碼係在頂圖場之前(底圖場優先模式)，則不針對頂圖場產生運動預測器，而針對高解析度圖像之底圖場係藉由對圖框紋理預測器進行垂直方向上的次取樣(即藉由保留其奇數行)來產生尺寸測量為W乘以H的運動預測器。
在其他例子中，即低與高解析度序列之時間頻率為相同，第2圖中索引為k之高解析度圖像之運動預測器係按下述方法產生(如第4圖所示)：˙針對高解析度圖像之頂圖場，藉由應用如上所述之在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比之修改的ESS方法，而從索引為2k之低解析度圖像之運動資料中產生一尺寸測量為W乘以H的一運動預測器42；而適時產生之參考圖像索引係除以2；˙針對高解析度圖像之底圖場，，藉由應用如上所述之在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比之修改的ESS方法，而從索引為2k+1之低解析度圖像之運動資料中產生一尺寸測量為W乘以H的一運動預測器43；而適時產生之參考圖像索引係除以2；以及˙藉由應用在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於2H/2h之一層間比之修改的ESS方法，而從索引為2k或2k+1之低解析度圖像之運動資料中產生一尺寸測量為W乘以2H的一圖框運動預測器。
根據一變化例，兩個於第4圖中標號為P1與P2且尺寸測量為W乘以2H的圖框運動預測器係藉由應用在圖像之水平方向上具有等於W/w與在圖像之垂直方向上具有等於 2H/2h之一層間比之修改的ESS方法，而其一者(P1)從索引為2k之低解析度圖像來產生，另一者(P2)係從索引為2k+1之圖像來產生。
根據一變化例，對序列中每一圖像群組之最後圖像並未產生紋理與運動預測器。實際上，對此圖像產生運動與紋理預測器係需對低解析度序列與下一圖像群組之相對應的圖像群組進行解碼與儲存的動作，如第1圖與第2圖所繪示。
若上述方法由一編碼方法來使用，可產生所有運動預測器(紋理預測器)，以根據給定的標準(如速率失真標準)而選擇最適合的一個。若上述方法由一解碼方法來使用，則產生單一運動預測器(單一紋理預測器)，而預測器的類型可於位元流中指定。
當然，本發明並不侷限於上述示例性實施例。具體來說，本領域的技術人員可上述實施例進行任何變化，並將其合併以從其不同優點中獲益。舉例來說，根據本發明之方法可被應用至高解析度圖像的一部份。實際上，其可針對高解析度圖像的像素區塊(如尺寸測量為16像素乘以16像素之巨集區塊)，而從與低解析度圖像之像素區塊相關的運動與/或紋理資料中產生運動與/或紋理預測器。類似地，在優先顯示一交錯式圖像之頂圖場的情況下(頂圖場優先模式)已經介紹了本發明，且本發明可藉由反轉頂圖場與底圖場而直接延伸至優先顯示底圖場的情況(底圖場優先模式)。再者，本發明亦可延伸至複數個高解析度序列的情況(複數個增強層)。再者，本發明可有利地由對圖像或視頻之序列進行編碼或解碼的方法來使用。較佳地，低解析度圖像的序列係根據在ISO/IEC 14496-10("Information technology--Coding of audio-visual objects--Part 10：Advanced Video Coding")文件中所定義之MPEG-4 AVC編碼標準來編碼而得。
30‧‧‧為頂圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
31‧‧‧為頂圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
32‧‧‧為頂圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
33‧‧‧為底圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
34‧‧‧為頂圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
35‧‧‧為底圖場紋理預測器以W×H測量紋理比(W/w；2H/2h)
40‧‧‧為頂圖場紋理預測器以W×H測量運動比(W/w；H/2h)
41‧‧‧為圖框運動預測器以W×2H測量運動比(W/w；2H/2h)
42‧‧‧為頂圖場運動預測器以W×H測量運動比(W/w；H/2h)
43‧‧‧為底圖場運動預測器以W×H測量運動比(W/w；H/2h)
44‧‧‧為圖框運動預測器P1以W×2H測量運動比(W/w；2H/2h)
45‧‧‧為圖框運動預測器P2以W×2H測量運動比(W/w；2H/2h)
MB,MB1,MB2‧‧‧巨集區塊
本發明可藉由複數個實施例及隨附圖式解說之有益效果來得到進一步的瞭解與闡述，但不受限於此：第1圖代表低解析度圖像之一漸進式序列以及高解析度圖像之一交錯式序列，且該高解析度序列之時間頻率為兩倍之低解析度序列之時間頻率；第2圖代表低解析度圖像之一漸進式序列以及與其具有相同時間頻率之高解析度圖像之一交錯式序列；第3圖顯示在低解析度圖像之序列為漸進式，而高解析度圖像之序列為交錯式的例子中根據本發明產生紋理預測器的方法；第4圖顯示在低解析度圖像之序列為漸進式，而高解析度圖像之序列為交錯式的例子中根據本發明產生運動預測器的方法；以及第5圖顯示在一低解析度圖像之兩巨集區塊MB1與MB2之圖像之水平方向上係數為2的次取樣及其針對相對應的預測器巨集區塊MB_pred所得之分割。
40‧‧‧為頂圖場運動預測器以W×H測量運動比(W/w；H/2h)
41‧‧‧為圖框運動預測器以W×2H測量運動比(W/w；2H/2h)
42‧‧‧為頂圖場運動預測器以W×H測量運動比(W/w；H/2h)
43‧‧‧為底圖場運動預測器以W×H測量運動比(W/w；H/2h)
44‧‧‧為圖框運動預測器P1以W×2H測量運動比(W/w；2H/2h)
45‧‧‧為圖框運動預測器P2以W×2H測量運動比(W/w；2H/2h)

Claims (7)

  1. 一種作為編碼或解碼方法一部份之產生方法，用以針對稱為高解析度序列之高解析度交錯式圖像之一序列之一圖像的至少一像素區塊，而從與稱為低解析度序列之低解析度漸進式圖像之一序列之圖像相關的運動資料中產生至少一運動預測器，每一交錯式圖像包含交錯之一頂圖場與一底圖場，且每一漸進式圖像與一交錯式圖像之每一圖場具有與其相關之一時間參考，其特徵為，該方法包含：從與該低解析度圖像之至少一像素區塊相關之運動資料產生至少一圖框運動預測器(41,44,45)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場或該底圖場具有相同的時間參考；以及從與該低解析度圖像之該至少一像素區塊相關之運動資料產生至少一圖場運動預測器(40,42,43)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場或該底圖場具有相同的時間參考。
  2. 如申請專利範圍第1項之方法，其中當該高解析度序列之時間頻率等於該低解析度序列之時間頻率時，該方法包含：以該圖像水平方向之一水平層間比與在該圖像垂直方向之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運動資料進行次取樣，以產生一頂圖場運動預測器(42)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場具有相同的時間參考；以及以該圖像水平方向之該水平層間比與在該圖像垂直方向之該垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運動資料進行次取樣，以產生一底圖場運動預測器(43)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該底圖場具有相同的時間參考，該水平層間比係等於該高解析度圖像的寬度(W)除以該低解析度圖像的寬度(w) 及該垂直層間比係等於該高解析度圖像之圖場之高度(H)除以該低解析度圖像之高度(2h)。
  3. 如申請專利範圍第1項之方法，其中當該高解析度序列之時間頻率等於兩倍之該低解析度序列之時間頻率時，該方法包含：以該圖像水平方向之一水平層間比與在該圖像垂直方向之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的該運動資料進行次取樣，以產生一頂圖場運動預測器或一底圖場運動預測器(40)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場或該底圖場具有相同的時間參考，該水平層間比係等於該高解析度圖像的寬度(W)除以該低解析度圖像的寬度(w)以及該垂直層間比係等於該高解析度圖像之圖場之高度(H)除以該低解析度圖像之高度(2h)。
  4. 如申請專利範圍第1項之方法，其中產生該至少一圖框運動預測器的步驟包含：以該圖像水平方向之一水平層間比與在該圖像垂直方向之一垂直層間比，對與該低解析度圖像之該至少一像素區塊相關的運動資料進行次取樣(41,44,45)，且該低解析度圖像之該至少一像素區塊和該高解析度圖像之該頂圖場或該底圖場具有相同的時間參考，該水平層間比係等於該高解析度圖像的寬度(W)除以該低解析度圖像的寬度(w)以及該垂直層間比係等於該高解析度圖像之高度(2H)除以該低解析度圖像之高度(2h)。
  5. 如申請專利範圍第1項之方法，其中該方法又包含：當該高解析度序列之時間頻率等於該低解析度序列之時間頻率時，針對該高解析圖像之該至少一像素區塊而從下列至少其一者產生至少一紋理預測器：˙與該高解析度圖像(32,34)之該頂圖場具有相同時 間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料；以及˙與該高解析度圖像(33,35)之該底圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料；以及˙與和該高解析度圖像(36)之該底圖場或該頂圖場之一者具有相同時間參考之該低解析度圖像之每一該至少一像素區塊相關的紋理資料；以及當該高解析度序列之該時間頻率等於兩倍之該低解析度序列之該時間頻率時，針對該至少一像素區塊而從與和該高解析度圖像之該頂圖場具有相同時間參考之該低解析度圖像之該至少一像素區塊相關的紋理資料產生至少一紋理預測器。
  6. 如申請專利範圍第1項至第5項任一項之方法，其中與該低解析度圖像相關之該運動資料係包括運動向量。
  7. 如申請專利範圍第6項之方法，其中該方法係藉由一根據MPEG-4 AVC標準編碼而成之低解析度圖像對高解析度圖像進行編碼的方法使用。
TW095144569A 2005-12-05 2006-12-01 預測運動與紋理資料的方法 TWI425836B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR0553710A FR2894423A1 (fr) 2005-12-05 2005-12-05 Procede de prediction de donnees mouvement et de texture

Publications (2)

Publication Number Publication Date
TW200803519A TW200803519A (en) 2008-01-01
TWI425836B true TWI425836B (zh) 2014-02-01

Family

ID=36178008

Family Applications (1)

Application Number Title Priority Date Filing Date
TW095144569A TWI425836B (zh) 2005-12-05 2006-12-01 預測運動與紋理資料的方法

Country Status (8)

Country Link
US (1) US8396124B2 (zh)
EP (1) EP1958449B1 (zh)
JP (1) JP5148503B2 (zh)
KR (1) KR101336104B1 (zh)
CN (1) CN101322412B (zh)
FR (1) FR2894423A1 (zh)
TW (1) TWI425836B (zh)
WO (1) WO2007065795A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5742343A (en) * 1993-07-13 1998-04-21 Lucent Technologies Inc. Scalable encoding and decoding of high-resolution progressive video
TW200420134A (en) * 2003-03-03 2004-10-01 Thomson Licensing Sa Method for scalable encoding and decoding of an interlaced sequence of digital video data
US20040264578A1 (en) * 2003-06-26 2004-12-30 Lsi Logic Corporation Method and/or apparatus for decoding an intra-only MPEG-2 stream composed of two separate fields encoded as a special frame picture
WO2005096228A1 (en) * 2004-03-12 2005-10-13 Thomson Licensing Method for encoding interlaced digital video data

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01118085A (ja) 1988-09-27 1989-05-10 Sanyo Electric Co Ltd 冷蔵庫等の箱体
US5270813A (en) * 1992-07-02 1993-12-14 At&T Bell Laboratories Spatially scalable video coding facilitating the derivation of variable-resolution images
JP3135692B2 (ja) * 1992-08-28 2001-02-19 株式会社日立製作所 階層的動画像信号符号化装置及び方法
JP3189258B2 (ja) * 1993-01-11 2001-07-16 ソニー株式会社 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置
CA2127151A1 (en) 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
US6057884A (en) 1997-06-05 2000-05-02 General Instrument Corporation Temporal and spatial scaleable coding for video object planes
US6222944B1 (en) * 1998-05-07 2001-04-24 Sarnoff Corporation Down-sampling MPEG image decoder
JP2000013790A (ja) 1998-06-19 2000-01-14 Sony Corp 画像符号化装置および画像符号化方法、画像復号装置および画像復号方法、並びに提供媒体
SG75179A1 (en) * 1998-07-14 2000-09-19 Thomson Consumer Electronics System for deriving a decoded reduced-resolution video signal from a coded high-definition video signal
JP2000041248A (ja) * 1998-07-23 2000-02-08 Sony Corp 画像復号装置及び画像復号方法
JP2000059793A (ja) * 1998-08-07 2000-02-25 Sony Corp 画像復号装置及び画像復号方法
JP2001045475A (ja) * 1999-07-27 2001-02-16 Matsushita Electric Ind Co Ltd 映像信号階層化符号化装置と映像信号階層化復号化装置及びプログラム記録媒体
JP3975629B2 (ja) * 1999-12-16 2007-09-12 ソニー株式会社 画像復号装置及び画像復号方法
US6647061B1 (en) 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
CN1253008C (zh) 2001-10-26 2006-04-19 皇家飞利浦电子股份有限公司 空间可分级压缩的方法和设备
KR101033398B1 (ko) 2001-11-21 2011-05-09 제너럴 인스트루먼트 코포레이션 디지털 비디오 콘텐트를 위한 매크로블록 레벨 적응성프레임/필드 코딩
AU2003215018A1 (en) * 2002-03-27 2003-10-13 Thomson Licensing S.A. Upconversion with noise constrained diagonal enhancement
AU2003237279A1 (en) * 2002-05-29 2003-12-19 Pixonics, Inc. Classifying image areas of a video signal
JP4470431B2 (ja) 2003-10-01 2010-06-02 ソニー株式会社 データ処理装置およびその方法
US7362809B2 (en) 2003-12-10 2008-04-22 Lsi Logic Corporation Computational reduction in motion estimation based on lower bound of cost function
US20070086666A1 (en) 2003-12-22 2007-04-19 Koninklijke Philips Electronic, N.V. Compatible interlaced sdtv and progressive hdtv
US7894526B2 (en) 2004-02-27 2011-02-22 Panasonic Corporation Motion estimation method and moving picture coding method
FR2894422A1 (fr) * 2005-12-01 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5742343A (en) * 1993-07-13 1998-04-21 Lucent Technologies Inc. Scalable encoding and decoding of high-resolution progressive video
TW200420134A (en) * 2003-03-03 2004-10-01 Thomson Licensing Sa Method for scalable encoding and decoding of an interlaced sequence of digital video data
US20040264578A1 (en) * 2003-06-26 2004-12-30 Lsi Logic Corporation Method and/or apparatus for decoding an intra-only MPEG-2 stream composed of two separate fields encoded as a special frame picture
WO2005096228A1 (en) * 2004-03-12 2005-10-13 Thomson Licensing Method for encoding interlaced digital video data

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Sadik Bayrakeri Russell M. Mersereau,"MPEG-2/ECVQ LOOKAHEAD HYBRID QUANTIZATION AND SPATIALLY SCALABLE CODING",Proc. SPIE 3024, Visual Communications and Image Processing '97, 129 (January 10, 1997) Th *

Also Published As

Publication number Publication date
EP1958449A1 (en) 2008-08-20
JP5148503B2 (ja) 2013-02-20
KR20080076908A (ko) 2008-08-20
EP1958449B1 (en) 2015-08-19
JP2009518906A (ja) 2009-05-07
TW200803519A (en) 2008-01-01
CN101322412A (zh) 2008-12-10
CN101322412B (zh) 2011-01-05
KR101336104B1 (ko) 2013-12-04
US8396124B2 (en) 2013-03-12
WO2007065795A1 (en) 2007-06-14
US20100039555A1 (en) 2010-02-18
FR2894423A1 (fr) 2007-06-08

Similar Documents

Publication Publication Date Title
JP6681758B2 (ja) デジタルビデオコンテンツのマクロブロックレベルにおける適応フレーム／フィールド符号化
KR101912059B1 (ko) 화상 부호화 장치 및 화상 복호 장치
JP2008516547A (ja) 映像合成基盤の多視点動映像の符号化及び復号化を行うための方法及び装置
JP5508024B2 (ja) ビデオ信号を符号化するための方法及びシステム、符号化されたビデオ信号、並びに、ビデオ信号を復号するための方法及びシステム
JP4761390B2 (ja) 内挿される画素値の計算方法の改良
EP2368368B1 (en) Method for browsing video streams
JP5037517B2 (ja) 動き及びテクスチャデータを予測する方法
US20140369416A1 (en) Method of predicting motion and texture data
Díaz-Honrubia et al. HEVC: a review, trends and challenges
TWI425836B (zh) 預測運動與紋理資料的方法
US20140140392A1 (en) Video processing system with prediction mechanism and method of operation thereof

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees