TWI259729B - Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program - Google Patents

Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program Download PDF

Info

Publication number
TWI259729B
TWI259729B TW94112200A TW94112200A TWI259729B TW I259729 B TWI259729 B TW I259729B TW 94112200 A TW94112200 A TW 94112200A TW 94112200 A TW94112200 A TW 94112200A TW I259729 B TWI259729 B TW I259729B
Authority
TW
Taiwan
Prior art keywords
image
generating
decoding
predicted
difference
Prior art date
Application number
TW94112200A
Other languages
English (en)
Other versions
TW200605682A (en
Inventor
Choong Seng Boon
Thiow Keng Tan
Original Assignee
Ntt Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ntt Docomo Inc filed Critical Ntt Docomo Inc
Publication of TW200605682A publication Critical patent/TW200605682A/zh
Application granted granted Critical
Publication of TWI259729B publication Critical patent/TWI259729B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Description

1259729 (1) ' 九、發明說明 【發明所屬之技術領域】 本發明係關於一種動畫像編碼裝置、動畫像編碼方法 、記錄動畫像編碼程式之電腦可讀取之媒體、動畫像解碼 裝置、動畫像解碼方法及記錄動畫像解碼程式之電腦可讀 取之媒體。 【先前技術】 爲了效率良好地進行動畫像之傳送或儲存,因此,使 用壓縮編碼技術。作爲壓縮編碼技術之一種係知道框間編 碼方式。在框間編碼方式,將畫像分割成爲既定尺寸之複 數個區塊,在每個區塊,進行編碼處理。在該編碼處理, 鄰接於時間方向之其他畫像之再生畫像係使用作爲參考畫 像,生成關於成爲編碼對象之對象畫像之預測畫像。在此 ,所謂再生畫像係將先前由對象畫像所編碼之畫像予以復 元者。藉由編碼該預測畫像和對象畫像間之差異部分畫像 而削減動畫像之資料量(例如參考日本國之特開平9 -93592號公報)。 【發明內容】 但是,在再生畫像,發生各種之雜訊。在再生畫像存 在雜訊時,降低作爲參考畫像之質。結果,預測畫像和對 象畫像間之差異變大,因此,無法充分地削減資料量。 因此,本發明之目的係提供一種能夠減低參考畫像之 -5- (2) 1259729 雜訊之動畫像編碼裝置、動畫像編碼方法、記錄動畫像編 碼程式之電腦可讀取之媒體。此外,本發明之目的係提供 一種能夠由藉著該動畫像編碼裝置所生成之資料來復元動 畫像之動畫像解碼裝置、動畫像解碼方法及記錄動畫像解 碼程式之電腦可讀取之媒體。 本發明之動畫像編碼裝置係具備:(a )預測畫像生 成手段,係在構成動畫像之複數個畫像中,生成作爲編碼 • 對象之對象畫像所相對之預測畫像·, ( b )差異部分畫像 生成手段’係藉由執行前述對象畫像和前述預測畫像間之 差異演算而生成差異部分畫像;(c )編碼手段,係藉由 編碼前述差異部分畫像而生成編碼差異部分訊號;(d) 解碼手段,係藉由解碼前述編碼差異部分訊號而生成解碼 差異部分畫像;(e )再生畫像生成手段,係藉由執行前 述解碼差異部分畫像和前述預測畫像間之和演算而生成再 生畫像;(ί )儲存手段,係用以爲了生成預測畫像,因 ^ 此’藉由前述預測畫像生成手段而儲存使用之參考畫像; 以及’ (g)畫像更新手段,係藉由對於成爲前述再生畫 像或儲存在前述儲存手段之參考畫像之某一邊之第1畫像 以及成爲該再生畫像或該參考畫像之其他邊之第2畫像之 至少一部分,來進行重疊加算,而生成更新畫像;此外, (h )前述畫像更新手段係將前述更新畫像來儲存在前述 儲存手段,(i )前述預測畫像生成手段係使用儲存在前 述儲存手段之更新畫像,來作爲用以生成不同之對象畫像 所相對之預測畫像之參考畫像。 -6- (3) 1259729 此外,本發明之其他側面之動畫像編碼方法係包含: (a )預測畫像生成手段係在構成動畫像之複數個畫像中 ,生成作爲編碼對象之對象畫像所相對之預測畫像之預測 畫像生成步驟;(b )差異部分畫像生成手段係藉由執行 前述對象畫像和前述預測畫像間之差異演算而生成差異部 分畫像之差異部分畫像生成步驟;(c )編碼手段係藉由 編碼前述差異部分畫像而生成編碼差異部分訊號之編碼步 ® 驟;(d )解碼手段係藉由解碼前述編碼差異部分訊號而 生成解碼差異部分畫像之解碼步驟;(e )再生畫像生成 手段係藉由執行前述解碼差異部分畫像和前述預測畫像間 之和演算而生成再生畫像之再生畫像生成步驟;(f)儲 存手段係用以爲了生成預測畫像,因此,藉由前述預測畫 像生成手段而儲存使用之參考畫像之儲存步驟;以及,( g)畫像更新手段係藉由對於成爲前述再生畫像或儲存在 目ij述儲存手段之參考畫像之某一*邊之弟1畫像以及成爲該 ^ 再生畫像或該參考畫像之其他邊之第2畫像之至少一部分 ,來進行重疊加算,而生成更新畫像之畫像更新步驟;此 外,(h )在前述畫像更新步驟,前述畫像更新手段係將 前述更新畫像來儲存在前述儲存手段’ (i )在前述預測 畫像生成步驟,前述預測畫像生成手段係使用儲存在前述 儲存手段之更新畫像,來作爲用以生成不同之對象畫像所 相對之預測畫像之參考畫像。 此外,本發明之另外其他側面之記錄動畫像編碼程式 之電腦可讀取之媒體係將用以使得電腦發揮作爲:(a ) 1259729
(4) …〜—---……J 在構成動畫像之複數個畫像中而生成作爲編碼對象之對象 畫像所相對之預測畫像之預測晝像生成手段、(b )藉由 執行前述對象畫像和前述預測畫像間之差異演算而生成差 異部分畫像之差異部分畫像生成手段、(c )藉由編碼前 述差異部分畫像而生成編碼差異部分訊號之編碼手段、( d )藉由解碼則述編碼差異部分訊號而生成解碼差異部分 畫像之解碼手段、(e )藉由執行前述解碼差異部分畫像 ^ 和前述預測畫像間之和演算而生成再生畫像之再生畫像生 成手段、(f )用以爲了生成預測畫像而藉由前述預測畫 像生成手段來儲存使用之參考畫像之儲存手段、以及(g )藉由對於成爲前述再生畫像或儲存在前述儲存手段之參 考畫像之某一邊之第1畫像和成爲該再生畫像或該參考畫 像之其他邊之第2畫像之至少一部分來進行重疊加算而生 成更新畫像之畫像更新手段之功能之程式予以記錄之電腦 可讀取之媒體。在此,(h )畫像更新手段係將前述更新 ® 畫像來儲存在前述儲存手段,(i )預測畫像生成手段係 使用儲存在前述儲存手段之更新畫像,來作爲用以生成不 同之對象畫像所相對之預測畫像之參考畫像。 如果藉由前述動畫像之編碼之本發明的話,則藉由在 再生畫像或已經儲存在儲存手段之參考畫像之某一邊之第 1畫像,對於該再生畫像或該參考畫像之其他邊之第2畫像 之至少一部分,來進行重疊加算,而生成更新畫像。該更 新畫像係使用作爲用以生成不同之對象畫像之預測畫像之 參考畫像。因此,使用藉由根據加算之平均化而削減雜訊 -8- (5) 1259729 之參考畫像,因此,削減由於編碼所造成之動畫像之資料 量,提高編碼效率。此外,如果藉由本發明的話,則生成 再生畫像和參考畫像呈平均化之更新畫像,因此,並無再 生畫像或參考畫像,可以將畫像之細節反映於更新畫像。 因此,更加削減由於編碼所造成之動畫像之資料量。 此外,作爲發生於再生畫像之各種雜訊係知道例如起 因於區塊間之境界出現大像素値之變化之區塊歪斜所造成 之雜訊。知道爲了減輕由於該區塊歪斜所造成之雜訊,因 此’在再生畫像之區塊間之境界附近來施行解塊濾波器之 技術。但是,在解塊濾波器,無法減低區塊內部所產生之 雜訊。如果藉由本發明的話,則藉由根據加算之平均化而 減輕參考畫像之雜訊,因此,能夠減低區塊內部之雜訊。 此外’作爲用以削減成爲在再生畫像所發生之一種雜 訊之量化雜訊等之技術係知道雙方向預測。在雙方向預測 ,就處理對象區塊而言,要求2個動作量(第1動作量及第 2動作量)。第1動作量係在時間方向,朝向至前方之參考 畫像之處理對象區塊之動作量。第2動作量係在時間方向 ,朝向至後方之參考畫像之處理對象區塊之動作量。在雙 方向預測,由第1動作量來求出第1預測畫像,由第2動作 量來求出第2預測畫像,使用將第i預測畫像和第2預測畫 像予以平均化之預測畫像。但是,該預測畫像係對於特定 之處理對象區塊所使用,在以後之不同之處理對象區塊之 處理,無法利用作爲參考畫像。因此,在雙方向預測,由 於平均化所造成之雜訊減低之效果係並無發揮在以後之處 -9-
1259729 (6) 理。另一方面,如果藉由本發明的話,則藉由平均化而減 輕雜訊之更新畫像係成爲參考畫像而儲存在儲存手段,在 後面之處理,使用在預測畫像之生成。因此,如果藉由本 發明的話,則由於平均化所造成之雜訊減低之效果係也發 揮在不同之對象畫像之處理。 本發明之動畫像解碼裝置係具備:(a )解碼手段, 係藉由將動畫像進行預測編碼所構成之編碼差異部分訊號 予以解碼,而生成解碼差異部分畫像;(b )預測畫像生 成手段,係根據前述編碼差異部分訊號而生成解碼對象之 對象畫像所相對之預測畫像;(c )再生畫像生成手段, 係藉由加算前述解碼差異部分畫像和前述預測畫像而生成 再生畫像;(d )儲存手段,係爲了生成前述預測畫像, 因此,藉由前述預測畫像生成手段而儲存使用之參考畫像 ;以及,(e )畫像更新手段,係藉由對於成爲前述再生 畫像或儲存在前述儲存手段之參考畫像之某一邊之第1畫 像以及成爲該再生畫像或該參考畫像之其他邊之第2畫像 之至少一部分,來進行重疊加算,而生成更新畫像;此外 ,(f )前述畫像更新手段係將前述更新畫像來儲存在前 述儲存手段,(g )前述預測畫像生成手段係使用儲存在 前述儲存手段之更新畫像,來作爲用以生成不同之對象畫 像所相對之預測畫像之參考畫像。 本發明之其他側面之動畫像解碼方法係包含:(a ) 解碼手段係藉由將動畫像進行預測編碼所構成之編碼差異 部分訊號予以解碼,而生成解碼差異部分畫像之解碼步驟 -10- (7) 1259729 ;(b )預測畫像生成手段係根據前述編碼差異部分訊號 而生成解碼對象之對象畫像所相對之預測畫像之預測畫像 生成步驟;(c )再生畫像生成手段係藉由加算前述解碼 差異部分畫像和前述預測畫像而生成再生畫像之再生畫像 生成步驟;(d )儲存手段係爲了生成前述預測畫像,因 此,藉由前述預測畫像生成手段而儲存使用之參考畫像之 儲存步驟;以及,(e )畫像更新手段係藉由對於成爲前 述再生畫像或儲存在前述儲存手段之參考畫像之某一邊之 第1畫像以及成爲該再生畫像或該參考畫像之其他邊之第2 畫像之至少一部分,來進行重疊加算,而生成更新畫像之 畫像更新步驟;此外,(f )在前述畫像更新步驟,前述 畫像更新手段係將前述更新畫像來儲存在前述儲存手段, (g )在前述預測畫像生成步驟,前述預測畫像生成手段 係使用儲存在前述儲存手段之更新畫像,來作爲用以生成 不同之對象畫像所相對之預測畫像之參考畫像。 本發明之另外其他側面之記錄動畫像解碼程式之電腦 可讀取之媒體係將用以使得電腦發揮作爲:(a )藉由將 動畫像進行預測編碼所構成之編碼差異部分訊號予以解碼 而生成解碼差異部分畫像之解碼手段、(b )根據前述編 碼差異部分訊號而生成解碼對象之對象畫像所相對之預測 畫像之預測畫像生成手段、(c )藉由加算前述解碼差異 部分畫像和前述預測畫像而生成再生畫像之再生畫像生成 手段、(d )爲了生成前述預測畫像而藉由前述預測畫像 生成手段來儲存使用之參考畫像之儲存手段、以及(e ) -11 - 1259729
⑻ 藉由對於成爲前述再生畫像或儲存在前述儲存手段之參考 畫像之某一邊之第1畫像以及成爲該再生畫像或該參考畫 像之其他邊之第2畫像之至少一部分來進行重疊加算而生 成更新畫像之畫像更新手段之功能之程式予以記錄之電腦 可讀取之媒體。在此,(ί)前述畫像更新手段係將前述 更新畫像來儲存在前述儲存手段,(g )前述預測畫像生 成手段係使用儲存在前述儲存手段之更新畫像,來作爲用 ® 以生成不同之對象畫像所相對之預測畫像之參考畫像。 如果藉由前述動畫像解碼之本發明的話,則由根據前 述動畫像編碼之本發明所生成之資料,來忠實地復元動畫 像。 在前述動畫像編碼之本發明(動畫像編碼裝置、動畫 像編碼方法及記錄動畫像編碼程式之電腦可讀取之媒體) ,畫像更新手段係可以將藉由使用利用再生畫像生成手段 所生成之再生畫像來作爲第1晝像且使用儲存在儲存手段 ® 之參考畫像來作爲第2畫像且重疊加算該再生畫像和該參 考畫像之至少一部分而生成之更新再生畫像,來作爲更新 畫像,儲存在儲存手段。 在該狀態下,在前述動畫像解碼之本發明(動畫像解 碼裝置、動畫像解碼方法及δδ錄動畫像解碼程式之電腦可 讀取之媒體),畫像更新手段係可以將藉由使用利用再生 畫像生成手段所生成之再生畫像來作爲第1畫像且使用儲 存在儲存手段之爹考畫像來作爲弟2畫像且重疊加算該再 生畫像和該參考畫像之至少一部分而生成之更新再生畫像 -12-
1259729 ’來作爲更新畫像,儲存在儲存手段。 此外,在前述動畫像編碼之本發明(動畫像編碼裝置 '動畫像編碼方法及記錄動畫像編碼程式之電腦可讀取之 媒體)’畫像更新手段係可以將藉由使用儲存在儲存手段 之參考畫像來作爲第1畫像且使用利用再生畫像生成手段 所生成之再生畫像來作爲第2畫像且重疊加算該參考畫像 和該再生畫像之至少一部分而生成之更新參考畫像,來作 爲更新畫像,儲存在儲存手段。 在該狀態下,在前述動畫像解碼之本發明(動畫像解 碼裝置、動畫像解碼方法及記錄動畫像解碼程式之電腦可 讀取之媒體),畫像更新手段係可以將藉由使用儲存在儲 存手段之參考畫像來作爲第1畫像且使用利用再生畫像生 成手段所生成之再生畫像來作爲第2畫像且重疊加算該參 考畫像和該再生畫像之至少一部分而生成之更新參考畫像 ’來作爲更新畫像,儲存在前述儲存手段。 此外’在前述動畫像編碼之本發明(動畫像編碼裝置 、動畫像編碼方法及記錄動畫像編碼程式之電腦可讀取之 媒體)’畫像更新手段係可以將藉由使用利用再生畫像生 成手段所生成之再生畫像來作爲第1畫像並且使用儲存在 儲存手段之參考畫像來作爲第2畫像且重疊加算該再生畫 像和該參考畫像之至少一部分而生成之更新再生畫像,來 作爲更新畫像,儲存在儲存手段,並且,將藉由使用儲存 在儲存手段之參考畫像來作爲第1畫像並且使用利用再生 晝像生成手段所生成之再生畫像來作爲第2畫像且重疊加 -13- 1259729 (10) 4 算該參考畫像和該再生畫像之至少一部分而生成 考畫像’來作爲更新畫像,儲存在前述儲存手段 態下’預測畫像生成手段係可以使用再生畫像、 畫像、參考畫像(已經儲存在儲存手段之參考畫 新參考畫像中之至少一種,使用作爲用以生成不 畫像所相對之預測畫像之參考畫像。 在該狀態下,在前述動畫像解碼之本發明( ® 碼裝置、動畫像解碼方法及記錄動畫像解碼程式 讀取之媒體),畫像更新手段係可以將藉由使用 畫像生成手段所生成之再生畫像來作爲第1畫像 儲存在儲存手段之參考畫像來作爲第2畫像且重 再生畫像和該參考畫像之至少一部分而生成之更 像,來作爲更新畫像,儲存在儲存手段,並且, 用儲存在儲存手段之參考畫像來作爲第1畫像並 用再生畫像生成手段所生成之再生畫像來作爲負 ^ 重疊加算該參考畫像和該再生畫像之至少一部分 更新參考畫像,儲存在儲存手段。預測畫像生成 以使用再生畫像、更新再生畫像、參考畫像及更 像中之至少一種,使用作爲用以生成不同之對象 對之預測畫像之參考畫像。 此外,在前述動畫像解碼之本發明(動畫像 、動畫像解碼方法及記錄動晝像解碼程式之電腦 媒體),編碼差異部分訊號係包含指示第1狀態, 、第3狀態及第4狀態中之至少一種之更新控制訊 之更新參 。在該狀 更新再生 像)及更 同之對象 動畫像解 之電腦可 利用再生 並且使用 疊加算該 新再生畫 將藉由使 且使用利 ^ 2畫像且 而生成之 手段係可 新參考晝 畫像所相 解碼裝置 可讀取之 第2狀態 號,畫像 -14- (11) 1259729 更新手段係在藉由更新控制訊號而指示第1狀態之情況下 ,生成更新再生畫像,在藉由更新控制訊號而指示第2狀 態之情況下,生成更新參考畫像,在藉由更新控制訊號而 指示第3狀態之情況下,生成更新再生畫像和更新參考畫 像,在藉由更新控制訊號而指示第4狀態之情況下,不生 成更新再生畫像和更新參考畫像。 此外,最好是在前述動畫像編碼之本發明(動畫像編 碼裝置、動畫像編碼方法及記錄動畫像編碼程式之電腦可 讀取之媒體),畫像更新手段係藉由將特定第2畫像相對 於第1畫像之偏差之動作量予以求出,在根據該動作量而 移動之相對應之位置,將第2畫像之至少一部分,重疊加 算在第1畫像,而生成更新畫像。 在該狀態下,在前述動畫像解碼之本發明(動畫像解 碼裝置、動畫像解碼方法及記錄動畫像解碼程式之電腦可 讀取之媒體),畫像更新手段係藉由將顯示第2畫像相對 於第1畫像之偏差之動作量予以求出,在根據該動作量而 移動之相對應之位置,將第2畫像之至少一部分,重疊加 算在第1畫像,而生成更新畫像。 如果藉由前述本發明的話,則不增加動作量之資料量 ,進行加入動作補償之平均化,因此,生成雜訊更加少之 參考畫像。 但是,動畫像編碼之本發明(動畫像編碼裝置、動畫 像編碼方法及記錄動畫像編碼程式之電腦可讀取之媒體) 係也可以正如以下而構成。 -15- 1259729 本發明之動畫像編碼裝置,其特徵爲:具備(a)預 測畫像生成手段,係在構成動畫像之複數個畫像中,生成 作爲編碼對象之對象畫像所相對之預測畫像;(b )差異 部分畫像生成手段,係藉由執行前述對象畫像和前述預測 畫像間之差異演算而生成差異部分畫像;(c )編碼手段 ,係藉由編碼前述差異部分畫像而生成編碼差異部分訊號 ;(d )解碼手段,係藉由解碼前述編碼差異部分訊號而 W 生成解碼差異部分畫像;(e )再生畫像生成手段,係藉 由執行前述解碼差異部分畫像和前述預測畫像間之和演算 而生成再生畫像;(f)儲存手段,係用以爲了生成預測 畫像,因此,藉由前述預測畫像生成手段而儲存使用之參 考畫像;以及,(g )畫像更新手段,係藉由以儲存在前 述儲存手段之參考晝像,作爲第1畫像,以儲存在前述儲 存手段且不同於前述第1畫像之參考畫像和前述再生畫像 及前述解碼差異部分畫像中之至少1種,作爲第2畫像’重 ® 疊加算前述第1畫像和前述第2畫像之至少一部分,而生成 更新畫像;此外,前述畫像更新手段係將前述更新畫像來 儲存在前述儲存手段,前述預測畫像生成手段係使用儲存 在前述儲存手段之更新畫像,來作爲用以生成預測畫像之 參考畫像。 本發明之動畫像編碼方法,其特徵爲:包含(a)預 測畫像生成手段係在構成動畫像之複數個畫像中’生成作 爲編碼對象之對象畫像所相對之預測畫像之預測畫像生成 步驟;(b )差異部分畫像生成手段係藉由執行前述對象 -16- (13) 1259729 畫像和前述預測畫像間之差異演算而生成差異部分畫像之 差異部分畫像生成步驟;(c )編碼手段係藉由編碼前述 差異部分畫像而生成編碼差異部分訊號之編碼步驟;(d )解碼手段係藉由解碼前述編碼差異部分訊號而生·成解碼 差異部分畫像之解碼步驟;(e )再生畫像生成手段係藉 由執行前述解碼差異部分畫像和前述預測畫像間之和演算 而生成再生畫像之再生畫像生成步驟;(f)儲存手段係 ^ 用以爲了生成預測畫像,因此,藉由前述預測畫像生成手 段而儲存使用之參考畫像之儲存步驟;以及,(g )畫像 更新手段係藉由以儲存在前述儲存手段之參考畫像,作爲 第1畫像,以儲存在前述儲存手段且不同於前述第1畫像之 參考畫像和前述再生畫像及前述解碼差異部分畫像中之至 少1種,作爲第2畫像,重疊加算前述第1畫像和前述第2畫 像之至少一部分,而生成更新畫像之畫像更新步驟;此外 ,在前述畫像更新步驟,前述畫像更新手段係將前述更新 ^ 畫像來儲存在前述儲存手段,在前述預測畫像生成步驟, 前述預測畫像生成手段係使用儲存在前述儲存手段之更新 畫像’來作爲用以生成預測畫像之參考畫像。 本發明之記錄動畫像編碼程式之電腦可讀取之媒體, 其特徵爲:成爲使得電腦發揮作爲:(a )在構成動畫像 之複數個畫像中而生成作爲編碼對象之對象畫像所相對之 預測畫像之預測畫像生成手段、(b )藉由執行前述對象 畫像和前述預測畫像間之差異演算而生成差異部分畫像之 差異部分畫像生成手段、(c )藉由編碼前述差異部分畫 -17- (14) 1259729 像而生成編碼差異部分訊號之編碼手段、(d)藉由解碼 前述編碼差異部分訊號而生成解碼差異部分畫像之解碼手 段、(e )藉由執行前述解碼差異部分畫像和前述預測畫 像間之和演算而生成再生畫像之再生畫像生成手段、(f )用以爲了生成預測畫像而藉由前述預測畫像生成手段來 儲存使用之參考畫像之儲存手段、以及(g )藉由以儲存 在前述儲存手段之參考畫像來作爲第1畫像並且以儲存在 ® 前述儲存手段且不同於前述第1畫像之參考畫像和前述再 生畫像及前述解碼差異部分畫像中之至少1種來作爲第2畫 像且重疊加算前述第1畫像和前述第2畫像之至少一部分而 生成更新畫像之畫像更新手段之功能之程式予以記錄之電 腦可讀取之媒體;此外,前述畫像更新手段係將前述更新 畫像來儲存在前述儲存手段,前述預測畫像生成手段係使 用儲存在前述儲存手段之更新畫像,來作爲用以生成預測 畫像之參考畫像。 ® 此外,動畫像解碼之本發明(動畫像解碼裝置、動畫 像解碼方法及記錄動畫像解碼程式之電腦可讀取之媒體) 係也可以正如以下而構成。 本發明之動畫像解碼裝置,其特徵爲:具備(a)解 碼手段,係藉由將動畫像進行預測編碼所構成之編碼差異 部分訊號予以解碼,而生成解碼差異部分畫像;(b )預 測畫像生成手段,係根據前述編碼差異部分訊號而生成解 碼對象之對象畫像所相對之預測畫像;(c )再生畫像生 成手段,係藉由加算前述解碼差異部分畫像和前述預測畫 -18- 1259729
像而生成再生畫像;(d )儲存手段,係爲了生成前述預 測畫像,因此,藉由前述預測畫像生成手段而儲存使用之 參考畫像;以及,(e )畫像更新手段,係藉由以儲存在 前述儲存手段之參考畫像,作爲第1畫像,以儲存在前述 儲存手段且不同於前述第1畫像之參考畫像和前述再生畫 像及前述解碼差異部分畫像中之至少1種,作爲第2畫像, 重疊加算前述第1畫像和前述第2畫像之至少一部分,而生 ® 成更新畫像;此外,前述畫像更新手段係將前述更新畫像 來儲存在前述儲存手段,前述預測畫像生成手段係使用儲 存在前述儲存手段之更新畫像,來作爲用以生成預測畫像 之參考畫像。 本發明之動畫像解碼方法,其特徵爲:包..含(a )解 碼手段係藉由將動畫像進行預測編碼所構成之編碼差異部 分訊號予以解碼,而生成解碼差異部分畫像之解碼步驟; (b )預測畫像生成手段係根據前述編碼差異部分訊號而 ^ 生成解碼對象之對象畫像所相對之預測畫像之預測畫像生 成步驟;(c )再生畫像生成手段係藉由加算前述解碼差 異部分畫像和前述預測畫像而生成再生畫像之再生畫像生 成步驟;(d )儲存手段係爲了生成前述預測畫像,因此 ,藉由前述預測畫像生成手段而儲存使用之參考畫像之儲 存步驟;以及,(e )畫像更新手段係藉由以儲存在前述 儲存手段之參考畫像,作爲第1畫像,以儲存在前述儲存 手段且不同於前述第1畫像之參考畫像和前述再生畫像及 前述解碼差異部分畫像中之至少1種,作爲第2畫像,重疊 -19- (16) 、' 1259729 加算前述第1畫像和前述第2畫像之至少一部分,而生成更 新畫像之畫像更新步驟;此外,在前述畫像更新步驟,前 述畫像更新手段係將IU述更新畫像來儲存在前述儲存手段 ,在前述預測畫像生成步驟,前述預測畫像生成手段係使 用儲存在前述儲存手段之更新畫像,來作爲用以生成預測 畫像之參考畫像。 本發明之記錄動畫像解碼程式之電腦可讀取之媒體, ^ 其特徵爲:成爲使得電腦發揮作爲:(a )藉由將動畫像 進行預測編碼所構成之編碼差異部分訊號予以解碼而生成 解碼差異部分畫像之解碼手段、(b)根據前述編碼差異 部分訊號而生成解碼對象之對象畫像所相對之預測畫像之 預測畫像生成手段、(c )藉由加算前述解碼差異部分畫 像和前述預測畫像而生成再生畫像之再生畫像生成手段、 (d )爲了生成前述預測畫像而藉由前述預測畫像生成手 段來儲存使用之參考畫像之儲存手段、以及(e )藉由以 • 儲存在前述儲存手段之參考畫像來作爲第1畫像並且以儲 存在前述儲存手段且不同於前述第1畫像之參考畫像和前 述再生畫像及前述解碼差異部分畫像中之至少1種來作爲 第2畫像且重疊加算前述第1畫像和前述第2畫像之至少一 部分而生成更新畫像之畫像更新手段之功能之程式予以記 錄之電腦可讀取之媒體;此外,前述畫像更新手段係將前 述更新畫像來儲存在前述儲存手段,前述預測畫像生成手 段係使用儲存在前述儲存手段之更新畫像,來作爲用以生 成預測畫像之參考畫像。 -20- 1259729 (17) .....…_ , 一......…j 正如以上所說明的,如果藉由本發明的話,則提供一 種能夠減低參考畫像之雜訊之動畫像編碼裝置、動畫像編 碼方法及記錄動畫像編碼程式之電腦可讀取之媒體。因此 ,如果藉由本發明的話,則削減動畫像之資料量,提高編 碼效率。此外,如果藉由本發明的話,則由於平均化之所 造成之雜訊減低之效果係也發揮在不同之對象畫像之處理 。此外,如果藉由本發明的話,則再生畫像和儲存於儲存 ^ 手段之參考畫像之某一邊之所沒有之畫像細節係反映於使 用在不同之對象畫像所相對之預測畫像之生成之參考畫像 ,因此,更加提高編碼效率。 此外,如果藉由本發明的話,則提供一種能夠由根據 前述動晝像編碼之本發明所生成之資料來復元動畫像之動 畫像解碼裝置、動畫像解碼方法及記錄動畫像解碼程式之 電腦可讀取之媒體。 β【實施方式】 (較佳具體例之說明) 以下’參考圖式’就本發明之理想之實施形態而詳細 地進行說明。此外,在各個圖式中,對於相同或相當之部 分,來附加相同之圖號。 第1圖係顯示本發明之實施形態之動畫像編碼裝置之 構造之圖。第1圖所不之動畫像編碼裝置1 〇係可以是在物 理上具備CPU (中央處理裝置)、所謂記憶體之記憶裝置 、顯示裝置、通訊裝置等之電腦。此外,動晝像編碼裝置 -21 - (18) 1259729 10係可以是所謂行動電話之移動式通訊終端機。也就是說 ’在動畫像編碼裝置10,能夠廣泛地適用可資訊處理之裝 置。 正如第1圖所示,動畫像編碼裝置10係在功能上,具 備:輸入端子1 2、前處理部1 4、預測畫像生成部(預測畫 像生成手段)1 6、差異部分畫像生成部(差異部分畫像生 成手段)18、框記憶體(儲存手段)20、編碼部(編碼手 ^ 段)22、可變長度編碼部24、輸出端子26、解碼部(解碼 手段)28、再生畫像生成部(再生畫像生成手段)30以及 畫像更新部(畫像更新手段)32。 在輸入端子12,輸入由複數個畫像所構成之動畫像。 輸入端子12係在前處理部14輸出動畫像。 前處理部I4係接受經由線L2所輸出之動畫像,使得構 成動畫像之複數個輸入畫像,依序地作爲編碼對象之對象 畫像,在該對象畫像,施行前處理。前處理部14係可以對 ^ 於對象畫像,施行用以減低雜訊之濾波器,來作爲前處理 。該雜訊係例如在藉由相機所造成之攝影時,發生於圖像 。前處理部1 4係可以配合於需要而將對象畫像轉換成爲既 定之尺寸,來作爲前處理。此外,前處理部14係將對象畫 像分割成爲既定尺寸之複數個區塊,進行輸出,來作爲前 處理。作爲該既定尺寸係例舉16x16像素之尺寸。在動畫 像編碼裝置10,就由前處理部14所輸出之複數個區塊之各 個而言,施行在以下說明之處理。 預測畫像生成部1 6係生成對象畫像之預測畫像。具體 -22- 1259729
地說,預測畫像生成部1 6係以來自前處理部1 4而經過線L4 所輸出之區塊,作爲處理對象之對象區塊,生成該對象區 塊之畫像所相對之預測畫像。 預測畫像生成部1 6係經由線L6而取得儲存於框記憶體 20之參考畫像。在框記憶體20,比起對象畫像還更早成爲 編碼對象之輸入畫像所相對之再生畫像係儲存成爲藉由預 測畫像生成部1 6所造成之預測畫像之生成用之參考畫像。 ^ 就關於再生畫像之細節係敘述於後面。預測畫像生成部1 6 係使用該參考畫像,藉由動作補償預測而生成對象區塊之 預測畫像。也就是說,預測畫像生成部1 6係求出對象區塊 之參考畫像所相對之動作量(動作向量)。該動作向量係 例如可以藉由區塊匹配而求出,能夠成爲由對象區塊開始 至相關最高之參考畫像內之區域之向量。預測畫像生成部 1 6係輸出求出之動作向量和預測畫像。該預測畫像係藉由 動作向量而特定之參考畫像內之區域之畫像。 • 差異部分畫像生成部1 8係藉由執行對象畫像和預測畫 像間之差異演算而生成差異部分畫像。具體地說,差異部 分畫像生成部1 8係藉著求出經由線L8由前處理部1 4所輸出 之對象區塊之畫像和經由線L10由預測畫像生成部16所輸 出之該對象區塊之預測畫像間之差異而生成差異部分畫像 〇 編碼部22係藉由編碼差異部分畫像而生成編碼差異部 分訊號。在本實施形態,編碼部22係具有轉換部34和量化 部36 °轉換部34係轉換經由線L12由差異部分畫像生成部 •23- (20) 1259729 18所輸出之對象區塊之差異部分畫像。轉換部34係例如使 用 DCT( Discrete Cosine Transform (離散式餘弦轉換) )而將差異部分畫像,來轉換成爲頻率區域之訊號。量化 部3 6係對於經由線L 1 4由轉換部3 4所輸出之訊號,來進行 量化。藉由量化部3 6而進行量化之訊號係編碼差異部分訊 號。 可變長度編碼部2 4係藉由對於經由線L i 6由預測畫像 ^ 生成部16所輸出之動作向量以及經由線L18由編碼部22所 輸出之編碼差異部分訊號,來進行可變長度編碼,而生成 編碼資料。可變長度編碼部24係例如可以使用算術編碼。 可變長度編碼部24係使得包含該編碼資料之位元串流,經 由線L2 0而輸出至輸出端子26。 解碼部2 8係藉由封於編碼差異部分訊號來進行解碼而 生成解碼差異部分畫像。所謂在此之解碼係對稱於編碼部 2 2之編碼之處理。具體地說,解碼部2 8係具有逆量化部3 8 •和逆轉換部40。 逆量化部38係接受經由線L22由編碼部22所輸出之編 碼差異部分訊號。逆量化部3 8係使得成爲對稱於藉由量化 部36所造成之量化之對稱處理之逆量化,來適用於編碼差 異部分訊號。 逆轉換部4 0係藉由接受經由線l 2 4來自逆量化部3 8之 訊號(施行逆量化之訊號),在該訊號,適用逆轉換,而 生成對象區塊之解碼差異部分畫像。藉由逆轉換部4 0所造 成之逆轉換係對稱於藉由轉換部34所造成之轉換之對稱處 -24· (21) (21) 1259729 \ 理,在轉換部34使用DCT之狀態下,逆轉換部40係使用 IDCT ( Inverse Discrete Cosine Transform (反離散式餘弦 轉換))。 再生畫像生成部30係藉由加算解碼差異部分畫像和預 測畫像而生成再生畫像。具體地說,再生畫像生成部30係 藉著加算由解碼部2 8開始經由線L2 6所輸出之解碼差異部 分畫像和由預測畫像生成部1 6開始經由線L2 8所輸出之預 ® 測畫像而生成對象區塊之再生畫像。 畫像更新部32係經由線L30,由再生畫像生成部30, 來接受再生畫像,經由線L32,接受儲存於框記憶體20之 參考畫像。畫像更新部32係藉由以再生畫像及參考畫像之 某一邊,作爲第1畫像,以再生畫像及參考畫像之其他邊 ,作爲第2畫像,對於第1畫像和第2畫像,進行重疊加算 ,而生成更新畫像。該更新畫像係儲存在框記憶體20而使 用在對於不同之對象畫像之編碼。也就是說,更新畫像係 ® 儲存在框記憶體2〇,作爲更加後面於對象畫像而用以生成 對於成爲編碼對象之輸入畫像之預測畫像之參考畫像,藉 由預測畫像生成部1 6而進行使用。此外,該重疊加算係在 第1畫像和第2畫像’適用任意比例之比重,使得加算後之 像素値,成爲要求之位準內之値。 在以下,參考第2圖,就畫像更新部32之某一實施形 態而進行說明。第2圖係顯示畫像更新部之某一實施形態 之構造之圖。在動畫像編碼裝置10,可以使用第2圖所示 之畫像更新部4 8,來作爲畫像更新部3 2。畫像更新部4 8係 -25- 1259729 (22) L—〜.…1 具有更新再生畫像生成部50、更新參考畫像生成部52和開 關5 4。 更新再生畫像生成部50係生成在再生畫像來重疊加算 參考畫像之更新再生畫像,作爲更新晝像。也就是說,更 新再生畫像生成部5 0係使用再生畫像,來作爲第1畫像, 使用參考畫像,來作爲第2晝像。 更新再生畫像生成部5 0係具有動作檢測部5 6、動作補 Φ 償部58和重疊加算部60。動作檢測部56係經由線L70而接 受再生畫像,經由線L72而接受參考畫像。在動畫像編碼 裝置10之狀態下,線L70係相當於線L30,線L70係相當於 線 L3 2 ° 動作檢測部5 6係在再生畫像之每個區塊,求出相對於 參考畫像之動作量(動作向量)。該區塊之尺寸係例如可 以成爲4x4像素尺寸之區塊。動作補償部58係輸出藉由利 用動作檢測部5 6所求出之動作向量來特定之參考畫像內之 ® 區域之畫像。重疊加算部60係藉由以任意之重疊,將來自 動作補償部5 8之該畫像,加算於前述區塊之再生畫像,而 生成前述區塊之對應位置之更新再生畫像。該重疊加算係 對於再生畫像、參考畫像而適用例如所謂1 : 1或2 : 1之比 例之比重,使得加算後之像素値,成爲要求之範圍內之値 像這樣藉由更新再生畫像生成部50所生成之更新再生 畫像係經由開關54及線L74,回復到框記憶體,成爲不同 之對象畫像所相對之參考畫像,利用於後面之編碼。此外 -26- (23) 1259729 s ,在動畫像編碼裝置10之狀態下,線L74係相當於線L3 4 〇 更新參考畫像生成部5 2係生成在參考畫像將再生畫像 予以重豐加算之更新參考畫像,作爲更新畫像。也就是說 ,更新參考畫像生成部52係使用參考畫像,來作爲第i畫 像,使用再生畫像,來作爲第2畫像。 更新參考畫像生成部52係具有動作檢測部62、動作補 鲁償部64和重疊加算部66。動作檢測部62係經由線l7〇而接 受再生畫像,經由線L7 2而接受參考畫像。 動作檢測部6 2係在參考畫像之每個區塊,求出相對於 再生畫像之動作量(動作向量)。該區塊之尺寸係例如也 可以成爲4 X 4像素尺寸。此外,動作檢測部6 2係能夠使用 以藉由動作檢測部5 6所生成之動作向量來作爲逆方向之向 量。 動作補償部6 4係輸出藉由來自動作檢測部6 2之動作向 鲁量來特定之再生畫像內之區域之畫像。重疊加算部66係藉 由以任意之重疊,將來自動作補償部64之該畫像和前述區 塊之參考畫像予以加算,而生成前述區塊之對應位置之更 新參考畫像。該重疊加算係對於參考畫像、再生畫像而適 用例如所謂1 : 1或2 : 1之比例之比重,使得加算後之像素 値’成爲要求之範圍內之値。 像這樣藉由更新參考畫像生成部52所生成之更新參考 畫像係經由開關54及線L74,回復到框記憶體,成爲不同 之對象畫像所相對之參考畫像,利用於後面之編碼。 -27- (24) 1259729 此外,更新再生畫像生成部5 0和更新參考畫像生成部 5 2係可以成爲分別不具有對應之動作檢測部56及動作檢測 部62之構造。在該狀態下,動作補償部58及動作補償部64 係分別可以使用藉由預測畫像生成部16所求出之動作向量 〇 此外,動作檢測部5 6及動作檢測部62係可以使用藉由 預測畫像生成部1 6所求出之動作向量,來作爲偏位,求出 ®更加微細之動作向量。 此外,可以藉由可變長度編碼部24,而將利用動作檢 測部56及動作檢測部62所求出之動作向量,來傳訊至解碼 側,或者是不傳訊至解碼側。在後者之狀態下,可以在解 碼側,執行相同於動作檢測部56及動作檢測部62之同樣處 理。 此外,可以在框記憶體20,除了更新再生畫像及更新 參考畫像以外,還儲存再生畫像,並且,仍然將儲存於框 ^ 記憶體20之參考畫像予以儲存。在該狀態下,再生畫像、 更新再生畫像、更新參考畫像及參考畫像係在不同之對象 畫像之編碼,使用作爲參考畫像。
以下,參考第3圖及第4圖,說明儲存於框記憶體之參 考畫像之時系列。第3圖係用以說明在進行順方向預測之 狀態下之畫像更新之槪念之圖。第4圖係用以說明在進行 雙方向預測之狀態下之畫像更新之槪念之圖。在第3圖及 第4圖,在附有參考圖號IN之區域,顯示輸入畫像’在附 有參考圖號R之區域,顯示再生畫像,在附有參考圖號F -28-
1259729 (25) 之區域,顯示儲存於框記憶體之晝像。 在順方向預測之狀態下,並無逆方向之預測,因此, 可以認爲並無算法上之延遲。在順方向預測之狀態下,正 如第3圖所示,依照時刻tO、tl、t2、t3…之順序而將輸入 畫像10、P 1、P 2、P 3…予以輸入。在時刻10,輸入畫像10 係成爲對象畫像,例如經過內框編碼及解碼,生成再生畫 像RI0,該再生畫像RI0成爲參考畫像而儲存於框記憶體20 •。 在時刻11,輸入畫像P 1係成爲對象畫像,使用儲存於 框記憶體20之參考畫像RI0,生成再生畫像RP1。在時刻tl ,參考畫像RIO、再生畫像RP1、由再生畫像RP1和參考畫 像RI0所生成之更新參考畫像RI〇rp1及更新再生畫像RP1r10 係成爲參考畫像而儲存於框記憶體20。 在時刻t2,輸入畫像P2係成爲對象畫像,使用在時刻 tl之儲存於框記憶體20之參考畫像RIO、RP1、…(^^及 馨 RPIrio,生成再生畫像RP2。在時刻t2,使用再生畫像RP1 、再生畫像RP2、參考畫像RP1和再生畫像RP2所生成之更 新參考畫像RP1RP2及更新再生畫像RP2rp1係成爲參考畫像 而儲存於框記憶體20。此外,在時刻t2,由框記憶體20來 削除參考畫像RIO、RI〇rp1&RP1r1g,但是,也可以不削除 這些而使用於時刻t3之再生畫像之生成。 在時刻t3,輸入畫像P3係成爲對象畫像,使用在時刻 t 2之儲存於框記憶體20之參考畫像,生成再生畫像RP3。 在雙方向預測之狀態下,在畫像之輸入和再生,發生 -29- (26) 1259729 算法上之延遲。在雙方向預測之狀態下,正如第4圖所示 ,依序地將輸入畫像I 〇、B 1、B 2、B 3…予以輸入。 在時刻10,輸入畫像10係成爲對象畫像,例如藉由內 框編碼及解碼而生成再生畫像RIO。該再生畫像RIO係成爲 參考畫像而儲存於框記憶體20。將再生畫像RI〇予以再生 之時刻係雙方向預測,因此,成爲時刻11。 由輸入畫像1〇及P3來編碼輸入畫像B1和輸入畫像B2 ® ,因此,在時刻11,輸入畫像P3係成爲對象畫像,在時刻 t2,使用參考畫像RI0,生成對象畫像P3之再生畫像RP3。 在時刻t2,使用再生畫像RP3和參考畫像RI0,生成更新參 考畫像RI0RP3及更新參考畫像RP3ri〇,成爲參考畫像而儲 存於框記憶體20。 在時刻t2,輸入畫像B1和輸入畫像B2係成爲對象畫像 ’分別進行編碼。在時刻t3,使用參考畫像RI〇RP3及 RP3ri〇,生成對象畫像B1之再生畫像RB1,同時,使用再 馨生畫像RB1和參考畫像ri〇RP3,生成更新參考畫像( ) RB1,使用再生畫像RB13和參考畫像RP3ri〇,生成 更新參考畫像(RP3r1q ) RB1,分別成爲參考畫像而儲存於 框s己彳思體20。寥考畫像(RI〇RP3) ^以及(RP3R1G) RB1係 使用在對象畫像B2之編碼•解碼。 以下’就本實施形態之動畫像編碼裝置10之動作而進 行I兌明。同時’說明本發明之實施形態之動畫像編碼方法 °第5圖係本發明之實施形態之動畫像編碼方法之流程圖 -30- (27) 1259729 正如第5圖所示,在該動畫像編碼方法,首先構成動 畫像之複數個晝像係依序地輸入成爲編碼對象之對象畫像 (步驟SOI )。接著,藉由前處理部14而進行前述之前處 理(步驟S 0 2 )。 接著,藉由預測畫像生成部1 6而生成對象畫像之預測 畫像(步驟S03 )。執行該預測畫像和對象畫像間之差異 演算,生成差異部分畫像(步驟S04 )。 • 接著,藉由編碼部22執行編碼而由差異部分畫像,來 生成編碼差異部分訊號(步驟S05 )。接著,藉由利用可 變長度編碼部24,來使得編碼差異部分訊號、動作向量, 進行可變長度編碼,而生成位元串流(步驟S06 )。 接著,藉由解碼部28執行解碼而由編碼差異部分訊號 ’來生成解碼差異部分畫像(步驟S07 )。解碼差異部分 畫像係藉由再生畫像生成部30而加算於預測畫像,結果, 生成再生畫像(步驟S08 )。接著,藉由畫像更新部32而 ^ 生成更新畫像(步驟S09 ),該更新畫像係儲存於框記憶 體2〇(步驟S10)。 以下,就步驟S09之更新畫像生成而詳細地進行說明 °第6圖係關於更新畫像生成之流程圖。在更新畫像生成 之處理,分別由再生畫像生成部30輸入再生畫像至畫像更 新部32,由框記憶體20輸入參考畫像至畫像更新部32 (步 驟 S 〇 9 — 1 ) 〇 接著,藉由利用更新再生畫像生成部50,來使用參考 畫像,將再生畫像予以更新,而生成更新再生畫像(步驟 -31 - (28) 1259729 S Ο 9 — 2 )。此外,藉由利用更新參考畫像生成部5 2,來使 用再生畫像,將參考畫像予以更新,而生成更新參考畫像 (步驟S09— 3 )。更新再生畫像及更新參考畫像係成爲更 新畫像而儲存於框記憶體20 (步驟SO 9 — 4 )。 以下,就更新再生畫像及更新參考畫像之生成而詳細 地進行說明。第7圖係關於更新畫像之詳細生成之流程圖 。以下,以再生畫像及參考畫像之某一邊,來作爲第1畫 Φ 像,以再生畫像及參考畫像之其他邊,來作爲第2畫像, 就更新再生畫像及更新參考畫像之生成而進行說明。由以 下之說明而理解:如果第1畫像成爲再生畫像而第2畫像成 爲參考畫像的話,則生成更新再生畫像,來作爲更新畫像 ,如果第1畫像成爲參考畫像而第2畫像成爲再生畫像的話 ,則生成更新參考畫像,來作爲更新畫像。 正如第7圖所示,首先輸入第1畫像和第2畫像(步驟 S21)。接著,設定變數N成爲1(步驟S22)。該變數N係 分割弟1畫像之區塊之個數。區塊之尺寸係axa,例如可以 採用4 X 4。 接著,第1畫像之第N個區塊之預測區塊係由第2畫像 所求出(步驟S23)。接著,藉由求出第1畫像之第N個區 塊和預測區塊間之重疊平均而生成該第N個區塊之更新畫 像(步驟S24 )。 接著,N係增加「1」(步驟S 25 ),增加之N係測試 是否超過最大區塊數(步驟S26)。在該測試之結果成爲 N〇 (否定)之狀態下,重複地進行由步驟S 23開始之處理 -32-
1259729 (29) ,在Yes (肯否定)之狀態下,結束處理。 以下,就啓動電腦來作爲動畫像編碼裝置1〇之動畫像 編碼程式而進行說明。第8圖係同時顯示本發明之實施形 態之動畫像編碼程式之構造和記錄媒體之圖。 正如第8圖所示,動畫像編碼程式7 〇係提供儲存於記 錄媒體1〇〇。作爲記錄媒體100係例舉軟碟片、CD - ROM 、DVD或ROM等之記錄媒體或半導體記憶體等。 • 第9圖係顯示用以執行記錄媒體所記憶之程式之電腦 之硬體構造之圖,第10圖係顯示用以執行記錄媒體所記憶 之程式之電腦之立體圖。正如第9圖所示,電腦110係具備 :軟碟驅動裝置、CD - ROM驅動裝置、DVD驅動裝置等 之讀取裝置1 1 2、常駐有作業系統之作業用記憶體(RAM )114、將記憶於記錄媒體100之程式予以記億之記憶體 116、顯示裝置118、成爲輸入裝置之滑鼠120及鍵盤122、 用以進行資料等之傳送接收之通訊裝置124、以及控制程 Φ 式執行之CPU126。電腦110係在記錄媒體1〇〇插入至讀取 裝置112時,能夠由讀取裝置112來存取於記錄媒體100所 儲存之動畫像編碼程式70,可以藉由該動畫像編碼程式7〇 而啓動作爲動畫像編碼裝置10。 正如第1 0圖所示,動畫像編碼程式7 0係可以透過網路 而提供作爲重疊於搬送波之電腦資料訊號1 3 0。在該狀:態、 下,電腦11 0係可以將藉由通訊裝置1 2 4所接收之動畫像編 碼程式70 ’儲存於記憶體116 ’來執行該動畫像編碼程式 70 〇 -33- (30) 1259729 正如第8圖所示,動畫像編碼程式70係具備:總括處 理之主模組7 1、前處理模組72、預測畫像生成模組74、差 異部分畫像生成模組76、儲存模組78、編碼模組80、可變 長度編碼模組82、解碼模組84、再生畫像生成模組86和晝 像更新模組88。此外,編碼模組80係藉由轉換副模組92和 量化副模組94而構成,解碼模組84係藉由逆量化副模組96 和逆轉換副模組98而構成。 ® 前處理模組72、預測畫像生成模組74、差異部分畫像 生成模組76、儲存模組78、編碼模組80、可變長度編碼模 組82、解碼模組84、再生畫像生成模組86、畫像更新模組 88、轉換副模組92、量化副模組94、逆量化副模組96及逆 轉換副模組98實現於電腦之功能係分別相同於前述之前處 理部1 4、預測畫像生成部1 6、差異部分畫像生成部1 8、框 記憶體20、編碼部22、可變長度編碼部24、解碼部28、再 生畫像生成部3 0、畫像更新部3 2、轉換部3 4、量化部3 6、 ® 逆量化部3 8及逆轉換部4 0中之對應要素。 以上,就本發明之動畫像編碼裝置10而進行說明,但 是,藉由畫像更新部32所造成之處理係也可以僅執行在有 效於編碼效率之提升之狀態下。在該狀態下,正如第1圖 所示,動畫像編碼裝置1 0係可以還具備控制部42。 控制部42係測試在動畫像是否有場面之變化。在動畫 像是否有場面之變化係例如能夠由不同之輸入畫像間之相 關性之大小而決定。控制部42係在有場面變化之狀態下, 將指示不生成更新畫像之旨意之更新控制訊號,透過線 -34- 1259729 (31)
L36而輸出至畫像更新部32。另一方面,控制部42係在場 面變化少之狀態下,將指示生成更新畫像之旨意之更新控 制訊號,輸出至畫像更新部32。 更新控制訊號係可以得到第1狀態、第2狀態、第3狀 態及第4狀態之任何一種。畫像更新部32係可以在更新控 制訊號成爲第1狀態之情況下,生成更新再生畫像,在更 新控制訊號成爲第2狀態之情況下,生成更新參考畫像, • 在更新控制訊號成爲第3狀態之情況下,生成更新再生畫 像及更新參考畫像,在更新控制訊號成爲第4狀態之情況 下,也生成更新再生畫像及更新參考畫像之任何一種。 控制部42係也輸出更新控制訊號至可變長度編碼部24 。可變長度編碼部24係使得更新控制訊號,包含在動畫像 之各個畫像之頂部而進行傳訊。更新控制訊號係成爲用以 表示前述狀態所需要之最小位元數之訊號而包含於頂部。 例如在許可更新控制訊號來得到第3狀態及第4狀態之情況 • 下,可以使得更新控制訊號,作爲第3狀態成爲「1」及第 4狀態成爲「0」之1位元訊號。 此外,在電腦110還實現相當於控制部42之功能之狀 態下,正如第8圖所示,可以在動畫像編碼程式7 〇還具備 將相當於控制部4 2之功能來實現於電腦11 〇之控制模組9 0 接著’就本發明之實施形態之動畫像解碼裝置而進行 說明。第1 1圖係顯示本發明之實施形態之動畫像解碼裝置 之構造之圖。第11圖所示之動畫像解碼裝置14〇係可以由 -35- (32) 1259729 藉著動畫像編碼裝置10所生成之位元串流,來再生動畫像 之裝置。 動畫像解碼裝置140係可以在物理上,成爲具備: CPU (中央處理裝置)、所謂記憶體之記憶裝置、顯示裝 置、通訊裝置等之電腦。此外,動畫像解碼裝置140係可 以是所謂行動電話之移動式通訊終端機。也就是說,可以 在動畫像解碼裝置140,廣泛地應用可資訊處理之裝置。 β 正如第1 1圖所示,動畫像解碼裝置1 4 0係在功能上, 具備:輸入端子142、可變長度解碼部144、解碼部(解碼 手段)146、預測畫像生成部(預測畫像生成手段)148、 框記憶體(儲存手段)150、再生畫像生成部(再生畫像 生成手段)152、輸出端子154和畫像更新部(畫像更新手 段)156 。 在輸入端子142,輸入藉由動畫像編碼裝置10所生成 之位元串流。輸入端子142係輸出該位元串流至可變長度 # 解碼部144。 可變長度解碼部144係接受經由線L40所輸出之位元串 流,藉由對於該位元串流所包含之編碼資料來進行可變長 度解碼而復元動作向量及編碼差異部分訊號。 解碼部146係執行相同於動畫像編碼裝置10之解碼部 28之同樣處理。解碼部146係具有相同於逆量化部38之同 樣之逆量化部160和相同於逆轉換部40之同樣之逆轉換部 1 6 2,經由線L4 2而接受編碼差異部分訊號,由該編碼差異 部分訊號,來生成解碼差異部分畫像。 -36- 1259729
預測畫像生成部148係藉由相同於動畫像編碼裝置10 之預測畫像生成部1 6之同樣之動作補償預測而生成預測畫 像。具體地說,預測畫像生成部148係使用經由線L44所輸 出之動作向量和經由線L46所輸出且儲存於框記憶體150之 參考畫像,來生成預測畫像。在此,在框記憶體150,在 構成動畫像之畫像中,根據相對於比起成爲解碼對象之對 象畫像還更加前面且成爲解碼對象之畫像所生成之再生畫 • 像而造成之畫像係成爲參考畫像而進行儲存。 再生畫像生成部152係藉著將經由線L48且由解碼部 146所輸出之解碼差異部分畫像和經由線L50且由預測畫像 生成部148所輸出之預測畫像予以加算而生成再生畫像。 該再生畫像係在輸出端子154,經由線L5 2而進行輸出,同 時,儲存於框記憶體150。 畫像更新部15 6係具有相同於動畫像編碼裝置10之畫 像更新部32之同樣構造。畫像更新部156係接受經由線L54 ® 所輸出之再生畫像以及經由線L5 6所輸出之參考畫像。畫 像更新部15 6係藉由以再生畫像及參考畫像之某一邊,作 爲第1畫像,以再生畫像及參考畫像之其他邊,作爲第2畫 像,重疊加算第1畫像和第2畫像,而生成更新畫像。該更 新畫像係經由線L5 8而儲存於框記憶體150,在不同之對象 畫像之解碼,使用作爲參考畫像。該重疊加算係在第1畫 像、第2畫像,適用任意之比例之比重,使得加算後之像 素値,成爲要求之位準內之値。 藉由畫像更新部15 6所生成之更新畫像係儲存於框記 -37- 1259729 (34) λ 憶體15 Ο ’在構成動晝像之畫像中,藉由預測畫像生成部 148而使用作爲比起對象畫像還更加後面並且用以生成相 對於成爲解碼對象之畫像之預測畫像之參考畫像。 也可以在動畫像解碼裝置140,使用第2圖所示之畫像 更新部4 8 ’來作爲畫像更新部〗5 6。在動畫像解碼裝置卫4 〇 之狀態下,第2圖所示之線L70係相當於線L54,線L72係 相當於線L56,線L74係相當於線L58。此外,畫像更新部 ^ 48之詳細係前面敘述,希望就其詳細之說明而參考本說明 書之畫像更新部48之說明。 此外,動畫像解碼裝置140係可以還具備控制部158。 控制部1 5 8係在藉由動畫像編碼裝置χ 〇所生成之位元串流 而包含前述更新控制訊號之狀態下,由可變:長度解碼部 144,透過線L60而接受該更新控制訊號。控制部i58係配 合於得到前述之更新控制訊號之狀態,經由線L62而控制 畫像更新部1 5 6之更新畫像之生成。 Φ 以下,就動畫像解碼裝置140之動作而進行說明。同 時’就本發明之實施形態之動畫像解碼方法而進行說明。 第1 2圖係顯示本發明之實施形態之動畫像解碼方法之流程 圖。 正如第12圖所示,在該動畫像解碼方法,首先在輸入 端子142,輸入位元束流(步驟S31 )。藉由使得包含於該 位元束流之編碼資料,利用可變長度解碼部1 4 4,來進行 可變長度解碼,而生成動作向量及編碼差異部分訊號(步 驟 S 3 2 )。 -38- (35) 1259729 接著,藉著解碼部146,而由編碼差異部分訊號,來 生成解碼差異部分畫像(步驟S33 )。此外,藉由預測畫 像生成部1 4 8,而使用儲存於動作向量及框記憶體1 5 0之參 考畫像,生成預測畫像(步驟S34 )。 接著,藉由利用再生畫像生成部1 5 2,來加算解碼差 異部分畫像和預測畫像,而生成再生畫像(步驟S35 )。 接著,藉由畫像更新部1 5 6而使用再生畫像和框記憶 • 體150所儲存之參考畫像,來生成更新畫像(步驟S36)。 就更新畫像之生成而言,相同於使用第6圖及第7圖之說明 ,因此,在此,省略其詳細之說明。 接著,藉由畫像更新部15 6所生成之更新畫像係儲存 於框記憶體150 (步驟S37 ),在不同之對象畫像之解碼, 使用作爲參考畫像。 以下,就本發明之實施形態之動畫像解碼程式而進行 說明。第1 3圖係同時顯示本發明之實施形態之動畫像解碼 # 程式之構造和記錄媒體之圖。 正如第13圖所示,動畫像解碼程式170係儲存於記錄 媒體100。作爲記錄媒體1〇〇係例舉軟碟片、CD— ROM、 DVD或ROM等之記錄媒體或半導體記憶體等。 動畫像解碼程式170係在插入至第9圖及第10圖所示之 電腦110之讀取裝置112時,電腦110係能夠存取於記錄媒 體1 00所儲存之動畫像解碼程式1 70。可以藉由該動畫像解 碼程式170而啓動電腦110來作爲動畫像解碼裝置140。此 外,正如第10圖所示,動畫像解碼程式170係可以透過網 •39- 1259729 I年月E丨修(
路而提供作爲重疊於搬送波之電腦資料訊號1 3 〇。在該狀 態下,電腦110係可以將藉由通訊裝置124所接收之動畫像 解碼程式1 7〇,儲存於記憶體11 6,來執行該動畫像解碼程 式 170。 正如第13圖所示,動畫像解碼程式170係具備:總括 處理之主模組1 7 1、可變長度解碼模組1 7 2、解碼模組1 7 4 、預測畫像生成模組1 7 6、儲存模組1 7 8、再生畫像生成模 Φ 組180和畫像更新模組182。此外,解碼模組174係具有逆 量化副模組186和逆轉換副模組188。 可變長度解碼模組1 72、解碼模組1 74、預測晝像生成 模組176、儲存模組178、再生畫像生成模組180、畫像更 新模組1 8 2、逆量化副模組1 8 6和逆轉換副模組1 8 8實現於 電腦之功能係分別相同於前述之可變長度解碼部1 44、解 碼部146、預測畫像生成部148、框記憶體150、再生畫像 生成部152、畫像更新部156、逆量化部160和逆轉換部162 # 中之對應要素。此外,動畫像解碼程式170係也可以還具 有相當於前述控制部15 8之功能來實現於電腦110之控制模 組 1 8 4 〇 以下,說明本實施形態之動畫像編碼裝置10及動畫像 解碼裝置140之作用和效果。在動畫像編碼裝置10,藉由 在已經儲存於再生畫像或框記憶體20之參考畫像之某一邊 之第1畫像,對於該再生畫像或該參考畫像之其他邊之第2 畫像,來進行重疊加算,而生成更新畫像。該更新畫像係 使用作爲用以生成不同之對象畫像之預測畫像之參考畫像 -40 - (37) 1259729 。因此,使用藉由根據加算所造成之平均化而削減雜訊之 參考畫像,因此,削減由於編碼所造成之動畫像之資料量 ,來提高編碼效率。此外,在動畫像編碼裝置1 0,生成再 生畫像和參考畫像來進行平均化之更新畫像,因此,並無 再生畫像或參考畫像,能夠將畫像之細節,反映於更新畫 像。因此,還更加削減由於編碼所造成之動畫像之資料量 〇 Φ 此外,如果藉由動畫像解碼裝置140的話,則可以由 藉著動畫像編碼裝置1 〇所生成之位元束流,來忠實地復元 動畫像。 此外,在動畫像編碼裝置10及動畫像解碼裝置140, 正如前面敘述,根據動畫像之場面之變化而提高動畫像之 編碼效率,因此,可以僅在有效之狀態下,來生成更新畫 像。在該狀態下,正如前面敘述,藉由最低限度之必要之 位元而表示關於是否生成更新畫像之指示係可以使用可能 # 之更新控制訊號。 此外,在動畫像解碼裝置1 4 0,畫像更新部係藉由將 顯示第2畫像相對於第1畫像之偏差之動作量予以求出而生 成更新畫像,因此,動畫像編碼裝置1 0係不需要將用以生 成更新畫像之動作量(動作向量)來傳訊至動畫像解碼裝 置1 4 0。因此,動畫像編碼裝置1 〇係還更加削減應該傳訊 之位元串流之資料量。 此外’在動畫像編碼裝置10及動畫像解碼裝置14〇, 在順方向預測之狀態下,並無重新排列畫像,實現平滑化 -41 - (38) 1259729 且減低參考畫像之雜音。 此外,本發明係並非限定於本實施形態所揭示之特定 構造。例如在動畫像編碼裝置10及動畫像解碼裝置140, 使得儲存於框記憶體而用以生成預測畫像所參考之畫像, 來作爲參考畫像,但是,也可以使得不使用於預測畫像之 生成且使用於前述畫像更新之畫像,來作爲參考畫像。該 參考畫像係可以儲存在動畫像編碼裝置10及動畫像解碼裝 • 置140之前述框記憶體,也可以儲存在不同於該框記憶體 之框記憶體。此外,該參考畫像係可以成爲不同於包含根 據前述編碼差異部分訊號所造成之資料之位元串流之濾波 器或位元串流,來進行傳送。 此外,在動畫像編碼裝置10及動畫像解碼裝置140, 使用儲存於框記憶體之參考畫像和再生畫像而進行畫像更 新,但是,也可以藉由儲存於框記憶體之畫像間,來進行 畫像更新。也就是說,在動畫像編碼裝置10及動畫像解碼 • 裝置14〇,在再生畫像儲存於框記憶體之前,進行畫像更 新,但是,也可以在再生畫像成爲參考畫像而儲存於框記 憶體之後,使用不同於該參考畫像之參考畫像而進行畫像 更新處理。 但是,在前述實施形態,說明爲了更新儲存於動畫像 編碼裝置10及動畫像解碼裝置140之框記憶體之畫像,因 此,使用再生畫像或該框記憶體所儲存之其他畫像來進行 ,但是,也可以使用解碼差異部分畫像而更新儲存於框記 億體之畫像,就此種變化例而言,使用第1 4圖至第1 6圖, -42- (39) 1259729 來詳細地進行說明。 第1 4圖係顯示本發明之動畫像編碼裝置之變化之構造 圖。基本之構造和功能係相同於第1圖,但是,在畫像更 新部3 2,除了來自再生畫像生成部3 0之再生畫像和來自框 記憶體20之參考畫像以外,成爲來自解碼部28之輸出之解 碼差異部分畫像係經由線L26b而進行輸入。畫像更新部32 係藉由以解碼差異部分畫像,來作爲第1畫像,以參考畫 • 像,來作爲第2畫像,重疊加算第1畫像和第2畫像,而生 成更新畫像。該更新畫像係使用在對於框記憶體20所儲存 之不同之對象畫像之編碼。畫像之更新係正如在第2圖所 說明的,造成動作補償,因此,需要有動作資訊。在本實 施形態,動作資訊係由第14圖之預測畫像生成部16所提供 。就畫像更新部32而言,使用第1 5圖而說明詳細。此外, 在重疊加算,比重係也得到負値,在該狀態下,成爲減法 處理。 # 第15圖係顯示動畫像解碼裝置相對於第14圖之動畫像 編碼裝置之構造之圖。第15圖所示之動畫像解碼裝置140 係能夠由藉著第14圖之動畫像編碼裝置10所生成之位元串 流來再生動畫像之裝置。基本之構造和功能係相同於第1 1 圖,但是,畫像更新部1556係除了經由線L1554所輸入之 再生畫像及經由線L1 55 6所輸入之參考畫像以外,使得成 爲來自解碼部1546之輸出之解碼差異部分畫像,經由線 L15 60而進行輸入。晝像更新部1556係藉由以解碼差異部 分畫像(經由線L1560 ),來作爲第1畫像,以參考畫像( -43- (40) ................. 1259729 經由線LI 556 ),來作爲第2畫像,重疊加算第1畫像和第2 畫像,而生成更新畫像。該更新畫像係儲存於框記憶體 155 0而使用在下一次之解碼處理。 具體地說,對於經由線L1 5 60所輸入之解碼差異部分 畫像,以藉著動作補償部15 64經由線L1 543而由可變長度 解碼部15 44所傳送之動作資訊,作爲根本,來施行動作補 償處理。其結果係經由線L1562而傳送至重疊加算部1566 Φ ,重疊加算於由框記憶體1550所傳送之參考畫像。在本實 施形態,在動作補償部1564之輸出,附加負的比重,加算 於參考畫像。重疊加算部15 66之輸出係經由開關15 68而回 復到框記憶體1550。另一方面,來自再生畫像生成部1552 之再生畫像係也經由開關15 68而儲存於框記憶體1550。像 這樣’儲存於框記憶體之參考畫像係以解碼差異部分畫像 作爲根本而進行更新。 第16圖係顯示動畫像解碼裝置相對於第14圖之動畫像 # 編碼裝置之其他構造之圖。正如第1 6圖所示,動畫像解碼 裝置140係在功能上,具備:輸入端子1642、可變長度解 碼部1 6 4 4、解碼部(解碼手段)1 6 4 6、動作補償部(預測 畫像生成手段)1 648、框記憶體(儲存手段)ι65〇、再生 畫像生成部(再生畫像生成手段)1652、輸出端子1654和 畫像更新部(畫像更新手段)1 65 6。 在輸入端子1642,輸入藉由第14圖之動畫像編碼裝置 10所生成之位元束流。輸入端子1642係在可變長度解碼部 1644,輸出該位元束流。可變長度解碼部1644係藉由接受 -44 - (41) 1259729 經由線LI 640所輸出之位元束流,對於該位元束流所包含 之編碼資料,進行可變長度解碼,而復元動作向量及編碼 差異部分訊號。 •解碼部1 6 4 6係具有逆量化部1 6 6 0和逆轉換部1 6 6 2,經 由線L1 642而接受編碼差異部分訊號,由該編碼差異部分 訊號,來生成解碼差異部分畫像。 畫像更新部1 6 5 6係接受經由線L 1 6 6 0所輸出之解碼差 # 異部分畫像及經由線L1 65 6所輸出之參考畫像。畫像更新 部165 6係藉由以解碼差異部分畫像,來作爲第1畫像,以 參考畫像,來作爲第2畫像,重疊加算第1畫像和第2畫像 ,而生成更新畫像。具體地說,對於經由線L1 6 60所輸入 之解碼差異部分畫像,以藉著動作補償部16 66經由線 L1 644所傳送之動作資訊,作爲根本,來施行動作補償處 理。其結果係經由線L1 6 62而傳送至重疊加算部1664,重 疊加算於由框記憶體1650所傳送之參考畫像。在本實施形 # 態,在動作補償部1666之輸出,附加負的比重,加算於參 考畫像。成爲重疊加算部1664之輸出之更新畫像係經由線 L165 8而儲存於框記憶體1 650,同時,使用在下面說明之 動作補償部。 動作補償部1 6 4 8係使用經由線L1 6 4 4所輸出之動作向 量及經由線L1 646所輸出且儲存於框記憶體1 650之參考畫 像,來生成預測畫像。在此,在框記憶體1 6 5 0,在構成動 畫像之畫像中,成爲根據比起解碼對象之對象畫像還更加 前面所生成之再生畫像之畫像或來自畫像更新部1 65 6之更 -45- 1259729 {《\ (42) 新畫像係成爲參考畫像而進行儲存。 再生畫像生成部1652係藉著將經由線L1 648由解 1 6 4 6所輸出之解碼差異部分畫像和經由線l 1 6 5 0由動 償部1 6 4 8所輸出之預測畫像予以加算而生成再生畫像 再生畫像係在輸出端子1 6 5 4,經由線L 1 6 5 2而進行輸 同時,儲存於框記億體1 650。 像這樣,可以藉由使用解碼差異部分畫像,更新 • 畫像,而具有使得由於量化所造成之歪斜呈同樣地分 參考畫像和再生畫像之效果,能夠更加有效率地進行 〇 此外,在本實施形態,解碼差異部分畫像係直接 '入至畫像更新部,但是,也可以將解碼差異部分畫像 存於框記憶體,由框記憶體來讀出解碼差異部分畫像 用在晝像更新。 此外,畫像更新部之功能係可以切換動作之狀態 • 動作之狀態,來進行編碼•解碼處理。例如在第16圖 以進行控制而在不啓動動作補償部164 8和再生晝像生 1 65 2時,啓動畫像更新部165 6,相反地,在啓動動作 部1648和再生畫像生成部1 65 2時,不啓動畫像更新部 〇 以下,就電腦作爲第1 5圖或第1 6圖之動畫像解碼 140而進行啓動之動畫像解碼程式,來進行說明。第 係同時顯示前述動畫像解碼程式1 90之構造和記錄媒 圖。 碼部 作補 。該 出, 參考 散於 編碼 地輸 來儲 而使 和不 ,可 成部 補償 1656 裝置 17圖 體之 -46 - (43) 1259729 正如第17圖所示,動畫像解碼程式190係提供儲存於 記錄媒體1 〇 〇。作爲記錄媒體1 0 0係例舉軟碟片、c D -ROM、DVD或ROM等之記錄媒體或半導體記憶體等。 動畫像解碼程式190係在插入至第9圖及第1〇圖所示之 電腦11 〇之讀取裝置11 2時,電腦1 1 〇係能夠存取於記錄媒 體100所儲存之動畫像解碼程式BO。可以藉由該動畫像解 碼程式190而啓動電腦110來作爲動畫像解碼裝置140。此 # 外,正如第10圖所示,動畫像解碼程式190係可以透過網 路而提供作爲重疊於搬送波之電腦資料訊號130。在該狀 態下,電腦11 〇係可以將藉由通訊裝置1 2 4所接收之動畫像 解碼程式1 90,儲存於記憶體11 6,來執行該動畫像解碼程 式 190。 正如第17圖所示,藉由啓動作爲第15圖之動畫像解碼 裝置140之動畫像解碼程式和啓動作爲第16圖之動畫像解 碼裝置140之動畫像解碼程式而成爲共通構造,動畫像解 φ 碼程式1 9 0係具備:總括處理之主模組1 9 1、可變長度解碼 模組1 9 2、解碼模組1 95、預測畫像生成模組1 96、儲存模 組197、再生畫像生成模組198和畫像更新模組199。此外 ’解碼模組1 9 5係具有逆星化副模組1 9 3和逆轉換副模組 194 〇 就啓動作爲第15圖之動畫像解碼裝置14〇之動畫像解 碼程式而言,可變長度解碼模組1 92、解碼模組1 95、預測 畫像生成模組1 9 6、儲存模組1 9 7、再生畫像生成模組1 9 8 及畫像更新模組199實現於電腦之功能係分別相同於前述 -47-
(44) 一 — ' I 1259729 之可變長度解碼部I544、解碼部1546、動作補償部1548、 框記憶體1 5 5 0、再生畫像生成部1 5 5 2及晝像更新部1 5 5 6中 之對應要素。 此外,就啓動作爲第1 6圖之動畫像解碼裝置1 40之動 畫像解碼程式而言,可變長度解碼模組192、解碼模組195 、預測畫像生成模組196、儲存模組197、再生畫像生成模 組1 9 8及畫像更新模組1 9 9實現於電腦之功能係分別相同於 Φ 前述之可變長度解碼部1644、解碼部1646、動作補償部 1 648、框記憶體1650、再生畫像生成部165 2及畫像更新部 1 656中之對應要素。 此外,就電腦作爲第1 4圖之動畫像解碼裝置1 40來進 行啓動之動畫像編碼程式之構造而言,相同於前述第8圖 之構造。 此外’在動畫像編碼裝置10及動畫像解碼裝置140, 更新畫像係使用作爲參考畫像,但是,並非限定於此,該 # 更新畫像係也可以輸出至顯示裝置。 以上’在理想之實施形態,圖示及說明本發明之原理 ’但是’使得當前業者認識本發明能夠不脫離此種原理而 可以變更於配置及細節。本發明係並非限定於本實施形態 所揭示之特定之構造。因此,在來自專利申請範圍及其精 神範圍之全部之修正和變更,要求權利。 【圖式簡單說明】 第1圖係顯示本發明之實施形態之動畫像編碼裝置之 -48 - (45) 1259729 構造之圖。 第2圖係顯不畫像更新部之某一實施形態之構造之圖 〇 第3圖係用以說明在使用順方向預測之狀態下之畫像 更新之槪念之圖。 第4圖係用以說明在使用雙方向預測之狀態下之畫像 更新之槪念之圖。 第5圖係顯示本發明之實施形態之動畫像編碼方法之 流程圖。 第6圖係關於更新畫像生成之流程圖。 第7圖係關於更新晝像之詳細生成之流程圖。 第8圖係同時顯示本發明之實施形態之動畫像編碼程 式之構造和記錄媒體之圖。 第9圖係顯示用以執行記錄媒體所記憶之程式之電腦 之硬體構造之圖。 第10圖係顯示用以執行記錄媒體所記憶之程式之電腦 之硬體構造之立體圖。 第11圖係顯示本發明之實施形態之動畫像解碼裝置之 構造之圖。 第12圖係顯示本發明之實施形態之動畫像解碼方法之 流程圖。 第1 3圖係同時顯示本發明之實施形態之動畫像解碼程 式之構造和記錄媒體之圖。 第1 4圖係顯示本發明之實施形態之動畫像編碼裝置之 -49- (46) 1259729 構造之變化例之圖。 第15圖係顯示本發明之實施形態之動畫像解 士 * 置 構造之第1變化例之圖。 第1 6圖係顯示本發明之實施形態之動晝像解碼裝置之 構造之第2變化例之圖。 第1 7圖係同時顯示本發明之實施形態之動晝像解碼程 式之構造之變化例和記錄媒體之圖。
【主要元件符號說明】
L2 線 L4 線 L6 線 L8 線 L10 線 L12 線 L14 線 L1 6 線 L18 線 L20 線 L22 線 L24 線 L26b 線 L26 線 L28 線 -50- (47) 1259729
L30 線 L32 線 L34 線 L36 線 L40 線 L42 線 L44 線 L46 線 L48 線 L50 線 L52 線 L54 線 L56 線 L58 線 L60 線 L62 線 L70 線 L7 2 線 L74 線 L1540 線 L1542 線 L1543 線 L1544 線 L1546 線 1259729 L1548 線 L1550 線 L1552 線 L1554 線 L1556 線 L1558 線 L1560 線 L1562 線 L1564 線 L1640 線 L1642 線 L 1 6 4 3 線 L1644 線 L1646 線 LI 648 線 L1650 線 L1652 線 L1654 線 L1656 線 L1658 線 L1660 線 LI 662 線 10 動畫像編碼裝置 12 輸入端子 -52 - (49)1259729
14 Λ·/一 刖 處 理 部 16 預 測 畫 像 生 成 部 ( 預 測 室 里 像 生 成 手 段 ) 18 差 異 部 分 畫 像 生 成 部 ( 差 異 部 分 畫 像 生成手段) 20 框 記 憶 體 ( 儲 存 手 段 ) 2 2 編 碼 部 ( 編 碼 手 段 ) 24 可 變 長 度 編 碼 部 26 輸 出 端 子 28 解 碼 部 ( 解 碼 手 段 ) 30 再 生 畫 像 生 成 部 ( 再 生 畫 像 生 成 手 段 ) 32 畫 像 更 新 部 ( 畫 像 更 新 手 段 ) 34 轉 換 部 36 量 化 部 38 逆 量 化 部 40 逆 轉 換 部 42 控 制部 48 畫 像 更 新 部 50 更 新 再 生 畫 像 生 成 部 52 更 新 再 生 畫 像 生 成 部 54 開 關 56 動 作 檢 測 部 58 動 作 補 償 部 60 重 疊 加 算 部 62 動 作 檢 測 部 64 動 作 補 償 部 -53 - (50) 重疊加算部 動畫像編碼程式 主模組 前處理模組 預測畫像生成模組 差異部分畫像生成模組 儲存模組 編碼模組 可變長度編碼模組 解碼模組 再生畫像生成模組 畫像更新模組 控制模組 轉換副模組 量化副模組 逆量化副模組 逆轉換副模組 記錄媒體 電腦 讀取裝置 作業用記憶體 記憶體 顯示器 滑鼠 -54- (51)1259729 122 124 126 130 140 142 144 φ 146 148 150 152 154 156 158 160 # 162 170 171 172 174 176 178 180 182 鍵盤
通訊裝置 CPU 電腦訊號 動畫像解碼裝置 輸入端子 可變長度解碼部 解碼部(解碼手段) 預測畫像生成部(預測畫像生成手段) 框記憶體(儲存手段) 再生畫像生成部(再生畫像生成手段) 輸出端子 畫像更新部(畫像更新手段) 控制部 逆量化部 逆轉換部 動畫像編碼程式 主模組 可變長度編碼模組 編碼模組 預測畫像生成模組 儲存模組 再生畫像生成模組 畫像更新模組 -55- 1259729
(52) 184 控制 186 逆量 188 逆轉 190 動畫 191 主模 192 可變 193 逆量 194 逆轉 195 編碼 196 動作 197 儲存 198 再生 199 畫像 1542 輸入 1544 可變 1546 解碼 1548 動作 1550 框記 1552 再生 1554 輸出 1556 畫像 1560 逆量 1562 逆轉 1564 動作
模組 化副模組 換副模組 像編碼程式 組 長度編碼模組 化副模組 換副模組 模組 補償模組 模組 畫像生成模組 更新模組 端子 長度解碼部 部 補償部 憶體 畫像生成部 端子 更新部 化部 換部 補償部 -56- (53)1259729 1566 重疊加算部 1568 開關 1642 輸入端子 1644 可變長度解碼部 1646 解碼部(解碼手段) 1648 動作補償部 1650 框記憶體(儲存手段) 1652 再生畫像生成部(再生畫像生成手段) 1654 輸出端子 1656 畫像更新部(畫像更新手段) 1660 逆量化部 1662 逆轉換部 1664 重疊加算部 1666 動作補償部 1259729 第市It案*中文圖式替換頁 「年戾國郎弈_月修薄赫正 756996 #
丽 T—H 1259729 第7圖
Γ μ 3
1259729 ή、 \ \ 第8圖 7 0
動畫像編碼程式 1259729 ο # m 丽 r—Η 卜、
1259729 ..’—Ί 第13圖 ο ο 主模組 可變長度解碼模組
逆量化副模組 逆轉換副模組 解碼模組 預測畫像生成模組 儲存模組 再生畫像生成模組 畫像更新模組 控制模組 17 0 17 1 17 2 18 6 18 8 -.17 4 17 6 17 8 18 0 .18 2 18 4 動畫像解碼程式 1259729 φ
1259729 0 画91姝 0叫
1259729 ®9I躲
1259729 第17圖 ---Ο Ο
1259729 f 从·一=|«<--〜 ---------------------------- 丨#|44 q^op、號萬利申蕭#文說明書替換頁 j "Γ Λί良_、舞年4月,曰修正 1說C單 第簡 igb • ·# 為符 圖件 表元 代之 定圖 :指表 圖案代 表本本 代 \iy 定一二 匕日Γν L2 線 10 動畫像編碼裝置 L4 線 12 輸入端子 L6 線 14 前處理部 L8 線 16 預測畫像生成部(預測畫像生成手段) L12 線 18 差異部分畫像生成部(差異部分畫像生成手段) L16 線 20 框記憶體(儲存手段) L18 線 22 編碼部(編碼手段) L20 線 24 可變長度編碼部 L22 線 26 輸出端子 L24 線 28 解碼部(解碼手段) L26 線 30 再生畫像生成部(再生畫像生成手段) L28 線 32 畫像更新部(畫像更新手段) L30 線 34 轉換部 L3 2 線 36 量化部 38 40 42 八、 逆量化部 逆轉換部 控制部 本案若有化學式時,請揭示最能顯示發明特徵的化學 式β•無

Claims (1)

1259729 (1) 十、申請專利範圍 1 · 一種動畫像編碼裝置,其特徵爲:具備: • 預測畫像生成手段,係在構成動畫像之複數個畫像中 、,生成作爲編碼對象之對象畫像所相對之預測畫像; 差異部分畫像生成手段,係藉由執行前述對象畫像和 ' 前述預測畫像間之差異演算而生成差異部分畫像; 編碼手段,係藉由編碼前述差異部分畫像而生成編碼 _ 差異部分訊號; 解碼手段,係藉由解碼前述編碼差異部分訊號而生成 解碼差異部分畫像; 再生畫像生成手段,係藉由執行前述解碼差異部分畫 像和前述預測畫像間之和演算而生成再生畫像; 儲存手段,係用以爲了生成預測畫像,因此,藉由前 述預測畫像生成手段而儲存使用之參考畫像;以及, 畫像更新手段,係藉由對於成爲前述再生畫像或儲存 在前述儲存手段之參考畫像之某一邊之第1畫像以及成爲 該再生畫像或該參考畫像之其他邊之第2畫像之至少一部 分,來進行重疊加算,而生成更新畫像;此外, 前述畫像更新手段係將前述更新畫像來儲存在前述儲 存手段,前述預測畫像生成手段係使用儲存在前述儲存手 段之更新畫像,來作爲用以生成不同之對象畫像所相對之 預測畫像之參考畫像。 2 . —種動畫像編碼裝置,其特徵爲:具備: 預測畫像生成手段,係在構成動畫像之複數個畫像中 -58- (2) 1259729 ,生成作爲編碼對象之對象畫像所相對之預測畫像; 差異部分畫像生成手段,係藉由執行前述對象畫像和 前述預測畫像間之差異演算而生成差異部分畫像; 編碼手段,係藉由編碼前述差異部分畫像而生成編碼 差異部分訊號; 解碼手段,係藉由解碼前述編碼差異部分訊號而生成 解碼差異部分畫像;
再生畫像生成手段,係藉由執行前述解碼差異部分畫 像和前述預測畫像間之和演算而生成再生畫像; 儲存手段,係用以爲了生成預測畫像,因此,藉由前 述預測畫像生成手段而儲存使用之參考畫像;以及, 畫像更新手段,係藉由以儲存在前述儲存手段之參考 畫像,作爲第1畫像,以儲存在前述儲存手段且不同於前 述第1畫像之參考畫像和前述再生畫像及前述解碼差異部 分畫像中之至少1種,作爲第2畫像,重疊加算前述第1畫 像和前述第2畫像之至少一部分,而生成更新畫像;此外 前述畫像更新手段係將前述更新畫像來儲存在前述儲 存手段,前述預測畫像生成手段係使用儲存在前述儲存手 段之更新畫像,來作爲用以生成預測畫像之參考畫像。 3 .如申請專利範圍第1項所記載之動畫像編碼裝置, 其中,前述畫像更新手段,係將藉由使用利用前述再生畫 像生成手段所生成之前述再生畫像來作爲前述第1晝像並 且使用儲存在前述儲存手段之前述參考畫像來作爲前述第 -59- (3) 1259729 2畫像且重疊加算該再生畫像和該參考畫像之至少一部分 而生成之更新再生畫像,來作爲前述更新畫像,儲存在前 • 述儲存手段。 . 4 ·如申請專利範圍第1項所記載之動畫像編碼裝置, 其中,前述畫像更新手段,係將藉由使用儲存在前述儲存 手段之前述參考畫像來作爲前述第1畫像並且使用利用前 述再生畫像生成手段所生成之前述再生畫像來作爲前述第 __ 2畫像且重疊加算該參考畫像和該再生畫像之至少一部分 而生成之更新參考畫像,來作爲前述更新畫像,儲存在前 述儲存手段。 , 5 ·如申請專利範圍第1項所記載之動畫像編碼裝置, 其中,前述畫像更新手段係將藉由使用利用前述再生畫像 生成手段所生成之前述再生畫像來作爲前述第1畫像並且 使用儲存在前述儲存手段之前述參考畫像來作爲前述第2 畫像且重疊加算該再生畫像和該參考畫像之至少一部分而 ΦΙ 生成之更新再生畫像,來作爲前述更新畫像,儲存在前述 儲存手段,並且,將藉由使用儲存在前述儲存手段之前述 參考畫像來作爲前述第1畫像並且使用利用前述再生畫像 生成手段所生成之前述再生畫像來作爲前述第2畫像且重 疊加算該參考畫像和該再生畫像之至少一部分而生成之更 新參考畫像,來作爲前述更新畫像,儲存在前述儲存手段 ,前述預測畫像生成手段係使用前述再生畫像、前述更新 再生畫像、前述參考畫像及前述更新參考畫像中之至少一 種,使用作爲用以生成不同之對象畫像所相對之預測畫像 -60- (4) 1259729 之參考畫像。 6 .如申請專利範圍第1項所記載之動畫像編碼裝置’ 其中,前述畫像更新手段係藉由將特定前述第2畫像相對 於前述第1畫像之偏差之動作量予以求出’在根據該動作 量而移動之相對應之位置’將前述第2畫像之至少一部分 ,重疊加算在前述第1畫像’而生成前述更新畫像。 7 . —種動畫像編碼方法,其特徵爲:包含:
預測畫像生成手段係在構成動畫像之複數個畫像中, 生成作爲編碼對象之對象畫像所相對之預測畫像之預測畫 像生成步驟; 差異部分畫像生成手段係藉由執行前述對象畫像和前 述預測畫像間之差異演算而生成差異部分畫像之差異部分 畫像生成步驟; 編碼手段係藉由編碼前述差異部分畫像而生成編碼差 異部分訊號之編碼步驟; 解碼手段係藉由解碼前述編碼差異部分訊號而生成解 碼差異部分畫像之解碼步驟; 再f生畫像生成手段係藉由執行前述解碼差異部分畫像 和前述預測畫像間之和演算而生成再生畫像之再生畫像生 成步驟; 儲存手段係用以爲了生成預測畫像,因此,藉由前述 胃 '測畫像生成手段而儲存使用之參考畫像之儲存步驟;以 及, 晝像更新手段係藉由對於成爲前述再生畫像或儲存在 -61 - (5) 1259729 前述儲存手段之參考畫像之某一邊之第1畫像以及成爲該 再生畫像或該參考畫像之其他邊之第2畫像之至少一部分 *,來進行重疊加算,而生成更新畫像之畫像更新步驟;此 ,外, 在目U述畫像更新步驟’則述畫像更新手段係將目I[述更 ' 新畫像來儲存在前述儲存手段,在前述預測畫像生成步驟 ’前述預測畫像生成手段係使用儲存在前述儲存手段之更 __ 新畫像,來作爲用以生成不同之對象畫像所相對之預測畫 像之參考畫像。 8 · —種記錄動畫像編碼程式之電腦可讀取之媒體,其 .特徵爲:使得電腦發揮作爲:在構成動畫像之複數個畫像 中而生成作爲編碼對象之對象畫像所相對之預測畫像之預 測畫像生成手段、藉由執行前述對象畫像和前述預測畫像 間之差異演算而生成差異部分畫像之差異部分畫像生成手 段、藉由編碼前述差異部分畫像而生成編碼差異部分訊號 01 之編碼手段、藉由解碼前述編碼差異部分訊號而生成解碼 差異部分畫像之解碼手段、藉由執行前述解碼差異部分畫 像和前述預測畫像間之和演算而生成再生畫像之再生畫像 生成手段、用以爲了生成預測畫像而藉由前述預測畫像生 成手段來儲存使用之參考畫像之儲存手段、以及藉由對於 成爲前述再生畫像或儲存在前述儲存手段之參考畫像之某 一邊之第1畫像和成爲該再生畫像或該參考畫像之其他邊 之第2畫像之至少一部分來進行重疊加算而生成更新畫像 之畫像更新手段之功能;此外,前述畫像更新手段係將前 -62- (6) 1259729 述更新畫像來儲存在前述儲存手段’前述預測畫像生成手 段係使用儲存在前述儲存手段之更新畫像’來作爲用以生 成不同之對象畫像所相對之預測畫像之爹考畫像。 9 . 一種動畫像編碼方法’其特徵爲:包含: 預測畫像生成手段係在構成動畫像之複數個畫像中, 生成作爲編碼對象之對象畫像所相對之預測畫像之預測畫 像生成步驟;
差異部分畫像生成手段係藉由執行前述對象畫像和前 述預測畫像間之差異演算而生成差異部分畫像之差異部分 畫像生成步驟; 編碼手段係藉由編碼前述差異部分畫像而生成編碼差 異部分訊號之編碼步驟; 解碼手段係藉由解碼前述編碼差異部分訊號而生成解 碼差異部分畫像之解碼步驟; 再生畫像生成手段係藉由執行前述解碼差異部分畫像 和前述預測畫像間之和演算而生成再生畫像之再生畫像生 成步驟; 儲存手段係用以爲了生成預測畫像,因此,藉由前述 預測畫像生成手段而儲存使用之參考畫像之儲存步驟;以 及, 畫像更新手段係藉由以儲存在前述儲存手段之參考畫 像,作爲第1畫像,以儲存在前述儲存手段且不同於前述 第1畫像之參考畫像和前述再生畫像及前述解碼差異部分 畫像中之至少1種,作爲第2畫像,重疊加算前述第1畫像 -63- (7) 1259729 和Bll述第2畫像之至少一部分,而生成更新畫像之畫像更 新步驟;此外, - 在前述畫像更新步驟,前述畫像更新手段係將前述更 t 新畫像來儲存在前述儲存手段,在前述預測畫像生成步驟 ’前述預測畫像生成手段係使用儲存在前述儲存手段之更 ' 新畫像,來作爲用以生成預測畫像之參考畫像。 1 〇. —種記錄動畫像編碼程式之電腦可讀取之媒體, 其特徵爲:使得電腦發揮作爲:在構成動畫像之複數個畫 像中而生成作爲編碼對象之對象畫像所相對之預測畫像之 預測畫像生成手段、藉由執行前述對象畫像和前述預測畫 像間之差異演算而生成差異部分畫像之差異部分畫像生成 手段、藉由編碼前述差異部分畫像而生成編碼差異部分訊 號之編碼手段、藉由解碼前述編碼差異部分訊號而生成解 碼差異部分畫像之解碼手段、藉由執行前述解碼差異部分 畫像和前述預測畫像間之和演算而生成再生畫像之再生畫 像生成手段、用以爲了生成預測畫像而藉由前述預測畫像 生成手段來儲存使用之參考畫像之儲存手段、以及藉由以 儲存在前述儲存手段之參考畫像來作爲第1畫像並且以儲 存在前述儲存手段且不同於前述第1畫像之參考畫像和前 述再生畫像及前述解碼差異部分畫像中之至少1種來作爲 第2畫像且重疊加算前述第1畫像和前述第2畫像之至少一 部分而生成更新畫像之畫像更新手段之功能;此外,前述 畫像更新手段係將前述更新畫像來儲存在前述儲存手段, 前述預測畫像生成手段係使用儲存在前述儲存手段之更新 -64- (8) 1259729 畫像,來作爲用以生成預測畫像之參考畫像。 1 1. 一種動畫像解碼裝置,其特徵爲:具備: 解碼手段,係藉由將動畫像進行預測編碼所構成之編 碼差異部分訊號予以解碼,而生成解碼差異部分畫像; 預測畫像生成手段,係根據前述編碼差異部分訊號而 生成解碼對象之對象畫像所相對之預測畫像;
再生畫像生成手段,係藉由加算前述解碼差異部分畫 像和前述預測畫像而生成再生畫像; 儲存手段,係爲了生成前述預測畫像,因此,藉由前 述預測畫像生成手段而儲存使用之參考畫像;以及, 畫像更新手段,係藉由對於成爲前述再生畫像或儲存 在前述儲存手段之參考畫像之某一邊之第1畫像以及成爲 該再生畫像或該參考畫像之其他邊之第2畫像之至少一部 分,來進行重疊加算,而生成更新畫像;此外, 前述畫像更新手段係將前述更新畫像來儲存在前述儲 存手段,前述預測畫像生成手段係使用儲存在前述儲存手 段之更新畫像,來作爲用以生成不同之對象畫像所相對之 預測畫像之參考畫像。 1 2 . —種動畫像解碼裝置,其特徵爲:具備: 解碼手段,係藉由將動畫像進行預測編碼所構成之編 碼差異部分訊號予以解碼,而生成解碼差異部分畫像; 預測畫像生成手段,係根據前述編碼差異部分訊號而 生成解碼對象之對象晝像所相對之預測畫像; 再生畫像生成手段,係藉由加算前述解碼差異部分畫 -65- (9) 1259729 像和前述預測畫像而生成再生畫像; 儲存手段,係爲了生成前述預測畫像,因此,藉由前 . 述預測畫像生成手段而儲存使用之參考畫像;以及, 畫像更新手段,係藉由以儲存在前述儲存手段之參考 畫像’作爲弟1畫像’以儲存在前述儲存手段且不同於前 述第1畫像之參考畫像和前述再生畫像及前述解碼差異部 分畫像中之至少1種,作爲第2畫像,重疊加算前述第1畫 _ 像和前述第2畫像之至少一部分,而生成更新畫像;此外 前述畫像更新手段係將前述更新畫像來儲存在前述儲 .存手段’前述預測畫像生成手段係使用儲存在前述儲存手 段之更新畫像,來作爲用以生成預測畫像之參考畫像。 1 3 ·如申請專利範圍第1 1項所記載之動畫像解碼裝置 ,其中,前述畫像更新手段,係將藉由使用利用前述再生 畫像生成手段所生成之前述再生畫像來作爲前述第1畫像 ΦΙ 並且使用儲存在前述儲存手段之前述參考畫像來作爲前述 第2畫像且重疊加算該再生畫像和該參考畫像之至少一部 分而生成之更新再生畫像,來作爲前述更新畫像,儲存在 前述儲存手段。 1 4 ·如申請專利範圍第1 1項所記載之動畫像解碼裝置 ,其中,前述畫像更新手段,係將藉由使用儲存在前述儲 存手段之前述參考畫像來作爲前述第1畫像並且使用利用 前述再生畫像生成手段所生成之前述再生畫像來作爲前述 第2畫像且重疊加算該參考畫像和該再生畫像之至少一部 -66- (10) 1259729 分而生成之更新參考畫像,來作爲前述更新畫像,儲存在 前述儲存手段。
1 5 .如申請專利範圍第1 1項所記載之動畫像解碼裝置 ,其中,前述畫像更新手段係將藉由使用利用前述再生畫 像生成手段所生成之前述再生畫像來作爲前述第1晝像並 且使用儲存在前述儲存手段之前述參考畫像來作爲前述第 2畫像且重疊加算該再生畫像和該參考畫像之至少一部分 而生成之更新再生畫像,來作爲前述更新畫像,儲存在前 述儲存手段,並且,將藉由使用儲存在前述儲存手段之前 述參考畫像來作爲前述第1畫像並且使用利用前述再生畫 像生成手段所生成之前述再生畫像來作爲前述第2畫像且 重疊加算該參考畫像和該再生畫像之至少一部分而生成之 更新參考畫像,儲存在前述儲存手段,前述預測畫像生成 手段係使用前述再生畫像、前述更新再生畫像、前述參考 畫像及前述更新參考畫像中之至少一種,使用作爲用以生 成不同之對象畫像所相對之預測畫像之參考畫像。 1 6 .如申請專利範圍第1 5項所記載之動畫像解碼裝置 ,其中,前述編碼差異部分訊號係包含指示第1狀態、第2 狀態、第3狀態及第4狀態中之至少一種之更新控制訊號, 前述畫像更新手段係在藉由前述更新控制訊號而指示前述 第1狀態之情況下,生成前述更新再生畫像,在藉由前述 更新控制訊號而指示前述第2狀態之情況下,生成前述更 新參考畫像,在藉由前述更新控制訊號而指示前述第3狀 態之情況下,生成前述更新再生畫像和前述更新參考畫像 -67- (11) 1259729 ,在藉由前述更新控制訊號而指示前述第4狀態之情況下 ,不生成前述更新再生畫像和前述更新參考畫像。 1 7.如申請專利範圍第1 1項所記載之動畫像解碼裝置 ,其中,前述畫像更新手段係藉由將顯示前述第2畫像相 對於前述第1畫像之偏差之動作量予以求出,在根據該動 作量而移動之相對應之位置’將前述第2畫像之至少一部 分,重疊加算在前述第1畫像,而生成前述更新畫像。
1 8 . —種動畫像解碼方法,其特徵爲:包含: 解碼手段係藉由將動畫像進行預測編碼所構成之編碼 差異部分訊號予以解碼,而生成解碼差異部分畫像之解碼 步驟; 預測畫像生成手段係根據前述編碼差異部分訊號而生 成解碼對象之對象畫像所相對之預測畫像之預測畫像生成 步驟; 再生畫像生成手段係藉由加算前述解碼差異部分畫像 • 和前述預測畫像而生成再生畫像之再生畫像生成步驟; 儲存手段係爲了生成前述預測畫像,因此’藉由前述 預測畫像生成手段而儲存使用之參考畫像之儲存步驟;以 及, 畫像更新手段係藉由對於成爲前述再生畫像或儲存在 前述儲存手段之參考畫像之某一邊之第1畫像以及成爲該 再生畫像或該參考畫像之其他邊之第2畫像之至少一部分 ,來進行重疊加算,而生成更新畫像之畫像更新步驟;此 外, -68- (12) 1259729 在前述畫像更新步驟,前述畫像更新手段係將前述更 新畫像來儲存在前述儲存手段,在前述預測畫像生成步驟 ,前述預測畫像生成手段係使用儲存在前述儲存手段之更 新畫像,來作爲用以生成不同之對象畫像所相對之預測畫 像之參考畫像。
1 9 . 一種記錄動畫像解碼程式之電腦可讀取之媒體, 其特徵爲:使得電腦發揮作爲:藉由將動畫像進行預測編 碼所構成之編碼差異部分訊號予以解碼而生成解碼差異部 分畫像之解碼手段、根據前述編碼差異部分訊號而生成解 碼對象之對象畫像所相對之預測畫像之預測畫像生成手段 、藉由加算前述解碼差異部分畫像和前述預測畫像而生成 再生畫像之再生畫像生成手段、爲了生成前述預測畫像而 藉由前述預測畫像生成手段來儲存使用之參考畫像之儲存 手段、以及藉由對於成爲前述再生畫像或儲存在前述儲存 手段之參考畫像之某一邊之第1畫像以及成爲該再生畫像 或該參考畫像之其他邊之第2畫像之至少一部分來進行重 疊加算而生成更新畫像之畫像更新手段之功能;此外,前 述畫像更新手段係將前述更新畫像來儲存在前述儲存手段 ,前述預測畫像生成手段係使用儲存在前述儲存手段之更 新畫像,來作爲用以生成不同之對象畫像所相對之預測畫 像之參考畫像。 2 0 · —種動畫像解碼方法,其特徵爲:包含: 解碼手段係藉由將動畫像進行預測編碼所構成之編碼 差異部分訊號予以解碼,而生成解碼差異部分畫像之解碼 -69- (13) 1259729 步驟 ; 預測畫像生成手段係根據前述編碼差異部分訊號而生 • 成解碼對象之對象畫像所相對之預測畫像之預測畫像生成 . 步驟; 再生畫像生成手段係藉由加算前述解碼差異部分畫像 和前述預測畫像而生成再生畫像之再生畫像生成步驟; 儲存手段係爲了生成前述預測畫像,因此,藉由前述 預測畫像生成手段而儲存使用之參考畫像之儲存步驟;以 及, 畫像更新手段係藉由以儲存在前述儲存手段之參考畫 .像,作爲第1畫像,以儲存在前述儲存手段且不同於前述 第1畫像之參考畫像和前述再生畫像及前述解碼差異部分 畫像中之至少1種,作爲第2畫像,重疊加算前述第1畫像 和前述第2畫像之至少一部分,而生成更新畫像之畫像更 新步驟;此外,
在前述畫像更新步驟,前述畫像更新手段係將前述更 新畫像來儲存在前述儲存手段,在前述預測畫像生成步驟 ,前述預測畫像生成手段係使用儲存在前述儲存手段之更 新畫像,來作爲用以生成預測畫像之參考畫像。 2 1 . —種記錄動畫像解碼程式之電腦可讀取之媒體, 其特徵爲:使得電腦發揮作爲:藉由將動畫像進行預測編 碼所構成之編碼差異部分訊號予以解碼而生成解碼差異部 分畫像之解碼手段、根據前述編碼差異部分訊號而生成解 碼對象之對象畫像所相對之預測畫像之預測畫像生成手段 -70- (14) 1259729 、藉由加算前述解碼差異部分畫像和前述預 再生畫像之再生畫像生成手段、爲了生成前 ' 藉由前述預測畫像生成手段來儲存使用之參 * 手段、以及錯由以儲存在前述儲存手段之參 第1畫像並且以儲存在前述儲存手段且不同 像之參考畫像和前述再生畫像及前述解碼差 之至少1種來作爲第2畫像且重疊加算前述 述第2畫像之至少一部分而生成更新畫像之 之功能;此外,前述畫像更新手段係將前述 存在前述儲存手段,前述預測畫像生成手段 ,前述儲存手段之更新畫像,來作爲用以生成 考畫像。 測畫像而生成 述預測畫像而 考畫像之儲存 考畫像來作爲 於前述第1畫 異部分畫像中 第1畫像和前 畫像更新手段 更新畫像來儲 係使用儲存在 預測畫像之參 -71 -
TW94112200A 2004-04-16 2005-04-15 Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program TWI259729B (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004122100 2004-04-16
JP2005026926A JP4414904B2 (ja) 2004-04-16 2005-02-02 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム

Publications (2)

Publication Number Publication Date
TW200605682A TW200605682A (en) 2006-02-01
TWI259729B true TWI259729B (en) 2006-08-01

Family

ID=34935050

Family Applications (1)

Application Number Title Priority Date Filing Date
TW94112200A TWI259729B (en) 2004-04-16 2005-04-15 Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program

Country Status (6)

Country Link
US (2) US7702017B2 (zh)
EP (3) EP2192784A3 (zh)
JP (1) JP4414904B2 (zh)
KR (1) KR100720851B1 (zh)
CN (2) CN100593338C (zh)
TW (1) TWI259729B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4414904B2 (ja) * 2004-04-16 2010-02-17 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム
WO2008146455A1 (ja) * 2007-05-22 2008-12-04 Panasonic Corporation 動画像復号化装置及び動画像復号化方法
EP3567853B8 (en) 2009-03-23 2024-01-03 Ntt Docomo, Inc. Image predictive decoding device and image predictive decoding method
CN102823250B (zh) * 2010-03-31 2015-08-19 三菱电机株式会社 图像编码装置、图像解码装置、图像编码方法以及图像解码方法
PT3070945T (pt) 2010-07-20 2020-04-22 Ntt Docomo Inc Dispositivo de descodificação de previsão de imagem, método de descodificação de previsão de imagem
EP3001686B1 (en) * 2010-10-06 2020-02-19 NTT DOCOMO, Inc. Bi-predictive image decoding device, method and program
US10602185B2 (en) 2011-09-30 2020-03-24 Intel Corporation Systems, methods, and computer program products for a video encoding pipeline
JP2016066922A (ja) * 2014-09-25 2016-04-28 ソニー株式会社 信号処理装置、撮像装置、および、それらにおける信号処理方法。
CN106331700B (zh) * 2015-07-03 2019-07-19 华为技术有限公司 参考图像编码和解码的方法、编码设备和解码设备

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2699703B2 (ja) 1991-07-31 1998-01-19 松下電器産業株式会社 動き補償予測方法とそれを用いた画像信号符号化方法
US5208673A (en) * 1991-11-05 1993-05-04 Matsushita Electric Corporation Of America Noise reduction in frame transmitted video signals
US5539663A (en) * 1993-11-24 1996-07-23 Intel Corporation Process, apparatus and system for encoding and decoding video signals using temporal filtering
JP3224465B2 (ja) * 1993-12-22 2001-10-29 シャープ株式会社 画像符号化装置
JP3529432B2 (ja) 1994-06-30 2004-05-24 株式会社東芝 動画像符号化/復号化装置
JPH0993592A (ja) 1995-07-13 1997-04-04 Matsushita Electric Ind Co Ltd 画像符号化装置
WO1998002002A1 (en) * 1996-07-05 1998-01-15 Nippon Telegraph And Telephone Corporation Image communication system and method
JP3263901B2 (ja) 1997-02-06 2002-03-11 ソニー株式会社 画像信号符号化方法及び装置、画像信号復号化方法及び装置
CN1217852A (zh) 1997-02-13 1999-05-26 三菱电机株式会社 动态图象预测方式
US6175592B1 (en) * 1997-03-12 2001-01-16 Matsushita Electric Industrial Co., Ltd. Frequency domain filtering for down conversion of a DCT encoded picture
JP3373130B2 (ja) * 1997-03-24 2003-02-04 沖電気工業株式会社 画像復号化装置
JPH118856A (ja) * 1997-06-17 1999-01-12 Mitsubishi Electric Corp 画像符号化方法及びその装置
US6859496B1 (en) * 1998-05-29 2005-02-22 International Business Machines Corporation Adaptively encoding multiple streams of video data in parallel for multiplexing onto a constant bit rate channel
JP2001169281A (ja) * 1999-12-13 2001-06-22 Matsushita Electric Ind Co Ltd 動画像符号化装置、および動画像符号化方法
KR100489040B1 (ko) * 2000-12-28 2005-05-11 엘지전자 주식회사 동영상 부호화기, 동영상 복호화기에서 슬라이스 메모리와프레임 메모리간의 데이터 처리 방법
JP2003284075A (ja) 2002-01-18 2003-10-03 Toshiba Corp 動画像符号化方法と装置及び復号化方法と装置
EP1467569A4 (en) * 2002-01-18 2007-11-14 Toshiba Kk METHOD AND APPARATUS FOR ENCODING IMAGES IN MOTION, DECODING METHOD AND APPARATUS
US7408986B2 (en) * 2003-06-13 2008-08-05 Microsoft Corporation Increasing motion smoothness using frame interpolation with motion analysis
EP1649696A1 (en) 2003-07-16 2006-04-26 Koninklijke Philips Electronics N.V. Encoding method and device
JP4414904B2 (ja) * 2004-04-16 2010-02-17 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device

Also Published As

Publication number Publication date
TW200605682A (en) 2006-02-01
KR20060045778A (ko) 2006-05-17
CN100593338C (zh) 2010-03-03
EP2192784A3 (en) 2012-02-22
US20100150239A1 (en) 2010-06-17
EP1587326A3 (en) 2009-09-30
CN101707717A (zh) 2010-05-12
US20050232500A1 (en) 2005-10-20
US7702017B2 (en) 2010-04-20
EP2192784A2 (en) 2010-06-02
US8243802B2 (en) 2012-08-14
JP4414904B2 (ja) 2010-02-17
EP1587326A2 (en) 2005-10-19
EP2429193A2 (en) 2012-03-14
CN1684519A (zh) 2005-10-19
JP2005328498A (ja) 2005-11-24
EP2429193A3 (en) 2012-09-05
KR100720851B1 (ko) 2007-05-25

Similar Documents

Publication Publication Date Title
TWI259729B (en) Moving picture encoding apparatus, moving picture encoding method, moving picture encoding program, moving picture decoding apparatus, moving picture decoding method, and moving picture decoding program
JP4842945B2 (ja) パノラマ映像の動き推定及び補償
TWI253867B (en) Image encoding apparatus, image encoding method, image encoding program, image decoding apparatus, image decoding method, and image decoding program
US20200036995A1 (en) Machine-Learning Based Video Compression
TWI279144B (en) Video/image processing devices and methods
EP0849950A2 (en) Dynamic sprites for encoding video data
JP5791618B2 (ja) ビデオ・シーケンスを処理する方法及び装置
WO2010032693A1 (ja) 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、及び動画像復号プログラム
CN104620583A (zh) 基于支持信息的残差数据的编码和重构
TW200806040A (en) Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
TW200910975A (en) Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
JP2007305113A (ja) 画像処理方法および画像処理装置
CN105681805A (zh) 视频编码、解码方法及其帧间预测方法和装置
JP5219199B2 (ja) 多視点画像符号化方法,復号方法,符号化装置,復号装置,符号化プログラム,復号プログラムおよびコンピュータ読み取り可能な記録媒体
JPWO2014010584A1 (ja) 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム、画像復号プログラム及び記録媒体
CN115486068A (zh) 用于视频编码中基于深度神经网络的帧间预测的方法和设备
US20190110060A1 (en) A video encoding and decoding method, and its inter-frame prediction method, device and system thereof
JP5313326B2 (ja) 画像復号装置、方法およびプログラム、並びに、画像符号化装置、方法およびプログラム
JP2013519296A (ja) パッチシフティングを通じてベクトル量子化誤差を低減する方法および装置
JPH09182082A (ja) 動画像の動き補償予測符号化方法とその装置
JP3120664B2 (ja) 画像符号化装置、画像復号化装置
WO2021106062A1 (ja) 信号再構成方法、信号再構成装置及びプログラム
JP2005184062A (ja) 画像データ変換装置および画像データ変換プログラム
KR20010097394A (ko) 의료영상의 차등압축방법
JP6767299B2 (ja) 映像符号化装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees