TWI255146B - Moving picture encoding method and device, and moving picture decoding method and device, and storage medium - Google Patents

Moving picture encoding method and device, and moving picture decoding method and device, and storage medium Download PDF

Info

Publication number
TWI255146B
TWI255146B TW093137623A TW93137623A TWI255146B TW I255146 B TWI255146 B TW I255146B TW 093137623 A TW093137623 A TW 093137623A TW 93137623 A TW93137623 A TW 93137623A TW I255146 B TWI255146 B TW I255146B
Authority
TW
Taiwan
Prior art keywords
band
signal
sub
frequency
time
Prior art date
Application number
TW093137623A
Other languages
English (en)
Other versions
TW200524435A (en
Inventor
Takahiro Kimoto
Original Assignee
Nec Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nec Corp filed Critical Nec Corp
Publication of TW200524435A publication Critical patent/TW200524435A/zh
Application granted granted Critical
Publication of TWI255146B publication Critical patent/TWI255146B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/62Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding by frequency transforming in three dimensions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

1^5146 九、發明說明: 【發明所屬之技術領域】 本發明係有關於動能 影像之解碼方法與裝置Γ〜、碼方法與裝置以及動態 【先前技術】 已头各種動態影像之編 副頻帶編碼係對与伊片咕 仁疋在廷些方法之中 副頻帶H “ 5儿頻率分割後,對於各自之頻帶即 變換等=:編碼處理之方法。副頻帶編碼和離散餘弦 ΓΒ1 正交變換相異,具有不僅原理上不會發 、二:形,而且藉著遞迴的分割低頻帶成分可容易的 灵見ρ白層編碼之特徵。 :J將相▼編碼應用於動態影像編碼之情況, = 向之相關,而且也需要考慮在時間方向 之相關。因此,在副頻帶動態影像編碼,提議2種方法, :主要對原影像在空間區域進行移動補償,排除在時間方 向之相關後,對各圖框進行副頻帶編碼之方法(例如,參昭 J.R.OHM,^Three d.mensional subbandcoding with m〇;i〇^ 咖㈣腹,”IEEE Trans」mage p⑽,v…, 559-571,Sept. 1999) ’·及對原影像副頻帶分割後,在各 頻帶區域進行移動補償,排除在時間方向之相關之方法: 圖1係說明在上述之空間區域進行移動補償之以往之 編碼處理之流程圖。使用圖丨,說明在連續之圖框之,人 A(G)[iK〇^i<n,η為2之乘方)之編码處理。
2138-6720-PF 5 1255146 在步驟201、202,設J = 〇、1 = 〇、2、…、n—2,在步驟 203 205,在日守間方向將連續之2張圖框A(〇)[i]和A(〇)[i+i] 田1J頻▼分割後,得到低頻帶之Α(υ⑴和高頻帶之町卜丨]。 接著在步驟206 ’對j加1後’在時間方向將連續之低頻帶 之[1<:<1]和入⑴…十1)〜1]副頻帶分割,得到低頻帶之 A(2)[i«l]和高頻帶之E[(i+1)<<1]。如在步驟2〇7所示,重 複至將第一圖框以外之圖框編碼為高頻帶之信號為止,即 (l^<j)變成η為止。然後,在步驟2〇8,在空間方向對 A [〇]、E[i](〇<j<n)各自副頻帶分割而編碼。 在此,在2張圖框間之時間方向副頻帶分割,高頻帶 2信號相當於移動補償預測之誤差信號,低頻帶之信號相 當=所移動補償之2圖框之平均信號。在解瑪處理時,以 沿著本編碼處理之反向流程,在對各圖框在空間方向將副 頻:信號合成後,按照圖框之參照關係在時間方向進行副 頻帶合成。在三次& wavelet編碼,藉著在時間方向將不 使用高頻成分之副㈣的局部進行副頻帶合成所得到之各 =框之信號副頻帶合成’可得到在縮小解析度上之解碼影 像。此時,因必須保持在移動補償之圖框間之像素之對2
關係,將在原始解析度所得到之移動資訊只縮小尺度後: 接使用。 X 【發明内容】 自原始碼流排除相當於高 發明要解決之課題 在尺度可變(scalable)編碼 2138-672〇.pp 6 1255146 =分之副頻帶之碼後,可產生位元速率低之碼流。將新 之碼流解碼後,再構成縮小了 知枯v h現之衫像。在習 何,將以原始解析度所得到之 析度上之艇踩门 移動貝讯用於在縮小解 編碼效率戶斤而之碼Ϊ相對的增大, 4b ^ ^ 疋手因大部分之碼量被 曰疋為移動資訊,和不應用 士爽攸 个應用scalablllty之情況相比,書質 大為降低。 旦貝 ^ ’在為了最適於低位元速率而在縮小解析度上所 :移動貧料,在原始解析度之編碼效率降低。又,利 旦=不動的統合係數資訊等方法降低移㈣訊所需之碼 …況,因移動補償不一致而畫質大為降低。 因此,本發明之目的在於提供一種動態影像編碼之技 :^具有階層構造之碼流,在保持階層構造下可實現比 省知技術高之編碼效率。 杜广本發明之別的目的在於提供一種動態影像編碼之 術可抑制移動補償不一致所引起之晝質之降低。 本毛明之另外之目的在於提供將照這樣所編碼之動能 影像資料解碼之技術。 〜 解決课題之手段 、一右依據本發明之第一形態,一種動態影像編碼方法, 、仃Μ層、4碼’包括下列步驟:對輸人影像信號進行第一 處理後在空間方向進行階層分割,得到第一信號;在利用 解析度i換用m縮小該輸人影像信號後在縮小解析度 進行第一處理,得到第二信號丨以及將該第一信號和該
2138-6720-PF 1255146 第二信號編碼。 右依據本發明之第二形態,一 進行階層編% 3 # 種動怨衫像編碼方法, 丨白僧、、扁碼,包括下列步驟: 成對該輸入影们”卢計裳★將輸入影像信號分割 分割後所得到之第一信於及斟於 在二間方向進行階層 縮小了該輸入影像传;\ ”利用解析度變換用遽波器 上進行第-产二:::之縮小輸入影像信號在縮小解析度 處理;及在對該縮小輸入衝::之%間空間階層分割 間階層分心剌Γ 5虎遞迴性的進行該時間空 :j處理後,將各階層之信號編碼。 在這些發明,例如第一及裳_ 時門方a、* + 弟及弟—處理各自係第一及第二 %間方向濾波,第一传卢 不 ^ ^ , μ tb “虎係日守間濾波下階階層信號,第二 l唬係上階階層時間濾波 乂 f,弟一處理#篦一孩 動補償處理,第二處理係第— ,、 移 ^, ,、一移動補償處理,第一信號係 乐一仏遽係上階階層預測誤差信 現0 若依據本發明之第:r开彡能 ^ ., 弟一开八^,一種動態影像編碼方法, 包括:執行對輸入影傻栌雜六卩士日日 〜么旒在呀間方向副頻帶分割而且在 空間方向副頻帶分割之三次 • 一 — 一 兀田〗頻贡分割處理複數次的步 驟’二次元副頻帶分宝丨]虛 及里匕括移動資訊計算步驟,在該 輸入影像信號之圖框間及係斟 及係對該輸入影像信號副頻帶分割 所得到之低頻帶副頻帶夕由 、f之中之一個頻帶信號之頻帶内信號 之頻帶間,計算表示移動 動之移動育矾;時間副頻帶分割步 驟5藉著在該輸入影像作辨另 一 ^彳"就及該頻帶内信號,按照在移動 賓Bfl计异步驟所得到之熬叙次 移動貝訊進行移動補償後在時間方
2138-6720-PF 1255146 向副頻帶分割,得到時間低頻帶副頻帶信號和時間高頻帶 副頻帶信號;時間高頻帶副頻帶信號空間分割步驟,對該 時間高頻帶副頻帶信號在空間方向副頻帶分割後,產生時 間高頻空間低頻帶副頻帶和時間高頻空間高頻帶副頻帶; 時間低頻帶副頻帶信號空間分割步驟,對該時間低頻帶副 頻帶信號在空間方向副頻帶分割後,產生時間低頻空間低 頻帶副頻帶和時間低頻空間高頻帶副頻帶;以及頻帶信號 空間分割步驟’對該頻帶内信號在空間方向副頻帶分割 後’產生低頻帶副頻帶内信號和高頻帶副頻帶内信號;對 於該輸入影像信號執行該時間副頻帶分割步驟、該時間高 頻f剎頻帶^號空間分割步驟、該時間低頻帶副頻帶信號 空間分割步驟以及該頻帶信號空間分割步驟;將在該頻帶 2號空間分割步驟所得到之低頻帶副㈣内冑號作為該頻 帶内信號’遞迴的重複執行該日夺間副頻帶分割步驟、該時 間同頻▼副頻帶#號空間分割步驟、該時間低頻帶副頻帶 信號空間分割步驟以及該頻帶信號空間分割步驟,每次將 該時間低頻空間低頻帶副頻帶和該時間低頻空間高頻帶副 頻帶各自置換為在正後之該時間副頻帶分割步驟所得到之 該時間低頻帶副頻帶信號和該時間高頻帶副頻帶信號。 若依據本發明之別的形態,_種動態影像解石馬方法, 將已階層化之編碼資料解碼,包括下列步驟:將係第一處 理後之信號之第一信號、將在第- ^ pe ^ ^ , 罘一處理侍到之第二信號在 :間方向階層分割後之第三信號以及規定第二處理之處理 貝訊解碼;自該第-信號和該處理資訊產生第四信號;以
2138-6720-PF 9 1255146 及在將該第三信號和該第四信號合成後進行該第二處 逆變換,得到解碼影像。 在本解碼方法,例如第一及第二處理係各自第 方向遽波及第二時間方向濾波,第一信號係上階階層_ 4波#號,第二信號係時間遽波信號,第三信號係時間滤 信號,第四信號係時間濾波上階階層信號,: 二里-貝:係時間渡波資訊。或者,第一及第二處理各自係: 及弟—移動補償處理,第—信號係上階階層預測誤 二r信!係預測誤差信號,第三信號係預測誤差下p; P白層4万虎,第四f赛孫箱、目| %笔 係移動資訊。上階階層信號’處理資訊 :=發明之別的形態,一種動態影像解碼方法, 時門方Λ 層化之編碼資料階層合成成圖框單位後進行 -時間方向__號之:階驟:將係第 向遽波所得到之時間滤波信號在空間方向階 二二:::渡波下階階層信號以及規定該第二時間方 和該時間遽波資訊產生上階階層時間滤波信號 時間攄波上階階層信號和兮時門^白層w;進行將該 產生合成時間遽波信號之時==階階層信號合成後 該合成時間渡波信號當作上ρ比;:=號合成處理;以及將 目之階層之下階階層之時間、二=滤波信號,將在注 信號解喝,遞迴性的進訊和時間渡波下麵 邊仃蚪間濾波合成處理後,進行時間
2138-6720-PF 10 1255146 方向逆濾波,得到解碼影像。 此外,若依據本發明之別的形態,一/ 方法,句括益— ^ 種動悲影像解碼 合成後,對時間低頻帶副頻帶和時門^在工間方向副頻帶 間方向副頻帶合成之三次元副 ^丁才 像信號的步驟;:次元副$人 U ’產生解碼影 頻帶人… 成處理包括:時間高頻副 / ^ ’不僅參照係時間高頻帶副頻帶信號之空間 方向之低頻帶信號之時間高頻空間低頻帶信號和係和該低 頻帶信號相鄰之高頻帶之副頻帶之時間高頻空間高頻帶副 ^帶,运參照位於與時間高頻空間低頻帶信號同一頻帶之 日守間低頻空間低頻帶副頻帶及係和該副頻帶信號相鄰之高 頻帶之副頻帶之時間低頻空間高頻帶副頻帶之雙方或其令 一方1及規定和時間高頻帶副頻帶對應之移動補償處理 之^動資訊’產生合成時間高頻副頻帶信號;時間低頻副 頻帶空間合成步驟,將時間低頻空間低頻帶副頻帶和時間 低頻空間高頻帶副頻帶合成;以及時間方向合成步驟,對 時間低頻帶副頻帶和時間高頻帶副頻帶進行移動補償預測 處理後,進行時間方向副頻帶合成;對於位於時間高頻帶 副頻帶之最低頻帶之時間高頻空間低頻帶信號進行時間高 頻副頻帶合成步驟,對於位於時間低頻帶副頻帶之最低頻 帶之時間低頻空間低頻帶信號進行時間低頻副頻帶合成步 驟;將利用該時間高頻副頻帶合成步驟所得到之頻帶传號 重新當作時間高頻空間低頻帶信號,將利用該時間低頻副 頻帶空間合成步驟所得到之頻帶信號重新當作時間低頻空 2138-6720-PF 11 1255146 間低頻帶副頻帶信號,遞迴性的重複進栌 一 恭处p弓人#斗_居取4兮口士 以"間向頻副頻 ::間合成步綱時間低頻副頻帶空間合成步驟,得到 该枯間低頻帶副頻帶及時間高頻帶副頻帶。 在本發明,在具有階層構造之碼流,依照在各階 異之移動資訊進行移動補償。^依據本發明,在: 數資訊之中高頻成分除外之低速率之編碼資料時,藉著減 少相當於在高解析度之移動補償之移動資訊,可在^持产 層構造下貫現比習知技術高之編碼效率。又,”、 高解析度之移動資訊補償低頻成分 依據在 償之不一致所引起之畫質降低。 巾田度抑制移動補 【實施方式】 、在本發明,在階層編碼時,例如將在進行第一時間方 二ΐ ::“空間方向階層分割所得到之時間濾波下階階層 仏虎和利用解析度變㈣波器將輸人影像信號縮小後在缩 小解析度上進行第二時間方向滤波後所得到之上階階層時 間濾波信號編碼。哎者,在太菸 、 償後在m “ ’將在進行第-移動補 在工間方向階層分割所得到之預測誤差下階階们”卢 和利用解=變㈣波影㈣I心、後在料ς ^ ί上進订弟二移動補償後所得到之預測誤差上階階層信 :、’碼。即,本發明之特徵為在具有階層構造之碼流,依 '、?、在各階層相異之移動資訊進行移動補償。在此 =關於構成圖框如me)之大小固定或大小可變之各方塊 之、’仃移動之貧訊,或者係關於對構成圖框之各小區域之
2138-6720-PF 12 1255146 仿射(affine)變換等幾 等幾何變換之資訊。 或對於圖框整體之仿射變換 以下,說明本發明之具體實施例。 圖2係說明本發每> 描、生 二士 < 属知例之動態影像編碼裝置之 構k,而且表示對於 β „ 、,、輸衫像信號之一部分之2張圖框 進仃在時間空間方向 J頻V刀割後之信號之階層構造。 動恶衫像編碼裝置 % > # 0日 夏^備弟—〜弟三分割部1001〜1003, 進仃W間副頻帶分割· _ —介印— ’弟四、弟五分割部1004、1〇〇5,進 仃玉間副頻帶分割; 刪。供給第-〜 與第二低通濾、波器1006、 旦 刀。丨。P 1001和第一低通濾波器1006輸入 尽/ k 4 口 5虎1 〇 ’供仏皆 x 山n D弟四分割部1004第一分割部1001之輸 ^看!"給第二分割部1002、第二低通遽波器1007第一 低通濾波器1〇〇6之輪 w 勒出20 ’供給第五分割部1005第二分 軎丨J 4 1002之輪出21 器购之“。“弟二分割部测第二低通遽波 在本動態影像編竭裝置,利用第—分割部·丄對輸入 影像信號1 〇進杆拄问 、曰]副頻帶分割後,利用第四分割部1 004 在空間方向進行1階 册 ^ 焱田j頻T分割,因而,產生低頻副頻 二=^和高頻副頻帶信號⑴又’藉著輸入影像信號 > / 。第低通濾波态1006,產生副頻帶内(intrasubband) :*利用第一分割部1 0〇2對副頻帶内信號20進行時 門田"員V刀割後產生低頻時間副頻帶信號&將利用第四 分軎’J部1 〇 〇 4所吝斗+ / 一 座生之低頻副頻帶信號12置換為低頻時間 副頻帶信號21。卽,m认 P 對輸入影像信號1 〇進行1階段階層
2138-6720-PF 13 1255146 分割之結果,變成高頻副頻帶信號13和低頻時間副頻帶信 號21。一樣的,對低頻時間副頻帶信號21進行i階段階 層分割之結果,變成對於低頻時間副頻帶信號21之高頻副 頻帶信號23和副頻帶内信號2〇之低頻副頻帶信號3〇進行 副頻帶分割後之低頻時間副頻帶信號31。藉著遞迴的進行 本階層分割,實現多重之階層構造。 此>τ,社低逋 ,〜川-μι个丁 $ 將解析度設為W2之-般之下取樣(d_瞻帅慮波器 在進行空間副頻帶分割之第四及第五分割部1〇〇4、1〇〇5 低通濾、波H之其中-種都可。以下假設使用空間副頻帶 割之低«波^ ’說明具有本階層構造之編碼方式。 圖3係表示在本實施例之編碼處理之流程之流程圖 使用圖3說明將連續之影像圖框之集合八(〇)。胸^, 為2之乘方)變成原影像輪入之編碼方法。 首先,在步驟 101、102,設 j=0、i=〇、2、 、n — 在步驟1 03,在時間方向和空間 Μ Λ(〇)Γ·_ Ααη 门雙方將連績之2張3 Α⑴和A )[i + 1]副頻帶分 A(0)*m、w 传到田彳頻帶信激 []E [1 + 1]和移動資訊v[i+i]。 圖4係表示在圖3之步驟1〇3之2 方向副頻帶分割處理之流程之流程圖。^Vi日;1間空間 設為相對於圖框C。位於過去方向之圖 、:框B〔 为又之圖框B0及c〇之時間处門古厶一丨 月 之丁間工間方向副頻帶分割處理。 f先,在步驟111,推測圖框B〇相 動後得到移動資訊vo 〇在此、、B 1 〇之移 Μ移動表不構成圖框之大小固
2138-6720-PF 14 1255146 疋或大小可夂之各方塊之平行移動,或者對構成圖框之各 小區域之仿射變換等幾何變換或對於圖框整體之仿射變換 等幾何變換。 接者,在步驟1 12,依據移動資訊v〇在時間方向將 BO、CO 頻帶分割後,得到低頻帶副頻帶A〇*、高頻帶副 頻帶E0*。在時間方向之副頻帶分割方法之一上,說明在 參照文獻[A.Secker et.al·,“Motl〇n-c〇mpensated Mghiy scalable video compression using an adaptive 3D wavelet transform based on lifting ^ ^IEEE Trans. Int.Conf.Image
Proc· ’ pp 1029-1032,October,2001]。 設位於圖框内座標[p,q]之圖框B〇之像素值為 B0 [P,q]、依照在步驟111之移動推測之結果對圖框B〇進 行移動補償後之圖框内座標[p,q]之像素值為 WB〇(BO)[p,q]、對圖框C0進行移動補償後之圖框内座標[p,q] 之像素值為WC()(C0)[p,q],則 E〇*[p,q] = l/2(CO[p,q]- WB0(B0)[P,q])⑴ A0*[p,q]= B0[p,q]+ Wco(EO*)[p,q] (2)
。在別的時間方向副頻帶分割方法上,在時間方向之滤波 器長度上使用比2長之濾波器之情況,對於成為輪入之複 數個圖框Βί^將對低頻帶及高頻帶之分解濾波器各自設為 fl[i](〇S i<nl)、fh[i] (0$ i<nh),貝丨J nl-Ί Α〇* [p,q]= Σ fl[i] · WB0i (B0 i)[p?q]) (V) /=〇 v 7 E〇* [p,q]= Σ fh[i] · WBOj (B0 j)[p,q]) j=〇 2138-6720-PF 15 (2,) 1255146 又’在藉著1階之濾、波器之重疊實現高階之副頻帶分 割之提升法,在使用在各濾波器之處理時進行移動補償之 參考文獻[L.Lio et·el.,“Motion compensated lifting wavelet
And Its Applicati on in Video Coding,,,IEEE
Int.Conf.Multimedia&Expo 2001,Aug·,2001]之方法之情 況,在成為輸入之複數個圖框設偶數圖框為Β〇 i、奇數圖 框為C0,,乘以1階濾波器後之bo、、⑶^利用常數以、β 表不如下。 C〇?i[p5q] = C091[p?q] + a(WB〇i(BO i+WB〇i+l (B0i + 1)[p5q]) (1”) B〇5i[p?q]=B05i[p5q] + p(wcoi(COi + Wc〇i+l(COi+1)[p5q]) (2”) 藉著重複2個濾波器處理,進行使用提升法之時間方 向副頻帶分割。此外,有不產生低頻成分A〇*,而進行和 一般之移動補償預測一樣之處理的。 得到AO*、E0*後,在步驟113,對A〇*、E〇*進行j 次空間副頻帶分割。 在副頻帶分割上進行使用丨次元之濾波器排之二分割 之頻率分割之情況,產生在水平垂直方向都分割成低頻帶 之副頻帶、在水平方向分割成低頻帶而在垂直方向分割成 高頻帶之副頻帶、在水平方向分割成高頻帶而在垂直方向 分吾彳成低頻W之副頻帶以及在水平·垂直方向都分割成高 頻帶之副頻帶之4個副頻帶。將各自之副頻帶變換定義為 LL0、LH0、HL0、ΗΗ0。又,將 3 個副頻帶 LH(CO)、HL(CO)、 HH(CO)之集合定義為h(C0)。因而,得到LL(A0*)、Η(Α0*)、 2138-6720-PF 16 1255146 LL(EO*) ^ H(EO*) 〇 然後,在步驟115,對於圖框B〇進 帶分割:得卿。—^ 了(C0)疋義為B1、C1,在步驟116,計算新規定 V間之移動補償之移動資訊V1。 ’、 在本移動資訊計算方法上有重新進行移動推測或 口 D 〇、CO對應之移動資訊之幾個等方法。卢复——、 將移動資訊階層編碼後使用只和其底層對應^ ”藉著 見係數碼> §fl和移動資訊對應之階層編碼。 例如,在將乂1和V2階層編碼之一種 p 據具有縮小解柝产之旦彡伤、# —必去 4 ’有將依 …v 移動推測後所得到之移動資 ^又為V2,將藉著在原始影像之移動 : 訊設為I把自V1減去V2U倍的和V2編^移動-貝 和副f帶編碼-樣,藉著對移動資訊在影像之x方向:’ 方向Μ頻π分割,得到移動資訊之階層化表達。D y 在步驟117,依照照這樣所得到之移動資訊 C1在時間方向副頻帶分割後,得到低頻帶副頻· a : 頻帶副頻帶El*。但,A1*和LL(A〇*)不 :E局 不相等。 令·和ll(eo*) 在得到A1*、E1*後,在步驟118,若 頻帶分割次數们,替代LL(A0*)將A1 Y方向之副 _)、替代_〇*)將E1*作為分割代H(A〇*)將 …情況,在步㈣9,對〜;:= 到一呤,π η 運订二間副頻帶分 。卜人㈣LL⑷*)、Η⑷*)、LL(E1*)、H⑻*)。然後,
2138-6720-PF 17 1255146 回到步驟115,對Cl進行副頻帶分割—次,在步驟ιΐ6, 對於所得到之B2、C2計算移動資訊V2mw 117進 行伴隨移動資訊之時間方向副頻帶分割。 如在步驟118所示’對以上之處理進行至分割數變成 m為止後,在步驟121,將所得到之LL(Am”、Η#。)、 LL(Em )、H(Ek*)(〇 ^ k<m)作為分割結果。又,在步驟 將V聰k<m)作為2張圖框之副頻帶分割處理整體 之移動資訊輸出後’結束處理。依據以上,步請之副 頻帶分割之處理完了。 回到圖3,再說明在本實施例之編碼處理之動作。 5〆騍103之後’在步驟1〇5,將係時間方向之低頻帶
副頻帶之A(G)*「〇l 口 A办鬥士人L Λ⑴ 在二間方向進行副頻帶合成後,產生 [0]。這係用以纽A⑴叫高—層之時間方向階層重新 1用v驟103在時間空間方向進行副頻帶分割。 利用步驟1〇6、107,對於A(0)[n_2]和A⑻[Η]進行 /驟1〇3、105之處理後,在步驟⑽對j加1,設卜〇、2、、 nH2,重複進行A(1)[1<<1]和A(1)[㈣叫]在空間方向之 =分割(步驟103)及从”㈣在空間方向之副 成(步驟105)。 止 、、 处理迴路進行至j變成和l〇g2(n) — 1相等為 在完成步驟1〇3之日卑方丨 ^ 之盼刻,即在步驟104,在係現在之 时間万向之分割勃 og2(n) ~ 1相等之情況,全部之 仑唬在時間空間方向 心 门之田】頻贡分割就完了。在編碼處理,
2138-6720-PF 18 *1255146 在步驟1 09,對於所得到之信號a⑴*[〇]、E*[i](0<i<n),進 行里子化及可逆編碼。在此’在量子化上,除了線性量子 化、非線性量子化、向量量子化以外,可使用在係國際標 準靜止影像編碼之JPEG也使用之位元平面量子化。又在 了逆、,扁碼上’使用在文獻[jUhapiro,“Embedded image coding using zerotrees of wavelets coefficients55 ^ IEEE Trans.Signal Processing ^ v〇1.41 ^ pp3445-3462 ^ Dec ^ 1993] 之Zer〇tree編碼、算術編碼、行程(run length)編碼。又, 在步驟110,將ν[ί](〇$ i<n)編碼。在以上完成A⑻φ k<n)之編碼處理。 、、’口果,在上述之動態影像編碼方法,進行對輸入影像 信號在時間方向副頻帶分割而且在空^向副頻帶分割之 三次元副頻帶分割處理複數次。而,本副頻帶分割之處理 包括: 秒勒貧訊計算步 你彌八影像信號之圖框間及 輸入:像信號副頻帶分割所得到之低頻帶副頻帶之中之一 個頻▼信號之頻帶内(intraband)信號之頻帶- 動之移動資訊; 。丨t衣不移 時間副頻帶分割步驟,藉著在輸 信號,按照在移動資訊計算步驟所得到頻帶内 動補償後切間方向副頻帶㈣,得料進行移 #號和時間高頻帶副頻帶信號; -、咿副頻帶 _時間高頻帶副頻帶信號空間分割步 副頻帶信號在处門 、寸間尚頻帶 間方向;彳頻帶分割後,產生時間高頻空間
2138-6720-PF 19 1255146 低頻帶副頻帶和時間高頻空間高頻帶副頻帶; 時間低頻帶副頻帶信號空間分割步驟,對時間低頻帶 副頻帶信號在空間方向副頻帶分割後,產生時間低頻空間 低頻帶副頻帶和時間低頻空間高頻帶副頻帶;以及 頻帶信號空間分割步驟,對頻帶内信號在空間方向副 頻帶分割後,產生低頻帶副頻帶内信號和高頻帶副頻 信號。 對於輸入影像信號執行時間副頻帶分割步驟、時間言 頻帶副頻帶信號空間分割步驟、時間低頻帶副頻帶作號: 間分割步驟以及頻帶信號空間分割步驟…將在頻帶; 驟所得到之低頻帶副頻帶内信號作為頻帶: 迴的重複執行時間副頻帶分割步驟、時間 釗頻帶信號空間分割步驟寺 ^ 才间低頻可田1j頻帶信號空間分 购以及頻帶信號空間分割步驟,每次將時刀 低,頻帶和時間低頻空間高頻帶副頻帶各自置換:: 正後之該日4 P卩5丨丨Jts ·ηη: \ Ϊ ?吳為在 帶H" ύ 步驟所得到之該時間低頻帶副頻 罗4唬和該時間高頻帶副頻帶信號。。 J頭 此外,在本實施例,採用在某階 進行副頻帶分割後,在將 二間方向都 間方向副頻帶合成之處理流程。度在空 本發明之特徵在於按昭空門方……處理可統合。 :1方向副頻帶分割處理之順序不是本發明之目:補 其次,說明基於本發明之叙&旦, 代目的。 解碼影像對於原影像 解碼。在本實施例, 工間方向都具有係2之乘方分
2138-6720-PF 20 1255146 之一之任意之解析度。即,若在編碼處理之空間方向副頻 帶分割數係m,可再構成水平及垂直方向之解析度為原影 像之1/2、1/4、...、1/2之解碼影像。又,對於時間方向 副頻帶分割數n0 = l〇g2⑻’可再構成具有原影像之ι/2: 1/4、··.、l/2nG之圖框速率之解碼影像 圖5表示本發明之一實施例之動態影像解碼裝置之構 =&本動態影像解碼裝置係將分割成副頻帶後所編碼之動 態影像資料解碼的’圖5也說明和圖2所示之副頻帶分割 對應之副頻帶合成之概念。即’目5所示之動態影像解碼 ,置例如經由傳送信號之媒體和圖2所示之動態影像編碼 裝置連接,接收在動態影像編碼裝置所編碼之動 料後解碼。 ’ 動態影像解碼裝置具備第一〜第三合成部2〇〇1〜2〇〇3, 進行時間副頻帶合成;第四、第五合成部屬、2⑽5,進 行=副頻帶合成;以及第一與第二分割部2〇〇6、2〇〇7, =間田!]頻帶分割。供給第三合成部2,低頻時間副頻 =號3:後輸出解碼影像36,供給第二分割部2〇〇7解碼 A 36後產生信號24。供給第五合成部2005信號24和 :頻副頻帶信號23’供給第二合成部難第五合成部屬 '=旒25。第二合成部2002輸出供給第一分割部2000 號14^二像%。第一分割部2〇06輪出低頻副頻帶推測信 =_14弟四合成部2004輸入低頻副頻帶推測信號14和高 頻帶信號13後’輸出信號15,第一合成部2〇〇1輸入 。〜15後輸出解碼影像1 6。
2138-6720-PF 21 1255146 在本動㈣像解碼裝置,為了得到最小之縮小解析度 ::碼:像36’利用第三合成部2。。3對所編碼之副頻帶 “ 相當於低頻帶之低頻副頻帶信號進行副頻帶 合成即可。而’為了得到解碼影像36之下階階層,即呈有 大-階段之解析度之解碼影像26,需要和屬於該階層之高 頻副頻帶信號23對應之低頻副頻帶。因此,將第二分割部 2〇07對解碼影像36進行時間副頻帶㈣所得収㈣24 設為低頻副頻帶推測信號。藉著利用第五合成部靡對低 頻副頻帶推測信號24和高頻副頻帶23進行空間副頻帶合 成後’利用第二合成部2GG2進行時間副頻帶合成,得到解 碼衫像26。在第二分割部2〇〇7之時間副頻帶分割藉著在 第二:成部2002之時間副頻帶分割唯一的決定。―:的, ^ 了得到具有解碼影像26之再大一階段之解析度之解碼 〜‘ 16,利用第四合成部2〇〇4對解碼影像%、利用第一 :割部2006得到之低頻副頻帶推測信號14以及高頻副頻 帶信號13進行空間副頻帶合成後,利用第一合成部2〇〇j =:日守間副頻帶合成即可。藉著對於具有階層構造之副頻 帶信號重複本解碼處理,可得到解析度相異之解碼影像。 接著,使用係表示解碼處理之内容之流程圖之圖6說 明解碼處理。說明對於原影像A⑼[i](〇si<n,n為2之乘 方)再構成水平及垂直方向之解析度係i/2k0(〇Sk〇Sm)、圖 框速率係1/2j〇(〇sj〇gn〇)之解碼影像"州㈣)⑴之處理。 百先,在步驟151,將j設為l〇g2(n)— 1後,在步驟 1 52,對於編碼資料進行可逆編碼之逆變換及逆量子化。按
2138-6720-PF 22 1255146 二::使用記號將本處理之結果所得到之信號定義為 U E [i] (0<1<n)。接著,在步驟 153
暑;相笙+ . 巧义J0和nO 。在j〇和n〇相等之情況,不必進行在時間方向 之副頻帶合成,在步驟154,將ag”⑼在空 ° vn爲、曰 v丨~進行 ⑼層为ϊ之副頻帶合成。然後,在再構成入(叫⑽之日士 刻’解碼處理完了。而’在步驟153 ’在j〇和η〇不相等: 情況’在步驟155、156,對a⑴*[0]、Ε*[η/2]在時 : 空間方向雙方進行副頻帶合成。 ° 圖7表示在步驟156對2張圖框資料進行時間空間方 向副頻帶合成處理之流程。設解碼時副頻帶合成數為Μ 若kO為零,得到解析度和原影像相同之解碼影像;若 為正,彳于到解析度只縮小2之k〇乘方之解 政蛛人丄上 $ 成為副 頻页曰成處理之對象之2張圖框之資料採用在空間方向、 行了 m次副頻帶分割之階層構造。 °進 若按照圖4之步驟121,在時間方向之副頻帶 於低頻帶之副頻帶信號之中在空間方向之副頻帶分割屬、 最低頻帶之副頻帶信號和Am*對應,第k層之副頻帶八^ 後之高頻帶副頻帶信號和H(Ak*)(〇gk<m)對應。對於 間方向之副頻帶分割屬於高頻帶之副頻帶信號之在空間時 向分割後之信號也一樣,可和Em*及H(Ek*)⑺幺k〈曰方 應。又,規定2張圖框之移動補償之移動資訊可和在訝 之步驟Ui'm輸出之Vk(0$k<m)對應。移動資訊Ζ 4 獨立的編碼也可,階層性編碼也可。因此,使自 參照Am*、H(Bk*)、Em*、(Ek*) _ k<m)再構成將原影像 2138-6720-PF 23 1255146 BO、C0只縮小2之k〇乘方之解析度之解碼影像咖、⑽ 之處理。 首先,在步驟171,設k=m後,在步驟172,若將Am*、
Em*在時間方向副頻帶合成,得到Bm、Cm。
Bm[P,q卜Am* [p,q]— WCm(Em*)[p,q] ⑺
Cm[P,q] = 2xEm*[p,q]+ WBm(Bm)[p,q] ⑷ 在此,WBm及WCm係表示自BnUi Cm之移動補償 之濾波器及表示自€111往Bm之移動補償之濾波器,依據在 編碼處理時使用之移動資訊Vm及内插處理決定。 在步驟173,在若kO和m相等之情況,解碼處理完了。 在若不相等之情況’為了進们次之副頻帶合成,需要得 到LWAm-p)和LL(Em— p)。因此,在步驟174,使用 在第m— 1層之Bm—丨及Cm_丨之移動補償使用之移動資 訊 Vm— 1,計算 LL(Am— LL(Em_ 之推側值 LLesi(Am- 1*)及 LLest(Em- 1*)。 LLest(Em- 1 *)=l/2(Cm[p?q] - WBm- iL(Bm)[p5q]) ⑸ LLest(Am- l*MBm)[p?q]+ WCm-^(LL^Em- l*))[p9q] ⑹ ,
在此,WBm- !及WCm— /係將移動資訊Vm_ i在水平 及垂直之雙方縮小成1/2且成為移動補償之單位之方塊之 大小也縮小成1/2後所得到之移動補償濾波器。或者使用 和在 TIimoto,“Multi-ReS〇lution MCTF for 3D wavelet Transformation in Highly Scalable Video,,,ISO/IEC JTC1/SC29/WG11 ’ M9770,Trondheim,July 2003 所示之 2138-6720-PF 24 1255146 階層化之移動補償相同的。即’在第i m ^ ^ 9 對' 於 C ΓΠ — 1 移動補償得到之預測信號WBm-1(Bm叫) ΘΘ , y j用只由空 F 2低頻帶副頻帶Bm戶斤引起之信號和只由高頻帶副 m—υ所引起之信號之和表示。將其前者設為wBm 1 (Bm),用於 LL(Em— 1 *)之推測。 然後,在步驟175,對LLeSt(Am— 1%)和H(Am—卜)進 行副頻帶合成,對LLeSt(Em - 1 *)和H(Em s ! *)進行副頻帶 合士後,得到Am— HEm—p。如在步驟Π3、ΐ76所示, 重複進行自步驟172至175之處理,在得到相當於階層 之副頻帶BkO、CkO時,在圖6之步驟156之時間空間方 向之副頻帶合成之處理完了。 此外,在本實施例,將副頻帶之補償(步驟174)和空間 方向之副頻帶合成(步驟175)作為獨立之步驟說明,但是藉 著使用將副頻帶補償時之移動補償濾波器和副頻帶合成濾 波器相乘之濾波器,也可統合這些步驟。又,在本實施例, 對於Ek和Ak知:知移動資訊vk在時間方向執行副頻帶合 成,得到Bk和Ck後,參照移動資訊Vk— i計算LLest(Ek —1*)和LLest(Ak — 1*),但是在不必輸出Bk* 情況, 也可統合這些處理。 此外’利用和在 T.Kimoto,“Multi-Resolution MCTF for 3D wavelet Transformation in Highly Scalable
Video ’,,ISO/IEC JTC1/SC29/WG11,M9770,Trondheim,
July 2003所示的一樣之方法,也可追加處理,參照H(Ek —1*)和 Ck 補償,使得 LLest(Ek—l*)更接近 LL(Ek — 1*), 2138-6720-PF 25 1255146 參照H(Ak— 1*)和Ak姑、户 LL(Ak-l*)〇 南该’使得『⑽-更接近 1 = ”繼續說明解碼處理。將A,〇]、·/哪 ;':到解析度係原*像之1/2'°之影像A⑴和 ^ 驟157,在]〇和打〇相等之情況,在此, 在* :匕里*不相等之情況,將A(j)k°[0]和A⑴k〇[n/2] :…向副頻帶分割後,產生a(h”· A(」 k〇
& 工 Λ kOLUJ AVJ :2]。在步驟162 ’令將」減ι。然後,在下一階層之 广工間副頻帶合成如在步驟ΐ56、ΐ59、ΐ6〇所示,對Α(, 人=[η/4]及Αω [η/2]#σ Ε*[3η/4]進行。照上述重複副頻帶 处在步驟161j變成和W相等之時刻,結束解碼處理。 * :果在上述之解碼處理,包括藉著就各圖框將副頻 :在工間方向田"員帶合成後,對時間低頻帶副頻帶和 =向頻帶副頻帶進行時間方向副頻帶合成之三次元副頻 ΓΙ成處理,產生解碼影像信號的步n三次元副頻 f合成處理包括: =高頻副頻帶合成步驟’不僅參照係時間高頻帶副 作' ^之工間方向之低頻帶信號之時間高頻空間低頻帶 ^ ^矛該低頻▼化號相鄰之高頻帶之副頻帶之時間高 :二間高頻帶副頻帶,還參照位於與時間高頻空間低頻帶 =冋―頻帶之時間低頻空間低頻帶副頻帶及係和該副頻 破相鄰之高頻帶之副頻帶之時間低頻空間高頻帶副頻 雙方或其中一方、以及規定和時間高頻帶副頻帶對應 動補償處理之移動資訊,產生合成時間高頻副頻帶信
2138-6720-PF 26 1255146 %間低頻副頻帶介 棟 、間5成步驟,將時間低頻空間低頻 常田丨j頻^Γ和時間低相介 _ 士 &頻工間向頻帶副頻帶合成;以及 日"^間方向介戸弓 /V 1> . ^ ^ 5«J ^ v騍,對時間低頻帶副頻帶和時間 问頻f田丨j頻帶進行轉私 頻帶合成。 動補彳員預測處理後,進行時間方向副 對於位於時間高頻帶册 Η ^ ^ ^ 、田頻π之最低頻帶之時間高頻空 間低頻忝k就進行時問古 p,4S^ 仃才間间頻副頻帶合成步驟,對於位於時 間低頻γ副頻帶之最低慨 τ 行時門㈣* 時間低頻空間低頻帶信號進 步驟所得到之頻,二?將利用時間高頻副頻帶合成 于到之頻…虎重新當作時間高頻空間 號,將利用時間低頻副頻帶命 、° #^. 合成步驟所得到之頻帶信 號重新备作蚪間低頻空間 複進行時間高頻副頻帶π人=頻^號’遞迴性的重 网人々止 員可二間合成步驟和時間低頻副頻帶空 副頻帶。 “間低頻帶副頻帶及時間高頻帶 在本實施例,說明在時間方 n77 M .. ^ 7田j頻f分割之圖框之夂 』、關係採取階層構造之情況,但是本發明 > 關係具有任意之構造之情況。 』於參照 =,在-個時間方向副頻帶分割,限定將位 圖框變換為低頻帶副頻帶之情 ' u机% 了實施例旦 明也=用於將位於未來之圖框變換為頻:: :,或者以雙向預測2張框之形式進行時間方向== 情況。在任-種情況都將在空間方向分割在時間方向㈣
2138-6720-PF 27 1255146 Y之各自之副頻帶分割時 w旧恥置換為在時 =向分割了在空間方向分割了編碼對象影像之低頻帶副 頻:之副頻帶,使用在解碼時成對之圖框之解碼結果或副 頻帶補償,使得得到所要之解碼結果。 又,在本實施例,在實現階層編碼之變換方式 7頻帶分割’但是本發明可應詩任意之階層編碼方式。 =副頻帶分割,相當於低頻帶之信號和上階階層對库。在 =本發明之編碼方式,將對在圖框間預測處理後所得到 對:Γ差信號進行階層分割之中之上階階層信號置換為 對於輸入影像信號進行階層分割後對上階階層信 2 框間預測處理後所得到之預 Α仃圖 卿^ 差也可。在解碼方式,將 二〜二圖框信號之中之上階階層補償成將對輪入 圖框間預測處理後所得到之預測誤差㈣ 後之中之上階階層信號。 刀心 在使用預測誤差信號之棒 三次元副頻帶分割處理包括·· 動怨衫像編碼處理之 移動資訊計算步驟,尤私 輸入影像信號副頻帶分割所^影像信號之圖框間及係對 個頻帶信號之頻帶内到之低頻帶副頻帶之中之- 祝V ΙΛΜ 口琥之頻帶 資訊; Υ門汁t表示移動之移動 移動補償預測步驟,在私 按照在移動資訊計算步驟所^#b及頻帶内信號, 預測處理後,得到預測誤差:號之移動資訊進行移動補償 預測誤差信號空間分 步驟,對預測誤差信號在空間
2138-6720-PF 28 1255146 方向副頻帶分割後,產生低頻帶預測誤差副頻帶和高頻帶 預測誤差副頻帶;以及 頻帶信號空間分割步驟,對頻帶内信號在空間方向副 頻帶分割後,產生低頻帶副頻帶内信號和高頻帶副頻帶内 信號。 對於輸入影像信號執行移動資訊計算步驟、移動補償 預測步驟、預測誤差空間分割步驟以及頻帶信號空間分= 步驟。又,將在頻帶信號空間分割步驟之後所得到之低頻 可副頻帶内信號作為頻帶内信號,遞迴的重複執行移動資 訊計算步驟、移動補償預測步驟、預測誤差空間分割步驟 以及頻帶彳§號空間分割步驟,每次將在預測誤差空間分割 步驟所得到之低頻帶預測誤差副頻帶信號置換為在正後1 移動補債預測編碼步驟所得到之該預測誤差信號。 一樣的,使用預測誤差信號之情況之動態影像解碼處 理之三次元副頻帶合成處理包括: 預測誤差信號合成步驟,不僅參照係預測誤差信號之 低頻帶信號之預測誤差低頻帶信號和係和該低頻帶信號相 鄰之高頻帶之副頻帶之高頻帶預測誤差副頻帶,還參照位 於與預測誤差低頻帶信號同一頻帶之低頻帶副頻帶内信號 及係和該低頻帶副頻帶内信號相鄰之高 頻帶副頻帶内信號之雙方或其中一方、::規定二: 差信號對應之移動補償處理之移動資訊,產生合成副頻帶 預測誤差信號; 頻帶内信號空間合成步驟,將低頻帶副頻帶内信號和 2138-6720-PF 29 1255146 岗頻帶副頻帶 移動補償解碼步驟,藉著對頻帶内信號進行移動補償 預測處理後加上合成預測誤差信號,得到解碼影像信號。
對於位於預測誤差信號之最低頻帶之預測誤差低頻帶 2號執行預測誤差信號合成步驟,對於位於頻帶内信號^ 取低頻帶之低頻帶副頻帶内信號執行頻帶内信號空間合成 步驟。將利用預測誤差信號合成步驟所得到之頻帶信號重 新當作預測誤差低頻帶信號,將利用頻帶内信號空間合成 二驟所知到之頻帶信號重新當作低頻帶副頻帶内信號,藉 者遞迴性的重複進行預測誤差信號合成步驟和頻帶内信^ 空間合成步驟,得到頻帶内信號及該預測誤差信號。… 以上所5兄明之動態影像編碼裝置及動態影像解碼裝置 卩了使用電腦實現。即,藉著在電腦上執行程式,可實現 ^述》動態影像編碼裝置、動態影像解碼裝置之處理及 -’。&所指之電腦也包括處理器或控 網路或者儲存了兮妒々 、、二由網際
入電腦。^ 転式之如CD-RQM之記錄媒體將程式讀 入電細本發明也包括這種程式戋者葙4甚σ ★ + 體。此外,傳逆那^ 4 或者記錄媒 傳㈣種程式之媒體也包括於本發明之範圍。 置之電腦:::現=影像編碼裝置及/或動態影像解瑪裝 存部52以及ί/0/面 圖8所心具備處理器51、儲 儲存 1 3,廷些經由匯流排54相連 储存口Ρ 52儲存處理 和動態影像解石馬程式之;;應執订之動態影像編碼程式 在處理器執行動p" 方或雙方,而且也發揮作為 切像編碼程式或動態影像解碼程式之途
2138-6720-PF 30 1255146 中之暫時儲存區域之功用。此外 存部」除了 Ram等 、兄明書’本「健 寺主儲存7C件以外,用作 閃3己憶體或處理哭 所含之快 处! 所含之暫存器以及硬 的儲存裝置的。又,在本實施例,ί/〇界面示所有 ^ 51之控制傳送對於動態影像編碼程式成為處理 像或成為輪出之編碼資料、 '、、、雨入之原影 之、、爲馬貝枓或成為輸出之解碼影像之媒 成為輪入
界面53之存在不合 、、 但,本I/O 影像或編碼資料暫存 斤求侍之原 [工業上之可應用性] 本發明藉著對於具有各種傳送 機器刪除動態影像編喝資 、/播放後境之播放 於播放機器之環境之動能 刀可應用於進行最適 心心像配迗之用途。 【圖式簡單說明] 域進行移動補償 圖1係表示在空間區 法之處理流程之流程圖 "夕π則貝之以往之編碼方 ® 2係說明本發明之-實施例 構造之圖。 之動態影像編碼裝置 之 圖3係表示基於本發 法之處理流程之流程圖。 圖4係表示在圖 明之一實施例之動態影像編碼方
之2張圖框之時間空間副頻帶分割 2138-6720-PF 31 1255146 處理之流程之流程圖。 圖5係說明本發明 ^ ^ /XI ^ - 呶明之一貫施例之動態影像解 構造之圖。 圖“系表示基於本發明之一實施例之動態 法之處理流程之流程圖。 馬 圖7係表示在圖3之2張圖框之時間空間副頻 處理之流程之流程圖。 ^ 碼裝置 之 方 圖8係表示用以構成動態影像編碼裝置及動 碼裝置之電腦系統之概略圖。 態影像解 【主要元件符號說明】 10 輸入影像信號、 11 輸出、 12 低頻副頻帶信號、 13 局頻副頻帶信號、 20 副頻帶内信號、 21 低頻時間副頻帶信號、 23 高頻副頻帶、 30 低頻副頻帶信號、 31 低頻時間副頻帶信號、 1001 時間副頻帶分割、 1002 時間副頻帶分割、 1003 時間副頻帶分割、 1004 空間副頻帶分割、 2138-6720-PF 32 1255146 1005 空間副頻帶分割、 1006 低通濾波器、 1007 低通濾波器。 33
2138-6720-PF

Claims (1)

1255146 十、申請專利範圍: 進行階層編碼 包括下列 I 一種動態影像編碼方法 步驟: 里後在空間方向進行階層 對輸入影像信號進行第 分割,得到第一信號; 在利用解析度變換用濾波器縮小該輪人 縮小解析度上進行第二處理 如像4唬後在 將該第-信號和該第二信號丄::信號;以及 步驟i種動㈣編研,⑽i㈣,包括下列 八影像信號分割成對該輸入影像传於 -處理後在空間方向進行階層二: 對於利用解析度變換關波了特]之第—仏號 夂的細小了該輸入影像信號之 小輸入影像信號在縮小解析度上 琥之 篦-传哚 * 仃弟一處理後所得到 一 5就之日卞間空間階層分割處理;及
在對該縮小輸入影像信號遞迴性的進行該時間空間 層分割處理後’將各階層之信號編碼。 a 3·如申請專利範圍第1或2項之㈣影像編碼方法 其中,該第-處理係第一時間方向遽波,該第二處理係 ::夺間方向遽波’該第-信號係時間遽波下階階層信號 該第二信號係上階階層時間濾波信號。 ^ 4·如申請專利範圍第 其中,該第一處理係第一 二移動補償處理,該第一 1或2項之動態影像編碼方法, 移動補償處理,該第二處理係第 &號係預測誤差下階階層信號, 2138-6720-PF 34 1255146 °亥第二信號係上階階層預測誤差信號。 5·如申請專利範圍第丨或 其中,社么 产^ 員之動態影像編碼方法, ^解析度史換用濾波器和 ΡΙ μ ^ ^ ^ ^ ^ ^ 座生在&層分割處理之上 白7之k號之濾波器相同。 .種動悲影像編碼方法,七& ν 包括執行對輸入影像信號 了間方向副頻帶分割而且在介 元副相册、„ 货工間方向副頻帶分割之三次 田J頻γ分割處理複數次的步驟; 該二次元副頻帶分割處理包括: 移動資訊計算步驟,在哕鈐λ ^你 斟社认 在该輪入影像信號之圖框間及係 二輪入影像信號副頻帶分割所得到之低頻帶副頻帶之中 之-個頻帶信號之頻帶内信號之頻帶間,計算表示移動之 移動資訊; 儀f間副頻帶分割步驟,藉著在該輸入影像信號及該頻 可内“唬,按照在移動資訊計算步驟所得到之移動資訊進 仃移動補償後在時間方向副頻帶分割,得到時間低頻帶副 頻f彳5號和時間咼頻帶副頻帶信號; 時間高頻帶副頻帶信號空間分割步驟,對該時間高頻 f田彳頻f “號在空間方向副頻帶分割後,產生時間高頻空 間低頻帶副頻帶和時間高頻空間高頻帶副頻帶; 時間低頻帶副頻帶信號空間分割步驟,對該時間低頻 帶副頻帶信號在空間方向副頻帶分割後,產生時間低頻空 間低頻帶副頻帶和時間低頻空間高頻帶副頻帶;以及 頻f彳§號空間分割步驟,對該頻帶内#號在空間方向 副頻帶分割後,產生低頻帶副頻帶内信號和高頻帶副頻帶 2138-6720-PF 35 1255146 内信號; 對於該輪入影像士 _ 時間高頻帶副頻帶心°㈣時間副頻帶分割步驟、該 帶信號空間分割=及空間分割步驟、該時間低頻帶副頻 v驟以及該頻帶信號空間分割步驟; 將在該頻帶作铗w 内信號作為該頻:: 割步驟所得到之低頻帶副頻帶 分割步驟、該時間高頻帶副頻帶:間副頻帶 割步=頻帶信號空間分割步驟以及該頻帶信號空間分 哺允鬥*二人將該時間低頻空間低頻帶副頻帶和兮時門-頻空間低頻帶副頻帶各自置換為在正、:::間- 副頻帶信號。 ’低頻“頻…虎和該時間高頻帶 =甲請專利範圍“項之㈣影像編碼 在#間副頻帶分割步驟對於位 ,、中 信號進行時間副頻帶分割時,所得到之:二:張頻帶内 信號及時間低頻帶 广頻帶副頻帶 芦萝斟座 方和在過去方向之顧器 ^對應’該所得到之時間高# η之頻γ 帶副8頻帶信號之另-方和在未來方向 δ·—種動態影像編碼方法, f應。 在時間方向副頻帶分割而且在仃對輪入影像信號 元副頻帶分割處理複數次的步驟;、彳頻帶分割之三次 該三次元副頻帶分割處理包括: 移動貧訊計算步驟,在輸入影 該輸入影像_ _ ^ 册A q 心乜唬之圖框間及係 “虎孤分割所得到之低頻帶副頻帶之中之 2138-6720-PF 36 1255146 —個頻帶信號之頻帶内信號之頻帶間,計算表示移動之移 動資訊; 移動補償預測步驟,在該輸入影像信號及該頻帶内信 號:按照在該移動資訊計算步驟所得到之移動資訊進行移 動補償預測處理後,得到預測誤差信號; 預測誤差信號空間分割步驟,對該預測誤差信號在空 2方向副頻帶分割後,產生低頻帶預測誤差副頻帶和高= T預測誤差副頻帶;以及 頻帶信號空間分割步驟,對該頻帶内信號在空間方向 副頻帶分割後’產生低頻帶副頻帶内信號和高頻帶 内信號; ' 對於該輸入影像信號執行該移動資訊計算步驟、該移 動補償預測步驟、該預測誤差空間分割步驟以 帶 號空間分割步驟; s’15 ^將f該頻帶信號空間分割步驟之後所得到之低頻帶副 :、:,號作為該頻帶内信號,遞迴的重複執行該移動資 訊叶异步驟、該移動補償預測步驟、該預測誤差空間分匈 /驟以及該頻▼仏號空間分割步驟,每次將在該預測誤差 =分割步驟所得到之該低頻帶㈣誤差副頻帶信號置換 J正後之移動補償預測編碼步驟所得到之該預測誤差俨 9 °如申請專利範 在該移動補償預剛步 信號,將位於過去方 圍第8項之動態影像編碼方法,其中, 驟,對於位於同一頻帶之2張頻帶内 向或未來方向之其中一方之頻帶信號 2138-6720-PF 37 1255146 作為參照信號。 請專利範圍第8項之動態影像編碼方法,复 中’在該移動補償箱、、丨. /、 Λ 預冽步驟,在位於同一頻帶之複數個瓶 可内k號將1張編石馬對象 ’、 日對象頻π佗唬除外之頻帶信號作為參 均。儿移動補仏處理使用該複數個參照信號之加權平 η·如申請專利範圍第8項之動態影像編碼方法,並 I,在該移動補償預測步驟,在位於同一頻帶: 號之移動補償處料,對每個或每複數 ^ 照信號之頻帶信號。 成為> 12·-種動態影像解碼方法’將已階層化之編碼資料解 碼’包括下列步驟·· 將係第一處理徭夕#啤 # ..^ ^ ^ 之^唬之弟一信號、將在第二處理得 隹未 二間方向階層分割後之第三信號以及規定 弟二處理之處理資訊解碼; 自該弟:號和該處理資訊產生第四信號;以及 =將該第三信號和該第四信號合成後進行該第二處理 之2^躉換,得到解碼影像。 丨3:如申請專利範圍第…貝之動態影像解碼方法,其 ’忒弟-處理係第一時間方向濾波,該第二處理係第二 日可間方向滅波,#势 . 4弟一信號係上階階層時間渡波信號,該 弟二信號係時間浦、、由彳士% ^ ^ ^ ^波L #U,该弟三信號係時間濾波下階階 僧4吕號,該第四作缺在士 , Ό唬係蚪間濾波上階階層信號,該處理資 訊係時間濾波資訊。 2138-6720-PF 38 1255146 中I4·如申請專利範圍第12項之動態影像解碼方法,其 "亥第一處理係第一移動補償處理,該第二處理係第二 #動補仏處理,該第一信號係上階階層預測誤差信號,該 =~ L唬係預測誤差信號,該第三信號係預測誤差下階階 ^ 〇 心苐四彳°號係預測誤差上階階層信號,該處理資 訊係移動資訊。 、 、15·-種動態影像解碼方法,藉著在將已階層化之編碼 貪料階層合成成圖框單位後進行時間方向逆濾波,得到解 石馬影像,包括下列步驟: —將係第一時間方向渡波後之信號之上階階層時間渡波 ^ 對於在第一日守間方向濾波所得到之時間濾波信號在 ^ 向卩白層刀剎後之時間濾波下階階層信號以及規定該 第二時間方向濾波之時間濾波資訊解碼; ^上卩白1¾層%間濾波信號和該時間濾波資訊產生時 間濾波上階階層信號; 進行將該時間濾波上階階層信號和該時間濾波下階階 ^ “虎口成後產生合成時間濾波信號之時間濾波信號合成 口成&間濾波信號當作上階階層時間濾波信號, 、注目之階層之下階階層之時間濾波資訊和時間滹波下 階嶋號解瑪,遞迴性的進行時間遽波合成處理後,進 订%間方向逆濾波5得到解碼影像。 W-種動態影像解碼方法,藉著在將已㈣化之編碼 貧料階層合成成圖框單位後進行移動補償合成處理,得到 2138-6720-Pf 1255146 解碼影像,包括下列步驟: 將係第一移動補償預 信號、對於在第二移動補卩 @號之上階階層預測誤差 "皆段空間方向階層分心預測所得到之預測誤差信號在 規定該第二移動補償 :測誤差下階階層信號以及 貝判之移動資訊解碼; 自該上階階層預測誤 差上階階層信號;、“虎和該移動資訊產生預測誤 差上階階層信號和該預測誤差下階階 處理;以及 、j决差彳叾就之預測誤差信號合成 將該合成預測誤差传♦ a 蔣大、七 么諕§作上階階層預測誤差信號, 將在左目之階層之下階 民, $ ^層之移動貧訊和預測誤差下階階 肩心號解石馬,遞迴性的進行 動補f入+者 丁預測决差合成處理後,進行移 勳補仏合成處理,得到解碼影像。 帶二了:態影像解瑪方法,包括藉著就各圖框將副頻 :::間方向副頻帶合成後,對時間低頻 副頻帶進行時間方向副頻 帶合成處理’產生解碼影像信號的步驟; 以 该三次元副頻帶合成處理包括·· ”日守間鬲頻副頻帶合成步驟,不僅參照該時間高頻《利 信號和^ 頻帶信號之時間高頻空間低頻帶 ",、4低頻帶信號相鄰之高頻帶之副頻帶之日士門一 門回頻f副頻帶,還參照位於與時間高頻处 信號同一糖册々。士 0日 、二間低頻▼ 貝^之%間低頻空間低頻帶副頻帶及係和該副頻 2138-6720-PF 40 1255146 f L號相鄰之$ 4 帶之雙方或Γ 副頻帶之時間低頻空間高頻帶副頻 之移動補償處::方、以及規定和時間高頻帶副頻帶對應 號; 之移動資訊,產生合成時間高頻副頻帶信 帶副副頻帶空間合成步驟,將時間低頻空間低頻 士、π 間低頻空間高頻帶副頻帶合成,·以及 帶副:二!:合成步驟,對時間低頻帶副頻帶和時間高頻 合成·、f、订移動補償預測處理後,進行時間方向副頻帶 ::二:時間高頻帶副頻帶之最低頻帶之時間高頻空 曰低頻w吕號進行時間高頻副頻帶合成步驟,對於位於時 頻帶之最低頻帶之時間低頻空間低頻帶信號進 灯日守間低頻副頻帶空間合成步驟; 將利用該時間高頻副頻帶合 # ^ ^ ^ , ^ ^驟所侍到之頻帶信號 重:“乍嘯頻空間低頻帶信號,將利用該時間低頻副 頻V空間合成步驟所得到之頻帶信 * 門俏相册1w >上 〜重新㊣作時間低頻空 遞迴性的重複進行該時間高頻副頻 贡空間合成步驟和該時間低镅丨 、 、 Η . Μ頻相帶空間合成步驟,得到 该牯間低頻Τ副頻帶及時間高頻帶副頻帶。 18.如申請專利範圍第17項之動態:像 中,時間高頻副頻帶合成步驟包括: ^ 時間高頻副頻帶推測步驟’使用位於門 間娜信,頻帶之時間低頻空間低頻帶和; 動貝讯推測日守間咼頻空間低頻帶副頻帶;及 、 2138-6720-PF 41 • 1255146 1阿頻副頻帶空間合成步 頻帶推測步带丨 双^知,對利用該時間高頻副 二 J乂私所得到之推測時間 该副頻帶作走 '、工間低頻帶副頻帶和 v ^說祁鄰之高頻帶册 帶副頻帶進行^丨 、 田,八f之時間高頻空間高頻 义仃一頻帶合成。 19.如申請專利範圍第18 中,在時n古 貝之動悲衫像解碼方法,其 曰呵湧副頻帶推測步驟 頻帶對應之移動福产 使用規疋和時間高頻副 預測信號之中只由你相册5 將在该移動補償產生之 、 低々▼副頻帶内^古赛 ^ 頻帶副頻帶和在亨 化 起之“號之低 之時間方向s,丨相見圖框仏唬之低頻帶副頻帶 力田i頻T分割作為時間高 推測值。 v員工間低頻▼副頻帶之 2 0 ·如申請專利範圍第丨8 中,該時間以5|丨^4& 、之動心衫像解碼方法,其 ]Ν 〃員田彳頻▼推測步驟包括·· 使用規定和時間高頻副頻帶 3了應之移動補償之移動資 二:二=差信號與預測誤差低頻帶信號之頻帶間解 -成比的縮小該時間高頻帶成分的步驟;及 =所縮小之該時間高頻帶成分進行移動補償後,進 a間:向副頻帶分割,將所得到之值作為該時間高頻空 間低頻帶副頻帶之推測值的步驟。 21·如申請專利範圍第17項之動態影像解碼方法,其 中’時間高頻副頻帶合成步驟包括·· 、 批一時=高頻副頻帶推測步驟’使用該時間低頻空間低頻 帶副頻帶、該時間低頻空間高頻帶副頻帶以及該移動資訊 推測時間高頻空間低頻帶副頻帶;及 2138-6720-PF 42 1255l46 日寺間尚頻副井旨黑 ^ & f工間a成步驟,對利用該時間高頻副 φ惟剛步驟所π 係叙兮一丨 于彳之推測時間高頻空間低頻帶副頻帶和 j吟孩副頻帶# 口占 、 高頻册 ^ ^目鄰之高頻帶之副頻帶之時間高頻空間 員▼副頻帶進行副頻帶合成。 解石馬2方2ΓΓ專利範圍第17至21項中任—項之動態影像 —頻*其中,在該時間副頻帶合成步驟,對於位於同 於過:=張頻帶信號’位於未來方向之該頻帶信號和位 信號對庫:頻帶信號之其中一方和該時間高頻帶副頻帶 的進行時門_丨4 彳和該日寸間低頻帶副頻帶信號對應 遣仃w間副頻帶合成。 理包括兮頻該時間副頻帶合成步驟在該移動補償處 頁π彳5諕以外之頻帶信號之加權平均處理。 24·如申請專利範圍第17至21項中任一 解碼方法,J:由 ^ 員之動悲影像 信號之—二、/該時間副頻帶合成步驟’切換對頻帶 ° 或每複數個像素進行時間副頻帶人虚 、 帶信號。 Q成之成對之頻 25·-種動態影像解碼方法,產生解码影像信號, 包括藉著就各圖框將副頻帶信號在空〜 成後,執行對該所合成之頻帶内信號和預測誤差^帶合 移動補償處理之三次元副頻帶合成處理的步驟;就進行 該二次元副頻帶合成處理包括: 預測誤差信號合成步驟,不僅參昭 …、係該^誤差信號 2138-6720-PP 43 1255146 之低頻帶信號之預測誤差低頻帶信號和係和與該低頻帶信 號相鄰之高頻帶之副頻帶之高頻帶預測誤差副頻帶,還參 照位於與該預測誤差低頻帶信號同一頻帶之低頻帶副頻帶 $信號及係和該低頻帶副頻帶内信號相鄰之高頻帶之副頻 帶之高頻帶副頻帶内信號之雙方或其中一方、以及規定和' 该預測誤差信號對應之移動補償處理之移動資訊,產生合 成副頻帶預測誤差信號; 口 頻帶内信號空間合成步驟,將該低頻帶副頻帶内信號 和該咼頻帶副頻帶内信號合成;以及 移動補償解碼步驟,藉著對該頻帶内 =測處理後加上該合成預測誤差信號,得到該解= 立:該預測誤差信號之最低頻帶之預測誤差低頻 號執订該預測誤差信號合成步驟丨 對於位於該頻帶内信號之最低頻帶之低 信號執行該頻帶内信號空間合成步驟;…韻-内 新:用該預測誤差信號合成步驟所得到之頻帶”重 成步驟所得到之:::广將利用該頻帶内信號空間合 藉著遞迴性的重重新當作低頻帶副頻帶内信號, 内信號空間合成步;預測誤差信號合成步驟和該頻帶 號。 人驟传到該頻帶内信號及該預測誤差信 中=如巾請專利範圍第25項之動態影像“方去並 中,5亥預測誤差信號合成步驟包括: 解馬方法,其 2138-6720-PF 44 *1255146 預測誤差副頻帶推測步驟,使用該預測誤差低頻帶信 號、該低頻帶副頻帶内信號以及該移動資訊,推測係該預 測誤差信號之低頻帶之副頻帶之低頻帶預測誤差副頻帶; 及 預測誤差信號空間合成步驟λ,對利用肖預測誤差_ 帶推測步驟所得到之推測預測誤差低頻帶副頻帶和係與該 副頻帶信號相鄰之高頻帶之副頻帶之高頻帶預測誤差副頻 帶進行副頻帶合成。 、 27.如申請專利範㈣26項之㈣影像解碼方法,其 中,該預測誤差副頻帶推測步驟具有_種步驟,使用規定 和該預測誤差信號對應之移動補償之移動資訊,將在該^ 動補儒產生之預測信號之中只由低 〜Τ /、田他頻贡副頻帶内信號所 起之“號之低頻帶副頻帶和在兮聽 κ π不在这移動補償之現圖框信號之 低頻帶副頻帶之差作Λ供册π W 忭為低頻f預測誤差副頻帶之推測值。 2 8 ·如申請專利筋圚筮 乾圍弟20項之動態影像解碼方法,复 中,該預測誤差副頻帶施、7、 推測步驟使用規定和該預測誤差 號對應之移動補償之移動 1〇 助貝訊將和該預測誤差信號盥哕 預測誤差低頻帶信號之頻 ^ Μ 解析度比成正比的縮小後進 仃移動補償之結果作Λ ^ 任 為4低頻帶預測誤差副頻帶之推測 值。 、J 中 29·如申請專利範圍第25項之動態 該預測誤差信號合成” 、 預測誤差副頻帶推測 號 推刺步驟,使用該預測誤差低 該低頻帶副頻帶内 ϋ就、遠鬲頻帶副頻帶内信號以及 2138-6720-PF 45 1255146 該移動資訊’推測係該預測誤 低頻帶預測誤差副頻帶;及 4…頻帶之 預刪誤差信號空間合成步驟, 。、 帶推測步赞所γ Η & ^ v預測誤差副頻 _之推測預測誤差低頻帶㈣帶和係盘节 :;:信號相鄰之高頻帶之副頻帶之高頻帶預測誤 τ進打副頻帶合成。 只ji田丨j頻 3〇·如申請專利範圍第25至2 解碼方法,苴中,、±_ 、 項之動恶影像 同-頻帶動讀解碼㈣,“對於位於 頻…張頻帶信號位於過去方向 一方之頻帶信號。 勹之其中 31.如申請專利範圍第25至29 解碼方法,其中,在該移動補償解碼牛驟=之動態影像 帶之複數個頻帶信號之移動補償處理二用位於同-頻 號之加權平均。 处用该複數個參照信 32·如申請專利範圍第25至“項 △ 解碼方法,其中,移動補償解碼步 、之動恶影像 個像素切換在位於同一頻帶;:對-個或每複數 成為參照信號之頻帶信號之步驟/55虎之私動補償處理時 :二種動態影像編碼裝置,進行階層編碼,包括. 濾波下階階層信號編碼裝置 號進行第-時間方向遽波後在將對於輸入影像信 到之時間滤波下階階層信號編^及向進行階層分割所得 上階階層時間濾波信號編碼裝置 換用濾-波器縮小該輸入影像信 1利用解析度變 ♦細小解析度上進行第 2l38-6720-PF 46 1255146 二時二方向滤波所得到之上階階層時間遽波信號編瑪。 種動態影像編碼裝置,進行階層編碼, 預測誤差下階階層信號編碼裝置匕. 號進行第一移動補償處理後在空間方向進行階像= 到之預測誤差下階階層信號編碼;及 刀口丨J所侍 換用ΪΓ層預測誤差信號編碼裝置,將在利用解析度變 、慮波益縮小該輸入影像信號後在縮小解析度上進 二移動補償處理所得到之上階階層預測誤差信號編碼二 5·-種動態影像編碼裝置,進行階層編碼,包括. 進行Γ=ΓΓ信號產生裝置,對於輸入影像信號 π曰1肩波後在空間方向進行階層分割 濾波下階階層信號;及 守間 :階階層時間遽波信號產生裝置,對於利用解析度變 縮小ΪΓΓ小了該輸人影像信號之縮小輸人影像信號在 濾波信號; …白“產生上階階層時間 比對於㈣小之輪人影像信號,遞迴的進行該時間滤波 下階階層L號之產生和該上階階層時間濾波信號之產生 後’將各階層信號編碼。 36·-種動態影像編碼裝置,進行階層編碼,包括: 預測誤差下階階厣#铋方4m P 曰L唬產生衣置,對於輸入影像信號 進行第-移動補償處理後在空間方向進行階層分割,產生 預測誤差下階階層信號;及 上階階層預測誤差信號產生裝置,對於利用解析度變 2138-6720-PF 47 1255146 ^ ;慮波σσ縮小了該輸入影像信號之縮小輸入影像信號在 縮】、解析度上進行第二移動補償處理,產生上階階層預測 '^差信號; 對於4縮小之輪入影像信號,遞迴的進行該預測誤差 I階階層作铗夕立》 y θ〜之產生和該上階階層預測誤差信號之產生 後,將各階層信號編碼。 37·種動恶影像編碼裝置,進行對輸入影像信號在時 間方向副頻帶分判 _ ^而且在二間方向副頻帶分割之三次元副 參 頻帶分割處理複數次,包括: 移動資訊計算. ^ · π衣置,在該輸入影像信號之圖框間及係 該輸入影像信號副頻帶分割所得到之低頻帶副頻帶之中 ::個頻帶信號之頻帶内信號之頻帶間,計算表示移動之 移動資訊; 時間副頻帶分宝丨j奘 級朴 ^.^ ^ D裝置’错者在該輸入影像信號及該頻 f内化號’按照在移動 彳ί ^ ^ π β/ 十π裝置所得到之移動資訊進 仃移動補償後在時間太册 , 1方向釗頻▼分割,得到時間低頻帶副 頻“號和時間高頻帶副頻帶信號; 時間高頻帶副頻;^彳士 处 * ,g ^ ^ ^ 號工間分割裝置,對該時間高頻 贡副頻帶信號在介R _ 門低…I相* 帶分割後,產生時間高頻空 間低頻V田丨j頻V和時間 一 呵頻工間向頻帶副頻帶; k間低頻帶副頻帶作 ^ ^贡彳。唬二間分割裝置,對該時間低頻 f Μ頻f ^ #u在空間方 向田J頻f分割後,產在卑鬥4願空 間低頻帶副頻帶和時間低頻"卜"生%間低頻工 ^ ^ _員工間向頻帶副頻帶;以及 頻f 4吕號空間分割梦 x置對該頻帶内信號在空間方向 2138-6720-PP 48 1255146 副頻帶分丨;^ -it 、 ^谩,產生低頻帶副頻帶内信號和高頻帶副頻帶 内信號; 、 ' Φ -处利用該日寸間副頻帶分割裝置、該時間高頻帶副頻帶信 唬二間分割裝置、該時間低頻帶副頻帶信號空間分割裝置 乂及4頻Μ號空間分割裝置處理該輸人影像信號後,將 自該頻帶信號空間分割裝置所得到之低頻帶副頻帶内信號 2為該頻π内信號,利用該時間副頻帶分割裝置、該時間 ::π副頻帶信號空間分割裝置、該時間低頻帶副頻帶信 唬工間分剎裝f以及該頻帶信號空間分割裝置遞迴的重複 ,理’每次將該時間低頻空間低頻帶副頻帶和該時間低頻 空間高頻帶副頻帶各自置換為在正後利用該時間副頻帶分 割裝置所得到之該時間低頻帶副頻帶信號和該時間高頻帶 副頻帶信號。 队-種動態影像編碼裝置,進行對輸入影像信號進行 移動補償預測處理而且在空間方向副頻帶分割之三次元副 頻帶分割處理複數次,包括: 〜吟柏现您圚框間及 對該輪人影像信號副頻帶分割所得到之低㈣副頻帶之 之-個頻帶信號之頻帶内信號之頻帶間,計算表示移動 移動資訊; 移動補償預測裝置,在該輸入影像信號及該頻帶内 號,按照在該移動資訊計算裝置所得到之移動資訊進行 動補償預測處理後,得到預測誤差信號; 預測誤差信號空間分割裝置,對該預測誤差信號^ 2138-6720-PF 49 1255146 間方向副頻帶分割後,產生低頻帶預測誤差副頻帶和高頻 帶預測誤差副頻帶;以及 頻帶信號空間分割裝置,對該頻帶内信號在空間方向 副頻帶分割後,產生低頻帶副頻帶内信號和高頻帶副頻帶 内信號; 利用該移動資訊計算裝置、該移動補償預測裝置、該 預測誤差空間分割裝置以及該頻帶信號空間分割裝置處理 該輸入影像信號後,將自該頻帶信號空間分割裝置所得到 之低頻帶副頻帶内信號作為該頻帶内信號,利用該移動資 訊計算裝置、該移動補償預測裝置、該預測誤差空間分割 裝置以及該頻帶信號空間分割裳置遞迴的重複處理,每次 將在該預測誤差空間分割裝置所得到之該低頻帶預測誤差 副頻帶信號置換為在正後利用移動補償制編碼裝置所得 到之預測誤差信號。 3 9. —種動態影像解碼裝置,將 衣1 肘已階層化之編碼資料解 碼,包括: 階層碼解碼裝置,將係第_ …* 于你弟日守間方向濾波後之信號之 上階階層時間濾波信號、對於 弟一守間方向濾波所得到 之日守間濾波信號在空間方向階声 #㈣1…-一後之時間濾波下階階 曰仏唬以及規疋该弟二時間方向 碼; 愿渡之日守間濾波貧訊解 時間渡波上階階層信號產 喷、、念疒嘹4斗士 . 王展置,自該上階階層時 濾波“號和该蚪間濾波資訊 以及 王吋間濾波上階階層信號 2138-6720-PP 50 125 s 146 a %間濾波信號合成裝置,在將該時間濾波上階階層信 號和該時間遽波下階階層信號合成後進行該第二時間= 濾波之逆變換。 级一種動態影像解碼裝置,將6階層化之編碼資料解 碼,包括: 階層碼解碼裝置,將係第一移動補償預測後之信號之 上p白階層預測誤差信號、對於在第二移動補償預測所得到 之預測誤差信號在空間方向階層分割後之預測誤差下階階 層信號以及規定該第二移動補償預測之移動資訊解碼; 、預測决差上階階層信號產生裝置,自該上階階層預測 誤差信號和該移動資訊產生預測誤差上階階層信號;以及 移動補償合成裝置’將該預測誤差上階階層信號和該 預測誤差下階階層信號合成後進行基於該第二移動補償之 合成處理。 次、/1.—種動態影像解碼裝置,藉著在將已階層化之編碼 貧料階層合成成圖框單位後進行時間方向逆滤波,得到解 碼影像,包括: 階層碼解碼裝置,將係第一時間方向滤波後之信號之 上階階層時間渡波信號、對於在第二時間方向遽波所得到 之^間濾波信號在空間方向階層分割後之時間滤波下階階 層k ^虎以及規定該第—卩主p卩士 > ^ 邊弟一枯間方向濾波之時間濾波資訊解 石馬; 時間濾波上階階層信號產生裝置,自該上階階層時間 濾波信號和該時間滤波資訊產生時間渡波上階階層信號; 2138-6720-PF 51 1255146 以及 時間濾波信號合成裝置,進行將該時間濾波上階階層 信號和該時間濾波下階階層信號合成後產生合成時間濾波 信號; 藉著遞迴的進行將該合成時間濾波信號當作上階階層 時間濾波信號後將在注目之階層之下階階層之時間濾波資 訊和時間濾波下階階層信號解碼之利用該階層碼解碼裝置 之處理、利用該時間濾波上階階層信號產生裝置之處理以 及利用時間濾、波合成裝置之處理後,進行時間方向逆遽 波,得到解碼影像。 42.—種動態影像解碼裝置’藉著在將已階層化之編碼 貢料階層合成成圖框單位後進行移動補償合成處理,得到 解碼影像,包括: 階層碼解碼裝置,將係第一移動補償預測後之信號之 上階階層預測誤差信號、對於在第二移動補償預測所得到 之預測誤差信號在空間方向階層分割後之預測誤差下階階 層信號以及規定該第二移動補償預測之移動資訊解碼; 預測誤差上階階層信號產生裝置,自該上階階層預測 誤差信號和該移動資訊產生預測誤差上階階層信號;以及 預測誤差號合成裝置,進行將該預測誤差上階階層 信號和該預測誤差下階階層信號合成後產生合成預測誤差 信號; 猎者遞迴的進行將该合成預測誤差信號當作上階階層 預測誤差信號後將在注目之階層之下階階層之移動資訊和 2138-6720-PF 52 1255146 預測决差下階階層信號解碼之 用4 ^層碼解碼裝置之處 理、利用該預測誤差上階階屏衿 田猫、u卩"層^唬產生裝置之處理以及利 用預測疾差合成裝置之處理後 , 俊進仃移動補償合成處理, 付到解碼影像。 43,一種動態影像解碼裝置,葬 觫名处閂+ 猎者就各圖框將副頻帶信 就在二間方向副頻帶合成 n t 利用對4間低頻帶副頻帶和 4間阿頻帶副頻帶進行睥 •人η 仃守間方向副頻帶合成之三次元副頻 成處理,產生解碼影像信號,包括: 時間高頻副頻帶合成裝詈 頻帶佐赛夕办叫七人成展置,不僅筝照係時間高頻帶副 、 'U工間方向之低頻帶信f卢之日士 P3 — + ^ ^ ^ 贡乜琥之打間鬲頻空間低頻帶 仏號和係和該低頻帶信號 ^ pa ^ ^ 个州之呵頻▼之副頻帶之時間高 頻二間同頻帶副頻帶,丧 尸味门 $ A位於與柑間高頻空間低頻帶 # 5虎同一頻帶之砗門此μ _ J ^ ^ ^ h之¥間低頻空間低 帶信號相鄰之高镅揲々κ π汉係和該衂頻 μ之冋頻贡之副頻帶之 帶之雙方或其中一方、 J工間间頻⑸頻 ^ ^ ^ ^ ^ ^ 見疋和%間向頻帶副頻帶對應 之移勳補償處理之移動資 ^ 號; 、° ,產生a成時間高頻副頻帶信 時間低頻副頻帶空間置 帶副頻帶和時間低頻办門古=置^間低頻空間低頻 時間方向空間合帶合成;以及 高頻帶副頻帶進行補’對%間低頻帶副頻帶和時間 頻帶合成; 免便遵订_間方向韌 利用日守間南頻副艇册 頻帶之最低頻帶之時門=處理位於時間高頻帶副 T間N頻空間低頻帶信號; 2138-6720-PF
TW093137623A 2003-12-04 2004-12-03 Moving picture encoding method and device, and moving picture decoding method and device, and storage medium TWI255146B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003406334 2003-12-04

Publications (2)

Publication Number Publication Date
TW200524435A TW200524435A (en) 2005-07-16
TWI255146B true TWI255146B (en) 2006-05-11

Family

ID=34650251

Family Applications (1)

Application Number Title Priority Date Filing Date
TW093137623A TWI255146B (en) 2003-12-04 2004-12-03 Moving picture encoding method and device, and moving picture decoding method and device, and storage medium

Country Status (7)

Country Link
US (1) US20070133680A1 (zh)
EP (1) EP1705924A4 (zh)
JP (1) JPWO2005055613A1 (zh)
KR (1) KR100901178B1 (zh)
CN (1) CN1914926A (zh)
TW (1) TWI255146B (zh)
WO (1) WO2005055613A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2855356A1 (fr) * 2003-05-23 2004-11-26 Thomson Licensing Sa Procede de codage et/ou de decodage de groupe d'images
KR100734790B1 (ko) 2003-07-09 2007-07-03 닛본 덴끼 가부시끼가이샤 동화상 부호화 방법, 동화상 복호 방법, 동화상 부호화 장치, 동화상 복호 장치, 및 프로그램을 수록한 컴퓨터 판독가능 기록매체
JP4877090B2 (ja) 2007-06-18 2012-02-15 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
US8233541B2 (en) * 2008-03-26 2012-07-31 Sony Corporation Recursive image quality enhancement on super resolution video
JP5369893B2 (ja) * 2008-05-30 2013-12-18 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、動画像復号プログラム、動画像再符号化装置、動画像再符号化方法、動画像再符号化プログラム
TWI468020B (zh) * 2009-02-19 2015-01-01 Sony Corp Image processing apparatus and method
TWI463878B (zh) * 2009-02-19 2014-12-01 Sony Corp Image processing apparatus and method
TWI455587B (zh) * 2009-04-10 2014-10-01 Asustek Comp Inc 具有多格式影像編解碼功能的資料處理電路及處理方法
WO2013002342A1 (ja) * 2011-06-30 2013-01-03 ソニー株式会社 画像処理装置および方法
WO2013049412A2 (en) 2011-09-29 2013-04-04 Dolby Laboratories Licensing Corporation Reduced complexity motion compensated temporal processing
US9544587B2 (en) * 2012-05-14 2017-01-10 Google Technology Holdings LLC Scalable video coding with enhanced base layer
HK1205426A2 (zh) * 2015-09-24 2015-12-11 Tfi Digital Media Ltd 種分佈式視頻編碼方法
KR101821989B1 (ko) * 2016-08-11 2018-01-25 이노뎁 주식회사 재구조화 영상 처리를 통한 cctv 저장영상의 이동객체 검출 방법
JP7184488B2 (ja) * 2017-04-21 2022-12-06 株式会社半導体エネルギー研究所 画像処理方法および受像装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04322593A (ja) * 1991-04-22 1992-11-12 Victor Co Of Japan Ltd 画像符号化装置及びその復号化装置
JP3576660B2 (ja) * 1995-09-29 2004-10-13 株式会社東芝 画像符号化装置および画像復号化装置
CN1181690C (zh) * 1999-07-20 2004-12-22 皇家菲利浦电子有限公司 用于压缩视频序列的编码方法
EP1285535B1 (en) * 2000-05-03 2010-02-24 IPG Electronics 503 Limited Encoding method for the compression of a video sequence

Also Published As

Publication number Publication date
EP1705924A1 (en) 2006-09-27
US20070133680A1 (en) 2007-06-14
KR20060131796A (ko) 2006-12-20
TW200524435A (en) 2005-07-16
KR100901178B1 (ko) 2009-06-04
EP1705924A4 (en) 2010-09-15
WO2005055613A1 (ja) 2005-06-16
CN1914926A (zh) 2007-02-14
JPWO2005055613A1 (ja) 2008-04-17

Similar Documents

Publication Publication Date Title
TWI255146B (en) Moving picture encoding method and device, and moving picture decoding method and device, and storage medium
Gan Block compressed sensing of natural images
CN105408935B (zh) 上采样和信号增强
WO2003021530A2 (en) Image enhancement and data loss recovery using wavelet transforms
CN113259676A (zh) 一种基于深度学习的图像压缩方法和装置
Canh et al. Multi-scale deep compressive imaging
Bruni et al. Combined image compression and denoising using wavelets
Kountchev et al. Inverse pyramidal decomposition with multiple DCT
CN106056640A (zh) 基于形态成分分解结合压缩感知的图像压缩方法
CN101527036B (zh) 基于邻域加窗的提升小波图像去噪方法
Niu et al. Edge-based perceptual image coding
Luo et al. A scene adaptive and signal adaptive quantization for subband image and video compression using wavelets
Sumalatha et al. Medical image compression using multiwavelets for telemedicine applications
Cho et al. 3-D mesh sequence compression using wavelet-based multi-resolution analysis
Hong et al. An edge-preserving subband coding model based on non-adaptive and adaptive regularization
Lakshmi et al. Satellite image resolution enhancement using discrete wavelet transform and gaussian mixture model
Singh et al. Neuro-wavelet based approach for image compression
WO2005006766A1 (ja) 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置およびコンピュータプログラム
Rao et al. Discrete wavelet transforms
Ravikiran et al. A Hybrid Progressive Image Compression, Transmission, and Reconstruction Architecture
Jagadeesh et al. Linear adaptive global node-tree filters based SPIHT MR image codec
Panda et al. An efficient approach to signal compression using slantlet transform
Bi et al. Integer-modulated FIR filter banks for image compression
Lu et al. 3D Snapshot: Invertible Embedding of 3D Neural Representations in a Single Image
Zhang et al. A novel ica-based image/video processing method

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees