TW395131B - Method and device for processing image, and date recording medium - Google Patents

Method and device for processing image, and date recording medium Download PDF

Info

Publication number
TW395131B
TW395131B TW087100232A TW87100232A TW395131B TW 395131 B TW395131 B TW 395131B TW 087100232 A TW087100232 A TW 087100232A TW 87100232 A TW87100232 A TW 87100232A TW 395131 B TW395131 B TW 395131B
Authority
TW
Taiwan
Prior art keywords
resolution
image
low
block
signal
Prior art date
Application number
TW087100232A
Other languages
English (en)
Inventor
Shinya Kadono
Original Assignee
Matsushita Electric Ind Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Ind Co Ltd filed Critical Matsushita Electric Ind Co Ltd
Application granted granted Critical
Publication of TW395131B publication Critical patent/TW395131B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/20Contour coding, e.g. using detection of edges
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Description

經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(1 ) 〔技術領域〕 本發明有關於圖像處理方法和蘭像處理裝置,及資料 記錄媒體,尤其有關於能夠以較少之位元數記錄或傳送 圖像倍號而不會損及畫質之階層编碼處理和階層解碼處 理,和有關於收納有程式用以實現該等階層编碼處理或 階層解碼處理之記錄媒體。 〔背景技術〕 為要能夠以被顯示在顯示畫面上之各個物體(object) 為單位進行圖像處理,所以作為圖像信號者,除了通常 之亮度信號和色差信號外,還需要有用以表示物體形狀 之形狀信號。在以下之説明中,除了該等j度信號和^色 差信號外更包含有形狀信號之信號,亦即物體之 形狀資訊之圖像信號,簡稱為圖像信號》 從以物體為單位進行處理之觀點來看,此種圔像信號 適用於顯示圓像資訊或轚音資訊等同時具有相關性之多 媒體,與此種圔像信號之编碼處理有關之技術,目前正 在由作為 ISO/IEC (International Organization for Standardization/International Electrotechnical Commission Joint Technical Commissiοn )之作業群之 MPEG (Moving Picture Experts Group) 4 進行標準化 活動。 下面擬將說明習知之圖像信號之瞎層编碼處理β 第22圖表示對應不同解像度之圖像信號之顔录( 以下亦稱為框架)。在該圔中,LF是對應飪艇像度圖像 —-- ~~~ -3- 本紙張尺度適用中國國家標準(CNS ) Α4規格(210 X 297公釐) __I---— I--I - (請先閲讀背面之注意事項再填寫本頁)
、1T 五、發明説明( 示 顯 之 號 信 顯像 之圖 號度 信像 像解 ,之 〇 像上域 A7 B7 ) 圖、 圖L) 對,'外 是另 體 物 個 1X 之 上 F L 架 框 述 上 a2 一 ( 2 j 在| 2第一示 第{一顯 ί而I被 面畫|號 畫/示ί信 依 是 低圖 照之 架.一 框 述 上 在 示一 顯一 被 號: 信 像: 圖一度I 像I 解 高 照 依 是 區 部/ I 内 體. 物I 個: 各- 是 域 區 示 顯 點 - 像: 圖 之 體 物 個 模該 估含 評包 新而 最體' 之物 4個 G E 名 MP應 之對 在定 現設 <上 理架 處框 碼個 編 1 像在 画 , 之中 知 } 習式 在方 態 小彳 1 塊 成方,i!lE- #之 的素一 步興 二個I 更X 一 域16 區一為 形一中 矩一態 該(模 將一估 ,一.評 域一之 區一 4 形EG 矩 'MP 之辛 豊 ( 物一塊 構 以 是 乃 m: 理 處 碼 編 之。 號行 信進 像來 圖位 之單 體為 物塊 個之 各域 應區 對形 ,矩 外述 另上 。成 此 因 應 對 在 (請先閲讀背面之注意事項再填寫本頁) 架I 之框一 4 β G像 Ε Ρ 解 低 在 的 示. 所|H- 中 tn: 理 處 碼 編 層 階 需 上 體| 物I 應一 對: 定: 2 低 第之!ob 要 高 域 在區 的形 示矩 所度 圖像 d 解 2(高 2之 第W 如H0 且體 ,物 時應 同對 定 R L:設 域上 區HF 形架 矩框 度度 像像 解解 種度 此俛 在齠 訂 經濟部中央標準局員工消費合作社印製 信 像 圖 度 雖一架 果框 於像結 對解其 ,高 η 時於 d 定對推一 設和ή【 之,赍 域定别 區設分 形之乃 矩LR定 當域設 ,區之 中形HP 理矩域 處之區 碼號联一 編信矩 層 像> 之 階層號 簡一 m: 理 處 碼 編 然 置 位 塊 各 之 上 各 之 空 間 塊 域 區 速形 矩 度 星像 物,解 對低 但,其 即像 亦解 ( 高一 置和 和 域 區 形 〇 矩應 度對 像之 解塊 低得 在*獲 且能 ,未 致時 一 有 不間- 會I之 間域 之區 塊形 域\矩 區度 形像 矩解 度髙 本紙張尺度適用中國國家標準(CNS ) A4規格(210X 297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(4 ) 在以下之詳述中,第23圖是方塊圖,用來説明習知之 階層圖像编碼裝置。 該習知之圖像编碼裝置2(lQa被構成為;用於接受圖像 輸入信號,將該圖像輸入信號當作高解像I圖像_信號 HSg來施加階層編碼處理。亦即,該階層圔像編碼裝置 200a具有:副樣本器2,用來對該高解像度圓像信號HSg 減量取樣藉以産生低解像度圔像信號LSg; rJEUl释像度 7.. » 编碼部201L,用來對該低解像度画像信號LSg施加編碼 處理藉以産生低解像度編碼信號L E g。另外,該階層圖 f------------------- - - - ' . _ · 像编碼裝置200a具有:解碼器9a,用來對上述之低解像 度編碼信號LEg進行解碼;增量樣本器10a,用來對該解 碼器9 a之輸出Ldg進行増量取樣;和高解像度编碼部201H ,根據該增量樣本器l〇a之輸出LAg,將上述之高解像部 圖像信號HSg施加編碼處理,藉以輸出高解像度编碼信 號 HEg。 上述之低解像度編碼部201[具器3,根 據上述低解像度圖像信號LSg,用來檢測低解像度框架 LF上對應各物體之低解像度矩形區域LR之位置和大小等 資訊,將該資訊作為矩形信號LRg來輸出;區域抽出 器5,傺根據該矩形信號LRg,從上述之低解像度圖像信 號LSg中抽出對應上述矩形區域LR之圖像信號LOg。另外 ,上述之编碼部201L具有:塊化器6,用來將對應上述 矩形區域LR之圖像信號(物體對應圖像信號)LOg,分 割成使能對應區分該矩形區域之16X16値圖素所構成的 -5- 本紙乐尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) 訂 A7 B7 五、發明説明(4 ) 塊MB;和编碼器7,用來將該塊化圖像信號LBg加予編碼 ,藉以輸出低解像度編碼信號LEg。 而且,上述之高解像度编嗎部2 0 1 Η具有;區域檢測器 12,乃根據上述之高解像度圖像信號HSg,用來檢測高 解像度框架HF上對應各個物體之高解像度矩形區域HR之 位置和大小等之資訊,而將該資訊作為矩形信號HRg輸 出;和區域抽出器14,傺根據該矩形信號HRg,從上述 之高解像度圖像信號HSg中抽出對應上述矩形區域HR之 画像信號HOg。更在上述编碼部201H具有塊化器15,用 來將對應上述矩形區域HR之圔像信號(物體對應圖像信 號)HOg分割成能對應區分該矩形區為16 X 16個圔素所 構成之塊MB,而輸出對應各塊之圖像信號(塊化圔像信 號)MBg;和编碼器16,用來將該塊化圖像倍號HBg加以 编碼,而輸出高解像度編碼信號HEg。 下面擬說明有關動作。 將高解像圖像信號HSg作為圔像輸入信號而輸入給本 画像编碼裝置2 0 0 t在副樣主器2,上样之高解像度 圖像信號HSg即經由減量取樣而被變換為低解像度圖像 信號LSg。 經濟部中央標準局員工消費合作社印製 (請先閱讀背面之注意事項再填寫本頁)
在上述之低解像度編碼部2Q1L之區域檢測器3,乃根 據上述之低解像度圖像信§|LSg如第22(c)圖所示,在低 解像度框架LF上,檢測包含作為處象之物體Lob之 矩形區域L R範圍,將該矩形區域L R之位置和大小等資訊 作為矩形信號LRg而輸出。如此一來,在上述编碼部201L 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 經濟部中央標準局員工消費合作社印製 Μ Β7 五、發明説明(r ) 之區域抽出器5,即根據該矩形信低解像 度画像信號LSg中抽出對應上述矩形區域LR之物體對應 圖像信號LOg。另外,在上述編碼部201L之塊化器6即 如第22(c)圖所示,上述之物體對應圖像信號LOg被分割 成對應锢別的多個塊(用以區分上述之低解像度矩形區 域LR),作為對應各値塊MB之塊化圖像信號LBg而輸出 給編碼器然而,利用該編碼器7進行上述塊化画像 信號LBg之編碼處理,從上述编碼部201L輸出低解像度 編碼信號LEg。 該低解像度编碼信號LEg經由解碼器9a之解碼處理被 變換成低解像度解碼信號Ldg,該解碼信號Ldg經由增畺 樣本器10 a之插入處理,被變換成具有空間解像度與高 解像度圖像信號相同之插入解碼信號LAg,然後輸出給 高解像度編碼部2 0 1 Η之编碼器1 6。 這時,在上述之高解像度編碼部201Η進行與上述之低 解像度编碼部201L大致U之處理。 亦即,在該编碼部201Η之區政檢測器12,根據上述之 高解像度圖像信號HSg,在如第22(d)圖所示之高解像度 框架HF上,檢測包含作為處理對象之物體Hob之矩形區 域HR範圍,將該矩形區域HR之位置和大小等資訊作為矩 形信號HR g而輸出。如此一來,在上述編碼部20 1 Η之區 域抽出器14,即根據該矩形信號H R g ,從上述高解像度圓 像信號HSg中抽出對應上逑矩形區域HR之物體對應圖像 信號HOg。g外,在上述编碼部201H之塊化器15即如第 -7 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) ——Φ—— 1T------·---------- A7 B7 五、發明説明(办) 22(d)圖所示,上述物體對應圖像信號HOg被分割成對應 到多傾塊MB (用以區分上述之高解像度矩形區域HR)之 各個,而作為對應各個塊MB之塊化圖像信號HBg輸出給 編碼器16,另外,在該编碼器16根據上述之插入解碼信 號LAg進行上述塊化圖像信號HBg之编碼處理,乃從上述 之编碼部201H輸出高解像度编碼信號HEg。 如上述那樣對階層画像编碼裝置2 0 0 a所编碼之低解像 - — *一一~— · ·— - * ''•"―- -*·. >., 编碼信號LEg,可根_舊此信號LEg和矩形信鱗Lirf加, 能産生與該低解像度圖像信號LS 霞之解像信號的解 __'----------- _ 碼處理,另外,對於以上述之编碼裝置200a编碼後之高 .— '— 解像度编碼信號HEg,可根據上述之低解像度编碼倍號 LEg、矩形信號LRg、高解像度编碼信號HEg及矩形信號 HRg,進行解碼處理藉以産生與高解像度圖像信號HSg相 當之解碼信號。另外,在高解像度画像信號HSg編碼 處理中,參照低解像度圖像佶號LSg而利用該兩個圔像 信號L S g和H S g之間之圔素值之相關14,得以更少之位元數 (與獨立编碼之情況比較時)將高解像度圔像信號HSg -加以编碼。 經濟部中央標準局員工消費合作社印製 ---------广3^-- (請先閱讀背面之注意事項再填寫本頁) -#- 第24圖是方塊圖,用來説明習知之階層圔像解碼裝置。 該階層画像解碼裝置2Q0b係以如第23圖所示之習知之 画像编碼裝置200 a所编碼過之低解像度编碼信號LEg和 高解像度编碼信號HEg作為輸入信號,用來進行階層解 碼處理。 亦卽,該階層圖像解碼裝置200 b具有:低解像度解碼 -8 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) A7 B7 五、發明説明(?) ' 部202L,用來對上述低解像度編碼信號LEg施加解碼處 理藉以産生低解像度再生信號LC;增量樣本器10b,藉 增量取樣將經由該解碼部202L之解碼處理途中之信號 LDg插入而補充;和高解像度解碼部202H,俗根據該增 量樣本器10b之輸出ADg,對上述之高解像度编碼信號 HEg施加解碼處理,藉以産生高解像度再生倍號HCg。 上述之低解像度解碼部2Q2L具有:解碼器9,用來對 上述之低解像度编碼信號LEg進行解碼處理,藉以産生 對應各锢塊之低解像度解碼信號LDg;逆塊化器20,用 來統合該低解像度解碼信號LDg,藉以産生對應上述矩 形區域LR之解碼統合信號LIg;和區域合成器21,用來 使對應該矩形區域LR之解碼統合信號舆形成一框架之 (請先閲讀背面之注意事項再填寫本頁) 進 之 示 虎所 R 0 0 L 信LR域 像號區 圖信形 他形矩 其矩該 置 裝 碼 编 述 上 自 來 在 成 合 使 置 位 之 上 F L 架 框 度 像 解 低 之置 G配 ο 趁 ο 错 ,碼 30编 器度 碼像 解解 : 高 有對 具Dg H-A 02出 2輸 部之 碼i 解10 度器 像本 解樣 高.量 之増 述之 上述 ,上 外據 另根 俗 經濟部中央標準局員工消費合作社印製 *器 理化 處塊 碼逆 解 ·, 行Dg 隹 Η g 馘 HE信 號碼 信解 度碼 像解 解度 高像 之'-.解 塊高 各該 應合 對統 生來 産用 以 藉 i± 信之 合HR 統域 碼區 解形 之矩 HR該 域應 區對 形使 矩來 述用 上 , 應32 對器 生成 産合 以域 藉區 , 和 S D H S 號HI 信號 成 形 與 S I Η 號 信 像 圖 他 其 之 架 框 铺 。 信HE 形域 矩區 之形 oa矩 20該 置置 裝配 碼能 編使 述, 上置 自位 合來之 統在上 i F 碼 ,Η 解成架
合框 行之 進示' 號所 I g 信 R 本紙張尺度適用中國國家標準(CNS ) Α4说格(210X297公釐) A7 B7 經濟部中央標準局員工消費合作社印製 五、發明説明 ( 8 ) 1 1 下 面 將 説 明 有 關 之動 作〇 1 1 將 上 逑 之 低 解 像 度编 碼信號 掛 1 1 HE g輸入到本圖像解碼裝置200b時,該低 解像 度 编 碼 信 /-—V 請 1 -一 ·*** 先 1 Bife 號 LE g被上述之低解像度解碼部202L之解 ........... 碼器 9 施 加 解 閱 讀 1 碼 處 理 9 藉 以 産 生 低解 像度解碼信號LDg 。該 低 解 像 度 背 面 1 I \ 之 1 解 碼 信 m LD g經由上述之增量樣本器l〇b之增量取樣處理 注 意 1 拳 1 而 插 入 補 充 9 被 變 換成 具有空間解像度所對應於上述高 項 I 再 解 像 度 之 插 入 解 碼 信號 ADg。另外,上述 低解 像 度 解 碼 填 寫 本 i 信 號 LDg更被逆塊化器2 0統合,藉以産生 對應 上 述 矩 形 頁 1 I 區 域 LR之 解 碼 统 合 倍號 L I g β然而,該解 碼統 合 信 號 LIg 1 1 即 經 由 區 域 合 成 器 2 1根 據來自上述编碼裝置2 00 a之矩形 1 1 信 m L Rg , 與形成- -框架之其他薩像信號 進行 合 成 » 將 1 訂 其 作 為 低 解 像 度 再 生信 號LCg而輸出。另 外, 藉 該 合 成 1 處 理 在 上 述 矩 形 佶 號LRg所示之框架LF上 之位 置 配 置 1 I 由 解 碼 統 合 信 號 L I g之矩形區域LR之圔像 〇 1 I 另 方 面 , 上 述 之高 解像度编碼信號HEg即 於 上 逑 高 1 解 像 度 解 碼 部 2 0 之解 碼器30,根據増量樣本器1 Ob之 | 輸 出 ADg施加解碼處理, 藉以産生高解像 度解 碼 信 號 0 1 I 該 高 解 像 度 解 碼 倍 號HD g更被逆塊化器31 統合 9 藉 以 産 1 1 生 對 應 上 述 矩 形 區 域HR内圖像之解碼統合信號HIg 〇 然 1 I 而 9 該 解 碼 統 合 信 號HI g經由區域合成器 3 2, 根 據 來 自 1 1 上 述 编 碼 裝 置 2 0 0 a 之矩 形信號HR g與對應 一框 架 之 其 他 1 1 圖 像 信 贴 m 合 成 將 其作 為高解像度再生信號HCg 輸 出 0 1 I 另 外 9 藉 該 合 成 處 理將 由解碼統合信號HIg之 矩 形 區 域 1 1 -10- 1 1 1 本紙張尺度適用中國國家標準(CNS ) A4規格(210X 297公釐) 經濟部中央標準局貝工消費合作社印製 A7 B7 五、發明説明(9 ) HR之圖像配置在上述矩形信號HRg所示之框架HF上之位 置。 在此種構造之階層圖像解碼裝置200b中,由於在低 解像度编碼信號LEg依序施加解碼處理和逆塊化處理之 後,使矩形區域LR能被配置於框架LF内之指定位置般, 對舆該矩形區域LR對應之低解像度解碼信號LIg施加區 域合成處理,所以,以對應框架FL内之値別物體之矩形 區域LR為對象而經由编碼處理所獲得之低解像度编碼信 號LEg,可加以解碼p 另外,參照低解像度解碼信號LDg對高解像庠绢碼信 號HE g進行解碼藉以産生高解像度编碼信號HDg,然後對 該解碼信號HDg施加逆塊化處理,更為使該矩形區域HR 能被配置在框架HF内之指定位置般,在對應該矩形區域 HR之高解像度解碼信號HI g施加區域合成處理,所以, 以框架HF内之各锢物體所對應之矩形區域HR為對象而由 階層编碼處理所獲得之高解像度编碼倍號HEg,就可正 確加予解碼。 然而,在習知之階I圖俛·48碼裝W .對像 度植架LF内之矩形區域LR範圍之檢測處理,和磐i解像 … „ f 一..' ' 度框架HF内之矩形I變Hf範圍名檢測嘆理乃晕肩立進行 ,因此,如第21(c)鼠Α第22(d)圖所示,用以區分低解 像度矩形區域LR之各塊MB之對低解像度画像Lob之空間 位置,和用以區分高解像度矩形區域HR之各塊mb之對高 解像度圖像Hob之空間位置勢將不一致。在這種情況, 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 、,τ -Le. 經濟部中央標準局負工消費合作社印製 A7 - B7五、發明説明(、。) 將對應上述髙解像區域HR之高解像度^圖像信號 HOg當每一塊施加编碼時,要使低解像度塊對應被编碼 高解像度塊會有困難__因j面^高解像度圖像信號和低解 像库像信號之差分值之演算^理便變成複雜。其結果 ,在對被编碼高解像度塊進行编碼處理時,較諸參照與 該被編碼高解像度塊之間的空間位置完全一致之低解像 度塊,其階層編碼處理之預測效率勢必劣化,實有影響 到降低編碼效率之問題。 本發明實為解決上逑之問題,像處 理方法和圖像處理裝 S^·"—-. . -~~—' 之矩形區域為對魚_行階靥編碼低解像 度信號以進行高解像度信號之編碼處理而不至於使编效 /率降低,可實現階層編碼處理及與其對應之階層解碼處 理,並可獲得得以軟體實現上述階層編碼處理和階層解 碼處理而收納有程式之資料記錄媒體者。 〔發明之掲示〕 本發明(申請專利範圍第1項)有關之圔像處理方法 ,傺用來依序進行階層圔像编碼方法,包含著:根據具 有物體形狀資訊之圖像輸入信號,作為形成其空間解像 度不间之多數圔像空間之階層圖像信號,至少産生低艇 像度解像度信號,將上述之高解像寧圖像 信號使其能對應由高解像度圖像_空簡之-¾定數圖素所構 ,.—— . 成之高解像度塊般加以區分將上述低解像度圔 像信號使其能對應由低解像度圖像空間上之而由指定數 -12- (請先閱讀背面之注意事項再填寫本頁) ,裝.
、1T Ρ, 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) A7 B7 五、發明説明( 圖素所構 象的該高 照形成對 號依序進 碼處理時 間上之空 高解像度 之低解像 在這種 之编碼處 為編碼處 成之低解像 解像度塊之 應高解像度 行階層编碼 將所參照之 間位置與該 塊作為高解 度塊者。 構圖像 理時,便參 ,—. 度塊般加以區分;形成作為處理對 高解像度圖像信號之编碼處理,參 塊之低解像度塊之低解像度圔像信 _ . . ____________...· — 的方法,其待徵為;當施加上述编 — — * 低解像度塊其低解像度圖像空 參照低解像度塊所對應之上述對象 像度f像空間上之空間位置所對應 處理方法中,當高解像度圖像佶號 經 奂 標 準 局 員 合 作 社 印 製 間位置的 ____—r»— i訊之圖 率劣化。 本發明 1_項之圔 r ·—-------- 之各個圔 獲得,與 解像度變 在這樣 多個圖素 換塊之指 效率。 本發明 低1像圖塊 像信號進行 照了在低解像度圖像空間位於與作 象高解像度塊之&間@置榜輯之空 ,之曝,可對具有物體形狀 階層編碼處理,而不致於使編碼效 (申請專利範圍第2項)是在申請專利範圍第 像處理方法中,使構成上述高解像度圔像空間 素藉由上述低解像度圖.像空間之解像度變換而 其空間解像與上述之高解像度圖像空間相等之 換圖像空間之各個圖素使能逐一對應者。 構成之画像處理方法中,使高解像度塊之全部 對應將低解像度塊之解像度變換後之解像.度變 定圔素,藉此,可提高階磨编碼處理上之編碼 (申請專利範圍第3項)是$电_請專利範圍A -1 3- I.-------裝------訂------ (請先閲讀背面之注意事項再填寫本頁) 本紙張尺度適用中國國家標準(〇奶)八4^格(21〇乂297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(…) 1項之圖像處理方法中,使構成上述參照低解像度塊之 圖素數目,和用以構成上述對象高解像度塊之圖素數目 一致者。 在依此方式構成之圖像處理方法中,因可在高 圔像彳f號和低解像圖像信號之間共用塊彳碼器, 所以,可謀取電路構填之_小_^化。 本發明(申請專利範圍第4項)是在申請專利g圍第 1項之圔像處理方法中,使上述參照堪解像度塊之低解 ——- ----- 像度圖像空間之相對位置,與對象高解像度塊之高解像 度圖像空間之相對位置能一致者。 在這種ϋ之画像鼠^方法中,由於對象高解像度塊 之空間位置和參照低解像度塊之空間位置一致,所以, 構成高解像度塊之各個圖素之圓素值和構成低解像度塊 之各個圖素之圔素值之差額不會有超過必要之大,而得 以高編碼效率進行階層编碼處理。 本發明(申請專利範圍第5項)是在申請專1範^第 __. ·- — 1項之圖像處理方法井《,因應為要識__風_對~上述參照低解 ----------- * --— _ 像度塊之编碼處理方法之编碼模態,用來變換對上述對 象高解像度高解像度塊為識別编碼處理方法所顯示的模 態信號之編碼方式者。 在理方法中,對於其編碼模態與低 解像度塊/致之高解|度塊,對编肩模態分配較短之编 碼,因而,在顯示高解像度圖像信號之编碼模寵之1態 信號之编碼處理上_^_可削^編元數。 -14- 本紙張尺度適用中國國家標準(CNS ) Α4^格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 袭· 、1Τ A7 B7 經濟部中央標準局員工消費合作社印裂 五、發明説明 ( t ^ ) *) 1 1 本 發 明 ( 申 請 專 利 範 圍 第 6 項 ) 是 在 申 請 專 利 範 圍 第 1 1 I 5 項 之 圖 像 處 理 方 法 中 使 上 述 编 碼 模 態 作 為 表 示 被 顯 1 1 示 在 圖 像 空 間 上 之 物 m 形 狀 之 境 界 是 否 被 包 含 在 上 述 對 /--Ν 請 1 __ -" -- 先 1 象 高 解 像 度 m 内 之 模 態 者 〇 閲 讀 1 在 這 種 構 成 之 圔 像 處 理 方 法 中 9 當 高 解 像 度 塊 和 物 體 背 面 1 I 之 1 之 位 置 關 傺 與 低 解 像 度 塊 和 物 體 0-ΕΖ. 之 位 置 關 傺 為 一 致 之 情 注 意 1 事 1 況 時 9 藉 將 表 示 高 解 像 度 圖 像 信 號 之 編 碼 模 態 的 模 ψ 信 項 1 再 號 充 當 較 短 編 碼 9 就 可 削 減 該 编 碼 模 態 信 號 之 编 碼 所 需 填 寫 裝 — 本 之 編 碼 位 元 m 〇 頁 '--- 1 I 本 恩 —(一 請 專 利 範 圍 第 7 m ) 是 在: 申 請 惠 利 範 圍 第 1 1 5 項 之 圖 像 鱼 星 Μ 9 ± 述 显 蓋 態 為 9 將 對 應 1 1 上 述 參 照 低 解 像 度 塊 之 圖 像 信 號 按 每 圖 素 依 序 編 碼 之 1 f' 訂 编 碼 處 理 作 為 表 示 究 竟 是 沿 著 水 平 掃 描 方 向 和 垂 直 掃 1 描 方 向 中 之 那 一 掃 描 方 向 進 行 的 編 號 模 態 者 〇 1 1 在 構 成 之 m 像 處 理 方 法 中 9 與 構 成 直 M- M- 真 凰 M- Μ- 贴 Μ 1 I 圖 素 之 相 關 性 乃 是 沿 皇 較 大 _ajs 方 向 被 编 碼 Μ 此 9 I λ 在 低 ---- 解 ~~— 皇 度 圖 像 信 號 JD- 真 像 信 貼 m W | % 值 之 相 關 性 與 較 大 掃 描 方 向 一 致 之 情 況 時 9 藉 對 表 示 1 1 高 解 像 度 圖 像 信 貼 m 之 編 碼 模 態 之 模 態 信 號 充 當 較 短 编 碼 1 ! > 就 可 W·» 刖 削 減 該 编 碼 模 態 信 號 之 编 碼 所 需 之 編 碼 位 元 數。 I I 本 發 明 ( 申 請 專 利 範 圍 第 8 項 ) 是 在 申 請 專 利 範 圍 第 1 I 1 項 之 圖 像 處 理 方 法 中 > 經 由 參 照 m 應 上 逑 參 照 低 解 像 1 1 度 塊 而 表 示 上 述 低 解 像 度 圖 像 空 間 之 物 體 移 動 之 移 動 資 1 I 訊 9 變 換 對 應 上 述 對 象 高 解 像 度 塊 而 表 示 上 述 高 解 像 度 1 1 I -I 5- 1 1 1 1 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(-〇 圖像空間之物體移動之移動資訊之编碼方法。 在依此芳^-構法中,因為在高解像度 圖像信號和低解像度圖像信號之間,有關之圖素值具有 ...... ——— . 大相關性,所以在高解像度塊和對應之低解像度塊 之間,當移動向量為一致之情況時,藉對表示高解像圖 像信號之移動向量(编碼模態)之模態信號充當較短编 碼,就可削減移動向量之编碼所需之编碼位元數。 本發明(申請專利範圍第9項)是在中請專利範哩第 1項1圖像處理方法中,經由f照已被施加過编碼處理 一...........------ 之處理過高解像度塊而表示高解像度圖像空間之物體移 動之移動資訊,及對應上述參照低解像度塊而表示上述 低解像度圖像空間之物體移動之移動資訊,用來變換對 應上述對象高解像度塊而表示上述高解像度空間之物體 移動之移動資訊之編碼方法。 在依1方式構m像處理方法中,利用對應對象高 解^度塊之處理過高解像度塊之移動向量,和對應對象 髙解像度塊之低解像度塊之移動向量,用來産生預測向 量,根據該預測向量而將對象高解像度塊之移動向量加 以編碼,因此,圖像信號在畫面間有其圖素值的相關性 ,又在高解像度圖像信號和低解像度圖像信號之間,也 有有i圖素值的大相關性,因此,對象高解像度塊之移 動向量和預測移動向量之誤差變小,自可削減高解像度 _像信號;^移動之编碼所需m位元數。 乂 ·. '· 本發明(申請專利範圍第ίο項)之圖<像處理方法,m -1 6- 本紙張尺度適用中國國家標準(CNS ) A4規格(21〇Χ297公釐) (請先閱讀背面之注意事項再填寫本頁) "° L®. 經濟部中央標準局員工消費合作社印製 A7 B7五、發明説明(·〇 來進行階層圖像解碼方法,其像對於具有物體之形狀資 ....................— — 訊之圖像信號施加i階層编處理所獲至少2個塊 化階層編碼信號中,將低解像度编碼信號加以解碼,藉 以産生低解像度圖像空間中由指定數圖素構成之低解像 度塊所對應之低解像度解碼信號,統^合該低解像度解碼 信號,藉以産生上述之低解像度圖像空間所對應之低解 ^— ·-··""' . ''' " — ·' .' — 像度統合信號,將上述2橱塊化之階層编碼1言號中乏高 ___ ... —-- -- 解像度编碼信號',對ί之低解像度解碼信號而予以 解碼,用來産生由高解像度圖像空間中之指定數圖素構 成之高解像度塊所對應之高解像度解碼信號,統合該高 解像度解碼信號,藉以産生上述高解像度圖像空間所對 應之高者,其中將上述高解像度編碼信 、 —-— ··....—— .......——~ 號之解碼處理時所參照之參照低解像度塊為,使其低解 __ —~ — -— · - ,—--一----— ' 疒——… 像度画像空間之空間位置作為對應該參i低解像度j鬼的 ____、 上述解碼處理對象之對象高解像度塊,在裔^画像 空間關傺者。 在依此方式構成之圖像處理方.法中,當高解像度圔像 信號之解碼處理時,利用低解像度,參—低 像度塊(位於與成為解碼處理對象之對象髙解像度塊之 空間位置相關之空間位置)之解碼信號,可實現與編碼 效率之劣化被抑制而具有物體形狀資訊之圖像信號之階 層编碼處理所對應;έ階屑解碼處理。 本發明(申請專利範圍第11項)是在申請專利範圍第 ίο項之圖像處理方法中,使構成上述高解像度圖餘空間 -17- (請先閱讀背面之注意事項再填寫本頁) 7_裝· 訂 I® 本紙張尺度適用中國國家標準(CNS ) Α4規格(210X297公釐) A7 B7 五、發明説明(4 ) 之各値圖素經由上逑低解像度圖像空睹^ 獲得,而使空間解像度與上述高解像度圖像空間相等之 解像度變換圖像空間之各餐圖-素^逐一對應者Γ 在依此方式構成之圖象處理方法中,使所有的高解像 度塊之多數圖素都能對應藉低解像度塊之解像度變換所 獲得之解像度變換塊之指定圖素,利用這種方式可獲得 對於高编碼效率之階層编碼處理之階層解碼處理。 本發明(申請專利範圍第12項)是在申請專利範圍第 ' 一 _____—--- > 10項之圔像處理方法中,使構成上逑參照低解像度塊之 圖素數,和構成上述對象高解像度塊之圖素數一致者。 在依此種方茜Jf成之處理方法中,因為可在高解 像度编碼信號和低解像度编碼信號之間共用解碼器及逆 塊化器,故可謀取電路構造的小型化。 本發8月(里圍第1 3項)是在申範圍第 10項之圖像處理方法中,使上述參照低解像度塊之低解 像度圖像空間之相對位置,與對象高解像度塊之高解像 度圖像空間之致者。 經濟部中央標準局員工消費合作社印製 (請先閱讀背面之注意事項再填寫本頁) 在種方處理方法~中~7~~^聆對象高解 像之空間位置和參照低解像度塊之空p位置為一致 γ/所$構成高解像度塊之各個圔素之圖素值和構成低解 ^ .... ·— .....一.. .... ν'像度塊之各個圖素之圖素值之差額不至於有不必要之大 *-----—--------— — --------- ,自虐编碼處理之階層解 碼處琿。 〜 本發明(申請專利範圍第14項)是在申請專利範圍第 -18- 本紙張尺度適用中國國家標準(CNS ) A4現格(210><297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明() : 10項之圖像處理方法中,使因應用以識別對上述參照低 解像度塊之解碼處理方法之编碼模態,來變換编碼模態 信號之解碼方式,該模態信號用來表示識別對上述對象 高解像度塊之解碼處理方法之編碼模態。 在依此種方式構成之画像處理方法中,表示對於低解 像度塊的编碼模態一致之高解像度塊编碼模態之模態信 號分配較短編碼,利用這種方式,就可將表示高解像度 圖像信號之编碼模態之模態信號之編碼所使用之位元 數被削減之階層编碼處理,可以進行與其對應之階層解 碼處理。 本發明(申請專利範圍第15項)是在申請專利範圍第 14項之圖像處理方法中,使上述之波 ...—— 顯示在圖像空間上之物體形狀之境界是否被包含在上述 之對象高g像度>塊内。 在依此種方式構成之圖像處理方法中,當高解像度塊 和物體之位置關偽,與低解像度塊和物體之位置關傺為 一之情況時,藉對用以表示高解.像度圖像信號之编碼模 態之模態信號分配較短編碼,自可實現削減該编碼位元 數的階層編碼處理所對應的階層解碼處理。 本發明(申請專利範圍第16項)是在申請專利範圍第 1 4項之圖像處理中^使上沭之編碼模熊為,其,應 參照低解像度塊之圖像信號每一圖素序解碼之解碼處理 ,表示究竟是沿著水平掃描方向和垂直掃描方向中那一 掃掘方向_進行。 -19- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (讀先閩讀背面之注意事項再填寫本頁) 一裝· 、τ 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(J ) 在依此種方式構成之圖像處理方法中,在低解像度圖 像信號和高解像度圖像信號之間,當其圔素值之相關性 較大之掃描方向為一致之情況時,藉對表示高解像度圔 像信號之编碼模態之模態信號分配較短编碼,就可實現 與编碼位元數被削減之階層编碼處理對應之階層解碼處 理。 本發明(申請專^ ^ ^ 1 7 )是在申請專利範^第 10項之圖像處理~方法中,經由參照^對應上逑參照低解像 度塊而 '表示上逑低解像度圖像空間之物體移動之移動資 訊,用來變換表示上述高解像度圖像空間之物體移動之 移動資訊之編碼方法〇 在依此種方式構成之圖像處理方法中,在高解像度塊 和與其對應之低解像度塊之間,富情況 時高解像度圔像信號之移-動向量(緩^模態) 之模態信號分配較短编碼,就可實現與编被削 減之階層編碼處理對應之階靥解通處理。 本發明(申_請專利範項)是在申請專利範圍第 10項之圖像處理方法中,將參照已被施加碍_MJI處理之 ^―— I I. -I I · - —- ___- I I · · 1 處理過高‘解像度塊之表示高解像度画像空間之物體移β> •------ 之移動資訊,及對,h令术& Μ Μ換.庶埔.而-㈣韦示上 述低解像度圖像空間之物體移動之移動資訊,為對 應上述對象高解像度塊而寒示上採翕解像度空間之物遭' 移動之移動資訊之解碼法。 在依構成之圖像*«~5§:_^^中,就可實現對象 -20- 本紙張尺度適用中國國家標準(CNS ) Α4規格(210><297公* ) (請先閲讀背面之注意事項再填寫本頁) 、1Τ .k. Μ Β7 經濟部中央標準局員工消費合作社印製 五、發明説明 (19 ) *) 1 1 高 解 像 度 塊 之 移 動 向 量 和 預 測 移 動 向 量 間 之 誤 差 小 9 又 1 1 與 編 媽 位 元 數 被 削 減 之 階 ’層 编 碼 處理對勝^ 階 層 解 碼 處 1 1 理 0 /--V 請 1 I 先 1 本 發 明 ( 申 請 專 剌 範 圍 第 19項 ) 稈画 像 處 理 裝 置, 閲 讀 1 I 9 其 中 之 階 層 國 像 圖 像 編 碼^裝 接 受 直 物 m 形 狀 η 面 1 I 之 1 1 資 訊 之- 凰 1瀚Jc-信 號 5 而 咳周*成 不 同 之 多 數 注 意 1 I 事 1 画 像 空 間 的 階* 層 圖 像 信 號 加 以 编 碼 9 其 特 徴 為 具 有 項 再 / -'' 副_ 樣 用 來 對 上 述 之 圔 輸 入 信 號 進 行 減 量 取 填 寫 本 '.V 裝 樣 藉 以 産 生 低 解 像 度 圖 像 信 m 頁 、> 1 I % 1 9 用 於 使 該 低 解 像 度 圔 像 信 號 能 對 應 由 1 1 低 解 像 度 圖 像 空 間 之 指 定 數 圖 素 所 構 成 之 低 A7S m 像 度 塊 而 1 1 加 以 塊 化 1 訂 第 1 ㈣. 真 -T· 用 來 對 形 成 作 為 編 碼 處 理 對 象 之 低 解 1 像 度 塊 之 低 解 像 度 匿 像 信 號 進 行 依 序 編 碼 處 理 1 1 第 2 塊 化 裝 B — 以 上 述 圓 像 輸 入 信 號 作 為 高 解 像 度 圖 1 I 像 信 號 i 使 能 對 應 由 高 解 像 度 圖 像 空 間 指 定 數 之 圖 素 構 1 成 之 高 解 像 度 塊 般 9 加 以 塊 化 和 ρρ^ι lb I 第 2 编 碼 裝 置 , 將 對 形 成 作 為 编 m 處 理 對 象 的 該 高 解 1 像 度 塊 Z、 高 解 像 度 信 m 之 編 碼 處 理 » 參 照 形 成 對 應 解 像 1 1 度 塊 之 低 解 像 度 塊 的 低 解 像 度 信 OJa 號 依 序 加 以 编 碼 處 理 » 1 1 將 上 述 編 碼 處 蓋 _所 參 照 之 參— 里 m '像 度 m 作 為 » 使 1 1 其 低 A73 m 像 度 圖 1 夺 間 P 空 間 位 置 與 參 照 低 解 像 度 塊 所 1 1 對 m 之 上 述 對 象 高 解 像 度 塊 之 高 解 像 度 圖 像 空 間 之 空 間 1 I 位 置 相 對 應 之 低 像 1 塊 者 〇 ' 1 -2 1- 1 1 1 1 本纸張尺度逍用中國國家標準(CNS ) Α4規格(210Χ297公釐) A7 B7 經濟部中央標準局員工消費合作社印掣 五、發明説明 ( ) 1 1 在 依 式 構 成 之 画 m m 理 裝 置 中 9 在 高 解 像 度 面 像 1 1 信 號 之 编 碼 處 理 時 9 由 於 在 低 解 像 圖 像 空 間 9 勢 必 參 照 1 1 低 解 像 度 塊 ( 位 於 與 作 為 編 碼 處 理 對 象 之 對 象 高 解 像 度 /·-V 請 1 先 1 塊 之 空 間 位 置 相 關 之 空 間 位 置 ) 之 圖 像 信 號 9 可 對 具 有 閱 讀 1 物 體 形 狀 資 訊 之 圖 像 信 m 進 行 不 至 於 招 致 编 碼 效 率 劣 化 背 面 1 I 之 1 的 階 層 編 碼 處 理 〇 注 意 1 事 1 本 發 明 ( 申 請 專 利 範 圍 Μ. ) 種 圓 m 理 裝 置 項 再 ,卜 9 其、 中 之 階 層 圔 像 解 碼 裝 置 用 來 將 具 有 物 體 形 狀 資 訊 之 馬 本 U. 裝 圖 像 信 號 施 加 階 層 编 碼 處 理 所 獲 得 之 至 少 2 個 塊 化 之 階 頁 '—^ 1 1 層 編 碼 信 號 加 以 解 碼 特 徵 為 具 有 1 1 第 lr S * 用 來 對 上 述 2 個 塊 化 之 階 層 编 碼 信 fi|fe m 1 1 中 之 低 解 像 度 編 碼 信 號 加 以 解 碼 > 藉 以 産 生 對 應 由 低 解 1 訂 像 度 圖 像 空 間 中 之 指 定 數 之 画 素 構 成 之 低 解 像 度 塊 之 低 1 解 像 度 解 碼 信 號 1 I 第 1 逆 塊 化 裝 置 用 於 將 對 應 該 各 値 低 解 像 度 塊 之 低 1 I 解 像 度 解 碼 信 贴 m 加 以 統 合 i 藉 以 産 生 對 應 上 述 低 解 像 度 1 1 圖 像 空 間 之 低 解 像 度 統 合 信 貼 號 m I 第 2 解 碼 裝 置 9 參 照 所 對 應 之 低 解 像 度 解 碼 信 號 * 將 1 1 上 述 2 個 塊 化 之 階 層 编 碼 信 號 中 之 高 解 像 度 编 碼 信 號 加 1 以 解 碼 9 藉 以 産 生 對 應 由 高 解 像 圖 像 空 間 中 之 指 定 數 之 1 I 圖 素 構 成 之 高 解 像 度 塊 之 高 解 像 度 解 碼 信 和 第 2 % 農 裝 置 用 來 統 合 對 應 到 該 各 個 高 解 像 度 塊 1 1 之 高 解 像 度 解 碼 信 贴 m $ 藉 以 産 生 對 應 上 述 高 解 像 度 圖 像 1 I 空 間 之 高 解 像 度 統 合 信 m 1 1 -2 2- 1 1 1 1 本紙張又度適用中國國家榇準(CNS ) A4規格(210X297公釐)- A7 B7 經濟部中央標準局員工消費合作社印製 五、發明説明 ( >ΐ ) *) 1 1 使 上 述 之 高 m 像 度 编 碼 信 m 之 解 碼 處 理 時 所 參 照 之 參 1 1 昭 /*·»> 低 解 像 度 塊 為 > 其 低 解 像 度 麵 像 空 間 之 空 間 位 置 與 該 1 1 參 照 低 解 像 度 塊 所 對 應 而 作 為 上 述 解 碼 處 理 對 象 之 對 象 /·-s 請 1 1 先 1 高 解 像 塊 之 高 解 像 度 画 像 空 間 之 空 間 位 置 相 對 pfle 應 之 低 解 鬩 讀 1 I 像 度 塊 者 〇 背 1 I 之 1 在 依 此 種. 方 式 構 直 Μ Μ. 處 珲 裝 霄 中 -J 田 高 解 像 度 圖 注 意 1 1 事 1 像 信 贴 m 之 解 碼 處 理 時 利 用 在 低 解 像 度 圖 像 空 間 參 照 項 1 ··* '' • p 低 »73 m 像 度 塊 ( 位 於 與 作 為 解 碼 處 理 對 象 之 對 象 高 解 像 填 寫 本 裝 I 塊 之 空 間 位 置 相 闊 之 空 間 位 置 3 解 碼 信 號 ,、就 可 頁 1 I 對’ 實 現 抑 制 編 碼 效 率 劣 化 而 具 有 物 體 形 狀 資 訊 之 圖 像 信 1 1 贴 號 之 階 層 编 碼 處 理 所 對 應 之 階 層 編 碼 處 理 〇 1 1 本 發 明 ( 請 專 利 範 圍 第 2 1項 ) 是 _. 種 資 料 記 錄 媒 體 1 訂 用 來收 納 程 式 藉 以 在 電 腦 進 行 階 層 圖 像 编 碼 處 理 其 中 1 將 上 述 程 式 構 成 為 9 以 電 腦 進 行 藉 如 請 專 利 範 圍 第 1 1 1 項 之 圖 像 處 理 方 法 之 階 層 圖 像 编 碼 處 理 〇 1 I 在 依 此 種 方 式 構 成 之 資 料 記 錄 媒 體 中 > 當 高 解 像 度 画 1 像 信 站 m 之 編 碼 處 理 時 9 利 用 低 解.像 度 圖 像 空 間 9 sStr 參 照 U 1 低 m 像 度 塊 ( 位 於 與 作 為 解 碼 處理 對 象 之 對 象 高 解 像 度 1 I 塊 之 空 間 位 置 相 關 之 空 間 位 置 ) 之 画 像 信 號 9 可 利 用 電 1 1 腦 實 現 對 具 有 物 體 之 形 狀 資 訊 之 圖 像 信 贴 號 而 不 至 於 招 致 1 | 编 碼 效 率 劣 化 之 階 層 编 碼 處 理 0 1 ί 本 發 明 ( 申 請 專 利 範 圍 第 ) 是 一 種 資 料 記 錄 媒 體 1 * 用 來 收 納 程 式 、藉 以 在 電 腦 進 行 階 層 固 _ 像 解 碼 處 理 其 1 I 中 上 述 之 程 式 被 構 成 為 以 電 腦 進 行 藉 串 請 專 利 範 圍 第 1 1 I -2 ,3- 1 1 1 1 本紙張又度適用中國國家標準(CNS ) A4規格(210X 297公釐) 經濟部中央標準局員工消費合作社印製 ΑΊ Β7 五、發明説明(νν ) ίο項之圖像處理方法之階層圖像解碼處理。 在依此種方式構成之資料記錄媒體中,當高解像度圖 像信號之解碼處理時,在低解像度圖像空間,勢必參照 低解像度塊(位於與作為解碼處理對象之對象高解像度 塊之空間位置相關之空間位置)之圖像解碼信號,可利 用電腦實現抑制编碼效率劣化而具有物體形狀資訊之圖 像信號之階層編碼處理所對應之階層解碼處理。 〔附圖之簡單說明〕 第1圖是方塊圖,用來表示本發明之實施形態1之圔 像處理裝置之階層圖像编碼裝置。 第2(a)画〜第2(d)圖用來說明上述實施形態1之階層 圖像编碼裝置之動作。 第3圖是方塊圖,用來說明本發明之實施形態2之作 為圖像處理裝置之階層圖像编碼裝置。 第4(a)圖〜第4(f)圖用來說明本發明之實施形態2之 階層编碼裝置之動作。 第5圖是方塊圖,用來說明本發明之實施形態3之作 為圔像處理裝置之階層圔像编碼裝置。 第6(a)圖〜第6(c〇_用來說明本發明之實施形態3之 階層圔像編碼裝置之動作。 第7圖是方塊圖,用來說明本發明之實施形態4之作 為圖像處理裝置之階層圖像編碼裝寳。 第8圖是方塊圖,用來說明本發明之實施形態5之作 為圖像處理裝置之階層圏像解碼裝置。 -24- 本紙張尺度適用中國國家標準(CNS )八4^格(210X297公釐) ---------c^—--------IT-------® (請先閲讀背面之注意事項再填寫本頁) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(>〇 第9(a)圖和第9(b)圖是方塊圖,用來説明本發明之實 施例形態6之作為圖像處理裝置之階層圖像编碼裝置。 第10(a)圖和第10(b)圖是方塊圖,用來説明本發明之 實施例形態7之作為圖像處理裝置之階層圖像解碼裝置。 第11(a)圖和第11(b)面是方塊圖,用來說明本發明之 實施例形態8之作為圔像處理裝置之階層圖像编碼裝置。 第12(a)圖〜第12(d)圖用來説明上逑實施形態8之階 層圖像編碼裝置之動作。 第13(a)圖和第13(b)圖是方塊圖,用來說明本發明之 實施例形態9之作為圖像處理裝置之階層圖像解碼裝置。 第14(a)圖和第14(b)圖是方塊圖,用來說明本發明之 實施例形態10之作為圔像處理裝置之階層圖像編碼裝置。 第15(a)圖和第15(b)圖是方塊圔,用來說明本發明之 實施例形態11之作為圖像處理裝置之階層圖像解碼裝置。 第16(a)圖〜第16(C)圖是方塊圖,用來說明本發明之 實施例形態12之作為圖像處理裝置之階層圖像编碼裝置》 第17(a)圖〜第17(c)圖是方塊.圔,用來說明本發明之 實施例形態13之作為圖像處理裝置之階層圖像解碼裝置》 第18(a)圖〜第18(c)圖是方塊圓,用來說明本發明之 實施例形態14之作為画像處理裝置之階層圖像解碼裝置。 第19(a)圖〜第19(d)圖用來說明上述實施形態14之階 層圖像編碼裝置之動作。 第20(a)圖〜第20(c)圖是方塊圖,用來說明本發明之 實施例形態15之作為圖像處理裝置之階層圖像解碼裝置。 -25- 本紙張尺度適用中國國家標準(CNS ) A4洗格(210X297公釐) I-------|^私衣------ΐτ—,—----ο (請先閲讀背面之注意事項再填寫本頁) A7 B7
五、發明説明(W 經濟部中央標準局員工消費合作社印製 第2_)圖〜第2 1 (C)周表示資料記錄媒體,其中收納有 程式藉電腦糸統實現利用上述各値實施形態之圖像 處理裝 第2沴 ^ 第23圖塊圖,用來説明習知之作為圖像處理裝置 之階層画像编碼裝置。 第24圖是方塊圖,用來說明習知之作為圖像處理裝置 之階層圔像解碼裝置。 〔用以實施本發明之最佳形態〕 下面將使用第1圖至第21圖用來說明本發明之實施形 態。 實施形態1 . 第1圖是方塊掘^用夾說明_^-§^明之宵~^~形耱1九圃 像處理裝置(階層圔像編碼裝置)β另外,第2(a)圔〜 第2(d)圖是模式圔,用來說明上述實施形態1之階層圖 像編碼裝置之编碼處理。在該圔中,LF是對應到低解像度画像信號之顯示畫面(參照第2 是裔 ( 高解度圔像信號之顯示畫面(參照第2(b)圖)。另外, L〇b桌依照號顯示茳上秘之irir (顯示畫 面)LF上之1個物體之圖像,JU 解麻-搨像信號 顯示在上述之框架(顯示g面)H F上之+ -锢 ,各傾圖像Lob和Hob之點顯示匾^域是各値物體内部之區 域〇 本實施形態1之階層圖像編碼裝置101被構建成用來
階層编碼處理或階層解碼處理。 說明習知之階層圖像编碼處理
2 6- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) ~裝. 訂 A7 B7 經濟部中央標準局員工消費合作社印製 五、發明説明(< ) 接受圖像輸入信號,以該画像輸入信號作為高解像度圖 像信號H S g,對其進行階層编碼處理。 亦即,該階層顧像编碼裝置101,與習知之階層圖像 m碼裝置20(^同1的,具有:副樣本器2,用來對上述 之高解像度圖像信號HSg進行減量取樣;低解像度编碼 部101L,用來對該副樣本器2之輸出之低解像度圖像信 LSg進行編碼;解碼器9a,用來對該輸出之低解像度編 碼信號LEg進行解碼;增量樣本器10a,用來對該解碼器 9a之輸出Ldg進行增量取樣;和髙解像度编碼部10 1H、 一 - - ' -—根據該增量樣本器1 0 a之輸出L # g甩像度 ·- ...... .... , 圖像信號HSg進行编碼& -- ------*, --- 另外,上述之各個编碼部101L和101H分別與習知之階 層圖像編碼裝置200a同樣的,具有區域屬』l]_^—3 0a和12 ,篆域抽出器5 m 14,塊m jfl 1 5 .及绲碼锻7和 1 6 a 〇 另外,在本實施形態中只有上述區域檢測器30a與習 知之階層圖偽編碼裝置2QQa者;£構造不^同_„亦即,該區 域檢測器3 0 a被構建^成參屑用以表示矩形區域HR (對應 到高解像度框l.?F (參照窠2 (b)圓)上之各個物體Hob) 之範圍之矩形信號HRg,用來檢測矩形區域LR(對應到 低解像度框架LF(參照第2(a)圔)上之各個物體Lob) 之範圍。實質上,在上逑之區域檢_器30 a利用高解像 度矩形信號HRg用來檢測高解像度矩形區域HR之空間位 置HRp,以使利用低解像度圃像信號LSg之增量:取樣所獲 -27- .Full ... 1L—:. (讀先聞讀背面之注意事項再填寫本貰) '裝. <11 本紙張尺度適用中國國家標準(CNS ) A4规格(210X297公釐) A7 B7
經濟部中央標準局貝工消費合作社印装 五、發明説明(>) 得之插入矩形區域AR之空間位置ARP與上述高解像度矩 形區域HR之空間位置HRp—致之方式,用來決定低解像 度矩形區域LR之空間位置LRpe 另外,在此種構造之區域檢測器3 〇 aj,低解像度矩 形區域LR之空間位置LRp茗,測,可以以使插入矩形區 域ρ之空間位置ARp與上像度之空間 位置HRp—致之友式_進行,但是並:低解像 度矩形區域LR之空間位置LRp與高解像度矩形區域HR之 空間位置HRP—致之方式,用來進行上述之區域之位置 檢測。另外,上述之编碼器16a具有與習知之階層圖像 編碼裝置2G0a之編碼器16完全相同之構造。 下說明有關之動作。 〆 …------- 當將作為画像輸入信號之高解度圖像輸入到又· .....--- 本圖像編碼裝置101a時,就在gj}樣本器2利用減量取 樣將上述之高解傢度、像信號HSg變換成低解像度圖像 ^ " ------— — 一... " - ~~' ~ 信號<L S ge然後,利用各個编碼部1 fl 1 Η和1 0 1 L分別對高 解像度圖像信號HSg和低解像度圖像信號LSg進行编碼 處理。 這時,在上述之高解像度编碼部101H進行與習知之階 層圖像编碼裝置200 a之高解像度编碼部201 H完金相同之 圖像信號之·處理。另外,在上述之低解像度编碼部101L ,除了利用區域檢測器30a進行框架LF上之低解像度矩 形區域LR之位置檢測處理外,亦進行與習知階層圖像编 碼裝置2D0a之低解像度編碼部20 1L完金相同之處理。 -28- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X2+97公釐) (請先閲讀背面之注意事項再填寫本頁) 裝· 訂 五、發明说明( v7 A7 B7 經濟部中央標準局貝工消費合作社印製 下面將以(上述ϋ域檢鲁普作為主說 明上述之 。 在本實施形態1中,根據高解像度圖像彳利 用高解像度编碼部101H之區域檢測器12用來檢測對應之 物體Hob之矩形區域HR(參照第2(b)圖),根據上述高 解像度矩形區域HR之空間位置HRp’利用上述之區域檢 測器30a用來檢測低解像度圖像信號LSg之矩形區域U之 空間位置LRP(參照第2(a)_)。 亦即,在上逑之區域檢測器3 0 a,當高解像度矩形區 域HR之基'準位置HRP離開高解像度框架HF之基準位置jjFp 在水平方向為距離(ΗΔχ)1和在囱為距離-Ula y) 時,就使mg形_„HLR之基準位置丄% 度框架LF之基準位置LFp在水平方向之距離為“△ , - ·.—..一 * · 在垂直方向之距離為(LAy),以此方式將低解像度矩形 區域LR配置在低解像度框架LF±。這時,上述之距離 (ΗΔ X) /距離(LA x),和距離(HAy) /距離(LAy)形成 與高解像度圖像之空間解像度和、低解像度圖像之空間解 像度之比率(在此處為2/1) 一致。 利用這種方式,經由在低解像度框架LF上設宙矩形區 c.-__________ "* 域L R之、立置,可屬使低gjg度框架LFi:>粧解件g桕形 區域LR之空間位置(基準位置)與高解像度抿竿HFh:> 高解像度矩形匾域HR之空間位置(塞準位雪)一龟n 另外,利用塊化器6用來將對應到被設定於上逑低解 像度框架LF上之低解像度矩形區域LR之圖像信號L〇g分 -29- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐了 (請先閲讀背面之注意事項再填寫本頁} '裝_ -訂_ 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(4) 割成對應到用以區分上述之矩形區域LR之各傾塊LMB。 然後被塊化之画像信號LBg被編碼器7编碼,成為低解 像度編碼信號 L Eg的被輸出。其中,上述之塊LMB是由 16 X 16個圖素構成之圖像空間。 另外,該低解像度編碼信號LEK被解碼器9a變換成低 -— ... 解像度解碼信號Ldg,然後該信號Ldg經由一增量養本器10a 、 -- -— 被插入一,變換成具有空間解像度與高f锋號HSg 相 這種情況,塊 amb 是由 32χ 32個圓素構成之圓像空間,用來插入矩形區域AR (對應 到利用上述之低解像度编碼信號LEg之增量取樣所獲得 之插入圖像信號LAg)。 第2(c)圔表示對應上述之插入圔像信號LAg和具有與 高解像度框架HF相同空間解像度之插入框架AT:和該i 入框架AF中之對應到插人圖像信號LAg之插入圔像Aob, 對於上逑之插入框架A匕/函7應該插入圖像之插入矩形區 域AR之相對位置,與高解像度矩形區域HR#高解像度框 架HF之相對位置為一致。 另外一方面,當將高解像度圖像信^ Μ HSgfj_A_JlLA^-抽出器14時,在該^域抽出器14,根據夾自上沭之區域 檢測器號H«g ,抽出對應高解像度矩形區域 ㈣之圖像信號HOg,然後,利用塊化器15將該圖像信號 HOg分割成對應到用以區分該矩形區域HR之各値塊HMB1 ,藉以輸出對應到各個Η Μ B 1之圖像信號Η B g。然後,利 用编碼器16a,參照上逑之插入圖像信號LAg,經由编碼 -30- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 袭· A7 B7 經濟部中央標準局貝工消費合作社印製 五、發明説明 ( >9 ) 1 I 處 理 將 該 塊 化 画 像 信 號 HB g變換成高解像度编碼信號HE g 1 1 | 〇 其 中 9 上 述 之 塊 HMB1 是 由 3 2 X 32艏 圖 素 構 成 之 圖 像 空 1 1 間 〇 /—^ 請 1 I kj 1 這 時 > 上 述 之 插 入 矩 形 區 域 AR之 在 框 架 AF上 之 相 對 位 閱 讀 1 — 背 1 置 因 為 與 高 解 像 度 矩 m 區 域 HR之 在 框 架 HF上 之 相 m 位 置 I 〜. — 之 1 1 V 致 .+ > 所 以 在 _±_ 述 m 爾 裴 1 6 a , 可以以各個矩形區域 注 意 1 I 事 1 之 塊 単 位 很 容 易 的 計 算 塊 化 圔 像 信 CLfe 號 之 差 額 值 用 以 項 構 成 高 解 像 度 圔 像 之 圖 素 之 圖 素 值 和 用 以 構 成 插 入 圖 像 填 寫 本 Γ 裝 I 之 圖 素 之 圔 素 值 之 差 額 值 可 以 很 簡 早 的 進 行 編 碼 〇 頁 'Sw, 1 I 另 外 » m 2(d) ffl 表 示 在 m 豈 m 架J F ± 有 對 應 到 ! 1 I 上 述 V; 差 額 值 (誤差) D之 差 額 圖 像 D〇 1 I 在 依 照 此 種 方 式 之 本 實 施 形 態 1 中 9 因 為 用 以 構 成 高 1 訂 解 像 度 矩 形 區 域 HR之 塊 HMB 1 之 空 間 位 置 與 用 以 構 成 插 入 1 矩 形 區 域 AR ( 經 由 對 低 解 像 度 矩 形 區 域 LR 進 行 解 像 度 變 1 1 換 而 獲 得 ) 之 塊 AM B之空間位置- -致, 所以在以對應到 1 1 高 解 像 度 框 架 HF内 之 各 個 物 體 之 矩 形 區 域 HR作 為 對 象 » I Μ 進 行 階 層 编 碼 處 理 時 9 可 以 參 照 低 解 像 度 圖 像 信 站 號 LS g m I 用 來 進 行 高 解 像 度 圔 像 信 號 HSg之編碼處理, 不會使编 1 1 碼 效 率 降 低 Ο I 1 實 施 態 2 . 1 I 第 3 層 是 方 塊 > 用 來 說 明 本 發 明 里 Μ 1 集 JL 之 圖 1 1 像 處 理 裝 置 (階層圖像編碼裝置) 〇 1 1 在 上 述 之 實 施 形 態 1 中 » 所 示 者 為 階 層 圔 像 編 碼 裝 置 1 I 之 構 造 是 將 低 解 像 度 圖 像 信 號 之 解 像 度 變 換 後 之 插 入 圖 1 1 I -2 1 - 1 1 1 1 本紙乐尺度適用中國國家標準(CNS) A4規格(210父29:7公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(V ) 1 像信號和高解像度圔像信號之差额值當作誤差的進行编 碼,但是在圖像信號為2進之圖像信號,亦即2進形狀 信號之情況時,直接對塊之差额值進行編碼亦為有效之 方法。 其中,本實施形態2之階層圖像编碼裝置10 2是具備 有编碼違代替£啤—形_變丄…之農碼器16k該編碼 器16a是對低解像度圖像信號之解像度變換後所獲得之 插入圔像信號和高解像度圖像信號之差額值進行編碼, 該编碼器16b是對得自低解像度圔像信號之圖像之境界 ,和得自高解像度圖像信號之圔像之境界之任何一値之 大小進行编碼,其他之構造m掩歷_變1之階置㉙像 編碼裝置10 1#同、。亦即,用以構成太蜜袖?形熊2夕^ .^^'' f - 層圖像編碼裝置102之低解像編碼部1Q2L與上述之實施 .-------------- . — ..... .··_ --------·〇, f---' .... 形態1者具有相同之構造,另外,用以構成該階層圔像 「-----------------—............... .... ^ 編碼裝置102之高解像度编碼部102H只有编碼器16b之構 造與上述之實施例形態1者不同。 下面將說明有關之作用和效果.。 第4圓是模式圖,用來說明上述之實施形態2之階層 圖像編碼裝置之編碼處理,第4(a)圖表示對應到低解像 度圖像信號之框架LF,第4(b)圖表示對應到高解像度圔 像信號之框架HF,第4(c)圖表示對應到解像度變換圔像 信號(插入圖像信號)之框架Ah _4(d)圔表示被設定 在框架HF上之矩形區域HR内之物體HOb之境界HB,第4(e) 圖表示被設定在框架AF上之矩形區域AR内之物體AOb之 -32- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) --------ΓΊ-------.π—-----0 (請先閱讀背面之注意事項再填寫本頁) 經濟部中央標準局貝工消費合作社印裂 A7 B7 五'發明説明(w) 境界AB。第4(f)圖表示在上述之框架HF上,對應到高解 像度_像信號之物體Hog之境界HB,和對應到插入画像 信號之物體Aob之境界A B之重昼。 其中,濟體之-界是構成圖像信號之2進之形狀倍、號 值 f ^ 〇 在該實施形態2中,與上述之實施形態1同樣的,根 據高解像度圖像信號HSg,利用高解像度编碼部102H之 區域檢測器12用來檢測對應之物體之矩形區域HR (參照 第4(b)圖),利用低解像度編碼部102L之區域檢溯器30a ,以該矩形區域HR和空間位置一致之方式,用來檢测低 解像度圔像信號LSg之矩形區域LR之空間位置LRP (參照 第4 (a)圖)。 利用這種方式,經由在低解像度框架LF上設定矩形區 域LR之位置LRp,可以使低解像度框架LF上之低解像度 矩形區域LR之位置LRP與高解像度框架HF上之高解像度 矩形區域HR之位置HRp—致。 另外,利用塊化器6用來塊化對窿到被設定於上妹低 ._________________ 1 解像gjg架f之度形區域信號L 0 g ,然 ____ —---**"" ^ 後利用編碼器7對該塊化之圖像信號LBg進行辑碼,將~ • .. —— —— — 其當,作低解像度編碼信號L E g的準哲輸出β該低解像度 编碼信號LEg被解碼器9a施加解碼處理,和被増量樣本 器10 a施加插入處理,藉以變換成具有空間解像度與高 解像度圖像信號相等之插入圖像信號LAg (參照第4(c) 圖)。 -33- 本紙張尺度適用中國國家標率(CNS ) A4規格(210x297公釐) I-------裝-- (請先閲讀背面之注意事項再填寫本頁)
、1T kill 經濟部中央標準局員工消費合作社印製 Μ Β7 *) 五、發明説明(>) 另一方面,在區域抽出器14,從高解像度圖像信號 HSg中,抽出對應到高解像度矩形區域HR之圖像信號 HOg,該圖像信號HOg被塊化器15塊化。 另外,在编碼器16b,根據得自該塊化之圖像信號HBg 之物體HOb之境界位置HB,和得自上述插入圔像信號LAg 之物體Aob之境界位置AB,將兩者之偏移量A B當作被编 碼之高解像度编碼信號HE g的進行輸出。 在此種方式之本實施形態2中,因為具備有編碼器16b 用來對得自低解像度圖像信號之插入圖像之境界,和得 自高解像度圔像信號之圖像之境界之任何一方之大小進 行编碼,所以在圖像信號為2進圖像信號之情況時,可 以進行編碼效率良好之階層編碼處理。 另外,在上述之實施形態2中所示之階層编碼處理是 一一 .
對高解像度圖像Hob之境界和插入圖像.Aob之境界A_B - — --- — ^ 之任何一個進行编碼,但是對2進圔像信號之階層編碼 r· 一·、:-丁 -丨· - 、 處理亦可以依照得^低解像度圔像信號之插入圔像信號 ,使用高解像度圖像信號之编碼.處理對编碼表之每一個 圖素進行變換。 實施形態3 . 第5圖是方塊層L,用來說明本發明之實施形態3之圖 像處理裝置(階層圖像编碼裝置)。 在上述之實施形態1中所示之實铜是使低解像度矩形 區域之解像度變換所獲得之插入矩形區域之各個塊之位 置,與高解像度矩形區域之各個塊之位置完全一致,但 -34- 本紙張尺度適用中國國家標準(CNS ) Α4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 义裝. 訂
經濟部中央榡準局貝工消費合作社印製 疋也可使統合高解像度矩形區域之多値塊之統合塊與插 入矩形區域之1個塊一致,與上述之實施形態1同樣的 ’所進行之階層编碼處理可以避免编碼效率之降低。 其中,本ϋ形態屏W偷溢磘骷晋JJ) 3被構建 成具備有编碼器Ik用來代替编碼器i6a,該_碼器16a $構成备f塊化之插入圖像信號和塊化之高解像度圖像 信號進行fcH齡用來求苎差額值,而該編碼器16c是使統 合塊化之高解像度圖像信號之統合信號與塊化之插入圖 像信號進行比較,用來求得該統合信號與插入圖像信號 之差額值,藉以對該差額值進行鏞碼。另外,在該實施 形態3中,用以構成高解像度矩形區域HR之高解像度塊 HMB2(參照第6(b)圖),與構成低解度矩形區域LR之低 解像度塊LMB(參照第6(a)圖)同樣的,成為由16X16 锢圖素構成之圖像空間,用以構成插入矩形區域AR之插 入塊AMB(參照第6(c)圖)形成由32X 32個圖素構成之 圖像空間。因此,在本實施形態3中,塊化器15被構成 以16X16個圔素構成之塊HMB2作為單位,用來進行高解 像度圖像信號之塊化處理。另外,本實施形態3之階層 ----—.一 一"…-一胃 ————·' ' ·—-—一_ 圖像编碼裝置103之其他構诰-ffi-施形態1之階層 -像編碼裝置亦即,用以_成本實施形態3之 階層圖像编碼裝置103之低解像度編碼部1〇3L具有與上 述實施形態1者相同之構造,另外,用以構成該階層圖 像編碼裝置103之高解像度编碼部1〇3 Η只有编碼器16 c之 構造與上述之實施形態1者不同。 -35- 本紙張尺度適用中國國家標準(CNS > A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) 、裝 .b_ 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(从) 下面將說明有關之作用和效f。 第圖是模式圖,用來説明上述之實施形態3之階層 _____ 圖像編碼裝置之编碼處理,第6(a)圖表示對應到低解像 度圖像信號之顯示畫面(框架)LF,第6(b)圖表示對應到 低解像度圖像信號之解像度變換後之插入信號之顯示畫 面(框架)AF。 在本實施形態3中,根據高解像度圖像信號HSg,利 — * 用區域檢測器1 2用來檢測對應到該信號之物體Hob之矩 形區域HR (參照第6(b)圖),利用區域檢測器30a,以
使上迷之矩形區域HR之空間位置HR p和插入矩形區域AR 之空間位置ARp—致之方式,用來檢測低解像度画像信 號LSg之矩形區域LR之空間位置LRp (參照第6 (a)圖)。 利"用這種. ^ ^ m m w ^ w i.Rn^; ------ 定在低解像度框架LF上,可以使低解像度框架LF上之低 解像ϋ形區域LR之空間位置LRp,與高解像度框架HF 上之高解像度矩形區域HR之空間位置HRp實質上的成為 一致〇 . 另外,利用塊化器6塊化依上述方式被設定在低解像 度框架LF上之低解像度矩形區域之對應之圔像信號LOg ,然後利用編碼器7编碼該被塊化之圖像信號LBg,將 其當作低解像度编碼信號LEg的進行輸出。該低解像度 編碼信號LEg被解碼器9a施加解碼處理,和被增量樣本 器10 a施加插入處理,藉以變換成具有空間解像度與高 解像度圖像信號相等之插入圖像信號LAg (第6(c)圖)。 -3 6 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) -裝_ 訂 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(从) 另一方面,在區域抽出器14,從高解像度圖像信號 HSg中抽出對應到矩形區域HR之圖像信號HOg,該圖像信 號HOg被塊化器15塊化成對應到由16X 16個圖素構成之 塊 HMB2〇 因為用以構成上述插入圖像Aob之矩形區域AR 之1傾塊A M B ,和用以構成高像·度圖像Ih ob之矩形區域 HR之4個塊HMB 2之碑食區寧形成一致,所以在上逑之编 碼器16c ,參照對應到1锢塊AM B之補完圖像信號,對與 該塊一致之對應到高解像度矩形區域之4楢塊HMB 2之圔 像信號HBg進行编碼。亦即,對應到該4個塊HMB 2之画 像信號HOg和對應到上逑之1値塊AM B之補完圖像信號 LAg之差额值被编碼,將其當作高解像度编碼倍號HEg的 進行輸出。 在此種方式之本實施形態3中,因為統_合4個高解像 度 UMB2 之統合 像圖^^號 HOg, / 和插入塊AMB之對應之插入画 像信號ALg之差額信號被编碼,所以卽使在高解像度塊 與插入塊不是一對一之對應關傺時,亦可以取得高解像 度塊之圖素與插入塊之圖素之對應,可以參照低解像度 圖像信號用來對髙解像度圖像信號進行编碼。 另外,如上所述,因為可以空得高解像度塊與插入塊 之對應,所以可以很容易實現塊單資訊(编碼模態 資訊等)之預測编碼,而且因為可取得兩塊間之空間 位置之對應,所以可以提高编硒效率。 -37- 本紙張尺度適用中國國家標準(CNS ) Α4規格(210X 297公瘦) ---------Ο裝-- (請先聞讀背面之注意事項再填寫本頁)
、1T 經濟部中央標準局員工消费合作社印裂 A7 B7 五、發明説明(4 ) ' 另外,在本實施形態3中,因為分割低解像度矩形區 域之塊之尺寸與分割高解像度矩形區域之塊具有相同之 尺寸,所以低解像度编碼部之編碼器7與高解像度編碼 部之編碼器1?之構造大致相同,利用分時處理等可以很 容易實現編碼部之硬體資源之共用。 實施形態4 . 第7圖是方塊圖,用來說明本發明之 - _ · . — ―― ~ 像處v理要置一層圖像编碼裝置)。 本實施形態4之階層圔像编碼裝置10 4是省略實施形 態1之與低解像度圔像信號對應之區域檢測器3 0 a ,具 備有區域抽出器31d用來代替實施形態1之區域抽出器 5,根據實施形態1之區域檢測器12之輸出HRg,用來抽 出低解像度框架LF上之舆高解像度矩形區域HR之空間位 置對應之空間位置之低解像度矩形區域LE。 亦即,本實施形態4之階層圖像编碼裝置104之低解 像度编碼部104L之構成包含有:上述之區域抽出器31d ;塊化器6 ,用來對抽出器3 1 d之輸出進行塊化;和编碼 器7,用來對被塊化之圖像信號進行編碼。另外,上述 之階層圖像編碼裝置104之高解像度編碼部104 Η與實施 形態1之高解像度编碼部101 Η完全相同,其構成包括有 區域檢測器1 2,區域抽出器1 4 ,塊化器1 5 ,和编碼器1 6 a。 下面將說明有關之作用和效果。 利用樣本器2之空間解像度變換方法之動作原理,使 _ _ — * 低_解像度圖像信號之解像_度蠻換所榑得之插入画像兔號 -3 8 - 本紙張尺度適用中國國家標準(CNS ) Α4規格(210X297公釐) ---------0¾衣------1Τ------® (請先閎讀背面之注意事項再填寫本頁) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(W ) 之對應之物體之形狀,通常在得知不大於對應到高解像 度圖像信號之物體之形狀之大小時,就將矩形信號HRg 所示之高解像度矩形區域HR之對應之空間位置HRp (參 照第2(b)圖)當作與其對應之低解像度矩形區域LR之空 間位置LRp(參照第2(a)圔),可以用來使低解像度圖 像信號之物體Lob被低解像度矩形區域LR完全包圍。 亦卽,不需邊實施形熊1之從低解像度圖像信號LSg 、、 — * 中_出包含物體之矩形區域LR之對應之矩形信號LRg, 所以上逑之副樣本器2假如能夠滿足上述之條件時,可 以便簡單之構造實現與實施形態1之圖像編碼裝置相同 之效果。 亦即、g本實旃形_Β·4·之-避靥画俛溢裝置1 0 4中^, 作為圖像輸入信號之高解像度圖像信號HSg被高解像度 編碼0 4 Η施加與上述實施形態1完全相同之處理。 另外[用上述之高解像度圔像信號HSg之減量取樣 所獲得之低解像度圖像信號LSg,經由與上述實施形態 1大致相同之處理被低解像度编碼部104 L编碼。這時, 在區域抽出器31d,接受低解像度圖像信號LSg,根據高 解像度编碼部104 Η之區域檢測器12之輸出HRg,用來決 定在低解像度框架上之矩形區域之位置,將對應到該矩 形區域之圖像信號LOg輸出到塊化器6。該圖像信號LOg 被塊化器6塊化,塊化之圖像信號LBg被编碼器7編碼 ,從低解像度编碼部104輸出對應各値塊之低解像度编 碼信號L E g 〇 -39- 本紙張尺度適用中國國家標準(CNS )八4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 裝. 訂 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(#) 該低解像度編碼信號LEg被解碼器9a解碼,該解碼器 9 a之輸出Ldg在增量樣本器10 a被變換成具有空間解像度 舆高解像度圖像信號相同之補完圖像信號LAg,然後被 輸出到高解像度编碼部104H之编碼器16a。 在此種方式之本實施形態4中,在低解像度編碼部 104L之區域抽出器31d,因為根據高解像度编碼部i04H 之區域檢測器12之輸出之矩形信號HRg用來決定在低解 像度框架上之矩形區域LR之位置,所以在低解像度编碼 部104 L不需要用以進行區域抽出之電路構造,可以以更 簡單之構造實現與實施形態1之画像编碼裝置相同之效 果。 實施形態5 . 第8圖是方塊_._用來說明本發明之實施形態5之圖 像處理裝置(階層圔像解碼裝置)。 階層圖像解碼裝置105是以第7圖所 示之實施形態4之階層圔像編碼裝置104之編碼過之低 解像度編碼信號LEg和高解像度编碼信號HE g作為輸入信 號,對其進行階層解碼處理。亦即,該階層圖像解碼裝 .· ____ 置10 5,與習知之階層圓像解碼裝置200b同樣的,Ϊ有+ 一 --------- 一 :低解像度解碼部105 授來對1述_之低解像度編碼信 號LEg施加解碼處理,藉以産生低解像度再生信號LCg; 增量樣本器l〇b,用來對該解碼部105L之解碼信號LDg進 行増量取樣藉以進行插入;和高解像度解碼部105H,根 據該增量樣本器l〇b之輸出LAg,用來對上述之高解像度 -40- 本紙張尺度適用中國國家標準(CNS )八4^格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) -裝. 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(衫) 编碼信號HE g進行解碼藉以産生高解像度再生信號HCg。 其中,上述之各値解碼部105L和105H分別與習知之階 層圖像解碼裝置2Q0b同樣的,具有解碼器9和30,逆塊 化器2 0和3 1 ,和區域合成器3 4和3 2。 另外,在本實施形態5宁,上述之區域合成器3 4被構 建成參照來自上述實施形態4之階層圖像编碼裝置104 之髙解像度矩形信號HRg,在低解像度框架上之該柜形 信號HRg所示之位置配置低解像度矩形區域,以此方式 使對應到該矩形匾域之圖像信號L I g和對應到框架之其 他之圖像信號進行合成,只有此點與第24圔所示之習知 之階層圔像解碼裝置200b不同。 下面將說明有關之動作。 當對本階層圖像解碼裝置10 5輸入上述實施形態4之 階層圖像编碼裝置1 04之輸出之低解像度編碼信號LEg和 高解像度編碼信號HE g時,低解像度編碼信號LEg就在低 解像度解碼部105L被解碼器9解碼,解碼器9之輸出 LDg被逆塊化器20統合,和逆塊化器20之輸出LIg根據高 解像度矩形信號HRg,與對應低解像度框架之圖像信號 進行合成。 這時,上述解碼器9之輸出LDg利用增量樣本器10b進 行插入,然後被輸出到高解像度解碼部105H。 另外,上述之高解像度編碼信號HEg,經由高解像度 解碼部105H,與上述之習知之階層圖像解碼裝置2QQb完 全同樣的,根據來自上述増量樣本器10b之插入丽像信 -4 1 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 裝· -', 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(心) ' 號ADg和高解像度矩形信號HRg被解碼。 此種方式之本實施形態5接受來自實施形態4之階層 圖像編碼裝置104之編碼信號 LE弓和H Eg,及矩码信 號HRg,在區域合成器34進n mm m m m a ^ m m. m出 . —…- 广-'+ 器3 Gd同樣之動作,可以使低解像度矩形區域合成在低 解像度框架上之髙解像度矩形信號HRg所示之空間位置。 因此,經笼-塊化器2 Q所統合解碼信藏之對 應之圖像,配置在於低解.像....度.框..架h之低解像度 ________ ______— --- |Γ' 空間區域内,可對上述實施形態4之階層圖像編碼裝置 所編碼之編碼信號L ΕΪΚ Η E g進行正確之解碼。 ---- 實 % ^ 第9(a)圖和第9(b)圖是方塊圖,用來說明本發明之實 施形態6之圖像處理裝置(階層圖像编碼裝置)。 本實施形態6之階層圖像编碼裝置106,與第1画所 示之實施形態1之階層圖像编碼裝置101同樣的,具有 副樣本器2,低解像度编碼部106L,解碼器9a,增量樣 本器10a,和高解像度編碼部10〇IU其中,附加有與上 逑實施形態1相同符號者是與實施形態1完全相同之構 造。 在本實施形態6中,用以對低解像度圖像信號LSg進 行編碼之低解像度编i部106L具碼器7f用來代替1 t形態1之低€像度編碼部101L之繪碼器7,該編碼器 =^ Λ 7f用來産生和輸出對應到被塊化之低解像度画像信號LBg 之低解像度编碼信號LEg,和用以表示該各値塊化圖像 -42- 本紙張又度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) 袭· 經濟部中央標準局貝工消費合作社印製 A7 B7 五、發明説明(心) 信號LBg之編碼模態之编碼模態信號Mg,其他之構造與 實施形態1完全相同。 另外,在本實施形態6中,用以對高解像度圖像倍號 HSg進行編碼之高解像度編碼部1Q6H具有编碼器16f用來 代替上述實施形態1之高解像度编碼部101H之編碼器16a ,該编碼器16f不僅根據增量樣本器10a之輸出LAg,而 且也根據上述之編碼模態信號Mg,用來進行被塊化之高 解像度圖像信號HBg之编碼處理,其他之構造與實施形 態1完全相同。 該編H 1 60有:模態判定器50,用來接受上述之 被塊^化之高解像度圔像信號HBg,判定其编碼模態>和 -一+ 輸出高模模^^碼器51,根 據被塊化之低解一ϋ矍豊」g號LBg之编區信號Mg, ~"用來對該編碼模態信號MD進行編碼藉以輸出模態編碼信 號EMg;和第1和第2编碼器53和54,以不同之编碼方 法對高解像度塊化圔像信號HBg進行編碼(參照第9(b) 圖)。 其中,第1編碼器53被構建成參照低解像度解碼信號 Ldg之增量取樣所獲得之插入信號LAg,用來進行高解像 度塊化圖像信號HBg之编碼處理,上逑之第2編碼器54 被構成不參照上逑之插入信號LAg,用來進行高解像度 塊化圖像信號HBg之编碼處理。另外,上述之模態判定 器50被構建成實質上齒據上述之高解像度塊化圖像信號 HBg用來判定是參照與低解像度圖像信號對應之插入信 -43- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) 訂 0 經濟部中央標準局負工消費合作社印製 A7 B7 —— ·, 五、發明説明(p ) 號LAg用來對該塊化圖像信號HBg進行编碼,或是不參照 該插入信號LAg對該圖像信號HBg進行编碼。 另外,上述之编碼器16f具有:前段開關52,依照上 述之模態判定器50之輸出(编碼模態信號)MD,用來將 上述之高解像度塊化圖像信號HBg供給到上逑之第1和 第2編碼器53、54中之一方;後段開關55、依照上述之 模態判定器50之輸出MD,用來選擇上述之第1和第2编 碼器53、54之一方之输出HEg 1或HEg 2;和多工器56, 用來對該後段開關55之輸出SH Eg和上述之模態编碼信號 F, Mg進行多工化。 下面將說明有^之作用和效果。 當將作為圖像輸入信號之信號.HSg輸入 .--------------- 到本階層圖像编碼裝f 1 〇 6哼,在副樣本器2利用高解 像度圖像信―號/纟自之減量取樣用來産生低解像度圖像信 號LSg,該信號LSg在上述之低解像度編碼部106L被编碼 。在該编碼部106 L之編碼器7f,當低解像度塊化圖像倍 號LBg之编碼處理時,輸出對應到該圖像信號LBg之编碼 模態信號Mgo 另一方面,在高解像度编碼部106H ,對离解像度圓_像 倍號HSg進行與管施形態1歷_^^區HJI-處-專和區」^ 抽出處理,藉以産生對應到高解像度矩形區圖像 .信號Η0&...然後彳L.處.理1L像信m^Lg産生對應 到高解像度塊HMB1之塊化_像信號HBg。然後,根據上 述増量樣本器之輸出LAg和编碼模態信號Mg,以编碼器 -44- 本紙張尺皮適用中國國家標準(CNS ) A4規格(210X2+97公釐) (请先閲讀背面之注意事項异填寫本頁) Q裝·
、1T A7 B7 經濟部中央標率局貝工消費合作社印装 五、發明説明(ο ) 對該塊化圖像信號HBg進行編碼。 亦即,在利用本實施形態6之階層圖像編碼裝置106 之階層編碼處理時,從低解像度编碼部1〇6之编碼器7將 編碼模態信號Mg輸出到高解像度编碼部1〇6之編碼器16f ,參照低解像度塊化圔像信號LBg之編碼模態Mg,利用 該编碼器16f對被塊化之高解像度圖像信號HBg進行編碼 ,此點與上述實施形態1之編碼處理不同。 下面將簡單的説明上述之編碼98 1 6这曼細動作。 在上述.之編依照模態判定器50之模態判定 - ...... ,根據被塊化之高解像度圔像信號HBg,用來^_宪.對誇 圖像信號HBg之编碼方法。亦见,_」决定是參照-插入信J 一 I '· - 、友 A Lg對該圖像倍號HBg進行編碼,或嚳不參照插入信號 ^ " ...... - ·.·. a l eg 像信碼。如此一來,從上述之模 態判定器50輸出對應到其模態判定結果之编碼模態信號 MD,在上)述之各個開闋52和55,依照該编碼模態信號MD ,用來選擇上述之第1和第2编碼器53和54的其中之一 。利用這種方式,上述之高解像度圔像信號HBg被所選 擇之編碼器53或54編碼,然後輸出到多工器56。 另外,在這時,在上述之模態编碼器51根據低解像度 塊之編碼模態Mg用來進行上述之編碼模態信號MD之編碼 處理,在上述之多工器56進行上逑開關55之輸出SHEg和 上述之模態編碼器51之輸出EMg之多工化,將其當作高 解像度编碼信號HEg的進行輸出。 在此種方式之本實施形態6中,因為參照低解像度塊 -4 5- 本紙張尺度通用中國國家標準(CNS ) A4規格(21〇><297公釐) (請先閲讀背面之注意事項再填寫本頁) 裝- 訂 # A7 B7 五、發明説明(44 ) I 理 處 碼 编 之 塊 度 像 解 高 一了 //1 進 f 6 ii 器 碼 編 以 態 模 碼 編 之 像 解 。低 理之 處應 碼對 編與 層態 階模 之碼 好编 良之 更塊 率度 效像 碼解 編高 現之 實述 可上 以即 所亦 之份 體部 物界 於境 位於 塊位 度亦 像塊 解度 低像 當解 ,高 如之 例應 〇對 關 , 相時 態況 模情 碼之 编份 之部 塊界 度境 物或 或部 6- LT 剖 夕 外體 體物 物於 於位 位亦 塊塊. 度度 像像 解解 低高· 當之 ,應 0 的對高 樣,很 同時率 ,況機 高情之 很之部 率部内 機内體 之體物 像 解 高/高/ 和用 態利 模一以_ 碼一所S8 |丨 之一高一 塊:很度一率I像一機解一之一 f 一 6 低致一 1 為二器 因Is 一碼 ,形/编 式I態之 方~模6H 種\碼10 這編部 照,-之S碼 依一塊i編 '度一/度 模 碼 編 之 .3& 瑰 度 像 解 低 照 參 (請先閲讀背面之注意事項再填寫本頁) -裝. 態信號Mg,對具有模態與該編碼模態信號Mg相同之高解 ----------- 像r搜-塊之編碼模態倍餐分-配,短之编_藤」用來進往P測 碼,當與興低解像度塊之编碼模態倍號Mg之情況 .......-··· ••… . — 比較時,可削減編數。 另外,在上述之實施形態6中所示之構造是依照低解 像度塊之編碼模態用來變換高解.像度圖像信號之編碼方 法,和變換高解像度塊之编碼模態之编碼方法,但是也 可以構成為依照低解像度塊之编碼模態只變換高解像度 画像信號之編碼方法和高解像度塊之編碼方法之一方。 另外,在本實施形態6中所示之階層圖像编碼裝置 10 6之構造是第1圖所示之上述實施形態1之階層圖像 編碼裝置101之階層编碼處理之進行不僅根據低解像度 圖像信號而且也根據低解像度塊之編碼模態,但是此種 -46- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 訂 經濟部中央標準局員工消費合作社印裝 A7 B7 經濟部中央標準局貝工消費合作社印裝 五、發明説明( 4夂 ) 1 1 階 層 圖 像 编 碼 裝 置 之 構 成 並 不 只 限 於 上 述 之 實 施 形 態 6 1 1 者 例 如 > 亦 可 以 根 據 低 解 像 度 圖 像 信 號 和 低 解 像 度 塊 1 1 之 编 碼 模 態 9 用 來 進 行 第 5 圔 所 示 之 上 述 實 施 形 態 3 之 請 1 先 1 階 層 編 碼 處 理 〇 閱 讀 1 在 這 種 情 況 時 * 參 照 由 16 X 1 6 個 圖 素 構 成 之 低 解 像 度 背 1 I 之 1 塊 LMB (參照第6 (a )_ ) 之對應之编碼模態, 由1 6X1 6 注 意 1 I 個 圖 素 構 成 之 高 解 像 度 塊 HMB2 ( 參 照 第 6(b) 圖 ) 之 對 應 事 項 再 1 Γ 之 編 碼 模 態 之 编 碼 處 理 之 進 行 是 以 4 個 高 解 像 度 塊 HM B2 填 寫 本 裝 構 成 之 統 合 區 域 為 早 位 9 對 應 到 上 逑 低 (S7J m 像 度 塊 LMB之 頁 1 I 解 像 度 變 換 處 理 所 獲 得 之 32 X 3 2 値 圔 素 構 成 之 1 値 插 入 1 1 塊 AM B (參照第6 (C)圖) 〇 但是即使在此種情 況時, 對 1 1 於 fcb 低 解 像 度 塊 LMB小之單位所對應之資訊 ( 尔即圔素 1 訂 值 之 預 測 誤 差 等 ) 9 與 上 述 之 實 施 形 態 3 同 樣 的 t 例 如 1 * 以 第 6 (d)圔 所 示 之 圔 素 早 位 , 計 算 對 應 到 高 解 像 度 框 1 I 架 HF之 圖 素 值 ( 參 照 第 6(b) 圔 ) 9 和 對 應 到 解 像 度 變 換 1 I (插入)框 架 AF之 圖 素 值 ( 第 6 ( C ) 圖 ) 之 誤 差 ( 差 額 圔 像 1 y D ) 以 16 X 1 6 個 圖 素 構 成 之 小 塊 tact 早 位 對 該 誤 差 信 號 進 m 1 行 編 碼 處 理 0 1 1 實 施 形麗 1 I 第 Iff ( a )圖和第 1 0 ( b ) 圖 是 方 塊 圖 9 用 來 說 明 本 發 明 之 1 I 實 施 形 態 7 之 圖 像 處 理 裝 置 ( 階 層 圖 像 解 碼 裝 置 ) 〇 1 1 1 本 實 施 形 態 7 之 階 層 圖 像 解 碼 裝 寳 1 ]7 , 與 第2 4圖所 1 1 示 之 習 知 之 階 層 圖 像 解 碼 裝 置 2 0 Ob同 樣 的 具 有 低 解 像 1 I 度 依73 m 碼 部 10 7 L > 增 量 樣 本 器 10 b, 和高解像度j 解碼部1 07H 1 1 -4 7 - 1 1 1 1 本纸張尺度逍用中國國家標準(CNS ) A4規格(210X 297公釐) 經濟部中央標率局貝工消費合作社印製 A7 B7 五、發明説明(#) 。其中,附加有與上述習知之階層圖像解碼裝置200b相 同符號者,具有與習知之階層圖像解碼裝置200b者完金 相同之構造,在本實施形態7之階層圖像解碼裝置107 中,參照從低解像度之解碼器9g輸出之编碼模態Mg*用 來進行高解像度编碼信號HEg之解碼處理’此點與上述 第24圖所示之習知之階層圔像解碼裝置2()()b不同。 亦即,在本實施形態7中,對低解像度编碼彳§號【以 進行解碼之低解像度解碼部107L具有解碼器98用來代替 習知之階層圖像解碼裝置200b之低解像度编碼部20之 解碼器9,該解碼器9g用來輸出低解像度解碼信號LDg和 编碼模態信號Mg,其他之構造與習知之階層_像解碼裝 置200b之構造完全相同。 另外,在本實施形態7中,對高解像度編碼信號HEg 進行解碼之高解像度解碼部107 H具有解碼器40 8用來代 替上述習知之階層圖像解碼裝置200 b之高解像度编碼部 20 1H之解碼器30,該解碼器40 g不僅根據上述之增量樣 本器l〇b之輸出ADg而且也根據上.逑之编碼模態信號Mg, 用來進行被輸入之高解像度编碼信號HEg之解碼處理, 其他之構造與習知之階層圖像解碼裝置200b完全相同。 該解碼器4 0 g具有:分離器6 0 ,用來從上述之高解像 度編碼信號HEg中抽出模態编碼信號EMg使其分離;模態 解碼器61,用來對該分離之模態編_信號EMg進行解碼 ;和第1和第2解碼器63和64,以不同之解碼方法對與 該模態编碼信號EMg分離之高解像度编碼信號SHEg進行 -48** 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) ---------ni-----—IT------0 (請先閱讀背面之注意事項再填寫本頁) 經濟部中央標準局貝工消費合作社印製 A7 B7 五、發明説明(Ο ) 解碼。 另外,上述之解碼器4Qg具有:前段開關62,根據被 上述之模態解碼器61解碼之編碼模態信號DMg’用來將 上述之高解像度编碼信號SHEg供給到上述之第1和第2 解碼器63和64之其中之一方;和後段睛關65,根據被上 述之模態解碼器6〗解碼之编碼模態信號DMg,用來選擇 上述之第1和第2解碼器63和64之一方之輸出HDg1或 HDg2,將其當作高解像度解碼信號HDg的進行輸出。 其中,上述之第1解碼器63被構成為參照該低解像度 解碼信號LDg之增量取樣所獲得之插入信號八“,用來對 高解像度编碼信號HE g進行解碼處理,和第2解碼器64 被構建成不參照上述插入信號ADg,進行高解像度編碼 信號HE g之解碼處理。 下面將説明有關之作用和效果。 當將高解像度編碼信號HEg和低解像度编碼信號LEg輸 入到本階層圖像解碼裝置107時,就在低解像度解碼部 107 L對上述之编碼信號LEg順序的進行解碼處理和逆塊 化處理,被該逆塊化處理統合之對應到指定指矩形區域 之低解像度解碼信號LIg,經由匾域合成器21,進行與 對應到框架之其他圖像信號之合成。 在該解碼處理時,從解碼器9g輸出低解像度解碼信號 LDg和編碼模態信號,該低解像度解碼信LDg經由增量樣 本器l〇b被插入,被變換成具有空間解像度與高解像度 解碼信號LDg相等之插入解碼倍號ADg。 -49- 本紙張尺度逋用中國國家標準(CNS ) A4規格(210X 297公釐〉 (請先閱讀背面之注意事項再填寫本頁) -β
經濟部中央標準局員工消費合作社印製 A7 B7五、發明説明(4/ ) ' 另外,在高解像度编碼部107H,利用解碼器40 g對上 述之高解像度编碼信號HEg進行解碼處理,其進行是根 據上述之编碼模態信號Mg和插入解碼信號ADg,和利用 逆塊化器31對解碼器40 g之輸出HDg施加逆塊化處理。然 後,被該逆塊化處理統合之對應到指定矩形區域之高解 像度解碼信號Η I g ,經由區域合成器3 2 ,進行與對應到 框架之其他圖像信號之合成。 下面將說明上述之解碼器40 g之詳細之動作。 在上述之解碼器4flg,利用分離器6 0使高解像度編碼 信號HEg分離成對應到編碼模態之编碼部份EMg和其他之 編碼部份SHEg,其中對應到編碼模態之编碼部份EMg輸 出到模態解碼器61,其他之编碼部份SHEg輸出到前段開 關62。這時在上述之模態解碼器61,參照低解像度塊之 編碼模態信號Mg,用來將對應到高解像度塊之模態編碼 信號解碼,在上述之各個開關62和65,參照高解像度塊 之被解碼之編碼模態信號DMg,用來選擇第1解碼器63 和第2解碼器64之一方,將其中.之一方之解碼器之輸出 HDgl或HDg2作為解碼器40g之輸出HDg的進行輸出。 在此種方式之本實施形態7中,因為高解像度编碼信 號L Eg之解碼處理之進行不只是根據低解像度解碼信號 LDg之增量取樣之插入之插入解碼信號ADg,而且也根據 低解像度塊之编碼模態信號Mg,所以對於第9圖所示之 實施形態6之階層圖像編碼裝置10 6所编碼之高解像度 编碼倍號HEg,變成以解碼器40 g參照编碼模態信號Mg進 -5 0- (請先閲讀背面之注意事項再填寫本頁) 裝· 訂
•-H 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) A7 B7 經濟部中央標準局員工消費合作社印製 五、發明説明 ί ( ^ ) 1 1 行 解 碼 9 可 以 進 行 與 實 施 形 態 6 之 编 碼 器16 f之编碼處 1 1 理 對 應 之 解 碼 處 理 〇 因 此 對 於 實 施 形 態6 之階層圖像 1 1 編 碼 裝 置 所 編 碼 之 低 解 像 度 m 碼 信 號 LE g和高解像度编 /·-V 請 1 1 先 1 碼 信 號 HE g, 可以進行正確之解碼。 閱 讀 1 1 另 外 1 在 上 逑 之 實 施 形 態 7 中 所 示 者 是依 照低解像度 背 面 1 I 之 1 1 之 編 碼 模 態 用 來 *a± 變 換 高 解 像 度 编 碼 信 號 之解 碼方法和高 注 意 1 事 1 解 像 度 编 碼 之 編 碼 模 態 之 解 碼 方 法 但 是也 可以依照低 項 再 (: 解 像 度 塊之 编 碼 模 態 只 變 換 上 述 高 解 像 度編 碼信號之解 填 寫 本 碼 方 法 和 髙 解 像 度 塊 之 編 碼 模 態 之 解 碼 方法 之一方。 頁 '—V 1 I 實 施 形 態 8 . 1 1 第 11 画 m 來 m 1 本 1—— 發 明 之 實 施 里 蓋 8 夕園 1 1 (pi 自層圔像编碼裝置) 9 第 11 (a )圖是方塊圖, 用來表示 1 ... 一 訂 其 全 體 之 構 造 9 第 1 1 (d )圖是方塊匾j 用夾表示構成該 1 階 層 圖 像 編 碼 裝 置 之 碼 z m. 細 2 Μ 造。 1 1 本 實 施 形 態 8 之 階 層 liail _ 像 编 碼 裝 置 10 8具備有依照物 1 I 體 之 形 態 變 換 編 碼 方 式 之 編 碼 器 1 6 h用來代替第9圖所 1 y 示 之 實 施 形 態 6 之 階 層 圖 像 編 碼 裝 置 10 6之編碼器16f, m l 其 他 之 構 造 與 上 述 之 實 施 形 態 6 之 階 層 圔像 編碼裝置 1 1 1 0 6相同。 1 1 另 外 > 本 實 施 形 態 8 之 编 51 -器 16h具有:境界判定器 1 I 7 0 用 來 接 i 被 塊 化 之 高 解 像 度 编 碼 信 號Η B g ,藉以判 1 1 定 在 對 應 到 該 ΓΞ1 _ 像 信 號 之 塊 内 是 否 含 有物 體之境界, 1 1 用 以 輸 出 對 m IfUtS 到 判 定 結 果 之 判 定 信 號 6D ,和 輸出判定信 1 I 號 BD 1用以表示在該塊内包含有物體之境界 和模態判 1 1 I -5 1- 1 1 1 1 本紙張尺度適用中國國家標準(CNS ) A4規格(2丨OX297公釐) 經濟部中央標準局貝工消費合作社印製 A7 B7 五、發明説明(如) 定器7 5,用來接受上述之高解像度编碼信號HBg和上述 之判定信號BD1,當在上述之塊内包含有物體之境界時 就輸出識別信號MD1用以表示是否參照低解像度画像信 號 LSg〇 另外,上述之编碼器16 h具有:模態編碼器71,根據 低解像度编碼信號LEg之编碼模態信號Mg,用來對該判 定信號BD和識別信號MD1進行編碼藉以輸出模態编碼信 號EMg;第1和第2任意形狀编碼器73a和73b,以不同 之任意形狀編碼處理之方法用來對高解像度圖像信號 HSg進行编碼;和固定形狀狀编碼器74,用來對高解像 度圖像信號HSg施加固定形狀编碼處理。 其中,上述之第1任意形狀編碼器73 a被構建成參照 低解像度解碼信號Ldg之增量取樣所獲得之插入信號LAg ,用來進行高解像度圔像信號HSg之任意形狀編碼處理 ,和上述之第2任意形狀編碼器73 b被構建成不參照低 解像度解碼信號之增量取樣所獲得之插入信號LAg,直 接進行高解像度圖像信號H S g之任意形狀编碼處理。 另外,上述之编碼器16h具有:前段開關52,根據上 述之境界判定器70之輸出BD和模態判定器75之輸出MD1 ,用來將上述之高解像度圖像信號HSg供給到上逑之第 1,第2任意形狀编碼器73a,73b和固定形狀编碼器74 的其中之一;後段開關55,根i上迷之境界判定器70之 輸出MD和模態判定器75之輸出MD1,用來選擇上述之第 1,第2任意形狀编碼器73a,73b,和固定形狀编碼器 -5 2 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) 裝· 訂 B7 經濟部中央標準局員工消费合作社印聚 五、發明説明 ( ) 1 1 74的 其 中 之 一 之 輸 出 ; 和 多 X 器 56 9 用 來 使 該 後 段 開 闘 1 1 55之 輸 出 和 上 述 之 模 態 編 碼 信 號 EM g進行多工化。 1 1 下 面 將 説 明 有 關 之 作 用 和 效 果 〇 /-—v 請 1 先 1 對 於 具 有 物 體 ns 之 形 狀 資 訊 之 圖 像 信 號 i 可 以 依 昭 物 體 閱 讀 1 之 形 狀 燹 換 编 碼 方 式 〇 背 1 I 之 1 亦 即 9 當 在 高 解 像 度 塊 内 包 含 有 物 體 境 界 之 情 況 時 9 注 意 1 I 就 利 用 任 思 形 狀 編 碼 器 7 3 a或7 3b 進 行 依 照 物 體 形 狀 之 任 事 項 1 再 Γ 意 形 狀 編 碼 處 理 9 在 該 高 解 像 度 塊 位 於 物 體 外 部 之 情 況 填 寫 本 V、 裝 時 » 或 是 高 解 像 度 塊 位 於 物 p 内 部 之 情 況 時 9 可 以 對 塊 頁 1 内 之 圖 像 信 號 ( 固 定 形 狀 ) 進 行 有 效 之 編 碼 > 可 以 以 固 1 1 定 形 狀 編 碼 器 74 進 行 編 碼 〇 1 另 外 > 當 在 低 解 像 度 塊 内 包 含 有 物 體 境 界 之 情 況 時 9 1 訂 在 對 應 之 高 解 像 度 塊 内 亦 包 含 有 物 體 D过 境 界 之 機 率 很 高 9 1 在 低 解 像 度 塊 位 於 物 體 内 部 或 物 體 外 部 之 情 況 時 9 對 應 1 | 之 高 解 像 度 塊 亦 位 於 物 體 内 部 和 物 體 外 部 之 USk 機 率 很 高 〇 1 I 因 此 > 參 照 低 解 像 度 塊 之 編 碼 模 態 ( 亦 即 低 解 像 度 塊 1 y 和 物 體 之 境 界 之 位 置 關 傺 ) 用 來 對 高 解 像 度 塊 進行 编 碼 m I 處 理 可 以 有 效 的 提 高 编 碼 效 率 0 1 I 在 下 面 之 詳 述 中 ♦ 第 12 圔 表 示 低 解 像 度 矩 形 區 域 和 高 1 1 解 像 度 矩 形 區 域 是 位 於 物 體 内 部 或 物 體 外 部 〇 第 1 2 (a) 1 I 圖 表 示 用 以 構 成 第 2 (a)圖 所 示 之 低 解 像 度 區 域 LR之 各 個 1 1 塊 LMB是否在物體I 〇 b内 9 第 1 2 (b)圔表示用以構成第2 (b) 1 1 圖 所 示 之 高 解 像 度 矩 形 區 域 HR之 各 値 塊 HMB 1 是 否 在 物 BM 體 1 I Ho b内〇 另外, 第1 2(c) 圖 表 示 用 以 構 成 第 2(c) 圖 所 示 之 1 1 -5 3- 1 1 1 1 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(π ) 插入矩形區域A R之塊AMB是否在物體Aob内,第12(d)圖 表示用以構成第6(d)圓所示之高解像度矩形區域HR之各 値塊HMB2是否在物體Hob内。其中,附加有記號I之塊 是位於物體内部之塊,附加有記號0之塊是位於物體外 部之塊,附加有記號10之塊是位於物體境界之塊。 由第12圖可以瞭解,.當:使低解像度圖像信號LSg之解 一…—一... …. 一…— — 像f變換後之插&圖對應之插入矩形區域> AR (第I2 (c)P ),與高解像度_像信號HSg之對應之矩 形區域HR (第12(b)圔或第12(d)圖)進行比較時,在低 解像度塊LMD是位於物體内部,物體外部,或物體境界 之那一個之位置之判定結果,與高解像度塊HMB1或HMB2 是位於物體内部,物體外部,或物體境界之那一個之位 置之判定結果之間,具有很大之相關性。 其中,利用境界判定器?0用來判斷物體之境界是否被 包含在高解像度塊,當參照用以表示低解像度圖像之境 界之有無編碼模態信號Mg,利用模態編碼器71對用以表 示高解像度圖像之境界之有無之編碼模態信號BD進行编 碼時,在低解像度塊和與其對應之高解像度塊之間,於 物體境界之有無為一致之情況時,就對上述之高解像度 塊之編碼模態信號BD和BD1分配編碼長度較短之編碼, 利用這種方式可以節省編碼位元數。 下面將簡單的說明上述之編碼器16lL^L_具體之動作》 在上述之编碼器16h,利用境界判定器7&,1捧被塊 -......... ‘ 一一 〜 化之高解像度圖像信號HBg,用來決定是對該圖像信號 ' -54- 本紙張逍用中國國家梯率(CNS > A4規格(210X297公釐) ---------ci— (請先閱讀背面之注意事項再填寫本頁)
、tT A7 B7 經濟部中央標準局貝工消费合作社印製 五、發明説明 ( ) 1 I HB g施加任意形狀编碼處理, 或是施加固定] 形狀编碼處 1 1 理 〇 另 外 在 模 態 判 定 器 7 5 > 根 據來 白境 界 判定器7 〇 之 1 1 判 定 結 果 之 對 應 之 判 定 信 BD 1和被塊化之高解像度圖 /--v 請 1 先 1 像 信 號 HB g, 用來決定是參照低解像度解碼> ί言號Ldg之 插 閱 讀 1 入 所 獲 得 之 插 入 圖 像 信 m LAg對高解像度圔1 象信號Η B g 進 背 面 1 I 之 1 行 任 形 狀 編 碼 處 理 » 或 是 不 參 照該 插入 信 號LAg對高 注 意 1 I 解 像 度 iStt 圖 像 信 站 號 HBg進行任意形狀編碼處理 0 事 項 鼻 1 「 如 此 一 來 , 在 上 述 之 各 個 開 關 52和 5 5, 依 照上述之 各 填 寫 本 1 裝 锢 判 定 器 7 0和 75之 判 定 結 果 9 選 擇上 逑之 第 1,第2任 頁 1 I /Ss 形 狀 編 碼 器 7 3 a , 7 3b 9 及 固 定 形狀 编碼 器 74的其中 之 1 1 一 0 利 用 m 種 方 式 1 以 所 選 擇 之 编碼 器7 ϊα ,73b,或 74 1 1 對 上 述 之 高 解 像 度 圖 像 信 號 HB g進行編碼 , 博其輸出到 1 訂 多 工 器 56 0 1 這 時 > 在 上 述 之 模 態 m 碼 器 7 1 ,根 裤低 解 像度塊之 編 1 | 碼 模 熊 Me 准 行 卜 钵 堉 Μ μ. JZ 0么 判亩 和提 熊 1 判 定 —器 7 5之 判 定 信 號 MD 1之理, 在上述之多工器 1 y 56 對 上 述 之 開 關 56之 輸 出SHEg和 上逑 之模 態 編碼器71 之 m 1 輸 出 E Mg進行多工化, 將其當作高解像度编丨 瑪信號HEg的 1 1 進 行 輸 出 〇 1 1 在 此 種 方 式 之 本 實 施 例 8 中 9 因為 利用 編 碼器1 6 h, 1 1 參 照 低 解 像 度 塊 之 编 碼 模 態 Mg 對 高解 像度 塊 之编碼模 態 ! 1 進 行 編 碼 9 所 以 可 以 削 減 編 碼 模 態之 編碼 所 需要之位 元 1 1 數 〇 1 I 另 外 > 因 為 判 定 高 解 像 度 塊 與 物體 之位 置 關傺,和 判 1 1 -55- 1 1 1 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 經濟部中央標準局員工消費合作社印褽 A7 B7 五、發明説明(付) 定對高解像度塊進行編碼處理之方法,依照該等之判定 結果,對高解像度圖像信號施加參照低解像度圖像度信 號之任意形狀編碼處理,不參照低解像度圖像信號之任 意形狀编碼處理,及固定形狀編碼處理的其中之一,所 以可以進行編碼效率更高一層之階層编碼處理。 另外,在上述之實施形態8中是構建成依照低解像度 塊之編碼模態,變換高解像度圔像信號之編碼方法,和 變換高解像度塊之編碼模態之編碼方法,但是也可以構 建成依照低解像度塊之編碼模態,只變換高解像度圖像 信號之编碼方法和高解像度塊之编碼方法之一方。 實施形態9 . 第13画用來說明本發明之實施形態9之圔像處理裝置 置),^ 1 3 ^ Μ B . 其芝體之構造,第13(b)圖是方塊函.用麼成該 f1 階層圖ϋ碼裝置之解碼裝:> 哉細播進一 本實施形態9之階層圖像解碼裝置10 9用來對第11圔 所示之實施形態8之階層圖像編_碼裝置10 8所编碼之低 解像度編碼信號和高解像度编碼信號進行解碼,具備有 解碼器40 i用來代替第10圖所示之實施形態7之階層圖 像編碼裝置107之解器40g,可以依照被解碼之编碼模態 信號變換解碼方式。另外,該階層画像編碼裝置10 9之 其他構造與上述之實施形態7之階雇圖像编碼裝置107 相同。 另外,本實施形態9之解碼器40i具有:分離器60, -56- 本紙張尺度適用中國國家標準(CNS ) A4说格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) -裝. 訂 經濟部中央標準局貝工消费合作社印製 A7 B7 五、發明説明(f ) 用來從上述之高解像度编碼信號HE g中抽出模態編碼信 號EMg使用分離;模態解碼器75a,參照低解像度圖像信 號之編碼模態信號Mg,用來對該被分離之模態编碼信號 E Mg進行解碼;第1和第2任意形狀解碼器76a和76b, 以不同之解碼方法對高解像度编碼信號H S g進行解碼; 和固定形狀解碼器77。其中,上述之第1任意形狀解碼 器76a被構建成參照低解像度解碼信號之增量取樣後之 插入信號用來對高解像度编碼信號進行解碼處理,上述 之第2任意形狀解碼器76b被構建成不參照低解像度解 碼信號之増量取樣後之插入信號,對高解像度编碼信號 進行解碼處理。 另,1^上述之^_碼器40i具有:前段開關6 2 ,稂據上 述之模態解碼器75&所解碼之編碼模熊^&_^~1^1^__1^來將 上述之高解像度編碼信號HE g供給上—逑之J 1,第2任 〜--一 意形狀解碼器76a, 76b和固定形狀解碼_^J7m其中4 一 ;和後g開關6 根據上述之模態解碼器7 5 a所解碼之 编碼模態信號DMg,用來選擇上述之第1,第2任意形狀 解碼器76a, 76和固定形狀解碼器77的其中之一之輸出 ,將其當作高解像度解碼信號HDg的進行輸出。 下面將説明有關之作用和效果。 在本實施形態9之階層圖像解碼裝置109中,解碼器 40i以外之動作因為與上述之實施形態7之階層圖像解 碼裝置107完全相同,所以下面只説明解碼器40i之動作。 在上述之解碼器40i之模態解碼器75a中,參照低解像 -57- 本紙張尺度適用中國國家標率(CNS〉八4規格(210X297公釐) C請先閱讀背面之注意事項再填寫本頁) •裝. 訂 五、發明説明(β A7 B7 經 濟 央 標 準 局 員 费 合 —作— 社 印 製 度圖像之編碼模態信號Mg (亦即是物體之内部或外部) 用來對高解像度圖像之模態编碼信號EMg進行解碼。在 上述之前段開關62和後段開關65中,依照被解碼之高解 像度画像之編碼模態,選擇3個解碼器的其中之一。 利用這種方式,被任意形狀编碼之圔像編碼信號以第 1或第2任意形狀解碼器76進行解碼,被固定形狀編碼 之圖像信號以固定形狀解碼器7 7進行解碼。 利用這種方式,對於依照物體之形狀以上述實施形態 8之階層圖像編碼裝置編碼之編碼信號,可以進行正確 之解碼。 實施形態1 〇 . 第14圖用說明本發實施形卷1 0之溢 階層圖像&碼裝置),第14(a)圖是方塊圖,用來表示 其全體之構造,、第1 4 ( b )画晕玄崖來表示.構·成該 階I圖像编碼裝置之编碼_器^^|_趣構造。 本實施形態10之,層圖像編碼裝置lit)具備有依照圖 素值之大相關性之掃λ描方向變換.编碼方式之编碼器16j ,用來代替第9麵所示之實施形態6之階層圖像编碼裝 置10 6之編碼器16f,其他之構造與上述實施形態6之階 層圖像編碼裝置106相同。 上述之編碼器160具有:掃描方向判定器80,用來接 受被塊化之高解像度编碼信號HBg,藉以判定各値塊之 圖素值之大相關性之掃描方向;模態編碼器81,對於低 解像度编碼信號L E g,根據用以表示圖素值之相關大小 -58- 本紙張尺度適用中國國家標隼(CMS ) Α4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) -裝·
、1T 經濟部中央標準局員工消费合作社印製 A7 B7 五、發明説明(〇 ) 之掃描方向之模態信號Mg,用來對表示該判定結果之信 號SD進行編碼,藉以輸出模態編碼信號EMg;水平掃描 編碼器83,用來對高解像度圖像信號HSg進行水平掃描 编碼處理;和垂直方向编碼器84,用來對上述之高解像 度圖像信號HSg進行垂直方向編碼處理。 另外,上述之編碼器16j具有:前段開關52,根據上 述之掃描方向判定器80之輸出SD,用來將上述之高解像 度圖像信號HSg供給到上述之水平掃描编碼器83和垂直 掃描編碼器84的其中之一;後段開關55,根據上逑之掃 描方向判定器80之輸出SD,用來選擇上述之水平掃描編 碼器83和垂直掃描編碼器84的其中之一之輸出;和多工 器56,用來對該後段開關55之輸出和上述之模態编碼信 號EMg進行多工化。 在本實施形態10之階層画像編碼裝置中,編碼器16j 以外之動作之進行因為與實施形態6之階層圔像编碼裝 置106完全相同,所以下面只說明與編碼器16』有闋之動 作。 在將圖像信號編碼成掃描線方向之mu情況時 ,編碼效率依照掃描方向而變化。亦即,對於圖素值之 .........-一-—!— ' -- - - -.................一- ·.·...- 水平方向之相關性較大之圖像信號,沿著水平掃描方向 順序的對各個圖素之圖素值進行编碼,可以進行有效利 用水平方向^相關性之编碼,另外,對於圖素值之垂直 方向之相關性較大之圖像信號,沿著垂直掃描方向順序 的對各個画素之面素值進行編碼,可以進行有效利用圖 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先聞讀背面之注意事項再填寫本頁) •裝. 訂 經濟部中央標準局員工消費合作社印製 A7 B7 Μ 五、發明説明(Η ) 素值之垂直方向之相關性之编碼。 在本實施形態10之階層圖像編碼裝置11Q之編碼器16j 中,利用掃描方向判定器8 0判定圖素值之大相關性之掃 描方向,根據其判定結果,利用開關52和55用來選擇水 平掃描編碼器8 3和垂直掃描編碼器84的其中之一方,利 用該被選擇之編碼器用來對高解像度圖像信號進行编碼 處理。利用這種方式可以提高階層编碼處理之編碼效率。 另外,高解像度圖像因為舆低解像度圖像之間,其圔 素值之相關性很大,所以低解像度圖像之圖素值之大相 關性之掃描方向與高解像度画像之圖素值之大相關性之 掃描方向之間亦具有相闊性。 在本實施形態10中,當參照用以表示低解像度圖像之 圖素值之大相關性之掃描方向之編碼模態信號Mg,利用 模態编碼器81,對掃描方向判定器80所判定之用以表示 高解像度圔像之圖素值之大相關性之掃描方向之编碼模 態信號進行编碼時,在低解像度圔像與高解像度圔像之 間之圖素值之大相關性之掃描方.向為一致之情況,就對 與上述高解像度圖像信號對應之編碼模態信號分配编碼 長度較短之編碼。利用這種方式,编碼模態信號之编碼 所需要之編碼位元數可以更進一層的節省。 實施形態11 . 第1 5圖用來說明本發明之實施形_11之圖像處拥奘置 \ ------ · -- (階層圖像解碼裝置),第15(a)圖是方塊圔,用來表录. -----—- ~~ 其全體之構造,第l5(b)圖是方塊圖.用苯ϋ用以構 -6 0 - 本紙張尺度適用中國國家標準(CNS ) Α4規格(210Χ297公釐) I-------裝-- (請先閲讀背面之注意事項再填寫本頁) ,1Τ 經濟部中央標準局貝工消费合作社印製 A7 B7 五、發明説明(〇) 成該階層圖像解碼裝置之解碼器之詳細構造。 本實施形態11之階層画像解碼裝置111用來對第14圖 之實施形態10之階層圖像解碼裝置no所編碼之低解像 度編碼信號和高解像度编碼信號進行解碼,其中具備有 依照被解碼之編碼模態信號變換解碼方式之解碼器40k ,用來代替上述實施形態7之解碼器4Qg。另外,該階 層圖像編碼裝置110之其他構造與第10圖所示之實施形 態7之階層圖像编碼裝置107相同。 另外,本實施形態11之解碼器40 k具有:分離器60, 用來從上述之高解像度编碼信號HEg中抽出模態编碼信 號E Mg使其分離;模態解碼器85,用來對該分離之模態 編碼信號EMg進行解碼;水平掃描解碼器86,用來對高 解像度編碼信號HSg進行水平掃描解碼處理;和垂直掃 描解碼器87,用來對高解像编碼信號HSg進行垂直掃描 解碼處理。 另外,上述之解碼器4〇k具有:前段開H 62 ,根據卜 逑之模態解碼器8 5所解碼之编碼模態號D M 上 述之高解像度编碼信號HE g供給到上述之水平掃描解碼 器86和垂直掃描解碼器87的其中之一;和後段開闘65, 根據上逑之模態解碼器8 5所解碼之編碼模態信號DMg, 用來選擇上述之水平掃描解碼器86和垂直掃描解碼器87 的其中+—之輸出,將其當作高解像度解碼信號HDg的 進产――……一 下而將説明有關之作用和效果。 -61- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) .裝·
、1T 經濟部中央標準局員工消费合作社印製 A7 B7 μ 五、發明説明(卜) 在本實施形ffi 11 ^階屜圇像解碼奘詈111由 4 0 k以外之動作因為與上述實¥形態7之階層圖像解碼 裝ΐ Το 7完全相同,所以下面只說明解碼器4 0 k之動作。 ( ,·· —*— " -^― 一 在上述之解^ 8 5-φ,參照低解像 r------- 度圖像之編碼模態Mg (亦即,画素值之大相關性之掃描 方向),對高解像度圖像之模態编碼信號EMg進行解碼 。依照被解碼之高解像度圖像之編碼模態信號(表示画 數值之大相關性之掃描方向之信號)D M g ,變換開關6 2 和開關65,藉以利用水平掃描解碼器86對水平掃描編碼 處理過之圖像信號進行解碼,和利用垂直掃描解碼器87 對垂直掃描編碼處理過之圖像倍號進行解碼。 在此種方式之本實施形態11中,對於依照物體之形狀 施加水平掃描編碼處理或垂直掃描編碼處理之编碼信號 ,可進行正確之解碼。 實施形態12 . 第1 6圖用來説明明皇態-12之圃像處理裝置 (階k圔像編碼裝置),第16(a)圖是方塊圖,用來表示 其全體之構造,第16(b)圖是方塊圖,用來表示用以構 成該階層圖像編碼裝置之编碼器16m之詳細之構造,第 16(c)圖是方塊圖,用來表示用以構成該編碼器16®之第 2编碼器54^之具體之構造。 本實施形態12之階層圖像編碼裝置112具備有參照低 解像度圖像之移動向量對高解像度圖像倍號進行编碼之 編碼器16m用來代替上述之實施形態6之編碼器16f,其 -6 2 - 本紙張尺度適用中國國家標準(CNS ) A4規格(210X 297公釐) ---------裝— (請先閲讀背面之注意事項再填寫本頁) 訂
.P 經濟部中央標準局員工消費合作社印裝 A7 B7 五、發明説明(tl ) 他之構造與第9圖所示之實施形態6之階層圖像編碼裝 置1 〇 6相同。 該編碼器16m被構建成依照需要使上述實施形態6之 编碼器1 6 f之第2编碼器5 4進行畫面間預測编碼,其他 之構造與上述之編碼器16 f相同。 亦即,本實施形態之用以構成编碼器16ra之第2编碼 器54m具有:編碼器92,根據預測信號Pc用來對高解像 度圖像信號HBg進行編碼,藉以輸出高解像度编碼信號 HEg;局部解碼器93,根據上述之預測蓓號Pc用來對高 解像度编碼信號HEg進行解碼,藉以輸出高解像度局部 解碼信號Hdg;和記憶器94,用來記億該高解像度局部 解碼信號Hdg^另外,上述之第2编碼器5 4 m具有:移 動檢測器9 0,用來接受上述之高解像度圔像信號Η B g , 參照被記憶在上述記億器94之高解像度局部解碼信號 Hdg和作為低解像度圔像之編碼模態Mg之移動向量LMV, 用來檢測對應到高解像度圖像之移動向量HMV ;移動補償 器91,根據該移動向量HMV,從上述之記億器94中抽出 上述之預測信號Pc;移動编碼器95,根據低解像度圖像 之移動向量LMV,對上述之高解像度圖像之移動向量HMV 進行編碼,藉以輸出移動向量编碼.信號HMVc;和多工器 56m,用來使該移動向量編碼信號HMVc和上述之高解像 度编碼信號Η E g多工化和進行輸出。 在本實施形熊1 2之階靥圖i编碼鞋巽2中為溢 碼器1 6 m以進行與K施-形態之階層匯像编 -6 3 - 本紙張尺度適用中國國家標準(CNS )八4^格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) -裝· 五、發明説明(以) 置作, 裝動 碼之 A7 B7 謂 有 m 6 1 器 碼 编/與; 明一說一只面 下 以 所同ί 相;全。 完 具 向 方 間 時 與 所率 ,效 性碼 關编 相高 有提 號具以 信_值可 像•素 , 圖圖償 為之補 因間動 架移 框行 之進 後量 前向 即動 亦移 , 用 性使 關由 相經 有以 測 檢 動 移 之 號 信 像 圖 16過 器碼 碼解 編之 〇〇 4 B 之 9 Η 述器號 上憶信 在記像 在圖 中化 ο i 9 塊 器和 憶度V, 記像ΗΜ 被解量 據高向 根之動 ,後移 之 像 圔 度 像 解 高 測 檢 來 用 器 僂 補 ftHM 移量 在向 移 之 像 圖 度 像 解 高 之 到 測 檢 被 據 根 像 圖 償 補 動 移 生 産 來 用 號 信 測 預 (請先閲讀背面之注意事項再填寫本頁) 裝--- 9 一器I φ 碼像 編:圔 之化 述塊 上之 在像 » 圖 外度 另像 解 高 對 C , ρ ί 像一 圖. 償 firm 補 移 照一 參一 m: 理 處 碼 编 行 進 該 由 經 像 Μ 解:部 高|局 之一彦 得一 I 獲一 I 所高一 理W· 處作 度 像 解 高 在 外 另 度-確-圖 號 信 碼 編 碼94 解器 3 9 億. 器記 碼|在| 解 11«. 被一記I Egt 素 圔 為 因 之 像 圔 度. 像 解 低 和 量 向 33 移 之 像 圔 度 像 解ΗΜ 低量 以向 所動 ,移 性之 關像 相圖 大度 有像 具解 值高 和關 V _ ^相 2有 具 亦 值 量 向 之 間 之
,tT
P 經濟部中央標準局員工消费合作社印製 中 W 其量 向 器 碼 編 33 移 在 non 移 之 像 圔 度 像 解 低 與 照 參 號 信 態 模 碼 编 之 當 相 器 測 檢 πνπ 移 對 當 時 碼 解 I1 進 量 向 動 移 Μ _ Η .之 量間 向之 動像 移圖 之度 像像 画解 度高 像與 解像 高圖 之度 到像 測解 檢低 所於 情 之 .致 移 之 像 圖 度 像 解 高 Μ' Η 省 量節 向以 動可 移式 之方 像種 圖這 度用 像利 解。 高碼 該編 對之 ,度 況長 碼 编 之 短 較 配 分 本紙張尺度適用中國國家標準(CNS ) Α4規格(210Χ297公釐) 經濟部中央榡準局員工消费合作社印裝 Α7 Β7 五、發明説明(w ) 動向量之编碼所需要之編碼位元數。 實施形態1 3 . 夷丄7圖用來辨發翌之.實施形態丄】mi理裝置 (階J圖像解碼鬯置》,第丨1_(㈣是方|凰> 甩來其全 ;鹅芩構j,第丨以15)圖是方塊圖,.用„來、構成該隙層 圖像解碼裝置之解碼器40n^:詳細構-^,第17(c)圖是方 域圖,用來表示構成該解碼器4〇n之第2解碼器64η之具 體之構造。 本實施形態13之階層画像解碼裝置113是用來對第16 圖所示之實施形態12之階層圖像编碼裝置11 2所编碼之 編碼信號進行階層解碼者。該階層圖像解碼裝置113具 備有參照低解像度圖像之移動向量對高解像度編碼信號 進行解碼之解碼器40η用來代替第10圖所示之實施形態 7之解碼器4Gg,其他之構造與第1〇圖所示之實施形態 7之階層圖像解碼裝置107相同》 另外,用以構成上述之解碼器40 η之解碼器64 n被構建 成使上述實施形態7之解碼器1〇7中之第2解碼器64依 照需要的進行畫面間預測解碼,其他之構造與上述之實 施形態7之解碼器40g相同。 亦即,本實施形態中之用以構成解碼器40 n之第2解 碼器64 η具有:解碼器93b,根據預測信號Pd對高解像度 編碼信號HEg進行解碼,藉以輸出高解像度解®^ HDg2 ;和記億器94b,用來記億該高解像度解碼信@Hdg2e 另外,上述之第2解碼器64 η具有:移動解碼器96,# -65- 本紙張尺度適用中國國家標準(CNS ) Α4洗格(210Χ297公釐) (請先閱讀背面之注意事項再填寫本頁) 、τ
經濟部中央標準局貝工消费合作社印製 kl B7 " — ..............— 五、發明説明(k) 照低解像度圖像之编碼模態(移動向量)LMV,用來對 分離後之模態编碼信號EMg施加解碼處理,藉以再生高 解像度刪像之移動向量HMV;和移動補償器91b,根據該 再生之移動向量HMV,從被記憶在記憶器94b之高解像度 解碼信號H D g 2中抽出預測信號P d。 下面將說明有關之動作。 在本實施形態13之階層圖像解碼裝置113中,解碼器 40η以外之動作之進行因為與上述實施形態7之階層圖 像解碼裝置107完全相同,所以下面只說明與解碼器40η 有關之動作。 在上逑之解碼器40 η之分離器60,從高解像度編碼信 號HEg中抽出與模態資訊(移動向量資訊)EMg對應之編 碼部份使其分離。 另外,當對用以構成上述之解碼器4Qn之第2解碼器 64η供給該模態資訊EMg和高解像度编碼信號HEg時,在 該解碼器64η,參照低解像度_像之编碼模態Mg (亦即 移動向量LMV),利用移動解碼器96,對來自該分離器 60所分離之模態資訊之编碼之高解像度圖像之移動向量 HMV進行解碼,然後將該移動向量HMV供給到移動補償器 91b〇 如此一來,在上述之隻動,償器91Jb,參照被記億在 記億器94bg解碼過髙解像度圔像信號Pd進行移動補償 ,在解碼器93b,參照動作補僂器91b之輸出Pd,對高解 像度編碼信號HEg之模態資訊以外之編碼部份進行解碼 -66- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事頃再填寫本頁)
、1T 經濟部中央標準局貝工消费合作社印裝 A7 B7 五、發明説明(wr ) 藉以輸出高解像度解碼信號HDg2。該解碼信號HDg2被記 億在記億器94b供後續之塊之解碼處理時參照。 在此種方式之本實施形態13中,對於實施形態12之階 層圖像编碼裝置112之參照低解像度圖像之動作向量LMV 所编碼之高解像度編碼信號HEg,可以進行正確之解碼。 實施形態1 4 . 第1 8圖用麥說明*發明之實施形熊14之圖I處理 (P層圖像编碼裝置),第18(a)圖是方塊圖.^[夾表示 其全體之遽造―人.第1 8 ( b )圖是方里蓋上用麥表示徵^成該 階層圖頌编碼裝置之编碼器1 ,第1 )圖 ---·· 丨 · —.一 一 - 是^方塊圖,嫌·成該編碼·2編碼器δ4 之具^_^搆„造。 本實施形態14之階_層圖像編碼裝置114具備有编碼器 . '' ' 16ρ用來代替第9圔所示之實施形態6之編碼器16f,該 編碼器16P參照利用低解像度圖像之移動向量及编碼過 之高解像度圖像之移動向量所預測到之預測向量,用來 進行高解像度圖像信號之编碼,其他之構造與上述之實 施形態6之階層圖像编碼裝置106相同。 該編碼器16 p被構建成使上述實施形態6之編碼器16f 之第2編碼器54依照需要的進行圖面間預測編碼,其他 之構造與上述之编碼器16 f相同。 亦即,用以構成本實施形態14之_碼器16 p之第2編 碼器54p,除了用以構成第16圖所示之實施形態12之编 器16m之第2编碼器54 m之構造外,更具備有移動向量預 -67- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) 裝_ 訂 經濟部中央標準局員工消費合作社印製 A7 B7 »» 五、發明説明(a ) 測器97,根據對應到低解像度圔像之移動向量之编碼信 號,和對應到編碼過之高解像度圖像之移動向量之编碼 信號,用來産生預測移動向量Ρ Μ V ,其他之構造與用以 構成上述之實施形態12之编碼器16m之第2编碼器54 m相 同。 下面將説明有關之作果。 本實'施形態14之第2编碼器54 p和實施形態12之第2编 碼器5 4 m之不同是在第16圖所示之實施形態12之編碼器 54bi中,參照低解度圔像之移動向量用來對高解像度圔 像之移動向量進行編碼,在第18圖所示之實施形態14之 編碼器54p中,參照利用低解像度之圖像之移動向量和 編碼過之高解像度圔像之移動向量所預測産生之移動向 量,用來對高解像度圖像之移動向量進行編碼。 第19圖是有關於移動向量之參照之説明圖。第19 (a) 圖表示低解像度画像之移動向量LMV,第19(b)圖表示高 解像度圖像之移動向量HMV,第19(c)画表示對低解像度 画像進行解像度變換後之插人移.動向量AMV。 亦即,利用相同空間位置之低解像度圖像之移動向量 LMV(參照第19(a)圖)所獲得之插入移動向量AMV (參 照第19(c)_),和編碼過高解像度圖像之移動向量MMV1 〜HMV3(參照第19(b)圖),用來預測和産生第19(d)圔 所示對高解像度圔像之被編碼塊Bx乏移動向量。利用這 種方式,在高解像度圔像之移動向量之编碼時,單純的 只參照相同之空間位置之低解像度圖像之移動向量,可 -6 8 - 本紙張尺度適用中國國家標隼(CNS ) A4規格(210X297公釐) (請先閲讀背面之注意事項再填寫本頁) .裝· 訂 經濟部中央標準局員工消费合作社印製 A7 B7 五、發明説明U7 ) 以提高移動向量之編碼效率。 在移動預測器97中,參照被移動编碼器95编碼之高解 像度画像之移動向量HMV (HMV1〜HMV3)之編碼信號HEmv 和低解像度画像之移動向量之编碼倍號Mg (LEmv),用 來産生高解像度圖像之移動向量之預測值,在移動编碼 器95,參照該預測産生之移動向量PMV,用來對移動檢 測器9 0所檢測到之高解像度圖像之移動向量Η Μ V進行编 碼。另外,上述之移動編碼器95所编碼之預測移動向量 PEmv經由多工器56ra進行與編碼器92之輸出之高解像度 编碼信號之多工化,將其作為第2编碼器54 p之輸出HDg2 的進行輸出。 疋«施形態 14 參照利像 度圖像之動作!雲jn高解像度_像之動作鱼雲所m測産 生之預測移動J^L.暈,用來對高解像度画像之移動向量進 ___________·— 一. — …. 、 行编碼,所以當與上述^啻施形態12比較時,對高解像 ,.... ....... ..;- 度圖像之移動向量之編碼位元數可節省。 另外,在上述之實施形態12, 14中,當利用移動檢測 器90從被記億在記億器94之局部解碼信號中抽出與成為 编碼處理對象之對象高解像度塊對應之預測信號(預測 區域)時,選擇與低解像度圔像之移動向量儘可能接近 之移動向量作為高解像度圖像之移動向量,亦即,從上 逑之對象高解像度塊中選擇儘可能接近之預測區域,可 以更進一步的削減移動編碼器95之编碼位元數。 另外,在上述之實施形態12, 14中是依照低解像度圖 -6 9 - 本紙張尺度適用中國國家標準(CNS ) A4^格(210X297公釐) ---------裝-- (請先閲讀背面之注意事項再填寫本頁) 訂 經濟部中央標隼局員工消費合作社印製 A7 B7 * s 五、發明説明(J) 像之編碼模態,用來變換高解像度圖像信號之編碼方法 和高解像度画像信號之编碼模態之編碼方法,但是也可 以依照低解像度圖像之编碼模態,只變換高解像度圖像 信號之编碼方法和其编碼模態之编碼方法之一方。 實施形態]1 5 . 第20圖用來説明本發明之實施形態15之匾像處理裝置 ..... . -.—-— ' — - — — - -™~_ 厂.一......· - · ' ....... · - . , 二---- (階層圖像解碼裝置),第2_0 (a)圖是方塊圖來表示 r— 其全體之構2.0. ( b )1是用來表示構成該 階層画像解碼裝置之解碼器4Dq之詳細構造,第20(c)圖 是方塊圖,用來表示耩成該解碼器40q之第2 1碼器64 q ---—- 之具體之構_„造a X本實施形態15之階層圖像解碼裝置115用來對第18圖 之實施形態14之階層圖像编碼裝置114所编碼之編碼信 號進行階層解碼。該階層圖像解碼裝置115具備有解碼 器40q用來代替第10圖所示之實施形態7中之编碼器40g ,該解碼器4Qq參照#用低解像度画像之移動向量和編 碼過之高解像度圖像之移動向量.所預測到之預測向量, 用來進行高解像度圖像信號之解碼,其他之構造與上述 實施形態7之階層圖像解碼裝置107相同。 該解碼器40 q被構建成使上述實施形態7之解碼器40g 之第2編碼器6 4依照需要的進行畫面間預測編碼,其他 之構造與上述之解碼器40g相同。 亦卽,用以構成本實施形態之解碼器40q之第2解碼 器6 4q除了具有第17圖所示之實施形態13之第2解碼器 -7 0 - 本紙張尺度適用中國國家標準(CNS ) A4現格(210X 297公釐) (請先閱讀背面之注意事項再填寫本頁) -裝· 訂 經濟部中央標準局負工消費合作社印製 A7 B7五、發明説明(θ ) 64η之構造外,更具備有移動向量預測器98,根據對應 到低解像度圖像之移動向量LMV和對應到编碼過之高解 像度圖像之移動向量HMV,用來産生預測移動向量PMV, 其他之構造與上述之實施形態13之第2編碼器64η相同。 下面將說明有關之作用和效果。 在本實施形態15之階層圔像解碼裝置115中,解碼夢 _ — ______ ______ — - — · · 4 0 qi第2解碼器6 4 q以外之動作之進行因為與上逑實施 疮態1 3之階層圖像解碼裝置U 3完全相.圃,所以下面只 .. - —* * " '.'-.Μ*.· \ 、 ......〜— - - .•一- ............... 說明解碼器4〇q之第2解碼器6狄之直關.動作。 在上逑之第2解碼器64q之移動預測器98中,參照被 移動解碼器9 6解碼之高解像度圖像之移動向量HMV,和 從模態解碼器61供給之低解像度圔像之移動向量LMV (DMg),用來産生高解像度圖像塊之移動向量之預測值 PMV»如此一來,在移動解碼器96中,參照上述所預測 産生之移動向量PMV,對高解像度圖像進行移動向量之 編碼信號EMg之解碼。其他之動作與第17圔之實施形態 1 3之階層圔像解碼裝置1 1 3相同。 在依照此種方式之本實施形態15中,參照编碼過之高 解像度_像之移動向量和低解像度圖像之移動向量,可 以對被編碼之移動向量编碼信號進行正確之解碼。 另外,經由將用以實現上述各傾實施形態所示之圖像 编碼處理和圔像解碼處理之編碼或解碼程式,記錄在軟 碟等之資料記錄媒體,可以在獨立之電腦条統很簡單的 實施上述之各個實施形態所示之處理。 -7 1 - (請先閱讀背面之注意事項再填寫本頁) -裝. 訂 —» 本紙張又度適用中國國家標準(CNS ) A4規格(210X297公釐) 經濟部中央標準局員工消費合作社印製 A7 B7 五、發明説明(P ) 1 第21圖用來說明對於上述各値實施形態之圖像處理裝 置之階層圖像編碼處理或階層圔像解碼處理,使用收納 有與該等圖像處理對應之程式之軟碟,以電腦条統實施 該等處理之情況。 第J 1 ( b )圖表示從軟碟F1)之正面看之外觀,剖面構造 ,和作為記錄媒體之軟碟本體,第2 1 ( a )圖表示彆碟本 體D之物理格j之實例内藏在殼體F内 /在亭軟碟本圓狀之從外周朝向 内周之多個軌Tr,各個軌依角度方向被分割成16個扇區 。因此,在收納有上述程式之軟碟本體D,可將作為上 述程式之資料記錄在上述軟碟本體D上之被分配之區域。 另外,m 21 行上述-,程式之4B錄 再生之構造。當要將上述之程式記錄在軟碟FD之情況時 _ - - - ............ ... ,來自電腦糸之一作I士^由軟碟驅~動 機FDD被寫入到軟碟FD。另外.在要刺用軟碟FD内之程 式將上述之解碼方法構建t電腦条統中時,利用軟碟驅 · - — > 動機FDD從軟碟FD中讀出程式,將其轉送到電腦条統Cs。 另外,在上述之說明中,所説明者是利用以軟碟作為 記錄媒體乏電腦糸統用來進行圖像處理,但是使用光碟 者亦同樣的可以進行該圔像處理另外,作為記錄媒體 者並不只限於上述者,只要是可以記錄程式者(例如1C 卡,ROM卡等),同樣的可以實施上述之圖像處理。 另外,在上述之實施形態6,實施形態8和實施形態10 之编碡器中,構建成使模態判定器50(第9( bT^ ),境 -7 r- 本紙張尺度適用中國國家標準(CNS ) A4規格(2丨Ox 297公釐) (請先閲讀背面之注意事項再填寫本頁) -裝. 訂 A7 B7 五、發明説明(〜) 界判定器70 (第11(b)圖)和掃描方向判定器80 (第14(b) 圖)在編碼處理前,根據從外部輸入之高解像度圖像信 號用來判定編碼方式,但是該等判定器亦可使多種編碼 方式之編碼結果(編碼倍號)進行比較,用來決定編碼 方式(亦即,編碼模態)。 〔産業上之利用可能性〕 上述方式之本發明之圔像處理方法和圖像處理裝置, 及資料記錄媒,可提高圖像信號之壓縮處理之編碼效率 ,對於進行圖像信號之傳送和記億之条統中之圖像編碼 處理和圖像解碼處理之實現極為有用,特別適合於依照 MPEG4等之規格之梟.舅_像_之壓縮,伸展處理1<3 ................. --一 (請先閱讀背面之注意事項再填寫本頁) 訂 _* 經濟部中央標準局貝工消費合作社印製 -73- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐)

Claims (1)

  1. 經濟部中央標準局員工消費合作社印製 A8 B8 C8 D8 六、申請專利範圍 1 . 一種圖像處理方法/係用來依序進行階層圔像编j方 法,包含: 根據真有物體之形狀資^_之_像輸人信號^作為形 成空間解像度不同之多數個圖像空間之階層圖像信號 ,至少産生低解像度圔像信號和高解像度信號; .—·.— -- ·- ·—'-·:— 一 —i 區分上逑之高解像度圖像信號β使其對應高解像度 -- „ ” --—轴·_·τ- - 一__—·» 圖像空間中由指定數圖素構成之高解像度塊^同時, 並區分上述之低解像度圔像信號,使其對應低解像度 圖像空間中j f定Έ W構成之低解像度塊;和 ___ 將處理專.象的對象-高解像资·视之高解 1度画像信號之编碼處理,參照形成對應該高解像-度 塊的低解像度塊之低解像度圖胤谁行編碼處 理,其 • ^ 上述之編碼處理時所參照之參照低解像度塊為,使 其低解像度画像空間中之空間位置與該參照低解像度 塊.所對應之上述對象高解像度塊之高解像度圔像空間 ^中之空間位置相對應之低解像.度塊。 *· . .2.如申請專利範菌第1項之圖像處理方法,其中用以構 成上述高解像度圔像空間之各個圖素乃藉以上述低解 ·. - r ... v . _..... , 像度圖像空間之解像度變換而獲得,而使其空間解像 : 广 ' ---------- 1 , 能與上述蔓解I度圖像空i相等~之解像度變換圖像空 p ^ , … 一.. ,, 間史逐一對應者。 3.如申請專利範圍第1項之圖像處理方法,其中用以構 _____ . _ 、 成上'述發-照-低像度塊之圖素數,和用以構成上述對 -74- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) D :· II I —訂 I I 線 (請先閲讀背面之注意事項再填寫本頁) 六、申請專利範圍 A8 B8 C8 D8 之 述 上 中 其 法 方 mi 1 理 〇 處 致像 一 圖 為之: 數項 素 1 画第 之-圍 塊一範 度,利 像"專 解請一 高申 象如一 ,置 置位 位對 對相 相之 之中 中間 間空 空像 像圖 圖度 度像 像解 解高 低之 之塊 塊度 像一解 解高 低一象 照一對 參與 為 應 因 中 其 法 方 I 理 處 像 圖 之 項 IX 第 圍 範 利 。專 者請 致申 一 如 之塊, 法度」 方像-。 理解一者 處高一式 碼象方 编對碼 之述編 需上之 所對號 塊別信 度識態 儳為模 解示之 低表需 照換所 參變法 述來方 上,理 於態處 對模碼 別碼,编 識編之 之境 述之 上狀 中形 其體 ,物 〇 4之内 上-H塊一 良間度一 處空像一 像像解 圖圖高一 之在象/ 項示對. 5 ·顯述 第被上 圍示在 範表含 利為包 專態一被 請模否 申碼i'是 如編.界 之 一 述每 上號 中信 其像 , 圖一 法「之 方、塊I 理度 處像 像解 圖一低 •N \照 項參 5 應 第對 圍按 範 , 利為 專態 請模 申碼 如編 水 著 ο 沿一行 在_進 是向 竟.方 示r掃 表 一 B 9 理一中 處向 '碼方 编描 之掃 碼I直 编 以 加一向 帛方 依一描 素掃 圖平 垂 瓜 經濟部中央標準局員工消費合作社印製 對,空一解 照-像ί:高: 參\圖一象 €->:對 i 一 其(像〉述 ,解I上 法應 方述對一 理上換/ 處在變 像示< 來 圖表I ' 之/而一訊 項塊(資 1 度'動' 第像一一移一 BA之一 範^-動一 利昭fj移一 專-#-體 0 ^物、Φ ^ ± 移 之 611^ 33 移 體 物 之 間 空 像 圖_-- 度· 像」 解- 高二。 述一法 上ΐ方 示一碼表一编 而-之塊一訊 度資 像、動 9.如申請專利範圍第1項之圖像處理方法,其中參哼已 被施加過编碼處理之處理過高解像度塊示 度画像空間上物體移動之移動資訊,及^應上述參照 -75- z 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) 裝 訂 線 (請先閲讀背面之注意事項再填寫本頁) 經濟部中央標準局負工消費合作社印製 A8 B8 C8 D8 ^、申請專利範圍 低解像度塊而表示上述低解像度§ 間上物體移動 之移動資訊,來變換對應上述對象高解像度塊而表示 上述高解像度空間上物體移動之移動資訊之编碼方法。 10. —種圔像處理方法來進行_階層圖像解疆_^法, r---' ' : 包含:將具有物體之形狀資訊之圖像信號施加階層編 碼處理所獲得^至少2個塊化階層编碼信號中之低解 像度編'碼信號加以解碼,藉以産生低解像度画像空間 中由指定數圖素構成之低解像度塊所對應之低解像度u 解碼倍號;、統合該低解像度解碼信號,藉以産生上述 —. * ' -1™ — - _ 低解像度圔像空間所對應之低解像度統合信號;將上 , .—— ** -. 述2個塊化之階層編碼信號中之高解像度编碼信號參 照所興應之低解像度解碼倍號而加以解碼,用於産生 ' 由高解像度圖像空間中之指定數圖素所構成之高解像 度塊所對應之高解像度解碼信號;和統合該高解像度 , ,-.--1**^=· - . f. .. . . 解碼信號,藉以産生上述高解像度圖像空間上對應之 肩 - 一, 高解像度統合信號,其特徽為: 上述高解像度溢碼信號^解碾處理時所參照孝參照 低解像度塊為,使其低解像度圖.像空間上之空^_位置 對rί^~¾__fi_低解f度塊,而與作為上述解碼處理對象 I - 一 之對象高解像度塊之高解像度圖像空間上之空間位置 , 相對應者。 H.如申請專利範圍第10項之圖像處理方法,其中用以 構成上述高解像度im之各個匯素乃藉以上迷威 • ___ . .. ' 療圖像空間.禅使空.間解像 … -76- 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) (請先閱讀背面之注意事項再填寫本頁) .裝· 訂 六、申請專利範圍 間 空 像 圖 換 變 度 像 解 之 等 相 0 間者 空應 像對 圖:.一 度一逐 像素 解D圖 高~個 述各 上之 與上 以述 用上 中成 其構 ,以 法用 方和 mn 理-, 處數。 像一素者 画一画合 之之符 項塊一數 1 度素 第像一一圔 圍_解j之 範低一塊 利照•度. 專,參像 請述解 申上高 如成象_ .構對巧 述位 上對 中相 其之 ’上 法.·中 方一間 理一空 處像 像.圖 圖度 之一像 項解 10低 第之 圍塊 範度5 利像】 專解Ϊ, S低I: 申照」 如參一 . 之 對 相 之 上 間 空 像 圖 度 像 解 高 之f 塊一 度I 像一 I- 解,,〇 高j者 象j致 對Γ 與為 ,置 置位 — 1 理 處 像 画 之 項 ο 1L 第 圍 範 ΛΒ-- 利 專 請 申 如 應 因 中 其 之塊、 法度 方像 理解'。 處高;式 碼慧方 解對~碼 之述解 塊上之 度對號 像別信 解識碼 低〔為编 照:不態 參一表模 述換之 上變法 於來方 對,理 別態處 識模.碼 於碼一解 用编;之 述之 上狀 中形 其體 ,物 法之. 方上 理間 處|空 像I像 圖一圖 之(在 項示 14顯 第被 圍示 範表 利為 專態 請模 申碼 如編 .之 塊“法 度_方 像理 解,處 高)像 象|圖 對_之 之項 述14 上第 在圍 含範 包利 被專 否請 是申 界如 境 · 述 上 。中 者其 (請先閱讀背面之注意事項再填寫本頁) 經濟部中央標準局負工消f.合作社印裝 號水 信箸 像沿 _ 是 -之竟 塊究 度 , il 像理 :解.處 低碼 一照解 V參之 .應碼 對解 將以 示加 表序 為依 態素 模圖 碼一一 编一每 之之 。照空 者參像 行中圖 rl t-t 進其度· 向 ,像 方法解 描方I低 掃理.述 一 處上 那像示 中圖表 向之而 方項塊 描10度 掃第像 直圍解 垂範低 和利照 向專參 方請述 描申上 掃如應 平..對 /高'移 述之 )上 ft I 33 應移 對體 示物 表中 換間 變空, 以像 ,圖 訊度 資像 一動解S 一移高一 I之述 動上 ;移在 i體而 物塊一 之度一 上像' 間解/ 本紙張尺度適用中國國家標準(CNS ) A4規格(210 X 297公釐) 申請專利範圍 法 方 碼 解 之 訊 資 i_1OT6yJ 33 A8 B8 C8 D8 照解 參高 中示 其表 ,而 法'塊 方度 理像 處一解 像一高 圖過 之理 項一處 10之 第、理 圍處 範碼 利解 專過 請加 申施 如被 . 已 參,移示 述體表 上物塊 應上,度 對間^像 及空I解 ,像一高 訊圖象 資度.對 動像一述 移解上 之低 a. 移上 體示 物表 上而 間塊 空度資 像像動 圖解一移 度低-之 像照一t動 應 對 換 變 以 訊 法來 方用 碼置 解裝 之碼 訊编 資像 動圖 移層 之階 動之 移中 體其 物 , 上置 間裝 空理 度一處 像一像 解、圖 高種 述一 上 · 成以 形加 Μ '以信 像 I,一圖 層 崑,階 的 間 .空 ,圔一像 一之.圖 : j訊.數有 資多備 狀之具 形異為 體相徵 物·度特 有一像其 具|解 ; 受一間碼 接 ' 空編 取 量 減 1了 Λ1 進 號 j 入 輸 ·,* 像號 圖信 述像 上圖 對度 來像 用解一 ,0 . 置 '生 裝産 本以 樣藉 副, 樣 應度 對像 能解 號低 信之 像成· 圖構 度所 像素 解ί圖 低.、數 該定 使指 於由 用,上 I間; 置I空化 裝像塊 化圖以 塊一度加 1- 0 ’ 第解般 低塊 编一塊 1 度 第、像 解 裝 碼 低 之 低 之 ; 象理 對處 BL· 理碼 處编 碼行 编進 為序 作依 成'號 形信 將像 來圖 用度 , 像 置i解 --------_ί 裝— (請先閲讀背面之注意事項再填寫本頁) 訂 經濟部中央標準局員工消費合作社印製 以 置 裝- 化 塊 2 第一 度數 像定 解指 高由 為上 作間 ., 號空化 信_像塊 入圖以 輸度加 像像 , 圔,.解般 述高塊 上應度 對像 能解 使高 而之 ,成 奪 频構 信所 像素 圖圖 該塊 的度 象像 對解; 理高行 處該進 號應序 編對依 為成號 作形信 成照像 '形參圔 於,,度 對理像 將處解 丨碼一低 置__编的 裝之r塊 碼塊一度 編^度像 像解 第 '.解一低 高i之 本紙張尺度適用中國國家標準(CNS ) A4規格(210X 297公釐) A8 B8 C8 D8 申請專利範圍 解 低 照 參 之 照 參 所 對像 與解 置高 位之 間塊 空度 之像 上解 時間高: 理空象, 處像對 碼..圖述 编一.度上 之像之· 述解塊 上低度1 其像。 ,解/上 為低;間 作照一空 塊參,像 度該圖 像應度 Ρ&- 之 中 其 。置 者裝 UU11·'0C 應理 對處 相像 置画 位種 間一 空.. 用 有所| 具8^ 對處C·., 來碼碼 特 其 施 被 之 號 信 像 圖 ..之 ' 2 " 資少一: 狀.至一有 形:之j具 一體一得為 一物獲ί徵 JB 階 渦 加 編解 以 加 號 信 碼 编 層 階 之 化 塊; 個 碼;應 ^ ~ 0 層一生 階I産 之以 化藉 ,τηά 塊j , 被碼 値解 2 -以 玆力 上號 將信 來碼 用编 , 度 置像 裝解 碼低 M一之 1 W 第號 信 度 像 解 低 之 成 構 素 圔 數 定 指 之 ; 中y號 間、;信 空:碼 像f解 圖「度 度一'像 像ϊ解 解〃低 低',之 由塊 (請先閱讀背面之注意事項再填寫本頁) 經濟部中央標準局員工消費合作社印製 第1逆塊化裝置,用於統合對應該各低解像度塊 «——----- - - ·- ...-·. ·· 之低解像度解碼信號,藉以産生對應上述低解像度圖 像_空間之低解像度統合信號; 第2解碼裝置,將上述2個被塊化之階層编碼信號 中之高解像度編碼信號參照所對應之低解像度解碼信 號而加以解碼,藉以産生對應由高解像圔像g間中指 定數之圔素所構成之高解像度塊;^高"解像度解碼信號 ;-----*; ;和 第2逆塊化裝置,用來統合對應該各高解像度塊 之髙解像度解碼信號,藉以産生對應上述高解像度画 像空間之高解像度統合信號; 上述高解像度编碼信號之解碼處理時所參照之參照 ^ -79- .〜」 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐) A8 B8 C8 D8 申請專利範圍 經濟部中央標準局員工消費合作社印製
    置象 位對 間理 空.處 (請先閲讀背面之注意事項再填寫本頁) 裝· 訂 ❿ 本紙張尺度適用中國國家標準(CNS ) A4規格(210X297公釐)
TW087100232A 1997-01-10 1998-01-09 Method and device for processing image, and date recording medium TW395131B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP265997 1997-01-10

Publications (1)

Publication Number Publication Date
TW395131B true TW395131B (en) 2000-06-21

Family

ID=11535475

Family Applications (1)

Application Number Title Priority Date Filing Date
TW087100232A TW395131B (en) 1997-01-10 1998-01-09 Method and device for processing image, and date recording medium

Country Status (6)

Country Link
US (1) US6690724B1 (zh)
EP (1) EP0971545A4 (zh)
KR (1) KR100341079B1 (zh)
CN (1) CN1243635A (zh)
TW (1) TW395131B (zh)
WO (1) WO1998031151A1 (zh)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6259738B1 (en) 1996-10-31 2001-07-10 Kabushiki Kaisha Toshiba Video encoding apparatus and video decoding apparatus
JP4034380B2 (ja) 1996-10-31 2008-01-16 株式会社東芝 画像符号化/復号化方法及び装置
TWI249144B (en) * 2003-02-21 2006-02-11 Via Tech Inc Single level MIP filtering algorithm for anisotropic texturing
US7945102B2 (en) * 2003-03-24 2011-05-17 Sony Corporation Data encoding apparatus, data encoding method, data output apparatus, data output method, signal processing system, signal processing apparatus, signal processing method, data decoding apparatus, and data decoding method
JP3772846B2 (ja) * 2003-03-24 2006-05-10 ソニー株式会社 データ符号化装置およびデータ符号化方法、並びにデータ出力装置およびデータ出力方法
JP2005142654A (ja) * 2003-11-04 2005-06-02 Matsushita Electric Ind Co Ltd 映像送信装置および映像受信装置
RU2007105222A (ru) 2004-07-13 2008-08-20 Конинклейке Филипс Электроникс Н.В. (Nl) Способ пространственного и snr сжатия изображения
CN101204092B (zh) * 2005-02-18 2010-11-03 汤姆森许可贸易公司 从低分辨率图像导出高分辨率图像的编码信息的方法以及实施所述方法的编码和解码设备
WO2006087319A2 (en) 2005-02-18 2006-08-24 Thomson Licensing Method for deriving coding information for high resolution pictures from low resoluton pictures and coding and decoding devices implementing said method
KR100891662B1 (ko) 2005-10-05 2009-04-02 엘지전자 주식회사 비디오 신호 디코딩 및 인코딩 방법
KR20070038396A (ko) 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
JP5112332B2 (ja) * 2006-01-05 2013-01-09 トムソン ライセンシング インターレイヤ動き予測方法
EP1879399A1 (en) * 2006-07-12 2008-01-16 THOMSON Licensing Method for deriving motion data for high resolution pictures from motion data of low resolution pictures and coding and decoding devices implementing said method
US8374247B2 (en) * 2008-01-14 2013-02-12 Broadcom Corporation Method and system for hierarchical motion estimation with multi-layer sub-pixel accuracy and motion vector smoothing
JP5147597B2 (ja) * 2008-08-13 2013-02-20 キヤノン株式会社 画像形成装置、画像形成方法およびプログラム
JP5081113B2 (ja) 2008-09-17 2012-11-21 キヤノン株式会社 画像符号化装置及び画像復号装置、並びにそれらの制御方法
JP5173873B2 (ja) 2008-11-20 2013-04-03 キヤノン株式会社 画像符号化装置及びその制御方法
JP2011244210A (ja) * 2010-05-18 2011-12-01 Sony Corp 画像処理装置および方法
AR083954A1 (es) 2010-11-24 2013-04-10 Panasonic Corp Metodo para calcular vectores de movimiento, metodo para codificar imagenes, metodo para decodificar imagenes y aparato y sistema de calculo de vectores de movimiento
JP2012124653A (ja) * 2010-12-07 2012-06-28 Canon Inc 符号化装置、符号化方法およびプログラム
WO2012096173A1 (ja) * 2011-01-12 2012-07-19 パナソニック株式会社 動画像符号化方法および動画像復号化方法
JP6108309B2 (ja) 2011-02-22 2017-04-05 サン パテント トラスト 動画像符号化方法、動画像符号化装置、動画像復号方法、および、動画像復号装置
KR101878008B1 (ko) 2011-03-03 2018-07-13 선 페이턴트 트러스트 동화상 부호화 방법, 동화상 복호 방법, 동화상 부호화 장치, 동화상 복호 장치 및 동화상 부호화 복호 장치
JP5492139B2 (ja) 2011-04-27 2014-05-14 富士フイルム株式会社 画像圧縮装置、画像伸長装置、方法、及びプログラム
US20120300844A1 (en) * 2011-05-26 2012-11-29 Sharp Laboratories Of America, Inc. Cascaded motion compensation
KR101756841B1 (ko) * 2011-06-07 2017-07-11 삼성전자주식회사 블록 기반 영상의 해상도 변환 방법 및 장치
CN105981051B (zh) * 2014-10-10 2019-02-19 北京旷视科技有限公司 用于图像解析的分层互连多尺度卷积网络
CN106296578B (zh) * 2015-05-29 2020-04-28 阿里巴巴集团控股有限公司 一种图像处理方法及装置
JP7176518B2 (ja) * 2017-07-24 2022-11-22 ソニーグループ株式会社 撮像装置、および画像処理方法、並びにプログラム
CN114792379A (zh) * 2022-03-29 2022-07-26 华中光电技术研究所(中国船舶重工集团公司第七一七研究所) 一种基于lmb的红外全景图像多目标航迹处理方法及系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5418570A (en) 1992-03-03 1995-05-23 Kabushiki Kaisha Toshiba Motion picture coding apparatus
JPH06197334A (ja) * 1992-07-03 1994-07-15 Sony Corp 画像信号符号化方法、画像信号復号化方法、画像信号符号化装置、画像信号復号化装置及び画像信号記録媒体
JP3135692B2 (ja) 1992-08-28 2001-02-19 株式会社日立製作所 階層的動画像信号符号化装置及び方法
NL9201594A (nl) * 1992-09-14 1994-04-05 Nederland Ptt Systeem omvattende ten minste één encoder voor het coderen van een digitaal signaal en ten minste één decoder voor het decoderen van een gecodeerd digitaal signaal, en encoder en decoder voor toepassing in het systeem.
JP2979900B2 (ja) * 1993-05-26 1999-11-15 日本ビクター株式会社 記録媒体
CA2127151A1 (en) * 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
JPH07212761A (ja) 1994-01-17 1995-08-11 Toshiba Corp 階層符号化装置及び階層復号化装置
WO1996008114A1 (en) * 1994-09-02 1996-03-14 David Sarnoff Research Center, Inc. Method and apparatus for global-to-local block motion estimation
US6023301A (en) * 1995-07-14 2000-02-08 Sharp Kabushiki Kaisha Video coding device and video decoding device
JP3210862B2 (ja) * 1996-06-27 2001-09-25 シャープ株式会社 画像符号化装置及び画像復号装置
JP3191922B2 (ja) * 1997-07-10 2001-07-23 松下電器産業株式会社 画像復号化方法

Also Published As

Publication number Publication date
KR20000070003A (ko) 2000-11-25
CN1243635A (zh) 2000-02-02
US6690724B1 (en) 2004-02-10
WO1998031151A1 (en) 1998-07-16
KR100341079B1 (ko) 2002-06-20
EP0971545A4 (en) 2003-08-13
EP0971545A1 (en) 2000-01-12

Similar Documents

Publication Publication Date Title
TW395131B (en) Method and device for processing image, and date recording medium
US11657539B2 (en) Information processing apparatus and information processing method
CN105379274B (zh) 图像编码设备和方法以及图像解码设备和方法
CN105379256B (zh) 信息处理装置和方法
CN102067613B (zh) 用于处理3d视频图像的方法和设备
CN105359512B (zh) 用于交互性的运动约束贴片集合sei消息的扩展
TW201223248A (en) Method for combining images relating to a three-dimensional content
CN100568984C (zh) 图像数据生成装置和再生该数据的图像数据再生装置
TWI277349B (en) Animation image decoding method, animation image decoding program, animation image decoder, animation image encoding method, animation image encoding program, and animation image encoder
CN102045578B (zh) 图像处理设备和图像处理方法
CN109996069A (zh) 视频图像编解码方法及设备
JP2013081170A (ja) Hdr画像をエンコードする方法および装置、hdr画像を再構成する方法および装置ならびに非一時的記憶媒体
WO1998019462A1 (en) Image encoder and image decoder
TW201230768A (en) Encoding method, display device, and decoding method
WO1997050253A1 (en) Picture encoder and picture decoder
EP2908531A1 (en) Device, program, and method for reducing data size of multiple images containing similar information, and data structure expressing multiple images containing similar information
EP3635957B1 (en) Apparatuses and methods for encoding and decoding a video coding block of a multiview video signal
US10593019B2 (en) Method and apparatus for storing, processing and reconstructing full resolution image out of sub band encoded images
US11902505B2 (en) Video decoding device and video decoding method
EP3301922B1 (en) Video encoding device and video encoding method
CN107071301B (zh) 一种多目成像序列的存储方法及读取方法
TW412910B (en) Data structure for image transmission, method of image transmission, image decoding apparatus and data storage medium
US9571811B2 (en) Method and device for multiplexing and demultiplexing composite images relating to a three-dimensional content
EP2908527A1 (en) Device, program, and method for reducing data size of multiple images containing similar information
JPH10257505A (ja) 画像処理方法及び画像処理装置、並びにデータ記録媒体

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent