JPH09130801A - 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体 - Google Patents

画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体

Info

Publication number
JPH09130801A
JPH09130801A JP30350095A JP30350095A JPH09130801A JP H09130801 A JPH09130801 A JP H09130801A JP 30350095 A JP30350095 A JP 30350095A JP 30350095 A JP30350095 A JP 30350095A JP H09130801 A JPH09130801 A JP H09130801A
Authority
JP
Japan
Prior art keywords
image
image data
data
circuit
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP30350095A
Other languages
English (en)
Other versions
JP3855286B2 (ja
Inventor
Teruhiko Suzuki
輝彦 鈴木
Masami Ogata
昌美 緒方
Ien Ton Taku
イエン トン タク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=17921724&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JPH09130801(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP30350095A priority Critical patent/JP3855286B2/ja
Priority to US08/733,928 priority patent/US6125143A/en
Publication of JPH09130801A publication Critical patent/JPH09130801A/ja
Application granted granted Critical
Publication of JP3855286B2 publication Critical patent/JP3855286B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Color Television Systems (AREA)

Abstract

(57)【要約】 【課題】 ブロック歪、モスキートノイズ、リンギング
を低減するとともに、画像の符号化効率を向上させる。 【解決手段】 画像が、図２（Ａ）乃至（Ｃ）にそれぞ
れ示すタイプ１乃至３のいずれかのマクロブロックに分
割され、符号化される。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像符号化装置お
よび画像符号化方法、画像復号化装置および画像復号化
方法、並びに記録媒体に関する。特に、例えば動画像信
号を、光磁気ディスクや磁気テープなどの記録媒体に記
録し、これを再生してディスプレイなどに表示したり、
テレビ会議システム、テレビ電話システム、放送用機
器、マルチメディアデータベース検索システムなど、動
画像信号を伝送路を介して送信側から受信側に伝送し、
受信側において、これを受信し、表示する場合や動画像
信号を編集し記録する場合などに用いて好適な画像符号
化装置および画像符号化方法、画像復号化装置および画
像復号化方法、並びに記録媒体に関する。
【０００２】
【従来の技術】例えば、テレビ会議システム、テレビ電
話システムなどのように、動画像信号（画像信号）を遠
隔地に伝送するシステムにおいては、伝送路を効率良く
利用するため、映像信号のライン相関やフレーム間相関
を利用して、画像信号を圧縮符号化するようになされて
いる。
【０００３】ライン相関を利用すると、画像信号を、例
えばＤＣＴ（離散コサイン変換）処理やウェーブレット
変換処理するなどして圧縮することができる。
【０００４】また、フレーム間相関を利用すると、画像
信号をさらに圧縮して符号化することが可能となる。例
えば図２３に示すように、時刻ｔ１，ｔ２，ｔ３におい
て、フレーム画像ＰＣ１，ＰＣ２，ＰＣ３がそれぞれ発
生しているとき、フレーム画像ＰＣ１とＰＣ２の画像信
号の差を演算して、ＰＣ１２を生成し、また、フレーム
画像ＰＣ２とＰＣ３の差を演算して、ＰＣ２３を生成す
る。通常、時間的に隣接するフレームの画像は、それ程
大きな変化を有していないため、両者の差を演算する
と、その差分信号は小さな値のものとなる。そこで、こ
の差分信号を符号化すれば、符号量を圧縮することがで
きる。
【０００５】しかしながら、差分信号のみを伝送したの
では、元の画像を復元することができない。そこで、各
フレームの画像を、Ｉピクチャ、ＰピクチャまたはＢピ
クチャの３種類のピクチャのいずれかのピクチャとし、
画像信号を圧縮符号化するようにしている。
【０００６】即ち、例えば図２４に示すように、フレー
ムＦ１乃至Ｆ１７までの１７フレームの画像信号をグル
ープオブピクチャ（ＧＯＰ）とし、処理の１単位とす
る。そして、その先頭のフレームＦ１の画像信号はＩピ
クチャとして符号化し、第２番目のフレームＦ２はＢピ
クチャとして、また第３番目のフレームＦ３はＰピクチ
ャとして、それぞれ処理する。以下、第４番目以降のフ
レームＦ４乃至Ｆ１７は、ＢピクチャまたはＰピクチャ
として交互に処理する。
【０００７】Ｉピクチャの画像信号としては、その１フ
レーム分の画像信号をそのまま伝送する。これに対し
て、Ｐピクチャの画像信号としては、基本的には、図２
４（Ａ）に示すように、それより時間的に先行するＩピ
クチャまたはＰピクチャの画像信号からの差分を伝送す
る。さらにＢピクチャの画像信号としては、基本的に
は、図２４（Ｂ）に示すように、時間的に先行するフレ
ームまたは後行するフレームの両方の平均値からの差分
を求め、その差分を符号化する。
【０００８】図２５は、このようにして、動画像信号を
符号化する方法の原理を示している。同図に示すよう
に、最初のフレームＦ１はＩピクチャとして処理される
ため、そのまま伝送データＦ１Ｘとして伝送路に伝送さ
れる（画像内符号化）。これに対して、第２のフレーム
Ｆ２は、Ｂピクチャとして処理されるため、時間的に先
行するフレームＦ１と、時間的に後行するフレームＦ３
の平均値との差分が演算され、その差分が伝送データＦ
２Ｘとして伝送される。
【０００９】但し、このＢピクチャとしての処理は、さ
らに細かく説明すると、４種類存在する。その第１の処
理は、元のフレームＦ２のデータをそのまま伝送データ
Ｆ２Ｘとして伝送するものであり（ＳＰ１）（イントラ
符号化）、Ｉピクチャにおける場合と同様の処理とな
る。第２の処理は、時間的に後のフレームＦ３からの差
分を演算し、その差分（ＳＰ２）を伝送するものである
（後方予測符号化）。第３の処理は、時間的に先行する
フレームＦ１との差分（ＳＰ３）を伝送するものである
（前方予測符号化）。さらに第４の処理は、時間的に先
行するフレームＦ１と後行するフレームＦ３の平均値と
の差分（ＳＰ４）を生成し、これを伝送データＦ２Ｘと
して伝送するものである（両方向予測符号化）。
【００１０】この４つの方法のうち、伝送データが最も
少なくなる方法が採用される。
【００１１】尚、差分データを伝送するとき、差分を演
算する対象となるフレームの画像（予測画像）との間の
動きベクトルｘ１（フレームＦ１とＦ２の間の動きベク
トル）（前方予測の場合）、もしくはｘ２（フレームＦ
３とＦ２の間の動きベクトル）（後方予測の場合）、ま
たはｘ１とｘ２の両方（両方向予測の場合）が、差分デ
ータとともに伝送される。
【００１２】また、ＰピクチャのフレームＦ３は、時間
的に先行するフレームＦ１を予測画像として、このフレ
ームとの差分信号（ＳＰ３）と、動きベクトルｘ３が演
算され、これが伝送データＦ３Ｘとして伝送される（前
方予測符号化）。あるいはまた、元のフレームＦ３のデ
ータがそのまま伝送データＦ３Ｘとして伝送される（Ｓ
Ｐ１）（イントラ符号化）。いずれの方法により伝送さ
れるかは、Ｂピクチャにおける場合と同様に、伝送デー
タがより少なくなる方が選択される。
【００１３】図２６は、上述した原理に基づいて、動画
像信号を符号化して伝送し、これを復号化する装置の構
成例を示している。符号化装置１は、入力された映像信
号を符号化し、伝送路または記録媒体３に伝送するよう
になされている。そして、復号化装置２は、伝送路また
は記録媒体３からの信号を再生し、これを復号して出力
するようになされている。
【００１４】符号化装置１においては、入力された画像
信号が前処理回路１１に入力され、そこで輝度信号と色
信号（この例の場合、色差信号）とに分離され、それぞ
れＡ／Ｄ変換器１２，１３でＡ／Ｄ変換される。Ａ／Ｄ
変換器１２，１３によりＡ／Ｄ変換されてディジタル信
号となった画像信号（画像データ）は、プリフィルタ１
９でフィルタリングされた後、フレームメモリ１４に供
給され、記憶される。フレームメモリ１４は、輝度信号
を輝度信号フレームメモリ１５に、また、色差信号を色
差信号フレームメモリ１６に、それぞれ記憶させる。エ
ンコーダ１７はフレームメモリ１４に記憶された動画像
信号（画像データ）を読み出し、エンコード（符号化）
を行なう。その詳細は図２７を用いて後述する。
【００１５】エンコーダ１７によりエンコードされた信
号は、ビットストリームとして伝送路３を介して伝送さ
れ、または記録媒体３に記録される。
【００１６】伝送路または記録媒体３からのデータは、
復号化装置２のデコーダ３１に供給され、デコードされ
る。デコーダ３１の詳細については、図３１を参照して
後述する。
【００１７】デコーダ３１によりデコードされたデータ
は、フレームメモリ３３に供給される。この時、輝度信
号は、フレームメモリ３３の輝度信号フレームメモリ３
４に供給されて記憶され、色差信号は色差信号フレーム
メモリ３５に供給されて記憶される。輝度信号フレーム
メモリ３４と色差信号フレームメモリ３５より読み出さ
れた輝度信号と色差信号は、ポストフィルタ３９でフィ
ルタリングされた後、Ｄ／Ａ変換器３６と３７によりそ
れぞれＤ／Ａ変換され、後処理回路３８に供給され、合
成される。そして、図示せぬ例えばＣＲＴ（Cathode Ra
y Tube）などのディスプレイに出力され、表示される。
【００１８】次にエンコーダ１７についてＭＰＥＧ（Mo
ving Picture Experts Group）２方式を例に説明する。
これはＩＳＯ−ＩＥＣ／ＪＴＣ１／ＳＣ２９／ＷＧ１１
にて議論され標準案として提案されたものであり、動き
補償予測符号化とＤＣＴ（Discrete Cosine Transfor
m）符号化を組み合わせたハイブリッド方式の規格であ
る。この動画像信号符号化方式の規格の詳細について
は、ＩＳ１３８１８−２に記載されている。
【００１９】図２７は、ＭＰＥＧ２方式に準拠して、動
画像を符号化するエンコーダ１７の構成例を示してい
る。
【００２０】符号化されるべき画像データは、動きベク
トル検出回路５０に入力される。動きベクトル検出回路
５０は、予め設定されている所定のシーケンスに従っ
て、各フレームの画像データを、Ｉピクチャ、Ｐピクチ
ャ、またはＢピクチャとして処理する。シーケンシャル
に入力される各フレームの画像を、Ｉ，Ｐ，Ｂのいずれ
のピクチャとして処理するかは、予め定められている
（例えば、図２４に示したように、フレームＦ１乃至Ｆ
１７により構成されるグループオブピクチャが、Ｉ，
Ｂ，Ｐ，Ｂ，Ｐ，・・・Ｂ，Ｐとして処理される）。
【００２１】Ｉピクチャとして処理されるフレーム（例
えばフレームＦ１）の画像データは、動きベクトル検出
回路５０からフレームメモリ５１の前方原画像部５１ａ
に転送、記憶され、Ｂピクチャとして処理されるフレー
ム（例えばフレームＦ２）の画像データは、原画像部５
１ｂに転送、記憶され、Ｐピクチャとして処理されるフ
レーム（例えばフレームＦ３）の画像データは、後方原
画像部５１ｃに転送、記憶される。
【００２２】また、次のタイミングにおいて、さらにＢ
ピクチャ（フレームＦ４）またはＰピクチャ（フレーム
Ｆ５）として処理すべきフレームの画像が入力されたと
き、それまで後方原画像部５１ｃに記憶されていた最初
のＰピクチャ（フレームＦ３）の画像データが、前方原
画像部５１ａに転送され、次のＢピクチャ（フレームＦ
４）の画像データが、原画像部５１ｂに記憶（上書き）
され、次のＰピクチャ（フレームＦ５）の画像データ
が、後方原画像部５１ｃに記憶（上書き）される。この
ような動作が順次繰り返される。
【００２３】フレームメモリ５１に記憶された各ピクチ
ャの信号は、動きベクトル検出回路５０により、固定の
大きさのマクロブロックで、そこから読み出される。こ
こで、従来のマクロブロックについて説明する。図２８
に示すように、フレームメモリ１４に記憶された画像信
号は、１ライン当りＨドットのラインがＶライン集めら
れたフレームフォーマットのデータとされている（図２
８（Ａ））。この１フレームの信号は、１６ラインを単
位としてＭ個のスライスに区分され（図２８（Ｂ））、
さらに、各スライスは、Ｍ個のマクロブロックに分割さ
れる（図２８（Ｃ））。各マクロブロックは、１６×１
６個の画素（ドット）に対応する輝度信号により構成さ
れ、この輝度信号は、さらに８×８ドットを単位とする
ブロックＹ［１］乃至Ｙ［４］に区分される。そして、
この１６×１６ドットの輝度信号には、８×８ドットの
Ｃｂ信号と、８×８ドットのＣｒ信号が対応される。以
上のようなマクロブロックが、動きベクトル検出回路５
０に入力される。
【００２４】図２７に戻り、フレームメモリ５１から読
み出されたマクロブロックに対しては、予測モード切り
替え回路５２において、フレーム予測モード処理、また
はフィールド予測モード処理が行なわれる。さらにまた
予測判定回路５４の制御の下に、演算部５３において、
画像内予測、前方予測、後方予測、または両方向予測の
演算が行なわれる。これらの処理のうち、いずれの処理
を行なうかは、予測誤差信号（処理の対象とされている
参照画像と、これに対する予測画像との差分）に対応し
て決定される。このため、動きベクトル検出回路５０
は、この判定に用いられる予測誤差信号の絶対値和（自
乗和でもよい）を生成する。
【００２５】ここで、予測モード切り替え回路５２にお
けるフレーム予測モードとフィールド予測モードについ
て説明する。
【００２６】フレーム予測モードが設定された場合にお
いては、予測モード切り替え回路５２は、動きベクトル
検出回路５０より供給される４個の輝度ブロックＹ
［１］乃至Ｙ［４］を、そのまま後段の演算部５３に出
力する。即ち、この場合においては、図２９（Ａ）に示
すように、各輝度ブロックに奇数フィールド（第１フィ
ールド）のラインのデータと、偶数フィールド（第２フ
ィールド）のラインのデータとが混在した状態となって
いる。このフレーム予測モードにおいては、４個の輝度
ブロック（マクロブロック）を単位として予測が行わ
れ、４個の輝度ブロックに対して１個の動きベクトルが
対応される。
【００２７】これに対して、予測モード切り替え回路５
２は、フィールド予測モードにおいては、図２９（Ａ）
に示す構成で動きベクトル検出回路５０より入力される
信号を、図２９（Ｂ）に示すように、４個の輝度ブロッ
クのうち、輝度ブロックＹ［１］とＹ［２］を、例えば
奇数フィールドのラインのドットによりのみ構成させ、
他の２個の輝度ブロックＹ［３］とＹ［４］を、偶数フ
ィールドのラインのデータにより構成させて、演算部５
３に出力する。この場合においては、２個の輝度ブロッ
クＹ［１］とＹ［２］に対して、１個の動きベクトルが
対応され、他の２個の輝度ブロックＹ［３］とＹ［４］
に対して、他の１個の動きベクトルが対応される。
【００２８】動きベクトル検出回路５０は、フレーム予
測モードにおける予測誤差の絶対値和と、フィールド予
測モードにおける予測誤差の絶対値和を、予測モード切
り替え回路５２に出力する。予測モード切り替え回路５
２は、フレーム予測モードとフィールド予測モードにお
ける予測誤差の絶対値和を比較し、その値が小さい予測
モードに対応する処理を施して、データを演算部５３に
出力する。さらに、予測モード切り替え回路５２は、施
した処理に対応するモードを示すフラグ（予測Ｆｌａ
ｇ）を、可変長符号化回路５８および動き補償回路６４
に出力する。
【００２９】但し、予測モードに対応する処理は、実際
には動きベクトル検出回路５０で行われる。即ち、動き
ベクトル検出回路５０は、決定されたモードに対応する
構成の信号を予測モード切り替え回路５２に出力し、予
測モード切り替え回路５２は、その信号を、そのまま後
段の演算部５３に出力する。
【００３０】尚、色差信号は、フレーム予測モードの場
合、図２９（Ａ）に示すように、奇数フィールドのライ
ンのデータと偶数フィールドのラインのデータとが混在
する状態で、演算部５３に供給される。また、フィール
ド予測モードの場合、図２９（Ｂ）に示すように、各色
差ブロックＣｂ，Ｃｒの上半分（４ライン）が、輝度ブ
ロックＹ［１］，Ｙ［２］に対応する奇数フィールドの
色差信号とされ、下半分（４ライン）が、輝度ブロック
Ｙ［３］，Ｙ［４］に対応する偶数フィールドの色差信
号とされる。
【００３１】また、動きベクトル検出回路５０は、次の
ようにして、予測判定回路５４において、画像内予測、
前方予測、後方予測、または両方向予測のいずれの予測
を行なうかを決定するための予測誤差の絶対値和を生成
する。
【００３２】即ち、画像内予測の予測誤差の絶対値和と
して、参照画像のマクロブロックの信号Ａijの和ΣＡij
の絶対値|ΣＡij|と（（i，j）は、マクロブロックを構
成する画素の座標）、マクロブロックの信号Ａijの絶対
値|Ａij|の和Σ|Ａij|の差を求める。また、前方予測の
予測誤差の絶対値和として、参照画像のマクロブロック
の信号Ａijと、予測画像のマクロブロックの信号Ｂijの
差Ａij−Ｂijの絶対値|Ａij−Ｂij|の和Σ|Ａij−Ｂij|
を求める。また、後方予測と両方向予測の予測誤差の絶
対値和も、前方予測における場合と同様に（その予測画
像を前方予測における場合と異なる予測画像に変更し
て）求める。
【００３３】これらの絶対値和（ＭＥ残差の絶対値和）
は、予測判定回路５４に供給される。予測判定回路５４
は、前方予測、後方予測および両方向予測の予測誤差の
絶対値和のうち、最も小さいものを、インター予測の予
測誤差の絶対値和として選択する。さらに、このインタ
ー予測の予測誤差の絶対値和と、画像内予測の予測誤差
の絶対値和とを比較し、その小さい方を選択し、この選
択した絶対値和に対応するモードを予測モードとして選
択する。即ち、画像内予測の予測誤差の絶対値和の方が
小さければ、画像内予測モードが設定される。インター
予測の予測誤差の絶対値和の方が小さければ、前方予
測、後方予測または両方向予測モードのうち、対応する
絶対値和が最も小さかったモードが設定される。
【００３４】このように、動きベクトル検出回路５０
は、参照画像のマクロブロックの信号を、フレームまた
はフィールド予測モードのうち、予測モード切り替え回
路５２により選択されたモードに対応する構成で、予測
モード切り替え回路５２を介して演算部５３に供給する
とともに、４つの予測モードのうち、予測判定回路５４
により選択された予測モードに対応する予測画像と参照
画像の間の動きベクトルを検出し、可変長符号化回路５
８と動き補償回路６４に出力する。上述したように、こ
の動きベクトルとしては、対応する予測誤差の絶対値和
が最小となるものが選択される。
【００３５】予測判定回路５４は、動きベクトル検出回
路５０が前方原画像部５１ａよりＩピクチャの画像デー
タを読み出しているとき、予測モードとして、フレーム
（画像）内予測モード（動き補償を行わないモード）を
設定し、演算部５３のスイッチ５３ｄを接点ａ側に切り
替える。これにより、Ｉピクチャの画像データがＤＣＴ
モード切り替え回路５５に入力される。
【００３６】このＤＣＴモード切り替え回路５５は、図
３０（Ａ）または（Ｂ）に示すように、４個の輝度ブロ
ックのデータを、奇数フィールド（第１フィールド）の
ラインと偶数フィールド（第２フィールド）のラインが
混在する状態（フレームＤＣＴモード）、または、分離
された状態（フィールドＤＣＴモード）、のいずれかの
状態にして、ＤＣＴ回路５６に出力する。
【００３７】即ち、ＤＣＴモード切り替え回路５５は、
奇数フィールドと偶数フィールドのデータを混在してＤ
ＣＴ処理した場合における符号化効率と、分離した状態
においてＤＣＴ処理した場合の符号化効率とを比較し、
符号化効率の良好なモードを選択する。
【００３８】例えば、入力された信号を、図３０（Ａ）
に示すように、奇数フィールドと偶数フィールドのライ
ンが混在する構成とし、上下に隣接する奇数フィールド
のラインの信号と偶数フィールドのラインの信号の差を
演算し、さらにその絶対値の和（または自乗和）を求め
る。また、入力された信号を、図３０（Ｂ）に示すよう
に、奇数フィールドと偶数フィールドのラインが分離し
た構成とし、上下に隣接する奇数フィールドのライン同
士の信号の差と、偶数フィールドのライン同士の信号の
差を演算し、それぞれの絶対値の和（または自乗和）を
求める。さらに、両者（絶対値和）を比較し、小さい値
に対応するＤＣＴモードを設定する。即ち、前者の方が
小さければ、フレームＤＣＴモードを設定し、後者の方
が小さければ、フィールドＤＣＴモードを設定する。
【００３９】そして、選択したＤＣＴモードに対応する
構成のデータをＤＣＴ回路５６に出力するとともに、選
択したＤＣＴモードを示すＤＣＴフラグを、可変長符号
化回路５８とＤＣＴブロック並び替え回路６５に出力す
る。
【００４０】予測モード切り替え回路５２における予測
モード（図２９）と、このＤＣＴモード切り替え回路５
５におけるＤＣＴモード（図３０）を比較して明らかな
ように、輝度ブロックに関しては、両者の各モードにお
けるデータ構造は実質的に同一である。
【００４１】予測モード切り替え回路５２において、フ
レーム予測モード（奇数ラインと偶数ラインが混在する
モード）が選択された場合、ＤＣＴモード切り替え回路
５５においても、フレームＤＣＴモード（奇数ラインと
偶数ラインが混在するモード）が選択される可能性が高
く、また予測モード切り替え回路５２において、フィー
ルド予測モード（奇数フィールドと偶数フィールドのデ
ータが分離されたモード）が選択された場合、ＤＣＴモ
ード切り替え回路５５において、フィールドＤＣＴモー
ド（奇数フィールドと偶数フィールドのデータが分離さ
れたモード）が選択される可能性が高い。
【００４２】しかしながら、必ずしも常にそのようにな
されるわけではなく、予測モード切り替え回路５２にお
いては、予測誤差の絶対値和が小さくなるようにモード
が決定され、ＤＣＴモード切り替え回路５５において
は、符号化効率が良好となるようにモードが決定され
る。
【００４３】ＤＣＴモード切り替え回路５５より出力さ
れたＩピクチャの画像データは、ＤＣＴ回路５６に入力
され、ＤＣＴ（離散コサイン変換）処理され、ＤＣＴ係
数に変換される。このＤＣＴ係数は、量子化回路５７に
入力され、送信バッファ５９のデータ蓄積量（バッファ
蓄積量）に対応した量子化ステップで量子化された後、
可変長符号化回路５８に入力される。
【００４４】可変長符号化回路５８は、量子化回路５７
より供給される量子化ステップ（スケール）に対応し
て、量子化回路５７より供給される画像データ（いまの
場合、Ｉピクチャのデータ）を、例えばハフマン符号な
どの可変長符号に変換し、送信バッファ５９に出力す
る。
【００４５】可変長符号化回路５８にはまた、量子化回
路５７より量子化ステップ（スケール）、予測判定回路
５４より予測モード（画像内予測、前方予測、後方予
測、または両方向予測のいずれが設定されたかを示すモ
ード）、動きベクトル検出回路５０より動きベクトル、
予測モード切り替え回路５２より予測フラグ（フレーム
予測モードまたはフィールド予測モードのいずれが設定
されたかを示すフラグ）、およびＤＣＴモード切り替え
回路５５が出力するＤＣＴフラグ（フレームＤＣＴモー
ドまたはフィールドＤＣＴモードのいずれが設定された
かを示すフラグ）が入力されており、これらも可変長符
号化される。
【００４６】送信バッファ５９は、入力されたデータを
一時蓄積し、蓄積量に対応するデータを量子化回路５７
に出力する。
【００４７】送信バッファ５９は、そのデータ残量が許
容上限値まで増量すると、量子化制御信号（バッファフ
ィードバック）によって量子化回路５７の量子化スケー
ルを大きくすることにより、量子化データのデータ量を
低下させる。また、これとは逆に、データ残量が許容下
限値まで減少すると、送信バッファ５９は、量子化制御
信号によって量子化回路５７の量子化スケールを小さく
することにより、量子化データのデータ量を増大させ
る。このようにして、送信バッファ５９のオーバフロー
またはアンダフローが防止される。
【００４８】そして、送信バッファ５９に蓄積されたデ
ータは、所定のタイミングで読み出され、伝送路に出力
され、例えば記録媒体３に記録される。
【００４９】一方、量子化回路５７より出力されたＩピ
クチャのデータは、逆量子化回路６０に入力され、量子
化回路５７より供給される量子化ステップに対応して逆
量子化される。逆量子化回路６０の出力は、ＩＤＣＴ
（逆ＤＣＴ）回路６１に入力され、逆ＤＣＴ処理された
後、ＤＣＴブロック並び替え回路６５において、ＤＣＴ
モード切り替え回路５５からのＤＣＴフラグに対応し
て、データの並びが元に戻される。そして、演算器６２
を介してフレームメモリ６３の前方予測画像部６３ａに
供給され、記憶される。
【００５０】動きベクトル検出回路５０は、シーケンシ
ャルに入力される各フレームの画像データを、たとえ
ば、Ｉ，Ｂ，Ｐ，Ｂ，Ｐ，Ｂ・・・のピクチャとしてそ
れぞれ処理する場合、最初に入力されたフレームの画像
データをＩピクチャとして処理した後、次に入力された
フレームの画像をＢピクチャとして処理する前に、さら
にその次に入力されたフレームの画像データをＰピクチ
ャとして処理する。
【００５１】即ち、Ｂピクチャは、後方予測を伴うた
め、後方予測画像としてのＰピクチャが先に用意されて
いないと、復号することができない。そこで、動きベク
トル検出回路５０は、Ｉピクチャの処理の次に、後方原
画像部５１ｃに記憶されているＰピクチャの画像データ
の処理を開始する。そして、上述した場合と同様に、マ
クロブロック単位でのフレーム間差分（予測誤差）の絶
対値和が、動きベクトル検出回路５０から予測モード切
り替え回路５２と予測判定回路５４に供給される。予測
モード切り替え回路５２と予測判定回路５４は、このＰ
ピクチャのマクロブロックの予測誤差の絶対値和に対応
して、フレーム／フィールド予測モード、または画像内
予測、前方予測、後方予測、もしくは両方向予測の予測
モードを設定する。
【００５２】演算部５３はフレーム内予測モードが設定
されたとき、スイッチ５３ｄを上述したように接点ａ側
に切り替える。従って、このデータは、Ｉピクチャのデ
ータと同様に、ＤＣＴモード切り替え回路５５、ＤＣＴ
回路５６、量子化回路５７、可変長符号化回路５８、送
信バッファ５９を介して出力される。また、このデータ
は、逆量子化回路６０、ＩＤＣＴ回路６１、ＤＣＴブロ
ック並び替え回路６５、演算器６２を介してフレームメ
モリ６３の後方予測画像部６３ｂに供給され、記憶され
る。
【００５３】前方予測モードの時、スイッチ５３ｄが接
点ｂに切り替えられるとともに、フレームメモリ６３の
前方予測画像部６３ａに記憶されている画像（いまの場
合Ｉピクチャの画像）データが読み出され、動き補償回
路６４により、動きベクトル検出回路５０が出力する動
きベクトルに対応して動き補償される。すなわち、動き
補償回路６４は、予測判定回路５４より前方予測モード
の設定が指令されたとき、前方予測画像部６３ａの読み
出しアドレスを、動きベクトル検出回路５０がいま出力
しているマクロブロックの位置に対応する位置から動き
ベクトルに対応する分だけずらしてデータを読み出し、
予測画像データを生成する。
【００５４】動き補償回路６４より出力された予測画像
データは、演算器５３ａに供給される。演算器５３ａ
は、予測モード切り替え回路５２より供給された参照画
像のマクロブロックのデータから、動き補償回路６４よ
り供給された、このマクロブロックに対応する予測画像
データを減算し、その差分（予測誤差）を出力する。こ
の差分データは、ＤＣＴモード切り替え回路５５、ＤＣ
Ｔ回路５６、量子化回路５７、可変長符号化回路５８、
送信バッファ５９を介して出力される。また、この差分
データは、逆量子化回路６０、ＩＤＣＴ回路６１、ＤＣ
Ｔブロック並び替え回路６５により局所的に復号され、
演算器６２に入力される。
【００５５】この演算器６２にはまた、演算器５３ａに
供給されている予測画像データと同一のデータが供給さ
れている。演算器６２は、ＤＣＴブロック並び替え回路
６５が出力する差分データに、動き補償回路６４が出力
する予測画像データを加算する。これにより、元の（復
号した）Ｐピクチャの画像データが得られる。このＰピ
クチャの画像データは、フレームメモリ６３の後方予測
画像部６３ｂに供給され、記憶される。
【００５６】動きベクトル検出回路５０は、このよう
に、ＩピクチャとＰピクチャのデータが前方予測画像部
６３ａと後方予測画像部６３ｂにそれぞれ記憶された
後、次にＢピクチャの処理を実行する。予測モード切り
替え回路５２と予測判定回路５４は、マクロブロック単
位でのフレーム間差分の絶対値和の大きさに対応して、
フレーム／フィールドモードを設定し、また、予測モー
ドをフレーム内予測モード、前方予測モード、後方予測
モード、または両方向予測モードのいずれかに設定す
る。
【００５７】上述したように、フレーム内予測モードま
たは前方予測モードの時、スイッチ５３ｄは接点ａまた
はｂに切り替えられる。このとき、Ｐピクチャにおける
場合と同様の処理が行われ、データが出力される。
【００５８】これに対して、後方予測モードまたは両方
向予測モードが設定された時、スイッチ５３ｄは、接点
ｃまたはｄにそれぞれ切り替えられる。
【００５９】スイッチ５３ｄが接点ｃに切り替えられる
後方予測モードの時、後方予測画像部６３ｂに記憶され
ている画像（いまの場合、Ｐピクチャの画像）データが
読み出され、動き補償回路６４により、動きベクトル検
出回路５０が出力する動きベクトルに対応して動き補償
される。すなわち、動き補償回路６４は、予測判定回路
５４より後方予測モードの設定が指令されたとき、後方
予測画像部６３ｂの読み出しアドレスを、動きベクトル
検出回路５０がいま出力しているマクロブロックの位置
に対応する位置から動きベクトルに対応する分だけずら
してデータを読み出し、予測画像データを生成する。
【００６０】動き補償回路６４より出力された予測画像
データは、演算器５３ｂに供給される。演算器５３ｂ
は、予測モード切り替え回路５２より供給された参照画
像のマクロブロックのデータから、動き補償回路６４よ
り供給された予測画像データを減算し、その差分を出力
する。この差分データは、ＤＣＴモード切り替え回路５
５、ＤＣＴ回路５６、量子化回路５７、可変長符号化回
路５８、送信バッファ５９を介して出力される。
【００６１】スイッチ５３ｄが接点ｄに切り替えられる
両方向予測モードの時、前方予測画像部６３ａに記憶さ
れている画像（いまの場合、Ｉピクチャの画像）データ
と、後方予測画像部６３ｂに記憶されている画像（いま
の場合、Ｐピクチャの画像）データの両方が読み出さ
れ、動き補償回路６４により、動きベクトル検出回路５
０が出力する動きベクトルに対応して動き補償される。
すなわち、動き補償回路６４は、予測判定回路５４より
両方向予測モードの設定が指令されたとき、前方予測画
像部６３ａと後方予測画像部６３ｂの読み出しアドレス
を、動きベクトル検出回路５０がいま出力しているマク
ロブロックの位置に対応する位置から動きベクトル（こ
の場合の動きベクトルは、前方予測画像用と後方予測画
像用の２つとなる）に対応する分だけずらしてデータを
読み出し、予測画像データを生成する。
【００６２】動き補償回路６４より出力された予測画像
データは、演算器５３ｃに供給される。演算器５３ｃ
は、動きベクトル検出回路５０より供給された参照画像
のマクロブロックのデータから、動き補償回路６４より
供給された予測画像データの平均値を減算し、その差分
を出力する。この差分データは、ＤＣＴモード切り替え
回路５５、ＤＣＴ回路５６、量子化回路５７、可変長符
号化回路５８、送信バッファ５９を介して出力される。
【００６３】Ｂピクチャの画像は、他の画像の予測画像
とされることがないため、フレームメモリ６３には記憶
されない。
【００６４】尚、フレームメモリ６３において、前方予
測画像部６３ａと後方予測画像部６３ｂは、必要に応じ
てバンク切り替えが行われ、所定の参照画像に対して、
一方または他方に記憶されているものを、前方予測画像
あるいは後方予測画像として切り替えて出力することが
できるようになされている。
【００６５】以上においては、輝度ブロックを中心とし
て説明をしたが、色差ブロックについても同様に、図２
９および図３０に示すマクロブロックを単位として処理
される。尚、色差ブロックを処理する場合の動きベクト
ルは、対応する輝度ブロックの動きベクトルを垂直方向
と水平方向に、それぞれ１／２にしたものが用いられ
る。
【００６６】次に、図３１は、図２６のデコーダ３１の
一例の構成を示すブロック図である。伝送路３を介して
伝送され、または記録媒体３に記録された、符号化され
た画像データは、図示せぬ受信回路で受信されたり、再
生装置で再生され、受信バッファ８１に一時記憶された
後、復号回路９０の可変長復号化回路８２に供給され
る。可変長復号化回路８２は、受信バッファ８１より供
給されたデータを可変長復号化し、動きベクトル、予測
モード、および予測フラグを動き補償回路８７に、ま
た、量子化ステップを逆量子化回路８３に、それぞれ出
力するとともに、復号された画像データを逆量子化回路
８３に出力する。さらに、ＤＣＴフラグは、ＤＣＴブロ
ック並び替え回路８８に供給される。
【００６７】逆量子化回路８３は、可変長復号化回路８
２より供給された画像データを、同じく可変長復号化回
路８２より供給された量子化ステップに従って逆量子化
し、ＩＤＣＴ回路８４に出力する。逆量子化回路８３よ
り出力されたデータ（ＤＣＴ係数）は、ＩＤＣＴ回路８
４で、逆ＤＣＴ処理され、さらに、ＤＣＴブロック並び
替え回路８８において、ＤＣＴフラグに基づき、図２７
のＤＣＴブロック並び替え回路６５における場合と同様
の並び替えが行われた後、演算器８５に供給される。
【００６８】ＤＣＴブロック並び替え回路８８より供給
された画像データが、Ｉピクチャのデータである場合、
そのデータは演算器８５より出力され、演算器８５に後
に入力される画像データ（ＰまたはＢピクチャのデー
タ）の予測画像データ生成のために、フレームメモリ８
６の前方予測画像部８６ａに供給されて記憶される。ま
た、このデータは、フレームメモリ３３（図２６）に出
力される。
【００６９】ＤＣＴブロック並び替え回路８８より供給
された画像データが、その１フレーム前の画像データを
予測画像データとするＰピクチャのデータであって、前
方予測モードのデータである場合、フレームメモリ８６
の前方予測画像部８６ａに記憶されている、１フレーム
前の画像データ（Ｉピクチャのデータ）が読み出され、
動き補償回路８７で可変長復号化回路８２より出力され
た動きベクトルに対応する動き補償が施される。そし
て、演算器８５において、ＤＣＴブロック並び替え回路
８８より供給された画像データ（差分のデータ）と加算
され、出力される。この加算されたデータ、即ち、復号
されたＰピクチャのデータは、演算器８５に後に入力さ
れる画像データ（ＢピクチャまたはＰピクチャのデー
タ）の予測画像データ生成のために、フレームメモリ８
６の後方予測画像部８６ｂに供給されて記憶される。
【００７０】Ｐピクチャのデータであっても、画像内予
測モードのデータについては、Ｉピクチャのデータと同
様に、演算器８５で特に処理は行わず、そのまま後方予
測画像部８６ｂに記憶される。
【００７１】このＰピクチャは、次のＢピクチャの次に
表示されるべき画像であるため、この時点では、まだフ
レームメモリ３３へ出力されない（上述したように、Ｂ
ピクチャの後に入力されたＰピクチャが、Ｂピクチャよ
り先に処理され、伝送されている）。
【００７２】ＤＣＴブロック並び替え回路８８より供給
された画像データが、Ｂピクチャのデータである場合、
可変長復号化回路８２より供給された予測モードに対応
して、フレームメモリ８６の前方予測画像部８６ａに記
憶されているＩピクチャの画像データ（前方予測モード
の場合）、後方予測画像部８６ｂに記憶されているＰピ
クチャの画像データ（後方予測モードの場合）、また
は、その両方の画像データ（両方向予測モードの場合）
が読み出され、動き補償回路８７において、可変長復号
化回路８２より出力された動きベクトルに対応する動き
補償が施されて、予測画像が生成される。但し、動き補
償を必要としない場合（画像内予測モードの場合）、予
測画像は生成されない。
【００７３】このようにして、動き補償回路８７で動き
補償が施されたデータは、演算器８５において、ＤＣＴ
ブロック並び替え回路８８の出力と加算される。この加
算出力は、フレームメモリ３３に出力される。
【００７４】但し、この加算出力はＢピクチャのデータ
であり、他の画像の予測画像生成のために利用されるこ
とがないため、フレームメモリ８６には記憶されない。
【００７５】Ｂピクチャの画像が出力された後、後方予
測画像部８６ｂに記憶されているＰピクチャの画像デー
タが読み出され、動き補償回路８７を介して演算器８５
に供給され、そのまま、フレームメモリ３３に出力され
る。
【００７６】尚、このデコーダ３１には、図１９のエン
コーダ１７における予測モード切り替え回路５２に対応
する回路が図示されていないが、この回路に対応する処
理、即ち、奇数フィールドと偶数フィールドのラインの
信号が分離された構成を、元の混在する構成に必要に応
じて戻す処理は、動き補償回路８７が実行する（エンコ
ーダ１７においても同様に、動き補償回路６４が行
う）。
【００７７】また、以上においては、輝度信号の処理に
ついて説明したが、色差信号の処理も同様に行われる。
但し、この場合、動きベクトルは、エンコーダ１７にお
ける場合と同様に、輝度信号用のものを、垂直方向およ
び水平方向に１／２にしたものが用いられる。
【００７８】
【発明が解決しようとする課題】ところで、ＭＰＥＧ２
などの従来の画像信号符号化方式では、ＤＣＴ変換を行
うことで、大きな電力を持つ信号（低周波成分）に多く
のビットを割り当て、小さな電力を持つ信号（高周波成
分）ほど少ないビットを割り当てることにより情報の圧
縮が行われるようになされている。
【００７９】しかしながら、従来においては、固定の大
きさのマクロブロックに分割された画像データをそれぞ
れに対し、ＤＣＴ変換処理が施されるようになされてい
たため、次の２つの問題があった。 （１）ブロック歪み （２）モスキートノイズ
【００８０】（１）のブロック歪みは、符号化ビットレ
ート（量子化に割り当てるビット数）が十分でない場合
に生じ、隣接するマクロブロック境界が視認される現象
である。これは、画像信号を隣接するブロック間におけ
る信号の連続性を考慮せずにブロック分割することに原
因がある。
【００８１】（２）のモスキートノイズはエッジの近傍
に生じる劣化である。これはエッジを含むブロックをＤ
ＣＴ変換して符号化する場合、高周波成分が失われるた
めに生じる折り返し歪みが原因となって生じる。マクロ
ブロックについて、このような折り返し歪みが生じた場
合、そのマクロブロック全体に劣化が生じる。さらに、
この劣化には、時間軸方向の相関がないために、復号画
像が不自然に見える。
【００８２】この劣化の影響は、短いタップ数の基底を
持つ変換処理を行なうことにより緩和できる。これは上
述の折り返し歪みが拡散する範囲を狭くすることに相当
する。しかしながら、短いタップ数の基底の変換を行う
と、その変換により、電力集中の効率が悪くなり符号化
効率劣化する課題があった。そこで、各周波数成分ごと
に基底のタップ数を変化させる方法があるが、ＤＣＴ変
換を用いる場合にタップ数を変化させることは困難であ
った。
【００８３】また、信号電力を集中させるために用いる
変換としてはウェーブレット変換が存在する。ウェーブ
レット変換はフィルタを用いて各周波数成分に分解する
フィルタバンクの１種である（ＤＣＴも１種のフィルタ
バンクと解釈することもできる）。ここで、図３２は、
ウェーブレット変換を用いて画像の符号化／復号化を行
うシステムの構成例を示している。このシステムは、帯
域分割フィルタバンクおよび帯域合成フィルタバンクの
２種類のフィルタバンクから構成され、帯域分割フィル
タバンクは、ディジタルフィルタであるローパスフィル
タおよびハイパスフィルタ、ダウンサンプリング回路か
ら、帯域合成フィルタバンクは、アップサンプリング回
路、ディジタルフィルタであるローパスフィルタおよび
ハイパスフィルタ、並びに合成回路から構成される。
【００８４】帯域分割フィルタバンクでは、ローパスフ
ィルタおよびハイパスフィルタで画像をフィルタリング
し、それらの出力をダウンサンプリング回路で間引くこ
とにより、画像をＭ個の周波数帯域（バンド）に分割す
る。また、帯域合成フィルタバンクでは、各周波数帯域
の画像がアップサンプリング回路で補間され、ローパス
フィルタおよびハイパスフィルタでフィルタリングされ
る。さらに、フィルタリング結果が合成回路で合成され
ることにより、再び元の信号に復元される。この帯域分
割フィルタバンクおよび帯域合成フィルタバンクを用い
て画像信号を符号化／復号化する方式はサブバンド符号
化／復号化と呼ばれる。
【００８５】通常、帯域分割フィルタバンク（帯域合成
フィルタバンクについても同様）は複数個を組合せてツ
リー状に構成される。ウェーブレット変換はこうしたツ
リー状のフィルタバンク実現することができ、上位階層
のフィルタバンクで帯域分割した後の低域成分を次々に
下位階層のフィルタバンクで帯域分割していく手法は、
オクターブ分割と呼ばれる。
【００８６】例えば図３３のように、最上位のフィルタ
バンクで、画像を４つのバンドに帯域分割した場合に、
そのフィルタバンクの出力をレイヤ０と呼ぶことにする
と、同図における場合、レイヤ０には４つのバンドＬ
Ｌ，ＬＨ，ＨＬ，ＨＨが存在する。オクターブ分割によ
れば、レイヤ０の低域成分ＬＬが、フィルタバンクによ
ってさらに４分割され、以下、必要な回数だけ、前回得
られた低域成分が分割されていく。ここで、以下、適
宜、ｎ回目の分割により得られる出力を、レイヤ（ｎ−
１）と呼ぶこととする。
【００８７】こうしたウェーブレット変換などの新しい
変換方式を用いることにより、ＤＣＴ変換では解決でき
ない問題を解決することが出来る可能性がある。しかし
ながら、ウェーブレット変換を用いる場合には、ＤＣＴ
変換の場合とは別な劣化である（３）リンギングが生じ
ることが知られている（ただし、リンギングも本質的に
はモスキートノイズなどと同様の原因（高域成分が失わ
れること）によって生じる）。また、ウェーブレット変
換を時間軸方向にどのように適用するかは依然未解決な
課題として存在する。
【００８８】さらに、ウェーブレット変換により得られ
る、帯域分割されたデータをどのように符号化するのが
効率良いかも未解決な問題である。
【００８９】本発明はこのような状況に鑑みてなされた
ものであり、ブロック歪みやモスキートノイズといった
従来の動画像符号化方式では避けられなかった劣化を緩
和するとともに、符号化効率を改善して、より低ビット
レートでの画像の符号化を行うことができるようにする
ものである。
【００９０】
【課題を解決するための手段】請求項１に記載の画像符
号化装置は、画像データを、その特性に対応した大きさ
の符号化ブロックに分割する分割手段と、画像データ
を、符号化ブロック単位で符号化する符号化手段とを備
えることを特徴とする。
【００９１】請求項１１に記載の画像符号化方法は、画
像データを、その特性に対応した大きさの符号化ブロッ
クに分割し、画像データを、符号化ブロック単位で符号
化することを特徴とする。
【００９２】請求項１３に記載の画像復号化装置は、画
像データを、その特性に対応した大きさの符号化ブロッ
クに分割し、その符号化ブロック単位で符号化した符号
化データを、少なくとも含む伝送データを復号化する画
像復号化装置であって、符号化データを、符号化ブロッ
ク単位で復号化する復号化手段を備えることを特徴とす
る。
【００９３】請求項２１に記載の画像復号化方法は、画
像データを、その特性に対応した大きさの符号化ブロッ
クに分割し、その符号化ブロック単位で符号化した符号
化データを、少なくとも含む伝送データを復号化する画
像復号化方法であって、符号化データを、符号化ブロッ
ク単位で復号化することを特徴とする。
【００９４】請求項２２に記載の記録媒体は、画像デー
タを、その特性に対応した大きさの符号化ブロックに分
割し、その符号化ブロック単位で符号化した符号化デー
タが記録されていることを特徴とする。
【００９５】請求項２６に記載の画像符号化装置は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割する分割手段と、画像データの動きベクトル
を検出する動きベクトル検出手段と、動きベクトルに基
づいて動き補償を行うことにより、動き補償ブロックの
画像データについての予測画像を生成する予測画像生成
手段と、画像データと予測画像との差分を演算すること
により、差分画像を生成する差分画像生成手段と、差分
画像および動きベクトルを符号化する符号化手段とを備
えることを特徴とする。
【００９６】請求項３８に記載の画像符号化方法は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割するとともに、画像データの動きベクトルを
検出し、動きベクトルに基づいて動き補償を行うことに
より、動き補償ブロックの画像データについての予測画
像を生成し、画像データと予測画像との差分を演算する
ことにより、差分画像を生成し、差分画像および動きベ
クトルを符号化することを特徴とする。
【００９７】請求項３９に記載の画像復号化装置は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割するとともに、その画像データの動きベクト
ルを検出し、動きベクトルに基づいて動き補償を行うこ
とにより、動き補償ブロックの画像データについての予
測画像を生成し、画像データと予測画像との差分を演算
することにより、差分画像を生成し、差分画像および動
きベクトルを符号化した符号化データを、少なくとも含
む伝送データを復号する画像復号化装置であって、動き
ベクトルに基づいて動き補償を行うことにより、動き補
償ブロックの画像データについての予測画像を生成する
予測画像生成手段と、予測画像と差分画像とを加算する
ことにより、画像データを復号する復号化手段とを備え
ることを特徴とする。
【００９８】請求項４５に記載の画像復号化方法は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割するとともに、その画像データの動きベクト
ルを検出し、動きベクトルに基づいて動き補償を行うこ
とにより、動き補償ブロックの画像データについての予
測画像を生成し、画像データと予測画像との差分を演算
することにより、差分画像を生成し、差分画像および動
きベクトルを符号化した符号化データを、少なくとも含
む伝送データを復号する画像復号化方法であって、動き
ベクトルに基づいて動き補償を行うことにより、動き補
償ブロックの画像データについての予測画像を生成し、
予測画像と差分画像とを加算することにより、画像デー
タを復号することを特徴とする。
【００９９】請求項４６に記載の記録媒体は、画像デー
タを、その特性に対応した大きさの動き補償ブロックに
分割するとともに、その画像データの動きベクトルを検
出し、動きベクトルに基づいて動き補償を行うことによ
り、動き補償ブロックの画像データについての予測画像
を生成し、画像データと予測画像との差分を演算するこ
とにより、差分画像を生成し、差分画像および動きベク
トルを符号化した符号化データが記録されていることを
特徴とする。
【０１００】請求項１に記載の画像符号化装置において
は、分割手段は、画像データを、その特性に対応した大
きさの符号化ブロックに分割し、符号化手段は、画像デ
ータを、符号化ブロック単位で符号化するようになされ
ている。
【０１０１】請求項１１に記載の画像符号化方法におい
ては、画像データを、その特性に対応した大きさの符号
化ブロックに分割し、画像データを、符号化ブロック単
位で符号化するようになされている。
【０１０２】請求項１３に記載の画像復号化装置におい
ては、伝送データには、画像データを、その特性に対応
した大きさの符号化ブロックに分割し、その符号化ブロ
ック単位で符号化した符号化データが、少なくとも含ま
れており、復号化手段は、符号化データを、符号化ブロ
ック単位で復号化するようになされている。
【０１０３】請求項２１に記載の画像復号化方法におい
ては、伝送データには、画像データを、その特性に対応
した大きさの符号化ブロックに分割し、その符号化ブロ
ック単位で符号化した符号化データが、少なくとも含ま
れており、符号化データを、符号化ブロック単位で復号
化するようになされている。
【０１０４】請求項２２に記載の記録媒体には、画像デ
ータを、その特性に対応した大きさの符号化ブロックに
分割し、その符号化ブロック単位で符号化した符号化デ
ータが記録されている。
【０１０５】請求項２６に記載の画像符号化装置におい
ては、分割手段は、その特性に対応した大きさの動き補
償ブロックに分割し、動きベクトル検出手段は、画像デ
ータの動きベクトルを検出するようになされている。予
測画像生成手段は、動きベクトルに基づいて動き補償を
行うことにより、動き補償ブロックの画像データについ
ての予測画像を生成し、差分画像生成手段は、画像デー
タと予測画像との差分を演算することにより、差分画像
を生成するようになされている。符号化手段は、差分画
像および動きベクトルを符号化するようになされてい
る。
【０１０６】請求項３８に記載の画像符号化方法におい
ては、画像データを、その特性に対応した大きさの動き
補償ブロックに分割するとともに、画像データの動きベ
クトルを検出し、動きベクトルに基づいて動き補償を行
うことにより、動き補償ブロックの画像データについて
の予測画像を生成し、画像データと予測画像との差分を
演算することにより、差分画像を生成し、差分画像およ
び動きベクトルを符号化するようになされている。
【０１０７】請求項３９に記載の画像復号化装置におい
ては、伝送データには、画像データを、その特性に対応
した大きさの動き補償ブロックに分割するとともに、そ
の画像データの動きベクトルを検出し、動きベクトルに
基づいて動き補償を行うことにより、動き補償ブロック
の画像データについての予測画像を生成し、画像データ
と予測画像との差分を演算することにより、差分画像を
生成し、差分画像および動きベクトルを符号化した符号
化データが、少なくとも含まれている。そして、予測画
像生成手段は、動きベクトルに基づいて動き補償を行う
ことにより、動き補償ブロックの画像データについての
予測画像を生成し、復号化手段は、予測画像と差分画像
とを加算することにより、画像データを復号するように
なされている。
【０１０８】請求項４５に記載の画像復号化方法におい
ては、伝送データには、画像データを、その特性に対応
した大きさの動き補償ブロックに分割するとともに、そ
の画像データの動きベクトルを検出し、動きベクトルに
基づいて動き補償を行うことにより、動き補償ブロック
の画像データについての予測画像を生成し、画像データ
と予測画像との差分を演算することにより、差分画像を
生成し、差分画像および動きベクトルを符号化した符号
化データが、少なくとも含まれている。そして、動きベ
クトルに基づいて動き補償を行うことにより、動き補償
ブロックの画像データについての予測画像を生成し、予
測画像と差分画像とを加算することにより、画像データ
を復号するようになされている。
【０１０９】請求項４６に記載の記録媒体には、画像デ
ータを、その特性に対応した大きさの動き補償ブロック
に分割するとともに、その画像データの動きベクトルを
検出し、動きベクトルに基づいて動き補償を行うことに
より、動き補償ブロックの画像データについての予測画
像を生成し、画像データと予測画像との差分を演算する
ことにより、差分画像を生成し、差分画像および動きベ
クトルを符号化した符号化データが記録されている。
【０１１０】
【発明の実施の形態】以下に、本発明の実施例を説明す
るが、その前に、特許請求の範囲に記載の発明の各手段
と以下の実施例との対応関係を明らかにするために、各
手段の後の括弧内に、対応する実施例（但し、一例）を
付加して、本発明の特徴を記述すると、次のようにな
る。
【０１１１】即ち、請求項１に記載の画像符号化装置
は、画像データを、その特性に対応した大きさの符号化
ブロックに分割する分割手段（例えば、図１に示すブロ
ック分割回路１０２など）と、画像データを、符号化ブ
ロック単位で符号化する符号化手段（例えば、図１に示
す量子化回路５７や可変長符号化回路５８など）とを備
えることを特徴とする。
【０１１２】請求項２に記載の画像符号化装置は、画像
データに対し、複数の符号化ブロック単位で、所定の変
換処理を施し、変換係数を出力する変換手段（例えば、
図１に示すウェーブレット変換回路１２１など）をさら
に備え、符号化手段が、変換手段より出力される変換係
数を、符号化ブロック単位で符号化することを特徴とす
る。
【０１１３】請求項５に記載の画像符号化装置は、変換
手段が、画像データをフィルタリングするフィルタ手段
（例えば、図６に示す水平方向ローパスフィルタ６−２
や、水平方向ハイパスフィルタ６−３、垂直方向ローパ
スフィルタ６−６，６−７、垂直方向ハイパスフィルタ
６−８，６−９など）と、フィルタ手段の出力を間引く
間引き手段（例えば、図６に示すダウンサンプリング回
路６−４，６−５，６−１０乃至６−１３など）と、フ
ィルタ手段に、画像データをフィルタリングするための
フィルタ係数を設定する設定手段（例えば、図６に示す
フィルタ係数算出回路６−１など）とを有することを特
徴とする。
【０１１４】請求項６に記載の画像符号化装置は、符号
化手段が、変換係数を量子化し、量子化係数を出力する
量子化手段（例えば、図１に示す量子化回路５７など）
と、量子化手段より出力される量子化係数を可変長符号
化する可変長符号化手段（例えば、図１に示す可変長符
号化回路５８など）とを有することを特徴とする。
【０１１５】請求項１３に記載の画像復号化装置は、画
像データを、その特性に対応した大きさの符号化ブロッ
クに分割し、その符号化ブロック単位で符号化した符号
化データを、少なくとも含む伝送データを復号化する画
像復号化装置であって、符号化データを、符号化ブロッ
ク単位で復号化する復号化手段（例えば、図１２に示す
可変長復号化回路８２や、逆量子化回路８３など）を備
えることを特徴とする。
【０１１６】請求項１４に記載の画像復号化装置は、符
号化データが、画像データに対し、複数の符号化ブロッ
ク単位で、所定の変換処理を施して得られる変換係数
を、符号化ブロック単位で符号化したものであり、復号
化手段が、符号化データを復号化することにより、変換
係数を出力する場合、変換係数に対し、複数の符号化ブ
ロック単位で、変換処理とは逆の逆変換処理を施す逆変
換手段（例えば、図１２に示す逆ウェーブレット変換回
路２０３など）をさらに備えることを特徴とする。
【０１１７】請求項２６に記載の画像符号化装置は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割する分割手段（例えば、図１に示すブロック
分割回路１０２など）と、画像データの動きベクトルを
検出する動きベクトル検出手段（例えば、図１に示す動
きベクトル検出回路５０など）と、動きベクトルに基づ
いて動き補償を行うことにより、動き補償ブロックの画
像データについての予測画像を生成する予測画像生成手
段（例えば、図１に示す動き補償回路６４など）と、画
像データと予測画像との差分を演算することにより、差
分画像を生成する差分画像生成手段（例えば、図１に示
す演算部５３など）と、差分画像および動きベクトルを
符号化する符号化手段（例えば、図１に示す可変長符号
化回路５６など）とを備えることを特徴とする。
【０１１８】請求項３０に記載の画像符号化装置は、差
分画像を符号化するかどうかを決定する決定手段（例え
ば、図１に示す画像内／前方／両方向予測判定回路５４
など）と、符号化ブロックの画像データについての平均
値を算出する平均値算出手段（例えば、図１に示すＤＣ
検出差分回路１００など）とをさらに備え、符号化手段
が、決定手段により差分画像を符号化することが決定さ
れたとき、その差分画像を符号化し、決定手段により差
分画像を符号化しないことが決定されたとき、その差分
画像に対応する画像データについての平均値と、その画
像データとの差分値を符号化することを特徴とする。
【０１１９】請求項３４に記載の画像符号化装置は、差
分画像に対し、所定の変換処理を施し、変換係数を出力
する変換手段（例えば、図１に示すウェーブレット変換
回路１２１など）をさらに備え、符号化手段が、変換係
数を符号化することを特徴とする。
【０１２０】請求項３９に記載の画像復号化装置は、画
像データを、その特性に対応した大きさの動き補償ブロ
ックに分割するとともに、その画像データの動きベクト
ルを検出し、動きベクトルに基づいて動き補償を行うこ
とにより、動き補償ブロックの画像データについての予
測画像を生成し、画像データと予測画像との差分を演算
することにより、差分画像を生成し、差分画像および動
きベクトルを符号化した符号化データを、少なくとも含
む伝送データを復号する画像復号化装置であって、動き
ベクトルに基づいて動き補償を行うことにより、動き補
償ブロックの画像データについての予測画像を生成する
予測画像生成手段（例えば、図１２に示す動き補償回路
８７など）と、予測画像と差分画像とを加算することに
より、画像データを復号する復号化手段（例えば、図１
２に示す演算器８５など）とを備えることを特徴とす
る。
【０１２１】請求項４１に記載の画像復号化装置は、伝
送データが、符号化ブロックの画像データについての平
均値と、その画像データとの差分値、および平均値をさ
らに含んでおり、差分値と平均値とを加算する加算手段
（例えば、図１２に示す演算器８５など）をさらに備え
ることを特徴とする。
【０１２２】請求項４２に記載の画像復号化装置は、差
分画像には、所定の変換処理が施されている場合、符号
化データに対し、変換処理とは逆の逆変換処理を施し、
差分画像を出力する逆変換手段（例えば、図１２に示す
逆ウェーブレット変換回路２０３など）をさらに備える
ことを特徴とする。
【０１２３】なお、勿論この記載は、各手段を上記した
ものに限定することを意味するものではない。
【０１２４】図１は、本発明を適用したエンコーダの一
実施例の構成を示している。なお、図中、図２７におけ
る場合と基本的構成が同様のものについては同一の符号
を付してあり、以下では、その説明は、適宜省略する。
【０１２５】符号化されるべき画像データは、例えば、
図２７における場合と同様に、図２４で説明したような
シーケンスで動きベクトル検出回路５０に入力される。
そして、動きベクトル検出回路５０に入力された画像デ
ータは、例えば、やはり図２７における場合と同様にフ
レームメモリ５１に転送されて記憶される。
【０１２６】フレームメモリ５１に記憶された各ピクチ
ャの信号は、そこから読み出され、予測判定回路５４の
制御の下に、演算部５３において、画像内予測、前方予
測、後方予測、または両方向予測の演算が行なわれる。
これらの処理のうち、いずれの処理を行なうかは、予測
誤差信号（処理の対象とされている参照画像と、これに
対する予測画像との差分）に対応して決定される。この
ため、動きベクトル検出回路５０は、この判定に用いら
れる予測誤差信号の絶対値和（自乗和でもよい）を生成
する。
【０１２７】また符号化される画像データは、ブロック
分割回路１０２にも入力される。ブロック分割回路１０
２は入力画像信号をその特性（性質）に応じた大きさの
マクロブロックに分割する。前述したＭＰＥＧ２方式に
おいては（ＭＰＥＧ１方式においても同様）、マクロブ
ロックは１６画素×１６画素の固定の大きさであるが、
本実施例では、マクロブロック（符号化ブロック）の大
きさは可変とされている。また動き補償の単位（動き補
償ブロック）も同様に可変とされている。
【０１２８】即ち、本実施例では、例えば以下の３タイ
プに、マクロブロックおよび動き補償の単位の大きさが
設定されるようになされている。 タイプ１：マクロブロックの大きさ・・・３２画素×３
２画素 動き補償の単位・・・３２画素×３２画素 タイプ２：マクロブロックの大きさ・・・１６画素×１
６画素 動き補償の単位・・・１６画素×１６画素 タイプ３：マクロブロックの大きさ・・・１６画素×１
６画素 動き補償の単位・・・８画素×８画素
【０１２９】なお、タイプ１およびタイプ２のマクロブ
ロックでは動きベクトルは１組（ｘ方向とｙ方向の１
組）であるのに対してタイプ３のマクロブロックでは４
組の動きベクトルが存在する。
【０１３０】ここで、図２を参照して、上述の３タイプ
のマクロブロック（動き補償の単位）の構成を説明す
る。マクロブロックはいずれのタイプの場合においても
４つの輝度ブロックＹ［１］乃至Ｙ［４］および２個の
色差信号のブロックＣｂ［５］、Ｃr［６］から構成さ
れる。タイプ１の場合、各輝度ブロックは１６画素×１
６画素の大きさであり、色差信号のブロックも同様に１
６画素×１６画素の大きさである。そして、この場合、
動き補償は４個の輝度ブロックをまとめて１つの単位と
して行なわれる。即ち、４個の輝度ブロックに対して１
個（１組）の動きベクトルが対応される。色差信号につ
いても同じ動きベクトルが用いられる。
【０１３１】タイプ２のマクロブロックの場合、４個の
輝度ブロックは、それぞれ８画素×８画素の大きさであ
り、色差信号のブロックも同様に８画素×８画素の大き
さである。そして、この場合、動き補償は４個の輝度ブ
ロックをまとめて１つの単位として行なわれる。即ち、
４個の輝度ブロックに対して１個の動きベクトルが対応
される。色差信号についても同じ動きベクトルが用いら
れる。
【０１３２】タイプ３のマクロブロックの場合、各輝度
ブロックは８画素×８画素の大きさであり、色差信号の
ブロックも同様に８画素×８画素の大きさである。動き
補償は各輝度ブロックをそれぞれ１単位として行なわれ
る。即ち、４個の輝度ブロック各々に対して１個の動き
ベクトルが対応され、従って、１つのマクロブロックに
は合計４個の動きベクトルが対応する。色差信号は８画
素×８画素のブロックを４つの４画素×４画素のサブブ
ロックに分割し、（Ｃｂ［５−１］乃至Ｃｂ［５−
４］、Ｃr［６−１］乃至Ｃr［６−４］）それぞれのサ
ブブロックに対し、対応する輝度ブロックの動きベクト
ルが用いられる。例えばＣｂ［５−１］およびＣｒ［６
−１］に対してはＹ［１］の動きベクトルが用いられ
る。
【０１３３】なお、本実施例では、上記３タイプのみを
用いて説明するが、マクロブロックの大きさ、動き補償
の単位は任意の値をとり得る。
【０１３４】ブロック分割回路１０２は、入力画像信号
の性質に応じて入力画像信号を上記３つのタイプのいず
れかマクロブロックに分割する。ここで、ブロック分割
回路１０２におけるブロック分割方法について説明す
る。本実施例では、例えば、符号化するフレームがフレ
ーム内符号化フレーム（Ｉピクチャ）の場合とそれ以外
のフレーム間符号化フレーム（Ｐ，Ｂピクチャ）の場合
とで、異なる分割方法を用いる。
【０１３５】まずＩピクチャの場合について、図３のフ
ローチャートを参照して説明する。Ｉピクチャではフレ
ーム内符号化を行なうため入力フレームそのものの性質
を用いて分割を行なう。またＩピクチャではタイプ１ま
たはタイプ２の２通りのみとり得る。これは、Ｉピクチ
ャの場合、動き補償は行われないため、動き補償の単位
は処理に無関係となることから、タイプ２と３とは同一
の構成として扱われることとなるからである。
【０１３６】まず入力フレーム全体を、例えば、１６画
素×１６画素の固定サイズのブロック（以下、適宜、固
定ブロックという）に分割し（ステップＳ１）、各１６
画素×１６画素ブロックについて、画像の性質を表す物
理量としての、例えばその分散を計算する（ステップＳ
２）。
【０１３７】そして、注目固定ブロックと、それに隣接
する３つの固定ブロック（例えば、注目固定ブロックの
右、下、および右下に隣接する固定ブロックなど）の４
つの分散の和を求め（ステップＳ３）、その和が所定の
閾値以下である場合、注目固定ブロックを含む、その４
つの固定ブロックを統合し、１つの３２画素×３２画素
のマクロブロック（タイプ１のマクロブロック）とする
（ステップＳ４）。この統合処理（ステップＳ３および
Ｓ４）は、フレーム中の全ての固定ブロックについて例
えば、いわゆるラインスキャン順、即ち、フレームの左
上から右下に向かって順時行なっていく。但し、すでに
統合された固定ブロックは無視して行う。さらに、統合
しようとする固定ブロックが、既に他の固定ブロックと
統合されている場合には、統合処理は行わないようにす
る。そして、フレーム中の全ての固定ブロックについて
上記の統合処理が終った後に残っている固定ブロックは
１６画素×１６画素のマクロブロック（タイプ２のマク
ロブロック）とする。
【０１３８】次にフレーム間符号化フレーム、すなわ
ち、ＰピクチャまたはＢピクチャの場合についてブロッ
ク分割方法について、図４のフローチャートを参照して
説明する。フレーム間符号化フレームではフレーム間差
分信号が符号化される。従ってブロック分割もこのフレ
ーム間差分信号の性質に基づいて行なう。なお、フレー
ム間符号化フレームの場合、上記タイプ１、２、３のい
ずれのマクロブロックにも分割され得る。
【０１３９】まず、入力フレーム全体を３２画素×３２
画素の固定サイズのブロック（これも、以下適宜、固定
ブロックという）に分割する（ステップＳ１４）。そし
て、この固定ブロックを４等分した４つの８画素×８画
素のブロックについて動きベクトルを検出し、その予測
誤差（ＭＥ残差）の絶対値和を計算する（ステップＳ１
５）。
【０１４０】同時に、入力フレーム全体を１６画素×１
６画素の固定ブロックに分割し（ステップＳ１１）、そ
れぞれについて動きベクトルを検出し、さらに、そのＭ
Ｅ残差の絶対値和を計算する（ステップＳ１２）。
【０１４１】そして、注目固定ブロックと、それに隣接
する３つの１６画素×１６画素の固定ブロックのＭＥ残
差の絶対値和の合計を求め（ステップＳ１３）、その合
計値が、対応する３２画素×３２画素ブロックのＭＥ残
差の絶対値和よりも大きい場合、４つの１６画素×１６
画素ブロックを統合し１つの３２画素×３２画素のマク
ロブロック（タイプ１のマクロブロック）とする（ステ
ップＳ１６）。この統合処理（ステップＳ１６）は、例
えばＩピクチャの場合と同様に、ラインスキャン順に順
時行う。そして、１フレームの全ての１６画素×１６画
素の固定ブロックについてステップＳ１３の統合処理が
終了した後に残っている１６画素×１６画素の固定ブロ
ックは、大きさが１６画素×１６画素の１つのマクロブ
ロックとする。
【０１４２】フレーム間符号化フレームの場合、大きさ
が１６画素×１６画素のマクロブロックは、図２に示し
たタイプ２と３の２種類存在する。そこで、次に各１６
画素×１６画素マクロブロックがタイプ２またはタイプ
３のいずれのマクロブロックであるか決定する。
【０１４３】まず１６画素×１６画素のマクロブロック
を４つの８画素×８画素のブロックに分割する（ステッ
プＳ１７）。各８画素×８画素のブロックそれぞれにつ
いて動きベクトルを検出し、そのＭＥ残差の絶対値和を
計算する（ステップＳ１８）。
【０１４４】そして、４つの８画素×８画素のブロック
のＭＥ残差の和の合計が、それに対応する１６画素×１
６画素のマクロブロックのＭＥ残差の和より小さい場
合、このマクロブロックをタイプ３のマクロブロックと
する（ステップＳ１９）。従って、この場合動き補償の
単位の大きさは８画素×８画素となる。それ以外の場
合、そのマクロブロックはタイプ２のマクロブロックと
する。
【０１４５】なお、図３および図４におけるブロック分
割および動きベクトル検出は、通常は輝度信号のみを用
いて行われるが、さらに色差信号も用いて行うようにし
ても良い。
【０１４６】ブロック分割回路１０２は、例えば上記の
ように符号化するフレームを３つのタイプのうちのいず
れかのマクロブロックに分割する。この分割により、符
号化するフレームの全ての画素はいずれかのマクロブロ
ックに必ず含まれ、また、ある画素が、２つ以上のマク
ロブロックに重複して含まれることはない。
【０１４７】図１に戻り、マクロブロックアドレス発生
回路１０６は符号化するマクロブロックのマクロブロッ
クアドレスmb_addressを発生する。本実施例では、マク
ロブロックアドレスは、例えば、フレームの最も左上の
マクロブロックが１とされ、以下、符号化される順番に
（即ち、例えばラインスキャン順に）１づつ増加する連
続する番号とされている。
【０１４８】ここで、マクロブロックアドレスの割り当
て方法（各マクロブロックの符号化順の決定方法）につ
いて図５を用いて説明する。
【０１４９】フレームが、例えば図５のようにマクロブ
ロックに分割されているものとする。ただし、図５にお
いてはフレームの上部のみを図示してある。フレームの
最も左上のマクロブロックは必ず最初に符号化され、そ
のマクロブロックアドレスは１とされる。つぎにフレー
ムを左から右にスキャンしていく。このとき最初に検出
される、まだ符号化されていないマクロブロックが次に
符号化するマクロブロックであり、前回検出されたマク
ロブロックのアドレスに１を加算したものが、今回検出
されたマクロブロックのマクロブロックアドレスとな
る。以下、同様にして全てのマクロブロックについて、
マクロブロックアドレスが決定される。図５ではマクロ
ブロックアドレスが２６まで示されている。
【０１５０】マクロブロックアドレスmb_addressはアド
レス発生回路１０３、マクロブロックサイズ発生回路１
０４、動き補償モード発生回路１０５、および可変長符
号化回路５８に出力される。
【０１５１】マクロブロックサイズ発生回路１０４はブ
ロック分割回路１０２によって決定されたマクロブロッ
クのタイプに応じて符号化するマクロブロックの大きさ
を示すマクロブロックサイズmb_sizeを発生する。タイ
プ１のマクロブロックの場合、mb_sizeは３２であり、
タイプ２またはタイプ３のマクロブロックの場合、mb_s
izeは１６となる。マクロブロックサイズ発生回路１０
４はマクロブロックアドレスmb_addressそれぞれについ
て、上記マクロブロックの大きさが１６または３２のい
ずれかであるかを示す信号mb_sizeを発生し、動きベク
トル検出回路５０、予測モード判定回路５４、演算部５
３、動き補償回路６４、量子化スケール発生回路１０
１、および可変長符号化回路５８に出力する。
【０１５２】動き補償モード発生回路１０５はブロック
分割回路１０２によって決定されたマクロブロックのタ
イプに応じて符号化するマクロブロックの動き補償の単
位となる大きさを示す動き補償モードを発生する。な
お、本実施例の場合、符号化するマクロブロックに対応
する動きベクトルの組数は、そのマクロブロックを構成
する動き補償の単位の数に一致する。即ち、タイプ１お
よび２のマクロブロックの場合、動きベクトルは水平、
垂直方向に１本ずつの１組である。この場合の動き補償
モードは、モード１とされる。また、タイプ３のマクロ
ブロックの場合、動きベクトルは４組となる。この場
合、動き補償モードは、モード２とされる。動き補償モ
ード発生回路１０５はマクロブロックアドレスmb_addre
ssそれぞれについて上記のいずれのモードであるかを示
す信号mc_modeを発生する。mc_modeは動きベクトル検出
回路５０、予測判定回路５４、演算部５３、動き補償回
路６４および可変長符号化回路５８に出力される。
【０１５３】アドレス発生回路１０３は、符号化するマ
クロブロックのデータをフレームメモリ５１から読み出
すために、ブロック分割回路１０２によって決定された
マクロブロックのタイプおよびマクロブロックアドレス
mb_addressに対応して、読み出しアドレスを発生し、フ
レームメモリ５１および動きベクトル検出回路５０に出
力する。
【０１５４】動きベクトル検出回路５０は、符号化する
マクロブロックについての動きベクトルを、マクロブロ
ックサイズmb_sizeおよび動き補償モードmc_modeに従っ
て検出する。動きベクトル検出回路はまた、アドレス発
生回路１０３からの読み出しアドレスに従って符号化す
るマクロブロックのデータをフレームメモリ５１から読
み出し、演算部５３に出力する。
【０１５５】また、動きベクトル検出回路５０は、予測
判定回路５４において、画像内予測、前方予測、後方予
測、または両方向予測のいずれの予測を行なうかを決定
するための予測誤差（ＭＥ残差）の絶対値和を、図２７
における場合と同様にして生成し、予測判定回路５４に
出力する。
【０１５６】予測判定回路５４は、やはり、図２７にお
ける場合と同様にして、予測モードを設定する。
【０１５７】このように、動きベクトル検出回路５０
は、参照画像のマクロブロック（符号化するマクロブロ
ック）の信号を、演算部５３に供給するとともに、４つ
の予測モードのうち、予測判定回路５４により選択され
た予測モードに対応する予測画像と参照画像の間の動き
ベクトルを検出し、可変長符号化回路５８と動き補償回
路６４に出力する。なお、演算部５３に供給する画像信
号は、タイプ１乃至３のうちのいずれかのマクロブロッ
ク単位である。
【０１５８】予測判定回路５４は、動きベクトル検出回
路５０が前方原画像部５１ａよりＩピクチャの画像デー
タを読み出しているとき、予測モードとして、フレーム
（画像）内予測モード（動き補償を行わないモード）を
設定し、演算部５３のスイッチ５３ｄを接点ａ側に切り
替える。これにより、Ｉピクチャの画像データは、ＤＣ
差分検出回路１００、接点ａ、およびメモリ１０７を介
してウェーブレット変換回路１２１に出力される。
【０１５９】演算部５３より出力されたＩピクチャの画
像データは、ウェーブレット変換回路１２１においてウ
ェーブレット変換処理され、オクターブ分割され、各レ
イヤ、バンドのウェーブレット係数に変換される。この
ウェーブレット係数は、量子化回路５７に入力され、量
子化スケール発生回路１０１によって決定された量子化
ステップとあらかじめ設定された各レイヤ、バンドに対
する重み係数を用いて量子化された後、可変長符号化回
路５８に出力される。
【０１６０】ここで、図６を用いてウェーブレット変換
回路１２１について説明する。ウェーブレット変換回路
１２１では、複数のマクロブロックに対し、ウェーブレ
ット変換処理が施されるようになされている。
【０１６１】即ち、本実施例では、ウェーブレット変換
は例えば１フレームを構成するマクロブロック全体に対
して行なわれるようになされている。このため演算部５
３から出力されたマクロブロックは、順次メモリ１０７
に蓄えられ、そこに１フレーム分のマクロブロックが記
憶されると、その１フレーム分の画像データが、ウェー
ブレット変換回路１２１に供給されるようになされてい
る。
【０１６２】ウェーブレット変換回路１２１では、入力
画像信号は、まず水平方向ローパスフィルタ６−２およ
び水平方向ハイパスフィルタ６−３に入力される。な
お、フィルタ６−２および６−３のフィルタ係数はフィ
ルタ係数算出回路６−１から供給され、あらかじめ設定
されている（後述する他のフィルタについても同様）。
フィルタ６−２または６−３では、画像の水平方向につ
いての低域または広域成分が取り出され（フィルタリン
グされ）、その出力はダウンサンプリング回路６−４ま
たは６−５によって水平方向に１／２に間引かれる。ダ
ウンサンプリング回路６−４および６−５の出力の時点
で画像は、水平方向に２つのバンドに分割される。以
下、適宜、ローパスフィルタ、ハイパスフィルタ、およ
びそれらの出力を間引く２つのダウンサンプル回路の組
合せを帯域分割フィルタバンクという。
【０１６３】ダウンサンプリング回路６−４および６−
５の出力はそれぞれ同様に垂直方向に帯域分割を行う帯
域分割フィルタバンクに入力され処理される。即ち、ダ
ウンサンプリング回路６−４の出力は垂直方向ローパス
フィルタ６−６および垂直方向ハイパスフィルタ６−７
に入力されてフィルタリングされる。フィルタ６−６と
６−７の出力はダウンサンプリング回路６−１０と６−
１１に入力され、垂直方向に１／２に間引かれる。これ
により、ダウンサンプリング回路６−４の出力は、垂直
方向に帯域分割される。ダウンサンプリング回路６−５
の出力も、フィルタ６−８，６−９、ダウンサンプリン
グ回路６−１２，６−１３で構成される帯域分割フィル
タバンクに入力され、同様に処理されることで垂直方向
に帯域分割される。この２つの帯域分割フィルタバンク
（垂直方向、帯域分割フィルタバンク）の出力の時点
（レイヤ０）で、入力画像は４つのバンド（ＬＬ、Ｌ
Ｈ、ＨＬ、ＨＨ）に分割される。この４つのバンドはレ
イヤ０のバンドということになる。
【０１６４】ここで、以下、適宜、以上の３つの帯域分
割フィルタバンクの組合せを４分割フィルタバンクとい
う。
【０１６５】ダウンサンプリング回路６−１０の出力
（ＬＬ）は後段の４分割帯域分割フィルタバンクに入力
され、上述のようにして４つのバンドに分割される。即
ち、この時点（レイヤ１）で、ＬＬバンドは４つのバン
ド（ＬＬＬＬ、ＬＬＬＨ、ＬＬＨＬ、ＬＬＨＨ）に分割
される。従って、入力画像は合計７つのバンドに分割さ
れたことになる。
【０１６６】２つの４分割フィルタバンクにより得られ
た信号のうち、最も低域の成分（ダウンサンプリング回
路６−２２の出力（ＬＬＬＬ））は、さらに後段の４分
割帯域分割フィルタバンクに入力され、やはり４つのバ
ンドに分割される。この時（レイヤ２）でＬＬＬＬバン
ドは、４つのバンド（ＬＬＬＬＬＬ、ＬＬＬＬＬＨ、Ｌ
ＬＬＬＨＬ、ＬＬＬＬＨＨ）に分割されるので、入力画
像は合計１０個のバンドに分割されたことになる。
【０１６７】即ち、以上のウェーブレット変換の結果、
画像は図７に示すように帯域分割される。
【０１６８】なお、図６の実施例では４分割帯域分割フ
ィルタバンクを３個用いて、画像を、１０バンドに分割
するウェーブレット変換回路１２１を示したが、４分割
帯域分割フィルタバンクを設ける数は特に限定されるも
のではない。
【０１６９】また、ウェーブレット変換回路１２１はロ
ーパスフィルタおよびハイパスフィルタを多数用いて構
成されるが、それぞれのフィルタ係数は必ずしも同じで
なくて良い。さらに、ウェーブレット変換回路１２１で
用いるフィルタ係数は、フィルタ係数算出回路６−１で
求められるが、このフィルタ係数が決まれば逆ウェーブ
レット変換で用いるフィルタ係数（以下、適宜、逆フィ
ルタ係数という）も一意に決定される。そこで、フィル
タ係数算出回路６−１では、フィルタ係数とともに、逆
フィルタ係数も求められるようになされている。逆ウェ
ーブレット変換で用いられる逆フィルタ係数は逆ウェー
ブレット変換回路１２２、および可変長符号化回路５８
に出力される。また、４分割帯域分割フィルタバンクの
個数（レイヤの数）も、ウェーブレット変換回路１２１
から、逆ウェーブレット変換回路６１、および可変長符
号化回路５８に出力される。
【０１７０】符号化、即ち、ここでは、量子化および可
変長符号化はマクロブロック単位で行なわれるため、１
フレームの画像に対するウェーブレット変換を行った
後、マクロブロックを再構成する必要がある。この再構
成処理はマクロブロック構成回路１０９で行なわれる。
マクロブロック構成回路１０９ではマクロブロックアド
レスmb_address、マクロブロックサイズmb_sizeを用い
てウェーブレット変換回路１２１の出力からマクロブロ
ックを、ラインスキャン順（従って、アドレスmb_addre
ssの昇順）に、再構成し、量子化回路５７に出力する。
【０１７１】ここで、ウェーブレット変換後のマクロブ
ロックの構造を図８に示す。図８（Ａ）は輝度信号のウ
ェーブレット変換結果を示し、図８（Ｂ）は色差信号の
ウェーブレット変換結果を示している。また図８ではマ
クロブロックの大きさが１６画素×１６画素の場合（従
って、タイプ２または３の場合）を示している。３２画
素×３２画素ブロックの場合（タイプ１の場合）も同様
である。各マクロブロックのデータは各レイヤ、バンド
で対応する位置のウェーブレット変換係数から構成され
る。レイヤｎで各マクロブロックに対応する変換係数の
大きさはマクロブロックサイズmb_sizeを用いて、mb_si
ze/2(n+1)で与えられる。例えばマクロブロックサイズ
が１６である場合、レイヤ０での各バンドで対応するデ
ータは、輝度信号については、対応する位置の８×８個
のウェーブレット変換係数となる。またこの時マクロブ
ロック中の４つの輝度ブロックはそれぞれ４×４個のウ
ェーブレット変換係数となる。
【０１７２】色差信号についても同様である。このよう
にマクロブロックは１０個の各バンドの対応する変換係
数（ウェーブレット変換係数）から構成されるようにな
る。
【０１７３】量子化スケール発生回路１０１は送信バッ
ファ５９のデータ蓄積量（バッファ蓄積量）および原画
像の性質に対応して量子化ステップを決定し、量子化ス
ケールを量子化回路５７、逆量子化回路６０および可変
長符号化回路５８に出力する。量子化スケールはマクロ
ブロックサイズに基づき、マクロブロック単位で設定さ
れる。
【０１７４】量子化回路５７ではウェーブレット変換さ
れた信号が、量子化スケール発生回路１０１で決定され
た量子化スケールを用いて量子化される。なお、量子化
スケールには、必要に応じて、重み係数が乗算される。
【０１７５】ここで、重み係数について説明する。本実
施例ではウェーブレット変換により、画像が１０個のバ
ンドに帯域分割される。一般的な画像信号について、こ
のような帯域分割を行なうと低周波成分に電力が集中す
る。またこの低周波成分は視覚的にも重要であり、低周
波成分の劣化は復号画像の画質に悪影響を与える。これ
に対して高周波成分の電力はあまり集中せず、さらに、
高周波成分を落しても視覚的にはあまり目立たない。
【０１７６】このようなことから低周波成分により多く
のビットを割り当てることが視覚的に有効である。そこ
で、ある量子化スケールに対して各レイヤ、バンドに対
応して重み係数ｗをかけて量子化する。各レイヤ、バン
ドに対する重み係数の例を図９に示す。重み係数は、あ
らかじめ量子化回路５７に供給されるようになされてお
り、さらに量子化回路５７を介して、逆量子化回路６０
および可変長符号化回路５８にも供給されるようになさ
れている。但し、重み係数は符号化の途中で変更するよ
うにすることも可能である。なお、この場合、変更した
重み係数は、逆量子化回路６０および可変長符号化回路
５８に供給するようにする必要がある。
【０１７７】量子化回路５７では、次式で示される演算
に対応する量子化処理が行われることにより、量子化係
数Ｓが出力される。
【０１７８】Ｑ＝（Ｓ×ｗ）//ｑ 但し、Ｓはウェーブレット変換係数、Ｗは重み係数、ｑ
は量子化スケールを表す。また、Ａ／／Ｂは、Ａ／Ｂの
少数点以下を四捨五入する演算を意味する。
【０１７９】可変長符号化回路５８は、量子化回路５７
より供給される量子化ステップ（スケール）に対応し
て、量子化回路５７より供給される画像データ（いまの
場合、Ｉピクチャのデータ）を、必要に応じてテーブル
を参照しながら、例えばハフマン符号化や算術符号化な
どすることにより可変長符号に変換し、送信バッファ５
９に出力する。
【０１８０】可変長符号化回路５８にはまた、量子化回
路５７より量子化ステップ（スケール）および重み係
数、予測判定回路５４より予測モード（画像内予測、前
方予測、後方予測、または両方向予測のいずれが設定さ
れたかを示すモード）、動きベクトル検出回路５０より
動きベクトル、マクロブロックサイズ発生回路１０４よ
りマクロブロックサイズ、動き補償モード発生回路１０
５より動き補償モード（マクロブロック中の動きベクト
ルの個数（即ち、マクロブロックを構成する動き補償単
位の数）を示す）、マクロブロックアドレス発生回路１
０６よりマクロブロックアドレス、ウェーブレット変換
回路１０７よりウェーブレット変換係数（逆フィルタ係
数）およびウェーブレットレイヤ数が入力されており、
これらも可変長符号化される。
【０１８１】なお、マクロブロックアドレスについて
は、前回符号化、伝送したマクロブロックのマクロブロ
ックアドレスとの差分（マクロブロックアドレスインク
リメント）が符号化されて出力される。
【０１８２】可変長符号化回路５８から出力されるビッ
トストリームのシンタクス（フォーマット）については
後述する（図１４乃至図２２）。
【０１８３】送信バッファ５９は、入力されたデータを
一時蓄積し、蓄積量に対応するデータを量子化回路５７
に出力する。これにより、前述したように、このように
して、送信バッファ５９のオーバフローまたはアンダフ
ローを防止するようになされている。
【０１８４】送信バッファ５９に蓄積されたデータは、
所定のタイミングで読み出され、伝送路に出力され、ま
たは記録媒体３に記録される。
【０１８５】一方、量子化回路５７より出力されたＩピ
クチャのデータは、可変長符号化回路５８だけでなく、
逆量子化回路６０にも入力され、量子化回路５７より供
給される量子化スケールおよび重み係数に対応して逆量
子化される。即ち、逆量子化回路６０では、次式に示す
演算に対応する処理が行われることで逆量子化係数（こ
の場合ウェーブレット変換係数）Ｓ’が出力される。
【０１８６】Ｓ’＝（Ｑ×ｑ）／ｗ
【０１８７】逆量子化回路６０の出力は、メモリ１０８
を介して逆ウェーブレット変換回路１２２に入力され
る。ここで、逆ウェーブレット変換回路１２２の構成例
を図１０に示す。
【０１８８】逆ウェーブレット変換はウェーブレット変
換回路１２１における単位と同一単位、従って本実施例
ではフレーム単位で行なわれる。このため逆量子化回路
６０の出力は、メモリ１０８に蓄えられ、そこに１フレ
ーム分のウェーブレット変換係数が記憶されると、逆ウ
ェーブレット変換回路１２２に供給される。
【０１８９】逆ウェーブレット変換ではウェーブレット
変換とは逆にレイヤ２から帯域合成が行なわれる。即
ち、レイヤ２のＬＬＬＬＬＬバンドは垂直方向アップサ
ンプリング回路１０−１に入力され垂直方向に２倍にア
ップサンプリング（補間）された後、垂直方向ローパス
フィルタ１０−５に入力される。またレイヤ２のＬＬＬ
ＬＬＨバンドは垂直方向アップサンプリング回路１０−
２に入力され垂直方向に２倍にアップサンプルされた
後、垂直方向ハイパスフィルタ１０−６に入力されて垂
直方向にフィルタリングされる。フィルタ１０−５およ
び１０−６の出力は加算器（合成回路）１０−９に入力
され加算される。これにより２つのバンドＬＬＬＬＬＬ
およびＬＬＬＬＬＨが１つのバンドに合成される。ここ
で、以下、適宜、垂直方向アップサンプリング回路１０
−１，１０−２、垂直方向ローパスフィルタ１０−５、
垂直方向ハイパスフィルタ１０−６、加算器１０−９の
ような組合せを垂直方向帯域合成フィルタバンクとよ
ぶ。
【０１９０】同様にレイヤ２のＬＬＬＬＨＬバンドおよ
びＬＬＬＬＨＨバンドは、垂直方向アップサンプリング
回路１０−３，１０−４、垂直方向ハイパスフィルタ１
０−７、垂直方向ローパスフィルタ１０−８、および加
算器１０−１０で構成される垂直方向帯域合成フィルタ
バンクに供給され、１つのバンドに合成される。
【０１９１】加算器１０−９の出力は水平方向アップサ
ンプリング回路１０−１１に入力され水平方向に２倍に
アップサンプルされた後、水平方向ローパスフィルタ１
０−１３に入力されて水平方向にフィルタリングされ
る。同時に、加算器１０−１０の出力は水平方向アップ
サンプリング回路１０−１２に入力され水平方向に２倍
にアップサンプルされた後、水平方向ハイパスフィルタ
１４に入力されて水平方向にフィルタリングされる。フ
ィルタ１０−１３および１０−１４の出力は加算器１０
−１５に出力され加算される。これによりレイヤ２の４
バンドは１つのバンドに合成され、これによりＬＬＬＬ
バンドが再構成される。以下、適宜、水平方向アップサ
ンプリング回路１０−１１，１０−１２、水平方向ロー
パスフィルタ１０−１３、水平方向ハイパスフィルタ１
０−１４、加算器１０−１５のような組合せを水平方向
帯域合成フィルタバンクと呼ぶ。また、垂直方向帯域合
成フィルタバンクおよび水平方向帯域合成フィルタバン
クを組合せた、４つのバンドから１つのバンドを合成す
るフィルタバンクを４バンド合成帯域合成フィルタバン
クと呼ぶ。
【０１９２】加算器１０−１５の出力（ＬＬＬＬ）およ
びレイヤ１の３つのバンド（ＬＬＬＨ、ＬＬＨＬ、ＬＬ
ＨＨ）は、後段の４バンド合成帯域合成フィルタバンク
に供給され、上述の場合と同様にして１つのバンドに再
構成される。これによりＬＬバンドが再構成されること
になる。
【０１９３】再構成されたバンドＬＬ（加算器１０−３
０の出力）およびレイヤ０の３つのバンド（ＬＨ、Ｈ
Ｌ、ＨＨ）は、さらに後段の４バンド合成帯域合成フィ
ルタバンクに供給され帯域合成される。この４バンド合
成帯域合成フィルタバンクの出力（加算器１０−４５の
出力）が逆ウェーブレット変換回路１２２の出力とな
る。
【０１９４】逆ウェーブレット変換回路１２２では多数
のフィルタが用いられているが、これらで用いられるフ
ィルタ係数（逆フィルタ係数）は、上述したように、ウ
ェーブレット変換回路１２１（フィルタ係数算出回路６
−１）で決定され供給される。逆ウェーブレット変換回
路１２２はウェーブレット変換回路１２２から供給され
る変換係数およびレイヤ数に従って逆ウェーブレット変
換が行われる。
【０１９５】次に、予測画像を生成するための動き補償
はマクロブロック単位で行なわれるため、逆ウェーブレ
ット変換後、マクロブロックを再構成する必要がある。
そこで、逆ウェーブレット変換回路１２２から出力され
る逆ウェーブレット変換係数（画像データ）は、マクロ
ブロック構成回路１１０に供給され、マクロブロックに
再構成される。即ち、マクロブロック構成回路１１０
は、マクロブロックアドレスmb_address、マクロブロッ
クサイズmb_sizeに基づいて、逆ウェーブレット変換回
路１２２の出力からマクロブロックを構成し、加算器６
２を介してフレームメモリ６３の前方予測画像部６３ａ
に供給して、記憶させる。
【０１９６】以上のようにＩピクチャが処理された後、
動きベクトル検出回路５０は、前述したように、後方原
画像部５１ｃに記憶されているＰピクチャの画像データ
の処理を開始する。そして、上述した場合と同様に、マ
クロブロック単位でのフレーム間差分（予測誤差）の絶
対値和が、動きベクトル検出回路５０から予測判定回路
５４に供給される。予測判定回路５４は、このＰピクチ
ャのマクロブロックの予測誤差の絶対値和に対応して、
画像内予測、もしくは前方予測の予測モードを設定す
る。
【０１９７】演算部５３はＩピクチャ以外の場合にフレ
ーム内予測モードが設定されたとき、スイッチ５３ｄを
接点ａ側に切り替える。このとき演算部５３に入力され
てくる信号はイントラＤＣ検出差分回路１００に入力さ
れる。イントラＤＣ検出差分回路１００は、この場合
（Ｉピクチャ以外の画像データについて、フレーム内予
測モードが設定された場合）マクロブロック中の６つの
ブロックＹ［１］乃至Ｙ［４］、Ｃｂ［５］、Ｃｒ
［６］の各ブロックそれぞれについての平均値ＤＣ
［１］乃至ＤＣ［６］を計算する。さらにイントラＤＣ
検出差分回路１００は各ブロックＹ［１］乃至Ｙ
［４］、Ｃｂ［５］、Ｃr［６］の各画素値からそれぞ
れの平均値ＤＣ［１］乃至ＤＣ［６］を減算し、その差
分値をＩピクチャの場合と同様にメモリ１０７を介して
ウェーブレット変換回路１２１に出力する。
【０１９８】ここで、ウェーブレット変換回路１２１に
おけるウェーブレット変換はマクロブロック単位ではな
くフレーム単位で行なわれる。また、フレーム間差分信
号（予測誤差）は、動き検出がほぼ正確になされていれ
ば、一般に画像信号そのものより振幅の小さい信号とな
る（平均値は０近傍となる）。従って、１フレームにフ
レーム内符号化およびフレーム間符号化されるマクロブ
ロックが混在する場合、フレーム内符号化されるマクロ
ブロックをそのまま扱うと、図１１（Ａ）に示すよう
に、フレーム間符号化されるマクロブロックとの境界で
大きな不連続を生じることになる。その結果、このよう
なフレームをウェーブレット変換すると、境界部分に余
分な大きな電力が発生し、圧縮効率が劣化する。そこ
で、これを避けるため、Ｉピクチャ以外のフレーム内符
号化されるマクロブロックについては、その平均値を減
算することで、図１１（Ｂ）に示すように、信号振幅を
小さくするようになされている。
【０１９９】イントラＤＣ検出差分回路１００で計算さ
れた平均値ＤＣ［１］乃至ＤＣ［６］（以下、適宜、イ
ントラＤＣという）は可変長符号化回路５８に出力され
可変長符号化された後、出力される。なお、イントラＤ
Ｃについては、直前に符号化されたイントラＤＣとの差
分が計算され、その差分値が可変長符号化される。
【０２００】また、平均値からの差分が計算されたマク
ロブロックは、メモリ１０７、ウェーブレット変換回路
１２１、マクロブロック構成回路１０９、量子化回路５
７、可変長符号化回路５８、送信バッファ５９を介して
出力される。さらに、このデータは、逆量子化回路６
０、メモリ１０８、逆ウェーブレット変換回路１２２、
マクロブロック構成回路１１０を介して局所復号され、
加算器６２を介してフレームメモリ６３の後方予測画像
部６３ｂに供給され、記憶される。ただし、加算器６２
ではマクロブロック中の各ブロックに対し平均値ＤＣ
［１］乃至ＤＣ［６］が加算される。
【０２０１】前方予測モードの時、スイッチ５３ｄは接
点ｂに切り替えられるとともに、フレームメモリ６３の
前方予測画像部６３ａに記憶されている画像（いまの場
合Ｉピクチャの画像）データが読み出され、動き補償回
路６４により、動きベクトル検出回路５０が出力する動
きベクトルに対応して動き補償される。すなわち、動き
補償回路６４は、予測判定回路５４より前方予測モード
の設定が指令されたとき、前方予測画像部６３ａの読み
出しアドレスを、動きベクトル検出回路５０がいま出力
しているマクロブロックの位置に対応する位置から動き
ベクトルに対応する分だけずらしてデータを読み出し、
予測画像データを生成する。なお、このとき読み出すデ
ータ量はマクロブロックサイズによって決定される。ま
たタイプ３のマクロブロックの場合、４本の動きベクト
ルを用いて予測画像データが生成される。
【０２０２】動き補償回路６４より出力された予測画像
データは、演算器５３ａに供給される。演算器５３ａ
は、参照画像のマクロブロックのデータから、動き補償
回路６４より供給された、このマクロブロックに対応す
る予測画像データを減算し、その差分（予測誤差）を出
力する。なお、このときの各マクロブロックのデータ数
はマクロブロックサイズによって示される。
【０２０３】この差分データは同様にメモリ１０７を介
してウェーブレット変換回路１２１に供給される。そし
て、ウェーブレット変換回路１２１によりウェーブレッ
ト変換された後、マクロブロック構成回路１０９、量子
化回路５７、可変長符号化回路５８、送信バッファ５９
を介して出力される。また、このデータは、逆量子化回
路６０、メモリ１０８、逆ウェーブレット変換回路１２
２、マクロブロック構成回路１１０を介して局所復号さ
れ加算器６２に入力される。
【０２０４】この演算器６２にはまた、演算器５３ａに
供給されている予測画像データと同一のデータが供給さ
れている。演算器６２は、マクロブロック構成回路１１
０が出力する差分データに、動き補償回路６４が出力す
る予測画像データを加算する。これにより、元の（復号
した）Ｐピクチャの画像データが得られる。このＰピク
チャの画像データは、フレームメモリ６３の後方予測画
像部６３ｂに供給され、記憶される。
【０２０５】動きベクトル検出回路５０は、Ｉピクチャ
とＰピクチャのデータが前方予測画像部６３ａと後方予
測画像部６３ｂにそれぞれ記憶されると、前述したよう
に、Ｂピクチャの処理を実行する。即ち、まず予測判定
回路５４においては、マクロブロック単位でのフレーム
間差分の絶対値和の大きさに対応して、予測モードがフ
レーム内予測モード、前方予測モード、後方予測モー
ド、または両方向予測モードのいずれかに設定される。
【０２０６】前述したように、フレーム内予測モードま
たは前方予測モードの時、スイッチ５３ｄは接点ａまた
はｂに切り替えられる。この場合、Ｐピクチャにおける
場合と同様の処理が行われる。
【０２０７】また、後方予測モードまたは両方向予測モ
ードが設定された時、スイッチ５３ｄは、接点ｃまたは
ｄにそれぞれ切り替えられる。
【０２０８】スイッチ５３ｄが接点ｃに切り替えられる
後方予測モードの時、後方予測画像部６３ｂに記憶され
ている画像（いまの場合、Ｐピクチャの画像）データが
読み出され、動き補償回路６４により、動きベクトル検
出回路５０が出力する動きベクトルに対応して動き補償
される。すなわち、動き補償回路６４は、予測判定回路
５４より後方予測モードの設定が指令されたとき、後方
予測画像部６３ｂの読み出しアドレスを、動きベクトル
検出回路５０がいま出力しているマクロブロックの位置
に対応する位置から動きベクトルに対応する分だけずら
してデータを読み出し、予測画像データを生成する。な
お、このとき読み出すデータ量はマクロブロックサイズ
によって決定される。またタイプ３のマクロブロックの
場合、４本の動きベクトルを用いて予測画像データが生
成される。
【０２０９】動き補償回路６４より出力された予測画像
データは、演算器５３ｂに供給される。演算器５３ｂ
は、参照画像のマクロブロックのデータから、動き補償
回路６４より供給された、このマクロブロックに対応す
る予測画像データを減算し、その差分（予測誤差）を出
力する。なお、このとき各マクロブロックのデータ数は
マクロブロックサイズによって示される。
【０２１０】この差分データはメモリ１０７を介して、
ウェーブレット変換回路１２１に供給される。そして、
ウェーブレット変換回路１２１においてウェーブレット
変換された後マクロブロック構成回路１０９、量子化回
路５７、可変長符号化回路５８、送信バッファ５９を介
して出力される。
【０２１１】スイッチ５３ｄが接点ｄに切り替えられて
いる両方向予測モードの時、前方予測画像部６３ａに記
憶されている画像（いまの場合、Ｉピクチャの画像）デ
ータと、後方予測画像部６３ｂに記憶されている画像
（いまの場合、Ｐピクチャの画像）データが読み出さ
れ、動き補償回路６４により、動きベクトル検出回路５
０が出力する動きベクトルに対応して動き補償される。
すなわち、動き補償回路６４は、予測判定回路５４より
両方向予測モードの設定が指令されたとき、前方予測画
像部６３ａと後方予測画像部６３ｂの読み出しアドレス
を、動きベクトル検出回路５０がいま出力しているマク
ロブロックの位置に対応する位置から動きベクトル（こ
の場合の動きベクトルは、前方予測画像用と後方予測画
像用の２つとなる）に対応する分だけずらしてデータを
読み出し、予測画像データを生成する。なお、このとき
読み出すデータ量はマクロブロックサイズによって示さ
れる。またタイプ３のマクロブロックの場合、４本の動
きベクトルを用いて予測画像データが生成される。
【０２１２】動き補償回路６４より出力された予測画像
データは、演算器５３ｃに供給される。演算器５３ｃ
は、動きベクトル検出回路５０より供給された参照画像
のマクロブロックのデータから、動き補償回路６４より
供給された予測画像データの平均値を減算し、その差分
を出力する。なお、このとき各マクロブロックのデータ
数はマクロブロックサイズによって示される。
【０２１３】この差分データはやはりメモリ１０７、ウ
ェーブレット変換回路１２１、マクロブロック構成回路
１０９、量子化回路５７、可変長符号化回路５８、送信
バッファ５９を介して出力される。
【０２１４】Ｂピクチャの画像は、前述したように他の
画像の予測画像とされることがないため、フレームメモ
リ６３には記憶されない。
【０２１５】以上においては、輝度ブロックを中心とし
て説明をしたが、色差ブロックについても同様に、図２
に示すマクロブロックを単位として処理され、伝送され
る。尚、色差ブロックを処理する場合の動きベクトル
は、対応する輝度ブロックの動きベクトルを垂直方向と
水平方向に、それぞれ１／２にしたものが用いられる。
【０２１６】次に、可変長符号化回路５８では、可変長
符号化すべきマクロブロックがスキップマクロブロック
である場合、そのマクロブロックについては可変長符号
化させず、従って可変長符号化回路５８からはそのマク
ロブロックのデータは出力されないようになされてい
る。スキップマクロブロックの詳細については後述す
る。
【０２１７】次にマクロブロックアドレスの符号化方法
について説明する。マクロブロックアドレスは、上述し
たように、１から始まる連続した整数である。可変長符
号化回路５８はマクロブロックのデータを符号化して伝
送する場合（従って、スキップマクロブロックは含まれ
ない）、前回符号化したマクロブロックのマクロブロッ
クアドレスと現在のマクロブロックアドレスの差分macr
oblock_address_incrementを計算し、これを可変長符号
する。従って、macroblock_address_incrementが２以上
の場合、スキップマクロブロックが存在することを意味
する。
【０２１８】次にスキップマクロブロックについて説明
する。Ｉピクチャを構成するマクロブロックにはスキッ
プマクロブロックは存在しない。Ｐピクチャを構成する
マクロブロックの場合、マクロブロックが、以下の４つ
の条件を満たすときに、スキップマクロブロックとされ
る。可変長符号化回路５８では、符号化対象のマクロブ
ロックがスキップマクロブロックである場合、動きベク
トルの保持値が０にリセットされる。即ち、動きベクト
ルは、前回符号化された動きベクトルとの差分値が伝送
される。このため、可変長符号化回路５８には、前回符
号化された動きベクトルが保持されるが、マクロブロッ
クがスキップマクロブロックである場合、その保持値が
０にリセットされる。
【０２１９】・マクロブロックが前方向予測マクロブロ
ックである。 ・動きベクトルが０である。 ・マクロブロックサイズmb_sizeが前回符号化対象とな
ったマクロブロックと同一である。 ・マクロブロックについての全てのウェーブレット係数
が０である。
【０２２０】また、Ｂピクチャについては、以下の７つ
の条件を満たす場合、マクロブロックがスキップマクロ
ブロックとされる。このとき動きベクトルの保持値はそ
のままの値が保持される（スキップマクロブロックに対
応する動きベクトルによる保持値の更新は保持されな
い）。
【０２２１】・マクロブロックがイントラマクロブロッ
クではない。 ・マクロブロックサイズが前のマクロブロックと同一で
ある。 ・予測モード（前方向、後方向、両方向）が、前回符号
化対象となったマクロブロックと同一である。 ・動き補償モード（動きベクトルの本数）が前回符号化
対象となったマクロブロックと同一である。 ・動きベクトルが前回符号化対象となったマクロブロッ
クと同一である。 ・前回符号化が対象となったマクロブロックはイントラ
マクロブロックではない。 ・マクロブロックについての全てのウェーブレット係数
が０である。
【０２２２】次に、図１２は、本発明を適用したデコー
ダの一実施例の構成を示している。なお、図中、図３１
における場合と基本的構成が同様の部分については、同
一の符号を付してあり、以下では、その説明は、適宜、
省略する。
【０２２３】符号化された画像データは、前述したよう
に、受信バッファ８１に一時記憶された後、復号回路９
０の可変長復号化回路８２に供給される。可変長復号化
回路８２は、受信バッファ８１より供給されたデータを
可変長復号化し、動きベクトル、予測モード、マクロブ
ロックサイズ、および動き補償モードを動き補償回路８
７およびマクロブロック構成回路２０２に、また、量子
化スケール、重み係数を逆量子化回路８３に、またイン
トラＤＣ（ＤＣ［１］乃至ＤＣ［６］）を加算器８５
に、逆ウェーブレット変換係数およびウェーブレットレ
イヤ数を逆ウェーブレット変換回路２０３に、それぞれ
出力するとともに、復号された画像データを逆量子化回
路８３に出力する。さらに、マクロブロックアドレスと
マクロブロックサイズは、書き込みアドレス発生回路２
０１にも供給される。
【０２２４】ここで、マクロブロックアドレスの復号に
ついて説明する。上述したように、マクロブロックアド
レスはビットストリーム中にそのままは符号化されては
いない。即ち、前回復号したマクロブロックのマクロブ
ロックアドレスと、現在復号しようとするマクロブロッ
クのマクロブロックアドレスの差分macroblock_address
_incrementが符号化されている。そこで、可変長復号回
路８２は、このmacroblock_address_incrementを復号
し、前回復号したマクロブロックアドレスに加算するこ
とによって現在のマクロブロックのマクロブロックアド
レスを求めるようになされている。ＭＰＥＧ２方式に適
合させる場合、macroblock_address_incrementの最大値
は３３となり、これより大きい値についてはmacroblock
_escapeとの組合せで表現することになる。
【０２２５】macroblock_address_incrementが２以上の
場合、スキップマクロブロックが存在することを示して
おり、macroblock_address_increment−１がスキップマ
クロブロックの数となる。
【０２２６】スキップマクロブロックは、次のように復
号される。
【０２２７】即ち、復号する画像がＰピクチャの場合、
スキップマクロブロックは、上述の４つの条件を満たす
ものと解釈され、前回復号化されたマクロブロックに基
づいて復号される。なお、この場合、動きベクトルの保
持値は０にリセットされる。
【０２２８】また、復号する画像がＢピクチャの場合、
スキップマクロブロックは上述の７つの条件を満たすも
のと解釈され、やはり、前回復号化されたマクロブロッ
クに基づいて復号される。なお、この場合、動きベクト
ルの保持値はそのまま保持される。
【０２２９】逆量子化回路８３は、可変長復号化回路８
２より供給された画像データを、同じく可変長復号化回
路８２より供給された量子化スケールおよび重み係数に
従って逆量子化し、メモリ２００を介して逆ウェーブレ
ット変換回路２０３に出力する。
【０２３０】逆ウェーブレット変換回路２０３における
逆ウェーブレット変換は、図１の逆ウェーブレット変換
回路１２２における場合と同様にフレーム単位で行なわ
れる。このため、各マクロブロックのデータは一時メモ
リ２００に記憶され、そこに１フレーム分のデータが記
憶された後、逆ウェーブレット変換処理される。
【０２３１】これに対して動き補償はマクロブロックに
含まれる動き補償の単位で行なわれるため逆ウェーブレ
ット変換回路２０３の出力は、マクロブロック構成回路
２０２に供給され、そこでマクロブロックに再構成され
る。即ち、マクロブロック構成回路２０２ではマクロブ
ロックアドレスab_address、マクロブロックサイズmb_s
izeを用いて逆ウェーブレット変換回路２０３の出力か
らマクロブロックが再構成され加算器８５に供給され
る。
【０２３２】マクロブロック構成回路２０２より供給さ
れた画像データが、Ｉピクチャのデータである場合、そ
のデータは演算器８５より出力され、演算器８５に後に
入力される画像データ（ＰまたはＢピクチャのデータ）
の予測画像データ生成のために、フレームメモリ８６の
前方予測画像部８６ａに供給されて記憶される。また、
このデータは、所定のタイミングで出力再生画像として
図示せぬ外部出力装置に出力される。
【０２３３】このように、復号されたマクロブロックの
データはフレームメモリ８６に記憶される。ここで、従
来のＭＰＥＧ１やＭＰＥＧ２などの方式では固定サイズ
のマクロブロックを用いるためにマクロブロックアドレ
スがわかれば、そのマクロブロックがフレーム中のどの
部分に位置するかが特定することができる。しかしなが
ら、本実施例では、可変サイズのマクロブロックを扱う
ため、マクロブロックアドレスのみからでは、そのマク
ロブロックのフレーム中での位置を決定することができ
ない。そこで、各マクロブロックがフレーム中のどの位
置のデータであるかは、マクロブロックアドレスおよび
マクロブロックサイズに基づいて、アドレス発生回路２
０１で算出される。
【０２３４】即ち、書き込みアドレス発生回路２０１で
は、可変長復号回路８２からのマクロブロックアドレス
およびマクロブロックサイズを用いてマクロブロックの
データをフレームメモリ８６に書き込む際のアドレスを
発生する。
【０２３５】ここで、図１３を参照して、例えば、上述
の図５に示したようにブロック分割がされている場合
に、マクロブロックアドレスとマクロブロックサイズを
用いて、マクロブロックのフレーム中での位置を特定す
る方法について説明する。マクロブロックアドレスはエ
ンコーダにおいて図５に示したようにラインスキャン順
に増加するように付されている。また、マクロブロック
サイズは、本実施例では、１６または３２のうちのいず
れかである。
【０２３６】そこで、アドレス発生回路２０１は、図１
３に示すようなマップを作成するようになされている。
即ち、このマップは１フレーム分のマクロブロックの位
置を記憶するメモリなどでなり、その縦横の大きさは復
号画像の輝度の画枠の縦と横それぞれを１／１６にした
ものとされている。また、その深さは１ビットとされて
おり、従って、各点では、０または１を記憶することが
できるようになされている。
【０２３７】このマップは、各フレームのデータを復号
する前に（即ち、ピクチャヘッダ（図１７）を復号した
時に）、全て０に初期化される。
【０２３８】そして、いまマクロブロックアドレス１の
マクロブロックが復号されたとすると、このマクロブロ
ックのフレーム中での位置はフレームの最も左上であ
る。ここでマップポインタというパラメータを導入す
る。マップポインタは復号されるマクロブロックの左上
隅のマップ上での位置を指すポインタで、マクロブロッ
クアドレス１の場合、マップポインタはマップの最も左
上隅を指す（図１３（Ａ））。
【０２３９】マクロブロックが復号されると、このマッ
プポインタが指す点を先頭として、マクロブロックサイ
ズに従ってマップの所定の位置（点）を０から１に変更
する。即ち、復号されたマクロブロックのマクロブロッ
クサイズが１６である場合、マップポインタが示す点だ
けが１に変更される。また、マクロブロックサイズが３
２の場合、マップポインタが示す位置を左上とする２×
２個の点がすべて１にされる。
【０２４０】１つのマクロブロックについての復号が終
了すると、マップがラインスキャン順にスキャンされ、
このとき、値が最初に０になる点にマップポインタが移
動され、その位置が次に復号されるマクロブロックの位
置とされる。従って、マクロブロックアドレス１のマク
ロブロックの復号後、マップポインタは、図１３（Ｂ）
に示す位置に移動されることとなる。マップは復号画像
の画枠を縦横それぞれ１／１６した大きさであるから、
マップポインタが位置する点の座標について所定の換算
を行なうことにより、マクロブロックのフレーム中での
位置を特定することができ、さらに、フレームメモリ８
６に対する書き込みアドレスを得ることができる。
【０２４１】図１３（Ｃ）に、図５においてマクロブロ
ックアドレスが１５とされているマクロブロックを復号
した後のマップの状態およびマップポインタの位置を示
す。
【０２４２】なお、上記方法は一例であり、アドレス
（フレーム中でのマクロブロックの位置）はマクロブロ
ックアドレスおよびマクロブロックサイズが与えられれ
ば一意に決定されることから、他の方法を用いてもアド
レスを計算することは可能である。
【０２４３】図１２に戻り、マクロブロック構成回路２
０２より供給された画像データが、その１フレーム前の
画像データを予測画像データとするＰピクチャのデータ
であって、前方予測モードのデータである場合、フレー
ムメモリ８６の前方予測画像部８６ａに記憶されてい
る、１フレーム前の画像データ（Ｉピクチャのデータ）
が読み出され、動き補償回路８７で可変長復号化回路８
２より出力された動きベクトルに対応する動き補償が施
される。そして、演算器８５において、マクロブロック
構成回路２０２より供給された画像データ（差分のデー
タ）と加算され、出力される。この加算されたデータ、
即ち、復号されたＰピクチャのデータは、演算器８５に
後に入力される画像データ（ＢピクチャまたはＰピクチ
ャのデータ）の予測画像データ生成のために、フレーム
メモリ８６の後方予測画像部８６ｂに供給されて記憶さ
れる。
【０２４４】なお、Ｐピクチャのデータであって、画像
内予測モードのデータは、演算器８５において、可変長
復号回路８２より供給されるイントラＤＣ（ＤＣ［１］
乃至ＤＣ［６］）と加算される。その結果得られるＰピ
クチャの復号画像は、上記前方予測モードの場合と同様
に、後方予測画像部８６ｂに記憶される。
【０２４５】このＰピクチャは、次のＢピクチャの次に
表示されるべき画像であるため、この時点では、まだ再
生画像として、図示せぬ外部出力装置へ出力されない
（上述したように、Ｂピクチャの後に入力されたＰピク
チャが、Ｂピクチャより先に処理され、伝送されてい
る）。
【０２４６】マクロブロック構成回路２０２より供給さ
れた画像データが、Ｂピクチャのデータである場合、可
変長復号化回路８２より供給された予測モードに対応し
て、フレームメモリ８６の前方予測画像部８６ａに記憶
されているＩピクチャの画像データ（前方予測モードの
場合）、後方予測画像部８６ｂに記憶されているＰピク
チャの画像データ（後方予測モードの場合）、または、
その両方の画像データ（両方向予測モードの場合）が読
み出され、動き補償回路８７において、可変長復号化回
路８２より出力された動きベクトルに対応する動き補償
が施されて、予測画像が生成される。但し、動き補償を
必要としない場合（画像内予測モードの場合）、予測画
像は生成されない。
【０２４７】このようにして、動き補償回路８７で動き
補償が施されたデータは、演算器８５において、マクロ
ブロック構成回路２０２の出力と加算される。ただし、
フレーム内予測モードの場合は、上述したＰピクチャに
おける場合と同様に、マクロブロック構成回路２０２の
出力と、イントラＤＣとが加算される。この加算出力
は、再生画像として直ちに、図示せぬ外部の出力装置に
出力される。
【０２４８】但し、この加算出力はＢピクチャのデータ
であり、他の画像の予測画像生成のために利用されるこ
とがないため、フレームメモリ８６には記憶されない。
【０２４９】Ｂピクチャの画像が出力された後、後方予
測画像部８６ｂに記憶されているＰピクチャの画像デー
タが読み出され、動き補償回路８７を介して演算器８５
に供給される。但し、このとき、動き補償は行われな
い。
【０２５０】また、以上においては、輝度信号の処理に
ついて説明したが、色差信号の処理も同様に行われる。
但し、この場合、動きベクトルは、輝度信号用のもの
を、垂直方向および水平方向に１／２にしたものが用い
られる。
【０２５１】次に、図１のエンコーダより出力されるビ
ットストリームのフォーマットについて、図１４乃至図
２２を参照して説明する。図１４乃至図２２は、ISO-IE
C/JTC1/SC29/WG11 IS 13818-2で用いられている書式で
本実施例のビットストリームのフォーマットを示したも
のである。なお、No of bits Mnemonicの欄に記載があ
る部分が実際に伝送されるフラグ（データ）である。
【０２５２】図１４はシーケンスヘッダのフォーマット
を示している。シーケンスヘッダは、ビットストリーム
の先頭に付加される。sequence_start_codeは３２ビッ
トのコードでシーケンスヘッダの開始を示す。このsequ
ence_start_codeの他、各種のヘッダ（例えば、図１６
のグループオブピクチャのヘッダなど）のスタートコー
ドは固有のビット列であり、ビットストリームの他の部
分では発生することがないコードである。従って何らか
の原因でビットストリームの一部が失われるなどして、
その復号をすることが出来なくなった場合でも、いずれ
かのスタートコードは検出することができ、これにより
再び復号を再開することが可能となる。
【０２５３】wavelet_layer_numberは逆ウェーブレット
変換回路２０３を幾つのレイヤ（４バンド合成帯域合成
フィルタバンクの数）で構成することが必要であるかを
示す４ビットのフラグである。またwavelet_coefficien
ts()は逆ウェーブレット変換回路２０３の各レイヤのフ
ィルタで用いられるフィルタ係数（逆フィルタ係数）で
ある。逆ウェーブレット変換回路２０３では、この逆フ
ィルタ係数wavelet_coefficients()を用いて、図１の逆
ウェーブレット変換回路１２２における場合と同様のフ
ィルタリングが行われる。
【０２５４】ここで、逆ウェーブレット変換に用いる逆
フィルタ係数を伝送する方法としては、例えば図１５に
示すような２通りの方法がある。即ち、図１５（ａ）
は、各レイヤの各フィルタで用いる逆フィルタ係数をあ
らかじめ何組（セット）か決めておき、そのどれを用い
るかを示すフラグを伝送する場合のフォーマットを示し
ている。ハイパスおよびローパスフィルタの組合せはど
ちらか一方が定まれば決定される。このため各レイヤに
ついて、１つのインデクスを伝送すれば十分である。図
１５（ａ）では、インデクスwavelet_coeff_indexは８
ビットのフラグであり、２５６通りのフィルタ係数の組
合せを指定することが可能とされている。本実施例では
８ビットであるが、そのビット数は特に限定されるもの
ではない。
【０２５５】なお、この場合、図１におけるウェーブレ
ット変換回路１２１のフィルタ係数算出回路６−１で
は、２５６通りのフィルタ係数の組み合わせのうちのい
ずれかが選択され、各フィルタに設定される。さらに、
この場合、可変長符号化回路５８には、選択したフィル
タ係数の組み合わせに対応するwavelet_coeff_indexが
供給される。
【０２５６】図１５（ｂ）は、各レイヤで用いるフィル
タ係数を直接伝送する場合のフォーマットを示してい
る。この場合、ローパスフィルタおよびハイパスフィル
タのタップ数とそのタップ数に応じたフィルタ係数が伝
送される。
【０２５７】図１４に戻り、load_intra_weighting_mat
rixとload_non_intra_weighting_matrixはＩピクチャ
と、ＰおよびＢピクチャで用いる重み係数をダウンロー
ドするかどうかを示すフラグである。重み係数を、ダウ
ンロードする場合、それぞれのフラグのあとに重み係数
が記述される。これは８ビット×(wavelet_layer_numer
×3+1)のデータサイズになる。なお、バンドの数はwave
let_layer_number（レイヤ数）から式（wavelet_layer_
numer×3+1）に従って求めることができる。Ｉピクチャ
とＰおよびＢピクチャとについては、通常、異なる重み
係数が用いられるが、同一の重み係数を用いるようにす
ることも可能である。
【０２５８】図１６は、グループオブピクチャのヘッダ
のフォーマットを示している。これは、通常のＭＰＥＧ
方式の場合と同様である。
【０２５９】図１７はピクチャヘッダのフォーマットを
示している。number_of_macroblockはそのフレームに存
在するマクロブロックの数を示す１６ビットのフラグで
ある。
【０２６０】図１８はマクロブロックヘッダのフォーマ
ットを示している。macroblock_sizeはマクロブロック
の大きさを示す２ビットのフラグである。mc_modeはそ
のマクロブロックの動き補償の単位を示す。すなわち、
１個の動きベクトルが存在するかまたは４個の動きベク
トルが存在するかを示すフラグである。１個の場合、nu
mber_of_motion_vectorsは１となりまた４個の場合はnu
mber_of_motion_vectorsは４となる。この数だけforwar
d_motion_vectorまたはbackward_motion_vectorがそれ
ぞれ伝送される。このmc_modeは、図１９乃至図２１に
示すＶＬＣコードテーブルのmacroblock_typeにおいてm
acroblock_motion_forwardまたはmacroblock_motion_ba
ckwardのうちのいずれが１に設定されており、且つmacr
oblock_sizeが、マクロブロックのサイズが１６である
ことを示している場合のみ伝送される。動きベクトル
は、図２２に示す伝送フォーマットで伝送される。
【０２６１】マクロブロックが、Ｉピクチャ以外のイン
トラマクロブロックの場合、そのイントラマクロブロッ
クの平均値（イントラＤＣ）が伝送される。
【０２６２】ＭＰＥＧ２などの従来の画像信号符号化方
式では、動き補償は、固定の大きさのマクロブロック単
位で行われる。即ち、符号化する画像信号の性質とは無
関係に行われる。しかしながら、複雑な動きをする部分
については、動き補償の単位は小さくすることで、細か
な動きを再現することが可能となる。また、一様で動き
が少ない部分については、動き補償の単位を大きくする
ことで、動きベクトルなどのデータ量を低減することが
できる。即ち、動き補償の単位は、符号化する画像信号
の性質に応じて変化させる方が効率を向上させることが
できる。
【０２６３】フレーム内符号化を行なう場合において
も、一様な領域は大きなマクロブロックを用いた方が、
可変長符号化（ランレングス符号化など）の効率を向上
させることができる。また、複雑なテクスチャやエッジ
などが存在する領域ではマクロブロックの大きさを小さ
くして、マクロブロック内の信号ができるだけ一様にな
るようにした方が効率を向上させることができる。即
ち、フレーム内符号化という側面からみても、マクロブ
ロックの大きさを符号化する画像の性質に応じて変化さ
せることが望ましい。
【０２６４】そこで、本実施例では、入力画像信号の性
質に応じて適応的にマクロブロック、および動き補償の
単位を変化させるようにし、これにより、符号化効率を
向上させるとともに、上記（１）のブロック歪みを低減
するようにしている。
【０２６５】また、ＭＰＥＧ２などの従来の符号化方式
においては、ＤＣＴ変換が、前述したように、信号電力
の集中のために用いられるが、ＤＣＴ変換では、上記
（２）のモスキートノイズを軽減することは難しい。ま
たＤＣＴ変換は、基本的に、ブロック単位の処理である
ため、上記（１）のブロック歪みをなくすことは困難で
ある。
【０２６６】そこで、本実施例では、上述したように、
ウエーブレット変換を用い、フレーム単位などで変換処
理を行うようにしている。これにより、ＤＣＴ変換にお
けるブロック単位の処理が原因で生じるブロック歪みを
なくし、また、モスキートノイズを低減することができ
る。
【０２６７】また、本実施例では、ウエーブレット変換
した後、各バンドの対応する位置のウエーブレット変換
係数によって、マクロブロックを再構成し、量子化や可
変長符号化を行うようにしているが、逆ウエーブレット
変換がフレーム単位で行なわれるため、上記（１）のブ
ロック歪みは、それほど問題とならない。
【０２６８】さらに、ウエーブレット変換では、各周波
数帯域に応じた長さの基底（フィルタのタップ数）を用
いることができるので、上記（２）のモスキートノイズ
や（３）のリンギングを軽減することができる。
【０２６９】なお、ウエーブレット変換において、各フ
ィルタバンクで用いるローパスフィルタおよびハイパス
フィルタのタップ数は必ずしも同一でなくても良い。
【０２７０】また、同様にツリー構造の関係にある各フ
ィルタバンク間で必ずしも同一のフィルタを用いる必要
もない。即ち、フィルタ係数（基底長）は、周波数成分
に応じて変化させることができる（各レイヤで最適なフ
ィルタ係数（基底）を用いることができる）。例えば、
高周波成分に対しては、短いタップのフィルタを用い、
低周波成分に対しては、長いタップのフィルタを用いる
ことにより、上記（２）のモスキートノイズや（３）の
リンギングを軽減することができる。
【０２７１】さらに、本実施例では、動き補償の単位の
大きさを可変とし、動き補償と、ウエーブレット変換と
組み合わせるようにしたが、動き補償の単位の大きさ
は、ＭＰＥＧ２方式などの従来における場合と同様に固
定にしても良い。このようにしても、ウエーブレット変
換は、動き補償の単位とは、無関係に行なわれるため、
上記（１）のブロック歪みはそれほど問題とならない。
【０２７２】また、本実施例では、所定の変換処理とし
て、ウェーブレット変換を行うようにしたが、所定の変
換処理としては、ウェーブレット変換以外の、基底長を
適応的に変化させることのできる直交変換処理その他を
用いることができる。
【０２７３】さらに、本実施例では、フレーム単位での
みの処理を行うようにしたが、この他、例えば図２７で
説明したようなフレーム／フィールドの切り換えを行う
ようにすることも可能である。
【０２７４】
【発明の効果】請求項１に記載の画像符号化装置および
請求項１１に記載の画像符号化方法によれば、画像デー
タが、その特性に対応した大きさの符号化ブロックに分
割され、その符号化ブロック単位で符号化される。従っ
て、符号化効率を向上させることが可能となる。
【０２７５】請求項１３に記載の画像復号化装置および
請求項２１に記載の画像復号化方法によれば、伝送デー
タには、画像データを、その特性に対応した大きさの符
号化ブロックに分割し、その符号化ブロック単位で符号
化した符号化データが、少なくとも含まれている。そし
て、符号化データは、符号化ブロック単位で復号化され
る。従って、効率良く符号化されたデータを復号するこ
とができる。
【０２７６】請求項２２に記載の記録媒体には、画像デ
ータを、その特性に対応した大きさの符号化ブロックに
分割し、その符号化ブロック単位で符号化した符号化デ
ータが記録されている。従って、多くの画像データを記
録しておくことが可能となる。
【０２７７】請求項２６に記載の画像符号化装置および
請求項３８に記載の画像符号化方法によれば、画像デー
タが、その特性に対応した大きさの動き補償ブロックに
分割されるとともに、画像データの動きベクトルが検出
され、その動きベクトルに基づいて動き補償を行うこと
により、動き補償ブロックの画像データについての予測
画像が生成される。そして、画像データと予測画像との
差分を演算することにより、差分画像が生成され、その
差分画像および動きベクトルを符号化される。従って、
符号化効率を向上させることができる。
【０２７８】請求項３９に記載の画像復号化装置および
請求項４５に記載の画像復号化方法によれば、伝送デー
タには、画像データを、その特性に対応した大きさの動
き補償ブロックに分割するとともに、その画像データの
動きベクトルを検出し、動きベクトルに基づいて動き補
償を行うことにより、動き補償ブロックの画像データに
ついての予測画像を生成し、画像データと予測画像との
差分を演算することにより、差分画像を生成し、差分画
像および動きベクトルを符号化した符号化データが、少
なくとも含まれている。そして、動きベクトルに基づい
て動き補償を行うことにより、動き補償ブロックの画像
データについての予測画像が生成され、予測画像と差分
画像とを加算することにより、画像データが復号され
る。従って、効率良く符号化されたデータを復号するこ
とができる。
【０２７９】請求項４６に記載の記録媒体には、画像デ
ータを、その特性に対応した大きさの動き補償ブロック
に分割するとともに、その画像データの動きベクトルを
検出し、動きベクトルに基づいて動き補償を行うことに
より、動き補償ブロックの画像データについての予測画
像を生成し、画像データと予測画像との差分を演算する
ことにより、差分画像を生成し、差分画像および動きベ
クトルを符号化した符号化データが記録されている。従
って、多くの画像データを記録しておくことが可能とな
る。
【図面の簡単な説明】
【図１】本発明を適用したエンコーダの一実施例の構成
を示すブロック図である。
【図２】図１のエンコーダで用いられるマクロブロック
を示す図である。
【図３】図１のブロック分割回路１０２におけるブロッ
ク分割方法を説明するためのフローチャートである。
【図４】図１のブロック分割回路１０２におけるブロッ
ク分割方法を説明するためのフローチャートである。
【図５】図１のブロック分割回路１０２でブロック分割
された画像を示す図である。
【図６】図１のウェーブレット変換回路１２１の構成例
を示すブロック図である。
【図７】ウェーブレット変換により帯域分割された画像
を示す図である。
【図８】図１のマクロブロック構成回路１０９の処理を
説明するための図である。
【図９】図１の量子化回路５７で用いられる重み係数を
示す図である。
【図１０】図１の逆ウェーブレット変換回路１２２の構
成例を示すブロック図である。
【図１１】図１のＤＣ検出差分回路１００の処理を説明
するための図である。
【図１２】本発明を適用したデコーダの一例の構成を示
すブロック図である。
【図１３】図１２の書き込みアドレス発生回路２０１に
おけるアドレスの算出方法を説明するための図である。
【図１４】図１のエンコーダより出力されるビットスト
リームにおけるシーケンスヘッダのフォーマットを示す
図である。
【図１５】図１５のwavelet_coefficients()のフォーマ
ットを示す図である。
【図１６】図１のエンコーダより出力されるビットスト
リームにおけるグループオブピクチャヘッダのフォーマ
ットを示す図である。
【図１７】図１のエンコーダより出力されるビットスト
リームにおけるピクチャヘッダのフォーマットを示す図
である。
【図１８】図１のエンコーダより出力されるビットスト
リームにおけるマクロブロックのフォーマットを示す図
である。
【図１９】Ｉピクチャにおけるマクロブロックのマクロ
ブロックタイプ（macroblock_type）のテーブルを示す
図である。
【図２０】Ｐピクチャにおけるマクロブロックのマクロ
ブロックタイプ（macroblock_type）のテーブルを示す
図である。
【図２１】Ｂピクチャにおけるマクロブロックのマクロ
ブロックタイプ（macroblock_type）のテーブルを示す
図である。
【図２２】図１のエンコーダより出力されるビットスト
リームにおける動きベクトルのフォーマットを示す図で
ある。
【図２３】高能率符号化の原理を説明するための図であ
る。
【図２４】画像データを圧縮する場合におけるピクチャ
のタイプを説明するための図である。
【図２５】動画像を符号化する原理を説明するための図
である。
【図２６】従来の動画像符号化装置と復号化装置の一例
の構成を示すブロック図である。
【図２７】図２６のエンコーダ１７の構成例を示すブロ
ック図である。
【図２８】従来のブロック分割方法を説明するための図
である。
【図２９】図２７における予測モード切り換え回路５２
の動作を説明するための図である。
【図３０】図２７におけるＤＣＴモード切り換え回路５
５の動作を説明するための図である。
【図３１】図２６のデコーダ３１の構成例を示すブロッ
ク図である。
【図３２】サブバンド符号化を説明するためのブロック
図である。
【図３３】ウェーブレット変換により４つの周波数帯域
に帯域分割された画像を示す図である。
【符号の説明】
３ 記録媒体／伝送路 ６−１ フィルタ係数算出回路 ６−２ 水平方向ローパスフィルタ ６−３ 水平方向ハイパスフィルタ ６−４，６−５ ダウンサンプリング回路 ６−６ 垂直方向ローパスフィルタ ６−７ 垂直方向ハイパスフィルタ ６−８ 垂直方向ローパスフィルタ ６−９ 垂直方向ハイパスフィルタ ６−１０乃至６−１３ ダウンサンプリング回路 １０−１乃至１０−４ アップサンプリング回路 １０−５ 垂直方向ローパスフィルタ １０−６ 垂直方向ハイパスフィルタ １０−７ 垂直方向ローパスフィルタ １０−８ 垂直方向ハイパスフィルタ １０−９，１０−１０ 加算器（合成回路） １０−１１，１０−１２ アップサンプリング回路 １０−１３ 水平方向ローパスフィルタ １０−１４ 水平方向ハイパスフィルタ １７ エンコーダ ３１ デコーダ ５０ 動きベクトル検出回路 ５１ フレームメモリ ５１ａ 前方原画像 ５１ｂ 参照原画像 ５１ｃ 後方原画像 ５２ Ｆｒａｍｅ／Ｆｉｅｌｄ予測モード切り替え回路 ５３ 演算部 ５４ 画像内／前方／両方向／予測判定回路 ５６ ＤＣＴ回路 ５７ 量子化回路 ５８ 可変長符号化回路 ５９ 送信バッファ ６０ 逆量子化回路 ６１ ＩＤＣＴ回路 ６２ 演算器 ６３ フレームメモリ ６４ 動き補償回路 ８１ 受信バッファ ８２ 可変長復号化回路 ８３ 逆量子化回路 ８６ フレームメモリ ８７ 動き補償回路 ９０ 復号回路 １００ ＤＣ検出差分回路 １０１ 量子化スケール発生回路 １０２ ブロック分割回路 １０３ アドレス発生回路 １０４ マクロブロックサイズ発生回路 １０５ 動き補償モード発生回路 １０６ マクロブロックアドレス発生回路 １０９ マクロブロック構成回路 １１０ マクロブロック構成回路 １２１ ウェーブレット変換回路 １２２ 逆ウェーブレット変換回路 ２０１ 書き込みアドレス発生回路 ２０３ 逆ウェーブレット変換回路 ２０２ マクロブロック構成回路

Claims (51)

    【特許請求の範囲】
  1. 【請求項１】 画像データを、その特性に対応した大き
    さの符号化ブロックに分割する分割手段と、 前記画像データを、前記符号化ブロック単位で符号化す
    る符号化手段とを備えることを特徴とする画像符号化装
    置。
  2. 【請求項２】 前記画像データに対し、複数の前記符号
    化ブロック単位で、所定の変換処理を施し、変換係数を
    出力する変換手段をさらに備え、 前記符号化手段は、前記変換手段より出力される前記変
    換係数を、前記符号化ブロック単位で符号化することを
    特徴とする請求項１に記載の画像符号化装置。
  3. 【請求項３】 前記変換手段は、前記画像データに対
    し、直交変換処理を施すことを特徴とする請求項２に記
    載の画像符号化装置。
  4. 【請求項４】 前記変換手段は、前記画像データに対
    し、ウェーブレット変換処理を施すことを特徴とする請
    求項３に記載の画像符号化装置。
  5. 【請求項５】 前記変換手段は、 前記画像データをフィルタリングするフィルタ手段と、 前記フィルタ手段の出力を間引く間引き手段と、 前記フィルタ手段に、前記画像データをフィルタリング
    するためのフィルタ係数を設定する設定手段とを有する
    ことを特徴とする請求項４に記載の画像符号化装置。
  6. 【請求項６】 前記符号化手段は、 前記変換係数を量子化し、量子化係数を出力する量子化
    手段と、 前記量子化手段より出力される前記量子化係数を可変長
    符号化する可変長符号化手段とを有することを特徴とす
    る請求項５に記載の画像符号化装置。
  7. 【請求項７】 前記設定手段は、あらかじめ用意された
    複数のフィルタ係数のセットのうちのいずれか１つを選
    択して、前記フィルタ手段に設定し、 前記可変長符号化手段は、前記量子化係数の他、前記設
    定手段により選択されたフィルタ係数のセットに対応す
    る、前記変換係数を逆ウェーブレット変換するためのフ
    ィルタ係数のセットを表す情報も可変長符号化すること
    を特徴とする請求項６に記載の画像符号化装置。
  8. 【請求項８】 前記可変長符号化手段は、前記量子化係
    数の他、前記設定手段により設定されたフィルタ係数に
    対応する、前記変換係数を逆ウェーブレット変換するた
    めのフィルタ係数、および前記フィルタ手段のタップ数
    も可変長符号化することを特徴とする請求項６に記載の
    画像符号化装置。
  9. 【請求項９】 前記符号化手段は、前記符号化ブロック
    の、前記画像データにおける位置を特定するための位置
    特定情報をさらに符号化することを特徴とする請求項１
    に記載の画像符号化装置。
  10. 【請求項１０】 前記位置特定情報は、前記符号化ブロ
    ックの大きさと、その符号化ブロックが何番目に符号化
    されたものかを示す情報とを含むことを特徴とする請求
    項９に記載の画像符号化装置。
  11. 【請求項１１】 画像データを、その特性に対応した大
    きさの符号化ブロックに分割し、 前記画像データを、前記符号化ブロック単位で符号化す
    ることを特徴とする画像符号化方法。
  12. 【請求項１２】 前記画像データに対し、複数の前記符
    号化ブロック単位で、所定の変換処理を施し、 前記変換処理の結果得られる変換係数を、前記符号化ブ
    ロック単位で符号化することを特徴とする請求項１１に
    記載の画像符号化方法。
  13. 【請求項１３】 画像データを、その特性に対応した大
    きさの符号化ブロックに分割し、その符号化ブロック単
    位で符号化した符号化データを、少なくとも含む伝送デ
    ータを復号化する画像復号化装置であって、 前記符号化データを、前記符号化ブロック単位で復号化
    する復号化手段を備えることを特徴とする画像復号化装
    置。
  14. 【請求項１４】 前記符号化データは、前記画像データ
    に対し、複数の前記符号化ブロック単位で、所定の変換
    処理を施して得られる変換係数を、前記符号化ブロック
    単位で符号化したものであり、 前記復号化手段は、前記符号化データを復号化すること
    により、前記変換係数を出力し、 前記変換係数に対し、複数の前記符号化ブロック単位
    で、前記変換処理とは逆の逆変換処理を施す逆変換手段
    をさらに備えることを特徴とする請求項１３に記載の画
    像復号化装置。
  15. 【請求項１５】 前記変換処理は、直交変換処理であ
    り、 前記逆変換手段は、前記変換係数に対し、逆直交変換処
    理を施すことを特徴とする請求項１４に記載の画像復号
    化装置。
  16. 【請求項１６】 前記変換処理は、ウェーブレット変換
    処理であり、 前記逆変換手段は、前記変換係数に対し、逆ウェーブレ
    ット変換処理を施すことを特徴とする請求項１５に記載
    の画像復号化装置。
  17. 【請求項１７】 前記伝送データは、あらかじめ用意さ
    れた、逆ウェーブレット変換を行うための複数のフィル
    タ係数のセットのうちのいずれか１つを選択ための情報
    をさらに含み、 前記逆変換手段は、前記情報に対応したフィルタ係数に
    基づいて、前記変換係数を、逆ウェーブレット変換する
    ことを特徴とする請求項１６に記載の画像復号化装置。
  18. 【請求項１８】 前記伝送データは、逆ウェーブレット
    変換を行うためのフィルタ係数と、前記フィルタ係数に
    よるフィルタリングを行うフィルタのタップ数とをさら
    に含み、 前記逆変換手段は、前記タップ数に基づいて、前記フィ
    ルタに、前記フィルタ係数を設定し、逆ウェーブレット
    変換を行うことを特徴とする請求項１６に記載の画像復
    号化装置。
  19. 【請求項１９】 前記伝送データは、前記符号化ブロッ
    クの、前記画像データにおける位置を特定するための位
    置特定情報をさらに含むことを特徴とする請求項１３に
    記載の画像復号化装置。
  20. 【請求項２０】 前記位置特定情報は、前記符号化ブロ
    ックの大きさと、その符号化ブロックが何番目に符号化
    されたものかを示す情報とを含み、 前記復号化手段は、前記位置情報に基づいて、前記符号
    化ブロックのマップを作成することで、その位置を特定
    しながら、前記画像データを復号することを特徴とする
    請求項１９に記載の画像復号化装置。
  21. 【請求項２１】 画像データを、その特性に対応した大
    きさの符号化ブロックに分割し、その符号化ブロック単
    位で符号化した符号化データを、少なくとも含む伝送デ
    ータを復号化する画像復号化方法であって、 前記符号化データを、前記符号化ブロック単位で復号化
    することを特徴とする画像復号化方法。
  22. 【請求項２２】 画像データを、その特性に対応した大
    きさの符号化ブロックに分割し、その符号化ブロック単
    位で符号化した符号化データが記録されていることを特
    徴とする記録媒体。
  23. 【請求項２３】 前記符号化データは、前記画像データ
    に対し、複数の前記符号化ブロック単位で、所定の変換
    処理を施して得られる変換係数を、前記符号化ブロック
    単位で符号化したものであることを特徴とする請求項２
    ２に記載の記録媒体。
  24. 【請求項２４】 前記変換処理は、ウェーブレット変換
    処理であり、 あらかじめ用意された、逆ウェーブレット変換を行うた
    めの複数のフィルタ係数のセットのうちのいずれか１つ
    を選択ための情報がさらに記録されていることを特徴と
    する請求項２３に記載の記録媒体。
  25. 【請求項２５】 前記変換処理は、ウェーブレット変換
    処理であり、 逆ウェーブレット変換を行うためのフィルタ係数と、前
    記フィルタ係数によるフィルタリングを行うフィルタの
    タップ数とがさらに記録されていることを特徴とする請
    求項２３に記載の記録媒体。
  26. 【請求項２６】 画像データを、その特性に対応した大
    きさの動き補償ブロックに分割する分割手段と、 前記画像データの動きベクトルを検出する動きベクトル
    検出手段と、 前記動きベクトルに基づいて動き補償を行うことによ
    り、前記動き補償ブロックの前記画像データについての
    予測画像を生成する予測画像生成手段と、 前記画像データと前記予測画像との差分を演算すること
    により、差分画像を生成する差分画像生成手段と、 前記差分画像および動きベクトルを符号化する符号化手
    段とを備えることを特徴とする画像符号化装置。
  27. 【請求項２７】 前記符号化手段は、所定の符号化ブロ
    ック単位で、前記差分画像を符号化することを特徴とす
    る請求項２６に記載の画像符号化装置。
  28. 【請求項２８】 前記符号化ブロックの大きさは可変ま
    たは固定とされていることを特徴とする請求項２７に記
    載の画像符号化装置。
  29. 【請求項２９】 前記符号化ブロックは、前記動き補償
    ブロックと同一のもの、または異なるものとされている
    ことを特徴とする請求項２７に記載の画像符号化装置。
  30. 【請求項３０】 前記差分画像を符号化するかどうかを
    決定する決定手段と、 前記符号化ブロックの前記画像データについての平均値
    を算出する平均値算出手段とをさらに備え、 前記符号化手段は、前記決定手段により前記差分画像を
    符号化することが決定されたとき、その差分画像を符号
    化し、前記決定手段により前記差分画像を符号化しない
    ことが決定されたとき、その差分画像に対応する前記画
    像データについての前記平均値と、その画像データとの
    差分値を符号化することを特徴とする請求項２７に記載
    の画像符号化装置。
  31. 【請求項３１】 前記符号化手段は、前記差分値ととも
    に、前記平均値も符号化することを特徴とする請求項３
    ０に記載の画像符号化装置。
  32. 【請求項３２】 前記符号化手段は、前記符号化ブロッ
    クが、複数の前記動き補償ブロックで構成されるとき、
    その符号化ブロックを構成する前記動き補償ブロックの
    数および大きさをさらに符号化することを特徴とする請
    求項３０に記載の画像符号化装置。
  33. 【請求項３３】 前記符号化手段は、前記決定手段によ
    り前記差分画像を符号化することが決定されたときの
    み、前記動きベクトル、並びに前記符号化ブロックを構
    成する前記動き補償ブロックの数および大きさを符号化
    することを特徴とする請求項３２に記載の画像符号化装
    置。
  34. 【請求項３４】 前記差分画像に対し、所定の変換処理
    を施し、変換係数を出力する変換手段をさらに備え、 前記符号化手段は、前記変換係数を符号化することを特
    徴とする請求項２６に記載の画像符号化装置。
  35. 【請求項３５】 前記変換処理は、直交変換処理である
    ことを特徴とする請求項３４に記載の画像符号化装置。
  36. 【請求項３６】 前記変換処理は、ウェーブレット変換
    処理であることを特徴とする請求項３５に記載の画像符
    号化装置。
  37. 【請求項３７】 前記分割手段は、前記画像データを、
    その画像データについての所定の予測誤差が最小となる
    ような大きさの前記動き補償ブロックに分割することを
    特徴とする請求項２６に記載の画像符号化装置。
  38. 【請求項３８】 画像データを、その特性に対応した大
    きさの動き補償ブロックに分割するとともに、前記画像
    データの動きベクトルを検出し、 前記動きベクトルに基づいて動き補償を行うことによ
    り、前記動き補償ブロックの前記画像データについての
    予測画像を生成し、 前記画像データと前記予測画像との差分を演算すること
    により、差分画像を生成し、 前記差分画像および動きベクトルを符号化することを特
    徴とする画像符号化方法。
  39. 【請求項３９】 画像データを、その特性に対応した大
    きさの動き補償ブロックに分割するとともに、その画像
    データの動きベクトルを検出し、前記動きベクトルに基
    づいて動き補償を行うことにより、前記動き補償ブロッ
    クの前記画像データについての予測画像を生成し、前記
    画像データと前記予測画像との差分を演算することによ
    り、差分画像を生成し、前記差分画像および動きベクト
    ルを符号化した符号化データを、少なくとも含む伝送デ
    ータを復号する画像復号化装置であって、 前記動きベクトルに基づいて動き補償を行うことによ
    り、前記動き補償ブロックの前記画像データについての
    前記予測画像を生成する予測画像生成手段と、 前記予測画像と前記差分画像とを加算することにより、
    前記画像データを復号する復号化手段とを備えることを
    特徴とする画像復号化装置。
  40. 【請求項４０】 前記差分画像は、所定の符号化ブロッ
    ク単位で符号化されていることを特徴とする請求項３９
    に記載の画像復号化装置。
  41. 【請求項４１】 前記伝送データは、前記符号化ブロッ
    クの前記画像データについての平均値と、その画像デー
    タとの差分値、および前記平均値をさらに含み、 前記差分値と前記平均値とを加算する加算手段をさらに
    備えることを特徴とする請求項４０に記載の画像復号化
    装置。
  42. 【請求項４２】 前記差分画像には、所定の変換処理が
    施されており、 前記符号化データに対し、前記変換処理とは逆の逆変換
    処理を施し、前記差分画像を出力する逆変換手段をさら
    に備えることを特徴とする請求項３９に記載の画像復号
    化装置。
  43. 【請求項４３】 前記変換処理は、直交変換処理である
    ことを特徴とする請求項４２に記載の画像復号化装置。
  44. 【請求項４４】 前記変換処理は、ウェーブレット変換
    処理であることを特徴とする請求項４３に記載の画像復
    号化装置。
  45. 【請求項４５】 画像データを、その特性に対応した大
    きさの動き補償ブロックに分割するとともに、その画像
    データの動きベクトルを検出し、前記動きベクトルに基
    づいて動き補償を行うことにより、前記動き補償ブロッ
    クの前記画像データについての予測画像を生成し、前記
    画像データと前記予測画像との差分を演算することによ
    り、差分画像を生成し、前記差分画像および動きベクト
    ルを符号化した符号化データを、少なくとも含む伝送デ
    ータを復号する画像復号化方法であって、 前記動きベクトルに基づいて動き補償を行うことによ
    り、前記動き補償ブロックの前記画像データについての
    前記予測画像を生成し、 前記予測画像と前記差分画像とを加算することにより、
    前記画像データを復号することを特徴とする画像復号化
    方法。
  46. 【請求項４６】 画像データを、その特性に対応した大
    きさの動き補償ブロックに分割するとともに、その画像
    データの動きベクトルを検出し、前記動きベクトルに基
    づいて動き補償を行うことにより、前記動き補償ブロッ
    クの前記画像データについての予測画像を生成し、前記
    画像データと前記予測画像との差分を演算することによ
    り、差分画像を生成し、前記差分画像および動きベクト
    ルを符号化した符号化データが記録されていることを特
    徴とする記録媒体。
  47. 【請求項４７】 前記差分画像は、所定の符号化ブロッ
    ク単位で符号化されていることを特徴とする請求項４６
    に記載の記録媒体。
  48. 【請求項４８】 前記伝送データは、前記符号化ブロッ
    クの前記画像データについての平均値と、その画像デー
    タとの差分値、および前記平均値がさらに記録されてい
    ることを特徴とする請求項４７に記載の記録媒体。
  49. 【請求項４９】 前記差分画像には、所定の変換処理が
    施されていることを特徴とする請求項４６に記載の記録
    媒体。
  50. 【請求項５０】 前記変換処理は、直交変換処理である
    ことを特徴とする請求項４９に記載の記録媒体。
  51. 【請求項５１】 前記変換処理は、ウェーブレット変換
    処理であることを特徴とする請求項５０に記載の記録媒
    体。
JP30350095A 1995-10-26 1995-10-26 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体 Expired - Lifetime JP3855286B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP30350095A JP3855286B2 (ja) 1995-10-26 1995-10-26 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体
US08/733,928 US6125143A (en) 1995-10-26 1996-10-18 Picture encoding device and method thereof, picture decoding device and method thereof, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP30350095A JP3855286B2 (ja) 1995-10-26 1995-10-26 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体

Publications (2)

Publication Number Publication Date
JPH09130801A true JPH09130801A (ja) 1997-05-16
JP3855286B2 JP3855286B2 (ja) 2006-12-06

Family

ID=17921724

Family Applications (1)

Application Number Title Priority Date Filing Date
JP30350095A Expired - Lifetime JP3855286B2 (ja) 1995-10-26 1995-10-26 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体

Country Status (2)

Country Link
US (1) US6125143A (ja)
JP (1) JP3855286B2 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998044637A1 (en) * 1997-03-28 1998-10-08 Sony Corporation Data coding method and device, data decoding method and device, and recording medium
WO1999016249A1 (en) * 1997-09-19 1999-04-01 Sharp Kabushiki Kaisha Image encoder and image decoder
JP2006191485A (ja) * 2005-01-07 2006-07-20 Ntt Docomo Inc 画像信号変換方法、画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
JP2009088933A (ja) * 2007-09-28 2009-04-23 Sanyo Electric Co Ltd 画像記録装置、画像補正装置及び撮像装置
JP2010009624A (ja) * 2009-10-07 2010-01-14 Ntt Docomo Inc 画像信号変換方法、画像信号逆変換方法、画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム、及び、画像復号プログラム
JP2010154577A (ja) * 2010-04-05 2010-07-08 Ntt Docomo Inc 画像信号変換方法、画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
JP2011228974A (ja) * 2010-04-21 2011-11-10 Nippon Hoso Kyokai <Nhk> 画像符号化装置、画像復号装置及びプログラム
JP2011234316A (ja) * 2010-04-30 2011-11-17 Nippon Hoso Kyokai <Nhk> 画像符号化装置、画像復号装置及びプログラム
JP2012105349A (ja) * 2005-09-26 2012-05-31 Mitsubishi Electric Corp 動画像符号化装置及び動画像復号装置
CN103517071A (zh) * 2012-06-21 2014-01-15 佳能株式会社 图像编码设备和图像编码方法
US9319680B2 (en) 2012-06-20 2016-04-19 Canon Kabushiki Kaisha Image encoding apparatus and its control method

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6549674B1 (en) 2000-10-12 2003-04-15 Picsurf, Inc. Image compression based on tiled wavelet-like transform using edge and non-edge filters
KR100708091B1 (ko) * 2000-06-13 2007-04-16 삼성전자주식회사 양방향 움직임 벡터를 이용한 프레임 레이트 변환 장치 및그 방법
US6795504B1 (en) * 2000-06-21 2004-09-21 Microsoft Corporation Memory efficient 3-D wavelet transform for video coding without boundary effects
JP3659157B2 (ja) * 2000-10-17 2005-06-15 日本電気株式会社 映像内容に重み付けをする画像圧縮方式
KR20020077884A (ko) * 2000-11-17 2002-10-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 블록 매칭 프로세스를 사용하는 비디오 코딩 방법
JP3702778B2 (ja) * 2000-11-27 2005-10-05 ソニー株式会社 画像符号化装置及び方法
US6845180B2 (en) * 2001-03-16 2005-01-18 Sharp Laboratories Of America, Inc. Predicting ringing artifacts in digital images
EP2819411B1 (en) * 2001-09-14 2018-08-29 NTT DoCoMo, Inc. Coding method and decoding method
CN101448162B (zh) 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP3743384B2 (ja) * 2002-04-19 2006-02-08 ソニー株式会社 画像符号化装置及び方法、並びに画像復号装置及び方法
JP2003319391A (ja) * 2002-04-26 2003-11-07 Sony Corp 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム
ATE314791T1 (de) * 2002-10-30 2006-01-15 Visiowave S A Verfahren zur berechnung von zeitlichen wavelet- koeffizienten eines gop
JP3695451B2 (ja) * 2003-05-28 2005-09-14 セイコーエプソン株式会社 画像サイズの変更方法及装置
NO318973B1 (no) 2003-07-01 2005-05-30 Tandberg Telecom As Fremgangsmate for stoyreduksjon
US10554985B2 (en) 2003-07-18 2020-02-04 Microsoft Technology Licensing, Llc DC coefficient signaling at small quantization step sizes
US7437007B1 (en) * 2003-10-31 2008-10-14 Hewlett-Packard Development Company, L.P. Region-of-interest editing of a video stream in the compressed domain
KR100999091B1 (ko) * 2003-11-17 2010-12-07 삼성전자주식회사 임의 크기의 가변 블록을 이용한 영상 압축 방법 및 장치
US20060034531A1 (en) * 2004-05-10 2006-02-16 Seiko Epson Corporation Block noise level evaluation method for compressed images and control method of imaging device utilizing the evaluation method
JP2006157730A (ja) * 2004-11-30 2006-06-15 Toshiba Corp 映像データ演算装置
JP4501676B2 (ja) * 2004-12-22 2010-07-14 日本電気株式会社 動画像圧縮符号化方法と動画像圧縮符号化装置並びにプログラム
JP4869653B2 (ja) * 2005-08-03 2012-02-08 オリンパス株式会社 画像処理装置
US7894527B2 (en) * 2005-09-16 2011-02-22 Sony Corporation Multi-stage linked process for adaptive motion vector sampling in video compression
KR100817057B1 (ko) * 2006-08-30 2008-03-26 삼성전자주식회사 동일한 픽셀 데이터 그룹에 포함되는 픽셀 데이터들을메모리의 동일한 뱅크 어드레스로 매핑하는 매핑 방법 및비디오 시스템
US8189676B2 (en) * 2007-04-05 2012-05-29 Hong Kong University Of Science & Technology Advance macro-block entropy coding for advanced video standards
US8503527B2 (en) 2008-10-03 2013-08-06 Qualcomm Incorporated Video coding with large macroblocks
JP4670947B2 (ja) * 2008-12-05 2011-04-13 ソニー株式会社 情報処理装置および方法
CN104954799B (zh) 2009-10-21 2018-04-03 Sk电信有限公司 视频编码方法
JP2011166327A (ja) * 2010-02-05 2011-08-25 Sony Corp 画像処理装置および方法
TWI413019B (zh) * 2010-12-07 2013-10-21 Novatek Microelectronics Corp 影像調整電路及影像調整方法
US9286643B2 (en) 2011-03-01 2016-03-15 Applaud, Llc Personalized memory compilation for members of a group and collaborative method to build a memory compilation
US9560632B2 (en) * 2011-08-12 2017-01-31 Qualcomm Incorporated Devices for title of invention reduced overhead paging
US9560630B2 (en) 2011-08-12 2017-01-31 Qualcomm Incorporated Devices for reduced overhead paging
WO2013157825A1 (ko) 2012-04-16 2013-10-24 한국전자통신연구원 영상 부호화/복호화 방법 및 장치
US10630748B1 (en) * 2018-05-01 2020-04-21 Amazon Technologies, Inc. Video-based encoder alignment
US10958987B1 (en) 2018-05-01 2021-03-23 Amazon Technologies, Inc. Matching based on video data
US10630990B1 (en) 2018-05-01 2020-04-21 Amazon Technologies, Inc. Encoder output responsive to quality metric information
KR20210113464A (ko) * 2020-03-05 2021-09-16 삼성전자주식회사 이미징 장치 및 이를 포함하는 전자 기기

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5081592A (en) * 1987-08-05 1992-01-14 Tektronix, Inc. Test system for acquiring, calculating and displaying representations of data sequences
US4941193A (en) * 1987-10-02 1990-07-10 Iterated Systems, Inc. Methods and apparatus for image compression by iterated function system
US5065447A (en) * 1989-07-05 1991-11-12 Iterated Systems, Inc. Method and apparatus for processing digital data
US4974187A (en) * 1989-08-02 1990-11-27 Aware, Inc. Modular digital signal processing system
US5014134A (en) * 1989-09-11 1991-05-07 Aware, Inc. Image compression method and apparatus
US5101446A (en) * 1990-05-31 1992-03-31 Aware, Inc. Method and apparatus for coding an image
JPH0813138B2 (ja) * 1990-11-28 1996-02-07 松下電器産業株式会社 画像符号化装置
DE69312132T2 (de) * 1992-03-17 1998-01-15 Sony Corp Bildkompressionsgerät
KR0134871B1 (ko) * 1992-07-17 1998-04-22 사또오 후미오 고능률 부호화 복호화 시스템
TW224553B (en) * 1993-03-01 1994-06-01 Sony Co Ltd Method and apparatus for inverse discrete consine transform and coding/decoding of moving picture
GB2281465B (en) * 1993-08-27 1997-06-04 Sony Uk Ltd Image data compression
JP3447771B2 (ja) * 1993-09-02 2003-09-16 富士通株式会社 画像データの符号化方法及び復元方法並びに装置
EP0679031B1 (en) * 1993-11-08 2001-08-22 Sony Corporation Encoding and decoding picture signals
WO1995019683A1 (en) * 1994-01-14 1995-07-20 Houston Advanced Research Center Boundary-spline-wavelet compression for video images
JP3336754B2 (ja) * 1994-08-19 2002-10-21 ソニー株式会社 デジタルビデオ信号の記録方法及び記録装置

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998044637A1 (en) * 1997-03-28 1998-10-08 Sony Corporation Data coding method and device, data decoding method and device, and recording medium
US6332043B1 (en) 1997-03-28 2001-12-18 Sony Corporation Data encoding method and apparatus, data decoding method and apparatus and recording medium
WO1999016249A1 (en) * 1997-09-19 1999-04-01 Sharp Kabushiki Kaisha Image encoder and image decoder
US6956974B1 (en) 1997-09-19 2005-10-18 Sharp Kabushiki Kaisha Image encoder and image decoder
JP2006191485A (ja) * 2005-01-07 2006-07-20 Ntt Docomo Inc 画像信号変換方法、画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
US9503735B2 (en) 2005-09-26 2016-11-22 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
US9060157B2 (en) 2005-09-26 2015-06-16 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
US11627317B2 (en) 2005-09-26 2023-04-11 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
US11039136B2 (en) 2005-09-26 2021-06-15 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
US10728550B2 (en) 2005-09-26 2020-07-28 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
JP2012105349A (ja) * 2005-09-26 2012-05-31 Mitsubishi Electric Corp 動画像符号化装置及び動画像復号装置
US10142632B2 (en) 2005-09-26 2018-11-27 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
JP2014017867A (ja) * 2005-09-26 2014-01-30 Mitsubishi Electric Corp 動画像復号装置及び動画像復号方法
JP2014116950A (ja) * 2005-09-26 2014-06-26 Mitsubishi Electric Corp 動画像復号装置及び動画像復号方法
US9591308B2 (en) 2005-09-26 2017-03-07 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
JP2015156721A (ja) * 2005-09-26 2015-08-27 三菱電機株式会社 ビットストリーム
US9380306B2 (en) 2005-09-26 2016-06-28 Mitsubishi Electric Corporation Moving image coding apparatus and moving image decoding apparatus
JP2009088933A (ja) * 2007-09-28 2009-04-23 Sanyo Electric Co Ltd 画像記録装置、画像補正装置及び撮像装置
JP2010009624A (ja) * 2009-10-07 2010-01-14 Ntt Docomo Inc 画像信号変換方法、画像信号逆変換方法、画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム、及び、画像復号プログラム
JP2010154577A (ja) * 2010-04-05 2010-07-08 Ntt Docomo Inc 画像信号変換方法、画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
JP2011228974A (ja) * 2010-04-21 2011-11-10 Nippon Hoso Kyokai <Nhk> 画像符号化装置、画像復号装置及びプログラム
JP2011234316A (ja) * 2010-04-30 2011-11-17 Nippon Hoso Kyokai <Nhk> 画像符号化装置、画像復号装置及びプログラム
US9319680B2 (en) 2012-06-20 2016-04-19 Canon Kabushiki Kaisha Image encoding apparatus and its control method
CN103517071A (zh) * 2012-06-21 2014-01-15 佳能株式会社 图像编码设备和图像编码方法

Also Published As

Publication number Publication date
JP3855286B2 (ja) 2006-12-06
US6125143A (en) 2000-09-26

Similar Documents

Publication Publication Date Title
JP3855286B2 (ja) 画像符号化装置および画像符号化方法、画像復号化装置および画像復号化方法、並びに記録媒体
US6167157A (en) Method of reducing quantization noise generated during a decoding process of image data and device for decoding image data
US5777678A (en) Predictive sub-band video coding and decoding using motion compensation
KR100289587B1 (ko) 화상 신호 부호화 방법 및 화상 신호 부호화 장치, 화상 신호 복호화 방법 및 화상 신호 복호화장치,및 화상 신호 기록매체
US5485279A (en) Methods and systems for encoding and decoding picture signals and related picture-signal records
US5731850A (en) Hybrid hierarchial/full-search MPEG encoder motion estimation
US6301304B1 (en) Architecture and method for inverse quantization of discrete cosine transform coefficients in MPEG decoders
US6587509B1 (en) Reducing undesirable effects of an emphasis processing operation performed on a moving image by adding a noise signal to a decoded uncompressed signal
JP3338639B2 (ja) ディジタル・ビデオ・デコーダおよびディジタル・ビデオ信号をデコードする方法
US5805225A (en) Method and apparatus for variable resolution video picture coding/decoding
JPH08237669A (ja) 画像信号処理装置、画像信号処理方法および画像信号復号化装置
JPH11262018A (ja) 動き補償符号化装置、動き補償符号化方法、及び動き補償符号記録媒体
JP3911035B2 (ja) 動画像符号化方法及び動画像符号化装置
EP0735769A2 (en) Half pel motion estimation method for B pictures
PL175445B1 (pl) Sposób i urządzenie do kodowania sygnału wizyjnego
US20070076802A1 (en) Video presentation at fractional speed factor using time domain interpolation
JP3980659B2 (ja) 動画像符号化方法及び装置、動画像復号化方法及び装置。
JPH09182085A (ja) 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像伝送方法及び記録媒体
JP2000049617A (ja) 符号化高精細ビデオ信号から復号化低解像度ビデオ信号を得るためのシステムの方法
JPH08172628A (ja) 変換符号化された画像データの復号化時に生じる量子化ノイズの低減方法及び変換符号化された画像データの復号化装置
JP3087864B2 (ja) Ｈｄｔｖ信号用サブバンド符号化方式
JPH07107464A (ja) 画像符号化装置および復号化装置
JP2001128183A (ja) 動画像符号化方法、動画像符号化装置、動画像復号方法、動画像復号装置、および動画像符号化、復号プログラムを記憶した記憶媒体
JPH06334983A (ja) 画像信号の符号化方法、符号化装置、復号化方法及び復号化装置
WO2005009045A1 (en) Encoding method and device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060822

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060904

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090922

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100922

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110922

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110922

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110922

Year of fee payment: 5

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110922

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120922

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130922

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term