JPH10276097A - 符号化装置および方法、並びに復号装置および方法 - Google Patents
符号化装置および方法、並びに復号装置および方法Info
- Publication number
- JPH10276097A JPH10276097A JP7980297A JP7980297A JPH10276097A JP H10276097 A JPH10276097 A JP H10276097A JP 7980297 A JP7980297 A JP 7980297A JP 7980297 A JP7980297 A JP 7980297A JP H10276097 A JPH10276097 A JP H10276097A
- Authority
- JP
- Japan
- Prior art keywords
- quantization
- data
- mismatch
- methods
- inverse quantization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【課題】 最適な組み合わせを指定し、高能率の符号化
を行うことができるようにする。 【解決手段】 スイッチＳＷ１，ＳＷ２により、Ｈ．２
６１／３モードによる量子化、または、設定器１３２に
よる量子化行列の設定後、量子化器１２２によるＭＰＥ
Ｇ１／２型の量子化のいずれかが選択され、スイッチＳ
Ｗ２１，ＳＷ２２により、Ｈ．２６１／３モードでの逆
量子化器１２３、ミスマッチ制御器１４１、クリッピン
グ器１４３による符号化処理、または、ＭＰＥＧ１モー
ドでの逆量子化器１２４、ミスマッチ制御器１５１、ク
リッピング器１５２による符号化処理、または、ＭＰＥ
Ｇ２モードでの逆量子化器１２５、クリッピング器１５
３、ミスマッチ制御器１５４による符号化処理のいずれ
かが選択され、実行される。
を行うことができるようにする。 【解決手段】 スイッチＳＷ１，ＳＷ２により、Ｈ．２
６１／３モードによる量子化、または、設定器１３２に
よる量子化行列の設定後、量子化器１２２によるＭＰＥ
Ｇ１／２型の量子化のいずれかが選択され、スイッチＳ
Ｗ２１，ＳＷ２２により、Ｈ．２６１／３モードでの逆
量子化器１２３、ミスマッチ制御器１４１、クリッピン
グ器１４３による符号化処理、または、ＭＰＥＧ１モー
ドでの逆量子化器１２４、ミスマッチ制御器１５１、ク
リッピング器１５２による符号化処理、または、ＭＰＥ
Ｇ２モードでの逆量子化器１２５、クリッピング器１５
３、ミスマッチ制御器１５４による符号化処理のいずれ
かが選択され、実行される。
Description
【０００１】
【発明の属する技術分野】本発明は、符号化装置および
方法、並びに復号装置および方法に関し、例えば、複数
の量子化および逆量子化の方法、量子化行列の利用方
法、ＩＤＣＴミスマッチの対策方法等を用意し、最適な
方法を組み合わせることにより、高能率の符号化および
復号を行うようにした符号化装置および方法、並びに復
号装置および方法に関する。
方法、並びに復号装置および方法に関し、例えば、複数
の量子化および逆量子化の方法、量子化行列の利用方
法、ＩＤＣＴミスマッチの対策方法等を用意し、最適な
方法を組み合わせることにより、高能率の符号化および
復号を行うようにした符号化装置および方法、並びに復
号装置および方法に関する。
【０００２】
【従来の技術】例えば、テレビ会議システム、テレビ電
話システムなどのように、動画像信号を遠隔地に伝送す
るシステムにおいては、伝送路を効率良く利用するた
め、映像信号のライン相関やフレーム間相関を利用し
て、画像信号を圧縮符号化するようになされている。
話システムなどのように、動画像信号を遠隔地に伝送す
るシステムにおいては、伝送路を効率良く利用するた
め、映像信号のライン相関やフレーム間相関を利用し
て、画像信号を圧縮符号化するようになされている。
【０００３】動画像の高能率符号化方法の代表的なもの
として、ＭＰＥＧ（蓄積用動画像符号化）方式がある。
これには、ISO/IEC JTC1/SC29/WG11にて議論され標準案
として提案されたＭＰＥＧ１、ＭＰＥＧ２、現在議論さ
れているＭＰＥＧ４等があり、主に動き補償予測符号化
とＤＣＴ（Discrete Cosine Transform）符号化を組み
合わせたハイブリッド方式が採用されている。
として、ＭＰＥＧ（蓄積用動画像符号化）方式がある。
これには、ISO/IEC JTC1/SC29/WG11にて議論され標準案
として提案されたＭＰＥＧ１、ＭＰＥＧ２、現在議論さ
れているＭＰＥＧ４等があり、主に動き補償予測符号化
とＤＣＴ（Discrete Cosine Transform）符号化を組み
合わせたハイブリッド方式が採用されている。
【０００４】以下では、ＭＰＥＧ４のＶＭ６．０（ISO/
IEC JTC1/SC29/WG11 MPEG96/N1582Sevilla, February 1
996）を例にし、説明を行なう。
IEC JTC1/SC29/WG11 MPEG96/N1582Sevilla, February 1
996）を例にし、説明を行なう。
【０００５】図１３、図１４を用いて従来の動画像符号
化方法、および復号方法について説明する。図１３は符
号化器を、図１４は復号器の構成例を示している。動き
ベクトル検出器１０１は、フレームメモリ１０２に保存
された入力画像から、動きベクトルｖを検出する。動き
ベクトルの検出法としては、通常、１６画素×１６画素
のブロック単位でのブロックマッチングが行われる。ま
た、より高い精度を実現するために、半画素単位のマッ
チングが行われる。
化方法、および復号方法について説明する。図１３は符
号化器を、図１４は復号器の構成例を示している。動き
ベクトル検出器１０１は、フレームメモリ１０２に保存
された入力画像から、動きベクトルｖを検出する。動き
ベクトルの検出法としては、通常、１６画素×１６画素
のブロック単位でのブロックマッチングが行われる。ま
た、より高い精度を実現するために、半画素単位のマッ
チングが行われる。
【０００６】動き補償器１０３は図示せぬフレームメモ
リを備え、現在、符号化すべき画像の各位置の画素値
を、すでに符号化／復号が終了し、このフレームメモリ
に保存されている画像から予測する。時刻ｔに入力され
た画像上の位置（ｉ，ｊ）における画素値Ｉ［ｉ，ｊ，
ｔ］の予測値Ｉ2［ｉ，ｊ，ｔ］は、この位置に対応す
る動きベクトルをｖ＝（ｖｘ（ｉ，ｊ，ｔ），ｖｙ
（ｉ，ｊ，ｔ））を用いて、次式のように決定される。
リを備え、現在、符号化すべき画像の各位置の画素値
を、すでに符号化／復号が終了し、このフレームメモリ
に保存されている画像から予測する。時刻ｔに入力され
た画像上の位置（ｉ，ｊ）における画素値Ｉ［ｉ，ｊ，
ｔ］の予測値Ｉ2［ｉ，ｊ，ｔ］は、この位置に対応す
る動きベクトルをｖ＝（ｖｘ（ｉ，ｊ，ｔ），ｖｙ
（ｉ，ｊ，ｔ））を用いて、次式のように決定される。
【０００７】 Ｉ2［ｉ，ｊ，ｔ］＝ （Ｉ［ｉ2，ｊ2，ｔ−Ｔ］＋Ｉ［ｉ2＋１，ｊ2，ｔ−Ｔ］＋Ｉ［ｉ2，ｊ2＋ １，ｔ−Ｔ］＋Ｉ［ｉ2＋１，ｊ2＋１，ｔ−Ｔ］）／４ ｉ2＝ｉｎｔ（ｉ＋ｖｘ（ｉ，ｊ，ｔ）Ｔ） ｊ2＝ｉｎｔ（ｊ＋ｖｙ（ｉ，ｊ，ｔ）Ｔ） ・・・（式１）
【０００８】ここで、Ｔは、現在予測を行っている画像
Iが入力された時刻と、フレームメモリ上にある画像が
入力された時刻の差であり、式（１）の右辺のＩ
［ｉ2，ｊ2，ｔ−Ｔ］，Ｉ［ｉ2＋１，ｊ2，ｔ−Ｔ］，
Ｉ［ｉ2，ｊ2＋１，ｔ−Ｔ］，Ｉ［ｉ2＋１，ｊ2＋１，
ｔ−Ｔ］は、図示せぬフレームメモリ上の画素値を表わ
す。また、ｉｎｔ（ｘ）はｘを越えない最大の整数値を
表している。
Iが入力された時刻と、フレームメモリ上にある画像が
入力された時刻の差であり、式（１）の右辺のＩ
［ｉ2，ｊ2，ｔ−Ｔ］，Ｉ［ｉ2＋１，ｊ2，ｔ−Ｔ］，
Ｉ［ｉ2，ｊ2＋１，ｔ−Ｔ］，Ｉ［ｉ2＋１，ｊ2＋１，
ｔ−Ｔ］は、図示せぬフレームメモリ上の画素値を表わ
す。また、ｉｎｔ（ｘ）はｘを越えない最大の整数値を
表している。
【０００９】加算器１０４は、現在符号化すべき画素の
値と、動き補償器１０３によって算出された予測値との
差分を計算する。ＤＣＴ（Descrete Cosine Transfor
m）器１０５は、差分値で構成された８画素×８画素の
ブロックに対して２次元ＤＣＴを施す。
値と、動き補償器１０３によって算出された予測値との
差分を計算する。ＤＣＴ（Descrete Cosine Transfor
m）器１０５は、差分値で構成された８画素×８画素の
ブロックに対して２次元ＤＣＴを施す。
【００１０】次に、ＤＣＴ器１０５によって得られたＤ
ＣＴ係数ｃに対して、適当なステップサイズＱを用いて
式（２）に象徴される量子化処理を行う。
ＣＴ係数ｃに対して、適当なステップサイズＱを用いて
式（２）に象徴される量子化処理を行う。
【００１１】Ｃ2＝ｉｎｔ（Ｃ／Ｑ） ・・・（式２）
【００１２】この量子化を行う処理方法は実際には二通
り用意されており、フラグQ_modeと連動したスイッチＳ
Ｗ１，ＳＷ２によって切り替えられる。フラグQ_mode
は、量子化等を行う際の処理方法の組み合わせを示して
おり、Ｈ．２６１あるいはＨ．２６３（以下、Ｈ．２６
１／３と示す）のモード、ＭＰＥＧ１あるいはＭＰＥＧ
２（以下、ＭＰＥＧ１／２と示す）のモードのいずれか
が、何らかの方法によってあらかじめ設定されている。
Ｈ．２６１／３モードにおいては量子化器１２１でＨ．
２６１／３型の量子化が行われる。ＭＰＥＧ１／２モー
ドにおいては、ＭＰＥＧ１／２型の量子化行列がＭＰＥ
Ｇ１／２型のＱ行列の設定器（以下では、適宜、設定器
と略記する）１３２で設定された後、量子化器１２２で
ＭＰＥＧ１／２型の量子化が行われる。それぞれの量子
化の処理方法および量子化行列の詳細については、後述
する。
り用意されており、フラグQ_modeと連動したスイッチＳ
Ｗ１，ＳＷ２によって切り替えられる。フラグQ_mode
は、量子化等を行う際の処理方法の組み合わせを示して
おり、Ｈ．２６１あるいはＨ．２６３（以下、Ｈ．２６
１／３と示す）のモード、ＭＰＥＧ１あるいはＭＰＥＧ
２（以下、ＭＰＥＧ１／２と示す）のモードのいずれか
が、何らかの方法によってあらかじめ設定されている。
Ｈ．２６１／３モードにおいては量子化器１２１でＨ．
２６１／３型の量子化が行われる。ＭＰＥＧ１／２モー
ドにおいては、ＭＰＥＧ１／２型の量子化行列がＭＰＥ
Ｇ１／２型のＱ行列の設定器（以下では、適宜、設定器
と略記する）１３２で設定された後、量子化器１２２で
ＭＰＥＧ１／２型の量子化が行われる。それぞれの量子
化の処理方法および量子化行列の詳細については、後述
する。
【００１３】量子化の施されたＤＣＴ係数は、可変長符
号化器１０９、および逆量子化器１２３または逆量子化
器１２４に供給される。逆量子化器１２３，１２４で
も、量子化器で用いられたのと同じステップサイズによ
り、次式（３）に象徴される逆量子化処理が行われる。
号化器１０９、および逆量子化器１２３または逆量子化
器１２４に供給される。逆量子化器１２３，１２４で
も、量子化器で用いられたのと同じステップサイズによ
り、次式（３）に象徴される逆量子化処理が行われる。
【００１４】Ｃ3＝Ｃ2×Ｑ ・・・（式３）
【００１５】この逆量子化を行う処理方法も実際には二
通り用意されており、フラグQ_modeと連動したスイッチ
ＳＷ３，ＳＷ４によって切り替えられる。Ｈ．２６１／
３モードにおいては、逆量子化器１２３でＨ．２６１／
３型の逆量子化が行われ、ミスマッチ制御器１４１でＤ
ＣＴ係数を奇数化するミスマッチ制御が行われた後、ク
リッピング器１４３によってＤＣＴ係数がクリッピング
される。ＭＰＥＧ１／２モードにおいては、１２４の逆
量子化器でＭＰＥＧ１／２型の逆量子化が行われた後、
クリッピング器１４３によってＤＣＴ係数がクリッピン
グされる。それぞれの逆量子化の処理方法およびミスマ
ッチの制御方法の詳細については、後述する。
通り用意されており、フラグQ_modeと連動したスイッチ
ＳＷ３，ＳＷ４によって切り替えられる。Ｈ．２６１／
３モードにおいては、逆量子化器１２３でＨ．２６１／
３型の逆量子化が行われ、ミスマッチ制御器１４１でＤ
ＣＴ係数を奇数化するミスマッチ制御が行われた後、ク
リッピング器１４３によってＤＣＴ係数がクリッピング
される。ＭＰＥＧ１／２モードにおいては、１２４の逆
量子化器でＭＰＥＧ１／２型の逆量子化が行われた後、
クリッピング器１４３によってＤＣＴ係数がクリッピン
グされる。それぞれの逆量子化の処理方法およびミスマ
ッチの制御方法の詳細については、後述する。
【００１６】逆量子化されクリッピングが施されたデー
タは、ＩＤＣＴ（Inverse DCT）器１０６によって逆Ｄ
ＣＴが行われ、画素値の差分値が復元される。
タは、ＩＤＣＴ（Inverse DCT）器１０６によって逆Ｄ
ＣＴが行われ、画素値の差分値が復元される。
【００１７】この差分値は、加算器１１０によって動き
補償器１０３から出力される予測値と加算されて画素値
のデータとなり、動き補償器１０３に送られて動き補償
器１０３が備える図示せぬフレームメモリに保存され
る。
補償器１０３から出力される予測値と加算されて画素値
のデータとなり、動き補償器１０３に送られて動き補償
器１０３が備える図示せぬフレームメモリに保存され
る。
【００１８】可変長符号化器１０９は、量子化器１２１
あるいは量子化器１２２によって得られた量子化された
ＤＣＴ係数、動きベクトル検出器１０１によって得られ
た動きベクトルｖ、および何らかの方法によって設定さ
れたフラグQ_modeに対して可変長符号化処理を施し、符
号化ビット列を出力する。
あるいは量子化器１２２によって得られた量子化された
ＤＣＴ係数、動きベクトル検出器１０１によって得られ
た動きベクトルｖ、および何らかの方法によって設定さ
れたフラグQ_modeに対して可変長符号化処理を施し、符
号化ビット列を出力する。
【００１９】一方、図１４に示した復号器においては、
はじめに逆可変長符号化器２０９によって符号化器（図
１３）における可変長符号化器１０９の逆処理が施さ
れ、符号化ビット列から、量子化が施されたＤＣＴ係
数、動きベクトルｖ、およびフラグQ_modeを復元する。
フラグQ_modeは連動したスイッチＳＷ１１，ＳＷ１２を
作動させ、得られたＤＣＴ係数は逆量子化器２２３，ま
たは設定器２３２を介して逆量子化器２２４に、動きベ
クトルｖは動き補償器２０３にそれぞれ供給される。
はじめに逆可変長符号化器２０９によって符号化器（図
１３）における可変長符号化器１０９の逆処理が施さ
れ、符号化ビット列から、量子化が施されたＤＣＴ係
数、動きベクトルｖ、およびフラグQ_modeを復元する。
フラグQ_modeは連動したスイッチＳＷ１１，ＳＷ１２を
作動させ、得られたＤＣＴ係数は逆量子化器２２３，ま
たは設定器２３２を介して逆量子化器２２４に、動きベ
クトルｖは動き補償器２０３にそれぞれ供給される。
【００２０】逆量子化を行う処理方法も実際には二通り
用意されており、フラグQ_modeと連動したスイッチＳＷ
１１，ＳＷ１２によって切り替えられる。Ｈ．２６１／
３モードにおいては量子化器２２３でＨ．２６１／３型
の逆量子化が行われ、ミスマッチ制御器２４１でＤＣＴ
係数を奇数化するミスマッチ制御が行われた後、クリッ
ピング器２４３によってＤＣＴ係数がクリッピングされ
る。ＭＰＥＧ１／２モードにおいては、ＭＰＥＧ１／２
型の量子化行列が設定器２３２で設定された後、逆量子
化器２２４でＭＰＥＧ１／２型の逆量子化が行われ、ク
リッピング器２４４によってＤＣＴ係数がクリッピング
される。なお、双方のモードで用いられる処理器群は、
図１３に示した符号化器のものと同一のものを用いるこ
とができる。
用意されており、フラグQ_modeと連動したスイッチＳＷ
１１，ＳＷ１２によって切り替えられる。Ｈ．２６１／
３モードにおいては量子化器２２３でＨ．２６１／３型
の逆量子化が行われ、ミスマッチ制御器２４１でＤＣＴ
係数を奇数化するミスマッチ制御が行われた後、クリッ
ピング器２４３によってＤＣＴ係数がクリッピングされ
る。ＭＰＥＧ１／２モードにおいては、ＭＰＥＧ１／２
型の量子化行列が設定器２３２で設定された後、逆量子
化器２２４でＭＰＥＧ１／２型の逆量子化が行われ、ク
リッピング器２４４によってＤＣＴ係数がクリッピング
される。なお、双方のモードで用いられる処理器群は、
図１３に示した符号化器のものと同一のものを用いるこ
とができる。
【００２１】また、ＩＤＣＴ器２０６も図１３に示した
符号化器のＩＤＣＴ器１０６と同一のものであり、ＩＤ
ＣＴが施されて画素値の差分値が復元される。
符号化器のＩＤＣＴ器１０６と同一のものであり、ＩＤ
ＣＴが施されて画素値の差分値が復元される。
【００２２】この差分値は、加算器２１０によって、動
き補償器２０３によってすでに生成されている予測値と
加算されて画素値のデータとなり、図１３に示した符号
化器への入力画像に対応する画像が再構成される。復号
された画像の各画素値は、予測画像を生成するために、
動き補償器２０３に備えられた図示せぬフレームメモリ
に保存される。
き補償器２０３によってすでに生成されている予測値と
加算されて画素値のデータとなり、図１３に示した符号
化器への入力画像に対応する画像が再構成される。復号
された画像の各画素値は、予測画像を生成するために、
動き補償器２０３に備えられた図示せぬフレームメモリ
に保存される。
【００２３】動き補償器２０３は、図１３に示した符号
化器の動き補償器１０３と同一のものであり、逆可変長
符号化器２０９によって得られた動きベクトルｖ、およ
びすでにこの動き補償器２０３が備える図示せぬフレー
ムメモリに保存されている画像を用いて、現在復号すべ
き画像の各画素値の予測を行う。
化器の動き補償器１０３と同一のものであり、逆可変長
符号化器２０９によって得られた動きベクトルｖ、およ
びすでにこの動き補償器２０３が備える図示せぬフレー
ムメモリに保存されている画像を用いて、現在復号すべ
き画像の各画素値の予測を行う。
【００２４】通常は、上記予測値との差分を符号化する
画像間符号化（INTER coding）を行なう。しかし、現在
符号化すべき画素の値と動き補償器１０３によって算出
された予測値との差分が大きい場合、符号化ビット量が
多くなることを防ぐために、以下に示す画像内符号化
（INTRA coding）を行なう場合もある。すなわち、ブロ
ック内の各画素値について、差分をとらずにそのままＤ
ＣＴ器１０５に送り、その画素値に対して符号化を行な
う。
画像間符号化（INTER coding）を行なう。しかし、現在
符号化すべき画素の値と動き補償器１０３によって算出
された予測値との差分が大きい場合、符号化ビット量が
多くなることを防ぐために、以下に示す画像内符号化
（INTRA coding）を行なう場合もある。すなわち、ブロ
ック内の各画素値について、差分をとらずにそのままＤ
ＣＴ器１０５に送り、その画素値に対して符号化を行な
う。
【００２５】以下では、量子化器として用意されている
二通りの量子化および逆量子化の処理方法について説明
する。
二通りの量子化および逆量子化の処理方法について説明
する。
【００２６】Ｈ．２６１／３型の量子化は、例えば図１
５に示したように、量子化後に０となる範囲が量子化幅
に比べて広く設けられているような量子化である（dead
zoneの有る量子化）。ＶＭ６．０では次式（４）のよ
うに行われ、ＣＯＦはＤＣＴ係数、ＬＥＶＥＬは量子化
後のＤＣＴ係数の絶対値、ＱＰは量子化ステップサイ
ズ、ＱＣＯＦは量子化後のＤＣＴ係数を表わす。
５に示したように、量子化後に０となる範囲が量子化幅
に比べて広く設けられているような量子化である（dead
zoneの有る量子化）。ＶＭ６．０では次式（４）のよ
うに行われ、ＣＯＦはＤＣＴ係数、ＬＥＶＥＬは量子化
後のＤＣＴ係数の絶対値、ＱＰは量子化ステップサイ
ズ、ＱＣＯＦは量子化後のＤＣＴ係数を表わす。
【００２７】 Ｆｏｒ ＩＮＴＲＡ：ＬＥＶＥＬ＝｜ＣＯＦ｜／（２×ＱＰ） Ｆｏｒ ＩＮＴＥＲ：ＬＥＶＥＬ＝（｜ＣＯＦ｜−ＱＰ／２）／（２×ＱＰ） ＱＣＯＦ＝ｓｉｇｎ（ＣＯＦ）×ＬＥＶＥＬ ・・・（式４）
【００２８】Ｈ．２６１／３型の逆量子化は、次式
（５）のように行われる。ＣＯＦ2は逆量子化後のＤＣ
Ｔ係数を表わす。
（５）のように行われる。ＣＯＦ2は逆量子化後のＤＣ
Ｔ係数を表わす。
【００２９】 ｉｆ ＬＥＶＥＬ＝０：｜ＣＯＦ2｜＝０ ｉｆ ＬＥＶＥＬ≠０：｜ＣＯＦ2｜＝２×ＱＰ×ＬＥＶＥＬ＋ＱＰ ＣＯＦ2＝ｓｉｇｎ（ＣＯＦ）×｜ＣＯＦ2｜ ・・・（式５）
【００３０】ＭＰＥＧ１／２型の量子化は、例えば図１
６に示したように、量子化後に０となる範囲が量子化幅
と同一であるような量子化である（dead zoneの無い量
子化）。ＶＭ６．０では次式（６）のように行われ、定
数ｑ，ｐは現時点でｐ＝３，ｑ＝４となっている。
６に示したように、量子化後に０となる範囲が量子化幅
と同一であるような量子化である（dead zoneの無い量
子化）。ＶＭ６．０では次式（６）のように行われ、定
数ｑ，ｐは現時点でｐ＝３，ｑ＝４となっている。
【００３１】 Ｆｏｒ ＩＮＴＲＡ：ＱＣＯＦ＝（ＣＯＦ＋ｓｉｇｎ（ＣＯＦ）×（（ｐ×Ｑ Ｐ）／／ｑ）／（２×ＱＰ） Ｆｏｒ ＩＮＴＥＲ：ＱＣＯＦ＝ＣＯＦ／（２×ＱＰ） ・・・（式６）
【００３２】ＭＰＥＧ１／２型の量子化は、次式（７）
のように行われる。ＣＯＦ2は逆量子化後のＤＣＴ係数
を表わす。
のように行われる。ＣＯＦ2は逆量子化後のＤＣＴ係数
を表わす。
【００３３】 Ｆｏｒ ＩＮＴＲＡ：ＣＯＦ2＝｜ＱＣＯＦ｜×２×ＱＰ Ｆｏｒ ＩＮＴＥＲ：ＣＯＦ2＝（｜ＱＣＯＦ｜×２＋ｓｉｇｎ（ＱＣＯＦ） ）×ＱＰ ・・・（式７）
【００３４】但し、Ｈ．２６１／３型の量子化における
INTRAの直流成分と、ＭＰＥＧ１／２型の量子化におけ
る直流成分については、次式のように量子化される。dc
は直流成分のＤＣＴ係数、ＱＤＣはその量子化後の値を
示す。
INTRAの直流成分と、ＭＰＥＧ１／２型の量子化におけ
る直流成分については、次式のように量子化される。dc
は直流成分のＤＣＴ係数、ＱＤＣはその量子化後の値を
示す。
【００３５】ＱＤＣ＝ｄｃ／／８ ・・・（式８）
【００３６】この逆量子化は次式のように行われ、ｄｃ
2は逆量子化後の直流成分のＤＣＴ係数を表わす。
2は逆量子化後の直流成分のＤＣＴ係数を表わす。
【００３７】ｄｃ2＝ＱＤＣ×８ ・・・（式９）
【００３８】ＤＣＴ係数の量子化を行う際、例えば低周
波成分に比べると重要な情報を持たないと見られる高周
波成分をより多く無為化するために、量子化行列を設定
して各係数の重みを調整することができる。この量子化
行列は、例えば図１７に示すような縦横８要素の行列で
あり、図１７（Ａ）に示した画像内符号化と図１７
（Ｂ）に示した画像間符号化とでは異なる行列が設定さ
れるのが普通である。量子化行列を用いる場合、ＶＭ
６．０では次式（１０）のようにＤＣＴ係数が処理され
る。ＣＯＦ［ｉ］［ｊ］はＤＣＴ係数のｉ行ｊ列番目の
成分、ｗ［ｉ］［ｊ］は量子化行列のｉ行ｊ列番目の重
み係数、ＣＯＦ2［ｉ］［ｊ］は量子化行列による重み
調整を行った後のｉ行ｊ列番目のＤＣＴ係数を表わす。
波成分に比べると重要な情報を持たないと見られる高周
波成分をより多く無為化するために、量子化行列を設定
して各係数の重みを調整することができる。この量子化
行列は、例えば図１７に示すような縦横８要素の行列で
あり、図１７（Ａ）に示した画像内符号化と図１７
（Ｂ）に示した画像間符号化とでは異なる行列が設定さ
れるのが普通である。量子化行列を用いる場合、ＶＭ
６．０では次式（１０）のようにＤＣＴ係数が処理され
る。ＣＯＦ［ｉ］［ｊ］はＤＣＴ係数のｉ行ｊ列番目の
成分、ｗ［ｉ］［ｊ］は量子化行列のｉ行ｊ列番目の重
み係数、ＣＯＦ2［ｉ］［ｊ］は量子化行列による重み
調整を行った後のｉ行ｊ列番目のＤＣＴ係数を表わす。
【００３９】 ＣＯＦ［ｉ］［ｊ］＝（１６×ＣＯＦ［ｉ］［ｊ］）／／ｗ［ｉ］［ｊ］ ・・・（式１０）
【００４０】量子化行列を用いた場合には、逆量子化後
の係数を例えば次式（１１）のように再調整する必要が
ある。ＣＯＦ3［ｉ］［ｊ］は再調整後のｉ行ｊ列番目
のＤＣＴ係数を表わす。
の係数を例えば次式（１１）のように再調整する必要が
ある。ＣＯＦ3［ｉ］［ｊ］は再調整後のｉ行ｊ列番目
のＤＣＴ係数を表わす。
【００４１】 ＣＯＦ3［ｉ］［ｊ］＝ＣＯＦ2［ｉ］［ｊ］×ｗ［ｉ］［ｊ］／１６ ・・・（式１１）
【００４２】エンコーダ側とデコーダ側とでＩＤＣＴ器
の精度や丸めの方法が異なる場合、符号化を行うにつれ
て不整合（ミスマッチ）が生じ、次第にその誤差が視覚
的に感知されるようになる。この問題を防ぐために、Ｉ
ＤＣＴを行う前にミスマッチ対策が行われ、その対策方
法として以下に示す二通りの処理方法がよく用いられて
いる。一方はＤＣＴ係数を奇数化することによるミスマ
ッチ対策で、例えば次式（１２）のように行われる。Ｃ
ＯＦmはミスマッチ対策後のＤＣＴ係数を表わす。
の精度や丸めの方法が異なる場合、符号化を行うにつれ
て不整合（ミスマッチ）が生じ、次第にその誤差が視覚
的に感知されるようになる。この問題を防ぐために、Ｉ
ＤＣＴを行う前にミスマッチ対策が行われ、その対策方
法として以下に示す二通りの処理方法がよく用いられて
いる。一方はＤＣＴ係数を奇数化することによるミスマ
ッチ対策で、例えば次式（１２）のように行われる。Ｃ
ＯＦmはミスマッチ対策後のＤＣＴ係数を表わす。
【００４３】 ｉｆ ＣＯＦ2 ｉｓ ｏｄｄ：｜ＣＯＦm｜＝｜ＣＯＦ2｜ ｉｆ ＣＯＦ2 ｉｓ ｅｖｅｎ：｜ＣＯＦm｜＝｜ＣＯＦ2｜−１ ＣＯＦm＝ｓｉｇｎ（ＣＯＦ2）×｜ＣＯＦm｜ ・・・（式１２）
【００４４】他方はＤＣＴ係数の最も高周波成分を操作
するミスマッチ対策で、ＤＣＴ係数の奇数化によるミス
マッチ対策よりも効率が良く、画質の劣化も少ない。縦
横８要素のＤＣＴ係数のブロックについては、ＤＣＴ係
数の７行７列番目の成分、つまり（７，７）要素を次式
のようにtoggleする。ｓｕｍはＤＣＴ係数の和、ＣＯＦ
m［７］［７］はミスマッチ対策後のＤＣＴ係数の
（７，７）要素を表わす。
するミスマッチ対策で、ＤＣＴ係数の奇数化によるミス
マッチ対策よりも効率が良く、画質の劣化も少ない。縦
横８要素のＤＣＴ係数のブロックについては、ＤＣＴ係
数の７行７列番目の成分、つまり（７，７）要素を次式
のようにtoggleする。ｓｕｍはＤＣＴ係数の和、ＣＯＦ
m［７］［７］はミスマッチ対策後のＤＣＴ係数の
（７，７）要素を表わす。
【００４５】
【数１】
【００４６】なお、逆量子化された係数はＩＤＣＴの前
でクリッピングされ、ＶＭ６．０ではその制限される範
囲は［−２０４８：２０４７］である。
でクリッピングされ、ＶＭ６．０ではその制限される範
囲は［−２０４８：２０４７］である。
【００４７】次に、従来例におけるシンタックスを説明
する。以下ＭＰＥＧ４ ＶＭ（Verification Model）を
例にし、説明する。
する。以下ＭＰＥＧ４ ＶＭ（Verification Model）を
例にし、説明する。
【００４８】図１８に符号化ビット列の構成を示す。Ｖ
Ｓ（Video Session Class）は一つ又は複数のＶＯ（Vid
eo Object Class）から構成される、符号化ビット列の
集合である。ＶＳのシンタックスを図１９に示す。
Ｓ（Video Session Class）は一つ又は複数のＶＯ（Vid
eo Object Class）から構成される、符号化ビット列の
集合である。ＶＳのシンタックスを図１９に示す。
【００４９】図２０にＶＯ（Video Object Class）のシ
ンタックスを示す。ＶＯは画像全体または画像中の一部
の物体の符号化ビット列である。
ンタックスを示す。ＶＯは画像全体または画像中の一部
の物体の符号化ビット列である。
【００５０】ＶＯＬ（Video Object Layer Class）はス
ケーラビリティのためのクラスである。ＶＯＬのシンタ
ックスを図２１、図２２に示す。ＶＯＬはvideo_object
_layer_idに示される番号によって識別される。例え
ば、video_object_layer_id=0であるＶＯＬ０は下位レ
イヤであり、例えばvideo_object_layer_id=1である。
ＶＯＬ１は上位レイヤである。スケーラブルのレイヤの
数は任意で良い。
ケーラビリティのためのクラスである。ＶＯＬのシンタ
ックスを図２１、図２２に示す。ＶＯＬはvideo_object
_layer_idに示される番号によって識別される。例え
ば、video_object_layer_id=0であるＶＯＬ０は下位レ
イヤであり、例えばvideo_object_layer_id=1である。
ＶＯＬ１は上位レイヤである。スケーラブルのレイヤの
数は任意で良い。
【００５１】また、video_object_layer_quant_type
は、量子化等を行なう際に用いる処理方法の組合せのモ
ードを示すフラグである。
は、量子化等を行なう際に用いる処理方法の組合せのモ
ードを示すフラグである。
【００５２】図２３乃至図２６にＶＯＰ（Video Object
Plane Class）のシンタックスを示す。VOP_widthおよ
びVOP_heightはそのＶＯＰの大きさを示すフラグであ
る。
Plane Class）のシンタックスを示す。VOP_widthおよ
びVOP_heightはそのＶＯＰの大きさを示すフラグであ
る。
【００５３】図２７はＩおよびＰピクチャ（ＶＯＰ）に
おけるマクロブロック（MacroblockLayer）のシンタッ
クスを示している。ＣＯＤはこれ以後そのマクロブロッ
クのデータが存在するかどうかを示すフラグである。Ｃ
ＯＤ＝１の場合、これ以後、そのマクロブロックのデー
タが存在しないことを示す（即ちスキップマクロブロッ
ク）。ＣＯＤ＝０の場合、さらにフラグが伝送される。
ＭＣＢＰＣはそのマクロブロックのタイプを示すフラグ
で、これに従って所定のフラグおよびデータが伝送され
る。
おけるマクロブロック（MacroblockLayer）のシンタッ
クスを示している。ＣＯＤはこれ以後そのマクロブロッ
クのデータが存在するかどうかを示すフラグである。Ｃ
ＯＤ＝１の場合、これ以後、そのマクロブロックのデー
タが存在しないことを示す（即ちスキップマクロブロッ
ク）。ＣＯＤ＝０の場合、さらにフラグが伝送される。
ＭＣＢＰＣはそのマクロブロックのタイプを示すフラグ
で、これに従って所定のフラグおよびデータが伝送され
る。
【００５４】図２８はＢピクチャ（ＶＯＰ）におけるマ
クロブロック（Macroblock Layer）のシンタックスを示
している。もし、最も最近に復号されたＩまたはＰＶＯ
Ｐの対応するマクロブロックがスキップマクロブロック
であった場合（ＣＯＤ＝１）、ＢＶＯＰにおけるそのマ
クロブロックもスキップマクロブロックとなる。ＭＯＤ
ＢはＢＶＯＰにおいてマクロブロックのタイプを示すフ
ラグである。ＭＯＤＢの可変長符号を図２９に示す。Ｍ
ＯＤＢ＝０の場合、それ以上マクロブロックのデータが
存在しないことを示す。ＭＯＤＢ＝１０の場合、ＣＢＰ
Ｂは伝送されず、ＭＢＴＹＰＥが伝送される。ＭＯＤＢ
＝１１の場合、ＣＢＰＢおよびＭＢＴＹＰＥが伝送され
る。
クロブロック（Macroblock Layer）のシンタックスを示
している。もし、最も最近に復号されたＩまたはＰＶＯ
Ｐの対応するマクロブロックがスキップマクロブロック
であった場合（ＣＯＤ＝１）、ＢＶＯＰにおけるそのマ
クロブロックもスキップマクロブロックとなる。ＭＯＤ
ＢはＢＶＯＰにおいてマクロブロックのタイプを示すフ
ラグである。ＭＯＤＢの可変長符号を図２９に示す。Ｍ
ＯＤＢ＝０の場合、それ以上マクロブロックのデータが
存在しないことを示す。ＭＯＤＢ＝１０の場合、ＣＢＰ
Ｂは伝送されず、ＭＢＴＹＰＥが伝送される。ＭＯＤＢ
＝１１の場合、ＣＢＰＢおよびＭＢＴＹＰＥが伝送され
る。
【００５５】ＣＢＰＢは６ビットのフラグでマクロブロ
ック中の各ブロックにＤＣＴ係数が存在するかどうかを
示すフラグである。ＣＢＰＢが伝送されない場合、ＣＢ
ＰＢは０であると解釈され、そのマクロブロックではＤ
ＣＴ係数は伝送されない。ＭＢＴＹＰＥはＢピクチャに
おける各マクロブロックの予測モードを示すフラグで、
これに従って所定のフラグおよびデータが伝送される。
ック中の各ブロックにＤＣＴ係数が存在するかどうかを
示すフラグである。ＣＢＰＢが伝送されない場合、ＣＢ
ＰＢは０であると解釈され、そのマクロブロックではＤ
ＣＴ係数は伝送されない。ＭＢＴＹＰＥはＢピクチャに
おける各マクロブロックの予測モードを示すフラグで、
これに従って所定のフラグおよびデータが伝送される。
【００５６】量子化等を中心として、従来例における処
理の流れを詳しく説明するため、図３０、図３１に、従
来例における処理の流れと符号化ビット列の生成法およ
び解読法の一例を示す。図３０に示したフローチャート
は、エンコーダの量子化およびミスマッチ制御部分を示
し、図３１に示したフローチャートは、デコーダのミス
マッチ制御および逆量子化部分を示している。
理の流れを詳しく説明するため、図３０、図３１に、従
来例における処理の流れと符号化ビット列の生成法およ
び解読法の一例を示す。図３０に示したフローチャート
は、エンコーダの量子化およびミスマッチ制御部分を示
し、図３１に示したフローチャートは、デコーダのミス
マッチ制御および逆量子化部分を示している。
【００５７】図３０のフローチャートを参照して、エン
コーダの量子化およびミスマッチ制御部分における処理
の流れと符号化ビット列の生成法を説明する。まず、ス
テップＳ１において、何らかの評価基準を用いて、Ｈ．
２６１／３，ＭＰＥＧ１／２のどちらのモードで量子化
等を行なうかを決める。あるいはエンコードする際に、
あらかじめどのモードの量子化等を行なうかの指定がな
されていても良い。次に、ＤＣＴ演算を行なって求めた
縦横８要素のＤＣＴ係数の各ブロックに対して、各モー
ドに応じて以下のように量子化行列の利用方法を設定
し、量子化および逆量子化の方法を選択し、ＩＤＣＴミ
スマッチの対策方法を選択する。
コーダの量子化およびミスマッチ制御部分における処理
の流れと符号化ビット列の生成法を説明する。まず、ス
テップＳ１において、何らかの評価基準を用いて、Ｈ．
２６１／３，ＭＰＥＧ１／２のどちらのモードで量子化
等を行なうかを決める。あるいはエンコードする際に、
あらかじめどのモードの量子化等を行なうかの指定がな
されていても良い。次に、ＤＣＴ演算を行なって求めた
縦横８要素のＤＣＴ係数の各ブロックに対して、各モー
ドに応じて以下のように量子化行列の利用方法を設定
し、量子化および逆量子化の方法を選択し、ＩＤＣＴミ
スマッチの対策方法を選択する。
【００５８】Ｈ．２６１／３モードの場合は、ステップ
Ｓ２において、量子化器１２１により、縦横８要素のＤ
ＣＴ係数の各ブロックに対してＨ．２６１／３型の量子
化が行われ、逆量子化器１２３により、逆量子化が行わ
れる。その後、ステップＳ３に進み、ミスマッチ制御器
１４１により、ＤＣＴ係数を奇数化するミスマッチ制御
が行われ、ステップＳ４において、クリッピング器１４
３によりＤＣＴ係数のクリッピングが行われる。このモ
ードの場合には、量子化行列は利用しないため、量子化
行列は設定されずに量子化および逆量子化が行なわれ
る。このモードが選ばれた場合には、ステップＳ５にお
いて、Video Object Layer Classのvideo_object_layer
_quant_typeのフラグは"0"に設定され、符号化される。
Ｓ２において、量子化器１２１により、縦横８要素のＤ
ＣＴ係数の各ブロックに対してＨ．２６１／３型の量子
化が行われ、逆量子化器１２３により、逆量子化が行わ
れる。その後、ステップＳ３に進み、ミスマッチ制御器
１４１により、ＤＣＴ係数を奇数化するミスマッチ制御
が行われ、ステップＳ４において、クリッピング器１４
３によりＤＣＴ係数のクリッピングが行われる。このモ
ードの場合には、量子化行列は利用しないため、量子化
行列は設定されずに量子化および逆量子化が行なわれ
る。このモードが選ばれた場合には、ステップＳ５にお
いて、Video Object Layer Classのvideo_object_layer
_quant_typeのフラグは"0"に設定され、符号化される。
【００５９】一方、ＭＰＥＧ１／２モードの場合は、ス
テップＳ６に進み、設定器１３２により、縦横８要素の
ＤＣＴ係数の各ブロックに対してまずＭＰＥＧ１／２型
の量子化行列が設定される。ここで設定される量子化行
列は、画像内符号化と画像間符号化とでは異なる。ま
た、あらかじめ用意されている量子化行列以外の行列を
新たに設定して用いても良いが、その場合には、Video
Object Layer Classのload_intra_quant_mat、あるいは
load_nonintra_quant_matのフラグをONにし、新たに設
定した量子化行列の６４個の要素をintra_quant_mat[6
4]あるいはnonintra_quant_mat[64]として符号化する。
テップＳ６に進み、設定器１３２により、縦横８要素の
ＤＣＴ係数の各ブロックに対してまずＭＰＥＧ１／２型
の量子化行列が設定される。ここで設定される量子化行
列は、画像内符号化と画像間符号化とでは異なる。ま
た、あらかじめ用意されている量子化行列以外の行列を
新たに設定して用いても良いが、その場合には、Video
Object Layer Classのload_intra_quant_mat、あるいは
load_nonintra_quant_matのフラグをONにし、新たに設
定した量子化行列の６４個の要素をintra_quant_mat[6
4]あるいはnonintra_quant_mat[64]として符号化する。
【００６０】その後、ステップＳ７において、量子化器
１２２により、ステップＳ６において設定器１３２によ
り設定された量子化行列を用いてＭＰＥＧ１／２型の量
子化が行われ、逆量子化器１２４により、逆量子化が行
われる。次に、ステップＳ８に進み、クリッピング器１
４４により、ＤＣＴ係数のクリッピングが行われる。こ
こでは、ミスマッチ制御は行なわれないことに注意され
たい。このモードが選ばれた場合には、ステップＳ９に
おいて、Video Object Layer Classのvideo_object_lay
er_quant_typeのフラグは"1"に設定され、符号化され
る。
１２２により、ステップＳ６において設定器１３２によ
り設定された量子化行列を用いてＭＰＥＧ１／２型の量
子化が行われ、逆量子化器１２４により、逆量子化が行
われる。次に、ステップＳ８に進み、クリッピング器１
４４により、ＤＣＴ係数のクリッピングが行われる。こ
こでは、ミスマッチ制御は行なわれないことに注意され
たい。このモードが選ばれた場合には、ステップＳ９に
おいて、Video Object Layer Classのvideo_object_lay
er_quant_typeのフラグは"1"に設定され、符号化され
る。
【００６１】次に、図３１に示したフローチャートを参
照して、デコーダのミスマッチ制御および逆量子化部分
における処理の流れと符号化ビット列の解読法を説明す
る。最初に、ステップＳ１１において、図１３に示した
エンコーダによって符号化された符号化ビット列のう
ち、Video Object Layer Classのvideo_object_layer_q
uant_typeのフラグを解読することによって、エンコー
ダ側で用いたモードを検出し、エンコーダ側のモードに
対応するように逆量子化等の処理を行なう。例えば、vi
deo_object_layer_quant_type=="0"（"=="は、左辺と右
辺の値が等しいことを意味する）の場合にはＨ．２６１
／３モード、そうでない場合にはＭＰＥＧ１／２モード
とみなして処理を行なう。
照して、デコーダのミスマッチ制御および逆量子化部分
における処理の流れと符号化ビット列の解読法を説明す
る。最初に、ステップＳ１１において、図１３に示した
エンコーダによって符号化された符号化ビット列のう
ち、Video Object Layer Classのvideo_object_layer_q
uant_typeのフラグを解読することによって、エンコー
ダ側で用いたモードを検出し、エンコーダ側のモードに
対応するように逆量子化等の処理を行なう。例えば、vi
deo_object_layer_quant_type=="0"（"=="は、左辺と右
辺の値が等しいことを意味する）の場合にはＨ．２６１
／３モード、そうでない場合にはＭＰＥＧ１／２モード
とみなして処理を行なう。
【００６２】Ｈ．２６１／３モードの場合は、ステップ
Ｓ１２に進み、この場合、量子化行列は利用しないた
め、量子化行列は設定されずに逆量子化が行なわれる。
即ち、復号された縦横８要素のＤＣＴ係数の各ブロック
に対して、まず逆量子化器２２３により、Ｈ．２６１／
３型の逆量子化が行われる。その後、ステップＳ１３に
おいて、ミスマッチ制御部２４１により、ＤＣＴ係数を
奇数化するミスマッチ制御が行われる。次に、ステップ
Ｓ１４に進み、クリッピング器２４３により、ＤＣＴ係
数のクリッピングが行われる。
Ｓ１２に進み、この場合、量子化行列は利用しないた
め、量子化行列は設定されずに逆量子化が行なわれる。
即ち、復号された縦横８要素のＤＣＴ係数の各ブロック
に対して、まず逆量子化器２２３により、Ｈ．２６１／
３型の逆量子化が行われる。その後、ステップＳ１３に
おいて、ミスマッチ制御部２４１により、ＤＣＴ係数を
奇数化するミスマッチ制御が行われる。次に、ステップ
Ｓ１４に進み、クリッピング器２４３により、ＤＣＴ係
数のクリッピングが行われる。
【００６３】一方、ＭＰＥＧ１／２モードの場合は、ス
テップＳ１５において、復号された縦横８要素のＤＣＴ
係数の各ブロックに対して、まず設定器２３２によりＭ
ＰＥＧ１／２型の量子化行列が設定される。ここで設定
される量子化行列は、画像内符号化と画像間符号化とで
は異なる。また、例えばVideo Object Layer Classのlo
ad_intra_quant_mat、あるいはload_nonintra_quant_ma
tのフラグがONになっている場合には、あらかじめ用意
されている量子化行列以外を設定するために、例えば、
intra_quant_mat[64]あるいはnonintra_quant_mat[64]
として符号化された量子化行列の６４個の要素を復号し
て用いる等の処理を行なわなければならない。その後、
ステップＳ１６に進み、逆量子化器２２４により、ステ
ップＳ１５において設定された量子化行列を用いてＭＰ
ＥＧ１／２型の逆量子化が行われ、ステップＳ１７にお
いて、クリッピング器２４４によりＤＣＴ係数のクリッ
ピングが行われる。エンコーダの場合と同様、ミスマッ
チ制御は行なわれないことに注意されたい。
テップＳ１５において、復号された縦横８要素のＤＣＴ
係数の各ブロックに対して、まず設定器２３２によりＭ
ＰＥＧ１／２型の量子化行列が設定される。ここで設定
される量子化行列は、画像内符号化と画像間符号化とで
は異なる。また、例えばVideo Object Layer Classのlo
ad_intra_quant_mat、あるいはload_nonintra_quant_ma
tのフラグがONになっている場合には、あらかじめ用意
されている量子化行列以外を設定するために、例えば、
intra_quant_mat[64]あるいはnonintra_quant_mat[64]
として符号化された量子化行列の６４個の要素を復号し
て用いる等の処理を行なわなければならない。その後、
ステップＳ１６に進み、逆量子化器２２４により、ステ
ップＳ１５において設定された量子化行列を用いてＭＰ
ＥＧ１／２型の逆量子化が行われ、ステップＳ１７にお
いて、クリッピング器２４４によりＤＣＴ係数のクリッ
ピングが行われる。エンコーダの場合と同様、ミスマッ
チ制御は行なわれないことに注意されたい。
【００６４】以上、ＭＰＥＧ方式について説明したが、
この他にも様々な動画像の高能率符号化方法が標準化さ
れている。例えば、ＩＴＵ−Ｔでは主に通信用の符号化
方式として、Ｈ．２６１やＨ．２６３という方式を規定
している。このＨ．２６１やＨ．２６３も基本的にはＭ
ＰＥＧ方式と同様に動き補償予測符号化とＤＣＴ変換符
号化を組み合わせたものであり、ヘッダ情報などの詳細
は異なるが、符号化装置や復号装置は同様の構成とな
る。
この他にも様々な動画像の高能率符号化方法が標準化さ
れている。例えば、ＩＴＵ−Ｔでは主に通信用の符号化
方式として、Ｈ．２６１やＨ．２６３という方式を規定
している。このＨ．２６１やＨ．２６３も基本的にはＭ
ＰＥＧ方式と同様に動き補償予測符号化とＤＣＴ変換符
号化を組み合わせたものであり、ヘッダ情報などの詳細
は異なるが、符号化装置や復号装置は同様の構成とな
る。
【００６５】
【発明が解決しようとする課題】しかしながら、従来の
ＭＰＥＧ１、ＭＰＥＧ２、Ｈ．２６１、Ｈ．２６３等の
動画像の高能率符号化方法では、量子化および逆量子化
の方法、量子化行列の利用方法、ＩＤＣＴミスマッチの
対策方法等としてそれぞれ異なる方法が指定されてお
り、その他の方法を用いることは許されていなかった。
ＭＰＥＧ１、ＭＰＥＧ２、Ｈ．２６１、Ｈ．２６３等の
動画像の高能率符号化方法では、量子化および逆量子化
の方法、量子化行列の利用方法、ＩＤＣＴミスマッチの
対策方法等としてそれぞれ異なる方法が指定されてお
り、その他の方法を用いることは許されていなかった。
【００６６】ＭＰＥＧ４においては、１９９７年３月７
日の時点で、これらの既存の動画像の高能率符号化方法
との互換性をどのようにするかについては特にまとめら
れていない。そのため、ＭＰＥＧ４のＶＭ（Verificati
on Model）やＷＤ（WorkingDraft）の規定では、量子化
および逆量子化の方法、量子化行列の利用方法、ＩＤＣ
Ｔミスマッチの対策方法等が、暫定的に複数用意されて
いる。符号化および復号する場合には、これらの方法の
中で決められた方法の組合せのモードを用いなければな
らず、規定されている組合せ自体も充分ではなかった。
日の時点で、これらの既存の動画像の高能率符号化方法
との互換性をどのようにするかについては特にまとめら
れていない。そのため、ＭＰＥＧ４のＶＭ（Verificati
on Model）やＷＤ（WorkingDraft）の規定では、量子化
および逆量子化の方法、量子化行列の利用方法、ＩＤＣ
Ｔミスマッチの対策方法等が、暫定的に複数用意されて
いる。符号化および復号する場合には、これらの方法の
中で決められた方法の組合せのモードを用いなければな
らず、規定されている組合せ自体も充分ではなかった。
【００６７】ここで、ＭＰＥＧ４のＶＭ６．０（ISO/IE
C JTC1/SC29/WG11 MPEG96/N1582 Sevilla,February 199
6）や、ＷＤ１．０（ISO/IEC JTC1/SC29/WG11 MPEG96/N
1470Maceio,Nov.1996）で規定されている符号化および
復号方法のうち、量子化およびミスマッチ制御の部分を
簡単に説明する。Ｈ．２６１、あるいはＨ．２６３（以
下、Ｈ．２６１／３と示す）のモードで符号化および復
号する場合には、量子化および逆量子化の方法、量子化
行列の利用方法、ＩＤＣＴミスマッチの対策方法が全て
指定される。ＭＰＥＧ１あるいはＭＰＥＧ２（以下、Ｍ
ＰＥＧ１／２と示す）のモードで符号化および復号する
場合には、量子化および逆量子化の方法、量子化行列の
利用方法は指定されるが、ＩＤＣＴミスマッチの対策方
法は指定されない。
C JTC1/SC29/WG11 MPEG96/N1582 Sevilla,February 199
6）や、ＷＤ１．０（ISO/IEC JTC1/SC29/WG11 MPEG96/N
1470Maceio,Nov.1996）で規定されている符号化および
復号方法のうち、量子化およびミスマッチ制御の部分を
簡単に説明する。Ｈ．２６１、あるいはＨ．２６３（以
下、Ｈ．２６１／３と示す）のモードで符号化および復
号する場合には、量子化および逆量子化の方法、量子化
行列の利用方法、ＩＤＣＴミスマッチの対策方法が全て
指定される。ＭＰＥＧ１あるいはＭＰＥＧ２（以下、Ｍ
ＰＥＧ１／２と示す）のモードで符号化および復号する
場合には、量子化および逆量子化の方法、量子化行列の
利用方法は指定されるが、ＩＤＣＴミスマッチの対策方
法は指定されない。
【００６８】このように、従来の動画像の高能率符号化
方法では、既存の動画像の高能率符号化方法との互換性
が充分に取られていない課題があった。
方法では、既存の動画像の高能率符号化方法との互換性
が充分に取られていない課題があった。
【００６９】また、量子化および逆量子化の方法、量子
化行列の利用方法、ＩＤＣＴミスマッチの対策方法等
で、最適な方法の組合せを指定して、より高能率の符号
化および復号を行なうこともできない課題があった。
化行列の利用方法、ＩＤＣＴミスマッチの対策方法等
で、最適な方法の組合せを指定して、より高能率の符号
化および復号を行なうこともできない課題があった。
【００７０】本発明はこのような状況に鑑みてなされた
ものであり、既存の動画像の高能率符号化方法との互換
性を取ることができるようにするものである。
ものであり、既存の動画像の高能率符号化方法との互換
性を取ることができるようにするものである。
【００７１】
【課題を解決するための手段】請求項１に記載の符号化
装置は、データを符号化する符号化装置であって、デー
タを複数の方法で量子化する量子化手段と、量子化手段
の出力を複数の方法で逆量子化する逆量子化手段と、量
子化手段および逆量子化手段で用いる量子化行列を設定
する設定手段と、逆量子化手段の出力に対して複数の方
法でＩＤＣＴミスマッチ対策を施すミスマッチ対策手段
と、量子化手段がデータを量子化する方法の任意のもの
と、逆量子化手段が量子化手段の出力を逆量子化する方
法の任意のものと、ミスマッチ対策手段が逆量子化手段
の出力に対してＩＤＣＴミスマッチ対策を施す方法の任
意のものと、量子化手段および逆量子化手段が量子化行
列を使用する任意の方法とを組み合わせてデータを符号
化する方法を制御する制御手段とを備えることを特徴と
する。
装置は、データを符号化する符号化装置であって、デー
タを複数の方法で量子化する量子化手段と、量子化手段
の出力を複数の方法で逆量子化する逆量子化手段と、量
子化手段および逆量子化手段で用いる量子化行列を設定
する設定手段と、逆量子化手段の出力に対して複数の方
法でＩＤＣＴミスマッチ対策を施すミスマッチ対策手段
と、量子化手段がデータを量子化する方法の任意のもの
と、逆量子化手段が量子化手段の出力を逆量子化する方
法の任意のものと、ミスマッチ対策手段が逆量子化手段
の出力に対してＩＤＣＴミスマッチ対策を施す方法の任
意のものと、量子化手段および逆量子化手段が量子化行
列を使用する任意の方法とを組み合わせてデータを符号
化する方法を制御する制御手段とを備えることを特徴と
する。
【００７２】請求項２に記載の符号化方法は、 データ
を符号化する符号化方法であって、データを複数の方法
で量子化するステップと、量子化されたデータを複数の
方法で逆量子化するステップと、量子化および逆量子化
を行うときに用いる量子化行列を設定するステップと、
逆量子化されたデータに対して複数の方法でＩＤＣＴミ
スマッチ対策を施すステップと、データを量子化する方
法の任意のものと、量子化されたデータを逆量子化する
方法の任意のものと、逆量子化されたデータに対してＩ
ＤＣＴミスマッチ対策を施す方法の任意のものと、デー
タを量子化するとき、および量子化されたデータを逆量
子化するときに量子化行列を使用する任意の方法とを組
み合わせてデータを符号化する方法を制御するステップ
とを備えることを特徴とする。
を符号化する符号化方法であって、データを複数の方法
で量子化するステップと、量子化されたデータを複数の
方法で逆量子化するステップと、量子化および逆量子化
を行うときに用いる量子化行列を設定するステップと、
逆量子化されたデータに対して複数の方法でＩＤＣＴミ
スマッチ対策を施すステップと、データを量子化する方
法の任意のものと、量子化されたデータを逆量子化する
方法の任意のものと、逆量子化されたデータに対してＩ
ＤＣＴミスマッチ対策を施す方法の任意のものと、デー
タを量子化するとき、および量子化されたデータを逆量
子化するときに量子化行列を使用する任意の方法とを組
み合わせてデータを符号化する方法を制御するステップ
とを備えることを特徴とする。
【００７３】請求項３に記載の復号装置は、データを復
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段と、逆量子化手段で用いる量子化行
列を設定する設定手段と、逆量子化手段の出力に対して
複数の方法でＩＤＣＴミスマッチ対策を施すミスマッチ
対策手段と、逆量子化手段がデータを逆量子化する方法
の任意のものと、ミスマッチ対策手段が逆量子化手段の
出力に対してＩＤＣＴミスマッチ対策を施す方法の任意
のものと、逆量子化手段が量子化行列を使用する任意の
方法を組み合わせてデータを復号する方法を制御する制
御手段とを備えることを特徴とする。
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段と、逆量子化手段で用いる量子化行
列を設定する設定手段と、逆量子化手段の出力に対して
複数の方法でＩＤＣＴミスマッチ対策を施すミスマッチ
対策手段と、逆量子化手段がデータを逆量子化する方法
の任意のものと、ミスマッチ対策手段が逆量子化手段の
出力に対してＩＤＣＴミスマッチ対策を施す方法の任意
のものと、逆量子化手段が量子化行列を使用する任意の
方法を組み合わせてデータを復号する方法を制御する制
御手段とを備えることを特徴とする。
【００７４】請求項４に記載の復号方法は、データを復
号する復号方法であって、データを複数の方法で逆量子
化するステップと、データを逆量子化するとき用いる量
子化行列を設定するステップと、逆量子化されたデータ
に対して複数の方法でＩＤＣＴミスマッチ対策を施すス
テップと、データを逆量子化する方法の任意のものと、
逆量子化されたデータに対してＩＤＣＴミスマッチ対策
を施す方法の任意のものと、データを逆量子化するとき
に量子化行列を使用する任意の方法を組み合わせてデー
タを復号する方法を制御するステップとを備えることを
特徴とする。
号する復号方法であって、データを複数の方法で逆量子
化するステップと、データを逆量子化するとき用いる量
子化行列を設定するステップと、逆量子化されたデータ
に対して複数の方法でＩＤＣＴミスマッチ対策を施すス
テップと、データを逆量子化する方法の任意のものと、
逆量子化されたデータに対してＩＤＣＴミスマッチ対策
を施す方法の任意のものと、データを逆量子化するとき
に量子化行列を使用する任意の方法を組み合わせてデー
タを復号する方法を制御するステップとを備えることを
特徴とする。
【００７５】請求項５に記載の復号装置は、データを復
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段と、逆量子化手段で用いる量子化行
列を設定する設定手段と、逆量子化手段の出力に対して
所定の方法でＩＤＣＴミスマッチ対策を施すミスマッチ
対策手段と、逆量子化手段がデータを逆量子化する方法
の任意のものと、逆量子化手段が量子化行列を使用する
任意の方法を組み合わせてデータを復号する方法を制御
する制御手段とを備えることを特徴とする。
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段と、逆量子化手段で用いる量子化行
列を設定する設定手段と、逆量子化手段の出力に対して
所定の方法でＩＤＣＴミスマッチ対策を施すミスマッチ
対策手段と、逆量子化手段がデータを逆量子化する方法
の任意のものと、逆量子化手段が量子化行列を使用する
任意の方法を組み合わせてデータを復号する方法を制御
する制御手段とを備えることを特徴とする。
【００７６】請求項６に記載の復号方法は、データを復
号する復号方法であって、データを複数の方法で逆量子
化するステップと、データを逆量子化するとき用いる量
子化行列を設定するステップと、逆量子化されたデータ
に対して所定の方法でＩＤＣＴミスマッチ対策を施すス
テップと、データを逆量子化する方法の任意のものと、
データを逆量子化するときに量子化行列を使用する任意
の方法を組み合わせてデータを復号する方法を制御する
ステップとを備えることを特徴とする。
号する復号方法であって、データを複数の方法で逆量子
化するステップと、データを逆量子化するとき用いる量
子化行列を設定するステップと、逆量子化されたデータ
に対して所定の方法でＩＤＣＴミスマッチ対策を施すス
テップと、データを逆量子化する方法の任意のものと、
データを逆量子化するときに量子化行列を使用する任意
の方法を組み合わせてデータを復号する方法を制御する
ステップとを備えることを特徴とする。
【００７７】請求項１に記載の符号化装置においては、
量子化手段が、データを複数の方法で量子化し、逆量子
化手段が、量子化手段の出力を複数の方法で逆量子化
し、設定手段が、量子化手段および逆量子化手段で用い
る量子化行列を設定し、ミスマッチ対策手段が、逆量子
化手段の出力に対して複数の方法でＩＤＣＴミスマッチ
対策を施し、制御手段が、量子化手段がデータを量子化
する方法の任意のものと、逆量子化手段が量子化手段の
出力を逆量子化する方法の任意のものと、ミスマッチ対
策手段が逆量子化手段の出力に対してＩＤＣＴミスマッ
チ対策を施す方法の任意のものと、量子化手段および逆
量子化手段が量子化行列を使用する任意の方法とを組み
合わせてデータを符号化する方法を制御する。
量子化手段が、データを複数の方法で量子化し、逆量子
化手段が、量子化手段の出力を複数の方法で逆量子化
し、設定手段が、量子化手段および逆量子化手段で用い
る量子化行列を設定し、ミスマッチ対策手段が、逆量子
化手段の出力に対して複数の方法でＩＤＣＴミスマッチ
対策を施し、制御手段が、量子化手段がデータを量子化
する方法の任意のものと、逆量子化手段が量子化手段の
出力を逆量子化する方法の任意のものと、ミスマッチ対
策手段が逆量子化手段の出力に対してＩＤＣＴミスマッ
チ対策を施す方法の任意のものと、量子化手段および逆
量子化手段が量子化行列を使用する任意の方法とを組み
合わせてデータを符号化する方法を制御する。
【００７８】請求項２に記載の符号化方法においては、
データを複数の方法で量子化し、量子化されたデータを
複数の方法で逆量子化し、量子化および逆量子化を行う
ときに用いる量子化行列を設定し、逆量子化されたデー
タに対して複数の方法でＩＤＣＴミスマッチ対策を施す
とき、データを量子化する方法の任意のものと、量子化
されたデータを逆量子化する方法の任意のものと、逆量
子化されたデータに対してＩＤＣＴミスマッチ対策を施
す方法の任意のものと、データを量子化するとき、およ
び量子化されたデータを逆量子化するときに量子化行列
を使用する任意の方法とを組み合わせてデータを符号化
する方法を制御する。
データを複数の方法で量子化し、量子化されたデータを
複数の方法で逆量子化し、量子化および逆量子化を行う
ときに用いる量子化行列を設定し、逆量子化されたデー
タに対して複数の方法でＩＤＣＴミスマッチ対策を施す
とき、データを量子化する方法の任意のものと、量子化
されたデータを逆量子化する方法の任意のものと、逆量
子化されたデータに対してＩＤＣＴミスマッチ対策を施
す方法の任意のものと、データを量子化するとき、およ
び量子化されたデータを逆量子化するときに量子化行列
を使用する任意の方法とを組み合わせてデータを符号化
する方法を制御する。
【００７９】請求項３に記載の復号装置においては、逆
量子化手段が、データを複数の方法で逆量子化し、設定
手段が、逆量子化手段で用いる量子化行列を設定し、ミ
スマッチ対策手段が、逆量子化手段の出力に対して複数
の方法でＩＤＣＴミスマッチ対策を施し、制御手段が、
逆量子化手段がデータを逆量子化する方法の任意のもの
と、ミスマッチ対策手段が逆量子化手段の出力に対して
ＩＤＣＴミスマッチ対策を施す方法の任意のものと、逆
量子化手段が量子化行列を使用する任意の方法を組み合
わせてデータを復号する方法を制御する。
量子化手段が、データを複数の方法で逆量子化し、設定
手段が、逆量子化手段で用いる量子化行列を設定し、ミ
スマッチ対策手段が、逆量子化手段の出力に対して複数
の方法でＩＤＣＴミスマッチ対策を施し、制御手段が、
逆量子化手段がデータを逆量子化する方法の任意のもの
と、ミスマッチ対策手段が逆量子化手段の出力に対して
ＩＤＣＴミスマッチ対策を施す方法の任意のものと、逆
量子化手段が量子化行列を使用する任意の方法を組み合
わせてデータを復号する方法を制御する。
【００８０】請求項４に記載の復号方法においては、デ
ータを複数の方法で逆量子化し、データを逆量子化する
とき用いる量子化行列を設定し、逆量子化されたデータ
に対して複数の方法でＩＤＣＴミスマッチ対策を施すと
き、データを逆量子化する方法の任意のものと、逆量子
化されたデータに対してＩＤＣＴミスマッチ対策を施す
方法の任意のものと、データを逆量子化するときに量子
化行列を使用する任意の方法を組み合わせてデータを復
号する方法を制御する。
ータを複数の方法で逆量子化し、データを逆量子化する
とき用いる量子化行列を設定し、逆量子化されたデータ
に対して複数の方法でＩＤＣＴミスマッチ対策を施すと
き、データを逆量子化する方法の任意のものと、逆量子
化されたデータに対してＩＤＣＴミスマッチ対策を施す
方法の任意のものと、データを逆量子化するときに量子
化行列を使用する任意の方法を組み合わせてデータを復
号する方法を制御する。
【００８１】請求項５に記載の復号装置においては、逆
量子化手段が、データを複数の方法で逆量子化し、設定
手段が、逆量子化手段で用いる量子化行列を設定し、ミ
スマッチ対策手段が、逆量子化手段の出力に対して所定
の方法でＩＤＣＴミスマッチ対策を施し、制御手段が、
逆量子化手段がデータを逆量子化する方法の任意のもの
と、逆量子化手段が量子化行列を使用する任意の方法を
組み合わせてデータを復号する方法を制御する制御手段
とを備える。
量子化手段が、データを複数の方法で逆量子化し、設定
手段が、逆量子化手段で用いる量子化行列を設定し、ミ
スマッチ対策手段が、逆量子化手段の出力に対して所定
の方法でＩＤＣＴミスマッチ対策を施し、制御手段が、
逆量子化手段がデータを逆量子化する方法の任意のもの
と、逆量子化手段が量子化行列を使用する任意の方法を
組み合わせてデータを復号する方法を制御する制御手段
とを備える。
【００８２】請求項６に記載の復号方法においては、デ
ータを複数の方法で逆量子化し、データを逆量子化する
とき用いる量子化行列を設定し、逆量子化されたデータ
に対して所定の方法でＩＤＣＴミスマッチ対策を施すと
き、データを逆量子化する方法の任意のものと、データ
を逆量子化するときに量子化行列を使用する任意の方法
を組み合わせてデータを復号する方法を制御する。
ータを複数の方法で逆量子化し、データを逆量子化する
とき用いる量子化行列を設定し、逆量子化されたデータ
に対して所定の方法でＩＤＣＴミスマッチ対策を施すと
き、データを逆量子化する方法の任意のものと、データ
を逆量子化するときに量子化行列を使用する任意の方法
を組み合わせてデータを復号する方法を制御する。
【００８３】
【発明の実施の形態】以下に、本発明の実施の形態を説
明するが、その前に、特許請求の範囲に記載の発明の各
手段と以下の実施の形態との対応関係を明らかにするた
めに、各手段の後の括弧内に、対応する実施の形態（但
し、一例）を付加して、本発明の特徴を記述すると、次
のようになる。
明するが、その前に、特許請求の範囲に記載の発明の各
手段と以下の実施の形態との対応関係を明らかにするた
めに、各手段の後の括弧内に、対応する実施の形態（但
し、一例）を付加して、本発明の特徴を記述すると、次
のようになる。
【００８４】即ち、請求項１に記載の符号化装置は、デ
ータを符号化する符号化装置であって、データを複数の
方法で量子化する量子化手段（例えば、図１の量子化器
１２１，１２２）と、量子化手段の出力を複数の方法で
逆量子化する逆量子化手段（例えば、図１の逆量子化器
１２３，１２４，１２５）と、量子化手段および逆量子
化手段で用いる量子化行列を設定する設定手段（例え
ば、図１の設定器１３２）と、逆量子化手段の出力に対
して複数の方法でＩＤＣＴミスマッチ対策を施すミスマ
ッチ対策手段（例えば、図１のミスマッチ制御器１４
１，１５１，１５４）と、量子化手段がデータを量子化
する方法の任意のものと、逆量子化手段が量子化手段の
出力を逆量子化する方法の任意のものと、ミスマッチ対
策手段が逆量子化手段の出力に対してＩＤＣＴミスマッ
チ対策を施す方法の任意のものと、量子化手段および逆
量子化手段が量子化行列を使用する任意の方法とを組み
合わせてデータを符号化する方法を制御する制御手段
（例えば、図１のスイッチＳＷ１，ＳＷ２，ＳＷ２１，
ＳＷ２２）とを備えることを特徴とする。
ータを符号化する符号化装置であって、データを複数の
方法で量子化する量子化手段（例えば、図１の量子化器
１２１，１２２）と、量子化手段の出力を複数の方法で
逆量子化する逆量子化手段（例えば、図１の逆量子化器
１２３，１２４，１２５）と、量子化手段および逆量子
化手段で用いる量子化行列を設定する設定手段（例え
ば、図１の設定器１３２）と、逆量子化手段の出力に対
して複数の方法でＩＤＣＴミスマッチ対策を施すミスマ
ッチ対策手段（例えば、図１のミスマッチ制御器１４
１，１５１，１５４）と、量子化手段がデータを量子化
する方法の任意のものと、逆量子化手段が量子化手段の
出力を逆量子化する方法の任意のものと、ミスマッチ対
策手段が逆量子化手段の出力に対してＩＤＣＴミスマッ
チ対策を施す方法の任意のものと、量子化手段および逆
量子化手段が量子化行列を使用する任意の方法とを組み
合わせてデータを符号化する方法を制御する制御手段
（例えば、図１のスイッチＳＷ１，ＳＷ２，ＳＷ２１，
ＳＷ２２）とを備えることを特徴とする。
【００８５】請求項３に記載の復号装置は、データを復
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段（例えば、図２の逆量子化器２２
３，２２４，２２５）と、逆量子化手段で用いる量子化
行列を設定する設定手段（例えば、図２の設定器２３
２，２３３）と、逆量子化手段の出力に対して複数の方
法でＩＤＣＴミスマッチ対策を施すミスマッチ対策手段
（例えば、図２のミスマッチ制御器２４１，２５１，２
５３）と、逆量子化手段がデータを逆量子化する方法の
任意のものと、ミスマッチ対策手段が逆量子化手段の出
力に対してＩＤＣＴミスマッチ対策を施す方法の任意の
ものと、逆量子化手段が量子化行列を使用する任意の方
法を組み合わせてデータを復号する方法を制御する制御
手段（例えば、図２のスイッチＳＷ３１，ＳＷ３２）と
を備えることを特徴とする。
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段（例えば、図２の逆量子化器２２
３，２２４，２２５）と、逆量子化手段で用いる量子化
行列を設定する設定手段（例えば、図２の設定器２３
２，２３３）と、逆量子化手段の出力に対して複数の方
法でＩＤＣＴミスマッチ対策を施すミスマッチ対策手段
（例えば、図２のミスマッチ制御器２４１，２５１，２
５３）と、逆量子化手段がデータを逆量子化する方法の
任意のものと、ミスマッチ対策手段が逆量子化手段の出
力に対してＩＤＣＴミスマッチ対策を施す方法の任意の
ものと、逆量子化手段が量子化行列を使用する任意の方
法を組み合わせてデータを復号する方法を制御する制御
手段（例えば、図２のスイッチＳＷ３１，ＳＷ３２）と
を備えることを特徴とする。
【００８６】請求項５に記載の復号装置は、データを復
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段（例えば、図１１の逆量子化器２２
３，２２４）と、逆量子化手段で用いる量子化行列を設
定する設定手段（例えば、図１１の設定器２３２）と、
逆量子化手段の出力に対して所定の方法でＩＤＣＴミス
マッチ対策を施すミスマッチ対策手段（例えば、図１１
のミスマッチ制御器２４１）と、逆量子化手段がデータ
を逆量子化する方法の任意のものと、逆量子化手段が量
子化行列を使用する任意の方法を組み合わせてデータを
復号する方法を制御する制御手段（例えば、図１１のス
イッチＳＷ１１，ＳＷ５１，ＳＷ５２，ＳＷ５３）とを
備えることを特徴とする。
号する復号装置であって、データを複数の方法で逆量子
化する逆量子化手段（例えば、図１１の逆量子化器２２
３，２２４）と、逆量子化手段で用いる量子化行列を設
定する設定手段（例えば、図１１の設定器２３２）と、
逆量子化手段の出力に対して所定の方法でＩＤＣＴミス
マッチ対策を施すミスマッチ対策手段（例えば、図１１
のミスマッチ制御器２４１）と、逆量子化手段がデータ
を逆量子化する方法の任意のものと、逆量子化手段が量
子化行列を使用する任意の方法を組み合わせてデータを
復号する方法を制御する制御手段（例えば、図１１のス
イッチＳＷ１１，ＳＷ５１，ＳＷ５２，ＳＷ５３）とを
備えることを特徴とする。
【００８７】なお、勿論この記載は、各手段を上記した
ものに限定することを意味するものではない。
ものに限定することを意味するものではない。
【００８８】図１に本発明の符号化装置を応用した符号
化器（エンコーダ）の一実施の形態の構成例を示す。ま
た、図２に、本発明の復号装置を応用した復号器（デコ
ーダ）の一実施の形態の構成例を示す。図１はエンコー
ダ、図２はデコーダを示している。図１に示した符号化
器の基本的な構成は図１３に示した従来例の場合とほぼ
同様である。また、図２に示した復号器の基本的な構成
は図１４に示した従来例の場合とほぼ同様である。
化器（エンコーダ）の一実施の形態の構成例を示す。ま
た、図２に、本発明の復号装置を応用した復号器（デコ
ーダ）の一実施の形態の構成例を示す。図１はエンコー
ダ、図２はデコーダを示している。図１に示した符号化
器の基本的な構成は図１３に示した従来例の場合とほぼ
同様である。また、図２に示した復号器の基本的な構成
は図１４に示した従来例の場合とほぼ同様である。
【００８９】従来例と異なる点は、エンコーダについて
は図１３の符号化器において、スイッチＳＷ３，ＳＷ４
で分岐される処理のモードが、図１の符号化器において
は、スイッチＳＷ２１，ＳＷ２２においてそれぞれ三通
り存在する点と、ＭＰＥＧ１あるいはＭＰＥＧ２モード
の場合、逆量子化を行なった後にミスマッチ制御を行な
う部分が存在する点である。デコーダについても、図２
の復号器においては、スイッチＳＷ３１，ＳＷ３２で分
岐される処理のモードが三通り存在する点と、ＭＰＥＧ
１あるいはＭＰＥＧ２モードの場合、逆量子化を行なっ
た後にミスマッチ制御を行なう部分が存在する点であ
る。
は図１３の符号化器において、スイッチＳＷ３，ＳＷ４
で分岐される処理のモードが、図１の符号化器において
は、スイッチＳＷ２１，ＳＷ２２においてそれぞれ三通
り存在する点と、ＭＰＥＧ１あるいはＭＰＥＧ２モード
の場合、逆量子化を行なった後にミスマッチ制御を行な
う部分が存在する点である。デコーダについても、図２
の復号器においては、スイッチＳＷ３１，ＳＷ３２で分
岐される処理のモードが三通り存在する点と、ＭＰＥＧ
１あるいはＭＰＥＧ２モードの場合、逆量子化を行なっ
た後にミスマッチ制御を行なう部分が存在する点であ
る。
【００９０】図１の符号化器におけるスイッチＳＷ１，
ＳＷ２，ＳＷ２１，ＳＷ２２、図２の復号器におけるス
イッチＳＷ３１，ＳＷ３２は、図１３，図１４に示した
従来例の場合と同様に、どのモードの量子化等を行なう
かを示すフラグQ_mode2と連動しており、図の例では
Ｈ．２６１／３モードの場合を示した。但し、符号化器
におけるスイッチＳＷ１，ＳＷ２について、ＭＰＥＧ１
あるいはＭＰＥＧ２モードの場合の処理は共通である。
フラグQ_mode2は、量子化等の処理方法の組み合わせを
示しており、符号化器においては、あらかじめ何らかの
評価基準を用い、Ｈ．２６１／３，ＭＰＥＧ１，ＭＰＥ
Ｇ２のうち、どのモードで量子化等を行なうかを決めて
おく。あるいはエンコードする際に、あらかじめどのモ
ードの量子化等を行なうかの指定がなされていても良
い。図２の復号器においては、逆可変長符号化器２０９
によって復号される値による。
ＳＷ２，ＳＷ２１，ＳＷ２２、図２の復号器におけるス
イッチＳＷ３１，ＳＷ３２は、図１３，図１４に示した
従来例の場合と同様に、どのモードの量子化等を行なう
かを示すフラグQ_mode2と連動しており、図の例では
Ｈ．２６１／３モードの場合を示した。但し、符号化器
におけるスイッチＳＷ１，ＳＷ２について、ＭＰＥＧ１
あるいはＭＰＥＧ２モードの場合の処理は共通である。
フラグQ_mode2は、量子化等の処理方法の組み合わせを
示しており、符号化器においては、あらかじめ何らかの
評価基準を用い、Ｈ．２６１／３，ＭＰＥＧ１，ＭＰＥ
Ｇ２のうち、どのモードで量子化等を行なうかを決めて
おく。あるいはエンコードする際に、あらかじめどのモ
ードの量子化等を行なうかの指定がなされていても良
い。図２の復号器においては、逆可変長符号化器２０９
によって復号される値による。
【００９１】逆量子化後に行なうミスマッチ制御に関連
して、ＤＣＴ係数のクリッピング器（図１の符号化器で
はクリッピング器１４３，１５２，１５３、図２の復号
器ではクリッピング器２４３，２４４，２５２）の位置
がＭＰＥＧ１モードとＭＰＥＧ２モードとで前後してい
ることに注意されたい。ＭＰＥＧ１モード（およびＨ．
２６１／３モード）では、ＤＣＴ係数の奇数化によるミ
スマッチ制御器（図１の符号化器ではミスマッチ制御器
１４１，１５１、図２の復号器ではミスマッチ制御器２
４１，２５１）の後にＤＣＴ係数のクリッピング器が置
かれる。
して、ＤＣＴ係数のクリッピング器（図１の符号化器で
はクリッピング器１４３，１５２，１５３、図２の復号
器ではクリッピング器２４３，２４４，２５２）の位置
がＭＰＥＧ１モードとＭＰＥＧ２モードとで前後してい
ることに注意されたい。ＭＰＥＧ１モード（およびＨ．
２６１／３モード）では、ＤＣＴ係数の奇数化によるミ
スマッチ制御器（図１の符号化器ではミスマッチ制御器
１４１，１５１、図２の復号器ではミスマッチ制御器２
４１，２５１）の後にＤＣＴ係数のクリッピング器が置
かれる。
【００９２】これに対して、ＭＰＥＧ２モードでは、Ｄ
ＣＴ係数のクリッピング器の後に、ＤＣＴ係数の（７，
７）係数をtoggleするミスマッチ制御器（図１の符号化
器ではミスマッチ制御器１５４、図２の復号器ではミス
マッチ制御器２５３）が置かれる。
ＣＴ係数のクリッピング器の後に、ＤＣＴ係数の（７，
７）係数をtoggleするミスマッチ制御器（図１の符号化
器ではミスマッチ制御器１５４、図２の復号器ではミス
マッチ制御器２５３）が置かれる。
【００９３】以下、図１、図２の実施の形態における、
より詳しい処理の流れについて説明する。
より詳しい処理の流れについて説明する。
【００９４】図３および図４に、図１および図２に示し
た符号化器および復号器における処理の流れと符号化ビ
ット列の生成法および解読法の一例を示す。図３はエン
コーダの量子化およびミスマッチ制御部分を示し、図４
はデコーダのミスマッチ制御および逆量子化部分を示し
た。
た符号化器および復号器における処理の流れと符号化ビ
ット列の生成法および解読法の一例を示す。図３はエン
コーダの量子化およびミスマッチ制御部分を示し、図４
はデコーダのミスマッチ制御および逆量子化部分を示し
た。
【００９５】上記実施の形態における符号化シンタック
スの基本的構成は、図３０、図３１に示した従来例の場
合と基本的に同一であるが、量子化および逆量子化の方
法等の組合せとして指定可能なモードとして、Ｈ．２６
１／３モード以外にＭＰＥＧ１,ＭＰＥＧ２モードの三
つが用意されている点が大きく異なる。またＭＰＥＧ
１，ＭＰＥＧ２モードでは、ＩＤＣＴミスマッチの対策
方法が指定されている点も異なる。
スの基本的構成は、図３０、図３１に示した従来例の場
合と基本的に同一であるが、量子化および逆量子化の方
法等の組合せとして指定可能なモードとして、Ｈ．２６
１／３モード以外にＭＰＥＧ１,ＭＰＥＧ２モードの三
つが用意されている点が大きく異なる。またＭＰＥＧ
１，ＭＰＥＧ２モードでは、ＩＤＣＴミスマッチの対策
方法が指定されている点も異なる。
【００９６】上記実施の形態におけるVideo Object Lay
er Classのシンタックスの一部を図５に示した。従来例
とは、video_object_layer_quant_typeのフラグが2bit
である点が異なる。
er Classのシンタックスの一部を図５に示した。従来例
とは、video_object_layer_quant_typeのフラグが2bit
である点が異なる。
【００９７】次に、図３のフローチャートを参照して、
図１に示したエンコーダの量子化およびミスマッチ制御
部分における処理の流れと符号化ビット列の生成法を説
明する。まず、ステップＳ２１において、何らかの評価
基準を用いて、Ｈ．２６１／３，ＭＰＥＧ１，ＭＰＥＧ
２のうちどのモードで量子化等を行なうかを決める。あ
るいはエンコードする際に、あらかじめどのモードの量
子化等を行なうかの指定がなされていても良い。ＤＣＴ
演算を行なって求めた縦横８要素のＤＣＴ係数の各ブロ
ックに対して、各モードに応じて以下のように量子化行
列の利用方法を設定し、量子化および逆量子化の方法を
選択し、ＩＤＣＴミスマッチの対策方法を選択する。
図１に示したエンコーダの量子化およびミスマッチ制御
部分における処理の流れと符号化ビット列の生成法を説
明する。まず、ステップＳ２１において、何らかの評価
基準を用いて、Ｈ．２６１／３，ＭＰＥＧ１，ＭＰＥＧ
２のうちどのモードで量子化等を行なうかを決める。あ
るいはエンコードする際に、あらかじめどのモードの量
子化等を行なうかの指定がなされていても良い。ＤＣＴ
演算を行なって求めた縦横８要素のＤＣＴ係数の各ブロ
ックに対して、各モードに応じて以下のように量子化行
列の利用方法を設定し、量子化および逆量子化の方法を
選択し、ＩＤＣＴミスマッチの対策方法を選択する。
【００９８】Ｈ．２６１／３モードの場合は、ステップ
Ｓ２２において、量子化器１２１により、縦横８要素の
ＤＣＴ係数の各ブロックに対して、Ｈ．２６１／３型の
量子化が行われ、次に、逆量子化器１２３により逆量子
化が行われる。その後、ステップＳ２３に進み、ミスマ
ッチ制御器１４１により、ＤＣＴ係数を奇数化するミス
マッチ制御が行われ、次に、ステップＳ２４において、
クリッピング器１４３によりＤＣＴ係数のクリッピング
が行われる。
Ｓ２２において、量子化器１２１により、縦横８要素の
ＤＣＴ係数の各ブロックに対して、Ｈ．２６１／３型の
量子化が行われ、次に、逆量子化器１２３により逆量子
化が行われる。その後、ステップＳ２３に進み、ミスマ
ッチ制御器１４１により、ＤＣＴ係数を奇数化するミス
マッチ制御が行われ、次に、ステップＳ２４において、
クリッピング器１４３によりＤＣＴ係数のクリッピング
が行われる。
【００９９】このモードの場合には、量子化行列は利用
しないため、量子化行列は設定されずに量子化および逆
量子化が行なわれる。なお、このモードが選ばれた場合
には、ステップＳ２５において、例えば、Video Object
Layer Classのvideo_object_layer_quant_typeのフラ
グは"01"に設定され、符号化される。この例では、この
フラグの名前は従来例の場合と同名になっているが、以
下にも説明するように、その役割は従来例とは異なる。
しないため、量子化行列は設定されずに量子化および逆
量子化が行なわれる。なお、このモードが選ばれた場合
には、ステップＳ２５において、例えば、Video Object
Layer Classのvideo_object_layer_quant_typeのフラ
グは"01"に設定され、符号化される。この例では、この
フラグの名前は従来例の場合と同名になっているが、以
下にも説明するように、その役割は従来例とは異なる。
【０１００】一方、ＭＰＥＧ１モードの場合は、ステッ
プＳ２６において、設定器１３２により、縦横８要素の
ＤＣＴ係数の各ブロックに対してまず、ＭＰＥＧ１／２
型の量子化行列が設定される。ここで設定される量子化
行列は、画像内符号化と画像間符号化とでは異なる。ま
た、あらかじめ用意されている量子化行列以外のものを
新たに設定して用いても良いが、その場合には、例えば
Video Object Layer Classのload_intra_quant_mat、あ
るいはload_nonintra_quant_matのフラグをONにし、新
たに設定した量子化行列の６４個の要素をintra_quant_
mat[64]あるいはnonintra_quant_mat[64]として符号化
する等の処理を行なわなければならない。
プＳ２６において、設定器１３２により、縦横８要素の
ＤＣＴ係数の各ブロックに対してまず、ＭＰＥＧ１／２
型の量子化行列が設定される。ここで設定される量子化
行列は、画像内符号化と画像間符号化とでは異なる。ま
た、あらかじめ用意されている量子化行列以外のものを
新たに設定して用いても良いが、その場合には、例えば
Video Object Layer Classのload_intra_quant_mat、あ
るいはload_nonintra_quant_matのフラグをONにし、新
たに設定した量子化行列の６４個の要素をintra_quant_
mat[64]あるいはnonintra_quant_mat[64]として符号化
する等の処理を行なわなければならない。
【０１０１】その後、ステップＳ２７において、量子化
器１２２により、設定器１３２が設定した量子化行列を
用いてＭＰＥＧ１／２型の量子化が行われ、次に、逆量
子化器１２４により、逆量子化が行われる。次に、ステ
ップＳ２８に進み、ミスマッチ制御器１５１により、Ｄ
ＣＴ係数を奇数化するミスマッチ制御が行われ、ステッ
プＳ２９において、クリッピング器１５２により、ＤＣ
Ｔ係数のクリッピングが行われる。なお、このモードが
選ばれた場合には、ステップＳ３０において、例えば、
Video Object Layer Classのvideo_object_layer_quant
_typeのフラグは"10"に設定され、符号化される。
器１２２により、設定器１３２が設定した量子化行列を
用いてＭＰＥＧ１／２型の量子化が行われ、次に、逆量
子化器１２４により、逆量子化が行われる。次に、ステ
ップＳ２８に進み、ミスマッチ制御器１５１により、Ｄ
ＣＴ係数を奇数化するミスマッチ制御が行われ、ステッ
プＳ２９において、クリッピング器１５２により、ＤＣ
Ｔ係数のクリッピングが行われる。なお、このモードが
選ばれた場合には、ステップＳ３０において、例えば、
Video Object Layer Classのvideo_object_layer_quant
_typeのフラグは"10"に設定され、符号化される。
【０１０２】さらに、ＭＰＥＧ２モードの場合は、ステ
ップＳ３１において、設定器１３２により、縦横８要素
のＤＣＴ係数の各ブロックに対して、ＭＰＥＧ１モード
の場合と同様に、まずＭＰＥＧ１／２型の量子化行列が
設定される。ここで、新たに量子化行列を設定して用い
る場合にも、ＭＰＥＧ１モードの場合と同様に量子化行
列の６４個の要素を符号化する等の処理を行なわなけれ
ばならない。
ップＳ３１において、設定器１３２により、縦横８要素
のＤＣＴ係数の各ブロックに対して、ＭＰＥＧ１モード
の場合と同様に、まずＭＰＥＧ１／２型の量子化行列が
設定される。ここで、新たに量子化行列を設定して用い
る場合にも、ＭＰＥＧ１モードの場合と同様に量子化行
列の６４個の要素を符号化する等の処理を行なわなけれ
ばならない。
【０１０３】その後、ステップＳ３２に進み、設定器１
３２が設定した量子化行列を用いてＭＰＥＧ１／２型の
量子化が行われ、逆量子化器１２５により、逆量子化が
行われる。次に、ステップＳ３３において、クリッピン
グ器１５３により、ＤＣＴ係数のクリッピングが行われ
てから、ステップＳ３４に進み、ミスマッチ制御器１５
４により、ＤＣＴ係数の（７，７）要素をtoggleするこ
とによるミスマッチ制御が行われる。なお、このモード
が選ばれた場合には、ステップＳ３５において、例え
ば、Video Object Layer Classのvideo_object_layer_q
uant_typeのフラグは"11"に設定され、符号化される。
ステップＳ２５またはステップＳ３０またはステップＳ
３５の処理が終了すると、すべての処理を終了する。
３２が設定した量子化行列を用いてＭＰＥＧ１／２型の
量子化が行われ、逆量子化器１２５により、逆量子化が
行われる。次に、ステップＳ３３において、クリッピン
グ器１５３により、ＤＣＴ係数のクリッピングが行われ
てから、ステップＳ３４に進み、ミスマッチ制御器１５
４により、ＤＣＴ係数の（７，７）要素をtoggleするこ
とによるミスマッチ制御が行われる。なお、このモード
が選ばれた場合には、ステップＳ３５において、例え
ば、Video Object Layer Classのvideo_object_layer_q
uant_typeのフラグは"11"に設定され、符号化される。
ステップＳ２５またはステップＳ３０またはステップＳ
３５の処理が終了すると、すべての処理を終了する。
【０１０４】次に、図４のフローチャートを参照して、
図２に示したデコーダのミスマッチ制御および逆量子化
部分における処理の流れと符号化ビット列の解読法につ
いて説明する。ステップＳ３１においては、図１に示し
たエンコーダによって符号化された符号化ビット列のう
ち、例えば、Video Object Layer Classのvideo_object
_layer_quant_typeのフラグを解読することによって、
エンコーダ側で用いたモードに対応するように逆量子化
等の処理を行なう。例えば、video_object_layer_quant
_type=="01"の場合にはＨ．２６１／３モード、video_o
bject_layer_quant_type=="10"の場合にはＭＰＥＧ１モ
ード、video_object_layer_quant_type=="11"の場合に
はＭＰＥＧ２モードとみなして処理を行なう。
図２に示したデコーダのミスマッチ制御および逆量子化
部分における処理の流れと符号化ビット列の解読法につ
いて説明する。ステップＳ３１においては、図１に示し
たエンコーダによって符号化された符号化ビット列のう
ち、例えば、Video Object Layer Classのvideo_object
_layer_quant_typeのフラグを解読することによって、
エンコーダ側で用いたモードに対応するように逆量子化
等の処理を行なう。例えば、video_object_layer_quant
_type=="01"の場合にはＨ．２６１／３モード、video_o
bject_layer_quant_type=="10"の場合にはＭＰＥＧ１モ
ード、video_object_layer_quant_type=="11"の場合に
はＭＰＥＧ２モードとみなして処理を行なう。
【０１０５】Ｈ．２６１／３モードの場合は、量子化行
列は利用しないため、ステップＳ３２に進み、量子化行
列は設定されずに逆量子化が行なわれる。即ち、復号さ
れた縦横８要素のＤＣＴ係数の各ブロックに対して、ま
ず、逆量子化器２２３により、Ｈ．２６１／３型の逆量
子化が行われる。その後、ステップＳ３３において、ミ
スマッチ制御器１４１により、ＤＣＴ係数を奇数化する
ミスマッチ制御が行われ、ステップＳ３４に進み、クリ
ッピング器２４３により、ＤＣＴ係数のクリッピングが
行われる。
列は利用しないため、ステップＳ３２に進み、量子化行
列は設定されずに逆量子化が行なわれる。即ち、復号さ
れた縦横８要素のＤＣＴ係数の各ブロックに対して、ま
ず、逆量子化器２２３により、Ｈ．２６１／３型の逆量
子化が行われる。その後、ステップＳ３３において、ミ
スマッチ制御器１４１により、ＤＣＴ係数を奇数化する
ミスマッチ制御が行われ、ステップＳ３４に進み、クリ
ッピング器２４３により、ＤＣＴ係数のクリッピングが
行われる。
【０１０６】また、ＭＰＥＧ１モードの場合は、復号さ
れた縦横８要素のＤＣＴ係数の各ブロックに対して、ま
ず、ステップＳ３５において、設定器２３２により、Ｍ
ＰＥＧ１／２型の量子化行列が設定される。ここで設定
される量子化行列は、画像内符号化と画像間符号化とで
は異なる。また、例えば、Video Object Layer Classの
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えば、intra_quant_mat[64]あるいはnonintra_quant_
mat[64]として符号化された量子化行列の６４個の要素
を復号して用いる等の処理を行なわなければならない。
次に、ステップＳ３６に進み、逆量子化器２２４によ
り、設定器２３２が設定した量子化行列を用いてＭＰＥ
Ｇ１／２型の逆量子化が行われる。その後、ステップＳ
３７において、ミスマッチ制御器２５１により、ＤＣＴ
係数を奇数化するミスマッチ制御が行われ、次に、ステ
ップＳ３８において、クリッピング器２４４により、Ｄ
ＣＴ係数のクリッピングが行われる。
れた縦横８要素のＤＣＴ係数の各ブロックに対して、ま
ず、ステップＳ３５において、設定器２３２により、Ｍ
ＰＥＧ１／２型の量子化行列が設定される。ここで設定
される量子化行列は、画像内符号化と画像間符号化とで
は異なる。また、例えば、Video Object Layer Classの
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えば、intra_quant_mat[64]あるいはnonintra_quant_
mat[64]として符号化された量子化行列の６４個の要素
を復号して用いる等の処理を行なわなければならない。
次に、ステップＳ３６に進み、逆量子化器２２４によ
り、設定器２３２が設定した量子化行列を用いてＭＰＥ
Ｇ１／２型の逆量子化が行われる。その後、ステップＳ
３７において、ミスマッチ制御器２５１により、ＤＣＴ
係数を奇数化するミスマッチ制御が行われ、次に、ステ
ップＳ３８において、クリッピング器２４４により、Ｄ
ＣＴ係数のクリッピングが行われる。
【０１０７】さらに、ＭＰＥＧ２モードの場合は、復号
された縦横８要素のＤＣＴ係数の各ブロックに対して、
まず、ステップＳ３９において、設定器２３３により、
ＭＰＥＧ１／２型の量子化行列が設定される。ここで設
定される量子化行列は、ＭＰＥＧ１モードの場合と同様
であり、新たに量子化行列が設定されている場合には、
符号化された量子化行列を復号して用いる等の処理を行
なわなければならない。次に、ステップＳ４０に進み、
逆量子化器２２５により、設定器２３３が設定した量子
化行列を用いてＭＰＥＧ１／２型の逆量子化が行われ
る。その後、ステップＳ４１において、クリッピング器
２５２により、ＤＣＴ係数のクリッピングが行われ、ス
テップＳ４２において、ミスマッチ制御器２５３によ
り、ＤＣＴ係数の（７，７）要素をtoggleすることによ
るミスマッチ制御が行われる。
された縦横８要素のＤＣＴ係数の各ブロックに対して、
まず、ステップＳ３９において、設定器２３３により、
ＭＰＥＧ１／２型の量子化行列が設定される。ここで設
定される量子化行列は、ＭＰＥＧ１モードの場合と同様
であり、新たに量子化行列が設定されている場合には、
符号化された量子化行列を復号して用いる等の処理を行
なわなければならない。次に、ステップＳ４０に進み、
逆量子化器２２５により、設定器２３３が設定した量子
化行列を用いてＭＰＥＧ１／２型の逆量子化が行われ
る。その後、ステップＳ４１において、クリッピング器
２５２により、ＤＣＴ係数のクリッピングが行われ、ス
テップＳ４２において、ミスマッチ制御器２５３によ
り、ＤＣＴ係数の（７，７）要素をtoggleすることによ
るミスマッチ制御が行われる。
【０１０８】上記処理以外でも、Ｈ．２６１／３、ＭＰ
ＥＧ１、ＭＰＥＧ２の各モードにおいて個別に処理すべ
き他の処理を、例えば、Video Object Layer Classのvi
deo_object_layer_quant_typeのフラグと連動させるこ
とにしても良い。あるいは、新たなモードを設け、その
モードと対応するような新規あるいは従来の量子化およ
び逆量子化等の各処理方法を連動させることにしても良
い。あるいは、逆に用意するモードの数自体を減らした
り、フラグと連動させる処理の数を減らすなど、処理を
簡潔にしても良い。あるいは、可能である限りこれらの
処理の順番を入れ換えても良い。どのモードの処理方法
を行なうかを示す例えば、video_object_layer_quant_t
ypeのフラグで用いるシンボルは、上記の例とは異なっ
たシンボルを用いても良い。
ＥＧ１、ＭＰＥＧ２の各モードにおいて個別に処理すべ
き他の処理を、例えば、Video Object Layer Classのvi
deo_object_layer_quant_typeのフラグと連動させるこ
とにしても良い。あるいは、新たなモードを設け、その
モードと対応するような新規あるいは従来の量子化およ
び逆量子化等の各処理方法を連動させることにしても良
い。あるいは、逆に用意するモードの数自体を減らした
り、フラグと連動させる処理の数を減らすなど、処理を
簡潔にしても良い。あるいは、可能である限りこれらの
処理の順番を入れ換えても良い。どのモードの処理方法
を行なうかを示す例えば、video_object_layer_quant_t
ypeのフラグで用いるシンボルは、上記の例とは異なっ
たシンボルを用いても良い。
【０１０９】また上記の例では、各モードを示すフラグ
として、例えばVideo Object LayerClassのvideo_objec
t_layer_quant_typeのフラグとして説明を行なったが、
同様の役割を担う別名のフラグであっても良い。あるい
は、例えば、Video ObjectLayer Classにおいてこのフ
ラグを設定する代わりに、Video Object Plane Class又
はMacroblock Layer等の他のLayerで設定することによ
って、設定したフラグに連動させる処理方法をオブジェ
クト単位からフレーム又はマクロブロック単位等の別の
単位で切り替えることにしても良い。
として、例えばVideo Object LayerClassのvideo_objec
t_layer_quant_typeのフラグとして説明を行なったが、
同様の役割を担う別名のフラグであっても良い。あるい
は、例えば、Video ObjectLayer Classにおいてこのフ
ラグを設定する代わりに、Video Object Plane Class又
はMacroblock Layer等の他のLayerで設定することによ
って、設定したフラグに連動させる処理方法をオブジェ
クト単位からフレーム又はマクロブロック単位等の別の
単位で切り替えることにしても良い。
【０１１０】図６、図７に、本発明の符号化装置および
復号装置を適用したエンコーダ（符号化器）およびデコ
ーダ（復号器）の一実施の形態の構成例を示す。図５は
エンコーダ、図６はデコーダを示している。図６、図７
に示したエンコーダおよびデコーダの基本的な構成は、
図１、図２に示した実施の形態の場合とほぼ同様であ
る。
復号装置を適用したエンコーダ（符号化器）およびデコ
ーダ（復号器）の一実施の形態の構成例を示す。図５は
エンコーダ、図６はデコーダを示している。図６、図７
に示したエンコーダおよびデコーダの基本的な構成は、
図１、図２に示した実施の形態の場合とほぼ同様であ
る。
【０１１１】図１および図２の実施の形態と異なる点
は、エンコーダについては図６の符号化器において、ス
イッチＳＷ１，ＳＷ４１，ＳＷ４２，ＳＷ２，ＳＷ３，
ＳＷ４３，ＳＷ４４，ＳＷ４５とフラグQ_matrix,Q_typ
e,mismatchによって、量子化行列の利用方法、量子化お
よび逆量子化の方法、ＩＤＣＴミスマッチの対策方法を
個別に設定することが可能となっている点である。デコ
ーダについても図７の復号器において、スイッチＳＷ１
１，ＳＷ５１，ＳＷ５２，ＳＷ５３，ＳＷ５４，ＳＷ５
５とフラグQ_matrix,Q_type,mismatchによって、量子化
行列の利用方法、逆量子化の方法、ＩＤＣＴミスマッチ
の対策方法を個別に設定することが可能となっている点
である。
は、エンコーダについては図６の符号化器において、ス
イッチＳＷ１，ＳＷ４１，ＳＷ４２，ＳＷ２，ＳＷ３，
ＳＷ４３，ＳＷ４４，ＳＷ４５とフラグQ_matrix,Q_typ
e,mismatchによって、量子化行列の利用方法、量子化お
よび逆量子化の方法、ＩＤＣＴミスマッチの対策方法を
個別に設定することが可能となっている点である。デコ
ーダについても図７の復号器において、スイッチＳＷ１
１，ＳＷ５１，ＳＷ５２，ＳＷ５３，ＳＷ５４，ＳＷ５
５とフラグQ_matrix,Q_type,mismatchによって、量子化
行列の利用方法、逆量子化の方法、ＩＤＣＴミスマッチ
の対策方法を個別に設定することが可能となっている点
である。
【０１１２】本実施の形態では、図１、図２に示した実
施の形態におけるフラグQ_mode2に代って、Q_matrix,Q_
type,mismatchと名付けられた３つのフラグが用意され
ている。フラグQ_matrixは、図６の符号化器においては
スイッチＳＷ１，ＳＷ４１、図７の復号器においてはス
イッチＳＷ１１，ＳＷ５１と連動しており、量子化行列
の利用方法に係わる。フラグQ_typeは、図６の符号化器
においてはスイッチＳＷ４２，ＳＷ２，ＳＷ３，ＳＷ４
３、図７の復号器においてはスイッチＳＷ５２，ＳＷ５
３と連動しており、量子化および逆量子化の方法に係わ
る。
施の形態におけるフラグQ_mode2に代って、Q_matrix,Q_
type,mismatchと名付けられた３つのフラグが用意され
ている。フラグQ_matrixは、図６の符号化器においては
スイッチＳＷ１，ＳＷ４１、図７の復号器においてはス
イッチＳＷ１１，ＳＷ５１と連動しており、量子化行列
の利用方法に係わる。フラグQ_typeは、図６の符号化器
においてはスイッチＳＷ４２，ＳＷ２，ＳＷ３，ＳＷ４
３、図７の復号器においてはスイッチＳＷ５２，ＳＷ５
３と連動しており、量子化および逆量子化の方法に係わ
る。
【０１１３】フラグmismatchは、図６の符号化器におい
てはスイッチＳＷ４４，ＳＷ４５、図７の復号器におい
てはスイッチＳＷ５４，ＳＷ５５と連動しており、ＩＤ
ＣＴミスマッチの対策方法に係わる。図の例では、Q_ma
trixについてはＭＰＥＧ１／２型の量子化行列を用いな
い場合、Q_typeについてはＨ．２６１／３型の量子化を
行なう場合、mismatchについてはＤＣＴ係数の奇数化に
よるミスマッチ制御を行なう場合を示した。
てはスイッチＳＷ４４，ＳＷ４５、図７の復号器におい
てはスイッチＳＷ５４，ＳＷ５５と連動しており、ＩＤ
ＣＴミスマッチの対策方法に係わる。図の例では、Q_ma
trixについてはＭＰＥＧ１／２型の量子化行列を用いな
い場合、Q_typeについてはＨ．２６１／３型の量子化を
行なう場合、mismatchについてはＤＣＴ係数の奇数化に
よるミスマッチ制御を行なう場合を示した。
【０１１４】３つのフラグQ_matrix,Q_type,mismatch
は、処理方法の組み合わせを示しており、図６の符号化
器においてはあらかじめ何らかの評価基準を用い、それ
ぞれどの処理方法を用いるかを決めておく。あるいはエ
ンコードする際に、あらかじめどの処理方法を用いるか
の指定がなされていても良い。図７の復号器において
は、逆可変長符号化器２０９によって復号される値によ
る。
は、処理方法の組み合わせを示しており、図６の符号化
器においてはあらかじめ何らかの評価基準を用い、それ
ぞれどの処理方法を用いるかを決めておく。あるいはエ
ンコードする際に、あらかじめどの処理方法を用いるか
の指定がなされていても良い。図７の復号器において
は、逆可変長符号化器２０９によって復号される値によ
る。
【０１１５】フラグmismatchによって切り替わるミスマ
ッチ制御に関連して、ＤＣＴ係数のクリッピング器（図
６の符号化器ではクリッピング器１４３，１５３、図７
の復号器ではクリッピング器２４３，２５２）の位置
が、図１、図２に示した実施の形態の場合と同様に前後
していることに注意されたい。ＤＣＴ係数の奇数化によ
るミスマッチ制御を行なう場合には、ＤＣＴ係数の奇数
化によるミスマッチ制御器（図６の符号化器ではミスマ
ッチ制御器１４１、図７の復号器ではミスマッチ制御器
２４１）の後にＤＣＴ係数のクリッピング器が置かれ
る。
ッチ制御に関連して、ＤＣＴ係数のクリッピング器（図
６の符号化器ではクリッピング器１４３，１５３、図７
の復号器ではクリッピング器２４３，２５２）の位置
が、図１、図２に示した実施の形態の場合と同様に前後
していることに注意されたい。ＤＣＴ係数の奇数化によ
るミスマッチ制御を行なう場合には、ＤＣＴ係数の奇数
化によるミスマッチ制御器（図６の符号化器ではミスマ
ッチ制御器１４１、図７の復号器ではミスマッチ制御器
２４１）の後にＤＣＴ係数のクリッピング器が置かれ
る。
【０１１６】これ対してＤＣＴ係数の（７，７）係数を
toggleすることによるミスマッチ制御を行なう場合に
は、ＤＣＴ係数のクリッピング器の後に、ＤＣＴ係数の
（７，７）係数をtoggleするミスマッチ制御器（図６の
符号化器ではミスマッチ制御器１５４、図７の復号器で
はミスマッチ制御器２５３）が置かれる。
toggleすることによるミスマッチ制御を行なう場合に
は、ＤＣＴ係数のクリッピング器の後に、ＤＣＴ係数の
（７，７）係数をtoggleするミスマッチ制御器（図６の
符号化器ではミスマッチ制御器１５４、図７の復号器で
はミスマッチ制御器２５３）が置かれる。
【０１１７】フラグQ_matrixによって切り替わる量子化
行列の利用方法に関連して、仮の量子化行列の設定器
（図６の符号化器では設定器１３１、図７の復号器では
設定器２６１）について説明する。フラグQ_matrixによ
ってＭＰＥＧ１／２型の量子化行列を用いないことが示
された場合、本来量子化行列は設定されず、この仮の量
子化行列の設定器の存在は、通常、符号化器、復号器で
共に無視される。しかし、図６、図７の実施の形態にお
いては、同じ量子化および逆量子化の処理方法に対し
て、量子化行列が設定されている場合と設定されていな
い場合のどちらもが起こりうるため、そのどちらの場合
にも対処できるように、量子化および逆量子化の処理を
複数用意しておくべき場合がある。
行列の利用方法に関連して、仮の量子化行列の設定器
（図６の符号化器では設定器１３１、図７の復号器では
設定器２６１）について説明する。フラグQ_matrixによ
ってＭＰＥＧ１／２型の量子化行列を用いないことが示
された場合、本来量子化行列は設定されず、この仮の量
子化行列の設定器の存在は、通常、符号化器、復号器で
共に無視される。しかし、図６、図７の実施の形態にお
いては、同じ量子化および逆量子化の処理方法に対し
て、量子化行列が設定されている場合と設定されていな
い場合のどちらもが起こりうるため、そのどちらの場合
にも対処できるように、量子化および逆量子化の処理を
複数用意しておくべき場合がある。
【０１１８】しかしながら、量子化行列の設定の有無に
係わらず、量子化および逆量子化の処理を一通りで行な
えるように、演算あるいは回路を構成することも可能で
ある。それは、量子化行列を設定する場合に合わせるよ
うに、量子化行列を設定しない場合には、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列を設定しておき、量子化および逆量子化の処理を行
なう際にはこの仮の量子化行列を用いることである。こ
のように、仮の量子化行列を設定する場合、仮の量子化
行列の設定器は、図６の符号化器では設定器１３１、図
７の復号器では設定器２６１の位置に置かれ、存在する
ことになる。
係わらず、量子化および逆量子化の処理を一通りで行な
えるように、演算あるいは回路を構成することも可能で
ある。それは、量子化行列を設定する場合に合わせるよ
うに、量子化行列を設定しない場合には、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列を設定しておき、量子化および逆量子化の処理を行
なう際にはこの仮の量子化行列を用いることである。こ
のように、仮の量子化行列を設定する場合、仮の量子化
行列の設定器は、図６の符号化器では設定器１３１、図
７の復号器では設定器２６１の位置に置かれ、存在する
ことになる。
【０１１９】図６および図７に示した実施の形態におけ
る、より詳しい処理の流れについて、以下に説明する。
る、より詳しい処理の流れについて、以下に説明する。
【０１２０】図８および図９のフローチャートは、図６
および図７の実施の形態における処理の流れと符号化ビ
ット列の生成法および解読法の一例を示している。図８
はエンコーダの量子化およびミスマッチ制御部分を示
し、図９はデコーダのミスマッチ制御および逆量子化部
分を示している。
および図７の実施の形態における処理の流れと符号化ビ
ット列の生成法および解読法の一例を示している。図８
はエンコーダの量子化およびミスマッチ制御部分を示
し、図９はデコーダのミスマッチ制御および逆量子化部
分を示している。
【０１２１】図６および図７の実施の形態における符号
化シンタックスの基本的構成は、図３、図４に示した実
施の形態の場合と基本的に同様であるが、量子化行列の
利用方法、量子化および逆量子化の方法、およびＩＤＣ
Ｔミスマッチの対策方法等を連動させて設定するのでは
なく、個別に設定することが可能となっている点が大き
く異なる。
化シンタックスの基本的構成は、図３、図４に示した実
施の形態の場合と基本的に同様であるが、量子化行列の
利用方法、量子化および逆量子化の方法、およびＩＤＣ
Ｔミスマッチの対策方法等を連動させて設定するのでは
なく、個別に設定することが可能となっている点が大き
く異なる。
【０１２２】図６および図７の実施の形態におけるVide
o Object Layer Classのシンタックスの一部を図１０に
示した。従来例とは、video_object_layer_quant_type
のフラグの代わりに、video_object_layer_quant_matri
x,video_object_layer_quant_type,video_object_layer
_mismatchの３つのフラグが設けられている点が異な
る。
o Object Layer Classのシンタックスの一部を図１０に
示した。従来例とは、video_object_layer_quant_type
のフラグの代わりに、video_object_layer_quant_matri
x,video_object_layer_quant_type,video_object_layer
_mismatchの３つのフラグが設けられている点が異な
る。
【０１２３】図８のフローチャートを参照して、エンコ
ーダの量子化およびミスマッチ制御部分における処理の
流れと符号化ビット列の生成法について説明する。ステ
ップＳ４１において、それぞれ複数の処理方法が用意さ
れている、量子化行列の利用方法、量子化および逆量子
化の方法、およびＩＤＣＴミスマッチの対策方法等につ
いて、どの処理方法を用いるかを、何らかの評価基準を
用いて決める。あるいはエンコードする際に、あらかじ
めどの処理方法の量子化等を行なうかの指定がなされて
いても良い。ＤＣＴ演算を行なって求めた縦横８要素の
ＤＣＴ係数の各ブロックに対して、以下のように量子化
行列の利用方法を設定し、量子化および逆量子化の方法
を選択し、ＩＤＣＴミスマッチの対策方法を選択する。
ーダの量子化およびミスマッチ制御部分における処理の
流れと符号化ビット列の生成法について説明する。ステ
ップＳ４１において、それぞれ複数の処理方法が用意さ
れている、量子化行列の利用方法、量子化および逆量子
化の方法、およびＩＤＣＴミスマッチの対策方法等につ
いて、どの処理方法を用いるかを、何らかの評価基準を
用いて決める。あるいはエンコードする際に、あらかじ
めどの処理方法の量子化等を行なうかの指定がなされて
いても良い。ＤＣＴ演算を行なって求めた縦横８要素の
ＤＣＴ係数の各ブロックに対して、以下のように量子化
行列の利用方法を設定し、量子化および逆量子化の方法
を選択し、ＩＤＣＴミスマッチの対策方法を選択する。
【０１２４】まず、決められた量子化行列の利用方法に
従って、量子化行列を設定する。図８の例では、ＭＰＥ
Ｇ１／２型の量子化行列を用いない場合には、量子化行
列を設定しない。あるいは、ステップＳ４２において、
設定器１３１により、量子化行列を設定した場合と量子
化の演算を共通に行なえるように、全ての要素の値が
（０以外でかつ正の値で）等しいなどの仮の量子化行列
が設定される。一方、ＭＰＥＧ１／２型の量子化行列を
用いる場合には、ステップＳ４４において、設定器１３
２により、ＭＰＥＧ１／２型の量子化行列が設定され
る。ここで設定される量子化行列は、図１および図２に
示した実施の形態の場合と同様に、画像内符号化と画像
間符号化とでは異なる。
従って、量子化行列を設定する。図８の例では、ＭＰＥ
Ｇ１／２型の量子化行列を用いない場合には、量子化行
列を設定しない。あるいは、ステップＳ４２において、
設定器１３１により、量子化行列を設定した場合と量子
化の演算を共通に行なえるように、全ての要素の値が
（０以外でかつ正の値で）等しいなどの仮の量子化行列
が設定される。一方、ＭＰＥＧ１／２型の量子化行列を
用いる場合には、ステップＳ４４において、設定器１３
２により、ＭＰＥＧ１／２型の量子化行列が設定され
る。ここで設定される量子化行列は、図１および図２に
示した実施の形態の場合と同様に、画像内符号化と画像
間符号化とでは異なる。
【０１２５】また、あらかじめ用意されている量子化行
列以外のものを新たに設定して用いても良いが、その場
合には、例えばVideo Object Layer Classのload_intra
_quant_mat、あるいはload_nonintra_quant_matのフラ
グをONにし、新たに設定した量子化行列の６４個の要素
をintra_quant_mat[64]あるいはnonintra_quant_mat[6
4]として符号化する等の処理を行なわなければならな
い。量子化行列の利用方法を示す例えばVideo Object L
ayer Classのvideo_object_layer_quant_matrixのフラ
グは、ＭＰＥＧ１／２型の量子化行列を用いない場合に
はON、ＭＰＥＧ１／２型の量子化行列を用いる場合には
OFFに設定され、符号化される。
列以外のものを新たに設定して用いても良いが、その場
合には、例えばVideo Object Layer Classのload_intra
_quant_mat、あるいはload_nonintra_quant_matのフラ
グをONにし、新たに設定した量子化行列の６４個の要素
をintra_quant_mat[64]あるいはnonintra_quant_mat[6
4]として符号化する等の処理を行なわなければならな
い。量子化行列の利用方法を示す例えばVideo Object L
ayer Classのvideo_object_layer_quant_matrixのフラ
グは、ＭＰＥＧ１／２型の量子化行列を用いない場合に
はON、ＭＰＥＧ１／２型の量子化行列を用いる場合には
OFFに設定され、符号化される。
【０１２６】次に、ステップＳ４６において、Ｈ．２６
１／３型の量子化を行うか否かが決定され、決められた
量子化の方法に従って、量子化および逆量子化が行なわ
れる。図８の例では、Ｈ．２６１／３型の量子化を行な
う場合には、ステップＳ４７において、量子化器１２１
により、Ｈ．２６１／３型の量子化が行われ、逆量子化
器１２３により、逆量子化が行われる。
１／３型の量子化を行うか否かが決定され、決められた
量子化の方法に従って、量子化および逆量子化が行なわ
れる。図８の例では、Ｈ．２６１／３型の量子化を行な
う場合には、ステップＳ４７において、量子化器１２１
により、Ｈ．２６１／３型の量子化が行われ、逆量子化
器１２３により、逆量子化が行われる。
【０１２７】Ｈ．２６１／３型の量子化を行なわない場
合には、用いる量子化の方法はＭＰＥＧ１／２型である
とみなして、ステップＳ４９において、量子化器１２２
により、量子化が行われ、次に、逆量子化器１２４によ
り逆量子化が行われる。量子化および逆量子化の処理を
行なう際には、量子化行列が設定されている場合にはそ
れを用い、量子化行列が設定されていない場合にはそれ
を用いない。あるいは、仮の量子化行列が設定されてい
る場合には、それを用いる。
合には、用いる量子化の方法はＭＰＥＧ１／２型である
とみなして、ステップＳ４９において、量子化器１２２
により、量子化が行われ、次に、逆量子化器１２４によ
り逆量子化が行われる。量子化および逆量子化の処理を
行なう際には、量子化行列が設定されている場合にはそ
れを用い、量子化行列が設定されていない場合にはそれ
を用いない。あるいは、仮の量子化行列が設定されてい
る場合には、それを用いる。
【０１２８】量子化および逆量子化の方法を示す例えば
Video Object Layer Classのvideo_object_layer_quant
_typeのフラグは、Ｈ．２６１／３型の量子化を行なう
場合にはON、Ｈ．２６１／３型の量子化を行なわない場
合にはOFFに設定され、符号化される。この例では、こ
のフラグの名前は従来例および図１、図２に示した実施
の形態の場合（図３、図４のフローチャートに示したフ
ラグ）と同名になっているが、その役割は従来例、図
１、図２の実施の形態のどちらとも異なる。
Video Object Layer Classのvideo_object_layer_quant
_typeのフラグは、Ｈ．２６１／３型の量子化を行なう
場合にはON、Ｈ．２６１／３型の量子化を行なわない場
合にはOFFに設定され、符号化される。この例では、こ
のフラグの名前は従来例および図１、図２に示した実施
の形態の場合（図３、図４のフローチャートに示したフ
ラグ）と同名になっているが、その役割は従来例、図
１、図２の実施の形態のどちらとも異なる。
【０１２９】その後、ステップＳ５１において、ＤＣＴ
係数の奇数化によるミスマッチ制御を行うか否かが決定
され、決められたＩＤＣＴミスマッチの対策方法に従っ
て、ミスマッチ制御（およびＤＣＴ係数のクリッピン
グ）が行われる。図８の例では、ＤＣＴ係数の奇数化に
よるミスマッチ制御を行なう場合には、ステップＳ５２
において、ミスマッチ制御器１４１により、ＤＣＴ係数
の奇数化によるミスマッチ制御が行われた後で、ステッ
プＳ５３に進み、クリッピング器１４３により、ＤＣＴ
係数のクリッピングが行われる。ＤＣＴ係数の奇数化に
よるミスマッチ制御を行なわない場合には、用いるミス
マッチの対策方法はＤＣＴ係数の（７，７）係数をtogg
leすることによるミスマッチ制御であるとみなし、ステ
ップＳ５５に進み、クリッピング器１５３により、ＤＣ
Ｔ係数のクリッピングが行われた後で、ステップＳ５６
において、ミスマッチ制御器１５４により、このミスマ
ッチ制御が行われる。
係数の奇数化によるミスマッチ制御を行うか否かが決定
され、決められたＩＤＣＴミスマッチの対策方法に従っ
て、ミスマッチ制御（およびＤＣＴ係数のクリッピン
グ）が行われる。図８の例では、ＤＣＴ係数の奇数化に
よるミスマッチ制御を行なう場合には、ステップＳ５２
において、ミスマッチ制御器１４１により、ＤＣＴ係数
の奇数化によるミスマッチ制御が行われた後で、ステッ
プＳ５３に進み、クリッピング器１４３により、ＤＣＴ
係数のクリッピングが行われる。ＤＣＴ係数の奇数化に
よるミスマッチ制御を行なわない場合には、用いるミス
マッチの対策方法はＤＣＴ係数の（７，７）係数をtogg
leすることによるミスマッチ制御であるとみなし、ステ
ップＳ５５に進み、クリッピング器１５３により、ＤＣ
Ｔ係数のクリッピングが行われた後で、ステップＳ５６
において、ミスマッチ制御器１５４により、このミスマ
ッチ制御が行われる。
【０１３０】ＩＤＣＴミスマッチの対策方法を示す例え
ばVideo Object Layer Classのvideo_object_layer_mis
matchのフラグは、ＤＣＴ係数の奇数化によるミスマッ
チ制御を行なう場合にはONに設定され（ステップＳ５
４）、ＤＣＴ係数の奇数化によるミスマッチ制御を行な
わない場合にはOFFに設定され（ステップＳ５７）、符
号化される。ステップＳ５４またはステップＳ５７の処
理が終了すると、すべての処理が終了する。
ばVideo Object Layer Classのvideo_object_layer_mis
matchのフラグは、ＤＣＴ係数の奇数化によるミスマッ
チ制御を行なう場合にはONに設定され（ステップＳ５
４）、ＤＣＴ係数の奇数化によるミスマッチ制御を行な
わない場合にはOFFに設定され（ステップＳ５７）、符
号化される。ステップＳ５４またはステップＳ５７の処
理が終了すると、すべての処理が終了する。
【０１３１】次に、図９のフローチャートを参照して、
デコーダのミスマッチ制御および逆量子化部分における
処理の流れと符号化ビット列の解読法について説明す
る。
デコーダのミスマッチ制御および逆量子化部分における
処理の流れと符号化ビット列の解読法について説明す
る。
【０１３２】復号された縦横８要素のＤＣＴ係数の各ブ
ロックに対して、まずエンコーダ側で用いられた量子化
行列の利用方法に従って、量子化行列を設定する。ステ
ップＳ６１においては、エンコーダによって符号化され
た符号化ビット列のうち、例えばVideo Object Layer C
lassのvideo_object_layer_quant_matrixのフラグが解
読される。そして、そのフラグがONである場合には、量
子化行列を設定しない。あるいは、ステップＳ６２にお
いて、設定器２６１により、量子化行列を設定した場合
と量子化の演算を共通に行なえるように、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列が設定される。そのフラグがOFFである場合には、
ステップＳ６３において、設定器２３２により、ＭＰＥ
Ｇ１／２型の量子化行列が設定される。ここで設定され
る量子化行列は、画像内符号化と画像間符号化とでは異
なる。
ロックに対して、まずエンコーダ側で用いられた量子化
行列の利用方法に従って、量子化行列を設定する。ステ
ップＳ６１においては、エンコーダによって符号化され
た符号化ビット列のうち、例えばVideo Object Layer C
lassのvideo_object_layer_quant_matrixのフラグが解
読される。そして、そのフラグがONである場合には、量
子化行列を設定しない。あるいは、ステップＳ６２にお
いて、設定器２６１により、量子化行列を設定した場合
と量子化の演算を共通に行なえるように、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列が設定される。そのフラグがOFFである場合には、
ステップＳ６３において、設定器２３２により、ＭＰＥ
Ｇ１／２型の量子化行列が設定される。ここで設定され
る量子化行列は、画像内符号化と画像間符号化とでは異
なる。
【０１３３】また、例えばVideo Object Layer Classの
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えばintra_quant_mat[64]あるいはnonintra_quant_ma
t[64]として符号化された量子化行列の６４個の要素を
復号して用いる等の処理を行なわなければならない。
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えばintra_quant_mat[64]あるいはnonintra_quant_ma
t[64]として符号化された量子化行列の６４個の要素を
復号して用いる等の処理を行なわなければならない。
【０１３４】次に、エンコーダ側で用いられた量子化の
方法に従って、逆量子化を行なう。ステップＳ６４にお
いては、エンコーダによって符号化された符号化ビット
列のうち、例えばVideo Object Layer Classのvideo_ob
ject_layer_quant_typeのフラグが解読される。そのフ
ラグがONである場合には、ステップＳ６５に進み、逆量
子化器２２３により、Ｈ．２６１／３型の逆量子化が行
われる。一方、そのフラグがOFFである場合には、ステ
ップＳ６６に進み、逆量子化器２２４によりＭＰＥＧ１
／２型の逆量子化が行われる。逆量子化を行なう際に
は、量子化行列が設定されている場合にはそれを用い、
量子化行列が設定されていない場合にはそれを用いな
い。あるいは、仮の量子化行列が設定されている場合に
は、それを用いる。
方法に従って、逆量子化を行なう。ステップＳ６４にお
いては、エンコーダによって符号化された符号化ビット
列のうち、例えばVideo Object Layer Classのvideo_ob
ject_layer_quant_typeのフラグが解読される。そのフ
ラグがONである場合には、ステップＳ６５に進み、逆量
子化器２２３により、Ｈ．２６１／３型の逆量子化が行
われる。一方、そのフラグがOFFである場合には、ステ
ップＳ６６に進み、逆量子化器２２４によりＭＰＥＧ１
／２型の逆量子化が行われる。逆量子化を行なう際に
は、量子化行列が設定されている場合にはそれを用い、
量子化行列が設定されていない場合にはそれを用いな
い。あるいは、仮の量子化行列が設定されている場合に
は、それを用いる。
【０１３５】その後、エンコーダ側で用いられたＩＤＣ
Ｔミスマッチの対策方法に従って、ミスマッチ制御（お
よびＤＣＴ係数のクリッピング）を行なう。ステップＳ
６７において、エンコーダによって符号化された符号化
ビット列のうち、例えばVideo Object Layer Classのvi
deo_object_layer_mismatchのフラグが解読される。そ
のフラグがONである場合には、ステップＳ６８に進み、
ミスマッチ制御器２４１により、ＤＣＴ係数の奇数化に
よるミスマッチ制御が行われた後で、ステップＳ６９に
おいて、クリッピング器２４３により、ＤＣＴ係数のク
リッピングが行われる。一方、そのフラグがOFFである
場合には、ステップＳ７０に進み、クリッピング器２５
２により、ＤＣＴ係数のクリッピングが行われた後で、
ステップＳ７１において、ミスマッチ制御器２５３によ
り、ＤＣＴ係数の（７，７）係数をtoggleすることによ
るミスマッチ制御が行われる。
Ｔミスマッチの対策方法に従って、ミスマッチ制御（お
よびＤＣＴ係数のクリッピング）を行なう。ステップＳ
６７において、エンコーダによって符号化された符号化
ビット列のうち、例えばVideo Object Layer Classのvi
deo_object_layer_mismatchのフラグが解読される。そ
のフラグがONである場合には、ステップＳ６８に進み、
ミスマッチ制御器２４１により、ＤＣＴ係数の奇数化に
よるミスマッチ制御が行われた後で、ステップＳ６９に
おいて、クリッピング器２４３により、ＤＣＴ係数のク
リッピングが行われる。一方、そのフラグがOFFである
場合には、ステップＳ７０に進み、クリッピング器２５
２により、ＤＣＴ係数のクリッピングが行われた後で、
ステップＳ７１において、ミスマッチ制御器２５３によ
り、ＤＣＴ係数の（７，７）係数をtoggleすることによ
るミスマッチ制御が行われる。
【０１３６】上記の例では、量子化行列の利用方法、量
子化および逆量子化の方法、およびＩＤＣＴミスマッチ
の対策方法等について、どれも丁度二通りの処理方法だ
けある場合を示した。しかし、何らかの方法について三
通り以上の処理方法が考えられる場合についても、フラ
グのON,OFFの二通りのシンボルを三種類以上の表現が可
能なシンボルに変え、それらのシンボルに応じて処理方
法を切り替えるようにしても良い。
子化および逆量子化の方法、およびＩＤＣＴミスマッチ
の対策方法等について、どれも丁度二通りの処理方法だ
けある場合を示した。しかし、何らかの方法について三
通り以上の処理方法が考えられる場合についても、フラ
グのON,OFFの二通りのシンボルを三種類以上の表現が可
能なシンボルに変え、それらのシンボルに応じて処理方
法を切り替えるようにしても良い。
【０１３７】また、上記処理以外についても、いくつか
の処理方法が用意又は想定される何らかの処理のため
に、例えばVideo Object Layer Classにおいて新たなフ
ラグを設けておき、そのフラグとその処理とを連動させ
ることにしても良い。あるいは、逆に用意又は想定され
る処理の数自体や、処理方法の数を減らす等の簡潔化を
行なうことによって、フラグの数を減らす等のことを行
なっても良い。あるいは、可能である限りこれらの処理
の順番を入れ換えても良い。
の処理方法が用意又は想定される何らかの処理のため
に、例えばVideo Object Layer Classにおいて新たなフ
ラグを設けておき、そのフラグとその処理とを連動させ
ることにしても良い。あるいは、逆に用意又は想定され
る処理の数自体や、処理方法の数を減らす等の簡潔化を
行なうことによって、フラグの数を減らす等のことを行
なっても良い。あるいは、可能である限りこれらの処理
の順番を入れ換えても良い。
【０１３８】また上記の例では、各方法を示すフラグと
して例えばVideo Object Layer Classのvideo_object_l
ayer_quant_type等のフラグを用いて説明を行なった
が、同様の役割を担う別名のフラグであっても良い。あ
るいは、例えば、Video ObjectLayer Classにおいてこ
のフラグを設定する代わりに、Video Object Plane Cla
ss又はMacroblock Layer等の他のLayerで設定すること
によって、設定したフラグに連動させる処理方法をオブ
ジェクト単位からフレーム又はマクロブロック単位等の
別の単位で切り替えることにしても良い。
して例えばVideo Object Layer Classのvideo_object_l
ayer_quant_type等のフラグを用いて説明を行なった
が、同様の役割を担う別名のフラグであっても良い。あ
るいは、例えば、Video ObjectLayer Classにおいてこ
のフラグを設定する代わりに、Video Object Plane Cla
ss又はMacroblock Layer等の他のLayerで設定すること
によって、設定したフラグに連動させる処理方法をオブ
ジェクト単位からフレーム又はマクロブロック単位等の
別の単位で切り替えることにしても良い。
【０１３９】図１１は、本発明の復号装置を応用した復
号器（デコーダ）のさらに他の実施の形態の構成例を示
すブロック図である。この実施の形態（デコーダ）に対
応するエンコーダは、図１に示したエンコーダ、あるい
は図６に示したエンコーダの場合と全く同様の構成であ
り、デコーダの構成のみが異なる。図１１は、図６に示
したエンコーダに対するデコーダを示している。なお、
図１のエンコーダに対するデコーダは、その基本となる
考え方および実現方法は以下に説明するように、図１１
の場合と同様である。従って、その図示および説明は省
略する。
号器（デコーダ）のさらに他の実施の形態の構成例を示
すブロック図である。この実施の形態（デコーダ）に対
応するエンコーダは、図１に示したエンコーダ、あるい
は図６に示したエンコーダの場合と全く同様の構成であ
り、デコーダの構成のみが異なる。図１１は、図６に示
したエンコーダに対するデコーダを示している。なお、
図１のエンコーダに対するデコーダは、その基本となる
考え方および実現方法は以下に説明するように、図１１
の場合と同様である。従って、その図示および説明は省
略する。
【０１４０】図１１に示したデコーダの基本的な構成
は、図６に示したデコーダの場合とほぼ同様である。図
６のデコーダと異なる点は、図１１の復号器の逆可変長
符号化器２０９によって復号されるフラグmismatchを利
用せずに無視し、ミスマッチ制御器２４１によって常に
ＤＣＴ係数の奇数化によるミスマッチ制御を行なう点で
ある。ＤＣＴ係数のクリッピング器２４３は、このミス
マッチ制御器２４１の後に置かれる。
は、図６に示したデコーダの場合とほぼ同様である。図
６のデコーダと異なる点は、図１１の復号器の逆可変長
符号化器２０９によって復号されるフラグmismatchを利
用せずに無視し、ミスマッチ制御器２４１によって常に
ＤＣＴ係数の奇数化によるミスマッチ制御を行なう点で
ある。ＤＣＴ係数のクリッピング器２４３は、このミス
マッチ制御器２４１の後に置かれる。
【０１４１】上記のように構成する理由は以下の通りで
ある。エンコーダ側とデコーダ側とで用いるミスマッチ
の対策方法が異なる場合、当然ながらミスマッチは起こ
り、一般にエンコードされたフレーム数が多くなるほど
そのミスマッチは視覚的に感知されやすくなる。しか
し、エンコーダ側でＤＣＴ係数の（７，７）係数をtogg
leするミスマッチ制御を行なって生成した符号化ビット
列に対して、デコーダ側でＤＣＴ係数の奇数化によるミ
スマッチ制御を行なった場合、そのミスマッチの周波数
成分はＤＣＴ係数の（７，７）係数の成分だけにほぼ限
定される。この成分は非常に高周波であるため、視覚的
には比較的感知されにくい。
ある。エンコーダ側とデコーダ側とで用いるミスマッチ
の対策方法が異なる場合、当然ながらミスマッチは起こ
り、一般にエンコードされたフレーム数が多くなるほど
そのミスマッチは視覚的に感知されやすくなる。しか
し、エンコーダ側でＤＣＴ係数の（７，７）係数をtogg
leするミスマッチ制御を行なって生成した符号化ビット
列に対して、デコーダ側でＤＣＴ係数の奇数化によるミ
スマッチ制御を行なった場合、そのミスマッチの周波数
成分はＤＣＴ係数の（７，７）係数の成分だけにほぼ限
定される。この成分は非常に高周波であるため、視覚的
には比較的感知されにくい。
【０１４２】そのため、デコーダが行なうミスマッチの
対策方法はＤＣＴ係数の奇数化によるミスマッチ制御の
みと限定することによって、デコーダの演算あるいは回
路を簡易化することにしても良い。なお、このような簡
略化を行なった場合、ミスマッチとして視覚的に感知さ
れるべきノイズ成分を軽減あるいは除去するために、ノ
イズ軽減フィルタあるいはノイズ除去フィルタを用いて
も良い。このフィルタは、ミスマッチ制御の処理を行な
った後や、画像を表示する装置にデコードした画像を送
る直前等のように、主にノイズ成分を軽減、あるいは除
去による効果が視覚的に現れる位置に置かれる。
対策方法はＤＣＴ係数の奇数化によるミスマッチ制御の
みと限定することによって、デコーダの演算あるいは回
路を簡易化することにしても良い。なお、このような簡
略化を行なった場合、ミスマッチとして視覚的に感知さ
れるべきノイズ成分を軽減あるいは除去するために、ノ
イズ軽減フィルタあるいはノイズ除去フィルタを用いて
も良い。このフィルタは、ミスマッチ制御の処理を行な
った後や、画像を表示する装置にデコードした画像を送
る直前等のように、主にノイズ成分を軽減、あるいは除
去による効果が視覚的に現れる位置に置かれる。
【０１４３】図１１に示した実施の形態における、より
詳しい処理の流れ等について、以下説明する。
詳しい処理の流れ等について、以下説明する。
【０１４４】図１２に示したフローチャートは、図１１
に示したデコーダにおける処理の流れと符号化ビット列
の解読法の一例を示している。図１１の実施の形態に対
応するエンコーダは、図１あるいは図６のエンコーダの
場合と全く同様の構成であり、デコーダの構成のみが異
なる。図１２のフローチャートは、図６のエンコーダに
対する本実施の形態のデコーダのミスマッチ制御および
逆量子化部分を示している。
に示したデコーダにおける処理の流れと符号化ビット列
の解読法の一例を示している。図１１の実施の形態に対
応するエンコーダは、図１あるいは図６のエンコーダの
場合と全く同様の構成であり、デコーダの構成のみが異
なる。図１２のフローチャートは、図６のエンコーダに
対する本実施の形態のデコーダのミスマッチ制御および
逆量子化部分を示している。
【０１４５】なお、図１のエンコーダに対する本実施の
形態のデコーダのミスマッチ制御および逆量子化部分は
示していないが、その基本となる考え方および実現方法
は以下に説明することと同様である。
形態のデコーダのミスマッチ制御および逆量子化部分は
示していないが、その基本となる考え方および実現方法
は以下に説明することと同様である。
【０１４６】復号された縦横８要素のＤＣＴ係数の各ブ
ロックに対して、まずエンコーダ側で用いられた量子化
行列の利用方法に従って、量子化行列を設定する。ステ
ップＳ８１においては、エンコーダによって符号化され
た符号化ビット列のうち、例えばVideo Object Layer C
lassのvideo_object_layer_quant_matrixのフラグが解
読される。そして、そのフラグがONである場合には、量
子化行列を設定しない。あるいは、ステップＳ８２にお
いて、設定器２６１により、量子化行列を設定した場合
と量子化の演算を共通に行なえるように、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列が設定される。そのフラグがOFFである場合には、
ステップＳ８３において、設定器２３２により、ＭＰＥ
Ｇ１／２型の量子化行列が設定される。ここで設定され
る量子化行列は、画像内符号化と画像間符号化とでは異
なる。
ロックに対して、まずエンコーダ側で用いられた量子化
行列の利用方法に従って、量子化行列を設定する。ステ
ップＳ８１においては、エンコーダによって符号化され
た符号化ビット列のうち、例えばVideo Object Layer C
lassのvideo_object_layer_quant_matrixのフラグが解
読される。そして、そのフラグがONである場合には、量
子化行列を設定しない。あるいは、ステップＳ８２にお
いて、設定器２６１により、量子化行列を設定した場合
と量子化の演算を共通に行なえるように、全ての要素の
値が（０以外でかつ正の値で）等しいなどの仮の量子化
行列が設定される。そのフラグがOFFである場合には、
ステップＳ８３において、設定器２３２により、ＭＰＥ
Ｇ１／２型の量子化行列が設定される。ここで設定され
る量子化行列は、画像内符号化と画像間符号化とでは異
なる。
【０１４７】また、例えばVideo Object Layer Classの
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えばintra_quant_mat[64]あるいはnonintra_quant_ma
t[64]として符号化された量子化行列の６４個の要素を
復号して用いる等の処理を行なわなければならない。
load_intra_quant_mat、あるいはload_nonintra_quant_
matのフラグがONになっている場合には、あらかじめ用
意されている量子化行列以外のものを設定するために、
例えばintra_quant_mat[64]あるいはnonintra_quant_ma
t[64]として符号化された量子化行列の６４個の要素を
復号して用いる等の処理を行なわなければならない。
【０１４８】次に、エンコーダ側で用いられた量子化の
方法に従って、逆量子化を行なう。ステップＳ８４にお
いては、エンコーダによって符号化された符号化ビット
列のうち、例えばVideo Object Layer Classのvideo_ob
ject_layer_quant_typeのフラグが解読される。そのフ
ラグがONである場合には、ステップＳ８５に進み、逆量
子化器２２３により、Ｈ．２６１／３型の逆量子化が行
われる。一方、そのフラグがOFFである場合には、ステ
ップＳ８６に進み、逆量子化器２２４によりＭＰＥＧ１
／２型の逆量子化が行われる。逆量子化を行なう際に
は、量子化行列が設定されている場合にはそれを用い、
量子化行列が設定されていない場合にはそれを用いな
い。あるいは、仮の量子化行列が設定されている場合に
は、それを用いる。
方法に従って、逆量子化を行なう。ステップＳ８４にお
いては、エンコーダによって符号化された符号化ビット
列のうち、例えばVideo Object Layer Classのvideo_ob
ject_layer_quant_typeのフラグが解読される。そのフ
ラグがONである場合には、ステップＳ８５に進み、逆量
子化器２２３により、Ｈ．２６１／３型の逆量子化が行
われる。一方、そのフラグがOFFである場合には、ステ
ップＳ８６に進み、逆量子化器２２４によりＭＰＥＧ１
／２型の逆量子化が行われる。逆量子化を行なう際に
は、量子化行列が設定されている場合にはそれを用い、
量子化行列が設定されていない場合にはそれを用いな
い。あるいは、仮の量子化行列が設定されている場合に
は、それを用いる。
【０１４９】その後、ステップＳ８７に進み、ミスマッ
チ制御器２４１により、ＤＣＴ係数の奇数化によるミス
マッチ制御が行われた後で、ステップＳ８８において、
クリッピング器２４３により、ＤＣＴ係数のクリッピン
グが行われる。
チ制御器２４１により、ＤＣＴ係数の奇数化によるミス
マッチ制御が行われた後で、ステップＳ８８において、
クリッピング器２４３により、ＤＣＴ係数のクリッピン
グが行われる。
【０１５０】図１２に示した実施の形態における符号化
シンタックスの基本的構成は、図９に示した実施の形態
の場合と基本的に同様であるが、ＩＤＣＴミスマッチの
対策方法等が唯一つしかない点が大きく異なる。
シンタックスの基本的構成は、図９に示した実施の形態
の場合と基本的に同様であるが、ＩＤＣＴミスマッチの
対策方法等が唯一つしかない点が大きく異なる。
【０１５１】復号された縦横８要素のＤＣＴ係数の各ブ
ロックに対して、図１１の実施の形態では、エンコーダ
側で用いられたＩＤＣＴミスマッチの対策方法に依ら
ず、常にＤＣＴ係数の奇数化によるミスマッチ制御を行
なう。ＤＣＴ係数のクリッピングは、このミスマッチ制
御が行なわれた後で行なう。そのため、エンコーダによ
って符号化された符号化ビット列のうち、例えばVideo
Object Layer Classのvideo_object_layer_mismatchの
フラグは利用されずに無視される。
ロックに対して、図１１の実施の形態では、エンコーダ
側で用いられたＩＤＣＴミスマッチの対策方法に依ら
ず、常にＤＣＴ係数の奇数化によるミスマッチ制御を行
なう。ＤＣＴ係数のクリッピングは、このミスマッチ制
御が行なわれた後で行なう。そのため、エンコーダによ
って符号化された符号化ビット列のうち、例えばVideo
Object Layer Classのvideo_object_layer_mismatchの
フラグは利用されずに無視される。
【０１５２】上記に記した処理以外でも、処理の簡略化
による影響が大きくないものに対しては、逆可変長符号
化器２０９によって復号されるフラグ等を利用せずに無
視し、処理を簡略化しても良い。
による影響が大きくないものに対しては、逆可変長符号
化器２０９によって復号されるフラグ等を利用せずに無
視し、処理を簡略化しても良い。
【０１５３】以上説明したように、本発明によれば、既
存の動画像の高能率符号化方法との互換性を取ることが
できる。また、量子化および逆量子化の方法、量子化行
列の利用方法、ＩＤＣＴミスマッチの対策方法等で、最
適な方法の組合せを指定し、より高能率の符号化および
復号を行うことができるため、符号化効率を向上させる
ことができる。
存の動画像の高能率符号化方法との互換性を取ることが
できる。また、量子化および逆量子化の方法、量子化行
列の利用方法、ＩＤＣＴミスマッチの対策方法等で、最
適な方法の組合せを指定し、より高能率の符号化および
復号を行うことができるため、符号化効率を向上させる
ことができる。
【０１５４】なお、上記各フローチャートで示した処理
を実行させるためのプログラムは、符号化装置および復
号装置が備えるＲＯＭ（read only memory）等に予め記
憶させておいたり、ＣＤ−ＲＯＭ（compact disc-read
only memory）等に記録して使用者に供給するようにす
ることができる。
を実行させるためのプログラムは、符号化装置および復
号装置が備えるＲＯＭ（read only memory）等に予め記
憶させておいたり、ＣＤ−ＲＯＭ（compact disc-read
only memory）等に記録して使用者に供給するようにす
ることができる。
【０１５５】また、本発明の符号化装置および復号装置
は、例えば、光磁気ディスクや磁気テープなどの記録媒
体に記録し、それを再生してディスプレイ等に表示した
り、テレビ会議システム、テレビ電話システム、放送用
機器、マルチメディアデータベース検索システム等のよ
うに、動画像信号を伝送路を介して送信側から受信側に
伝送し、受信側において、これを受信し、表示する場合
や、動画像信号を編集し、記録する場合等にも応用する
ことができる。
は、例えば、光磁気ディスクや磁気テープなどの記録媒
体に記録し、それを再生してディスプレイ等に表示した
り、テレビ会議システム、テレビ電話システム、放送用
機器、マルチメディアデータベース検索システム等のよ
うに、動画像信号を伝送路を介して送信側から受信側に
伝送し、受信側において、これを受信し、表示する場合
や、動画像信号を編集し、記録する場合等にも応用する
ことができる。
【０１５６】
【発明の効果】請求項１に記載の符号化装置、および請
求項２に記載の符号化方法によれば、データを量子化す
る方法の任意のものと、量子化されたデータを逆量子化
する方法の任意のものと、逆量子化されたデータに対し
てＩＤＣＴミスマッチ対策を施す方法の任意のものと、
データを量子化するとき、および量子化されたデータを
逆量子化するときに量子化行列を使用する任意の方法と
を組み合わせてデータを符号化する方法を制御するよう
にしたので、高能率の符号化が可能となる。
求項２に記載の符号化方法によれば、データを量子化す
る方法の任意のものと、量子化されたデータを逆量子化
する方法の任意のものと、逆量子化されたデータに対し
てＩＤＣＴミスマッチ対策を施す方法の任意のものと、
データを量子化するとき、および量子化されたデータを
逆量子化するときに量子化行列を使用する任意の方法と
を組み合わせてデータを符号化する方法を制御するよう
にしたので、高能率の符号化が可能となる。
【０１５７】請求項３に記載の復号装置、および請求項
４に記載の復号方法においては、データを逆量子化する
方法の任意のものと、逆量子化されたデータに対してＩ
ＤＣＴミスマッチ対策を施す方法の任意のものと、デー
タを逆量子化するときに量子化行列を使用する任意の方
法を組み合わせてデータを復号する方法を制御するよう
にしたので、高能率の符号化が可能となる。
４に記載の復号方法においては、データを逆量子化する
方法の任意のものと、逆量子化されたデータに対してＩ
ＤＣＴミスマッチ対策を施す方法の任意のものと、デー
タを逆量子化するときに量子化行列を使用する任意の方
法を組み合わせてデータを復号する方法を制御するよう
にしたので、高能率の符号化が可能となる。
【０１５８】請求項５に記載の復号装置、および請求項
６に記載の復号方法においては、データを逆量子化する
方法の任意のものと、データを逆量子化するときに量子
化行列を使用する任意の方法を組み合わせてデータを復
号する方法を制御するようにしたので、高能率の符号化
が可能となる。
６に記載の復号方法においては、データを逆量子化する
方法の任意のものと、データを逆量子化するときに量子
化行列を使用する任意の方法を組み合わせてデータを復
号する方法を制御するようにしたので、高能率の符号化
が可能となる。
【図１】本発明の符号化装置を応用した符号化器の一実
施の形態の構成例を示すブロック図である。
施の形態の構成例を示すブロック図である。
【図２】本発明の復号装置を応用した復号器の一実施の
形態の構成例を示すブロック図である。
形態の構成例を示すブロック図である。
【図３】図１の符号化器の量子化およびミスマッチ制御
部分における処理手順と符号化ビット列の生成法を説明
するフローチャートである。
部分における処理手順と符号化ビット列の生成法を説明
するフローチャートである。
【図４】図２の復号器のミスマッチ制御および逆量子化
部分における処理手順と符号化ビット列の解読法を説明
するフローチャートである。
部分における処理手順と符号化ビット列の解読法を説明
するフローチャートである。
【図５】図３および図４のVideo Object Layer Classに
おけるシンタックスを示す図である。
おけるシンタックスを示す図である。
【図６】本発明の符号化装置を応用した符号化器の他の
実施の形態の構成例を示すブロック図である。
実施の形態の構成例を示すブロック図である。
【図７】本発明の復号装置を応用した復号器の他の実施
の形態の構成例を示すブロック図である。
の形態の構成例を示すブロック図である。
【図８】図６の符号化器の量子化およびミスマッチ制御
部分における処理手順と符号化ビット列の生成法を説明
するフローチャートである。
部分における処理手順と符号化ビット列の生成法を説明
するフローチャートである。
【図９】図７の復号器のミスマッチ制御および逆量子化
部分における処理手順と符号化ビット列の解読法を説明
するフローチャートである。
部分における処理手順と符号化ビット列の解読法を説明
するフローチャートである。
【図１０】図８および図９のVideo Object Layer Class
におけるシンタックスを示す図である。
におけるシンタックスを示す図である。
【図１１】本発明の復号装置を応用した復号器のさらに
他の実施の形態の構成例を示すブロック図である。
他の実施の形態の構成例を示すブロック図である。
【図１２】図１１の復号器のミスマッチ制御および逆量
子化部分における処理手順と符号化ビット列の解読法を
説明するフローチャートである。
子化部分における処理手順と符号化ビット列の解読法を
説明するフローチャートである。
【図１３】従来の符号化器の一例の構成を示すブロック
図である。
図である。
【図１４】従来の復号器の一例の構成を示すブロック図
である。
である。
【図１５】Ｈ．２６１／３型の量子化の概念図である。
【図１６】ＭＰＥＧ１／２型の量子化の概念図である。
【図１７】ＭＰＥＧ１／２型の量子化行列の一例を示す
図である。
図である。
【図１８】符号化ビット列の構成例を示す図である。
【図１９】ＶＳのシンタックスを示す図である。
【図２０】ＶＯのシンタックスを示す図である。
【図２１】Video Object Layer Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２２】Video Object Layer Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２３】Video Object Plane Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２４】Video Object Plane Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２５】Video Object Plane Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２６】Video Object Plane Classにおけるシンタッ
クスを示す図である。
クスを示す図である。
【図２７】ＩおよびＰピクチャ（ＶＯＰ）におけるマク
ロブロックのシンタックスを示す図である。
ロブロックのシンタックスを示す図である。
【図２８】Ｂピクチャ（ＶＯＰ）でのマクロブロックの
シンタックスを示す図である。
シンタックスを示す図である。
【図２９】ＭＯＤＢの可変長符号を示す図である。
【図３０】図１３の符号化器の量子化およびミスマッチ
制御部分における処理手順と符号化ビット列の生成法を
説明するフローチャートである。
制御部分における処理手順と符号化ビット列の生成法を
説明するフローチャートである。
【図３１】図１４の復号器のミスマッチ制御および逆量
子化部分における処理手順と符号化ビット列の解読法を
説明するフローチャートである。
子化部分における処理手順と符号化ビット列の解読法を
説明するフローチャートである。
１０１ 動きベクトル検出器， １０２ フレームメモ
リ， １０３，２０３動き補償器， １０４，１１０，
２１０ 加算器， １０５ ＤＣＴ器， １０６ ＩＤ
ＣＴ器， １０９ 可変長符号化器， １２１ Ｈ．２
６１／３型の量子化器， １２２ ＭＰＥＧ１／２型の
量子化器， １２３，２２３ Ｈ．２６１／３型の逆量
子化器， １２４，１２５，２２４，２２５ ＭＰＥＧ
１／２型の逆量子化器， １３１ 仮の量子化行列の設
定器，１３２，２３２，２３３ＭＰＥＧ１／２型の量子
化行列の設定器， １４１，１５１，２４１，２５１係
数を奇数化するミスマッチ制御器， １４３，１５２，
１５３，２４３，２４４，２５２ ＤＣＴ係数のクリッ
ピング器， １５４，２５３ （７，７）係数をtoggle
するミスマッチ制御器， ２０９ 逆可変長符号化器
リ， １０３，２０３動き補償器， １０４，１１０，
２１０ 加算器， １０５ ＤＣＴ器， １０６ ＩＤ
ＣＴ器， １０９ 可変長符号化器， １２１ Ｈ．２
６１／３型の量子化器， １２２ ＭＰＥＧ１／２型の
量子化器， １２３，２２３ Ｈ．２６１／３型の逆量
子化器， １２４，１２５，２２４，２２５ ＭＰＥＧ
１／２型の逆量子化器， １３１ 仮の量子化行列の設
定器，１３２，２３２，２３３ＭＰＥＧ１／２型の量子
化行列の設定器， １４１，１５１，２４１，２５１係
数を奇数化するミスマッチ制御器， １４３，１５２，
１５３，２４３，２４４，２５２ ＤＣＴ係数のクリッ
ピング器， １５４，２５３ （７，７）係数をtoggle
するミスマッチ制御器， ２０９ 逆可変長符号化器
Claims (6)
- 【請求項１】 データを符号化する符号化装置であっ
て、 前記データを複数の方法で量子化する量子化手段と、 前記量子化手段の出力を複数の方法で逆量子化する逆量
子化手段と、 前記量子化手段および前記逆量子化手段で用いる量子化
行列を設定する設定手段と、 前記逆量子化手段の出力に対して複数の方法でＩＤＣＴ
ミスマッチ対策を施すミスマッチ対策手段と、 前記量子化手段が前記データを量子化する前記方法の任
意のものと、前記逆量子化手段が前記量子化手段の出力
を逆量子化する前記方法の任意のものと、前記ミスマッ
チ対策手段が前記逆量子化手段の出力に対してＩＤＣＴ
ミスマッチ対策を施す前記方法の任意のものと、前記量
子化手段および前記逆量子化手段が前記量子化行列を使
用する任意の方法とを組み合わせて前記データを符号化
する方法を制御する制御手段とを備えることを特徴とす
る符号化装置。 - 【請求項２】 データを符号化する符号化方法であっ
て、 前記データを複数の方法で量子化するステップと、 前記量子化された前記データを複数の方法で逆量子化す
るステップと、 量子化および逆量子化を行うときに用いる量子化行列を
設定するステップと、 逆量子化された前記データに対して複数の方法でＩＤＣ
Ｔミスマッチ対策を施すステップと、 前記データを量子化する前記方法の任意のものと、量子
化された前記データを逆量子化する前記方法の任意のも
のと、逆量子化された前記データに対してＩＤＣＴミス
マッチ対策を施す前記方法の任意のものと、前記データ
を量子化するとき、および量子化された前記データを逆
量子化するときに前記量子化行列を使用する任意の方法
とを組み合わせて前記データを符号化する方法を制御す
るステップとを備えることを特徴とする符号化方法。 - 【請求項３】 データを復号する復号装置であって、 前記データを複数の方法で逆量子化する逆量子化手段
と、 前記逆量子化手段で用いる量子化行列を設定する設定手
段と、 前記逆量子化手段の出力に対して複数の方法でＩＤＣＴ
ミスマッチ対策を施すミスマッチ対策手段と、 前記逆量子化手段が前記データを逆量子化する前記方法
の任意のものと、前記ミスマッチ対策手段が前記逆量子
化手段の出力に対してＩＤＣＴミスマッチ対策を施す前
記方法の任意のものと、前記逆量子化手段が前記量子化
行列を使用する任意の方法を組み合わせて前記データを
復号する方法を制御する制御手段とを備えることを特徴
とする復号装置。 - 【請求項４】 データを復号する復号方法であって、 前記データを複数の方法で逆量子化するステップと、 前記データを逆量子化するとき用いる量子化行列を設定
するステップと、 逆量子化された前記データに対して複数の方法でＩＤＣ
Ｔミスマッチ対策を施すステップと、 前記データを逆量子化する前記方法の任意のものと、逆
量子化された前記データに対してＩＤＣＴミスマッチ対
策を施す前記方法の任意のものと、前記データを逆量子
化するときに前記量子化行列を使用する任意の方法を組
み合わせて前記データを復号する方法を制御するステッ
プとを備えることを特徴とする復号方法。 - 【請求項５】 データを復号する復号装置であって、 前記データを複数の方法で逆量子化する逆量子化手段
と、 前記逆量子化手段で用いる量子化行列を設定する設定手
段と、 前記逆量子化手段の出力に対して所定の方法でＩＤＣＴ
ミスマッチ対策を施すミスマッチ対策手段と、 前記逆量子化手段が前記データを逆量子化する前記方法
の任意のものと、前記逆量子化手段が前記量子化行列を
使用する任意の方法を組み合わせて前記データを復号す
る方法を制御する制御手段とを備えることを特徴とする
復号装置。 - 【請求項６】 データを復号する復号方法であって、 前記データを複数の方法で逆量子化するステップと、 前記データを逆量子化するとき用いる量子化行列を設定
するステップと、 逆量子化された前記データに対して所定の方法でＩＤＣ
Ｔミスマッチ対策を施すステップと、 前記データを逆量子化する前記方法の任意のものと、前
記データを逆量子化するときに前記量子化行列を使用す
る任意の方法を組み合わせて前記データを復号する方法
を制御するステップとを備えることを特徴とする復号方
法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP07980297A JP4001969B2 (ja) | 1997-03-31 | 1997-03-31 | 符号化装置および方法、並びに復号装置および方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP07980297A JP4001969B2 (ja) | 1997-03-31 | 1997-03-31 | 符号化装置および方法、並びに復号装置および方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10276097A true JPH10276097A (ja) | 1998-10-13 |
| JP4001969B2 JP4001969B2 (ja) | 2007-10-31 |
Family
ID=13700359
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP07980297A Expired - Fee Related JP4001969B2 (ja) | 1997-03-31 | 1997-03-31 | 符号化装置および方法、並びに復号装置および方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4001969B2 (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006187024A (ja) * | 1998-11-30 | 2006-07-13 | Microsoft Corp | 画像データの復号化方法およびそのためのプログラムを記録したコンピュータ読み取り可能媒体 |
| JP2007520165A (ja) * | 2004-01-30 | 2007-07-19 | 松下電器産業株式会社 | 動画像符号化方法および動画像復号化方法 |
| JP2008271546A (ja) * | 2007-04-13 | 2008-11-06 | Sony Corp | 復号装置および復号方法、情報処理装置および情報処理方法 |
| US7912122B2 (en) | 2004-01-20 | 2011-03-22 | Panasonic Corporation | Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus |
| US8401074B2 (en) | 2004-01-30 | 2013-03-19 | Panasonic Corporation | Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof |
| US9077960B2 (en) | 2005-08-12 | 2015-07-07 | Microsoft Corporation | Non-zero coefficient block pattern coding |
| US9088785B2 (en) | 2001-12-17 | 2015-07-21 | Microsoft Technology Licensing, Llc | Skip macroblock coding |
-
1997
- 1997-03-31 JP JP07980297A patent/JP4001969B2/ja not_active Expired - Fee Related
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4673758B2 (ja) * | 1998-11-30 | 2011-04-20 | マイクロソフト コーポレーション | 画像データの復号化方法およびそのためのプログラムを記録したコンピュータ読み取り可能媒体 |
| JP2006187024A (ja) * | 1998-11-30 | 2006-07-13 | Microsoft Corp | 画像データの復号化方法およびそのためのプログラムを記録したコンピュータ読み取り可能媒体 |
| US10368065B2 (en) | 2001-12-17 | 2019-07-30 | Microsoft Technology Licensing, Llc | Skip macroblock coding |
| US9774852B2 (en) | 2001-12-17 | 2017-09-26 | Microsoft Technology Licensing, Llc | Skip macroblock coding |
| US9538189B2 (en) | 2001-12-17 | 2017-01-03 | Microsoft Technology Licensing, Llc | Skip macroblock coding |
| US9088785B2 (en) | 2001-12-17 | 2015-07-21 | Microsoft Technology Licensing, Llc | Skip macroblock coding |
| US7995650B2 (en) | 2004-01-20 | 2011-08-09 | Panasonic Corporation | Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof |
| US7912122B2 (en) | 2004-01-20 | 2011-03-22 | Panasonic Corporation | Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus |
| US7933327B2 (en) | 2004-01-30 | 2011-04-26 | Panasonic Corporation | Moving picture coding method and moving picture decoding method |
| JP2011091848A (ja) * | 2004-01-30 | 2011-05-06 | Panasonic Corp | 動画像符号化方法、動画像符号化装置、プログラムおよび記録媒体 |
| US8218623B2 (en) | 2004-01-30 | 2012-07-10 | Panasonic Corporation | Moving picture coding method and moving picture decoding method |
| US8396116B2 (en) | 2004-01-30 | 2013-03-12 | Panasonic Corporation | Moving picture coding method and moving picture decoding method |
| US8401074B2 (en) | 2004-01-30 | 2013-03-19 | Panasonic Corporation | Picture coding method, picture decoding method, picture coding apparatus, picture decoding apparatus, and program thereof |
| US8477838B2 (en) | 2004-01-30 | 2013-07-02 | Panasonic Corporation | Moving picture coding method and moving picture decoding method |
| USRE49787E1 (en) | 2004-01-30 | 2024-01-02 | Dolby International Ab | Moving picture coding method and moving picture decoding method |
| US8194734B2 (en) | 2004-01-30 | 2012-06-05 | Panasonic Corporation | Moving picture coding method and moving picture decoding method |
| JP4679524B2 (ja) * | 2004-01-30 | 2011-04-27 | パナソニック株式会社 | 動画像復号化方法、動画像復号化装置、プログラムおよび記録媒体 |
| USRE46500E1 (en) | 2004-01-30 | 2017-08-01 | Dolby International Ab | Moving picture coding method and moving picture decoding method |
| USRE48401E1 (en) | 2004-01-30 | 2021-01-19 | Dolby International Ab | Moving picture coding method and moving picture decoding method |
| JP2007520165A (ja) * | 2004-01-30 | 2007-07-19 | 松下電器産業株式会社 | 動画像符号化方法および動画像復号化方法 |
| US9077960B2 (en) | 2005-08-12 | 2015-07-07 | Microsoft Corporation | Non-zero coefficient block pattern coding |
| JP2008271546A (ja) * | 2007-04-13 | 2008-11-06 | Sony Corp | 復号装置および復号方法、情報処理装置および情報処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4001969B2 (ja) | 2007-10-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7792193B2 (en) | Image encoding/decoding method and apparatus therefor | |
| KR100676387B1 (ko) | 동화상 복호화방법 및 장치 | |
| KR100323489B1 (ko) | 비디오데이타를가지는비트스트림의트랜스코딩방법및장치 | |
| KR100973216B1 (ko) | 비디오 부호화 시스템에서 양자화 변수들을 표시하는 방법 및 장치 | |
| US6343098B1 (en) | Efficient rate control for multi-resolution video encoding | |
| US7929608B2 (en) | Method of reducing computations in intra-prediction and mode decision processes in a digital video encoder | |
| US20070189626A1 (en) | Video encoding/decoding method and apparatus | |
| US8077769B2 (en) | Method of reducing computations in transform and scaling processes in a digital video encoder using a threshold-based approach | |
| KR20060109290A (ko) | 화상 복호 장치 및 화상 복호 방법과 화상 복호 프로그램 | |
| EP1551185A1 (en) | Encoding method, decoding method, and encoding apparatus for a digital picture sequence | |
| US6956899B2 (en) | Precise bit control apparatus with look-ahead for MPEG encoding | |
| KR101096827B1 (ko) | 각기 다수의 매크로블록을 포함하는 예측 및 비예측 화상을이용하여 화상 시퀀스를 인코딩하는 방법 및 장치 | |
| US20050135486A1 (en) | Transcoding method, medium, and apparatus | |
| JP2007266749A (ja) | 符号化方法 | |
| JP2005110083A (ja) | データ処理装置およびその方法と符号化装置 | |
| JP2000023195A (ja) | 画像符号化装置及び方法、並びに画像復号装置及び方法、並びに符号化データ提供媒体 | |
| JP4001969B2 (ja) | 符号化装置および方法、並びに復号装置および方法 | |
| JPH06225279A (ja) | 符号化方法、復号化方法、符号化装置及び復号化装置 | |
| JP2007266750A (ja) | 符号化方法 | |
| JP2003061091A (ja) | 圧縮ビットストリームをアップサンプリングする方法および装置 | |
| JP3263901B2 (ja) | 画像信号符号化方法及び装置、画像信号復号化方法及び装置 | |
| US8326060B2 (en) | Video decoding method and video decoder based on motion-vector data and transform coefficients data | |
| Halbach et al. | Concepts and performance of next-generation video compression standardization | |
| US8126051B2 (en) | Video encoding and decoding methods and corresponding encoding and decoding devices | |
| JP3247349B2 (ja) | 動画像監視装置及び監視方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040813 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040818 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041018 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041104 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041227 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050118 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050322 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20050419 |
|
| A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20050520 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070627 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070816 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100824 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100824 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110824 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120824 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130824 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |