JP2900810B2

JP2900810B2 - 変換符号化された画像データの復号化時に生じる量子化ノイズの低減方法及び変換符号化された画像データの復号化装置

Info

Publication number: JP2900810B2
Application number: JP33484294A
Authority: JP
Inventors: 隆幸菅原
Original assignee: Victor Company of Japan Ltd
Current assignee: Victor Company of Japan Ltd
Priority date: 1994-12-20
Filing date: 1994-12-20
Publication date: 1999-06-02
Anticipated expiration: 2014-06-02
Also published as: JPH08172628A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は変換符号化された画像デ
ータの復号化時に生じる量子化ノイズの低減方法及び前
記の方法を適用して変換符号化された画像データを復号
する画像データの復号化装置に関する。

【０００２】

【従来の技術】画像信号、音響信号、その他の各種信号
をデジタル信号として、伝送，記録再生する場合には、
情報量の圧縮伸長技術が用いられている。すなわち、例
えば画像信号や音声信号等のデジタル化に当って、各サ
ンプル値を均等に分割した信号レベルの内の一つの代表
値で置き換える直線量子化(均等量子化)を行なっただけ
では、伝送，記録再生の対象とされる信号の情報量が、
非常に多い状態になるからである。それで、従来から放
送通信の技術分野、記録再生の技術分野においては、例
えば、信号の変化の少ない部分で人間の視覚や聴覚が敏
感であり、信号の変化の激しい部分ではある程度の誤差
があっても、それを検知し難いという人間の視覚や聴覚
の性質を、各サンプルあたりの情報量の低減のために利
用するということの他に、多くの情報圧縮技術の適用に
より、伝送，記録再生の対象にされている各種情報につ
いての高能率圧縮技術（情報の高能率符号化技術）の実
用化が進められて来ていることは周知のとおりである。

【０００３】さて、現在、実用化されているＶＨＳ（登
録商標）方式のＶＴＲからの再生信号を用いて表示され
た再生画像程度の画質の動画像における１時間当りの情
報量は、おおよそ１０９Ｇビットであり、また、我国に
おける現行の標準方式のカラーテレビジョン方式の受信
画像程度の画質の動画像における１時間当りの情報量
は、おおよそ３６０Ｇビットであるが、前記のように大
きな情報量を有する画像情報を、実用化されている現行
の伝送路や記録媒体を用いて、伝送，記録再生させるた
めに必要とされる画像情報の高能率圧縮方式についての
実用化研究も盛んに行なわれている。

【０００４】ところで、現在、実用的な画像情報の高能
率圧縮方式として提唱されている画像情報の高能率圧縮
方式では、自然画における隣接画素間では相関が高い
という、画面内（フレーム内）相関々係を利用して行な
う情報量の圧縮(空間的相関々係を利用して行なう情報
量の圧縮)、時間軸上に並ぶ画面間(フレーム間）相関
々係を利用して行なう情報量の圧縮(時間的相関々係を
利用して行なう情報量の圧縮)、符号の出現確率の偏
りによる情報量の圧縮、との３種類の異なる圧縮手段を
組合わせて情報量の圧縮を行ない、高能率符号化が達成
されるようにしている。前記したの画面内（フレーム
内）相関々係を利用して行なう画像の情報量の圧縮手段
としては、従来から多くの手法が提案されて来ている
が、近年になって、Ｋ−Ｌ（カルーネン・レーベ）変
換、離散コサイン変換（ＤＣＴ）、離散フーリエ変換、
ウオルシュ・アダマール変換、等を代表例とする直交変
換が採用されることが多くなった。

【０００５】例えば、ＩＳＯ（国際標準化機構）の下に
設立されたＭＰＥＧ（ＭｏｖｉｎｇＰｉｃｔｕｒｅＣ
ｏｄｉｎｇＥｘｐｅｒｔＧｒｏｕｐ）による国際標準
化作業の結果として提唱された画像情報の高能率符号化
方式（ＭＰＥＧ１方式，ＭＰＥＧ２方式と呼称されるこ
ともある）は、フレーム内符号化と、フレーム間符号化
とを組合わせて、動き補償予測やフレーム間予測を施し
た状態で、動画像情報の高能率符号化を行なうのである
が、前記の直交変換として２次元離散コサイン変換（２
次元ＤＣＴ）を採用している。そして、前記の直交変換
は、高能率符号化の対象にされる各１枚毎の画面の画像
信号について、所定のブロックサイズ（Ｎ×Ｍ画素←横
Ｎ画素×縦Ｍラインのブロックサイズ）を有する「単位
のブロック」(前記のＭＰＥＧ１方式，ＭＰＥＧ２方式
では、８×８画素←横８画素×縦８ラインのブロックサ
イズのブロックが「単位のブロック」とされている）毎
に分割された画像信号について行なわれる。

【０００６】前記の単位のブロック毎に直交変換される
ことによって得られる（Ｎ×Ｍ）個の直交変換係数（前
記のＭＰＥＧ１方式，ＭＰＥＧ２方式では、８×８＝６
４個のＤＣＴ変換係数）は、少なくとも前記した単位の
ブロックの１個を含む予め定められた大きさの領域（前
記のＭＰＥＧ１方式，ＭＰＥＧ２方式において、「マク
ロブロック」の用語で呼称されている領域、すなわち、
ＭＰＥＧ１方式，ＭＰＥＧ２方式で、輝度信号Ｙについ
ての１６×１６画素←横１６画素×縦１６ラインのブロ
ックサイズの大きさの領域と、２つの色差信号Ｃｒ，Ｃ
ｂのそれぞれについての８×８画素←横８画素×縦８ラ
インのブロックサイズの大きさの領域とからなる領域）
毎に設定されている「ブロック量子化幅値」によって量
子化される。例えば、ＭＰＥＧ１方式，ＭＰＥＧ２方式
において、前記した「ブロック量子化幅値」は、［｛マ
クロブロック量子化特性値（またはマクロブロックの量
子化スケール）ＱＳ｝×量子化マトリクス］として示さ
れる。

【０００７】前記のブロック量子化幅値によって量子化
された直交変換係数（例えばＤＣＴ係数)は、それの直
流成分(ＤＣ成分)と、交流成分(ＡＣ成分)とに分離され
る。前記の直交変換係数(例えばＤＣＴ係数)の直流成分
は差分符号化され、また直交変換係数(例えばＤＣＴ係
数)の交流成分は、ジグザグ走査された後にエントロピ
ー符号化（符号の出現確率の偏りによる情報量圧縮…例
えばハフマン方式のような可変長符号化）される。前記
のように変換符号化された画像データはビットストリー
ム(ビット列)として出力される。次に前述のように変換
符号化された画像データに対する復号動作は、既述の符
号化動作とは逆の操作で行なわれて出力画像が得られる
のであるが、高能率符号化の過程において量子化が行な
われている場合には、避けることができない量子化誤差
の存在により、出力画像中に量子化ノイズを生じさせ
る。そして符号化の対象にされた画像の複雑さが、伝送
レートに対して大きな場合に、前記の量子化ノイズが画
像の品質を大きく劣化させる。

【０００８】一般的に、前記した量子化ノイズを生じさ
せる量子化誤差の内で、低域成分の量子化誤差は、単位
のブロック間に相関が無い状態の出力画像歪、所謂ブロ
ック歪を画像中に生じさせ、また、量子化ノイズを生じ
させる量子化誤差の内で、高域成分の量子化誤差は、リ
ンギング状の出力画像歪、所謂モスキートノイズをエッ
ジの周辺に生じさせる。ところで、前記のように画像中
に生じる量子化ノイズは、画像の平坦部分では特に目立
つものであり、低域から高域にかけて大きな映像信号レ
ベルの変化がある場所に、小さなノイズが加算されてい
るような量子化ノイズの波形の場合には、視覚特性上で
の感度差が小さいことからノイズは検知され難い。

【０００９】しかし、低域だけに大きな映像信号レベル
の変化が存在している場合に、高域に小さなノイズが加
算されているときは、前記のノイズが検知され易い。当
然のことながら、大きなノイズが加算された場合には、
低域，高域の如何に拘らずに致命的を符号化劣化として
検知されてしまうことは、いうまでもない。そして、前
記のような量子化ノイズによる画像品質の劣化の問題を
解決する手段の１つとして、例えば特開平４ー３７２０
７４号公報に開示されているように復号画像にポストフ
ィルタをかけて量子化ノイズを低減させるように解決手
段が提案されている。

【００１０】

【発明が解決しようとする課題】前記の特開平４ー３７
２０７４号公報に開示されている解決手段は、変換符号
化の対象にされている画像データが、所定のブロックサ
イズを有する単位のブロック毎に分割されており、ま
た、少なくとも前記した単位のブロックの１個を含む予
め定められた大きさの領域（ＭＰＥＧ１方式，ＭＰＥＧ
２方式において、「マクロブロック」の用語で呼称され
ている領域)毎に、前記したそれぞれの領域内の画像デ
ータについて実施される直交変換が、前記した単位のブ
ロック毎の画像データについて行なわれている場合(例
えば、ＭＰＥＧ１方式の場合）の変換符号化された画像
データからの復号画像データについての後処理に使用し
たときには、所期の目的を達成することも可能である。

【００１１】しかしながら、変換符号化の対象にされて
いる画像データが、所定のブロックサイズを有する単位
のブロック毎に分割されており、また、少なくとも前記
した単位のブロックの１個を含む予め定められた大きさ
の領域（ＭＰＥＧ１方式，ＭＰＥＧ２方式において、
「マクロブロック」の用語で呼称されている領域）毎
に、前記したそれぞれの領域内の画像データについて実
施される直交変換が、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードだけで
はなく、前記した領域内の画像データにおける飛越走査
の奇数フィールドの画像データを組合わせて得た前記し
た所定のブロックサイズを有する新たな単位のブロック
の画像データと、前記した領域内の画像データにおける
飛越走査の偶数フィールドの画像データを組合わせて得
た前記した所定のブロックサイズを有する新たな単位の
ブロックの画像データとについて直交変換が行なわれる
第２の直交変換モードとの何れかの直交変換モードに従
って行なわれている場合（例えば、ＭＰＥＧ２方式の場
合）の変換符号化された画像データからの復号画像デー
タについての後処理に、前記した特開平４ー３７２０７
４号公報に開示されている解決手段が使用された場合に
は、時間方向での動きに不自然さがある再生画像となる
ことがある。すなわち、動きの大きい画像の場合におけ
る飛越走査の２つのフィールドの画像データには相関が
無いから、このような画像データにローパスフィルタ処
理を施したときには他フィールドの画像データが混入し
て時間解像度が減少して、時間方向での動きに不自然さ
がある再生画像となる。それで、前記のような問題の生
じない解決策が求められた。

【００１２】

【課題を解決するための手段】本発明は、フレームを符
号化の単位とするフレーム構造の画像と、フィールドを
符号化の単位とするフィールド構造の画像との一方また
は双方による変換符号化の対象にされている画像データ
が、所定のブロックサイズを有する単位のブロック毎に
分割されており、また、少なくとも前記した単位のブロ
ックの１個を含む予め定められた大きさの領域毎に、前
記したそれぞれの領域内の画像データについて実施され
る直交変換は、フレーム構造の画像については、前記し
た単位のブロック毎の画像データについて行なわれる第
１の直交変換モードと、前記した領域内の画像データに
おける飛越走査の奇数フィールドの画像データを組合わ
せて得た前記した所定のブロックサイズを有する新たな
単位のブロックの画像データと、前記した領域内の画像
データにおける飛越走査の偶数フィールドの画像データ
を組合わせて得た前記した所定のブロックサイズを有す
る新たな単位のブロックの画像データとについて直交変
換が行なわれる第２の直交変換モードとの何れかの直交
変換モードに従って行なわれるのに対し、フィールド構
造の画像については、前記した第２の直交変換モードに
よって行なわれるようにされており、前記の直交変換が
行なわれた後に、前記の領域毎に個別に設定されている
ブロック量子化幅値を用いて量子化されるとともに、所
定の符号化により変換符号化された画像データを復号化
した画像データにおける量子化ノイズを低減させるの
に、前記した第１の直交変換モードによって直交変換が
行なわれていた領域の復号画像データについて、画像の
垂直方向について施すべきローパスフィルタ処理と、前
記した第２の直交変換モードによって直交変換が行なわ
れていた領域の復号画像データについて、画像の垂直方
向について施すべきローパスフィルタ処理との双方のロ
ーパスフィルタ処理として、飛越走査方式による画像の
フィールドの画像データに対するローパスフィルタ処理
を適用するようにした変換符号化された画像データの復
号化時に生じる量子化ノイズの低減方法、及び前記のよ
うにして変換符号化された画像データを復号化した画像
データにおける量子化ノイズを低減させるのに、復号化
された画像データに対して画像の垂直方向について施さ
れるローパスフィルタ処理に関して、第１の直交変換モ
ードによって直交変換が行なわれていた単位のブロック
と対応する復号画像データについて、画像の垂直方向に
ついてのローパスフィルタ処理のために選択された復号
画像データが、単位のブロックの境界を挟んで存在して
いない状態において、前記の復号化された画像データに
対して画像の垂直方向について施されるべきローパスフ
ィルタ処理は、単位のブロックにおける垂直方向に連続
する復号画素データを用いて行なわれ、また、第２の直
交変換モードによって直交変換が行なわれていた単位の
ブロックと対応する復号画像データについて、画像の垂
直方向についてのローパスフィルタ処理のために選択さ
れた復号画像データが、単位のブロックの境界を挟んで
存在していない状態において、前記の復号化された画像
データに対して画像の垂直方向について施されるべきロ
ーパスフィルタ処理は、単位のブロックにおける垂直方
向の１つ置きの復号画素データを用いて行なわれ、さら
に画像の垂直方向についてのローパスフィルタ処理のた
めに選択された復号画像データが、単位のブロックの境
界を挟んで隣り合う２つの単位のブロックに存在してい
る状態において、前記の境界を挟んで隣り合う２つの単
位のブロックの双方が、第１の直交変換モードによって
直交変換が行なわれていた単位のブロックと対応する復
号画像データによる単位のブロックの場合には、前記の
復号化された画像データに対して画像の垂直方向につい
て施されるべきローパスフィルタ処理が、各単位のブロ
ックにおける垂直方向に連続する復号画素データを用い
て行なわれ、さらにまた、画像の垂直方向についてのロ
ーパスフィルタ処理のために選択された復号画像データ
が、単位のブロックの境界を挟んで隣り合う２つの単位
のブロックに存在している状態において、前記の境界を
挟んで隣り合う２つの単位のブロックの内の少なくとも
一方が、第２の直交変換モードによって直交変換が行な
われていた単位のブロックと対応する復号画像データに
よる単位のブロックの場合には、前記の復号化された画
像データに対して画像の垂直方向について施されるべき
ローパスフィルタ処理が、各単位のブロックにおける垂
直方向の１つ置きの復号画素データを用いて行なわれる
ようにした変換符号化された画像データの復号化時に生
じる量子化ノイズの低減方法、ならびに、前記した画像
データの復号化時に生じる量子化ノイズの低減方法を実
施して、所定の符号化により変換符号化された画像デー
タの復号化のために、少なくともバッファメモリと、可
変長復号化部と、逆量子化部と、逆直交変換部と、画像
メモリとを含んで構成されている変換符号化された画像
データの復号化装置において、変換符号化された画像デ
ータから、少なくとも前記した単位のブロックの１個を
含む予め定められた大きさの領域毎に、前記したそれぞ
れの領域内の画像データについて実施される直交変換
が、前記した単位のブロック毎の画像データについて行
なわれる第１の直交変換モードと、前記した領域内の画
像データにおける飛越走査の奇数フィールドの画像デー
タを組合わせて得た前記した所定のブロックサイズを有
する新たな単位のブロックの画像データと、前記した領
域内の画像データにおける飛越走査の偶数フィールドの
画像データを組合わせて得た前記した所定のブロックサ
イズを有する新たな単位のブロックの画像データとにつ
いて直交変換が行なわれる第２の直交変換モードとの何
れかの直交変換モードに従って行なわれているのかの直
交変換モード情報及び画像構造情報を検出する画像構造
情報及び直交変換モード情報検出手段と、画像メモリか
ら読出された復号画像データを通過させるローパスフィ
ルタと、前記した画像構造情報及び情報及び直交変換モ
ード情報検出手段の検出々力によって、前記のローパス
フィルタが常に飛越走査方式による画像のフィールドの
画像データに対するローパスフィルタ処理を行なうよう
にさせたり、あるいは可変長復号化部で検出された画像
構造情報及び直交変換モード情報に基づいて、画像メモ
リから読出された復号画像データを通過させるローパス
フィルタが常に飛越走査方式による画像のフィールドの
画像データに対するローパスフィルタ処理を行なうよう
にさせる手段を備えている変換符号化された画像データ
の復号化装置、及び所定の符号化により変換符号化され
た画像データの復号化のために、少なくともバッファメ
モリと、可変長復号化部と、逆量子化部と、逆直交変換
部と、画像メモリとを含んで構成されている変換符号化
された画像データの復号化装置において、変換符号化さ
れた画像データから、少なくとも前記した単位のブロッ
クの１個を含む予め定められた大きさの領域毎に、前記
したそれぞれの領域内の画像データについて実施される
直交変換が、前記した単位のブロック毎の画像データに
ついて行なわれる第１の直交変換モードと、前記した領
域内の画像データにおける飛越走査の奇数フィールドの
画像データを組合わせて得た前記した所定のブロックサ
イズを有する新たな単位のブロックの画像データと、前
記した領域内の画像データにおける飛越走査の偶数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タとについて直交変換が行なわれる第２の直交変換モー
ドとの何れかの直交変換モードに従って行なわれている
のかの直交変換モード情報と画像構造情報とを検出する
画像構造情報及び直交変換モード情報検出手段と、画像
メモリから読出された復号画像データを通過させるロー
パスフィルタと、前記した画像構造情報及び直交変換モ
ード情報検出手段で検出された画像構造情報及び直交変
換モード情報、または可変長復号化部で検出された画像
構造情報及び直交変換モード情報に基づいて、第１の直
交変換モードによって直交変換が行なわれていた単位の
ブロックと対応する復号画像データについては、画像の
垂直方向についてのローパスフィルタ処理のために選択
された復号画像データが、単位のブロックの境界を挟ん
で存在していない状態において、前記の復号化された画
像データに対して画像の垂直方向について施されるべき
ローパスフィルタ処理は、単位のブロックにおける垂直
方向に連続する復号画素データを用いて行なわれるよう
に、また、第２の直交変換モードによって直交変換が行
なわれていた単位のブロックと対応する復号画像データ
については、画像の垂直方向についてのローパスフィル
タ処理のために選択された復号画像データが、単位のブ
ロックの境界を挟んで存在していない状態において、前
記の復号化された画像データに対して画像の垂直方向に
ついて施されるべきローパスフィルタ処理は、単位のブ
ロックにおける垂直方向の１つ置きの復号画素データを
用いて行なわれるように、さらに画像の垂直方向につい
てのローパスフィルタ処理のために選択された復号画像
データが、単位のブロックの境界を挟んで隣り合う２つ
の単位のブロックに存在している状態においては、前記
の境界を挟んで隣り合う２つの単位のブロックの双方
が、第１の直交変換モードによって直交変換が行なわれ
ていた単位のブロックと対応する復号画像データによる
単位のブロックの場合には、前記の復号化された画像デ
ータに対して画像の垂直方向について施されるべきロー
パスフィルタ処理が、各単位のブロックにおける垂直方
向に連続する復号画素データを用いて行なわれるよう
に、さらにまた画像の垂直方向についてのローパスフィ
ルタ処理のために選択された復号画像データが、単位の
ブロックの境界を挟んで隣り合う２つの単位のブロック
に存在している状態においては、前記の境界を挟んで隣
り合う２つの単位のブロックの内の少なくとも一方が、
第２の直交変換モードによって直交変換が行なわれてい
た単位のブロックと対応する復号画像データによる単位
のブロックの場合には、前記の復号化された画像データ
に対して画像の垂直方向について施されるべきローパス
フィルタ処理が、各単位のブロックにおける垂直方向の
１つ置きの復号画素データを用いて行なわれるようにロ
ーパスフィルタを動作させる手段とを備えてなる変換符
号化された画像データの復号化装置を提供する。

【００１３】

【作用】フレームを符号化の単位とするフレーム構造の
画像と、フィールドを符号化の単位とするフィールド構
造の画像との一方または双方による高能率符号化の対象
にされている各１枚毎の画面の画像信号について、所定
のブロックサイズ（Ｎ×Ｍ画素←横Ｎ画素×縦Ｍライン
のブロックサイズ）を有する「単位のブロック」毎に、
直交変換して得た（Ｎ×Ｍ）個の直交変換係数が、少な
くとも前記した単位のブロックの１個を含む予め定めら
れた大きさの領域毎に設定されている「ブロック量子化
幅値」によって量子化された後に、所定の符号化が施さ
れてなる変換符号化された画像データと、前記の変換符
号化された画像データの復号時に必要とされる付加情報
とによるビットストリームがバッファメモリに記憶され
る。前記のバッファメモリから読出されたビットストリ
ームが供給される可変長復号部では、エントロピー符号
化（可変長符号化）された画像データと、変換符号化さ
れた画像データの復号時に必要とされる付加情報｛例え
ば、ブロック量子化幅情報、動きベクトル、予測モード
情報、画像構造（ピクチャストラクチャ）の情報、直交
変換のモード情報等｝とを復号する。

【００１４】復号された画像データと、復号された付加
情報中のブロック量子化幅情報とが逆量子化部に与えら
れることによって、逆量子化部で行なわれる画像データ
に対する逆量子化動作により、逆量子化部から逆直交変
換部に直交変換係数が供給される。逆直交変換部では、
単位のブロック毎に２次元の逆直交変換を行なって、周
波数領域の画像データを時間軸領域の画像データに逆変
換する。前記の逆直交変換部から出力された時間軸領域
の画像データは、フレーム内符号化、フレーム間符号
化、の違いを示すコーディングタイプに従って、動き補
償部で動き補償された状態の画像データと加算するか、
加算しないかして、出力画像データとされて画像メモリ
に格納される。

【００１５】前記のビットストリーム中に含まれていた
付加情報の内から検出された画像構造（ピクチャ・スト
ラクチャ）情報（画像構造がフレーム構造かフィールド
構造かの区別を示す情報）と直交変換モード情報が供給
される制御信号発生部には、画素アドレス情報も与えら
れている。前記の制御信号発生部では、画像の垂直方向
について画像データに施すべきローパスフィルタ処理
が、装置に設定された動作モードに応じて低域通過濾波
器（ローパスフィルタ）で行なわれた状態の復号画像デ
ータを出力端子２に出力させるようにするために必要な
アドレス信号を画像メモリに供給する。すなわち、装置
に設定される動作モードの１つにおいては、第１の直交
変換モードによって直交変換が行なわれていた領域の復
号画像データについて、画像の垂直方向について施すべ
きローパスフィルタ処理と、前記した第２の直交変換モ
ードによって直交変換が行なわれていた領域の復号画像
データについて、画像の垂直方向について施すべきロー
パスフィルタ処理との双方のローパスフィルタ処理が、
図３に例示されているように飛越走査方式による画像の
フィールドの画像データに対するローパスフィルタ処理
として行なわれることもある。

【００１６】次に、第１の領域及び第３の領域がフレー
ム構造であり、第２の領域がフィールド構造の場合の例
を示している図４を参照して、装置に設定される他の動
作モードの場合について説明すると、第１の直交変換モ
ードによって直交変換が行なわれていた単位のブロック
と対応する復号画像データについては、画像の垂直方向
についてのローパスフィルタ処理のために選択された復
号画像データが、単位のブロックの境界を挟んで存在し
ていない状態において、前記の復号化された画像データ
に対して画像の垂直方向について施されるべきローパス
フィルタ処理は、図４の第１の領域における縦方向の１
ｏ〜１５ｅの範囲に例示されているように、単位のブロ
ックにおける垂直方向に連続している復号画素データを
用いて行なわれる。

【００１７】また第２の直交変換モードによって直交変
換が行なわれていた単位のブロックと対応する復号画像
データについては、画像の垂直方向についてのローパス
フィルタ処理のために選択された復号画像データが、単
位のブロックの境界を挟んで存在していない状態におい
て、前記の復号化された画像データに対して画像の垂直
方向について施されるべきローパスフィルタ処理は、図
４の第２の領域における縦方向の１ｏ〜１６ｅの範囲に
例示されているように、単位のブロックにおける垂直方
向の１つ置きの復号画素データを用いて行なわれ、さら
に画像の垂直方向についてのローパスフィルタ処理のた
めに選択された復号画像データが、単位のブロックの境
界を挟んで隣り合う２つの単位のブロックに存在してい
る状態においては、前記の境界を挟んで隣り合う２つの
単位のブロックの双方が、第１の直交変換モードによっ
て直交変換が行なわれていた単位のブロックと対応する
復号画像データによる単位のブロックの場合には、図４
の第１の領域における縦方向の７ｏ〜１０ｅの範囲に例
示されているように、前記の復号化された画像データに
対して画像の垂直方向について施されるべきローパスフ
ィルタ処理が、各単位のブロックにおける垂直方向に連
続する復号画素データを用いて行なわれる。

【００１８】さらにまた、画像の垂直方向についてのロ
ーパスフィルタ処理のために選択された復号画像データ
が、単位のブロックの境界を挟んで隣り合う２つの単位
のブロックに存在している状態においては、前記の境界
を挟んで隣り合う２つの単位のブロックの内の少なくと
も一方が、第２の直交変換モードによって直交変換が行
なわれていた単位のブロックと対応する復号画像データ
による単位のブロックの場合には、図４の第１の領域に
おける縦方向の１４ｅから図４の第２の領域の５ｏの範
囲、及び図４の第２の領域における縦方向の１２ｅから
図４の第３の領域の４ｅの範囲に例示されているよう
に、前記の復号化された画像データに対して画像の垂直
方向について施されるべきローパスフィルタ処理が、各
単位のブロックにおける垂直方向の１つ置きの復号画素
データを用いて画像データに対するローパスフィルタ処
理が行なわれる。

【００１９】

【実施例】以下、添付図面を参照して本発明の変換符号
化された画像データの復号化時に生じる量子化ノイズの
低減方法、及び変換符号化された画像データの復号化装
置の具体的な内容を詳細に説明する。図１及び図２は本
発明の変換符号化された画像データの復号化時に生じる
量子化ノイズの低減方法を適用して変換符号化された画
像データの復号化装置の構成例を示すブロック図であ
る。図１及び図２に示す本発明の画像データの復号化装
置において、１は復号化の対象にされる符号化ビットス
トリーム(符号化済みのデータ列）)の入力端子であり、
また各図において一点鎖線枠で包囲して示してある部分
３は復号器集積回路として集積回路化されている構成部
分である。図１及び図２の各図に示されている復号化装
置の実施例において、一点鎖線枠３で包囲して示してあ
る構成部分としては、少なくともバッファメモリ８と、
可変長復号化部９と、逆量子化部１０と、逆直交変換部
１１と、加算部１２と、動き補償部１３と、画像メモリ
１４とを含んで集積回路化されている市販品を使用する
ことができる。

【００２０】前記した入力端子１に供給される符号化ビ
ットストリームは、画面内（フレーム内）相関々係を利
用する直交変換により画像の情報量の圧縮(空間的相関
々係を利用して行なう情報量の圧縮)と、時間軸上に並
ぶ画面間(フレーム間）相関々係を利用して行なう情報
量の圧縮(時間的相関々係を利用して行なう情報量の圧
縮)、及び符号の出現確率の偏りによる情報量の圧縮と
の３種類の異なる圧縮手段を組合わせて高能率変換符号
化された画像データ（例えばＭＰＥＧ１方式，ＭＰＥＧ
２方式による画像データ）であるとされている。なお、
本明細書の以下の記述においては、復号の対象にされて
いる画像データが、ＭＰＥＧ１方式，ＭＰＥＧ２方式に
よる画像データであるとして説明が行なわれている。

【００２１】ところで、ＭＰＥＧ１方式における動画像
情報の高能率符号化は、フレーム構造の画像の画像デー
タについて行なわれ、また、ＭＰＥＧ２方式における動
画像情報の高能率符号化は、フレームを符号化の単位と
するフレーム構造の画像の画像データと、フィールドを
符号化の単位とするフィールド構造の画像との一方また
は双方による画像データについて行なわれるが、ＭＰＥ
Ｇ１，ＭＰＥＧ２方式における動画像情報の高能率符号
化は、２次元離散コサイン変換（２次元ＤＣＴ）による
フレーム内符号化と、フレーム間符号化とを組合わせ、
動き補償予測やフレーム間予測を施した状態で行なわれ
る。そして、高能率符号化の対象にされた各１枚毎の画
面の画像信号は、８×８画素（横８画素×縦８ライン）
のブロックサイズの「単位のブロック」毎に分割され、
前記の各単位のブロック毎にＤＣＴが行なわれる。そし
て、前記の各単位のブロック毎のそれぞれ６４個のＤＣ
Ｔ変換係数は「ブロック量子化幅値」で量子化される。
ＭＰＥＧ１方式,ＭＰＥＧ２方式において、前記の「ブロ
ック量子化幅値」は、前記した単位のブロックの１個を
含む予め定められた大きさの領域の「マクロブロック」
の用語で呼称されている領域、すなわち、輝度信号Ｙに
ついての１６×１６画素(横１６画素×縦１６ライン)の
ブロックサイズの大きさの領域と、２つの色差信号Ｃ
ｒ,Ｃｂのそれぞれについての８×８画素(横８画素×縦
８ライン)のブロックサイズの大きさの領域とからなる
領域）毎に設定されている{マクロブロック量子化特性
値(またはマクロブロックの量子化スケール）ＱＳ}と、
量子化マトリクスとの積によって示される値である。

【００２２】図５及び図６における各(ｂ）〜（ｅ）図
は、ＭＰＥＧ１方式,ＭＰＥＧ２方式において「単位のブ
ロック」とされている８×８画素（横８画素×縦８ライ
ン）のブロックサイズを有する画素ブロックであり、ま
た図５及び図６における各（ａ）図は、図５及び図６に
おける各（ｂ）〜（ｅ）図に示す４個の「単位のブロッ
ク」よりなる１つの領域（マクロブロック）を示してお
り、前記した１つの領域は、図５及び図６中で横方向の
１〜１６の数字と縦方向の１〜１６の数字によって示さ
れているように、１６×１６画素（横１６画素×縦１６
ライン）のブロックサイズを有する画素ブロックであ
る。図５における各（ａ）図中の一点鎖線で区切られて
いる部分は、図５における（ｂ）〜（ｅ）図に示されて
いる８×８画素（横８画素×縦８ライン）のブロックサ
イズを有する「単位のブロック」と対応している。前記
の各ブロック間の対応関係は、横方向に示してある数字
及び縦方向に示してある数字によって明らかであろう。

【００２３】図５及び図６において、縦方向の数字に付
してある添字ｏ，ｅは、１枚の画像が２対１の飛越走査
によって構成されている場合における奇数フィールドに
おける画素列（走査線）と、偶数フィールドにおける画
素列（走査線）とを区別して表すための添字であり、奇
数フィールドにおける画素列（走査線）には添字ｏを付
し、また偶数フィールドにおける画素列（走査線）添字
ｅが付しており、また図５及び図６においては奇数フィ
ールドにおける画素列（走査線）に対して細横線を引い
た図示方法を採用している。ＭＰＥＧ１方式では順次走
査方式による画像だけを高能率符号化の対象にしている
から、図５をＭＰＥＧ１方式の説明に使用する場合に
は、縦方向の数字の添字ｏ，ｅを無視した状態で流用す
ればよい。なお、図３及び図４中にそれぞれ示してある
第１の領域〜第３の領域における横方向及び縦方向の数
字と縦方向の数字に付した添字の意味も、図５及び図６
について説明したところと同じである。

【００２４】さて、前記したＭＰＥＧ１方式,ＭＰＥＧ
２方式において、８×８画素（横８画素×縦８ライン）
のブロックサイズの「単位のブロック」毎に行なわれた
ＤＣＴによって得られた各単位のブロック毎のそれぞれ
６４個のＤＣＴ変換係数は「ブロック量子化幅値」で量
子化されるが、前記の量子化はＤＣＴ変換係数を被除数
とし、「ブロック量子化幅値」を除数として量子化が行
なわれたＤＣＴ係数は、それの直流成分（ＤＣ成分）
と、交流成分（ＡＣ成分）とに分離される。前記のＤＣ
Ｔ係数の直流成分は差分符号化され、またＤＣＴ係数の
交流成分は、ジグザグ走査された後にエントロピー符号
化（符号の出現確率の偏りによる情報量圧縮…例えばハ
フマン方式のような可変長符号化）されて変換符号化さ
れた画像データには、前記の変換符号化された画像デー
タの復号時に必要とされる付加情報［例えば、｛ブロッ
ク量子化幅情報→マクロブロック量子化特性値（または
マクロブロックの量子化スケール）ＱＳ}と、動きベク
トル、予測モード情報、フレームを符号化の単位とする
フレーム構造の画像と、フィールドを符号化の単位とす
るフィールド構造の画像とを区別するための画像構造
（ピクチャストラクチャ）の情報、直交変換のモード情
報、等］が付加されて符号化ビットストリームとされて
いる。そして、図１及び図２にそれぞれ示されている本
発明の画像データの復号化装置において、入力端子１に
供給された符号化ビットストリームは、例えば先入れ先
出しメモリ（ＦＩＦＯ）を用いて構成されているバッフ
ァメモリ８に格納される。

【００２５】前記したバッファメモリ８から読出された
符号化ビットストリームが供給される可変長復号部９で
は、エントロピー符号化（可変長符号化）された画像デ
ータと、変換符号化された画像データの復号時に必要と
される付加情報、例えば｛ブロック量子化幅情報→マク
ロブロック量子化特性値（またはマクロブロックの量子
化スケール）ＱＳ}、動きベクトル、予測モード情報、
画像構造（ピクチャストラクチャ）の情報、直交変換の
モード情報、等とを復号する。そして、前記の可変長復
号部９で復号された画像データと、ブロック量子化幅情
報｛マクロブロック量子化特性値（またはマクロブロッ
クの量子化スケール）ＱＳ}、画像構造（ピクチャスト
ラクチャ）の情報、直交変換のモード情報とは、逆量子
化部１０に供給され、また、動きベクトル、予測モード
情報等は、逆動き補償部１３に供給される。

【００２６】前記の可変長復号部９で復号された画像デ
ータと、復号された付加情報中のブロック量子化幅情報
｛マクロブロック量子化特性値（またはマクロブロック
の量子化スケール）ＱＳ}、画像構造（ピクチャストラ
クチャ）の情報、直交変換のモード情報とが与えられた
逆量子化部１０では、逆量子化動作を行なって得たＤＣ
Ｔ変換係数を逆直交変換部（逆ＤＣＴ）１１に供給す
る。逆直交変換部（逆ＤＣＴ）１１では、単位のブロッ
ク毎に２次元の逆ＤＣＴを行なって、周波数領域の画像
データを時間軸領域の画像データに逆変換して、それを
加算部１２に供給する。前記のようにして加算部１２に
供給された時間軸領域の画像データは、フレーム内符号
化、フレーム間符号化、の違いを示すコーディングタイ
プに従って、動き補償部１３で動き補償された状態の画
像データと加算するか、加算しないかして、出力画像デ
ータとされて画像メモリ１４に格納する。そして、図１
及び図２の各図に示す本発明の画像データの復号化装置
において、復号器集積回路３における画像メモリ１４か
らの画像データは、低域通過濾波器（ローパスフィル
タ）７を介して出力端子２に出力されている。

【００２７】さて、ＭＰＥＧ１方式，ＭＰＥＧ２方式に
よる動画像情報の高能率符号化は、２次元離散コサイン
変換（２次元ＤＣＴ）によるフレーム内符号化と、フレ
ーム間符号化とを組合わせ、動き補償予測やフレーム間
予測を施した状態で行なわれており、高能率符号化の対
象にされた各１枚毎の画面の画像信号は、８×８画素
（横８画素×縦８ライン）のブロックサイズの「単位の
ブロック」毎に分割されて、前記の各単位のブロック毎
にＤＣＴが行なわれることは既述のとおりであるが、Ｍ
ＰＥＧ１方式では順次走査方式を適用して得た動画像情
報だけを高能率符号化の対象にしているのに対し、ＭＰ
ＥＧ２方式では飛越走査方式を適用して得た動画像情報
についても高能率符号化の対象としている。

【００２８】それで、ＭＰＥＧ２方式による高能率符号
化に際して行なわれるＤＣＴとしては、ＭＰＥＧ１方式
による高能率符号化に際して行なわれるＤＣＴと同様
に、高能率符号化の対象にされた各１枚毎の画面の画像
信号を、８×８画素（横８画素×縦８ライン）のブロッ
クサイズの「単位のブロック」毎に分割して得た各単位
のブロック毎にＤＣＴが行なわれるような直交変換モー
ド（第１の直交変換モード）が適用される他に、少なく
とも前記した単位のブロックの１個を含む予め定められ
た大きさの領域（マクロブロック）毎に、前記したそれ
ぞれの領域内の画像データについて実施される直交変換
が、前記した単位のブロック毎の画像データについて行
なわれる第１の直交変換モードと、前記した領域内の画
像データにおける飛越走査の奇数フィールドの画像デー
タを組合わせて得た前記した所定のブロックサイズを有
する新たな単位のブロックの画像データと、前記した領
域内の画像データにおける飛越走査の偶数フィールドの
画像データを組合わせて得た前記した所定のブロックサ
イズを有する新たな単位のブロックの画像データとにつ
いて直交変換が行なわれる第２の直交変換モードとの何
れかの直交変換モードに従って行なわれるようにもされ
ている。

【００２９】前記した第１の直交変換モードによるＤＣ
Ｔが行なわれる「単位のブロック」を例示した図５の
（ｂ）〜（ｅ）に示されている各「単位のブロック」
と、前記の各「単位のブロック」を含んで構成されてい
る図５の（ａ）に示す領域（マクロブロック）、すなわ
ち、高能率符号化の対象にされた画像中に設定された領
域との関係は、図５の各図中に示されている横方向の数
字列と縦方向の数字列との対応関係によって明らかであ
る。なお、ＭＰＥＧ１方式では順次走査方式を適用して
得た動画像情報を高能率符号化の対象にしているから、
図５中に示されている縦方向の数字列の数字に付加され
ている添字ｏ，ｅは不要である。

【００３０】また、前記した第２の直交変換モードによ
るＤＣＴが行なわれる「単位のブロック」を例示した図
６の（ｂ）〜（ｅ）に示されている各新たな「単位のブ
ロック」と、「単位のブロック」を含んで構成されてい
る図６の（ａ）に示す領域（マクロブロック）、すなわ
ち、図６の（ａ）に示す領域内の画像データにおける飛
越走査の奇数フィールドの画像データを組合わせて得た
前記した所定のブロックサイズを有する新たな単位のブ
ロック｛図６の（ｂ），（ｃ）｝の画像データと、前記
した領域内の画像データにおける飛越走査の偶数フィー
ルドの画像データを組合わせて得た前記した所定のブロ
ックサイズを有する新たな単位のブロック｛図６の
（ｄ），（ｅ）｝の画像データとの関係は、図６の各図
中に示されている横方向の数字列と縦方向の数字列との
対応関係によって明らかである。

【００３１】復号化の対象にされている変換符号化され
た画像データに付加されている復号時に必要とされる付
加情報［例えば、｛ブロック量子化幅情報→マクロブロ
ック量子化特性値（またはマクロブロックの量子化スケ
ール）ＱＳ}と、動きベクトル、予測モード情報、画像
構造（ピクチャストラクチャ）の情報、直交変換のモー
ド情報、等］は、復号器集積回路３中に設けられている
可変調復号部９で復号された後に、前記したそれぞれの
付加情報は復号器集積回路３中の各構成部分に供給され
て、各構成部分の動作の制御に用いられる。復号器集積
回路３中に設けられている可変調復号部９で復号された
付加情報の内で、画像構造（ピクチャストラクチャ）の
情報、直交変換のモード情報等の情報が、復号器集積回
路３から取出せるように復号器集積回路３が構成されて
いる場合には、図２に示す画像データの復号化装置のよ
うに、前記の復号器集積回路３における可変調復号部９
で復号された画像構造（ピクチャストラクチャ）の情報
と直交変換のモード情報とが、復号器集積回路３から外
部に取出されて制御信号発生部６に供給される。

【００３２】また、復号器集積回路３中に設けられてい
る可変調復号部９で復号された付加情報の内で、画像構
造（ピクチャストラクチャ）の情報、直交変換のモード
情報等の情報が、復号器集積回路３から取出せないよう
な状態に復号器集積回路３が構成されていた場合には、
図１に示す画像データの復号化装置のように、前記した
復号器集積回路３中に設けられている可変調復号部９と
同様な機能を有する画像構造情報と直交変換モード情報
との検出部５を設けて、入力端子１に供給された符号化
ビットストリームが、例えば先入れ先出しメモリ（ＦＩ
ＦＯ）を用いて構成されているバッファメモリ４を介し
て、前記の画像構造情報と直交変換モード情報との検出
部５に供給されるようにする。それで、図１に示す画像
データの復号化装置の場合には、前記の画像構造情報と
直交変換モード情報との検出部５から出力された画像構
造（ピクチャストラクチャ）の情報と直交変換のモード
情報とが、制御信号発生部６に供給される。

【００３３】前記のように、画像構造情報と直交変換モ
ード情報とが供給された図１及び図２に示す画像データ
の復号化装置における制御信号発生部６は、メモリ１５
と、制御部１６と、Ｆｉアドレス発生部１７と、Ｆｒア
ドレス発生部１８と、切換スイッチ１９とを備えてい
る。前記の制御信号発生部６に供給された画像構造情報
と直交変換モード情報とは、制御部１６に与えられると
ともにメモリ１５に格納される。また、前記の制御部１
６には画像アドレスも供給されている。制御部１６に供
給された画像構造の情報がフィールド構造Ｆｉであった
場合には、制御部１６では切換スイッチ１９の可動接点
ｖを固定接点ｉ側に切換えた状態にするような切換制御
信号を発生し、また、制御部１６に供給された画像構造
情報の情報がフレーム構造Ｆｒであった場合には、制御
部１６では切換スイッチ１９の可動接点ｖを固定接点ｉ
側に切換えた状態にするような切換制御信号を発生す
る。

【００３４】制御部１６に供給された画像構造の情報が
フィールド構造Ｆｉであって、制御部１６で発生された
切換制御信号によって切換スイッチ１９の可動接点ｖが
固定接点ｉ側に切換えられた状態において、制御信号発
生部６からは、制御部１６の制御の下にＦｉアドレス発
生部１７で発生されたＦｉアドレス信号が画像メモリ１
４に供給されて、画像メモリ１４から読出された復号画
像データが低域通過濾波器７に供給されると、低域通過
濾波器７ではそれに供給された復号画像データに対し、
図３中に例示されているような態様により、フイールド
構造Ｆｉの画像の縦方向についてのフィルタ処理を行な
って出力端子２に出力させる。

【００３５】図３は、低域通過濾波器７としてＦＩＲフ
ィルタのフィルタ長が３タップのデジタルフィルタが用
いられたとした場合におけるフイールド構造Ｆｉの画像
の縦方向についてのフィルタ処理の状態を説明するのに
用いられる図である。図３は１枚の画像の一部における
縦方向に連続している３個の領域（図中で第１の領域、
第２の領域、第３の領域）を示している。図３中で縦方
向に白丸→黒丸→白丸を付して指示してある画素データ
の組、例えば、［第１の領域における(横１，縦１ｏ）
の画素データと、(横１，縦３ｏ）の画素データと、
（横１，縦５ｏ）の画素データとの組］、［第１の領域
における（横１０，縦２ｅ）の画素データと、（横１
０，縦４ｅ）の画素データと、(横１０，縦６ｅ）の画
素データとの組］… …［第２の領域における(横１
３，縦１６ｅ）の画素データと、第３の領域における
（横１３，縦２ｅ）の画素データと、（横１３，縦４
ｅ）の画素データとの組］、［第３の領域における（横
１６，縦１ｏ）の画素データと、（横１６，縦３ｏ）の
画素データと、(横１３，縦５ｏ）の画素データとの
組］は、ＦＩＲフィルタのフィルタ長が３タップのデジ
タルフィルタにおける３個のフィルタ係数が乗ぜられる
画素データの組を示している。

【００３６】なお、前記した白丸→黒丸→白丸を付して
指示してある３個の画素データの組は、［第１の領域に
おける（横１，縦１ｏ）の画素データと、（横１，縦３
ｏ）の画素データと、（横１，縦５ｏ）の画素データと
の組］→［第１の領域における（横２，縦１ｏ）の画素
データと、(横２，縦３ｏ）の画素データと、(横２，縦
５ｏ）の画素データとの組］→［第１の領域における
（横３，縦１ｏ）の画素データと、（横３，縦３ｏ）の
画素データと、（横３，縦５ｏ）の画素データとの組］
→［第１の領域における（横４，縦１ｏ）の画素データ
と、（横４，縦３ｏ）の画素データと、（横４，縦５
ｏ）の画素データとの組］→のように、横方向に１画素
ずつずれる状態で移動して行き、横方向の最終の画素の
位置に迄達した後は、縦方向に１画素だけずれた状態の
横方向の最初の位置から、前述と同様に横方向に１画素
ずつずれる状態で移動して行き、横方向の最終の画素の
位置に迄達した後は、縦方向に１画素だけずれた状態の
横方向の最初の位置から、前述と同様な状態で移動して
行くのである。そして、図３中には説明に必要とされる
少数の部分の画素データの位置だけに、白丸→黒丸→白
丸を付した３個の画素データの組を指示してある。前記
のように３個の画素データの組の移動の態様や、一部だ
けにしか白丸→黒丸→白丸を付した３個の画素データの
組を指示していない点などについては図４についても同
様である。

【００３７】前述のように制御部１６に供給された画像
構造の情報がフィールド構造Ｆｉのもので、制御部１６
で発生された切換制御信号によって切換スイッチ１９の
可動接点ｖが固定接点ｉ側に切換えられた状態において
は、画像メモリ１４から読出された画素データに対して
図３に例示するような状態で画像の垂直方向にローパス
フィルタが掛けられて行くような状態の復号画像データ
が低域通過濾波器７に順次に供給されるようなＦｉアド
レスが、制御部１６の制御の下にＦｉアドレス発生部１
７で発生され、それが切換スイッチ１９の固定接点ｉと
可動接点ｖとを介して画像メモリ１４に与えられること
により、画像メモリ１４から読出された復号画像データ
が低域通過濾波器７に供給されると、低域通過濾波器７
において復号画像データに対して図３中に例示されてい
るような態様で、フイールド構造Ｆｉの画像の縦方向に
ついてのフィルタ処理が行なわれた状態で出力端子２に
出力される。

【００３８】前記のように切換スイッチ１９の可動接点
ｖが、固定接点ｉ側に切換えられる状態にされるのは、
復号された付加情報の内で、画像構造（ピクチャストラ
クチャ）がフィールド構造Ｆｉを示している前述の場合
と、直交変換のモード情報がフィールドＤＣＴの場合と
の他に、復号された付加情報がどうであっても、強制的
に切換スイッチ１９の可動接点ｖを、固定接点ｉ側に切
換えた状態にさせるように、制御部１６から切換スイッ
チ１９に切換制御信号が与えられるように、図示されて
いない操作部から制御部１９の動作を制御した場合があ
る。そして、前述のように復号された付加情報がどうで
あっても、常に画像構造（ピクチャストラクチャ）がフ
ィールド構造Ｆｉを示している場合と同様なローパスフ
ィルタ処理が復号画像データに施されるという簡易な手
段がとられた場合には、例えば大きな動きのある画像内
容の部分にフレーム構造と対応したフィルタ処理が行な
われた場合に、時間方向の解像度に低下を生じさせると
いう問題点を起こさせないで、量子化ノイズの低減化を
達成させることができるという利点が得られる。

【００３９】次に、制御部１６に供給された画像構造の
情報がフレーム構造Ｆｒであって、制御部１６で発生さ
れた切換制御信号によって切換スイッチ１９の可動接点
ｖが固定接点ｒ側に切換えられた状態において、制御信
号発生部６からは、制御部１６の制御の下にＦｒアドレ
ス発生部１８で発生されたＦｒアドレス信号が画像メモ
リ１４に供給されて、画像メモリ１４から読出された復
号画像データが低域通過濾波器７に供給されると、低域
通過濾波器７ではそれに供給された復号画像データに対
し、例えば図４中の第１の領域における縦方向の１ｏ〜
１５ｏの範囲に例示されているような態様で、フレーム
構造Ｆｒの画像の縦方向についてのフィルタ処理を行な
って出力端子２に出力させる。

【００４０】低域通過濾波器７としてＦＩＲフィルタの
フィルタ長が３タップのデジタルフィルタが用いられた
とした場合におけるフイールド構造Ｆｉの画像の縦方向
についてのフィルタ処理の状態は、例えば図４中の第１
の領域における縦方向の１ｏ〜１５ｏの範囲に例示され
ているとおりである。図４では１枚の画像の一部におけ
る縦方向に連続している３個の領域（図中で第１の領
域、第２の領域、第３の領域）を示しているが、図４に
おける第１の領域と第３の領域との双方の領域は第１の
直交変換モードの領域であり、また第２の領域は第２の
直交変換モードの領域であるとされている。

【００４１】図４中で縦方向に白丸→黒丸→白丸を付し
て指示してある画素データの組の内で、例えば、［第１
の領域における（横２，縦１ｏ）の画素データと、（横
２，縦３ｏ）の画素データと、（横２，縦３ｏ）の画素
データとの組］、［第１の領域における（横５，縦２
ｅ）の画素データと、（横５，縦３ｏ）の画素データ
と、（横５０，縦４ｅ）の画素データとの組］… …
［第１の領域における（横２，縦１２ｅ）の画素データ
と、（横２，縦１３ｏ）の画素データと、（横２，縦１
４ｅ）の画素データとの組］、［第１の領域における
（横４，縦１３ｏ）の画素データと、（横４，縦１４
ｅ）の画素データと、（横４，縦１５ｏ）の画素データ
との組］等は、ＦＩＲフィルタのフィルタ長が３タップ
のデジタルフィルタにおける３個のフィルタ係数が乗ぜ
られる画素データの組であり、前記の範囲についてはフ
レーム構造Ｆｒの画像データに適する形態で画像の縦方
向のローパスフィルタ処理が行なわれる。

【００４２】前述のように、図４では第１の領域と第３
の領域との双方の領域は第１の直交変換モードの領域で
あり、また第２の領域は第２の直交変換モードの領域で
あるとされていたが、このように画像の縦方向に並ぶ順
次の領域（マクロブロック）が、直交変換モードを異に
している領域が隣接する状態にされている場合には、そ
れぞれ図４に例示されているような態様でローパスフィ
ルタ処理が行なわれるのである。まず、図４中の第１の
領域と第２の領域との境界付近についてみると、第１の
直交変換モードである第１の領域の縦方向の１５ｏまで
の範囲で、垂直方向に連続して３個並ぶ状態の画素デー
タについて、フィルタ係数が乗じられるようにされてい
る。しかし、垂直方向に連続して３個並ぶ状態の画素デ
ータの最後のものが第１の領域と第２の領域との境界に
位置することになる第１の領域における縦方向の１４ｅ
から垂直方向に連続して３個並ぶ状態の画素データにつ
いては、図４中に例示してある［第１の領域における
（横６，縦１４ｅ）の画素データと、（横６，縦１６
ｅ）の画素データと、第２の領域における（横６，縦２
ｅ）の画素データとの組］のように変更されている。

【００４３】第１の直交変換モードの領域であるとされ
ている第１の領域と、第２の直交変換モードであるとさ
れている第２の領域との境界付近の画素データについて
は、本来、垂直方向に連続して３個並ぶ状態の画素デー
タに対してフィルタ係数が乗じられる筈の第１の直交変
換モードの領域とされている第１の領域内においても、
第２の領域に近い部分の画素データについては、垂直方
向に１つ置きに３個並ぶ状態の画素データに対してフィ
ルタ係数が乗じられるようにされる。また、図４中の第
２の領域と第３の領域との境界付近についてみると、第
２の直交変換モードである第２の領域中の画素データか
ら開始されて垂直方向に１つ置きに３個並ぶ状態の３個
の画素データの組は、第１の直交変換モードである第３
の領域の縦方向の４ｅまでの範囲に設定される。

【００４４】制御信号発生部６では、画像の縦方向に並
ぶ複数個の領域における直交変換モード情報を格納して
あるメモリ１５から読出された画像の縦方向に並ぶ順次
の領域の直交変換モード情報と、画素アドレス、画像構
造の情報等に基づいて発生されたＦｉアドレス、Ｆｒア
ドレスを、切換スイッチ１９によって選択的に画像メモ
リ１４に供給して、画像中に設定された各領域について
最適な垂直方向のローパスフィルタ処理を施すことがで
きるようにする。

【００４５】なお、前述した復号化された画像データ
に対して画像の垂直方向について施されるべきローパス
フィルタ処理は、各単位のブロックにおける垂直方向の
１つ置きの復号画素データを用いて行なわれる場合のロ
ーパスフィルタの遮断周波数は、復号化された画像デー
タに対して画像の垂直方向について施されるべきローパ
スフィルタ処理が、各単位のブロックにおける垂直方向
に連続する復号画素データを用いて行なわれる場合のロ
ーパスフィルタの遮断周波数よりも高く設定されるよう
にした方がよく、また復号化された画像データに対して
画像の垂直方向について施されるべきローパスフィルタ
処理は、各単位のブロックにおける垂直方向の１つ置き
の復号画素データを用いて行なわれる場合のローパスフ
ィルタの遮断特性曲線の傾斜の方が、復号化された画像
データに対して画像の垂直方向について施されるべきロ
ーパスフィルタ処理が、各単位のブロックにおける垂直
方向に連続する復号画素データを用いて行なわれる場合
のローパスフィルタの遮断特性曲線の傾斜よりも緩く設
定されるようにした方がよい。

【００４６】

【発明の効果】以上、詳細に記載したところから明らか
なように、本発明はフレームを符号化の単位とするフレ
ーム構造の画像と、フィールドを符号化の単位とするフ
ィールド構造の画像との一方または双方による高能率符
号化の対象にされている各１枚毎の画面の画像信号につ
いて、所定のブロックサイズ（Ｎ×Ｍ画素←横Ｎ画素×
縦Ｍラインのブロックサイズ）を有する「単位のブロッ
ク」毎に、直交変換して得た（Ｎ×Ｍ）個の直交変換係
数が、少なくとも前記した単位のブロックの１個を含む
予め定められた大きさの領域毎に設定されている「ブロ
ック量子化幅値」によって量子化された後に、所定の符
号化が施されてなる変換符号化された画像データと、前
記の変換符号化された画像データの復号時に必要とされ
る付加情報とによるビットストリーム中に含まれていた
付加情報の内から検出された画像構造（ピクチャ・スト
ラクチャ）情報（画像構造がフレーム構造かフィールド
構造かの区別を示す情報）と直交変換モード情報や画素
アドレス等が供給される制御信号発生部から、画像の垂
直方向について画像データに施すべきローパスフィルタ
処理が、装置に設定された動作モードに応じて低域通過
濾波器（ローパスフィルタ）で行なわれた状態の復号画
像データを出力端子２に出力させるようにするために必
要なアドレス信号を画像メモリに供給し、装置に設定さ
れる動作モードの１つにおいては、第１の直交変換モー
ドによって直交変換が行なわれていた領域の復号画像デ
ータについて、画像の垂直方向について施すべきローパ
スフィルタ処理と、前記した第２の直交変換モードによ
って直交変換が行なわれていた領域の復号画像データに
ついて、画像の垂直方向について施すべきローパスフィ
ルタ処理との双方のローパスフィルタ処理が、飛越走査
方式による画像のフィールドの画像データに対するロー
パスフィルタ処理として行なせるようにしたり、第１の
直交変換モードによって直交変換が行なわれていた単位
のブロックと対応する復号画像データについては、画像
の垂直方向についてのローパスフィルタ処理のために選
択された復号画像データが、単位のブロックの境界を挟
んで存在していない状態において、前記の復号化された
画像データに対して画像の垂直方向について施されるべ
きローパスフィルタ処理が、単位のブロックにおける垂
直方向に連続する復号画素データを用いて行なわれるよ
うにしたり、第２の直交変換モードによって直交変換が
行なわれていた単位のブロックと対応する復号画像デー
タについては、画像の垂直方向についてのローパスフィ
ルタ処理のために選択された復号画像データが、単位の
ブロックの境界を挟んで存在していない状態において、
前記の復号化された画像データに対して画像の垂直方向
について施されるべきローパスフィルタ処理は、単位の
ブロックにおける垂直方向の１つ置きの復号画素データ
を用いて行なわれ、さらに画像の垂直方向についてのロ
ーパスフィルタ処理のために選択された復号画像データ
が、単位のブロックの境界を挟んで隣り合う２つの単位
のブロックに存在している状態においては、前記の境界
を挟んで隣り合う２つの単位のブロックの双方が、第１
の直交変換モードによって直交変換が行なわれていた単
位のブロックと対応する復号画像データによる単位のブ
ロックの場合には、前記の復号化された画像データに対
して画像の垂直方向について施されるべきローパスフィ
ルタ処理が、各単位のブロックにおける垂直方向に連続
する復号画素データを用いて行なわれるようにしたり、
さらにまた、画像の垂直方向についてのローパスフィル
タ処理のために選択された復号画像データが、単位のブ
ロックの境界を挟んで隣り合う２つの単位のブロックに
存在している状態においては、前記の境界を挟んで隣り
合う２つの単位のブロックの内の少なくとも一方が、第
２の直交変換モードによって直交変換が行なわれていた
単位のブロックと対応する復号画像データによる単位の
ブロックの場合には、前記の復号化された画像データに
対して画像の垂直方向について施されるべきローパスフ
ィルタ処理が、各単位のブロックにおける垂直方向の１
つ置きの復号画素データを用いて画像データに対するロ
ーパスフィルタ処理が行なわれるようにしたりすること
により、飛越走査方式による画像の復号時に発生するブ
ロック歪やモスキートノイズ等の量子化ノイズを良好に
軽減させることができたのであり、本発明によれば既述
した問題点を容易に解決できる。

【図面の簡単な説明】

【図１】本発明の変換符号化された画像データの復号化
時に生じる量子化ノイズの低減方法を適用して変換符号
化された画像データの復号化装置の構成例を示すブロッ
ク図である。

【図２】本発明の変換符号化された画像データの復号化
時に生じる量子化ノイズの低減方法を適用して変換符号
化された画像データの復号化装置の構成例を示すブロッ
ク図である。

【図３】ローパスフィルタの動作説明用の図である。

【図４】ローパスフィルタの動作説明用の図である。

【図５】画素のブロックの説明用の図である。

【図６】画素のブロックの説明用の図である。

【符号の説明】

１…復号化の対象にされる符号化ビットストリーム(符
号化済みのデータ列）)の入力端子、２…出力端子、３
…復号器集積回路として集積回路化されている構成部
分、６…制御信号発生部、７…低域通過濾波器、８…バ
ッファメモリ、９…可変長復号化部、１０…逆量子化
部、１１…逆直交変換部、１２…加算部、１３…逆動き
補償部、１４…画像メモリ、１５…メモリ、１６…制御
部、１７…Ｆｉアドレス発生部、１８…Ｆｒアドレス発
生部、１９…切換スイッチ、

Claims

(57)【特許請求の範囲】

【請求項１】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データを復号化する際に生じる量子化ノイズ
の低減方法であって、前記した第１の直交変換モードに
よって直交変換が行なわれていた領域の復号画像データ
について、画像の垂直方向について施すべきローパスフ
ィルタ処理と、前記した第２の直交変換モードによって
直交変換が行なわれていた領域の復号画像データについ
て、画像の垂直方向について施すべきローパスフィルタ
処理との双方のローパスフィルタ処理として、飛越走査
方式による画像のフィールドの画像データに対するロー
パスフィルタ処理を適用するようにした変換符号化され
た画像データの復号化時に生じる量子化ノイズの低減方
法。
【請求項２】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データの復号化のために、少なくともバッフ
ァメモリと、可変長復号化部と、逆量子化部と、逆直交
変換部と、画像メモリとを含んで構成されている変換符
号化された画像データの復号化装置であって、変換符号
化された画像データから、少なくとも前記した単位のブ
ロックの１個を含む予め定められた大きさの領域毎に、
前記したそれぞれの領域内の画像データについて実施さ
れる直交変換が、前記した単位のブロック毎の画像デー
タについて行なわれる第１の直交変換モードと、前記し
た領域内の画像データにおける飛越走査の奇数フィール
ドの画像データを組合わせて得た前記した所定のブロッ
クサイズを有する新たな単位のブロックの画像データ
と、前記した領域内の画像データにおける飛越走査の偶
数フィールドの画像データを組合わせて得た前記した所
定のブロックサイズを有する新たな単位のブロックの画
像データとについて直交変換が行なわれる第２の直交変
換モードとの何れかの直交変換モードに従って行なわれ
ているのかの直交変換モード情報及び画像構造情報を検
出する画像構造情報及び直交変換モード情報検出手段
と、画像メモリから読出された復号画像データを通過さ
せるローパスフィルタと、前記した画像構造情報及び直
交変換モード情報検出手段の検出々力によって、前記の
ローパスフィルタが常に飛越走査方式による画像のフィ
ールドの画像データに対するローパスフィルタ処理を行
なうようにさせる手段とを備えてなる変換符号化された
画像データの復号化装置。
【請求項３】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データの復号化のために、少なくともバッフ
ァメモリと、可変長復号化部と、逆量子化部と、逆直交
変換部と、画像メモリとを含んで構成されている変換符
号化された画像データの復号化装置であって、画像メモ
リから読出された復号画像データを通過させるローパス
フィルタと、前記した可変長復号化部で検出された画像
構造情報及び直交変換モード情報に基づいて、画像メモ
リから読出された復号画像データを通過させるローパス
フィルタが常に飛越走査方式による画像のフィールドの
画像データに対するローパスフィルタ処理を行なうよう
にさせる手段とを備えてなる変換符号化された画像デー
タの復号化装置。
【請求項４】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データを復号化する際に生じる量子化ノイズ
の低減方法であって、復号化された画像データに対して
画像の垂直方向について施されるローパスフィルタ処理
に関して、第１の直交変換モードによって直交変換が行
なわれていた単位のブロックと対応する復号画像データ
について、画像の垂直方向についてのローパスフィルタ
処理のために選択された復号画像データが、単位のブロ
ックの境界を挟んで存在していない状態において、前記
の復号化された画像データに対して画像の垂直方向につ
いて施されるべきローパスフィルタ処理は、単位のブロ
ックにおける垂直方向に連続する復号画素データを用い
て行なわれ、また、第２の直交変換モードによって直交
変換が行なわれていた単位のブロックと対応する復号画
像データについて、画像の垂直方向についてのローパス
フィルタ処理のために選択された復号画像データが、単
位のブロックの境界を挟んで存在していない状態におい
て、前記の復号化された画像データに対して画像の垂直
方向について施されるべきローパスフィルタ処理は、単
位のブロックにおける垂直方向の１つ置きの復号画素デ
ータを用いて行なわれ、さらに画像の垂直方向について
のローパスフィルタ処理のために選択された復号画像デ
ータが、単位のブロックの境界を挟んで隣り合う２つの
単位のブロックに存在している状態において、前記の境
界を挟んで隣り合う２つの単位のブロックの双方が、第
１の直交変換モードによって直交変換が行なわれていた
単位のブロックと対応する復号画像データによる単位の
ブロックの場合には、前記の復号化された画像データに
対して画像の垂直方向について施されるべきローパスフ
ィルタ処理が、各単位のブロックにおける垂直方向に連
続する復号画素データを用いて行なわれ、さらにまた、
画像の垂直方向についてのローパスフィルタ処理のため
に選択された復号画像データが、単位のブロックの境界
を挟んで隣り合う２つの単位のブロックに存在している
状態において、前記の境界を挟んで隣り合う２つの単位
のブロックの内の少なくとも一方が、第２の直交変換モ
ードによって直交変換が行なわれていた単位のブロック
と対応する復号画像データによる単位のブロックの場合
には、前記の復号化された画像データに対して画像の垂
直方向について施されるべきローパスフィルタ処理が、
各単位のブロックにおける垂直方向の１つ置きの復号画
素データを用いて行なわれるようにした変換符号化され
た画像データの復号化時に生じる量子化ノイズの低減方
法。
【請求項５】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データの復号化のために、少なくともバッフ
ァメモリと、可変長復号化部と、逆量子化部と、逆直交
変換部と、画像メモリとを含んで構成されている変換符
号化された画像データの復号化装置であって、変換符号
化された画像データから、少なくとも前記した単位のブ
ロックの１個を含む予め定められた大きさの領域毎に、
前記したそれぞれの領域内の画像データについて実施さ
れる直交変換が、前記した単位のブロック毎の画像デー
タについて行なわれる第１の直交変換モードと、前記し
た領域内の画像データにおける飛越走査の奇数フィール
ドの画像データを組合わせて得た前記した所定のブロッ
クサイズを有する新たな単位のブロックの画像データ
と、前記した領域内の画像データにおける飛越走査の偶
数フィールドの画像データを組合わせて得た前記した所
定のブロックサイズを有する新たな単位のブロックの画
像データとについて直交変換が行なわれる第２の直交変
換モードとの何れかの直交変換モードに従って行なわれ
ているのかの直交変換モード情報及び画像構造情報を検
出する画像構造情報及び直交変換モード情報検出手段
と、画像メモリから読出された復号画像データを通過さ
せるローパスフィルタと、前記した画像構造情報及び直
交変換モード情報検出手段の検出々力に基づき、第１の
直交変換モードによって直交変換が行なわれていた単位
のブロックと対応する復号画像データについては、画像
の垂直方向についてのローパスフィルタ処理のために選
択された復号画像データが、単位のブロックの境界を挟
んで存在していない状態において、前記の復号化された
画像データに対して画像の垂直方向について施されるべ
きローパスフィルタ処理は、単位のブロックにおける垂
直方向に連続する復号画素データを用いて行なわれるよ
うに、また、第２の直交変換モードによって直交変換が
行なわれていた単位のブロックと対応する復号画像デー
タについては、画像の垂直方向についてのローパスフィ
ルタ処理のために選択された復号画像データが、単位の
ブロックの境界を挟んで存在していない状態において、
前記の復号化された画像データに対して画像の垂直方向
について施されるべきローパスフィルタ処理は、単位の
ブロックにおける垂直方向の１つ置きの復号画素データ
を用いて行なわれるように、さらに画像の垂直方向につ
いてのローパスフィルタ処理のために選択された復号画
像データが、単位のブロックの境界を挟んで隣り合う２
つの単位のブロックに存在している状態においては、前
記の境界を挟んで隣り合う２つの単位のブロックの双方
が、第１の直交変換モードによって直交変換が行なわれ
ていた単位のブロックと対応する復号画像データによる
単位のブロックの場合には、前記の復号化された画像デ
ータに対して画像の垂直方向について施されるべきロー
パスフィルタ処理が、各単位のブロックにおける垂直方
向に連続する復号画素データを用いて行なわれるよう
に、さらにまた、画像の垂直方向についてのローパスフ
ィルタ処理のために選択された復号画像データが、単位
のブロックの境界を挟んで隣り合う２つの単位のブロッ
クに存在している状態においては、前記の境界を挟んで
隣り合う２つの単位のブロックの内の少なくとも一方
が、第２の直交変換モードによって直交変換が行なわれ
ていた単位のブロックと対応する復号画像データによる
単位のブロックの場合には、前記の復号化された画像デ
ータに対して画像の垂直方向について施されるべきロー
パスフィルタ処理が、各単位のブロックにおける垂直方
向の１つ置きの復号画素データを用いて行なわれるよう
にローパスフィルタを動作させる手段とを備えてなる変
換符号化された画像データの復号化装置。
【請求項６】フレームを符号化の単位とするフレーム
構造の画像と、フィールドを符号化の単位とするフィー
ルド構造の画像との一方または双方による変換符号化の
対象にされている画像データが、所定のブロックサイズ
を有する単位のブロック毎に分割されており、また、少
なくとも前記した単位のブロックの１個を含む予め定め
られた大きさの領域毎に、前記したそれぞれの領域内の
画像データについて実施される直交変換は、フレーム構
造の画像については、前記した単位のブロック毎の画像
データについて行なわれる第１の直交変換モードと、前
記した領域内の画像データにおける飛越走査の奇数フィ
ールドの画像データを組合わせて得た前記した所定のブ
ロックサイズを有する新たな単位のブロックの画像デー
タと、前記した領域内の画像データにおける飛越走査の
偶数フィールドの画像データを組合わせて得た前記した
所定のブロックサイズを有する新たな単位のブロックの
画像データとについて直交変換が行なわれる第２の直交
変換モードとの何れかの直交変換モードに従って行なわ
れるのに対し、フィールド構造の画像については前記し
た第２の直交変換モードによって行なわれるようにされ
ており、前記の直交変換が行なわれた後に、前記の領域
毎に個別に設定されているブロック量子化幅値を用いて
量子化されるとともに、所定の符号化により変換符号化
された画像データの復号化のために、少なくともバッフ
ァメモリと、可変長復号化部と、逆量子化部と、逆直交
変換部と、画像メモリとを含んで構成されている変換符
号化された画像データの復号化装置であって、画像メモ
リから読出された復号画像データを通過させるローパス
フィルタと、前記した可変長復号化部で検出された画像
構造情報及び直交変換モード情報に基づいて、第１の直
交変換モードによって直交変換が行なわれていた単位の
ブロックと対応する復号画像データについては、画像の
垂直方向についてのローパスフィルタ処理のために選択
された復号画像データが、単位のブロックの境界を挟ん
で存在していない状態において、前記の復号化された画
像データに対して画像の垂直方向について施されるべき
ローパスフィルタ処理は、単位のブロックにおける垂直
方向に連続する復号画素データを用いて行なわれるよう
に、また、第２の直交変換モードによって直交変換が行
なわれていた単位のブロックと対応する復号画像データ
については、画像の垂直方向についてのローパスフィル
タ処理のために選択された復号画像データが、単位のブ
ロックの境界を挟んで存在していない状態において、前
記の復号化された画像データに対して画像の垂直方向に
ついて施されるべきローパスフィルタ処理は、単位のブ
ロックにおける垂直方向の１つ置きの復号画素データを
用いて行なわれるように、さらに画像の垂直方向につい
てのローパスフィルタ処理のために選択された復号画像
データが、単位のブロックの境界を挟んで隣り合う２つ
の単位のブロックに存在している状態においては、前記
の境界を挟んで隣り合う２つの単位のブロックの双方
が、第１の直交変換モードによって直交変換が行なわれ
ていた単位のブロックと対応する復号画像データによる
単位のブロックの場合には、前記の復号化された画像デ
ータに対して画像の垂直方向について施されるべきロー
パスフィルタ処理が、各単位のブロックにおける垂直方
向に連続する復号画素データを用いて行なわれるよう
に、さらにまた、画像の垂直方向についてのローパスフ
ィルタ処理のために選択された復号画像データが、単位
のブロックの境界を挟んで隣り合う２つの単位のブロッ
クに存在している状態においては、前記の境界を挟んで
隣り合う２つの単位のブロックの内の少なくとも一方
が、第２の直交変換モードによって直交変換が行なわれ
ていた単位のブロックと対応する復号画像データによる
単位のブロックの場合には、前記の復号化された画像デ
ータに対して画像の垂直方向について施されるべきロー
パスフィルタ処理が、各単位のブロックにおける垂直方
向の１つ置きの復号画素データを用いて行なわれるよう
にローパスフィルタを動作させる手段とを備えてなる変
換符号化された画像データの復号化装置。
【請求項７】復号化された画像データに対して画像の
垂直方向について施されるべきローパスフィルタ処理
が、各単位のブロックにおける垂直方向の１つ置きの復
号画素データを用いて行なわれる場合のローパスフィル
タの遮断周波数の方が、復号化された画像データに対し
て画像の垂直方向について施されるべきローパスフィル
タ処理が、各単位のブロックにおける垂直方向に連続す
る復号画素データを用いて行なわれる場合のローパスフ
ィルタの遮断周波数よりも高く設定されるようにした請
求項５または請求項６の変換符号化された画像データの
復号化装置。
【請求項８】復号化された画像データに対して画像の
垂直方向について施されるべきローパスフィルタ処理
が、各単位のブロックにおける垂直方向の１つ置きの復
号画素データを用いて行なわれる場合のローパスフィル
タの遮断特性曲線の傾斜の方が、復号化された画像デー
タに対して画像の垂直方向について施されるべきローパ
スフィルタ処理が、各単位のブロックにおける垂直方向
に連続する復号画素データを用いて行なわれる場合のロ
ーパスフィルタの遮断特性曲線の傾斜よりも緩く設定さ
れるようにした請求項５乃至は請求項７の変換符号化さ
れた画像データの復号化装置。