JP2003116137A - フレーム間符号化処理装置及びフレーム間符号化処理方法 - Google Patents

Abstract

(57)【要約】 【課題】 入力画像信号と動き補償予測信号の差が大き
い場合には、量子化ステップサイズを大きくし、一方、
差が小さい場合には、量子化ステップサイズを小さくす
ることにより、符号化誤差の少ない複合化画像を生成す
る。 【解決手段】 入力画像信号１２と、フレームメモリ１
からの動き補償予測信号１４との差異情報２５を、符号
化部４へ出力するフィルタ制御部２１を設け、符号化部
４は、入力画像信号のフレーム間の符号化をする場合
に、入力画像信号１２と差異情報２５に基づいて符号化
を行う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、画像信号を符号
化する画像符号化装置に関するものである。特に、入力
信号のフレームとフレームの差分信号に基づいて符号化
を行なうフレーム間符号化処理方式に関するものであ
る。

【０００２】

【従来の技術】画像信号を高能率に符号化しようとする
場合、画像信号に含まれる冗長成分を取り除くための手
段がとられる。特に動画像を符号化する代表的な手法と
してはすでに符号化された画像と新たに符号化する画像
との差分をとり、差分情報のみを符号化するいわゆるフ
レーム間符号化方式が良く知られている。

【０００３】図４０は、例えば特開昭６３−２０８３８
２号公報に示されたフレーム間符号化装置に関するブロ
ック図であり、図において１は前フレームの画像情報を
蓄積するフレームメモリ、２は動きベクトル検出部、３
は減算器、４は符号化部、５は局部復号化部、６は加算
器、７はフィルタ、８はフィルタ制御部である。

【０００４】次に動作について説明する。フレームメモ
リ１に蓄積されている１フレーム前の画像信号１１と、
入力画像信号１２とは動きベクトル検出部２においてブ
ロックマッチングをとり、比較されて動き量とその方向
を示す動きベクトル１３を発生する。フレームメモリ１
は動きベクトル１３に応じて動き補償予測信号１４を生
じる。減算器３は入力画像信号１２から動き補償予測信
号１４を減算して予測誤差信号（差分信号ともいう）１
５を発生する。

【０００５】符号化部４は予測誤差信号１５を量子化し
て符号化された誤差情報１６を発生する。局部復号化部
５は符号化された誤差情報１６を復号し、局部復号誤差
信号１７を出力する。加算器６は動き補償予測信号１４
と局部復号誤差信号１７を加算して局部復号信号１８を
発生する。フィルタ７は局部復号信号１８における高域
成分を除去し、平滑化された局部復号信号１９を発生す
る。フィルタ制御部８は、動きベクトル１３の大きさに
応じてフィルタ７の挿入又は非挿入を制御する制御信号
２０を出力する。このようにして発生した符号化された
誤差信号１６と、動きベクトル１３とは伝送路を経て送
出される。又、一般的にこれらの処理は画像信号に対し
て１６×１６画素単位や８×８画素単位毎に行われる。

【０００６】前述の従来例においては加算器６の後段に
フィルタ７を設けているが、フレームメモリ１の後段に
設ける方法も知られている。又、動き検出の精度を高め
るため整数画素単位以下で探索を行う方法やブロック単
位に閉じたフィルタ処理を行う方法、周辺画素も含めて
フィルタ処理を行う方法がある。これらいずれの方式に
おいても、動き量に応じて高周波成分を抑圧することに
より、ノイズを除去し符号化効率の向上を図っている。

【０００７】また、従来の装置でフレーム内符号化を行
う場合、入力画像信号１２をそのまま符号化部４で量子
化して符号化された入力情報１６を発生する。局部復号
化部５は符号化された入力情報１６を復号し、局部復号
誤差信号１７をフレームメモリ１へ出力する。このよう
にして発生した符号化された入力情報１６は伝送路を経
て送出される。

【０００８】

【発明が解決しようとする課題】従来のフレーム間符号
化処理方式においては動きベクトルの情報を利用して制
御を行うことにより、図４１に示すように、静領域にお
いてはローパスフィルタ（ＬＰＦ）をＯＦＦにして解像
度を損なうことなく、動領域においてはローパスフィル
タを挿入して、解像度は落ちるが、雑音を除去すること
を行っていた。

【０００９】図４１は、信号の輝度強度（Ｉ）と信号の
周波数（ｆ）の関係を示す図であり、１４ａはローパス
フィルタをＯＦＦした場合のフレームメモリ１からの信
号を示し、１４ｂはローパスフィルタをＯＮした場合の
フレームメモリ１からの信号を示している。

【００１０】図に示すように、ローパスフィルタがＯＦ
Ｆされる場合は、静領域において、高解像度を保つ場合
である。逆に、ローパスフィルタをＯＮする場合は動領
域において、低解像度にする場合である。このように、
ローパスフィルタをＯＦＦからＯＮにすることにより、
図４１の斜線で示す高域成分を除去することが可能にな
る。

【００１１】図４２は、入力信号１２とフレームメモリ
からの動き補償予測信号１４ａの差分信号１５が非常に
小さい場合を示している。即ち、図４２（ａ）に示すよ
うな入力信号１２に対して、図４２（ｂ）に示すように
非常に動き検出精度が良く、動き補償予測信号１４ａが
ほぼ同様な特性を示す場合には、図４２（ｃ）に示すよ
うに、その差分信号１５は非常に小さくなる。従って、
符号化部４が符号化する情報量が減少し、符号化効率が
向上する。

【００１２】しかし、動領域における動き検出精度が良
く、入力信号とフレームメモリからの動き補償予測信号
の差分が非常に小さいにもかかわらずフィルタ処理がな
される場合がある。

【００１３】前述した図４１に示すように動領域におい
て、ローパスフィルタがＯＮされてしまう場合は、動き
補償予測信号１４の高周波成分がカットされてしまう。
この場合は、フィルタ処理した結果と入力信号との差分
信号に高周波成分が残存し、符号化すべき情報が増加し
て符号化効率が低下する上、その部分の解像度が低下す
る。

【００１４】図４３は、この問題点を説明するための図
であり、図４３（ａ）は、図４２（ａ）に示した入力信
号と同様のものである。又、図４３（ｂ）において１４
ｂはローパスフィルタが動領域においてＯＮになり、高
周波成分がカットされてしまった特性を示している。即
ち、図４２（ｂ）の動き補償予測信号１４ａに比べて、
高周波成分（雑音）がカットされ、１４ｂに示すような
動き補償予測信号が出力されることを示している。又、
図４３（ｃ）においては、前述した図４３（ａ）に示し
た入力信号と図４３（ｂ）に示した動き補償予測信号１
４ｂの差分信号１５が示されている。図で分かるよう
に、高周波成分が残存するため、符号化部４は符号化す
べき情報が増加し、符号化効率が低下する。

【００１５】以上述べたように、動領域において、図４
２に示すように動き検出が精度良く働きフィルタ処理す
る必要が無いにもかかわらず、図４３に示すようにフィ
ルタ処理がなされてしまうために、その部分の解像度が
低下したり、あるいは符号化すべき情報量が増加してし
まう等の問題点があった。

【００１６】また、符号化部４は予測誤差信号１５を量
子化して符号化しているが、符号化部４が入力して符号
化する信号は一種類の予測誤差信号に限られており、こ
の予測誤差信号が符号化効率のよくない特性を示す場合
であっても、この予測誤差信号を量子化して符号化する
ため、必ずしも符号化効率のよい信号を得られるとは限
らない等の問題点があった。

【００１７】この発明は、上記のような問題点を解決す
るためになされたもので、符号化すべき信号に高周波成
分が残存せず、符号化効率が向上するフレーム間符号化
処理方式を得ることを目的とする。

【００１８】また、この発明は上記のような問題点を解
決するためになされたもので、符号化すべき信号が符号
化効率のよい信号であり、符号化効率が向上する符号化
制御方式を得ることを目的とする。

【００１９】

【課題を解決するための手段】第１の発明に係わるフレ
ーム間符号化処理方式は、入力信号を入力として、入力
信号に高周波成分が多く含まれる特性を有するか否かを
判定し、入力信号に高周波成分が多く含まれる特性を有
すると判定した場合には、フィルタの強度を弱めるよう
にフィルタ係数を指定する制御信号を出力する。

【００２０】第２の発明に係わるフレーム間符号化処理
方式は、入力信号に高周波成分が多く含まれる特性を有
するか否かを判定する場合に、入力信号のアクティビテ
ィを用いて、判定する。

【００２１】第３の発明に係わるフレーム間符号化処理
方式は、入力信号のアクティビティとして、入力信号の
最大値と最小値の差あるいは信号平均値からの差分絶対
値和あるいは差分自乗和を用いる。

【００２２】第４の発明に係わるフレーム間符号化処理
方式は、更にフレームメモリからの信号を入力として、
入力信号に高周波成分が多く含まれる特性を有するか否
かを判定する場合に、入力信号のアクティビティを、入
力信号とフレームメモリからの信号との差に相当する情
報を正規化することに用いる。

【００２３】第５の発明に係わるフレーム間符号化処理
方式は、入力信号に高周波成分が多く含まれる特性を有
するか否かを判定する場合に、入力信号のアクティビテ
ィを、所定の閾値と比較して、判定する。

【００２４】第６の発明に係わるフレーム間符号化処理
方式は、入力信号に高周波成分が多く含まれる特性を有
するか否かを判定する場合に、入力信号のアクティビテ
ィを、入力信号とフレームメモリからの信号との差に相
当する情報を正規化することに用いて、正規化した結果
を所定の閾値と比較して、判定する。

【００２５】第７の発明に係わるフレーム間符号化処理
方式は、前記フィルタ制御部からは２値あるいは多値の
前記適応フィルタ部のフィルタ係数値を適応的に変化さ
せるフィルタ制御信号を発生させる。

【００２６】第８の発明に係わるフレーム間符号化処理
方式は、前記適応フィルタ部は空間方向に１次元あるい
は２次元さらに時間方向を加えた３次元の特性をもつ。

【００２７】第９の発明に係わるフレーム間符号化処理
方式は、前記適応フィルタ部を前記フレームメモリから
の信号に対してフィルタ処理を行うよう設ける。あるい
は前記適応フィルタ部を前記フレームメモリに書き込ま
れる局部復号信号に対してフィルタ処理を行うよう設け
る。

【００２８】第１０の発明に係わるフレーム間符号化処
理方式は、入力信号と前記フレームメモリからの信号を
入力として、入力信号とフレームメモリからの信号との
差に相当する情報を、符号化部へ出力する制御部を設
け、符号化部は、入力信号のフレーム間の符号化をする
場合に、入力信号とフレームメモリからの信号との差に
相当する情報を用いる。

【００２９】第１１の発明に係わるフレーム間符号化処
理方式は、制御部における差に相当する情報の画素当り
の値より小さな符号化誤差で符号化を行なう符号化部を
設ける。

【００３０】第１２の発明に係わるフレーム間符号化処
理方式は、復号化ループにフィルタを設け、制御部は、
さらに、前記差に相当する情報に基づいて、フィルタの
制御信号を出力する。

【００３１】第１３の発明に係わるフレーム間符号化処
理方式は、制御部において入力信号又はフレームメモリ
からの信号の信号アクティビティを求め、信号アクティ
ビティにより符号化誤差が制御される符号化部を設け
る。

【００３２】第１４の発明に係わるフレーム間符号化処
理方式は、入力信号を入力として、入力信号に高周波成
分が多く含まれる特性を有するか否かを判定する工程
と、前記入力信号に高周波成分が多く含まれる特性を有
すると判定した場合には、フィルタの強度を弱めるよう
にフィルタ係数を指定する制御信号を出力する工程と、
上記フィルタ係数に基づいて、フィルタリング処理を行
なう工程を有する。

【００３３】第１５の発明に係わるフレーム間符号化処
理方式は、入力信号を入力として、入力信号に高周波成
分が多く含まれる特性を有するか否かを判定する工程
で、入力信号のアクティビティを用いて、判定する。

【００３４】第１６の発明に係わるフレーム間符号化処
理方法は、入力信号とフレームメモリからの信号を入力
し、その差に相当する情報を求める工程と、差に相当す
る情報に基づいて、符号化部の量子化ステップサイズを
変更する工程と、変更された量子化ステップサイズに基
づき、符号化を行なう工程を有する。

【００３５】第１７の発明に係わるフレーム間符号化処
理方法は、入力信号又はフレームメモリからの信号を入
力し、アクティビティ信号等の、絶対的な強さではな
く、相対的な特徴信号を求める工程と、この特徴信号に
基づいて、符号化部の量子化ステップサイズを変更する
工程と、変更された量子化ステップサイズに基づき、符
号化を行なう工程を有する。

【００３６】第１８の発明に係わる符号化制御方式は、
入力画像信号またはフレームメモリからの信号のアクテ
ィビティに基づいて符号化部へ符号化制御信号を出力す
る符号化制御部を設ける。

【００３７】第１９の発明に係わる符号化制御方式は、
フレーム間信号のアクティビティとフレーム内信号のア
クティビティとを比較し、例えば、何れか小さいアクテ
ィビティを持つ信号のアクティビティに基づいて前記符
号化部の符号化を制御する。

【００３８】第２０の発明に係わる符号化制御方式は、
前記フレーム間信号のアクティビティと前記フレーム内
信号のアクティビティとの比較を行う際に、少なくとも
何れか一方のアクティビティに重み付けを行って比較を
行う。

【００３９】第２１の発明に係わる符号化制御方式は、
フィルタ処理を行なうフィルタと、入力画像信号と前記
フレームメモリからの信号を入力として前記フィルタの
制御信号を出力するフィルタ制御部とをさらに設ける。

【００４０】第２２の発明に係わる符号化制御方式は、
前記フィルタ処理を施した予測誤差信号のアクティビテ
ィとフィルタ処理を行わなかった場合の予測誤差信号の
アクティビティとフレーム内予測による入力信号のアク
ティビティとの３者から少なくとも２者を比較し、例え
ば、何れか小さいアクティビティを持つ信号のアクティ
ビティに基づいて前記符号化部の符号化を制御する。

【００４１】第２３の発明に係わる符号化制御方式は、
前記フィルタ処理を施した予測誤差信号のアクティビテ
ィとフィルタ処理を行わなかった場合の予測誤差信号の
アクティビティとフレーム内予測による入力信号のアク
ティビティとの比較を行う際に、少なくとも何れか一つ
のアクティビティに重み付けを行い、前記３つのうち少
なくとも２つ以上のアクティビティに対して比較を行
う。

【００４２】第２４の発明に係わる符号化制御方式は、
予め前記フィルタ制御部からフィルタ処理制御を施され
た予測誤差信号のアクティビティとフレーム内信号のア
クティビティとを比較し、いずれか最も小さいアクティ
ビティを持つ信号のアクティビティに基づいて前記符号
化部の符号化を制御する。

【００４３】第２５の発明に係わる符号化制御方式は、
予め前記フィルタ制御部からフィルタ処理制御を施され
た予測誤差信号のアクティビティとフレーム内信号のア
クティビティとの比較を行う際に、少なくともいずれか
一つのアクティビティに重み付を行って比較を行う。

【００４４】第２６の発明に係わる符号化制御方式は、
入力画像信号又は前記画像メモリからの信号のアクティ
ビティに基づいて符号部へ符号化制御信号を出力する
か、あるいは前記符号化部より出力される符号化データ
に基づいてフィードバック制御を行うために符号化部へ
符号化制御信号を出力する符号化制御部を設ける。

【００４５】第２７の発明に係わる符号化制御方式は、
アクティビティとして、信号に基づく特徴として、信号
の最大値と最小値の差あるいは信号平均値からの差分絶
対値和あるいは差分自乗和を用いるものである。

【００４６】

【作用】第１〜第９の発明におけるフレーム間符号化処
理方式及び第１４〜第１５の発明におけるフレーム間符
号化処理方法は、フィルタ制御部において入力信号とフ
レームメモリからの信号の差分情報を入力信号又はフレ
ームメモリからの信号により正規化し正規化結果の大小
により、あるいは、差分情報や入力信号の特徴と閾値を
比較し比較結果により、高域成分をカットするフィルタ
強度を変化させる。このようにして、常に符号化すべき
信号に高周波成分が残存せず符号化効率が向上する上、
動領域においても視覚的解像度を低下させることなく、
しかも視覚的に良好な符号化画像を得ることができる。

【００４７】又、第１０〜第１３の発明におけるフレー
ム間符号化処理方式及び第１６、第１７の発明における
フレーム間符号化処理方法は、制御部において入力信号
とフレームメモリからの信号の差分情報又は入力信号又
はフレームメモリからの信号を用いて、符号化部におけ
る量子化ステップサイズを変更するので、符号化誤差の
少ない信号が生成される。

【００４８】また、第１８〜第２７の発明における符号
化制御方式は、入力信号または差分誤差信号に基づいて
求められる特徴（アクティビティ）のうち最適な特徴
（アクティビティ）を持つモードの信号に基づいて符号
化制御部において符号化を制御するため、符号化効率を
向上させることができる。

【００４９】

【実施例】実施例１．以下、この発明の一実施例を図１
を用いて説明する。ここでは８×８画素を処理単位とし
て、符号化を行なう場合について説明する。図１におい
て、２１はフィルタ制御部、２２は適応フィルタ部であ
る。その他の符号は図４０に示したものと同じである。

【００５０】次に図１をもとに動作について説明する。
フレームメモリ１に蓄積されている１フレーム前の画像
信号１１と入力画像信号１２から動きベクトル検出部２
において動きベクトル１３を検出し、それに応じた動き
補償予測信号１４が生成されるまでは従来例と同様であ
る。フィルタ制御部２１は入力画像信号１２と動き補償
予測信号１４によりフィルタ制御信号２３を生成する。

【００５１】フィルタ制御信号２３の生成について図２
をもとに説明する。図２において３０は入力画像信号１
２と動き補償予測信号１４の差異情報３２を計算するた
めの差情報演算部、３１は判定部である。差情報演算部
３０では入力画像信号１２と動き補償予測信号１４との
差分絶対値又は差分自乗をとり、それらを８×８画素単
位というフィルタの処理単位にあった複数画素分（８×
８＝６４画素分）累算し、得られた結果を差異情報３２
として出力する。

【００５２】図３は、差異情報３２を説明するための図
である。図３（ａ）は入力画像信号を示している。この
実施例においては８×８画素を処理単位としているた
め、入力画像信号は１つの処理単位の中にＳ１〜Ｓ６４
まで６４画素存在している。次に図３（ｂ）は、動き補
償予測信号を示す図である。動き補償予測信号も８×８
画素を処理単位としており、Ｙ１〜Ｙ６４までの６４画
素から構成されている。図３（ｃ）は、差情報演算部３
０が入力画像信号を１２と動き補償予測信号１４との差
分絶対値を６４画素分累算した結果を差異情報とする場
合を示している。また、図３（ｄ）は差情報演算部３０
が入力画像信号１２と動き補償予測信号１４との差分自
乗をとり、６４画素分累算し、得られた結果を差異情報
３２としている場合を示している。

【００５３】予測精度が高く最適な予測信号が得られて
いる場合にはこの差異情報３２の値は小さくなるが、予
測精度が低い場合や全く異なった画像が入力されたと
き、又はフレームメモリ１内の局部復号化信号に多くの
量子化誤差が含まれる場合などにはこの差異情報３２の
値は大きくなる。

【００５４】判定部３１では先に差異情報３２を求めた
複数画素に対応する入力画像信号１２の信号アクティビ
ティ（以下、単にアクティビティともいう）を計算す
る。例えば、信号アクティビティは図４に示すように信
号の最大値と最小値の差として計算する。

【００５５】図４は、信号アクティビティを画素信号の
最大値と最小値の差から計算する場合の一例を示す図で
ある。図においては、簡単に説明するために第１から第
８の画素について、信号アクティビティを計算する場合
を示している。この例においては、第４の画素の輝度が
最大値を示し、第５の画素が最小の輝度を示しているた
め、この差を信号アクティビティとする。

【００５６】あるいは信号アクティビティは、図５に示
すように信号平均値からの差分絶対値和や差分自乗和と
して求められる。図５は、差分絶対値や差分自乗を用い
て信号アクティビティを計算する場合の一例を示した図
である。図５（ａ）に示すように、第１から第８の画素
の持つ輝度とこれらの８つの輝度の平均値の差をそれぞ
れＸ１からＸ８とすると、信号平均値からの差分絶対値
は、図５（ｂ）に示すようにＸ１からＸ８の絶対値を加
算した値となる。又、信号平均値からの差分自乗は、図
５（ｃ）に示すようにＸ１からＸ８をそれぞれ自乗した
後、加算した値となる。

【００５７】図４及び図５に示したように、信号アクテ
ィビティは、画像信号の絶対的な強度を示すものではな
く、相対的な値を示すものである。即ち、低周波成分を
多く含むような滑らかに変化する信号の場合には信号ア
クティビティの値Ｘは小さくなり、変化の激しい高周波
成分を多く含む場合には信号アクティビティの値Ｘは大
きくなる。

【００５８】差異情報３２は信号アクティビティで正規
化（除算）され正規化結果が得られ、この値の大小に応
じて高周波成分除去を行うフィルタ強度を指定するフィ
ルタ制御信号２３を出力する。即ち正規化結果の値が大
きい場合（即ち、入力画像が低周波成分を多く含むよう
な滑らかに変化する信号の場合）はフィルタ強度を強く
する。又、正規化結果の値が小さい場合（即ち、入力画
像が変化の激しい高周波成分を多く含む信号の場合）
は、フィルタ強度を弱くする。即ち、正規化結果の値
は、適応フィルタ部２２における強度の異なる複数種類
のフィルタの個数に応じてその強度指定を多値で指定す
る。

【００５９】簡略化のためにフィルタの挿入、非挿入を
フィルタ制御信号２３として２値で指定する場合には所
定の値より先に求めた正規化情報が大きければフィルタ
挿入を行って高周波成分を除去して符号化すべき情報を
削減し、正規化情報が小さければフィルタを挿入せず解
像度を保持した予測誤差信号とするようフィルタ制御信
号２３を発する。

【００６０】図６に、フィルタ制御部２１のｏｎ／ｏｆ
ｆ判定フローの一実施例を示す。このフィルタ制御部２
１の動作は、入力画像信号１２と動き補償予測信号１４
によってフィルタのｏｎ／ｏｆｆ判定を行うものであ
る。まず、ＳＴ１で、デフォルト値としてフィルタをｏ
ｆｆにする。ＳＴ２で、差情報演算部３０は入力画像信
号１２と動き補償予測信号１４の差異情報Ｎを算出す
る。また、ＳＴ３で判定部３１は入力画像信号１２の信
号アクティビティの値Ｘを算出する。次に、ＳＴ６にお
いては、差異情報３２を信号アクティビティの値Ｘで正
規化（除算）する。この差異情報Ｎを信号アクティビテ
ィの値Ｘで除した値が、閾値Ｔｈ_NXより小さければ、フ
ィルタをｏｆｆにする。この差異情報Ｎを信号アクティ
ビティの値Ｘで除した値が、閾値Ｔｈ_NXより小さい時
は、予測が適当で差異情報３２が小さい、あるいは、入
力画像信号のアクティビティが大きいことを意味する。
差異情報３２が小さい場合には予測が適当である場合を
示しているため、フィルタをｏｎにする必要がない。ま
た、入力信号のアクティビティが大きい場合には動き補
償予測信号１４は入力信号に追随して変化の激しい高周
波成分を多く含む信号となる場合が多いため、フィルタ
をｏｎにせず、動き補償予測信号１４をそのまま出力す
る。また、この差異情報Ｎを信号アクティビティの値Ｘ
で除した値が閾値Ｔｈ_NXより大きいときは、フィルタを
ｏｎにする。この差異情報Ｎを信号アクティビティの値
Ｘで除した値が閾値Ｔｈ_NXより大きいときは、予測が適
当でなく、差異情報３２が大きいあるいは入力画像信号
のアクティビティが小さいことを意味する。差異情報３
２が大きい場合は予測が適当でなく、動き補償予測信号
１４には高周波成分が多く含まれているので、フィルタ
をｏｎにすることにより、動き補償予測信号１４から高
周波成分を除去して符号化効率を向上させる。また、入
力画像信号のアクティビティが小さい場合は同様にフィ
ルタがｏｎされるが、入力画像信号のアクティビティが
大きい場合にはフィルタはｏｆｆのままになる。これは
入力画像信号のアクティビティが大きい場合には動き補
償予測信号１４も変化の激しい高周波成分を多く含む信
号である場合が多いため、フィルタをｏｆｆにして動き
補償予測信号１４の高周波成分をそのまま残すことによ
り、符号化効率を向上させるものである。

【００６１】次に、図７は、フィルタ制御部２１のｏｎ
／ｏｆｆ判定フローの他の例を示す図である。図７にお
いて、差異情報Ｎが閾値Ｔｈ_N より大きければ、フィル
タをｏｎにする。このように差異情報Ｎが閾値Ｔｈ_N よ
り大きい場合は、動き補償予測信号には高周波成分が多
く含まれているので、フィルタをｏｎにすることによっ
て高周波成分を除去して符号化効率を向上させることを
意味する。つぎに、ＳＴ５では、入力画像信号１２の信
号アクティビティＸが閾値Ｔｈ_Xより小さければ、フィ
ルタをｏｎにする。信号アクティビティＸが閾値Ｔｈ_X
より小さい入力画像信号は高周波成分をほとんど含まな
い。したがって、フィルタをｏｎにしても高周波成分の
除去に関してはほとんど影響がなく、フィルタがｏｆｆ
の場合以上に高周波雑音の除去に効果がある。逆に、入
力画像信号１２の信号アクティビティＸが閾値Ｔｈ_X よ
り大きければ、フィルタをｏｆｆのままとする。信号ア
クティビティＸが閾値Ｔｈ_X より大きい入力画像信号
は、高周波成分を含んでいると考えられる。従って、動
き補償予測信号１４も入力画像信号１２に対応して高周
波成分を含んでいると考えられる。このため、フィルタ
をｏｆｆのままにして動き補償信号１４の高周波成分を
そのままにして出力するようにする。

【００６２】次に図８は、フィルタ制御部２１のｏｎ／
ｏｆｆ判定フローの他の例を示す図である。図８に示す
ｏｎ／ｏｆｆ判定フローは図６と図７に示したフローを
組み合わせたものである。このように図６に示した判定
と図７に示した判定の両方を用いることにより、異なる
閾値を用いてフィルタのｏｎ／ｏｆｆを判定することが
でき、フィルタのｏｎ／ｏｆｆの制御をさらにきめ細か
く判定することができる。なお、図示しないが、フィル
タ制御部２１のｏｎ／ｏｆｆ判定を入力画像信号１２か
ら算出された信号アクティビティと閾値Ｔｈ_X との比較
により行うようにしても構わない。すなわち、図７に示
したｏｎ／ｏｆｆ判定フローからＳＴ２における差異情
報の算出処理およびＳＴ４における差異情報Ｎと閾値Ｔ
ｈ_N との比較処理を除いたＳＴ１、ＳＴ３、ＳＴ５、Ｓ
Ｔ７によるｏｎ／ｏｆｆ判定フローを用いてフィルタの
制御を行うようにしても構わない。

【００６３】なお、図６のＳＴ６で信号アクティビティ
の値Ｘが零の場合、零で除算することはできないので、
正規化結果は不定となるが、一般にはこの正規化演算が
有限語長による演算のため、その語長における最大値と
される。例えば、正規化演算を８ビットを一語とする語
長で演算する場合には、８ビットの値の最大値である
“ＦＦ”という値を用いて正規化結果とする。これは、
この正規化演算で出力される最大値である。

【００６４】適応フィルタ部２２ではフィルタ制御信号
２３に応じて動き補償予測信号１４の高周波成分除去を
行うためのフィルタリング処理を行う。フィルタは図９
に示すように、空間方向に１次元または２次元のローパ
ス特性をもつものや、さらに時間的にフィルタ係数値が
変化する３次元のものが適用でき、フィルタ制御信号２
３に従ってそのフィルタ強度を変化させるものである。

【００６５】図９は、１次元、２次元、３次元のローパ
ス特性を持つフィルタを説明する図であり、図９（ａ）
は１次元方向において、ローパス特性を持つフィルタを
示している。図９（ｂ）は、２次元方向にローパス特性
を持つフィルタを示している。図９（ｃ）１次元、２次
元及び時刻ｔ１、ｔ２、ｔ３という時刻の異なるフレー
ムの処理単位により、３次元方向のローパス特性を持つ
フィルタを示している。図９において、黒丸は注目画素
であり、この注目画素に対して、１次元、２次元、又
は、３次元方向の画素を用いてフィルタリング処理を行
なうことが可能である。

【００６６】又、図１０に示すようにフィルタリング処
理は、８×８画素という処理単位の内部に閉じた画素の
みで行なうことも可能であるが、８×８画素という処理
単位を越えた画素を用いてフィルタリング処理を行なっ
ても構わない。図１０において、Ｆ１は注目画素に対し
て、８×８画素という処理単位をまたがって、隣接する
処理単位の画素を用いてフィルタリング処理を行なう場
合を示している。同様に、Ｆ２も隣接する８×８画素の
処理単位内にある画素を用いて注目画素のフィルタリン
グ処理を行なう場合を示している。

【００６７】次に図１１はフィルタリング処理の一例を
示す図であり、１次元方向のフィルタリング処理を説明
するための図である。ここで、画素Ｓ１からＳ５までの
内、Ｓ３を注目画素とする。又、Ｋ１からＫ５は係数で
あり、図１１（ｂ）に示すようにＫ１からＫ５までの和
は１．０であるものとする。

【００６８】フィルタリング処理は、各画素の輝度に対
して、それぞれＫ１からＫ５の係数を掛け合わせその和
を取ることによって計算される。もし、フィルタに用い
る係数の値が図１１（ｃ）に示すような値を用いれば、
注目画素Ｓ３は周囲にあるＳ１、Ｓ２、Ｓ４、Ｓ５の輝
度により影響を受け、平均化されることになる。それに
対して係数図１１（ｄ）に示すようにＫ３＝１．０でそ
の他の係数が０の場合には、注目画素Ｓ３は他の画素に
は全く影響せず、そのまま出力されることになり、フィ
ルタ処理はＯＦＦされていることになる。

【００６９】図１２はこのように係数を変化させること
により、フィルタの強度が変化する状態を示す図であ
り、予測信号２４がフィルタ処理により変化する場合を
示している。フィルタ制御信号２３に従って、フィルタ
の係数が変化し、その結果フィルタ強度が変化し、図１
２に示すように予測信号２４の高周波成分のカットが多
段階に制御可能となる。即ち、入力信号が変化の激しい
高周波成分を多く含む場合には、フィルタ係数値が変化
して図１２において予測信号２４は矢印Ａの方向に変化
する。又、入力信号が低周波成分を多く含むような信号
の場合には、図１２の矢印Ｂに示すようにフィルタを挿
入せず、解像度を保持した予測信号を出力するようにな
る。

【００７０】フィルタ処理がなされた予測信号２４は減
算器３により入力画像信号１２より減算され予測誤差信
号１５が生成される。符号化部４は予測誤差信号１５を
量子化して符号化された誤差情報１６を発生する。局部
復号化部５は符号化された誤差情報１６を復号し、局部
復号誤差信号１７を出力する。加算器６は予測信号２４
と局部復号誤差信号１７を加算して局部復号信号１８を
発生した後、フレームメモリ１に書き込まれる。

【００７１】実施例２．上記実施例１においては動きベ
クトル検出部２を設けた構成としたが、装置簡素化によ
り例えば、図１３に示すように、常に動き量が零とし
て、図１に示した動きベクトル検出部２を設けないとき
にも同様の処理が可能である。

【００７２】実施例３．上記実施例１においては適応フ
ィルタ部２２をフレームメモリ１の後段に配置したが、
図１４に示すように適応フィルタ２２を加算器６の後段
に配置するときにも同様の処理が可能である。

【００７３】実施例４．又、図１５に示すように、常
に、動き量が０として動きベクトル検出部２を設けず、
適応フィルタ２２を加算器６の後段に配置する場合でも
構わない。

【００７４】実施例５．又、この発明の他の実施例を図
１６を用いて説明する。フィルタ制御部２１において求
められた差異情報３２は画素数（８×８＝６４画素）で
徐され、画素当たりの差異情報２５として符号化部４に
送られる。

【００７５】図１７は、この実施例におけるフィルタ制
御部２１の構成を示す図であり、３３は一画素当りの差
異情報２５を演算するための画素当り差情報演算部であ
る。差情報演算部３０においては、前述したように入力
画像信号１２と動き補償予測信号１４との差分絶対値、
又は、差分自乗をとり、これを８×８画素という処理単
位にある複数画素分（６４画素分）累算して差異情報３
２として出力する。

【００７６】画素当り差情報演算部３３が、この差異情
報３２を８×８画素、即ち、６４画素で除算するという
ことは、差異情報３２の一画素当りの平均値を求めてい
ることになる。符号化部４では画素当たりの差異情報２
５に基づきそれよりも小さな符号化誤差で量子化される
よう量子化ステップサイズを決定する。

【００７７】図１８は、符号化部４における量子化ステ
ップサイズの決定動作について説明するための図であ
る。図１８に示すように第１画素から第８画素について
は、画素当りの差異情報２５がＤ１の値であり、第９画
素から第１６画素についての画素当りの差異情報２５は
Ｄ２の値であり、第１７画素から第２４画素についての
画素当りの差異情報２５はＤ３の値である場合を示して
いる。そして、画素当りの差異情報Ｄ１、Ｄ２、Ｄ３は
図１８（ｂ）に示すように、 Ｄ１＞Ｄ２＞Ｄ３ という関係を持って、フィルタ制御部２１から出力され
たものとする。

【００７８】符号化部４ではこのような画素当りの差異
情報２５を入力すると、第１画素から第８画素に対して
は量子化ステップサイズが画素当りの差異情報Ｄ１より
も小さな符号化誤差で量子化されるような、ステップサ
イズＳＳ１を選択する。同様に第９画素から第１６画素
についても画素当りの差異情報Ｄ２に基づき、それより
も小さな符号化誤差で量子化されるステップサイズＳＳ
２を選択する。第１７画素から第２４画素に対しても、
画素当りの差異情報Ｄ３よりも小さな符号化誤差で量子
化されるような量子化ステップサイズＳＳ３を選択す
る。従って、量子化ステップサイズは図１８（ｄ）に示
すように、 ＳＳ１＞ＳＳ２＞ＳＳ３ という関係を持って符号化部４により選択され、入力信
号を量子化することになる。

【００７９】以上のことから、入力画像信号１２と動き
補償予測信号１４との差が大きい場合には量子化ステッ
プサイズも大きくなり、入力画像信号１２と動き補償予
測信号１４との差が小さい場合には量子化ステップサイ
ズも小さくなる。従って、符号化誤差の少ない復号化画
像が生成される。

【００８０】ただし、符号化部４における量子化ステッ
プサイズの決定は、一画素当りの差異情報２５（制御信
号ともいう）のみよって決定されるのではない。例え
ば、符号化部４から出力された符号化された信号を一時
保存して出力するための出力バッファのサイズ等により
符号化量が制限されている場合には、その制限内で量子
化ステップサイズを選択する。

【００８１】実施例６．上記実施例５においては、フィ
ルタ制御部２１が適応フィルタ２２への制御信号２３
と、符号化部４への制御信号２５を出力する場合を示し
たが、この２つの制御信号２３及び２５を出力する必要
が無く、図１９に示したように制御部２１ａは、符号化
部４への制御信号２５のみを出力する場合でも構わな
い。図２０（ａ）は、この実施例における制御部２１の
構成を示す図であり、図１７と異なる点は、判定部３１
が存在しない点である。図２０（ａ）において、差情報
演算部３０と画素当り差情報演算部３３の動作は、実施
例５で説明したものと同様であり、ここではその説明を
省略する。

【００８２】又、図２０（ｂ）は、この実施例における
制御部２１ａの他の構成を示す図であり、判定部３１ａ
から信号アクティビティを制御信号２５として出力する
点を特徴としている。判定部３１ａは入力信号１２を入
力し、その信号アクティビティを計算する。信号アクテ
ィビティは、図４あるいは図５に示したような方法で計
算する。前述したように、信号アクティビティは、画像
信号の絶対的な強度を示すものではなく、相対的な値を
示すものである。即ち、低周波成分を多く含むような滑
らかに変化する信号の場合には信号アクティビティの値
Ｘは小さくなり、変化の激しい高周波成分を多く含む場
合には信号アクティビティの値Ｘは大きくなる。従っ
て、この信号アクティビティを制御信号２５として入力
して、符号化部４の量子化ステップサイズを動的に変更
することにより、適切な符号化が行なえる。

【００８３】又、図２０（ｃ）は、図２０（ｂ）に示し
た入力信号１２の変わりに、フレームメモリからの動き
補償予測信号１４を入力するようにしたものである。そ
の他の動作は図２０（ｂ）と同様である。

【００８４】実施例７．上記実施例において、フレーム
メモリ１は画像フレームを単位として記憶する場合を示
したが、フレームメモリ１は画像フレーム単位ではなく
フィールド単位に記憶する場合でもよい。図２１は、こ
のフレームとフィールドの関係を示す図である。図２１
（ａ）に示すように１つのフレームは、第１フィールド
と第２フィールドからなっており、この第１フィールド
の信号と第２フィールドの信号を図２１（ｂ）に示すよ
うにインターレースモードで表示することにより、１つ
の画像フレームを構成する。

【００８５】又、前述した実施例においては、フィルタ
はフレームを単位としてフィルタリング処理を実行する
場合について説明したが、フィールド単位で処理する場
合でも構わない。

【００８６】又フレームメモリはフレームを複数枚数記
憶する場合にも同様の処理が可能である。複数の枚数を
持つ場合には、過去のフレーム又はフィールドを持つ場
合ばかりでなく、既に撮影されているビデオ等のよう
に、現在のフレームやフィールドより後に出力されるで
あろう次のフレームやフィールドを記憶する場合であっ
ても構わない。

【００８７】実施例８．又、上記実施例において、判定
部３１では入力画像信号１２の信号アクティビティを求
めて、差異情報３２の正規化を行ったが、動き補償予測
信号１４の信号アクティビティを求めて、差異情報３２
を正規化しても同様の処理が可能である。

【００８８】実施例９．以下、この発明の一実施例を図
２２を用いて説明する。図２２において、４１は符号化
制御部、４２は符号化制御信号である。他は図１と同じ
である。ただし、図２２には図１にある適応フィルタ２
２、フィルタ制御部２１および動きベクトル検出部２は
ない。

【００８９】次に図２２をもとに動作について説明す
る。フレームメモリ１に蓄積されている１フレーム前の
画像信号１１を予測信号とする。減算器３は入力画像信
号１２から画像信号１１を減算して予測誤差信号１５を
発生する。符号化制御部４１では、入力画像信号１２お
よび予測誤差信号１５のアクティビティに基づいて、符
号化制御信号４２および選択信号１５０を符号化部４へ
出力する。符号化部４は選択信号１５０を量子化して符
号化された誤差情報１６を発生する。局部復号化部５は
符号化された誤差情報１６を復号し、局部復号誤差信号
１７を出力する。加算器６で画像信号１１と局部復号誤
差信号１７を加算して局部復号信号１８を発生した後、
フレームメモリ１に書き込む。このようにして発生した
符号化された誤差信号１６は伝送路を経て送出される。

【００９０】符号化制御部４１の動作について図２３を
もとに説明する。図において、４５はアクティビティ算
出部、４６はアクティビティ比較選択部、１２ａは入力
画像信号１２から求められたアクティビティ、１５ａは
予測誤差信号１５から求められたアクティビティ、４２
は符号化部を制御するための符号化制御信号、１５０は
選択信号である。符号化制御部４１では、アクティビテ
ィ算出部４５で入力画像信号１２および予測誤差信号１
５のアクティビティをそれぞれ求め、アクティビティ比
較選択部４６へ出力する。

【００９１】ここでいう信号アクティビティとは、実施
例１で述べたような信号の最大値と最小値の差あるいは
信号平均値からの差分絶対値和や差分自乗和などを意味
している。このアクティビティは画像信号の個々の絶対
的な強度ではなく、複数画素全体として滑らかに変化す
るすなわち低周波成分を多く含むような信号の場合には
信号アクティビティの値は小さくなり、変化の激しい高
周波成分を多く含む場合には信号アクティビティの値は
大きくなる。

【００９２】アクティビティ比較選択部４６では、入力
したアクティビティの比較を行い所定の条件に合致した
モードを選択する。ここで所定の条件として以下のよう
なものがあげられる。 （１）符号化効率に最も重点を起き、符号化効率が最も
向上するモードを選択する。 （２）画質がよくなることに重点を起き、画質が向上す
るモードを選択する。 （３）符号化効率と画質に対してそれぞれ相当分の重要
性をおき、一方が他の重要性を増す場合にはその一方の
重要性がある方のモードを選択する。

【００９３】このように所定の条件としては、符号化効
率あるいは画質に対する重要度に合致したモードを選択
するという場合が考えられるが、それ以外にもシステム
あるいは装置によっていろいろな条件を付加することが
可能である。例えば、前述した符号化効率を最も向上さ
せるモードを選択する場合には、信号アクティビティが
小さいものを選択することになる。一方、画質を向上さ
せるモードを選択する場合には入力画像信号１２を選択
することになる。また、符号化効率と画質の両方に基づ
いてモードを選択する場合には入力画像信号１２及び予
測誤差信号１５のアクティビティの比較の結果、一定の
関係を満たす場合にいずれかの信号を選択することにな
る。アクティビティ比較選択部４６ではそのモードおよ
びアクティビティに基づいた量子化ステップサイズ等の
符号化パラメータを符号化制御信号４２として出力し、
選択されたモードの信号を選択信号１５０として出力す
る。

【００９４】次に、アクティビティ比較選択部４６の動
作について図２４をもとに説明する。図において、４６
ａは入力画像信号のアクティビティ１２ａ及び／あるい
は予測誤差信号１５のアクティビティ１５ａに対して重
み付けを行なう重み付け回路、４６ｂは重み付け回路４
６ａから出力される入力画像信号及び予測誤差信号のア
クティビティ１２ｂ及び１５ｂを比較する比較器、４６
ｃは入力画像信号１２あるいは予測誤差信号１５のいず
れかを選択して選択信号１５０として出力するとともに
量子化ステップサイズ及び符号化係数等を多重化して符
号化制御信号４２を出力する制御信号発生器である。こ
の例では説明を簡単にするため、重み付け回路４６ａに
関しては説明しない（重み付け回路に関しては後述す
る）。従って、比較器４６ｂには入力画像信号のアクテ
ィビティ１２ａ及び予測誤差信号のアクティビティ１５
ａが入力される。比較器は二つのアクティビティを比較
した結果をモード信号４６ｍとして制御信号発生器に出
力する。モード信号４６ｍは入力画像信号１２及び予測
誤差信号１５のいずれかを選択するためのスイッチ切替
に用いられる。また、モード信号４６ｍは制御信号発生
器内において量子化ステップサイズ及びＤＣＴ（ディス
クリートコサイントランスフォーム）係数等の符号化パ
ラメータと共に符号化制御信号の一部として多重化され
符号化部４に出力される。符号化部４は符号化制御信号
４２に多重化された信号を解析する。例えば、モード信
号により入力画像信号１２か予測誤差信号１５のどちら
が選択信号として出力されているかを知ることができ
る。入力画像信号１２が選択信号１５０として出力され
ている場合には、フレーム内符号化を行なう。また、予
測誤差信号１５が選択信号１５０として出力されている
場合には、フレーム間符号化を行なう。これらの符号化
処理は量子化ステップサイズ、あるいはＤＣＴ係数等に
よって制御される。

【００９５】実施例１０．上記実施例９において、フィ
ルタ制御部、適応フィルタ部、動きベクトル検出部をさ
らに組み込んだ場合の一実施例を図２５を用いて説明す
る。図２５において、２は動きベクトル検出部、１３は
動きベクトル、１４は動き補償予測信号、２１はフィル
タ制御部、２２は適応フィルタ部、２３はフィルタ制御
信号、２４は予測信号、他は図２２と同じである。動き
ベクトル検出部２、フィルタ制御部２１、適応フィルタ
部２２の各部の動作は実施例１において説明したものと
同様なのでここではその説明を省略する。

【００９６】前述した実施例９においては、フレームメ
モリ１に蓄積されている１フレーム前の画像信号１１を
予測信号として、この予測信号を減算することにより予
測誤差信号１５を発生していたのに対し、この実施例１
０においてはフィルタ制御部２１からのフィルタ処理が
施された予測信号２４から予測誤差信号１５を求めてい
る点が異なる点である。すなわち、この実施例はあらか
じめフィルタ制御部２１からフィルタ処理制御を施され
た予測誤差信号１５のアクティビティとフレーム内信号
１２のアクティビティとを比較し、所定の条件に基づい
て符号化制御信号４２を導出する例を示している。

【００９７】この実施例のように、フィルタ制御部にお
いて入力信号と画像メモリからの信号の差異情報を入力
信号または画像メモリからの信号のアクティビティによ
り正規化し、正規化結果の大小により高域成分をカット
するフィルタ強度を変化させることにより、常に符号化
すべき信号に高周波成分が残存せず、また符号化制御部
においてはフィルタ強度に応じてフィルタ処理を施した
予測誤差信号および入力画像信号のアクティビティの中
から最小のアクティビティを持つモードの信号に基づい
て符号化制御信号を導出することにより、符号化効率が
向上する。

【００９８】実施例１１．上記実施例９，１０において
は、アクティビティ比較選択部４６において入力したア
クティビティの比較を行い条件に合致したモードを選択
し、そのモードおよびアクティビティに基づいた量子化
ステップサイズ等の符号化パラメータを符号化制御信号
４２として出力していたが、アクティビティ比較選択部
４６で入力したアクティビティのうち最小のアクティビ
ティを出力したモードを選択し、そのモードおよびアク
ティビティに基づいた量子化ステップサイズ等の符号化
パラメータを符号化制御信号４２として出力してもよ
い。このように、アクティビティが最小のものを選択す
ることにより、符号化部における符号化効率が最も向上
することになる。

【００９９】実施例１２．上記実施例９，１０において
は、アクティビティ比較選択部４６で入力したアクティ
ビティの比較を行う際に、少なくとも何れか一方のアク
ティビティに重み付けを行ってもよい。前述した図２４
に示す重み付け回路４６ａは、この実施例におけるアク
ティビティに重み付けを行う回路である。図２６は重み
付け回路４６ａの動作を説明するための図である。図２
６（ａ）は重み付け回路４６ａが入力画像信号１２及び
予測誤差信号１５のアクティビティ１２ａ、１５ａのい
ずれの信号にいずれのアクティビティに対しても重み付
けを行わない場合を示している。また、図２６（ｂ）は
重み付け回路４６ａが入力画像信号１２のアクティビテ
ィ１２ａに対しては重み付けを行わず、予測誤差信号１
５のアクティビティ１５ａに対しては、図２６（ａ）に
示した値に対して２倍の重み付けをした場合を示してい
る。

【０１００】もし、アクティビティ比較選択部４６が入
力したアクティビティの内最小のアクティビティを出力
したモードを選択する場合、図２６（ａ）に示す場合
は、入力画像信号１２のアクティビティ１２ａが予測誤
差信号１５のアクティビティ１５ａに比べていずれの時
刻においてもアクティビティの値が大きいためアクティ
ビティ比較選択部４６は予測誤差信号１５を選択信号１
５０として出力する。

【０１０１】一方、図２６（ｂ）の場合には、予測誤差
信号１５のアクティビティ１５ａが２倍の重み付けをさ
れているため時刻ｔ１からｔ２の間は入力画像信号１２
のアクティビティ１２ａより大きな値を示している。従
って、アクティビティ比較選択部４６は時刻ｔ０からｔ
１の間は予測誤差信号１５を選択信号１５０として選択
し、時刻ｔ１からｔ２の間は入力画像信号１２を選択信
号１５０として出力する。

【０１０２】図２７に、重み付け回路４６ａの処理フロ
ーの一実施例を示す。重み付け回路４６ａは入力画像信
号１２と予測誤差信号１５のアクティビティ１２ａ、１
５ａとを入力し、次に、あらかじめ設定されている重み
付け係数Ｗ１とＷ２を読み出す。その後、入力画像信号
１２のアクティビティ１２ａにＷ１を乗じ、予測誤差信
号のアクティビティ１５ａにＷ２を乗じて重み付けを行
い、入力画像信号のアクティビティ１２ａｘＷ１を入力
画像信号のアクティビティ１２ａに重み付けを行ったア
クティビティ１２ｂとして出力し、予測誤差信号のアク
ティビティ１５ａｘＷ２を予測誤差信号（入力信号とフ
レームメモリから読み出した予測信号との差分信号）の
アクティビティ１５ａに重み付けを行ったアクティビテ
ィ１５ｂとして出力する。この例では、入力の双方に重
み付けを行ったが、何れか一方でもよい。また、本実施
例では、入力は入力画像信号のアクティビティ１２ａと
予測誤差信号のアクティビティ１５ａの２つであった
が、後述する実施例のように３入力でもよく、入力数を
限定するものではない（後述する実施例１５を参照）。
図２８に、前述した重み付け回路の具体的処理フローを
示す。この重み付け回路の動作は、入力画像信号のアク
ティビティ１２ａと予測誤差信号のアクティビティ１５
ａを入力し、入力画像信号のアクティビティ１２ａには
重み付けは行わずそのままアクティビティ１２ｂとして
出力し、予測誤差信号のアクティビティ１５ａに対して
は２倍して重み付けを行いその結果をアクティビティ１
５ｂとして出力する。

【０１０３】次に、図２９に、比較器４６ｂの処理フロ
ーの一実施例を示す。この比較器４６ｂの動作は、入力
した２つの信号アクティビティの大きさを比較して符号
化モードを決めるものである。入力画像信号のアクティ
ビティ１２ａに重み付けを行ったアクティビティ１２ｂ
と予測誤差信号（入力信号とフレームメモリから読み出
した予測信号との差分信号）のアクティビティに重み付
けを行ったアクティビティ１５ｂを入力し、アクティビ
ティ１２ｂがアクティビティ１５ｂより小さい場合はＩ
ＮＴＲＡ（フレーム内符号化）モードにし、大きい場合
はＩＮＴＥＲ（フレーム間符号化）モードにして、選択
されたモードをモード信号４６ｍとして出力する。ま
た、本実施例では、入力はアクティビティ１２ｂとアク
ティビティ１５ｂの２つであったが、後述する実施例の
ように３入力でもよく、入力数を限定するものではない
（後述する実施例１５を参照）。

【０１０４】図３０に、制御信号発生器４６ｃの処理フ
ローの一実施例を示す。この制御信号発生器４６ｃの動
作は、入力したモード信号４６ｍにより選択されたモー
ドに応じて選択信号１５０、制御信号４２を出力するも
のである。制御信号発生器４６ｃは、入力画像信号１
２、予測誤差信号１５、および重み付けを行ったアクテ
ィビティ１２ｂとアクティビティ１５ｂ、モード信号４
６ｍを入力する。制御信号発生器４６ｃは、モード信号
４６ｍをチェックし、ＩＮＴＥＲ（フレーム間符号化）
モードなら予測誤差信号１５を選択信号１５０として出
力する。制御信号発生器４６ｃは、アクティビティ１５
ｂの大きさに応じて、図３１（ａ）に示すメモリテーブ
ルより量子化ステップサイズ（ＱＵＡＮＴ）およびＤＣ
Ｔ出力係数を読み出す。また、制御信号発生器４６ｃ
は、モード信号４６ｍをチェックし、ＩＮＴＲＡ（フレ
ーム内符号化）モードなら入力画像信号１２を選択信号
１５０として出力する。制御信号発生器４６ｃは、アク
ティビティ１２ｂの大きさに応じて、図３１（ｂ）に示
すメモリテーブルより量子化ステップサイズ（ＱＵＡＮ
Ｔ）およびＤＣＴ出力係数を読み出す。読み出した量子
化ステップサイズおよびＤＣＴ出力係数とモード信号４
６ｍを多重して制御信号４２として出力する。また、本
実施例では、入力は重み付けを行った後のアクティビテ
イ１２ｂと１５ｂであったが、重み付けを行う前の信号
入力画像信号のアクティビティ１２ａと予測誤差信号の
アクティビティ１５ａを入力としてもよい。ただし、こ
の場合、メモリテーブルの内容あるいは閾値を変更する
必要がある。また、図３１に示した閾値の数はＱＵＡＮ
ＴおよびＤＣＴ出力係数の割当てに応じて多くても少な
くてもよい。また、割当てるＱＵＡＮＴおよびＤＣＴ出
力係数の値に関しては、画質優先あるいは符号化効率優
先等の目的に応じて変えてもよい。

【０１０５】このように重み付けを行うことにより選択
信号１５０として出力すべき信号を意図的に選択するこ
とが可能になる。すなわち、重み付けを行うことの利点
は、符号化処理装置の要求や処理する画像に応じて、入
力した信号の発生確率（入力した信号が選択信号として
出力される確率）を制御できることである。

【０１０６】実施例１３．上記実施例１０においては、
符号化制御部４１で入力画像信号１２および予測誤差信
号１５のアクティビティから符号化制御信号４２を求め
たが、適応フィルタ２２でフィルタ処理を施した予測誤
差信号１５のアクティビティとフィルタ処理を行わなか
った場合の予測誤差信号１５のアクティビティとを比較
し、何れか最も小さいアクティビティを持つ信号のアク
ティビティに基づいて符号化制御信号４２を導出しても
よい。

【０１０７】図３２はこの実施例の一例を示す図であ
る。図において、２４ａは適応フィルタ２２でフィルタ
処理を施した予測信号である。２４ｂは適応フィルタ２
２によりフィルタ処理を行わなかった予測信号である。
これらの予測信号２４ａ及び２４ｂは減算器３ａ及び３
ｂにそれぞれ入力され、入力画像信号１２との差分がと
られ予測誤差信号１５ｘ及び１５ｙが出力される。この
予測誤差信号１５ｘと１５ｙは符号化制御部４１に入力
され、前述したような動作により符号化制御信号４２が
求められる。

【０１０８】実施例１４．上記実施例１３においては、
符号化制御部４１で適応フィルタ２２でフィルタ処理を
施した予測誤差信号１５のアクティビティとフィルタ処
理を行わなかった場合の予測誤差信号１５のアクティビ
ティに基づいて符号化制御信号４２を導出したが、導出
の際適応フィルタ２２でフィルタ処理を施した予測誤差
信号１５のアクティビティとフィルタ処理を行わなかっ
た場合の予測誤差信号１５のアクティビティの少なくと
も何れか一方のアクティビティに重み付けを行ってもよ
い。

【０１０９】実施例１５．上記実施例１３においては、
符号化制御部４１で適応フィルタ２２でフィルタ処理を
施した予測誤差信号１５のアクティビティとフィルタ処
理を行わなかった場合の予測誤差信号１５のアクティビ
ティに基づいて符号化制御信号４２を導出したが、適応
フィルタ２２でフィルタ処理を施した予測誤差信号１５
のアクティビティとフィルタ処理を行わなかった場合の
予測誤差信号１５のアクティビティとフレーム内予測に
よる入力画像信号１２のアクティビティとの３者を比較
し、何れか最も小さいアクティビティを持つ信号のアク
ティビティに基づいて符号化制御信号４２を導出しても
よい。

【０１１０】図３３はこの実施例の一例を示す図であ
る。図３３において図３２と異なる点は入力画像信号１
２が符号化制御部４１に入力されている点である。符号
化制御部４１はフィルタ処理された予測誤差信号１５ｘ
とフィルタ処理がされていない予測誤差信号１５ｙと入
力画像信号１２の３つの信号を入力し、例えば、最も小
さいアクティビティを持つ信号を選択することにより符
号化制御信号４２を導出する。

【０１１１】図３４は、この実施例における符号化制御
部４１の構成を示す図である。前述した符号化制御部４
１と異なる点はフィルタ処理された予測誤差信号１５ｘ
とフィルタ処理がされていない予測誤差信号１５ｙと入
力画像信号１２の３つの信号を入力している点である。
アクティビティ算出部４５は入力した３つの信号のアク
ティビティを計算してアクティビティ比較選択部４６に
出力する。図３５はアクティビティ比較選択部４６の構
成を示す図である。アクティビティ比較選択部はアクテ
ィビティ算出部４５で算出された３つの信号のアクティ
ビティ１２ａ、１５ａ、１５ｃを重み付け回路４６ａに
入力する。重み付け回路４６ａはあらかじめ重み付け係
数としてＷ１とＷ２とＷ３を記憶しているものとする。
重み付け回路はアクティビティ１２ａにＷ１を乗じ、ア
クティビティ１５ａにＷ２を乗じ、アクティビティ１５
ｃにＷ３を乗じて重み付けを行い、重み付けを行ったア
クティビティ１２ｂ、１５ｂ、１５ｄを比較器４６ｂに
出力する。比較器４６ｂは３つの重み付けを行った信号
を比較し、その大小関係からモード信号４６ｍを生成す
る。制御信号発生器４６ｃは入力画像信号１２とフィル
タ処理された予測誤差信号１５ｘとフィルタ処理がされ
ていない予測誤差信号１５ｙを入力し、モード信号４６
ｍに基づいていずれかの信号を選択し、選択信号１５０
を出力する。また、制御信号発生器４６ｃは選択信号１
５０として選ばれた信号が入力画像信号１２である場合
では、入力画像信号１２のアクティビティ１２ｂの大き
さに応じて、あらかじめメモリテーブルに記憶された量
子化ステップサイズ及びＤＣＴ出力係数を読み出す。あ
るいは選択信号１５０として選択された信号がフィルタ
処理された予測誤差信号１５ｘの場合にはフィルタ処理
された予測誤差信号１５ｘのアクティビティ１５ｂの大
きさに応じて、あらかじめメモリテーブルに記憶された
量子化ステップサイズおよびＤＣＴ出力係数を読み出
す。あるいは選択信号１５０として選択された信号がフ
ィルタ処理されていない予測誤差信号１５ｙである場合
には、フィルタ処理されていない予測誤差信号１５ｙの
アクティビティ１５ｄの大きさに応じて、あらかじめメ
モリテーブルに記憶された量子化ステップサイズおよび
ＤＣＴ出力係数を読み出す。これら読み出された量子化
ステップサイズ、ＤＣＴ出力係数とモード信号４６ｍは
多重化されて制御信号４２として出力される。

【０１１２】実施例１６．上記実施例１５においては、
符号化制御部４１で適応フィルタ２２でフィルタ処理を
施した予測誤差信号１５のアクティビティとフィルタ処
理を行わなかった場合の予測誤差信号１５のアクティビ
ティとフレーム内予測による入力画像信号１２のアクテ
ィビティとを比較し、何れか最も小さいアクティビティ
を持つ信号のアクティビティに基づいて符号化制御信号
４２を導出したが、導出の際適応フィルタ２２でフィル
タ処理を施した予測誤差信号１５のアクティビティとフ
ィルタ処理を行わなかった場合の予測誤差信号１５のア
クティビティとフレーム内予測による入力画像信号１２
のアクティビティの少なくとも何れか一つのアクティビ
ティに重み付けを行ってもよい。

【０１１３】実施例１７．上記実施例１５においては、
符号化制御部４１で適応フィルタ２２でフィルタ処理を
施した予測誤差信号１５のアクティビティとフィルタ処
理を行わなかった場合の予測誤差信号１５のアクティビ
ティとフレーム内予測による入力画像信号１２のアクテ
ィビティとを比較し、何れか最も小さいアクティビティ
を持つ信号のアクティビティに基づいて符号化制御信号
４２を導出したが、予め前記フィルタ制御部からフィル
タ処理制御を施された予測誤差信号のアクティビティと
フレーム内予測による入力画像信号のアクティビティと
を比較し、何れか最も小さいアクティビティを持つ信号
のアクティビティに基づいて符号化制御信号４２を導出
してもよい。

【０１１４】実施例１８．上記実施例１７においては、
予め前記フィルタ制御部からフィルタ処理制御を施され
た予測誤差信号のアクティビティとフレーム内予測によ
る入力画像信号のアクティビティとを比較し、何れか最
も小さいアクティビティを持つ信号のアクティビティに
基づいて符号化制御信号４２を導出したが、予め前記フ
ィルタ制御部からフィルタ処理制御を施された予測誤差
信号のアクティビティとフレーム内予測による入力画像
信号のアクティビティとの比較を行う際に少なくとも何
れか一つのアクティビティに重み付けを行ってもよい。

【０１１５】図３６はこの実施例の一例を示す図であ
る。この図３６で特徴となる点は、フィルタ制御部２１
から出力されるフィルタ制御信号２３が符号化制御部４
１に入力されている点である。このフィルタ制御信号２
３は符号化制御部４１に入力されると、図２４に示した
重み付け回路４６ａに入力される。重み付け回路４６ａ
はこのフィルタ制御信号２３を解析することにより、適
応フィルタ２２がオンまたはオフされていることを判定
することができる。従って、例えば、適応フィルタ２２
がオンされた予測信号２４に基づく予測誤差信号１５が
符号化制御部４１に入力される場合には、重み付けを行
い、適応フィルタ２２がオフされた予測信号２４に基づ
く予測誤差信号１５が符号化制御部４１に入力される場
合には重み付けを行わないという制御を行なうことが可
能となる。なお、この重み付けの制御はオン、オフばか
りでなく、フィルタ制御信号２３の値によりダイナミッ
クに重み付けの値を変更することも可能である。

【０１１６】実施例１９．上記実施例１０においては、
フィルタ制御部２１で入力信号１２とフレームメモリ１
からの信号との差に相当する情報を入力画像信号１２で
正規化してフィルタ制御信号２３を決定していたが、正
規化せずに差に相当する情報そのものの大小に基づいて
フィルタ制御信号２３を出力してもよい。

【０１１７】実施例２０．上記実施例１０においては、
フィルタ制御部２１で入力信号１２とフレームメモリ１
からの信号との差に相当する情報を入力信号１２で正規
化してフィルタ制御信号２３を決定していたが、フィル
タ制御部２１で入力信号１２とフレームメモリ１からの
信号との差に相当する情報によりフィルタ制御信号２３
を決定してもよい。

【０１１８】実施例２１．上記実施例１０においては、
フィルタ制御部２１で入力画像信号１２とフレームメモ
リ１からの信号との差に相当する情報を入力画像信号１
２で正規化してフィルタ制御信号２３を決定していた
が、差に相当する情報を画像メモリ１からの信号で正規
化した結果により適応フィルタ２２へフィルタ制御信号
２３を出力してもよい。

【０１１９】実施例２２．上記実施例１０においては適
応フィルタ部２２をフレームメモリ１の後段に配置した
が、図３７に示すように適応フィルタ２２を加算器６の
後段に配置してもよい。この場合フィルタ処理をした局
部画像信号またはフィルタ処理をしない局部画像信号を
フレームメモリ１に書き込み、減算器３で入力信号１２
とフレームメモリ１より出力される予測信号２４との減
算を行い予測誤差信号１５を発生させて符号化制御を行
う。

【０１２０】実施例２３．また、フレームメモリ１は画
像フレーム単位に限らずフィールド単位でもよく、また
複数枚数もつ場合にも同様の処理が可能である。

【０１２１】実施例２４．また、フィルタ制御部および
符号化制御部を統合して新たな符号化制御部として統括
的に制御を行ってもよい。図３８はこの実施例の一例を
示す図である。この図で特徴となるのは符号化制御・フ
ィルタ制御部５０が設けられている点である。この符号
化制御・フィルタ制御部は前述した実施例のフィルタ制
御部２１と符号化制御部４１を統合化したものである。
前述したようにフィルタ制御部２１及び符号化制御部４
１はともに入力した信号のアクティビティを用いて動作
しているため、これらアクティビティを計算する部分を
共有化することにより小型の装置を得ることが可能にな
る。また、アクティビティの計算が一箇所で統括的に行
われるため、装置全体の制御が容易に行われるようにな
る。

【０１２２】実施例２５．また、上記実施例１０におい
ては、動きベクトル検出部２を設けた構成としたが、装
置簡素化により例えば常に動き量が零として動きベクト
ル検出部２を設けないときにも同様の処理が可能であ
る。

【０１２３】実施例２６．また、上記実施例９〜２５に
おいて、前述の符号化制御部４１または符号化制御・フ
ィルタ制御部５０に、符号化部４より出力される符号化
データに基づいたフィードバック制御を組み合せて符号
化制御を行ってもよい。図３９は、実施例９に示した符
号化制御部４１に対して、フィードバック制御を行う場
合を示す図である。図において、１００は符号化部４よ
り出力される符号化データを記憶する送信バッファ、１
６０は送信バッファ１００から出力される送信信号、１
０１は送信バッファ１００からフィードバックされるフ
ィードバック信号である。符号化制御部４１は、フィー
ドバック信号１０１により符号化制御信号４２を制御す
る。例えば、フィードバック信号１０１が送信バッファ
のデータ占有率を示すものとすると、データ占有率が高
い時は符号化部４の符号化量が少なくなるように符号化
制御信号４２を出力する。逆に、データ占有率が低い時
は符号化部４の符号化量が多くなるように符号化制御信
号４２を出力する。

【０１２４】実施例２７．また、上記実施例において
は、信号アクティビティとして、信号に基づく特徴とし
て、信号の最大値と最小値の差あるいは信号平均値から
の差分絶対値和あるいは差分自乗和を用いる場合を示し
たが、このアクティビティとは信号に基づいて求められ
た特徴の一例であり、前述したような信号に基づく特徴
として、信号の最大値と最小値の差あるいは信号平均値
からの差分絶対値和あるいは差分自乗和を用いる場合に
限らずその他の差分信号やあるいは分散を用いることに
より同様の効果を奏することが可能である。

【０１２５】実施例２８．また、実施例１から２７で
は、８×８画素の画像データを処理単位とする場合につ
いて示したが、１６×１６画素あるいは３２×３２画素
あるいは８×１６画素等のその他の処理単位を用いる場
合であっても構わない。

【０１２６】実施例２９．また、実施例１から２７では
信号およびデータとして画像を扱っていたが、レーダや
音声等の信号やデータを扱ってもよく、本発明は画像デ
ータに限定されるものではない。

【０１２７】

【発明の効果】第１〜第１７の発明は以上説明したよう
に構成されているので、以下に記載するような効果を奏
する。

【０１２８】フィルタ制御部において入力信号とフレー
ムメモリからの信号の差異情報を用いて、高域成分をカ
ットするフィルタ強度を変化させることにより、符号化
すべき信号に高周波成分が残存せず符号化効率が向上す
る。

【０１２９】又、動きに関係なくフィルタ処理を行うた
め、動領域においても視覚的解像度を低下させることが
ない。又、静領域においても視覚的に知覚されにくい高
周波成分を除去することにより、視覚的に良好な符号化
画像を得ることができる。

【０１３０】又、予測に用いる画像に量子化誤差が多く
含まれている場合においても、フィルタ処理により高域
周波数成分が除去され、符号化効率が向上する。

【０１３１】又、複数のフィルタ強度が異なる高域成分
除去フィルタを用いることにより、常に符号化ループゲ
インが小さくなるような予測ができ、符号化効率が向上
する。

【０１３２】画素当りの誤差情報により符号化誤差を制
御することにより、常に符号化誤差の少ない復号化画像
が生成され、次フレーム以降に渡る予測が効率よく行え
る。

【０１３３】また第１８〜第２７の発明は以上説明した
ように構成されているので、以下に記載するような効果
を奏する。

【０１３４】符号化制御部において入力信号と予測誤差
信号のアクティビティに基づいて符号化制御信号を導出
することにより、符号化効率を向上させることができ
る。

【０１３５】符号化制御部において取り扱うアクティビ
ティに対して重み付けを行うことにより、符号化処理装
置の要求や処理する画像に応じて、選択された信号の発
生確率を制御できる。

【０１３６】動きに関係なくフィルタ処理および符号化
制御信号の導出を行うため、動領域においても視覚的解
像度を低下させることなく、静領域においても視覚的に
知覚されにくい高周波成分を除去することにより、視覚
的に良好な符号化画像を得ることができる。

【０１３７】予測に用いる画像に量子化誤差が多く含ま
れている場合においても、フィルタ処理で高域周波数成
分を除去し、符号化制御部において最小のアクティビテ
ィを持つ信号に基づいて符号化制御信号を導出すること
により、符号化効率が向上する。

【０１３８】符号化制御部において複数のモードの信号
のアクティビティの中から最小のアクティビティを持つ
モードの信号に基づいて符号化制御信号を導出すること
により、常に符号化ループゲインが小さくなるような予
測ができ、符号化効率が向上する。

【図面の簡単な説明】

【図１】 この発明の一実施例のフレーム間符号化処理
方式のブロック図である。

【図２】 この発明の一実施例におけるフィルタ制御部
のブロック図である。

【図３】 この発明の一実施例における差異情報の算出
方法を示す図である。

【図４】 この発明の一実施例における信号アクティビ
ティを説明するための図である。

【図５】 この発明の一実施例における信号アクティビ
ティを説明するための図である。

【図６】 この発明の一実施例のフィルタ制御部ｏｎ／
ｏｆｆ判定フロー図である。

【図７】 この発明の一実施例のフィルタ制御部ｏｎ／
ｏｆｆ判定フロー図である。

【図８】 この発明の一実施例のフィルタ制御部ｏｎ／
ｏｆｆ判定フロー図である。

【図９】 この発明の一実施例における１次元、２次
元、３次元のフィルタ処理を説明するための図である。

【図１０】 この発明の一実施例における処理単位をま
たがったフィルタリング処理を説明するための図であ
る。

【図１１】 この発明の一実施例における適応フィルタ
の動作を説明するための図である。

【図１２】 この発明の一実施例における適応フィルタ
の出力例を説明するための図である。

【図１３】 この発明の実施例２におけるフレーム間符
号化処理方式のブロック図である。

【図１４】 この発明の実施例３におけるフレーム間符
号化処理方式のブロック図である。

【図１５】 この発明の実施例４におけるフレーム間符
号化処理方式のブロック図である。

【図１６】 この発明の実施例５におけるフレーム間符
号化処理方式のブロック図である。

【図１７】 この発明の実施例５におけるフィルタ制御
部のブロック図である。

【図１８】 この発明の実施例５における符号化部の動
作を説明するための図である。

【図１９】 この発明の実施例６におけるフレーム間符
号化処理方式のブロック図である。

【図２０】 この発明の実施例６における制御部のブロ
ック図である。

【図２１】 この発明の実施例７におけるフレームとフ
ィールドの関係を説明するための図である。

【図２２】 この発明の実施例９におけるフレーム間符
号化処理方式のブロック図である。

【図２３】 この発明の実施例９における符号化制御部
のブロック図である。

【図２４】 この発明の実施例９におけるアクティビテ
ィ比較選択部のブロック図である。

【図２５】 この発明の実施例１０におけるフレーム間
符号化処理方式のブロック図である。

【図２６】 この発明の実施例１０における重み付け回
路の動作を説明するための図である。

【図２７】 この発明の一実施例の重み付け回路の処理
フロー図である。

【図２８】 この発明の実施例１２における重み付け回
路の処理フロー図である。

【図２９】 この発明の一実施例の比較器の処理フロー
図である。

【図３０】 この発明を示す一実施例の制御信号発生器
の処理フロー図である。

【図３１】 この発明を示す一実施例の制御信号発生器
のメモリテーブルを示す図である。

【図３２】 この発明の実施例１３におけるフレーム間
符号化処理方式のブロック図である。

【図３３】 この発明の実施例１５におけるフレーム間
符号化処理方式のブロック図である。

【図３４】 この発明の実施例１５における符号化制御
部のブロック図である。

【図３５】 この発明の実施例１５におけるアクティビ
ティ比較選択部のブロック図である。

【図３６】 この発明の実施例１８におけるフレーム間
符号化処理方式のブロック図である。

【図３７】 この発明の実施例２２におけるフレーム間
符号化処理方式のブロック図である。

【図３８】 この発明の実施例２４におけるフレーム間
符号化処理方式のブロック図である。

【図３９】 この発明の実施例２６におけるフレーム間
符号化処理方式のブロック図である。

【図４０】 従来例のフレーム間符号化処理方式のブロ
ック図である。

【図４１】 従来例のフレーム間符号化処理方式におい
てフィルタをＯＮ／ＯＦＦさせた場合の動作を説明する
ための図である。

【図４２】 従来例のフレーム間符号化処理方式のフィ
ルタの動作を説明するための図である。

【図４３】 従来例のフレーム間符号化処理方式のフィ
ルタの動作を説明するための図である。

【符号の説明】

１ フレームメモリ、２ 動きベクトル検出部、３ 減
算器、４ 符号化部、５ 局部復号化部、６ 加算器、
７ フィルタ、８ フィルタ制御部、１１ １フレーム
前の画像信号、１２ 入力信号、１３ 動きベクトル、
１４ 動き補償予測信号、１５ 予測誤差信号、１６
符号化された誤差信号、１７ 局部復号誤差信号、１８
局部復号信号、１９ 平滑化された局部復号信号、２
０ 制御信号、２１ フィルタ制御部、２２ 適応フィ
ルタ部、２３ フィルタ制御信号、２４ 予測信号、２
５ 画素当たりの差異情報、３０ 差情報演算部、３１
判定部、３２ 差異情報、３３ 画素当たり差情報演算
部、４１ 符号化制御部、４２ 符号化制御信号、４５
アクティビティ算出部、４６ アクティビティ比較選
択部、１５０ 選択信号。

───────────────────────────────────────────────────── フロントページの続き (72)発明者 嶋田 敏明 鎌倉市大船五丁目１番１号 三菱電機株式 会社通信システム研究所内 Ｆターム(参考） 5C059 MA05 MA23 TA46 TB08 TC02 TC03 TC10 TD02 TD03 TD05 TD06 UA02 UA12 UA33

Claims (5)

【特許請求の範囲】
1. 【請求項１】 入力信号のフレーム間符号化を行なう符
   号化部と、符号化された信号を復号する復号部と、復号
   された１又は複数個のフレーム又はフィールドに相当す
   る信号を記憶するフレームメモリとを備えた復号化ルー
   プを設けて、入力信号のフレーム間の符号化を行うフレ
   ーム間符号化処理装置において、 少なくとも、入力信号と前記フレームメモリからの信号
   のいずれか一方の信号における画素信号間の相対的な特
   徴である信号アクティビティを求め、前記符号化部へ出
   力する制御部を設けたことを特徴とするフレーム間符号
   化処理装置。
2. 【請求項２】 前記制御部は、少なくとも、入力信号と
   前記フレームメモリからの信号のいずれか一方の信号に
   おける画素信号の最大値と最小値との差を信号アクティ
   ビティとすることを特徴とする請求項１記載のフレーム
   間符号化処理装置。
3. 【請求項３】 前記制御部は、少なくとも、入力信号と
   前記フレームメモリからの信号のいずれか一方の信号に
   おける画素信号の信号平均値からの差分絶対値和または
   差分自乗和を信号アクティビティとすることを特徴とす
   る請求項１記載のフレーム間符号化処理装置。
4. 【請求項４】 前記符号化部は、前記制御部からの信号
   アクティビティに基づいて量子化ステップサイズを変更
   することを特徴とする請求項１から３までのいずれかの
   請求項に記載のフレーム間符号化処理装置。
5. 【請求項５】 入力信号と、フレームメモリに記憶され
   た予測信号とを用いて、入力信号のフレーム間の符号化
   を行うフレーム間符号化処理方法において、 少なくとも、入力信号と前記フレームメモリからの予測
   信号のいずれか一方の信号における画素信号間の相対的
   な特徴である信号アクティビティを求め、求めた信号ア
   クティビティに基づいて前記符号化を制御することを特
   徴とするフレーム間符号化処理方法。