JP2586720B2 - 動画像信号の符号化方式 - Google Patents

Description

【発明の詳細な説明】 （産業上の利用分野） 本発明は、帯域圧縮技術を用いた動画像信号の符号化
方式に関する。

（従来の技術） 従来の帯域圧縮技術を用いた動画像信号の符号化方式
としては、たとえば1989年電子情報通信学会春季全国大
会、資料番号Ｄ−233に記載の「ISDN対応カラー動画像
テレビ電話装置」などが知られている。この動画像信号
の符号化方式では、画面内の顔領域を抽出してマップを
作成する。そして、画像符号化部ではフレーム間フレー
ム内適応予測を行い、この時もし顔の領域であれば最終
段まで符号化をし、それ以上の領域であれば１つ前の段
階で符号化を止めることにより符号量を減らしている。

（発明が解決しようとする課題） しかしながら上述した従来の動画像信号の符号化方式
では、顔以外の背景の部分も粗く符号化するから背景部
分の雑音により無駄な情報が発生してしまう。また、連
続する画面間で背景部分から顔部分に変化したとする
と、粗い符号化から細かい符号化に変るから、予測誤差
信号がここでもかなり発生してしまい、無駄な情報を符
号化することになってしまう。この結果符号化効率が低
下してしまう。

（課題を解決するための手段） 本発明に係る第１の動画像信号の符号化方式は、画面
上の相関を利用した動画像信号の符号化方式であって、
入力する動画像信号の１画面を複数画素からなるブロッ
クに分割し、ブロック毎に前画面との間における動きを
検出し、動きが検出されたブロックは有効ブロックと
し、動きが検出されなかったブロックは無効ブロックと
してフレーム毎に第１の有効ブロックマップを作成する
手段と、該第１の有効ブロックマップに対して第１の重
みづけを行う手段と、前画面における第４の有効ブロッ
クマップに対して第２の重みづけを行う手段と、前記第
１の重み付けを行った第１の有効ブロックマップと前記
第２の重みづけを行った第４の有効ブロックマップとを
加算合成して重みづけが形成された第２の有効ブロック
マップを得る手段と、該第２の有効ブロックマップ内の
各ブロックの近傍のブロックを参照し、近傍のブロック
および対象ブロックの値の合計値が予め定められた第１
の闘値以上のときには当該対象ブロックを有効ブロック
とし、第１の闘値未満のときには当該対象ブロックを無
効ブロックとするセグメンテーションを行って第３の有
効ブロックマップを得る手段と、該第３の有効ブロック
マップ内の無効ブロックについて近傍のブロックを参照
し、近傍のブロックの値の合計値が予め定められた第２
の闘値以上のときには当該無効ブロックを有効ブロック
に置き替え、近傍のブロックの値の合計値が第２の闘値
未満のときには当該無効ブロックを無効ブロックのまま
として第４の有効ブロックマップを得る手段と、前記動
画像信号の入力時から前記第４の有効ブロックマップの
生成時までの時間の遅延を前記動画像信号に与える手段
と、遅延を与えられた前記動画像信号について、前記第
４の有効ブロックマップで有効ブロックとされた領域
を、画面間の相関、画面内の相関またはその両方を用い
て符号化を行う手段とを有することを特徴とする。

本発明に係る第２の動画像信号の符号化方式は、画面
間の相関を利用した動画像信号の符号化方式であって、
入力する動画像信号の１画面を複数画素からなるブロッ
クに分割し、ブロック毎に前画面との間における動きを
検出し、動きが検出されたブロックは有効ブロックと
し、動きが検出されなかったブロックは無効ブロックと
してフレーム毎に第１の有効ブロックマップを作成する
手段と、該第１の有効ブロックマップに対して第１の重
みづけを行う手段と、前画面における第４の有効ブロッ
クマップに対して第２の重みづけを行う手段と、前記第
１の重み付けを行った第１の有効ブロックマップと前記
第２の重みづけを行った第４の有効ブロックマップとを
加算合成して重みづけが成された第２の有効ブロックマ
ップを得る手段と、前記前画面における第４の有効ブロ
ックマップの有効ブロック数に対する前記第１の有効ブ
ロックマップの有効ブロック数が予め定められた第１の
闘値以上である場合には前記第２の有効ブロックマップ
内の各ブロックの近傍のブロックを参照し、近傍のブロ
ックおよび対象ブロックの値の合計値が予め定められた
第２の闘値以上のときには当該対象ブロックを有効ブロ
ックとし、第２の闘値未満のときには当該対象ブロック
を無効ブロックとして前記第２の有効ブロックマップか
ら第３の有効ブロックマップを得、前記前画面における
第４の有効ブロックマップの有効ブロック数に対する前
記第１の有効ブロックマップの有効ブロック数が予め定
められた第１の闘値未満である場合には前記第２の有効
ブロックマップ内の各ブロックの近傍のブロックを参照
し、近傍のブロックおよび対象ブロックの値が予め定め
られた第３の闘値以上のときには当該対象ブロックを有
効ブロックとし、第３の闘値未満のときには当該対象ブ
ロックを無効ブロックとして前記第２の有効ブロックマ
ップから第３の有効ブロックマップを得るセグメンテー
ションを行う手段と、該第３の有効ブロックマップ内の
無効ブロックについての近傍のブロックを参照し、近傍
のブロックの値の合計値が予め定められた第４の闘値以
上のときには当該無効ブロックを有効ブロックに置き替
え、近傍のブロックの値の合計値が第４の闘値未満のと
きには当該無効ブロックを無効ブロックのままとして第
４の有効ブロックマップを得る手段と、前記動画像信号
の入力時から前記第４の有効ブロックマップの生成時ま
での時間の遅延を前記動画像信号に与える手段と、遅延
を与えられた前記動画像信号について、前記第４有効ブ
ロックマップで有効ブロックとされた領域を、画面間の
相関、画面内の相関またはその両方に用いて符号化を行
う手段とを有することを特徴とする。

本発明に係る第３の動画像信号の符号化方式は、画面
間の相関を利用した動画像信号の符号化方式であって、
入力する動画像信号の１画面を複数画素からなるブロッ
クに分割し、ブロック毎に前画面との間における動きを
検出し、動きが検出されたブロクは有効ブロックとし、
動きが検出されなかったブロックは無効ブロックとして
フレーム毎に第１の有効ブロックマップを作成する手段
と、該第１の有効ブロックマップに対して第１の重みづ
けを行う手段と、前画面における第６の有効ブロックマ
ップに対して第２の重みづけを行う手段と、前記第１の
重み付けを行った第１の有効ブロックマップと前記第２
の重みづけを行った第６の有効ブロックマップとを加算
合成して重みづけが成された第２の有効ブロックマップ
得る手段と、該第２の有効ブロックマップ内の各ブロッ
クの近傍のブロックを参照し、近傍のブロックおよび対
象ブロックの値の合計値が予め定められた第１の闘値以
上のときには当該対象ブロックを有効ブロックとし、第
１の闘値未満のときには当該対象ブロックを無効ブロッ
クとするセグメンテーションを行って第３の有効ブロッ
クマップを得る手段と、該第３の有効ブロックマップ内
の無効ブロックについて近傍のブロックを参照し、近傍
のブロックの値の合計値が予め定められた第２の闘値以
上のときには当該無効ブロックを有効ブロックに置き替
え、近傍のブロックの値の合計値が第２の闘値未満のと
きには当該無効ブロックを無効ブロックのままとして第
４の有効ブロックマップを得る手段と、該第４の有効ブ
ロックマップの有効ブロック数が予め定められた第３の
闘値以上の場合は前記第４の有効ブロックマップの有効
ブロックを全て無効ブロックに置き換えて第５の有効ブ
ロックマップとし、前記第４の有効ブロックマップの有
効ブロック数が予め定められた第３の闘値未満の場合は
前記第４の有効ブロックマップをそのままで第５の有効
ブロックマップとする手段と、該第５の有効ブロックマ
ップを１フレーム時間遅延して第６の有効ブロックマッ
プを得る手段と、前記動画像信号の入力時から前記第４
の有効ブロックマップの生成時までの時間の遅延を前記
動画像信号に与える手段と、遅延を与えられた前記動画
像信号について、前記第４の有効ブロックマップで有効
ブロックとされた領域を、画面間の相関、画面内の相関
またはその両方を用いて符号化を行う手段とを有するこ
とを特徴とする。

（作用） テレビ電話などにおいては、背景部分は固定でおもに
話者が動くことから、話者の部分を切出して符号化を行
えば、背景などからの雑音によって発生する無駄な符号
化情報量を除去でき、符号化能率を上げることができ
る。

本発明においては、画面間での話者の動きを検出し、
動きがあった部分に対してセグメンテーション（動領域
の連結および切り落とし）を行うことにより、話者領域
を切出す。従ってまず前後の画面間での動きを検出する
必要がある。この前後の画面間での動きの検出方法とし
ては、動き補償の原理を用いるものがあり、たとえば二
宮らによる「動き補償フレーム間符号化方式」（信学論
（Ｂ）J63−Ｂ、11、pp.1140−1147、昭51−11）が知ら
れている。この方法は画面を小さなブロックに分割し、
各ブロック毎に記憶されている前画面の画像の中で、最
も高い相関をもつブロックを算出し、該当するブロック
間の位置の差（動ベクトル）と、この該当するブロック
間で空間的に同じ位置にある画素の振幅値の差（動き補
償予測誤差）とを伝送する方法である。本発明と動き補
償の動ベクトル検出方法とは直接関係はなく、動き補償
動ベクトルは、上記以外の方法で求められたものであっ
てもかまわない。

次に、本発明に係る第１および第２の動画像信号の符
号化方式における話者の切出し方について図面を参照し
ながら詳細に説明する。第１図の時刻t0,t1,t2に示すよ
うに話者が動いたと仮定する。そして、時刻t1と時刻t2
の画面間で動き補償を行い動きを求めると、第２図の矢
印で示される動ベクトルが求められる。ここで時刻t2と
時刻t3の画面間での動きがおもに□の部分だけであった
とすると、その動ベクトルは第７図（Ａ）の矢印で示す
様になる。背景部分に存在する孤立した矢印部分は、背
景の雑音により発生した動ベクトルであるとする。そし
て、動ベクトルが発生したブロックを有効ブロックと
し、動ベクトルが発生しなかったブロックを無効ブロッ
クとする。以上の処理によって得られた時刻t1,t2間の
有効ブロックマップを第３図（Ｂ）に、時刻t2,t3間の
有効ブロックマップを第７図（Ｂ）に示す。第３図
（Ｂ）および第７図（Ｂ）の黒く塗られた部分が有効ブ
ロックである。第３図（Ａ）は、時刻t0と時刻t1の画面
間で求められた第４の有効ブロックマップであるとす
る。そして、現画面の有効ブロックマップすなわち第１
の有効ブロックマップに第１の重みづけを行い、前画面
の有効ブロックマップである第４の有効ブロックマップ
に対しては第２の重みづけを行う。以下に重みづけの一
例を示す。例えば、前フレームの有効ブロックを１と
し、無効ブロックを０とする。現フレームの有効ブロッ
クを２とし、現フレームの無効ブロックを前フレームの
無効ブロックと同様に０とする。この様にして重みづけ
を行った前フレームの有効ブロックマップと、現フレー
ムの有効ブロックマップを加算合成し、第２の有効ブロ
ックマップを得る。以上の様な重みづけによって得た時
刻t2における第２の有効ブロックマップは、第４図
（Ａ）の様になる。次に、第４図（Ａ）の加算合成され
た第２の有効ブロックマップに対してセグメンテーショ
ンを行う。

本発明に係る第１の動画像信号の符号化方式における
セグメンテーションの一例を第４図、第５図を参照しな
がら説明する。例えば第５図のｋをセグメンテーション
の対象ブロックとすると、ブロックｋの近傍のブロック
a,b,c,d,e,f,g,hの値を参照する。すなわち第４図
（Ａ）の第２の有効ブロックマップの各ブロックの値を
参照する。近傍のブロックa,b,c,d,e,f,g,hおよびブロ
ックｋの値の合計値が予め定められた第１の闘値以上の
ときには対象ブロックｋを有効ブロックとし、近傍のブ
ロックa,b,c,d,e,f,g,hおよびブロックｋの値の合計値
が予め定められた第１の闘値未満のときには対象ブロッ
クｋを無効ブロックとする。

一方、本発明に係る第２の動画像信号の符号化方式に
おいては、前フレームの有効ブロック数の値すなわち第
４の有効ブロックマップ内の有効ブロック数を分母と
し、現フレームの有効ブロックマップである第１の有効
ブロックマップ内の有効ブロック数を分子としたときの
割合が、予め定められた第１の闘値以上の場合と、第１
の闘値未満の場合とではそのセグメンテーションが異な
る。たとえば、前記割合が前記第１の闘値以上である、
現フレームの有効ブロック数が前フレームの有効ブロッ
ク数と同程度または1/2以上の場合におけるセグメンテ
ーションの一例について説明する。第５図のｋをセグメ
ンテーションの対象ブロックとすると、ブロックｋの近
傍のブロクa,b,c,d,e,f,g,hの値を参照する。すなわち
第４図（Ａ）の第２の有効ブロックマップの値を参照
し、近傍のブロックa,b,c,d,e,f,g,hおよびブロックｋ
の値の合計値が予め定められた第２の闘値以上のときは
対象ブロックｋを有効ブロックとし、近傍のブロックa,
b,c,d,e,f,g,hおよびブロックｋの値の合計値が予め定
められた第２の闘値未満のときは対象ブロックｋを無効
ブロックとする。

以上に説明したセグメンテーションによって得られた
本発明に係る第１および第２の動画像信号の符号化方式
における第３の有効ブロックマップを第４図（Ｂ）示
す。第３の有効ブロックマップには、孤立無効ブロック
が発生する場合がある。従って、第３の有効ブロックマ
ップ内の有効ブロック領域のみを符号化すると、有効ブ
ロック領域内に孤立して存在する無効ブロック領域が符
号化されないからその孤立無効ブロック領域に符号化歪
が発生してしまい、非常に見苦しい符号化画像となって
しまうことがある。そこで、孤立無効ブロック領域の除
去を行う。孤立無効ブロック領域の除去方法としては、
セグメンテーションと同様な処理を無効ブロックを対象
に行う。本発明に係る第１の動画像信号の符号化方式で
は、無効ブロックの近傍のブロックを参照し、近傍のブ
ロックの値の合計値が予め定められた第２の闘値以上の
ときに、その対象となる無効ブロックの値を有効ブロッ
クを示す値に置き替える。一方、本発明に係る第２の動
画像信号の符号化方式においては、無効ブロックの近傍
のブロックを参照し、近傍のブロックの値の合計値が予
め定められた第４の闘値以上のときに、その対象となる
無効ブロックの値を有効ブロックを示す値に置き替え
る。以上の処理により第４図（Ｂ）で孤立無効ブロック
であった領域を除去し、第４の有効ブロックマップを得
る。孤立無効ブロック領域を除去した第４の有効ブロッ
クマップを第６図に示す。そして、第６図の有効ブロッ
クの領域内すなわち話者領域内の動画像信号を画面間の
相関または画面内の相関のいづれか一方あるいはその両
方を用いて符号化することにより、背景などの雑音によ
り発生する無駄な情報を容易に削除でき、符号化効率を
高めることができる。

前述した本発明における第２の動画像信号の符号化方
式におけるセグメンテーションでは、現フレームの有効
ブロック数と前フレームの有効ブロック数との割合が前
記第１の闘値以上、すなわち現フレームの有効ブロック
数が前フレームの有効ブロック数と同程度または1/2以
上の場合であったが、時刻t3のときの様に前フレームの
有効ブロック数と現フレームの有効ブロック数との割合
が前記第１の闘値未満であり、現フレームの有効ブロッ
ク数が前フレームの有効ブロック数よりもかなり少ない
場合、たとえば1/2未満の場合におけるセグメンテーシ
ョンの一例について第６図、第７図、第８図、第９図を
参照しながら説明する。第６図の時刻t2で求められた第
４の有効ブロックマップと第７図（Ｂ）の時刻t3におけ
る第１の有効ブロックマップのそれぞれに前記第１およ
び第２の重みづけを行って合成すると、第８図（Ａ）に
示す第２の有効ブロックマップが得られる。この第２の
有効ブロックマップに対して前記第２の闘値にもとづい
てセグメンテーションを行うと、第８図（Ｂ）の斜線で
示す第３の有効ブロックマップが得られる。そして、第
３の有効ブロックマップに対して前記第４の闘値にもと
づいて孤立無効ブロック領域の除去を行い、第４の有効
ブロックマップを得る。このとき、時刻t3において求め
られた第３の有効ブロックマップには孤立無効ブロック
が存在しないから、第４の有効ブロックマップは第３の
有効ブロックマッブと同じになる。そして、この第４の
有効ブロックマップ内の有効ブロック領域内のみ動画像
信号の符号化を行う。しかしながら、この第４の有効ブ
ロックマップの有効ブロック領域は、第８図（Ｂ）に示
すように話者の胸の部分や頭部右上の部分が欠けてしま
っているから、このままで符号化を行うと胸の部分や頭
部に未符号化領域が発生し、符号化画像の話者領域に不
連続な部分が発生してしまって符号化画像が見苦しくな
ることが考えられる。従って、時刻t3のときの様に前フ
レームの有効ブロック数と現フレームの有効ブロック数
との割合が前記第１の闘値未満で現フレームの有効ブロ
ック数が少ない場合には、セグメンテーションにおける
闘値を切替えることによって話者領域の欠損を防ぐ。た
とえば、第８図（Ａ）の重みづけがなされた第２の有効
ブロックマップについてセグメンテーションを実行する
際に、ｋが０以上であったらセグメンテーションの対象
ブロックであるｋを有効ブロックとするように、セグメ
ンテーションにおける闘値の値を十分低くすると、第９
図に示すような第３の有効ブロックマップを得ることが
でき、話者領域の欠損を防げる。このときのセグメンテ
ーションの闘値を第３の闘値とする。以上の様に前フレ
ームの有効ブロック数と現フレームの有効ブロック数と
の割合が、前記第１の闘値以上のときには、前記第２の
闘値を選択してセグメンテーションを行い、前フレーム
の有効ブロック数と現フレームの有効ブロック数との割
合が前記第１の闘値未満であって現フレームの有効ブロ
ック数が前フレームの有効ブロック数よりもかなり少な
い場合には、前記第３の闘値を選択してセグメンテーシ
ョンを行う。そして、第６図あるいは第９図の有効ブロ
ック領域内すなわち話者領域内の動画像信号を画面間の
相関または画面内の相関のいづれか一方あるいはその両
方を用いて符号化することにより、背景などの雑音によ
り発生する無駄な情報を容易に削除でき、符号化効率を
高めることができる。以上に述べたことから明らかな様
に、本発明に係る第１の動画像信号の符号化方式と本発
明に係る第２の動画像信号の符号化方式とは、前記第２
の有効ブロックマップから前記第３の有効ブロックマッ
プを得るときのセグメンテーションに相違点がある。

次に、本発明に係る第３の動画像信号の符号化方式に
おける話者の切出し方について図面を参照しながら詳細
に説明する。第10図の時刻t0,t1,t2に示すように話者が
動いたと仮定する。そして、時刻t0と時刻t1の画面間で
の動きを示す動ベクトルを求めると、第11図の矢印で示
される領域が求められる。ここで背景部分の孤立した矢
印部分は、背景の雑音により発生した動ベクトルである
とする。そして、動ベクトルが発生したブロックを有効
ブロックとし、動ベクトルが発生しなかったブロックを
無効ブロックとする。以上の処理によって得られた時刻
t1における有効ブロックマップを第12図（Ｂ）に示す。
第12図（Ｂ）の黒く塗られた部分が有効ブロックであ
る。第12図（Ａ）は、時刻t0と時刻t0よりも１画面前の
時刻t0−１の画面間で求められた第６の有効ブロックマ
ップであるとする。そして、現画面の有効ブロックマッ
プ（第12図（Ｂ））すなわち第１の有効ブロックマップ
に第１の重みづけを行い、前画面の有効ブロックマップ
（第12図（Ａ））である第６の有効ブロックマップに対
しては第２の重みづけを行う。以下に重みづけの一例を
示す。例えば、前フレームの有効ブロックを１とし、無
効ブロックを０とする。現フレームの有効ブロックを２
とし、現フレームの無効ブロックを前フレームの無効ブ
ロックと同様に０とする。この様にして重みづけを行っ
た前フレームの有効ブロックマップと、現フレームの有
効ブロックマップとを加算合成し、第２の有効ブロック
マップを得る。第２の有効ブロックマップは、第12図
（Ｃ）の様になる。次に、第12図（Ｃ）の加算合成され
た第２の有効ブロックマップに対してセグメンテーショ
ンを行う。このセグメンテーションの一例を第５図、第
12図を参照しながら説明する。例えば第５図のｋをセグ
メンテーションの対象ブロックとすると、ブロックｋの
近傍のブロックa,b,c,d,e,f,g,hの値を参照する。すな
わち第12図（Ｃ）の第２の有効ブロックマップの値を参
照する。近傍のブロックa,b,c,d,e,f,g,hおよびブロッ
クｋの値の合計値が予め定められた第１の闘値以上のと
きには、対象ブロックｋを有効ブロックとし、近傍のブ
ロックa,b,c,d,e,f,g,hおよびブロックｋの値の合計値
が予め定められた第１の闘値未満のときには、対象ブロ
ックｋを無効ブロックとする。

以上に述べたセグメンテーションによって得られた第
３の有効ブロックマップを第12図（Ｄ）示す。第３の有
効ブロックマップには、場合によって動き部分に孤立無
効ブロック領域が発生することがある。これは、第１の
有効ブロックマップを得る際、画面間で差分値が動ベク
トル検出の闘値よりも少し低かったブロック、たとえば
輝度変化が少なく絵柄が平坦なブロックなどは動ベクト
ルが検出されなくなり無効ブロックとなる。その結果、
動き部分に孤立した無効ブロック領域が発生することが
ある。孤立無効のブロック領域の一例を第13図に示す。
第13図の様に、孤立無効ブロック領域を含む第13の有効
ブロックマップ内の有効ブロック領域のみ動画像信号の
符号化を実行すると、有効ブロック領域内の孤立した無
効ブロック領域は符号化が行われないから孤立無効ブロ
ックの領域と周囲の領域とで符号化画像の連続性がなく
なり、符号化歪が発生してしまう。その結果、非常に見
苦しい符号化画像となってしまうことがある。そこで、
孤立無効ブロック領域の除去を行う。孤立無効ブロック
領域の除去方法としては、セグメンテーションと同様な
処理を無効ブロックを対象に行う。すなわち無効ブロッ
クの近傍のブロックを参照し、近傍のブロックの値の合
計値が予め定められた第２の闘値以上のときにはその対
象となる無効ブロックの値を有効ブロックを示す値に置
き替える。以上の処理により第13図で孤立無効ブロック
であった領域を除去し、第４の有効ブロックマップを得
る。第12図（Ｄ）の第３の有効ブロックマップには孤立
無効ブロック領域がないから、第４の有効ブロックマッ
プは第12図（Ｄ）に示す第３の有効ブロックマップと同
様である。

次に、時刻t2における処理について説明する。時刻t1
と時刻t2の画面間での動きを示す動ベクトルを求めて第
１の有効ブロックマップを作成すると、第14図（Ａ）に
示す様になる。この第１の有効ブロックマップに対して
第１の重みづけを行う。そして前画面である時刻t1にお
ける第４の有効ブロックマップは第12図（Ｄ）であるか
ら、第12図（Ｄ）の第４の有効ブロックマップに対して
第２の重みづけを行って、第１の重みづけを行った第１
の有効ブロックマップと加算合成すると、第14図（Ｂ）
に示す第２の有効ブロックマップが得られる。第14図
（Ｂ）と第２の有効ブロックマップに対して前記セグメ
ンテーションを行うと、第14図（Ｃ）に示す第３の有効
ブロックマップが得られる。次に、第３の有効ブロック
マップに対して孤立無効ブロック領域の除去を行う。第
14図（Ｃ）の第３の有効ブロックマップには孤立無効ブ
ロック領域が存在しないので、第３の有効ブロックマッ
プをもって第４の有効ブロックマップとし、当該第４の
有効ブロックマップの黒く塗られた有効ブロックがセグ
メンテーションによって得られた話者領域となる。時刻
t2における実際の話者領域は画面のほぼ左半分であるの
に対して、セグメンテーションによって得られた話者領
域は画面の左半分の背景部分にたいぶはみだしているか
ら、第14図（Ｃ）の第４の有効ブロックマップをこのま
ま用いると背景の雑音も符号化してしまう可能性があ
り、あまり好ましくない。時刻t1,t2の場合の様に動き
が大きく、セグメンテーションで得られた有効ブロック
の数が多い場合には、前画面における有効ブロックマッ
プの影響を受けて有効ブロックが前画面の話者領域にふ
くらんでしまうためである。従って、画面間での動きが
大きい場合、すなわち第４の有効ブロックマップの有効
ブロック数が予め定められた第３の闘値以上の場合に
は、第４の有効ブロックマップに対してリセットを行
い、第４の有効ブロックマップ内の有効ブロックを全て
無効ブロックに置き換えて第５の有効ブロックマップと
する。第５の有効ブロックマップは１フレーム時間遅延
されて第６の有効ブロックマップとなり、次の時刻にお
いてセグメンテーションに用いられる。たとえば、第12
図（Ａ）を前フレームの第４の有効ブロックマップと
し、第12図（Ｂ）を現フレームの有効ブロックマップす
なわち第１の有効ブロックマップとする。そして、時刻
t1において得られた第４の有効ブロックマップの有効ブ
ロック数が前記第３の闘値以上であったとすると、第４
の有効ブロックマップ内の有効ブロックを全て無効ブロ
ックに置き換えて第５の有効ブロックマップとするか
ら、第５の有効ブロックマップが１フレーム時間遅延さ
れて得られる時刻t2における第６の有効ブロックマップ
も全て無効ブロックとなる。その結果、時刻t2における
第１の有効ブロックマップが第14図（Ａ）であったとす
ると、重みづけが行われた第２の有効ブロックマップは
第14図（Ｄ）の様になり、この第２の有効ブロックマッ
プに対して前記セグメンテーションを行うと、第14図
（Ａ）に示す様な第３の有効ブロックマップが得られ
る。この第３の有効ブロックマップには孤立無効ブロッ
ク領域が含まれていないので、第３の有効ブロックマッ
プがそのまま第４の有効ブロックマップとなり、背景部
分を削除することができる。

以上の様にして得た第４の有効ブロックマップの有効
ブロック領域内すなわち話者領域内の動画像信号を画面
間の相関または画面内の相関のいづれか一方あるいはそ
の両方を用いて符号化することにより、背景などの雑音
により発生する無駄な情報を容易に削除でき、符号化効
率を高めることができる。

前述した本発明に係る第１、第２および第３の動画像
信号の符号化方式における各闘値および重みづけの値に
ついては、予め統計的に調べた最適値を用いる。一例と
して第１の重み付けで現フレームの有効ブロックを２、
無効ブロックを０とし、第２の重み付けで全フレームの
有効ブロックを１、無効ブロックを０とした場合には、
第１の闘値を８、第２の闘値を５とすることで実現でき
る。また、セグメンテーションおよび孤立無効ブロック
領域除去における参照のブロックの配置は、前述したも
の以外およびブロック数でもかまわない。

（実施例） 次に、図面を参照しながら本発明について詳細に説明
する。

第15図に本発明に係る第１の動画像信号の符号化方式
の一実施例を示す。入力する動画像信号は、線10を介し
て動ベクトル検出部１および遅延部８に供給される。動
ベクトル検出部１は、前画面の動画像信号を蓄えてお
き、新たに線10を介して入力する動画像信号を水平方向
ｎ画素×垂直方向ｎ画素の複数画素からなるブロックに
分割し、それぞれブロック毎に記憶されている前画面の
画像との間で最も高い相関をもつブロックを算出し、該
当するブロック間の差を示す動ベクトルを求め、動ベク
トルが発生したブロックを有効ブロックとし、動ベクト
ルが発生しなかったブロックを無効ブロックとして第１
の有効ブロックマップを得る。動ベクトル検出部１で得
られた第１の有効ブロックマップは、重みづけ部２に出
力される。重みづけ部２は、動ベクトル検出部１から入
力する第１の有効ブロックマップに対して、予め定めら
れた第１の重みづけを行う。重みづけ部２で重みづけが
成された第１の有効ブロックマップは、加算器４に出力
される。加算器４は、重みづけ部２から入力する第１の
有効ブロックマップと重みづけ部３から入力する前画面
の動画像信号における第４の有効ブロックマップとを加
算し、重みづけが成された第２の有効ブロックマップを
得る。加算器４で得られた第２の有効ブロックマップ
は、セグメンテーション部５に出力される。セグメンテ
ーション部５は、加算器４から入力する第２の有効ブロ
ックマップ内の全てのブロックに対してセグメンテーシ
ョン処理を行う。例えば、第５図に示す様にセグメンテ
ーションの対象となるブロックをｋとすると、ｋおよび
ｋの近傍のa,b,c,d,e,f,g,hのブロックの値を参照し、
それらの値の合計値が予め定められた第１の闘値以上で
あればそのブロックｋを有効ブロックとし、それらの値
の合計値が第１の闘値未満の場合にはそのブロックｋを
無効ブロックとして第３の有効ブロックマップを得る。
セグメンテーション部５で得られた第３の有効ブロック
マップは、孤立無効ブロック除去部６に出力される。孤
立無効ブロック除去部６は、セグメンテーション部５か
ら入力する第３の有効ブロックマップに含まれている無
効ブロックに対して孤立無効ブロック除去の処理を行
い、有効ブロックの連結を行う。孤立無効ブロック除去
の処理は、セグメンテーションと同様に対象となる無効
ブロックの近傍のブロックを参照し、近傍のブロックの
値の合計値が予め定められた第２の闘値以上の場合はそ
の無効ブロックを有効ブロックとする。近傍のブロック
の値の合計値が予め定められた第２の闘値未満の場合
は、その無効ブロックは無効ブロックのままとする。

以上の処理によって孤立無効ブロック領域の除去を行
った第４の有効ブロックマップを得る。孤立無効ブロッ
ク除去部６で得られた第４の有効ブロックマップは、重
みづけ部および符号化部７に出力される。重みづけ部３
は、孤立無効ブロック除去部６から与えられた第４の有
効ブロックマップに対して、第２の重みづけを行って、
加算器４に重みづけが成された第４の有効ブロックマッ
プを出力する。遅延部８は、入力する動画像信号に対し
て入力動画像信号が供給されてから第４の有効ブロック
マップが符号化部７に与えられるまでの遅延時間補償を
行い、第４の有効ブロックマップと入力動画像信号の時
間合せを行う。遅延部８の出力である時間補償された入
力動画像信号は、符号化部７に出力される。符号化部７
は、孤立無効ブロック除去部６から入力する第４の有効
ブロックマップ内の有効ブロック領域すなわち話者領域
であると示されているブロック部分についてのみ遅延部
８から入力する動画像信号の符号化を行い、無効ブロッ
クで示される背景部分の動画像信号については符号化を
行わない。符号化の方法としては、動き補償などの画面
間の相関を利用した方法、または直交交換などの画面内
の相関を利用した方法、あるいは画面間および画面内の
両方の相関を利用した方法を用いる。前述した各闘値に
ついては、予め統計的に調べた最適値を用いる。

第16図に本発明に係る第２の動画像信号の符号化方式
の一実施例を示す。入力する動画像信号は、線10を介し
て動ベクトル検出部１および遅延部８に供給される。動
ベクトル検出部１は、前画面の動画像信号を蓄えてお
き、新たに線10を介して入力する動画像信号を水平方向
ｎ画素×垂直方向ｎ画素の複数画素からなるブロックに
分割し、それぞれブロック毎に記憶されている前画面の
画像との間で最も高い相関をもつブロックを算出し、該
当するブロック間の位置の差を示す動ベクトルを求め、
動ベクトルが発生したブロックを有効ブロックとし、動
ベクトルが発生しなかったブロックを無効ブロックとし
て第１の有効ブロックマップを得る。動ベクトル検出部
１で得られた第１の有効ブロックマップは、重みづけ部
２および比率判定部８に出力される。重みづけ部２は、
動ベクトル検出部１から入力する第１の有効ブロックマ
ップに対して、予め定められた第１の重みづけを行う。
重みづけ部２で重みづけが成された第１の有効ブロック
マップは、加算器４に出力される。加算器４は、重みづ
け部２から入力する第１の有効ブロックマップと重みづ
け部３から入力される前画面の動画像信号における第４
の有効ブロックマップとを加算し、重みづけが成された
第２の有効ブロックマップを得る。加算器４で得られた
第２の有効ブロックマップは、セグメンテーション部５
に出力される。比率判定部９は、孤立無効ブロック除去
部６から入力する前フレーム（前画面）の有効ブロック
マップである第４の有効ブロックマップ内の有効ブロッ
ク数に対する動ベクトル検出部１から入力する第１有効
ブロックマップ内の有効ブロック数の割合を判定し、そ
の判定結果が予め定められた第１の闘値以上であるかま
たは第１の闘値未満であるかを示す判定信号をセグメン
テーション部５に出力する。セグメンテーション部５
は、加算器４から入力する第２の有効ブロックマップ内
の全てのブロックに対して、セグメンテーション処理を
行う。例えば、比率判定部９から入力する判定信号が第
１の闘値以上であることを示している場合には、セグメ
ンテーションにおける闘値として第２の闘値を選択し、
前記判定信号が第１の闘値未満であることを示している
場合にはセグメンテーションにおける闘値として第３の
闘値を選択して、それぞれセグメンテーションを行う。
第５図に示す様にセグメンテーションの対象となるブロ
ックをｋとすると、ｋおよびｋの近傍のa,b,c,d,e,f,g,
hのブロックの値の合計値を参照し、それらの値が比率
判定部９から与えられた判定信号により選択された闘値
以上であればそのブロックｋを有効ブロックとし、参照
ブロックの値の合計値が前記選択された闘値未満の場合
には、そのブロックｋを無効ブロックとして第３の有効
ブロックマップを得る。セグメンテーション部５で得ら
れた第３の有効ブロックマップは、孤立無効ブロック除
去部６に出力される。孤立無効ブロック除去部６は、セ
グメンテーション部５から与えられた第３の有効ブロッ
クマップに含まれている無効ブロックに対して孤立無効
ブロック除去の処理を行い、有効ブロックの連結を行
う。孤立無効ブロックの除去の処理は、セグメンテーシ
ョンと同様に対象となる無効ブロックの近傍のブロック
を参照し、近傍のブロックの値の合計値が予め定められ
た第４の闘値以上の場合はその無効ブロックを有効ブロ
ックとする。近傍のブロックの値の合計値が予め定めら
れた第４の闘値未満の場合は、この無効ブロックは無効
ブロックのままとする。以上の処理によって孤立無効ブ
ロックの除去を行った第４の有効ブロックマップを得
る。孤立無効ブロック除去部６で得られた第４の有効ブ
ロックマップは、重みづけ部３、比率判定部９および符
号化部７に出力される。重みづけ部３は、孤立無効ブロ
ック除去部６から与えられた第４の有効ブロックマップ
に対して第２の重みづけを行い、加算器４に重みづけが
成された第４の有効ブロックマップを与える。遅延部８
は、入力する動画像信号に対して入力動画像信号が供給
されてから第４の有効ブロックマップが符号化部７に与
えられるまでの遅延時間補償を行い、第４の有効ブロッ
クマップと入力動画像信号の時間合せを行う。遅延部８
の出力である時間補償された入力動画像信号は、符号化
部７に出力される。符号化部７は、孤立無効ブロック除
去部６から入力する第４の有効ブロックマップ内の有効
ブロック領域すなわち話者領域であると示されているブ
ロック部分についてのみ遅延部８から入力する動画像信
号の符号化を行い、無効ブロックで示される背景部分の
動画像信号については符号化を行わない。符号化の方法
としては、動き補償などの画面間の相関を利用した方
法、または直交変換などの画面内の相関を利用した方
法、あるいは画面間および画面内の両方の相関を利用し
た方法を用いる。前述した各闘値については、予め統計
的に調べた最適値を用いる。

第17図に本発明に係る第３の動画像信号の符号化方式
の一実施例を示す。入力する動画像信号は、線10を介し
て動ベクトル検出部１および遅延部８に供給される。動
ベクトル検出部１は、前画面の動画像信号を蓄えてお
き、新たに線10を介して入力する動画像信号を水平方向
ｎ画素×垂直方向ｎ画素の複数画素からなるブロックに
分割し、それぞれのブロック毎に記憶されている前画面
の画像との間で最も高い相関をもつブロックを算出し、
該当するブロック間の位置の差を示す動ベクトルを求
め、動ベクトルが発生したブロックを有効ブロックと
し、動ベクトルが発生しなかったブロックを無効ブロッ
クとして第１の有効ブロックマップを得る。動ベクトル
検出部１で得られた第１の有効ブロックマップは、重み
づけ部２に出力される。重みづけ部２は、動ベクトル検
出部１から入力する第１の有効ブロックマップに対し
て、予め定められた第１の重みづけを行う。重みづけ部
２で重みづけが成された第１の有効ブロックマップは、
加算器４に出力される。加算器４は、重みづけ部２から
入力する第１の有効ブロックマップと、重みづけ部３か
ら入力する前画面の動画像信号における第６の有効ブロ
ックマップとを加算して重みづけが成された第２の有効
ブロックマップを得る。加算器４で得られた第２の有効
ブロックマップは、セグメンテーション部５に出力され
る。セグメンテーション部５は、加算器４から入力する
第２の有効ブロックマップ内の全てのブロックに対し
て、セグメンテーション処理を行う。例えば、第５図に
示す様にセグメンテーションの対象となるブロックをｋ
とすると、ｋおよびｋの近傍のa,b,c,d,e,f,g,hのブロ
ックを値を参照し、それらの値の合計値が予め定められ
た第１の閾値以上であればそのブロックｋを有効ブロッ
クとし、近傍のブロックおよびｋの値の合計値が第１の
閾値未満の場合にはそのブロックｋを無効ブロックとし
て第３の有効ブロックマップを得る。セグメンテーショ
ン部５で得られた第３の有効ブロックマップは、孤立無
効ブロック除去部６に出力される。孤立無効ブロック除
去部６は、セグメンテーション部５から入力する第３の
有効ブロックマップに含まれている無効ブロックに対し
て孤立無効ブロック領域除去の処理を行い、有効ブロッ
クの連結を行う。孤立無効ブロック領域除去の処理は、
セグメンテーションと同様に対象となる無効ブロックの
近傍のブロックを参照し、近傍のブロックの値の合計値
が予め定められた第２の閾値以上の場合はその無効ブロ
ックを有効ブロックとする。近傍のブロックの値の合計
値が予め定められた第２の閾値未満の場合は、その無効
ブロックは無効ブロックのままとする。以上の処理によ
って孤立無効ブロックの除去を行った第４の有効ブロッ
クマップを得る。孤立無効ブロック除去部６で得られた
第４の有効ブロックマップは、有効ブロック数判定部1
1、有効ブロックリセット部12および符号化部７に出力
される。有効ブロック数判定部11は、孤立無効ブロック
除去部６から入力する第４の有効ブロックマップの有効
ブロック数が予め定められた第３の閾値以上の場合に
は、有効ブロックリセット部12にリセット実行の指示を
与える。また、有効ブロック数判定部11は、孤立無効ブ
ロック除去部６から入力する第４の有効ブロックマップ
の有効ブロック数が予め定められた第３の閾値未満の場
合には、有効ブロックリセット部12にリセット停止の指
示を与える。有効ブロックリセット部12は、有効ブロッ
ク数判定部11からリセット実行の指示が与えられた場合
には、孤立無効ブロック除去部６から入力する第４の有
効ブロックマップの有効ブロックを全て無効ブロックに
置き換えて第５の有効ブロックマップとする。また、有
効ブロックリセット部12は、有効ブロック数判定部11か
らリセット停止の指示が与えられた場合には、孤立無効
ブロック除去部６から入力する第４の有効ブロックマッ
プをそのままで第５の有効ブロックマップとする。有効
ブロックリセット部12で得られた第５の有効ブロックマ
ップは、フレーム遅延部13に出力される。フレーム遅延
部13は、有効ブロックマップックリセット部12から入力
する第５の有効ブロックマップを１フレーム時間遅延さ
せて第６の有効ブロックマップを得る。フレーム遅延部
13で得られた第６の有効ブロックマップは、重みづけ部
に出力される。重みづけ部３は、フレーム遅延部13から
入力する第６の有効ブロックマップに対して第２の重み
づけを行って加算器４に重みづけが成された第６の有効
ブロックマップを出力する。遅延部８は、入力する動画
像信号に対して入力動画像信号が供給されてから第４の
有効ブロックマップが符号化部７に与えられるまで遅延
時間補償を行い、第４の有効ブロックマップと入力画像
信号の時間合せを行う。遅延部８の出力である時間補償
された入力動画像信号は、符号化部７に出力される。符
号化部７は、孤立無効ブロック除去部６から入力する第
４のブロックマップ内の有効ブロック領域すなわち話者
領域であると示されている部分についてのみ、遅延部８
から入力する動画像信号の符号化を行い、無効ブロック
で示される背景部分の動画像信号については符号化を行
わない。符号化の方法としては、動き補償になどの画面
間の相関を利用した方法、または直交変換などの画面内
の相関を利用した方法、あるいは画面間および画面内の
両方の相関を利用した方法を用いる。前述した各閾値お
よび参照ブロック配置などについては、予め統計的に調
べた最適値を用いる。

（発明の効果） 以上に詳しく説明したように、本発明の動画像信号の
符号化方式は、セグメンテーションによって得た話者領
域内の動画像信号を符号化することにより、背景部分の
雑音により発生する無駄な情報を削除でき、符号化の効
率を高めることができる。

【図面の簡単な説明】

第１図、第２図、第３図、第４図、第５図、第６図、第
７図、第８図、第９図、第10図、第11図、第12図、第13
図および第14図は本発明の作用を説明する図、第15図は
本発明に係る第１の動画像信号の符号化方式の一実施例
を示す図、第16図は本発明に係る第２の動画像信号の符
号化方式の一実施例を示す図、第17図は本発明に係る第
３の動画像信号の符号化方式の一実施例を示す図であ
る。 １……動ベクトル検出部、2,3……重みづけ部、４……
加算器、５……セグメンテーション部、６……孤立無効
ブロック除去部、７……符号化部、８……遅延部、９…
…比率判定部、11……有効ブロック数判定部、12……有
効ブロックリセット部、13……フレーム遅延部。

Claims (3)

(57)【特許請求の範囲】
1. 【請求項１】画面間の相関を利用した動画像信号の符号
   化方式において、入力する動画像信号の１画面を複数画
   素からなるブロックに分割し、ブロック毎に前画面との
   間における動きを検出し、動きが検出されたブロックは
   有効ブロックとし、動きが検出されなかったブロックは
   無効ブロックとしてフレーム毎に第１の有効ブロックマ
   ップを作成する手段と、該第１の有効ブロックマップに
   対して第１の重みづけを行う手段と、前画面における第
   ４の有効ブロックマップに対しての第２重みづけを行う
   手段と、前記第１の重み付けを行った第１の有効ブロッ
   クマップと前記第２の重みづけを行った第４の有効ブロ
   ックマップとを加算合成して重みづけが成された第２の
   有効ブロックマップを得る手段と、該第２の有効ブロッ
   クマップ内の各ブロックの近傍のブロックを参照し、近
   傍のブロックおよび対象ブロックの値の合計値が予め定
   められた第１の闘値以上のときには当該対象ブロックを
   有効ブロックとし、第１の闘値未満のときには当該対象
   ブロックを無効ブロックとするセグメンテーションを行
   って第３の有効ブロックマップを得る手段と、該第３の
   有効ブロックマップ内の無効ブロックについて近傍のブ
   ロックを参照し、近傍のブロックの値の合計値が予め定
   められた第２の闘値以上のときには当該無効ブロックを
   有効ブロックに置き替え、近傍のブロックの値の合計値
   が第２の闘値未満のときには当該無効ブロックを無効ブ
   ロックのままとして第４の有効ブロックマップを得る手
   段と、前記動画像信号の入力時から前記第４の有効ブロ
   ックマップの生成時までの時間の遅延を前記動画像信号
   に与える手段と、遅延を与えられた前記動画像信号につ
   いて、前記第４の有効ブロックマップで有効ブロックと
   された領域を、画面間の相関、画面内の相関またはその
   両方を用いて符号化を行う手段とを有することを特徴と
   する動画像信号の符号化方式。
2. 【請求項２】画面間の相関を利用した動画像信号の符号
   化方式において、入力する動画像信号の１画面を複数画
   素からなるブロックに分割し、ブロック毎に前画面との
   間における動きを検出し、動きが検出されたブロックは
   有効ブロックとし、動きが検出されなかったブロックは
   無効ブロックとしてフレーム毎に第１の有効ブロックマ
   ップを作成する手段と、該第１の有効ブロックマップに
   対して第１の重みづけを行う手段と、前画面における第
   ４の有効ブロックマップに対して第２の重みづけを行う
   手段と、前記第１の重み付けを行った第１の有効ブロッ
   クマップと前記第２の重みづけを行った第４の有効ブロ
   ックマップとを加算合成して重みづけが成された第２の
   有効ブロックマップを得る手段と、前記前画面における
   第４の有効ブロックマップの有効ブロック数に対する前
   記第１の有効ブロックマップの有効ブロック数が予め定
   められた第１の闘値以上である場合には前記第２の有効
   ブロックマップ内の各ブロックの近傍のブロックを参照
   し、近傍のブロックおよび対象ブロックの値の合計値が
   予め定められた第２の闘値以上のときには、当該対象ブ
   ロックを有効ブロックとし、第２の闘値未満のときには
   当該対象ブロックを無効ブロックとして前記第２の有効
   ブロックマップから第３の有効ブロックマップを得、前
   記前画面における第４の有効ブロックマップの有効ブロ
   ック数に対する前記第１の有効ブロックマップの有効ブ
   ロック数が予め定められた第１の闘値未満である場合に
   は前記第２の有効ブロックマップ内の各ブロックの近傍
   のブロックを参照し、近傍のブロックおよび対象ブロッ
   クの値の合計値が予め定められた第３の闘値以上のとき
   には当該対象ブロックを有効ブロックとし、第３の闘値
   未満のときには当該対象ブロックを無効ブロックとして
   前記第２の有効ブロックマップから第３の有効ブロック
   マップを得るセグメンテーションを行う手段と、該第３
   の有効ブロックマップ内の無効ブロックについて近傍の
   ブロックを参照とし、近傍のブロックの値の合計値が予
   め定められた第４の闘値以上のときには当該無効ブロッ
   クを有効ブロックに置き替え、近傍のブロックの値の合
   計値が第４の闘値未満のときには当該無効ブロックを無
   効ブロックのままとして第４の有効ブロックマップを得
   る手段と、前記動画像信号の入力時から前記第４の有効
   ブロックマップの生成時までの時間の遅延を前記動画像
   信号に与える手段と、遅延を与えられた前記動画像信号
   について、前記第４の有効ブロックマップで有効ブロッ
   クとされた領域を、画面間の相関、画面内の相関または
   その両方を用いて符号化を行う手段とを有することを特
   徴とする動画像信号の符号化方式。
3. 【請求項３】画面間の相関を利用した動画像信号の符号
   化方式において、入力する動画像信号の１画面を複数画
   素からなるブロックに分割し、ブロック毎に前画面との
   間における動きを検出し、動きが検出されたブロックは
   有効ブロックとし、動きが検出されなかったブロックは
   無効ブロックとしてフレーム毎に第１の有効ブロックマ
   ップを作成する手段と、該第１の有効ブロックマップに
   対して第１の重みづけを行う手段と、前画面における第
   ６の有効ブロックマップに対して第２の重みづけを行う
   手段と、前記第１の重み付けを行った第１の有効ブロッ
   クマップと前記第２の重みづけを行った第６の有効ブロ
   ックマップとを加算合成して重みづけが成された第２の
   有効ブロックマップを得る手段と、該第２の有効ブロッ
   クマップ内の各ブロックの近傍のブロックを参照し、近
   傍のブロックおよび対象ブロックの値の合計値が予め定
   められた第１の闘値以上のときには当該対象ブロックを
   有効ブロックとし、第１の闘値未満のときには当該対象
   ブロックを無効ブロックとするセグメンテーションを行
   って第３の有効ブロックマップを得る手段と、該第３の
   有効ブロックマップ内の無効ブロックについて近傍のブ
   ロックを参照し、近傍のブロックの値の合計値が予め定
   められた第２の闘値以上のときには当該無効ブロックを
   有効ブロックに置き替え、近傍のブロックの値の合計値
   が第２の闘値未満のときには当該無効ブロックを無効ブ
   ロックのままとして第４の有効ブロックマップを得る手
   段と、該第４の有効ブロックマップの有効ブロック数が
   予め定められた第３の闘値以上の場合は前記第４の有効
   ブロックマップの有効ブロックを全て無効ブロックに置
   き換えて第５の有効ブロックマップとし、前記第４の有
   効ブロックマップの有効ブロック数が予め定められた第
   ３の闘値未満の場合は前記第４の有効ブロックマップを
   そのままで第５の有効ブロックマップとする手段と、該
   第５の有効ブロックマップを１フレーム時間遅延して第
   ６の有効ブロックマップを得る手段と、前記動画像信号
   の入力時から前記第４の有効ブロックマップの生成時ま
   での時間の遅延を前記動画像信号に与える手段と、遅延
   を与えられた前記動画像信号について、前記第４の有効
   ブロックマップで有効ブロックとされた領域を、画面間
   の相関、画面内の相関またはその両方を用いて符号化を
   行う手段とを有することを特徴とする動画像信号の符号
   化方式。