JPH11205819A - 画像符号化方法および画像符号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 ステレオ画像信号の符号量を小さくする画像
符号化方法。 【解決手段】 フレームメモリ回路11a から右チャネル
画像フレームが、遅延フレームメモリ回路22a から過去
の右チャネル画像フレームが補償回路12に与えられる。
動き補償回路12では、動き予測が行われ差分データが求
められる。この差分データは、直交変換回路14で直交変
換係数データに変換され、量子化回路15で量子化データ
に変換され、可変長符号化回路16で可変長符号化データ
に変換され、送信バッファ回路19から伝送路２に送られ
る。続いてフレームメモリ回路11b から左チャネル画像
フレームが、フレームメモリ回路21a から現在の右チャ
ネル画像フレームが補償回路12に与えられる。動き補償
回路12では、動き予測が行われ差分データが求められ
る。この差分データは、右チャネルの場合と同様にして
処理され、送信バッファ回路19から伝送路２に送られ
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ステレオ画像信号
を符号化する画像符号化方法および画像符号化装置に関
するものである。

【０００２】

【従来の技術】従来の画像符号化装置では、一系統の動
画像の符号化、伝送、復号を行うことを主眼にステレオ
動画像を伝送する技術が提案されてきた。たとえば、テ
レビ電話システムやテレビ会議システムなどで用いられ
る動画像符号化装置の技術に関しては、たとえば、特開
平2-222389号公報に記載されている「動画像符号化装
置」の技術が一例としてある。このような動画像符号化
技術を用いてステレオ動画像を伝送するためには、画像
符号化装置に、画像信号を符号化して画像符号化データ
を出力する符号化回路を右チャネル用と左チャネル用と
にそれぞれ設け、画像復号化装置に、画像符号化データ
を復号して画像信号を出力する復号化回路を右チャネル
用と左チャネル用にそれぞれ設ける必要があった。

【０００３】

【発明が解決しようとする課題】しかしながら、このよ
うな従来の画像符号化装置では、ステレオ画像の画像符
号化データを伝送するためには、片チャネルの符号化に
より生成される符号量の２倍の符号量を伝送する必要が
あり、また、右チャネルと左チャネルの２系統の回路構
成が必要となるので、ハードウエア量の増加や消費電力
の増加を招くという欠点があった。

【０００４】本発明は、このような従来技術の欠点を解
決し、片チャネルの符号量に近い符号量で両チャネルを
伝送することができ、右チャネルと左チャネルの２系統
の回路構成を必要としない画像符号化方法および画像符
号化装置を提供することを目的とする。

【０００５】

【課題を解決するための手段】本発明は上述の課題を解
決するために、ステレオ画像を構成する第１のチャネル
および第２のチャネルの画像信号を符号化して第１のチ
ャネルおよび第２のチャネルの画像符号化データを生成
する画像符号化方法において、この方法は、第２のチャ
ネルの画像信号と、第１のチャネルの画像信号から動き
予測によって得られる参照画像信号との差分データを求
め、この差分データを符号化して第２のチャネルの画像
符号化データを生成する工程を含むことを特徴とする。

【０００６】また、本発明は、ステレオ画像を構成する
第１のチャネルおよび第２のチャネルの画像信号を符号
化して第１のチャネルおよび第２のチャネルの画像符号
化データを生成する画像符号化方法において、この方法
は、第２のチャネルの画像信号と、第１のチャネルの画
像信号から動き予測によって得られる参照画像信号との
差分データを求めると共に、第２のチャネルの画像信号
と、第２のチャネルの過去の画像信号から動き予測によ
って得られる参照画像信号との差分データを求め、両差
分データのうち差分の小さい差分データを符号化して第
２のチャネルの画像符号化データを生成する工程を含む
ことを特徴とする。

【０００７】また、本発明は、ステレオ画像を構成する
第１のチャネルおよび第２のチャネルの画像信号を符号
化して該第１のチャネルおよび第２のチャネルの画像符
号化データを生成する画像符号化方法において、この方
法は、第２のチャネルの画像信号と、第１のチャネルの
画像信号から動き予測によって得られる参照画像信号と
の差分データを求め、第２のチャネルの画像信号と、第
２のチャネルの過去の画像信号から動き予測によって得
られる参照画像信号との差分データを求め、さらに第２
のチャネルの画像信号と、第１のチャネルの過去の画像
信号から動き予測によって得られる参照画像信号との差
分データを求め、これら３つの差分データのうち差分の
最も小さい差分データを符号化して第２のチャネルの画
像符号化データを生成する工程を含むことを特徴とす
る。

【０００８】また、本発明は、ステレオ画像を構成する
第１のチャネルおよび第２のチャネルの画像信号を符号
化して第１のチャネルおよび第２のチャネルの画像符号
化データを生成する画像符号化装置において、この装置
は、第１のチャネルと第２のチャネルの画像信号を順次
選択して出力する画像信号選択手段と、画像信号選択手
段で第１のチャネルの画像信号が選択されたとき第１の
記憶手段に記憶されている画像信号を選択し、画像信号
選択手段で第２のチャネルの画像信号が選択されたとき
第２の記憶手段に記憶されている画像信号を選択して出
力する参照用画像信号選択手段と、画像信号選択手段で
選択された第１のチャネルの画像信号と、参照用画像信
号選択手段で選択された第１の記憶手段に記憶されてい
る画像信号から動き予測によって得られる参照画像信号
との差分データを求め、この差分データを符号化して第
１のチャネルの画像符号化データを生成し、画像信号選
択手段で選択された第２のチャネルの画像信号と、参照
用画像信号選択手段で選択されたした第２の記憶手段に
記憶されている画像信号から動き予測によって得られる
参照画像信号との差分データを求め、この差分データを
符号化して第２のチャネルの画像符号化データを生成す
る符号化手段と、符号化手段で符号化された第１のチャ
ネルの画像符号化データを復号して画像信号を生成する
復号化手段とを含み、第２の記憶手段は、復号化手段で
生成された画像信号を一時記憶し、第１の記憶手段は、
符号化手段による第１のチャネルおよび第２のチャネル
の画像信号の符号化が終了したとき第２の記憶手段に一
時記憶されている画像信号をコピーして一時記憶するこ
とを特徴とする。

【０００９】

【発明の実施の形態】次に本発明の好適な実施例を図面
を用いて説明する。まず、本発明の第１の実施例につい
て説明する。図１は、第１の実施例による画像符号化装
置を示すブロック図である。この画像符号化装置は、右
チャネルの画像に続いて左チャネルの画像を符号化する
際、右チャネルの画像との相関を利用して符号化するこ
とにより従来より少ない符号量でステレオ画像を伝送す
るものである。

【００１０】図１において、画像符号化装置1Aのフレー
ムメモリ回路11a は、ビデオカメラなどから右チャネル
画像デジタル信号100aを取り込み、右チャネル画像フレ
ームを所定のタイミングで読み出してスイッチ回路24の
端子ａに印加するものである。フレームメモリ回路11b
は、ビデオカメラなどから左チャネル画像デジタル信号
100bを取り込み、左チャネル画像フレームを所定のタイ
ミングで読み出してスイッチ回路24の端子ｂに印加する
ものである。

【００１１】スイッチ回路24は、符号化する画像フレー
ムを選択する回路であって、制御回路20からの制御信号
201 に従って端子ａ、端子ｂのいずれかと端子ｃの間を
接続し、端子ａに印加される右チャネル画像フレームま
たは端子ｂに印加される左チャネル画像フレームを動き
補償回路12に与えるものである。スイッチ回路23は、動
き補償で使用される参照用の画像フレームを選択する回
路であって、制御回路20からの制御信号202 に従って端
子ａ、端子ｂのいずれかと端子ｃの間を接続し、端子ａ
に印加される遅延フレームメモリ回路22からの右チャネ
ル画像フレームまたは端子ｂに印加されるフレームメモ
リ回路21からの右チャネル画像フレームを動き補償回路
12a に与えるものである。

【００１２】動き補償回路12は、右チャネルの符号化で
は、スイッチ回路24からの右チャネル画像フレームと、
スイッチ回路23からの参照用の画像フレームから動き予
測によって得られる参照画像フレームとから差分データ
を生成し、これを直交変換回路14に与えると共に、生成
した動きベクトルを可変長符号化回路16およびフレーム
メモリ回路21a に与えるものである。また、左チャネル
の符号化では、スイッチ回路24からの左チャネル画像フ
レームと、スイッチ回路23からの参照用の画像フレーム
から動き予測によって得られる参照画像フレームとから
差分データを生成し、これを直交変換回路14に与えると
共に、生成した動きベクトルを可変長符号化回路16に与
えるものである。なお、画像フレームをＭ×Ｎ個の複数
の画素からなる小領域のブロックに分割し、ブロック毎
に動き補償を実行するように構成してもよい。

【００１３】直交変換回路14は、動き補償回路12からの
差分データを直交変換することにより、たとえば、正方
形の画素ブロックごとにＤＣＴ変換（離散コサイン変
換）することにより直交変換係数データを得て、これを
量子化回路15に与えるものである。量子化回路15は、直
交変換回路14からの直交変換係数データを量子化するこ
とにより、たとえば、直交変換係数データをある量子化
ステップＱで割算し、余りを丸めることにより量子化デ
ータを得て、これを可変長符号化回路16に与えると共
に、スイッチ回路25の端子ｃに印加するものである。

【００１４】スイッチ回路25は、制御回路20からの制御
信号203 に従って端子ｃと端子ａの間をオン、オフし、
端子ｃに印加される右チャネルの量子化データのみを選
択して逆量子化回路17に与えるものである。逆量子化回
路17は、量子化回路15からの量子化データを逆量子化す
ることにより、たとえば、正方形の画素ごとに各係数に
量子化ステップＱを掛ける処理を行うことにより直交変
換係数データを生成し、これを逆直交変換回路18に与え
るものである。逆直交変換回路18は、逆量子化回路17か
らの直交変換係数データを逆直交変換することにより、
たとえば、所定の正方形の画素毎に逆変換（逆ＤＣＴ変
換）することにより右チャネルの差分データを生成し、
これをフレームメモリ回路21a に与えるものである。

【００１５】フレームメモリ回路21a は、一時記憶して
いる右チャネル画像フレームと動き補償回路12からの動
きベクトルとから参照画像フレームを生成し、この参照
画像フレームと逆直交変換回路18からの差分データとを
加算して右チャネル画像フレームを再構築し、これを一
時記憶する。そして、制御回路20からの読み出し指示に
よりこの右チャネル画像フレームをコピーしてスイッチ
回路23の端子ｂに印加し、右チャネルおよび左チャネル
の符号化終了後に一時記憶している右チャネル画像フレ
ームを読み出して遅延フレームメモリ回路22a に与える
ものである。遅延フレームメモリ回路22a は、フレーム
メモリ回路21a からの右チャネル画像フレームを一時記
憶し、制御回路20からの読み出し指示によりこれを読み
出してスイッチ回路23の端子ａに印加するものである。

【００１６】可変長符号化回路16は、量子化回路15から
の量子化データおよび動き補償回路12からの動きベクト
ルを可変長符号化して可変長符号化データを生成し、こ
れを送信バッファ回路19に与えるものである。送信バッ
ファ回路19は、可変長符号化回路16からの可変長符号化
データを一時保持し、所定のタイミングで伝送路２に出
力するものである。制御回路20は、制御信号201 、202
、203 および各回路の動作を制御する制御信号を生成
して出力するものである。

【００１７】図２は、図１に示す画像符号化装置1Aに対
応する画像復号化装置の一例を示すブロック図である。
この画像復号化装置3Aは、画像符号化装置1Aから伝送路
２によって送られてくる可変長符号化データを復号し、
右チャネル画像デジタル信号100a' および左チャネル画
像デジタル信号100b' を出力するものである。

【００１８】図２において、画像復号化装置3Aの可変長
符号復号回路32は、伝送路２から可変長符号化データを
取り込んで復号し、量子化データおよび動きベクトルを
得る。そして、量子化データを逆量子化回路33に与え、
動きベクトルをフレームメモリ回路35a および遅延メモ
リフレーム回路36a に与えるものである。逆量子化回路
33は、可変長符号復号回路32からの量子化データを逆量
子化し、たとえば、正方形の画素ごとに各係数に量子化
ステップＱを掛けて直交変換係数データを生成し、これ
を逆直交変換回路34に与えるものである。

【００１９】逆直交変換回路34は、逆量子化回路33から
の直交変換係数データを逆直交変換し、たとえば、所定
の正方形の画素ごとに逆変換（逆ＤＣＴ変換）して差分
データを生成し、これをスイッチ回路39の端子ｃに印加
するものである。スイッチ回路39は、制御回路38から制
御信号381 に従って端子ａ、端子ｂのいずれかと端子ｃ
の間を接続し、端子ｃに印加される右チャネルの差分デ
ータを加算回路37a に与え、端子ｃに印加される左チャ
ネルの差分データを加算回路37b に与えるものである。

【００２０】加算回路37a は、スイッチ回路39からの右
チャネルの差分データと、遅延フレームメモリ回路36a
で生成された参照画像フレームとを加算して右チャネル
画像フレームを生成し、これをフレームメモリ回路35a
に与えるものである。加算回路37b は、スイッチ回路39
からの左チャネルの差分データと、フレームメモリ回路
35a で生成された参照画像フレームとを加算して左チャ
ネル画像フレームを生成し、これをフレームメモリ回路
35b に与えるものである。

【００２１】フレームメモリ回路35a は、加算回路37a
からの右チャネル画像フレームを一時記憶し、制御回路
20からの指示により一時記憶している右チャネル画像フ
レームと可変長符号復号回路32からの動きベクトルとか
ら参照画像フレームを生成し、これを加算回路37b に与
える。また、右チャネルおよび左チャネルの復号終了後
に、一時記憶している右チャネル画像フレームをコピー
して遅延フレームメモリ回路36a に与える。さらに、一
時記憶している右チャネル画像フレームを所定のタイミ
ングで読み出し、右チャネル画像デジタル信号100a' と
して出力するものである。

【００２２】遅延フレームメモリ回路36a は、フレーム
メモリ回路35a からの右チャネル画像フレームを一時記
憶し、制御回路20からの指示により一時記憶している右
チャネル画像フレームと可変長符号復号回路32からの動
きベクトルとから参照画像フレームを生成し、これを加
算回路37a に与えるものである。フレームメモリ回路35
b は、加算回路37b からの左チャネル画像フレームを一
時記憶し、これを所定のタイミングで読み出し、左チャ
ネル画像デジタル信号100b' として出力するものであ
る。制御回路38は、制御信号381 および各回路の動作を
制御する制御信号を生成して出力するものである。

【００２３】以上説明したように本実施例によれば、画
像符号化装置1Aおよび画像復号化装置3Aは、符号化また
は復号する回路を右チャネルおよび左チャネルに対して
共通にしているので回路構成が簡単になっている。

【００２４】次に、第１の実施例の動作について図３、
図４を用いて説明する。ここで、図３は、画像符号化装
置1Aにおける制御回路20の動作説明図、図５は、画像復
号化装置3Aにおける制御回路38の動作説明図である。な
お、本実施例では、先に右チャネルを符号化し、続いて
左チャネルを符号化するものとする。しかし、先に左チ
ャネルを符号化し、続いて右チャネルを符号化するよう
にしてもよい。

【００２５】まず、図１に示す画像符号化装置1Aの動作
を説明する。図１において、画像符号化装置1Aに入力さ
れる右チャネル画像デジタル信号100aは、フレームメモ
リ回路11a に一時記憶され、画像符号化装置1Aに入力さ
れる左チャネル画像デジタル信号100bは、フレームメモ
リ回路11b に一時記憶される。制御回路20は、まず、右
チャネルを符号化するための制御を行う。具体的には、
スイッチ回路24に制御信号201 を与えて端子ｃと端子ａ
の間を接続させ（図３のステップS10 ）、フレーメモリ
回路11a に画像フレームの読み出しを指示する。これに
よって、フレームメモリ回路11a から右チャネル画像フ
レームが読み出され、動き補償回路12に与えられる。

【００２６】これと同時に、制御回路22は、スイッチ回
路23に制御信号202 を与えて端子ｃと端子ａの間を接続
させ（ステップS11 ）、遅延フレームメモリ回路22a に
画像フレームの読み出しを指示する。これによって、遅
延フレームメモリ回路22a から前回再構築された右チャ
ネルの画像フレーム（以下、過去の右チャネル画像フレ
ームという）が読み出され、動き補償回路12に与えられ
る。さらに、制御回路22は、スイッチ回路25に制御信号
203 を与えて端子ｃと端子ａの間を接続させる（ステッ
プS12 ）。これによって、量子化回路15から出力される
右チャネルの量子化データが逆量子化回路17に与えられ
る。

【００２７】動き補償回路12では、フレームメモリ回路
11a からの右チャネル画像フレームと、遅延フレームメ
モリ回路22からの過去の右チャネル画像フレームから動
き予測によって得られる参照画像フレームとから差分デ
ータが生成され、直交変換回路14に与えられる。また、
動き補償回路12で生成された動きベクトルは、可変長符
号化回路16に与えられる。直交変換回路14では、動き補
償回路12からの差分データが直交変換されて直交変換係
数データが生成され、量子化回路15に与えられる。

【００２８】量子化回路15では、直交変換回路14からの
直交変換係数データが量子化されて量子化データが生成
され、可変長符号化回路16に与えられると共にスイッチ
回路25の端子ｃに印加される。可変長符号化回路16で
は、量子化回路15からの量子化データおよび動き補償回
路12からの動きベクトルが可変長符号化されて可変長符
号化データが生成され、送信バッファ回路19に与えられ
る。送信バッファ回路19では、可変長符号化回路16から
の可変長符号化データが一時保持され、所定のタイミン
グで読み出されて伝送路２に出力される。

【００２９】一方、スイッチ回路25の端子ｃに印加され
た量子化データは、端子ｃと端子ａの間が接続されてい
るので逆量子化回路17に与えられる。逆量子化回路17で
は、量子化回路15からの量子化データが逆量子化されて
直交変換係数データが生成され、逆直交変換回路18に与
えられる。逆直交変換回路18では、逆量子化回路17から
の直交変換係数データが逆直交変換されて差分データが
生成され、フレームメモリ回路21a に与えられる。

【００３０】フレームメモリ回路21a では、既に一時記
憶されている右チャネル画像フレームと動き補償回路12
からの動きベクトルを用いて参照画像フレームが生成さ
れ、この参照画像フレームと逆直交変換回路18からの差
分データとが加算されて新しい右チャネル画像フレーム
が再構築され、一時記憶される。

【００３１】次に、制御回路20は、右チャネルの符号化
を終了すると続いて左チャネルを符号化をするための制
御を行う。具体的には、スイッチ回路24に制御信号201
を与えて端子ｃと端子ｂの間を接続させ（図３のステッ
プS13 ）、フレーメモリ回路11b に画像フレームの読み
出しを指示する。これによって、フレームメモリ回路11
b から左チャネル画像フレームが読み出され、動き補償
回路12に与えられる。

【００３２】これと同時に、制御回路22は、スイッチ回
路23に制御信号202 を与えて端子ｃと端子ｂの間を接続
させ（ステップS14 ）、フレームメモリ回路21a に画像
フレームの読み出しを指示する。これによって、フレー
ムメモリ回路21a から先の右チャネル符号化の際に再構
築された右チャネルの画像フレーム（以下、現在の右チ
ャネル画像フレームという）が読み出され、動き補償回
路12に与えられる。さらに、制御回路22は、スイッチ回
路25に制御信号203 を与えて端子ｃと端子ａの間を断に
させる（ステップS15 ）。これによって、量子化回路15
から出力される左チャネルの量子化データは、逆量子化
回路17に与えられない。したがって、フレームメモリ回
路21a の内容は、左チャネルの処理によっては変化しな
い。

【００３３】動き補償回路12では、フレームメモリ回路
11b からの左チャネル画像フレームと、フレームメモリ
回路21a からの現在の右チャネル画像フレームから動き
予測によって得られる参照画像フレームとから差分デー
タが生成され、直交変換回路14に与えられる。ここで、
左チャネル画像フレームは、右チャネル画像フレームと
の相関が非常に大きいので、十分小さな差分データを得
ることができ、伝送する符号量を大幅に低減することが
できる。また、動き補償回路12で生成された動きベクト
ルは、可変長符号化回路16に与えられる。

【００３４】直交変換回路14では、動き補償回路12から
の差分データが直交変換されて直交変換係数データが生
成され、量子化回路15では、直交変換回路14からの直交
変換係数データが量子化されて量子化データが生成さ
れ、可変長符号化回路16では、量子化回路15からの量子
化データおよび補償回路12からの動きベクトルが可変長
符号化されて可変長符号化データが生成され、送信バッ
ファ回路19では、可変長符号化回路16からの可変長符号
化データが一時保持され、所定のタイミングで読み出さ
れて伝送路２に出力される。

【００３５】なお、フレームメモリ回路21a では、右チ
ャネルおよび左チャネルの符号化が終了したとき、一時
記憶されている右チャネル画像フレームがコピーされて
遅延フレームメモリ回路22a に与えられ、遅延フレーム
メモリ回路22a では、この右チャネル画像フレームが一
時記憶される。図１に示す画像符号化装置1Aは、このよ
うにして右チャネルおよび左チャネルの画像を順次符号
化していく。

【００３６】次に、図２に示す画像復号化装置3Aの動作
を説明する。図２において、図１に示す画像符号化装置
1Aから伝送路２によって送られてきた可変長符号化デー
タは、画像復号化装置3Aの可変長符号復号回路32に入力
される。可変長符号復号回路32では、可変長符号化デー
タが復号されて量子化データおよび動きベクトルが得ら
れ、量子化データは逆量子化回路33に、動きベクトルは
フレームメモリ回路35a および遅延フレームメモリ回路
36a にそれぞれ与えられる。逆量子化回路33では、可変
長符号復号回路32からの量子化データが逆量子化されて
直交変換係数データが生成され、逆直交変換回路34で
は、逆量子化回路33からの直交変換係数データが逆直交
変換されて差分データが生成され、スイッチ回路39の端
子ｃに印加される。

【００３７】制御回路38は、逆直交変換回路34から右チ
ャネルの差分データが出力されるとき、右チャネルを復
号するための制御を行う。具体的には、スイッチ回路39
に制御信号381 を与えて端子ｃと端子ａの間を接続させ
る（図４のステップS10 ）。これによって、逆直交変換
回路34からの右チャネルの差分データが加算回路37aに
与えられる。これと同時に、制御回路38は、遅延フレー
ムメモリ回路22a に画像フレームの読み出しを指示す
る。遅延フレームメモリ回路22a では、一時記憶されて
いる過去の右チャネル画像フレームと可変長符号復号回
路32からの動きベクトルとに基づいて、画像符号化装置
1Aの動き補償回路12において生成された参照画像フレー
ムと同じような参照画像フレームが生成され、加算回路
37a に与えられる。

【００３８】加算回路37a では、逆直交変換回路34から
の差分データと遅延フレームメモリ回路36a からの参照
画像フレームとが加算されて右チャネル画像フレームが
生成され、フレームメモリ回路35a に与えられる。フレ
ームメモリ回路35a では、加算回路37a からの右チャネ
ル画像フレームが一時記憶され、所定のタイミングで読
み出され、右チャネル画像デジタル信号100a' として出
力される。

【００３９】次に、制御回路38は、逆直交変換回路34か
ら左チャネルの差分データが出力されるとき、左チャネ
ルを復号するための制御を行う。具体的には、スイッチ
回路39に制御信号381 を与えて端子ｃと端子ｂの間を接
続させる（図４のステップS11 ）。これによって、逆直
交変換回路34からの左チャネルの差分データが加算回路
37b に与えられる。これと同時に、制御回路38は、フレ
ームメモリ回路35a に画像フレームの読み出しを指示す
る。フレームメモリ回路35a では、一時記憶されている
現在の右チャネル画像フレームと可変長符号復号回路32
からの動きベクトルとに基づいて参照画像フレームが生
成され、加算回路37b に与えられる。

【００４０】加算回路37b では、逆直交変換回路34から
出力される差分データとフレームメモリ回路35a からの
参照画像フレームとが加算されて左チャネル画像フレー
ムが生成され、フレームメモリ回路35b に与えられる。
フレームメモリ回路35b では、加算回路37b からの左チ
ャネル画像フレームが一時記憶され、所定のタイミング
で読み出され、左チャネル画像デジタル信号100b' とし
て出力される。

【００４１】なお、フレームメモリ回路35a では、右チ
ャネルおよび左チャネルの復号が終了したとき、一時記
憶されている右チャネル画像フレームがコピーされて遅
延フレームメモリ回路36a に与えられ、遅延フレームメ
モリ回路36a では、この右チャネル画像フレームが一時
記憶される。

【００４２】画像復号化装置3Aは、このようにして右チ
ャネルおよび左チャネルの可変長符号化データを順次復
号し、右チャネル画像デジタル信号100a' および左チャ
ネル画像デジタル信号100b' を出力する。

【００４３】以上説明したように第１の実施例によれ
ば、左チャネルの符号化では、右チャネルの画像との相
関を利用して差分データを生成しているので、遠景の部
分や背景の部分ではほとんど符号化データが発生せず、
近景や目標の物体やそのエッジ付近で動きベクトルと少
しの差分データとによる多少の符号化データが発生する
だけであり、１チャネルの動画像伝送と比較して、多少
のビット量の増加だけでステレオ画像の伝送を実現する
ことができる。

【００４４】また、右チャネルの可変長符号化データを
復号するとき左チャネルの画像を全く参照しないので、
ステレオ画像を再生できない画像端末においても、左チ
ャネルのデータを廃棄することで右チャネルだけの再生
が可能である。また、本実施例による画像符号化装置
は、片チャネルの画像符号化装置にスイッチ回路23、2
4、25とフレームメモリ回路21を追加するだけでよく、
制御回路20による制御も簡単である。

【００４５】次に、本発明の第２の実施例について説明
する。図５は、第２の実施例による画像符号化装置を示
すブロック図である。この画像符号化装置は、右チャネ
ルの画像に続いて左チャネルの画像を符号化する際、右
チャネルの画像との相関に加えて、過去の左チャネルの
画像との相関をも利用して符号化することにより、第１
の実施例の場合より小さい符号量でステレオ画像を伝送
するものである。

【００４６】図５において、画像符号化装置1Bは、図１
に示す画像符号化装置1Aにフレームメモリ回路21b およ
び遅延フレームメモリ回路22b を追加し、動き補償回路
12、制御回路20、スイッチ回路23、およびスイッチ回路
25に替えて、動き補償回路12A 、制御回路20A 、スイッ
チ回路23A 、およびスイッチ回路25A を設けた構成とな
っている。

【００４７】スイッチ回路23A は、動き補償で参照され
る画像フレームを選択する回路であって、制御回路20A
からの制御信号202aに従って端子ａ、端子ｂ、端子ｄの
いずれかと端子ｃの間を接続し、端子ａに印加される遅
延フレームメモリ回路22a からの過去の右チャネル画像
フレーム、端子ｂに印加される遅延フレームメモリ回路
22b からの過去の左チャネル画像フレーム、および端子
ｄに印加されるフレームメモリ回路21a からの現在の右
チャネル画像フレームのいずれかを選択して動き補償回
路12A に与えるものである。

【００４８】動き補償回路12A は、右チャネルの符号化
では、スイッチ回路24からの右チャネル画像フレーム
と、スイッチ回路23A からの過去の右チャネル画像フレ
ームから動き予測によって得られる参照画像フレームと
の差分データを生成し、直交変換回路14に与える。ま
た、左チャネルの符号化では、スイッチ回路24からの左
チャネル画像フレームと、スイッチ回路23A からの現在
の右チャネル画像フレームから動き予測によって得られ
る参照画像フレームとの差分データを生成し、続いてス
イッチ回路24からの左チャネル画像フレームと、スイッ
チ回路23A からの過去の左チャネル画像フレームから動
き予測によって得られる参照画像フレームとの差分デー
タを生成し、これら２つの差分データのうち小さい差分
データを選択して直交変換回路14に与えるものである。

【００４９】また、動き補償回路12A は、この選択され
た差分データを生成する際に使用した参照用の画像フレ
ームが、現在の右チャネル画像フレームおよび過去の左
チャネル画像フレームのいずれかであるかを示す参照用
画像フレーム情報を生成し、動きベクトルと共に可変長
符号化回路16に与え、さらに、動きベクトルをフレーム
メモリ回路21a およびフレームメモリ回路21b に与える
ものである。なお、画像フレームをＭ×Ｎ個の画素から
なる小領域のブロックに分割し、ブロック毎に動き補償
を実行するように構成してもよい。

【００５０】スイッチ回路25A は、制御回路20A からの
制御信号203aに従って端子ａ、端子ｂのいずれかと端子
ｃの間を接続し、端子ｃに印加される右チャネルの差分
データをフレームメモリ21a に与え、端子ｃに印加され
る左チャネルの差分データをフレームメモリ21b に与え
るものである。フレームメモリ回路21b は、フレームメ
モリ回路21a と同じ回路であって、一時記憶している右
チャネル画像フレームと動き補償回路12A からの動きベ
クトルとから参照画像フレームを生成し、この参照画像
フレームとスイッチ回路25A からの差分データを加算し
て左チャネル画像フレームを再構築して一時記憶し、こ
の左チャネル画像フレームを制御回路20A の指示によっ
てコピーして遅延フレームメモリ回路22b に与えるもの
である。

【００５１】遅延フレームメモリ回路22b は、遅延フレ
ームメモリ回路22a と同じ回路であって、フレームメモ
リ回路21b からの左チャネル画像フレームを一時記憶
し、この左チャネル画像フレームを制御回路20A の指示
によって読み出し、過去の左チャネル画像フレームとし
てスイッチ回路23A の端子ｂに印加するものである。制
御回路20A は、制御信号201 、202a、203aおよび各回路
の動作を制御する制御信号を生成して出力するものであ
る。

【００５２】なお、フレームメモリ回路11a 、フレーム
メモリ回路11b 、直交変換回路14、量子化回路15、可変
長符号化回路16、逆量子化回路17、逆直交変換回路18、
送信バッファ回路19、フレームメモリ回路12a 、遅延フ
レームメモリ回路22a 、およびスイッチ回路24の機能お
よび構成は、図１に示す画像符号化装置1Aにおける同一
記号を付した回路とそれぞれ同じものであるので説明を
省略する。

【００５３】図６は、図５に示す画像符号化装置1Bに対
応する画像復号化装置の一例を示すブロック図である。
この画像復号化装置3Bは、画像符号化装置1Bから伝送路
２によって送られてくる可変長符号化データを復号して
右チャネル画像デジタル信号100a' および左チャネル画
像デジタル信号100b' を出力するものである。

【００５４】図６において、画像復号化装置3Bは、図２
に示す画像復号化装置3Aに遅延フレームメモリ回路36b
およびスイッチ回路40を追加し、フレームメモリ回路35
b 、制御回路38に替えて、フレームメモリ回路35b-A 、
制御回路38A を設けた構成となっている。

【００５５】スイッチ回路40は、制御回路38A からの制
御信号382 に従って端子ａ、端子ｂのいずれかと端子ｃ
の間を接続し、端子ａに印加される遅延フレームメモリ
回路36b からの参照画像フレームまたは端子ｂに印加さ
れるフレームメモリ回路35aからの参照画像フレームを
加算回路37b に与えるものである。フレームメモリ回路
35b-A は、加算回路37b で生成された左チャネル画像フ
レームを一時記憶し、この左チャネル画像フレームを制
御回路38A の指示によりコピーして遅延フレームメモリ
回路36b に与えると共に、一時記憶している左チャネル
画像フレームを所定のタイミングで読み出し、左チャネ
ル画像デジタル信号100b' として出力するものである。

【００５６】遅延フレームメモリ回路36b は、遅延フレ
ームメモリ回路36a と同じ回路であって、フレームメモ
リ回路35b-A からの左チャネル画像フレームを一時記憶
し、制御回路38A の指示により、可変長符号復号回路32
からの動きベクトルと一時記憶している左チャネル画像
フレームとから参照画像フレームを生成し、これをスイ
ッチ回路40の端子ａに印加するものである。制御回路38
A は、制御信号381 、382 および各回路の動作を制御す
る制御信号を生成して出力するものである。なお、可変
長符号復号回路32、逆量子化回路33、逆直交変換回路3
4、フレームメモリ回路35a 、遅延フレームメモリ回路3
6a 、およびスイッチ回路39は、図２に示す画像復号化
装置3Aにおける同一の符号を付した回路と同じであるの
で説明を省略する。

【００５７】次に、第２の実施例の動作について図７、
図８を用いて説明する。ここで、図７は画像符号化装置
1Bにおける制御回路20A の動作説明図、図８は、画像復
号化装置3Bにおける制御回路38A の動作説明図である。
なお、本実施例では、先に右チャネルを符号化し、続い
て左チャネルを符号化するものとして説明する。しか
し、左チャネルを先に符号化し、続いて右チャネルを符
号化してもよい。

【００５８】まず、図５に示す画像符号化装置1Bの動作
を説明する。図５において、画像符号化装置1Bに入力さ
れる右チャネル画像デジタル信号100aは、フレームメモ
リ回路11a に一時記憶され、左チャネル画像デジタル信
号100bは、フレームメモリ回路11b に一時記憶される。
制御回路20A は、まず、右チャネルを符号化するための
制御を行う。具体的には、スイッチ回路24に制御信号20
1 を与えて端子ｃと端子ａの間を接続させ（図７のステ
ップS10 ）、フレームメモリ回路11a に画像フレームの
読み出しを指示する。これによって、フレームメモリ回
路11a から右チャネル画像フレームが読み出され、動き
補償回路12A に与えられる。

【００５９】これと同時に、制御回路20A は、スイッチ
回路23A に制御信号202aを与えて端子ｃと端子ａの間を
接続させ（ステップS11 ）、遅延フレームメモリ回路22
a に画像フレームの読み出しを指示する。これによっ
て、遅延フレームメモリ回路22a から過去の右チャネル
画像フレームが読み出され、動き補償回路12A に与えら
れる。さらに、制御回路20A は、スイッチ回路25A に制
御信号203aを与えて端子ｃと端子ａの間を接続させる
（ステップS12 ）。これによって、逆直交変換回路18か
ら出力される右チャネルの差分データがフレームメモリ
回路21a に与えられることになる。

【００６０】動き補償回路12A では、フレームメモリ回
路11a からの右チャネル画像フレームと、遅延フレーム
メモリ回路22a からの過去の右チャネル画像フレームか
ら動き予測によって得られる参照画像フレームとから差
分データが生成され、直交変換回路14に与えられる。ま
た、動き補償回路12A で生成された動くベクトルは、可
変長符号化回路16に与えられる。そして、図１に示す画
像符号化装置1Aの場合と同様にして、直交変換回路14で
は直交変換係数データが求められ、量子化回路15では量
子化データが求められ、可変長符号化回路16では可変長
符号化データが求められ、送信バッファ回路19から可変
長符号化データが伝送路２に出力される。

【００６１】また、量子化回路15で求められた量子化デ
ータは、逆量子化回路17にも与えられ、逆量子化回路17
では直交変換係数データが求められ、逆直交変換回路18
では差分データが求められてスイッチ回路25の端子ｃに
印加される。スイッチ回路25では、端子ｃと端子ａの間
が接続されているので端子ｃに印加された差分データ
は、フレームメモリ回路21a に与えられる。フレームメ
モリ回路21a では、一時記憶されている右チャネル画像
フレームと動き補償回路12A からの動きベクトルを用い
て参照画像フレームが生成され、この参照画像フレーム
と逆直交変換回路18からの差分データとが加算されて右
チャネル画像フレームが再構築され、一時記憶される。

【００６２】制御回路20A は、右チャネルの符号化を終
了すると、続いて左チャネルの符号化を行うための制御
を行う。具体的には、スイッチ回路24に制御信号201 を
与えて端子ｃと端子ｂの間を接続させ（図７のステップ
S13 ）、フレームメモリ回路11b に画像フレームの読み
出しを指示する。これによって、フレームメモリ回路11
b から左チャネル画像フレームが読み出され、動き補償
回路12A に与えられる。

【００６３】これと同時に、制御回路20A は、スイッチ
回路23A に制御信号202aを与え、まず、端子ｃと端子ｄ
の間を接続させると共にフレームメモリ回路21a に画像
フレームの読み出しを指示し、続いて端子ｃと端子ｂの
間を接続させると共に遅延フレームメモリ回路22b に画
像フレームの読み出しを指示する（ステップS14 ）。こ
れによって、フレームメモリ回路21a から現在の右チャ
ネル画像フレームが読み出され、続いて遅延フレームメ
モリ回路22b から過去の左チャネル画像フレームが読み
出されて順次動き補償回路12A に与えられる。

【００６４】さらに、制御回路20A は、スイッチ回路25
A に制御信号203aを与えて端子ｃと端子ｂの間を接続さ
せる（ステップS15 ）。これによって、逆直交変換回路
18から出力される左チャネルの差分データは、フレーム
メモリ回路21b に与えられることになる。

【００６５】動き補償回路12A では、まず、フレームメ
モリ回路11b からの左チャネル画像フレームと、フレー
ムメモリ回路21a からの現在の右チャネル画像フレーム
から動き予測によって得られる参照画像フレームとから
差分データが生成され、続いてフレームメモリ回路11b
からの左チャネル画像フレームと、遅延フレームメモリ
回路22b からの過去の左チャネル画像フレームから動き
予測によって得られる参照画像フレームとから差分デー
タが生成される。そして、この２つの差分データが比較
され、小さい差分データが選択されて直交変換回路14に
与えられる。これによって、第１の実施例の場合より小
さい差分データを得ることができ、伝送する符号量を低
減することができる。

【００６６】なお、上述の２つの差分データを求めて小
さい差分データを選択する処理は、最初の１回だけ、あ
るいは左チャネルの複数フレーム毎に行ってもよい。こ
の場合、動き補償で使用される参照用の画像フレーム
は、以後あるいは次の処理まで、小さい差分データが得
られた参照用の画像フレームに固定されることになる。

【００６７】また、動き補償回路12A では、選択された
差分データに対応する参照用の画像フレームが現在の右
チャネル画像フレームであるか過去の左チャネル画像フ
レームであるかを示す参照用画像フレーム情報が生成さ
れ、動きベクトルと共に可変長符号化回路16に与えられ
る。そして、右チャネルの符号化の場合と同様にして、
直交変換回路14では直交変換係数データが求められ、量
子化回路15では量子化データが求められ、可変長符号化
回路16では可変長符号化データが求められ、送信バッフ
ァ回路19から可変長符号化データが伝送路２に出力され
る。

【００６８】量子化回路15で求められた量子化データ
は、逆量子化回路17にも与えられ、逆量子化回路17では
直交変換係数データが求められ、逆直交変換回路18では
差分データが求められてスイッチ回路25の端子ｃに印加
される。スイッチ回路25では、端子ｃと端子ｂの間が接
続されているので端子ｃに印加された差分データは、フ
レームメモリ回路21b に与えられる。フレームメモリ回
路21b では、フレームメモリ回路12a と同様にして逆直
交変換回路18からの差分データから左チャネル画像フレ
ームが再構築され、一時記憶される。

【００６９】なお、右チャネルおよび左チャネルの画像
の符号化が終了したとき、フレームメモリ回路21a で
は、一時記憶されている右チャネル画像フレームがコピ
ーされて遅延フレームメモリ回路22a に与えられ、フレ
ームメモリ回路21b では、一時記憶されている左チャネ
ル画像フレームがコピーされて遅延フレームメモリ回路
22b に与えられる。遅延フレームメモリ回路22a では、
フレームメモリ回路21aからの右チャネル画像フレーム
が過去の右チャネル画像フレームとして一時記憶され
る。遅延フレームメモリ回路22b では、フレームメモリ
回路21b からの左チャネル画像フレームが過去の左チャ
ネル画像フレームとして一時記憶される。

【００７０】画像符号化装置1Bは、このようにしてステ
レオ画像の右チャネルおよび左チャネルの画像を順次符
号化し、画像復号化装置3Bへ送る。

【００７１】次に図６に示す画像復号化装置3Bの動作を
説明する。図６において、図５に示す画像符号化装置1B
から伝送路２によって伝送されてきた可変長符号化デー
タは、画像復号化装置3Bの可変長符号復号回路32に入力
される。可変長符号復号回路32では、可変長符号化デー
タが復号されて量子化データ、動きベクトル、参照用画
像フレーム情報等が得られ、量子化データは逆量子化回
路33に、動きベクトルはフレームメモリ回路35a 、遅延
フレームメモリ回路36a 、および遅延フレームメモリ回
路36b に、参照用画像フレーム情報は制御回路38A にそ
れぞれ与えられる。逆量子化回路33では直交変換係数デ
ータが求められ、逆直交変換回路34では差分データが求
められてスイッチ回路39の端子ｃに印加される。

【００７２】まず、逆直交変換回路34で得られた差分デ
ータが右チャネルの差分データである場合、制御回路38
A は、スイッチ回路39に制御信号381 を与えて端子ｃと
端子ａの間を接続させる（図８のステップS10 ）。これ
によって、スイッチ回路39の端子ｃに印加された右チャ
ネルの差分データが加算回路37a に与えられる。これと
同時に、制御回路38A は、遅延フレームメモリ回路36a
に画像フレームの読み出しを指示する。遅延フレームメ
モリ回路36a では、一時記憶されている過去の右チャネ
ル画像フレームと可変長符号復号回路32からの動きベク
トルとに基づいて参照画像フレームが生成され、加算回
路37a に与えられる。

【００７３】加算回路37a では、スイッチ回路39からの
差分データと遅延フレームメモリ回路36a からの参照画
像フレームとが加算されて右チャネル画像フレームが生
成され、フレームメモリ回路35a に与えられる。フレー
ムメモリ回路35a では、加算回路37a からの右チャネル
画像フレームが一時記憶され、所定のタイミングで読み
出され、右チャネル画像デジタル信号100a' として出力
される。

【００７４】次に、逆直交変換回路34で得られた差分デ
ータが左チャネルの差分データである場合、制御回路38
A は、スイッチ回路39に制御信号381 を与えて端子ｃと
端子ｂの間を接続させる（図８のステップS11 ）。これ
によって、スイッチ回路39の端子ｃに印加された左チャ
ネルの差分データが加算回路37b に与えられる。

【００７５】これと同時に、制御回路38A は、可変長符
号復号回路32からの参照用画像フレーム情報が現在の右
チャネル画像フレームを示す場合には、スイッチ回路40
に制御信号382 を与えて端子ｃと端子ｂの間を接続させ
ると共にフレームメモリ回路35a に画像フレームの読み
出しを指示し、過去の左チャネル画像フレームを示す場
合には、スイッチ回路40に制御信号382 を与えて端子ｃ
と端子ａの間を接続させると共に遅延フレームメモリ回
路36b に画像フレームの読み出しを指示する（ステップ
S12 ）。

【００７６】フレームメモリ回路35a では、読み出しの
指示を受けたときは、一時記憶している現在の右チャネ
ル画像フレームと可変長符号復号回路32からの動きベク
トルとに基づいて参照画像フレームが生成され、スイッ
チ回路40の端子ｂに印加される。これによって、フレー
ムメモリ回路35a からの参照画像フレームが加算回路37
b に与えられる。遅延フレームメモリ回路36b では、読
み出しの指示を受けたときは、一時記憶している過去の
左チャネル画像フレームと可変長符号復号回路32からの
動きベクトルとに基づいて参照画像フレームが生成さ
れ、スイッチ回路40の端子ａに印加される。これによっ
て、遅延フレームメモリ回路36b からの参照画像フレー
ムが加算回路37b に与えられる。

【００７７】加算回路37b では、スイッチ回路39からの
差分データと、フレームメモリ回路35a からの参照画像
フレームまたは遅延フレームメモリ回路36b からの参照
画像フレームとが加算されて左チャネル画像フレームが
生成され、フレームメモリ回路35b-A に与えられる。フ
レームメモリ回路35b-A では、加算回路37b からの左チ
ャネル画像フレームが一時記憶され、所定のタイミング
で読み出され、左チャネル画像デジタル信号100b' とし
て出力される。

【００７８】なお、右チャネルおよび左チャネルの画像
の復号が終了したとき、フレームメモリ回路35a では、
一時記憶されている右チャネル画像フレームがコピーさ
れて遅延フレームメモリ回路36a に与えられ、フレーム
メモリ回路35b-A では、一時記憶されている左チャネル
画像フレームがコピーされて遅延フレームメモリ回路36
b に与えられる。遅延フレームメモリ回路36a では、フ
レームメモリ回路35aからの右チャネル画像フレームが
一時記憶され、遅延フレームメモリ回路36b では、フレ
ームメモリ回路35b-A からの左チャネル画像フレームが
一時記憶される。

【００７９】画像復号化装置3Bは、このようにして画像
符号化装置1Bからの可変長符号化データを順次復号し、
右チャネル画像デジタル信号100b' および右チャネル画
像デジタル信号100a' を出力する。

【００８０】以上説明したように第２の実施例によれ
ば、左チャネルの符号化では、右チャネルの画像との相
関を利用して差分データを生成すると共に過去の左チャ
ネルの画像との相関を利用して差分データを生成し、こ
の２つの差分データのうち小さい差分データを選択して
符号化しているので、第１の実施例と比較して少ない符
号量でステレオ画像を伝送することができる。

【００８１】また、右チャネルの画像を復号するとき
に、左チャネルの画像を全く参照しないので、ステレオ
画像を再生できない画像端末においても、左チャネルの
画像を廃棄することで右チャネルの画像だけの再生が可
能である。

【００８２】次に、本発明の第３の実施例について説明
する。図９は、第３の実施例による画像符号化装置を示
すブロック図である。この画像符号化装置は、先処理チ
ャネルの符号化では、右チャネルおよび左チャネルの過
去の画像との相関を利用して最も小さい差分データを生
成し、後処理チャネルの符号化では、先処理チャネルの
画像、右チャネルの過去の画像、および左チャネルの過
去の画像との相関を利用して最も小さい差分データを生
成し、これを符号化することにより第２の実施例の場合
より小さい符号量でステレオ画像伝送するものである。

【００８３】図９において、画像符号化装置1Cは、図５
に示す画像符号化装置1Bにおける動き補償回路12A 、制
御回路20A 、スイッチ回路23A に替えて、動き補償回路
12B、制御回路20B 、スイッチ回路23B を設けた構成と
なっている。

【００８４】スイッチ回路23B は、動き補償で参照され
る画像フレームを選択する回路であって、制御回路20B
からの制御信号202bに従って端子ａ、端子ｂ、端子ｅ、
端子ｄのいずれかと端子ｃの間を接続し、端子ａに印加
される遅延フレームメモリ回路22a からの過去の右チャ
ネル画像フレーム、端子ｂに印加される遅延フレームメ
モリ回路22b からの過去の左チャネル画像フレーム、端
子ｄに印加されるフレームメモリ回路21a からの現在の
右チャネル画像フレーム、および端子ｅに印加されるフ
レームメモリ回路21b からの現在の左チャネル画像フレ
ームのいずれかを選択して端子ｃから動き補償回路12B
に与えるものである。

【００８５】動き補償回路12B は、符号化順を決定し、
その符号化順に従って差分データを生成するものであ
る。まず、先に符号化するチャネル（先処理チャネル）
を決定するために、次の４つの組み合わせについて差分
データを生成する。

【００８６】(1) 組み合わせ１は、右チャネル画像フレ
ームと、過去の右チャネル画像フレームから動き予測に
よって得られる参照画像フレームとの差分データを求め
る。 (2) 組み合わせ２は、右チャネル画像フレームと、過去
の左チャネル画像フレームから動き予測によって得られ
る参照画像フレームとの差分データを求める。(3) 組み
合わせ３は、左チャネル画像フレームと、過去の右チャ
ネル画像フレームから動き予測によって得られる参照画
像フレームとの差分データを求める。(4)組み合わせ４
は、左チャネル画像フレームと、過去の左チャネル画像
フレームから動き予測によって得られる参照画像フレー
ムとの差分データを求める。なお、動き補償は、画像フ
レームをＭ×Ｎ個の複数の画素からなる小領域のブロッ
クに分割し、そのブロック毎に行うように構成してもよ
い。

【００８７】次いで、動き補償回路12B は、組み合わせ
１〜４により得られた差分データのうち最も小さい差分
データを選択し、この差分データに対応する組み合わせ
のチャネルを先処理チャネルに決定する。たとえば、組
み合わせ１または２により得られた差分データが最も小
さい場合は、右チャネルを先処理チャネルとし、組み合
わせ３または４により得られた差分データが最も小さい
場合は、左チャネルを先処理チャネルとする。そして、
組み合わせ１〜４により得られた差分データのうち最も
小さい差分データを選択し、これを先処理チャネルに対
する差分データとして直交変換回路14に与えるものであ
る。

【００８８】また、動き補償回路12B は、後処理チャネ
ルの符号化では、スイッチ回路24からの画像フレーム
と、スイッチ回路23B からの参照用の画像フレームから
動き予測によって得られる参照画像フレームとの差分デ
ータを求め、この差分データおよび組み合わせ１〜２ま
たは組み合わせ３〜４により得られた差分データのうち
最も小さい差分データを選択し、これを直交変換回路14
に与えるものである。

【００８９】さらに、動き補償回路12B は、先処理チャ
ネルおよび後処理チャネルの符号化において、直交変換
回路14に与えた差分データを生成する際に参照用として
使用された画像フレームが、過去の右チャネル画像フレ
ーム、過去の左チャネル画像フレーム、現在の右チャネ
ル画像フレーム、および現在の左チャネル画像フレーム
のいずれであるかを示す参照用画像フレーム情報、およ
び先処理チャネルが右チャネルか左チャネルかを示す先
処理チャネル情報を生成し、動きベクトルと共に可変長
符号化回路16に与えるものである。なお、先処理チャネ
ル情報は、制御回路20B にも与えられ、動きベクトル
は、フレームメモリ回路21a およびフレームメモリ回路
21b にも与えられる。

【００９０】制御回路20B は、制御信号201 、202b、20
3aおよび各回路の動作に必要な制御信号を生成して出力
するものである。なお、フレームメモリ回路11a 、フレ
ームメモリ回路11b 、フレームメモリ回路21a 、フレー
ムメモリ回路21b 、直交変換回路14、量子化回路15、可
変長符号化回路16、逆量子化回路17、逆直交変換回路1
8、送信バッファ回路19、遅延フレームメモリ回路22a
、遅延フレームメモリ回路22b 、スイッチ回路24、ス
イッチ回路25A は、図５に示す画像符号化装置1Bにおけ
る同一符号を付した回路と同じであるので説明を省略す
る。

【００９１】図10は、図９に示す画像符号化装置1Cに対
応する画像復号化装置の一例を示すブロック図である。
この画像復号化装置3Cは、画像符号化装置1Cから伝送路
２を介して送られてくる可変長符号化データを復号して
右チャネル画像デジタル信号100a' および左チャネル画
像デジタル信号100b' を出力するものである。

【００９２】図10において、画像復号化装置3Cは、図６
に示す画像復号化装置3Bのフレームメモリ回路35b-A 、
制御回路38A 、およびスイッチ回路40に替えて、フレー
ムメモリ回路35b-B 、制御回路38B 、およびスイッチ回
路40A を設けた構成となっている。

【００９３】スイッチ回路40A は、制御回路38B からの
制御信号382aに従って端子ａ、端子ｂ、端子ｄ、端子ｅ
のいずれかと端子ｃの間を接続し、端子ａに印加される
遅延フレームメモリ回路36a からの参照画像フレーム、
端子ｂに印加される遅延フレームメモリ回路36b からの
参照画像フレーム、端子ｄに印加されるフレームメモリ
回路35a からの参照画像フレーム、および端子ｅに印加
されるフレームメモリ回路35c からの参照画像フレーム
のいずれかを選択して端子ｃから加算回路37aおよび加
算回路37b に与えるものである。

【００９４】フレームメモリ回路35b-B は、フレームメ
モリ回路35a と同じ回路であって、加算回路37b で生成
された左チャネル画像フレームを一時記憶し、この左チ
ャネル画像フレームを制御回路38B の指示によってコピ
ーして遅延フレームメモリ回路36b に与える。また、フ
レームメモリ回路35b-B は、制御回路38B の指示によっ
て一時記憶されている左チャネル画像フレームと可変長
符号復号回路32で復号された左チャネルの動きベクトル
とに基づいて参照画像フレームを生成してスイッチ回路
40A の端子ｅに印加する。さらに、フレームメモリ回路
35b-B は、一時記憶されている左チャネル画像フレーム
を所定のタイミングで読み出し、左チャネル画像デジタ
ル信号100b' として出力するものである。

【００９５】制御回路38B は、制御信号381 、382aおよ
び各回路の動作を制御する制御信号を生成して出力する
ものである。なお、可変長符号復号回路32、逆量子化回
路33、逆直交変換回路34、フレームメモリ回路35a 、遅
延フレームメモリ回路36a 、遅延フレームメモリ回路36
b 、およびスイッチ回路39は、図６に示す画像復号化装
置3Bの同一符号を付した回路とそれぞれ同じであるので
説明を省略する。

【００９６】次に、第３の実施例の動作について図11、
図12を用いて説明する。ここで、図11は、画像符号化装
置1Cにおける制御回路20B の動作説明図、図12は、画像
復号化装置3Cにおける制御回路38B の動作説明図であ
る。

【００９７】まず、図９に示す画像符号化装置1Cの動作
を説明する。図９において、フレームメモリ回路11a に
は右チャネル画像デジタル信号100aが一時記憶され、フ
レームメモリ回路11b には左チャネル画像デジタル信号
100bが一時記憶される。制御回路20B は、まず、先処理
チャネルを決定するための制御を行う。具体的には、ス
イッチ回路24に制御信号201 を与えて端子ｃと端子ａの
間を接続させ、フレームメモリ回路11a に読み出しを指
示する（図11のステップS10 ）。これによって、フレー
ムメモリ回路11a からの右チャネル画像フレームが動き
補償回路12B に与えられる。

【００９８】これと同時に、制御回路20B は、スイッチ
回路23B に制御信号202bを与え、端子ｃと端子ａを接続
させると共に遅延フレームメモリ回路22a に読み出しを
指示し、続いて端子ｃと端子ｂの間を接続させると共に
遅延フレームメモリ回路22bに読み出しを指示する（ス
テップS11 ）。これによって、遅延フレームメモリ回路
22a からの過去の右チャネル画像フレームが、続いて遅
延フレームメモリ回路22b からの過去の左チャネル画像
フレームが動き補償回路12B に与えられる。動き補償回
路12B では、与えられた画像フレームに基づいて組み合
わせ１および２による差分データが生成される。

【００９９】次に、制御回路20B は、スイッチ回路24に
制御信号201 を与えて端子ｃと端子ｂの間を接続させ、
フレームメモリ回路11b に読み出しを指示する（ステッ
プS12 ）。これによって、フレームメモリ回路11b から
の左チャネル画像フレームが動き補償回路12B に与えら
れる。これと同時に、制御回路20B は、制御信号202bを
スイッチ回路23B に与えて端子ｃと端子ａを接続させる
と共に遅延フレームメモリ回路22a に読み出しを指示
し、続いて端子ｃと端子ｂの間を接続させると共に遅延
フレームメモリ回路22b に読み出しを指示する（ステッ
プS13 ）。

【０１００】これによって、遅延フレームメモリ回路22
a からの過去の右チャネル画像フレームが、続いて遅延
フレームメモリ回路22b からの過去の左チャネル画像フ
レームが動き補償回路12B に与えられる。動き補償回路
12B では、与えられた画像フレームに基づいて組み合わ
せ３および４による差分データが生成される。

【０１０１】動き補償回路12B では、生成された組み合
わせ１〜４による差分データが比較され、最も小さい差
分データに対応するチャネルが先処理チャネルに決定さ
れる。そして、その差分データが先処理チャネルに対す
る差分データとして直交変換回路14に与えられる。な
お、上述の先処理チャネルを決定する処理は、最初の１
回だけ、あるいは複数フレーム毎に行ってもよい。この
場合、先処理チャネルは、以後あるいは次に先処理チャ
ネルを決定する処理が行われるまで固定されることにな
る。さらに、動き補償回路12B では、先処理チャネル情
報、参照用画像フレーム情報１が生成され、動きベクト
ルと共に可変長符号化回路16a に与えられ、先処理チャ
ネル情報が制御回路20B に与えられる。

【０１０２】図５に示す画像符号化装置1Bの場合と同様
にして、直交変換回路14では差分データから直交変換係
数が求められ、量子化回路15では量子化データが求めら
れ、可変長符号化回路16では可変長符号化データが求め
られ、送信バッファ回路19から可変長符号化データが伝
送路に出力される。また、量子化回路15で求められた量
子化データは、逆量子化回路17にも与えられ、逆量子化
回路17では直交変換係数が求められ、逆直交変換回路18
では差分データが求められ、スイッチ回路25Aに与えら
れる。

【０１０３】制御回路20B は、動き補償回路12B からの
先処理チャネル情報に基づいてスイッチ回路25A に制御
信号203aを与え、先処理チャネルが右チャネルである場
合には端子ｃと端子ａの間を接続させ、先処理チャネル
が左チャネルである場合には、端子ｃと端子ｂの間を接
続させる（図11のステップS14 ）。これによって、逆直
交変換回路18からの右チャネルの差分データは、フレー
ムメモリ回路21a に与えられ、左チャネルの差分データ
はフレームメモリ回路21b に与えられる。フレームメモ
リ回路21a 、21b 、遅延フレームメモリ回路22a 、22b
の動作は、図５に示すフレームメモリ回路21a 、21b 、
遅延フレームメモリ回路22a 、22b の動作と同じであ
る。

【０１０４】次に、制御回路20B は、後処理チャネルの
画像を符号化するための制御を行う。具体的には、後処
理チャネルが左チャネルである場合には、スイッチ回路
24に制御信号201 を与えて端子ｃと端子ｂの間を接続さ
せ、フレームメモリ回路11bに読み出しを指示する（図1
1のステップS15 ）。これによって、フレームメモリ回
路11b からの左チャネル画像フレームが動き補償回路12
B に与えられる。これと同時に、制御回路20B は、スイ
ッチ回路23B に制御信号202bを与えて端子ｃと端子ｄの
間を接続させ、フレームメモリ回路21a に読み出しを指
示する（ステップS16 ）。これによって、フレームメモ
リ回路21a からの現在の右チャネル画像フレームが動き
補償回路12B に与えられる。

【０１０５】動き補償回路12B では、フレームメモリ回
路11b からの左チャネル画像フレームと、フレームメモ
リ回路21a からの現在の右チャネル画像フレームから動
き予測によって得られる参照画像フレームとの差分デー
タが求められる。そして、動き補償回路12B では、この
差分データと先に求められた組み合わせ３および４によ
る差分データとが比較され、最も小さい差分データが後
処理チャネルに対する差分データとして直交変換回路14
に与えられる。さらに、動き補償回路12B では、参照用
画像フレーム情報２が生成され、動きベクトルと共に可
変長符号化回路16に与えられる。このとき、制御回路20
B は、スイッチ回路25A に制御信号203aを与え、端子ｃ
と端子ａの間を接続させる（ステップS17 ）。

【０１０６】また、制御回路20B は、後処理チャネルが
右チャネルである場合には、スイッチ回路24に制御信号
201 を与えて端子ｃと端子ａの間を接続させ、フレーム
メモリ回路11a に読み出しを指示する（ステップS18
）。これによって、フレームメモリ回路11a からの右
チャネル画像フレームが動き補償回路12B に与えられ
る。これと同時に、制御回路20B は、スイッチ回路23B
に制御信号202bを与えて端子ｃと端子ｅの間を接続さ
せ、フレームメモリ回路21b に読み出しを指示する（ス
テップS19 ）。これによって、フレームメモリ回路21b
からの現在の左チャネル画像フレームが動き補償回路12
B に与えられる。

【０１０７】動き補償回路12B では、フレームメモリ回
路11a からの右チャネル画像フレームと、フレームメモ
リ回路21b からの現在の左チャネル画像フレームから動
き予測によって得られる参照画像フレームとの差分デー
タが求められる。そして、この差分データと先に求めら
れた組み合わせ１および２による差分データとが比較さ
れ、最も小さい差分データが後処理チャネルに対する差
分データとして直交変換回路14に与えられる。さらに、
動き補償回路12B では、参照用画像フレーム情報２が生
成され、動きベクトルと共に可変長符号化回路16に与え
られる。このとき、制御回路20B は、スイッチ回路25A
に制御信号203aを与え、端子ｃと端子ａの間を接続させ
る（ステップS20 ）。

【０１０８】なお、直交変換回路14、量子化回路15、可
変長符号化回路16、送信バッファ回路19、逆量子化回路
17、逆直交変換回路18の動作は、先処理チャネルの場合
と同じであり、フレームメモリ回路21a 、21b 、遅延フ
レームメモリ回路22a 、22bの動作は、図５に示すフレ
ームメモリ回路21a 、21b 、遅延フレームメモリ回路22
a 、22b の動作と同じである。画像符号化回路1Cは、こ
のようにして右チャネルの画像および左チャネルの画像
を順次符号化する。

【０１０９】次に、図10に示す画像復号化装置3Cの動作
を説明する。図10において、図９に示す画像符号化装置
1Cから伝送路２によって伝送されてきた可変長符号化デ
ータは、先処理チャネル、後処理チャネルの順に画像復
号化装置3Cの可変長符号復号回路32に入力される。可変
長符号復号回路32では、量子化データ、動きベクトル、
先処理チャネル情報、参照用画像フレーム情報１、参照
用画像フレーム情報２等が復号される。

【０１１０】量子化データは逆量子化回路33に、先処理
チャネル情報、参照用画像フレーム情報１、および参照
用画像フレーム情報２は制御回路20B に、動きベクトル
はフレームメモリ回路35a 、フレームメモリ回路35b 、
遅延フレームメモリ回路36a、および遅延フレームメモ
リ回路36b にそれぞれ与えられる。逆量子化回路33では
量子化データから直交変換係数データが求められ、逆直
交変換回路34では差分データが求められてスイッチ回路
39の端子ｃに印加される。

【０１１１】まず、制御回路38B は、先処理チャネルを
復号するための制御を行う。制御回路38B は、可変長符
号復号回路32からの先処理チャネル情報により、先処理
チャネルが右チャネルであるか左チャネルであるかを知
り、参照用画像フレーム情報１により参照用の画像フレ
ームを知る。そして、先処理チャネルが右チャネルであ
る場合には、スイッチ回路39に制御信号381 を与えて端
子ｃと端子ａの間を接続させる（図12のステップS10
）。これによって、逆直交変換回路34からの右チャネ
ルの差分データが加算回路37a に与えられる。先処理チ
ャネルが左チャネルである場合には、スイッチ回路39に
制御信号381 を与えて端子ｃと端子ｂの間を接続させる
（ステップS14 ）。これによって、逆直交変換回路34か
らの左チャネルの差分データが加算回路37b に与えられ
る。

【０１１２】これと同時に、制御回路38B は、スイッチ
回路40に制御信号382aを与え、参照画像フレーム情報１
が過去の右チャネル画像フレームを示す場合には、端子
ｃと端子ａの間を接続させると共に遅延フレームメモリ
回路36a に読み出しを指示し、参照画像フレーム情報１
が過去の左チャネル画像フレームを示す場合には、端子
ｃと端子ｂの間を接続させると共に遅延フレームメモリ
回路36b に読み出しを指示する（ステップS11 、S15
）。制御回路38B から読み出しの指示を受けた回路で
は、一時記憶している画像フレームと可変長符号復号回
路32からの動きベクトルに基づいて参照画像フレームが
生成され、スイッチ回路40A の端子ａまたは端子ｂに印
加される。これによって、加算回路37a および加算回路
37b に参照画像フレームが与えられる。

【０１１３】加算回路37a では、スイッチ回路39からの
右チャネルの差分データとスイッチ回路40A からの参照
画像フレームとが加算されて右チャネル画像フレームが
生成され、フレームメモリ回路35a に与えられる。フレ
ームメモリ回路35a では、加算回路37a からの右チャネ
ル画像フレームが一時記憶され、所定のタイミングで読
み出され、右チャネル画像デジタル信号100a' として出
力される。加算回路37b では、スイッチ回路39からの左
チャネルの差分データとスイッチ回路40A からの参照画
像フレームとが加算されて左チャネル画像フレームが生
成され、フレームメモリ回路35b に与えられる。フレー
ムメモリ回路35b では、加算回路37b からの左チャネル
画像フレームが一時記憶され、所定のタイミングで読み
出され、左チャネル画像デジタル信号100b' として出力
される。

【０１１４】次に、制御回路38B は、後処理チャネルの
画像データを復号するための制御を行う。制御回路38B
は、可変長符号復号回路32からの参照用画像フレーム情
報２により参照用の画像フレームを知る。後処理チャネ
ルが左チャネルである場合には、スイッチ回路39に制御
信号381 をに与えて端子ｃと端子ｂの間を接続させる
（図12のステップS12 ）。これによって、逆直交変換回
路34からの左チャネルの差分データが加算回路37b に与
えられる。後処理チャネルが右チャネルである場合に
は、スイッチ回路39に制御信号381 を与えて端子ｃと端
子ａの間を接続させる（ステップS16 ）。これによっ
て、逆直交変換回路34からの右チャネルの差分データが
加算回路37a に与えられる。

【０１１５】これと同時に、制御回路38B は、スイッチ
回路40に制御信号382aを与え、参照画像フレーム情報２
が過去の右チャネル画像フレームを示す場合には、端子
ｃと端子ａの間を接続させると共に遅延フレームメモリ
回路36a に読み出しを指示し、参照画像フレーム情報２
が過去の左チャネル画像フレームを示す場合には、端子
ｃと端子ｂの間を接続させると共に遅延フレームメモリ
回路36b に読み出しを指示し、参照画像フレーム情報２
が現在の右チャネル画像フレームを示す場合には、端子
ｃと端子ｄの間を接続させると共にフレームメモリ回路
35a に読み出しを指示し、参照画像フレーム情報２が現
在の左チャネル画像フレームを示す場合には、端子ｃと
端子ｅの間を接続させると共にフレームメモリ回路35b
に読み出しを指示する（ステップS13 、S17 ）。

【０１１６】制御回路38B から読み出しの指示を受けた
回路では、一時記憶している画像フレームと可変長符号
復号回路32からの動きベクトルに基づいて参照画像フレ
ームが生成され、スイッチ回路40A の端子ａ、端子ｂ、
端子ｄ、および端子ｅのいずれかに印加される。これに
よって、加算回路37a および加算回路37b に参照画像フ
レームが与えられる。

【０１１７】加算回路37a では、スイッチ回路39からの
右チャネルの差分データとスイッチ回路40A からの参照
画像フレームとが加算されて右チャネル画像フレームが
生成され、フレームメモリ回路35a に与えられる。加算
回路37b では、スイッチ回路39からの左チャネルの差分
データとスイッチ回路40A からの参照画像フレームとが
加算されて左チャネル画像フレームが生成され、フレー
ムメモリ回路35b に与えられる。フレームメモリ回路35
a では、先処理チャネルの場合の同様にして一時記憶さ
れている右チャネル画像フレームが所定のタイミングで
読み出され、右チャネル画像デジタル信号100a' として
出力される。フレームメモリ回路35b では、一時記憶さ
れている左チャネル画像フレームが所定のタイミングで
読み出され、左チャネル画像デジタル信号100b' として
出力される。

【０１１８】なお、先処理チャネルおよび後処理チャネ
ルの復号を終了したとき、制御回路38A の指示により、
フレームメモリ回路35a では、一時記憶されている右チ
ャネル画像フレームがコピーされて遅延フレームメモリ
回路36a に与えられ、フレームメモリ回路35b では、一
時記憶している左チャネル画像フレームがコピーされて
遅延フレームメモリ回路36b に与えられる。遅延フレー
ムメモリ回路36a では、フレームメモリ回路35a からの
右チャネル画像フレームが記憶され、遅延フレームメモ
リ回路36b では、フレームメモリ回路35b からの左チャ
ネル画像フレームが記憶される。

【０１１９】画像復号化回路3Cは、このようにして先処
理チャネルおよび後処理チャネルの可変長符号化データ
を順次復号し、右チャネル画像デジタル信号100a' およ
び左チャネル画像デジタル信号100b' を出力する。

【０１２０】以上説明したように第３の実施例によれ
ば、先処理チャネルの符号化では、右チャネルおよび左
チャネルの過去の画像との相関を考慮して最も小さい差
分データを生成し、後処理チャネルの符号化において
は、先処理チャネルの画像、右チャネルおよび左チャネ
ルの過去の画像との相関を考慮して最も小さい差分デー
タを生成し、これを符号化しているので、第２の実施例
に比較して小さい情報量でステレオ画像を伝送すること
ができる。

【０１２１】なお、第３の実施例では、先処理チャネル
を決定する処理で４回の動き補償を行い、後処理チャネ
ルの処理で１回の動き補償を行う例を説明したが、ビッ
ト量を犠牲にすることで、動き補償の回数を減らすこと
も可能である。また、図９に示す画像符号化装置1Cにお
けるスイッチ回路23B 、24A 、25A 、および図10に示す
画像復号化装置3Cにおけるスイッチ回路39、40A の制御
パターンを変えることによって、たとえば、先処理チャ
ネルを決定する処理を省略するなど、効率優先、片チャ
ネル再生優先、計算量優先などを可能にすることができ
る。

【０１２２】

【発明の効果】以上述べたように本発明によれば、ステ
レオ画像の第１チャネルと第２チャネルの画像との相
関、第１チャネルおよび第２チャネルの過去の画像との
相関等を利用して差分が最小の差分データを生成しこれ
を符号化しているので、従来例に比べて小さい符号量で
ステレオ画像を伝送することができ、また、第１チャネ
ルと第２チャネルに対する符号化、復号化の回路を共通
にしているので装置の構成が簡単になる。

【０１２３】なお、本発明による画像符号化装置および
画像復号化装置を用いることにより、２個のカメラとヘ
ッドマウントディスプレイ等を利用して立体視の可能な
遠隔視システムを構成することができる。また、テレビ
電話、テレビ会議システムの立体視化を実現することが
できる。

【図面の簡単な説明】

【図１】本発明による画像符号化装置の第１の実施例を
示すブロック図である。

【図２】図１に示す画像符号化装置に対応する画像復号
化装置の一例を示すブロック図である。

【図３】図１に示す画像符号化装置における制御回路の
動作説明図である。

【図４】図２に示す画像復号化装置における制御回路の
動作説明図である。

【図５】本発明による画像符号化装置の第２の実施例を
示すブロック図である。

【図６】図５に示す画像符号化装置に対応する画像復号
化装置の一例を示すブロック図である。

【図７】図５に示す画像符号化装置における制御回路の
動作説明図である。

【図８】図６に示す画像復号化装置における制御回路の
動作説明図である。

【図９】本発明による画像符号化装置の第３の実施例を
示すブロック図である。

【図１０】図９に示す画像符号化装置に対応する画像復
号化装置の一例を示すブロック図である。

【図１１】図９に示す画像符号化装置における制御回路
の動作説明図である。

【図１２】図10に示す画像復号化装置における制御回路
の動作説明図である。

【符号の説明】

1A、1B、1C 画像符号化装置 3A、3B、3C 画像復号化装置 11a 、11b 、21a 、21b 、35a 、35b-A 、35b-B フレ
ームメモリ回路 12、12A 、12B 動き補償回路 14 直交変換回路 15 量子化回路 16 可変長符号化回路 17、33 逆量子化回路 18、34 逆直交変換回路 19 送信バッファ回路 20、20A 、20B 、38、38A 、38B 制御回路 22a 、22b 、36a 、36b 遅延フレームメモリ回路 23、23A 、23B 、24、25、25A 、39、40、40A スイッ
チ回路 32 可変長符号復号回路 37a 、37b 加算回路

Claims (11)

【特許請求の範囲】
1. 【請求項１】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求め、該差分データを符号化して前記
   第２のチャネルの画像符号化データを生成する工程を含
   むことを特徴とする画像符号化方法。
2. 【請求項２】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第１のチャネルの画像信号と、該第１のチャネルの
   過去の画像信号から動き予測によって得られる参照画像
   信号との差分データを求め、該差分データを符号化して
   前記第１のチャネルの画像符号化データを生成する工程
   と、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求め、該差分データを符号化して前記
   第２のチャネルの画像符号化データを生成する工程とを
   含むことを特徴とする画像符号化方法。
3. 【請求項３】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求めると共に、前記第２のチャネルの
   画像信号と、該第２のチャネルの過去の画像信号から動
   き予測によって得られる参照画像信号との差分データを
   求め、両差分データのうち差分の小さい差分データを符
   号化して前記第２のチャネルの画像符号化データを生成
   する工程を含むことを特徴とする画像符号化方法。
4. 【請求項４】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第１のチャネルの画像信号と、該第１のチャネルの
   過去の画像信号から動き予測によって得られる参照画像
   信号との差分データを求め、該差分データを符号化して
   前記第１のチャネルの画像符号化データを生成する工程
   と、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求めると共に、前記第２のチャネルの
   画像信号と、該第２のチャネルの過去の画像信号から動
   き予測によって得られる参照画像信号との差分データを
   求め、両差分データのうち差分の小さい差分データを符
   号化して前記第２のチャネルの画像符号化データを生成
   する工程とを含むことを特徴とする画像符号化方法。
5. 【請求項５】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求め、前記第２のチャネルの画像信号
   と、該第２のチャネルの過去の画像信号から動き予測に
   よって得られる参照画像信号との差分データを求め、さ
   らに前記第２のチャネルの画像信号と、前記第１のチャ
   ネルの過去の画像信号から動き予測によって得られる参
   照画像信号との差分データを求め、これら３つの差分デ
   ータのうち差分の最も小さい差分データを符号化して前
   記第２のチャネルの画像符号化データを生成する工程を
   含むことを特徴とする画像符号化方法。
6. 【請求項６】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第１のチャネルの画像信号と、該第１のチャネルの
   過去の画像信号から動き予測によって得られる参照画像
   信号との差分データを求め、該差分データを符号化して
   前記第１のチャネルの画像符号化データを生成する工程
   と、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求め、前記第２のチャネルの画像信号
   と、該第２のチャネルの過去の画像信号から動き予測に
   よって得られる参照画像信号との差分データを求め、さ
   らに前記第２のチャネルの画像信号と、前記第１のチャ
   ネルの過去の画像信号から動き予測によって得られる参
   照画像信号との差分データを求め、これら３つの差分デ
   ータのうち差分の最も小さい差分データを符号化して前
   記第２のチャネルの画像符号化データを生成する工程と
   を含むことを特徴とする画像符号化方法。
7. 【請求項７】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化方法において、該方法は、 前記第１のチャネルの画像信号と、該第１のチャネルの
   過去の画像信号から動き予測によって得られる参照画像
   信号との差分データを求めると共に、前記第１のチャネ
   ルの画像信号と、前記第２のチャネルの過去の画像信号
   から動き予測によって得られる参照画像信号との差分デ
   ータを求め、両差分データのうち差分の小さい差分デー
   タを符号化して前記第１のチャネルの画像符号化データ
   を生成する工程と、 前記第２のチャネルの画像信号と、前記第１のチャネル
   の画像信号から動き予測によって得られる参照画像信号
   との差分データを求め、前記第２のチャネルの画像信号
   と、該第２のチャネルの過去の画像信号から動き予測に
   よって得られる参照画像信号との差分データを求め、さ
   らに前記第２のチャネルの画像信号と、前記第１のチャ
   ネルの過去の画像信号から動き予測によって得られる参
   照画像信号との差分データを求め、これら３つの差分デ
   ータのうち差分の最も小さい差分データを符号化して前
   記第２のチャネルの画像符号化データを生成する工程と
   を含むことを特徴とする画像符号化方法。
8. 【請求項８】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して画像符号
   化データを生成する画像符号化方法において、該方法
   は、 前記第１のチャネルの画像信号と、該第１のチャネルの
   画像信号から動き予測によって得られる参照画像信号と
   の第１の差分データを求め、前記第１のチャネルの画像
   信号と、前記第２のチャネルの過去の画像信号から動き
   予測によって得られる参照画像信号との第２の差分デー
   タを求め、前記第２のチャネルの画像信号と、前記第１
   のチャネルの過去の画像信号から動き予測によって得ら
   れる参照画像信号との第３の差分データを求め、さらに
   前記第２のチャネルの画像信号と、該第２のチャネルの
   過去の画像信号から動き予測によって得られる参照画像
   信号との第４の差分データを求め、前記第１の差分デー
   タから前記第４の差分データのうち差分の最も小さい差
   分データを符号化して先処理チャネルの画像符号化デー
   タを生成する工程と、 前記先処理チャネルが第１のチャネルである場合、前記
   第２のチャネルの画像信号と、前記第１のチャネルの画
   像信号から動き予測によって得られる参照画像信号との
   差分データを求め、該差分データと前記第３の差分デー
   タと前記第４の差分データのうち差分の最も小さい差分
   データを符号化して後処理チャネルの画像符号化データ
   を生成し、前記先処理チャネルが第２のチャネルである
   場合、前記第１のチャネルの画像信号と、前記第２のチ
   ャネルの画像信号から動き予測によって得られる参照画
   像信号との差分データを求め、該差分データと前記第１
   の差分データと前記第２の差分データのうち差分の最も
   小さい差分データを符号化して後処理チャネルの画像符
   号化データを生成する工程とを含むことを特徴とする画
   像符号化方法。
9. 【請求項９】 ステレオ画像を構成する第１のチャネル
   および第２のチャネルの画像信号を符号化して該第１の
   チャネルおよび第２のチャネルの画像符号化データを生
   成する画像符号化装置において、該装置は、 前記第１のチャネルと第２のチャネルの画像信号を順次
   選択して出力する画像信号選択手段と、 該画像信号選択手段で第１のチャネルの画像信号が選択
   されたとき第１の記憶手段に記憶されている画像信号を
   選択し、前記画像信号選択手段で第２のチャネルの画像
   信号が選択されたとき第２の記憶手段に記憶されている
   画像信号を選択して出力する参照用画像信号選択手段
   と、 前記画像信号選択手段で選択された第１のチャネルの画
   像信号と、前記参照用画像信号選択手段で選択された第
   １の記憶手段に記憶されている画像信号から動き予測に
   よって得られる参照画像信号との差分データを求め、該
   差分データを符号化して前記第１のチャネルの画像符号
   化データを生成し、前記画像信号選択手段で選択された
   第２のチャネルの画像信号と、前記参照用画像信号選択
   手段で選択されたした第２の記憶手段に記憶されている
   画像信号から動き予測によって得られる参照画像信号と
   の差分データを求め、該差分データを符号化して前記第
   ２のチャネルの画像符号化データを生成する符号化手段
   と、 該符号化手段で符号化された第１のチャネルの画像符号
   化データを復号して画像信号を生成する復号化手段とを
   含み、 前記第２の記憶手段は、前記復号化手段で生成された画
   像信号を一時記憶し、前記第１の記憶手段は、前記符号
   化手段による第１のチャネルおよび第２のチャネルの画
   像信号の符号化が終了したとき前記第２の記憶手段に一
   時記憶されている画像信号をコピーして一時記憶するこ
   とを特徴とする画像符号化装置。
10. 【請求項１０】 ステレオ画像を構成する第１のチャネ
    ルおよび第２のチャネルの画像信号を符号化して該第１
    のチャネルおよび第２のチャネルの画像符号化データを
    生成する画像符号化装置において、該装置は、 前記第１のチャネルと第２のチャネルの画像信号を順次
    選択して出力する画像信号選択手段と、 該画像信号選択手段で第１のチャネルの画像信号が選択
    されたとき第１の記憶手段に記憶されている画像信号を
    選択し、前記画像信号選択手段で第２のチャネルの画像
    信号が選択されたとき第２の記憶手段と第３の記憶手段
    とに記憶されている画像信号を選択して出力する参照用
    画像信号選択手段と、 前記画像信号選択手段で選択された第１のチャネルの画
    像信号と、前記参照用画像信号選択手段で選択された第
    １の記憶手段に記憶されている画像信号から動き予測に
    よって得られる参照画像信号との差分データを求め、該
    差分データを符号化して前記第１のチャネルの画像符号
    化データを生成し、前記画像信号選択手段で選択された
    第２のチャネルの画像信号と、前記参照用画像信号選択
    手段で選択されたした第２の記憶手段に記憶されている
    画像信号から動き予測によって得られる参照画像信号と
    の差分データを求めると共に、前記第２のチャネルの画
    像信号と、前記参照用画像信号選択手段で選択されたし
    た第３の記憶手段に記憶されている画像信号から動き予
    測によって得られる参照画像信号との差分データを求
    め、両差分データのうち差分の小さい差分データを符号
    化して前記第２のチャネルの画像符号化データを生成す
    る符号化手段と、 該符号化手段で符号化された第１のチャネルおよび第２
    のチャネルの画像符号化データを復号して画像信号を生
    成する復号化手段と、 該復号化手段で生成された第２のチャネルの画像信号を
    一時記憶する第４の記憶手段とを含み、 前記第３の記憶手段は、前記符号化手段による第１のチ
    ャネルおよび第２のチャネルの画像信号の符号化が終了
    したとき前記第４の記憶手段に一時記憶されている画像
    信号をコピーして一時記憶し、前記第２の記憶手段は、
    前記復号化手段で生成された第１のチャネルの画像信号
    を一時記憶し、前記第１の記憶手段は、前記符号化手段
    による第１のチャネルおよび第２のチャネルの画像信号
    の符号化が終了したとき前記第２の記憶手段に一時記憶
    されている画像信号をコピーして一時記憶することを特
    徴とする画像符号化装置。
11. 【請求項１１】 ステレオ画像を構成する第１のチャネ
    ルおよび第２のチャネルの画像信号を符号化して該第１
    のチャネルおよび第２のチャネルの画像符号化データを
    生成する画像符号化装置において、該装置は、 前記第１のチャネルと第２のチャネルの画像信号を順次
    選択して出力する画像信号選択手段と、 該画像信号選択手段で第１のチャネルの画像信号が選択
    されたとき第１の記憶手段と第３の記憶手段に記憶され
    ている画像信号を選択し、前記画像信号選択手段で第２
    のチャネルの画像信号が選択されたとき第１の記憶手段
    と第２の記憶手段と第３の記憶手段にそれぞれ記憶され
    ている画像信号を選択して出力する参照用画像信号選択
    手段と、 前記画像信号選択手段で選択された第１のチャネルの画
    像信号と、前記参照用画像信号選択手段で選択された前
    記第１の記憶手段に記憶されている画像信号から動き予
    測によって得られる参照画像信号との差分データを求め
    ると共に、前記第１のチャネルの画像信号と、前記参照
    用画像信号選択手段で選択された前記第３の記憶手段に
    記憶されている画像信号から動き予測によって得られる
    参照画像信号との差分データを求め、両差分データのう
    ち差分の小さい差分データを符号化して前記第１のチャ
    ネルの画像符号化データを生成し、前記画像信号選択手
    段で選択された第２のチャネルの画像信号と、前記参照
    用画像信号選択手段で選択された前記第１の記憶手段に
    記憶されている画像信号から動き予測によって得られる
    参照画像データとの差分データを求め、前記第２のチャ
    ネルの画像信号と、前記参照用画像信号選択手段で選択
    された前記第２の記憶手段に記憶されている画像信号か
    ら動き予測によって得られる参照画像データとの差分デ
    ータを求め、さらに前記第２のチャネルの画像信号と、
    前記参照用画像信号選択手段で選択された前記第３の記
    憶手段に記憶されている画像信号から動き補償を行って
    差分データを生成し、これら３つの差分データのうち差
    分の最も小さい差分データを符号化して前記第２のチャ
    ネルの画像符号化データを生成する符号化手段と、 該符号化手段で符号化された第１のチャネルおよび第２
    のチャネルの画像符号化データを復号して画像信号を生
    成する復号化手段とを含み、 前記第２の記憶手段は、前記復号化手段で生成された第
    １のチャネルの画像信号を一時記憶し、前記第１の記憶
    手段は、前記符号化手段による第１のチャネルおよび第
    ２のチャネルの画像信号の符号化が終了したとき前記第
    ２の記憶手段に一時記憶されている画像信号をコピーし
    て一時記憶し、前記第４の記憶手段は、前記復号化手段
    で生成された第２チャネルの画像信号を一時記憶し、前
    記第３の記憶手段は、前記符号化手段による第１のチャ
    ネルおよび第２のチャネルの画像信号の符号化あ終了し
    たとき前記第４の記憶手段に一時記憶されている画像信
    号をコピーして一時記憶することを特徴とする画像符号
    化装置。