JP3288985B2 - 画像通信方法、画像通信システム、および、画像通信プログラムを記録した記録媒体 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、無線伝送路やＬＡ
Ｎ等、通信途中で誤りが発生する伝送路を介して画像を
伝送する画像通信方法、画像通信システム、および、画
像通信プログラムを記録したコンピュータ読み取り可能
な記録媒体に関するものである。

【０００２】

【従来の技術】画像データの通信において、圧縮率を高
めるための代表的な動画像符号化方式にフレーム間差分
符号化方式がある。フレーム間差分符号化方式は、送信
側では以前に符号化を行った画像と現画像との差分を作
成し、差分のみを符号化データとして受信側へ送信し、
受信側は受信した符号化データから、以前に受信し復号
した画像を参照して現画像を復号する方式である。

【０００３】このフレーム間差分符号化を用いた符号化
データを通信する場合、伝送路にて誤りが符号化データ
に載ると、その後復号される画像に誤りが波及する。す
なわち、ある画像の符号化データに誤りが載った場合に
は、受信側にてその画像を参照画像に用いると、誤りの
載った画像領域を参照することがあり、続く画像の符号
化データに伝送路にて誤りが載っていない場合にも、復
号した画像に誤りが波及する。

【０００４】この問題を解決する技術の１つに、画像符
号化方式ＩＴＵ−Ｔ勧告Ｈ．２６３のＡｎｎｅｘＮのよ
うに、送信側が受信側で正しく復号できた画像を参照す
る方式がある。この方式では、送信側と受信側に複数画
像分の参照画像用のメモリを備え、さらに送信側は受信
側から指定される特定の画像を参照画像に用いて符号化
する。符号化・復号手順は次の通りである。

【０００５】送信側は参照画像にした画像を指定する信
号を符号化データと同時に送信し、受信側は受信した参
照画像を指定する信号によって指定された画像を参照画
像にして符号化データを復号する。

【０００６】受信側の参照画像メモリには、正しく復号
できた画像が順次蓄積される。その後、受信側は符号化
データを復号できたかどうかの情報と参照画像メモリの
中で最も新しい画像を指定する情報を、送信側に送信す
る。

【０００７】送信側は、受信側にて指定されていた正し
く復号できた画像を参照画像にして符号化をすることに
より、受信側は参照画像メモリに蓄積されている画像を
参照画像にして誤りなく復号することができる。

【０００８】ここで、上述した受信側が送信側に送信す
る「符号化データを復号できたかどうかの情報」には、
ＡＣＫ信号とＮＡＣＫ信号の２種類ある。まず、受信側
で正しく復号できた場合に送信側に送信するＡＣＫ信号
には、受信側にて正しく復号できた画像の画像指定デー
タが含まれている。また、受信側で正しく復号できなか
った場合に送信側に送信するＮＡＣＫ信号には、受信側
の参照画像メモリに蓄積されている画像のうち最も新し
い画像の画像指定データが含まれている。

【０００９】また、送信側において、ＡＣＫ信号または
ＮＡＣＫ信号を受信した時に、参照画像を変更する方法
は、大きく分けて２種類に分類できる。

【００１０】１つは、ＡＣＫ信号に含まれる受信側にて
正しく復号できた画像の画像指定データ、または、ＮＡ
ＣＫ信号に含まれる受信側の参照画像メモリに蓄積され
ている画像のうち最も新しい画像の画像指定データによ
って指定された画像を参照するように、参照画像を変更
する方法である。この方法の場合、毎画像必ず、送信側
が受信側で正しく復号できた画像を参照するように参照
画像を変更して符号化を行う。以下、これをＡＣＫ方式
と呼ぶことにする。通常のフレーム間差分符号化では、
必ず１画像前の画像を参照画像にするため、１つの画像
に誤りが載ると続く画像に必ず誤りが波及することにな
るが、ＡＣＫ方式では、１画像ごとに参照画像を変更す
るので、受信する画像が誤りなく復号できるかどうか
は、１画像前に受信した画像が誤りなく復号できたかど
うかによらず、誤りは波及しない。しかし、遅延時間が
大きくなると、必ず１画像前以外の画像を参照画像にす
るため、毎画像、符号化効率が通常のフレーム間差分符
号化よりも低下する。

【００１１】もう１つは、ＮＡＣＫ信号に含まれる、受
信側の参照画像メモリに蓄積されている画像のうち、最
も新しい画像の画像指定データによって指定された画像
を参照するように参照画像を変更して符号化を行い、Ｎ
ＡＣＫ信号を受信しない場合には、１画像前の画像を参
照画像にして符号化を行う方法である。以下、これをＮ
ＡＣＫ方式と呼ぶことにする。このＮＡＣＫ方式では、
１つの画像に誤りが載ると、ＮＡＣＫ信号を受信して参
照画像を変更するまでは、通常のフレーム間差分符号化
のように誤りが波及する。このため、誤った画像を表示
しない場合、この誤りの波及は、誤りなく復号できる画
像の数の低下を引き起こす。しかし、参照画像を変更す
る時はＮＡＣＫ信号を受信した時のみであるので、上記
のＡＣＫ方式よりも符号化効率は上がる。

【００１２】上記の２つの方式の間の参照画像の変更方
法の相違点は、受信側が画像を正しく復号できた場合に
送信するＡＣＫ信号を受信した時の、送信側の参照画像
の変更方法にあり、ＡＣＫ信号に含まれる受信側にて正
しく復号できた画像の画像指定データによって参照画像
を変更するか、または、ＡＣＫ信号に含まれる受信側に
て正しく復号できた画像の画像指定データによって指定
される画像ではなく、送信側にて１画像前に符号化した
画像を参照画像にするかの違いがある。

【００１３】

【発明が解決しようとする課題】ところで、誤りの波及
の軽減効果があるＡＣＫ方式と、符号化効率の低下の軽
減効果があるＮＡＣＫ方式とで、通信の目的によって、
どちらかを選択することができるが、その選択は、通信
を開始する前と通信途中で行うことが想定される。通信
の開始時に方法の指定をする場合には、符号化データの
送受信をする前に予め、ＡＣＫ方式を用いるのか、ＮＡ
ＣＫ方式を用いるのかを受信側が送信側に指定すること
は可能である。

【００１４】しかし、通信途中で選択を行う場合、従来
では、送信側が選択することができたが、受信側が選択
することはできなかった。すなわち、受信側の要求に従
って、通信途中で上記２つの方式を切り替え、誤りの波
及の軽減と、符号化効率の低下の軽減の制御をすること
ができなかった。

【００１５】これは、従来の方式では、受信側が送信側
に指定するのは、どの特定の画像を参照画像にするのか
を指定するのみであり、通信途中で明示的に、送信側に
て１画像前に符号化した画像を参照画像にするように、
受信側から指定する方法がなかったために、受信側が通
信途中でＮＡＣＫ方式を指定できず、ＡＣＫ方式からＮ
ＡＣＫ方式に変更する手段がなかったことに起因する。

【００１６】さらに、符号化データや画像指定データの
授受は、伝送路を介して行われるため、受信側から送信
される受信側の参照画像メモリ内の最新の画像を指定す
る情報によって示される画像を、参照画像として送信側
が符号化してから、そのデータが受信側に到着するまで
の間に遅延が発生する。このため、受信側では、参照画
像が変更された符号化データを復号した後、その復号画
像を蓄積し、後に、送信側からその画像を参照画像とし
て指定される場合に備えておく必要がある。

【００１７】ところが、従来のＡＣＫ方式では、受信側
の参照画像メモリの記憶容量が、遅延時間の間に符号化
・復号される画像のデータ量に比べて少ない場合には、
新たに復号した画像を蓄積するために、最も古い画像が
参照画像メモリから削除されてしまうので、遅延時間以
内に復号した画像が参照画像メモリから削除される場合
が生じる。このようなことが生じると、受信側の参照画
像メモリに参照画像が蓄積されていないこととなり、符
号化データを復号できなくなってしまう。

【００１８】この受信側の参照画像メモリに、送信側に
よって指定された参照画像がないために復号できなくな
る事象は、復号できる画像の数を低下させ、さらにフレ
ーム間差分符号化の効率を低下させることになる。この
ため、従来の方式では、遅延時間の間に符号化・復号さ
れる画像のデータ量に比べて参照画像メモリの記憶容量
が小さい場合には、ＮＡＣＫ方式からＡＣＫ方式に変更
することができなかった。

【００１９】本発明は上記の課題を鑑みてなされたもの
で、通常のフレーム間差分符号化のように送信側にて１
画像前に符号化した画像を参照画像に用いて符号化する
ことを指定する方法を提供し、さらに、送信側に対し、
受信側が指定した画像を参照画像に用いた符号化、また
は、通常のフレーム間差分符号化のように送信側にて１
画像前に符号化した画像を参照画像に用いた符号化の変
更を、受信側が指定し、誤りの波及の軽減と、符号化効
率の低下の軽減との制御を行うことを可能とした画像通
信方法、画像通信システム、および、画像通信プログラ
ムを記録したコンピュータ読み取り可能な記録媒体を提
供することを目的とする。

【００２０】

【課題を解決するための手段】前記の目的を達成するた
めに、本発明では、送信側はフレーム間差分符号化方式
により入力画像を符号化して、該符号化データを受信側
へ送信し、該受信側は、以前に復号した画像を参照画像
として該送信側から送信された符号化データを復号する
画像通信方法において、 前記受信側は、 前記参照画像と
して予測参照画像と現参照画像のいずれか一方を用い、
前記送信側に対し、前記予測参照画像の画像番号を示す
復号画像指定データを送信し、該復号画像指定データに
より指定される参照画像を用いて符号化を行うことを送
信側に指示するか、または、１画像前に符号化した画像
を参照画像として用いて符号化を行うことを送信側に指
示するのかを所定の条件に基づいて判断する符号化参照
画像判断過程と、 前記符号化参照画像判断過程で、送信
側に対し、前記復号画像指定データにより指定される参
照画像を用いて符号化を行うことを指示すると判断した
場合は、前記復号画像指定データにより指定される参照
画像を用いて符号化を行うことを送信側に指示する特定
参照画像指定過程と、 前記符号化参照画像判断過程で、
送信側に対し、１画像前に符号化した画像を参照画像と
して用いて符号化を行うことを指示すると判断した場合
は、１画像前に符号化された画像を参照画像として用い
て符号化を行うことを送信側に指示する連続参照画像指
定過程と、 前記送信側が符号化の際に使用した参照画像
の画像番号を示す参照画像指定データを受信する参照画
像指定データ受信過程と、 前記送信側にて符号化した画
像の画像番号を示す画像指定データを受信する画像指定
データ受信過程と、 前記予測参照画像または前記現参照
画像のうち、前記受信した参照画像指定データにより指
定される画像を参照画像として用いて、前記符号化デー
タの復号を行う復号過程と、 前記受信した参照画像指定
データと前記復号画像指定データが一致し、かつ、 前記
復号過程において前記符号化データが正しく復号された
時に、予測参照画像を現参照画像として蓄積することを
判断する現参照画像蓄積判断過程と、 前記現参照画像蓄
積判断過程で蓄積することが決定された場合には、予測
参照画像を現参照画像として蓄積し、前記現参照画像蓄
積判断過程で蓄積することが決定されなかった場合に
は、予測参照画像を現参照画像として蓄積しない現参照
画像蓄積過程と、 前記符号化参照画像判断過程で、送信
側に対し、前記復号画像指定データにより指定される参
照画像を用いて符号化を行うことを指示する場合には、
前記受信した参照画像指定データと前記復号画像指定デ
ータが一致し、かつ、前記復号過程において前記符号化
データが正しく復号された時に、復号画像を予測参照画
像として蓄積することを判断し、または、前記符号化参
照画像判断過程で、１画像前に符号化した画像を参照画
像として用いて符号化を行うことを指示する場合には、
前記復号過程において前記符号化データが正しく復号さ
れた時に、復号画像を予測参照画像として蓄積すること
を判断する予測参照画像蓄積判断過程と、 前記予測参照
画像蓄積判断過程で蓄積することが決定された場合に
は、復号画像を前記予測参照画像として蓄積するととも
に、該復号画像の画像番号を前記復号画像指定データと
して蓄積し、前記予測参照画像蓄積判断過程で蓄積する
ことが決定されなかった場合には、復号画像を前記予測
参照画像として蓄積せず、また、該復号画像の画像番号
も前記復号画像指定データとして蓄積しない予測参照画
像蓄積過程と、を有することを特徴としている。

【００２１】また、本発明では、送信側はフレーム間差
分符号化方式により入力画像を符号化して、該符号化デ
ータを受信側へ送信し、該受信側は、以前に復号した画
像を参照画像として該送信側から送信された符号化デー
タを復号する画像通信システムにおいて、 前記受信側
は、 前記参照画像として用いるための予測参照画像と現
参照画像を有し、 前記送信側に対し、前記予測参照画像
の画像番号を示す復号画像指定データを送信し、該復号
画像指定データにより指定される参照画像を用いて符号
化を行うことを送信側に指示するか、または、１画像前
に符号化した画像を参照画像として用いて符号化を行う
ことを送信側に指示するのかを所定の条件に基づいて判
断する符号化参照画像判断部と、 前記符号化参照画像判
断部で、送信側に対し、前記復号画像指定データにより
指定される参照画像を用いて符号化を行うことを指示す
ると判断した場合は、前記復号画像指定データにより指
定される参照画像を用いて符号化を行うことを送信側に
指示する特定参照画像指定部と、 前記符号化参照画像判
断部で、送信側に対し、１画像前に符号化した画像を参
照画像として用いて符号化を行うことを指示すると判断
した場合は、１画像前に符号化された画像を参照画像と
して用いて符号化を行うことを送信側に指示する連続参
照画像指定部と、 前記送信側が符号化の際に使用した参
照画像の画像番号を示す参照画像指定データを受信する
参照画像指定データ受信部と、 前記送信側にて符号化し
た画像の画像番号を示す画像指定データを受信する画像
指定データ受信部と、 前記予測参照画像または前記現参
照画像のうち、前記受信した参照画像指定データにより
指定される画像を参照画像として用いて、前記符号化デ
ータの復号を行う復号過程と、 前記受信した参照画像指
定データと前記復号画像指定データが一致し、かつ、前
記復号過程において前記符号化データが正しく復号され
た時に、予測参照画像 を現参照画像として蓄積すること
を判断する現参照画像蓄積判断部と、 前記現参照画像蓄
積判断部で蓄積することが決定された場合には、予測参
照画像を現参照画像として蓄積し、前記現参照画像蓄積
判断部で蓄積することが決定されなかった場合には、予
測参照画像を現参照画像として蓄積しない現参照画像蓄
積部と、 前記符号化参照画像判断部で、送信側に対し、
前記復号画像指定データにより指定される参照画像を用
いて符号化を行うことを指示する場合には、前記受信し
た参照画像指定データと前記復号画像指定データが一致
し、かつ、前記復号過程において前記符号化データが正
しく復号された時に、復号画像を予測参照画像として蓄
積することを判断し、または、前記符号化参照画像判断
部で、１画像前に符号化した画像を参照画像として用い
て符号化を行うことを指示する場合には、前記復号過程
において前記符号化データが正しく復号された時に、復
号画像を予測参照画像として蓄積することを判断する予
測参照画像蓄積判断部と、 前記予測参照画像蓄積判断部
で蓄積することが決定された場合には、復号画像を前記
予測参照画像として蓄積するとともに、該復号画像の画
像番号を前記復号画像指定データとして蓄積し、前記予
測参照画像蓄積判断部で蓄積することが決定されなかっ
た場合には、復号画像を前記予測参照画像として蓄積せ
ず、また、該復号画像の画像番号も前記復号画像指定デ
ータとして蓄積しない予測参照画像蓄積部と、を有する
ことを特徴としている。

【００２２】更に、本発明では、送信側から送信された
符号化データを受信し、該符号化データを、以前に復号
した画像を参照画像として用いて復号する画像通信プロ
グラムを記録したコンピュータ読み取り可能な記録媒体
であって、前記参照画像として予測参照画像と現参照画
像のいずれか一方を用い、 前記送信側に対し、前記予測
参照画像の画像番号を示す復号画像指定データを送信
し、該復号画像指定データにより指定される参照画像を
用いて符号化を行うことを送信側に指示するか、また
は、１画像前に符号化した画像を参照画像として用いて
符号化を行うことを送信側に指示するのかを所定の条件
に基づいて判断する符号化参照画像判断ステップと、 前
記符号化参照画像判断ステップで、送信側に対し、前記
復号画像指定データにより指定される参照画像を用いて
符号化を行うことを指示すると判断した場合は、前記復
号画像指定データにより指定される参照画像を用いて符
号化を行うことを送信側に指示する特定参照画像指定ス
テップと、 前記符号化参照画像判断ステップで、送信側
に対し、１画像前に符号化した画像を参照画像として用
いて符号化を行うことを指示すると判断した場合は、１
画像前に符号化された画像を参照画像として用いて符号
化を行うことを送信側に指示する連続参照画像指定ステ
ップと、 前記送信側が符号化の際に使用した参照画像の
画像番号を示す参照画像指定データを受信する参照画像
指定データ受信ステップと、 前記送信側にて符号化した
画像の画像番号を示す画像指定データを受信する画像指
定データ受信ステップと、 前記予測参照画像または前記
現参照画像のうち、前記受信した参照画像指定データに
より指定される画像を参照画像として用いて、前記符号
化データの復号を行う復号ステップと、 前記受信した参
照画像指定データと前記復号画像指定データが一致し、
かつ、前記復号過程において前記符号化データが正しく
復号された時に、予測参照画像を現参照画像として蓄積
することを判断する現参照画像蓄積判断ステップと、 前
記現参照画像蓄積判断ステップで蓄積することが決定さ
れた場合には、予測 参照画像を現参照画像として蓄積
し、前記現参照画像蓄積判断ステップで蓄積することが
決定されなかった場合には、予測参照画像を現参照画像
として蓄積しない現参照画像蓄積ステップと、 前記符号
化参照画像判断ステップで、送信側に対し、前記復号画
像指定データにより指定される参照画像を用いて符号化
を行うことを指示する場合には、前記受信した参照画像
指定データと前記復号画像指定データが一致し、かつ、
前記復号過程において前記符号化データが正しく復号さ
れた時に、復号画像を予測参照画像として蓄積すること
を判断し、または、前記符号化参照画像判断ステップ
で、１画像前に符号化した画像を参照画像として用いて
符号化を行うことを指示する場合には、前記復号過程に
おいて前記符号化データが正しく復号された時に、復号
画像を予測参照画像として蓄積することを判断する予測
参照画像蓄積判断ステップと、 前記予測参照画像蓄積判
断ステップで蓄積することが決定された場合には、復号
画像を前記予測参照画像として蓄積するとともに、該復
号画像の画像番号を前記復号画像指定データとして蓄積
し、前記予測参照画像蓄積判断ステップで蓄積すること
が決定されなかった場合には、復号画像を前記予測参照
画像として蓄積せず、また、該復号画像の画像番号も前
記復号画像指定データとして蓄積しない予測参照画像蓄
積ステップと、をコンピュータに実行させる。

【００２３】

【００２４】

【００２５】

【００２６】

【００２７】

【００２８】上記の画像通信方法および画像通信システ
ムになる本発明の受信側、並びに、送信側から送信され
た符号化データを受信して該符号化データを以前に復号
した画像を参照画像として用いて復号する画像通信プロ
グラムを記録した記録媒体になる本発明において、送信
側が行う符号化に使用する参照画像として、特定の画像
を用いるか、または、送信側で１画像前に符号化された
画像を用いるのかを判断する際の所定の条件としては、
例えば、受信側のユーザによる指定、受信側が受信した
符号化データに誤りが載っているか否か、もしくは、送
受信間のデータ遅延時間の程度、等の条件が考えられ
る。

【００２９】また、送信側にて１画像前に符号化した画
像を参照画像に指定する具体的な方法として、特定のコ
ードを持つ信号を、受信側から送信側に送信することに
よって行ってもよい。

【００３０】本発明では、受信側が、通常のフレーム間
差分符号化と同様に参照画像を１つ前の画像にすること
を送信側に要求する方法として、受信側は、通常のフレ
ーム間差分符号化のように１画像前に符号化した画像を
参照画像に用いて符号化することを指定し、送信側は、
この指定を受け、符号化に用いる参照画像を、１画像前
に符号化した画像に変更する。

【００３１】

【００３２】

【００３３】

【００３４】従来の技術では、通信途中で明示的に、受
信側が１画像前に符号化した画像を参照画像に指定し、
送信側が１画像前に符号化した画像を参照画像にする手
段がなかった。これに対し、本発明では、受信側が連続
参照画像指定データを送信側に送信し、送信側が連続参
照画像指定データを受信したときに参照画像を１画像前
の画像にする。すなわち、受信側が１画像前に符号化し
た画像を参照画像にするように、送信側に指定する。こ
れにより、受信側から、参照画像指定によって、送信側
にて１画像前の画像を参照することを指定するのか、受
信側にて正しく復号できた画像を参照することを指定す
るのかを変更することができる。また、受信側はＡＣＫ
方式の参照画像変更かＮＡＣＫ方式の参照画像変更かを
指定することができ、受信側主体で、誤りの波及の軽減
と、符号化効率の低下の軽減とを図ることができる。

【００３５】さらに、受信側で、参照画像メモリに正し
く復号できた画像を蓄積するかどうかを判断し、変更す
ることによって、遅延時間の間に符号化・復号される画
像のデータ量に比べて参照画像メモリの記憶容量が小さ
い場合にも、送信側に参照画像として指定した復号画像
を蓄積し続けることができる。これにより、ＮＡＣＫ方
式からＡＣＫ方式に変更することができる。

【００３６】

【発明の実施の形態】以下、本発明の実施形態について
図面を参照して説明する。なお、以下に述べる各実施形
態において、各画像を指定するための画像指定データ
は、符号化した画像の通し番号すなわち符号化した画像
の数にて与えるものとし、この番号を画像番号と呼ぶこ
とにする。また、画像番号「０」は、特定の画像を指定
するための画像指定データとしては使用しないこととす
る。画像番号は最初に符号化した画像を「１」とし、符
号化した画像の数に従って１ずつ増えるものとする。

【００３７】［第１の実施形態］図１は、本発明の第１
の実施形態を示す構成図である。この図に示す本実施形
態の送信側において、符号化参照画像蓄積部は、符号化
参照画像メモリ１０３により構成される。また、連続参
照画像選択部は、符号化した画像の画像指定データを１
画像分、次の画像が符号化されるまで蓄積する符号化画
像指定データ蓄積部１０６と、１画像前に符号化した画
像を参照画像にするように指定する連続参照画像指定デ
ータを受信し、そのデータが画像番号「０」以外の場合
に、符号化画像指定データ蓄積部に蓄積してある画像指
定データの画像を参照画像にするように符号化参照画像
選択手段１０４を変更する連続参照画像指定データ受信
部１０７とから構成される。

【００３８】また、特定参照画像選択部は、特定の画像
を参照画像にするように指定する特定参照画像指定デー
タを受信し、そのデータが画像番号「０」以外の場合
に、特定参照画像指定データにて指定される画像を参照
画像にするように符号化参照画像選択手段１０４を変更
する特定参照画像指定データ受信部１０８で構成され
る。

【００３９】また、受信側において、復号参照画像蓄積
部は、復号参照画像メモリ１１４により構成される。ま
た、符号化参照画像判断部は、参照画像指定方法制御部
１１５により構成される。また、連続参照画像指定部
は、１画像前に符号化した画像を参照画像にするように
指定するための連続参照画像指定データを送信する連続
参照画像指定データ送信部１１７で構成される。さら
に、特定参照画像指定部は、画像指定データ受信部にて
受信する画像指定データを蓄積する復号画像指定データ
蓄積部１１９と、復号画像指定データ蓄積部にて蓄積さ
れた画像を参照画像にするように指定するための特定参
照画像指定データを送信する特定参照画像指定データ送
信部１１８とで構成される。

【００４０】図１に示す送信側において、符号化部１０
１は変更された符号化参照画像選択手段１０４によって
選択された画像を参照画像として用い、入力画像の符号
化を行い、その符号化データを受信側へ送信する。局所
復号部１０２は、符号化部１０１から出力された符号化
データを、符号化時と同じ画像を参照画像として用いて
復号する。

【００４１】符号化参照画像メモリ１０３は、局所復号
部１０２により復号された復号画像を蓄積する。ここ
で、符号化参照画像メモリ１０３は、５画像分の記憶容
量を有しており、局所復号部１０２により復号される復
号画像を毎画像順次蓄積し、５画像以上蓄積する場合に
は、最も古く蓄積された画像を削除するものとする。参
照画像通知部１０５は、符号化部１０１から出力された
符号化データの符号化が行われた際、参照画像として用
いられた画像の画像番号を示す参照画像指定データを出
力する。

【００４２】符号化画像指定データ蓄積部１０６は、符
号化した画像の画像指定データを１画像分、次の画像が
符号化されるまで蓄積する。連続参照画像指定データ受
信部１０７は、受信側から送信される、１画像前に符号
化した画像を参照画像にするように指定する連続参照画
像指定データ（後述する）を受信する。特定参照画像指
定データ受信部１０８は、受信側から送信される、特定
の画像を参照画像にするように指定する特定参照画像指
定データ（後述する）を受信する。

【００４３】符号化参照画像選択手段１０４は、上記連
続参照画像指定データ受信部１０７により受信された連
続参照画像指定データが画像番号「０」以外の場合に、
符号化画像指定データ蓄積部１０６に蓄積してある画像
指定データにより指定される画像を、符号化参照画像メ
モリ１０３に蓄積されている画像の中から選択し、符号
化部１０１、局所復号部１０２、および、参照画像通知
部１０５へ出力する。また、上記特定参照画像指定デー
タ受信部１０８により受信された特定参照画像指定デー
タが画像番号「０」以外の場合は、当該特定参照画像指
定データにより指定される画像を、符号化参照画像メモ
リ１０３に蓄積されている画像の中から選択し、符号化
部１０１、局所復号部１０２、および、参照画像通知部
１０５へ出力する。

【００４４】画像指定データ通知部１０９は、符号化部
１０１により符号化された入力画像の画像番号を示す画
像指定データを出力する。送信側多重化部１２１は、符
号化部１０１から出力される符号化データ、参照画像通
知部１０５から出力される参照画像指定データ、およ
び、画像指定データ通知部１０９から出力される画像指
定データを多重化（マルチプレクス）して受信側へ送信
する。

【００４５】ここで、図４に、送信側多重化部１２１か
ら受信側へ送信されるデータのフォーマットを示す。こ
の図に示すように、受信側へ送信されるデータのフォー
マットは、画像指定データ、参照画像指定データ、符号
化部１０１から出力される符号化データの順に並んでい
る。なお、図４は、画像指定データが画像番号「９」を
示し、参照画像指定データが画像番号「５」を示す場合
を図示しており、これら各画像番号は、５ビットで表わ
されているものとする。

【００４６】また、送信側多重化部１２１は、受信側か
ら伝送路を介して送信されてきた、連続参照画像指定デ
ータと特定参照画像指定データの多重化データを受信
し、個々の参照画像指定データに分解（デマルチプレク
ス）した後、連続参照画像指定データ受信部１０７と特
定参照画像指定データ受信部１０８へ、それぞれ出力す
る。

【００４７】次に、受信側において、復号部１１０は、
後述する復号参照画像選択手段１１３によって選択され
た参照画像を用いて、送信側から送信されてきた符号化
データを復号する。画像指定データ受信部１１１は、送
信側の画像指定データ通知部１０９から出力された画像
指定データを受信する。参照画像指定データ受信部１１
２は、送信側の参照画像通知部１０５から出力された参
照画像指定データを受信する。復号参照画像選択手段１
１３は、参照画像指定データ受信部１１２により受信さ
れた参照画像指定データによって示される画像番号の画
像を、次に述べる復号参照画像メモリ１１４に蓄積され
た画像の中から選択し、復号部１１０へ出力する。

【００４８】復号参照画像メモリ１１４は、復号部１１
０において正しく復号できた画像を順次蓄積する。ま
た、復号参照画像メモリ１１４は、５画像分の復号画像
データを蓄積することができ、５画像以上蓄積する場合
は、最も古く蓄積された画像を削除するものとする。参
照画像指定方法制御部１１５は、送信側に対し、１画像
前に符号化した画像を、符号化の際に用いる参照画像と
するよう指定するのか、または、復号画像指定データ蓄
積部１１９に蓄積された画像指定データによって指定さ
れる画像を、符号化の際に用いる参照画像とするよう指
定するのかを制御する。

【００４９】ここで、上記の参照画像指定方法制御部１
１５における指定方法の制御条件としては、例えば、以
下のものが挙げられる。

【００５０】１．受信側ユーザの主観に応じて： 受信側ユーザが、数フレーム間、誤りが波及されてもい
いから符号化効率を上げたいと考えている場合には、そ
の受信側ユーザの指示により、特定参照画像指定データ
送信部から信号を送信する方式（ＡＣＫ方式）から、連
続参照画像指定データ送信部から信号を送信する方式
（ＮＡＣＫ方式）へと変更する。逆に、受信側ユーザ
が、１フレームでも誤って欲しくないと考えている場合
には、その受信側ユーザの指示により、連続参照画像指
定データ送信部から信号を送信する方式（ＮＡＣＫ方
式）から、特定参照画像指定データ送信部から信号を送
信する方法（ＡＣＫ方式）へ変更する。

【００５１】２．受信した符号化データに伝送誤りが検
出されるか否か：誤り検出部にて符号化データに伝送誤
りが検出された場合に、連続参照画像指定データ送信部
から信号を送信する方式（ＮＡＣＫ方式）から、特定参
照画像指定データ送信部から信号を送信する方式（ＡＣ
Ｋ方式）へ変更し、伝送誤りが検出されない場合に、特
定参照画像指定データ送信部から信号を送信する方式
（ＡＣＫ方式）から、連続参照画像指定データ送信部か
ら信号を送信する方式（ＮＡＣＫ方式）へ変更する。

【００５２】３．伝送遅延時間に依存：送信側と受信側
との遅延時間が大きくなると、特定参照画像指定データ
に対応して参照画像を変更する場合に、参照画像が時間
的に遠くなり符号化効率が大きく低下する。これを防ぐ
ため、遅延時間が小さい場合には、連続参照画像指定デ
ータ送信部から信号を送信する方式（ＮＡＣＫ方式）か
ら、特定参照画像指定データ送信部から信号を送信する
方式（ＡＣＫ方式）へ変更し、遅延時間が大きい場合に
は、特定参照画像指定データ送信部から信号を送信する
方式（ＡＣＫ方式）から、連続参照画像指定データ送信
部から信号を送信する方式（ＮＡＣＫ方式）へ変更す
る。

【００５３】復号参照画像指定方法選択手段１１６は、
送信側へ送信する連続参照画像指定データの内容を選択
するスイッチＳ１と、特定参照画像指定データの内容を
選択するスイッチＳ２とで構成される。ここで、スイッ
チＳ１は、画像番号「０」が蓄積されているメモリＭ
１、または、画像番号「１」が蓄積されているメモリＭ
２の、いずれかの出力を選択するように構成されてい
る。また、スイッチＳ２は、画像番号「０」が蓄積され
ているメモリＭ３、または、復号画像指定データ蓄積部
１１９の、いずれかの出力を選択するように構成されて
いる。

【００５４】そして、参照画像指定方法制御部１１５に
より制御された指定方法に応じて、送信側へ送信する連
続参照画像指定データおよび特定参照画像指定データの
内容を選択する。すなわち、参照画像指定方法制御部１
１５により、１画像前に符号化した画像を参照画像とす
るよう指定された場合、復号参照画像指定方法選択手段
１１６は、スイッチＳ１をメモリＭ２側に切り替え、か
つ、スイッチＳ２をメモリＭ３側に切り替える。これに
より上記の場合、連続参照画像指定データ送信部１１７
には連続参照画像指定データとして画像番号「１」が出
力され、特定参照画像指定データ送信部１１８には特定
参照画像指定データとして画像番号「０」が出力され
る。

【００５５】また、参照画像指定方法制御部１１５によ
り、復号参照画像メモリ１１４に蓄積されている複数の
画像のうちいずれか１つを参照画像とするよう指定され
た場合、復号参照画像指定方法選択手段１１６は、スイ
ッチＳ１をメモリＭ１側に切り替え、かつ、スイッチＳ
２を復号画像指定データ蓄積部１１９側に切り替える。
これにより、連続参照画像指定データ送信部１１７に
は、連続参照画像指定データとして画像番号「０」が出
力され、特定参照画像指定データ送信部１１８には、特
定参照画像指定データとして復号画像指定データ蓄積部
１１９に蓄積された画像番号が出力される。

【００５６】連続参照画像指定データ送信部１１７は、
１画像前に符号化した画像を参照画像にするよう指定す
る連続参照画像指定データを出力する。復号画像指定デ
ータ蓄積部１１９は、画像指定データ受信部１１１が受
信した画像指定データを蓄積する。また、受信側の復号
画像指定データ蓄積部１１９には、正しく復号できた場
合に、その画像番号を必ず蓄積するものとする。特定参
照画像指定データ送信部１１８は、復号画像指定データ
蓄積部１１９にて蓄積された画像を参照画像にするよう
に指定する特定参照画像指定データを出力する。

【００５７】誤り検出部１２０は、送信側から伝送路を
介して送信されてきた、符号化参照画像指定データ、画
像指定データ、および、符号化データの多重化データを
受信し、伝送路にて上記符号化データに誤りが載った場
合、その誤りを検出する。なお、この誤り検出方法は、
誤り検出符号を用いて行われるものとし、誤り検出部１
２０により送信側から送信されたデータから誤りが検出
された場合、そのデータは廃棄されるものとする。

【００５８】受信側多重化部１２２は、連続参照画像指
定データ送信部１１７から出力された連続参照画像指定
データと、特定参照画像指定データ送信部１１８から出
力された特定参照画像指定データとを多重化（マルチプ
レクス）し、送信側へ送信する。ここで、図５に、連続
参照画像指定データに画像番号「０」を特定参照画像指
定データに画像番号「５」を送信する時のデータフォー
マットの例を示す。

【００５９】この図に示すように、受信側から送信側へ
送信されるデータのフォーマットは、連続参照画像指定
データ、特定参照画像指定データの順に並んでいる。ま
た、連続参照画像指定データの画像番号は１ビットで表
わされ、特定参照画像指定データの画像番号は５ビット
で表わされるものとする。この多重化されたデータは、
前述した送信側多重化部１２１により、各データに分解
（デマルチプレクス）されるものとする。

【００６０】また、受信側多重化部１２２は、誤り検出
部１２０から出力された、符号化参照画像指定データ、
画像指定データ、および、符号化データの多重化データ
を、個々のデータに分解（デマルチプレクス）した後、
これら各データを、参照画像指定データ受信部１１２、
画像指定データ受信部１１１、復号部１１０にそれぞれ
出力する。

【００６１】以上の構成のもと、各部は、次のように動
作するものとする。

【００６２】復号参照画像選択手段１１３は、参照画像
指定データ受信部１１２にて受信された画像番号の画像
を、参照画像として復号参照画像メモリ１１４から選択
し、復号部１１０は復号参照画像選択手段１１３によっ
て選択された画像を参照が蔵して用い、受信した符号化
データを復号する。この復号画像は、復号参照画像メモ
リ１１４に蓄積される。また、画像指定データ受信部１
１１にて受信した画像指定データは、復号画像指定デー
タ蓄積部１１９に蓄積される。

【００６３】参照画像指定方法制御部１１５にて指定さ
れる参照画像指定方法に従って、次に示すように受信側
の参照画像指定データの送信方法と送信側の参照画像の
変更方法が異なる。

【００６４】まず、参照画像指定方法制御部１１５が、
１画像前に符号化した画像を参照画像に指定した場合に
は、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１とＳ２を変更し、連続参照画像指定データ送信部１
１７へ連続参照画像指定データとしてＭ２に蓄積されて
いる「１」を送信し、特定参照画像指定データ送信部１
１８へ特定参照画像指定データとしてＭ３に蓄積されて
いる「０」を送信する。連続参照画像指定データ送信部
１１７と特定参照画像指定データ送信部１１８は、指定
された画像番号を受信側へ送信する。

【００６５】送信側では、符号化画像指定データ蓄積部
１０６が、毎画像、１つ前に符号化した画像の画像指定
データを蓄積する。そして、符号化参照画像選択手段１
０４は、連続参照画像指定データ受信部１０７が連続参
照画像指定データとして「１」を受信した時に、符号化
参照画像メモリ１０３に蓄積されている画像のうち、符
号化画像指定データ蓄積部１０６に蓄積してある画像指
定データの画像を、参照画像として選択する。なお、こ
の時、特定参照画像指定データ受信部１０８は、特定参
照画像指定データとして「０」を受信するが、符号化参
照画像選択手段１０４は、この場合における特定参照画
像指定データに従った画像の選択は行わない。

【００６６】一方、参照画像指定方法制御部１１５が、
復号参照画像メモリ１１４に蓄積してある画像のうちの
１つを参照画像に指定した場合には、復号参照画像指定
方法選択手段１１６は、スイッチＳ１とＳ２を変更し、
連続参照画像指定データ送信部１１７へ連続参照画像指
定データとしてＭ１に蓄積してある「０」を送信し、特
定参照画像指定データ送信部１１８へ復号画像指定デー
タ蓄積部１１９に蓄積してある画像番号を送信する。連
続参照画像指定データ送信部１１７と特定参照画像指定
データ送信部１１８は、指定された画像番号を受信側へ
送信する。

【００６７】送信側では、特定参照画像指定データ受信
部１０８が特定参照画像指定データとして、「０」以外
の画像番号を受信した時に、符号化参照画像選択手段１
０４は、符号化参照画像メモリ１０３に蓄積されている
画像のうち、受信した画像指定データの画像を、参照画
像として選択する。なお、この時、連続参照画像指定デ
ータ受信部１０７は、連続参照画像指定データとして
「０」を受信するが、符号化参照画像選択手段１０４
は、この場合における連続参照画像指定データに従った
画像の選択は行わない。

【００６８】送信側の符号化部１０１は、符号化参照画
像選択手段１０４によって選択された画像を参照画像に
して入力画像を符号化する。局所復号部１０２は、入力
画像の符号化時と同じ画像を参照画像を用いて符号化デ
ータを復号し、符号化参照画像メモリ１０３に復号画像
を蓄積する。

【００６９】また、送信側と受信側の遅延時間に関して
は次に示す通りとする。送信側にて送信した符号化デー
タが受信側に到着するまで１画像分の遅延があり、受信
側にて送信した連続参照画像指定データと特定参照画像
指定データが送信側に到着するまでに１画像分の遅延が
あるとする。すなわち、送信側が符号化して送信した符
号化データを、受信側が復号し、送信側が復号画像につ
いての連続参照画像指定データと特定参照画像指定デー
タとを受信するまでに、２画像分の遅延がある。また、
連続参照画像指定データと特定参照画像指定データの送
信は受信した符号化データに対して１つ必ず送信するも
のとする。

【００７０】以下、伝送路上で誤りが載らない場合と載
る場合とを分けて説明する。

【００７１】（伝送路上で誤りが載らない場合）図２
は、送信側と受信側の動作フローを示すものである。図
中の数字は画像番号を示す。符号化データの画像番号
と、参照画像の画像番号と、符号化データは、図４のフ
ォーマットで送信される。符号化データを示す矢印の上
側に示した数字は、その符号化データの参照画像指定デ
ータ、すなわち参照画像の画像番号を示す。また、連続
参照画像指定データと特定参照画像指定データは図５の
フォーマットで送信される。

【００７２】初期状態として、次のような通信途中の状
況を仮定する。

【００７３】画像番号「１」から画像番号「６」まで
は、１画像前の画像を参照画像にして符号化と復号を行
っているものとする。すなわち、画像番号「６」を符号
化する時に、送信側では、符号化参照画像メモリ１０３
に画像番号「１」から画像番号「５」までの画像が蓄積
されており、画像番号「５」の画像を参照して符号化
し、符号化画像指定データ蓄積部１０６には画像番号
「５」が蓄積されているものとする。受信側では、復号
参照画像メモリ１１４には画像番号「１」から画像番号
「５」までの画像が蓄積されて、復号画像指定データ蓄
積部１１９には画像番号「５」が蓄積されているもとす
る。また、画像番号「５」までは受信側は連続参照画像
指定データを送信しているものとする。

【００７４】上記の仮定のもと、参照画像指定方法制御
部１１５は、所定の条件として、受信側のユーザの主観
に基づき、画像番号「６」と画像番号「７」の符号化デ
ータを受信した時に、連続参照画像指定データ送信部１
１７から信号（連続参照画像指定データは「１」，特定
参照画像指定データは「０」）を送信する方式から、特
定参照画像指定データ送信部１１８から信号（特定参照
画像指定データは復号画像指定データ蓄積部１１９に蓄
積されている画像番号，連続参照画像指定データは
「０」）を送信する方式へ変更するものとする。また、
それ以外の場合では、特定参照画像指定データ送信部１
１８から信号を送信する方式から、連続参照画像指定デ
ータ送信部１１７から信号を送信する方式へ変更する。

【００７５】まず、画像番号「６」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図２にＳＴＥＰ１として示した。

【００７６】送信側の動作は以下の通りである。

【００７７】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「５」の画像を、参照画像として符号化
参照画像メモリ１０３から選択する（連続参照画像選択
過程）。符号化部１０１は、符号化参照画像メモリ１０
３から選択された画像番号「５」の画像を参照画像にし
て入力画像を符号化する（符号化過程）。局所復号部１
０２は、符号化データを画像番号「５」を参照画像に用
いて復号し（局所復号過程）、復号画像を符号化参照画
像メモリ１０３に蓄積する（符号化参照画像蓄積過
程）。画像指定データ通知部１０９は、符号化データの
画像番号「６」を送信し（画像指定データ通知過程）、
参照画像通知部１０５は、参照画像の画像番号「５」を
送信する（参照画像通知過程）。符号化画像指定データ
蓄積部１０６は画像番号「６」を蓄積する。

【００７８】受信側の動作は以下の通りである。

【００７９】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「６」であることを判断
する（画像指定データ受信過程）。そして、参照画像指
定データ受信部１１２が、参照画像の画像番号「５」を
受信する（参照画像指定データ受信過程）と、復号参照
画像選択手段１１３は、復号参照画像メモリ１１４から
画像番号「５」の画像を参照画像として選択する。これ
により、復号部１１０は、符号化データを画像番号
「５」の画像を参照画像にして復号し（復号過程）、復
号画像を復号参照画像メモリ１１４に蓄積する（復号参
照画像蓄積過程）。画像指定データ受信部１１１は、復
号画像指定データ蓄積部１１９にも画像番号「６」を送
る。復号画像指定データ蓄積部１１９は、画像番号
「６」を蓄積する。

【００８０】参照画像指定方法制御部１１５は、特定参
照画像指定データ送信部１１８から信号を送信する方式
を指定する（符号化参照画像判断過程）ため、復号参照
画像指定方法選択手段１１６は、特定参照画像指定デー
タ送信部１１８から復号画像指定データ蓄積部１１９に
蓄積されている画像番号「６」を特定参照画像指定デー
タとして送信側に送信し、連続参照画像指定データ送信
部１１７から画像番号「０」を連続参照画像指定データ
として送信側に送信するようスイッチＳ１，Ｓ２を切り
替える。これにより、連続参照画像指定データ送信部１
１７と特定参照画像指定データ送信部１１８は、指定さ
れた番号を送信する（特定参照画像指定過程）。

【００８１】次に、画像番号「７」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図２にＳＴＥＰ２として示した。

【００８２】送信側の動作は以下の通りである。

【００８３】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「６」の画像を、参照画像として符号化
参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「６」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「６」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「７」を送信し、参照
画像通知部１０５は参照画像の画像番号「６」を送信す
る。符号化画像指定データ蓄積部１０６は画像番号
「７」を蓄積する。

【００８４】受信側の動作は以下の通りである。

【００８５】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「７」であることを判断
する。そして、参照画像指定データ受信部１１２が、参
照画像の画像番号「６」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４から画像番
号「６」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化データを画像番号「６」の
画像を参照画像にして復号し、復号画像を復号参照画像
メモリ１１４に蓄積する。画像指定データ受信部１１１
は、復号画像指定データ蓄積部１１９にも画像信号
「７」を送る。復号画像指定データ蓄積部１１９は、画
像番号「７」を蓄積する。

【００８６】参照画像指定方法制御部１１５は、特定参
照画像指定データ送信部１１８から信号を送信する方式
を指定するため、復号参照画像指定方法選択手段１１６
は、スイッチＳ１，Ｓ２の切り替え状態を維持する。こ
れにより、特定参照画像指定データ送信部１１８は、復
号画像指定データ蓄積部１１９に蓄積されている画像番
号「７」を特定参照画像指定データとして送信側に送信
し、連続参照画像指定データ送信部１１７は、画像番号
「０」を連続参照画像指定データとして送信側に送信す
る。

【００８７】次に、画像番号「８」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図２にＳＴＥＰ３として示した。

【００８８】送信側の動作は以下の通りである。

【００８９】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「７」の画像を、参照画像として符号化
参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「７」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「７」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「８」を送信し、参照
画像通知部１０５は参照画像の画像番号「７」を送信す
る。符号化画像指定データ蓄積部１０６は画像番号
「８」を蓄積する。

【００９０】受信側の動作は以下の通りである。

【００９１】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「８」であることを判断
する。そして、参照画像指定データ受信部１１２が、参
照画像の画像番号「７」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４から画像番
号「７」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化データを画像番号「７」の
画像を参照画像にして復号し、正しく復号できた画像を
復号参照画像メモリ１１４に蓄積する。画像指定データ
受信部１１１は、復号画像指定データ蓄積部１１９にも
画像番号「８」を送る。復号画像指定データ蓄積部１１
９は画像番号「８」を蓄積する。

【００９２】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定する（符
号化参照画像判断過程）ため、復号参照画像指定方法選
択手段１１６は、連続参照画像指定データ送信部１１７
から連続参照画像指定データである画像番号「１」を送
信側に送信し、特定参照画像指定データ送信部１１８か
ら画像番号「０」を特定参照画像指定データとして送信
側に送信するようスイッチＳ１，Ｓ２を切り替える。こ
れにより、連続参照画像指定データ送信部１１７と特定
参照画像指定データ送信部１１８は、指定された番号を
送信する（連続参照画像指定過程）。

【００９３】次に、画像番号「９」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図２にＳＴＥＰ４として示した。

【００９４】送信側の動作は以下の通りである。

【００９５】特定参照画像指定データ受信部１０８が、
画像番号「６」（すなわち「０」以外の画像番号）を受
信すると、符号化参照画像選択手段１０４は、画像番号
「６」の画像を、参照画像として符号化参照画像メモリ
１０３から選択する。符号化部１０１は、符号化参照画
像メモリ１０３から選択された画像番号「６」の画像を
参照画像にして入力画像を符号化する。局所復号部１０
２は、符号化データを画像番号「６」を参照画像に用い
て復号し、復号画像を符号化参照画像メモリ１０３に蓄
積する。画像指定データ通知部１０９は符号化データの
画像番号「９」を送信し、参照画像通知部１０５は参照
画像の画像番号「６」を送信する。符号化画像指定デー
タ蓄積部１０６は画像番号「９」を蓄積する。

【００９６】受信側の動作は以下の通りである。

【００９７】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「９」であることを判断
する。そして、参照画像指定データ受信部１１２が、参
照画像の画像番号「６」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４から画像番
号「６」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化データを画像番号「６」の
画像を参照画像にして復号し、正しく復号できた画像を
復号参照画像メモリ１１４に蓄積する。画像指定データ
受信部１１１は、復号画像指定データ蓄積部１１９にも
画像番号「９」を送る。復号画像指定データ蓄積部１１
９は画像番号「９」を蓄積する。

【００９８】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【００９９】次に、画像番号「１０」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を図２にＳＴＥＰ５として示した。

【０１００】送信側の動作は以下の通りである。

【０１０１】特定参照画像指定データ受信部１０８が、
画像番号「７」を受信すると、符号化参照画像選択手段
１０４は、画像番号「７」の画像を、参照画像として符
号化参照画像メモリ１０３から選択する。符号化部１０
１は、符号化参照画像メモリ１０３から選択された画像
番号「７」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「７」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「１０」を送信し、参
照画像通知部１０５は参照画像の画像番号「７」を送信
する。符号化画像指定データ蓄積部１０６は画像番号
「１０」を蓄積する。

【０１０２】受信側の動作は以下の通りである。

【０１０３】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「１０」であることを判
断する。そして、参照画像指定データ受信部１１２が、
参照画像の画像番号「７」を受信すると、復号参照画像
選択手段１１３は、復号参照画像メモリ１１４から画像
番号「７」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化デー夕を画像番号「７」の
画像を参照画像にして復号し、正しく復号できた画像を
復号参照画像メモリ１１４に蓄積する。画像指定データ
受信部１１１は復号画像指定データ蓄積部１１９にも画
像番号「１０」を送る。復号画像指定データ蓄積部１１
９は画像番号「１０」を蓄積する。

【０１０４】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【０１０５】次に、画像番号「１１」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を図２にＳＴＥＰ６として示した。

【０１０６】送信側の動作は以下の通りである。

【０１０７】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「１０」の画像を、参照画像として符号
化参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「１０」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号「１
０」を参照画像に用いて復号し、復号画像を符号化参照
画像メモリ１０３に蓄積する。画像指定データ通知部１
０９は符号化データの画像番号「１１」を送信し、参照
画像通知部１０５は参照画像の画像番号「１０」を送信
する。符号化画像指定データ蓄積部１０６は画像番号
「１１」を蓄積する。

【０１０８】受信側の動作は以下の通りである。

【０１０９】誤り検出部１２０にて誤りが検出されなか
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「１１」であることを判
断する。そして、参照画像指定データ受信部１１２が、
参照画像の画像番号「１０」を受信すると、復号参照画
像選択手段１１３は、復号参照画像メモリ１１４から画
像番号「１０」の画像を参照画像として選択する。これ
により、復号部１１０は、符号化データを画像番号「１
０」の画像を参照画像にして復号し、正しく復号できた
画像を復号参照画像メモリ１１４に蓄積する。画像指定
データ受信部１１１は復号画像指定データ蓄積部１１９
にも画像番号「１１」を送る。復号画像指定データ蓄積
部１１９は画像番号「１１」を蓄積する。

【０１１０】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【０１１１】以上のように、受信側から、連続参照画像
指定データを送信することによって、明示的に通常のフ
レーム間差分符号化のように送信側にて１画像前に符号
化した画像を参照画像に用いて符号化することを指定す
ることができる。さらに、連続参照画像指定データと特
定参照画像指定データの画像番号とを変更することによ
り、受信側から、指定した画像を参照画像にするのか、
１画像前の画像を参照画像にするのかを指定することが
できる。

【０１１２】（伝送路上で誤りが載る場合）図３は、送
信側と受信側の動作フローを示すものである。図中の数
字は画像番号を示す。符号化データの画像番号と参照画
像の画像番号と符号化データは図４のフォーマットで送
信される。符号化データを示す矢印の上側に示した数字
は、その符号化データの参照画像指定データ、すなわち
参照画像の画像番号を示す。また、連続参照画像指定デ
ータと特定参照画像指定データは図５のフォーマットで
送信される。

【０１１３】初期状態として、誤りが載らない場合と同
様に、次のような通信途中の状況を仮定する。

【０１１４】画像番号「１」から画像番号「６」までは
１画像前の画像を参照画像にして符号化と復号を行って
いるものとする。すなわち、画像番号「６」を符号化す
る時に、送信側では、符号化参照画像メモリ１０３に画
像番号「１」から画像番号「５」までの画像が蓄積され
ており、画像番号「５」の画像を参照して符号化し、符
号化画像指定データ蓄積部１０６には画像番号「５」が
蓄積されているものとする。

【０１１５】受信側では、復号参照画像メモリ１１４に
は画像番号「１」から画像番号「５」までの画像が蓄積
されて、復号画像指定データ蓄積部１１９には画像番号
「５」が蓄積されているものとする。また画像番号
「５」まで受信側は連続参照画像指定データを送信して
いるものとする。画像番号「６」の時に伝送路上にて誤
りが載ることとする。

【０１１６】上記の仮定のもと、参照画像指定方法制御
部１１５は、受信側のユーザの主観に基づき、画像番号
「６」と画像番号「７」の符号化データを受信した時
に、連続参照画像指定データ送信部１１７から信号（連
続参照画像指定データは「１」，特定参照画像指定デー
タは「０」）を送信する方式から、特定参照画像指定デ
ータ送信部１１８から信号（特定参照画像指定データは
復号画像指定データ蓄積部１１９に蓄積されている画像
番号，連続参照画像指定データは「０」）を送信する方
式へ変更するものとする。また、それ以外の場合では、
特定参照画像指定データ送信部１１８から信号を送信す
る方式から、連続参照画像指定データ送信部１１７から
信号を送信する方式へ変更する。

【０１１７】まず、画像番号「６」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図３にＳＴＥＰ１として示した。

【０１１８】送信側の動作は以下の通りである。

【０１１９】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「５」の画像を、参照画像として符号化
参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「５」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「５」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「６」を送信し、参照
画像通知部１０５は参照画像の画像番号「５」を送信す
る。符号化画像指定データ蓄積部１０６は画像番号
「６」を蓄積する。

【０１２０】受信側の動作は以下の通りである。

【０１２１】誤り検出部１２０にて誤りが検出されたこ
とを確認すると、復号部１１０は符号化データを復号せ
ず、復号画像は復号参照画像メモリ１１４には蓄積しな
い。参照画像指定方法制御部１１５は、特定参照画像指
定データ送信部１１８から信号を送信する方式を指定す
るため、復号参照画像指定方法選択手段１１６は、特定
参照画像指定データ送信部１１８から復号画像指定デー
タ蓄積部１１９に蓄積している画像番号「５」を特定参
照画像指定データとして送信側に送信し、連続参照画像
指定データ送信部１１８から画像番号「０」を連続参照
画像指定データとして送信側に送信するようスイッチＳ
１，Ｓ２を切り替える。これにより、連続参照画像指定
データ送信部１１７と特定参照画像指定データ送信部１
１８は指定された番号を送信する。

【０１２２】図３の画像番号「７」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図３にＳＴＥＰ２として示した。

【０１２３】送信側の動作は以下の通りである。

【０１２４】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「６」の画像を、参照画像として符号化
参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「６」の画像を参照画像にして入カ画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「６」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「７」を送信し、参照
画像通知部１０５は参照画像の画像番号「６」を送信す
る。符号化画像指定データ蓄積部１０６は画像番号
「７」を蓄積する。

【０１２５】受信側の動作は以下の通りである。

【０１２６】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「７」であることを判断
する。そして、参照画像指定データ受信部１１２が、参
照画像の画像番号「６」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４には画像番
号「６」の画像が蓄積されていないため、参照画像を選
択することができない。よって、復号部１１０は、参照
画像がないため復号かデータを正しく復号できない。

【０１２７】参照画像指定方法制御部１１５は、特定参
照画像指定データ送信部１１８から信号を送信する方式
を指定するため、復号参照画像指定方法選択手段１１６
は、スイッチＳ１，Ｓ２の切り替え状態を維持する。こ
れにより、特定参照画像指定データ送信部１１８は、復
号画像指定データ蓄積部１１９に蓄積されている画像番
号「５」を特定参照画像指定データとして送信側に送信
し、連続参照画像指定データ送信部１１７は、画像番号
「０」を連続参照画像指定データとして送信側に送信す
る。

【０１２８】図３の画像番号「８」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図３にＳＴＥＰ３として示した。

【０１２９】送信側の動作は以下の通りである。

【０１３０】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「７」の画像を参照画像として符号化参
照画像メモリ１０３から選択する。符号化部１０１は、
符号化参照画像メモリ１０３から選択された画像番号
「７」の画像を参照画像にして入力画像を符号化する。
局所復号部１０２は、符号化データを画像番号「７」を
参照画像に用いて復号し、復号画像を符号化参照画像メ
モリ１０３に蓄積する。画像指定データ通知部１０９は
符号化データの画像番号「８」を送信し、参照画像通知
部１０５は参照画像の画像番号「７」を送信する。符号
化画像指定データ蓄積部１０６は画像番号「８」を蓄積
する。

【０１３１】受信側の動作は以下の通りである。

【０１３２】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「８」であることを判断
する。そして、参照画像指定データ受信部１１２は、参
照画像の画像番号「７」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４には画像番
号「７」の画像が蓄積されていないため、参照画像を選
択することができない。よって、復号部１１０は、参照
画像がないため符号化データを正しく復号できない。

【０１３３】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、連続参照
画像指定データ送信部１１７から連続参照画像指定デー
タである画像番号「１」を送信側に送信し、特定参照画
像指定データ送信部１１８から画像番号「０」を特定参
照画像指定データとして送信側に送信するようスイッチ
Ｓ１，Ｓ２を切り替える。これにより、連続参照画像指
定データ送信部１１７と特定参照画像指定データ送信部
１１８は、指定された番号を送信する。

【０１３４】次に、画像番号「９」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を図３にＳＴＥＰ４として示した。

【０１３５】送信側の動作は以下の通りである。

【０１３６】特定参照画像指定データ受信部１０８が、
画像番号「５」（すなわち「０」以外の画像番号）を受
信すると、符号化参照画像選択手段１０４は、画像番号
「５」の画像を、参照画像として符号化参照画像メモリ
１０３から選択する。符号化部１０１は、符号化参照画
像メモリ１０３から選択された画像番号「５」の画像を
参照画像にして入力画像を符号化する。局所復号部１０
２は、符号化データを画像番号「５」を参照画像に用い
て復号し、復号画像を符号化参照画像メモリ１０３に蓄
積する。画像指定データ通知部１０９は符号化データの
画像番号「９」を送信し、参照画像通知部１０５は参照
画像の画像番号「５」を送信する。符号化画像指定デー
タ蓄積部１０６は画像番号「９」を蓄積する。

【０１３７】受信側の動作は以下の通りである。

【０１３８】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「９」であることを判断
する。そして、参照画像指定データ受信部１１２が、参
照画像の画像番号「５」を受信すると、復号参照画像選
択手段１１３は、復号参照画像メモリ１１４から画像番
号「５」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化データを画像番号「５」の
画像を参照画像にして復号し、正しく復号できた画像を
復号参照画像メモリ１１４に蓄積する。画像指定データ
受信部１１１は復号画像指定データ蓄積部１１９にも画
像番号「９」を送る。復号画像指定データ蓄積部１１９
は画像番号「９」を蓄積する。

【０１３９】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【０１４０】次に、画像番号「１０」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を図３にＳＴＥＰ５として示した。

【０１４１】送信側の動作は以下の通りである。

【０１４２】特定参照画像指定データ受信部１０８が、
画像番号「５」を受信すると、符号化参照画像選択手段
１０４は、画像番号「５」の画像を、参照画像として符
号化参照画像メモリ１０３から選択する。符号化部１０
１は、符号化参照画像メモリ１０３から選択された画像
番号「５」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号
「５」を参照画像に用いて復号し、復号画像を符号化参
照画像メモリ１０３に蓄積する。画像指定データ通知部
１０９は符号化データの画像番号「１０」を送信し、参
照画像通知部１０５は参照画像の画像番号「５」を送信
する。符号化画像指定データ蓄積部１０６は画像番号
「１０」を蓄積する。

【０１４３】受信側の動作は以下の通りである。

【０１４４】誤り検出部１２０にて誤りが検出されかな
ったことを確認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「１０」であることを判
断する。そして、参照画像指定データ受信部１１２が、
参照画像の画像番号「５」を受信すると、復号参照画像
選択手段１１３は、復号参照画像メモリ１１４から画像
番号「５」の画像を参照画像として選択する。これによ
り、復号部１１０は、符号化データを画像番号「５」の
画像を参照画像にして復号し、正しく復号できた画像を
復号参照画像メモリ１１４に蓄積する。画像指定データ
受信部１１１は、復号画像指定データ蓄積部１１９にも
画像番号「１０」を送る。復号画像指定データ蓄積部１
１９は画像番号「１０」を蓄積する。

【０１４５】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【０１４６】次に、画像番号「１１」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を図３にＳＴＥＰ６として示した。

【０１４７】送信側の動作は以下の通りである。

【０１４８】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積し
てある画像番号「１０」の画像を、参照画像として符号
化参照画像メモリ１０３から選択する。符号化部１０１
は、符号化参照画像メモリ１０３から選択された画像番
号「１０」の画像を参照画像にして入力画像を符号化す
る。局所復号部１０２は、符号化データを画像番号「１
０」を参照画像に用いて復号し、復号画像を符号化参照
画像メモリ１０３に蓄積する。画像指定データ通知部１
０９は符号化データの画像番号「１１」を送信し、参照
画像通知部１０５は参照画像の画像番号「１０」を送信
する。符号化画像指定データ蓄積部１０６は画像番号
「１１」を蓄積する。

【０１４９】受信側の動作は以下の通りである。

【０１５０】誤り検出部１２０にて誤りが検出されかな
ったことを碓認すると、画像指定データ受信部１１１
は、受信した画像の画像番号が「１１」であることを判
断する。そして、参照画像指定データ受信部１１２が、
参照画像の画像番号「１０」を受信すると、復号参照画
像選択手段１１３は、復号参照画像メモリ１１４から画
像番号「１０」の画像を参照画像として選択する。これ
により、復号部１１０は、符号化データを画像番号「１
０」の画像を参照画像にして復号し、正しく復号できた
画像を復号参照画像メモリ１１４に蓄積する。画像指定
データ受信部１１１は復号画像指定データ蓄積部１１９
にも画像番号「１１」を送る。復号画像指定データ蓄積
部１１９は画像番号「１１」を蓄積する。

【０１５１】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１，Ｓ２の切り替え状態を維持する。これにより、連
続参照画像指定データ送信部１１７は、画像番号「１」
を連続参照画像指定データとして送信側に送信し、特定
参照画像指定データ送信部１１８は、画像番号「０」を
特定参照画像指定データとして送信側に送信する。

【０１５２】以上のように、本実施形態においては、誤
りが載る場合にも、受信側から、連続参照画像指定デー
タを送信することによって、明示的に通常のフレーム間
差分符号化のように送信側にて１画像前に符号化した画
像を参照画像に用いて符号化することを指定することが
できる。さらに、連続参照画像指定データと特定参照画
像指定データの画像番号を変更することにより、受信側
から、指定した画像を参照画像にするのか、１画像前の
画像を参照画像にするのかを変更することを指定するこ
とができる。

【０１５３】［第２の実施形態］次に、上述した第１の
実施形態で示した画像通信システムに、送信側におい
て、１画像前の画像の符号化を開始する時刻と、現画像
の符号化を開始する時刻との間に、受信側から連続参照
画像指定データまたは特定参照画像指定データを受信で
きなかった場合、１画像前の画像を符号化する際に使用
した連続参照画像指定データまたは特定参照画像指定デ
ータの情報を用いて、現画像を符号化する機能を持たせ
た場合の実施形態を示す。

【０１５４】図６に、本実施形態における画像通信シス
テムの構成を示すブロック図を示す。この図において、
図１と同じ構成については、同一の符号を付し、その詳
しい説明を省略する。図６に示す画像通信システムが図
１のものと異なる点は、送信側に、受信側からの連続参
照画像指定データまたは特定参照画像指定データの誤り
を検出する送信側誤り検出部１２３を備えた点である。

【０１５５】また、送信側の連続参照画像指定データ受
信部１０７は、ある連続参照画像指定データを受信して
から次の連続参照画像指定データを受信するまで、最後
に受信した連続参照画像指定データを保持し、連続参照
画像指定データ受信部１０７が次の連続参照画像指定デ
ータを受信すると、保持していた連続参照画像指定デー
タを廃棄するものとする。

【０１５６】同様に、特定参照画像指定データ受信部１
０８は、ある特定参照画像指定データを受信してから次
の特定参照画像指定データを受信するまで、最後に受信
した特定参照画像指定データを保持し、特定参照画像指
定データ受信部１０８は、次の特定参照画像指定データ
を受信すると、保持していた特定参照画像指定データを
廃棄するものとする。

【０１５７】上述した構成（請求項４および請求項９に
相当）の下、受信側から送信される連続参照画像指定デ
ータまたは特定参照画像指定データに、伝送路上で伝送
誤りが載る場合の動作について、図７を参照して説明す
る。

【０１５８】ここで、以下の説明では、前述した第１の
実施形態において、図３を参照して送信側から送信され
た送信データに誤りが載る場合と同様の初期状態を想定
するものとする。また、本実施形態の画像通信システム
において、送信側が、画像番号「６」の画像の符号化デ
ータを受信側へ送信した時に、伝送路上にて誤りが載る
場合を例に挙げて説明する。

【０１５９】さらに、以下の説明では、受信側が、画像
番号「６」の符号化データに対して復号処理を行った時
に送信側へ出力した特定参照画像指定データに、伝送路
上で誤りが載った場合における送信側の動作（図７中、
ＳＴＥＰ４の動作）と、受信側が、画像番号「９」の符
号化データに対して受信側で復号処理を行った時に送信
側へ出力した連続参照画像指定データに、伝送路上で誤
りが載る場合における送信側の動作（図７中、ＳＴＥＰ
７の動作）とについて説明する。

【０１６０】まず、送信側が画像番号「９」の画像を符
号化するＳＴＥＰ４の動作について説明する。

【０１６１】受信側から送信されてきた画像番号「６」
を示す特定参照画像指定データに誤りが載っていた場
合、送信側誤り検出部１２３がその誤りを検出すると、
上記受信した特定参照画像指定データと、連続参照画像
指定データとを廃棄する。この時、連続参照画像指定デ
ータ受信部１０７は、ＳＴＥＰ３において受信した
「１」を示す連続参照画像指定データを保持する。これ
により、符号化参照画像選択手段１０４は、符号化画像
指定データ蓄積部１０６に蓄積されている画像番号
「８」の画像を、参照画像として符号化参照画像メモリ
１０３から選択する。そして、符号化部１０１は、画像
番号「８」の画像を参照画像にして画像番号「９」の入
力画像を符号化する。

【０１６２】また、局所復号部１０２は、画像番号
「８」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像（画像番号「９」）を符号化参照画
像メモリ１０３に蓄積する。画像指定データ通知部１０
９は、受信側に対して符号化データの画像番号「９」を
示すデータを送信し、この時、符号化画像指定データ蓄
積部１０６に画像番号「９」を示すデータが蓄積され
る。また、参照画像通知部１０５は、受信側に対して符
号化に用いた参照画像の画像番号「８」を示すデータを
送信する。

【０１６３】一方、受信側では、誤り検出部１２０に
て、送信側から送信されてきたデータに誤りが検出され
かなったことが確認されると、画像指定データ受信部１
１１において、受信した符号化データの画像番号「９」
を示すデータが受信され、この画像番号「９」を示すデ
ータが復号画像指定データ蓄積部１１９に蓄積される。
また、参照画像指定データ受信部１１２において、符号
化の際に使用された参照画像の画像番号「８」を示すデ
ータが受信されるが、復号参照画像メモリ１１４には画
像番号「８」の画像が蓄積されていないため、復号参照
画像選択手段１１３は、参照画像を選択できない。よっ
て、復号部１１０は参照画像が無いために符号化データ
を正しく復号できない。

【０１６４】参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１とスイッチＳ２の切り替え状態を現状のまま維持す
る。これにより、連続参照画像指定データ送信部１１７
は、画像番号「１」を連続参照画像指定データとして送
信側に送信し、特定参照画像指定データ送信部１１８
は、画像番号「０」を特定参照画像指定データとして送
信側に送信する。

【０１６５】次に、送信側が画像番号「１２」の画像を
符号化する図７のＳＴＥＰ７の動作について説明する。

【０１６６】受信側から送信されてきた「１」を示す連
続参照画像指定データと、「０」を示す特定参照画像指
定データに誤りが載っていた場合、送信側誤り検出部１
２３がその誤りを検出すると、上記受信した連続参照画
像指定データと、特定参照画像指定データとを廃棄す
る。この時、連続参照画像指定データ受信部１０７は、
ＳＴＥＰ６において受信した連続参照画像指定データで
ある画像番号「１」を保持する。これにより、符号化参
照画像選択手段１０４は、符号化画像指定データ蓄積部
１０６に蓄積されている画像番号「１１」の画像を、画
像番号「１２」の入力画像を符号化する際に用いる参照
画像として符号化参照画像メモリ１０３から選択する。
そして、符号化部１０１は、画像番号「１１」の画像を
参照画像にして画像番号「１２」の入力画像を符号化す
る。

【０１６７】また、局所復号部１０２は、画像番号「１
１」の画像を参照画像に用いて上記符号化データを復号
し、その復号画像（画像番号「１２」）を符号化参照画
像メモリ１０３に蓄積する。そして、画像指定データ通
知部１０９は、受信側に対して符号化データの画像番号
「１２」を示すデータを送信し、この時、符号化画像指
定データ蓄積部１０６に画像番号「１２」を示すデータ
が蓄積される。また、参照画像通知部１０５は、受信側
に対して符号化に用いた参照画像の画像番号「１１」を
示すデータを送信する。

【０１６８】一方、受信側では、誤り検出部１２０に
て、送信側から送信されてきたデータに誤りが検出され
かなったことが確認されると、画像指定データ受信部１
１１において、受信した符号化データの画像番号「１
２」を示すデータが受信され、この画像番号「１２」を
示すデータが復号画像指定データ蓄積部１１９に蓄積さ
れる。また、参照画像指定データ受信部１１２におい
て、符号化の際に使用された参照画像の画像番号「１
１」を示すデータが受信されると、復号参照画像選択手
段１１３は、復号参照画像メモリ１１４に蓄積されてい
る画像の中から画像番号「１１」の画像を選択する。

【０１６９】これにより、復号部１１０は、画像番号
「１１」の画像を参照画像として用いて受信した符号化
データを復号し、出力画像として外部へ出力すると共
に、その復号画像が復号参照画像メモリ１１４に蓄積さ
せる。また、参照画像指定方法制御部１１５は、送信側
に１画像前の画像を参照画像にすることを指定するた
め、復号参照画像指定方法選択手段１１６は、スイッチ
Ｓ１とスイッチＳ２の切り替え状態を現状のまま維持す
る。これにより、連続参照画像指定データ送信部１１７
は、連続参照画像指定データである画像番号「１」を送
信側に送信し、特定参照画像指定データ送信部１１８
は、画像番号「０」を特定参照画像指定データとして送
信側に送信する。

【０１７０】さらに、図８に示す動作フローを参照し、
画像番号「７」の符号化データの復号処理の過程で受信
側から送信側へ送信される特定参照画像指定データに、
伝送路上で誤りが載る場合の、送信側の動作例を示す。
なお、図８に示す動作フローにおける初期状態について
も、前述した第１の実施形態において、図３を参照して
説明した、送信側から送信された送信データに誤りが載
る場合と同様の初期状態とする。

【０１７１】送信側が画像番号「１０」の画像を符号化
するＳＴＥＰ５において、受信側が画像番号「７」の符
号化データを復号した時に出力した画像番号「５」を示
す特定参照画像指定データに、伝送路上で誤りが載った
場合、送信側において、送信側誤り検出部１２３により
その誤りが検出されると、上記受信した特定参照画像指
定データと、連続参照画像指定データとが廃棄される。
この時、連続参照画像指定データ受信部１０７と特定参
照画像指定データ受信部１０８は、それぞれ、ＳＴＥＰ
４において受信した「０」を示す連続参照画像指定デー
タと、画像番号「５」を示す特定参照画像指定データと
を保持し続ける。これにより、符号化参照画像選択手段
１０４は、符号化参照画像メモリ１０３の中から画像番
号「５」の画像を選択する。そして、符号化部１０１
は、画像番号「５」の画像を参照画像として画像番号
「１０」の画像を符号化する。

【０１７２】また、局所復号部１０２は、画像番号
「５」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像（画像番号「１０」）を符号化参照
画像メモリ１０３に蓄積する。画像指定データ通知部１
０９は、受信側に対して符号化データの画像番号「１
０」を示すデータを送信し、この時、符号化画像指定デ
ータ蓄積部１０６に画像番号「１０」を示すデータが蓄
積される。また、参照画像通知部１０５は、受信側に対
して符号化に用いた参照画像の画像番号「５」を示すデ
ータを送信する。

【０１７３】一方、受信側では、誤り検出部１２０に
て、送信側から送信されてきたデータに誤りが検出され
かなったことが確認されると、画像指定データ受信部１
１１において、受信した符号化データの画像番号「１
０」が受信され、この画像番号「１０」を示すデータが
復号画像指定データ蓄積部１１９に蓄積される。また、
参照画像指定データ受信部１１２において、符号化の際
に使用された参照画像の画像番号「５」を示すデータが
受信されると、復号参照画像選択手段１１３は、復号参
照画像メモリ１１４に蓄積されている画像の中から画像
番号「５」の画像を選択する。

【０１７４】これにより、復号部１１０は画像番号
「５」の画像を参照画像として用いて受信した符号化デ
ータを復号し、出力画像として外部へ出力すると共に、
その復号画像が復号参照画像メモリ１１４に蓄積させ
る。また、参照画像指定方法制御部１１５は、送信側に
１画像前の画像を参照画像にすることを指定するため、
復号参照画像指定方法選択手段１１６は、スイッチＳ１
とスイッチＳ２の切り替え状態を現状のまま維持する。
これにより、連続参照画像指定データ送信部１１７は、
画像番号「１」を連続参照画像指定データとして送信側
に送信し、また、特定参照画像指定データ送信部１１８
は、画像番号「０」を特定参照画像指定データとして送
信側に送信する。

【０１７５】以上のように、受信側から送信側へ送信さ
れる連続参照画像指定データまたは特定参照画像指定デ
ータに、伝送路上で誤りが載った場合においても、連続
参照画像指定データと特定参照画像指定データの画像番
号を変更することにより、受信側から指定した画像を参
照画像にするのか、１画像前の画像を参照画像にするの
かを変更することができる。

【０１７６】［第３の実施形態］次に、前述した第１の
実施形態で示した画像通信システムの構成を基に、受信
側の参照画像メモリが小さくすることができる上に、受
信側が主体的に誤りの波及の軽減と、符号化効率の低下
の軽減との制御を行えるようにした画像通信システムに
ついて説明する。

【０１７７】図９に、本実施形態における画像通信シス
テムの構成を示すブロック図を示す。この図において、
図１と同じ構成については、同一の符号を付し、その詳
しい説明を省略する。図９に示す画像通信システムが図
１のものと異なる点は、受信側において、復号参照画像
メモリ１１４の代わりに、以下の構成が追加された点で
ある。

【０１７８】まず、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２によって受信された参照
画像指定データが示す画像番号と、復号画像指定データ
蓄積部１１９に蓄積されている画像番号とに基づいて、
現参照画像蓄積部１２４に予想参照画像蓄積部１２５が
蓄積している画像を蓄積させるか否かを判断する。すな
わち、参照画像指定データ受信部１１２が受信した参照
画像指定データが示す画像番号と、復号画像指定データ
蓄積部１１９に蓄積されている画像番号とが一致する場
合には、現参照画像蓄積部１２４に予想参照画像蓄積部
１２５が蓄積している画像を蓄積させると判断し、一致
しない場合には蓄積させないと判断する。

【０１７９】また、参照画像蓄積変更手段１２９は、現
参照画像蓄積判断部１２８が、予想参照画像蓄積部１２
５に蓄積されている画像を、現参照画像蓄積部１２４に
蓄積させると判断した場合、切り替え状態を現参照画像
蓄積部１２４側に切り替え、現参照画像蓄積部１２４
に、予想参照画像蓄積部１２５に蓄積されている画像を
蓄積させる。一方、現参照画像蓄積判断部１２８が、予
想参照画像蓄積部１２５に蓄積されている画像を、現参
照画像蓄積部１２４に蓄積させないと判断した場合、切
り替え状態をオープン側に切り替え、予想参照画像蓄積
部１２５に蓄積されている画像を、現参照画像蓄積部１
２４に蓄積させない。

【０１８０】蓄積決定部１２７は、以下に示す２つの条
件に従って、予想参照画像蓄積部１２５に、復号部１１
０が復号した復号画像を蓄積させるか否かを決定する。

【０１８１】（１）参照画像指定方法制御部１１５が送
信側に対し、１画像前に符号化した画像を参照画像とし
て用いて符号化を行うよう指定する場合には、復号部１
１０から出力される復号画像を必ず蓄積させることを決
定する。 （２）参照画像指定方法制御部１１５が送信側に対し、
受信側が指示する特定の参照画像を参照画像として用い
て符号化を行うよう指定する場合には、参照画像指定デ
ータ受信部１１２で受信された参照画像指定データによ
り示される画像番号と、復号画像指定データ蓄積部１１
９に蓄積されている画像番号とが一致する時に、復号部
１１０から出力される復号画像を蓄積させることを決定
する。

【０１８２】蓄積変更手段１２６は、蓄積決定部１２７
の決定に応じて、復号部１１０が復号した復号画像を、
予想参照画像蓄積部１２５に蓄積させる。ここで、現参
照画像蓄積部１２４および予想参照画像蓄積部１２５
は、請求項１０の参照画像蓄積部に相当する。また、現
参照画像蓄積判断部１２８および蓄積決定部１２９は、
請求項１０の参照画像蓄積判断部に相当する。

【０１８３】なお、送信側の符号化参照画像メモリ１０
３には、局所復号部１０２にて復号された画像を蓄積
し、古い画像から削除するが、参照画像に用いた画像は
必ず保持するものとする。

【０１８４】また、受信側において、参照画像指定方法
制御部１１５は、所定の条件として、１画像前に符号化
した画像を符号化を行う際の参照画像として用いるよう
指定している時に、受信した符号化データから誤りが検
出された場合には、特定の画像を参照画像に指定するよ
う変更する。

【０１８５】逆に、特定の画像を参照画像として用いる
よう指定している時に、２フレーム続けて符号化データ
から誤りが検出されない場合には、１画像前に符号化し
た画像を参照画像に指定するように変更する。

【０１８６】次に、上述した構成による画像通信システ
ムの動作について説明する。なお、上記画像通信システ
ムの動作について説明するに当たり、送信側と受信側と
の間で授受されるデータの遅延時間に関しては、次に述
べる通りとする。

【０１８７】すなわち、送信側から送信された符号化デ
ータが受信側に到着するまで１画像分の遅延が生じ、ま
た、受信側から送信された連続参照画像指定データおよ
び特定参照画像指定データが送信側に到着するまでに、
１画像分の遅延があるとする。このため、送信側が符号
化した符号化データを送信してから、受信側が当該符号
化データを復号し、この復号の結果、送信側へ送信され
る連続参照画像指定データおよび特定参照画像指定デー
タが、送信側で受信されるまで、２画像分の遅延が生じ
ることになる。

【０１８８】また、送信側と受信側の初期状態として、
次のような通信途中の状況を仮定する。まず、画像番号
「１」から画像番号「６」までは、１画像前の画像を参
照画像として用い、符号化および復号を行っているもの
とする。

【０１８９】すなわち、画像番号「６」を符号化する時
に、送信側では、符号化参照画像メモリ１０３に画像番
号「１」から画像番号「５」までの画像が蓄積されてお
り、画像番号「５」の画像を参照画像として用いて画像
番号「６」の画像を符号化し、これにより、符号化画像
指定データ蓄積部１０６には画像番号「５」が蓄積され
ているものとする。

【０１９０】一方、受信側では、現参照画像蓄積部１２
４には画像番号「４」の画像が蓄積され、予想参照画像
蓄積部１２５には画像番号「５」の画像が蓄積されてい
るものとする。また、復号画像指定データ蓄積部１１９
には画像番号「５」が蓄積されているものとする。さら
に、受信側から送信側に対し、画像番号「５」までは、
「１」を示す連続参照画像指定データと、「０」を示す
特定参照画像指定データとが、それぞれ送信されていた
ものとする。

【０１９１】以下に図１０を参照して、上述した初期状
態において、伝送路上で送信側から送信されたデータに
誤りが載る場合における、送信側と受信側の動作につい
て説明する。なお、図１０では、画像番号「６」、
「８」、「１０」の画像の符号化データを含んだデータ
を受信側へ送信した時に、伝送路上にて誤りが載る場合
を示している。また、この図に示す数字は画像番号を示
しており、送信側から受信側へ符号化データが送信され
ている状態を表す矢印の上側に示した数字は、その符号
化データの参照画像指定データ、すなわち符号化の際に
用いられた参照画像の画像番号を示している。

【０１９２】まず、画像番号「６」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を、ＳＴＥＰ１として図１０に示した。

【０１９３】送信側の動作は以下の通りである。

【０１９４】連続参照画像指定データ受信部１０７が、
画像番号「１」を受信すると、符号化参照画像選択手段
１０４は、符号化画像指定データ蓄積部１０６に蓄積さ
れている画像番号「５」の画像を、符号化参照画像メモ
リ１０３から選択する。これにより、符号化部１０１
は、符号化参照画像選択手段１０４によって選択された
画像番号「５」の画像を参照画像として用い、画像番号
「６」の入力画像を符号化する。

【０１９５】また、局所復号部１０２は、画像番号
「５」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「６」を示すデータを
送信し、この時、符号化画像指定データ蓄積部１０６に
は画像番号「６」を示すデータが蓄積される。また、参
照画像通知部１０５は、受信側に対して符号化に用いた
参照画像の画像番号「５」を示すデータを送信する。

【０１９６】受信側の動作は以下の通りである。

【０１９７】誤り検出部１２０にて、送信側から送信さ
れてきたデータに誤りが検出されたことが確認される
と、そのデータは廃棄される。このため復号部１１０に
おいて復号が行われない。この時、参照画像指定方法制
御部１１５は、符号化データが誤っているため、送信側
に対し、復号画像指定データ蓄積部１１９に蓄積された
画像指定データによって指定される画像を、符号化の際
に用いる参照画像として指定する。

【０１９８】これにより、復号参照画像指定方法選択手
段１１６は、スイッチＳ１をメモリＭ１側に切り替える
と共に、スイッチＳ２を復号画像指定データ蓄積部１１
９側に切り替える。そして、上記の切り替えにより、特
定参照画像指定データ送信部１１８は、復号画像指定デ
ータ蓄積部１１９に蓄積されていた画像番号「５」を特
定参照画像指定データとして送信側に送信し、連続参照
画像指定データ送信部１１７は、画像番号「０」を連続
参照画像指定データとして送信側へ送信する。

【０１９９】次に、画像番号「７」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を、ＳＴＥＰ２として図１０に示す。

【０２００】送信側の動作は以下の通りである。

【０２０１】連続参照画像指定データ受信部１０７が、
受信側において画像番号「４」の符号化データを復号し
た時に出力された画像番号「１」の連続参照画像指定デ
ータを受信すると、符号化参照画像選択手段１０４は、
符号化画像指定データ蓄積部１０６に蓄積されている画
像番号「６」の画像を、符号化参照画像メモリ１０３か
ら選択する。これにより、符号化部１０１は、符号化参
照画像選択手段１０４によって選択された画像番号
「６」の画像を参照画像として用い、画像番号「７」の
入力画像を符号化する。

【０２０２】また、局所復号部１０２は、画像番号
「６」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「７」を示すデータを
送信し、この時、符号化画像指定データ蓄積部１０６に
は画像番号「７」を示すデータが蓄積される。また、参
照画像通知部１０５は、受信側に対して符号化に用いた
参照画像の画像番号「６」を示すデータを送信する。

【０２０３】受信側の動作は以下の通りである。

【０２０４】誤り検出部１２０にて、送信側から送信さ
れてきたデータから誤りが検出されかなったことが確認
されると、画像指定データ受信部１１１は、受信した符
号化データの画像番号「７」を示す画像指定データを受
信する。また、参照画像指定データ受信部１１２は、画
像番号「６」を示す参照画像指定データを受信するが、
現参照画像蓄積部１２４または予想参照画像蓄積部１２
５のいずれにも画像番号「６」の画像が蓄積されていな
いため、復号参照画像選択手段１１３は、参照画像を選
択することができない。このため、復号部１１０は、参
照画像がないため受信した符号化データを正しく復号す
ることができない。

【０２０５】この時、参照画像指定方法制御部１１５
は、２フレーム連続して誤りが検出されない状態になっ
ていないので、送信側に対し、復号画像指定データ蓄積
部１１９に蓄積されている画像指定データによって指定
される画像を、符号化の際に用いる参照画像として指定
する。これにより、復号参照画像指定方法選択手段１１
６は、スイッチＳ１とスイッチＳ２の切り替え状態を維
持するので、特定参照画像指定データ送信部１１８は、
復号画像指定データ蓄積部１１９に蓄積されている画像
番号「５」を特定参照画像指定データとして送信側に送
信し、また、連続参照画像指定データ送信部１１７は、
画像番号「０」を連続参照画像指定データとして送信側
へ送信する。

【０２０６】次に、画像番号「８」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を、ＳＴＥＰ３として図１０に示す。

【０２０７】送信側の動作は以下の通りである。

【０２０８】連続参照画像指定データ受信部１０７が、
受信側において画像番号「５」の符号化データを復号し
た時に出力された「１」を示す連続参照画像指定データ
を受信すると、符号化参照画像選択手段１０４は、符号
化画像指定データ蓄積部１０６に蓄積されている画像番
号「７」の画像を符号化参照画像メモリ１０３から選択
する。これにより、符号化部１０１は、符号化参照画像
選択手段１０４によって選択された画像番号「７」の画
像を参照画像として用いて、画像番号「８」の入力画像
を符号化する。

【０２０９】また、局所復号部１０２は、画像番号
「７」の画像を参照画像に用いて上記符号化データを復
号し、画像番号「８」の復号画像を符号化参照画像メモ
リ１０３に蓄積する。また、画像指定データ通知部１０
９は、受信側に対して符号化データの画像番号「８」を
示すデータを送信し、この時、符号化画像指定データ蓄
積部１０６に画像番号「８」を示すデータが蓄積され
る。また、参照画像通知部１０５は、受信側に対して符
号化に用いた参照画像の画像番号「７」を示すデータを
送信する。

【０２１０】受信側の動作は以下の通りである。

【０２１１】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されたことが確認され
ると、そのデータは廃棄されるので、復号部１１０にお
いて復号は行われない。また、参照画像指定方法制御部
１１５は、送信側から送信されたデータが誤っていたた
め、復号画像指定データ蓄積部１１９に蓄積された画像
指定データによって指定される画像を、符号化の際に用
いる参照画像として指定する。

【０２１２】これにより、復号参照画像指定方法選択手
段１１６は、スイッチＳ１とスイッチＳ２の切り替え状
態を維持するので、特定参照画像指定データ送信部１１
８は、復号画像指定データ蓄積部１１９に蓄積されてい
る画像番号「５」を特定参照画像指定データとして送信
側に送信し、連続参照画像指定データ送信部１１７は、
画像番号「０」を連続参照画像指定データとして送信側
へ送信する。

【０２１３】次に、画像番号「９」の画像を符号化し、
その符号化データを復号する際の送信側と受信側の動作
を、ＳＴＥＰ４として図１０に示す。

【０２１４】送信側の動作は以下の通りである。

【０２１５】特定参照画像指定データ受信部１０８が、
受信側において画像番号「６」の符号化データを復号し
ようとした時に出力された画像番号「５」を示す特定参
照画像指定データを受信すると、符号化参照画像選択手
段１０４は、上記特定参照画像指定データが示す画像番
号「５」の画像を符号化参照画像メモリ１０３から選択
する。これにより、符号化部１０１は、符号化参照画像
選択手段１０４によって選択された画像番号「５」の画
像を参照画像として用い、画像番号「９」の入力画像を
符号化する。

【０２１６】また、局所復号部１０２は、画像番号
「５」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「９」を送信し、この
時、符号化画像指定データ蓄積部１０６に画像番号
「９」を示すデータが蓄積される。また、参照画像通知
部１０５は、受信側に対して符号化に用いた参照画像の
画像番号「５」を示すデータを送信する。

【０２１７】受信側の動作は以下の通りである。

【０２１８】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「９」を示す画像指定データを
受信する（画像指定データ受信過程）。また、参照画像
指定データ受信部１１２は、画像番号「５」を示す参照
画像指定データを受信する（参照画像指定データ受信過
程）と、復号参照画像選択手段１１３は、予想参照画像
蓄積部１２５に蓄積されている画像番号「５」の画像を
参照画像として選択し、復号部１１０へ出力する。

【０２１９】これにより、復号部１１０は、画像番号
「５」の画像を参照画像として用いて受信した符号化デ
ータを復号し（復号過程）、正しく復号できた画像（画
像番号「９」）を蓄積変更手段１２６へ出力する。そし
て、参照画像指定方法制御部１１５は、２フレーム連続
して誤りが検出されない状態になっていないので、送信
側に対し、受信側が指定する特定の画像を参照画像とし
て用いて符号化を行うように指定する（符号化参照画像
判断過程）。

【０２２０】ここで蓄積決定部１２７は、参照画像指定
方法制御部１１５が、特定の画像を参照画像として用い
て符号化を行うように指定しており、かつ、参照画像指
定データ受信部１１２が受信した参照画像指定データに
より示される画像番号「５」と、復号画像指定データ蓄
積部１１９に蓄積されている画像番号「５」とが一致す
るため、復号部１１０が復号した画像番号「９」の復号
画像を、予想参照画像蓄積部１２５に蓄積することを決
定する（復号参照画像蓄積判断過程）。これにより、蓄
積変更手段１２６は、切り替え状態を予想参照画像蓄積
部１２５側へ切り替え、復号部１１０から出力されてい
る画像番号「９」の復号画像を、予想参照画像蓄積部１
２５に蓄積させる。

【０２２１】また、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２が受信した参照画像指定
データにより示される画像番号「５」と、復号画像指定
データ蓄積部１１９に蓄積されている画像番号「５」と
が一致するため、予想参照画像蓄積部１２５に蓄積され
ている画像番号「５」の画像を現参照画像蓄積部１２４
に蓄積するよう判断する（復号参照画像蓄積判断過
程）。これにより、参照画像蓄積変更手段１２９は、切
り替え状態を現参照画像蓄積部１２４側に切り替え、予
想参照画像蓄積部１２５に蓄積されている画像を、現参
照画像蓄積部１２４に蓄積させる（復号参照画像蓄積過
程）。

【０２２２】さらに、蓄積決定部１２７が復号画像を蓄
積することを決定したので、画像指定データ受信部１１
１により受信された画像番号「９」を示すデータが、復
号画像指定データ蓄積部１１９に蓄積される（復号参照
画像蓄積過程）。そして、復号参照画像指定方法選択手
段１１６は、参照画像指定方法制御部１１５が特定の画
像を参照画像として用いて符号化を行うように指定して
いるため、スイッチＳ１とスイッチＳ２の切り替え状態
を維持する。これにより、特定参照画像指定データ送信
部１１８は、復号画像指定データ蓄積部１１９に蓄積さ
れた画像番号「９」を特定参照画像指定データとして送
信側へ送信し、連続参照画像指定データ送信部１１７
は、画像番号「０」を連続参照画像指定データとして送
信側へ送信する（連続参照画像指定過程）。

【０２２３】次に、画像番号「１０」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ５として図１０に示す。

【０２２４】送信側の動作は以下の通りである。

【０２２５】特定参照画像指定データ受信部１０８が、
受信側において画像番号「７」の符号化データを復号し
ようとした時に出力された画像番号「５」を示す特定参
照画像指定データを受信すると、符号化参照画像選択手
段１０４は、上記特定参照画像指定データが示す画像番
号「５」の画像を符号化参照画像メモリ１０３から選択
する。これにより、符号化部１０１は、符号化参照画像
選択手段１０４によって選択された画像番号「５」の画
像を参照画像として用い、画像番号「１０」の入力画像
を符号化する。

【０２２６】また、局所復号部１０２は、画像番号
「５」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「１０」を送信し、こ
の時、符号化画像指定データ蓄積部１０６に画像番号
「１０」を示すデータが蓄積される。また、参照画像通
知部１０５は、受信側に対して符号化に用いた参照画像
の画像番号「５」を示すデータを送信する。

【０２２７】受信側の動作は以下の通りである。

【０２２８】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されたことが確認され
ると、そのデータは廃棄されるので、復号部１１０にお
いて復号は行われない。また、参照画像指定方法制御部
１１５は、送信側から送信されたデータが誤っていたた
め、復号画像指定データ蓄積部１１９に蓄積された画像
指定データによって指定される画像を、符号化の際に用
いる参照画像として指定する。

【０２２９】これにより、復号参照画像指定方法選択手
段１１６は、スイッチＳ１とスイッチＳ２の切り替え状
態を維持するので、特定参照画像指定データ送信部１１
８は、復号画像指定データ蓄積部１１９に蓄積されてい
る画像番号「９」を特定参照画像指定データとして送信
側に送信し、また、連続参照画像指定データ送信部１１
７は、画像番号「０」を連続参照画像指定データとして
送信側へ送信される。

【０２３０】次に、画像番号「１１」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ６として図１０に示す。

【０２３１】送信側の動作は以下の通りである。

【０２３２】特定参照画像指定データ受信部１０８が、
受信側において画像番号「８」の符号化データを復号し
ようとした時に出力された画像番号「５」を示す特定参
照画像指定データを受信すると、符号化参照画像選択手
段１０４は、上記特定参照画像指定データが示す画像番
号「５」の画像を符号化参照画像メモリ１０３から選択
する。これにより、符号化部１０１は、符号化参照画像
選択手段１０４によって選択された画像番号「５」の画
像を参照画像として用い、画像番号「１１」の入力画像
を符号化する。

【０２３３】また、局所復号部１０２は、画像番号
「５」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「１１」を送信し、こ
の時、符号化画像指定データ蓄積部１０６に画像番号
「１１」を示すデータが蓄積される。また、参照画像通
知部１０５は、受信側に対して符号化に用いた参照画像
の画像番号「５」を示すデータを送信する。

【０２３４】受信側の動作は以下の通りである。

【０２３５】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「１１」を示す画像指定データ
を受信する。また、参照画像指定データ受信部１１２
は、画像番号「５」を示す参照画像指定データを受信す
ると、復号参照画像選択手段１１３は、現参照画像蓄積
部１２４に蓄積されている画像番号「５」の画像を参照
画像として選択し、復号部１１０へ出力する。

【０２３６】これにより、復号部１１０は、画像番号
「５」の画像を参照画像として用いて受信した符号化デ
ータを復号し、正しく復号できた画像（画像番号「１
１」）を蓄積変更手段１２６へ出力する。そして、参照
画像指定方法制御部１１５は、送信側に対し、受信側が
指定する特定の画像を参照画像として用いて符号化を行
うように指定する。

【０２３７】ここで蓄積決定部１２７は、参照画像指定
方法制御部１１５が、特定の画像を参照画像に指定して
いるものの、参照画像指定データ受信部１１２が受信し
た参照画像指定データにより示される画像番号「５」
と、復号画像指定データ蓄積部１１９に蓄積されている
画像番号「９」とが一致しないため、復号部１１０が復
号した画像番号「１１」の復号画像を、予想参照画像蓄
積部１２５に蓄積しないことを決定する。これにより、
蓄積変更手段１２６は、切り替え状態をオープン側へ切
り替え、復号部１１０から出力されている画像番号「１
１」の復号画像を、予想参照画像蓄積部１２５に蓄積さ
せない。

【０２３８】また、蓄積決定部１２７が復号画像を蓄積
しないことを決定したので、画像指定データ受信部１１
１により受信された画像番号「１１」を示すデータは、
復号画像指定データ蓄積部１１９に蓄積されない。そし
て、復号参照画像指定方法選択手段１１６は、参照画像
指定方法制御部１１５が特定の画像を参照画像として用
いて符号化を行うように指定しているため、スイッチＳ
１とスイッチＳ２の切り替え状態を維持する。これによ
り、特定参照画像指定データ送信部１１８は、復号画像
指定データ蓄積部１１９に蓄積された画像番号「９」を
特定参照画像指定データとして送信側へ送信し、連続参
照画像指定データ送信部１１７は、画像番号「０」を連
続参照画像指定データとして送信側へ送信する。

【０２３９】次に、画像番号「１２」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ７として図１０に示す。

【０２４０】送信側の動作は以下の通りである。

【０２４１】特定参照画像指定データ受信部１０８が、
受信側において画像番号「９」の符号化データを復号し
た時に出力された画像番号「９」を示す特定参照画像指
定データを受信すると、符号化参照画像選択手段１０４
は、上記特定参照画像指定データが示す画像番号「９」
の画像を符号化参照画像メモリ１０３から選択する。こ
れにより、符号化部１０１は、符号化参照画像選択手段
１０４によって選択された画像番号「９」の画像を参照
画像として用い、画像番号「１２」の入力画像を符号化
する。

【０２４２】また、局所復号部１０２は、画像番号
「９」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「１２」を送信し、こ
の時、符号化画像指定データ蓄積部１０６に画像番号
「１２」を示すデータが蓄積される。また、参照画像通
知部１０５は、受信側に対して符号化に用いた参照画像
の画像番号「９」を示すデータを送信する。

【０２４３】受信側の動作は以下の通りである。

【０２４４】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「１２」を示す画像指定データ
を受信する（画像指定データ受信過程）。また、参照画
像指定データ受信部１１２は、画像番号「９」を示す参
照画像指定データを受信する（参照画像指定データ受信
過程）と、復号参照画像選択手段１１３は、現参照画像
蓄積部１２４に蓄積されている画像番号「９」の画像を
参照画像として選択し、復号部１１０へ出力する。

【０２４５】これにより、復号部１１０は、画像番号
「９」の画像を参照画像として用いて受信した符号化デ
ータを復号し（復号過程）、正しく復号できた画像（画
像番号「１２」）を蓄積変更手段１２６へ出力する。そ
して、参照画像指定方法制御部１１５は、２フレーム連
続して伝送誤りを検出しなかったため、送信側に対し、
１画像前に符号化した画像を参照画像として用いて符号
化を行うように指定する（符号化参照画像判断過程）。
これにより、復号参照画像指定方法選択手段１１６は、
スイッチＳ１をメモりＭ２側に切り替えると共に、スイ
ッチＳ２をメモリＭ３側に切り替える。そして、上記の
切り替えにより、連続参照画像指定データ送信部１１７
は、画像番号「１」を連続参照画像指定データとして送
信側へ送信し、また、特定参照画像指定データ送信部１
１８は、画像番号「０」を特定参照画像指定データとし
て送信側に送信する（連続参照画像指定過程）。

【０２４６】また、蓄積決定部１２７は、参照画像指定
方法制御部１１５が、１画像前に符号化した画像を参照
画像に指定しているため、復号部１１０が復号した画像
番号「１２」の復号画像を、予想参照画像蓄積部１２５
に蓄積することを決定する（参照画像蓄積判断過程）。
これにより、蓄積変更手段１２６は、切り替え状態を予
想参照画像蓄積部１２５側へ切り替え、復号部１１０か
ら出力されている画像番号「１２」の復号画像を、予想
参照画像蓄積部１２５に蓄積させる（復号参照画像蓄積
過程）。

【０２４７】また、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２が受信した参照画像指定
データにより示される画像番号「９」と、復号画像指定
データ蓄積部１１９に蓄積されている画像番号「９」と
が一致するため、予想参照画像蓄積部１２５に蓄積され
ている画像番号「９」の画像を現参照画像蓄積部１２４
に蓄積するよう判断する（参照画像蓄積判断過程）。こ
れにより、参照画像蓄積変更手段１２９は、切り替え状
態を、現参照画像蓄積部１２４側に切り替え、予想参照
画像蓄積部１２５に蓄積されている画像を、現参照画像
蓄積部１２４に蓄積させる（復号参照画像蓄積過程）。

【０２４８】さらに、蓄積決定部１２７が復号部１１０
から出力された画像番号「１２」の復号画像を、予想参
照画像蓄積部１２５に蓄積することを決定したので、復
号画像指定データ蓄積部１１９に、画像指定データ受信
部１１１が受信した画像番号「１２」のデータが蓄積さ
れる（復号参照画像蓄積過程）。

【０２４９】次に、画像番号「１３」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ８として図１０に示す。

【０２５０】送信側の動作は以下の通りである。

【０２５１】特定参照画像指定データ受信部１０８が、
受信側において画像番号「１０」の符号化データを復号
した時に出力された画像番号「９」を示す特定参照画像
指定データを受信すると、符号化参照画像選択手段１０
４は、上記特定参照画像指定データが示す画像番号
「９」の画像を符号化参照画像メモリ１０３から選択す
る。これにより、符号化部１０１は、符号化参照画像選
択手段１０４によって選択された画像番号「９」の画像
を参照画像として用い、画像番号「１３」の入力画像を
符号化する。

【０２５２】また、局所復号部１０２は、画像番号
「９」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「１３」を送信し、こ
の時、符号化画像指定データ蓄積部１０６に画像番号
「１３」を示すデータが蓄積される。また、参照画像通
知部１０５は、受信側に対して符号化に用いた参照画像
の画像番号「９」を示すデータを送信する。

【０２５３】受信側の動作は以下の通りである。

【０２５４】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「１３」を示す画像指定データ
を受信する。また、参照画像指定データ受信部１１２
は、画像番号「９」を示す参照画像指定データを受信す
ると、復号参照画像選択手段１１３は、現参照画像蓄積
部１２４に蓄積されている画像番号「９」の画像を参照
画像として選択し、復号部１１０へ出力する。

【０２５５】これにより、復号部１１０は、画像番号
「９」の画像を参照画像として用いて受信した符号化デ
ータを復号し、正しく復号できた画像（画像番号「１
３」）を蓄積変更手段１２６へ出力する。そして、参照
画像指定方法制御部１１５は、送信側に対し、１画像前
に符号化した画像を参照画像として用いて符号化を行う
ように指定する。これにより、復号参照画像指定方法選
択手段１１６は、スイッチＳ１とスイッチＳ２の切り替
え状態を現状のまま維持するので、連続参照画像指定デ
ータ送信部１１７は、画像番号「１」を連続参照画像指
定データとして送信側へ送信し、また、特定参照画像指
定データ送信部１１８は、画像番号「０」を特定参照画
像指定データとして送信側へ送信される。

【０２５６】また、蓄積決定部１２７は、参照画像指定
方法制御部１１５が、１画像前に符号化した画像を参照
画像に指定しているため、復号部１１０が復号した画像
番号「１３」の復号画像を、予想参照画像蓄積部１２５
に蓄積することを決定する。これにより、蓄積変更手段
１２６は、切り替え状態を予想参照画像蓄積部１２５側
へ切り替え、復号部１１０から出力されている画像番号
「１３」の復号画像を、予想参照画像蓄積部１２５に蓄
積させる。

【０２５７】また、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２が受信した参照画像指定
データにより示される画像番号「９」と、復号画像指定
データ蓄積部１１９に蓄積されている画像番号「１２」
とが一致しないため、予想参照画像蓄積部１２５に蓄積
されている画像番号「１３」の画像を現参照画像蓄積部
１２４に蓄積しないよう判断する。これにより、参照画
像蓄積変更手段１２９は、切り替え状態を、オープン側
に維持し、予想参照画像蓄積部１２５に蓄積されている
画像を、現参照画像蓄積部１２４に蓄積させない。

【０２５８】さらに、蓄積決定部１２７が復号部１１０
から出力された画像番号「１３」の復号画像を、予想参
照画像蓄積部１２５に蓄積することを決定したので、復
号画像指定データ蓄積部１１９に、画像指定データ受信
部１１１が受信した画像番号「１３」のデータが蓄積さ
れる。

【０２５９】次に、画像番号「１４」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ９として図１０に示す。

【０２６０】送信側の動作は以下の通りである。

【０２６１】特定参照画像指定データ受信部１０８が、
受信側において画像番号「１１」の符号化データを復号
した時に出力された画像番号「９」を示す特定参照画像
指定データを受信すると、符号化参照画像選択手段１０
４は、上記特定参照画像指定データが示す画像番号
「９」の画像を符号化参照画像メモリ１０３から選択す
る。これにより、符号化部１０１は、符号化参照画像選
択手段１０４によって選択された画像番号「９」の画像
を参照画像として用い、画像番号「１４」の入力画像を
符号化する。

【０２６２】また、局所復号部１０２は、画像番号
「９」の画像を参照画像に用いて上記符号化データを復
号し、その復号画像を符号化参照画像メモリ１０３に蓄
積する。また、画像指定データ通知部１０９は、受信側
に対して符号化データの画像番号「１４」を送信し、こ
の時、符号化画像指定データ蓄積部１０６に画像番号
「１４」を示すデータが蓄積される。また、参照画像通
知部１０５は、受信側に対して符号化に用いた参照画像
の画像番号「９」を示すデータを送信する。

【０２６３】受信側の動作は以下の通りである。

【０２６４】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「１４」を示す画像指定データ
を受信する。また、参照画像指定データ受信部１１２
は、画像番号「９」を示す参照画像指定データを受信す
ると、復号参照画像選択手段１１３は、現参照画像蓄積
部１２４に蓄積されている画像番号「９」の画像を参照
画像として選択し、復号部１１０へ出力する。

【０２６５】これにより、復号部１１０は、画像番号
「９」の画像を参照画像として用いて受信した符号化デ
ータを復号し、正しく復号できた画像（画像番号「１
４」）を蓄積変更手段１２６へ出力する。そして、参照
画像指定方法制御部１１５は、送信側に対し、１画像前
に符号化した画像を参照画像として用いて符号化を行う
ように指定する。これにより、復号参照画像指定方法選
択手段１１６は、スイッチＳ１とスイッチＳ２の切り替
え状態を現状のまま維持するので、連続参照画像指定デ
ータ送信部１１７は、画像番号「１」を連続参照画像指
定データとして送信側へ送信し、また、特定参照画像指
定データ送信部１１８は、画像番号「０」を特定参照画
像指定データとして送信側に送信する。

【０２６６】また、蓄積決定部１２７は、参照画像指定
方法制御部１１５が、１画像前に符号化した画像を参照
画像に指定しているため、復号部１１０が復号した画像
番号「１４」の復号画像を、予想参照画像蓄積部１２５
に蓄積することを決定する。これにより、蓄積変更手段
１２６は、切り替え状態を予想参照画像蓄積部１２５側
へ切り替え、復号部１１０から出力されている画像番号
「１４」の復号画像を、予想参照画像蓄積部１２５に蓄
積させる。

【０２６７】また、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２が受信した参照画像指定
データにより示される画像番号「９」と、復号画像指定
データ蓄積部１１９に蓄積されている画像番号「１３」
とが一致しないため、予想参照画像蓄積部１２５に蓄積
されている画像番号「１４」の画像を現参照画像蓄積部
１２４に蓄積しないよう判断する。これにより、参照画
像蓄積変更手段１２９は、切り替え状態を、オープン側
に維持し、予想参照画像蓄積部１２５に蓄積されている
画像を、現参照画像蓄積部１２４に蓄積させない。

【０２６８】さらに、蓄積決定部１２７が復号部１１０
から出力された画像番号「１４」の復号画像を、予想参
照画像蓄積部１２５に蓄積することを決定したので、復
号画像指定データ蓄積部１１９に、画像指定データ受信
部１１１が受信した画像番号「１４」のデータが蓄積さ
れる。

【０２６９】次に、画像番号「１５」の画像を符号化
し、その符号化データを復号する際の送信側と受信側の
動作を、ＳＴＥＰ１０として図１０に示す。

【０２７０】送信側の動作は以下の通りである。

【０２７１】連続参照画像指定データ受信部１０７が、
受信側において画像番号「１２」の符号化データを復号
した時に出力された画像番号「１」の連続参照画像指定
データを受信すると、符号化参照画像選択手段１０４
は、符号化画像指定データ蓄積部１０６に蓄積されてい
る画像番号「１４」の画像を符号化参照画像メモリ１０
３から選択する。これにより、符号化部１０１は、符号
化参照画像選択手段１０４によって選択された画像番号
「１４」の画像を参照画像として用い、画像番号「１
５」の入力画像を符号化する。

【０２７２】また、局所復号部１０２は、画像番号「１
４」の画像を参照画像に用いて上記符号化データを復号
し、その復号画像を符号化参照画像メモリ１０３に蓄積
する。また、画像指定データ通知部１０９は、受信側に
対して符号化データの画像番号「１５」を送信し、この
時、符号化画像指定データ蓄積部１０６に画像番号「１
５」を示すデータが蓄積される。また、参照画像通知部
１０５は、受信側に対して符号化に用いた参照画像の画
像番号「１４」を示すデータを送信する。

【０２７３】受信側の動作は以下の通りである。

【０２７４】誤り検出部１２０により、送信側から送信
されてきたデータから誤りが検出されなかったことが確
認されると、画像指定データ受信部１１１は、受信した
符号化データの画像番号「１５」を示す画像指定データ
を受信する。また、参照画像指定データ受信部１１２
は、画像番号「１４」を示す参照画像指定データを受信
すると、復号参照画像選択手段１１３は、予想参照画像
蓄積部１２５に蓄積されている画像番号「１４」の画像
を参照画像として選択し、復号部１１０へ出力する。

【０２７５】これにより、復号部１１０は、画像番号
「１４」の画像を参照画像として用いて受信した符号化
データを復号し、正しく復号できた画像（画像番号「１
５」）を蓄積変更手段１２６へ出力する。そして、参照
画像指定方法制御部１１５は、送信側に対し、１画像前
に符号化した画像を参照画像として用いて符号化を行う
ように指定する。これにより、復号参照画像指定方法選
択手段１１６は、スイッチＳ１とスイッチＳ２の切り替
え状態を現状のまま維持するので、連続参照画像指定デ
ータ送信部１１７は、画像番号「１」を連続参照画像指
定データとして送信側へ送信し、特定参照画像指定デー
タ送信部１１８は、画像番号「０」を特定参照画像指定
データとして送信側に送信する。

【０２７６】また、蓄積決定部１２７は、参照画像指定
方法制御部１１５が、１画像前に符号化した画像を参照
画像に指定しているため、復号部１１０が復号した画像
番号「１５」の復号画像を、予想参照画像蓄積部１２５
に蓄積することを決定する。これにより、蓄積変更手段
１２６は、切り替え状態を予想参照画像蓄積部１２５側
へ切り替え、復号部１１０から出力されている画像番号
「１５」の復号画像を、予想参照画像蓄積部１２５に蓄
積させる。

【０２７７】また、現参照画像蓄積判断部１２８は、参
照画像指定データ受信部１１２が受信した参照画像指定
データにより示される画像番号「１４」と、復号画像指
定データ蓄積部１１９に蓄積されている画像番号「１
４」とが一致するため、予想参照画像蓄積部１２５に蓄
積されている画像番号「１４」の画像を現参照画像蓄積
部１２４に蓄積するよう判断する。これにより、参照画
像蓄積変更手段１２９は、切り替え状態を、現参照画像
蓄積部１２４側に変更し、予想参照画像蓄積部１２５に
蓄積されている画像を、現参照画像蓄積部１２４に蓄積
させる。

【０２７８】さらに、蓄積決定部１２７が復号部１１０
から出力された画像番号「１５」の復号画像を、予想参
照画像蓄積部１２５に蓄積することを決定したので、復
号画像指定データ蓄積部１１９に、画像指定データ受信
部１１１が受信した画像番号「１５」のデータが蓄積さ
れる。

【０２７９】以上のように、受信側が送信側に対して１
画像前の画像を符号化することを指定する第１の実施形
態で示した構成に、受信側において復号画像を蓄積する
かどうかを判断する構成を追加することにより、受信側
の参照画像メモリを小さくすることができ、さらに、受
信側が主体的に、誤りの波及の軽減と符号化効率の低下
の軽減を制御することが可能である。

【０２８０】なお、上述した第１〜第３の実施形態にお
いて、図１、図６、図９のブロック図に示した送信側の
符号化部１０１，局所復号部１０２，符号化参照画像メ
モリ１０３，符号参照画像選択手段１０４，参照画像通
知部１０５，符号化画像指定データ蓄積部１０６，連続
参照画像指定データ受信部１０７，特定参照画像指定デ
ータ受信部１０８，画像指定データ通知部１０９，送信
側多重化部１２１，送信側誤り検出部１２３の動作を実
現するためのプログラムを、ＣＤ−ＲＯＭ、フロッピー
ディスク等のコンピュータ読み取り可能な記録媒体に記
録し、この記録媒体に記録されたプログラムを上記コン
ピュータに読み込ませ、実行することにより入力画像の
符号化および受信側への各種データの送信を行ってもよ
い。

【０２８１】また、図１、図６、図９のブロック図に示
した受信側の復号部１１０，画像指定データ受信部１１
１，参照画像指定データ受信部１１２，復号参照画像選
択手段１１３，復号参照画像メモリ１１４，参照画像指
定方法制御部１１５，復号参照画像指定方法選択手段１
１６，連続参照画像指定データ送信部１１７，特定参照
画像指定データ送信部１１８，復号画像指定データ蓄積
部１１９，誤り検出部１２０，受信側多重化部１２２，
現参照画像蓄積部１２４，予想参照画像蓄積部１２５，
蓄積変更手段１２６，蓄積決定部１２７，現参照画像蓄
積判断部１２８，参照画像蓄積変更手段１２９の動作を
実現するためのプログラムを、ＣＤ−ＲＯＭ、フロッピ
ーディスク等のコンピュータ読み取り可能な記録媒体に
記録し、この記録媒体に記録されたプログラムを上記コ
ンピュータに読み込ませ、実行することにより送信側か
ら送信されてきた符号化データの復号および送信側への
各種データの送信を行ってもよい。

【０２８２】

【発明の効果】以上説明したように、本発明によれぱ、
明示的に通常のフレーム間差分符号化のように送信側に
て１画像前に符号化した画像を参照画像に用いて符号化
することを指定することができ、さらに、連続参照画像
指定データと特定参照画像指定データとして送信する参
照画像指定データを変更することにより、受信側から、
指定した画像を参照画像にするのか、１画像前の画像を
参照画像にするのかを変更することを指定することがで
き、誤りの波及の軽減と符号化効率の低下の軽減を図る
ことができる。

【０２８３】また、受信側に復号画像を蓄積するかどう
かを判断する構成を追加することにより、受信側の参照
画像メモリを小さくすることができ、かつ、受信側が主
体的に、誤りの波及の軽減と符号化効率の低下の軽減を
制御することが可能となる。

【図面の簡単な説明】

【図１】 本発明の第１の実施形態の画像通信システム
の構成を示すブロック図である。

【図２】 同画像通信システムにおいて、符号化データ
に誤りが載らない場合の動作例を示す図である。

【図３】 同画像通信システムにおいて、符号化データ
に誤りが載った場合の動作例を示す図である。

【図４】 同画像通信システムにおいて、送信側から受
信側へ送信されるデータのフォーマットの一例を示す図
である。

【図５】 同画像通信システムにおいて、受信側から送
信側へ送信されるデータのフォーマットの一例を示す図
である。

【図６】 本発明の第２の実施形態の画像通信システム
の構成を示すブロック図である。

【図７】 同画像通信システムの動作例を示す図であ
る。

【図８】 同画像通信システムの動作例を示す図であ
る。

【図９】 本発明の第３の実施形態の画像通信システム
の構成を示すブロック図である。

【図１０】 同画像通信システムの動作例を示す図であ
る。

【符号の説明】

１０１ 符号化部 １０２ 局所復号部 １０３ 符号化参照画像メモリ １０４ 符号化参照画像選択手段 １０５ 参照画像通知部 １０６ 符号化画像指定データ蓄積部 １０７ 連続参照画像指定データ受信部 １０８ 特定参照画像指定データ受信部 １０９ 画像指定データ通知部 １１０ 復号部 １１１ 画像指定データ受信部 １１２ 参照画像指定データ受信部 １１３ 復号参照画像選択手段 １１４ 復号参照画像メモリ １１５ 参照画像指定方法制御部 １１６ 復号参照画像指定方法選択手段 １１７ 連続参照画像指定データ送信部 １１８ 特定参照画像指定データ送信部 １１９ 復号画像指定データ蓄積部 １２０ 誤り検出部 １２１ 送信側多重化部 １２２ 受信側多重化部 １２３ 送信側誤り検出部 １２４ 現参照画像蓄積部 １２５ 予想参照画像蓄積部 １２６ 蓄積変更手段 １２７ 蓄積決定部 １２８ 現参照画像蓄積判断部 １２９ 参照画像蓄積変更手段

フロントページの続き (56)参考文献 特開 平９−149421（ＪＰ，Ａ) 福永、松村、中井，受信確認を利用し た誤り耐性動画像符号化方式における適 応的モード切替方式，映像情報メディア 学会誌，日本，1997年10月20日，Ｖｏ ｌ．51，Ｎｏ．10，ｐ．1715−1721 (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 7/24 - 7/68 ＪＩＣＳＴファイル（ＪＯＩＳ)

Claims (3)

(57)【特許請求の範囲】
1. 【請求項１】 送信側はフレーム間差分符号化方式によ
   り入力画像を符号化して、該符号化データを受信側へ送
   信し、該受信側は、以前に復号した画像を参照画像とし
   て該送信側から送信された符号化データを復号する画像
   通信方法において、 前記受信側は、前記参照画像として予測参照画像と現参照画像のいずれ
   か一方を用い、 前記送信側に対し、前記予測参照画像の画像番号を示す
   復号画像指定データを送信し、該復号画像指定データに
   より指定される参照画像を用いて符号化を行うことを送
   信側に指示するか、または、１画像前に符号化した画像
   を参照画像として用いて符号化を行うことを送信側に指
   示するのかを所定の条件に基づいて判断する符号化参照
   画像判断過程と、 前記符号化参照画像判断過程で、送信側に対し、前記復
   号画像指定データにより指定される参照画像を用いて符
   号化を行うことを指示すると判断した場合は、前記復号
   画像指定データにより指定される参照画像を用いて符号
   化を行うことを送信側に指示する特定参照画像指定過程
   と、 前記符号化参照画像判断過程で、送信側に対し、１画像
   前に符号化した画像を参照画像として用いて符号化を行
   うことを指示すると判断した場合は、１画像前に符号化
   された画像を参照画像として用いて符号化を行うことを
   送信側に指示する連続参照画像指定過程と 、 前記送信側が符号化の際に使用した参照画像の画像番号
   を示す参照画像指定データを受信する参照画像指定デー
   タ受信過程と、 前記送信側にて符号化した画像の画像番号を示す画像指
   定データを受信する画像指定データ受信過程と、前記予測参照画像または前記現参照画像のうち、 前記受
   信した参照画像指定データにより指定される画像を参照
   画像として用いて、前記符号化データの復号を行う復号
   過程と、前記受信した参照画像指定データと前記復号画像指定デ
   ータが一致し、かつ、前記復号過程において前記符号化
   データが正しく復号された時に、予測参照画像 を現参照
   画像として蓄積することを判断する現参照画像蓄積判断
   過程と、 前記現参照画像蓄積判断過程で蓄積することが決定され
   た場合には、予測参照画像を現参照画像として蓄積し、
   前記現参照画像蓄積判断過程で蓄積することが決定され
   なかった場合には、予測参照画像を現参照画像として蓄
   積しない現参照画像蓄積過程と、 前記符号化参照画像判断過程で、送信側に対し、前記復
   号画像指定データにより指定される参照画像を用いて符
   号化を行うことを指示する場合には、前記受信した参照
   画像指定データと前記復号画像指定データが一致し、か
   つ、前記復号過程において前記符号化データが正しく復
   号された時に、復号画像を予測参照画像として蓄積する
   ことを判断し、または、前記符号化参照画像判断過程
   で、１画像前に符号化した画像を参照画像として用いて
   符号化を行うことを指示する場合には、前記復号過程に
   おいて前記符号化データが正しく復号された時に、復号
   画像を予測参照画像として蓄積することを判断する予測
   参照画像蓄積判断過程と、 前記予測参照画像蓄積判断過程で蓄積することが決定さ
   れた場合には、復号画像を前記予測参照画像として蓄積
   するとともに、該復号画像の画像番号を前記復号画像指
   定データとして蓄積し、前記予測参照画像蓄積判断過程
   で蓄積することが決定されなかった場合には、復号画像
   を前記予測参照画像として蓄積せず、また、該復号画像
   の画像番号も前記復号画像指定データとして蓄積しない
   予測参照画像蓄積過程と、 を有することを特徴とする画像通信方法。
2. 【請求項２】 送信側はフレーム間差分符号化方式によ
   り入力画像を符号化して、該符号化データを受信側へ送
   信し、該受信側は、以前に復号した画像を参照画像とし
   て該送信側から送信された符号化データを復号する画像
   通信システムにおいて、 前記受信側は、前記参照画像として用いるための予測参照画像と現参照
   画像を有し、 前記送信側に対し、前記予測参照画像の画像番号を示す
   復号画像指定データを送信し、該復号画像指定データに
   より指定される参照画像を用いて符号化を行うことを送
   信側に指示するか、または、１画像前に符号化した画像
   を参照画像とし て用いて符号化を行うことを送信側に指
   示するのかを所定の条件に基づいて判断する符号化参照
   画像判断部と、 前記符号化参照画像判断部で、送信側に対し、前記復号
   画像指定データにより指定される参照画像を用いて符号
   化を行うことを指示すると判断した場合は、前記復号画
   像指定データにより指定される参照画像を用いて符号化
   を行うことを送信側に指示する特定参照画像指定部と、 前記符号化参照画像判断部で、送信側に対し、１画像前
   に符号化した画像を参照画像として用いて符号化を行う
   ことを指示すると判断した場合は、１画像前に符号化さ
   れた画像を参照画像として用いて符号化を行うことを送
   信側に指示する連続参照画像指定部と 、 前記送信側が符号化の際に使用した参照画像の画像番号
   を示す参照画像指定データを受信する参照画像指定デー
   タ受信部と、 前記送信側にて符号化した画像の画像番号を示す画像指
   定データを受信する画像指定データ受信部と、前記予測参照画像または前記現参照画像のうち、 前記受
   信した参照画像指定データにより指定される画像を参照
   画像として用いて、前記符号化データの復号を行う復号
   過程と、前記受信した参照画像指定データと前記復号画像指定デ
   ータが一致し、かつ、前記復号過程において前記符号化
   データが正しく復号された時に、予測参照画像を現参照
   画像として蓄積することを判断する現参照画像蓄積判断
   部と、 前記現参照画像蓄積判断部で蓄積することが決定された
   場合には、予測参照画像を現参照画像として蓄積し、前
   記現参照画像蓄積判断部で蓄積することが決定されなか
   った場合には、予測参照画像を現参照画像として蓄積し
   ない現参照画像蓄積部と、 前記符号化参照画像判断部で、送信側に対し、前記復号
   画像指定データにより指定される参照画像を用いて符号
   化を行うことを指示する場合には、前記受信した参照画
   像指定データと前記復号画像指定データが一致し、か
   つ、前記復号過程において前記符号化データが正しく復
   号された時に、復号画像を予測参照画像として蓄積する
   ことを判断し、または、前記符号化参照画像判断部で、
   １画像前に 符号化した画像を参照画像として用いて符号
   化を行うことを指示する場合には、前記復号過程におい
   て前記符号化データが正しく復号された時に、復号画像
   を予測参照画像として蓄積することを判断する予測参照
   画像蓄積判断部と、 前記予測参照画像蓄積判断部で蓄積することが決定され
   た場合には、復号画像を前記予測参照画像として蓄積す
   るとともに、該復号画像の画像番号を前記復号画像指定
   データとして蓄積し、前記予測参照画像蓄積判断部で蓄
   積することが決定されなかった場合には、復号画像を前
   記予測参照画像として蓄積せず、また、該復号画像の画
   像番号も前記復号画像指定データとして蓄積しない予測
   参照画像蓄積部と、 を有することを特徴とする画像通信システム。
3. 【請求項３】 送信側から送信された符号化データを受
   信し、該符号化データを、以前に復号した画像を参照画
   像として用いて復号する画像通信プログラムを記録した
   コンピュータ読み取り可能な記録媒体であって、前記参照画像として予測参照画像と現参照画像のいずれ
   か一方を用い、 前記送信側に対し、前記予測参照画像の画像番号を示す
   復号画像指定データを送信し、該復号画像指定データに
   より指定される参照画像を用いて符号化を行うことを送
   信側に指示するか、または、１画像前に符号化した画像
   を参照画像として用いて符号化を行うことを送信側に指
   示するのかを所定の条件に基づいて判断する符号化参照
   画像判断ステップと、 前記符号化参照画像判断ステップで、送信側に対し、前
   記復号画像指定データにより指定される参照画像を用い
   て符号化を行うことを指示すると判断した場合は、前記
   復号画像指定データにより指定される参照画像を用いて
   符号化を行うことを送信側に指示する特定参照画像指定
   ステップと、 前記符号化参照画像判断ステップで、送信側に対し、１
   画像前に符号化した画像を参照画像として用いて符号化
   を行うことを指示すると判断した場合は、１画像前に符
   号化された画像を参照画像として用いて符号化を行うこ
   とを送信側に指示する連続参照画像指定ステップと 、 前記送信側が符号化の際に使用した参照画像の画像番号
   を示す参照画像指定データを受信する参照画像指定デー
   タ受信ステップと、 前記送信側にて符号化した画像の画像番号を示す画像指
   定データを受信する画像指定データ受信ステップと、前記予測参照画像または前記現参照画像のうち、 前記受
   信した参照画像指定データにより指定される画像を参照
   画像として用いて、前記符号化データの復号を行う復号
   ステップと、前記受信した参照画像指定データと前記復号画像指定デ
   ータが一致し、かつ、前記復号過程において前記符号化
   データが正しく復号された時に、予測参照画像を現参照
   画像として蓄積することを判断する現参照画像蓄積判断
   ステップと、 前記現参照画像蓄積判断ステップで蓄積することが決定
   された場合には、予測参照画像を現参照画像として蓄積
   し、前記現参照画像蓄積判断ステップで蓄積することが
   決定されなかった場合には、予測参照画像を現参照画像
   として蓄積しない現参照画像蓄積ステップと、 前記符号化参照画像判断ステップで、送信側に対し、前
   記復号画像指定データにより指定される参照画像を用い
   て符号化を行うことを指示する場合には、前記受信した
   参照画像指定データと前記復号画像指定データが一致
   し、かつ、前記復号過程において前記符号化データが正
   しく復号された時に、復号画像を予測参照画像として蓄
   積することを判断し、または、前記符号化参照画像判断
   ステップで、１画像前に符号化した画像を参照画像とし
   て用いて符号化を行うことを指示する場合には、前記復
   号過程において前記符号化データが正しく復号された時
   に、復号画像を予測参照画像として蓄積することを判断
   する予測参照画像蓄積判断ステップと、 前記予測参照画像蓄積判断ステップで蓄積することが決
   定された場合には、復号画像を前記予測参照画像として
   蓄積するとともに、該復号画像の画像番号を前記復号画
   像指定データとして蓄積し、前記予測参照画像蓄積判断
   ステップで蓄積することが決定されなかった場合には、
   復号画像を前記予測参照画像として蓄積せず、該復号画
   像の画像番号も前記復号画像指定データとして蓄積しな
   い予測参照画像蓄積ステップと、 をコンピュータに実行させる画像通信プログラムを記録
   したコンピュータ読み取り可能な記録媒体。