JPH08195953A

JPH08195953A - 画像通信方法及び装置

Info

Publication number: JPH08195953A
Application number: JP519395A
Authority: JP
Inventors: Akifumi Arayashiki; 明文荒屋敷; Shinichi Hirata; 晋一平田
Original assignee: Kokusai Electric Corp
Current assignee: Kokusai Electric Corp
Priority date: 1995-01-17
Filing date: 1995-01-17
Publication date: 1996-07-30

Abstract

(57)【要約】【目的】画像の通信に際して、伝送エラーに強い画像
通信をはかりたい。【構成】画像を例えば４×４のブロックに分割する。
この各ブロックをその分割順に、符号化器１でブロック
単位で符号化し、符号化器２でブロック単位で伝送誤り
検出符号化（例えばＣＲＣチェックコード）し付加し、
伝送する。受信側では、復号化器６で伝送誤り検出符号
を復号して伝送誤りがあるか否かをブロック単位でチェ
ックし、正常であれば復号化器７でブロック単位で復号
する。伝送エラー検出であれば、そのブロックについて
代替フレーム又は特定パターンに置き換えて復号化器７
に送る。復号化器７では、この伝送エラー検出のブロッ
クについて、処理（正常ブロックからのコピーや正常ブ
ロックからの補間等）を行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像通信方法及び装置
に関する。

【０００２】

【従来の技術】図２には、従来の画像通信装置を示す。
送信装置１０は、情報源符号化器１、伝送誤り訂正符号
化器２、変調器３より成り、受信装置２０は、復調器
５、伝送誤り訂正復号化器６、情報源復号化器７より成
る。送信装置１０と受信装置２０とを結ぶものが伝送路
４である。入力画像データは、符号化器１で符号化さ
れ、誤り訂正符号化器２で伝送誤り訂正符号化され、変
調器３で変換され、伝送路４へと伝送される。復調器５
では、伝送路４から伝わるデータ（信号）を復調し、誤
り訂正復号化器６で伝送誤り訂正復号化され、復号化器
７で情報源（入力画像データ）が復号化される。

【０００３】伝送誤り訂正符号化器２は、誤り訂正符号
化（ＦＥＣ：forward error correction）を行うもので
あり、この目的は、伝送路４で受ける符号誤り（伝送符
号誤り）の影響を軽減するためである。誤り訂正復号化
器６は、誤り訂正符号化されたものを復号化するもので
あり、これによって伝送符号誤りがあるか否かがチェッ
クされる。誤りが検出されると、そのデータは廃棄され
欠落データとして扱われる。そして、情報源復号化器７
では、この欠落データは無視したままで、情報源復号化
を行う。

【０００４】図２で用いる情報源符号化器１の符号化法
を図３に開示する。この符号化法は、ＪＰＥＧ（Joint
Photographic Expers Group）と呼ばれるもので、原画
像を所定の大きさ（例えばｎ×ｍ）のブロック（図３で
は７×５のブロック数）に分割し、このブロックを基本
単位として符号化を行うものである。この符号化の単位
をＭＣＵ（Minimum Code Unit）と呼ぶ。

【０００５】通常、ＪＰＥＧ符号化時の圧縮条件は、マ
ーカーコードと呼ばれ、圧縮率を変更することがしばし
ば行われるので、画素データに付加して伝送される。ま
た装置によって変わる可能性の多い画素数、間引き率、
量子化テーブル等をいくつかの段階に分けて数バイトで
表し、画素データに先だって伝送される。図３では、ａ
₁→ａ₂…→ａ₇→ｂ₁→ｂ₂→…→ｂ₆→ｂ₇のブロック順
に符号化データを送り出す例及びその先頭にマーカーコ
ードを付加した例を示してある。

【０００６】

【発明が解決しようとする課題】ＪＰＥＧ方式による符
号化法によれば、原画像をブロックに分割し、それを単
位として情報源符号化を行うことになるが、その符号化
データの中で１ビットの誤りがあってもそのブロック全
体に誤りの影響が及ぶ。また誤りのあった位置によって
は情報源復号できない場合もある。このような誤りに対
する対策法には以下のやり方がある。（１）、誤りのあったデータ又は全ての画像を再送す
る。（２）、誤り訂正符号を付加して、受信側で誤ったデー
タを訂正する（これは図２の例そのものに該当）。しか
し、（１）では再送手順及び再送時間による通信時間の
増加が避けられない、（２）では誤りが残留する可能性
があるために、結局誤りの影響や復号不可の可能性が避
けられない。

【０００７】本発明の目的は、伝送路等に誤りがあって
も、最後まで復号可能なデータの伝送を行う画像通信方
法及び装置を提供するものである。更に本発明の目的
は、伝送路等に誤りがあっても、原画像に近い画像を受
信側で得ることを可能にする画像通信方法及び装置を提
供するものである。

【０００８】

【課題を解決するための手段】本発明は、情報源画像を
ブロック分割し、このブロック画像単位に符号化・伝送
化・伝送誤り処理・情報源復号化を行うようにした。

【０００９】更に本発明は、情報源画像をブロック分割
し、このブロック画像単位に送信し、受信させて情報源
画像の通信を行う画像通信方法において、ブロック画像
単位に、情報源符号化・伝送誤り検出符号化・伝送化・
伝送誤り検出復号化・情報源復号化を行うものとした。

【００１０】更に本発明は、情報源画像をブロック分割
し、このブロック画像単位に送信し、受信させて情報源
画像の通信を行う画像通信方法において、ブロック画像
単位に、情報源符号化・伝送誤り検出符号化・伝送化・
伝送誤り検出復号化・情報源復号化・誤り検出復号化に
よる伝送誤り検出時のその誤りブロックの処理・を行う
ものとした。

【００１１】更に本発明は、画像通信方法において、情
報源画像のブロック分割は、奇数のライン番号より成る
奇数ライン画像と、偶数のライン番号より成る偶数ライ
ン画像と、の２分割とした。

【００１２】更に本発明は、情報源画像を奇数のライン
番号より成る奇数ライン画像と、偶数のライン番号より
成る偶数ライン画像とに分割し、この奇数ライン画像と
偶数ライン画像とを、交互に独立して送信し、受信させ
るようにした画像通信方法において、各ライン画像の送
信にあっては、それぞれのライン画像をブロックに細分
割し、この細分割したブロック単位に、情報源符号化・
伝送誤り検出符号化・伝送化・伝送誤り検出復号化・情
報源復号化・誤り検出復号化による伝送誤り検出時のそ
の誤りブロックの処理・を行うものとした。

【００１３】更に本発明は、画像通信方法において、そ
の誤りブロックの処理とは、伝送誤り検出があったブロ
ックに対して、ある定めた画一的な画素データを埋め込
む処理とした。

【００１４】更に本発明は、画像通信方法において、そ
の誤りブロックの処理とは、伝送誤り検出があったブロ
ックに対して、他方のライン画像のブロックの画素デー
タのコピーを埋め込む処理とした。

【００１５】更に本発明は、画像通信方法において、そ
の誤りブロックの処理とは、伝送誤り検出があったブロ
ックに対応する他ライン画像のブロックの、画素データ
から補間を行い、この補間で得た画素データを、その伝
送誤りのあったブロックに画素データとして埋め込む処
理とした。

【００１６】更に本発明は、画像通信方法において、上
記補間対象の画素位置は左から右、上から下へのラスタ
スキャン方式によって走査されるものとし、且つこの画
素位置の補間には周囲の他方のライン画像の画素位置の
画素データ（又は、この画素データと自己のライン画像
の既補間済みの画素データ）を用いて補間するものとし
た。

【００１７】更に本発明は、情報源画像をｍ×ｎの小ブ
ロックに分割する第１の手段と、小ブロック毎に情報源
符号化を行う第２の手段と、この符号化データに伝送誤
り検出符号を付加する第３の手段と、このブロック対応
の情報源符号化データ及び伝送誤り検出符号化データを
変調する第４の手段と、変調後のブロック対応の信号を
フレーム化して伝送する第５の手段と、伝送されてきた
信号をフレーム単位に復調する第６の手段と、復調した
信号から伝送誤り検出復号化を行う第７の手段と、第７
の手段での伝送誤り検出時にそのフレームに代わる代替
ユニットに置換する第８の手段と、伝送誤り検出のない
フレーム及び伝送誤り検出時の代替ユニットを取り込
み、伝送誤り検出のないフレームからは情報源復号化を
行い、代替ユニットからはその誤りブロックの処理を行
う第９の手段と、この情報源復号化及び伝送誤りブロッ
クの処理結果とから各ブロックを組み立てた情報源画像
を得る第１０の手段と、より成る。

【００１８】更に本発明は、情報源画像を奇数ライン画
像と偶数ライン画像とに分割し、この奇数ライン画像と
偶数ライン画像とを、交互に独立して送信し、受信させ
るようにした画像通信装置において、各ライン画像を
ｍ′×ｎ′の小ブロックに細分割する第１の手段と、小
ブロック毎に情報源符号化を行う第２の手段と、この符
号化データに伝送誤り検出符号を付加する第３の手段
と、このブロック対応の情報源符号化データ及び伝送誤
り検出符号化データを変調する第４の手段と、変調後の
ブロック対応の信号をフレーム化して伝送する第５の手
段と、伝送されてきた信号をフレーム単位に復調する第
６の手段と、復調した信号から伝送誤り検出復号化を行
う第７の手段と、伝送誤り検出時にそのフレームに代わ
る代替ユニットに置換する第８の手段と、伝送誤り検出
のないフレーム及び伝送誤り検出時の代替ユニットを取
り込み、伝送誤り検出のないフレームからは情報源復号
化を行い、代替ユニットからはその誤りブロックの処理
を行う第９の手段と、この情報源復号化及び誤りブロッ
クの処理結果から得られるブロックを組み立てて出力情
報源画像を得る第１０の手段と、より成る。

【００１９】更に本発明は、上記第９の手段における代
替ユニットの代わりに、特定ビットパターン又はフレー
ム番号を付与することとした。

【００２０】更に本発明は、上記第９の手段における伝
送誤りブロックの処理とは、対応する他方のライン画像
の画素データをそのまま誤りブロックにコピーすること
とした。

【００２１】更に本発明は、上記第９の手段における伝
送誤りブロックの処理とは、予め画一的に定めた画素デ
ータをその誤りブロックの画素データとして埋め込むこ
ととした。

【００２２】更に本発明は、上記第９の手段における伝
送誤りブロックの処理とは、対応する他方のライン画像
の画素データからの補間データをその誤りブロックの画
素データとして埋め込むこととした。

【００２３】

【作用】本発明によれば、ブロック単位に、符号化・復
号化・伝送誤り処理・情報源復号化を行うため、情報源
画像の通信に際して、効率的な通信が可能となる。更に
本発明によれば、情報源画像を偶奇の２つのライン画像
に分割して通信を行うことにしたため、更にこの２つの
ライン画像を更に小ブロックに細分化して送っているた
め、効率のよい画像通信が可能となる。更に、この小ブ
ロック化のもとで、伝送エラーの発生した小ブロックに
対しては、正常な小ブロックの内容をそのコピーした
り、補間して求めて埋め込むようにしたりするため、画
像の復号化を効率的且つ迅速に行うことができ、画像の
広義の再生も容易となる。

【００２４】

【実施例】図１は、本発明の画像通信装置の実施例図で
ある。本実施例では、ＪＰＥＧ方式による符号化を情報
符号化器１が行う。図では、ブロック分けを４×４（１
６通り）としている。ａ₁→ａ₂→ａ₃→ａ₄→ｂ₁→ｂ₂→
…の順に符号化し、この符号化順に得た符号化データを
出力する。伝送誤り訂正符号化器２は符号化器１で出力
するブロック単位の符号化データに伝送誤り訂正符号化
（例えばＣＲＣコード化）処理を行い、ブロック単位の
伝送誤り訂正符号化データを得る。このブロック単位の
情報源符号化データ及びそのブロック対応の誤り訂正符
号化データを１伝送フレームとして、符号化器２は出力
する。変調器３はこれを変調した上で伝送フレーム単位
に伝送路上に送出する。図でＮ＋１、Ｎ、Ｎ−１はこの
伝送フレーム番号を示す。伝送フレームは例えばＨＤＬ
Ｃの如きフレームを使う。

【００２５】受信側では、復調器４で伝送路上を伝わっ
てくる伝送フレーム単位のデータを復調し、伝送誤り訂
正復号化器６に送る。この復号化器６は伝送誤り符号化
データ、例えばＣＲＣチェックを復号し、１伝送フレー
ム毎に伝送誤りがあるか否かチェックする。例えばフレ
ーム番号Ｎのデータが伝送誤りを発生していたとし、フ
レーム番号Ｎ−１、及びＮ＋１は伝送誤りがなかったも
のとする。このチェックによりフレーム番号Ｎ−１、Ｎ
＋１は正常、フレーム番号Ｎが異常と判定される。そし
て、フレーム番号Ｎについてはそのデータに代わって代
替データ（これを代替ユニットと称す）を代替させ、フ
レーム番号Ｎ−１→Ｎ→Ｎ＋１の順に出力する。ここ
で、代替ユニットとは、特定のビットパターン、また予
め用意した復号可能且つ適当なデータである。

【００２６】情報源復号化器７は、誤り訂正符号化器６
からのフレームを受け取り、復号化する。先のフレーム
番号Ｎのブロックをａ₃とした場合、ハッチングで示し
た部分が代替ユニットによる復号化後のデータである。
代替ユニットを復号化器７でどう扱うか（即ち伝送誤り
ブロックの処理の内容をどうするか）が問題であるが、
（１）、代替ユニットを無視するやり方、（２）、代替
ユニットの復号化結果をそのまま利用するやり方、
（３）、代替ユニットの復号化結果は無視すると共に、
代わりに正常なグループのデータを利用してこのユニッ
トのデータを作成するやり方、等の方法がある。（１）
の方法は、フレーム番号Ｎのブロックを無視して、例え
ばオール０のリセット状態に代替させるとかの方法であ
る。（２）は、代替ユニットのデータに意味を持たせて
おく如き例に適用（例えば異常ユニットであることを意
味するデータ構成従って、この画像表示に際しては異常
を示す形態でそのブロックに表示される）できる。
（３）は、その異常ユニットに近い位置のブロックの中
で正常なブロックのデータを持ってくるやり方、その異
常ユニットに近い位置のブロックのデータを用いて画素
毎に補間を行ってその補間後のデータを埋め込むやり
方、がある。尚、（１）〜（３）の処理は復号化器７の
内部で行うことも、外部に別に設けた処理手段で行うこ
ともある。

【００２７】本実施例によれば、ＪＰＥＧによるブロッ
ク毎の符号化を行ったもとで、そのブロック毎の処理
（即ちブロック毎に伝送誤り訂正符号化及びブロック毎
に定まるフレーム単位の送出、並びにこのフレーム単位
に伝送誤り訂正復号化、更に伝送エラー検出時に代替ユ
ニットをそのユニットに代わって置換するとのやり方）
をとったが故に、伝送エラーが発生した場合にも原画像
の再送が不要となり、更に伝送エラーが途中で生じても
中断することなく最後のブロックまで復号化されること
になった。更に代替ユニットを伝送エラー発生のユニッ
トに代わって置換するため、代替ユニット自体の復号化
後の処理においても、前記（１）〜（３）の如きやり方
でデータの代替が可能になった。

【００２８】図４は、図１の送信処理の手順、又は図１
をコンピュータシステムで実現した場合でのフローチャ
ートを示す図である。図５はその受信処理を示す図であ
る。図４において、送信処理が開始されると、まず画像
ブロックを読出し（ステップＳ₁）、次に情報源符号化
を行い（ステップＳ₂）、更に伝送誤り検出符号化を行
い（ステップＳ₃）、変調化した後で送出する（ステッ
プＳ₄）。ステップＳ₁〜Ｓ₄を全ブロックについて行う
（Ｓ₅）。

【００２９】図５の受信処理では、受信処理が開始され
ると、復調を行った後で先ずフレーム受信したか否かチ
ェックされる（ステップＳ₆）。フレーム単位の受信が
なされると、そのフレームに伝送エラーが発生したか否
かを伝送誤り訂正復号化後に判定する（ステップ
Ｓ₇）。正常であれば情報源復号化を行い（ステップ
Ｓ₉）、誤りがあれば代替ユニットに置換し（ステップ
Ｓ₈）、その後で情報源復号化する（ステップＳ₉）。以
上のステップＳ₆〜Ｓ₉の処理を、送信されてくる原画像
の全フレーム（全ブロック）について行う（ステップＳ
₁₀）。更に、代替ユニットに代替したブロックについ
て、前記（１）〜（３）のいずれかの処理を行うと共
に、例えば４×４のマトリックスにブロックを並べ換え
る原画像の再成（構成）がなされる（ステップＳ₁₁）。

【００３０】図６は図５に代わる他の実施例による処理
手順又はフローチャートである。本実施例は、代替ユニ
ットとして特定ビットパターンを充当した例である。即
ち、受信したフレームが正常でない時に（ステップ
Ｓ₇）、このフレームを特定ビットパターンに置換する
（ステップＳ₁₂）。以上の処理（Ｓ₆、Ｓ₇、Ｓ₁₂）を全
フレームについて行う（ステップＳ₁₃）。

【００３１】この全フレームの処理（Ｓ₆、Ｓ₇、Ｓ₁₂）
終了後、１符号ユニットを読み出し（ステップＳ₁₄）、
それがステップＳ₁₂で付加された特定ビットパターンか
否かをチェックする（ステップＳ₁₅）。特定ビットパタ
ーンでなければ、情報源の１符号ユニットである故、そ
れの復号化を行う（ステップＳ₁₆）。特定ビットパター
ンであれば、誤りブロックの画像の処理（前述の
（１）、（２）、（３）の中のどれか）を行う（ステッ
プＳ₁₇）。そして、これを全ユニットについて実施し終
了する（ステップＳ₁₈）。

【００３２】次に本発明のインターリーブ画像通信の実
施例を説明する。上述の実施例は、原画像をブロックに
区分した例であったが、インターリーブ画像通信では、
原画像を奇数ライン画像と偶数ライン画像との２つに区
分する。ここで、ラインとは、原画像の画素サイズ数を
（縦画素数×横画素数＝Ｍ×Ｎ）とした場合、Ｍ個の縦
方向のラインを、奇数ライン（ライン１、３、５…）と
偶数ライン（２、４、６…）とに分け、奇数ラインより
成る画像を奇数ライン画像、偶数ラインより成る画像を
偶数ライン画像としたものである。各１ラインは、Ｎ個
の画素より成る。

【００３３】かかるインターリーブ画像通信装置の実施
例を図７、その処理手順を図８に示す。図７で、送信装
置１０は、分割器９、情報源符号化器１、誤り訂正符号
化器２、変調器３より成り、受信装置２０１は、復調器
５、誤り訂正復号化器６、情報源復号化器７、補正器
８、構成器１１より成る。分割器９、補正器８、構成器
１１が新しく付加したものである。

【００３４】図７の分割器９は、原画像を奇数ライン画
像と偶数ライン画像とに２分するものである。この２分
化は、原画像のアクセスの仕方で行う。即ち、原画像を
ラスタスキャンをし、奇数ラインの画像は奇数ライン画
像とし、偶数ラインの画像は偶数ラインの画像とする。
情報源符号化器２は、この偶奇のライン画像別々に符号
化を行う。誤り訂正符号化器２は偶奇のライン画像別々
に、情報源符号化のデータに対して伝送誤り訂正の符号
化を行う。変調器３は変調を行い、伝送路４に送出す
る。

【００３５】受信装置２０では、先ず復調器５で復調を
行い、伝送誤り訂正復号化器６で伝送誤り訂正復号化を
行い、情報源復号化器７で情報源の復号化を行う。補正
器８は、前記（１）〜（３）のうちのいずれかの画像の
処理を誤り訂正検出のフレームに対して行う。ここでの
（１）〜（３）の処理対象は、先の実施例では各ブロッ
クであったが本実施例では奇数ライン画像、偶数ライン
画像との２つである。構成器１１は、この奇数ライン画
像と偶数ライン画像とを合成して原画像対応の画像を構
成する。

【００３６】図８は、図７による処理を手順化して示し
たものであり、奇数ライン画像と偶数ライン画像とにそ
れぞれ分けて処理されている様子が示されている。尚、
受信側での最後の手順での「伸長」とは、偶奇のライン
画像を合わせて１つの画像にしたことを意味し、実際上
は「２倍化」に相当する。

【００３７】この図７、図８の実施例は、偶奇のライン
画像それぞれ独立に伝送誤りが発生しているか否かをチ
ェックするものであり、補正器８はそれに見合った処理
を行う。先の（１）〜（３）の処理のいずれをも採用可
能である。即ち、（１）の方法によれば、その誤り発生
のライン画像は無視され、誤り発生のないライン画像の
みが得られる。１つの画像から分割された偶奇いずれの
ライン画像にも誤り発生があればその画像はすべて無視
される。（２）のほうほうも偶奇それぞれに独立に行わ
れる。（３）の方法も、誤り発生のライン画像が誤り発
生のないライン画像によって新しいライン画像が作成さ
れる。１つの画像から分割された偶奇のライン画像いず
れも伝送誤りが発生すれば、（２）又は（３）の処理は
行われず、（１）の方式と同様の結果となる。

【００３８】図７、図８は、原画像を２分化した例であ
ったが、この２分化と併せて、偶奇のライン画像それぞ
れを、更に小区分のブロックに分けてもよい。これによ
り、図７、図８では偶奇のライン画像それぞれに伝送誤
りがあれば、その該当するライン画像そのものが無視さ
れたり、他方の正常なライン画像を利用して作成された
りするが、本実施例ではライン画像が更に小区分のブロ
ックに細分化され、そのブロック単位に送信、受信の処
理が行われるため、１つのブロックに伝送誤りがあって
も、そのブロックの属するライン画像そのものが無視さ
れたり作成されたりすることはなくなる。

【００３９】かかるライン画像での小ブロック化の送
信、受信の処理例を図９に示す。原画像が自動車の例で
あり、これが偶奇の２つのライン画像に分割され、所定
の符号化・及び変調後に伝送される。受信側では、例え
ば奇数のライン画像のブロック番号ａで伝送誤りが発見
されたとする。そして情報源の復号化がなされるが、こ
の時に、（１）〜（３）の方法の中で（１）又は（２）
の方法をとった場合（図９の例）、奇数のライン画像の
該当エラーブロックは黒くつぶされた表示となり、偶数
のライン画像の対応するブロックの部分は、正常状態下
での表示となる。尚、エラーブロックを黒くしたのは、
いわゆるオールゼロの値とし、これが黒を意味する階調
としたためである。

【００４０】図１０は、（３）の方法を採用した例であ
る。これは、伝送エラーの発生した奇数のライン画像の
該当ブロックに対して、正常な、偶数のライン画像の、
対応するブロックの内容をコピーすることにしたもので
ある。図１１にはその説明図を示す。奇数のライン画像
の伝送エラー発生のブロックの一部がライン番号（２ｋ
＋１）、（２ｋ＋３）、（２ｋ＋５）とし、これに対し
て、奇数のライン画像の対応ブロックのライン番号（＋
１した隣りの番号）（２ｋ＋２）、（２ｋ＋４）、（２
ｋ＋６）の画素データをそのままコピーした例を示して
ある。この図１２の例を数式で示すと以下となる。

【数１】逆に奇数ライン画像が正常受信、偶数ライン画像が誤り
検出であれば

【数２】となる。勿論、−１の前のラインの画素データを代替さ
せるやり方もありうる。

【００４１】以上の図１０、図１１の実施例によれば、
画像を構成する前に、コピーするだけでよいとの利点が
ある。尚、対応する奇数／偶数のライン画像の、双方に
伝送誤りがあった場合は、（数１）、（数２）の如きコ
ピーは使えない。この場合は、周囲の正常なブロックの
画素データを利用して補間を行う。即ち、奇数ライン画
像に対しては、その誤りブロックの周囲の正常ブロック
の画素データを利用、偶数ライン画像に対してはその誤
りブロックの周囲の正常ブロックの画素データを利用し
て、補間により求める。

【００４２】図１２は（３）の方法の別例を示す。近接
４点補間法を採用したものであり、奇数ライン画像ｉの
画像のブロックが伝送誤り発生の場合（偶数ラインｉの
画像でも以下と同じようにすることは当然である）、ｉ
−１、ｉ＋１の上下の２つの偶数ライン画素を利用す
る。この近接４点補間法の計算式は（数３）となる。

【数３】ここで、（数３）のサフィックスは画素位置を示す。
（ｉ、ｊ）が補間対象となる画素位置、（ｉ−１、ｊ）
が１ライン手前で同一列位置、（ｉ、ｊ−１）が同一ラ
イン上で一列手前の画素位置、（ｉ、ｊ＋１）が同一ラ
イン上で一列後の画素位置、（ｉ＋１、ｊ）が１ライン
後で同一列位置を示す。Ｗ（１）〜Ｗ（４）は、各画素
位置の画素データに対する重みを示す。

【００４３】かかる４点補間法の位置関係とＷ（１）〜
Ｗ（４）の設定例を図１２に示す。図１２（イ）がＷ
（１）〜Ｗ（４）と中央画素Ｃ_i、_jとの関係を示す。但
し、ラインｉの全列の画素位置が補間対象となるため、
本来、ラインｉの一列手前、一列後の画素データは不明
である。従って、Ｗ（２）＝Ｗ（３）＝０とするやり方
をとるとよい。図１２（ロ）、（ハ）は他の重み設定例
を示す。図１２（ロ）では、ライン上を左から右に順
（正確には、左から右、上から下へのラスタスキャン）
に補間してゆく場合に使用する例であり、左側が１個ず
つ補間で確定するため、同一ライン上の左側の一列手前
の画素データは、その直前に確定している。そこで、こ
の左側の一列手前の画素位置の重みＷ（２）を、重みＷ
（２）＝１にし、逆に一列右側の画素位置の重みＷ
（３）を、未だ確定していない故に重みＷ（３）＝０に
設定する。実質３点補間法となる。図１２（ハ）は、逆
に右から左へライン上を補間してゆく時に使用する例で
ある。

【００４４】図１３には、図１２（ロ）に対応する補間
例、図１４には図１２（ハ）に対応する補間例を示して
いる。共に、矢印がその補間の方向を示す。次に８点補
間法の設定例を説明する。８点とは、補間対象の画素位
置（ｉ、ｊ）を中心にして３×３の画素サイズを切り出
し、この（ｉ、ｊ）を除く周囲８点の画素データでＣ
_i、jを補間するものである。図１５が補間位置とその周
囲画素位置、及び重み設定例を示す。図１５（イ）がＣ
_i、jに対する周囲８点の画素に重みＷ（１）〜Ｗ（８）
付け例である。Ｗ（１）〜Ｗ（８）＝１とすれば、すべ
て均等な重み付け例となる。また、同一行の前後の列の
画素が未定との観点であれば、Ｗ（４）＝Ｗ（５）＝０
にする。

【００４５】図１５（ロ）は、左側から右側にライン上
の画素を補間してゆく場合の重み例であって、Ｗ（５）
＝０としている。更に、画素位置（ｉ、ｊ）に対して、
ななめ方向の画素位置に比べて左及び上下方向の画素位
置は近い位置であることから、距離の大小を加味した重
み付けを行っている。即ち、ななめ方向の重みＷ（１）
＝Ｗ（３）＝Ｗ（６）＝Ｗ（８）＝１、Ｗ（２）＝Ｗ
（４）＝Ｗ（７）＝２、Ｗ（５）＝０としている。図１
５（ハ）は逆に右側から左側へライン上の画素を補間し
てゆく例である。距離の大小の加味による重み付けの仕
方は種々あるが、基本的な考え方は、距離に反比例、即
ち、遠くの画素位置の重みは小さく、近くの画素位置の
重みは大きくする。図１５（ロ）、（ハ）の例でみれば
ななめ方向は、左及び上下方向に比べて距離が２倍にな
っていることから、重みは、斜め方向が、左の及び上下
方向に比べて半分の値になっている。

【００４６】図１６、図１７は図１５（ロ）、（ハ）に
それぞれ対応した例であり、矢印方向が補間の確定する
補間を示している。図１６が左から右、図１７が右から
左への例である。

【００４７】図１８は図６に対比したものであり、特定
ビットパターンであれば（ステップＳ₁₅）、コピー可能
か否かをチェック（ステップＳ₁₉）する。コピー可能で
あれば対応する他方のライン画像の該当ブロック（ユニ
ット）の画素データをコピーする（ステップＳ₂₀）。コ
ピー不可能であれば、別に用意しておいた代替ユニット
に置換する。この代替ユニットとは、オールゼロとか、
中間階調値とかの値である。またコピー不可能とは、偶
奇いずれものライン画像の、該当ブロック相互が誤りで
ある場合を云う。

【００４８】図１９は、図１８に比べて特定ビットパタ
ーン置換をせずに、代替ユニット置換（ステップＳ₂₂）
を行い、エラーナンバー記憶（ステップＳ₂₃）を行うも
のである。代替ユニット置換とは、そのエラーブロック
の代わりに代替ユニットを挿入するものであり、この代
替ユニットとは画像データを含まない単なるフレームを
示す情報である。そして、ステップＳ₂₃ではその代替ユ
ニットが何番目のフレーム番号であるかを確認しラッチ
する。尚、正常受信したフレームに対してもフレーム番
号が受信順に付加される。これはステップＳ₇で行う。
そして、全フレーム受信終了（Ｓ₁₃）、１符号ユニット
読み出し（ステップＳ₁₄）、正常受信したフレーム番号
についてのみ情報源復号化（Ｓ₁₆）を行い、その終了後
（ステップＳ₁₈）、補間処理を行う。補間処理は、先に
ステップＳ₂₃でラッチしたエラーフレーム番号に対して
行う。

【００４９】図２０が補間処理手順を示す。先ず、画像
ブロック番号（フレーム番号）を更新してゆき、エラー
発生の番号であれば（ステップＳ₂₅、Ｓ₂₆）、ステップ
Ｓ₂₈で補間可能か否かチェックを行い、可能であれば補
間処理をする（Ｓ₂₉）。補間不可能であれば、ステップ
Ｓ₂₇に移り、全ブロック処理が終了したか否かをチェッ
クする。ここで、補間不可能とは、偶奇のライン画像
の、相互に該当するブロック同士がエラー発生している
場合である。この場合は補間は行わない。

【００５０】他の実施例を以下簡単に述べる。（１）、インターリーブは、偶奇による２つとしたが３
個以上の分割例も存在する。分割の仕方も種々ある。（２）、分割の仕方は、行方向のものであったが、列方
向の分割の仕方も採用できる。（３）、補間を４点又は８点の例としたが、それ以外の
例もある。（４）、誤り検出は、ＣＲＣチェックコードとしたが、
パリティチェックコード等の他の方法もある。また誤り
検出の他には、誤り訂正符号化方式（ハミング符号化や
サイクリックコード等）もありうる。

【００５１】

【発明の効果】本発明によれば、再送等による伝送時間
の増大や、誤り検出符号化等の複雑な処理による処理時
間の増加、又は伝送データ量の増加を伴うこくなく、原
画像に近い画像を伝送・再生することが可能である。ま
た補間等に関わる処理は情報源復号化の後で行うので、
従来の情報源符号復号化の技術をそのまま利用でき、シ
ステム的に安価で効果的な画像通信装置が実現可能であ
る。

【図面の簡単な説明】

【図１】本発明の画像通信装置の実施例図である。

【図２】従来の画像通信装置を示す図である。

【図３】従来例のＪＰＥＧ方式の概略図である。

【図４】本発明の画像送信方法の処理手順を示す図であ
る。

【図５】本発明の画像受信方法の処理手順を示す図であ
る。

【図６】本発明の画像受信方法の他の処理手順を示す図
である。

【図７】本発明のインターリーブ画像通信を行う画像通
信装置の実施例図である。

【図８】本発明のインターリーブ画像の送受信の処理手
順を示す図である。

【図９】本発明のインターリーブ画像の伝送誤り発生時
の処理手順例を示す図である。

【図１０】本発明のインターリーブ画像の伝送誤り発生
時の他の処理手順例を示す図である。

【図１１】図１の処理例の説明図である。

【図１２】本発明のインターリーブ画像の伝送誤り発生
時の重み係数の設定例を示す図である。

【図１３】図１２（ロ）の重み係数の設定例に伴う、誤
り発生時の処理の説明図である。

【図１４】図１２（ハ）の重み係数の設定例に伴う、誤
り発生時の処理の説明図である。

【図１５】本発明のインターリーブ画像の伝送誤り発生
時の重み係数の他の設定例を示す図である。

【図１６】図１５（ロ）の重み係数の設定例に伴う、誤
り発生時の処理の説明図である。

【図１７】図１５（ハ）の重み係数の設定例に伴う、誤
り発生時の処理の説明図である。

【図１８】本発明の受信装置の手順を示す図である。

【図１９】本発明の他の受信処理の手順を示す図であ
る。

【図２０】図１９の処理における画像補間処理手順を示
す図である。

【符号の説明】

１情報源符号化器２誤り検出符号化器３変調器４伝送路５復調器６誤り検出復号化器７情報源復号化器８補正器９分割器１０送信装置１１構成器２０受信装置

Claims

【特許請求の範囲】

【請求項１】情報源画像をブロック分割し、このブロ
ック画像単位に符号化・伝送化・伝送誤り処理・情報源
復号化を行うようにした画像通信方法。
【請求項２】情報源画像をブロック分割し、このブロ
ック画像単位に送信し、受信させて情報源画像の通信を
行う画像通信方法において、ブロック画像単位に、情報
源符号化・伝送誤り検出符号化・伝送化・伝送誤り検出
復号化・情報源復号化を行うものとした画像通信方法。
【請求項３】情報源画像をブロック分割し、このブロ
ック画像単位に送信し、受信させて情報源画像の通信を
行う画像通信方法において、ブロック画像単位に、情報
源符号化・伝送誤り検出符号化・伝送化・伝送誤り検出
復号化・情報源復号化・誤り検出復号化による伝送誤り
検出時のその誤りブロックの処理・を行うものとした画
像通信方法。
【請求項４】請求項１〜４のいずれかの画像通信方法
において、情報源画像のブロック分割は、奇数のライン
番号より成る奇数ライン画像と、偶数のライン番号より
成る偶数ライン画像と、の２分割とした画像通信方法。
【請求項５】情報源画像を奇数のライン番号より成る
奇数ライン画像と、偶数のライン番号より成る偶数ライ
ン画像とに分割し、この奇数ライン画像と偶数ライン画
像とを、交互に独立して送信し、受信させるようにした
画像通信方法において、各ライン画像の送信にあって
は、それぞれのライン画像をブロックに細分割し、この
細分割したブロック単位に、情報源符号化・伝送誤り検
出符号化・伝送化・伝送誤り検出復号化・情報源復号化
・誤り検出復号化による伝送誤り検出時のその誤りブロ
ックの処理・を行うものとした画像通信方法。
【請求項６】請求項３又は５の画像通信方法におい
て、その誤りブロックの処理とは、伝送誤り検出があっ
たブロックに対して、ある定めた画一的な画素データを
埋め込む処理とした画像通信方法。
【請求項７】請求項５の画像通信方法において、その
誤りブロックの処理とは、伝送誤り検出があったブロッ
クに対して、他方のライン画像のブロックの画素データ
のコピーを埋め込む処理とした画像通信方法。
【請求項８】請求項５の画像通信方法において、その
誤りブロックの処理とは、伝送誤り検出があったブロッ
クに対応する他ライン画像のブロックの、画素データか
ら補間を行い、この補間で得た画素データを、その伝送
誤りのあったブロックに画素データとして埋め込む処理
とした画像通信方法。
【請求項９】請求項８の画像通信方法において、上記
補間対象の画素位置は左から右、上から下へのラスタス
キャン方式によって走査されるものとし、且つこの画素
位置の補間には周囲の他方のライン画像の画素位置の画
素データ（又は、この画素データと自己のライン画像の
既補間済みの画素データ）を用いて補間するものとした
画像通信方法。
【請求項１０】請求項９の画像通信方法において、左
から右の代わりに右から左とした画像通信方法。
【請求項１１】情報源画像をｍ×ｎの小ブロックに分
割する第１の手段と、小ブロック毎に情報源符号化を行う第２の手段と、この符号化データに伝送誤り検出符号を付加する第３の
手段と、このブロック対応の情報源符号化データ及び伝送誤り検
出符号化データを変調する第４の手段と、変調後のブロック対応の信号をフレーム化して伝送する
第５の手段と、伝送されてきた信号をフレーム単位に復調する第６の手
段と、復調した信号から伝送誤り検出復号化を行う第７の手段
と、第７の手段での伝送誤り検出時にそのフレームに代わる
代替ユニットに置換する第８の手段と、伝送誤り検出のないフレーム及び伝送誤り検出時の代替
ユニットを取り込み、伝送誤り検出のないフレームから
は情報源復号化を行い、代替ユニットからはその誤りブ
ロックの処理を行う第９の手段と、この情報源復号化及び誤りブロックの処理結果とから各
ブロックを組み立てた情報源画像を得る第１０の手段
と、より成る画像通信装置。
【請求項１２】情報源画像を奇数ライン画像と偶数ラ
イン画像とに分割し、この奇数ライン画像と偶数ライン
画像とを、交互に独立して送信し、受信させるようにし
た画像通信装置において、各ライン画像をｍ′×ｎ′の小ブロックに細分割する第
１の手段と、小ブロック毎に情報源符号化を行う第２の
手段と、この符号化データに伝送誤り検出符号を付加する第３の
手段と、このブロック対応の情報源符号化データ及び伝送誤り検
出符号化データを変調する第４の手段と、変調後のブロック対応の信号をフレーム化して伝送する
第５の手段と、伝送されてきた信号をフレーム単位に復調する第６の手
段と、復調した信号から伝送誤り検出復号化を行う第７の手段
と、第７の手段の伝送誤り検出時にそのフレームに代わる代
替ユニットに置換する第８の手段と、伝送誤り検出のないフレーム及び伝送誤り検出時の代替
ユニットを取り込み、伝送誤り検出のないフレームから
は情報源復号化を行い、代替ユニットからはその誤りブ
ロックの処理を行う第９の手段と、この情報源復号化及び誤りブロックの処理結果から得ら
れるブロックを組み立てて出力情報源画像を得る第１０
の手段と、より成る画像通信装置。
【請求項１３】上記第９の手段における代替ユニット
の代わりに、特定ビットパターン又はフレーム番号を付
与することとした請求項１２の画像通信装置。
【請求項１４】上記第９の手段における伝送誤りブロ
ックの処理とは、対応する他方のライン画像の画素デー
タをそのまま誤りブロックにコピーすることとした請求
項１３又は１４の画像通信装置。
【請求項１５】上記第９の手段における伝送誤りブロ
ックの処理とは、予め画一的に定めた画素データをその
誤りブロックの画素データとして埋め込むこととした請
求項１３又は１４の画像通信装置。
【請求項１６】上記第９の手段における伝送誤りブロ
ックの処理とは、対応する他方のライン画像の画素デー
タからの補間データをその誤りブロックの画素データと
して埋め込むこととした請求項１３又は１４の画像通信
装置。