JPH08237652A - 画像伝送方法及び画像伝送システム - Google Patents

Abstract

(57)【要約】 【目的】 伝送誤りにより欠落した画像データを容易に
補正し、原画像に極めて近い高品位の画像を再生するこ
とができる画像伝送方法及び画像伝送システムを提供す
る。 【構成】 原画像を水平方向の画素の画素番号毎に、画
素番号を整数ｍで割った余りによって振り分けてｍ個の
部分画像に分割し、また更に垂直方向の画素のライン毎
に、ライン番号を整数ｎで割った余りによって振り分け
てｎ個の部分画像に分割して、ｍ個又はｍ×ｎ個の部分
画像を作成し、部分画像を順に並び替えて合成した画像
を情報源符号化して伝送し、情報源復号化した後に、伝
送誤り等によりある部分画像の画像データに訂正できな
い誤りがあると、隣接した部分画像の画像データから誤
り部分に相当する部分を複写して誤り部分に取り込んで
補正を行い、その後で、全ての部分画像を並び替えて合
成して画像を再生する画像伝送方法及び画像伝送システ
ムである。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像を情報源符号化し
て伝送する画像伝送方法及び画像伝送システムに係り、
特に、伝送誤りにより発生した訂正できない画像データ
の欠落部分を容易に且つ適正に補正して、高品位な再生
画像を得ることができる画像伝送方法及び画像伝送シス
テムに関する。

【０００２】

【従来の技術】原画像を圧縮符号化して伝送し、受信し
て復号化を行う従来の画像伝送方法について図１６を用
いて説明する。図１６は、従来の画像伝送方法及び従来
の欠落ブロックの補正方法を示す説明図である。従来の
画像伝送方法は、図１６に示すように、送信側におい
て、入力した原画像を情報源符号化して圧縮し、伝送路
を介して符号化データを伝送し、受信側において受信し
た符号化データを情報源復号化して画像を伸長し、復号
化後の再生画像を得るものである。

【０００３】例えば、ＪＰＥＧ（Joint Photographic E
xpert Group ）方式では、原画像を８画素×８画素の符
号化ブロックに分割して、符号化ブロック単位でＤＣＴ
（Discrete Cosine Transform）演算と量子化テーブル
を用いた量子化による情報源符号化を行い、また、受信
側では、情報源符号化と同一の量子化テーブルを用いた
逆量子化と逆ＤＣＴ演算を行って、符号化ブロック単位
で情報源復号化を行うようになっている。

【０００４】そして、符号化データを伝送する場合に
は、１つまたは複数の符号化ブロックで構成される伝送
ブロックを最小単位として伝送を行うようになってい
る。そのため、伝送路上で伝送誤りが発生すると、伝送
ブロック単位で画像データの損失が起こり、１つまたは
複数の符号化ブロックの画像データが失われることにな
る。ここでは説明を簡単にするために伝送ブロックが１
つの符号化ブロックで構成されているものとする。

【０００５】従来、伝送路上で発生する伝送誤りを検出
して訂正するために、送信側において情報源符号化され
た符号化データに誤り訂正符号を付加して伝送し、伝送
後、受信側において、誤り訂正符号をチェックして誤り
部分を検出し、誤りを訂正する誤り訂正処理が行われて
おり、誤り訂正後、情報源復号化を行うようになってい
た。しかし、誤り訂正符号では訂正できないような誤り
があった場合は、その誤り箇所を含む符号化ブロックを
廃棄して欠落ブロックとするので、図１６に示すよう
に、復号化後の再生画像において誤り符号化ブロック
（欠落ブロック）が発生してしまう。

【０００６】そこで、伝送誤りにより欠落した画像デー
タを補うために、誤り符号化ブロックの補正が行われて
いる。ここで、従来の誤り符号化ブロックの補正方法に
ついて、図１６を用いて説明する。図１６に示すよう
に、伝送誤りによりある符号化ブロックの画像データが
欠落した場合、情報源復号化後に、誤り符号化ブロック
の周囲のブロックの画像データから欠落した部分のデー
タを補間する補正方法があった。

【０００７】周囲のブロックからの補間処理としては、
例えば、画素のｘ方向の配列に着目し、ｘ方向のあるラ
インにおける欠落区間（補間すべき区間）の左右の画素
の画素値から欠落区間の画素値を直線補間により求め、
これを複数のラインについて行って誤り符号化ブロック
全体の補正を行う方法があった。同様に、ｙ方向の配列
に着目して、欠落区間の上下の画素の画素値から直線補
間を行って欠落区間の画素値を求める補正方法もあっ
た。

【０００８】一方、別の従来技術として、伝送誤りが発
生した場合に画像を再送する方法もあった。図１７は、
別の従来の伝送誤り対策としての画像再送方法を示す説
明図である。図１７に示すように、受信側において、誤
り訂正処理の結果、誤り符号化ブロックがある場合に
は、受信側は、送信側に対して、情報源符号化画像の全
部または誤り符号化ブロックのみを再送するよう、再送
要求を送出する。送信側は、再送要求を受信すると、情
報源符号化画像の全部または誤り符号化ブロックのみを
再度伝送するものである。

【０００９】

【発明が解決しようとする課題】しかしながら、図１６
に示した上記従来の画像伝送方法では、伝送誤りにより
欠落する符号化ブロックは、最低でも８画素×８画素の
大きさであるため、周囲の画素の画素値に基づいて、誤
り符号化ブロック内の画像データを全て適正な値に補正
するのは困難であり、原画像に近い画像は得られないと
いう問題点があった。

【００１０】更に、誤り符号化ブロック内にしか存在し
ない情報の補正は不可能であり、またバースト誤り等で
画像の広範囲に渡る伝送誤りが発生した場合は、連続し
た画像情報の損失となり、周囲の画像情報からの誤り補
正は極めて困難であるという問題点があった。

【００１１】また、図１７に示した従来の画像伝送方法
では、再送要求の送出や再送のための処理が増大し、時
間がかかるという問題点があった。

【００１２】本発明は上記実情に鑑みて為されたもの
で、伝送誤りにより欠落した画像データを容易に補正
し、原画像に極めて近い高品位の画像を再生することが
できる画像伝送方法及び画像伝送システムを提供するこ
とを目的とする。

【００１３】

【課題を解決するための手段】上記従来例の問題点を解
決するための請求項１記載の発明は、入力画像を符号化
し、誤り訂正符号を付加して伝送データとして伝送路に
送信し、前記伝送路から前記伝送データを受信し、誤り
訂正を行って画像の復号化を行い、画像データを出力す
る画像伝送方法において、前記入力画像が水平方向にｓ
個の画素数で構成されている場合に、前記ｓ個の画素の
画素番号をｍで割った時の余りで各画素の画像データを
グループ分けし、前記グループを順に並び替えて合成し
た画像データを１つの画像として符号化を行い、復号化
した画像データについて前記各画素の画像データを画素
番号順に並び替える合成を行うことを特徴としている。

【００１４】上記従来例の問題点を解決するための請求
項２記載の発明は、入力画像を符号化し、誤り訂正符号
を付加して伝送データとして伝送路に送信し、前記伝送
路から前記伝送データを受信し、誤り訂正を行って画像
の復号化を行い、画像データを出力する画像伝送方法に
おいて、前記入力画像が水平方向にｓ個の画素数で構成
され、水平方向の画素ラインが垂直方向にｔ本で構成さ
れている場合に、前記ｓ個の画素の画素番号をｍで割っ
た時の余りと前記ｔ本の画素ラインのライン番号をｎで
割った時の余りで各画素の画像データをグループ分け
し、前記グループを順に並び替えて合成した画像データ
を１つの画像として符号化を行い、復号化した画像デー
タについて前記各画素の画像データをライン番号順と画
素番号順に並び替える合成を行うことを特徴としてい
る。

【００１５】上記従来例の問題点を解決するための請求
項３記載の発明は、請求項１又は請求項２記載の画像伝
送方法において、復号化した画像データについて、グル
ープ分けした画像の画像データに訂正できない誤りがあ
ると、別のグループの画像データから前記誤り部分に相
当する部分を複写して前記誤り部分に取り込むことを特
徴としている。

【００１６】上記従来例の問題点を解決するための請求
項４記載の発明は、画像伝送システムにおいて、入力画
像が記憶される送信側フレームメモリを具備する画像入
力回路と、前記送信側フレームメモリ内の画像が水平方
向にｓ個の画素数で構成されている場合に前記ｓ個の画
素の画素番号をｍで割った時の余りで各画素の画像デー
タをｍ個のグループにグループ分けし、前記分けられた
グループ順に画像データを格納する送信側ローカルメモ
リを具備する前処理回路と、前記送信側ローカルメモリ
内の画像データの符号化を行う情報源符号化回路と、前
記情報源符号化回路で符号化されたデータに誤り訂正符
号を付加して伝送データとして伝送路に送信する送信側
通信制御回路と、前記伝送路から伝送データを受信し、
付加された誤り訂正符号により誤りを検出して訂正を行
う受信側通信制御回路と、前記受信側通信制御回路で訂
正されたデータの復号化を行う情報源復号化回路と、前
記情報源復号化回路で復号化された画像データを格納す
る受信側ローカルメモリを具備し、前記受信側ローカル
メモリ内の画像データを前記前処理回路で為された処理
とは逆のグループ分けされた画像データを画素番号順に
並び替える合成処理を行う後処理回路と、前記後処理回
路で合成された画像データを格納する受信側フレームメ
モリを具備する画像出力回路とを有することを特徴とし
ている。

【００１７】上記従来例の問題点を解決するための請求
項５記載の発明は、画像伝送システムにおいて、入力画
像が記憶される送信側フレームメモリを具備する画像入
力回路と、前記送信側フレームメモリ内の画像が水平方
向にｓ個の画素数で構成され、水平方向の画素ラインが
垂直方向にｔ本で構成されている場合に、前記ｓ個の画
素の画素番号をｍで割った時の余りと前記ｔ本の画素ラ
インのライン番号をｎで割った時の余りで各画素の画像
データをｍ×ｎ個のグループにグループ分けし、前記分
けられたグループ順に画像データを格納する送信側ロー
カルメモリを具備する前処理回路と、前記送信側ローカ
ルメモリ内の画像データの符号化を行う情報源符号化回
路と、前記情報源符号化回路で符号化されたデータに誤
り訂正符号を付加して伝送データとして伝送路に送信す
る送信側通信制御回路と、前記伝送路から伝送データを
受信し、付加された誤り訂正符号により誤りを検出して
訂正を行う受信側通信制御回路と、前記受信側通信制御
回路で訂正されたデータの復号化を行う情報源復号化回
路と、前記情報源復号化回路で復号化された画像データ
を格納する受信側ローカルメモリを具備し、前記受信側
ローカルメモリ内の画像データを前記前処理回路で為さ
れた処理とは逆のグループ分けされた画像データをライ
ン番号順と画素番号順に並び替える合成処理を行う後処
理回路と、前記後処理回路で合成された画像データを格
納する受信側フレームメモリを具備する画像出力回路と
を有することを特徴としている。

【００１８】上記従来例の問題点を解決するための請求
項６記載の発明は、請求項４又は請求項５記載の画像伝
送システムにおいて、受信側通信制御回路が、訂正でき
ない欠落部分を検出する受信側通信制御回路であり、後
処理回路が、前記受信側通信制御回路で検出された訂正
できない欠落部分の画像データがいずれかのグループに
ある時に、前記訂正できない欠落部分のないグループの
画像データから前記訂正できない欠落部分に相当する部
分を複写して前記訂正できない欠落部分に取り込む後処
理回路であることを特徴としている。

【００１９】

【作用】請求項１，４記載の発明によれば、入力画像が
水平方向にｓ個の画素数で構成されている場合に、ｓ個
の画素の画素番号をｍで割った余りで画素の画像データ
をグループ分け、グループ順に並び替えて合成した画像
データを１つの画像として符号化し、誤り訂正符号を付
加して伝送データを伝送路に送信し、伝送路から伝送デ
ータを受信して誤り訂正を行い、復号化して各画素の画
像データを本来の画素順となるよう並び替えて合成する
画像伝送方法及び画像伝送システムとしているので、訂
正できない欠落部分があっても、合成された場合に欠落
の影響を非常に小さくすることができる。

【００２０】請求項２，５記載の発明によれば、入力画
像が水平方向にｓ個の画素数で構成され、水平方向の画
素ラインが垂直方向にｔ本で構成されている場合に、前
記ｓ個の画素の画素番号をｍで割った時の余りと前記ｔ
本の画素ラインのライン番号をｎで割った余りで画素の
画像データをグループ分け、グループ順に並び替えて合
成した画像データを１つの画像として符号化し、誤り訂
正符号を付加して伝送データを伝送路に送信し、伝送路
から伝送データを受信して誤り訂正を行い、復号化して
各画素の画像データを本来のライン番号順と画素番号順
になるよう並び替えて合成する画像伝送方法及び画像伝
送システムとしているので、訂正できない欠落部分があ
っても、合成された場合に欠落の影響を非常に小さくす
ることができる。

【００２１】請求項３，６記載の発明によれば、復号化
したいずれかのグループの画像データに訂正できない誤
りがあると、別のグループから誤りのない画像部分を複
写して誤りのある部分に取り込み、本来のライン番号順
と画素番号順になるように画素の画像データを並び替え
て合成する請求項１，２記載の画像伝送方法及び請求項
４，５記載の画像伝送システムとしているので、訂正で
きない欠落部分を容易に適正に補正できる。

【００２２】

【実施例】本発明の一実施例について図面を参照しなが
ら説明する。本発明の一実施例に係る画像伝送方法は、
伝送する１画面の原画像（入力画像）を水平方向の画素
の画素番号毎に、画素番号を整数ｍで割った余りによっ
て振り分けてｍ個の部分画像に分割し、また更に垂直方
向の画素のライン毎に、ライン番号を整数ｎで割った余
りによって振り分けてｎ個の部分画像に分割して、ｍ個
又はｍ×ｎ個の部分画像を作成し、部分画像を順に並び
替えて合成した画像を情報源符号化して伝送し、情報源
復号化した後に、伝送誤り等により、ある部分画像の画
像データに訂正できない誤りがあると、隣接した部分画
像の画像データから誤り部分に相当する部分を複写して
誤り部分に取り込んで補正を行い、その後で、全ての部
分画像を並び替えて合成して画像を再生することによ
り、欠落部分の補正を安価な構成で行い、容易に且つ高
品位な画像を再生することができるものである。

【００２３】まず、本発明の一実施例（第１の実施例）
に係る画像伝送方法の概要について、図１〜図３を使っ
て説明する。図１〜図３は、本発明の一実施例（第１の
実施例）に係る画像伝送方法を段階的に説明する概略説
明図であり、後述するように、図１は、並び替え処理を
説明し、図２は、情報源符号化から伝送、情報源復号化
までを説明し、図３は、合成処理を説明している。

【００２４】第１の実施例の画像伝送方法では、まず図
１に示すように、伝送する１画面の原画像（入力画像）
Ａの画像データを並び替えて、ｍ個の部分画像から成る
並び替え画像Ｃを作成する。図１では、水平方向の画素
数がｓ（画素番号0,1,2,…,s-1）で構成されている原画
像Ａから、ｍ個の部分画像（Ｂ0 ，Ｂ1 ，Ｂ2 ，…，Ｂ
m-1)で構成される並び替え画像Ｃを作成する処理を示し
ている。

【００２５】並び替え処理について具体的に説明する
と、まず原画像Ａの第１のラインについて、水平方向に
１画素ずつスキャンしながら、画素の画素番号（0,1,2,
…,s-1）を部分画像数ｍで割った場合の余りを求め、余
りが０，１，２，３，…，ｍ−１となるｍ個のグループ
に振り分け、更に、各グループ内において、除算の結果
の商が小さい順に画素毎の画像データを配列するように
並び替える。同様の処理を原画像Ａを構成する全ライン
について順に行うことにより、ｍ個の部分画像（Ｂ0 ，
Ｂ1 ，Ｂ2 ，…，Ｂm-1 ）を得る。

【００２６】すなわち、図１に示すように、画素番号
０，ｍ，２ｍ，…の画素の画像データは、画素番号をｍ
で割った場合の余りが０であるから、部分画像Ｂ0 に振
り分けられ、画素番号１，ｍ＋１，２ｍ＋１，…の画素
の画像データは、画素番号をｍで割った場合の余りが１
であるから部分画像Ｂ1 に振り分けられ、以下同様に、
画素番号ｍ−１，２ｍ−１，３ｍ−１，…の画素の画像
データは、部分画像Ｂm-1 に振り分けられる。

【００２７】この処理を画素番号ｓ−１までのｓ個の各
画素について行って画像データを振り分け、部分画像Ｂ
0 から、部分画像Ｂm-1 まで、ｍ個の部分画像が得られ
るものである。従って、個々の部分画像Ｂは、原画像Ａ
の画像データから、ｍ−１画素おき、つまりｍ画素ピッ
チで画像データを抽出して作成したものとなる。

【００２８】そして、ｍ個の部分画像の画像データを、
画面の左部から順に、Ｂ0 ，Ｂ1 ，Ｂ2 ，…，Ｂm-1 と
配列することにより並び替え画像Ｃを得る。このように
して並び替え処理が行われるものである。ここで、任意
の部分画像Ｂi と、これに隣接する部分画像Ｂi-1 及び
部分画像Ｂi+1 とは、互いに隣接する画素の画像データ
から構成されているので、極めて相関性が高く、良く似
た画像となる。

【００２９】次に、図２に示すように、並び替え処理に
よって得られた並び替え画像Ｃを通常の方法により情報
源符号化した伝送データを伝送し、受信側で受信した伝
送データを情報源復号化して並び替え画像Ｄを得る。並
び替え画像Ｄは、部分画像Ｂ0 ′，Ｂ1 ′，Ｂ2 ′，
…，Ｂm-1 ′から構成されている。

【００３０】そして、図３に示すように、並び替え画像
Ｄから、図１に示した並び替え処理の逆の過程によっ
て、画像データを合成して元に戻し、再生画像Ｅを得
る。具体的には、並び替え画像Ｄを構成する部分画像Ｂ
0 ′，Ｂ1 ′，Ｂ2 ′，…，Ｂm-1 ′から順に１画素ず
つ画像データを抽出して、元の画素番号の順に画像デー
タを配列することにより、画像データの合成を行うもの
である（合成処理）。

【００３１】次に、第１の実施例の画像伝送方法におい
て、伝送過程で誤りが発生した場合について、図４、図
５を使って説明する。図４は、第１の実施例の画像伝送
方法において、伝送過程で誤りが発生した場合を説明す
る説明図であり、図５は、第１の実施例の画像伝送方法
において、伝送過程で誤りが発生して補正を行う場合の
補正方法の概略を説明する説明図である。

【００３２】第１の実施例の画像伝送方法において、図
４に示すように、並び替え画像Ｃを情報源符号化した伝
送データを伝送する過程で、伝送誤りが発生した場合、
受信した伝送データを情報源復号化すると、誤り符号化
ブロック（欠落ブロック）を含む並び替え画像Ｄ′が得
られる。図４では、部分画像Ｂ1 に伝送誤りが発生し
て、これを情報源復号化した場合、部分画像Ｂ1 ′部分
に誤り符号化ブロックを含む並び替え画像Ｄ′が得ら
れ、更に、合成処理を行って再生画像Ｅ′を得ることを
示している。

【００３３】再生画像Ｅ′において、誤り符号化ブロッ
クが係る部分は、ｍ−１画素おき（ｍ画素ピッチ）に画
像データが欠落しているが、従来のように連続した画素
から構成される符号化ブロック単位で画像データが欠落
するのに比べると、データの欠落密度が疎となるため、
欠落の影響が極めて小さくなり、良好な再生画像が得ら
れる。

【００３４】また、更に良好な再生画像を得るための方
法として、図５に示すように、伝送過程で伝送誤りが発
生し、情報源復号化した部分画像Ｂ′に誤り符号化ブロ
ック（欠落ブロック）が含まれた場合に、その欠落ブロ
ックを補正し、補正した部分画像から補正後の並び替え
画像Ｄ″を作成した後、再び本来の画素番号順に並び替
えて、再生画像Ｅ″を得る方法がある。

【００３５】ここで、欠落ブロックの補正方法について
説明する。上述したように、隣接した部分画像Ｂi-1 と
Ｂi とＢi+1 とは極めて相関性が高く、このことを利用
して、欠落ブロックが存在する部分画像Ｂi における欠
落ブロック部分に、隣接した部分画像Ｂi+1 における欠
落ブロック部分と同位置の画像データをコピーして補正
を行う方法である。

【００３６】尚、第１の実施例では、部分画像Ｂi に対
して部分画像Ｂi+1 で補正を行うようにしたが、画像の
相関性の点から考えて部分画像Ｂi-1 で補正を行うよう
にしてもよいことは言うまでもない。また、部分画像Ｂ
i に対して部分画像Ｂi+1 で補正を行う際に、部分画像
Ｂi+1 における欠落ブロックに相当する部分が仮に欠落
ブロックであったような場合は、画像の相関性の点から
考えて部分画像Ｂi-1で補正を行うようにすればよい。

【００３７】例えば、図５に示すように、伝送後、情報
源復号化された部分画像Ｂ1 ′に訂正できない誤り符号
化ブロック（欠落ブロック）が含まれる場合、隣接する
部分画像Ｂ2 ′における当該欠落ブロックに相当する位
置の画像データを、部分画像Ｂ1 ′の欠落ブロックにコ
ピーする補正を行い、補正した部分画像Ｂ1 ″を作成す
る。そして、補正後の部分画像Ｂ0 ′，Ｂ1 ″，…，Ｂ
m-1 ′から補正後の並び替え画像Ｄ″を得るものであ
る。尚、部分画像Ｂm-1 ′の補正については、部分画像
Ｂ0 ′を用いて行うものとする。

【００３８】ここで、欠落ブロックに相当する部分の画
像データをコピーする補正は、例えば、１画面分の画像
データが格納されているメモリにおいて、部分画像Ｂ1
′における欠落ブロックの先頭アドレスをｘとする
と、アドレスｘに、１部分画像分の画素数のメモリ容量
を加算した位置のブロック画像の画像データをコピーし
て欠落ブロックに取り込むことで為されるものである。

【００３９】その結果、補正後の並び替え画像Ｄ″を構
成する部分画像Ｂ0 ′，Ｂ1 ″，…，Ｂm-1 ′を合成し
た再生画像Ｅ″は、欠落ブロックに係る部分が、相関性
が高い画像データで良好に補正されて再生されることに
なる。

【００４０】次に、第１の実施例の画像伝送方法を実現
する画像伝送システムについて、図６，図７を使って説
明する。図６は、第１の実施例の画像伝送方法を実現す
る画像伝送システムの送信装置の構成ブロック図であ
り、図７は、第１の実施例の画像伝送方法を実現する画
像伝送システムの受信装置の構成ブロック図である。

【００４１】第１の実施例の画像伝送システムは、基本
的には画像データを符号化して画像符号化データを作成
し送信する送信装置と、画像符号化データを伝送する伝
送路と、伝送された画像符号化データを受信し復号化し
て画像を再生する受信装置とから構成されている。

【００４２】そして、送信装置内部は、図６に示すよう
に、送信装置全体の動作を制御するＣＰＵ１と、装置全
体の動作を制御するプログラムを記憶しているＲＯＭ２
と、画像を入力するカメラ３と、アナログ画像信号をデ
ィジタル画像データに変換する画像入力回路４と、入力
ディジタル画像を複数の部分画像に並び替える並び替え
処理を行う前処理回路５と、並び替えられたディジタル
画像データを情報源符号化し情報源符号化画像データに
する情報源符号化回路６と、通信の制御を行う通信制御
回路７と、電波を発信するアンテナ８とから構成されて
いる。

【００４３】また、受信装置内部は、図７に示すよう
に、受信装置全体の動作を制御するＣＰＵ１１と、各回
路の動作を制御するプログラムと伝送誤りが発生したブ
ロックを補う補填ブロックのデータを記憶しているＲＯ
Ｍ１２と、電波を受信するアンテナ１３と、通信の制御
を行う通信制御回路１４と、受信した情報源符号化画像
データを情報源復号化してディジタル画像データにする
情報源復号化回路１５と、伝送誤りにより欠落したブロ
ック画像を補正し、更に部分画像を合成して画像を再生
する後処理回路１６と、後処理後のディジタル画像デー
タをアナログ画像信号に変換する画像出力回路１７と、
再生された画像を表示するディスプレイ１８と、伝送誤
りにより欠落したブロックの位置情報を記憶するＲＡＭ
１９とから構成されている。

【００４４】次に、第１の実施例の送信装置内の各部に
ついて、具体的に説明する。カメラ３は、ビデオカメラ
等の画像入力装置で、具体的には画像を入力して、ＮＴ
ＳＣ（National Television Standard Committee）コン
ポジット信号又はアナログＲＧＢ信号等の汎用の画像信
号を入力制御回路４に出力するものである。尚、汎用の
画像信号を出力する装置であれば、ビデオデッキ等の画
像蓄積メディアであっても構わない。

【００４５】画像入力回路４は、カメラ３から入力され
る信号を同期信号とアナログ画像信号とに分離して画像
信号を取り出し、アナログ画像信号をディジタル画像デ
ータに変換（Ａ／Ｄ変換）し、画像入力回路４内に設け
られたフレームメモリに一旦格納し、画面単位でディジ
タル画像データを前処理回路５に出力するものである。

【００４６】具体的に画像入力回路４は、カメラ３から
入力される同期信号（例えばＮＴＳＣコンポジット信号
ではVSYNC 等）を基にしてフレームメモリをリフレッシ
ュし、その後にフレームメモリの先頭番地からＡ／Ｄ変
換したディジタル画像データを書き込み、１画面分の画
像データがフレームメモリに格納された時点で前処理回
路５のローカルメモリにディジタル画像データを出力す
るようになっている。尚、カメラ３がディジタルカメラ
等のディジタル信号を出力するものである場合は、画像
入力回路４におけるＡ／Ｄ変換機能は不要となる。

【００４７】前処理回路５は、画像入力回路４によって
入力された１画面分の原画像（図１の画像Ａ）をｍ個の
部分画像（図１の部分画像Ｂ0 〜Ｂm-1 ）に分割（グル
ープ分け）して並び替えた並び替え画像（図１の画像
Ｃ）を作成する並び替え処理を行い、１画面について並
び替え処理終了後に、並び替え画像の画像データを符号
化ブロック（一般的には８×８画素）単位で情報源符号
化回路６に出力するものであり、その内部に画像データ
を格納するローカルメモリが設けられている。

【００４８】そして、ローカルメモリの内部は画像入力
回路４によって１画面分の原画像の画像データが格納さ
れるエリアａと、エリアａの原画像を並び替えた並び替
え画像を格納するエリアｂとに分かれている。尚、本実
施例ではローカルメモリ内をエリアａとエリアｂとに分
けて原画像と並び替え画像とを格納するようにしたが、
それぞれに対応するメモリを別々に設けても構わない。

【００４９】前処理回路５における並び替え処理の具体
的な処理は、ローカルメモリのエリアａに格納された原
画像の画像データを画素単位で読み込み、読み込んだ画
素の画素番号を部分画像数ｍで除した時の商と余りによ
って決定されるローカルメモリのエリアｂの画素位置に
画像データを格納していく。尚、ローカルメモリのエリ
アｂに格納する際のライン位置は、ローカルメモリのエ
リアａにおけるライン位置と同様である。

【００５０】ここで、エリアｂにおける格納画素番号の
決定（算出）方法は、原画像の水平方向画素数ｓ、部分
画像数ｍとした場合に、原画像の画素番号ｉの画像デー
タを格納する並び替え画像上の画素番号ｊは、ｉ／ｍ＝
商ｘ・・余りｙとすると、ｊ＝ｙ×ｓ／ｍ＋ｘで算出す
ることができる。

【００５１】例えば、原画像の水平方向画素数ｓを４０
とし、部分画像数ｍを４とすると、原画像の画素番号０
の画像データは、並び替え画像の画素番号ｊ＝０に格納
し、原画像の画素番号１の画像データは、並び替え画像
の画素番号ｊ＝１×４０／４＋０＝１０に格納し、原画
像の画素番号２の画像データは、並び替え画像の画素番
号ｊ＝２×４０／４＋０＝２０に格納し、原画像の画素
番号３の画像データは、並び替え画像の画素番号ｊ＝３
×４０／４＋０＝３０に格納し、原画像の画素番号４の
画像データは、並び替え画像の画素番号ｊ＝０×４０／
４＋１＝１に格納し、原画像の画素番号５の画像データ
は、並び替え画像の画素番号ｊ＝１×４０／４＋１＝１
１に格納することになる。

【００５２】情報源符号化回路６は、前処理回路５によ
って入力される符号化ブロック単位の画像データを圧縮
符号化して画像符号化データを作成し、通信制御回路７
に出力するものである。画像データを圧縮符号化する技
術は、例えば静止画像の圧縮符号化の標準ともいえる
「ＪＰＥＧ（Joint Photographic Expert Group ）」方
式等が良く知られている（「最新ＭＰＥＧ教科書」 マ
ルチメディア通信研究会編 株式会社アスキー発行 １
９９４年８月発行 ｐ５３〜ｐ６７参照）。尚、情報源
符号化回路６における圧縮符号化の技術は、一般的に画
像を１画面単位で圧縮できるような画像圧縮符号化方法
であればいかなる方法でもよく、本発明の本質部分では
ないので、ここでは説明を省略する。

【００５３】通信制御回路７は、情報源符号化回路６で
圧縮符号化された画像符号化データ（伝送ブロック）
に、通信制御に関する情報を表すデータ（通信ヘッダ）
と、伝送過程における誤りを検出し誤り訂正を行うため
の誤り訂正符号を付加して送信パケット（伝送データ）
を構築し、アンテナ８に出力するものである。尚、誤り
訂正符号化の技術については、一般的に知られており、
例えば、「情報・符号化理論入門」 橋本清著 森北出
版株式会社 １９８４年１２月 ｐ７２〜ｐ１２２ に
記載されている。

【００５４】ＣＰＵ１は、画像入力回路４と前処理回路
５と情報源符号化回路６と通信制御回路７の動作や動作
タイミングを制御するものであり、ＲＯＭ２はＣＰＵ１
で実行される画像入力回路４等の各回路の制御プログラ
ムが格納されている記憶部である。

【００５５】次に、第１の実施例の受信装置内の各部に
ついて、具体的に説明する。通信制御回路１４は、アン
テナ１３を介して受信したパケットを通信ヘッダと伝送
ブロックとに分離し、誤り訂正符号により伝送ブロック
の誤りを検出し、誤り部分の訂正を行い、訂正不可能の
場合は、その伝送ブロックをＲＯＭ１２内に予め格納さ
れている補填ブロックで置き換え、その際に誤り伝送ブ
ロックに含まれる符号化ブロック（欠落ブロック）の位
置情報をＲＡＭ１９に格納し、伝送ブロックを情報源復
号化回路１５に出力するものである。

【００５６】ここで、誤り検出訂正の技術は、送信装置
の通信制御回路７で用いた誤り訂正符号化技術に対応す
る復号化技術である。この復号化技術も、上述の「情報
・符号化理論入門」に具体的に記載されている。

【００５７】また、補填ブロックとは、誤り訂正が不可
能だった伝送ブロックについて、正常に受信した伝送ブ
ロックと全く同様に処理できるように補填するためのブ
ロックである。補填ブロックのデータは具体的には、例
えば１つ前に処理した符号化ブロックと差がないことを
示す符号化ブロックデータ（ＤＣ成分，ＡＣ成分共に
０）で構成されるものが考えられる。尚、補填ブロック
データは予めＲＯＭ１２に格納されている。

【００５８】ＲＡＭ１９は、通信制御回路１４において
誤り訂正が不可能であった伝送ブロック（誤り伝送ブロ
ック）に含まれる符号化ブロックの位置情報を格納する
メモリである。

【００５９】情報源復号化回路１５は、誤り訂正された
符号化データを伸長するために復号化して後処理回路１
６に出力するもので、その復号化技術は、送信装置の情
報源符号化回路６で用いた符号化に対応する復号化でな
ければならない。この復号化技術も、上述の「最新ＭＰ
ＥＧ教科書」に具体的に記載されている。

【００６０】後処理回路１６は、情報源復号化回路１５
によって復号化された画像データの中の欠落ブロック部
分の画像データを補正する補正処理と、並び替えを元に
戻して再生画像の画像データを作成する合成処理とを行
った後に、再生画像の画像データを画像出力回路１７の
フレームメモリに出力するものであり、後処理回路１６
の内部に画像データを格納するローカルメモリが設けら
れている。

【００６１】そして、ローカルメモリの内部は１画面分
の復号化された画像データ（並び替え画像）が情報源復
号化回路１５によって格納されるエリアａ′と、エリア
ａ′の並び替え画像の並び替えを元に戻した再生画像を
格納するエリアｂ′とに分かれている。尚、本実施例で
はローカルメモリ内をエリアａ′とエリアｂ′とに分け
て並び替え画像と再生画像とを格納するようにしたが、
それぞれに対応するメモリを別々に設けても構わない。

【００６２】後処理回路１６における補正処理の具体的
な処理は、ＲＡＭ１９から欠落ブロックの位置情報を読
み込み、欠落ブロックがある部分画像に対して１つ右の
部分画像において、欠落ブロックに相当する位置のブロ
ックの画像データをローカルメモリのエリアａ′から読
み込んで、欠落ブロック部分に格納（複写）するもので
ある。図５の例では、欠落ブロック（誤り符号化ブロッ
ク）が部分画像Ｂ1 ′に存在するので、１つ右の部分画
像Ｂ2 ′において、欠落ブロックに相当する位置のブロ
ックの画像データを欠落ブロック部分に格納（複写）す
るものである。尚、欠落ブロックが部分画像Ｂm-1 ′に
存在する場合は、部分画像Ｂ0 ′から複写するものであ
る。

【００６３】後処理回路１６における合成処理の具体的
な処理は、ローカルメモリのエリアａ′に格納されてい
る補正後の並び替え画像の画像データを画素単位で読み
込み、読み込んだ画素の画素番号を部分画像数ｍで除し
た時の商と余りによって決定されるローカルメモリのエ
リアｂ′の画素番号（位置）に画像データを格納してい
く。尚、ローカルメモリのエリアｂ′に格納する際のラ
イン位置は、ローカルメモリのエリアａ′におけるライ
ン位置と同様である。

【００６４】ここで、エリアｂ′における格納画素番号
の決定（算出）方法は、前処理回路５における算出方法
と同様で、原画像の水平方向画素数ｓ、部分画像数ｍと
した場合に、並び替え画像の画素番号ｉの画像データを
格納する再生画像上の画素番号ｊは、ｉ／ｍ＝商ｘ・・
余りｙとすると、ｊ＝ｙ×ｓ／ｍ＋ｘで算出することが
できる。

【００６５】画像出力回路１７は、後処理回路１６によ
ってフレームメモリに格納されたディジタル画像データ
をアナログ画像信号に変換（Ｄ／Ａ変換）し、更に汎用
の画像信号（例えばＮＴＳＣコンポジット信号、アナロ
グＲＧＢ信号等）に変換してディスプレイ１８に出力し
て表示させるものである。尚、ディスプレイ１８が、デ
ィジタル画像データを入力して表示する機能を持つディ
スプレイである場合は、画像出力回路１７におけるＤ／
Ａ変換機能は不要となる。

【００６６】ＣＰＵ１１は、通信制御回路１４と情報源
復号化回路１５と後処理回路１６と画像出力回路１７の
動作や動作タイミングを制御するものであり、ＲＯＭ１
２はＣＰＵ１で実行される通信制御回路１４等の各回路
の制御プログラムと、通信制御回路１４で使用される補
填ブロックのデータが格納されている記憶部である。ま
た、ＲＡＭ１９は、通信制御回路１４において、誤り訂
正不可能であった伝送ブロックに含まれる符号化ブロッ
クの位置情報を格納するメモリである。

【００６７】次に、第１の実施例の画像伝送システムの
動作について、図６，図７を使って説明する。第１の実
施例の画像伝送システムは、送信装置において、カメラ
３が画像を入力し、画像入力回路４がカメラ３から入力
される信号からアナログ画像信号を取り出してディジタ
ル画像信号に変換してフレームメモリに格納し、画面単
位でディジタル画像データを前処理回路５のローカルメ
モリのエリアａに出力する。

【００６８】そして、前処理回路５は、ローカルメモリ
のエリアａに格納された１画面分の原画像の画像データ
を画素単位で読み込んで、複数の部分画像に並び替えた
並び替え画像を作成してローカルメモリのエリアｂに格
納し、並び替え画像格納完了後に、ローカルメモリのエ
リアｂから符号化ブロック単位で画像データを情報源符
号化回路６に出力する。

【００６９】そして情報源符号化回路６は、受け取った
符号化ブロックの画像データを情報源符号化して画像符
号化データを作成し、通信制御回路７が通信ヘッダと誤
り訂正符号を付加して送信パケットを作成し、アンテナ
８から伝送路に送出する。

【００７０】一方、受信装置においては、アンテナ１３
を介して伝送路からパケットを受信し、通信制御回路１
４が伝送ブロックを取り出して誤り検出を行い、誤り部
分の訂正を行い、訂正不可能の場合は、訂正不可能な伝
送ブロックをＲＯＭ１２に格納されている補填ブロック
で置き換え、訂正不可能な伝送ブロックに含まれるブロ
ック（欠落ブロック）の位置情報をＲＡＭ１９に格納す
る。

【００７１】そして、正常に受信した伝送ブロック又は
補填ブロックで置き換えられた伝送ブロックを符号化ブ
ロック単位で情報源復号化回路１５に出力する。情報源
復号化回路１５は、受け取った符号化ブロックを情報源
復号化して画像データを作成して後処理回路１６のロー
カルメモリのエリアａ′に格納する。

【００７２】そして、１画面分の画像データの格納が完
了したなら、後処理回路１６は、ＲＡＭ１９から欠落ブ
ロックの位置情報を読み込んで欠落ブロックの補正を行
い、補正が完了したならローカルメモリのエリアａ′に
格納されている補正後の並び替え画像の画像データを読
み込んで、並び替えを元に戻す合成処理を行い、合成さ
れた再生画像をローカルメモリのエリアｂ′に格納し、
並び替え完了後に、ローカルメモリのエリアｂ′から画
像出力回路１７のフレームメモリにディジタル画像デー
タを出力する。そして、画像出力回路１７は、フレーム
メモリに格納されたディジタル画像データをアナログ画
像信号に変換して、ディスプレイ１８に出力して表示さ
せるようになっている。

【００７３】次に、受信装置の後処理回路１６における
補正処理の動作について、図８を使って具体的に説明す
る。図８は、第１の実施例の受信装置の後処理回路１６
における補正処理の動作を示すフローチャート図であ
る。第１の実施例の後処理回路１６における補正処理
は、図８に示すように、ＲＡＭ１９から欠落ブロックの
位置情報を読み込み（１００）、欠落ブロックがあるか
どうか判断し（１０２）、欠落ブロックがない場合は補
正処理を終了する。

【００７４】欠落ブロックがある場合は、ローカルメモ
リのエリアａ′から欠落ブロックに相当する画像データ
を読み込む（１１０）。ここで、欠落ブロックに相当す
る画像データとは、欠落ブロックの存在するグループの
部分画像における欠落ブロックの位置の画像データに対
して、１つ右のグループの部分画像での相対位置にある
画像データのことである。そして、処理１１０で読み込
んだ画像データをローカルメモリのエリアａ′の欠落ブ
ロック位置に書き込む複写を行い（１１２）、処理１０
０に戻る。

【００７５】第１の実施例の画像伝送方法及び画像伝送
システムによれば、送信装置の前処理回路５が入力画像
を各画素の画素番号をｍで割った時の余りでｍ個のグル
ープに分けて並び替えた並び替え画像を作成し、情報源
符号化回路６が並び替え画像の画像データを順に符号化
し、送信制御回路７が誤り訂正符号を付加して伝送路３
０に送信し、受信装置の通信制御回路１４が伝送路３０
から伝送データを受信して誤り訂正を行い、情報源復号
化回路１５が復号化して後処理回路１６が本来の画素番
号順になるよう画像データを並び替える合成を行って再
生するようにしているので、伝送誤り等によって訂正で
きない欠落部分があっても、合成された場合に欠落の影
響を非常に小さくすることができる効果がある。

【００７６】また、第１の実施例の画像伝送システムに
よれば、従来からある一般的な構成に、送信装置には前
処理回路５を設け、受信装置には後処理回路１６を設け
た簡単な構成で、欠落の影響を非常に小さくすることが
できる効果がある。

【００７７】また、第１の実施例の画像伝送方法及び画
像伝送システムによれば、受信装置の通信制御回路１４
で訂正できない欠落部分が発生した場合に、欠落ブロッ
クの位置情報をＲＡＭ１９に記憶しておき、情報源復号
化回路１５で復号化した後に、欠落ブロックがあるグル
ープの部分画像の次のグループの部分画像から欠落ブロ
ックに相当する部分の画像データを複写して補正し、次
に、本来の画素番号順となるように画像データを並び替
えて合成して再生するので、訂正できない欠落部分を相
関度の高い画像データで補正することにより、欠落部分
を簡単な構成で容易に適正に補正できる効果がある。特
に、欠落ブロックがあるグループの部分画像の次（右）
のグループの部分画像から欠落ブロックに相当する部分
の画像データを複写することで、かなり相関度が高い画
像データで補正できる効果がある。

【００７８】尚、補正の際に、欠落ブロックがあるグル
ープ（ｉ番目のグループ）の部分画像の次（右）のグル
ープ（ｉ＋１番目のグループ）の部分画像において、欠
落ブロックに相当する部分が仮に欠落ブロックであった
としても、前（左）のグループ（ｉ−１番目のグルー
プ）の部分画像から欠落ブロックに相当する部分の画像
データをｉ番目のグループの部分画像の欠落ブロックに
複写して補正できるため、補正の精度を向上させること
ができる効果がある。

【００７９】次に、第２の実施例に係る画像伝送方法の
概要について、図９〜図１１を使って説明する。図９〜
図１１は、第２の実施例に係る画像伝送方法を段階的に
説明する概略説明図であり、後述するように、図９は、
並び替え処理を説明し、図１０は、情報源符号化から伝
送、情報源復号化までを説明し、図１１は、合成処理を
説明している。

【００８０】第２の実施例の画像伝送方法では、図９に
示すように、まず伝送する１画面の原画像（入力画像）
Ａの画像データを並び替えて、片方向（水平方向又は垂
直方向）にｍ個の部分画像から成る中間並び替え画像を
作成する。そして、更に中間並び替え画像の画像データ
を並び替えて、他方向（垂直方向又は水平方向）にｎ個
の部分画像に分けて最終的な並び替え画像Ｃを作成する
並び替え処理を行う。

【００８１】図９の例では、原画像Ａが、水平方向の画
素数（画素数）がｓ（画素番号0,1,2,…,s-1）、垂直方
向の画素のライン数（ライン数）がt（ライン番号0,1,
2,…,t-1）で構成されている場合、まず水平方向にｍ個
の部分画像（Ｂ0 ，Ｂ1 ，Ｂ2，…，Ｂm-1)で構成され
る中間並び替え画像を作成し、更に中間並び替え画像を
垂直方向にｎ個の部分画像に並び替えてｍ×ｎ個の部分
画像（Ｃ00，Ｃ01，…，Ｃ0m，Ｃ10，…，Ｃ(n-1）(m-
1))で構成される最終的な並び替え画像Ｃを作成してい
る。

【００８２】水平方向の並び替え処理の具体的な方法
は、第１の実施例と全く同様で、水平方向に画素単位で
スキャンしながら、各画素の画素番号（0,1,2,…,s-1）
を部分画像数ｍで割った場合の余りの値に対応するｍ個
のグループに振り分け並び替えるものであるので、ここ
では詳しい説明を省略する。

【００８３】そして、水平方向の並び替え処理の次に行
う垂直方向の並び替え処理の具体的な方法は、まず中間
並び替え画像の画素ラインについて、ライン番号（0,1,
2,…,t-1）を部分画像数ｎで割った場合の余りを求め、
余りが０，１，２，３，…，ｎ−１となるｎ個のグルー
プに振り分け、更に、各グループ内において、除算の結
果の商が小さい順にライン毎の画像データを配列するよ
うに並び替えることにより、ｎ個の部分画像を得ること
ができる。その結果、図９に示すように、原画像Ａを水
平方向にｍ個、垂直方向にｎ個にグループ分けした部分
画像（Ｃ00，Ｃ01，…，Ｃ0m，Ｃ10，…，Ｃ(n-1）(m-
1))で構成される並び替え画像Ｃを得る。

【００８４】尚、第２の実施例では、並び替え処理にお
いて、まず水平方向の並び替えを行って中間並び替え画
像を作成してから、次に、垂直方向の並び替え処理を行
って最終的な並び替え画像Ｃを得る２段階の並び替えを
行う方法を説明したが、原画像Ａから、直接並び替え画
像Ｃを得る方法を用いても構わない。原画像Ａから直接
並び替え画像Ｃを得る方法では、原画像Ａを１画素ずつ
スキャンし、各画素の画素番号及びライン番号から並び
替えて格納すべき画素番号及びライン番号を算出して格
納することにより、並び替え画像Ｃを得るものである。

【００８５】このようにして、水平方向及び垂直方向の
並び替え処理を行って得られた並び替え画像Ｃにおいて
は、任意の部分画像Ｃijと、これに隣接する部分画像Ｃ
(i-1)j，Ｃ(i+1)j，Ｃi(j-1)，Ｃi(j+1)とは、互いに隣
接する画素の画像データから構成されているので、極め
て相関性が高く、良く似た画像となる。

【００８６】次に、第１の実施例と同様に、図１０に示
すように、並び替え処理によって得られた並び替え画像
Ｃを通常の方法により情報源符号化した伝送データを伝
送し、受信側で受信した伝送データを情報源復号化して
並び替え画像Ｄを得る。並び替え画像Ｄは、部分画像Ｃ
00′，…，Ｃ0m′，Ｃ10′，…，Ｃ(n-1）(m-1) ′から
構成されている。

【００８７】そして、図１１に示すように、並び替え画
像Ｄから、図９に示した並び替え処理の逆の過程によっ
て、画像データを合成して元に戻し、再生画像Ｅを得
る。具体的には、並び替え画像Ｄを構成する部分画像Ｃ
00′，…，Ｃ0m′，Ｃ10′，…，Ｃ(n-1）(m-1) ′から
順に１ラインずつ画像データを抽出して、元のライン番
号の順に画像データを配列して中間並び替え画像を作成
し、更に中間並び替え画像から順に１画素ずつ画像デー
タを抽出して、元の画素番号の順に画像データを配列す
ることにより、画像データの合成を行うものである（合
成処理）。尚、合成処理に関しても、２段階の並び替え
を行わずに並び替え画像Ｄから直接再生画像Ｅを得る方
法であっても構わない。

【００８８】次に、第２の実施例の画像伝送方法におい
て、伝送過程で誤りが発生した場合について、図１２、
図１３を使って説明する。図１２は、第２の実施例の画
像伝送方法において、伝送過程で誤りが発生した場合を
説明する説明図であり、図１３は、第２の実施例の画像
伝送方法において、伝送過程で誤りが発生して補正を行
う場合の補正方法の概略を説明する説明図である。

【００８９】第２の実施例の画像伝送方法において、図
１２に示すように、並び替え画像Ｃを情報源符号化した
伝送データを伝送する過程で、伝送誤りが発生した場
合、受信した伝送データを情報源復号化すると、誤り符
号化ブロック（欠落ブロック）を含む並び替え画像Ｄ′
が得られる。図１２では、部分画像Ｃ11に伝送誤りが発
生して、これを情報源復号化した場合、部分画像Ｃ11′
部分に誤り符号化ブロックを含む並び替え画像Ｄ′が得
られ、更に、合成処理を行って再生画像Ｅ′を得ること
を示している。

【００９０】再生画像Ｅ′において、誤り符号化ブロッ
クが係る部分は、ｍ−１画素かつｎ−１ラインおき（ｍ
×ｎ画素ピッチ）に画像データが欠落しているが、従来
のように連続した画素から構成される符号化ブロック単
位で画像データが欠落するのに比べると、データの欠落
密度がかなり疎となるため、欠落の影響が極めて小さく
なり、良好な再生画像が得られる。

【００９１】また、更に良好な再生画像を得るための方
法として、図１３に示すように、伝送過程で伝送誤りが
発生し、情報源復号化した部分画像Ｃ11′に誤り符号化
ブロック（欠落ブロック）が含まれた場合に、その欠落
ブロックを補正し、補正した部分画像から補正後の並び
替え画像Ｄ″を作成した後、再び本来のライン番号及び
画素番号順に並び替えて、再生画像Ｅ″を得る方法があ
る。

【００９２】ここで、欠落ブロックの補正方法について
説明する。上述したように、部分画像Ｃijとそれに隣接
したＣ(i-1)j（上部），Ｃ(i+1)j（下部），Ｃi(j-1)
（左部），Ｃi(j+1)（右部）とは極めて相関性が高く、
このことを利用して、欠落ブロックが存在する部分画像
Ｃijにおける欠落ブロック部分に、隣接した部分画像Ｃ
(i-1)j，Ｃ(i+1)j，Ｃi(j-1)，Ｃi(j+1)のいずれかにお
ける欠落ブロック部分と同位置の画像データをコピーし
て補正を行う方法である。

【００９３】尚、第２の実施例では、部分画像Ｃijに対
して１つ上の部分画像Ｃ(i-1)jで補正を行うようにした
が、画像の相関性の点から考えて部分画像Ｃ(i+1)j，Ｃ
i(j-1)，Ｃi(j+1)のいずれかで補正を行うようにしても
よいことは言うまでもない。また、部分画像Ｃijに対し
て部分画像Ｃ(i-1)jで補正を行う際に、部分画像Ｃ(i-
1)jにおける欠落ブロックに相当する部分が仮に欠落ブ
ロックであったような場合は、その他の隣接部分画像Ｃ
(i+1)j，Ｃi(j-1)，Ｃi(j+1)のいずれかで補正を行えば
よい。

【００９４】例えば、図１３に示すように、伝送後、情
報源復号化された部分画像Ｃ11′に訂正できない誤り符
号化ブロック（欠落ブロック）が含まれる場合、隣接す
る部分画像Ｃ01′における当該欠落ブロックに相当する
位置の画像データを、部分画像Ｃ11′の欠落ブロックに
コピーする補正を行い、補正した部分画像Ｃ11″を作成
する。そして、補正後の部分画像Ｃ00′，…，Ｃ11″，
…，Ｃ(n-1)(m-1)′から補正後の並び替え画像Ｄ″を得
るものである。尚、部分画像Ｃ(n-1)0′，…，Ｃ(n-1)
(m-1)′の補正については、部分画像Ｃ00′，…，Ｃ0(m
-1)′を用いて行うものとする。

【００９５】その結果、補正後の並び替え画像Ｄ″を構
成する部分画像Ｃ00′，…，Ｃ11″，…，Ｃ0(m-1)′を
合成した再生画像Ｅ″は、欠落ブロックに係る部分が、
相関性が高い画像データでかなり良好に補正されて再生
されることになる。

【００９６】次に、第２の実施例の画像伝送方法を実現
する画像伝送システムについて、図１４，図１５を使っ
て説明する。図１４は、第２の実施例の画像伝送方法を
実現する画像伝送システムの送信装置の構成ブロック図
であり、図１５は、第２の実施例の画像伝送方法を実現
する画像伝送システムの受信装置の構成ブロック図であ
る。

【００９７】第２の実施例の画像伝送システムは、第１
の実施例の画像伝送システムと同様で、基本的には画像
データを符号化して画像符号化データを作成し送信する
送信装置と、画像符号化データを伝送する伝送路と、伝
送された画像符号化データを受信し復号化して画像を再
生する受信装置とから構成されている。

【００９８】そして、図１４に示した第２の実施例の送
信装置内部は、基本的には、図６に示した第１の実施例
の送信装置の構成と同様であるが、但し、前処理回路
５′における処理内容が第１の実施例の前処理回路５と
は異なり、それに伴って前処理回路５′内のローカルメ
モリの構成が異なっている。また、図１５に示した第２
の実施例の受信装置内部は、図７に示した第１の実施例
の受信装置の構成と同様であるが、但し、後処理回路１
６′における処理内容が第１の実施例の後処理回路１６
とは異なり、それに伴って後処理回路１６′内のローカ
ルメモリの構成が異なっている。

【００９９】第２の実施例において、第１の実施例の送
信装置及び受信装置と同様の構成部分は、その具体的な
機能も全く同様であるので、ここでは説明を省略し、第
１の実施例と異なる部分についてのみ具体的に説明す
る。

【０１００】図１４に示した第２の実施例の送信装置の
前処理回路５′は、画像入力回路４によって入力された
１画面分の原画像（図１の画像Ａ）を水平方向にｍ個の
部分画像（図９の部分画像Ｂ0 〜Ｂm-1 ）に分割（グル
ープ分け）して並び替えた中間並び替え画像を作成し、
更に中間並び替え画像を垂直方向にｎ個に分割してｍ×
ｎ個の部分画像（図９のＣ00，Ｃ01，…，Ｃ0m，Ｃ10，
…，Ｃ(n-1）(m-1))で構成される並び替え画像（図９で
は並び替え画像Ｃ）を作成する並び替え処理を行う。そ
して、１画面について並び替え処理終了後に、並び替え
画像の画像データを符号化ブロック（一般的には８×８
画素）単位で情報源符号化回路６に出力するものであ
り、その内部に画像データを格納するローカルメモリが
設けられている。

【０１０１】そして、ローカルメモリの内部は、画像入
力回路４によって１画面分の原画像の画像データが格納
されるエリアａと、エリアａの原画像を水平方向に分割
して並び替えた中間並び替え画像を格納するエリアｂ
と、中間並び替え画像を垂直方向に分割して並び替えた
最終的な並び替え画像を格納するエリアｃとに分かれて
いる。尚、本実施例ではローカルメモリ内をエリアａと
エリアｂとエリアｃとに分けて原画像と中間並び替え画
像と並び替え画像とを格納するようにしたが、それぞれ
に対応するメモリを別々に設けても構わない。また、前
処理回路５′における並び替え処理を、２段階に分けて
行わず直接並び替え画像Ｃを作成する方法を採る場合
は、エリアｂは不要である。

【０１０２】前処理回路５′における並び替え処理は、
まず水平方向並び替え処理を行い続いて垂直方向並び替
えを行うようになっている。水平方向並び替え処理の具
体的な処理は、第１の実施例における並び替え処理と全
く同様であるので、ここでは説明を省略するが、但し、
水平方向並び替え処理の結果、ローカルメモリのエリア
ｂに格納されるのが第２の実施例では中間並び替え画像
である。

【０１０３】そして、垂直方向並び替え処理の具体的な
処理は、ローカルメモリのエリアｂに格納された中間並
び替え画像の画像データを画素ライン単位で読み込み、
読み込んだ画素のライン番号を部分画像数ｎで除した時
の商と余りによって決定されるローカルメモリのエリア
ｃのライン位置に画像データを格納していく。

【０１０４】ここで、エリアｃにおける格納ライン番号
の決定（算出）方法は、第１の実施例で説明した画素番
号の算出方法と同様の原理で、中間並び替え画像の垂直
方向ライン数ｔ、部分画像数ｎとした場合に、中間並び
替え画像のライン番号ｉの画像データを格納する並び替
え画像上のライン番号ｊは、ｉ／ｎ＝商ｘ・・余りｙと
すると、ｊ＝ｙ×ｔ／ｎ＋ｘで算出することができる。

【０１０５】例えば、中間並び替え画像の垂直方向ライ
ン数ｔを４０とし、部分画像数ｎを４とすると、中間並
び替え画像のライン番号０の画像データは、並び替え画
像のライン番号ｊ＝０に格納し、中間並び替え画像のラ
イン番号１の画像データは、並び替え画像のライン番号
ｊ＝１×４０／４＋０＝１０に格納することになる。

【０１０６】図１５に示した第２の実施例の受信装置の
後処理回路１６′は、基本的には、第１の実施例の後処
理回路１６と同様で、情報源復号化回路１５によって復
号化された画像データの中の欠落ブロック部分の画像デ
ータを補正する補正処理と、並び替えを元に戻して再生
画像の画像データを作成する合成処理とを行った後に、
再生画像の画像データを画像出力回路１７のフレームメ
モリに出力するものであり、後処理回路１６の内部に画
像データを格納するローカルメモリが設けられている。

【０１０７】そして、ローカルメモリの内部は１画面分
の復号化された画像データ（並び替え画像）が情報源復
号化回路１５によって格納されるエリアａ′と、エリア
ａ′の並び替え画像を垂直方向に並び替えて元に戻した
中間並び替え画像を格納するエリアｂ′と、エリアｂ′
の中間並び替え画像を水平方向に並び替えた再生画像を
格納するエリアｃ′とに分かれている。尚、本実施例で
はローカルメモリ内をエリアａ′とエリアｂ′とエリア
ｃ′とに分けて並び替え画像と中間並び替え画像と再生
画像とを格納するようにしたが、それぞれに対応するメ
モリを別々に設けても構わない。また、後処理回路１
６′における並び替え処理を、２段階に分けて行わず直
接再生画像を作成する方法を採る場合は、エリアｂ′は
不要である。

【０１０８】後処理回路１６′における補正処理の具体
的な処理は、ＲＡＭ１９から欠落ブロックの位置情報を
読み込み、欠落ブロックがある部分画像に対して１つ上
の部分画像において、欠落ブロックに相当する位置のブ
ロックの画像データをローカルメモリのエリアａ′から
読み込んで、欠落ブロック部分に格納（複写）するもの
である。図１３の例では、欠落ブロック（誤り符号化ブ
ロック）が部分画像Ｃ11′に存在するので、１つ上の部
分画像Ｃ01′において、欠落ブロックに相当する位置の
ブロックの画像データを欠落ブロック部分に格納（複
写）するものである。尚、欠落ブロックが部分画像Ｃ(n
-1)0′，…，Ｃ(n-1)(m-1)′に存在する場合は、部分画
像Ｃ00′，…，Ｃ0(m-1)′Ｂ0 ′から複写するものであ
る。

【０１０９】後処理回路１６′における合成処理は、ま
ず垂直方向並び替え処理を行い続いて水平方向並び替え
を行うようになっている。垂直方向並び替え処理の具体
的な処理は、ローカルメモリのエリアａ′に格納されて
いる補正後の並び替え画像の画像データを画素ライン単
位で読み込み、読み込んだ画素のライン番号を部分画像
数ｎで除した時の商と余りによって決定されるローカル
メモリのエリアｂ′のライン番号（位置）に画像データ
を格納していく。

【０１１０】ここで、エリアｂ′における格納ライン番
号の決定（算出）方法は、前処理回路５′における算出
方法と同様で、並び替え画像の水平方向画素数ｔ、部分
画像数ｎとした場合に、並び替え画像のライン番号ｉの
画像データを格納する中間並び替え画像上のライン番号
ｊは、ｉ／ｎ＝商ｘ・・余りｙとすると、ｊ＝ｙ×ｔ／
ｎ＋ｘで算出することができる。

【０１１１】そして、水平方向並び替え処理の具体的な
処理は、第１の実施例における合成処理と全く同様であ
るので、ここでは説明を省略するが、但し、第２の実施
例では水平方向並び替え処理で読み込む画像データは、
ローカルメモリのエリアｂ′に格納されている中間並び
替え画像である。

【０１１２】次に、第２の実施例の画像伝送システムの
動作について、図１４，図１５を使って説明するが、第
１の実施例と同様の構成部分は動作も全く同様であるの
で、第１の実施例と異なる部分についてのみ説明する。
第２の実施例の画像伝送システムは、送信装置におい
て、前処理回路５′が、ローカルメモリのエリアａに格
納された１画面分の原画像の画像データを画素単位で読
み込んで、水平方向に複数の部分画像に並び替えた中間
並び替え画像を作成してローカルメモリのエリアｂに格
納し、更に中間並び替え画像を垂直方向に複数の部分画
像に並び替えた並び替え画像を作成してローカルメモリ
のエリアｃに格納し、並び替え画像格納完了後に、ロー
カルメモリのエリアｃから符号化ブロック単位で画像デ
ータを情報源符号化回路６に出力するものである。

【０１１３】一方、第２の実施例の受信装置において、
後処理回路１６′が、ＲＡＭ１９から欠落ブロックの位
置情報を読み込んで欠落ブロックの補正を行い、補正が
完了したならローカルメモリのエリアａ′に格納されて
いる補正後の並び替え画像の画像データを読み込んで、
垂直方向の並び替えを行って中間並び替え画像を作成
し、一旦ローカルメモリのエリアｂ′に格納し、更に中
間並び替え画像に対して、水平方向の並び替えを行って
並び替えを元に戻す合成処理を行い、合成された再生画
像をローカルメモリのエリアｃ′に格納し、並び替え完
了後に、ローカルメモリのエリアｃ′から画像出力回路
１７のフレームメモリにディジタル画像データを出力す
るものである。

【０１１４】第２の実施例の画像伝送システム及びその
制御方法によれば、送信装置で原画像を水平・垂直方向
にｍ×ｎの部分画像に並び替えて符号化を行い、受信装
置で復号化を行って元の原画像となるよう並び替えるよ
うにしているので、伝送誤り等によって訂正できない欠
落部分があっても、合成された場合に欠落の影響を非常
に小さくすることができる効果がある。

【０１１５】また、第２の実施例の画像伝送システム及
びその制御方法によれば、復号化した部分画像に訂正で
きない欠落部分が存在する場合に、周辺の部分画像から
欠落部分に相当する部分を複写して欠落部分に取り込む
ようにしているので、訂正できない欠落部分を相関度の
高い画像データで補正することができ、欠落部分を簡単
な構成で容易に適正に補正できる効果がある。

【０１１６】

【発明の効果】請求項１，４記載の発明によれば、入力
画像が水平方向にｓ個の画素数で構成されている場合
に、ｓ個の画素の画素番号をｍで割った余りで画素の画
像データをグループ分け、グループ順に並び替えて合成
した画像データを１つの画像として符号化し、誤り訂正
符号を付加して伝送データを伝送路に送信し、伝送路か
ら伝送データを受信して誤り訂正を行い、復号化して各
画素の画像データを本来の画素順となるよう並び替えて
合成する画像伝送方法及び画像伝送システムとしている
ので、訂正できない欠落部分があっても、合成された場
合に欠落の影響を非常に小さくすることができる効果が
ある。

【０１１７】請求項２，５記載の発明によれば、入力画
像が水平方向にｓ個の画素数で構成され、水平方向の画
素ラインが垂直方向にｔ本で構成されている場合に、前
記ｓ個の画素の画素番号をｍで割った時の余りと前記ｔ
本の画素ラインのライン番号をｎで割った余りで画素の
画像データをグループ分け、グループ順に並び替えて合
成した画像データを１つの画像として符号化し、誤り訂
正符号を付加して伝送データを伝送路に送信し、伝送路
から伝送データを受信して誤り訂正を行い、復号化して
各画素の画像データを本来のライン番号順と画素番号順
になるよう並び替えて合成する画像伝送方法及び画像伝
送システムとしているので、訂正できない欠落部分があ
っても、合成された場合に欠落の影響を非常に小さくす
ることができる効果がある。

【０１１８】請求項３，６記載の発明によれば、復号化
したいずれかのグループの画像データに訂正できない誤
りがあると、別のグループから誤りのない画像部分を複
写して誤りのある部分に取り込み、本来のライン番号順
と画素番号順になるように画素の画像データを並び替え
て合成する請求項１，２記載の画像伝送方法及び請求項
４，５記載の画像伝送システムとしているので、訂正で
きない欠落部分を容易に適正に補正できる効果がある。

【図面の簡単な説明】

【図１】本発明の一実施例（第１の実施例）に係る画像
伝送方法における並び替え処理を説明する概略説明図で
ある。

【図２】第１の実施例に係る画像伝送方法における情報
源符号化から伝送、情報源復号化までを説明する概略説
明図である。

【図３】第１の実施例に係る画像伝送方法における合成
処理を説明する概略説明図である。

【図４】第１の実施例の画像伝送方法において、伝送過
程で誤りが発生した場合を説明する説明図である。

【図５】第１の実施例の画像伝送方法において、伝送過
程で誤りが発生して補正を行う場合の補正方法の概略を
説明する説明図である。

【図６】第１の実施例の画像伝送方法を実現する画像伝
送システムの送信装置の構成ブロック図である。

【図７】第１の実施例の画像伝送方法を実現する画像伝
送システムの受信装置の構成ブロック図である。

【図８】第１の実施例の受信装置の後処理回路１６にお
ける補正処理の動作を示すフローチャート図である。

【図９】第２の実施例に係る画像伝送方法における並び
替え処理を説明する概略説明図である。

【図１０】第２の実施例に係る画像伝送方法における情
報源符号化から伝送、情報源復号化までを説明する概略
説明図である。

【図１１】第２の実施例に係る画像伝送方法における合
成処理を説明する概略説明図である。

【図１２】第２の実施例の画像伝送方法において、伝送
過程で誤りが発生した場合を説明する説明図である。

【図１３】第２の実施例の画像伝送方法において、伝送
過程で誤りが発生して補正を行う場合の補正方法の概略
を説明する説明図である。

【図１４】第２の実施例の画像伝送方法を実現する画像
伝送システムの送信装置の構成ブロック図である。

【図１５】第２の実施例の画像伝送方法を実現する画像
伝送システムの受信装置の構成ブロック図である。

【図１６】従来の画像伝送方法及び従来の欠落ブロック
の補正方法を示す説明図である。

【図１７】別の従来の伝送誤り対策としての画像再送方
法を示す説明図である。

【符号の説明】

１…ＣＰＵ、 ２…ＲＯＭ、 ３…カメラ、 ４…画像
入力回路、 ５，５′…前処理回路、 ６…情報源符号
化回路、 ７…通信制御回路、 ８…アンテナ、 １１
…ＣＰＵ、 １２…ＲＯＭ、 １３…アンテナ、 １４
…通信制御回路、 １５…情報源復号化回路、 １６，
１６′…後処理回路、 １７…画像出力回路、 １８…
ディスプレイ

Claims (6)

【特許請求の範囲】
1. 【請求項１】 入力画像を符号化し、誤り訂正符号を付
   加して伝送データとして伝送路に送信し、前記伝送路か
   ら前記伝送データを受信し、誤り訂正を行って画像の復
   号化を行い、画像データを出力する画像伝送方法におい
   て、前記入力画像が水平方向にｓ個の画素数で構成され
   ている場合に、前記ｓ個の画素の画素番号をｍで割った
   時の余りで各画素の画像データをグループ分けし、前記
   グループを順に並び替えて合成した画像データを１つの
   画像として符号化を行い、復号化した画像データについ
   て前記各画素の画像データを画素番号順に並び替える合
   成を行うことを特徴とする画像伝送方法。
2. 【請求項２】 入力画像を符号化し、誤り訂正符号を付
   加して伝送データとして伝送路に送信し、前記伝送路か
   ら前記伝送データを受信し、誤り訂正を行って画像の復
   号化を行い、画像データを出力する画像伝送方法におい
   て、前記入力画像が水平方向にｓ個の画素数で構成さ
   れ、水平方向の画素ラインが垂直方向にｔ本で構成され
   ている場合に、前記ｓ個の画素の画素番号をｍで割った
   時の余りと前記ｔ本の画素ラインのライン番号をｎで割
   った時の余りで各画素の画像データをグループ分けし、
   前記グループを順に並び替えて合成した画像データを１
   つの画像として符号化を行い、復号化した画像データに
   ついて前記各画素の画像データをライン番号順と画素番
   号順に並び替える合成を行うことを特徴とする画像伝送
   方法。
3. 【請求項３】 復号化した画像データについて、グルー
   プ分けした画像の画像データに訂正できない誤りがある
   と、別のグループの画像データから前記誤り部分に相当
   する部分を複写して前記誤り部分に取り込むことを特徴
   とする請求項１又は請求項２記載の画像伝送方法。
4. 【請求項４】 入力画像が記憶される送信側フレームメ
   モリを具備する画像入力回路と、前記送信側フレームメ
   モリ内の画像が水平方向にｓ個の画素数で構成されてい
   る場合に前記ｓ個の画素の画素番号をｍで割った時の余
   りで各画素の画像データをｍ個のグループにグループ分
   けし、前記分けられたグループ順に画像データを格納す
   る送信側ローカルメモリを具備する前処理回路と、前記
   送信側ローカルメモリ内の画像データの符号化を行う情
   報源符号化回路と、前記情報源符号化回路で符号化され
   たデータに誤り訂正符号を付加して伝送データとして伝
   送路に送信する送信側通信制御回路と、前記伝送路から
   伝送データを受信し、付加された誤り訂正符号により誤
   りを検出して訂正を行う受信側通信制御回路と、前記受
   信側通信制御回路で訂正されたデータの復号化を行う情
   報源復号化回路と、前記情報源復号化回路で復号化され
   た画像データを格納する受信側ローカルメモリを具備
   し、前記受信側ローカルメモリ内の画像データを前記前
   処理回路で為された処理とは逆のグループ分けされた画
   像データを画素番号順に並び替える合成処理を行う後処
   理回路と、前記後処理回路で合成された画像データを格
   納する受信側フレームメモリを具備する画像出力回路と
   を有することを特徴とする画像伝送システム。
5. 【請求項５】 入力画像が記憶される送信側フレームメ
   モリを具備する画像入力回路と、前記送信側フレームメ
   モリ内の画像が水平方向にｓ個の画素数で構成され、水
   平方向の画素ラインが垂直方向にｔ本で構成されている
   場合に、前記ｓ個の画素の画素番号をｍで割った時の余
   りと前記ｔ本の画素ラインのライン番号をｎで割った時
   の余りで各画素の画像データをｍ×ｎ個のグループにグ
   ループ分けし、前記分けられたグループ順に画像データ
   を格納する送信側ローカルメモリを具備する前処理回路
   と、前記送信側ローカルメモリ内の画像データの符号化
   を行う情報源符号化回路と、前記情報源符号化回路で符
   号化されたデータに誤り訂正符号を付加して伝送データ
   として伝送路に送信する送信側通信制御回路と、前記伝
   送路から伝送データを受信し、付加された誤り訂正符号
   により誤りを検出して訂正を行う受信側通信制御回路
   と、前記受信側通信制御回路で訂正されたデータの復号
   化を行う情報源復号化回路と、前記情報源復号化回路で
   復号化された画像データを格納する受信側ローカルメモ
   リを具備し、前記受信側ローカルメモリ内の画像データ
   を前記前処理回路で為された処理とは逆のグループ分け
   された画像データをライン番号順と画素番号順に並び替
   える合成処理を行う後処理回路と、前記後処理回路で合
   成された画像データを格納する受信側フレームメモリを
   具備する画像出力回路とを有することを特徴とする画像
   伝送システム。
6. 【請求項６】 受信側通信制御回路が、訂正できない欠
   落部分を検出する受信側通信制御回路であり、後処理回
   路が、前記受信側通信制御回路で検出された訂正できな
   い欠落部分の画像データがいずれかのグループにある時
   に、前記訂正できない欠落部分のないグループの画像デ
   ータから前記訂正できない欠落部分に相当する部分を複
   写して前記訂正できない欠落部分に取り込む後処理回路
   であることを特徴とする請求項４又は請求項５記載の画
   像伝送システム。