JP3263278B2

JP3263278B2 - 画像圧縮通信装置

Info

Publication number: JP3263278B2
Application number: JP15173195A
Authority: JP
Inventors: 元治福田; 正則小沢; 修司阿部
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1995-06-19
Filing date: 1995-06-19
Publication date: 2002-03-04
Anticipated expiration: 2017-03-04
Also published as: JPH099253A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は、画像データにデータ
圧縮処理を施してデータ量を削減する画像データ圧縮処
理装置に係り、特に静止画もしくは動画像を画像配信セ
ンターから複数の端末へ通信ケーブルを介して伝送する
のに有効な画像圧縮通信装置に関する。

【０００２】

【従来の技術】周知のように、画像データの圧縮技術が
進歩し、実用化されている。動画の圧縮処理方式として
は、ＭＰＥＧ(Moving Picture Coding Experts Group)
方式がある。この動画圧縮処理では、入力画像情報の特
性に応じてデータ圧縮動作が行なわれる。

【０００３】例えば、動画における画像動きベクトルに
基づいて、フレーム間差を得るための予測画像データを
作成したり、また、出力する画像データのデータ量に基
づいて、量子化係数を切り替えたりしている。

【０００４】一方、静止画圧縮については、例えば特開
平３−７０３６７号，特開平４−２８２１２９号公報等
に、観察者の視線に基づいて中心視野の情報は低圧縮率
に、周辺視野の情報は高圧縮率に圧縮する技術が示され
ている。

【０００５】この技術は、まず、画像データに基づいて
画像を再生表示している。そして、視線追跡カメラ等に
よって、再生表示された画像を観察する観察者の視線を
追跡している。その後に、この画像データ圧縮装置は、
視線追跡カメラによる視線追跡結果に基づいて、画像の
各部分領域ごとの観察時間を求め、この観察時間の長さ
に基づいて、観察時間の短い部分領域ほど高圧縮率とな
るように、画像データにデータ圧縮処理を施している。

【０００６】しかしながら、上記視線追跡タイプの画像
データ圧縮装置では、動画に対し、観察者の視線に基づ
いて適応的に画像圧縮を行なうという技術は実現されて
いない。また、圧縮された画像データを再生表示した場
合、観察者の視線に追従してどの領域でも高画質が補償
されるというわけではない。

【０００７】

【発明が解決しようとする課題】以上のように、従来の
画像データ圧縮装置では、動画に対しては、観察者の視
線に基づく高能率な画像圧縮は実現されておらず、ま
た、視線追跡タイプの装置にあっては、圧縮された画像
データが再生された場合において、観察者の視線に追従
してどの領域でも高画質が補償されるということはな
い。

【０００８】そこで、この発明の目的は、静止画像や動
画像に関わらずに観察者の体感画質を低下させることな
く、高い画像圧縮率を実現し、しかも通信経路の伝送負
荷を減少させることができ、多数の端末に画像の情報を
送信し得る画像圧縮通信装置を提供することにある。

【０００９】

【課題を解決するための手段】この発明に係る画像圧縮
通信装置は、画像を表す画像データを出力するための画
像データ供給手段と、画像データ供給手段から出力され
た画像データにデータ圧縮処理を施すことによって狭帯
域化させるデータ圧縮処理手段と、データ圧縮処理手段
の出力である圧縮データを伝送させる画像データ伝送手
段と、画像データ伝送手段の出力である圧縮データを伸
長して元の画像データに戻すデータ伸長手段と、データ
伸長手段の出力データに基づいて、画像を画面に再生表
示する再生表示手段と、再生表示手段に表示された画面
を観察する観察者の視線を追跡して検出する視線検出手
段と、視線検出手段の出力である視線データをデータ圧
縮処理手段に伝送する視線情報伝送手段とを備え、デー
タ圧縮処理手段は、視線情報伝送手段からの視線データ
に基づいて、視線近傍である中心視野の画像データは低
圧縮率に、視線から遠ざかる周辺視野ほど高圧縮率にな
るように画像データに前記データ圧縮処理を施し、かつ
視線データに基づき観察者の視線の移動を検出した場合
に、視線の移動方向を示す視線移動ベクトルを合成し、
この視線移動ベクトルの延長線上を将来の中心視野と
し、予め低圧縮率でデータ圧縮処理を施す手段を有する
ものである。

【００１０】

【００１１】

【作用】上記のような構成によれば、視線データに基づ
いて、観察者の視線近傍である中心視野の画像データは
低圧縮率に、観察者の視線から遠ざかる周辺視野ほど高
圧縮率になるように画像データにデータ圧縮処理を施し
ているので、観察者の体感画質を低下させることなく、
全体的な画像データ圧縮率を上げることができる。この
ため、従来よりも高い画像圧縮率を実現し、しかも通信
経路の伝送負荷を減少させることができる。

【００１２】

【実施例】以下、この発明の一実施例について図面を参
照して詳細に説明する。図１において、図中符号１１は
画像サーバで、その内部に予め圧縮された画像データで
ある一次圧縮データＤ１が磁気ディスク，磁気テープあ
るいは光ディスク媒体からなる記憶装置１１ａによって
蓄えられている。そして、この記憶装置１１ａに蓄えら
れた一次圧縮データＤ１は、二次圧縮装置１１ｂの一方
の入力端に供給される。この二次圧縮装置１１ｂは、１
２Ｍｂｐｓの帯域をもつ一次圧縮データＤ１を、他方の
入力端から供給される視線データＤ２に基づいて再圧縮
することで、帯域４Ｍｂｐｓの二次圧縮データＤ３に生
成する。すなわち、この画像サーバ１１は、画像データ
にデータ圧縮処理を施し、狭帯域化させるものである。
なお、記憶装置１１ａには、予め圧縮された画像データ
が蓄えられているが、圧縮されていない画像データを蓄
えるようにしてもよい。

【００１３】そして、画像サーバ１１の出力である二次
圧縮装置１１ｂの二次圧縮データＤ３は、伝送ケーブル
１２を伝送して、画像再生装置１３に供給される。この
画像再生装置１３において、二次圧縮装置１１ｂから出
力された二次圧縮データＤ３は、伸長装置１３ａに供給
される。伸長装置１３ａは、入力された二次圧縮データ
Ｄ３を伸長し、ビデオ信号Ｓ１に変換している。つま
り、この伸長装置１３ａは、圧縮した画像データを元に
戻していることになる。そして、画像再生装置１３の出
力である伸長装置１３ａのビデオ信号Ｓ１は、ヘッドマ
ウントディスプレイ１４内の画面表示部１５に供給され
る。

【００１４】ヘッドマウントディスプレイ１４は、観察
者１６が頭に装着するもので、その中が画面表示部１
５，光学系部品１７，視線検出カメラ１８，スピーカ１
９等で構成されている。このうち、画面表示部１５は、
画像再生装置１３から出力されたビデオ信号Ｓ１に基づ
いて、上記画像サーバ１１から送信された画像を画面に
再生表示するものである。なお、この画面表示部１５に
は、液晶表示装置や投影式表示装置等が考えられる。そ
して、この画面表示部１５に再生表示された画像を光学
系部品１７を介して観察する観察者１６は、その眼球１
６ａの像が視線検出カメラ１８によって検出される。

【００１５】光学系部品１７は、画面表示部１５の虚像
を画面表示部１５より遠方に結像するための凸レンズを
主に構成したものである。また、スピーカ１９は、二次
圧縮データＤ３と同じ伝送路を時分割多重で送信される
音声信号によって駆動される。

【００１６】そして、視線検出カメラ１８によって検出
された視線検出信号Ｓ２は画像再生装置１３に供給され
る。この画像再生装置１３において、視線検出信号Ｓ２
は、視線データ処理装置１３ｂに供給される。この視線
データ処理装置１３ｂは、視線検出信号Ｓ２にマトリッ
クス変換処理を施すことにより、視線データＤ２を生成
し、この視線データＤ２を画像再生装置１３の出力とし
て伝送ケーブル１２を介して、画像サーバ１１の二次圧
縮装置１１ｂに出力している。

【００１７】再び二次圧縮装置１１ｂは、画像再生装置
１３から出力された視線データＤ２に基づいて、視線近
傍である中心視野の画像データを低圧縮率に、視線から
遠ざかる周辺視野ほど高圧縮率になるように、画像デー
タまたは一次圧縮データＤ１にデータ圧縮処理を施して
いる。

【００１８】なお、この実施例において、全体をカメラ
としてもよいし、また、画面表示部１５をテレビジョン
画面またはモニタとしてもよい。図２は、上記視線検出
カメラ１８の詳細を示している。すなわち、図２（ａ）
において、視線検出カメラ１８は、ＣＣＤ(Charge Coup
led Device) １８ａ，集光レンズ１８ｂ及び照明用の赤
外線ＬＥＤ(Light Emitting Diode)１８ｃで構成されて
いる。赤外線ＬＥＤ１８ｃは、赤外線を観察者１６の眼
球１６ａ全体に照射している。観察者１６の眼球１６ａ
は、赤外線を受光することにより、ＣＣＤ１８ａによっ
て検出されやすくなる。

【００１９】ＣＣＤ１８ａは、図２（ｂ）に示すよう
に、眼球１６ａに赤外線ＬＥＤ１８ｃからの赤外線が照
射されている範囲であるパターン認識エリア１８ｄの像
を集光レンズ１８ｂを介して検出し、この検出結果に対
応する視線検出信号Ｓ２を視線データ処理装置１３ａに
出力するようにしている。この視線検出信号Ｓ２は、視
線データ処理装置１３ｂ内でパターン認識され、これに
より虹採エッジ１６ａ１と瞳孔１６ａ２との位置関係が
検出される。このため、観察者１６が画面表示部１５の
どの部分に視線を注いでいるかを表す視線データＤ２が
得られる。

【００２０】すなわち、この視線データＤ２は、画面の
座標データであり、縦軸，横軸用とも０〜１０００の範
囲の値（１０ｂｉｔ）を取っている。このデータは両眼
用である必要があり、また毎秒３０回出力されるため、
約１２０ｂｐｓとなる。

【００２１】図３は、眼球１６ａ運動の個人差を補正す
るためのキャリブレーション方式を示している。すなわ
ち、キャリブレーションは、新規の観察者１６につい
て、個人差に関するデータを視線データ処理装置１３ｂ
に登録する作業である。この作業は、上記画面表示部１
５の略４隅に配置されているマーク１５ａ，１５ｂ，１
５ｃ，１５ｄを、観察者１６が視線で追う作業である。
ここで、マーク１５ａ，１５ｂ，１５ｃ，１５ｄは、順
に点灯されるようになっており、観察者１６は、これら
のマーク１５ａ，１５ｂ，１５ｃ，１５ｄを順に視線で
追いながら、図示しないボタンを押すようにしている。
このボタンを押すことによって、観察者１６の虹採エッ
ジ１６ａ１と瞳孔１６ａ２との位置が設定され、この設
定位置が視線データ処理装置１３ｂに登録される。そし
て、これら虹採エッジ１６ａ１と瞳孔１６ａ２との位置
関係から、視線データＤ２を得る変換マトリックスが視
線データ処理装置１３ｂ内で生成される。

【００２２】一方、図４は、人間の視線特性を示してい
る。なお、図４（ａ）は視野の大きさを示しており、図
４（ｂ）は視野と視力との関係を示している。ここで、
図４（ａ）は、観察者１６が視線を動かさないで、一度
に見ることができる範囲を示している。すなわち、観察
者１６は、その左右の眼において、上下左右で約６０度
の広がりで見ることができる。

【００２３】また、図４（ｂ）において、縦軸は視力の
相対値を示し、横軸は観察者１６に対する中心視野Ａか
らの視野の広がり度数を示している。観察者１６の視力
は、網膜上の中心視野Ａから１°２０´の範囲で最もよ
く、中心視野Ａから図中矢印Ｂで示す周辺視野の方向へ
離れていくに従い、急激に減少している。つまり、中心
視野Ａほど視力が高く高精細に視覚でき、周辺視野Ｂに
向かうほど視力が低下し、高精細に視覚できなくなるこ
とを示している。このため、画像表示において、中心視
野Ａは高精細に表示される必要があるが、周辺視野Ｂは
それほど高精細に表示されなくても知覚上問題ないこと
がわかる。要するに、この原理を利用して、周辺視野Ｂ
に関するデータ量を削減することによって、画像データ
全体の量を削減できる。この人間の視線特性について
は、文献（テレビジョン学会編，「画像情報圧縮」，オ
ーム社，平成３．８．２５）等に説明されている。

【００２４】図５は、画面表示部１５と画角θ０との関
係を説明するための断面図を示している。ここで、画面
表示部１５は、右部１５ｅと左部１５ｆとで独立に示さ
れている。右部１５ｅは観察者１６の右眼球１６ｂに対
応し、左部１５ｆは観察者１６の左眼球１６ｃに対応す
るように配置されている。観察者１６は、両眼球１６
ｂ，１６ｃにおいて、画角９０度の範囲で光学系部品１
７ａ，１７ｂを介して右部１５ｅ，左部１５ｆの同一画
像を見ることができる。この図５では、画角θ０を９０
°としているが、これは、１００インチの画面を１ｍ離
れたところから観察した迫力を提供できるためである。
この場合、光学系部品１７ａ，１７ｂの虚像距離は１ｍ
となる。

【００２５】ところで、画面表示部１５に二眼立体視を
表示させる場合には、右部１５ｅと左部１５ｆとの画像
は異なるものとなる。図６は、視野領域とそれに対応す
る画像表示部１５の圧縮領域との関係を示している。図
６では、あたかも１枚を両眼で観察しているように表示
しているが、実際には、上述したように両眼の画像１５
ｅ，１５ｆは別々に存在している。ここでは、観察者１
６の視野の範囲を画角θで示している。また、画面表示
部１５の画像において、−１０°＜θ＜１０°の領域を
中心視野Ａ、その外側で−２５°＜θ＜２５°の領域を
周辺視野Ｂ、その外側で−４５°＜θ＜４５°を周辺視
野Ｃ、その外部を外周視野Ｄとしている。そして、画面
表示部１５に圧縮処理を施すことによって、中心視野Ａ
の面積比は約６％、周辺視野Ｂは約３１％、周辺視野Ｃ
は約７０％となる。

【００２６】図７は、体感視野と二次圧縮率との関係を
示している。ここでは、視野の範囲を画角θで示し、ま
た画角θによって表示領域を３分割している。すなわ
ち、−１０°＜θ＜１０°の領域を中心視野α、その外
側で−２３°＜θ＜２３°の領域を周辺視野β、その外
部を外周視野γとしている。中心視野αは観察者１６の
視力が高く高精細に表示しなければならないので圧縮率
を１／１（低圧縮率）に、周辺視野βは少し視力が低下
するため圧縮率を１／３（中圧縮率）に、外周視野γは
視力がかなり低下しているため圧縮率を１／６（高圧縮
率）に圧縮されている。

【００２７】また、中心視野α，周辺視野β及び外周視
野γの面積比は、それぞれ７％，２８％，６５％とな
り、これにより総合的な圧縮率は約１／３（０．３１）
となる。一方、観察者１６の視線が画面表示部１５の周
辺視野βに片寄った場合、中心視野α，周辺視野β及び
外周視野γの面積比は、それぞれ変化するが、総合的な
圧縮率が１／３より大きくなることはない。

【００２８】図８は、上記二次圧縮装置１１ｂの詳細を
示している。ここでは、直交変換，量子化，可変長符号
化手段等を用いた方法で予め圧縮された一次圧縮データ
Ｄ１（動画像）を、二次圧縮する具体的な方法を示して
いる。

【００２９】一次圧縮データＤ１は、直交変換としてＤ
ＣＴ（ＤｉｓｃｒｅａｔＣｏｓｉｎｅＴｒａｎｓｆ
ｏｒｍ）を用いた高能率符号化方式で圧縮されたデータ
である。ＤＣＴは、画面上の隣接するｍ×ｎ画素のブロ
ック単位で画素データを空間周波数成分等の直交成分に
変換するものである。これにより空間的な相関成分が削
除可能になる。直交変換された変換係数は、所定の量子
化幅で量子化されることにより、ブロックの信号の冗長
度が削減される。

【００３０】さらに、量子化出力は、ハフマン符号等の
可変長符号を施されることにより、データ量を一層削減
される。このハフマン符号は、量子化出力の統計的符号
量から算出した結果に基づいて、符号化を行なうもので
あり、出現確率の高いデータには短い符号に、出現確率
の低いデータには長い符号に符号化することによって全
体としてのデータ量を削減している。

【００３１】一方、ＭＰＥＧなどの圧縮方式では、直交
変換，量子化，可変長符号化の他に、フレーム間圧縮を
取り入れたハイブリット方式を採用している。これは、
直交変換を用いた画面内圧縮（フレーム内圧縮）の他
に、フレーム間の相関を利用して時間軸方向の冗長度を
削減する圧縮方式である。

【００３２】フレーム間圧縮は、一般の動画像が時間的
に前後のフレームでよく似ているという性質を利用して
前後のフレームの差分を求め、その差分値を符号化する
ことによってデータ量を一層削減するものである。特
に、画像の動きを予測してフレーム間差を求めることに
よって予測誤差（差分値）を低減する動き補償付フレー
ム間予測符号化が有効である。ここで、フレーム間予測
を用いて得た予測誤差は、直交変換，量子化，可変長符
号化等の処理が施される。このように圧縮することによ
って、時間軸方向，空間軸方向の冗長度が削減される。

【００３３】このようにＤＣＴを用いて圧縮された一次
圧縮データＤ１が二次圧縮装置１１ｂに供給される。二
次圧縮装置１１ｂにおいて、入力端子１１ｂ１に供給さ
れた一次圧縮データＤ１は、二次量子化部１１ｂ２及び
パラメータ書き換え部１１ｂ３にそれぞれ供給される。
二次量子化部１１ｂ２は、供給された一次圧縮データＤ
１のＤＣＴ変換係数を可変長復合して再量子化処理を行
なっている。また、二次量子化部１１ｂ２から出力され
た再量子化データＤ４は、マルチプレクサ１１ｂ４を介
して量子化幅制御部１１ｂ５に供給される。

【００３４】量子化幅制御部１１ｂ５は、端子１１ｂ６
に供給される視線データＤ２に基づいて、供給された再
量子化データＤ４から量子化幅データＤ５を生成してい
る。すなわち、量子化幅制御部１１ｂ５は、中心視野α
ならば細かい量子化幅，外周視野γならば粗い量子化幅
の量子化幅データＤ５を二次量子化部１１ｂ２に供給し
ている。

【００３５】すなわち、二次量子化部１１ｂ２は、量子
化幅制御部１１ｂ５から出力された量子化幅データＤ５
に基づいて、入力端子１１ｂ１に供給された一次圧縮デ
ータＤ１の再量子化を行なっている。そして、再量子化
された一次圧縮データＤ１の係数は、可変長符号化され
て再量子化データＤ４となり、マルチプレクサ１１ｂ４
の一方の入力端に供給される。

【００３６】一方、パラメータ書き換え部１１ｂ３は、
量子化幅制御部１１ｂ５から出力された量子化幅データ
Ｄ５に基づいて、一次圧縮データＤ１中の量子化パラメ
ータ等の圧縮情報を書き換えて、この書き換えた圧縮情
報Ｄ６をマルチプレクサ１１ｂ４の他方の入力端に供給
している。マルチプレクサ１１ｂ４は、再量子化データ
Ｄ４と圧縮情報Ｄ６とを多重して二次圧縮データＤ３を
生成し、この二次圧縮データＤ３が二次圧縮装置１１ｂ
の出力として出力端子１１ｂ７から取り出される。ま
た、二次圧縮データＤ３の符号量は、量子化幅制御部１
１ｂ５へフィードバックされて、この符号量が所望のデ
ータ量になるように量子化幅データＤ５を制御してい
る。

【００３７】図９は、例えば４×４のＤＣＴ変換係数を
取り上げ、中心視野α，周辺視野β，外周視野γのそれ
ぞれにおける係数削除方法を示している。すなわち、符
号化された一次圧縮データＤ１は、復合化されることに
より、ＤＣＴデータ２０に再生される。ＤＣＴデータ２
０において、低周波成分は１５等の大きな値を持つが、
高周波成分はほとんど０になる。そして、中心視野αの
場合はＤＣＴデータ２０を１で再量子化（×１倍）し、
周辺視野βである場合は２で再量子化（×１／２倍）
し、外周視野γである場合は４で再量子化（×１／４
倍）している。すると、周辺視野βの二次圧縮データが
ＤＣＴデータ２０の１／２倍となり、外周視野γの二次
圧縮データがＤＣＴデータ２０の１／４倍となる。な
お、変換係数の成分である変換係数値１は、１／２倍，
１／４倍に圧縮されると変換係数値０となる。

【００３８】ここで、図１０は、ジグザグスキャンを説
明するために示している。図中符号２１は変換係数で、
０〜１５までの数字を示している。これらの数字は、ジ
グザグスキャンされる順に示すものとする。すなわち、
０から１へは、右横方向へスキャンされる。そして、１
から２へは左斜め下方向へ、２から３へは下方向へ、３
から４へは右斜め上方向へと順にスキャンされることに
なる。すると、ジグザグスキャンされた順に符号化され
ることになる。

【００３９】再び図９に戻って示すと、中心視野αの二
次圧縮ＤＣＴデータは、ジグザグスキャンされると、１
５，９，０，２，１，２，１，０，０，１，０，１，
０，１，１，０という順に符号化されることになる。ま
た、周辺視野βの二次圧縮ＤＣＴデータは、ジグザグス
キャンされると、７，４，０，１，０，１という順に符
号化されることになる。さらに、外周視野γの二次圧縮
ＤＣＴデータは、ジグザグスキャンされると、４，２と
いう順に符号化されることになる。なお、零係数のみが
連続する場合は、その時点で削除している。

【００４０】すなわち、これら４×４の変換係数をジグ
ザグスキャンして１次元に並び替え、零係数の連続数と
その次に現れる非零係数とを組み合わせて、ある２次元
ハフマン符号表を使用して２次元可変長符号化した結
果、中心視野αは４２ｂｉｔとなり、周辺視野βは１８
ｂｉｔとなり、外周視野γは７ｂｉｔとなる。なお、最
後の連続非零係数は、符号化されなくてもよい。

【００４１】そして、４２ｂｉｔの中心視野α，１８ｂ
ｉｔの周辺視野β及び７ｂｉｔの外周視野γには、各面
積比７％，２８％及び６５％が乗算され、これら乗算結
果の合計が約１３ｂｉｔとなる。つまり、４２ｂｉｔの
一次圧縮データＤ１の１／３倍以下に圧縮されているこ
とになる。このため、観察者１６に認識されにくい外周
視野γの場合は粗い量子化幅が二次量子化部１１ｂ２に
与えられることによって情報量が削減され、観察者１６
が注目している中心視野αの場合は細かい量子化幅が二
次量子化部１１ｂ２に与えられて、画質を損なわないよ
うにすることによって、体感画質を損なわずに低ビット
レート化することが可能になる。

【００４２】また、このように視線データＤ２を用いて
圧縮することによって、同じ符号量で視線データＤ２を
用いずに圧縮した場合と比較して、観察者１６の注目点
における割り当て符号量が多くなるため、体感画質は改
善される。つまり、同じ体感画質を得るために必要な符
号量を、視線データＤ２を用いることによって低ビット
レート化することができる。

【００４３】図１１は、他の二次圧縮装置２２の詳細を
示している。二次圧縮装置２２において、入力端子２２
ａに供給された一次圧縮データＤ１は、変換係数削除部
２２ｂに供給される。変換係数削除部２２ｂは、観察者
１６の視野領域に基づいて、一次圧縮データＤ１の変換
係数の削除を行なって二次圧縮データＤ３を生成してい
る。この二次圧縮データＤ３は、一方では二次圧縮装置
２２の出力として出力端子２２ｃから取り出され、他方
では符号量制御部２２ｄに供給される。

【００４４】符号量制御部２２ｄは、端子２２ｅに供給
される視線データＤ２に基づいて、削除する係数を決定
し、この係数削除データＤ７を変換係数削除部２２ｂに
供給している。また、符号量制御部２２ｄは、出力端子
２２ｃから取り出される二次圧縮データＤ３の符号量を
監視しており、二次圧縮データＤ３が所望の符号量に収
まるように、削除する係数を決定する。

【００４５】図１２は、他の二次圧縮装置２２における
例えば４×４のＤＣＴ変換係数を取り上げ、中心視野
α，周辺視野β，外周視野γのそれぞれにおける係数削
除方法を示している。なお、太枠で囲まれた係数は、各
視野α，β，γにおける伝送係数例を示したものであ
る。

【００４６】ここで、中心視野αの領域である場合は１
６個の係数全てを、周辺視野βでは９個の係数を、外周
視野γでは３個の係数を伝送するようにしている。図中
の（）で囲った係数は、上記図１０に示したようにジグ
ザグスキャンを行ない、零係数の連続数と、その後に現
れる非零係数とを組み合わせて一つの符号語を割り当て
る単位となっている。すなわち、周辺視野βは、ジグザ
グスキャンすることによって零係数が２回以上連続した
場合、その後に続く係数を打ち切るようにしている。ま
た、外周視野γは、ジグザグスキャンすることによって
零係数が存在した場合、その時点で係数を打ち切るよう
にしている。

【００４７】これら各視野α，β，γの係数は、２次元
ハフマン符号表を用いてハフマン符号化が行なわれる
と、それぞれ４２ビット，２７ビット，１５ビットとな
る。すなわち、二次圧縮装置２２は、中心視野αの領域
では伝送する直交変換係数の数を多く、外周視野γの領
域では伝送する直交変換係数の数を少なくすることによ
って再圧縮処理を施すようにしている。このため、観察
者１６の注目点は画面の劣化が起こらず、視覚感度の低
い外周視野γは、その符号量が削減されて、これにより
全体としての発生符号量が削減される。なお、各視野
α，β，γの伝送する直交変換係数の数は、発生符号量
を監視している符号量制御部２２ｄによって決定され
る。

【００４８】以上のように、二次圧縮する手段は、直交
変換を行なう圧縮方式を用いていれば、フレーム間圧縮
が用いられていても使用することが可能となる。しかし
ながら、フレーム間圧縮を用いている場合は、観察者１
６の視点が移動した際に、中心視野αの画質改善時間が
視点の移動した時間に対して遅れることもある（視線追
跡遅れ）。また、伝送遅れ，演算遅れも視線追跡遅れの
原因になる。

【００４９】以下、上記視線追跡遅れを削減する方法を
説明する。図１３は、意図的に低圧縮（高精細）部分を
残す二次圧縮に関する画面を示している。これは、上述
してきた視線データＤ２に基づく二次圧縮とは別に、画
像データの作成者の意図により、低圧縮部分を残す圧縮
方法である。

【００５０】ここで、画面表示部１５における中心視野
αは、この時点で、観察者１６が実際に視線を注いでい
る領域である。一方、象徴画像領域δは、図示しない画
像作成者が、観察者１６に特に注視を促したい、あるい
は注ぐ可能性が高いと判断した領域である。この象徴画
像領域δは、この時点で、視線を注がれているわけでは
ないが、圧縮率が１／１にされている。このため、観察
者１６は、象徴画像領域δに気づき易くなり、ここに視
線を注ぐ可能性が増大することになる。また、視線追跡
遅れによる違和感を回避できる。なお、象徴画像領域δ
としては、急に大きさや形が変化するもの、注意を喚起
するためのメッセージ，字幕等が考えられる。

【００５１】これを実現するためには、例えば画像作成
者が一次圧縮データＤ１に対して、これ以上の圧縮を禁
止するというコードを挿入しておくことにより、図示し
ない制御回路が圧縮率を変えないように、作動すること
で達成される。

【００５２】図１４は、視線移動ベクトルを利用した中
心視野α予測に関する画面を示している。図１４におい
て、画面表示部１５の画面左上から右下の方向へ移動し
ている象徴画像（図中では彗星の像を示す）１５ｇが表
示されている。このような移動する象徴画像１５ｇがあ
る場合には、観察者１６は、視線を象徴画像１５ｇに追
従させて見ることが多い。そして、移動した視線に沿っ
て視線移動ベクトル２３を合成できる。例えば、０．１
秒前の中心視野α１から現在の中心視野α２を直線で結
ぶことによって合成できることになる。すなわち、この
視線移動ベクトル２３は、図中点線で示すようなベクト
ル２４上に延長される。この延長された領域（例えば
０．１秒後の位置）は、予測中心視野α３として予め低
圧縮率に二次圧縮される。

【００５３】以上のような先回り圧縮処理により、視線
追跡遅れによる違和感が回避できることになる。ここ
で、先回り圧縮処理において、領域の決め方について説
明する。すなわち、この決め方には、常に一定距離先を
予測中心視野α３として処理する方法と、視線移動ベク
トル２３の延長線上に別の象徴画像がある場合には、そ
の象徴画像を含む領域とする方法とがある。

【００５４】図１５は、この発明の第２の実施例を示し
ている。図１５において、図中符号２５はビデオサーバ
で、その内部に予め圧縮された画像データである一次圧
縮データＤ８が磁気ディスク，磁気テープあるいは光デ
ィスク媒体からなる記憶装置２５ａによって蓄えられて
いる。そして、この記憶装置２５ａに蓄えられた一次圧
縮データＤ８は、信号送出装置２５ｂに供給される。こ
の信号送出装置２５ｂは、１２Ｍｂｐｓの帯域をもつ一
次圧縮データＤ８を、ビデオサーバ２５の出力として１
００Ｍｂｐｓの広帯域ケーブル（光ケーブル）２６に送
出している。

【００５５】広帯域ケーブル２６では、大量遠隔転送が
実現でき、さらに８チャンネル多重ができる。また、広
帯域ケーブル２６は、ビデオサーバ２５から送出された
一次圧縮データＤ８を、二次圧縮装置２７及び画像再生
装置２８にそれぞれ供給している。画像再生装置２８
は、１２Ｍｂｐｓ以上の帯域のローカルケーブル（同軸
ケーブル）２９を介して供給された一次圧縮データＤ８
にデータ伸長等の画像再生処理を施している。この画像
再生処理が施された信号Ｓ３は、テレビモニタ３０に供
給される。そこで、１２Ｍｂｐｓ以上の帯域のローカル
ケーブル２９を持つ観察者３１は、二次圧縮していない
画像データを利用できるので、画像再生装置２８とテレ
ビモニタ３０とで画像を観察できる。

【００５６】また、二次圧縮装置２７は、広帯域ケーブ
ル２６から供給された一次圧縮データＤ８を再圧縮する
ことで、帯域４Ｍｂｐｓの二次圧縮データＤ９に生成す
る。そして、二次圧縮データＤ９は、４Ｍｂｐｓの狭帯
域ケーブル（より対線）３２を介して画像再生装置３３
に供給され、画像再生処理が施された後、そのビデオ信
号Ｓ４に変換され、観察者３４が頭に装着しているヘッ
ドマウントディスプレイ３５に供給される。

【００５７】ヘッドマウントディスプレイ３５におい
て、視線検出カメラによって検出された視線検出信号Ｓ
５は、画像再生装置３３に供給されて視線データＤ１０
に生成され、二次圧縮装置２７に供給される。さらに、
二次圧縮装置２７は、視線データＤ１０に基づいて、供
給された一次圧縮データＤ８に再圧縮処理を施すことに
なる。なお、二次圧縮装置２７には、複数本の狭帯域ケ
ーブル３２が接続されている。

【００５８】ここで、４Ｍｂｐｓの狭帯域ケーブル３２
を持つ観察者３４は、二次圧縮装置２７を用いて画像デ
ータ圧縮する必要があり、さらに、画像再生装置３３及
びヘッドマウントディスプレイ３５を必要としている。
また、二次圧縮装置２７のユニットは観察者３４ごとに
必要であるが、これを数個から数１０個まとめたセグメ
ントを、地域ごとにまとめて設置・管理する方法が望ま
しい。つまり、その設置場所から観察者３４のいる世帯
まで、狭帯域ケーブル３２を敷設するようにすることで
ある。また、セグメント間は、基幹ネットワークを構成
する広帯域ケーブル２６で連結するようにしている。こ
のため、ケーブル敷設費用の削減を図ることが可能にな
る。

【００５９】すなわち、第２の実施例では、広帯域ケー
ブル２６の利用による大量遠隔転送と、二次圧縮処理を
画像再生装置３３の近くで行なうことによる伝送遅れの
回避が実現できる。

【００６０】図１６は、上記第１の実施例の二次圧縮処
理とは別の第１の二次圧縮処理を示している。図１６
（ａ）において、フレームａ１〜ａ４は、二次圧縮前の
画像の連続である。すなわち、画像は、フレームａ１，
ａ２，ａ３，ａ４という順に伝送される。なお、画像内
における図中円で示す領域は、中心視野αである。

【００６１】また、図１６（ｂ）において、フレームｂ
１〜ｂ４は、観察者が図中十字印を注視し続けていると
仮定したときの二次圧縮後の画像の連続である。すなわ
ち、画像は、フレームｂ１，ｂ２，ｂ３，ｂ４という順
に伝送される。なお、画像における視野のクラス分類
は、説明簡略化のため、中心視野αと外周視野γとの２
種類としている。

【００６２】フレームｂ１〜ｂ４において、中心視野α
１〜α４は、図１６（ａ）に示すように、二次圧縮前の
４フレーム分の画像データがそのまま伝送されている。
一方、外周視野γ１〜γ４では、画像データの更新がフ
レームｂ１，ｂ３の２回のみ行なわれている。すなわ
ち、外周視野では、画像の更新が正規の１／２回しか行
なわれていないことになる。その間、外周視野γ２の領
域では、外周視野γ１の画像をそのまま表示する。ま
た、外周視野γ４も同様に外周視野γ３の画像をそのま
ま表示する。つまり、この第１の二次圧縮処理は、高圧
縮率の領域である外周視野では画像伝送の間隔を、低圧
縮率の領域よりも長くすることにより再圧縮を施すよう
にしている。このため、外周視野γ１〜γ４において
は、情報伝送量が約１／２になる。

【００６３】そこで、外周視野γ１〜γ４では映像の変
化の滑らかさが犠牲になるわけであるが、外周視野γ１
〜γ４では観察者の目の解像度が低いので、あまり気に
ならない。また、図１６（ｂ）において、被写体である
自動車が分断されたり中間部が抜けてしまったようにな
っているが、これは、フレーム間の動きを誇張している
ために起きている現象で、実際の連続した画面の動きは
わずかであるため、このような極端な変形は起きない。
また、視野のクラス分類も実際には２段階よりも多く、
もっと段階的に分割されるので、画像の不自然さは意識
されにくい。さらに、この第１の二次圧縮処理は、上記
二次圧縮装置２７で面内圧縮を行なう（フレーム間圧縮
は行なわない）映像システムに有効に適用されるように
なっている。

【００６４】図１７は、第２の二次圧縮処理に関する視
野のクラス分類を示している。図１７において、図中符
号３６は画面で、中心視野３６αと外周視野３６βとに
分類されている。この画面３６において、観察者は、十
字印３７に視線を注いでいるものとしている。なお、第
２の二次圧縮処理において、周辺視野は、説明簡略化の
ため、省略されている。また、第２の二次圧縮処理は、
中心視野３６αの領域からブロック３８αを抜き出し、
外周視野３６βの領域からブロック３８βを抜き出し
て、再圧縮を行なうようにしている。

【００６５】そこで、図１８は、上記ブロック３８α，
３８γの二次圧縮の具体例を示している。ここで、ブロ
ック３８αは中心視野３６α内のブロックであるから、
一次圧縮のままのデータが送られてくるため、デコード
動作も一次圧縮データをデコードするだけである。図
中、斜視的に示された四辺形は伝送されてくる画像デー
タを抽象化したものであり、その大きさは画像データに
関する情報量の大きさの目安を示している。なお、図中
四辺形は、上記画面３６に対応したものである。

【００６６】ここで、一次圧縮においては上述したよう
な動き画像のフレーム間圧縮技術が適用されている。つ
まり、数フレームに一度、イニシャルデータと称される
ブロック全体の画像データＩ１が伝送されてくるので、
これはそのまま画面３６に表示される。その後、次のイ
ニシャルデータＩ２が伝送されるまでは、各フレームの
ブロック内の映像は、前フレームとの動きベクトルと差
分データからなる中間データＰ１〜Ｐ４で示されること
になる。要するに、フレーム間圧縮の冗長性を間引くフ
レーム間圧縮を行なっていることになる。ここで、中間
データＰ１〜Ｐ４は、イニシャルデータＩ１，Ｉ２より
も情報量が少ないため、毎フレームごとにイニシャルデ
ータを送るよりも情報圧縮効果が大きい。

【００６７】また、図１８（ｂ）において、外周視野３
６γの領域にあるブロック３８γは、上記ブロック３８
αに比較して、中間データを伝送する回数を減らしてい
る。しかも、中間データＰ２，Ｐ４は、動きベクトルの
みを含み、差分データを省略している。すなわち、ブロ
ック３８γにおいては、フレーム間圧縮を行なうことに
より、伝送すべき差分データを間引いて再圧縮を行なっ
ていることになる。このため、通常の動画像を伝送する
場合において、ブロック３８γの領域のデータ転送量
は、平均的に見ると、上記ブロック３８αのデータ量に
比較してはるかに少なくなる。もちろん、ブロック３８
γにおける画像は、中間データＰ２，Ｐ４を付加してい
くことによって、イニシャルデータＩ１との誤差を含む
ようになるが、外周視野３６γでは観察者の目の解像度
が低いので、画像劣化をさほど意識しないで済むことに
なる。

【００６８】図１９は、ブロック３８α及びブロック３
８γの動きベクトル決定法及び伝送法を示している。図
１９（ａ）において、イニシャルデータＩ１は、ブロッ
ク全体の画像データであり、そのまま上記画面３６に表
示される。イニシャルデータＩ１には、ブロック３８α
とブロック３８α１とが含まれている。次に伝送される
中間データＰ１において、例えばブロック３８αのエリ
アは、その前フレームの図中点線で示すブロック３８α
１と最も類似していたとする。なお、中間データＰ１に
は、ブロック３８α２が表示されている。すると、中間
データＰ１のブロック３８αを表示するのに必要とする
信号は、中間データＰ１のブロック３８αの信号と画面
全体であるイニシャルデータＩ１のブロック３８α１と
の差分信号と、ベクトル３９とで生成されることにな
る。これら差分信号及びベクトル３９は、一次圧縮時に
求められており、一次圧縮データ中に符号化されてい
る。

【００６９】すなわち、中心視野３６αは、差分信号及
びベクトル３９を一次圧縮データのまま上記画像再生装
置１３へ供給される。また、中間データＰ２も同様に、
前フレームのブロック３８α２との差分信号を求めるよ
うにしている。これを次のイニシャルデータが伝送され
るまで繰り返せばよく、原信号に忠実な画像が常に再現
できる。

【００７０】一方、図１９（ｂ）におけるブロック３８
γでは、イニシャルデータＩ１が、２フレーム分の期間
に渡り画面３６に表示される。なお、２フレーム目に来
るべき中間データＰ１は伝送されない（従ってカッコで
示す）。次に、３フレーム目の画像データである中間デ
ータＰ２では、ブロック３８γが２フレーム前のイニシ
ャルデータＩ１におけるどのブロックと類似していたか
を追跡し、そのブロッックを表示する。このブロックの
表示方法について以下に述べる。

【００７１】まず、ブロックの表示方法は、１フレーム
前の画像である中間データＰ１における最類似ブロック
３８γ２と、動きベクトル４０とを求めることである。
これら最類似ブロック３８γ２及び動きベクトル４０
は、いずれも一次圧縮時にすでに求められており符号化
されているので、可変長復号すれば求められる。その後
に、１フレーム前のイニシャルデータＩ１における最類
似ブロック３８γ１を求め、これにより動きベクトル４
１が求められる。

【００７２】これらの操作により、結局、中間データＰ
２のブロック３８γは、２フレーム前のイニシャルデー
タＩ１における３８γ１を、動きベクトル４０と動きベ
クトル４１との合成ベクトルに基づいて移動させること
により、近似的に表示される。しかも、そのために必要
とする情報としては、動きベクトル４０，４１の情報の
みでよいので、伝送情報を大幅に削減することが可能に
なる。しかも、観察者の目の解像度が低い外周視野３６
γであるので、近似による誤差や、２フレーム毎しか画
面が更新されないことに起因する不自然さは、観察者に
認識されにくい。

【００７３】図２０は、動きベクトル４０を求めるため
の具体的な回路構成を示している。一次圧縮装置でフレ
ーム間圧縮を行なっている場合、上記各ブロック３８
α，３８γの動きベクトル３９，４０，４１は、すでに
求められて可変長符号化されている。入力端子４２に供
給された一次圧縮データの動きベクトルの可変長符号Ｈ
１は、ＭＶ−ＶＬＤ（ＭｏｖｉｎｇＶｅｃｔｏｒ−Ｖ
ａｒｉａｂｌｅＬｅｎｇｔｈＤｅｃｏｄｅｒ）４
３に供給される。ＭＶ−ＶＬＤ４３は、入力端子４２に
供給された動きベクトルの可変長符号Ｈ１を可変長復号
することにより、元の動きベクトル信号Ｖ１に生成して
いる。この動きベクトル信号Ｖ１は、加算器４４及びメ
モリ４５にそれぞれ供給されている。

【００７４】メモリ４５は、供給された動きベクトル信
号Ｖ１を１フレーム分蓄積し、さらに上記中間データＰ
１の送られない動きベクトル成分を蓄積するようにして
いる。そして、メモリ４５には、中心視野３６αの動き
ベクトル３９が送られている部分において、零ベクトル
が書き込まれる。

【００７５】中間データＰ１は、ＭＶ−ＶＬＤ４３で可
変長復号された動きベクトル信号Ｖ１に基づいて、上記
ブロック３８γ２を含んでいる４つのブロック（図１９
中に示すブロック３８γと、その図中上、左、左上の計
４ブロック）の持つイニシャルデータＩ１からの動きベ
クトル位置情報を、回線４６を介してメモリ４５に伝送
している。メモリ４５は、４つのブロックの動きベクト
ル成分から１つの動きベクトル成分を生成し、その動き
ベクトル４１を加算器４４に出力している。なお、４つ
のベクトル成分から１つの動きベクトル成分を生成する
には、４つの動きベクトルの平均を求めてもよいし、ブ
ロック３８γ２を含む面積に応じて重み付けを行なって
平均してもよい。

【００７６】さらに、厳密に動きベクトル４１を求める
方法としては、二次圧縮装置において、イニシャルデー
タＩ１及び中間データＰ１のデコード画面を再現し、中
間データＰ１におけるブロック３８γの最類似ブロック
３８γ１をイニシャルデータＩ１の中で探し、直接ブロ
ック３８γと最類似ブロック３８γ１との動きベクトル
を求めるようにしてもよい。この場合、動きベクトル４
１の検出精度は、上述した平均を求める方法よりも高く
なるが、その反面回路規模が大きくなる。

【００７７】また、加算器４４では、メモリ４５から出
力された動きベクトル４１とＭＶ−ＶＬＤ４３から出力
された動きベクトル４０である動きベクトル信号Ｖ１と
を加算している。そして、加算結果である合成動きベク
トル信号Ｖ２は、ＭＶ−ＶＬＣ（動きベクトル可変長符
号化装置）４７によって、可変長符号化され、出力端子
４８から取り出される。このようにして、中間データＰ
２のブロック３８γは、イニシャルデータＩ１のブロッ
ク３８γ１で置換されることにより、近似的な再生が行
なわれることになる。

【００７８】したがって、上記した各実施例によれば、
観察者の体感画質低下させることなく、従来以上の高い
画像圧縮率を実現し、通信経路の伝送負荷を減少させる
ことができる。このため、限られた伝送容量において、
従来方式と比較して、より大きい画面の情報を送信で
き、あるいはより多数の端末に画像を送信できる。

【００７９】

【発明の効果】以上詳述したようにこの発明によれば、
静止画像や動画像に関わらずに観察者の体感画質を低下
させることなく、高い画像圧縮率を実現し、しかも通信
経路の伝送負荷を減少させることができ、多数の端末に
画像の情報を送信し得る画像圧縮通信装置を提供するこ
とができる。

【図面の簡単な説明】

【図１】この発明に係る画像圧縮通信装置の一実施例を
示すブロック構成図。

【図２】同実施例における視線検出を説明するために示
す図。

【図３】同実施例における眼球運動の個人差を補正する
ためのキャリブレーション方式を説明するために示す
図。

【図４】同実施例における人間の視力特性を説明するた
めに示す図。

【図５】同実施例における画面表示部と画角θ０との関
係を説明するために示す断面図。

【図６】同実施例における視野領域と画像表示部の圧縮
領域との関係を説明するために示す図。

【図７】同実施例における体感視野と二次圧縮率との関
係を説明するために示す図。

【図８】同実施例における二次圧縮装置の詳細を示すブ
ロック構成図。

【図９】同二次圧縮装置におけるＤＣＴ変換係数の概念
を示す図。

【図１０】同ＤＣＴ変換係数をジグザクスキャンする方
法を説明するために示す図。

【図１１】同実施例における他の二次圧縮装置の詳細を
示すブロック構成図。

【図１２】同他の二次圧縮装置におけるＤＣＴ変換係数
の概念を示す図。

【図１３】同実施例における意図的に低圧縮（高精細）
部分を残す二次圧縮を説明するために示す図。

【図１４】同実施例における視線移動ベクトルを利用し
た中心視野予測を説明するために示す図。

【図１５】この発明の第２の実施例を示すブロック構成
図。

【図１６】この発明の第１の二次圧縮処理を示す画像の
模式図。

【図１７】この発明の第２の二次圧縮処理における視野
のクラス分類を説明するために示す図。

【図１８】同第２の二次圧縮処理における視野領域内の
ブロックのデコードを説明するために示す斜視図。

【図１９】同第２の二次圧縮処理における視野領域内の
ブロックの動きベクトル決定法及び伝送法を説明するた
めに示す図。

【図２０】同第２の二次圧縮処理における外周視野内の
ブロックの動きベクトルを決定するために示すブロック
構成図。

【符号の説明】

１１…画像サーバ、１１ａ…記憶装置、１１ｂ…二次圧
縮装置、１１ｂ１…入力端子、１１ｂ２…二次量子化
部、１１ｂ３…パラメータ書き換え部、１１ｂ４…マル
チプレクサ、１１ｂ５…量子化幅制御部、１１ｂ６…端
子、１１ｂ７…出力端子、１２…伝送ケーブル、１３…
画像再生装置、１３ａ…伸長装置、１３ｂ…視線データ
処理装置、１４…ヘッドマウントディスプレイ、１５…
画面表示部、１５ａ…マーク、１５ｂ…マーク、１５ｃ
…マーク、１５ｄ…マーク、１５ｅ…右部、１５ｆ…左
部、１５ｇ…象徴画像、１６…観察者、１６ａ…眼球、
１６ａ１…虹採エッジ、１６ａ２…瞳孔、１６ｂ…右眼
球、１６ｃ…左眼球、１７…光学系部品、１７ａ…光学
系部品、１７ｂ…光学系部品、１８…視線検出カメラ、
１８ａ…ＣＣＤ、１８ｂ…集光レンズ、１８ｃ…赤外線
ＬＥＤ、１９…スピーカ、２０…ＤＣＴデータ、２１…
変換係数、２２…二次圧縮装置、２２ａ…入力端子、２
２ｂ…変換係数削除部、２２ｃ…出力端子、２２ｄ…符
号量制御部、２２ｅ…端子、２３…視線移動ベクトル、
２４…ベクトル、２５…ビデオサーバ、２５ａ…記憶装
置、２５ｂ…信号送出装置、２６…広帯域ケーブル、２
７…二次圧縮装置、２８…画像再生装置、２９…ローカ
ルケーブル、３０…テレビモニタ、３１…観察者、３２
…狭帯域ケーブル、３３…画像再生装置、３４…観察
者、３５…ヘッドマウントディスプレイ、３６…画面、
３６α…中心視野、３６γ…外周視野、３７…十字印、
３８α…ブロック、３８α１…ブロック、３８α２…ブ
ロック、３８γ…ブロック、３８γ１…ブロック、３８
γ２…ブロック、３９…ベクトル、４０…動きベクト
ル、４１…動きベクトル、４２…入力端子、４３…ＭＶ
−ＶＬＤ、４４…加算器、４５…メモリ、４６…回線、
４７…ＭＶ−ＶＬＣ、４８…出力端子。

───────────────────────────────────────────────────── フロントページの続き (72)発明者阿部修司神奈川県横浜市磯子区新杉田町８番地株式会社東芝マルチメディア技術研究所内 (56)参考文献特開平１−141479（ＪＰ，Ａ) 特開昭53−35313（ＪＰ，Ａ) 特開平１−289388（ＪＰ，Ａ) 特開平５−37914（ＪＰ，Ａ) 特開平４−306094（ＪＰ，Ａ) 特開平５−145830（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 7/24 - 7/68

Claims

(57)【特許請求の範囲】

【請求項１】画像を表す画像データを出力するための
画像データ供給手段と、前記画像データ供給手段から出力された前記画像データ
にデータ圧縮処理を施すことによって狭帯域化させるデ
ータ圧縮処理手段と、前記データ圧縮処理手段の出力である圧縮データを伝送
させる画像データ伝送手段と、前記画像データ伝送手段の出力である圧縮データを伸長
して元の前記画像データに戻すデータ伸長手段と、前記データ伸長手段の出力データに基づいて、前記画像
を画面に再生表示する再生表示手段と、前記再生表示手段に表示された前記画面を観察する観察
者の視線を追跡して検出する視線検出手段と、前記視線検出手段の出力である視線データを前記データ
圧縮処理手段に伝送する視線情報伝送手段とを備え、前記データ圧縮処理手段は、前記視線情報伝送手段から
の視線データに基づいて、前記視線近傍である中心視野
の画像データは低圧縮率に、前記視線から遠ざかる周辺
視野ほど高圧縮率になるように前記画像データに前記デ
ータ圧縮処理を施し、かつ前記視線データに基づき観察
者の視線の移動を検出した場合に、前記視線の移動方向
を示す視線移動ベクトルを合成し、この視線移動ベクト
ルの延長線上を将来の前記中心視野とし、予め低圧縮率
で前記データ圧縮処理を施す手段を有することを特徴と
する画像圧縮通信装置。