JPH0744110A - 視線適応型表示装置 - Google Patents
視線適応型表示装置Info
- Publication number
- JPH0744110A JPH0744110A JP5192103A JP19210393A JPH0744110A JP H0744110 A JPH0744110 A JP H0744110A JP 5192103 A JP5192103 A JP 5192103A JP 19210393 A JP19210393 A JP 19210393A JP H0744110 A JPH0744110 A JP H0744110A
- Authority
- JP
- Japan
- Prior art keywords
- image
- viewpoint
- visual point
- unit
- frame buffer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Position Input By Displaying (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【目的】視線適応型表示装置において，伝送情報量を軽
減し，かつ視線の動きに対応した見やすい画面表示を可
能とすることを目的とする。 【構成】眼球運動情報入力部11と眼球運動検出部12によ
り視点を検出し，視点中心画像走査部15により，視点中
心画像を走査して送る。視点中心画像復元部20は，視点
中心画像を復元し，その画像を出力フレームバッファ21
に蓄積する。そして，視点が移動しても視点中心画像を
残すようにする。表示部22により出力フレームバッファ
21の内容を表示する。
減し，かつ視線の動きに対応した見やすい画面表示を可
能とすることを目的とする。 【構成】眼球運動情報入力部11と眼球運動検出部12によ
り視点を検出し，視点中心画像走査部15により，視点中
心画像を走査して送る。視点中心画像復元部20は，視点
中心画像を復元し，その画像を出力フレームバッファ21
に蓄積する。そして，視点が移動しても視点中心画像を
残すようにする。表示部22により出力フレームバッファ
21の内容を表示する。
Description
【０００１】
【産業上の利用分野】本発明は，例えば画像通信のよう
に限られた伝送路に，視線の動きに応じた映像を送り表
示する視線適応型表示装置に関する。
に限られた伝送路に，視線の動きに応じた映像を送り表
示する視線適応型表示装置に関する。
【０００２】
【従来の技術】従来，注視点を検出し，表示画像を制御
する方法には，視点中心画像を高解像度に，視点周辺画
像を低解像度に表示する装置があった。この装置により
伝送した場合，すべての画像を高解像度で伝送した場合
に比べ，伝送容量の大幅な軽減を計ることができる。
する方法には，視点中心画像を高解像度に，視点周辺画
像を低解像度に表示する装置があった。この装置により
伝送した場合，すべての画像を高解像度で伝送した場合
に比べ，伝送容量の大幅な軽減を計ることができる。
【０００３】
【発明が解決しようとする課題】しかしながら，従来の
表示装置では，視線の動きに十分に追従したサンプリン
グ速度および十分な精度で，視線追跡と表示とを行わな
ければならないので，技術的に実現が難しいという問題
点があった。
表示装置では，視線の動きに十分に追従したサンプリン
グ速度および十分な精度で，視線追跡と表示とを行わな
ければならないので，技術的に実現が難しいという問題
点があった。
【０００４】
【課題を解決するための手段】本発明の視線適応型表示
装置は，上記の問題点を解決するため，利用者の眼球の
動きをとらえる眼球運動情報入力部と，視点の位置を計
算する眼球運動検出部と，入力画像を蓄える入力フレー
ムバッファと，その入力フレームバッファから視点中心
用の画像を走査する視点中心画像走査部と，その画像を
通信網で送るための符号化を行う画像符号化部と，通信
網から受けた画像情報を復号する画像復号化部と，復号
した画像を蓄積する復号バッファと，視点の位置情報と
復号した画像から視点中心画像を復元する視点中心画像
復元部と，その画像を蓄積する出力フレームバッファ
と，その出力フレームバッファの内容を表示する表示部
とを備え，視点が移動しても視点中心画像を残すように
構成される。
装置は，上記の問題点を解決するため，利用者の眼球の
動きをとらえる眼球運動情報入力部と，視点の位置を計
算する眼球運動検出部と，入力画像を蓄える入力フレー
ムバッファと，その入力フレームバッファから視点中心
用の画像を走査する視点中心画像走査部と，その画像を
通信網で送るための符号化を行う画像符号化部と，通信
網から受けた画像情報を復号する画像復号化部と，復号
した画像を蓄積する復号バッファと，視点の位置情報と
復号した画像から視点中心画像を復元する視点中心画像
復元部と，その画像を蓄積する出力フレームバッファ
と，その出力フレームバッファの内容を表示する表示部
とを備え，視点が移動しても視点中心画像を残すように
構成される。
【０００５】
【作用】本発明は，視点を検出し，視点中心画像を表示
し，視点が移動しても視点中心画像を残す。これによ
り，視線の動きに対応した視点中心画像の動きが遅い場
合でも，過去の視点中心画像が残っているために見にく
さを軽減することが可能となる。
し，視点が移動しても視点中心画像を残す。これによ
り，視線の動きに対応した視点中心画像の動きが遅い場
合でも，過去の視点中心画像が残っているために見にく
さを軽減することが可能となる。
【０００６】図２に，従来の表示画面と本発明の表示画
面の違いを示す。従来の視点追従型の表示方法では，例
えば図２（Ａ）に示すように，基本的に視線方向に視点
中心画像Ｓ′として高解像度の画像を表示する。視点の
移動に伴い，視点中心画像Ｓ′も移動するので，視点中
心画像Ｓ′を持続して表示することができない。
面の違いを示す。従来の視点追従型の表示方法では，例
えば図２（Ａ）に示すように，基本的に視線方向に視点
中心画像Ｓ′として高解像度の画像を表示する。視点の
移動に伴い，視点中心画像Ｓ′も移動するので，視点中
心画像Ｓ′を持続して表示することができない。
【０００７】これに対し，本発明によれば，図２（Ｂ）
に示すように，一旦表示した視点中心画像Ｓをフレーム
バッファ上に残すことにより，視点中心用の画像（例え
ば高解像度の画像）を持続して表示することが可能であ
る。
に示すように，一旦表示した視点中心画像Ｓをフレーム
バッファ上に残すことにより，視点中心用の画像（例え
ば高解像度の画像）を持続して表示することが可能であ
る。
【０００８】
【実施例】以下，本発明の実施例を図面を用いて詳細に
説明する。 （１）視点中心画像が矩形の場合 図１は，本発明の一実施例における構成を示す図であ
る。また，図３に，図１中の入力フレームバッファ１４
および出力フレームバッファ２１の説明図を示す。
説明する。 （１）視点中心画像が矩形の場合 図１は，本発明の一実施例における構成を示す図であ
る。また，図３に，図１中の入力フレームバッファ１４
および出力フレームバッファ２１の説明図を示す。
【０００９】入力フレームバッファ１４は必ずしも出力
フレームバッファ２１と同じ大きさ，同じアドレス構成
である必要はないが，ここでは説明を簡単にするため同
じ構成とする。それぞれのフレームバッファの座標は，
左上を（０，０），右下を（ｃ，ｄ）の矩形と仮定す
る。視点中心画像Ｓ１は，ここでは処理を簡単にするた
めにａ画素×ｂ画素の矩形としている。出力フレームバ
ッファ２１の利用者の視点の位置を（ｘ，ｙ）とする。
フレームバッファ２１と同じ大きさ，同じアドレス構成
である必要はないが，ここでは説明を簡単にするため同
じ構成とする。それぞれのフレームバッファの座標は，
左上を（０，０），右下を（ｃ，ｄ）の矩形と仮定す
る。視点中心画像Ｓ１は，ここでは処理を簡単にするた
めにａ画素×ｂ画素の矩形としている。出力フレームバ
ッファ２１の利用者の視点の位置を（ｘ，ｙ）とする。
【００１０】まず，利用者の眼球の動きを，後述する角
膜反射光による方法を用いて眼球運動情報入力部１１で
とらえ，眼球運動検出部１２で視線の方向を計算し，入
力フレームバッファ１４上の視点中心座標（ｘ，ｙ）に
変換し，通信網１７を通して視点中心画像走査部１５へ
送る。
膜反射光による方法を用いて眼球運動情報入力部１１で
とらえ，眼球運動検出部１２で視線の方向を計算し，入
力フレームバッファ１４上の視点中心座標（ｘ，ｙ）に
変換し，通信網１７を通して視点中心画像走査部１５へ
送る。
【００１１】表示画像の送信側では，映像を画像入力部
１３でデジタイズして，入力フレームバッファ１４に蓄
える。視点中心画像走査部１５は，視点中心画像Ｓ１の
範囲，すなわち入力フレームバッファ１４上の（ｘ−ａ
／２，ｙ−ｂ／２）から（ｘ＋ａ／２，ｙ＋ｂ／２）の
範囲を走査する。視点中心画像走査部１５で抽出された
画像は，視点中心座標（ｘ，ｙ）とともに画像符号化部
１６で符号化され，通信網１７を通して画像復号化部１
８へ送られる。
１３でデジタイズして，入力フレームバッファ１４に蓄
える。視点中心画像走査部１５は，視点中心画像Ｓ１の
範囲，すなわち入力フレームバッファ１４上の（ｘ−ａ
／２，ｙ−ｂ／２）から（ｘ＋ａ／２，ｙ＋ｂ／２）の
範囲を走査する。視点中心画像走査部１５で抽出された
画像は，視点中心座標（ｘ，ｙ）とともに画像符号化部
１６で符号化され，通信網１７を通して画像復号化部１
８へ送られる。
【００１２】画像復号化部１８では，視点中心画像Ｓ１
と視点中心座標（ｘ，ｙ）が復号され，復号バッファ１
９に蓄積され，視点中心座標は視点中心画像復元部２０
に送られる。視点中心画像復元部２０では，復号バッフ
ァ１９の内容を，視点中心座標をもとに出力フレームバ
ッファ２１上の（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋
ａ／２，ｙ＋ｂ／２）の範囲へ上書きする形で蓄積す
る。出力フレームバッファ２１の内容は表示部２２へ送
られ，表示される。
と視点中心座標（ｘ，ｙ）が復号され，復号バッファ１
９に蓄積され，視点中心座標は視点中心画像復元部２０
に送られる。視点中心画像復元部２０では，復号バッフ
ァ１９の内容を，視点中心座標をもとに出力フレームバ
ッファ２１上の（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋
ａ／２，ｙ＋ｂ／２）の範囲へ上書きする形で蓄積す
る。出力フレームバッファ２１の内容は表示部２２へ送
られ，表示される。
【００１３】これら視点中心画像の走査，符号化，復号
化，表示を繰り返すことにより，視点中心画像Ｓ１を残
して表示する。図４は，眼球運動情報入力部１１の説明
図である。
化，表示を繰り返すことにより，視点中心画像Ｓ１を残
して表示する。図４は，眼球運動情報入力部１１の説明
図である。
【００１４】本実施例では眼球運動検出法として，角膜
反射光による方法を使っている。赤外線発光ダイオード
４０からの赤外線を，散光板４５，ハーフミラー４１，
ダイクロイックミラー４２を通して眼球に入射すると，
その虚像が角膜内に生じる。この像をダイクロイックミ
ラー４２で反射し，赤外線透過フィルタ４３を透し，赤
外線カメラ４４でとらえることにより眼球の動きを検出
できる。
反射光による方法を使っている。赤外線発光ダイオード
４０からの赤外線を，散光板４５，ハーフミラー４１，
ダイクロイックミラー４２を通して眼球に入射すると，
その虚像が角膜内に生じる。この像をダイクロイックミ
ラー４２で反射し，赤外線透過フィルタ４３を透し，赤
外線カメラ４４でとらえることにより眼球の動きを検出
できる。
【００１５】（２）視点中心画像が楕円形の場合 視点中心画像の形は人間の視力特性から楕円が好まし
い。人間の視力特性を考慮し，視点中心画像を楕円とし
た場合の実施例を説明する。図５に示すように，視点中
心画像Ｓ２は長軸ａ，短軸ｂの楕円とするが，その他の
構成は，視点中心画像が矩形の場合の実施例（１）と同
様である。
い。人間の視力特性を考慮し，視点中心画像を楕円とし
た場合の実施例を説明する。図５に示すように，視点中
心画像Ｓ２は長軸ａ，短軸ｂの楕円とするが，その他の
構成は，視点中心画像が矩形の場合の実施例（１）と同
様である。
【００１６】利用者の眼球の動きを眼球運動情報入力部
１１でとらえ，眼球運動検出部１２で視線の方向を計算
し，入力フレームバッファ１４上の視点中心座標（ｘ，
ｙ）に変換し，通信網１７を通して視点中心画像走査部
１５へ送る。表示画像を画像入力部１３でデジタイズし
て，入力フレームバッファ１４に蓄える。視点中心画像
走査部１５では入力フレームバッファ１４上の座標を
（ＰＸ，ＰＹ）とすると，ＰＹがｙ−ｂからｙ＋ｂの範
囲で，各ＰＹに対しＰＸが，ｘ−ａ｛１−（ＰＹ−ｙ）
2 ／ｂ2 ｝1/2 からｘ＋ａ｛１−（ＰＹ−ｙ）2 ／
ｂ2 ｝1/2 までの範囲で，ＰＸ，ＰＹが共に正の範囲を
走査する。
１１でとらえ，眼球運動検出部１２で視線の方向を計算
し，入力フレームバッファ１４上の視点中心座標（ｘ，
ｙ）に変換し，通信網１７を通して視点中心画像走査部
１５へ送る。表示画像を画像入力部１３でデジタイズし
て，入力フレームバッファ１４に蓄える。視点中心画像
走査部１５では入力フレームバッファ１４上の座標を
（ＰＸ，ＰＹ）とすると，ＰＹがｙ−ｂからｙ＋ｂの範
囲で，各ＰＹに対しＰＸが，ｘ−ａ｛１−（ＰＹ−ｙ）
2 ／ｂ2 ｝1/2 からｘ＋ａ｛１−（ＰＹ−ｙ）2 ／
ｂ2 ｝1/2 までの範囲で，ＰＸ，ＰＹが共に正の範囲を
走査する。
【００１７】視点中心画像走査部１５で抽出された画像
は，視点中心画像Ｓ２とともに画像符号化部１６で符号
化され，通信網１７を通して画像復号化部１８へ送られ
る。画像復号化部１８では視点中心画像Ｓ２と視点中心
座標（ｘ，ｙ）が復号され，復号バッファ１９に蓄積さ
れ，視点中心座標は視点中心画像復元部２０に送られ
る。視点中心画像復元部２０では，復号バッファ１９の
内容を視点中心座標をもとに出力フレームバッファ２１
に次のように蓄積する。すなわち，出力フレームバッフ
ァ２１上の座標を（ＰＸ，ＰＹ）とすると，ｘ−ａ｛１
−（ＰＹ−ｙ）2 ／ｂ2 ｝1/2 からｘ＋ａ｛１−（ＰＹ
−ｙ）2 ／ｂ2 ｝1/2 までの範囲で，ＰＸ，ＰＹが共に
正の範囲を上書きする形で蓄積する。出力フレームバッ
ファ２１の内容は表示部２２へ送られ，表示される。
は，視点中心画像Ｓ２とともに画像符号化部１６で符号
化され，通信網１７を通して画像復号化部１８へ送られ
る。画像復号化部１８では視点中心画像Ｓ２と視点中心
座標（ｘ，ｙ）が復号され，復号バッファ１９に蓄積さ
れ，視点中心座標は視点中心画像復元部２０に送られ
る。視点中心画像復元部２０では，復号バッファ１９の
内容を視点中心座標をもとに出力フレームバッファ２１
に次のように蓄積する。すなわち，出力フレームバッフ
ァ２１上の座標を（ＰＸ，ＰＹ）とすると，ｘ−ａ｛１
−（ＰＹ−ｙ）2 ／ｂ2 ｝1/2 からｘ＋ａ｛１−（ＰＹ
−ｙ）2 ／ｂ2 ｝1/2 までの範囲で，ＰＸ，ＰＹが共に
正の範囲を上書きする形で蓄積する。出力フレームバッ
ファ２１の内容は表示部２２へ送られ，表示される。
【００１８】これら視点中心画像Ｓ２の走査，符号化，
復号化，表示を繰り返すことにより，視点中心画像Ｓ２
を残して表示する。 （３）視点周辺画像を含む静止画像を転送する場合 図３，図６により，視点周辺画像を含む静止画像を転送
する場合の実施例を説明する。図６は，本実施例におけ
る構成図である。
復号化，表示を繰り返すことにより，視点中心画像Ｓ２
を残して表示する。 （３）視点周辺画像を含む静止画像を転送する場合 図３，図６により，視点周辺画像を含む静止画像を転送
する場合の実施例を説明する。図６は，本実施例におけ
る構成図である。
【００１９】利用者の眼球の動きを眼球運動情報入力部
１１でとらえ，眼球運動検出部１２で視線の方向を計算
し，入力フレームバッファ１４上の視点中心座標（ｘ，
ｙ）に変換し，通信網１７を通して視点中心画像走査部
１５へ送る。
１１でとらえ，眼球運動検出部１２で視線の方向を計算
し，入力フレームバッファ１４上の視点中心座標（ｘ，
ｙ）に変換し，通信網１７を通して視点中心画像走査部
１５へ送る。
【００２０】表示画像の送信側では映像を画像入力部１
３でデジタイズして，入力フレームバッファ１４に蓄え
る。視点中心画像走査部１５で視点中心用に（例えば高
解像度，フルカラーで）入力フレームバッファ１４上の
（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋ａ／２，ｙ＋ｂ
／２）を走査する。
３でデジタイズして，入力フレームバッファ１４に蓄え
る。視点中心画像走査部１５で視点中心用に（例えば高
解像度，フルカラーで）入力フレームバッファ１４上の
（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋ａ／２，ｙ＋ｂ
／２）を走査する。
【００２１】全体の画像は視点周辺画像走査部５１で視
点周辺用に（例えば低解像度，モノクロで）入力フレー
ムバッファ１４上の（０，０）から（ｃ，ｄ）を走査す
る。視点中心画像走査部１５と視点周辺画像走査部５１
で抽出された画像は，視点中心座標（ｘ，ｙ）とともに
画像符号化部１６で符号化され，通信網１７を通して送
られる。
点周辺用に（例えば低解像度，モノクロで）入力フレー
ムバッファ１４上の（０，０）から（ｃ，ｄ）を走査す
る。視点中心画像走査部１５と視点周辺画像走査部５１
で抽出された画像は，視点中心座標（ｘ，ｙ）とともに
画像符号化部１６で符号化され，通信網１７を通して送
られる。
【００２２】一方，通信網１７を通して送られた視点中
心画像Ｓ１，視点周辺画像，視点中心座標は，画像復号
化部１８で復号される。復号された視点中心画像Ｓ１，
視点周辺画像は，それぞれ視点中心画像復号バッファ５
２，視点周辺画像復号バッファ５３に蓄積され，視点中
心座標は視点中心画像復元部５４に送られる。視点周辺
画像復元部５５では，出力フレームバッファ２１の
（０，０）から（ｃ，ｄ）へ視点周辺画像復号バッファ
５３の内容を送る。視点中心画像復元部５４では，視点
中心画像Ｓ１と視点中心座標をもとに，出力フレームバ
ッファ上の（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋ａ／
２，ｙ＋ｂ／２）に視点中心画像復号バッファ５２の内
容を上書きする形で蓄積する。出力フレームバッファ２
１の内容は表示部２２へ送られ，表示される。
心画像Ｓ１，視点周辺画像，視点中心座標は，画像復号
化部１８で復号される。復号された視点中心画像Ｓ１，
視点周辺画像は，それぞれ視点中心画像復号バッファ５
２，視点周辺画像復号バッファ５３に蓄積され，視点中
心座標は視点中心画像復元部５４に送られる。視点周辺
画像復元部５５では，出力フレームバッファ２１の
（０，０）から（ｃ，ｄ）へ視点周辺画像復号バッファ
５３の内容を送る。視点中心画像復元部５４では，視点
中心画像Ｓ１と視点中心座標をもとに，出力フレームバ
ッファ上の（ｘ−ａ／２，ｙ−ｂ／２）から（ｘ＋ａ／
２，ｙ＋ｂ／２）に視点中心画像復号バッファ５２の内
容を上書きする形で蓄積する。出力フレームバッファ２
１の内容は表示部２２へ送られ，表示される。
【００２３】これら視点中心画像の走査，符号化，復号
化，表示のみを繰り返すことにより，視点中心画像Ｓ１
を残して表示する。本実施例（３）では，視点中心画像
の形状を矩形として説明したが，実施例（２）と同様の
楕円形でも同じである。
化，表示のみを繰り返すことにより，視点中心画像Ｓ１
を残して表示する。本実施例（３）では，視点中心画像
の形状を矩形として説明したが，実施例（２）と同様の
楕円形でも同じである。
【００２４】（４）視点中心画像を予め定めた表示範囲
に限定する場合 図３，図７，図８により，視点中心画像として，予め定
めた表示範囲を用いる場合の実施例を説明する。
に限定する場合 図３，図７，図８により，視点中心画像として，予め定
めた表示範囲を用いる場合の実施例を説明する。
【００２５】本実施例では，図７のように（ｐｘn ，ｐ
ｙn ）（ｎ＝１，２，…，９）を中心とする視点中心画
像の表示範囲を９つ（ｐｘn −ａ／２，ｐｙn −ｂ／
２）から（ｐｘn ＋ａ／２，ｐｙn ＋ｂ／２）の長方形
の範囲（ただしｎ＝１，２，…，９）だけに限ることに
より，処理の負荷を軽減する。
ｙn ）（ｎ＝１，２，…，９）を中心とする視点中心画
像の表示範囲を９つ（ｐｘn −ａ／２，ｐｙn −ｂ／
２）から（ｐｘn ＋ａ／２，ｐｙn ＋ｂ／２）の長方形
の範囲（ただしｎ＝１，２，…，９）だけに限ることに
より，処理の負荷を軽減する。
【００２６】図８に本実施例の構成例を示す。利用者の
眼球の動きを眼球運動情報入力部１１でとらえ，眼球運
動検出部１２で視線の方向を計算し，入力フレームバッ
ファ１４上の視点中心座標（ｘ，ｙ）に変換する。表示
範囲選択部６１では，ｎ＝１から９で （ｘ−ｐｘn ）2 ＋（ｙ−ｐｙn ）2 が最小になるｎを求め，通信網１７を通して視点中心画
像走査部１５へ送る。表示映像を画像入力部１３でデジ
タイズして，入力フレームバッファ１４に蓄える。視点
中心画像走査部１５で入力フレームバッファ１４上の座
標（ｐｘn ，ｐｙ n ）を中心とする表示範囲，すなわ
ち，（ｐｘn −ａ／２，ｐｙn −ｂ／２）から（ｐｘn
＋ａ／２，ｐｙn ＋ｂ／２）の長方形の範囲を走査す
る。視点中心画像走査部１５で抽出された画像と選択範
囲番号ｎは画像符号化部１６で符号化され，通信網１７
を通して画像復号化部１８へ送られる。画像復号化部１
８では画像と選択範囲番号ｎが復号され，画像は復号バ
ッファ１９に蓄積され，選択範囲番号ｎは視点中心画像
復元部２０へ送られる。視点中心画像復元部２０では，
復号バッファ１９の内容を，出力フレームバッファ２１
上の座標（ｐｘn ，ｐｙn）を中心とする表示範囲，す
なわち，（ｐｘn −ａ／２，ｐｙn −ｂ／２）から（ｐ
ｘn ＋ａ／２，ｐｙn ＋ｂ／２）の長方形の範囲に上書
きする形で蓄積する。出力フレームバッファ２１の内容
は表示部２２へ送られ，表示される。
眼球の動きを眼球運動情報入力部１１でとらえ，眼球運
動検出部１２で視線の方向を計算し，入力フレームバッ
ファ１４上の視点中心座標（ｘ，ｙ）に変換する。表示
範囲選択部６１では，ｎ＝１から９で （ｘ−ｐｘn ）2 ＋（ｙ−ｐｙn ）2 が最小になるｎを求め，通信網１７を通して視点中心画
像走査部１５へ送る。表示映像を画像入力部１３でデジ
タイズして，入力フレームバッファ１４に蓄える。視点
中心画像走査部１５で入力フレームバッファ１４上の座
標（ｐｘn ，ｐｙ n ）を中心とする表示範囲，すなわ
ち，（ｐｘn −ａ／２，ｐｙn −ｂ／２）から（ｐｘn
＋ａ／２，ｐｙn ＋ｂ／２）の長方形の範囲を走査す
る。視点中心画像走査部１５で抽出された画像と選択範
囲番号ｎは画像符号化部１６で符号化され，通信網１７
を通して画像復号化部１８へ送られる。画像復号化部１
８では画像と選択範囲番号ｎが復号され，画像は復号バ
ッファ１９に蓄積され，選択範囲番号ｎは視点中心画像
復元部２０へ送られる。視点中心画像復元部２０では，
復号バッファ１９の内容を，出力フレームバッファ２１
上の座標（ｐｘn ，ｐｙn）を中心とする表示範囲，す
なわち，（ｐｘn −ａ／２，ｐｙn −ｂ／２）から（ｐ
ｘn ＋ａ／２，ｐｙn ＋ｂ／２）の長方形の範囲に上書
きする形で蓄積する。出力フレームバッファ２１の内容
は表示部２２へ送られ，表示される。
【００２７】これら視点中心画像の走査，符号化，復号
化，表示を繰り返すことにより，視点中心画像を残して
表示する。本実施例も，実施例（２）と同様，視点中心
画像の形状を楕円形とすることも可能である。
化，表示を繰り返すことにより，視点中心画像を残して
表示する。本実施例も，実施例（２）と同様，視点中心
画像の形状を楕円形とすることも可能である。
【００２８】
【発明の効果】以上説明したように，本発明によれば，
視点を検出し，中心視部分を高品質で伝送し，視点が移
動しても高品質の部分を残すことにより，中心視部分の
高品質の映像を伝送するため，伝送情報量の軽減ができ
る。
視点を検出し，中心視部分を高品質で伝送し，視点が移
動しても高品質の部分を残すことにより，中心視部分の
高品質の映像を伝送するため，伝送情報量の軽減ができ
る。
【図１】本発明の実施例（１）および（２）における構
成を示す図である。
成を示す図である。
【図２】従来の表示画面と本発明の表示画面の例を示す
図である。
図である。
【図３】視点中心画像が矩形の場合における入力および
出力フレームバッファの説明図である。
出力フレームバッファの説明図である。
【図４】眼球運動情報入力部の説明図である。
【図５】視点中心画像が楕円の場合における入力および
出力フレームバッファの説明図である。
出力フレームバッファの説明図である。
【図６】本発明の実施例（３）における構成を示す図で
ある。
ある。
【図７】本発明の実施例（４）における入力および出力
フレームバッファの説明図である。
フレームバッファの説明図である。
【図８】本発明の実施例（４）における構成を示す図で
ある。
ある。
１１ 眼球運動情報入力部 １２ 眼球運動検出部 １３ 画像入力部 １４ 入力フレームバッファ １５ 視点中心画像走査部 １６ 画像符号化部 １７ 通信網 １８ 画像復号化部 １９ 復号バッファ ２０ 視点中心画像復元部 ２１ 出力フレームバッファ ２２ 表示部
Claims (1)
- 【請求項１】 映像を伝送し表示する装置において表示
器上の利用者の視点を検出し，表示映像を制御する視線
適応型表示装置であって，利用者の眼球の動きをとらえ
る眼球運動情報入力部と，視点の位置を計算する眼球運
動検出部と，入力画像を蓄える入力フレームバッファ
と，前記入力フレームバッファから視点中心用の画像を
走査する視点中心画像走査部と，その画像を通信網で送
るための符号化を行う画像符号化部と，通信網から受け
た画像情報を復号する画像復号化部と，復号した画像を
蓄積する復号バッファと，視点の位置情報と復号した画
像から視点中心画像を復元する視点中心画像復元部と，
その画像を蓄積する出力フレームバッファと，その出力
フレームバッファの内容を表示する表示部とを備え，視
点が移動しても視点中心画像を残すようにしたことを特
徴とする視線適応型表示装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5192103A JPH0744110A (ja) | 1993-08-03 | 1993-08-03 | 視線適応型表示装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5192103A JPH0744110A (ja) | 1993-08-03 | 1993-08-03 | 視線適応型表示装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0744110A true JPH0744110A (ja) | 1995-02-14 |
Family
ID=16285711
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP5192103A Pending JPH0744110A (ja) | 1993-08-03 | 1993-08-03 | 視線適応型表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0744110A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1124603A (ja) * | 1997-07-04 | 1999-01-29 | Sanyo Electric Co Ltd | 情報表示装置及び情報収集装置 |
| JP2003519982A (ja) * | 1999-12-30 | 2003-06-24 | スイスコム・モバイル・アクチエンゲゼルシヤフト | 画像データを伝送するための方法 |
| JP2004007421A (ja) * | 2002-05-31 | 2004-01-08 | Innotive Corp | ネットワークを介した大容量高品質デジタルイメージのリアルタイムサービス方法 |
-
1993
- 1993-08-03 JP JP5192103A patent/JPH0744110A/ja active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1124603A (ja) * | 1997-07-04 | 1999-01-29 | Sanyo Electric Co Ltd | 情報表示装置及び情報収集装置 |
| JP2003519982A (ja) * | 1999-12-30 | 2003-06-24 | スイスコム・モバイル・アクチエンゲゼルシヤフト | 画像データを伝送するための方法 |
| JP2004007421A (ja) * | 2002-05-31 | 2004-01-08 | Innotive Corp | ネットワークを介した大容量高品質デジタルイメージのリアルタイムサービス方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7068813B2 (en) | Method and apparatus for eye gazing smart display | |
| US9720238B2 (en) | Method and apparatus for a dynamic “region of interest” in a display system | |
| US6919907B2 (en) | Anticipatory image capture for stereoscopic remote viewing with foveal priority | |
| US7129981B2 (en) | Rendering system and method for images having differing foveal area and peripheral view area resolutions | |
| US6078349A (en) | Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent | |
| US5675376A (en) | Method for achieving eye-to-eye contact in a video-conferencing system | |
| US20020118339A1 (en) | Eye tracking display apparatus | |
| US20030198393A1 (en) | Foveal priority in stereoscopic remote viewing system | |
| JPH08313843A (ja) | 視線追従方式による広視野高解像度映像提示装置 | |
| JPH0759032A (ja) | 画像ディスプレー装置 | |
| JP2010050645A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
| EP3763117B1 (en) | Display apparatus and method of displaying using light source and controllable scanning mirror | |
| JP2000152125A (ja) | ヘッドマウントディスプレイ装置 | |
| JPH0744110A (ja) | 視線適応型表示装置 | |
| JPH11237581A (ja) | ヘッドマウントディスプレイ装置 | |
| JPH01141479A (ja) | 視線検出を利用した画像通信装置 | |
| JP2507913B2 (ja) | 投射方式による眼球運動追従型視覚提示装置 | |
| Peli | Simple 1-D image enhancement for head-mounted low vision aid | |
| JPH0222989A (ja) | テレビ電話装置 | |
| JP2743381B2 (ja) | 動画像信号の復号化方式 | |
| JPH06343174A (ja) | テレビ通信装置 | |
| JPH0822038B2 (ja) | 眼球運動追従型視覚提示装置 | |
| CN111131775A (zh) | 一种广角镜头多视窗调焦方法及系统 | |
| JPH0638142A (ja) | 視線追従型ヘッドマウントディスプレイ | |
| JP2000194490A (ja) | 視線検出装置 |