JPH08336128A

JPH08336128A - 映像視聴装置

Info

Publication number: JPH08336128A
Application number: JP7328255A
Authority: JP
Inventors: Yoshihisa Nishigori; 義久錦織; Satoru Inagaki; 悟稲垣
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 1995-04-05
Filing date: 1995-11-21
Publication date: 1996-12-17

Abstract

(57)【要約】【課題】視聴者がどの部分を観察していてもボケのな
い常に良好な映像を観察することができる映像視聴装置
を提供する。【解決手段】撮影手段１００，１０１によって撮影さ
れた複数の映像を伝送手段１０２により伝送し、画像処
理回路１０３，１０４に入力する。画像処理回路Ａ１０
３では、ヘッドマウントディスプレイ１０７を装着した
視聴者の視点情報から、視聴者の観察している部分が最
も鮮明に撮影されている映像を選択する。この映像をヘ
ッドマウントディスプレイ１０７に出力する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、遠隔地の映像を観
察することができる映像視聴装置に関するものである。

【０００２】

【従来の技術】従来の第１の遠隔映像視聴装置として図
１７に示されるものがある。図１７において、１８００
は複数のカメラを組み合わせて広角で撮影を行う広角撮
影カメラ、１８０１は広角撮影カメラからの画像の一部
を切り出す画像処理回路、１８０２はヘッドマウントデ
ィスプレイで装着者の頭の位置及び方向を検出する頭部
センサが組み込まれている。

【０００３】このように構成された従来の遠隔映像視聴
装置において、広角撮影カメラ１８００では、カメラの
設置点の周囲３６０度の風景が撮影され、撮影された映
像は画像処理回路１８０１に入力される。一方ヘッドマ
ウントディスプレイ１８０２を装着した観察者の頭部方
向の情報が、頭部センサにより検出されて画像処理回路
１８０１に入力される。画像処理回路１８０１では、頭
部センサからの入力に基づき、広角撮影カメラ１８００
によって撮影された映像の中から、観察者の見ている方
向付近の画像を切り出して、ヘッドマウントディスプレ
イ１８０２に出力する。そうすれば観察者は、自分の見
たい方向の画像を見ることができ、あたかも自分が広角
撮影カメラ１８００の位置にいるかのごとく映像を鑑賞
することができる。

【０００４】又第２の従来の遠隔映像視聴装置には図１
８に示されるものもある。図１８において、１９００及
び１９０１は撮像装置であり、夫々１９００は右目用撮
像装置、１９０１は左眼用撮像装置である。１９０２は
撮像装置１９００及び１９０１の向きを制御する駆動
部、１９０３は駆動部１９０２を制御する制御回路、１
９０４は観察者の頭の位置及び方向を検出する頭部セン
サが組み込まれているヘッドマウントディスプレイであ
る。

【０００５】上記のように構成された従来の遠隔映像視
聴装置において、ヘッドマウントディスプレイ１９０４
に組み込まれた頭部センサにより観察者の頭部方向が検
出されると、制御回路１９０３に入力される。制御回路
１９０３では、前記頭部センサの出力に基づき、観察者
の頭の方向に撮像装置１９００及び１９０１を向けるよ
うな制御信号が出力される。駆動部１９０２は制御回路
１９０３の出力信号である制御信号に基づき撮像装置１
９００及び１９０１を駆動する。

【０００６】このようにして撮像装置１９００及び１９
０１の撮像方向が決定され、撮像された画像がヘッドマ
ウントディスプレイ１９０４に表示される。

【０００７】

【発明が解決しようとする課題】しかしながらこのよう
な従来の第１の遠隔映像視聴装置では、広角撮影カメラ
の焦点が固定されているために、観察者が観察している
画像中でも、焦点の合っている箇所は非常に限定されて
しまう。全ての撮像対象が広角撮影カメラから一定の距
離に存在していれば問題ないが、一般的には距離が異な
る位置に撮像対象がある場合が多い。即ち、観察者から
は表示画像中の一部分にしか焦点のあっていない非常に
ぼやけた画像しか観察できない。

【０００８】又第２の従来の遠隔映像視聴装置では、観
察者の頭部方向を検出した後、その方向へ撮像装置を向
けるために、システムの遅れ時間が少なからず発生して
しまう。このため、観察者の頭の動きに対してレスポン
スが悪く、非常に違和感を感じてしまう。

【０００９】本発明は上記の課題に留意し、焦点距離の
異なる撮影カメラを複数台備え焦点の合った画像を撮影
することにより、視聴者に画像のボケによる違和感を低
減し、臨場感の強い映像を提供することを目的としてい
る。

【００１０】又これに加えて観察者の頭部運動を予測し
て撮像装置を駆動することにより、レスポンスを良く
し、遅れ時間による違和感を低減することを目的として
いる。

【００１１】

【課題を解決するための手段】本願の請求項１〜７の発
明は、視聴者より遠隔に設置された複数の撮影手段と、
この撮影手段の出力を伝送する伝送手段と、この伝送手
段により伝送された前記複数の撮影手段よりの映像信号
を入力信号として、あたかも前記撮影手段のある場所に
いるかのような画像を作成する画像処理手段とを備える
ことを特徴とするものである。

【００１２】本願の請求項８〜１４の発明は、視聴者よ
り遠隔に設置された複数の撮影手段と、この撮影手段の
出力を伝送する伝送手段と、この伝送手段により伝送さ
れた前記複数の撮影手段よりの映像信号を入力信号とし
て、視聴者び着目する物体の形状と表面の模様を検出し
て、視聴者が好む位置より見たかのような画像を作成す
る画像処理手段とを備えることを特徴とするものであ
る。

【００１３】本願の請求項１５〜２１の発明は、視聴者
より遠隔に設置された一つの撮影手段と、この撮影手段
の出力を伝送する伝送手段と、この伝送手段により伝送
された前記複数の撮影手段よりの映像信号を入力信号と
して、あたかも前記撮影手段のある場所にいるかのよう
な画像を作成する画像処理手段とを備えることを特徴と
するものである。

【００１４】本願の請求項２２〜２８の発明は、視聴者
より遠隔に設置された複数の撮影手段と、この撮影手段
の出力を記録する記録手段と、この記録手段により蓄積
された前記複数の撮影手段よりの映像信号を入力信号と
して、あたかも前記撮影手段のある場所にいるかのよう
な画像を作成する画像処理手段とを備えることを特徴と
するものである。

【００１５】本願の請求項２９〜３５の発明は、視聴者
より遠隔に設置された複数の撮影手段と、この撮影手段
の出力を記録する記録手段と、この記録手段により蓄積
された前記複数の撮影手段よりの映像信号を入力信号と
して、視聴者の着目する物体の形状と表面の模様を検出
して、視聴者が好む位置より見たかのような画像を作成
する画像処理手段とを備えることを特徴とするものであ
る。

【００１６】本願の請求項３６〜４２の発明は、視聴者
より遠隔に設置された一つの撮影手段と、この撮影手段
の出力を記録する記録手段と、この記録手段により蓄積
された前記撮影手段よりの映像信号を入力信号として、
あたかも前記撮影手段のある場所にいるかのような画像
を作成する画像処理手段とを備えることを特徴とするも
のである。

【００１７】本願の請求項４３〜４７の発明は、視聴者
より遠隔に設置され視聴者の要求信号に応じて動く可動
式撮影手段と、この可動撮影手段の出力及び前記視聴者
の要求信号を伝送する伝送手段と、この伝送手段の出力
である映像信号を、視聴者が自然に見える様に処理し、
且つ前記視聴者の要求信号を伝送手段に出力する画像処
理手段とを備えることを特徴とするものである。

【００１８】本願の請求項４８〜５２の発明は、視聴者
より遠隔に設置され視聴者の要求信号に応じて動く可動
式撮影手段と、この可動撮影手段の出力及び前記視聴者
の要求信号を伝送する伝送手段と、この伝送手段の出力
である映像信号より、視聴者が着目する物体の形状と模
様を検出し視聴者が好む位置より見たかの映像を作成
し、且つ前記視聴者の要求信号を伝送手段に出力する画
像処理手段とを備えることを特徴とするものである。

【００１９】本願の請求項５３〜５９の発明は、複数の
視聴者より遠隔に設置された視聴者の要求信号に応じて
動く可動式撮影手段と、この可動式撮影手段の出力であ
る映像信号を伝送する伝送手段と、この伝送手段の出力
である映像信号を、複数の視聴者夫々が自然に見える様
に処理し、且つ前記視聴者の要求信号を出力する複数の
画像処理手段と、この複数の映像信号処理手段の出力で
ある複数の要求信号を一つの要求信号にまとめて、前記
伝送手段に出力する選択手段を備えることを特徴とする
ものである。

【００２０】本願の請求項６０〜６６の発明は、複数の
視聴者より遠隔に設置された視聴者の要求信号に応じて
動く可動式撮影手段と、この可動式撮影手段の出力であ
る映像信号を伝送する伝送手段と、この伝送手段の出力
である映像信号より、夫々の視聴者が着目する物体の形
状と模様を検出し視聴者が好む位置より見たかの映像を
作成し、且つ前記視聴者の要求信号を伝送手段に出力す
る複数の画像処理回路と、この複数の映像信号処理手段
の出力である複数の要求信号を一つの要求信号にまとめ
て、前記伝送手段に出力する選択手段を備えることを特
徴とするものである。

【００２１】このような特徴を有する本願の請求項１〜
７の発明によれば、複数の撮影手段によって撮影された
複数の映像が伝送手段により伝送され、画像処理手段に
より伝送された複数の映像の中から視聴者の見たい部分
が撮影されている鮮明な映像が生成される。

【００２２】又本願の請求項８〜１４の発明によれば、
複数の撮影手段によって撮影された複数の映像が伝送手
段により伝送され、画像処理手段により伝送された複数
の映像の中からあたかも視聴者が好きな位置から見てい
るような鮮明な映像が生成される。

【００２３】又本願の請求項１５〜２１の発明によれ
ば、一つの撮影手段によって撮影された映像が伝送手段
により伝送され、画像処理手段により伝送された映像の
中から視聴者の見たい部分の鮮明な映像が生成される。

【００２４】又本願の請求項２２〜２８の発明によれ
ば、複数の撮影手段によって撮影された複数の映像が記
録手段に記録され、画像処理手段により記録された複数
の映像の中から視聴者の見たい部分が撮影されている鮮
明な映像が生成される。

【００２５】又本願の請求項２９〜３５の発明によれ
ば、複数の撮影手段によって撮影された複数の映像が記
録手段により記録され、画像処理手段により記録された
複数の映像の中からあたかも視聴者が好きな位置から見
ているような鮮明な映像が生成される。

【００２６】又本願の請求項３６〜４２の発明によれ
ば、一つの撮影手段によって撮影された映像が記録手段
により記録され、画像処理手段により記録された映像の
中から視聴者の見たい部分の映像が鮮明に生成される。

【００２７】又本願の請求項４３〜４７の発明によれ
ば、画像処理手段、撮像制御回路により視聴者の要求信
号に応じて遠隔に設置された可動式撮影手段が操作さ
れ、視聴者の見たい方向に撮影手段が向き、その方向の
映像が視聴者に提示される。

【００２８】又本願の請求項４８〜５２の発明によれ
ば、視聴者の要求信号に応じて遠隔に設置された可動式
撮影手段が操作され、視聴者の見た方向に撮影手段が向
き、その方向の映像が視聴者に提示され、更に視聴者の
好きな場所より撮影されたような映像を画像処理手段に
より生成される。

【００２９】又本願の請求項５３〜５９の発明によれ
ば、画像処理手段及び選択手段において、複数の視聴者
の要求信号が処理され、多数の視聴者の要求が満たされ
るような要求信号が出力されて可動式撮影手段が動作さ
れ、撮影手段によって撮影された映像が前記複数の視聴
者に表示される。

【００３０】又本願の請求項６０〜６６の発明によれ
ば、画像処理手段及び選択手段において、複数の視聴者
の要求信号が処理され、多数の視聴者の要求が満たされ
るような要求信号が出力されて可動式撮影手段が動作さ
れ、撮影手段によって撮影された映像が前記複数の視聴
者に表示されるとともに、視聴者の好きな場所より撮影
されたような映像を生成する。

【００３１】

【発明の実施の形態】

（実施の形態１）図１は第１の発明の第１の実施形態で
ある遠隔映像視聴装置の構成図である。図１において、
１００，１０１は撮影装置、１０２は伝送装置、１０３
・・・１０４，１０５，１０６は画像処理回路Ａ、１０
７・・・１０８はヘッドマウンティッドディスプレイ
（以下、ＨＭＤという）、１０９は立体テレビ、１１０
は通常のテレビである。このように構成された遠隔映像
視聴装置において、撮影装置１００より１０１まで複数
の撮影装置が伝送装置１０２に接続されている。この撮
影装置１００，１０１は例えばこの図１に示す様に３段
になっており、各側面にステレオカメラが取付けられて
いる。

【００３２】このステレオカメラの特徴を図３を用いて
説明する。図３は撮影装置の３段のステレオカメラの焦
点の合う位置を示したもので、３００は撮影装置１００
を上から見た図である。例えば撮影装置１００の上段の
ステレオカメラの焦点の合う距離は環状領域３０１で示
される近傍であり、中段のステレオカメラの焦点の合う
距離は環状領域３０２の近傍であり、下段のステレオカ
メラの焦点の合う距離は環状領域３０３の近傍である。
この様に３段のステレオカメラは夫々焦点距離が異な
る。この焦点距離の設定は、被写体によって異なるが、
例えば屋外で使用する場合は数メートルから数十メート
ルに設定すればよい。このような撮影装置１００，１０
１は複数設置され、夫々異なる場所を撮影する。これら
の撮影装置１０２の出力の映像信号は伝送装置１０２に
入力され、遠距離まで伝送される。この伝送装置１０２
には入力側に伝送する映像信号を圧縮して情報量を減ら
す圧縮手段を設け、伝送後に伸張して元の映像信号に戻
す伸張手段の機能が含まれていてもよい。又、この伝送
装置は専用の回線でも一般の公衆回線でもよい。

【００３３】この伝送装置１０２で伝送された夫々の撮
影装置よりの映像信号は、画像処理回路Ａ１０３より１
０６に夫々入力される。この画像処理回路Ａ１０３・・
１０４はＨＭＤ１０７・・１０８と信号をやり取りす
る。例えば画像処理装置Ａ１０３は撮影装置１００より
１０１の複数の映像信号より、ＨＭＤを装着している視
聴者が望む位置、又は拡大率の映像を作成する。又ＨＭ
Ｄ１０７より１０８には、頭部の位置，向きを検出する
頭部センサ及び視聴者の視線方向を検出する視線センサ
が取付けられている。例えば画像処理回路Ａ１０３はＨ
ＭＤ１０７よりの頭部センサ及び視線センサの出力によ
り、視聴者が向いている方向の映像に最も近い映像を各
撮影装置の出力より選択するか、又は視聴者が向いてい
る方向の映像を、それに近い撮影装置の出力より補間演
算等を用いて作成する。又映像の拡大率は頭部センサや
視線センサ以外の入力手段、例えば手で操作するレバー
等を用いて視聴者の要求を入力することができる。

【００３４】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動きあ
る点を注視している場合には、表示映像の動きを減らし
注視しやすいようにする。このような状態において頭部
と視線がほぼ同方向に動いて蓄積される頭部の向きと映
像のずれを解消する。

【００３５】又画像処理回路Ａ１０５，１０６によって
処理された画像は、夫々立体テレビ１０９と通常のテレ
ビ１１０に接続される。この立体テレビ１０９にはＨＭ
Ｄのような頭部位置検出や視線検出の機能はないが、視
聴者が見たい方向をなんらかの手段で画像処理回路Ａ１
０５に入力することで、好きな方向の立体画像を見るこ
とができる。又通常のテレビ１１０は、頭部位置検出や
視線検出、更に立体映像提示の能力はないが、立体テレ
ビ１０９の場合と同様に視聴者が見たい方向を何らかの
手段で入力することで、簡易的に平面映像でみることが
できる。

【００３６】図２は画像処理回路Ａ１０３から１０６の
構成図である。図２において、画像選択回路２０４は入
力端子２０２〜２０３に入力される画像を選択するもの
であり、拡大・縮小回路２０５は選択された画像を拡大
又は縮小するものである。このように構成された画像処
理回路Ａにおいて、複数の撮影手段よりの映像信号が入
力端子２０２より２０３を介して画像選択回路２０４に
入力される。この画像選択回路２０４には端子２０１よ
り入力された視聴者の見たい方向，見たい大きさを示す
要求信号が入力される。この画像選択回路２０４では、
要求信号に応じて視聴者の見たい映像を含む映像信号を
端子２０２より２０３から入力された信号より選択して
拡大・縮小回路２０５に出力する。拡大・縮小回路２０
５では、画像選択回路２０４より出力された映像を用
い、これらの映像より適当な部分を切り出し合成した
後、適当な大きさに拡大又は縮小する。

【００３７】この画像処理回路Ａの動作を図４を用いて
説明する。図４において４０４は遠景の山、４０１は近
距離にある円物体、４０２は円物体より遠方にある三角
物体、４０３は更に三角物体よりも遠方にある四角物体
である。又縦の点線で区切られた領域４０５，４０６，
４０７は夫々Ａ方向，Ｂ方向，Ｃ方向を撮影する撮影手
段よりの映像を示す。これらの円物体４０１とカメラと
の距離は図３の環状領域３０１とほぼ同じであり、三角
物体４０２とカメラの距離は図３の環状領域３０２とほ
ぼ同じであり、四角物体４０３とカメラの距離は図３の
環状領域３０３とほぼ同じである場合、視聴者が円物体
４０１を見ているときには画像処理回路Ａ１０３から１
０６は撮影装置１００，１０１の上段のステレオカメラ
の出力を用い、次に三角物体４０２を見ているときには
中段のステレオカメラの出力を用い、更に四角物体４０
３を見ているときには下段のステレオカメラの出力を用
いる。又中間的な距離の物体の場合は、各段のステレオ
カメラの出力を混合して用いてもよい。

【００３８】又円４０１を見ている場合には、Ａ方向と
Ｂ方向を撮影する撮影手段の出力のうち、上記の距離に
あったステレオカメラの出力を選択する。三角形４０２
を見ている場合にはＢ方向を撮影する撮影手段の出力の
内上記の距離にあったステレオカメラの出力を選択し、
更に四角形４０３を見ている場合には、Ｂ方向と撮影す
る撮影手段の内上記の距離にあったステレオカメラの出
力を選択する。

【００３９】撮影装置１００，１０１は移動物体や人が
携帯するために、ぶれの補正機能や機械的な振動抑制装
置を取付けてもよい。撮影装置１００，１０１と伝送装
置Ａ１０２との間は無線で伝送を行う機能をもったもの
でもよく、画像処理回路Ａ１０３，１０４，１０５，１
０６及び伝送装置Ａ１０２との間も無線で伝送を行う機
能を持ったものでもよい。

【００４０】図５は第２の発明による第２の実施形態の
映像視聴装置を示す構成図である。図５において、他の
図面と同じ番号のものは同様の動作をするので、その詳
しい説明は省略する。図５において、５０１，５０２，
５０３，５０４は画像処理回路Ｂである。撮影装置１０
０，１０１は複数設置され、夫々異なる場所を撮影す
る。これらの撮影装置１００，１０１の出力の映像信号
は伝送装置１０２に入力され、遠距離まで伝送される。
この伝送装置１０２には入力側に伝送する映像信号を圧
縮して情報量を減らす圧縮手段を設け、伝送後に伸張し
て元の映像信号に戻す伸張手段の機能が含まれていても
よい。又この伝送装置１０２は専用の回線でも一般の公
衆回線でもよい。この伝送装置１０２を介して伝送され
た夫々の撮影装置よりの映像信号は画像処理回路Ｂ５０
１〜５０４に入力される。この画像処理回路Ｂ５０１・
・５０２はＨＭＤ１０７・・１０８と信号をやり取りす
る。例えば画像処理装置Ｂ５０１は撮影装置１００〜１
０１の複数の映像信号より、ＨＭＤを装着している視聴
者が望む位置、又は拡大率の映像を作成する。

【００４１】例えば画像処理回路Ｂ５０１はＨＭＤ１０
７の頭部センサ及び視線センサの出力により、視聴者が
向いているあたりにある物体の形状，表面模様を認識す
る。又映像の拡大率や、見る位置、見る方向は頭部セン
サや視線センサ以外の入力手段、例えば手で操作するレ
バー等を用いて視聴者の要求を入力して得られたもので
ある。そうすればＨＭＤ１０７によって視聴者がみたい
位置からみた物体を再構成して見せることができる。

【００４２】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動いて
ある点を注視している場合には、表示映像の動きを減ら
し注視しやすいようにする。このような状態において頭
部と視線がほぼ同方向に動いて視点が変わる場合に蓄積
される頭部の向きと映像のずれを解消する。

【００４３】又画像処理回路Ｂ５０３，５０４は、夫々
立体テレビ１０９と通常のテレビ１１０に接続される。
この立体テレビ１０９にはＨＭＤのような頭部位置検出
や視線検出の機能はないが、視聴者が見たい位置と方向
をなんらかの手段で画像処理回路Ａ１０５に入力するこ
とで、好きな方向の立体画像を見ることができる。又通
常のテレビ１１０は、頭部位置検出や視線検出、更に立
体映像提示の能力はないが、立体テレビ１０９の場合と
同様に視聴者が見たい位置と方向を何らかの手段で入力
することで、簡易的に平面映像でみることができる。

【００４４】次に、図６を用いて画像処理回路Ｂ５０１
より５０４の詳細な構成を説明する。図６は画像処理回
路Ｂの構成図である。図６において画像選択回路２０４
は図２と同様の働きをするので詳しい説明は省略する。
図６において、物体形状認識回路６０４は物体の形状を
認識するものであり、表面模様分離回路６０６は物体の
表面の模様を取り出すものであり、物体形状作成回路６
０５は任意の位置より見た物体の形状を作成するもので
あり、表面模様張り付け回路６０７は物体形状作成回路
６０５で作られた物体に表面の模様をつけるものであ
る。

【００４５】上記のように構成された画像処理回路Ｂに
おいて、複数の撮影手段からの映像信号が端子６０２，
６０３から画像選択回路２０４に入力される。この画像
選択回路２０４には端子６０１からの視聴者の見たい方
向，見たい大きさを示す要求信号が入力される。

【００４６】そして画像選択回路２０４は視聴者がみた
い方向の映像を選択して物体形状認識回路６０４に送ら
れる。物体形状認識回路６０４では、対象とする物体の
形状を認識する。そしてこの物体形状認識回路６０４の
出力は物体形状作成回路６０５と表面模様分離回路６０
６に入力される。

【００４７】この表面模様分離回路６０６では、画像選
択回路２０４の出力である映像信号と物体形状認識回路
６０４の出力である物体の形状が入力され、その物体の
表面の模様が分離されて取り出される。物体形状作成回
路６０５には端子６０１より入力された視聴者の見たい
位置、見たい方向を示す要求信号が入力される。そし
て、物体形状認識回路６０４の出力を用いて、視聴者の
見たい位置、方向からの物体の形状を作成する。そし
て、この物体の形状は表面模様張り付け回路６０７に送
られ、表面模様分離回路６０６からの出力を用いて、こ
の物体の形状に表面の模様をつけて出力する。このよう
に、画像処理回路Ｂにより、視聴者は好きな場所からの
鮮明な映像を見ることができる。

【００４８】（実施の形態３）図７は第３の発明による
第３の実施形態の映像視聴装置の構成図である。図７に
おいて、他の図面と同じ番号のものは同様の動作をする
ので、詳しい説明は省略する。図７において、広角撮像
装置７００は広角レンズ７０１，撮像装置７０２よりな
る広角撮像装置であり、７０３，７０４，７０５，７０
６は画像処理回路Ｃである。

【００４９】上記のように構成された第３の映像視聴装
置において、広角撮像装置７００は非常に広範囲を撮影
する。たとえば図８に示すような、広範囲の映像が撮影
される。この映像は伝送装置１０２に入力され、遠距離
まで伝送される。そして、画像処理回路Ｃ７０３から７
０６に入力される。画像処理回路Ｃ７０３・・・７０４
はＨＭＤ１０７・・１０８と信号をやり取りする。例え
ば画像処理装置Ｃ７０３は広角撮影装置７００より入力
された図８（ａ）に示すような映像より、ＨＭＤを装着
している視聴者が望む位置、又は拡大率の映像を作成す
る。この映像はたとえば図８（ｂ）に示すような映像で
あり、もともとの図８（ａ）の映像の右端の映像を歪み
をとって適当な大きさに補正する。画像処理回路Ｃは図
８（ａ）と図８（ｂ）の例に示したように、広角レンズ
で撮影した場合の周辺部分等の歪みを取り除くと共に、
好きな部分の映像を拡大縮小できるように構成してい
る。

【００５０】例えば画像処理回路Ｃ７０３はＨＭＤ１０
７の頭部センサ及び視線センサの出力により、視聴者が
向いているあたりにある物体の形状，表面模様を認識す
る。そしてＨＭＤ１０７よりの頭部センサ及び視線セン
サ出力により、視聴者がみたい位置からみた物体を再構
成して見せることができる。又映像の拡大率や見る位
置，見る方向は、頭部センサや視線センサ以外の入力手
段、例えば手で操作するレバー等を用いて、視聴者の要
求を入力して得られたものである。又画像処理回路Ｃ７
０５，７０６は夫々立体テレビ１０９と通常のテレビ１
１０に接続される。

【００５１】（実施の形態４）図９は第４の発明による
第４の実施形態の映像視聴装置の構成図である。図９に
おいて、他の図面の同じ番号のものは同様の動作をする
ので詳しい説明は省略する。本実施形態の映像視聴装置
は記録装置１００２を有している。上記のように構成さ
れた第４の映像視聴装置において撮像装置１００より１
０１で撮影された映像は、記録装置１００２に記録され
る。記録装置１００２は複数のＶＴＲを組み合わせたも
のでもよいし、デジタル値に変換された映像を圧縮した
デジタルデータとして記録し、再生するときに再びもと
の映像信号に変換するものであってもよい。

【００５２】そして画像処理回路Ａ１０３から１０６で
は、第１実施形態の映像視聴装置と同様に、視聴者の見
たい方向，見たい大きさのＨＭＤ１０７，１０８や立体
テレビ１０９、通常のテレビ１１０に出力する。このよ
うに繰り返し、好きな時間に非常に臨場感の強い映像
で、好きな方向より見た映像を好きな大きさで見ること
ができる。

【００５３】（実施の形態５）図１０は第５の発明によ
る第５の実施形態の映像視聴装置の構成図である。図１
０において、他の図面と同じ番号のものは同じ動作をす
るので詳しい説明は省略する。図１０において、１００
より１０１で撮影された映像は、記録装置１００２に記
録される。この記録装置１００２に記録された映像信号
は、再生時に画像処理回路Ｂ５０１より５０４に出力さ
れる。画像処理回路Ｂ５０１より５０４では第２の実施
形態の映像視聴装置と同様に、視聴者の向いている方向
にある物体の形状、表面模様を認識して、視聴者の好き
な位置、方向より見た好きな大きさの物体の映像を作成
して、ＨＭＤ１０７，１０８や立体テレビ１０９、通常
のテレビ１１０に出力する。このように繰り返し、好き
な時間に非常に臨場感の強い映像で、好きな位置，好き
な方向より見た映像を好きな大きさで見ることができ
る。

【００５４】（実施の形態６）図１１は第６の発明によ
る第６の実施形態の映像視聴装置の構成図である。図１
１において、他の図面と同じ番号のものは同様の働きを
するので詳しい説明は省略する。図１１において、広角
撮影装置７００でとりこまれた映像は、記録装置１００
２に記録される。この記録装置１００２よりの再生映像
信号は画像処理回路Ｃ７０３より７０６に入力される。
画像処理回路Ｃ７０３、７０４はＨＭＤ１０７・・１０
８と信号をやり取りする。画像処理装置Ｃ７０３は第３
の発明の場合と同様に、広角撮影装置７００より入力さ
れた図８に示すような映像より、ＨＭＤを装着している
視聴者が望む位置、又は拡大率の映像である例えば図９
の映像を作成する。又画像処理回路Ｃ７０５，７０６は
第３の実施形態と同様に、立体テレビや通常のテレビへ
視聴者の見たい方向で好きな大きさの映像を出力する。
このように繰り返し、好きな時間に非常に臨場感の強い
映像で、好きな方向からの映像を好きな大きさで見るこ
とができる。

【００５５】図１２は第６の発明のもう一つの実施形態
の構成図である。図１２において、他の図面と同じ番号
のものは同様の働きをするので、詳しい説明は省略す
る。１３０１は、広角レンズ，撮像装置７０２と小型Ｖ
ＴＲが一体となった広角ムービーカメラである。このよ
うな広角ムービーカメラ１３０１は、図１１の広角撮像
装置７００と記録装置１００２を一体とし、携帯可能な
程度に小型化したものである。このような広角ムービー
カメラ１３０１で記録された映像は、画像処理回路Ｃ７
０３に入力される。この画像処理回路Ｃ７０３は例えば
通常のテレビ１１０に画像を出力する。視聴者は何らか
の方法で画像処理回路Ｃ７０３に見たい方向，映像の大
きさを入力することで、希望の映像を見ることができ
る。

【００５６】（実施の形態７）図１３は第７の発明によ
る第７の実施形態による遠隔映像視聴装置の構成図であ
る。他の図と同じ番号のものは同様の働きをするので説
明は省略する。図１３において、１４００，１４０１は
レンズ、１４０２はレンズを支持すると共にレンズを駆
動するレンズ駆動装置で、レンズ１４００，１４０１及
びレンズ駆動装置１４０２によって可動式ステレオ撮影
装置１４０３を構成している。１４０４は撮像制御回
路、１４０５は伝送装置Ｂ、１４０６は画像処理回路Ｄ
である。ここで伝送装置Ｂ１４０５は双方向の伝送がで
きる伝送装置を用いるものとする。

【００５７】このように構成された第７の遠隔映像視聴
装置において、ＨＭＤ１０７は図１のＨＭＤ１０７，１
０８と同様に視聴者の頭部向き，視線方向を検出して画
像処理回路Ｄ１４０６へ送る。又画像処理回路Ｄ１４０
６により視聴者の要求信号として伝送装置Ｂ１４０５に
入力され、撮像制御回路１４０４へ送られる。撮像制御
回路１４０４はこの要求信号より、視聴者の望むカメラ
向き，拡大率を予測判断して、レンズ１４００，１４０
１及びレンズ駆動装置４０２よりなる可動式ステレオ撮
影装置１４０３を駆動する。この予測判断の方法は、例
えば過去の要求信号の動きを基に次の動きを推定して可
動式ステレオ撮影装置１４０３を駆動する。これは主に
伝送装置Ｂ１４０５により視聴者の要求信号の到達が遅
れ、視聴者への映像信号は主に伝送装置Ｂ４０４の遅れ
分更に遅れるため、この二つの遅れを考慮して可動式ス
テレオ撮影装置１４０３を駆動する。又予測した動きと
遅れて到達した要求信号の差によって逐次予測方式の予
測パラメータを修正する。

【００５８】そして可動式ステレオ撮影装置１４０３で
撮影されたステレオ映像は撮像制御回路を通り伝送装置
Ｂ１４０５に入力され、画像処理回路Ｄ１４０６を通っ
てＨＭＤ１０７に表示される。

【００５９】このように画像処理回路Ｄ１４０６が視聴
者の見たい方向，見たい映像の大きさを示す要求信号を
撮像制御回路１４０４に送り、この方向に伝送装置Ｂ１
４０５の遅れを考慮して可動式ステレオ撮影装置１４０
３を向けることで、あたかもその場所にいるかのような
非常に臨場感の強い映像を作成できる。

【００６０】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動きあ
る点を注視している場合には、表示映像の動きを減らし
注視しやすいようにし、このような状態において蓄積さ
れる頭部の向きと映像のずれを頭部と視線がほぼ同方向
に動く場合で視点が変わる場合に解消する。視聴者の要
求する映像の拡大率は頭部センサや視線センサ以外の入
力手段、例えば手で操作するレバー等を用いて入力する
ことができる。

【００６１】伝送装置Ｂ１４０５は、伝送する情報を一
旦圧縮してその情報量を減らして伝送した後伸長して元
の信号に戻す機能を付加してもよい。可動式ステレオ撮
影装置は、移動物体や人が携帯するために、ぶれの補正
機能や機械的な振動抑制装置を取付けてもよい。撮像制
御回路１４０４と伝送装置Ｂ１４０５との間は無線で伝
送する機能をもったものでもよく、画像処理回路Ｄ１４
０６及び伝送装置Ｂ１４０５との間も無線で伝送する機
能を持ったものでもよい。

【００６２】（実施の形態８）図１４は第８の発明によ
る第８の実施形態の遠隔映像視聴装置の構成図である。
他の図と同じ番号のものは同様の働きをするので説明は
省略する。図１４において、１５０１は画像処理回路Ｅ
である。第８の遠隔映像視聴装置において、ＨＭＤ１０
７は図１のＨＭＤ１０７，１０８と同様に、視聴者の頭
部向き，視線方向を検出して画像処理回路Ｅ１５０１へ
送る。又画像処理回路Ｅ１５０１により視聴者の要求信
号を伝送装置Ｂ１４０５に入力し、伝送装置Ｂ１４０５
を介して撮像制御回路１４０４へ送る。撮像制御回路１
４０４はこの要求信号より、視聴者の望むカメラ向き、
拡大率を予測判断して、レンズ１４００，１４０１及び
レンズ駆動装置１４０２よりなる可動式ステレオ撮影装
置１４０３を駆動する。この予測判断の方法は、図１４
の例と同様に例えば過去の要求信号の動きを基に次の動
きを推定して可動式ステレオ撮影装置１４０３を駆動す
る。これは、主に伝送装置Ｂ１４０５により視聴者の要
求信号の到達が遅れ、視聴者への映像信号は主に伝送装
置Ｂ４０４の遅れ分更に遅れるため、この二つの遅れを
考慮して可動式ステレオ撮影装置１４０３を駆動する。
又、予測した動きと遅れて到達した要求信号の差によっ
て逐次予測方式の予測パラメータを修正する。

【００６３】そして可動式ステレオ撮影装置１４０３で
撮影されたステレオ映像は、撮像制御回路を通り伝送装
置Ｂ１４０５に入力され、画像処理回路Ｅ１５０１へ入
力される。この画像処理回路Ｅ１５０１はを通ってＨ１
０５に表示される。画像処理回路Ｅ１５０１は、伝送装
置Ｂ１４０５より入力された映像で、視聴者の向いてい
るあたりの物体の形状と表面模様を認識し、視聴者の好
む位置よりみたこの物体の形状を生成して、表面模様を
張りつめる。

【００６４】この動作は、例えば図６に示したものと同
様の構成で実現できる。このように、画像処理回路Ｅが
視聴者の見たい方向を示す要求信号を撮像制御回路１４
０４に送り、この方向に伝送装置Ｂ１４０５の遅れを考
慮して可動式ステレオ撮影装置１４０３を向け、更にこ
のステレオ撮影装置１４０３の出力より、画像処理回路
Ｅ１５０１において視聴者の向いている方向にある物体
の形状等を認識し、視聴者の好む位置より好む方向，大
きさでみた映像を生成することで、あたかもその場所に
いるかのような非常に臨場感の強い映像を作成できる。

【００６５】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動きあ
る点を注視している場合には、表示映像の動きを減らし
注視しやすいようにし、この様な状態において蓄積され
る頭部の向きと映像のずれを、頭部と視線がほぼ同方向
に動く場合で視点が変わる場合に解消する。視聴者の要
求する映像の拡大率は頭部センサや視線センサ以外の入
力手段、例えば手で操作するレバー等を用いて入力する
ことができる。

【００６６】伝送装置Ｂ１４０５は、伝送する情報を一
旦圧縮してその情報量を減らして伝送した後伸長して元
の信号に戻す機能を付加してもよい。可動式ステレオ撮
影装置１４０３は、移動物体や人が携帯するために、ぶ
れの補正機能や機械的な振動抑制装置を取付けてもよ
い。撮像制御回路１４０４と伝送装置Ｂ１４０５は無線
で伝送を行う機能をもったものでもよく、画像処理回路
Ｄ１４０６及び伝送装置Ｂ１４０５も無線で伝送を行う
機能を持ったものでもよい。

【００６７】（実施の形態９）図１５は第９の発明によ
る第９の実施形態の映像視聴装置の構成図である。他の
図と同じものは同様の働きをするので詳しい説明は省略
する。図１５において、１６０１は選択回路、１６０
２，１６０３，１６０４は画像処理回路Ｄである。この
画像処理回路Ｄ１６０２より１６０４は図１３の画像処
理回路１４０６と同様の動作をする。

【００６８】画像処理回路Ｄ１４０６，１６０２では、
ＨＭＤ１０７，１０８より出力される、視聴者の見たい
方向，見たい画像の大きさを示す信号を視聴者の要求信
号として選択回路１６０１へ出力する。これらのＨＭＤ
１０７，１０８及び画像処理回路Ｄ１４０６，１６０２
から１６０４は複数あり、複数の要求信号が選択回路１
６０１に入力される。選択回路１６０１は、これらの要
求信号より全体を最も満たす一つの要求信号を作成して
伝送装置Ｂ１４０５へ出力する。この一つの要求信号は
例えば入力された要求信号の最も多いものを選ぶことで
作成したり、入力された要求信号との差の積和が最も小
さくなる様に作成することで得られる。

【００６９】この選択回路１６０１より出力された一つ
の要求信号は伝送装置Ｂ１４０５に入力され、更に撮像
制御回路１４０４に入力される。撮像制御回路１４０４
はこの要求信号より、視聴者の望むカメラ向き，拡大率
を予測判断して、レンズ１４００，１４０１及びレンズ
駆動装置１４０２よりなる可動式ステレオ撮影装置１４
０３を駆動する。

【００７０】この予測判断の方法は、例えば過去の要求
信号の動きを基に次の動きを推定して可動式ステレオ撮
影装置１４０３を駆動する。これは、主に伝送装置Ｂ１
４０５により視聴者の要求信号の到達や視聴者への映像
信号の遅れがあるため、この二つの遅れを考慮して可動
式ステレオ撮影装置１４０３を駆動する。又、予測した
動きとおくれて到達した要求信号の差を逐次予測方式の
予測パラメータの修正をする。

【００７１】そして可動式ステレオ撮影装置１４０３で
撮影された映像は、撮像制御回路１４０４、伝送装置Ｂ
１４０５、選択回路１６０１、そして画像処理回路Ｄ１
４０６，１６０２を通ってＨＭＤ１０７，１０８内に表
示される。このように、複数の視聴者の見たい方向，見
たい映像の要求より、最も全体を満たす一つの要求信号
を選択回路１６０１で作成して撮像制御回路１４０４に
送り、伝送装置Ｂ１４０５の遅れを考慮して可動式ステ
レオ撮影装置１４０３をこの方向に向ける。更にこのス
テレオ撮影装置１４０３の出力より、画像処理回路Ｄ１
４０６，１６０２から１６０４をとおしてＨＭＤ１０
５，１０６や立体テレビ１０９、通常のテレビ１１０に
出力することで、あたかもその場所にいるかのような非
常に臨場感の強い映像を作成できる。

【００７２】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動きあ
る点を注視している場合には、表示映像の動きを減らし
注視しやすいようにし、このような状態において蓄積さ
れる頭部の向きと映像のずれを、頭部と視線がほぼ同方
向に動く場合で視点が変わる場合に解消する。視聴者の
要求する映像の拡大率は頭部センサや視線センサ以外の
入力手段、例えば手で操作するレバー等を用いて入力す
ることができる。

【００７３】又画像処理回路Ａ１０５，１０６は夫々立
体テレビ１０９と通常のテレビ１１０に接続される。こ
の立体テレビにはＨＭＤのような、頭部位置検出や視線
検出の機能はないが、視聴者が見たい方向をなんらかの
手段で画像処理回路Ａ１０５に入力することで、好きな
方向の立体画像を見ることができる。又通常のテレビ１
１０は、頭部位置検出や視線検出、更に立体映像提示の
能力はないが、立体テレビ１０９の場合と同様に視聴者
が見たい方向を何らかの手段で入力することで、簡易的
に平面映像でみることができる。

【００７４】伝送装置Ｂ１４０５は、伝送する情報を一
旦圧縮してその情報量を減らして伝送した後伸長して元
の信号に戻す機能を付加してもよい。可動式ステレオ撮
影装置１４０３は、移動物体や人が携帯するために、ぶ
れの補正機能や機械的な振動抑制装置を取付けてもよ
い。撮像制御回路１４０４と伝送装置Ｂ１４０５は無線
で伝送する機能をもったものでもよく、画像処理回路Ｄ
１４０６、１６０２から１６０４及び選択回路１６０１
も無線で伝送する機能を持ったものでもよい。

【００７５】（実施の形態１０）図１６は第１０の発明
による第１０の実施形態の映像視聴装置の構成図であ
る。他の図と同じものは同様の働きをするので詳しい説
明は省略する。図１６において、１７０１，１７０２，
１７０３は画像処理回路Ｅである。この画像処理回路Ｅ
は、図１４の画像処理回路Ｅと同様の働きをする。画像
処理回路Ｅ１５０１，１７０１では、ＨＭＤ１０７，１
０８より出力される視聴者の見たい方向，見たい画像の
大きさを示す信号を視聴者の要求信号として選択回路１
６０１へ出力する。これらのＨＭＤ１０７，１０８及び
画像処理回路Ｅ１５０１，１７０１から１７０３は複数
あり、複数の要求信号が選択回路１６０１に入力され
る。選択回路１６０１は、これらの要求信号より全体を
最も満たす一つの要求信号を作成して伝送装置Ｂ１４０
５へ出力する。この一つの要求信号は例えば入力された
要求信号の最も多いものを選ぶことで作成したり、入力
された要求信号との差の積和が最も小さくなる様に作成
することで得られる。

【００７６】この選択回路１６０１より出力された一つ
の要求信号は伝送装置Ｂ１４０５に入力され、更に撮像
制御回路１４０４に入力される。撮像制御回路１４０４
はこの要求信号より、視聴者の望むカメラ向き，拡大率
を予測判断して、レンズ１４００，１４０１及びレンズ
駆動装置１４０２よりなる可動式ステレオ撮影装置１４
０３を駆動する。

【００７７】この予測判断の方法は、例えば過去の要求
信号の動きを基に次の動きを推定して可動式ステレオ撮
影装置１４０３を駆動する。これは、主に伝送装置Ｂ１
４０５により視聴者の要求信号の到達や視聴者への映像
信号の遅れがあるため、この二つの遅れを考慮して可動
式ステレオ撮影装置１４０３を駆動する。又、予測した
動きとおくれて到達した要求信号の差により逐次予測方
式の予測パラメータを修正する。

【００７８】そして可動式ステレオ撮影装置１４０３で
撮影された映像は、撮像制御回路１４０４、伝送装置Ｂ
１４０５、選択回路１６０１を通り画像処理回路Ｅ１５
０１，１７０１に入力される。

【００７９】画像処理回路Ｅ１５０１は、伝送装置Ｂ１
４０５より入力された映像で、視聴者の向いているあた
りの物体の形状と表面模様を認識し、視聴者の好む位置
よりみたこの物体の形状を生成して、表面模様を張りつ
める。

【００８０】この動作は、例えば図６に示したものと同
様の構成で実現できる。このように、複数の視聴者の見
たい方向を示す要求信号を最も満たす一つの要求信号を
選択回路１６０１で作成し撮像制御回路１４０４に送
り、この方向に伝送装置Ｂ１４０５の遅れを考慮して可
動式ステレオ撮影装置１４０３を向け、更にこのステレ
オ撮影装置１４０３の出力より、画像処理回路Ｅ１５０
１において視聴者の向いている方向にある物体の形状等
を認識し、視聴者の好む位置より好む方向，大きさでみ
たい映像を生成することで、あたかもその場所にいるか
のような非常に臨場感の強い映像を作成できる。

【００８１】又頭部センサと視線センサを用いること
で、頭部が少し動いても視線が頭部とは逆方向に動きあ
る点を注視している場合には、表示映像の動きを減らし
注視しやすいようにし、この様な状態において蓄積され
る頭部の向きと映像のずれを、頭部と視線がほぼ同方向
に動く場合で視点が変わる場合に解消する。視聴者の要
求する映像の拡大率は頭部センサや視線センサ以外の入
力手段、例えば手で操作するレバー等を用いて入力する
ことができる。

【００８２】又画像処理回路Ｅ１７０２，１７０３は夫
々立体テレビ１０９と通常のテレビ１１０に接続され
る。この立体テレビにはＨＭＤのような頭部位置検出や
視線検出の機能はないが、視聴者が見たい方向をなんら
かの手段で画像処理回路Ａ１０５に入力することで、好
きな方向の立体画像を見ることができる。又通常のテレ
ビ１１０は、頭部位置検出や視線検出、更に立体映像提
示の能力はないが、立体テレビ１０９の場合と同様に視
聴者が見たい方向を何らかの手段で入力することで、簡
易的に平面映像でみることができる。

【００８３】伝送装置Ｂ１４０５は、伝送する情報を一
旦圧縮してその情報量を減らして伝送した後伸長して元
の信号に戻す機能を付加してもよい。可動式ステレオ撮
影装置１４０３は、移動物体や人が携帯するために、ぶ
れの補正機能や機械的な振動抑制装置を取付けてもよ
い。撮像制御回路１４０４と伝送装置Ｂ１４０５は無線
で伝送を行う機能をもったものでもよく、画像処理回路
Ｅ１５０１、１７０１から１７０２及び選択回路１６０
１も無線で伝送を行う機能を持ったものでもよい。

【００８４】

【発明の効果】以上詳細に説明したように本願の請求項
１〜７の発明によれば、複数の撮影手段によって複数の
地点に焦点の合った映像が撮影され、この複数の映像が
伝送手段により伝送される。画像処理手段では伝送され
た複数の映像の中から視聴者の見ている方向に基づき、
視聴者が見たい部分が撮影されている映像より、視聴者
の見たい方向の映像が、視聴者の好む大きさで表示され
る。従って視聴者にあたかもその場所にいるかのような
非常に臨場感の強い映像を提供することができる。

【００８５】又本願の請求項８〜１４の発明によれば、
複数の撮影手段によって複数の地点に焦点の合った映像
が撮影され、この複数の映像が伝送手段により伝送され
る。画像処理手段では伝送された複数の映像の中から視
聴者の見ている方向に基づき、視聴者が見たい部分が撮
影されている映像より、視聴者の見たい方向にある物体
の形状、表面模様を認識して、視聴者の好む位置より好
む向き大きさで見た場合の物体の形状に表面模様張り付
けて生成する。従って視聴者にあたかもその場所にいる
かのような非常に臨場感の強い映像を提供することがで
きる。

【００８６】又本願の請求項１５〜２１の発明によれ
ば、一つの広角撮影手段によって撮影された映像が、伝
送手段により伝送された後、画像処理手段によって視聴
者の好む方向で好む大きさの映像が歪みなく生成される
ことで、あたかもその場所にいるかのような非常に臨場
感の強い映像を提供することができる。

【００８７】又本願の請求項２２〜２８の発明によれ
ば、複数の撮影手段によって複数の地点に焦点の合った
映像が撮影され、この複数の映像が記録手段により記録
される。画像処理手段では記録手段より再生された複数
の映像の中から視聴者の見ている方向に基づき、視聴者
が見たい部分が撮影されている映像より、視聴者の見た
い方向の映像を視聴者の好む大きさで表示する。そうす
ればあたかもその場所にいるかのような非常に臨場感の
強い映像を視聴者の好きな時に繰り返し提供することが
できる。

【００８８】又本願の請求項２９〜３５の発明によれ
ば、複数の撮影手段によって複数の地点に焦点の合った
映像が撮影され、この複数の映像が記録手段により記録
される。画像処理手段では記録手段より再生された複数
の映像の中から視聴者の見ている方向に基づき、視聴者
が見たい部分が撮影されている映像より、視聴者の見た
い方向にある物体の形状，表面模様を認識して、視聴者
の好む位置より好む向き大きさで見た場合の物体の形状
に表面模様張り付けて生成する。そうすればあたかもそ
の場所にいるかのような非常に臨場感の強い映像を視聴
者の好きな時に繰り返し提供することができる。

【００８９】又本願の請求項３６〜４２の発明によれ
ば、一つの撮影手段によって撮影された映像が、記録手
段により記録される。記録手段の再生映像は画像処理手
段によって視聴者の好む方向で好む大きさの映像が歪み
なく生成する。そうすればあたかもその場所にいるかの
ような非常に臨場感の強い映像を視聴者の好きな時に繰
り返し提供することができる。

【００９０】又本願の請求項４３〜４７の発明によれ
ば、画像処理手段、伝送装置、撮像制御回路により視聴
者の要求信号に応じて遠隔に設置された可動式撮影手段
が操作される。この際請求項４４では、撮像制御回路に
より視聴者の頭部の動き等に基づき撮影手段が予測制御
により制御しているため、視聴者は遅れ時間を感じるこ
となく映像を観察することができ、あたかもその場所に
いるかのような非常に臨場感の強い映像を提供できる。

【００９１】又本願の請求項４８〜５２の発明によれ
ば、画像処理手段、伝送装置、撮像制御回路により視聴
者の要求信号に応じて遠隔に設置された可動式撮影手段
が操作される。この際請求項４９では、撮像制御回路に
より視聴者の頭部の動き等に基づき撮影手段が予測制御
により制御しているため、視聴者は遅れ時間を感じるこ
となく映像を観察することができる。更に画像処理手段
により、視聴者が見たい部分が撮影されている映像よ
り、視聴者の見たい方向にある物体の形状、表面模様を
認識して、視聴者の好む位置より好む向き大きさで見た
場合の物体の形状に表面模様張り付けて生成することに
より、あたかもその場所にいるかのような非常に臨場感
の強い映像を提供できる。

【００９２】又本願の請求項５３〜５９の発明によれ
ば、複数の画像処理手段より出力された複数の視聴者の
要求信号より選択回路において、最大公約数的に複数の
視聴者の要求が満たされるような要求信号が出力されて
可動式撮影手段が動作され、撮影手段によって撮影され
た映像が前記複数の視聴者に表示されることにより、簡
易なシステムで複数の視聴者に映像を表示でき、あたか
もその場所にいるかのような非常に臨場感の強い映像を
提供できる。

【００９３】又本願の請求項６０〜６６の発明によれ
ば、複数の画像処理手段より出力された複数の視聴者の
要求信号より選択回路において、最大公約数的に複数の
視聴者の要求が満たされるような要求信号が出力されて
可動式撮影手段が操作される。この際請求項６３では、
撮像制御回路により視聴者の頭部の動き等に基づき撮影
手段が予測制御により制御しているため、視聴者は遅れ
時間を感じることなく映像を観察することができる。更
に画像処理手段により、視聴者が見たい部分が撮影され
ている映像より、視聴者の見たい方向にある物体の形
状、表面模様を認識して、視聴者の好む位置より好む向
き大きさで見た場合の物体の形状に表面模様張り付けて
生成することにより、あたかもその場所にいるかのよう
な非常に臨場感の強い映像を提供できる。

【００９４】又、上記の撮影装置やＨＭＤ等を無線で伝
送装置等に接続することで、携帯性が高まり従来使用で
きなかったような状況での使用が可能となる。

【図面の簡単な説明】

【図１】本願の第１の実施形態である映像視聴装置の構
成図である。

【図２】画像処理回路Ａの構成図である。

【図３】第１の実施形態の撮像装置の動作説明に用いる
図である。

【図４】第１の実施形態の撮像装置の動作説明に用いる
図である。

【図５】本願の第２の実施形態の映像視聴装置の構成図
である。

【図６】画像処理回路Ｂの構成図である。

【図７】本願の第３の実施形態である映像視聴装置の構
成図である。

【図８】画像処理回路Ｃの動作説明に用いる図である。

【図９】本願の第４の実施形態である映像視聴装置の構
成図である。

【図１０】本願の第５の実施形態である映像視聴装置の
構成図である。

【図１１】本願の第６の実施形態である映像視聴装置の
構成図である。

【図１２】第６の実施形態の映像視聴装置の別の構成例
を示す図である。

【図１３】本願の第７の実施形態である映像視聴装置の
構成図である。

【図１４】本願の第８の実施形態である映像視聴装置の
構成図である。

【図１５】本願の第９の実施形態である映像視聴装置の
構成図である。

【図１６】本願の第１０の実施形態である映像視聴装置
の構成図である。

【図１７】従来の映像視聴装置の第１の例を示す構成図
である。

【図１８】従来の映像視聴装置の第２の例を示す構成図
である。

【符号の説明】

１００，１０１撮影装置１０２伝送装置Ａ１０３，１０４，１０５，１０６画像処理回路Ａ１０７，１０８ヘッドマウントディスプレイ１０９立体テレビ１１０テレビ２０４画像選択回路２０５拡大・縮小回路５０１，５０２，５０３，５０４画像処理回路Ｂ６０４物体形状認識回路６０５物体形状作成回路６０６表面模様分離回路６０７表面模様張り付け回路７００広角撮影装置７０３，７０４，７０５，７０６画像処理回路Ｃ１００２記録装置１３０１広角ムービーカメラ１４０２レンズ駆動装置１４０３ステレオ撮影装置１４０４撮像制御回路１４０５伝送装置Ｂ１４０６画像処理回路Ｄ１５０１画像処理回路Ｅ１６０１選択回路

Claims

【特許請求の範囲】

【請求項１】視聴者より遠隔に設置された複数の撮影
手段と、前記撮影手段の出力を伝送する伝送手段と、前記伝送手段により伝送された前記複数の撮影手段より
の映像信号を入力信号として、前記視聴者の所望の方向
及び所望の大きさの映像を作成する画像処理手段と、を
有することを特徴とする映像視聴装置。
【請求項２】前記伝送手段は、映像信号を圧縮する圧
縮手段と、この圧縮された映像信号を伝送する伝送経路
と、この伝送経路の終端に接続され前記圧縮された映像
信号を伸長する伸長手段とを有することを特徴とする請
求項１記載の映像視聴装置。
【請求項３】前記複数の撮影手段は、複数の方向及び
複数の大きさで撮影するものであることを特徴とする請
求項１記載の映像視聴装置。
【請求項４】前記複数の撮影手段と前記伝送手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項１記載の映像視聴装置。
【請求項５】前記伝送手段と前記画像処理手段は、そ
の間を無線伝送により接続するものであることを特徴と
する請求項１記載の映像視聴装置。
【請求項６】前記複数の撮影手段は、その振動、ぶれ
がこの撮影手段の出力である前記映像信号に影響しない
ぶれ補正手段を有することを特徴とする請求項１記載の
映像視聴装置。
【請求項７】前記画像処理手段は、前記視聴者の要求
に応じて、前記複数の撮影手段の複数の出力映像信号よ
り、一つ又は複数の映像信号を選択し、この映像信号の
ある部分を、拡大又は縮小するものであることを特徴と
する請求項１記載の映像視聴装置。
【請求項８】視聴者より遠隔に設置された複数の撮影
手段と、前記撮影手段の出力を伝送する伝送手段と、前記伝送手段により伝送された前記複数の撮影手段より
の映像信号を入力信号として、前記視聴者の所望の方向
及び位置及び所望の大きさの映像を作成する画像処理手
段と、を有することを特徴とする映像視聴装置。
【請求項９】前記伝送手段は、映像信号を圧縮する圧
縮手段と、この圧縮された映像信号を伝送する伝送経路
と、この伝送経路の終端に接続され前記圧縮された映像
信号を伸長する伸長手段とを有することを特徴とする請
求項８記載の映像視聴装置。
【請求項１０】前記複数の撮影手段は、複数の方向及
び複数の大きさで撮影するものであることを特徴とする
請求項８記載の映像視聴装置。
【請求項１１】前記複数の撮影手段と前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項８記載の映像視聴装置。
【請求項１２】前記伝送手段と前記画像処理手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項８記載の映像視聴装置。
【請求項１３】前記複数の撮影手段は、その振動、ぶ
れがこの撮影手段の出力である前記映像信号に影響しな
いぶれ補正手段を有することを特徴とする請求項１記載
の映像視聴装置。
【請求項１４】前記画像処理手段は、前記視聴者の要
求に応じて、前記複数の撮影手段の複数の出力映像信号
より、前記視聴者の注視物体の形状を認識し、この注視
物体の前記視聴者の好む方向よりの形状と表面の模様を
形成するものであることを特徴とする請求項８記載の映
像視聴装置。
【請求項１５】視聴者より遠隔に設置された一つの撮
影手段と、前記撮影手段の出力を伝送する伝送手段と、前記伝送手段により伝送された前記一つの撮影手段より
の映像信号を入力信号として、前記視聴者の所望の方向
及び所望の大きさの映像を作成する画像処理手段と、を
有することを特徴とする映像視聴装置。
【請求項１６】前記伝送手段は、伝送する映像信号を
圧縮する圧縮手段と、この圧縮された映像信号を伝送す
る伝送経路と、この伝送経路の終端に接続され前記圧縮
された映像信号を伸長する伸長手段とを有することを特
徴とする請求項１５記載の映像視聴装置。
【請求項１７】前記撮影手段は、広角の映像を撮影す
る撮影手段であることを特徴とする請求項１５記載の映
像視聴装置。
【請求項１８】前記複数の撮影手段と前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項１５記載の映像視聴装置。
【請求項１９】前記伝送手段と前記画像処理手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項１５記載の映像視聴装置。
【請求項２０】前記複数の撮影手段は、その振動、ぶ
れがこの撮影手段の出力である前記映像信号に影響しな
いぶれ補正手段を有することを特徴とする請求項１５記
載の映像視聴装置。
【請求項２１】前記画像処理手段は、前記視聴者の要
求に応じて、前記撮影手段の出力である映像信号の、あ
る部分の映像を取り出し、この映像の歪みを補正し、適
当な大きさに拡大又は縮小するものであることを特徴と
する請求項１５記載の映像視聴装置。
【請求項２２】視聴者より遠隔に設置された複数の撮
影手段と、前記撮影手段の出力を記録する記録手段と、前記記録手段に蓄積された前記複数の撮影手段よりの映
像信号を入力信号として、前記視聴者の所望の方向及び
所望の大きさの映像を作成する画像処理手段と、を有す
ることを特徴とする映像視聴装置。
【請求項２３】前記記録手段は、前記映像信号を圧縮
する圧縮手段と、この圧縮された映像信号を記録する記
録装置と、前記記録装置に接続され前記圧縮された映像
信号を伸長する伸長手段とを有することを特徴とする請
求項２２記載の映像視聴装置。
【請求項２４】前記複数の撮影手段は、複数の方向及
び複数の大きさで撮影するものであることを特徴とする
請求項２２記載の映像視聴装置。
【請求項２５】前記複数の撮影手段と前記記録手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項２２記載の映像視聴装置。
【請求項２６】前記記録手段と前記画像処理手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項２２記載の映像視聴装置。
【請求項２７】前記複数の撮影手段は、その振動、ぶ
れがこの撮影手段の出力である前記映像信号に影響しな
いぶれ補正手段を有することを特徴とする請求項２２記
載の映像視聴装置。
【請求項２８】前記画像処理手段は、前記視聴者の要
求に応じて、前記記録手段に記録された前記複数の撮影
手段の複数の出力映像信号より、一つ又は複数の映像信
号を選択し、この映像信号のある部分を、拡大又は縮小
するものであることを特徴とする請求項２２記載の映像
視聴装置。
【請求項２９】視聴者より遠隔に設置された複数の撮
影手段と、前記撮影手段の出力を記録する記録手段と、前記記録手段により記録された前記複数の撮影手段より
の映像信号を入力信号として、前記視聴者の所望の方向
及び位置及び所望の大きさの映像を作成する画像処理手
段と、を有することを特徴とする映像視聴装置。
【請求項３０】前記記録手段は、映像信号を圧縮する
圧縮手段と、この圧縮された映像信号を記録する記録装
置と、この記録装置の終端に接続され前記圧縮された映
像信号を伸長する伸長手段とを有することを特徴とする
請求項２９記載の映像視聴装置。
【請求項３１】前記複数の撮影手段は、複数の方向及
び複数の大きさで撮影するものであることを特徴とする
請求項２９記載の映像視聴装置。
【請求項３２】前記複数の撮影手段と前記記録手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項２９記載の映像視聴装置。
【請求項３３】前記記録手段と前記画像処理手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項２９記載の映像視聴装置。
【請求項３４】前記複数の撮影手段は、その振動、ぶ
れがこの撮影手段の出力である前記映像信号に影響しな
いぶれ補正手段を有することを特徴とする請求項２９記
載の映像視聴装置。
【請求項３５】前記画像処理手段は、前記視聴者の要
求に応じて、前記記録手段に蓄積された前記複数の撮影
手段の複数の出力映像信号より、前記視聴者の注視物体
の形状を認識し、この注視物体の前記視聴者の好む方向
よりの形状と表面の模様を形成するものであることを特
徴とする請求項２９記載の映像視聴装置。
【請求項３６】視聴者より遠隔に設置された一つの撮
影手段と、前記撮影手段の出力を記録する記録手段と、前記記録手段により記録された前記一つの撮影手段より
の映像信号を入力信号として、前記視聴者の所望の方向
及び所望の大きさの映像を作成する画像処理手段と、を
有することを特徴とする映像視聴装置。
【請求項３７】前記記録手段は、記録する映像信号を
圧縮する圧縮手段と、この圧縮された映像信号を記録す
る記録装置と、この記録装置の終端に接続され前記圧縮
された映像信号を伸長する伸長手段とを有することを特
徴とする請求項３６記載の映像視聴装置。
【請求項３８】前記撮影手段は、広角の映像を撮影す
る撮影手段であることを特徴とする請求項３６記載の映
像視聴装置。
【請求項３９】前記複数の撮影手段と前記記録手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項３６記載の映像視聴装置。
【請求項４０】前記記録手段と前記画像処理手段は、
その間を無線伝送により接続するものであることを特徴
とする請求項３６記載の映像視聴装置。
【請求項４１】前記複数の撮影手段は、その振動、ぶ
れがこの撮影手段の出力である前記映像信号に影響しな
いぶれ補正手段を有することを特徴とする請求項３６記
載の映像視聴装置。
【請求項４２】前記画像処理手段は、前記視聴者の要
求に応じて、前記撮影手段の出力である映像信号の、あ
る部分の映像を取り出し、この映像の歪みを補正し、適
当な大きさに拡大又は縮小するものであることを特徴と
する請求項３６記載の映像視聴装置。
【請求項４３】視聴者より遠隔に設置された可動式撮
影手段と、前記視聴者の所望の方向及び大きさを示す要求信号によ
り前記可動式撮影手段を制御する撮像制御手段と、前記可動式撮影手段の出力を前記視聴者の方向へ伝送し
前記視聴者の要求信号を前記可動式撮影手段の方向へ伝
送する伝送手段と、前記伝送手段の出力である映像信号を処理すると共に、
前記視聴者の頭部の向き及び視線方向を検出し、更に視
聴者の要求する映像の拡大率を検出してこれらの検出結
果を前記視聴者の要求信号として前記伝送手段へ出力す
る映像信号処理手段と、を有することを特徴とする映像
視聴装置。
【請求項４４】前記撮像制御手段は、前記伝送装置の
出力である前記要求信号より次の要求信号を予測して、
前記可動式撮影手段を所定の方向へ向けると共に所定の
拡大率で撮影するように制御するものであることを特徴
とする請求項４３記載の映像視聴装置。
【請求項４５】前記可動式撮影手段及び前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項４３記載の映像視聴装置。
【請求項４６】前記伝送手段及び前記映像信号処理手
段は、その間を無線伝送により接続するものであること
を特徴とする請求項４３記載の映像視聴装置。
【請求項４７】前記可動式撮影手段はその振動、ぶれ
がこの可動式撮影手段の出力である前記映像信号に影響
しないぶれ補正手段を有することを特徴とする請求項４
３記載の映像視聴装置。
【請求項４８】視聴者より遠隔に設置された可動式撮
影手段と、前記視聴者の所望の方向及び大きさを示す要求信号によ
り前記可動式撮影手段を制御する撮像制御手段と、前記可動式撮影手段の出力を前記視聴者の方向へ伝送し
前記視聴者の要求信号を前記可動式撮影手段の方向へ伝
送する伝送手段と、前記伝送手段の出力である映像信号より前記視聴者の注
視する物体の映像の形状を認識し、視聴者の所望の方向
や位置からの物体の形状とその表面の模様を作成する映
像信号処理手段と、を有することを特徴とする映像視聴
装置。
【請求項４９】前記撮像制御手段は、前記伝送装置の
出力である前記要求信号より次の要求信号を予測して、
前記可動式撮影手段を所定の方向へ向けると共に所定の
拡大率で撮影するように制御するものであることを特徴
とする請求項４８記載の映像視聴装置。
【請求項５０】前記可動式撮影手段及び前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項４８記載の映像視聴装置。
【請求項５１】前記伝送手段及び前記映像信号処理手
段は、その間を無線伝送により接続するものであること
を特徴とする請求項４８記載の映像視聴装置。
【請求項５２】前記可動式撮影手段は、その振動、ぶ
れがこの可動式撮影手段の出力である前記映像信号に影
響しないぶれ補正手段を有することを特徴とする請求項
４８記載の映像視聴装置。
【請求項５３】複数の視聴者より遠隔に設置された可
動式撮影手段と、前記複数の視聴者の所望の方向及び大きさを示す要求信
号により前記可動式撮影手段を制御する撮像制御手段
と、前記可動式撮影手段の出力を前記複数の視聴者の方向へ
伝送し前記複数の視聴者の要求信号を前記可動式撮影手
段の方向へ伝送する伝送手段と、前記伝送手段の出力である映像信号を処理すると共に、
前記複数の視聴者の頭部の向き及び視線方向を検出し、
更に複数の視聴者の要求する映像の拡大率を検出してこ
れらの検出結果を前記複数の視聴者の複数の要求信号と
して出力する複数の映像信号処理手段と、前記複数の映像信号処理手段の出力の複数の要求信号を
一つにまとめ前記複数の視聴者の要求信号として前記伝
送装置へ出力する選択手段と、有することを特徴とする
映像視聴装置。
【請求項５４】前記選択手段は、前記複数の視聴者の
複数の要求信号のうち最も多い要求を多数決により選択
して前記視聴者の要求信号として出力するものであるこ
とを特徴とする請求項５３記載の映像視聴装置。
【請求項５５】前記選択手段は、前記複数の視聴者の
複数の要求信号との誤差の積和が最も小さくなる要求信
号を前記視聴者の要求信号として出力するものであるこ
とを特徴とする請求項５３記載の映像視聴装置。
【請求項５６】前記撮像制御手段は、前記伝送装置の
出力である前記複数の視聴者の要求信号より次の要求信
号を予測して、前記可動式撮影手段を所定の方向へ向け
ると共に所定の拡大率で撮影するように制御するもので
あることを特徴とする請求項５３記載の映像視聴装置。
【請求項５７】前記可動式撮影手段及び前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項５３記載の映像視聴装置。
【請求項５８】前記伝送手段及び前記映像信号処理手
段は、その間を無線伝送により接続するものであること
を特徴とする請求項５３記載の映像視聴装置。
【請求項５９】前記可動式撮影手段はその振動、ぶれ
がこの可動式撮影手段の出力である前記映像信号に影響
しないぶれ補正手段を有することを特徴とする請求項５
３記載の映像視聴装置。
【請求項６０】複数の視聴者より遠隔に設置された可
動式撮影手段と、前記複数の視聴者の所望の方向及び大きさを示す要求信
号により前記可動式撮影手段を制御する撮像制御手段
と、前記可動式撮影手段の出力を前記複数の視聴者の方向へ
伝送し前記複数の視聴者の要求信号を前記可動式撮影手
段の方向へ伝送する伝送手段と、前記伝送手段の出力である映像信号より前記視聴者の注
視する物体の映像の形状を認識し、視聴者の好む方向や
位置からの物体の形状とその表面の模様を作成すると共
に、前記複数の視聴者の要求信号を出力する映像信号処
理手段と、前記複数の映像信号処理手段の出力の複数の要求信号を
一つにまとめ前記複数の視聴者の要求信号として前記伝
送装置へ出力する選択手段と、を有することを特徴とす
る映像視聴装置。
【請求項６１】前記選択手段は、前記複数の視聴者の
複数の要求信号のうち最も多い要求を多数決により選択
して前記視聴者の要求信号として出力するものであるこ
とを特徴とする請求項６０記載の映像視聴装置。
【請求項６２】前記選択手段は、前記複数の視聴者の
複数の要求信号との誤差の積和が最も小さくなる要求信
号を前記視聴者の要求信号として出力するものであるこ
とを特徴とする請求項６０記載の映像視聴装置。
【請求項６３】前記撮像制御手段は、前記伝送装置の
出力である前記複数の視聴者の要求信号より次の要求信
号を予測して、前記可動式撮影手段を所定の方向へ向け
ると共に所定の拡大率で撮影するように制御するもので
あることを特徴とする請求項６０記載の映像視聴装置。
【請求項６４】前記可動式撮影手段及び前記伝送手段
は、その間を無線伝送により接続するものであることを
特徴とする請求項６０記載の映像視聴装置。
【請求項６５】前記伝送手段及び前記映像信号処理手
段は、その間を無線伝送により接続するものであること
を特徴とする請求項６０記載の映像視聴装置。
【請求項６６】前記可動式撮影手段は、その振動、ぶ
れがこの可動式撮影手段の出力である前記映像信号に影
響しないぶれ補正手段を有することを特徴とする請求項
６０記載の映像視聴装置。