JPH099222A - 仮想空間共有システム - Google Patents
仮想空間共有システムInfo
- Publication number
- JPH099222A JPH099222A JP15050195A JP15050195A JPH099222A JP H099222 A JPH099222 A JP H099222A JP 15050195 A JP15050195 A JP 15050195A JP 15050195 A JP15050195 A JP 15050195A JP H099222 A JPH099222 A JP H099222A
- Authority
- JP
- Japan
- Prior art keywords
- video
- communication terminal
- user
- virtual space
- line
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 claims abstract description 94
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000000034 method Methods 0.000 claims description 16
- 206010001488 Aggression Diseases 0.000 claims description 6
- 230000033001 locomotion Effects 0.000 abstract description 27
- 238000012546 transfer Methods 0.000 abstract description 11
- 230000015556 catabolic process Effects 0.000 abstract 1
- 238000006731 degradation reaction Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 7
- 238000013507 mapping Methods 0.000 description 6
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005192 partition Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 2
- 230000004308 accommodation Effects 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
- Processing Or Creating Images (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
Abstract
(57)【要約】
【目的】仮想空間共有システムにおいて、通信網の輻輳
の回避と通信端末の映像受信処理の負荷を軽減、結果的
に映像品質の画一的な劣化を回避する。 【構成】 距離・視線一致度判定部１１０は利用者の分
身の移動情報と、他の分身の移動情報から、利用者の分
身と他分身間との距離と視線の一致度を判定し、他端末
に対し映像の要求を行う。ビデオカメラ１０２は利用者
の映像を撮影し、映像蓄積・処理部１０４へ転送し、受
領した映像をメモリに書き込む。回線インタフェース部
１１３が、受信したデータが映像要求情報であると、映
像要求解析部１０６は受領した映像要求を解析し、要求
解像度と要求元装置を映像蓄積・処理部１０４に通知す
る。映像蓄積・処理部１０４は映像をメモリから読み出
し、指定された解像度に変換した後、要求元通信端末に
送信する。
の回避と通信端末の映像受信処理の負荷を軽減、結果的
に映像品質の画一的な劣化を回避する。 【構成】 距離・視線一致度判定部１１０は利用者の分
身の移動情報と、他の分身の移動情報から、利用者の分
身と他分身間との距離と視線の一致度を判定し、他端末
に対し映像の要求を行う。ビデオカメラ１０２は利用者
の映像を撮影し、映像蓄積・処理部１０４へ転送し、受
領した映像をメモリに書き込む。回線インタフェース部
１１３が、受信したデータが映像要求情報であると、映
像要求解析部１０６は受領した映像要求を解析し、要求
解像度と要求元装置を映像蓄積・処理部１０４に通知す
る。映像蓄積・処理部１０４は映像をメモリから読み出
し、指定された解像度に変換した後、要求元通信端末に
送信する。
Description
【０００１】
【産業上の利用分野】本発明は、通信端末を複数台具備
し、通信端末利用者が自身の分身および他の利用者の分
身を表示する仮想空間を各通信端末に構成し、これら複
数台の通信端末が通信網を介して相互にまたはサーバと
接続され、各通信端末利用者の映像および仮想空間内に
おける分身の位置情報を他の通信端末に分配することに
より複数の通信端末利用者が同一の仮想空間を相互に隔
離して共有する仮想空間共有システムに関する。
し、通信端末利用者が自身の分身および他の利用者の分
身を表示する仮想空間を各通信端末に構成し、これら複
数台の通信端末が通信網を介して相互にまたはサーバと
接続され、各通信端末利用者の映像および仮想空間内に
おける分身の位置情報を他の通信端末に分配することに
より複数の通信端末利用者が同一の仮想空間を相互に隔
離して共有する仮想空間共有システムに関する。
【０００２】
【従来の技術】従来、この種の仮想空間共有システムに
おいて、複数の通信端末間で映像を相互に送りあう方式
として次の２つの方式があった。 （１）分散接続方式 通信端末間を論理的または物理的にメッシュ接続する方
式である（図６）。各通信端末はカメラで撮像した自分
の映像をディジタル化してパケット化し、接続端末数分
コピーして分配する。 （２）集中接続方式 サーバを設け、通信端末間をサーバを中心にして論理的
または物理的にスター接続し、各通信端末は自分の映像
をサーバに送信し、サーバが他の通信端末に分配する方
式である（図７）。
おいて、複数の通信端末間で映像を相互に送りあう方式
として次の２つの方式があった。 （１）分散接続方式 通信端末間を論理的または物理的にメッシュ接続する方
式である（図６）。各通信端末はカメラで撮像した自分
の映像をディジタル化してパケット化し、接続端末数分
コピーして分配する。 （２）集中接続方式 サーバを設け、通信端末間をサーバを中心にして論理的
または物理的にスター接続し、各通信端末は自分の映像
をサーバに送信し、サーバが他の通信端末に分配する方
式である（図７）。
【０００３】
【発明が解決しようとする課題】分散接続方式では、各
通信端末は他のすべての通信端末からの映像を受信する
ので、任意に取捨選択して映像表示ができる。しかし、
同時に通信する通信端末の台数をｎ、映像の単位時間当
たりのデータ量をｍとすると、通信端末から見て送信用
の必要回線容量、受信用の必要回線容量は共にｍ×（ｎ
−１）である。本方式は一番簡易な方式であるが、同時
に通信する通信端末の台数が増大すると、通信網の輻輳
が問題になる。
通信端末は他のすべての通信端末からの映像を受信する
ので、任意に取捨選択して映像表示ができる。しかし、
同時に通信する通信端末の台数をｎ、映像の単位時間当
たりのデータ量をｍとすると、通信端末から見て送信用
の必要回線容量、受信用の必要回線容量は共にｍ×（ｎ
−１）である。本方式は一番簡易な方式であるが、同時
に通信する通信端末の台数が増大すると、通信網の輻輳
が問題になる。
【０００４】集中接続方式では、通信端末から見て送信
用の必要回線容量はｍで、受信用の必要回線容量はｍ×
（ｎ−１）となり、分散接続方式より送信側の輻輳は緩
和できるが、受信用の輻輳は緩和できないという問題が
ある。
用の必要回線容量はｍで、受信用の必要回線容量はｍ×
（ｎ−１）となり、分散接続方式より送信側の輻輳は緩
和できるが、受信用の輻輳は緩和できないという問題が
ある。
【０００５】本発明の目的は、通信網の輻輳の回避と端
末における映像受信処理の負荷軽減を図り、結果的に映
像品質の画一的な劣化を回避する仮想空間共有システム
を提供することにある。
末における映像受信処理の負荷軽減を図り、結果的に映
像品質の画一的な劣化を回避する仮想空間共有システム
を提供することにある。
【０００６】
【課題を解決するための手段】本発明の分散接続方式の
仮想空間共有システムは、他分身の位置情報と視線の向
き情報と利用者の分身の位置情報と視線の向き情報から
利用者の分身と他分身間との距離と視線の一致度を判定
し、該一致度に応じて品質を指定し、他通信端末に対し
映像を要求する手段と、通信端末対応に映像を蓄積する
メモリと、利用者の映像を撮影し、前記メモリに書き込
む手段と、受信した映像要求を解析し、前記メモリから
要求された利用者の映像を読み出し、指定された品質に
処理して要求元通信端末に送信する手段と、送信されて
きた映像を、該当利用者の分身に表示する手段を各通信
端末が有する。
仮想空間共有システムは、他分身の位置情報と視線の向
き情報と利用者の分身の位置情報と視線の向き情報から
利用者の分身と他分身間との距離と視線の一致度を判定
し、該一致度に応じて品質を指定し、他通信端末に対し
映像を要求する手段と、通信端末対応に映像を蓄積する
メモリと、利用者の映像を撮影し、前記メモリに書き込
む手段と、受信した映像要求を解析し、前記メモリから
要求された利用者の映像を読み出し、指定された品質に
処理して要求元通信端末に送信する手段と、送信されて
きた映像を、該当利用者の分身に表示する手段を各通信
端末が有する。
【０００７】また、本発明の集中接続方式の仮想空間共
有システムは、サーバは、通信端末対応に映像を蓄積す
るメモリと、受信した映像を前記メモリに書き込む手段
と、通信端末から受信した映像要求を解析し、要求され
ている映像を前記メモリから読み出し、指定された品質
に処理して要求元通信端末に送信する手段を有し、前記
各通信端末は、利用者の映像を撮像し、前記サーバに送
信する手段と、他分身の位置情報と視線の向き情報と利
用者の分身の位置情報と視線の向き情報から利用者の分
身と他分身間との距離と視線の一致度を判定し、該一致
度に応じて品質を指定し、サーバに対し映像を要求する
手段と、前記サーバから送信されてきた映像を、該当利
用者の分身に表示する手段を有する。
有システムは、サーバは、通信端末対応に映像を蓄積す
るメモリと、受信した映像を前記メモリに書き込む手段
と、通信端末から受信した映像要求を解析し、要求され
ている映像を前記メモリから読み出し、指定された品質
に処理して要求元通信端末に送信する手段を有し、前記
各通信端末は、利用者の映像を撮像し、前記サーバに送
信する手段と、他分身の位置情報と視線の向き情報と利
用者の分身の位置情報と視線の向き情報から利用者の分
身と他分身間との距離と視線の一致度を判定し、該一致
度に応じて品質を指定し、サーバに対し映像を要求する
手段と、前記サーバから送信されてきた映像を、該当利
用者の分身に表示する手段を有する。
【０００８】
【作用】本発明は、分散接続方式における各通信端末ま
たは集中接続方式におけるサーバにおいて、高品質に撮
像された各利用者の映像を各通信端末またはサーバのメ
モリに保有し、各通信端末からの要求に従って必要な映
像を必要な品質にして送信するようにしたものである。
たは集中接続方式におけるサーバにおいて、高品質に撮
像された各利用者の映像を各通信端末またはサーバのメ
モリに保有し、各通信端末からの要求に従って必要な映
像を必要な品質にして送信するようにしたものである。
【０００９】本発明では、複数の利用者が共有できる３
次元仮想空間を対象にしており、各利用者は自分の意志
で自由に仮想空間内を移動できるため、自分と相手の分
身との位置関係や顔の向きが常時変化する。この空間的
特性を利用して自分との距離が近い人や自分の方を向い
ている人により品質のよい映像を与えたり、距離が遠い
人や自分の方を向いていない人の映像の品質を下げたり
することが可能となる。
次元仮想空間を対象にしており、各利用者は自分の意志
で自由に仮想空間内を移動できるため、自分と相手の分
身との位置関係や顔の向きが常時変化する。この空間的
特性を利用して自分との距離が近い人や自分の方を向い
ている人により品質のよい映像を与えたり、距離が遠い
人や自分の方を向いていない人の映像の品質を下げたり
することが可能となる。
【００１０】
【実施例】次に、本発明の実施例について図面を参照し
て説明する。
て説明する。
【００１１】まず、集中接続方式の場合について説明す
る。
る。
【００１２】すべての通信端末は仮想空間を共有するた
めに、同一の仮想空間モデルを有し、各利用者は自分の
意志で自由に仮想空間内を移動できる。他の利用者も同
じ仮想空間内を移動できるので、それを認知するため、
自分の仮想空間内に他の利用者の分身を用意し、各利用
者はビデオカメラで撮影した自分の顔映像と位置情報
（仮想空間内の位置座標と顔の向き）を他の通信端末に
送信する。各通信端末は受信した他の利用者の位置情報
から、仮想空間内の該当位置に当該利用者の分身を移動
させ、当該利用者の映像を顔の向きを考慮して分身にマ
ッピングする。
めに、同一の仮想空間モデルを有し、各利用者は自分の
意志で自由に仮想空間内を移動できる。他の利用者も同
じ仮想空間内を移動できるので、それを認知するため、
自分の仮想空間内に他の利用者の分身を用意し、各利用
者はビデオカメラで撮影した自分の顔映像と位置情報
（仮想空間内の位置座標と顔の向き）を他の通信端末に
送信する。各通信端末は受信した他の利用者の位置情報
から、仮想空間内の該当位置に当該利用者の分身を移動
させ、当該利用者の映像を顔の向きを考慮して分身にマ
ッピングする。
【００１３】ここでは、通信網として公衆網を用いた集
中接続方式を例にとる。各利用者端末は利用者の映像を
ビデオカメラで高品質に撮影し、１フレーム毎にディジ
タル化して、サーバに送信する。サーバでは利用者分の
メモリを持ち、映像を受信する度にメモリに上書きして
保存する。映像の品質はフレーム数／時間と解像度で規
定される。前者は映像の動きのなめらかさ、後者は映像
の美しさに寄与する。各通信端末は、仮想空間内で自分
と相手の分身との距離の遠近、視線の一致度に応じて、
サーバに映像を要求する間隔を相手毎に変えたり、異な
る解像度を指定してサーバに要求する。サーバは指定さ
れた利用者の映像を指定された解像度に落として、要求
元通信端末に送信する。すなわち、フレーム数／時間は
要求元通信端末側で制御し、解像度は要求元通信端末の
指定に基づいてサーバで制御する。これにより、伝送容
量を削減することが可能となる。
中接続方式を例にとる。各利用者端末は利用者の映像を
ビデオカメラで高品質に撮影し、１フレーム毎にディジ
タル化して、サーバに送信する。サーバでは利用者分の
メモリを持ち、映像を受信する度にメモリに上書きして
保存する。映像の品質はフレーム数／時間と解像度で規
定される。前者は映像の動きのなめらかさ、後者は映像
の美しさに寄与する。各通信端末は、仮想空間内で自分
と相手の分身との距離の遠近、視線の一致度に応じて、
サーバに映像を要求する間隔を相手毎に変えたり、異な
る解像度を指定してサーバに要求する。サーバは指定さ
れた利用者の映像を指定された解像度に落として、要求
元通信端末に送信する。すなわち、フレーム数／時間は
要求元通信端末側で制御し、解像度は要求元通信端末の
指定に基づいてサーバで制御する。これにより、伝送容
量を削減することが可能となる。
【００１４】図１は仮想空間を上から見た図で、通信端
末がサーバに要求する映像の品質の指定の仕方の例を示
している。分身ａを基準にすると、分身ｂは距離も近
く、視線も一致しているので、最も高品質な映像をサー
バに要求する。分身ｅは視線が一致しているが、距離が
遠いため、中品質の映像をサーバに要求する。分身ｄは
距離は近いが、視線が少しずれているため、低品質な映
像をサーバに要求する。分身ｃはお互いの視線が全く一
致しておらず、分身ｆは視野外にいるため、分身ａの通
信端末はサーバに対し、分身ｃとｆの映像を要求しな
い。
末がサーバに要求する映像の品質の指定の仕方の例を示
している。分身ａを基準にすると、分身ｂは距離も近
く、視線も一致しているので、最も高品質な映像をサー
バに要求する。分身ｅは視線が一致しているが、距離が
遠いため、中品質の映像をサーバに要求する。分身ｄは
距離は近いが、視線が少しずれているため、低品質な映
像をサーバに要求する。分身ｃはお互いの視線が全く一
致しておらず、分身ｆは視野外にいるため、分身ａの通
信端末はサーバに対し、分身ｃとｆの映像を要求しな
い。
【００１５】図２は、図１の場合の利用者ａの表示イメ
ージを示している。
ージを示している。
【００１６】図３は集中接続方式の仮想空間共有システ
ムにおけるサーバの構成例を示している。簡単のため、
３台の通信端末を収容する場合について示している。
ムにおけるサーバの構成例を示している。簡単のため、
３台の通信端末を収容する場合について示している。
【００１７】サーバ１０は、通信端末とは公衆網、回線
３４，３５，３６を介して映像と位置情報の送受信を行
う。まず、回線３４，３５，３６から受信したデータ
は、それぞれ回線インタフェース部１１，１２，１３で
受信する。回線インタフェース部１１，１２，１３は、
受信したデータを解析し、映像であれば、内部バス１
９，２３，２７を介して映像を映像蓄積部１６へ転送す
る。映像蓄積部１６は収容端末対応に映像を蓄積するメ
モリを有しており、受領した映像をメモリに書き込む。
回線インタフェース部１１，１２，１３は、受信したデ
ータが位置情報であれば、内部バス２１，２５，２９を
介して位置情報を位置情報分配部１４へ転送する。位置
情報分配部１４は内部バス２１から受けた位置情報をコ
ピーして内部バス２６，３０を介して回線インタフェー
ス部１２，１３へ転送する。また、位置情報分配部１４
は内部バス２５から受けた位置情報をコピーして内部バ
ス２２，３０を介して回線インタフェース部１１，１３
へ転送する。また、位置情報分配部１４は内部バス２９
から受けた位置情報をコピーして内部バス２２，２６を
介して回線インタフェース部１１，１２へ転送する。回
線インタフェース部１１，１２，１３は、受信したデー
タが映像要求情報であれば、内部バス２１，２５，２９
を介して映像要求情報を映像要求解析部１５へ転送す
る。映像要求解析部１５は受領した映像要求を解析し、
要求されている映像を内部バス３２を介して映像蓄積部
１６に通知するとともに、内部バス３３を介して要求解
像度と要求元端末を映像処理部１７に通知する。映像蓄
積部１６は映像要求解析部１５から内部バス３２を介し
て指定された映像をメモリから読み出し、内部バス３１
を介して映像処理部１７へ転送する。映像処理部１７は
映像蓄積部１６から内部バス３１を介して受領した映像
を、映像要求解析部１５から内部バス３３を介して指定
された解像度に変換する。映像処理部１７は映像要求解
析部１５から内部バス３３を介して指定された要求元端
末情報に基づいて、内部バス２０、回線インタフェース
部１１、回線３４、または内部バス２４、回線インタフ
ェース部１２、回線３５、または内部バス２８、回線イ
ンタフェース部１３、回線３６のいずれかを介して要求
元通信端末に送信する。
３４，３５，３６を介して映像と位置情報の送受信を行
う。まず、回線３４，３５，３６から受信したデータ
は、それぞれ回線インタフェース部１１，１２，１３で
受信する。回線インタフェース部１１，１２，１３は、
受信したデータを解析し、映像であれば、内部バス１
９，２３，２７を介して映像を映像蓄積部１６へ転送す
る。映像蓄積部１６は収容端末対応に映像を蓄積するメ
モリを有しており、受領した映像をメモリに書き込む。
回線インタフェース部１１，１２，１３は、受信したデ
ータが位置情報であれば、内部バス２１，２５，２９を
介して位置情報を位置情報分配部１４へ転送する。位置
情報分配部１４は内部バス２１から受けた位置情報をコ
ピーして内部バス２６，３０を介して回線インタフェー
ス部１２，１３へ転送する。また、位置情報分配部１４
は内部バス２５から受けた位置情報をコピーして内部バ
ス２２，３０を介して回線インタフェース部１１，１３
へ転送する。また、位置情報分配部１４は内部バス２９
から受けた位置情報をコピーして内部バス２２，２６を
介して回線インタフェース部１１，１２へ転送する。回
線インタフェース部１１，１２，１３は、受信したデー
タが映像要求情報であれば、内部バス２１，２５，２９
を介して映像要求情報を映像要求解析部１５へ転送す
る。映像要求解析部１５は受領した映像要求を解析し、
要求されている映像を内部バス３２を介して映像蓄積部
１６に通知するとともに、内部バス３３を介して要求解
像度と要求元端末を映像処理部１７に通知する。映像蓄
積部１６は映像要求解析部１５から内部バス３２を介し
て指定された映像をメモリから読み出し、内部バス３１
を介して映像処理部１７へ転送する。映像処理部１７は
映像蓄積部１６から内部バス３１を介して受領した映像
を、映像要求解析部１５から内部バス３３を介して指定
された解像度に変換する。映像処理部１７は映像要求解
析部１５から内部バス３３を介して指定された要求元端
末情報に基づいて、内部バス２０、回線インタフェース
部１１、回線３４、または内部バス２４、回線インタフ
ェース部１２、回線３５、または内部バス２８、回線イ
ンタフェース部１３、回線３６のいずれかを介して要求
元通信端末に送信する。
【００１８】図４は集中接続方式の仮想空間共有システ
ムにおける通信端末の構成例を示している。
ムにおける通信端末の構成例を示している。
【００１９】通信端末５０は、通信網、回線７４を介し
てサーバ１０との間で映像と位置情報の送受信を行う。
まず、ビデオカメラ５２で利用者の映像を撮影し、内部
バス６７を介して映像ディジタル処理部５４へ転送す
る。映像ディジタル処理部５４は、受領した映像を１フ
レームずつディジタル化し、内部バス６４、回線インタ
フェース部６１、回線７６を介してサーバ１０へ送信す
る。利用者が操作器５３を操作すると、ケーブル７５を
介して操作器インタフェース部５８に移動情報が通知さ
れる。操作器インタフェース部５８は位置情報を内部バ
ス６２、回線インタフェース部６１、回線７６を介して
サーバ１０に送信する。同時に、操作器インタフェース
５８は内部バス７０を介して仮想空間モデル視点移動処
理部６０に移動情報を通知する。仮想空間モデル視点移
動処理部６０は利用者に提示する仮想モデルの視点を変
更し、内部バス７３を介して仮想空間表示部５１に表示
する。また、操作器インタフェース部５８は内部バス７
１を介して移動情報を距離・視線一致度判定部５７に通
知する。他方、回線インタフェース部６１は、受信した
データが位置情報であると、内部バス６６を介して他分
身位置・視線の向き解析部５６に転送する。他分身位置
・視線の向き解析部５６は、他分身の位置情報と、視線
の向き情報を内部バス６９，７４を介してそれぞれ他分
身移動処理部５９、距離・視線一致度判定部５７へ転送
する。距離・視線一致度判定部５７は操作器インタフェ
ース部５８から内部バス７１を介して受領した利用者の
分身の移動情報と、他分身位置・視線の向き解析部５６
から内部バス７４を介して受領した他の分身の移動情報
から、利用者の分身と他分身間との距離と視線一致度を
判定し、図１で説明した方法で、内部バス６３、回線イ
ンタフェース部６１、回線７６を介してサーバ１０に対
し、映像の要求を行う。回線インタフェース部６１は、
受信したデータが映像情報であると、内部バス６５を介
して映像マッピング部５５に転送する。映像マッピング
部５５は内部バス６５を介して回線インタフェース部６
１から受領した映像を該当の分身にマッピングし、内部
バス６８を介して仮想空間表示部５１に表示する。他分
身移動処理部５９は、内部バス６９を介して他分身位置
・視線の向き解析部５６から受領した他分身の移動情報
に基づいて他の分身の位置と視線の向きを変更し、内部
バス７２を介して仮想空間表示部５１に表示する。
てサーバ１０との間で映像と位置情報の送受信を行う。
まず、ビデオカメラ５２で利用者の映像を撮影し、内部
バス６７を介して映像ディジタル処理部５４へ転送す
る。映像ディジタル処理部５４は、受領した映像を１フ
レームずつディジタル化し、内部バス６４、回線インタ
フェース部６１、回線７６を介してサーバ１０へ送信す
る。利用者が操作器５３を操作すると、ケーブル７５を
介して操作器インタフェース部５８に移動情報が通知さ
れる。操作器インタフェース部５８は位置情報を内部バ
ス６２、回線インタフェース部６１、回線７６を介して
サーバ１０に送信する。同時に、操作器インタフェース
５８は内部バス７０を介して仮想空間モデル視点移動処
理部６０に移動情報を通知する。仮想空間モデル視点移
動処理部６０は利用者に提示する仮想モデルの視点を変
更し、内部バス７３を介して仮想空間表示部５１に表示
する。また、操作器インタフェース部５８は内部バス７
１を介して移動情報を距離・視線一致度判定部５７に通
知する。他方、回線インタフェース部６１は、受信した
データが位置情報であると、内部バス６６を介して他分
身位置・視線の向き解析部５６に転送する。他分身位置
・視線の向き解析部５６は、他分身の位置情報と、視線
の向き情報を内部バス６９，７４を介してそれぞれ他分
身移動処理部５９、距離・視線一致度判定部５７へ転送
する。距離・視線一致度判定部５７は操作器インタフェ
ース部５８から内部バス７１を介して受領した利用者の
分身の移動情報と、他分身位置・視線の向き解析部５６
から内部バス７４を介して受領した他の分身の移動情報
から、利用者の分身と他分身間との距離と視線一致度を
判定し、図１で説明した方法で、内部バス６３、回線イ
ンタフェース部６１、回線７６を介してサーバ１０に対
し、映像の要求を行う。回線インタフェース部６１は、
受信したデータが映像情報であると、内部バス６５を介
して映像マッピング部５５に転送する。映像マッピング
部５５は内部バス６５を介して回線インタフェース部６
１から受領した映像を該当の分身にマッピングし、内部
バス６８を介して仮想空間表示部５１に表示する。他分
身移動処理部５９は、内部バス６９を介して他分身位置
・視線の向き解析部５６から受領した他分身の移動情報
に基づいて他の分身の位置と視線の向きを変更し、内部
バス７２を介して仮想空間表示部５１に表示する。
【００２０】次に、分散接続方式の場合について説明す
る。
る。
【００２１】図５は分散接続方式の仮想空間共有システ
ムにおける通信端末の構成例を示している。
ムにおける通信端末の構成例を示している。
【００２２】通信装置１００は、通信網、回線１２１を
介して他の通信端末置との間で映像と位置情報の送受信
を行う。利用者が操作器１０３を操作すると、ケーブル
１３１を介して操作器インタフェース部１１２に移動情
報が通知される。操作器インタフェース部１１２は位置
情報を内部バス１２８、回線インタフェース部１１３、
回線１２１を介して他の通信端末に分配する。同時に操
作器インタフェース１１２は内部バス１３０を介して仮
想空間モデル視点移動処理部１１１に移動情報を通知す
る。仮想空間モデル視点移動処理部１１１は利用者に提
示する仮想モデルの視点を変更し、内部バス１２７を介
して仮想空間表示部１０１に表示する。また、操作器イ
ンタフェース部１１２は内部バス１２９を介して移動情
報を距離・視線一致度判定部１１０に通知する。他方、
回線インタフェース部１１３は、受信したデータが位置
情報であると、内部バス１２２を介して他分身位置・視
線の向き解析部１０８に転送する。他分身位置・視線の
向き解析部１０８は、他分身の位置情報と、視線の向き
情報を内部バス１２３，１２５を介してそれぞれ他分身
移動処理部１０９、距離・視線一致度判定部１１０へ転
送する。距離・視線一致度判定部１１０は操作器インタ
フェース部１１２から内部バス１２９を介して受領した
利用者の分身の移動情報と、他分身位置・視線の向き解
析部１０８から内部バス１２５を介して受領した他の分
身の移動情報から、利用者の分身と他分身間との距離と
視線の一致度を判定し、図１で説明した方法で、内部バ
ス１２６、回線インタフェース部１１３、回線１２１を
介して他通信端末に対し映像の要求を行う。回線インタ
フェース部１１３は、受信したデータが映像情報である
と、内部バス１１９を介して映像マッピング部１０７に
転送する。映像マッピング部１０７は内部バス１１９を
介して回線インタフェース部１１３から受領した映像を
該当の分身にマッピングし、内部バス１２０を介して仮
想空間表示部１０１に表示する。他分身移動処理部１０
９は、内部バス１２３を介して他分身位置・視線の向き
解析部１０８から受領した他分身の移動情報に基づいて
他分身の位置と視線の向きを変更し、内部バス１２４を
介して仮想空間表示部１０１に表示する。他方、ビデオ
カメラ１０２は利用者の映像を撮影し、内部バス１１５
を介して映像蓄積・処理部１０４へ転送する。映像蓄積
・処理部１０４は、受領した映像を１フレームずつディ
ジタル化し、内部にあるメモリに書き込む。回線インタ
フェース部１１３は、受信したデータが映像要求情報で
あると、内部バス１１８を介して映像要求解析部１０６
に転送する。映像要求解析部１０６は受領した映像要求
を解析し、内部バス１１７を介して要求解像度と要求元
装置を映像蓄積・処理部１０４に通知する。映像蓄積・
処理部１０４は映像をメモリから読み出し、指定された
解像度に変換した後、内部バス１１４、回線インタフェ
ース部１１３、回線１２１を介して要求元通信端末に送
信する。
介して他の通信端末置との間で映像と位置情報の送受信
を行う。利用者が操作器１０３を操作すると、ケーブル
１３１を介して操作器インタフェース部１１２に移動情
報が通知される。操作器インタフェース部１１２は位置
情報を内部バス１２８、回線インタフェース部１１３、
回線１２１を介して他の通信端末に分配する。同時に操
作器インタフェース１１２は内部バス１３０を介して仮
想空間モデル視点移動処理部１１１に移動情報を通知す
る。仮想空間モデル視点移動処理部１１１は利用者に提
示する仮想モデルの視点を変更し、内部バス１２７を介
して仮想空間表示部１０１に表示する。また、操作器イ
ンタフェース部１１２は内部バス１２９を介して移動情
報を距離・視線一致度判定部１１０に通知する。他方、
回線インタフェース部１１３は、受信したデータが位置
情報であると、内部バス１２２を介して他分身位置・視
線の向き解析部１０８に転送する。他分身位置・視線の
向き解析部１０８は、他分身の位置情報と、視線の向き
情報を内部バス１２３，１２５を介してそれぞれ他分身
移動処理部１０９、距離・視線一致度判定部１１０へ転
送する。距離・視線一致度判定部１１０は操作器インタ
フェース部１１２から内部バス１２９を介して受領した
利用者の分身の移動情報と、他分身位置・視線の向き解
析部１０８から内部バス１２５を介して受領した他の分
身の移動情報から、利用者の分身と他分身間との距離と
視線の一致度を判定し、図１で説明した方法で、内部バ
ス１２６、回線インタフェース部１１３、回線１２１を
介して他通信端末に対し映像の要求を行う。回線インタ
フェース部１１３は、受信したデータが映像情報である
と、内部バス１１９を介して映像マッピング部１０７に
転送する。映像マッピング部１０７は内部バス１１９を
介して回線インタフェース部１１３から受領した映像を
該当の分身にマッピングし、内部バス１２０を介して仮
想空間表示部１０１に表示する。他分身移動処理部１０
９は、内部バス１２３を介して他分身位置・視線の向き
解析部１０８から受領した他分身の移動情報に基づいて
他分身の位置と視線の向きを変更し、内部バス１２４を
介して仮想空間表示部１０１に表示する。他方、ビデオ
カメラ１０２は利用者の映像を撮影し、内部バス１１５
を介して映像蓄積・処理部１０４へ転送する。映像蓄積
・処理部１０４は、受領した映像を１フレームずつディ
ジタル化し、内部にあるメモリに書き込む。回線インタ
フェース部１１３は、受信したデータが映像要求情報で
あると、内部バス１１８を介して映像要求解析部１０６
に転送する。映像要求解析部１０６は受領した映像要求
を解析し、内部バス１１７を介して要求解像度と要求元
装置を映像蓄積・処理部１０４に通知する。映像蓄積・
処理部１０４は映像をメモリから読み出し、指定された
解像度に変換した後、内部バス１１４、回線インタフェ
ース部１１３、回線１２１を介して要求元通信端末に送
信する。
【００２３】
【発明の効果】以上説明したように、本発明によれば、
分散接続方式における各通信端末、または集中接続方式
におけるサーバにおいて、高品質に撮像された各利用者
の映像を、各通信端末またはサーバのメモリに保有し、
各通信端末からの要求に従って必要な映像を必要な品質
にして送信することにより、通信網の輻輳の回避と端末
における映像受信処理の負荷軽減を図り、結果的に映像
品質の画一的な劣化を回避することができる効果があ
る。
分散接続方式における各通信端末、または集中接続方式
におけるサーバにおいて、高品質に撮像された各利用者
の映像を、各通信端末またはサーバのメモリに保有し、
各通信端末からの要求に従って必要な映像を必要な品質
にして送信することにより、通信網の輻輳の回避と端末
における映像受信処理の負荷軽減を図り、結果的に映像
品質の画一的な劣化を回避することができる効果があ
る。
【図１】視野の内外、距離、視線の一致度による優先度
付けの例を示す図である。
付けの例を示す図である。
【図２】図１の例において利用者ａの表示イメージを示
す図である。
す図である。
【図３】本発明の一実施例で、集中接続方式の仮想空間
共有システムにおけるサーバの構成図である。
共有システムにおけるサーバの構成図である。
【図４】本発明の一実施例で、集中接続方式の仮想空間
共有システムにおける通信端末の構成図である。
共有システムにおける通信端末の構成図である。
【図５】本発明の他の実施例で、分散接続方式の仮想空
間共有システムにおける通信端末の構成図である。
間共有システムにおける通信端末の構成図である。
【図６】分散接続方式の仮想空間共有システムの例を示
す図である。
す図である。
【図７】集中接続方式の仮想空間共有装置の例を示す図
である。
である。
１０ サーバ １１，１２，１３ 回線インタフェース部 １４ 位置情報分配部 １５ 映像要求解析部 １６ 映像蓄積部 １７ 映像処理部 １９，２０，２１，２２，２３，２４，２５，２６，２
７，２８，２９，３０，３１，３２，３３ 内部バス ３４，３５，３６ 通信回線 ５０ 集中接続型仮想空間共有システムの通信端末 ５１ 仮想空間表示部 ５２ ビデオカメラ ５３ 操作器 ５４ 映像ディジタル処理部 ５５ 映像マッピング部 ５６ 他分身位置・視線の向き解析部 ５７ 距離・視線一致度判定部 ５８ 操作器インタフェース部 ５９ 他分身移動処理部 ６０ 仮想空間モデル視点移動処理部 ６１ 回線インタフェース部 ６２，６３，６４，６５，６６，６７，６８，６９，７
０，７１，７２，７３，７４ 内部バス ７５ 操作器ケーブル ７６ 通信回線 １００ 分散接続型仮想空間共有システムの通信端末 １０１ 仮想空間表示部 １０２ ビデオカメラ １０３ 操作器 １０４ 映像蓄積・処理部 １０６ 映像要求解析部 １０７ 映像マッピング部 １０８ 他分身位置・視線の向き解析部 １０９ 他分身移動処理部 １１０ 距離・視線一致度判定部 １１１ 仮想空間モデル視点移動処理部 １１２ 操作器インタフェース部 １１３ 回線インタフェース部 １１４，１１５，１１６，１１７，１１８，１１９，１
２０，１２２，１２３，１２４，１２５，１２６，１２
７，１２８，１２９，１３０ 内部バス １２１ 通信回線 １３１ 操作器ケーブル
７，２８，２９，３０，３１，３２，３３ 内部バス ３４，３５，３６ 通信回線 ５０ 集中接続型仮想空間共有システムの通信端末 ５１ 仮想空間表示部 ５２ ビデオカメラ ５３ 操作器 ５４ 映像ディジタル処理部 ５５ 映像マッピング部 ５６ 他分身位置・視線の向き解析部 ５７ 距離・視線一致度判定部 ５８ 操作器インタフェース部 ５９ 他分身移動処理部 ６０ 仮想空間モデル視点移動処理部 ６１ 回線インタフェース部 ６２，６３，６４，６５，６６，６７，６８，６９，７
０，７１，７２，７３，７４ 内部バス ７５ 操作器ケーブル ７６ 通信回線 １００ 分散接続型仮想空間共有システムの通信端末 １０１ 仮想空間表示部 １０２ ビデオカメラ １０３ 操作器 １０４ 映像蓄積・処理部 １０６ 映像要求解析部 １０７ 映像マッピング部 １０８ 他分身位置・視線の向き解析部 １０９ 他分身移動処理部 １１０ 距離・視線一致度判定部 １１１ 仮想空間モデル視点移動処理部 １１２ 操作器インタフェース部 １１３ 回線インタフェース部 １１４，１１５，１１６，１１７，１１８，１１９，１
２０，１２２，１２３，１２４，１２５，１２６，１２
７，１２８，１２９，１３０ 内部バス １２１ 通信回線 １３１ 操作器ケーブル
Claims (2)
- 【請求項１】 通信端末を複数台具備し、通信端末利用
者が自身の分身および他の利用者の分身を表示する仮想
空間を各通信端末に構成し、これら複数台の通信端末が
通信網を介して相互に接続され、各通信端末利用者の映
像および仮想空間内における分身の位置情報を他の通信
端末に分配することにより複数の通信端末利用者が同一
の仮想空間を相互に隔離して共有する分散接続方式の仮
想空間共有システムにおいて、 他分身の位置情報と視線の向き情報と利用者の分身の位
置情報と視線の向き情報から利用者の分身と他分身間と
の距離と視線の一致度を判定し、該一致度に応じて品質
を指定し、他通信端末に対し映像を要求する手段と、 通信端末対応に映像を蓄積するメモリと、 利用者の映像を撮影し、前記メモリに書き込む手段と、 受信した映像要求を解析し、前記メモリから要求された
利用者の映像を読み出し、指定された品質に処理して要
求元通信端末に送信する手段と、 送信されてきた映像を、該当利用者の分身に表示する手
段を各通信端末が有することを特徴とする仮想空間共有
システム。 - 【請求項２】 通信端末を複数台具備し、通信端末利用
者が自身の分身および他の利用者の分身を表示する仮想
空間を各通信端末に構成し、これら複数台の通信端末が
通信網を介してサーバと接続され、各通信端末利用者の
映像および仮想空間内における分身の位置情報を他の通
信端末に分配することにより複数の通信端末利用者が同
一の仮想空間を相互に隔離して共有する集中接続方式の
仮想空間共有システムにおいて、 前記サーバは、通信端末対応に映像を蓄積するメモリ
と、受信した映像を前記メモリに書き込む手段と、通信
端末から受信した映像要求を解析し、要求されている映
像を前記メモリから読み出し、指定された品質に処理し
て要求元通信端末に送信する手段を有し、 前記各通信端末は、利用者の映像を撮像し、前記サーバ
に送信する手段と、他分身の位置情報と視線の向き情報
と利用者の分身の位置情報と視線の向き情報から利用者
の分身と他分身間との距離と視線の一致度を判定し、該
一致度に応じて品質を指定し、前記サーバに対し映像を
要求する手段と、前記サーバから送信されてきた映像
を、該当利用者の分身に表示する手段を有することを特
徴とする仮想空間共有システム。
Priority Applications (9)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15050195A JP3183496B2 (ja) | 1995-06-16 | 1995-06-16 | 仮想空間共有システム |
| US08/509,091 US5736982A (en) | 1994-08-03 | 1995-08-01 | Virtual space apparatus with avatars and speech |
| DE69521369T DE69521369T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren für einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| CA002155254A CA2155254C (en) | 1994-08-03 | 1995-08-02 | Virtual space display method and virtual space sharing apparatus using the same |
| DE69531009T DE69531009T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren für einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| DE69525551T DE69525551T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren fur einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| EP95112163A EP0696018B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
| EP99112202A EP0942397B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
| EP99112201A EP0942396B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15050195A JP3183496B2 (ja) | 1995-06-16 | 1995-06-16 | 仮想空間共有システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH099222A true JPH099222A (ja) | 1997-01-10 |
| JP3183496B2 JP3183496B2 (ja) | 2001-07-09 |
Family
ID=15498248
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15050195A Expired - Lifetime JP3183496B2 (ja) | 1994-08-03 | 1995-06-16 | 仮想空間共有システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3183496B2 (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000306120A (ja) * | 1999-04-22 | 2000-11-02 | Mitsubishi Electric Corp | 分散仮想空間情報管理伝送方法 |
| JP2006285833A (ja) * | 2005-04-04 | 2006-10-19 | Sony Corp | 情報処理装置および方法、記録媒体、並びにプログラム |
| US7382396B2 (en) * | 2003-06-14 | 2008-06-03 | Lg Electronics Inc. | Image data processing system and method of mobile communication terminal |
| JP2012511213A (ja) * | 2008-12-05 | 2012-05-17 | ソーシャル・コミュニケーションズ・カンパニー | リアルタイムカーネル |
| US10003624B2 (en) | 2009-01-15 | 2018-06-19 | Sococo, Inc. | Realtime communications and network browsing client |
-
1995
- 1995-06-16 JP JP15050195A patent/JP3183496B2/ja not_active Expired - Lifetime
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000306120A (ja) * | 1999-04-22 | 2000-11-02 | Mitsubishi Electric Corp | 分散仮想空間情報管理伝送方法 |
| US7382396B2 (en) * | 2003-06-14 | 2008-06-03 | Lg Electronics Inc. | Image data processing system and method of mobile communication terminal |
| JP2006285833A (ja) * | 2005-04-04 | 2006-10-19 | Sony Corp | 情報処理装置および方法、記録媒体、並びにプログラム |
| JP4661314B2 (ja) * | 2005-04-04 | 2011-03-30 | ソニー株式会社 | 情報処理装置および方法、記録媒体、並びにプログラム |
| US9055131B2 (en) | 2007-10-24 | 2015-06-09 | Social Communications Company | Realtime kernel |
| US10158689B2 (en) | 2007-10-24 | 2018-12-18 | Sococo, Inc. | Realtime kernel |
| JP2012511213A (ja) * | 2008-12-05 | 2012-05-17 | ソーシャル・コミュニケーションズ・カンパニー | リアルタイムカーネル |
| JP2013084283A (ja) * | 2008-12-05 | 2013-05-09 | Social Communications Company | リアルタイムカーネル |
| US10003624B2 (en) | 2009-01-15 | 2018-06-19 | Sococo, Inc. | Realtime communications and network browsing client |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3183496B2 (ja) | 2001-07-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2018012888A1 (en) | Method and system for interactive transmission of panoramic video | |
| US7092012B2 (en) | Image processing apparatus and method, storage medium, and communication system | |
| TWI435279B (zh) | 監控系統，影像擷取裝置，分析裝置及監控方法 | |
| US10712555B2 (en) | Streaming virtual reality video | |
| US6219089B1 (en) | Method and apparatus for electronically distributing images from a panoptic camera system | |
| JP3122576B2 (ja) | ３次元仮想空間共有装置 | |
| JP4478510B2 (ja) | カメラシステム、カメラ、及びカメラの制御方法 | |
| US7148914B2 (en) | Method and apparatus for providing subimages to remote sites | |
| CN103004187A (zh) | 多地点绘制图像共享装置、多地点绘制图像共享系统、由多地点绘制图像共享装置执行的方法、程序和记录介质 | |
| JPH11510341A (ja) | 移動部品を用いないカメラを用いた画像形成および処理装置と方法 | |
| JPH11510342A (ja) | 移動部品を用いないカメラを用いた画像分割、画像形成および処理装置と方法 | |
| WO2001076233A1 (en) | Method and apparatus for omnidirectional imaging | |
| US20170201689A1 (en) | Remotely controlled communicated image resolution | |
| CN107018386A (zh) | 一种视频流多分辨率观测系统 | |
| JP2012216102A (ja) | 画像蓄積システム | |
| JPH099222A (ja) | 仮想空間共有システム | |
| JP2849313B2 (ja) | 画像記録再生装置 | |
| JP6952456B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
| CN110267087B (zh) | 一种动态标签添加方法、设备及系统 | |
| JP3193254B2 (ja) | ３次元仮想空間共有システム | |
| JP3957509B2 (ja) | 映像配信サーバ及び映像配信システム | |
| CN108184053A (zh) | 嵌入式图像处理方法及装置 | |
| JP2019140483A (ja) | 画像処理システム、画像処理システムの制御方法、伝送装置、伝送方法及びプログラム | |
| JP2001169271A (ja) | ３６０度デジタルカメラを用いた画像情報提供システム | |
| JP2006345386A (ja) | 監視カメラの撮影範囲の表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090427 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090427 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100427 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100427 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110427 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120427 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130427 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140427 Year of fee payment: 13 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |