JP2001256512A - Method for virtual space communication and system device - Google Patents

Method for virtual space communication and system device

Info

Publication number
JP2001256512A
JP2001256512A JP2000064303A JP2000064303A JP2001256512A JP 2001256512 A JP2001256512 A JP 2001256512A JP 2000064303 A JP2000064303 A JP 2000064303A JP 2000064303 A JP2000064303 A JP 2000064303A JP 2001256512 A JP2001256512 A JP 2001256512A
Authority
JP
Japan
Prior art keywords
user
virtual space
terminal device
movement
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000064303A
Other languages
Japanese (ja)
Inventor
Shunsuke Konagai
俊介 小長井
Machio Moriuchi
万知夫 森内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2000064303A priority Critical patent/JP2001256512A/en
Publication of JP2001256512A publication Critical patent/JP2001256512A/en
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a method for virtual space communication and a system device which can indicate whether a user exists in the front of a terminal device or not independently of presence/absence of user's input operation by easy processing and a simple constitution. SOLUTION: Plural virtual space communication terminals 21 to 2n are used which can move user's alter ego in a virtual space in accordance with prescribed operation of this user, and each virtual space communication terminal adopts a characteristic constitution means which detects the movement of the user of this terminal by a movement sensor 35 and moves user's alter ego in the virtual space on the basis of the extent of the detected movement of the user.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、複数の利用者が通
信網を介して仮想空間を共有し、その仮想空間に各利用
者の分身を参加させて行うコミュニケーションを円滑に
する仮想空間コミュニケーション方法及びその実施に直
接使用するシステム装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a virtual space communication method in which a plurality of users share a virtual space via a communication network, and a communication performed by making each user's alter ego participate in the virtual space. And a system device directly used for the implementation.

【0002】[0002]

【従来の技術】従来、コンピュータ等を用いて構成した
仮想空間内においてコミュニケーションをする仮想空間
コミュニケーションシステム装置は、複数の利用者が仮
想空間内に分身を参加させ、文字、音声又は分身の身振
りを用いてコミュニケーションを行うものがある。
2. Description of the Related Art Conventionally, a virtual space communication system device that communicates in a virtual space configured by using a computer or the like is a technique in which a plurality of users participate in an alter ego in the virtual space and use characters, voices, or gestures of the alter ego. There is something that uses and communicates.

【0003】利用者は、仮想空間コミュニケーションシ
ステム装置の端末装置に備えられたキーボード及びディ
スプレイを用いて文字によるコミュニケーションをと
り、同じく端末装置に備えられたマイク及びスピーカを
用いて音声によるコミュニケーションをとる。
[0003] A user communicates by characters using a keyboard and a display provided in a terminal device of the virtual space communication system device, and communicates by voice using a microphone and a speaker similarly provided in the terminal device.

【0004】その他に、従来の仮想空間コミュニケーシ
ョンシステム装置では、各利用者それぞれの分身の身振
りを通じたコミュニケーションが実現されている。その
分身の身振りを通じたコミュニケーションは、端末装置
のキーボードにおける特定のキーに分身の身振りを割り
当てておき、利用者がそれらのキーを押すことで分身が
決められた身振りをするものである。
[0004] In addition, in the conventional virtual space communication system device, communication is performed through gestures of each user's alter ego. In the communication through the gesture of the alter ego, the gesture of the alter ego is assigned to a specific key on the keyboard of the terminal device, and the alter ego is determined by the user pressing those keys.

【0005】また、端末装置のディスプレイに表示され
た特定の身振りを示すアイコンを利用者がマウスでクリ
ックするグラフィカルユーザインタフェース(GUI)
により、分身が決められた身振りをするかたちで実現し
ているものもある。また、従来の研究段階の技術として
は、利用者をカメラで写した映像に対して画像認識処理
を施したものを用いたり、利用者が体に磁気センサを装
着するなどして、例えば利用者がお辞儀をした等の動作
を認識し、分身がその動作を行うといった、動作認識処
理を用いた仮想空間コミュニケーションシステム装置も
存在する。
A graphical user interface (GUI) in which a user clicks an icon indicating a specific gesture displayed on a display of a terminal device with a mouse.
In some cases, the alter ego is realized in a fixed gesture. Conventional technologies at the research stage include the use of images obtained by performing image recognition processing on images captured by a camera of a user, and the use of a user wearing a magnetic sensor on the body. There is also a virtual space communication system device that uses an action recognition process, such as recognizing an action such as bowing, and performing an action by the alter ego.

【0006】[0006]

【発明が解決しようとする課題】しかしながら、動作認
識処理を利用しない従来の仮想空間コミュニケーション
システム装置では、文字、音声、分身の身振りのいずれ
の方法によるコミュニケーションでも、利用者の能動的
な端末装置に対する入力操作を通じて実現されている。
即ち、利用者が何ら端末装置に対して入力操作をしない
場合には、仮想空間内の利用者の分身は身動きをしない
し、音声も発しないことになる。
However, in the conventional virtual space communication system apparatus which does not use the action recognition processing, the communication by any method of characters, voices, and alter egos can be performed by the user's active terminal apparatus. It is realized through input operation.
That is, when the user does not perform any input operation on the terminal device, the alter ego of the user in the virtual space does not move and does not emit any sound.

【0007】この結果、従来の仮想空間コミュニケーシ
ョンシステム装置では、仮想空間内の分身を見ても、は
たしてその分身の利用者が、実際には端末装置の前にい
るが入力操作を行っていないだけなのか、それとも端末
装置の席を外してしまっているのか、分からないという
問題点があった。
As a result, in the conventional virtual space communication system device, even if the user looks at the alter ego in the virtual space, the user of the alter ego is actually in front of the terminal device but not performing an input operation. However, there is a problem that it is not known whether the terminal device has been removed from the seat.

【0008】また、従来の仮想空間コミュニケーション
システム装置では、仮想空間内で他の利用者と文字や音
声によるコミュニケーションをとっている場合でも、相
手方がGUI等を通じて分身を動かすための所定の入力
操作を行わない限り、相手方の分身は身動きしないた
め、静止した人形や地蔵と会話しているように感じ、会
話がしにくいという問題点があった。
Further, in the conventional virtual space communication system device, even when the user communicates with other users in the virtual space using characters or voices, the other party performs a predetermined input operation for moving his / her own body through a GUI or the like. Unless performed, the other person's alter ego does not move, so it seems that they are talking with a stationary doll or Jizo, and there is a problem that it is difficult to talk.

【0009】一方、従来の動作認識処理を用いた仮想空
間コミュニケーションシステム装置は、仮想空間中の分
身が利用者の動作をそのまま反映するため、上述の問題
点は解消される。しかしながら、動作認識のための画像
認識処理が量的に膨大であり且つ複雑であるなどの問題
点があり、また高価な磁気センサを利用しなければなら
ないなどの問題点もあり、研究段階を脱していない。
On the other hand, in the virtual space communication system device using the conventional motion recognition processing, the above-mentioned problem is solved because the alter ego in the virtual space reflects the user's motion as it is. However, there is a problem that the image recognition process for motion recognition is enormous and complicated in terms of volume, and there is also a problem that an expensive magnetic sensor must be used. Not.

【0010】ここにおいて、本発明の解決すべき主要な
目的は以下の通りである。即ち、本発明の第1の目的
は、利用者による入力操作の有無にかかわらず、簡易な
手法及び簡易な構成によって、利用者が端末装置の前に
在席中か否かを示すことが可能な仮想空間コミュニケー
ション方法及びシステム装置を提供せんとするものであ
る。
Here, the main objects to be solved by the present invention are as follows. That is, a first object of the present invention is to indicate whether or not a user is present in front of a terminal device by a simple method and a simple configuration regardless of whether or not an input operation is performed by the user. And a virtual space communication method and system device.

【0011】本発明の第2の目的は、仮想空間内の利用
者の分身を動かすための利用者による入力操作を必要と
せずに、当該利用者の現実の動きに応じて仮想空間内の
利用者の分身を身動きさせることが可能な、簡易な処理
及び簡易な構成による仮想空間コミュニケーション方法
及びシステム装置を提供せんとするものである。
[0011] A second object of the present invention is to use a virtual space in accordance with the actual movement of the user without requiring an input operation by the user to move the user in the virtual space. It is an object of the present invention to provide a virtual space communication method and a system device with simple processing and a simple configuration that can move a person's alter ego.

【0012】本発明の第3の目的は、仮想空間内の利用
者の分身を動かすための利用者による入力操作を必要と
せずに、当該利用者の現実の動きに応じて仮想空間内の
利用者の分身から音を発生させることが可能な、簡易な
処理及び簡易な構成による仮想空間コミュニケーション
方法及びシステム装置を提供せんとするものである。
A third object of the present invention is to use a virtual space in accordance with the actual movement of the user without requiring an input operation by the user to move the user in the virtual space. It is an object of the present invention to provide a virtual space communication method and a system device capable of generating a sound from a person's alter ego, with simple processing and a simple configuration.

【0013】本発明の他の目的は、明細書、図面、特
に、特許請求の範囲における各請求項の記載から自ずと
明らかとなろう。
Other objects of the present invention will become apparent from the description of the specification, the drawings, and in particular, the description of each claim in the claims.

【0014】[0014]

【課題を解決するための手段】本発明方法は、上記課題
の解決に当たり、各利用者がそれぞれ端末装置を用いて
仮想空間においてコミュニケーションをとり、端末装置
が当該端末装置の利用者の動きを検出し、検出された利
用者の動きの大きさに基づき、仮想空間において当該利
用者の分身を身動きさせる、構成手法を講じる特徴を有
する。
SUMMARY OF THE INVENTION In order to solve the above-mentioned problems, according to the method of the present invention, each user communicates in a virtual space using a terminal device, and the terminal device detects the movement of the user of the terminal device. Then, based on the magnitude of the detected movement of the user, the present invention has a feature of taking a configuration method of moving the alter ego of the user in the virtual space.

【0015】本発明装置は、上記課題の解決に当たり、
利用者の分身が表現可能な空間である仮想空間を実現す
る仮想空間実現手段と、仮想空間において利用者がコミ
ュニケーションをとるときに用いられる複数の端末装置
とを有し、当該端末装置は、当該端末装置の利用者の動
きを検出し、前記仮想空間実現手段は、当該端末装置が
検出した利用者の動きの大きさに応じて、仮想空間にお
いて当該利用者の分身を身動きさせるような、構成手段
を講じる特徴を有する。
[0015] The device of the present invention solves the above problems.
Virtual space realizing means for realizing a virtual space that is a space in which the alter ego of the user can be expressed, and a plurality of terminal devices used when the user communicates in the virtual space, wherein the terminal device is Detecting a movement of the user of the terminal device, wherein the virtual space realizing means moves the alter ego of the user in the virtual space according to the magnitude of the movement of the user detected by the terminal device; It has the characteristic of taking measures.

【0016】更に、具体的詳細に述べると、当該課題の
解決では、本発明が次に列挙する上位概念から下位概念
にわたる新規な特徴的構成手法又は手段を採用すること
により、上記目的を達成するように為される。
More specifically, in solving the problem, the present invention achieves the above object by adopting a novel characteristic configuration technique or means ranging from the upper concept to the lower concept as listed below. It is done as follows.

【0017】即ち、本発明方法の第1の特徴は、複数の
利用者が通信網を介し遠隔地で共有可能な空間にして、
各利用者の分身が表現可能な空間である仮想空間を用い
て、各利用者がコミュニケーションを計る仮想空間コミ
ュニケーション方法であって、前記仮想空間において前
記利用者の分身を当該利用者の所定の操作に応じて移動
させることが可能な端末装置を複数台用い、当該端末装
置を用いて当該端末装置の利用者の動きを検出し、当該
端末装置が検出した利用者の動きの大きさに基づき、前
記仮想空間において当該端末装置の利用者の分身を身動
きさせる、一連の処理を実施してなる、仮想空間コミュ
ニケーション方法の構成採用にある。
That is, a first feature of the method of the present invention is to provide a space that can be shared by a plurality of users at a remote place via a communication network.
A virtual space communication method in which each user communicates using a virtual space that is a space in which the alter ego of each user can be expressed, wherein the alteration of the user in the virtual space is performed by a predetermined operation of the user. Using a plurality of terminal devices that can be moved according to, the movement of the user of the terminal device is detected using the terminal device, and based on the magnitude of the movement of the user detected by the terminal device, Another object of the present invention is to adopt a configuration of a virtual space communication method in which a series of processes for moving a user of the terminal device in the virtual space are performed.

【0018】本発明方法の第2の特徴は、複数の利用者
が通信網を介し遠隔地で共有可能な空間にして、各利用
者の分身が表現可能な空間である仮想空間を用いて、各
利用者がコミュニケーションを計る仮想空間コミュニケ
ーション方法であって、前記仮想空間において前記利用
者の分身を当該利用者の所定の操作に応じて移動させる
ことが可能な端末装置を複数台用い、当該端末装置を用
いて当該端末装置の利用者の動きを検出し、当該端末装
置が検出した利用者の動きの大きさに基づき、所望の音
を当該端末装置の他の前記端末装置以外において発生さ
せる、一連の処理を実施してなる、仮想空間コミュニケ
ーション方法の構成採用にある。
A second feature of the method of the present invention is that a plurality of users can be shared at a remote place via a communication network, and a virtual space that is a space in which each user can express himself / herself can be used. A virtual space communication method in which each user measures communication, wherein a plurality of terminal devices capable of moving an alternation of the user in the virtual space according to a predetermined operation of the user are used, and the terminal Detecting the movement of the user of the terminal device using the device, based on the magnitude of the movement of the user detected by the terminal device, to generate a desired sound other than the other terminal device of the terminal device, The present invention resides in adoption of a configuration of a virtual space communication method which performs a series of processes.

【0019】本発明方法の第3の特徴は、上記本発明方
法の第1又は第2の特徴における前記端末装置が、当該
端末装置の利用者の前記動きを検出するに当り、ビデオ
カメラ及び画像処理装置を用いて、当該端末装置の利用
者の頭部、胴体のいずれかの動きを検出してなる、仮想
空間コミュニケーション方法の構成採用にある。
A third feature of the method of the present invention is that the terminal device according to the first or second feature of the present invention detects the movement of a user of the terminal device by using a video camera and an image. Another object of the present invention is to adopt a configuration of a virtual space communication method in which a motion of one of a head and a body of a user of the terminal device is detected using a processing device.

【0020】本発明方法の第4の特徴は、上記本発明方
法の第1又は第2の特徴における前記端末装置が、当該
端末装置の利用者の前記動きを検出するに当り、前記仮
想空間を用いて当該利用者がコミュニケーションをとる
ための操作以外の、当該端末装置の操作を検出してな
る、仮想空間コミュニケーション方法の構成採用にあ
る。
A fourth feature of the method of the present invention is that the terminal device according to the first or second feature of the present invention detects the movement of a user of the terminal device and changes the virtual space. Another aspect of the present invention is to adopt a configuration of a virtual space communication method that detects an operation of the terminal device other than an operation for the user to communicate with the terminal device.

【0021】本発明装置の第1の特徴は、複数の利用者
の端末装置群と通信網を介しサーバと接続して、遠隔地
で共有可能な空間かつ各利用者の分身が表現可能な空間
である仮想空間を実現するシステム装置において、前記
仮想空間において前記利用者の分身を当該利用者の所定
の操作に応じて移動させることが可能な前記複数の端末
装置が、他の前記端末装置及び前記サーバと前記通信網
を介して通信する通信制御部と、当該端末装置の利用者
の動きを検出する動作センサと、当該動作センサが検出
した利用者の動きの大きさに応じて、前記仮想空間にお
いて当該利用者の分身を身動きさせる仮想空間表示制御
部と、前記サーバ及び前記仮想空間表示制御部によって
生成された前記仮想空間の内容を示す画像を表示する画
像表示部と、を有してなる、仮想空間コミュニケーショ
ンシステム装置の構成採用にある。
A first feature of the apparatus of the present invention resides in that a terminal device group of a plurality of users is connected to a server via a communication network to form a space that can be shared in a remote place and a space in which each user's identity can be represented. In a system device that realizes a virtual space, the plurality of terminal devices capable of moving the alter ego of the user in the virtual space in accordance with a predetermined operation of the user are the other terminal devices and A communication control unit that communicates with the server via the communication network, an operation sensor that detects a user's movement of the terminal device, and the virtual controller according to the magnitude of the user's movement detected by the operation sensor. A virtual space display control unit that moves the alter ego of the user in a space; and an image display unit that displays an image indicating the contents of the virtual space generated by the server and the virtual space display control unit. Comprising Te, in the configuration adopted in the virtual space communication system device.

【0022】本発明装置の第2の特徴は、複数の利用者
の端末装置群と通信網を介しサーバと接続して、遠隔地
で共有可能な空間かつ各利用者の分身が表現可能な空間
である仮想空間を実現するシステム装置において、前記
仮想空間において前記利用者の分身を当該利用者の所定
の操作に応じて移動させることが可能な前記複数の端末
装置が、他の前記端末装置及び前記サーバと前記通信網
を介して通信する通信制御部と、当該端末装置の利用者
の動きを検出する動作センサと、当該動作センサが検出
した利用者の動きの大きさに応じて、前記仮想空間にお
いて当該利用者の分身が所望の音を生成させたことを示
すように、所望の音を当該端末装置の他の前記端末装置
において生成させる仮想空間表示制御部と、当該仮想空
間表示制御部が生成した音を出力するスピーカと、を有
してなる、仮想空間コミュニケーションシステム装置の
構成採用にある。
A second feature of the apparatus of the present invention resides in that a terminal device group of a plurality of users is connected to a server via a communication network so that a space that can be shared at a remote place and a space where each user's alter ego can be represented. In a system device that realizes a virtual space, the plurality of terminal devices capable of moving the alter ego of the user in the virtual space in accordance with a predetermined operation of the user are the other terminal devices and A communication control unit that communicates with the server via the communication network, an operation sensor that detects a user's movement of the terminal device, and the virtual controller according to the magnitude of the user's movement detected by the operation sensor. A virtual space display control unit that generates a desired sound in another of the terminal devices so as to indicate that the alter ego of the user has generated a desired sound in the space; and the virtual space display control unit. Is raw A speaker for outputting the sound, comprising a, in the configuration adopted in the virtual space communication system device.

【0023】本発明装置の第3の特徴は、上記本発明装
置の第1又は第2の特徴における前記動作センサが、前
記端末装置の利用者の頭部、胴体のいずれかを撮影する
ビデオカメラと、当該ビデオカメラによって逐次撮影さ
れた各画像の差分を算出する画像処理装置と、を有して
なる、仮想空間コミュニケーションシステム装置の構成
採用にある。
A third feature of the device of the present invention is that the motion sensor according to the first or second feature of the above-described device of the present invention is a video camera for photographing either a head or a body of a user of the terminal device. And an image processing device for calculating a difference between images sequentially captured by the video camera.

【0024】本発明装置の第4の特徴は、上記本発明装
置の第1又は第2の特徴における前記動作センサが、前
記利用者が行う前記仮想空間を用いてコミュニケーショ
ンをとるための操作以外の、当該端末装置の操作を検出
して、当該端末装置の利用者の動きを検出する操作検出
手段を有してなる、仮想空間コミュニケーションシステ
ム装置の構成採用にある。
A fourth feature of the device of the present invention resides in that the motion sensor according to the first or second feature of the device of the present invention is different from the above-mentioned device in that the operation performed by the user for performing communication using the virtual space is not performed. Another aspect of the present invention resides in adoption of a configuration of a virtual space communication system device having operation detecting means for detecting an operation of the terminal device and detecting a movement of a user of the terminal device.

【0025】本発明装置の第5の特徴は、上記本発明装
置の第1、第2、第3又は第4の特徴における前記端末
装置が、前記サーバと前記動作センサの内の1以上によ
り生成された前記仮想空間の地形、物体の形状及び色、
前記分身の動作を特定する情報を記憶した仮想空間デー
タ蓄積部を有してなる、仮想空間コミュニケーションシ
ステム装置の構成採用にある。
A fifth feature of the device of the present invention is that the terminal device according to the first, second, third or fourth feature of the device of the present invention is generated by at least one of the server and the motion sensor. Topography of the virtual space, the shape and color of the object,
Another aspect of the present invention resides in adoption of a configuration of a virtual space communication system device having a virtual space data storage unit storing information for specifying the operation of the alter ego.

【0026】以上の特徴的構成手法又は構成手段を本発
明は採用したので、端末装置が検出した利用者の動きの
大きさに基づき、仮想空間内の利用者の分身が身動きす
る。このことにより、従来の動作認識処理を用いた方法
のように、利用者の体の多数の部分の動きを検出して、
例えば「お辞儀」、「拍手」などの動作の意味まで認識
して仮想空間コミュニケーションに利用していたものと
は異なる。
Since the present invention employs the above-described characteristic configuration method or configuration means, the alter ego of the user in the virtual space moves based on the magnitude of the user's motion detected by the terminal device. As a result, the motion of many parts of the user's body is detected as in the method using the conventional motion recognition processing,
For example, it is different from the one used for virtual space communication by recognizing the meaning of actions such as “bow” and “applause”.

【0027】本発明では簡単な構成手法及び簡単な構成
手段によって検出可能な、利用者の動きの大きさのみに
ついて検出し、その動きの大きさに基づいて仮想空間中
の分身がいわば「身じろぎ」する。又は、その動きの大
きさに応じて、利用者の分身が身じろぎに由来する「衣
擦れ」等の効果音を発する。
According to the present invention, only the magnitude of a user's movement, which can be detected by a simple configuration method and a simple configuration means, is detected, and based on the magnitude of the movement, the alter ego in the virtual space is, so to speak, "grooming." I do. Alternatively, in accordance with the magnitude of the movement, the alter ego of the user emits a sound effect such as “rubbing of clothes” derived from the distraction.

【0028】また、利用者の動きを検出する手法又は手
段として、近年パーソナルコンピュータに装備されるこ
との多くなったビデオカメラを用いることで、簡易な構
成であって実現し易い仮想空間コミュニケーション方法
及びシステム装置を提供せんとする。
Further, as a method or means for detecting a user's movement, a virtual space communication method which has a simple configuration and is easy to realize by using a video camera which is often equipped in a personal computer in recent years. No system unit is provided.

【0029】また、利用者の動きを検出する手法又は手
段として、仮想空間を用いて当該利用者がコミュニケー
ションをとるための操作を除くところの、端末装置の操
作を検出する。
As a method or means for detecting the movement of the user, the operation of the terminal device except for the operation for the user to communicate using the virtual space is detected.

【0030】これは、例えば、汎用のパーソナルコンピ
ュータを本発明に係る端末装置として用いて本発明方法
又は本発明システム装置を構成した場合に、利用者が仮
想空間コミュニケーションシステム装置又は方法に対し
ての特定の処理を行わせることを目的として行う入力操
作以外の、利用者のパーソナルコンピュータに対する入
力操作を、利用者の動きを検出する手法又は手段として
用いるようにしたものである。
This is because, for example, when a general-purpose personal computer is used as a terminal device according to the present invention to configure the method of the present invention or the system device of the present invention, the user can use the virtual space communication system device or method. An input operation on the user's personal computer other than an input operation performed for the purpose of performing a specific process is used as a method or means for detecting the movement of the user.

【0031】さらに具体的には、マルチウィンドウ・オ
ペレーティングシステム装置において、本発明に係る仮
想空間コミュニケーションシステム装置又は方法を構成
するソフトウェア以外の、ソフトウェアに対して行うキ
ー入力、マウス等のポインティングデバイス操作が、本
発明に係る端末装置の検出対象となる「利用者の動き」
にあたる。
More specifically, in a multi-window operating system device, other than software constituting the virtual space communication system device or method according to the present invention, a key input to the software and a pointing device operation such as a mouse are performed. "User movement" to be detected by the terminal device according to the present invention
Hit.

【0032】これらのことにより、利用者が特別な入力
操作を行わなくても、仮想空間コミュニケーション方法
及び仮想空間コミュニケーションシステム装置の端末装
置が検出した利用者の動きに基づいて、その利用者の仮
想空間内の分身が身動きしたり、利用者の動きの大きさ
を反映した効果音を発することが可能となるので、仮想
空間内の利用者の分身の様子を見聞きすることにより、
その利用者が端末装置の前に在席中か離席中なのかが容
易に分かる。
Thus, even if the user does not perform any special input operation, the virtual space communication method and the virtual space of the user are detected based on the movement of the user detected by the terminal device of the virtual space communication system device. Since the alter ego in the space can move and emit a sound effect reflecting the magnitude of the user's movement, by listening to the appearance of the alter ego of the user in the virtual space,
It is easy to determine whether the user is present or away from the terminal device.

【0033】また、仮想空間内でコミュニケーションを
している利用者の分身が、その利用者の現実の動きを反
映した身動きをすることにより、従来の仮想空間コミュ
ニケーションシステム装置において課題とされていた、
静止した地蔵を相手に行う会話のようなぎこちなさが解
消され、仮想空間において円滑且つ快適なコミュニケー
ションを可能にする。
In addition, the alternation of a user who communicates in the virtual space makes a movement reflecting the actual movement of the user, which has been a problem in the conventional virtual space communication system.
This eliminates the awkwardness of conversation with a stationary Jizo, and enables smooth and comfortable communication in a virtual space.

【0034】[0034]

【発明の実施の形態】以下、添付図面を参照しながら、
本発明の実施の形態を装置例及び方法例につき説明す
る。
BRIEF DESCRIPTION OF THE DRAWINGS FIG.
Embodiments of the present invention will be described with reference to an example of an apparatus and an example of a method.

【0035】なお、本発明は、利用者による端末装置へ
の入力操作の有無にかかわらず、簡易な処理及び簡易な
構成によって、利用者が端末装置の前に在席中か否かを
示すことが可能な仮想空間コミュニケーションの提供を
可能にするものであるが、本実施形態例では、端末装置
として専ら仮想空間コミュニケーション端末を代表例と
し、仮想空間を実現する仮想空間コミュニケーションサ
ーバを代表例として説明するもこれ等に限定されるもの
ではない。
According to the present invention, whether or not a user is present in front of a terminal device is indicated by simple processing and a simple configuration, regardless of whether or not the user performs an input operation on the terminal device. In this embodiment, a virtual space communication terminal is exclusively used as a terminal device, and a virtual space communication server that realizes a virtual space is described as a typical example. However, the present invention is not limited to these.

【0036】(装置例)図1は、本発明の装置例を示す
仮想空間コミュニケーションシステム装置の概念的構成
ブロック図である。図中、1は仮想空間コミュニケーシ
ョンサーバであり、21〜2nは仮想空間コミュニケー
ション端末である。仮想空間コミュニケーションサーバ
1は、通信網αを介しての各仮想空間コミュニケーショ
ン端末21〜2n相互の通信を制御するものである。
(Example of Apparatus) FIG. 1 is a conceptual block diagram of a virtual space communication system apparatus showing an example of the apparatus of the present invention. In the figure, 1 is a virtual space communication server, and 21 to 2n are virtual space communication terminals. The virtual space communication server 1 controls communication between the virtual space communication terminals 21 to 2n via the communication network α.

【0037】仮想空間コミュニケーションサーバ1及び
仮想空間コミュニケーション端末21〜2nは、相互に
協調して、複数の利用者が通信網αを介して遠隔地で共
有可能な空間であって、各利用者の分身が表現可能な空
間である仮想空間(図示せず)を、実現する仮想空間コ
ミュニケーションシステム装置をなすものである。ま
た、仮想空間コミュニケーション端末21〜2nは、仮
想空間において利用者の分身を利用者の所定の操作に応
じて移動させることが可能な端末装置をそれぞれなすも
のである。
The virtual space communication server 1 and the virtual space communication terminals 21 to 2n cooperate with each other so that a plurality of users can share a remote location via the communication network α. A virtual space communication system device that realizes a virtual space (not shown) that is a space in which the alter ego can be expressed. The virtual space communication terminals 21 to 2n are terminal devices that can move a user's alter ego in a virtual space in accordance with a predetermined operation of the user.

【0038】仮想空間コミュニケーション端末21は、
仮想空間コミュニケーションサーバ1との通信を行う通
信制御部31と、仮想空間の地形、仮想空間中の物体の
形状や色等の情報及び利用者の分身の動作を表現するた
めの情報を蓄積する仮想空間データ蓄積部32と、仮想
空間コミュニケーションサーバ1との通信で得た他の利
用者の分身の位置及び動作についての情報と仮想空間デ
ータ蓄積部32に蓄積されている情報とに基づき利用者
に提示する仮想空間画像を生成する仮想空間表示制御部
33と、仮想空間表示制御部33が生成した仮想空間画
像を表示するCRTモニタ等からなる画像表示部34
と、利用者の動きを検知する動作センサ35と、から構
成されている。
The virtual space communication terminal 21
A communication control unit 31 that communicates with the virtual space communication server 1; The space data storage unit 32 and the user based on the information about the position and operation of the alter ego of another user obtained by communication with the virtual space communication server 1 and the information stored in the virtual space data storage unit 32 A virtual space display control unit 33 that generates a virtual space image to be presented, and an image display unit 34 including a CRT monitor or the like that displays the virtual space image generated by the virtual space display control unit 33
And a motion sensor 35 for detecting the movement of the user.

【0039】また、仮想空間コミュニケーション端末2
1は、動作センサ35の構成要素として、ビデオカメラ
36と、ビデオカメラ36によって入力された画像を処
理する画像処理部37と、を備えている。また、仮想空
間コミュニケーション端末21は、仮想空間における利
用者の分身が発する音などを実現するものとしてスピー
カ38を備えている。
The virtual space communication terminal 2
1 includes a video camera 36 and an image processing unit 37 that processes an image input by the video camera 36 as components of the motion sensor 35. Further, the virtual space communication terminal 21 includes a speaker 38 for realizing a sound or the like emitted by a user's alter ego in the virtual space.

【0040】なお、仮想空間コミュニケーション端末2
2〜2nも、それぞれ、仮想空間コミュニケーション端
末21と同様の構成からなっている。また、仮想空間コ
ミュニケーション端末21〜2nは、キーボード,マウ
ス等の入力装置も備える。
The virtual space communication terminal 2
Each of 2 to 2n has the same configuration as that of the virtual space communication terminal 21. The virtual space communication terminals 21 to 2n also include input devices such as a keyboard and a mouse.

【0041】(方法例)前記装置例に適用する本実施形
態例の方法例につき図1を参照して説明する。仮想空間
コミュニケーション端末21は、動作センサ35によっ
て一定時間毎に利用者の動きの大きさを測定し、測定し
て得た利用者の動きの大きさを示す情報を通信制御部3
1を介して仮想空間コミュニケーションサーバ1に逐次
送信する。
(Example of Method) An example of a method of the present embodiment applied to the above-described apparatus will be described with reference to FIG. The virtual space communication terminal 21 measures the magnitude of the user's movement at regular time intervals by the motion sensor 35 and transmits information indicating the magnitude of the user's movement obtained by the measurement to the communication control unit 3.
1 sequentially transmitted to the virtual space communication server 1.

【0042】仮想空間コミュニケーションサーバ1は、
仮想空間コミュニケーション端末21から受信した利用
者の動きの大きさを示す情報を、他の仮想空間コミュニ
ケーション端末22〜2nへと配信する。
The virtual space communication server 1 includes:
The information indicating the magnitude of the movement of the user received from the virtual space communication terminal 21 is distributed to the other virtual space communication terminals 22 to 2n.

【0043】他の仮想空間コミュニケーション端末22
〜2nも、仮想空間コミュニケーション端末21と同様
に、それぞれの利用者の動きの大きさを示す情報を、仮
想空間コミュニケーションサーバ1を経由して他の仮想
空間コミュニケーション端末21〜2nに伝える。
Another virtual space communication terminal 22
2 to 2n, like the virtual space communication terminal 21, transmits information indicating the magnitude of the movement of each user to the other virtual space communication terminals 21 to 2n via the virtual space communication server 1.

【0044】仮想空間コミュニケーション端末21の通
信制御部31は、仮想空間コミュニケーション端末22
〜2nの利用者の動きの大きさを示す情報を、仮想空間
コミュニケーションサーバ1を経由して相互に受信し、
その情報を仮想空間表示制御部33へ渡す。
The communication control unit 31 of the virtual space communication terminal 21
.About.2n of information indicating the magnitude of the movement of the user are mutually received via the virtual space communication server 1,
The information is passed to the virtual space display control unit 33.

【0045】仮想空間表示制御部33では、通信制御部
31から渡された各仮想空間コミュニケーション端末2
2〜2nの利用者の動きの大きさを示す情報に基づき、
仮想空間データ蓄積部32から、当該仮想空間コミュニ
ケーション端末22〜2nの利用者の分身の動作を表現
するための情報を読み出し、読み出した情報に基づいて
コンピュータグラフィックス画像を生成する。この生成
された利用者の分身の動作を示すコンピュータグラフィ
ックス画像は、画像表示部34によって表示される。
In the virtual space display control unit 33, each virtual space communication terminal 2 passed from the communication control unit 31
Based on information indicating the magnitude of the user's movement of 2 to 2n,
From the virtual space data storage unit 32, information for expressing the action of the alter ego of the user of the virtual space communication terminals 22 to 2n is read, and a computer graphics image is generated based on the read information. The generated computer graphics image showing the operation of the alter ego of the user is displayed by the image display unit 34.

【0046】また、仮想空間表示制御部33では、通信
制御部31から渡された各仮想空間コミュニケーション
端末22〜2nの利用者の動きの大きさを示す情報に基
づき、仮想空間データ蓄積部32から、当該仮想空間コ
ミュニケーション端末22〜2nの利用者の分身の動作
に関する効果音を形成するための情報を読み出し、読み
出した情報に基づいて効果音を生成する。この生成され
た利用者の分身の動作に関する効果音は、スピーカ38
によって出力される。
Further, the virtual space display control unit 33 transmits the virtual space data from the virtual space data storage unit 32 based on the information indicating the magnitude of the movement of the user of each of the virtual space communication terminals 22 to 2n passed from the communication control unit 31. Then, information for forming a sound effect relating to the action of the alter ego of the user of the virtual space communication terminals 22 to 2n is read, and a sound effect is generated based on the read information. The generated sound effect relating to the operation of the alter ego of the user is output from the speaker 38.
Output by

【0047】これらのように、各仮想空間コミュニケー
ション端末21〜2nの画像表示部34に、他の各仮想
空間コミュニケーション端末21〜2nの利用者の分身
の動作が表示されることにより、コミュニケーション相
手の利用者が端末装置の前に在席中か否かを、他の利用
者が容易に逐次認識することができる。
As described above, the image of the user of each of the other virtual space communication terminals 21 to 2n is displayed on the image display unit 34 of each of the virtual space communication terminals 21 to 2n, so that the other party of the communication partner is displayed. Other users can easily and sequentially recognize whether or not the user is present in front of the terminal device.

【0048】また、各仮想空間コミュニケーション端末
21〜2nのスピーカ38から他の各仮想空間コミュニ
ケーション端末21〜2nの利用者の分身の動作に関す
る効果音が発生されることによっても、コミュニケーシ
ョン相手の利用者が端末装置の前に在席中か否かを、他
の利用者が容易に逐次認識することができる。
Also, the speaker 38 of each of the virtual space communication terminals 21 to 2n generates a sound effect relating to the operation of the other user of each of the other virtual space communication terminals 21 to 2n. Other users can easily and sequentially recognize whether or not the user is present in front of the terminal device.

【0049】仮想空間データ蓄積部32に記憶されてい
る利用者の動きの大きさを示す情報は、利用者の分身が
する身震い又は足踏み、机の前に分身が座っているとし
た場合は指で机をたたく又はキーボードを打つ動作等を
表示するための情報であってコンピュータグラフィック
スを生成するために必要となる情報である。
The information indicating the magnitude of the movement of the user stored in the virtual space data storage unit 32 includes the shaking or stepping of the user's alter ego, and the finger when the alter ego is sitting in front of the desk. Is information for displaying an operation of hitting a desk or hitting a keyboard, and is necessary for generating computer graphics.

【0050】この利用者の分身の動き方を示す情報は、
予め各仮想空間コミュニケーション端末21〜2nに蓄
えておいてもよいし、仮想空間の特性又は各利用者の分
身の特性に応じて、何らかの方法で仮想空間コミュニケ
ーションサーバ1を介してネットワークから各仮想空間
コミュニケーション端末21〜2nに端末装置に読み込
ませてもよい。また、利用者の分身の動作に関する効果
音を形成するための情報の蓄積方法についても、利用者
の動きの大きさを示す情報の場合と同様である。
The information indicating the movement of the user's alter ego is
Each of the virtual space communication terminals 21 to 2n may be stored in advance, or each virtual space may be stored in the network via the virtual space communication server 1 in any way according to the characteristics of the virtual space or the characteristics of each user's alter ego. The communication terminals 21 to 2n may be read into the terminal device. In addition, the method of storing information for forming a sound effect related to the movement of the user's alter ego is the same as that for the information indicating the magnitude of the user's movement.

【0051】利用者の動きを検知する方法としては、例
えば、ビデオカメラ36によって逐次利用者を撮影し、
ある時のビデオ画像とその一定時間後のビデオ画像との
差分を画像処理部37で算出することで実現する。ま
た、パターンマッチングの手法を用いて利用者の動きを
検知してもよく、その他の画像処理手法を用いてもよ
い。
As a method of detecting the movement of the user, for example, the user is sequentially photographed by the video camera 36,
This is realized by calculating a difference between a video image at a certain time and a video image after a predetermined time by the image processing unit 37. Further, the movement of the user may be detected by using a pattern matching technique, or another image processing technique may be used.

【0052】以上、本発明の代表的な装置例及び方法例
について説明したが、本発明は、必ずしも上記した事項
に限定されるものではない。本発明の目的を達し、下記
する効果を奏する範囲において、適宜変更実施可能であ
る。
As described above, typical examples of the apparatus and method of the present invention have been described. However, the present invention is not necessarily limited to the above items. Modifications can be made as appropriate within the scope of achieving the object of the present invention and achieving the following effects.

【0053】例えば、利用者の動きを検知する方法とし
ては、ビデオカメラ36及び画像処理部37を用いる方
法に限らず、超音波センサ又は磁気センサを用いて利用
者の動きを検知してもよい。
For example, the method of detecting the movement of the user is not limited to the method using the video camera 36 and the image processing unit 37, and the movement of the user may be detected using an ultrasonic sensor or a magnetic sensor. .

【0054】また、仮想空間表示制御部33が生成して
画像表示部34に表示させるコンピュータグラフィック
ス画像は、2次元コンピュータグラフィックス画像に限
らず、3次元コンピュータグラフィックス画像でもよ
い。
The computer graphics image generated by the virtual space display control unit 33 and displayed on the image display unit 34 is not limited to a two-dimensional computer graphics image, but may be a three-dimensional computer graphics image.

【0055】また、仮想空間を実現する仮想空間コミュ
ニケーションシステム装置として、仮想空間コミュニケ
ーションサーバ1及び仮想空間コミュニケーション端末
21〜2nを用いたが、本発明は、これに限定されるも
のではなく、仮想空間コミュニケーション端末21〜2
nのみを用いて仮想空間を実現してもよく、仮想空間コ
ミュニケーション端末21〜2nのみを用いて本発明に
係る仮想空間コミュニケーションシステム装置を構成し
てもよい。
Although the virtual space communication server 1 and the virtual space communication terminals 21 to 2n are used as the virtual space communication system device for realizing the virtual space, the present invention is not limited to this. Communication terminals 21 and 2
n may be used to implement the virtual space, or the virtual space communication system device according to the present invention may be configured using only the virtual space communication terminals 21 to 2n.

【0056】[0056]

【発明の効果】以上説明したように、本発明によれば、
端末装置が検出した利用者の動きの大きさに基づいて、
仮想空間内のその利用者の分身が身動きをし又は効果音
を発するため、簡易な手法及び簡易な構成によって、コ
ミュニケーション相手の利用者が端末装置の前に在席中
か否か認識することが可能となる。
As described above, according to the present invention,
Based on the magnitude of the user's movement detected by the terminal device,
Since the alter ego of the user in the virtual space moves or emits a sound effect, it is possible to recognize whether or not the user of the communication partner is present in front of the terminal device by a simple method and a simple configuration. It becomes possible.

【0057】また、利用者が特別な入力操作を行わなく
ても、端末装置が検出した利用者の動きの大きさに基づ
いて、仮想空間内のその利用者の分身が身動きをし又は
効果音を発するため、仮想空間内の分身の様子を見聞き
することのみにより、コミュニケーション相手の利用者
が端末装置の前に在席中か否かが自然に且つ逐次に認識
することが可能となる。
Further, even if the user does not perform any special input operation, the alter ego of the user in the virtual space moves or performs a sound effect based on the magnitude of the motion of the user detected by the terminal device. , It is possible to naturally and sequentially recognize whether or not the user of the communication partner is present in front of the terminal device only by seeing and hearing the appearance of the alter ego in the virtual space.

【0058】また、本発明を用いてコミュニケーション
をとっているときに、仮想空間内において利用者の分身
がその利用者の動きを反映した身動き又は音を発生する
ことにより、ライブ感を与え、従来の仮想空間コミュニ
ケーションシステム装置で問題点とされていた、静止し
た地蔵を相手に会話をするようなぎこちなさが解消さ
れ、仮想空間において円滑且つ快適なコミュニケーショ
ンが可能となる等優れた効果を奏する。
Further, when communication is performed using the present invention, the alter ego of the user generates a movement or a sound reflecting the movement of the user in the virtual space, thereby giving a live feeling. This eliminates the awkwardness of talking about a stationary Jizo with the other party, which has been a problem in the virtual space communication system device, and provides excellent effects such as enabling smooth and comfortable communication in the virtual space.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の装置例を示す仮想空間コミュニケーシ
ョンシステム装置の概念的構成ブロック図である。
FIG. 1 is a conceptual block diagram of a virtual space communication system device showing an example of the device of the present invention.

【符号の説明】[Explanation of symbols]

1…仮想空間コミュニケーションサーバ 21〜2n…仮想空間コミュニケーション端末 31…通信制御部 32…仮想空間データ蓄積部 33…仮想空間表示制御部 34…画像表示部 35…動作センサ 36…ビデオカメラ 37…画像処理部 38…スピーカ DESCRIPTION OF SYMBOLS 1 ... Virtual space communication server 21-2n ... Virtual space communication terminal 31 ... Communication control part 32 ... Virtual space data storage part 33 ... Virtual space display control part 34 ... Image display part 35 ... Motion sensor 36 ... Video camera 37 ... Image processing Part 38: Speaker

Claims (9)

【特許請求の範囲】[Claims] 【請求項1】複数の利用者が通信網を介し遠隔地で共有
可能な空間にして、各利用者の分身が表現可能な空間で
ある仮想空間を用いて、各利用者がコミュニケーション
を計る仮想空間コミュニケーション方法であって、 前記仮想空間において前記利用者の分身を当該利用者の
所定の操作に応じて移動させることが可能な端末装置を
複数台用い、 当該端末装置を用いては、当該端末装置の利用者の動き
を検出し、 前記当該端末装置が検出した利用者の動きの大きさに基
づき、前記仮想空間において当該端末装置の利用者の分
身を身動きさせる、 一連の処理を実施する、 ことを特徴とする仮想空間コミュニケーション方法。
A virtual space in which a plurality of users can communicate at a remote location via a communication network, and each user communicates using a virtual space that is a space in which each user's alter ego can be represented. A spatial communication method, wherein a plurality of terminal devices capable of moving the alter ego of the user in the virtual space according to a predetermined operation of the user are used, and the terminal device is used by using the terminal device. Detecting the movement of the user of the device, based on the magnitude of the movement of the user detected by the terminal device, based on the magnitude of the movement of the user of the terminal device in the virtual space, performing a series of processing, A virtual space communication method characterized by the following.
【請求項2】複数の利用者が通信網を介し遠隔地で共有
可能な空間にして、各利用者の分身が表現可能な空間で
ある仮想空間を用いて、各利用者がコミュニケーション
を計る仮想空間コミュニケーション方法であって、 前記仮想空間において前記利用者の分身を当該利用者の
所定の操作に応じて移動させることが可能な端末装置を
複数台用い、 当該端末装置を用いては、当該端末装置の利用者の動き
を検出し、 当該端末装置が検出した利用者の動きの大きさに基づ
き、所望の音を当該端末装置以外の他の前記端末装置に
おいて発生させる、一連の処理を実施する、 ことを特徴とする仮想空間コミュニケーション方法。
2. A virtual space in which a plurality of users can communicate at a remote location via a communication network, and each user communicates using a virtual space which is a space in which each user's alter ego can be represented. A spatial communication method, wherein a plurality of terminal devices capable of moving the alter ego of the user in the virtual space according to a predetermined operation of the user are used, and the terminal device is used by using the terminal device. A series of processes for detecting the movement of the user of the device and generating a desired sound in the other terminal device other than the terminal device based on the magnitude of the movement of the user detected by the terminal device are performed. A virtual space communication method, characterized in that:
【請求項3】前記端末装置は、 当該端末装置の利用者の前記動きを検出するに当り、ビ
デオカメラ及び画像処理装置を用いて、当該端末装置の
利用者の頭部、胴体のいずれかの動きを検出する、 ことを特徴とする請求項1又は2に記載の仮想空間コミ
ュニケーション方法。
3. The terminal device, when detecting the movement of the user of the terminal device, uses a video camera and an image processing device to detect any one of a head and a body of the user of the terminal device. The virtual space communication method according to claim 1, wherein a motion is detected.
【請求項4】前記端末装置は、 当該端末装置の利用者の前記動きを検出するに当り、前
記仮想空間を用いて当該利用者がコミュニケーションを
とるための操作以外の、当該端末装置の操作を検出す
る、ことを特徴とする請求項1又は2に記載の仮想空間
コミュニケーション方法。
4. The terminal device, when detecting the movement of the user of the terminal device, performs an operation of the terminal device other than an operation for the user to communicate using the virtual space. The virtual space communication method according to claim 1, wherein the communication is performed.
【請求項5】複数の利用者の端末装置群と通信網を介し
サーバと接続して、遠隔地で共有可能な空間かつ各利用
者の分身が表現可能な空間を実現するシステム装置にお
いて、 前記仮想空間において前記利用者の分身を当該利用者の
所定の操作に応じて移動させることが可能な前記複数の
端末装置は、 他の前記端末装置及び前記サーバと前記通信網を介して
通信する通信制御部と、 当該端末装置の利用者の動きを検出する動作センサと、 当該動作センサが検出した利用者の動きの大きさに応じ
て、前記仮想空間において当該利用者の分身を身動きさ
せる仮想空間表示制御部と、 前記サーバ及び前記仮想空間表示制御部によって生成さ
れた前記仮想空間の内容を示す画像を表示する画像表示
部と、を有する、 ことを特徴とする仮想空間コミュニケーションシステム
装置。
5. A system device for realizing a space that can be shared in a remote place and a space in which each user's alter ego can be represented by connecting a terminal device group of a plurality of users to a server via a communication network, The plurality of terminal devices capable of moving the alter ego of the user in a virtual space according to a predetermined operation of the user, a communication that communicates with the other terminal devices and the server via the communication network. A control unit, a motion sensor for detecting a motion of the user of the terminal device, and a virtual space for moving the alter ego of the user in the virtual space according to the magnitude of the motion of the user detected by the motion sensor. A virtual space community, comprising: a display control unit; and an image display unit that displays an image indicating the content of the virtual space generated by the server and the virtual space display control unit. Application system unit.
【請求項6】複数の利用者の端末装置群と通信網を介し
サーバと接続して、遠隔地で共有可能な空間かつ各利用
者の分身が表現可能な空間である仮想空間を実現するシ
ステム装置において、 前記仮想空間において前記利用者の分身を当該利用者の
所定の操作に応じて移動させることが可能な前記複数の
端末装置は、 他の前記端末装置及び前記サーバと前記通信網を介して
通信する通信制御部と、 当該端末装置の利用者の動きを検出する動作センサと、 当該動作センサが検出した利用者の動きの大きさに応じ
て、前記仮想空間において当該利用者の分身が所望の音
を生成させたことを示すように、所望の音を当該端末装
置の他の前記端末装置において生成させる仮想空間表示
制御部と、 当該仮想空間表示制御部が生成した音を出力するスピー
カと、 を有する、 ことを特徴とする仮想空間コミュニケーションシステム
装置。
6. A system for connecting a terminal device group of a plurality of users to a server via a communication network to realize a virtual space that is a space that can be shared at a remote location and a space that can represent the identity of each user. In the device, the plurality of terminal devices capable of moving the alter ego of the user in the virtual space in accordance with a predetermined operation of the user are connected to the other terminal devices and the server via the communication network. A communication control unit that communicates with the user, a motion sensor that detects the motion of the user of the terminal device, and an alternation of the user in the virtual space according to the magnitude of the motion of the user detected by the motion sensor. A virtual space display control unit for generating a desired sound in another of the terminal devices so as to indicate that the desired sound has been generated, and a speaker for outputting the sound generated by the virtual space display control unit. It has a mosquito, a virtual space communication system and wherein the.
【請求項7】前記動作センサは、 前記端末装置の利用者の頭部、胴体のいずれかを撮影す
るビデオカメラと、 当該ビデオカメラによって逐次撮影された各画像の差分
を算出する画像処理装置と、を有する、 ことを特徴とする請求項5又は6に記載の仮想空間コミ
ュニケーションシステム装置。
7. A motion camera, comprising: a video camera for photographing one of a head and a body of a user of the terminal device; and an image processing device for calculating a difference between images sequentially photographed by the video camera. The virtual space communication system device according to claim 5, comprising:
【請求項8】前記動作センサは、 前記利用者が行う前記仮想空間を用いてコミュニケーシ
ョンをとるための操作以外の、当該端末装置の操作を検
出して、当該端末装置の利用者の動きを検出する操作検
出手段を有する、 ことを特徴とする請求項5又は6に記載の仮想空間コミ
ュニケーションシステム装置。
8. The motion sensor detects an operation of the terminal device other than an operation performed by the user for communicating using the virtual space, and detects a movement of the user of the terminal device. The virtual space communication system device according to claim 5, further comprising an operation detecting unit that performs the operation.
【請求項9】前記端末装置は、 前記サーバと前記動作センサの内の1以上により生成さ
れた前記仮想空間の地形、物体の形状及び色、前記分身
の動作を特定する情報を記憶した仮想空間データ蓄積部
を有する、 ことを特徴とする請求項5、6、7又は8に記載の仮想
空間コミュニケーションシステム装置。
9. The virtual space storing information for specifying the topography of the virtual space, the shape and color of an object, and the action of the alter ego, generated by the server and at least one of the motion sensors. The virtual space communication system device according to claim 5, further comprising a data storage unit.
JP2000064303A 2000-03-09 2000-03-09 Method for virtual space communication and system device Pending JP2001256512A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000064303A JP2001256512A (en) 2000-03-09 2000-03-09 Method for virtual space communication and system device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000064303A JP2001256512A (en) 2000-03-09 2000-03-09 Method for virtual space communication and system device

Publications (1)

Publication Number Publication Date
JP2001256512A true JP2001256512A (en) 2001-09-21

Family

ID=18584022

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000064303A Pending JP2001256512A (en) 2000-03-09 2000-03-09 Method for virtual space communication and system device

Country Status (1)

Country Link
JP (1) JP2001256512A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005327072A (en) * 2004-05-14 2005-11-24 Nissan Motor Co Ltd Eye tracking apparatus
WO2018199724A1 (en) * 2017-04-28 2018-11-01 황철하 Virtual reality system enabling bi-directional communication

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09120464A (en) * 1995-08-21 1997-05-06 Matsushita Electric Ind Co Ltd Rehabilitation support device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09120464A (en) * 1995-08-21 1997-05-06 Matsushita Electric Ind Co Ltd Rehabilitation support device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005327072A (en) * 2004-05-14 2005-11-24 Nissan Motor Co Ltd Eye tracking apparatus
JP4506272B2 (en) * 2004-05-14 2010-07-21 日産自動車株式会社 Eye tracking device
WO2018199724A1 (en) * 2017-04-28 2018-11-01 황철하 Virtual reality system enabling bi-directional communication

Similar Documents

Publication Publication Date Title
WO2020203999A1 (en) Communication assistance system, communication assistance method, and image control program
EP2201761B1 (en) Enhanced interface for voice and video communications
EP1326445B1 (en) Virtual television phone apparatus
JP2010533006A (en) System and method for communicating with a virtual world
KR20230098089A (en) Avatar display device, avatar creation device and program
JP2003248841A (en) Virtual television intercom
JP3623415B2 (en) Avatar display device, avatar display method and storage medium in virtual space communication system
CN110637274B (en) Information processing apparatus, information processing method, and program
JP6684952B1 (en) Content distribution device, content distribution program, content distribution method, content display device, content display program, and content display method
JP2016018313A (en) Program, information processing apparatus, communication system, and communication method
CN110794964A (en) Interaction method and device for virtual robot, electronic equipment and storage medium
CN112870697B (en) Interaction method, device, equipment and medium based on virtual relation maintenance program
JP3452348B2 (en) Speaker identification method in virtual space and recording medium storing the program
US11212488B2 (en) Conference system
WO2018187640A1 (en) System, method and software for producing virtual three dimensional avatars that actively respond to audio signals while appearing to project forward of or above an electronic display
JP2023100616A (en) Content distribution apparatus, content distribution program, content distribution method, content display device, content display program, and contents display method
JP2001256512A (en) Method for virtual space communication and system device
JP2003108502A (en) Physical media communication system
WO2023032173A1 (en) Virtual space provision device, virtual space provision method, and computer-readable storage medium
WO2023032172A1 (en) Virtual space providing device, virtual space providing method, and computer-readable storage medium
JP7371820B1 (en) Animation operation method, animation operation program and animation operation system
WO2022215725A1 (en) Information processing device, program, and information processing method
JP2022050192A (en) Information processing device and program
TW201108151A (en) Instant communication control system and its control method
JP2024044908A (en) Method, program, and terminal device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040803

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20041130