JPH08329279A - Virtual shared display method for picture communication system - Google Patents
Virtual shared display method for picture communication systemInfo
- Publication number
- JPH08329279A JPH08329279A JP7133100A JP13310095A JPH08329279A JP H08329279 A JPH08329279 A JP H08329279A JP 7133100 A JP7133100 A JP 7133100A JP 13310095 A JP13310095 A JP 13310095A JP H08329279 A JPH08329279 A JP H08329279A
- Authority
- JP
- Japan
- Prior art keywords
- image
- person
- dimensional space
- terminal device
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、複数の利用者がそれぞ
れ画像端末装置を使いネットワークを介して通信する画
像通信システムに関し、特に、コンピュータ上に仮想的
に作成された３次元空間において描画等の情報を共有す
る場合の表示方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image communication system in which a plurality of users respectively communicate with each other using image terminal devices via a network, and particularly to drawing in a three-dimensional space virtually created on a computer. Regarding the display method when sharing information of.
【０００２】[0002]
【従来の技術】建物や車両等の３次元物体は、利用者か
らの見る位置によってその景観がさまざまに変化する。
これら建物や車両等の３次元物体に関わる情報をコンピ
ュータの外部記憶装置に蓄積しておき、３次元コンピュ
ータグラフィクス（ＣＧ）技術を用いて、利用者からの
見る位置に応じて、さまざまな景観を表示できる映像表
示システムが存在する。ここで複数の画像端末装置と、
センタ装置と、センタ装置とこれら複数の画像表示装置
を接続するネットワークとから構成される画像通信シス
テムを考える。図１にその構成を示す。2. Description of the Related Art The landscape of a three-dimensional object such as a building or a vehicle changes variously depending on the position viewed by the user.
Information about these three-dimensional objects such as buildings and vehicles is stored in an external storage device of a computer, and various landscapes can be displayed according to the position viewed from the user by using three-dimensional computer graphics (CG) technology. There is a video display system that can display. Here, a plurality of image terminal devices,
Consider an image communication system including a center device and a network connecting the center device and the plurality of image display devices. The structure is shown in FIG.
【０００３】ＬＡＮ（ローカル・エリア・ネットワー
ク）２に、センタ装置１と複数の画像端末装置３Ａ,３
Ｂ,…が接続されている。画像端末装置３Ａは人物Ａに
対応し、画像端末装置３Ｂは人物Ｂに対応する。各画像
端末装置３Ａ,３Ｂ,…には、端末制御装置１１と、画像
入出力機器であるディスプレイ（表示装置）１２、描画
パッド１３及びＴＶカメラ１４と、音声入出力装置であ
るマイクロホン１６及びスピーカ１７と、３次元物体を
どの位置から眺めるかを入力・指示するためのジョイス
ティック１５とが設けられている。ディスプレイ１２は
表示手段に対応し、描画パッド１３は描画入力手段に対
応し、ＴＶカメラ１４は撮像手段に対応する。A LAN (local area network) 2 is provided with a center device 1 and a plurality of image terminal devices 3A, 3
B, ... Are connected. The image terminal device 3A corresponds to the person A, and the image terminal device 3B corresponds to the person B. Each of the image terminal devices 3A, 3B, ... Has a terminal control device 11, a display (display device) 12 which is an image input / output device, a drawing pad 13 and a TV camera 14, a microphone 16 which is an audio input / output device, and a speaker. 17 and a joystick 15 for inputting and instructing from which position the three-dimensional object is viewed. The display 12 corresponds to display means, the drawing pad 13 corresponds to drawing input means, and the TV camera 14 corresponds to image pickup means.
【０００４】各画像端末装置３Ａ,３Ｂ,…は、その画像
端末装置に対応する人物（利用者）についてマイクロホ
ン１５で収音された音声及びＴＶカメラ１４で撮像され
た人物像と、描画パッド１３により入力された描画情報
と、ジョイスティック１５より入力されたその利用者の
見る位置（視点位置）を表わす視点情報とをセンタ装置
１に送出する。一方、センタ装置１では、端末から送信
されてきた各種情報を受けて、センタ装置１から各画像
端末装置３Ａ,３Ｂ,…にこれらの情報を分配する。な
お、音声については、ミキシングを行なった後に分配す
る。Each of the image terminal devices 3A, 3B, ... Draws the voice picked up by the microphone 15 and the person image picked up by the TV camera 14 and the drawing pad 13 for the person (user) corresponding to the image terminal device. The drawing information input by and the viewpoint information indicating the user's viewing position (viewpoint position) input by the joystick 15 are sent to the center device 1. On the other hand, the center device 1 receives various information transmitted from the terminals and distributes the information from the center device 1 to the image terminal devices 3A, 3B, .... The voice is distributed after mixing.
【０００５】各画像端末装置３Ａ,３Ｂ,…には、予め３
次元物体の情報が蓄積されており、センタ装置１から送
られてくる視点情報に基づき、指定された視点を中心と
して一定の角度（視野角）内に存在する建物や車両等の
３次元物体を３次元ＣＧ技術を用いてディスプレイ１２
に表示する。すなわち、仮想的な３次元空間を設定して
この中に３次元物体を配置し、この３次元空間内の指定
された位置に視点があるとしてこの視点から見える画像
をディスプレイ１２に表示する。なお、各画像端末装置
３Ａ,３Ｂ,…においてジョイスティック１５を用いるこ
とにより、建物や車両等が存在する仮想的な３次元空間
内で視点を自由に移動させることができる。人物像につ
いては、この３次元空間内で視点の存在する位置に円柱
等のモノリス(monolith)を用意し、ここにＴＶカメラ１
４で撮像された人物像を貼り付ける処理を実行する。し
たがって、視点を中心に視野が回転するに伴って、モノ
リスに貼り付けられた人物像の向きも回転する。Each image terminal device 3A, 3B, ...
The information of the three-dimensional object is accumulated, and based on the viewpoint information sent from the center device 1, a three-dimensional object such as a building or a vehicle existing within a certain angle (viewing angle) around the specified viewpoint is displayed. Display 12 using 3D CG technology
To be displayed. That is, a virtual three-dimensional space is set, a three-dimensional object is arranged therein, and an image viewed from this viewpoint is displayed on the display 12 assuming that the viewpoint is located at a specified position in this three-dimensional space. By using the joystick 15 in each of the image terminal devices 3A, 3B, ..., The viewpoint can be freely moved within a virtual three-dimensional space where buildings, vehicles, etc. exist. As for the human figure, a monolith such as a cylinder is prepared at the position where the viewpoint exists in this three-dimensional space, and the TV camera 1 is installed here.
The process of attaching the image of the person captured in 4 is executed. Therefore, as the field of view rotates around the viewpoint, the orientation of the person image attached to the monolith also rotates.
【０００６】また、この仮想的な３次元空間内には、各
画像端末装置３Ａ,３Ｂ,…で共有される描画面が設定さ
れる。この描画面は、いずれかの画像端末装置の描画パ
ッド１３を用いて描画情報が記入された場合には、この
描画面に記入されたものとして扱われるものである。す
なわち、いずれかの描画パッド１３によって入力された
描画内容は、各画像端末装置３Ａ,３Ｂ,…のディスプレ
イ１２において、そのディスプレイ１２上の割り当てら
れた描画領域に表示される。なお、描画面は不透明であ
り、描画面の背後に３次元物体や人物像が存在する場合
には、ディスプレイ１２での表示において、これら３次
元物体や人物像は見えなくなる。A drawing surface shared by the image terminal devices 3A, 3B, ... Is set in the virtual three-dimensional space. This drawing surface is treated as being written on this drawing surface when drawing information is written using the drawing pad 13 of any of the image terminal devices. That is, the drawing content input by one of the drawing pads 13 is displayed in the allocated drawing area on the display 12 of the display 12 of each image terminal device 3A, 3B, .... Note that the drawing surface is opaque, and when a three-dimensional object or a person image exists behind the drawing surface, the three-dimensional object or person image becomes invisible in the display on the display 12.
【０００７】ここで描画像と人物像との表示の関係であ
るが、従来は、視点の位置および視点における視野の中
心線が、人物像の位置及び人物像が正面を向いた時の方
向の中心と一致していた。図２(a)は、従来の画像処理
システムにおいて、仮想的な３次元空間２０の中に建物
２３と人物像Ａ,Ｂと描画面２２が存在している様子を
真上から見た図である。図において、人物像Ａ,Ｂはそ
れぞれ符号２１Ａ,２１Ｂで示され、また各視点ＯA,ＯB
での視野角の範囲はそれぞれ両矢印で示されている。人
物Ｂに対応する視点ＯBの位置は３次元空間２０内で人
物像Ｂの位置と一致し、この視点ＯBの視界には、人物
像Ａ、描画面２２、建物２３が含まれるから、これらの
画像が人物Ｂの画像端末装置３Ｂのディスプレイ１２に
表示されることになる。図２(b)は人物Ａの画像端末装
置３Ａでの表示、図２(c)は人物Ｂの画像端末装置３Ｂ
での表示を表わしている。ここで人物Ａが描画中であり
（図中では「仮想空間とは...」という文字を書いてい
る）、人物Ｂが描画面２２と描画中の人物Ａを眺めてい
る場合には、図２(c)に示すように、人物Ｂの画像端末
装置３Ｂのディスプレイ１２には、人物像Ａとして人物
Ａの背中が表示されることになり、実質的にはモノリス
の存在しか表示されない。Here, regarding the display relationship between the drawn image and the human image, conventionally, the position of the viewpoint and the center line of the visual field at the viewpoint are the positions of the human image and the direction when the human image faces the front. It coincided with the center. FIG. 2A is a diagram of a conventional image processing system, in which a building 23, person images A and B, and a drawing surface 22 are present in a virtual three-dimensional space 20 as seen from directly above. is there. In the figure, the human images A and B are indicated by reference numerals 21A and 21B, respectively, and the viewpoints O A and O B are also shown.
The range of the viewing angle at is indicated by a double-headed arrow. The position of the viewpoint O B corresponding to the person B matches the position of the person image B in the three-dimensional space 20, and the field of view of the viewpoint O B includes the person image A, the drawing surface 22, and the building 23. These images will be displayed on the display 12 of the image terminal device 3B of the person B. 2 (b) is a display on the image terminal device 3A of the person A, and FIG. 2 (c) is an image terminal device 3B of the person B.
Represents the display. Here, when the person A is drawing (in the figure, the character "What is virtual space ..." is written) and the person B is looking at the drawing surface 22 and the person A being drawn, As shown in FIG. 2C, the back of the person A is displayed as the person image A on the display 12 of the image terminal device 3B of the person B, and substantially only the existence of the monolith is displayed.
【０００８】[0008]
【発明が解決しようとする課題】上述したように従来の
画像通信システムでは、人物像の表示とその人物が描い
た描画内容を人物と同じ向きに表示することができず、
誰が描画しているかわからないという問題点がある。As described above, in the conventional image communication system, it is not possible to display a person image and the drawing contents drawn by the person in the same direction as the person.
There is a problem that you do not know who is drawing.
【０００９】本発明の目的は、画像通信システムにおい
て、人物像の表示とその人物が描いた描画内容をその人
物と同じ向きに表示することとが両立でき、かつその描
画内容を見ている参加者の人物像を表示することが可能
な仮想共有表示方法を提供することにある。An object of the present invention is to enable both display of a person image and display of the drawing content drawn by the person in the same direction as that of the person in the image communication system, and participation while watching the drawing content. It is to provide a virtual shared display method capable of displaying a person's image of a person.
【００１０】[0010]
【課題を解決するための手段】本発明の画像通信システ
ムの仮想共有表示方法は、センタ装置と、複数の画像端
末装置と、前記各画像端末装置と前記センタ装置を接続
するネットワークとから構成され、前記画像端末装置が
表示手段と撮像手段と描画入力手段とを有する画像通信
システムでの表示方法であり、前記センタ装置を介して
前記各画像端末装置間で情報を交換することより、仮想
的な３次元空間を生成して前記３次元空間内に前記各画
像端末装置に共有の描画面を設定し、前記描画入力手段
によって入力された描画内容を前記描画面に反映させる
とともに前記撮像手段で撮影された人物像を前記３次元
空間内に配置し、前記各画像端末装置ごとに、前記３次
元空間内における当該画像端末装置に対応する人物の視
点位置から見える画像を前記表示手段に表示する仮想共
有表示方法において、前記描画面を透明像とするととも
に、前記３次元空間における前記人物像の位置を当該人
物の視点から眺めた視野方向の中心線から一定距離の位
置に設定し、前記人物像の向きを当該人物の視点から眺
めた視野方向の中心線と対向する向きにすることを特徴
とする。A virtual shared display method for an image communication system according to the present invention comprises a center device, a plurality of image terminal devices, and a network connecting the image terminal devices and the center device. The image terminal device is a display method in an image communication system having a display unit, an image pickup unit, and a drawing input unit, wherein information is exchanged between the image terminal devices via the center unit, and a virtual method is provided. A three-dimensional space is generated, a common drawing surface is set in each of the image terminal devices in the three-dimensional space, the drawing content input by the drawing input means is reflected on the drawing surface, and the image pickup means is used. The photographed person image is arranged in the three-dimensional space, and for each of the image terminal devices, it can be seen from the viewpoint position of the person corresponding to the image terminal device in the three-dimensional space. In the virtual shared display method of displaying an image on the display means, the drawing surface is a transparent image, and the position of the person image in the three-dimensional space is a constant distance from a center line in the visual field direction viewed from the viewpoint of the person. The position of the person is set so that the direction of the person image is opposite to the center line in the visual field direction viewed from the viewpoint of the person.
【００１１】本発明において、３次元空間において視点
から見て描画面の後方に単色の背景面を配置し、背景の
テクスチュアによって描画内容が見にくくなることを防
ぐようにしてもよい。また、手あるいは腕の画像を予め
蓄積しておき、描画入力手段を用いて描画を行なってい
る人物に対応する３次元空間での人物像での手あるいは
腕の付け値の位置を算出して、当該人物像に手あるいは
腕の画像の画像を付加して表示を行なうようにしてもよ
い。さらに、画像端末装置が人物像の画像情報を送出す
る際に送出元の画像端末装置を識別するための識別子を
付加し、センタ装置から人物像情報を受信した受信側の
画像端末装置は、識別子によって当該人物像の画像情報
の送出元の画像端末装置を判別して当該受信側の画像端
末装置に対応する人物の人物像の表示を行なわないよう
にしてもよい。In the present invention, a monochromatic background surface may be arranged behind the drawing surface in a three-dimensional space from the viewpoint to prevent the drawing contents from being difficult to see due to the texture of the background. Further, the images of the hands or arms are stored in advance, and the position of the bid value of the hand or arm in the human image in the three-dimensional space corresponding to the person who is drawing by using the drawing input means is calculated. Alternatively, an image of an image of a hand or an arm may be added to the person image for display. Further, when the image terminal device transmits the image information of the person image, an identifier for identifying the image terminal device of the transmission source is added, and the image terminal device on the receiving side that receives the person image information from the center device is It is possible to discriminate the image terminal device that is the source of the image information of the person image and not display the person image of the person corresponding to the image terminal device on the receiving side.
【００１２】[0012]
【作用】描画面を透明にするとともに、仮想的な３次元
空間における人物像の位置を当該人物の視点から眺めた
視野方向の中心線から一定距離の位置に設定し、人物像
の向きを当該人物の視点から眺めた視野方向の中心線と
対向する向きとしているので、描画中の人物像とその人
物が描いた描画内容とが同じ向きに表示され、誰が描画
しているのかを容易に視認することが可能になる。さら
に、その描画内容を見ている参加者の人物像も表示され
るようになる。The drawing surface is made transparent, and the position of the human image in the virtual three-dimensional space is set to a position at a certain distance from the center line in the direction of the field of view of the person, and the direction of the human image is changed. Since the direction is opposite to the center line of the visual field viewed from the person's point of view, the image of the person being drawn and the drawing content drawn by that person are displayed in the same direction, making it easy to see who is drawing. It becomes possible to do. Furthermore, the portraits of the participants who are viewing the drawn contents are also displayed.
【００１３】[0013]
【実施例】次に、本発明の実施例について図面を参照し
て説明する。Embodiments of the present invention will now be described with reference to the drawings.
【００１４】《実施例１》図３は本発明の実施例１の仮
想共有表示方法を説明する図であり、(a)は仮想的な３
次元空間２０を上から見たときの平面図、(b)は人物Ａ
の画像端末装置３Ａでの表示例を示す図、(c)は人物Ｂ
の画像端末装置３Ｂでの表示例を示す図である。本実施
例の仮想共有表示方法が適用される画像通信システム
は、図１を用いて「従来の技術」で述べたものと同様の
ものである。<< Embodiment 1 >> FIG. 3 is a diagram for explaining a virtual shared display method according to Embodiment 1 of the present invention. FIG.
A plan view of the dimensional space 20 as seen from above, (b) shows a person A
Showing a display example of the image terminal device 3A of FIG.
It is a figure which shows the example of a display in this image terminal device 3B. The image communication system to which the virtual shared display method of this embodiment is applied is the same as that described in "Prior Art" using FIG.
【００１５】本実施例と図２に示す従来の仮想共有表示
方法とは、描画面２２の属性が透明であることともに、
仮想的な３次元空間２０における視点ＯA,ＯBの位置や
視野の方向で異なっている。すなわち、本実施例では、
図３(a)に示されるように、３次元空間３０における人
物像Ａ,Ｂの位置をそれぞれ当該人物の視点ＯA,ＯBから
眺めた視野方向の中心線（図示破線）から一定距離Ｌの
位置に設定し、人物像Ａ,Ｂの向きを当該人物の視点
ＯA,ＯBから眺めた視野方向の中心線と対向する向きと
している。その際、３次元空間２０内で、視点ＯA,ＯB
と人物像Ａ,Ｂとの中間位置に描画面２２が配置される
ようにする。また、描画パッド１３によって入力された
描画内容は、描画面２２において視点ＯA,ＯBに向いた
方の面に描かれたかのように表示されるようにする。こ
のように人物像Ａ,Ｂを配置した結果、視点ＯA,ＯBから
見た画像すなわち各画像端末装置３Ａ,３Ｂのディスプ
レイ１２に表示される画像は、利用者にとって、その利
用者があたかも鏡を正面に持ち歩いているような画像と
なる。In this embodiment and the conventional virtual shared display method shown in FIG. 2, the attribute of the drawing surface 22 is transparent, and
The positions of the viewpoints O A and O B in the virtual three-dimensional space 20 and the directions of the visual fields are different. That is, in this embodiment,
As shown in FIG. 3A, the positions of the person images A and B in the three-dimensional space 30 are respectively separated by a constant distance L from the center line (broken line in the figure) in the visual field direction viewed from the viewpoints O A and O B of the person. Is set at the position of, and the directions of the person images A and B are opposite to the center line of the visual field direction viewed from the viewpoints O A and O B of the person. At that time, in the three-dimensional space 20, the viewpoints O A , O B
The drawing surface 22 is arranged at an intermediate position between the human images A and B. The drawing contents input by the drawing pad 13, to be displayed as perspective O A, or drawn on the surface of the person facing the O B in the drawing plane 22. As a result of arranging the person images A and B in this way, the images viewed from the viewpoints O A and O B , that is, the images displayed on the display 12 of each of the image terminal devices 3A and 3B are as if the user had the feeling. The image looks like you are carrying a mirror in front of you.
【００１６】上述したように各人物像Ａ,Ｂを仮想的な
３次元空間２０内に配置するためには、画像端末装置３
Ａ,３Ｂで各視点ＯA,ＯBの座標値を受信した際に、それ
ぞれの視点ＯA,ＯBから一定の距離Ｌにある点を３次元
空間２０上で計算し、その点において、視点ＯA,ＯBを
中心とする視界の中心線と対向する向きに、円柱等のモ
ノリスを用意し、そこに撮像された人物像を貼り付ける
ようにする。As described above, in order to arrange the respective human images A and B in the virtual three-dimensional space 20, the image terminal device 3
When the coordinate values of the viewpoints O A and O B are received at A and 3 B , a point at a fixed distance L from the viewpoints O A and O B is calculated in the three-dimensional space 20, and at that point, A monolith such as a cylinder is prepared in a direction opposite to the center line of the visual field centering on the viewpoints O A and O B , and the imaged person image is attached thereto.
【００１７】各人物Ａ,Ｂに対する表示内容がそれぞれ
図３(b),(c)に示されている。人物Ａに対応する画像端
末装置Ａのディスプレイ１２の画面には、描画面２２と
正面を向いた人物像Ａ,Ｂとが表示されている。ここ
で、「仮想空間とは...」は、描画面２２への描画内容
である。描画面２２の属性として透明が設定されている
ので、描画パッド１３の大きさに対応する輪郭線などは
表示されていない。描画面２２の属性を透明としている
ことは、人物像や３次元物体像の表示を各画像表示端末
で優先させることにより、容易に実現できる。The display contents for the persons A and B are shown in FIGS. 3 (b) and 3 (c), respectively. On the screen of the display 12 of the image terminal device A corresponding to the person A, the drawing surface 22 and the person images A and B facing the front are displayed. Here, “what is a virtual space ...” is the drawing content on the drawing surface 22. Since transparency is set as the attribute of the drawing surface 22, the contour line or the like corresponding to the size of the drawing pad 13 is not displayed. The attribute of the drawing surface 22 being transparent can be easily realized by prioritizing the display of a person image or a three-dimensional object image on each image display terminal.
【００１８】《実施例２》図４は本発明の実施例２を説
明する図である。この実施例では、上述の実施例１にお
いて、図４(a)に示すように、３次元空間２０内で視点
ＯA,ＯBから見て人物像Ａ,Ｂの背後にあたる位置に単色
の背景面２４を配置し、背景のテクスチュアによって描
画内容が見にくくなることを防いでいる。描画内容は背
景面２４から浮き上がっているように見えることにな
り、また、背景面２４よりさらに背後側にある３次元物
体等は背景面２４によって隠される。各人物Ａ,Ｂに対
する表示内容がそれぞれ図４(b),(c)に示されている。<< Embodiment 2 >> FIG. 4 is a view for explaining an embodiment 2 of the present invention. In this embodiment, as shown in FIG. 4 (a) in the above-described first embodiment, a monochrome background is located in the three-dimensional space 20 behind the person images A and B as viewed from the viewpoints O A and O B. The surface 24 is arranged to prevent the drawing contents from being difficult to see due to the texture of the background. The drawn contents appear to float from the background surface 24, and the three-dimensional object and the like located further behind the background surface 24 are hidden by the background surface 24. The display contents for the persons A and B are shown in FIGS. 4 (b) and 4 (c), respectively.
【００１９】《実施例３》上述した各実施例では、モノ
リスに貼り付けられる人物像として、その人物の上半身
部分の画像が用いられている。描画面２２への描画は描
画パッド１３を用いて行なわれるため、実際に描画パッ
ド１３を操作している手先の部分は人物像に反映せず、
したがって、誰が描画しているのかが分からない。そこ
で本実施例では、手あるいは腕を表わす仮想的な画像情
報を各画像端末装置に予め蓄積しておき、ある人物が仮
想的な３次元空間２０内で描画面２２に近付くようにし
て描画を行なうときには、すなわち描画パッド１３を用
いて描画情報を入力している人物に対して、その人物の
手あるいは腕にあたる部分の座標値をその人物像の座標
値から計算によって求め、その人物像の手あるいは腕の
付け根から描画面２２上の描画点に向け、その仮想的な
手あるいは腕の画像情報を重畳して表示するようにして
いる。図５(a)はこの実施例における３次元空間２０内
での配置を示しているが、この配置は図４(a)に示す実
施例２の場合と同一である。一方、人物Ａが描画中であ
るとして、各人物Ａ,Ｂに対する表示はそれぞれ図５
(b),(c)に示すようになる。図５(b),(c)に示すように、
人物像Ａは、仮想的な手の画像２５を付加されて表示さ
れている。<Embodiment 3> In each of the embodiments described above, the image of the upper half of the person is used as the person image attached to the monolith. Since drawing on the drawing surface 22 is performed using the drawing pad 13, the part of the hand actually operating the drawing pad 13 is not reflected in the human image,
Therefore, it is not known who is drawing. Therefore, in this embodiment, virtual image information representing a hand or an arm is stored in each image terminal device in advance, and a person is drawn so as to approach the drawing surface 22 in the virtual three-dimensional space 20. When performing, that is, for a person who is inputting drawing information using the drawing pad 13, the coordinate value of the part corresponding to the person's hand or arm is calculated from the coordinate value of the person image, and the hand of the person image is calculated. Alternatively, the image information of the virtual hand or arm is superimposed and displayed from the base of the arm toward the drawing point on the drawing surface 22. FIG. 5 (a) shows the arrangement in the three-dimensional space 20 in this embodiment, but this arrangement is the same as that in the second embodiment shown in FIG. 4 (a). On the other hand, assuming that the person A is drawing, the display for each person A, B is as shown in FIG.
As shown in (b) and (c). As shown in FIGS. 5 (b) and 5 (c),
The person image A is displayed with a virtual hand image 25 added.
【００２０】《実施例４》上述の各実施例では、利用者
ごとの画像端末装置においてそれぞれその利用者自身も
表示されている。しかしながら、実際の打ち合せの場面
などを想定すると、ある利用者がその利用者自身の顔を
見ているというのは違和感を感じさせ、また、描画面と
その利用者自身の人物像が重なって描画情報を見にくく
する原因ともなる。そこで本実施例では、利用者ごとの
画像端末装置において、その利用者自身は表示せず、他
の利用者のみが表示されるようにしている。具体的に
は、各画像端末装置が人物像の画像情報を送出する際
に、送出元の画像端末装置を識別するための識別子を付
加している。そして、センタ装置から人物像情報を受信
した際に、その人物像情報に付加されている識別子を判
断してどの画像端末装置からの人物像情報であるかを調
べ、自己が送出した人物像情報を受信した場合にはその
人物像を表示しないようにし、他の画像端末装置から受
信した人物像情報については対応する人物像情報を表示
するようにしている。図６(a)はこの実施例における３
次元空間２０内での配置を示しているが、この配置は図
４(a)に示す実施例２の場合と同一である。人物Ａに対
する画像端末装置３Ａでの表示は図６(b)に示すように
なり、人物像Ｂのみが表されている。一方、人物Ｂに対
する画像表示装置３Ｂでの表示は図６(c)に示すように
なり、人物像Ａのみが表示されている。<Embodiment 4> In each of the embodiments described above, the user himself / herself is also displayed on the image terminal device for each user. However, given the actual situation of a meeting, it is uncomfortable for a user to look at the user's face, and the drawing surface and the user's own image overlap. It also causes information to be difficult to see. Therefore, in this embodiment, in the image terminal device for each user, the user himself / herself is not displayed, and only other users are displayed. Specifically, when each image terminal device transmits the image information of the human image, an identifier for identifying the image terminal device of the transmission source is added. When the person image information is received from the center device, the identifier added to the person image information is determined to check which image terminal device the person image information is from, and the person image information sent by the self device is transmitted. When the user image is received, the person image is not displayed, and the person image information corresponding to the person image information received from another image terminal device is displayed. FIG. 6 (a) shows 3 in this embodiment.
Although the arrangement in the dimensional space 20 is shown, this arrangement is the same as in the case of the second embodiment shown in FIG. The display on the image terminal device 3A for the person A is as shown in FIG. 6B, and only the person image B is shown. On the other hand, the display on the image display device 3B for the person B is as shown in FIG. 6C, and only the person image A is displayed.
【００２１】[0021]
【発明の効果】以上説明したように本発明は、描画面を
透明にするとともに、仮想的な３次元空間における人物
像の位置を当該人物の視点から眺めた視野方向の中心線
から一定距離の位置に設定し、人物像の向きを当該人物
の視点から眺めた視野方向の中心線と対向する向きとす
ることにより、人物像の表示とその人物が描いた描画内
容をその人物と同じ向きに表示することとが両立でき、
さらに、その描画内容を見ている参加者の人物像も表示
できるようになるという効果がある。As described above, according to the present invention, the drawing surface is made transparent and the position of the human image in the virtual three-dimensional space is set at a constant distance from the center line in the visual field direction viewed from the viewpoint of the human. By setting the position of the person image so that the direction of the person image is opposite to the center line of the direction of the field of view of the person, the display of the person image and the drawing contents drawn by that person are made the same direction as that person. It is compatible with displaying,
Furthermore, there is an effect that the portrait of the participant who is watching the drawn contents can be displayed.
【図１】仮想共有表示方法が適用される画像通信システ
ムの構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of an image communication system to which a virtual shared display method is applied.
【図２】従来の画像通信システムにおける仮想共有表示
方法を説明する図であって、(a)は仮想的な３次元空間
を上から見たときの図、(b)は人物Ａの画像端末装置で
の表示例を示す図、(c)は人物Ｂの画像端末装置での表
示例を示す図である。2A and 2B are diagrams illustrating a virtual shared display method in a conventional image communication system, in which FIG. 2A is a diagram when a virtual three-dimensional space is viewed from above, and FIG. 2B is an image terminal of a person A. FIG. 6 is a diagram showing a display example on the device, and FIG. 7C is a diagram showing a display example on the image terminal device of the person B.
【図３】本発明の実施例１を説明する図であって、(a)
は仮想的な３次元空間を上から見たときの図、(b)は人
物Ａの画像端末装置での表示例を示す図、(c)は人物Ｂ
の画像端末装置での表示例を示す図である。FIG. 3 is a diagram for explaining the first embodiment of the present invention, (a)
Is a diagram of a virtual three-dimensional space seen from above, (b) is a diagram showing a display example of a person A on an image terminal device, (c) is a person B
It is a figure which shows the example of a display in the image terminal device of.
【図４】本発明の実施例２を説明する図であって、(a)
は仮想的な３次元空間を上から見たときの図、(b)は人
物Ａの画像端末装置での表示例を示す図、(c)は人物Ｂ
の画像端末装置での表示例を示す図である。FIG. 4 is a diagram for explaining the second embodiment of the present invention, (a)
Is a diagram of a virtual three-dimensional space seen from above, (b) is a diagram showing a display example of a person A on an image terminal device, (c) is a person B
It is a figure which shows the example of a display in the image terminal device of.
【図５】本発明の実施例３を説明する図であって、(a)
は仮想的な３次元空間を上から見たときの図、(b)は人
物Ａの画像端末装置での表示例を示す図、(c)は人物Ｂ
の画像端末装置での表示例を示す図である。FIG. 5 is a diagram for explaining the third embodiment of the present invention, (a)
Is a diagram of a virtual three-dimensional space seen from above, (b) is a diagram showing a display example of a person A on an image terminal device, (c) is a person B
It is a figure which shows the example of a display in the image terminal device of.
【図６】本発明の実施例４を説明する図であって、(a)
は仮想的な３次元空間を上から見たときの図、(b)は人
物Ａの画像端末装置での表示例を示す図、(c)は人物Ｂ
の画像端末装置での表示例を示す図である。FIG. 6 is a diagram for explaining the fourth embodiment of the present invention, (a)
Is a diagram of a virtual three-dimensional space seen from above, (b) is a diagram showing a display example of a person A on an image terminal device, (c) is a person B
It is a figure which shows the example of a display in the image terminal device of.
１ センタ装置 ２ ＬＡＮ ３Ａ,３Ｂ 画像端末装置 １１ 端末制御装置 １２ 表示装置 １３ 描画パッド １４ ＴＶカメラ １５ ジョイスティック １６ マイクロホン １７ スピーカ ２０ ３次元空間 ２１Ａ 人物像Ａ ２１Ｂ 人物像Ｂ ２２ 描画面 ２３ 建物 ２４ 背景面 ２５ 手の画像 ＯA,ＯB 視点1 center device 2 LAN 3A, 3B image terminal device 11 terminal control device 12 display device 13 drawing pad 14 TV camera 15 joystick 16 microphone 17 speaker 20 three-dimensional space 21A person image A 21B person image B 22 drawing surface 23 building 24 background surface 25 Hand image O A , O B viewpoint
Claims (4)
前記各画像端末装置と前記センタ装置を接続するネット
ワークとから構成され、前記画像端末装置が表示手段と
撮像手段と描画入力手段とを有する画像通信システムで
の表示方法であり、 前記センタ装置を介して前記各画像端末装置間で情報を
交換することより、仮想的な３次元空間を生成して前記
３次元空間内に前記各画像端末装置に共有の描画面を設
定し、前記描画入力手段によって入力された描画内容を
前記描画面に反映させるとともに前記撮像手段で撮影さ
れた人物像を前記３次元空間内に配置し、前記各画像端
末装置ごとに、前記３次元空間内における当該画像端末
装置に対応する人物の視点位置から見える画像を前記表
示手段に表示する仮想共有表示方法において、 前記描画面を透明像とするとともに、前記３次元空間に
おける前記人物像の位置を当該人物の視点から眺めた視
野方向の中心線から一定距離の位置に設定し、前記人物
像の向きを当該人物の視点から眺めた視野方向の中心線
と対向する向きにすることを特徴とする画像通信システ
ムにおける仮想共有表示方法。1. A center device, a plurality of image terminal devices,
A display method in an image communication system, comprising: each of the image terminal devices and a network connecting the center device, wherein the image terminal device has a display means, an imaging means, and a drawing input means. By exchanging information between the respective image terminal devices, a virtual three-dimensional space is generated, a shared drawing surface is set in each of the image terminal devices in the three-dimensional space, and the drawing input means is used. The input drawing content is reflected on the drawing surface, the image of the person photographed by the image pickup means is arranged in the three-dimensional space, and the image terminal device in the three-dimensional space is arranged for each image terminal device. In the virtual shared display method of displaying on the display means an image viewed from the viewpoint position of a person corresponding to, the drawing surface is a transparent image and the image is displayed in the three-dimensional space. The position of the person image is set to a position at a certain distance from the center line in the visual field direction viewed from the viewpoint of the person, and the direction of the human image is set to face the center line in the visual field direction viewed from the viewpoint of the person. A virtual shared display method in an image communication system, comprising:
て前記描画面の後方に単色の背景面を配置する請求項１
に記載の画像通信システムにおける仮想共有表示方法。2. A monochromatic background surface is arranged behind the drawing surface when viewed from the viewpoint in the three-dimensional space.
A virtual shared display method in the image communication system according to.
き、前記描画入力手段を用いて描画を行なっている人物
に対応する前記３次元空間での人物像での手あるいは腕
の付け値の位置を算出して、当該人物像に前記手あるい
は腕の画像の画像を付加して表示を行なう請求項１また
は２に記載の画像通信システムにおける仮想共有表示方
法。3. An image of a hand or an arm is stored in advance, and the bid price of the hand or arm in the human image in the three-dimensional space corresponding to the person who is drawing using the drawing input means is stored. The virtual shared display method in the image communication system according to claim 1, wherein the position is calculated, and the image of the image of the hand or arm is added to the image of the person for display.
送出する際に送出元の画像端末装置を識別するための識
別子を付加し、前記センタ装置から人物像情報を受信し
た受信側の画像端末装置は、前記識別子によって当該人
物像の画像情報の送出元の画像端末装置を判別して当該
受信側の画像端末装置に対応する人物の人物像の表示を
行なわない、請求項１乃至３いずれか１項に記載の画像
通信システム。4. An image on the receiving side that receives the human image information from the center device, when the image terminal device transmits the image information of the human image, an identifier for identifying the image terminal device of the transmission source is added. 4. The terminal device does not display the person image of the person corresponding to the image terminal device on the receiving side by discriminating the image terminal device that is the sender of the image information of the person image based on the identifier. The image communication system according to item 1.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13310095A JP3203614B2 (en) | 1995-05-31 | 1995-05-31 | Virtual shared display method in image communication system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13310095A JP3203614B2 (en) | 1995-05-31 | 1995-05-31 | Virtual shared display method in image communication system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH08329279A true JPH08329279A (en) | 1996-12-13 |
| JP3203614B2 JP3203614B2 (en) | 2001-08-27 |
Family
ID=15096830
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13310095A Expired - Lifetime JP3203614B2 (en) | 1995-05-31 | 1995-05-31 | Virtual shared display method in image communication system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3203614B2 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001022958A (en) * | 1999-07-06 | 2001-01-26 | Nippon Telegr & Teleph Corp <Ntt> | Object display method in virtual space system and recording medium with object display program recorded therein |
| JP2017045296A (en) * | 2015-08-27 | 2017-03-02 | 株式会社コロプラ | Program for controlling head-mounted display system |
| WO2017033777A1 (en) * | 2015-08-27 | 2017-03-02 | 株式会社コロプラ | Program for controlling head-mounted display system |
-
1995
- 1995-05-31 JP JP13310095A patent/JP3203614B2/en not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001022958A (en) * | 1999-07-06 | 2001-01-26 | Nippon Telegr & Teleph Corp <Ntt> | Object display method in virtual space system and recording medium with object display program recorded therein |
| JP2017045296A (en) * | 2015-08-27 | 2017-03-02 | 株式会社コロプラ | Program for controlling head-mounted display system |
| WO2017033777A1 (en) * | 2015-08-27 | 2017-03-02 | 株式会社コロプラ | Program for controlling head-mounted display system |
| US9779702B2 (en) | 2015-08-27 | 2017-10-03 | Colopl, Inc. | Method of controlling head-mounted display system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3203614B2 (en) | 2001-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Gibbs et al. | Teleport–towards immersive copresence | |
| WO2019096027A1 (en) | Communication processing method, terminal, and storage medium | |
| JP3383228B2 (en) | Head mounted display device | |
| US10493360B2 (en) | Image display device and image display system | |
| CN211349296U (en) | Interactive installation is caught in location based on CAVE projection | |
| JP3610423B2 (en) | Video display system and method for improving its presence | |
| JP2815928B2 (en) | Shared screen control method | |
| JP3452348B2 (en) | Speaker identification method in virtual space and recording medium storing the program | |
| JP7452434B2 (en) | Information processing device, information processing method and program | |
| JP3193263B2 (en) | 3D image display system | |
| JP3203614B2 (en) | Virtual shared display method in image communication system | |
| JPH1055257A (en) | Three-dimensional virtual space display method | |
| JP2001526502A (en) | Conference facilities | |
| JP3443306B2 (en) | Virtual shared display method in virtual space and recording medium storing the display program | |
| JP3276057B2 (en) | 3D virtual world display system | |
| JP2744394B2 (en) | Realism image display device and realism image input / output device | |
| JP2002027419A (en) | Image terminal device and communication system using the same | |
| JP3128018B2 (en) | Image communication system | |
| JP3257459B2 (en) | Shared virtual space simple two-dimensional interface realizing method, client system having the interface, and storage medium storing the interface program | |
| JPH08336166A (en) | Video viewing device | |
| JP3443321B2 (en) | Virtual shared space forming method and recording medium recording virtual space forming program | |
| JPH09154114A (en) | Electronic conference terminal equipment | |
| JP7029118B2 (en) | Image display method, image display system, and image display program | |
| JP3184028B2 (en) | People image display system | |
| WO2021220494A1 (en) | Communication terminal device, communication method, and software program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090629 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090629 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100629 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100629 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110629 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120629 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130629 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140629 Year of fee payment: 13 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |