JP2012103888A - Virtual space sharing system, portable terminal and virtual space sharing method - Google Patents

Virtual space sharing system, portable terminal and virtual space sharing method Download PDF

Info

Publication number
JP2012103888A
JP2012103888A JP2010251575A JP2010251575A JP2012103888A JP 2012103888 A JP2012103888 A JP 2012103888A JP 2010251575 A JP2010251575 A JP 2010251575A JP 2010251575 A JP2010251575 A JP 2010251575A JP 2012103888 A JP2012103888 A JP 2012103888A
Authority
JP
Japan
Prior art keywords
virtual space
space
terminals
mobile terminals
state change
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010251575A
Other languages
Japanese (ja)
Other versions
JP5669185B2 (en
Inventor
Keisuke Abe
圭佑 阿部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Casio Mobile Communications Ltd
Original Assignee
NEC Casio Mobile Communications Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Casio Mobile Communications Ltd filed Critical NEC Casio Mobile Communications Ltd
Priority to JP2010251575A priority Critical patent/JP5669185B2/en
Publication of JP2012103888A publication Critical patent/JP2012103888A/en
Application granted granted Critical
Publication of JP5669185B2 publication Critical patent/JP5669185B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To allow plural portable terminals to see and operate a virtual space in real time from respective viewpoints.SOLUTION: Each portable terminal 1 to 3 has a function to measure a travel and inclination information, and a function to notify the other portable terminals of position information and information on operation to a virtual space 4. The virtual space 4 is composed of an object existing in the virtual space. The plural portable terminals 1 to 3 calibrate the position information between each terminal in advance so as to share a coordinate system in the virtual space 4. Each portable terminal 1 to 3 notifies the other portable terminals of the position information and a result of the operation to the virtual space 4 in real time to synchronize data with each portable terminal 1 to 3. Each portable terminal 1 to 3 displays image information on the virtual space 4 on the basis of the latest data of the virtual space 4 and a position of the own terminal in the virtual space 4.

Description

本発明は、１つの仮想空間を複数の携帯端末で共有するための仮想空間共有システム、携帯端末、及び仮想空間共有方法に関する。   The present invention relates to a virtual space sharing system, a mobile terminal, and a virtual space sharing method for sharing one virtual space among a plurality of mobile terminals.

特許文献１には、携帯情報端末装置に、本体のＸ軸方向とＹ軸方向の移動量を検出する移動検出部（移動量センサ）を搭載し、該移動検出部より検出される操作表示ユニットの移動量に応じて、仮想空間上の物体の見え方を更新する技術が提案されている。   In Patent Document 1, a mobile information terminal device is equipped with a movement detection unit (movement amount sensor) for detecting the movement amount of the main body in the X-axis direction and the Y-axis direction, and an operation display unit detected by the movement detection unit There has been proposed a technique for updating the appearance of an object in a virtual space according to the amount of movement.

特開２００１−１１７５５３号公報JP 2001-117553 A

しかしながら、上述した特許文献１に記載の携帯情報端末装置には、単一の端末上でしか操作／参照することができないとう問題があった。   However, the portable information terminal device described in Patent Document 1 described above has a problem that it can be operated / referenced only on a single terminal.

本発明は、上述の課題を解決することのできる仮想空間共有システム、携帯端末、及び仮想空間共有方法を提供することを目的とする。   An object of the present invention is to provide a virtual space sharing system, a portable terminal, and a virtual space sharing method that can solve the above-described problems.

上述した課題を解決するために、本発明は、複数の携帯端末で各種情報を提供する１つの仮想空間を共有する仮想空間共有システムであって、前記複数の携帯端末の、実空間上での状態変化を検出する状態変化検出手段と、前記複数の携帯端末を前記実空間上で重ね合わせ、前記複数の携帯端末の、前記仮想空間の座標系に対する初期位置を決定する初期位置決定手段と、前記状態変化検出手段によって検出された、前記複数の携帯端末の実空間上での状態変化に基づいて、前記複数の携帯端末の、前記仮想空間の座標系に対する相対位置を算出する相対位置算出手段とを備えることを特徴とする仮想空間共有システムである。   In order to solve the above-described problem, the present invention provides a virtual space sharing system that shares a single virtual space that provides various types of information with a plurality of portable terminals, and the plurality of portable terminals are in real space. State change detecting means for detecting a state change, and an initial position determining means for determining the initial position of the plurality of mobile terminals with respect to the coordinate system of the virtual space by superimposing the plurality of mobile terminals on the real space; Relative position calculation means for calculating relative positions of the plurality of portable terminals with respect to the coordinate system of the virtual space based on state changes in the real space of the plurality of portable terminals detected by the state change detection means. And a virtual space sharing system.

また、上述した課題を解決するために、本発明は、複数の携帯端末で共有される１つの仮想空間を利用する携帯端末であって、実空間上での状態変化を検出する状態変化検出手段と、前記複数の携帯端末が前記実空間上で重ね合わせられた状態で、前記仮想空間の座標系に対する初期位置を決定する初期位置決定手段と、前記状態変化検出手段によって検出された、前記実空間上での状態変化に基づいて、前記仮想空間の座標系に対する相対位置を算出する相対位置算出手段とを備えることを特徴とする携帯端末である。   In order to solve the above-described problem, the present invention is a portable terminal that uses a single virtual space shared by a plurality of portable terminals, and detects a state change in real space. Initial position determining means for determining an initial position with respect to the coordinate system of the virtual space in a state where the plurality of mobile terminals are superimposed on the real space, and the actual position detected by the state change detecting means. A portable terminal comprising: a relative position calculating unit that calculates a relative position of the virtual space with respect to a coordinate system based on a state change in space.

また、上述した課題を解決するために、本発明は、複数の携帯端末で各種情報を提供する１つの仮想空間を共有する仮想空間共有方法であって、前記複数の携帯端末の、実空間上での状態変化を検出するステップと、前記複数の携帯端末を前記実空間上で重ね合わせ、前記複数の携帯端末の、前記仮想空間の座標系に対する初期位置を決定するステップと、前記複数の携帯端末の実空間上での状態変化に基づいて、前記複数の携帯端末の、前記仮想空間の座標系に対する相対位置を算出するステップと、前記仮想空間の座標系に対する相対位置と前記仮想空間内の物体位置とに基づいて、それぞれの相対位置で前記複数の携帯端末に提示すべき前記仮想空間内の物体を含む画像データを算出するステップと、前記仮想空間内の物体を含む画像データを前記複数の携帯端末で表示するステップと、前記仮想空間上に対して実施した操作結果を示す操作結果情報を、前記複数の携帯端末間でリアルタイムで同期させるステップと、前記操作結果情報に基づいて、前記複数の携帯端末に提示される、前記仮想空間内の物体を含む画像データを更新するステップとを含むことを特徴とする仮想空間共有方法である。   In order to solve the above-described problem, the present invention provides a virtual space sharing method for sharing one virtual space for providing various types of information between a plurality of mobile terminals, in the real space of the plurality of mobile terminals. Detecting a change in state at the same time, superimposing the plurality of portable terminals on the real space, determining an initial position of the plurality of portable terminals with respect to a coordinate system of the virtual space, and the plurality of portable terminals Calculating a relative position of the plurality of mobile terminals with respect to the coordinate system of the virtual space based on a state change in the real space of the terminal; Calculating image data including an object in the virtual space to be presented to the plurality of portable terminals based on the object position; and an image including the object in the virtual space. Data is displayed on the plurality of portable terminals, operation result information indicating an operation result performed on the virtual space is synchronized in real time between the plurality of portable terminals, and the operation result information And updating the image data including the object in the virtual space presented to the plurality of portable terminals based on the above.

この発明によれば、複数の携帯端末により仮想空間をリアルタイムでそれぞれの視点で参照・操作することができる。   According to the present invention, a virtual space can be referred to and operated from each viewpoint in real time by a plurality of portable terminals.

仮想空間共有システムの概要を示す図である。It is a figure which shows the outline | summary of a virtual space sharing system. 携帯端末１の略構成を示すブロック図である。2 is a block diagram showing a schematic configuration of a mobile terminal 1. FIG. 仮想空間４の概念図である。3 is a conceptual diagram of a virtual space 4. FIG. 仮想空間共有システムの動作を参照するためのフローチャートである。It is a flowchart for referring operation | movement of a virtual space sharing system. 仮想空間共有システムの動作を説明するための概念図である。It is a conceptual diagram for demonstrating operation | movement of a virtual space sharing system.

以下、本発明の一実施形態を、図面を参照して説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

図１は、本発明の実施形態による仮想空間共有システムの概要を示す図である。
図において、仮想空間共有方法を実現する仮想空間共有システムは、プログラム制御により動作する複数の携帯端末１，２，３とによって構成され、各携帯端末１，２，３には仮想空間４の情報が記録されている。 FIG. 1 is a diagram showing an outline of a virtual space sharing system according to an embodiment of the present invention.
In the figure, a virtual space sharing system that realizes a virtual space sharing method is composed of a plurality of mobile terminals 1, 2, and 3 that operate by program control. Is recorded.

図２は、本実施形態による携帯端末１の略構成を示すブロック図である。
ここでは、携帯端末１の構成について説明するが、端末１〜３は、同じ構成である。図において、携帯端末１は、ディスプレイ１１、加速度センサ１２、通信装置（Ｂｌｕｅｔｏｏｔｈなど）１３、ＣＰＵ（中央処理装置；プロセッサ；データ処理装置）１４から構成されている。ディスプレイ１１は、ＣＰＵ１４で処理された画像情報を表示するための機能を有する。 FIG. 2 is a block diagram showing a schematic configuration of the mobile terminal 1 according to the present embodiment.
Here, although the structure of the portable terminal 1 is demonstrated, the terminals 1-3 are the same structures. In the figure, the mobile terminal 1 includes a display 11, an acceleration sensor 12, a communication device (such as Bluetooth) 13, and a CPU (central processing unit; processor; data processing device) 14. The display 11 has a function for displaying image information processed by the CPU 14.

加速度センサ１２は、携帯端末１のｘ、ｙ、ｚ軸の移動量、及び、携帯端末１の傾き情報を測定するための機能を有する。通信装置１３は、携帯端末１で取得した位置情報や、仮想空間４に対して実施した操作情報などを、他の携帯端末２、３に無線通信によって通知するための機能を有し、互いの情報について同期を取ることが可能となっている。ＣＰＵ１４は、ディスプレイ１１と加速度センサ１２と通信装置１３とを、プログラムにて制御するための機能を有する。なお、携帯端末１，２，３は他の携帯端末との間で、基地局などを介さずにダイレクトに無線通信を行うことを想定しているが、基地局装置などを介して無線通信してもよい。   The acceleration sensor 12 has a function for measuring the movement amount of the mobile terminal 1 in the x, y, and z axes and the tilt information of the mobile terminal 1. The communication device 13 has a function for notifying the other mobile terminals 2 and 3 of the position information acquired by the mobile terminal 1 and the operation information performed on the virtual space 4 by wireless communication. It is possible to synchronize information. The CPU 14 has a function for controlling the display 11, the acceleration sensor 12, and the communication device 13 by a program. It is assumed that the mobile terminals 1, 2, and 3 perform wireless communication directly with other mobile terminals without using a base station or the like. However, the mobile terminals 1, 2, and 3 perform wireless communication with a base station apparatus or the like. May be.

図３は、本実施形態による仮想空間４の概念図である。
図において、仮想空間４は、仮想空間上に配置された物体４１、仮想空間上の基準点４２によってあらされている。当該仮想空間４の情報は、予め携帯端末１，２，３に格納された空間情報であってもよいし、サーバ等の何らかの装置などから受信した空間情報であってもよい。そして、携帯端末１，２，３において仮想空間４に対する初期化の設定がされた場合、初期状態へと移行する。当該初期状態においては、この仮想空間４の空間情報の所定の初期位置と、当該初期位置から物体４１への方向である視点方向とが定められており、携帯端末１，２，３は仮想空間４において設定されている初期位置から始点方向を見た際の画像を生成して出力する。なお、仮想空間４を示す空間情報において、各物体４１は、基準点４２を座標原点として所定の配置座標に配置されている。仮想空間４の情報には、物体４１が仮想空間上のどの位置（座標）に存在するか、初期位置や視点方向が事前格納されており、携帯端末１，２，３のＣＰＵ１４が、仮想空間共有プログラムを起動することにより、仮想空間上の物体４１の位置や、初期位置、視点方向などの情報を用いて以下の処理を行う。 FIG. 3 is a conceptual diagram of the virtual space 4 according to the present embodiment.
In the figure, the virtual space 4 is represented by an object 41 arranged in the virtual space and a reference point 42 in the virtual space. The information of the virtual space 4 may be spatial information stored in advance in the mobile terminals 1, 2, 3, or may be spatial information received from some device such as a server. Then, when initialization is set for the virtual space 4 in the mobile terminals 1, 2, and 3, the process proceeds to the initial state. In the initial state, a predetermined initial position of the space information of the virtual space 4 and a viewpoint direction that is a direction from the initial position to the object 41 are determined. An image when the start point direction is viewed from the initial position set in 4 is generated and output. In the spatial information indicating the virtual space 4, each object 41 is arranged at a predetermined arrangement coordinate with the reference point 42 as the coordinate origin. The information of the virtual space 4 stores in advance in which position (coordinates) the object 41 exists in the virtual space, the initial position and the viewpoint direction, and the CPU 14 of the mobile terminals 1, 2 and 3 By starting the shared program, the following processing is performed using information such as the position of the object 41 in the virtual space, the initial position, and the viewpoint direction.

次に、図４は、本実施形態による携帯端末の動作を参照するためのフローチャートである。また、図５は、本実施形態による携帯端末の動作を説明するための概念図である。まず、使用する複数の携帯端末１、２、３を重ね合わせ（ステップＳ１）、各携帯端末１、２、３の位置／傾き情報の初期化を実施し、携帯端末間で共有する仮想空間上の座標系の初期位置（基準点）を決める（ステップＳ２、図５（ａ））。初期化時においては、携帯端末１，２，３を重ねるとともに、各携帯端末の所定のボタンを押下したり、一つの携帯端末への初期化指示入力に基づく他の携帯端末と同期通信するなど、何らかのトリガによって、各携帯端末１，２，３は初期化される。これにより、各携帯端末１，２，３は、仮想空間４上の予め定められた初期位置から、予め定められた視点方向を見た場合の画像を公知の技術等を利用して生成し、画面に表示する。   Next, FIG. 4 is a flowchart for referring to the operation of the mobile terminal according to the present embodiment. FIG. 5 is a conceptual diagram for explaining the operation of the mobile terminal according to the present embodiment. First, a plurality of portable terminals 1, 2, and 3 to be used are overlapped (step S1), the position / tilt information of each of the portable terminals 1, 2, and 3 is initialized, and the virtual terminal is shared between the portable terminals. The initial position (reference point) of the coordinate system is determined (step S2, FIG. 5A). At the time of initialization, the portable terminals 1, 2, and 3 are overlapped, a predetermined button of each portable terminal is pressed, synchronous communication is performed with another portable terminal based on an initialization instruction input to one portable terminal, etc. Each portable terminal 1, 2 and 3 is initialized by some trigger. Thereby, each portable terminal 1, 2, 3 generates an image when a predetermined viewpoint direction is viewed from a predetermined initial position on the virtual space 4 using a known technique or the like, Display on the screen.

次に、各携帯端末１、２、３を任意の場所に移動させる（ステップＳ３、図５（ｂ）の場合、携帯端末１を移動）。このとき、それぞれの加速度センサ１２より各携帯端末１、２、３が基準点からどれだけ移動したかを計算し、基準点（初期位置）からの相対位置を算出する（ステップＳ４）。そして、「基準点からの端末位置、及び端末の傾き情報」、並びに、事前にプログラミングしておいた「仮想空間上の物体位置」から、携帯端末１、２、３のそれぞれから仮想空間４上の物体４１がどのように見えるか（携帯端末１、２、３のそれぞれの位置に応じて提示すべき仮想空間の２次元情報）を計算し、それぞれの携帯端末１、２、３のディスプレイ１１上に表示する（ステップＳ５、図５（ｃ））。   Next, each portable terminal 1, 2, 3 is moved to an arbitrary place (step S3, in the case of FIG. 5B, the portable terminal 1 is moved). At this time, how much each mobile terminal 1, 2, 3 has moved from the reference point is calculated by each acceleration sensor 12, and a relative position from the reference point (initial position) is calculated (step S4). Then, from the “terminal position from the reference point and the tilt information of the terminal” and the “object position in the virtual space” programmed in advance, each of the mobile terminals 1, 2, and 3 is displayed on the virtual space 4. Is calculated (two-dimensional information of the virtual space to be presented according to the respective positions of the mobile terminals 1, 2, 3), and the display 11 of each mobile terminal 1, 2, 3 is calculated. Displayed above (step S5, FIG. 5C).

また、携帯端末ｉ（ｉ＝１、２、３）上で仮想空間４上の物体４１に対して何らかの操作を実施した場合（ステップＳ６、図５（ｄ））、操作結果を他の携帯端末ｊ（ｊ＝１、２、３，ｊ≠ｉ）に通信し、仮想空間４上のデータの同期をとる（ステップＳ７）。物体４１に対する操作とは、例えば物体４１の仮想空間上における移動や削除などであり、その他どのような操作であっても良い。例えば何らかの画像を物体４１として追加するなどの操作であってもよい。そして、同期されたデータに合わせて、他の携帯端末ｊ上から見た仮想空間４上の物体４１の画像データも更新する（ステップＳ８、図５（ｅ））。具体的には、例えば、操作情報を入力した携帯端末ｉは、他の携帯端末に対して、その操作情報を送信し、これにより、他の端末装置が受信した操作情報に基づく画像データの更新を行う。その後、ステップＳ３に戻り、上述したステップＳ３〜Ｓ８を繰り返し、複数の携帯端末１、２、３による移動、操作に応じて、リアルタイムで１つの仮想空間４に反映させるとともに、仮想空間４の変化を、複数の携帯端末１、２、３でリアルタイムに参照可能とする。   When any operation is performed on the object 41 in the virtual space 4 on the mobile terminal i (i = 1, 2, 3) (step S6, FIG. 5 (d)), the operation result is transferred to another mobile terminal. j (j = 1, 2, 3, j ≠ i) are communicated to synchronize the data in the virtual space 4 (step S7). The operation on the object 41 is, for example, movement or deletion of the object 41 in the virtual space, and any other operation may be used. For example, an operation such as adding some image as the object 41 may be used. Then, in accordance with the synchronized data, the image data of the object 41 on the virtual space 4 viewed from the other portable terminal j is also updated (step S8, FIG. 5 (e)). Specifically, for example, the mobile terminal i that has input the operation information transmits the operation information to another mobile terminal, thereby updating the image data based on the operation information received by the other terminal device I do. Thereafter, the process returns to step S3, and steps S3 to S8 described above are repeated to reflect in one virtual space 4 in real time according to movement and operation by a plurality of portable terminals 1, 2, 3, and changes in the virtual space 4 Can be referred to in real time by a plurality of portable terminals 1, 2, and 3.

なお、上述した実施形態では、複数の携帯端末１〜３間で、仮想空間４の物体４１に対する操作結果を同期するようにしたが、これに限らず、他の携帯端末の位置情報も共有させるようにしてもよい。   In the above-described embodiment, the operation results for the object 41 in the virtual space 4 are synchronized between the plurality of mobile terminals 1 to 3, but the present invention is not limited to this, and the location information of other mobile terminals is also shared. You may do it.

上述した実施形態によれば、始めに複数の携帯端末で使用する仮想空間の座標系を共有するための校正を実施し、リアルタイムで更新された情報を他の携帯端末と同期し続けるようにしたので、複数の携帯端末で１つの仮想空間の情報（位置、仮想空間内情報）をリアルタイムに共有することができる。   According to the above-described embodiment, first, calibration for sharing a coordinate system of a virtual space used by a plurality of mobile terminals is performed, and information updated in real time is kept synchronized with other mobile terminals. Therefore, information (position, information in the virtual space) of one virtual space can be shared in real time by a plurality of portable terminals.

また、本実施形態によれば、仮想空間の基準点に対する各携帯端末の相対位置と、基準点からの仮想空間上の物体の位置とをリアルタイムで算出するようにしたので、１つの仮想空間に対して、各々の携帯端末の場所に応じた物体の見え方をリアルタイムで更新することができる。   In addition, according to the present embodiment, the relative position of each mobile terminal with respect to the reference point of the virtual space and the position of the object on the virtual space from the reference point are calculated in real time. On the other hand, the appearance of the object according to the location of each mobile terminal can be updated in real time.

本発明によれば、複数の携帯端末上で同一の仮想空間上で操作するゲーム等に応用することが可能である。   The present invention can be applied to a game or the like operated on the same virtual space on a plurality of portable terminals.

１、２、３ 携帯端末
４ 仮想空間
１１ ディスプレイ
１２ 加速度センサ
１３ 通信装置
１４ ＣＰＵ 1, 2, 3 Mobile terminal 4 Virtual space 11 Display 12 Acceleration sensor 13 Communication device 14 CPU

Claims (9)

複数の携帯端末で各種情報を提供する１つの仮想空間を共有する仮想空間共有システムであって、
前記複数の携帯端末の、実空間上での状態変化を検出する状態変化検出手段と、
前記複数の携帯端末を前記実空間上で重ね合わせ、前記複数の携帯端末の、前記仮想空間の座標系に対する初期位置を決定する初期位置決定手段と、
前記状態変化検出手段によって検出された、前記複数の携帯端末の実空間上での状態変化に基づいて、前記複数の携帯端末の、前記仮想空間の座標系に対する相対位置を算出する相対位置算出手段と
を備えることを特徴とする仮想空間共有システム。 A virtual space sharing system for sharing a single virtual space for providing various types of information with a plurality of mobile terminals,
State change detection means for detecting a state change of the plurality of mobile terminals in real space;
Initial position determining means for superimposing the plurality of mobile terminals on the real space, and determining an initial position of the plurality of mobile terminals with respect to a coordinate system of the virtual space;
Relative position calculation means for calculating relative positions of the plurality of portable terminals with respect to the coordinate system of the virtual space based on state changes in the real space of the plurality of portable terminals detected by the state change detection means. A virtual space sharing system characterized by comprising: 前記相対位置算出手段によって算出された前記複数の携帯端末の、前記仮想空間の座標系に対する相対位置と、前記仮想空間内の物体位置とに基づいて、前記複数の携帯端末の各々の位置に応じて各携帯端末に提示すべき前記仮想空間内の物体を含む画像データを算出する算出手段と、
前記算出手段によって算出された、前記仮想空間内の物体を含む画像データを表示する表示手段と
を更に備えることを特徴とする請求項１に記載の仮想空間共有システム。 Based on the relative positions of the plurality of portable terminals calculated by the relative position calculation means with respect to the coordinate system of the virtual space and the object positions in the virtual space, according to the positions of the plurality of portable terminals. Calculating means for calculating image data including an object in the virtual space to be presented to each mobile terminal;
The virtual space sharing system according to claim 1, further comprising: display means for displaying image data including the object in the virtual space calculated by the calculating means. 前記仮想空間上に対して前記複数の携帯端末が実施した操作結果を示す操作結果情報を、前記複数の携帯端末間でリアルタイムで同期させる同期手段と、
前記同期手段によって同期された前記操作結果情報に基づいて、前記複数の携帯端末の各々の位置に応じて各携帯端末に提示すべき前記仮想空間内の物体を含む画像データを更新する更新手段と
を更に備えることを特徴とする請求項２に記載の仮想空間共有システム。 Synchronization means for synchronizing operation result information indicating operation results performed by the plurality of mobile terminals on the virtual space in real time between the plurality of mobile terminals;
Updating means for updating image data including an object in the virtual space to be presented to each mobile terminal according to each position of the plurality of mobile terminals based on the operation result information synchronized by the synchronization means; The virtual space sharing system according to claim 2, further comprising: 前記状態変化検出手段は、
前記実空間上での状態変化として、前記複数の携帯端末の移動、及び傾きを検出することを特徴とする請求項１から３のいずれかに記載の仮想空間共有システム。 The state change detecting means includes
The virtual space sharing system according to claim 1, wherein movement and inclination of the plurality of portable terminals are detected as state changes in the real space. 複数の携帯端末で共有される１つの仮想空間を利用する携帯端末であって、
実空間上での状態変化を検出する状態変化検出手段と、
前記複数の携帯端末が前記実空間上で重ね合わせられた状態で、前記仮想空間の座標系に対する初期位置を決定する初期位置決定手段と、
前記状態変化検出手段によって検出された、前記実空間上での状態変化に基づいて、前記仮想空間の座標系に対する相対位置を算出する相対位置算出手段と
を備えることを特徴とする携帯端末。 A mobile terminal that uses one virtual space shared by a plurality of mobile terminals,
State change detection means for detecting a state change in real space;
Initial position determining means for determining an initial position with respect to the coordinate system of the virtual space in a state where the plurality of portable terminals are superimposed on the real space;
A portable terminal comprising: a relative position calculating unit that calculates a relative position of the virtual space with respect to a coordinate system based on a state change in the real space detected by the state change detecting unit. 前記相対位置算出手段によって算出された、前記仮想空間の座標系に対する相対位置と、前記仮想空間内の物体位置とに基づいて、前記相対位置で提示すべき前記仮想空間内の物体を含む画像データを算出する算出手段と、
前記算出手段によって算出された、前記仮想空間内の物体を含む画像データを表示する表示手段と
を更に備えることを特徴とする請求項５に記載の携帯端末。 Image data including the object in the virtual space to be presented at the relative position based on the relative position with respect to the coordinate system of the virtual space and the object position in the virtual space calculated by the relative position calculating unit. Calculating means for calculating
The mobile terminal according to claim 5, further comprising: a display unit configured to display image data including an object in the virtual space calculated by the calculation unit. 前記仮想空間上に対して実施した操作結果を示す操作結果情報を、前記複数の携帯端末同士でリアルタイムで同期させる同期手段と、
前記同期手段によって同期された前記操作結果情報に基づいて、前記相対位置で提示すべき前記仮想空間内の物体を含む画像データを更新する更新手段と
を更に備えることを特徴とする請求項６に記載の携帯端末。 Synchronizing means for synchronizing operation result information indicating an operation result performed on the virtual space in real time between the plurality of portable terminals,
The update means for updating image data including the object in the virtual space to be presented at the relative position based on the operation result information synchronized by the synchronization means. The portable terminal described. 前記状態変化検出手段は、
前記実空間上での状態変化として、当該端末の移動、及び傾きを検出することを特徴とする請求項１から３のいずれかに記載の携帯端末。 The state change detecting means includes
The mobile terminal according to any one of claims 1 to 3, wherein a movement and an inclination of the terminal are detected as a state change in the real space. 複数の携帯端末で各種情報を提供する１つの仮想空間を共有する仮想空間共有方法であって、
前記複数の携帯端末の、実空間上での状態変化を検出するステップと、
前記複数の携帯端末を前記実空間上で重ね合わせ、前記複数の携帯端末の、前記仮想空間の座標系に対する初期位置を決定するステップと、
前記複数の携帯端末の実空間上での状態変化に基づいて、前記複数の携帯端末の、前記仮想空間の座標系に対する相対位置を算出するステップと、
前記仮想空間の座標系に対する相対位置と、前記仮想空間内の物体位置とに基づいて、それぞれの相対位置で前記複数の携帯端末に提示すべき前記仮想空間内の物体を含む画像データを算出するステップと、
前記仮想空間内の物体を含む画像データを前記複数の携帯端末で表示するステップと、
前記仮想空間上に対して実施した操作結果を示す操作結果情報を、前記複数の携帯端末間でリアルタイムで同期させるステップと、
前記操作結果情報に基づいて、前記複数の携帯端末に提示される、前記仮想空間内の物体を含む画像データを更新するステップと
を含むことを特徴とする仮想空間共有方法。 A virtual space sharing method for sharing one virtual space for providing various types of information with a plurality of portable terminals,
Detecting a state change of the plurality of mobile terminals in real space;
Superposing the plurality of mobile terminals on the real space, and determining an initial position of the plurality of mobile terminals with respect to a coordinate system of the virtual space;
Calculating a relative position of the plurality of portable terminals with respect to a coordinate system of the virtual space based on a state change in the real space of the plurality of portable terminals;
Based on a relative position with respect to the coordinate system of the virtual space and an object position in the virtual space, image data including an object in the virtual space to be presented to the plurality of mobile terminals at each relative position is calculated. Steps,
Displaying image data including an object in the virtual space on the plurality of mobile terminals;
Synchronizing operation result information indicating an operation result performed on the virtual space between the plurality of mobile terminals in real time;
Updating virtual image data including an object in the virtual space presented to the plurality of portable terminals based on the operation result information.
JP2010251575A 2010-11-10 2010-11-10 Virtual space sharing system, portable terminal, and virtual space sharing method Expired - Fee Related JP5669185B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010251575A JP5669185B2 (en) 2010-11-10 2010-11-10 Virtual space sharing system, portable terminal, and virtual space sharing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010251575A JP5669185B2 (en) 2010-11-10 2010-11-10 Virtual space sharing system, portable terminal, and virtual space sharing method

Publications (2)

Publication Number Publication Date
JP2012103888A true JP2012103888A (en) 2012-05-31
JP5669185B2 JP5669185B2 (en) 2015-02-12

Family

ID=46394208

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010251575A Expired - Fee Related JP5669185B2 (en) 2010-11-10 2010-11-10 Virtual space sharing system, portable terminal, and virtual space sharing method

Country Status (1)

Country Link
JP (1) JP5669185B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018128472A1 (en) * 2017-01-05 2018-07-12 Samsung Electronics Co., Ltd. Virtual reality experience sharing
JP2020010318A (en) * 2018-05-28 2020-01-16 ホンダ リサーチ インスティテュート ヨーロッパ ゲーエムベーハーＨｏｎｄａ Ｒｅｓｅａｒｃｈ Ｉｎｓｔｉｔｕｔｅ Ｅｕｒｏｐｅ ＧｍｂＨ Method and system for reproducing visual and/or audio content synchronously by one group of devices

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981475A (en) * 1995-09-18 1997-03-28 Toshiba Corp Information terminal equipment
JP2001070657A (en) * 1999-09-08 2001-03-21 Seiko Epson Corp System and method for displaying imaginary world
US20020140666A1 (en) * 2001-03-29 2002-10-03 Bradski Gary R. Intuitive mobile device interface to virtual spaces
JP2007069009A (en) * 2005-09-08 2007-03-22 Samsung Electronics Co Ltd Shooting game method and device of mobile terminal apparatus using close range positioning communication
JP2007514978A (en) * 2003-12-19 2007-06-07 スピーチギア，インコーポレイティド Display of visual data as a function of display position
JP2009236934A (en) * 2006-05-23 2009-10-15 Nec Corp Display device, apparatus including the same, program, and display method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981475A (en) * 1995-09-18 1997-03-28 Toshiba Corp Information terminal equipment
JP2001070657A (en) * 1999-09-08 2001-03-21 Seiko Epson Corp System and method for displaying imaginary world
US20020140666A1 (en) * 2001-03-29 2002-10-03 Bradski Gary R. Intuitive mobile device interface to virtual spaces
JP2007514978A (en) * 2003-12-19 2007-06-07 スピーチギア，インコーポレイティド Display of visual data as a function of display position
JP2007069009A (en) * 2005-09-08 2007-03-22 Samsung Electronics Co Ltd Shooting game method and device of mobile terminal apparatus using close range positioning communication
JP2009236934A (en) * 2006-05-23 2009-10-15 Nec Corp Display device, apparatus including the same, program, and display method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018128472A1 (en) * 2017-01-05 2018-07-12 Samsung Electronics Co., Ltd. Virtual reality experience sharing
US10769797B2 (en) 2017-01-05 2020-09-08 Samsung Electronics Co., Ltd. Virtual reality experience sharing
JP2020010318A (en) * 2018-05-28 2020-01-16 ホンダ リサーチ インスティテュート ヨーロッパ ゲーエムベーハーＨｏｎｄａ Ｒｅｓｅａｒｃｈ Ｉｎｓｔｉｔｕｔｅ Ｅｕｒｏｐｅ ＧｍｂＨ Method and system for reproducing visual and/or audio content synchronously by one group of devices
JP7069085B2 (en) 2018-05-28 2022-05-17 ホンダ リサーチ インスティテュート ヨーロッパ ゲーエムベーハー Methods and systems for synchronously playing visual and / or audio content on a group of devices

Also Published As

Publication number Publication date
JP5669185B2 (en) 2015-02-12

Similar Documents

Publication Publication Date Title
US9684169B2 (en) Image processing apparatus and image processing method for viewpoint determination
JP2023500025A (en) Porting physical objects to virtual reality
US10665014B2 (en) Tap event location with a selection apparatus
US9950258B2 (en) System, program, and method for operating screen by linking display and plurality of controllers connected via network
JP5282079B2 (en) Multi-display system, terminal, method and program
JP2018106262A (en) Inconsistency detection system, mixed reality system, program, and inconsistency detection method
EP2741205B1 (en) Display system, display controller, program and method
US11727648B2 (en) Method and device for synchronizing augmented reality coordinate systems
JP6711033B2 (en) Display control method, communication device, display control program, and display control device
WO2019173055A1 (en) Displaying content based on positional state
JP2019008623A (en) Information processing apparatus, information processing apparatus control method, computer program, and storage medium
US20140152562A1 (en) Display controller, display system, storage medium and method
JP6409644B2 (en) Display control method, display control program, and information processing apparatus
JP2016528579A (en) Method and apparatus for rendering an object on multiple 3D displays
JP2018106661A (en) Inconsistency detection system, mixed reality system, program, and inconsistency detection method
JP5669185B2 (en) Virtual space sharing system, portable terminal, and virtual space sharing method
JP2019155062A (en) Display system, display control device, and program
US10204420B2 (en) Low latency simulation apparatus and method using direction prediction, and computer program therefor
JP5973788B2 (en) Information processing program, information processing apparatus, information processing system, and information processing method
KR101591057B1 (en) Remote control method and system for synchronization
US20210256865A1 (en) Display system, server, display method, and device
JP7207915B2 (en) Projection system, projection method and program
JP2014229050A (en) Evacuation guidance system
US11954269B2 (en) Information processing apparatus, information processing method, and program for generating location data
US20140220941A1 (en) Virtual space sharing system for mobile phones

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140416

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140616

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141211

R150 Certificate of patent or registration of utility model

Ref document number: 5669185

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees