JP2012177769A - Cooperative display system, cooperative display method, and portable terminal - Google Patents
Cooperative display system, cooperative display method, and portable terminal Download PDFInfo
- Publication number
- JP2012177769A JP2012177769A JP2011040139A JP2011040139A JP2012177769A JP 2012177769 A JP2012177769 A JP 2012177769A JP 2011040139 A JP2011040139 A JP 2011040139A JP 2011040139 A JP2011040139 A JP 2011040139A JP 2012177769 A JP2012177769 A JP 2012177769A
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- slave
- terminals
- display
- display data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Liquid Crystal Display Device Control (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
Description
本発明は、連携表示システム、連携表示方法、および携帯端末に関し、特に複数の携帯端末を用いた大規模連携表示技術に関する。 The present invention relates to a cooperative display system, a cooperative display method, and a mobile terminal, and particularly to a large-scale cooperative display technique using a plurality of mobile terminals.
巨大画像の表示やマスゲームを、複数の端末装置を用いて半自動的に実行する技術が知られている。本発明に関連する技術として、例えば特許文献1には、1つの映像を複数に分解して、1または複数のピクセルごとに携帯端末の表示器面上に表示させることで、大きな映像を表示させる同期式映像再生システムが開示されている。また、例えば特許文献2には、マスゲームの各演技者の位置に応じた的確な演技支援を行うためのマスゲーム支援システムが開示されている。
A technique for semi-automatically displaying a huge image and a mass game using a plurality of terminal devices is known. As a technique related to the present invention, for example, Patent Document 1 displays a large image by disassembling one image into a plurality of pixels and displaying each image on a display surface of a mobile terminal for each one or a plurality of pixels. A synchronous video playback system is disclosed. Further, for example,
しかしながら、上述した技術では、システムの構成要素としては、端末に加えて通信用のサーバーを必要とするものである。このため、システムとしての規模が大きなものとなる。また、各端末の位置を検出するためにGPSを用いており、高精度での測位ができない、屋内での測位が不可能である、などの問題があった。なお、特許文献2に例示されるように、GPSを用いずに位置の検出を可能とすることも考えられるが、特許文献2ではGPSの代わりにICタグを必要としており、大規模な装置が必要となる。このため、場所を選ばずに手軽に実現可能なものではなかった。
However, the above-described technique requires a communication server as a system component in addition to a terminal. For this reason, the scale as a system becomes large. In addition, since GPS is used to detect the position of each terminal, there is a problem that positioning with high accuracy is not possible and positioning is not possible indoors. As exemplified in
そこで本発明の目的は、これらの課題を解決し、携帯端末のユーザーが、巨大な画像の表示やマスゲームを手軽に実施可能な連携表示システム、連携表示方法、連携表示プログラム、および携帯端末を提供することである。 Therefore, an object of the present invention is to solve these problems, and to provide a linked display system, linked display method, linked display program, and portable terminal that enable a user of a portable terminal to easily display a huge image and a mass game. Is to provide.
本発明の第一の態様に係る連携表示システムは、携帯端末相互間の方位を検出する方位センサーと、前記携帯端末相互間の距離を検出する距離センサーと、前記携帯端末相互間の通信を行う通信機能部と、画像を表示する表示部と、を有する複数の携帯端末を備え、前記複数の携帯端末のうちでいずれか1をマスタとなるマスタ端末とし、他の複数の携帯端末をスレーブ端末とし、前記マスタ端末は、1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する。 The cooperative display system which concerns on the 1st aspect of this invention performs communication between the direction sensor which detects the direction between portable terminals, the distance sensor which detects the distance between the said portable terminals, and the said portable terminals A plurality of portable terminals each having a communication function unit and a display unit for displaying an image, one of the plurality of portable terminals serving as a master terminal, and the other plurality of portable terminals serving as slave terminals And the master terminal divides the display data constituting one screen into a plurality of divided display data and displays the divided display data on the plurality of other slave terminals, respectively. On the basis of the detection result of each of the slave terminals, the slave terminal is instructed to move to the determined position, and the divided display data is An instruction to display sends the slave terminal.
本発明の第二の態様に係る連携表示方法は、携帯端末相互間の方位を検出する方位センサーと、前記携帯端末相互間の距離を検出する距離センサーと、前記携帯端末相互間の通信を行う通信機能部と、画像を表示する表示部と、を有する複数の携帯端末を備える連携表示システムにおける連携表示方法であって、前記複数の携帯端末のうちでいずれか1がマスタとなるマスタ端末とされ、他の複数の携帯端末がスレーブ端末とされ、前記マスタ端末は、1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する。 The cooperative display method according to the second aspect of the present invention includes a direction sensor that detects a direction between mobile terminals, a distance sensor that detects a distance between the mobile terminals, and communication between the mobile terminals. A linked display method in a linked display system including a plurality of portable terminals having a communication function unit and a display unit that displays an image, wherein any one of the plurality of portable terminals is a master terminal; The plurality of other portable terminals are set as slave terminals, and the master terminal divides display data constituting one screen into a plurality of divided display data, and the divided display data is divided into the other plurality of slave terminals. In order to display each, the position of each slave terminal should be determined based on the detection results of the direction sensor and the distance sensor, and the movement to the determined position is determined Instructs the slave terminal, an instruction to display sends the divided display data to each of said slave terminals.
本発明の第三の態様に係る携帯端末は、複数の携帯端末のうちで自携帯端末をマスタとし、他の複数の携帯端末をスレーブ端末として、前記携帯端末相互間の方位を検出する方位センサーと、前記携帯端末相互間の距離を検出する距離センサーと、前記携帯端末相互間の通信を行う通信機能部と、画像を表示する表示部と、を有し、1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する。 A mobile terminal according to a third aspect of the present invention is an orientation sensor that detects an orientation between the mobile terminals using the mobile terminal as a master and a plurality of mobile terminals as slave terminals among the plurality of mobile terminals. And a distance sensor that detects a distance between the portable terminals, a communication function unit that performs communication between the portable terminals, and a display unit that displays an image. In order to divide into a plurality of divided display data and display the divided display data on each of the other plurality of slave terminals, the position where each slave terminal should be based on the detection results of the direction sensor and the distance sensor is determined. The slave terminal is instructed to move to the determined position, and instructed to transmit and display the divided display data to each of the slave terminals.
本発明によれば、携帯端末のユーザーが、巨大な画像の表示やマスゲームを手軽に実施可能な連携表示システム、連携表示方法、および携帯端末を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the user of a portable terminal can provide the cooperation display system, the cooperation display method, and portable terminal which can implement a huge image display and mass game easily.
本発明の実施の形態についての説明に先立ち、図9を参照して、本発明の原理について簡単に説明する。図9に示すように、本発明にかかる連携表示システムは、複数の携帯端末(Master端末1、Slave端末2)を備えている。ここで、複数の携帯端末のうちでいずれか1をマスタとなるマスタ端末1とし、他の複数の携帯端末をスレーブ端末2としている。
Prior to the description of the embodiment of the present invention, the principle of the present invention will be briefly described with reference to FIG. As shown in FIG. 9, the cooperative display system according to the present invention includes a plurality of portable terminals (Master terminal 1 and Slave terminal 2). Here, one of the plurality of portable terminals is set as a master terminal 1 as a master, and the other plurality of portable terminals are set as
また、各携帯端末は、携帯端末相互間の方位を検出する方位センサー41、61と、携帯端末相互間の距離を検出する距離センサーとしての赤外線装置32、52と、携帯端末相互間の通信を行う通信機能部30、50と、画像を表示する表示部としてのメインLCD42、62と、を有している。
In addition, each mobile terminal performs communication between the mobile terminals and the
マスタ端末1は、1画面を構成する表示データ11を複数の分割表示データ12に分割する。そして、マスタ端末1は、その分割表示データ12を他の複数のスレーブ端末2にそれぞれ表示させるべく、方位センサーと距離センサーの検出結果に基づいて、各スレーブ端末2のあるべき位置を決定する。そして、マスタ端末1は、その決定した位置への移動を各スレーブ端末2に指示し、分割表示データ12を各スレーブ端末2に送信して表示するよう指示する。
The master terminal 1 divides display data 11 constituting one screen into a plurality of divided
図9に示す連携表示システムによれば、複数の携帯端末を連係動作させて、巨大な表示を手軽に実現可能とする。連携表示システムは、例えば、巨大な静止画/動画の再生や、スタジアムでの応援やマスゲームなどに利用することができる。また、遭難時の救助信号の表示にも利用することができる。また、大勢が集まる大規模なイベントなどでのパフォーマンスにも利用することができる。 According to the cooperative display system shown in FIG. 9, a huge display can be easily realized by linking a plurality of portable terminals. The cooperative display system can be used, for example, for reproduction of huge still images / moving images, support in a stadium, mass games, and the like. It can also be used to display a rescue signal in the event of a distress. It can also be used for performances at large events where many people gather.
また、表示に関しては、2次元表示に限られず、3次元表示とすることもできる。例えば、携帯端末を無線LANで同期させ、フレームシーケンシャル方式を使用することで、3次元表示を可能とする。 Further, the display is not limited to the two-dimensional display, and a three-dimensional display can be used. For example, the mobile terminal is synchronized with the wireless LAN, and a three-dimensional display is enabled by using a frame sequential method.
また、複数の携帯端末の位置決めに際しては、GPSに代えて赤外線装置と方位センサーを使用することで、大掛かりな装置の設置を行うことなく高精度の測位を可能とし、さらに、GPSでは測位が出来ない屋内においても、携帯端末の位置を決定することができる。 In addition, when positioning multiple mobile terminals, using an infrared device and a direction sensor instead of GPS enables high-precision positioning without installing a large-scale device. The position of the portable terminal can be determined even indoors where there is no room.
また、携帯端末として携帯電話端末を利用した場合には、ユーザーが所有する携帯電話装置をそのまま利用することができ、より手軽に連携表示システムを実現できる。 Further, when a mobile phone terminal is used as a mobile terminal, a mobile phone device owned by the user can be used as it is, and a cooperative display system can be realized more easily.
実施の形態1.
以下、図面を参照して本発明の実施の形態について説明する。
図1は、本実施の形態にかかる連携表示システムの全体構成図である。図1に例示するように、本実施の形態にかかる連携表示システムは、Master端末1と、複数のSlave端末2(図では、Slave端末1、Slave端末2、・・・、Slave端末Xとして示す)と、を備えて構成されている。Master端末1とSlave端末2は、ユーザーが携帯する携帯端末装置(例えば、携帯電話端末)である。
Embodiment 1 FIG.
Embodiments of the present invention will be described below with reference to the drawings.
FIG. 1 is an overall configuration diagram of a cooperative display system according to the present embodiment. As illustrated in FIG. 1, the cooperative display system according to the present embodiment is illustrated as a master terminal 1 and a plurality of slave terminals 2 (in the figure, a slave terminal 1, a
Master端末1は、連携表示システムに含まれる携帯端末を用いて表示される表示画像や、各携帯端末が表示画像を表示する際の携帯端末の表示位置を決定する。Master端末1は、表示データ分割処理部10と、端末位置情報処理部20と、通信機能部30と、各種デバイス部40と、を備えている。
The master terminal 1 determines a display image displayed using a mobile terminal included in the cooperative display system and a display position of the mobile terminal when each mobile terminal displays a display image. The master terminal 1 includes a display data
表示データ分割処理部10は、利用可能なSlave端末2の台数に応じて、画像の分割を行う。表示データ分割処理部10は、1の画面を構成する画像を、複数の画像に分割する。表示データ分割処理部10は、表示データ11を分割して、分割表示データ12を生成する表示データ分割機能13を有している。
The display data
端末位置情報処理部20は、利用可能なSlave端末2の台数に応じて、各携帯端末を整列させるために用いる端末位置データ21を計算する。端末位置情報処理部20は、Master端末1およびSlave端末2の各位置を規定する端末位置データ21を計算する端末位置計算機能22を有している。また、端末位置計算機能22は、Master端末1の位置を計算する。なお、各携帯端末の整列手順の詳細については後述する。
The terminal position
本実施の形態では、端末位置情報処理部20は、端末位置データ21として、表示データの分割結果に応じた位置情報マトリクスを作成する。位置情報マトリクスは、Master端末1の位置を原点として、Slave端末2の位置を格子状に整列させたものである。各携帯端末(Master端末1およびSlave端末2)が、位置情報マトリクスに規定された位置でそれぞれに割り当てられた分割表示データ12を表示することで、全体として、1つの画面が表示される。図2(a)に、位置情報マトリクスの例を示す。図2では、9台の携帯端末(Master端末1およびSlave端末2)を用いた場合に、各携帯端末の位置を格子状に整列させて示している。図2(a)では、例えば、Master端末1の位置Aを原点として、8台のSlave端末2の各位置を、位置B'〜I'として示している。
In the present embodiment, the terminal position
通信機能部30は、各Slave端末2との間での、データ通信を行う。通信機能部30は、分割表示データ12および端末位置データ21を、各Slave端末2に送信する。また、通信機能部30は、連携表示システムが表示する画面を更新するための更新要求を、各Slave端末2に送信する。さらに、通信機能部30は、Slave端末2からアドレスを受信する他、Slave端末2の状態(移動中/移動完了など)についても送受信する。
The
通信機能部30は、無線LAN(Local Area Network)31と、赤外線装置32と、を備えている。通信機能部30は、無線LAN31や赤外線装置32を使用して、各Slave端末2との間での通信機能を有している。赤外線装置32は、携帯端末の整列時での位置情報の特定において距離センサーとして使用される他、3次元映像の再生時にも使用される。
The
各種デバイス部40は、方位センサー41と、メインLCD42と、を少なくとも備えている。方位センサー41は、携帯端末の向き(方位)を計測するセンサー(例えば、半導体等を用いた地磁気センサー)である。詳細は後述するが、方位センサー41は、携帯端末の整列時に利用される。メインLCD42は、各種の携帯端末情報を表示するLCD(Liquid Crystal Display)等からなる表示部のうちで、分割表示データ12を含む画像を表示するために使用される。
The
Slave端末2は、Master端末1が決定した位置において、分割表示データ12を表示する。Slave端末2は、通信機能部50と、各種デバイス部60と、端末位置情報処理部70と、を備えている。
The
通信機能部50は、Master端末1との間での、データ通信を行う。通信機能部50は、無線LAN51と、赤外線装置52と、を備えている。通信機能部50は、無線LAN51や赤外線装置52を使用して、Master端末1との間での通信機能を有している。赤外線装置52は、携帯端末の整列時での位置情報の特定において距離センサーとして使用される他、3次元映像の再生時にも利用される。また、通信機能部50は、Mater端末1から送信される分割表示データ12、端末位置データ21の受信を行う他、Mater端末1から送信される表示データの更新要求の受信も行う。さらに、通信機能部50は、Master端末1に対してSlave端末2のアドレスを送信する他、自身の状態(移動中/移動完了など)や他のSlave端末2の状態についても送受信する。
The
各種デバイス部60は、方位センサー61と、メインLCD62と、を少なくとも備えている。方位センサー61は、携帯端末の向き(方位)を計測するセンサー(例えば、半導体等を用いた地磁気センサー)である。詳細は後述するが、方位センサー61は、携帯端末の整列時に利用される。メインLCD62は、Master端末1から送信される分割表示データ12を含む画像を表示するために使用される。
The
なお、連携表示システムは、携帯端末(Master端末1およびSlave端末2)を用いて2次元の画面表示に限られず、3次元の画面表示を行うこともできる。各携帯端末(Master端末1およびSlave端末2)は、3次元の画面表示として分割表示データ12を表示する3次元表示機能を有している。
Note that the cooperative display system is not limited to two-dimensional screen display using mobile terminals (Master terminal 1 and Slave terminal 2), and can also perform three-dimensional screen display. Each portable terminal (Master terminal 1 and Slave terminal 2) has a three-dimensional display function for displaying the divided
本実施の形態では、フレームシーケンシャル方式に基づく3次元表示機能を採用している。3次元表示機能は、無線LAN(無線LAN31、無線LAN51)に基づいて、各携帯端末の表示画面(メインLCD42およびメインLCD62)の表示制御を同期させ、各携帯端末の表示画面の画面更新を行う。3次元表示の利用時には、液晶シャッター方式の3次元対応の眼鏡を画面の閲覧者に掛けてもらう。そして、Master端末1が、赤外線装置32を用いて液晶シャッター開閉要求を閲覧者側の3次元対応眼鏡に対して画面更新のタイミングで送信する。閲覧者側の3次元対応眼鏡は、受信した液晶シャッター開閉要求に応じて、液晶シャッターの開閉を行う。
In this embodiment, a three-dimensional display function based on a frame sequential method is employed. The three-dimensional display function synchronizes the display control of the display screens (
端末位置情報処理部70は、端末位置データ71に基づいて、Slave端末1の位置を計算する端末位置計算機能72を有している。端末位置データ71は、Master端末1から送信される位置情報マトリクスである。
The terminal position
なお、図示は省略するが、Master端末1およびSlave端末2は、プログラムに従って携帯端末の各部を制御する制御部(CPU:Central Processing Unit)と、プログラム等を格納するROM(Read Only Memory)と、プログラム実行の際に用いられるRAM(Random Access Memory)と、ユーザーが操作入力を行う入力操作部と、入力操作部に接続されて入力の検知を行う入力制御部と、を備えている。プログラムには、Master端末1およびSlave端末2を用いて連携表示方法を実行させるための、連携表示プログラムが含まれている。
Although illustration is omitted, the Master terminal 1 and the
また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、端末に供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によって端末に供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムを端末に供給できる。 Further, the above-described program can be stored using various types of non-transitory computer readable media and supplied to a terminal. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (for example, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (for example, magneto-optical disks), CD-ROMs (Read Only Memory) CD-R, CD -R / W, including semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)). In addition, the program may be supplied to the terminal by various types of temporary computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The temporary computer-readable medium can supply the program to the terminal via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
以下、図3〜図7を参照して、連携表示システムの動作について説明する。図3は、Master端末とSlave端末の動作手順を示すフローチャートである。図3では、図の左側にMaster端末1の動作を示し、図の右側にSlave端末2の動作を示している。
Hereinafter, the operation of the cooperative display system will be described with reference to FIGS. FIG. 3 is a flowchart showing an operation procedure of the master terminal and the slave terminal. In FIG. 3, the operation of the Master terminal 1 is shown on the left side of the figure, and the operation of the
まず、図3の左側に示すMaster端末1の動作を説明する。
Master端末1は、全てのSlave端末2から送信されたアドレスを受信する(S101)。Master端末1は、アドレスの受信結果に基づいて、使用可能な端末の台数を確認して、自身を含む使用可能な端末の台数分に表示データ11を分割し、分割表示データ12を作成する(S102)。また、Master端末1は、分割表示データ12を各端末で表示させる際に、各端末のあるべき位置を指示するために用いる位置情報マトリクスを作成する(S103)。Master端末1は、作成した位置情報マトリクスを、全てのSlave端末2に対して送信する(S104)。
First, the operation of the Master terminal 1 shown on the left side of FIG. 3 will be described.
The master terminal 1 receives the addresses transmitted from all the slave terminals 2 (S101). The master terminal 1 confirms the number of usable terminals based on the reception result of the address, divides the display data 11 into the number of usable terminals including itself, and creates divided display data 12 ( S102). Further, when the master terminal 1 displays the divided
次に、Master端末1からの指示に従って、端末を保持しているユーザーが端末を移動させる(S105)。Master端末1は、位置情報マトリクスの原点位置へと端末の位置を移動させるようユーザーに対して通知する。Master端末1は、例えば、目的の方位および位置に向けて端末を移動させるための画面をメインLCD42に表示させ、ユーザーに対して端末の移動を促す。また、Master端末1は、目的の方位および位置に向けて端末を移動させるための音声データを作成して、スピーカ等の音声出力デバイスからこの音声データを音声出力するようにしてもよい。また、詳細は後述するが、Master端末1は、分割表示データ12を各Slave端末2に送信する。なお、S105でのMaster端末1が移動する際の動作の詳細については、後述する。
Next, the user holding the terminal moves the terminal according to the instruction from the Master terminal 1 (S105). The master terminal 1 notifies the user to move the terminal position to the origin position of the position information matrix. The master terminal 1 displays, for example, a screen for moving the terminal toward a target azimuth and position on the
全ての端末(Master端末1およびSlave端末2)の移動が完了した後、Master端末1は、Slave端末2に対して画面の更新要求を通知し、同時に、閲覧者の眼鏡に対して液晶シャッター開閉要求を通知する(S106)。また、Master端末1は、メインLCD42を用いて自らも分割表示データ12を表示させる場合には、上記更新要求と同期して、画面の更新を行う。
After the movement of all the terminals (Master terminal 1 and Slave terminal 2) is completed, Master terminal 1 notifies screen update request to
Master端末1は、続けて表示する分割表示データ12がある場合(S107でYESの場合)には、S106へと戻り処理を続ける。Master端末1は、続けて表示する分割表示データ12がない場合(S107でNoの場合)には、全ての分割表示データ12を表示し終えたとして、Slave端末2に対して表示終了を通知し(S108)、処理を完了する。
When there is the divided
次に、図3の右側に示すSlave端末2の動作を説明する。
Slave端末2は、Master端末1に対して自端末のアドレスを通知する(S201)。上述したように、全てのSlave端末2からのアドレスを受信したMaster端末1は、位置情報マトリクスを作成して各Slave端末2に送信する。このため、各Slave端末2は、Master端末1から送信された位置情報マトリクスを受信する(S202)。
Next, the operation of the
The
次に、Master端末1から送信された位置情報マトリクスに示される配置に従って、端末を保持しているユーザーが端末を移動させる(S203)。Slave端末2は、目的とする位置へと端末の位置を移動させるよう、ユーザーに対して通知する。また、詳細は後述するが、Slave端末2は、Master端末1から送信された分割表示データ12を受信する。なお、S203でのSlave端末2が移動する際の動作の詳細については、後述する。
Next, the user holding the terminal moves the terminal according to the arrangement shown in the position information matrix transmitted from the Master terminal 1 (S203). The
全ての端末(Master端末1およびSlave端末2)の移動が完了した後、Master端末1からSlave端末2に対して画面更新通知が送信され、Slave端末2は、Master端末1から送信された画面更新通知を受信する(S204)。
After the movement of all terminals (Master terminal 1 and Slave terminal 2) is completed, a screen update notification is transmitted from Master terminal 1 to
Slave端末2は、端末ごとに割り当てられた分割表示データ12をメインLCD42に表示する(S205)。Slave端末2は、Master端末1からの表示終了通知を受信していない場合(S206でNOの場合)、S204へと戻り処理を続ける。Slave端末2は、Master端末1からの表示終了通知を受信した場合(S206でYESの場合)、処理を完了する。
The
図4および図5は、フレームシーケンシャル方式を使用した場合の、表示例を示す図である。図4および図5では、42台の端末を用いた場合を例に説明する。また、これら端末のうちでMaster端末1を左上に配置し、Slave端末2を他の位置に配置して、各画面に分割表示データ12を表示させている。図4では、「O」の文字を表示する表示データ11を、49枚の分割表示データ12に分割して表示している。図4(a)には、右目用画像であるフレーム1を示し、図4(b)には、左目用画像であるフレーム2を示している。図5では、「K」の文字を表示する表示データ11を、49枚の分割表示データ12に分割して表示している。図5(a)には、右目用画像であるフレーム3を示し、図5(b)には、左目用画像であるフレーム4を示している。なお、図4および図5に示したフレーム1〜4を連続して表示することで、「OK」の文字を全体として表示することができる。
4 and 5 are diagrams showing display examples when the frame sequential method is used. 4 and 5, the case where 42 terminals are used will be described as an example. Of these terminals, the Master terminal 1 is arranged at the upper left, the
次に、図2(b)、図6、図7を参照して、各端末の移動処理動作を詳細に説明する。
図6は、目的位置までの移動距離と移動角度の算出手順を示すフローチャートである。図6では、図の左側にMaster端末1の動作を示し、図の右側にSlave端末2の動作を示している。
Next, the movement processing operation of each terminal will be described in detail with reference to FIG. 2 (b), FIG. 6, and FIG.
FIG. 6 is a flowchart showing a procedure for calculating the moving distance to the target position and the moving angle. In FIG. 6, the operation of the Master terminal 1 is shown on the left side of the figure, and the operation of the
まず、図6の左側に示すMaster端末1の動作を説明する。
Master端末1は、位置情報マトリクスの原点位置へと端末位置を移動させる(S301)。Master端末1は、位置情報マトリクスを参照して、自身の右隣に端末が配置されるべき空き領域があるか否かを確認し(S302)、空き領域がある場合には、右隣に配置する任意のSlave端末2を決定する(S303)。Master端末1は、空き領域がない場合には、S307へと処理を進める。
First, the operation of the Master terminal 1 shown on the left side of FIG. 6 will be described.
The master terminal 1 moves the terminal position to the origin position of the position information matrix (S301). The master terminal 1 refers to the position information matrix to check whether there is a free area where the terminal is to be placed on the right side of itself (S302). If there is a free area, the master terminal 1 is placed on the right side. An
Master端末1は、角度αと、距離lと、を求め位置情報マトリクスに示される目的位置に対して、Slave端末2の移動距離xと、Slave端末2の移動角度θを算出する(S304)。角度αは、位置情報マトリクスの水平方向と、Master端末1およびSlave端末2を結ぶ方向と、がなす角度である。距離lは、Master端末1と決定したSlave端末2との間の距離である。
The master terminal 1 calculates the angle α and the distance l, and calculates the movement distance x of the
より具体的には、まず、Master端末1は、右隣に配置するとして決定したSlave端末2がMaster端末1から見て現在どの方位にあるか(すなあわち、角度α)を、方位センサー(方位センサー41、方位センサー61)を利用して測位する。さらに、Master端末1は、距離lを、赤外線装置(赤外線装置32、赤外線装置52)を用いて測位する。なお、赤外線装置を利用した距離の測位技術はよく知られた公知技術であるため、ここではその詳細な説明を省略する。
More specifically, first, the master terminal 1 determines in which direction the
図7を参照して、移動距離xと移動角度θの算出方法について具体的に説明する。図7では、Bの位置にある端末を、B'の位置へと移動させる場合の算出方法を例示している。図において、mは、位置情報マトリクスに規定された端末の目的位置について、各端末間の距離を示す。mは、位置情報マトリクスの作成時に算出済みである。図7に示すように、求めたαおよびlと、算出済みのmと、を利用することで、目的位置へと移動させるべき端末の移動距離xと、移動角度θと、を算出する。なお、図7(a)では、lcosαがm以上の場合の計算式を示し、図7(b)では、lcosαがmより小さい場合の計算式を示している。 A method for calculating the movement distance x and the movement angle θ will be specifically described with reference to FIG. FIG. 7 illustrates a calculation method in the case where the terminal at the position B is moved to the position B ′. In the figure, m indicates the distance between the terminals with respect to the target position of the terminal specified in the position information matrix. m has already been calculated when the position information matrix is created. As shown in FIG. 7, by using the obtained α and l and the calculated m, the moving distance x of the terminal to be moved to the target position and the moving angle θ are calculated. FIG. 7A shows a calculation formula when lcos α is greater than or equal to m, and FIG. 7B shows a calculation formula when l cos α is smaller than m.
Master端末1は、算出した移動距離xと移動角度θと、対象端末(ここでは、右隣に配置すると決定したSlave端末2)から見た自端末が位置する方向の方位と、を、対象端末に送信する(S305)。
The master terminal 1 calculates the calculated moving distance x and the moving angle θ and the direction of the direction in which the own terminal is located as viewed from the target terminal (here, the
Master端末1は、対象端末から移動完了通知を受信すると(S306)、自身の下方向に端末が配置される領域があるか否かを確認する(S307)。Master端末1は、空き領域がある場合には、下方向に配置する任意のSlave端末2を決定し(S308)、S304へと戻り処理を続ける。Master端末1は、空き領域がない場合には、S310へと処理を進める。
When the master terminal 1 receives the movement completion notification from the target terminal (S306), the master terminal 1 checks whether or not there is an area in which the terminal is arranged in the downward direction (S307). When there is an empty area, the master terminal 1 determines an
Master端末1は、移動完了通知を受取った対象端末に対して、分割表示データ12を送信する(S309)。Master端末1は、対象端末から移動完了通知を受取るごとに、対象となる端末に対して分割表示データ12を送信する(S310)。
The master terminal 1 transmits the divided
次に、図6の右側に示すSlave端末2の動作を説明する。
Slave端末2は、目的位置へ移動するための情報(位置情報マトリクス、移動距離x、移動角度θ、対象端末から見た自端末が位置する方向の方位など)を、移動完了済みの端末(ここでは、Master端末1)から受信する(S401)。
Next, the operation of the
The
Slave端末2は、移動完了済みの端末(ここでは、Master端末1)が位置する方向に自端末の方向を向け、その向けた方向から移動角度θ回転させ、移動距離l移動させる(S402)。Slave端末2は、移動が完了すると、移動完了済みの端末(ここでは、Master端末1)に対して移動完了を通知する(S403)。Slave端末2は、Master端末1から送信された分割表示データ12を受信する(S404)。
The
なお、図6では、Master端末1と、Master端末1の右隣と下方向にSlave端末2が配置される場合の動作例のみを示している。Master端末1の右隣および下方向に、それぞれSlave端末2が移動を完了した場合には、移動を完了したSlave端末2が、図6の左側に示すS302以降の動作を行うようにしてもよい。この場合、移動を完了したSlave端末2を除いた他のSlave端末2が、図6の右側に示す動作を行う。
FIG. 6 shows only an operation example in the case where the master terminal 1 and the
ここで、図2(b)を参照して、端末の移動例を具体的に説明する。
図2(b)において、まず、Master端末1が、原点へと移動する。そして、位置BのSlave端末2が、Master端末1から見て右隣の目的位置B'へと移動する。そして、位置DのSlave端末2が、Master端末1から見て下方向の目的位置D'へと移動する。また、同時に、移動が完了した位置B'のSlave端末2が、位置CのSlave端末2を、位置C'へと移動させる。さらに、移動が完了した位置D'のSlave端末2が、位置Eおよび位置GのSlave端末2を、それぞれの目的位置へと移動させる。また、同時に、さらに、移動が完了した位置C'のSlave端末2が、位置FのSlave端末2を、それぞれの目的位置へと移動させる。最終的に、全てのSlave端末2からの移動完了通知をMaster端末1が受信すると、端末の移動処理が完了する。このようにして、移動が完了した端末を基点として各端末の移動動作を実行させていくことで、時間の経過と比例して、作業効率を向上させることができる。
Here, with reference to FIG.2 (b), the example of a movement of a terminal is demonstrated concretely.
In FIG. 2B, first, the Master terminal 1 moves to the origin. Then, the
以上説明した本実施の形態によれば、携帯端末のユーザーが、巨大な画像の表示やマスゲームを手軽に実施することができる。また、以下に例示する様々な効果をも奏する。
第1の効果は、3次元映像を大画面で再生したい場合に、映画館のスクリーンや3次元対応テレビなどの大規模な装置を利用せずとも、複数の端末を利用して容易に実現することができる。
第2の効果は、分割表示データの表示や更新タイミングの受信をSlave端末2側で行っているため、ユーザーは指示に従って単に端末を掲げるだけで、映像の表示やマスゲームを実現することができる。
第3の効果は、端末の位置や方位の測定に各種センサーを利用しているため、ユーザーは、端末の位置などを意識せずに、最適な端末の位置へと端末を移動させることができる。
According to the present embodiment described above, the user of the mobile terminal can easily display a huge image or perform a mass game. In addition, various effects exemplified below are also exhibited.
The first effect can be easily realized by using a plurality of terminals without using a large-scale device such as a movie theater screen or a three-dimensional television when reproducing a three-dimensional image on a large screen. be able to.
The second effect is that the display of the divided display data and the reception of the update timing are performed on the
The third effect is that since various sensors are used to measure the position and orientation of the terminal, the user can move the terminal to the optimum terminal position without being aware of the terminal position or the like. .
実施の形態2.
上述した実施の形態1と比較して、本実施の形態にかかる連携表示システムは、各端末(Master端末1およびSlave端末2)が、その位置情報を測位する手法が異なっている。上述した実施の形態1では、端末(Master端末1およびSlave端末2)は、携帯端末相互間の距離を含む位置情報を測位するために赤外線装置(赤外線装置32、赤外線装置52)を利用するものとして説明したが、本実施の形態では、赤外線装置に加えて超音波装置も利用することを特徴する。なお、その他の基本的な構成は実施の形態1と同じであるため、以下では、相違点を中心に説明し、共通点についてはその詳細な説明を省略する。
Compared with the first embodiment described above, the coordinated display system according to the present embodiment is different in a method in which each terminal (Master terminal 1 and Slave terminal 2) measures the position information. In the first embodiment described above, the terminals (Master terminal 1 and Slave terminal 2) use an infrared device (
図8は、本実施の形態にかかる連携表示システムの全体構成図である。図8において、Master端末1は、位置情報を測位するための超音波装置43を更に備えている。また、Slave端末2は、位置情報を測位するための超音波装置63を更に備えている。
FIG. 8 is an overall configuration diagram of the cooperative display system according to the present embodiment. In FIG. 8, the master terminal 1 further includes an
赤外線装置(赤外線装置32、赤外線装置52)のみを用いて距離を測位する構成では、端末の周囲に強い光源などがある場合には、距離の測位に失敗することがある。そこで、距離の測位に失敗した場合には、赤外線装置に代えて超音波装置を利用して測位を行うことで、より正確な精度で、携帯端末の位置を決定することができる。従って、本実施の形態によれば、超音波装置を更に備えて距離の測位に利用することで、赤外線装置が利用できない環境下においても連携表示システムを実現可能とすることができる。
In the configuration in which the distance is measured using only the infrared device (the
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、上述した実施の形態では、Master端末1と、Slave端末2とを区別して説明したが、本発明はこれに限定されない。すなわち、Master端末1とSlave端末2はいずれも同一の構成を有しており、設定に応じて、いずれか1台の端末をMaster端末1として利用し、他の端末をSlave端末2として利用してもよい。
Note that the present invention is not limited to the above-described embodiment, and can be changed as appropriate without departing from the spirit of the present invention. For example, in the above-described embodiment, the master terminal 1 and the
1 Master端末、
10 表示データ分割処理部、
11 表示データ、
12 分割表示データ、
13 表示データ分割機能、
20 端末位置情報処理部、
21 端末位置データ、
22 端末位置計算機能、
30 通信機能部、
31 無線LAN、
32 赤外線装置、
40 各種デバイス部、
41 方位センサー、
42 メインLCD、
43 超音波装置、
2 Slave端末、
50 通信機能部、
51 無線LAN、
52 赤外線装置、
60 各種デバイス部、
61 方位センサー、
62 メインLCD、
63 超音波装置、
70 端末位置情報処理部、
71 端末位置データ、
72 端末位置計算機能、
1 Master terminal,
10 display data division processing unit,
11 Display data,
12 split display data,
13 Display data division function,
20 terminal location information processing unit,
21 terminal location data,
22 Terminal location calculation function,
30 communication function unit,
31 wireless LAN,
32 Infrared device,
40 Various device parts,
41 Direction sensor,
42 Main LCD,
43 Ultrasonic device,
2 Slave terminals,
50 communication function unit,
51 wireless LAN,
52 infrared devices,
60 Various device parts,
61 Azimuth sensor,
62 Main LCD,
63 ultrasonic equipment,
70 terminal location information processing unit,
71 terminal location data,
72 Terminal position calculation function,
Claims (8)
前記携帯端末相互間の距離を検出する距離センサーと、
前記携帯端末相互間の通信を行う通信機能部と、
画像を表示する表示部と、を有する複数の携帯端末を備え、
前記複数の携帯端末のうちでいずれか1をマスタとなるマスタ端末とし、他の複数の携帯端末をスレーブ端末とし、
前記マスタ端末は、
1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する
連携表示システム。 An orientation sensor that detects the orientation between mobile devices,
A distance sensor for detecting a distance between the mobile terminals;
A communication function unit for performing communication between the mobile terminals;
A display unit for displaying an image, and a plurality of portable terminals,
One of the plurality of portable terminals is a master terminal that is a master, and the other plurality of portable terminals are slave terminals,
The master terminal is
In order to divide display data constituting one screen into a plurality of divided display data and display the divided display data on the plurality of other slave terminals, respectively, based on the detection results of the direction sensor and the distance sensor. A coordinated display system that determines a position where the slave terminal should be, instructs each slave terminal to move to the determined position, and instructs the slave terminal to transmit and display the divided display data.
前記表示データの分割結果に基づいて、前記マスタ端末の位置を原点とし、前記他の複数のスレーブ端末の位置を格子状に整列して配置させた位置情報マトリクスを作成し、当該位置情報マトリクスに従って、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定する
ことを特徴とする請求項1に記載の連携表示システム。 The master terminal is
Based on the division result of the display data, the position of the master terminal is set as the origin, and a position information matrix in which the positions of the plurality of other slave terminals are arranged in a grid is created, and the position information matrix is The cooperative display system according to claim 1, wherein a position where each of the slave terminals should be is determined based on detection results of the direction sensor and the distance sensor.
ことを特徴とする請求項1又は2に記載の連携表示システム。 The cooperative display system according to claim 1, wherein the distance sensor includes an infrared device.
ことを特徴とする請求項1乃至3いずれか1項に記載の連携表示システム。 The cooperative display system according to any one of claims 1 to 3, wherein the distance sensor includes an ultrasonic device that detects a distance between the portable terminals.
3次元表示の表示データを複数の分割表示データに分割して、前記携帯端末の前記表示部に3次元映像を再生させる
ことを特徴とする請求項1乃至4いずれか1項に記載の連携表示システム。 The master terminal is
The cooperative display according to any one of claims 1 to 4, wherein the display data of the three-dimensional display is divided into a plurality of divided display data, and the display unit of the portable terminal reproduces the three-dimensional video. system.
ことを特徴とする請求項1乃至5いずれか1項に記載の連携表示システム。 The cooperative display system according to claim 1, wherein the mobile terminal is a mobile phone terminal.
前記携帯端末相互間の距離を検出する距離センサーと、
前記携帯端末相互間の通信を行う通信機能部と、
画像を表示する表示部と、を有する複数の携帯端末を備える連携表示システムにおける連携表示方法であって、
前記複数の携帯端末のうちでいずれか1がマスタとなるマスタ端末とされ、他の複数の携帯端末がスレーブ端末とされ、
前記マスタ端末は、
1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する
連携表示方法。 An orientation sensor that detects the orientation between mobile devices,
A distance sensor for detecting a distance between the mobile terminals;
A communication function unit for performing communication between the mobile terminals;
A cooperative display method in a cooperative display system comprising a plurality of portable terminals having a display unit for displaying an image,
One of the plurality of portable terminals is a master terminal that is a master, and the other plurality of portable terminals are slave terminals,
The master terminal is
In order to divide display data constituting one screen into a plurality of divided display data and display the divided display data on the plurality of other slave terminals, respectively, based on the detection results of the direction sensor and the distance sensor. A coordinated display method that determines a position where the slave terminal should be, instructs each slave terminal to move to the determined position, and instructs the slave terminal to transmit and display the divided display data.
前記携帯端末相互間の方位を検出する方位センサーと、
前記携帯端末相互間の距離を検出する距離センサーと、
前記携帯端末相互間の通信を行う通信機能部と、
画像を表示する表示部と、を有し、
1画面を構成する表示データを複数の分割表示データに分割して、当該分割表示データを前記他の複数のスレーブ端末にそれぞれ表示させるべく、前記方位センサーと前記距離センサーの検出結果に基づいて各前記スレーブ端末のあるべき位置を決定し、当該決定した位置への移動を各前記スレーブ端末に指示し、前記分割表示データを各前記スレーブ端末に送信して表示するよう指示する
携帯端末。 Among the plurality of mobile terminals, the self-portable terminal is a master, and the other mobile terminals are slave terminals.
An orientation sensor for detecting an orientation between the mobile terminals;
A distance sensor for detecting a distance between the mobile terminals;
A communication function unit for performing communication between the mobile terminals;
A display unit for displaying an image,
In order to divide display data constituting one screen into a plurality of divided display data and display the divided display data on the plurality of other slave terminals, respectively, based on the detection results of the direction sensor and the distance sensor. A portable terminal that determines a position where the slave terminal should be, instructs each slave terminal to move to the determined position, and transmits and displays the divided display data to each slave terminal.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011040139A JP2012177769A (en) | 2011-02-25 | 2011-02-25 | Cooperative display system, cooperative display method, and portable terminal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011040139A JP2012177769A (en) | 2011-02-25 | 2011-02-25 | Cooperative display system, cooperative display method, and portable terminal |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012177769A true JP2012177769A (en) | 2012-09-13 |
Family
ID=46979659
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011040139A Withdrawn JP2012177769A (en) | 2011-02-25 | 2011-02-25 | Cooperative display system, cooperative display method, and portable terminal |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012177769A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015022592A (en) * | 2013-07-19 | 2015-02-02 | 株式会社リコー | Set output system, terminal device and output program |
JP2015200763A (en) * | 2014-04-08 | 2015-11-12 | 三菱電機株式会社 | Image display system |
JP2016206311A (en) * | 2015-04-17 | 2016-12-08 | 富士通株式会社 | Choreography creation support method, choreography creation support program, and information processing device |
JP6395337B1 (en) * | 2017-06-13 | 2018-09-26 | エヌ・ティ・ティ・コムウェア株式会社 | Information providing system and information providing method |
-
2011
- 2011-02-25 JP JP2011040139A patent/JP2012177769A/en not_active Withdrawn
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015022592A (en) * | 2013-07-19 | 2015-02-02 | 株式会社リコー | Set output system, terminal device and output program |
JP2015200763A (en) * | 2014-04-08 | 2015-11-12 | 三菱電機株式会社 | Image display system |
JP2016206311A (en) * | 2015-04-17 | 2016-12-08 | 富士通株式会社 | Choreography creation support method, choreography creation support program, and information processing device |
JP6395337B1 (en) * | 2017-06-13 | 2018-09-26 | エヌ・ティ・ティ・コムウェア株式会社 | Information providing system and information providing method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6798019B2 (en) | Panorama image display control method, device and storage medium | |
US8499038B1 (en) | Method and mechanism for performing cloud image display and capture with mobile devices | |
US8514326B2 (en) | Information processing apparatus, information processing method, program, and information processing system | |
US20160350595A1 (en) | Feedback based remote maintenance operations | |
US10924691B2 (en) | Control device of movable type imaging device and control method of movable type imaging device | |
TWI660304B (en) | Virtual reality real-time navigation method and system | |
CN102495712A (en) | Map splicing display method based on a plurality of display terminals | |
CN103344213A (en) | Method and device for measuring distance of double-camera | |
JP2012177769A (en) | Cooperative display system, cooperative display method, and portable terminal | |
CN110689580B (en) | Multi-camera calibration method and device | |
JP2015176578A (en) | Information processing system, information processing device, information processing program, and information processing method | |
WO2018113759A1 (en) | Detection system and detection method based on positioning system and ar/mr | |
CN103369354A (en) | Video playback system and related device for jointly displaying video with multiple screens | |
JP2015119277A5 (en) | ||
JP2017212510A (en) | Image management device, program, image management system, and information terminal | |
US20150163447A1 (en) | Method for generating images for multi-projection theater and image management apparatus using the same | |
WO2016072785A1 (en) | Direction based electronic device for displaying object and method thereof | |
KR20220070485A (en) | Automated video capture and compositing system | |
US20200413029A1 (en) | System for projecting naked-eye 3d image from selected 2d image | |
CN110505510B (en) | Video picture display method and device in large-screen system and storage medium | |
CN102354083A (en) | Realization method and device of 360-DEG circular screen projection | |
JP7287408B2 (en) | Display method, information processing device, and program | |
KR102490873B1 (en) | Method and system for providing fusion of concert and exhibition based concexhibition service for art gallery | |
CN206021866U (en) | 360 ° of ring curtain intelligence display systems | |
KR102443049B1 (en) | Electric apparatus and operation method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20140513 |