JP7219861B2 - 通信システム、通信方法及び通信プログラム - Google Patents

Description

本発明は、通信システム、通信方法及び通信プログラムに関する。

近年、仮想現実（ＶＲ：Virtual Reality）や拡張現実（ＡＲ：Augmented Reality）をユーザに体感させるＨＭＤ（Head Mounted Display）などが提案されている。このうち、ＡＲ技術を用いたＨＭＤとして、一般的な眼鏡と同様に、ユーザの頭部に装着して使用されるＡＲグラスが提案されている。

ＡＲグラスは、ユーザの前方の実空間を撮像し、撮像した実空間の画像を、ＡＲグラスのレンズ部分に相当するディスプレイに表示させる。また、ＡＲグラスは、ＣＧで生成された仮想的なコンテンツを、撮像された実空間の画像に重畳してディスプレイに表示させる。これにより、ＡＲグラスを装着したユーザは、実空間の中に仮想的なコンテンツが重畳されたＡＲ空間を体感することができる。

特許第６６５５７５１号公報

ＡＲグラスのディスプレイにＲＰＧ（Role－Playing Game）コンテンツを表示させることで、ＲＰＧをユーザに体験させるシステムが提案されている。ここで、このシステムでは、ＡＲグラスを装着したユーザ自身が実際に自分の体を動かしながらＲＰＧ体験を行うため、ＲＰＧの円滑な進行が可能であるＡＲ体験が要望されていた。

本発明は、上記に鑑みてなされたものであって、円滑な進行が可能である仮想空間上の体験をユーザに提供することを可能とする通信システム、通信方法及び通信プログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、ユーザが使用する表示装置と、ユーザが携帯するスマートデバイスと、スマートデバイスと通信を行うサーバとを有する通信システムであって、第１のユーザが携帯する第１のスマートデバイスは、第１のスマートデバイスが所定の領域の所定箇所に位置する場合、所定箇所に応じた種別の仮想的なコンテンツであって他のユーザの進行を補助する仮想的なコンテンツを作成し、作成した仮想的なコンテンツの登録をサーバに要求する作成部を有し、サーバは、第１のスマートデバイスから登録を要求された仮想的なコンテンツを、登録コンテンツとして、所定箇所の位置に対応付けて登録する登録部と、第１のユーザとは異なる第２のユーザが携帯する第２のスマートデバイスが所定箇所に位置することを判定した場合、第２のスマートデバイスに、所定箇所に対応付けられた登録コンテンツを送信する送信部と、第２のスマートデバイスは、サーバから送信された登録コンテンツを、第２のユーザが使用する表示装置に出力させる制御部を有することを特徴とする。

本発明によれば、円滑な進行が可能である仮想空間上の体験をユーザに提供することを可能とする。

図１は、ＡＲグラスのディスプレイに表示される画像の一例を示す図である。 図２は、実施の形態に係る通信システムの構成を説明する図である。 図３は、実施の形態に係る通信システムの構成の一例を示すブロック図である。 図４は、図３に示すＡＲグラスの構成の一例を示すブロック図である。 図５は、図３に示すスマートデバイスの構成の一例を示すブロック図である。 図６は、図３に示すサーバの構成の一例を示すブロック図である。 図７は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図８は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図９は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図１０は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図１１は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図１２は、通信システムにおける仮想的なコンテンツの作成例を説明する図である。 図１３は、実施の形態に係る通信処理の処理手順を示すシーケンス図である。 図１４は、プログラムを実行するコンピュータを示す図である。

以下に、本願に係る通信システム、通信方法及び通信プログラムの実施の形態を図面に基づいて詳細に説明する。なお、この実施の形態により本願に係る通信システム、通信方法及び通信プログラムが限定されるものではない。

以下の実施の形態では、実施の形態に係る通信システム、通信方法及び通信プログラムの処理の流れを順に説明し、最後に実施の形態による効果を説明する。

［実施の形態］
まず、実施の形態について説明する。実施の形態では、観光地である所定の領域（例えば、島）を観光するユーザに、ユーザが使用する表示装置として、例えば、仮想的なＲＰＧコンテンツを表示可能であるＡＲグラスを装着させ、観光地を観光しながら、ＲＰＧも体験可能とするシステムについて説明する。

図１は、ＡＲグラスのディスプレイに表示される画像の一例を示す図である。図１に例示するように、実際の島の画像に、例えば、敵であるモンスターのコンテンツＣ１やコインのコンテンツＣ２を重畳してＡＲグラスに表示させ、ユーザが、モンスターを倒す、コインを集める、ミッションに取り組むなどのゲーム体験を可能としている。また、ＡＲグラスを装着したユーザ間では、通信が可能である。

実施の形態では、小さな島全体を活用して、ユーザ自身が体を動かし、名所等を巡りながらイベントを実行する等の、その土地ならではのＲＰＧ体験を可能とする。さらに、実施の形態では、先行のユーザが、自身が携帯するスマートデバイスを操作することで、ＲＰＧの進行を補助する仮想的なコンテンツを作成し、このコンテンツを登録する。そして、後続のユーザは、先行のユーザが作成したコンテンツを認識することによって、ＲＰＧを円滑に進行することができる。

なお、先行のユーザは、島の所定箇所に応じた種別の仮想的なコンテンツを作成する。例えば、先行のユーザは、目的（例えば、ＲＰＧのイベント）の達成を補助する内容や、目的地（例えば、名所やＲＰＧのイベント発生場所）への到着を補助する内容を含む看板画像、コメント画像または音声の仮想的なコンテンツを、島の所定箇所に応じて作成する。

［通信システムの構成］
実施の形態に係る通信システムの構成を説明する。図２は、実施の形態に係る通信システムの構成を説明する図である。図３は、実施の形態に係る通信システムの構成の一例を示すブロック図である。

実施の形態では、例えば、観光地を観光しながらＲＰＧを体験するユーザＡ（第１のユーザ）とユーザＢ（第２のユーザ）とが通信システム１を利用する場合を例に説明する。図２及び図３に示すように、実施の形態に係る通信システム１は、ユーザＡ，Ｂがそれぞれ装着するＡＲグラス１０Ａ，１０Ｂ（表示装置）、ユーザＡ，Ｂがそれぞれ手に持つモーションコントローラー２０Ａ，２０Ｂ、ユーザＡ，Ｂがそれぞれ携帯するスマートデバイス３０Ａ，３０Ｂ、及び、データセンタ等に配置されるサーバ４０を有する。なお、実施の形態では、ＲＰＧの進行において、ユーザＡが先行するユーザとし、ユーザＢが後続のユーザとして説明する。

ＡＲグラス１０Ａは、一般的な眼鏡と同様にユーザＡの頭部に装着される。ＡＲグラス１０Ａは、撮像機能、音声入力機能、通信機能、表示機能、音声出力機能を有する。ＡＲグラス１０は、実空間を撮像し、撮像した実空間の画像を、ＡＲグラス１０Ａのレンズ部分に相当するディスプレイに表示させる。ＡＲグラス１０Ａは、スマートデバイス３０Ａの制御の基、ＣＧで生成された仮想的なコンテンツを、撮像された実空間の画像に重畳してディスプレイに表示させる。ＡＲグラス１０Ａは、スマートデバイス３０Ａの制御の基、仮想的なコンテンツ、例えば、ＲＰＧ要素である敵、味方、コイン等のキャラクター画像を表示する。また、ＡＲグラス１０Ａは、仮想的なコンテンツが音声である場合には、この音声を出力してもよい。

ＡＲグラス１０Ｂは、ユーザＢの頭部に装着され、ＡＲグラス１０Ａと同様の機能を有する。ＡＲグラス１０Ｂは、スマートデバイス３０Ｂの制御に従い各種処理を実行する。また、ＡＲグラス１０Ｂは、目的（例えば、ＲＰＧのイベント）の達成を補助する内容や、目的地（例えば、名所やＲＰＧのイベント発生場所）への到着を補助する内容を含む看板画像、コメント画像または音声の仮想的なコンテンツを表示する。なお、以降において、ＡＲグラス１０Ａ，１０Ｂを総称する場合、ＡＲグラス１０と記載する。

モーションコントローラー２０Ａは、ユーザＡが手に持つコントローラである。モーションコントローラー２０Ａは、例えば、加速度センサと、加速度センサの検出結果をスマートデバイス３０Ａに送信する通信機能とを有する。モーションコントローラー２０Ｂは、ユーザＢが手に持つコントローラであり、モーションコントローラー２０Ａと同様の機能を有する。モーションコントローラー２０Ｂは、加速度センサの検出結果をスマートデバイス３０Ｂに送信する。

スマートデバイス３０Ａは、ユーザＡが携帯するデバイスである。スマートデバイス３０Ａは、例えば、タブレット、スマートフォン等のスマートデバイスであり、位置検出機能、画像認識機能、音声認識機能を有する。スマートデバイス３０Ａは、ＡＲグラス１０Ａの制御を行う。スマートデバイス３０Ａは、モーションコントローラー２０Ａから送信された加速度センサの検出結果を基に、ユーザＡの手の動きを取得する。以降において、スマートデバイス３０Ａ，３０Ｂを総称する場合、スマートデバイス３０と記載する。

スマートデバイス３０Ａは、ネットワークＮを介して、サーバ４０に接続し、ユーザＡの位置情報等をサーバ４０に送信する。スマートデバイス３０Ａは、ネットワークＮを介して、サーバ４０から、ＡＲグラス１０Ａが出力する仮想的なコンテンツの提供を受ける。スマートデバイス３０Ａは、ＡＲグラス１０Ａに、サーバ４０から提供された仮想的なコンテンツを出力させる。

スマートデバイス３０Ａは、スマートデバイス３０Ａが所定の領域の所定箇所に位置する場合、所定箇所に応じた種別の仮想的なコンテンツであって、他のユーザＢの進行を補助する仮想的なコンテンツを作成し、作成した仮想的なコンテンツの登録をサーバ４０に要求する。

なお、スマートデバイス３０Ｂは、スマートデバイス３０Ａと同様の機能を有し、ＡＲグラス１０Ｂに、サーバ４０から提供された仮想的なコンテンツを出力させる。そして、スマートデバイス３０Ｂは、スマートデバイス３０Ａが所定の領域の所定箇所に位置する場合、この所定箇所に対応付けられた、ユーザＡに作成された仮想的なコンテンツをＡＲグラス１０Ｂに出力させる。

サーバ４０は、地図情報及びＡＲ空間上の仮想的なコンテンツを保持するとともに、仮想的なコンテンツを選択し、スマートデバイス３０に送信する。サーバ４０は、スマートデバイス３０Ａから登録を要求された仮想的なコンテンツを、登録コンテンツとして、所定箇所の位置に対応付けて登録する。サーバ４０は、スマートデバイス３０Ｂが所定箇所に位置することを判定した場合、スマートデバイス３０Ｂに、所定箇所に対応付けられた登録コンテンツを送信する。

［ＡＲグラス］
次に、ＡＲグラス１０Ａについて説明する。図４は、図３に示すＡＲグラス１０Ａの構成の一例を示すブロック図である。なお、ＡＲグラス１０Ｂは、ＡＲグラス１０Ａと同様の構成を有する。

図４に示すように、ＡＲグラス１０は、撮像部１１、音声入力部１２（録音部）、通信部１３、表示部１４及び音声出力部１５を有する。

撮像部１１は、実空間を撮像する。例えば、撮像部１１は、撮像部１１の撮像方向がＡＲグラス１０の前方である場合には、ＡＲグラス１０の前方の実空間を撮像する。撮像部１１は、ＣＣＤやＣＭＯＳ等の光電変換素子と、撮像素子から出力される光電変換信号を処理して実空間の画像を生成する。撮像部１１は、例えば、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の３色の２次元画像を取得する。

音声入力部１２は、音声の入力を受け付け、入力された音声を録音するデバイスによって構成される。

通信部１３は、スマートデバイス３０との無線通信を行う。通信部１３は、撮像部１１が撮像した画像及び音声入力部１２が録音した音声を、スマートデバイス３０に送信する。通信部１３は、スマートデバイス３０から送信された仮想的なコンテンツを受信する。また、通信部１３は、他のユーザが装着するＡＲグラス１０との間で通信を行い、ユーザ間での会話を可能とする。

表示部１４は、ディスプレイによって構成される。表示部１４は、撮像部１１が撮像した実空間の画像を表示する。表示部１４は、通信部１３が受信した仮想的なコンテンツ、例えば、敵、味方、コイン等のキャラクター画像を、実空間の画像に重畳して表示する。なお、表示部１４は、透過表示可能なディスプレイであって、仮想的なコンテンツのうち、敵、味方、コイン等のキャラクター画像を表示してもよい。

音声出力部１５は、音声を出力する。音声出力部１５は、通信部が受信した仮想的なコンテンツのうち、動物の鳴き声や足音等の音声を出力する。

［スマートデバイス］
次に、スマートデバイス３０Ａについて説明する。図５は、図３に示すスマートデバイス３０Ａの構成の一例を示すブロック図である。なお、スマートデバイス３０Ｂは、スマートデバイス３０Ａと同様の構成を有する。図５に示すように、スマートデバイス３０は、通信部３１、記憶部３２及び制御部３３を有する。

通信部３１は、無線または有線にて他の装置との間で通信を行う。通信部３１は、ネットワーク等を介して接続された他の装置との間で、各種情報を送受信する通信インタフェースである。通信部３１は、ＮＩＣ（Network Interface Card）等で実現され、ＬＡＮ（Local Area Network）やインターネットなどの電気通信回線を介した他の装置と制御部３３（後述）との間の通信を行う。例えば、通信部３１は、ＡＲグラス１０Ａから画像、音声を受信し、ＡＲグラス１０Ａに仮想的なコンテンツを送信する。通信部３１は、サーバ４０に、スマートデバイス３０Ａの位置情報を送信し、サーバ４０から仮想的なコンテンツを受信する。

記憶部３２は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、光ディスク等の記憶装置である。なお、記憶部３２は、ＲＡＭ（Random Access Memory）、フラッシュメモリ、ＮＶＳＲＡＭ（Non Volatile Static Random Access Memory）等のデータを書き換え可能な半導体メモリであってもよい。記憶部３２は、スマートデバイス３０Ａで実行されるＯＳ（Operating System）や各種プログラムを記憶する。さらに、記憶部３２は、プログラムの実行で用いられる各種情報を記憶する。記憶部３２は、サーバ４０から送信された仮想的なコンテンツや、スマートデバイス３０Ａにおいて作成された仮想的なコンテンツを含むコンテンツ情報３２１を記憶する。記憶部３２は、ＡＲグラス１０Ａから送信された画像データ（不図示）を記憶する。

制御部３３は、スマートデバイス３０Ａ全体を制御する。制御部３３は、例えば、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）等の電子回路や、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）等の集積回路である。また、制御部３３は、各種の処理手順を規定したプログラムや制御データを格納するための内部メモリを有し、内部メモリを用いて各処理を実行する。また、制御部３３は、各種のプログラムが動作することにより各種の処理部として機能する。制御部３３は、位置検出部３３１、動き検出部３３２及びＡＲグラス制御部３３３（制御部）を有する。

位置検出部３３１は、スマートデバイス３０Ａの位置を検出する。位置検出部３３１は、例えば、ＧＰＳ（Global Positioning System）等によりスマートデバイス３０Ａの位置情報が取得可能である。位置検出部３３１は、定期的に、スマートデバイス３０Ａの位置を取得して、緯度及び経度で表した位置情報を、通信部３１を介して、サーバ４０に送信する。

動き検出部３３２は、モーションコントローラー２０Ａから送信された加速度センサの検出結果を基に、ユーザの手の動きを取得する。なお、通信システム１では、モーションコントローラー２０の使用はオプションでもよい。モーションコントローラー２０を使用しない場合には、スマートデバイス３０から動き検出部３３２を省略してもよい。

ＡＲグラス制御部３３３は、ＡＲグラス１０Ａの処理を制御する。例えば、ＡＲグラス制御部３３３は、ＡＲグラス１０Ａのレンズ部のディスプレイへの画像表示処理やＡＲグラス１０Ａによる音声出力処理を制御する。ＡＲグラス制御部３３３は、コンテンツ作成部３３４（作成部）及びコンテンツ合成部３３５を有する。

コンテンツ作成部３３４は、スマートデバイス３０Ａが所定の領域の所定箇所に位置する場合、所定箇所に応じた種別の仮想的なコンテンツであって他のユーザＢの進行を補助する仮想的なコンテンツを作成する。そして、コンテンツ作成部３３４は、作成した仮想的なコンテンツの登録をサーバ４０に要求する。

コンテンツ合成部３３５は、サーバ４０から送信された仮想的なコンテンツが、実空間の画像に重畳するキャラクター画像である場合、キャラクター画像と実空間の画像との合成処理を行う。コンテンツ合成部３３５による合成処理後、ＡＲグラス制御部３３３は、ＡＲグラス１０Ａの表示部１４に、実空間の画像にキャラクター画像を重畳させた画像を表示させる。キャラクター画像の重畳位置は、例えば、予め設定されている。或いは、キャラクター画像の重畳位置は、サーバ４０による指示によって設定される。

また、仮想的なコンテンツは、ＲＰＧ要素である敵、味方、コイン等のキャラクター画像のほか、動物の鳴き声や足音等の音声であってもよい。ＡＲグラス制御部３３３は、取得したコンテンツが、動物の鳴き声や足音等の音声である場合、ＡＲグラス１０Ａの音声出力部１５から、音声を出力させる。

［サーバ］
次に、サーバ４０について説明する。図６は、図３に示すサーバ４０の構成の一例を示すブロック図である。図６に示すように、サーバ４０は、通信部４１、記憶部４２及び制御部４３を有する。

通信部４１は、無線または有線にて他の装置との間で通信を行う。通信部４１は、ネットワーク等を介して接続された他の装置との間で、各種情報を送受信する通信インタフェースである。通信部４１は、ＮＩＣ等で実現され、ＬＡＮやインターネットなどの電気通信回線を介した他の装置と制御部４３後述）との間の通信を行う。例えば、通信部４１は、スマートデバイス３０Ａ，３０Ｂから位置情報を受信し、スマートデバイス３０Ａ，３０Ｂに仮想的なコンテンツを送信する。

記憶部４２は、ＨＤＤ、ＳＳＤ、光ディスク等の記憶装置である。なお、記憶部４２は、ＲＡＭ、フラッシュメモリ、ＮＶＳＲＡＭ等のデータを書き換え可能な半導体メモリであってもよい。記憶部４２は、サーバ４０で実行されるＯＳや各種プログラムを記憶する。

さらに、記憶部４２は、プログラムの実行で用いられる各種情報を記憶する。記憶部４２は、地図情報４２１、コンテンツ情報４２２及び作成用コンテンツ情報４２３を記憶する。

地図情報４２１は、ユーザが観光する島等の観光地の森、川、山、平野、名所等を含む地図である。地図情報４２１は、等高線で土地の高低が示される。

コンテンツ情報４２２は、各種仮想的なコンテンツを含む。各種仮想的なコンテンツは、敵、味方、コイン等のキャラクター画像、または、動物の足音或いは鳴き声の音声である。敵、味方、コイン等のキャラクター画像は、出現させる位置が予め設定されている。敵、味方のキャラクター画像は、強さが予め設定されている。また、仮想的なコンテンツは、所定の地域（観光地）や、観光地の森、川、山、平野、名所等の各所定箇所に対応づけて予め作成された、観光地の各所定箇所に特有のコンテンツであってもよい。また、観光地の各所定箇所に特有のコンテンツは、敵または味方に分けて、それぞれ作成されたものでもよい。

そして、コンテンツ情報４２２は、スマートデバイス３０Ａから登録を要求された仮想的なコンテンツである登録コンテンツを含む。スマートデバイス３０Ａから登録を要求された仮想的なコンテンツは、所定箇所に位置するスマートデバイス３０Ａによって作成及び登録を要求された、所定箇所に応じた種別の仮想的なコンテンツであって他のユーザＢの進行を補助する仮想的なコンテンツである。

作成用コンテンツ情報４２３は、所定の領域（例えば、島等の観光地）のうち、ユーザが仮想的なコンテンツを作成可能である所定箇所の位置情報と、所定箇所に応じた仮想的なコンテンツの種別とを含む。所定箇所は、例えば、ユーザＢの目的地までの道なりのうちの分かれ道や、目的地までの行き方が分かりにくい箇所である。目的地は、例えば、島等の観光地の名所やＲＰＧのイベント発生場所などである。所定箇所に応じた仮想的なコンテンツの種別は、看板画像、コメント画像または音声のコンテンツである。例えば、ゲーム上のイベント発生場所や分かれ道の場合には、看板画像、コメント画像のコンテンツが設定されており、森や川などの場合には、動植物のキャラクター画像や音声のコンテンツである。

制御部４３は、サーバ４０全体を制御する。制御部４３は、例えば、ＣＰＵ、ＭＰＵ等の電子回路や、ＡＳＩＣ、ＦＰＧＡ等の集積回路である。また、制御部４３は、各種の処理手順を規定したプログラムや制御データを格納するための内部メモリを有し、内部メモリを用いて各処理を実行する。また、制御部４３は、各種のプログラムが動作することにより各種の処理部として機能する。制御部４３は、判定部４３１、コンテンツ登録部４３２（登録部）及びコンテンツ送信部４３３（送信部）を有する。

判定部４３１は、少なくとも、スマートデバイス３０Ａから受信したスマートデバイス３０Ａの各位置情報、地図情報４２１及び作成用コンテンツ情報４２３を基に、スマートデバイス３０Ａが所定箇所に位置するかを判定する。判定部４３１は、スマートデバイス３０Ａが所定箇所に位置する場合、作成可能なコンテンツの種別とともに、他のユーザＢ
他のユーザＢの進行を補助する仮想的なコンテンツが可能であることをスマートデバイス３０Ａに通知する。また、判定部４３１は、スマートデバイス３０Ｂが、所定箇所に位置するか否かを判定する。

コンテンツ登録部４３２は、スマートデバイス３０Ａから登録を要求された仮想的なコンテンツを、登録コンテンツとして、所定箇所の位置に対応付けて、コンテンツ情報４２２に登録する。

コンテンツ送信部４３３は、判定部４３１が、スマートデバイス３０Ｂが所定箇所に位置することを判定した場合、コンテンツ情報４２２のうち、所定箇所に対応付けられた登録コンテンツを抽出し、スマートデバイス３０Ｂに送信する。スマートデバイス３０ＢのＡＲグラス制御部３３３は、サーバ４０から送信された登録コンテンツをＡＲグラス１０Ｂに出力させる。

［コンテンツ作成例］
図７～図１２は、通信システム１における仮想的なコンテンツの作成例を説明する図である。まず、図７では、図７左方のマップＭ１の地点Ｐ１に、ＲＰＧ上の宝があり、地点Ｐ１の宝を見つけることでイベントを達成できる場合を例として説明する。

この地点Ｐ１において、ユーザＵ１が宝を見つけた場合、ユーザＵ１は、自身のスマートデバイス３０を操作し、後続のユーザＵ２に向けて、「ここにお宝があるよ！」と示した看板画像Ｃ１１のコンテンツをＡＲ空間上に作成することができる（図７の（１））。この看板画像Ｃ１１は、サーバ４０によって、地点Ｐ１に対応付けて登録コンテンツとして登録される（図７の（２））。続いて、後続のユーザＵ２が地点Ｐ１に到着すると、このユーザＢのスマートデバイス３０にサーバ４０から看板画像Ｃ１１が送信され、ユーザＵ２のＡＲグラス１０に看板画像Ｃ１１が表示される。これよって、ユーザＵ２は、看板画像Ｃ１１のコンテンツを閲覧することができる（図７の（３））。

これに限らず、先行のユーザは、敵キャラクターがいる場所に対し、スマートデバイス３０を用いて、後続のユーザに、敵がいることを知らせる看板画像のコンテンツをＡＲ空間上に作成してもよい。また、先行のユーザは、イベントが謎解きイベントの場合には、イベント場所に対応付けて、謎を解く際のヒントとなる看板画像のコンテンツをＡＲ空間上に作成してもよい。先行のユーザは、「あちらに綺麗な〇〇があるよ」といった、他のユーザへのおすすめ情報を掲示してもよい。その際、通信システム１では、例えば、掲示板画像のコンテンツを所定箇所に設定し、ユーザが、仮想空間上で、その掲示板におすすめ情報を書き込めるようにしてもよい。また、通信システム１では、掲示板画像のコンテンツに記載された情報を、一定期間、一定条件でクリアするように制御してもよい。

このような看板画像Ｃ１１や掲示板画像コンテンツのように、ユーザＵ１のスマートデバイス３０は、後続のユーザＵ２が閲覧可能な、ユーザＵ２の目的（例えば、ＲＰＧのイベント）の達成を補助する内容を含む仮想的なコンテンツを作成することができる。

また、先行のユーザＵ１のスマートデバイス３０は、後続のユーザＵ２の目的地への到着を補助する内容を含む仮想的なコンテンツを作成することも可能である。

例えば、ユーザＵ１のスマートデバイス３０Ａは、目的地までの道なりのうちの分かれ道に位置する場合、目的地が、分かれ道のいずれの道の先にあるかを示す仮想的なコンテンツを作成する。

具体的に、図８に示すように、目的地までの道なりのうち、分かれ道があった場合を例に説明する。この場合、先行のユーザＵ３は、自身のスマートデバイス３０を操作して、図９に例示するように、後続のユーザのために、分かれ道のそれぞれの行き先を示す看板画像Ｃ２１，Ｃ２２のコンテンツを作成してもよい。また、先行のユーザＵ３は、イベント発生場所である「滝」を示す看板画像Ｃ２１のみを作成してもよい。このように、ユーザＵ３は、分かれ道に、各道の先にある名所やイベント発生場所を示す看板画像を作成して、後続のユーザの目的地への到着を補助する。

また、ユーザＵ３は、自身のスマートデバイス３０を操作して、図１０に示すように、分かれ道の各行き先を示す実際の看板Ｔ３１，Ｔ３２に対応付けて、それぞれの行き先の詳細を説明するコメントを含むコメント画像Ｃ３１，Ｃ３２のコンテンツを作成してもよい。

例えば、ユーザＵ３は、看板Ｔ３１に対し「ここで唯一の滝があるよ」というコメントを含むコメント画像Ｃ３２や、看板Ｔ３２に対し「希少種の花畑があるよ」というコメントを含むコメント画像Ｃ３２を作成してもよい。このように、ユーザＵ３は、分かれ道の各看板に、その先にある名所を説明するコメント画像を作成して、後続のユーザが目的地とする名所やイベント発生場所への到着を補助する。

また、ユーザＵ３は、自身のスマートデバイス３０を操作して、図１１に示すように、分かれ道の各行き先に対する各ユーザが付与したＧＯＯＤの数を表示するコメント画像Ｃ４１，Ｃ４２のコンテンツを作成してもよい。

例えば、看板Ｔ３１が指す左の道が５７人のユーザによってＧＯＯＤを付与されていた場合、ユーザＵ３は、看板Ｔ３１に対し「左の道は５７人おすすめ」というコメント画像Ｃ３２のコンテンツを作成してもよい。看板Ｔ３２が指す右の道が１４人のユーザによってＧＯＯＤを付与されていた場合、ユーザＵ３は、看板Ｔ３２に対し「右の道は１４人おすすめ」というコメント画像Ｃ３２のコンテンツを作成してもよい。なお、サーバ４０は、分かれ道の各道に各ユーザが付与したＧＯＯＤを集計し、コンテンツ作成時にユーザＵ３に通知する。

また、ユーザＵ１のスマートデバイス３０Ａは、目的地までの行き方が分かりにくい箇所に位置する場合、目的地までの行き方を示す仮想的なコンテンツを作成することも可能である。

具体的には、図１２に示すように、先行のユーザは、目的地である滝までの行き方が分かりにくい森の中に、お助けキャラクターとして、鳥のキャラクター画像Ｃ５１のコンテンツと、「道なりに３００ｍで滝に着くよ」というコメント画像Ｃ５２のコンテンツとを作成してもよい。後続のユーザＵ４，Ｕ５は、鳥のキャラクター画像Ｃ５１とコメント画像Ｃ５２とのコンテンツとをＡＲ空間上で視認することによって、目的地である滝まで円滑に到着することが可能になる。

このように、ユーザＵ３は、目的地までの行き方が分かりにくい箇所に位置に、目的地までの行き方を示す画像のコンテンツを作成して、後続のユーザが目的地とする名所やイベント発生場所への到着を補助する。

なお、先行のユーザのスマートデバイス３０Ａは、画像のコンテンツに限らず、音声のコンテンツを作成することも可能である。

例えば、先行のユーザは、鳥のキャラクター画像Ｃ５１のコンテンツとともに、「道なりに３００ｍで滝に着くよ」という音声のコンテンツを作成してもよい。この際、先行のユーザは、テキスト入力することでコメントの内容を登録するほか、自身の音声を、自身のスマートデバイス３０に入力することでコメントの内容を登録することも可能である。音声は、サーバ４０によって、鳥のキャラクター画像Ｃ５１に対応する音声に変換される。また、鳥のキャラクター画像Ｃ５１は、この森に生息する希少な種の鳥のキャラクター画像であってもよい。また、キャラクター画像Ｃ５１は、ゲームキャラクター風の画像に限らず、写真等から作成した画像でもよく、動画も含まれる。

上記の例に限らず、通信システム１では、名物の食べ物を食べるというイベントがある場合には、イベントの内容を示す看板画像や、その食べ物が売っている場所を示す看板画像のコンテンツを先行のユーザが作成可能である。このように、通信システム１では、先行のユーザが、イベント達成を補助するためのコンテンツをＡＲ空間上に作成できるように制御する。

［通信処理の処理手順］
図１３は、実施の形態に係る通信処理の処理手順を示すシーケンス図である。図１３に示すように、サーバ４０は、地図情報４２１、コンテンツ情報４２２及び作成用コンテンツ情報４２３を参照する（ステップＳ１，Ｓ２）。

スマートデバイス３０Ａは、スマートデバイス３０Ａの位置を検出し（ステップＳ３）、サーバ４０に、スマートデバイス３０Ａの位置情報を送信する（ステップＳ４）。サーバ４０は、受信した位置情報と地図情報４２１とを基にユーザＡのスマートデバイス３０Ａの位置を判定する（ステップＳ５）。

サーバ４０は、スマートデバイス３０Ａの位置は、コンテンツが作成可能である所定箇所の位置であるかを判定する（ステップＳ６）。スマートデバイス３０Ａの位置が、コンテンツが作成可能である位置ではない場合（ステップＳ６：Ｎｏ）、サーバ４０は、スマートデバイス３０Ａの位置情報受信処理に戻り、ステップＳ５の処理を行う。

スマートデバイス３０Ａの位置が、コンテンツが作成可能である所定箇所の位置である場合（ステップＳ６：Ｙｅｓ）、サーバ４０は、所定箇所に応じたコンテンツの種別とともに、他のユーザＢの進行を補助する仮想的なコンテンツが可能であることをスマートデバイス３０Ａに通知する（ステップＳ７）。

スマートデバイス３０Ａは、コンテンツ作成可能通知を受けて、コンテンツを作成するか否かを判定する（ステップＳ８）。例えば、スマートデバイス３０Ａは、コンテンツ作成可能通知とコンテンツ作成画面とを表示し、ユーザＡによるスマートデバイス３０Ａの操作により、コンテンツ作成画面に作成開始指示が入力された場合に、コンテンツを作成すると判定する。スマートデバイス３０Ａは、コンテンツを作成しないと判定した場合（ステップＳ８：Ｎｏ）、ステップＳ３に戻り位置検出処理を行う。

スマートデバイス３０Ａは、コンテンツを作成すると判定した場合（ステップＳ８：Ｙｅｓ）、作成可能なコンテンツの種別を読み出し（ステップＳ９）、読み出したコンテンツの種別を選択可能に表示する。

スマートデバイス３０Ａは、ユーザＡの操作によって、コンテンツの種別が選択されると（ステップＳ１０）、テキストの入力画面を表示する。そして、スマートデバイス３０Ａは、ユーザＡの操作によって、テキストの入力が行われると（ステップＳ１１）、選択された種別のコンテンツであって、入力されたテキストの内容を含むコンテンツの登録をサーバ４０に要求する（ステップＳ１２，Ｓ１３）。なお、テキストは、目的（例えば、ＲＰＧのイベント）の達成を補助する内容や、目的地（例えば、名所やＲＰＧのイベント発生場所）への到着を補助する内容を示すものである。

サーバ４０は、スマートデバイス３０Ａから登録を要求された仮想的なコンテンツを、登録コンテンツとして、コンテンツ情報４２２に登録する（ステップＳ１４）。サーバ４０は、登録を要求された仮想的なコンテンツを、スマートデバイス３０Ａが位置する、所定箇所の位置に対応付けて登録する。

続いて、後続のユーザＢのスマートデバイス３０Ｂは、スマートデバイス３０Ｂの位置を検出し（ステップＳ１５）、サーバ４０に、スマートデバイス３０Ｂの位置情報を送信する（ステップＳ１６）。サーバ４０は、受信した位置情報と地図情報４２１とを基に、ユーザＢのスマートデバイス３０Ｂの位置を判定する（ステップＳ１７）。

サーバ４０は、スマートデバイス３０Ｂの位置に、先行のユーザＡが作成した仮想的なコンテンツが登録されているか否かを判定する（ステップＳ１８）。すなわち、サーバ４０は、スマートデバイス３０Ｂが、ユーザＡが作成した仮想的なコンテンツが登録されている所定箇所に位置するか否かを判定する。スマートデバイス３０Ｂの位置に、先行のユーザＡが作成したコンテンツが登録されていない場合（ステップＳ１８：Ｎｏ）、サーバ４０は、スマートデバイス３０Ｂの位置情報受信処理に戻り、ステップＳ１７の処理を行う。

スマートデバイス３０Ｂの位置に、先行のユーザＡが作成したコンテンツが登録されている場合（ステップＳ１８：Ｙｅｓ）、この所定箇所に対応付けられた登録コンテンツを、スマートデバイス３０Ｂに送信する（ステップＳ１９）。

スマートデバイス３０Ｂは、登録コンテンツが、キャラクター画像である場合、キャラクター画像と実空間の画像との合成処理を行う（ステップＳ２０）。そして、スマートデバイス３０Ｂは、ＡＲグラス１０Ｂに、登録コンテンツの出力を指示し（ステップＳ２１）、例えば、看板画像、コメント画像或いは音声である登録コンテンツを、ＡＲグラス１０Ｂから出力させる（ステップＳ２２）。

［実施の形態の効果］
実施の形態では、先行のユーザＡは、観光地等の所定領域の所定箇所に位置する場合、ユーザＡが携帯するスマートデバイス３０Ａを介して、所定箇所に応じた種別の仮想的なコンテンツであって他のユーザの進行を補助する仮想的なコンテンツを作成し、登録する。後続のユーザＢは、所定箇所に差し掛かった際に、ＡＲグラス１０Ｂから出力された、ユーザＡによる登録コンテンツを確認することによって、ＲＰＧを円滑に進行することができる。

実施の形態では、例えば、先行のユーザＡは、スマートデバイス３０Ａを介して、看板画像、コメント画像または音声の仮想的なコンテンツを、観光地等の所定箇所に応じて作成する。これらの仮想的なコンテンツは、ユーザＢの目的（例えば、ＲＰＧのイベント）の達成を補助する内容や、目的地（例えば、名所やＲＰＧのイベント発生場所）への到着を補助する内容を含むコンテンツである。具体的には、これらの仮想的なコンテンツは、目的地が分かれ道のいずれの道の先にあるかを示すものや、行き方が分かりにくい目的地までの行き方を示すコンテンツである。

このため、ユーザＢは、所定箇所に差し掛かった際に、ＡＲグラス１０Ｂから出力された、ユーザＡによる登録コンテンツを確認することによって、ＲＰＧのイベント等の目的を円滑に達成でき、名所やＲＰＧのイベント発生場所等の目的地へ迅速に到着できる。

このように、実施の形態では、先行のユーザＡによって、後続のユーザＢの進行の補助となるような看板画像、コメント画像、音声等のコンテンツが登録コンテンツとして所定箇所に配置されることで、ユーザＢに、ＲＰＧの円滑な進行が可能である仮想空間上のＡＲ体験の提供を可能とする。

なお、本実施の形態では、先行のユーザＡが仮想的なコンテンツを作成する場合を例に説明したが、ユーザＢ等のいずれのユーザもコンテンツの作成が可能である。また、後続のユーザは、ユーザＢに限らず、ユーザＢ以外のいずれのユーザもコンテンツを確認することが可能である。

［システム構成等］
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵやＧＰＵ及び当該ＣＰＵやＧＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。

また、本実施形態において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。

［プログラム］
また、上記実施形態において説明したＡＲグラス１０、スマートデバイス３０及びサーバ４０及びが実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。例えば、実施形態におけるＡＲグラス１０、スマートデバイス３０及びサーバ４０が実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。この場合、コンピュータがプログラムを実行することにより、上記実施形態と同様の効果を得ることができる。さらに、かかるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータに読み込ませて実行することにより上記実施形態と同様の処理を実現してもよい。

図１４は、プログラムを実行するコンピュータを示す図である。図１４に例示するように、コンピュータ１０００は、例えば、メモリ１０１０と、ＣＰＵ１０２０と、ハードディスクドライブインタフェース１０３０と、ディスクドライブインタフェース１０４０と、シリアルポートインタフェース１０５０と、ビデオアダプタ１０６０と、ネットワークインタフェース１０７０とを有し、これらの各部はバス１０８０によって接続される。

メモリ１０１０は、図１４に例示するように、ＲＯＭ（Read Only Memory）１０１１及びＲＡＭ１０１２を含む。ＲＯＭ１０１１は、例えば、ＢＩＯＳ（Basic Input Output System）等のブートプログラムを記憶する。ハードディスクドライブインタフェース１０３０は、図１４に例示するように、ハードディスクドライブ１０９０に接続される。ディスクドライブインタフェース１０４０は、ディスクドライブ１１００に接続される。例えば磁気ディスクや光ディスク等の着脱可能な記憶媒体が、ディスクドライブ１１００に挿入される。シリアルポートインタフェース１０５０は、例えばマウス１１１０、キーボード１１２０に接続される。ビデオアダプタ１０６０は、例えばディスプレイ１１３０に接続される。

ここで、図１４に例示するように、ハードディスクドライブ１０９０は、例えば、ＯＳ１０９１、アプリケーションプログラム１０９２、プログラムモジュール１０９３、プログラムデータ１０９４を記憶する。すなわち、上記の、プログラムは、コンピュータ１０００によって実行される指令が記述されたプログラムモジュールとして、例えばハードディスクドライブ１０９０に記憶される。

また、上記実施形態で説明した各種データは、プログラムデータとして、例えばメモリ１０１０やハードディスクドライブ１０９０に記憶される。そして、ＣＰＵ１０２０が、メモリ１０１０やハードディスクドライブ１０９０に記憶されたプログラムモジュール１０９３やプログラムデータ１０９４を必要に応じてＲＡＭ１０１２に読み出し、各種処理手順を実行する。

なお、プログラムに係るプログラムモジュール１０９３やプログラムデータ１０９４は、ハードディスクドライブ１０９０に記憶される場合に限られず、例えば着脱可能な記憶媒体に記憶され、ディスクドライブ等を介してＣＰＵ１０２０によって読み出されてもよい。あるいは、プログラムに係るプログラムモジュール１０９３やプログラムデータ１０９４は、ネットワーク（ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等）を介して接続された他のコンピュータに記憶され、ネットワークインタフェース１０７０を介してＣＰＵ１０２０によって読み出されてもよい。

上記の実施形態やその変形は、本願が開示する技術に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１０，１０Ａ，１０Ｂ ＡＲグラス
１１ 撮像部
１２ 音声入力部
１３，３１，４１ 通信部
１４ 表示部
１５ 音声出力部
２０Ａ，２０Ｂ モーションコントローラー
３０，３０Ａ，３０Ｂ スマートデバイス
３２，４２ 記憶部
３３，４３ 制御部
４０ サーバ
３２１，４２２ コンテンツ情報
３３１ 位置検出部
３３２ 動き検出部
３３３ ＡＲグラス制御部
３３４ コンテンツ作成部
３３５ コンテンツ合成部
４２１ 地図情報
４２３ 作成用コンテンツ情報
４３１ 判定部
４３２ コンテンツ登録部
４３３ コンテンツ送信部

Claims (6)

1. ユーザが使用する表示装置と、前記ユーザが携帯するスマートデバイスと、スマートデバイスと通信を行うサーバとを有する通信システムであって、
   第１のユーザが携帯する第１の前記スマートデバイスは、
   前記第１のスマートデバイスが所定の領域の所定箇所に位置する場合、前記所定箇所に応じた種別の仮想的なコンテンツであって他のユーザの進行を補助する仮想的なコンテンツを作成し、作成した前記仮想的なコンテンツの登録を前記サーバに要求する作成部
   を有し、
   前記サーバは、
   前記第１のスマートデバイスから登録を要求された仮想的なコンテンツを、登録コンテンツとして、前記所定箇所の位置に対応付けて登録する登録部と、
   前記第１のユーザとは異なる第２のユーザが携帯する第２の前記スマートデバイスが前記所定箇所に位置することを判定した場合、前記第２のスマートデバイスに、前記所定箇所に対応付けられた前記登録コンテンツを送信する送信部と、
   を有し、
   前記第２のスマートデバイスは、
   前記サーバから送信された前記登録コンテンツを、前記第２のユーザが使用する表示装置に出力させる制御部
   を有し、
   前記サーバは、前記第１の前記スマートデバイスが、所定の分かれ道に位置する場合に、前記分かれ道の各道に各ユーザが付与したＧＯＯＤを集計し、前記第１のスマートデバイスに通知し、
   前記作成部は、前記分かれ道の各行き先に対してＧＯＯＤを付与したユーザ数を基に、前記ＧＯＯＤを付与した数のユーザがおすすめ、であるコンテンツを行き先ごとに作成することを特徴とする通信システム。
2. 前記作成部は、前記第２のユーザの目的の達成を補助する内容を含む前記仮想的なコンテンツを作成することを特徴とする請求項１に記載の通信システム。
3. 前記作成部は、前記第２のユーザの目的地への到着を補助する内容を含む前記仮想的なコンテンツを作成することを特徴とする請求項２に記載の通信システム。
4. 前記作成部は、前記仮想的なコンテンツとして、看板画像、コメント画像または音声のコンテンツを作成することを特徴とする請求項１～３のいずれか一つに記載の通信システム。
5. ユーザが使用する表示装置と、前記ユーザが携帯するスマートデバイスと、スマートデバイスと通信を行うサーバとを有する通信システムが実行する通信方法であって、
   第１のユーザが携帯する第１の前記スマートデバイスが、前記第１のスマートデバイスが所定の領域の所定箇所に位置する場合、前記所定箇所に応じた種別の仮想的なコンテンツであって他のユーザの進行を補助する仮想的なコンテンツを作成し、作成した前記仮想的なコンテンツの登録を前記サーバに要求する工程と、
   前記サーバが、前記第１の前記スマートデバイスが、所定の分かれ道に位置する場合に、前記分かれ道の各道に各ユーザが付与したＧＯＯＤを集計し、前記第１のスマートデバイスに通知する工程と、
   前記サーバが、前記要求する工程において登録を要求された仮想的なコンテンツを、登録コンテンツとして、前記所定箇所の位置に対応付けて登録する工程と、
   前記サーバが、前記第１のユーザとは異なる第２のユーザが携帯する第２のスマートデバイスが前記所定箇所に位置することを判定した場合、前記第２のスマートデバイスに、前記所定箇所に対応付けられた前記登録コンテンツを送信する工程と、
   前記第２のスマートデバイスが、前記サーバから送信された前記登録コンテンツを前記第２のユーザが使用する表示装置に出力させる工程と、
   を含み、
   前記要求する工程は、前記分かれ道の各行き先に対してＧＯＯＤを付与したユーザ数を基に、前記ＧＯＯＤを付与した数のユーザがおすすめ、であるコンテンツを行き先ごとに作成することを特徴とする通信方法。
6. 方法をコンピュータに実行させる通信プログラムであって、
   第１のユーザが携帯する第１のスマートデバイスとしてのコンピュータに、
   前記第１のスマートデバイスが所定の領域の所定箇所に位置する場合、前記所定箇所に応じた種別の仮想的なコンテンツであって他のユーザの進行を補助する仮想的なコンテンツを作成し、作成した前記仮想的なコンテンツの登録をサーバに要求するステップ
   を実行させ、
   サーバとしてのコンピュータに、
   前記第１の前記スマートデバイスが、所定の分かれ道に位置する場合に、前記分かれ道の各道に各ユーザが付与したＧＯＯＤを集計し、前記第１のスマートデバイスに通知するステップと、
   前記要求するステップにおいて登録を要求された仮想的なコンテンツを、登録コンテンツとして、前記所定箇所の位置に対応付けて登録するステップと、
   前記第１のユーザとは異なる第２のユーザが携帯する第２のスマートデバイスが前記所定箇所に位置することを判定した場合、前記第２のスマートデバイスに、前記所定箇所に対応付けられた前記登録コンテンツを送信するステップと、
   を実行させ、
   前記第２のスマートデバイスとしてのコンピュータに、
   前記サーバから送信された前記登録コンテンツを前記第２のユーザが使用する表示装置に出力させるステップ
   を実行させ、
   前記要求するステップは、前記分かれ道の各行き先に対してＧＯＯＤを付与したユーザ数を基に、前記ＧＯＯＤを付与した数のユーザがおすすめ、であるコンテンツを行き先ごとに作成することを特徴とする通信プログラム。

Images