JP6658799B2 - 端末装置及びプログラム - Google Patents

端末装置及びプログラム Download PDF

Info

Publication number
JP6658799B2
JP6658799B2 JP2018110601A JP2018110601A JP6658799B2 JP 6658799 B2 JP6658799 B2 JP 6658799B2 JP 2018110601 A JP2018110601 A JP 2018110601A JP 2018110601 A JP2018110601 A JP 2018110601A JP 6658799 B2 JP6658799 B2 JP 6658799B2
Authority
JP
Japan
Prior art keywords
event
video
user
display
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018110601A
Other languages
English (en)
Other versions
JP2019212236A (ja
Inventor
グアイタ ダビッド ロペス
グアイタ ダビッド ロペス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
Sega Corp
Sega Games Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sega Corp, Sega Games Co Ltd filed Critical Sega Corp
Priority to JP2018110601A priority Critical patent/JP6658799B2/ja
Publication of JP2019212236A publication Critical patent/JP2019212236A/ja
Application granted granted Critical
Publication of JP6658799B2 publication Critical patent/JP6658799B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は端末装置及びプログラムに関する。
例えば携帯端末の位置情報を利用した、いわゆる位置利用ゲーム(位置登録ゲーム、位置ゲーム)が知られている。従来、複数の携帯端末を有する情報処理システムで行われる位置利用ゲームでは、位置情報に応じた事象(イベント)が特定され、特定された事象に応じた処理が行われるものがあった。また、2台以上の携帯端末が近距離無線通信の範囲内に入った場合、近距離無線通信を介して、2台以上の携帯端末により、この事象に対して共同の処理が行われていた(例えば特許文献1参照)。
特許文献1の位置利用ゲームは、携帯端末の現在位置(取得した位置情報)に応じた事象(イベント)を発生させる。位置情報に応じたイベントは、キャラクター(例えばモンスター)などを表示し、2台以上の携帯端末により、このキャラクターに対する処理(例えばモンスターを退治するための攻撃)が共同で行われる。このとき、キャラクターの画像はAR(拡張現実)技術により表示される。例えば携帯端末は撮影部により撮影された風景の画像に、キャラクターの画像が重なるように、これら2つの画像を合成する。
特開2013−220246号公報
しかしながら、特許文献1の位置利用ゲームでは、携帯端末の現在位置(取得した位置情報)の映像を利用する事象(イベントなど)が発生するため、携帯端末を移動しなければ別の事象を発生させることができないという問題があった。このような問題は、位置利用ゲームに限るものではなく、携帯端末の現在位置の映像を利用した事象が発生する処理についても同様に発生する。
本発明は上記した課題に鑑みなされたものであり、現在位置の映像を利用する発生中の事象の表示から別の位置の映像を利用する事象の表示に、容易に切り替えできるようにすることを目的とする。
上記した課題を解決するために、本発明は、ユーザが操作する端末装置であって、映像を撮影する撮影手段と、撮影した映像に仮想的なオブジェクトを合成した表示データを生成する表示データ生成手段と、前記表示データに基づき、前記オブジェクトが合成された前記映像を表示装置に表示する表示制御手段と、前記表示装置に表示された前記オブジェクトに対する選択操作をユーザから受け付ける選択操作受付手段と、前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトが合成された前記映像とは別の映像であって、前記オブジェクトと対応付けられている空間の映像に前記表示装置の表示を切り替える切替制御手段と、前記ユーザが参加するイベントの位置情報を取得するイベント情報取得手段と、を有し、前記表示データ生成手段は、前記撮影した映像に前記仮想的なオブジェクトを前記イベントの位置情報により特定されるイベントの開催場所に基づいて合成した表示データを生成し、前記切替制御手段は、前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトと対応付けられている前記イベントの開催場所に基づいた映像に前記表示装置の表示を切り替え、前記ユーザを前記イベントに参加させることを特徴とする。
本発明によれば、現在位置の映像を利用する発生中の事象の表示から別の位置の映像を利用する事象の表示に、容易に切り替えできる。
本実施形態に係る情報処理システムの一例の構成図である。 本実施形態に係る端末装置の一例のハードウェア構成図である。 本実施形態に係るコンピュータの一例のハードウェア構成図である。 本実施形態に係るクライアント端末の一例の処理ブロック図である。 本実施形態に係るゲームサーバ装置の一例の処理ブロック図である。 本実施形態に係る地図サーバ装置の一例の処理ブロック図である。 本実施形態のクライアント端末の処理の一例のフローチャートである。 AR映像の一例のイメージ図である。 イベント映像の一例のイメージ図である。 イベントの場所にいるユーザ(プレイヤ)とイベントの場所から離れた場所にいるユーザとを表した一例の説明図である。 ステップS12のAR映像表示処理の一例のフローチャートである。 ステップS15のイベント映像表示処理の一例のフローチャートである。
次に、本発明の実施形態について、詳細に説明する。なお、本実施形態ではGPS(衛星測位システム)を利用してユーザの位置情報を取得する例を説明するが、GPSに限定するものではなく、位置情報を取得する様々な公知の技術を利用できる。
[第1の実施形態]
<システム構成>
図1は、本実施形態に係る情報処理システムの一例の構成図である。図1の情報処理システム1は1台以上のクライアント端末2とゲームサーバ装置3と地図サーバ装置4とがインターネット等のネットワーク5を介して接続されている。クライアント端末2は例えばPC、スマートフォン、タブレットなどの端末装置である。クライアント端末2は例えばタッチパネルへのタッチ操作、マウスでのクリック操作、実物コントローラでの操作などによりユーザからの要求を受け付ける。ゲームサーバ装置3はクライアント端末2でユーザにより行われるゲームの管理や制御を行う。地図サーバ装置4はクライアント端末2やゲームサーバ装置3に地図情報を提供する。
なお、図1の情報処理システム1は一例であって、用途や目的に応じて様々なシステム構成例があることは言うまでもない。例えばゲームサーバ装置3、地図サーバ装置4は複数のコンピュータに分散して構成してもよい。また、ゲームサーバ装置3と地図サーバ装置4との区分も一例であって、他の区分であってもよく、また、1台のコンピュータにより実現してもよい。
<ハードウェア構成>
《クライアント端末》
図1のクライアント端末2などの端末装置は、例えば図2に示すようなハードウェア構成により実現される。図2は、本実施形態に係る端末装置の一例のハードウェア構成図である。
図2の端末装置は、入力装置401、出力装置402、外部I/F403、RAM404、ROM405、CPU406、通信I/F407、HDD408、GPSユニット409、撮影ユニット410、電池411などを備え、それぞれがバスBで相互に接続されている。
入力装置401はユーザが各種信号を入力するのに用いるタッチパネル、端末装置の筐体に設けられた操作キーやボタンなどの実物コントローラ、マウスなどである。出力装置402は、映像を出力する液晶や有機ELなどの表示装置、音声を出力するスピーカなどを含む。なお、タッチパネルは例えば表示装置上に載せられる感圧式や静電式などのパネルによって構成され、指やタッチペン等によるタッチ操作によって表示装置上におけるタッチ位置を検出する。
通信I/F407は端末装置をネットワーク5に接続するインタフェースである。これにより、端末装置は通信I/F407を介してデータ通信を行う。HDD408は、プログラムやデータを格納している不揮発性の記憶装置の一例である。格納されるプログラムやデータには、端末装置全体を制御する基本ソフトウェアであるOS、及びOS上において各種機能を提供するアプリケーションなどがある。なお、端末装置はHDD408に替えて、記憶媒体としてフラッシュメモリを用いるドライブ装置(例えばソリッドステートドライブ:SSD)を利用するものであってもよい。
外部I/F403は、外部装置とのインタフェースである。外部装置には、記録媒体403aなどがある。これにより、端末装置は外部I/F403を介して記録媒体403aの読み取り及び/又は書き込みを行うことができる。記録媒体403aにはフレキシブルディスク、CD、DVD、SDメモリカード、USBメモリなどがある。
ROM405は、電源を切ってもプログラムやデータを保持することができる不揮発性の半導体メモリ(記憶装置)の一例である。ROM405には端末装置の起動時に実行されるBIOS、OS設定、及びネットワーク設定などのプログラムやデータが格納されている。RAM404はプログラムやデータを一時保持する揮発性の半導体メモリ(記憶装置)の一例である。
CPU406は、ROM405やHDD408などの記憶装置からプログラムやデータをRAM404上に読み出し、処理を実行することで、端末装置全体の制御や機能を実現する演算装置である。また、端末装置は、専用の電池411を備えている。端末装置は電池411によって駆動される。
GPSユニット409はGPS衛星からの電波を利用して現在位置を表す位置情報を取得する。位置情報は、例えば緯度及び経度である。なお、位置情報は緯度及び経度に限定されず、ユーザの位置を特定できる情報であればよい。例えば、無線通信の所定のアクセスポイントに対する電波の強さにより測位する方法などがある。また、既知のジャイロセンサーなどを利用して端末の向きや傾きを把握し、向きや傾きの情報を位置情報の一部として利用してもよい。GPSユニット409は端末装置に内蔵されていても外付けであってもよい。
撮影ユニット410は映像を撮影する。撮影ユニット410のカメラを出力装置402の表示装置の裏側に設けることで、撮影ユニット410のカメラにより撮影する映像の方向と、表示装置を見るユーザの視線の方向とは、ほぼ等しくなる。
本実施形態に係る端末装置は、上記ハードウェア構成により後述するような各種処理を実現できる。
《ゲームサーバ装置及び地図サーバ装置》
図1のゲームサーバ装置3及び地図サーバ装置4は例えば図3に示すハードウェア構成のコンピュータにより実現される。図3は本実施形態に係るコンピュータの一例のハードウェア構成図である。
図3のコンピュータは、入力装置501、出力装置502、外部I/F503、RAM504、ROM505、CPU506、通信I/F507及びHDD508を備え、それぞれがバスBで相互に接続されている。なお、入力装置501及び出力装置502は必要なときに接続して利用する形態であってもよい。
入力装置501は、キーボードやマウスなどを含み、ユーザが各操作信号を入力するのに用いられる。出力装置502はディスプレイやスピーカなどを含み、コンピュータによる処理結果の表示や音声出力に用いられる。通信I/F507は、コンピュータをネットワーク5に接続するインタフェースである。これにより、コンピュータは通信I/F507を介してデータ通信を行うことができる。
また、HDD508は、プログラムやデータを格納している不揮発性の記憶装置の一例である。格納されるプログラムやデータには、例えばコンピュータ全体を制御する基本ソフトウェアであるOS、及び、OS上において各種機能を提供するアプリケーションなどがある。
外部I/F503は、外部装置とのインタフェースである。外部装置には、記録媒体503aなどがある。これにより、コンピュータは外部I/F503を介して記録媒体503aの読み取り及び/又は書き込みを行うことができる。記録媒体503aにはフレキシブルディスク、CD、DVD、SDメモリカード、USBメモリなどがある。
ROM505は、電源を切ってもプログラムやデータを保持することができる不揮発性の半導体メモリ(記憶装置)の一例である。ROM505にはゲームサーバ装置3又は地図サーバ装置4の起動時に実行されるBIOS、OS設定、及びネットワーク設定などのプログラムやデータが格納されている。RAM504はプログラムやデータを一時保持する揮発性の半導体メモリ(記憶装置)の一例である。
CPU506はROM505やHDD508などの記憶装置からプログラムやデータをRAM504上に読み出し、処理を実行することで、ゲームサーバ装置3又は地図サーバ装置4全体の制御や機能を実現する演算装置である。
本実施形態に係るゲームサーバ装置3及び地図サーバ装置4は上記したハードウェア構成により後述するような各種処理を実現できる。
<ソフトウェア構成>
本実施形態に係る情報処理システム1のソフトウェア構成について、クライアント端末2、ゲームサーバ装置3及び地図サーバ装置4に分けて説明を行う。
《クライアント端末》
図1のクライアント端末2は例えば図4に示す処理ブロックにより実現される。図4は本実施形態に係るクライアント端末の一例の処理ブロック図である。クライアント端末2はプログラムを実行することにより、操作受付部10、撮影部11、ゲーム実行部12、サーバアクセス部13、画面表示部14、映像記憶部15及びイベント情報記憶部16を実現している。また、ゲーム実行部12は、イベント情報取得部21、位置情報取得部22、地図情報取得部23、映像取得部24、表示データ生成部25、表示制御部26、切替制御部27、イベント処理部28を有する構成である。
操作受付部10はユーザからの各種操作を受け付ける。撮影部11はユーザの周囲の風景の映像を撮影する。ゲーム実行部12は、操作受付部10がユーザから受け付けた操作に従ってゲームに関する処理を行い、ゲームを進行させる。
ゲーム実行部12のイベント情報取得部21はゲームサーバ装置3からイベントが開催される場所(イベントの位置情報)やイベント内容などを含むイベント情報を取得する。イベント情報取得部21は取得したイベント情報をイベント情報記憶部16に記憶させる。
位置情報取得部22はGPSユニット409を利用してユーザの現在の位置情報を取得する。地図情報取得部23は地図サーバ装置4から地図情報を取得する。映像取得部24はゲームサーバ装置3から映像を取得する。ここで取得する映像は、イベントの場所の周囲の風景の映像、風景の映像に合成する後述の仮想的なオブジェクトの映像、などを含んでいる。映像取得部24は取得した映像を映像記憶部15に記憶させる。
表示データ生成部25はAR(拡張現実)技術を利用し、風景の映像にオブジェクトの映像が重なるように合成した表示データを生成する。表示制御部26は表示データ生成部25が生成した表示データを表示装置に表示させる。切替制御部27は、開催中のイベントの場所にいないユーザを、そのイベントに参加させるため、表示装置に表示されているユーザの周囲の風景の映像に仮想的なオブジェクトを合成した映像(以下、AR映像と呼ぶ)を開催中のイベントの映像(以下、イベント映像と呼ぶ)に切り替える。
イベント映像は、事前に撮影しておいたイベントの場所の周囲の風景の映像に仮想的なオブジェクトを合成した映像(以下、擬似AR映像と呼ぶ)であっても、事前にVR(仮想現実)技術を利用して生成しておいたイベントの場所の周囲の風景の映像に仮想的なオブジェクトを合成した映像(以下、VR映像と呼ぶ)であってもよい。切替制御部27はAR映像とイベント映像との切り替えを、例えばAR映像に表示されている仮想的なオブジェクトに対するユーザの選択操作により行う。なお、AR映像とイベント映像との切り替えの詳細については後述する。
イベント処理部28はイベントに関する処理を行う。例えば複数のユーザが敵キャラクタを攻撃して撃退するイベントの場合、イベント処理部28は敵キャラクタを攻撃する操作をユーザから受け付けると、敵キャラクタを攻撃する映像の表示や、その攻撃による効果の計算、その攻撃による効果のゲームサーバ装置3への通知、などを行う。
画面表示部14はゲーム実行部12によるゲームの進行に従い、クライアント端末2の画面表示を制御する。サーバアクセス部13は、ゲーム実行部12の処理の過程でゲームサーバ装置3又は地図サーバ装置4へのアクセスが必要となったとき、ゲームサーバ装置3又は地図サーバ装置4に対してリクエストを送信すると共に、ゲームサーバ装置3又は地図サーバ装置4からの処理結果等のレスポンスを受信する。
なお、ゲーム実行部12はゲームサーバ装置3からHTML(Hyper Text Markup Language)等で記載されたページデータや、ページデータ内に含まれるスクリプトなどに基づいてゲームに関する処理を行うブラウザ型がある。また、ゲーム実行部12はインストールされたアプリケーションに基づいてゲームに関する処理を行うアプリケーション型がある。図4は一例としてアプリケーション型を示している。
《ゲームサーバ装置》
図1のゲームサーバ装置3は例えば図5に示す処理ブロックにより実現される。図5は本実施形態に係るゲームサーバ装置の一例の処理ブロック図である。ゲームサーバ装置3はプログラムを実行することにより、映像提供部41、イベント情報提供部42、イベント制御部43、映像記憶部47及びイベント情報記憶部48を実現している。
映像提供部41は、クライアント端末2の映像取得部24に映像を提供する。イベント情報提供部42は、クライアント端末2のイベント情報取得部21にイベント情報を提供する。イベント制御部43は開催中のイベントに関する制御を行う。例えば複数のユーザが敵キャラクタを攻撃して撃退するイベントの場合、イベント制御部43は複数のユーザの攻撃により減少する敵キャラクタの体力などの耐久値を管理しながらイベントを進行させる。映像記憶部47は例えば擬似AR映像、VR映像及び仮想的なオブジェクトの映像などの映像を記憶する。擬似AR映像は、例えば事前に撮影しておいたイベントの場所の周囲の風景の360度のパノラマ映像を利用できる。イベント情報記憶部48はイベントの場所、イベントの時間及びイベントの敵キャラクタのオブジェクトなどの情報を含むイベント情報を記憶する。
《地図サーバ装置》
図1の地図サーバ装置4は、例えば図6に示す処理ブロックにより実現される。図6は本実施形態に係る地図サーバ装置の一例の処理ブロック図である。地図サーバ装置4はプログラムを実行することにより、地図情報提供部61及び地図情報記憶部62を実現している。
地図情報提供部61は、クライアント端末2及びゲームサーバ装置3に地図情報を提供する。なお、クライアント端末2に提供する地図情報の範囲は、クライアント端末2で必要な範囲であればよく、例えばユーザの現在の位置が含まれる所定の範囲の地図情報であればよい。地図情報記憶部62は地図情報を記憶する。
<処理>
《クライアント端末における処理の概要》
図7は本実施形態のクライアント端末の処理の一例のフローチャートである。ステップS11において、クライアント端末2はユーザにより本実施形態に係るゲームのアプリケーション等のプログラムを起動される。
ステップS12に進み、クライアント端末2は図8に示すようなAR映像を表示装置に表示するAR映像表示処理を行う。図8はAR映像の一例のイメージ図である。図8のAR映像は、撮影部11により撮影されたユーザの周囲の風景の映像に、敵キャラクタを模した仮想的なオブジェクト1000を合成した例である。
仮想的なオブジェクト1000は、AR映像において、イベントの位置情報により特定されるイベントの場所の上空に存在するように表示される。したがって、ユーザはイベントが開催されている方向に向かって撮影した場合、イベントが開催中の場所の上空に仮想的なオブジェクト1000が表示されたAR映像を確認できる。
したがって、ユーザは図8のような仮想的なオブジェクト1000が表示されたAR映像を確認することで、イベントが開催中であること、及び、そのイベントが開催されている大まかな場所、を知ることができる。なお、仮想的なオブジェクト1000はユーザの現在の位置から開催中のイベントの位置までの距離が大きくなるほど表示サイズを小さくしてもよい。また、仮想的なオブジェクト1000は、他の仮想的なオブジェクト又はビルなどの建造物により隠れる場合であっても、AR映像に表示されるような仕組みを設けることが望ましい。例えば、表示制御部26は、仮想的なオブジェクト1000が建造物に隠れる場合にはシルエットを表示したり、建造物を半透明化して表示してもよい。もしくは、表示制御部26は、クライアント端末2がイベントの位置方向を向いている場合は、仮想的なオブジェクト1000を表示せずに、テキストウィンドウを表示してイベント開催を報知し、ユーザが任意でイベントプレイ是非を選択できるボタンを表示してもよい。さらに、仮想的なオブジェクト1000が表示されたAR映像にはイベントの終了までの残り時間などの情報を表示してもよい。
ユーザは図8のようなAR映像に表示された仮想的なオブジェクト1000に対する選択操作(タップなど)を行うことで、その仮想的なオブジェクト1000に対応するイベントへの参加を要求できる。なお、ステップS13において仮想的なオブジェクト1000の選択操作をユーザから受け付けると、クライアント端末2はユーザに参加の是非を問うウィンドウを表示してイベントプレイ是非をユーザに選択させるようにしてもよい。ユーザに参加の是非を問うウィンドウには、イベント開催期間、敵キャラクタのレベル、募集人数、現在の参加者数、イベント開催地などを表示してもよい。
ステップS13において仮想的なオブジェクト1000の選択操作をユーザから受け付けると、クライアント端末2はステップS14に進み、イベントの場所にいないユーザがイベントに参加するための対価の支払いの一例であるスタミナ消費処理を行う。クライアント端末2は、イベントの場所にいないユーザがイベントに参加するための対価を一定としてもよいし、ユーザの現在の場所とイベントの場所との距離が大きくなるほど対価を大きくしてもよい。
イベントに参加したユーザのうち、イベントの場所にいるユーザにだけ特典が付与されても良い。これにより、ユーザが様々な場所に出向くようになる。例えば、イベントの場所にいないでイベントに参加したユーザは、仮想的なオブジェクト1000の同時表示数や表示回数、表示時間に制限をかけることで、ユーザがイベントの場所に移動する意欲を向上させられる。
ステップS15に進み、クライアント端末2は図9に示すようなイベント映像を表示装置に表示するイベント映像表示処理を行う。図9は、イベント映像の一例のイメージ図である。図9のイベント映像は、例えば事前に撮影(キャプチャ)されたイベントの場所の360度のパノラマ映像が、イベントの場所の周囲の風景(背景)として用いられている例である。図9のイベント映像は図8のAR映像と共通の仮想的なオブジェクト1000が合成されている。
図8のAR映像と図9のイベント映像とに共通する仮想的なオブジェクト1000が含まれていることにより、ユーザは切り替え前の図8のAR映像と切り替え後の図9のイベント映像との統合感が協調される。したがって、ユーザは図8のAR映像の場所から図9のイベント映像の場所にジャンプしたかのような感覚を味わうことができる。ユーザは図9のイベント映像から、仮想的なオブジェクト1000への攻撃など、イベントに参加できる。ステップS15のイベント映像表示処理はイベントが終了するか、ゲームのアプリケーション等のプログラムが終了するまで繰り返される。
イベントが終了すると、クライアント端末2はステップS16からS12に戻り、イベント映像からAR映像に切り替える。なお、ゲームのアプリケーション等のプログラムが終了されるとステップS17で判定すると、クライアント端末2は図7のフローチャートの処理を終了する。
一方、ステップS13において仮想的なオブジェクト1000の選択操作をユーザから受け付けなくても、ステップS18においてイベントの場所にいるユーザであると判定すると、クライアント端末2はステップS15に進み、図9のようなイベント映像を表示装置に表示する。
なお、ステップS12のAR映像表示処理は仮想的なオブジェクト1000の選択操作をユーザから受け付けるか、イベントの場所にいるユーザであると判定されるか、ステップS19でゲームのアプリケーション等のプログラムが終了されると判定されるまで繰り返される。
図7のフローチャートによれば、イベントの場所にいるユーザと、イベントの場所から離れた場所にいるユーザと、が同一のイベントに参加できる。図10はイベントの場所にいるユーザとイベントの場所から離れた場所にいるユーザとを表した一例の説明図である。
図10では、ユーザAがイベントの場所から離れた場所にいるユーザの一例を表しており、ユーザBがイベントの場所にいるユーザの一例を表している。ユーザAは例えば図8のAR映像から仮想的なオブジェクト1000の選択操作を行うことにより場所1010で開催されているイベントの図9のイベント映像に切り替え、イベントに参加できる。
また、ユーザBはイベントの場所1010にいるため、場所1010で開催されているイベントの図9のイベント映像を表示してイベントに参加できる。なお、イベントの場所1010にいるユーザBのクライアント端末2は自動的にユーザBをイベントに参加させるようにしてもよいし、仮想的なオブジェクト1000の選択操作を受け付けた場合にユーザBをイベントに参加させるようにしてもよい。
《S12:AR映像表示処理》
図11はステップS12のAR映像表示処理の一例のフローチャートである。ステップS31に進み、クライアント端末2の撮影部11はユーザの周囲の風景を撮影する。ステップS32に進み、表示データ生成部25はイベント情報を参照し、ユーザが参加できるイベントがあるか否かを判定する。
ユーザが参加できるイベントがあれば、表示データ生成部25は参加できるイベントの位置情報をイベント情報記憶部16に記憶されているイベント情報から読み出すと共に、そのイベントの仮想的なオブジェクト1000の映像を映像記憶部15から読み出す。ステップS34に進み、表示データ生成部25はユーザが参加できるイベントの位置情報の方向に、仮想的なオブジェクト1000が表示されるように、ステップS31で撮影したユーザの周囲の風景の映像に、仮想的なオブジェクト1000を合成した表示データを生成する。ステップS35に進み、表示制御部26はステップS34で生成された表示データに基づき、図8のようなAR映像を表示装置に表示させる。
なお、ステップS32においてユーザが参加できるイベントがないと判定した場合はステップS35に進み、ステップS31で撮影したユーザの周囲の風景の映像を表示装置に表示させる。
《S15:イベント映像表示》
図12はステップS15のイベント映像表示処理の一例のフローチャートである。クライアント端末2の表示データ生成部25はステップS41においてイベントの位置情報に対応した映像(イベントの場所の周囲の風景)を映像記憶部15から読み出す。なお、表示データ生成部25はイベントの位置情報に対応した映像を読み出す際、現実世界の日照を考慮してもよい。この場合、映像記憶部15には事前に撮影しておいた日照の異なるイベントの場所の周囲の風景の映像を記憶しておく。
このようにすることで、表示データ生成部25は昼、夕方、夜などに対応したイベント映像の表示データを生成できる。また、表示データ生成部25は晴れ、曇り、雨などの天候に対応したイベント映像の表示データを生成できる。さらに、映像記憶部15にはモデルの明るさを様々な日照に適応させた仮想的なオブジェクト1000の映像を記憶しておいてもよい。このようにすることで、表示データ生成部25は昼、夕方、夜などに対応したAR映像の表示データを生成できる。また、表示データ生成部25は晴れ、曇り、雨などの天候に対応したAR映像の表示データを生成できる。
そして、ステップS42に進み、表示データ生成部25はステップS41で読み出した映像に、イベントの仮想的なオブジェクト1000の映像を合成した表示データを生成する。
ステップS43に進み、表示制御部26はステップS42で生成された表示データに基づき、図9のようなイベント映像を表示装置に表示させる。イベント処理部28は図9のイベント映像において、仮想的なオブジェクト1000を攻撃する操作などをユーザから受け付け、仮想的なオブジェクト1000を攻撃する映像の表示や、その攻撃による効果の計算、その攻撃による効果のゲームサーバ装置3への通知、などを行う。
[他の実施形態]
なお、上記の実施形態では位置情報を利用するゲームの例を説明したが、不動産物件や店舗などを紹介するアプリケーション(お散歩アプリなど)への適用も可能である。例えばAR映像には、クライアント端末2の位置情報により特定された不動産物件や店舗を表すオブジェクトが表示される。当該オブジェクトは、不動産物件や店舗の上空に表示されてもよいし、建物自体に重ねて表示されてもよい。クライアント端末2のユーザは不動産物件や店舗と対応付けられたオブジェクトの選択操作を行うことで、その不動産物件や店舗の間取りや内装などの空間の擬似AR映像やVR映像に表示を切り替えることができる。ユーザは、AR映像に表示されたオブジェクトをタップするなどの選択操作により、気になった不動産物件や店舗の間取りや内装などを容易に確認できる。
このように、本実施形態に係るクライアント端末2はAR映像から、擬似AR映像又はVR映像へ切り替えるインタフェースの仕組みをユーザに提供する。なお、図8のAR映像ではイベント映像に切り替えるための仮想的なオブジェクト1000が表示されている例を示したが、イベント映像に切り替える以外の目的で利用される仮想的なオブジェクトが表示されていてもよい。
また、クライアント端末2はヘッドマウントディスプレイであってもよい。表示データ生成部25が生成した表示データをクライアント端末2に表示した際、ディスプレイを直接タップ操作しなくても、ユーザが手などでジェスチャー操作をして表示された仮想的なオブジェクト1000に画面内で触れることで、仮想的なオブジェクト1000の選択ができてもよい。撮影ユニット410(カメラ)が手などの動作をトラッキングすることでジェスチャー操作を実現でき、ユーザは仮想的なオブジェクト1000を実際に触っているような感覚で選択することができる。
(まとめ)
以上、本実施形態に係る情報処理システム1では、現在位置のAR映像を利用する事象の表示(イベント発生を表すオブジェクトの表示や近くに売り出し中の不動産物件があることを表すオブジェクトの表示)から、現在位置とは別の位置の擬似AR映像又はVR映像の表示に、容易に切り替え可能なインタフェースの仕組みを提供できる。
本発明は、具体的に開示された上記の実施形態に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。
1 情報処理システム
2 クライアント端末
3 ゲームサーバ装置
4 地図サーバ装置
5 ネットワーク
10 操作受付部
11 撮影部
12 ゲーム実行部
13 サーバアクセス部
14 画面表示部
15 映像記憶部
16 イベント情報記憶部
21 イベント情報取得部
22 位置情報取得部
23 地図情報取得部
24 映像取得部
25 表示データ生成部
26 表示制御部
27 切替制御部
28 イベント処理部
41 映像提供部
42 イベント情報提供部
43 イベント制御部
47 映像記憶部
48 イベント情報記憶部
61 地図情報提供部
62 地図情報記憶部
401、501 入力装置
402、502 出力装置
403、503 外部I/F
403a、503a 記録媒体
404、504 RAM
405、505 ROM
406、506 CPU
407、507 通信I/F
408、508 HDD
409 GPSユニット
410 撮影ユニット
411 電池
1000 仮想的なオブジェクト
1010 イベントの場所
B バス

Claims (6)

  1. ユーザが操作する端末装置であって、
    映像を撮影する撮影手段と、
    撮影した映像に仮想的なオブジェクトを合成した表示データを生成する表示データ生成手段と、
    前記表示データに基づき、前記オブジェクトが合成された前記映像を表示装置に表示する表示制御手段と、
    前記表示装置に表示された前記オブジェクトに対する選択操作をユーザから受け付ける選択操作受付手段と、
    前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトが合成された前記映像とは別の映像であって、前記オブジェクトと対応付けられている空間の映像に前記表示装置の表示を切り替える切替制御手段と、
    前記ユーザが参加するイベントの位置情報を取得するイベント情報取得手段と、
    を有し、
    前記表示データ生成手段は、前記撮影した映像に前記仮想的なオブジェクトを前記イベントの位置情報により特定されるイベントの開催場所に基づいて合成した表示データを生成し、
    前記切替制御手段は、前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトと対応付けられている前記イベントの開催場所に基づいた映像に前記表示装置の表示を切り替え、前記ユーザを前記イベントに参加させ
    ことを特徴とする端末装置。
  2. 前記切替制御手段は、前記端末装置の位置情報及び前記イベントの位置情報を利用することで、前記端末装置が前記イベントの開催場所にいるかを判定し、前記端末装置が前記イベントの開催場所にいると判定した場合に、前記イベントの開催場所に基づいた映像に前記表示装置の表示を切り替え、前記ユーザを前記イベントに参加させること
    を特徴とする請求項記載の端末装置。
  3. 前記イベントの開催場所にいる前記端末装置のユーザと前記イベントの開催場所にいない前記端末装置のユーザとが同一の前記イベントに参加できること
    を特徴とする請求項記載の端末装置。
  4. 前記切替制御手段は、前記オブジェクトと対応付けられている空間の映像を、実時間と連動させて変化させること
    を特徴とする請求項1乃至何れか一項記載の端末装置。
  5. 前記オブジェクトと対応付けられている空間の映像は、事前に撮影された前記オブジェクトと対応付けられている場所を事前に撮影した映像であること
    を特徴とする請求項1乃至何れか一項記載の端末装置。
  6. ユーザが操作する端末装置を、
    映像を撮影する撮影手段、
    撮影した映像に仮想的なオブジェクトを合成した表示データを生成する表示データ生成手段、
    前記表示データに基づき、前記オブジェクトが合成された前記映像を表示装置に表示する表示制御手段、
    前記表示装置に表示された前記オブジェクトに対する選択操作をユーザから受け付ける選択操作受付手段、
    前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトが合成された前記映像とは別の映像であって、前記オブジェクトと対応付けられている空間の映像に前記表示装置の表示を切り替える切替制御手段、
    前記ユーザが参加するイベントの位置情報を取得するイベント情報取得手段、
    として機能させ、
    前記切替制御手段は、前記オブジェクトに対する選択操作をユーザから受け付けた場合に、前記オブジェクトと対応付けられている前記イベントの開催場所に基づいた映像に前記表示装置の表示を切り替え、前記ユーザを前記イベントに参加させること
    を特徴とするプログラム。
JP2018110601A 2018-06-08 2018-06-08 端末装置及びプログラム Active JP6658799B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018110601A JP6658799B2 (ja) 2018-06-08 2018-06-08 端末装置及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018110601A JP6658799B2 (ja) 2018-06-08 2018-06-08 端末装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2019212236A JP2019212236A (ja) 2019-12-12
JP6658799B2 true JP6658799B2 (ja) 2020-03-04

Family

ID=68846858

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018110601A Active JP6658799B2 (ja) 2018-06-08 2018-06-08 端末装置及びプログラム

Country Status (1)

Country Link
JP (1) JP6658799B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7354466B1 (ja) 2023-02-02 2023-10-02 株式会社コロプラ 情報処理システムおよびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4738870B2 (ja) * 2005-04-08 2011-08-03 キヤノン株式会社 情報処理方法、情報処理装置および遠隔複合現実感共有装置
JP5594850B2 (ja) * 2012-08-17 2014-09-24 独立行政法人理化学研究所 代替現実システム制御装置、代替現実システム、代替現実システム制御方法、プログラム、および記録媒体
JP6304242B2 (ja) * 2013-04-04 2018-04-04 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US11043033B2 (en) * 2016-11-21 2021-06-22 Sony Corporation Information processing device and information processing method capable of deciding objects arranged in virtual space generated based on real space

Also Published As

Publication number Publication date
JP2019212236A (ja) 2019-12-12

Similar Documents

Publication Publication Date Title
CN110147231B (zh) 组合特效生成方法、装置及存储介质
KR102595150B1 (ko) 다수의 가상 캐릭터를 제어하는 방법, 기기, 장치 및 저장 매체
US20220222905A1 (en) Display control apparatus, display control method, and program
CN106383587B (zh) 一种增强现实场景生成方法、装置及设备
CN108710525B (zh) 虚拟场景中的地图展示方法、装置、设备及存储介质
US8253649B2 (en) Spatially correlated rendering of three-dimensional content on display components having arbitrary positions
JP5869145B2 (ja) 記憶済みコンテンツのローカルセンサ増補及びar通信
US11558562B2 (en) Apparatus and method for providing 360-degree panoramic background during video call
US20240078703A1 (en) Personalized scene image processing method, apparatus and storage medium
US20210200861A1 (en) Control information processing method and apparatus, electronic device, and storage medium
CN104243961A (zh) 多视角影像的显示系统及方法
CN109448050B (zh) 一种目标点的位置的确定方法及终端
CN113546419B (zh) 游戏地图显示方法、装置、终端及存储介质
JP2022008799A (ja) 画像管理システム、及び画像管理方法
US20230405475A1 (en) Shooting method, apparatus, device and medium based on virtual reality space
CN111544897B (zh) 基于虚拟场景的视频片段显示方法、装置、设备及介质
CN114125421A (zh) 图像处理方法、移动终端及存储介质
JP6658799B2 (ja) 端末装置及びプログラム
CN113713371B (zh) 音乐合成方法、装置、设备及介质
CN118301285A (zh) 一种图像显示方法、终端及计算机可读存储介质
CN117205571A (zh) 游戏程序中的ugc生成方法、装置、设备及存储介质
CN116266090A (zh) 一种虚拟现实设备及焦点操作方法
JP2021060738A (ja) プログラム、画像処理システム、通信端末
CN115150634A (zh) 直播间信息处理方法及装置、存储介质、电子设备
CN116339598A (zh) 赛程显示方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190325

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190522

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190911

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200120

R150 Certificate of patent or registration of utility model

Ref document number: 6658799

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250