JP2010102588A - 過去に撮像したリアル画像にバーチャルオブジェクトを重ねて表示する装置及び方法 - Google Patents

Abstract

【課題】リアリティのある実在の場所の風景の中でゲーム等を行うことが可能な可搬合成画像表示装置を提供すること。
【解決手段】可搬合成画像表示装置１は、位置を特定するための全地球測位システムのＧＰＳ衛星から受信した電波に基づいて現在位置を特定するＧＰＳ情報受信部４１と、地磁気センサ４２０が検出する地磁気から得られる方位情報を特定する方位情報取得部４２と、加速度センサ４３０が検出する傾きから得られる傾き情報を取得する傾き情報取得部４３と、予め撮像した風景画像を記憶する風景画像ＤＢ２０１と、取得した位置情報、方位情報、及び傾き情報に応じた風景画像ファイルを表示部１３に表示する風景画像ファイルとして決定する表示画像決定部１０４と、風景画像ファイルに対して、仮想オブジェクトの合成を行う画像合成部１０５と、を備える。
【選択図】図１

Description

本発明は、過去に撮像され、記憶されている風景画像といったリアル画像に仮想オブジェクトを合成して表示する可搬合成画像表示装置及び方法に関する。

従来、カメラ付き携帯端末で撮像した人物画像に対して、予め登録されたアニメのキャラクタ画像等を合成する画像処理システムが提案されている（例えば、特許文献１）。この画像処理システムでは、カメラ付き携帯端末で撮像した人物画像を画像合成のためのシステムに送信すると、当該キャラクタ画像と画像合成を行い、携帯端末へと送信する。そして、携帯端末装置は、送信された画像を受信して表示することができる。

一方、加速度センサー等を備えた操作端末をユーザが操作することに応じて、仮想空間において仮想キャラクター（アバター等を含む）がテニスやキャッチボールを行ったり、モンスターと対戦ゲームを行ったりすることができるビデオゲーム装置が知られている（例えば、特許文献２）。
特開２００８−１９３４６９号公報 特開２００７−２４４４１８号公報

しかしながら、仮想空間ではなく、例えば自宅の前やテーマパーク等の実在の場所の風景にそれぞれ仮想オブジェクトを合成してキャッチボールを行ったりモンスターと戦ったりすることができる技術は提案されていない。更に、例えばカメラ付き携帯端末で撮像した実在の場所の風景動画像を使用しようとすると、当該風景動画像は手ぶれ等により常に向きが変化しており、そのままの風景動画像に仮想オブジェクトの位置を対応させて表示するには当該仮想オブジェクトの表示位置や向きの計算のためのシステム負荷が過大になるばかりでなく、動画像の向きがぶれるとかえってゲーム等の操作を難しくするという課題がある。

そこで、本発明は、リアリティのある実在の場所の風景の中でゲーム等を行うことが可能な可搬合成画像表示装置を提供することを目的とする。

本発明では、以下のような解決手段を提供する。

（１） 予め撮像して記憶した風景画像に仮想オブジェクトを合成して表示する可搬合成画像表示装置であって、
前記風景画像を撮像した位置情報及び向き情報に関連付けて前記風景画像を予め記憶する風景画像記憶手段と、
前記可搬合成画像表示装置の位置を示す位置情報を取得する位置情報取得手段と、
前記可搬合成画像表示装置の向きを示す向き情報を取得する向き情報取得手段と、
予め記憶した前記風景画像の中から、前記位置情報及び前記向き情報に基づいて前記可搬合成画像表示装置に表示する風景画像を決定する画像決定手段と、
決定した前記風景画像に、前記仮想オブジェクトを合成して表示する画像合成表示手段と、
を備える可搬合成画像表示装置。

（１）記載の合成画像表示装置によれば、風景画像記憶手段は、風景画像を撮像した位置情報及び向き情報に関連付けて風景画像を記憶する。そして、位置情報取得手段により、可搬合成画像表示装置の位置を示す位置情報を取得し、向き情報取得手段により、可搬合成画像表示装置の向きを示す向き情報を取得する。そして、画像決定手段により、予め記憶した風景画像の中から、位置情報及び向き情報に基づいて可搬合成画像表示装置に表示する風景画像を決定し、画像合成表示手段により、決定した風景画像に仮想オブジェクトを合成して表示する。

このようにすることで、可搬合成画像表示装置の位置及び向きに基づいて可搬合成画像表示装置に表示する風景画像を決定することができる。そして、決定した風景画像に対して、仮想オブジェクトを合成して、合成した画像を表示する。このため、可搬合成画像表示装置により風景画像を撮像することなく、リアリティのある実在の場所の風景の中でゲーム等を行うことが可能な可搬合成画像表示装置を提供することができる。更に、予め記憶されている画像が、仮想オブジェクトの合成が最適となるように撮像されることで、画像の明るさや、視野、ズームといった仮想オブジェクトの合成以外の画像処理を行うことを必要としないため、画像処理を行う場合に対して負荷を抑制することができる。

（２） 地球上の位置を特定するための全地球測位システムの衛星からデータを受信するＧＰＳ受信手段を更に備え、
前記位置情報取得手段は、前記ＧＰＳ受信手段より受信したデータに基づいて前記可搬合成画像表示装置の位置を示す前記位置情報を取得することを特徴とする（１）に記載の可搬合成画像表示装置。

このような構成によれば、全地球測位システムの衛星を利用して可搬合成画像表示装置の位置を示す位置情報を取得することができる。

（３） 地磁気を検出する地磁気検出手段を更に備え、
前記向き情報取得手段は、前記地磁気検出手段が検出した前記地磁気に基づいて前記向き情報を取得することを特徴とする（１）又は（２）に記載の可搬合成画像表示装置。

このような構成によれば、地磁気検出手段に基づいて、可搬合成画像表示装置の向きを示す方位情報を取得することができる。

（４） 前記予め撮像した風景画像は、通信ネットワークを介して前記可搬合成画像表示装置と接続可能な風景画像記憶装置に記憶されており、
取得した前記可搬合成画像表示装置の位置情報に基づいて、対応する前記風景画像を前記風景画像記憶装置から受信することを特徴とする（１）から（３）のいずれかに記載の可搬合成画像表示装置。

このような構成によれば、風景画像を通信ネットワークを介して可搬合成画像表示装置と接続可能な画像記憶装置に予め記憶することができる。このため、可搬合成画像表示装置の記憶容量以上の風景画像データを格納できる画像記憶装置を設けることにより、可搬合成画像表示装置の記憶容量にかかわらず、多量の画像データを格納することができる。

（５） 予め撮像して記憶した風景画像に仮想オブジェクトを合成して可搬合成画像表示装置に表示する可搬合成画像表示方法であって、
前記風景画像を撮像した位置情報及び向き情報に関連付けて前記風景画像を予め記憶するステップと、
前記可搬合成画像表示装置の位置を示す位置情報を取得するステップと、
前記可搬合成画像表示装置の向きを示す向き情報を取得するステップと、
予め記憶した前記風景画像の中から、前記位置情報及び前記向き情報に基づいて前記可搬合成画像表示装置に表示する風景画像を決定するステップと、
決定した前記風景画像に、前記仮想オブジェクトを合成して前記可搬合成画像表示装置に表示するステップと、
を含むことを特徴とする可搬合成画像表示方法。

このような構成によれば、上述した可搬合成画像表示装置で述べた効果と同様の効果を奏することができる。

本発明によれば、リアリティのある実在の場所の風景の中でゲーム等を行うことが可能な可搬合成画像表示装置を提供することができる。

以下、本発明の実施形態について図を参照しながら説明する。

図１は、本実施形態に係る可搬合成画像表示装置１の機能を示す機能ブロック図である。

可搬合成画像表示装置１は、ＧＰＳ情報受信部４１と、方位情報取得部４２と、傾き情報取得部４３と、表示画像決定部１０４と、画像合成部１０５と、表示部１３と、操作部１２と、補助記憶部２０と、を備える。そして、補助記憶部２０は、ゲームプログラム２００と、風景画像ＤＢ２０１と、仮想オブジェクトＤＢ２０２と、を有する。方位情報取得部４２及び傾き情報取得部４３は、向き情報取得手段を構成する。なお、後述のように傾き情報取得部４３のみにより向き情報取得手段を構成してもよい。

操作部１２は、後述で説明するように、各種設定や入力操作を行う操作ボタン群、決定操作ボタン等を備えており、ユーザによる可搬合成画像表示装置１の操作を受け付ける。操作部１２において、ユーザによる所定の操作が受け付けられると、ゲームプログラム２００が実行されることにより、可搬合成画像表示装置１の位置、方位、及び傾きの特定が開始される。

ＧＰＳ情報受信部４１は、位置を特定するための全地球測位システムのＧＰＳ衛星から電波を受信し、受信した電波の時刻差に基づいて現在位置を特定する。具体的には、ＧＰＳ情報受信部４１は、複数のＧＰＳ衛星からそれぞれの位置情報及び時刻情報を受信して、それぞれの衛星と、可搬合成画像表示装置１との距離を算出し、それぞれの衛星との距離を満たす地点、すなわち、可搬合成画像表示装置１の位置を算出することにより、可搬合成画像表示装置１の位置情報を特定する。

方位情報取得部４２は、可搬合成画像表示装置１に固定して内蔵されている地磁気センサ４２０が検出する地磁気から得られる方位情報を特定する。これにより、可搬合成画像表示装置１の水平方向の向きを取得することができる。

傾き情報取得部４３は、可搬合成画像表示装置１に固定して内蔵されている加速度センサ４３０が検出する加速度センサ４３０の傾きから得られる傾き情報を取得する。具体的には、可搬合成画像表示装置１の内部に固定されている加速度センサ４３０が各軸の重力加速度成分の分力を測定し、加速度センサ４３０の傾きを算出することで、可搬合成画像表示装置１の垂直方向の傾きを取得する。このことにより、可搬合成画像表示装置１の横方向の向き（方位）情報に限らず、縦方向の向き情報も特定できるので、坂道の上り方向や下り方向、建物を地上から見上げたり、上階から下を向いたりといった視野の調整を適宜行うことができる。なお、傾き情報取得部４３により、縦方向の傾きのみならず、横方向の傾き（すなわち方位情報）を取得するように構成してもよい。この場合には、方位情報取得部４２は不要となる。

図２は、本実施形態に係る風景画像ＤＢ２０１を示す図である。

風景画像ＤＢ２０１は、予め撮像した風景画像を記憶するＤＢであり、後述で説明する補助記憶部２０に格納されている。風景画像ＤＢ２０１は、風景画像を特定するための情報として、画像ＩＤ、ファイル名、位置、方位、傾き、及び仮想オブジェクト表示位置等を記憶している。なお、当該風景画像はこれらの情報により特定可能なものであれば様々なものを含むことができ、動画像、静止画像の別を問わない。

画像ＩＤは、風景画像ＤＢ２０１に記憶されている風景画像ファイルを一意に特定するためのＩＤである。ファイル名は、画像ＩＤ同様に、風景画像ＤＢ２０１に記憶されている風景画像ファイルを一意に特定するものである。位置には、風景画像ファイルが対応する位置情報である経度・緯度情報が格納されている。方位には、風景画像ファイルが対応する方位情報が格納されている。傾きには、風景画像ファイルが対応する傾き情報が格納されている。位置、方位、及び傾きは、後述の表示画像決定部１０４が、表示部に表示する風景画像ファイルを決定するために参照され、これによって表示部に表示する風景画像ファイルが一意に特定される。仮想オブジェクト表示位置は、後述で説明する画像合成部１０５により参照され、表示部１３に表示することが決定された風景画像ファイルに対して仮想オブジェクトを合成するときの仮想オブジェクトの合成位置を決定するために用いられる。仮想オブジェクト表示位置は、仮想オブジェクトが最適に表示されるように予め決定される。また、１つの風景画像ファイルにおいて仮想オブジェクトを複数合成する場合には、それぞれの仮想オブジェクトに対して仮想オブジェクト表示位置が予め決定される。

なお、本実施形態では、風景画像ＤＢ２０１は、可搬合成画像表示装置１の補助記憶部２０に格納されていることとしたが、これに限らない。例えば、通信ネットワークを介して可搬合成画像表示装置１と接続可能な外部サーバに対して風景画像ＤＢ２０１を設けることとしてもよい。このようにすることで、可搬合成画像表示装置１の補助記憶部２０の記憶容量以上のデータを格納できる記憶装置を外部サーバに設けて、当該記憶装置に対して風景画像ＤＢ２０１を格納することにより、可搬合成画像表示装置１の補助記憶部２０の記憶容量にかかわらず、多量の風景画像を格納することができる。

図１に戻り、表示画像決定部１０４は、ＧＰＳ情報受信部４１、方位情報取得部４２、及び傾き情報取得部４３より、それぞれ、位置情報、方位情報、及び傾き情報を取得する。そして、風景画像ＤＢ２０１を参照して、取得した位置情報、方位情報、及び傾き情報に応じた風景画像ファイルを選択して、表示部１３に表示する風景画像ファイルとして決定する。すなわち、風景画像ＤＢ２０１に記憶されている風景画像ファイルから、取得した位置情報、方位、及び傾きに応じた風景画像ファイルを一意に特定して、表示部１３に表示する風景画像ファイルとして決定する。

画像合成部１０５は、表示画像決定部１０４により決定した風景画像ファイルに対して、ゲームプログラム２００を介して仮想オブジェクトＤＢ２０２から取得した仮想オブジェクトの合成を行う。具体的には、画像合成部１０５は、風景画像ＤＢ２０１を参照し、表示部１３に表示することが決定された風景画像ファイルの仮想オブジェクト表示位置を取得する。一方で、ゲームプログラム２００に対して、合成する仮想オブジェクトの取得リクエストを行い、ゲームプログラム２００を介して合成する仮想オブジェクトを取得して、仮想オブジェクト表示位置に基づいて、取得した仮想オブジェクトと、風景画像ファイルと、を合成する。

表示部１３は、後述で説明するように、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）等により構成され、各種情報を表示する。

ゲームプログラム２００は、ユーザにより操作部１２が操作されることに応じて、ＧＰＳ情報受信部４１、方位情報取得部４２、及び傾き情報取得部４３による、位置情報、方位情報、傾き情報の特定を開始させる。そして、画像合成部１０５により行われる合成する仮想オブジェクトの取得リクエストに応じて、仮想オブジェクトＤＢ２０２より合成する仮想オブジェクトを取得し、画像合成部１０５に対して提示を行う。なお、本実施形態ではゲームプログラム２００が、仮想オブジェクトＤＢ２０２より合成する仮想オブジェクトを取得し、画像合成部１０５に対して提示を行うこととしたが、これに限らない。例えば、アバター等の仮想オブジェクトを用いてビジュアルチャットを行うビジュアルチャットプログラムといったプログラム、すなわち、仮想オブジェクトを表示するプログラムであってもよい。

図３は、本実施形態に係る可搬合成画像表示装置１のハードウェア構成を示すブロック図である。

図３に示すように、可搬合成画像表示装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０、メモリ１１、操作部１２、表示部１３、補助記憶部２０、ネットワーク通信Ｉ／Ｆ３０、ＧＰＳ情報受信部４１、方位情報取得部４２、及び傾き情報取得部４３がバスラインＢＵＳにより接続されて構成されている。

ＣＰＵ１０は、可搬合成画像表示装置１を統括的に制御する部分であり、メモリ１１に記憶された各種プログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、本発明に係る各種機能を実現している。

操作部１２は、各種設定や入力操作を行う操作ボタン群、決定操作ボタン等を備えており、操作部１２による入力情報はＣＰＵ１０の制御下で処理される。表示部１３は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）によって構成され、各種情報を表示する。

補助記憶部２０は、フラッシュメモリ等により構成され、可搬合成画像表示装置１が機能するための各種プログラム及び本発明の機能を実行するプログラムを記憶しており、更に、風景画像ＤＢ２０１と、仮想オブジェクトＤＢ２０２等の各種データベースを構成可能である。

ネットワーク通信Ｉ／Ｆ３０は、可搬合成画像表示装置１を専用ネットワーク又は公共ネットワークを介してネットワーク上に存在するサーバ等と接続できるようにするためのネットワーク・アダプタである。

ＧＰＳ情報受信部４１は、ＧＰＳ衛星から電波を受信する。ＧＰＳ情報受信部４１は、無線通信に必要なアンテナ及びアンテナ信号処理回路等を含んで構成される。ＧＰＳ情報受信部４１は、受信した電波に基づいて処理を行い、位置情報を取得する。

方位情報取得部４２は、地磁気センサ４２０から方位情報を取得する。

傾き情報取得部４３は、加速度センサ４３０から傾き情報を取得する。

なお、可搬合成画像表示装置１は、いわゆるＧＰＳ受信機能、地磁気センサ４２０、加速度センサ４３０を備えた携帯端末であるものとする。表示は省略するが、無線通信部、音声処理部、マイク、スピーカ、電源部といった携帯端末が備えている一般的な構成を有しているものとする。

また、本実施形態では、いわゆるＧＰＳ受信機能、地磁気センサ４２０、加速度センサ４３０を備えた携帯端末としたが、これに限らない。例えば、ＧＰＳ受信機能、地磁気センサ４２０、加速度センサ４３０を備えた携帯式のゲーム機といった、ＧＰＳ受信機能、地磁気センサ４２０、加速度センサ４３０を備えた機器であって、可搬性のあるものであればよい。

［処理フロー］
図４は、本実施形態に係る可搬合成画像表示装置１の処理内容を示すフローチャートである。

ステップＳ１１０では、ゲームプログラム２００は、操作部１２においてユーザによる所定の操作が受け付けられると、ＧＰＳ情報受信部４１、方位情報取得部４２、及び傾き情報取得部４３に対して、それぞれ可搬合成画像表示装置１の位置、方位、及び傾きの特定させる。

ステップＳ１２０では、ＧＰＳ情報受信部４１は、可搬合成画像表示装置１の位置情報を特定する。

ステップＳ１３０では、方位情報取得部４２は、可搬合成画像表示装置１の方位情報を特定する。

ステップＳ１４０では、傾き情報取得部４３は、可搬合成画像表示装置１の傾き情報を特定する。

ステップＳ１５０では、表示画像決定部１０４は、位置情報、方位情報、及び傾き情報に基づいて、風景画像ＤＢ２０１から表示部１３に表示する風景画像ファイルを決定する。

ステップＳ１６０では、画像合成部１０５は、表示部１３に表示することが決定された風景画像ファイルに対して仮想オブジェクトの合成を行う。

ステップＳ１７０では、表示部１３は、合成された画像の表示を行う。

［合成画像の表示例］
図５から図７は、本実施形態に係る表示部１３に対して仮想オブジェクトが合成された風景画像ファイルについて説明するための図である。

図５は、本実施形態に係る表示部１３に表示することが決定された画像ファイルに対して、画像合成部１０５により仮想オブジェクトの合成が行われる前の状態を示す図である。図５は、仮想オブジェクトが表示される前の風景画像ファイルであるので、風景画像のみが表示されており、この風景画像ファイルに対して画像合成部１０５により、仮想オブジェクトの合成が行われる。

図６及び図７は、本実施形態に係る表示部１３に表示することが決定された画像ファイルに対して、画像合成部１０５により仮想オブジェクトの合成が行われた後の状態を示す図である。

図６では、ゲームプログラム２００により選択された仮想オブジェクトであるキャッチボールゲームを行うためのキャラクタ３０１と、グローブ３０２とが、画像合成部１０５により、風景画像に対して合成されていることが確認できる。また、図７では、ゲームプログラム２００が実在の場所で仮想モンスターとの対戦を行うゲームプログラムである場合に、ゲームプログラム２００により選択された仮想オブジェクトであるモンスター３０３と、武器選択画像３０４とが、画像合成部１０５により、風景画像に対して合成されていることが確認できる。

図５から図７に示されるように、画像ファイルには、風景画像ＤＢ２０１において、仮想オブジェクト表示位置が予め関連付けられており、この仮想オブジェクト表示位置は、仮想オブジェクトが画像ファイルに対して最適に合成されるように予め決定されている。このため、風景画像ファイルに対して仮想オブジェクトを常に最適な位置に表示させることができるので、動画像のぶれや適切な位置に仮想オブジェクトが表示されないといった問題が発生しない。したがって、ユーザは、動画像の向きのぶれ等によるゲームの操作性の煩わしさを感じることなく、リアリティのある実在の場所の風景の中でゲーム等を行うことができる。また、仮想オブジェクトの表示位置を都度決定する必要がないため、仮想オブジェクトの表示位置を決定するといったシステム負荷を軽減することができる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施例に記載されたものに限定されるものではない。

本実施形態に係る可搬合成画像表示装置１の機能を示す機能ブロック図である。 本実施形態に係る風景画像ＤＢ２０１を示す図である。 本実施形態に係る可搬合成画像表示装置１のハードウェア構成を示すブロック図である。 本実施形態に係る可搬合成画像表示装置１の処理内容を示すフローチャートである。 本実施形態に係る表示部１３に表示することが決定された画像ファイルに対して、画像合成部１０５により仮想オブジェクトの合成が行われる前の状態を示す図である。 本実施形態に係る表示部１３に表示することが決定された画像ファイルに対して、画像合成部１０５により仮想オブジェクトの合成が行われた後の状態を示す図である。 本実施形態に係る表示部１３に表示することが決定された画像ファイルに対して、画像合成部１０５により仮想オブジェクトの合成が行われた後の状態を示す図である。

符号の説明

１ 可搬合成画像表示装置
１２ 操作部
１３ 表示部
２０ 補助記憶部
４１ ＧＰＳ情報受信部
４２ 方位情報取得部
４３ 傾き情報取得部
１０４ 表示画像決定部
１０５ 画像合成部
２００ ゲームプログラム
２０１ 風景画像ＤＢ
２０２ 仮想オブジェクトＤＢ
４２０ 地磁気センサ
４３０ 加速度センサ

Claims (5)

1. 予め撮像して記憶した風景画像に仮想オブジェクトを合成して表示する可搬合成画像表示装置であって、
   前記風景画像を撮像した位置情報及び向き情報に関連付けて前記風景画像を予め記憶する風景画像記憶手段と、
   前記可搬合成画像表示装置の位置を示す位置情報を取得する位置情報取得手段と、
   前記可搬合成画像表示装置の向きを示す向き情報を取得する向き情報取得手段と、
   予め記憶した前記風景画像の中から、前記位置情報及び前記向き情報に基づいて前記可搬合成画像表示装置に表示する風景画像を決定する画像決定手段と、
   決定した前記風景画像に、前記仮想オブジェクトを合成して表示する画像合成表示手段と、
   を備える可搬合成画像表示装置。
2. 地球上の位置を特定するための全地球測位システムの衛星からデータを受信するＧＰＳ受信手段を更に備え、
   前記位置情報取得手段は、前記ＧＰＳ受信手段より受信したデータに基づいて前記可搬合成画像表示装置の位置を示す前記位置情報を取得することを特徴とする請求項１に記載の可搬合成画像表示装置。
3. 地磁気を検出する地磁気検出手段を更に備え、
   前記向き情報取得手段は、前記地磁気検出手段が検出した前記地磁気に基づいて前記向き情報を取得することを特徴とする請求項１又は２に記載の可搬合成画像表示装置。
4. 前記予め撮像した風景画像は、通信ネットワークを介して前記可搬合成画像表示装置と接続可能な風景画像記憶装置に記憶されており、
   取得した前記可搬合成画像表示装置の位置情報に基づいて、対応する前記風景画像を前記風景画像記憶装置から受信することを特徴とする請求項１から３のいずれかに記載の可搬合成画像表示装置。
5. 予め撮像して記憶した風景画像に仮想オブジェクトを合成して可搬合成画像表示装置に表示する可搬合成画像表示方法であって、
   前記風景画像を撮像した位置情報及び向き情報に関連付けて前記風景画像を予め記憶するステップと、
   前記可搬合成画像表示装置の位置を示す位置情報を取得するステップと、
   前記可搬合成画像表示装置の向きを示す向き情報を取得するステップと、
   予め記憶した前記風景画像の中から、前記位置情報及び前記向き情報に基づいて前記可搬合成画像表示装置に表示する風景画像を決定するステップと、
   決定した前記風景画像に、前記仮想オブジェクトを合成して前記可搬合成画像表示装置に表示するステップと、
   を含むことを特徴とする可搬合成画像表示方法。

Images