JP2017168132A - 仮想オブジェクトの表示システム、表示システムプログラム及び表示方法 - Google Patents

Abstract

【課題】端末４００に表示される土地や構造物等の目標物Ｔと仮想オブジェクトＶの相対位置を略同一として、端末４００に表示される仮想オブジェクトＶの表示を変化させること。【解決手段】撮像部４２０を備える端末４００で目標物Ｔを撮像することにより、端末４００の表示部４５０に表示される目標物Ｔに対して、仮想オブジェクトＶを重畳表示する表示システム１００の端末４００であって、端末４００は、目標物Ｔの位置を決定し、仮想オブジェクトＶを表示部４５０に重畳表示させる第１表示処理部４３０を含み、表示処理部２３０は、目標物Ｔと仮想オブジェクトＶとの相対位置を略同一に表示させる表示システム１００の端末４００を提供する。【選択図】図４

Description

本発明は、仮想オブジェクトの表示システム、表示システムプログラム及び表示方法に関する。

近年、表示画面に表示された実空間に対して、仮想オブジェクトを表示する拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）に関する技術が注目されている。

仮想オブジェクトは、一般的には、スマートフォン等の携帯電話、タブレット等の通信端末、ヘッドマウントディスプレイ、眼鏡型端末等のウェアラブル端末等の表示画面に表示される。

特許文献１に係る発明は、表示装置は、撮像した画像に情報を付加して表示する表示装置であり、対象空間の画像を撮像する撮像部と、撮像した画像から、対象空間内の、例えば、建築物等の構造物の立体形状を判別する判別部と、判別された立体形状に基づいて、構造物の特定の箇所に対応する画像中の領域に情報を付加して表示する表示処理部とを備えるものである。

特開２０１３−２１４９１３号公報

特許文献１に係る発明は、建築物等の構造物の立体形状を判別し、表示処理部によって画像中の領域に仮想オブジェクトの情報を表示させることができる。

しかしながら、表示画面に仮想オブジェクトを表示させるのみであり、表示画面に表示される構造物と共に仮想オブジェクトの向き・大きさは変化しない。

本発明の目的は、端末に表示される構造物等と仮想オブジェクトの相対位置を略同一として、端末に表示される仮想オブジェクトの表示を変化させることである。

本発明に係る表示システムの端末は、撮像部を備える端末で目標物を撮像することにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムの端末であって、
前記端末は、
前記目標物の位置を決定し、前記仮想オブジェクトを前記表示部に重畳表示させる表示処理部を含み、
前記表示処理部は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させるものである。

このようなものであれば、例えば、タブレット等の端末の撮像部で目標物を撮像する位置が変われば、目標物に合わせて仮想オブジェクトの表示も変化する。

したがって、端末が目標物に近づけば、仮想オブジェクトの表示は、他に表示されているものと同様に大きくなる。また、端末が目標物から離れれば、仮想オブジェクトの表示は、他に表示されているものと同様に小さくなる。

「仮想オブジェクト」とは、ＡＲ、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）又はＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）に用いられる仮想物のことである。仮想オブジェクトは２次元画像、３次元画像いずれであってもよいが、３次元画像が好ましい。

仮想オブジェクトが３次元画像であれば、タブレット等の端末の利用者は、様々な角度から仮想オブジェクトを見ることができる。

仮想オブジェクトの例としては、家、ビル、マンション等の建築物、看板、車、家具、ピアノ、植木、植栽、標識等が挙げられる。

例えば、目標物が土地で仮想オブジェクトが建築物（仮想建築物）の場合、仮想建築物が実際にその土地に建っているかのように表示部に表示される。

したがって、家を建てようとしている人は、仮想建築物を表示部であるディスプレイで見ることで、どのような状態になるかイメージし易くなる。

また、タブレット等の端末の利用者は、仮想建築物から離れれば、仮想建築物が小さく表示され、仮想建築物に近づけば、仮想建築物が大きく表示される。

また、タブレット等の端末の利用者は、仮想建築物の側面や後面を見たりすることもできる。つまり、タブレット等の端末の利用者は、仮想建築物が実際にその土地に建っているかのように表示部のディスプレイで見ることができる。

仮想オブジェクトが看板（仮想看板）の場合、例えば店舗の看板がどのような状態になるか、看板を設置しようとしている人は、仮想看板をタブレット等の端末のディスプレイでみることで、イメージがし易くなる。つまり、看板のデザインと店舗等の愛称、看板の設置場所等の検討がし易くなる。

仮想オブジェクトが家具（仮想家具）の場合、家具を買おうとしている人は、仮想家具を表示部であるディスプレイでみることで、家具と部屋の愛称、設置場所等、どのような状態になるかイメージがし易くなる。

この場合、タブレット等の端末の利用者は、様々な角度から仮想家具をディスプレイで見ることができ、購入意欲が湧き易い。

前記表示処理部が、前記目標物に対して、前記表示部に表示される仮想上のターゲットエリアが合わせられることにより、前記目標物の位置を決定する位置決定部と、
前記位置決定部によって決定された位置に対して、前記仮想オブジェクトを重畳表示する重畳表示部と、を含むものが好ましい。このようなものであれば、現実の目標物にマーカを設けなくてもよい。なお、目標物の形状とターゲットエリアの形状は同一でなくてもよい。

前記端末が前記目標物に近づく場合、前記表示部に重畳表示される前記仮想オブジェクトが前記目標物と共に大きく表示され、
前記端末が前記目標物から離れる場合、前記表示部に重畳表示される前記仮想オブジェクトが前記目標物と共に小さく表示されるものが好ましい。

このようなものであれば、例えば、目標物が土地で仮想オブジェクトが建築物（仮想建築物）の場合、仮想建築物が実際にその土地に建っているかのように表示部に表示される。

したがって、家を建てようとしている人は、仮想建築物を表示部であるディスプレイで見ることで、どのような状態になるかイメージし易くなる。

また、例えば、看板を設置しようとしている人は、仮想看板を表示部であるディスプレイで見ることで、どのような状態になるかイメージし易くなる。

前記仮想オブジェクトが建築物又は看板であってもよい。このようなものであれば、家を建てようとしている人は、仮想建築物を表示部であるディスプレイで見ることで、どのような状態になるかイメージし易くなる。

また、看板を設置しようとしている人は、仮想看板を表示部であるディスプレイで見ることで、どのような状態になるかイメージし易くなる。

本発明に係る表示システムのサーバは、撮像部を備える端末で目標物を撮像することにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムのサーバであって、
前記サーバは、
前記目標物の位置を決定し、前記仮想オブジェクトを重畳表示させる表示処理部を含み、
前記表示処理部は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させるものである。

上述したものは、表示処理部が端末に含まれるものであるが、表示処理部はサーバに含まれるものであってもよい。このようなものであっても上述した表示処理部が端末に含まれる場合と同様の効果を奏する。

本発明に係る表示方法は、撮像部を備える端末で目標物が撮像されることにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示方法であって、
前記端末で前記目標物を撮像する撮像工程と、
前記撮像工程により前記表示部に表示される前記目標物にターゲットエリアが合わせられて、前記目標物の位置を決定する位置決定工程と、
前記位置決定工程により前記目標物に合わせられたターゲットエリア上に前記仮想オブジェクトを前記表示部に重畳表示する重畳表示工程と、を含み、
前記位置決定工程と前記重畳表示工程により、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させる方法である。このような方法であれば、上記と同様の効果を奏する。

本発明に係る表示システムのプログラムは、撮像部を備える端末で目標物が撮像されることにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムのプログラムであって、
前記プログラムは、
前記目標物の位置が決定され、前記仮想オブジェクトを前記表示部に表示させる表示処理を含み、
前記表示処理は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させるプログラムである。このようなプログラムであれば、上記と同様の効果を奏する。

本発明に係る一実施形態における表示システムの概念図。 本発明に係る一実施形態における表示システムの第２端末。 本発明に係る一実施形態における表示システムの概念図。 本発明に係る一実施形態における表示システムの第２端末。 本発明に係る一実施形態における表示システムの概念図。 本発明に係る一実施形態における表示システムの概念図。 本発明に係る一実施形態における表示システムの第２端末。 本発明に係る一実施形態における表示システムのフローチャート。

以下、本発明に係る表示システム１００の実施形態に関して図面を参照しながら説明する。

＜第１実施形態＞
図１に示すように、本実施形態に係る表示システム１００は、サーバである第１クラウドサーバ２００と、
第１クラウドサーバ２００にアクセスすることが可能な端末である第１端末３００と、
第１クラウドサーバ２００にアクセスすることが可能な端末である第２端末４００と、を含む。

第１クラウドサーバ２００は、クラウド上に構築されたサーバであり、インターネットを通じてサーバ機能を利用することができるものである。なお、本実施形態では、サーバとして第１クラウドサーバ２００を用いているが、クラウドサーバ以外のサーバであってもよい。

第１クラウドサーバ２００は、第１端末３００及び第２端末４００がインターネットで接続可能な通信部２１０と、
仮想オブジェクトＶを第１クラウドサーバ２００内に記憶させる記憶部２２０と、を含む。

通信部２１０は、第１端末３００及び第２端末４００と通信する。通信方法は、有線、無線いずれであってもよい。通信部２１０と第２端末４００との通信は、Ｗｉ−Ｆｉ、Ｂｅａｃｏｎ、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）等の無線が好ましい。第１端末３００及び第２端末４００は、複数あってもよい。

記憶部２２０は、仮想オブジェクトＶを記憶（保存）する。つまり、パソコン等の第１端末３００の利用者は、第１端末３００で作成された仮想オブジェクトＶを、第１通信部３１０を介して、第１クラウドサーバ２００の記憶部２２０に仮想オブジェクトＶを保存することができる。なお、本実施形態における仮想オブジェクトＶは、家、マンション等の建築物（仮想建築物Ｂ）である。

（第１端末３００）
端末である第１端末３００は、第１クラウドサーバ２００にアクセスするため、インターネットにアクセスするための通信機能である第１通信部３１０と、
仮想オブジェクトＶを作成する作成部３２０と、
仮想オブジェクトＶを記憶する第１記憶部３３０と、
仮想オブジェクトＶを表示する第１表示部３４０と、を含む。

第１端末３００の例としては、パソコン、スマートフォン（携帯電話）、タブレット等が挙げられる。

第１通信部３１０は、インターネットをするための通信を行うところである。第１通信部３１０により、第１端末３００は、第１クラウドサーバ２００にアクセスすることができる。

なお、第１通信部３１０では、Ｗｉ−Ｆｉ等の無線ＬＡＮ又は有線ＬＡＮ等でインターネットにアクセスすることも含まれる。

作成部３２０では、第１端末３００の利用者によって、仮想オブジェクトＶが作成される。本実施形態における仮想オブジェクトＶは、家、マンション、ビル等の仮想建築物Ｂである。

作成部３２０には、３Ｄキャド等のソフトウェアも含まれる。したがって、第１端末３００の利用者が、第１端末３００の作成部３２０で仮想建築物Ｂ等の仮想オブジェクトＶを作成する。

第１記憶部３３０では、作成部３２０で作成された仮想オブジェクトＶが記憶される。したがって、第１端末３００の利用者は、第１端末３００の作成部３２０で作成された仮想建築物Ｂ等の仮想オブジェクトＶを、第１記憶部３３０に保存する。

第１記憶部３３０では、複数の仮想オブジェクトＶが記憶可能である。なお、作成部３２０で作成された仮想オブジェクトＶを第１記憶部３３０で記憶せずに、直接第１クラウドサーバ２００の記憶部２２０に記憶されてもよい。

つまり、第１端末３００の作業者は、仮想オブジェクトＶを第１端末３００の第１記憶部３３０に保存したが、第１記憶部３３０に保存せずに、直接、第１クラウドサーバ２００にアップロードし、第１クラウドサーバ２００に保存してもよい。

第１表示部３４０では、作成部３２０で作成された仮想オブジェクトＶが表示される。また、第１表示部３４０では、第１クラウドサーバ２００にアップロードされた仮想オブジェクトＶを表示させることができる。

（第２端末４００）
端末である第２端末４００は、インターネットにアクセスするための通信機能である第２通信部４１０と、
撮像することが可能な撮像部４２０と、
第１クラウドサーバ２００の第１記憶部２２０に記憶された仮想オブジェクトＶを第２端末４００に表示させる表示処理部である第１表示処理部４３０と、
第１表示処理部４３０を起動させるためのアプリケーションである第１アプリ４４０と、
仮想オブジェクトＶ、画像及び動画等を記憶することが可能な第２記憶部４５０と、
第１クラウドサーバ２００に保存されている仮想オブジェクトＶが表示される表示部である第２表示部４６０と、を含む。

第２端末４００の例は、スマートフォン、ノートパソコン、タブレット等が挙げられる。

第２通信部４１０は、インターネットにアクセスするための通信を行うところである。第２通信部４１０により、第２端末４００は、第１クラウドサーバ２００にアクセスすることができる。

撮像部４２０は、撮像することができるところである。例としては、第２端末４００がスマートフォンやタブレットの場合、それに備え付けられているのカメラが挙げられる。

撮像部４２０では、画像や動画を撮ることができる。撮像部４２０を起動するためのアイコン（図示しない）が第２表示部４６０に表示されている。当該アイコンが選択されることにより、撮像部４２０が起動する。

なお、第２端末４００の利用者は、撮像部４２０が起動している状態でも、第１アプリ４４０を起動させることができる。

本実施形態では、第２端末４００に撮像部４２０が含まれているが、撮像部４２０が外部装置であってもよい。つまり、スマートフォン等の第２端末４００に対して、ケーブル等で撮像部４２０であるカメラが取り付けられる構成であってもよい。

第１表示処理部４３０は、タブレット等の第２端末４００の第２表示部４６０に仮想オブジェクトＶを表示させる。つまり、第２端末４００の利用者が、第２通信部４１０を介して第１クラウドサーバ２００にアクセスすることにより、第２端末４００の第２表示部４６０に、仮想オブジェクトＶが表示される。

具体的には、第２端末４００の第１アプリ４４０が起動されることにより、第１表示処理部４３０が作動する。第１表示処理部４３０の作動内容に関しては後述する。

第１アプリ４４０は、第１表示処理部４３０を起動させるためのアプリケーションソフトである。第１アプリ４４０が第２端末４００にダウンロードされることにより、第１表示処理部４３０が第２端末４００にダウンロードされる。第１アプリ４４０は、第１クラウドサーバ２００からダウンロードすることができる。

また、第１アプリ４４０が第２端末４００にダウンロードされることにより、第２端末４００の第２表示部４６０である画面上に、第１アプリ４４０のアイコン（図示しない）が表示される。

本実施形態では、第１アプリ４４０のアイコン（図示せず）が第２端末４００の第２表示部４６０に表示されている。第２端末４００の利用者は、第１アプリ４４０のアイコンを選択することにより、第１アプリ４４０が起動する。

そして、第１アプリ４４０が起動することにより、第１表示処理部４３０が起動する。第１表示処理部４３０が起動することにより、第２端末４００は、第２通信部４１０を介して、第１クラウドサーバ２００にアクセスし、仮想オブジェクトＶが第２表示部４６０に表示可能となる。

また、本実施形態では、第１アプリ４４０のアイコン（図示せず）が選択された場合、第１アプリ４４０が起動し、それに伴って撮像部４２０が起動する。

具体的には、第１アプリ４４０が起動すると第１表示処理部４３０が起動する。そして、第１アプリ４４０は、撮像部４２０を起動させる。なお、第１表示処理部４３０が、第２端末４００の撮像部４２０を起動させてもよい。

言い換えると、第２端末４００の利用者は、第１アプリ４４０を起動させると、撮像部４２０が起動する。そして、第２端末４００の利用者は、例えば、第２端末４００がスマートフォンやタブレットの場合、当該利用者の所有する土地を撮像部４２０であるカメラで撮像することにより、当該利用者が建設を考えている仮想オブジェクトＶである仮想建築物Ｂを、第２表示部４６０であるディスプレイに表示させることができる。

第２記憶部４５０は、仮想オブジェクトＶ、画像及び動画等を記憶（保存）することができるところである。例えば、撮像部４２０で撮像した画像や動画を第２記憶部４５０に保存することができる。

なお、第１クラウドサーバ２００の記憶部２２０に保存（記憶）されている仮想オブジェクトＶは、第２記憶部４５０に記憶されてもよい。

（第１表示処理部４３０）
第１表示処理部４３０は、第２端末４００の第１アプリ４４０を起動させることにより起動する。

図１に示すように、第１表示処理部４３０は、第２端末４００の第２表示部４６０に仮想オブジェクトＶを表示させる位置を決定する位置決定部である第１位置決定部４３１と、
第１位置決定部４３１によって決定された位置に仮想オブジェクトＶを表示させる重畳表示部である第１重畳表示部４３２と、を含む。

第１位置決定部４３１は、仮想オブジェクトＶを配置させるための座標認識手段を有する。

図２に示すように、第１位置決定部４３１は、タブレット等の第２端末４００の第２表示部４６０に、仮想オブジェクトＶを配置させる位置を決定するためのターゲットエリア４３１ａを表示させる。

具体的には、図３に示すように、第１位置決定部４３１は、スマートフォン、タブレット等の第２端末４００と、目標物Ｔ（本実施形態では所定の土地）との間に投影面Ｐを想定して、第２表示部４６０上の目標物Ｔ（本実施形態では所定の土地）の座標を算出する。

投影面Ｐは、タブレット等の第２端末４００の第２表示部４６０と対応しており、投影面Ｐ上の目標物Ｔ（本実施形態では所定の土地）が第２表示部４６０に表示される。

より具体的には、第１位置決定部４３１は、撮像部４２０により第２表示部４６０に表示される画像をもとに、目標物Ｔの位置（ｘ_ａ，ｙ_ｂ，ｚ_ｃ）、第２端末４００から目標物Ｔまでの距離ｄ、投影面までの距離ｅの関係を用いて、投影面上のターゲットエリア４３１ａの座標を算出する。

本実施形態では、目標物Ｔは所定の土地であるため、例えば図３に示すような４点（ｘ_ａ１，ｙ_ｂ１，ｚ_ｃ１）（ｘ_ａ２，ｙ_ｂ２，ｚ_ｃ２）（ｘ_ａ３，ｙ_ｂ３，ｚ_ｃ３）（ｘ_ａ４，ｙ_ｂ４，ｚ_ｃ４）でターゲットエリア４３１ａの座標を算出する。

ターゲットエリア４３１ａの座標は、タブレット等の第２端末４００の位置を基準に算出される。タブレット等の第２端末４００の姿勢は、第２端末４００が有する加速度センサ及び地磁気センサの値を解析することにより求められる。

なお、タブレット等の第２端末４００の位置は、既存の位置推定技術を用いて推定されてもよい。例えば、第２端末４００の位置が、ＧＰＳ機能により判断されてもよい。

本実施形態では、第１位置決定部４３１は、水平機能を有している。このようなものであれば、ターゲットエリア４３１ａが水平に配置される。つまり、仮想オブジェクトＶが水平に重畳される。なお、第１位置決定部４３１が水平機能を有していないものであってもよい。

本実施形態では、ターゲットエリア４３１ａは枠線であり、形状は仮想オブジェクトＶによって異なる。ターゲットエリア４３１ａと目標物Ｔの形状は同一でなくてもよい。

本実施形態では、仮想オブジェクトＶである仮想建築物Ｂを第２表示部４６０に表示させるためのターゲットエリア４３１ａである。そのため、ターゲットエリア４３１ａは、仮想建築物Ｂを建設したい土地（目標物Ｔ）が、第２表示部４６０にどのように表示されるかによって形状が異なる。

つまり、タブレット等の第２端末４００の姿勢によって、ターゲットエリア４３１ａの形状が異なる。そして、そのターゲットエリア４３１ａの形状に合わせて仮想建築物Ｂの姿勢が決定し、仮想建築物Ｂが第２表示部４６０に表示される。

第２表示部４６０に表示されている第１アプリ４４０が起動した場合、撮像部４２０が起動する。そして、その場合、第２表示部４６０上には、配置ボタン４４１と、リセットボタン４４２と、左右ボタン４４３と、上下ボタン４４４と、前後ボタン４４５と、カメラボタン４４６と、ライブラリボタン４４７と、写真ボタン４４８と、設定ボタン４４９と、が表示される。

なお、各ボタンの第２表示部４６０上の配置や形状はどのようなものであってもよく、特に限定されない。

配置ボタン４４１は、仮想オブジェクトＶを第２表示部４６０上に表示させるためのボタンである。

第２端末４００の利用者は、第２表示部４６０上の配置ボタン４４１を選択することにより、仮想オブジェクトＶが第２表示部４６０に表示される。したがって、第２端末４００の利用者は、仮想建築物Ｂをターゲットエリア４３１ａ上に表示させることができる。

リセットボタン４４２は、配置ボタン４４１により第２表示部４６０に表示された仮想オブジェクトＶを第２表示部４６０から消すためのボタンである。

第２端末４００の利用者は、第２表示部４６０上のリセットボタン４４２を選択することにより、仮想オブジェクトＶを第２表示部４６０から消すことができる。

左右ボタン４４３、上下ボタン４４４及び前後ボタン４４５は、第２表示部４６０に表示されてるターゲットエリア４３１ａの位置や大きさを調整するためのボタンである。

つまり、ターゲットエリア４３１ａは、第２端末４００の利用者が第２表示部４６０に表示される左右ボタン４４３、上下ボタン４４４、及び、前後ボタン４４５を選択することにより、ターゲットエリア４３１ａの位置や大きさが変更される。

なお、第２端末４００の利用者が第２表示部４６０に表示されているターゲットエリア４３１ａを指で触れることにより、ターゲットエリア４３１ａの位置や大きさが変更されるものであってもよい。

カメラボタン４４６は、第２表示部４６０で表示されている画像の写真を撮るボタンである。

これにより仮想オブジェクトＶが表示された第２表示部４６０の画像が第２記憶部４５０に記憶される。

ライブラリボタン４４７は、第２記憶部４５０に保存（記憶）されている仮想オブジェクトＶを第２表示部４６０に表示させるためのものである。ライブラリボタン４４７が選択されることにより、保存（記憶）されている仮想オブジェクトＶが第２表示部４６０に表示される。

ライブラリボタン４４７が選択されると、コード入力欄が第２表示部４６０に表示される。このコード入力欄に予め定められた画像コードや仮想オブジェクトＶのコードが入力されることにより、第２記憶部４５０に保存（記憶）されていない画像や仮想オブジェクトＶが第２表示部４６０に表示される。

これにより、第２端末４００の利用者は、使用している第２端末４００以外の第２端末４００を用いて、仮想オブジェクトＶをその第２端末４００の第２表示部４６０に表示させることができる。

写真ボタン４４８は、第２記憶部４５０に保存（記憶）されている、カメラボタン４４６によって撮られた画像を見るためのものである。写真ボタン４４８が選択されることにより、カメラボタン４４６によって撮られた画像が第２表示部４６０に表示される。

設定ボタン４４９は、第１アプリ４４０の設定を変更するためのボタンである。

図４に示すように、第１重畳表示部４３２は、第２端末４００の第２表示部４６０に仮想オブジェクトＶを重畳表示させる。

本実施形態では、第１重畳表示部４３２は、ターゲットエリア４３１ａと、仮想建築物Ｂの底面とを合わせるように、仮想建築物Ｂを第２表示部４６０に重畳表示させる。

これにより、第２端末４００の位置が変わった場合、その角度に合わせた仮想建築物Ｂが第２表示部４６０に表示される。

つまり、第２端末４００の利用者は、目標物Ｔである土地をいずれの角度から見ても、その角度に合わせた仮想建築物Ｂを、第２表示部４６０で見ることができる。

また、第２端末４００が仮想建築物Ｂ側に近づいた場合、第２表示部４６０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、第２表示部４６０に大きく表示される。

第２端末４００が仮想建築物Ｂ側から離れた場合、第２表示部４６０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、第２表示部４６０に小さく表示される。

つまり、第２端末４００の利用者は、目標物Ｔに近づいた場合、第２表示部４６０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、大きく表示される。

第２端末４００の利用者は、目標物Ｔから離れた場合、第２表示部４６０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、小さく表示される。

このように仮想建築物Ｂが第２端末４００の第２表示部４６０に表示されれば、第２端末４００の利用者は、家を購入する前に、どのように家が配置されるのかよくわかる。

図５に示すように、第２端末４００は、複数あってもよい。図５では、第２端末４００が、第２端末４００ａ、第２端末４００ｂ、第２端末４００ｃ、第２端末４００ｄと複数ある。なお、第２端末４００の数は限定されない。

つまり、１以上の第２端末４００が第１クラウドサーバ２００にアクセスされてもよい。また、第１端末３００は複数であってもよい。

＜第２実施形態＞
第２実施形態では、第１実施形態と同様の内容に関しては、省略して又は簡単に説明する。

図６に示すように、本実施形態に係る表示システム１００は、サーバである第２クラウドサーバ２５０と、
第２クラウドサーバ２５０にアクセスすることが可能な端末である第１端末３００と、
第２クラウドサーバ２５０にアクセスすることが可能な端末である第２端末５００と、を含む。

第２クラウドサーバ２５０は、第１クラウドサーバ２００と同様に、クラウド上に構築されたサーバであり、インターネットを通じてサーバ機能を利用することができるものである。

第２クラウドサーバ２５０は、第１端末３００及び第２端末５００がインターネットで接続可能な通信部２１０と、
仮想オブジェクトＶを第２クラウドサーバ２５０内に記憶させる記憶部２２０と、
第１記憶部２２０に記憶された仮想オブジェクトＶを第２端末５００の第２表示部５５０に表示させる表示処理部である第２表示処理部２３０と、を含む。

通信部２１０は、第１端末３００及び第２端末５００と通信する。通信部２１０は、第１実施形態と同様であるため詳細な説明は省略する。

記憶部２２０は、仮想オブジェクトＶを記憶（保存）する。記憶部２２０は、第１実施形態と同様であるため詳細な説明は省略する。

第２表示処理部２３０は、タブレット等の第２端末５００の第２表示部５５０に仮想オブジェクトＶを表示させる。つまり、第２端末５００の利用者が、第２通信部５１０を介して第２クラウドサーバ２５０にアクセスすることにより、第２端末５００の第２表示部５５０に、仮想オブジェクトＶが表示される。

具体的には、第２端末５００の第２アプリ５３０が起動されることにより、第２表示処理部２３０が作動する。第２表示処理部２３０の作動内容は、第１表示処理部４３０と同様である。

端末である第１端末３００は、第２クラウドサーバ２５０にアクセスするため、インターネットにアクセスするための通信機能である第１通信部３１０と、
仮想オブジェクトＶを作成する作成部３２０と、
仮想オブジェクトＶを記憶する第１記憶部３３０と、
仮想オブジェクトＶを表示する第１表示部３４０と、を含む。第１端末３００は、第１実施形態と同様であるため詳細な説明は省略する。

（第２端末５００）
端末である第２端末５００は、インターネットにアクセスするための通信機能である第２通信部５１０と、
撮像することが可能な撮像部５２０と、
第２クラウドサーバ２５０の第２表示処理部２３０を起動させるためのアプリケーションである第２アプリ５３０と、
仮想オブジェクトＶ、画像及び動画等を記憶することが可能な第２記憶部５４０と、
第２クラウドサーバ２５０に保存されている仮想オブジェクトＶが表示される第２表示部５５０と、を含む。

第２端末５００の例は、スマートフォン、ノートパソコン、タブレット等が挙げられる。

第２通信部５１０は、インターネットにアクセスするための通信を行うところである。第２通信部５１０により、第２端末５００は、第２クラウドサーバ２５０にアクセスすることができる。

撮像部５２０は、撮像することができるところである。撮像部５２０は、第１実施形態と同様であるため詳細な内容は省略する。

第２アプリ５３０は、第２クラウドサーバ２５０の第２表示処理部２３０を起動させるためのアプリケーションソフトである。第２アプリ５３０が第２端末５００にダウンロードされることにより、第２端末５００の第２表示部５５０である画面上に、第２アプリ５３０のアイコン（図示しない）が表示される。

本実施形態では、第２アプリ５３０のアイコン（図示せず）が第２端末５００の第２表示部５５０に表示されている。第２端末５００の利用者は、第２アプリ５３０のアイコンを選択することにより、第２アプリ５３０が起動する。そして、第２通信部５１０を介して、第２クラウドサーバ２５０にアクセスし、第２表示処理部２３０が起動する。

また、本実施形態では、第２アプリ５３０のアイコン（図示せず）が選択された場合、第２アプリ５３０が起動し、それに伴って撮像部５２０が起動する。

具体的には、第２アプリ５３０が起動すると第２表示処理部２３０が起動する。そして、第２アプリ５３０は、第２端末５００の撮像部５２０を起動させる。

言い換えると、第２端末５００の利用者は、第２アプリ５３０を起動させると、撮像部５２０が起動する。そして、第２端末５００の利用者は、例えば、第２端末５００がスマートフォンやタブレットの場合、当該利用者の所有する土地を撮像部５２０であるカメラで撮像することにより、当該利用者が建設を考えている仮想オブジェクトＶである仮想建築物Ｂを、第２表示部５５０であるディスプレイに表示させることができる。

第２記憶部５４０は、仮想オブジェクトＶ、画像及び動画等を記憶（保存）することができるところである。例えば、撮像部５２０で撮像した画像や動画を第２記憶部５４０に保存することができる。

なお、第２クラウドサーバ２５０の記憶部２２０に保存（記憶）されている仮想オブジェクトＶは、第２記憶部５４０に記憶されてもよい。

（第２表示処理部２３０）
上述したように、第２クラウドサーバ２５０は、第２表示処理部２３０を含む。そして、第２表示処理部２３０は、第２端末５００の第２アプリ５３０を起動させることにより起動する。

図６に示すように、第２表示処理部２３０は、第２端末５００の第２表示部５５０に仮想オブジェクトＶを表示させる位置を決定する位置決定部である第２位置決定部２３１と、
第２位置決定部２３１によって決定された位置に仮想オブジェクトＶを表示させる重畳表示部である第２重畳表示部２３２と、を含む。

第２位置決定部２３１は、仮想オブジェクトＶを配置させるための座標認識手段を有する。第２位置決定部２３１は、第１位置決定部４３１と同様であるため、詳細な説明は省略する。

第２表示部５５０に表示されている第２アプリ５３０が起動した場合、撮像部４２０が起動する。そして、その場合、第２表示部５５０上には、第１表示部４６０と同様に、配置ボタン４４１と、リセットボタン４４２と、左右ボタン４４３と、上下ボタン４４４と、前後ボタン４４５と、カメラボタン４４６と、ライブラリボタン４４７と、写真ボタン４４８と、設定ボタン４４９と、が表示される。各種ボタンの説明は、第１実施形態と同様であるため省略する。

図４に示すように、第２重畳表示部２３２は、第２端末５００の第２表示部５５０に仮想オブジェクトＶを重畳表示させる。

本実施形態では、第２重畳表示部２３２は、ターゲットエリア４３１ａと、仮想建築物Ｂの底面とを合わせるように、仮想建築物Ｂを第２表示部５５０に重畳表示させる。

これにより、第２端末５００の位置が変わった場合、その角度に合わせた仮想建築物Ｂが第２表示部５５０に表示される。

つまり、第２端末５００の利用者は、目標物Ｔである土地をいずれの角度から見ても、その角度に合わせた仮想建築物Ｂを、第２表示部５５０で見ることができる。

また、第２端末５００が仮想建築物Ｂ側に近づいた場合、第２表示部５５０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、第２表示部５５０に大きく表示される。

第２端末５００が仮想建築物Ｂ側から離れた場合、第２表示部５５０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、第２表示部５５０に小さく表示される。

つまり、第２端末５００の利用者は、目標物Ｔに近づいた場合、第２表示部５５０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、大きく表示される。

第２端末５００の利用者は、目標物Ｔから離れた場合、第２表示部５５０に表示される仮想建築物Ｂは、周りの実在する建築物と同様に、小さく表示される。

第２端末５００は、第１実施形態と同様に、複数あってもよい。なお、第２端末５００の数は限定されない。つまり、１以上の第２端末５００が第２クラウドサーバ２５０にアクセスされてもよい。

＜第３実施形態＞
第３実施形態では、第１実施形態及び第２実施形態と同様の内容に関しては、省略して又は簡単に説明する。また、第３実施形態では、第１実施形態の表示システム１００を用いて説明する。

図７に示すように、第３実施形態は、仮想オブジェクトＶか看板（仮想看板Ｎ）の場合である。この場合、目標物Ｔは、店舗等の建築物の外壁等である。

そして、第１実施形態及び第２実施形態と同様に、第２表示部４５０に表示されたターゲットエリア４３１ａの大きさや位置が調整され、第１位置決定部４３１によってターゲットエリア４３１ａの位置が決定される。

第２端末４００の利用者が配置ボタン４４１を選択することにより、第１位置決定部４３１によって決定されたターゲットエリア４３１ａ上に仮想看板Ｎが第２表示部４５０に表示される。

つまり、配置ボタン４４１が選択されることにより、第１位置決定部４３１によって決定されたターゲットエリア４３１ａ上に仮想看板Ｎが第２表示部４５０に表示される。なお、ターゲットエリア４３１ａと目標物Ｔの形状は一致しなくてもよい。

この場合、第２端末４００の利用者は、仮想看板Ｎの配置や大きさ、仮想看板Ｎと周りとの調和等の検討がし易い。

（仮想オブジェクトＶの表示に係るフローチャート）
図８を用いて、表示システム１００の一例についてフローチャートで説明する。

パソコン等の第１端末３００の作成部３２０を用いて、仮想オブジェクトＶが作成される（ステップＳ１１）。

作成部３２０を用いて作成された仮想オブジェクトＶが、第１記憶部３３０に記憶される（ステップＳ１２）。

第１端末３００の利用者は、作成された仮想オブジェクトＶを第１表示部３４０でどのように表示されるか確認することができる。

作成された仮想オブジェクトＶは、第１通信部３１０及び通信部２１０を介して第１クラウドサーバ２００の記憶部２２０に記憶（保存）される（ステップＳ１３）。

第２端末４００の利用者が、第１アプリ４４０を起動させる。つまり、第１アプリ４４０が起動する（ステップＳ１４）。これに連動して、第２端末４００では撮像部４２０が起動する。

また、第１アプリ４４０の起動に連動して、第１位置決定部４３１が起動し、第２表示部４６０にターゲットエリア４３１ａが表示される。

第２端末４００の利用者は、第１アプリ４４０の起動に連動して起動した撮像部４２０により目標物Ｔを撮像する。つまり、第１アプリ４４０の起動に連動して起動した撮像部４２０により、目標物Ｔが撮像される（ステップＳ１５、撮像工程）。

第２端末４００の利用者は、ターゲットエリア４３１ａを目標物Ｔに合わせる。つまり、第２表示部４６０でターゲットエリア４３１ａが、所定の目標物Ｔに合わせられる（ステップＳ１６、位置設定工程）。

なお、本実施形態では、ターゲットエリア４３１ａは、仮想オブジェクトＶの形状と、タブレット等の第２端末４００の姿勢とにより形状が決定する。

ターゲットエリア４３１ａは、自動的に目標物Ｔを認識するように設定されてもよく、第２端末４００の利用者の手動により、ターゲットエリア４３１ａが目標物Ｔに合わせられてもよい。

また、本実施形態では、ターゲットエリア４３１ａは、第２表示部４５０に表示される仮想上のものであるが、実際に目標物Ｔにターゲットエリアを設けてもよい。

第２端末４００の利用者は、ターゲットエリア４３１ａを目標物Ｔに合わせた状態で、配置ボタン４４１を選択する。つまり、ターゲットエリア４３１ａが目標物Ｔに合わせられた状態で、配置ボタン４４１が選択される（ステップＳ１７、重畳表示工程）。

これにより、仮想オブジェクトＶが第２表示部４６０に表示される（ステップＳ１８、重畳表示工程）。

例えば、仮想オブジェクトＶが仮想建築物Ｂであり、目標部Ｔが所定の土地の場合、タブレット等の第２端末４００の利用者は、ターゲットエリア４３１ａを目標物Ｔである土地に合わせ、配置ボタン４４１を選択することにより、仮想建築物Ｂが第２表示部４６０に表示される。

本発明は、その趣旨を逸脱しない範囲で種々の改良、修正、又は変形を加えた態様でも実施できる。

１００…表示システム
２００…第１クラウドサーバ（サーバ）
２１０…通信部
２２０…記憶部
２３０…第２表示処理部（表示処理部）
２３１…第２位置決定部（位置決定部）
２５０…第２クラウドサーバ（サーバ）
４３１ａ…ターゲットエリア
２３２…第２重畳表示部（重畳表示部）
３００…第１端末（端末）
３１０…第１通信部
３２０…作成部
３３０…第１記憶部
３４０…第１表示部（表示部）
４００…第２端末（端末）
４１０…第２通信部
４２０…撮像部
４３０…第１表示処理部（表示処理部）
４３１…第１位置決定部（位置決定部）
４３２…第１重畳表示部（重畳表示部）
４４０…第１アプリ（アプリケーション）
４５０…第２記憶部
４６０…第２表示部（表示部）
５００…第２端末（端末）
５４０…第２アプリ（アプリケーション）

Claims (7)

1. 撮像部を備える端末で目標物を撮像することにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムの端末であって、
   前記端末は、
   前記目標物の位置を決定し、前記仮想オブジェクトを重畳表示させる表示処理部を含み、
   前記表示処理部は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させる表示システムの端末。
2. 前記表示処理部が、前記目標物に対して、前記表示部に表示される仮想上のターゲットエリアが合わせられることにより、前記目標物の位置を決定する位置決定部と、
   前記位置決定部によって決定された位置に対して、前記仮想オブジェクトを重畳表示する重畳表示部と、を含む請求項１記載の表示システムの端末。
3. 前記端末が前記目標物に近づく場合、前記表示部に重畳表示される前記仮想オブジェクトが前記目標物と共に大きく表示され、
   前記端末が前記目標物から離れる場合、前記表示部に重畳表示される前記仮想オブジェクトが前記目標物と共に小さく表示される請求項１又は２記載の表示システムの端末。
4. 前記仮想オブジェクトは建築物又は看板である請求項１、２又は３記載の表示システムの端末。
5. 撮像部を備える端末で目標物を撮像することにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムのサーバであって、
   前記サーバは、
   前記目標物の位置を決定し、前記仮想オブジェクトを前記表示部に重畳表示させる表示処理部を含み、
   前記表示処理部は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させる表示システムのサーバ。
6. 撮像部を備える端末で目標物が撮像されることにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示方法であって、
   前記端末で前記目標物を撮像する撮像工程と、
   前記撮像工程により前記表示部に表示される前記目標物にターゲットエリアが合わせられて、前記目標物の位置を決定する位置決定工程と、
   前記位置決定工程により前記目標物に合わせられたターゲットエリア上に前記仮想オブジェクトを前記表示部に重畳表示する重畳表示工程と、を含み、
   前記位置決定工程と前記重畳表示工程により、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させる表示方法。
7. 撮像部を備える端末で目標物が撮像されることにより、前記端末の表示部に表示される前記目標物に対して、仮想オブジェクトを重畳表示する表示システムのプログラムであって、
   前記プログラムは、
   前記目標物の位置が決定され、前記仮想オブジェクトを前記表示部に表示させる表示処理を含み、
   前記表示処理は、前記目標物と前記仮想オブジェクトとの相対位置を略同一に表示させる表示システムのプログラム。
   
   
   

Images