JP6624646B2 - 情報提示システム、情報提示方法及び情報提示プログラム - Google Patents
情報提示システム、情報提示方法及び情報提示プログラム Download PDFInfo
- Publication number
- JP6624646B2 JP6624646B2 JP2017020972A JP2017020972A JP6624646B2 JP 6624646 B2 JP6624646 B2 JP 6624646B2 JP 2017020972 A JP2017020972 A JP 2017020972A JP 2017020972 A JP2017020972 A JP 2017020972A JP 6624646 B2 JP6624646 B2 JP 6624646B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual
- information
- display
- unit
- display data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
実空間の映像を撮像するカメラ部と、
前記実空間の座標系における位置及び方向を現在位置情報として取得する位置情報取得部と、
前記実空間の座標系における地理情報を含む現実地図情報を取得する現実地図取得部と、
前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得する仮想地図取得部と、
前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成する仮想現実表示データ生成部と、
前記実空間における座標系に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを、前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する拡張現実表示データ生成部と、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を実行する表示制御部と、
前記表示制御部により表示遷移処理された仮想表示データ及び拡張表示データを表示する表示部と
を備えることを特徴とする。
カメラ部が実空間の映像を撮像するとともに、位置情報取得部が前記実空間の座標系における位置及び方向を現在位置情報として取得する実空間情報取得ステップと、
前記実空間の座標系における地理情報を含む現実地図情報、及び前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得し、仮想表示データ生成部が、前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成するとともに、拡張表示データ生成部が、前記実空間における座標系に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する表示データ生成ステップと、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を表示制御部が実行する表示制御ステップと、
前記表示制御ステップにより表示遷移処理された仮想表示データ及び拡張表示データを表示制御部が表示する表示ステップと、
を含むことを特徴とする。
実空間の映像を撮像するカメラ部と、
前記実空間の座標系における位置及び方向を現在位置情報として取得する位置情報取得部と、
前記実空間の座標系における地理情報を含む現実地図情報を取得する現実地図取得部と、
前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得する仮想地図取得部と、
前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成する仮想現実表示データ生成部と、
前記実空間における座標系に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを、前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する拡張現実表示データ生成部と、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を実行する表示制御部と、
前記表示制御部により表示遷移処理された仮想表示データ及び拡張表示データを表示する表示部、
として機能させることを特徴とする。
以下に添付図面を参照して、本発明に係る情報提示システムの実施形態を詳細に説明する。図1は、本実施形態に係る情報提示システムの全体構成を示す概念図であり、図2は、本実施形態に係る現実地図情報M1と仮想地図情報M2及びオブジェクトの関係を示す説明図である。また、図3及び図4は、本実施形態に係る情報提示処理の概要及び動作を示すブロック図である。
次いで、上述した情報提示システムを構成する各装置の内部構造について説明する。図5は、本実施形態に係るコンテンツ配信サーバー3の内部構成を示すブロック図であり、図6は、本実施形態に係るスマートフォン1の内部構成を示すブロック図である。なお、説明中で用いられる「モジュール」とは、装置や機器等のハードウェア、或いはその機能を持ったソフトウェア、又はこれらの組み合わせなどによって構成され、所定の動作を達成するための機能単位を示す。
先ず、コンテンツ配信サーバー3の内部構成について説明する。コンテンツ配信サーバー3は、インターネット2上に配置されたサーバー装置であり、インターネット2を通じて、各スマートフォン1とデータの送受信を行えるようになっている。
に蓄積された現実地図情報M1に含まれる地理的要素や建物、道路、鉄道等を取得するとともに、仮想コンテンツ用データ35cに蓄積された情報を参照し、現実地図情報M1に対応した仮想世界の地図情報、オブジェクトの特性、表示遷移処理に関する情報、グラフィック情報などに基づいて仮想世界の地図情報を生成する。ここでは、図8及び図9に示すように、現実地図情報M1上の遺跡であるエリアP1に対応した座標位置(座標範囲)に、仮想的に復元された古城のオブジェクトOb1が配置されている。
次いで、スマートフォン1の内部構成について説明する。図6に示すように、スマートフォン1は、通信インターフェース11と、入力インターフェース12と、出力インターフェース13と、アプリケーション実行部14と、メモリ15とを備えている。
以上説明した情報提示システムを動作させることによって、本発明の情報提示方法を実施することができる。図7は、情報提示システムの表示遷移処理に関する動作を示すシーケンス図である。
以上の処理は、アプリケーションが終了されるまで繰り返される。
以上説明した本実施形態によれば、拡張現実(AR)や仮想現実(VR)を表示する際、それぞれの座標系を統合することで、拡張現実(AR)と仮想現実(VR)を1つの座標系で共存させて混合することができる。この結果、ARを融合させることで、多様性に富み、臨場感が高い、仮想体験を演出することができる。
なお、上述した実施形態の説明は、本発明の一例である。このため、本発明は上述した実施形態に限定されることなく、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。図13及び図14は、変更例1及び2に係る情報提示システムの概要を示す説明図である。
例えば、上述した実施形態では、カメラ部を備えた情報処理装置としてスマートフォン1を用いたが、このカメラ部を備えた装置として、図13に示すような、観光地に設置された展望鏡40を用いてもよい。この展望鏡40は、実空間の座標系に固定された基台部40bを有し、この基台部40bに対して左右に回動可能及び上下に俯仰可能に展望鏡本体40aが設置されている。上記カメラ部121は、展望鏡本体40aの先端に配置され、前記表示部13aは、展望鏡本体40aの後端側に配置されている。
また、仮想現実又は拡張現実に合成される3Dオブジェクトとして、図14に示すような、開口部を有する板状のいわゆる顔ハメ看板としてのオブジェクトOb2としてもよい。例えば、実空間上の古城跡の遺跡であるエリアP1をバックに被写体Sub1をスマートフォン1で撮影すると、被写体Sub1とスマートフォン1との間の座標位置に顔ハメ看板としてのオブジェクトOb2が拡張現実的に配置され、被写体Sub1の背後に古城のオブジェクトOb1が拡張現実的に配置される。
L1…境界線
M2…仮想地図情報
M1…現実地図情報
P1…遺跡
1…スマートフォン
2…インターネット
3…コンテンツ配信サーバー
10…ユーザー
11…通信インターフェース
12…入力インターフェース
12a…タッチパネル
13…出力インターフェース
13a…表示部
14…アプリケーション実行部
15…メモリ
16…種センサー
21…衛星
22…無線基地局
31…通信インターフェース
32…位置情報管理部
33…認証部
34…情報配信部
35a…現実地図データ
35b…ユーザーデータ
35c…仮想コンテンツデータ
36…情報管理部
37…仮想地図情報生成部
40…展望鏡
40a…展望鏡本体
40b…基台部
121…カメラ部
141…情報取得部
142…表示データ生成部
143…表示制御部
144…シナリオ管理部
145…トリガー判定部
146…遷移設定部
147…位置情報取得部
Claims (7)
- 仮想空間の仮想的な座標系に配置された仮想オブジェクトに関する情報を提示するシステムであって、
実空間の映像を撮像するカメラ部と、
前記実空間の座標系における位置及び方向を現在位置情報として取得する位置情報取得部と、
前記実空間の座標系における地理情報を含む現実地図情報を取得する現実地図取得部と、
前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得する仮想地図取得部と、
前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成する仮想現実表示データ生成部と、
前記実空間における位置情報に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを、前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する拡張現実表示データ生成部と、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を実行する表示制御部と、
前記表示制御部により表示遷移処理された仮想表示データ及び拡張表示データを表示する表示部と
を備えることを特徴とする情報提示システム。 - 前記表示遷移処理を実行させる境界線又は境界面を、前記現実地図情報上又は前記仮想地図情報上に設定する遷移設定部と、
前記現在位置情報に含まれる位置情報が、前記境界線又は境界面を通過したことを判定するトリガー判定部と
をさらに備え、
前記表示制御部は、前記トリガー判定部による判定結果に基づいて前記表示遷移処理を実行する
ことを特徴とする請求項1に記載の情報提示システム。 - 前記表示遷移処理を実行させる時刻、場所、提示するオブジェクトの種類、及びそれらの出現順序を記述したシナリオデータを取得して管理するシナリオ管理部をさらに備え、
前記表示制御部は、前記トリガー判定部による判定結果に基づき、前記シナリオデータ又はユーザー操作に従って前記表示遷移処理を実行する
ことを特徴とする請求項2に記載の情報提示システム。 - 前記実空間の座標系に固定された基台部に、左右に回動可能及び上下に俯仰可能に設置された本体部をさらに備え、
前記カメラ部は、前記本体部の先端に配置され、
前記表示部は、前記本体部の後端に配置されている
ことを特徴とする請求項1乃至3のいずれかに記載の情報提示システム。 - 前記オブジェクトは、開口部を有する板状の看板であることを特徴とする請求項1乃至4のいずれかに記載の情報提示システム。
- 仮想空間の仮想的な座標系に配置された仮想オブジェクトに関する情報を提示する方法であって、
カメラ部が実空間の映像を撮像するとともに、位置情報取得部が前記実空間の座標系における位置及び方向を現在位置情報として取得する実空間情報取得ステップと、
前記実空間の座標系における地理情報を含む現実地図情報、及び前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得し、仮想表示データ生成部が、前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成するとともに、拡張表示データ生成部が、前記実空間における位置情報に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する表示データ生成ステップと、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を表示制御部が実行する表示制御ステップと、
前記表示制御ステップにより表示遷移処理された仮想表示データ及び拡張表示データを表示制御部が表示する表示ステップと、
を含むことを特徴とする情報提示方法。 - 仮想空間の仮想的な座標系に配置された仮想オブジェクトに関する情報を提示するプログラムであって、コンピューターを、
実空間の映像を撮像するカメラ部と、
前記実空間の座標系における位置及び方向を現在位置情報として取得する位置情報取得部と、
前記実空間の座標系における地理情報を含む現実地図情報を取得する現実地図取得部と、
前記仮想空間の座標系における地理情報上に前記仮想オブジェクトを配置した仮想地図情報を取得する仮想地図取得部と、
前記実空間における座標系と共通化された前記仮想地図情報上に、前記仮想オブジェクトを配置した仮想表示データを生成する仮想現実表示データ生成部と、
前記実空間における位置情報に対応付けられた前記現実地図情報上に、前記仮想オブジェクトを配置した表示データを、前記カメラ部が撮像した前記映像に重畳させて拡張表示データを生成する拡張現実表示データ生成部と、
前記位置情報取得部が取得した前記現在位置情報に応じて、前記仮想表示データと前記拡張表示データとを、選択的に切り替えて或いは、一方の表示データに他方の表示データの一部又は全部を合成する表示遷移処理を実行する表示制御部と、
前記表示制御部により表示遷移処理された仮想表示データ及び拡張表示データを表示する表示部、
として機能させることを特徴とする情報提示プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017020972A JP6624646B2 (ja) | 2017-02-08 | 2017-02-08 | 情報提示システム、情報提示方法及び情報提示プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017020972A JP6624646B2 (ja) | 2017-02-08 | 2017-02-08 | 情報提示システム、情報提示方法及び情報提示プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018128815A JP2018128815A (ja) | 2018-08-16 |
JP6624646B2 true JP6624646B2 (ja) | 2019-12-25 |
Family
ID=63172999
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017020972A Active JP6624646B2 (ja) | 2017-02-08 | 2017-02-08 | 情報提示システム、情報提示方法及び情報提示プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6624646B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7160183B2 (ja) * | 2019-03-28 | 2022-10-25 | 日本電気株式会社 | 情報処理装置、表示システム、表示方法、及びプログラム |
JP7344084B2 (ja) * | 2019-03-28 | 2023-09-13 | 株式会社ドワンゴ | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム |
JP6609078B1 (ja) * | 2019-03-28 | 2019-11-20 | 株式会社ドワンゴ | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム |
JP2020167654A (ja) * | 2019-07-16 | 2020-10-08 | 株式会社ドワンゴ | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム |
TWI731430B (zh) * | 2019-10-04 | 2021-06-21 | 財團法人工業技術研究院 | 資訊顯示方法與資訊顯示系統 |
CN112985372A (zh) * | 2019-12-13 | 2021-06-18 | 南宁富桂精密工业有限公司 | 路径规划系统及其方法 |
WO2023100618A1 (ja) * | 2021-11-30 | 2023-06-08 | 富士フイルム株式会社 | 画像ファイル、生成装置、及びデータ処理方法 |
WO2023228326A1 (ja) * | 2022-05-25 | 2023-11-30 | 株式会社ビジョン&Itラボ | デジタルツインの管理システム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003264740A (ja) * | 2002-03-08 | 2003-09-19 | Cad Center:Kk | 展望鏡 |
JP2004102835A (ja) * | 2002-09-11 | 2004-04-02 | Univ Waseda | 情報提供方法およびそのシステム、携帯型端末装置、頭部装着装置、並びにプログラム |
JP4378118B2 (ja) * | 2003-06-27 | 2009-12-02 | 学校法人早稲田大学 | 立体映像呈示装置 |
EP2672458A3 (en) * | 2012-06-06 | 2017-04-26 | Samsung Electronics Co., Ltd | Terminal, apparatus and method for providing an augmented reality service |
JP2014115957A (ja) * | 2012-12-12 | 2014-06-26 | Hiroaki Ishihara | 拡張現実型建物シミュレーション装置 |
JP6182734B2 (ja) * | 2013-06-26 | 2017-08-23 | 国立大学法人佐賀大学 | 表示制御装置 |
JP2016110245A (ja) * | 2014-12-03 | 2016-06-20 | 株式会社T.J.Promotion | 表示システム、表示方法、コンピュータプログラム、コンピュータが読み取り可能な記憶媒体 |
-
2017
- 2017-02-08 JP JP2017020972A patent/JP6624646B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018128815A (ja) | 2018-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6624646B2 (ja) | 情報提示システム、情報提示方法及び情報提示プログラム | |
CN108601976B (zh) | 游戏用图像处理系统以及程序 | |
US11017235B2 (en) | Augmented reality display system, program, and method | |
US10037627B2 (en) | Augmented visualization system for hidden structures | |
Vidal Jr et al. | MAGIS: mobile augmented-reality games for instructional support | |
CN103597524A (zh) | 用于插入和增强当浏览辖地时显示给用户的消息的系统和方法 | |
JP6665402B2 (ja) | コンテンツ表示端末、コンテンツ提供システム、コンテンツ提供方法、および、コンテンツ表示プログラム | |
JP2012141779A (ja) | 拡張現実提供装置、拡張現実提供システム、拡張現実提供方法及びプログラム | |
US20150371449A1 (en) | Method for the representation of geographically located virtual environments and mobile device | |
JPWO2019009163A1 (ja) | 情報処理システム、プレイヤ側装置、制御方法、及びプログラム | |
US20120281102A1 (en) | Portable terminal, activity history depiction method, and activity history depiction system | |
CN117029815A (zh) | 基于空间互联网的场景定位方法和相关设备 | |
KR101939530B1 (ko) | 지형정보 인식을 기반으로 증강현실 오브젝트를 표시하는 방법 및 그 장치 | |
KR101533886B1 (ko) | 문화 유적 가상 체험을 위한 증강 현실 생성 방법 | |
JP7323689B1 (ja) | 表示装置、表示方法、及び、表示プログラム | |
JP2009238029A (ja) | 座標対応装置、座標対応方法およびプログラム | |
Neumann et al. | Augmented Virtual Environments (AVE): for Visualization of Dynamic Imagery | |
KR20190006584A (ko) | 지형정보 인식을 기반으로 증강현실 오브젝트를 표시하는 방법 및 그 장치 | |
Giannakidis et al. | Hacking Visual Positioning Systems to Scale the Software Development of Augmented Reality Applications for Urban Settings | |
JP2023062983A (ja) | 仮想鉄塔表示システム | |
JP2020098635A (ja) | コンテンツ表示端末、コンテンツ提供方法、および、コンテンツ表示プログラム | |
Holweg et al. | Augmented reality visualization of geospatial data | |
CN113450439A (zh) | 一种虚实融合方法、设备及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180320 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190508 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190605 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191119 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191121 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6624646 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |