JP5981371B2 - 姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 - Google Patents
姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 Download PDFInfo
- Publication number
- JP5981371B2 JP5981371B2 JP2013055376A JP2013055376A JP5981371B2 JP 5981371 B2 JP5981371 B2 JP 5981371B2 JP 2013055376 A JP2013055376 A JP 2013055376A JP 2013055376 A JP2013055376 A JP 2013055376A JP 5981371 B2 JP5981371 B2 JP 5981371B2
- Authority
- JP
- Japan
- Prior art keywords
- annotation
- information
- information terminal
- posture
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Position Input By Displaying (AREA)
Description
カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積手段と、
アノテーション蓄積手段を用いて、現在位置情報をキーとして、アノテーションを検索するアノテーション検索手段と、
検索されたアノテーションの姿勢範囲情報に、センサによって取得された姿勢情報が含まれるか否かを判定する姿勢判定手段と、
姿勢判定手段によって真と判定された場合にのみ、ディスプレイに、現実空間映像にアノテーションを重畳表示するべく制御する表示制御手段と
を有することを特徴とする。
センサは、3軸の加速度データを出力する加速度センサであり、
姿勢情報は、加速度センサによって取得される重力ベクトルに対する姿勢角であり、
アノテーションの姿勢範囲情報は、姿勢角の範囲であることも好ましい。
センサは、3軸の地磁気データを出力する地磁気センサを更に含み、
姿勢情報は、地磁気センサによって取得される北に対する方位角を更に含み、
アノテーションの姿勢範囲情報に、方位角の範囲を更に含み、
姿勢判定手段は、検索されたアノテーションの方位角に、センサによって取得された方位角が含まれるか否かを更に判定することも好ましい。
サーバは、
位置に応じて、情報端末に関する姿勢範囲情報を対応付けたアノテーションを蓄積するアノテーション蓄積手段と、
情報端末から現在位置情報を受信した際に、アノテーション及び姿勢範囲情報を返信するアノテーション検索手段と
を有し、
情報端末のアノテーション検索手段は、現在位置情報をサーバへ送信し、該サーバから、アノテーション及び姿勢範囲情報を取得する
を更に有することを特徴とする。
カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積手段と、
アノテーション蓄積手段を用いて、現在位置情報をキーとして、アノテーションを検索するアノテーション検索手段と、
検索されたアノテーションの姿勢範囲情報に、センサによって取得された姿勢情報が含まれるか否かを判定する姿勢判定手段と、
姿勢判定手段によって真と判定された場合にのみ、ディスプレイに、現実空間映像にアノテーションを重畳表示するべく制御する表示制御手段と
してコンピュータを機能させることを特徴とする。
カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積部を有し、
アノテーション蓄積部を用いて、現在位置情報をキーとして、アノテーションを検索する第1のステップと、
検索されたアノテーションの姿勢範囲情報に、センサによって取得された姿勢情報が含まれるか否かを判定する第2のステップと、
第2のステップによって真と判定された場合にのみ、ディスプレイに、現実空間映像にアノテーションを重畳表示するべく制御する第3のステップと
を有することを特徴とする。
カメラを水平方向へ向けた場合 :ピッチ角=0°(x−z平面と平行)
カメラを斜め上方へ向けた角度 :ピッチ角=正(0<ピッチ角<90°)
カメラを斜め下方へ向けた角度 :ピッチ角=負(0>ピッチ角>−90°)
重力ベクトル=−90°
カメラを北向きへ向けた場合 :ヨー角=0°
カメラを北から時計回り向けた角度 :ヨー角=正
カメラを北から反時計回り向けた角度:ヨー角=負
アノテーション蓄積部111は、現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末に関する姿勢範囲情報を対応付けて蓄積する。
位置情報(緯度・経度)
テキスト
URL
姿勢範囲情報(ピッチ角の範囲、ヨー角の範囲)
特に、本発明によれば「姿勢範囲情報」を含むことに特徴がある。図3によれば、緯度経度情報が同じPOIであっても、異なる姿勢範囲情報を登録することができる。
アノテーション検索部112は、アノテーション蓄積部111を用いて、現在位置情報をキーとして、現実空間映像に重畳すべきアノテーションを検索する。例えば、現在位置情報を中心として、所定位置範囲に含まれる緯度経度情報を検索する。
POI-ID1:「IT企業A」
POI-ID2:「お勧めコーヒー」
POI-ID3:「携帯基地局」
検索されたアノテーション毎の情報は、姿勢判定部113へ出力される。
姿勢判定部113は、検索されたアノテーションの姿勢範囲情報に、センサによって取得された姿勢方位情報が含まれるか否かを判定する。
表示制御部114は、姿勢判定部113によって真と判定された場合にのみ、ディスプレイに、現実空間映像にアノテーションを重畳表示するべく制御する。
情報端末1がピッチ角aの状態に向けられている場合、アノテーションの姿勢範囲情報の上限値に近いために、「IT企業A」のアノテーションが比較的薄く表示される。ディスプレイを視認するユーザにとっては、比較的注目度が低くなる。
情報端末1がピッチ角bの状態に向けられている場合、アノテーションの姿勢範囲情報の中央値に近いために、「IT企業A」のアノテーションが濃く表示される。ディスプレイを視認するユーザにとっては、比較的注目度が高くなる。
情報端末1がピッチ角cの状態に向けられている場合、アノテーションの姿勢範囲情報の下限値に近いために、「IT企業A」のアノテーションが比較的薄く表示される。ディスプレイを視認するユーザにとっては、比較的注目度が低くなる。
情報端末1と被写体との距離が遠い(位置a)場合、「IT企業A」のアノテーションが比較的小さく表示される。ディスプレイを視認するユーザにとっては、比較的注目度が低くなる。
情報端末1と被写体との距離が中程度(位置b)場合、「IT企業A」のアノテーションが比較的中程度に表示される。ディスプレイを視認するユーザにとっては、比較的注目度が中程度となる。
情報端末1と被写体との距離が近い(位置c)場合、「IT企業A」のアノテーションが比較的大きく表示される。ディスプレイを視認するユーザにとっては、比較的注目度が高くなる。
101 カメラ
102 ディスプレイ
103 加速度センサ
104 地磁気センサ
105 測位部
106 通信インタフェース
111 アノテーション蓄積部
112 アノテーション検索部
113 姿勢判定部
114 表示制御部
2 POIサーバ
20 アノテーション蓄積部
21 アノテーション提供部
Claims (9)
- 現実空間を撮影するカメラと、姿勢情報を計測するセンサと、前記カメラによって撮影された現実空間映像を表示するディスプレイと、現在位置情報を取得する測位部とを有する情報端末において、
前記カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
前記現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積手段と、
前記アノテーション蓄積手段を用いて、前記現在位置情報をキーとして、前記アノテーションを検索するアノテーション検索手段と、
検索された前記アノテーションの姿勢範囲情報に、前記センサによって取得された姿勢情報が含まれるか否かを判定する姿勢判定手段と、
前記姿勢判定手段によって真と判定された場合にのみ、前記ディスプレイに、前記現実空間映像に前記アノテーションを重畳表示するべく制御する表示制御手段と
を有することを特徴とする情報端末。 - 前記センサは、3軸の加速度データを出力する加速度センサであり、
前記姿勢情報は、前記加速度センサによって取得される重力ベクトルに対する姿勢角であり、
前記アノテーションの前記姿勢範囲情報は、前記姿勢角の範囲である
ことを特徴とする請求項1に記載の情報端末。 - 前記姿勢角は、前記重力ベクトルに対するピッチ角であることを特徴とする請求項2に記載の情報端末。
- 前記センサは、3軸の地磁気データを出力する地磁気センサを更に含み、
前記姿勢情報は、前記地磁気センサによって取得される北に対する方位角を更に含み、
前記アノテーションの前記姿勢範囲情報に、前記方位角の範囲を更に含み、
前記姿勢判定手段は、検索されたアノテーションの方位角に、前記センサによって取得された方位角が含まれるか否かを更に判定する
ことを特徴とする請求項1から3のいずれか1項に記載の情報端末。 - 前記方位角は、北に対するヨー角であることを特徴とする請求項4に記載の情報端末。
- 前記表示制御手段は、前記センサによって取得された姿勢情報が、前記アノテーションの姿勢範囲情報に中央値から上限下限値へ近づくに従って当該アノテーションの表示色を透明に近づけるべく制御する
ことを特徴とする請求項1から5のいずれか1項に記載の情報端末。 - 請求項1から6のいずれか1項に記載の情報端末から、ネットワークを介してアクセスさせるサーバとを有するシステムであって、
前記サーバは、
位置に応じて、情報端末に関する姿勢範囲情報を対応付けた前記アノテーションを蓄積するアノテーション蓄積手段と、
前記情報端末から現在位置情報を受信した際に、前記アノテーション及び前記姿勢範囲情報を返信するアノテーション検索手段と
を有し、
前記情報端末の前記アノテーション検索手段は、前記現在位置情報を前記サーバへ送信し、該サーバから、前記アノテーション及び前記姿勢範囲情報を取得する
を更に有することを特徴とするシステム。 - 現実空間を撮影するカメラと、姿勢情報を計測するセンサと、前記カメラによって撮影された現実空間映像を表示するディスプレイと、現在位置情報を取得する測位部とを有する情報端末に搭載されたコンピュータを機能させるプログラムにおいて、
前記カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
前記現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積手段と、
前記アノテーション蓄積手段を用いて、前記現在位置情報をキーとして、前記アノテーションを検索するアノテーション検索手段と、
検索されたアノテーションの姿勢範囲情報に、前記センサによって取得された姿勢情報が含まれるか否かを判定する姿勢判定手段と、
前記姿勢判定手段によって真と判定された場合にのみ、前記ディスプレイに、前記現実空間映像に前記アノテーションを重畳表示するべく制御する表示制御手段と
してコンピュータを機能させることを特徴とする情報端末用のプログラム。 - 現実空間を撮影するカメラと、姿勢情報を計測するセンサと、前記カメラによって撮影された現実空間映像を表示するディスプレイと、現在位置情報を取得する測位部とを有する情報端末における拡張現実感表示方法において、
前記カメラは、当該情報端末に対して、その撮影方向と、当該情報端末を把持するユーザから見た視線方向とが一致するように固定的に搭載されており、
前記現実空間映像に重畳表示すべきアノテーション毎に、当該情報端末の位置情報及び姿勢範囲情報を対応付けて蓄積するアノテーション蓄積部を有し、
前記アノテーション蓄積部を用いて、前記現在位置情報をキーとして、前記アノテーションを検索する第1のステップと、
検索されたアノテーションの姿勢範囲情報に、前記センサによって取得された姿勢情報が含まれるか否かを判定する第2のステップと、
第2のステップによって真と判定された場合にのみ、前記ディスプレイに、前記現実空間映像に前記アノテーションを重畳表示するべく制御する第3のステップと
を有することを特徴とする拡張現実感表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013055376A JP5981371B2 (ja) | 2013-03-18 | 2013-03-18 | 姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013055376A JP5981371B2 (ja) | 2013-03-18 | 2013-03-18 | 姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014182479A JP2014182479A (ja) | 2014-09-29 |
JP5981371B2 true JP5981371B2 (ja) | 2016-08-31 |
Family
ID=51701155
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013055376A Active JP5981371B2 (ja) | 2013-03-18 | 2013-03-18 | 姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5981371B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10366290B2 (en) | 2016-05-11 | 2019-07-30 | Baidu Usa Llc | System and method for providing augmented virtual reality content in autonomous vehicles |
TWI611307B (zh) * | 2016-08-24 | 2018-01-11 | 李雨暹 | 適地性空間物件資料建立方法、顯示方法與應用系統 |
TWI617931B (zh) * | 2016-09-23 | 2018-03-11 | 李雨暹 | 適地性空間物件遠距管理方法與系統 |
JP6828508B2 (ja) * | 2017-02-27 | 2021-02-10 | 富士ゼロックス株式会社 | 情報処理装置及び情報処理プログラム |
JP7181724B2 (ja) * | 2018-08-09 | 2022-12-01 | 古野電気株式会社 | 携帯端末、システム、文字情報取得方法、及びプログラム |
JP7157871B2 (ja) * | 2019-03-08 | 2022-10-20 | 株式会社Nttドコモ | 関連情報出力装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5244012B2 (ja) * | 2009-03-31 | 2013-07-24 | 株式会社エヌ・ティ・ティ・ドコモ | 端末装置、拡張現実感システム及び端末画面表示方法 |
-
2013
- 2013-03-18 JP JP2013055376A patent/JP5981371B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014182479A (ja) | 2014-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9699375B2 (en) | Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system | |
KR101356192B1 (ko) | 영상매칭 기반의 스마트폰의 위치자세 결정 방법 및 시스템 | |
US9240074B2 (en) | Network-based real time registered augmented reality for mobile devices | |
JP5981371B2 (ja) | 姿勢によって拡張現実感の表示を制御する情報端末、システム、プログラム及び方法 | |
EP3095092B1 (en) | Method and apparatus for visualization of geo-located media contents in 3d rendering applications | |
US8797353B2 (en) | Augmented media message | |
US9558559B2 (en) | Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system | |
CN104750969B (zh) | 智能机全方位增强现实信息叠加方法 | |
US20140267234A1 (en) | Generation and Sharing Coordinate System Between Users on Mobile | |
KR101212636B1 (ko) | 증강 현실에서 위치 정보를 표시하는 방법 및 장치 | |
US10672149B2 (en) | Head mounted display device and processing method of head mounted display device | |
US20210217210A1 (en) | Augmented reality system and method of displaying an augmented reality image | |
JP6093841B2 (ja) | システム、情報処理方法及びプログラム | |
JP5951465B2 (ja) | 道路情報に基づいて見通しエリアを決定するプログラム、情報端末、サーバ及び方法 | |
KR20190047922A (ko) | 혼합현실을 이용한 정보 공유 시스템 | |
KR101601726B1 (ko) | 복수의 영상 획득 장치를 포함하는 모바일 단말기의 위치 및 자세 결정 방법 및 시스템 | |
KR102010252B1 (ko) | 증강 현실 서비스 제공 장치 및 방법 | |
US20230215098A1 (en) | Method and system for creating and storing map target | |
JP2011164701A (ja) | オブジェクト表示制御装置及びオブジェクト表示制御方法 | |
US20140316905A1 (en) | System and method for three-dimensional advertising | |
CN115967796A (zh) | Ar对象共享方法、装置及设备 | |
EP2733970A1 (en) | An indoor mobile augmented reality application |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150804 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160420 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160606 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160628 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160628 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160720 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160728 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5981371 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |