JP6192454B2 - 表示システム - Google Patents
表示システム Download PDFInfo
- Publication number
- JP6192454B2 JP6192454B2 JP2013191305A JP2013191305A JP6192454B2 JP 6192454 B2 JP6192454 B2 JP 6192454B2 JP 2013191305 A JP2013191305 A JP 2013191305A JP 2013191305 A JP2013191305 A JP 2013191305A JP 6192454 B2 JP6192454 B2 JP 6192454B2
- Authority
- JP
- Japan
- Prior art keywords
- marker
- coordinate system
- reference coordinate
- imaging unit
- positional relationship
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000003550 marker Substances 0.000 claims description 152
- 238000003384 imaging method Methods 0.000 claims description 62
- 230000003190 augmentative effect Effects 0.000 claims description 24
- 238000000034 method Methods 0.000 claims description 14
- 230000006870 function Effects 0.000 claims description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 8
- 239000011521 glass Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Description
前記第1のマーカが撮像部による撮像画像から外れると、前記仮想オブジェクト画像生成手段は、前記第2のマーカに基づいて、仮想オブジェクト画像を生成することを特徴としている。
図1に、この発明の一実施形態による表示システムの機能ブロック図を示す。表示手段8は、たとえば、観察者の装着したメガネのガラス部分に配置された透明液晶ディスプレイである。また、撮像部2は、当該メガネに設けられたカメラである。
図2に、この発明の一実施形態による表示システム12の外観を示す。レンズ部分には、表示部である透明な液晶ディスプレイ10が設けられている。この液晶ディスプレイ10は透明であるため、装着者がこれを通して現実の世界を見ることができる。さらに、これに重ねて、アノテーションを表示することができる。
図4a、図4bに、表示プログラム22のフローチャートを示す。なお、仮想三次元オブジェクトを表示するためのプログラムとしては、ARツールキットを用いることができる。
(1)上記実施形態においては、第1のマーカM1を、現実のオブジェクトRとの関係において予め定めた位置に置くようにしている。しかし、第1のマーカM1は任意の位置に置くようにし、仮想オブジェクト配置用のマーカを別途置いて、この配置用マーカの上に仮想オブジェクトを表示するようにしてもよい。この場合、画面を見ながら配置用マーカを移動させて仮想オブジェクトの位置を決定する。
Claims (6)
- 互いの位置関係が既知である複数の特徴点を有する第1のマーカおよび互いの位置関係が既知である複数の特徴点を有する第2のマーカを少なくとも撮像する撮像部と、
第1のマーカおよび第2のマーカの撮像画像に基づいて、当該撮像画像における前記特徴点の位置関係に基づいて、前記第1のマーカまたは前記第2のマーカと前記撮像部との位置関係を算出し、あるいは前記第1のマーカ、前記第2のマーカ、前記撮像部の位置関係を算出し、基準座標系を決定する基準座標系決定手段と、
前記決定した基準座標系に基づいて、当該基準座標系に仮想三次元オブジェクトを配置し、前記撮像部と関連づけられた視点から見たときに当該仮想三次元オブジェクトがどのように見えるかを、前記第1のマーカまたは前記第2のマーカのいずれかまたは双方の前記基準座標系における位置、前記撮像部の前記基準座標系における位置、前記視点の前記基準座標系における位置に基づいて算出し、仮想オブジェクト画像を生成する仮想オブジェクト画像生成手段と、
前記仮想オブジェクト画像を、表示部において表示するよう制御する表示手段と、
を備えた表示システムにおいて、
前記第2のマーカは、前記撮像部によって前記第1のマーカと同時に撮像されうる任意の位置に置かれたものであり、
前記第1のマーカが撮像部による撮像画像から外れると、前記仮想オブジェクト画像生成手段は、前記第2のマーカに基づき、前記基準座標系において仮想オブジェクト画像を生成することを特徴とする表示システム。 - 表示システムをコンピュータによって実現するための表示プログラムであって、コンピュータを、
互いの位置関係が既知である複数の特徴点を有する第1のマーカおよび互いの位置関係が既知である複数の特徴点を有する第2のマーカを少なくとも撮像する撮像部による撮像画像に基づいて、当該撮像画像における前記特徴点の位置関係に基づいて、前記第1のマーカまたは前記第2のマーカと前記撮像手段との位置関係を算出し、あるいは前記第1のマーカ、前記第2のマーカ、前記撮像手段の位置関係を算出し、基準座標系を決定する基準座標系決定手段と、
前記決定した基準座標系に基づいて、当該基準座標系に仮想三次元オブジェクトを配置し、前記撮像部と関連づけられた視点から見たときに当該仮想三次元オブジェクトがどのように見えるかを、前記第1のマーカまたは前記第2のマーカのいずれかまたは双方の前記基準座標系における位置、前記撮像部の前記基準座標系における位置、前記視点の前記基準座標系における位置に基づいて算出し、仮想オブジェクト画像を生成する仮想オブジェクト画像生成手段と、
前記仮想オブジェクト画像を、表示部において表示するよう制御する表示手段として機能させる表示プログラムであって、
前記第2のマーカは、前記撮像部によって前記第1のマーカと同時に撮像されうる任意の位置に置かれたものであり、
前記第1のマーカが撮像部による撮像画像から外れると、前記仮想オブジェクト画像生成手段は、前記第2のマーカに基づき、前記基準座標系において仮想オブジェクト画像を生成することを特徴とする表示プログラム。 - 請求項1のシステムまたは請求項2のプログラムにおいて、
前記仮想三次元オブジェクトは、前記第1のマーカまたは第2のマーカとの関係において前記基準座標系における配置位置が定められていることを特徴とするシステムまたはプログラム。 - 請求項1のシステムまたは請求項2のプログラムにおいて、
前記三次元オブジェクトは、オブジェクト配置用マーカに基づいて、前記基準座標系における配置位置が定められることを特徴とするシステムまたはプログラム。 - 拡張現実表示方法であって、
互いの位置関係が既知である複数の特徴点を有する第1のマーカを撮像し、
第1のマーカの撮像画像に基づいて、当該撮像画像における前記特徴点の位置関係に基づいて、前記第1のマーカと前記撮像手段との位置関係を算出し、基準座標系を決定し、
互いの位置関係が既知である複数の特徴点を有する第2のマーカを撮像し、
第2のマーカの撮像画像に基づいて、当該撮像画像における前記特徴点の位置関係に基づいて、前記第2のマーカと前記撮像手段との位置関係を算出し、当該第2のマーカの位置を前記基準座標系に組み入れ、
前記決定した基準座標系に基づいて、当該基準座標系に仮想三次元オブジェクトを配置し、前記撮像部と関連づけられた視点から見たときに当該仮想三次元オブジェクトがどのように見えるかを、前記第1のマーカまたは前記第2のマーカのいずれかまたは双方の前記基準座標系における位置、前記撮像部の前記基準座標系における位置、前記視点の前記基準座標系における位置に基づいて算出し、仮想オブジェクト画像を生成し、
前記仮想オブジェクト画像を、表示部に表示する拡張現実表示方法において、
前記第2のマーカは、前記撮像部によって前記第1のマーカと同時に撮像されうる任意の位置に置かれたものであり、
前記第1のマーカが撮像部による撮像画像から外れると、前記第2のマーカに基づき、前記基準座標系において仮想オブジェクト画像を生成して表示することを特徴とする拡張現実表示方法。 - 互いの位置関係が既知である複数の特徴点を有する第1のマーカおよび互いの位置関係が既知である複数の特徴点を有する第2のマーカを少なくとも撮像する撮像部と、
第1のマーカおよび第2のマーカの撮像画像に基づいて、当該撮像画像における前記特徴点の位置関係に基づいて、前記第1のマーカまたは前記第2のマーカと前記撮像部との位置関係を算出し、あるいは前記第1のマーカ、前記第2のマーカ、前記撮像部の位置関係を算出し、基準座標系を決定する基準座標系決定手段と、
を備えた基準座標システムにおいて、
前記第2のマーカは、前記撮像部によって前記第1のマーカと同時に撮像されうる任意の位置に置かれたものであり、
前記第1のマーカが撮像部による撮像画像から外れると、前記仮想オブジェクト画像生成手段は、前記第2のマーカに基づき、前記第1のマーカに基づいて推定された前記基準座標系を維持することを特徴とする基準座標システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013191305A JP6192454B2 (ja) | 2013-09-17 | 2013-09-17 | 表示システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013191305A JP6192454B2 (ja) | 2013-09-17 | 2013-09-17 | 表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015060241A JP2015060241A (ja) | 2015-03-30 |
JP6192454B2 true JP6192454B2 (ja) | 2017-09-06 |
Family
ID=52817758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013191305A Active JP6192454B2 (ja) | 2013-09-17 | 2013-09-17 | 表示システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6192454B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6562072B2 (ja) * | 2015-04-09 | 2019-08-21 | 日本電気株式会社 | 地図生成装置、地図生成方法、およびプログラム |
JP2017054185A (ja) * | 2015-09-07 | 2017-03-16 | 株式会社東芝 | 情報処理装置、情報処理方法及び情報処理プログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4599184B2 (ja) * | 2005-02-02 | 2010-12-15 | キヤノン株式会社 | 指標配置計測方法、指標配置計測装置 |
JP4847192B2 (ja) * | 2006-04-14 | 2011-12-28 | キヤノン株式会社 | 画像処理システム、画像処理装置、撮像装置、及びそれらの制御方法 |
JP5423406B2 (ja) * | 2010-01-08 | 2014-02-19 | ソニー株式会社 | 情報処理装置、情報処理システム及び情報処理方法 |
JP2013141049A (ja) * | 2010-03-24 | 2013-07-18 | Hitachi Ltd | 世界座標系データベースを利用したサーバ及び端末 |
JP5643549B2 (ja) * | 2010-06-11 | 2014-12-17 | 任天堂株式会社 | 画像処理システム、画像処理プログラム、画像処理装置および画像処理方法 |
JP5691629B2 (ja) * | 2011-02-24 | 2015-04-01 | 株式会社大林組 | 画像合成方法 |
-
2013
- 2013-09-17 JP JP2013191305A patent/JP6192454B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2015060241A (ja) | 2015-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3195595B1 (en) | Technologies for adjusting a perspective of a captured image for display | |
JP6195893B2 (ja) | 形状認識装置、形状認識プログラム、および形状認識方法 | |
EP2864832B1 (en) | Method and apparatus for augmenting an index image generated by a near eye display | |
JP6008397B2 (ja) | 光学式シースルー型hmdを用いたarシステム | |
WO2014128747A1 (ja) | 入出力装置、入出力プログラム、および入出力方法 | |
KR20140108128A (ko) | 증강 현실 제공 장치 및 방법 | |
JP6250024B2 (ja) | キャリブレーション装置、キャリブレーションプログラム、およびキャリブレーション方法 | |
US20100188355A1 (en) | Apparatus and method for detecting an object pointed by a user | |
US11720996B2 (en) | Camera-based transparent display | |
WO2014128751A1 (ja) | ヘッドマウントディスプレイ装置、ヘッドマウントディスプレイ用プログラム、およびヘッドマウントディスプレイ方法 | |
KR20190027079A (ko) | 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체 | |
JP6061334B2 (ja) | 光学式シースルー型hmdを用いたarシステム | |
JP6250025B2 (ja) | 入出力装置、入出力プログラム、および入出力方法 | |
EP3038061A1 (en) | Apparatus and method to display augmented reality data | |
JP2022058753A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6192454B2 (ja) | 表示システム | |
JP5215211B2 (ja) | 関連情報表示位置特定システムおよび関連情報表示位置特定用プログラム | |
JP2012146305A (ja) | ウィンドウ状の拡張現実を提供する装置および方法 | |
US20210239973A1 (en) | Video display system, video display device, and video display method | |
JP2015201734A (ja) | 画像処理装置、画像処理装置の制御方法およびプログラム | |
JP2012058353A (ja) | 画像表示装置、及びその制御方法 | |
Prakash et al. | Digitally Transparent Interface Using Eye Tracking | |
JP2014186587A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム | |
CN113689551A (zh) | 一种三维内容的展示方法、装置、介质及电子设备 | |
JP2014230027A (ja) | 画像表示装置に表示する画像を制御する装置、方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160620 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170529 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170619 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170710 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170808 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6192454 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |