JP6341759B2 - 頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 - Google Patents
頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 Download PDFInfo
- Publication number
- JP6341759B2 JP6341759B2 JP2014112922A JP2014112922A JP6341759B2 JP 6341759 B2 JP6341759 B2 JP 6341759B2 JP 2014112922 A JP2014112922 A JP 2014112922A JP 2014112922 A JP2014112922 A JP 2014112922A JP 6341759 B2 JP6341759 B2 JP 6341759B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- distance
- wearer
- head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
例えば、特許文献1では加速度センサや接触センサを用いて装着者が静止、歩行、走行など身体の活動状態を計測して、静止状態の際に実風景に重畳させる画像が表示される装着型情報呈示装置が開示されている。
本発明は前述の問題点に鑑み、装着者の動作状態に適切に対応しながら装着者の意図に沿った画像を表示できるようにすることを目的とする。
[第1の実施形態]
以下、図1乃至図4を参照して、本発明の第1の実施形態による、頭部装着型情報表示装置である透過型ヘッドマウントディスプレイにおける実風景に重畳させる画像の透過方法と表示方法について説明する。
100は、マイク部材から音声情報を取得する音声入力部である。
101は、タッチパネルやスイッチ部材による装置の入力情報を取得する操作部である。入力情報は装置の操作指示に用いられる。
104は、例えば加速度センサやGPSで、本実施形態の透過型ヘッドマウントディスプレイの装着者の動作状態を停止中もしくは移動中か推定するための状態情報を取得する状態検出部である。
108は、表示装置であるディスプレイ部材に実風景に重畳する画像を表示する表示部である。
ただし、制御内容はこれだけに限らず他にも必要に応じて装置に必要な制御を行うものとする。制御部106は、実風景に重畳する電子情報を判断して画像情報として出力する。
202は、時刻情報を表示した時計を表している。
203は、文字情報としてスケジュールに関する予定情報の表示を表している。
装置の装着者が停止中の状況において、図2Bのように重畳される画像は非透過で表示される。
211は、動画像201が所定の透過度で表示された動画像を表す。
212は、時計202が所定の透過度で表示された時計を表す。
213は、予定情報203が所定の透過度で表示された予定情報を表す。
この所定の距離とは、装着者が他の物体と衝突しない距離が望ましく、歩行による1歩以内程度の距離が想定される。ただし、個人差があるため、装着者によってこの所定の距離を設定できるようにしてもよい。
図2Cの状態にて装置の装着者は、所定の透過度で重畳される画像が表示されることで、重畳される画像に加え実風景が視認できる。
S402では、制御部106は、S401で取得した動作状態が移動中か否かを判断する。移動中である場合は、表示部108に表示する画像を透過させる必要があるため、S403の処理を行う。
図3は、透過の推移完了時間Ti302までの時間Tiに対して透過度Trを目標とする透過度Tr312までどのように推移させるかを表した透過度の推移特性の一例を示す図である。
S406では、制御部106は、距離情報と所定の距離d1とを比較して注視している物体が表示画像であるかどうかを判断する。
距離情報が距離d1以上であった場合、制御部106は、表示画像でなく実風景を注視いると判断して、S407に進んで目標とする透過度を透過度TrAと設定する。透過度TrAは図3の透過度Tr312である。これにより、オブジェクトが邪魔で実風景を視認できないことを防ぐことができる。
終了指示を受け取っていると判断した場合は、制御部106は、S410にて本実施形態の装置の終了動作を行う。
終了指示を受け取っていないと判断した場合は、制御部106は、S401に戻って再度処理を実行する。
以上の方法によって、表示部108への画像の表示を、装着者の意図に沿って制御することが可能となる。
以下、図2と図5乃至図7を参照して、第1の実施形態より装着者の意図に沿った、本発明の第2の実施形態による、透過型ヘッドマウントディスプレイにおける実風景に重畳させる画像の透過方法と表示方法について説明する。
制御部106を除く、音声入力部100乃至表示部108の各部の構成は、第1の実施形態で説明した図1の同番号と同様である。
図6Bは、図2Bの動画像201と予定情報203の間に視線があり、透過範囲に含まれる画像が2つの場合の関係を示す図である。
透過対象範囲610と透過対象範囲611は、視線情報で指示された視線方向を中心とした所定の範囲とする。
透過対象範囲610と透過対象範囲611は、十字に限らず視線方向を中心とした円であったり、四角であったりしてもよい。透過対象範囲610と透過対象範囲611は、表示部108のディスプレイ部材に表示しないことが望ましい。
203は、第1の実施形態の予定情報203と同様である。
605は、第1の実施形態の動画像201が所定の透過度で表示された動画像を表す。
606は、第1の実施形態の予定情報203が所定の透過度で表示された予定情報を表す。
以上のように、本実施形態では画像毎に透過もしくは非透過の表示を行うため、制御部106は、同時に表示される画像毎に透過設定を保持する。
S402は、第1の実施形態で説明した同番号と同様の判断を行い、移動中である場合は、表示部108に表示する画像を透過させる必要があるため、制御部106はS701の処理を行う。
S701では、制御部106は、表示画像毎に保持された透過設定に従い、表示する画像を生成し、表示部108に表示させる。
S702にて、制御部106は、視点検知部501より視線情報を取得する。
S409は〜S410は、図4の同番号が付されているステップと同様の処理が実行される。
以下、図2と図5と図8と図9を参照して、本発明の第2の実施形態よりも装着者の意図にさらに沿った、本発明の第3の実施形態による、透過型ヘッドマウントディスプレイにおける実風景に重畳させる画像の透過方法と表示方法について説明する。
図8Bは、図2Bの動画像201と予定情報203の間に視線があり、透過範囲に含まれる画像が2つの場合の関係を示す図である。
203は、第1の実施形態の予定情報203と同様である。
805は、第1の実施形態の動画像201が所定の透過度で表示された動画像を表す。
806は、第1の実施形態の予定情報203が所定の透過度で表示された予定情報を表す。
S703は、第2の実施形態で説明した同番号と同様である。
例えば、図8Aの場合の透過設定は、透過対象範囲811に含まれる画像は動画像801のため、動画像801は透過であり、時計202と予定情報203は非透過に設定されている。
また、図8Bの場合の透過設定は、透過対象範囲812に含まれる画像は動画像805と予定情報806のため、動画像805と予定情報806は透過であり、時計202は非透過に設定されている。
S410は、第1の実施形態で説明した同番号と同様である。
S901では、判断基準を1つで説明しているが、複数の閾値を以って各閾値毎に透過対象範囲を変えてもよい。
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
また、本発明は、以下の処理を実行することによっても実現される。即ち、前述した実施形態の機能を実現するソフトウェア(コンピュータプログラム)を、ネットワーク又は各種のコンピュータ読み取り可能な記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
101 操作部
102 撮像部
103 通信部
104 状態検出部
105 距離検出部
106 制御部
107 音声出力部
108 表示部
Claims (10)
- 透過型の頭部装着型情報表示装置であって、
前記装置の装着者の動きに関する情報を取得し、前記装着者が少なくとも停止中もしくは移動中であるかを推定するための状態情報として出力する状態検出手段と、
前記装着者の視点に関する情報を取得し、前記装着者の注視点の距離を推定するための距離情報として出力する距離検出手段と、
前記状態情報と前記距離情報とに基づいて、前記装着者が前記装置を通して視認する実風景に重畳する画像の表示を制御する制御手段と、を有し、
前記制御手段は、前記状態情報から前記装着者が移動中であると推定した場合に、前記距離情報から推定した前記距離に応じて、前記重畳する画像の透過度を変更することを特徴とする頭部装着型情報表示装置。 - 前記装着者の視点に関する情報を取得し前記装着者から前記装着者が注視する物体への視線方向を推定し、視線情報として出力する視点検知手段を有し、
前記制御手段は、前記視線情報から前記画像を表示可能な範囲のうち前記画像を透過させる範囲である透過対象範囲の中心位置を設定し、前記中心位置から所定の大きさの範囲を前記透過対象範囲に設定することを特徴とする請求項1に記載の頭部装着型情報表示装置。 - 前記制御手段は、前記画像が複数の画像を含む場合に、前記複数の画像のうち、どの画像を透過させて表示するか、非透過にして表示するかを前記透過対象範囲から判断することを特徴とする請求項2に記載の頭部装着型情報表示装置。
- 前記制御手段は、前記透過対象範囲と重なる画像を透過させ、前記透過対象範囲と重ならない画像を透過させないと判断することを特徴とする請求項3に記載の頭部装着型情報表示装置。
- 前記制御手段は、前記透過対象範囲の大きさを前記距離情報に応じて決定することを特徴とする請求項2〜4の何れか1項に記載の頭部装着型情報表示装置。
- 前記制御手段は、前記距離情報の示す距離が第2の所定の距離以上の場合には第1の大きさを選択し、前記距離情報の示す距離が第2の所定の距離未満の場合には前記第1の大きさより小さい第2の大きさを選択し、前記選択された大きさを前記透過対象範囲の大きさに設定することを特徴とする請求項5に記載の頭部装着型情報表示装置。
- 前記画像は、文字又は数字を含む画像であることを特徴とする請求項1〜6の何れか1項に記載の頭部装着型情報表示装置。
- 前記画像は、動画であることを特徴とする請求項1〜6の何れか1項に記載の頭部装着型情報表示装置。
- 透過型の頭部装着型情報表示装置の制御方法であって、
前記装置の装着者の動きに関する情報を取得し、前記装着者が少なくとも停止中もしくは移動中であるかを推定するための状態情報として出力する状態検出工程と、
前記装着者の視点に関する情報を取得し、前記装着者の注視点の距離を推定するための距離情報として出力する距離検出工程と、
前記状態情報と前記距離情報とに基づいて、前記装着者が前記装置を通して視認する実風景に重畳する画像の表示を制御する制御工程と、を有し、
前記制御工程では、前記状態情報から前記装着者が移動中であると推定した場合に、前記距離情報から推定した前記距離に応じて、前記重畳する画像の透過度を変更することを特徴とする頭部装着型情報表示装置の制御方法。 - 透過型の頭部装着型情報表示装置の制御方法をコンピュータに実行させるためのプログラムであって、
前記装置の装着者の動きに関する情報を取得し、前記装着者が少なくとも停止中もしくは移動中であるかを推定するための状態情報として出力する状態検出工程と、
前記装着者の視点に関する情報を取得し、前記装着者の注視点の距離を推定するための距離情報として出力する距離検出工程と、
前記状態情報と前記距離情報とに基づいて、前記装着者が前記装置を通して視認する実風景に重畳する画像の表示を制御する制御工程と、をコンピュータに実行させ、
前記制御工程では、前記状態情報から前記装着者が移動中であると推定した場合に、前記距離情報から推定した前記距離に応じて、前記重畳する画像の透過度を変更するようにコンピュータを制御することを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014112922A JP6341759B2 (ja) | 2014-05-30 | 2014-05-30 | 頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014112922A JP6341759B2 (ja) | 2014-05-30 | 2014-05-30 | 頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015228095A JP2015228095A (ja) | 2015-12-17 |
JP6341759B2 true JP6341759B2 (ja) | 2018-06-13 |
Family
ID=54885537
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014112922A Expired - Fee Related JP6341759B2 (ja) | 2014-05-30 | 2014-05-30 | 頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6341759B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160014418A (ko) * | 2014-07-29 | 2016-02-11 | 삼성전자주식회사 | 유저 인터페이스 장치 및 유저 인터페이스 방법 |
JP6874448B2 (ja) * | 2017-03-17 | 2021-05-19 | 株式会社デンソーウェーブ | 情報表示システム |
JP7036572B2 (ja) | 2017-11-02 | 2022-03-15 | マクセル株式会社 | 虚像表示装置およびそれを用いたヘッドマウントディスプレイ |
JP7003633B2 (ja) * | 2017-12-20 | 2022-01-20 | セイコーエプソン株式会社 | 透過型表示装置、表示制御方法、およびコンピュータープログラム |
JP2023028300A (ja) * | 2021-08-19 | 2023-03-03 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4114824B2 (ja) * | 1998-04-24 | 2008-07-09 | 株式会社バンダイナムコゲームス | 画像生成装置及び情報記憶媒体 |
JP5360021B2 (ja) * | 2010-08-31 | 2013-12-04 | ブラザー工業株式会社 | 携帯型情報処理装置、及び携帯型情報処理装置のためのコンピュータプログラム |
WO2014057618A1 (ja) * | 2012-10-09 | 2014-04-17 | パナソニック株式会社 | 3次元表示装置、3次元画像処理装置および3次元表示方法 |
JP2013210643A (ja) * | 2013-04-26 | 2013-10-10 | Sony Corp | 表示装置、表示方法 |
-
2014
- 2014-05-30 JP JP2014112922A patent/JP6341759B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2015228095A (ja) | 2015-12-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6596883B2 (ja) | ヘッドマウントディスプレイ及びヘッドマウントディスプレイの制御方法、並びにコンピューター・プログラム | |
JP5961736B1 (ja) | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム | |
US10999412B2 (en) | Sharing mediated reality content | |
JP6341759B2 (ja) | 頭部装着型情報表示装置及び頭部装着型情報表示装置の制御方法 | |
JP6428268B2 (ja) | 画像表示装置及び画像表示方法、並びに画像表示システム | |
KR101430614B1 (ko) | 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법 | |
JP6002286B1 (ja) | ヘッドマウントディスプレイ制御方法、および、ヘッドマウントディスプレイ制御プログラム | |
US20160132189A1 (en) | Method of controlling the display of images and electronic device adapted to the same | |
JP2008300983A (ja) | 頭部装着型表示装置、及びその制御方法 | |
US10579109B2 (en) | Control device and control method | |
EP3847530B1 (en) | Display device sharing and interactivity in simulated reality (sr) | |
CN106817913A (zh) | 头戴式显示器、移动信息终端、图像处理装置、显示控制程序、显示控制方法和显示系统 | |
US11327317B2 (en) | Information processing apparatus and information processing method | |
WO2017085974A1 (ja) | 情報処理装置 | |
JPWO2016013272A1 (ja) | 情報処理装置及び情報処理方法、並びに画像表示システム | |
WO2019142560A1 (ja) | 視線を誘導する情報処理装置 | |
WO2021246134A1 (ja) | デバイス、制御方法及びプログラム | |
JP6500570B2 (ja) | 画像表示装置および画像表示方法 | |
JP7078568B2 (ja) | 表示装置、表示制御方法、及び表示システム | |
US11051005B2 (en) | Virtual reality device and operation method of virtual reality device | |
WO2020105269A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6598575B2 (ja) | ヘッドマウントディスプレイシステムを制御する方法、および、プログラム | |
JP2016090853A (ja) | 表示装置、表示装置の制御方法、及び、プログラム | |
WO2021220407A1 (ja) | ヘッドマウントディスプレイ装置および表示制御方法 | |
JP2019032713A (ja) | 情報処理装置、情報処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170522 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180402 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180417 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180515 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6341759 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |