JP2015019274A - 頭部装着型表示装置および頭部装着型表示装置の制御方法 - Google Patents
頭部装着型表示装置および頭部装着型表示装置の制御方法 Download PDFInfo
- Publication number
- JP2015019274A JP2015019274A JP2013145644A JP2013145644A JP2015019274A JP 2015019274 A JP2015019274 A JP 2015019274A JP 2013145644 A JP2013145644 A JP 2013145644A JP 2013145644 A JP2013145644 A JP 2013145644A JP 2015019274 A JP2015019274 A JP 2015019274A
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- head
- display unit
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
【解決手段】透過型の頭部装着型表示装置100は、画像データに基づいて画像光を生成し射出する画像光生成部241,242を有し、使用者の頭部に装着された状態において、使用者に画像光を虚像として視認させると共に、外景を透過させる画像表示部251,252と、画像表示部の向きである表示部方向を特定する表示部方向特定部61,66と、画像光生成部が画像光を生成する画像光生成領域と前記表示部方向とに基づいて特定方向を設定する特定方向設定部166と、特定方向が設定された後、画像光生成領域と特定方向とが位置合わせされるように、表示部方向に基づいて、画像光生成領域の位置を設定する制御部165と、を備える。
【選択図】図2
Description
A.実施形態:
A−1.頭部装着型表示装置の構成:
A−2.画像表示処理:
B.比較例:
C.変形例:
図1は、頭部装着型表示装置100の外観構成を示す説明図である。頭部装着型表示装置100は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ(Head Mounted Display、HMD)とも呼ばれる。本実施形態の頭部装着型表示装置100は、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。なお、本明細書では、頭部装着型表示装置100によって使用者が視認する虚像を便宜的に「表示画像」とも呼ぶ。また、画像データに基づいて生成された画像光を射出することを「画像を表示する」ともいう。
図4は、画像表示処理の流れを示す説明図である。画像表示処理では、外景画像に特定の対象物が含まれる場合に、使用者の視線方向が変化しても、特定方向と表示画像との位置関係が固定される位置合わせが行なわれるように、表示画像の位置が変更されて画像表示部20に表示画像が表示される。
図8は、比較例において使用者に視認される視野VRの一例を示す説明図である。図8には、図7の視野VRと同じように、使用者と建造物BLとの位置関係が変化した場合に、使用者に視認される視野VRが示されている。図8では、図7の視野VRと比較して、画像表示部20に表示される表示画像IM1と表示画像IM2とが異なり、使用者に視認される外景SCについては同じである。比較例では、使用者と建造物BLとの位置関係の変化にかかわらず、画像表示最大領域PNに対する表示画像IM1の表示領域が固定されている。すなわち、特定方向と表示画像IM1の表示領域との位置関係が固定されるように位置合わせされていない。そのため、比較例では、使用者が動いた場合に、外景SCが使用者の動きに応じて変化するが、表示画像IM1は使用者の動きに応じて変化せず、外景SCと表示画像IM1とにズレが生じるため、使用者に映像酔いが発生するおそれがあった。
なお、この発明は上記実施形態に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能であり、例えば、次のような変形も可能である。
図9は、変形例において使用者に視認される視野VRの一例を示す説明図である。図9では、競艇場において行なわれているボートレースが使用者に視認されている。この変形例では、操作部135が所定の操作を受け付けると、無線通信部132が競艇場によって管理されているサーバーと各種情報の送受信を行なうことで、画像判定部168は、カメラ61が撮像した競艇用のボートの船首と船首に備え付けられた旗の色とをパターンマッチングによって認識する。この変形例では、各ボートにボート番号が割り当てられており、図9に示された右のボートから順番に、ボートBT1、ボートBT2、ボートBT3、ボートBT4、ボートBT5である。画像判定部168は、画像表示最大領域PN内において使用者に視認されている外景SCに含まれるボートの船首のそれぞれを、ボートのそれぞれの特徴点として抽出する。例えば、ボートBT5の船首は、十字の画像が特徴点SP5として画像表示部20に表示されている。なお、ボートBT1の船首は画像表示最大領域PN内ではないため、ボートBT1の特徴点は、画像表示部20に表示されない。
上記実施形態では、9軸センサー66および向き判定部166によって、画像表示部20の向きが特定されて、使用者から特徴点への特定方向が設定されたが、特定方向を設定する方法は、これに限られず、種々変形可能である。例えば、カメラ61が撮像した外景画像に含まれる特定の対象物の位置関係によって特定の方向が設定されてもよい。画像判定部168がパターンマッチングにより、特定の対象物を認識して、特定の時点での外景画像に含まれる特定の対象物と、他の時点での外景画像に含まれる特定の対象物と、によって画像表示部20の向きが特定される。なお、この変形例では、カメラ61および画像判定部168は、請求項における表示部方向特定部に相当する。
上記実施形態では、外景画像に含まれる特定の対象物が認識されることによって、特定の対象物に関連付けられて設定された画像データに基づく画像が画像表示部20に表示されたが、画像表示部20に表示される画像は、必ずしも特定の対象物に関連していなくてもよく、種々変形可能である。例えば、操作部135が所定の操作を受け付けることによって、画像表示部20に表示されるコンテンツ動画の表示位置が画像表示部20の向きによって設定されてもよい。画像表示部20にコンテンツ動画が再生される場合に、例えば、向き判定部166は、使用者から再生開始時のコンテンツ動画の中心への方向を特定方向として設定し、画像位置制御部165は、特定方向とコンテンツ動画の中心との位置関係が固定されるように、画像表示部20の向きの変化に応じて、コンテンツ動画の表示位置を設定する。この変形例では、上記実施形態と異なり、必ずしも外景SCに含まれる特定の対象物を認識しなくてもよい。また、コンテンツ動画の表示領域が外景SCに対して固定されるように位置合わせが行なわれるため、使用者が動いた場合であっても、外景SCとコンテンツ動画とにズレがないため、使用者の映像酔いを抑制できる。なお、特定方向は、使用者からコンテンツ動画の中心への方向に限られず、操作部135が操作を受け付けることで、任意の方向が設定されてもよいし、種々変形可能である。
上記実施形態では、画像表示部20の位置から特定の対象物の位置までが距離に応じて、画像表示部20に表示されるオブジェクトの大きさが変化したが、当該距離に応じて変化する画像としては、オブジェクトの大きさに限られず、種々変形可能である。例えば、画像位置制御部165は、画像表示部20の位置から特定の対象物の位置までの距離に応じて、当該距離を表示する、すなわち、異なる画像データに基づく画像を画像表示部20に表示してもよい。この変形例では、画像表示部20と特定の対象物との位置関係に応じて、画像表示部20に表示される画像が設定されるので、使用者が特定の対象物との位置関係をより視認しやすく、使用者の利便性がさらに向上する。
上記実施形態では、制御部10に操作部135を形成したが、操作部135の態様については種々変形可能である。例えば、制御部10とは別体で操作部135であるユーザーインターフェースがある態様でもよい。この場合に、操作部135は、電源130等が形成された制御部10とは別体であるため、小型化でき、使用者の操作性が向上する。また、操作部135の動きを検出する9軸センサーを操作部135に形成して、検出した動きに基づいて各種操作が行なわれることで、使用者は、感覚的に頭部装着型表示装置100の操作ができる。
10…制御部
11…決定キー
12…点灯部
13…表示切替キー
14…トラックパッド
15…輝度切替キー
16…方向キー
17…メニューキー
18…電源スイッチ
20…画像表示部
21…右保持部
22…右表示駆動部
23…左保持部
24…左表示駆動部
26…右光学像表示部
28…左光学像表示部
30…イヤホンプラグ
32…右イヤホン
34…左イヤホン
40…接続部
42…右コード
44…左コード
46…連結部材
48…本体コード
51,52…送信部
53,54…受信部
61…カメラ(撮像部、表示部方向特定部)
66…9軸センサー(表示部方向特定部)
100…頭部装着型表示装置
110…入力情報取得部
120…記憶部
130…電源
132…無線通信部(位置情報受信部)
134…GPSモジュール(表示部位置特定部)
135…操作部
140…CPU
150…オペレーティングシステム
160…画像処理部
165…画像位置制御部(制御部)
166…向き判定部(表示部方向特定部)
168…画像判定部(特定方向設定部、表示部方向特定部)
170…音声処理部
180…インターフェイス
190…表示制御部
201…右バックライト制御部
202…左バックライト制御部
211…右LCD制御部
212…左LCD制御部
221…右バックライト
222…左バックライト
251…右投写光学系
252…左投写光学系
261…右導光板
262…左導光板
241…右LCD
242…左LCD
VSync…垂直同期信号
HSync…水平同期信号
PCLK…クロック信号
OA…外部機器
SC…外景
RE…右眼
LE…左眼
EL,ER…端部
IL…照明光
PL…画像光
BL…建造物
PN…画像表示最大領域
AP…先端部
VR…視野
IM1,IM2…表示画像
IM02,IM03,IM04,IM05,IM06,IM07,IM08…文字画像
SP1,SP2,SP3,SP4,SP5,SP6,SP7,SP8…特徴点
BT1,BT2,BT3,BT4,BT5…ボート
Claims (7)
- 透過型の頭部装着型表示装置であって、
画像データに基づいて画像光を生成し射出する画像光生成部を有し、使用者の頭部に装着された状態において、使用者に前記画像光を虚像として視認させると共に、外景を透過させる画像表示部と、
前記画像表示部の向きである表示部方向を特定する表示部方向特定部と、
前記画像光生成部が前記画像光を生成する画像光生成領域と前記表示部方向とに基づいて特定方向を設定する特定方向設定部と、
前記特定方向が設定された後、前記画像光生成領域と前記特定方向とが位置合わせされるように、前記表示部方向に基づいて、前記画像光生成領域の位置を設定する制御部と、を備える、頭部装着型表示装置。 - 請求項1に記載の頭部装着型表示装置であって、さらに、
前記外景を撮像する撮像部を備え、
前記特定方向設定部は、撮像された画像に含まれる特定の対象物を判別し、前記特定の対象物に基づいて前記特定方向を設定する、頭部装着型表示装置。 - 請求項2に記載の頭部装着型表示装置であって、さらに、
前記画像表示部の位置を特定する表示部位置特定部と、
前記特定の対象物の位置を特定する情報を受信する位置情報受信部と、を備え、
前記制御部は、前記画像表示部と前記特定の対象物との位置関係に基づいて、前記画像光を設定する、頭部装着型表示装置。 - 請求項3に記載の頭部装着型表示装置であって、
前記制御部は、前記画像表示部の位置から前記特定の対象物の位置までの距離が近いほど、前記画像光に含まれるオブジェクトが大きくなるように設定する、頭部装着型表示装置。 - 請求項2から請求項4までのいずれか一項に記載の頭部装着型表示装置であって、
前記制御部は、前記撮像された画像の輝度に基づいて、前記画像光の輝度を設定する、頭部装着型表示装置。 - 請求項5に記載の頭部装着型表示装置であって、
前記制御部は、前記撮像された画像の輝度が高いほど、前記画像光の輝度を高く設定する、頭部装着型表示装置。 - 画像データに基づいて画像光を生成し射出する画像光生成部を有し、使用者の頭部に装着された状態において、使用者に前記画像光を虚像として視認させると共に、外景を透過させる画像表示部を備える、透過型の頭部装着型表示装置の制御方法であって、
前記画像表示部の向きである表示部方向を特定する工程と、
前記画像光生成部が前記画像光を生成する画像光生成領域と前記表示部方向とに基づいて特定方向を設定する工程と、
前記特定方向が設定された後、前記画像光生成領域と前記特定方向とが位置合わせされるように、前記表示部方向に基づいて、前記画像光生成領域の位置を設定する工程と、を備える、方法。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013145644A JP6252002B2 (ja) | 2013-07-11 | 2013-07-11 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
TW103123524A TW201502581A (zh) | 2013-07-11 | 2014-07-08 | 頭部配戴型顯示裝置及頭部配戴型顯示裝置之控制方法 |
RU2016104391A RU2643649C2 (ru) | 2013-07-11 | 2014-07-09 | Устанавливаемое на голове устройство отображения и способ управления устанавливаемым на голове устройством отображения |
EP14750635.6A EP3020027B1 (en) | 2013-07-11 | 2014-07-09 | Head mounted display device and control method for head mounted display device |
KR1020167002625A KR101791494B1 (ko) | 2013-07-11 | 2014-07-09 | 두부 장착형 표시 장치 및 두부 장착형 표시 장치의 제어 방법 |
US14/901,537 US9971155B2 (en) | 2013-07-11 | 2014-07-09 | Head mounted display device and control method for head mounted display device |
PCT/JP2014/003654 WO2015004916A2 (en) | 2013-07-11 | 2014-07-09 | Head mounted display device and control method for head mounted display device |
CN201410325290.7A CN104280884B (zh) | 2013-07-11 | 2014-07-09 | 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013145644A JP6252002B2 (ja) | 2013-07-11 | 2013-07-11 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015019274A true JP2015019274A (ja) | 2015-01-29 |
JP6252002B2 JP6252002B2 (ja) | 2017-12-27 |
Family
ID=52439881
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013145644A Active JP6252002B2 (ja) | 2013-07-11 | 2013-07-11 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6252002B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017034479A (ja) * | 2015-07-31 | 2017-02-09 | キヤノン株式会社 | 制御装置、再生システム、補正方法、及び、コンピュータプログラム |
US10334169B2 (en) | 2015-08-03 | 2019-06-25 | Seiko Epson Corporation | Display system |
WO2019181233A1 (ja) * | 2018-03-19 | 2019-09-26 | ソニー株式会社 | 画像表示システム、情報処理装置、情報処理方法、プログラム、及び移動体 |
JP2020108111A (ja) * | 2018-12-28 | 2020-07-09 | キヤノン株式会社 | 電子機器及びその制御方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020044152A1 (en) * | 2000-10-16 | 2002-04-18 | Abbott Kenneth H. | Dynamic integration of computer generated and real world images |
JP2005157317A (ja) * | 2003-10-28 | 2005-06-16 | Semiconductor Energy Lab Co Ltd | 表示装置及び通信システム |
JP2008096867A (ja) * | 2006-10-16 | 2008-04-24 | Sony Corp | 表示装置、表示方法 |
JP2011175035A (ja) * | 2010-02-23 | 2011-09-08 | Shimadzu Corp | 頭部装着型表示装置 |
WO2011122654A1 (ja) * | 2010-03-30 | 2011-10-06 | 新日鉄ソリューションズ株式会社 | 情報処理装置、情報処理方法及びプログラム、情報処理装置、空きスペース案内システム、空きスペース案内方法及びプログラム、画像表示システム、画像表示方法及びプログラム |
WO2013049248A2 (en) * | 2011-09-26 | 2013-04-04 | Osterhout Group, Inc. | Video display modification based on sensor input for a see-through near-to-eye display |
-
2013
- 2013-07-11 JP JP2013145644A patent/JP6252002B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020044152A1 (en) * | 2000-10-16 | 2002-04-18 | Abbott Kenneth H. | Dynamic integration of computer generated and real world images |
JP2005157317A (ja) * | 2003-10-28 | 2005-06-16 | Semiconductor Energy Lab Co Ltd | 表示装置及び通信システム |
JP2008096867A (ja) * | 2006-10-16 | 2008-04-24 | Sony Corp | 表示装置、表示方法 |
JP2011175035A (ja) * | 2010-02-23 | 2011-09-08 | Shimadzu Corp | 頭部装着型表示装置 |
WO2011122654A1 (ja) * | 2010-03-30 | 2011-10-06 | 新日鉄ソリューションズ株式会社 | 情報処理装置、情報処理方法及びプログラム、情報処理装置、空きスペース案内システム、空きスペース案内方法及びプログラム、画像表示システム、画像表示方法及びプログラム |
WO2013049248A2 (en) * | 2011-09-26 | 2013-04-04 | Osterhout Group, Inc. | Video display modification based on sensor input for a see-through near-to-eye display |
JP2015504616A (ja) * | 2011-09-26 | 2015-02-12 | マイクロソフト コーポレーション | 透過近眼式ディスプレイのセンサ入力に基づく映像表示修正 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017034479A (ja) * | 2015-07-31 | 2017-02-09 | キヤノン株式会社 | 制御装置、再生システム、補正方法、及び、コンピュータプログラム |
US10334169B2 (en) | 2015-08-03 | 2019-06-25 | Seiko Epson Corporation | Display system |
WO2019181233A1 (ja) * | 2018-03-19 | 2019-09-26 | ソニー株式会社 | 画像表示システム、情報処理装置、情報処理方法、プログラム、及び移動体 |
US11232769B2 (en) | 2018-03-19 | 2022-01-25 | Sony Corporation | Image display system, information processing apparatus, information processing method, program, and mobile object |
JP2020108111A (ja) * | 2018-12-28 | 2020-07-09 | キヤノン株式会社 | 電子機器及びその制御方法 |
JP7278773B2 (ja) | 2018-12-28 | 2023-05-22 | キヤノン株式会社 | 電子機器及びその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6252002B2 (ja) | 2017-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9823473B2 (en) | Head-mounted display device and control method for head-mounted display device | |
EP3020027B1 (en) | Head mounted display device and control method for head mounted display device | |
JP5970872B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP6337433B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP5958689B2 (ja) | 頭部装着型表示装置 | |
JP6155622B2 (ja) | 表示装置、頭部装着型表示装置、表示装置の制御方法、および、頭部装着型表示装置の制御方法 | |
US10073262B2 (en) | Information distribution system, head mounted display, method for controlling head mounted display, and computer program | |
JP6318596B2 (ja) | 情報処理装置および情報処理装置の制御方法 | |
US20160188283A1 (en) | Head-mounted display device, control method for head-mounted display device, and computer program | |
US9799144B2 (en) | Head mounted display, and control method for head mounted display | |
JP6268778B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP2016142887A (ja) | 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム | |
JP2015115848A (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP2016082466A (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
JP2016173693A (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
JP2016133399A (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
US20170315938A1 (en) | Information processing device, method of controlling information processing device, and computer program | |
JP2016024208A (ja) | 表示装置、表示装置の制御方法、および、プログラム | |
JP6252002B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP6135162B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム | |
JP6428024B2 (ja) | 表示装置、表示装置の制御方法、および、プログラム | |
JP2015177404A (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP6582374B2 (ja) | 表示装置およびその制御方法、並びにコンピュータープログラム | |
JP2016033763A (ja) | 表示装置、表示装置の制御方法、および、プログラム | |
JP6273677B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160531 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20160530 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170502 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171113 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6252002 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |