JP7145944B2 - 視覚キューを提供する手段を用いる表示装置および表示方法 - Google Patents
視覚キューを提供する手段を用いる表示装置および表示方法 Download PDFInfo
- Publication number
- JP7145944B2 JP7145944B2 JP2020520816A JP2020520816A JP7145944B2 JP 7145944 B2 JP7145944 B2 JP 7145944B2 JP 2020520816 A JP2020520816 A JP 2020520816A JP 2020520816 A JP2020520816 A JP 2020520816A JP 7145944 B2 JP7145944 B2 JP 7145944B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- light emitting
- user
- emitting elements
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2310/00—Command of the display device
- G09G2310/02—Addressing, scanning or driving the display screen or processing steps related thereto
- G09G2310/0232—Special driving of display border areas
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Controls And Circuits For Display Device (AREA)
- Computer Hardware Design (AREA)
- Theoretical Computer Science (AREA)
- Transforming Electric Information Into Light Information (AREA)
Description
・ 画像をレンダリングする少なくとも1つの画像レンダラと、
・ 出射光学素子と、
・ 視覚キューを提供する手段と、
・ 前記少なくとも1つの画像レンダラと前記視覚キューを提供する手段とに接続される処理部と、を備え
前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射し、
前記視覚キューは、前記出射光学素子のビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に提供され、
前記処理部は、前記レンダリングされた画像の、前記出射光学素子の前記ビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成し、前記駆動信号を介して、前記視覚キューを提供する手段を制御するように構成される。
・ 前記少なくとも1つの画像レンダラにおいて画像をレンダリングすることであって、前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は、前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射する、レンダリングすることと、
・ 前記レンダリングされた画像の、前記出射光学素子のビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成することと、
・ 前記出射光学素子の前記ビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に視覚キューを提供するように、前記駆動信号を介して、前記視覚キューを提供する手段を制御することと、を含む。
・ 画像をレンダリングする少なくとも1つの画像レンダラと、
・ 出射光学素子と、
・ 視覚キューを提供する手段と、
・ 前記少なくとも1つの画像レンダラと前記視覚キューを提供する手段とに接続される処理部と、を備え
前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射し、
前記視覚キューは、前記出射光学素子のビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に提供され、
前記処理部は、前記レンダリングされた画像の、前記出射光学素子の前記ビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成し、前記駆動信号を介して、前記視覚キューを提供する手段を制御するように構成される。
・ 前記少なくとも1つの画像レンダラにおいて画像をレンダリングすることであって、前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は、前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射する、レンダリングすることと、
・ 前記レンダリングされた画像の、前記出射光学素子のビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成することと、
・ 前記出射光学素子の前記ビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に視覚キューを提供するように、前記駆動信号を介して、前記視覚キューを提供する手段を制御することと、を含む。
(a) 視線方向を検出するための手段から、検出されたユーザの視線方向を受信し、
(b) 表示装置のユーザに表示する画像を受信し、検出されたユーザの視線方向を用いて、画像の高精度視領域を特定し、
(c) 第1解像度を有するコンテキスト画像と、第2解像度を有するフォーカス画像とを生成するために画像を処理し、ここで
- 入力画像の高精度視領域に実質的に相当するコンテキスト画像の領域がマスクされ、
- フォーカス画像は、入力画像の高精度視領域に実質的に相当し、
- 第2解像度は、第1解像度よりも高く、
(d) コンテキスト画像をコンテキスト画像レンダラに、かつフォーカス画像をフォーカス画像レンダラに、実質的に同時にレンダリングし、一方で、少なくとも1つの光コンバイナを制御して、レンダリングされたフォーカス画像の投影が、レンダリングされたコンテキスト画像のマスクされた領域の投影と実質的に重なるように、レンダリングされたコンテキスト画像の投影とレンダリングされたフォーカス画像の投影を組み合わせる、
ように構成される。
Claims (8)
- ・ 画像をレンダリングする少なくとも1つの画像レンダラと、
・ 出射光学素子と、
・ 視覚キューを提供する手段と、
・ 前記少なくとも1つの画像レンダラと前記視覚キューを提供する手段とに接続される処理部と、を備える表示装置であって、
前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射し、
前記視覚キューは、前記出射光学素子のビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に提供され、
前記処理部は、前記レンダリングされた画像の、前記出射光学素子の前記ビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成し、前記駆動信号を介して、前記視覚キューを提供する手段を制御するように構成され、
前記視覚キューを提供する手段は、前記周辺領域に配置される複数の発光素子を備え、
前記処理部は、前記複数の発光素子によって放射される光の色および/または強度を制御するように構成され、
前記表示装置が前記ユーザの頭部に装着される場合、前記複数の発光素子と前記ユーザの眼との間の距離は、前記出射光学素子と前記ユーザの眼との間の距離とほぼ同じであり、
前記視覚キューを提供する手段は、前記複数の発光素子によって放射される光を拡散する複数の拡散体をさらに備え、
前記処理部は、前記レンダリングされた画像の後に、前記少なくとも1つの画像レンダラにおいてレンダリングされる少なくとも1つの後続画像に基づいて前記駆動信号を生成するように構成される、表示装置。 - 前記複数の発光素子は、少なくとも第1の発光素子セットと第2の発光素子セットとを含み、
前記第1の発光素子セットによって放射される光の色および/または強度は、前記第2の発光素子セットによって放射される光の色および/または強度と異なる、
請求項1に記載の表示装置。 - 前記視覚キューを提供する手段は、前記少なくとも1つの画像レンダラにおけるレンダリング境界の少なくとも一部から放射される光を前記周辺領域へと導くことにより、前記周辺領域を照明する、少なくとも1つの光学素子を備える、請求項1又は2に記載の表示装置。
- 前記少なくとも1つの光学素子は、レンズと光ファイバ要素の少なくとも一方として実装される、請求項3に記載の表示装置。
- 少なくとも1つの画像レンダラと、出射光学素子と、視覚キューを提供する手段とを備える表示装置を介した表示方法であって、
・ 前記少なくとも1つの画像レンダラにおいて画像をレンダリングすることであって、前記表示装置がユーザの頭部に装着される場合、レンダリングされた画像の投影は、前記出射光学素子を通って前記表示装置から出射して前記ユーザの眼に入射する、レンダリングすることと、
・ 前記レンダリングされた画像の、前記出射光学素子のビューポート内に見えない領域に少なくとも部分的に基づいて駆動信号を生成することと、
・ 前記出射光学素子の前記ビューポートを実質的に取り囲み前記ユーザの視野内にある周辺領域内に視覚キューを提供するように、前記駆動信号を介して、前記視覚キューを提供する手段を制御することと、
を含み、
前記視覚キューを提供する手段は、前記周辺領域に配置される複数の発光素子を備え、
前記方法は、前記複数の発光素子によって放射される光の色および/または強度を制御することをさらに含み、
前記表示装置が前記ユーザの頭部に装着される場合、前記複数の発光素子と前記ユーザの眼との間の距離は、前記出射光学素子と前記ユーザの眼との間の距離とほぼ同じであり、
前記視覚キューを提供する手段は、前記複数の発光素子によって放射される光を拡散する複数の拡散体をさらに備え、
前記駆動信号を生成することは、前記レンダリングされた画像の後に、前記少なくとも1つの画像レンダラにおいてレンダリングされる少なくとも1つの後続画像に基づいて実行される、方法。 - 前記複数の発光素子は、少なくとも第1の発光素子セットと第2の発光素子セットとを含み、
前記光の色および/または強度を制御することは、前記第1の発光素子セットによって放射される光の色および/または強度が、前記第2の発光素子セットによって放射される光の色および/または強度と異なるように、前記第1の発光素子セットと前記第2の発光素子セットとを制御することを含む、請求項5に記載の方法。 - 前記視覚キューを提供する手段は、前記少なくとも1つの画像レンダラにおけるレンダリング境界の少なくとも一部から放射される光を前記周辺領域へと導くことにより、前記周辺領域を照明する、少なくとも1つの光学素子を備える、請求項5又は6に記載の方法。
- 前記少なくとも1つの光学素子は、レンズと光ファイバ要素の少なくとも一方として実装される、請求項7に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/790,234 US10488665B2 (en) | 2017-10-23 | 2017-10-23 | Display apparatus and method of displaying using means for providing visual cues |
US15/790,234 | 2017-10-23 | ||
PCT/FI2018/050769 WO2019081809A1 (en) | 2017-10-23 | 2018-10-19 | DISPLAY APPARATUS AND DISPLAY METHOD USING MEANS FOR PROVIDING VISUAL REFERENCES |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021500601A JP2021500601A (ja) | 2021-01-07 |
JP2021500601A5 JP2021500601A5 (ja) | 2021-10-07 |
JP7145944B2 true JP7145944B2 (ja) | 2022-10-03 |
Family
ID=64109895
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020520816A Active JP7145944B2 (ja) | 2017-10-23 | 2018-10-19 | 視覚キューを提供する手段を用いる表示装置および表示方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10488665B2 (ja) |
EP (1) | EP3655814B1 (ja) |
JP (1) | JP7145944B2 (ja) |
CN (1) | CN111247473B (ja) |
WO (1) | WO2019081809A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021055230A1 (en) * | 2019-09-19 | 2021-03-25 | Akalana Management Llc | Optical systems with low resolution peripheral displays |
WO2022118911A1 (ja) * | 2020-12-02 | 2022-06-09 | 国立大学法人筑波大学 | 画像表示装置、及び画像表示方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008256946A (ja) | 2007-04-05 | 2008-10-23 | Tokyo Institute Of Technology | 画像表示装置のための酔い防止装置 |
JP2013257492A (ja) | 2012-06-14 | 2013-12-26 | Sony Corp | 制御装置、表示装置、制御方法、照明制御方法及びプログラム |
US20170039766A1 (en) | 2015-08-07 | 2017-02-09 | Ariadne's Thread (Usa), Inc. (Dba Immerex) | Modular multi-mode virtual reality headset |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5585813A (en) | 1992-10-05 | 1996-12-17 | Rockwell International Corporation | All aspect head aiming display |
JP2979981B2 (ja) * | 1994-11-16 | 1999-11-22 | 三菱電機株式会社 | 映像表示装置 |
ATE297634T1 (de) | 2002-07-04 | 2005-06-15 | Koninkl Philips Electronics Nv | Anzeigevorrichtung |
US8212859B2 (en) * | 2006-10-13 | 2012-07-03 | Apple Inc. | Peripheral treatment for head-mounted displays |
US7928927B1 (en) * | 2008-03-17 | 2011-04-19 | Rockwell Collins, Inc. | Head worn head up display system |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
EP3112985A1 (en) | 2015-06-30 | 2017-01-04 | Nokia Technologies Oy | An apparatus for video output and associated methods |
US9454010B1 (en) * | 2015-08-07 | 2016-09-27 | Ariadne's Thread (Usa), Inc. | Wide field-of-view head mounted display system |
US9606362B2 (en) * | 2015-08-07 | 2017-03-28 | Ariadne's Thread (Usa), Inc. | Peripheral field-of-view illumination system for a head mounted display |
US10558043B2 (en) * | 2015-12-02 | 2020-02-11 | Rockwell Collins, Inc. | Worn display using a peripheral view |
-
2017
- 2017-10-23 US US15/790,234 patent/US10488665B2/en active Active
-
2018
- 2018-10-19 WO PCT/FI2018/050769 patent/WO2019081809A1/en unknown
- 2018-10-19 CN CN201880067508.XA patent/CN111247473B/zh active Active
- 2018-10-19 JP JP2020520816A patent/JP7145944B2/ja active Active
- 2018-10-19 EP EP18797000.9A patent/EP3655814B1/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008256946A (ja) | 2007-04-05 | 2008-10-23 | Tokyo Institute Of Technology | 画像表示装置のための酔い防止装置 |
JP2013257492A (ja) | 2012-06-14 | 2013-12-26 | Sony Corp | 制御装置、表示装置、制御方法、照明制御方法及びプログラム |
US20170039766A1 (en) | 2015-08-07 | 2017-02-09 | Ariadne's Thread (Usa), Inc. (Dba Immerex) | Modular multi-mode virtual reality headset |
Also Published As
Publication number | Publication date |
---|---|
US10488665B2 (en) | 2019-11-26 |
JP2021500601A (ja) | 2021-01-07 |
CN111247473A (zh) | 2020-06-05 |
WO2019081809A1 (en) | 2019-05-02 |
EP3655814A1 (en) | 2020-05-27 |
EP3655814B1 (en) | 2020-12-02 |
US20190122618A1 (en) | 2019-04-25 |
CN111247473B (zh) | 2022-02-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107376349B (zh) | 被遮挡的虚拟图像显示 | |
US10573086B2 (en) | Opacity filter for display device | |
EP3330771B1 (en) | Display apparatus and method of displaying using focus and context displays | |
US10459230B2 (en) | Compact augmented reality / virtual reality display | |
US9311751B2 (en) | Display of shadows via see-through display | |
US9147111B2 (en) | Display with blocking image generation | |
CN107710284B (zh) | 用于在虚拟图像生成系统中更有效地显示文本的技术 | |
TWI629507B (zh) | 頭戴式顯示裝置以及適應性遮罩方法 | |
US20160292921A1 (en) | System, apparatus, and method for displaying an image using light of varying intensities | |
US20200225734A1 (en) | Display apparatus and method of indicating level of immersion using visual indicator | |
US20210041732A1 (en) | Virtual reality and/or augmented reality viewer having variable transparency | |
US20180158390A1 (en) | Digital image modification | |
JP7145944B2 (ja) | 視覚キューを提供する手段を用いる表示装置および表示方法 | |
EP3441847A1 (en) | Controller for use in a display device | |
EP3762896B1 (en) | System and method for producing images for display apparatus | |
US20230379594A1 (en) | Image blending |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210825 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210825 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220617 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220825 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220907 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220920 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7145944 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |