JP2020181263A - 画像生成装置および情報提示方法 - Google Patents
画像生成装置および情報提示方法 Download PDFInfo
- Publication number
- JP2020181263A JP2020181263A JP2019082183A JP2019082183A JP2020181263A JP 2020181263 A JP2020181263 A JP 2020181263A JP 2019082183 A JP2019082183 A JP 2019082183A JP 2019082183 A JP2019082183 A JP 2019082183A JP 2020181263 A JP2020181263 A JP 2020181263A
- Authority
- JP
- Japan
- Prior art keywords
- viewpoint
- image
- user
- head
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 15
- 230000033001 locomotion Effects 0.000 claims description 32
- 230000008859 change Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 abstract description 2
- 210000003128 head Anatomy 0.000 description 21
- 230000015654 memory Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 3
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 206010025482 malaise Diseases 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
Claims (13)
- ヘッドマウントディスプレイを装着しているユーザの頭部の動きに基づき当該ユーザの視点に係る情報を取得する視点情報取得部と、
前記ユーザのいる実空間の状態を検出するセンサからの情報に基づき当該実空間の状態に係る情報を取得する実空間情報取得部と、
前記ヘッドマウントディスプレイに表示させる画像に対する視点を制御する視点制御部と、
前記視点に対応する視野で表示対象を表した画像を生成する画像生成部と、
生成された画像を前記ヘッドマウントディスプレイに出力する出力部と、
を備え、
前記視点制御部は、前記表示させる画像に対する視点を、前記ユーザの視点と、前記実空間に存在する物を視野に含む、前記ユーザの視点と異なる他者視点との間で移動させることを特徴とする画像生成装置。 - 前記視点制御部は、前記ユーザと、当該ユーザへの情報提供者とが視野に入る視点を、前記他者視点として決定し、
前記画像生成部は、前記ユーザと前記情報提供者を表す仮想オブジェクトを、前記実空間の状態に係る情報に基づき、表示対象の空間に配置したうえ、前記他者視点に対応する視野で当該表示対象の空間を表した画像を生成することを特徴とする請求項1に記載の画像生成装置。 - 前記画像生成部は、前記表示対象の空間として仮想世界を生成し、
前記視点制御部は、前記仮想世界に表されているオブジェクトによって、前記ユーザと前記情報提供者が隠蔽されない視点を前記他者視点として決定することを特徴とする請求項2に記載の画像生成装置。 - 前記視点制御部は、前記表示対象の空間において前記ユーザと前記情報提供者を通る線上、または当該線から所定範囲の領域に前記他者視点を決定することを特徴とする請求項2または3に記載の画像生成装置。
- 前記視点制御部は、前記表示させる画像に対する視点が前記ユーザの視点にあるときに、その視野に前記情報提供者が含まれる場合、前記表示対象の空間において前記ユーザと前記情報提供者を結ぶ線分を垂直2等分する線上、または当該線から所定範囲の領域に前記他者視点を決定することを特徴とする請求項2に記載の画像生成装置。
- 前記視点制御部はさらに、前記情報提供者が示す位置または方向が視野に入る視点を前記他者視点として決定し、
前記画像生成部は、前記位置または方向を表す図形を、前記表示対象の空間に配置したうえ、前記他者視点に対応する視野で当該表示対象の空間を表した画像を生成することを特徴とする請求項2に記載の画像生成装置。 - 前記視点制御部は、前記ユーザの視点から前記他者視点まで前記画像に対する視点を移動させる期間を設け、
前記画像生成部は、当該期間において、移動中の視点に対応する視野で表示対象を表した画像を順次生成することを特徴とする請求項1から6のいずれかに記載の画像生成装置。 - 前記視点制御部は、前記ユーザが入力装置を介して行った操作に応じて、前記視点を移動させることを特徴とする請求項1から7のいずれかに記載の画像生成装置。
- 前記視点制御部は、前記ユーザへの情報提供者が入力装置を介して行った操作に応じて、前記視点を移動させることを特徴とする請求項1から7のいずれかに記載の画像生成装置。
- 前記視点制御部は、前記実空間における状態変化に応じて、前記他者視点を調整することを特徴とする請求項1から9のいずれかに記載の画像生成装置。
- 前記画像生成部は、前記画像に対する視点が前記ユーザの視点から移動しても、当該ユーザの視点において表示させていた画像の面を、生成する画像に含めることを特徴とする請求項1または2に記載の画像生成装置。
- ヘッドマウントディスプレイを装着しているユーザの頭部の動きに基づき当該ユーザの視点に係る情報を取得するステップと、
前記ユーザのいる実空間の状態を検出するセンサからの情報に基づき当該実空間の状態に係る情報を取得するステップと、
前記ヘッドマウントディスプレイに表示させる画像に対する視点を制御するステップと、
前記視点に対応する視野で表示対象を表した画像を生成するステップと、
生成された画像を前記ヘッドマウントディスプレイに出力するステップと、
を含み、
前記視点を制御するステップは、前記表示させる画像に対する視点を、前記ユーザの視点と、前記実空間に存在する物を視野に含む、前記ユーザの視点と異なる他者視点との間で移動させるステップを含むことを特徴とする画像生成装置による情報提示方法。 - ヘッドマウントディスプレイを装着しているユーザの頭部の動きに基づき当該ユーザの視点に係る情報を取得する機能と、
前記ユーザのいる実空間の状態を検出するセンサからの情報に基づき当該実空間の状態に係る情報を取得する機能と、
前記ヘッドマウントディスプレイに表示させる画像に対する視点を制御する機能と、
前記視点に対応する視野で表示対象を表した画像を生成する機能と、
生成された画像を前記ヘッドマウントディスプレイに出力する機能と、
をコンピュータに実現させ、
前記視点を制御する機能は、前記表示させる画像に対する視点を、前記ユーザの視点と、前記実空間に存在する物を視野に含む、前記ユーザの視点と異なる他者視点との間で移動させることを特徴とするコンピュータプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019082183A JP7349256B2 (ja) | 2019-04-23 | 2019-04-23 | 画像生成装置および情報提示方法 |
US17/439,014 US20220147138A1 (en) | 2019-04-23 | 2020-04-16 | Image generation apparatus and information presentation method |
PCT/JP2020/016648 WO2020218131A1 (ja) | 2019-04-23 | 2020-04-16 | 画像生成装置および情報提示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019082183A JP7349256B2 (ja) | 2019-04-23 | 2019-04-23 | 画像生成装置および情報提示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020181263A true JP2020181263A (ja) | 2020-11-05 |
JP7349256B2 JP7349256B2 (ja) | 2023-09-22 |
Family
ID=72942008
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019082183A Active JP7349256B2 (ja) | 2019-04-23 | 2019-04-23 | 画像生成装置および情報提示方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220147138A1 (ja) |
JP (1) | JP7349256B2 (ja) |
WO (1) | WO2020218131A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022073651A (ja) * | 2020-11-02 | 2022-05-17 | キヤノン株式会社 | 情報処理装置、情報処理方法およびプログラム |
US12028507B2 (en) * | 2021-03-11 | 2024-07-02 | Quintar, Inc. | Augmented reality system with remote presentation including 3D graphics extending beyond frame |
WO2023188020A1 (ja) * | 2022-03-29 | 2023-10-05 | 株式会社ソニー・インタラクティブエンタテインメント | 画像生成装置、画像再生装置、画像生成方法、及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014115457A (ja) * | 2012-12-10 | 2014-06-26 | Sony Corp | 情報処理装置および記録媒体 |
JP2014127987A (ja) * | 2012-12-27 | 2014-07-07 | Sony Corp | 情報処理装置および記録媒体 |
JP2018013562A (ja) * | 2016-07-20 | 2018-01-25 | 株式会社サイバーウォーカー | 仮想現実システムに於ける外部制御手段 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015095802A (ja) * | 2013-11-13 | 2015-05-18 | ソニー株式会社 | 表示制御装置、表示制御方法、およびプログラム |
US10099122B2 (en) * | 2016-03-30 | 2018-10-16 | Sony Interactive Entertainment Inc. | Head-mounted display tracking |
US20180196506A1 (en) * | 2016-12-28 | 2018-07-12 | Colopl, Inc. | Information processing method and apparatus, information processing system, and program for executing the information processing method on computer |
-
2019
- 2019-04-23 JP JP2019082183A patent/JP7349256B2/ja active Active
-
2020
- 2020-04-16 WO PCT/JP2020/016648 patent/WO2020218131A1/ja active Application Filing
- 2020-04-16 US US17/439,014 patent/US20220147138A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014115457A (ja) * | 2012-12-10 | 2014-06-26 | Sony Corp | 情報処理装置および記録媒体 |
JP2014127987A (ja) * | 2012-12-27 | 2014-07-07 | Sony Corp | 情報処理装置および記録媒体 |
JP2018013562A (ja) * | 2016-07-20 | 2018-01-25 | 株式会社サイバーウォーカー | 仮想現実システムに於ける外部制御手段 |
Also Published As
Publication number | Publication date |
---|---|
US20220147138A1 (en) | 2022-05-12 |
JP7349256B2 (ja) | 2023-09-22 |
WO2020218131A1 (ja) | 2020-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109479010B (zh) | 通过注视化身的私有通信 | |
US10373392B2 (en) | Transitioning views of a virtual model | |
JP7164630B2 (ja) | 予測サッカード着地点に基づく動的グラフィックスレンダリング | |
JP7181316B2 (ja) | Hmd環境での高速中心窩レンダリングのための予測及びgpuに対する最新の更新を伴う視線追跡 | |
US11861059B2 (en) | System and method for generating a virtual reality scene based on individual asynchronous motion capture recordings | |
EP3137982B1 (en) | Transitions between body-locked and world-locked augmented reality | |
US20150312561A1 (en) | Virtual 3d monitor | |
CN107209565B (zh) | 用于显示固定大小的增强现实对象的方法和系统 | |
WO2020218131A1 (ja) | 画像生成装置および情報提示方法 | |
US20210304509A1 (en) | Systems and methods for virtual and augmented reality | |
JP2019175323A (ja) | シミュレーションシステム及びプログラム | |
JP2023139098A (ja) | 画像生成装置および画像生成方法 | |
EP3308539A1 (en) | Display for stereoscopic augmented reality | |
EP3486749A1 (en) | Provision of virtual reality content | |
WO2021261346A1 (ja) | 情報処理装置、方法、プログラム及び情報処理システム | |
US11195320B2 (en) | Feed-forward collision avoidance for artificial reality environments | |
JP2020181264A (ja) | 画像生成装置、画像表示システム、および情報提示方法 | |
JP2019175322A (ja) | シミュレーションシステム及びプログラム | |
US20190089899A1 (en) | Image processing device | |
CN114245755A (zh) | 信息处理装置、信息处理方法和记录介质 | |
US20240078767A1 (en) | Information processing apparatus and information processing method | |
WO2023140004A1 (ja) | 情報処理装置および情報処理方法 | |
WO2024162216A1 (ja) | プログラム | |
WO2023162668A1 (ja) | 情報処理装置および床面高さ調整方法 | |
WO2024038787A1 (ja) | 情報処理装置および情報処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230411 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230602 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230911 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7349256 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |