JP7112502B2 - 複合現実システムのためのブラウザ - Google Patents
複合現実システムのためのブラウザ Download PDFInfo
- Publication number
- JP7112502B2 JP7112502B2 JP2020544190A JP2020544190A JP7112502B2 JP 7112502 B2 JP7112502 B2 JP 7112502B2 JP 2020544190 A JP2020544190 A JP 2020544190A JP 2020544190 A JP2020544190 A JP 2020544190A JP 7112502 B2 JP7112502 B2 JP 7112502B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- virtual
- open
- content
- physical location
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 130
- 238000013507 mapping Methods 0.000 claims description 45
- 230000004044 response Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 15
- 230000009471 action Effects 0.000 claims description 6
- 230000003993 interaction Effects 0.000 claims description 4
- 238000009877 rendering Methods 0.000 claims description 4
- 238000000354 decomposition reaction Methods 0.000 claims description 2
- 238000003860 storage Methods 0.000 description 50
- 230000008569 process Effects 0.000 description 17
- 238000013459 approach Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 239000013598 vector Substances 0.000 description 5
- 210000003128 head Anatomy 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000010422 painting Methods 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000010076 replication Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 206010027646 Miosis Diseases 0.000 description 1
- 208000006550 Mydriasis Diseases 0.000 description 1
- 241001074085 Scophthalmus aquosus Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- SWQJXJOGLNCZEY-UHFFFAOYSA-N helium atom Chemical compound [He] SWQJXJOGLNCZEY-UHFFFAOYSA-N 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000011065 in-situ storage Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003547 miosis Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000012913 prioritisation Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003362 replicative effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
Description
本願明細書は、例えば、以下の項目も提供する。
(項目1)
ウィンドウをコンピューティング環境内に表示するための方法であって、
複数の開いているウィンドウを選択するための命令を受信することと、
前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、
前記複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示することと、
前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることと
を含む、方法。
(項目2)
前記複数の開いているウィンドウの表現は、前記ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、前記単一ユーザインターフェース内に表示される、項目1に記載の方法。
(項目3)
前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウに割り当てられる座標において、前記ユーザにレンダリングおよび表示される、項目2に記載の方法。
(項目4)
前記複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、項目3に記載の方法。
(項目5)
全ての開いているウィンドウは、前記単一ユーザインターフェース内での表示のために選択される、項目1に記載の方法。
(項目6)
前記複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために、別個のプリズムの中にレンダリングされる、項目1に記載の方法。
(項目7)
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、項目1に記載の方法。
(項目8)
前記選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、項目1に記載の方法。
(項目9)
コンピューティング環境内でウィンドウを操作するためのシステムであって、
3次元コンテンツを表示する複合現実ディスプレイデバイスと、
プロセッサと、
前記プロセッサによって実行可能なプログラマブルコードを保持するためのメモリであって、前記プログラマブルコードは、複数の開いているウィンドウを選択するための命令を受信することと、前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、前記複数の開いているウィンドウの表現を前記複合現実ディスプレイデバイス内の単一ユーザインターフェース内に表示することと、前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることとを行うための命令を含む、メモリと
を備える、システム。
(項目10)
前記複数の開いているウィンドウの表現は、前記ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、前記単一ユーザインターフェース内に表示される、項目9に記載のシステム。
(項目11)
前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウに割り当てられる座標において、前記ユーザにレンダリングおよび表示される、項目10に記載のシステム。
(項目12)
前記複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、項目11に記載のシステム。
(項目13)
全ての開いているウィンドウは、前記単一ユーザインターフェース内での表示のために選択される、項目9に記載のシステム。
(項目14)
前記複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために境界された体積の中にレンダリングされる、項目9に記載のシステム。
(項目15)
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、項目9に記載のシステム。
(項目16)
前記選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、項目9に記載のシステム。
(項目17)
コンピュータ可読媒体上に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令のシーケンスは、プロセッサによって実行されると、前記プロセッサに、
複数の開いているウィンドウを選択するための命令を受信することと、
前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、
前記複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示することと、
前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることと
を含む方法を実行させる、コンピュータプログラム製品。
(項目18)
仮想コンテンツをコンピューティング環境内に表示するための方法であって、
複数の開かれたアプリケーションを選択するための命令を受信することと、
前記複数の開かれたアプリケーションに関する情報を読み出すことであって、前記複数の開かれたアプリケーションは、異なる物理的場所と関連付けられる、ことと、
前記複数の開かれたアプリケーションの表現を単一ユーザインターフェース内に表示することと、
前記複数の開かれたアプリケーションの選択されたアプリケーションの選択の受信に応じて、前記選択されたアプリケーションをユーザのための視野の前景の中にロードすることと
を含む、方法。
ウェブページ分解
複合現実システムでは、ユーザの作業空間は、ディスプレイ画面のサイズによって限定されない。したがって、従来のブラウザと異なり、複合現実システム内のブラウザウィンドウは、ユーザの環境内の任意の場所に設置および保定されることができる。問題は、従来のブラウザ技術が、表示可能ブラウザ場所がディスプレイ画面の範囲に限定されなければならないという仮定とともに構成されることである。
本開示の付加的実施形態が、下記に説明される。これらの付加的実施形態は、上記に開示される実施形態からの要素を組み込んでもよく、これらの付加的実施形態の要素は、上記に開示される実施形態の中に組み込まれてもよい。
1.
コンピュータ可読媒体上に具現化されるコンピュータプログラム製品であって、コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、命令のシーケンスは、プロセッサによって実行されると、プロセッサに、
複数の開いているウィンドウを選択するための命令を受信するステップと、
複数の開いているウィンドウに関する情報を読み出すステップであって、複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ステップと、
複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示するステップと、
複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、選択されたウィンドウをユーザのための視野の前景の中にロードするステップと、
を含む方法を実行させる、コンピュータプログラム製品。
2.
複数の開いているウィンドウの表現は、ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、単一ユーザインターフェース内に表示される、実施形態1に記載のコンピュータプログラム製品。
3.
複数の開いているウィンドウは、単一ユーザインターフェース内の複数の開いているウィンドウに割り当てられる座標において、ユーザにレンダリングおよび表示される、実施形態2に記載のコンピュータプログラム製品。
4.
複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、実施形態3に記載のコンピュータプログラム製品。
5.
全ての開いているウィンドウは、単一ユーザインターフェース内での表示のために選択される、実施形態1に記載のコンピュータプログラム製品。
6.
複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために境界された体積の中にレンダリングされる、実施形態1に記載のコンピュータプログラム製品。
7.
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、実施形態1に記載のコンピュータプログラム製品。
8.
選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、実施形態1に記載のコンピュータプログラム製品。
9.
仮想コンテンツをコンピューティング環境内に表示するための方法であって、
複数の開かれたアプリケーションを選択するための命令を受信するステップと、
複数の開かれたアプリケーションに関する情報を読み出すステップであって、複数の開かれたアプリケーションは、異なる物理的場所と関連付けられる、ステップと、
複数の開かれたアプリケーションの表現を単一ユーザインターフェース内に表示するステップと、
複数の開かれたアプリケーションの選択されたアプリケーションの選択の受信に応じて、選択されたアプリケーションをユーザのための視野の前景の中にロードするステップと、
を含む、方法。
10.
複数の開かれたアプリケーションの表現は、ユーザための現在の物理的環境内の場所に対する複数の開かれたアプリケーションのための場所パラメータを変化させることによって、単一ユーザインターフェース内に表示される、実施形態9に記載の方法。
11.
複数の開かれたアプリケーションは、単一ユーザインターフェース内の複数の開かれたアプリケーションに割り当てられる座標において、ユーザにレンダリングおよび表示される、実施形態10に記載の方法。
12.
複数の開かれたアプリケーションは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、実施形態11に記載の方法。
13.
全ての開かれたアプリケーションは、単一ユーザインターフェース内での表示のために選択される、実施形態9に記載の方法。
14.
複数の開かれたアプリケーションはそれぞれ、仮想コンテンツの設置のために、別個のプリズムの中にレンダリングされる、実施形態9に記載の方法。
15.
ホバリング状態が、実装され、ホバリングされているアプリケーションは、前景の中に移動する一方、他のアプリケーションは、視覚的に後退する、実施形態9に記載の方法。
16.
選択されたアプリケーションの選択の受信に応じて、非選択アプリケーションは、閉じられる、実施形態9に記載の方法。
図15は、本開示の実施形態を実装するために好適な例証的コンピューティングシステム1400のブロック図である。コンピューティングシステム1400は、情報を通信するためのバス1406または他の通信機構を含み、これは、プロセッサ1407、システムメモリ1408(例えば、RAM)、静的記憶デバイス1409(例えば、ROM)、ディスクドライブ1410(例えば、磁気または光学)、通信インターフェース1414(例えば、モデムまたはEthernet(登録商標)カード)、ディスプレイ1411(例えば、CRTまたはLCD)、入力デバイス1412(例えば、キーボードおよびマウス)等のサブシステムおよびデバイスを相互接続する。
Claims (21)
- ウィンドウをコンピューティング環境内に表示するための方法であって、
複合現実デバイスにおいて、単一ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための命令を受信することであって、
前記第1の開いているウィンドウは、第1の境界された体積中にレンダリングされ、第1の仮想コンテンツの設置のための第1の空間を備え、
前記第2の開いているウィンドウは、第2の境界された体積中にレンダリングされ、第2の仮想コンテンツの設置のための第2の空間を備える、ことと、
前記第1および第2の開いているウィンドウに関する情報を読み出すことであって、前記第1の開いているウィンドウは、物理的環境内の第1の物理的場所においてレンダリングされ、前記第2の開いているウィンドウは、前記物理的環境内の第2の物理的場所においてレンダリングされ、前記複合現実デバイスのユーザは、前記第1の物理的場所に位置している、ことと、
前記第1の物理的場所において前記ユーザに、前記単一ユーザインターフェースにおける、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウの前記第1の仮想コンテンツと、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウの前記第2の仮想コンテンツとの両方のビューを提示することであって、
前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの視野内に可視であり、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの視野内に不可視であり、
前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの前記視野内に不可視であり、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの前記視野内に可視である、ことと、
前記単一ユーザインターフェースにおける前記ビューから、前記第2の開いているウィンドウの選択を受信することに応じて、少なくとも、前記第2の境界された体積内の前記第2の仮想コンテンツを前記第1の物理的場所における前記ユーザのための前記視野中に設置することによって、前記第2の開いているウィンドウ内に設置された前記第2の仮想コンテンツを前記ユーザの前記視野中にロードすることと
を含む、方法。 - 前記第1および第2の開いているウィンドウの前記ビューは、少なくとも、前記第1の開いているウィンドウまたは前記第2の開いているウィンドウの開いているウィンドウの対応する位置と関連付けられたそれぞれの場所パラメータを前記ユーザが位置している前記物理的環境内の別個の場所と関連付けることによって、前記単一ユーザインターフェース内に表示される、請求項1に記載の方法。
- 前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウにそれぞれに割り当てられるそれぞれの座標において、前記ユーザにレンダリングされ、前記複数の開いているウィンドウの前記ビューは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、請求項2に記載の方法。
- 複数のウェブページ、またはブラウザアプリケーションのための前記複数のウェブページへのそれぞれのリンクを識別することであって、前記それぞれのリンクは、ウェブページのブックマークを含み、前記複数のウェブページは、第1のウェブページ、第2のウェブページ、および第3のウェブページを含む、ことと、
前記単一ユーザインターフェースにおいて、第1の仮想タブおよび第2の仮想タブを有するマルチスタック仮想オブジェクトを作成することと、
少なくとも、前記第1のウェブページの第1の部分を前記マルチスタック仮想オブジェクトの第1の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第1の仮想タブを作成することと、
少なくとも、前記第1のウェブページの第2の部分を前記マルチスタック仮想オブジェクトの第2の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第2の仮想タブを作成することと
をさらに含む、請求項1に記載の方法。 - 少なくとも、前記第2のウェブページを前記マルチスタック仮想オブジェクトの第3の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第3の仮想タブを作成することと、
少なくとも、前記第3のウェブページを前記マルチスタック仮想オブジェクトの第4の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第4の仮想タブを作成することと
をさら含み、
前記マルチスタック仮想オブジェクトは、前記ユーザが特定のタブに合焦するとき、前記特定のタブに自動的に前進し、前記特定のタブと関連付けられた対応する仮想コンテンツを表示する、請求項4に記載の方法。 - 前記第1および第2の開いているウィンドウのそれぞれのコンテンツは、仮想コンテンツのそれぞれの設置のために、ブラウザ中ではなく、前記第1の境界された体積および前記第2の境界された体積中にそれぞれレンダリングされ、前記第1または第2の境界された体積は、規定の境界を有しかつ前記複合現実デバイス上で実行するアプリケーションによって管理される3次元体積を備え、前記第2の開いているウィンドウ内の前記第2の仮想コンテンツを前記視野中にロードすることは、前記視野内から選択可能である境界された体積を識別することを含み、プリズムは、前記視野内の新しい関連付けられた場所情報を伴う第2のプリズムを複製することによって、または前記新しい関連付けられた場所情報に少なくとも部分的に基づいて前記視野内から選択可能な存在する境界された体積を移動させることによって、識別される、請求項1に記載の方法。
- 前記ビューを提示することは、スタックされかつ前記第2の開いているウィンドウの複数のタブにそれぞれ対応する複数のビューを前記ビューにおいて表示することを含み、ホバリング状態が実装され、ホバリングされているウィンドウは、前記ユーザの前記視野内の前景の中に移動する一方、1つ以上の他のウィンドウは、視覚的に後退させられ、または閉じられ、前記第2の開いているウィンドウは、前記第2の開いているウィンドウ内に表示される1つのアクティブなタブを有する前記複数のタブを備える、請求項1に記載の方法。
- 前記第2の仮想コンテンツを前記第2の開いているウィンドウ中にロードすることは、
前記第2の開いているウィンドウ内にレンダリングされる2次元(2D)コンテンツを前記視野内の特定の境界された体積中に分解することを含み、前記特定の境界された体積は、1つ以上の第1の仮想オブジェクトを備え、前記2次元コンテンツを分解することは、
前記視野内に提示された1つ以上の実オブジェクトまたは仮想オブジェクトを識別することと、
前記1つ以上の第1の仮想オブジェクトを前記視野内の前記1つ以上の実オブジェクトまたは仮想オブジェクトにマッピングすることと、
前記1つ以上の実オブジェクトまたは仮想オブジェクト上に前記1つ以上の第1の仮想オブジェクトをそれぞれレンダリングすることにより、前記第2の開いているウィンドウ内の前記第2の仮想コンテンツを前記視野中にロードすることを完了することと
を含む、請求項1に記載の方法。 - 前記物理的環境内の、前記第1および第2の開いているウィンドウを備える複数の開いているウィンドウのそれぞれの物理的場所に対する前記物理的環境内の前記ユーザの現在の場所にかかわらず、前記単一ユーザインターフェースの少なくとも一部を介して、前記ユーザと前記複合現実デバイスとの間のユーザ相互作用に少なくとも部分的に基づいて前記単一ユーザインターフェース内に前記複数の開いているウィンドウの前記ビューの閲覧を実装することをさらに含み、前記複数の開いているウィンドウは、前記第1および第2の開いているウィンドウを備える、請求項1に記載の方法。
- コンピューティング環境内でウィンドウを操作するためのシステムであって、
3次元コンテンツを表示する複合現実ディスプレイデバイスと、
プロセッサと、
前記プロセッサによって実行可能なプログラマブルコードを保持するためのメモリと
を備え、
前記プログラマブルコードは、命令を含み、前記命令は、前記プロセッサによって実行されると、前記プロセッサに、
前記複合現実ディスプレイデバイスにおいて、単一ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための命令を受信することであって、
前記第1の開いているウィンドウは、第1の境界された体積中にレンダリングされ、第1の仮想コンテンツの設置のための第1の空間を備え、
前記第2の開いているウィンドウは、第2の境界された体積中にレンダリングされ、第2の仮想コンテンツの設置のための第2の空間を備える、ことと、
前記第1および第2の開いているウィンドウに関する情報を読み出すことであって、前記第1の開いているウィンドウは、物理的環境内の第1の物理的場所においてレンダリングされ、前記第2の開いているウィンドウは、前記物理的環境内の第2の物理的場所においてレンダリングされ、前記複合現実ディスプレイデバイスのユーザは、前記第1の物理的場所に位置している、ことと、
前記第1の物理的場所において前記ユーザに、前記複合現実ディスプレイデバイスによって提示された前記単一ユーザインターフェースにおける、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウと、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウとの両方のビューを提示することであって、
前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの視野内に可視であり、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの視野内に不可視であり、
前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの前記視野内に不可視であり、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの前記視野内に可視である、ことと、
前記単一ユーザインターフェース内の前記第2の開いているウィンドウの選択を受信することに応じて、少なくとも、前記第2の境界された体積内の前記第2の仮想コンテンツを前記第1の物理的場所における前記ユーザのための前記視野中に設置することによって、前記第2の開いているウィンドウ内にレンダリングされた前記第2の仮想コンテンツを前記ユーザの前記視野中にロードすることと
を行わせる、システム。 - 前記第1および第2の開いているウィンドウの前記ビューは、少なくとも、前記第1の開いているウィンドウまたは前記第2の開いているウィンドウの開いているウィンドウの対応する位置と関連付けられたそれぞれの場所パラメータを前記ユーザが位置している前記物理的環境内の別個の場所と関連付けることによって、前記単一ユーザインターフェース内に表示される、請求項10に記載のシステム。
- 前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウにそれぞれに割り当てられる座標において、前記ユーザにレンダリングおよび表示され、前記複数の開いているウィンドウの前記ビューは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、請求項11に記載のシステム。
- 前記プログラマブルコードは、命令をさらに含み、前記命令は、前記プロセッサによって実行されると、前記プロセッサに、
複数のウェブページ、またはブラウザアプリケーションのための前記複数のウェブページへのそれぞれのリンクを識別することであって、前記それぞれのリンクは、ウェブページのブックマークを含み、前記複数のウェブページは、第1のウェブページ、第2のウェブページ、および第3のウェブページを含む、ことと、
前記単一ユーザインターフェースにおいて、第1の仮想タブおよび第2の仮想タブを有するマルチスタック仮想オブジェクトを作成することと、
少なくとも、前記第1のウェブページの第1の部分を前記マルチスタック仮想オブジェクトの第1の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第1の仮想タブを作成することと、
少なくとも、前記第1のウェブページの第2の部分を前記マルチスタック仮想オブジェクトの第2の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第2の仮想タブを作成することと
をさらに行わせる、請求項12に記載のシステム。 - 前記プログラマブルコードは、命令をさらに含み、前記命令は、前記プロセッサによって実行されると、前記プロセッサに、
少なくとも、前記第2のウェブページを前記マルチスタック仮想オブジェクトの第3の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第3の仮想タブを作成することと、
少なくとも、前記第3のウェブページを前記マルチスタック仮想オブジェクトの第4の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第4の仮想タブを作成することと
をさらに行わせ、
前記マルチスタック仮想オブジェクトは、前記ユーザが特定のタブに合焦するとき、前記特定のタブに自動的に前進し、前記特定のタブと関連付けられた対応する仮想コンテンツを表示する、請求項13に記載のシステム。 - 前記第1および第2の開いているウィンドウのそれぞれのコンテンツは、仮想コンテンツのそれぞれの設置のために、ブラウザ中ではなく、前記第1の境界された体積および前記第2の境界された体積中にそれぞれレンダリングされ、前記第1または第2の境界された体積は、規定の境界を有しかつ前記複合現実ディスプレイデバイス上で実行するアプリケーションによって管理される3次元体積を備え、前記第2の開いているウィンドウ内の前記第2の仮想コンテンツを前記視野中にロードすることは、前記視野内から選択可能である境界された体積を識別することを含み、境界された体積は、前記視野内の新しい関連付けられた場所情報を伴う前記第2の境界された体積を複製することによって、または前記新しい関連付けられた場所情報に少なくとも部分的に基づいて前記視野内から選択可能な存在する境界された体積を移動させることによって、識別される、請求項10に記載のシステム。
- 前記命令は、前記プロセッサによって実行されると、さらに、前記プロセッサに、スタックされかつ前記第2の開いているウィンドウの複数のタブにそれぞれ対応する複数のビューを前記ビューにおいて表示させ、ホバリング状態が実装され、ホバリングされているウィンドウは、前記ユーザの前記視野内の前景の中に移動する一方、1つ以上の他のウィンドウは、視覚的に後退させられ、または閉じられ、前記第2の開いているウィンドウは、前記第2の開いているウィンドウ内に表示される1つのアクティブなタブを有する前記複数のタブを備える、請求項10に記載のシステム。
- 前記プログラマブルコードの実行が前記プロセッサに前記仮想コンテンツをロードさせ、前記プログラマブルコードは、命令をさらに含み、前記命令は、前記プロセッサによって実行されると、さらに、前記プロセッサに、前記第2の開いているウィンドウ内にレンダリングされる2次元(2D)コンテンツを前記視野内の特定の境界された体積中に分解することを行わせ、前記境界された体積は、1つ以上の仮想オブジェクトを備え、前記2次元コンテンツを分解することは、少なくとも、
前記視野内に提示された1つ以上の実オブジェクトまたは仮想オブジェクトを識別することと、
前記1つ以上の仮想オブジェクトを前記視野内の前記1つ以上の実オブジェクトまたは仮想オブジェクトにマッピングすることと、
前記1つ以上の実オブジェクトまたは仮想オブジェクト上に前記1つ以上の仮想オブジェクトをそれぞれレンダリングすることにより、前記第2の開いているウィンドウ内の前記第2の仮想コンテンツを前記視野中にロードすることを完了することと
による、請求項10に記載のシステム。 - 非一過性コンピュータ可読媒体上に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令のシーケンスは、プロセッサによって実行されると、前記プロセッサに、
複合現実デバイスにおいて、単一ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための命令を受信することであって、
前記第1の開いているウィンドウは、第1の境界された体積中にレンダリングされ、第1の仮想コンテンツの設置のための第1の空間を備え、
前記第2の開いているウィンドウは、第2の境界された体積中にレンダリングされ、第2の仮想コンテンツの設置のための第2の空間を備える、ことと、
前記複数の開いているウィンドウに関する情報を読み出すことであって、前記第1の開いているウィンドウは、物理的環境内の第1の物理的場所においてレンダリングされ、前記第2の開いているウィンドウは、前記物理的環境内の第2の物理的場所においてレンダリングされ、前記複合現実デバイスのユーザは、前記第1の物理的場所に位置している、ことと、
前記第1の物理的場所において前記ユーザに、前記複合現実デバイスによって前記ユーザに提示された前記単一ユーザインターフェースにおける、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウと、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウとの両方のビューを提示することであって、
前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの視野内に可視であり、前記第1の物理的場所においてレンダリングされた前記第1の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの視野内に不可視であり、
前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの前記視野内に不可視であり、前記第2の物理的場所においてレンダリングされた前記第2の開いているウィンドウは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの前記視野内に可視である、ことと、
前記単一ユーザインターフェース内の前記第2の開いているウィンドウの選択を受信することに応じて、少なくとも、前記第2の境界された体積内の前記第2の仮想コンテンツを前記第1の物理的場所における前記ユーザのための前記視野中に設置することによって、前記第2の開いているウィンドウ内に設置された前記第2の仮想コンテンツを前記ユーザの前記視野中にロードすることと
を含む動作のセットを実行させる、コンピュータプログラム製品。 - 前記動作のセットは、
複数のウェブページ、またはブラウザアプリケーションのための前記複数のウェブページへのそれぞれのリンクを識別することであって、前記それぞれのリンクは、ウェブページのブックマークを含み、前記複数のウェブページは、第1のウェブページ、第2のウェブページ、および第3のウェブページを含む、ことと、
前記単一ユーザインターフェースにおいて、第1の仮想タブおよび第2の仮想タブを有するマルチスタック仮想オブジェクトを作成することと、
少なくとも、前記第1のウェブページの第1の部分を前記マルチスタック仮想オブジェクトの第1の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第1の仮想タブを作成することと、
少なくとも、前記第1のウェブページの第2の部分を前記マルチスタック仮想オブジェクトの第2の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第2の仮想タブを作成することと、
少なくとも、前記第2のウェブページを前記マルチスタック仮想オブジェクトの第3の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第3の仮想タブを作成することと、
少なくとも、前記第3のウェブページを前記マルチスタック仮想オブジェクトの第4の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第4の仮想タブを作成することと
をさら含み、
前記マルチスタック仮想オブジェクトは、前記ユーザが特定のタブに合焦するとき、前記特定のタブに自動的に前進し、前記特定のタブと関連付けられた対応する仮想コンテンツを表示する、請求項18に記載のコンピュータプログラム製品。 - 仮想コンテンツをコンピューティング環境内に表示するための方法であって、
複合現実デバイスにおいて、単一ユーザインターフェースから、第1の開いているアプリケーションと、第2の開いているアプリケーションとを備える複数の開いているアプリケーションを選択するための命令を受信することであって、
前記第1の開いているアプリケーションは、第1のコンテンツの設置のための第1の境界された体積中にレンダリングされ、
前記第2の開いているアプリケーションは、第2のコンテンツの設置のための第2の境界された体積中にレンダリングされる、ことと、
前記第1および第2の開いているアプリケーションに関する情報を読み出すことであって、前記第1の境界された体積は、物理的環境内の第1の物理的場所においてレンダリングされ、前記第2の境界された体積は、前記物理的環境内の第2の物理的場所においてレンダリングされ、前記複合現実デバイスのユーザは、前記第1の物理的場所に位置している、ことと、
前記ユーザに、前記単一ユーザインターフェースにおける、前記第1の開いているアプリケーションの前記第1のコンテンツと、前記第2の開いているアプリケーションの前記第2のコンテンツとの両方のビューを提示することであって、
前記第1の境界された体積内の、前記第1の物理的場所においてレンダリングされた前記第1の開いているアプリケーションは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの視野内に可視であり、前記第1の境界された体積内の、前記第1の物理的場所においてレンダリングされた前記第1の開いているアプリケーションは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの視野内に不可視であり、
前記第2の境界された体積内の、前記第2の物理的場所においてレンダリングされた前記第2の開いているアプリケーションは、前記ユーザが前記第1の物理的場所にいるとき、前記ユーザの前記視野内に不可視であり、前記第2の境界された体積内の、前記第2の物理的場所においてレンダリングされた前記第2の開いているアプリケーションは、前記ユーザが前記第2の物理的場所にいるとき、前記ユーザの前記視野内に可視である、ことと、
前記単一ユーザインターフェースにおける前記ビューから、前記ユーザの前記視野内に不可視である前記第2の開いているアプリケーションの選択を受信することに応じて、少なくとも、前記第2の境界された体積内の前記第2のコンテンツを前記第1の物理的場所における前記ユーザの前記視野中に設置することによって、前記第2の開いているアプリケーションの前記第2のコンテンツを、前記第1の物理的場所における前記ユーザの前記視野中にロードすることと
を含む、方法。 - 複数のウェブページ、または前記第1または第2の開いているアプリケーションのための前記複数のウェブページへのそれぞれのリンクを識別することであって、前記それぞれのリンクは、ウェブページのブックマークを含み、前記複数のウェブページは、第1のウェブページ、第2のウェブページ、および第3のウェブページを含む、ことと、
前記単一ユーザインターフェースにおいて、第1の仮想タブおよび第2の仮想タブを有するマルチスタック仮想オブジェクトを作成することと、
少なくとも、前記第1のウェブページの第1の部分を前記マルチスタック仮想オブジェクトの第1の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第1の仮想タブを作成することと、
少なくとも、前記第1のウェブページの第2の部分を前記マルチスタック仮想オブジェクトの第2の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第2の仮想タブを作成することと、
少なくとも、前記第2のウェブページを前記マルチスタック仮想オブジェクトの第3の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第3の仮想タブを作成することと、
少なくとも、前記第3のウェブページを前記マルチスタック仮想オブジェクトの第4の仮想タブと関連付けることによって、前記マルチスタック仮想オブジェクトのための前記第4の仮想タブを作成することと
をさら含み、
前記マルチスタック仮想オブジェクトは、前記ユーザが特定のタブに合焦するとき、前記特定のタブに自動的に前進し、前記特定のタブと関連付けられた対応する仮想コンテンツを表示する、請求項18に記載の方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022117087A JP2022153514A (ja) | 2018-02-22 | 2022-07-22 | 複合現実システムのためのブラウザ |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862634016P | 2018-02-22 | 2018-02-22 | |
US62/634,016 | 2018-02-22 | ||
PCT/US2019/018932 WO2019165055A1 (en) | 2018-02-22 | 2019-02-21 | Browser for mixed reality systems |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022117087A Division JP2022153514A (ja) | 2018-02-22 | 2022-07-22 | 複合現実システムのためのブラウザ |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021514088A JP2021514088A (ja) | 2021-06-03 |
JPWO2019165055A5 JPWO2019165055A5 (ja) | 2022-02-10 |
JP7112502B2 true JP7112502B2 (ja) | 2022-08-03 |
Family
ID=67617801
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020544190A Active JP7112502B2 (ja) | 2018-02-22 | 2019-02-21 | 複合現実システムのためのブラウザ |
JP2022117087A Pending JP2022153514A (ja) | 2018-02-22 | 2022-07-22 | 複合現実システムのためのブラウザ |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022117087A Pending JP2022153514A (ja) | 2018-02-22 | 2022-07-22 | 複合現実システムのためのブラウザ |
Country Status (9)
Country | Link |
---|---|
US (1) | US11036364B2 (ja) |
EP (2) | EP3756169B1 (ja) |
JP (2) | JP7112502B2 (ja) |
KR (1) | KR20200122362A (ja) |
CN (1) | CN111758122A (ja) |
AU (1) | AU2019225989A1 (ja) |
CA (1) | CA3089646A1 (ja) |
IL (2) | IL276621B1 (ja) |
WO (1) | WO2019165055A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11797169B2 (en) | 2019-03-29 | 2023-10-24 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
WO2020205293A1 (en) * | 2019-03-29 | 2020-10-08 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
WO2020205292A1 (en) | 2019-03-29 | 2020-10-08 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
US11315326B2 (en) * | 2019-10-15 | 2022-04-26 | At&T Intellectual Property I, L.P. | Extended reality anchor caching based on viewport prediction |
US11354012B1 (en) * | 2019-10-18 | 2022-06-07 | Splunk Inc. | Automated placement and time selection for dashboard panels in an extended reality environment |
WO2021113322A1 (en) * | 2019-12-06 | 2021-06-10 | Magic Leap, Inc. | Dynamic browser stage |
US11538199B2 (en) * | 2020-02-07 | 2022-12-27 | Lenovo (Singapore) Pte. Ltd. | Displaying a window in an augmented reality view |
AU2022352933A1 (en) * | 2021-09-25 | 2024-04-11 | Apple Inc. | Devices, methods, and graphical user interfaces for presenting virtual objects in virtual environments |
CN114971764A (zh) * | 2022-04-08 | 2022-08-30 | 浙江赟燊商业信息系统科技有限公司 | 一种基于HoloLens的存储和匹配系统及方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080115081A1 (en) | 2006-11-09 | 2008-05-15 | Microsoft Corporation | Enhanced windows management feature |
US20120030617A1 (en) | 2006-03-22 | 2012-02-02 | John Louch | Methods of Manipulating a Screen Space of a Display Device |
JP2014157466A (ja) | 2013-02-15 | 2014-08-28 | Sony Corp | 情報処理装置及び記憶媒体 |
US20140375683A1 (en) | 2013-06-25 | 2014-12-25 | Thomas George Salter | Indicating out-of-view augmented reality images |
US20150346929A1 (en) | 2014-05-31 | 2015-12-03 | Apple Inc. | Safari Tab and Private Browsing UI Enhancement |
JP2016206447A (ja) | 2015-04-23 | 2016-12-08 | セイコーエプソン株式会社 | 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
US20170052994A1 (en) | 2015-08-18 | 2017-02-23 | Samsung Electronics Co., Ltd. | Method and system for bookmarking a webpage |
US20170060514A1 (en) | 2015-09-01 | 2017-03-02 | Microsoft Technology Licensing, Llc | Holographic augmented authoring |
US20170256096A1 (en) | 2016-03-07 | 2017-09-07 | Google Inc. | Intelligent object sizing and placement in a augmented / virtual reality environment |
US20180033204A1 (en) | 2016-07-26 | 2018-02-01 | Rouslan Lyubomirov DIMITROV | System and method for displaying computer-based content in a virtual or augmented environment |
Family Cites Families (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6629065B1 (en) | 1998-09-30 | 2003-09-30 | Wisconsin Alumni Research Foundation | Methods and apparata for rapid computer-aided design of objects in virtual reality and other environments |
US9208270B2 (en) | 2000-08-02 | 2015-12-08 | Comsol Ab | System and method for establishing bidirectional links between multiphysics modeling and design systems |
US7043695B2 (en) | 2000-09-19 | 2006-05-09 | Technion Research & Development Foundation Ltd. | Object positioning and display in virtual environments |
EP1556805B1 (en) | 2002-10-22 | 2011-08-24 | Artoolworks | Tracking a surface in a 3-dimensional scene using natural visual features of the surface |
JP2007058332A (ja) * | 2005-08-22 | 2007-03-08 | Canon Inc | オブジェクト操作装置及びオブジェクト操作方法 |
US8245241B2 (en) | 2007-10-02 | 2012-08-14 | International Business Machines Corporation | Arrangements for interactivity between a virtual universe and the world wide web |
US8924862B1 (en) * | 2008-09-05 | 2014-12-30 | Cisco Technology, Inc. | Optimizing desktop sharing for wireless clients during networked collaboration |
KR101082487B1 (ko) | 2010-01-29 | 2011-11-11 | 키위플 주식회사 | 객체 인식시스템 및 이를 이용하는 객체 인식 방법 |
US20120212484A1 (en) | 2010-02-28 | 2012-08-23 | Osterhout Group, Inc. | System and method for display content placement using distance and location information |
US9069577B2 (en) * | 2010-11-23 | 2015-06-30 | Apple Inc. | Grouping and browsing open windows |
CN103460256B (zh) | 2011-03-29 | 2016-09-14 | 高通股份有限公司 | 在扩增现实系统中将虚拟图像锚定到真实世界表面 |
US8912979B1 (en) | 2011-07-14 | 2014-12-16 | Google Inc. | Virtual window in head-mounted display |
US9671566B2 (en) | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US20130342572A1 (en) * | 2012-06-26 | 2013-12-26 | Adam G. Poulos | Control of displayed content in virtual environments |
US9292085B2 (en) | 2012-06-29 | 2016-03-22 | Microsoft Technology Licensing, Llc | Configuring an interaction zone within an augmented reality environment |
WO2014031899A1 (en) | 2012-08-22 | 2014-02-27 | Goldrun Corporation | Augmented reality virtual content platform apparatuses, methods and systems |
US9070194B2 (en) | 2012-10-25 | 2015-06-30 | Microsoft Technology Licensing, Llc | Planar surface detection |
US9317972B2 (en) * | 2012-12-18 | 2016-04-19 | Qualcomm Incorporated | User interface for augmented reality enabled devices |
KR20150103723A (ko) | 2013-01-03 | 2015-09-11 | 메타 컴퍼니 | 가상 또는 증강매개된 비전을 위한 엑스트라미시브 공간 이미징 디지털 아이 글래스 |
US20140225922A1 (en) | 2013-02-11 | 2014-08-14 | Rocco A. Sbardella | System and method for an augmented reality software application |
GB201303707D0 (en) | 2013-03-01 | 2013-04-17 | Tosas Bautista Martin | System and method of interaction for mobile devices |
KR102387314B1 (ko) | 2013-03-11 | 2022-04-14 | 매직 립, 인코포레이티드 | 증강 및 가상 현실을 위한 시스템 및 방법 |
US20140267228A1 (en) | 2013-03-14 | 2014-09-18 | Microsoft Corporation | Mapping augmented reality experience to various environments |
US20150277699A1 (en) * | 2013-04-02 | 2015-10-01 | Cherif Atia Algreatly | Interaction method for optical head-mounted display |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
US9411422B1 (en) | 2013-12-13 | 2016-08-09 | Audible, Inc. | User interaction with content markers |
US20150206343A1 (en) * | 2014-01-17 | 2015-07-23 | Nokia Corporation | Method and apparatus for evaluating environmental structures for in-situ content augmentation |
US9201578B2 (en) | 2014-01-23 | 2015-12-01 | Microsoft Technology Licensing, Llc | Gaze swipe selection |
US10203762B2 (en) * | 2014-03-11 | 2019-02-12 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
US20150302651A1 (en) | 2014-04-18 | 2015-10-22 | Sam Shpigelman | System and method for augmented or virtual reality entertainment experience |
US9361732B2 (en) | 2014-05-01 | 2016-06-07 | Microsoft Technology Licensing, Llc | Transitions between body-locked and world-locked augmented reality |
AU2015274283B2 (en) * | 2014-06-14 | 2020-09-10 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
US20160027214A1 (en) | 2014-07-25 | 2016-01-28 | Robert Memmott | Mouse sharing between a desktop and a virtual world |
US10726593B2 (en) | 2015-09-22 | 2020-07-28 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
JP5767386B1 (ja) | 2014-12-15 | 2015-08-19 | 株式会社コロプラ | ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム |
US20160300392A1 (en) | 2015-04-10 | 2016-10-13 | VR Global, Inc. | Systems, media, and methods for providing improved virtual reality tours and associated analytics |
KR20170005602A (ko) * | 2015-07-06 | 2017-01-16 | 삼성전자주식회사 | 증강현실 및 가상현실의 통합적 제공 방법 및 이를 사용하는 전자 장치 |
US10057078B2 (en) | 2015-08-21 | 2018-08-21 | Samsung Electronics Company, Ltd. | User-configurable interactive region monitoring |
EP3629136B1 (en) | 2015-10-08 | 2024-04-17 | InterDigital VC Holdings, Inc. | Methods and systems of automatic calibration for dynamic display configurations |
NZ741866A (en) | 2015-10-20 | 2019-07-26 | Magic Leap Inc | Selecting virtual objects in a three-dimensional space |
US10373381B2 (en) | 2016-03-30 | 2019-08-06 | Microsoft Technology Licensing, Llc | Virtual object manipulation within physical environment |
US10268266B2 (en) * | 2016-06-29 | 2019-04-23 | Microsoft Technology Licensing, Llc | Selection of objects in three-dimensional space |
KR102296267B1 (ko) | 2016-06-30 | 2021-08-30 | 매직 립, 인코포레이티드 | 3d 공간에서의 포즈 추정 |
CN115202482A (zh) | 2016-08-11 | 2022-10-18 | 奇跃公司 | 用于三维空间中虚拟对象的自动放置的系统和方法 |
WO2018067801A1 (en) | 2016-10-05 | 2018-04-12 | Magic Leap, Inc. | Surface modeling systems and methods |
US10599823B2 (en) | 2016-11-18 | 2020-03-24 | Invensense, Inc. | Systems and methods for coordinating applications with a user interface |
US20180150204A1 (en) * | 2016-11-30 | 2018-05-31 | Google Inc. | Switching of active objects in an augmented and/or virtual reality environment |
US10304251B2 (en) | 2017-06-15 | 2019-05-28 | Microsoft Technology Licensing, Llc | Virtually representing spaces and objects while maintaining physical properties |
US20190005724A1 (en) | 2017-06-30 | 2019-01-03 | Microsoft Technology Licensing, Llc | Presenting augmented reality display data in physical presentation environments |
US10803663B2 (en) | 2017-08-02 | 2020-10-13 | Google Llc | Depth sensor aided estimation of virtual reality environment boundaries |
-
2019
- 2019-02-21 AU AU2019225989A patent/AU2019225989A1/en not_active Abandoned
- 2019-02-21 JP JP2020544190A patent/JP7112502B2/ja active Active
- 2019-02-21 IL IL276621A patent/IL276621B1/en unknown
- 2019-02-21 IL IL301443A patent/IL301443A/en unknown
- 2019-02-21 CA CA3089646A patent/CA3089646A1/en active Pending
- 2019-02-21 CN CN201980014719.1A patent/CN111758122A/zh active Pending
- 2019-02-21 US US16/281,540 patent/US11036364B2/en active Active
- 2019-02-21 EP EP19757809.9A patent/EP3756169B1/en active Active
- 2019-02-21 WO PCT/US2019/018932 patent/WO2019165055A1/en unknown
- 2019-02-21 KR KR1020207026917A patent/KR20200122362A/ko active Search and Examination
- 2019-02-21 EP EP23159324.5A patent/EP4213104A1/en active Pending
-
2022
- 2022-07-22 JP JP2022117087A patent/JP2022153514A/ja active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120030617A1 (en) | 2006-03-22 | 2012-02-02 | John Louch | Methods of Manipulating a Screen Space of a Display Device |
US20080115081A1 (en) | 2006-11-09 | 2008-05-15 | Microsoft Corporation | Enhanced windows management feature |
JP2014157466A (ja) | 2013-02-15 | 2014-08-28 | Sony Corp | 情報処理装置及び記憶媒体 |
US20140375683A1 (en) | 2013-06-25 | 2014-12-25 | Thomas George Salter | Indicating out-of-view augmented reality images |
US20150346929A1 (en) | 2014-05-31 | 2015-12-03 | Apple Inc. | Safari Tab and Private Browsing UI Enhancement |
JP2016206447A (ja) | 2015-04-23 | 2016-12-08 | セイコーエプソン株式会社 | 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
US20170052994A1 (en) | 2015-08-18 | 2017-02-23 | Samsung Electronics Co., Ltd. | Method and system for bookmarking a webpage |
US20170060514A1 (en) | 2015-09-01 | 2017-03-02 | Microsoft Technology Licensing, Llc | Holographic augmented authoring |
US20170256096A1 (en) | 2016-03-07 | 2017-09-07 | Google Inc. | Intelligent object sizing and placement in a augmented / virtual reality environment |
US20180033204A1 (en) | 2016-07-26 | 2018-02-01 | Rouslan Lyubomirov DIMITROV | System and method for displaying computer-based content in a virtual or augmented environment |
Also Published As
Publication number | Publication date |
---|---|
JP2021514088A (ja) | 2021-06-03 |
US11036364B2 (en) | 2021-06-15 |
EP3756169A1 (en) | 2020-12-30 |
CA3089646A1 (en) | 2019-08-20 |
EP3756169B1 (en) | 2023-04-19 |
US20190258365A1 (en) | 2019-08-22 |
IL276621A (en) | 2020-09-30 |
CN111758122A (zh) | 2020-10-09 |
IL276621B1 (en) | 2024-01-01 |
EP3756169A4 (en) | 2021-04-21 |
KR20200122362A (ko) | 2020-10-27 |
AU2019225989A1 (en) | 2020-08-13 |
US20210263624A1 (en) | 2021-08-26 |
JP2022153514A (ja) | 2022-10-12 |
IL301443A (en) | 2023-05-01 |
WO2019165055A1 (en) | 2019-08-29 |
EP4213104A1 (en) | 2023-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7112502B2 (ja) | 複合現実システムのためのブラウザ | |
JP7139436B2 (ja) | 物理的操作を用いたオブジェクト作成 | |
AU2022271460B2 (en) | Matching content to a spatial 3D environment | |
CN115601671B (zh) | 用于向用户显示虚拟内容的系统和方法 | |
JP7311643B2 (ja) | モード式ウィンドウを介したセキュアな認可 | |
US10768421B1 (en) | Virtual monocle interface for information visualization | |
US11972092B2 (en) | Browser for mixed reality systems |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220201 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220201 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220613 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220624 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220722 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7112502 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |