JP7528156B2 - 複合現実システムのためのブラウザ - Google Patents
複合現実システムのためのブラウザ Download PDFInfo
- Publication number
- JP7528156B2 JP7528156B2 JP2022117087A JP2022117087A JP7528156B2 JP 7528156 B2 JP7528156 B2 JP 7528156B2 JP 2022117087 A JP2022117087 A JP 2022117087A JP 2022117087 A JP2022117087 A JP 2022117087A JP 7528156 B2 JP7528156 B2 JP 7528156B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- user
- elements
- virtual
- displaying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 122
- 238000013507 mapping Methods 0.000 claims description 47
- 230000004044 response Effects 0.000 claims description 20
- 230000009471 action Effects 0.000 claims description 9
- 238000009877 rendering Methods 0.000 claims 3
- 230000001351 cycling effect Effects 0.000 claims 1
- 230000008569 process Effects 0.000 description 16
- 238000013459 approach Methods 0.000 description 13
- 238000004590 computer program Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000007613 environmental effect Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 238000010422 painting Methods 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 238000000354 decomposition reaction Methods 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- SWQJXJOGLNCZEY-UHFFFAOYSA-N helium atom Chemical compound [He] SWQJXJOGLNCZEY-UHFFFAOYSA-N 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000004478 pupil constriction Effects 0.000 description 1
- 230000010344 pupil dilation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
- 230000002459 sustained effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Description
本願明細書は、例えば、以下の項目も提供する。
(項目1)
ウィンドウをコンピューティング環境内に表示するための方法であって、
複数の開いているウィンドウを選択するための命令を受信することと、
前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、
前記複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示することと、
前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることと
を含む、方法。
(項目2)
前記複数の開いているウィンドウの表現は、前記ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、前記単一ユーザインターフェース内に表示される、項目1に記載の方法。
(項目3)
前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウに割り当てられる座標において、前記ユーザにレンダリングおよび表示される、項目2に記載の方法。
(項目4)
前記複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、項目3に記載の方法。
(項目5)
全ての開いているウィンドウは、前記単一ユーザインターフェース内での表示のために選択される、項目1に記載の方法。
(項目6)
前記複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために、別個のプリズムの中にレンダリングされる、項目1に記載の方法。
(項目7)
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、項目1に記載の方法。
(項目8)
前記選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、項目1に記載の方法。
(項目9)
コンピューティング環境内でウィンドウを操作するためのシステムであって、
3次元コンテンツを表示する複合現実ディスプレイデバイスと、
プロセッサと、
前記プロセッサによって実行可能なプログラマブルコードを保持するためのメモリであって、前記プログラマブルコードは、複数の開いているウィンドウを選択するための命令を受信することと、前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、前記複数の開いているウィンドウの表現を前記複合現実ディスプレイデバイス内の単一ユーザインターフェース内に表示することと、前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることとを行うための命令を含む、メモリと
を備える、システム。
(項目10)
前記複数の開いているウィンドウの表現は、前記ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、前記単一ユーザインターフェース内に表示される、項目9に記載のシステム。
(項目11)
前記複数の開いているウィンドウは、前記単一ユーザインターフェース内の前記複数の開いているウィンドウに割り当てられる座標において、前記ユーザにレンダリングおよび表示される、項目10に記載のシステム。
(項目12)
前記複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、項目11に記載のシステム。
(項目13)
全ての開いているウィンドウは、前記単一ユーザインターフェース内での表示のために選択される、項目9に記載のシステム。
(項目14)
前記複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために境界された体積の中にレンダリングされる、項目9に記載のシステム。
(項目15)
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、項目9に記載のシステム。
(項目16)
前記選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、項目9に記載のシステム。
(項目17)
コンピュータ可読媒体上に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令のシーケンスは、プロセッサによって実行されると、前記プロセッサに、
複数の開いているウィンドウを選択するための命令を受信することと、
前記複数の開いているウィンドウに関する情報を読み出すことであって、前記複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ことと、
前記複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示することと、
前記複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、前記選択されたウィンドウをユーザのための視野の前景の中にロードすることと
を含む方法を実行させる、コンピュータプログラム製品。
(項目18)
仮想コンテンツをコンピューティング環境内に表示するための方法であって、
複数の開かれたアプリケーションを選択するための命令を受信することと、
前記複数の開かれたアプリケーションに関する情報を読み出すことであって、前記複数の開かれたアプリケーションは、異なる物理的場所と関連付けられる、ことと、
前記複数の開かれたアプリケーションの表現を単一ユーザインターフェース内に表示することと、
前記複数の開かれたアプリケーションの選択されたアプリケーションの選択の受信に応じて、前記選択されたアプリケーションをユーザのための視野の前景の中にロードすることと
を含む、方法。
ウェブページ分解
複合現実システムでは、ユーザの作業空間は、ディスプレイ画面のサイズによって限定されない。したがって、従来のブラウザと異なり、複合現実システム内のブラウザウィンドウは、ユーザの環境内の任意の場所に設置および保定されることができる。問題は、従来のブラウザ技術が、表示可能ブラウザ場所がディスプレイ画面の範囲に限定されなければならないという仮定とともに構成されることである。
本開示の付加的実施形態が、下記に説明される。これらの付加的実施形態は、上記に開示される実施形態からの要素を組み込んでもよく、これらの付加的実施形態の要素は、上記に開示される実施形態の中に組み込まれてもよい。
1.
コンピュータ可読媒体上に具現化されるコンピュータプログラム製品であって、コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、命令のシーケンスは、プロセッサによって実行されると、プロセッサに、
複数の開いているウィンドウを選択するための命令を受信するステップと、
複数の開いているウィンドウに関する情報を読み出すステップであって、複数の開いているウィンドウは、異なる物理的場所と関連付けられる、ステップと、
複数の開いているウィンドウの表現を単一ユーザインターフェース内に表示するステップと、
複数の開いているウィンドウの選択されたウィンドウの選択の受信に応じて、選択されたウィンドウをユーザのための視野の前景の中にロードするステップと、
を含む方法を実行させる、コンピュータプログラム製品。
2.
複数の開いているウィンドウの表現は、ユーザのための現在の物理的環境内の場所に対して複数の開いているウィンドウに関する場所パラメータを変化させることによって、単一ユーザインターフェース内に表示される、実施形態1に記載のコンピュータプログラム製品。
3.
複数の開いているウィンドウは、単一ユーザインターフェース内の複数の開いているウィンドウに割り当てられる座標において、ユーザにレンダリングおよび表示される、実施形態2に記載のコンピュータプログラム製品。
4.
複数の開いているウィンドウは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、実施形態3に記載のコンピュータプログラム製品。
5.
全ての開いているウィンドウは、単一ユーザインターフェース内での表示のために選択される、実施形態1に記載のコンピュータプログラム製品。
6.
複数の開いているウィンドウはそれぞれ、仮想コンテンツの設置のために境界された体積の中にレンダリングされる、実施形態1に記載のコンピュータプログラム製品。
7.
ホバリング状態が、実装され、ホバリングされているウィンドウは、前景の中に移動する一方、他のウィンドウは、視覚的に後退する、実施形態1に記載のコンピュータプログラム製品。
8.
選択されたウィンドウの選択の受信に応じて、非選択ウィンドウは、閉じられる、実施形態1に記載のコンピュータプログラム製品。
9.
仮想コンテンツをコンピューティング環境内に表示するための方法であって、
複数の開かれたアプリケーションを選択するための命令を受信するステップと、
複数の開かれたアプリケーションに関する情報を読み出すステップであって、複数の開かれたアプリケーションは、異なる物理的場所と関連付けられる、ステップと、
複数の開かれたアプリケーションの表現を単一ユーザインターフェース内に表示するステップと、
複数の開かれたアプリケーションの選択されたアプリケーションの選択の受信に応じて、選択されたアプリケーションをユーザのための視野の前景の中にロードするステップと、
を含む、方法。
10.
複数の開かれたアプリケーションの表現は、ユーザための現在の物理的環境内の場所に対する複数の開かれたアプリケーションのための場所パラメータを変化させることによって、単一ユーザインターフェース内に表示される、実施形態9に記載の方法。
11.
複数の開かれたアプリケーションは、単一ユーザインターフェース内の複数の開かれたアプリケーションに割り当てられる座標において、ユーザにレンダリングおよび表示される、実施形態10に記載の方法。
12.
複数の開かれたアプリケーションは、プレビュー形態、サムネイル形態、またはフル形態のうちの少なくとも1つにおいてレンダリングされる、実施形態11に記載の方法。
13.
全ての開かれたアプリケーションは、単一ユーザインターフェース内での表示のために選択される、実施形態9に記載の方法。
14.
複数の開かれたアプリケーションはそれぞれ、仮想コンテンツの設置のために、別個のプリズムの中にレンダリングされる、実施形態9に記載の方法。
15.
ホバリング状態が、実装され、ホバリングされているアプリケーションは、前景の中に移動する一方、他のアプリケーションは、視覚的に後退する、実施形態9に記載の方法。
16.
選択されたアプリケーションの選択の受信に応じて、非選択アプリケーションは、閉じられる、実施形態9に記載の方法。
図15は、本開示の実施形態を実装するために好適な例証的コンピューティングシステム1400のブロック図である。コンピューティングシステム1400は、情報を通信するためのバス1406または他の通信機構を含み、これは、プロセッサ1407、システムメモリ1408(例えば、RAM)、静的記憶デバイス1409(例えば、ROM)、ディスクドライブ1410(例えば、磁気または光学)、通信インターフェース1414(例えば、モデムまたはEthernet(登録商標)カード)、ディスプレイ1411(例えば、CRTまたはLCD)、入力デバイス1412(例えば、キーボードおよびマウス)等のサブシステムおよびデバイスを相互接続する。
Claims (15)
- ウィンドウをコンピューティング環境内に表示するための方法であって、
複合現実デバイスにおいて、ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための第1の命令を受信することであって、
前記第1の開いているウィンドウは、物理的環境の第1の物理的場所において表示されている第1のコンテンツを備え、
前記第2の開いているウィンドウは、前記物理的環境の第2の物理的場所において表示されている第2のコンテンツを備え、前記第2のコンテンツは、ユーザが前記第1の物理的場所にいるときに前記ユーザの視野内に不可視であり、前記第1のコンテンツは、前記ユーザが前記第2の物理的場所にいるときに前記ユーザの前記視野内に不可視である、ことと、
前記ユーザインターフェースから、前記第2の開いているウィンドウ内に設置された前記第2のコンテンツを前記ユーザに表示するための第2の命令を受信することに応じて、前記ユーザが前記第2の物理的場所にいるときに、前記第2のコンテンツを仮想コンテンツとして前記ユーザの前記視野内の表面上に表示することと
を含み、
前記第2のコンテンツを前記仮想コンテンツとして表示することは、
前記ユーザに可視である1つ以上の表面の表面インベントリリストにアクセスすることと、
前記第2の開いているウィンドウに前記第2のコンテンツとして表示されている1つ以上の要素を識別するために、要素の要素インベントリリストにアクセスすることと
を含む、方法。 - 前記第2のコンテンツを前記仮想コンテンツとして表示することは、
前記1つ以上の要素の第1の特性および少なくとも1つの表面の第2の特性に少なくとも部分的に基づいて、前記1つ以上の要素のために、前記表面インベントリリストから前記少なくとも1つの表面を決定することと、
前記1つ以上の要素を前記少なくとも1つの表面にマッピングすることと、
前記1つ以上の要素を前記少なくとも1つの表面上にレンダリングすることと
を含む、請求項1に記載の方法。 - 前記第2のコンテンツを前記仮想コンテンツとして表示することは、
前記第2のコンテンツを複製して、複製されたコンテンツにすることと、
前記ユーザの前記視野内の3次元環境において、かつ、2次元表示で、前記複製されたコンテンツを表面上に表示することと
を含む、請求項1に記載の方法。 - 前記第2のコンテンツを前記仮想コンテンツとして表示することは、
前記表面の寸法もしくは配向、前記表面と前記ユーザとの間の距離、または、表示されるべき前記複製されたコンテンツもしくは2次元コンテンツのタイプのうちの少なくとも1つで前記表面をタグ付けし、または、カテゴリ化することと、
前記表面に関する情報をデータ構造内に記憶することであって、前記データ構造は、複数の列を備え、前記複数の列は、1つ以上の表面の1つ以上の表面識別子、前記表面についての現実または仮想タイプのインジケータ、多重エンティティインジケータ、前記1つ以上の表面の1つ以上の位置、高さ、寸法、もしくは配向にそれぞれ割り当てられている、ことと
を含む、請求項3に記載の方法。 - 前記第2の開いているウィンドウに表示されている前記第2のコンテンツは、前記第2のコンテンツの2次元表示を含み、前記ユーザに表示されている前記仮想コンテンツは、前記第2のコンテンツの3次元表示を含む、請求項4に記載の方法。
- ウィンドウをコンピューティング環境内に表示するための方法であって、
複合現実デバイスにおいて、ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための第1の命令を受信することであって、
前記第1の開いているウィンドウは、物理的環境の第1の物理的場所において表示されている第1のコンテンツを備え、
前記第2の開いているウィンドウは、前記物理的環境の第2の物理的場所において表示されている第2のコンテンツを備え、前記第2のコンテンツは、ユーザが前記第1の物理的場所にいるときに前記ユーザの視野内に不可視であり、前記第1のコンテンツは、前記ユーザが前記第2の物理的場所にいるときに前記ユーザの前記視野内に不可視である、ことと、
前記ユーザインターフェースから、前記第2の開いているウィンドウ内に設置された前記第2のコンテンツを前記ユーザに表示するための第2の命令を受信することに応じて、前記ユーザが前記第2の物理的場所にいるときに、前記第2のコンテンツを仮想コンテンツとして前記ユーザの前記視野内の表面上に表示することと
を含み、
前記仮想コンテンツを前記ユーザに表示することは、前記仮想コンテンツを境界された3次元仮想体積の中にレンダリングすることを含む、方法。 - 前記第2のコンテンツを前記仮想コンテンツとして表示することは、3次元表示での表示のために前記第2のコンテンツを分解されたコンテンツとして分解することを含み、前記第2のコンテンツを分解することは、
前記2次元コンテンツから1つ以上の要素を識別することと、
前記1つ以上の要素または前記2次元コンテンツの設置に関する1つ以上の属性を識別することと、
前記3次元環境の1つ以上の表面を識別することと
を含む、請求項4に記載の方法。 - 前記第2のコンテンツを分解することは、
前記1つ以上の属性に少なくとも部分的に基づいて、前記1つ以上の要素を前記3次元環境の前記1つ以上の表面のうちの少なくとも1つにマッピングすることと、
前記1つ以上の要素を仮想コンテンツとして前記1つ以上の表面のうちの前記少なくとも1つ上に表示することと
をさらに含む、請求項7に記載の方法。 - 前記第2のコンテンツを分解することは、
前記1つ以上の要素のうちの要素のための代替形態を決定すること、および、前記要素の前記代替形態を前記仮想コンテンツの少なくとも一部として前記1つ以上の表面のうちの前記少なくとも1つ上に表示すること、
前記1つ以上の要素のうちの少なくとも1つの要素に関する追加の情報を識別することであって、前記追加の情報は、要素識別子、前記少なくとも1つの要素の設置に関する選好インジケータ、前記少なくとも1つの要素に関する親要素、前記少なくとも1つの要素の子要素、または、前記少なくとも1つの要素に関する多重エンティティインジケータのうちの少なくとも1つを含む、こと、
前記追加の情報を要素テーブル内の1つ以上の構造内に記憶すること、または
前記少なくとも1つの要素の設置に関する1つ以上のルールまたは前記追加の情報のうちの少なくともいくつかに少なくとも部分的に基づいて、前記少なくとも1つの要素の一意性を決定すること、および、前記少なくとも1つの要素の前記一意性を前記要素テーブル内の別の構造内に記憶すること
のうちの少なくとも1つをさらに含む、請求項7に記載の方法。 - 前記ユーザから前記表面までの距離、前記第2のコンテンツのサイズもしくは寸法、前記表面上の非占有空間の量、前記第2のコンテンツの品質レベル、前記表面の傾斜、または、前記ユーザの姿勢もしくは配向のうちの少なくとも1つに少なくとも部分的に基づいて、前記仮想コンテンツを前記ユーザに表示するための前記表面のフレームの最適サイズを決定することをさらに含む、請求項1に記載の方法。
- 前記ユーザの眼焦点を検出することと、
前記眼焦点に少なくとも部分的に基づいて、特定のスタックを前記仮想コンテンツとして決定するように、前記第2のコンテンツ内の仮想オブジェクトの複数のスタックを通してサイクルさせることと、
前記特定のスタックに関する特定のコンテンツを前記ユーザに提示することであって、前記複数のスタックは、相互の上に配列され、前記複数のスタックのうちの少なくともいくつかのそれぞれのコンテンツは、前記ユーザに不可視である、ことと
をさらに含む、請求項1に記載の方法。 - コンピューティング環境内でウィンドウを表示するためのシステムであって、
3次元コンテンツを表示する複合現実ディスプレイデバイスと、
プロセッサと、
前記プロセッサによって実行可能なプログラマブルコードを保持するためのメモリと
を備え、
前記プログラマブルコードは、命令を含み、前記命令は、前記プロセッサによって実行されると、前記プロセッサに一組の行為を行わせ、前記一組の行為は、
前記複合現実ディスプレイデバイスにおいて、ユーザインターフェースから、第1の開いているウィンドウと、第2の開いているウィンドウとを備える複数の開いているウィンドウを選択するための第1の命令を受信することであって、
前記第1の開いているウィンドウは、物理的環境の第1の物理的場所において表示されている第1のコンテンツを備え、
前記第2の開いているウィンドウは、前記物理的環境の第2の物理的場所において表示されている第2のコンテンツを備え、前記第2のコンテンツは、ユーザが前記第1の物理的場所にいるときに前記ユーザの視野内に不可視であり、前記第1のコンテンツは、前記ユーザが前記第2の物理的場所にいるときに前記ユーザの前記視野内に不可視である、ことと、
前記ユーザインターフェースから、前記第2の開いているウィンドウ内に設置された前記第2のコンテンツを前記ユーザに表示するための第2の命令を受信することに応じて、前記ユーザが前記第2の物理的場所にいるときに、前記第2のコンテンツを仮想コンテンツとして前記ユーザの前記視野内の表面上に表示することと
を含み、
前記一組の行為は、
前記ユーザに可視である1つ以上の表面の表面インベントリリストにアクセスすることと、
前記第2の開いているウィンドウに前記第2のコンテンツとして表示されている1つ以上の要素を識別するために、要素の要素インベントリリストにアクセスすることと、
前記1つ以上の要素の第1の特性および少なくとも1つの表面の第2の特性に少なくとも部分的に基づいて、前記1つ以上の要素のために、前記表面インベントリリストから前記少なくとも1つの表面を決定することと、
前記1つ以上の要素を前記少なくとも1つの表面にマッピングすることと、
前記1つ以上の要素を前記少なくとも1つの表面上にレンダリングすることと
をさらに含む、システム。 - 前記一組の行為は、
前記第2のコンテンツを複製して、複製されたコンテンツにすることと、
前記ユーザの前記視野内の3次元環境において、かつ、2次元表示で、前記複製されたコンテンツを表面上に表示することと、
前記表面の寸法もしくは配向、前記表面と前記ユーザとの間の距離、または、表示されるべき前記複製されたコンテンツもしくは2次元コンテンツのタイプのうちの少なくとも1つで前記表面をタグ付けし、または、カテゴリ化することと、
前記表面に関する情報をデータ構造内に記憶することであって、前記データ構造は、複数の列を備え、前記複数の列は、1つ以上の表面の1つ以上の表面識別子、前記表面についての現実または仮想タイプのインジケータ、多重エンティティインジケータ、前記1つ以上の表面の1つ以上の位置、高さ、寸法、もしくは配向にそれぞれ割り当てられている、ことと
を含む、請求項12に記載のシステム。 - 前記第2の開いているウィンドウに表示されている前記第2のコンテンツは、前記第2のコンテンツの2次元表示を含み、前記ユーザに表示されている前記仮想コンテンツは、前記第2のコンテンツの3次元表示を含む、請求項13に記載のシステム。
- 前記第2のコンテンツを前記仮想コンテンツとして表示することは、3次元表示での表示のために前記第2のコンテンツを分解されたコンテンツとして分解することを含み、前記第2のコンテンツを分解することは、
前記2次元コンテンツから1つ以上の要素を識別することと、
前記1つ以上の要素または前記2次元コンテンツの設置に関する1つ以上の属性を識別することと、
前記3次元環境の1つ以上の表面を識別することと、
前記1つ以上の属性に少なくとも部分的に基づいて、前記1つ以上の要素を前記3次元環境の前記1つ以上の表面のうちの少なくとも1つにマッピングすることと、
前記1つ以上の要素を仮想コンテンツとして前記1つ以上の表面のうちの前記少なくとも1つ上に表示することと
を含む、請求項13に記載のシステム。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862634016P | 2018-02-22 | 2018-02-22 | |
US62/634,016 | 2018-02-22 | ||
PCT/US2019/018932 WO2019165055A1 (en) | 2018-02-22 | 2019-02-21 | Browser for mixed reality systems |
JP2020544190A JP7112502B2 (ja) | 2018-02-22 | 2019-02-21 | 複合現実システムのためのブラウザ |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020544190A Division JP7112502B2 (ja) | 2018-02-22 | 2019-02-21 | 複合現実システムのためのブラウザ |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024086164A Division JP2024116186A (ja) | 2018-02-22 | 2024-05-28 | 複合現実システムのためのブラウザ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022153514A JP2022153514A (ja) | 2022-10-12 |
JP7528156B2 true JP7528156B2 (ja) | 2024-08-05 |
Family
ID=67617801
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020544190A Active JP7112502B2 (ja) | 2018-02-22 | 2019-02-21 | 複合現実システムのためのブラウザ |
JP2022117087A Active JP7528156B2 (ja) | 2018-02-22 | 2022-07-22 | 複合現実システムのためのブラウザ |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020544190A Active JP7112502B2 (ja) | 2018-02-22 | 2019-02-21 | 複合現実システムのためのブラウザ |
Country Status (9)
Country | Link |
---|---|
US (3) | US11036364B2 (ja) |
EP (2) | EP4213104A1 (ja) |
JP (2) | JP7112502B2 (ja) |
KR (1) | KR20200122362A (ja) |
CN (1) | CN111758122A (ja) |
AU (1) | AU2019225989A1 (ja) |
CA (1) | CA3089646A1 (ja) |
IL (2) | IL301443A (ja) |
WO (1) | WO2019165055A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11093114B2 (en) * | 2019-03-29 | 2021-08-17 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
US11269492B2 (en) | 2019-03-29 | 2022-03-08 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
WO2020205291A1 (en) | 2019-03-29 | 2020-10-08 | Sony Interactive Entertainment Inc. | Context-based user interface menu with selectable actions |
US11315326B2 (en) * | 2019-10-15 | 2022-04-26 | At&T Intellectual Property I, L.P. | Extended reality anchor caching based on viewport prediction |
US11354012B1 (en) * | 2019-10-18 | 2022-06-07 | Splunk Inc. | Automated placement and time selection for dashboard panels in an extended reality environment |
EP4070150A4 (en) | 2019-12-06 | 2023-12-06 | Magic Leap, Inc. | DYNAMIC BROWSER STAGE |
US11538199B2 (en) * | 2020-02-07 | 2022-12-27 | Lenovo (Singapore) Pte. Ltd. | Displaying a window in an augmented reality view |
KR20240064014A (ko) * | 2021-09-25 | 2024-05-10 | 애플 인크. | 가상 환경들에서 가상 객체들을 제시하기 위한 디바이스들, 방법들, 및 그래픽 사용자 인터페이스들 |
CN114971764A (zh) * | 2022-04-08 | 2022-08-30 | 浙江赟燊商业信息系统科技有限公司 | 一种基于HoloLens的存储和匹配系统及方法 |
US20240071002A1 (en) * | 2022-08-30 | 2024-02-29 | Rovi Guides, Inc. | Systems and methods for pinning content items to locations in an augmented reality display based on user preferences |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007058332A (ja) | 2005-08-22 | 2007-03-08 | Canon Inc | オブジェクト操作装置及びオブジェクト操作方法 |
JP2016508257A (ja) | 2012-12-18 | 2016-03-17 | クアルコム,インコーポレイテッド | 拡張現実対応デバイスのためのユーザインターフェース |
US20170256096A1 (en) | 2016-03-07 | 2017-09-07 | Google Inc. | Intelligent object sizing and placement in a augmented / virtual reality environment |
JP2017529635A (ja) | 2014-06-14 | 2017-10-05 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 仮想および拡張現実を作成する方法およびシステム |
Family Cites Families (105)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6720949B1 (en) | 1997-08-22 | 2004-04-13 | Timothy R. Pryor | Man machine interfaces and applications |
US6629065B1 (en) | 1998-09-30 | 2003-09-30 | Wisconsin Alumni Research Foundation | Methods and apparata for rapid computer-aided design of objects in virtual reality and other environments |
US9208270B2 (en) | 2000-08-02 | 2015-12-08 | Comsol Ab | System and method for establishing bidirectional links between multiphysics modeling and design systems |
US7043695B2 (en) | 2000-09-19 | 2006-05-09 | Technion Research & Development Foundation Ltd. | Object positioning and display in virtual environments |
ATE521953T1 (de) | 2002-10-22 | 2011-09-15 | Artoolworks | Verfolgung einer oberfläche in einerdreidimensionalen szene unter verwendung natürlicher visueller merkmale deroberfläche |
JP4212564B2 (ja) | 2005-02-28 | 2009-01-21 | ザイオソフト株式会社 | 画像処理方法および画像処理プログラム |
US20070074125A1 (en) | 2005-09-26 | 2007-03-29 | Microsoft Corporation | Preview information for web-browsing |
US7595810B2 (en) * | 2006-03-22 | 2009-09-29 | Apple Inc. | Methods of manipulating a screen space of a display device |
US20080115081A1 (en) * | 2006-11-09 | 2008-05-15 | Microsoft Corporation | Enhanced windows management feature |
US20090028142A1 (en) | 2007-07-25 | 2009-01-29 | Schmidt Brian K | Streaming data content in a network |
US8245241B2 (en) | 2007-10-02 | 2012-08-14 | International Business Machines Corporation | Arrangements for interactivity between a virtual universe and the world wide web |
US10872322B2 (en) | 2008-03-21 | 2020-12-22 | Dressbot, Inc. | System and method for collaborative shopping, business and entertainment |
WO2009146130A2 (en) | 2008-04-05 | 2009-12-03 | Social Communications Company | Shared virtual area communication environment based apparatus and methods |
US9952673B2 (en) | 2009-04-02 | 2018-04-24 | Oblong Industries, Inc. | Operating environment comprising multiple client devices, multiple displays, multiple users, and gestural control |
US20160077677A1 (en) | 2008-05-20 | 2016-03-17 | Israel Valdes | Apparatus and method for user configurable content |
US8924862B1 (en) * | 2008-09-05 | 2014-12-30 | Cisco Technology, Inc. | Optimizing desktop sharing for wireless clients during networked collaboration |
KR101082487B1 (ko) | 2010-01-29 | 2011-11-11 | 키위플 주식회사 | 객체 인식시스템 및 이를 이용하는 객체 인식 방법 |
US20130278631A1 (en) | 2010-02-28 | 2013-10-24 | Osterhout Group, Inc. | 3d positioning of augmented reality information |
US20120212484A1 (en) | 2010-02-28 | 2012-08-23 | Osterhout Group, Inc. | System and method for display content placement using distance and location information |
WO2012044539A2 (en) * | 2010-10-01 | 2012-04-05 | Imerj, Llc | Multi-operating system |
US9069577B2 (en) * | 2010-11-23 | 2015-06-30 | Apple Inc. | Grouping and browsing open windows |
WO2012135553A1 (en) | 2011-03-29 | 2012-10-04 | Qualcomm Incorporated | Selective hand occlusion over virtual projections onto physical surfaces using skeletal tracking |
US9354899B2 (en) | 2011-04-18 | 2016-05-31 | Google Inc. | Simultaneous display of multiple applications using panels |
ES2544303T3 (es) | 2011-05-23 | 2015-08-28 | Lego A/S | Generación de instrucciones de construcción para modelos de elementos de construcción |
US8912979B1 (en) | 2011-07-14 | 2014-12-16 | Google Inc. | Virtual window in head-mounted display |
CN103946732B (zh) | 2011-09-26 | 2019-06-14 | 微软技术许可有限责任公司 | 基于对透视、近眼显示器的传感器输入的视频显示修改 |
US9734633B2 (en) | 2012-01-27 | 2017-08-15 | Microsoft Technology Licensing, Llc | Virtual environment generating system |
US9671566B2 (en) | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US9069455B2 (en) | 2012-06-22 | 2015-06-30 | Microsoft Technology Licensing, Llc | 3D user interface for application entities |
US20130342572A1 (en) | 2012-06-26 | 2013-12-26 | Adam G. Poulos | Control of displayed content in virtual environments |
US9292085B2 (en) | 2012-06-29 | 2016-03-22 | Microsoft Technology Licensing, Llc | Configuring an interaction zone within an augmented reality environment |
WO2014031899A1 (en) | 2012-08-22 | 2014-02-27 | Goldrun Corporation | Augmented reality virtual content platform apparatuses, methods and systems |
US9461876B2 (en) | 2012-08-29 | 2016-10-04 | Loci | System and method for fuzzy concept mapping, voting ontology crowd sourcing, and technology prediction |
US9070194B2 (en) | 2012-10-25 | 2015-06-30 | Microsoft Technology Licensing, Llc | Planar surface detection |
US9407824B2 (en) | 2012-11-01 | 2016-08-02 | Google Inc. | Multi-directional content capture on mobile devices |
KR101984915B1 (ko) | 2012-12-03 | 2019-09-03 | 삼성전자주식회사 | 증강 현실 컨텐츠 운용 방법 및 이를 지원하는 단말기와 시스템 |
JP2016509292A (ja) * | 2013-01-03 | 2016-03-24 | メタ カンパニー | エクストラミッシブ空間撮像デジタル眼鏡装置または拡張介在ビジョン |
US20140200863A1 (en) | 2013-01-11 | 2014-07-17 | The Regents Of The University Of Michigan | Monitoring proximity of objects at construction jobsites via three-dimensional virtuality in real-time |
US20140225922A1 (en) | 2013-02-11 | 2014-08-14 | Rocco A. Sbardella | System and method for an augmented reality software application |
JP2014157466A (ja) | 2013-02-15 | 2014-08-28 | Sony Corp | 情報処理装置及び記憶媒体 |
GB201303707D0 (en) | 2013-03-01 | 2013-04-17 | Tosas Bautista Martin | System and method of interaction for mobile devices |
IL308285B1 (en) | 2013-03-11 | 2024-07-01 | Magic Leap Inc | System and method for augmentation and virtual reality |
US20140267228A1 (en) | 2013-03-14 | 2014-09-18 | Microsoft Corporation | Mapping augmented reality experience to various environments |
EP4027222A1 (en) | 2013-03-15 | 2022-07-13 | Magic Leap, Inc. | Display system and method |
US20140282274A1 (en) | 2013-03-15 | 2014-09-18 | Qualcomm Incorporated | Detection of a gesture performed with at least two control objects |
US20150277699A1 (en) * | 2013-04-02 | 2015-10-01 | Cherif Atia Algreatly | Interaction method for optical head-mounted display |
KR20140133361A (ko) | 2013-05-10 | 2014-11-19 | 삼성전자주식회사 | 디스플레이 장치 및 그 ui 화면 제공 방법 |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
US9129430B2 (en) | 2013-06-25 | 2015-09-08 | Microsoft Technology Licensing, Llc | Indicating out-of-view augmented reality images |
US10861224B2 (en) * | 2013-07-23 | 2020-12-08 | Hover Inc. | 3D building analyzer |
JP6147861B2 (ja) | 2013-09-06 | 2017-06-14 | 株式会社マーズフラッグ | 情報処理装置、検索サーバ、ウェブサーバ及びコンピュータプログラム |
US20180225885A1 (en) | 2013-10-01 | 2018-08-09 | Aaron Scott Dishno | Zone-based three-dimensional (3d) browsing |
KR101512084B1 (ko) | 2013-11-15 | 2015-04-17 | 한국과학기술원 | 가상현실 기반의 3차원 웹 검색 인터페이스를 제공하는 웹 검색 시스템 및 그 제공 방법 |
US9354778B2 (en) | 2013-12-06 | 2016-05-31 | Digimarc Corporation | Smartphone-based methods and systems |
US9411422B1 (en) | 2013-12-13 | 2016-08-09 | Audible, Inc. | User interaction with content markers |
US20150185825A1 (en) | 2013-12-30 | 2015-07-02 | Daqri, Llc | Assigning a virtual user interface to a physical object |
US20150206343A1 (en) * | 2014-01-17 | 2015-07-23 | Nokia Corporation | Method and apparatus for evaluating environmental structures for in-situ content augmentation |
US9201578B2 (en) | 2014-01-23 | 2015-12-01 | Microsoft Technology Licensing, Llc | Gaze swipe selection |
KR102184402B1 (ko) | 2014-03-06 | 2020-11-30 | 엘지전자 주식회사 | 글래스 타입의 이동 단말기 |
US10203762B2 (en) | 2014-03-11 | 2019-02-12 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
US20150302651A1 (en) | 2014-04-18 | 2015-10-22 | Sam Shpigelman | System and method for augmented or virtual reality entertainment experience |
US9361732B2 (en) | 2014-05-01 | 2016-06-07 | Microsoft Technology Licensing, Llc | Transitions between body-locked and world-locked augmented reality |
US9996636B2 (en) | 2014-05-13 | 2018-06-12 | Atheer, Inc. | Method for forming walls to align 3D objects in 2D environment |
US20150331240A1 (en) * | 2014-05-15 | 2015-11-19 | Adam G. Poulos | Assisted Viewing Of Web-Based Resources |
US10156967B2 (en) | 2014-05-31 | 2018-12-18 | Apple Inc. | Device, method, and graphical user interface for tabbed and private browsing |
US9858720B2 (en) | 2014-07-25 | 2018-01-02 | Microsoft Technology Licensing, Llc | Three-dimensional mixed-reality viewport |
US20160027214A1 (en) | 2014-07-25 | 2016-01-28 | Robert Memmott | Mouse sharing between a desktop and a virtual world |
JP6705124B2 (ja) | 2015-04-23 | 2020-06-03 | セイコーエプソン株式会社 | 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
US9734634B1 (en) | 2014-09-26 | 2017-08-15 | A9.Com, Inc. | Augmented reality product preview |
US10726593B2 (en) | 2015-09-22 | 2020-07-28 | Fyusion, Inc. | Artificially rendering images using viewpoint interpolation and extrapolation |
JP5767386B1 (ja) | 2014-12-15 | 2015-08-19 | 株式会社コロプラ | ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム |
US10335677B2 (en) | 2014-12-23 | 2019-07-02 | Matthew Daniel Fuchs | Augmented reality system with agent device for viewing persistent content and method of operation thereof |
US20160300392A1 (en) | 2015-04-10 | 2016-10-13 | VR Global, Inc. | Systems, media, and methods for providing improved virtual reality tours and associated analytics |
WO2016176511A1 (en) | 2015-04-29 | 2016-11-03 | Data Cocoon LLC | Tessellated data visualization system |
US10832479B2 (en) | 2015-06-15 | 2020-11-10 | Sony Corporation | Information processing apparatus, information processing method, and program |
EP3113106A1 (en) | 2015-07-02 | 2017-01-04 | Nokia Technologies Oy | Determination of environmental augmentation allocation data |
KR20170005602A (ko) * | 2015-07-06 | 2017-01-16 | 삼성전자주식회사 | 증강현실 및 가상현실의 통합적 제공 방법 및 이를 사용하는 전자 장치 |
WO2017030306A1 (en) | 2015-08-18 | 2017-02-23 | Samsung Electronics Co., Ltd. | Method and system for bookmarking a webpage |
US10057078B2 (en) | 2015-08-21 | 2018-08-21 | Samsung Electronics Company, Ltd. | User-configurable interactive region monitoring |
US10318225B2 (en) | 2015-09-01 | 2019-06-11 | Microsoft Technology Licensing, Llc | Holographic augmented authoring |
EP3629136B1 (en) | 2015-10-08 | 2024-04-17 | InterDigital VC Holdings, Inc. | Methods and systems of automatic calibration for dynamic display configurations |
NZ741866A (en) | 2015-10-20 | 2019-07-26 | Magic Leap Inc | Selecting virtual objects in a three-dimensional space |
TWI567691B (zh) | 2016-03-07 | 2017-01-21 | 粉迷科技股份有限公司 | 立體空間的場景編輯方法與系統 |
CN111329554B (zh) | 2016-03-12 | 2021-01-05 | P·K·朗 | 用于手术的装置与方法 |
US10373381B2 (en) | 2016-03-30 | 2019-08-06 | Microsoft Technology Licensing, Llc | Virtual object manipulation within physical environment |
KR20170126295A (ko) * | 2016-05-09 | 2017-11-17 | 엘지전자 주식회사 | 헤드 마운티드 디스플레이 장치 및 그것의 제어방법 |
US10268266B2 (en) | 2016-06-29 | 2019-04-23 | Microsoft Technology Licensing, Llc | Selection of objects in three-dimensional space |
KR20210107185A (ko) | 2016-06-30 | 2021-08-31 | 매직 립, 인코포레이티드 | 3d 공간에서의 포즈 추정 |
US10489978B2 (en) | 2016-07-26 | 2019-11-26 | Rouslan Lyubomirov DIMITROV | System and method for displaying computer-based content in a virtual or augmented environment |
AU2017311296B2 (en) | 2016-08-11 | 2021-12-16 | Magic Leap, Inc. | Automatic placement of a virtual object in a three-dimensional space |
US20180082480A1 (en) | 2016-09-16 | 2018-03-22 | John R. White | Augmented reality surgical technique guidance |
CA3037276A1 (en) | 2016-10-05 | 2018-04-12 | Magic Leap, Inc. | Surface modeling systems and methods |
US11290572B2 (en) | 2016-11-07 | 2022-03-29 | Constructive Labs | System and method for facilitating sharing of virtual three-dimensional space |
US10271043B2 (en) | 2016-11-18 | 2019-04-23 | Zspace, Inc. | 3D user interface—360-degree visualization of 2D webpage content |
US10599823B2 (en) | 2016-11-18 | 2020-03-24 | Invensense, Inc. | Systems and methods for coordinating applications with a user interface |
US20180150204A1 (en) * | 2016-11-30 | 2018-05-31 | Google Inc. | Switching of active objects in an augmented and/or virtual reality environment |
WO2018176008A1 (en) | 2017-03-24 | 2018-09-27 | Inmentis, Llc | Social media system with navigable, artificial-intelligence-based graphical user interface |
KR102555443B1 (ko) | 2017-05-01 | 2023-07-12 | 매직 립, 인코포레이티드 | 콘텐츠를 공간 3d 환경에 매칭 |
US10304251B2 (en) | 2017-06-15 | 2019-05-28 | Microsoft Technology Licensing, Llc | Virtually representing spaces and objects while maintaining physical properties |
US10719870B2 (en) | 2017-06-27 | 2020-07-21 | Microsoft Technology Licensing, Llc | Mixed reality world integration of holographic buttons in a mixed reality device |
US20190005724A1 (en) | 2017-06-30 | 2019-01-03 | Microsoft Technology Licensing, Llc | Presenting augmented reality display data in physical presentation environments |
US10444975B2 (en) | 2017-07-18 | 2019-10-15 | Google Llc | Graphical icon manipulation |
US10803663B2 (en) | 2017-08-02 | 2020-10-13 | Google Llc | Depth sensor aided estimation of virtual reality environment boundaries |
IL300465A (en) | 2017-12-22 | 2023-04-01 | Magic Leap Inc | Methods and system for managing and displaying virtual content in a mixed reality system |
WO2019165044A1 (en) | 2018-02-22 | 2019-08-29 | Magic Leap, Inc. | Object creation with physical manipulation |
-
2019
- 2019-02-21 IL IL301443A patent/IL301443A/en unknown
- 2019-02-21 AU AU2019225989A patent/AU2019225989A1/en not_active Abandoned
- 2019-02-21 US US16/281,540 patent/US11036364B2/en active Active
- 2019-02-21 CA CA3089646A patent/CA3089646A1/en active Pending
- 2019-02-21 KR KR1020207026917A patent/KR20200122362A/ko not_active Application Discontinuation
- 2019-02-21 WO PCT/US2019/018932 patent/WO2019165055A1/en unknown
- 2019-02-21 JP JP2020544190A patent/JP7112502B2/ja active Active
- 2019-02-21 EP EP23159324.5A patent/EP4213104A1/en active Pending
- 2019-02-21 CN CN201980014719.1A patent/CN111758122A/zh active Pending
- 2019-02-21 EP EP19757809.9A patent/EP3756169B1/en active Active
- 2019-02-21 IL IL276621A patent/IL276621B2/en unknown
-
2021
- 2021-05-11 US US17/316,925 patent/US11972092B2/en active Active
-
2022
- 2022-07-22 JP JP2022117087A patent/JP7528156B2/ja active Active
-
2024
- 2024-03-08 US US18/600,439 patent/US20240211113A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007058332A (ja) | 2005-08-22 | 2007-03-08 | Canon Inc | オブジェクト操作装置及びオブジェクト操作方法 |
JP2016508257A (ja) | 2012-12-18 | 2016-03-17 | クアルコム,インコーポレイテッド | 拡張現実対応デバイスのためのユーザインターフェース |
JP2017529635A (ja) | 2014-06-14 | 2017-10-05 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 仮想および拡張現実を作成する方法およびシステム |
US20170256096A1 (en) | 2016-03-07 | 2017-09-07 | Google Inc. | Intelligent object sizing and placement in a augmented / virtual reality environment |
Also Published As
Publication number | Publication date |
---|---|
EP3756169B1 (en) | 2023-04-19 |
US20240211113A1 (en) | 2024-06-27 |
KR20200122362A (ko) | 2020-10-27 |
IL276621A (en) | 2020-09-30 |
US20190258365A1 (en) | 2019-08-22 |
JP2021514088A (ja) | 2021-06-03 |
CN111758122A (zh) | 2020-10-09 |
US11036364B2 (en) | 2021-06-15 |
US11972092B2 (en) | 2024-04-30 |
IL301443A (en) | 2023-05-01 |
CA3089646A1 (en) | 2019-08-20 |
AU2019225989A1 (en) | 2020-08-13 |
IL276621B1 (en) | 2024-01-01 |
WO2019165055A1 (en) | 2019-08-29 |
JP2022153514A (ja) | 2022-10-12 |
EP3756169A4 (en) | 2021-04-21 |
JP7112502B2 (ja) | 2022-08-03 |
EP3756169A1 (en) | 2020-12-30 |
IL276621B2 (en) | 2024-05-01 |
EP4213104A1 (en) | 2023-07-19 |
US20210263624A1 (en) | 2021-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7528156B2 (ja) | 複合現実システムのためのブラウザ | |
JP7529733B2 (ja) | 物理的操作を用いたオブジェクト作成 | |
AU2022271460B2 (en) | Matching content to a spatial 3D environment | |
CN115601671B (zh) | 用于向用户显示虚拟内容的系统和方法 | |
US11803628B2 (en) | Secure authorization via modal window | |
KR101747299B1 (ko) | 데이터 객체 디스플레이 방법 및 장치와 컴퓨터로 읽을 수 있는 저장 매체 | |
JP2024116186A (ja) | 複合現実システムのためのブラウザ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220722 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230818 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231117 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240528 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240605 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240625 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240724 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7528156 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |