JP6391685B2 - 仮想オブジェクトの方向付け及び可視化 - Google Patents
仮想オブジェクトの方向付け及び可視化 Download PDFInfo
- Publication number
- JP6391685B2 JP6391685B2 JP2016521497A JP2016521497A JP6391685B2 JP 6391685 B2 JP6391685 B2 JP 6391685B2 JP 2016521497 A JP2016521497 A JP 2016521497A JP 2016521497 A JP2016521497 A JP 2016521497A JP 6391685 B2 JP6391685 B2 JP 6391685B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- virtual object
- locked
- perspective
- location
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Description
は複数の許容可能な位置、向き、及び場所に消費デバイスがあるとき、共有仮想オブジェクトをレンダリングすることができる。第3の実施形態では、消費デバイスは、キャプチャーデバイスによって定義されるような仮想オブジェクトの定義されたレンダリング位置に近接した位置にあるとき、共有仮想オブジェクトをレンダリングすることができ、消費デバイスの許容可能な場所、位置、及び向きは当該レンダリング位置に対して定義される。
られる場所に自身を配置すると、ユーザーは、ユーザー24によって作成された仮想オブジェクトを見たり消費したりすることができる。
のさらなる例である。
Devices」と題する米国特許公開第2008/0285140号に見ることができる。
おける白又は黒の量の測定値を有することになる。4つのサンプルから、システムは目の方向を決定することができる。
[0079]図示される例示的な処理システムは、コンピューター読み取り可能な記憶媒体の例を含む。コンピューター読み取り可能な記憶媒体は、プロセッサー読み取り可能な記憶媒体でもある。このような媒体は、コンピューター読み取り可能な命令、データ構造、プログラムモジュール又は他のデータなどの情報の格納のために実施される、揮発性及び不揮発性、取り外し可能及び取り外し不能な媒体を含むことができる。コンピューター記憶媒体は、RAM、ROM、EEPROM、キャッシュ、フラッシュメモリー又は他のメモリー技術、CD−ROM、デジタル多用途ディスク(DVD)又は他の光学ディスクストレージ、メモリースティック又はカード、磁気カセット、磁気テープ、メディアドライブ、ハードディスク、磁気ディスクストレージ又は他の磁気ストレージデバイスなどを含むが、これらに限定されない。
トレンダリングデータ情報、並びに、オブジェクトをレンダリングしようとする消費デバイスの、1つ又は複数の許容可能な消費場所、1つ又は複数の許容可能な消費位置、及び1つ又は複数の許容可能な消費向き(consumption orientations)を含む。中央サービス900は、透過型ヘッドマウントディスプレイデバイス2の2人の着用者を中央サービスに提供する1人又は複数のシステム管理者によって動作されてもよい。
[0095]ステップ1108では、場所、向き、位置及び視界データが、ユーザーの視点(パースペクティブ)へと変換される。ユーザーの視点(パースペクティブ)は、特定の種類の共有仮想オブジェクトについて許容可能なレンダリング位置を決定するために利用することができる。
[0099]図12は、本技術による、仮想オブジェクトを表示することを望む消費ユーザーのデバイス(消費デバイス)によって実行される方法を示す。
ブジェクトとともに利用されるグローバル座標系を参照して決定される。ステップ1204において、シーンマップデータが、上記のステップ1102と同様の方法で収集される。
の決定が行われる。
[0103]図3C及び4Aに示されたものなどのマーカーが使用される例において、1210において、ユーザーが1つ又は複数のマーカーに近接しているかどうかに関する最初の判定が行われる。1210における判定は、本質的には、環境内の関連付けられる現実世界の位置におけるマーカーが消費デバイスの視野内に入るかどうかである。マーカーの使用が本技術によって必要とされないことを理解すべきである。したがって、ステップ1212はオプションであってよい。消費ユーザーを共有仮想オブジェクトのレンダリング場所や位置と調整する他のシステムが利用されてもよい。マーカーが利用され、マーカーがユーザーの消費デバイスのFOV内にある場合、1212において、マーカーは消費デバイスのディスプレイ内にレンダリングされる。
われる。ステップ1214におけるオブジェクトの相互作用は、共有オブジェクトを見るために可能となる位置、場所及び向きにおけるマーカーに対してユーザーを配置することのように単純であってもよい。消費ユーザーのデバイスがその場所、位置及び向きにあるとき、オブジェクトがレンダリングされてもよい。他の実施形態では、ユーザーは、場所、位置及び向きに消費デバイスを配置する前に、マーカーを積極的に選択することができる。
オブジェクトに対するユーザーの視点(パースペクティブ)が生じるような位置、場所及び向きにあるとき、共有の視点(パースペクティブ)がロックされた仮想オブジェクトがユーザーに対してレンダリングされる。消費は、写真を視覚化すること、特定の録音された音を特定の時間に聞くこと、動画を見ること、テキストを読むこと、インタラクティブな3次元仮想オブジェクトと遊ぶことなどであってもよい。
る。
[00108]いくつかの場合には、共有の視点(パースペクティブ)がロックされた仮想オブジェクトについてのユーザー変更が許可される。ステップ1224において、オブジェクトのユーザー変更が生じたか否かについての判定が行われる。共有オブジェクトに対する許可がそのような変更を許す場合、ユーザー変更は、ユーザーによるオブジェクトの追加、注釈付け、又は変更を含むことができる。オブジェクトに対するユーザー変更が生じた場合、1226において、オブジェクトのデータが更新され、表示される。1228においてコンテンツの消費が終了すると、1230において方法は次のオブジェクトに移動する。
テップ1302において、特定のオブジェクトについての向き、場所、位置及び視点(パースペクティブ)を消費する適切なコンテンツに関して決定が行われる。ステップ1302において取得された情報は、許容可能なレンダリング位置が生じる1つ又は複数の仮想オブジェクトから利用可能な情報を定義する。当該消費デバイスの場所、向き、位置及び視野が1304において取得される。
[00111]ワールドロックされた仮想オブジェクトは、図4Bに示すようなものであり、そこでは、オブジェクトの位置は物理的物体の位置及び向きにロックされる。ローカルロックされた仮想オブジェクトは、消費位置がユーザーの特定の視点(パースペクティブ)にロックされるものである。
合、1322において、オブジェクトはワールドロック位置においてレンダリングされる。1322において、ユーザーの視点(パースペクティブ)の変化の決定が1324において行われ、共有の視点(パースペクティブ)がロックされた仮想オブジェクトに対してユーザーの視点(パースペクティブ)が変化する場合、1326においてその変化が計算され、方法はステップ1320に戻って、共有の視点(パースペクティブ)がロックされた仮想オブジェクトに関して、消費デバイスが許容可能な場所、位置及び向きにあることを確実にする。1320において消費デバイスが正しい位置にない場合、1350においてオブジェクトのレンダリングは何も生じない。
の特許請求の範囲において規定される主題が必ずしも上述の特定の特徴又は動作に限定されないことが理解されるべきである。むしろ、上述の特定の特徴及び動作は、特許請求の範囲を実施する例示的な形式として開示されるものである。
Claims (7)
- 共有仮想オブジェクトを生成するための装置であって、
キャプチャーデバイスと、
前記キャプチャーデバイスに結合されたプロセッサーと、
を備え、前記プロセッサーが、以下の方法、即ち、
前記キャプチャーデバイスの位置を決定するステップと、
前記キャプチャーデバイスのグローバル座標の場所、位置及び向きを決定するステップと、
パースペクティブがロックされた共有仮想オブジェクトを表示することを可能とするパラメータを決定するステップであって、当該パラメータを決定するステップが、
共有仮想オブジェクトレンダリングデータを生成するサブステップであって、当該共有仮想オブジェクトレンダリングデータが、前記共有仮想オブジェクトに対するレンダリング位置データを含み、当該レンダリング位置データが、少なくともグローバル座標の場所、並びに、消費デバイスの視野内のローカル座標系に関する仮想オブジェクトの少なくとも1つの位置及び少なくとも1つの向きを含む、ものと、
見る位置を決定するサブステップであって、当該見る位置から、前記パースペクティブがロックされた共有仮想オブジェクトを見ることが可能であり、当該見る位置以外の位置からは前記パースペクティブがロックされた共有仮想オブジェクトを見ることが不可能である、ものと、
前記見る位置の場所を示す仮想マーカーを生成するサブステップであって、当該仮想マーカーが、当該仮想マーカーから離れた場所から見える、ものと、
を含むものと、
前記パースペクティブがロックされた共有仮想オブジェクトを共有するステップと、
を含む方法を実行するようにプログラムされた、
共有仮想オブジェクトを生成するための装置。 - 前記装置が、更に、
前記プロセッサーが、
前記仮想マーカーを、前記パースペクティブがロックされた共有仮想オブジェクトに関連するレンダリング位置データに含まれる前記ローバル座標の場所に割り当てるように、
前記プロセッサーをプログラミングする、
コードを含む、請求項1に記載の装置。 - 前記装置が、更に、
前記プロセッサーが、
ワールドロックされた状態、又は、ローカルロックされた状態を、前記パースペクティブがロックされた共有仮想オブジェクトに割り当てるように、
前記プロセッサーをプログラミングする、
コードを含む、請求項1に記載の装置。 - 前記装置が、更に、前記プロセッサーが、
前記パースペクティブがロックされた共有仮想オブジェクトに、所定の場所で、ワールドロックされた状態を割り当て、消費デバイスに対する複数の許容可能なグローバル座標の場所、許容可能な位置、及び、許容可能な向き、を決定して、前記パースペクティブがロックされた共有仮想オブジェクトをレンダリングするように、
前記プロセッサーをプログラミングする、
コードを含む、請求項3に記載の装置。 - 前記装置が、更に、前記プロセッサーが、
前記パースペクティブがロックされた共有仮想オブジェクトに、
ローカルロックされた状態を割り当て、
消費デバイスに対する1つの許容可能なグローバル座標の場所、位置、及び、向きを決定して、前記パースペクティブがロックされた共有仮想オブジェクトを、ローカルロックされたオブジェクトとしてレンダリングするように、
前記プロセッサーをプログラミングする、
コードを含む、請求項3に記載の装置。 - 前記キャプチャーデバイスが、少なくとも音声センサー及びビデオカメラを含み、
前記装置が、更に、
前記音声センサー及び前記ビデオカメラを用いて、前記パースペクティブがロックされた共有仮想オブジェクトのレンダリングデータをキャプチャーするように、前記プロセッサーをプログラミングする、
コードを含む、
請求項1に記載の装置。 - ディスプレイを更に含み、
前記装置が、更に、
他のキャプチャーデバイスによって生成された、第2の、パースペクティブがロックされた共有仮想オブジェクトのためのレンダリング位置データを受信するステップであって、当該レンダリング位置データが、許容可能な場所、許容可能な位置、及び、許容可能な向き、のそれぞれのうちの少なくとも1つを含むものと、
前記装置の場所、位置、及び、向きを決定するステップと、
前記装置の場所、位置、及び、向きが、前記許容可能な場所、許容可能な位置、及び、許容可能な向きに近接する場合に、前記パースペクティブがロックされた共有仮想オブジェクトを、シースルーヘッドマウントディスプレイにおいてレンダリングするステップと、
を実行するように、前記プロセッサーをプログラミングする、
コードを含む、
請求項1に記載の装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/921,053 US10139623B2 (en) | 2013-06-18 | 2013-06-18 | Virtual object orientation and visualization |
US13/921,053 | 2013-06-18 | ||
PCT/US2014/042647 WO2014204905A1 (en) | 2013-06-18 | 2014-06-17 | Virtual object orientation and visualization |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016533565A JP2016533565A (ja) | 2016-10-27 |
JP6391685B2 true JP6391685B2 (ja) | 2018-09-19 |
Family
ID=51168429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016521497A Active JP6391685B2 (ja) | 2013-06-18 | 2014-06-17 | 仮想オブジェクトの方向付け及び可視化 |
Country Status (11)
Country | Link |
---|---|
US (1) | US10139623B2 (ja) |
EP (2) | EP3521981A1 (ja) |
JP (1) | JP6391685B2 (ja) |
KR (1) | KR102289389B1 (ja) |
CN (1) | CN105453011B (ja) |
AU (1) | AU2014281726B2 (ja) |
BR (1) | BR112015031234B1 (ja) |
CA (1) | CA2913650C (ja) |
MX (1) | MX371269B (ja) |
RU (1) | RU2670784C9 (ja) |
WO (1) | WO2014204905A1 (ja) |
Families Citing this family (61)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9823737B2 (en) * | 2008-04-07 | 2017-11-21 | Mohammad A Mazed | Augmented reality personal assistant apparatus |
KR20100138700A (ko) * | 2009-06-25 | 2010-12-31 | 삼성전자주식회사 | 가상 세계 처리 장치 및 방법 |
US9500865B2 (en) * | 2013-03-04 | 2016-11-22 | Alex C. Chen | Method and apparatus for recognizing behavior and providing information |
JP6499154B2 (ja) | 2013-03-11 | 2019-04-10 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 拡張現実および仮想現実のためのシステムおよび方法 |
CN107656618B (zh) | 2013-03-15 | 2021-03-23 | 奇跃公司 | 显示系统和方法 |
US9552675B2 (en) * | 2013-06-03 | 2017-01-24 | Time Traveler App Llc | Display application and perspective views of virtual space |
US9607437B2 (en) * | 2013-10-04 | 2017-03-28 | Qualcomm Incorporated | Generating augmented reality content for unknown objects |
US20150145887A1 (en) * | 2013-11-25 | 2015-05-28 | Qualcomm Incorporated | Persistent head-mounted content display |
JP2015149634A (ja) * | 2014-02-07 | 2015-08-20 | ソニー株式会社 | 画像表示装置および方法 |
JP2015228050A (ja) * | 2014-05-30 | 2015-12-17 | ソニー株式会社 | 情報処理装置および情報処理方法 |
WO2016061267A1 (en) | 2014-10-15 | 2016-04-21 | Dirtt Environmental Solutions, Inc. | Virtual reality immersion with an architectural design software application |
US10140768B2 (en) * | 2014-10-17 | 2018-11-27 | Seiko Epson Corporation | Head mounted display, method of controlling head mounted display, and computer program |
WO2016077798A1 (en) | 2014-11-16 | 2016-05-19 | Eonite Perception Inc. | Systems and methods for augmented reality preparation, processing, and application |
US10043319B2 (en) | 2014-11-16 | 2018-08-07 | Eonite Perception Inc. | Optimizing head mounted displays for augmented reality |
US9916002B2 (en) * | 2014-11-16 | 2018-03-13 | Eonite Perception Inc. | Social applications for augmented reality technologies |
US20170061700A1 (en) * | 2015-02-13 | 2017-03-02 | Julian Michael Urbach | Intercommunication between a head mounted display and a real world object |
US10216982B2 (en) * | 2015-03-12 | 2019-02-26 | Microsoft Technology Licensing, Llc | Projecting a virtual copy of a remote object |
JP6367166B2 (ja) | 2015-09-01 | 2018-08-01 | 株式会社東芝 | 電子機器及び方法 |
US10496156B2 (en) * | 2016-05-17 | 2019-12-03 | Google Llc | Techniques to change location of objects in a virtual/augmented reality system |
US11468111B2 (en) | 2016-06-01 | 2022-10-11 | Microsoft Technology Licensing, Llc | Online perspective search for 3D components |
CA3000008A1 (en) | 2016-06-10 | 2017-12-14 | Dirtt Environmental Solutions, Inc. | Mixed-reality and cad architectural design environment |
CA2997021A1 (en) * | 2016-06-10 | 2017-12-14 | Barrie A. Loberg | Mixed-reality architectural design environment |
EP3273707B1 (en) * | 2016-07-20 | 2019-10-16 | Deutsche Telekom AG | Method and system for displaying location specific content by a head mounted display device |
CN106250084B (zh) * | 2016-07-29 | 2017-08-08 | 广东欧珀移动通信有限公司 | 视频录制方法、装置及移动终端 |
US10466474B2 (en) * | 2016-08-04 | 2019-11-05 | International Business Machines Corporation | Facilitation of communication using shared visual cue |
US11017712B2 (en) | 2016-08-12 | 2021-05-25 | Intel Corporation | Optimized display image rendering |
US9928660B1 (en) | 2016-09-12 | 2018-03-27 | Intel Corporation | Hybrid rendering for a wearable display attached to a tethered computer |
US11295525B1 (en) | 2016-09-30 | 2022-04-05 | Amazon Technologies, Inc. | Augmenting transmitted video data |
US10943396B1 (en) | 2016-09-30 | 2021-03-09 | Amazon Technologies, Inc. | Synchronizing transmitted video data and enhancements |
US10950049B1 (en) * | 2016-09-30 | 2021-03-16 | Amazon Technologies, Inc. | Augmenting transmitted video data |
CN106405840A (zh) * | 2016-10-31 | 2017-02-15 | 沈阳工业大学 | 具有导航功能的头盔式增强现实眼镜 |
WO2018093923A1 (en) | 2016-11-16 | 2018-05-24 | Magic Leap, Inc. | Mixed reality system with reduced power rendering |
US10499997B2 (en) | 2017-01-03 | 2019-12-10 | Mako Surgical Corp. | Systems and methods for surgical navigation |
US10348725B2 (en) | 2017-01-10 | 2019-07-09 | International Business Machines Corporatino | Method of instant sharing invoked from wearable devices |
US10534429B2 (en) | 2017-01-10 | 2020-01-14 | International Business Machines Corporation | Method of instant sharing invoked from wearable devices |
KR102567007B1 (ko) | 2017-02-24 | 2023-08-16 | 마시모 코오퍼레이션 | 의료 모니터링 데이터 표시 시스템 |
WO2018156809A1 (en) * | 2017-02-24 | 2018-08-30 | Masimo Corporation | Augmented reality system for displaying patient data |
US11086396B2 (en) * | 2017-03-31 | 2021-08-10 | Sony Interactive Entertainment LLC | Depth-keying of web content |
US11436811B2 (en) | 2017-04-25 | 2022-09-06 | Microsoft Technology Licensing, Llc | Container-based virtual camera rotation |
CN109426419B (zh) * | 2017-09-05 | 2022-06-03 | 菜鸟智能物流控股有限公司 | 界面显示方法及相关设备 |
GB2568138B (en) * | 2017-09-27 | 2023-02-08 | Fisher Rosemount Systems Inc | 3D Mapping of a process control environment |
US10796487B2 (en) | 2017-09-27 | 2020-10-06 | Fisher-Rosemount Systems, Inc. | 3D mapping of a process control environment |
CN111052045B (zh) * | 2017-09-29 | 2022-07-15 | 苹果公司 | 计算机生成的现实平台 |
CN110415293B (zh) * | 2018-04-26 | 2023-05-23 | 腾讯科技(深圳)有限公司 | 交互处理方法、装置、系统和计算机设备 |
US11677833B2 (en) * | 2018-05-17 | 2023-06-13 | Kaon Interactive | Methods for visualizing and interacting with a three dimensional object in a collaborative augmented reality environment and apparatuses thereof |
US20190385372A1 (en) * | 2018-06-15 | 2019-12-19 | Microsoft Technology Licensing, Llc | Positioning a virtual reality passthrough region at a known distance |
US11244509B2 (en) | 2018-08-20 | 2022-02-08 | Fisher-Rosemount Systems, Inc. | Drift correction for industrial augmented reality applications |
CN112639579B (zh) | 2018-08-31 | 2023-09-15 | 奇跃公司 | 用于增强现实装置的空间分辨的动态调暗 |
CN111200754B (zh) * | 2018-11-16 | 2021-08-10 | 北京字节跳动网络技术有限公司 | 一种全景视频的播放方法、装置、终端及存储介质 |
KR20200098034A (ko) * | 2019-02-11 | 2020-08-20 | 삼성전자주식회사 | 가상 현실 유저 인터페이스를 제공하기 위한 전자 장치 및 그의 동작 방법 |
DE112020002268T5 (de) | 2019-05-06 | 2022-02-10 | Apple Inc. | Vorrichtung, verfahren und computerlesbares medium zur darstellung von dateien computergenerierter realität |
CN113544634A (zh) | 2019-05-06 | 2021-10-22 | 苹果公司 | 用于构成cgr文件的设备、方法和图形用户界面 |
US10885819B1 (en) * | 2019-08-02 | 2021-01-05 | Harman International Industries, Incorporated | In-vehicle augmented reality system |
US11704874B2 (en) | 2019-08-07 | 2023-07-18 | Magic Leap, Inc. | Spatial instructions and guides in mixed reality |
JP7359941B2 (ja) | 2019-08-12 | 2023-10-11 | マジック リープ, インコーポレイテッド | 仮想現実および拡張現実のためのシステムおよび方法 |
EP3936978B1 (en) | 2020-07-08 | 2023-03-29 | Nokia Technologies Oy | Object display |
US11816887B2 (en) | 2020-08-04 | 2023-11-14 | Fisher-Rosemount Systems, Inc. | Quick activation techniques for industrial augmented reality applications |
RU2759773C1 (ru) * | 2020-10-21 | 2021-11-17 | Публичное Акционерное Общество "Сбербанк России" (Пао Сбербанк) | Способ и система определения местоположения пользователя |
EP4016251A1 (en) * | 2020-12-16 | 2022-06-22 | Hitachi Energy Switzerland AG | Portable display device with overlaid virtual information |
JP7078941B1 (ja) * | 2021-02-10 | 2022-06-01 | 株式会社 無重力 | 情報共有プログラム及び情報処理装置 |
US11647161B1 (en) | 2022-05-11 | 2023-05-09 | Iniernational Business Machines Corporation | Resolving visibility discrepencies of virtual objects in extended reality devices |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04250436A (ja) | 1991-01-11 | 1992-09-07 | Pioneer Electron Corp | 撮像装置 |
US6597818B2 (en) | 1997-05-09 | 2003-07-22 | Sarnoff Corporation | Method and apparatus for performing geo-spatial registration of imagery |
KR100444981B1 (ko) | 2000-12-15 | 2004-08-21 | 삼성전자주식회사 | 착용형 디스플레이 시스템 |
US7693702B1 (en) | 2002-11-01 | 2010-04-06 | Lockheed Martin Corporation | Visualizing space systems modeling using augmented reality |
US7401920B1 (en) | 2003-05-20 | 2008-07-22 | Elbit Systems Ltd. | Head mounted eye tracking and display system |
US7391424B2 (en) * | 2003-08-15 | 2008-06-24 | Werner Gerhard Lonsing | Method and apparatus for producing composite images which contain virtual objects |
IL157837A (en) | 2003-09-10 | 2012-12-31 | Yaakov Amitai | Substrate-guided optical device particularly for three-dimensional displays |
US7737965B2 (en) * | 2005-06-09 | 2010-06-15 | Honeywell International Inc. | Handheld synthetic vision device |
US8160400B2 (en) | 2005-11-17 | 2012-04-17 | Microsoft Corporation | Navigating images using image based geometric alignment and object based controls |
US20080147325A1 (en) | 2006-12-18 | 2008-06-19 | Maassel Paul W | Method and system for providing augmented reality |
JP5044817B2 (ja) | 2007-11-22 | 2012-10-10 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 仮想空間を構築するための画像処理方法、装置 |
US20090289955A1 (en) | 2008-05-22 | 2009-11-26 | Yahoo! Inc. | Reality overlay device |
US8108778B2 (en) | 2008-09-30 | 2012-01-31 | Yahoo! Inc. | System and method for context enhanced mapping within a user interface |
DE102009037835B4 (de) * | 2009-08-18 | 2012-12-06 | Metaio Gmbh | Verfahren zur Darstellung von virtueller Information in einer realen Umgebung |
US8773465B2 (en) * | 2009-09-11 | 2014-07-08 | Trimble Navigation Limited | Methods and apparatus for providing navigational information associated with locations of objects |
US20110214082A1 (en) * | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Projection triggering through an external marker in an augmented reality eyepiece |
US20120249797A1 (en) | 2010-02-28 | 2012-10-04 | Osterhout Group, Inc. | Head-worn adaptive display |
WO2011107423A1 (en) | 2010-03-01 | 2011-09-09 | Metaio Gmbh | Method of displaying virtual information in a view of a real environment |
KR101572892B1 (ko) * | 2010-05-06 | 2015-11-30 | 엘지전자 주식회사 | 이동 단말기 및 이것의 영상 디스플레이 방법 |
JP5622510B2 (ja) | 2010-10-01 | 2014-11-12 | オリンパス株式会社 | 画像生成システム、プログラム及び情報記憶媒体 |
US9292973B2 (en) * | 2010-11-08 | 2016-03-22 | Microsoft Technology Licensing, Llc | Automatic variable virtual focus for augmented reality displays |
US9286721B2 (en) | 2010-11-08 | 2016-03-15 | Sony Corporation | Augmented reality system for product identification and promotion |
US8576276B2 (en) * | 2010-11-18 | 2013-11-05 | Microsoft Corporation | Head-mounted display device which provides surround video |
EP3654146A1 (en) * | 2011-03-29 | 2020-05-20 | QUALCOMM Incorporated | Anchoring virtual images to real world surfaces in augmented reality systems |
JP5675470B2 (ja) | 2011-04-01 | 2015-02-25 | オリンパス株式会社 | 画像生成システム、プログラム及び情報記憶媒体 |
US8332424B2 (en) * | 2011-05-13 | 2012-12-11 | Google Inc. | Method and apparatus for enabling virtual tags |
US8629815B2 (en) | 2011-08-09 | 2014-01-14 | Google Inc. | Laser alignment of binocular head mounted display |
US9153195B2 (en) * | 2011-08-17 | 2015-10-06 | Microsoft Technology Licensing, Llc | Providing contextual personal information by a mixed reality device |
US9285592B2 (en) | 2011-08-18 | 2016-03-15 | Google Inc. | Wearable device with input and output structures |
US20130083008A1 (en) | 2011-09-30 | 2013-04-04 | Kevin A. Geisner | Enriched experience using personal a/v system |
US9268406B2 (en) | 2011-09-30 | 2016-02-23 | Microsoft Technology Licensing, Llc | Virtual spectator experience with a personal audio/visual apparatus |
US9497501B2 (en) * | 2011-12-06 | 2016-11-15 | Microsoft Technology Licensing, Llc | Augmented reality virtual monitor |
US8635021B2 (en) * | 2012-05-04 | 2014-01-21 | Google Inc. | Indicators for off-screen content |
-
2013
- 2013-06-18 US US13/921,053 patent/US10139623B2/en active Active
-
2014
- 2014-06-17 MX MX2015017875A patent/MX371269B/es active IP Right Grant
- 2014-06-17 EP EP19165611.5A patent/EP3521981A1/en not_active Withdrawn
- 2014-06-17 RU RU2015154279A patent/RU2670784C9/ru active
- 2014-06-17 CA CA2913650A patent/CA2913650C/en active Active
- 2014-06-17 EP EP14737446.6A patent/EP3011418B1/en active Active
- 2014-06-17 JP JP2016521497A patent/JP6391685B2/ja active Active
- 2014-06-17 WO PCT/US2014/042647 patent/WO2014204905A1/en active Application Filing
- 2014-06-17 KR KR1020167001401A patent/KR102289389B1/ko active IP Right Grant
- 2014-06-17 CN CN201480035022.XA patent/CN105453011B/zh active Active
- 2014-06-17 AU AU2014281726A patent/AU2014281726B2/en active Active
- 2014-06-17 BR BR112015031234-9A patent/BR112015031234B1/pt active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
EP3521981A1 (en) | 2019-08-07 |
US10139623B2 (en) | 2018-11-27 |
KR102289389B1 (ko) | 2021-08-11 |
JP2016533565A (ja) | 2016-10-27 |
KR20160021284A (ko) | 2016-02-24 |
EP3011418A1 (en) | 2016-04-27 |
BR112015031234A8 (pt) | 2020-03-24 |
CN105453011A (zh) | 2016-03-30 |
CA2913650C (en) | 2021-01-19 |
BR112015031234B1 (pt) | 2022-04-26 |
WO2014204905A1 (en) | 2014-12-24 |
MX2015017875A (es) | 2016-04-13 |
RU2670784C9 (ru) | 2018-11-23 |
BR112015031234A2 (pt) | 2017-07-25 |
CA2913650A1 (en) | 2014-12-24 |
EP3011418B1 (en) | 2019-11-06 |
MX371269B (es) | 2020-01-23 |
AU2014281726A1 (en) | 2015-12-10 |
AU2014281726B2 (en) | 2019-05-02 |
RU2015154279A (ru) | 2017-06-22 |
CN105453011B (zh) | 2019-04-30 |
US20140368532A1 (en) | 2014-12-18 |
RU2015154279A3 (ja) | 2018-05-14 |
RU2670784C2 (ru) | 2018-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6391685B2 (ja) | 仮想オブジェクトの方向付け及び可視化 | |
US9235051B2 (en) | Multi-space connected virtual data objects | |
US10132633B2 (en) | User controlled real object disappearance in a mixed reality display | |
US10955665B2 (en) | Concurrent optimal viewing of virtual objects | |
US9618747B2 (en) | Head mounted display for viewing and creating a media file including omnidirectional image data and corresponding audio data | |
US10175483B2 (en) | Hybrid world/body locked HUD on an HMD | |
US9122321B2 (en) | Collaboration environment using see through displays | |
US8963956B2 (en) | Location based skins for mixed reality displays | |
CN113168007A (zh) | 用于增强现实的系统和方法 | |
US20170053447A1 (en) | Augmented Reality | |
US20140368537A1 (en) | Shared and private holographic objects | |
US20190220090A1 (en) | Position tracking system for head-mounted displays that includes sensor integrated circuits |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170531 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180426 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180501 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180718 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180723 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180821 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6391685 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |