RU2008110056A - Система, устройство и способ для очков расширенной реальности для программирования конечным пользователем - Google Patents

Система, устройство и способ для очков расширенной реальности для программирования конечным пользователем Download PDF

Info

Publication number
RU2008110056A
RU2008110056A RU2008110056/09A RU2008110056A RU2008110056A RU 2008110056 A RU2008110056 A RU 2008110056A RU 2008110056/09 A RU2008110056/09 A RU 2008110056/09A RU 2008110056 A RU2008110056 A RU 2008110056A RU 2008110056 A RU2008110056 A RU 2008110056A
Authority
RU
Russia
Prior art keywords
glasses
user
end user
field
view
Prior art date
Application number
RU2008110056/09A
Other languages
English (en)
Inventor
ДООРН Маркус Дж. Л.М. ВАН (NL)
ДООРН Маркус Дж. Л.М. ВАН
Original Assignee
Конинклейке Филипс Электроникс Н.В. (Nl)
Конинклейке Филипс Электроникс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Электроникс Н.В. (Nl), Конинклейке Филипс Электроникс Н.В. filed Critical Конинклейке Филипс Электроникс Н.В. (Nl)
Publication of RU2008110056A publication Critical patent/RU2008110056A/ru

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

1. Устройство (131, 140, 150) для программирования конечным пользователем интеллектуальной окружающей среды с включением в нее по меньшей мере одного программируемого компонента, содержащее ! пару очков (131) расширенной реальности (AR), которые имеют просматриваемое поле (132) зрения для визуализации в нем для конечного пользователя при ношении им очков AR по меньшей мере одного программируемого компонента, ближайшего к соответствующему объекту реального мира, видимому пользователем в просматриваемом поле зрения; ! пользовательский программный интерфейс (600-900), который появляется в поле (132) зрения очков (131) AR конечного пользователя, носящего очки AR, чтобы конечный пользователь видел, создавал и модифицировал по меньшей мере одну программу для по меньшей мере одного программируемого компонента; и ! по меньшей мере одно пользовательское устройство (133-135, 140, 150) ввода, предназначенное для того, чтобы пользователь направлял и реагировал на пользовательский программный интерфейс (600-900), когда он появляется в поле (132) зрения. ! 2. Устройство (131, 140, 150) по п.1, в котором очки AR дополнительно обеспечивают функциональную возможность "читать" по меньшей мере один программируемый компонент по мере того, как конечный пользователь взаимодействует с интеллектуальной окружающей средой, и отображать взаимодействие конечного пользователя с интеллектуальной окружающей средой в поле зрения, как было бы видно конечному пользователю, не носящему очки (131) AR. ! 3. Устройство (131, 140, 150) по п.1, в котором пользовательский программный интерфейс (600-900) скомбинирован с с упомянутым по меньшей мере одним пользовательским устройством (133-135, 140, 150) ввода и таки

Claims (16)

1. Устройство (131, 140, 150) для программирования конечным пользователем интеллектуальной окружающей среды с включением в нее по меньшей мере одного программируемого компонента, содержащее
пару очков (131) расширенной реальности (AR), которые имеют просматриваемое поле (132) зрения для визуализации в нем для конечного пользователя при ношении им очков AR по меньшей мере одного программируемого компонента, ближайшего к соответствующему объекту реального мира, видимому пользователем в просматриваемом поле зрения;
пользовательский программный интерфейс (600-900), который появляется в поле (132) зрения очков (131) AR конечного пользователя, носящего очки AR, чтобы конечный пользователь видел, создавал и модифицировал по меньшей мере одну программу для по меньшей мере одного программируемого компонента; и
по меньшей мере одно пользовательское устройство (133-135, 140, 150) ввода, предназначенное для того, чтобы пользователь направлял и реагировал на пользовательский программный интерфейс (600-900), когда он появляется в поле (132) зрения.
2. Устройство (131, 140, 150) по п.1, в котором очки AR дополнительно обеспечивают функциональную возможность "читать" по меньшей мере один программируемый компонент по мере того, как конечный пользователь взаимодействует с интеллектуальной окружающей средой, и отображать взаимодействие конечного пользователя с интеллектуальной окружающей средой в поле зрения, как было бы видно конечному пользователю, не носящему очки (131) AR.
3. Устройство (131, 140, 150) по п.1, в котором пользовательский программный интерфейс (600-900) скомбинирован с с упомянутым по меньшей мере одним пользовательским устройством (133-135, 140, 150) ввода и таким образом обеспечивает функциональную возможность "написания", которая включает в себя каждое из следующего: создание, извлечение и модифицирование/удаление, а также именование и сохранение, по отдельности и в комбинации, в отношении любого из иконок (103), участков (200), зон (101) и ссылок (104).
4. Устройство (131, 140, 150) по п.3, в котором очки (131) AR дополнительно обеспечивают функциональную возможность "читать" по меньшей мере один программируемый компонент по мере того, как конечный пользователь взаимодействует с интеллектуальной окружающей средой, и отображать вид этого по меньшей мере одного компонента интеллектуальной окружающей среды, как его видит конечный пользователь.
5. Устройство (131, 140, 150) по п.1, в котором
пользовательский программный интерфейс содержит графический пользовательский интерфейс (600-900), представляемый в поле зрения очков (131) AR; и
пользовательское устройство ввода содержит комбинацию устройств, выбираемых из группы, состоящей из гарнитуры для речевого ввода/вывода (140); устройства с клавишами/мобильной мыши (150), включающей в себя левую клавишу (151), правую клавишу (153) и клавишу (152) меню; портативного устройства звукового ввода-вывода, включающего в себя микрофон и динамик для речевого ввода и звуковой обратной связи; колесика мыши, встроенного в очки (133-135) AR; и левой (135) и правой (134) клавиш, встроенных в очки AR.
6. Устройство (131, 140, 150) по п.2, в котором пользовательский программный интерфейс скомбинирован с упомянутым по меньшей мере одним пользовательским устройством ввода и таким образом обеспечивает функциональную возможность "написания", которая включает в себя каждое из следующего: создание, извлечение и модифицирование/удаление, а также именование и сохранение, по отдельности и в комбинации, в отношении любого из иконок (103), участков (200), зон (101) и ссылок (104).
7. Устройство (131, 140, 150) по п.2, дополнительно содержащее:
средство для предоставления информации относительно положения и ориентации конечного пользователя, носящего очки AR, для определения сцены, рассматриваемой пользователем, носящим очки (131) AR; и
средство для получения информации о положении компонентов для визуализации по меньшей мере соответствующего объекта реального мира, ближайшего к по меньшей мере одному компоненту в поле (132) зрения.
8. Устройство (131, 140, 150) по п.7, в котором
средством для предоставления информации относительно положения и ориентации конечного пользователя является камера, вмонтированная в очки (131) AR; и
средство для получения информации о положении компонента выбирается из группы, состоящей из средства для извлечения информации о положении из базы данных положений компонентов и средства для получения информации о положении от сети сенсоров, развернутой для обнаружения положений компонентов.
9. Устройство (131, 140, 150) по п.8, в котором пользовательский программный интерфейс скомбинирован с упомянутым по меньшей мере одним пользовательским устройством ввода и таким образом обеспечивает функциональную возможность "написания", которая включает в себя каждое из следующего: создание, извлечение и модифицирование/удаление, а также именования и сохранение, по отдельности и в комбинации, в отношении любого из иконок (103), участков (200), зон (101) и ссылок (104).
10. Устройство (131, 140, 150) по п.9, в котором:
пользовательский программный интерфейс содержит графический пользовательский интерфейс (600-900), представляемый в поле зрения очков (131) AR; и
упомянутое пользовательское устройство ввода является комбинацией устройств, выбираемых из группы, состоящей из гарнитуры для речевого ввода/вывода (140); устройства с клавишами/мобильной мыши (150), включающей в себя левую клавишу (151), правую клавишу (153) и клавишу (152) меню; портативного устройства звукового ввода-вывода, включающего в себя микрофон и динамик для речевого ввода и звуковой обратной связи; колесика (133-135) мыши, встроенное в очки (131) AR; и левой (135) и правой (134) клавиш, включенные в очки AR.
11. Устройство по любому из предшествующих пунктов, дополнительно содержащее
машину (300) задания последовательности участков для "чтения" программируемых компонентов интеллектуальной окружающей среды, инициируемых конечным пользователем при ношении очков (131, 402) AR, при этом инициированные компоненты визуализируются в поле зрения очков (131, 402) AR, которые носит конечный пользователь;
средство (502) создания, предназначенное для сбора ввода от конечного пользователя для того, чтобы конечный пользователь «писал» программируемые компоненты и ассоциированные программы интеллектуальной окружающей среды, используя пользовательский интерфейс, отображаемый в поле зрения очков (131, 402) AR.
12. Способ программирования конечным пользователем в интеллектуальной окружающей среде этой интеллектуальной окружающей среды с включением в нее по меньшей мере одного программируемого компонента, содержащий этапы, на которых
предоставляют пару очков (131) расширенной реальности (AR), которые имеют просматриваемое поле зрения (132);
когда конечный пользователь носит очки AR в интеллектуальной окружающей среде, визуализируют в поле зрения по меньшей мере один программируемый компонент, ближайший к соответствующему объекту реального мира, видимому в просматриваемом поле зрения;
отображают программный интерфейс (600-900) конечного пользователя в поле (132) зрения, который позволяет конечному пользователю "читать" и "писать" по меньшей мере одну программу для по меньшей мере одного программируемого компонента, который имеет режим "отмены"/"отладки"; и
предоставляют по меньшей мере одно пользовательское устройство (133-135, 140, 150) ввода для того, чтобы конечный пользователь направлял и реагировал на отображаемый программный интерфейс (600-900) конечного пользователя, когда он появляется в поле (132) зрения, для программирования по меньшей мере одного программируемого компонента.
13. Способ по п.12, дополнительно содержащий этапы, на которых
предоставляют информацию относительно положения и ориентации конечного пользователя, носящего очки AR;
определяют сцену, которую рассматривает конечный пользователь, носящий очки (131) AR, на основе предоставленной информации о положении и ориентации конечного пользователя;
получают информацию о положении программируемых компонентов и
визуализируют по меньшей мере один программируемый компонент в поле (132) зрения, ближайший к соответствующему объекту реального мира, видимому в просматриваемом поле (132) зрения.
14. Способ по п.13, в котором:
этап, на котором предоставляют информацию относительно положения и ориентации конечного пользователя, дополнительно содержит этап, на котором предоставляют камеру, вмонтированную в очки (131) AR; и
этап, на котором получают информацию о положении компонента, дополнительно содержит этап, на котором получают информацию от источника, выбираемого из группы, состоящей из базы данных положений и сети сенсоров, развернутой для обнаружения положений компонентов.
15. Способ по п.14, дополнительно содержащий этап, на котором комбинируют этап, на котором отображают интерфейс конечного пользователя, и зал, на котором предоставляют по меньшей мере одно пользовательское устройство ввода, в этап, на котором «пишут» программу для программируемого компонента, при этом этап "написания" содержит подэтапы, на которых выполняют создание, извлечение и модифицирование/удаление, а также именование и сохранение, по отдельности и в комбинации, в отношении любого из иконок (103), участков (200), зон (101) и ссылок (104).
16. Способ по п.15, в котором:
этап, на котором отображают программный интерфейс конечного пользователя, дополнительно содержит этап, на котором отображают графический пользовательский интерфейс (600-900), представляемый в поле зрения очков (131) AR; и
этап, на котором предоставляют пользовательское устройство ввода, дополнительно содержит этап, на котором предоставляют комбинацию устройств, выбираемых из группы, состоящей из гарнитуры для речевого ввода/вывода (140); устройства с клавишами/мобильной мыши (150), включающей в себя левую клавишу (151), правую клавишу (153) и клавишу (152) меню; портативного устройства звукового ввода-вывода, включающего в себя микрофон и динамик для речевого ввода и звуковой обратной связи; колесико (133-135) мыши, встроенного в очки (131) AR; и левой (135) и правой (134) клавиш, встроенных в очки AR.
RU2008110056/09A 2005-08-15 2006-08-15 Система, устройство и способ для очков расширенной реальности для программирования конечным пользователем RU2008110056A (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US70832205P 2005-08-15 2005-08-15
US60/708,322 2005-08-15

Publications (1)

Publication Number Publication Date
RU2008110056A true RU2008110056A (ru) 2009-09-27

Family

ID=37575270

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2008110056/09A RU2008110056A (ru) 2005-08-15 2006-08-15 Система, устройство и способ для очков расширенной реальности для программирования конечным пользователем

Country Status (6)

Country Link
US (1) US20100164990A1 (ru)
EP (1) EP1922614A2 (ru)
JP (1) JP2009505268A (ru)
CN (1) CN101243392A (ru)
RU (1) RU2008110056A (ru)
WO (1) WO2007020591A2 (ru)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2533628C2 (ru) * 2010-03-17 2014-11-20 Сони Корпорейшн Устройство обработки информации, способ обработки информации и программа
RU2660631C1 (ru) * 2017-04-26 2018-07-06 Общество с ограниченной ответственностью "ТрансИнжКом" Способ и система для формирования изображений совмещенной реальности

Families Citing this family (169)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070257881A1 (en) * 2006-05-08 2007-11-08 Marja-Leena Nurmela Music player and method
JP5119636B2 (ja) * 2006-09-27 2013-01-16 ソニー株式会社 表示装置、表示方法
US8390534B2 (en) * 2007-03-08 2013-03-05 Siemens Aktiengesellschaft Method and device for generating tracking configurations for augmented reality applications
US8855719B2 (en) * 2009-05-08 2014-10-07 Kopin Corporation Wireless hands-free computing headset with detachable accessories controllable by motion, body gesture and/or vocal commands
US9886231B2 (en) 2008-03-28 2018-02-06 Kopin Corporation Head worn wireless computer having high-resolution display suitable for use as a mobile internet device
US20090327883A1 (en) * 2008-06-27 2009-12-31 Microsoft Corporation Dynamically adapting visualizations
US8427424B2 (en) 2008-09-30 2013-04-23 Microsoft Corporation Using physical objects in conjunction with an interactive surface
CN102460349A (zh) * 2009-05-08 2012-05-16 寇平公司 使用运动和语音命令对主机应用进行远程控制
US20100325154A1 (en) * 2009-06-22 2010-12-23 Nokia Corporation Method and apparatus for a virtual image world
JP5263049B2 (ja) * 2009-07-21 2013-08-14 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
JP2011039647A (ja) * 2009-08-07 2011-02-24 Sony Corp 情報提供装置および方法、端末装置および情報処理方法、並びにプログラム
JP4679661B1 (ja) * 2009-12-15 2011-04-27 株式会社東芝 情報提示装置、情報提示方法及びプログラム
JP5728159B2 (ja) * 2010-02-02 2015-06-03 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
US8730309B2 (en) 2010-02-23 2014-05-20 Microsoft Corporation Projectors and depth cameras for deviceless augmented reality and interaction
US9341843B2 (en) 2010-02-28 2016-05-17 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a small scale image source
US8467133B2 (en) 2010-02-28 2013-06-18 Osterhout Group, Inc. See-through display with an optical assembly including a wedge-shaped illumination system
US8488246B2 (en) 2010-02-28 2013-07-16 Osterhout Group, Inc. See-through near-eye display glasses including a curved polarizing film in the image source, a partially reflective, partially transmitting optical element and an optically flat film
US9229227B2 (en) 2010-02-28 2016-01-05 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a light transmissive wedge shaped illumination system
US9129295B2 (en) 2010-02-28 2015-09-08 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a fast response photochromic film system for quick transition from dark to clear
US9366862B2 (en) 2010-02-28 2016-06-14 Microsoft Technology Licensing, Llc System and method for delivering content to a group of see-through near eye display eyepieces
JP2013521576A (ja) 2010-02-28 2013-06-10 オスターハウト グループ インコーポレイテッド 対話式ヘッド取付け型アイピース上での地域広告コンテンツ
US9285589B2 (en) 2010-02-28 2016-03-15 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered control of AR eyepiece applications
US8477425B2 (en) 2010-02-28 2013-07-02 Osterhout Group, Inc. See-through near-eye display glasses including a partially reflective, partially transmitting optical element
US9097890B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc Grating in a light transmissive illumination system for see-through near-eye display glasses
US9097891B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc See-through near-eye display glasses including an auto-brightness control for the display brightness based on the brightness in the environment
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US9134534B2 (en) 2010-02-28 2015-09-15 Microsoft Technology Licensing, Llc See-through near-eye display glasses including a modular image source
US9091851B2 (en) 2010-02-28 2015-07-28 Microsoft Technology Licensing, Llc Light control in head mounted displays
US8964298B2 (en) 2010-02-28 2015-02-24 Microsoft Corporation Video display modification based on sensor input for a see-through near-to-eye display
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US9759917B2 (en) 2010-02-28 2017-09-12 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered AR eyepiece interface to external devices
US9128281B2 (en) 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US9223134B2 (en) 2010-02-28 2015-12-29 Microsoft Technology Licensing, Llc Optical imperfections in a light transmissive illumination system for see-through near-eye display glasses
US8472120B2 (en) 2010-02-28 2013-06-25 Osterhout Group, Inc. See-through near-eye display glasses with a small scale image source
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US8482859B2 (en) 2010-02-28 2013-07-09 Osterhout Group, Inc. See-through near-eye display glasses wherein image light is transmitted to and reflected from an optically flat film
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US9182596B2 (en) 2010-02-28 2015-11-10 Microsoft Technology Licensing, Llc See-through near-eye display glasses with the optical assembly including absorptive polarizers or anti-reflective coatings to reduce stray light
US10096161B2 (en) 2010-06-15 2018-10-09 Live Nation Entertainment, Inc. Generating augmented reality images using sensor and location data
US9781170B2 (en) 2010-06-15 2017-10-03 Live Nation Entertainment, Inc. Establishing communication links using routing protocols
AU2011268420B2 (en) 2010-06-15 2014-05-01 Ticketmaster, Llc Methods and systems for computer aided event and venue setup and modeling and interactive maps
US9573064B2 (en) * 2010-06-24 2017-02-21 Microsoft Technology Licensing, Llc Virtual and location-based multiplayer gaming
US20120256917A1 (en) * 2010-06-25 2012-10-11 Lieberman Stevan H Augmented Reality System
US20120105440A1 (en) * 2010-06-25 2012-05-03 Lieberman Stevan H Augmented Reality System
KR101325757B1 (ko) * 2010-07-09 2013-11-08 주식회사 팬택 가상 마커 생성을 이용한 증강 현실 제공 장치 및 방법
KR101285391B1 (ko) * 2010-07-28 2013-07-10 주식회사 팬택 음향 객체 정보 융합 장치 및 방법
US9122307B2 (en) 2010-09-20 2015-09-01 Kopin Corporation Advanced remote control of host application using motion and voice commands
US10013976B2 (en) 2010-09-20 2018-07-03 Kopin Corporation Context sensitive overlays in voice controlled headset computer displays
US9122053B2 (en) 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US9111326B1 (en) 2010-12-21 2015-08-18 Rawles Llc Designation of zones of interest within an augmented reality environment
US9134593B1 (en) 2010-12-23 2015-09-15 Amazon Technologies, Inc. Generation and modulation of non-visible structured light for augmented reality projection system
US8905551B1 (en) 2010-12-23 2014-12-09 Rawles Llc Unpowered augmented reality projection accessory display device
US8845107B1 (en) 2010-12-23 2014-09-30 Rawles Llc Characterization of a scene with structured light
US8845110B1 (en) 2010-12-23 2014-09-30 Rawles Llc Powered augmented reality projection accessory display device
US9721386B1 (en) * 2010-12-27 2017-08-01 Amazon Technologies, Inc. Integrated augmented reality environment
US9508194B1 (en) 2010-12-30 2016-11-29 Amazon Technologies, Inc. Utilizing content output devices in an augmented reality environment
US9607315B1 (en) 2010-12-30 2017-03-28 Amazon Technologies, Inc. Complementing operation of display devices in an augmented reality environment
JP5742263B2 (ja) * 2011-02-04 2015-07-01 セイコーエプソン株式会社 虚像表示装置
US9329469B2 (en) 2011-02-17 2016-05-03 Microsoft Technology Licensing, Llc Providing an interactive experience using a 3D depth camera and a 3D projector
US9480907B2 (en) 2011-03-02 2016-11-01 Microsoft Technology Licensing, Llc Immersive display with peripheral illusions
US10972680B2 (en) * 2011-03-10 2021-04-06 Microsoft Technology Licensing, Llc Theme-based augmentation of photorepresentative view
US10114451B2 (en) * 2011-03-22 2018-10-30 Fmr Llc Augmented reality in a virtual tour through a financial portfolio
JP5960796B2 (ja) 2011-03-29 2016-08-02 クアルコム，インコーポレイテッド ローカルマルチユーザ共同作業のためのモジュール式のモバイル接続ピコプロジェクタ
JP5741160B2 (ja) * 2011-04-08 2015-07-01 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
JP6316186B2 (ja) * 2011-05-06 2018-04-25 マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． 広範囲同時遠隔ディジタル提示世界
US10627860B2 (en) 2011-05-10 2020-04-21 Kopin Corporation Headset computer that uses motion and voice commands to control information display and remote devices
US8749573B2 (en) 2011-05-26 2014-06-10 Nokia Corporation Method and apparatus for providing input through an apparatus configured to provide for display of an image
CN102810099B (zh) * 2011-05-31 2018-04-27 中兴通讯股份有限公司 增强现实视图的存储方法和装置
US9597587B2 (en) * 2011-06-08 2017-03-21 Microsoft Technology Licensing, Llc Locational node device
US9489773B2 (en) 2011-06-21 2016-11-08 Telefonaktiebolaget Lm Ericsson (Publ) Caching support for visual search and augmented reality in mobile networks
US9727132B2 (en) * 2011-07-01 2017-08-08 Microsoft Technology Licensing, Llc Multi-visor: managing applications in augmented reality environments
US9155964B2 (en) 2011-09-14 2015-10-13 Steelseries Aps Apparatus for adapting virtual gaming with real world information
US9118782B1 (en) 2011-09-19 2015-08-25 Amazon Technologies, Inc. Optical interference mitigation
US8941560B2 (en) 2011-09-21 2015-01-27 Google Inc. Wearable computer with superimposed controls and instructions for external device
JP2015504616A (ja) * 2011-09-26 2015-02-12 マイクロソフト コーポレーション 透過近眼式ディスプレイのセンサ入力に基づく映像表示修正
US9286711B2 (en) 2011-09-30 2016-03-15 Microsoft Technology Licensing, Llc Representing a location at a previous time period using an augmented reality display
US9606992B2 (en) 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
US9268406B2 (en) 2011-09-30 2016-02-23 Microsoft Technology Licensing, Llc Virtual spectator experience with a personal audio/visual apparatus
US8990682B1 (en) 2011-10-05 2015-03-24 Google Inc. Methods and devices for rendering interactions between virtual and physical objects on a substantially transparent display
US9081177B2 (en) 2011-10-07 2015-07-14 Google Inc. Wearable computer with nearby object response
US9547406B1 (en) 2011-10-31 2017-01-17 Google Inc. Velocity-based triggering
WO2013101438A1 (en) 2011-12-29 2013-07-04 Kopin Corporation Wireless hands-free computing head mounted video eyewear for local/remote diagnosis and repair
US9525964B2 (en) * 2012-02-02 2016-12-20 Nokia Technologies Oy Methods, apparatuses, and computer-readable storage media for providing interactive navigational assistance using movable guidance markers
US20130257906A1 (en) * 2012-03-31 2013-10-03 Feng Tang Generating publication based on augmented reality interaction by user at physical site
CN103472909B (zh) * 2012-04-10 2017-04-12 微软技术许可有限责任公司 用于头戴式、增强现实显示器的逼真遮挡
WO2013163293A1 (en) 2012-04-25 2013-10-31 Kopin Corporation Instant translation system
US9442290B2 (en) 2012-05-10 2016-09-13 Kopin Corporation Headset computer operation using vehicle sensor feedback for remote control vehicle
US9210413B2 (en) * 2012-05-15 2015-12-08 Imagine Mobile Augmented Reality Ltd System worn by a moving user for fully augmenting reality by anchoring virtual objects
US10019221B2 (en) 2012-05-16 2018-07-10 Nokia Technologies Oy Method and apparatus for concurrently presenting different representations of the same information on multiple displays
JP5580855B2 (ja) * 2012-06-12 2014-08-27 株式会社ソニー・コンピュータエンタテインメント 障害物回避装置および障害物回避方法
US10176635B2 (en) 2012-06-28 2019-01-08 Microsoft Technology Licensing, Llc Saving augmented realities
US10713846B2 (en) 2012-10-05 2020-07-14 Elwha Llc Systems and methods for sharing augmentation data
US9141188B2 (en) 2012-10-05 2015-09-22 Elwha Llc Presenting an augmented view in response to acquisition of data inferring user activity
US10180715B2 (en) 2012-10-05 2019-01-15 Elwha Llc Correlating user reaction with at least an aspect associated with an augmentation of an augmented view
US9077647B2 (en) 2012-10-05 2015-07-07 Elwha Llc Correlating user reactions with augmentations displayed through augmented views
US9111383B2 (en) * 2012-10-05 2015-08-18 Elwha Llc Systems and methods for obtaining and using augmentation data and for sharing usage data
US10269179B2 (en) 2012-10-05 2019-04-23 Elwha Llc Displaying second augmentations that are based on registered first augmentations
US20140168264A1 (en) 2012-12-19 2014-06-19 Lockheed Martin Corporation System, method and computer program product for real-time alignment of an augmented reality device
CN103902202B (zh) * 2012-12-24 2017-08-29 联想(北京)有限公司 一种信息处理方法及电子设备
US9180053B2 (en) 2013-01-29 2015-11-10 Xerox Corporation Central vision impairment compensation
US9301085B2 (en) 2013-02-20 2016-03-29 Kopin Corporation Computer headset with detachable 4G radio
CN104007889B (zh) * 2013-02-27 2018-03-27 联想(北京)有限公司 一种反馈方法和电子设备
US10109075B2 (en) 2013-03-15 2018-10-23 Elwha Llc Temporal element restoration in augmented reality systems
US9639964B2 (en) 2013-03-15 2017-05-02 Elwha Llc Dynamically preserving scene elements in augmented reality systems
US10025486B2 (en) 2013-03-15 2018-07-17 Elwha Llc Cross-reality select, drag, and drop for augmented reality systems
US10509533B2 (en) 2013-05-14 2019-12-17 Qualcomm Incorporated Systems and methods of generating augmented reality (AR) objects
US10137361B2 (en) * 2013-06-07 2018-11-27 Sony Interactive Entertainment America Llc Systems and methods for using reduced hops to generate an augmented virtual reality scene within a head mounted system
US10262462B2 (en) * 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9092865B2 (en) 2013-08-16 2015-07-28 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Map generation for an environment based on captured images
CN103480152A (zh) * 2013-08-31 2014-01-01 中山大学 一种可遥控的摇距临境移动系统
US20150161822A1 (en) * 2013-12-11 2015-06-11 Adobe Systems Incorporated Location-Specific Digital Artwork Using Augmented Reality
CN103793473A (zh) * 2013-12-17 2014-05-14 微软公司 保存增强现实
US9323323B2 (en) * 2014-01-06 2016-04-26 Playground Energy Ltd Augmented reality system for playground equipment incorporating transforming avatars
CN103927350A (zh) * 2014-04-04 2014-07-16 百度在线网络技术（北京）有限公司 基于智能眼镜的提示方法和装置
US9723109B2 (en) * 2014-05-28 2017-08-01 Alexander Hertel Platform for constructing and consuming realm and object feature clouds
US10133356B2 (en) 2014-06-11 2018-11-20 Atheer, Inc. Method and apparatus for controlling a system via a sensor
US9798299B2 (en) 2014-06-20 2017-10-24 International Business Machines Corporation Preventing substrate penetrating devices from damaging obscured objects
WO2016001909A1 (en) * 2014-07-03 2016-01-07 Imagine Mobile Augmented Reality Ltd Audiovisual surround augmented reality (asar)
CN106537227B (zh) * 2014-07-31 2019-09-27 精工爱普生株式会社 显示装置、用于显示装置的控制方法以及程序
US9892560B2 (en) 2014-09-11 2018-02-13 Nant Holdings Ip, Llc Marker-based augmented reality authoring tools
US9366883B2 (en) 2014-11-13 2016-06-14 International Business Machines Corporation Using google glass to project a red overlay that enhances night vision
US9916002B2 (en) * 2014-11-16 2018-03-13 Eonite Perception Inc. Social applications for augmented reality technologies
US10043319B2 (en) 2014-11-16 2018-08-07 Eonite Perception Inc. Optimizing head mounted displays for augmented reality
CN105607253B (zh) 2014-11-17 2020-05-12 精工爱普生株式会社 头部佩戴型显示装置以及控制方法、显示系统
JP6582403B2 (ja) * 2014-12-10 2019-10-02 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム
CN104598037B (zh) 2015-03-02 2018-08-31 联想(北京)有限公司 信息处理方法及装置
US9520002B1 (en) 2015-06-24 2016-12-13 Microsoft Technology Licensing, Llc Virtual place-located anchor
US10147211B2 (en) 2015-07-15 2018-12-04 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US10242474B2 (en) 2015-07-15 2019-03-26 Fyusion, Inc. Artificially rendering images using viewpoint interpolation and extrapolation
US11095869B2 (en) 2015-09-22 2021-08-17 Fyusion, Inc. System and method for generating combined embedded multi-view interactive digital media representations
US10222932B2 (en) 2015-07-15 2019-03-05 Fyusion, Inc. Virtual reality environment based manipulation of multilayered multi-view interactive digital media representations
US11006095B2 (en) 2015-07-15 2021-05-11 Fyusion, Inc. Drone based capture of a multi-view interactive digital media
US10007352B2 (en) 2015-08-21 2018-06-26 Microsoft Technology Licensing, Llc Holographic display system with undo functionality
US10186086B2 (en) 2015-09-02 2019-01-22 Microsoft Technology Licensing, Llc Augmented reality control of computing device
US10564794B2 (en) * 2015-09-15 2020-02-18 Xerox Corporation Method and system for document management considering location, time and social context
US11783864B2 (en) 2015-09-22 2023-10-10 Fyusion, Inc. Integration of audio into a multi-view interactive digital media representation
CN106648038A (zh) * 2015-10-30 2017-05-10 北京锤子数码科技有限公司 在虚拟现实中显示交互对象的方法和装置
US10768772B2 (en) * 2015-11-19 2020-09-08 Microsoft Technology Licensing, Llc Context-aware recommendations of relevant presentation content displayed in mixed environments
US9855664B2 (en) * 2015-11-25 2018-01-02 Denso Wave Incorporated Robot safety system
US10304247B2 (en) 2015-12-09 2019-05-28 Microsoft Technology Licensing, Llc Third party holographic portal
US10163198B2 (en) 2016-02-26 2018-12-25 Samsung Electronics Co., Ltd. Portable image device for simulating interaction with electronic device
CN105867617B (zh) 2016-03-25 2018-12-25 京东方科技集团股份有限公司 增强现实设备、系统、图像处理方法及装置
US10452821B2 (en) * 2016-03-30 2019-10-22 International Business Machines Corporation Tiered code obfuscation in a development environment
CN105912121A (zh) * 2016-04-14 2016-08-31 北京越想象国际科贸发展有限公司 一种增强现实的方法及系统
US11017712B2 (en) 2016-08-12 2021-05-25 Intel Corporation Optimized display image rendering
US10095461B2 (en) * 2016-09-23 2018-10-09 Intel IP Corporation Outside-facing display for head-mounted displays
US10481479B2 (en) * 2016-09-26 2019-11-19 Ronald S. Maynard Immersive optical projection system
US11202017B2 (en) 2016-10-06 2021-12-14 Fyusion, Inc. Live style transfer on a mobile device
CN106683194A (zh) * 2016-12-13 2017-05-17 安徽乐年健康养老产业有限公司 一种增强现实医疗通讯系统
US20180182375A1 (en) * 2016-12-22 2018-06-28 Essential Products, Inc. Method, system, and apparatus for voice and video digital travel companion
US10437879B2 (en) 2017-01-18 2019-10-08 Fyusion, Inc. Visual search using multi-view interactive digital media representations
CN106875493B (zh) * 2017-02-24 2018-03-09 广东电网有限责任公司教育培训评价中心 Ar眼镜中虚拟目标物的叠加方法
CN106908951A (zh) 2017-02-27 2017-06-30 阿里巴巴集团控股有限公司 虚拟现实头戴设备
US10313651B2 (en) 2017-05-22 2019-06-04 Fyusion, Inc. Snapshots at predefined intervals or angles
US11069147B2 (en) * 2017-06-26 2021-07-20 Fyusion, Inc. Modification of multi-view interactive digital media representation
GB2566734A (en) * 2017-09-25 2019-03-27 Red Frog Digital Ltd Wearable device, system and method
US10592747B2 (en) 2018-04-26 2020-03-17 Fyusion, Inc. Method and apparatus for 3-D auto tagging
US10964110B2 (en) * 2018-05-07 2021-03-30 Vmware, Inc. Managed actions using augmented reality
US10902684B2 (en) 2018-05-18 2021-01-26 Microsoft Technology Licensing, Llc Multiple users dynamically editing a scene in a three-dimensional immersive environment
WO2019235958A1 (ru) * 2018-06-08 2019-12-12 Oganesyan Maxim Samvelovich Способ предоставления услуги виртуального посещения мероприятия
US11049608B2 (en) 2018-07-03 2021-06-29 H&R Accounts, Inc. 3D augmented reality document interaction
US10860120B2 (en) 2018-12-04 2020-12-08 International Business Machines Corporation Method and system to automatically map physical objects into input devices in real time
US11150788B2 (en) 2019-03-14 2021-10-19 Ebay Inc. Augmented or virtual reality (AR/VR) companion device techniques
US10890992B2 (en) 2019-03-14 2021-01-12 Ebay Inc. Synchronizing augmented or virtual reality (AR/VR) applications with companion device interfaces
US11977725B2 (en) * 2019-08-07 2024-05-07 Human Mode, LLC Authoring system for interactive virtual reality environments
CN114585423A (zh) 2019-08-22 2022-06-03 Nantg移动有限责任公司 虚拟和现实世界的内容创建、装置、系统和方法
US11398216B2 (en) 2020-03-11 2022-07-26 Nuance Communication, Inc. Ambient cooperative intelligence system and method
CN112712597A (zh) * 2020-12-21 2021-04-27 上海影创信息科技有限公司 目的地相同用户的轨迹提示方法和系统
CN112397070B (zh) * 2021-01-19 2021-04-30 北京佳珥医学科技有限公司 一种滑动翻译ar眼镜

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5334991A (en) * 1992-05-15 1994-08-02 Reflection Technology Dual image head-mounted display
US6847336B1 (en) * 1996-10-02 2005-01-25 Jerome H. Lemelson Selectively controllable heads-up display system
US6972734B1 (en) * 1999-06-11 2005-12-06 Canon Kabushiki Kaisha Mixed reality apparatus and mixed reality presentation method
US6603491B2 (en) * 2000-05-26 2003-08-05 Jerome H. Lemelson System and methods for controlling automatic scrolling of information on a display or screen
US6756998B1 (en) * 2000-10-19 2004-06-29 Destiny Networks, Inc. User interface and method for home automation system
DE10103922A1 (de) * 2001-01-30 2002-08-01 Physoptics Opto Electronic Gmb Interaktives Datensicht- und Bediensystem
US7693702B1 (en) * 2002-11-01 2010-04-06 Lockheed Martin Corporation Visualizing space systems modeling using augmented reality
US7047092B2 (en) * 2003-04-08 2006-05-16 Coraccess Systems Home automation contextual user interface

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2533628C2 (ru) * 2010-03-17 2014-11-20 Сони Корпорейшн Устройство обработки информации, способ обработки информации и программа
RU2660631C1 (ru) * 2017-04-26 2018-07-06 Общество с ограниченной ответственностью "ТрансИнжКом" Способ и система для формирования изображений совмещенной реальности

Also Published As

Publication number Publication date
CN101243392A (zh) 2008-08-13
WO2007020591A2 (en) 2007-02-22
US20100164990A1 (en) 2010-07-01
WO2007020591A3 (en) 2007-08-09
EP1922614A2 (en) 2008-05-21
JP2009505268A (ja) 2009-02-05

Similar Documents

Publication Publication Date Title
RU2008110056A (ru) Система, устройство и способ для очков расширенной реальности для программирования конечным пользователем
JP6967043B2 (ja) ３次元コンテンツ内の場所に基づく仮想要素モダリティ
JP2023113596A (ja) 改善された光学及び知覚デジタルアイウエア
CN102981616B (zh) 增强现实中对象的识别方法及系统和计算机
JP5898378B2 (ja) 情報処理装置およびアプリケーション実行方法
EP3136055A1 (en) Communication system, control method, and storage medium
JP7468588B2 (ja) 情報処理装置、情報処理システム、および情報処理方法
US20210375052A1 (en) Information processor, information processing method, and program
WO2015102854A1 (en) Assigning virtual user interface to physical object
US20220121343A1 (en) Hand presence over keyboard inclusiveness
US11521359B2 (en) Extended reality recorder
CN109407918A (zh) 增强现实内容多级交互方式的实现方法
CN107924234B (zh) 透视眼镜的辅助物品选择
CN104598037A (zh) 信息处理方法及装置
CN106162303A (zh) 信息处理方法、信息处理装置及用户设备
Shang et al. Mobile phone augmented reality postcard
US20220301264A1 (en) Devices, methods, and graphical user interfaces for maps
US11676355B2 (en) Method and system for merging distant spaces
CN108027694A (zh) 程序、记录介质、内容提供装置以及控制方法
Antoniac Augmented reality based user interface for mobile applications and services
JP2018142959A (ja) コンテンツ表示装置、眼鏡、コンテンツ処理システム及びコンテンツ表示プログラム
CN113362434A (zh) 一种图像处理方法、装置、电子设备及存储介质
KR102443049B1 (ko) 전자 장치 및 그 동작 방법
JP2015087419A (ja) 映像コンテンツ表示装置、眼鏡、映像コンテンツ処理システム及び映像コンテンツ表示プログラム
US11809618B2 (en) Controlling a user selection queue

Legal Events

Date Code Title Description
FA92 Acknowledgement of application withdrawn (lack of supplementary materials submitted)

Effective date: 20101214