RU2627131C2 - Отображение теней с помощью прозрачного устройства отображения - Google Patents

Отображение теней с помощью прозрачного устройства отображения Download PDF

Info

Publication number
RU2627131C2
RU2627131C2 RU2014124160A RU2014124160A RU2627131C2 RU 2627131 C2 RU2627131 C2 RU 2627131C2 RU 2014124160 A RU2014124160 A RU 2014124160A RU 2014124160 A RU2014124160 A RU 2014124160A RU 2627131 C2 RU2627131 C2 RU 2627131C2
Authority
RU
Russia
Prior art keywords
image
real world
brightness
shadow
background scene
Prior art date
Application number
RU2014124160A
Other languages
English (en)
Other versions
RU2014124160A (ru
Inventor
Мэтью ЛЭМБ
Original Assignee
МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи filed Critical МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Publication of RU2014124160A publication Critical patent/RU2014124160A/ru
Application granted granted Critical
Publication of RU2627131C2 publication Critical patent/RU2627131C2/ru

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/50—Lighting effects
    • G06T15/60—Shadow generation
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Software Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)
  • Instrument Panels (AREA)
  • Image Processing (AREA)

Abstract

Изобретение относится к отображению теней. Техническим результатом является повышение точности отображения фоновой сцены реального мира поверх и в совмещении с фоновой сценой реального мира. Способ содержит: отображение на прозрачном экране отображения изображения объекта; и при отображении изображения объекта отображение изображения тени, отбрасываемой объектом на фоновую сцену реального мира, посредством получения, посредством камеры, изображения фоновой сцены реального мира, которая видима через прозрачный экран отображения, определения местоположения тени на изображении фоновой сцены реального мира, обработки изображения фоновой сцены реального мира для формирования улучшенного изображения фоновой сцены реального мира посредством увеличения яркости фоновой сцены реального мира в улучшенном изображении фоновой сцены реального мира в области рядом с тенью по сравнению с яркостью в пределах тени, и отображения, посредством прозрачного экрана отображения, улучшенного изображения фоновой сцены реального мира поверх и в совмещении с фоновой сценой реального мира. 3 н. и 16 з.п. ф-лы, 5 ил.

Description

Уровень техники
Различные технологии могут позволить пользователю испытывать действие сочетания реального и виртуального миров. Например, некоторые устройства отображения, такие как различные головные (устанавливаемые на голове) устройства отображения, могут содержать прозрачные устройства отображения, которые позволяют накладывать отображаемое изображение на фон реального мира. Тем самым изображения могут отображаться так, чтобы они казались объединенными с элементами на фоне реального мира.
Сущность изобретения
Раскрыты различные варианты осуществления, которые относятся к представлению изображений теней, отбрасываемых на фоне реального мира виртуальными объектами, отображенными в прозрачной системе отображения. Например, один раскрытый вариант осуществления обеспечивает способ функционирования устройства отображения, имеющего прозрачный экран отображения. Способ содержит этапы, на которых отображают на прозрачном экране отображения изображение объекта, и при отображении изображения объекта отображают изображение тени, отбрасываемой объектом на задний план. Изображение тени отображается посредством получения изображения заднего плана, определения местоположения тени на изображении заднего плана, воспроизведения улучшенного изображения заднего плана за счет увеличения относительной яркости в области рядом с тенью по сравнению с яркостью в пределах тени и отображения улучшенного изображения заднего плана.
Данный раздел обеспечен для представления выбора понятий в упрощенной форме, которые дополнительно описываются ниже в разделе «Подробное Описание». Данный раздел не предназначен для идентификации ключевых признаков или существенных признаков заявленного изобретения, а также не предназначен для использования, чтобы ограничивать объем заявленного изобретения. Более того, заявленное изобретение не ограничено реализациями, которые устраняют любой или все недостатки, отмеченные в любой части данного документа.
Краткое описание чертежей
Фиг. 1 показывает вариант осуществления прозрачной системы отображения, которую носит пользователь в примерной среде использования.
Фиг. 2 показывает вид в перспективе, наблюдаемый пользователем с фиг. 1, просматривающим варианты осуществления объекта и изображения тени, отбрасываемой объектом на заднем плане, в среде использования с фиг. 1.
Фиг. 3 показывает блок-схему последовательности операций, представляющую вариант осуществления способа функционирования прозрачной системы отображения.
Фиг. 4 показывает блок-схему варианта осуществления прозрачной системы отображения.
Фиг. 5 показывает вид в перспективе варианта осуществления с фиг. 1.
Подробное описание
Как упомянуто выше, прозрачные устройства отображения могут обеспечить представление отображаемого изображения на фоне реального мира, так что объекты на отображаемых изображениях могут казаться объединенными с фоном реального мира. Однако, различные аспекты такого представления изображения могут делать отображаемые объекты менее реалистичными. Например, тени, отбрасываемые объектами реального мира, могут заметно отсутствовать у объектов, отображаемых на устройстве отображения.
Формирование изображений теней виртуальных объектов на фоне реального мира может представлять различные трудности. Например, в том месте, где изображения формируются на прозрачном экране отображения через проекцию или посредством технологии встроенного излучающего устройства отображения (например, прозрачного органического светоизлучающего устройства), отображаемые изображения добавляют дополнительный свет к виду, просматриваемому пользователем. В то же время тень создается посредством удаления света из вида. Поскольку такие технологии не позволяют удалять свет из заднего плана реального мира, отображение тени, отбрасываемой виртуальным объектом на фоне реального мира, может представлять трудности.
Соответственно, раскрытые варианты осуществления направлены на формирование тени на заднем плане в прозрачном устройстве отображения путем увеличения относительной яркости бестеневых областей заднего плана, просматриваемого пользователем. Говоря вкратце, получают опорное изображение заднего плана, по возможности, глобально снижают его яркость, а затем повторно воспроизводят таким образом, чтобы сформировать улучшенное изображение заднего плана, на котором бестеневые области фонового изображения имеют большую относительную яркость, чем теневые области. Улучшенное изображение заднего плана далее отображается пользователю на фоне реального мира вместе с изображением виртуального объекта, от которого, как кажется, возникает изображение тени. Отображение улучшенного изображения заднего плана на фоне реального мира эффективно добавляет свет к требуемым бестеневым частям заднего плана реального мира, воспринимаемого пользователем. Это может создать эффект изображения тени, отбрасываемой отображаемым виртуальным объектом на объекты реального мира на заднем плане.
В некоторых вариантах осуществления увеличение яркости бестеневых областей улучшенного изображения заднего плана по сравнению с теневыми областями улучшенного изображения заднего плана может быть глобальным в такой степени, что все бестеневые области относительно увеличиваются по сравнению с теневыми областями. В других вариантах осуществления увеличение яркости может быть локальным относительно областей рядом с каждой тенью. Кроме того, для устранения эффекта добавленного света улучшенного изображения заднего плана в некоторых вариантах осуществления прозрачный экран отображения может содержать оптические средства, такие как нейтральный фильтр, для снижения количества фонового света, проходящего через прозрачный экран.
Фиг. 1 иллюстрирует среду использования для варианта осуществления прозрачного устройства 100 отображения в форме головной системы отображения. Пользователь 102, носящий прозрачное устройство 100 отображения, расположен в комнате и показан обращенным к стене 104. С целью ясности никакие физические объекты не показаны на полу 106 или на стене 104 комнаты в пределах поля зрения пользователя. Тем не менее, должно быть понятно, что прозрачное устройство 100 отображения может использоваться в практически любой среде, внутри помещения или вне помещения.
Фиг. 2, показанная из вида в перспективе, наблюдаемого пользователем 102, иллюстрирует изображение объекта 200 в виде волшебника, отображаемого на прозрачном устройстве 100 отображения, так что объект 200 оказывается расположенным в пустой среде просмотра с фиг. 1. Кроме того, изображение тени 202, отбрасываемой объектом 200, показано, как будто она отбрасывается на фон реального мира. В проиллюстрированном варианте осуществления тень следует за контуром пола 106 и стены 104 таким же образом, как и реальная тень. Тем не менее, другие варианты осуществления могут предусматривать различные изменения в контуре поверхности фона другими способами. Должно быть понятно, что тень может иметь любой подходящий размер, форму, интенсивность и направление в зависимости от типа и местоположения виртуального(ых) источника(ов) света, используемого(ых) для вычисления внешнего вида тени.
Как упомянуто выше, изображение тени 202 может быть сформировано воспроизведением изображения заднего плана на реальном заднем плане таким образом, чтобы относительная яркость бестеневых областей была увеличена по сравнению с теневыми областями изображения заднего плана. Фиг. 3 показывает блок-схему, иллюстрирующую пример варианта осуществления способа 300 отображения изображений теней таким образом.
Способ 300 содержит на этапе 302 отображение изображения объекта на прозрачном экране отображения и на этапе 304 - получение опорного изображения заднего плана, который находится в пределах поля зрения пользователя прозрачного устройства отображения. Опорное изображение заднего плана может обрабатываться различными способами для формирования улучшенного изображения заднего плана. Например, на этапе 305 способ 300 содержит определение на заднем плане местоположения тени, сформированной отображаемым объектом. Местоположение тени может быть определено любым подходящим способом, в том числе (но без ограничения) через традиционные методики формирования теней в реальном времени, используемым в компьютерной графике. Должно быть понятно, что местоположение и внешний вид тени могут зависеть от типа (например, параллельные лучи, рассеянный свет и т.д.) и местоположения (например, над головой, под наклоном и т.д.) виртуального источника света или виртуальных источников света, применяемых при определении местоположения тени, а также от использованного определенного способа формирования тени.
Как упомянуто выше, местоположение тени на фоновом изображении может зависеть от структуры среды использования. Например, тень может изменять направление и/или форму в зависимости от формы и ориентации поверхностей в среде использования, на которые должна отбрасываться тень. Следовательно, в некоторых вариантах осуществления обработка изображения может выполняться для определения изменений контура поверхности, которые могут влиять на внешний вид тени, и такие изменения контура могут затем учитываться при определении местоположения тени.
После определения местоположения тени способ 300 содержит на этапе 308 воспроизведение улучшенного изображения заднего плана путем увеличения относительной яркости заднего плана в бестеневой области рядом с теневой областью по сравнению с яркостью в теневой области. Это может предусматривать различные процессы. Например, в некоторых вариантах осуществления все изображение заднего плана сначала может быть затемнено для формирования базового изображения, а затем яркость требуемых бестеневых областей может быть избирательно увеличена относительно теневых областей. В качестве альтернативы и/или дополнения требуемые теневые области могут быть избирательно затемнены относительно бестеневых областей. Должно быть понятно, что такое предварительное затемнение исходного изображения заднего фона может быть исключено, если потребуется, например, в среде использования со слабым освещением. Также должно быть понятно, что степень, с которой исходное изображение заднего плана затемняется, может быть фиксированной или изменяемой и может выбираться или изменяться на основании таких факторов, как количество фонового света, которое удаляется нейтральным фильтром, интенсивность фонового света в реальной или ожидаемой среде использования и т.д.
В некоторых вариантах осуществления, как указано на этапе 310, относительная яркость бестеневой области изображения может быть увеличена глобально таким образом, чтобы относительная яркость всех бестеневых областей улучшенного изображения заднего плана была увеличена относительно всех теневых областей. В других вариантах осуществления, как указано на этапе 312, относительная яркость бестеневых областей может быть увеличена локально. В таких вариантах осуществления дифференциал относительной яркости может иметь максимум, расположенный на или около теневой/бестеневой границы, и уменьшаться от максимума как функция расстояния от теневой области. Использование в достаточной степени плавного градиента яркости, в качестве неограничительного примера, под угловым видом 20 градусов, может помочь сделать яркое пятно вокруг тени менее заметным вследствие меньшей чувствительности человеческой зрительной системы к постепенному изменению света. Должно быть понятно, что такие градиенты яркости могут быть более заметными, когда они пересекают край, например, между разными цветами, текстурами и т.д. на фоновом изображении, вследствие чувствительности человеческого глаза к изменениям яркости в пределах узких диапазонов. Следовательно, как указано на этапе 314, увеличение относительной яркости бестеневой области рядом с теневой областью может завершиться резким градиентом (например, который превышает заранее выбранный пороговый градиент) на фоновом изображении.
В случае, когда относительная яркость бестеневых областей увеличена глобально, добавление улучшенного изображения заднего плана на фон реального мира может приводить к заметному увеличению яркости при некоторых обстоятельствах. Чтобы избежать нежелательного увеличения яркости, вышеупомянутый нейтральный фильтр и/или другие подходящие оптические средства могут быть использованы для снижения общей яркости изображения, которая достигает глаза пользователя, посредством блокировки некоторого фонового света. В вариантах осуществления, в которых относительная яркость увеличена локально, можно не использовать нейтральный фильтр, так как области с увеличенной яркостью могут не влиять заметно на общую яркость изображения, просматриваемого пользователем.
Яркость бестеневой области может быть увеличена на любую подходящую относительную величину по сравнению с яркостью теневой области. Следует отметить, что тени реального мира в целом не являются абсолютно черными и могут вместо этого иметь относительно небольшое уменьшение интенсивности по сравнению с соседними бестеневыми областями вследствие отраженного света и других окружающих источников света. Следовательно, в некоторых вариантах осуществления дифференциал относительной яркости между теневыми и бестеневыми областями может быть относительно трудноразличимым. Примеры подходящих разностей яркости включают в себя (без ограничения) разности 2-3 ступеней (stops).
Окружающий фоновый свет может иметь разное цветовое распределение в зависимости от источника окружающего света в среде просмотра. Например, внутренний окружающий свет может иметь спектр с максимумами, соответствующими максимальным длинам волн источников света, используемых в этой внутренней среде. Аналогичным образом, разные внешние местоположения могут иметь разные цветовые распределения окружающего света вследствие изменений, вызываемых окружающей средой. Например, окружающий свет в пустынной среде в солнечный день может иметь большую синюю компоненту, нежели солнечный свет, вследствие распределения длин волн отраженного света в таких средах.
Следовательно, чтобы сделать более естественным увеличение относительной интенсивности яркости, способ 300 может содержать на этапе 316 выполнение цветового анализа для определения цветового распределения в окружающем свете (например, интенсивность в зависимости от длины волны) и увеличение относительной яркости на основании распределения интенсивностей цвета. Например, если цветовой анализ показывает, что окружающий свет имеет относительно равномерное распределение интенсивностей цвета, то интенсивность бестеневых областей может быть увеличена посредством добавления белого света к бестеневым областям. Аналогичным образом, если цветовой анализ показывает, что окружающий свет имеет преимущественно синее распределение, то подобный синий свет может быть добавлен к бестеневым областям улучшенного изображения заднего плана.
Продолжая с фиг. 3, после формирования улучшенного изображения заднего плана способ 300 содержит на этапе 318 отображение улучшенного изображения заднего плана вместе с изображением объекта на прозрачном устройстве отображения. Таким образом, тень на улучшенном изображении заднего плана может казаться отбрасываемой отображаемым объектом на фоне реального мира. Это может помочь обеспечить перспективу глубины для объекта, что может помочь передать чувство, что отображаемый объект действительно существует в среде использования.
В зависимости от скорости обработки прозрачного устройства отображения и частоты, с которой пользователь изменяет вид в перспективе в среде, вид в перспективе, наблюдаемый пользователем, может изменяться достаточно быстро, так что улучшенное изображение заднего плана может не соответствовать в достаточной степени текущему воспринимаемому фону. Следовательно, в некоторых вариантах осуществления прозрачное устройство отображения может быть выполнено с возможностью отслеживания движений пользователя и в ответ на них корректировки любого несоответствия между улучшенным изображением заднего плана и воспринимаемым в настоящий момент фоном реального мира. Такая корректировка может выполняться, например, посредством позиционного смещения улучшенного изображения заднего плана на основании отслеживаемых движений пользователя в течение периода между получением исходного изображения и отображением улучшенного изображения заднего плана. Такое отслеживание может выполняться любым подходящим образом, в том числе (но без ограничения) посредством датчиков движения, размещенных на прозрачном устройстве отображения.
Вышеописанные варианты осуществления способов отображения теней на прозрачном устройстве отображения могут использоваться с любым подходящим прозрачным устройством отображения, в том числе (но без ограничения) с головной системой отображения с фиг. 1. Фиг. 4 показывает блок-схему варианта осуществления прозрачного устройства 100 отображения, и фиг. 5 показывает пример физического варианта осуществления прозрачного устройства 100 отображения. Прозрачное устройство 100 отображения может содержать различные датчики и устройства вывода. Например, прозрачное устройство 100 отображения может содержать прозрачную подсистему 400 отображения, имеющую систему 402 создания изображений, выполненную с возможностью создания изображений и отображения изображений на прозрачном экране 403 отображения, например, в виде линз. Система 402 создания изображений может быть выполнена с возможностью проекции изображений на прозрачный экран 403 отображения, отображения изображений через элементы создания изображений, включенные в прозрачный экран 403 отображения (например, прозрачное OLED устройство отображения), или любым другим подходящим образом. Прозрачный экран 403 отображения может содержать нейтральный фильтр 404 и/или другие оптические средства для снижения количества фонового света, который достигает наблюдателя. Аудио может предоставляться через один или более динамиков 405 в прозрачном устройстве 100 отображения.
Прозрачное устройство 100 отображения может дополнительно содержать один или более датчиков 406 изображения. Датчик (датчики) 406 изображения может (могут) включать в себя один или более обращенных наружу датчиков изображения, выполненных с возможностью получения изображения заднего плана для преобразования в улучшенное изображение заднего плана. Аналогичным образом, датчик (датчики) 406 изображения может (могут) включать в себя отслеживающие движение глаза датчики изображения, выполненные с возможностью получения данных изображения, чтобы позволить отслеживать глазные яблоки наблюдателя для различных целей, например, определения, где расположены объекты на отображаемом изображении, обнаружения пользовательских вводов, сделанных через жесты глазами, и т.д. Прозрачное устройство 100 отображения может дополнительно содержать один или более микрофонов 407, чтобы позволить использовать голосовые команды в качестве пользовательских вводов.
Прозрачное устройство 100 отображения может дополнительно содержать один или более датчиков 408 движения для обнаружения перемещений руки наблюдателя, когда наблюдатель носит прозрачное устройство 100 отображения. Это может обеспечить, например, соответствие улучшенного изображения заднего плана с текущим фоновым видом. Аналогичным образом, датчики 408 движения могут также применяться в качестве пользовательских устройств ввода, так что пользователь может взаимодействовать с прозрачным устройством 100 отображения через жесты шеи и головы или даже тела. Датчики 408 движения могут быть выполнены с возможностью обнаружения любых подходящих перемещений пользовательской головы, в том числе поступательного и/или наклонного движения. Должно быть понятно, что датчики, проиллюстрированные на фиг.4, показаны с целью примера и не предназначены для ограничения каким-либо образом, так как могут быть использованы любые другие подходящие датчики и/или комбинация датчиков.
Головная система 110 отображения может иметь любую подходящую физическую форму. Например, в некоторых вариантах осуществления головная система 110 отображения может принимать форму очков, как показано на фиг. 5, причем линзы могут быть прозрачными или затемненными посредством нейтрального фильтра или других подходящих оптических средств. На фиг. 5 обращенный наружу датчик 406 изображения показан расположенным в верхнем центральном местоположении на оправе очков, но должно быть понятно, что датчик 406 изображения может иметь любое другое подходящее местоположение. Кроме того, должно быть понятно, что в других вариантах осуществления головная система 110 отображения может принимать любую другую подходящую форму, такую как шлем, защитные очки и т.д., в которой прозрачная система отображения устанавливается перед глазом или глазами наблюдателя.
Возвращаясь к фиг. 4, прозрачное устройство 100 отображения дополнительно содержит контроллер 410, имеющий логическую подсистему 412 и подсистему 414 хранения данных, осуществляющие связь с различными другими компонентами прозрачного устройства 100 отображения. В подсистеме 414 хранения данных хранятся инструкции, которые исполняются логической подсистемой 412, например, для отображения изображений объектов и теней, сформированных объектом на прозрачном экране 403 отображения, как описано выше.
Должно быть понятно, что контроллер 410 показан в упрощенной форме. Также должно быть понятно, что прозрачное устройство 100 отображения может использовать любую подходящую компьютерную архитектуру, которая может использоваться без отступления от объема данного изобретения.
Логическая подсистема 412 может включать в себя один или более физических устройств, выполненных с возможностью исполнения одной или более инструкций. Например, логическая подсистема 412 может быть выполнена с возможностью исполнения одной или более инструкций, которые составляют часть одного или более приложений, служб, программ, методов, библиотек, объектов, компонентов, структур данных или других логических структур. Такие инструкции могут быть реализованы для выполнения задачи, реализации типа данных, преобразования состояния одного или более устройств или достижения требуемого результата иным способом.
Логическая подсистема 412 может включать в себя один или более процессоров, которые выполнены с возможностью исполнения программных инструкций. В качестве дополнения или альтернативы логическая подсистема 412 может включать в себя один или более аппаратных или программно-аппаратных логических механизмов, выполненных с возможностью исполнения аппаратных или программно-аппаратных инструкций. Процессоры логической подсистемы 412 могут быть одноядерными или многоядерными, и программы, исполняемые на них, могут быть сконфигурированы для параллельной или распределенной обработки. Логическая подсистема 412 может, если потребуется, включать в себя отдельные компоненты, которые распределены по двум или более устройствам, которые могут быть удалено расположены и/или сконфигурированы для совместной обработки. Один или более аспектов логической подсистемы 412 могут быть виртуализированы и исполнены сетевыми вычислительными устройствами с удаленным доступом, выполненными в облачной вычислительной конфигурации.
Подсистема 414 хранения данных может включать в себя один или более физических постоянных устройств, выполненных с возможностью хранения данных и/или инструкций, исполняемых логической подсистемой для реализации описанных в данном документе способов и процессов. Когда такие способы и процессы реализованы, состояние подсистемы 414 хранения данных может быть преобразовано (например, для хранения разных данных).
Подсистема 414 хранения данных может включать в себя съемные носители и/или встроенные устройства. Подсистема 414 хранения данных может включать в себя память и/или устройства с одной или более следующими характеристиками: энергозависимые, энергонезависимые, динамические, статические, считываемые/записываемые, доступные только для чтения, с произвольным доступом, с последовательным доступом, с адресацией по местоположению, с адресацией по файлу и с адресацией по содержимому. В некоторых вариантах осуществления логическая подсистема 412 и подсистема 414 хранения данных могут быть объединены в одном или более общих устройствах, например, специализированной интегральной схеме или однокристальной системе.
Подсистема хранения данных может дополнительно содержать съемные считываемые компьютером запоминающие носители 416, которые могут использоваться для хранения и/или передачи данных и/или инструкций, исполняемых для реализации описанных в данном документе способов и процессов. Съемные считываемые компьютером запоминающие носители 416 могут представлять собой любой подходящий тип запоминающих носителей, включая в том числе (но без ограничения) DVD, CD, HD-DVD, диски Blu-Ray, EEPROM, накопители на ленте и/или гибкие магнитные диски.
Контроллер 410 может дополнительно содержать подсистему 418 связи, выполненную с возможностью соединять с возможностью связи прозрачное устройство 100 отображения с одним или более другими вычислительными устройствами. Подсистема 418 связи может включать в себя проводные и/или беспроводные устройства связи, совместимые с одним или более разными протоколами связи. В качестве неограничительных примеров подсистема 418 связи может быть выполнена с возможностью осуществления связи через беспроводную телефонную сеть, беспроводную локальную сеть, проводную локальную сеть, беспроводную глобальную сеть, проводную глобальную сеть и т.д. В некоторых вариантах осуществления подсистема 418 связи может позволить прозрачному устройству 100 отображения отправлять и/или принимать данные, такие как видеоданные, игровые данные, данные изображения и т.д., на и/или от других устройств через сеть, такую как Интернет.
Должно быть очевидным, что подсистема 414 хранения данных включает в себя один или более физических постоянных устройств. В то же время, в некоторых вариантах осуществления аспекты описанных в данном документе инструкций могут распространяться временным образом посредством свободного сигнала (например, электромагнитного сигнала, оптического сигнала и т.д.), который не сохраняется физическим устройством по меньшей мере в течение ограниченной продолжительности времени. Кроме того, данные и/или другие формы информации, относящейся к настоящему изобретению, могут распространяться посредством свободного сигнала.
Должно быть понятно, что описанные в данном документе конфигурации и/или подходы являются примерными по характеру и что эти конкретные варианты осуществления или примеры не должны рассматриваться в ограничивающем смысле, поскольку возможны многочисленные изменения. Описанные в данном документе конкретные методы и способы могут представлять собой одну или более из любого числа стратегий обработки. Различные проиллюстрированные действия, как таковые, могут выполняться в проиллюстрированной последовательности, в других последовательностях, параллельно или могут быть в некоторых случаях исключены. Аналогичным образом, порядок вышеописанных процессов может быть изменен.
Изобретение, согласно настоящему документу, включает в себя все новые и неочевидные комбинации или подкомбинации различных процессов, систем и конфигураций и другие признаки, функции, действия и/или свойства, раскрытые в данном документе, а также любые и все их эквиваленты.

Claims (45)

1. Способ функционирования прозрачного оптического устройства отображения, имеющего прозрачный экран отображения и камеру, причем способ содержит:
отображение на прозрачном экране отображения изображения объекта; и
при отображении изображения объекта отображение изображения тени, отбрасываемой объектом на фоновую сцену реального мира, посредством
получения, посредством камеры, изображения фоновой сцены реального мира, которая видима через прозрачный экран отображения,
определения местоположения тени на изображении фоновой сцены реального мира,
обработки изображения фоновой сцены реального мира для формирования улучшенного изображения фоновой сцены реального мира посредством увеличения яркости фоновой сцены реального мира в улучшенном изображении фоновой сцены реального мира в области рядом с тенью по сравнению с яркостью в пределах тени, и
отображения, посредством прозрачного экрана отображения, улучшенного изображения фоновой сцены реального мира поверх и в совмещении с фоновой сценой реального мира.
2. Способ по п. 1, дополнительно содержащий уменьшение количества естественного света, проходящего через прозрачный экран отображения, посредством нейтрального фильтра.
3. Способ по п. 1, в котором обработка улучшенного изображения фоновой сцены реального мира состоит в том, что не увеличивают яркость в пределах тени.
4. Способ по п. 1, в котором обработка улучшенного изображения фоновой сцены реального мира содержит затемнение изображения фоновой сцены реального мира глобально.
5. Способ по п. 1, в котором увеличение яркости в области рядом с тенью содержит увеличение яркости бестеневых областей глобально.
6. Способ по п. 1, в котором увеличение яркости в области рядом с тенью содержит увеличение яркости локально таким образом, чтобы дифференциал яркости уменьшался как функция расстояния от тени.
7. Способ по п. 6, дополнительно содержащий обнаружение края на изображении фоновой сцены реального мира, который превышает заранее выбранный пороговый градиент, и завершение увеличения яркости на этом крае.
8. Способ по п. 1, дополнительно содержащий определение цветового распределения окружающего света и увеличение яркости путем увеличения яркости на основании этого цветового распределения окружающего света.
9. Способ по п. 1, в котором отображение изображения объекта и изображения тени, отбрасываемой объектом, содержит отображение изображения объекта и изображения тени, отбрасываемой объектом, на закрепляемой на голове системе отображения.
10. Прозрачная оптическая система отображения, которая закрепляется на голове, содержащая:
прозрачный экран отображения;
систему создания изображений, выполненную с возможностью отображения изображения на прозрачном экране отображения;
датчик изображений, выполненный с возможностью получения изображения фоновой сцены реального мира, которая видима через прозрачный экран отображения;
логическую подсистему; и
подсистему хранения данных, содержащую инструкции, исполняемые логической подсистемой для
отображения изображения объекта на прозрачном экране отображения; и
при отображении изображения объекта отображения изображения тени, отбрасываемой объектом на фоновую сцену реального мира, посредством
получения, посредством датчика изображений,
изображения фоновой сцены реального мира, которая видима через прозрачный экран отображения,
определения местоположения тени на изображении фоновой сцены реального мира,
обработки изображения фоновой сцены реального мира для формирования улучшенного изображения фоновой сцены реального мира, в котором яркость фоновой сцены реального мира в улучшенном изображении фоновой сцены реального мира в области рядом с тенью увеличена по сравнению с яркостью в пределах тени, и
отображения улучшенного изображения фоновой сцены реального мира на прозрачном экране отображения поверх и в совмещении с фоновой сценой реального мира.
11. Система отображения, которая закрепляется на голове, по п. 10, в которой прозрачный экран отображения дополнительно содержит нейтральный фильтр.
12. Система отображения, которая закрепляется на голове, по п. 10, в которой инструкции исполняются для обработки улучшенного изображения фоновой сцены реального мира посредством увеличения яркости в области рядом с тенью, не увеличивая яркость в пределах тени.
13. Система отображения, которая закрепляется на голове, по п. 10, в которой инструкции исполняются для увеличения яркости в области рядом с тенью посредством увеличения яркости бестеневых областей глобально.
14. Система отображения, которая закрепляется на голове, по п. 10, в которой инструкции исполняются для увеличения яркости в области рядом с тенью посредством увеличения яркости локально таким образом, чтобы дифференциал яркости уменьшался как функция расстояния от тени.
15. Система отображения, которая закрепляется на голове, по п. 14, в которой инструкции исполняются для обнаружения края на изображении фоновой сцены реального мира, который превышает заранее выбранный пороговый градиент, и завершения увеличения яркости на этом крае.
16. Система отображения, которая закрепляется на голове, по п. 10, в которой инструкции дополнительно исполняются для определения цветового распределения окружающего света и для увеличения яркости посредством увеличения яркости на основании этого цветового распределения окружающего света.
17. Используемый в прозрачной оптической системе отображения, которая закрепляется на голове и содержит прозрачный экран отображения, камеру и нейтральный фильтр, способ отображения изображения объекта и изображения тени объекта поверх фоновой сцены реального мира, видимой через прозрачный экран отображения, причем способ содержит:
отображение на прозрачном экране отображения изображения объекта;
уменьшение количества окружающего света, проходящего через прозрачный экран отображения, посредством нейтрального фильтра; и
при отображении изображения объекта, отображение изображения тени, отбрасываемой объектом на фоновую сцену реального мира, посредством
получения, посредством камеры, изображения фоновой сцены реального мира, видимой через прозрачный экран отображения,
определения местоположения тени на изображении фоновой сцены реального мира,
обработки полученного изображения фоновой сцены реального мира для формирования улучшенного изображения фоновой сцены реального мира посредством
увеличения яркости фоновой сцены реального мира в улучшенном изображении фоновой сцены реального мира в бестеневых областях изображения, не увеличивая яркость в пределах тени, и
отображения улучшенного изображения фоновой сцены реального мира на прозрачном экране отображения поверх и в совмещении с фоновой сценой реального мира, чтобы добавить свет к бестеневым областям.
18. Способ по п. 17, в котором обработка улучшенного изображения фоновой сцены реального мира содержит затемнение изображения фоновой сцены реального мира глобально до увеличения яркости области рядом с тенью.
19. Способ по п. 17, дополнительно содержащий определение цветового распределения окружающего света и увеличение яркости посредством увеличения яркости на основании этого цветового распределения окружающего света.
RU2014124160A 2011-12-12 2012-12-12 Отображение теней с помощью прозрачного устройства отображения RU2627131C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/323,403 2011-12-12
US13/323,403 US9311751B2 (en) 2011-12-12 2011-12-12 Display of shadows via see-through display
PCT/US2012/069316 WO2013090474A1 (en) 2011-12-12 2012-12-12 Display of shadows via see-through display

Publications (2)

Publication Number Publication Date
RU2014124160A RU2014124160A (ru) 2015-12-20
RU2627131C2 true RU2627131C2 (ru) 2017-08-03

Family

ID=48571564

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014124160A RU2627131C2 (ru) 2011-12-12 2012-12-12 Отображение теней с помощью прозрачного устройства отображения

Country Status (12)

Country Link
US (1) US9311751B2 (ru)
EP (1) EP2791911B1 (ru)
JP (1) JP6023212B2 (ru)
KR (1) KR102004010B1 (ru)
CN (1) CN103988234B (ru)
AU (1) AU2012352273B2 (ru)
BR (1) BR112014014198B1 (ru)
CA (1) CA2857510C (ru)
IN (1) IN2014CN03962A (ru)
MX (1) MX347984B (ru)
RU (1) RU2627131C2 (ru)
WO (1) WO2013090474A1 (ru)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8872853B2 (en) 2011-12-01 2014-10-28 Microsoft Corporation Virtual light in augmented reality
US9311751B2 (en) 2011-12-12 2016-04-12 Microsoft Technology Licensing, Llc Display of shadows via see-through display
BR112015024910A2 (pt) * 2013-03-26 2017-07-18 Seiko Epson Corp dispositivo de exibição montado na cabeça, método de controle de dispositivo de exibição montado na cabeça e sistema de exibição
US9658454B2 (en) * 2013-09-06 2017-05-23 Omnivision Technologies, Inc. Eyewear display system providing vision enhancement
US9652892B2 (en) 2013-10-29 2017-05-16 Microsoft Technology Licensing, Llc Mixed reality spotlight
WO2015099683A1 (en) 2013-12-23 2015-07-02 Empire Technology Development, Llc Suppression of real features in see-through display
KR20160021607A (ko) * 2014-08-18 2016-02-26 삼성전자주식회사 배경 화면을 디스플레이하는 방법 및 장치
KR102262566B1 (ko) * 2014-10-10 2021-06-07 엘지디스플레이 주식회사 투명 디스플레이 장치
IL236243A (en) 2014-12-14 2016-08-31 Elbit Systems Ltd Visual enhancement of color icons is shown
US11468639B2 (en) * 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US10134198B2 (en) * 2016-04-19 2018-11-20 Adobe Systems Incorporated Image compensation for an occluding direct-view augmented reality system
US10692288B1 (en) * 2016-06-27 2020-06-23 Lucasfilm Entertainment Company Ltd. Compositing images for augmented reality
US10235788B2 (en) * 2017-01-17 2019-03-19 Opentv, Inc. Overlay contrast control in augmented reality displays
KR102304701B1 (ko) * 2017-03-28 2021-09-24 삼성전자주식회사 사용자의 음성 입력에 대한 답변을 제공하는 방법 및 장치
EP3531244A1 (en) * 2018-02-26 2019-08-28 Thomson Licensing Method, apparatus and system providing alternative reality environment
WO2019051228A1 (en) 2017-09-08 2019-03-14 Apple, Inc. TRANSPARENT DISPLAY BASED ON A CAMERA
US10679404B2 (en) * 2017-10-04 2020-06-09 Google Llc Shadows for inserted content
US10922878B2 (en) * 2017-10-04 2021-02-16 Google Llc Lighting for inserted content
KR102004991B1 (ko) 2017-12-22 2019-10-01 삼성전자주식회사 이미지 처리 방법 및 그에 따른 디스플레이 장치
DE102018208739A1 (de) * 2018-06-04 2019-12-05 Conti Temic Microelectronic Gmbh Abschätzung von Ortskoordinaten von Lichtquellen in Umgebungsbildern
CN111127537A (zh) 2018-10-29 2020-05-08 托比股份公司 用于检测头戴式装置中的阴影的方法和装置
CN111383340B (zh) * 2018-12-28 2023-10-17 成都皓图智能科技有限责任公司 一种基于3d图像的背景过滤方法、装置及系统
US11852813B2 (en) * 2019-04-12 2023-12-26 Nvidia Corporation Prescription augmented reality display
WO2020237194A1 (en) 2019-05-22 2020-11-26 Pcms Holdings, Inc. Method for rendering of augmented reality content in combination with external display
US11238662B2 (en) * 2019-09-25 2022-02-01 Apple Inc. Optimal luminance mapping for augmented reality devices
MX2022006842A (es) 2019-12-06 2022-09-09 Portl Inc Dispositivo de representacion holografica y metodo de uso.
CN111093102A (zh) * 2019-12-30 2020-05-01 星络智能科技有限公司 存储介质、交互设备及其视频高亮渲染播放方法
CN111093112A (zh) * 2019-12-30 2020-05-01 星络智能科技有限公司 存储介质、交互设备及其视频阴影渲染播放方法
CN111182349A (zh) * 2019-12-30 2020-05-19 星络智能科技有限公司 存储介质、交互设备及其视频播放方法
WO2021186581A1 (ja) 2020-03-17 2021-09-23 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置および画像生成方法
US11776503B2 (en) * 2020-05-28 2023-10-03 Apple Inc. Generating display data based on modified ambient light luminance values
US12003859B2 (en) 2021-07-16 2024-06-04 Samsung Electronics Co., Ltd. Brightness adjustment method, and apparatus thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6301442B1 (en) * 1999-03-30 2001-10-09 Fuji Photo Film Co., Ltd. Optical instrument and image photographic method
US20080044095A1 (en) * 2006-06-09 2008-02-21 Michael Albiez Method for binarizing a digital gray value image
RU2375840C2 (ru) * 2007-04-19 2009-12-10 Владимир Семенович Леонов Способ формирования трехмерного цветного виртуального видеоизображения и устройство для создания эффекта виртуальной реальности у пользователя (варианты)

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0778267A (ja) 1993-07-09 1995-03-20 Silicon Graphics Inc 陰影を表示する方法及びコンピュータ制御表示システム
CA2233047C (en) 1998-02-02 2000-09-26 Steve Mann Wearable camera system with viewfinder means
US6614408B1 (en) 1998-03-25 2003-09-02 W. Stephen G. Mann Eye-tap for electronic newsgathering, documentary video, photojournalism, and personal safety
US6552731B1 (en) 1999-04-16 2003-04-22 Avid Technology, Inc. Multi-tone representation of a digital image on a digital nonlinear editing system
EP1074943A3 (en) 1999-08-06 2004-03-24 Canon Kabushiki Kaisha Image processing method and apparatus
JP2002049932A (ja) * 2000-08-02 2002-02-15 Taito Corp ポリゴンモデルの影を表示する方法
US6980697B1 (en) 2001-02-01 2005-12-27 At&T Corp. Digitally-generated lighting for video conferencing applications
US20030014212A1 (en) 2001-07-12 2003-01-16 Ralston Stuart E. Augmented vision system using wireless communications
US7301547B2 (en) 2002-03-22 2007-11-27 Intel Corporation Augmented reality system
US20050007460A1 (en) 2003-07-08 2005-01-13 Stavely Donald J. Systems and methods for counteracting lens vignetting
US7508455B2 (en) 2004-03-26 2009-03-24 Ross Video/Live Production Technology Method, system, and device for automatic determination of nominal backing color and a range thereof
CN101002253A (zh) 2004-06-01 2007-07-18 迈克尔·A.·韦塞利 水平透视模拟器
US7986351B2 (en) 2005-01-27 2011-07-26 Qualcomm Incorporated Luma adaptation for digital image processing
ATE428154T1 (de) 2005-05-03 2009-04-15 Seac02 S R L Augmented-reality-system mit identifizierung der realen markierung des objekts
JP4093279B2 (ja) * 2005-10-24 2008-06-04 ソニー株式会社 背面投射型画像表示装置
US7623137B1 (en) * 2006-02-15 2009-11-24 Adobe Systems, Incorporated Successive-convolution-compositing technique for rendering translucent surfaces
JP2007219082A (ja) 2006-02-15 2007-08-30 Canon Inc 複合現実感表示システム
US8139059B2 (en) 2006-03-31 2012-03-20 Microsoft Corporation Object illumination in a virtual environment
KR100925419B1 (ko) * 2006-12-19 2009-11-06 삼성전자주식회사 라플라시안 피라미드를 이용한 컬러 영상의 화질 개선 장치및 그 방법
JP4948218B2 (ja) 2007-03-22 2012-06-06 キヤノン株式会社 画像処理装置及びその制御方法
US20090225001A1 (en) 2007-11-06 2009-09-10 University Of Central Florida Research Foundation, Inc. Hybrid Display Systems and Methods
US9082213B2 (en) 2007-11-07 2015-07-14 Canon Kabushiki Kaisha Image processing apparatus for combining real object and virtual object and processing method therefor
JP5177515B2 (ja) * 2008-06-02 2013-04-03 アイシン精機株式会社 周辺認知支援システム
WO2010010601A1 (en) * 2008-07-24 2010-01-28 Thomson Licensing Image processing device, method, and system
US20100287500A1 (en) 2008-11-18 2010-11-11 Honeywell International Inc. Method and system for displaying conformal symbology on a see-through display
JP2010145436A (ja) 2008-12-16 2010-07-01 Brother Ind Ltd ヘッドマウントディスプレイ
US9015638B2 (en) 2009-05-01 2015-04-21 Microsoft Technology Licensing, Llc Binding users to a gesture based system and providing feedback to the users
US8325186B2 (en) 2009-05-21 2012-12-04 Sony Computer Entertainment America Llc Method and apparatus for rendering shadows
DE102009037865A1 (de) * 2009-08-18 2011-02-24 Schaeffler Technologies Gmbh & Co. Kg Anordnung zur Lagerung einer Schaltschiene
DE102009037835B4 (de) * 2009-08-18 2012-12-06 Metaio Gmbh Verfahren zur Darstellung von virtueller Information in einer realen Umgebung
JP5446003B2 (ja) * 2009-09-14 2014-03-19 国立大学法人 東京大学 仮想物体影作成装置および合成画像作成装置並びに仮想物体影作成方法、プログラム
US8405658B2 (en) * 2009-09-14 2013-03-26 Autodesk, Inc. Estimation of light color and direction for augmented reality applications
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US20110234631A1 (en) 2010-03-25 2011-09-29 Bizmodeline Co., Ltd. Augmented reality systems
US8405680B1 (en) 2010-04-19 2013-03-26 YDreams S.A., A Public Limited Liability Company Various methods and apparatuses for achieving augmented reality
US20120026079A1 (en) * 2010-07-27 2012-02-02 Apple Inc. Using a display abstraction to control a display
US8884984B2 (en) 2010-10-15 2014-11-11 Microsoft Corporation Fusing virtual content into real content
US8872853B2 (en) * 2011-12-01 2014-10-28 Microsoft Corporation Virtual light in augmented reality
US9311751B2 (en) 2011-12-12 2016-04-12 Microsoft Technology Licensing, Llc Display of shadows via see-through display
US9147111B2 (en) 2012-02-10 2015-09-29 Microsoft Technology Licensing, Llc Display with blocking image generation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6301442B1 (en) * 1999-03-30 2001-10-09 Fuji Photo Film Co., Ltd. Optical instrument and image photographic method
US20080044095A1 (en) * 2006-06-09 2008-02-21 Michael Albiez Method for binarizing a digital gray value image
RU2375840C2 (ru) * 2007-04-19 2009-12-10 Владимир Семенович Леонов Способ формирования трехмерного цветного виртуального видеоизображения и устройство для создания эффекта виртуальной реальности у пользователя (варианты)

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Santos P. et al, "The Daylight Blocking Optical Stereo See-Through HMD", The 2008 workshop on Immersive projection technologies/Emerging display, 2008. *

Also Published As

Publication number Publication date
JP2015509230A (ja) 2015-03-26
EP2791911A1 (en) 2014-10-22
US20130147826A1 (en) 2013-06-13
US9311751B2 (en) 2016-04-12
CN103988234B (zh) 2017-05-03
CA2857510C (en) 2019-04-30
EP2791911A4 (en) 2015-11-04
CA2857510A1 (en) 2013-06-20
EP2791911B1 (en) 2017-08-30
BR112014014198B1 (pt) 2021-02-17
AU2012352273A1 (en) 2014-07-03
CN103988234A (zh) 2014-08-13
MX347984B (es) 2017-05-22
RU2014124160A (ru) 2015-12-20
AU2012352273B2 (en) 2017-10-26
JP6023212B2 (ja) 2016-11-09
WO2013090474A1 (en) 2013-06-20
IN2014CN03962A (ru) 2015-10-23
BR112014014198A2 (pt) 2017-06-13
MX2014007101A (es) 2014-07-28
KR20140101406A (ko) 2014-08-19
KR102004010B1 (ko) 2019-07-25

Similar Documents

Publication Publication Date Title
RU2627131C2 (ru) Отображение теней с помощью прозрачного устройства отображения
JP6759371B2 (ja) ３ｄプレノプティックビデオ画像を作成するためのシステムおよび方法
CN108369457B (zh) 用于混合现实的现实混合器
JP6730286B2 (ja) 拡張現実視野オブジェクトフォロワー
US9147111B2 (en) Display with blocking image generation
US8576276B2 (en) Head-mounted display device which provides surround video
US20130194259A1 (en) Virtual environment generating system
US9164723B2 (en) Virtual lens-rendering for augmented reality lens
US20140071163A1 (en) Augmented reality information detail
KR20160079794A (ko) 혼합 현실 스포트라이트
JP2014504413A (ja) 理解および意図に基づく拡張現実表示用コンテンツ
US20180190019A1 (en) Augmented reality user interface visibility
US20240169489A1 (en) Virtual, augmented, and mixed reality systems and methods
US11818325B2 (en) Blended mode three dimensional display systems and methods
CN116416415A (zh) 增强现实处理方法和装置
CN112584127A (zh) 基于注视的曝光
KR20150071613A (ko) 증강 현실 정보 상세도