RU2765341C2 - Основанный на контейнере поворот виртуальной камеры - Google Patents

Основанный на контейнере поворот виртуальной камеры Download PDF

Info

Publication number
RU2765341C2
RU2765341C2 RU2019137607A RU2019137607A RU2765341C2 RU 2765341 C2 RU2765341 C2 RU 2765341C2 RU 2019137607 A RU2019137607 A RU 2019137607A RU 2019137607 A RU2019137607 A RU 2019137607A RU 2765341 C2 RU2765341 C2 RU 2765341C2
Authority
RU
Russia
Prior art keywords
virtual camera
rotation
view
angle
container
Prior art date
Application number
RU2019137607A
Other languages
English (en)
Other versions
RU2019137607A3 (ru
RU2019137607A (ru
Inventor
Харолд Энтони МАРТИНЕС МОЛИНА
Видия СРИНИВАСАН
Карлос Г. ПЕРЕС
Аникет ХАНДА
Колтон Бретт МАРШАЛЛ
Original Assignee
МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи filed Critical МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Publication of RU2019137607A publication Critical patent/RU2019137607A/ru
Publication of RU2019137607A3 publication Critical patent/RU2019137607A3/ru
Application granted granted Critical
Publication of RU2765341C2 publication Critical patent/RU2765341C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/63Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor by the player, e.g. authoring using a level editor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/122File system administration, e.g. details of archiving or snapshots using management policies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • G06T15/205Image-based rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00Indexing scheme for image rendering
    • G06T2215/16Using real world measurements to influence rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2016Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • Architecture (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mixers With Rotating Receptacles And Mixers With Vibration Mechanisms (AREA)
  • Processing Of Solid Wastes (AREA)
  • Moulding By Coating Moulds (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Optics & Photonics (AREA)

Abstract

Изобретение относится к вычислительной технике. Технический результат заключается в обеспечении возможности навигации пользователя при взаимодействии с виртуальным миром. Способ управления видом с виртуальной камеры в виртуальном мире содержит этапы, на которых на основе положения шлема–дисплея (HMD) определяют первоначальный угол поворота виртуальной камеры относительно глобальной системы координат виртуального мира, при этом виртуальная камера упакована в контейнер так, что поворот контейнера вызывает поворот виртуальной камеры и контейнера относительно глобальной системы координат, причем виртуальная камера выполнена с возможностью поворачиваться относительно контейнера на основе положения HMD; принимают указание изменить вид на конкретное направление; определяют требуемый угол поворота относительно глобальной системы координат для вида так, чтобы он соответствовал этому конкретному направлению; и поворачивают контейнер на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры. 3 н. и 17 з.п. ф-лы, 11 ил.

Description

УРОВЕНЬ ТЕХНИКИ
[0001] Сайты для публикации являются ключевым способом совместного использования и потребления информации в сети. Существует небольшое число услуг, которые демократизируют создание веб–сайтов. Тем не менее отсутствуют услуги для решения проблемы создания сайтов, которые реализуют весь потенциал 3D контента. С растущим напором к созданию простого 3D контента существует необходимость в инструментах и/или услугах для обеспечения потребления 3D контента. Например, часто вызывает проблемы перемещение внутри виртуального мира посредством использования устройства виртуальной реальности. В некоторых случаях пользователи могут не понимать, как использовать или взаимодействовать с виртуальным миром. Кроме того, автоматическое перемещение пользователя внутри виртуального мира может быть сложным для осуществления и может вызывать дискомфорт или укачивание у пользователя.
[0002] Именно в отношении этих и других общих соображений были описаны варианты осуществления. Также несмотря на то, что обсуждались относительно конкретные проблемы, следует понимать, что варианты осуществления не должны ограничиваться решением конкретных проблем, идентифицированных на уровне техники.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
[0003] Настоящая технология относится к управлению видом пользователя в виртуальном мире, таком как виртуальное 3D пространство. Например, пользователь может носить шлем–дисплей (HMD), который предоставляет вид с виртуальной реальности виртуального мира. Пока пользователь просматривает виртуальный мир через HMD, пользователь может пожелать взаимодействовать с объектами в виртуальном мире. Чтобы способствовать взаимодействиям с виртуальным миром, настоящая технология меняет вид, воспринимаемый пользователем (вид пользователя), посредством ассоциации, или упаковки, виртуальной камеры в контейнер. Виртуальная камера и контейнер ассоциированы таким образом, что изменения ориентации контейнера вызывают изменение ориентации виртуальной камеры. Раз так, то посредством управления ориентацией контейнера программа управляет видом, который воспринимается пользователем. Настоящая технология также учитывает поворот головы пользователя, который носит устройство так, что итоговый вид является видом, который требуется программе, представляющей виртуальный мир. Например, технология может определять угол поворота виртуальной камеры перед поворотом контейнера в новый требуемый вид. Технология затем регулирует величину поворота для контейнера на основе определенного угла поворота виртуальной камеры. Посредством компенсации угла поворота виртуальной камеры, управление которым осуществляется посредством ориентации головы пользователя, итоговый вид пользователя находится в направлении, которое исходно требуется программой.
[0004] Это краткое изложение сущности изобретения приведено для представления подборки концепций в упрощенной форме, которые дополнительно описываются ниже в Подробном Описании. Данное краткое изложение сущности изобретения не предназначена ни для того, чтобы идентифицировать ключевые признаки или неотъемлемые признаки заявленного изобретения, ни для того, чтобы использоваться для ограничения объема заявленного изобретения.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
[0005] Неограничивающие и неисчерпывающие примеры описываются при обращении к нижеследующим Фигурам.
[0006] Фигура 1 иллюстрирует пример шлема–дисплея.
[0007] Фигура 2A иллюстрирует примерный вид внутри 3D пространства, иллюстрирующий маркер передвижения.
[0008] Фигура 2B иллюстрирует пример, в котором маркер передвижения отображается в положении вокруг 3D объекта в виртуальном мире.
[0009] Фигура 3 изображает примерный способ для отображения маркера передвижения.
[0010] Фигура 4 изображает примерную систему отсчета ориентации для виртуальной камеры.
[0011] Фигура 5 изображает примерный способ для управления видом виртуальной камеры в виртуальном мире с помощью использования контейнера.
[0012] Фигура 6 является структурной схемой, иллюстрирующей примерные физические компоненты вычислительного устройство, с помощью которого могут быть реализованы на практике аспекты изобретения.
[0013] Фигуры 7A и 7B являются упрощенными структурными схемами мобильного вычислительного устройства, с помощью которого могут быть реализованы на практике аспекты изобретения.
[0014] Фигура 8 является упрощенной структурной схемой распределенной вычислительной системы, с помощью которой могут быть реализованы на практике аспекты изобретения.
[0015] Фигура 9 иллюстрирует планшетное вычислительное устройство для исполнения одного или более аспектов настоящего изобретения.
ПОДРОБНОЕ ОПИСАНИЕ
[0016] В нижеследующем подробном описании обращаются к сопроводительным чертежам, которые образуют его часть и на которых показаны в качестве иллюстрации конкретные варианты осуществления или примеры. Эти аспекты могут быть объединены, могут быть использованы другие аспекты, и структурные изменения могут быть выполнены, не отступая от настоящего изобретения. Варианты осуществления могут быть реализованы на практике в качестве способов, систем или устройств. Соответственно, варианты осуществления могут принимать форму реализации в аппаратном обеспечении, полной реализации в программном обеспечении или реализации, объединяющей аспекты программного обеспечения и аппаратного обеспечения. Нижеследующее подробное описание, вследствие этого, не следует рассматривать в духе ограничения, и объем настоящего изобретения определяется прилагаемой формулой изобретения и ее эквивалентами.
[0017] Настоящая технология относится к управлению видом пользователя в виртуальном мире, таком как виртуальное 3D пространство. Например, пользователь может носить шлем–дисплей (HMD), который предоставляет вид с виртуальной реальности виртуального мира. Пока пользователь просматривает виртуальный мир через HMD, пользователь может пожелать взаимодействовать с объектами в виртуальном мире. Чтобы способствовать такому взаимодействию, настоящая технология предоставляет для отображения маркеры передвижения в виртуальном мире, которые могут быть выбраны пользователем. Как только пользователь выбирает маркер передвижения, вид пользователя транспортируется в вид, ассоциированный с маркером передвижения. В качестве примера, конкретный маркер передвижения может быть выбран, чтобы просматривать конкретный объект в виртуальном мире из конкретного положения и конкретной ориентации. Поворот вида пользователя после выбора маркера передвижения, тем не менее, ставит множество проблем, которые преодолевает настоящая технология, как будет обсуждаться ниже.
[0018] Как будет понятно специалистам в соответствующей области техники, в виртуальном мире вид пользователя соответствует позиционированию и ориентации виртуальной камеры в виртуальном мире. Изменения позиционирования и ориентации виртуальной камеры в виртуальном мире вызывают изменение вида виртуального мира, воспринимаемого пользователем. Когда HMD используется в качестве устройства просмотра для пользователя, чтобы видеть виртуальный мир, то ориентация виртуальной камеры обычно привязана к ориентации головы пользователя, который носит HMD. Соответственно, при HMD ориентация виртуальной камеры не может быть обычно переопределена посредством компьютерной программы. Таким образом, когда программе требуется изменить вид пользователя в виртуальном мире, такое действие сложно осуществить.
[0019] Настоящая технология меняет вид пользователя посредством ассоциации, или упаковки, виртуальной камеры в контейнер. Виртуальная камера и контейнер ассоциированы таким образом, что изменения ориентации контейнера вызывают изменение ориентации виртуальной камеры. Раз так, то посредством управления ориентацией контейнера программа может управлять видом, который воспринимается пользователем. Даже при данной реализации по–прежнему существуют дополнительные проблемы, так как пользователь все еще может свободно перемещать виртуальную камеру относительно контейнера. В качестве примера, программе может потребоваться направить вид пользователя в направлении, которое находится на 60 градусов влево от глобальной системы координат для виртуального мира. Выполнение данного действия может потребоваться, чтобы заставить вид пользователя смотреть на конкретный объект в виртуальном мире. Поворот контейнера на 60 градусов относительно глобальной системы координат, тем не менее, может не привести к тому, что вид пользователя находится при 60 градусах влево, так как пользователь, возможно, уже смотрел налево (или в любом другом направлении, отличном от 0 градусов относительно глобальной системы координат). Таким образом, поворот контейнера на 60 градусов приведет к тому, что пользователь имеет вид в нежелательном направлении. Настоящая технология преодолевает данное ограничение посредством определения угла поворота виртуальной камеры перед поворотом контейнера в новый вид, и регулирует величину поворота для контейнера на основе определенного угла поворота виртуальной камеры. Посредством компенсации угла поворота виртуальной камеры, управление которой осуществляется посредством ориентации головы пользователя, итоговый вид пользователя находится в направлении, которое исходно требуется программой.
[0020] Фигура 1 изображает пример системы 110 шлема–дисплея («HMD») с источником 102 отображения в соответствии с примером настоящей технологии. Пользователь 106 может носить HMD 110, чтобы предоставлять контент пользователю 106 через источник 102 отображения, такой как контент виртуальной реальности или контент дополненной реальности. В примере предоставления контента дополненной реальности передняя поверхность HMD 110 может включать одну или более камер, чтобы обеспечивать представление дополненного видеопотока пользователю 106 посредством источника 102 отображения, что может упоминаться как видео дополненная реальность. HMD 110 также может включать в себя интегрированные вычисленные компоненты, чтобы предоставлять контент в качестве автономной системы. HMD 110 также может включать в себя функции беспроводной или проводной соединяемости, чтобы принимать контент от других вычислительных устройств, таких как мобильные телефоны, планшеты, лэптопы, настольные компьютеры и аналогичное. Источник 102 отображения может быть прикреплен к передней части HMD 110 при помощи любых средств, известных специалистам в соответствующей области техники. В некоторых примерах HMD 110 включает в себя несколько источников 102 отображения. Например, HMD 110 может включать в себя источник 102 отображения для каждого глаза. В других примерах источник 102 отображения может быть интеллектуальным телефоном или другим подобным устройством. Источник 102 отображения также может включать в себя или смещаться вблизи линз, которые позволяют пользователю более четко видеть изображения, отображаемые в источнике отображения. Другие примерные HMD, которые могут быть пригодны для использования с настоящей технологией, описываются в документе Публикация Патента США № 2016/0027213.
[0021] Фигура 2A изображает примерный вид в виртуальном мире, иллюстрирующий маркер передвижения. Чтобы помочь пользователю в осуществлении навигации в виртуальном мире, один или более выбираемых маркеров передвижения могут быть помещены в виртуальном мире, которые идентифицируют местоположения размещения для пользователя в виртуальном мире. В некоторых примерах маркеры передвижения могут отображаться в виртуальном мире, когда вид пользователя или взгляд располагается в или направлен на предварительно определенную зону вокруг маркера передвижения. В дополнительных примерах, в дополнение к идентификации местоположений, в которые пользователь может переместиться через 3D пространство, маркер передвижения может предоставлять указание направления по умолчанию вида пользователя после перемещения в 3D пространство. Например, пользователь может пересекать виртуальный мир посредством телепортации из одного местоположения в другое. После телепортации в новое пространство пользователь может становиться дезориентированным. Указание вида пользователя может предоставлять пользователю контекст, который позволяет пользователю лучше понимать ориентацию пользователя в виртуальном мире после телепортации. В качестве примера, пользователь может выбирать маркер 202 передвижения, чтобы осуществлять транспортировку в местоположение маркера 202 передвижения. В изображенном примерном виде 200 направление обуви предоставляет пользователю указание того, какой будет ориентация вида пользователя при телепортации в местоположение маркера передвижения, тем самым предоставляя пользователю контекст, чтобы лучше понимать ориентацию пользователя при телепортации. Прочая визуальная или графическая информация, помимо обуви, также может быть использована, чтобы предоставлять указание итоговой ориентации пользователя при телепортации в местоположение маркера 202 передвижения.
[0022] Один или более маркеров передвижения также могут быть ассоциированы с контентом. В некоторых примерах, когда создается или модифицируется 3D контент в виртуальном мире, маркер передвижения может быть ассоциирован с 3D контентом, который помещает пользователя в оптимальное или предпочтительное положение и ориентацию, чтобы просматривать 3D объект. В таких примерах, когда взгляд пользователя фокусируется на или рядом с 3D объектом, может быть отображен маркер передвижения, который правильно ориентирован для просмотра объекта. Отображаемый маркер передвижения может быть выбран, чтобы телепортировать пользователя в оптимальное положение и ориентацию для того, чтобы просматривать 3D объект в виртуальном мире. Фигура 2B изображает примерный вид 210, в котором маркер 212 передвижения отображается в оптимальном или предпочтительном положении вокруг 3D объекта в виртуальном мире. При выборе маркера 212 передвижения пользователь телепортируется в выбранное положение и вид пользователя будет изменен на оптимальное или предпочтительное направление для просмотра 3D объекта.
[0023] Виртуальный мир в примерном виде 210 также включает в себя зону 214 привязки и маркер 216 направления вида. Зона 214 привязки выделяет конкретный 3D объект в виртуальном мире, когда взгляд пользователя направлен на 3D объект. Зона 214 привязки может быть отображена в качестве полупрозрачного 3D объекта, который окружает другой 3D объект. Например, в виртуальном мире, изображенном на виде 210, зона привязки изображена как цилиндр вокруг 3D объекта в виртуальном мире. Размер и форма зоны 214 привязки могут зависеть от формы и размера 3D объекта, который она окружает. Зона 214 привязки может быть эквивалентной предварительно определенной зоне, которая обсуждалась выше. Зона 214 привязки также может включать в себя маркер 216 направления вида. Маркер 216 направления вида указывает, каким будет направление вида пользователя после выбора маркера 212 передвижения. Например, если пользователь выбирает изображенный маркер 212 передвижения, то будет осуществлена транспортировка пользователя в положение маркера 212 передвижения и вид пользователя будет ориентирован в направлении маркера 216 направления вида. В некоторых примерах, маркер 216 направления вида может быть отображен непосредственно на выделенном объекте, а не на зоне 214 привязки.
[0024] Фигура 3 изображает примерный способ 300 для отображения маркера передвижения. Поток начинается на операции 302, где осуществляется мониторинг положения и ориентации взгляда пользователя или вида. На операции 304 выполняется определение в отношении того, направлен ли взгляд пользователя на предварительно определенную зону вокруг 3D объекта, ассоциированного с маркером передвижения. Определение того, находится ли взгляд пользователя в предварительно определенной зоне, может быть основано на идентификации по меньшей мере одного из значения угла наклона в продольном направлении, угла поворота вокруг вертикальной оси и угла наклона в поперечном направлении для виртуальной камеры, управление которой осуществляется посредством положения HMD. Если вектор направленности, соответствующий по меньшей мере одному из значения наклона в продольном направлении, поворота вокруг вертикальной оси и наклона в поперечном направлении, будет проходить через предварительно определенную зону, может быть определено, что взгляд пользователя направлен на предварительно определенную зону вокруг 3D объекта. Одним примером предварительно определенной зоны является зона 214 привязки, которая обсуждалась выше при обращении к Фигуре 2B. В некоторых примерах размер предварительно определенной зоны может меняться на основе размера виртуального мира и/или размера или типа 3D объекта, ассоциированного с маркером передвижения, среди прочих возможных опций. Если взгляд пользователя не находится в предварительно определенной зоне, поток проходит по ветке Нет и возвращается к операции 302 и осуществляется непрерывный мониторинг положения взгляда пользователя.
[0025] Если взгляд пользователя находится в предварительно определенной зоне вокруг 3D объекта, ассоциированного с маркером передвижения, то поток проходит по ветке Да к операции 304. На операции 304 маркер передвижения отображается в виртуальном мире. Как описано ранее, маркер передвижения также может обеспечивать указание направления, на которое будет изменен взгляд пользователя при перемещении или телепортации к маркеру передвижения. В некоторых примерах маркер передвижения может отображаться только когда взгляд пользователя находится в предварительно определенной зоне вокруг 3D объекта, ассоциированного с маркером передвижения. В альтернативных аспектах один или более маркеров передвижения могут непрерывно отображаться в виртуальном мире.
[0026] Процесс продолжается на операции 308 принятия решения, где выполняется определение в отношении того, был ли выбран отображаемый маркер передвижения. Маркер передвижения может быть выбран посредством переносного блока управления, посредством интеллектуального телефона (смартфона), посредством других элементов управления, оперативно соединенных с HMD, или на основе конкретного взгляда или вида пользователя. Маркер передвижения также может быть выбран с помощью любого средства, известно специалистам в соответствующей области техники. Если отображаемый маркер передвижения не выбран, поток переходит по ветке Нет и возвращается к операции 302, где продолжают осуществлять мониторинг взгляда пользователя. Если маркер передвижения выбран, поток переходит по ветке Да к операции 310 и пользователь автоматически перемещается или телепортируется в маркер передвижения в 3D пространстве. В дополнение к перемещению пользователя в выбранное местоположение в 3D пространстве, ориентация пользователя может быть изменена на ориентацию, которая определяется выбранным маркером передвижения.
[0027] Как обсуждалось выше, ориентация вида или взгляда пользователя в виртуальном мире основана на ориентации виртуальной камеры в виртуальном мире. Управление виртуальной камерой осуществляется посредством позиционирования HMD в реальном мире. Ориентация виртуальной камеры может быть осуществлена при обращении к глобальной системе координат виртуального мира. Например, виртуальный мир может использовать декартову систему координат с предопределенным началом координат. Виртуальная камера может рассматриваться как объект в виртуальном мире, и ее ориентация может определяться ее углами Эйлера относительно глобальной системы координат. Например, Фигура 4 изображает упрощенное изображение для обсуждения разных типов поворота, которые обсуждаются в данном документе. В отношении ориентации, поворот вокруг изображенной оси x упоминается в данном документе как наклон в поперечном направлении (обычно представляется символом φ (фи)), поворот вокруг изображенной оси y упоминается в данном документе как наклон в продольном направлении (обычно представляется символом Ɵ (тета)) и поворот вокруг изображенной оси z упоминается в данном документе как поворот вокруг вертикальной оси (обычно представляется символом ψ (пси)). Как будет понятно специалистам в соответствующей области техники, могут быть использованы другие оси и соглашения об именах поворота. Специалисты в соответствующей области техники также будут понимать, что другие методики для управления и представления поворота виртуального объекта, такие как использование матриц поворота, кватернионов или других методик, могут быть использованы с технологией, которая используется в данном документе.
[0028] Как также обсуждалось выше, при HMD, ориентация виртуальной камеры не может быть обычно переопределена посредством компьютерной программы. Таким образом, когда программе требуется изменить вид пользователя в виртуальном мире, такое действие сложно осуществить. Настоящая технология меняет вид пользователя посредством ассоциации или упаковки виртуальной камеры в контейнер. В некоторых примерах, контейнер может быть объектом программного обеспечения, таким как нулевой объект или GameObject, как используется в платформе программирования Unity Technologies. В некоторых случаях этот объект может быть отображен в виртуальном мире, но в других примерах объект не отображается в визуальном мире. Виртуальная камера и контейнер ассоциируются таким образом, что изменения ориентации контейнера вызывают изменение ориентации виртуальной камеры. Настоящая технология также компенсирует ориентацию вида пользователя непосредственно перед или во время перехода к итоговому виду, такому как вид, ассоциированный с выбранным маркером передвижения. Посредством компенсации угла поворота виртуальной камеры, управление которой осуществляется посредством головы пользователя, итоговый вид пользователя находится в направлении, которое первоначально требуется программе, таком как направление, ассоциированное с выбранным маркером передвижения.
[0029] Фигура 5 изображает примерный способ для управления видом виртуальной камеры в виртуальном мире с помощью использования контейнера. Контейнер сконфигурирован так, что поворот контейнера вызывает поворот виртуальной камеры относительно глобальной системы координат. На операции 502 определяется первоначальный угол поворота виртуальной камеры относительно глобальной системы координат виртуального мира. Первоначальный угол поворота виртуальной камеры основан, по меньшей мере отчасти, на положении HMD, как обсуждалось выше, и таким образом первоначальный угол поворота может упоминаться как первоначальный угол поворота HMD или первоначальный угол поворота виртуальной камеры. Первоначальный угол поворота может быть углом поворота виртуальной камеры непосредственно перед приемом запроса на изменение вида пользователя или углом поворота виртуальной камеры непосредственно перед тем, как отображается итоговый вид, среди прочих потенциальных временных рамок. Первоначальный угол поворота может быть любым из наклона в поперечном направлении, наклона в продольном направлении и/или поворота вокруг вертикальной оси. Например, угол поворота может быть сочетанием из любого из наклона в поперечном направлении, наклона в продольном направлении и/или поворота вокруг вертикальной оси. Угол поворота также может быть единственным из наклона в поперечном направлении, наклона в продольном направлении и/или поворота вокруг вертикальной оси.
[0030] На операции 504 принимается указание изменения вида пользователя на конкретное направление. Например, указание изменения вида пользователя может быть выбором маркера передвижения. В таком примере маркер передвижения может указывать конкретное направление для вида пользователя, такое как в направлении маркера направления вида. На основе конкретного направления для вида пользователя на операции 506 определяется или идентифицируется требуемый угол поворота для изменения вида. Требуемый угол поворота является относительно глобальной системы координат. Например, требуемый угол поворота может быть значением для наклона в поперечном направлении, наклона в продольном направлении и/или поворота вокруг вертикальной оси относительно глобальных координат. Также могут быть использованы другие идентификации углов поворота, такие как матрицы поворота, или другие представления угла Эйлера.
[0031] Как только требуемый угол поворота относительно глобальной системы координат был идентифицирован, значение поворота для контейнера определяется на операции 508. Значение поворота для контейнера основано на идентифицированном первоначальном угле поворота виртуальной камеры и требуемом угле поворота. Угол поворота может быть определен, чтобы компенсировать первоначальный угол поворота виртуальной камеры так, что поворот контейнера на предварительно определенное значение поворота вызывает ориентацию вида в требуемом направлении. В качестве примера значение поворота для контейнера может быть определено посредством сначала вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение. Далее промежуточное значение складывается в требуемым углом поворота, чтобы сформировать значение поворота для контейнера. Оператор по модулю также может быть использован так, что результирующее значение поворота не превышает 360. Примерная функция, которая может быть использована, чтобы определять значение поворота является следующей:
//Повернуть контейнер в требуемую точку
y1=требуемый угол (определяется на операции 506)
y2=первоначальный угол виртуальной камеры (определяется на операции 502)
y3=360 – у2 (промежуточное значение)
nY = (y1+y3)%360 (угол поворота для контейнера)
Символ % в вышеупомянутой функции является оператором по модулю.
[0032] На операции 510 контейнер поворачивается на предварительно определенное значение поворота. Посредством поворота контейнера на предварительно определенное значение поворота, контейнер вызывает то, что итоговый угол поворота камеры эквивалентен требуемому углу поворота относительно глобальной системы координат. Например, итоговый вид пользователя после поворота находится в требуемом направлении, таком как направление, ассоциированное с выбранным маркером передвижения. В некоторых примерах отображение в HMD может плавно переходить в черный экран или иным образом приглушать отображение перед отображением итогового вида. Например, после выбора маркера передвижения экран может плавно переходить в черный экран и после плавного перехода из черного экрана вид пользователя будет находиться в ориентации итогового угла виртуальной камеры.
[0033] Фигуры 6–9 и связанные с ними описания предоставляют обсуждение многообразия рабочих сред, в которых могут быть реализованы на практике аспекты изобретения. Тем не менее устройства и системы, которые иллюстрируются и обсуждаются в отношении Фигур 6–9, служат в качестве примера, и иллюстрации и не ограничивают огромное количество конфигураций вычислительного устройства, которые могут быть использованы для реализации на практике аспектов изобретения, описанных в данном документе.
[0034] Фиг. 6 является структурной схемой, иллюстрирующей физические компоненты (например, аппаратное обеспечение) вычислительного устройства 600, с помощью которого могут быть реализованы на практике аспекты изобретения. Компоненты вычислительного устройства, описанные ниже, могут быть пригодны для вычислительных устройств, описанных выше, таких как интеллектуальные телефоны, планшеты, HMD, лэптопы, настольные компьютеры, или прочие вычислительные устройства. В базовой конфигурации вычислительное устройство 600 может включать в себя по меньшей мере один блок 602 обработки или системную память 604. В зависимости от конфигурации и типа вычислительного устройства системная память 604 может содержать, но не ограничиваться, энергозависимое хранилище (например, память с произвольным доступом), энергонезависимое хранилище (например, постоянная память), флэш–память или любое сочетание таких памятей.
[0035] Системная память 604 может включать в себя операционную систему 605 и один или более программные модули 606, подходящие для выполнения приложения 620 программного обеспечения, такого как один или более компоненты, которые поддерживаются системами, описанными в данном документе. В качестве примеров системная память 604 может хранить виртуальный мир и ассоциированные функции и операции, которые должны быть выполнены в виртуальном мире. Операционная система 605, например, может быть подходящей для управления работой вычислительного устройства 600.
[0036] Кроме того, варианты осуществления изобретения могут быть реализованы на практике в сочетании с графической библиотекой, прочими операционными системами или любой прочей прикладной программой и не ограничиваются любым конкретным приложением или системой. Данная базовая конфигурация иллюстрируется на Фиг. 6 теми компонентами, которые находятся в рамках пунктирной линии 608. Вычислительное устройство 600 может иметь дополнительные признаки и функциональные возможности. Например, вычислительное устройство 600 также может включать в себя дополнительные устройства хранения данных (съемные и/или несъемные), такие как, например, магнитные диски, оптические диски или лента. Такое дополнительное хранилище иллюстрируется на Фиг. 6 съемным запоминающим устройством 609 и несъемным запоминающим устройством 610.
[0027] Как сформулировано выше некоторое число программных модулей и файлов данных может храниться в системной памяти 604. При исполнении в блоке 602 обработки программные модули 606 (например, приложение 620) могут выполнять процессы, включающие в себя, но не ограниченные, аспекты, как описано в данном документе. Прочие программные модули, которые могут быть использованы в соответствии с аспектами настоящего изобретения, могут включать в себя генератор 624 3D пространства, приложения 626 3D обработки и виртуальной реальности, приложения электронной почты и контактов, приложения электронной обработки текста, приложения работы с электронными таблицами, приложения работы с базой данных, приложения презентации слайдов, прикладные программы для рисования или автоматизации и т.д.
[0038] Кроме того варианты осуществления изобретения могут быть реализованы на практике в электрической схеме, содержащей дискретные электронные элементы, упакованных или интегральных электронных чипах, содержащих логические вентили, схеме, содержащей микропроцессор, или в едином чипе, содержащем электронные элементы или микропроцессоры. Например, варианты осуществления изобретения могут быть реализованы на практике через систему на кристалле (SOC), в которой каждый или многие из компонентов, которые проиллюстрированы на Фиг. 6, могут быть интегрированы в единой интегральной микросхеме. Такое устройство SOC может включать в себя один или более блоки обработки, графические блоки, блоки связи, блоки виртуализации системы и различные прикладные функциональные возможности, все из который интегрированы (или «прожигаются») на подложке чипа в качестве единой интегральной микросхемы. При работе через SOC, функциональные возможности, описанные в данном документе в отношении возможности клиента переключать протоколы, могут осуществляться через проблемно–ориентированную логику, интегрированную с другими компонентами вычислительного устройства 600 на единой интегральной схеме (чипе). Варианты осуществления изобретения также могут быть реализованы на практике с использованием прочих технологий, выполненных с возможностью выполнения логических операций, таких как, например, И, ИЛИ и НЕ, включая, но не ограничиваясь механические, оптические, гидравлические и квантовые технологии. В дополнение варианты осуществления изобретения могут быть реализованы на практике в рамках компьютера общего назначения или в любых других схемах или системах.
[0039] Вычислительное устройство 600 также может иметь одно или более устройство(а) 612 ввода, такое как клавиатура, мышь, перо, устройство ввода голоса или звука, устройство ввода касания или проводки, переносной игровой контроллер и т.д. Также может быть включено устройство(а) 614 вывода, такое как дисплей, громкоговорители, принтер и т.д. Вышеупомянутые устройства являются примерами и могут быть использованы другие. Вычислительное устройство 600 может включать в себя одно или более соединения 616 связи, обеспечивающие связь с другими вычислительными устройствами 650. Примеры подходящих соединений 616 связи включают, но не ограничиваются, радиочастотную (RF) схему передатчика, приемника и/или приемопередатчика; порты универсальной последовательной шины (USB), параллельные и/или последовательные порты.
[0040] Понятие машиночитаемые носители информации, используемое в данном документе, включает в себя компьютерные запоминающие носители информации. Компьютерные запоминающие носители информации могут включать в себя энергозависимые и энергонезависимые, съемные и несъемные носители информации, реализованные любым способом или по любой технологии для хранения информации, такой как машиночитаемые инструкции, структуры данных или программные модули. Системная память 604, съемное запоминающее устройство 609 и несъемное запоминающее устройство 610 все являются примерами компьютерных запоминающих носителей информации (например, хранилища памяти). Компьютерные запоминающие носители информации могут включать в себя RAM, ROM, электрически стираемую постоянную память (EEPROM), флэш–память или прочую технологию памяти, CD–ROM, цифровые универсальные диски (DVD) или другое оптическое хранилище, магнитные кассеты, магнитную ленту, магнитное дисковое хранилище или прочие магнитные запоминающие устройства, или любое другое изделие, которое может быть использовано, чтобы хранить информацию, и доступ к которому может быть осуществлен посредством вычислительного устройства 600. Любые такие компьютерные запоминающие носители информации могут быть частью вычислительного устройства 600. Компьютерные запоминающие носители информации не являются несущей волной или другим распространяемым, или модулированным сигналом данных.
[0041] Средства связи могут быть воплощены посредством машиночитаемых инструкций, структур данных, программных модулей или прочих данных в модулированном сигнале данных, таком как несущая волна или другой транспортный механизм, и включают в себя любые средства доставки информации. Понятие «модулированный сигнал данных» может описывать сигнал, одна или более характеристики которого установлены или изменены таким образом, чтобы кодировать информацию в сигнале. В качестве примера, а не ограничения, средства связи могут включать в себя проводные средства, такие как проводная сеть или прямое проводное соединение, и беспроводные средства, такие как акустические, радиочастотные (RF), инфракрасные и прочие беспроводные средства.
[0042] Фиг. 7A и 7B иллюстрируют мобильное вычислительное устройство 700, например, мобильный телефон, интеллектуальный телефон, носимый компьютер (такой как интеллектуальные наручные часы), планшетный компьютер, компьютер класса лэптоп и аналогичное, с помощью которого могут быть реализованы на практике варианты осуществления изобретения. В некоторых аспектах клиентом может быть мобильное вычислительное устройство. При обращении к Фиг. 7A иллюстрируется один аспект мобильного вычислительного устройства 700 для реализации аспектов. В базовой конфигурации мобильное вычислительное устройство 700 является переносным компьютером как с элементами ввода, так и элементами вывода. Мобильное вычислительное устройство 700 как правило включает в себя дисплей 705 и одну или более кнопки 710 ввода, которые позволяют пользователю вводить информацию в мобильное вычислительное устройство 700. Дисплей 705 мобильного вычислительного устройства 700 также может функционировать в качестве устройства ввода (например, дисплей с сенсорным экраном).
[0043] Если включен, необязательный боковой элемент 715 ввода обеспечивает дополнительный ввод пользователя. Боковой элемент 715 ввода может быть поворотным выключателем, кнопкой или любым другим типом элемента ручного ввода. В альтернативных аспектах мобильное вычислительное устройство 700 может включать больше или меньше элементов ввода. Например, дисплей 705 может не быть сенсорным экраном в некоторых вариантах осуществления.
[0044] В еще одном другом альтернативном варианте осуществления мобильное вычислительное устройство 700 является портативной телефонной системой, такой как сотовый телефон. Мобильное вычислительное устройство 700 также может включать в себя необязательную клавишную панель 735. Необязательная клавишная панель 735 может быть физической клавишной панелью или «программной» клавишной панелью, которая формируется на дисплее с сенсорным экраном.
[0045] В различных вариантах осуществления элементы вывода включают в себя дисплей 705 для показа графического интерфейса пользователя (GUI), визуальный индикатор 720 (например, светоизлучающий диод) и/или аудио преобразователь 725 (например, громкоговоритель). В некоторых аспектах мобильное вычислительное устройство 700 включает преобразователь вибрации для обеспечения пользователю тактильной обратной связи. В еще одном другом аспекте мобильное вычислительное устройство 700 включает порты ввода и/или вывода, такие как аудио ввода (например, микрофонный разъем), аудио вывод (например, разъем для головных телефонов) и видео вывод (например, порт HDMI) для отправки сигналов или приема сигналов от внешнего устройства.
[0046] Фиг. 7B является структурной схемой, иллюстрирующей архитектуру одного аспекта мобильного вычислительного устройства. Т.е. мобильное вычислительное устройство 700 может включать систему 702 (например, архитектуру), чтобы реализовывать некоторые аспекты. В одном варианте осуществления система 702 реализуется в качестве «интеллектуального телефона», выполненного с возможностью выполнения одного или более приложений (например, браузера, работы с электронной почтой, работы с календарем, программ администрирования контактов, клиентов обмена сообщениями, игр и клиентов/проигрывателей мультимедиа). В некоторых аспектах система 702 является интегрированной в качестве вычислительного устройства, такого как интегрированный персональный цифровой помощник (PDA) и беспроводной телефон.
[0047] Одна или более прикладных программ 766 могут быть загружены в память 762 и выполняться в или в ассоциации с операционной системой 764. Примеры прикладных программ включают в себя программы номеронабирателя, программы работы с электронной почтой, программы администрирования персональной информации (PIM), программы электронной обработки текста, программы работы с электронными таблицами, программы Интернет браузера, программы обмена сообщениями и т.д. Система 702 также включает в себя зону 768 энергонезависимого хранилища в памяти 762. Зона 768 энергонезависимого хранилища может быть использована, чтобы хранить постоянную информацию, которая не должна быть потеряна, если отключается питание системы 702. Прикладные программы 766 могут использовать и хранить информацию в зоне 768 энергонезависимого хранилища, такую как сообщения электронной почты или другие сообщения, используемые приложением работы с электронной почтой или аналогичным. Приложение синхронизации (не показано) также размещается в системе 702 и запрограммировано взаимодействовать с соответствующим приложением синхронизации, которое размещается на хост–компьютере, чтобы сохранять информацию, хранящуюся в зоне 768 энергонезависимого хранилища, синхронизированной с соответствующей информацией, хранящейся на хост–компьютере. Как должно быть понятно, прочие приложения могут быть загружены в память 762 и выполняться на мобильном вычислительном устройстве 700, описанном в данном документе (например, поисковая машина, модуль извлечения, модуль ранжирования по релевантности, модуль оценки ответа и т.д.).
[0048] Система 702 имеет источник 770 питания, который может быть реализован в качестве одной или более батарей. Источник 770 питания возможно дополнительно включает внешний источник, такой как адаптер AC или стыковочная станция с питанием, которые дополняют или перезаряжают батареи.
[0049] Система 702 также может включать в себя слой 772 радиоинтерфейса, который выполняет функцию передачи и приема радиочастотной связи. Слой 772 радиоинтерфейса обеспечивает беспроводную соединяемость между системой 702 и «внешним миром» через оператора связи или поставщика услуги. Передачи к и от слоя 772 радиоинтерфейса проводятся под управлением операционной системы 764. Другими словами, связь, принимаемая слоем 772 радиоинтерфейса, может быть распространена по прикладным программам 766 через операционную систему 764 и наоборот.
[0050] Визуальный индикатор 720 может быть использован, чтобы предоставлять визуальные уведомления и/или аудиоинтерфейс 774 может быть использован для создания слышимых уведомлений через аудио преобразователь 725. В иллюстрируемом варианте осуществления визуальный индикатор 720 является светоизлучающим диодом (LED), а аудио преобразователь 725 является громкоговорителем. Эти устройства могут быть непосредственно соединены с истопником 770 питания так, что когда активируются, они остаются включенными в течение продолжительности, которая предписывается механизмом уведомления, даже несмотря на то, что процессор 760 и прочие компоненты могут быть выключены для экономии питания от батареи. LED может быть запрограммирован оставаться включенным неопределенное время до тех пор, пока пользователь не предпринимает действие, чтобы указывать включенный статус устройства. Аудиоинтерфейс 774 используется чтобы предоставлять слышимые сигналы и принимать слышимые сигналы от пользователя. Например, в дополнение к соединению с аудио преобразователем 725, аудиоинтерфейс 774 также может быть соединен с микрофоном, чтобы принимать слышимый ввод для обеспечения телефонного разговора. В соответствии с вариантами осуществления настоящего изобретения микрофон может также служить в качестве аудио датчика, чтобы обеспечивать управление уведомлениями, как будет описано ниже. Система 702 может дополнительно включать в себя видеоинтерфейс 776, который обеспечивает работу бортовой камеры 730, чтобы записывать неподвижные изображения, видеопоток и аналогичное.
[0051] Мобильное вычислительное устройство 700, реализующее систему 702, может иметь дополнительные признаки и функциональные возможности. Например, мобильное вычислительное устройство 700 также может включать в себя дополнительные устройства хранения данных (съемные и/или несъемные), такие как магнитные диски, оптические диски или лента. Такое дополнительное хранилище иллюстрируется на Фиг. 7B зоной 768 энергонезависимого хранилища.
[0052] Данные/информация, сформированные или захваченные мобильным вычислительным устройством 700 и сохраняемые через систему 702, могут быть сохранены локально на мобильном вычислительном устройстве 700, как описано выше, или данные могут быть сохранены на любом числе запоминающих носителей информации, доступ к которым может быть осуществлен посредством устройства через слой 772 радиоинтерфейса или через проводное соединение между мобильным вычислительным устройством 700 и отдельным вычислительным устройством, ассоциированным с мобильным вычислительным устройством 700, например, серверным компьютером в распределенной вычислительной сети, такой как Интернет. Как должно быть понятно, доступ к таким данным/информации может быть осуществлен через мобильное вычислительное устройство 700 через слой 772 радиоинтерфейса или через распределенную вычислительную сеть. Аналогичным образом такие данные/информация могут быть быстро перенесены между вычислительными устройствами для хранения и использования в соответствии с хорошо известными средствами переноса и хранения данных/информации, включая электронную почту и системы совместного использования данных/информации.
[0053] Фиг. 8 иллюстрирует один аспект архитектуры системы для обработки данных, принятых в вычислительной системе от удаленного источника, такого как персональный компьютер 804, планшетное вычислительное устройство 806 или мобильное вычислительное устройство 808, как описано выше. Контент, отображаемый на серверном устройстве 802, может быть сохранен в разных каналах связи или других типах хранения. Например, различные документы могут быть сохранены с использованием службы 822 каталогов, веб–портала 824, службы 826 почтовых ящиков, магазина 828 виртуальной реальности или сайта 830 социальной сети.
[0054] Генератор 3D пространства и программа 820 виртуальной реальности могут быть использованы клиентом, который осуществляет связь с серверным устройством 802, и/или генератор 3D пространства и программа 821 виртуальной реальности могут быть использованы серверным устройством 802. Серверное устройство 802 может предоставлять данные к и от клиентского вычислительного устройства, такого как персональный компьютер 804, планшетное вычислительное устройство 806 и/или мобильное вычислительное устройство 808 (например, интеллектуальный телефон), посредством сети 815. В качестве примера компьютерная система, описанная выше, может быть воплощена в персональном компьютере 804, планшетном вычислительном устройстве 806, мобильном вычислительном устройстве 808 (например, интеллектуальном телефоне) и/или HMD 810. Любой из этих вариантов осуществления вычислительных устройств может получать контент из хранилища 816 в дополнение к приему графических данных, используемых либо для предварительной обработки в системе–источнике графики, либо постобработки в принимающей вычислительной системе.
[0055] Фиг. 9 иллюстрирует примерное планшетное вычислительное устройство 900, которое может исполнять один или более аспекты, раскрытые в данном документе в связи с устройством виртуальной реальности. В дополнение аспекты и функциональные возможности, описанные в данном документе, могут работать через распределенные системы (например, основанные на облаке вычислительные системы), где функциональные возможности приложения, память, хранение и извлечение данных и различные функции обработки могут работать удалено друг от друга через распределенную вычислительную сеть, такую как Интернет или интрасеть. Интерфейсы пользователя и информация различных типов могут отображаться через бортовые дисплеи вычислительного устройства или через удаленные блоки отображения, ассоциированные с одним или более вычислительными устройствами. Например, интерфейсы пользователя и информация различных типов могут отображаться и с ними может осуществляться взаимодействие на поверхности стены, на которую проецируются интерфейс пользователя и информация различных типов. Взаимодействие с множеством вычислительных систем, с помощью которых могут быть реализованы на практике варианты осуществления изобретения, включает в себя ввод с клавиатуры, ввод с сенсорного экрана, голосовой или другой аудио ввод, ввод жестом, где ассоциированное вычислительное устройство оборудовано функциональной возможностью обнаружения (например, камерой) для захвата и интерпретации жестов пользователя, чтобы управлять функциональными возможностями вычислительного устройства, и аналогичное.
[0056] По меньшей мере нижеследующие аспекты будут понятны из вышеприведенного обсуждения. В одном аспекте технология относится к способу для управления видом виртуальной камеры в виртуальном мире. Способ включает в себя этапы, на которых: на основе положения шлема–дисплея, идентифицируют первоначальный угол поворота виртуальной камеры относительно глобальной системы координат виртуального мира, при этом виртуальная камера упакована в контейнер так, что поворот контейнера вызывает поворот виртуальной камеры относительно глобальной системы координат; принимают указание изменить вид на конкретное направление; идентифицируют требуемый угол поворота относительно глобальной системы координат для вида, чтобы он соответствовал конкретному направлению; и поворачивают контейнер на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры. В примере, поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат. В другом примере способ также включает в себя этапы, на которых: отображают на дисплейном экране HMD вид с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры; на основе приема указания изменить вид на конкретное направление, осуществляют плавный переход экрана в черный экран; и осуществляют плавный переход экрана из черного экрана обратно в отображение вида с виртуальной камеры в соответствии с итоговым углом поворота виртуальной камеры. В еще одном примере этап, на котором принимают указание, включает в себя этап, на котором принимают выбор маркера передвижения. В еще одном другом примере способ также включает в себя этап, на котором отображают выбираемый маркер передвижения, при этом отображение выбираемого маркера передвижения указывает конкретное направление.
[0057] В другом примере угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси или угол наклона в поперечном направлении. В еще одном другом примере способ дополнительно включает в себя этап, на котором определяют значение поворота посредством: вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и сложения промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота.
[0058] В другом аспекте технология относится к системе, включающей в себя: шлем–дисплей (HMD); по меньшей мере один процессор, оперативно соединенный с HMD; и память, хранящую инструкции, которые, когда исполняются по меньшей мере одним процессором, выполняют набор операций, содержащих: на основе положения HMD, идентификацию первоначального угла поворота виртуальной камеры у виртуальной камеры относительно глобальной системы координат виртуального мира, при этом виртуальная камера упакована в контейнер так, что поворот контейнера вызывает поворот виртуальной камеры относительно глобальной системы координат; прием указания изменить вид на конкретное направление; идентификацию требуемого угла поворота относительно глобальной системы координат для вида, чтобы он соответствовал конкретному направлению; и поворот контейнера на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры.
[0059] В примере, поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат. В другом примере операции дополнительно включают в себя: отображение на дисплейном экране HMD вида с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры; на основе приема указания изменить вид на конкретное направление, плавный переход экрана в черный экран; и плавный переход экрана из черного экрана обратно в отображение вида с виртуальной камеры в соответствии с итоговым углом поворота виртуальной камеры. В еще одном примере прием указания, включает в себя прием выбора маркера передвижения. В еще одном другом примере операции дополнительно содержат отображение выбираемого маркера передвижения, при этом отображение выбираемого маркера передвижения указывает конкретное направление. В другом примере угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси и угол наклона в поперечном направлении. В еще одном другом примере операции дополнительно включают в себя определение значения поворота посредством: вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и сложения промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота.
[0060] В другом аспекте технология относится к способу для управления видом виртуальной камеры в виртуальном мире. Способ включает в себя этапы, на которых: на основе положения шлема–дисплея, идентифицируют первоначальный угол поворота виртуальной камеры у виртуальной камеры, при этом виртуальная камера ассоциирована с контейнером так, что поворот контейнера вызывает поворот виртуальной камеры относительно глобальной системы координат; отображают на дисплейном экране HMD вид с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры; отображают на дисплейном экране HMD маркер передвижения; принимаю выбор маркера передвижения; идентифицируют конкретное направление для вида, соответствующего выбранному маркеру передвижения; идентифицируют требуемый угол поворота для вида, чтобы он соответствовал конкретному направлению; и поворачивают контейнер на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры. В примере, поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат. В другом примере угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси или угол наклона в поперечном направлении. В еще одном другом примере операции дополнительно включают в себя определение значения поворота посредством: вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и сложения промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота. В еще одном другом примере способ дополнительно включает в себя этап, на котором определяют, находится ли вид пользователя в предварительно определенной зоне, и при этом отображение маркера передвижения основано на том, что вид пользователя находится в предварительно определенной зоне. В другом примере способ дополнительно включает в себя этап, на котором отображают зону привязки и маркер направления вида.
[0061] Аспекты настоящего изобретения, например, описаны выше при обращении к структурным схемам и/или рабочим иллюстрациям способов, систем и компьютерных программных продуктов в соответствии с аспектами изобретения. Функции/действия, отмеченные в блоках, могут происходить не в порядке как показано в любой блок–схеме. Например, два блока, показанные последовательно, могут в действительности исполняться по сути параллельно, или блоки могут иногда исполняться в обратном порядке, в зависимости от задействованных функциональных возможностей/действий.
[0062] Описание и иллюстрация одного или более аспектов, предоставленные в данной заявке, не предназначены для какого–либо ограничения или сужения объема изобретения, как заявлено. Аспекты, примеры и подробности, предоставленные в данной заявке, считаются достаточными для передачи объекта владения и позволяют другим выполнять и использовать предпочтительный вариант осуществления заявленной технологии. Заявленную технологию не следует толковать как ограниченную любым аспектом, примером или подробностями, предоставленными в данной заявке. Независимо от того, показаны ли и описаны ли в сочетании или отдельно, различные признаки (как структурные, так и методологические) могут быть выборочно включены или опущены, чтобы создавать вариант осуществления с конкретным набором признаков. Например, описанные выше примеры могут быть легко объединены друг с другом. Получив описание и иллюстрацию настоящей заявки специалист в соответствующей области техники может представить вариации, модификации и альтернативные аспекты, лежащие в рамках сущности более широких аспектов общей концепции изобретения, воплощенной в данной заявке, которые не отступают от более широкого объема заявленного изобретения.

Claims (50)

1. Способ управления видом с виртуальной камеры в виртуальном мире, содержащий этапы, на которых:
на основе положения шлема–дисплея (HMD) определяют первоначальный угол поворота виртуальной камеры относительно глобальной системы координат виртуального мира, при этом виртуальная камера упакована в контейнер так, что поворот контейнера вызывает поворот виртуальной камеры и контейнера относительно глобальной системы координат, причем виртуальная камера выполнена с возможностью поворачиваться относительно контейнера на основе положения HMD;
принимают указание изменить вид на конкретное направление;
определяют требуемый угол поворота относительно глобальной системы координат для вида так, чтобы он соответствовал этому конкретному направлению; и
поворачивают контейнер на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры.
2. Способ по п.1, в котором поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат.
3. Способ по п.1, дополнительно содержащий этапы, на которых:
отображают на дисплейном экране HMD вид с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры;
на основе приема указания изменить вид на конкретное направление осуществляют плавный переход экрана в черный экран; и
осуществляют плавный переход экрана из черного экрана обратно в отображение вида с виртуальной камеры в соответствии с итоговым углом поворота виртуальной камеры.
4. Способ по п.1, в котором упомянутый прием указания содержит этап, на котором принимают выбор маркера передвижения.
5. Способ по п.1, дополнительно содержащий этап, на котором отображают выбираемый маркер передвижения, при этом отображение выбираемого маркера передвижения указывает упомянутое конкретное направление.
6. Способ по п.1, в котором угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси и угол наклона в поперечном направлении.
7. Способ по п.1, дополнительно содержащий этап, на котором определяют значение поворота посредством:
вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и
сложения этого промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота.
8. Система для управления видом с виртуальной камеры в виртуальном мире, содержащая:
шлем–дисплей (HMD);
по меньшей мере один процессор, операционно соединенный с HMD; и
память, хранящую инструкции, которые при их исполнении по меньшей мере одним процессором выполняют набор операций, содержащих:
определение, на основе положения HMD, первоначального угла поворота виртуальной камеры для виртуальной камеры относительно глобальной системы координат виртуального мира, при этом виртуальная камера упакована в контейнер так, что поворот контейнера вызывает поворот виртуальной камеры и контейнера относительно глобальной системы координат, причем виртуальная камера выполнена с возможностью поворачиваться относительно контейнера на основе положения HMD;
прием указания изменить вид на конкретное направление;
определение требуемого угла поворота относительно глобальной системы координат для вида так, чтобы он соответствовал этому конкретному направлению; и
поворот контейнера на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры.
9. Система по п.8, в которой поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат.
10. Система по п.8, в которой операции дополнительно содержат:
отображение, на дисплейном экране HMD, вида с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры;
осуществление, на основе приема указания изменить вид на конкретное направление, плавного перехода экрана в черный экран; и
осуществление плавного перехода экрана из черного экрана обратно в отображение вида с виртуальной камеры в соответствии с итоговым углом поворота виртуальной камеры.
11. Система по п.8, в которой упомянутый прием указания содержит прием выбора маркера передвижения.
12. Система по п.8, в которой операции дополнительно содержат отображение выбираемого маркера передвижения, при этом отображение выбираемого маркера передвижения указывает упомянутое конкретное направление.
13. Система по п.8, при этом угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси и угол наклона в поперечном направлении.
14. Система по п.8, в которой операции дополнительно содержат определение значения поворота посредством:
вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и
сложения этого промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота.
15. Способ управления видом с виртуальной камеры в виртуальном мире, содержащий этапы, на которых:
на основе положения шлема–дисплея (HMD) определяют первоначальный угол поворота виртуальной камеры для виртуальной камеры, при этом виртуальная камера ассоциирована с контейнером так, что поворот контейнера вызывает поворот виртуальной камеры и контейнера относительно глобальной системы координат, причем виртуальная камера выполнена с возможностью поворачиваться относительно контейнера на основе положения HMD;
отображают на дисплейном экране HMD вид с виртуальной камеры в соответствии с первоначальным углом виртуальной камеры;
отображают на дисплейном экране HMD маркер передвижения;
принимают выбор маркера передвижения;
идентифицируют конкретное направление для вида, соответствующее выбранному маркеру передвижения;
определяют требуемый угол поворота для вида так, чтобы он соответствовал упомянутому конкретному направлению; и
поворачивают контейнер на значение поворота на основе по меньшей мере как требуемого угла поворота, так и первоначального угла поворота виртуальной камеры.
16. Способ по п.15, в котором поворот контейнера вызывает то, что итоговый угол поворота виртуальной камеры эквивалентен требуемому углу поворота относительно глобальной системы координат.
17. Способ по п.15, в котором угол поворота содержит по меньшей мере одно из следующего: угол наклона в продольном направлении, угол поворота вокруг вертикальной оси и угол наклона в поперечном направлении.
18. Способ по п.15, в котором операции дополнительно содержат определение значения поворота посредством:
вычитания первоначального угла поворота виртуальной камеры из 360 градусов, чтобы сформировать промежуточное значение; и
сложения этого промежуточного значения с требуемым углом поворота, чтобы сформировать значение поворота.
19. Способ по п.15, дополнительно содержащий этап, на котором определяют, находится ли вид пользователя в предварительно определенной зоне, при этом отображение маркера передвижения основывается на том, что вид пользователя находится в этой предварительно определенной зоне.
20. Способ по п.15, дополнительно содержащий этап, на котором на основе положения HMD отображают выделенную зону для указания объекта для выбора и маркер направления вида.
RU2019137607A 2017-04-25 2018-04-11 Основанный на контейнере поворот виртуальной камеры RU2765341C2 (ru)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762489904P 2017-04-25 2017-04-25
US62/489,904 2017-04-25
US15/636,359 US11436811B2 (en) 2017-04-25 2017-06-28 Container-based virtual camera rotation
US15/636,359 2017-06-28
PCT/US2018/026995 WO2018200200A1 (en) 2017-04-25 2018-04-11 Container-based virtual camera rotation

Publications (3)

Publication Number Publication Date
RU2019137607A RU2019137607A (ru) 2021-05-25
RU2019137607A3 RU2019137607A3 (ru) 2021-07-12
RU2765341C2 true RU2765341C2 (ru) 2022-01-28

Family

ID=63854033

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2019137605A RU2019137605A (ru) 2017-04-25 2018-04-11 Авторская разработка и формирование трехмерных окружений
RU2019137607A RU2765341C2 (ru) 2017-04-25 2018-04-11 Основанный на контейнере поворот виртуальной камеры

Family Applications Before (1)

Application Number Title Priority Date Filing Date
RU2019137605A RU2019137605A (ru) 2017-04-25 2018-04-11 Авторская разработка и формирование трехмерных окружений

Country Status (18)

Country Link
US (5) US10388077B2 (ru)
EP (3) EP3616043A1 (ru)
JP (2) JP7189152B2 (ru)
KR (2) KR20190139902A (ru)
CN (4) CN110573224B (ru)
AU (2) AU2018260575B2 (ru)
BR (1) BR112019022129A2 (ru)
CA (2) CA3056953A1 (ru)
CL (2) CL2019002951A1 (ru)
CO (2) CO2019011870A2 (ru)
IL (2) IL270112B (ru)
MX (2) MX2019012626A (ru)
MY (1) MY202365A (ru)
PH (2) PH12019550188A1 (ru)
RU (2) RU2019137605A (ru)
SG (2) SG11201909454QA (ru)
WO (3) WO2018200201A1 (ru)
ZA (2) ZA201905870B (ru)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109196447B (zh) * 2016-03-31 2022-06-17 奇跃公司 使用姿势和多dof控制器与3d虚拟对象的交互
US10388077B2 (en) 2017-04-25 2019-08-20 Microsoft Technology Licensing, Llc Three-dimensional environment authoring and generation
EP3486749B1 (en) * 2017-11-20 2022-05-11 Nokia Technologies Oy Provision of virtual reality content
US10225360B1 (en) * 2018-01-24 2019-03-05 Veeva Systems Inc. System and method for distributing AR content
EP3769242A4 (en) * 2018-03-22 2021-11-10 Hewlett-Packard Development Company, L.P. DIGITAL MARKUP IN A THREE-DIMENSIONAL ENVIRONMENT
US10916066B2 (en) * 2018-04-20 2021-02-09 Edx Technologies, Inc. Methods of virtual model modification
US20190391647A1 (en) * 2018-06-25 2019-12-26 Immersion Corporation Real-world haptic interactions for a virtual reality user
JP6745301B2 (ja) * 2018-07-25 2020-08-26 株式会社バーチャルキャスト コンテンツ配信システム、コンテンツ配信方法、コンピュータプログラム
WO2020186478A1 (en) * 2019-03-20 2020-09-24 Beijing Xiaomi Mobile Software Co., Ltd. Method and device for transmitting viewpoint switching capabilities in a vr360 application
CN110010019B (zh) * 2019-04-15 2021-07-06 珠海格力智能装备有限公司 一种装配led屏的控制方法及装置
WO2020213088A1 (ja) * 2019-04-17 2020-10-22 楽天株式会社 表示制御装置、表示制御方法、プログラム、ならびに、非一時的なコンピュータ読取可能な情報記録媒体
US11039061B2 (en) * 2019-05-15 2021-06-15 Microsoft Technology Licensing, Llc Content assistance in a three-dimensional environment
US11164395B2 (en) * 2019-05-15 2021-11-02 Microsoft Technology Licensing, Llc Structure switching in a three-dimensional environment
US11087560B2 (en) 2019-05-15 2021-08-10 Microsoft Technology Licensing, Llc Normalization of objects for a 3D environment within an authoring application
US11030822B2 (en) 2019-05-15 2021-06-08 Microsoft Technology Licensing, Llc Content indicators in a 3D environment authoring application
US11287947B2 (en) 2019-05-15 2022-03-29 Microsoft Technology Licensing, Llc Contextual input in a three-dimensional environment
US11048376B2 (en) 2019-05-15 2021-06-29 Microsoft Technology Licensing, Llc Text editing system for 3D environment
US11010984B2 (en) * 2019-06-05 2021-05-18 Sagan Works, Inc. Three-dimensional conversion of a digital file spatially positioned in a three-dimensional virtual environment
CN114787874A (zh) * 2019-12-19 2022-07-22 索尼集团公司 信息处理装置、信息处理方法和记录介质
KR20220046356A (ko) * 2020-10-07 2022-04-14 삼성전자주식회사 이동 통신 시스템에서 컨텐츠를 렌더링하는 방법 및 장치
US11847746B2 (en) * 2020-12-03 2023-12-19 Electronics And Telecommunications Research Institute Server and method for generating best view spots

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015185579A1 (en) * 2014-06-02 2015-12-10 Apelab Sarl A method and system for providing interactivity within a virtual environment
RU2014125226A (ru) * 2011-11-23 2015-12-27 Мэджик Лип, Инк. Система отображения трехмерной виртуальной и дополненной реальности
US20160180595A1 (en) * 2014-12-18 2016-06-23 Oculus Vr, Llc Method, system and device for navigating in a virtual reality environment
RU168332U1 (ru) * 2016-06-06 2017-01-30 Виталий Витальевич Аверьянов Устройство для воздействия на виртуальные объекты дополненной реальности

Family Cites Families (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5511157A (en) 1993-12-13 1996-04-23 International Business Machines Corporation Connection of sliders to 3D objects to allow easy user manipulation and viewing of objects
JPH09282483A (ja) 1996-04-19 1997-10-31 Nec Corp 映像生成装置
CN1168057C (zh) 1996-08-14 2004-09-22 挪拉赫梅特·挪利斯拉莫维奇·拉都包夫 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统
US6050822A (en) 1997-10-01 2000-04-18 The United States Of America As Represented By The Secretary Of The Army Electromagnetic locomotion platform for translation and total immersion of humans into virtual environments
JP3123501B2 (ja) 1998-03-16 2001-01-15 日本電気株式会社 空間視点制御装置
JP3341734B2 (ja) 1999-09-13 2002-11-05 凸版印刷株式会社 映像表示装置
US7043695B2 (en) 2000-09-19 2006-05-09 Technion Research & Development Foundation Ltd. Object positioning and display in virtual environments
JP4497690B2 (ja) 2000-09-20 2010-07-07 株式会社バンダイナムコゲームス ゲームシステム及び情報記憶媒体
US6646643B2 (en) 2001-01-05 2003-11-11 The United States Of America As Represented By The Secretary Of The Navy User control of simulated locomotion
US20020158873A1 (en) 2001-01-26 2002-10-31 Todd Williamson Real-time virtual viewpoint in simulated reality environment
JP3701614B2 (ja) 2001-03-09 2005-10-05 株式会社ソニー・コンピュータエンタテインメント 仮想空間制御プログラム、仮想空間制御プログラムを記録した記録媒体、プログラム実行装置、仮想空間制御方法
CA2347290C (en) 2001-05-09 2006-10-17 Free Radical Design Limited Methods and apparatus for constructing virtual environments
US7107549B2 (en) 2001-05-11 2006-09-12 3Dna Corp. Method and system for creating and distributing collaborative multi-user three-dimensional websites for a computer system (3D Net Architecture)
US7269632B2 (en) 2001-06-05 2007-09-11 Xdyne, Inc. Networked computer system for communicating and operating in a virtual reality environment
US20030146973A1 (en) 2001-11-09 2003-08-07 Swift David C 3D stereoscopic enabling methods for a monoscopic application to support 3D stereoscopic imaging
US7117450B1 (en) 2002-03-15 2006-10-03 Apple Computer, Inc. Method and apparatus for determining font attributes
EP1565888A2 (en) 2002-11-29 2005-08-24 Bracco Imaging S.p.A. System and method for displaying and comparing 3d models
JP4122983B2 (ja) 2003-01-17 2008-07-23 株式会社三洋物産 遊技機
US7570261B1 (en) * 2003-03-06 2009-08-04 Xdyne, Inc. Apparatus and method for creating a virtual three-dimensional environment, and method of generating revenue therefrom
US6990637B2 (en) 2003-10-23 2006-01-24 Microsoft Corporation Graphical user interface for 3-dimensional view of a data collection based on an attribute of the data
DE102004017730B4 (de) 2004-04-10 2006-05-24 Christian-Albrechts-Universität Zu Kiel Verfahren zur Rotationskompensation sphärischer Bilder
US8585476B2 (en) 2004-11-16 2013-11-19 Jeffrey D Mullen Location-based games and augmented reality systems
WO2006135756A1 (en) * 2005-06-09 2006-12-21 Intepoint, Llc Multi-infrastructure modeling system
US8473263B2 (en) 2005-06-09 2013-06-25 William J. Tolone Multi-infrastructure modeling and simulation system
WO2007044301A2 (en) 2005-10-04 2007-04-19 Intersense, Inc. Tracking objects with markers
CN100421119C (zh) 2006-07-11 2008-09-24 北京金山软件有限公司 一种游戏中的地图绘制方法
US8601386B2 (en) 2007-04-20 2013-12-03 Ingenio Llc Methods and systems to facilitate real time communications in virtual reality
US8584025B2 (en) 2008-05-02 2013-11-12 International Business Machines Corporation Virtual world teleportation
US8737721B2 (en) 2008-05-07 2014-05-27 Microsoft Corporation Procedural authoring
US20100045701A1 (en) 2008-08-22 2010-02-25 Cybernet Systems Corporation Automatic mapping of augmented reality fiducials
US8493408B2 (en) 2008-11-19 2013-07-23 Apple Inc. Techniques for manipulating panoramas
US9067097B2 (en) 2009-04-10 2015-06-30 Sovoz, Inc. Virtual locomotion controller apparatus and methods
CN101930623B (zh) * 2009-06-26 2012-12-12 比亚迪股份有限公司 一种三维道路模型化方法及装置
EP2382599B1 (en) 2009-07-29 2012-12-12 Metaio GmbH Method for determining the pose of a camera with respect to at least one real object
US20110270135A1 (en) 2009-11-30 2011-11-03 Christopher John Dooley Augmented reality for testing and training of human performance
EP2381423A1 (en) 2010-03-26 2011-10-26 Alcatel Lucent Method for transforming web from 2d into 3d
US20120233555A1 (en) 2010-11-08 2012-09-13 Eyelead Sa Real-time multi-user collaborative editing in 3d authoring system
US20120143681A1 (en) * 2010-12-02 2012-06-07 Microsoft Corporation Room-based computing environments
US9407904B2 (en) 2013-05-01 2016-08-02 Legend3D, Inc. Method for creating 3D virtual reality from 2D images
KR101971948B1 (ko) 2011-07-28 2019-04-24 삼성전자주식회사 평면 특성 기반 마커리스 증강 현실 시스템 및 그 동작 방법
WO2013019961A2 (en) 2011-08-02 2013-02-07 Design Play Technologies Inc. Real-time collaborative design platform
US10019962B2 (en) 2011-08-17 2018-07-10 Microsoft Technology Licensing, Llc Context adaptive user interface for augmented reality display
US9311883B2 (en) 2011-11-11 2016-04-12 Microsoft Technology Licensing, Llc Recalibration of a flexible mixed reality device
US8681179B2 (en) 2011-12-20 2014-03-25 Xerox Corporation Method and system for coordinating collisions between augmented reality and real reality
US9311744B2 (en) 2012-01-09 2016-04-12 Fca Us Llc System and method for generating an outer layer representation of an object
US9210413B2 (en) 2012-05-15 2015-12-08 Imagine Mobile Augmented Reality Ltd System worn by a moving user for fully augmenting reality by anchoring virtual objects
US9429912B2 (en) 2012-08-17 2016-08-30 Microsoft Technology Licensing, Llc Mixed reality holographic object development
CA3135585C (en) 2012-10-23 2023-10-03 Roam Holdings, LLC Three-dimensional virtual environment
US9251590B2 (en) 2013-01-24 2016-02-02 Microsoft Technology Licensing, Llc Camera pose estimation for 3D reconstruction
US20140245160A1 (en) * 2013-02-22 2014-08-28 Ubiquiti Networks, Inc. Mobile application for monitoring and controlling devices
US9898866B2 (en) 2013-03-13 2018-02-20 The University Of North Carolina At Chapel Hill Low latency stabilization for head-worn displays
US9367136B2 (en) * 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
CN105378433B (zh) * 2013-06-07 2018-01-30 诺基亚技术有限公司 用于自适应地显现基于位置的数字信息的方法和装置
US10139623B2 (en) 2013-06-18 2018-11-27 Microsoft Technology Licensing, Llc Virtual object orientation and visualization
KR102191867B1 (ko) 2013-07-10 2020-12-16 엘지전자 주식회사 복수의 유저 인터페이스 포맷을 포함하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법
US8860818B1 (en) 2013-07-31 2014-10-14 Apple Inc. Method for dynamically calibrating rotation offset in a camera system
US9451162B2 (en) 2013-08-21 2016-09-20 Jaunt Inc. Camera array including camera modules
US20160217623A1 (en) 2013-09-30 2016-07-28 Pcms Holdings, Inc. Methods, apparatus, systems, devices, and computer program products for providing an augmented reality display and/or user interface
CN103761996B (zh) 2013-10-18 2016-03-02 中广核检测技术有限公司 基于虚拟现实技术的无损检测机器人智能检测方法
US9669300B2 (en) 2013-12-27 2017-06-06 Ballcraft, Llc Motion detection for existing portable devices
CA2843576A1 (en) 2014-02-25 2015-08-25 Evelyn J. Saurette Computer-implemented method of real estate sales
US9817375B2 (en) 2014-02-26 2017-11-14 Board Of Trustees Of The University Of Alabama Systems and methods for modeling energy consumption and creating demand response strategies using learning-based approaches
US10203762B2 (en) 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US9579797B2 (en) 2014-04-10 2017-02-28 Quanser Consulting Inc. Robotic systems and methods of operating robotic systems
US9392212B1 (en) 2014-04-17 2016-07-12 Visionary Vr, Inc. System and method for presenting virtual reality content to a user
US9766460B2 (en) 2014-07-25 2017-09-19 Microsoft Technology Licensing, Llc Ground plane adjustment in a virtual reality environment
US10416760B2 (en) 2014-07-25 2019-09-17 Microsoft Technology Licensing, Llc Gaze-based object placement within a virtual reality environment
US9892560B2 (en) 2014-09-11 2018-02-13 Nant Holdings Ip, Llc Marker-based augmented reality authoring tools
US9911235B2 (en) 2014-11-14 2018-03-06 Qualcomm Incorporated Spatial interaction in augmented reality
US9652047B2 (en) 2015-02-25 2017-05-16 Daqri, Llc Visual gestures for a head mounted device
JP6110893B2 (ja) 2015-06-12 2017-04-05 株式会社コロプラ 仮想空間位置指定方法、プログラム、プログラムを記録した記録媒体、および、装置
US9520002B1 (en) 2015-06-24 2016-12-13 Microsoft Technology Licensing, Llc Virtual place-located anchor
US20160379405A1 (en) * 2015-06-26 2016-12-29 Jim S Baca Technologies for generating computer models, devices, systems, and methods utilizing the same
WO2017024118A1 (en) 2015-08-04 2017-02-09 Google Inc. Hover behavior for gaze interactions in virtual reality
JP6346131B2 (ja) 2015-09-07 2018-06-20 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および画像生成方法
JP5869177B1 (ja) 2015-09-16 2016-02-24 株式会社コロプラ 仮想現実空間映像表示方法、及び、プログラム
JP6361714B2 (ja) 2015-09-30 2018-07-25 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理システム、その制御方法及びプログラム
JP6298432B2 (ja) 2015-10-19 2018-03-20 株式会社コロプラ 画像生成装置、画像生成方法、及び画像生成プログラム
US10018847B2 (en) 2015-10-28 2018-07-10 Honeywell International Inc. Methods of vestibulo-ocular reflex correction in display systems
CN105912310A (zh) 2015-12-04 2016-08-31 乐视致新电子科技(天津)有限公司 基于虚拟现实应用的用户界面控件实现方法和装置
US11010972B2 (en) 2015-12-11 2021-05-18 Google Llc Context sensitive user interface activation in an augmented and/or virtual reality environment
US10419747B2 (en) 2015-12-22 2019-09-17 Google Llc System and methods for performing electronic display stabilization via retained lightfield rendering
KR20170099755A (ko) 2016-02-24 2017-09-01 주식회사 메타포트 보행 시뮬레이터용 hmd
US20170372499A1 (en) * 2016-06-27 2017-12-28 Google Inc. Generating visual cues related to virtual objects in an augmented and/or virtual reality environment
US10388077B2 (en) 2017-04-25 2019-08-20 Microsoft Technology Licensing, Llc Three-dimensional environment authoring and generation
US11087560B2 (en) 2019-05-15 2021-08-10 Microsoft Technology Licensing, Llc Normalization of objects for a 3D environment within an authoring application

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2014125226A (ru) * 2011-11-23 2015-12-27 Мэджик Лип, Инк. Система отображения трехмерной виртуальной и дополненной реальности
WO2015185579A1 (en) * 2014-06-02 2015-12-10 Apelab Sarl A method and system for providing interactivity within a virtual environment
US20160180595A1 (en) * 2014-12-18 2016-06-23 Oculus Vr, Llc Method, system and device for navigating in a virtual reality environment
RU168332U1 (ru) * 2016-06-06 2017-01-30 Виталий Витальевич Аверьянов Устройство для воздействия на виртуальные объекты дополненной реальности

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANDY BORRELL: "Introducing the Oculus Sample Framework for Unity 5", опубл. 08.03.2016 [найдено 07.07.2021], размещено в Интернет по адресу URL: https://developer.oculus.com/blog/introducing-the-oculus-sample-framework-for-unity-5/. *
WO 2015/185579 Al, 10.12.2015. ANDY BORRELL: "Introducing the Oculus Sample Framework for Unity 5", опубл. 08.03.2016 [найдено 07.07.2021], размещено в Интернет по адресу URL: https://developer.oculus.com/blog/introducing-the-oculus-sample-framework-for-unity-5/. *

Also Published As

Publication number Publication date
SG11201909454QA (en) 2019-11-28
CN110573224B (zh) 2023-09-01
MX2019012626A (es) 2020-01-30
US12008725B2 (en) 2024-06-11
ZA201905873B (en) 2020-12-23
CN110573224A (zh) 2019-12-13
EP3616032A1 (en) 2020-03-04
RU2019137607A3 (ru) 2021-07-12
EP3615155A1 (en) 2020-03-04
ZA201905870B (en) 2020-11-25
JP7080902B2 (ja) 2022-06-06
US10453273B2 (en) 2019-10-22
CN110573997B (zh) 2021-12-03
US10388077B2 (en) 2019-08-20
CN110573997A (zh) 2019-12-13
CO2019011966A2 (es) 2020-01-17
US20200013236A1 (en) 2020-01-09
CO2019011870A2 (es) 2020-01-17
IL270118B1 (ru) 2023-02-01
PH12019550189A1 (en) 2020-06-29
BR112019019556A2 (pt) 2020-04-22
RU2019137607A (ru) 2021-05-25
AU2018257944B2 (en) 2022-09-29
IL270118B2 (en) 2023-06-01
SG11201909455UA (en) 2019-11-28
WO2018200199A1 (en) 2018-11-01
MY202365A (en) 2024-04-24
MX2019012624A (es) 2020-01-30
AU2018260575A1 (en) 2019-09-19
EP3616043A1 (en) 2020-03-04
CL2019002950A1 (es) 2020-03-13
US11138809B2 (en) 2021-10-05
CN110832450B (zh) 2024-04-23
JP2020518071A (ja) 2020-06-18
AU2018257944A1 (en) 2019-09-19
RU2019137605A (ru) 2021-05-25
IL270118A (ru) 2019-12-31
WO2018200200A1 (en) 2018-11-01
US20180308274A1 (en) 2018-10-25
BR112019022129A2 (pt) 2020-05-05
KR20190139902A (ko) 2019-12-18
US20180308289A1 (en) 2018-10-25
IL270112B (en) 2022-07-01
US11436811B2 (en) 2022-09-06
CN118170283A (zh) 2024-06-11
NZ756888A (en) 2023-10-27
US20220375181A1 (en) 2022-11-24
JP7189152B2 (ja) 2022-12-13
AU2018260575B2 (en) 2022-04-21
US20180308290A1 (en) 2018-10-25
WO2018200201A1 (en) 2018-11-01
CN110832450A (zh) 2020-02-21
JP2020518077A (ja) 2020-06-18
CL2019002951A1 (es) 2020-03-13
CA3056953A1 (en) 2018-11-01
IL270112A (ru) 2019-12-31
KR20190141162A (ko) 2019-12-23
CA3056956A1 (en) 2018-11-01
PH12019550188A1 (en) 2020-06-08

Similar Documents

Publication Publication Date Title
RU2765341C2 (ru) Основанный на контейнере поворот виртуальной камеры
EP3479200B1 (en) Interaction with virtual objects based on determined restrictions
US20180005438A1 (en) Adaptive smoothing based on user focus on a target object
US11039061B2 (en) Content assistance in a three-dimensional environment
US11087560B2 (en) Normalization of objects for a 3D environment within an authoring application
US11030822B2 (en) Content indicators in a 3D environment authoring application
EP3970120A1 (en) Text editing system for 3d environment
NZ756888B2 (en) Container-based virtual camera rotation