CN110382066B - 混合现实观察器系统和方法 - Google Patents

混合现实观察器系统和方法 Download PDF

Info

Publication number
CN110382066B
CN110382066B CN201880016500.0A CN201880016500A CN110382066B CN 110382066 B CN110382066 B CN 110382066B CN 201880016500 A CN201880016500 A CN 201880016500A CN 110382066 B CN110382066 B CN 110382066B
Authority
CN
China
Prior art keywords
viewer
streaming media
display
user
computer graphics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880016500.0A
Other languages
English (en)
Other versions
CN110382066A (zh
Inventor
T.科塞尔特
W.叶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universal City Studios LLC
Original Assignee
Universal City Studios LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universal City Studios LLC filed Critical Universal City Studios LLC
Publication of CN110382066A publication Critical patent/CN110382066A/zh
Application granted granted Critical
Publication of CN110382066B publication Critical patent/CN110382066B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A63F13/245—Constructional details thereof, e.g. game controllers with detachable joystick handles specially adapted to a particular type of game, e.g. steering wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/355—Performing operations on behalf of clients with restricted processing capabilities, e.g. servers transform changing game scene into an encoded video stream for transmitting to a mobile phone or a thin client
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/837—Shooting of targets
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/843—Special adaptations for executing a specific game genre or game mode involving concurrently two or more players on the same game device, e.g. requiring the use of a plurality of controllers or of a specific view of game data for each player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G21/00—Chutes; Helter-skelters
    • A63G21/04—Chutes; Helter-skelters with fixed rails
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G21/00—Chutes; Helter-skelters
    • A63G21/06—Chutes; Helter-skelters with passing arrangements for cars
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G27/00—Russian swings; Great wheels, e.g. Ferris wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A63G31/16—Amusement arrangements creating illusions of travel
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G7/00—Up-and-down hill tracks; Switchbacks
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6653—Methods for processing data by generating or executing the game program for rendering three dimensional images for altering the visibility of an object, e.g. preventing the occlusion of an object, partially hiding an object
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0145—Head-up displays characterised by optical features creating an intermediate image
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/024—Multi-user, collaborative environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Optics & Photonics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Aiming, Guidance, Guns With A Light Source, Armor, Camouflage, And Targets (AREA)
  • Motorcycle And Bicycle Frame (AREA)

Abstract

一种混合现实观看系统15，包括：观察器16，其被配置成被固定到稳定平台18并且可由用户操作以通过该观察器16观看主题。观察器16包括：显示设备24、包括缩放控制装置84的用户界面63，以及包括至少一个相机74的至少一个传感器66。混合现实观看系统15还包括通信地耦合到观察器16的计算机图形生成系统60。计算机图形生成系统60被配置成基于经由观察器16的至少一个相机74捕获的图像数据来生成现实世界环境的流媒体，生成增强现实图形、虚拟现实图形或两者，其被叠合在现实世界环境的流媒体上，并且一起传送现实世界环境的流媒体与经叠合的增强现实图形、虚拟现实图形或两者，以显示在观察器16的显示设备24上。

Description

混合现实观察器系统和方法
相关申请的交叉引用
本申请要求2017年3月6日提交的题为“SYSTEMS AND METHODS FOR DIGITALOVERLAY IN AN AMUSEMENT PARK ENVIRONMENT”的美国临时专利申请号62/467,817的优先权和权益，该美国临时专利申请通过引用以其整体被并入本文中。
背景技术
本文中公开的主题涉及游乐园景点，更具体地，涉及在游乐园景点中提供增强和虚拟现实体验。
游乐园或主题公园可以包括向游乐园的客人（例如，家庭和/或所有年龄的人）提供乐趣的各种娱乐景点。通常，景点可以包括可以使用装备、家具、建筑布局、道具、装饰等等建立的主题环境。取决于主题环境的复杂性，可以证明设置和替换主题环境非常困难且耗时。此外，设置令所有客人都感到愉快的主题环境可能非常困难。实际上，同样的主题环境可能对一些客人有吸引力，而对其他客人没有吸引力。因此，现在认识到合期望的是：包括其中有可能以相对于传统的技术而言灵活且高效的方式改变景点主题的景点，或者包括或移除这样的景点中的某些主题特征。现在还认识到可能合期望的是：加强客人对这样的景点的沉浸式体验，并且为客人提供更个性化或定制的体验。
发明内容
以下总结在范围方面与本公开相称的某些实施例。这些实施例不意图限制本公开的范围，而更确切地说，这些实施例仅意图提供对本实施例的可能形式的简要概述。实际上，本实施例可以涵盖可以与下面阐述的实施例相似或不同的各种各样的形式。
在一个实施例中，混合现实观看系统包括：被配置成被固定到稳定平台并且可由用户操作以通过观察器来观看主题的观察器。观察器包括：显示设备、包括缩放控制装置的用户界面，以及至少一个传感器，该至少一个传感器包括至少一个相机。混合现实观看系统还包括：通信地耦合到观察器的计算机图形生成系统。该计算机图形生成系统被配置成基于经由观察器的至少一个相机所捕获的图像数据来生成现实世界环境的流媒体，生成增强现实图形，虚拟现实图形，或两者，其被叠合（superimpose）在现实世界环境的流媒体上，并且一起传送现实世界环境的流媒体与经叠合的增强现实图形、虚拟现实图形或两者，以在观察器的显示设备上显示。
在另一个实施例中，固定定位观察器包括：被配置成向用户显示流媒体的显示器，其中所显示的流媒体包括混合现实（MR）环境，该混合现实（MR）环境包括增强现实（AR）图形、虚拟现实（MR）图形，或两者。固定定位观察器包括相机，该相机被配置成捕获围绕固定定位观察器的现实世界环境的图像数据。固定定位观察器还包括：至少一个传感器，其被配置成收集与流媒体的生成相关的信息。
在另一个实施例中，一种方法包括：经由计算机图形生成系统接收和分析实时数据，其中接收实时数据包括：经由计算机图形生成系统接收来自固定定位观察器的至少一个传感器和用户界面的数据。该方法包括：经由计算机图形生成系统、基于接收到的实时数据来生成游戏效果，其中该游戏效果包括增强现实（AR）图形、虚拟现实（VR）图形，或两者。该方法包括：经由计算机图形生成系统，将生成的游戏效果叠加到现实世界环境的可视化上以产生混合现实可视化。该方法还包括：经由计算机图形生成系统，将混合现实可视化传送到固定定位观察器，并且经由计算机图形生成系统，在固定定位观察器的显示器上显示混合现实可视化。
附图说明
当参考附图阅读以下详细描述时，本公开的这些和其他特征、方面和优点将变得更好理解，在所述附图中，相同的字符遍及附图表示相同的部分，其中：
图1图示了根据本实施例的游乐园的实施例，该游乐园具有由包括一个或多个固定定位AR/VR观察器的增强现实和/或虚拟现实（AR/VR）系统所加强的主题景点；
图2是根据本实施例的图1的固定定位AR/VR观察器的实施例的透视图；
图3是根据本实施例的图1的AR/VR系统的实施例的框图；
图4是图示了根据本实施例的在由图1的AR/VR系统渲染的AR与VR环境之间的示例转换的示意图；
图5是图示了根据本实施例的由用于多个固定定位AR/VR观察器的图1的AR/VR系统渲染的示例AR/VR环境的示意图；以及
图6是图示了根据本实施例的使用图1的AR/VR系统创建AR/VR体验的过程的流程图。
具体实施方式
以下将描述本公开的一个或多个特定实施例。为了提供对这些实施例的简洁描述，可能没有在说明书中描述实际实现方式的全部特征。应当领会的是，在任何这样的实际实现方式的开发中，如在任何工程或设计项目中，必须做出众多实现方式特定的决策来实现开发者的特定目标，诸如符合系统相关和商业相关的约束，该约束可能从一个实现方式到另一个实现方式不同。而且，应当领会的是，这样的开发努力可能是复杂且耗时的，但是对于受益于本公开的普通技术人员而言将仍然是设计、制造和制作的例行任务。
本实施例涉及如下系统和方法：所述系统和方法提供增强现实（AR）体验、虚拟现实（VR）体验、混合现实（例如，AR和VR的组合）体验、或其组合，作为与游乐园或主题公园中的景点的部分。特别地，AR和/或VR（AR/VR）系统可以包括一个或多个观察器以向游乐园的客人提供AR/VR体验。例如，客人可以通过观察器盯着风景看，并且观察器可以便于AR体验、VR体验、或两种体验的组合。在一个实施例中，观察器可以是固定定位观察器（例如，类似于双筒望远镜、取景器或望远镜的观察器，其被固定到稳定平台或地面）。因此，观察器可以被称为固定定位AR/VR观察器。固定定位AR/VR观察器可以包括至少一个相机，该相机可以被用来捕获现实世界环境（例如，实体（physical）游乐园的各方面）的实时图像数据（例如，在现场使用期间捕获并且大体上实时传送的图片和/或视频）。固定定位AR/VR观察器可以包括显示器。例如，固定定位AR/VR观察器可以包括：分别与使用固定定位AR/VR观察器的用户的每只眼睛相对应的至少两个显示器。固定定位AR/VR观察器可以被设计成旋转和倾斜，使得用户能够改变视角、环视场景等等。
AR/VR系统可以包括计算机图形生成系统，其从固定定位AR/VR接收实时图像数据（例如，在现场使用期间捕获并且大体上实时传送的图片和/或视频），并且可以将现实世界环境的视频流和各种AR、VR或组合的AR和VR（AR/VR）图形图像一起渲染到固定定位AR/VR观察器的显示器。在一个实施例中，固定定位AR/VR观察器可以可操作以对AR/VR环境中的某些区域进行放大或缩小，以及在AR与VR环境之间转换。特别地，用户可以对AR环境中的区域（例如，特征、对象）进行放大，并且随着用户继续放大，视频流转换到VR环境。在一个实施例中，固定定位AR/VR观察器可以由用户经由固定定位AR/VR观察器的用户界面（例如，一个或多个按钮、操纵杆）进行操作，以融入AR/VR环境中的特征或对象或者与之交互（例如，抓取、选择、对准和/或移动对象）。另外，AR/VR系统的某些实施例可以为多个用户提供类似的体验，例如使用一系列联网的固定定位AR/VR观察器。
虽然本实施例可以用各种各样的设置来实现，但是在图1中描绘了具有本公开的特征的示例游乐园10。如图示的，游乐园10包括主题景点12。主题景点12可以包括：与主题相对应的实体结构14，其包括固定装备、建筑物布局、道具、装饰品等等。在图示的示例中，主题景点12被装饰为农场/谷仓房屋。主题景点12可以包括AR/VR系统15，其包括一个或多个固定定位AR/VR观察器16，从而为游乐园10的客人创建更加沉浸式、个性化和/或交互式的体验。特别地，客人或用户可以通过固定定位AR/VR观察器16环视主题景点12以用于加强的观看体验。固定定位AR/VR观察器16可以固定到稳定平台或地面18，并且用户20可以接近固定定位AR/VR观察器16，并且使用固定定位AR/VR观察器16来环视主题景点12。
固定定位AR/VR观察器16可以具有典型的双筒望眼镜或取景器可以具有的功能。例如，固定定位AR/VR观察器16可以由用户20旋转或倾斜，以观看主题景点12的不同区域。例如，固定定位AR/VR观察器16可以具有缩放效果，使得用户20可以对主题景点12的区域进行放大或缩小。此外，固定定位AR/VR观察器16可以便于AR体验、VR体验或两种体验的组合。特别地，固定定位AR/VR观察器16可以在显示器24上渲染AR/VR环境22，并且AR/VR环境22可以包括AR/VR图形26。在图示的示例中，在不使用固定定位AR/VR观察器16的情况下，看着主题景点12的客人可能仅看到谷仓房屋28。然而，使用固定定位AR/VR观察器16的用户20可以看到谷仓房屋28以及AR/VR图形26，诸如在谷仓房屋28前面的两匹马30。
在图2中示出了固定定位AR/VR观察器16的实施例的透视图。如所示的，固定定位AR/VR观察器16可以固定到稳定平台或地面18。固定定位AR/VR观察器16可以包括观察器部分40和固定装置部分42，该观察器部分40包括显示器24，并且固定装置部分42将固定定位AR/VR观察器16固定到稳定平台或地面18。用户20可以站在观看区域44中以观察固定定位AR/VR观察器16的显示器24。显示器24可以包括一个或多于一个显示器（例如，分别对应于用户20的每只眼睛的两个显示器46）。显示器46可以具有任何合适的形状，诸如圆形、正方形、矩形、椭圆形等。显示器46可以具有特征尺寸48。在一些实施例中，显示器24可以采用用户20附近的客人也可以看到正在呈现给用户20的内容的方式进行配置。例如，显示器46的特征尺寸48足够大，使得在用户20后面和/或邻近的客人可以看到显示器46上正示出的内容。
固定定位AR/VR观察器16具有视角49。在一个实施例中，用户20可以通过沿着旋转方向50（例如，大体上平行于稳定平台或地面18）、沿着旋转方向52（例如，大体上平行于旋转方向50）或其组合旋转或倾斜观察器部分40来改变视角49。在一个实施例中，用户20还可以通过沿着方向54（例如，垂直于稳定平台或地面18的方向）升高或降低观察器部分40来改变视角49。如可以领会的，固定定位AR/VR观察器16可以包括其他硬件和/或软件组件，如将在图3中讨论的那样。
图3是AR/VR系统15的各种组件的框图。在图示的实施例中，AR/VR系统15包括：一个或多个固定定位AR/VR观察器16，其经由通信网络62通信地且可操作地耦合到（例如，在游乐园10内的）计算机图形生成系统60。通信网络62可以包括无线局域网、无线广域网、近场通信和/或经由以太网电缆、光纤等的有线网络。一个或多个固定定位AR/VR观察器16可以向计算机图形生成系统60传送信号或数据并从计算机图形生成系统60接收信号或数据，以创建AR/VR环境22（例如，经由一个或多个固定定位AR/VR观察器16呈现的AR/VR图形26和/或声音效果）。计算机图形生成系统60可以经由通信网络62通信地耦合到数据服务器64。数据服务器64可以是可以存储和/或处理用户20的用户信息的远程或现场数据服务器。用户信息可以包括由用户20提供或授权的任何合适的信息，诸如支付信息、会员信息、个人信息（例如，年龄、身高、特殊需求等）、游戏信息（例如，关于与主题景点12相关联的视频游戏的信息、关于用户20在视频游戏中与之相关联的特定角色的信息、关于用户20的游戏历史的信息），等等。
如图3中图示的，固定定位AR/VR观察器16可以包括传感器66、用户界面68、呈现设备70，以及通信地耦合到传感器66和用户界面68的数据编码器72。数据编码器72可以接收和/或处理（例如，编码）由传感器66和用户界面68提供的数据或信号。例如，编码器72可以被实现为一个或多个处理器，其可以遵循特定算法来收集由传感器66和用户界面68提供的可流式传输的（streamable）数据，并且生成经编码的数据。编码器72可以例如经由通信网络62通信地耦合到计算机图形生成系统60，以将经编码的数据（对应于来自传感器66和用户界面68的数据和信号）流式传输到计算机图形生成系统60。编码器72可以大体上实时地和/或在从计算机图形生成系统60接收到指令时将经编码的数据流式传输到计算机图形生成系统60。
传感器66可以包括一个或多个相机74、一个或多个取向和定位传感器76（例如，加速度计、磁力计、陀螺仪、全球定位系统（GPS）接收器、一个或多个多自由度（MDOF）惯性测量单元（IMU）等等）、一个或多个光传感器78、一个或多个存在传感器80（例如，运动传感器、超声传感器、反射传感器、中断射束（break-beam）传感器等等），以及一个或多个天线82。
一个或多个相机74可以在用户20的现场使用期间捕获现实世界图像（例如，现实世界环境的图像和/或实时视频数据，诸如主题景点12）。一个或多个相机74可以大体上实时地传送捕获的现实世界图像。在一个实施例中，固定定位AR/VR观察器16可以包括至少两个相机74，它们可以分别对应于用户20的相应视点（例如，右眼和左眼视图）。在一个实施例中，一个或多个相机74可以是高分辨率和/或高速相机。例如，一个或多个相机74可以是4K分辨率数字高速相机（例如，帧速率超过大约每秒60帧并且水平分辨率大约为4,000像素）。由于一个或多个相机74（例如，一个或多个相机74被设置在固定定位AR/VR观察器16上）具有高速和高分辨率能力，因此捕获的现实世界图像可以具有高分辨率和高三维（3D）深度，这可以帮助生成具有高水平的现实感的AR/VR图形。一个或多个取向和定位传感器76可以捕获指示固定定位AR/VR观察器16的视角49的数据。一个或多个光传感器78可以是用于检测环境光水平（例如，其亮/暗的程度）的任何合适的光传感器。
一个或多个存在传感器80可以捕获指示可以阻断或进入固定定位AR/VR观察器16的视角49的对象（例如，现实世界对象、人）的存在的数据。一个或多个存在传感器80可以捕获指示用户20的存在的数据。在一个实施例中，可以基于由一个或多个存在传感器80捕获的数据来激活（例如，经由处理器90）和停用固定定位AR/VR观察器16。例如，如果固定定位AR/VR观察器16未在使用中（例如，没有检测到用户20的存在），则可以将固定定位AR/VR观察器16停用至睡眠或待机模式，并且响应于检测到用户20的存在，可以从睡眠或待机模式激活固定定位AR/VR观察器16。在一个实施例中，一个或多个存在传感器80可以被设置在客人侧（挨着用户20的客人）并且通信地耦合（例如，经由有线或无线连接）到固定定位AR/VR观察器16。一个或多个天线82可以是被用来识别用户20的射频识别（RFID）天线82。
用户界面68（例如，游戏控制装置）可以包括任何合适的输入设备（例如，按钮、操纵杆、旋转器、旋钮），以使得用户20能够提供涉及固定定位AR/VR观察器16的操作的指令。例如，用户界面68可以包括缩放控制装置84（例如，旋转器、旋钮），其被配置成使得用户20能够对显示器24上示出特征（例如，现实字特征、AR/VR图形26）进行放大和缩小。用户界面68还可以包括按钮86，该按钮86可以被配置成使得不同的动作和/或效果能够被应用在AR/VR环境22中。例如，按钮86可以使得用户20能够控制AR/VR图形26的角色或对象以在AR/VR环境22中在不同方向（例如，上、下、左、右）上移动。例如，按钮86可以使得用户20能够在AR/VR环境22中进行AR/VR图形26的选择或者抓取/释放AR/VR图形26的对象。在某些实施例中，由一个或多个取向和定位传感器76捕获的数据和/或用户界面68的使用可以被用于分析哪些景点特征（例如，现实世界对象、AR/VR图形26）用户20花费最多时间来看和/或互动。
呈现设备70可以经由通信网络62通信地且可操作地耦合到计算机图形生成系统60，以接收对应于呈现内容的信号或数据，并且显示所述呈现内容（例如，AR/VR图形图像或视频流、AR/VR图形26）以创建AR/VR环境22。呈现设备70可以包括显示器24和音频换能器88（例如，扬声器）。如上面阐述的，显示器24可以包括一个或多个显示器46，例如两个显示器46，其分别对应于使用固定定位AR/VR观察器16的用户20的每只眼睛。显示器24还可以被配置成使得挨着用户20的客人也可以看到在显示器24上向用户20示出的内容。在一个实施例中，显示器24可以是4K分辨率显示器（例如，水平分辨率大约为4,000像素）。音频换能器88可以包括任何合适的设备（诸如一个或多个扬声器）以呈现声音效果。
为了支持AR/VR环境22的创建，计算机图形生成系统60可以包括处理电路，诸如处理器90和存储器92。处理器90可以可操作地耦合到存储器92以执行用于实施目前公开的技术的指令，该技术生成与AR/VR图形26合并的捕获的现实世界图像以加强用户20的AR/VR体验。这些指令可以被编码在存储于有形非暂时性计算机可读介质（诸如存储器92和/或其他存储装置）中的程序或代码中。处理器90可以是通用处理器、片上系统（SoC）设备、专用集成电路（ASIC）或某个其他类似的处理器配置。
计算机图形生成系统60可以包括任何合适的硬件、软件（例如，游戏引擎）和算法，从而使得能够实现合适的AR/VR平台。例如，计算机图形生成系统60可以在存储器92中存储或者在数据服务器64中访问主题景点12和固定定位AR/VR观察器16的定位的模型（例如，具有空间信息的三维模型、计算机辅助设计（CAD）文件）。特别地，该模型可以包括固定定位AR/VR观察器16相对于现实世界周围环境（例如，主题景点12）的定位信息。该模型与来自数据编码器72的其他输入（例如，来自固定定位AR/VR观察器16的用户界面68和传感器66的经编码的数据）一起被用来向呈现设备70提供信号。特别地，当用户20操作固定定位AR/VR观察器16（例如，改变视角49、放大和缩小、接通按钮86）时，计算机图形生成系统60被动态地更新以生成和渲染AR/VR图形26，其被叠合在所捕获的现实世界图像上以创建AR/VR环境22。
如可以领会的，因为主题景点12和固定定位AR/VR观察器16的定位被建模，并且模型（例如，具有空间信息的三维模型、计算机辅助设计（CAD）文件）被存储在计算机图形生成系统60中或者可由计算机图形生成系统60访问，计算机图形生成系统60可以仅需要确定固定定位AR/VR观察器16的视角49来确定用户20正在看的地方并且确定AR/VR图形和所捕获的现实世界图像的合适叠加。因此，计算机图形生成系统60可以更高效地（例如，使用更少的计算能力）组合AR/VR图形26和所捕获的现实世界图像来生成AR/VR环境22。特别地，计算机图形生成系统60可以高效地生成AR/VR图形26并且将其叠合到所捕获的现实世界图像上，使得AR/VR图形26和现实世界图像以高水平的现实感对齐，从而使得AR/VR图形26能够表现出它们在正常条件下将如何。例如，如果根据固定定位AR/VR观察器16的视角49，AR/VR图形26应该被任何现实世界的对象（例如，实体结构14、客人、建筑物、现实世界中的对象）完全或部分地遮盖，则计算机图形生成系统60可以生成完全或部分透明的AR/VR图形26。例如，计算机图形生成系统60可以生成AR/VR图形26来叠加现实世界对象，使得现实世界对象似乎不再存在或被删除（例如，现实世界对象被利用AR/VR图形26完全或者部分遮盖）。
此外，因为在捕获现实世界图像时，生成了AR/VR图形26，并且将其大体上实时地叠加在所捕获的现实世界图像上，所以AR/VR图形26的现实感可以被加强。例如，在用户20经由AR/VR环境22中的缩放控制装置84进行放大时，计算机图形生成系统60基于由一个或多个相机74大体上实时捕获的光学放大图像来生成或更新AR/VR图形26，使得AR/VR图形26看起来更逼真（与基于数字放大的现实世界图像生成的AR/VR图形26相比）。在某些实施例中，还可以生成AR/VR图形26来提示用户20选择某些游戏选项（例如，选择角色、选择团队成员、选择与AR/VR环境22中的游戏相对应的工具/实用程序），或者向用户20提供游戏暗示（例如，在哪里探索、要收集哪些元素等的暗示）。计算机图形生成系统60还可以经由音频换能器88来生成和渲染声音效果，以加强用户在AR/VR环境22中的体验。
在一个实施例中，计算机图形生成系统60可以基于涉及用户20的信息（例如，经由一个或多个天线82传送和/或存储在数据服务器64上）来生成AR/VR环境22。例如，计算机图形生成系统60可以根据用户的游戏历史、游戏状态、成员资格状态等而在AR/VR环境22中显示某些角色、工具/实用程序和/或游戏场景。在一个实施例中，计算机图形生成系统60可以基于用户输入（例如，基于来自缩放控制装置84和/或按钮86的信号）来生成和渲染AR/VR图形26。例如，计算机图形生成系统60可以根据由用户20经由缩放控制装置84所应用的缩放效果的程度来在AR/VR环境22中显示放大或缩小的图像。在一个示例中，计算机图形生成系统60可以显示AR/VR图形26来反映由用户20经由按钮86所应用的游戏操作。例如，AR/VR图形26可以响应于按钮86正由用户20应用而示出对象被移动或抓取，对应于移动或抓取功能。如可以领会的，缩放控制装置84和按钮86可以起到游戏控制装置或操纵杆的作用。
为了加强所生成的环境的现实感，在某些实施例中，计算机图形生成系统60可以基于现实世界实体环境（例如，经由一个或多个光传感器78检测到的照明信息、经由一个或多个存在传感器80检测到的信息）来生成AR/VR图形26。例如，基于由一个或多个光传感器78收集的数据，计算机图形生成系统60可以确定现实世界实体环境是黑暗的（例如，在夜晚）。响应于该确定，计算机图形生成系统60可以降低所生成的AR/VR图形26的亮度，使得AR/VR环境22以合适的亮度呈现给用户20。例如，基于由一个或多个光传感器78收集的数据，计算机图形生成系统60可以确定现实世界实体环境过于黑暗。响应于该确定，计算机图形生成系统60可以在与AR/VR图形26组合之前增加所捕获的现实世界图像的亮度，使得AR/VR环境22以合适的亮度呈现给用户20。例如，计算机图形生成系统60可以处理来自一个或多个存在传感器80的经编码的数据，并且确定固定定位AR/VR观察器16的视角49可以被阻挡或限制（例如，被现实世界对象、人阻挡）。响应于确定了视角49可能被阻挡或限制，计算机图形生成系统60可以暂时停止将来自一个或多个相机74的所捕获的现实世界图像用于生成AR/VR图形26，而是代替地可以使用来自一个或多个相机74的先前获取的现实世界图像。
在某些实施例中，为了加强所生成的环境的现实感，计算机图形生成系统60可以生成包括实时数字阴影的AR图形（例如，AR/VR图形26）。计算机图形生成系统60可以基于相对于现实世界对象的相应视角49和现实世界照明信息（例如，经由一个或多个光传感器78检测到的照明信息、经由一个或多个存在传感器80检测到的信息、由计算机图形生成系统60的日历的内部时钟指示的一天的时间和/或一年的一天）来生成针对数字对象和AR对象的实时数字阴影。例如，可以生成具有合适形状和亮度的针对谷仓房屋28和两匹马30的数字阴影，该形状和亮度是基于现实世界光源（诸如太阳）和现实世界照明元件的入射角并且基于相对于透视视角49而言光是否被现实世界对象或人阻挡来确定的。
此外，计算机图形生成系统60可以经由通信网络62通信地且可操作地耦合到一个或多个远程观看设备65。一个或多个远程观看设备65可以包括设置在游乐园10内部或远离游乐园10设置的任何合适的显示器（例如，计算机、视频和/或音频显示器、计算机）。一个或多个远程观看设备65还可以是具有应用程序可移植性简档或APP的移动设备（例如，移动电话、智能电话和平板设备）。计算机图形生成系统60可以将生成的AR/VR图形26和/或声音效果流式传输到一个或多个远程观看设备65，使得观看该一个或多个远程观看设备65的用户可以看到与固定定位AR/VR观察器16的用户20相同的AR/VR图形26，和/或听到与所述用户20相同的声音效果。
此外，计算机图形生成系统60可以基于用户对缩放控制装置84的操作而在AR/VR环境22中的AR环境与VR环境之间进行切换。图4是图示了根据本公开的方面的在AR与VR环境之间的示例转换的示意图。在图示的实施例中，通过显示器24观看主题景点12的用户20可以看到仅包括AR图形23的AR/VR图形26。用户20可以操作固定定位AR/VR观察器16（例如，经由缩放控制装置84）以对AR特征中的一个AR特征25（例如，马）进行放大，从而看到AR特征25的细节，如在步骤100中指示的。用户20可以如在步骤102和104中指示的那样进一步放大，以看到具有更多细节的AR特征25的更放大的视图。如可以领会的，用户20可以在相反方向上操作缩放控制装置84，以从AR特征25进行缩小。在另一个实施例中，用户20可以操作固定定位AR/VR观察器16（例如，经由缩放控制装置84）以对AR特征中的另一个AR特征27（例如，谷仓房屋的门）进行放大，从而看到AR特征27的放大细节，如在步骤106中指示的。如在步骤108中指示的，用户20可以进一步放大以看到AR特征27的进一步放大视图。随着用户20继续放大，如在步骤110中指示的（例如，缩放超过预定的放大倍数阈值），计算机图形生成系统60可以生成VR图形29，使得用户的体验从AR体验转换到VR体验。例如，在步骤110中，用户的体验转换到VR环境，并且用户20可以享受VR图形29，好像用户20处于被谷仓动物围绕的谷仓房屋内部。如可以领会的，用户20可以在相反方向上操作缩放控制装置84以从VR体验往回转换到AR体验，从而对AR特征27进行缩小，或者对任何VR特征进行缩小。
在一个实施例中，计算机图形生成系统60可以通信地且可操作地耦合到多个固定定位AR/VR观察器16，以使得多个用户20能够参与同一游戏和/或以看到由其他用户20应用的动作。图5是图示了根据本公开的方面的在AR/VR环境22中的多个固定定位AR/VR观察器16之间的这样的连通性/参与（engagement）的示例的示意图。在图示的示例中，计算机图形生成系统60通信地且可操作地耦合到由第一用户122操作的第一固定定位AR/VR观察器120和由第二用户126操作的第二固定定位AR/VR观察器124。第一用户122和第二用户126两者都可以看到在相应显示器24上示出的相同的AR/VR特征128，但是从不同的角度看。此外，第一用户122和第二用户126二者都可以在相应显示器24上看到由第一用户122和第二用户126中的任一个应用的动作129（例如，在AR/VR环境22中的动作）。在图示的示例中，第一用户122操作第一固定定位AR/VR观察器120来执行动作129，诸如填充用于喂养谷仓动物132的水箱130，如在区域134中示出的。例如，第一用户122可以调整相应视角49以瞄准水箱130，使用缩放控制装置84来对水箱130进行放大或缩小，并且按下按钮86之一来开始填充水箱130。对应地，第二用户126可以从相应显示器24看到由第一用户122应用的动作129（例如，填充水箱130）。在一个实施例中，计算机图形生成系统60可以确定第二用户126也在观看区域134（例如，第二固定定位AR/VR观察器124的相应视角49与区域134的一部分重叠），并且响应于该确定，计算机图形生成系统60可以在第一固定定位AR/VR观察器120和第二固定定位AR/VR观察器124的相应显示器24上显示包括动作129的结果的相同AR/VR特征128。在另一个实施例中，计算机图形生成系统60可以确定第二用户126参与了与第一用户122相同的游戏（例如，第二用户126可以使用用户界面68提供指示来同意与第一用户122一起加入游戏），并且响应于该确定，计算机图形生成系统60可以在第一固定定位AR/VR观察器120和第二固定定位AR/VR观察器124的相应显示器24上显示包括动作129的结果的相同AR/VR特征128。
图6是图示了使用AR/VR系统15来创建AR体验、VR体验和/或其他计算中介的体验的方法140的实施例的过程流程图。方法140可以表示存储在非暂时性计算机可读介质（例如，存储器92）中，并且例如由计算机图形生成系统60的处理器90执行的启动代码或指令。一个或多个用户20和/或其他客人可以使用一个或多个固定定位AR/VR观察器16和/或一个或多个远程观看设备65来享受所生成的AR体验、VR体验和/或其他计算机中介的体验。方法140可以开始于处理器90接收和分析（框142）来自传感器66和一个或多个固定定位观察器16中的每一个的用户界面68的实时数据。该实时数据可以包括由一个或多个相机74捕获的图片和/或视频、由一个或多个取向和定位传感器76检测到的取向和/或定位信息和/或视角49、由一个或多个光传感器78检测到的照明信息、由一个或多个存在传感器80检测到的指示在固定定位观察器16附近的对象或用户的存在的信息、由一个或多个天线82接收到的指示用户的身份的信息，等等。实时数据还可以包括由用户20使用用户界面68经由缩放控制装置84和/或按钮86提供的输入（例如，指令和/或操作输入）。
方法140可以然后以处理器90生成（框144）游戏效果来继续。在一个实施例中，游戏效果可以包括基于接收到的和所分析的实时数据而生成的AR/VR图像数据和声音数据。例如，游戏效果包括涉及与用户20相关联的游戏角色的特定AR/VR图像数据。例如，取决于由用户20调整的固定定位AR/VR观察器16的视角49（例如，取决于用户20的注意力/观看兴趣），游戏效果包括某些AR/VR特征。例如，游戏效果可以包括在AR与VR环境之间的转换，这取决于由用户20应用的缩放效果（例如，放大超过某个阈值以从AR环境转换到VR环境）。作为另外的示例，游戏效果可以包括以多个用户20可以共享相同游戏体验的方式的、针对多个固定定位AR/VR观察器16的经协调AR/VR图像数据。游戏效果还可以包括与AR/VR图像数据相对应的声音数据。
方法140可以然后以下述内容继续：处理器90将生成的游戏效果叠加（框146）或叠合到所生成的现实世界环境的可视化上。处理器90可以生成现实世界图像（例如，图1中所示的实体结构14、谷仓房屋28）的视频数据流，并且使用一种或多种视频合并和/或光学合并技术，将AR/VR图形26（例如，图1中所示的两匹马30）叠加或叠合到现实世界图像上。作为示例，图形生成系统60的处理器90可以与用以观看某些特征（例如，基于视角49）的固定定位AR/VR观察器16的用户20的操作一致地或者在预定的时间流逝之后渲染AR/VR图形26。图形生成系统60可以对经由一个或多个相机74捕获的视频或图像数据执行一个或多个几何或光度识别算法，以确定视角49以及引入AR/VR图形26的时间。图形生成系统60可以基于用户20经由用户界面68所提供的输入来确定引入AR/VR图形26的时间。
该方法140可以然后以下述内容结束：处理器90传送（框148）游戏效果（例如，叠加的AR/VR图形26与现实世界环境数据和/或声音效果一起），并且在相应的一个或多个固定定位AR/VR观察器16的显示器24上和/或在一个或多个远程观看设备65上显示（框150）。
虽然在本文中图示和描述了本实施例的仅某些特征，但是本领域技术人员将想到许多修改和改变。因此，要理解的是，所附权利要求意图覆盖如落入本公开的真实精神内的全部这样的修改和改变。此外，应当理解的是，所公开的实施例的某些元件可以彼此组合或交换。

Claims (20)

1.一种混合现实观看系统，其包括：
观察器，其被配置成被固定到稳定平台并且可由用户操作以通过所述观察器观看主题，其中所述观察器包括：
显示设备；
包括缩放控制装置的用户界面；以及
至少一个传感器，所述至少一个传感器包括至少一个相机；
以及
计算机图形生成系统，其被通信地耦合到所述观察器并且被配置成：
确定所述缩放控制装置的放大倍数；
响应于确定所述缩放控制装置被缩放到第一放大倍数而生成流媒体，所述流媒体包括叠合在经由所述观察器的所述至少一个相机捕获的现实世界环境的图像数据上增强现实图形；
响应于确定所述缩放控制装置被缩放到不同于所述第一放大倍数的第二放大倍数而生成虚拟现实环境的附加的流媒体；以及
传送所述流媒体和所述附加的流媒体以被显示在所述观察器的显示设备上。
2.根据权利要求1所述的混合现实观看系统，其中，所述计算机图形生成系统被配置成：
响应于确定所述缩放控制装置被缩放到第一放大倍数而传送所述流媒体，所述流媒体包括叠合在现实世界环境的图像数据上的增强现实图形，以被显示在显示设备上；以及
响应于确定所述缩放控制装置被缩放到第二放大倍数而传送所述虚拟现实环境的附加的流媒体以被显示在显示设备上，其中所述第二放大倍数高于所述第一放大倍数。
3.根据权利要求1所述的混合现实观看系统，其中，所述观察器包括：
包括所述显示设备和所述用户界面的观察器部分，其中所述观察器部分可由用户旋转以调节视角；以及
固定装置部分，其可旋转地耦合到所述观察器部分并且将所述观察器固定地耦合到所述稳定平台。
4.根据权利要求1所述的混合现实观看系统，其中，所述观察器的显示设备包括第一显示器和第二显示器，并且其中所述第一显示器被配置成向所述用户的第一只眼睛显示所述流媒体或所述附加的流媒体，并且所述第二显示器被配置成向所述用户的第二只眼睛显示所述流媒体或所述附加的流媒体。
5.根据权利要求4所述的混合现实观看系统，其中，所述第一显示器和所述第二显示器包括相应的特性尺寸，其使得除所述用户之外的客人能够观看第一显示器、第二显示器或二者上的所述流媒体或所述附加的流媒体。
6.根据权利要求1所述的混合现实观看系统，其中，所述观察器包括扬声器。
7.根据权利要求1所述的混合现实观看系统，其中，所述观察器的所述至少一个相机中的每个相机包括具有至少每秒60帧的帧速率与至少4000像素的水平分辨率的数字高速相机。
8.根据权利要求1所述的混合现实观看系统，其中，所述至少一个传感器包括一个或多个取向和定位传感器、一个或多个多自由度惯性测量单元、一个或多个光传感器、一个或多个存在传感器、一个或多个天线，或其组合。
9.根据权利要求1所述的混合现实观看系统，其包括远程显示设备，其中，所述计算机图形生成系统被配置成传送所述流媒体或所述附加的流媒体以被显示在所述远程显示设备上。
10.根据权利要求1所述的混合现实观看系统，其中，所述计算机图形生成系统具有围绕所述观察器的现实世界环境的模型，其中，所述模型包括所述观察器相对于所述现实世界环境的空间信息。
11.一种固定定位观察器，其包括：
显示器，其被配置成向用户显示流媒体；
相机，其被配置成捕获围绕所述固定定位观察器的现实世界环境的图像数据；
至少一个传感器，其被配置成收集信息以用于生成所述流媒体；
包括缩放控制装置的用户界面，所述缩放控制装置被配置成使得用户能够对在显示器上显示的流媒体进行放大和缩小；以及
计算机图形生成系统，其被配置成：
接收由所述至少一个传感器收集的现实世界环境的图像数据和信息；
至少基于所述图像数据和信息来渲染所述流媒体，
响应于确定所述缩放控制装置被缩放超过预定阈值放大倍数，而将所述流媒体从增强现实环境转换到虚拟现实环境。
12.根据权利要求11所述的固定定位观察器，其中，所述相机包括数字高速相机，其具有至少每秒60帧的帧速率和至少4000像素的水平分辨率。
13.根据权利要求11所述的固定定位观察器，其包括一个或多个扬声器，所述扬声器被配置成提供与在显示器上显示的流媒体相对应的音频效果。
14.根据权利要求11所述的固定定位观察器，其中，所述至少一个传感器包括一个或多个取向和定位传感器、一个或多个多自由度惯性测量单元、一个或多个光传感器、一个或多个存在传感器、一个或多个天线、或其组合。
15.根据权利要求11所述的固定定位观察器，其中，所述显示器包括特性尺寸，其使得除所述固定定位观察器的用户之外的一个或多个客人能够观看显示器上的流媒体。
16.根据权利要求11所述的固定定位观察器，其中，由所述至少一个传感器收集的信息包括用户信息，并且其中，在显示器上显示的所述流媒体的至少一些内容是基于用户信息而为用户定制的。
17.一种方法，其包括：
从至少一个传感器和固定定位观察器的用户界面接收实时数据
经由计算机图形生成系统来分析所述实时数据，
基于所述实时数据经由所述计算机图形生成系统来生成游戏效果，其中经由所述计算机图形生成系统来生成游戏效果包括：
响应于确定所述用户界面的缩放控制装置被缩放到第一放大倍数而生成流媒体，所述流媒体包括被叠加到现实世界环境的可视化上的增强现实图形；以及
响应于确定所述用户界面的缩放控制装置被缩放到不同于所述第一放大倍数的第二放大倍数而生成附加的流媒体，所述附加的流媒体包括替换现实世界环境的可视化的虚拟现实图形；
经由所述计算机图形生成系统将包括所述流媒体或所述附加的流媒体的游戏效果传送到所述固定定位观察器；以及
经由所述计算机图形生成系统在所述固定定位观察器的显示器上显示所述流媒体或所述附加的流媒体。
18.根据权利要求17所述的方法，其中，所述第二放大倍数大于所述第一放大倍数。
19.根据权利要求17所述的方法，其中，接收实时数据包括：经由所述计算机图形生成系统，接收经由所述固定定位观察器的至少一个或多个取向和定位传感器、一个或多个多自由度惯性测量单元、一个或多个光传感器、一个或多个存在传感器，或一个或多个天线所收集的数据。
20.根据权利要求17所述的方法，其包括：
经由所述计算机图形生成系统，将辅助流媒体或辅助附加的流媒体传送到附加的固定定位观察器，其中所述辅助流媒体和所述辅助附加的流媒体包括来自所述附加的固定定位观察器的视角的、分别与在所述固定定位观察器上显示的所述流媒体和所述附加的流媒体相对应的可视化内容；以及
经由所述计算机图形生成系统，在所述附加的固定定位观察器的相应显示器上显示所述辅助流媒体或所述辅助附加的流媒体。
CN201880016500.0A 2017-03-06 2018-03-05 混合现实观察器系统和方法 Active CN110382066B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762467817P 2017-03-06 2017-03-06
US62/467817 2017-03-06
US15/818,463 US10572000B2 (en) 2017-03-06 2017-11-20 Mixed reality viewer system and method
US15/818463 2017-11-20
PCT/US2018/020951 WO2018165041A1 (en) 2017-03-06 2018-03-05 Mixed reality viewer system and method

Publications (2)

Publication Number Publication Date
CN110382066A CN110382066A (zh) 2019-10-25
CN110382066B true CN110382066B (zh) 2023-10-13

Family

ID=63355058

Family Applications (5)

Application Number Title Priority Date Filing Date
CN201880016468.6A Active CN110352085B (zh) 2017-03-06 2018-03-05 用于游乐园环境中的分层虚拟特征的系统和方法
CN201880016500.0A Active CN110382066B (zh) 2017-03-06 2018-03-05 混合现实观察器系统和方法
CN202310422877.9A Pending CN116474381A (zh) 2017-03-06 2018-03-06 游乐乘坐载具系统和方法
CN201880016523.1A Pending CN110352087A (zh) 2017-03-06 2018-03-06 游乐乘坐载具系统和方法
CN201880016481.1A Active CN110352086B (zh) 2017-03-06 2018-03-06 增强乘坐系统和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880016468.6A Active CN110352085B (zh) 2017-03-06 2018-03-05 用于游乐园环境中的分层虚拟特征的系统和方法

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202310422877.9A Pending CN116474381A (zh) 2017-03-06 2018-03-06 游乐乘坐载具系统和方法
CN201880016523.1A Pending CN110352087A (zh) 2017-03-06 2018-03-06 游乐乘坐载具系统和方法
CN201880016481.1A Active CN110352086B (zh) 2017-03-06 2018-03-06 增强乘坐系统和方法

Country Status (11)

Country Link
US (4) US20180255285A1 (zh)
EP (4) EP3592444B1 (zh)
JP (5) JP7257960B2 (zh)
KR (5) KR102145140B1 (zh)
CN (5) CN110352085B (zh)
CA (4) CA3054333A1 (zh)
ES (3) ES2951475T3 (zh)
MY (2) MY196303A (zh)
RU (4) RU2754991C2 (zh)
SG (4) SG11201907294PA (zh)
WO (4) WO2018165041A1 (zh)

Families Citing this family (122)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11960637B2 (en) 2013-11-11 2024-04-16 Whitewater West Ltd. Interactive amusement attraction system
US11487349B2 (en) * 2013-11-11 2022-11-01 Whitewater West Industries, Ltd. Interactive amusement attraction system and method
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
CN109478339A (zh) * 2016-07-29 2019-03-15 三菱电机株式会社 显示装置、显示控制装置和显示控制方法
US10650552B2 (en) 2016-12-29 2020-05-12 Magic Leap, Inc. Systems and methods for augmented reality
EP4300160A3 (en) 2016-12-30 2024-05-29 Magic Leap, Inc. Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light
US20180255285A1 (en) * 2017-03-06 2018-09-06 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
US10639557B2 (en) * 2017-06-22 2020-05-05 Jntvr Llc Synchronized motion simulation for virtual reality
US11118930B2 (en) * 2017-07-14 2021-09-14 Lyft, Inc. Providing information to users of a transportation system using augmented reality elements
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
US10675766B1 (en) 2017-08-28 2020-06-09 Disney Enterprises, Inc. System for introducing physical experiences into virtual reality (VR) worlds
US10362299B1 (en) * 2017-08-28 2019-07-23 Disney Enterprises, Inc. System for introducing physical experiences into virtual reality (VR) worlds
US11389719B2 (en) * 2017-11-10 2022-07-19 Whitewater West Industries Ltd. Water ride attraction incorporating interactive game play
JP7282090B2 (ja) 2017-12-10 2023-05-26 マジック リープ， インコーポレイテッド 光学導波管上の反射防止性コーティング
KR20200100720A (ko) 2017-12-20 2020-08-26 매직 립, 인코포레이티드 증강 현실 뷰잉 디바이스용 인서트
US10695682B1 (en) * 2017-12-27 2020-06-30 Disney Enterprises Inc. Automated dynamic adaptive controls
US11113887B2 (en) * 2018-01-08 2021-09-07 Verizon Patent And Licensing Inc Generating three-dimensional content from two-dimensional images
US10369483B1 (en) 2018-01-23 2019-08-06 Universal City Studios Llc Interactive tower attraction systems and methods
US10398989B2 (en) 2018-01-29 2019-09-03 Universal City Studios Llc Ride with rotating lift
US10755676B2 (en) 2018-03-15 2020-08-25 Magic Leap, Inc. Image correction due to deformation of components of a viewing device
CN112236713B (zh) 2018-05-30 2023-01-24 奇跃公司 紧凑的可变聚焦配置
WO2019228468A1 (en) 2018-05-30 2019-12-05 Ke.Com (Beijing) Technology Co., Ltd. Systems and methods for providing an audio-guided virtual reality tour
US11885871B2 (en) 2018-05-31 2024-01-30 Magic Leap, Inc. Radar head pose localization
EP3804306B1 (en) 2018-06-05 2023-12-27 Magic Leap, Inc. Homography transformation matrices based temperature calibration of a viewing system
JP7421505B2 (ja) 2018-06-08 2024-01-24 マジック リープ， インコーポレイテッド 自動化された表面選択設置およびコンテンツ配向設置を用いた拡張現実ビューア
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
WO2020010097A1 (en) 2018-07-02 2020-01-09 Magic Leap, Inc. Pixel intensity modulation using modifying gain values
US11856479B2 (en) 2018-07-03 2023-12-26 Magic Leap, Inc. Systems and methods for virtual and augmented reality along a route with markers
US11510027B2 (en) 2018-07-03 2022-11-22 Magic Leap, Inc. Systems and methods for virtual and augmented reality
WO2020023543A1 (en) 2018-07-24 2020-01-30 Magic Leap, Inc. Viewing device with dust seal integration
EP4366337A3 (en) 2018-07-24 2024-07-10 Magic Leap, Inc. Application sharing
EP4270016A3 (en) 2018-07-24 2024-02-07 Magic Leap, Inc. Temperature dependent calibration of movement detection devices
US11112862B2 (en) 2018-08-02 2021-09-07 Magic Leap, Inc. Viewing system with interpupillary distance compensation based on head motion
US10795458B2 (en) 2018-08-03 2020-10-06 Magic Leap, Inc. Unfused pose-based drift correction of a fused pose of a totem in a user interaction system
DE102018213556A1 (de) * 2018-08-10 2020-02-13 Audi Ag Verfahren und System zum Betreiben von zumindest zwei von jeweiligen Fahrzeuginsassen am Kopf getragenen Anzeigeeinrichtungen
JP7487176B2 (ja) 2018-08-22 2024-05-20 マジック リープ， インコーポレイテッド 患者視認システム
US11583781B2 (en) * 2018-09-17 2023-02-21 Universal City Studios Llc Systems and methods for actuating a show element on a ride vehicle
US10636218B2 (en) 2018-09-24 2020-04-28 Universal City Studios Llc Augmented reality for an amusement ride
US11562539B2 (en) 2018-09-25 2023-01-24 Universal City Studios Llc Modular augmented and virtual reality ride attraction
US11212331B1 (en) * 2018-10-26 2021-12-28 Snap Inc. Triggering changes to real-time special effects included in a live streaming video
JP7472127B2 (ja) 2018-11-16 2024-04-22 マジック リープ， インコーポレイテッド 画像鮮明度を維持するための画像サイズによってトリガされる明確化
KR102203371B1 (ko) * 2018-11-30 2021-01-15 삼성물산 주식회사 놀이공원에서 놀이기구를 가동하는 동안 이미지를 시각화하는 장치, 방법 및 이미지 시각화 장치를 관리하는 장치 및 방법
CN109725717A (zh) * 2018-11-30 2019-05-07 成都理想境界科技有限公司 应用于ar设备的图像处理方法及ar设备
US10692294B1 (en) 2018-12-17 2020-06-23 Universal City Studios Llc Systems and methods for mediated augmented physical interaction
CN113454507B (zh) 2018-12-21 2024-05-07 奇跃公司 用于促进波导内的全内反射的气穴结构
US11340758B1 (en) * 2018-12-27 2022-05-24 Meta Platforms, Inc. Systems and methods for distributing content
US11318607B2 (en) * 2019-01-04 2022-05-03 Universal City Studios Llc Extended reality ride test assembly for amusement park system
US10839607B2 (en) * 2019-01-07 2020-11-17 Disney Enterprises, Inc. Systems and methods to provide views of a virtual space
US10780359B2 (en) * 2019-01-08 2020-09-22 Universal City Studios Llc Systems and methods for a connected augmented environment
US11200656B2 (en) 2019-01-11 2021-12-14 Universal City Studios Llc Drop detection systems and methods
US10807531B2 (en) * 2019-01-14 2020-10-20 Universal City Studios Llc Augmented reality system for an amusement ride
US11425189B2 (en) 2019-02-06 2022-08-23 Magic Leap, Inc. Target intent-based clock speed determination and adjustment to limit total heat generated by multiple processors
EP3939030A4 (en) 2019-03-12 2022-11-30 Magic Leap, Inc. REGISTRATION OF LOCAL CONTENT BETWEEN FIRST AND SECOND VIEWERS OF AUGMENTED REALITY
KR102424311B1 (ko) * 2019-03-27 2022-07-22 다보(주) 모바일 기기가 구비된 망원경형 증강현실 관람장치
US10816813B1 (en) * 2019-04-05 2020-10-27 Disney Enterprises, Inc. Systems and methods for enhancing accuracy of spatial location and rotational orientation determination of wearable head-mounted display device
CN110013668B (zh) * 2019-04-24 2020-09-11 重庆城市管理职业学院 基于vr技术的模拟飞行体验娱乐设施热力转盘
CN114127837A (zh) 2019-05-01 2022-03-01 奇跃公司 内容提供系统和方法
GB201906340D0 (en) * 2019-05-04 2019-06-19 Studio Go Go Ltd A method and system for providing a virtual reality experience
US11483486B1 (en) * 2019-05-23 2022-10-25 Disney Enterprises, Inc. Virtual experience imaging products
US11391257B2 (en) * 2019-07-23 2022-07-19 Ford Global Technologies, Llc Power supply during vehicle startup
US11529886B2 (en) 2019-07-23 2022-12-20 Ford Global Technologies, Llc Power supply during vehicle off state
US11514673B2 (en) 2019-07-26 2022-11-29 Magic Leap, Inc. Systems and methods for augmented reality
KR20210014813A (ko) 2019-07-30 2021-02-10 삼성디스플레이 주식회사 표시장치
US11481980B2 (en) * 2019-08-20 2022-10-25 The Calany Holding S.Á´ R.L. Transitioning from public to personal digital reality experience
US10976818B2 (en) 2019-08-21 2021-04-13 Universal City Studios Llc Interactive attraction system and method for object and user association
US11442533B2 (en) * 2019-09-13 2022-09-13 iPMachine, LLC System for mixed reality experiences
KR102324845B1 (ko) * 2019-10-02 2021-11-11 (주)케이시크 사용자 게임 연계 자율주행 방법 및 시스템
US11861802B2 (en) 2019-11-11 2024-01-02 Spin Master Ltd. Augmented reality system
US11377039B2 (en) * 2019-11-13 2022-07-05 Universal City Studios Llc Systems and methods to hold and charge a personal electronic device on a ride vehicle
US11830460B2 (en) * 2019-11-14 2023-11-28 Magic Leap, Inc. Systems and methods for virtual and augmented reality
US12033081B2 (en) 2019-11-14 2024-07-09 Magic Leap, Inc. Systems and methods for virtual and augmented reality
EP4058979A4 (en) 2019-11-15 2023-01-11 Magic Leap, Inc. VIEWING SYSTEM FOR USE IN A SURGICAL ENVIRONMENT
US11145117B2 (en) 2019-12-02 2021-10-12 At&T Intellectual Property I, L.P. System and method for preserving a configurable augmented reality experience
KR102307463B1 (ko) 2020-02-05 2021-09-29 이근호 사파리 투어 시스템 및 그 시스템의 구동방법
CN115699157A (zh) 2020-02-10 2023-02-03 奇跃公司 虚拟内容的动态共置
WO2021163624A1 (en) 2020-02-14 2021-08-19 Magic Leap, Inc. Tool bridge
CN115398316A (zh) 2020-02-14 2022-11-25 奇跃公司 3d对象注释
CN117827004A (zh) 2020-02-14 2024-04-05 奇跃公司 会话管理器
US11474602B2 (en) * 2020-02-26 2022-10-18 Disney Enterprises, Inc. Gameplay system with play augmented by merchandise
US20210271881A1 (en) * 2020-02-27 2021-09-02 Universal City Studios Llc Augmented reality guest recognition systems and methods
US11207606B2 (en) * 2020-03-02 2021-12-28 Universal City Studios Llc Systems and methods for reactive projection-mapped show robot
JP2021140085A (ja) * 2020-03-06 2021-09-16 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US11196944B2 (en) * 2020-05-06 2021-12-07 At&T Intellectual Property I, L.P. System for infinite windows with optical disparity and depth resolution
CN113694531B (zh) * 2020-05-21 2024-01-19 抖音视界有限公司 游戏特效的生成方法、装置、电子设备及计算机可读介质
EP4158278A4 (en) 2020-05-27 2023-12-06 Gentex Corporation MOMENT DETECTION SYSTEM
WO2021247940A1 (en) * 2020-06-03 2021-12-09 Mr Fun, Llc Location based augmented reality gaming system
US11774770B2 (en) 2020-06-03 2023-10-03 Universal City Studios Llc Interface device with three-dimensional (3-D) viewing functionality
CN111694430A (zh) * 2020-06-10 2020-09-22 浙江商汤科技开发有限公司 一种ar场景画面呈现方法、装置、电子设备和存储介质
CN111603766B (zh) * 2020-06-29 2024-01-09 上海完美时空软件有限公司 虚拟载具的控制方法及装置、存储介质、电子装置
CN111857138A (zh) * 2020-07-03 2020-10-30 深圳怡丰自动化科技有限公司 载人自动导引车的控制方法及其应用以及相关装置
CN112130660B (zh) * 2020-08-14 2024-03-15 青岛小鸟看看科技有限公司 一种基于虚拟现实一体机的交互方法和系统
US11964214B2 (en) * 2020-08-19 2024-04-23 Universal City Studios Llc Systems and methods for adjusting an operation of an attraction system
US11561611B2 (en) 2020-10-29 2023-01-24 Micron Technology, Inc. Displaying augmented reality responsive to an input
KR102420089B1 (ko) * 2020-11-30 2022-07-13 방성환 이미지 인식 기반의 증강현실 컨텐츠 제공 장치 및 방법
JP7538025B2 (ja) 2020-12-17 2024-08-21 トヨタ自動車株式会社 移動体
EP4330797A1 (de) * 2021-03-22 2024-03-06 Manfred Weigl Vorrichtung zur ansteuerung von aktuatoren
US12112415B2 (en) * 2021-04-09 2024-10-08 Universal City Studios Llc Systems and methods for animated figure display
US11865440B2 (en) * 2021-04-15 2024-01-09 Niantic, Inc. Augmented reality hat
DE102021111457A1 (de) * 2021-05-04 2022-11-10 Vr Coaster Gmbh & Co. Kg Verfahren zum Betreiben eines Fahrgeschäfts sowie Fahrgeschäft
US20220360938A1 (en) * 2021-05-06 2022-11-10 Universal City Studios Llc Systems and methods for layered data reporting in an attraction
KR20240006061A (ko) * 2021-05-06 2024-01-12 유니버셜 시티 스튜디오스 엘엘씨 어트랙션에서의 계층화된 데이터 보고를 위한 시스템 및 방법
US20220358687A1 (en) * 2021-05-10 2022-11-10 Cerence Operating Company Touring circuitry for an immersive tour through a touring theater
JP7216940B2 (ja) * 2021-06-02 2023-02-02 株式会社Ｎｔｔコノキュー 通信システム、通信方法及び通信プログラム
JP7352598B2 (ja) * 2021-07-01 2023-09-28 本田技研工業株式会社 仮想体験提供システム、及びプログラム
KR102662250B1 (ko) 2021-07-13 2024-04-30 주식회사 리모샷 Vr 콘텐츠 제공 장치
JP7423781B2 (ja) 2021-08-18 2024-01-29 株式会社ハシラス Ｖｒアミューズメントプログラムおよび装置
WO2023048605A1 (en) * 2021-09-22 2023-03-30 Telefonaktiebolaget Lm Ericsson (Publ) Virtual reality game experience in self-driving vehicle
CN113908552A (zh) * 2021-09-29 2022-01-11 东北电力大学 一种虚拟现实结合的闯关式冰雪娱乐系统
EP4180100A1 (en) * 2021-11-11 2023-05-17 Playoke GmbH System for providing a single- or multi- player game experience
WO2023107542A1 (en) * 2021-12-09 2023-06-15 Universal City Studios Llc Amusement content processing systems and methods
CA3240128A1 (en) * 2022-01-04 2023-07-13 Universal City Studios Llc Facial activity detection for virtual reality systems and methods
CN114460749A (zh) * 2022-01-29 2022-05-10 杭州灵伴科技有限公司 头戴式显示装置和载人装置
WO2023192517A1 (en) * 2022-03-31 2023-10-05 Universal City Studios Llc Show effect system for amusement park attraction system
US12079384B2 (en) * 2022-04-21 2024-09-03 Universal City Studios Llc Artificial intelligence (AI)-assisted and dynamic ride profile head tracking systems and methods
USD1023209S1 (en) 2022-05-26 2024-04-16 Sally Industries, Inc. Indoor amusement ride
WO2024030444A1 (en) * 2022-08-03 2024-02-08 Universal City Studios Llc Systems and methods for operating an amusement park system
USD1044805S1 (en) 2022-08-04 2024-10-01 Niantic, Inc. Augmented reality hat
WO2024039679A1 (en) * 2022-08-15 2024-02-22 Universal City Studios Llc Show effect system for amusement park attraction system
WO2024054502A1 (en) * 2022-09-06 2024-03-14 Universal City Studios Llc Tangible/virtual design systems and methods for amusement park attraction design
KR20240037662A (ko) 2022-09-15 2024-03-22 배재대학교 산학협력단 가상 현실 기반 관광지 액티비티 체험 시스템
US20240190400A1 (en) * 2022-12-08 2024-06-13 Disney Enterprises, Inc. Systems and methods for pre-calculating information regarding interactions between objects during a simulation
CN118071968B (zh) * 2024-04-17 2024-06-25 深圳市赛野展览展示有限公司 一种基于ar技术的智能交互深展示方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003143478A (ja) * 2001-10-31 2003-05-16 Canon Inc 映像合成装置および情報処理方法
WO2008059086A1 (es) * 2006-11-16 2008-05-22 The Movie Virtual, S.L. Sistema y metodo para la visualizacion de una imagen aumentada aplicando tecnicas de realidad aumentada
FR2911463A1 (fr) * 2007-01-12 2008-07-18 Total Immersion Sa Dispositif d'observation de realite augmentee temps reel et procede de mise en oeuvre d'un dispositif
WO2012118507A1 (en) * 2011-03-03 2012-09-07 Research In Motion Limited Methods and apparatus to generate virtual-world environments
CN104238738A (zh) * 2013-06-07 2014-12-24 索尼电脑娱乐美国公司 在头戴式系统内产生增强虚拟现实场景的系统和方法
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
EP3062280A1 (en) * 2015-02-26 2016-08-31 Staging Design Inc. Method and system of management for switching virtual-reality mode and augmented-reality mode
CN106062862A (zh) * 2014-10-24 2016-10-26 何安莉 用于沉浸式和交互式多媒体生成的系统和方法

Family Cites Families (186)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5790187A (en) 1980-11-27 1982-06-04 Matsushita Electric Works Ltd Multiaction type electronic digital timer
EP0581943A1 (en) * 1992-02-24 1994-02-09 Hughes Aircraft Company Virtual image entertainment
JPH06176131A (ja) * 1992-12-03 1994-06-24 Namco Ltd 画像合成装置及びこれを用いた仮想体験装置
JP3491327B2 (ja) * 1994-04-13 2004-01-26 株式会社セガ 遊戯装置
TW275590B (en) 1994-12-09 1996-05-11 Sega Enterprises Kk Head mounted display and system for use therefor
JPH08160349A (ja) * 1994-12-09 1996-06-21 Sega Enterp Ltd 頭部搭載型映像表示システム、および、頭部搭載型映像表示装置
GB9506861D0 (en) 1995-04-03 1995-05-24 Zeneca Ltd Method of coating optical fibres
US6227121B1 (en) 1995-11-03 2001-05-08 Metero Amusement Corporation Modularized amusement ride and training simulation device
US5716281A (en) * 1995-11-27 1998-02-10 Sega Enterprises, Ltd. Game apparatus using a vehicle with an optical image synthesizing system
JPH1015252A (ja) * 1996-07-04 1998-01-20 Sega Enterp Ltd ゲームシステムおよびゲーム用車両
US5785592A (en) * 1996-08-12 1998-07-28 Sarcos, Inc. Interactive target game system
JP3651204B2 (ja) * 1996-12-18 2005-05-25 トヨタ自動車株式会社 立体画像表示装置、立体画像表示方法及び記録媒体
AU6021398A (en) 1997-01-16 1998-08-07 Orlo J. Fiske Amusement vehicle
JPH10309381A (ja) 1997-05-13 1998-11-24 Yoshimasa Tanaka 移動体用遊戯装置
US6220965B1 (en) 1998-07-08 2001-04-24 Universal City Studios Inc. Amusement system
ES2546929T3 (es) 1998-12-07 2015-09-30 Universal City Studios Llc Método de corrección de imágenes para compensar la distorsión de la imagen del punto de vista
JP2001062154A (ja) * 1999-08-23 2001-03-13 Kazuo Sawatake 稼動式遊戯乗り物用視覚効果及び音響効果機能ヘルメット。
JP3273038B2 (ja) * 1999-11-17 2002-04-08 株式会社ナムコ 仮想体験型ゲーム装置
US6533670B1 (en) 2000-08-14 2003-03-18 Universal City Studio, Inc. Amusement ride with pivotable motion base
US6796908B2 (en) 2001-06-14 2004-09-28 Creative Kingdoms, Llc Interactive dark ride
AU2003218369A1 (en) 2002-03-22 2003-10-13 David V. Threlkel Amusement ride
US6917370B2 (en) * 2002-05-13 2005-07-12 Charles Benton Interacting augmented reality and virtual reality
US7495638B2 (en) 2003-05-13 2009-02-24 Research Triangle Institute Visual display with increased field of view
JP4378118B2 (ja) * 2003-06-27 2009-12-02 学校法人早稲田大学 立体映像呈示装置
RU2293587C2 (ru) * 2003-08-06 2007-02-20 Владимир Алексеевич Гнездилов Аттракцион (варианты)
US20160098095A1 (en) 2004-01-30 2016-04-07 Electronic Scripting Products, Inc. Deriving Input from Six Degrees of Freedom Interfaces
US8585476B2 (en) * 2004-11-16 2013-11-19 Jeffrey D Mullen Location-based games and augmented reality systems
JP4738870B2 (ja) * 2005-04-08 2011-08-03 キヤノン株式会社 情報処理方法、情報処理装置および遠隔複合現実感共有装置
US20060250322A1 (en) 2005-05-09 2006-11-09 Optics 1, Inc. Dynamic vergence and focus control for head-mounted displays
US7955168B2 (en) 2005-06-24 2011-06-07 Disney Enterprises, Inc. Amusement ride and video game
JP2007052484A (ja) * 2005-08-15 2007-03-01 Dainippon Printing Co Ltd 画像処理装置、画像処理方法及び画像処理用プログラム並びに情報記録媒体
US20070106484A1 (en) * 2005-11-04 2007-05-10 Triverity Corporation Entertainment ride experience enhancement system
US8212859B2 (en) 2006-10-13 2012-07-03 Apple Inc. Peripheral treatment for head-mounted displays
US20080188318A1 (en) 2007-02-01 2008-08-07 Piccionelli Gregory A Ride system with motion simulation and video stream
CA2712059A1 (en) 2008-01-22 2009-07-30 The Arizona Board Of Regents On Behalf Of The University Of Arizona Head-mounted projection display using reflective microdisplays
US8025581B2 (en) 2008-05-09 2011-09-27 Disney Enterprises, Inc. Interactive interface mounting assembly for amusement and theme park rides
US20120256945A1 (en) * 2008-06-17 2012-10-11 Digigage Ltd. System for altering virtual views
ATE541624T1 (de) 2008-06-26 2012-02-15 Maurer Friedrich Soehne Fahrgeschäft, insbesondere achterbahn
US8303406B2 (en) * 2008-11-24 2012-11-06 Disney Enterprises, Inc. System and method for providing an augmented reality experience
US20100131865A1 (en) 2008-11-24 2010-05-27 Disney Enterprises, Inc. Method and system for providing a multi-mode interactive experience
SG172802A1 (en) * 2008-12-29 2011-08-29 Red Com Inc Modular digital camera
US20110025584A1 (en) * 2009-07-29 2011-02-03 Gm Global Technology Operations, Inc. Light-emitting diode heads-up display for a vehicle
RU2433487C2 (ru) * 2009-08-04 2011-11-10 Леонид Михайлович Файнштейн Способ проецирования изображения на поверхности реальных объектов
US20110141246A1 (en) 2009-12-15 2011-06-16 Justin Michael Schwartz System and Method for Producing Stereoscopic Images
US9901828B2 (en) 2010-03-30 2018-02-27 Sony Interactive Entertainment America Llc Method for an augmented reality character to maintain and exhibit awareness of an observer
US8941559B2 (en) 2010-09-21 2015-01-27 Microsoft Corporation Opacity filter for display device
US9122053B2 (en) * 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US9292973B2 (en) 2010-11-08 2016-03-22 Microsoft Technology Licensing, Llc Automatic variable virtual focus for augmented reality displays
US8576276B2 (en) 2010-11-18 2013-11-05 Microsoft Corporation Head-mounted display device which provides surround video
JP2012141461A (ja) 2010-12-29 2012-07-26 Sony Corp ヘッド・マウント・ディスプレイ
JP5704931B2 (ja) * 2011-01-18 2015-04-22 株式会社三共 遊技機
JP5790187B2 (ja) 2011-06-16 2015-10-07 ソニー株式会社 表示装置
WO2013000075A1 (en) 2011-06-29 2013-01-03 Recon Instruments Inc. Modular heads-up display systems
US8491403B2 (en) 2011-07-08 2013-07-23 Nathan Schreibfeder Amusement ride system
US8963957B2 (en) * 2011-07-15 2015-02-24 Mark Skarulis Systems and methods for an augmented reality platform
AU2011204946C1 (en) 2011-07-22 2012-07-26 Microsoft Technology Licensing, Llc Automatic text scrolling on a head-mounted display
JP2013027479A (ja) * 2011-07-27 2013-02-07 Kunio Goto 映像投影施設
US9352225B2 (en) * 2011-08-18 2016-05-31 Game Nation, Inc. System and method for providing a multi-player game experience
US9342610B2 (en) 2011-08-25 2016-05-17 Microsoft Technology Licensing, Llc Portals: registered objects as virtualized, personalized displays
US9285871B2 (en) 2011-09-30 2016-03-15 Microsoft Technology Licensing, Llc Personal audio/visual system for providing an adaptable augmented reality environment
JP5979507B2 (ja) 2011-11-24 2016-08-24 パナソニックＩｐマネジメント株式会社 頭部装着型ディスプレイ装置
US20130137076A1 (en) 2011-11-30 2013-05-30 Kathryn Stone Perez Head-mounted display based education and instruction
US20130141419A1 (en) 2011-12-01 2013-06-06 Brian Mount Augmented reality with realistic occlusion
US8705177B1 (en) 2011-12-05 2014-04-22 Google Inc. Integrated near-to-eye display module
US9497501B2 (en) 2011-12-06 2016-11-15 Microsoft Technology Licensing, Llc Augmented reality virtual monitor
CN102402005B (zh) 2011-12-06 2015-11-25 北京理工大学 自由曲面双焦面单目立体头盔显示器装置
US20150312561A1 (en) 2011-12-06 2015-10-29 Microsoft Technology Licensing, Llc Virtual 3d monitor
US20130032053A1 (en) * 2012-01-09 2013-02-07 Daniel James Stoker Hybrid Motion Ride and Ride Simulator Vehicle
US9092953B1 (en) 2012-01-24 2015-07-28 Bruce J. P. Mortimer System and method for providing a remote haptic stimulus
US8727896B2 (en) * 2012-03-14 2014-05-20 Anton Frolov Underground and underwater amusement attractions
US9183676B2 (en) * 2012-04-27 2015-11-10 Microsoft Technology Licensing, Llc Displaying a collision between real and virtual objects
US9210413B2 (en) * 2012-05-15 2015-12-08 Imagine Mobile Augmented Reality Ltd System worn by a moving user for fully augmenting reality by anchoring virtual objects
US9253524B2 (en) 2012-07-20 2016-02-02 Intel Corporation Selective post-processing of decoded video frames based on focus point determination
US10073201B2 (en) 2012-10-26 2018-09-11 Qualcomm Incorporated See through near-eye display
US9619911B2 (en) * 2012-11-13 2017-04-11 Qualcomm Incorporated Modifying virtual object display properties
US20140146394A1 (en) 2012-11-28 2014-05-29 Nigel David Tout Peripheral display for a near-eye display device
US9851787B2 (en) * 2012-11-29 2017-12-26 Microsoft Technology Licensing, Llc Display resource management
US8867139B2 (en) 2012-11-30 2014-10-21 Google Inc. Dual axis internal optical beam tilt for eyepiece of an HMD
US9519144B2 (en) 2013-05-17 2016-12-13 Nvidia Corporation System, method, and computer program product to produce images for a near-eye light field display having a defect
US9582922B2 (en) 2013-05-17 2017-02-28 Nvidia Corporation System, method, and computer program product to produce images for a near-eye light field display
US10905943B2 (en) 2013-06-07 2021-02-02 Sony Interactive Entertainment LLC Systems and methods for reducing hops associated with a head mounted system
US9908048B2 (en) 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
CN105359063B (zh) * 2013-06-09 2018-08-17 索尼电脑娱乐公司 利用追踪的头戴式显示器
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
US20150003819A1 (en) 2013-06-28 2015-01-01 Nathan Ackerman Camera auto-focus based on eye gaze
JP6237000B2 (ja) 2013-08-29 2017-11-29 セイコーエプソン株式会社 頭部装着型表示装置
US9396618B2 (en) 2013-09-30 2016-07-19 Whitewater West Industries Ltd. Interactive play center
US9630631B2 (en) 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9536353B2 (en) 2013-10-03 2017-01-03 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9715764B2 (en) * 2013-10-03 2017-07-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
WO2015051660A1 (zh) 2013-10-13 2015-04-16 北京蚁视科技有限公司 头戴式立体显示器
CN105916560B (zh) 2013-11-18 2017-10-31 乌鸦阳光创意股份有限公司 塔骑乘设备
US9463379B1 (en) * 2013-12-17 2016-10-11 Thinkwell Group Ride vehicle mounted interactive game system
US9569886B2 (en) 2013-12-19 2017-02-14 Intel Corporation Variable shading
US9494800B2 (en) 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
NZ722903A (en) * 2014-01-31 2020-05-29 Magic Leap Inc Multi-focal display system and method
US9389423B2 (en) 2014-03-11 2016-07-12 Google Inc. Head wearable display with adjustable transparency
CN103977559B (zh) * 2014-05-23 2017-10-17 北京智谷睿拓技术服务有限公司 交互方法及交互装置
US9155971B1 (en) 2014-05-28 2015-10-13 Disney Enterprises, Inc. Selective illumination of physical scenery in amusement park rides
JP2015228050A (ja) 2014-05-30 2015-12-17 ソニー株式会社 情報処理装置および情報処理方法
US9360671B1 (en) 2014-06-09 2016-06-07 Google Inc. Systems and methods for image zoom
GB2527503A (en) 2014-06-17 2015-12-30 Next Logic Pty Ltd Generating a sequence of stereoscopic images for a head-mounted display
RU2592458C2 (ru) * 2014-06-26 2016-07-20 Общество с ограниченной ответственностью "АВИАРЕАЛ" Способ формирования изображения дополненной реальности, обеспечивающий корректное восприятие удаления виртуальных объектов
JP6361327B2 (ja) * 2014-07-02 2018-07-25 セイコーエプソン株式会社 電気光学装置、及び電子機器
CN104102412B (zh) * 2014-07-24 2017-12-12 央数文化(上海)股份有限公司 一种基于增强现实技术的手持式阅览设备及其方法
EP3041591B1 (de) 2014-08-11 2016-11-09 Mack Rides GmbH & Co. KG Verfahren zum betreiben einer vorrichtung, insbesondere eines fahrgeschäftes, eines transportmittels, eines fitnessgerätes oder dergleichen
US9690375B2 (en) * 2014-08-18 2017-06-27 Universal City Studios Llc Systems and methods for generating augmented and virtual reality images
US10261579B2 (en) 2014-09-01 2019-04-16 Samsung Electronics Co., Ltd. Head-mounted display apparatus
KR102230076B1 (ko) 2014-09-01 2021-03-19 삼성전자 주식회사 헤드 마운트 디스플레이 장치
JP6290754B2 (ja) * 2014-09-11 2018-03-07 株式会社パスコ 仮想空間表示装置、仮想空間表示方法及びプログラム
US10238979B2 (en) * 2014-09-26 2019-03-26 Universal City Sudios LLC Video game ride
US20160097929A1 (en) 2014-10-01 2016-04-07 Dawson Yee See-through display optic structure
US20160097930A1 (en) 2014-10-06 2016-04-07 Steven John Robbins Microdisplay optical system having two microlens arrays
JP6363928B2 (ja) * 2014-10-10 2018-07-25 泉陽興業株式会社 遊戯施設
JP6216100B1 (ja) 2014-10-24 2017-10-18 イメージン コーポレイション マイクロディスプレイベースの没入型ヘッドセット
US20170072316A1 (en) * 2014-11-16 2017-03-16 Astral Vision Ltd. System and method for providing an alternate reality ride experience
EP3237953A1 (en) 2014-12-26 2017-11-01 CY Vision Inc. Near-to-eye display device with variable resolution
US10108832B2 (en) 2014-12-30 2018-10-23 Hand Held Products, Inc. Augmented reality vision barcode scanning system and method
US9905052B2 (en) 2015-01-05 2018-02-27 Worcester Polytechnic Institute System and method for controlling immersiveness of head-worn displays
US10740971B2 (en) 2015-01-20 2020-08-11 Microsoft Technology Licensing, Llc Augmented reality field of view object follower
CN104627078B (zh) * 2015-02-04 2017-03-08 上海咔酷咔新能源科技有限公司 基于柔性透明oled的汽车驾驶虚拟系统及其控制方法
DE112016000728T5 (de) 2015-02-12 2017-10-26 Google Inc. Kombinieren eines Displays mit engem Blickfeld und hoher Auflösung und eines Weitwinkeldisplays mit mittlerer Auflösung
US9358473B2 (en) 2015-03-24 2016-06-07 Anthony Frolov Interactive amusement attraction
US10627908B2 (en) * 2015-03-27 2020-04-21 Lucasfilm Entertainment Company Ltd. Facilitate user manipulation of a virtual reality environment view using a computing device with touch sensitive surface
US20160314624A1 (en) * 2015-04-24 2016-10-27 Eon Reality, Inc. Systems and methods for transition between augmented reality and virtual reality
US9690374B2 (en) 2015-04-27 2017-06-27 Google Inc. Virtual/augmented reality transition system and method
US20160343173A1 (en) * 2015-05-20 2016-11-24 Daqri, Llc Acousto-optical display for augmented reality
US20160349509A1 (en) * 2015-05-26 2016-12-01 Microsoft Technology Licensing, Llc Mixed-reality headset
US9877016B2 (en) 2015-05-27 2018-01-23 Google Llc Omnistereo capture and render of panoramic virtual reality content
US20170363949A1 (en) 2015-05-27 2017-12-21 Google Inc Multi-tier camera rig for stereoscopic image capture
US10038887B2 (en) 2015-05-27 2018-07-31 Google Llc Capture and render of panoramic virtual reality content
US9942539B2 (en) * 2015-06-01 2018-04-10 Disney Enterprises, Inc. Scanning laser-based three dimensional (3D) display systems for viewers wearing 3D glasses
US10366534B2 (en) 2015-06-10 2019-07-30 Microsoft Technology Licensing, Llc Selective surface mesh regeneration for 3-dimensional renderings
US9638921B2 (en) 2015-06-11 2017-05-02 Oculus Vr, Llc Strap system for head-mounted displays
US9977493B2 (en) * 2015-06-17 2018-05-22 Microsoft Technology Licensing, Llc Hybrid display system
DE112016002904T5 (de) 2015-06-23 2018-03-08 Google Llc Am Kopf befestigtes Anzeigegerät mit gekrümmten Dualanzeigen
US10078917B1 (en) * 2015-06-26 2018-09-18 Lucasfilm Entertainment Company Ltd. Augmented reality simulation
WO2017004695A1 (en) 2015-07-06 2017-01-12 Frank Jones Methods and devices for demountable head mounted displays
US9454010B1 (en) 2015-08-07 2016-09-27 Ariadne's Thread (Usa), Inc. Wide field-of-view head mounted display system
US20170039986A1 (en) * 2015-08-07 2017-02-09 Microsoft Technology Licensing, Llc Mixed Reality Social Interactions
US9606362B2 (en) 2015-08-07 2017-03-28 Ariadne's Thread (Usa), Inc. Peripheral field-of-view illumination system for a head mounted display
US10169917B2 (en) 2015-08-20 2019-01-01 Microsoft Technology Licensing, Llc Augmented reality
US20170053445A1 (en) 2015-08-20 2017-02-23 Microsoft Technology Licensing, Llc Augmented Reality
US10235808B2 (en) 2015-08-20 2019-03-19 Microsoft Technology Licensing, Llc Communication system
WO2017061677A1 (en) 2015-10-08 2017-04-13 Lg Electronics Inc. Head mount display device
US9571741B1 (en) 2015-10-08 2017-02-14 Gopro, Inc. Smart shutter in low light
US10724874B2 (en) * 2015-10-13 2020-07-28 Here Global B.V. Virtual reality environment responsive to predictive route navigation
US20170116950A1 (en) 2015-10-22 2017-04-27 Google Inc. Liquid crystal display with variable drive voltage
US9741125B2 (en) 2015-10-28 2017-08-22 Intel Corporation Method and system of background-foreground segmentation for image processing
US10001683B2 (en) 2015-11-06 2018-06-19 Microsoft Technology Licensing, Llc Low-profile microdisplay module
US9763342B2 (en) 2015-12-09 2017-09-12 Oculus Vr, Llc Cable retention assembly for a head mounted display
US10147235B2 (en) 2015-12-10 2018-12-04 Microsoft Technology Licensing, Llc AR display with adjustable stereo overlap zone
US20170176747A1 (en) 2015-12-21 2017-06-22 Tuomas Heikki Sakari Vallius Multi-Pupil Display System for Head-Mounted Display Device
US10229540B2 (en) 2015-12-22 2019-03-12 Google Llc Adjusting video rendering rate of virtual reality content and processing of a stereoscopic image
CN109074234B (zh) 2016-01-21 2022-01-25 谷歌有限责任公司 混合显示器全局命令接口、对应方法、装置和头戴显示系统
US10229541B2 (en) 2016-01-28 2019-03-12 Sony Interactive Entertainment America Llc Methods and systems for navigation within virtual reality space using head mounted display
US10209785B2 (en) 2016-02-02 2019-02-19 Microsoft Technology Licensing, Llc Volatility based cursor tethering
US20170225084A1 (en) * 2016-02-05 2017-08-10 S&S Worldwide, Inc. Immersive mobile theater
US11112266B2 (en) 2016-02-12 2021-09-07 Disney Enterprises, Inc. Method for motion-synchronized AR or VR entertainment experience
US10169922B2 (en) 2016-02-16 2019-01-01 Microsoft Technology Licensing, Llc Reality mixer for mixed reality
US10473933B2 (en) 2016-02-19 2019-11-12 Microsoft Technology Licensing, Llc Waveguide pupil relay
US9933624B1 (en) 2016-03-01 2018-04-03 Daryl White System and method for providing individualized virtual reality for an amusement attraction
US9778467B1 (en) 2016-03-01 2017-10-03 Daryl White Head mounted display
US9964767B2 (en) 2016-03-03 2018-05-08 Google Llc Display with reflected LED micro-display panels
KR102448919B1 (ko) 2016-03-16 2022-10-04 삼성디스플레이 주식회사 표시 장치
US10133345B2 (en) 2016-03-22 2018-11-20 Microsoft Technology Licensing, Llc Virtual-reality navigation
US10175487B2 (en) 2016-03-29 2019-01-08 Microsoft Technology Licensing, Llc Peripheral display for head mounted display device
US9946074B2 (en) 2016-04-07 2018-04-17 Google Llc See-through curved eyepiece with patterned optical combiner
US9965899B2 (en) 2016-04-28 2018-05-08 Verizon Patent And Licensing Inc. Methods and systems for minimizing pixel data transmission in a network-based virtual reality media delivery configuration
US20170323482A1 (en) 2016-05-05 2017-11-09 Universal City Studios Llc Systems and methods for generating stereoscopic, augmented, and virtual reality images
US20170323416A1 (en) 2016-05-09 2017-11-09 Intel Corporation Processing image fragments from one frame in separate image processing pipes based on image analysis
US10496156B2 (en) 2016-05-17 2019-12-03 Google Llc Techniques to change location of objects in a virtual/augmented reality system
US10502363B2 (en) 2016-05-17 2019-12-10 Occipital, Inc. Self-contained mixed reality head mounted display
US10151927B2 (en) 2016-05-31 2018-12-11 Falcon's Treehouse, Llc Virtual reality and augmented reality head set for ride vehicle
US9858848B1 (en) * 2016-06-09 2018-01-02 International Business Machines Corporation Dynamic display adjustment on a transparent flexible display
KR102442569B1 (ko) 2016-07-14 2022-09-08 매직 립, 인코포레이티드 각막 곡률을 이용한 홍채 경계 추정
CN106019597A (zh) 2016-07-27 2016-10-12 北京小米移动软件有限公司 虚拟现实眼镜
US9922466B2 (en) * 2016-08-05 2018-03-20 Uber Technologies, Inc. Virtual reality experience for a vehicle
CN106154555B (zh) 2016-08-24 2020-08-21 北京小米移动软件有限公司 虚拟现实眼镜
TWI622803B (zh) 2016-08-30 2018-05-01 廣達電腦股份有限公司 頭戴式顯示裝置
DE202017105948U1 (de) 2016-10-03 2018-03-07 Google LLC (n.d.Ges.d. Staates Delaware) Augmented-Reality- und/oder Virtual-Reality-Headset
US10459236B2 (en) 2016-12-09 2019-10-29 Lg Electronics Inc. Head-mounted display device with earbud holder
US20180196262A1 (en) 2017-01-12 2018-07-12 Artavious Cage Virtual reality system
US20180255285A1 (en) * 2017-03-06 2018-09-06 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
JP7275510B2 (ja) 2018-09-18 2023-05-18 日油株式会社 ソフトビスケット用油脂組成物及びソフトビスケット
WO2021172454A1 (ja) 2020-02-26 2021-09-02 ベースフード株式会社 パン、パン用ミックス粉およびパンの製造方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003143478A (ja) * 2001-10-31 2003-05-16 Canon Inc 映像合成装置および情報処理方法
WO2008059086A1 (es) * 2006-11-16 2008-05-22 The Movie Virtual, S.L. Sistema y metodo para la visualizacion de una imagen aumentada aplicando tecnicas de realidad aumentada
FR2911463A1 (fr) * 2007-01-12 2008-07-18 Total Immersion Sa Dispositif d'observation de realite augmentee temps reel et procede de mise en oeuvre d'un dispositif
WO2012118507A1 (en) * 2011-03-03 2012-09-07 Research In Motion Limited Methods and apparatus to generate virtual-world environments
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
CN104238738A (zh) * 2013-06-07 2014-12-24 索尼电脑娱乐美国公司 在头戴式系统内产生增强虚拟现实场景的系统和方法
CN106062862A (zh) * 2014-10-24 2016-10-26 何安莉 用于沉浸式和交互式多媒体生成的系统和方法
EP3062280A1 (en) * 2015-02-26 2016-08-31 Staging Design Inc. Method and system of management for switching virtual-reality mode and augmented-reality mode

Also Published As

Publication number Publication date
KR102181793B1 (ko) 2020-11-25
US20180255285A1 (en) 2018-09-06
US20180253141A1 (en) 2018-09-06
CN110352086B (zh) 2024-03-12
CN110352085A (zh) 2019-10-18
RU2019131365A3 (zh) 2021-04-07
CN110352086A (zh) 2019-10-18
SG11201907988QA (en) 2019-09-27
KR20190124766A (ko) 2019-11-05
KR20190117024A (ko) 2019-10-15
ES2974886T3 (es) 2024-07-02
CA3054336A1 (en) 2018-09-13
US20180253905A1 (en) 2018-09-06
CN110382066A (zh) 2019-10-25
EP3592445B1 (en) 2024-01-31
SG11201907990YA (en) 2019-09-27
JP2022188084A (ja) 2022-12-20
CN110352087A (zh) 2019-10-18
EP3592442A1 (en) 2020-01-15
EP3592445A1 (en) 2020-01-15
ES2951475T3 (es) 2023-10-23
CA3054963A1 (en) 2018-09-13
JP7257960B2 (ja) 2023-04-14
KR102145702B1 (ko) 2020-08-19
JP2020514900A (ja) 2020-05-21
WO2018165039A1 (en) 2018-09-13
ES2965043T3 (es) 2024-04-10
CA3054333A1 (en) 2018-09-13
RU2771098C2 (ru) 2022-04-26
WO2018165041A1 (en) 2018-09-13
JP2020513956A (ja) 2020-05-21
SG11201907293SA (en) 2019-09-27
US10572000B2 (en) 2020-02-25
JP7497572B2 (ja) 2024-06-11
WO2018165041A8 (en) 2019-04-18
US10289194B2 (en) 2019-05-14
JP6756052B2 (ja) 2020-09-16
KR102145140B1 (ko) 2020-08-18
RU2754992C2 (ru) 2021-09-08
RU2019131371A3 (zh) 2021-04-07
EP3592444A1 (en) 2020-01-15
EP3592443B1 (en) 2023-09-06
US10528123B2 (en) 2020-01-07
RU2719237C1 (ru) 2020-04-17
CA3054963C (en) 2020-11-03
RU2754991C2 (ru) 2021-09-08
KR20190123314A (ko) 2019-10-31
CA3054671A1 (en) 2018-09-13
SG11201907294PA (en) 2019-09-27
RU2019131371A (ru) 2021-04-07
WO2018165165A3 (en) 2018-11-01
RU2019131365A (ru) 2021-04-07
MY196303A (en) 2023-03-24
EP3592442B1 (en) 2023-05-10
JP2020513957A (ja) 2020-05-21
WO2018165165A2 (en) 2018-09-13
MY195166A (en) 2023-01-11
RU2019131372A3 (zh) 2021-07-06
EP3592443A2 (en) 2020-01-15
US20180250589A1 (en) 2018-09-06
CN110352085B (zh) 2023-10-27
JP7198213B2 (ja) 2022-12-28
RU2019131372A (ru) 2021-04-07
KR20240042176A (ko) 2024-04-01
KR20190123311A (ko) 2019-10-31
CN116474381A (zh) 2023-07-25
WO2018165170A1 (en) 2018-09-13
JP2020511218A (ja) 2020-04-16
EP3592444B1 (en) 2024-09-25

Similar Documents

Publication Publication Date Title
CN110382066B (zh) 混合现实观察器系统和方法
JP7079207B2 (ja) 立体視的な拡張現実画像および仮想現実画像を生成するためのシステムおよび方法
US10845942B2 (en) Information processing device and information processing method
RU2621644C2 (ru) Мир массового одновременного удаленного цифрового присутствия
US20200225737A1 (en) Method, apparatus and system providing alternative reality environment
CN107590771A (zh) 具有用于在建模3d空间中投影观看的选项的2d视频
JP2013506226A (ja) 仮想環境との相互作用のためのシステム及び方法
US11562531B1 (en) Cascading shadow maps in areas of a three-dimensional environment
US11593989B1 (en) Efficient shadows for alpha-mapped models
US11956571B2 (en) Scene freezing and unfreezing
US20240037837A1 (en) Automatic graphics quality downgrading in a three-dimensional virtual environment
US20240153226A1 (en) Information processing apparatus, information processing method, and program
WO2023023069A1 (en) Configuration of mixed reality objects in virtual reality environments
WO2024026245A2 (en) Static rendering for a combination of background and foreground objects
US11704864B1 (en) Static rendering for a combination of background and foreground objects
US11711494B1 (en) Automatic instancing for efficient rendering of three-dimensional virtual environment
JP2003303356A (ja) 展示装置
Trapp et al. Communication of digital cultural heritage in public spaces by the example of roman cologne
US11776203B1 (en) Volumetric scattering effect in a three-dimensional virtual environment with navigable video avatars
US11682164B1 (en) Sampling shadow maps at an offset
US20240040085A1 (en) Optimizing physics for static objects in a three-dimensional virtual environment
Hamadouche Augmented reality X-ray vision on optical see-through head mounted displays
JP2006129472A (ja) 画像処理装置および画像処理方法、並びにプログラム
CN117075771A (zh) 基于虚拟现实空间的画面显示方法、装置、设备及介质
CN115512087A (zh) 使用在预定距离处的遮挡表面生成和修改人工现实环境

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40016105

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant