CN109298777B - 虚拟现实体验控制系统 - Google Patents

虚拟现实体验控制系统 Download PDF

Info

Publication number
CN109298777B
CN109298777B CN201810724634.XA CN201810724634A CN109298777B CN 109298777 B CN109298777 B CN 109298777B CN 201810724634 A CN201810724634 A CN 201810724634A CN 109298777 B CN109298777 B CN 109298777B
Authority
CN
China
Prior art keywords
virtual reality
user
reality environment
time
geometric object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810724634.XA
Other languages
English (en)
Other versions
CN109298777A (zh
Inventor
史蒂文·查普曼
梅于尔·帕特尔
卡利斯·阿杰芒
约瑟夫·波普
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Disney Enterprises Inc
Original Assignee
Disney Enterprises Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Disney Enterprises Inc filed Critical Disney Enterprises Inc
Publication of CN109298777A publication Critical patent/CN109298777A/zh
Application granted granted Critical
Publication of CN109298777B publication Critical patent/CN109298777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Abstract

虚拟现实系统具有虚拟现实头戴式耳机，该虚拟现实头戴式耳机具有显示虚拟现实环境的内部显示屏幕。此外，虚拟现实头戴式耳机具有与虚拟现实头戴式耳机可操作地通信的接收器，其在用户佩戴虚拟现实头戴式耳机时从沉浸在所述虚拟现实环境中的所述用户接收一个或多个用户输入。此外，虚拟现实头戴式耳机具有存储器，存储与虚拟现实环境相关联的主题和与主题相关联的时间线。时间线具有多个基于时间的间隔，每个基于时间的间隔与针对主题的内容相对应。处理器改变虚拟现实环境以对应于与由用户选择的基于时间的间隔相对应的针对主题的内容，所述基于时间的间隔是当用户沉浸在虚拟现实环境中时由用户通过接收器经由几何形状对象选择的。

Description

虚拟现实体验控制系统
技术领域
本公开总体上涉及用户体验领域。更具体地，本公开涉及虚拟现实(“VR”)环境。
背景技术
当前的VR配置通常允许用户佩戴VR头戴式耳机，用户可以在其中观看虚拟环境。这种配置向用户提供各种模拟特征(例如，意象、音频等)，使得用户具有存在于虚拟环境内的现实感。例如，用户可以在虚拟环境内四处移动，就好像用户实际上存在于与该虚拟环境相对应的的真实环境内一样。然而，一旦用户处于该虚拟环境中，当前的配置不允许用户控制特定的虚拟环境。例如，可能想要改变虚拟环境的用户将不得不移除VR头戴式耳机，在真实世界环境中向VR系统提供输入以改变虚拟环境，然后不方便地再次放置VR头戴式耳机，以在改变后的虚拟环境中继续VR体验。由于不得不在虚拟环境和真实世界环境之间切换来改变虚拟环境，所以降低了VR体验的质量。
发明内容
在一方面，虚拟现实系统具有虚拟现实头戴式耳机，虚拟现实头戴式耳机具有显示虚拟现实环境的内部显示屏幕。此外，虚拟现实头戴式耳机具有接收器，所述接收器与所述虚拟现实头戴式耳机可操作地通信，当用户佩戴有所述虚拟现实头戴式耳机时，从沉浸在所述虚拟现实环境中的所述用户接收一个或多个用户输入。此外，虚拟现实头戴式耳机具有存储器，存储与所述虚拟现实环境相关联的主题和与所述主题相关联的时间线。所述时间线具有多个基于时间的间隔，每个所述基于时间的间隔与针对所述主题的内容相对应。
虚拟现实头戴式耳机还具有处理器，其生成所述虚拟现实环境和位于所述虚拟现实环境内的几何形状对象。所述处理器改变所述虚拟现实环境以对应于与由所述用户选择的基于时间的间隔相关联的针对主题的内容，所述基于时间的间隔是当所述用户沉浸在所述虚拟现实环境中时由用户通过所述接收器经由所述几何形状对象选择的。
在另一方面，一种计算机程序产品，包括其上存储有计算机可读程序的非暂时性计算机可读存储设备。所述计算机可读程序当在计算机上执行时使所述计算机执行本文中所描述的虚拟现实头戴式耳机的功能。在又一方面，一种过程，其执行本文中所描述的虚拟现实头戴式耳机的功能。
附图说明
参考下面结合附图的描述，本公开的上述特征将变得更加明显，其中相同的附图标记表示相同的元件，在附图中：
图1示出了用于生成VR环境和与该环境相关联的主题的VR体验控制系统。
图2示出了提供VR用户体验的VR设备的示例。
图3示出了在位于图2中示出的头戴式VR设备内的显示屏幕上显示的VR体验的示例。
图4A示出了在用户请求修改VR体验之后在VR体验内显示的虚拟几何形状对象。
图4B示出了具有在各个部分中描绘的内容的虚拟几何形状对象的孤立视图。
图4C示出了仅显示有一些图片的位于VR体验内的虚拟几何形状对象。
图4D示出了具有放置在桌子上的飞机的小型复制品的VR体验。
图4E示出了描绘三维图像的虚拟几何形状对象的部分。
图4F示出了可能与VR体验中的各种项目相关联的各种显示和音频效果。
图5示出了VR体验控制系统所使用的基于用户向VR体验内的虚拟几何形状对象提供的输入来修改VR体验的过程。
具体实施方式
提供了用于控制VR环境内的VR体验的结构。主题(例如，房间、对象、角色、电影、电视节目、视频游戏等)可以与VR体验相关联。此外，主题可以具有对应的时间线。因此，该结构允许沉浸在VR体验内的用户基于时间线来向VR系统提供一个或多个输入以改变VR体验。作为示例，用户可以通过VR体验中的几何形状对象提供一个或多个输入。由于用户不必在VR体验和真实世界之间切换(即，移除VR头戴式耳机)，因而改善了用户体验的质量。
图1示出了用于生成VR环境和与该环境相关联的主题的VR体验控制系统100。在一方面，VR体验控制系统100是向用户提供用户体验的用户体验设备。例如，VR体验控制系统100可以是VR头戴式耳机、与V R头戴式耳机通信的VR控制台等。
如图所示，VR体验控制系统100包括处理器102、存储器106(例如，随机存取存储器(“RAM”)和/或只读存储器(“ROM”))、数据存储设备108以及各种传感器104。传感器104可以感测来自VR体验内的用户的各种输入(例如，手势)。传感器104的示例包括相机、加速度计、陀螺仪、操纵杆、生物传感器、红外(“IR”)传感器、智能手表、移动设备、衣服、手镯、健身带，项链等。传感器104可以将感测数据直接或间接地存储在数据存储设备108和/或存储器106中。作为感测数据的示例，可以从用户感测用于改变与VR体验相关联的主题的时间线的用户控制输入。
在一方面，传感器104被集成在VR体验控制系统100内。在另一方面，传感器104不被集成在VR体验控制系统100内，而是与VR体验控制系统100进行可操作地通信；这种可操作地通信可以是直接和/或间接通信。例如，传感器104可以将数据直接发送到VR体验控制系统100(例如，传感器104非常接近VR体验控制系统100)，或者可以通过云服务来从传感器104(例如，远程传感器104)汇总数据以供VR体验控制系统100检索。例如，传感器104可以将感测数据发送到VR体验控制系统100的接收器109，该接收器可以位于或可以不位于远离传感器104的位置处，或者传感器104可以充当集成在VR体验控制系统100内的接收器109。
此外，数据存储设备108和/或存储器106可以将感测数据存储为用户控制输入数据110。另外，数据存储设备108和/或存储器106可以存储可以由处理器102使用以渲染VR环境内的各种对象的对象渲染代码112。例如，处理器102可以在用户存在于VR环境内时，使用对象渲染代码112渲染VR环境内的几何形状对象。处理器102然后可以使用用户控制输入数据110来改变VR环境，该用户控制输入数据110与由用户提供给VR环境中的几何形状对象的用户输入相关联。
在一方面，数据存储设备108从计算机可读存储设备(例如，磁或光驱动器、软磁盘或非易失性存储器、DVD、CD-ROM等)加载对象渲染代码112。在另一方面，数据存储设备108是计算机可读存储设备。这样，本公开的对象渲染代码112和相关数据结构可以被存储在计算机可读存储设备上。
VR体验控制系统100通过减少VR系统用来接收用户输入以改变VR体验的处理时间来改善计算设备的功能。由于VR体验控制系统100具有内置在VR体验自身中的用户输入系统，因此相比于要用户移除VR头戴式耳机以向VR系统提供输入来改变VR环境的传统的VR系统，用户输入可以被更快地从传感器104提供给处理器102。
尽管VR体验控制系统100的组件在图1中被示出为集成在一个设备内，但组件可以可替代地通过网络连接彼此远程通信。例如，处理器102可以存放在与VR头戴式耳机通信的远程服务器上，传感器104可以存放在用户佩戴的可穿戴设备中。备选地，处理器102可以内置在传感器104自身中并通过传感器104与VR头戴式耳机通信。例如，处理器102可以被集成在与VR头戴式耳机可操作地通信的可穿戴设备(例如头戴式耳机、手表、手镯等)或该可穿戴设备的邻近装置的传感器104中。作为又一示例，处理器102可以被集成在可穿戴设备中，但是传感器104可以是与处理器102间接(通过接收器109)或直接通信的不同设备。作为另一示例，传感器104可以内置在诸如相机之类的不可穿戴设备中，该相机还具有与VR头戴式耳机通信的集成处理器102。
图2示出了提供VR用户体验的VR设备的示例。示出了用户201使用头戴式VR设备202来观看VR环境的VR结构200。在一方面，VR体验控制系统100(图1)的组件被内置在头戴式VR设备202中。在另一方面，V R体验控制系统100的组件中的一些被内置在头戴式VR设备202中，而其他组件是与头戴式VR设备202可操作地通信的分离的组件。例如，头戴式VR设备202可以在头戴式VR设备202内具有显示VR环境的内部显示器，但是可以与用户201用来在VR环境内提供输入以调整VR体验的一个或多个手持式用户输入设备203(例如，指挥棒)可操作地通信。例如，手持式用户输入设备203可以感测到用户201已经提供了关于VR环境内的几何形状对象的手势以请求改变VR环境。可以使用各种输入设备来代替手持式用户输入设备203(例如，可穿戴传感器)。
此外，图3示出了在位于图2中示出的头戴式VR设备202内的显示屏幕上显示的VR体验300的示例。作为示例，用户201沉浸在与房间相关联的VR体验中，并且该房间与特定时间段相关联。例如，房间可以具有在对应的时间段期间与该房间相关联的桌子301、各种其他家具、装饰品等。用户201可以围绕该房间移动以获得该房间的外观的现实体验。
图3中示出的房间仅作为示例提供。作为代替，可以使用各种其他位置、风景、场景等以提供VR体验300。
用户201可能想在不必移除图2中示出的头戴式VR设备202的情况下改变图3中示出的VR体验300。例如，用户201可能想观看图3中示出的房间的外观的历史。因此，用户201可以从VR体验300内通过传感器104(例如，通过手持式用户指挥棒203、可穿戴设备等)提供输入以指示用户想要修改VR体验300。
相应地，图4A示出了在用户请求修改VR体验300之后，在VR体验300内显示的虚拟几何形状对象401(例如，柱面)。为了说明的目的，即使用户201通常不会在VR体验内看到这样的化身(即，用户201通常将看到房间，并且可能看到诸如手、脚等的化身部分)，但是还是在房间内示出了用户201的化身，以描绘用户在房间内的位置。此外，可以将除了柱面以外的各种其他的几何形状用于虚拟几何形状对象401。
虚拟几何形状对象401在VR体验300中被示出为空线框，以将虚拟几何形状对象401的结构描绘为具有要向用户显示的数据(例如，文本、图片等)的部分402。此外，虚拟几何形状对象401具有多个增量标记403；每个增量标记403都表示特定时间段的时间增量(例如，用于一周中的每一天、一年中的每一天、一年中的每一个月、十年中的每一年、一个世纪中的每一年、一个世纪中的每十年等的增量标记)。
用户能够将虚拟几何形状对象401转动(例如，通过手持式用户指挥棒303、由传感器104检测到的手势(诸如挥击)等)到特定的时间增量，在对应的部分402中观看与该时间增量相关联的内容并选择该内容，使得VR体验300被改变以反映与该时间增量相关联的时间段，所有这些都是在不移除头戴式VR设备202的情况下，在用户201沉浸在VR体验300中时进行的。
在一方面，如图4A所示，虚拟几何形状对象401围绕用户201。例如，用户201可以提供输入(例如，通过手持式用户指挥棒203、由传感器104检测到的手势等)以启动围绕用户201的虚拟几何形状对象401的显示。用户201然后可以移动(例如，旋转)虚拟几何形状对象401，直到虚拟几何形状对象401到达与增量标记403相关联的预期的时间增量。用户201可以提供各种输入(例如，通过手持式用户指挥棒303，由传感器104检测到的手势等)以移动或停止虚拟几何形状对象401、从在虚拟几何形状对象401的内部上显示的部分402选择内容、改变增量标记403的粒度(例如，几天到几个月)等。例如，具有速度超出预定手速阈值的手速的手势可以用来改变增量标记403的粒度；而具有较小的手速的手势可以用来以当前增量标记403移动虚拟几何形状对象401。
类似地，用户201还可以提供输入(例如，通过手持式用户指挥棒203、由传感器104检测到的手势等)，以在选择了对VR体验的改变之后，从VR体验中移除虚拟几何形状对象401，使得用户201可以在不观看虚拟几何形状对象401的情况下沉浸在VR体验内。
在另一方面，用户201位于虚拟几何形状对象401的外部。因此，部分402也显示在虚拟几何形状对象401的外部上，使得用户201可以访问部分402。
VR体验300在图3和图4A中示出，其中在桌子301的顶部上没有任何物品。这样描绘的原因在于，在与VR体验300中示出的房间相关联的时间段内，在桌子301上没有任何物品。在其他时间段内，桌子301上可以有或可以没有物品、不同的家具、不同的装饰品等。
图4B示出了具有在各个部分402中描绘的内容的虚拟几何形状对象401的孤立视图。如图所示，用户201可以观看与一个或多个增量标记403相关联的各种文本、图片等。作为示例，多个部分402中的一个部分示出了飞机的图片404。为了便于说明，图4C示出了位于VR体验300内的虚拟几何形状对象401，其中仅显示了图片中的一些(尽管还可以显示图4B中示出的其他图片和文本)。
用户201可以选择图4C中示出的飞机的图片404，以在将飞机的小型复制品405放置在桌子301上之后观看VR体验300。结果是，处理器102(图1)修改了在头戴式VR设备202的内部显示器上显示的VR体验300，以显示放置在桌子301上的飞机的小型复制品405。图4D示出了具有放置在桌子301上的飞机的小型复制品405的VR体验300。
放置在桌子301上的飞机的小型复制品405的示例是由用户201在VR体验300中修改的VR体验300的简化示例，提供该示例以说明VR体验控制系统100的工作(图1)。通过用户201对不同的时间段的选择(例如，不同的家具、不同的装饰品、不同的对象、不同的窗口视图等)，可以实质上改变VR体验300。换句话说，VR体验控制系统100可以用于修改与基于时间的间隔相对应的主题。在一方面，该主题是房间，并且与多个基于时间的间隔相对应的内容各自包括与时间线中的特定时间相关联的房间的外观，如图4A、图4C和图4D所示。
在另一方面，主题是来自媒体内容(例如，电影、电视节目、视频游戏等)的人物。VR体验控制系统100然后被用于修改VR体验100，以基于与人物相关联的时间线来描绘与人物相关联的不同场景。例如，人物可以存在于多个不同的电影中。虚拟几何形状对象401可以通过增量标记403，在部分402中显示来自位于时间线序列中的所有这些电影的不同的场景。用户201然后可以根据人物的时间线而将VR体验300改变为沉浸在不同的场景中。例如，用户201可以根据一个增量标记403而沉浸在外部场景内，然后在改变到用户201经由虚拟几何形状对象401请求的不同增量标记403之后沉浸在内部场景中。
在另一方面，主题是照片和/或视频的时间线。VR体验300可以是观看室(例如，电影院)，在该观看室中，虚拟显示设备基于来自虚拟几何形状对象401的用户选择来显示照片和/或视频。在又一方面，主题是媒体消费的时间线。例如，用户可以选择在观看室中观看的电视节目；该选择可以基于对应的电视节目系列的时间序列来执行。用户201可以选择各种其他形式的内容以基于时间线来修改主题，使得根据时间段的改变而修改VR体验的全部或一部分。
在又一方面，部分402可以示出三维图像而不是二维图像，或除了二维图像之外还示出三维图像。图4E示出了描绘三维图像407的虚拟几何形状对象401的部分402。例如，三维图像407可以是飞机的三维图像，而不是图4D中示出的二维图片。
部分402可以从虚拟几何形状对象401远离用户201向外延伸，以容纳三维图像407。作为示例，部分402可以是包括三维图像407的三维框或其他容器。备选地，部分402可以在虚拟几何形状对象401内朝向用户201向内延伸，以容纳三维图像407。此外，三维图像407可以是三维电影、视频剪辑、预览、纪录片等的一部分。
图4F示出了可以与VR体验300中的各种项目相关联的各种显示和音频效果406。可以为用户201显示这种音频效果406的标记，使得用户201可以接近与效果406相关联的项目或位置；用户201然后可以提供对效果的输入(例如，通过手持式用户指挥棒203、由传感器104检测到的手势等)以消费该效果(例如，移动对象、观看图像或视频、听关于对应项目的信息等)。
可以使用各种过程来改变图3中示出的VR体验300。图5示出了VR体验控制系统100(图1)基于由用户201(图2)在VR体验300内提供给虚拟几何形状对象401(图4A)的输入来修改VR体验300的过程500。在过程块502处，过程500利用虚拟现实头戴式耳机202显示虚拟现实环境300。此外，在过程块504处，当用户201佩戴有虚拟现实头戴式耳机202时，过程500从沉浸在虚拟现实环境300中的用户201接收一个或多个用户输入。另外，在过程块506处，过程500存储与VR环境300相关联的主题以及与该主题相关联的时间线。时间线具有多个基于时间的间隔403，每个基于时间的间隔403与针对所述主题的内容相对应。在过程块508处，过程500还利用处理器102(图1)生成虚拟现实环境和位于虚拟现实环境内的几何形状对象。此外，在过程块510处，过程500利用处理器102改变VR环境300以对应于与由用户201选择的基于时间的间隔403相对应的针对所述主题的内容，所述基于时间的间隔403是当用户201沉浸在虚拟现实环境300中时由用户201通过接收器109经由几何形状对象401选择的。
本文中所描述的过程可以在专用处理器中实现。这种处理器将在汇编、编译或机器级执行指令以执行该过程。这些指令可以由本领域的普通技术人员根据与过程相对应的附图的描述进行编写，并在计算机可读介质上存储或传输。这些指令也可以使用源代码或任何其他已知的计算机辅助设计工具来创建。计算机可读介质可以是能够携带这些指令的任何介质，例如计算机可读存储设备，并且包括CD-ROM、DV D、磁盘或其他光盘、磁带、硅存储器(例如，可移动的、不可移动的、易失性的或非易失性的)、通过网络本地或远程有线或无线传输的分组化或非分组化数据。本文中的计算机旨在包括具有如上所述的专用、通用、多用途或单用途的处理器的任何设备。例如，计算机可以是台式计算机、笔记本电脑、智能手机、平板设备、机顶盒等。
应理解的是，本文中所描述的装置、系统、计算机程序产品和过程也可以应用于其他类型的装置、系统、计算机程序产品和过程。本领域技术人员将认识到，可以在不脱离本装置、系统、计算机程序产品和过程的范围和精神的情况下，对本文所描述的装置、系统、计算机程序产品和过程的各方面的各种改变和修改进行配置。因此，应当理解，在所附权利要求的范围内，可以以不同于本文中所具体描述的方式来实践本装置、系统、计算机程序产品和过程。

Claims (20)

1.一种虚拟现实系统，包括：
虚拟现实头戴式耳机，具有显示虚拟现实环境的内部显示屏幕，所述虚拟现实环境包括场景和几何形状对象；
接收器，与所述虚拟现实头戴式耳机可操作地通信，经由与所述几何形状对象的用户交互接收一个或多个用户输入以改变所述场景，所述一个或多个用户输入是当用户佩戴有所述虚拟现实头戴式耳机时从沉浸在所述虚拟现实环境中的所述用户接收的；
存储器，存储与所述虚拟现实环境相关联的主题和与所述主题相关联的时间线，所述时间线具有多个基于时间的间隔，每个所述基于时间的间隔与针对所述主题的内容相对应；以及
处理器，生成所述虚拟现实环境，位于所述虚拟现实环境内的所述几何形状对象，以及至少部分地位于所述几何形状对象的外围的与所述多个基于时间的间隔相对应的多个增量标记，所述处理器改变所述虚拟现实环境中的所述场景以对应于与由所述用户选择的基于时间的间隔相对应的针对所述主题的内容，所述基于时间的间隔是当所述用户沉浸在所述虚拟现实环境中时由所述用户经由所述几何形状对象从所述多个基于时间的间隔中选择的。
2.根据权利要求1所述的虚拟现实系统，其中，所述几何形状对象围绕所述虚拟现实环境中的所述用户。
3.根据权利要求1所述的虚拟现实系统，其中，所述几何形状对象具有可由所述虚拟现实环境中的所述用户访问的外部部分。
4.根据权利要求1所述的虚拟现实系统，其中，所述几何形状对象是柱面。
5.根据权利要求1所述的虚拟现实系统，其中，所述主题是房间，并且与所述多个基于时间的间隔相对应的内容各自包括与所述时间线中的特定时间相关联的所述房间的外观。
6.根据权利要求1所述的虚拟现实系统，其中，所述主题是来自媒体内容的人物，并且与所述多个基于时间的间隔相对应的内容各自包括来自所述媒体内容的场景，所述场景与针对所述媒体内容中的人物的所述时间线中的特定时间相关联。
7.根据权利要求1所述的虚拟现实系统，其中，所述接收器识别所述用户针对所述虚拟现实环境中的所述几何形状对象的一个或多个手势。
8.根据权利要求7所述的虚拟现实系统，其中，所述一个或多个手势中的第一手势对应于根据所述多个基于时间的间隔以增量方式移动所述虚拟现实环境中的所述几何形状对象的命令。
9.根据权利要求8所述的虚拟现实系统，其中，所述一个或多个手势中的第二手势对应于停止所述虚拟现实环境中的所述几何形状对象的移动并选择所述多个基于时间的间隔中的一个的命令。
10.根据权利要求7所述的虚拟现实系统，其中，所述一个或多个手势中的手势对应于改变所述多个基于时间的间隔的增量的粒度的命令。
11.一种其上存储有计算机可读程序的非暂时性计算机可读存储介质，其中，所述计算机可读程序当在计算机上执行时使所述计算机执行以下操作：
利用虚拟现实头戴式耳机显示虚拟现实环境，所述虚拟现实环境包括场景和几何形状对象；
经由与所述几何形状对象的用户交互接收一个或多个用户输入以改变所述场景，所述一个或多个用户输入是当用户佩戴有所述虚拟现实头戴式耳机时从沉浸在所述虚拟现实环境中的所述用户接收的；
存储与所述虚拟现实环境相关联的主题和与所述主题相关联的时间线，所述时间线具有多个基于时间的间隔，每个所述基于时间的间隔与针对所述主题的内容相对应；
利用处理器生成所述虚拟现实环境，位于所述虚拟现实环境内的所述几何形状对象，以及至少部分地位于所述几何形状对象的外围的与所述多个基于时间的间隔相对应的多个增量标记；以及
利用所述处理器改变所述虚拟现实环境中的所述场景以对应于与由所述用户选择的基于时间的间隔相对应的针对所述主题的内容，所述基于时间的间隔是当所述用户沉浸在所述虚拟现实环境中时由所述用户经由所述几何形状对象从所述多个基于时间的间隔中选择的。
12.根据权利要求11所述的非暂时性计算机可读存储介质，其中，所述几何形状对象围绕所述虚拟现实环境中的所述用户。
13.根据权利要求11所述的非暂时性计算机可读存储介质，其中，所述几何形状对象具有可由所述虚拟现实环境中的所述用户访问的外部部分。
14.根据权利要求11所述的非暂时性计算机可读存储介质，其中，所述几何形状对象是柱面。
15.根据权利要求11所述的非暂时性计算机可读存储介质，其中，所述主题是房间，并且与所述多个基于时间的间隔相对应的内容各自包括与所述时间线中的特定时间相关联的所述房间的外观。
16.根据权利要求11所述的非暂时性计算机可读存储介质，其中，所述主题是来自媒体内容的人物，并且与所述多个基于时间的间隔相对应的内容各自包括来自所述媒体内容的场景，所述场景与针对所述媒体内容中的人物的所述时间线中的特定时间相关联。
17.根据权利要求11所述的非暂时性计算机可读存储介质，其中，识别所述用户针对所述虚拟现实环境中的所述几何形状对象的一个或多个手势。
18.根据权利要求17所述的非暂时性计算机可读存储介质，其中，所述一个或多个手势中的第一手势对应于根据所述多个基于时间的间隔以增量方式移动所述虚拟现实环境中的所述几何形状对象的命令。
19.根据权利要求18所述的非暂时性计算机可读存储介质，其中，所述一个或多个手势中的第二手势对应于停止所述虚拟现实环境中的所述几何形状对象的移动并选择所述多个基于时间的间隔中的一个的命令。
20.一种虚拟现实方法，包括：
利用虚拟现实头戴式耳机显示虚拟现实环境，所述虚拟现实环境包括场景和几何形状对象；
经由所述几何形状对象接收一个或多个用户输入以改变所述场景，所述一个或多个用户输入是当用户佩戴有所述虚拟现实头戴式耳机时从沉浸在所述虚拟现实环境中的所述用户接收的；
存储与所述虚拟现实环境相关联的主题和与所述主题相关联的时间线，所述时间线具有多个基于时间的间隔，每个所述基于时间的间隔与针对所述主题的内容相对应；
利用处理器生成所述虚拟现实环境，位于所述虚拟现实环境内的所述几何形状对象，以及至少部分地位于所述几何形状对象的外围的与所述多个基于时间的间隔相对应的多个增量标记；以及
利用所述处理器改变所述虚拟现实环境中的所述场景以对应于与由所述用户选择的基于时间的间隔相对应的针对所述主题的内容，所述基于时间的间隔是当所述用户沉浸在所述虚拟现实环境中时由所述用户经由所述几何形状对象从所述多个基于时间的间隔中选择的。
CN201810724634.XA 2017-07-24 2018-07-04 虚拟现实体验控制系统 Active CN109298777B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/658,319 US10521096B2 (en) 2017-07-24 2017-07-24 Virtual reality experience control system
US15/658,319 2017-07-24

Publications (2)

Publication Number Publication Date
CN109298777A CN109298777A (zh) 2019-02-01
CN109298777B true CN109298777B (zh) 2022-01-11

Family

ID=65018940

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810724634.XA Active CN109298777B (zh) 2017-07-24 2018-07-04 虚拟现实体验控制系统

Country Status (2)

Country Link
US (1) US10521096B2 (zh)
CN (1) CN109298777B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109557998B (zh) * 2017-09-25 2021-10-15 腾讯科技（深圳）有限公司 信息交互方法、装置、存储介质和电子装置
US10635895B2 (en) 2018-06-27 2020-04-28 Facebook Technologies, Llc Gesture-based casting and manipulation of virtual content in artificial-reality environments
US10712901B2 (en) 2018-06-27 2020-07-14 Facebook Technologies, Llc Gesture-based content sharing in artificial reality environments
US10783712B2 (en) * 2018-06-27 2020-09-22 Facebook Technologies, Llc Visual flairs for emphasizing gestures in artificial-reality environments
US11054896B1 (en) * 2019-02-07 2021-07-06 Facebook, Inc. Displaying virtual interaction objects to a user on a reference plane
WO2023069363A1 (en) * 2021-10-19 2023-04-27 Within Unlimited, Inc. Virtual and augmented reality fitness training activity or games, systems, methods, and devices
US11693485B1 (en) * 2022-02-17 2023-07-04 Htc Corporation Method for improving quality of visual content, host, and computer readable storage medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105183166A (zh) * 2015-09-15 2015-12-23 北京国承万通信息科技有限公司 虚拟现实系统
CN105867626A (zh) * 2016-04-12 2016-08-17 京东方科技集团股份有限公司 头戴式虚拟现实设备及其控制方法、虚拟现实系统
CN106157077A (zh) * 2015-02-26 2016-11-23 宅妆股份有限公司 切换虚拟现实模式与扩增现实模式的管理方法以及系统
CN106575153A (zh) * 2014-07-25 2017-04-19 微软技术许可有限责任公司 虚拟现实环境内基于注视的对象放置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150302651A1 (en) * 2014-04-18 2015-10-22 Sam Shpigelman System and method for augmented or virtual reality entertainment experience
US9508195B2 (en) * 2014-09-03 2016-11-29 Microsoft Technology Licensing, Llc Management of content in a 3D holographic environment
US9818225B2 (en) * 2014-09-30 2017-11-14 Sony Interactive Entertainment Inc. Synchronizing multiple head-mounted displays to a unified space and correlating movement of objects in the unified space
US9898864B2 (en) * 2015-05-28 2018-02-20 Microsoft Technology Licensing, Llc Shared tactile interaction and user safety in shared space multi-person immersive virtual reality
US10403327B2 (en) * 2017-02-27 2019-09-03 Google Llc Content identification and playback

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106575153A (zh) * 2014-07-25 2017-04-19 微软技术许可有限责任公司 虚拟现实环境内基于注视的对象放置
CN106157077A (zh) * 2015-02-26 2016-11-23 宅妆股份有限公司 切换虚拟现实模式与扩增现实模式的管理方法以及系统
CN105183166A (zh) * 2015-09-15 2015-12-23 北京国承万通信息科技有限公司 虚拟现实系统
CN105867626A (zh) * 2016-04-12 2016-08-17 京东方科技集团股份有限公司 头戴式虚拟现实设备及其控制方法、虚拟现实系统

Also Published As

Publication number Publication date
US10521096B2 (en) 2019-12-31
CN109298777A (zh) 2019-02-01
US20190026014A1 (en) 2019-01-24

Similar Documents

Publication Publication Date Title
CN109298777B (zh) 虚拟现实体验控制系统
CN110168618B (zh) 增强现实控制系统和方法
CN111226189B (zh) 内容显示属性管理
US10579134B2 (en) Improving advertisement relevance
TWI567670B (zh) 切換虛擬實境模式與擴增實境模式的管理方法以及系統
US10055888B2 (en) Producing and consuming metadata within multi-dimensional data
US20180356893A1 (en) Systems and methods for virtual training with haptic feedback
US20180173404A1 (en) Providing a user experience with virtual reality content and user-selected, real world objects
CN111133365A (zh) 内容到空间3d环境的匹配
GB2577962A (en) Markerless image analysis for augmented reality
CN111273766B (zh) 用于生成链接到物品模拟现实表示的示能表示的方法、设备和系统
US11302086B1 (en) Providing features of an electronic product in an augmented reality environment
US20160320833A1 (en) Location-based system for sharing augmented reality content
CN106464773A (zh) 增强现实的装置及方法
US20160371885A1 (en) Sharing of markup to image data
JP2018526847A (ja) コンテンツ配信
US20230345084A1 (en) System, method, and program for distributing video
KR102483781B1 (ko) 도슨트 서비스를 제공하는 증강 현실 글래스의 동작 방법
CN110597392A (zh) 一种基于vr模拟世界的交互方法
JP6582526B2 (ja) コンテンツ提供システム、コンテンツ提供装置及びコンテンツ提供方法
CN111615832B (zh) 用于生成平面视频内容的合成现实重构的方法和设备
US10475247B1 (en) Configuration for resuming/supplementing an augmented reality experience
US20230334792A1 (en) Interactive reality computing experience using optical lenticular multi-perspective simulation
US20230334790A1 (en) Interactive reality computing experience using optical lenticular multi-perspective simulation
US20230334791A1 (en) Interactive reality computing experience using multi-layer projections to create an illusion of depth

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant