CN109923540A - 实时记录用于修改动画的手势和/或声音 - Google Patents

实时记录用于修改动画的手势和/或声音 Download PDF

Info

Publication number
CN109923540A
CN109923540A CN201780069041.8A CN201780069041A CN109923540A CN 109923540 A CN109923540 A CN 109923540A CN 201780069041 A CN201780069041 A CN 201780069041A CN 109923540 A CN109923540 A CN 109923540A
Authority
CN
China
Prior art keywords
demonstration
frame
demonstration frame
virtual objects
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780069041.8A
Other languages
English (en)
Inventor
蒂姆·格利森
乔恩·贝达尔
达尔文·雅马墨托
伊恩·麦吉利夫雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN109923540A publication Critical patent/CN109923540A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04—Protocols for data compression, e.g. ROHC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Security & Cryptography (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

对每时间段在虚拟环境中生成的若干演示的帧进行压缩的技术。顺着这些思路，以数个帧的方式来表示演示的每个章节中的动画。根据在虚拟环境中生成演示的装置的存储器容量，所述装置可以将帧打包成具有存储器的固定量或者覆盖演示时间的给定量的区段。所述装置可以一次一个地对这些区段中的每个区段进行压缩。在进行压缩之后，所述装置可以向远程存储装置传输经压缩的区段。

Description

实时记录用于修改动画的手势和/或声音
相关申请的交叉引用
本申请是2017年12月4日提交的美国申请第15/830,936号的继续申请并且要求其优先权，该申请要求于2016年12月5日提交的美国临时申请第62/430,175号的权益，其公开内容通过引用的方式全部并入在本文中。
本申请要求于2016年12月5日提交的美国临时申请第62/430,175号的权益，其公开内容通过引用的方式全部被并入。
技术领域
本说明书涉及一种在虚拟现实环境中的演示。
背景技术
用于创建包括电影和动画的演示的传统方法包括：以演示软件的方式来向电子幻灯片添加元素(诸如，文本、图形和动画)。在一些实例中，可以将所有添加的元素存储在本地或者云存储中。
发明内容
在一个普通方面中，一种方法能够包括：通过VR计算机的处理电路系统，在第一时间间隔上在虚拟环境中生成表示演示的第一部分的演示帧的第一集合，并且在第二时间间隔上，生成表示该演示的第二部分的演示帧的第二集合，演示帧的第一集合和演示帧的第二集合中的每个演示帧包括虚拟对象集合，该演示帧的虚拟对象集合中的每个虚拟对象具有相应的状态。该方法还能够包括：对演示帧的第一集合执行第一压缩操作，以产生第一压缩演示数据，演示帧的第一集合在第一压缩操作期间被在本地存储在VR计算机的存储器中。该方法能够进一步包括：将第一压缩演示数据传递至远离VR计算机的远程存储装置；以及将演示帧的第一集合从VR计算机的存储器中移除。该方法可以进一步包括：对演示帧的第二集合执行第二压缩操作，以产生第二压缩数据；以及将第二压缩演示数据传递至远程存储装置。
在附图和下面的描述中阐述了一种或多种实现方式的细节。其它特征将通过描述和附图以及权利要求书而变得显而易见。
附图说明
图1是图示了其中可以实施本文描述的改进技术的示例电子环境的图。
图2是图示了其中实施如在图1中示出的改进技术的示例方法的流程图。
图3是其中根据在图1中示出的改进技术来生成演示的示例虚拟环境的图。
图4是根据在图1中示出的改进技术的示例元数据的图。
图5是图示了实现在图1中示出的改进技术的示例方法的流程图。
图6图示了能够与此处描述的电路一起使用的计算机装置和移动计算机装置的示例。
图7是描绘了示例VR头戴式显示器(HMD)的图。
图8A、图8B和图8C是描绘了示例VR HMS和控制器的图。
具体实施方式
用于创建演示的上述传统方法受限于非沉浸式的、二维观看环境。在三维沉浸式的、虚拟环境中创建演示可以涉及比二维元素更复杂和数据密集的更多元素。虽然贯穿本说明书描述了虚拟环境，但是本文所描述的概念能够应用于具有虚拟对象和真实世界物理对象的组合的增强现实环境。为三维的、沉浸式虚拟环境存储这种复杂的元素存在如针对演示所需的存储和访问元素的问题。注意的是，演示能够包括为观众生成的任何动画，包括电影和交互式讨论。
顺着这些思路，考虑在沉浸式虚拟环境中的演示。该演示能够包括一个或多个章节或者区段。在某一章节中，演示者的化身可以通过操纵虚拟环境内的对象来向虚拟的观众(例如，是化身的观众)进行讲述。演示者可以通过例如执行手势来移动到新的章节。每个章节可以包括贯穿虚拟环境的数百个对象的动画。这些对象和移动中的每一个以及虚拟环境具有将被传输至观看演示的用户的装置和从该装置传输的非常大量数据。该非常大量数据可能产生存储和传输问题，尤其是如果装置是具有少量存储器的移动装置。
与用于创建演示的、不提供用于存储在演示的章节内从对象及其动画产生的过多数据的方式的传统方法相反，创建演示的改进技术涉及对每时间段在虚拟环境中生成的演示的数个帧进行压缩。顺着这些思路，以数个帧的方式来表示演示的每个章节中的动画。根据在虚拟环境中生成演示的装置的存储器容量，所述装置可以将帧打包成具有存储器的固定量或者覆盖演示时间的给定量的区段。装置可以一次一个地对这些区段中的每个区段进行压缩。在进行压缩之后，装置可以向远程存储装置传输经压缩的区段。有利地，能够相对廉价地将演示的经压缩的区段(或者演示的章节)存储在远程存储装置中并且暂时存储在本地存储装置上。利用适当的元数据，能够按照所需的任何顺序来存储和调用这些区段。
在一些实现方式中，所改进的技术包括一种用于记录3D演示的方法，该方法包括：提供虚拟记录按钮，通过该虚拟记录按钮，在预设场景中的演示者可以记录演示的章节。3D演示中的章节可以可与2D体验中的幻灯片相比较。可以保留演示者的头部和手部移动用于进行回放，使得观看者看到呈现给他们的自然化身。还将保留用户语音用于进行回放。
用户将能够使用数个非常自然的手势来使对象淡入或者淡出场景，或者以其它方式引起对它们的注意。此处的主要示例包括：向上滑动以使对象从地板上升；指向以使对象的重影对观看者可见；以及针对对象按下按钮以使聚光灯出现。将与移动和声音一起记录由手势激活的这些命令中的每一个命令以创建演示的紧密结合的章节，并且可以以相同的方式来记录许多这种章节。
在第一场景构建器原型中，实现了利用基本手势来记录对象在场景中的转变，并且在发生这种情况时记录演示者的声音的能力。在第二场景构建器原型中，添加了记录演示者的头部和手部并且将它们作为化身显示回给演示的观看者的能力，以及除了触发预先记录的宏之外，还记录对象在场景中的粒状移动(例如，当由演示者拾取时)的能力。
图1是图示了可以实现上述改进技术的示例电子环境100的图。如图所示，在图1中，电子环境100包括经由由用户装置114供电的VR控制器110而在VR环境中沉浸的用户112。电子环境100还包括VR计算机120和网络150。
VR控制器110可以采取由用户112穿戴以提供沉浸式虚拟环境或者增强现实环境的头戴式显示器(HMD)的形式。在示例电子环境100中，穿戴VR控制器110的用户112拿着用户装置，即，用户装置114。该用户装置114可以是：例如，可以与VR控制器110配对并且与VR控制器110通信以在沉浸式虚拟环境中进行交互的智能电话、控制器、操纵杆或者另一便携式手持装置。用户装置114可以经由例如，有线连接或者无线连接(诸如，例如，WiFi或者蓝牙连接)与VR控制器110可操作地联接或者配对。用户装置114和VR控制器110的这种配对或者可操作的联接可以提供用于用户装置114与VR控制器110之间的通信以及数据在用户装置114与VR控制器110之间的交换。这可以允许用户装置114用作与VR控制器110通信的控制器以在沉浸式虚拟环境中进行交互。即，可以将用户装置114的操纵(诸如，例如，由用户装置114发出的并且指向用于选择的虚拟对象或者特征的光束或者射线、和/或在用户装置114的触摸表面上接收到的输入、和/或用户装置114的移动)转换成在由VR控制器110提供的沉浸式虚拟环境或者增强现实环境中的相对应选择、或者移动、或者其它类型的交互。
VR计算机120被配置为生成并且回放演示的章节。如在图1中图示的，VR计算机120被实现为通过网络180来与用户装置114通信的计算机系统。在一些实现方式中，可以在用户装置114内包括VR计算机120。
VR计算机120包括网络接口122、一个或多个处理单元124、和存储器126。网络接口122包括：例如，以太网适配器、令牌环适配器等，用于将从网络150接收到的电子信号和/或光信号转换为电子表格，以供VR服务器计算机120使用。该组处理单元124包括一个或多个处理芯片和/或组件。存储器126包括易失性存储器(例如，RAM)和非易失性存储器(诸如，一个或多个ROM、磁盘驱动器、固态驱动器等)两者。该组处理单元124和存储器126一起形成控制电路系统，该控制电路系统被配置和布置为实施如本文描述的各种方法和功能。
在一些实施例中，VR计算机120的组件中的一个或多个组件能够是或者能够包括配置为处理在存储器126中存储的指令的处理器(例如，处理单元124)。如在图1中描绘的这种指令的示例包括虚拟环境(VE)管理器160、演示管理器140、和压缩管理器150。进一步地，如在图1中图示的，存储器126被配置为存储各种数据，其针对使用这种数据的相应管理器被描述。
VE管理器160被配置为生成并处理在VR服务器计算机120中表示为VE数据130的虚拟环境。例如，VE管理器130可以被配置为生成在演示中使用的三维虚拟对象132，诸如，图表、人物、球、指挥棒等。进一步地，VE管理器还可以生成用于(例如，表示)包括演示者的每个用户的化身。当演示者正在呈现该演示的每个章节时，演示者可以使用虚拟镜子136来查看演示者向其他用户如何出现。
演示管理器140包括演示帧管理器142，并且被配置为生成并处理演示的章节以便向虚拟环境中的用户重放。作为处理演示的章节的一部分，将演示帧管理器142配置为根据用户装置114的存储器容量来捆绑(bundle)各个演示区段。
在一些实现方式中，演示管理器140进一步配置为生成演示元数据144。当按顺序排列演示区段以形成演示的章节时，可以与每个演示区段一起包括演示元数据144，并且演示元数据144描述了该区段在序列中的位置。在一些进一步的实现方式中，可以与每个演示帧一起包括演示元数据144，并且演示元数据144可以描述该帧中的各个对象132以及对象状态(例如，在虚拟环境中的对象位置、对象的大小、以及对象的透明度)。
演示管理器142进一步被配置为在虚拟环境中播放(例如，回放、执行)演示。顺着这些思路，演示管理器142可以被配置为按照(即，从元数据144确定的)正确的顺序来提取压缩演示数据152(1)、...、152(N)，将其发送至压缩管理器150以进行解压，并且然后，在虚拟环境中以演示帧的形式呈现对象的动画。
压缩管理器150被配置为对演示的区段进行压缩并且将所压缩的区段152(1)、...、152(N)传输至远程存储装置190。压缩管理器150被进一步配置为对压缩的区段进行解压。压缩管理器150可以使用任何标准压缩算法来完成对演示区段的压缩。
远程存储装置190远离VR计算机120(例如，经由网络连接至VR计算机120但是不与VR计算机120共位)，并且被配置为接收并且存储压缩的区段152(1)、...、152(N)。在一些实现方式中，远程存储装置190包括存储磁盘192。在一些实现方式中，存储磁盘192是存储磁盘的阵列的部分。在一些实现方式中，存储磁盘阵列是RAID阵列。
VR计算机120的组件(例如，模块、处理单元124)可以被配置为基于能够包括一种或多种类型的硬件、软件、固件、操作系统、运行时间库和/或等等的一个或多个平台(例如，一个或多个类似的或者不同的平台)来进行操作。在一些实现方式中，VR服务器计算机120的组件可以被配置为在装置集群(例如，服务器场)内进行操作。在这种实现方式中，VR服务器计算机120的组件的功能和处理能够被分布到装置集群中的若干装置。
VR服务器计算机120的组件能够是或者能够包括配置为处理属性的任何类型的硬件和/或软件。在一些实现方式中，以图1中的VR服务器计算机120的组件的形式示出的组件的一个或多个部分包括能够是或者能够包括基于硬件的模块(例如，数字信号处理器(DSP)、现场可编程门阵列(FPGA)、存储器)、固件模块和/或基于软件的模块(例如，计算机代码模块、可以在计算机处执行的一组计算机可读指令)。例如，在一些实现方式中，VR服务器计算机120的组件的一个或多个部分能够是或者能够包括配置用于由至少一个处理器(未示出)执行的软件模块。在一些实现方式中，组件的功能能够被包括在与在图1中示出的那些模块和/或组件不同的模块和/或组件中。
虽然未示出，但是在一些实现方式中，用户装置120的组件(或者其部分)能够被配置为在例如，数据中心(例如，云计算环境)、计算机系统、一个或多个服务器/主机装置和/或等等内进行操作。在一些实现方式中，VR服务器计算机120的组件(或者其部分)能够被配置为在网络内进行操作。因此，VR服务器计算机120的组件(或者其部分)能够被配置为在能够包括一个或多个装置和/或一个或多个服务器装置的各种类型的网络环境中起作用。例如，网络能够是或者能够包括局域网(LAN)、广域网(WAN)和/或等等。网络能够是或者能够包括无线网络和/或使用例如，网关装置、桥接器、交换机和/或等等来实现的无线网络。网络能够包括一个或多个分段和/或能够具有基于各种协议(诸如，互联网协议(IP)和/或专有协议)的部分。网络能够包括互联网的至少一部分。
在一些实施例中，VR服务器计算机120的组件中的一个或多个组件能够是或者能够包括配置为处理在存储器中存储的指令的处理器。例如，VE通信管理器160(和/或其一部分)和VE冲突解决管理器170能够是处理器和存储器的组合，配置为执行与用于实现一个或多个功能的过程有关的指令。
在一些实现方式中，存储器126能够是任何类型的存储器，诸如，随机存取存储器、磁盘驱动器存储器、闪速存储器和/等等。在一些实现方式中，存储器126能够被实施为与VR服务器计算机120的组件相关联的不止一个存储器组件(例如，不止一个RAM组件或者磁盘驱动器存储器)。在一些实现方式中，存储器126能够是数据库存储器。在一些实现方式中，存储器126能够是或者能够包括非本地存储器。例如，存储器126能够是或者能够包括由多个装置(未示出)共享的存储器。在一些实现方式中，存储器126能够与在网络内并且配置为服务VR服务器计算机120的组件的服务器装置(未示出)相关联。如在图2中图示的，存储器126被配置为存储各种数据，包括VE数据130、用户化身150、和用户标识符154。
图2是描绘了示例方法200的流程图。方法200可以由结合图1描述的软件构造执行，这些软件构造驻留在VR服务器计算机120的存储器126中并且由该组处理单元124运行。
在202处，VR计算机120在第一时间间隔内在虚拟环境中生成表示演示的第一部分的演示帧的第一集合，并且在第二时间间隔内生成表示该演示的第二部分的演示帧的第二集合。演示帧的第一集合和演示帧的第二集合中的每一个包括虚拟对象集合。该演示帧的虚拟对象集合中的每个虚拟对象具有相应的状态。
在204处，VR计算机120对演示帧的第一集合执行第一压缩操作，以产生第一压缩演示数据152(1)。演示帧的第一集合在第一压缩操作期间被在本地存储在VR计算机的存储器中(例如，被存储在与VR计算机120共位的存储器中)。
在206处，VR计算机120将第一压缩演示数据传递至远离VR计算机120的远程存储装置190。
在208处，VR计算机120移除演示帧的第一集合(假设未在适当的位置执行压缩)并且对演示帧的第二集合执行第二压缩操作以产生第二压缩演示数据152(2)。
在210处，VR计算机120将第二压缩演示数据传递至远程存储装置190。
图3是图示了在虚拟环境中的演示的示例场景304的图。如在图3中示出的，具有控制器302的用户300经由其头戴式显示器(HMD)310查看其在场景304中的表示320(在此处是其控制器的图像)和对象330(在此处是键盘)。
经由化身320的用户300可以移动或者操纵对象330。在任何时刻，对象330都位于在虚拟环境内的位置。进一步地，在进行呈现期间，可以将某个点处的对象330引入到虚拟环境中，或者从虚拟环境中移除某个点处的对象330。在这种情况下，期望对象330不会突然出现，因为这会影响观察演示的其他用户的沉浸式体验。相反，对象330可以在若干个帧上淡入(fade in)/淡出(fade out)或者从无到有/缩小到无。因此，可以向对象330分配状态(诸如，大小和透明度)。
进一步地，在由用户300生成的动画期间，VR计算机120可以通过以某一指定的采样率对动画进行采样来捕获该动画。以采样率生成的帧可以用作关键帧，即，在其中对象被渲染的帧。在回放演示期间，VR计算机120可以通过在帧之间插入对象的位置、大小和透明度来在关键帧之间提供连续的动画。
图4图示了描述限定演示的演示帧集合的示例元数据400。在该示例中，使用XML脚本来表示元数据。然而，可以使用其它脚本形式。
在该示例中，演示帧集合包括多个演示帧。每个演示帧具有标识符(该标识符指示在序列中的排序)、虚拟对象标识符和相应的描述符以及状态。对象的状态包括用于每个帧的位置、大小和透明度的值。
因为相对于每个帧和帧集合在序列中的顺序来识别每个帧和帧集合，所以不必按顺序形成、压缩、和存储演示帧集合。这允许以下简单的编辑过程：在编辑期间，将不按顺序对演示帧进行压缩并且保存。通过在编辑帧集合中的帧期间维持与每个帧和帧集合相关联的元数据，演示的顺序不会受对帧的后续编辑的影响。
图5图示了在虚拟环境中创建演示的示例过程500。方法500可以由结合图1描述的软件构造执行，这些软件构造驻留在VR服务器计算机120的存储器126中并且由该组处理单元124运行。
在502处，VR计算机120获取其存储器126的当前容量。例如，如果VR计算机120被包含在用户装置114、移动装置内，则VR计算机可以尝试获得系统高速缓存的容量。
在504处，VR计算机120基于存储器容量来以采样率将动画记录在演示的章节中。
在506处，VR计算机120形成演示章节的块(chunk)，即，演示帧的集合，其中，帧的数量是基于每个演示帧中的例如该区段所覆盖的时间量、VR计算机120的存储器容量以及数据量。
在508处，VR计算机120对演示章节的区段执行压缩操作以产生经压缩的区段。同时，VR计算机120记录演示帧的下一个集合。
在510处，VR计算机120将经压缩的区段发送至远离VR计算机120的远程存储装置。
在512处，如果没有在适当的位置执行压缩，则VR计算机120将未压缩的区段从本地存储装置中移除。
在514处，VR计算机120以与506中类似的方式形成演示章节的另一区段。
在516处，如果该另一区段是演示章节的最后区段，则过程500转到518。否则，过程500返回到508。
在518处，如果该演示章节是演示的最后章节，则过程500结束。否则，过程500返回到504。
图6图示了可以与此处所描述的技术一起使用的通用计算机装置600和通用移动计算机装置650的示例。
如在图6中示出的，计算装置600旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适当的计算机。计算装置650旨在表示各种形式的移动装置，诸如，个人数字助理、蜂窝电话、智能电话、和其它类似的计算装置。此处所示出的组件、其连接和关系、以及其功能仅仅旨在是示例性的，并且不旨在限制本文中描述的和/或者要求保护的本发明的实现方式。
计算装置600包括：处理器602、存储器604、存储装置606、连接至存储器604和高速扩展接口610的高速接口608、和连接至低速总线614和存储装置606的低速接口612。组件602、604、606、608、610和612中的每一个使用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它的方式安装。处理器602能够对在计算装置600内执行的指令进行处理，包括在存储器604中或者存储装置606上存储的以在外部输入/输出装置(诸如，联接至高速接口616的显示器608)上显示GUI的图形信息的指令。在其它实现方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多种存储器一起使用。同样，可以连接多个计算装置600，其中每个装置提供部分的必要的操作(例如，作为服务器阵列、刀片式服务器的组、或者多处理器系统)。
存储器604存储在计算装置600内的信息。在一种实现方式中，存储器604是一个或多个易失性存储器单元。在另一实现方式中，存储器604是一个或多个非易失性存储器单元。存储器604还可以是另一种形式的计算机可读介质，诸如，磁盘或者光盘。
存储装置606能够为计算装置600提供大容量存储。在一种实现方式中，存储装置606可以是或者可以包括计算机可读介质，诸如，软盘装置、硬盘装置、光盘装置、或者磁带装置、闪速存储器或者其它类似的固态存储器装置、或者装置的阵列(包括存储区域网络或者其它配置的装置)。计算机程序产品能够有形地被实施在信息载体中。计算机程序产品还可以包括指令，该指令在被执行时执行一种或多种方法，诸如，上文描述的那些方法。信息载体是计算机或者机器可读介质，诸如，存储器604、存储装置606、或者在处理器602上的存储器。
高速控制器608管理用于计算装置500的带宽密集型操作，而低速控制器612管理较低的带宽密集型操作。功能的这种分配仅仅是示例性的。在一种实现方式中，高速控制器608(例如，通过图形处理器或者加速器)联接至存储器604、显示器616，并且联接至高速扩展端口610，该高速扩展端口710可以容纳各种扩展卡(未示出)。在实现方式中，低速控制器612联接至存储装置506和低速扩展端口614。可以例如，通过网络适配器来将可以包括各种通信端口(例如，USB、蓝牙、以太网、无线以太网)的低速扩展端口联接至一个或多个输入/输出装置，诸如，键盘、指向装置、扫描器或者网络装置(诸如，交换机或者路由器)。
如图所示，可以以多种不同的形式来实施计算装置600。例如，可以将计算装置600实现为标准服务器620或者多次实现在一组这种服务器中。还可以将计算装置600实现为机架服务器系统624的部分。另外，计算装置600可以被实现在个人计算机(诸如，膝上型计算机622)中。可替选地，来自计算装置600的组件可以与移动装置(未示出)(诸如，装置650)中的其它组件结合。这种装置中的每一个可以包含计算装置600和650中的一个或多个，并且整个系统可以由彼此通信的多个计算装置600和650组成。
除了其它组件之外，计算装置650包括处理器652、存储器664、输入/输出装置(诸如，显示器654)、通信接口666、和收发器668。装置650还可以被设置有用于提供附加的存储的存储装置，诸如，微型硬盘或者其它装置。这些组件650、652、664、654、666和668中的每一个使用各种总线相互连接，并且若干个组件可以被安装在公共主板上或者根据需要以其它方式进行安装。
处理器652能够执行在计算装置650内的指令，包括在存储器664中存储的指令。可以将处理器实现为包括单独的和多个模拟和数字处理器的芯片的芯片集。例如，处理器可以提供用于对装置650的其它组件的协调，诸如，用户界面的控制、由装置650运行的应用、和通过装置650进行的无线通信。
处理器652可以通过联接至显示器654的控制接口658和显示接口656来与用户进行通信。例如，显示器654可以是TFT LCD(薄膜晶体管液晶显示屏)或者OLED(有机发光二极管)显示器，或者其它合适的显示技术。显示接口656可以包括用于驱动显示器654以向用户呈现图形和其它信息的合适的电路系统。控制接口658可以接收来自用户的命令并且对该命令进行转换，用于提交至处理器652。另外，外部接口662可以被设置与处理器652通信，以便使装置650能够与其它装置进行邻近区域通信。在一些实现方式中，外部接口662可以设置有例如，有线通信，或者在一些实现方式中可以设置用于无线通信，并且还可以使用多个接口。
存储器664存储计算设备650内的信息。存储器664能够作为计算机可读介质(medium)或媒介(media)、一个或多个易失性存储器单元、或者一个或多个非易失性存储器单元中的一个或多个被实现。还可以通过扩展接口672来提供扩展存储器674并将其连接到设备650，所述扩展接口672可以包括例如SIMM(单列直插存储器模块)卡接口。这种扩展存储器674可以为设备650提供附加的存储空间，或者还可以为设备650存储应用或其它信息。具体地，扩展存储器674可以包括用于执行或者补充上述的过程的指令，并且还可以包括安全信息。因此，例如，扩展存储器674可以作为用于设备650的安全模块被提供，并且可以被编程有允许安全地使用设备650的指令。此外，可以经由SIMM卡提供安全应用以及附加信息，诸如以不可破解的方式将识别信息放置在SIMM卡上。
如下所述，存储器可以包括例如闪速存储器和/或NVRAM存储器。在一个实现方式中，计算机程序产品被有形地具体实现在信息载体中。计算机程序产品包含指令，所述指令当被执行时，执行一个或多个方法，诸如上述的那些方法。信息载体是可以例如通过收发器668或外部接口662接收的计算机或机器可读介质，诸如存储器664、扩展存储器674、或处理器652上的存储器。
设备650可以通过通信接口666以无线方式通信，所述通信接口666必要时可以包括数字信号处理电路。通信接口666可以提供用于在各种模式或协议下通信，所述各种模式或协议诸如GSM语音呼叫、SMS、EMS、或MMS消息传送、CDMA、TDMA、PDC、WCDMA、CDMA2000、或GPRS等。这种通信可以例如通过射频收发器668而发生。此外，可以发生短距离通信，诸如使用蓝牙、WiFi、或其它这种收发器(未示出)。此外，GPS(全球定位系统)接收器模块670可以向设备650提供附加的导航和定位相关无线数据，其可以由在设备650上运行的应用根据需要使用。
设备650还可以使用音频编解码器660可听地通信，所述音频编解码器660可以从用户接收口语信息并将它转换为可用的数字信息。音频编解码器660可以诸如通过例如在设备650的听筒中的扬声器，同样地为用户生成可听声音。这种声音可以包括来自语音电话呼叫的声音，可以包括录制声音(例如，语音消息、音乐文件等)并且还可以包括由在设备650上操作的应用生成的声音。
如图中所示，可以以许多不同的形式实现计算设备650。例如，它可以作为蜂窝电话680被实现。它还可以作为智能电话682、个人数字助理、或其它类似的移动设备的部分被实现。
图7图示了如在图3和图5中示出的头戴式显示器的示例实现方式。在图7中，穿戴HMD 700的用户正手持便携式手持电子装置702。手持电子装置702可以是：例如，可以与HMD700配对并且与HMD 700通信以在由HMD 700生成的沉浸式虚拟环境中进行交互的智能电话、控制器、操纵杆或者另一便携式手持电子装置。手持电子装置702可以经由例如，有线连接或者无线连接(诸如，例如，WiFi或者蓝牙连接)与HMD 700可操作地联接或者配对。手持电子装置702和HMD 700的这种配对或者可操作的联接可以提供用于手持电子装置702与HMD 700之间的通信，以及数据在手持电子装置702与HMD 700之间的交换。这可以允许手持电子装置702用作与HMD 700通信的控制器，以在由HMD 700生成的沉浸式虚拟环境或者增强现实环境中进行交互。即，可以将手持电子装置702的操纵(诸如，例如，由手持电子装置702发出的并且指向用于选择的虚拟对象或者特征的光束或者射线、和/或在手持电子装置702的触摸表面上接收到的输入、和/或手持电子装置702的移动)转换成在由HMD 700生成的沉浸式虚拟环境或者增强现实环境中的相对应的选择、或者移动、或者其它类型的交互。例如，HMD 700与手持电子装置702一起可以生成如上面描述的虚拟环境，并且可以操纵手持电子装置702以实现用户相对于在如上面描述的虚拟环境中的虚拟特征的比例或者视角上的变化。
图8A和图8B是示例HMD的立体图，诸如，例如，由图7中的用户穿戴的HMD 700，并且图8C图示了示例手持电子装置，诸如，例如，在图7中示出的手持电子装置702。
手持电子装置802可以包括容纳装置802的内部组件的外壳803以及在外壳803的外部的、对用户可访问的用户界面804。该用户界面804可以包括配置为接收用户触摸输入的触敏表面806。用户界面804还可以包括用于由用户进行的操纵的其它组件，诸如，例如，致动按钮、旋钮、操纵杆等。在一些实现方式中，用户界面804的至少一部分可以被配置为触摸屏，其中，用户界面804的该部分被配置为向用户显示用户界面项，并且还配置为接收来自用户在触敏表面806上的触摸输入。手持电子装置802还可以包括配置为例如响应于在用户界面804处接收到的用户输入而通过外壳803中的端口来选择性地发出光(例如，光束或者射线)的光源808。
HMD 800可以包括联接至框架820的外壳810，其中，包括例如，在耳机中安装的扬声器的音频输出装置830也联接至框架820。在图8B中，外壳810的前部810a旋转离开外壳810的基部810b，使得在外壳810中容纳的组件中的一些组件可见。显示器840可以被安装在面向外壳810的前部810a的内部的侧上。透镜850可以被安装在外壳810中，被安装在前部810a处于靠着外壳810的基部810b的关闭位置时安装在用户的眼睛与显示器840之间。在一些实现方式中，HMD 800可以包括感测系统860(该感测系统860包括各种传感器)和控制系统870，该控制系统870包括处理器和用于促进HMD 800的操作的各种控制系统装置。
在一些实现方式中，HMD 800可以包括用于捕获静止图像和移动图像的摄像头880。由摄像头880捕获到的图像可以用于帮助追踪用户和/或手持电子装置802的在现实世界中的物理位置或者相对于虚拟环境的物理环境，和/或可以在通过模式下在显示器840上向用户显示该图像，从而允许用户在不需要移除HMD 800或者以其它方式改变HMD 800的配置以将外壳810移出用户的视线的情况下暂时离开虚拟环境并且返回物理环境。
在一些实现方式中，HMD 800可以包括用于检测并且追踪用户的眼睛注视的注视追踪装置865。注视追踪装置865可以包括：例如，图像传感器865A或者多个图像传感器865A以捕获用户的眼睛(例如，用户的眼睛的特定部分(诸如，例如，瞳孔))的图像以检测并且追踪用户的注视的方向和移动。在一些实现方式中，HMD 800可以被配置为将检测到的注视处理为要被转换成沉浸式虚拟体验中的相对应的交互的用户输入。
此处描述的系统和技术的各种实现方式能够在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实现方式能够包括：在一个或多个计算机程序中的实现方式，该一个或多个计算机程序能够在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置和该至少一个输出装置。
这些计算机程序(也称为程序、软件、软件应用或代码)包括用于可编程处理器的机器指令，并且能够用高级过程和/或面向对象编程语言、和/或用汇编/机器语言加以实现。如本文中所使用的，术语“机器可读介质”、“计算机可读介质”指代用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备(例如，磁盘、光盘、存储器、可编程逻辑器件(PLD))，包括将机器指令作为机器可读信号接收的机器可读介质。术语“机器可读信号”指代用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互，能够将这里描述的系统和技术实现在计算机上，所述计算机具有用于向用户显示信息的显示设备(例如，CRT(阴极射线管)或LCD(液晶显示器)监视器)以及用户能够通过其向该计算机提供输入的键盘和指向设备(例如，鼠标或轨迹球)。其它种类的设备还能够用于提供用于与用户的交互；例如，提供给用户的反馈能够是任何形式的感觉反馈(例如，视觉反馈、听觉反馈、或触觉反馈)；并且能够以任何形式接收来自用户的输入，包括声学输入、语音输入、或触觉输入。
这里描述的系统和技术能够被实现在计算系统中，所述计算系统包括后端组件(例如，作为数据服务器)，或者包括中间件组件(例如，应用服务器)，或者包括前端组件(例如，具有用户能够用与这里描述的系统和技术的实现方式交互的图形用户界面或Web浏览器的客户端计算机)，或者包括此类后端、中间件、或前端组件的任何组合。系统的组件能够通过任何形式或介质的数字数据通信(例如，通信网络)来互连。通信网络的示例包括局域网(“LAN”)、广域网(“WAN”)和互联网。
计算系统能够包括客户端和服务器。客户端和服务器一般地彼此远离并且通常通过通信网络来交互。客户端和服务器的关系利用在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。
已经描述了多个实施例。然而，应当理解，在不脱离本说明书的精神和范围的情况下，可以进行各种修改。
还将要理解的是，当将元件称为被导通、连接至、电连接至、联接至或者电联接至另一元件时，其可以被直接导通、连接至、电连接至、联接至或者电联接至另一元件，或者可以存在一个或多个中间元件。相反，当将元件称为被直接导通、直接连接至或者直接联接至另一元件时，中间元件不存在。虽然在详细描述中，可以不使用术语“直接导通”、“直接连接至”、或者“直接联接至”，但是可以如此引用被示出为被直接导通、直接连接或者直接联接的元件。可以修改本申请的权利要求书以叙述在本说明书中描述的或者在附图中示出的示例性关系。
虽然已经像本文中所描述的那样图示了所描述的实现方式的某些特征，但是本领域的技术人员现在将想到许多修改、替换、变化和等同物。因此应当理解的是，所附权利要求旨在覆盖如落入本发明的范围内的所有这些修改和变化。应当理解的是，它们已仅作为示例而非限制被呈现，并且可以做出形式和细节上的各种变化。除了互斥组合之外，本文中描述的装置和/或方法的任何部分可以按照任何组合进行组合。本文中描述的实现方式可包括所描述的不同的实现方式的功能、组件和/或特征的各种组合和/或子组合。
另外，图中描绘的逻辑流程不要求所示的特定次序或顺序次序来实现所希望的结果。此外，可以提供其它步骤，或者可以从所描述的流程中消除步骤，并且可以向所描述的系统添加其它组件或者从所描述的系统中移除其它组件。因此，其它实施例在以下权利要求的范围内。

Claims (20)

1.一种在由虚拟现实(VR)计算机生成的虚拟环境内产生演示的方法，包括：
通过所述VR计算机的处理电路系统，在第一时间间隔内，在所述虚拟环境中生成表示演示的第一部分的演示帧的第一集合，并且在第二时间间隔内，生成表示所述演示的第二部分的演示帧的第二集合，所述演示帧的第一集合和所述演示帧的第二集合中的每个演示帧包括虚拟对象集合，所述演示帧的所述虚拟对象集合中的每个虚拟对象具有相应的状态；
对所述演示帧的第一集合执行第一压缩操作，以产生第一压缩演示数据，所述演示帧的第一集合在所述第一压缩操作期间被在本地存储在所述VR计算机的存储器中；
将所述第一压缩演示数据传递至远离所述VR计算机的远程存储装置；
将所述演示帧的第一集合从所述VR计算机的所述存储器中移除；
对所述演示帧的第二集合执行第二压缩操作，以产生第二压缩数据；以及
将所述第二压缩演示数据传递至所述远程存储装置。
2.根据权利要求1所述的方法，其进一步包括：
从所述远程存储装置中检索所述第一压缩数据和所述第二压缩数据；
对所述第一压缩数据和所述第二压缩数据执行解压操作，以产生所述演示帧的第一集合和所述演示帧的第二集合；以及
根据所述演示帧的第一集合和所述演示帧的第二集合来在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分。
3.根据权利要求2所述的方法，其中，所述虚拟对象集合中的每个虚拟对象在所述演示帧的第一集合中具有第一状态并且在所述演示帧的第二集合中具有第二状态；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：对所述虚拟对象中的每个虚拟对象执行内插操作，以产生处于所述虚拟对象的所述第一状态和所述第二状态之间的中间状态集合。
4.根据权利要求2或3所述的方法，其中，所述演示帧的第一集合和所述演示帧的第二集合中的每个演示帧包括相应的元数据，所述元数据包括指示在所述演示内的时间的排序信息，在所述时间处呈现由所述演示帧的该集合表示的所述演示的部分；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：
读取所述元数据中的所述排序信息；以及
根据所述排序信息来排列所述演示中的所述演示帧的第一集合和所述演示帧的第二集合。
5.根据权利要求2至4中任一项所述的方法，其中，所述演示帧的第一集合中的每个演示帧包括相应的元数据，所述元数据包括在所述演示帧的第一集合内的排序信息；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：
读取所述元数据中的所述排序信息；以及
根据所述排序信息来排列所述演示帧的第一集合。
6.根据权利要求1所述的方法，其中，生成所述演示帧的第一集合包括：
生成包括多个虚拟对象的所述演示帧的第一集合中的第一演示帧，所述多个虚拟对象中的每个虚拟对象具有相应的第一状态；
生成包括所述多个虚拟对象的所述演示帧的第一集合中的第二演示帧，所述多个虚拟对象中的每个虚拟对象具有相应的第二状态；
从所述第二演示帧中移除所述多个对象中的所述第二状态与所述第一状态匹配的虚拟对象。
7.根据权利要求1所述的方法，其中，所述VR计算机包括移动装置；以及
其中，生成所述演示帧的第一集合包括：
向所述移动装置传输对于能够用于执行压缩操作的存储器的量的请求；
从所述移动装置接收指示能够用于执行所述压缩操作的存储器的量的消息；以及
基于能够用于执行压缩操作的所述存储器来产生所述演示帧的第一集合。
8.根据权利要求1所述的方法，其进一步包括：在将所述第一压缩演示数据传递至远离所述VR计算机的所述远程存储装置之后；
对所述演示帧的第一集合执行编辑操作，以产生演示帧的经编辑的第一集合；
对演示帧的经编辑的第一集合执行压缩操作，以产生经编辑的第一压缩演示数据，所述演示帧的经编辑的第一集合在所述压缩操作期间被在本地存储在所述VR计算机的存储器中；
将经编辑的第一压缩演示数据传递至所述远程存储装置；以及
将所述第一压缩演示数据从所述远程存储装置中移除。
9.根据权利要求1所述的方法，其中，所述演示帧的第一集合中的演示帧的虚拟对象的所述状态包括所述虚拟对象在所述虚拟环境内的位置。
10.根据权利要求9所述的方法，其中，所述虚拟对象的所述状态进一步包括所述虚拟对象的大小和所述虚拟对象的透明度。
11.一种包括非传递存储介质的计算机程序产品，所述计算机程序产品包括代码，所述代码在由配置为产生虚拟现实(VR)环境的VR计算机的处理电路系统执行时，使所述处理电路系统执行方法，所述方法包括：
在第一时间间隔内，在所述虚拟环境中生成表示演示的第一部分的演示帧的第一集合，并且在第二时间间隔内，生成表示所述演示的第二部分的演示帧的第二集合，所述演示帧的第一集合和所述演示帧的第二集合中的每个演示帧包括虚拟对象集合，所述演示帧的所述虚拟对象集合中的每个虚拟对象具有相应的状态；
对所述演示帧的第一集合执行第一压缩操作，以产生第一压缩演示数据，所述演示帧的第一集合在所述第一压缩操作期间被在本地存储在所述VR计算机的存储器中；
将所述第一压缩演示数据传递至远离所述VR计算机的远程存储装置；
将所述演示帧的第一集合从所述VR计算机的所述存储器中移除；
对所述演示帧的第二集合执行第二压缩操作，以产生第二压缩数据；以及
将所述第二压缩演示数据传递至所述远程存储装置。
12.根据权利要求11所述的计算机程序产品，其中，所述方法进一步包括：
从所述远程存储装置中检索所述第一压缩数据和所述第二压缩数据；
对所述第一压缩数据和所述第二压缩数据执行解压操作，以产生所述演示帧的第一集合和所述演示帧的第二集合；以及
根据所述演示帧的第一集合和所述演示帧的第二集合来在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分。
13.根据权利要求12所述的计算机程序产品，其中，所述虚拟对象集合中的每个虚拟对象在所述演示帧的第一集合中具有第一状态并且在所述演示帧的第二集合中具有第二状态；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：对所述虚拟对象中的每个虚拟对象执行内插操作，以产生处于所述虚拟对象的所述第一状态和所述第二状态之间的中间状态集合。
14.根据权利要求12或13所述的计算机程序产品，其中，所述演示帧的第一集合和所述演示帧的第二集合中的每个演示帧包括相应的元数据，所述元数据包括指示在所述演示内的时间的排序信息，在所述时间处呈现由所述演示帧的该集合表示的所述演示的部分；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：
读取所述元数据中的所述排序信息；以及
根据所述排序信息来排列所述演示中的所述演示帧的第一集合和所述演示帧的第二集合。
15.根据权利要求12至14中任一项所述的计算机程序产品，其中，所述演示帧的第一集合中的每个演示帧包括相应的元数据，所述元数据包括在所述演示帧的第一集合内的排序信息；以及
其中，在所述虚拟环境中生成所述演示的所述第一部分和所述第二部分包括：
读取所述元数据中的所述排序信息；以及
根据所述排序信息来排列所述演示帧的第一集合。
16.根据权利要求11所述的计算机程序产品，其中，生成所述演示帧的第一集合包括：
生成包括多个虚拟对象的所述演示帧的第一集合中的第一演示帧，所述多个虚拟对象中的每个虚拟对象具有相应的第一状态；
生成包括所述多个虚拟对象的所述演示帧的第一集合中的第二演示帧，所述多个虚拟对象中的每个虚拟对象具有相应的第二状态；
从所述第二演示帧中移除所述多个对象中的所述第二状态与所述第一状态匹配的虚拟对象。
17.根据权利要求11所述的计算机程序产品，其中，所述VR计算机包括移动装置；以及
其中，生成所述演示帧的第一集合包括：
向所述移动装置传输对于能够用于执行压缩操作的存储器的量的请求；
从所述移动装置接收指示能够用于执行所述压缩操作的存储器的量的消息；以及
基于能够用于执行压缩操作的所述存储器来产生所述演示帧的第一集合。
18.根据权利要求11所述的计算机程序产品，其进一步包括：在将所述第一压缩演示数据传递至远离所述VR计算机的所述远程存储装置之后；
对所述演示帧的第一集合执行编辑操作，以产生演示帧的经编辑的第一集合；
对演示帧的经编辑的第一集合执行压缩操作，以产生经编辑的第一压缩演示数据，所述演示帧的经编辑的第一集合在所述压缩操作期间被在本地存储在所述VR计算机的存储器中；
将经编辑的第一压缩演示数据传递至所述远程存储装置；以及
将所述第一压缩演示数据从所述远程存储装置中移除。
19.根据权利要求11所述的计算机程序产品，其中，所述演示帧的第一集合中的演示帧的虚拟对象的所述状态包括所述虚拟对象在所述虚拟环境内的位置。
20.一种配置为产生VR环境的电子设备，所述电子设备包括：
存储器；以及
控制电路系统，所述控制电路系统联接至所述存储器，所述控制电路系统配置为：
在第一时间间隔内，在所述虚拟环境中生成表示演示的第一部分的演示帧的第一集合，并且在第二时间间隔内，生成表示所述演示的第二部分的演示帧的第二集合，所述演示帧的第一集合和所述演示帧的第二集合中的每个演示帧包括虚拟对象集合，所述演示帧的所述虚拟对象集合中的每个虚拟对象具有相应的状态；
对所述演示帧的第一集合执行第一压缩操作，以产生第一压缩演示数据，所述演示帧的第一集合在所述第一压缩操作期间被在本地存储在所述VR计算机的存储器中；
将所述第一压缩演示数据传递至远离所述VR计算机的远程存储装置；
将所述演示帧的第一集合从所述VR计算机的所述存储器中移除；
对所述演示帧的第二集合执行第二压缩操作，以产生第二压缩数据；以及
将所述第二压缩演示数据传递至所述远程存储装置。
CN201780069041.8A 2016-12-05 2017-12-05 实时记录用于修改动画的手势和/或声音 Pending CN109923540A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662430175P 2016-12-05 2016-12-05
US62/430,175 2016-12-05
US15/830,936 US20180160133A1 (en) 2016-12-05 2017-12-04 Realtime recording of gestures and/or voice to modify animations
US15/830,936 2017-12-04
PCT/US2017/064687 WO2018106673A1 (en) 2016-12-05 2017-12-05 Realtime recording of gestures and/or voice to modify animations

Publications (1)

Publication Number Publication Date
CN109923540A true CN109923540A (zh) 2019-06-21

Family

ID=62243611

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780069041.8A Pending CN109923540A (zh) 2016-12-05 2017-12-05 实时记录用于修改动画的手势和/或声音

Country Status (4)

Country Link
US (1) US20180160133A1 (zh)
EP (1) EP3549009A1 (zh)
CN (1) CN109923540A (zh)
WO (1) WO2018106673A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
US11079998B2 (en) * 2019-01-17 2021-08-03 International Business Machines Corporation Executing a demo in viewer's own environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825460A (zh) * 2005-02-22 2006-08-30 株式会社东芝 信息存储介质、信息记录方法、和信息回放方法
CN104808341A (zh) * 2015-04-09 2015-07-29 青岛歌尔声学科技有限公司 一种头戴式虚拟现实设备
US20150258431A1 (en) * 2014-03-14 2015-09-17 Sony Computer Entertainment Inc. Gaming device with rotatably placed cameras
CN205430338U (zh) * 2016-03-11 2016-08-03 依法儿环球有限公司 带vr内容采集组件的智能手机或便携式电子通讯装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9064424B2 (en) * 2009-02-20 2015-06-23 Jackson Fish Market, LLC Audiovisual record of a user reading a book aloud for playback with a virtual book
GB2517780A (en) * 2013-09-02 2015-03-04 Ibm Improved checkpoint and restart
KR102314138B1 (ko) * 2015-03-05 2021-10-18 삼성전자 주식회사 모바일 장치 및 모바일 장치의 데이터 관리 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825460A (zh) * 2005-02-22 2006-08-30 株式会社东芝 信息存储介质、信息记录方法、和信息回放方法
US20150258431A1 (en) * 2014-03-14 2015-09-17 Sony Computer Entertainment Inc. Gaming device with rotatably placed cameras
CN104808341A (zh) * 2015-04-09 2015-07-29 青岛歌尔声学科技有限公司 一种头戴式虚拟现实设备
CN205430338U (zh) * 2016-03-11 2016-08-03 依法儿环球有限公司 带vr内容采集组件的智能手机或便携式电子通讯装置

Also Published As

Publication number Publication date
EP3549009A1 (en) 2019-10-09
WO2018106673A1 (en) 2018-06-14
US20180160133A1 (en) 2018-06-07

Similar Documents

Publication Publication Date Title
JP6716650B2 (ja) 一人称視点でのディープラーニングベースのハンドジェスチャー認識のためのシステムおよび方法
CN110603515B (zh) 利用共享锚点显示的虚拟内容
US10636220B2 (en) Methods and systems for generating a merged reality scene based on a real-world object and a virtual object
US11043031B2 (en) Content display property management
US11678004B2 (en) Recording remote expert sessions
US10891781B2 (en) Methods and systems for rendering frames based on virtual entity description frames
JP7008730B2 (ja) 画像に挿入される画像コンテンツについての影生成
US20150185825A1 (en) Assigning a virtual user interface to a physical object
US20170329503A1 (en) Editing animations using a virtual reality controller
US9799142B2 (en) Spatial data collection
CN103248810A (zh) 图像处理装置、图像处理方法和程序
CN109154862B (zh) 用于处理虚拟现实内容的装置、方法和计算机可读介质
US20220335661A1 (en) System and method for playback of augmented reality content triggered by image recognition
CN104969264A (zh) 用于将注解添加到全光光场的方法和设备
CN115529835A (zh) 用于新颖视图合成的神经混合
CN109923540A (zh) 实时记录用于修改动画的手势和/或声音
TWM560053U (zh) 線上整合擴增實境的編輯裝置
Arago et al. MNLTour: A Web and Mobile Application for Virtual Tour System of Select Tourist Spots Around Manila Using 360-degree Imagery and Virtual Reality Technology
Pavlopoulou et al. A Mixed Reality application for Object detection with audiovisual feedback through MS HoloLenses
US20180365268A1 (en) Data structure, system and method for interactive media
WO2021044441A1 (en) Interactive augmented reality (ar) based video creation from existing video
Berlin VIRTUAL CONCERT HALL-AN IMMERSIVE EXPERIENCE AT THE KONZERTHAUS BERLIN

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190621