CN116529713A - 多用户环境中的应用程序 - Google Patents

多用户环境中的应用程序 Download PDF

Info

Publication number
CN116529713A
CN116529713A CN202180078617.3A CN202180078617A CN116529713A CN 116529713 A CN116529713 A CN 116529713A CN 202180078617 A CN202180078617 A CN 202180078617A CN 116529713 A CN116529713 A CN 116529713A
Authority
CN
China
Prior art keywords
application
user
user version
version
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180078617.3A
Other languages
English (en)
Inventor
L·R·德利茨·森特诺
J·P·塞拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN116529713A publication Critical patent/CN116529713A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/629Protecting access to data via a platform, e.g. using keys or access control rules to features or functions of an application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/401Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及用于在多用户通信环境中进行协作的技术。一种这样的技术包括:从第一设备接收在与第二设备的多用户通信会话中启动应用程序的请求,其中该请求包括要在该多用户通信会话中获得的数据的指示;以及基于该数据向第一设备提供该应用程序的多用户版本,其中该应用程序的多用户版本提供对所指示的数据的访问,并且其中该应用程序的多用户版本提供第一设备与第二设备之间的共享功能。

Description

多用户环境中的应用程序
背景技术
本公开整体涉及多用户环境。更具体地,但并非加以限制,本公开涉及与在扩展现实(XR)环境中托管应用程序有关的技术。
一些设备能够生成并呈现XR环境(XRE)。XRE可包括人们经由电子系统感知和/或与其交互的完全或部分模拟的环境。在XRE中,跟踪人的物理运动的子集或其表示,并且作为响应,以符合至少一个物理定律的方式调节在XRE中模拟的一个或多个虚拟对象的一个或多个特征。一些XRE允许多个用户在XRE中相互交互。然而,所需要的是在管理用户的私人信息的同时在XRE中托管应用程序的技术。
附图说明
图1以框图形式示出了根据一个或多个实施方案的简化系统图。
图2示出了根据一个或多个实施方案的示例性操作环境的图示。
图3是示出根据本公开的各方面的用于向XRE共享内容的界面的线条画。
图4是示出根据本公开的各方面的在显示器上显示的XR通信(XRC)会话的图示。
图5是示出根据本公开的各方面的共享浏览的图示。
图6是示出根据本公开的各方面的共享体验的图示。
图7是示出根据本公开的各方面的用于在XRC会话中与XR计算环境(XRCE)应用程序交互的技术的流程图。
图8A和图8B示出了根据一个或多个实施方案的在各种XR技术中使用的示例性系统。
具体实施方式
本公开涉及在扩展现实环境(XRE)内协作的用户共享诸如图片、视频、声音等内容项而没有因例如将电话交给另一个人而引起的隐私问题的技术。这些内容项可使用应用程序来访问。该应用程序能够在XRE的上下文之外和之内执行。该应用程序能够基于该应用程序是在XRE中执行还是在XRE之外执行而以特定方式执行。共享用户可以能够选择用于共享的某些内容项并且在XRE的上下文中执行的应用程序中将所选择的内容项呈现给XRE中的其他用户。该应用程序基于该应用程序如何执行而提供不同的一组特征。例如,当该应用程序在XRE的上下文中运行时,可仅允许访问所选择的内容项,而当该应用程序在XRE环境之外运行时,该应用程序允许访问额外的内容项。
人可以在不借助于电子设备的情况下与物理环境或物理世界交互以及/或者感知物理环境或物理世界。物理环境可包括物理特征,诸如物理对象或表面。物理环境的示例是包括物理植物和动物的物理森林。人可以通过各种手段(诸如听觉、视觉、味觉、触觉和嗅觉)直接感知物理环境以及/或者与物理环境交互。相比之下,人可以使用电子设备与完全或部分模拟的XRE交互以及/或者感知该XRE。该XR环境可以包括混合现实(MR)内容、增强现实(AR)内容、虚拟现实(VR)内容等等。利用XR系统,人的物理运动或其表示的一些可被跟踪,并且作为响应,能够以符合至少一个物理定律的方式调节在XR环境中模拟的虚拟对象的特征。例如,该XR系统可以检测用户头部的移动,并调节呈现给用户的图形内容和听觉内容(类似于此类视图和声音在物理环境中是如何改变的)。又如,该XR系统可以检测呈现XR环境的电子设备(例如,移动电话、平板电脑、膝上型电脑等)的移动,并调节呈现给用户的图形内容和听觉内容(类似于此类视图和声音在物理环境中是如何改变的)。在一些情形中,该XR系统可以响应于诸如物理运动的表示的其他输入(例如,语音命令)而调节图形内容的特征。
许多不同类型的电子系统可以使用户能够与XR环境交互和/或感知XR环境。示例的非排他性列表包括抬头显示器(HUD)、头戴式系统、基于投影的系统、具有集成显示能力的窗户或车辆挡风玻璃、形成为放置于用户眼睛上的透镜的显示器(例如,接触镜片)、头戴式受话器/耳机、具有触觉反馈或不具有触觉反馈的输入系统(例如,可穿戴或手持式控制器)、扬声器阵列、智能电话、平板电脑和台式计算机/膝上型计算机。头戴式系统可具有不透明显示器和一个或多个扬声器。其他头戴式系统可被配置为接受不透明外部显示器(例如,智能电话)。头戴式系统可包括用于捕获物理环境的图像或视频的一个或多个图像传感器和/或用于捕获物理环境的音频的一个或多个麦克风。头戴式系统可具有透明或半透明显示器,而不是不透明显示器。透明或半透明显示器可具有媒介,光通过该媒介被引导到用户的眼睛。显示器可利用各种显示技术,例如uLED、OLED、LED、硅基液晶、激光扫描光源、数字光投影或其组合。光波导、光学反射器、全息图媒介、光学组合器及其组合或其它类似技术可用于媒介。在一些具体实施中,透明或半透明显示器可被选择性地控制而变得不透明。基于投影的系统可利用将图形图像投影到用户的视网膜上的视网膜投影技术。投影系统也可以将虚拟对象投影到物理环境中(例如,作为全息图或投影到物理表面上)。
出于本公开的目的,XRC会话是指两个或更多个设备正在参与的XRE。
出于本公开的目的,XRC设备是指在XRC会话中被描述的或由被描述的用户控制的当前设备。
出于本公开的目的,共定位XRC设备是指共享物理环境和XRC会话的两个设备,使得共定位设备的用户可体验相同的物理对象和XR对象。
出于本公开的目的,远程XRC设备是指位于与当前本地XRC设备隔开的物理环境中的第二设备。在一个或多个实施方案中,该远程XRC设备可以为XRC会话的参与者。
出于本公开的目的,共享虚拟元素是指对XRC会话中的参与者可见或以其他方式能够由其在XRE中体验的XR对象。
出于本公开的目的,XRCE是指能够托管应用程序的XRC会话的计算环境或容器。XRCE使得应用程序能够在XRC会话内运行。在某些情况下,XRCE可使得XRC会话的用户能够在XRC会话内与托管应用程序交互。
出于本公开的目的,XRCE实例是指被描述的或由被描述的用户控制的当前设备的XRCE。XRCE实例可允许用户参与XRC会话并且在XRC会话中运行应用程序。
出于本公开的目的,第二XRCE实例是指在XRC会话中由第二用户控制的次要设备或次要设备的XRCE,而不是本地XRCE实例。第二XRCE实例可以是远程的或共定位的。
出于本公开的目的,XRCE应用程序是指能够在XRCE的上下文中执行的应用程序。
出于本公开的目的,第二XRCE应用程序是指在XRC会话中由第二用户控制的次要设备或次要设备的XRCE应用程序,而不是本地XRCE实例。第二XRCE应用程序可以是远程的或共定位的。
在以下描述中,为了解释的目的,阐述了很多具体细节以便提供对所公开构思的彻底理解。作为该描述的一部分,本公开的附图中的一些附图以框图形式表示结构和设备,以避免模糊所公开构思的新颖方面。为了清晰起见,可能未对实际具体实施的所有特征进行描述。另外,作为本说明书的一部分,本公开的一些附图可以流程图的形式提供。任何特定流程图中的框可以特定顺序呈现。然而,应当理解,任何给定流程图的特定顺序仅用于举例说明一个实施方案。在其他实施方案中,可删除流程图中描绘的各种元件中的任何元件,或者可以不同的顺序,或甚至同时执行图示的操作序列。此外,其他实施方案可包括未被示为流程图的一部分的附加步骤。此外,本公开中所使用的语言已主要被选择用于可读性和指导性目的,并且可能没有被选择为划定或限定本发明的主题,从而诉诸于所必需的权利要求以确定此类发明主题。在本公开中提到“一个实施方案”或“实施方案”意指结合该实施方案所述的特定特征、结构或特性被包括在所公开主题的至少一个实施方案中,并且多次提到“一个实施方案”或“实施方案”不应被理解为必然地全部涉及相同的实施方案。
应当理解,在任何实际实施方式的开发中(如在任何软件和/或硬件开发项目中那样),必须要作出许多决策以实现开发者的特定目标(例如,符合与系统和商务相关的约束条件),并且这些目标在不同实施方式之间可能不同。还应理解,此类开发工作可能复杂且耗时,但是尽管如此,对于在受益于本公开而设计和实施图形建模系统的那些普通技术人员而言,这仍然是他们的日常工作。
参见图1,示出了根据本公开的一个或多个实施方案的电子设备100的简化框图,该电子设备通过网络105可通信地连接到附加电子设备110和网络存储装置115。电子设备100可为多功能设备的一部分,诸如移动电话、平板电脑、个人数字助理、便携式音乐/视频播放器、可穿戴设备、头戴式系统、基于投影的系统、基站、膝上型计算机、台式计算机、网络设备或诸如本文所述的任何其他电子系统。电子设备100、附加电子设备110和/或网络存储装置115可以附加地或另选地包括一个或多个附加设备(诸如服务器设备、基站、附属设备等),在这些附加设备中可包含各种功能,或者可在这些附加设备上分布各种功能。诸如网络105的例示性网络包括但不限于本地网络(诸如通用串行总线(USB)网络)、组织的局域网以及广域网(WAN)诸如互联网。根据一个或多个实施方案,电子设备100用于参与XRC会话。应当理解,电子设备100、附加电子设备110和网络存储装置115内的各种部件和功能可不同地分布在设备上或者可分布在附加设备上。电子设备100可包括网络接口150,该网络接口与诸如无线电、红外和/或可见光收发器之类的联网部件交接以用于与其他设备通信。网络接口150可与有线或无线联网部件或两者交接。
电子设备100可包括一个或多个处理器125,诸如中央处理单元(CPU)。处理器125可包括片上系统(诸如存在于移动设备中的那些片上系统),并且可包括一个或多个专用图形处理单元(GPU)。另外,处理器125可包括相同或不同类型的多个处理器。电子设备100还可包括存储器135。存储器135可包括一个或多个不同类型的存储器,其可用于结合处理器125执行设备功能。例如,存储器135可包括高速缓存、ROM、RAM或能够存储计算机可读代码的任何种类的暂态或非暂态计算机可读存储介质。存储器135可以存储用于由处理器125执行的各种编程模块,包括XR模块165、XRCE模块170和其他各种应用程序175。
存储器135还可包括OS模块180,该模块用于支持XR电子设备100的基本功能和管理其硬件。OS模块180提供应用程序175可在其内执行的环境。在某些情况下,XRCE模块170和XR模块165可在OS模块180的上下文中运行。在其他情况下,XRCE模块170和XR模块165可与OS模块180并行地或替代该OS模块处理XR电子设备100的基本功能和管理其硬件。XRCE模块170还提供应用程序175可在其内执行的环境。应用程序175可以包括例如可以由多个设备(诸如XR电子设备100和附加XR电子设备110)在XRC会话中体验的计算机应用程序。
电子设备100还可包括存储装置130。存储装置130可包括一个或多个非暂态计算机可读介质,该非暂态计算机可读介质包括,例如,磁盘(固定硬盘、软盘和可移动磁盘)和磁带、光学介质(诸如CD-ROM和数字视频光盘(DVD))以及半导体存储设备(诸如电可编程只读存储器(EPROM)和电可擦除可编程只读存储器(EEPROM))。根据一个或多个实施方案,存储装置130可被配置为存储内容项160。
电子设备100还可包括一个或多个相机140或其他传感器145,诸如可根据其确定场景深度的深度传感器。在一个或多个实施方案中,一个或多个相机140中的每个相机可为传统RGB相机或深度相机。此外,相机140可包括立体相机或其他多相机系统、飞行时间相机系统等。电子设备100还可包括显示器155。显示设备155可利用数字光投影、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。媒介可以是光学波导、全息图媒介、光学组合器、光学反射器、或它们的任意组合。在一个实施方案中,透明或半透明显示器可被配置为选择性地变得不透明。基于投影的系统可以采用将图形图像投影到人的视网膜上的视网膜投影技术。投影系统也可以被配置为将虚拟对象投影到物理环境中,例如作为全息图或在物理表面上。
根据一个或多个实施方案,存储器135可包括一个或多个模块,该一个或多个模块包括能够由处理器125执行以执行功能的计算机可读代码。存储器模块可包括例如可用于为本地XRC设备提供XRE的XR模块165。XRCE模块170可生成支持XR环境的环境。例如,XRCE模块170可提供XR环境和/或托管应用程序可用来与电子设备100的操作系统(OS)和/或硬件交接的服务和/或应用编程接口。XRC会话可以是支持电子设备100以及附加电子设备110的共享体验的计算环境。
存储器135还可包括OS模块180,该模块用于支持电子设备100的基本功能和管理其硬件。OS模块180提供应用程序175可在其内执行的环境。在某些情况下XRCE模块170和XR模块165可在OS模块180的上下文中运行。在其他情况下,XRCE模块170和XR模块165可与OS模块180并行地或替代该OS模块处理电子设备100的基本功能和管理其硬件。XRCE模块170还提供应用程序175可在其内执行的环境。应用程序175可以包括例如可以由多个设备(诸如电子设备100和附加电子设备110)在XRC会话中体验的计算机应用程序。
虽然电子设备100被描述为包括上述众多部件,但在一个或多个实施方案中,各种部件可分布在多个设备上。因此,尽管本文相对于所描绘的特定系统描述了某些调用和传输,但在一个或多个实施方案中,各种调用和传输可基于不同分布的功能而被不同地引导。此外,可使用附加部件,并且可组合任何部件的功能的某种组合。
图2示出了根据一个或多个实施方案的示例性操作环境的图示。尽管示出了相关特征,但本领域的普通技术人员将从本公开中认识到,为简洁起见并且为了不模糊本文所公开的具体实施中的示例的更多相关方面,未示出各种其它特征。为此,作为非限制性示例,操作环境240包括第一物理环境,而操作环境250包括第二物理环境。
如图2所示,第一环境240包括正在利用第一电子设备200的第一用户220,第二环境250包括正在利用第二电子设备210的第二用户232。在一个或多个实施方案中,第一电子设备200和第二电子设备210包括移动设备,诸如手持设备、可穿戴设备等。
在一个或多个实施方案中,第一电子设备200和第二电子设备210经由网络205互相通信。网络205的示例可以包括例如互联网、WAN、局域网(LAN)等。在一个或多个实施方案中,第一电子设备200和第二电子设备210可以参与XRC会话。
尽管电子设备200和第二电子设备210可以参与共同的XRC会话,但是虚拟环境可以在每个设备上不同地渲染。如图所示,电子设备200可以描绘环境240的物理对象。如图所示,物理桌子222可以在显示器242上被描绘为虚拟桌子224。在一个或多个实施方案中,显示器242可以是透视显示器,并且虚拟桌子224可以只是通过显示器242看到的物理桌子222的视图。
电子设备200的显示器242还可以包括对应于物理环境250中的用户232的头像226。出于本公开的目的,头像可以包括用户的虚拟表示。该头像可以描绘对应用户232的实时动作,包括移动、经更新位置和/或与XRC会话内的各种物理部件和/或虚拟部件的交互。头像可以模拟或可以不模拟用户的物理特性,并且可以模拟或可以不模拟用户的面部表情。
根据一个或多个实施方案,XRCE可以是支持一个或多个XRCE应用程序的XRE,或跨所有参与设备(诸如电子设备200第二电子设备210)提供XR对象的描绘的其他模块。如显示器242所示,呈现面板230A是可以对所有参与设备可见的虚拟对象的示例。
作为示例,返回到环境250,第二电子设备210包括显示器252,在该显示器上描绘了呈现面板虚拟对象230B。应当理解,在一个或多个实施方案中,尽管相同的虚拟对象可在所有参与设备上可见,但是根据电子设备的位置、电子设备的取向或与电子设200和电子设备210相关联的其他物理或虚拟特性和/或在显示器242和252内描绘的XRCE,可以不同地渲染该虚拟对象。
返回到环境250,XRC会话的另一个特征是,虽然虚拟对象可以跨参与设备共享,但物理世界可以看起来不同。由此,物理椅子234被描绘为虚拟椅子236。如上所述,并且在一个或多个实施方案中,显示器252可以是透视显示器,并且虚拟椅子236可以是通过透视显示器252看到的物理椅子234的视图。此外,电子设备210描绘了对应于物理环境240内的用户220的头像238。
根据一个或多个实施方案,诸如呈现面板230A和230B的虚拟对象可结合XRCE应用程序来渲染。在一个或多个实施方案中,可以在XRCE内执行多个XRCE应用程序。例如,XRCE可以在XRCE的虚拟环境内托管XRCE应用程序作为虚拟对象。如下文进一步论述,应用程序可以被配置为在XRCE之内或之外运行。例如,基于应用程序正在其中执行的操作环境或上下文,该应用程序可以包括多个操作模式,例如XRCE模式和非XRCE模式。可以确定应用程序在XRCE的上下文内运行,诸如通过应用编程接口(API),并且以XRCE模式操作。当在XRCE之外运行时,应用程序可以非XRCE模式运行。例如,当在电子设备的OS的上下文中而不是在XRCE中运行时,应用程序以非XRCE模式运行。如本文所用,XRCE应用程序或托管应用程序还可以指以XRCE模式运行的应用程序以及仅被配置为在XRCE的上下文内运行的应用程序。XRCE可以提供其中XRCE应用程序可以类似于操作系统的方式运行的容器或计算环境。这些容器可作为虚拟对象呈现给用户,使得XRCE应用程序看起来正在窗口中执行、位于表面上或为另一虚拟对象。
在某些情况下,XRCE应用程序在特定XRCE实例的上下文中执行。例如,与第一设备相关联的第一用户可能正在参与和第二设备所关联的第二用户的XRC会话。该示例中的XRCE应用程序在第一设备和第二设备两者上执行。基于来自第一用户的输入,第一设备可以执行在本地XRCE实例中托管的第一XRCE应用程序。第一XRCE应用程序可以与在第二设备上执行的第二XRCE实例中托管的第二XRCE应用程序共享数据。在特定XRCE实例的上下文内执行XRCE应用程序有助于为XRCE内的本地用户提供隐私措施。在某些情况下,XRCE实例可以在本地设备中执行。在其他情况下,XRCE实例可以至少部分地在网路或托管设备上执行。
在某些情况下,XRCE的用户可以与其他用户共享来自XRCE应用程序的内容。内容的示例包括图像、视频、音频、文档、电子表格、演示等。根据一个或多个实施方案,在XRCE内执行的一个或多个XRCE应用程序可以在XRC会话的参与者之间共享内容。例如,第一用户可以使用XRCE应用程序与在XRC会话中活动的其他用户(诸如第二设备)共享他们的内容,诸如照片、视频、音乐等。
允许与其他用户共享来自用户的内容会引起隐私问题。例如,因为用户正在共享他们的照片并不意味着他们想要共享他们的所有照片。例如,与应用程序的非XRCE版本相比,XRCE应用程序可以提供减少的功能或相对于某些特征的更有限的功能,以帮助维护共享内容的用户的隐私。例如,XRCE应用程序可以基于用户指定的一组共享内容来实例化,并且可以被限制为不能访问除了该指定的一组共享内容之外的内容。XRCE应用程序可以在XRC会话中显示该指定的一组共享内容。另外,当在XRCE上下文之外执行时应用程序所包括的某些特征(诸如用于编辑在应用程序中显示的内容、创建内容、选择其他内容等的那些特征)在应用程序在XRCE内执行时可能不可用或被禁用。可以理解,如本文所用,XRCE应用程序可以呈现具有或不具有视觉分量的非可视内容。例如,共享内容可以是音频剪辑,并且该内容可以通过回放该音频剪辑而在XRC会话中呈现。该音频剪辑可以单独显示,或者可以具有伴随的视觉指示或分量。
虽然上述应用程序的XRCE版本包括与应用程序的非XRCE版本相比提供减少的功能的某些特征,但是可以理解,由应用程序的XRCE版本提供的功能可以变化。例如,应用程序的XRCE版本的功能可以针对每个用户而变化。在某些情况下,共享内容的用户可以具有与另一用户不同的一组可用特征。另一用户的应用程序的XRCE版本可以限制对共享用户或另一用户的其他内容的浏览。在某些情况下,共享用户的应用程序的XRCE版本可以包括比其他用户的应用程序的XRCE版本更多的功能。例如,共享用户的应用程序的XRCE版本可以包括非XRCE版本的基本上所有特征,而用于其他用户的应用程序的XRCE版本可以具有有限的功能。在某些情况下,其他用户可以看到应用程序的XRCE版本的表示,例如,如果他们没有该应用程序的话。
图3是示出根据本公开的各方面的用于向XRCE共享内容的界面300的线条画。在该示例中,用于共享内容的界面300最初在XRCE的上下文之外执行。例如,用户可以使用应用程序来浏览其设备上的内容以及访问用于共享内容的界面300,例如通过使用按钮、长按或以其他方式选择内容项。在某些情况下,用户然后可以选择用于共享的一个或多个内容项,例如通过在被选择用于与XRC会话共享的图像上放置复选标记302A和302B。用户然后可以例如使用XRCE共享按钮304来指示所选择的内容项可以被共享到XRC会话。
在某些情况下,XRCE实例可以例如作为后台应用程序运行。例如,第一用户可以从活动的XRCE实例切换出去并且切换到另一个应用程序中以浏览和/或选择内容以在XRC会话中共享。在某些情况下,用户可以将任务从XRCE实例切换到操作系统环境中并且选择另一个应用程序(诸如媒体播放器应用程序)来访问。又如,用户可以将任务从XRCE实例切换到操作系统环境中并且选择一个或多个媒体项,这些媒体项然后在另一个应用程序中打开。在其他情况下,可能不存在正在运行的XRCE实例,并且例如通过使用XRCE共享按钮304来选择要共享到XRC会话的内容可以发起XRC会话。在其他情况下,XRCE可以包括浏览或搜索功能,该功能可以帮助用户在XRCE内定位和/或共享媒体项。在某些情况下,用户可以从XRC会话内访问应用程序,而该应用程序对于XRC会话的其他用户不可见。
图4是示出根据本公开的各方面的在显示器400上显示的XRC会话的XR环境的图示。在该示例中,XRCE应用程序被托管在XRCE实例402内,并且XRCE应用程序被显示在呈现面板404中。在某些情况下,用户可能想要在XRC会话内访问内容,而不必与XRC会话的其他用户共享该内容。与其他用户共享的内容可以在指示该内容被共享的上下文中呈现。例如,当要与其他用户共享所选媒体项时,与所选媒体项相关联的XRCE应用程序可以在XRCE实例内启动。例如,媒体查看器可以在XRCE实例中被实例化,从而显示媒体查看器内的内容被共享的指示。在该示例中,XRCE应用程序在呈现面板404内显示,指示呈现面板404内的媒体项与其他用户共享。在某些情况下,XRCE应用程序可以显示呈现面板404。在其他情况下,呈现面板404可以由XRCE提供以指示呈现面板404内的内容是共享内容。
XRCE实例可以包括XRCE应用程序可以与之集成的功能。例如,XRCE实例可以帮助提供XRCE应用程序可访问的用于联网、同步、通信路径、共享数据等的架构。XRCE实例可以托管在呈现面板404内具有共享内容的应用程序。例如,当共享内容时,要共享的内容的指示可以被传递给XRCE实例,诸如通过调用内容共享API。XRCE应用程序可以基于共享内容来实例化,使得XRCE应用程序能够访问共享内容但不访问可能在设备上的其他内容。XRCE实例可以在呈现面板404内显示XRCE应用程序,诸如第一XRCE应用程序,这可以帮助向用户指示内容与XRC会话的其他用户共享。XRCE实例或XRC会话可以向XRC会话的其他用户发送共享内容的表示。例如,内容数据可以被发送给其他用户,或者内容数据可以在被发送给其他用户之前被重新编码、压缩、变换、封装等。一旦被其他用户(诸如第二用户的第二设备)接收,第二设备的XRCE实例就可以基于在XRC的上下文内共享的内容数据来将存储在第二设备上的第二XRCE应用程序实例化。由第一用户共享的内容可以由第二XRCE应用程序在第二用户的XRCE实例中的对应呈现面板中显示。在某些情况下,第二XRCE应用程序可不以同于第一XRCE应用程序。例如,第二用户可以使用不同的XRCE应用程序来访问正在共享的内容的类型。
与不显示共享内容的另一个应用程序实例(诸如应用程序的非XRCE版本)相比,显示共享内容的XRCE应用程序可以具有不同的功能。例如,显示共享内容的XRCE应用程序可以仅具有对共享内容的访问权限;浏览和保存功能可能不可用,编辑功能可能不可用,等等。在该示例中,两个共享图像406可被XRCE应用程序访问。在某些情况下,第一用户共享内容,该内容可以被发送到参与XRC会话的第二设备。与第二设备相关联的对应XRCE应用程序然后可以访问该共享内容并且向第二用户显示该共享内容。
在某些情况下,XRC会话中的第二用户408也可以向XRC会话共享内容。在该示例中,第二用户408可以临时离开或脱离XRC会话以选择要共享的附加内容。在该示例中,第二用户408与执行链接到XRC会话的第二XRCE实例的第二设备相关联。XRCE实例可以显示与第二用户408相关联的图标410,指示第二用户408已经将焦点从XRC会话切换或者已经将他们的注意力引导到别处。切换焦点或引导注意力离开XRC会话的示例可包括切换到另一个应用程序而不退出XRC会话,与第二XRCE实例中的在XRC会话中不可见的另一个应用程序或其他对象交互,以及/或者当与第二XRCE实例的菜单或其他用户界面(UI)元素交互时。一旦第二用户408已经选择了要共享的附加内容,所选的附加内容就可以被发送给XRC会话中的其他用户。该附加内容然后可以在相应XRCE实例的呈现面板404中显示。在某些情况下,该附加内容可以被添加到XRCE应用程序可访问的内容并且由XRCE应用程序显示。在其他情况下,XRCE应用程序的另一实例可基于附加内容被实例化并且被添加到呈现面板404,并且附加内容由XRCE应用程序的该另一实例显示。在其他情况下,另一XRCE应用程序可基于附加内容被实例化并且被添加到呈现面板404,并且附加内容由该另一XRCE应用程序显示。在某些情况下,附加内容可以与上述类似的方式在另一呈现面板中显示。在某些情况下,附加内容可以与上述类似的方式在相应XRCE实例中显示,而不呈现在呈现面板中。
在某些情况下,XRCE应用程序还可以提供附加功能来帮助促进共享体验。图5是示出根据本公开的各方面的共享浏览500的图示。如图所示,共享浏览500的该示例包括与第一用户相关联的第一设备502运行第一XRCE实例504以及与第二用户相关联的第二设备552运行第二XRCE实例554。第一XRCE实例504和第二XRCE实例554正在参与XRC会话并且将不同视图提供到XRC会话中。第一XRCE实例504包括第一呈现面板506。在该示例中,第一呈现面板506包括由第一用户共享到XRC会话的共享图像508。在某些情况下,XRC会话的每个用户可以能够独立地浏览共享图像508。例如,共享图像508中的第一图像可以在第一XRCE实例504中在第一呈现面板506中显示给第一用户,并且第二用户可以浏览共享图像508,这里使得共享图像508中的第二图像被显示而不使得第一呈现面板506中的图像改变。在某些情况下,可能希望提供对正在XRC会话中显示的共享内容的一定水平的控制。
图6是示出根据本公开的各方面的共享体验600的图示。和前面一样,共享体验600的该示例包括与第一用户相关联的第一设备602运行第一XRCE实例604以及与第二用户相关联的第二设备652运行第二XRCE实例654。第一XRCE实例604和第二XRCE实例654正在参与XRC会话并且将不同视图提供到XRC会话中。在某些情况下,XRCE应用程序可以允许共享内容的用户控制对呈现面板606中的其他用户可见的共享内容。例如,XRCE应用程序或呈现面板606可以包括相对于共享内容的多个模式。可以采用各种方式来设置或选择这些模式,诸如经由UI元素、手势,或者基于触摸或其他类型的输入。一种这样的模式可以使得在用户的相应XRCE实例中显示的图像被同步。例如,在第二XRCE实例654中显示的第二组图像662可以与在第一XRCE实例604中显示的第一组图像660同步。在某些情况下,在呈现面板606中显示的内容针对XRC会话的用户被同步或更新的情况下,XRCE应用程序或呈现面板606可以将哪个图像要在呈现面板606中显示的指示在用户的相应XRCE实例中发送给用户。该指示可以例如经由处理用于XRC会话的通信和数据同步的XRCE架构来发送。在某些情况下,可以在XRC会话的用户之间传递对所显示的共享内容的控制。
在某些情况下,用户可以能够获得关于对共享内容的访问的信息。在该示例中,第一用户的第一XRCE实例604正在显示第二组图像662(例如,第一组图像660的共享版本)中的第一图像608A。在第二XRCE实例654处,第二用户可以浏览第二组图像662并且显示第二图像608B。第一用户可以接收另一用户正在查看共享图像608中的另一图像的浏览指示610。在某些情况下,浏览指示610还可以包括关于哪些其他用户正在浏览共享图像和/或指示哪些共享图像正在被其他用户查看的信息。
在某些情况下,可以为XRC会话的用户部分地同步图像。在该示例中,第一用户的第一XRCE实例604显示共享图像中的第一图像608A,并且第二XRCE实例654正在显示第二图像608B。在某些情况下,部分同步可以例如由第一用户发起。部分同步的发起可以基于例如呈现用户(诸如第一用户)与共享内容的交互。例如,第一用户可以通过触摸612第一图像608A来与共享内容交互。在某些情况下,呈现用户可以是与其他用户部分地同步的用户,并且呈现用户可以不是共享共享内容的用户。与共享内容交互的其他示例可包括手势、注意跟踪、用户界面元素诸如按钮、切换键等。在第二XRCE实例654正在显示共享内容的不同部分的情况下,例如,如果第二用户浏览到第二图像608B和/或与该第二图像交互,则呈现用户正在与共享内容的哪个部分交互的呈现指示656可以由第二XRCE实例654显示,而不完全覆盖第二用户浏览到和/或与其交互的共享内容的部分。在某些情况下,呈现指示656可以是呈现用户正在与其交互的共享内容的部分的部分透明或覆盖版本。第二用户可以能够继续浏览共享内容和/或与共享内容交互。在某些情况下,交互指示658可以被显示给除呈现用户之外的用户。交互指示658可以基于呈现用户与共享内容的所有交互或特定交互。例如,诸如硬触摸、双触摸、轻扫等的特定手势可以使得呈现用户的交互指示658与其他用户共享,而诸如轻触摸、多手指轻扫等的其他手势可以不引起交互指示658。可以提供交互指示658,使得用户可以引起注意或强调共享内容的一个或多个部分。
图7是示出根据本公开的各方面的用于在XRC会话中与XRCE应用程序交互的技术的流程图。任选地,在框702处,多用户通信会话被检测为不活动的。例如,多个用户可以在XRC会话中协作,并且第一用户可以选择一组内容以在XRC会话中共享。第一用户可以停用第一设备上的XRCE实例并且启动XRCE应用程序。XRCE应用程序可例如基于标志或API调用来检测XRCE应用程序未在XRCE的上下文中执行。任选地,在框704处,可以响应于检测到多用户通信会话是不活动的而提供该应用程序的非多用户版本,其中该应用程序的非多用户版本不提供对共享功能的访问。例如,可以例如由XRCE应用程序或设备做出XRCE实例不活动的确定,并且提供该应用程序的非XRCE版本(例如,常规版本)。该应用程序的常规版本可能缺少在XRCE版本中可用的某些功能,诸如限制其他用户编辑或删除内容或协作和呈现功能。在框706处,从第一设备处的第一用户接收在与第二设备处的第二用户的XRC会话中启动应用程序的请求,其中该请求包括要在XRC会话中获得的数据的指示。例如,该应用程序的常规版本可以包括允许内容被选择用于共享到XRC会话的功能。例如,可以在该应用内选择内容以使其可用于XRC会话。
在一些情况下,可以从该应用程序的非多用户版本接收该请求。例如,设备的用户可以使用该应用程序的常规版本来选择用于共享到XRC会话的内容。该应用程序的常规版本可以基于所选内容直接地或经由XRC会话/实例来调用XRCE应用程序。在一些情况下,该应用程序的多用户版本包括与非多用户版本分开的应用程序。例如,该应用程序的常规版本可以是与XRCE应用程序分开的应用程序,并且XRCE应用程序可以例如由XRC实例启动。在一些情况下,该应用程序的多用户版本包括由该应用程序的非多用户版本提供的界面,其中该应用程序的多用户版本的界面与非多用户版本的界面分开。例如,该应用程序的常规版本可以包括当该应用程序常规地执行时(例如,不在XRC实例的上下文中执行)显示的用户界面以及当该应用程序在XRC实例的上下文中执行时显示的单独版本用户界面。在一些情况下,该应用程序的多用户版本包括与该应用程序的非多用户版本相同的应用程序和界面,并且其中该应用程序的多用户版本包括在该应用程序的非多用户版本中不可用的特定功能。例如,该应用程序的常规版本可以包括当该应用程序常规地执行时(例如,不在XRC实例的上下文中执行)显示的用户界面,并且该用户界面的各方面可以在该应用程序在XRC实例的上下文中执行时使用。当在XRC会话的上下文中执行该应用程序时,某种功能可能可用,并且当常规地执行该应用程序时,该功能可能不可用。在一些情况下,该应用程序的多用户版本包括与该应用程序的非多用户版本相同的应用程序和界面,并且其中该应用程序的多用户版本限制在该应用程序的非多用户版本中可用的特定功能。例如,该应用程序的常规版本可以包括当该应用程序常规地执行时(例如,不在XRC实例的上下文中执行)显示的用户界面,并且该用户界面的各方面可以在该应用程序在XRC实例的上下文中执行时使用。当在XRC会话的上下文中执行该应用程序时,在该应用程序的常规版本中可用的某种功能可能不可用。
在框708处,基于该数据向第一设备提供该应用程序的XRCE版本,其中该应用程序的XRCE版本提供对所指示的数据的访问,并且其中该应用程序的XRCE版本提供第一设备和第二设备之间的共享功能。例如,该应用程序的XRCE版本或模式可以在具有所选择的内容的访问权限的第一设备上执行的XRCE实例内启动和托管。作为更详细的示例,选择要在XRC会话内获得的内容可以利用API调用、设置标志或使得XRCE应用程序被启动的其他指示符来启动应用程序的实例。XRCE应用程序可以访问所选择的内容以用于在XRC会话中显示。在某些情况下,XRCE应用程序可以显示在指定用于共享内容的XRC会话的一部分中,诸如特定的虚拟或物理表面。可以限制XRCE应用程序访问除了所选内容之外的其他内容,诸如存储在第一设备上的内容。在XRCE实例的上下文中执行的XRCE应用程序可以具有当该应用程序在XRCE实例之外执行时第一应用程序将具有的特征的子集。例如,用于编辑或创建内容的特征可能在XRCE应用程序中不可用或被禁用。在某些情况下,可以将基于共享内容集合的数据发送到与XRC会话相关联的第二装置以供显示给第二设备的第二用户。在某些情况下,第二设备可以使用第二XRCE应用程序来显示该数据。XRCE应用程序和第二XRCE应用程序可以是相同应用程序或不同应用程序的不同实例。第二XRCE应用程序可以被托管在第二设备上执行的第二XRCE实例中。在某些情况下,可以在第一设备和第二设备两者上显示该数据的相同部分。在某些情况下,共享功能包括允许第一设备和第二设备以对第一用户和第二用户可见的方式与数据交互的工具。例如,由第一设备接收的滚动命令可以使得所显示的数据在第一设备和第二设备两者上滚动。又如,诸如触摸或轻扫之类的交互可以由XRCE应用程序从第一用户接收。该交互的指示可以被传发送到第二设备并且由第二XRCE应用程序呈现,诸如通过经由图标、标记或其他符号来显露该触摸。在某些情况下,第一用户可以与共享内容集合交互,并且该交互的指示可以被发送到第二设备。该交互的指示然后可以由第二设备在运行于第二设备上的第二XRCE实例中显示。
图8A和图8B示出了用于在各种XR技术中使用的示例性系统800。
在一些示例中,如图8A所示,系统800包括设备800A。设备800A包括各种部件,诸如处理器802、RF电路804、存储器806、图像传感器808、取向传感器810、麦克风812、位置传感器816、扬声器818、显示器820和触敏表面822。这些部件任选地通过设备800A的通信总线850进行通信。
在一些示例中,系统800的元件在基站设备(例如,计算设备,诸如远程服务器、移动设备或膝上型电脑)中实现,并且系统800的其他元件在第二设备(例如,头戴式设备)中实现。在一些示例中,设备800A在基站设备或第二设备中实现。
如图8B所示,在一些示例中,系统800包括诸如通过有线连接或无线连接进行通信的两个(或更多个)设备。第一设备800B(例如,基站设备)包括处理器802、RF电路804和存储器806。这些部件任选地通过设备800B的通信总线850进行通信。第二设备800C(例如,头戴式设备)包括各种部件,诸如处理器802、RF电路804、存储器806、图像传感器808、取向传感器810、麦克风812、位置传感器816、扬声器818、显示器820和触敏表面822。这些部件任选地通过设备800C的通信总线850进行通信。
系统800包括处理器802和存储器806。处理器802包括一个或多个通用处理器、一个或多个图形处理器、和/或一个或多个数字信号处理器。在一些示例中,存储器806是存储计算机可读指令的一个或多个非暂态计算机可读存储介质(例如,闪存存储器,随机存取存储器),这些计算机可读指令被配置为由处理器802执行以执行下述技术。
系统800包括RF电路804。RF电路804任选地包括用于与电子设备、网络(诸如互联网、内联网)和/或无线网络(诸如蜂窝网络和无线局域网(LAN))通信的电路。RF电路804任选地包括用于使用近场通信和/或短程通信(诸如)进行通信的电路。
系统800包括显示器820。显示器820可具有不透明的显示器。显示器820可具有透明或半透明显示器,该显示器可结合基板,代表图像的光通过该基板被引导到个体的眼睛。显示器820可结合LED、OLED、数字光投影仪、激光扫描光源、硅上液晶,或这些技术的任何组合。透射光的基板可以是光波导、光组合器、光反射器、全息基板或这些基板的任意组合。在一个示例中,透明或半透明显示器可在不透明状态与透明或半透明状态之间选择性地转换。显示器820的其他示例包括抬头显示器、能够显示图形的汽车挡风玻璃、能够显示图形的窗口、能够显示图形的镜片、平板电脑、智能电话以及台式计算机或膝上型计算机。另选地,系统800可被设计为接收外部显示器(例如,智能电话)。在一些示例中,系统800是基于投影的系统,该系统使用视网膜投影将图像投影到个体的视网膜上或将虚拟对象投影到物理环境中(例如,投影到物理表面上或作为全息图)。
在一些示例中,系统800包括用于接收用户输入(诸如,轻击输入和轻扫输入)的触敏表面822。在一些示例中,显示器820和触敏表面822形成触敏显示器。
系统800包括图像传感器808。图像传感器808任选地包括可操作以从物理布景获取物理元素的图像的一个或多个可见光图像传感器,诸如电荷耦合器件(CCD)传感器和/或互补金属氧化物半导体(CMOS)传感器。一个或多个图像传感器还任选地包括一个或多个红外(IR)传感器,诸如无源IR传感器或有源IR传感器,用于检测来自物理布景的红外光。例如,有源IR传感器包括IR发射器,诸如IR点发射器,用于将红外光发射到物理布景中。图像传感器808还任选地包括一个或多个事件相机,该一个或多个事件相机被配置为捕获物理环境中物理元素的移动。图像传感器808还任选地包括一个或多个深度传感器,该一个或多个深度传感器被配置为检测物理元素与系统800的距离。在一些示例中,系统800组合使用CCD传感器、事件相机和深度传感器来检测系统800周围的物理环境。在一些示例中,图像传感器808包括第一图像传感器和第二图像传感器。第一图像传感器和第二图像传感器任选地被配置为从两个不同的视角捕获物理布景中物理元素的图像。在一些示例中,系统800使用图像传感器808来接收用户输入,诸如手势。在一些示例中,系统800使用图像传感器808来检测系统800和/或显示器820在物理环境中的位置和取向。例如,系统800使用图像传感器808来跟踪显示器820相对于物理环境中的一个或多个固定元素的位置和取向。
在一些示例中,系统800包括麦克风812。系统800使用麦克风812来检测来自用户和/或用户的物理环境的声音。在一些示例中,麦克风812包括麦克风阵列(包括多个麦克风),这些麦克风任选地协同操作,以标识环境噪声或在物理环境的空间中定位声源。
系统800包括用于检测系统800和/或显示器820的取向和/或移动的取向传感器810。例如,系统800使用取向传感器810来跟踪系统800和/或显示器820的位置和/或取向的变化,诸如相对于物理环境中的物理对象。取向传感器810任选地包括一个或多个陀螺仪和/或一个或多个加速度计。
本文定义的技术考虑了获取和利用用户的个人信息的选项。例如,本技术的一个方面是自动确定应用程序是否正在XRCE中执行。然而,在收集该个人信息的程度上,应在用户知情同意的情况下获取该信息,使得用户知晓并控制其个人信息的使用。
有权访问个人信息的各方将仅针对合法和合理的目的而利用该信息,并且将遵守至少符合适当法律和法规的隐私政策和惯例。另外,此类政策应是完善的、用户可访问的,并且被认为符合或高于政府/行业标准。此外,不得出于任何合理和合法目的之外的目的分发、出售或以其他方式共享个人信息。
然而,用户可限制各方能获取个人信息的程度。本文描述的过程和设备可允许更改设置或其他偏好,使得用户能够控制对其个人信息的访问。此外,虽然在使用个人信息的上下文中描述了本文所定义的一些特征,但可在不需要使用此类信息的情况下实现这些特征的各方面。例如,可模糊化或以其他方式概括化用户的个人信息,使得该信息无法标识从其处获取该信息的特定用户。
应当理解,以上描述旨在是示例性的而非限制性的。已经呈现材料以使本领域的任何技术人员能够作出并使用受权利要求保护的所公开的主题并在特定实施方案的上下文中提供该材料,其变化对于本领域的技术人员而言将是显而易见的(例如,可彼此结合地使用所公开的实施方案中的一些)。因此,图7中所示出的步骤或动作的特定布置或者图1至6和图8中所示出的元件的布置不应被解释为限制所公开的主题的范围。因此,应当参考所附权利要求以及赋予此类权利要求的等同形式的完整范围来确定本发明的范围。在所附权利要求中,术语“包括”和“其中”被用作相应术语“包含”和“其特征在于”的通俗的中文等价词。

Claims (48)

1.一种用于在多用户通信会话中进行协作的方法,所述方法包括:
在第一设备处接收在与第二设备的多用户通信会话中启动应用程序的请求,其中所述请求包括要在所述多用户通信会话中获得的数据的指示;以及
基于所述数据向所述第一设备提供所述应用程序的多用户版本,其中所述应用程序的所述多用户版本提供对所指示的数据的访问,并且其中所述应用程序的所述多用户版本提供所述第一设备和所述第二设备之间的共享功能。
2.根据权利要求1所述的方法,其中提供对所指示的数据的访问包括提供对所指示的数据的访问以及限制对所述要获得的数据的指示中未指示的其他数据的访问。
3.根据权利要求1至2中任一项所述的方法,还包括在所述多用户通信会话中显示所述应用程序的所述多用户版本,使得所述应用程序的所述多用户版本由所述第一设备显示,并且对应应用程序的多用户版本由所述第二设备显示。
4.根据权利要求1至3中任一项所述的方法,其中提供所述多用户版本包括:
从所述第二设备接收与所述应用程序的对应多用户版本的交互的指示;以及
基于所接收的指示更新所述应用程序的所述多用户版本。
5.根据权利要求1至4中任一项所述的方法,其中所述共享功能包括允许所述第一设备和所述第二设备以能够由所述第一设备和所述第二设备显示的方式与所述数据交互的一个或多个工具。
6.根据权利要求5所述的方法,其中所述共享功能还包括使得所述数据的相同部分显示在所述第一设备和所述第二设备上。
7.根据权利要求1至6中任一项所述的方法,还包括:
接收与所述应用程序的所述多用户版本的交互;以及
向所述第二设备发送所述交互的指示以用于在所述第二设备处呈现。
8.根据权利要求1所述的方法,还包括:
检测所述多用户通信会话是不活动的;以及
响应于检测到所述多用户通信会话是不活动的,提供所述应用程序的非多用户版本,其中所述应用程序的所述非多用户版本不提供对所述共享功能的访问。
9.根据权利要求1至7中任一项所述的方法,其中提供对所指示的数据的访问包括限制所述第二设备编辑所指示的数据。
10.根据权利要求1至7和9中任一项所述的方法,其中提供对所指示的数据的访问包括限制所述第二设备删除所指示的数据。
11.根据权利要求1至7和9至10中任一项所述的方法,其中提供所述应用程序的所述多用户版本包括在所述多用户通信会话内提供所述应用程序的所述多用户版本,并且还包括在所述多用户通信会话之外向所述第一设备提供所述应用程序的所述非多用户版本。
12.根据权利要求1至78和9至11中任一项所述的方法,还包括:向所述第二设备发送所指示的数据的表示以用于由所述第二设备的应用程序的第二多用户版本显示,其中所述应用程序的所述第二多用户版本限制所述第一设备对未包括在所指示的数据的所述表示中的其他数据的访问。
13.一种非暂态程序存储设备,所述非暂态程序存储设备包括存储在其上的指令,所述指令使得一个或多个处理器:
在第一设备处接收在与第二设备的多用户通信会话中启动应用程序的请求,其中所述请求包括要在所述多用户通信会话中获得的数据的指示;以及
基于所述数据向所述第一设备提供所述应用程序的多用户版本,其中所述应用程序的所述多用户版本提供对所指示的数据的访问,其中所述应用程序的所述多用户版本提供所述第一设备和所述第二设备之间的共享功能。
14.根据权利要求13所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器通过使得所述一个或多个处理器提供对所指示的数据的访问并且限制对要获得的数据的所述指示中未指示的其他数据的访问来提供对所指示的数据的访问。
15.根据权利要求13至14中任一项所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器:
在所述多用户通信会话中显示所述应用程序的所述多用户版本,使得所述应用程序的所述多用户版本由所述第一设备显示,并且对应应用程序的多用户版本由所述第二设备显示。
16.根据权利要求13至15中任一项所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器通过使得所述一个或多个处理器进行以下操作来提供所述多用户版本:
从所述第二设备接收与所述应用程序的对应多用户版本的交互的指示;以及
基于所接收的指示更新所述应用程序的所述多用户版本。
17.根据权利要求13至16中任一项所述的非暂态程序存储设备,其中所述共享功能包括允许所述第一设备和所述第二设备以能够由所述第一设备和所述第二设备显示的方式与所述数据交互的一个或多个工具。
18.根据权利要求17的非暂态程序存储设备,其中所述共享功能还包括使得所述数据的相同部分显示在所述第一设备和所述第二设备上。
19.根据权利要求13至18中任一项所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器:
接收与所述应用程序的所述多用户版本的交互;以及
向所述第二设备发送所述交互的指示以用于在所述第二设备处呈现。
20.根据权利要求13所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器:
检测所述多用户通信会话是不活动的;以及
响应于检测到所述多用户通信会话是不活动的,提供所述应用程序的非多用户版本,其中所述应用程序的所述非多用户版本不提供对所述共享功能的访问。
21.根据权利要求13至20中任一项所述的非暂态程序存储设备,其中提供对所指示的数据的访问包括限制所述第二设备编辑所指示的数据。
22.根据权利要求13至20和21中任一项所述的非暂态程序存储设备,其中提供对所指示的数据的访问包括限制所述第二设备删除所指示的数据。
23.根据权利要求13至20和21至22中任一项所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器:
在所述多用户通信会话内提供所述应用程序的所述多用户版本;以及
在所述多用户通信会话之外向所述第一设备提供所述应用程序的所述非多用户版本。
24.根据权利要求13至20和21至23中任一项所述的非暂态程序存储设备,其中所述指令进一步使得所述一个或多个处理器:
向所述第二设备发送所指示的数据的表示以用于由所述第二设备的应用程序的第二多用户版本显示,其中所述应用程序的所述第二多用户版本限制所述第一设备对未包括在所指示的数据的所述表示中的其他数据的访问。
25.一种电子设备,包括:
存储器;和
一个或多个处理器,所述一个或多个处理器可操作地耦接到所述存储器,其中所述一个或多个处理器被配置为执行使得所述一个或多个处理器进行以下操作的指令:
从第一设备接收在与第二设备的多用户通信会话中启动应用程序的请求,其中所述请求包括要在所述多用户通信会话中获得的数据的指示;以及
基于所述数据向所述第一设备提供所述应用程序的多用户版本,其中所述应用程序的所述多用户版本提供对所指示的数据的访问,并且其中所述应用程序的所述多用户版本提供所述第一设备和所述第二设备之间的共享功能。
26.根据权利要求25所述的设备,其中所述指令进一步使得所述一个或多个处理器通过使得所述一个或多个处理器提供对所指示的数据的访问并且限制对要获得的数据的所述指示中未指示的其他数据的访问来提供对所指示的数据的访问。
27.根据权利要求25至26中任一项所述的设备,其中所述指令进一步使得所述一个或多个处理器:
在所述多用户通信会话中显示所述应用程序的所述多用户版本,使得所述应用程序的所述多用户版本由所述第一设备显示,并且对应应用程序的多用户版本由所述第二设备显示。
28.根据权利要求25至27中任一项所述的设备,其中所述指令进一步使得所述一个或多个处理器通过使得所述一个或多个处理器进行以下操作来提供所述多用户版本:
从所述第二设备接收与所述应用程序的对应多用户版本的交互的指示;以及
基于所接收的指示更新所述应用程序的所述多用户版本。
29.根据权利要求25至28中任一项所述的设备,其中所述共享功能包括允许所述第一设备和所述第二设备以能够由所述第一设备和所述第二设备显示的方式与所述数据交互的一个或多个工具。
30.根据权利要求29所述的设备,其中所述共享功能还包括使得所述数据的相同部分显示在所述第一设备和所述第二设备上。
31.根据权利要求25至30中任一项所述的设备,其中所述指令进一步使得所述一个或多个处理器执行以下操作:
接收与所述应用程序的所述多用户版本的交互;以及
向所述第二设备发送所述交互的指示以用于在所述第二设备处呈现。
32.根据权利要求25所述的设备,其中所述指令进一步使得所述一个或多个处理器执行以下操作:
检测所述多用户通信会话是不活动的;以及
响应于检测到所述多用户通信会话是不活动的,提供所述应用程序的非多用户版本,其中所述应用程序的所述非多用户版本不提供对所述共享功能的访问。
33.根据权利要求25至31中任一项所述的设备,其中提供对所指示的数据的访问包括限制所述第二设备编辑所指示的数据。
34.根据权利要求25至31和33中任一项所述的设备,其中提供对所指示的数据的访问包括限制所述第二设备删除所指示的数据。
35.根据权利要求25至31和33至34中任一项所述的设备,其中所述指令进一步使得所述一个或多个处理器:
在所述多用户通信会话内提供所述应用程序的所述多用户版本;以及
在所述多用户通信会话之外向所述第一设备提供所述应用程序的所述非多用户版本。
36.根据权利要求25至31和33至35中任一项所述的设备,其中所述指令进一步使得所述一个或多个处理器:
向所述第二设备发送所指示的数据的表示以用于由所述第二设备的应用程序的第二多用户版本显示,其中所述应用程序的所述第二多用户版本限制所述第一设备对未包括在所指示的数据的所述表示中的其他数据的访问。
37.根据权利要求1所述的方法,其中所述请求是从所述应用程序的非多用户版本接收的,并且其中所述应用程序的所述多用户版本包括与所述非多用户版本分开的应用程序。
38.根据权利要求1所述的方法,其中所述请求是从所述应用程序的非多用户版本接收的,并且其中所述应用程序的所述多用户版本包括由所述应用程序的所述非多用户版本提供的界面,其中所述应用程序的所述多用户版本的所述界面与所述非多用户版本的界面分开。
39.根据权利要求1所述的方法,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本包括在所述应用程序的所述非多用户版本中不可用的特定功能。
40.根据权利要求1所述的方法,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本限制在所述应用程序的所述非多用户版本中可用的特定功能。
41.根据权利要求13所述的非暂态程序存储设备,其中所述请求是从所述应用程序的非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述非多用户版本分开的应用程序。
42.根据权利要求13所述的非暂态程序存储设备,其中所述请求是从所述应用程序的非多用户版本接收的,并且所述应用程序的所述多用户版本包括由所述应用程序的所述非多用户版本提供的界面,其中所述应用程序的所述多用户版本的所述界面与所述非多用户版本的界面分开。
43.根据权利要求13所述的非暂态程序存储设备,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本包括在所述应用程序的所述非多用户版本中不可用的特定功能。
44.根据权利要求13所述的非暂态程序存储设备,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本限制在所述应用程序的所述非多用户版本中可用的特定功能。
45.根据权利要求25所述的设备,其中所述请求是从所述应用程序的非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述非多用户版本分开的应用程序。
46.根据权利要求25所述的设备,其中所述请求是从所述应用程序的非多用户版本接收的,并且所述应用程序的所述多用户版本包括由所述应用程序的所述非多用户版本提供的界面,其中所述应用程序的所述多用户版本的所述界面与所述非多用户版本的界面分开。
47.根据权利要求25所述的设备,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本包括在所述应用程序的所述非多用户版本中不可用的特定功能。
48.根据权利要求25所述的设备,其中所述请求是从所述应用程序的所述非多用户版本接收的,并且所述应用程序的所述多用户版本包括与所述应用程序的所述非多用户版本相同的应用程序和界面,并且其中所述应用程序的所述多用户版本限制在所述应用程序的所述非多用户版本中可用的特定功能。
CN202180078617.3A 2020-09-24 2021-09-10 多用户环境中的应用程序 Pending CN116529713A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063082657P 2020-09-24 2020-09-24
US63/082,657 2020-09-24
PCT/US2021/049863 WO2022066441A1 (en) 2020-09-24 2021-09-10 Applications in a multiuser environment

Publications (1)

Publication Number Publication Date
CN116529713A true CN116529713A (zh) 2023-08-01

Family

ID=78032532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180078617.3A Pending CN116529713A (zh) 2020-09-24 2021-09-10 多用户环境中的应用程序

Country Status (3)

Country Link
US (1) US20230297710A1 (zh)
CN (1) CN116529713A (zh)
WO (1) WO2022066441A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113093917A (zh) * 2015-09-28 2021-07-09 微软技术许可有限责任公司 统一的虚拟现实平台
DE202017105929U1 (de) * 2016-10-14 2018-01-09 Google LLC (n.d.Ges.d. Staates Delaware) Privatsphäre-Einstellungen für virtuelle Realität
US10817066B2 (en) * 2016-12-05 2020-10-27 Google Llc Information privacy in virtual reality
CN110637273B (zh) * 2017-05-10 2021-12-03 微软技术许可有限责任公司 在虚拟环境内呈现应用
US10599928B2 (en) * 2018-05-22 2020-03-24 International Business Machines Corporation Method and system for enabling information in augmented reality applications

Also Published As

Publication number Publication date
US20230297710A1 (en) 2023-09-21
WO2022066441A1 (en) 2022-03-31

Similar Documents

Publication Publication Date Title
US20210405761A1 (en) Augmented reality experiences with object manipulation
US10021297B2 (en) Mobile terminal and control method thereof
CN113661691B (zh) 用于提供扩展现实环境的电子设备、存储介质和方法
US20160054567A1 (en) Mobile terminal, glasses-type terminal, and mutual interworking method using screens thereof
CN112136096B (zh) 将物理输入设备显示为虚拟对象
US20200293177A1 (en) Displaying applications
CN109496293B (zh) 扩展内容显示方法、装置、系统及存储介质
US10424268B2 (en) Mobile terminal and controlling method thereof
WO2022169668A1 (en) Integrating artificial reality and other computing devices
US11388282B2 (en) Method and apparatus for controlling video
KR20180017638A (ko) 이동단말기 및 그 제어방법
US20230308495A1 (en) Asymmetric Presentation of an Environment
WO2022066483A1 (en) Conversation privacy for third party applications
KR20180057034A (ko) 이동 단말기 및 그 제어방법
US20230297710A1 (en) Applications in a Multi-User Environment
US10783666B2 (en) Color analysis and control using an electronic mobile device transparent display screen integral with the use of augmented reality glasses
US11805176B1 (en) Toolbox and context for user interactions
US11856039B2 (en) Conversation privacy for third party applications
KR20150093519A (ko) 이동 단말기 및 이의 제어방법
KR20140133130A (ko) 이동 단말기 및 그것의 제어방법
US20230095282A1 (en) Method And Device For Faciliating Interactions With A Peripheral Device
US20240134492A1 (en) Digital assistant interactions in extended reality
CN116685940A (zh) 用于启动和替换应用程序的系统和方法
KR20160041710A (ko) 글래스 타입의 이동 단말기
CN116909385A (zh) 手部接合区

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination