CN116530055A - 群组通信会话的操作系统级管理 - Google Patents
群组通信会话的操作系统级管理 Download PDFInfo
- Publication number
- CN116530055A CN116530055A CN202180076942.6A CN202180076942A CN116530055A CN 116530055 A CN116530055 A CN 116530055A CN 202180076942 A CN202180076942 A CN 202180076942A CN 116530055 A CN116530055 A CN 116530055A
- Authority
- CN
- China
- Prior art keywords
- user
- operating system
- group session
- system level
- level process
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 title abstract description 33
- 238000000034 method Methods 0.000 claims abstract description 226
- 230000008569 process Effects 0.000 claims abstract description 197
- 230000015654 memory Effects 0.000 claims abstract description 24
- 230000000977 initiatory effect Effects 0.000 claims description 23
- 230000003993 interaction Effects 0.000 claims description 15
- 230000004044 response Effects 0.000 claims description 10
- 230000002452 interceptive effect Effects 0.000 claims description 9
- 238000012986 modification Methods 0.000 claims description 4
- 230000004048 modification Effects 0.000 claims description 4
- 230000007704 transition Effects 0.000 claims description 2
- 230000010076 replication Effects 0.000 claims 1
- 230000001360 synchronised effect Effects 0.000 claims 1
- 238000012545 processing Methods 0.000 description 22
- 238000005516 engineering process Methods 0.000 description 19
- 230000003190 augmentative effect Effects 0.000 description 16
- 238000010200 validation analysis Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 11
- 230000002085 persistent effect Effects 0.000 description 9
- 230000000007 visual effect Effects 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 7
- 238000009877 rendering Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 230000001815 facial effect Effects 0.000 description 5
- 238000013475 authorization Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000036541 health Effects 0.000 description 4
- 238000012795 verification Methods 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000013503 de-identification Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000001953 sensory effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 241000258963 Diplopoda Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 239000002355 dual-layer Substances 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001339 gustatory effect Effects 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000005293 physical law Methods 0.000 description 1
- 230000010344 pupil dilation Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000004270 retinal projection Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
- H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/10—Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
- H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
- H04L63/102—Entity profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/157—Conference systems defining a virtual conference space and using avatars or agents
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2463/00—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00
- H04L2463/101—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00 applying security measures for digital rights management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Technology Law (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种用于提供操作系统管理的群组通信会话的设备可包括存储器和至少一个处理器。该至少一个处理器可被配置为:通过在设备上执行的操作系统级进程并且从在设备上执行的应用程序进程接收在与该设备相关联的用户和另外用户之间发起群组会话的请求。该至少一个处理器可被进一步配置为:通过该操作系统级进程标识与该另外用户相关联的另外设备。该至少一个处理器可被进一步配置为:通过该操作系统级进程经由该另外设备与该用户发起该群组会话。该至少一个处理器可被进一步配置为:通过该操作系统级进程管理该群组会话。
Description
相关申请的交叉引用
本申请要求于2020年9月24日提交的美国临时专利申请63/083,010号的优先权的权益,该美国临时申请的公开内容据此全文并入本文中。
技术领域
本描述整体涉及通信管理,包括群组通信会话的操作系统级管理。
背景技术
增强现实技术旨在通过提供利用电子信息增强的增强物理环境来桥接虚拟环境和物理环境之间的间隙。因此,电子信息看起来是当用户经由增强现实技术查看物理环境时,用户感知到的物理环境的一部分。
附图说明
本主题技术的一些特征在所附权利要求书中予以阐述。然而,出于解释的目的,在以下附图中阐述了本主题技术的若干实施方案。
图1示出了根据一个或多个具体实施的包括可实现本主题系统的各种电子设备的示例性系统架构。
图2示出了根据一个或多个具体实施的电子设备的示例性特征的框图。
图3示出了根据一个或多个具体实施的群组通信会话的操作系统级管理的示例性过程的流程图。
图4示出了根据一个或多个具体实施的向群组提供委托令牌以用于共享访问受数字版权管理(DRM)系统保护的内容的示例性过程流程。
图5示出了根据一个或多个具体实施的共享群组访问受DRM系统保护的内容的示例性过程流程。
图6示出了根据一个或多个具体实施的从已经共享访问受DRM系统保护的内容的群组移除用户的示例性过程流程。
图7示出了可以利用其来实现本主题技术的一个或多个具体实施的电子系统。
具体实施方式
下面示出的具体实施方式旨在作为本主题技术的各种配置的描述并且不旨在表示本主题技术可被实践的唯一配置。附图被并入本文并且构成具体实施方式的一部分。具体实施方式包括具体的细节旨在提供对本主题技术的透彻理解。然而,本主题技术不限于本文阐述的具体细节,而是可采用一个或多个其他具体实施来实践。在一个或多个具体实施中,以框图形式示出了结构和部件,以便避免使本主题技术的概念模糊。
物理环境是指人们在没有电子设备帮助的情况下能够对其感测和/或与其交互的物理世界。物理环境可包括物理特征,诸如物理表面或物理对象。例如,物理环境对应于包括物理树木、物理建筑物和物理人的物理公园。人们能够诸如通过视觉、触觉、听觉、味觉和嗅觉来直接感测物理环境和/或与物理环境交互。相反,扩展现实(XR)环境是指人们经由电子设备感测和/或交互的完全或部分模拟的环境。例如,XR环境可包括增强现实(AR)内容、混合现实(MR)内容、虚拟现实(VR)内容等。在XR系统的情况下,跟踪人的物理运动的一个子集或其表示,并且作为响应,以符合至少一个物理定律的方式调节在XR系统中模拟的一个或多个虚拟对象的一个或多个特征。例如,XR系统可以检测头部移动,并且作为响应,以与此类视图和声音在物理环境中变化的方式类似的方式调节呈现给人的图形内容和声场。又如,XR系统可以检测呈现XR环境的电子设备(例如,移动电话、平板电脑、膝上型电脑等)的移动,并且作为响应,以类似于此类视图和声音在物理环境中将如何改变的方式调节呈现给人的图形内容和声场。在一些情况下(例如,出于可达性原因),XR系统可响应于物理运动的表示(例如,声音命令)来调节XR环境中图形内容的特征。
有许多不同类型的电子系统使人能够感测和/或与各种XR环境交互。示例包括头戴式系统、基于投影的系统、平视显示器(HUD)、集成有显示能力的车辆挡风玻璃、集成有显示能力的窗户、被形成为设计用于放置在人的眼睛上的透镜的显示器(例如,类似于隐形眼镜)、耳机/听筒、扬声器阵列、输入系统(例如,具有或不具有触觉反馈的可穿戴或手持式控制器)、智能电话、平板电脑、以及台式/膝上型计算机。头戴式系统可具有集成不透明显示器和一个或多个扬声器。另选地,头戴式系统可被配置为接受外部不透明显示器(例如,智能电话)。头戴式系统可结合用于捕获物理环境的图像或视频的一个或多个成像传感器、和/或用于捕获物理环境的音频的一个或多个麦克风。头戴式系统可具有透明或半透明显示器,而不是不透明显示器。透明或半透明显示器可以具有媒介,代表图像的光通过该媒介被引导到人的眼睛。显示器可以利用数字光投影、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。媒介可以是光学波导、全息图媒介、光学组合器、光学反射器、或它们的任意组合。在一些具体实施中,透明或半透明显示器可被配置为选择性地变得不透明。基于投影的系统可以采用将图形图像投影到人的视网膜上的视网膜投影技术。投影系统也可以被配置为将虚拟对象投影到物理环境中,例如作为全息图或在物理表面上。
本文所述的主题技术的具体实施提供对用户设备之间的群组通信会话的管理进行操作系统级管理。群组通信会话(在本文也称为群组会话)允许多个用户经由其相应设备呈现(例如,同时呈现)在共同XR环境中。用户可在物理上共同位于相同物理位置,并且/或者用户中的一个或多个用户可位于物理上遥远位置。通过对群组通信会话提供操作系统级管理,本主题系统允许单一应用程序通过对操作系统级群组会话框架作出应用程序编程接口(API)调用,而不是每个应用程序必须单独地开发其自己的群组会话功能性来访问操作系统级群组通信功能性。因此,本主题系统允许任何单个应用程序向用户提供对群组会话的访问以用于访问应用程序的内容/与该内容交互,而无需应用程序开发其自己的群组会话功能性/框架并且无需考虑应用程序是否被设计用于多用户访问。
通过将群组会话管理移动到操作系统级,本主题系统还可在群组通信会话期间围绕用户认证、数字版权管理和用户访问权限/许可提供更严格控制。例如,操作系统级框架可认证参与群组会话的各个用户以及用于群组会话的用户代表(avatar),诸如以确认代表的外观大致符合用户的物理外观。以此方式,与另外用户一起参与群组会话的用户可确信该另外用户就是他们所声称的人(经由用户认证),并且该另外用户就是该用户旨在与其一起参与群组会话的人(经由代表认证)。
操作系统级群组会话框架还可诸如通过防止复制/再分布内容、控制访问内容的并发用户的数量等来围绕群组会话中正被查看和/或共享的内容实行DRM控制。以此方式,内容提供商可确保当内容在群组会话中的用户之间共享时将维护这些内容提供商的内容版权。类似地,操作系统级群组会话框架可在群组会话期间向用户例如会话发起用户提供对用户访问权限/许可的离散控制。以此方式,操作系统级群组会话框架允许会话发起用户决定哪些其他用户可在会话期间与任何特定应用程序内容交互、修改、移除和/或查看该任何特定应用程序内容,以及哪些其他用户可记录和/或稍后注释群组会话的任何部分。
图1示出了根据一个或多个具体实施的包括可实现本主题系统的各种电子设备的示例性系统架构100。然而,并非所有所描绘的部件均可在所有具体实施中使用,并且一个或多个具体实施可包括与图中所示的那些相比附加的或不同的部件。可进行这些部件的布置和类型的变化,而不脱离本文所列出的权利要求的实质或范围。可提供附加的部件、不同的部件或更少的部件。
系统架构100包括电子设备105、手持式电子设备104、电子设备110、电子设备115和服务器120。出于解释的目的,系统架构100在图1中被示为包括电子设备105、手持式电子设备104、电子设备110、电子设备115和服务器120;然而,系统架构100可包括任何数量的电子设备以及任何数量的服务器或包括多个服务器的数据中心。
电子设备105可例如实现为平板设备、智能电话和/或(例如,由用户101穿戴的)头戴式便携式系统。电子设备105包括能够向用户呈现扩展现实环境的可视化的显示系统。电子设备105可用电池和/或另外电源供电。在一个示例中,电子设备105的显示系统向用户提供扩展现实环境的立体呈现,使得能够提供特定场景渲染的三维视觉显示。在一个或多个具体实施中,代替利用电子设备105来访问扩展现实环境或除此之外,用户可使用手持式电子设备104,诸如平板电脑、手表、移动设备等。
电子设备105可包括一个或多个相机,诸如相机150(例如,可见光相机、红外相机等)。此外,电子设备105可包括各种传感器152,包括但不限于相机、图像传感器、触摸传感器、麦克风、惯性测量单元(IMU)、心率传感器、温度传感器、深度传感器(例如激光雷达传感器、雷达传感器、声纳传感器、飞行时间传感器等)、GPS传感器、Wi-Fi传感器、近场通信传感器、射频传感器等。此外,电子设备105可包括可接收用户输入的硬件元件,诸如硬件按钮或开关。由此类传感器和/或硬件元件检测到的用户输入对应于例如用于在应用程序内发起群组通信会话(群组会话)的各种输入模态。例如,此类输入模态可包括但不限于面部跟踪、眼睛跟踪(例如,注视方向)、手部跟踪、姿态跟踪、生物识别读数(例如,心率、脉搏、瞳孔扩张、呼吸、温度、脑电图、嗅觉)、识别语音或音频(例如,特定热字词)以及激活按钮或开关等。
在一个或多个具体实施中,电子设备105可通信地耦接到基础设备,诸如电子设备110和/或电子设备115。一般来讲,与电子设备105相比,此类基础设备可包括更多计算资源和/或可用功率。在一个示例中,电子设备105可以各种模式操作。例如,电子设备105可独立于任何基础设备以独立模式操作。当电子设备105以独立模式操作时,输入模态的数量可受到电子设备105的功率和/或处理限制的约束,诸如设备的可用电池功率。响应于功率限制,电子设备105可停用设备自身内的某些传感器以保持电池功率和/或释放处理资源。
电子设备105还可以无线连线模式操作(例如,经由无线连接与基础设备连接),从而与给定基础设备结合工作。电子设备105还可以电子设备105物理地连接到基础设备(例如,经由电缆或一些其他物理连接器)的连接模式工作,并且可利用由基础设备提供的电力资源(例如,在基础设备在物理地连接时对电子设备105充电的情况下)。
当电子设备105以无线连线模式或连接模式操作时,可将处理用户输入和/或渲染扩展现实环境的至少一部分卸载到基础设备,从而减少电子设备105上的处理负担。例如,在一个具体实施中,电子设备105结合电子设备110或电子设备115工作以生成扩展现实环境,该扩展现实环境包括以实时方式在用户与生成的扩展现实环境之间实现不同形式的交互(例如,视觉、听觉和/或物理或触觉交互)的物理对象和/或虚拟对象。在示例中,电子设备105提供对应于扩展现实环境的场景的渲染,该场景可被用户感知并以实时方式与之交互,诸如用于与另外用户进行群组会话的主机环境。另外,作为呈现渲染场景的一部分,电子设备105可向用户提供声音和/或触觉或触感反馈。给定渲染场景的内容可能取决于可用处理能力、网络可用性和容量、可用电池功率和当前系统工作负载。
网络106可将例如电子设备105、电子设备110和/或电子设备115与每个其他设备和/或服务器120通信地(直接或间接)耦接。在一个或多个具体实施中,网络106可以是可包括互联网或可通信地耦接到互联网的设备的互连网络。
电子设备110可包括触摸屏并且可以是例如包括触摸屏的智能电话、便携式计算设备,诸如包括触摸屏的膝上型计算机、包括触摸屏的配套设备(例如数字相机、耳机)、包括触摸屏的平板设备、包括触摸屏的可穿戴设备(诸如手表、腕带等)、包括例如触摸屏的任何其他适当设备或者具有触控板的任何电子设备。在一个或多个具体实施中,电子设备110可不包括触摸屏,但可支持触摸屏类似的手势,诸如在扩展现实环境中。在一个或多个具体实施中,电子设备110可包括触控板。在图1中,通过举例的方式,电子设备110被描绘为具有触摸屏的移动智能电话设备。在一个或多个具体实施中,电子设备110、手持式电子设备104和/或电子设备105可以是和/或可以包括下文相对于电子系统所述的电子设备的全部或部分,该电子系统在下文相对于图7所述。在一个或多个具体实施中,电子设备110可为另一个设备,诸如互联网协议(IP)相机、平板电脑或配套设备诸如电子触笔等。
电子设备115可为例如台式计算机、便携式计算设备诸如膝上型计算机、智能电话、配套设备(例如,数字相机、耳机)、平板设备、可穿戴设备诸如手表、腕带等。在图1中,通过举例的方式,电子设备115被描绘为台式计算机。电子设备115可以是和/或可以包括下文相对于图7所述的电子系统的全部或部分。
服务器120可形成计算机网络或服务器组130的全部或部分,诸如在云计算或数据中心实施中。例如,服务器120存储数据和软件,并且包括用于渲染和生成扩展现实环境的内容诸如图形、图像、视频、音频和多媒体文件的特定硬件(例如,处理器、图形处理器和其他专用或定制处理器)。在一个具体实施中,服务器120可用作云存储服务器,该云存储服务器存储由上述设备和/或服务器120生成的任何前述扩展现实内容。
图2示出了根据本公开的各方面的可包括在电子设备105中的各种部件的框图。如图2所示,电子设备105可包括捕获围绕电子设备的物理环境的图像和/或视频的一个或多个相机诸如相机150、获得与围绕电子设备105的物理环境相关联的环境信息(例如,深度信息)的一个或多个传感器152。传感器152可包括深度传感器(例如,飞行时间传感器、红外传感器、雷达、声纳、激光器等)、一个或多个麦克风和/或用于感测物理环境的其他类型的传感器。在一些具体实施中,电子设备105还包括用于与电子设备110、电子设备115、服务器120和/或其他设备和/或系统通信的通信电路208。通信电路208可包括用于检测射频标识(RFID)标签的射频(RF)通信电路(RF)通信电路、蓝牙低功耗(BLE)通信电路、其他近场通信(NFC)电路、WiFi通信电路、蜂窝通信电路和/或其他有线和/或无线通信电路。
如图所示,电子设备105包括处理电路204(例如,一个或多个处理器和/或集成电路)和存储器206。存储器206可存储(例如,临时或永久地)由电子设备105生成和/或以其他方式获得的内容。在一些操作场景中,存储器206可临时存储由相机150捕获的物理环境的图像、对应于例如使用传感器152中的深度传感器生成的图像的深度信息、对应于物理环境的网格、虚拟对象诸如由处理电路204生成以包括虚拟内容的虚拟对象和/或针对虚拟对象的虚拟深度信息。存储器206可存储(例如,临时或永久地)中间图像和/或信息,这些中间图像和/或信息由处理电路204生成以用于组合物理环境和虚拟对象的图像和/或虚拟图像以诸如通过将一个或多个虚拟对象合成到从相机150中的一个或多个相机获得的透传视频流上来形成(例如,合成)用于由显示器200显示的图像。
存储器206可存储用于由处理电路204执行的指令或代码,诸如例如对应于安装在电子设备105上的操作系统的操作系统代码和对应于安装在电子设备105上的一个或多个应用程序的应用程序代码。该操作系统代码在被执行时可对应于一个或多个操作系统级进程,诸如支持群组会话管理的进程。该操作系统级进程可对逻辑资源(例如,文件系统资源)和/或物理资源(例如,硬件资源诸如相机150、传感器152等)具有管理特权(例如,无约束访问),而应用程序代码在被执行时可对应于对逻辑资源和/或物理资源中的一者或多者具有受约束访问或无访问的一个或多个应用程序进程。
然而,应用程序代码可诸如通过应用编程接口(API)诸如针对群组会话管理功能性访问对操作系统级代码的一个或多个函数调用。例如,应用程序代码可访问用于请求发起群组通信会话(群组会话)、请求终止群组通信会话、请求将用户添加到现有群组通信会话或从现有群组通信会话移除用户等的函数调用。以此方式,一个或多个安装应用程序可通过操作系统级进程访问群组会话功能性,而无需单独地开发群组会话框架。下面相对于图3进一步讨论应用程序经由操作系统级框架发起群组会话的示例性过程。
图3示出了根据一个或多个具体实施的操作系统级群组会话管理的示例性过程300的流程图。出于解释的目的,本文主要参考图1和图2的电子设备105来描述过程300。然而,过程300不限于图1和图2的电子设备105,并且过程300的一个或多个框(或操作)可由其他合适设备(包括电子设备110、电子设备115和/或服务器120)的一个或多个其他部件来执行。进一步出于解释的目的,过程300的一些框在本文中被描述为顺序地或线性地发生。然而,过程300的多个框可并行地发生。此外,过程300的框不必按所示顺序执行,并且/或者过程300的一个或多个框不必执行和/或可由其他操作替代。
当在电子设备105上执行的操作系统级进程从在电子设备105上执行的应用程序进程接收到与另外用户发起群组会话的请求(302)时,可发起过程300。在一个或多个具体实施中,电子设备105可以是支持在XR环境中显示XR内容的电子设备,诸如智能电话、平板设备或由用户穿戴的头戴式系统。例如,开发用于这种电子设备105的应用程序的应用程序开发者可具有选择性加入访问群组会话的操作系统级管理的选项。如果应用程序开发者选择性加入特定应用程序,则应用程序的用户可从应用程序内访问一个或多个群组会话管理功能,诸如发起群组会话、终止群组会话、将用户添加到群组会话等。
例如,应用程序的用户可能够选择用户界面元素以与一个或多个其他用户(例如,用户的联系人)发起群组会话,用户可能够使用语音命令来发起群组会话,或者用户可能够使用通常任何可用输入模态来从应用程序内发起群组会话。应用程序进程可从用户输入接收请求,并且然后可将请求传送到操作系统级群组会话管理进程。传送到操作系统级进程的请求可包括例如对应于正在与其发起群组会话的一个或多个用户的一个或多个用户标识符。
操作系统级进程可标识与所接收的用户标识符相关联的一个或多个其他电子设备,诸如电子设备104(304)。例如,操作系统级进程可向服务器诸如服务器120发射获得对应于一个或多个所接收的用户标识符的一个或多个设备标识符的请求。
然后,操作系统级进程可经由另外用户的另外电子设备104与另外用户发起群组会话(306)。例如,操作系统级进程可认证用户和/或另外用户以及用户的代表(如下面进一步所讨论),并且如果另外电子设备104支持在XR环境中显示XR内容,则操作系统级进程可与电子设备104的对等操作系统级进程通信以在例如如由电子设备105的发起用户指定的主机环境内发起群组会话(如下面进一步所讨论)。
在一个或多个具体实施中,操作系统级进程可诸如基于生物识别信息(虹膜扫描、面部扫描、指纹扫描、生物节律扫描等)来认证电子设备105的用户,以及认证正在由用户用于群组会话的代表。例如,发起群组会话的用户可能够(例如,经由应用程序进程)选择要求用户使用认证代表(例如,所具有的外观符合对应用户的外观的代表,而不是例如小丑的非符合代表)来进行群组会话的选项。例如在商业环境中或者另外当用户想要能够在视觉上验证他们正在与之交互的用户的身份时,这种选项可以是期望的。在这种情况下,操作系统级进程可获得来自一个或多个相机150的图像、深度信息、面部信息和/或可用于认证电子设备105的用户所使用的代表的视觉外观大致符合电子设备105的用户的物理外观的其他信息。例如,该操作系统级进程可比较代表和用户面部特征位置、大小等、毛发样式/长度/颜色、肤色、眼睛颜色或可用于在视觉上认证用户代表的外观符合用户的物理外观的通常任何属性和/或特性。
在一个或多个具体实施中,当需要认证代表时,操作系统级进程可自动生成用户的代表。即,代替将用户的物理属性与由用户创建的代表的视觉属性进行比较,操作系统级进程可自动扫描用户的面部属性和/或物理外观,并且可生成视觉上符合用户的物理外观的代表。
电子设备105的操作系统级进程然后可(例如,使用硬件绑定私钥)与电子设备104的对等操作系统级进程交换签名证书,这些签名证书认证电子设备104、105的用户对应于针对群组会话选择的用户标识符,并且认证由用户选择以用于群组会话的代表的外观大致符合用户的物理外观。
在一个或多个具体实施中,可在整个群组会话期间周期性地执行认证电子设备104、105的用户,诸如以确认相同用户仍然正在参与与相应电子设备104、105的群组会话。另选地或除此之外,如果电子设备104、105中的一者或多者是包括可检测用户何时放下或移除电子设备的传感器的设备,诸如智能电话、平板设备或头戴式系统,则可保持用户认证直到已检测到(例如,由用户的手)释放或移除电子设备为止。
在认证用户和/或用户的代表之后,操作系统级进程可确定用于在其内发起群组会话的适当的主机环境。该主机环境可基于例如电子设备105的用户的物理环境、电子设备104的另外用户的物理环境、物理环境的混合或虚拟环境(例如,虚拟环境和/或另外物理环境的复制)。例如,发起群组会话的电子设备105的用户可被授权以选择用于托管群组会话的适当环境。
在一个或多个具体实施中,每个用户的物理环境的混合可包括每个用户的物理环境的一部分,中间有环境/几何形状的混合/合并。在一个或多个具体实施中,可创建并保留或保存主机环境(例如,虚拟环境、物理环境的复制等),使得用户随后可在相同主机环境中进行附加群组会话。
在群组会话正在托管在基于电子设备105的用户的物理环境的环境中的情况下,电子设备105的操作系统级进程可结合对应于另外用户的计算机生成的代表和/或应用程序内容协调显示对应于例如来自相机150中的一个或多个相机的物理环境的透传视频流。
电子设备105的操作系统级进程还可向在电子设备104上执行的对等操作系统级进程提供用于生成电子设备105的用户的物理环境的重建的信息。该信息可包括例如物理环境中的对象的先前生成并存储的网格和纹理、物理环境的正在被电子设备105的用户查看的部分的透传视频流(以及任何对应的深度信息)、以及关于物理环境的不被电子设备105的用户查看(例如,在用户后面的将处于电子设备104的用户的视野中)的部分的先前存储的视频和/或图像/纹理/网格。
在一个或多个具体实施中,如果另外电子设备104不支持在XR环境中显示XR内容(例如,如果电子设备105是XR设备并且电子设备104是尚未更新以包括XR功能性的移动设备或平板设备),则操作系统级进程可与电子设备104上的现有通信应用程序诸如现有视频会议应用程序发起群组会话。例如,操作系统级进程可将任何XR内容转换成视频流并且可将视频流提供给电子设备104。类似地,操作系统级进程可将所接收的视频流(例如,以及任何所接收的对应深度信息)转换成可向电子设备105的用户显示的XR内容,并且/或者操作系统级进程可以其原始二维形式显示所接收的视频流。
在建立用于群组会话的主机环境之后,操作系统级进程可从应用程序进程接收应用程序内容(308)。例如,应用程序进程可经由进程间通信(IPC)向操作系统级进程传送应用程序内容(诸如XR内容或通常任何内容)和/或应用程序内容的声明性描述。
操作系统级进程然后可至少部分地基于所接收的应用程序内容来管理群组会话(310)。例如,操作系统级进程可确定用于在群组会话的主机环境中显示应用程序内容的适当方式(诸如基于主机环境、群组会话中的用户数量、群组会话中正在显示的其他应用程序内容等)。以此方式,对应于应用程序进程的应用程序的开发者不需要开发用于支持群组会话、用于支持多个并发用户和/或用于支持用于在XR环境内显示应用程序内容的适当物理特性、几何形状、着色等的任何单独框架。例如,操作系统级进程可协调与显示透传视频馈送的至少一部分一起显示应用程序内容的至少一部分,并且可处置应用程序内容的对应显示属性,例如物理特性、几何形状、着色等。
在一个或多个具体实施中,由于应用程序进程向操作系统级进程提供应用程序内容以供显示,因此应用程序进程可与群组会话的主机环境以及群组会话内的用户交互/通信隔绝(例如,除了直接与应用程序内容的交互之外)。以此方式,操作系统级进程可防止应用程序进程访问透传视频流和/或用于重建用户的物理环境的信息,以及在群组会话期间用户之间的交互,这保护了群组会话中的这些用户中的每个用户的隐私。
操作系统级进程可进一步与在另外电子设备104上执行的对等操作系统级进程协调和/或同步。例如,除了协调/同步与所显示的内容的用户交互之外,操作系统级进程还可协调内容诸如应用程序内容的显示以及前述主机环境两者。例如,操作系统级进程可诸如通过由发起群组会话的用户对交互进行优先级排序来管理关于与应用程序内容的用户交互的冲突解决。
在一个或多个具体实施中,如果对应于应用程序内容的应用程序未安装在另外用户的电子设备104上,则电子设备105的操作系统级进程可与电子设备104的对等操作系统级进程协调以致使电子设备104下载并安装应用程序的至少一部分(例如,对应于应用程序内容和/或应用程序的查看器/轻量级版本的应用程序的一部分)。
在一个或多个具体实施中,当另外电子设备104在下载并安装应用程序的进程中时,可开始群组会话。在这种情况下,电子设备105的操作系统级进程可将(例如,呈应用程序内容的非交互式版本的)应用程序内容序列化为可在没有安装应用程序的情况下由另外电子设备104的对等操作系统级进程显示的格式(例如,视频流或通用/标准XR格式)。在一个或多个具体实施中,如果另外电子设备104无法下载和/或安装应用程序(例如,因为另外用户不具有应用程序的许可证,因为另外电子设备104不具有安装另外应用程序的空间,或出于任何原因),则应用程序内容的序列化版本可用于整个群组会话。
在另外电子设备104已经下载并安装应用程序之后,另外电子设备104上的对等操作系统级进程可向电子设备105上的操作系统级进程通知已经安装了应用程序。然后,电子设备105上的操作系统级进程可从提供应用程序内容的序列化版本(例如,非交互式版本和/或二维版本)无缝地转变到提供应用程序内容(例如,交互式版本和/或三维版本)。在一个或多个具体实施中,可诸如通过变更应用程序内容的颜色、色调、亮度或通常任何可见特性来提供一个或多个视觉提示以向用户和/或另外用户指示应用程序内容已转变到交互式版本。
在一个或多个具体实施中,应用程序内容可对应于和/或标识数字版权管理(DRM)保护内容。例如,群组会话中的用户可希望在群组会话中一起查看特定电影或其他视频内容。在这种情况下,电子设备105的操作系统级进程可向电子设备104的对等操作系统级进程提供网络标识符以用于诸如从内容服务器获取DRM内容。电子设备105的操作系统级进程还可有利于向电子设备104的对等操作系统级进程提供用于访问(例如,解密)内容的适当密钥,诸如内容密钥。电子设备105的操作系统级进程然后可诸如通过与电子设备104上的对等操作系统级进程交换时间戳和/或其他元数据信息来同步(单独地通过每个电子设备104、105进行的)内容的回放。下面相对于图4至图6进一步讨论用于管理利用DRM内容的群组会话的示例性过程流程。
在一个或多个具体实施中,群组会话中的用户可例如从另外应用程序进程内请求将来自该另外应用程序进程的内容添加到群组会话。该请求可从该另外应用程序进程传递到操作系统级进程。操作系统级进程可随后从该另外应用程序接收其他应用程序内容,并且可将该其他应用程序内容协调显示在群组会话的主机环境内。
在一个或多个实施方案中,可向发起群组会话的用户提供许可控制以离散地控制相对于群组会话中的其他用户且相对于群组会话中正在显示(或呈现)的任何内容(或其一部分)的查看、修改、移除、交互和/或其他权限/许可。例如,用户可相对于特定内容片段的特定部分诸如文档(或其一部分)对一个用户,而不对群组会话中的其他用户设置查看限制。
在一个或多个具体实施中,发起群组会话的用户可能够记录该群组会话以供后续查看和/或交互。用户还能够向群组会话中的一个或多个其他用户提供记录权限(例如,受到对其他用户设置的任何其他查看/交互限制)。电子设备105可将群组会话的记录诸如本地和/或安全地存储在服务器120处,并且该用户和/或另外用户可在稍后时间重放该记录。记录可包括深度信息、网格信息、其他几何形状等,使得可在与原始群组会话相同的主机环境中经历记录的重放。在记录的重放期间,用户可能够注释记录的一部分,诸如记录内的特定时间、位置和/或内容。注释可以是例如音频记录、笔记、视频记录等。可与记录一起来存储注释,并且可在记录的后续重放期间呈现注释。
尽管已经主要相对于群组会话内的两个用户描述了过程300,但群组会话可包括任何数量的用户。例如,在群组会话期间,(在被授权的情形下)用户中的一个用户诸如电子设备105的用户可(例如,经由应用程序进程)请求将附加用户添加到群组会话。应用程序进程可将该请求传递给操作系统级进程,该操作系统级进程可与附加用户的附加电子设备上的对等操作系统级进程协调。电子设备105的操作系统级进程也可与电子设备104上的对等操作系统级进程协调以将附加用户添加到群组。
在一个或多个具体实施中,相应电子设备104、105中的每个电子设备上的操作系统级进程可以自组织方式管理群组会话,使得当用户请求离开群组会话时,剩余用户的电子设备可继续参与群组会话。然而,在一个或多个具体实施中,发起群组会话的用户的电子设备105的操作系统级进程可处置用于管理群组会话的主要管理功能(例如,同步内容、用户交互、添加/移除用户、冲突解决等)。在此情况下,当从电子设备105的用户接收到离开群组会话的请求时,电子设备105的操作系统级进程可(例如,在具有用户的许可的情况下)将主要管理功能移交到仍处于群组会话中的用户的电子设备。在一个或多个具体实施中,电子设备105的用户可指派停留在群组会话中的特定用户来承担主要管理功能。在一个或多个具体实施中,承担主要管理功能的电子设备可由操作系统级进程基于处理资源、功率约束、带宽约束等中的一者或多者来自动确定。
图4示出了根据一个或多个具体实施的向群组提供委托令牌以用于共享访问受数字版权管理(DRM)系统保护的内容的示例性过程流程400。出于解释的目的,本文主要参考图1和图2的电子设备105来描述过程流程400。然而,过程流程400不限于图1和图2的电子设备105,并且过程流程400的一个或多个框(或操作)可由其他合适设备(包括电子设备110、电子设备115和/或服务器120)的一个或多个其他部件来执行。进一步出于解释的目的,过程流程400的一些框在本文中被描述为顺序地或线性地发生。然而,过程流程400的多个框可并行地发生。此外,过程流程400的框不必按所示顺序执行,和/或过程流程400的一个或多个框不必执行和/或可由其他操作替代。
过程流程400包括许可证服务器402、验证服务器404、内容拥有者设备406和查看群组设备408。许可证服务器402和/或验证服务器404可以是和/或可包括服务器120的全部或一部分。在一个或多个具体实施中,许可证服务器402和验证服务器404可以是相同服务器并且/或者可以是相同服务器上的不同进程。内容拥有者设备406可以是群组会话中的用户的电子设备,诸如电子设备105,该用户拥有他们想要与群组会话中的其他用户共享/查看的DRM保护内容,例如电影。查看群组设备408可以是群组会话中的其他用户的电子设备,诸如电子设备104、110和/或115。尽管共同地讨论了查看群组设备408,但应当理解,所描述的操作由查看群组中的这些设备中的一个或多个设备或每个设备来执行。
当内容拥有者设备406的用户请求与查看群组设备408共享DRM内容时,过程流程400开始。在一个或多个具体实施中,内容拥有者设备406以及查看群组设备408中的一个或多个查看群组设备可已经在群组会话中,或者可与内容拥有者设备406共享DRM内容的请求一起发起群组会话。当接收到共享内容的请求时,内容拥有者设备406向查看群组设备408提供网络标识符(例如,电影链接)和内容标识符(例如,电影标识符或MovieID)以用于获取内容,并且内容拥有者设备406基于内容标识符诸如基于电影标识符来生成内容的安全回放上下文(SPC)(410)。SPC可包括例如内容拥有者设备406的硬件唯一标识符(HU)。在一个或多个具体实施中,SPC可以是加密密钥请求。查看群组设备408中的这些设备中的一个或多个设备接收网络标识符以用于获取(和/或流式传输)内容,并且基于内容标识符诸如电影标识符生成内容的SPC(412)。每个SPC可包括例如查看群组设备408中的每个相应设备的硬件唯一标识符。
查看群组设备408中的这些设备中的一个或多个设备将所生成的SPC提供给内容拥有者设备406,并且内容拥有者设备406将SPC和对应的用户标识符以及用于访问内容的授权令牌提供给验证服务器404(414)。验证服务器404例如基于授权令牌来验证内容拥有者设备406的用户拥有内容,创建包括用户的用户标识符的查看群组和所生成的群组标识符(GroupId),并且将SPC列表提供给许可证服务器402以供进一步验证(416)。许可证服务器402从SPC列表解析硬件唯一标识符,创建委托令牌,并且将硬件唯一标识符列表和委托令牌提供给验证服务器404(418)。验证服务器404利用硬件唯一标识符列表更新群组列表,并且将委托令牌发送给内容拥有者设备406(420)。内容拥有者设备406将委托令牌提供给查看群组设备408的设备(422)。查看群组设备408接收委托令牌(424),该委托令牌随后可用于访问内容密钥,如下面相对于图5进一步所讨论。
在一个或多个具体实施中,委托令牌可包括一个或多个数据字段,诸如版本、随机数、内容标识符(例如,电影标识符)、群组标识符、拥有者设备硬件唯一标识符、查看群组设备的硬件唯一标识符列表以及创建日期。随机数可以是例如每当更新令牌时可改变的随机64位数。硬件唯一标识符列表可在令牌到期时被修改并重新创建。委托令牌的有效性窗口可以是一定时间,在该时间之后租用请求将不会被兑现。在一个或多个具体实施中,有效性窗口可以是给定资产类型的固定值,诸如允许完成视频内容的回放的大值。可例如使用基于散列的消息认证码(HMAC)来加密和/或处理委托令牌。
图5示出了根据一个或多个具体实施的群组访问受DRM系统保护的内容的示例性过程流程500。出于解释的目的,本文主要参考图1和图2的电子设备105来描述过程流程500。然而,过程流程500不限于图1和图2的电子设备105,并且过程流程500的一个或多个框(或操作)可由其他合适设备(包括电子设备110、电子设备115和/或服务器120)的一个或多个其他部件来执行。进一步出于解释的目的,过程流程500的一些框在本文中被描述为顺序地或线性地发生。然而,过程流程500的多个框可并行发生。此外,过程流程500的框不必按所示顺序执行,和/或过程流程500的一个或多个框不必执行和/或可由其他操作替代。
一旦查看群组设备408已经获得委托令牌(如上文相对于图4所描述),查看群组设备408中的一个或多个查看群组设备就可针对内容标识符(例如,电影标识符)生成SPC并且将SPC和委托令牌提供给验证服务器404(502)。验证服务器404接收SPC和委托令牌,并且将SPC和委托令牌以及内容密钥发射给许可证服务器402以进行验证(504)。许可证服务器402验证委托令牌,生成可为加密密钥响应的内容密钥上下文(CKC),并且将群组标识符、硬件唯一标识符列表以及CKC提供给验证服务器404(506)。验证服务器更新针对硬件唯一标识符列表的租用信息(例如,到期时间),并且将CKC提供给查看群组设备408(508)。查看群组设备408接收CKC,并且等待内容拥有者设备406发起回放(510)。
内容拥有者设备406针对内容标识符获得CKC(501),将回放开始时间的指示发射给查看群组设备408,并且在回放开始时间开始回放(512)。查看群组设备408接收该指示并且在指示的时间开始回放(例如,通过经由所接收的网络标识符从内容服务器访问内容并且使用对应于CKC的内容密钥来解密内容)(514)。在一个或多个具体实施中,回放可由查看群组设备408上的操作系统级进程控制。以此方式,在回放期间,查看群组设备408上的操作系统级进程可防止复制、记录和/或再分布正被查看的DRM保护内容。
在一个或多个实施方案中,如果记录由在其期间正在查看DRM保护内容的群组通信会话组成,则当查看该记录的用户对DRM保护内容无权限时,可从该记录混淆DRM保护内容。
如果对CKC的租用(例如,到期时间)在回放完成之前到期,则查看群组设备408向验证服务器404发射重新开始租用的请求(516)。该请求可包括SPC和委托令牌。验证服务器404接收请求,并且将SPC、委托令牌和内容密钥传递给许可证服务器402以进行验证(518)。许可证服务器402验证委托令牌,生成可为加密密钥响应的内容密钥上下文,并且将群组标识符、硬件唯一标识符列表以及CKC提供给验证服务器404(520)。验证服务器404利用回放开始标记更新群组表,并且将CKC提供给查看群组设备408(522)。查看群组设备408接收CKC并继续访问内容(524)。
图6示出了根据一个或多个具体实施的从已经访问受DRM系统保护的内容的群组移除用户的示例性过程流程600。出于解释的目的,本文主要参考图1和图2的电子设备105来描述过程流程600。然而,过程流程600不限于图1和图2的电子设备105,并且过程600的一个或多个框(或操作)可由其他合适设备(包括电子设备110、电子设备115和/或服务器120)的一个或多个其他部件来执行。进一步出于解释的目的,过程流程600的一些框在本文中被描述为顺序地或线性地发生。然而,过程流程600的多个框可并行发生。此外,过程流程600的框不必按所示顺序执行,和/或过程流程600的一个或多个框不必执行和/或可由其他操作替代。
当内容拥有者设备406的用户请求从共享查看移除另外用户时,过程流程600开始。例如,该请求可在另外用户离开群组会话时自动生成,或者该请求可在内容拥有者设备406的用户出于任何其他原因想要手动地移除另外用户时生成。内容拥有者设备406向验证服务器404发射移除用户请求,该移除用户请求包括正在被移除的用户的用户标识符(UserId)、委托令牌和内容拥有者设备406的用户的授权令牌(602)。
验证服务器404接收请求,至少部分地基于授权令牌来验证内容拥有者设备406的用户,并且将委托令牌发射给许可证服务器402以供验证(604)。许可证服务器402接收委托令牌,验证委托令牌,并且然后将硬件唯一标识符列表和群组标识符发射给验证服务器404(606)。验证服务器404从群组的硬件唯一标识符列表移除对应于正在被移除的用户的电子设备的硬件唯一标识符,并且向内容拥有者设备406发射确认消息(608)。内容拥有者设备406接收确认另外用户已经被移除的确认消息(610)。
在一个或多个具体实施中,内容拥有者设备406可离开群组会话并且/或者停止查看内容,并且其他查看群组设备408可继续查看内容。在一个或多个具体实施中,可使用上述过程流程在任何时间(例如,在回放期间)将附加用户设备添加到查看群组设备408。
本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如,个人信息数据可用于操作系统级群组会话管理。
本公开设想负责收集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地,将期望此类实体实现和一贯地应用一般公认为满足或超过维护用户隐私的行业或政府所要求的隐私实践。关于使用个人数据的此类信息应当被突出地并能够被用户方便地访问,并应当随数据的收集和/或使用变化而被更新。用户的个人信息应被收集仅用于合法使用。另外,此类收集/共享应仅发生在接收到用户同意或在适用法律中所规定的其他合法根据之后。另外,此类实体应考虑采取任何必要步骤,保卫和保障对此类个人信息数据的访问,并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外,这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。此外,应针对被收集和/或访问的特定类型的个人信息数据调整政策和实践,并使其适用于适用法律和标准,包括可用于施加较高标准的辖区专有的具体考虑因素。例如,在美国,对某些健康数据的收集或获取可能受联邦和/或州法律的管辖,诸如健康保险流通和责任法案(HIPAA);而其他国家的健康数据可能受到其他法规和政策的约束并应相应处理。
不管前述情况如何,本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件,以防止或阻止对此类个人信息数据的访问。例如,在操作系统级群组会话管理中,本主题技术可被配置为在注册服务期间或之后的任何时间允许用户选择“选择加入”或“选择退出”参与对个人信息数据的收集和/或共享。除了提供“选择加入”和“选择退出”选项外,本公开还设想提供与访问或使用个人信息相关的通知。例如,可在下载应用时向用户通知其个人信息数据将被访问,然后就在个人信息数据被应用访问之前再次提醒用户。
此外,本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据,通过限制数据收集和删除数据可最小化风险。此外,并且当适用时,包括在某些健康相关应用程序中,数据去标识可用于保护用户的隐私。可在适当时通过移除标识符、控制所存储数据的量或特异性(例如,在城市级别而不是在地址级别或在对于面部识别而言不充分的级别收集位置数据)、控制数据如何被存储(例如,在用户间汇集数据)和/或其他方法诸如差异化隐私来促进去标识。
因此,虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案,但本公开还预期各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即,本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。
图7示出了可以利用其来实现本主题技术的一个或多个具体实施的电子系统700。电子系统700可以是如图1所示的电子设备105、手持式电子设备104、电子设备110、电子设备115和/或服务器120并且/或者可以是其一部分。电子系统700可包括各种类型的计算机可读介质以及用于各种其他类型的计算机可读介质的接口。电子系统700包括总线708、一个或多个处理单元712、系统存储器704(和/或缓存)、ROM 710、永久性存储设备702、输入设备接口714、输出设备接口706以及一个或多个网络接口716,或其子集及变体形式。
总线708总体表示通信地连接电子系统700的许多内部设备的所有系统总线、外围设备总线和芯片组总线。在一个或多个具体实施中,总线708将一个或多个处理单元712与ROM 710、系统存储器704和永久性存储设备702通信地连接。一个或多个处理单元712从这些各种存储器单元获取要执行的指令和要处理的数据,以便执行本主题公开的过程。在不同的具体实施中,一个或多个处理单元712可为单个处理器或者多核处理器。
ROM 710存储一个或多个处理单元712以及电子系统700的其他模块所需的静态数据和指令。另一方面,永久性存储设备702可为读写存储器设备。永久性存储设备702可为即使在电子系统700关闭时也存储指令和数据的非易失性存储器单元。在一个或多个具体实施中,海量存储设备(诸如,磁盘或光盘及其相应盘驱动器)可被用作永久性存储设备702。
在一个或多个具体实施中,可移除存储设备(诸如软盘、闪存驱动器及其对应的磁盘驱动器)可以用作永久性存储设备702。与永久性存储设备702一样,系统存储器704可为读写存储器设备。然而,与永久性存储设备702不同,系统存储器704可为易失性读写存储器,诸如随机存取存储器。系统存储器704可存储一个或多个处理单元712在运行时可能需要的指令和数据中的任何指令和数据。在一个或多个具体实施中,本主题公开的过程存储在系统存储器704、永久性存储设备702和/或ROM 710(它们各自被实现为非暂态计算机可读介质)中。一个或多个处理单元712从这些各种存储器单元获取要执行的指令和要处理的数据,以便执行一个或多个具体实施的过程。
总线708还连接至输入设备接口714和输出设备接口706。输入设备接口714使得用户能够向电子系统700传送信息以及选择命令。可与输入设备接口714一起使用的输入设备可包括例如字母数字混合键盘和指向设备(也称为“光标控制设备”)。输出设备接口706可例如使得能够显示电子系统700所生成的图像。可与输出设备接口706一起使用的输出设备可包括例如打印机和显示设备,诸如液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、柔性显示器、平板显示器、固态显示器、投影仪或用于输出信息的任何其他设备。一个或多个具体实施可包括既充当输入设备又充当输出设备的设备,诸如触摸屏。在这些具体实施中,提供给用户的反馈可以是任何形式的感官反馈,诸如视觉反馈、听觉反馈或触觉反馈;并且可以任何形式接收来自用户的输入,包括声学、语音或触觉输入。
最后,如图7所示,总线708还通过一个或多个网络接口716将电子系统700耦接到一个或多个网络和/或耦接到一个或多个网络节点,诸如图1所示的电子设备110。以此方式,电子系统700可为计算机网络(诸如LAN、广域网(“WAN”)或内联网)的一部分,或者可为网络的网络(诸如互联网)的一部分。电子系统700的任何或所有部件可连同本主题公开一起使用。
上述这些功能可在计算机软件、固件或硬件中实现。该技术可使用一个或多个计算机程序产品实现。可编程处理器和计算机可包括在移动设备中或封装为移动设备。该过程和逻辑流程可由一个或多个可编程处理器和一个或多个可编程逻辑电路执行。通用和专用计算设备以及存储设备可通过通信网络互连。
一些具体实施包括将计算机程序指令存储在机器可读或计算机可读介质(也称为计算机可读存储介质、机器可读介质或机器可读存储介质)中的电子部件,诸如微处理器、存储装置以及存储器。此类计算机可读介质的一些示例包括RAM、ROM、只读光盘(CD-ROM)、可刻录光盘(CD-R)、可重写光盘(CD-RW)、只读数字通用光盘(例如,DVD-ROM、双层DVD-ROM)、各种可刻录/可重写DVD(例如,DVD-RAM、DVD-RW、DVD+RW等)、闪存存储器(例如,SD卡,mini-SD卡、micro-SD卡等)、磁性和/或固态硬盘驱动器、只读和可刻录Blu-盘、超密度光盘、任何其他光学或磁性介质以及软盘。计算机可读介质可存储计算机程序,该计算机程序可由至少一个处理单元执行并且包括用于执行各种操作的指令集。计算机程序或者计算机代码的示例包括机器代码,诸如由编译器所产生的机器代码,以及包括可由计算机、电子部件或微处理器使用解译器来执行的更高级别代码的文件。
虽然上述论述主要涉及执行软件的微处理器或多核处理器,但一些具体实施由一个或多个集成电路诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)执行。在一些具体实施中,此类集成电路执行存储在电路自身上的指令。
如本说明书以及本专利申请的任何权利要求所用,术语“计算机”、“服务器”、“处理器”及“存储器”均是指电子或其它技术设备。这些术语排除人或者人的群组。出于本说明书的目的,术语显示或正在显示意指在电子设备上显示。如本说明书以及本专利申请的任何权利要求所使用的,术语“计算机可读介质”以及“计算机可读媒介”完全限于以可由计算机读取的形式存储信息的可触摸的有形物体。这些术语不包括任何无线信号、有线下载信号以及任何其他短暂信号。
为了提供与用户的交互,本说明书中所述的主题的具体实施可在具有用于向用户显示信息的显示设备以及用户可用来向计算机提供输入的键盘和指向设备的计算机上实现,显示设备为例如CRT(阴极射线管)或LCD(液晶显示器)监视器,指向设备为例如鼠标或轨迹球。其他种类的设备也可用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的感官反馈,例如视觉反馈、听觉反馈或触觉反馈;并且可以任何形式接收来自用户的输入,包括声学、语音或触觉输入。此外,计算机可通过向用户所使用的设备发送文档以及从其接收文档来与用户进行交互;例如,通过响应于从用户客户端设备上的web浏览器接收的请求而将网页发送到该web浏览器。
本说明书中所述的主题的实施方案可在计算系统中实现,该计算系统包括后端部件,例如作为数据服务器,或者包括中间件部件,例如应用服务器,或者包括前端部件,例如具有图形用户界面或Web浏览器的客户端计算机,用户可通过该图形用户界面或Web浏览器与本说明书中所述的主题的具体实施进行交互,或者包括一个或多个此类后端部件、中间件部件或前端部件的任何组合。系统的部件可通过任何形式或介质的数字数据通信例如通信网络来互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、互联网络(例如,互联网)和对等网络(例如,自组织对等网络)。
计算系统可包括客户端和服务器。客户端和服务器一般是相互远离的,并且可通过通信网络进行交互。客户端和服务器的关系借助于在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。在某些具体实施中,服务器将数据(例如,HTML页面)传输到客户端设备(例如,为了向与该客户端设备交互的用户显示数据以及从与该客户端设备交互的用户接收用户输入)。在服务器处可以从客户端设备接收客户端设备处生成的数据(例如,用户交互的结果)。
根据本公开的各方面,提供了一种方法,该方法包括:通过在设备上执行的操作系统级进程并且从在设备上执行的应用程序进程接收在与该设备相关联的用户和另外用户之间发起群组会话的请求;通过该操作系统级进程标识与该另外用户相关联的另外设备;通过该操作系统级进程经由该另外设备在该用户和该另外用户之间发起该群组会话;通过该操作系统级进程并且从该应用程序进程接收应用程序内容;以及至少部分地基于所接收的应用程序,通过该操作系统级进程内容来管理该群组会话。
根据本公开的各方面,提供了一种设备,该设备包括:存储器;以及至少一个处理器,该至少一个处理器被配置为:通过在设备上执行的操作系统级进程并且从在设备上执行的应用程序进程接收在与该设备相关联的用户和另外用户之间发起群组会话的请求;通过该操作系统级进程标识与该另外用户相关联的另外设备;通过该操作系统级进程经由该另外设备与该用户发起该群组会话;并且通过该操作系统级进程管理该群组会话。
根据本公开的各方面,提供一种存储指令的非暂态计算机可读介质,这些指令在由一个或多个处理器执行时致使该一个或多个处理器执行操作,这些操作包括:通过在设备上执行的操作系统级进程并且从在设备上执行的应用程序进程接收在与该设备相关联的用户和另外用户之间发起群组会话的请求;通过该操作系统级进程标识与该另外用户相关联的另外设备;通过该操作系统级进程经由该另外设备在该用户和该另外用户之间发起该群组会话;以及通过该操作系统级进程管理该群组会话。
可以利用编写有一个或多个指令的有形计算机可读存储介质(或一种或多种类型的多个有形计算机可读存储介质)部分地或全部地实现本公开范围之内的具体实施。有形计算机可读存储介质实质上也可以是非暂态的。
计算机可读存储介质可以是任何可以由通用或专用计算设备读、写或以其他方式访问的存储介质,包括任何能够执行指令的处理电子器件和/或处理电路。例如,非限制地,计算机可读介质可包括任何易失性半导体存储器,诸如RAM、DRAM、SRAM、T-RAM、Z-RAM和TTRAM。计算机可读介质也可包括任何非易失性半导体存储器,诸如ROM、PROM、EPROM、EEPROM、NVRAM、闪存、nvSRAM、FeRAM、FeTRAM、MRAM、PRAM、CBRAM、SONOS、RRAM、NRAM、赛道存储器、FJG和Millipede存储器。
此外,计算机可读存储介质可包括任何非半导体存储器,诸如光盘存储装置、磁盘存储装置、磁带、其他磁性存储设备或者能够存储一个或多个指令的任何其他介质。在一个或多个具体实施中,有形计算机可读存储介质可直接耦接到计算设备,而在其他具体实施中,有形计算机可读存储介质可例如经由一个或多个有线连接、一个或多个无线连接、或它们的任意组合而间接地耦接到计算设备。
指令可以是直接能执行的,或者可用于开发可执行指令。例如,指令可被实现为可执行的或不可执行的机器代码,或者可被实现为可被编译以产生可执行的或不可执行的机器代码的高级语言指令。此外,指令也可被实现为数据,或者可包括数据。计算机可执行指令也可以任何格式组织,包括例程、子例程、程序、数据结构、对象、模块、应用程序、小程序、函数等。如本领域技术人员认识到的那样,包括但不限于指令的数量、结构、序列和组织的细节可明显不同,而不改变底层的逻辑、功能、处理和输出。
虽然以上论述主要涉及执行软件的微处理器或多核处理器,但一个或多个具体实施由一个或多个集成电路诸如ASIC或FPGA执行。在一个或多个具体实施中,此类集成电路执行存储在电路自身上的指令。
本领域的技术人员将会认识到,本文所述的各种例示性的框、模块、元件、部件、方法和算法可被实现为电子硬件、计算机软件或两者的组合。为了说明硬件和软件的这种可互换性,上文已经一般性地按照功能性对各种例示性的框、模块、元件、部件、方法和算法进行了描述。此类功能性是被实现为硬件还是软件取决于具体应用程序以及对整个系统施加的设计约束。技术人员对于每个具体应用程序可通过不同方式实现所描述的功能性。各种部件和框可被不同地布置(例如,以不同的顺序排列,或以不同的方式划分),而不脱离本主题技术的范围。
应当理解,本发明所公开的过程中的框的特定顺序或层级结构为示例性方法的例示。基于设计优选要求,应当理解,过程中的框的特定顺序或者层级结构可被重新布置或者所有示出的框都被执行。这些框中的任何框可被同时执行。在一个或多个具体实施中,多任务和并行处理可能是有利的。此外,上述具体实施中各个系统部件的划分不应被理解为在所有具体实施中都要求此类划分,并且应当理解,程序部件和系统可一般性地被一起整合在单个软件产品中或者封装到多个软件产品中。
如本说明书以及本专利申请的任何权利要求中所用,术语“基站”、“接收器”、“计算机”、“服务器”、“处理器”及“存储器”均是指电子设备或其他技术设备。这些术语排除人或者人的群组。出于本说明书的目的,术语“显示”或“正在显示”意指在电子设备上显示。
如本文所用,在用术语“和”或“或”分开项目中任何项目的一系列项目之后的短语“中的至少一者”是将列表作为整体进行修饰,而不是修饰列表中的每个成员(即每个项目)。短语“中的至少一者”不要求选择所列出的每个项目中的至少一个;相反,该短语允许包括任何一个项目中的至少一个和/或项目的任何组合中的至少一个和/或每个项目中的至少一个的含义。举例来说,短语“A、B和C中的至少一者”或“A、B或C中的至少一者”各自是指仅A、仅B或仅C;A、B和C的任意组合;和/或A、B和C中的每一个中的至少一个。
谓词字词“被配置为”、“能够操作以”以及“被编程以”并不意味着对某一主题进行任何特定的有形或无形的修改而是旨在可互换使用。在一个或多个具体实施中,被配置为监视和控制操作或部件的处理器也可以是意指处理器被编程以监视和控制操作或者处理器可操作以监视和控制操作。同样,被配置为执行代码的处理器可解释为被编程以执行代码或能够操作以执行代码的处理器。
短语诸如方面、该方面、另一方面、一些方面、一个或多个方面、具体实施、该具体实施、另一具体实施、一些具体实施、一个或多个具体实施、实施方案、该实施方案、另一实施方案、一些实施方案、一个或多个实施方案、配置、该配置、其他配置、一些配置、一种或多种配置、主题技术、公开、本公开、它们的其他变型等等都是为了方便,并不意味着涉及这样的一个或多个短语的公开对于主题技术是必不可少的,也不意味着这种公开适用于主题技术的所有配置。涉及此类一个或多个短语的公开可适用于所有配置或一个或多个配置。涉及此类一个或多个短语的公开可提供一个或多个示例。短语诸如方面或一些方面可指代一个或多个方面,反之亦然,并且这与其他前述短语类似地应用。
字词“示例性”在本文中被用于意指“用作示例、实例或者例示”。在本文中被描述为“示例性的”或作为“示例”的任何实施方案不必被理解为优选于或优于其他具体实施。此外,在术语“包括”、“具有”等在说明书或权利要求中使用的限度内,这样的术语旨在是包含性的,与术语“包括”当在权利要求中被用作过渡字词时“包括”被解释的方式类似。
本领域的普通技术人员已知或稍后悉知的贯穿本公开描述的各个方面的元素的所有结构和功能等同物通过引用明确地并入本文,并且旨在被权利要求书所涵盖。此外,本文所公开的任何内容并非旨在提供给公众,而与该公开是否明确地被陈述在权利要求中无关。不应根据35U.S.C.§112(f)的规定解释任何权利要求要素,除非使用短语“用于……的装置”明确陈述了该要素,或者就方法权利要求而言,使用短语“用于……的步骤”陈述了该要素。
先前的描述被提供以使得本领域的技术人员能够实践本文所述的各个方面。这些方面的各种修改对本领域的技术人员而言是显而易见的,并且本文所限定的通用原则可应用于其他方面。因此,本权利要求书并非旨在受限于本文所示的方面,而是旨在使得全部范围与语言权利要求书一致,其中对奇异值中的元素的引用并非旨在意味着“仅仅一个”,而是指“一个或多个”,除非被具体指出。除非另外特别说明,否则术语“一些”是指一个或多个。男性的代名词(例如,他的)包括女性和中性(例如,她的和它的),并且反之亦然。标题和子标题(如果有的话)仅为了方便起见而使用并且不限制本主题公开。
Claims (24)
1.一种方法,包括:
通过在设备上执行的操作系统级进程并从在设备上执行的应用程序进程接收在与所述设备相关联的用户和另外用户之间发起群组会话的请求;
通过所述操作系统级进程标识与所述另外用户相关联的另外设备;
通过所述操作系统级进程经由所述另外设备在所述用户和所述另外用户之间发起所述群组会话;
通过所述操作系统级进程并从所述应用程序进程接收应用程序内容;以及
至少部分地基于所接收的应用程序内容,通过所述操作系统级进程来管理所述群组会话。
2.根据权利要求1所述的方法,其中通过所述操作系统级进程经由所述另外设备在所述用户和所述另外用户之间发起所述群组会话包括:
确定针对所述群组会话的主机环境;以及
在所述主机环境内发起所述群组会话。
3.根据权利要求2所述的方法,其中所述主机环境包括以下中的至少一者:所述用户的物理环境、所述另外用户的另外物理环境、虚拟环境、或包括所述用户的所述物理环境和所述另外用户的所述另外物理环境的混合环境。
4.根据权利要求3所述的方法,其中所述主机环境包括所述用户的所述物理环境,并且在所述主机环境内发起所述群组会话包括:
接收所述用户的所述物理环境的视频流;以及
向所述另外设备提供信息,所述信息用于生成所述用户的所述物理环境的重建,所述信息是至少部分地基于所述视频流来被生成的。
5.根据权利要求4所述的方法,其中至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话还包括:
通过所述应用程序级进程显示所述用户的所述物理环境的所述视频流的至少一部分和所接收的应用程序内容的至少一部分。
6.根据权利要求4所述的方法,其中用于生成所述用户的所述物理环境的所述重建的所述信息包括对应于所述物理环境的未被包括在所述视频流中的部分的信息。
7.根据权利要求4所述的方法,还包括:
阻止所述应用程序进程访问所述视频流或用于生成所述用户的所述物理环境的所述重建的所述信息。
8.根据权利要求1所述的方法,还包括:
认证所述设备的所述用户的代表对应于所述用户;以及
向所述另外设备提供所述用户的所述代表以在所述群组会话中显示。
9.根据权利要求8所述的方法,其中认证所述设备的所述用户的所述代表对应于所述用户还包括:
验证所述代表的一个或多个虚拟属性符合所述用户的一个或多个物理属性。
10.根据权利要求1所述的方法,还包括:
存储所述群组会话的记录;
在所述群组会话已经结束之后,响应于针对所述群组会话的所述记录的请求而为所述用户重放所述群组会话的所述记录;
在所述群组会话的所述记录的所述重放期间,接收用于对所述群组会话的所述记录的部分的注释的用户输入;以及
存储与所述群组会话的所述记录的所述部分相关联的所述注释。
11.根据权利要求10所述的方法,还包括:
在存储所述注释之后,响应于针对所述群组会话的所述记录的另外请求而向所述用户重放所述群组会话的所述记录,其中所述注释与显示所述记录的所述部分联合地被显示。
12.根据权利要求1所述的方法,其中所述设备包括可头戴式系统,并且所述另外设备包括手持式移动设备或平板设备。
13.根据权利要求1所述的方法,其中当接收到发起所述群组会话的所述请求时,对应于所述应用程序进程的应用程序未被安装在所述另外设备上,并且通过所述操作系统级进程经由所述另外设备在所述用户和所述另外用户之间发起所述群组会话还包括:
通过所述操作系统级进程致使所述另外设备下载并安装所述应用程序的至少部分。
14.根据权利要求13所述的方法,其中在所述另外设备已经下载并安装所述应用程序的至少所述部分之前发起所述群组会话,并且至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话包括:
向所述另外设备提供所接收的应用程序内容的非交互式版本。
15.根据权利要求14所述的方法,还包括:
在所述另外设备已经下载并安装所述应用程序的至少所述部分之后,从向所述另外设备提供所接收的应用程序内容的所述非交互式版本转变到向所述另外设备提供所接收的应用程序内容的交互式版本。
16.根据权利要求15所述的方法,其中所接收的应用程序内容的所述非交互式版本包括二维内容,并且所接收的应用程序内容的所述交互式版本包括三维内容。
17.根据权利要求1所述的方法,还包括:
通过所述操作系统级进程并从另外应用程序进程接收另外应用程序内容;以及
至少部分地基于从所述应用程序进程接收的所述应用程序内容和从所述另外应用程序进程接收的所述另外应用程序内容通过所述操作系统级进程来管理所述群组会话。
18.根据权利要求1所述的方法,还包括:
通过在所述设备上执行的所述操作系统级进程并从在所述设备上执行的所述应用程序进程接收将附加用户添加到所述群组会话的另外请求;以及
通过所述操作系统级进程经由所述附加用户的附加设备将所述附加用户添加到所述群组会话。
19.根据权利要求1所述的方法,其中至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话包括:
从所述用户接收离开所述群组会话的请求;以及
通过所述操作系统级进程将所述群组会话移交到所述另外设备的另外操作系统级进程或所述附加设备的附加操作系统级进程中的至少一者。
20.根据权利要求1所述的方法,其中所述应用程序内容对应于由数字版权管理保护的内容,并且至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话包括:
通过所述操作系统级进程并向所述另外设备提供用于从内容服务器获取所述内容的网络标识符;以及
通过所述操作系统级进程并向所述另外设备促进提供用于访问所获取的内容的密钥。
21.根据权利要求20所述的方法,其中至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话还包括:
通过所述操作系统级进程使所述内容在所述设备和所述另外设备上的回放同步。
22.根据权利要求1所述的方法,其中至少部分地基于所接收的应用程序内容通过所述操作系统级进程来管理所述群组会话还包括:
通过所述操作系统级进程控制所述另外用户相对于所述群组会话的交互、修改或复制中的至少一者。
23.一种设备,包括:
存储器;以及
至少一个处理器,所述至少一个处理器被配置成:
通过在设备上执行的操作系统级进程并从在设备上执行的应用程序进程接收在与所述设备相关联的用户和另外用户之间发起群组会话的请求;
通过所述操作系统级进程标识与所述另外用户相关联的另外设备;
通过所述操作系统级进程经由所述另外设备与所述用户发起所述群组会话;以及
通过所述操作系统级进程管理所述群组会话。
24.一种包括代码的非暂态机器可读介质,所述代码在由一个或多个处理器执行时使得所述一个或多个处理器执行包括以下各项的操作:
通过在设备上执行的操作系统级进程并从在设备上执行的应用程序进程接收在与所述设备相关联的用户和另外用户之间发起群组会话的请求;
通过所述操作系统级进程标识与所述另外用户相关联的另外设备;
通过所述操作系统级进程经由所述另外设备在所述用户和所述另外用户之间发起所述群组会话;以及
通过所述操作系统级进程管理所述群组会话。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063083010P | 2020-09-24 | 2020-09-24 | |
US63/083,010 | 2020-09-24 | ||
US17/224,077 US12010155B2 (en) | 2020-09-24 | 2021-04-06 | Operating system level management of group communication sessions |
US17/224,077 | 2021-04-06 | ||
PCT/US2021/043055 WO2022066276A1 (en) | 2020-09-24 | 2021-07-23 | Operating system level management of group communication sessions |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116530055A true CN116530055A (zh) | 2023-08-01 |
Family
ID=80739554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180076942.6A Pending CN116530055A (zh) | 2020-09-24 | 2021-07-23 | 群组通信会话的操作系统级管理 |
Country Status (5)
Country | Link |
---|---|
US (1) | US12010155B2 (zh) |
EP (1) | EP4201002A1 (zh) |
KR (1) | KR20230070305A (zh) |
CN (1) | CN116530055A (zh) |
WO (1) | WO2022066276A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4218230A1 (en) * | 2020-09-24 | 2023-08-02 | Apple Inc. | Avatar spatial modes |
US20240054736A1 (en) * | 2022-08-11 | 2024-02-15 | Apple Inc. | Adjustable Immersion Level for Content |
US20240114206A1 (en) * | 2022-09-30 | 2024-04-04 | Motorola Mobility Llc | Variable Concurrent Access to Content of a Device by Multiple Devices |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080316687A1 (en) | 2007-06-06 | 2008-12-25 | Richardson Curtis R | Protective enclosure for an electronic device |
US20090178062A1 (en) * | 2007-06-08 | 2009-07-09 | Apple Inc. | Framework and Methods for Providing Communication Services to Client Applications |
US20080318687A1 (en) * | 2007-06-21 | 2008-12-25 | Microsoft Corporation | Live Game Lobby |
MY168771A (en) | 2012-11-27 | 2018-12-04 | Mimos Berhad | A system and method for duty-shared authenticated group key transport |
US9129095B1 (en) | 2014-12-19 | 2015-09-08 | Tresorit, Kft | Client-side encryption with DRM |
CN111052045B (zh) | 2017-09-29 | 2022-07-15 | 苹果公司 | 计算机生成的现实平台 |
EP3498351A1 (en) | 2017-12-13 | 2019-06-19 | Vestel Elektronik Sanayi ve Ticaret A.S. | A computer-implemented method, apparatus and a computer program |
WO2020018431A1 (en) * | 2018-07-15 | 2020-01-23 | Magical Technologies, Llc | Systems and methods to administer a chat session in an augmented reality environment |
US10754526B2 (en) * | 2018-12-20 | 2020-08-25 | Microsoft Technology Licensing, Llc | Interactive viewing system |
-
2021
- 2021-04-06 US US17/224,077 patent/US12010155B2/en active Active
- 2021-07-23 WO PCT/US2021/043055 patent/WO2022066276A1/en active Application Filing
- 2021-07-23 CN CN202180076942.6A patent/CN116530055A/zh active Pending
- 2021-07-23 KR KR1020237013705A patent/KR20230070305A/ko not_active Application Discontinuation
- 2021-07-23 EP EP21763170.4A patent/EP4201002A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
KR20230070305A (ko) | 2023-05-22 |
US12010155B2 (en) | 2024-06-11 |
WO2022066276A1 (en) | 2022-03-31 |
US20220094724A1 (en) | 2022-03-24 |
EP4201002A1 (en) | 2023-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230350628A1 (en) | Intuitive augmented reality collaboration on visual data | |
US12010155B2 (en) | Operating system level management of group communication sessions | |
US12079638B2 (en) | Management framework for mixed reality devices | |
CN114222960A (zh) | 用于计算机生成现实的多模态输入 | |
JP7385733B2 (ja) | 仮想カメラと物理的カメラとの位置同期 | |
US20210073357A1 (en) | Providing restrictions in computer-generated reality recordings | |
KR102651534B1 (ko) | 확장 현실 레코더 | |
US9930128B2 (en) | Method and apparatus for accessing a virtual object | |
CN115427919A (zh) | 用于与扩展现实系统一起使用的物理配套设备 | |
KR102029671B1 (ko) | 디지털 콘텐츠의 개인 보안 열람 플랫폼 | |
US11070636B1 (en) | Shared access to computing resources using wireless communications | |
US20220335145A1 (en) | Object management system, object management method, and object management program | |
CN114341944A (zh) | 计算机生成的现实记录器 | |
US12087253B1 (en) | Transparent data display window system and method | |
US20230368475A1 (en) | Multi-Device Content Handoff Based on Source Device Position | |
US20230072623A1 (en) | Artificial Reality Device Capture Control and Sharing | |
WO2024195199A1 (en) | Information processing apparatus, information processing method, and program | |
CN117041517A (zh) | 基于源设备位置的多设备内容接力 | |
CN117121003A (zh) | 电子设备的受管理数据资产 | |
WO2024189516A1 (en) | Custom digital content production and content source selection and configuration method | |
CN115398871A (zh) | 群组通信平台 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |