CN117528007A - 通过特定的安全深度链接的视频会议时段 - Google Patents

通过特定的安全深度链接的视频会议时段 Download PDF

Info

Publication number
CN117528007A
CN117528007A CN202310968383.0A CN202310968383A CN117528007A CN 117528007 A CN117528007 A CN 117528007A CN 202310968383 A CN202310968383 A CN 202310968383A CN 117528007 A CN117528007 A CN 117528007A
Authority
CN
China
Prior art keywords
participant
video conference
deep link
period
participants
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310968383.0A
Other languages
English (en)
Inventor
塞维特·耶尔利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TMRW Foundation IP and Holding SARL
Original Assignee
TMRW Foundation IP and Holding SARL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TMRW Foundation IP and Holding SARL filed Critical TMRW Foundation IP and Holding SARL
Publication of CN117528007A publication Critical patent/CN117528007A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/155Conference systems involving storage of or access to video conference sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/104Grouping of entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4633Interconnection of networks using encapsulation techniques, e.g. tunneling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4641Virtual LANs, VLANs, e.g. virtual private networks [VPN]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/2514Translation of Internet protocol [IP] addresses between local and global IP addresses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/2521Translation architectures other than single NAT servers
    • H04L61/2525Translation at a client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0272Virtual private networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0884Network architectures or network communication protocols for network security for authentication of entities by delegation of authentication, e.g. a proxy authenticates an entity to be authenticated on behalf of this entity vis-à-vis an authentication entity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/157Conference systems defining a virtual conference space and using avatars or agents

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)
  • Processing Or Creating Images (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)

Abstract

一种用于生成安全深度链接的方法,包括:生成深度链接生成请求;接收视频会议时段列表,其中每个视频会议时段至少包括存储在存储器中的视频会议平台的视频会议空间内的位置;以及生成对于每个视频会议时段唯一的深度链接,该深度链接至少对视频会议空间内的视频会议时段的位置进行编码。还描述了为邀请参与者生成用于虚拟空间的空间深度链接的方法,以及使用可重新组装的数据片段生成分布式深度链接的方法。

Description

通过特定的安全深度链接的视频会议时段
技术领域
本公开涉及计算机系统,更具体地涉及通过特定安全深度链接实现视频会议时段的方法和系统。
背景技术
随着全球视频会议和其他虚拟活动的数量不断增加,以及深度伪造视频和会议ID数据盗窃的增加,对这些视频会议需要更高的安全性和管理质量。例如,视频会议链接被一个或多个与会者泄露的情况并不少见,这可能会让入侵者操纵会议并破坏会议参与者的体验。
此外,考虑到可穿戴沉浸式技术(如增强和/或虚拟现实)的当前发展状况以及相对较低的技术适用率,可以理解的是,大多数视频会议解决方案提供了平面的2D用户界面,大多数交互都在此界面上进行。然而,当将现实生活体验与这些解决方案进行比较时,现实感、用户存在感和共享空间的低水平,以及可以进行的互动的数量和质量有限,都会给许多用户带来孤独或无聊的感觉,这反过来有时会导致生产力低于亲自进行相同活动时的生产力。
因此,希望具有安全的视频会议措施和逼真的机制,可以提高用户体验的安全性和真实性。
发明内容
提供本概述是为了用简要的形式介绍概念的选择,这些概念将在下面的详细描述中进一步描述。本概述不用于确定权利要求主题的关键特征,也无意用来帮助确定权利要求主题的范围。
在一方面,一种用于生成安全深度链接的方法,由包含至少一个处理器和存储器的计算机实现,包括:接收由存储在存储器中的深度链接生成器生成的深度链接生成请求;接收视频会议时段列表,其中视频会议时段列表中的视频会议时段包括存储在存储器中的视频会议平台的视频会议空间内的位置;和生成对应于所述视频会议时段的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置。
在一些实施例中,所述方法进一步包括接收参与者列表,其中所述多个参与者中的每一个具有一个或多个相关联的属性;和根据各参与者的一个或多个相关属性,为多个参与者的每个分配一个视频会议时段,从而创建一个会议时段协议。在一些实施例中,所述方法进一步包括向参与者的客户端设备发送深度链接;接收来自参与者客户端设备的消息,确认第一参与者使用深度链接中的信息参与相应视频会议会话;为所述第一参与者触发所述视频会议会话;和根据会议时段协议将第一参与者分配到相应的视频会议时段。
在一些实施例中,视频会议时段进一步包括一项或多项权限。在一些实施例中,所述方法进一步包括向相应视频会议时段的参与者提供分配给视频会议时段的一项或多项权限,其中每一项权限基于与相应参与者相关联的至少一个属性被调整。在一些实施例中,所述方法进一步包括响应于触发的视频会议会话,将第一个参与者安置在虚拟等候室中。在更进一步的实施例中,所述方法进一步包括根据调整后的权限调整等候室内一个或多个其他参与者的位置。
在一些实施例中,生成所述深度链接包括接收包括多个参与者的参与者列表,所述多个参与者包括所述第一参与者,其中所述多个参与者中的每一个具有一个或多个相关联的属性;基于所述第一参与者的相关联的属性来选择所述第一参与者;生成具有来自第一参与者的信息的链接,所述信息被编码用于身份验证目的;将所述身份验证链接发布到所述参与者列表;从所述第一参与者接收包括所述身份验证链接中的信息的消息;验证第一个参与者;以及在所述参与者的身份有效的情况下,生成并向第一个参与者发送深度链接。在所述第一参与者身份无效的情况下,所述方法可进一步包括拒绝无效参与者进入视频会议会话。
在一些实施例中,所述视频会议空间是2D视频会议环境,并且每个视频会议时段表示其图块。
在一些实施例中,所述视频会议空间是3D虚拟环境,每个视频会议时段表示3D虚拟环境中的包括3D坐标的精确位置。在进一步的实施例中,所述方法包括从至少一个相机接收来自至少一个客户端设备的至少一个用户的实时数据流;从所述实时数据流生成对应于所述第一参与者的用户图形表示;和接收来自第一参与者在深度链接中的信息之后,将对应于第一参与者的用户图形表示插入到3D虚拟环境的位置中,并将用户图形表示与3D虚拟环境图形组合。
在一些实施例中,所述方法进一步包括在所述深度链接中包含过期因子,其中过期因子是基于会话、或基于时间、或基于点击的过期因子之一,或它们的组合。
在一些实施例中,所述方法包括在将第一参与者分配到视频会议会话的相应视频会议时段之前,请求进一步的安全授权要求,包括密码、生物识别验证方法或其组合中的一种或多种。
本公开的另一方面,一种用于生成安全深度链接的系统,该系统包括:至少一台服务器计算机,其包括至少一个处理器和存储器,所述存储器包括由所述至少一个处理器执行的指令。所述指令被配置为使所述至少一台服务器计算机:接收深度链接生成请求;接收视频会议时段列表,其中所述视频会议时段列表中的视频会议时段包括视频会议空间内的位置;和生成与所述视频会议时段相对应的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置。
在进一步的实施例中,所述指令被进一步配置以使至少一台服务器计算机:接收包括多个参与者的参与者列表,其中所述多个参与者中的每个具有一个或多个相关联的属性;以及,通过基于所述一个或多个相关联的属性向所述多个参与者中的每一个分配视频会议时段来创建会议时段协议。在进一步的实施例中,所述指令进一步被配置为使所述至少一个服务器计算机:将所述深度链接发送到参与者客户端设备;从参与者客户端设备接收消息,确认第一参与者使用深度链接中的信息,参与相应的视频会议会话;触发所述第一参与者的视频会议会话;和基于会议时段协议将所述第一参与者分配给相应的视频会议时段。
在一些实施例中,每个视频会议时段进一步包括一项或多项权限,其中向相应视频会议时段的参与者提供分配给所述视频会议时段的一项或多项权限。在进一步的实施例中,其中每一项权限基于与相应参与者相关联的至少一个属性进行进一步的调整。
在一些实施例中,每个参与者被安置于一个虚拟等候室中。在进一步的实施例中,基于根据关联到对应的参与者的至少一个属性调整的权限来选择参与者在所述等候室内的位置。在一些实施例中,所述指令还被配置为使所述至少一个服务器计算机触发所述第一参与者的视频会议会话;将所述第一参与者安置在虚拟等候室中;以及基于调整的权限来调整虚拟等候室内的一个或多个其他参与者的位置。
在一些实施例中,所述指令被进一步配置以使至少一台服务器计算机:接收一份参与者列表,其中列表中的每一参与者具有一个或多个相关的属性;基于所述参与者的相关的属性选择一参与者;生成身份验证链接,其具有来自所述被选中的参与者的信息,该信息被编码用于身份认证目的;将所述身份验证链接发布到所述参与者列表;从参与者客户端设备接收包括身份验证链接中的信息的消息(例如,响应于对所述验证链接的点击或其他激活);验证所述被选中的参与者;以及在所述被选中的参与者的身份有效的情况下,生成并发送深度链接给所述被选中的参与者。在一些实施例中,在所述被选中的参与者的身份无效的情况下,所述指令被进一步配置为使所述至少一个服务器计算机拒绝无效参与者进入视频会议会话。
在一些实施例中,所述视频会议空间为二维视频会议环境,每个视频会议时段表示其图块。在其他实施例中,所述视频会议空间为三维虚拟环境,每个视频会议时段表示三维虚拟环境中包括三维坐标的位置,其中从由至少一个相机捕获的实时数据流生成的用户图形表示被插入到所述3D虚拟环境的3D坐标中并且与之组合。在进一步的实施例中,所述深度链接进一步编码过期因子,其中过期因子是基于会话、基于时间、基于点击,或它们的组合。
在本公开的另一方面,至少一种非暂时性计算机可读介质,存储在其上的指令配置成使包括处理器和存储器的至少一台服务器计算机执行包括以下步骤:接收深度链接生成请求;接收视频会议时段列表,其中视频会议时段列表中的视频会议时段包括视频会议平台的视频会议空间内的位置;生成对应于所述视频会议时段的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置;接收包括多个参与者的参与者列表,其中多个参与者中的每一个具有一个或多个相关属性;基于各个参与者的一个或多个关联属性为多个参与者中的每一个分配视频会议时段来创建会议时段协议;通过网络向参与者客户端设备发送深度链接;通过网络接收来自参与者客户端设备的消息,确认第一参与者使用深度链接中的信息参与相应的视频会议会话;为第一参与者触发相应的视频会议会话;以及根据会议时段协议将第一参与者分配到相应的视频会议时段。
在本公开的另一方面,一种用于生成虚拟空间的空间深度链接的系统包括:包括至少一个处理器和存储器的至少一个服务器计算机,所述存储器包括指令,其配置为,当由至少一个处理器执行时,使至少一台服务器计算机:接收当视频会议会话的参与者邀请受邀者加入所述视频会议会话时触发的深度链接生成请求,其中所述视频会议会话由3D虚拟环境中的视频会议空间托管;检索并编码视频会议会话上下文数据和会话通信实例;以及,生成包括编码的视频会议会话上下文数据的深度链接。在一些实施例中,连接到深度链接生成器的视频会议平台包括托管视频会议会话的至少一个视频会议空间。
在一些实施例中,上下文数据包括参与者在3D虚拟环境内的用户图形表示的3D坐标和受邀者的需要的3D坐标。在一些实施例中,受邀者的需要的3D坐标被限制在邀请受邀者的参与者周围的预定义半径。在一些实施例中,视频会议平台被配置为将从由至少一个相机捕获的实时数据流生成的参与者的用户图形表示插入到由表示视频会议空间的3D虚拟环境的3D坐标限定的位置中,并且将用户图形表示与其组合。
在一些实施例中,所述指令进一步被配置为使所述至少一个服务器计算机:将所述深度链接发送到受邀者客户端设备;通过受邀客户端设备接收来自受邀者的消息,并利用深度链接中的信息接受参加视频会议会话的邀请(例如,响应于对深度链接的点击或其他激活);以及在三维虚拟环境中检索并定位受邀者的三维坐标图形表示,授予受邀者对视频会议会话的访问权限。
在一些实施例中,所述视频会议会话是在公共通信实例中的公共3D虚拟环境中托管的公共视频会议会话。
在一些实施例中,所述公共3D虚拟环境包括可由参与者公开或私下访问的多个第三方专有虚拟环境。在进一步的实施例中,所述指令被进一步配置为使至少一台服务器计算机响应参与者的请求,生成深度链接到受邀者,所述深度链接被配置为在私人会话中将受邀者定位在所需的3D坐标中。
在一些实施例中,所述视频会议会话上下文数据进一步包括用户属性,所述用户属性包括用户个人资料数据,其包括用户识别数据,消费排名和购买偏好。
在一些实施例中,第三方专有虚拟环境的主机检索经由对应的用户图形表示进入到所述第三方专有虚拟环境的参与者的买方资料数据,并且向所述对应的参与者发送私人邀请,所述私人邀请在私人通信实例中打开所述主机与所述被邀请的参与者之间的私人会话。
在本公开的另一方面,一种为虚拟空间生成深度链接的方法,包括由计算机系统接收深度链接生成请求,当视频会议平台托管的视频会议会话的参与者邀请受邀者加入视频会议会话时,触发所述请求;检索和编码视频会议会话上下文数据和会话通信实例;和生成包含编码的视频会议会话上下文数据的深度链接;其中所述视频会议平台包括托管所述视频会议会话的至少一个视频会议空间,其中所述至少一个视频会议空间包括3D虚拟环境。
在一些实施例中,其中上下文数据包括3D虚拟环境中参与者的用户图形表示的3D坐标和受邀者需要的3D坐标,其中该方法还包括将受邀者的需要的3D坐标限制在邀请受邀者的参与者周围的预定半径内。
在一些实施例中,所述方法进一步包括在所述深度链接中编码到期因子,其中所述到期因子是基于会话、或基于时间、或基于点击的到期因子之一,或其组合。
在一些实施例中,所述方法进一步包括由所述视频会议平台将从由至少一个相机捕获的实时数据流生成的所述参与者的用户图形表示插入到所述3D虚拟环境的3D坐标中,并将所述用户图形表示与之组合。在一些实施例中,所述方法进一步包括将所述深度链接发送到受邀者客户端设备;通过受邀客户端设备接收来自受邀者的消息,利用深度链接中的信息接受参加视频会议会话的邀请(例如,响应于受邀者经由受邀者客户端设备对深度链接的点击);以及将受邀者的用户图形表示定位在3D虚拟环境内的3D坐标处,授予受邀者对视频会议会话的访问权。
在一些实施例中,所述视频会议会话是在公共通信实例中的公共3D虚拟环境中托管的公共视频会议会话,其中,所述公共3D虚拟环境包括可由参与者公开或私下访问的多个第三方专有虚拟环境。在进一步的实施例中,所述方法进一步包括响应参与者的请求,生成(例如,由主机通过深度链接生成器)对受邀者的深度链接,将受邀者定位在私人会话中所需的3D坐标中。
在一些实施例中,所述视频会议会话上下文数据进一步包括用户属性,所述用户属性包括用户个人资料数据,其包括用户识别数据、消费排名和购买偏好。在其他进一步的实施例中,所述第三方专有虚拟环境的主机检索经由对应的用户图形表示进入所述第三方专有虚拟环境的参与者的买方资料数据,并且向所述对应的参与者发送私人邀请,所述私人邀请在私人通信实例中打开所述主机与所述受邀参与者之间的私人会话。
在本公开的另一方面,至少一种非瞬时的计算机可读介质,在其上存储指令,所述指令配置为使至少一台包含处理器和存储器的服务器计算机执行以下步骤包括:接收(例如,由存储在存储器中的深度链接生成器)深度链接生成请求,当托管在视频会议平台中的视频会议会话的参与者邀请受邀者加入所述视频会议会话时,触发所述请求;检索和编码视频会议会话上下文数据和会话通信实例;和生成包括所述编码的视频会议会话上下文数据的深度链接;其中,所述视频会议平台包括托管所述视频会议会话的至少一个视频会议空间,其中所述至少一个视频会议空间包括三维虚拟环境。
在本公开的另一方面,一种由至少一台服务器计算机执行的分布式深度链接安全的方法,所述服务器计算机包括至少一个处理器和存储器,该方法包括:接收深度链接生成请求;生成对应于视频会议会话的视频会议时段的深度链接,其中,所述深度链接在激活时配置为将参与者引导到视频会议空间内的视频会议时段的位置;将所述深度链接分割成数据片段,其中第一数据片段包含所述深度链接的大部分数据,其中第二数据片段包含所述深度链接的少部分数据;将所述深度链接的数据片段分布到至少两个不同的存储位置,其中所述第一数据片段存储在至少一个第一存储位置中,所述第二数据片段存储在至少一个第二存储位置中;生成组装链接,其配置为在激活时启动从数据片段组装该深度链接的组装过程;和将所述组装链接发送到邀请者客户端设备。
在一些实施例中,所述视频会议空间包括2D视频会议环境,其中每个视频会议时段代表其图块,或所述视频会议空间包括3D虚拟环境,以及每个视频会议时段代表3D虚拟环境中的包括3D坐标的位置。
在一些实施例中,所述深度链接组装过程包括:经过参与者验证,从第一个存储位置检索该深度链接的第一数据片段和从第二个存储位置检索第二数据片段;对深度链接的第一和第二数据片段进行组装;和发送组装完的深度链接以授予受邀者访问视频会议会话的权限。
在一些实施例中,所述方法进一步包括将受邀者的用户图形表示插入3D虚拟环境的3D坐标位置,该用户图形表示是由至少一个相机捕获的实时数据流生成的。在另一进一步的实施例中,所述视频会议会话是在公共通信实例中的公共3D虚拟环境中托管的公共视频会议会话,或者是通过私有通信实例访问的私有视频会议会话。
在一些实施例中,所述第二存储位置包括一个或多个私有用户服务器或客户端设备本地存储器。在其他实施例中,所述第二存储位置配置在分布式账本网络中。
在一些实施例中,所述方法进一步包括在所述深度链接中编码过期因子,其中所述过期因子是基于会话、或基于时间、或基于点击的过期因子中的一个,或其组合。
在一些实施例中,所述第一存储位置包括所述至少一个服务器计算机的存储器。
在一些实施例中,所述方法进一步包括接收视频会议时段列表,其中所述视频会议时段被包括在所述视频会议时段列表中并且包括所述视频会议空间内的所述位置;接收包括多个参与者的参与者列表,其中每个参与者具有一个或多个相关联的属性;和根据各个参与者的一个或多个关联属性为每个参与者分配一个视频会议时段来创建会议时段协议。在一些实施例中,所述方法进一步包括为每个视频会议时段提供一项或多项权限;和向对应的视频会议时段的参与者提供一项或多项权限。
在本公开的另一方面,一种实现分布式深度链接安全的系统,包括至少一个服务器计算机,其包括至少一个处理器和存储器,所述存储器包括指令,所述指令被配置为使所述至少一个服务器计算机:接收深度链接生成请求;触发生成与视频会议会话的视频会议时段相对应的深度链接;将所述深度链接划分成数据片段,其中第一数据片段包括所述深度链接的大部分数据,并且其中第二数据片段包括所述深度链接的小部分数据;生成一个组装链接,该链接配置为在激活时启动一个深度链接装配过程,该过程从数据片段组装深度链接;以及将组装链接发送到邀请者客户端设备。
在一些实施例中,所述视频会议空间包括2D视频会议环境,其中,每个视频会议时段表示其图块,或者其中,所述视频会议空间包括3D虚拟环境,其中,每个视频会议时段表示包括所述3D虚拟环境内的3D坐标的位置。在进一步的实施例中,深度链接组装过程包括:经过参与者验证,从第一个存储位置检索深度链接的第一个数据片段;从第二个存储位置检索该深度链接的第二个数据片段;对深度链接的第一和第二数据片段进行组装;和授予参与者访问视频会议会话的权限。在其他进一步的实施例中,在授予参与者对视频会议会话的访问权后,视频会议平台在3D虚拟环境的3D坐标位置插入由至少一个相机捕获的实时数据流生成的参与者的用户图形表示。
在进一步的实施例中,所述视频会议会话是在公共通信实例中的公共3D虚拟环境中托管的公共视频会议会话,或通过私有通信实例访问的私有视频会议会话。
在一些实施例中,所述第二存储位置包括一个或多个私有用户服务器或客户端设备本地存储器。在其他进一步的实施例中,在分布式账本网络中配置所述第二个存储位置。在一些实施例中,所述第一存储位置包括至少一台服务器计算机的存储器。
在一些实施例中,所述指令进一步配置以使至少一台服务器计算机:接收视频会议时段列表,其中所述视频会议时段包括在视频会议时段列表中,并包括视频会议空间内的位置;接收包含多个参与者的参与者列表,其中每个参与者具有一个或多个关联属性;基于各个参与者的一个或多个关联属性为每个参与者分配视频会议时段来创建会议时段协议;为每个视频会议时段提供一项或多项权限;和为相应的视频会议时段的参与者提供一项或多项权限。
在本公开的另一方面,至少一种非瞬时的计算机可读介质,在其上存储了配置为使至少一台包含处理器和存储器的服务器计算机执行包括以下步骤的指令:从视频会议平台的管理员实体接收深度链接生成请求;生成对应于视频会议平台的视频会议会话时段的视频会议时段的深度链接,其中,所述深度链接在激活时配置为将参与者引导到视频会议空间内的视频会议时段的位置;将所述深度链接划分为数据片段,其中第一数据片段包括所述深度链接的数据的第一部分,并且其中第二数据片段包括所述深度链接的数据的第二部分;将所述深度链接的数据片段分布到至少两个不同的存储位置,其中所述第一数据片段存储在第一存储位置中,所述第二数据片段存储在第二存储位置中;以及生成组装链接,其配置为在激活时启动从数据片段组装该深度链接的组装过程;和将组装链接发送到参与者客户端设备。
以上概述不包括本公开的所有方面的详尽列表。可以设想的是,本公开包括可以从以上概述的各个方面的所有合适的组合实践的所有系统和方法,以及在下面的详细描述中公开的,并且在与本申请一起提交的权利要求中特别指出的系统和方法。这样的组合具有在以上概述中没有具体列举的优点。本发明的其他特征和优点将从附图和下面的详细描述中显而易见。
附图说明
本公开的具体特点、方面和优点将在下列说明和附图中得到更好的理解,其中:
图1显示了根据一个实施例的生成安全深度链接的系统。
图2显示了根据一个实施例的由属性和视频会议空间组成的视频会议平台。
图3显示了根据一个实施例的一个可用于生成安全深度链接的系统的架构示例。
图4A-4B分别显示根据一个实施例的二维和三维视频会议空间。
图5显示了根据一个实施例,用户可根据其调整后的权限参与互动的示例。
图6显示了根据一个实施例的生成安全深度链接的方法。
图7显示了根据一个实施例的用于虚拟空间生成空间深度链接的系统。
图8A-8B显示了根据一个实施例中的视频会议平台,所述平台包括一个具有公共虚拟环境和多个专有虚拟环境的视频会议空间。
图9显示了根据一个实施例的会话上下文数据。
图10显示了根据一个实施例的为虚拟空间生成空间深度链接的方法。
图11显示了根据一个实施例的安全分布式深度链接系统。
图12显示了根据一个实施例的安全分布式深度链接方法。
图13显示了根据一个实施例的深度链接组装方法。
具体实施方式
在下面的描述中,参考了通过说明的方式示出各种实施例的附图。此外,下面将通过参考若干示例来描述各种实施例。应当理解,在不脱离所要求保护的主题的范围的情况下,实施例可以包括设计和结构的改变。
本公开通过用于生成特定安全深度链接的系统、方法和计算机可读介质和用于生成虚拟空间的空间深度链接的系统、方法和计算机可读介质以及实现分布式深度链接安全性的系统、方法和计算机可读介质解决了背景技术中公开的缺点中的至少一些。
图1显示了根据一个实施例的用于生成安全深度链接的系统100。
系统100包括服务器计算机系统中的至少一台服务器计算机102,所述服务器计算机102包括至少一个处理器104和存储器106,存储器106包括由所述至少一个处理器104执行的指令。所述存储器106进一步存储深度链接生成器108和视频会议平台110,视频会议平台110包括至少一个视频会议空间112。所述深度链接生成器108被配置为接收深度链接生成请求并接收视频会议时段列表,其中每个视频会议时段114至少包括视频会议空间112中的一个位置。深度链接生成请求可由视频会议平台110的管理员通过例如,管理员客户端设备122等发送,也可在人们确认有兴趣加入相应视频会议会话时由视频会议平台110自动创建。
深度链接生成器108被进一步配置为生成与每个视频会议时段114相对应(例如,对于每个视频会议时段114来说是唯一的)的深度链接,每个深度链接包括表示视频会议时段114在视频会议空间112中的位置的信息。
在本公开的一些实施例中,深度链接包括一个统一资源定位符(URL),该URL链接到视频会议平台的视频会议空间的特定部分,例如视频会议时段。URL可以超链接的形式显示在计算设备上。URL包括指向视频会议空间特定位置所需的所有信息。当视频会议会话参与者点击、轻触或以其他方式激活由深度链接生成器生成的深度链接时,参与者的客户端设备会生成并向服务器计算机发送包含URL的信息(例如HTTP请求或使用不同协议的信息)。通过这种方式,所述深度链接就会将参与者带到视频会议空间内的所需位置,如特定的会议时段或特定的通信实例。
在一些实施例中,最初由管理员确定分配给参与者的视频会议时段114。在一个示例情景中,管理员通过图形用户界面手动点击或以其他方式选择虚拟会议空间布局的特定位置(例如,虚拟会议桌周围的座位位置),并相应地安排每个参与者。一旦选定位置,深度链接生成器108就会生成相应的深度链接,将参与者引导到相应的会议时段,其中每个深度链接对于一个会议时段都是唯一的。可替换地,在每个用户注册时,系统100自动(例如,以伪随机方式)确定参与者将被分配到的视频会议时段114,因此,当用户点击深度链接时,用户将被安置在由系统100自动确定的位置上。
在一些实施例中,视频会议会话的通信实例包括视频会议空间的实例(例如,代表这种视频会议空间的二维或三维虚拟环境的实例)加上一个或多个相应的通信信道,这些通信信道使视频会议空间内的通信成为可能。公共通信实例可以是视频会议空间的一个实例,使多个用户能够同时相互查看并相互通信。私人通信实例可以是视频会议空间的一个实例,只允许应邀与数量较少或预定数量的用户进行通信。
在一些实施例中,用户图形表示法以图形方式表示用户或会议参与者,例如包括由用户上传或第三方来源的照片构建的用户三维虚拟剪影,并去除背景;或根据从摄像头获取的实时二维、立体、深度或三维实时视频流数据馈送生成的用户实时三维虚拟剪影,并去除背景,从而包括用户的实时视频流;或不去除背景的视频;或去除背景的视频,并利用多边形结构显示。所述多边形结构可以是四边形结构,也可以是更复杂的三维结构,用作支持视频的虚拟框架。这些用户图形表示可以插入三维视频会议空间虚拟环境的三维坐标中,并在其中进行图形组合。在本公开内容中,术语“用户三维虚拟剪影”是指根据用户上传或第三方来源的二维照片构建的用户虚拟复制品。用户三维虚拟剪影是通过机器视觉技术的三维虚拟重建流程创建的,该流程使用用户上传或第三方来源的二维照片作为输入数据,生成去除背景的用户三维网格或三维点云。在一些实施例中,实时数据流和/或用户上传或第三方源2D照片中用作输入数据的数据包括2D或3D图像数据、3D几何图形、视频数据、媒体数据、音频数据、文本数据、触觉数据、时间数据、3D实体、3D动态对象、文本数据、时间数据、元数据、优先级数据、安全数据、位置数据、照明数据、深度数据和红外数据等。
在本公开中,术语“用户实时三维虚拟剪影”是指基于从摄像头获取的实时二维或三维实时视频流数据,并在去除用户背景后创建的用户虚拟复制品。用户实时三维虚拟剪影是通过机器视觉技术的三维虚拟重建过程创建的,该过程使用用户实时数据流作为输入数据,生成去除背景的用户三维网格或三维点云。
在本公开中,术语“去除背景的视频”指的是流式传输到客户端设备的视频,其中已对视频执行了去除背景的处理,以便只显示用户,然后在接收客户端设备上利用多边形结构显示。
在本公开中,术语“未去除背景的视频”一词指的是流式传输到客户端设备的视频,其中视频忠实地呈现了相机捕捉的内容,以便用户及其背景可见,并使用多边形结构在接收客户端设备上显示。
深度链接生成器108还被配置为向每个参与者客户端设备118-120发送深度链接。参与者客户端设备118-120可以点击或以其他方式激活收到的链接,以确认参与相应的视频会议会话,然后将其发送给深度链接生成器108。深度链接生成器108从例如用户点击接收参与会话的授权,并且相应地通过指示视频会议平台110来发起视频会议会话。与视频会议平台110通信的深度链接生成器108然后将参与者分配到相应的视频会议时段114。
深度链接生成器108是存储在存储器106中的计算机-生成的深度链接生成器程序,其被配置用于生成对多个数据进行编码的深度链接。例如,所述深度链接可以从视频会议时段列表中编码特定的视频会议时段,使得当参与者点击深度链接时,深度链接将参与者带到分配的视频会议时段114。
术语“视频会议空间”是指进行视频会议会话的虚拟空间。视频会议空间可以是2D或3D视频会议空间。在视频会议空间是2D视频会议环境的实施例中,每个视频会议时段表示其图块。会议时段图块可以是矩阵中的图块,其中每个图块表示被分配到视频会议空间内的特定区域的参与者,并且包括参与者的实时记录或图片。
在一个实施例中,所述视频会议空间是3D虚拟环境,每个视频会议时段表示包括该3D虚拟环境中的3D坐标的精确位置。所述3D虚拟环境是支持参与者之间的实时通信的计算机管理的虚拟环境。作为3D视频会议环境,虚拟环境可以包括其他图形元素,这些图形元素不是实现通信所必需的,但是可以增强虚拟环境内的用户体验。例如,所述3D视频会议环境可以包括表示虚拟环境内的墙壁、结构和物体的多个虚拟图形元素。在某些情况下,3D视频会议环境模拟一个物理的、真实世界的空间。所述3D虚拟环境可以遵循与重力、地形、物理和运动学相关的规律,这些规律可以基于或可以不基于真实世界的元素,并且可以通过合适的由计算机操作的数学模型来实现。在一些实施例中,合适的模型包括3D模型、动态模型、几何模型或机器学习模型中的一个或多个,或其组合。
在一个实施例中,深度链接生成器108被配置为在深度链接中编码过期因子,其中过期因子是基于会话、基于时间或基于点击(基于激活)的,或它们的组合。基于会话的过期因子使深度链接只能用于特定会话,在会话结束后删除或停用深度链接。基于时间的深度链接可让使用这种链接的参与者在预定时间内访问视频会议会话,之后深度链接可能会过期。基于点击或激活的深度链接使深度链接在删除或停用之前只能使用预定次数(如一次、两次或其他次数)。也可以将其组合使用。
图1中的元件,包括至少一台服务器计算机102和各种客户端设备118-122,可以通过网络124(如无线网络)进行连接。在一些实施例中,网络124可包括毫米波(mmW)或毫米波与6GHz以下通信系统的组合,如第五代无线系统通信(5G)。在其他实施例中,所述系统可通过无线局域网(Wi-Fi)进行连接。在其他实施例中,系统可通过第四代无线系统通信(4G)进行通信连接,可由4G通信系统支持,也可包括其他有线或无线通信系统。
图2显示了根据一个实施例的视频会议平台202,其包括属性204和视频会议空间206。
所述视频会议空间206包括多个会议时段208,例如会议时段A和B,每个时段包括一项或多项权限210。权限210指的是参与者212在占用特定的会议时段208时可能拥有的权限,这些权限使视频会议会话中的多个选项成为可能。
在一些实施例中,向相应视频会议时段208的参与者提供所述权限210。在一个实施例中,在将参与者212定位在相应的会议时段208之前,向参与者212提供权限210。在另一个实施例中,在参与者212位于会议时段208时或之后,向参与者212提供权限210。在某些实施例中,视频会议平台202在向参与者212提供权限210之前,会向参与者发送条款和条件,这些条款和条件需经参与者审查和批准后方可使用特定权限,以便获得所述权限。
为每个会议时段208提供权限,并提供将参与者直接引导至包含权限210的相应会议时段208的深度链接,可提高会话安全性。如果深度链接是会议时段208所独有的,并且在每次会议后都会更新,这样就能降低链接被"泄露"或被未经授权的用户获取的概率。假设在深度链接被泄露的情况下,所述深度链接可能只对特定的会议时段208有效,因此只有一名参与者可以在一个特定的会议时段208进入视频会议会话,从而简化了跟踪这种泄露的过程。这与大多数传统方法形成鲜明对比,后者为视频会议会话生成单一链接,由于多个参与者的链接相同,会话链接被泄露的可能性增加。此外,提供与每个会议时段208相对应的深度链接,可提高视频会议空间206内定位的透明度,从而提高用户体验的质量,因为即使不能消除也会减少任何参与者因为使用了错误会议时段而可能发生的潜在的社会摩擦。在一些实施例中,深度链接生成器214连接到视频会议平台202,并被配置为接收与会者参与列表,其中每个参与者都有一个或多个相关属性204。每个属性204可代表参与者的特定属性或特征,例如与用户配置文件相关的特征,包括用户识别数据、消费排名、购买偏好、会话期间的角色(例如发言者、主持人、听众、会议记录者等)等。参与者列表可由视频会议平台的管理员通过例如,管理员客户端设备等输入,也可在人们确认有兴趣加入相应视频会议会话时由视频会议平台202自动创建。
在更进一步的实施例中,根据与相应参与者212关联的至少一个属性204进一步调整每项权限210。例如,如果分配给特定的会议时段的权限210包括一次静音一名参与者,且正在讨论的参与者具有作为主要发言人的属性204,那么会议时段的权限204就可以调整为包括同时静音所有参与者。
深度链接生成器214可进一步配置为基于一个或多个属性204为每个参与者分配视频会议时段208来创建会议时段协议。在一个实施例中,会议时段协议包括参与者列表、视频会议空间206中的座位顺序以及每个会议时段208的相应属性204。深度链接生成器214(可在相应的深度链接中指定会议时段协议)根据所述会议时段协议创建与每个会议时段214相对应的深度链接。例如,VIP参与者(例如,发言人、主席或在特定视频会议会话中具有特殊身份的任何人)可被分配一个优先会议时段208,例如会议时段A,该时段比其他会议时段208(例如会议时段B和C)具有更多权限,其中会议时段A具有管理员权限,例如使其他参与者的麦克风静音,或具有比其他参与者更高分辨率的图像或更大的会议时段图块。深度链接生成器214可进一步配置为向每个参与者客户端设备216-218发送深度链接;接收来自参与者的深度链接点击通知或深度链接的其他激活通知,确认参加相应的视频会议会话;触发视频会议会话;以及根据会议时段协议将参与者分配到相应的视频会议时段。
在一个实施例中,所述深度链接生成器214进一步被配置为:接收参与者列表,其中每个参与者包括一个或多个相关的属性;基于所述相关的属性选择一个参与者;生成一个链接,该链接包含为验证目的而编码的所选参与者的信息;将所述链接发布到所述参与者列表;接收参与者对该链接的点击或其他激活;验证参与者;在参与者身份有效的情况下,生成并发送深度链接给所述参与者;在参与者身份无效的情况下,拒绝无效参与者进入视频会议会话。在本实施例中,参与者列表中的参与者可以是视频会议平台的用户,深度链接生成器214生成的链接可以是根据参与者属性指定给某个特定参与者的链接,但也可以是所有其他用户可见的链接。深度链接生成器214在对链接所指向的用户进行身份验证后,自动生成一个深度链接,将参与者置于相应的会议时段中。验证可以采取任何合适的形式,例如生物识别扫描,包括面部扫描、指纹扫描、语音识别等;密码;PIN码;或它们的组合。
在一些实施例中,每个参与者都被安置在虚拟等候室中。所述虚拟等候室是一个虚拟空间,在视频会议会话管理员允许参与者进入会话时,例如在核实其身份之后,参与者可被安置在该虚拟空间中。等候室可以防止入侵者加入视频会议会话并可能操控会议或破坏会议体验,从而提高视频会议的安全性。在一些实施例中,所述等候室可以是一个虚拟环境,等候的参与者可以在加入他们可能已经注册的实际会话之前在此进行交互。例如,在3D视频会议空间的情况下,所述等候室可以是一个带有虚拟椅子的三维房间,每个用户都可以被分配到相应的椅子上。在2D视频会议空间的情况下,所述虚拟环境可包括多个图块,每个图块分配给安置在等候室中的相应参与者。在某些实施例中,参与者在等候室中的位置是根据权限选择的,而权限根据与相应参与者关联的至少一个属性进行调整。
图3描述了一个示例混合系统架构300的图示表示,根据一种实施方式,该结构可以在用于生成安全深度链接的系统中使用。
在一些实施例中,混合系统架构300是一种混合通信模型,用于与其他对等客户端(例如其他参与者)进行交互,包括客户端-服务器端304和P2P端306,在图3中由虚线区域界定。使用这种混合通信模型可以在提供网络服务、数据和资源给每个会话的同时,实现用户之间的快速P2P通信,从而减少延迟问题,并在视频会议空间中实现用户与内容之间的多种交互。
在各种实施例中,客户端-服务器端304相对于P2P端306的使用水平和比率取决于要处理的数据量、维持流畅的用户体验所允许的延迟、所需的服务质量(QOS)、所需的服务等等。在一个实施例中,P2P端306用于视频和数据的处理、流传输和渲染。这种采用混合系统架构300的模式可能比较适合,例如,在需要处理低延迟和低数据量的情况下,以及在“重型”客户端存在时,即客户端设备308有足够的计算能力来执行这些操作。在另一个实施例中,采用了客户端-服务器端304和P2P端306的组合,如P2P端306用于视频流和渲染,而客户端-服务器端304用于数据处理。这种采用混合系统架构300的模式可能是合适的,例如,当需要处理大量数据或可能需要其他微服务时。在进一步的实施例中,客户端-服务器端304可用于视频流和数据处理,而P2P端306用于视频渲染。这种采用混合系统架构300的模式可能是合适的,例如,当需要处理的数据量更大和/或当只有一个轻量级客户端可用时。在更进一步的实施方式中,客户端-服务器端304可以用于视频流传输、渲染和数据处理。当可用非常轻量级的客户端时,这种使用混合系统架构300的模式可能是合适的。混合系统架构300可以被配置为在同一会话中根据需要在客户端-服务器端304和P2P端306之间切换不同的使用模式。
在一些实施例中,来自客户端-服务器端304的至少一个云服务器可以是中间服务器,这意味着服务器用于促进和/或优化客户设备308之间的数据交换。在这种实施方式中,至少一个云服务器可以管理、分析、处理和优化传入的图像和多媒体流,并以路由器拓扑(例如但不限于选择性转发单元(SFU)、空间分析媒体服务器(SAMS)、多媒体路由器等)的形式管理、评估、优化出站流的转发,或者可以使用图像和媒体处理服务器拓扑(例如但不限于解码、合并、改进、混合、增强、增强、计算、操作、编码)或转发服务器拓扑(例如但不限于MCU、云媒体混音器、云3D渲染器、媒体服务器)或其他服务器拓扑。
在这些实施例中,其中中间服务器是SAMS时,这样的媒体服务器管理、分析和处理每个发送客户端设备308的传入数据(包括但不限于元数据、优先级数据、数据类别、空间结构数据、三维位置、方向或运动信息、图像、媒体、基于可伸缩视频编解码器的视频),并在此分析中通过修改、上调或下调媒体的时间(例如,变化的帧率)、空间(例如,不同的图像尺寸)、质量(例如,不同的压缩或编码质量)和颜色(例如,颜色分辨率和范围)来优化将出站数据流转发到每个接收客户端设备308,基于特定接收客户端设备用户的空间、三维方向、距离和优先级与这些传入数据的关系,实现接收一个或多个用户客户端设备308的最佳带宽和计算资源利用。
在一些实施例中,媒体、视频和数据处理包括一个或多个进一步的编码、转码、解码,空间或3D分析和改进,包括图像滤波、计算机视觉处理、图像锐化、背景改善、背景去除、前景模糊、眼部遮盖、人脸像素化、声音扭曲、图像放大、图像清理、骨骼结构分析、人脸或头部计数、物体识别、标记或QR码跟踪、眼动跟踪、特征分析、3D网格或体积生成、特征跟踪、人脸识别、SLAM跟踪和面部表情识别或其他以微服务形式运行在这样的媒体路由器或服务器上的模块化插件。
客户端-服务器端304采用安全通信协议310来实现客户端设备308与网络/应用服务器312之间通过网络的安全端到端通信。样本合适的安全通信协议310可以包括例如数据报传输层安全(DTLS)(其本身是安全用户数据报协议(UDP))、安全实时传输协议(SRTP)、安全超文本传输协议(https://)和安全WebSocket(wss://),它们彼此兼容并且可以提供全双工认证应用访问、隐私保护和传输中交换数据的完整性。适用的Web/应用服务器312可以包括例如Jetty Web应用服务器,它们是Java HTTP Web服务器和Java Servlet容器,可以实现机器之间的通信并正确部署Web应用服务。Web/应用服务器312可以通过客户端设备308通过相应的可下载/网络应用程序328通过图形用户界面330进行访问。
尽管在图3中将Web/应用服务器312描绘为单个元件,但本领域技术人员可能会意识到Web服务器和应用服务器可以是分开的元件。例如,Web服务器可以配置为通过安全通信协议310接收客户端请求,并将这些请求路由到应用服务器。因此,Web/应用服务器312可以使用安全通信协议310接收客户端请求并处理这些请求。处理请求的过程可能包括请求一个或多个微服务314(例如基于Java的微服务)和/或使用相应的数据库管理系统318从数据库316中查找数据。应用/Web服务器312可以提供会话管理和许多其他服务,例如3D内容和应用逻辑,以及会话的状态持久性(例如,用于持久存储共享文档、同步虚拟环境中的交互和变化,或持久存储虚拟环境的视觉状态和修改)。例如,一个合适的数据库管理系统318可以是一个对象关系映射(ORM)数据库管理系统,由于ORM具有使用面向对象的编程语言在不兼容的类型系统之间转换数据的能力,它可能适合使用开源和商业(例如专有)服务进行数据库管理。在进一步的实施例中,通过使用发布-订阅模型,可以进一步将分布式空间数据总线320用作微服务和客户端设备之间的分布式消息和资源分发平台。
P2P端306可以使用合适的P2P通信协议322,通过合适的应用程序编程接口(APIs)实现虚拟环境中对等客户端设备308之间的实时通信,实现实时交互和同步,支持多用户协作环境。例如,通过P2P端306,一个或多个用户的贡献可以直接传输给其他用户,其他用户可以实时地观察所执行的变化。合适的P2P通信协议324的一个例子可能是Web实时通信(WebRTC)通信协议,它是标准、协议和JavaScript APIs的集合,这些组合使得P2P音频、视频和数据在对等客户端设备308之间共享成为可能。P2P端306中的客户端设备308可以使用一个或多个渲染引擎324对实时会话执行实时3D渲染。一个合适的渲染引擎324的例子可能是基于WebGL的3D引擎,WebGL是一个JavaScript API,用于在任何兼容的web浏览器中渲染2D和3D图形,而不需要使用插件,允许客户端设备308的一个或多个处理器(例如一个或多个图形处理单元(GPUs))加速物理和图像处理和效果。此外,P2P端306中的客户端设备308可以通过一个或多个合适的计算机视觉库326执行图像和视频处理以及机器学习计算机视觉技术。在一个实施例中,由P2P端306中的客户端设备308执行的图像和视频处理包括在将用户图形表示插入到虚拟环境之前创建用户图形表示时使用的背景去除过程,该过程可以在接收到的媒体流上实时或几乎实时执行,也可以在例如照片上非实时执行。一个合适的计算机视觉库326的例子可以是OpenCV,它是一个主要为实时计算机视觉任务配置的编程函数库。
根据一个实施例,图4A和图4B分别显示了2D和3D视频会议空间。
参照图4A,2D视频会议空间402由多个图块404组成,如图块A-F,其中每个图块404表示已分配给特定用户的2D视频会议空间402中的一个位置。因此,当前公开的深度链接可能在被参与者点击后,直接将参与者带到相应分配的图块。
每个图块404还被分配了多个权限406,以使参与2D视频会议空间402中举办的视频会议会话的参与者能够利用这些权限。在一些实施例中,其中一些权限包括为特定的会议时段提供更大的图块和/或更高的分辨率,从而分配给该会议时段的相应参与者。在图4A的示例实施方案中,图块A比图块B-F要大,因此,像VIP或主讲人这样的参与者可能被分配到这样的图块上。图块F是第二大的图块,可以分配给助手、共同演讲者或联合主持人等人。剩下的图块B-E可以分配给没有特殊图块大小权限的视频会议会话的听众。作为另一种权限的示例,参与者可以被分配到靠近发言者的位置的图块上,在参与者可能多达数百或数千人的视频会议会话中,这可能非常有用。
参考图4B,3D视频会议空间408包括多个参与者用户的图形表示410,坐在一个会议桌412上,每个参与者用户的图形表示410坐在一个代表相应会议时段的3D座位414上。因此,目前公开的深度链接,一旦被参与者点击,将直接将参与者带到相应分配的座位。每个3D座位414还被分配了多个权限406,以使参与3D视频会议空间408中举办的视频会议会话的参与者能够利用这些权限406。在3D视频会议空间408中的另一个权限示例中,参与者可以被分配到靠近发言者的位置的3D座位414。
在一个示例应用中,一个共享办公空间可能有多个3D视频会议空间408,每个空间代表一个会议时段。多个参与者可能向管理员请求参与视频会议会话(例如,通过确认邀请或通过视频会议平台请求访问)。管理员可以向深度链接生成器发送深度链接生成请求,生成一个深度链接,其中包含为每个参与者分配的会议时段位置。深度链接生成器向每个参与者发送一个深度链接,在参与者通过点击深度链接进行验证后,通过相应地指示视频会议平台来启动视频会议会话。
深度链接生成器与视频会议平台通信,根据编码的会议时段信息将参与者分配到在共享办公空间内对应的视频会议时段。可以通过在视频会议会话中将其相应的图形表示或头像插入到可能位于会议时段的特定3D坐标中,在共享办公空间内由此“产生”参与者。会议时段可能包括可提供给每个参与者的一个或多个权限。深度链接生成器还可以配置为接收参与者列表,其中每个参与者包括一个或多个属性。每个权限还可以根据与相应参与者相关联的至少一个属性进行调整。因此,参与者可能根据被分配的会议时段,可替换地,会议时段的权限与其自身属性的组合而拥有特殊的权限。类似的例子也适用于在当前公开的视频会议平台上举办的虚拟事件应用,包括但不限于政治演讲、音乐会、戏剧表演、喜剧秀、会议、学习(如虚拟学校)、卡拉OK等。参与者可以相互进行多种互动,如下图5所示。
图5显示了根据一个实施例,用户可能根据其调整后的权限参与的互动500的示例。
这类互动500可能包括例如聊天502、屏幕共享504、主持人选项506、远程感应508、录制510、投票512、文档共享514、表情发送516、议程共享和编辑518或其他互动520。其他互动520可能包括例如虚拟拥抱、举手、握手、行走、添加内容、会议摘要准备、物体移动、投影、激光指向、游戏玩耍、购买和其他促进用户之间交流、竞争、合作、解决冲突的社交互动。下面将更详细地描述各种相互作用。例如,当视频会议空间是二维视频会议空间时,权限可进一步包括分配给特定会议时段208的增加的分辨率和/或图块大小。
聊天502可以打开一个聊天窗口,使用户能够发送和接收文本评论和即时资源。屏幕共享504可以实时共享用户的屏幕给其他参与者。主持人选项506被配置为为对话主持人提供进一步的选项,例如静音一个或多个用户,邀请或删除一个或多个用户,结束对话等。远程感应508可以查看用户的当前状态,例如离开、忙碌、可用、离线、在电话会议中或在会议中。用户状态可以通过图形用户界面手动更新,也可以通过基于从相机获取的数据的机器视觉算法自动更新。录制510可以记录对话的音频和/或视频。投票512可以为任何其他参与者发布的一个或多个提案提供投票。通过投票512,主持人或其他具有权限的参与者可以随时发起投票会话。对于每个参与者,主题和选项可以显示出来。根据投票互动的配置,在超时期结束或所有人都回答完毕后,结果可以显示给所有与会者。文档共享514可以与其他参与者共享以任何合适的格式存在的文档。这些文档也可以通过将它们存储在一个或多个云服务器计算机的持久存储器中来永久保存,并且可以与虚拟环境相关联,即虚拟通信发生的地方。表情符号516发送使参与者可以向其他参与者发送表情符号。议程共享和编辑518可以共享和编辑由任何参与者准备的议程。在某些实施方式中,主持人可以在会议前提前配置议程项目的清单。议程可以由主持人或其他具有权限的参与者随时提到前台。通过议程编辑选项,可以在达成共识时勾选项目,或者可以推迟处理。
其他互动520提供了一个非详尽列表,列出了根据虚拟环境垂直方向在虚拟环境中可能提供的一些互动。举手功能可以在虚拟通信或会议期间举手,以便主持人或其他具有此权限的参与者可以让用户发言。行走功能可以通过用户实时3D虚拟剪影在虚拟环境中移动。添加内容功能使用户可以向虚拟环境添加交互式应用程序、静态或交互式3D资源、动画或2D纹理。会议摘要准备使得能够自动准备虚拟会议的结果,并在会议结束时将这些结果分发给与会者。对象移动允许在虚拟环境中移动对象。投影可以将内容从与会者的屏幕投影到虚拟环境中可用的屏幕或墙上。激光指向可以使激光指向,以便在演示文稿上突出显示所需内容。玩游戏可以玩一个或多个游戏或其他类型的应用程序,这些应用程序可以在实时会话期间共享。购买允许玩家在会话中购买内容。这里没有提到的其他交互也可以根据虚拟环境平台的特定使用进行配置。
图6显示了一种生成安全深链接的方法600。方法600可以由计算机系统包括至少一个处理器和存储器的至少一个计算机实施,该存储器包含配置为执行方法600的步骤的指令。方法600从步骤602开始,通过存储在存储器中的深度链接生成器接收深度链接生成请求。深度链接生成请求可以由视频会议平台的管理员通过例如管理员客户端设备发送,或者可以在人们确认有兴趣加入对应的视频会议会话时由视频会议平台自动创建。在步骤604中,方法600通过接收视频会议时段列表继续,其中列表中的视频会议时段至少包括视频会议平台的视频会议空间内的位置。在步骤606中,方法600通过生成对应于(例如,对于视频会议时段是唯一的)的深度链接而结束,该深度链接包括至少表示视频会议时段在视频会议空间内的位置的信息。深度链接被配置为,在会议参与者激活时,将会议参与者引导到视频会议空间内的位置。表示位置的信息可以是,例如,特定会议时段的坐标、可用于查找特定会议时段坐标的数字或字母数字代码,或其他一些代表性信息。
在一些实施例中,方法600还包括接收参与者列表,其中参与者列表中的每个参与者包括链接到相应参与者的一个或多个属性。每个属性可以代表参与者的一个特定属性或特征,例如与用户资料有关的特征,包括用户识别资料、开支排名、购买偏好、会话期间的角色(例如:演讲者、主持人、听众、记录员等)诸如此类。例如,与会者列表可以由视频会议平台的管理员通过管理员客户端设备输入,也可以由视频会议平台在人们确认有兴趣加入相应的视频会议会话时自动创建。
在一些实施例中,方法600进一步包括通过根据一个或多个属性为每个参与者分配一个视频会议时段来创建会议时段协议。在一些实施例中,会议时段协议包括参与者列表以及视频会议空间中座位的顺序,以及每个会议时段的相应属性。深度链接生成器可以将会议时段协议编码到相应的深度链接中,并根据该会议时段协议创建与每个会议时段对应的深度链接。
在一些实施例中,方法600进一步包括向每个参与者客户端设备发送深度链接;接收参与者确认参与相应的视频会议会话的点击或其他激活深度链接的通知,确认参与者参加所述视频会议会话;触发视频会议会话;并根据会议时段协议将参与者分配到相应的视频会议时段。
图7根据一实施例示出用于为虚拟空间生成空间深度链接的系统700。
系统700包括服务器计算机系统的至少一台服务器计算机702,其包括至少一个处理器704和存储器706,所述存储器706存储由上述至少一个处理器704执行的指令,以实现深度链接生成器708,该生成器被配置为接收当视频会议会话的参与者710邀请受邀者712加入视频会议会话时触发的深度链接生成请求。深度链接生成器708进一步配置为检索视频会议会话上下文数据714和对应于参与者所参与的特定会话的会话通信实例716;以及生成包含所述视频会议会话上下文数据的编码表示714的深度链接。所述指令还实现连接到深度链接生成器708的视频会议平台718,其包括托管视频会议会话的至少一个视频会议空间720,其中至少一个视频会议空间720是3D虚拟环境。上下文数据714和会话通信实例716可能是视频会议平台718的一部分。3D虚拟环境可以包括如图1所述的特征,上下文数据714,视频会议平台718。
在一个实施例中,上下文数据714包括3D虚拟环境中参与者710的用户图形表示722的3D坐标和受邀者712所需3D坐标。在进一步的实施例中,受邀者712的所需3D坐标被限制在邀请受邀者712的参与者710周围的预定义半径内。在更进一步的实施例中,上下文数据714包括用户属性,包括用户资料数据,其包括用户识别数据、消费排名和购买偏好。
在一些实施例中,视频会议平台718被配置为将从由至少一个相机724捕获的实时数据源生成的对应参与者710的用户图形表示722插入到视频会议空间720的3D坐标位置中,并且将用户图形表示722与其组合。3D虚拟环境可以包括如参考图1描述的特性。在又一些实施例中,深度链接生成器708被配置为向受邀者客户端设备726发送深度链接;经由受邀者客户端设备726接收受邀者712点击深度链接或以其他方式激活深度链接的消息或其他通知,接受对视频会议会话的邀请;并且检索受邀者712的用户图形表示728并将其定位到3D虚拟环境内的精确3D坐标中,从而准许受邀者712访问视频会议会话。
例如,参与者710可以邀请受邀者712参与视频会议空间720内的视频会议会话。深度链接生成器708接收深度链接生成请求,并对视频会议会话上下文数据714和与参与者710参与的特定会话相对应的会话通信实例716进行编码,然后将该信息包括在由深度链接生成器708生成的深度链接中。上下文数据714包括参与者710在3D虚拟环境内的用户图形表示722的3D坐标和受邀者712的所需的3D坐标。参与者710可以通过用户图形表示722呈现在视频会议空间718内,所述用户图形表示722是由至少一个相机724捕获的实时馈送数据生成的,并且用户图形表示722由视频会议平台718插入到视频会议空间720的3D坐标中,并且将用户图形表示722与其组合。在一个例子中,参与者710以这样的方式邀请受邀者712,即深度链接包括一个3D坐标集,通过相应的受邀者用户图形表示726将受邀者712定位在接近参与者用户图形表示722的位置,因为受邀者712的所需3D坐标可能限制在邀请受邀者712的参与者710周围预定义的半径内。因此,参与者710可能最初访问视频会议空间718的3D虚拟环境的一个区域,并在找到感兴趣的区域后,可能决定邀请一个朋友一起来享受该区域的乐趣。为此,参与者710发送一个深度链接,将受邀者712直接带到参与者710的附近,例如,在参与者面前。
参与者710和受邀者712可以使用客户端设备726,客户端设备726包括例如计算机、耳机、移动电话、眼镜、透明屏幕、平板电脑和通常具有内置相机的输入设备,或者可以连接到相机并从所述相机接收数据馈送。客户端设备726可以通过网络730彼此连接并且连接到服务器702。
在实施例中,深度链接生成器708被配置为对每个深度链接编码到期因子,其中到期因子是基于会话的、基于时间的、或基于点击的、或其组合的。
图8A-8B示出了根据一个实施例的视频会议平台802,其包括具有公共虚拟环境806和多个专有虚拟环境808的视频会议空间804。
公共虚拟环境806是指在3D虚拟环境中,多个用户可用于加入公共视频会议会话的公共通信实例,在3D虚拟环境中,每个用户都可以看到彼此以及所有参与者可访问的公共虚拟3D区域。
在一种实施方式中,如图8A所示,公共虚拟环境806包括多个专有虚拟环境808,例如专有虚拟环境A-C,参与者可以公开或私下访问这些虚拟环境。在一种实施方式中,作为对参与者的请求的响应,专有虚拟环境808的主机可以通过深度链接生成器生成一个深度链接,以将受邀者定位到私人会话中的所需3D坐标中。
在图8B中,显示公共虚拟环境和多个专有虚拟环境的等距视图。
在参考图8B的示例中。商场810可以在表示商场810的公共3D虚拟环境中托管公共视频会议会话。通信实例是所有参与者可以使用的公开共享通信实例。商场810可以包括多个商店,诸如鞋店812和服装店814,每个商店包括其自己的通信实例,其可以是公共的或私有的。专有商店的公共通信实例指的是公共通信实例(例如商场810)的参与者可以通过切换公共通信实例来访问的通信实例。专有商店的私人通信实例指的是专有商店的参与者只能通过专有商店的主持人邀请才能访问的通信实例。
在一个实施例中,第三方专有虚拟环境的主机816经由对应的用户图形表示检索进入第三方私有虚拟环境的参与者的买方资料数据,并且向相应的参与者发送私人邀请,从而在私人通信实例中在主机和受邀参与者之间开启私人会话。
在图8B的示例中,参与者A和B已经加入了商场的公共通信实例,可以查看商场的不同区域,包括专有商店,并且可以相互查看和交流。在一个专有虚拟环境的公共通信实例的例子中,鞋店812的专有虚拟环境可以让商场的访客走进店铺,触发从公共商场通信实例切换到鞋店公共通信实例的通信实例切换。在鞋店812内,还可以有多个其他用户(例如用户C和用户D)访问鞋店812的3D虚拟环境,他们之间可以相互看到。在专有虚拟环境的私人通信实例的一个例子中,如果用户C或用户D满足一个或多个条件,店员816可以决定打开一个临时通信通道,创建店员816与用户C或用户D之间的私人通信实例。在某些实施例中,这些条件是基于参与者的上下文数据中包含的用户属性,例如用户识别数据、消费排名和购买偏好等。例如,店员816可能会发现用户C的消费排名适合特定的优惠,因此可能会与用户C打开一个临时通信通道来呈现这个优惠。用户C可能需要确认对这种通信的兴趣,例如通过点击并批准店员发送的深度链接,以便将参与者带到私人通信会话中。在一个服装店814的进一步示例中,对应的店员816可以根据服装店的访客(例如用户E和用户F)满足某些条件,如果这些用户一起购物(可以从用户属性中推断出来),则邀请这两个用户参与私人通信实例。
在一个实施例中,作为对一个用户提出请求的响应,店员816通过深度链接生成器生成一个深度链接给受邀者,该深度链接配置为将受邀者定位在专有商店内私人会话中的所需的3D坐标上。例如,服装店的店员816在用户E的请求下,可以生成一个深度链接邀请,并将其发送给用户E,用户E可以将邀请转发给朋友或熟人,邀请他们参加私人会话,以查看感兴趣的一个或多个产品。
图9显示了根据一实施例显示的会话上下文数据900。
会话上下文数据900可以包括用户属性902(包括坐标904)(包括用户3D坐标906)和受邀者所需坐标908。会话上下文数据900可能进一步包括用户资料数据910,包括ID数据912、支出排名914和购买偏好916。用户三维坐标906是指在视频会议空间的三维虚拟环境中,参与者的用户图形表示的实际纬度、经度和海拔高度。受邀者的所需的3D坐标908指的是参与者希望受邀者在访问视频会议会话时到达的3D坐标。例如,参与者可以提示受邀者在视频会议会话中出现在参与者的前面或旁边。ID数据912是一个特定的用户代码,可用于标识相应的参与者,并且可能指向多个用户个人数据,包括至少消费排名914和购买偏好916。消费排名是指根据用户在可能通过当前公开的视频会议平台购买的产品上的消费情况,向用户提供的排名,而购买偏好是指在当前公开的视频会议平台购买时可能反映用户购买偏好916的产品类别和特征。
图10示出了用于虚拟空间的生成空间深度链接的方法1000,其可以由包括至少一个处理器和存储器的计算机来实现,所述存储器包括被配置为实现多个步骤的指令。方法1000在步骤1002中通过接收(例如,通过存储在存储器中的深度链接生成器)深度链接生成请求开始,当托管在视频会议平台中的视频会议会话的参与者邀请受邀者加入视频会议会话时触发所述请求。在步骤1004中,该方法通过检索视频会议会话上下文数据和会话通信实例来继续。在步骤1006中,该方法通过生成一个包含视频会议会话上下文数据的深度链接(例如,以编码形式)来结束。视频会议平台连接到深度链接生成器,并且包括至少一个托管视频会议会话的视频会议空间,其中至少一个视频会议空间是一个3D虚拟环境。
图11示出了根据一个实施例的安全分布式深度链接系统。
所述分布式深度链接系统1100包括服务器计算机系统的至少一台服务器计算机1102,所述服务器计算机包括至少一个处理器1104和存储器1106,其存储由所述至少一个处理器1104执行的指令,当由所述至少一个处理器1104实现所述指令时,实现视频会议平台1008和深度链接管理器1110。深度链接管理器1110进而实现深度链接生成器1112,其被配置为接收深度链接生成请求,该深度链接生成请求可以例如由邀请方1116的客户端设备1114发送。可替代地,邀请者1116也可以通过将请求发送给管理员或主机客户端设备(未显示)来发送深度链接生成请求,管理员或主机客户端设备可以收集所有加入视频会议会话的请求,以便设置视频会议会话。
发送深度链接生成请求的邀请者1116可用于邀请者1116已经加入了一个视频会议会话并希望邀请受邀者1118参加该会话的实施例中。例如,邀请者可能已经加入了一个位于公共或私人通信实例的3D虚拟环境中的视频会议会话,发现虚拟环境中的内容可能是熟人(例如虚拟商店、会议信息、展览、招聘会等)感兴趣的,并随后发送深度链接生成请求,目的是生成一个深度链接,该链接可用于邀请受邀者1118加入相同的视频会议会话。可替换地,管理员可以通过收集来自多个用户的视频会议参与请求,然后相应地采用分布式深度链接系统1100发送深度链接,来准备深度链接生成请求。
深度链接生成器1108随后触发生成与视频会议平台108的视频会议会话内的虚拟环境的每个视频会议时段或三维空间相对应的深度链接。深度链接生成器1112将深度链接数据1120分割成至少两个数据片段,其中第一片段包括数据多数1122,并且其中第二数据片段包括其数据的少数1124。在一些实施例中,深度链接数据包括深度链接URL的字符。在一些实施例中,深度链接数据的多数代表深度链接数据1120的约90%至约99%之间,且数据的少数代表深度链接数据1120的约10%至约1%之间。在说明性场景中,具有1000个字符的深度链接URL可以分为两个片段,其中包括900个字符的第一部分和100个字符的第二部分;三个片段,其中包括900个字符的第一部分、50个字符的第二部分和50个字符的第三部分;或者其他数量的片段或片段之间的字符分布。作为另一替代方案,深度链接可以被拆分成片段,其中没有单个片段包含数据的大部分,诸如各自包括深度链接数据的50%部分的两个片段,或者分别具有深度链接数据的33%、33%和34%部分的三个片段。
深度链接管理器1110通过将深度链接的至少两个数据片段分布到至少两个不同的存储位置来进行,其中数据主体1122存储在第一存储位置(例如,服务器的存储器1106)和数据少数1124存储在至少一个第二存储位置1126中。深度链接生成器1112然后通过生成对发送到邀请方客户端设备1114的深度链接组装过程1128进行编码的链接来继续。
深度链接数据1120的虚拟化使得可以对深度链接数据1120进行分段处理,这可以由深度链接管理器1110来实现。虚拟化机制使得可以将深度链接数据1120的不同部分存储在虚拟机(VMs)中,而无需控制这些虚拟机在物理上的分配位置。这些虚拟机可以分配给一个或多个物理服务器,这些服务器可以是云服务器、云端服务器或边缘服务器组成的更大的服务器网络的一部分。分段将存储器中的数据分割成许多不相邻的片段。文件中的数据可以以块为单位进行管理。最初,文件块可以连续存储在私有用户存储区中的存储器中。然而,在对数据进行分段时,一些数据块可以被分离并分散到不同的存储位置,例如一个或多个数据收集服务器中。由于当前公开的存储是虚拟化的,数据片段可以存储在虚拟存储中,这意味着在获取和组装数据时,数据片段所存储的物理存储设备对系统来说并不重要。
经验证后,深度链接管理器1110进一步配置为从第二存储位置1126检索包含深度链接的数据少数部分1124的第二数据片段,并从至少一个第一存储位置检索包含深度链接的数据多数部分1122的第一数据片段。这样的验证可以以邀请者1116点击一个链接的形式进行,该链接被配置为在激活时启动深度链接组装过程1128,从数据片段中组装深度链接。这样的链接可以被称为组装链接。所述组装链接可以包含用于促进某种形式的身份验证的信息(例如,生物识别扫描,包括面部扫描、指纹扫描、语音识别等;密码;个人识别号码(PIN);或其组合)。深度链接管理器1110进一步配置为组装深度链接数据1120的少数部分1124和多数部分1122,并授予受邀者1118进入视频会议会话。然后,组装的深度链接可以发送给受邀者1118,受邀者在点击链接后可以访问视频会议会话。在一些实施例中,深度链接管理器1110可以直接将深度链接发送给受邀者1118,或者通过邀请者1116间接发送。然后,受邀者可以点击链接,并通过相应的受邀者客户端设备1130访问视频会议会话。在一些实施例中,将深度链接数据1120存储在两个或更多不同的位置,并在经过邀请者1116的验证后触发深度链接组装过程,可以增加深度链接的安全性,因为用户没有正确的信息,就无法验证深度链接的组装过程。
在一些实施例中,当受邀者1118点击深度链接后,视频会议平台1108将由至少一个相机捕获的实时数据源生成的受邀者1118的用户图形表示插入到视频会议平台1108的三维虚拟环境的三维坐标位置中,并将用户图形表示与之结合。在进一步地实施例中,视频会议会话是在公共通信实例中托管在公共3D虚拟环境中的公共视频会议会话。例如,一旦受邀者1118点击了一个组装好的深度链接,受邀者可能会将他或她的用户图形表示插入图8B所示的虚拟商场的3D坐标中,例如在靠近邀请者1116的位置。还可以创建该深度链接以将受邀者1118邀请到通过私有通信实例访问的私有视频会议会话中的视频会议空间。
在一些实施例中,至少一个第二存储位置1126包括一个或多个专用用户服务器或客户端设备本地存储器。一个或多个私有用户服务器可以位于数据中心中,该数据中心用于存储数据片段和托管用户应用程序的目的,供用户的私有使用。在其他实施例中,一个或多个私有用户存储区域可以配置在用户设备内,例如移动设备、个人计算机、游戏控制台、媒体中心、头戴式显示器和透明设备(例如,智能隐形眼镜)。
在其他实施例中,至少一个第二存储位置1126被配置在分布式账本网络内。在一些实施例中,至少一个第一存储位置是至少一个服务器计算机的存储器1106。分布式账本是一个可信的数据库,可以作为价值存储和交换的记录。分布式账本提供了一个分散的交易网络,包括在不同地点和人员之间共享的信息,消除了对中央机构的需求。分布式账本中的存储可以包括使用加密,以便保持深度链接数据片段安全地存储在不同的存储区域中。在一些实施例中,通过对称或非对称密钥加密机制来加密深度链接数据片段。在非对称密钥加密的情况下,数据片段由深度链接管理器1110通过网络1132发送到邀请方客户端设备1114的公钥非对称地加密,并且由深度链接管理器1110经由存储在服务器1102的存储器1106中的深度链接管理器1110的私钥解密。在其他实施例中,数据片段由邀请方客户端设备1114的私钥对称加密,并且由深度链接管理器1110经由相同的私钥解密。
在一些实施例中,深度链接发生器1112进一步配置为在深度链接中编码到期因子,其中到期因子是基于会话、基于时间或基于单击的到期因子之一或其组合。
在一些实施例中,视频会议平台还被配置为接收视频会议时段列表,其中每个视频会议时段至少包括视频会议空间内的位置;接收参与者列表,其中每个参与者包括链接到对应参与者的一个或多个属性;通过基于所述一个或多个属性向每个参与者分配视频会议时段来创建会议时段协议;向每个视频会议时段提供一个或多个权限;并且向对应的视频会议时段的参与者提供一个或多个权限。
图12示出了根据一个实施例的安全分布式深度链接方法1200。
方法1200可以在步骤1202中通过接收(例如,通过存储在至少一个服务器计算机的存储器中的深度链接生成器)深度链接生成请求开始。深度链接生成器可以是存储在存储器中的深度链接管理器的一部分。存储器还可以进一步存储可以由用户经由对应的客户端设备通过网络访问的视频会议平台。
在步骤1204中,方法1200通过生成深度链接继续,所述深度链接与视频会议平台的视频会议会话的每个视频会议时段相对应(例如,对于每个视频会议时段是唯一的),每个深度链接至少包括(例如以编码形式)视频会议空间中视频会议时段的位置。在步骤1206中,方法1200通过将深度链接分割成至少两个数据片段来进行,其中至少一个数据片段包括深度链接的大部分数据,并且其中至少另一个数据碎片包括其少数数据。在一些实施例中,大部分深度链接数据表示深度链接数据的约99%至约99.99%之间,少数数据表示深度链接数据的约1%至约0.01%之间。
在步骤1208中,该方法通过将深度链接的至少两个数据片段分发到至少两个不同的存储位置继续,其中数据的大部分存储在至少一个第一存储位置的存储器中,而数据的少部分存储在至少一个第二存储位置的存储器中。在步骤1210中,该方法1200通过生成一个组装链接继续,当激活时,启动深度链接组装过程;在步骤1212中,该方法通过将组装链接发送到邀请者客户端设备来结束。
在一些实施例中,至少一个第二存储位置包括一个或多个用户服务器或客户端设备的本地存储器。在其他实施例中,至少一个第二存储位置配置在分布式账本网络中。在一些实施例中,至少一个第一存储位置是至少一个服务器计算机的存储器。
在一些实施例中,方法1200还包括在深度链接中编码一个过期因子,其中过期因子是基于会话、时间或点击的过期因素之一,或者它们的组合。
图13显示了一种深度链接组装方法1300,根据一种实施例。方法1300的步骤可能发生在图12的方法1200之后。方法1300可以从步骤1302开始,通过从参与者验证后从第二存储位置检索深度链接的至少一个少数数据片段(第二数据片段)和从至少一个第一存储位置检索深度链接的大部分(第一数据片段)。
这样的验证可以采用邀请者点击组装链接来启动深度链接组装过程,并进行某种形式的身份验证(例如生物识别扫描、密码、个人识别号码(PIN)或其组合)。方法1300在步骤1304中通过组装深度链接的少数和多数部分继续。在步骤1306中,方法1300通过发送组装好的深度链接来授予被邀请者访问视频会议会话的权限而结束。
在一些实施例中,方法1300还包括将由至少一个相机捕获的实时数据流生成的受邀者的用户图形表示插入到3D虚拟环境的3D坐标中,并将用户图形表示与其结合。在进一步的实施例中,3D虚拟环境可以是公共通信实例中的,或者是通过私人通信实例访问的私人视频会议会话。
虽然已经在附图中描述和展示了某些实施例,但应理解这些实施例仅仅是对广泛发明的示例性描述,而不是对其限制。发明并不限于所示和描述的具体结构和设置,因为对本领域技术人员来说可能会出现各种其他修改。因此,本描述应被视为示例性而非具限制性的。

Claims (20)

1.一种用于生成安全深度链接的方法,由包含至少一个处理器和存储器的计算机实现,所述方法包括:
接收深度链接生成请求;
接收视频会议时段列表,其中视频会议时段列表中的视频会议时段包括存储在存储器中的视频会议平台的视频会议空间内的位置;和
生成对应于所述视频会议时段的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置。
2.根据权利要求1所述的方法,还包括:
接收包括多个参与者的参与者列表,其中所述多个参与者中的每一个具有一个或多个相关联的属性;和
根据各参与者的一个或多个相关属性,为多个参与者的每个分配一个视频会议时段,从而创建一个会议时段协议。
3.根据权利要求1所述的方法,还包括:
向参与者的客户端设备发送深度链接;
接收来自参与者客户端设备的消息,确认第一参与者使用深度链接中的信息参与相应视频会议会话;
为所述第一参与者触发所述对应的视频会议会话;和
根据会议时段协议将第一参与者分配到相应的视频会议时段。
4.根据权利要求3所述的方法,进一步包括,在触发相应的视频会议会话之后,将第一个参与者放置在虚拟等候室中,根据调整后的权限调整等候室内一个或多个其他参与者的位置。
5.根据权利要求1所述的方法,其中,所述视频会议时段还包括一项或多项权限。
6.根据权利要求5所述的方法,进一步包括向所述第一参与者提供所述一项或多项权限,其中所述一项或多项权限中的每一项权限是基于与所述第一参与者相关联的一个或多个属性来调整的。
7.根据权利要求1所述的方法,其中,生成所述深度链接包括:
接收包括多个参与者的参与者列表,所述多个参与者包括所述第一参与者,其中所述多个参与者中的每一个具有一个或多个相关联的属性;
基于所述第一参与者的相关联的属性来选择所述第一参与者;
生成具有来自第一参与者的信息的身份认证链接,该信息被编码用于身份认证目的;
将所述身份认证链接发布到所述参与者列表;
从参与者客户端设备接收包括所述身份认证链接中的信息的消息;
认证第一个参与者;以及
在第一个参与者的身份有效的情况下,生成并向第一个参与者发送深度链接。
8.根据权利要求1所述的方法,其中,所述视频会议空间是2D视频会议环境,并且每个视频会议时段表示其图块。
9.根据权利要求1所述方法,其中视频会议空间是3D虚拟环境,每个视频会议时段表示3D虚拟环境中的包括3D坐标的位置。
10.根据权利要求9所述方法,进一步包括:
从至少一个相机接收来自至少一个客户端设备的至少一个用户的实时数据流;
从所述实时数据流生成对应于所述第一参与者的用户图形表示;和
接收来自第一参与者在深度链接中的信息之后,将对应于第一参与者的用户图形表示插入到3D虚拟环境的位置中,并将用户图形表示与3D虚拟环境图形组合。
11.一种用于生成安全深度链接的系统,该系统包括:
至少一台服务器计算机,包括至少一个处理器和存储器,所述存储器包括指令,所述指令配置成使所述至少一台服务器计算机:
接收深度链接生成请求;
接收视频会议时段列表,其中所述视频会议时段列表中的视频会议时段包括视频会议空间内的位置;和
生成与所述视频会议时段相对应的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置。
12.根据权利要求11所述的系统,其中所述指令被进一步配置以使至少一台服务器计算机:
接收包括多个参与者的参与者列表,其中所述多个参与者中的每个具有一个或多个相关联的属性;
通过基于各个参与者的所述一个或多个相关联的属性向所述多个参与者中的每一个分配视频会议时段来创建会议时段协议。
13.根据权利要求11所述的系统,其中,所述指令还被配置为使所述至少一个服务器计算机:
将所述深度链接发送到参与者客户端设备;
从参与者客户端设备接收消息,确认第一参与者使用深度链接中的信息,参与相应的视频会议会话;
触发所述第一参与者的视频会议会话;和
基于会议时段协议将所述第一参与者分配给相应的视频会议时段。
14.根据权利要求11所述的系统,其中,所述指令还被配置为使所述至少一个服务器计算机触发所述第一参与者的视频会议会话;将所述第一参与者放置在虚拟等候室中;以及基于调整的权限来调整虚拟等候室内的一个或多个其他参与者的位置。
15.根据权利要求12所述的系统,其中,所述视频会议时段还包括提供给第一参与者的一项或多项权限。
16.根据权利要求15所述的系统,其中分配给相应的视频会议时段的一项或多项权限的每一项都是根据与第一参与者相关的一项或多项属性进行调整。
17.根据权利要求12所述的系统,其中所述指令被进一步配置以使至少一台服务器计算机:
接收包括多个参与者的参与者列表,其中所述多个参与者中的每一个具有一个或多个相关的属性;
基于所述第一参与者的相关的属性来选择所述第一参与者;
生成身份认证链接,其具有来自第一参与者的信息,所述信息被编码用于身份验证目的;
将所述身份认证链接发布到所述参与者列表;
从参与者客户端设备接收包括身份验证链接中的信息的消息;
认证第一个参与者;和
在第一个参与者的身份有效的情况下,生成并发送深度链接给第一个参与者。
18.根据权利要求12所述系统,其中视频会议空间为二维视频会议环境,每个视频会议时段表示其图块,或其中视频会议空间为三维虚拟环境,每个视频会议时段表示三维虚拟环境中包括三维坐标的位置。
19.根据权利要求12所述的系统,其中深度链接进一步编码过期因子,其中过期因子是基于会话、基于时间或基于点击,或它们的组合。
20.至少一种非暂时性计算机可读介质,具有存储在其上的指令,所述指令配置成使包括一个处理器和存储器的至少一台服务器计算机执行以下步骤包括:
接收深度链接生成请求;
接收视频会议时段列表,其中视频会议时段列表中的视频会议时段包括视频会议平台的视频会议空间内的位置;
生成对应于所述视频会议时段的深度链接,其中所述深度链接被配置为在激活时将第一参与者引导到所述视频会议空间内的所述视频会议时段的位置;
接收包括多个参与者的参与者列表,其中多个参与者中的每一个具有一个或多个相关属性;
通过基于各个参与者的一个或多个相关属性为多个参与者中的每一个分配视频会议时段来创建会议时段协议;
通过网络向参与者客户端设备发送深度链接;
通过网络接收来自参与者客户端设备的消息,确认第一参与者使用深度链接中的信息参与相应的视频会议会话;
为第一参与者触发相应的视频会议会话;和
根据会议时段协议将第一参与者分配到相应的视频会议时段。
CN202310968383.0A 2022-08-03 2023-08-03 通过特定的安全深度链接的视频会议时段 Pending CN117528007A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/880,543 US20240048599A1 (en) 2022-08-03 2022-08-03 Videoconferencing meeting slots via specific secure deep links
US17/880,543 2022-08-03

Publications (1)

Publication Number Publication Date
CN117528007A true CN117528007A (zh) 2024-02-06

Family

ID=87556435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310968383.0A Pending CN117528007A (zh) 2022-08-03 2023-08-03 通过特定的安全深度链接的视频会议时段

Country Status (5)

Country Link
US (1) US20240048599A1 (zh)
EP (1) EP4319051A1 (zh)
JP (1) JP2024022537A (zh)
KR (1) KR20240019043A (zh)
CN (1) CN117528007A (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060184886A1 (en) * 1999-12-22 2006-08-17 Urbanpixel Inc. Spatial chat in a multiple browser environment
US9065874B2 (en) * 2009-01-15 2015-06-23 Social Communications Company Persistent network resource and virtual area associations for realtime collaboration
US8855285B1 (en) * 2013-03-14 2014-10-07 Speek Inc. Systems and methods for conference calling using personal URL
US20160247123A1 (en) * 2015-02-24 2016-08-25 Cisco Technology, Inc. Converting Scheduling Information into Different Conferencing Domains
EP3706060A1 (en) * 2016-06-11 2020-09-09 Apple Inc. Device, method, and graphical user interface for meeting space management and interaction
US11308228B1 (en) * 2019-10-24 2022-04-19 Whatsapp Inc. Providing access for online content via secured URL
US11375157B2 (en) * 2020-04-24 2022-06-28 Whatsapp Llc Cross-application generating and facilitating of video rooms
WO2021220254A1 (en) * 2020-05-01 2021-11-04 Clickto Ltd A system, platform and method for transfering users between virtual rooms
US11238660B2 (en) * 2020-06-10 2022-02-01 Snap Inc. Dynamic augmented reality components
US20230092103A1 (en) * 2021-09-21 2023-03-23 Meta Platforms Technologies, Llc Content linking for artificial reality environments

Also Published As

Publication number Publication date
JP2024022537A (ja) 2024-02-16
US20240048599A1 (en) 2024-02-08
EP4319051A1 (en) 2024-02-07
KR20240019043A (ko) 2024-02-14

Similar Documents

Publication Publication Date Title
JP7464989B2 (ja) 仮想環境での相互作用を可能にするシステム及び方法
JP7340281B2 (ja) 仮想環境内でのアプリケーションの配信システム及び方法
EP3962079A1 (en) System and method enabling interactions in virtual environments with virtual presence
EP3961496A1 (en) Graphical representation-based user authentication system and method
EP3962076B1 (en) System and method for virtually broadcasting from within a virtual environment
EP3961396A1 (en) System and method to provision cloud computing-based virtual computing resources within a virtual environment
EP3962078A1 (en) Ad hoc virtual communication between approaching user graphical representations
US11943265B2 (en) Videoconferencing meeting slots via specific secure deep links
US20240048599A1 (en) Videoconferencing meeting slots via specific secure deep links
EP4319052A1 (en) Videoconferencing meeting slots via specific secure deep links
US20240179198A1 (en) Videoconferencing meeting slots via specific secure deep links
CN117528008A (zh) 通过特定的安全深度链接的视频会议时段
CN117528009A (zh) 通过特定的安全深度链接的视频会议时段
JP7492746B2 (ja) ユーザグラフィック表現間のアドホック仮想通信
JP2024043574A (ja) 仮想イベントのデジタル自動化

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication