CN106027592A - 用于在多个端点之间共享实时内容的技术 - Google Patents

用于在多个端点之间共享实时内容的技术 Download PDF

Info

Publication number
CN106027592A
CN106027592A CN201610190716.1A CN201610190716A CN106027592A CN 106027592 A CN106027592 A CN 106027592A CN 201610190716 A CN201610190716 A CN 201610190716A CN 106027592 A CN106027592 A CN 106027592A
Authority
CN
China
Prior art keywords
display
notice
class
work space
content stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610190716.1A
Other languages
English (en)
Inventor
亚当·卡佐特
布莱顿·费雪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Prysm Inc
Original Assignee
Prysm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Prysm Inc filed Critical Prysm Inc
Publication of CN106027592A publication Critical patent/CN106027592A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1083In-session procedures
    • H04L65/1089In-session procedures by adding media; by removing media
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/756Media network packet handling adapting media to device capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/765Media network packet handling intermediate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/0024Services and arrangements where telephone services are combined with data services
    • H04M7/0027Collaboration services where a computer is used for data transfer and the telephone is used for telephonic communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

公开了用于在多个端点之间共享实时内容的技术。耦连到显示器的客户端应用生成共享工作空间,所述共享工作空间包括来源于本地用户设备的内容流以及来源于远程设备的另一内容流。客户端应用配置为检测用户设备何时本地耦连,并配置为从该设备接收内容流。客户端应用确定另一内容流何时可用,并随后经由流媒体基础设施访问该内容流。客户端应用随后通过将两个内容流渲染到显示器来生成共享工作空间。

Description

用于在多个端点之间共享实时内容的技术
相关申请的交叉引用
本申请是在2013年2月21日提交的、具有序列号13/773 015的、题为“System,Method,and Computer-Readable Medium for InteractiveCollaboration”的美国专利申请的继续部分。该相关申请的主题在此通过引用并入本文。
技术领域
本发明的实施例总地涉及内容共享,并且更具体地,涉及用于在多个端点之间共享实时内容的技术。
背景技术
常规的屏幕共享应用允许地理位置不同的参与方跨越远距离相互共享显示数据。典型地,各方在本地计算机上执行屏幕共享应用的实例。参与方之一被指定为“领导者”。领导者承担策划共享的具体显示数据的责任。例如,被指定为领导者的第一方能够将显示数据共享给第二方。第二方随后将在本地查看该显示数据。一般情况下,当一方被指定为领导者时,该方保持对屏幕共享应用的控制,直到明确放弃对另一方的控制。
上述方法的一个缺点是“领导者”的指定必须手动从一方传递到另一方,以允许另一方共享显示数据。因此,如果第一方当前为领导者,第二方希望共享显示数据,第二方不能这样做直到第一方指定第二方为领导者。该过程极度复杂并且通常妨碍两方之间的有效通信。
如前所述,需要用于在地理位置分开的参与方之间共享显示数据以及其他类型数据的有效方法。
发明内容
本发明的一个实施例阐述一种用于跨多个显示器共享内容的计算机实现的方法,包括:从第一用户设备接收第一流,从流服务器访问第二流,其中所述第二流来源于第二用户设备,生成包括所述第一流和所述第二流的第一工作空间,以及促使所述第一工作空间连同所述第一流和所述第二流一起显示在第一显示器上。
本发明的至少一个优点在于,用户可通过将用户设备耦连到客户端应用而简单地参与到共享工作空间中。因此,用户无需为共享内容流而请求领导者身份或手动配置任何设置。
附图说明
因此,本发明的上述所引用的特征能够被详细理解的方式、本发明的以上简要概述的更具体描述,可以参照实施例而获得,实施例中的一些示出在附图中。然而,值得注意的是,附图仅示出本发明的典型实施例,并且因此并非视为限制其范围,对于本发明可以许可其他同等效果的实施例。
图1是配置为实现本发明的一个或多个方面的显示系统的框图;
图2是配置为实现本发明的一个或多个方面的显示块的示意图;
图3是根据本发明的一个实施例的、示出图1的显示系统的操作的框图;
图4是根据本发明的一个实施例的、配置为在显示器之间共享内容流的协作系统的概念图;
图5是根据本发明的一个实施例的、图4的协作系统的更详细的框图;
图6是根据本发明的一个实施例的、图5的流媒体(streaming)基础设施的更详细的框图;
图7是根据本发明的一个实施例的、图5的消息传送(messaging)基础设施的更详细的框图;
图8阐述根据本发明的一个实施例的、用于跨显示系统的一个或多个实例共享内容流的方法步骤的流程图;以及
图9阐述根据本发明的一个实施例的、用于显示包括从显示系统的一个或多个实例所接收的内容流的共享工作空间的方法步骤的流程图。
为清楚起见,在适用的情况下,一直使用相同的参考标号以指定在图之间公用的相同元件。此外,一直使用括号标签连同数字标签以指定类似组件的不同实例。可以预计的是,在没有进一步陈述的情况下,一个实施例的特征可包含在其他实施例中。
具体实施方式
图1是配置为实现本发明的一个或多个方面的显示系统100的框图。如图所示,显示系统100包括但不限于中央控制器110和显示器120。在一些实施例中,显示器120是包括多个显示块的显示墙。中央控制器110从装置140或从信息网络或其他数据路由设备接收数字图像内容101,并将所述输入转换为图像数据信号102。因此,数字图像内容101可采用装置140在本地生成,或从某其他位置生成。例如,当显示系统100用于远程会议时,数字图像内容101可经由任何技术上可行的、允许数据交换的、有线或无线的通信或信息网络而被接收,诸如广域网(WAN)、局域网(LAN)、无线(WiFi)网和/或互联网等。
中央控制器110包括处理器单元111和存储器112。处理器单元111可以是实现为中央处理单元(CPU)、图形处理单元(GPU)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)的任何合适的处理器、任何其他类型的处理单元、或不同处理单元的组合,诸如配置为与GPU协力操作的CPU。一般地,处理器单元111可以是任何技术上可行的硬件单元,其能够处理数据和/或执行软件应用以促进显示系统100的操作,包括软件应用151、渲染引擎152、生成(spawning)模块153、以及触摸模块154。在操作期间,软件应用151、渲染引擎152、生成模块153、以及触摸模块154可以驻留在存储器112中,并且下面结合图3进行描述。可替代地或者附加地,软件应用151还可驻留在装置140中。在一些实施例中,151-154中的一个或多个可实现在固件中,在中央控制器110中和/或在显示系统100的其他组件中。
存储器112可以包括易失性存储器诸如随机存取存储器(RAM)模块,以及非易失性存储器诸如闪存单元、只读存储器(ROM)、或磁盘或光盘驱动、或任何其他类型的存储器单元、或其组合。存储器112配置为存储促进显示系统100的操作的任何软件程序、操作系统、驱动程序等,包括软件应用151、渲染引擎152、生成模块153、以及触摸模块154。
显示器120可以包括显示面或任何技术上可行的显示设备或系统类型的面,包括但不限于发光二极管(LED)显示器、数字光(DLP)或其他投影显示器、液晶显示器(LCD)、有机发光二极管显示器(OLED)、激光荧光显示器(LPD)和/或立体3D显示器、所有布置为单一独立显示器、头戴式显示器或为单屏或多屏块阵列显示器的显示面。显示器的大小可以从较小的手持式或头戴式显示设备延伸到整墙显示器。在图1所示出的示例中,显示器120包括多个显示光引擎和以2x2阵列安装的屏幕块130。多个电子显示设备的其他配置和阵列尺寸例如1x4、2x3、5x6等也落在本发明的范围内。
在操作中,显示器120显示从控制器110输出的图像数据信号102。对于分块显示器,如图1中所示出的,图像数据信号102适当地分布在显示块130之间,这样相干图像显示在显示器120的显示面121上。显示面121典型地包括显示块130的组合显示面。此外,显示器120包括延伸到显示块130的部分或全部面区域的触敏面131。在一个实施例中,触敏面131通过检测用户与一个或多个光束之间的干扰来感应触摸,所述光束包括例如红外激光束。在其他实施例中,触敏面131可依赖电容式触摸技术包括但不限于面电容、投影电容或互电容,以及光学技术、基于声波的触摸检测、电阻式触摸方法等等。触敏面131使用户能够使用触摸手势与显示在墙上的资源(asset)进行交互,所述触摸手势包括轻敲、拖动、滑动和挤压。这些触摸手势可以替换或补充诸如外部键盘或鼠标的典型外围I/O设备的使用,但是触敏面131也可接收来自这类设备的输入。
在本公开的上下文中,“资源”可指代能够在显示器诸如显示器120等上显示的任何交互式可渲染内容。这类交互式可渲染内容通常来源于一个或多个内容流,包括连续帧视频数据、相对应的音频数据、元数据以及潜在地其他类型的数据。一般地,资源可在动态可调整演示窗口内显示。为简单起见,在本文中,资源和相对应的动态可调整演示窗口通常指代单个实体,即“资源”。资源可包括图像、视频、网页浏览器、文本、膝上型电脑屏幕的效果图、演示幻灯片、软件应用的任何其他图形用户界面(GUI)等。资源通常包括至少一个由软件应用所生成的显示输出,诸如软件应用的GUI。在一个实施例中,显示输出是内容流的一部分。此外,资源通常配置为经由协作客户端系统140的手势敏感显示面接收一个或多个软件应用输入,即经由手势敏感显示面所接收的输入由资源接收并视为用于与资源相关联的软件应用的输入。因此,与固定图像不同,资源是动态元素,其使能与和资源相关联的软件应用的交互,例如用于资源的操作。例如,资源可包括与软件应用相关联并能向软件应用提供输入的选择按钮、下拉菜单、控制滑块等。
如本文也涉及的,“工作空间”是数字画布,在其上与其相关联的资源和相对应的内容流显示在显示器120适当的动态演示窗口内。典型地,工作空间与显示器120的所有潜在渲染空间相对应,因此仅单个工作空间可显示在其面上。然而,在一些实施例中,多个工作空间可同时显示在显示器120上,诸如当工作空间不与整个显示面相对应时。与工作空间相关联的资源和与那些内容流相对应的内容流典型地显示在适当演示窗口内的工作空间中,所述演示窗口具有用户可调整的显示高度、宽度和位置。一般地,工作空间与特定项目(project)相关联,其典型地是多个工作空间的集合。
在一个实施例中,服务器存储显示系统100可访问的与具体资源、工作空间和/或项目相关联的元数据。例如,这类元数据可包括哪些资源与特定工作空间相关联、哪些工作空间与特定项目相关联、用于每个工作空间的各种设置的状态、对具体资源做出的注释等。在一些实施例中,资源元数据还可包括与资源相关联的演示窗口的大小以及演示窗口在特定工作空间中的定位,以及更普遍地,其他类型的显示属性。在一些实施例中,资源大小和位置元数据可计算为无量纲的元数据。在这类实施例中,资源大小可按照纵横比,以及资源定位按照沿相关联的工作空间的x和y轴的百分比位置。这样,当显示器120的实例不是统一大小时,共享工作空间内的每个资源仍可被定位和设置大小,成比例于其将在其中显示的显示器120的具体实例。当多个显示系统100各自显示类似的共享工作空间时,每个这类显示系统100可基于相对应的元数据配置该共享空间的本地版本。
触敏面131可以是“多触摸”面,其可识别显示器120上的多于一个的接触点,这使能复杂手势的识别,诸如两指或三指滑动、挤压手势和旋转手势、以及多用户两手、四手、六手等触摸或手势。这样,一个或多个用户可使用触摸手势对显示器120上的资源进行交互,所述触摸手势诸如拖动以对屏幕上的资源重新定位、轻敲资源以显示菜单选项、滑动以翻阅资源、或使用挤压手势以调整资源大小。多个用户还可同时对屏幕上的资源进行交互。此外,资源的示例包括应用环境、图像、视频、网页浏览器、文本、膝上型屏幕的镜像或效果图、演示幻灯片、内容流等。触摸信号103从与显示器120相关联的触摸板发送到中央控制器110用于处理和解释。
应该理解的是,本文所示出的系统是示例性的,变形和修改是可能的。例如,软件应用151、渲染引擎152、生成模块153以及触摸模块154可驻留在中央控制器110之外。
图2是配置为实现本发明的一个或多个方面的显示块130的示意图。图2仅是示范性配置,并且在可替代的实施例中可实施任何其他技术上可行的适于形成显示器120的显示设备。如图所示的,显示块130包括但不限于显示屏区域210、光引擎模块220、以及控制系统230。显示屏区域210配置为显示对观看者可见的数字图像。
光引擎模块220配置为向显示屏区域210的扫描面上发射一个或多个扫描束(例如激光束221)。显示屏区域210可包括荧光层(未示出),所述荧光层在由一个或多个激光束221导出的光能激发时发出荧光,从而产生可见光。光引擎模块220配置为发射一个或多个激光束221,其以脉冲宽度和脉冲幅度调制的方式横扫显示屏区域210的荧光层,以产生描绘图像的可见光。与图像相关联的可见光通过显示屏区域210的图像表面散发到观看者。
控制系统230配置为传送命令数据到光引擎模块220,以使光引擎模块220向扫描面215发射激光束221。控制系统230控制并调制由光引擎模块220所发射的激光束221,这样将激光束调制为携带将在扫描面215上显示的图像。控制系统可以包括针对不同颜色信道生成数字图像信号的数字图像处理器,以及产生携带数字图像信号的激光控制信号的激光驱动器电路。激光控制信号随后用于调制激光,例如调制激光二极管的电流。
在2014年10月16日公布的、题为“Self Aligning Imager Array”的2014/0307230号美国专利公开中,以及在2014年12月11日公布的、题为“Servo Feedback Control Based on Invisible Scanning Servo Beam inScanning Beam Display Systems with Light-Emitting Screens”的2014/0362300号美国专利公开中,可以找到适于配置为显示系统100中显示块130的显示设备的更详细描述。
图3是根据本发明的一个实施例的、示出图1的显示系统的操作的框图。如图所示的,图3包括但不限于软件应用151、渲染引擎152、生成模块153以及触摸模块154。软件应用151生成将在显示器120上显示的资源,包括来源于内容流的那些资源。软件应用151的示例可包括幻灯片放映演示软件、文字处理器软件、协作设计软件、编辑软件(例如图像、文字、图形编辑器)、视频播放软件、远程会议应用、以及远程桌面客户端。
软件应用151将数字图像内容101发送到渲染引擎152。渲染引擎152将图像数据信号102发送到显示器120,并负责确定在显示器120的每个像素上显示的内容。渲染引擎152还通过追踪所显示的资源以及相对应的生成每个资源的软件应用来管理所显示的内容。
如下面结合图4-9更详细描述的,软件应用151包括客户端应用。其中所包括的客户端应用配置为使能用于在显示器120上显示的共享工作空间的生成。共享工作空间可包括从本地耦连到显示系统100的计算设备所接收的内容流、或从计算设备本地耦连到的一个或多个其他显示系统所接收的内容流。那些内容流可被渲染到相对应的资源内或渲染为相对应的资源的一部分。前述客户端应用因此允许多个显示系统显示共享工作空间,所述共享工作空间包括与许多不同计算设备相关联的内容流。
图4是根据本发明的一个实施例的、配置为在显示器之间共享内容流的协作系统的概念图。如图所示的,协作系统400包括经由通信基础设施410耦连在一起的显示器120(A)和120(B)。在一个实施例中,显示器120(A)和/或120(B)中的每一个表示图1的显示器120的不同实例。
显示器120(A)经由数据连接430(A)耦连到用户设备420(A)。在一个实施例中,显示器120(A)形成图1的显示系统100的总体实例的一部分,用户设备420(A)可耦连到显示器120(A)。用户设备420(A)可以是计算设备、视频捕获设备、或配置为生成用于显示的内容流的任何其他类型的硬件。在图4中,用户设备420(A)生成并显示内容流A。在一个实施例中,内容流A是反映用户设备420(A)的显示输出的视频内容流。当耦连到显示器120(A)时,用户设备420(A)还经由数据连接430(A)将内容流A输出到显示器120(A)。这样做,用户设备420(A)可执行软件应用以协调经由数据连接430(A)与显示器120(A)的通信。数据连接430(A)可以是高清晰度多媒体接口(HDMI)电缆、模拟连接、无线连接、或任何其他技术上可行类型的数据连接。响应于对内容流A的接收,显示器120(A)显示内容流A,如图所示的。
与显示器120(A)类似,显示器120(B)经由数据连接430(B)耦连到用户设备420(B)。在一个实施例中,显示器120(B)形成图1的显示系统100的总体实例的一部分,用户设备420(B)可耦连到显示器120(B)。用户设备420(B)可以是计算设备、视频捕获设备、或配置为生成用于显示的内容流的任何其他类型的硬件。在图4中,用户设备420(B)生成并显示内容流B。在一个实施例中,内容流B是反映用户设备420(B)的一些或全部显示输出的视频内容流。当耦连到显示器120(B)时,用户设备420(B)还经由数据连接430(B)将内容流B输出到显示器120(B)。这样做,用户设备420(B)可执行软件应用以协调经由数据连接430(B)与显示器120(B)的通信。数据连接430(B)可以是高清晰度多媒体接口(HDMI)电缆、模拟连接、无线连接、或任何其他技术上可行类型的数据连接。响应于对内容流B的接收,显示器120(B)显示内容流B,如图所示的。
如上所述,显示器120(A)和120(B)可包括在显示系统100的各自的实例内。在这类实施例中,包括显示器120(A)和120(B)的显示系统配置为交互操作以共享本地接收的内容流,如下面结合图5更详细描述的。
图5是根据本发明的一个实施例的、图4的协作系统的更详细的框图。如图所示的,图5示出与以上结合图4所描述的那些组件相类似的组件,更详细地示出某些组件。具体地,通信基础设施410示出为包括流媒体基础设施510和消息传送基础设施520。此外,显示系统100(A)示出为包括装置140(A)以及显示器120(A),并且显示系统100(B)示出为包括装置140(B)以及显示器120(B)。计算设备140(A)和140(B)分别包括客户端应用500(A)和500(B)。
显示系统100(A)配置为经由通信基础设施410将内容流A共享给显示系统100(B)。作为响应,显示系统100(B)配置为从通信基础设施410检索内容流A并将该内容流与内容流B一起显示在显示器120(B)上。同样地,显示系统100(B)配置为经由通信基础设施410将内容流B共享给显示系统100(A)。作为响应,显示系统100(A)配置为从通信基础设施410检索内容流B并将该内容流与内容流A一起显示在显示器120(A)上。以该方式,显示系统100(A)和100(B)配置为相互协作以生成包括内容流A和B的共享工作空间。内容流A和B可用于生成渲染在共享工作空间内的不同资源。在一个实施例中,显示系统100(A)和100(B)中的每一个实施类似的过程以重建共享工作空间,从而生成该工作空间的本地版本,其与在其他显示系统处重建的工作空间的其他本地版本相类似。一般情况下,显示系统100(A)和100(B)的功能由客户端应用500(A)和500(B)分别来协调。
客户端应用500(A)和500(B)是一般驻留在与各自的装置140(A)和140(B)相关联的存储器(未示出)内的软件程序。客户端程序500(A)和500(B)可由包括在各自的计算设备内的处理器单元(未示出)来执行。当执行时,客户端应用500(A)和500(B)建立并管理以上结合图4所讨论的共享工作空间,此外,其包括内容流A和内容流B。在一个实施例中,共享工作空间由显示系统100(A)和100(B)均可访问的元数据来定义。每个这类显示系统可基于该元数据生成共享工作空间的本地版本,其大体上与其他本地版本同步。
这样做,客户端应用500(A)配置为将内容流A传送到流媒体基础设施510,用于随后流式传送到显示系统100(B)。客户端应用500(A)还经由消息传送基础设施520向显示系统100(B)传送通知,其向显示系统100(B)指示内容流A是可用的并且能够在通知中所反映的位置处被访问。以类似的方式,客户端应用500(B)配置为将内容流B传送到流媒体基础设施510,用于随后流式传送到显示系统100(A)。客户端应用500(B)还经由消息传送基础设施520向显示系统100(A)传送通知,其向显示系统100(A)指示内容流B是可用的并且能够在通知中所反映的位置处被访问。通知指示可从流媒体基础设施510内的位置处发生访问。下面结合图6-7分别更详细描述流媒体基础设施510和消息传送基础设施520。
总地参考图4-5,在操作中,当用户设备420(A)连接到显示系统100(A)时,客户端应用500(A)通过与在用户设备420(A)上执行的软件交互来检测该连接。随后,客户端应用500(A)将内容流A的流式传送从用户设备420(A)整合到装置140(A)。响应于对内容流A的接收,装置140(A)或耦连到其的中央控制器对该内容流进行解码并实时将其渲染到显示器120(A)。通过该技术,客户端应用500(A)使来源于用户设备420(A)的内容流A出现在显示器120(A)上,如图4中所示的。
此外,客户端应用500(A)将经解码的内容流重新编码到特定的格式,并接着将该内容流流式传送到流媒体基础设施510用于缓冲并随后流式传送到显示系统100(B),如以上也描述的。特定的格式例如可以为运动图像专家组(MPEG)格式等。流媒体基础设施510提供在对于所缓冲的内容流唯一的特定位置处对该内容的访问。特定位置来源于与显示系统100(A)相关联的标识符以及与用户设备420(A)相关联的标识符。位置例如可以为统一资源定位符(URL)、地址、端口号、或其他类型的定位符。流媒体基础设施510可使用任何技术上可行的缓冲流内容的方法来缓冲内容流。
在一个实施例中,前述标识符包括与显示系统100(A)相关联的许可秘钥,以及指派给用户设备420(A)的索引。当用户设备420(A)最初连接到显示系统100(A)时,显示系统100(A)可将索引指派给用户设备420(A)。在进一步的实施例中,流媒体基础设施510提供在反映基础URL结合许可秘钥和索引的URL处对内容流A的访问。
在将内容流A流式传送到流媒体基础设施510的同时,客户端应用500(A)还经由消息传送基础设施520向显示系统100(B)广播通知。通知包括以上所述的与显示系统100(A)以及可能地与用户设备420(A)相关联的标识符。通知还可包括指定与内容流A相关联的各种属性的数据,所述属性可被使用以显示内容流A。属性可包括位置、图片大小、纵横比、或采用其在显示器120(B)上对内容流A进行显示的分辨率等,并且可包括在以上结合图1所描述的元数据内。
响应于对该通知的接收,客户端应用500(B)解析来自通知的以上描述的标识符,并且随后从与那些标识符相对应的位置处访问内容流A。此外,在一个实施例中,位置是反映与显示系统100(A)相关联的许可秘钥和与用户设备420(A)相关联的索引的URL。客户端应用500(B)还可从消息传送基础设施520中提取前述属性,并且随后在显示器120(B)上的特定位置处以如消息传送基础设施520所提供的具体的图片大小、纵横比以及分辨率显示内容流A。通过该技术,显示系统100(A)能够将内容流A共享给显示系统100(B)。
显示系统100(B)配置为实施补充的技术以将内容流B共享给显示系统100(A)。具体地,当用户设备420(B)连接到显示系统100(B)时,客户端应用500(B)通过与在用户设备420(B)上执行的软件交互来检测该连接,随后,客户端应用500(B)将内容流B的流式传送从用户设备420(B)整合到装置140(B)。响应于对内容流B的接收,装置140(B)或耦连到其的中央控制器对内容流B进行解码并实时将其渲染到显示器120(B)。通过该技术,客户端应用500(B)使来源于用户设备420(B)的内容流B出现在显示器120(B)上,如图4中还示出的。
此外,客户端应用500(B)将经解码的内容流重新编码到特定的格式,并接着将该内容流流式传送到流媒体基础设施510用于缓冲并随后流式传送到显示系统100(A),如以上还描述的。特定的格式例如可以为运动图像专家组(MPEG)格式等。流媒体基础设施510提供在对于所缓冲的内容流唯一的特定位置处对该内容的访问。特定位置来源于与显示系统100(B)相关联的标识符以及与用户设备420(B)相关联的标识符。位置例如可以为统一资源定位符(URL)、地址、端口号、或其他类型的定位符。
在一个实施例中,前述标识符包括与显示系统100(B)相关联的许可秘钥,以及指派给用户设备420(B)的索引。当用户设备420(B)最初连接到显示系统100(B)时,显示系统100(B)可将索引指派给用户设备420(B)。在进一步的实施例中,流媒体基础设施510提供在反映基础URL结合许可秘钥和索引的URL处对内容流B的访问。
在将内容流B流式传送到流媒体基础设施510的同时,客户端应用500(B)还经由消息传送基础设施520向显示系统100(A)广播通知。通知包括以上所述的与显示系统100(B)以及用户设备420(B)相关联的标识符。通知还可包括指定与内容流B相关联的各种属性的数据,所述属性可被使用以显示内容流B。属性可包括位置、图片大小、纵横比、或采用其在显示器120(A)上对内容流B进行显示的分辨率等。
响应于对该通知的接收,客户端应用500(A)解析来自通知的以上描述的标识符,并且随后从与那些标识符相对应的位置处访问内容流B。此外,在一个实施例中,位置是反映与显示系统100(B)相关联的许可秘钥和与用户设备420(B)相关联的索引的URL。客户端应用500(A)还可提取前述属性,并且随后在显示器120(A)上的特定位置处以具体的图片大小、纵横比和分辨率来显示内容流B,内容流B以如流A的具体的图片大小、纵横比和分辨率中的一个或多个,可能在显示器120(A)上具有相同或部分重叠的位置,或否。通过该技术,显示系统100(B)能够将内容流B共享给显示系统100(A)。
客户端应用500(A)和500(B)因此配置为实施类似的技术以分别将内容流A和B共享给对方。当客户端应用500(A)在显示器120(A)上渲染内容流A时,也流式传送来自流媒体基础设施510的内容流B,显示系统100(A)因此构建包括内容流A和B的共享工作空间的版本。类似地,当客户端应用500(B)在显示器120(B)上渲染内容流B时,也流式传送来自流媒体基础设施510的内容流A,显示系统100(B)类似地构建包括内容流A和B的该共享工作空间的版本。
本文所描述的技术的优点在于,希望参与共享工作空间的用户仅需要将设备诸如膝上型计算机插入到本地显示系统。用户设备随后可使描绘该用户设备的显示输出的实时视频流到本地显示系统。显示系统转而协调该实时视频共享到其他显示系统。在各其他实施例中,显示系统100的第三实例可接收反映内容流A和B的通知,并且随后流式传送内容A和B用于在共享工作空间的版本内本地显示。在该实施例中,显示系统100的第三实例可能接收来自本地耦连的用户设备的任何内容流,或否。
本文所讨论的显示系统100(A)和100(B)通常经由流媒体基础设施510和消息传送基础设施520耦连在一起。这些不同基础设施中的每个可包括基于云和/或与各显示系统预搭配的硬件。本领域技术人员将理解可实现种种不同的方法来在显示系统之间流式传送内容流以及传输通知。然而,图6-7各自阐述流媒体基础设施510和消息传送基础设施520的示例性实现。
图6根据本发明的一个实施例的、图5的流媒体基础设施的更详细的框图。如图所示的,流媒体基础设施510包括流媒体服务器600,其转而包括流媒体应用610和内容缓冲器620。流媒体应用610是可由流媒体服务器600内的处理器单元(未示出)执行以管理从显示系统100(A)和100(B)所接收的内容流的软件应用。流媒体应用610可将那些内容流存储到内容缓冲器620内用于随后流式传送到显示系统100(A)和100(B)。内容缓冲器620可以是任何技术上可行形式的存储器,包括随机存取存储器(RAM)、闪存、硬盘等。
在一个实施例中,流媒体应用610配置为从显示系统100(A)和/或100(B)接收MPEG格式的内容流。流媒体应用610可随后将该内容流转码为多比特率实时流协议(RTSP)流用于流式传送到其他显示系统100。采用该方法,配置为流式传送前述内容流的显示系统100可选择采用特定的比特率来流式传送该内容。因此,当从服务器机器600流出内容流时,给定显示系统可将总带宽消耗限制到最大值以下。在其他实施例中,流媒体服务器610可以对内容流下采样,以适应移动显示系统或具有较低分辨率显示屏的其他显示系统。
图7是根据本发明的一个实施例的、图5的消息传送基础设施的更详细的框图。如图所示,消息传送基础设施520包括经由集中高速缓存和存储720耦连在一起的服务器机器700(A)和服务器机器700(B)。服务器机器700(A)耦连到装置140(A)并且包括消息传送应用710(A)。服务器机器700(B)耦连到装置140(B)并且包括消息传送应用710(B)。
服务器机器700(A)和700(B)通常是基于云的或内部部署的计算设备,其包括存储器(未示出)和处理器单元(未示出),分别配置为存储并执行消息传送应用710(A)和710(B)。消息传送应用710(A)和710(B)分别配置为生成与计算设备140(A)和140(B)的实时套接字连接,以允许快速传输通知和其他类型的消息。在一个实施例中,消息传送应用710(A)和710(B)实现为ASP.NET应用并且依赖信号R网页接口来完成快速实时的消息传送。
集中高速缓存和存储720提供稳固的消息传送后端,通过它消息可在消息传送应用710(A)和710(B)之间交换。在一个实施例中,集中高速缓存和存储包括SQL数据库所支持的Redis高速缓存。消息传送应用710(A)和710(B)可配置为定期向集中高速缓存和存储720轮询新的通知,从而允许消息快速递送到那些应用。
在操作中,当显示系统100(A)传送通知指示内容流A在流媒体基础设施510上可用时,如上所述,显示系统100(A)将该通知传送到消息传送应用710(A)。消息传送应用710(A)可随后将通知中继到集中高速缓存和存储720。消息传送应用710(B)定期轮询集中高速缓存和存储720,并且因此可确定通知已经到达。消息传送应用710(B)随后将通知中继到显示系统100(B)。如先前所讨论的,显示系统100(B)可随后解析通知以检索与显示系统100(A)和用户设备420(A)相关联的标识符,并且随后从流媒体服务器610流式传送与用户设备420(A)相关联的内容。
总地参考图4-7,迄今为止所讨论的各种技术可根据各种可能的实施例而延伸。在一个实施例中,每个显示系统100配置为接收与在相对应的显示器120上显示的内容流相关联的命令,以及随后将那些命令中继到内容流源自的用户设备用于执行。例如,参考图4和5,显示系统100(A)可接收针对内容流A的命令,并且随后将那些命令中继到用户设备420(A)用于由用户设备420(A)执行。以类似的方式,显示系统100(A)可接收针对内容流B的命令,并且随后经由消息传送基础设施520将那些命令传送到显示系统100(B)并且随后用户设备,用于由该设备执行。命令例如可以是经由显示器120所接收的触摸输入或其他类型的输入。采用该技术,显示系统100(A)和100(B)提供远程桌面功能,其能够用于控制耦连到那些显示系统的任何用户设备。
在另一个实施例中,每个显示系统100配置为接收常规命令用于中止或倒回内容流。例如,显示系统100(A)可接收输入指示内容流A在当前状态应被中止和冻结直到解除中止。在另一个示例中,显示系统100(A)可接收输入指示内容流B应被返回到10秒之前出现的状态并且随后重新播放。
本发明的各其他实施例预计协作系统400的架构变形。在一个这类实施例中,装置140(A)和客户端应用500(A)的功能包括在用户设备420(A)中并且通过其实现。例如,用户设备420(A)可以是配置为执行客户端应用500(A)(或其某版图)以实施本文所讨论的装置140(A)的功能的计算设备。在进一步的实施例中,用户设备420(A)还包括显示器120(B)。
在另一个实施例中,用户设备420(A)耦连到装置140(A),并且配置为将内容流A输出到装置140(A),而不是装置140(A)生成工作空间并显示在显示器120(A)上。在该实施例中,显示器120(A)可完全省略。
图8阐述根据本发明的一个实施例的、用于跨显示系统的一个或多个实例共享内容流的方法步骤的流程图。虽然结合图1-7的系统描述方法步骤,但是本领域技术人员将理解,配置为以任何顺序实施方法步骤的任何系统均在本发明的范围内。
如所示的,方法800开始于步骤802,在该步骤客户端应用500(A)确定用户设备420(A)经由数据连接430(A)耦连到显示系统100(A)。用户设备420(A)配置为输出内容流A,如图4中所示的。客户端应用500(A)可与用户设备420(A)上执行的软件程序进行交互,以识别已建立连接。数据连接420(A)可以是HDMI电缆或无线连接等。
在步骤804,客户端应用500(A)使耦连到显示器120(A)的中央控制器在显示器120(A)上渲染内容流A。中央控制器例如可以是如图1中所示的中央控制器110。
在步骤806,客户端应用500(A)将内容流A流式传送到流媒体基础设施510。作为响应,流媒体基础设施510在基于与显示系统100(A)和用户设备420(A)相关联的标识符的特定位置处公布内容流。
在步骤808,客户端应用500(A)生成标识内容流A的通知。通知包括与显示系统100(A)和用户设备420(A)相关联的标识符。通知还可包括与内容流A相关联的显示属性,包括内容流应被显示的位置等等。
在步骤810,客户端应用500(A)跨消息传送基础设施520广播通知。显示系统100(B)可随后接收通知并实施下面结合图9所描述的方法。
图9阐述根据本发明的一个实施例的、用于显示包括从显示系统的实例所接收的内容流的共享工作空间的方法步骤的流程图。虽然结合图1-7的系统描述方法步骤,但是本领域技术人员将理解,配置为以任何顺序实施方法步骤的任何系统均在本发明的范围内。
如图所示的,方法900开始于步骤902,在该步骤客户端应用500(B)经由消息传送基础设施520接收由客户端应用500(A)所传送的通知。通知指示内容流A可用于流式传送,并且还包括可用于访问内容流A的与显示系统100(A)和用户设备420(A)相关联的标识符。
在步骤904,客户端应用500(B)从通知提取标识符。在一个实施例中,标识符包括与显示系统100(A)相关联的许可秘钥以及指派给用户设备420(A)的索引。
在步骤906,客户端应用500(B)使用在步骤904所提取的标识符从流媒体基础设施510访问内容流A。客户端应用500(B)可通过构建包括许可秘钥和索引的URL并随后从该URL将内容流A流式传送来访问内容流A。
在步骤908,客户端应用500(B)从用户设备420(B)接收内容流B。客户端应用500(B)可与用户设备420(B)上执行的软件交互,以识别该用户设备420(B)耦连到显示系统100(B)并在输出内容流B。
在步骤910,客户端应用500(B)生成包括内容流A和内容流B的工作空间。这样做,客户端应用500(B)可为工作空间、内容流A以及内容流B分配各自的存储器和/或帧缓冲器空间。可替代地,客户端应用500(B)可为工作空间、内容流A以及内容流B分配一个区域的存储器和/或帧缓冲器空间。
在步骤912,客户端应用500(B)在显示器120(B)上显示工作空间,包括内容流A和内容流B。客户端应用500(A)可实施类似的技术以显示相同工作空间的版本,包括内容流A和内容流B。采用该方法,客户端应用500(A)和500(B)可交互操作以生成并显示大体上类似的工作空间,包括相同的内容流A和B。此外,那些工作空间可大体上实时同步。
总之,耦连到显示器的客户端应用生成共享工作空间,该共享工作空间包括来源于本地用户设备的内容流以及来源于远程设备的一个或多个内容流。客户端应用配置为检测用户设备何时本地耦连,并配置为将来源于用户设备的内容流渲染到显示器。此外,客户端应用还将内容流公布到中央服务器。与其他显示器相关联的其他客户端应用可随后流式传送内容流用于本地显示。其他客户端应用还可将来源于本地设备的一个或多个内容流公布到中央服务器。客户端应用可流式传送内容流用于显示在显示器上。以这种方式,客户端应用显示本地生成的内容流以及远程生成的内容流。其他客户端应用中的每一个类似地运作,并且因此可显示不同版本的共享工作空间。
本发明的至少一个优点在于,用户可通过将用户设备耦连到客户端应用而简单地参与到共享工作空间中。因此,用户无需为共享内容流而请求领导者身份或手动配置任何设置。此外,因为每个显示器显示相同的共享工作空间,并且该工作空间显示大量不同源的内容流,因此观看该工作空间的各用户可更有效地协作。
虽然为示例性目的已呈现各实施例的描述,但并非意在详尽的或限制于所公开的各实施例。对于本领域普通技术人员来说,在不脱离所描述的实施例的范围和精神的情况下,许多修改和变形将是显而易见的。
所呈现的实施例的方面可具体化为系统、方法或计算机程序产品。因此,本公开的方面可采取完全硬件实施例、完全软件实施例(包括固件、常驻软件、微代码等)或组合软件和硬件方面的实施例的形式,所述软件和硬件方面在本文中全部可一般地称为“电路”、“模块”或“系统”。此外,本公开的方面可采取具体化在一个或多个计算机可读介质中的计算机程序产品的形式,所述计算机可读介质具有具体化在其上的计算机可读程序代码。
可利用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电、磁、光、电磁、红外、或半导体系统、装置、或设备、或前述的任何合适的组合。计算机可读存储介质的更多具体示例(非详尽的列表)将包括以下:具有一个或多个电线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式压缩磁盘只读存储器(CD-ROM)、光存储设备、磁存储设备、或前述的任何合适的组合。在本文本的上下文中,计算机可读存储介质可以是任何有形介质,其可包含或存储用于由指令执行系统、装置或设备使用或者结合指令执行系统、装置或设备使用的程序。
上文参考根据本公开的实施例的方法、装置(系统)以及计算机程序产品的流程图图解和/或框图描述本公开的方面。将理解,流程图图解和/或框图的每个框、以及流程图图解和/或框图中的框的组合,可以通过计算机程序指令来实现。这些计算机程序指令可被提供到通用计算机、专用计算机或其他可编程数据处理装置的处理器以产生机器,这样经由计算机或其他可编程数据处理装置的处理器执行的指令,使能流程图和/或框图的框或多个框中指定功能/行为的实现。这类处理器可以是但不限于通用处理器、专用处理器、面向应用的处理器、或现场可编程处理器。
本公开的实施例可通过云计算基础设施提供给终端用户。作为网络上的服务,云计算通常涉及可扩展计算资源的供应。更正式地讲,计算资源可定义为计算能力,其提供计算资源和其基础技术架构(例如服务器、存储、网络)之间的抽象,使能对可配置计算资源共享池的便利的、按需的网络访问,所述可配置计算资源共享池可采用最少的管理精力或服务提供商交互被快速供应和释放。因此,云计算允许用户访问“云”中的虚拟计算资源(例如存储、数据、应用、以及甚至完全虚拟化的计算系统),而不考虑用于提供计算资源的基础物理系统(或那些系统的位置)。
典型地,云计算资源基于按次收费而被提供给用户,在那种情况下用户仅为计算资源的实际使用(例如用户所消耗的存储空间量或用户实例化的虚拟化系统数目)而付费。用户可在任何时间从互联网上的任何地方访问驻留在云中的任何资源。在本公开的上下文中,用户可访问云中的应用(例如视频处理和/或语音分析应用)或可用的相关数据。
附图中的流程图和框图示出根据本公开的各实施例的系统、方法和计算机程序产品的可能的实现方式的架构、功能和操作。就这一点而言,流程图或框图中的每个框可代表模块、片段、或部分代码,其包括用于实现特定逻辑功能的一个或多个可执行指令。还应注意,在一些可替代的实现方式中,框中所注释的功能可不按照图中注释的顺序而发生。例如,接连示出的两个框可能事实上大体同时执行,或框可能有时按照倒序执行,这取决于所涉及的功能。将注意,框图和/或流程图图解的各框、以及框图和/或流程图图解中的框的组合可通过实施专用功能或行为的专用的基于硬件的系统而实现,或通过专用硬件和计算机指令的组合而实现。
虽然前面的描述针对本公开的实施例,但是在不脱离本公开的基本范围的情况下,可设计本公开的其他和进一步的实施例,并且本公开的基本范围由附随的权利要求来确定。

Claims (18)

1.一种用于跨多个显示器共享内容的计算机实现的方法,所述方法包括:
从第一用户设备接收第一流;
从流服务器访问第二流,其中所述第二流来源于第二用户设备;
生成包括所述第一流和所述第二流的第一工作空间;以及
促使所述第一工作空间连同所述第一流和所述第二流一起显示在第一显示器上。
2.根据权利要求1所述的计算机实现的方法,进一步包括:
生成包括标识所述第一流的第一数据的第一通知;
经由消息传送基础设施将所述第一通知传送到第二显示器,其中第二显示器配置为基于所述通知访问并显示来自流服务器的所述第一流。
3.根据权利要求2所述的计算机实现的方法,进一步包括:
在所述第二显示器处接收来源于所述第一显示系统的所述第一通知;
在所述第二显示器处解析所述第一通知以提取所述第一数据;
在所述第二显示器处基于来自所述流服务器的所述第一数据访问所述第一流;
生成包括所述第一流和所述第二流的第二工作空间;以及
促使所述第二工作空间显示在所述第二显示器上。
4.根据权利要求3所述的计算机实现的方法,其中所述第一通知进一步包括反映用于所述第一流的显示设置的第一属性组,并且进一步包括:
解析所述第一通知以提取所述第一属性组;以及
基于所述第一属性组显示所述第二工作空间内的所述第一流。
5.根据权利要求3所述的计算机实现的方法,其中所述第一工作空间和所述第二工作空间包括大体上实时同步的大体上类似的数据。
6.根据权利要求3所述的计算机实现的方法,进一步包括:
接收针对所述第一工作空间和所述第二工作空间中的至少一个的命令;以及
作为响应,促使第一计算设备和第二计算设备中的至少一个执行所述命令。
7.根据权利要求3所述的计算机实现的方法,进一步包括:
接收针对所述第一工作空间和所述第二工作空间中的至少一个的命令;以及
作为响应,重播所述第一流和所述第二流中的至少一个的部分。
8.根据权利要求1所述的计算机实现的方法,进一步包括:
接收与第二显示器相关联的第二通知,其中所述第二通知包括标识所述第二流的第二数据;
解析所述第二通知以提取所述第二数据;以及
基于所述第二数据访问所述第二流。
9.根据权利要求5所述的计算机实现的方法,其中所述第二通知进一步包括反映用于所述第二流的显示设置的第二属性组,并且进一步包括:
解析所述第二通知以提取所述第二属性组;以及
基于所述第二属性组显示所述第一工作空间内的所述第二流。
10.根据权利要求1所述的计算机实现的方法,进一步包括基于与所述第一显示器相关联的带宽阈值对所述第二流下采样。
11.一种用于跨多个显示器共享内容的系统,所述系统包括:
用于从第一用户设备接收第一流的装置;
用于从流服务器访问第二流的装置,其中所述第二流来源于第二用户设备;
用于生成包括所述第一流和所述第二流的第一工作空间的装置;以及
用于促使所述第一工作空间连同所述第一流和所述第二流一起显示在第一显示器上的装置。
12.根据权利要求11所述的系统,进一步包括:
用于生成包括标识所述第一流的第一数据的第一通知的装置;
用于经由消息传送基础设施将所述第一通知传送到第二显示器的装置,其中第二显示器配置为基于所述通知访问并显示来自流服务器的所述第一流。
13.根据权利要求12所述的系统,进一步包括:
用于接收与第二显示器相关联的第二通知的装置,其中所述第二通知包括标识所述第二流的第二数据;
用于解析所述第二通知以提取所述第二数据的装置;以及
用于基于所述第二数据访问所述第二流的装置。
14.根据权利要求13所述的系统,其中所述第二通知进一步包括反映用于所述第二流的显示设置的第二属性组,并且进一步包括:
用于解析所述第二通知以提取所述第二属性组的装置;以及
用于基于所述第二属性组显示所述第一工作空间内的所述第二流的装置。
15.一种用于跨多个显示器共享内容的系统,包括:
第一用户设备,所述第一用户设备配置为生成并输出第一流;以及
第一显示系统,所述第一显示系统包括:
第一显示器,以及
第一装置,所述第一装置具有:
第一存储器,所述第一存储器存储第一客户端应用,以及
第一处理器,连同执行所述第一客户端应用:
从所述第一用户设备接收所述第一流,
从流服务器访问第二流,其中所述第二流来源于第二用户设备,
生成其中包括所述第一流和所述第二流的第一工作空间,以及
促使所述第一工作空间、所述第一流和所述第二流显示在所述第一显示器上。
16.根据权利要求15所述的系统,进一步包括:
第二用户设备,所述第二用户设备配置为生成并输出第二流;以及
第二显示系统,所述第二显示系统包括:
第二显示器,以及
第二装置,所述第二装置具有:
第二存储器,所述第二存储器存储第二客户端应用,以及
第二处理器,连同执行所述第二客户端应用:
从所述第二用户设备接收所述第二流,
将所述第二流传送到流服务器,以及
经由消息传送基础设施向所述第一显示系统传送标识所述第二流的通知,其中所述第一处理器配置为基于所述通知从所述流服务器访问所述第二流。
17.根据权利要求16所述的系统,其中所述第一处理器连同执行所述第一客户端应用,将所述第一流传送到所述流服务器,并且所述第二处理器连同执行所述第二客户端应用:
从所述流服务器访问所述第一流;
生成其中包括所述第一流和所述第二流的第二工作空间;以及
促使所述第二工作空间、所述第一流和所述第二流显示在所述第二显示器上。
18.根据权利要求16所述的系统,进一步包括:
第三显示系统,所述第三显示系统包括:
第三显示器,以及
第三装置,所述第三装置具有:
第三存储器,所述第三存储器存储第三客户端应用,以及
第三处理器,连同执行所述第三客户端应用:
接收所述第一流,
接收所述第二流,
生成其中包括所述第一流和所述第二流的第三工作空间,以及,
促使所述第三工作空间、所述第一流和所述第二流显示在所述第三显示器上。
CN201610190716.1A 2015-03-31 2016-03-30 用于在多个端点之间共享实时内容的技术 Pending CN106027592A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/675,602 2015-03-31
US14/675,602 US9906594B2 (en) 2012-02-21 2015-03-31 Techniques for shaping real-time content between multiple endpoints

Publications (1)

Publication Number Publication Date
CN106027592A true CN106027592A (zh) 2016-10-12

Family

ID=53545858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610190716.1A Pending CN106027592A (zh) 2015-03-31 2016-03-30 用于在多个端点之间共享实时内容的技术

Country Status (3)

Country Link
US (1) US9906594B2 (zh)
EP (1) EP3076647B1 (zh)
CN (1) CN106027592A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109587442A (zh) * 2017-09-29 2019-04-05 特克特朗尼克公司 镜像针对因特网协议接收方的流配置
CN111078171A (zh) * 2019-11-30 2020-04-28 北京城市网邻信息技术有限公司 用于同步显示的方法、终端设备、设备和可读存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017088991A1 (en) * 2015-11-26 2017-06-01 Barco Nv Content sharing protocol
US20200225903A1 (en) * 2019-01-10 2020-07-16 Noy Cohen Modular display system
US11284193B2 (en) * 2020-02-10 2022-03-22 Laurie Cline Audio enhancement system for artistic works
US11150861B1 (en) * 2020-06-25 2021-10-19 Coscreen, Inc. Apparatus and method for simultaneous multi-user screen and window sharing, capturing and coordination

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070198744A1 (en) * 2005-11-30 2007-08-23 Ava Mobile, Inc. System, method, and computer program product for concurrent collaboration of media
US20130282820A1 (en) * 2012-04-23 2013-10-24 Onmobile Global Limited Method and System for an Optimized Multimedia Communications System
US20140032770A1 (en) * 2007-09-28 2014-01-30 Adobe Systems Incorporated Declarative specification of collaboration client functionality

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7908325B1 (en) 2005-06-20 2011-03-15 Oracle America, Inc. System and method for event-based collaboration
US8627211B2 (en) * 2007-03-30 2014-01-07 Uranus International Limited Method, apparatus, system, medium, and signals for supporting pointer display in a multiple-party communication
US7769810B1 (en) 2007-04-26 2010-08-03 Adobe Systems Incorporated Method and system for collaborative editing
US20080313536A1 (en) * 2007-06-14 2008-12-18 Microsoft Corporation Situation Sharing and Viewing
US8556430B2 (en) 2007-06-27 2013-10-15 Prysm, Inc. Servo feedback control based on designated scanning servo beam in scanning beam display systems with light-emitting screens
JP4625831B2 (ja) 2007-08-01 2011-02-02 シャープ株式会社 表示装置および表示方法
US7917584B2 (en) 2007-10-22 2011-03-29 Xcerion Aktiebolag Gesture-based collaboration
US8825758B2 (en) 2007-12-14 2014-09-02 Microsoft Corporation Collaborative authoring modes
US9965638B2 (en) * 2008-01-28 2018-05-08 Adobe Systems Incorporated Rights application within document-based conferencing
US8843816B2 (en) 2008-04-25 2014-09-23 Microsoft Corporation Document collaboration by transforming and reflecting a document object model
US8407290B2 (en) 2009-08-31 2013-03-26 International Business Machines Corporation Dynamic data sharing using a collaboration-enabled web browser
US20110258216A1 (en) 2010-04-20 2011-10-20 International Business Machines Corporation Usability enhancements for bookmarks of browsers
US9226045B2 (en) * 2010-08-05 2015-12-29 Qualcomm Incorporated Signaling attributes for network-streamed video data
JP5829626B2 (ja) * 2011-01-07 2015-12-09 シャープ株式会社 再生装置、再生装置の制御方法、生成装置、生成装置の制御方法、制御プログラム、及び該プログラムを記録した記録媒体
US9300705B2 (en) * 2011-05-11 2016-03-29 Blue Jeans Network Methods and systems for interfacing heterogeneous endpoints and web-based media sources in a video conference
US20130130218A1 (en) * 2011-11-23 2013-05-23 Jaret James Hargreaves Application for Remote Administration and Scoring of NIHSS on Mobile Devices
WO2013104053A1 (en) 2012-01-11 2013-07-18 Smart Technologies Ulc Method of displaying input during a collaboration session and interactive board employing same
US10379695B2 (en) 2012-02-21 2019-08-13 Prysm, Inc. Locking interactive assets on large gesture-sensitive screen displays
US20130218998A1 (en) 2012-02-21 2013-08-22 Anacore, Inc. System, Method, and Computer-Readable Medium for Interactive Collaboration
WO2013169070A1 (en) 2012-05-11 2013-11-14 Samsung Electronics Co., Ltd. Multiple window providing apparatus and method
US20140047332A1 (en) 2012-08-08 2014-02-13 Microsoft Corporation E-reader systems
CA2791110A1 (en) 2012-09-25 2014-03-25 Pixton Comics Inc. Collaborative comic creation
WO2014134107A2 (en) * 2013-02-26 2014-09-04 Mersive Technologies, Inc. System and method for multi-user control and media streaming to a shared display
US9532016B2 (en) 2013-04-10 2016-12-27 Prysm, Inc. Self aligning imager array
US9600595B2 (en) 2013-05-21 2017-03-21 International Business Machines Corporation Modification of windows across multiple displays
US20140362119A1 (en) 2013-06-06 2014-12-11 Motorola Mobility Llc One-handed gestures for navigating ui using touch-screen hover events
US9720557B2 (en) 2013-08-26 2017-08-01 Cellco Partnership Method and apparatus for providing always-on-top user interface for mobile application
US9111214B1 (en) 2014-01-30 2015-08-18 Vishal Sharma Virtual assistant system to remotely control external services and selectively share control

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070198744A1 (en) * 2005-11-30 2007-08-23 Ava Mobile, Inc. System, method, and computer program product for concurrent collaboration of media
US20140032770A1 (en) * 2007-09-28 2014-01-30 Adobe Systems Incorporated Declarative specification of collaboration client functionality
US20130282820A1 (en) * 2012-04-23 2013-10-24 Onmobile Global Limited Method and System for an Optimized Multimedia Communications System

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109587442A (zh) * 2017-09-29 2019-04-05 特克特朗尼克公司 镜像针对因特网协议接收方的流配置
CN111078171A (zh) * 2019-11-30 2020-04-28 北京城市网邻信息技术有限公司 用于同步显示的方法、终端设备、设备和可读存储介质
CN111078171B (zh) * 2019-11-30 2021-05-25 北京城市网邻信息技术有限公司 用于同步显示的方法、终端设备、设备和可读存储介质

Also Published As

Publication number Publication date
EP3076647A1 (en) 2016-10-05
US20150207878A1 (en) 2015-07-23
EP3076647B1 (en) 2018-12-12
US9906594B2 (en) 2018-02-27
US20170180472A9 (en) 2017-06-22

Similar Documents

Publication Publication Date Title
CN106027592A (zh) 用于在多个端点之间共享实时内容的技术
KR101785911B1 (ko) 전시자 맞춤형 3차원 가상 갤러리 관리 방법
Ni et al. A survey of large high-resolution display technologies, techniques, and applications
CN103077239B (zh) 基于云渲染的iFrame嵌入式Web3D系统
CN112243583B (zh) 多端点混合现实会议
TWI566160B (zh) 用於多應用程式或程序間動態模擬之協調的電腦儲存媒體、方法及計算裝置
US20140267598A1 (en) Apparatus and method for holographic poster display
Leigh et al. Scalable resolution display walls
CN108008954A (zh) 页面配置方法、装置、服务器及介质
US11935293B2 (en) Augmented reality support platform
CN107045460A (zh) 跨平台注释同步
CN103197908B (zh) 基于信息展示平台的pdf文件显示方法及系统
US20170039416A1 (en) Adaptive environment targeting
US20140355905A1 (en) Photo mosaic systems and methods
CN108475103A (zh) 交互式显示器
US10204656B1 (en) Video processing architectures which provide looping video
CN111033497A (zh) 在远程观看的演示中提供超链接
KR20230118794A (ko) 가상 공간 구축 및 제어를 위한 웹 기반 3d 컨텐츠의패키징 및 스트리밍 서비스 제공 방법 및 그 시스템
CN107426221A (zh) 基于超融合架构的文化创意虚拟现实系统
US20230362460A1 (en) Dynamically generated interactive video content
US10917679B2 (en) Video recording of a display device
EP2916224A1 (en) Virtual store management based on render services
Guo et al. An AR/VR-Hybrid Interaction System for Historical Town Tour Scenes Incorporating Mobile Internet
CN111726687B (zh) 用于生成显示数据的方法和装置
KR102464437B1 (ko) 기가 픽셀 미디어 객체 감상 및 거래를 제공하는 메타버스 기반 크로스 플랫폼 서비스 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161012

WD01 Invention patent application deemed withdrawn after publication