CN105210394B - 用于共享显示器的多用户控制和流媒体传输的系统和方法 - Google Patents

用于共享显示器的多用户控制和流媒体传输的系统和方法 Download PDF

Info

Publication number
CN105210394B
CN105210394B CN201480010455.XA CN201480010455A CN105210394B CN 105210394 B CN105210394 B CN 105210394B CN 201480010455 A CN201480010455 A CN 201480010455A CN 105210394 B CN105210394 B CN 105210394B
Authority
CN
China
Prior art keywords
media
client terminal
terminal device
display
source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480010455.XA
Other languages
English (en)
Other versions
CN105210394A (zh
Inventor
克里斯托弗·O·杰恩斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mersive
Mersive Technologies Inc
Original Assignee
Mersive Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=51387727&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN105210394(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Mersive Technologies Inc filed Critical Mersive Technologies Inc
Publication of CN105210394A publication Critical patent/CN105210394A/zh
Application granted granted Critical
Publication of CN105210394B publication Critical patent/CN105210394B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

用于在与两个或更多个源计算机连接的支持无线的显示器上同时显示以显示来自至少两个源计算机中的每个的至少一个媒体源的系统和方法。通过源计算机中的每个选择媒体源。媒体源比源客户端计算机上的整个图像小，且可以组成客户端数据文件、应用或视频流。选择的媒体源中的每个作为各个直播媒体流被传输至显示器，且传输的媒体流中的每个被同时渲染在显示器上。

Description

用于共享显示器的多用户控制和流媒体传输的系统和方法
相关申请
本申请要求2013年2月26日递交的美国临时专利申请NO.61/769,609的优先权，通过引用在此引入该申请所公开的内容。
背景技术/待解决的问题
全世界有超过1200万个会议室，通过其当前信息显示方案，大多数会议室是服务水平低下的。视频电缆能够将来自一个装置的单个源承载至显示器，且除了物理地连接和断开视频电缆之外，对于显示来自该装置的什么东西以及何时显示存在少许控制。通过允许不同客户端同时显示至单个屏幕，视频切换硬件部分地克服了这个问题，然而，该硬件受到视频传输标准的限制，给每个装置的用户留下少许的控制。最终，屏幕共享软件为用户提供将他们的装置的图像发送至显示器的一些能力，但这些方法所要做的不仅仅是将物理电缆替换为软件(潜在地，基于IP的网络)。所需要的是允许用于多个用户之间的协作的同时交互并具有将可能来自单个装置的多个源同时发布至能够被连接的装置中的任何一个控制的共用显示装置而不受任何限制的能力的系统。
方案/发明内容
本系统包括将商品显示器硬件和与该显示器连接的标准计算装置变换为被管理和共享的表现和协作环境的软件。通过提供具有软件的共用通信、表现和管理系统，显示器可以用作公共基础设施的部分，允许移动用户连接发布媒体，与协作者分享并更好地通信。因此，本方法允许像典型的IT基础设施的其他方面(如，共享存储、打印机、基于云的计算)一样使用并管理的显示装置。
本系统同样包含安装在各种装置上以允许它们连接至该显示基础设施的软件。该软件将多个用户显示装置的互联和关联媒体提供至单个共享显示器。用户能够同时使用同一显示器，允许多个不同的装置(可能具有不同的数据集)在该同一显示器上进行视觉地对照。本系统使用集中的复杂的状态和控制管理系统使得能够实现这种同时媒体发稿，而无需每个用户显示装置具有管理交互。
除了将来自每个用户显示装置的媒体有选择地发布至任意管理的显示器，用户可以同时控制已被发布至共享显示器的每个媒体元素。因为显示软件将状态更新传输至所有连接的用户，每个显示装置可以为个人提供选择并控制可能已被用户发布或可能没被用户发布的媒体的能力。因此，本系统允许多个用户自由地共享媒体、协作并通信，而不受更多传统视频切换器、每个装置的直流视频电缆或简单的屏幕共享应用强加的限制。
作为本系统可能实现的协作的类型的示例，考虑具有与商品PC连接的单个显示器的会议室。三个用户的每个具有与被商品PC共享的无线网连接的便携式电脑。本系统提供以下行为。
·通过运行装置软件并通过用户界面选择连接，每个用户可以建立与显示器的连接，而不管显示器分辨率是否不匹配、是否缺少物理连接器的正确的视频电缆。
·用户可以有选择地发布在他们的显示装置上运行的应用的直播输出。该应用的直播图像在屏幕上发布。
·第二用户可以选择该图像并使用交互、自由的形式控制比例和复位甚至将该图像从共享显示器中删除。
·第三用户可以从他/她的装置中选择将出现在显示器上的视频文件。
·同时，第二用户可以选择两个不同的应用窗口并将它们发布至显示器。基于表示布局的用户控制，可同时直播显示所有三个图像，适当地共享显示器屏幕空间。
区别于现有的视频切换系统，每个连接的装置都能够将图像发布至共享显示器并同时控制共享显示器和其他装置。传统的视频切换系统提供抓取、路由并显示各种视频信号的不同的视频输入(典型地，基于现有视频标准)。这些源，因为它们已经过传统视频电缆，不承载扩展的控制信息，因此视频源不能控制显示器。区别于视频切换，本系统交换媒体(视频、图像、应用窗口像素)、控制信息以及其他元数据(用户信息、源的位置等)。
区别于基于软件的屏幕共享应用，本系统能够同时对所有发布和共享的媒体提供组控制。
在一个实施例中，支持无线的一组显示器被嵌入或附接到包含显示软件模块的通用计算装置。安装在至少两个不同的装置上的客户端软件模块允许这些装置无线地连接至显示模块。显示模块可以基于来自两个装置的进入连接信号选择性地显示与连接的用户有关的存在信息和元数据。然后装置的用户中的每个可以选择性地识别待被传输至显示器以进行渲染的媒体源。显示模块接收直播媒体流并在由连接的用户中的每个控制的物理显示装置上将这些流按照位置和比例并具有视觉效果而同时进行渲染。
附图说明
图1为示出本系统的示例性组件的示意图；
图2为示出本主机显示软件的示例性组件的示意图；
图3为示出本客户端软件的示例性组件的示意图；
图4为示出示例性客户端显示装置的示意图；
图5A为示出客户端显示装置上的应用窗口和共享显示装置上它们的对应图像之间的某种关系的示例性示意图；
图5B为示出客户端显示装置上的应用窗口和共享显示装置上它们的对应图像之间的某种关系的替换实施例的示例性示意图；
图6为示出本系统在连接至共享显示器时执行的示例性的一组步骤的流程图；
图7A为示出本系统在向共享显示器发布时执行的示例性的一组步骤的流程图；
图7B为示出本系统在可选实施例中在操纵共享显示器102上的应用窗口时执行的示例性的一组步骤的流程图。
具体实施方式
图1为示出本系统100的示例性组件的示意图。如图1所示，在示例性实施例中，本系统包括由包括显示软件模块105的主机控制器104控制的多个共享显示装置102(图中仅示出两个装置102(1)和102(2))中的一个。主机控制器104为通过一个或多个服务器115与一个或多个客户端主机计算机116互联的计算机，如PC，每个客户端主机计算机116执行客户端软件107以控制本地显示器108且还控制图像显示在共享显示装置102上。
客户端主机116包括用于暂存应用、内容和其他当前信息的本地存储器111，并可以连接至媒体文件109的本地数据库或其他存储库。典型地，客户端主机与PC、便携式电脑或手持装置如智能电话或笔记本电脑集成在一起。下文中，该集成的客户端主机116和显示器108被称为“客户端显示装置”或简单地“客户端”106。点线120指示客户端106和主机共享显示器102之间的可以是无线的或有线的网络互联。
图2为示出控制本系统100的操作的主机显示软件105的示例性组件的示意图。如图2所示，在示例性实施例中，显示软件105包括网络软件204、控制和状态管理软件205、场景图和显示管理器208以及表示引擎209。
网络软件204提供主机控制器104和客户端106之间的连接控制和在主机控制器104和客户端106之间发送的信息的包接收/递送。网络软件204从执行客户端软件107的客户端主机116接收源于客户端的包212，并将源于系统的包211发送至执行客户端软件107的客户端主机116。视频编/解码器206对打包传输/接收的视频信息进行编/解码。
控制和状态管理软件205维持包括已由用户创建的媒体流、用户的唯一标识符中的每个、关于每个用户的元数据(如，用户类几何空间位置和用户名以及哪些用户当前表示控制命令)的共享显示器的全局状态。来自用户的消息唤起对控制和状态管理模块的更新以确保总是一致的状态。此外，该状态被所有连接的用户周期地共享。这样，每个连接的客户端能够查看关于已被共享至显示器的所有媒体的信息(例如，作为缩略图维持的所有媒体发布的列表)，甚至选择并控制源自其他装置的媒体。
场景图和显示管理器208维持在显示装置102的屏幕510(图5A中示出)上显示的所有视觉元素的3D几何状态。这包括发布到显示器的每个媒体元素的位置(二维或三维)、比例以及外观。然后，基于存储在场景图117中的信息，可以将来自与这些元素中的每个相关联的视频解码器206的实际像素数据合成至对应媒体发稿的正确的视觉位置。通过(来自客户端106)的包括平移命令、比例以及视觉效果提示(例如，旋转媒体帧以显示关于这个帧的元数据而不是这个帧的直播视频)的元数据控制包122可以修改场景图和显示管理器208。
布局控制以及其他客户端命令用于添加或从场景图117中移除特定发布的媒体元素。例如，“表现”模式命令建立仅包括单个元素的场景图117，该单个元素的位置和比例与屏幕510许可的物理约束一样大。场景图117包括显示装置102的屏幕510上当前连接的媒体发稿408的布局的标记。“自由形式”模式建立场景图117，其中基于可由用户控制的每个元素的各个放置以及比例偏移定位所有发布的媒体。
表现引擎209(从解码器206)获得解码的视频并将当前的场景图117解释为被渲染成驱动一个或多个共享显示装置102的综合视频图像210的完整的综合显示。
图3为示出本客户端软件107的示例性组件的示意图，该客户端软件107被本身包含显示器的远程装置(如平板电脑、膝上型电脑、智能电话、PC等)使用以控制本地显示器108上的用户视图以及在共享显示器102上显示的视频信息的格式。
如图3所示，在示例性实施例中，客户端软件107包括用于加载并发布诸如图像、视频以及文档的媒体文件的媒体文件模块320。客户端软件107进一步包括用于抓取显示器108上的桌面像素的桌面像素抓取模块321以及用于抓取共享显示器102上的应用窗口像素的应用抓取像素模块322。可选地，像素抓取模块323可被集成在客户端操作系统的图形驱动器中。这样，生成的像素被直接“复刻(fork)”到抓取模块，且渲染引擎直接将像素生成至内存的合适段。
通过视频编/解码器306编码和解码媒体文件109并由客户端软件107将媒体文件发布至一个或多个显示器102。
用户界面308为观看本地客户端显示器108的用户显示系统的控制选项和全局状态。例如，显示选择共享显示器的各种布局的按钮以及选择性地发布新媒体的按钮。此外，通过用户界面绘出对全局状态的更新(例如，当第二用户发布新媒体元素时)以警告用户改变并提供对新发布的元素的控制。
网络层302从执行客户端软件107的客户端主机106接收源自系统的包211，并将源自客户端的包212发送至执行客户端软件107的客户端主机106。
图4为示出在客户端显示器108上显示的示例性用户界面的示意图，其可以与客户端显示装置106上的其他应用结合使用，该客户端显示装置106可以是手持装置，如智能电话或平板电脑、或膝上型电脑或个人电脑(PC)。如图4所示，在示例性实施例中，客户端显示装置108包括应用窗口409，其中显示有选择的媒体发稿408以及其中显示有各种虚拟按钮401-405、413、414和421-425的环绕(或部分环绕)显示区。在示例性实施例中，包括用于与共享显示的列表连接的按钮[按钮401]、用于共享(发布)应用窗口的按钮[按钮402]、用于共享整个客户端显示窗口450的按钮[按钮403]、用于共享客户端媒体文件的按钮[按钮404]、用于从主机系统断开连接的按钮[按钮405]以及用于向显示软件发送信号以改变共享显示的外观和布局的按钮[按钮421-425]。
例如，通过选择按钮421-425，客户端可以修改如何一起显示(可能很多)不同的媒体发稿。表现模式按钮421通知共享显示器仅显示选择的媒体发稿408并隐藏所有的其他媒体发稿。四图模式按钮422通知服务器显示选择的元素及其三个邻居(如规则网格形式的按钮411的列表所示，每个元素具有相同大小)。显示所有模式的按钮423通知服务器以允许屏幕容下每个发稿的大小在3D柱状网格中显示所有元素。翻页模型按钮424通知显示软件以占用屏幕的大部分的大小在显示器的前景中示出选择的元素，而其他媒体发稿以透视模式旋转并被渲染成选择的元素的在先和在后的堆。自由漫游模式按钮425以由能够使用操纵杆控制器430各自地定位和缩放每个元素的所有用户定义的它们的最后位置和比例放置所有媒体。
在示例性实施例中，客户端显示器108的下部分包括显示从显示软件发送至客户端的媒体发稿的缩略图的媒体预览条440以允许每个客户端查看、选择所有发布的媒体并更新所有发布的媒体(包括由其他客户端生成的媒体)的系统共享状态。基于布局和显示设置，即基于来自将警告客户端(例如，布局已经变成四视图(4个项目在屏幕上))的服务器的信号/视频，媒体阴影箱412中的每个指示当前在共享显示器102上发布的媒体发稿。基于当前的布局设置，当前未被共享箱412覆盖的发稿在屏幕上不可见，但保持共享显示会话的部分，继续被现场更新，并且通过用户选择和控制可被引入到共享显示器上的视图中。按钮413和414允许用户在媒体预览条440中滚动发布的媒体条目，选择性地将与缩略图对应的媒体发稿中的每个引入至共享显示器上的视图中。
例如，在表现模式中，在任何给定的时刻，共享屏幕上仅显示一个元素，在这种情况下，箱412仅覆盖单个元素(媒体发稿)。通过使用箭头414和413旋转各种发布的元素的缩略图预览窗口，元素“滑”进区域412且消息被传输至显示软件以修改将被显示的物体以与此刻在区域412中的新缩略图相对应。
在示例性实施例中，通过左击对应的缩略图，媒体预览条440也允许用户选择任意共享的媒体发稿。然后，选择的媒体元素被取出作为窗口409中的大预览且可通过用户输入装置如操纵杆430控制选择的媒体元素。自由形式控制(“虚拟”)操作杆430为用作允许用户定位并缩放应用窗口409中显示的媒体和其他类型的图像的用户输入装置的软件生成的图像。
图5A为示出客户端显示装置106*(*为通配指示符，代表相关项的类的任意成员)上的应用窗口409和共享显示装置102上它们的对应图像之间的一定关系的可选实施例的示例性示意图。如图5A的示例所示，初始地(如位于图的顶部的帧1中所标示)，用于客户端1的显示装置106(1)显示标记为“A”的媒体发稿408(1)，显示装置106(2)显示媒体发稿“C”408(2)，显示装置106(3)显示媒体发稿“D”408(3)，如箭头501-503所标示。在本实施例中，对于显示装置102来说，装置106(1)-106(3)的用户为本地的，且可以观看屏幕510。
如帧2的左半部分中所标示，客户端1使用装置106(1)可以，例如，(1)将媒体发稿A移动至窗口B的下方(如箭头521所标示)，以及如箭头511所标示，(2)调整窗口A的大小，以及(3)通过操纵客户端装置106(1)上的窗口A，扩展或“放大”窗口A。如帧2的右半部分所标示，装置106(1)的用户可以移动(箭头521)，以及如箭头512所标示，可以调整另一客户端窗口的大小或放大另一客户端窗口，观察客户端3通过装置106(3)张贴(发布)的窗口D。不同用户的任意上述动作可以同时地发生。
在显示装置102上显示的图标501(1)-501(2)代表当前连接的客户端/用户。
图5B为示出共享显示装置102上示出的应用窗口与本地和远程客户端显示装置106(*)上的对应图像之间的某种关系的可选实施例的示例性示意图。如图5B的示例所示，初始地(如位于图的顶部的帧1中所标示)，共享显示装置102显示来自远程客户端106(1)(客户端1)以及来自本地客户端106(2)(客户端2)的媒体发稿。媒体发稿A和B由客户端1发布，媒体发稿C由客户端2发布。
如图5B的帧1所示，本地客户端装置106(2)仅显示窗口C，而远程客户端装置106(1)在应用窗口409中显示整个共享显示屏幕510的图像，应用窗口409为客户端2当前发帖的应用。因此，用于客户端1的显示装置106(1)以与显示器102上显示的形式相同的形式显示标记为“A”、“B”和“C”的媒体发稿408。在本实施例中，装置106(*)的“远程”用户通常通过互联网(或专用网)连接至服务器115，并可以足够远离显示装置102，从而用户不能观看显示器102的屏幕510。
如帧2中所标示，客户端1使用装置106(1)可以，例如，(1)将媒体发稿A移动至窗口B的下方，如箭头531所标示，(2)调整窗口A的大小，如箭头532所标示，以及(3)通过操纵客户端装置106(1)上的窗口A，扩展或“放大”窗口A，如上所述。
图6为示出在本系统在连接至共享显示器时的执行的示例性的步骤组的流程图。如图6所示，在步骤630，主机显示软件105在本地网上传输包含关于显示器102及其配置的访问信息的标识包651。在示例性实施例中，标识包651包含关于使能连接建立的服务器的信息(端口号、IP地址等)以及包括服务器名、连接的用户数量、空闲时间、以及安全和验证信息(如，是否需要密码、可以连接什么用户类)的可选的元数据123。
在步骤610，客户端106(*)通过检测标识包651并检查包数据以确定在网络上可用的服务器115和对应的显示器102，来发起显示器发现。在步骤615，用户从本地网上可用的服务器/主机显示器列表中选择共享显示器102。
在步骤620，包含用户访问信息的连接请求包652被客户端传输至选择的服务器115。如块632所标示，在预设时延之后，在步骤635，主机服务器115继续检查来自客户端106的连接请求包652。当接收到请求包652时，服务器115回复标示访问被授权的包，或在服务器被配置为密码访问的情况下，回复请求密码的包。服务器115和客户端106之间的进程连接发生在独立和并行的过程中，以便可以同时发布多个连接请求。
在步骤640，通过更新显示软件的控制和状态管理模块205以反映显示器已接受新用户，处理用于显示访问的当前连接。在步骤645，生成唯一的用户ID(UID)646，并更新关于该用户的视觉信息，例如，选择唯一识别颜色和图标反映关于该用户的包括客户端主机硬件类型、物理位置以及连接类型的信息。这些信息可被渲染至显示器以视觉地通知邻近显示器的其他用户。然后，UID 646被发送至客户端106。在步骤650，图形化地更新显示器102以反映由客户端108发布至显示器的视频数据。
图7A为示出本系统在向共享显示器102发布时执行的示例性的步骤组的流程图。如图7A所示，在步骤710，通过点击媒体预览条440中的项，客户端106(*)发起发布命令以选择(1)存储在媒体文件109中的新的源媒体文件或应用、屏幕区域、整个屏幕；或(2)已发布的帖子，以在显示器102上进行控制。
如果选择了发布命令，那么在步骤718，客户端106将新媒体张帖(发布)请求792发送至服务器115。在步骤720，通过在盘上解码媒体或抓取与发布的源(媒体、应用、屏幕数据)对应的屏幕像素，客户端像素抓取模块323抓取媒体帧726。在步骤725，只要连接保持建立(步骤730)，更新的视频帧726被发送至服务器115和主机104。如果客户端-主机连接掉线，则在步骤735，终止像素抓取并将指示当前客户端的媒体发稿将被删除的消息发送至主机104。
如果在步骤710选择了媒体控制命令，则在步骤712，客户端106发起对目前由任意客户端106(*)发布的媒体发稿的控制。如图7B所示，在步骤713，继续控制流程，如下所述。
在步骤750，服务器115接收媒体张贴请求包792。在步骤755，显示软件105创建与新创建的窗口408相关联的唯一标识符(UID)646。在步骤765，服务器115创建用于更新的解码的视频流766。在步骤770，主机服务器115向客户端106发送包括额外的显示状态信息的更新794，该额外的显示状态信息包括已被张贴的媒体流(及其UID)以及连接的用户数量。
在步骤645(图6)，服务器115将UID 646发送至客户端106以告知新媒体发稿的创建。在步骤775，主机服务器115通过网络层从客户端106接收视频流726，并基于其类型，通过视频编/解码器模块206解码数据以创建像素数据帧776。
在步骤780，显示软件按照媒体发稿(如场景图117所标示)的当前位置、比例和偏移绘制像素数据帧以在显示器102上创建与在客户端装置106上抓取的应用视图相对应的可视帧。
在步骤740，客户端106接收包括额外的显示状态信息的更新并在步骤742更新/存储这些信息。
至此，客户端106返回步骤710，且可以发布另一窗口(并继续上述的步骤组)或移动操纵杆(或其他用户输入装置)430(在步骤712)，并如下面的图7B的描述所述地继续。
异步地执行阴影区701中的步骤(步骤720、725、730、775、780、785)。通过网络层并行地接收来自客户端106的包含音频流的持续的消息，且通过视频解码器模块206解码该持续的消息以创建被拖动(drawn)至显示器102上的共享媒体发稿的新位置中的像素更新。如果媒体发稿不再是活跃的(步骤785)，在步骤790，则从显示器102中删除媒体发稿。
示例1：在该示例中，两个用户A和B使用本方法以同时共享并控制共享显示器102。在该示例中，主机显示软件105在与共享显示器连接的PC 104上运行。PC在具有客户端装置106A和106B本地网上。
[步骤710]，用户A[使用客户端显示器106(1)]选择媒体发稿控制选项，并选择发布至主机显示器的应用或媒体。
[步骤718]，用户A从其界面控制面板中选择“发布”并将请求传输至主机以将新媒体发稿添加(即，发布)至共享显示器。
[步骤720-725]客户端A开始传输与用于媒体发稿的编码数据相对应的视频流726。
[步骤750]服务器接收发布请求。
[步骤755]共享显示软件创建与新创建的窗口相关联的唯一标识符(UID 646)，然后[步骤645]，将该UID发送至用户A以告知新媒体发稿的创建。
[步骤775]主机服务器115通过网络层从客户端A接收视频流，并基于其类型，通过视频编/解码器模块206解码数据以创建像素数据帧776。
[步骤780]然后按照媒体发稿的当前位置、比例和偏移绘制像素数据帧以在显示器510上创建与客户端A上抓取的应用视图相对应的可视帧。
[步骤770]主机服务器115向客户端A和其他连接的客户端发送包括额外的显示状态信息的更新，该额外的显示状态信息包括已被张贴的新媒体流(及其UID 646)以及连接的用户的数量。
[步骤740]客户端A接收包括额外的显示状态信息的更新并更新/存储这些信息[步骤742]。
至此，客户端A返回步骤710，且可以发布另一窗口(并继续上述的步骤组)或移动操纵杆(或其他用户输入装置)430(在步骤712)，并如下所标示继续。使用与用于客户端A的上述步骤类似的一组步骤，客户端B与共享显示器连接。
[步骤740]客户端B通过现在包含包括媒体发稿UID 646和主机显示器102上示出的对应视频帧的信息的状态更新包接收对用户界面的更新(从步骤770)。
[步骤710采用不同选择]用户B通过点击媒体预览条440中的项选择媒体发稿UID646。
[步骤712]拖动操纵杆发起[在步骤713]发送至服务器115的消息，该消息包括：
(1)变换(即平移)以及
(2)正被操纵的媒体发稿的唯一标识符[UID 646]。
[步骤714]服务器使用控制和状态管理模块205接收该包并解码该包。更新(存储在该模块中)服务器的状态以反映刚被应用至特定UID 646的移动。
[步骤715]更新场景图117以图形化地描述新状态。
[步骤780]然后表现引擎209根据媒体的新图形状态绘出新场景。
图7B为示出本系统在可选实施例中进行的操纵共享显示器102上的媒体发稿时执行的示例性步骤组的流程图。如图7B所示，在步骤713，如箭头723所标示，拖动操纵杆430(或其他输入装置)发起发送至服务器115的消息，该消息包括包含(1)变换(即，基于用户输入操纵杆的运动的平移幅度和方向)和(2)正被操纵的媒体发稿的唯一标识符[UID]646的包723。
在步骤714，主机104从客户端106接收包723，解码包，并将变换应用至正确的媒体元素的当前几何和视觉外观状态。在该示例中，通过将平移应用至存储在控制和状态管理器205中的该元素的当前位置，而平移媒体元素。在步骤715，更新场景图117以图形化地描述显示器102的新状态。最终，表现引擎209解释容纳关于所有媒体元素(包括刚被更新的一个媒体元素)的视觉外观的信息的整个场景图117，并创建用于显示器102的合成图像。在图7A中的步骤780，重新开始控制。
示例2：两个用户A和B使用本方法以连接并同时共享和控制显示器。
主机显示软件在与共享显示器连接的PC上运行。PC在具有客户端装置A和B的本地网上。主机显示软件开始在本地网上传输包含关于显示器及其配置的访问信息的发现包。
1.通过检测在网络上可用的发现包并将它们显示给用户以供选择，客户端A连接至主机显示软件。用户A从本地网上的可用主机显示器列表中选择共享显示器。
2.包含用户访问信息的连接包被传输至显示软件。
3.服务器115接收该包并回复访问授权，或在服务器被配置为密码访问时，回复请求密码的包。
4.服务器向客户端A发送包含关于显示器的状态的额外信息的更新，该额外信息包括已被张贴的媒体流(及其UID)以及连接了多少用户。
5.客户端A接收[并存储]授权的访问以及包含额外显示状态信息的更新。
6.客户端A更新其用户界面以反映共享显示器的状态。
7.用户A从界面控制面板中选择“发布”然后选择发布至显示器的媒体发稿。
8.用户A将消息传输至显示器以将新媒体发稿添加至基于应用窗口大小初始化大小的共享显示器。
9.共享显示软件创建与该新创建的窗口相关联的唯一标识符(UID)。
10.共享显示器然后将该唯一标识符传输至用户A以告知新媒体发稿的创建。
11.客户端A然后将像素抓取机制赋予选择的媒体发稿并开始抓取被传递至视频编码引擎的像素数据。
12.客户端A向显示器发送将“视频流”类型和UID相关联的消息。
13.客户端开始传输与用于媒体发稿的编码数据相对应的视频流。
14.服务器115通过网络层接收视频流，并基于其类型，通过视频解码器模块解码数据以创建像素数据帧。
15.然后按照媒体发稿的当前位置、比例和偏移绘制像素数据帧以创建与客户端A上抓取的应用视图相对应的可视帧。根据场景图和当前状态，基于当前显示布局和其他规则，按照位置、比例和偏移并具有其他特定效果(有边框或没有边框)而绘制该新媒体发稿。
16.使用与用于客户端A的上述步骤类似的一组步骤，客户端B连接至共享显示器。
17.客户端B通过现在包含关于媒体发稿UID和服务器上示出的对应视频帧的信息的状态更新包接收对用户界面的更新。
18.用户B通过点击位于用户界面的底部的媒体预览条中的项选择媒体发稿UID。
19.用户B选择操纵杆以控制媒体发稿UID的位置/比例。
20.通过拖动操纵杆，将消息发送至服务器，消息包括：
a.变换(即，基于用户输入操纵杆的运动的操纵杆平移幅度和方向)，以及
b.正被操纵的媒体发稿的唯一标识符[UID]。
21.服务器115使用控制和状态管理模块205接收该包并解码该包。更新(存储在该模块中的)服务器的状态以反映刚被应用至特定UID的移动。
22.更新场景图以图形化地描述各种媒体发稿/选择的布局的新状态，以按照位置和比例并具有由新状态标示的效果而绘制媒体发稿。
23.然后表现引擎2090根据媒体UID的新图形状态绘出新场景。
本发明的某些实施例的上述描述并非意在详尽无遗的公开本发明或将本发明限制于所公开的精确形式。权利要求中所使用的术语不应解释为将本发明限制于本发明所公开的具体实施例，而应当由权利要求定义本发明的范围。

Claims (13)

1.一种用于在共享显示器上同时地显示来自多个客户端装置中的至少两个中的每个的至少一个媒体源的方法，所述方法包括：
将所述客户端装置中的两个或更多个无线地连接至所述共享显示器，所述共享显示器与所述客户端装置中的每个分离；
从至少两个客户端装置中的每个接收各自的媒体源，其中，所述媒体源中的至少一个是与在连接至客户端装置中的第一个的客户端显示装置上显示的屏幕的区域对应的抓取的屏幕像素，且媒体源中的另一个是存储在客户端装置的第一个处的媒体文件或应用，所述媒体文件或应用由所述客户端装置处的编码器/解码器处理成视频流用于显示在共享显示器上；
从任意客户端装置接收用于任意所述媒体源的变换，变换基于发送变换的客户端装置的设置确定平移幅度和比例，幅度和比例限定如显示在所述共享显示器上的每个所述媒体源的位置和大小；
将选择的所述媒体源中的每个传输至所述共享显示器作为各自的直播媒体流；以及
使用所述变换在所述共享显示器上同时地渲染传输的所述媒体源中的每个，以确定所述各自的媒体源中的每个的当前几何状态。
2.根据权利要求1所述的方法，还包括：
将选择的所述媒体源中的每个与对应的所述变换一起传输至所述共享显示器作为各自的直播媒体流；以及
使用所述变换在所述共享显示器上同时地渲染传输的所述媒体源中的每个，以确定所述各自的媒体源的当前几何状态。
3.根据权利要求1所述的方法，其中所述媒体源为图像文件。
4.根据权利要求1所述的方法，其中所述媒体源为一个或多个数据文件。
5.根据权利要求1所述的方法，其中所述客户端装置将包括用户标识和所述共享显示器上的媒体位置的信息传输至所述共享显示器。
6.根据权利要求1所述的方法，其中
无线地连接客户端装置中的两个或更多个包括无线地连接第三客户端装置；
从任意客户端装置接收用于任意所述媒体源的变换包括从所述第三客户端装置接收所述变换，而所述第三客户端装置不共享各自的媒体源视频流。
7.一种用于在耦接至主机的共享显示器上同时地显示来自多个客户端装置中的至少两个客户端装置中的每个的至少一个媒体源的方法，所述方法包括：
将发布媒体发稿的请求从所述至少两个客户端装置中的每个发送至服务器，所述媒体发稿包括与连接至所述客户端装置中的第一个的客户端显示装置上显示的屏幕的区域对应的抓取的屏幕像素，和在所述客户端装置的第一个处存储的媒体文件或应用，所述媒体文件或应用由所述客户端装置处的编码器/解码器处理成视频流用于显示在共享显示器上，所述客户端装置与所述共享显示器分离；
接收对于所述媒体发稿的所述请求；
将新的媒体发稿与唯一的用户ID相关联；
创建包括来自所述客户端装置中的一个的媒体发稿更新的解码的媒体流；
基于对应的所述唯一的用户ID，将包括所述媒体发稿的所述解码的媒体流发送至所述客户端装置中的每个；
接收具有所述媒体发稿的所述解码的媒体流；
在所述共享显示器上更新所述媒体发稿；
通过抓取与发布的图像相对应的屏幕像素，抓取由所述客户端装置中的一个显示的媒体帧；以及
在对应的所述媒体发稿中显示更新的视频。
8.根据权利要求7所述的方法，其中所述媒体源为图像文件。
9.根据权利要求7所述的方法，其中所述媒体源为一个或多个数据文件。
10.根据权利要求7所述的方法，其中所述客户端装置将包括用户标识和所述共享显示器上的媒体发稿位置的信息传输至所述共享显示器。
11.根据权利要求7所述的方法，包括：
从任意客户端接收用于任意所述媒体发稿的变换，所述变换基于发送所述变换的所述客户端装置的用户输入装置的运动确定幅度和方向，所述幅度和方向限定每个所述媒体发稿在所述共享显示器上的位置；
将选择的所述媒体发稿中的每个与对应的所述变换一起传输至所述共享显示器作为各自的直播媒体流；以及
使用所述变换在所述共享显示器上同时地渲染传输的所述媒体发稿中的每个，以确定所述各自的媒体发稿的当前几何状态。
12.根据权利要求7所述的方法，其中抓取和显示的步骤关于其他步骤中的每一步异步地执行。
13.根据权利要求7所述的方法，还包括：
从与所述主机连接的第三客户端装置接收用于任意所述媒体源相对于所述共享显示器的变换，而所述第三客户端装置不与所述主机共享各自的媒体源视频流。
CN201480010455.XA 2013-02-26 2014-02-26 用于共享显示器的多用户控制和流媒体传输的系统和方法 Active CN105210394B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361769609P 2013-02-26 2013-02-26
US61/769,609 2013-02-26
PCT/US2014/018526 WO2014134107A2 (en) 2013-02-26 2014-02-26 System and method for multi-user control and media streaming to a shared display

Publications (2)

Publication Number Publication Date
CN105210394A CN105210394A (zh) 2015-12-30
CN105210394B true CN105210394B (zh) 2019-05-17

Family

ID=51387727

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480010455.XA Active CN105210394B (zh) 2013-02-26 2014-02-26 用于共享显示器的多用户控制和流媒体传输的系统和方法

Country Status (9)

Country Link
US (1) US20140240445A1 (zh)
EP (2) EP2962478B1 (zh)
JP (1) JP2016511603A (zh)
CN (1) CN105210394B (zh)
DK (1) DK2962478T3 (zh)
ES (1) ES2794500T3 (zh)
PL (1) PL2962478T3 (zh)
PT (1) PT2962478T (zh)
WO (1) WO2014134107A2 (zh)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9906594B2 (en) * 2012-02-21 2018-02-27 Prysm, Inc. Techniques for shaping real-time content between multiple endpoints
US9641570B2 (en) 2013-02-28 2017-05-02 Ricoh Company, Ltd. Electronic information collaboration system
US20140245185A1 (en) * 2013-02-28 2014-08-28 Ricoh Company, Ltd. Electronic Information Collaboration System
US10126927B1 (en) * 2013-03-15 2018-11-13 Study Social, Inc. Collaborative, social online education and whiteboard techniques
KR102066226B1 (ko) * 2013-11-01 2020-01-14 엘지전자 주식회사 전자기기 및 이를 구비하는 통신 시스템
JP2016053773A (ja) * 2014-09-03 2016-04-14 コニカミノルタ株式会社 共有表示システム及び共有表示制御プログラム並びに共有表示制御方法
EP3203465A4 (en) * 2014-10-27 2017-10-11 Huawei Technologies Co., Ltd. Image display method, user terminal and video receiving equipment
US9628530B2 (en) 2015-02-24 2017-04-18 Mersive Technologies, Inc. System and method for moderated and on-demand visual file distribution
DE112016001140T5 (de) * 2015-03-09 2017-11-30 Sensory Technologies LLC Interaktives Mehrbenutzer-Anzeigesystem und Verfahren
WO2016154426A1 (en) * 2015-03-26 2016-09-29 Wal-Mart Stores, Inc. System and methods for a multi-display collaboration environment
CN106155646B (zh) * 2015-03-31 2020-01-07 阿里巴巴集团控股有限公司 一种限制外部应用程序调用服务的方法及装置
US9705936B2 (en) * 2015-04-24 2017-07-11 Mersive Technologies, Inc. System and method for interactive and real-time visualization of distributed media
US20160320936A1 (en) 2015-05-01 2016-11-03 Prysm, Inc. Techniques for displaying shared digital assets consistently across different displays
US20160364086A1 (en) * 2015-06-10 2016-12-15 Prysm, Inc. Content sharing broadcast zone
US20170019473A1 (en) * 2015-07-16 2017-01-19 Promethean Limited Multi-network mirroring systems and methods
US20230046864A1 (en) * 2015-07-16 2023-02-16 Promethean Limited Multi-network computing device integration systems and methods
PT3329670T (pt) 2015-07-28 2023-01-10 Mersive Tech Inc Sistema em ponte para controlador de vídeo virtual para colaboração de múltiplas fontes num sistema de conferência por internet
CN105262974A (zh) * 2015-08-12 2016-01-20 北京恒泰实达科技股份有限公司 一种实现多人屏幕无线共享的方法
US20170242648A1 (en) * 2016-02-19 2017-08-24 RAPC Systems, Inc. Combined Function Control And Display And System For Displaying And Controlling Multiple Functions
US10616633B2 (en) 2016-02-29 2020-04-07 T1V, Inc. System for connecting a mobile device and a common display
US11095694B2 (en) * 2016-06-03 2021-08-17 T1V, Inc. Cross network sharing system
US10742812B1 (en) 2016-10-14 2020-08-11 Allstate Insurance Company Bilateral communication in a login-free environment
US10657599B2 (en) 2016-10-14 2020-05-19 Allstate Insurance Company Virtual collaboration
US11463654B1 (en) 2016-10-14 2022-10-04 Allstate Insurance Company Bilateral communication in a login-free environment
US10264213B1 (en) * 2016-12-15 2019-04-16 Steelcase Inc. Content amplification system and method
US10085064B2 (en) * 2016-12-28 2018-09-25 Facebook, Inc. Aggregation of media effects
US10321092B2 (en) * 2016-12-28 2019-06-11 Facebook, Inc. Context-based media effect application
CN110169079B (zh) * 2017-02-06 2022-01-11 惠普发展公司，有限责任合伙企业 在信宿设备上的源设备的媒体内容控制
CN107291412B (zh) * 2017-05-19 2020-09-22 广州视源电子科技股份有限公司 无线传屏方法及系统
CN107846609B (zh) * 2017-10-19 2020-09-04 威创集团股份有限公司 控制室数据实时传输方法、装置和系统
USD844652S1 (en) * 2017-11-26 2019-04-02 Jan Magnus Edman Display screen with graphical user interface
USD851668S1 (en) * 2017-11-27 2019-06-18 Allstate Insurance Company Display screen with graphical user interface
US10579163B2 (en) * 2018-06-02 2020-03-03 Mersive Technologies, Inc. System and method of annotation of a shared display using a mobile device
FI20185601A1 (en) * 2018-06-29 2019-12-30 Genera Oy PUBLIC DISPLAY MANAGEMENT
EP4333425A1 (en) * 2019-02-16 2024-03-06 Samsung Electronics Co., Ltd. Method and device for controlling video reception
CN110389736A (zh) * 2019-06-05 2019-10-29 华为技术有限公司 一种投屏显示方法及电子设备
US12019941B2 (en) * 2019-09-03 2024-06-25 Saturn Licensing Llc Information processing apparatus and information processing method
TWI740208B (zh) * 2019-09-17 2021-09-21 圓展科技股份有限公司 影像傳輸裝置、具有遠端畫面擷取功能的影像顯示系統及遠端畫面影像擷取方法
US11818181B1 (en) * 2020-07-27 2023-11-14 Rgb Spectrum Systems, methods, and devices for a persistent content sharing platform
CN112333527A (zh) * 2020-08-21 2021-02-05 深圳Tcl新技术有限公司 智能设备显示方法、装置、设备及计算机存储介质
CN114173184B (zh) * 2020-09-10 2024-10-18 华为终端有限公司 投屏方法和电子设备
CN115623158A (zh) * 2020-12-18 2023-01-17 北京字跳网络技术有限公司 展示方法、装置和电子设备
CN113766303B (zh) * 2021-05-08 2023-04-28 北京字节跳动网络技术有限公司 多屏互动方法、装置、设备及存储介质
US11330026B1 (en) * 2021-07-31 2022-05-10 Zoom Video Communications, Inc. Concurrent screen sharing by multiple users within a communication session
US11877024B2 (en) * 2022-04-28 2024-01-16 Dish Network L.L.C. Devices, systems, and methods for multi-user screen sharing
US20240114206A1 (en) * 2022-09-30 2024-04-04 Motorola Mobility Llc Variable Concurrent Access to Content of a Device by Multiple Devices

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6088005A (en) 1996-01-11 2000-07-11 Hewlett-Packard Company Design and method for a large, virtual workspace
US7149549B1 (en) * 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
US6917362B2 (en) 2002-01-25 2005-07-12 Hewlett-Packard Development Company, L.P. System and method for managing context data in a single logical screen graphics environment
US7385615B2 (en) * 2002-10-21 2008-06-10 Microsoft Corporation System and method for scaling images to fit a screen on a mobile device according to a non-linear scale factor
US20060031779A1 (en) * 2004-04-15 2006-02-09 Citrix Systems, Inc. Selectively sharing screen data
US20060026502A1 (en) * 2004-07-28 2006-02-02 Koushik Dutta Document collaboration system
US8639812B2 (en) * 2005-04-12 2014-01-28 Belkin International, Inc. Apparatus and system for managing multiple computers
US20080109725A1 (en) 2005-08-05 2008-05-08 Samsung Electronics Co., Ltd. Apparatus for providing multiple screens and method of dynamically configuring multiple screens
US20080034038A1 (en) * 2006-08-04 2008-02-07 Jean-Pierre Ciudad Sharing Application Output In Chat Environment
US8054241B2 (en) 2006-09-14 2011-11-08 Citrix Systems, Inc. Systems and methods for multiple display support in remote access software
US7821510B2 (en) * 2007-04-13 2010-10-26 International Business Machines Corporation Dynamic conference table display system
US7941828B2 (en) * 2007-08-24 2011-05-10 The Boeing Company Method and apparatus for simultaneous viewing of two isolated data sources
US8473851B2 (en) * 2008-02-27 2013-06-25 Cisco Technology, Inc. Multi-party virtual desktop
US20090234983A1 (en) * 2008-03-17 2009-09-17 Golden Signals, Inc. Methods and apparatus for sharing a computer display screen
US8289368B2 (en) 2008-12-15 2012-10-16 Avaya Inc. Intelligent grouping and synchronized group switching for multimedia conferencing
US20100169791A1 (en) 2008-12-31 2010-07-01 Trevor Pering Remote display remote control
US10356136B2 (en) * 2012-10-19 2019-07-16 Sococo, Inc. Bridging physical and virtual spaces
JP2010181978A (ja) * 2009-02-03 2010-08-19 Seiko Epson Corp 共同作業装置及び共同作業の制御方法
US8301169B2 (en) * 2009-10-07 2012-10-30 Research In Motion Limited System and method for providing time zone as instant messaging presence
CA2722460A1 (en) * 2010-11-26 2012-05-26 Centre De Recherche Informatique De Montreal Screen sharing and video conferencing system and method
US20120173622A1 (en) * 2011-01-04 2012-07-05 Samsung Electronics Co., Ltd. Social screen casting
US20150201193A1 (en) * 2012-01-10 2015-07-16 Google Inc. Encoding and decoding techniques for remote screen sharing of media content using video source and display parameters
US9741316B2 (en) 2012-06-22 2017-08-22 Universität des Saarlandes Method and system for displaying pixels on display devices
CN102868916B (zh) 2012-08-27 2016-03-02 腾讯科技（深圳）有限公司 一种向数字电视终端共享信息的方法、终端及系统
JP6333858B2 (ja) * 2013-01-17 2018-05-30 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 複数の視覚コンポーネントを有する画面を共有するためのシステム、装置、および方法

Also Published As

Publication number Publication date
EP2962478A4 (en) 2017-01-04
JP2016511603A (ja) 2016-04-14
US20140240445A1 (en) 2014-08-28
PT2962478T (pt) 2020-04-22
EP2962478A2 (en) 2016-01-06
EP2962478B1 (en) 2020-01-15
DK2962478T3 (da) 2020-04-20
EP3657824A2 (en) 2020-05-27
ES2794500T3 (es) 2020-11-18
PL2962478T3 (pl) 2020-11-16
WO2014134107A3 (en) 2014-10-23
WO2014134107A2 (en) 2014-09-04
EP3657824A3 (en) 2020-09-16
CN105210394A (zh) 2015-12-30

Similar Documents

Publication Publication Date Title
CN105210394B (zh) 用于共享显示器的多用户控制和流媒体传输的系统和方法
CN107636584B (zh) 协作系统中虚拟工作空间视口的跟随模式和位置标记
JP6417408B2 (ja) 空間的イベントマップを備えた共同システム
US9965253B2 (en) Methods and systems for generation and execution of miniapp of computer application served by cloud computing system
US8601510B2 (en) User interface for interactive digital television
JP3859018B2 (ja) ３次元仮想現実空間共有方法、３次元仮想現実空間共有システム、アドレス管理方法、並びにアドレス管理サーバ端末
US6437777B1 (en) Three-dimensional virtual reality space display processing apparatus, a three-dimensional virtual reality space display processing method, and an information providing medium
CN104331243B (zh) 基于缩略图重构的移动终端与大屏显示互动控制方法
JP5419654B2 (ja) 情報処理装置および情報処理システム
US9195677B2 (en) System and method for decorating a hotel room
EP2685715A1 (en) Method and device for managing video resources in video conference
US20180165876A1 (en) Real-time exploration of video content
US20170220314A1 (en) Group-viewing assistance device, group-viewing assistance method, and viewing apparatus
CN111179025A (zh) 一种基于ue4的家装3d场景漫游方法、电子设备及存储介质
EP3621300B1 (en) Display control device and display control method
CN110710203B (zh) 用于生成和渲染沉浸式视频内容的方法、系统和介质
CN107077347A (zh) 视图管理架构
Yennamalli et al. Using a commodity high-definition television for collaborative structural biology
CN104238884B (zh) 基于数字全景的动态信息呈现与用户交互系统及设备
Ishida et al. Proposal of high realistic sensation system using the large scale tiled display environment
Radloff et al. Supporting presentation and discussion of visualization results in smart meeting rooms
US8972877B2 (en) Information processing device for displaying control panel image and information image on a display
CN114210060A (zh) 横幅卡片的互动方法、装置、设备、介质及程序产品
Nocent et al. Toward an immersion platform for the world wide web using autostereoscopic displays and tracking devices
KR100470922B1 (ko) 웹 쓰리 디 가상현실에서 3차원으로 제작된 각종개체물들의 조합 및 표현과정과 결과물 이용에 따른컨텐츠 서비스 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant