CN115053517A - 同步本地房间和远程共享 - Google Patents

同步本地房间和远程共享 Download PDF

Info

Publication number
CN115053517A
CN115053517A CN202180011115.9A CN202180011115A CN115053517A CN 115053517 A CN115053517 A CN 115053517A CN 202180011115 A CN202180011115 A CN 202180011115A CN 115053517 A CN115053517 A CN 115053517A
Authority
CN
China
Prior art keywords
content
shared
application
remote
sharing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180011115.9A
Other languages
English (en)
Inventor
连家欣
M·米斯拉
许志鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Barco NV
Original Assignee
Barco NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Barco NV filed Critical Barco NV
Publication of CN115053517A publication Critical patent/CN115053517A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

描述了一种用于通过利用与在本地会议室中具有相同共享数据的本地投影的电话会议来进行数据共享的方法、系统和设备。还描述了用于对本地房间中的内容的显示以及相同的内容的远程共享进行同步的方法、系统和设备。还描述了用于在限定的房间环境内以及向远程用户提供对共享的多媒体内容访问的方法、系统和设备。

Description

同步本地房间和远程共享
本发明涉及用于通过电话会议来将本地会议室中共享数据的本地投影进行数据共享的方法、系统和设备。本发明涉及用于同步本地房间和远程共享的方法、系统和设备。
背景技术
允许特设(ad hoc)的成组人员相互交流是协作、解决问题、谈判、教学和教育等的基本方面之一。为了辅助通信，已经存在电子通信工具的爆炸式增长，所述电子通信工具诸如电子会议工具，例如同步会议和异步会议、在线聊天、即时消息传递、音频会议、视频会议、数据会议、应用共享、远程桌面共享、电子会议系统、协作管理(协调)工具、项目管理系统、知识管理系统和社交软件系统。
往往经由电话会议来尝试本地与远程之间的协作。在外地参加会议的参与者可以随身携带诸如智能电话、平板电脑、笔记本电脑、电子阅读器等的处理设备，并且他们可能期望能够接收或传递或显示数字内容。
这样的处理设备可以具有用于诸如HDMI、VGA、DisplayPort、Thunderbolt、USB等的各种端口中的一个或多个端口的连接。这些连接可以通过有线或无线连接在会议中运行，从而允许用户使用他们的处理设备。协作或演示系统可能需要将软件包下载到这些处理设备以使得能够使用这样的演示或协作系统进行通信。存在会降低使用这些系统的效率的各种问题。例如，已经在处理设备上的软件包可能是过时的，使得针对要更新的处理设备的第一动作可能包括改变设置并针对要使用的特定格式或应用来配置处理设备。
IT专家通常反对将不熟悉的软件下载到他们的网络上，这可能改变处理设备的配置或正被共享的内容的特性。例如，改变格式可能产生所呈现的数据的不期望的改变。
当前，矩阵交换系统需要硬连线或电缆/有线连接，以可靠地向连接的处理设备传递和从连接的处理设备接收数据的所需的带宽。此外，访问和控制连接到典型的有线矩阵交换系统的任何外围设备需要多个输入装置。目前，没有单个指令和控制装置能控制数据演示、矩阵切换和所连接的外围设备。
虽然有线连接可能能够处理在会议环境中的所有连接的设备之间发送和接收信息所需的大量带宽，但是对应的无线系统通常不具有这样的带宽。由于当前可用的无线系统的有限带宽能力，因此无线应用场合不能处理从硬连线矩阵开关发送到外围计算和多媒体设备的双向信息的量。传统的无线技术不支持具有必要带宽要求的宽带信号，导致数据和信息的构思过程、通信或共享中断，该带宽要求是用于在没有潜在暂停的情况下发送未缓冲且未压缩的协作多媒体数据的。例如，无线系统通常达到700Mbps的传输速率，并且不能实现保持未压缩高清晰度视频会议(HDVC)所需的大于3Gbps的传输速率。
固定位置的有线系统引起安装成本，例如在会议室中配置和重新配置网络的成本。将所有外围设备连接到矩阵切换系统可能需要大量的导线，这可能影响会议室的美观。这种影响通常是破坏性的，并且可能导致会议花费比所需时间更长的时间。
会议室视频会议系统可以通过无线USB软件狗(dongle)暴露于在用户的笔记本电脑上运行的统一通信和协作(UC&C)工具(如：Teams、Skype、WebEx...)。这允许远程参与者体验来自整个房间的音频和视频，而非仅是坐在笔记本电脑正前方的人。除了音频/视频之外，还存在本地和远程参与者双方都看到相同的内容的需求(例如，PowerPoint演示)，其可以如下呈现：
第一步可以是将带有发射器的外围设备插入用户A的笔记本电脑。如果用户A想要远程和本地共享内容(例如，PowerPoint演示)，则需要两个动作：
首先，用户A必须执行所有步骤以激活要显示在会议室屏幕上的数据的本地共享。然后，用户必须与UC&C工具的用户界面交互，以执行所有步骤来与远程用户B远程共享本地显示的内容。
因此，需要至少两个独立的动作来与会议中涉及的所有参与者共享数据，即本地地和远程地共享数据。通常需要计算机知识来建立这样的系统以本地地和远程共享，导致宝贵时间的损失或者人们在会议中对于相同数据是否正被本地地和远程地共享感到困惑。
发明内容
本发明涉及用于通过与在本地会议室中相同共享数据的本地投影电话会议来进行数据共享的方法、系统和设备。本发明还涉及用于对本地房间中的内容的显示以及相同的内容的远程共享进行同步的方法、系统和设备。本发明涉及用于在限定的房间环境内以及与向远程用户提供对共享多媒体内容的访问的方法、系统和设备。
本发明的实施例提供了一种用于同步相同的内容(同一内容)的本地显示和远程显示的方法，其中本地会议室具有本地显示屏和至少一个用户处理设备，该方法包括在用户的处理设备上运行的客户端应用，检测在处理设备上打开的一个或多个窗口(W1、W2、W3....)，并且检测一个或多个窗口中的第一窗口(Wx)属于具有远程共享能力的应用，客户端应用监视具有远程共享能力的应用的第一窗口(Wx)，并且检测具有远程共享能力的应用正在向远程视频会议参与者共享第二窗口(Wy)，客户端应用捕获第二窗口的内容，并且向本地显示屏发送第二窗口(Wy)的内容。
然后，客户端应用优选地保持监视第一窗口(Wx)，以确定用户何时停止通过具有诸如UC&C工具的远程共享能力的应用来共享第二窗口(Wy)。基于所述确定，客户端应用随后停止捕获窗口(Wy)并将其发送到本地显示屏。
可以监视其它窗口的其它行为，以确定期望的用户行为，例如监视屏幕像素或拦截API调用。UC&C工具是一种应用，其允许在两方或更多方之间进行音频、视频和图像通信以及应用的共享或诸如计算机桌面之类的屏幕内容共享。
本发明的实施例提供了一种用于使用处理设备来同步相同的显示内容的本地显示和远程显示的方法，该方法包括：
搜索，最优选地自动搜索，即，没有用户介入地搜索具有远程共享能力的应用在处理设备上的存在，
确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的同一个或另一个应用在处理设备上是否是活动的，
确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的应用的共享状态，
确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的应用是否正在与远程参与者共享内容，
如果正在远程共享内容，则确定，最优选地自动确定，即，没有用户介入地确定正在传输到远程参与者的相同的内容是否也正与本地显示屏共享，以及
如果正在传输到远程参与者并且共享的内容没有与本地显示屏共享，则将与远程共享的相同的内容共享到本地显示屏，最优选地自动共享，即，没有用户介入地共享到本地显示屏。
在当前远程共享的内容未本地共享的情况下，该方法可控制(优选地自动地)允许本地地共享内容的应用，从而将远程地共享的内容也与本地显示屏共享。
该方法使在本地和远程共享内容更容易、更快。
如果正在传输到远程参与者的内容与正在与本地显示屏共享的内容不同，则将与远程共享的内容相同的内容与本地显示屏共享，最优选地自动共享，即，没有用户介入地共享。由于远程和本地观看相同的内容，这使得参与者之间的协作更可靠。
如果正传输到远程参与者并且共享的内容与正与本地显示屏共享的内容不同，则该方法可以控制(优选地自动控制)一应用，该应用允许将与远程共享的相同的内容与本地显示屏进行共享，并且
处理设备可选地触发所述具有远程共享能力的应用，以远程地共享与本地共享的相同的内容。
处理设备可以触发、最优选地自动触发，即，没有用户介入地触发具有远程共享能力的应用，以远程共享、最优选地自动共享，即，没有用户介入地共享与本地共享的相同的内容。这允许使用现有的用于共享的应用，例如，这些应用被触发，例如由客户端应用自动触发。
如果确定、最优选地自动确定，即，没有用户介入地确定一些内容正与本地显示屏共享，但不存在与远程参与者共享的内容，或者与远程参与者共享的内容与本地共享的不同，则向本地用户发出、最优选地自动发出，即，没有用户介入地发出警告：内容正在本地共享但没有远程共享，或者正在共享不同的内容。这允许使用现有的用于共享的应用，并且对参与者的警告可以使他们触发客户端应用以共享内容，例如，自动地共享，即，没有用户介入地共享。
如果正在远程共享内容，则确定正在传输到远程参与者的内容是否也正在由本地共享应用共享到本地显示屏，或者
如果检测到本地共享内容，但是未检测到远程共享，或者检测到与所述远程参与者共享的内容与本地共享的不同，则所述具有远程共享能力的应用将与本地共享的相同的内容进行远程共享。
该警告可以是可听见的警告、弹出窗口、光学警告、触觉警告中的任一种或任意组合。这些警告是常规警告，并因此可以容易地实施。
具有远程共享能力的应用程序可以是UC&C应用。这些应用可以是常规的，并因此可容易地实施。
如果确定、最优选地自动确定，即，没有用户介入地确定正在远程共享内容，则确定、最优选地自动确定，即，没有用户介入地确定与正由本地共享应用正在本地显示屏上共享的内容相同的内容是否正在传输到远程参与者。存在多种用于确定、最优选地自动确定，即，没有用户介入地确定内容是否相同的方法，例如使用OCR以识别文本、识别图像对象，例如通过检测具有对比度跳变或颜色跳变的边缘的对象的边缘、图像中对象的位置等。
如果检测、最优选地自动检测，即，没有用户介入地检测到了本地地共享内容，但未检测到远程地共享，或者检测到与远程参与者共享的内容与在本地共享的内容不同，则具有远程共享能力的应用将与本地共享的相同的内容进行远程共享、最优选地自动共享，即，没有用户介入地共享。这节省了时间，并且不一定需要人工干预，即其可以自动完成。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
处理设备可以触发、最优选地自动触发，即，没有用户介入地触发具有远程共享能力的应用，以远程共享与在本地共享的相同的内容。这样可以节省时间，并且可以避免人为干扰。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
本发明的实施例提供了一种用于使用处理设备来同步相同显示内容的本地显示和远程显示的系统，该系统包括：
用于搜索的装置，用于搜索、最优选地自动搜索，即，没有用户介入地搜索具有远程共享能力的应用在处理设备上的存在，
第一装置，用于确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的同一个或另一个应用在处理设备上是否是活动的，
第二装置，用于确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的应用的共享状态，
第三装置，用于确定，最优选地自动确定，即，没有用户介入地确定具有远程共享能力的应用是否正在与远程参与者共享内容，
如果检测到内容正在远程共享，则提供第四装置，用于确定，最优选地自动确定，即，没有用户介入地确定正传输到远程参与者的相同的内容是否也正由本地共享应用共享到本地显示屏，以及
如果检测到正在传输到远程参与者并且进行共享的内容没有与本地显示屏共享，则提供第五装置，用于将与远程共享的相同的内容共享，最优选地自动共享，即，没有用户介入地共享到本地显示屏。
该系统使在本地和远程共享容变得更容易且更快。
如果检测到正在传输到远程参与者并且进行共享的内容和与本地显示屏共享的不同，则提供装置，用于将与远程共享的相同的内容共享，最优选地自动共享，即，没有用户介入地共享到本地显示屏。这可以节省时间。它也可以自动执行。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
处理设备优选地适于触发、最优选地自动触发，即，没有用户介入地触发具有远程共享能力的应用，以远程共享、最优选地自动共享，即，没有用户介入地共享与在本地共享的相同的内容。这可以节省时间。它可以自动执行而无需人的介入。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
如果确定一些内容正与本地显示屏共享，但是没有与远程参与者共享的内容，或与远程参与者共享的内容与在本地共享的不同，则提供装置，用于向本地用户发出警告、最优选地自动发出警告，即，没有用户介入地发出警告：内容正在本地共享但并未远程共享。这可以节省时间。它可以自动执行。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
该警告可以是可听见的警告、弹出窗口、光学警告、触觉警告中的任一种或任意组合。这些警告是常规警告，并可容易地实施。
具有远程共享能力的应用程序可以是UC&C应用。可以使用现有的应用，节省时间和成本
如果检测到内容正在远程共享，则确定，最优选地自动确定，即，没有用户介入地确定正传输到远程参与者的内容是否与本地共享应用正在共享到本地显示屏的相同。这可以节省时间。它可以自动执行，也就是没有人的介入。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
如果检测、最优选地自动检测，即，没有用户介入地检测到在本地共享内容，但未检测到远程共享，或者检测、最优选地自动检测，即，没有用户介入地检测到与远程参与者共享的内容与在本地共享的不同，则具有远程共享能力的应用将与在本地共享的相同的内容进行远程共享、最优选地自动共享，即，没有用户介入地共享。这可以节省时间。它可以自动执行。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
处理设备可以触发、最优选地自动触发，即，没有用户介入地触发具有远程共享能力的应用，以远程共享与在本地共享的相同的内容。这可以节省时间。它也可以自动执行。其它益处是，它避免了混乱(即，在人的行动不会在本地和远程共享相同的内容的情况下)和IT技能(即，用户不需要知道如何手动操作)。
可以提供一种计算机程序产品，当在处理设备的处理器上执行该计算机程序产品时，该计算机程序产品执行本发明的任何方法。非暂时性信号存储介质可用于储存计算机程序产品。非暂时性信号存储介质可以是例如光盘(CD-ROM或DVD-ROM)、数字磁带、磁盘、诸如USB闪存之类的固态存储器、ROM等。
定义
“自动操作”可包括对计算机或网络元件，诸如，一个或多个处理器、一个或多个存储器，例如，RAM、一个或多个非易失性存储器、一个或多个固态存储器、内部或外部存储器、一个或多个设备、一个或多个应用、一个或多个应用接口、例如用于经由网络进行通信的一个或多个I/O接口的自动控制(即，没有用户介入)。自动操作包括检测在操作系统上运行的应用的状态或存在。
“远程会议”诸如“远程视频会议”
远程会议是指各种类型的在线协作服务，包括网络研讨会(“网研会(webinar)”)、网络广播，对等级别的网络会议和其他协作会话。这样的会议举行可以使用因特网(Internet)技术，例如TCP/IP连接。它们可以提供实时的点对点通信以及从一个发送者到许多接收者的多播通信。它可以提供基于文本的消息、语音、音频或视频的数据流以跨地理上分散的多个位置进行同时共享。
“本地显示器”和“本地设备”
本地显示器和本地设备物理上存在于本地会议室中，本地会议室还具有可以借助其共享视觉和/或可听见的内容的一个或多个处理设备。诸如无线演示系统(WirelessPresentation System)之类的本地共享设备是接收器部分，其从本地共享发送者例如经由无线网络或有线网络接收内容，并将其显示在室内显示器或本地显示器上。本地共享设备可以是连接到会议室显示器或本地显示器的独立设备，或可以是集成在本地会议室显示器中的功能。
“本地共享客户端”
一种在会议室中的处理设备上运行的软件应用，它允许将内容共享到本地显示器。
“具有远程共享能力的应用UC&C应用程序15”是一种用于在处理设备上运行的软件应用，它允许用户与一个或多个远程方进行音频和/或视频通信。其优选地实现在两方或更多方之间进行音频、视频和/或图像通信以及应用的共享或诸如计算机桌面之类的屏幕内容共享。
示例是Teams、Skype、Lync、Zoom、Webex。大多数此类工具还允许与远程方共享内容。所述内容通常下列之一：特定窗口、屏幕的区域、全屏、文件(例如，Powerpoint文件)或网络协作内容(例如，OneDrive上的文件、联网白板(Networked WhiteBoard)应用等)。(参见，例如，美国专利申请US2005172080和US2013268849以及中国专利申请CN105491156(图1)，其中的每个以参见的方式纳入本文)。
“统一通信工具”或“统一通信系统或工具”或“统一通信与协作(UC&C)”是指诸如“SkypeTM”或“SkypeTM for business”提供的音频或音频视觉通信。这样的软件可以接管从主机处理设备提供的音频和/或视觉数据。
UC&C可以描述为用于进行VOIP、(网络)会议、共享白板、消息交换(例如，聊天)、文件传输或状态的工具的集合。统一通信系统或工具可以利用协议定义或标准定义的或特定的通信会话或交互，例如互联网协议语音(VoIP，Voice-Over-Internet-Protocl)、文本或即时消息(例如，AIM、Blauk、eBuddy、Gadu-Gadu、IBM Lotus Sametime、ICQ、iMessage、IMVU、Lync、MXit、Paltalk、SkypeTM、腾讯QQ、Windows Live MessengerTM或MSNMessengerTM、Wireclub、Xfire和Twitter(例如，发推特)、数字服务协议(DSP)等。统一通信系统或工具可以利用视频会议云服务，包括视频会议节点，以允许视频会议中位于第一视频会议端点的一个或多个用户与位于第二个视频会议端点的一个或多个用户进行通信。
处理设备
处理设备具有用于数字电子处理的一台或多台处理器和用于运行一个或多个客户端应用的操作系统和存储器。它可以具有输入/输出接口以允许与一种或多种类型的网络，诸如无线网络或有线网络进行通信。它可以具有输入/输出连接以允许连接一种或多种类型的网络，诸如无线网络或有线网络。它可以有桌面。
“BYOD”设备-(自带设备，Bring Your Own Device)
用户可以将“BYOD”(自带设备，Bring Your Own Device)设备带入会议室。此类设备可以是例如计算机、笔记本电脑、移动电话、智能电话、平板电脑、PDA等。此类设备具有非易失性储存件、处理器、存储器、显示器、网络接口等。
桌面
桌面是登录后处理设备的显示屏所显示的。桌面通常是一个文件夹，其保存文件和文件夹，桌面的内容始终在后台显示在屏幕上。桌面还可包括用于启动应用和管理处理设备的菜单和图标。
窗口
窗口是图形控制元素，包含在处理设备上运行的应用的图形用户界面。应用在桌面上可具有零个窗口(例如，后台进程)或一个或多个窗口。窗口是图形控制元素，包含在处理设备上运行的应用的图形用户界面。应用在桌面上可具有零个窗口(例如，后台进程)或一个或多个窗口。
参见例如：https://en.wikipedia.org/wiki/Window_(computing).
相同的内容
存在各种方法，用于确定两个文件中的内容是否相同，诸如使用OCR识别共同的文本、识别图像对象，例如通过检测对象的边缘，这些对象的边缘具有对比度跳变或颜色跳变，或使在两个不同图像中的对象的位置互相关联等。
附图说明
图1示出了根据本发明的一实施例的如在进行统一通信的会议中使用的处理设备的布置。
图2示出具有根据本发明的一实施例的处理设备的会议室。
图3示出根据本发明的一实施例的处理设备。
图4示出根据本发明的一实施例的消息流。
具体实施方式
本发明的各实施例允许诸如笔记本电脑、计算机、PDA、智能电话等的用户处理设备与本地会议室中的无线网络的基站或单元之间的无线连接，以及允许与远程参与者进行远程共享。可以通过诸如笔记本电脑、计算机、PDA或智能电话等之类的用户处理设备中的集成的无线收发器来建立无线连接。替代地，在本发明的一些实施例中，经由以某种方式插入、联接、连接或附连到用户处理设备的外围设备来进行无线连接，或无线连接由其它硬件或软件提供。
图1示出了本发明的一实施例，在该实施例中，在具有多个处理设备、像12-1至12-3的其他会议参与者在会议室中的情况下，本地共享和远程共享保持同步、最优选地自动保持同步、即，无用户介入地保持同步，并且被共享到本地屏92。本发明的实施例允许参与者使用如12-3的处理设备，并且其可适于在本地和远程均共享它自己的内容，最优选地自动共享，即，没有用户介入地共享。特别地，本发明的各实施例可以触发，最优选地自动触发，即，没有用户介入地触发从本地到诸如UC&C的具有远程共享能力的应用的共享，和/或触发，最优选地自动触发，即，没有用户介入地触发从诸如UC&C的具有远程共享能力的应用到本地的共享。
图1示出了会议室，会议室包括多个处理设备12-1至12-3、显示屏92或与显示屏92连接的显示设备(未示出)，用于本发明的实施例，其中，处理设备12-3正在共享内容，例如与处理设备12-4进行共享。处理设备12-4位于远程位置90，并且可以与处理设备12-3通信并且可以单向或双向地共享内容。本发明的实施例可以可选地触发，最优选地自动触发，即，没有用户介入地触发从本地到诸如UC&C的具有远程共享能力的应用的共享。内容的共享可以是单向或双向的。本发明的实施例可以触发，最优选地自动触发，即，没有用户介入地触发从诸如UC&C的具有远程共享能力的应用到本地的共享。本发明解决了由于使用处理设备12-3的人希望与其他处理设备在本地和远程均共享自己的内容而产生的问题。
图1示出了涉及多个参与者的会议，每个参与者具有例如可以是笔记本电脑的四个处理设备12(12-1、12-2、12-3、12-4)中的一个。可选地，多个、例如三个处理设备(12-1、12-2、12-3)中的每一个可以连接至第一外围设备93，例如，通过将第一外围设备93插入处理设备上的诸如USB或HDMI连接之类的连接中，例如每个处理设备一个。替代地，可以使用与一个或多个处理设备(12-1、12-2、12-3)集成在一起的连接装置，诸如板载无线连接；例如，使用板载收发器建立WiFi连接。
一个处理设备12-3可以是具有远程共享能力的应用的呼叫主机，诸如UC&C统一通信(UC)呼叫，诸如Skype呼叫或Skype for Business呼叫。处理设备12-4是呼叫中远程参与者的处理设备；但不一定是主机设备。在会议室91内，处理设备12-3与位于远程位置90处的处理设备12-4处于呼叫中。
两个处理设备(例如12-1、12-2)中的可选的第一外围设备93(或其它连接装置)已完成无线连接，诸如WiFi连接，例如使用板载收发器，例如与基站99完成无线连接，并且正将媒体共享到主显示屏92。处理设备12-3和12-4与具有远程共享能力的应用共享呼叫，诸如UC&C统一通信(UC)的呼叫，诸如是Skype呼叫或Skype for Business呼叫。
连接到基站99的是以下中的任意项(非穷举列表)：
网络相机或相机94，其例如通过适当的连接，诸如USB或HDMI连接而与基站99连接，
显示屏，例如，触屏92，
扬声器，诸如USB扬声器95，
麦克风，例如USB麦克风96和/或扬声器组97(例如，通过音频插孔，s/pdif、USB、HDMI等连接)。
本发明的实施例涉及主机处理设备12-3(即，在会议室内作为主机运行的处理设备)的修改，以改善对相同的媒体内容的远程和本地显示的设置，最优选地自动改善，即，没有用户介入地改善。主机处理设备12-3优选地具有预安装的客户端软件，用于执行具有远程共享能力的应用，诸如UC&C客户端软件。替代地，主机处理设备12-3可具有启动器应用，该启动器应用在激活时启动用于从服务器或网站或从基站99下载包括具有远程共享能力的软件的应用的程序。替代地，主机处理设备12-3从储存件中获取包括软件的应用，例如从CD-ROM或闪存驱动器、磁带、固态存储器等中获取应用。
该软件与诸如在可选的第一外围设备93上的USB端点之类的端点交互，第一外围设备连接到、例如插入到主机处理设备12-3。这种类型的客户端软件会将扬声器端点，诸如USB端点用作默认音频设备，例如，麦克风加扬声器。本发明的实施例控制从处理设备12-3发射的和注入到处理设备12-3中的所有音频或视觉信号，最优选地自动控制，即，无用户介入地控制。
扬声器电话95可以由任何参与者使用，例如具有连接到处理设备并起作用的第一外围设备93的参与者。无需执行任何操作以访问该设备。本发明的实施例包括在第一外围设备93上可用的独立的控件，例如，用于控制基站99的音频输出的音量，并在必要时使麦克风96静音。当静音时，对于所有其他外围设备或使用该设备的应用，麦克风96也被静音。
用于具有远程共享能力的应用的软件，诸如在主机处理设备12-3上运行的UC&C客户端软件无需注入音频内容。麦克风96可以拾取该音频信号，或者基站99可以将其注入到麦克风信号，该麦克风信号(发送)到连接到主机处理设备12-3的第一外围设备93。可选地，由于等待时间短，因此无需与内容视频进行口形同步(即使共享)。
当将相同类型的第二外围设备(未示出)插入到基站99中时，该第二外围设备可以暴露给用户，使得用户可以使用基站上设置的驱动件，例如从供应商处获得的驱动件。
如果处理设备12之一在室91中共享，则音频内容优选地也在室91中共享。
任何处理设备12，例如具有板载无线通信功能或具有起作用的第一外围设备93的设备可以例如无线访问室内相机94。连接到基站99的所有其它设备(例如，HID控制设备)将被或可以被本机地暴露。
连接到系统的任何用户，例如可选地通过第一外围设备93连接的用户具有查看在用户的处理设备12的显示器上、在会议室91中投影的内容的能力，即“本地视图”。本地视图的接收者可以具有但不限于以下功能中的一个、一些或全部：
通过以下方式打开窗口并在该窗口中查看会议室内容的能力，即，窗口与其是流本身、注释或黑板会话无关。
放大到内容的能力。
可以在特征中添加其它措施以确保放大时的图像质量。
本地视图可允许用户从他/她自己的设备开始和/或参与黑板或注释会话。
进行截图和/或暂停本地视图的能力。
根据本发明的实施例，本地会议室91具有本地显示屏92。在本地会议室91内部，存在至少一个用户，其具有用户处理设备12。该处理设备12可以是用户将其带入会议室91的“BYOD”(自带设备)。
图2示意性地示出了具有至少一个处理设备12的会议室91。处理设备12可以具有处理器3、随机存取存储器5、非易失性存储器7，其可以例如是硬盘驱动器或固态存储器。处理器可具有操作系统。处理设备12可具有多个端口，这些端口具有关联的输入和/或输出端口以及通信接口，诸如：
--电缆连接21，用于与局域网(未示出)通信，和/或用于与室内的显示屏通信，和/或用于与联接至显示屏的显示设备通信，和/或
-无线连接23，和/或
-串行连接11，诸如USB连接11，
其中的一个、一些或全部可用于与室内的显示屏进行通信或/和与连接至显示屏的显示设备进行通信。处理器3、随机存取存储器(RAM)5、非易失性存储器7、输入和/或输出端口，诸如用于与局域网(未示出)进行通信的电缆连接21，诸如无线连接23和诸如USB连接11之类的串行连接11都可以通过总线系统9联系。
外围设备93可具有诸如串行连接之类的连接17，(USB连接是其一个示例)，收发器19或者发送器和接收器。可以将连接17插入在处理设备12的端口11中以提供USB串行连接。
图3示出本发明的另一实施例。根据本发明的实施例，在用户处理设备12-3上运行的客户端应用(优选地自动)检测在处理设备12-3，诸如在处理设备12-3的桌面上打开的一个或多个窗口[W1，W2，W3....]。客户端应用(优选地自动)检测到某个窗口，诸如Wx，属于处理设备12-3上具有远程共享能力的应用，诸如UC&C工具。通过(优选地自动)监视具有远程共享能力的应用，诸如UC&C工具在处理设备12-3上的此窗口Wx，可以(优选地自动)确定共享状态。对于其它窗口的其它行为，诸如至少是窗口Wy，在处理设备12-3上运行的客户端应用(优选地自动)检测到具有远程共享能力的应用，诸如UC&C工具正在将窗口Wy共享到远程位置90处的远程音频、视觉或视频会议参与者。然后，在处理设备12-3上运行的客户端应用(优选地自动)捕获并将同一窗口Wy(优选地自动)发送到本地显示屏92，可选地经由显示设备14和网络18发送。然后，客户端应用将保持监视窗口Wx，以(优选地自动)确定用户何时停止通过具有远程共享能力的应用，诸如UC&C工具来共享窗口Wy。
可选地，可以(优选地自动)隐式从Wx取消共享Wy，或者通过关闭Wx本身来显式地取消共享。客户端应用可以(优选地自动)检测到取消共享动作。客户端应用然后可(优选地自动)停止捕获，并且也(优选地自动)停止将窗口Wy发送到本地显示屏92。
本地共享客户端(20)
本地共享客户端20是在会议室中的处理设备12的操作系统的处理器上运行的软件应用，其允许将内容共享到本地显示器92。该共享可以从本地共享客户端20通过网络18到本地显示器92直接进行，或通过网络18到显示设备进行，诸如连接到本地显示器92的无线演示设备14，或从客户端到无线演示外围设备(诸如USB/HDMI电视棒)到无线演示设备14。通过插入到处理设备12上的诸如USB或HDMI端口之类的连接端口，无线演示外围设备可以连接或联接到处理设备12。
客户端应用20是一个应用，其包括软件块22、24、26、28和29，下文将会参考图3对其进行描述。因此，本地共享客户端20可包括以下软件块：
UC&C应用检测机制(22)
该软件块22是在处理设备12上运行的客户端应用20的一部分，可以(优选地自动)检测在处理设备12上运行的、具有远程共享能力的应用，诸如UC&C应用15的存在。存在几种不同的方法可以完成此操作，每种方法都是本发明的一实施例。包括软件块22的软件块20可以执行下列中的一项、几项或所有：
首先，作为客户端应用20一部分的软件块22可(优选地自动)发出请求，以从处理设备12的操作系统中获取打开的窗口的列表。例如，在处理设备12上运行的软件块22(优选地自动)检测在处理设备12的桌面上打开的窗口[W1，W2，W3....]。
然后，软件块22(优选地自动)检查该窗口列表以确定这些窗口之一是否包括诸如文本字符串之类的指示符，例如包含特定文本字符串的标题。这样的文本字符串可以指示具有远程共享能力的已知的应用，例如，包括已知的UC&C应用标题。
替代地，软件块22可以从处理设备12的操作系统(优选地自动)请求正在运行的进程的列表，并且(优选地自动)确定任何进程的名称是否与已知的文本字符串，例如，具有远程共享能力的已知的应用的名称，诸如已知的UC&C应用进程名称匹配。
对于软件块22，另一种方法是在处理设备12的显示屏上(优选地自动)捕获数据，并且应用OCR或图像识别技术来(优选地自动)检测特定文本字符串的存在，例如，已知的具有远程共享能力的应用的名称，诸如已知的UC&C应用15的名称。
使用上述方法，作为软件块20的一部分的软件块22(优选地自动)检测到窗口Wx属于已知的具有远程共享能力的应用，诸如UC&C工具。例如，软件块22可以(优选地自动)查看窗口或相关进程的名称，并与已知的具有远程共享能力的应用(优选地自动)相匹配，诸如已知的UC&C名称(例如，SkypeTM for Business、Microsoft Teams...)。
又一种方法是软件块22(优选地自动)监视处理设备12上的一个或多个进程的行为并(优选地自动)确定对应于已知的具有远程共享能力的应用，诸如已知的UC&C应用15的指纹行为。
UC&C行为检测机制(24)
例如，软件块24适于(优选地自动)检测已知的具有远程共享能力的应用，诸如UC&C应用15的行为。存在可以做到这一点的不同方式，其中每种都是本发明的一实施例。软件块24可以(优选地自动)执行下列中的一项、多项或全部：
可以通过软件块22或通过软件块24从处理设备12的操作系统中(优选地自动)请求打开的窗口的列表。与如何已经获得列表无关，软件块24可(优选地自动)监视当用户在已知的具有远程共享能力的应用，诸如UC&C应用15中工作时，这些窗口的行为。例如，软件块24可(优选地自动)确定是否当用户点击已知的具有远程共享能力的应用，诸如UC&C应用15时，打开的窗口的列表中的一窗口突然变成持有焦点。
可以由软件块22或由软件块24(优选地自动)发出对该列表的请求。与如何已经获得该列表无关，软件块24可以(优选地自动)确定已知的具有远程共享能力的应用，诸如，UC&C应用程序15是否在另一个窗口周围创建了一个窗口，表明UC&C应用程序15正在捕获该窗口。
软件块24可以(优选地自动)捕获处理设备的屏幕并且应用OCR或图像识别技术以检测已知的具有远程共享能力的应用，诸如，UC&C应用程序15是否已经开始捕获另一窗口，例如，它可以(优选地自动)查找在UC&C应用程序15的用户界面内的文本线索或在另一个窗口周围绘制的矩形。
软件块24可以适于(优选地自动)预测用户可能在共享中感兴趣的内容。例如，软件块24可以(优选地自动)监视指针交互，诸如“鼠标”交互。例如，可以确定悬停窗口小部件上的工具提示或单击的窗口小部件上的状态更新，以(优选地自动)预测用户可能在共享中感兴趣的内容。
因此，通过(优选地自动)监视已知的具有远程共享能力的应用、诸如UC&C工具的窗口Wx，客户端应用24可以(优选地自动)检测已知的具有远程共享能力的应用，诸如UC&C工具正在将某个窗口Wy共享到视频会议参与者的远程处理设备12-4。(优选地自动)监视窗口的状态，例如持有焦点/不持有焦点的窗口的创建/销毁可用于预测用户的行为。例如，在应用TeamsTM(微软，Microsoft)中，当尝试共享窗口时，该工具会将选定的窗口置于前台，然后将在顶部创建另一个共享指示器“边界窗口”。因此，该共享指示器通知(表明)正在与远程参与者共享特定窗口。
另一种选择是(优选地自动)捕获屏幕并使用人工智能，包括机器学习来分析未知的具有远程共享能力的应用，诸如未知的UC&C工具是否正在共享窗口，并且如果是，则找出是哪个窗口及其内容。
本地共享发送方客户端应用(28)
软件块28可以(优选地自动)将内容从处理设备12发送到本地室内显示器92。例如，它可以(优选地自动)使用处理设备12的网络接口将数据发送到本地室内显示器92，或者可以(优选地自动)使用额外的外围设备93，诸如插入在处理设备12的USB端口中的USB外围设备。外围设备93可具有发送器或收发器19(图2)，以(优选地自动)将内容发送到本地室内显示器92，例如，经由本地共享设备14和网络18来执行此操作。
用户通知软件(29)
该软件块29能够向用户(优选地自动)发送通知。通知可以是通知用户一个事件的任何方式，例如下列中的一种或多种：
处理设备的屏幕上的弹出消息。
音频提示或消息。
连接到处理设备的外围设备上的视觉指示器的颜色变化，或处理设备的显示屏上的颜色或视觉图案变化。
触觉信息。
共享/取消共享预测器和同步器(26)
该软件块26具有诸如UC&C应用程序检测机制22之类的检测机制以及诸如UC&C行为检测机制24之类的行为检测机制，该软件块可(优选地自动)组合和/或同步已知的具有远程共享能力的应用以及本地共享状态，以(优选地自动)决定同步动作。
这两个应用都提供诸如针对具有远程共享能力的应用，诸如UC&C应用程序15的(优选地自动运行的)检测机制，即UC&C检测机制22，以及针对具有远程共享能力的应用，诸如UC&C应用程序15的行为检测机制，即UC&C行为检测机制24，这两个应用是优选的或必需的，从而实现本地与远程的同步。软件块22(优选地自动)检测具有远程共享能力的应用，诸如UC&C应用程序15的存在，而软件块24(优选地自动)监视具有远程共享能力的应用，诸如UC&C应用程序15的状态。
该动作可以是下列的一项或两项：
如果已知的具有远程共享能力的应用，诸如UC&C应用程序15正在共享本地共享发送方28未正在共享的一些内容(优选地被自动检测到)，则这是本地共享发送方28(优选地自动)共享相同的内容的触发器，例如借助本地共享设备14投影到本地室内显示器92上。
如果本地共享发送方28正在(优选地自动)共享的内容未被诸如UC&C应用程序15之类的、已知的具有远程共享能力的应用共享，则(优选地自动)执行动作。该动作可以是使用用户通知软件块29来通知用户有关于此的信息。例如，可以(优选地自动)发出警告。替代地，该动作可以是：如果已知的具有远程共享能力的应用，诸如UC&C应用程序15具有编程地(并且优选地自动)执行该动作的手段，则(优选地自动)触发已知的具有远程共享能力的应用，诸如UC&C应用程序15，与远程参与者(优选地自动)共享相同的内容。替代地，可以通过其它手段，例如，模拟事件，诸如模拟键盘或鼠标事件或类似事件来(优选地自动)提供用于具有远程共享能力的应用，诸如UC&C应用程序15的触发器。替代地，可以通过系统API(例如，操作系统事件)诸如Window的PostMessages来(优选地自动)提供触发器。
当客户端应用开始“本地地”共享时，已知的具有远程共享能力的应用，对诸如现有的UC&C工具15将(优选地自动)监视其在处理设备12的操作系统中的存在。如果客户端软件(优选地自动)发现诸如UC&C工具15之类的已知的具有远程共享能力的应用，则快速访问快捷方式通过用户通知块29(优选地自动)通知用户。当用户点击快捷方式时，客户端应用将自动将所选择的工具带到前台，以允许用户以高效的方式开始“远程地”共享。
系统上的其它窗口W1、...Wn、...(32)
这是处理设备12的操作系统上可用的窗口的列表。单个应用可具有多个活动窗口。例如，在演示过程中，PowerpointTM可具有显示演示的窗口和给演示者的包含注释的窗口。
室内显示器(92)和本地共享设备(14)
这些设备14和92物理上存在于本地室91中，本地室具有可以共享视觉内容和/或可听见的内容的处理设备12。本地共享设备14(诸如无线演示系统)是接收器部分，其从本地共享发送方28(例如，经由无线网络或有线网络18)(优选地自动)接收内容，并将其显示在室内显示器92上。本地共享设备14可以是连接到室内显示器92的独立的设备，或者可以是集成在室内显示器92中的功能。
模糊共享保护
经由窗口Wx共享的一个或一些或所有窗口Wy可以满足100％的预测精度，因为预测精度的成功取决于“行为采样率”以及可以从窗口Wx和Wy中检索到哪些“输入”，从而馈入到预测模型中。在这种情况下，检测逻辑可能会遇到模糊决定。为了解决这个问题，客户端应用可以通过用户通知框29自动地显示快速窗口共享快捷方式，以使用户进行干预并解决模糊决定。
图4示出根据本发明的一实施例的方法101的流程图。在步骤102中，(优选地自动)启动本地共享应用，例如，在本地处理设备12上启动本地共享应用，该设备位于本地会议室91中，本地共享应用利用在本地处理设备12的处理器3上运行的操作系统，加上按需利用存储器5、7。在步骤104中，由客户端应用(优选地自动)开始搜索在处理设备上具有远程共享能力的应用，诸如UC&C应用的存在。客户端应用利用在本地处理设备12的处理器3上运行的操作系统，加上按需利用存储器5、7。该方法步骤优选地使用在处理设备12的处理器3上运行的操作系统加上按需使用存储器5、7来在处理设备12上连续地或间歇地执行，并且有很大的可能是在合理的时间内，诸如在5分钟以内将检测到存在。在步骤106中，使用在使用处理设备12的处理器3的操作系统上运行的客户端应用，并按需利用存储器5、7，来(优选地自动)确定具有远程共享能力的应用，诸如UC&C应用是否在处理设备12上活动。如果在步骤106中为“否”，则方法101返回到步骤104以再次尝试。方法101将重复且连续地经历步骤104和106的顺序，直到发现具有远程共享能力的应用，诸如UC&C应用是活动的。如果在步骤106中为“是”，则方法101进入步骤108，在步骤108中，(优选地自动)确定具有远程共享能力的应用，诸如，UC&C应用的共享状态。例如，这可以使用在处理设备12的处理器3的操作系统上运行的客户端应用并按需利用存储器来(优选地自动)确定。在步骤110中，由在处理设备12的处理器3的操作系统上运行的客户端应用，按需利用存储器来(优选地自动)确定具有远程共享能力的应用，诸如UC&C应用是否正在与远程参与者共享内容。如果在步骤110中为“是”，则在步骤116中，由在处理设备12的处理器3的操作系统上运行的客户端应用按需利用存储器5、7来(优选地自动)确定是否正在将与传输到远程参与者的内容正在由本地共享应用共享到本地显示屏92、并且可选地共享到在本地显示屏92上显示内容的本地共享设备。如果在步骤116中为“否”，则在步骤118中，在处理设备12的处理器3的操作系统上运行并且按需利用存储器5、7的本地共享应用将与远程参与者共享的内容相同的内容共享到本地显示屏92，并且可选地共享到将内容显示在本地显示屏92上的本地共享设备。该共享可以由在处理设备的处理器的操作系统上运行的客户端应用(优选地自动)触发。方法101然后返回到步骤104。替代地，如果在步骤116中为“否”，则在步骤118中向本地用户(优选地自动)发出警告：内容正在本地共享，但并未远程共享，或者正在共享不同的内容。该警告可以是可听见的警告、弹出窗口、以及光学警告、触觉警告中的任一种或任意组合。方法101然后返回到步骤104。如果在步骤116中为“是”，则方法101返回到步骤104。
如果在步骤110中为“否”，则在步骤112中，在处理设备12的处理器3的操作系统上运行并且按需利用存储器5、7的本地共享应用(优选地自动)确定是否有任何内容正在由具有远程共享能力的应用，诸如UC&C应用进行共享，例如通过处理设备12共享到本地显示屏或共享到将内容显示在本地显示屏92上的本地显示设备。如果在步骤112中为“是”，则在步骤114中(优选地自动)确定具有远程共享能力的应用，诸如UC&C应用的共享状态是否能由本地共享应用改变。如果在步骤114中为“是”，则在步骤115中，在处理设备12的处理器3的操作系统上运行并且按需利用存储器5、7的本地共享应用将与远程参与者共享的内容相同的内容共享到本地显示屏92，并且可选地共享到将内容显示在本地显示屏92上的本地共享设备。该共享可以由在处理设备12的处理器3的操作系统上运行的客户端应用触发。方法101然后返回到步骤104。
如果在步骤114中为“否”，则在步骤115中发出警告，在步骤117中向本地用户(优选地自动)发出：内容正在本地共享，但并未远程共享，并且方法返回到步骤104。该警告可以是可听见的警告、弹出窗口、以及光学警告、触觉警告中的任一种或任意组合。如果在步骤112中为“否”，则方法101返回到步骤104。
本发明的实施例涉及一种用于使用处理设备来同步相同显示内容的本地显示和远程显示的系统。系统可以包括用于(优选地自动)搜索具有远程共享能力的应用在处理设备上的存在的装置，诸如由具有适于搜索具有远程共享能力的应用在处理设备上的存在的操作系统和处理器的处理设备来提供的装置。系统可包括用于(优选地自动)确定具有远程共享能力的应用在处理设备上是否活动的第一装置，例如由具有适于确定具有远程共享能力的应用在处理设备上是否活动的操作系统和处理器的处理设备来提供的第一装置。系统可包括用于(优选地自动)确定具有远程共享能力的应用的共享状态的第二装置，例如由具有适于确定具有远程共享能力的应用的共享状态的操作系统和处理器的处理设备来提供的第二装置。系统可包括用于(优选地自动)确定具有远程共享能力的应用是否正在与远程参与者共享内容的第三装置，诸如由具有适于确定具有远程共享能力的应用的共享状态的操作系统和处理器的处理设备来提供的第三装置。系统可适配为使得如果(优选地自动)检测到内容正被远程共享，则提供第四装置，用于(优选地自动)确定正在传输到远程参与者的相同的内容是否也被本地共享应用共享到本地显示屏，诸如由具有适于确定正传输到远程参与者的相同的内容是否也被本地共享应用共享到本地显示屏的操作系统和处理器的处理设备提供的第四装置。该系统可以适配为使得，如果(优选地自动)检测到正传输到远程参与者并被共享的内容并未也被共享到本地显示屏，则提供用于将与远程共享的相同的内容共享到本地显示屏的装置，诸如由具有适于使用本地共享应用将正传输到远程参与者的相同的内容共享到本地显示屏的操作系统和处理器的处理设备所提供的装置。系统可适配为使得如果(优选地自动)检测到正在传输到远程参与者并且共享的内容与正在共享到本地显示屏的内容不同，则提供用于(优选地自动)将与远程共享的相同的内容共享到本地显示屏的装置。系统可适配为使得，如果(优选地自动)确定一些内容正在共享到本地显示屏，但是不存在与远程参与者共享的内容，或与远程参与者共享的内容与在本地共享的不同，则提供装置，用于向本地用户(优选地自动)发出警告：内容正在本地共享但并未远程共享。该警告可以是可听到的警告(例如，警报噪声)或触觉(例如，振动)、视觉(例如，图案或颜色的改变)、光学(例如，强度的改变，闪烁的灯光)或类似物中的任何一种或全部。
系统可适配为使得，如果内容正在远程共享，则提供装置，用于(优选地自动)确定正传输到远程参与者的内容是否与由本地共享应用共享到本地显示屏的相同。
实施方式
根据本发明的实施例，软件可以实施为计算机程序产品，其已经被针对处理引擎进行编译，以执行本发明的任何方法，或者其已经被编译以在解释性虚拟机，例如JavaTM虚拟机中执行。多个或所有软件部件可以储存在存储器中，并且可以由处理设备12中的处理器3执行。术语“可执行”是指程序文件的形式最终可以由处理器3运行。可执行程序的示例可以是例如经编译的程序，其可以以可以加载到随机存取存储器5中并由处理器3运行的格式翻译成机器代码，或者是可以以适当格式表示的源代码，诸如能够被加载到随机存取存储器5中并由处理器3执行的目标代码，或是可以由另一可执行程序翻译以在随机存取存储器5中生成要由处理器3执行的指令的源代码，等。
诸如处理设备12之类的设备可以包括编码在介质中的逻辑，用于(优选地自动)执行根据本发明实施例的各方法的步骤中的任何步骤。逻辑可以包括在磁盘或其它计算机可读介质中编码的软件和/或在专用集成电路(ASIC)、现场可编程门阵列(FPGA)或其它处理器或硬件中编码的指令。处理设备12还将包括CPU和/或GPU和存储器，CPU和/或GPU具有能够执行本发明的软件的处理引擎。
计算机程序产品可以储存在非暂时性信号存储介质中，诸如光盘(CD-ROM或DVD-ROM)、数字磁带、磁盘、诸如USB闪存之类的固态存储器、ROM等。
该软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备，诸如处理设备12并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时(优选地自动)执行下列功能：
使用处理设备(优选地自动)同步相同显示内容的本地显示和远程显示。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
(优选地自动)搜索具有远程共享能力的应用在处理设备上的存在，
(优选地自动)确定具有远程共享能力的应用是否在处理设备上活动，
(优选地自动)确定具有远程共享能力的应用的共享状态，
(优选地自动)确定具有远程共享能力的应用是否正在与远程参与者共享内容，
如果正在远程共享内容，则(优选地自动)确定正在传输到远程参与者的相同的内容是否也正在与本地显示屏共享，以及
如果(优选地自动)检测到正在传输到远程参与者并且被共享的内容没有也与本地显示屏共享，则将与远程共享的相同的内容(优选地自动)共享到本地显示屏。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
如果(优选地自动)检测到正在传输到远程参与者并且共享的内容与正与本地显示屏共享的不同，则将与远程共享的相同的内容(优选地自动)共享到本地显示屏。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
如果(优选地自动)确定一些内容正与本地显示屏共享，但不存在与远程参与者共享的内容，或者与远程参与者共享的内容与在本地共享的不同，则(优选地自动)向本地用户发出警告：内容正在本地共享但没有远程共享，或者正在共享不同的内容，
该警告优选地是可听见的警告、弹出窗口、光学警告、触觉警告中的任一种或这些的任意组合。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
实施为具有远程共享能力的应用程序，即UC&C应用。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
如果(优选地自动)检测到正在远程共享内容，则(优选地自动)确定正在传输到远程参与者的内容是否也正在由本地共享应用共享到本地显示屏。
软件可以实施在计算机程序产品中，该计算机程序产品适于在将软件加载到相应的一个或多个相应的设备上并在一个或多个处理引擎，诸如微处理器、ASIC、FPGA等上执行时执行下列功能：
如果(优选地自动)检测到在本地共享内容，但未(优选地自动)检测到远程共享，或者(优选地自动)检测到与远程参与者共享的内容与在本地共享的不同，则具有远程共享能力的应用将与在本地共享的相同的内容进行(优选地自动地)远程共享。
存在各种基于计算机的方法(即，基于软件的方法)用于确定内容是否相同，诸如使用OCR以识别文本、识别图像对象，例如通过检测具有对比度跳变或颜色跳变的边缘的对象的边缘、或关联两个图像中对象的位置，等。
软件，例如上述计算机产品可以储存在非暂时性信号存储介质中，诸如光盘(CD-ROM或DVD-ROM)、数字磁带、磁盘、ROM、诸如USB闪存之类的固态存储器或类似物。
尽管本发明已在上文中参照多个实施例进行了描述，但是这是为了阐释而非限制本发明，本发明的范围由所附权利要求书确定。技术人员将会理解的是，本文中结合独立的实施例公开的特征可以与来自其它实施例的特征结合以获得相同的技术效果和优点，而不偏离本发明的范围。

Claims (35)

1.一种用于使用处理设备来同步相同显示内容的本地显示和远程显示的方法，所述方法包括：
搜索具有远程共享能力的应用在处理设备上的存在，和/或
确定具有远程共享能力的相同应用或另一应用是否在所述处理设备上活动，
确定所述具有远程共享能力的应用的共享状态，
确定所述具有远程共享能力的应用是否正在与远程参与者共享内容，
在正在远程共享内容的情况下，确定正在传输到远程参与者的相同的内容是否也正在与本地显示屏共享，以及
在正在传输到远程参与者并且共享的内容也没有与本地显示屏共享的情况下，则将与远程共享的相同的内容与本地显示屏共享。
2.如权利要求1所述的方法，其特征在于，在当前远程共享的内容未本地共享的情况下，应用允许本地共享内容，以便将远程共享的内容也与本地显示屏共享。
3.如权利要求1或2所述的方法，其特征在于，在正传输到远程参与者并且共享的内容与正与所述本地显示屏共享的内容不同的情况下，应用允许将与远程共享的相同的内容与所述本地显示屏共享。
4.如前述权利要求中任一项所述的方法，其特征在于，所述处理设备触发所述具有远程共享能力的应用，以远程共享与本地共享的相同的内容。
5.如权利要求3或4所述的方法，其特征在于，在确定一些内容正与所述本地显示屏共享，但不存在与所述远程参与者共享的内容，或者与所述远程参与者共享的内容与本地共享的内容不同的情况下，向本地用户发出以下警告：内容正在本地共享但没有远程共享，或者正在共享不同的内容。
6.如权利要求5所述的方法，其特征在于，所述警告是听得见的警告、弹出窗口、光学警告和触觉警告中的任一种。
7.如前述权利要求中任一项所述的方法，其特征在于，所述具有远程共享能力的应用是统一通信和协作应用(UC&C应用程序)。
8.如权利要求7所述的方法，其特征在于，所述统一通信和协作应用(UC&C应用程序)允许与远程方共享内容，所述内容是下列中的一项或多项：特定窗口、屏幕的区域、全屏、文件、演示或网络协作内容。
9.如权利要求1至8中任一项所述的方法，其特征在于，统一通信和协作应用(UC&C应用程序)利用视频会议云服务，包括视频会议节点，以允许在视频会议中位于第一视频会议端点的一个或多个用户与位于第二个视频会议端点的一个或多个用户进行通信。
10.如权利要求1至8中任一项所述的方法，其特征在于，统一通信和协作应用(UC&C应用程序)使用工具的集合来执行互联网协议语音(VoIP)、(网络)会议、共享白板、包括聊天的消息交换、文件传输或状态中的任一种。
11.如权利要求1至8中任一项所述的方法，其特征在于，统一通信和协作应用(UC&C应用程序)利用协议定义或标准定义的或特定的通信会话或交互，包括下列中的任一项：互联网协议语音(VoIP)、文本或即时消息，例如，AIM、Blauk、eBuddy、Gadu-Gadu、IBM LotusSametime、ICQ、iMessage、IMVU、Lync、MXit、Paltalk、SkypeTM、腾讯QQ、Windows LiveMessengerTM或MSN MessengerTM、Wireclub、Xfire和Twitter(例如，发推特)、数字服务协议(DSP)和类似物。
12.如前述权利要求中任一项所述的方法，其特征在于，所述具有远程共享能力的应用是在处理设备上运行的软件应用，它允许用户与一个或多个远程方进行音频和/或视频通信。
13.如权利要求1至11中任一项所述的方法，其特征在于，所述具有远程共享能力的应用允许与远程方共享内容，所述内容是下列中的一项或多项：特定窗口、屏幕的区域、全屏、文件、演示或网络协作内容。
14.如前述权利要求中任一项所述的方法，其特征在于，在内容正在远程共享的情况下，确定正传输到远程参与者的相同的内容是否也正由本地共享应用共享到本地显示屏。
15.如权利要求1至14中任一项所述的方法，其特征在于，在检测到本地共享内容但是未检测到远程共享，或者检测到与所述远程参与者共享的内容与本地共享的不同的情况下，所述具有远程共享能力的应用将与本地共享的相同的内容进行远程共享。
16.如权利要求4至15中任一项所述的方法，其特征在于，所述处理设备触发所述具有远程共享能力的应用，以远程共享与本地共享的相同的内容。
17.如权利要求1至16中任一项所述的方法，其特征在于，在没有用户交互或用户干预的情况下执行。
18.一种使用处理设备来同步相同的显示内容的本地显示和远程显示的系统，所述系统包括：
用于搜索具有远程共享能力的应用在所述处理设备上的存在的装置，和/或
用于确定具有远程共享能力的应用在所述处理设备上是否活动的第一装置，
用于确定具有远程共享能力的应用的共享状态的第二装置，
用于确定所述具有远程共享能力的应用是否正在与远程参与者共享内容的第三装置，
在内容正在远程共享的情况下，则第四装置用于确定正传输到远程参与者的内容是否与本地共享应用共享到本地显示屏的相同，以及
在正在传输到远程参与者并且共享的内容并未也与本地显示屏共享的情况下，则第五装置用于将与远程共享的相同的内容共享到本地显示屏。
19.如权利要求18所述的系统，其特征在于，在正在传输到远程参与者并且共享的内容与正与所述本地显示屏共享的内容不同的情况下，则提供装置，用于将与远程共享的相同的内容共享到所述本地显示屏，并且其中所述处理设备可选地适于触发所述具有远程共享能力的应用以远程共享与本地共享的相同的内容。
20.如权利要求18或19所述的系统，其特征在于，在确定一些内容正与所述本地显示屏共享，但不存在与所述远程参与者共享的内容，或者与所述远程参与者共享的内容与本地共享的内容不同的情况下，则提供装置，用于向本地用户发出以下警告：内容正在本地共享但没有远程共享，或者正在共享不同的内容。
21.如权利要求20所述的系统，其特征在于，所述警告是听得见的警告、弹出窗口、光学警告和触觉警告中的任一种。
22.如权利要求18至21中任一项所述的系统，其特征在于，所述具有远程共享能力的应用是统一通信和协作应用(UC&C应用程序)。
23.如权利要求18至22中任一项所述的系统，其特征在于，所述统一通信和协作应用是允许在两方或更多方之间进行音频、视频和图像通信以及应用的共享或诸如计算机桌面的屏幕内容共享的应用。
24.如权利要求22或23所述的系统，其特征在于，所述统一通信和协作应用(UC&C应用程序)允许与远程方共享内容，所述内容是下列中的一项或多项：特定窗口、屏幕的区域、全屏、文件、演示或网络协作内容。
25.如权利要求22或23所述的系统，其特征在于，所述统一通信和协作应用(UC&C应用程序)利用视频会议服务，包括视频会议节点，以允许在视频会议中位于第一视频会议端点的一个或多个用户与位于第二视频会议端点的一个或多个用户进行通信。
26.如权利要求22或23所述的系统，其特征在于，统一通信和协作应用(UC&C应用程序)使用工具的集合来执行互联网协议语音(VoIP)、(网络)会议、共享白板、包括聊天的消息交换、文件传输或状态共享中的任一种。
27.如权利要求22或23所述的系统，其特征在于，统一通信和协作应用(UC&C应用程序)利用协议定义或标准定义的或特定的通信会话或交互，包括下列中的任一项：互联网协议语音(VoIP)、文本或即时消息，例如，AIM、Blauk、eBuddy、Gadu-Gadu、IBM Lotus Sametime、ICQ、iMessage、IMVU、Lync、MXit、Paltalk、SkypeTM、腾讯QQ、Windows Live MessengerTM或MSN MessengerTM、Wireclub、Xfire、Twitter(例如，发推特)、数字服务协议(DSP)以及类似物。
28.如权利要求18至27中任一项所述的系统，其特征在于，具有远程共享能力的应用是在处理设备上运行的软件应用，它允许用户与一个或多个远程方进行音频和/或视频通信。
29.如权利要求18至28中任一项所述的系统，其特征在于，所述具有远程共享能力的应用允许与远程方共享内容，所述内容是下列中的一项或多项：特定窗口、屏幕的区域、全屏、文件、演示或网络协作内容。
30.如权利要求18至29中任一项所述的系统，其特征在于，在内容正在远程共享的情况下，确定正传输到远程参与者的相同的内容是否也正由本地共享应用共享到本地显示屏。
31.如权利要求18至29中任一项所述的系统，其特征在于，在检测到本地共享内容但是未检测到远程共享，或者检测到与所述远程参与者共享的内容与本地共享的不同的情况下，则所述具有远程共享能力的应用将与本地共享的相同的内容进行远程共享。
32.如权利要求31所述的系统，其特征在于，所述处理设备触发所述具有远程共享能力的应用，以远程共享与本地共享的相同的内容。
33.一种计算机程序产品，当在处理设备的处理器上执行所述计算机程序产品时，所述计算机程序产品执行如权利要求1至17中任一项所述的方法。
34.一种非暂时性信号存储介质，其储存如权利要求33所述的计算机程序产品。
35.如权利要求34所述的非暂时性信号存储介质，其特征在于，是光盘(CD-ROM或DVD-ROM)、数字磁带、磁盘、固态存储器或ROM。
CN202180011115.9A 2020-01-26 2021-01-26 同步本地房间和远程共享 Pending CN115053517A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP20153753.7 2020-01-26
EP20153753 2020-01-26
PCT/EP2021/051775 WO2021148682A1 (en) 2020-01-26 2021-01-26 Synchronizing local room and remote sharing

Publications (1)

Publication Number Publication Date
CN115053517A true CN115053517A (zh) 2022-09-13

Family

ID=69423059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180011115.9A Pending CN115053517A (zh) 2020-01-26 2021-01-26 同步本地房间和远程共享

Country Status (7)

Country Link
US (1) US11900006B2 (zh)
EP (1) EP4094430A1 (zh)
JP (1) JP2023513453A (zh)
CN (1) CN115053517A (zh)
AU (1) AU2021211163A1 (zh)
TW (1) TW202147834A (zh)
WO (1) WO2021148682A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110442366B (zh) * 2019-08-09 2021-06-15 广州视源电子科技股份有限公司 一种传屏处理方法、装置、设备和存储介质
CN114371896B (zh) * 2021-12-30 2023-05-16 北京字跳网络技术有限公司 一种基于文档共享的提示方法、装置、设备及介质
TWI801095B (zh) * 2022-01-14 2023-05-01 宏碁股份有限公司 用於線上會議的通訊裝置和通訊方法
US11768653B2 (en) 2022-02-01 2023-09-26 Cisco Technology, Inc. Dynamic window detection for application sharing from a video stream
US12061832B2 (en) 2022-04-26 2024-08-13 Zoom Video Communications, Inc. Virtual display instantiation for video conference content screen sharing
US11860771B1 (en) * 2022-09-26 2024-01-02 Browserstack Limited Multisession mode in remote device infrastructure

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6971110B1 (en) * 2000-02-19 2005-11-29 Hewlett-Packard Development Company, L.P. System and method to pace event sharing collaboration across multiple distributed applications
US6877027B1 (en) * 2000-02-19 2005-04-05 Hewlett-Packard Development Company, L.P. System and method for providing synchronization verification of multiple applications across remote systems
US6850967B1 (en) * 2000-02-19 2005-02-01 Hewlett-Packard Development Company, L.P. System and method for ensuring transparent sychronization of multiple applications across remote systems
JP4244572B2 (ja) 2002-07-04 2009-03-25 ソニー株式会社 キャッシュ装置、およびキャッシュデータ管理方法、並びにコンピュータ・プログラム
US6994259B2 (en) * 2002-12-30 2006-02-07 Intel Corporation Method and apparatus for maintaining coherency of shared state between local and remote
US20090112996A1 (en) * 2007-10-25 2009-04-30 Cisco Technology, Inc. Determining Presence Status of End User Associated with Multiple Access Terminals
US20090110169A1 (en) * 2007-10-25 2009-04-30 Cisco Technology, Inc. Initiating a Conference Session Based on Availability of End Users
US20090110167A1 (en) * 2007-10-25 2009-04-30 Cisco Technology, Inc. Diverting a Call Session to a Text Session
US20090112926A1 (en) * 2007-10-25 2009-04-30 Cisco Technology, Inc. Utilizing Presence Data Associated with a Resource
US20090119365A1 (en) * 2007-10-30 2009-05-07 1St Works Corporation Method and apparatus for display synchronization using image compression
US9495663B2 (en) * 2011-01-19 2016-11-15 Cisco Technology, Inc. Automatic meeting invitation based on proximity
US10044871B2 (en) * 2011-04-29 2018-08-07 Crestron Electronics, Inc. Conference system including automated equipment setup
US20130268849A1 (en) 2012-04-09 2013-10-10 Charles Qiao Du Method and System for Multi-Party Collaborative Content Management through an Inverted Social Network
US9113033B2 (en) * 2012-08-28 2015-08-18 Microsoft Technology Licensing, Llc Mobile video conferencing with digital annotation
US9094524B2 (en) * 2012-09-04 2015-07-28 Avaya Inc. Enhancing conferencing user experience via components
US10243786B2 (en) * 2013-05-20 2019-03-26 Citrix Systems, Inc. Proximity and context aware mobile workspaces in enterprise systems
US9319532B2 (en) * 2013-08-15 2016-04-19 Cisco Technology, Inc. Acoustic echo cancellation for audio system with bring your own devices (BYOD)
US9754097B2 (en) * 2014-02-21 2017-09-05 Liveensure, Inc. Method for peer to peer mobile context authentication
US9563445B2 (en) * 2014-05-05 2017-02-07 Citrix Systems, Inc. Remote assistance for managed mobile devices
US9351098B2 (en) * 2014-05-19 2016-05-24 Lenovo (Singapore) Pte. Ltd. Providing access to and enabling functionality of first device based on communication with second device
US9338400B1 (en) * 2014-08-18 2016-05-10 Avaya Inc Systems and methods for using equivalence classes to identify and manage participants and resources in a conference room
US20190043148A1 (en) * 2015-07-30 2019-02-07 The Government of the United States of America, as represented by the Secretary of Homeland Security Information collection using multiple devices
US10447795B2 (en) * 2015-10-05 2019-10-15 Polycom, Inc. System and method for collaborative telepresence amongst non-homogeneous endpoints
JP6598875B2 (ja) 2015-11-24 2019-10-30 マクセル株式会社 情報処理システム、無線端末、及び情報処理方法
US9877266B1 (en) * 2015-12-10 2018-01-23 Massachusetts Mutual Life Insurance Company Methods and systems for beacon-based management of shared resources
CN105491156B (zh) 2016-01-08 2016-12-28 华中科技大学 一种基于sd‑ran的全网协同内容缓存管理系统及方法
US20190068734A1 (en) * 2017-08-24 2019-02-28 Microsoft Technology Licensing, Llc Notification api for external identification
US10999332B2 (en) 2018-07-06 2021-05-04 Barco N.V. User-centric connections to a location comprising digital collaboration tools
US10951564B1 (en) * 2020-04-17 2021-03-16 Slack Technologies, Inc. Direct messaging instance generation

Also Published As

Publication number Publication date
WO2021148682A1 (en) 2021-07-29
US11900006B2 (en) 2024-02-13
AU2021211163A1 (en) 2022-07-21
US20220374191A1 (en) 2022-11-24
JP2023513453A (ja) 2023-03-31
EP4094430A1 (en) 2022-11-30
TW202147834A (zh) 2021-12-16

Similar Documents

Publication Publication Date Title
US11900006B2 (en) Synchronizing local room and remote sharing
US10129313B2 (en) System, method, and logic for managing content in a virtual meeting
EP2756667B1 (en) Electronic tool and methods for meetings
US9325644B2 (en) Systems and methods for managing interactive communications
US10050800B2 (en) Electronic tool and methods for meetings for providing connection to a communications network
US20170223069A1 (en) Meetings Conducted Via A Network
JP2024519003A (ja) グループベースのコミュニケーションシステムのためのコラボレーションハブ
CN112769582A (zh) 用于会议的电子工具和方法
US10187439B2 (en) Dynamic recording of online conference
US20150032809A1 (en) Conference Session Handoff Between Devices
US10965480B2 (en) Electronic tool and methods for recording a meeting
JP2023126832A (ja) ミーティングの参加者が機能デバイスを利用できるようにするための方法およびシステム
US9674286B2 (en) Collaboration system and method
WO2022111193A1 (zh) 会议控制方法、装置、设备以及介质
EP3818664A1 (en) User-centric connections to a location comprising digital collaboration tools
US20240048457A1 (en) Electronic tool and methods for meetings
US20170373870A1 (en) Multimedia Communication System
CN113300934A (zh) 通信方法、装置、设备和存储介质
US10511644B2 (en) Joining executable component to online conference
JPWO2021148682A5 (zh)
WO2024021646A1 (zh) 会话消息的处理方法、装置、设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination