CN112769582A - 用于会议的电子工具和方法 - Google Patents

用于会议的电子工具和方法 Download PDF

Info

Publication number
CN112769582A
CN112769582A CN202110002331.9A CN202110002331A CN112769582A CN 112769582 A CN112769582 A CN 112769582A CN 202110002331 A CN202110002331 A CN 202110002331A CN 112769582 A CN112769582 A CN 112769582A
Authority
CN
China
Prior art keywords
processing device
user
media content
display
peripheral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110002331.9A
Other languages
English (en)
Inventor
J·W·布兰兹
R·R·德瓦尔勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Barco Corp
Original Assignee
Barco Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Barco Corp filed Critical Barco Corp
Publication of CN112769582A publication Critical patent/CN112769582A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • H04L65/4046Arrangements for multi-party communication, e.g. for conferences with distributed floor control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation

Abstract

描述了一种电子会议工具和用于传递来自参会用户的任意媒体内容的方法。这些可包括适配成操作通信网络的显示节点的节点配置装置,该显示节点耦合到第一显示器。节点配置装置适配成接收用户所选的任意媒体内容并控制用户所选的任意媒体内容在第一显示器上的显示。提供了适配成经由所述通信网络传递用户所选的任意媒体内容的至少一个外围设备,其中所述外围设备是连接单元,包括:(a)适配成耦合到具有第二显示器、存储器、以及操作系统的处理设备的端口的连接器;以及(b)用于与所述通信网络通信的发射机。提供了适配成被加载到所述处理设备上并且在所述处理设备的操作系统上运行的程序,所述程序适配成获得用户所选的任意媒体内容,所述程序在终止时留下零足迹。提供了一种输入设备,所述输入设备允许所述用户执行触发所述用户所选的任意媒体内容通过所述端口向所述发射机的传送的用户动作。

Description

用于会议的电子工具和方法
本申请是申请日为2012年9月14日、申请号为201280074077.2、名为“用于会议的电子工具和方法”的申请的分案申请。
技术领域
本发明涉及用于会议的电子工具,包括用于提供到通信网络的连接的方法或设备、网络或操作网络的方法、用于显示媒体内容的方法或设备、以及用于执行这些方法中的任一种方法的软件。
背景技术
用于协作的工具
允许人员的自组织群体彼此通信是协作、问题解决、协商、教育等的各基本方面之一。为了帮助通信,电子通信工具出现了爆发,如电子会议工具,例如,同步和异步会议、在线聊天、即时消息收发、音频会议、视频会议、数据会议、应用共享、远程桌面共享、电子会议系统、协作式管理(协调)工具、项目管理系统、知识管理系统、以及社交软件系统。
一种经典方法是通常涉及使用演示软件的演示的讲座或研讨会。在很大程度上,传统单人演示或演讲是在听众处于相当被动的模式下被维护的,所关心的只是确定、构造、扩充或修改要被呈现的信息。
与其他业务过程一样,会议正在变成数字式的。在实际会议之前及期间,人们日益增加地单独并结合宽带网络使用计算机技术来支持它们的会议目标。例如,电子邮件被用来分发文件以供人们在会议之前阅读。
协作网络中以及因特网上的协作式工作空间向地理上分散的各协作者提供用于与项目或会议相关的文档的虚拟储存库。诸如交互式网络连接白板及视频会议设备等电子会议支持系统可供用于共享同一房间以及在远程位置处的人的利益。
AMIDA最终公开报告描述了会议支持技术的开发背后的总体方法体系。它报告说多个研究确认会议主导了人们工作的方式。即,根据MCI Worldcom在2003年进行的研究,商务人士每月参与60个会议。人们出于多种原因而成群会面。他们以多种可预测和不可预测的方式交互并且他们的交互结果随着参与的人以及他们协作或交流的项目而变化。业务过程的研究还揭示与项目或过程相关联的约80%的“工作负荷”发生在会议的准备中。换言之,许多人将“实况”会议看做他们可调整步调并测量他们的生产力以及其同事的生产力的里程碑或最终期限。不幸的是,对于许多信息管理者而言,参与不断的会议降低了他们为下一会议充分地进行准备的能力,从而陷入恶性且负面的循环。
然而,Marc Al-Hames等人在“Audio-Visual Processing in Meetings:SevenQuestions and Current AMI Answers(会议中的音频-视频处理:七个问题及当前AMI答案)”中报告说,虽然大部分工作日被会议和会晤消耗,但不幸的是,它们中的许多既不高效也不特别成功。他们报告了其中要求人们选择他们认为在会议中频繁体验到的情绪词汇的研究。最高答案——三分之二以上的参与者提到——是“厌烦”,此外,近三分之一提到“烦恼”作为频繁感受到的情绪。
结论是尽管对会议的电子辅助过多,但处理会议的基本问题尚未被解决。事实上,在业务上下文中组织并进行会议涉及大量因素。
参与
会议效率的缺失在IBM的IP.com号为IPCOM000011711D的发布日期为2003年3月12日的文章“Mood indicators on electronic meeting tools(电子会议工具上的心情指示符)”中得到解决。这一文章解决了缺少直接反馈使得会议拙劣、不高效且通常效果不佳的问题。它提出了“心情指示符”以及“我想要提问”指示符,这允许演示者选择适当的时间来暂停、改变音轨或回答问题。它提到打断充满激情的演示者是不方便的;然而,有时在许多不同的人尝试发言时难以得到提问或发表意见的机会。以类似的脉络,US6966035提出了显示“私语框架”以供参与者表达观点。为了提高用户参与度,US 2010/0087139公开了一种用于向另一计算机发送选择的系统,且US 2006/0095376公开了一种用于安全投票的系统。评论、投票、或选择需要中央权威机构提供要被选择或评论或投票的信息。因此,这些建议仍然留下了中心人物,如处于主导位置的演示者,并且会议的其他成员很大程度上是具有有限的选择或投票或参与权的听众。
会议的进一步问题是有人常常迟到或不得不早退。对于迟到的人,必须决定该会议是否被中断并且直到此时的会议录的概要是否被给出。对于早退的人(通常是高级人员),后续讨论可能缺失。如果存在记录人员,这提供了会议的个人概要——但并不是客观的概要。
现有系统没有提供最优解决方案。
法律和安全问题
会议的法律要求是演示、评论、以及提交需要是完全可再现的——在一些情况下,例如,在股份持有者会议中,会议中的事件应当可以完全召回。计算机支持的协作式工作技术,尤其是捕捉除在会议期间生成的文本和图像以外的人类语言和非语言交流(音频和视频交互)的那些技术,对人们将如何准备和在会议期间以及会议后将如何作为肯定具有长期影响。另外,连接到网络带来了在任一方向上的病毒、恶意软件或间谍软件传输的危险,并且存在复制机密信息的危险。
实际困难
可扩展性和易于使用性
对于将电子工具用于会议中而言,甚至存在更多基本问题。如果两个人想要作两个演示,则通常这两个演示必须都被置于一个机器上,或者需要在这两个演示者的机器之间切换。为了将计算机的显示内容带到投影仪,最常见的方式是使用将图形卡的显示适配器连接到投影仪的视频输入的电缆[方法1]或使用捕捉显示内容并通过有线或无线网络将其发送给连接到投影仪的远程基本单元的软件[方法2]。这通常称为“远程桌面”且大部分被用于远程管理或远程IT辅助目的。
较不常见但也被实施的方法是使用连接到图形卡的显示适配器的特殊设备,所述特殊设备通过有线或无线网络捕捉、编码、以及流传输显示内容[方法3]。
方法1具有若干实际问题和缺点。在其中人们想要从他们自己的计算机贡献内容(例如将图像投影到显示器上)的会议中,通常诸如VGA电缆等视频电缆被用于将各PC一次一个地连接到投影仪。这不仅不可扩展,而且还可能且通常是相当麻烦的过程,该过程通常浪费宝贵的会议时间且使会议失去活力。连接可能更加困难且耗时,例如在计算机必须被重新引导以检测投影仪或者在PC的格式与投影仪的格式不同的情况下。另外,改变格式可为计算机留下与其自己的屏幕不兼容的新格式,从而在PC自己的重新引导时,没有什么被显示在计算机屏幕上。在没有可见屏幕图像的情况下,必要的重新配置可能是困难的。这些问题因多个因素而恶化:
-许多不同视频适配器的使用,如VGA、DVI、DP、HDMI……
-所及范围取决于电缆长度:过长会在会议室中留下乱成一团的电缆“色拉”,过短会降低灵活性,通常使人们在想要演示一些东西时必须在会议室中四处移动。
-电缆连接是点对点的或需要进行冗长且昂贵的电缆敷设以及使用复杂且昂贵的视频交换机。
-找出计算机和显示器或投影仪两者所支持的正确显示分辨率和刷新率通常是困难且耗时的。
方法2也具有许多缺点。如果作出到企业LAN的连接,则存在在任一方向上的病毒、恶意软件或间谍软件传输的危险,存在机密信息的复制的危险,以及存在作出所述连接的困难,例如用户代码和口令的录入以及这些口令和用户代码的管理。
方法3的优点是计算机无需使用它自己的处理能力以按易于通过网络传输的形式带来显示内容。随着计算机处理能力的增长,这一优点变得较没有意义。方法3的缺点是方法1通常遇到的连接到显示适配器的相同问题依然存在。另一缺点是所引用的特殊设备需要大量处理能力,这意味着这一设备将消耗许多功率、相对很大、且当然相对昂贵。
当今在发展中的另选方法是使用计算机的公知USB接口来提取计算机的显示内容。US 2009/0198839公开了这种可插拔电缆安排。US 2011/0115689公开了用于无线连接到投影仪的类似USB解决方案。相应地,使用标准USB端口将投影仪连接到计算机可能随时间进展而变得常见。然而,这通常需要特殊驱动程序以及甚至特殊硬件。使用标准USB端口将投影仪连接到计算机因此可能变得常见——但甚至在这一点发生时,在若干年内也将仍然存在新机器与传统机器的混合。
防火墙
防火墙可发生附加问题。通常,会议的访客将携带计算机,如针对不同企业联网环境设置并且因此具有不同或不兼容的联网设置的膝上型计算机。防火墙的设置可能是复杂的,并且如果这没有被正确地完成,必须穿过防火墙的电信软件可能被阻塞。为了解决与防火墙相关联的问题,打开端口或者标识或甚至添加例外列表中的程序可能是必要的。在网络(硬件)防火墙以及操作系统防火墙之外,如果存在任何基于软件的第三方防火墙,如Zonealarm、CA因特网安全套件或McAfee防火墙,则遵循该软件开发者的文件编制以将程序置于安全列表上或将例外添加到防火墙规则是必要的。这样的活动超出了普通用户的能力。过分讲究计算机设置或必须要求IT支持浪费了宝贵的会议时间并且使会议失去活力。
结语
当前,使用高级电子工具主持面对面会议仍然存在以下问题:
-联网基础结构的复杂性。
-对被假定为设计成支持非专家用户的每天使用的当前系统中对用户的技术专家能力的高要求。
-在会议中使用复杂技术的障碍。
-大量各种可能的协作式软件解决方案——它们中没有一个看起来解决了主持成功会议的基本问题。
-对会议的成员而言,会议令人厌烦或烦恼。
-在企业网络中采用的防火墙以及其他安全措施的复杂性。
-会议成员的参与度的缺失或受限。
-准备用于会议的演示所花的时间。
-在不会超出所需地加重会议负担的情况下,按正确的时序记录会议中事件的需求。
虽然某些工具有效地解决这些问题中的一些问题,但没有电子会议工具解决了全部问题。
发明内容
本发明的目标是提供包括用于会议的电子工具以及用于提供到通信网络的连接的设备的网络解决方案,操作所述网络的方法,显示媒体内容的方法,以及用于执行这些方法中的任一种方法或用于实现这些系统的软件。
在本发明的一方面,提供了一种用于在显示设备上显示从处理设备(例如,数字处理设备)获得的任意媒体内容的方法,该媒体内容是通过通信网络传送的,该处理设备具有存储器和显示器,该方法包括:
使用外围设备来提供令牌,该令牌内在地或分立地提供认证以在显示设备上显示内容并提供到该显示设备的链接。
具体而言,本发明提供了一种用于在具有多个参与者的会议中在显示设备上显示从处理设备(例如,数字处理设备)获得的任意媒体内容的方法,该媒体内容是通过共享资源通信网络传送的,该处理设备具有存储器和显示器,该方法包括:
使用外围设备来提供令牌,该令牌在被传送到通信网络时内在地或分立地提供认证或许可来在显示设备上显示任意媒体内容,该令牌还提供到显示设备的链接;
将来自处理设备的任意媒体内容路由通过通信网络;
获得对显示设备的单方电子访问权;以及
显示该任意媒体内容。
该任意媒体内容是优选地通过对来自该处理设备的数据进行屏幕抓取来获得的。
在另一方面,本发明提供了一种用于在具有多个参与者的会议中在显示设备上显示从处理设备获得的任意媒体内容的方法,该媒体内容是通过共享资源通信网络传送的,该处理设备具有存储器和显示器,该方法包括:
使用外围设备来提供令牌,该令牌在被传送到通信网络时内在地或分立地提供认证或许可来在显示设备上显示任意媒体内容,该令牌还提供到显示设备的链接;
通过对来自处理设备的数据进行屏幕抓取来获得该任意媒体内容;
将来自处理设备的经屏幕抓取的任意媒体内容路由通过通信网络;
获得对显示设备的电子访问权;以及
显示该任意媒体内容。
获得用户所选的任意媒体内容优选地不是通过应用共享而是通过屏幕抓取的过程来获得的。虽然提供屏幕抓取的软件包需要安装在目标设备上,或至少需要安装专用和/或自定义驱动程序,但本发明的各实施例使用加载到外围设备上的软件,当该软件在处理设备上运行时允许屏幕抓取但在终止时留下零足迹。本发明的各实施例能以20fps对全HD视频进行屏幕抓取,而不需要在处理设备上安装任何程序也不需要配置它们在其上运行以用于到网络的连接性的诸如PC等处理设备,从而满足“零足迹”要求。
在外围设备上提供大容量存储设备,该大容量存储设备存储要在处理设备上运行的软件。一旦软件已被读取并加载且从处理设备中的RAM运行,该大容量存储设备就可在逻辑上关闭。在外围设备上还提供了另一设备,如捕捉用户输入并提供用户反馈的HID(人类接口设备)。在本发明的各实施例中,外围设备包含组合在一起的多个内部逻辑设备:
用于捕捉用户输入(例如,在诸如按下或激活按钮等用户动作之后)并提供用户反馈(例如通过诸如围绕按钮的光环(例如LED环)等光指示器)、并且用于将经屏幕抓取的视频内容流传输到网络并从而传送到基单元和显示器的HID(人类接口设备),
用于存储应用的大容量存储设备,以及可任选地
使用通用驱动程序(如UAC1或UAC2设备驱动程序)通过USB担当客户机PC的虚拟声卡的音频设备。
屏幕抓取能够以中性的方式捕捉所有材料,而不受专用应用的限制。此外,屏幕抓取器应用在终止时是零足迹,而非被完全安装在处理设备上。
本发明的各实施例可以向会议室提供任意“全内容”且各参与者可以实时显示,
实时内容被示出在中央显示器上,而非被广播给各单独的参与者或被存档。
本发明的各实施例在中央显示器或屏幕上“自动合成”任意用户数据,从而向有意共享这一内容的多个会议参与者提供全实时内容,以使该会议更加有效和高效,
本发明的各实施例实现“民主屏幕共享”的原理,其中各会议参与者在对等的基础上自己决定在何时以及在何处共享什么内容。对等数据共享与其中要显示的内容由演示者或会议主持者来确定的系统不同。用户确定他的内容要被路由到何处且可以在无需用户处理设备上的任何软件配置的情况下这样做。
在又一方面,本发明提供了一种用于在会议处传递来自用户的任意媒体内容的电子会议工具,包括:
适于操作通信网络的显示节点的节点配置装置,该显示节点耦合到第一显示器,该节点配置装置适配成接收用户所选的任意媒体内容且控制用户所选的任意媒体内容在该第一显示器上的显示;以及
适配成经由通信网络传递用户所选的任意媒体内容的至少一个外围设备,其中该外围设备是连接单元,包括:
(a)适配成耦合到具有第二显示器、存储器、以及操作系统的处理设备的端口的连接器;以及
(b)用于与通信网络通信的发射机,
适配成被加载到处理设备上并且在处理设备的操作系统上运行的程序,所述程序适配成获得用户所选的任意媒体内容,所述程序在终止时留下零足迹,以及
输入设备,该输入设备允许用户执行触发所述用户所选的任意媒体内容通过所述端口向所述发射机的传送的用户动作。
该程序可被存储在外围设备上。发射机可以是无线发射机或收发机。外围设备可以是即插即用设备。该程序可适配成对该第二显示器的内容进行屏幕抓取。
输入设备可以是耦合到外围设备的物理致动器。该物理致动器优选地具有100和14400平方毫米之间的表面积。或者,输入设备可以是显示在第二显示器上的键。显示在第二显示器上的键可以是不被程序进行屏幕抓取的键。
在另一方面,本发明提供了一种将处理设备连接到通信网络的方法,该处理设备具有存储器、显示器、带有至少一个预安装通用驱动程序的操作系统,该至少一个预安装通用驱动程序提供用于处理设备与标准类型外围设备之间的通信的通用通信协议,该方法包括以下步骤:
a)将外围设备耦合到处理设备,该外围设备具有收发机;
b)通过操作系统的预安装的通用驱动程序,设置用于外围设备与处理设备之间的通信的手段;
c)经由外围设备将处理设备耦合到通信网络;
d)经由用于通信的手段在处理设备与通信网络之间路由经屏幕抓取的数据,其中通用通信协议被用于在处理设备与外围设备之间传送经屏幕抓取的数据。
经屏幕抓取的数据的路由可以去往所定义的网络节点,如显示节点,而无需用户输入配置细节。因而,路由可以专用于特定网络节点,如显示节点、基站等。在通过在通信开始之前将外围设备配对到相关节点来实现。
根据本发明的各实施例,用户启动来自外围设备(如USB加密狗(dongle))的应用,从而按3步过程进行连接:(1)连接,例如将外围设备插入处理设备,(2)启动屏幕抓取应用,(3)执行用户动作,如点击外围设备上的按钮以允许内容被显示在中央屏幕或显示器上。为了实现步骤2,Autorun(自动运行)或AutoPlay(自动播放)可以与某些Windows操作系统一起使用,但基于操作系统版本以及安装了哪些补丁,存在着许多不同的变型。此外,这一机制一般被认为有安全危险,这是大多数IT部门将禁用Autorun/Autoplay的原因。其他操作系统提供者已禁用这一功能,例如自Snow Leopard(雪豹操作系统)以来,Apple从其OS/X中完全移除了类似功能。
在本发明的一实施例中,提供了需要安装在处理设备(如膝上型计算机)上的非常小的服务——在某些操作系统中也被称为daemon(守护进程)。这一服务被预安装在处理设备上。这一安装只需在每一处理设备(如膝上型计算机)上安装一次。这一安装的角色是提供持续监视根据本发明的外围设备是否提出连接到处理设备的持久运行服务。在这样的外围设备被连接时,该服务将检测这一点并启动驻留在外围设备的大容量存储区域中的客户机应用软件。一旦该服务被安装,与外围设备的连接性变成2步过程:连接,例如将外围设备插入处理设备,(2)执行用户动作,如点击外围设备上的按钮以允许内容被显示在中央屏幕或显示器上。从处理设备加载的应用在终止时仍然留下零足迹。
步骤b)可包括将外围设备呈现给处理设备作为人类接口设备,并且其中预安装的通用驱动程序是人类接口设备驱动程序。
作为替换或补充,步骤b)可包括将外围设备呈现给处理设备作为大容量存储设备,并且其中预安装的通用驱动程序是大容量存储设备驱动程序。
作为替换或补充,步骤b)包括将外围设备呈现给处理设备作为复合设备,并且其中预安装的通用驱动程序独立地驱动各不同的设备接口。
客户机应用可被存储在外围设备上,当该客户机应用在处理设备上运行时获得经屏幕抓取的数据。这样的客户机应用可以是便携式应用并且在终止时不留下足迹。
在又一方面,本发明提供了一种用于提供到处理设备的通信连接性的外围设备,该处理设备提供有存储器、显示器、带有至少一个预安装通用驱动程序的操作系统,该至少一个预安装通用驱动程序提供用于处理设备与标准外围设备类之间的通信的通用通信协议,该外围设备包括其中储存有可执行软件代码以供在处理设备上执行的存储器,所述可执行软件代码包括:
用于通过操作系统的预安装的通用驱动程序,设置用于外围设备与处理设备之间的通信的手段的第一软件代码部分;
用于经由外围设备将处理设备连接到通信网络的第二软件代码部分,该外围设备具有收发机;
用于对来自处理设备的数据进行屏幕抓取的第三软件代码部分;以及
用于通过用于通信的手段在处理设备与通信网络之间路由经屏幕抓取的数据的第四软件代码,其中第一软件代码部分适配成使用通用通信协议在处理设备与外围设备之间传送经屏幕抓取的数据。
第一软件代码部分可适配成将外围设备呈现给处理设备作为人类接口设备,并且其中预安装的通用驱动程序是人类接口设备驱动程序。第一软件代码部分可适配成将外围设备呈现给处理设备作为大容量存储设备,并且其中预安装的通用驱动程序是大容量存储设备驱动程序。第一软件代码部分可适配成将外围设备呈现给处理设备作为复合设备,并且其中预安装的通用驱动程序独立地启动各不同的设备接口。可执行软件代码可包括用于提供用于连接到包括基节点的通信网络的手段的第五代码。可执行软件第三代码可包括用于提供用于捕捉处理设备的视频帧缓冲区的手段的第六代码。
可执行软件代码可包括用于提供用于编码、压缩、以及可任选地加密经屏幕抓取的数据并通过通信网络发送经屏幕抓取的数据的手段的第七代码。该可执行软件代码可包括用于提供用于处理外围设备的手段的第八代码。该可执行软件代码可包括用于提供用于发起到基节点的连接的手段的第九代码。该可执行软件代码可包括用于在外围设备上接收来自输入设备的输入的第十代码。该可执行软件代码可包括用于提供用于向外围设备上的视觉指示器发送状态变化的手段的第十一代码。该可执行软件代码可包括用于提供用于向用户呈现GUI的手段的第十二代码。该可执行软件代码可包括用于呈现GUI以供在可执行软件代码作为便携式应用执行时管理所述可执行软件代码的第十三代码。该可执行软件代码可包括用于提供用于在客户机处理设备的显示器上显示并激活键以允许用户输入将来自处理设备的数据开始传送到基节点的手段的第十四代码。
在又一方面,本发明提供一种用于提供到处理设备的通信连接性的外围设备,该处理设备提供有存储器、显示器、带有至少一个预安装通用驱动程序的操作系统,该至少一个预安装通用驱动程序提供用于处理设备与标准类型外围设备之间的通信的通用通信协议,该外围设备包括其中储存有可执行软件代码以供在处理设备上执行的存储器,所述可执行软件代码包括:
用于通过操作系统的预安装的通用驱动程序,设置用于外围设备与处理设备之间的通信的手段的第一软件代码部分;
用于经由外围设备将处理设备连接到通信网络的第二软件代码部分,该外围设备具有收发机;以及
用于通过用于通信的手段在处理设备与通信网络之间路由数据的第三处理软件代码,其中第一软件代码部分适配成使用通用通信协议在处理设备与外围设备之间传送数据,以及
耦合到外围设备的输入设备,该输入设备适配成对用户动作作出反应以触发数据从处理设备到外围设备的传送。
该第一软件代码部分可适配成将外围设备呈现给处理设备作为人类接口设备,并且其中该预安装的通用驱动程序是人类接口设备驱动程序。该第一软件代码部分可适配成将外围设备呈现给处理设备作为大容量存储设备,并且其中该预安装的通用驱动程序是大容量存储设备驱动程序。该第一软件代码部分可适配成将外围设备呈现给处理设备作为复合设备,并且其中预安装的通用驱动程序独立地启动各不同的设备接口。
该输入设备优选地是耦合到外围设备的物理致动器。该物理致动器优选地具有100和14400平方毫米之间的表面积。该输入设备可以例如是用于显示在显示器上的键。可执行软件代码可包括用于提供用于连接到包括基节点的通信网络的手段的第四代码。该可执行软件代码可包括用于提供用于捕捉处理设备的视频帧缓冲区的手段的第五代码。该可执行软件代码可包括用于提供用于编码、压缩、以及可任选地加密视频帧并通过安全链路将它们发送到基节点的手段的第六代码。该可执行软件代码可包括用于提供用于处理外围设备的手段的第七代码。该可执行软件代码可包括用于提供用于发起到基节点的连接的手段的第八代码。该可执行软件代码可包括用于在外围设备上接收来自输入设备的输入的第九代码。该可执行软件代码可包括用于提供用于向外围设备上的视觉指示器发送状态变化的手段的第十代码。该可执行软件代码可包括用于提供用于向用户呈现GUI的手段的第十一代码。该可执行软件代码可包括用于呈现GUI以供在可执行软件代码作为便携式应用执行时管理该可执行软件代码的第十二代码。该可执行软件代码可包括用于提供用于在处理设备的显示器上显示并激活键以允许用户输入将来自处理设备的数据开始传送到基节点的手段的第十三代码。
在本发明的又一方面,提供了一种用于提供到处理设备的通信连接性的外围设备,该处理设备提供有存储器、显示器、带有至少一个预安装通用驱动程序的操作系统,该至少一个预安装通用驱动程序提供用于处理设备与标准类型外围设备之间的通信的通用通信协议,该外围设备包括其中储存有可执行软件代码以供在处理设备上执行的存储器,该可执行软件代码包括:
用于通过操作系统的预安装的通用驱动程序,设置用于外围设备与处理设备之间的通信的手段的第一软件代码部分;
用于经由外围设备将处理设备连接到通信网络的第二软件代码部分,该外围设备具有收发机;
用于接收来自网络的媒体内容以及用于根据一组规则在显示器上显示媒体内容的第三软件代码部分;其中第一软件代码部分适配成使用通用通信协议在外围设备与处理设备之间传送媒体内容。
该可执行软件代码可包括用于提供用于将接收机正确地配置成接入点的手段的第四代码。该可执行软件代码可包括用于提供用于监听尝试连接在特定端口上的连接单元的输出的手段的第五代码。该可执行软件代码可包括用于提供用作管理目的的GUI的手段的第六代码。该可执行软件代码可包括用于提供用于使用zeroconf协议通过网络发布其存在的手段的第七代码。该可执行软件代码可包括用于提供用于接受并安装软件更新的手段的第八代码。该可执行软件代码可包括用于提供用于提供连接单元到处理设备的配对的设施的手段的第九代码。该可执行软件代码可包括用于提供用于自动合成不同的传入任意媒体流并在显示器上渲染合成图像的手段的第十代码。该可执行软件代码可包括用于提供用于接收、解密、以及解码传入的任意媒体内容的手段的第十一代码。该可执行软件代码可包括用于缩放传入的任意媒体流的第十二代码。该可执行软件代码可包括用于提供用于根据一组规则显示传入的任意媒体内容的手段的第十三代码。
本发明还提供一种用于在会议上传递来自用户的任意媒体内容的方法,包括:
操作通信网络的显示节点,该显示节点耦合到第一显示器、接收用户所选的任意媒体内容并控制用户所选的任意媒体内容在第一显示器上的显示;以及
将外围设备连接到处理设备的端口并经由通信网络传递用户所选的任意媒体内容,
将程序加载到处理设备上并且在处理设备的操作系统上运行该程序以获得用户所选的任意媒体内容,所述程序在终止时留下零足迹,以及
在输入设备上的用户动作之后,触发所述用户所选的任意媒体内容通过所述端口传送到所述发射机。
本发明还提供一种外围设备,包括:
基节点
用于连接到主机处理设备的即插即用端口的连接器,
基节点与连接器之间的用于传送数据信号和功率的灵活连接,
基节点上的用于致动信号且用于将该信号传送到连接器以供传送到端口的致动器,其中该基节点具有包括用于存储便携式应用的持久存储、处理引擎、收发机以及视觉指示器的电子装置。
本发明还提供一种用于提供自处理设备的通信连接性的方法,
设置通信网络,该通信网络处于通信网络的基节点与耦合到处理设备的外围设备之间;
在处理设备和外围设备之间传送媒体内容,
将媒体内容从外围设备传送到通信网络,
在基节点处接收来自通信网络的媒体内容,并且根据一组规则在显示器上显示媒体内容。
上述任一软件代码存储在非瞬态存储介质上。
定义
“单方”意味着显示过程是只通过会议中涉及的一个参与者的动作来获得的,而无需另一个或多个参与者的同意。术语“单方”暗示供显示的数据被允许盖写或替换由会议的同一或另一参与者显示在屏幕上的任何数据。
“即插即用”是用于描述计算机总线或设备规范的特性的术语,它促进系统中硬件组件的发现,而无需物理设备配置或用户干预来解决资源冲突。即插即用设备可被添加到计算系统的总线(在运行时或在关闭时),并且新添加的设备以及可能计算系统的其余设备被自动配置成使新添加的设备从硬件以及从软件观点两者来看都工作。
即插即用接口包括例如(非穷尽性列表):火线(IEEE-1394)、PCI、Mini PCI、PCIExpress、Mini PCI Express、PCMCIA、PC卡、通用串行总线(USB)、SDIO卡。
“自动配置”是设备的自动配置,无需手动干预、无需设置任何开关或跳转、并且无需任何软件配置。自动配置设备的一个示例:USB设备。
自动配置协议的示例:DHCP、Zeroconf、Bonjour。
即插即用设备默认具有自动配置软件,以使其即插即用。示例:USB设备通过包括正确自动配置软件(例如,主机驱动程序、主机栈、应用软件)而被使得成为即插即用。自动配置也可以仅指软件并且不限于物理设备。
“热交换和热插拔”是用于描述替换计算机系统组件而无需关闭该系统的功能的术语。更具体而言,热交换描述在无需显著中断系统的情况下替换组件,而热插拔描述在无需显著中断系统的操作的情况下添加将扩展该系统的组件。这一功能的公知示例是允许用户添加或移除外围组件(如鼠标、键盘或打印机)的通用串行总线(USB)。其他示例是例如eSATA、PCIe、火线。
“便携式应用”(便携式app),有时也称为独立应用,是被设计成在无需安装在目标机器上的情况下运行的计算机软件程序。这一类型的应用被存储在可移动存储设备上,如CD、USB闪存驱动器、闪存卡、或软盘——只在该存储介质上存储其程序文件、配置信息以及数据。它是可被存储在诸如USB闪存驱动器、iPOD、存储卡、便携式硬盘驱动器或其他便携式电子设备等电子设备上并且在耦合到该电子设备的计算机或其他处理设备上运行而无需对主机计算机作出持久配置改变的程序。所有这样的程序具有零足迹,意味着所有临时文件、注册表项、以及对机器的任何其他改变只在该程序运行时存在。
出于本发明的目的,为了被认为是便携式应用,软件程序必须:
不需要在计算机的持久存储设备上执行任何类型的正式安装,并且可被存储在可移动存储设备上,如USB闪存驱动器、iPOD、存储卡、便携式硬盘驱动器或其他便携式电子存储设备,从而使得它能够在多个计算机上使用。
各设置与该软件一起存储,并且可优选地与它一起携带(即,它们被写入电子设备,如USB驱动器)。各设置不被存储在计算机的注册表或任何其他中央系统数据库中。
在被使用之后在所运行的任何PC上留下零(或接近零)“足迹”,即,一旦该程序已经存在,所有临时文件/注册表设置应当被避免或至少被移除,且用户创建的文件可被直接保存到与其上存储有该应用的可移动介质相同的可移动介质。
便携式应用没有在所运行的主机计算机上留下其文件或设置。例如,该应用不写入Windows注册表或将其配置文件(如INI文件)存储在用户的简档中;相反,它将其配置文件存储在该程序的目录中。因为文件路径通常将由于Windows驱动器字母指派的变化而因不同的计算机而不同,所以另一要求是需要应用将它们存储成相关格式。优选地,这样的程序在该应用启动时不需要启动器程序将必要的设置和文件复制到主机计算机,并且在它关闭时不需要将它们移回该应用的目录,因为这在电源故障的情况下可能会在硬盘驱动器上留下残余。
“电子会议系统”(EMS)需要一方面与传统群件区分开,另一方面与web会议系统区分开。实际上,所命名类别的产品的少量特征之间存在某种重叠。与群件的主要差异是协作的强度。EMS应当与可能在同时具有多个用户的远程显示器上示出单独计算机屏幕的内容的系统区分开。
“群件”支持在群内的协作,其中各单独贡献保持是可标识的。相反,EMS使得该群能够协作式地产生该群作为整体对其负责的结果。在业务过程中,群件和电子会议系统彼此互补:当在EMS会话之前研究和创建文档时或当实现这种会话的结果时,群件支持团队。
“web会议系统”和“电子会议系统”在在线会议或研讨会中彼此互补:EMS通过提供用于产生并存档群结果的交互式工具来扩展web会议系统。另一方面,“web会议系统”用同步在线会议中所需的且不存在于EMS中的屏幕共享和语音会议功能对EMS进行补充。
“数据会议”指的是实时共享计算机数据的两个或更多个参与者之间的通信会话。诸如屏幕、键盘、鼠标、相机等交互和演示设备可被共享。它是用来区分视频会议和音频会议的术语。数据可包括可被会议的参与者看到的屏幕、文档、图形、绘图、以及应用。
“应用共享”是使得两个或更多个用户能从他们相应的计算机同时实时访问共享应用或文档的远程访问的元素,囊括在协作式软件下。一般而言,共享应用或文档将在主机计算机上运行,并且对共享内容的远程访问将由主机用户提供给其他用户。应用共享应当与以下系统区分开:其中不同用户之间对该应用的协作是不可能的,但各单独的计算机屏幕的内容可被同时投影到具有多个用户的远程显示器上。
术语“任意媒体内容”指的是用户可生成、创建或选择适于显示的任何媒体内容的事实。这与客户机对由会议或演示中的另一人所显示的媒体内容进行投票或选择不同。这一术语指的是用于显示内容的面向客户机的分布式权限和特权,而非提供呈现给会议成员的内容的中心演示者。
在本文的意义上,“屏幕抓取”指的是读取视频帧缓冲区并处理它们,而非指示将它们渲染在显示器上。屏幕抓取以用于演示在Slobodin等人的US2002/0196378中描述,它通过援引纳入于此。
“自动合成”或“自动布局”指的是其中多个图形/视频源被渲染在中央显示器上的自动性质,无需用户干预且以用户将直观地认为它将发生的方式。
“无线”和“无线通信网络”可以是节点之间不使用电缆链路的任何网络,例如使用RF、光或红外来用于通信目的,如IrDA、散射红外、WLAN、WiMax、WiFi、WiFi直连、蓝牙或本领域技术人员已知的任何其他无线通信网络。
“计算机”一般指的是处理设备,即具有能进行各种类型的数字处理的处理引擎,如渲染图形图像以供显示。计算机可以是工作站、个人计算机、膝上型计算机、掌上计算机、PDA、智能电话、平板等等的形式。一般而言,计算机具有诸如易失性RAM等存储器。诸如硬盘、光盘、或固态存储器等非易失性存储器可被包括在计算机中或可以是外围设备。当前,大多数计算机是电子装置,但术语“计算机”也包括基于光学器件的计算设备。
术语“预安装的通用驱动程序”旨在意指安装在诸如计算机等处理设备上作为标准驱动程序的驱动程序,例如随操作系统的安装而安装的标准驱动程序。这样的驱动程序对操作系统而言是标准的且可驱动耦合到或连接到处理设备的标准类型外围设备。针对这样的外围设备的特定驱动程序的安装是不需要的。这样的通用驱动程序可以是人类接口驱动程序(HID)或大容量存储设备驱动程序,它已将预定软件组件配置成用于驱动大容量存储、CD-ROM、键盘等、或它们的组合。这样的设备可以是可读且可写的计算机外围存储器设备,如USB存储棒、闪存、外部硬盘驱动器、或其他。
附图说明
图1a示出可以与本发明的各实施例一起使用的会议室。图1b示出根据本发明的一实施例的客户机处理设备、连接单元、基节点以及显示器的组合。
图2示出根据本发明的一实施例的屏幕显示。
图3到5示出根据本发明的各实施例的基节点和外围设备以及客户机处理设备。
图6示出根据本发明的一实施例的显示器。
图7示出根据本发明的一实施例的外围设备。
图8示出根据本发明的一实施例的客户机处理设备。
图9示出根据本发明的一实施例的又一客户机处理设备。
图10示出根据本发明的一实施例的外围设备的实施例。
图11示出使用平板的实施例。
图12示出了本发明的又一实施例。
图13到15示出根据本发明的一实施例使用QR码进行远程访问。
图16示出根据本发明的一实施例的配对。
具体实施方式
将针对具体实施例且参考特定附图来描述本发明,但是本发明不限于此而仅由权利要求书定义。所描述的附图只是示意性的和非限制性的。
此外,本说明书和权利要求书中的术语第一、第二、第三等等用于在类似的元件之间进行区分,而不一定用于描述顺序次序或时间次序。这些术语可在适当环境中互换,并且本发明的实施例可以不同于本文中描述或示出的其他顺序操作。
此外,本说明书和权利要求书中的术语顶部、底部、上方、下方等用于描述性目的,而不一定用于描述相对位置。这样使用的术语可在适当的环境中互换,并且本文中所述的本发明的实施例可以不同于本文中描述或示出的其他取向操作。
权利要求中所使用的术语“包括”不应被解释为限于此后列出的装置;它不排除其他元件或步骤。它需要被解释为指定存在如所引用的所述特征、整体、步骤或组件,但并不排除存在或附加一个或多个其他特征、整体、步骤或组件、或者其组合。因此,表述“包含装置A和B的设备”的范围不应当仅限于仅由组件A和B构成的设备。这意味着相对于本发明而言,设备的相关组件是A和B。
类似地,应注意如说明书或权利要求书中所使用的术语“耦合”不应当被解释为仅限于直接连接。因此,表述“设备A耦合至设备B”的范围不应受限于设备A的输出直接连接至设备B的输入的设备或系统。它表示在A的输出与B的输入之间存在路径,该路径可以是包括其它设备或装置的路径。
所描述的设备的各元件或部分可包括编码在介质中的用于执行任何种类的信息处理的逻辑。逻辑可包括编码在盘中或其他计算机可读介质中的软件和/或编码在专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他处理器或硬件中的指令。
对软件的引用可涵盖用任何语言编写的可由处理器直接或间接执行的任何类型的程序。
对逻辑、硬件、处理器、或电路系统的引用可涵盖任何种类的逻辑或模拟电路系统,可以集成到任何程度,且不限于通用处理器、数字信号处理器、ASIC、FPGA、分立组件或晶体管逻辑门等。
本发明的各实施例提供对会议的三个主要问题的解决方案:
a)准备会议所花的时间。这主要通过允许任何可显示信息的“进行中”演示来实现。这一信息不必被链接到任何特定演示软件,也不必与任何这样的演示软件兼容,
b)使用电子会议工具进行会议所花的时间。这通过缩短将计算机连接到显示器或投影系统的时间来实现。
c)反映并审阅以及会后存档所花的时间。这通过提供以与进行会议相同的时序记录会议进程的可能性以及能够存储所呈现的所有数据以及谁呈现了该数据的可能性来实现。
其中在显示器或投影仪上呈现视觉信息的会议一般遭受独占效应的损害:单个演示者确定显示内容并且因此具有影响会议活力以及由此影响其结果的不均衡能力。允许多个个人同时示出他们的信息的系统是已知的。
不同地,大多数会议由某一类邀请系统(Outlook、WebEx、GoToMeeting等)发起,它们在会议室系统的外部(通常经由电子邮件)并且由此是混淆的且不灵活的。
尽管以上问题可能在高度结构化且熟练管理的集会(如,董事会议)中没有呈现出妨碍,但它们确实对大多数自组织会议(尤其是没有结构化议程和与会人员列表的那些会议)造成混淆和频繁延迟。
图1a是可以与本发明的各实施例一起使用的具有会议桌的通用会议室30的示意表示。参与者37具有诸如膝上型计算机、平板、PDA等某种形式的处理设备31。处理设备31中的每一个可以是主机设备且具有相耦合的第一连接单元47。第一连接单元47提供对网络50的接入,在这一情况下网络50是无线网络,但可以是有线网络。网络是共享资源通信网络,因为不同设备和参与者可通过该网络传送数据。每一连接单元47可耦合到输入设备48,这将在下文更详细地描述。用户37通常将处于距处理设备37的在人体工学上令人满意的某一距离处。这一人体工学边界通常是约1000平方厘米到4000平方厘米的面积。这一人体工学边界通常将使用户处于该边界的一侧,并且手臂的舒适伸展将确定落在该人体工学边界内的处理设备的左侧和右侧上的区域,且该处理设备的边界的远边(通常由显示屏来定界)将确定该人体工学边界的另一侧。由该人体工学边界所限定的区域将与处理设备31本身重叠或包括该处理设备31。处理设备也将具有外侧物理边界。输入设备48优选地被安排成在处理设备31的边界之外、但在人体工学边界之内操作。优选地,输入设备被安排成在它平放在桌子上时工作。输入设备优选地具有1和144平方厘米之间的激活面积的大小。
优选地,网络50是局域网,即共享资源通信网络且出于安全原因优选地在会议室本地,但网络50可能能够访问其他局域网或广域网(如51)或较大企业网络或因特网43,例如经由路由器42。网络50的另一节点是基节点或显示节点36。这一节点36可任选地是无线接入点。基节点36也可以是处理设备或主机计算机,并且可耦合到提供对网络50的接入的第二连接单元49,由此将所有处理设备31、36链接在一起。连接单元可具有上述输入设备。或者,可以使用安装在基节点36上的网络连接。音频装备46可被提供,例如允许会议的其他成员从远程目的地呼入的电话。
显示节点36耦合到并适配成允许在某一种类的显示器44上显示媒体。在本发明的各实施例中,显示节点是通信网络50的基节点。显示器44可以是投影仪或屏幕,该投影仪耦合到基节点36。可任选地提供白板45,白板45可任选地耦合到显示器44和/或基节点36,例如在白板可电子地记录它上面写了什么时。可任选地,相机35可被提供以记录白板45上的条目。相机35可具有用于将相机35连接到网络50的第三连接单元52,从而来自白板的数据可被记录并存储或经由路由器42传送到其他网络。连接单元52可具有输入设备,如以上参考连接单元47描述的。
可任选装备可以是用于记录会议的进展的相机39、40、41。这些相机可通过网络51(例如,电缆网络)链接到路由器42和/或基节点36。另一可任选项目是可被用来例如向处理设备31以及向附连到基节点36或显示器44的一部分的扬声器(未示出)传送音频的一个或多个话筒38。
处理设备31、相机、白板等的输出中的任一个或全部可被记录并数字地存储,例如存储在节点36中或其他地方,以提供具有正确时序的完整记录。
综上所述,本发明提供了一种用于在不同用户37(具有他们自己的处理设备31,例如PC、移动电话、或平板)与会议室30中一个显示器或投影仪或者多个显示器或投影仪44之间传递任意媒体内容的电子会议工具。
参考图1a和1b,本发明的各实施例包括作为处理设备的基节点或显示节点36,例如适配成接收用户所选的任意媒体内容的主机计算机,基节点36耦合到中央显示器44,中央显示器44可以是固定格式显示器或投影仪或类似设备。该任意媒体内容可以从用户处理设备31中的任一个提供。基节点36可适配成根据一组规则(例如FIFO、自动、根据请求或批准、强制显示、根据优先级,等等)显示接收到的用户所选的任意媒体内容。可任选地,基节点36适配成强制显示接收到的用户所选的任意媒体内容,即允许单独用户独立于名义上负责给出演示或主持会议的人在显示器44上显示自己的所选内容来参与会议强制显示也可被认为是一规则。短语“对显示设备的单方电子访问权”将这一种类的规则限定为“单方”意味着显示过程是只通过会议涉及的一个参与者的动作来获得的,无需另一个或其他参与者的同意。术语“单方”暗示显示的数据被允许盖写或替换由会议的同一或另一参与者显示在屏幕上的任何数据。该会议工具也可适配成允许优先级设置。这意味着用户可为要显示的媒体设定优先级设置。例如,优先级“1”可被基节点解释为强制显示,优先级“2”可被基节点解释为尽快显示,优先级“3”可被基节点解释为置于队列中并到时显示,等等。设置并使用显示优先级也被认为是按规则工作。为了执行规则,基节点36可以具有决策模块。基节点36可以是具有诸如微处理器和存储器等处理引擎的主机计算机。优选地,基节点36适配成按平等的方式来对待从连接单元47中的任一个或全部传递给基节点36的媒体内容。基节点36可适配成在相连接的中央显示器44上自动合成媒体内容,例如来自一个或多个处理设备31的媒体内容。
本发明的独立方面是至少一个连接单元47(可任选地用于接收的49或单元52)适配成将用户所选的任意媒体内容传递给所述基节点36。优选地,连接单元47和/或可任选地49或52是物理即插即用设备。连接单元的示例在图10中示意性地示出。
连接单元47可被集成到用户处理设备31,例如作为内部外围设备或可优选地是包括适配成耦合到用户处理设备31的端口的连接器的外部外围设备。处理设备31可具有客户机显示器、诸如微处理器等处理引擎、存储器以及操作系统。可任选连接单元49可被集成到基节点36,例如作为内部外围设备或可以是包括适配成耦合到基节点36的端口的连接器的外部外围设备。连接单元49可完全集成到基节点36,例如作为基节点36的内部网络接口。基节点36可具有处理引擎,如微处理器、存储器以及操作系统。
用户处理设备31、连接单元47(可任选地49或52)以及基节点36协作来形成用于多个处理设备31、36中的至少一个与中央显示设备44之间的链接的通信网络50。通信网络50适配成接收来自多个处理设备31中的至少一个的任意媒体内容并将该多个处理设备31中的至少一个的任意媒体内容传送到中央显示设备44。
本发明的独立方面是适配成加载到客户机处理设备31上并在客户机处理设备31的操作系统上运行的便携式应用60。便携式应用60作为客户机处理设备31上的进程来运行,它适配成响应于施加到输入设备48的用户动作来将来自客户机处理设备31的任意媒体内容递送给通信网络50,该进程在终止时在处理设备31上留下零足迹。网络50是共享资源通信网络,因为不同设备和参与者可通过该网络传送数据。可任选地,便携式应用60被存储在每一连接单元47以及可任选地49或52上。优选地,便携式应用60适配成对客户机处理设备31的客户机显示器的内容进行“屏幕抓取”。可任选地,便携式应用60当在处理设备31上运行时适配成对这一客户机处理设备31的客户机显示器上的内容进行“屏幕抓取”并经由连接单元47来传送它。可任选地,便携式应用60当在处理设备上运行时适配成对客户机处理设备31的客户机显示器上的内容进行“屏幕抓取”并经由处理设备31的网络接口来传送它,例如在连接单元47不具有发射机的情况下。
用于与所述基节点36通信的连接单元47具有网络接口,例如包括发射机62。发射机62优选地是收发机。可任选地,发射机/接收机可以是无线发射机/接收机。
用于与连接单元47通信的基节点36具有可被包括在连接单元49或集成到基节点36的接收机63。该接收机优选地是收发机。可任选地,发射机/接收机可以是无线发射机/接收机。
输入设备48允许与连接单元47的用户交互。优选地,输入设备48是耦合到连接单元47的物理致动器。施加到输入设备48的用户动作生成可触发从(与连接单元47相耦合的)处理设备31到网络50的数据传送的信号。优选地,输入设备48具有处于100与14400平方毫米之间的激活表面。任选地,输入设备48可以是显示在客户机处理设备31的客户机显示器1上的键。这一键可被激活,例如通过使用诸如鼠标等定点设备触发从处理设备31到网络50的数据传输。
连接单元47优选地提供有视觉指示器61,例如用于允许来自连接单元47的对任何活动的状态的用户反馈。
该系统还可包括适配成被加载到基节点36的服务器程序64,所述程序64适配成通过所述连接单元47(可任选地49)接收来自一个或多个客户机处理设备31的任意媒体内容并将该多个任意媒体内容流示出在一个或多个显示器44上。服务器程序64可适配成允许根据一个或多个规则(例如FIFO、自动、根据请求、强制、根据优先级,等等)的显示。强制规则可被描述为允许参与者“对显示设备的单方电子访问权”。“单方”意味着显示过程是只通过会议涉及的一个参与者的动作来获得的,而无需另一个或多个参与者的同意。术语“单方”暗示供显示的数据被允许盖写或替换由会议的同一或另一参与者显示在屏幕上的任何数据。为了执行规则,服务器程序64可以具有决策模块。
优选地,服务器程序64适配成按平等的方式来对待从连接单元47中的任一个或全部传递给它的媒体内容。服务器程序64可适配成在中央显示器44上自动合成媒体内容。
服务器程序64可以是适配成被加载到基节点36上并在基节点36的操作系统上运行的便携式应用。便携式应用64在适配成显示经由通信网络50从客户机处理设备31接收到的任意媒体内容的基节点36上运行进程,该进程在终止时在基节点36上留下零足迹。可任选地,便携式应用64被存储在每一连接单元49以及可任选地7上并可从中安装。
该系统还可包括中央显示设备44并且可任选地包括白板45或其他显示装置,如打印机。显示器44适配成接收用户所选的任意媒体内容,并且可适配成允许根据一个或多个规则(例如FIFO、自动、强制、根据请求或批准、根据优先级,等等)来显示接收到的用户所选的任意媒体内容。强制规则可被描述为允许参与者“对显示设备的单方电子访问权”。“单方”意味着显示过程是只通过会议涉及的一个参与者的动作来获得的,而无需另一个或多个参与者的同意。术语“单方”暗示供显示的数据被允许盖写或替换由会议的同一或另一参与者显示在屏幕上的任何数据。
可任选地,连接单元47之一可适配成作为主机连接单元。这样的主机连接单元可适配成指令基节点何时可显示来自客户机处理设备31的媒体内容或处理设备中的哪一个可被允许发送内容以供显示。
在本发明的各实施例中,至少一个便携式应用被用作例如客户机处理设备31上的或可任选地基节点36上的客户机软件。在这些实施例中,相关计算机设备31、36上的操作系统的预安装的通用驱动程序之一被用于经由连接单元47(可任选地49或52)建立从计算机设备31、36到网络50的通信。该通用驱动程序结合作为外围设备来操作的连接单元47(可任选地49或52)使用,但该使用可超出该通用驱动程序所预期的标准类型外围设备。在一些实施例中,作为外围设备来操作的连接单元47(可任选地49或52)通过使用预安装的通用驱动程序所提供的通用通信协议与相关处理设备31、36通信。预安装的USB驱动程序是示例。优选地,使用连接单元47(可任选地49)建立网络50的通信不更改或影响相关处理设备31、36的联网能力。例如,如果浏览器是在客户机处理设备31上启动的,则这一浏览器可以使用处理设备31上的标准网络接口。这意味着经由连接单元47(可任选地49)的数据传输独立于经由处理设备31或36的网络接口的数据传输。这具有以下优点:每一用户可以独立于要在会议期间显示的数据的传输来执行诸如搜索因特网以收集数据或接收邮件等等的处理。
使用便携式应用具有可避免对注册表中或一般在操作系统中的设置的任何修改的优点,从而在任何形式的终止(例如,将电子设备断开连接,系统崩溃)之际,不留下痕迹。这一般称为“零足迹”。
本发明具有可扩展性的优点。它可提供供会议中的多个用户使用的显示系统。会议中的每一用户因而可具有用于耦合到连接单元47的客户机处理设备31。第一用户动作将客户机处理设备31连接到基节点36,例如通过将连接单元47插入到处理设备31上的相关接口连接器,例如USB接口。包括激活输入设备上的按钮或键(例如,通过按下它)的第二用户动作随后启动将任意媒体内容从客户机处理设备31传送到基节点36的进程。这一进程优选地包括对来自处理设备的数据进行屏幕抓取。使用屏幕抓取避免了在基节点36上安装特殊程序来执行从处理设备31发送的图形命令。在基节点36接收到多个任意媒体内容时,它可以允许在相连接的中央显示器上自动合成该媒体内容。
现在将参考某些更具体实施例来进一步描述本发明。
在一些实施例中,本发明提供了一种系统和/或方法,其中在一方面,在来自一个以上的源处理设备(如膝上型计算机、PDA、智能电话、计算机、平板,等等)的任意材料被呈现在显示设备上时可覆盖所有当前显示的材料。在一个方面,本发明通过与谈话类似的方法(即,全双工且具有中断或获得对显示设备的单方电子访问的选项)来控制视觉通信和信息的显示。
本发明的一个实施例可以通过可连接外围设备(如兼容USB的设备)来实现,以使得在该外围设备连接到被用来提供诸如文本、视频、图片等任意信息的处理设备时,具有处理设备的每一单独用户可以获得对显示器(例如,屏幕)的访问权。通过出席会议,用户可以通过插入该外围设备来将该外围设备与处理设备配对。用户还可以将该外围设备与控制会议室中的显示器且可通过诸如有线或无线通信网络等通信网络连接到该外围设备的基节点或基单元配对。网络是共享资源通信网络,因为不同设备和参与者可通过该网络传送数据。为了实现这一点,该外围设备具有能够经由基节点将来自处理设备的任意数据传送给显示器的收发机。在一个选项中,显示在处理设备的本地显示器上的信息是经屏幕抓取的且被传送。为了允许这一点,该外围设备可包括能够在外围设备上执行且在终止时留下零足迹的便携式应用。虽然物理可连接的外围设备是方便的,但该外围设备也可经由无线连接(例如,经由蓝牙协议)耦合到处理设备。
对于具有远程参与者的会议,不可能依赖于相同的硬件可连接的外围设备来直接提供从远程位置对会议室中的显示器的访问权。通常,在家中或在宾馆中,参与者只具有电话和膝上型计算机或某一其他种类的便携式计算设备上的因特网接入。远程参与者缺少上下文(例如,非语言交流)并且具有不及理想的音频/视频连接并且因此遭受权力不对称。通常,远程参与者也没有方法将他们的内容‘推送’在屏幕上,因为会议由组织演示的序列的会议组织者或主持者来控制。
本发明的一个关键优点是提供远程协作,同时维持某种类型的‘环境意识’。这意味着所看到的与内心意识图具有直接关系。这允许跟踪多个信息流并且能够将其与任何其他信息快速相关,例如与在本地计算设备上执行的搜索进行快速相关。
在本发明的另一方面,通过以下来避免混淆和挫折:
1.保留从任何位置发送到一个会议室中的一个显示器或多个会议室中的多个显示器的任何图像的高宽比(例如,长的事物还是长的事物)
2.在会议室中的显示设备中的任一个上不重叠图像和/或窗口(例如,永不必猜测或记住什么被隐藏)
3.在每一屏幕上示出相同的图像安排(每个人看到相同的事物并且可以引用它们),这意味着在多个屏幕中的每一屏幕上的图像拓扑安排是相同的,
4.最大化屏幕有效面积的使用(例如,所呈现的图像不具有包含无用信息的边界),同时优选地,不允许图像的重叠
5.允许缩放和平摇的局部操纵,但允许返回以上项目3的默认布局
6.将本地显示器特性纳入考虑来在每一显示器上安排各图像,这些特性诸如分辨率、像素密度、高宽比中的任一个,
7.可任选地,还允许所有参与者听到正在进行的音频连接,例如,语音通信将被用来更改屏幕的内容。
在各实施例中,本发明的各组件优选地是:
共享(例如,虚拟、数字)画布,其上存储有所有视觉信息。该画布被映射到一个或多个地理位置处的一个或多个物理显示器上并且可至少与最大显示器一样大。会议参与者可以添加或删除视觉信息,例如本地参与者可以使用根据本发明的各实施例的外围设备,他们的操作是:一个点击将用户屏幕添加到画布,另一点击移除它。可任选地,长点击只使用该用户的屏幕来替换当前画布内容。该画布被维护在所有会议参与者可电子地访问(例如,虚拟、数字)的位置,但各参与者只可在具有“令牌”的情况下才能改变该画布。通过使用单个画布,向所有参与者给予对这一画布的访问权并向其他位置广播该画布上的信息,任何参与者可以作出对该画布的可控且一致的修改。
同时,令牌是改变画布上的信息以及作出这些改变的权限的手段。令牌是信任的符号;它们只从个人传送到其他个人。只有具有令牌的参与者可以向其他人给出附加令牌。在本地使用的硬件外围设备是令牌的示例。用户将该外围设备与处理设备以及基节点或单元配对。用户因为对该外围设备的选择以及它与处理设备的配对而与它相关联。这一过程固有地提供信任——与授予要出席会议的用户相同的信任。根据本发明的一方面,远程参与者具有与拥有令牌的任何其他人相同的权限,但物理令牌没有被远程地传递给用户。在一个方面,各会议参与者之间的第一联系是使用语音通信。语音通信是传送令牌的良好介质。它适于信任传送,因为a.通过知晓某人的电话号码(个人蜂窝电话号码或用户当前所处位置(如宾馆或家中)的号码),存在着个人联系的暗示以及b.人类语音是相当好的标识手段。
本实施例中的令牌通过语音指令来传送并且需要传达对画布作出贡献的手段。实现令牌的一种方式是会议的URL加唯一会话ID与隐式地一个或多个会议室的组合。在一个方面,这两者的组合给出对用作两个目的的会议专用网站的访问权:1.可任选地下载并安装屏幕捕捉软件程序以及2.给出对共享画布的访问权。1.和2.的组合向使用诸如膝上型计算机、PDA或智能电话等便携式处理的远程参与者提供了与本地参与者相同的功能。因为语音指令需要简洁,所以类似于tinyURL.com(或lilURL或TightURL)的服务可被用来组合网站+会话ID。为了避免错误,缩短的URL将使用易于发音的字符子集并且避免语言混淆(如G&J或I&E之间)。一个示例是仅限十六进制字符。
一种用于传送令牌的另选方法是使用消息收发服务,诸如如通过短信息服务(SMS)。这不是语音联系,但它包括与已知个人使用的移动电话号码相同的信任水平。如果有必要提高安全性,则可首先通过电话来联系该人并且只在这之后才发送SMS消息。如果需要,可以使用口令,由此可以使用第二口令来指示该人是被迫的,以使得SMS消息不应被发送。
会议会话ID指示画布、令牌与屏幕之间的临时连接。在一个方面,会话ID是在第一物理外围设备被插入会议室中的处理设备并作出与基节点或单元的连接时自动生成的。随后可使得这一会话ID对拥有外围设备的每一个人可见。这可以通过以下来实现:a.改变由该外围设备实现的大容量存储设备的名称,或b.改变该外围设备上大容量存储设备卷上的文本文件的名称或内容或c.外围设备上的显示(如果提供了这样的显示器),或d.会议室中的中央显示设备上的显示。会议ID或媒体会议代码使得可处于不同位置处的多个参与者易于参与媒体会议。
例如,在会议室的显示器上,显示数字或字母数字媒体会议代码。为了共享内容,各参与者可以通过在他们的处理设备上输入媒体会议代码,例如在网页中或专用软件客户端中,将他们的诸如膝上型计算机等处理设备经由网络与会议室连接。
会话ID执行以下功能:
·访问控制:只有亲临会议室的人才能够看到该代码。这确保只有会议室中的人或从会议室中的某人(例如,通过电子邮件或电话)接收到该代码的人才能与该会议室连接。这提供了信任。
·会议室位置:输入该代码的远程人员自动与正确的会议室连接并且不必劳烦在可能会议室的列表中搜索会议室或者输入会议室的地址(IP、电话号码、……)。参与者甚至不必知晓他们在哪一会议室中。
媒体会议可以在一个人连接到中央显示器时就开始。可任选地,只要没有人连接到中央显示器,ID或媒体会议代码就以特定频率(例如,每分钟一次)变化。在新代码出现时,先前代码不再可使用。这确保在实际会议开始之前可能的侵入者不能偷窥媒体会议代码。ID或代码在媒体会议的整个持续时间期间保持不变。在最后参与者断开连接时,媒体会议结束。此后,该ID或代码将再次改变。
ID在单个易于使用的代码中提供多个目的(访问控制和会议室位置)的组合。当前市售产品需要分开的会议室位置代码(例如,电话号码、电子邮件地址、IP地址、……)以及分开的控制对媒体会议的访问的手段(例如,口令、由会议主持人手动接受传入呼叫、……)。例如,为了加入WebEx会议,参与者需要知道会议号(=位置)以及会议口令(=访问控制)两者。视频会议设备需要远程参与者知道电话号码/IP地址(=位置)以及需要本地参与者接受传入呼叫(=访问控制)。
在一实施例中,会议会话的开始优选地是不对称的,因为远程参与者不能发起会话。会议必须由拥有物理外围设备的人来开始。
在所有令牌(本地和远程)已切断它们与画布的连接时,即所有物理外围设备被拔出并且所有远程会话与会议网站断开连接,会话结束。因为远程用户可能偶然地或秘密地保持连接,所以另选的结束会话的方式是:在所有外围设备被拔出且预设时间已过去或者会议基站或基单元上的复位按钮已被按下时,会话结束。
画布是存储被或可以被显示在一个或多个显示器或投影仪上的视觉位图的共享存储器。画布是可容易且便宜地实现的简单二维结构。一个另选实现是将画布存储为可由浏览器渲染的HTML5页面。
画布的大小(其宽度、高度或色彩深度)优选地至少是最大显示器的大小。这确保最大显示器以其最大能力来被使用。画布映射功能优化较小显示器上的易读性。
画布通过优化其在每一特定显示器上的视觉外观的变换函数(例如,内插、(解)交织、大小重新采样、缩放,等等)被映射到显示器上。画布映射功能首先确定它映射到的显示器的类型,并随后选择用于典型会议室环境中的最优易读性的分辨率、帧率、色彩深度、以及色彩映射功能(伽马、亮度、对比度),并且还在显示多个图像时维持图像的拓扑安排——这意味着远程参与者可以一致地引用图像,例如“左上”。
画布映射跨各显示器保留边界和高宽比(即,它没有拉伸也没有裁剪)。在大型固定格式显示器(如LCD显示器)或投影仪屏幕上的映射的典型实现中,画布优选地被调整大小以适合屏幕的完整高度或宽度。在用于智能电话的实现中,这一相同方法被使用,但最终用户可以例如通过捏合/拉伸来缩放各细节。
多个贡献者可以修改画布的矩形、非重叠部分。通过将布局限于简单的矩形部分,通过语音来引用特定内容在屏幕上的位置(“请看左上图片”)以将注意力吸引到该特定内容是可能的。各画布部分可由它们的贡献者的标识来标记(如用户名或计算机名)。
对画布的贡献的大小和位置在自动算法的控制之下。该算法是一种简单的规则,如:1.第一贡献填充整个画布,2.第二贡献将屏幕水平地分成两个相等部分,其中第一贡献显示在左侧,3.第三贡献垂直地划分画布,其中前两个贡献在顶部,以此类推。这一规则的简单性以及直接贡献者对算法定位的影响的缺失允许会议参与者预测内容将显示在何处,从而最小化(远程)参与者之间的混淆。
画布的一个实现是具有用于更新且映射其内容的(远程)访问功能的存储在一个物理位置上的存储器。本地高速缓存结合脏分块(dirty-tiling)或感兴趣区域编码技术可被用来最小化通信有效载荷。或者,如在www.shared-canvas.org中,基于web的技术可被使用。
画布的一个实现是按XML、HTML或类似格式的画布布局及其所有组件的逻辑描述,其中画布的物理实例化只在会话中的参与端点处发生。对画布内容和/或画布分辨率、会话id、令牌、令牌与会话之间的关系的维护可作为外部服务提供给该解决方案的用户。
一种用于传送令牌的另选方法是可由相机(如web相机或者智能电话或平板中的相机)拾取的视觉代码。令牌可以是代码的形式,如2D条形码。这样的代码是“QR”码——参见图13到15。该代码可以显示在处理设备的显示器上,如计算机、膝上型计算机等。
QR(图13)用作方便用于电子屏幕与智能电话的组合的秘密代码。该代码中的秘密(即,QR代码的内容)信息是哪一屏幕属于哪一会议。
所以,本地会议室基站知道它连接到哪一屏幕。它不知道它属于哪一会议。可以提供一种机制,像在物理外围设备首次被插入本地处理设备时,可任选地在发起会议并由此作出中央显示器与会议之间的关联的合适的超时时段(见上)之后。随后可生成QR码。QR码包含会议ID和URL以(在优选实施例中,间接经由共享画布)访问中央显示器。
这一QR码被显示并且可由任何会议参与者拾取。这些参与者随后不需要外围设备,而是可以使用QR码中列出的资源来连接到他们可在其上显示其数据的在线画布。
图14示出来自两个参与者的处理设备的图像,如在本地显示器或中央显示器上看到的。
在图像中央的用户标记可在每一改变之后的几秒内可见(例如,在新处理设备被添加会议或从会议移除时)。
用户的令牌是画布服务所知的事物,在连接到源时,它向用户/资源服务询问与关联于从中知晓用户标记的令牌的源相关联的用户的公共用户名。
这在远程会话中尤其重要,因为它允许所有用户与源相关联并且因此将屏幕上的各区域与用户相关联,现在他们可以说‘我不同意Piet给出的数字,即使Piet是远程的且不在会议室中……’。
在图15中示出的图像可以在任何时刻示出,以允许其他参与者获得对会话QR码的访问权,从而开始共享内容(如果他们在会议开始时错过机会的话)。
对于远程参与者,提供了一种用以传递秘密(会议ID和URL)的方法。如上所述,这可以是语音指令,或SMS消息。
本发明的一方面是以下实现:语音通信可以是总体系统的集成组件。语音含义与视觉含义交织,并非只在演示是多媒体事件(幻灯片和讲话)的意义上,而是会议的管理可以说语音和(电子)视觉协作。例如:
·传送令牌的一种方式是将它们口头传递给远程参与者。这假定在任何事物之前存在音频链路,并且需要短且简单的令牌串来将通信误差保持为最小。
·通过为所有会议参与者维护单个布局(拓扑结构),易于通过语音指令来引用屏幕上的元素。相反,不能以简单语言描述的所有屏幕管理被禁止。
·在这一场景中,因为总是可以依赖音频信道的存在,所以也可以使用这一基础结构来消除或减少硬件物理外围设备和/或虚拟屏上按钮的数量。可以使用语音命令,结合语音识别,来更改屏幕布局。‘虚拟按钮’可以是类似Siri的界面:
·“显示我的屏幕”
·“放大我的屏幕”
·“隐藏我的屏幕”
·“移除右上屏幕”
·“移除所有屏幕”
如上所述,用户可以用各种方式获得对令牌的访问权,通过语音通信、通过消息收发(如SMS)、或通过使用相机(例如,在他们的智能电话或平板中)扫描QR码。根据本发明的又一方面,最后缺失的一环是将用户内容与令牌连接。
例如,用户可具有该用户想要用作会议会话中的内容源的处理设备,诸如膝上型计算机、PC、智能电话、或平板,但该用户正在使用移动电话来检索他的令牌。用户可能尝试将令牌从电话移至便携式处理设备PC,例如通过简单地复制它并将它输入在便携式处理设备PC上的网页上,但因为这是重复动作,即用户在每次他/她参与会议时都必须这样做。
本发明的另一方面还提供一种用于这一问题的解决方案,如图11所示。在一个实施例中,本发明的系统或方法允许在用户所选情况下在一个或多个移动设备上下载并安装应用的可能性。用户随后在中央服务处注册他/她自己,其中用户被分配ID。用户可以从该应用将计算机源(用户处理设备、他的PC或可能多个处理设备,如PC或平板计算机)与用户ID配对。
将处理设备计算机源配对的过程可以像从该处理设备在网页上冲浪一样简单,这将示出唯一的源ID(例如,通过再次示出QR码)。参考图16,通过用移动设备从处理设备的PC本地屏幕读取QR码,PC本地处理设备被链接到用户ID。该信息以cookie的形式或类似方法被存储在处理设备PC上。如果用户源处理设备PC不能存储永久数据,则一种另选方式是用户将他的处理设备PC指向web位置,其中用户登录到中央服务,此时源处理设备PC再次与用户ID自动关联。
另一实现可以是扮演与处理设备PC上的移动电话应用相同角色且会在用户激活时连接到中央服务的浏览器应用(示例实现可以是Chrome浏览器应用)。
在用户随后使用用户移动电话应用检索令牌以参与会话时,该应用将允许用户共享计算源或选择他的本地计算源之一来添加到画布或从画布移除,该画布是用令牌所连接到的会话来引用的。
图11示出平板如何连接,留下到企业网络或因特网的连接,并且没有集成无线网络来用于企业IT中的显示。它只需要基站的外出连接,例如可以直接引导到公司DMZ中的路由器。
在此,存在从平板到会话的配对。该应用可以用于最强、非连接的无线网络。‘会话’可以是静态且命名的,例如显示的会话ID,或通过分析屏幕上的内容,例如基站可以向服务器发送内容的指纹,该指纹可由该应用或云服务通过发送当前屏幕的图像来计算。因为存在应用,所以可以伴有与如何实现配对有关的指令。如果基站具有音频输入,则可以通过云服务所请求的合适的音频消息来完成。
参考图12,即插即用外围设备1中的存储储存在该即插即用设备经由第一即插即用接口1a连接到第一处理设备时由第一处理设备自动执行的代码。在即插即用设备上的按钮2被首次按下(第一用户动作)时,代码由第一处理设备L11执行以发起第一处理设备与第二计算设备(即,基单元或节点)之间的显示数据交换。该数据交换优选地无线地(例如,蓝牙、IEEE 802.11/
Figure BDA0002882027180000311
WiFi、IEEE 802.15.4以及ZigBee、……)来完成,但可以经由有线连接来完成。处理设备L11与接收设备B1之间的数据交换可以独立于因特网(例如,这两个计算设备之间的直接无线通信)或通过因特网以及中间存储设备C来完成。存储设备C通常具有从例如数据分组提取信息、对它进行排序、重新安排它、创建数据文件、写入文件、擦除文件中的特定元素、……的计算能力。除非另外指明或通过上下文显而易见的,将讨论其中现实世界在如L11等计算处理设备、如B1等基节点以及存储设备C之间交换的情况。在这种情况下,显示数据通过处理设备L11的通常可用的通信接口(Wifi、以太网……)被发送给存储设备C。诸如路由器、LAN硬件、因特网提供者硬件、陆线、对GPRS和/或移动电话网络的接入等支持设备被假定是可用的,且不是对本发明的限制,并且将不进一步讨论。基单元B1例如是配备有如下以及其他事物的计算机:图形卡,硬盘存储器,以及例如
Figure BDA0002882027180000312
SempronTM150(2.9GHz,1MB高速缓存)、AMD AthlonTMII X2 250(3.0GHz,1MB高速缓存)、
Figure BDA0002882027180000313
AthlonTMII X4 645(3.1GHz,2MB高速缓存)等处理器,例如
Figure BDA0002882027180000314
7Professional,64位等处理系统,例如1333Mhz的6GB双通道DDR3 SDRAM-3DIMM硬盘1000GBSATA等存储器,用于读取CD ROM的光学站,例如ATI RadeonTMHD4200集成图形卡、512MB
Figure BDA0002882027180000315
GeForce G405图形卡、1GB DDR3
Figure BDA0002882027180000316
RadeonTMHD 6450图形卡或可现货购得的类似图形卡等等视频卡,系统卡上的10/100/1000以太网-LAN;例如Dell Wireless 1525802.11n PCIe-网卡、VGA-连接和/或HDMITM连接等用于连接到显示器D1的无线通信接口。中央存储设备C也可以是与已被配置成服务器的B1相同或相似的计算机。
来自第一处理设备L11的“经屏幕抓取”的显示数据3被发送给中央存储设备C(直接由L11发送,或在另一实施例中,通过基单元B1发送)。该信息按例如HTML5来编码,包括标识经屏幕抓取的信息的来源(在该示例中是L11)的标识符id。存储设备C随后被基单元B1咨询以在显示器D1上显示该显示数据。
在按钮2被第二次按下时,处理设备L11通知中央存储C经屏幕抓取的显示数据3必须被擦除。在第一实施例中,中央存储C通知基单元B1显示数据已经被更改。B1随后咨询中央存储C并上传显示数据,直至在C上可用并在D1上显示它。在以上给出的简单示例中,假定在首次按下按钮2之前没有显示数据在C上可用,没有显示数据将保留在C上且没有数据将显示在D1上(例如空白屏幕,如果D1是液晶显示器的话)。标识符可以是可被编码在由作为L11的处理设备发送的数据分组中的任何实际标记。这可以是IP地址、MAC地址、即插即用设备中记录的唯一标识符(例如,在通过对闪存编程、设置变光开关……来装配时分配给该即插即用设备的号码)。在本说明书中进一步描述的智能电话P31的情况下,唯一标识符可以是电话号码本身。生物测定也可被用来标识用户并向用户分配标识符id。
在第二实施例中,L11与基单元B1通信,基单元B1进而通知C它必须从其存储器擦除显示数据3。在一特定情况下,与基单元B1的通信是通过配备有RF接口的即插即用设备1完成的。
在本说明书的其余部分,除非另外指明,按下按钮(或进一步描述的等效动作)以及对显示在D1上/在存储器设备C上可用的数据的最终影响将被称为“事件”。
即插即用设备可被例如在处理设备L11上运行的代码替换。在这种情况下,按钮2被(良好定义的)触摸屏区域(智能电话的情况)或膝上型计算机的键盘上的键替换。将触发事件的触摸屏区域可以由所显示的图标来指示。或者,将不显示图标,并且事件将通过“刷扫”触摸屏来触发。其他另选方法包括连接到计算设备的相机作出的姿势识别、语音识别及激活、指纹感测、……。
分别配备有计算设备(例如,“膝上型计算机”)L11、L12或像P13等智能电话的若干用户(例如,U11、U12、U13)聚集在配备有基单元B1和显示器D1的第一会议室R1中。第一处理设备L11配备有外围设备d11,而另一处理设备L12将依赖其键盘(或另选的传感器)上的键来触发事件,而智能电话P13将依赖其触摸屏。
在地理上远离R1的另一会议室R2中,用户U21、U22、U23……配备有计算设备L21、L22、L23……,这些计算设备配备有即插即用设备d21、d22、d23……或触发事件的另选方案之一。
在又一位置,例如,宾馆房间、车……,“商旅达人”U31使用智能电话P13与用户U11、U12、……U23……通信。
事件将由一组索引i、j以及k来标识。索引i和j表示事件的起源处的用户(示例:i=2且j=1表示由用户U21触发的事件)。索引k是1(即插即用设备d21的按钮2被首次按下且在例如处理设备L21上经屏幕抓取的显示数据被发送C给并存储在C上、且显示在D1、D2以及P31上)或2(按钮2被第二次按下并且显示数据d21从C擦除且从显示器D1、D2、P31消失)。
所提出的设置允许用户中的任一个通过触发第一事件来在显示器D1和D2上以及在例如P31等智能电话的显示器上与所有其他用户同时共享显示数据。该设置允许任何用户通过触发第二事件来撤消他/她对显示在D1、D2以及P31上的数据的贡献。
显示在D1、D2以及P31上的数据依赖于(a)计算设备中的任一个发送给存储设备C并存储在C中的显示数据以及(b)在每一事件时更新并存储在C上的配置文档CD。
在本说明书中,存储在C中且由配置文档结构化的显示数据可被称为画布。
对于事件Eij1,来自处理设备Lij(或Pij)的显示器的经屏幕抓取的显示数据与标识符idij一起被发送给存储设备C。
存储设备C接收到显示数据的时间顺序在时间索引m的形式下记录。时间顺序通过例如在接收到显示数据ddij之际C处的本地时钟的时间来确定。或者,事件Eij的时间索引通过用GMT或世界时间表达的Lij的本地时钟的时间来确定。
如果存储设备C接收到来自一个以上处理设备Lij(或Pij)的贡献,则配置文档被更新以反映这一点。
在第一示例中(对于配置文档而言),配置文档将向来自处理设备Lij/Pij的接收到的显示数据DDij分配(a)标识符idij(b)时间索引mij以及(c)与源有关的元数据(例如,用户Uij的名称或标识符)。该元数据可叠加到显示器D1、D2……上的对应显示数据。
基于贡献的数量,配置文档将确定经组合的显示数据的布局。示例:如果接收到来自2个计算设备Lij/Pij的贡献,则配置文档将D1和D2上的显示空间的一半分配给每一显示数据ddij。
如果接收到来自3或4个计算设备Lij/Pij的贡献,则配置文档将D1和D2上的显示空间的四分之一分配给每一显示数据ddij。
如果接收到来自4个以上计算设备的贡献,则配置文档将D1和D2上的显示空间的四分之一分配给具有最新近时间索引mij的四个显示数据ddij。
对于事件Eij2,来自处理设备Lij/Pij的显示数据从存储设备C擦除,对应的标识符idij和时间索引mij从配置文档CD消失且显示在D1和D2上的数据将例如根据以上给出的示例相应地修改。
显示器D1和D2可具有不同的特性(分辨率、有效显示面积的尺寸……)。为了使所有用户能访问(尽可能接近)相同的视觉数据,显示器D1和D2(具有或不具有来自它们的基单元的支持)使用配置文档来确定显示数据ddij是否必须被调整大小以填充屏幕的全高或全宽。
更一般而言,要显示的显示数据ddij通过变换函数TFi来被映射,该变换函数根据用户Uij在他们的会议室Ri中的需求通过例如内插、解交织、大小重新采样;分辨率、帧率、色彩深度、伽马、亮度、对比度……等的选择来优化每一特定显示器上的视觉外观。高宽比和各贡献ddij之间的边界被保留。
配置文档包含要显示的图像的带标签的标记语言描述。
如果显示数据DDij是可变的,则对应的时间索引mij保持不变且等于其最早值(例如,在接收到第一数据分组之际)。
配置文档可以是或可包含要显示的图像的带标签的标记语言描述。例如,诸如SGML、XML、SVG等语言/格式/样式可被使用。
配置文档可包括要显示的图像内容的完整描述。该完整描述可通过显示数据ddij的网络地址被定义在文档中。
SVG绘图的相关属性是它们可以是动态的且可交互的。对各元素的基于时间的修改可以用SMIL(同步多媒体集成语言)来描述,或可以用脚本语言(例如,ECMAScript或JavaScript)来编程。W3C明确地推荐SMIL作为SVG中动画的标准。每当事件Eij要求时,SVG绘图可例如根据早先开发的示例来被编辑或变换。本说明书中所指的画布的相关示例是在被发送给“客户机”(例如,基单元)以供显示/渲染在客户机侧上运行的浏览器上之前由服务器侧脚本(如PHP、Perl、JSP、或ASP.NET)创建的动态网页。
存储在存储设备C上的显示数据可被如何分发给远程显示器D1和D2的更详细示例在Geert Nuyttens和Ronny Dewaele的公开号为US20070033289“Network displays andmethod of their operation(网络显示器和它们的操作方法)”的美国专利申请11/487,357中给出。显示C所发送的图形信息所需的硬件的示例也在美国专利申请S/N.11/487,357中给出。
在例如会议室1中的显示器D1包括两个(或更多个)分开的显示屏(例如,并排安装的两个82”LCD屏幕)时,美国专利申请S/N.11/487,357中描述的技术尤其相关。在C处生成的配置文档将确定画布会如何在两个显示器上分布。在早先示例上继续,其中最大4个贡献被显示在(并随后单个屏幕抓取的)D1上,具有最近时间索引mij的显示数据ddij可被显示在会议室1中的第一个独立显示器上,并且这样做使得最近贡献对各参与者而言更加可见,同时其他贡献ddij将被显示在会议室1中的第二独立显示器上。在会议室2中也这样做,假定第二屏幕也在会议室2中可用。US 11/487,357中描述的技术被用来将以下因素纳入考虑:例如同一会议室中的两个或更多个显示器中的一个出现故障,并且允许在尽可能少的中断的情况下继续会议。
在处理设备Lij在即插即用接口1的支持下通过基单元Bi与其他处理设备共享数据时,需要一些调适来设置/起草配置文档。
(1)显示数据ddij被发送给基站Bi。数据显示dij按Lij的本地时钟或Bi的本地时钟加时间戳。时间戳tij被表达为GMT或世界时间。
(2)显示数据ddij被基站Bi发送给存储设备C,其中时间索引mij是基于时间戳tij来确定的。这保证用户和他们在不同会议室中触发的事件将得到相同的优先级,而不管各会议室与存储设备C之间的传输时间的差异。
(3)画布是基于显示数据ddij和时间索引mij来组装的,如在计算设备Lij与存储设备C直接通信(即,不使用Bi作为中介)时所完成的。
在需要基站来访问存储设备C时,需要特定过程来允许“商旅达人”U31与用户U11、U12……、U21……共享显示数据。
令牌(即,更改存储在C上的显示数据ddij的授权和手段)需要通过语音指令来传送并且需要传达对画布作出贡献的手段。实现令牌的一种方式是URL加唯一会话ID的组合。这两者的组合给出对用作两个目的的会议专用网站的访问权:(1)下载并安装屏幕捕捉软件程序以及(2)给出对共享画布的访问权。(1)和(2)的组合向使用膝上型计算机或智能电话的商旅达人U31等远程参与者提供与具有对基单元B1或B2的访问权的参与者相同的功能。因为语音指令需要简洁,所以类似于tinyURL.com(或lilURL或TightURL)的服务将被用来组合网站+会话ID。为了避免错误,缩短的URL将使用易于发音的字符子集并且避免语言混淆(如G&J或I&E之间)。一个示例是仅限十六进制字符。在P31的电话号码被用作U31的标识符时,它可以通过下载的屏幕捕捉软件程序来验证或由网站本身来访问。在后一种情况下,电话号码可被用来授权通过网站对画布C的访问。
不能访问显示器D1或D2的商旅达人U31将必须依赖本地显示装置来查看对用户U1j和U2j可见的显示数据dij。智能电话的屏幕远小于会议室中使用的像D1和D2的显示器的屏幕,配置文档被有利地与变换函数一起使用。例如,认识到智能电话P31的屏幕(地理上远离显示器D1和D2)具有较小尺寸和分辨率,像时间索引等信息可被用来在智能电话P31的屏幕上一次只显示一个贡献ddij。从最大4(在以上示例中)个数据显示ddij之一切换到另一个可以由商旅达人U31通过滚动、点击他/她的智能电话上的特定键、或在P31的触摸屏上“刷扫”来完成。
代替通过电话由语音来完成,加入参与者U11、U12……、U21……、U31之间的虚拟会议的邀请可通过电子邮件通过社交媒体发送。用户U31仅必须点击邀请中指示的url,网站将验证P31的电话号码且U31将能够看到且与其他参与者共享显示数据。
用户Uij发出的语音命令与显示数据的集成改进了参与者Uij的焦点,且尤其是像只能访问他/她的智能电话P31上的小显示屏的“商旅达人”U31等特定参与者。
为此,计算设备Lij配备有现货语音识别软件。在用户(例如,U12)发出语音命令时,数字信息VC作为语音识别软件的结果被生成。该数字信息可通过例如查找表链接到可由服务器侧脚本来解释并触发对画布(例如,上述动态网页)的实时修改的指令。示例1:像“放大左上角”等语音命令将造成画布的左上角(在发出语音命令之前是可见的)被放大并占据显示器D1、D2的全屏,且更重要地,占据智能电话P31的屏幕。示例2:如果数据显示的布局被限于最大4个贡献(如上所述),语音命令可以是“左上”、“右上”、“左下”、以及“右下”。基于这些信息,服务器侧脚本将裁减智能电话P31上所显示的数据,并且只有左上或……或右下贡献将填充在智能电话P31的屏幕中。
返回图2,在基节点36上运行的基节点软件(6)可被适配成在中央显示器上显示启动画面(21),示出其准备就绪来通过其接收机接收任意媒体内容。这一启动画面(21)还可示出与如何使用该系统有关的指令以及到达基节点36的配置参数(见下)。这些配置参数也在中央显示器(22)的底部处的透明画布中示出。
想要使其任意媒体内容显示在连接到基节点36的中央显示器上的客户机处理设备31连接到连接单元47。便携式应用60将在作为主机设备的客户机处理设备31上执行。第一用户交互使用连接单元47中的发射机和基节点36中的接收机创建便携式应用60与基节点36之间的连接。第二用户交互(这一次在输入设备48上)激活便携式应用对来自客户机处理设备显示器的任意媒体内容的屏幕抓取,这随后通过连接器单元47发送给基节点。
基节点36接收来自一个或多个连接单元47的多个任意媒体内容,并将该媒体内容自动合成以渲染在中央显示器上。
连接单元47上的视觉指示器61向用户以及会议中的其他参与者指示媒体内容正被该连接单元47发送给基节点36以供显示。
在连接单元47的输入设备48上重复第二用户交互解除来自该连接单元47的媒体内容与基节点36的耦合。基节点36从中央显示器上的合成图像移除该媒体内容并在中央显示器上重新合成其余内容。
中央显示器/投影仪上的内容被自动安排,如图2所示。在用户1添加内容时,他/她的显示器将被缩放以尽可能多地填充可用中央显示器画布,但不影响高宽比。在用户2加入时,他的内容被添加到第一图像的旁边。在用户3添加他的内容时,排列是三角形。添加用户4,图像变成2乘2分块,这是可用的最大值。在附加用户尝试添加内容时,他将被阻塞。在用户发起移除他/她的内容的动作时,他/她的媒体内容从中央显示器移除且在合成序列中向后移动,如图2所示。
基节点软件
基节点软件具有以下特征中的一个或多个:
-用于提供用于正确地配置基节点的接收机的手段或方法步骤的第一代码。
-用于提供用于监听尝试连接在特定端口上的连接单元的输出的手段或方法步骤的第二代码。
-可任选地,用于提供用于管理目的的GUI(例如,通过web接口提供)的手段或方法步骤的第三代码。
-可任选地,用于提供用于使用zeroconf协议通过网络发布其存在的手段或方法步骤的第四代码。
-可任选地,用于提供用于接受并安装基节点的软件更新以及连接单元的便携式应用软件的软件更新的手段或方法步骤的第五代码。
-用于提供用于提供将连接单元配对到基节点的设施的手段或方法步骤的第六代码。
-用于提供用于在显示器或投影仪屏幕上自动合成不同传入任意媒体流并渲染经合成的图像的手段或方法步骤的第七代码。
-用于提供用于接收、解密、并解码传入的任意媒体内容的手段或方法步骤的第八代码。
-可任选地,用于提供用于缩放传入的任意媒体流的手段或方法步骤的第九代码。
-可任选地,用于提供用于根据一组一个或多个规则来显示传入的任意媒体内容的手段或方法步骤的第十代码。
以上代码中的任一个可被存储在非瞬态机器可读存储介质上,如光盘、磁盘、磁带、固态存储器,等等。
用于客户机处理设备的便携式应用
便携式应用包括用于屏幕抓取的算法。屏幕抓取算法包括VNC和RDP,诸如此类。该算法可包括诸如针对不同内容(例如,静态文本或视频)来优化的VNC和RDP等算法的组合。便携式应用具有以下特征中的一个或多个:
-用于提供用于连接到包括基节点的网络的手段或方法步骤的第十一代码。
-用于提供用于捕捉客户机处理设备(即,计算机(C))的视频帧缓冲区(也称为屏幕抓取)的手段或方法步骤的第十二代码。
-用于提供用于编码、压缩以及可任选地加密这些视频帧并通过安全链路将它们发送到基节点的手段或方法步骤的第十三代码。只有屏幕的矩形或三角形等改变的区域需要被传送,并且不同类型的矩形或三角形可以用不同的方式(例如,RLE、JPEG……)来编码以优化性能。
-用于提供用于处理连接单元的手段或方法步骤的第十四代码。
-用于提供用于发起到基节点的连接的手段或方法步骤的第十五代码。
-用于接收来自连接单元上的输入设备的输入的第十六代码。
-用于提供用于向连接单元上的视觉指示器发送状态改变的手段或方法步骤的第十七代码。
-可任选地,用于提供用于向用户呈现GUI(18)的手段或方法步骤的第十八代码。
-可任选地,用于呈现用于管理便携式应用的GUI的第十九代码。
-可任选地,用于提供用于在客户机处理设备的显示器上显示并激活键以允许用户输入将来自客户机设备的数据开始传送到基节点的手段或方法步骤的第二十代码。
以上代码中的任一个可被存储在非瞬态机器可读存储介质上,如光盘、磁盘、磁带、固态存储器,等等。
在这一实施例中,便携式应用被存储在连接单元上,且在客户机处理设备上的执行上下文中执行。便携式应用不需要被复制到或安装在计算机上。它可以直接从连接单元执行。它将只被临时复制到客户机处理设备上的执行上下文中。也没有对客户机处理设备中的配置或设置的改变。这意味着在连接单元被移除时,没有什么将留在客户机处理设备上。它还暗示便携式应用将在客户机处理设备上运行,其中用户不必具有安装软件的访问权。
便携式应用按如下方式设计:
-不需要在客户机处理设备上安装特定驱动程序。
-预安装驱动程序被用于例如多类外围设备。
-它与供应商专用图形硬件无关。
-它在至少一个且优选地在各种不同的客户机处理设备上运行,包括Windows、MacOS/X、Linux、Android、iOS以及许多其他。
优点
本申请具有以下优点中的一个或多个:
-会议中不需要主持人角色
-连接单元到基节点的标准即插即用连接性
-采用简单且公知的用户动作
-客户机处理设备的自有联网设施不被阻塞
-客户机处理设备上没有配置改变
-输入设备易于访问;例如,很大的大小
-便携式应用和服务器程序的程序更新可在本地执行
-便携式应用被使用,无需安装、多平台、无供应商专用
-由便携式应用完成的屏幕抓取的特定实现避免供应商专用图形设备
-标准驱动程序被使用,因此没有必须安装的驱动程序
-客户机处理设备上没有配置改变
-客户机处理设备上的零足迹应用——没什么要清除或调整或复位
-客户机处理设备的自有联网设施不被阻塞
-用户计算机上没有配置改变
-低病毒、恶意软件和间谍软件风险
便携式应用可被存储在非瞬态机器可读存储介质上,如光盘、磁盘、磁带、固态存储器、USB大容量存储,等等。
第二实施例
在第二实施例中,参考图2到5,基节点是称为基单元(B)的单独的物理处理设备,包括永久存储、存储器、处理引擎、无线接入点(4)、即插即用接口(如USB端口(11))、图形显示输出适配器(5)(如VGA/DP/DVI/HDMI)、以及可任选的视频输出适配器(27)。具有诸如按钮13等致动器和视觉指示器14的输入设备是可任选的。
连接单元是外部外围设备(在附图中被示为“软件狗(dongle)”D)形式的物理设备,包括存储便携式应用(7)和配置参数(12)的持久存储、存储器、处理引擎(例如,CPU、FPGA)、无线发射机(如WiFI(3))、即插即用接口(如USB接口(2))、按钮(作为输入设备(9))、LED环(作为视觉指示器(10))。便携式应用存储在外围设备(7)上。
客户机处理设备是主机设备,例如计算机或膝上型计算机,包括显示器、即插即用接口(如USB端口(2))、存储器、以及处理引擎(如微处理器)。
该系统因而包括:
-在一端上具有即插即用接口(如USB接口(2))且在另一端上具有通信接口(如配置成客户端(3)的无线接口)的外部外围设备(D)。
-在一端(4)具有通信接口(如配置成接入点的无线接口)且在另一端具有视频卡适配器(5)(如VGA、DVI、DP或HDMI)的基单元(B)。
-存储在外围设备(D)上但在客户机处理设备(C)上执行的便携式应用(7)
-在基单元(B)上存储并执行的基节点软件(6)
外部外围设备(D)还优选地具有以下中的任何一个或任何组合:
-作为用于输入设备(9)的致动器的大型按钮,从而允许用户与该外围设备交互。该按钮优选地具有100和14400平方毫米之间的致动表面积。
-视觉指示,如LED(10),从而允许来自外围设备的用户反馈
本发明的各实施例的优点是以在很大程度上与操作系统无关且不留下足迹(零足迹)的方式经由诸如任何处理设备(如计算机)上的USB接口等外围接口提供到外围设备的数据传输。驱动程序和/或应用在诸如计算机等的处理设备上的安装在存在预安装通用驱动程序的情况下不是必须的。诸如计算机等处理设备上的管理员权限优选地不是必须的。为了避免对管理员权限的需要,本发明的各实施例使用其他外围设备预安装驱动程序,如所支持的USB类驱动程序,而无需任何额外安装。本发明的各实施例经由外围设备(如USB设备)至少将在处理设备上运行的客户机软件所呈现以供传送的经屏幕抓取的数据路由到通信网络。这绕过处理设备的任何网络接口(并且因此绕过许多防火墙),但只针对特定客户机软件。其他应用不受影响,且可以使用标准网络接口,即来自/去往TCI/IP栈的分组正常传送到网络设备。客户机软件从诸如USB合成设备或存储设备等外围设备上作为便携式应用来启动,这可避免在主机OS上留下任何轨迹。
第二实施例的基本使用场景
基节点软件(6)在投影仪上显示启动画面——图5中的(21),从而示出它准备就绪来通过其接收机(4)接收任意媒体内容。这一启动画面(21)还示出与如何使用该系统有关的指令以及到达基节点的配置参数(见下)。这些配置参数也在中央显示器(22)的底部处的透明画布中示出。
为了避免用于配置外围设备与基单元之间的连接的用户交互,使用配对过程。这一配对过程向外围设备(即,连接单元)提供设置本地网络所需的网络参数。作为示例,外围设备可简单地插入基单元(B)的USB端口(11)。基单元随后可任选地进行软件有效性检查,可任选地进行对存储在外围设备上的便携式应用的软件更新,并且将外围设备和基单元找到彼此所需的连接参数写到外围设备(D)上的永久存储(8)。例如,在使用WiFi时,这将是SSID、WEP/WPA2密钥以及基单元接收机的IP地址,以及基节点软件所使用的端口号,但并非所有这些都必须被交换。
想要使其任意媒体内容显示在连接到基节点(5)的中央显示器上的客户机处理设备将外围设备(D)经由(2)连接到其USB端口。外围设备通过接口(2)将自己呈现给计算机作为包括大容量存储设备和键区的合成设备。这具有不需要特定驱动程序的主要优点,因为所有这些设备在具有USB端口的每一个人计算机系统中都得到本机支持。如果启用了自动运行,则计算机将自动执行存储在外围设备上的大容量存储(8)中的客户机软件(7)。在一般情况下提到的第一用户交互则只是外围设备到USB端口的连接。如果安全措施禁用自动运行,则用户需要探索外围设备的大容量存储上的大容量存储并手动启动便携式应用。
便携式应用将使用外围设备的无线(例如WiFi)接口(3)连接到正确的基节点。为了知道要连接的正确基单元,在上述配对过程期间,作出这一连接所需的配置参数被存储在大容量存储设备(8)上的数据库(12)中。
一旦作出连接,外围设备就进入连接模式。这意味着现在存在从外围设备到基单元的至少一个信道。内容尚未示出。外围设备上的LED(10)现在转成白色以给出这一新状态的视觉指示。
在计算机(C)处的用户想要示出她的内容时,她按下按钮(9)。在按钮先前处于“连接”状态(参见图6)时,它将检查基单元(P)的状态。如果基单元没有处于“充满”状态,则外围设备将经屏幕抓取的任意媒体内容发送到基单元(B),该基单元(B)将该媒体内容添加到中央显示器上的合成中。外围设备LED(10)现在转成红色以指示“示出”状态(图6)。
按钮(9)担当触发器。在用户再次按下该按钮时,计算机显示内容将从投影仪移除。LED(10)变回白色。
使用自动运行特征是在可能且在计算机(C)上启用的情况下是可任选的,以便一旦外围设备被插入就启动客户机软件(7)。在Windows上,例如,这意味着将外围设备装载为大容量存储设备并使用存储在外围设备上的autorun.inf文件。
然而,在许多情况下,这一自动运行特征将出于安全原因而被禁用。在这种情况下,如果可能且在计算机(C)上启用,将使用自动播放特征来在计算机的桌面上示出所连接的外围设备的标识。用户随后需要双击该标识来启动客户机软件。
如果上述自动播放特征也是不可能的或没有启用的,则用户必须浏览所连接的外围设备的文件系统并手动启动该应用。这意味着双击Windows上的client.exe文件、MacOS/X上的client.app、或者轻击平板或具有触摸屏的任何移动设备上的适当应用图标。
第三实施例:便携式应用存储在标准固态存储器上,如USB棒。
在第三实施例中,便携式应用被存储在固态存储器上,如常规USB存储器棒(图7)。
对于诸如常规USB存储器棒等固态存储器而言,不存在以上针对连接单元描述的各类输入设备、视觉指示器或发射机。这意味着该系统需要:
-使用来自客户机处理设备的发射机/接收机。
-使用客户机处理设备上的键或按钮作为输入设备,如键盘上的物理键、特殊鼠标按压、触摸屏上的按钮区、显示在屏幕上的要用鼠标指针点击的按钮。
-在客户机处理设备的显示器上呈现视觉指示器。
客户机处理设备随后看起来像图8。
这一实施例以在很大程度上与操作系统无关的方式提供担当主机设备(如计算机)的任何处理设备上的诸如USB接口等外围接口。驱动程序和/或应用在诸如计算机等存在预安装通用驱动程序的处理设备上的安装不是必须的。诸如计算机等处理设备上的管理员权限优选地不是必须的。为了避免对管理员权限的需要,这一实施例使用其他外围设备预安装驱动程序,如所支持的USB类驱动程序,而无需任何额外安装。本发明的这一实施例经由处理设备的网络连接至少将在处理设备上运行的客户机软件所呈现以供传送的经屏幕抓取的数据路由到通信网络。客户机软件从外围设备(如USB设备)作为便携式应用来启动。
第一用户操作随后包括:
-插入固态设备,如USB存储器棒,
-启动便携式应用(如果自动运行被禁用)
-使用中央显示器上示出的配置参数(22)来配置客户机处理设备上的发射机来连接到正确的基节点
-触发便携式应用与基节点的连接,例如通过与呈现在客户机处理设备的显示器上的便携式应用的GUI(18)上的元素进行交互。
在这一实施例中,呈现对用户动作的视觉反馈也是使用客户机操作设备的显示器的GUI中的元素来完成的。
在这一实施例中,零足迹的优点通过便携式应用在以下意义上部分地实现:没有软件被安装或复制到客户机操作设备,但需要配置改变来将客户机操作设备的发射机与基节点连接,这需要之后撤消。
可任选地,便携式应用可为用户作出对发射机的配置改变。
在这一实施例中损失的优点
-便携式应用的零足迹性质的部分损失
-更复杂的第一用户交互
-用户需要更多专业知识
-客户机操作设备显示器上需要的GUI,这可能也在中央显示器上示出
-在将物理键用于第二用户动作时,需要找出客户机操作设备上的空闲键
-网络接口被便携式应用阻塞而不能用于其他用途。
可任选地,最后一点可通过使用基单元作为到客户机操作设备想要通过其自己的接口连接到的网络的网关来避免。
优点是:
-通过基单元上的设置,对用户到企业网络的连接性的紧密控制
-即使在发射机现在也被用于显示目的时,也保持网络连接性完好
缺点是该系统的较高脆弱性,因为显示连接现在可能是进入企业网络的通道。
剩下的优点是
-将便携式应用分发给用户的物理介质的可用性
-不需要将软件安装或复制到客户机操作设备
-经由基单元维护连接单元(在此:存储器棒)上的软件更新的容易方式
-通过基单元在连接单元上写入配置数据的可能性,例如以可由客户机操作设备读取并使用的配置简档的形式
第四实施例:安装在客户机处理设备上的仅限软件客户机
这一实施例类似于第三实施例,唯一差别是软件被复制在客户机操作设备上(图9)。在这种情况下,客户机操作设备上不需要即插即用端口(如USB端口)。
这一实施例通常被用于平板PC和移动设备。在这种情况下
-通常不存在可用的USB端口
-通过应用商店的应用分发是容易且广泛接受的
第五实施例:原始制造到投影仪或显示设备的基节点软件
在这一实施例中,基节点没有被实现为单独的物理盒,而是集成到显示器或投影仪内部的处理单元。所有其他细节与前述相同。
第六实施例
在这一实施例中,基节点没有被实现为单独的物理盒,而是集成到视频会议设备的编解码器。所有其他细节与前述相同。
第七实施例:远程会议参与者
在这一实施例中,一个或多个客户机操作设备不在基节点的直接邻近区内,而是在远程位置。
为了适应这一情况,需要以下适配:
-进一步压缩和/或缩放任意媒体内容以允许使用低带宽连接
-将基节点的连接参数传递给远程用户的可能性
-基节点到远程用户连接到的WAN网络的连接性
所有其他细节与前述相同。
第八实施例:多个基节点
在这一实施例中,使用多个基节点。这可以出于不同目的来完成:
-多个中央显示器的连接性
-中央显示器的实际显示面积的扩展
-不同远程位置中的基节点的连接性
这提供了可以从单个外围设备存在于多个基单元上的优点。这对多种情况而言是有用的:
个人外围设备:用户可以具有与他通常使用的多个会议室配对的个人外围设备
在具有多个基单元的会议室中使用,每一基单元控制该同一会议室中的不同显示器
该建议使用该外围设备的称为多基外围设备的特殊变型。多基外围设备配备有围绕圆形中央“show me(给我看)”按钮的滚轮。这可以是机械滚动多位置开关或像iPod经典上的触摸轮那样的事物。
外围设备的这一多基变型的配对:
滚轮被置于对应基单元的位置。
外围设备按正常方式与基节点配对
配置参数被存储在永久存储位置;滚轮的每一位置具有对应的连接参数集合(例如,表中的不同各行),每一集合与特定基单元相对应
外围设备的连接如下:
-多基外围设备X被插入PC
-外围设备X上的滚轮被置于位置A
-外围设备X读取其内部存储器的位置A中的配置参数
-外围设备X连接到基节点A
-基节点A在中央显示屏上指示多基外围设备X的连接
-外围设备X上的滚轮被置于位置B
-外围设备X读取其内部存储器的位置B中的配置参数
-外围设备X连接到基节点B
-基节点B在屏幕上指示多基外围设备X的连接
-继续,直至用滚轮选择了正确基节点
-点击外围设备输入设备,例如按钮,以在基节点的中央显示器上示出内容
-滚动滚轮总是首先从最后位置的基节点点离内容
第九实施例
图10示出根据本发明的一独立实施例的包括输入设备的外围设备47。这一实施例可以由上述实施例中的任一个一起使用。
该外围设备被配置成连接单元并且是用于用户处理设备作为主机计算机的即插即用端口的连接器形式的物理设备,如USB连接、连接到连接器和基单元的灵活数据和功率连接,基单元具有致动器,例如配置成具有上述功能的输入设备的按钮。
基单元和/或致动器优选地大小很大,例如具有100和14400平方毫米之间的表面积。基单元可以是方形、矩形、圆形、六边形、椭圆形、多边形的形状或任何其他适于人体工学的形状。致动器优选地是圆形的,但可以是方形、矩形、圆形、六边形、椭圆形、多边形等形状,一个基单元上可以存在一个以上致动器。
灵活数据和功率连接(例如电缆)的长度优选地适配成将外围设备(在处于连接状态时,处于其操作位置),尤其是基单元和致动器,放置于所连接的用户处理设备的边界与如上定义的人体工学边界之间的区域中。另外,灵活数据和功率连接应当被适配成使得基单元独立于所需连接器的定向来平放在会议桌上,以将连接器插入即插即用接口。
基单元优选地包括电子装置,如具有用于存储便携式应用和网络配置参数的永久存储、存储器、处理引擎(例如CPU、FPGA)、无线发射机/接收机(如用于WiFi)、即插即用接口(如USB接口)、LED环(作为视觉指示器)。便携式应用可被存储在外围设备上,即基单元中。视觉指示器用于允许来自连接单元的对任何活动的状态的用户反馈。
·可以与本发明的实施例中的任一个一起使用的致动器的激活的一些示例:
o声音激活(拍手、语音识别、计算机声音、音乐、……)
o经由无线连接的设备的远程控制(IR、蓝牙、WiFi、……)
o光激活
o压力激活,例如用手指或手压下。
o触摸激活
o邻近度(‘接近接触’致动器或使致动器靠近某一物体)
o生物测定阅读器,如指纹阅读器、虹膜扫描仪、DNA分析仪
o键区,例如用于输入密码,例如口令
替换实施例
在以上实施例中,一旦作出连接设备与主机计算机之间的连接,外围设备就进入连接模式。这意味着存在从外围设备到基节点的至少一个信道。根据本发明的实施例中的任一个,可在连接设备与基节点之间设置多个信道。这些信道可以是逻辑信道。
这样的多信道安排的一些示例可包括第一信道和附加信道中的一个或多个:
o第一信道用于所抓取的图像流(XDS)
o第二信道用于GPU命令(OpenGL、DirectX)
o第三信道用于鼠标指针坐标(绝对、相对)
o第四信道用于鼠标指针图标
o第五信道用于图像数据文件(JPEG、PNG、GIF、……)
o第六信道用于多媒体数据文件或流(MPEG2、MPEG4、OGG、H.26x、……)
o第七信道用于音频数据文件或流(MP3、MP4、AAC、WMA、……)
o第八信道用于文本或文档数据文件(DOC、DOCX、PPT、PPTX、ODT、ODS、PDF、……)
o第九信道用于传输上述优先级值1、2、3、……。
在以上实施例中,描述了将外围设备与基节点配对的特定方法。本发明的实施例中的任一个可包括以下给出其一些示例的其他配对机制。
·配对的一些示例
o将外围设备插入通用外围设备端口,如基节点或其他启用USB的设备的USB端口。配对信息通过通用外围接口(如USB)传送。
o到基节点的无线信道的信号强度被用来标识要使用哪一基节点
o该无线信道或任何其他信道的信号强度。示例是NFC/RFID发射机可在会议室桌下提供。将用户处理设备(如膝上型计算机)和所插入的外围设备置于这一桌上将该外围设备与这一会议室的基节点自动配对。
o手动配对(例如,通过输入IP地址、主机名、无线ID(如WiFi上的SSID))。

Claims (24)

1.一种用于在与多个参与者的会议中的第一显示器上显示用户所选任意媒体内容的方法,所述用户所选任意媒体内容从包括第一和第二处理设备的两个或更多个处理设备获取,所述用户所选任意媒体内容通过通信网络来传送,所述第一处理设备和所述第二处理设备中的每一者具有存储器和第二显示器,所述方法包括:
将第一外围设备连接到所述第一处理设备的第一端口并将第二外围设备连接到所述第二处理设备的第二端口,所述第一外围设备具有第一发射机和第一致动器并且所述第二外围设备具有第二发射机和第二致动器,所述第一发射机和所述第二发射机用于与所述通信网络通信;
向所述第一处理设备的所述第一端口传递第一用户所选任意媒体内容和/或向所述第二处理设备的所述第二端口传递第二用户所选任意媒体内容,其中所述第一处理设备和所述第二处理设备中的每一者是主机设备;
通过致动所述第一外围设备上的所述第一致动器来触发通过所述第一外围设备向所述第一端口和所述第一发射机传送包括图像数据的所述第一用户所选任意媒体内容;和/或
通过致动所述第二外围设备上的所述第二致动器来触发通过所述第二外围设备向所述第二端口和所述第二发射机传送包括图像数据的所述第二用户所选任意媒体内容;以及
经由所述第一发射机和/或所述第二发射机来向所述第一显示器传送所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容,并且所述方法进一步包括:
使用所述第一外围设备和/或所述第二外围设备来提供令牌,所述令牌在被传送到所述通信网络时内在地或分立地提供在所述第一显示器上显示所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容的认证或许可,所述令牌还提供到所述第一显示器的链接;
通过所述通信网络路由分别来自所述第一处理设备和/或所述第二处理设备的所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容;
获得对所述第一显示器的电子访问权;以及
在所述第一显示器上显示所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容。
2.如权利要求1所述的方法,进一步包括通过对来自所述第一处理设备的数据进行屏幕抓取来获取所述第一用户所选任意媒体内容和/或通过对来自所述第二处理设备的数据进行屏幕抓取来获取所述第二用户所选内容媒体内容。
3.如权利要求1所述的方法,进一步包括将所述第一处理设备和所述第二处理设备连接到所述通信网络,所述第一处理设备和所述第二处理设备具有带有至少一个预安装通用驱动程序的操作系统,所述至少一个预安装通用驱动程序提供用于所述第一处理设备和所述第二处理设备中的每一者与一类外围设备之间的通信的通用通信协议,所述方法包括以下步骤:
a)通过所述操作系统的所述预安装通用驱动程序来设置用于所述第一外围设备与所述第一处理设备之间的通信的第一装置以及用于所述第二外围设备与所述第二处理设备之间的通信的第二装置;
b)经由所述第一外围设备将所述第一处理设备耦合到所述通信网络并经由所述第二外围设备将所述第二处理设备耦合到所述通信网络;
c)经由用于通信的第一装置来在所述第一处理设备与所述通信网络之间路由屏幕抓取数据和/或经由用于通信的第二装置来在所述第二处理设备与所述通信网络之间路由屏幕抓取数据,其中所述通用通信协议用于在所述第一处理设备与所述第一外围设备之间以及在所述第二处理设备与所述第二外围设备之间传送所述屏幕抓取数据。
4.如权利要求3所述的方法,其中步骤a)包括将所述第一外围设备作为人类接口设备呈现给所述第一处理设备或者将所述第二外围设备作为人类接口设备呈现给所述第二处理设备,并且其中所述预安装通用驱动程序是人类接口设备驱动程序。
5.如权利要求3所述的方法,其中步骤a)包括将所述第一外围设备作为大容量存储设备呈现给所述第一处理设备或者将所述第二外围设备作为大容量存储设备呈现给所述第二处理设备,并且其中所述预安装通用驱动程序是大容量存储设备驱动程序。
6.如权利要求3所述的方法,其中步骤a)包括将所述第一外围设备作为复合设备呈现给所述第一处理设备或者将所述第二外围设备作为复合设备呈现给所述第二处理设备,并且其中所述预安装通用驱动程序独立地驱动不同的设备接口。
7.如权利要求3所述的方法,其中客户机应用被存储在所述第一外围设备和所述第二外围设备上,当所述客户机应用分别在所述第一处理设备或所述第二处理设备上运行时,获取所述屏幕抓取数据。
8.如权利要求7所述的方法,其中所述客户机应用是便携式应用。
9.如权利要求1所述的方法,进一步包括操作所述通信网络的显示节点,所述显示节点耦合到所述第一显示器,接收所述用户所选任意媒体内容并控制所述用户所选任意媒体内容在所述第一显示器上的显示;以及
将程序加载到所述第一处理设备和所述第二处理设备上并且在所述第一处理设备和所述第二处理设备的操作系统上运行所述程序,以获取所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容。
10.如权利要求1所述的方法,进一步包括:
设置通信网络,所述通信网络在所述通信网络的基节点与耦合到所述第一处理设备的所述第一外围设备之间;
设置通信网络,所述通信网络在所述通信网络的基节点与耦合到所述第二处理设备的所述第二外围设备之间;以及
在所述基节点处从所述通信网络接收所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容并根据规则集在所述第一显示器上显示所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容。
11.如权利要求1所述的方法,其中所述第一外围设备被配对至所述第一处理设备并且所述第二外围设备被配对至所述第二处理设备。
12.一种用于在与多个参与者的会议中的第一显示器上显示用户所选任意媒体内容的系统,所述用户所选任意媒体内容是从包括第一处理设备和第二处理设备的多个处理设备获取的,所述用户所选任意媒体内容通过通信网络传送,所述第一处理设备和所述第二处理设备各自具有存储器和第二显示器,所述第一处理设备和所述第二处理设备各自是主机设备,所述系统包括:
提供令牌的第一外围设备和第二外围设备,所述令牌在被传送至所述通信网络时内在地或分立地提供在所述第一显示器上显示第一用户所选任意媒体内容和/或第二用户所选任意媒体内容的认证或许可,所述令牌还提供到所述第一显示器的链接,所述第一外围设备连接到所述第一处理设备的第一端口并且所述第二外围设备连接到所述第二处理设备的第二端口,所述系统被配置成将所述第一用户所选媒体内容和所述第二用户所选媒体内容分别传送到所述第一处理设备的所述第一端口和所述第二处理设备的所述第二端口;
用于分别通过所述第一端口和所述第二端口将所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容从所述第一处理设备和所述第二处理设备路由通过所述通信网络的装置;
用于获得对所述第一显示器的电子访问权的装置;以及
用于显示所述第一用户所选任意媒体内容和/或所述第二用户所选任意媒体内容的装置。
13.如权利要求12所述的系统,其中所述第一外围设备具有第一发射机和第一致动器并且所述第二外围设备具有第二发射机和第二致动器,所述第一发射机和所述第二发射机用于与所述通信网络通信,所述系统进一步包括:
用于通过致动所述第一外围设备上的所述第一致动器来触发通过所述第一外围设备向所述第一端口和所述第一发射机传送包括图像数据的所述第一用户所选任意媒体内容,并经由所述第一发射机向所述第一显示器传送所述第一用户所选任意媒体内容的装置;以及
用于通过致动所述第二外围设备上的所述第二致动器来触发通过所述第二外围设备向所述第二端口和所述第二发射机传送包括图像数据的所述第二用户所选任意媒体内容,并经由所述第二发射机向所述第一显示器传送所述第二用户所选任意媒体内容的装置。
14.根据权利要求12所述的系统,进一步包括:
用于从所述第一处理设备获取所述第一用户所选任意媒体内容的装置;以及
用于从所述第二处理设备获取所述第二用户所选任意媒体内容的装置。
15.如权利要求12所述的系统,进一步包括:
用于通过对来自所述第一处理设备的数据进行屏幕抓取来获取所述第一用户所选任意媒体内容的装置;以及
用于通过对来自所述第二处理设备的数据进行屏幕抓取来获取所述第二用户所选任意媒体内容的装置。
16.如权利要求12所述的系统,进一步包括用于将所述第一处理设备连接到所述通信网络的装置以及用于将所述第二处理设备连接到所述通信网络的装置,所述第一处理设备和所述第二处理设备各自具有具备至少一个预安装通用驱动程序的操作系统,所述预安装通用驱动程序提供用于所述第一处理设备或所述第二处理设备与一类外围设备之间的通信的通用通信协议,所述第一处理设备和所述第二处理设备各自具有发射机,所述系统包括:
a)用于通过所述操作系统的所述预安装通用驱动程序来设置用于所述第一外围设备与所述第一处理设备之间的通信的第一装置以及用于所述第二外围设备与所述第二处理设备之间的通信的第二装置的装置;
b)用于经由所述第一外围设备将所述第一处理设备耦合到所述通信网络的装置以及用于经由所述第二外围设备将所述第二处理设备耦合到所述通信网络的装置;
c)用于经由用于通信的第一装置来在所述第一处理设备与所述通信网络之间路由屏幕抓取数据的第一装置以及用于经由用于通信的第二装置来在所述第二处理设备与所述通信网络之间路由屏幕抓取数据的第二装置,其中所述通用通信协议用于在所述第一处理设备与所述第一外围设备之间以及在所述第二处理设备与所述第二外围设备之间传送所述屏幕抓取数据。
17.根据权利要求12所述的系统,进一步包括:
用于将所述第一外围设备作为人类接口设备呈现给所述第一处理设备的第一装置以及用于将所述第二外围设备作为人类接口设备呈现给所述第二处理设备的第二装置,其中所述预安装通用驱动程序是人类接口设备驱动程序。
18.根据权利要求12所述的系统,进一步包括:
用于将所述第一外围设备作为大容量存储设备呈现给所述第一处理设备的第一装置以及用于将所述第二外围设备作为大容量存储设备呈现给所述第二处理设备的第二装置,其中所述预安装通用驱动程序是大容量存储设备驱动程序。
19.根据权利要求12所述的系统,进一步包括:
用于将所述第一外围设备作为复合设备呈现给所述第一处理设备的第一装置以及用于将所述第二外围设备作为复合设备呈现给所述第二处理设备的第二装置,其中所述预安装通用驱动程序独立地驱动不同的设备接口。
20.如权利要求13所述的系统,其中客户机应用被存储在所述第一外围设备和所述第二外围设备上,当所述客户机应用分别在所述第一处理设备或所述第二处理设备上运行时,获取所述屏幕抓取数据。
21.如权利要求19所述的系统,其中所述客户机应用是便携式应用。
22.根据权利要求12所述的系统,进一步包括:
用于操作所述通信网络的显示节点的装置,所述显示节点耦合到所述第一显示器以接收所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容并控制所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容在所述第一显示器上的显示;以及
用于将程序加载到所述第一处理设备和所述第二处理设备上并且在所述第一处理设备和所述第二处理设备的操作系统上运行所述程序以获取所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容的装置,所述第一外围设备和所述第二外围设备各自具有收发机;
用于在对所述第一外围设备上的第一输入设备的用户动作后触发通过所述第一端口向所述第一收发机传送所述第一用户所选任意媒体内容的第一装置;以及
用于在对所述第二外围设备上的第二输入设备的用户动作后触发通过所述第二端口向所述第二收发机传送所述第二用户所选任意媒体内容的第二装置。
23.根据权利要求12所述的系统,进一步包括:
用于设置通信网络的装置,所述通信网络在所述通信网络的基节点与耦合到所述第一处理设备的所述第一外围设备之间以及在所述通信网络的基节点与耦合到所述第二处理设备的所述第二外围设备之间;
用于在所述第一处理设备与所述第一外围设备之间传送所述第一用户所选内容媒体内容的第一装置以及用于在所述第二处理设备与所述第二外围设备之间传送所述第二用户所选任意媒体内容的第二装置;
用于将所述第一用户所选任意媒体内容从所述第一外围设备传送到所述通信网络的第一装置以及用于将所述第二用户所选任意媒体内容从所述第二外围设备传送到所述通信网络的第二作者;
用于在所述基节点处从所述通信网络接收所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容并根据规则集在所述第一显示器上显示所述第一用户所选任意媒体内容和所述第二用户所选任意媒体内容的装置。
24.如权利要求12所述的系统,其中所述第一外围设备被配对至所述第一处理设备并且其中所述第二外围设备被配对至所述第二处理设备。
CN202110002331.9A 2012-04-18 2012-09-14 用于会议的电子工具和方法 Pending CN112769582A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1206841.7 2012-04-18
GB1206841.7A GB2501471A (en) 2012-04-18 2012-04-18 Electronic conference arrangement
CN201280074077.2A CN104412542A (zh) 2012-04-18 2012-09-14 用于会议的电子工具和方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280074077.2A Division CN104412542A (zh) 2012-04-18 2012-09-14 用于会议的电子工具和方法

Publications (1)

Publication Number Publication Date
CN112769582A true CN112769582A (zh) 2021-05-07

Family

ID=46209278

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110002331.9A Pending CN112769582A (zh) 2012-04-18 2012-09-14 用于会议的电子工具和方法
CN201280074077.2A Pending CN104412542A (zh) 2012-04-18 2012-09-14 用于会议的电子工具和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201280074077.2A Pending CN104412542A (zh) 2012-04-18 2012-09-14 用于会议的电子工具和方法

Country Status (9)

Country Link
US (1) US9722986B2 (zh)
EP (2) EP3099009A1 (zh)
CN (2) CN112769582A (zh)
BR (2) BR112014026147B1 (zh)
CA (1) CA2909672A1 (zh)
GB (1) GB2501471A (zh)
HK (1) HK1207759A1 (zh)
SG (1) SG11201602993UA (zh)
WO (1) WO2013156092A1 (zh)

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8074581B2 (en) 2007-10-12 2011-12-13 Steelcase Inc. Conference table assembly
US10631632B2 (en) 2008-10-13 2020-04-28 Steelcase Inc. Egalitarian control apparatus and method for sharing information in a collaborative workspace
US20140361954A1 (en) 2013-06-07 2014-12-11 Lewis Epstein Personal control apparatus and method for sharing information in a collaboration workspace
US10884607B1 (en) 2009-05-29 2021-01-05 Steelcase Inc. Personal control apparatus and method for sharing information in a collaborative workspace
US11327626B1 (en) 2013-01-25 2022-05-10 Steelcase Inc. Emissive surfaces and workspaces method and apparatus
US9759420B1 (en) 2013-01-25 2017-09-12 Steelcase Inc. Curved display and curved display support
US9261262B1 (en) 2013-01-25 2016-02-16 Steelcase Inc. Emissive shapes and control systems
JP6102588B2 (ja) * 2013-07-10 2017-03-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9965040B2 (en) * 2013-12-23 2018-05-08 Intel Corporation Method for using magnetometer together with gesture to send content to wireless display
US9893903B2 (en) 2014-02-24 2018-02-13 Microsoft Technology Licensing, Llc Creating connections and shared spaces
US10048841B2 (en) * 2014-06-13 2018-08-14 Brigham Young University Collaborative project management
US9565227B1 (en) * 2014-06-16 2017-02-07 Teradici Corporation Composition control method for remote application delivery
EP3162023B1 (en) 2014-06-24 2019-10-09 Google LLC Methods, systems, and media for authenticating a connection between a user device and a streaming media content device
BE1021350B1 (nl) * 2014-11-26 2015-11-05 ROMAEN Hans en RYCKAERT Peter p/a Acerio BVBA Werkwijze en systeem voor het tonen van een opeenvolging van beelden
CN105808181B (zh) * 2014-12-31 2019-02-12 中强光电股份有限公司 图像中介装置、交互式显示系统及其操作方法
US9870755B2 (en) * 2015-05-22 2018-01-16 Google Llc Prioritized display of visual content in computer presentations
US10693924B2 (en) * 2015-09-11 2020-06-23 Barco N.V. Method and system for connecting electronic devices
US11120342B2 (en) 2015-11-10 2021-09-14 Ricoh Company, Ltd. Electronic meeting intelligence
US9584758B1 (en) 2015-11-25 2017-02-28 International Business Machines Corporation Combining installed audio-visual sensors with ad-hoc mobile audio-visual sensors for smart meeting rooms
US10673641B2 (en) * 2016-03-11 2020-06-02 Lenovo Enterprise Solutions (Singapore) Pte. Ltd Connecting to a conference device
US10607173B2 (en) * 2016-05-27 2020-03-31 International Business Machines Corporation Collaboration tracking system
US9652113B1 (en) 2016-10-06 2017-05-16 International Business Machines Corporation Managing multiple overlapped or missed meetings
US10572858B2 (en) 2016-10-11 2020-02-25 Ricoh Company, Ltd. Managing electronic meetings using artificial intelligence and meeting rules templates
US11307735B2 (en) 2016-10-11 2022-04-19 Ricoh Company, Ltd. Creating agendas for electronic meetings using artificial intelligence
US10860985B2 (en) 2016-10-11 2020-12-08 Ricoh Company, Ltd. Post-meeting processing using artificial intelligence
CN106412683A (zh) * 2016-11-16 2017-02-15 深圳市宝疆科技有限公司 通过usb接口实现音视频传输和交互信令的系统及方法
US10264213B1 (en) 2016-12-15 2019-04-16 Steelcase Inc. Content amplification system and method
US10206083B2 (en) * 2016-12-30 2019-02-12 Intel Corporation Using wireless display docking technology over infrastructure networks
CN108809664A (zh) * 2017-04-28 2018-11-13 上海共联通信信息发展有限公司 用于管线维护分析的演示设备及演示设备的唤醒方法
US11342073B2 (en) * 2017-09-29 2022-05-24 Fresenius Medical Care Holdings, Inc. Transmitted display casting for medical devices
US10552546B2 (en) 2017-10-09 2020-02-04 Ricoh Company, Ltd. Speech-to-text conversion for interactive whiteboard appliances in multi-language electronic meetings
US11062271B2 (en) 2017-10-09 2021-07-13 Ricoh Company, Ltd. Interactive whiteboard appliances with learning capabilities
US10956875B2 (en) 2017-10-09 2021-03-23 Ricoh Company, Ltd. Attendance tracking, presentation files, meeting services and agenda extraction for interactive whiteboard appliances
US10553208B2 (en) 2017-10-09 2020-02-04 Ricoh Company, Ltd. Speech-to-text conversion for interactive whiteboard appliances using multiple services
US11030585B2 (en) 2017-10-09 2021-06-08 Ricoh Company, Ltd. Person detection, person identification and meeting start for interactive whiteboard appliances
WO2019115612A1 (en) 2017-12-14 2019-06-20 Barco N.V. Method and system for locating the origin of an audio signal within a defined space
US10684972B2 (en) * 2017-12-29 2020-06-16 Barco Nv Method and system for making functional devices available to participants of meetings
NL2020379B1 (en) * 2018-02-05 2019-03-21 Blue And Red B V A communication system and meeting tool for communicating media content from a user, a storage container and a connection unit.
US10757148B2 (en) * 2018-03-02 2020-08-25 Ricoh Company, Ltd. Conducting electronic meetings over computer networks using interactive whiteboard appliances and mobile devices
JP7257409B2 (ja) * 2018-03-09 2023-04-13 ストライカー・コーポレイション コンソールベースの手術システムの手術器具を遠隔制御するためのシステムおよび方法
DE102018207775B4 (de) * 2018-05-17 2020-01-30 Siemens Healthcare Gmbh Verfahren zur isochronen Kommunikation in einer Gesamtvorrichtung, insbesondere Magnetresonanzeinrichtung, und Gesamtvorrichtung
TW202004417A (zh) * 2018-06-01 2020-01-16 弘真科技股份有限公司 無線影音傳輸系統及方法
TWI680661B (zh) 2018-07-20 2019-12-21 茂傑國際股份有限公司 加值遠端顯示服務的無線路由伺服裝置及方法
CN109587434A (zh) * 2018-11-23 2019-04-05 厦门亿联网络技术股份有限公司 一种基于视频会议系统的辅流传输方法
CN109819201A (zh) * 2019-03-08 2019-05-28 厦门亿联网络技术股份有限公司 一种会议用辅流数据传输方法、显示方法、会议系统及外围设备
US11573993B2 (en) 2019-03-15 2023-02-07 Ricoh Company, Ltd. Generating a meeting review document that includes links to the one or more documents reviewed
US11080466B2 (en) 2019-03-15 2021-08-03 Ricoh Company, Ltd. Updating existing content suggestion to include suggestions from recorded media using artificial intelligence
US11720741B2 (en) 2019-03-15 2023-08-08 Ricoh Company, Ltd. Artificial intelligence assisted review of electronic documents
US11270060B2 (en) 2019-03-15 2022-03-08 Ricoh Company, Ltd. Generating suggested document edits from recorded media using artificial intelligence
US11392754B2 (en) 2019-03-15 2022-07-19 Ricoh Company, Ltd. Artificial intelligence assisted review of physical documents
US11263384B2 (en) 2019-03-15 2022-03-01 Ricoh Company, Ltd. Generating document edit requests for electronic documents managed by a third-party document management service using artificial intelligence
US11252206B2 (en) * 2019-12-03 2022-02-15 Microsoft Technology Licensing, Llc Reducing setup time for online meetings
CN113163144B (zh) * 2020-01-07 2024-04-09 明基智能科技(上海)有限公司 无线简报系统
CN111240627A (zh) 2020-01-15 2020-06-05 北京小米移动软件有限公司 遥控器、投屏接收组件、电视、投屏系统及投屏方法
CN113747215B (zh) * 2020-05-29 2023-11-14 明基智能科技(上海)有限公司 双显示区域的控制方法以及双显示区域的控制系统
CN112804610B (zh) * 2021-01-07 2022-06-10 深圳市博陆科电子科技有限公司 TWS蓝牙耳机控制PC上微软Teams的方法
CN113014974A (zh) * 2021-02-26 2021-06-22 北京百度网讯科技有限公司 投屏方法、装置、设备及存储介质
US11743306B2 (en) * 2021-04-06 2023-08-29 Avaya Management L.P. Intelligent screen and resource sharing during a meeting

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997037484A1 (en) * 1996-03-29 1997-10-09 Northern Telecom Limited Multimedia document conferencing system
CN1689275A (zh) * 2000-05-16 2005-10-26 索尼株式会社 卡式网络接口、网络会议终端设备和网络会议系统
CN1822563A (zh) * 2005-02-17 2006-08-23 陈力 网络终端的方法和装置
CN101106681A (zh) * 2007-06-26 2008-01-16 广东威创日新电子有限公司 无线视频传输装置及其方法
CN102067085A (zh) * 2008-04-17 2011-05-18 微系统道格有限公司 用于向远程客户机虚拟传送软件应用程序的方法和系统

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5572248A (en) 1994-09-19 1996-11-05 Teleport Corporation Teleconferencing method and system for providing face-to-face, non-animated teleconference environment
US6584493B1 (en) * 1999-03-02 2003-06-24 Microsoft Corporation Multiparty conferencing and collaboration system utilizing a per-host model command, control and communication structure
US7016315B2 (en) 2001-03-26 2006-03-21 Motorola, Inc. Token passing arrangement for a conference call bridge arrangement
US8291457B2 (en) 2001-05-24 2012-10-16 Vixs Systems, Inc. Channel selection in a multimedia system
US7180475B2 (en) 2001-06-07 2007-02-20 Infocus Corporation Method and apparatus for wireless image transmission to a projector
US20070005809A1 (en) * 2001-09-14 2007-01-04 Youichi Kobayashi Network information processing system and network information processing method
US6966035B1 (en) 2001-09-19 2005-11-15 Hewlett-Packard Development Company, L.P. Frame for communicating expressive information for meetings
CN1268122C (zh) 2002-07-23 2006-08-02 精工爱普生株式会社 显示方法及投影机
JP4321203B2 (ja) 2002-10-29 2009-08-26 富士ゼロックス株式会社 遠隔会議システム及び遠隔会議支援方法、並びにコンピュータ・プログラム
US20060095376A1 (en) 2002-12-20 2006-05-04 Arthur Mitchell Virtual meetings
US7352809B2 (en) 2003-02-21 2008-04-01 Polycom, Inc. System and method for optimal transmission of a multitude of video pictures to one or more destinations
JP2004287160A (ja) 2003-03-24 2004-10-14 Seiko Epson Corp 画像表示システム、プロジェクタ、画像表示方法、プロジェクタ制御方法、画像表示プログラムおよびプロジェクタ制御プログラム
US7434166B2 (en) 2003-06-03 2008-10-07 Harman International Industries Incorporated Wireless presentation system
US7428000B2 (en) 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
WO2005008448A2 (en) * 2003-07-18 2005-01-27 Remote Meeting Technologies, Inc. Browser-based video meeting system
NO318911B1 (no) 2003-11-14 2005-05-23 Tandberg Telecom As Distribuert sammensetting av sanntids-media
US20060031779A1 (en) * 2004-04-15 2006-02-09 Citrix Systems, Inc. Selectively sharing screen data
US8375301B2 (en) 2005-07-15 2013-02-12 Barco N.V. Network displays and method of their operation
US20070109410A1 (en) 2005-11-15 2007-05-17 Creative Technology Ltd. Apparatus for audio reproduction and image capturing
CN100534165C (zh) 2006-02-15 2009-08-26 力新国际科技股份有限公司 以局域网多对一传输并显示信息的方法及系统
JP4735384B2 (ja) * 2006-04-11 2011-07-27 富士ゼロックス株式会社 電子会議システム、電子会議用端末、電子会議システムの制御方法及び電子会議用端末の制御プログラム
US20100115145A1 (en) 2006-05-26 2010-05-06 Smart Technologies Ulc Plug-and-play device and method of using the same
US8190785B2 (en) 2006-05-26 2012-05-29 Smart Technologies Ulc Plug-and-play device and method for enhancing features and settings in an interactive display system
CN100466531C (zh) 2006-07-11 2009-03-04 奇扬网科股份有限公司 多方演示文稿会议的控制系统与方法
US8346753B2 (en) 2006-11-14 2013-01-01 Paul V Hayes System and method for searching for internet-accessible content
US8316138B2 (en) 2006-11-24 2012-11-20 Awind Inc. Plug-and-show USB portable disk
US7853535B2 (en) 2006-12-27 2010-12-14 Colella Brian A System for secure internet access for children
SG152082A1 (en) 2007-10-19 2009-05-29 Creative Tech Ltd A method and system for processing a composite video image
CN101442500A (zh) 2007-11-19 2009-05-27 殷小涛 多方语音交互和显示内容共享且分权控制方法
EP2240925A4 (en) 2008-01-07 2011-07-06 Smart Technologies Ulc METHOD AND APPARATUS FOR DISPLAYING VIDEO DATA FROM SEVERAL COMPUTERS SOURCES IN A MULTI-SCREEN COMPUTER SYSTEM
US8887067B2 (en) 2008-05-30 2014-11-11 Microsoft Corporation Techniques to manage recordings for multimedia conference events
TW201012222A (en) 2008-09-12 2010-03-16 Primax Electronics Ltd Method for producing internet video images
US20100087139A1 (en) 2008-10-03 2010-04-08 Fleetwood Group, Inc. Audience response device, method, and system
JP5375338B2 (ja) * 2009-05-29 2013-12-25 セイコーエプソン株式会社 画像表示システム、画像表示装置、画像表示方法、画像供給装置、およびプログラム
US8578465B2 (en) * 2009-07-21 2013-11-05 Cisco Technology, Inc. Token-based control of permitted sub-sessions for online collaborative computing sessions
CN101631223B (zh) 2009-08-17 2011-04-20 上海华平信息技术股份有限公司 嵌入式高清会议终端及其形成方法
CN102023852A (zh) 2009-09-15 2011-04-20 深圳市巨龙科教高技术股份有限公司 一种截屏方法及系统
JP5403678B2 (ja) 2009-10-21 2014-01-29 Necカシオモバイルコミュニケーションズ株式会社 無線通信端末、無線通信システム及びコンピュータプログラム
US8608318B2 (en) 2009-11-13 2013-12-17 Panasonic Corporation Wireless projector apparatus and wireless LAN adapter
US8891939B2 (en) * 2009-12-22 2014-11-18 Citrix Systems, Inc. Systems and methods for video-aware screen capture and compression
NO332231B1 (no) 2010-01-18 2012-08-06 Cisco Systems Int Sarl Metode for a parre datamaskiner og videokonferanseinnretninger
US9578336B2 (en) 2011-08-31 2017-02-21 Texas Instruments Incorporated Hybrid video and graphics system with automatic content detection process, and other circuits, processes, and systems
US8700494B2 (en) 2011-09-06 2014-04-15 Google Inc. Identifying product variants
US8756348B2 (en) 2011-09-14 2014-06-17 Barco N.V. Electronic tool and methods for meetings
US20140082227A1 (en) 2012-04-18 2014-03-20 Barco Nv Electronic tool and methods for meetings

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997037484A1 (en) * 1996-03-29 1997-10-09 Northern Telecom Limited Multimedia document conferencing system
CN1689275A (zh) * 2000-05-16 2005-10-26 索尼株式会社 卡式网络接口、网络会议终端设备和网络会议系统
CN1822563A (zh) * 2005-02-17 2006-08-23 陈力 网络终端的方法和装置
CN101106681A (zh) * 2007-06-26 2008-01-16 广东威创日新电子有限公司 无线视频传输装置及其方法
CN102067085A (zh) * 2008-04-17 2011-05-18 微系统道格有限公司 用于向远程客户机虚拟传送软件应用程序的方法和系统

Also Published As

Publication number Publication date
CN104412542A (zh) 2015-03-11
EP2839604B1 (en) 2016-05-25
BR122015022158A2 (pt) 2019-08-27
BR112014026147A8 (pt) 2022-02-22
EP3099009A1 (en) 2016-11-30
CA2909672A1 (en) 2013-10-24
GB2501471A (en) 2013-10-30
US20150121466A1 (en) 2015-04-30
BR112014026147B1 (pt) 2022-08-30
GB201206841D0 (en) 2012-05-30
WO2013156092A1 (en) 2013-10-24
BR122015022158B1 (pt) 2022-08-02
HK1207759A1 (zh) 2016-02-05
EP2839604A1 (en) 2015-02-25
SG11201602993UA (en) 2016-05-30
BR112014026147A2 (pt) 2017-06-27
US9722986B2 (en) 2017-08-01

Similar Documents

Publication Publication Date Title
US11422951B2 (en) Electronic tool and methods for meetings between two users
EP2839604B1 (en) Electronic tool and methods for meetings
US11403237B2 (en) Electronic tool and methods with audio for meetings
US10904103B2 (en) Electronic tool and methods for meetings
EP2756668B1 (en) Electronic tool and methods for meetings
EP2756667B1 (en) Electronic tool and methods for meetings
US10050800B2 (en) Electronic tool and methods for meetings for providing connection to a communications network
US20140082227A1 (en) Electronic tool and methods for meetings
US10965480B2 (en) Electronic tool and methods for recording a meeting
US20240048457A1 (en) Electronic tool and methods for meetings

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination