CN104509095B - 协同环境和视图 - Google Patents

协同环境和视图 Download PDF

Info

Publication number
CN104509095B
CN104509095B CN201380040728.0A CN201380040728A CN104509095B CN 104509095 B CN104509095 B CN 104509095B CN 201380040728 A CN201380040728 A CN 201380040728A CN 104509095 B CN104509095 B CN 104509095B
Authority
CN
China
Prior art keywords
view
scene
collaboration
interest
presented
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380040728.0A
Other languages
English (en)
Other versions
CN104509095A (zh
Inventor
A.坦顿
W.费尔泰因
S.维拉于萨姆
R.库特勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN104509095A publication Critical patent/CN104509095A/zh
Application granted granted Critical
Publication of CN104509095B publication Critical patent/CN104509095B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/155Conference systems involving storage of or access to video conference sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本文提供了用于促进协同环境的系统、方法和软件。在至少一个实施方式中,在协同环境内呈现协同场景的初始视图的呈现。标识对应于被选择用于单独观看的感兴趣对象的协同场景的一部分。发起在与对应于感兴趣对象的场景的该部分有关的协同环境内的单独呈现。

Description

协同环境和视图
技术领域
本公开的方面涉及计算机硬件和软件技术并且特别涉及协同应用和环境。
背景技术
协同应用和环境允许可相互远离的会话参与者以各种方式在线交互或交流各种通信。例如,协同参与者可参加视频交流、语音呼叫、即时消息传送、白板呈现和桌面视图或其任意组合或变型。微软®Lync®是适合提供这样的协同环境的示例应用程序。
因为在线协同的可行性已增大,所以也具有可利用其递送协同环境的技术。例如,协同参与者可使用传统桌面或膝上型计算机以及平板电脑、移动电话、游戏系统、专用协同系统或任何其他适当的通信设备来参加视频会议、语音呼叫或即时消息传送会话。可采用不同架构来递送包括中央管理的和对等的架构的协同环境。
很多协同环境允许相对于其他来突出一些通信的呈现。在视频会议中牵涉多个发言者的示例情形中,可以相较于其他参与者在视觉上突出与当前正在发言的人相关联的视频,并且这事实上可自动地发生。除了这些方面之外,很多环境允许手动地设定视觉偏好和突出。例如,用户可指定在环境内相较于源自另一远程场景的视频突出来自一个远程场景的视频。
发明内容
本文提供了用于促进协同环境的系统、方法和软件。在至少一个实施方式中,在协同环境内呈现协同场景的初始视图的呈现。标识对应于被选择用于单独观看的感兴趣对象的协同场景的一部分。发起在与对应于感兴趣对象的场景的该部分有关的协同环境内的单独呈现。
提供该发明内容来以简化的形式介绍概念的选择,在下文在具体实施方式中进一步描述这些概念。应当理解的是,该发明内容并非旨在标识所要求保护的主题的关键特征或必要特征,也并非旨在用来限制所要求保护的主题的范围。
附图说明
可参考以下附图更好地理解本公开的很多方面。尽管联系这些附图描述了多个实施方式,但是本公开不限于本文公开的实施方式。与之相反,旨在覆盖所有替代方案、修改和等同物。
图1图示在一实施方式中的牵涉协同环境的操作情形。
图2图示在一实施方式中的协同过程。
图3图示在一实施方式中的计算系统。
图4图示在一实施方式中的协同架构。
图5图示在一实施方式中的牵涉协同环境的操作情形。
图6图示在一实施方式中的牵涉协同环境的操作情形。
图7图示在一实施方式中的牵涉协同会话的操作序列。
图8图示在一实施方式中的牵涉协同会话的操作序列。
具体实施方式
本文描述的实施方式提供了在协同环境中感兴趣对象的单独视图。在至少一个实施方式中,协同环境可包括视图(诸如视频呈现窗),通过该视图可由协同参与者观看场景。协同环境可包括允许协同参与者通过各种通信技术的方式参加协同会话的其他协同视图,诸如即时消息呈现窗。在标识感兴趣对象用于单独观看时,可呈现单独视图,其中显示感兴趣对象。可以以各种方式标识感兴趣对象,诸如通过鼠标点击、悬停操作、触摸或画出包括该对象的感兴趣区域。
感兴趣对象可以是在与其他协同参与者的协同会话中的协同参与者。在一些情形中,可以捕捉包括多个协同参与者的协同场景的视频。体验多个协同参与者的单个视图的、协同会话的远程出席者可能希望聚焦于协同参与者之一。通过适当的用户输入机制的方式,可在视图中将协同参与者标识为感兴趣的以用于单独观看。然后可生成该协同参与者的单独视图并且将其呈现给远程出席者。
在各种实施方式情形中,可修改协同场景的初始视图,并且与单独视图同时呈现场景的经修改的视图。例如,可以以视觉突出方式在观看区内呈现单独视图,同时经修改的视图可以是比初始视图相对更小的协同场景的视图。在一些情形中,还可选择对应于第二感兴趣对象的协同场景的第二部分用于单独观看并且将其呈现在第二单独视图中。还可以与该单独视图一起呈现另一远程出席者或多个远程出席者的远程视图。
图1图示了在一实施例中的牵涉协同环境101的操作情形100。在操作情形100中,在T1描绘协同环境101的初始状态。接着,在时间T2描绘处于不同状态的协同环境101。特别地,协同环境101最初呈现场景的视图103。在将场景中的感兴趣对象标识用于单独观看时,如下文将更详细讨论的,协同环境101转变到不同状态,由此呈现视图117和视图119。
视图103包括对象109、对象111和对象113。对象109、111和113可以是在场景的视频内捕捉的场景中的任何对象,诸如人、仪器、显示器或其它对象。例如,可将视频捕捉设备(未示出)配置为捕捉使对象109、111和113定位或以其他方式安置在其中的场景。在一些情形中,该场景可以是会议室或适合主办协同会话(诸如组会议)的其它聚集空间。
协同环境101还包括即时消息传送视图105和107。即时消息传送视图105和107仅被提供作为除了视图103之外的其它通信形态的示例,其它通信形态可以由能够呈现视图103的协同应用提供。可以与视图103一起呈现的其它通信形态包括语音呼叫、白板共享和桌面共享形态。一个这样的协同应用是来自微软®的Lync®。
在操作中,可以关于视图103中的对象中的任一个做出对感兴趣对象的选择115或其它类似指示。在该示例中,通过选择115的方式将对象111标识为感兴趣对象。可使用若干熟知选择机制(诸如鼠标点击或触摸)中的任一个来完成选择115。此外,可以使用鼠标、触摸或其它适当的输入围绕感兴趣对象画出感兴趣区域。
已经标识出感兴趣对象,则协同环境101在时间T2转变到不同状态。在该随后状态中,呈现视图117,将焦点给予之前被标识为感兴趣对象的对象111。此外,呈现包括对象109、111和113的视图119。视图119是在视图103内最初呈现的场景的修改视图。在视图119中将对象109、111和113呈现为比起呈现在视图103中时成比例地更小以展示:视图119可呈现相对于视图103减小的场景视图。视图119是可选的并且仅被提供用于说明性目的。
图2图示了可以使用适当的计算系统(诸如下文关于图3讨论的计算系统300)来实施以促进协同环境的呈现的协同过程200。下面对协同过程200的讨论将关于图1继续。
一开始,在协同环境101内呈现场景的初始视图(步骤201)。如上文讨论的,场景可包括各种对象,诸如人、仪器或任何其他类型的对象。在一个示例中,场景可以是会议室或人可以在其中聚集以进行协同会话的其它类似的会议环境。可通过视频捕捉设备或其它类似仪器的方式捕捉场景,并且可将场景提供用于在协同环境101内的呈现。
接着,标识对应于感兴趣对象的场景的一部分(步骤203)。标识对应于感兴趣对象的场景的该部分可以响应于该对象本身被标识而发生。可选地,可以标识围绕感兴趣对象或以其他方式与感兴趣对象有关的感兴趣区域。可以基于任何数量的熟知视频处理因素、规则和流程来完成确定场景的哪个部分对应于感兴趣对象。
在步骤205中,在协同环境101内呈现场景的之前被标识的部分的视图117。视图117可以被认为是单独视图,因为其是相对于视图103的新的场景视图。可以可选地与视图117同时呈现视图103的修改视图,该修改视图在操作情形100中通过视图119例示。
注意,尽管协同过程200通常涉及在协同环境内呈现视图,但是可以认为发起这样的视图的呈现在本公开的范围内。因此,协同过程200的变型可包括:发起在协同环境内对在视频流中捕捉的协同场景的初始视图的呈现、标识对应于在协同场景中被选择用于单独观看的感兴趣对象的协同场景的一部分,以及发起在协同环境内对包括对应于感兴趣对象的协同场景的该部分的单独视图的单独呈现。
现在参考图3,计算系统300通常表示其上可适当地实施协同过程200或其变型的任一计算系统或多个计算系统。可选地,计算系统300还可适合于实施协同环境101。计算系统300的示例包括服务器计算机、客户端计算机、虚拟机、分布式计算系统、个人计算机、移动计算机、媒体设备、互联网装置、桌面计算机、膝上型计算机、平板计算机、笔记本计算机、移动电话、智能电话、游戏设备和个人数字助理,以及其任意组合或变型。
计算系统300包括处理系统301、存储系统303、软件305和通信接口307。计算系统300还包括用户接口309,尽管用户接口309是可选的。处理系统301与存储系统303、通信接口307和用户接口309操作性地耦合。处理系统301加载和执行来自存储系统303的软件305。当通常由计算系统300并且特别地由处理系统301执行时,软件305指引计算系统300如本文描述的那样工作以进行协同过程200或其变型。计算系统300可以可选地包括为了简洁和清楚的目的在此未讨论的附加设备、特征或功能。
仍然参考图3,处理系统301可包括微处理器和检索和执行来自存储系统303的软件305的其它电路。处理系统301可在单个处理设备内实施,但是也可以分布于在执行程序指令时进行协作的多个处理设备或子系统上。处理系统301的示例包括通用中央处理单元、专用处理器和逻辑设备,以及任何其他类型的处理设备、处理设备的组合,或其变型。
存储系统303可包括由处理系统301可读且能够存储软件305的任何存储介质。存储系统303可包括以用于信息存储的任何方法或技术实施的易失和非易失、可移除和不可移除介质,信息诸如是计算机可读指令、数据结构、程序模块或其它数据。存储系统303可被实施为单个存储设备,但是也可被实施在多个存储设备或子系统上。存储系统303可包括能够与处理系统301通信的附加元件,诸如控制器。
存储介质的示例包括随机存取存储器、只读存储器、磁盘、光盘、闪存、虚拟存储器和非虚拟存储器、盒式磁带、磁带、磁盘储存器或其它磁存储设备、或可用来存储期望的信息并且可由指令执行系统存取的任何其他介质,以及其任意组合或变型,或任何其他类型的存储介质。在一些实施方式中,存储介质可以是非暂态存储介质。在一些实施方式中,存储介质的至少一部分可以是暂态的。应当理解的是,存储介质决不是传播的信号。
软件305可以在程序指令中实施,并且当软件305由计算系统300执行时,除了其他功能之外,可指引计算系统300发起在协同环境内对在视频流中捕捉的协同场景的初始视图的呈现、标识对应于协同场景中被选择用于单独观看的感兴趣对象的协同场景的一部分,以及发起在协同环境内对包括对应于感兴趣对象的协同场景的该部分的单独视图的单独呈现。软件305可以包括附加过程、程序或组件,诸如操作系统软件或其它应用软件。软件305还可包括固件或某一其它形式的可由处理系统301执行的机器可读处理指令。
通常,软件305当被加载到处理系统301中并且被执行时,可将处理系统301和计算系统300总体从通用计算系统转换成被定制用于促进如本文针对每个实施方式所述的协同会话的专用计算系统。实际上,对存储系统303上的软件305进行编码可转换存储系统303的物理结构。物理结构的具体转换可取决于该说明书的不同实施方式中的各种因素。这样的因素的示例可包括但不限于用来实施存储系统303的存储介质的技术以及计算机存储介质是被表征为主储存器还是次级储存器。
例如,如果计算机存储介质被实施为基于半导体的存储器,则当将程序编码在其中时,软件305可以转换半导体存储器的物理状态。例如,软件305可以转换构成半导体存储器的晶体管、电容器或其它分立电路元件的状态。关于磁或光学介质,类似的转换可发生。物理介质的其它转换是可能的,而不偏离本说明书的范围,所提供的前述示例仅用来便于该讨论。
应当理解的是,计算系统300通常旨在表示利用其部署和执行软件305以便实施协同过程200(和其变型)并且可选地呈示协同环境101的计算系统。然而,计算系统300还可以表示其上可以驻留软件305并且可从其分发、传送、下载或以其他方式提供软件305到又另一计算系统以供部署和执行或又另外分发的任何计算系统。
再次参考图1,通过采用软件305的计算系统300的操作,可以关于协同环境101施行转换。作为示例,当协同环境101受到协同过程200或其变型时,可认为协同环境101从一个状态转换到另一状态。在第一状态中,协同环境101包括场景的视图103。在标识场景中的感兴趣对象时,经由视图117呈现场景的对应部分,由此协同环境101转换到第二、不同状态。
再次参考图3,通信接口307可包括允许在计算系统300和未示出的其它计算系统之间通过通信网络或网络集合(未示出)的通信的通信连接和设备。一起允许系统间通信的连接和设备的示例包括网络接口卡、天线、功率放大器、RF电路、收发器和其它通信电路。上述的网络、连接和设备是熟知的并且不需要在此被详细讨论。
用户接口309可包括鼠标、语音输入设备、用于从用户接收手势的触摸输入设备、用于检测用户的非接触手势和其它动作的动作输入设备,以及能够从用户接收用户输入的其它类似输入设备和相关联的处理元件。也可以在用户接口309中包括输出设备,诸如显示器、扬声器、打印机、触觉设备和其它类型的输出设备。上述用户输入设备是本领域熟知的并且在此不需要详细讨论。用户接口309还可包括可由处理系统301执行以支持上文讨论的各种用户输入和输出设备的相关联的用户接口软件。单独地或相互结合并且与其他硬件和软件元件结合地,用户接口软件和设备可提供图形用户接口、自然用户接口或任何其他类型的用户接口。
图4图示了在一实施方式中的协同架构400。协同架构400表示适合促进用于用户的协同会话的任何计算和通信架构。协同架构400包括客户端设备411、客户端设备413、客户端设备417和客户端设备419。协同架构400还包括视频捕捉系统415和协同系统416。注意,客户端设备411、413、417和419被图示用于示例性目的并且不都需要存在于协同架构400内。
客户端设备411、413、417和419表示能够呈现协同环境的任何设备或多个设备。客户端设备411、413、417和419的示例包括桌面或膝上型计算机,以及平板电脑、移动电话、游戏系统、专用协同系统和任何其他适当的通信和计算设备。
协同应用421、423、427和429表示可分别由客户端设备411、413、417和419完全或部分地执行以至少发起协同环境的呈现并且可能地呈现它们的任何应用或应用组件,诸如微软®的Lync®。可使用各种应用模型来实施协同应用421、423、427和427,包括本地安装的模型、宿主或基于网络的模型、混合模型和流式传送模型,以及其任意组合或变型。
视频捕捉系统415表示能够捕捉场景并且将捕捉的场景的视频提到其他系统的任何系统或子系统。视频捕捉系统415可以是如图4中图示的独立的设备,但是也可以被集成在其它设备(诸如客户端设备417和419)内或分布在其他设备上。
协同系统416表示能够管理协同会话的任何通信系统。协同系统416可以施行各种协同功能,诸如会话登记、通信路由和视频路由。协同系统416可以被实施为如图4中图示的独立的系统,但是也可以与其他设备集成或分布在其他设备上。
通信网络430表示能够促进或以其他方式允许在协同架构400的各个元件之间的通信的任何网络或网络的集合。
在操作中,协同架构400允许用户从各个位置(可能地相互远离)参加协同会话。关于图4,图示出一实施方式情形,由此用户401和403参加与用户407和用户409的协同会话。在该实施方式中,为了例示的目的假定用户401和用户403位于一处(co-located)并且可以被认为是协同场景431的一部分。用户407被图示为位于用户401和403的远程并且可以被认为是远程场景433的一部分。类似地,用户409可以被认为是远程场景435的一部分。
随着通过视频捕捉系统415捕捉协同场景431,生成视频信息并且将视频信息传递到协同系统416以供分发到可能已在会话上登记的其它设备。类似地,客户端设备417捕捉远程场景433并且将相关联的视频信息传递到协同系统416。客户端设备419捕捉远程场景435并且还将相关联的视频信息传递到协同系统416。
协同系统416然后将视频分发到登记的或以其它方式结合到协同会话的客户端设备以供在协同环境内呈现。图5呈现一个示例操作情形,该情形可以通过客户端设备419和协同应用429的方式从用户409的角度被体验到。图5呈现另一示例操作情形,该情形可以分别通过客户端设备417和客户端设备419并且分别通过协同应用427和协同应用429从用户407和用户409的角度被体验到。
现在参考图5,图示出操作情形500。在操作情形500中,在时间T1描绘协同环境501的初始状态。然后在时间T2描绘处于不同状态的协同环境501。最初,协同环境501包括协同场景431的视图503。在标识场景中的感兴趣对象用于单独观看时,如将在下文更详细讨论的,协同环境501转变到不同状态,由此新呈现单独的视图。
特别地,协同环境501内的视图503包括用户401、用户403、对象404和对象406。尽管未较早呈现为协同场景431的一部分,但是对象404和对象406可以表示可以在协同场景431内捕捉的任何对象,诸如白板或其它这样的呈现工具。协同环境501还包括远程场景433的视图505(包括用户407)。如提到的,从用户409的观点讨论操作情形500。因此,在协同环境501内不呈现远程场景435,尽管在协同环境501内呈现远程场景435将是可能的。
协同环境501还包括即时消息传送视图507和509。即时消息传送视图507和509仅仅被提供作为除了视图503和505之外,可由协同应用429提供的其他通信形态的示例。更确切地说,可以与视图503和505一起呈现的各种通信形态,包括语音呼叫、白板共享和桌面共享形态。
在操作中,可以关于视图503或视图505中的对象中的任一个来做出对感兴趣对象的选择或其它类似指示。在该示例情形中,通过选择511的方式将用户403标识为感兴趣对象。此外,通过选择513的方式将对象406标识为感兴趣对象。可以使用若干熟知选择机制(诸如鼠标点击或触摸)中的任一个来完成选择511和513。此外,可以使用鼠标、触摸或其它适当的输入围绕感兴趣对象画出感兴趣区域。
已经标识出感兴趣对象,则协同环境501在时间T2转变到不同状态。在该随后状态中,呈现视图515,将焦点给予之前被标识为感兴趣对象的用户403。还呈现视图517,将焦点给予之前也被标识为感兴趣对象的对象406。视图505保持呈现在协同环境501内,允许用户409维持远程场景433的视图。
此外,协同环境501包括协同场景431的视图521。协同场景431包括用户401、用户403、对象404和对象406。视图521是如最初呈现在视图503内的协同场景431的修改视图。例如,用户401、用户403、对象404和对象406在视图521内被呈现为比起呈现在视图503中时成比例地更小以展示:视图521可以呈现相对于视图503减小的场景视图。视图521是可选的并且仅被提供用于说明性目的。
现在参考图6,图示出另一操作情形600,其牵涉如可由操作客户端设备419的用户409体验的协同环境601,并且还牵涉可由操作客户端设备417的用户407体验的协同环境631。事实上,用户409与协同环境601的交互可以潜在地驱动在协同环境631内呈现什么内容,并且因此驱动由用户407体验什么内容。
用户409可以以各种方式、布局等配置协同环境601。在操作情形600中,为了说明性目的假定用户403和对象406已被选择用于单独观看。上文关于图5讨论了一个这样的操作示例。因此,协同环境601包括呈现用户403的视图603和呈现对象406的视图605。协同环境601还包括用户407的视图607,以及协同场景431的视图609。还在协同环境601中包括即时消息传送视图611和613。
在操作中,可以关于在时间T1呈现在视图内的感兴趣对象来显露协同选项。在操作情形600中,关于对象406显露协同选项菜单615。这可响应于悬停操作、右击操作、触摸或某一其它适当选择机制而发生。协同选项菜单615包括公布选项617、共享选项618和保存选项619。被图示为被包括在协同选项菜单615中的选项表示与单独视图(诸如视图603和605)有关的任何选项,允许关于单独视图发起协同功能。
进一步在操作情形600中,为了说明性目的假定用户409已选择共享选项418,允许与其他协同参与者共享视图605。进一步假定用户409选择与用户407共享视图605。为此目的,响应于选择共享选项618,可以向用户407呈现建议的视图。可以将传递对应于共享选项的视频的特定部分认为是协同功能。
关于用户407,协同环境631表示可由用户407当参加协同会话时体验的环境。类似于协同环境601,协同环境631包括协同场景431的视图633,该视图633包括用户401、用户403、对象404和对象406。协同环境631还包括在远程场景435中的用户409的视图635。还可在协同环境631中包括即时消息传送视图637和639。
在操作中,为了说明性目的假定用户407在时间T2将用户403和用户409标识为感兴趣对象,如分别通过选择641和643表示的。在时间T3,协同环境631已改变以反映由用户407做出的选择。例如,在时间T3,协同环境631包括用户403的视图645和用户409的视图647。此外,协同环境631包括协同场景431的视图649,该视图649可以是较早前在时间T1呈现的视图633的减小版本。
最终,在时间T3,协同环境631包括视图651。视图表示由用户409通过在时间T1选择的并且上文讨论的共享选项618的方式而建议的视图。视图651包括较早前由用户409选择将要与其他协同参与者共享的对象406。以该方式,用户409能够向用户407呈现协同场景431的一部分的建议视图。用户407还可以能够与协同环境631交互以通过协同环境601向用户409呈现建议视图。
图7图示出牵涉协同会话的操作序列,该协同会话牵涉在图4中图示出的协同架构400的元素中的一些。在操作中,视频捕捉系统415捕捉协同场景431的视频并且响应地生成对应的视频信息并且将其输送到协同系统416以供在会话上分发。同时或接近同时地,客户端设备419也可捕捉远程场景435的视频,并且生成对应的视频信息并将其输送到协同系统416以供在会话上分发。客户端设备417也捕捉远程场景433的视频并将其递送到协同系统416。
协同系统416将视频信息(可能作为独立的视频流,但也可能作为集成的视频流)传输到客户端设备419,以供在协同环境内呈现。关于图5和图6讨论的协同环境501和协同环境601表示这样的协同环境。在选择感兴趣对象时,客户端设备419将场景中的感兴趣对象的身份(identity)传递到协同系统416。协同系统416响应地标识对应于感兴趣对象的视频的一部分并且将该视频的该部分输送到客户端设备419。客户端设备419然后可在协同环境内呈现该感兴趣对象的单独视图。
用户409可以可选地确定与其他协同参与者(诸如上文关于图6讨论的用户407)共享视图。在这样的情况下,客户端设备419可将共享选项传递到协同系统416。协同系统416然后可将视频的对应部分提供到客户端设备417以供在单独视图内呈现。
图8图示出牵涉协同会话的另一操作序列,该协同会话牵涉在图4中图示出的协同架构400的元素中的一些。在操作中,视频捕捉系统415捕捉协同场景431的视频并且响应地生成对应的视频信息并将其输送到协同系统416以供在会话上分发。同时或接近同时地,客户端设备419也可捕捉远程场景435的视频,并且生成对应的视频信息并将其输送到协同系统416以供在会话上分发。客户端设备417也捕捉远程场景433的视频并将其递送到协同系统416。
协同系统416将视频信息(可能作为独立的视频流,但也可能作为集成的视频流)传输到客户端设备419,以供在协同环境内呈现。协同系统416也可以将视频信息传输到客户端设备417以供在协同环境中呈现。关于图5和图6讨论的协同环境501、601和631表示这样的协同环境。
在选择感兴趣对象时,客户端设备419响应地标识对应于感兴趣对象的视频的一部分并且在协同环境内呈现感兴趣对象的单独视图。用户409可以可选地确定与其他协同参与者(诸如上文关于图6讨论的用户407)共享视图。在这样的情况下,客户端设备419可将共享选项传递到客户端设备417。客户端设备417然后可标识对应于感兴趣对象的视频的该部分并且可在单独视图内呈现视频的该部分。
上文讨论的并且在图中图示出的各个实施方式牵涉可以根据各种模型(诸如本地安装模型、宿主模型和流式传送模型)进行递送的计算软件。除了递送模型之外,可以根据服务器-客户端模型来分布由软件提供的功能。在这样的实施方式中,一些功能可以体现在服务器软件中并且由服务器计算机系统实施,而其他功能可以体现在客户端软件中并且可以在客户端计算机系统中实施。
在一个服务器-客户端实施方式中,可以在由一个或多个计算系统可执行的程序指令中实施协同过程以促进协同环境。程序指令可包括服务器程序指令,服务器程序指令当被执行时指引服务器计算系统至少输送用于在协同环境内呈现的视频信息以递送到客户端设备。视频信息包括由协同捕捉设备捕捉的协同场景和由远程捕捉设备捕捉的远程场景。服务器程序指令还可以指引服务器计算系统标识对应于由客户端设备标识用于在协同环境内单独观看的感兴趣对象的协同场景的一部分并且输送包括对应于感兴趣对象的协同场景的该部分的单独视频信息以递送到客户端设备。
程序指令还可包括客户端程序指令,客户端程序指令当被执行时指引客户端设备至少接收视频信息并且呈现协同场景的初始视图。客户端程序指令还可指引客户端设备接收对感兴趣对象的指示,将感兴趣对象标识到服务器计算系统,以及接收单独视频信息。客户端设备可在协同环境内呈现包括对应于感兴趣对象的协同场景的该部分的单独视图。
图中提供的功能框图、操作序列和流程图表示用于施行本公开的新颖方面的示例性架构、环境和方法。尽管,为了解释的简单性目的,本文包括的方法可以以功能图表、操作序列或流程图表的形式,并且可以被描述为一系列行为,但是应理解和认识到,方法不被行为的顺序限制,因为一些行为可以根据其以与本文示出和描述的顺序不同的顺序发生和/或与其他行为并行发生。例如,本领域技术人员将理解和认识到,方法可以替代地被表示为一系列相互联系的状态或事件,诸如在状态图表中的。而且,并非方法中图示出的所有行为都是新颖实施方式所要求的。
所包括的描述和图描绘了具体实施方式以教导本领域技术人员如何做出和使用最佳模式。为了教导发明原理的目的,已经简化或省略了一些常规方面。本领域技术人员将认识到根据这些实施方式的变型落入本发明的范围内。本领域技术人员还将认识到,上述特征可以以各种方式进行组合以形成多个实施方式。作为结果,本发明不限于上述具体实施方式,而是仅由权利要求及其等同物限制。

Claims (5)

1.一种用于促进协同环境的方法,所述方法包括:
在所述协同环境内呈现在视频流中捕捉的协同场景的初始视图;
标识对应于所述协同场景中被选择用于单独观看的感兴趣对象的所述协同场景的一部分;
在所述协同环境内呈现包括对应于所述感兴趣对象的所述协同场景的所述部分的单独视图;
将所述协同场景的所述初始视图修改为经修改的视图;
与所述协同环境的所述单独视图同时呈现所述协同环境的所述经修改的视图;
在协同菜单内呈现至少关于所述感兴趣对象的多个协同选项,其中,所述多个协同选项包括公布选项、共享选项和保存选项;以及
发起关于所述感兴趣对象的协同功能,所述协同功能与从所述多个协同选项中选择的协同选项相对应。
2.根据权利要求1所述的方法,还包括接收对所述感兴趣对象的选择,其中标识对应于所述感兴趣对象的所述协同场景的所述部分响应于接收到所述选择而发生。
3.根据权利要求2所述的方法,还包括标识对应于所述场景中也被选择用于单独观看的第二感兴趣对象的所述协同场景的第二部分并且与所述单独视图同时呈现第二单独视图,所述第二单独视图包括所述协同场景的所述第二部分。
4.根据权利要求3所述的方法,还包括与所述单独视图同时呈现远程视图,所述远程视图包括远离所述协同场景的场景。
5.根据权利要求1所述的方法,其中所述感兴趣对象包括在与多个其他参与者的协同会话中的参与者,其中所述初始视图包括视频呈现窗,并且其中所述协同环境包括所述视频呈现窗和即时消息呈现窗。
CN201380040728.0A 2012-07-30 2013-07-29 协同环境和视图 Active CN104509095B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/561,917 US9813255B2 (en) 2012-07-30 2012-07-30 Collaboration environments and views
US13/561917 2012-07-30
PCT/US2013/052440 WO2014022249A1 (en) 2012-07-30 2013-07-29 Collaboration environments and views

Publications (2)

Publication Number Publication Date
CN104509095A CN104509095A (zh) 2015-04-08
CN104509095B true CN104509095B (zh) 2018-06-26

Family

ID=48917740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380040728.0A Active CN104509095B (zh) 2012-07-30 2013-07-29 协同环境和视图

Country Status (6)

Country Link
US (2) US9813255B2 (zh)
EP (1) EP2868095B1 (zh)
JP (1) JP6294881B2 (zh)
KR (1) KR20150037941A (zh)
CN (1) CN104509095B (zh)
WO (1) WO2014022249A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10371171B2 (en) * 2014-09-22 2019-08-06 Regal Beloit America, Inc. System and methods for reducing noise in an air moving system
US10244175B2 (en) * 2015-03-09 2019-03-26 Apple Inc. Automatic cropping of video content
US11924393B2 (en) * 2021-01-22 2024-03-05 Valeo Comfort And Driving Assistance Shared viewing of video among multiple users
US11704626B2 (en) * 2021-07-09 2023-07-18 Prezi, Inc. Relocation of content item to motion picture sequences at multiple devices
US11862126B2 (en) * 2022-02-10 2024-01-02 Hewlett-Packard Development Company, L.P. Inset window alterations
US11983822B2 (en) 2022-09-02 2024-05-14 Valeo Comfort And Driving Assistance Shared viewing of video with prevention of cyclical following among users
US12072794B1 (en) 2023-02-15 2024-08-27 Bank Of America Corporation Testing a metaverse application for rendering errors across multiple devices

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6816626B1 (en) * 2001-04-27 2004-11-09 Cisco Technology, Inc. Bandwidth conserving near-end picture-in-picture videotelephony
US20110141222A1 (en) * 2009-12-16 2011-06-16 Tandberg Telecom As Method and device for automatic camera control
CN102263928A (zh) * 2011-07-26 2011-11-30 中兴通讯股份有限公司 放大可视电话图像的方法、终端及可视电话系统

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05336516A (ja) 1992-05-29 1993-12-17 Canon Inc 画像通信装置
US6677979B1 (en) 2001-06-12 2004-01-13 Cisco Technology, Inc. Method and apparatus for dual image video teleconferencing
US7096037B2 (en) * 2002-01-29 2006-08-22 Palm, Inc. Videoconferencing bandwidth management for a handheld computer system and method
US7606865B2 (en) * 2002-11-29 2009-10-20 Grouptivity Collaboration system and method
AU2004211235B2 (en) * 2003-02-10 2009-12-03 Open Invention Network, Llc Methods and apparatus for providing egalitarian control in a multimedia collaboration session
US20040236830A1 (en) * 2003-05-15 2004-11-25 Steve Nelson Annotation management system
US7454460B2 (en) * 2003-05-16 2008-11-18 Seiko Epson Corporation Method and system for delivering produced content to passive participants of a videoconference
US20040254982A1 (en) * 2003-06-12 2004-12-16 Hoffman Robert G. Receiving system for video conferencing system
US8081205B2 (en) * 2003-10-08 2011-12-20 Cisco Technology, Inc. Dynamically switched and static multiple video streams for a multimedia conference
US7480259B2 (en) * 2003-10-09 2009-01-20 Hewlett-Packard Development Company, L.P. System and method for establishing a parallel conversation thread during a remote collaboration
US20060053194A1 (en) * 2004-09-03 2006-03-09 Schneider Ronald E Systems and methods for collaboration
US7099798B2 (en) * 2004-10-25 2006-08-29 Microsoft Corporation Event-based system and process for recording and playback of collaborative electronic presentations
US7599989B2 (en) * 2005-01-24 2009-10-06 Microsoft Corporation System and method for gathering and reporting screen resolutions of attendees of a collaboration session
US20060168533A1 (en) * 2005-01-27 2006-07-27 Microsoft Corporation System and method for providing an indication of what part of a screen is being shared
US20060235716A1 (en) * 2005-04-15 2006-10-19 General Electric Company Real-time interactive completely transparent collaboration within PACS for planning and consultation
US7933956B2 (en) * 2006-01-24 2011-04-26 Simulat, Inc. System and method to create a collaborative web-based multimedia layered platform
US7716284B2 (en) * 2006-02-28 2010-05-11 Microsoft Corporation Subsystem-scoping architecture for breakout rooms in a virtual space
US20070250898A1 (en) * 2006-03-28 2007-10-25 Object Video, Inc. Automatic extraction of secondary video streams
US8223186B2 (en) 2006-05-31 2012-07-17 Hewlett-Packard Development Company, L.P. User interface for a video teleconference
US20070300165A1 (en) * 2006-06-26 2007-12-27 Microsoft Corporation, Corporation In The State Of Washington User interface for sub-conferencing
US20080028323A1 (en) * 2006-07-27 2008-01-31 Joshua Rosen Method for Initiating and Launching Collaboration Sessions
US8773494B2 (en) * 2006-08-29 2014-07-08 Microsoft Corporation Techniques for managing visual compositions for a multimedia conference call
US20080059500A1 (en) * 2006-09-05 2008-03-06 Chad Symens System and method for collaborative data sharing and analysis
US7634540B2 (en) * 2006-10-12 2009-12-15 Seiko Epson Corporation Presenter view control system and method
US10387891B2 (en) * 2006-10-17 2019-08-20 Oath Inc. Method and system for selecting and presenting web advertisements in a full-screen cinematic view
US20080129844A1 (en) * 2006-10-27 2008-06-05 Cusack Francis J Apparatus for image capture with automatic and manual field of interest processing with a multi-resolution camera
US8300557B2 (en) * 2007-04-26 2012-10-30 Microsoft Corporation Breakout rooms in a distributed conferencing environment
US20090210789A1 (en) 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
US20100030578A1 (en) * 2008-03-21 2010-02-04 Siddique M A Sami System and method for collaborative shopping, business and entertainment
US8112490B2 (en) * 2008-05-15 2012-02-07 Upton Kevin S System and method for providing a virtual environment with shared video on demand
US20090327853A1 (en) * 2008-06-27 2009-12-31 Microsoft Corporation Comparing And Selecting Form-Based Functionality
US8570359B2 (en) 2008-08-04 2013-10-29 Microsoft Corporation Video region of interest features
US20100037151A1 (en) * 2008-08-08 2010-02-11 Ginger Ackerman Multi-media conferencing system
US20110224954A1 (en) * 2008-08-26 2011-09-15 Cinergix Pty Ltd Modelling of systems
US8407576B1 (en) * 2008-09-02 2013-03-26 Sitscape, Inc. Situational web-based dashboard
US9036693B2 (en) 2009-01-08 2015-05-19 Sri International Method and system for providing region-of-interest video compression
US8185828B2 (en) * 2009-04-08 2012-05-22 Cisco Technology, Inc. Efficiently sharing windows during online collaborative computing sessions
US20100309284A1 (en) * 2009-06-04 2010-12-09 Ramin Samadani Systems and methods for dynamically displaying participant activity during video conferencing
US20110153463A1 (en) * 2009-12-21 2011-06-23 Gunnar Lovelace Methods and systems for transmitting over a network information pertaining to jewelry, and more particularly, to methods and systems for enabling manipulation and arrangement of images representing jewelry components over a network for the purpose of creating, designing, sharing, reviewing and/or purchasing a custom jewelry design; and to methods and systems for managing the images for a custom jewelry design with content management systems, databases and e-commerce technology over a network and/or through the use of a mobile device or a kiosk
US20110179045A1 (en) * 2010-01-19 2011-07-21 Microsoft Corporation Template-Based Management and Organization of Events and Projects
US8744420B2 (en) * 2010-04-07 2014-06-03 Apple Inc. Establishing a video conference during a phone call
US8885013B2 (en) * 2010-05-12 2014-11-11 Blue Jeans Network, Inc. Systems and methods for novel interactions with participants in videoconference meetings
US9100200B2 (en) 2010-06-01 2015-08-04 Genband Us Llc Video augmented text chatting
CA2742468C (en) * 2010-06-08 2018-04-24 Aastra Technologies Limited Method and system for video communication
US20110307791A1 (en) * 2010-06-10 2011-12-15 Wall Street Network, Inc. Social Networking Application for Knowledge Sharing and Management
KR20130129471A (ko) * 2011-04-11 2013-11-28 인텔 코오퍼레이션 관심 객체 기반 이미지 처리
US8581958B2 (en) * 2011-04-18 2013-11-12 Hewlett-Packard Development Company, L.P. Methods and systems for establishing video conferences using portable electronic devices
JP5664442B2 (ja) * 2011-04-27 2015-02-04 ブラザー工業株式会社 テレビ会議装置、表示制御方法及び表示制御プログラム
US8806352B2 (en) * 2011-05-06 2014-08-12 David H. Sitrick System for collaboration of a specific image and utilizing selected annotations while viewing and relative to providing a display presentation
US8773532B2 (en) * 2011-06-13 2014-07-08 Alcatel Lucent Video surveillance system integrating real and logical video streams
US20130065216A1 (en) * 2011-09-08 2013-03-14 Claudia Marcela Mendoza Tascon Real-Time Interactive Collaboration Board
US9164648B2 (en) * 2011-09-21 2015-10-20 Sony Corporation Method and apparatus for establishing user-specific windows on a multi-user interactive table
US20130185252A1 (en) * 2012-01-17 2013-07-18 Jeffrey J. Palmucci Document Revision Manager

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6816626B1 (en) * 2001-04-27 2004-11-09 Cisco Technology, Inc. Bandwidth conserving near-end picture-in-picture videotelephony
US20110141222A1 (en) * 2009-12-16 2011-06-16 Tandberg Telecom As Method and device for automatic camera control
CN102263928A (zh) * 2011-07-26 2011-11-30 中兴通讯股份有限公司 放大可视电话图像的方法、终端及可视电话系统

Also Published As

Publication number Publication date
EP2868095A1 (en) 2015-05-06
US20140032679A1 (en) 2014-01-30
CN104509095A (zh) 2015-04-08
JP6294881B2 (ja) 2018-03-14
US9813255B2 (en) 2017-11-07
EP2868095B1 (en) 2019-10-02
WO2014022249A1 (en) 2014-02-06
US20180123816A1 (en) 2018-05-03
KR20150037941A (ko) 2015-04-08
JP2015529902A (ja) 2015-10-08

Similar Documents

Publication Publication Date Title
CN104509095B (zh) 协同环境和视图
US11715386B1 (en) Queuing for a video conference session
CN106385603B (zh) 媒体文件的消息传输方法和装置
CN109923571A (zh) 用于团队协作工具中的通道的实况会议
CN106105174B (zh) 自动相机选择
US20220197403A1 (en) Artificial Reality Spatial Interactions
CN109155024A (zh) 与用户和接收设备共享内容
CN106105173A (zh) 利用单个动作停止记录并发送
JP7458458B2 (ja) プログラム、方法、端末
KR102396392B1 (ko) 통신 세션상의 참가자들 중 일부를 위한 가상의 통신 세션을 제공하는 시스템 및 방법
US20130117704A1 (en) Browser-Accessible 3D Immersive Virtual Events
Porwol et al. VR-Participation: The feasibility of the Virtual Reality-driven multi-modal communication technology facilitating e-Participation
US11563785B1 (en) Chat interaction with multiple virtual assistants at the same time
KR20220160558A (ko) 가상 공간에서 사용자의 동작을 따라 하는 아바타를 표현하는 방법 및 시스템
KR20220031170A (ko) 온라인 미팅 노트 공유 방법 및 시스템
US11704885B2 (en) Augmented reality (AR) visual display to save
US20170201721A1 (en) Artifact projection
CN113099257A (zh) 网络交友互动方法、装置、终端设备及存储介质
US20190132551A1 (en) Conferencing apparatus and method for right management thereof
CN104391566A (zh) 一种实现用户间进行互动的方法及装置
US20230289740A1 (en) Management of in room meeting participant
KR102593239B1 (ko) 가상 공간에서 다수의 이벤트에 동시에 참여하는 방법 및 그 장치
CN114051010B (zh) 交互控制方法、装置、计算机存储介质和电子设备
EP4395242A1 (en) Artificial intelligence social facilitator engine
JP2018156184A (ja) Bot制御管理プログラム、方法、装置、及びシステム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150710

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150710

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

GR01 Patent grant
GR01 Patent grant