CN105009571A - 双遥现机顶盒 - Google Patents

双遥现机顶盒 Download PDF

Info

Publication number
CN105009571A
CN105009571A CN201380071860.8A CN201380071860A CN105009571A CN 105009571 A CN105009571 A CN 105009571A CN 201380071860 A CN201380071860 A CN 201380071860A CN 105009571 A CN105009571 A CN 105009571A
Authority
CN
China
Prior art keywords
image
website
monitor
towards
stb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380071860.8A
Other languages
English (en)
Inventor
威廉·吉布斯·里德曼
马克·J·休伯
马克·勒罗伊·沃克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN105009571A publication Critical patent/CN105009571A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N7/144—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display camera and display on the same optical axis, e.g. optically multiplexing the camera and display for eye to eye contact
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

在遥现系统中处理图像开始于在第一站点处确立第一朝向数据，所述第一朝向数据指示第一观众成员相对第一站点处的第一和第二图像显示设备中的每一个的朝向。此后，第一站点接收在遥现系统的第二站点的第二观众成员的输入第一图像，以及指示第二观众成员相对第二站点处的第一图像捕获设备的朝向的第二朝向数据。第一站点根据第一和第二朝向数据处理第一图像，以便在第一和第二图像显示设备中的所选显示设备上进行显示，使得当显示时，第二观众成员的图像以遥现感应重叠方式呈现为与第一观众成员共存于相同环境内。

Description

双遥现机顶盒
技术领域
本发明涉及一种用于在遥现系统(telepresence system)中实现改善图像显示的技术。
背景技术
在早期的无线电和电视中，少量的全国性网络传输用于供大量观众同时消耗的内容，从而提供由大量人口共享的共同文化体验。现在，内容消费者具有多种选择。如今内容消费者可以记录内容以便进行时移式观看(time-shifted viewing)，或可以观看存储的点播内容。因此，提供给消费者的大量多种内容选择明显淡化了与所述观众的许多其他成员同时观看内容的共同文化体验。除了共享对电影或电视秀的推荐之外，现在内容消费者有非常少的机会来基本同一时间地在他们的社交网络中消耗新闻和娱乐。
当前存在多种尝试方法来进行共享内容消耗。这种方法包括：
Redmann等人的美国专利6,653,345和Redmann的美国专利7,318,051二者都公开了一种包括分布式传送控制的分布式音乐演奏系统。这两个专利都描述了用于在每个位置处基本同步地执行播放、暂停、后退、快进和停止媒体重放的命令的技术，而无论网络连接的延迟。
有线新闻网络CNN Online将总统奥巴马的首次就职典礼的视频反馈与并行的基于Facebook的反馈相结合，使得观看者可以实时看到他们的朋友做出的评论。这种尝试导致视频并非是针对所有观看者同步的，所以一些评论将出现于远在观看者观看相应事件之前，或远在其之后。
名为frog design inc的公司当前提供一种称作tvChatter的iPhone应用，tvChatter使用Twitter作为后台服务以便收集并重新分布针对新电视剧直播的同期评论。在观看者从早期观看过同一电视秀的观看者接收到针对该秀的评论的情况下，这种应用可以向随后观看的观看者透漏该电视秀的结果。
Netflix电影流应用的Microsoft Xbox 360实现方案提供“聚会观看”的选项。一旦Netflix和Xbox直播账户所有者登陆，账户所有者的Xbox直播头像成为观看者在屏角色。用户可以选择“开始聚会”并邀请其他当前在线的Xbox直播和Netflix用户加入该聚会(二者都是必须的)。观看者可以通过浏览分级布置的海报(例如，通过主题、类别、排序、与其它电影的相似性等)来选择电影常规Netflix类别。聚会成员所选的电影呈现为建议。在观看者选择了所建议的电影之后，电影演播系统开始针对视频质量测试通信信道带宽。呈现剧场场地的在屏图像，聚会成员的角色进入并就位。电影开始在所模拟的剧场场地内的屏幕上播放。观看者可以通过选择八个左右的选择之一，来命令他们角色“做出表情”，响应于此，用户角色做出手势并模仿嘘声或欢呼。这种应用具有可用传送控制，允许观看者具有暂停、后退、快进或继续播放在全部聚会成员平台上的视图的能力。
如今的视频会议设施提供一个或多个视频屏幕和图像捕获设备，其中在一个环境内的参与者的面板将“会晤”在远程位置处的一个或多个参与者。这样设施允许共享呈现内容(例如，幻灯片)，这种设施通常包括用于共享物理文件图像的图像捕获设备。思科系统销售图像捕获设备、监视器、照明系统和视频网络装备，以配备这种视频会议设施。思科还发布了一种遥现合作协议(TIP)以便改善这种设施与含有来自不同制造商的设备的设施进行合作的能力。互联网工程任务组(IETF)已承诺研究更通用且更完整的标准“控制用于遥现的多个流”(CLUE)，在2011年1月开始初始数据收集工作，现在仍在继续。
国际专利申请PCT/US 11/063036(与本申请具有相同署名权)描述了一种遥现系统，其中每个遥现站点具有两个监视器。第一站点的第一监视器显示用于在该遥现系统的一个或多个其他站点处同步观看的内容。第二监视器以及同位置的图像捕获设备通常位于第一监视器的一侧。第二监视器用于在遥现系统的另一站点处显示远程参与者的图像。在针对远程参与者的遥现系统捕获设备具有如下朝向的情况下：当显示在本地遥现监视器上时，它捕获的图像示出了远程参与者从本地节目监视器转开，本地站点处的控制器将水平翻动远程参与者的图像，从而改善共享环境的假象。
上述用于内容共享的方法没有解决在观众成员中的一个或多个具有多于一个的遥现监视器及图像捕获设备的情况下，如何管理经由遥现系统彼此通信的远程观众成员的图像的问题，因此当它们出现在本地参与者的观看屏幕上时，远程观众成员出现在同一空间内。
发明内容
简言之，根据本原理的优选实施例，一种用于在遥现系统中处理图像的方法通过在遥现系统的第一站点建立第一朝向数据而开始，第一朝向数据指示第一观众成员相对在第一站点的第一和第二图像显示设备中的每个的朝向。此后，第一站点接收在遥现系统的第二站点处的第二观众成员的输入第一图像以及第二朝向数据，第二朝向数据指示第二观众成员相对在第二站点处的第一图像捕获设备的朝向。第一站点处理第一图像以便根据第一和第二朝向数据在第一和第二图像显示设备中的所选显示设备上进行显示，使得当显示第一图像时，第二观众成员与第一观众成员共同出现在同一环境中，从而产生说服性的遥现假象。
附图说明
图1描述了根据本原理的具有两个站点的遥现系统的框图，其中每一站点实现对同步视频内容的显示和对远程观众成员的显示；
图2描述了根据本原理的具有三个站点的遥现系统的框图，其中每一站点实现对同步视频内容的显示和对远程观众成员的显示；
图3描述了示出图2的遥现系统的操作的一系列图像；
图4描述了由图1和图2的遥现系统的本地站点执行的示例处理的流程图，用于准备从遥现系统的远程站点接收的用于显示的图像；
图5描述了由图1和图2的遥现系统的本地站点执行的示例处理的流程图，用于准备用于传输到遥现系统的远程站点的显示图像；
图6描述了在图1和2的遥现系统的站点处的用于控制在该站点处的第一和第二显示设备的示例机顶盒(STB)的框图；以及
图7描述了在图1和2的遥现系统的站点处的用于控制在该站点处的单个显示设备的另一示例STB的框图。
具体实施方式
图1描述了观众遥现系统100的示例实施例，该观众遥现系统100实现在位于不同站点处的本地观众成员之间同时显示视频内容并显示远程观众成员的图像以便本地观众成员观看。图1的遥现系统100包括经由通信通道130(诸如，互联网和/或其它网络)连接的一对站点110和120。站点110和120中的每一个都可以存在于起居室、卧室、书房或私人居所的任何其它适合空间。备选地，站点之一或这两个站点可以位于酒店房间或其它非私人机构(例如，健身房)。实际上，站点之一或其二者可以虚拟地存在于任何地方。在每一站点110和120处，本地观众成员113和123分别位于家具(例如，沙发)114和124处，分别可以随便访问他们的遥控器115和125。
站点110包括本地共享内容监视器112，以便显示共享内容。类似地，站点120包括用于在该站点显示共享内容的本地共享内容监视器122。如下文所详述，站点120处的本地共享内容监视器122将基本同步地显示与显示在站点110处的本地共享内容监视器112上的内容相同的内容。站点110具有本地遥现监视器116，显示由站点120处的第一远程遥现图像捕获设备127L(以电视摄像机等的形式)捕获到的图像(在该实施例中，站点120至少具有第二遥现图像捕获设备127R，其图像保持不由站点110使用)。站点120包括遥现监视器126L以便显示由站点110处的遥现图像捕获设备117捕获到的图像(该站点120还包括第二遥现监视器126R，但是在该实施例中，该监视器不显示来自站点110的任何图像)。
根据本原理的一个方面，本地遥现监视器和关联遥现图像捕获设备相对在本地站点处的对应本地共享内容监视器“彼此相对”(即，朝向)影响在本地遥现监视器上显示远程观众成员的图像。为了便于讨论，方向“左”或“右”表示遥现监视器/图像捕获设备对相对同一站点处的本地共享内容监视器的朝向。在图1的所示实施例中，术语“左”和“右”分别指示当观众成员面对本地共享内容监视器时，给定站点处的遥现监视器/图像捕获设备对位于本地观众成员的左侧和右侧。例如，如成员123所观察到的，监视器126L在共享内容监视器122的“左侧”。
等同地，这些术语还可以表示当他观看本地共享内容监视器时，由他的凝视限定的本地观众成员相对遥现监视器/图像捕获设备对的朝向，也就是说，从图像捕获设备的观察点出发，该朝向是当观看本地共享内容监视器时本地观众成员旋转的方向，可以是图像捕获设备的左侧或右侧，通常在图像捕获设备的视场之外。例如，由图像设备127L所观看到的，当就坐的成员123沿观看方向128观看共享内容监视器122时，成员123表现出凝视“左侧”。
依然等同地，这些术语还可以表示相对本地共享内容监视器，本地观众成员相对每个本地遥现监视器/图像捕获设备对的朝向。因此，从共享内容监视器122出发，成员123位于遥现监视器126L和图像捕获设备127L的“左侧”。
当提供用于装配的指令或识别诸如这里所述的系统的配置时，使用这些朝向基础中的一个或另一个是有利的。然而，本领域技术人员根据以上讨论将认识到它们在几何上是等同的且可替换的。
优选地，在站点110处的麦克风或其它音频捕获设备(未示出)捕获来自该站点处的本地观众成员113的音频，以便通过扬声器或其它音频再现设备(未示出)播放，其中扬声器或其它音频再现设备优选地位于站点120处的遥现监视器126L或126R之一中或靠近其中之一，以便由本地观众成员123接收(在该实施例中，优选为126L)。类似地，在站点120处的麦克风或其它音频捕获设备(未示出)捕获来自本地观众成员123的音频，以便通过扬声器或其它音频再现设备(未示出)播放，其中扬声器或其它音频再现设备优选地位于站点110处的遥现监视器116中或靠近遥现监视器116，以便由该站点处的本地观众成员113接收。在备选实施例中，麦克风可以存在于它们各站点110和120中的任何位置，扬声器(未示出)可以存在于除了在对应遥现监视器内或靠近该监视器之外的位置处。例如，在一个实施例中，一个或多个扬声器可以存在于由本地站点处的机顶盒(STB)驱动的环绕声阵列(未示出)中，以便再现来自远程站点处的麦克风的音频。
站点110和120中的每一站点都可以从多个源获取共享内容。例如，站点110和120二者可以通过广播服务器141或点播视频(VOD)服务器142(二者都链接到通信信道130)之一来从远程内容源140获取内容。站点110和120每个都可以分别包括本地内容存储设备150和151中的单个内容存储设备，以便进行本地内容存储并随后将内容下载或流传播到远程站点用于共享。此外，站点110和120中的每一个都分别可以包括DVD播放器160和161中的单个DVD播放器，用作共享内容的本地源。此外，在站点110和120处的STB 111和121中的每一个分别都可以包括用于从诸如膝上计算机和智能电话的其它源(未示出)接受内容的条款，其中由本地观众成员113和123中的对应成员操作所述其它源。
无论内容源，STB 111和121中的每一个都具有接受内容以便在对应本地共享内容监视器上进行显示的能力。在一些实施例中，STB可以具有向其他站点处的STB流传播内容(进行缓存或不进行缓存)的能力，以便在其关联的本地共享内容监视器上进行显示。根据需要，本地STB可以通过在本地共享内容监视器上播放开始之前本地强加延迟，来抵消(take account for)由向远程STB的传输等待时间以及远程STB采取的缓冲引起的总延迟的全部或一部分。这减小了当本地观众成员113和123观看共享内容时它们感受内容之间的时间差。
如果本地STB(例如，STB 111)向远程STB(例如，STB 121)本地流传播在本地内容存储设备150或DVD播放器160上的可用内容，则本地的和远程的STB二者都可以执行分布式传送(诸如，在Redmann等人的美国专利6,653,345和Redmann的美国专利7,318,051中所教导的)。使用这种分布式的传送方法，每个本地STB应接受由本地观众成员经由成员的遥控而输入的传送命令，例如，暂停、快进和回倒命令。本地STB应向远程STB分布这种命令，以便基本同时执行。这样，在每个站点处播放的共享内容保持是基本同步的，无论由本地观众成员113和123键入的传送命令。可以从广播服务器141或VOD服务器142流传播的内容，发生类似分布的传送控制。STB 111和121中的每一个在向广播服务器141和VOD服务器142发送从它们各自的本地观众成员接收到的内容控制命令之前，在它们之间共享这种命令。
根据本原理，图1的遥现系统100考虑到在每个站点处的大量遥现监视器以及当产生显示信息时它们相对关联的遥现图像捕获设备的朝向，以便向每个本地观众成员提供同一空间的心理映像(也就是说，以便提供改善的遥现假象)。在图1的所示实施例中，当观众成员沿方向119看向遥现监视器116时，遥现图像捕获设备117将直接面对本地观众成员113。在这种情况下，显示在遥现监视器26L上的图像将描述仿佛看向本地观众成员123的远程观众成员113。类似地，当本地观众成员123沿方向129L观看(看向图像捕获设备127L)时，遥现监视器116将描述仿佛看向本地观众成员113的远程观众成员123的图像。换言之，远程观众成员123呈现为从遥现系统116向外望去。
当本地观众成员113沿方向118看去(看向本地共享内容监视器112)时，显示在遥现监视器126L上的图像描述远程观众成员113仿佛看向本地共享内容监视器122，这是由于图像捕获设备117捕获实际正观看共享内容监视器112的本地观众成员113的部分侧映像，以便提供看向本地共享内容监视器122的假象。类似地，当本地观众成员123看向方向128(本地共享内容监视器122)时，由图像捕获设备127L捕获到的部分侧映像呈现为将远程观众成员123示出为看向本地共享内容监视器112，即使观众成员123实际观看的是共享内容监视器122。这种装置向观众成员112、123二者产生了两个站点110和120以遥现感应重叠方式共存的改善假象。即使本地共享内容监视器112和122具有根本不同的尺寸或位于与对应本地观众成员112和123的不同空间处，这种感知仍存在。针对观众成员，观看在相同位置处的共享内容的假象相较于现有技术的遥现系统较为强大并得到改善。
当在本地观众成员123看向方向129R期间遥现监视器116显示来自图像捕获设备127R的视图时，出现远程观众成员123从遥现系统116中向外看的相似效果。然而，当观众成员123看向本地共享内容监视器122(沿方向128)时，描述在监视器116上的远程观众成员123的图像(而无需其它处理，例如，水平翻动)将示出远程观众成员123仿佛从本地共享内容监视器112向外看，因此违反将两个站点110和120以重叠形式共存的遥现假象。然而，如果在本地遥现监视器116上显示之前水平翻动来自远程图像捕获设备127R的图像，则本地观众成员113应发现遥现假象令人信服。
在图1的遥现系统100的站点110和120，遥现监视器/遥现图像捕获设备对116/117和126L/127L分别位于它们对应的本地观众成员113和123的相对侧。换言之，在站点110处，遥现图像捕获设备116/遥现监视器117对位于本地观众成员113的右侧。相反，在站点120处的遥现图像捕获设备126L/遥现监视器127L对位于本地观众成员123的左侧。这种配置支持观察共享的、常态空间的本地观众成员的一部分，其中远程本地观众成员呈现为分别与对应本地观众成员113和123共同观看本地共享内容监视器(例如，本地共享内容监视器112和122)，而无需水平翻动每个成员112、123的图像。然而，如果监视器/遥现设备对116/117和126R/127R用于产生遥现体验，则由于每一对位于它们各自观众成员113、123的同一侧(右侧)，将需要水平翻动每个成员的图像以便支持遥现假象。
图2描述了遥现系统的备选优选实施例200，包括三个站点210、220和230。该站点210、220和230包括对应机顶盒211、221和231；对应共享内容监视器212、222和232；对应遥现监视器216、226L和266R、以及236L和236R；以及遥现图像捕获设备217、227和237。在站点210、220和230中的每一个处，本地观众成员213、223和233分别坐在家具214、224和234上。本地观众成员213、223和233使用它们的遥控器215、225和235来分别向STB 211、221和231中的对应STB键入命令。本地观众成员213、223和233中的每一个看向前向218、228以及238中的相应方向，以便分别观看它们的各自共享内容监视器212、222和232。本地观众成员213和223二者都沿方向219和229R中的对应方向向右看，以便分别观看遥现监视器216和226R的对应监视器。相反，本地观众成员223和233二者分别沿方向229L和239向左看，以便观看他/她对应的遥现监视器226L和236。
图2的遥现系统200包括两个站点210和220，其中在本地观众成员223和233的座位位置的同一侧(例如，左侧)上配置有遥现监视器226L和236。根据图2的遥现系统200内的遥现监视器的这种排列，当本地观众成员213实际观看共享内容监视器212时，将来自图像捕获设备217的图像(在观众成员213的右侧)显示在遥现监视器226L上，描述本地观众成员213面对正确，也就是说，面对共享内容监视器222。因此，当显示在遥现监视器236上时，出现相似情况。相反，如果将该图像显示在遥现监视器226R上，则描述为远程观众成员213面对错误方向，也就是说，远程观众成员213的图像从共享内容监视器222转开。根据本原理，如果选择或要求在遥现监视器226R上的显示器，则本地的或远程的STB 221、211可以通过水平翻动来自遥现图像捕获设备217的视频，来解决该问题。
存在用于确保在站点220正确显示远程观众成员参与者213的图像的若干技术。例如，“发送”STB(例如，STB 211发送本地观众成员213的图像)可以通知“接收”STB(例如，接收这种图像的STB 221和231)与该发送STB相关联的单个遥现图像捕获设备(例如，遥现图像捕获设备217)位于本地观众成员的右侧(例如，本地观众成员213的右侧)。这种通知可以包括传输图像的一部分(例如，作为图像元数据)或作为在初始配置业务期间提供的信息的一部分。关于遥现图像捕获设备217的这种方向信息允许接收STB(例如，STB 221)处理来自该远程图像捕获设备的图像并确定用于显示的正确遥现监视器，在这种情况下，遥现监视器226L。如上所述，采用位于图2站点210处的本地观众成员213右侧的图像捕获设备217，本地观众成员的图像应出现在站点220处的面对左侧的遥现监视器(例如，遥现监视器226L)上，以便确保正确面对。在站点230，STB 231将做出相同选择，从而将从站点210接收到的图像(例如，视频信号)路由到位于本地参与者233左侧的遥现监视器236，这是由于这样构成了在站点230的唯一选择。备选地，STB 221应在水平翻动(左右地)图像之后将图像路由到遥现监视器226R。对于与远程STB的任意数量连接，发送STB仅需要发送一个格式化的图像。这种方法尤其在使用复制来自一个源的视频并将其(未改变的)转发到每个接收站点的中间扇出服务器(未示出)的情况下提供优点。
备选地，每个接收STB(例如，STB 221和231)可以向发送STB(例如，STB 211)警告接收STB的关联遥现图像捕获设备的配置。例如，站点220处的STB 221可以指示它的关联遥现监视器226L和226R分别位于本地观众成员223的左右侧。STB 231应向STB 211警报站点230具有位于图2中的本地观众成员233左侧的单个遥现监视器236。使用这种信息，STB 211可以在从其关联图像捕获设备217向STB 221或STB 231发送图像(例如，视频信号)之前，决定是否左右翻转图像，使得该图像具有在站点221(其中任意朝向都是可行的)和站点231(在将该图像显示在遥现监视器236之前不需要进行翻动)处进行显示的正确朝向。该方法提供如下优点：所有界内图像可以具有正确朝向并易于显示在至少一个遥现监视器上。然而，这种方法导致如下缺点：发送STB 211可能需要针对相反布置的房间(未示出)产生两个不同流，一个面对右侧，一个翻动为面对左侧。
第三方法避免共享朝向信息的需要：每个发送STB(例如，STB211)翻动或不翻动来自其对应遥现图像捕获设备(例如，图像捕获设备227)的图像，使得该图像匹配预定朝向配置，例如，图像捕获设备位于对应本地观众成员(例如，本地观众成员213)右侧的朝向。对于站点210，这样与正确朝向相对应。所有接收STB(例如，STB 221和231)假定这种预定配置，并相应地作用于来自发送STB的接收图像(例如，视频图像)。在站点230的情况下，由于实际监视器236位于本地观看者233的左侧，STB 231不需要翻动任何接收到的视频图像(而无论视频图像的源)。在这种第三方法中，实现配置改变仍然是局部问题。如果代表STB的本地配置的设置成为错误设置，但是随后被纠正，则设置改变和变更后的行为严格保持为本地。即使校正导致现在正确示出了来自正确配置的远程站点的图像，并且现在还正确呈现出向含有这种图像的那些远程站点发送的界外视频，也仍是这样。
如果通过使用这种第三方法，类似于站点210地配置另一站点(未示出)，其中只有一个遥现监视器位于本地观众成员右侧(遥现监视器216)，则对应的接收STB需要翻动任何接收到的图像(例如，遥现视频信号)，而不是任何界外图像。此外，这种第三方法需要站点200处的STB 221来决定是否在左侧监视器226L上原样地显示接收到的图像，或将其水平翻动并显示在右侧监视器226R。在接收到的图像(例如，遥现视频信号)将自己标识为在源处已进行翻动的情况下，后者选择是特别有用的，这是由于STB 221可以接着“未翻动”图像以便以它们原始形式显示在右侧监视器226R上。
无论上述三种方法中的哪一个控制视频显示，以下附加说明都是适用的。在站点220，发送给例如站点210的其它站点的图像应源自图像捕获设备227L或227R，图像捕获设备227L或227R与用于对来自这些站点的图像进行本地显示的遥现监视器相对应(例如，如果将设备227L用于捕获正发送给站点210的图像，则应将搭配的显示器226L用于显示从站点210接收到的图像)。对图像的这种选择对支持在遥现系统200中彼此对话的两个本地观众成员之间发生眼睛接触的假象是至关重要的。否则，每当本地观众成员223看向观众成员213的显示图像时，观众成员213将看到显示在遥现监视器216上的本地观众成员233的头的后部。
在站点220，STB 221可以发送两个遥现视频流，即，来自视频图像捕获设备227L的左侧流和来自视频图像捕获设备227R的右侧流。为了避免水平翻动的需要，STB 211可以将来自图像捕获设备227R的右侧流发送到站点230，使得STB 231可以在左侧监视器236上显示该图像。STB 221可以将来自图像捕获设备227L的流发送到站点210，在站点210，STB 211可以在右侧监视器216上显示该图像。因此，STB 221在站点220处的本地遥现监视器226L上显示来自站点210处的远程右侧图像捕获设备217的图像。类似地，STB 221将在站点220处的本地遥现监视器226R上显示来自站点230处的远程左侧图像捕获设备237的图像。
为了进行讨论，假定遥现系统200包括配置与站点220相似的第四站点(未示出)。换言之，这种第四站点应包括分别位于对应本地观众成员的左右侧上的两个遥现监视器。在这种遥现系统中，应存在三个可能模式以便处理由站点220发送的视频。在第一模式下，STB 221仅向其它站点发送来自图像捕获设备227L的左侧视频流，所述其它站点可以在其右侧监视器(未示出)上显示该视频。在第二可能模式下，STB 221可以仅向其它站点发送来自图像捕获设备227R的右侧视频流，所述其它站点可以在其左侧监视器(未示出)上显示该流。在第三模式下，STB 221可以令左侧和右侧流二者都是可用的，其中接收站点决定将两个流中的哪一个显示在对应的相对侧监视器上。
在具有多个遥现监视器的每一站点处的STB(例如，站点220处的226L和226R)可以基于本地观众成员的特性、远程观众成员的特性和/或自动系统分配(例如，基于预定政策)，显示远程观众成员的图像。如果给定选择，则本地观众成员可以选择在一个特定侧(例如，右侧)上显示来自远程站点的遥现视频，例如，由于较大的监视器或在该侧上较小的亮度背景(例如，没有窗户)。向其他人发送他/她的图像的远程观众成员可能喜欢由特定图像捕获设备进行拍摄(由于在该侧上光线更好，背景更好)或远程观众成员可能喜欢从特定侧面进行拍摄(例如，远程观众成员的“优秀侧面”)。由于图2的遥现系统200具有用于试图相对一侧均衡化出现在另一侧上的远程参与者的数目的政策，可以发生自动分配。例如，遥现系统可以具有不允许第一屏幕显示超过两个远程参与者直到相对屏幕显示了至少两个参与者的政策。在其它情况下，如果第一监视器已承载了比另一监视器更多的参与者，则遥现系统200可能不允许向该监视器添加新的远程参与者。
此外，遥现系统200可以具有相对水平翻动图像优选正确朝向图像(例如，遥现视频图像)的政策，其中存在水平翻动图像的这种选择。例如，远程STB应接受来自图像捕获设备227L和227R中的任何一个的图像，或本地STB 221可以在监视器226L或监视器226R中的任一监视器上显示源自远程源的图像。应注意，由一个STB针对任一备选做出的选择将迫使在另一备选中进行对应选择，也就是说，所用的图像捕获设备必须与所用的遥现监视器相对应。总体上，STB可以考虑到发送器和接收器性能以及系统政策来确定应将特定远程参与者呈现在哪一侧上(例如，在监视器226L对比监视器227L上)。STB可以动态地进行这种决定。例如，如果两个远程参与者从一个监视器断线，则本地STB可将至少一个多余参与者移动到另一较不拥挤的监视器。这样造成了将特定本地观众成员从房间一侧移动到另一侧的尴尬的虚拟移动。STB应决定只有在新的本地观众成员加入遥现组时才移动图像。
图3描述了执行这三种方式来管理对来自图像捕获设备217、227L、227R、237的图像的分布和显示得到的结果。图像集合300表示在对应位置210、220和230中每一位置处的基本同步的本地图像集合310、320、330的组合。在站点210，图像集合310包括由遥现图像捕获设备217捕获到的本地观众成员213的图像317。类似地，在站点220，图像集合320包括由遥现图像捕获设备227R和227L(分别)捕获的本地观众成员2223的图像327R和327L。在站点230，图像集合330包括由遥现图像捕获设备237捕获的本地观众成员233的图像337。在站点210、220和230的每一站点处，对应共享内容监视器212、222和232分别与彼此基本同步地显示同一视频节目。
图像集合310、320和330中的每一个都还包括一个或多个本地图像，所述图像含有来自各远程站点中的每一站点处的远程遥现图像捕获设备的视频信息。至于表示在站点210处的行为的图像集合310，监视器216示出了含有来自图像捕获设备227L和237的图像组合的图像316。至于在站点220处的图像集合320，监视器226R和226L中的每一个都分别显示从图像捕获设备237和217获得的对应图像326R和326L。至于站点230处的图像集合330，监视器236显示含有来自远程图像捕获设备227R和217的图像组合的图像336。在该示例中，没有图像经历翻动。
在其它环境下，STB可以翻动来自远程遥现图像捕获设备的图像。然而，仅当发生以下情况时出现该操作：(a)当彼此相连的两个站点每一个都具有一个图像捕获设备和遥现监视器(例如，两个站点类似于站点210，具有“遥现监视器位于右侧”的配置)时，或(b)当出于偏好或政策的一些原因(如上所述)，来自远程站点(例如，右侧上)处的特定遥现图像捕获设备的图像经历显示在站点(例如，220)的相同侧上(也就是说，在右侧上)，其中该站点具有位于两侧的两个遥现监视器。
显示在遥现监视器216上的图像316包括一个面板，示出未翻动图像337的至少一部分；以及第二面板，示出未翻动图像327L的至少一部分。在遥现监视器226R上的图像326R包括示出未翻动图像337的至少一部分的一个面板，而遥现监视器226L上的图像326L包括示出未翻动图像317的至少一部分的一个面板。遥现监视器236上的图像336包括两个面板，每个示出图像317和327R的至少一部分，其二者都不经历水平翻动。图像316、326L、326R和336的面板中所示的图像317、327L、327R和337的部分(无论水平翻动与否)可以经历修剪和/或缩放以便实现填满所分配的屏幕部分和/或生活化呈现的审美目标。
图4以流程图形式描述了适合用于站点210、220、230的示例遥现视频接收处理400，该处理开始于步骤401，其中本地图像捕获设备(例如，227L和227R)、本地遥现监视器(例如，226L和226R)以及本地STB(例如，STB 221)就绪并通过通信信道130连接到一个或多个远程站点(例如，210、230)。在步骤402，本地STB获得面对数据，代表本地遥现监视器(例如，遥现监视器226L)和对应图像捕获设备(例如，图像捕获设备227L)的基本一致位置。STB可以通过向本地观众成员(例如，本地观众成员223)显示询问关于至少一个特定遥现监视器和图像捕获设备相对本地共享内容监视器(例如，本地内容监视器222)的位置的指令，并处理本地观众成员的响应(例如，通过监控他的或她的遥控器(例如遥控器225))，来获取这种数据。本地STB(例如STB 221)可以获得或推断其它监视器(如果存在，例如监视器226R)和对应图像捕获设备(例如图像捕获设备227R)的相对位置为与第一位置相对。然后，本地STB(例如，221)将针对每个监视器(例如，监视器226L和226R)和对应图像捕获设备(例如，图像捕获设备227L和227R)的面对数据记录在设置数据库413中。
在交换与本地或远程遥现监视器相对应的面对数据的遥现系统中，这种交换发生于步骤403。在这些实施例中(其中需要远程遥现监视器(例如，监视器216和236)的面对数据以便针对界内图像(例如视频信号)中的每一个正确选择显示监视器(例如，监视器226L或226R))，本地STB在步骤403期间接收到这种面对数据并在数据库413中存储这种信息。在STB(例如，221)或扇出服务器(未示出)提供已针对每个远程遥现监视器(例如，监视器216和236)的面对被格式化的视频流的那些实施例中，在步骤403期间，STB与远程站点(210和230)或扇出服务器(未示出)交换面对数据。在一些实例中，面对数据可以在所发送和接收的视频信号中嵌入式地存在为元数据。
在一些实施例中，在系统200中发送的所有视频信号的有效面对具有预定惯例面对，发送和接收系统二者相对它们自己的实际配置(如上所述)水平翻动所需的界外或界内图像(例如，视频信号)。在这种情况下，步骤403成为不必要的，允许跳过该步骤，而不需对数据库413进行改变。这意味着本地STB(例如，STB 221)将提供两个流，每个来自图像捕获设备227L和227R中的不同捕获设备。因此，所述流具有相反的自然面对(在该示例中，图3的图像327L和327R)，使得两个流之一的图像将需要经历水平翻动：应注意这两个流中的哪个流经历翻动，例如，在视频流中本身作为元数据，以便支持给出对未翻动呈现的优选(所期望和/或可能的)，无论这意味着使用原本未翻动的流还是对已翻动流进行翻动。
在步骤404期间，本地STB(例如，STB 221)从与一个远程图像捕获设备(例如，图像捕获设备217和237)相对应的远程STB(例如，STB 211和231)接收视频流。在步骤405，本地STB确定本地监视器(例如，监视器226L或226R)是否具有与该远程图像捕获设备(例如，图像捕获设备217和237)相对的面对。如果是，则在步骤407，本地STB根据可能使用的什么偏好或政策，来进一步确定是否在本地遥现监视器屏幕上存在足够的空间来显示该流。如果是，则在步骤408，本地STB(例如，STB 221)在具有相对面对的监视器上显示远程视频流(例如，来自远程遥现图像捕获设备的远程观众成员图像)。应注意，在没有步骤407(也就是说，不检查是否有足够空间)的情况下，步骤408将在步骤406之后。如果在步骤405期间，则本地STB确定不存在与输入视频流相对的监视器，或如果在步骤407期间，本地STB寻找在相对面对的监视器上的最不拥挤的地方(或基于另一偏好和/或政策基础)，则在步骤406，本地STB将水平翻动该图像(例如，视频流)，并将该图像显示在与该图像源具有同一面对的监视器上。在远程站点(未示出)具有两个遥现监视器(类似于站点220)并可以提供两个视频流(一个来自对应图像捕获设备中的任何一个)的情况下，本地STB(例如，STB 221)可以在步骤406期间决定改为使用第二流，而无需翻动，而不是水平翻动第一流中的图像。视频接收处理400在步骤409结束。
在本地STB具有两个遥现监视器(站点220处)并在步骤403期间分别从远程遥现STB 211和231接收与远程监视器216和236相关的面对数据的情况下，在步骤405，本地STB(例如，STB 221)分别选择正确朝向的监视器(例如，监视器226L或226R)。在远程STB(例如，STB 211和231)中的每一个传送具有标准图像朝向的视频流的情况下，在遥现监视器(例如，遥现监视器226L和226R)保持在本地观众成员(例如，观众223)的两侧上可用的站点(例如，站点220)处，在步骤405之前，本地STB(例如，STB 221)将进一步检查(未示出)以便确定接收到的视频流是什么自然朝向。如果接收到的流保持在根据标准面对进行发送之前时未翻动的，则处理在步骤405期间正常地进行。如果不是，也就是说，如果接收到的视频已经历翻动以便符合标准面对，则本地STB(例如，STB 221)可以在步骤405之前再次翻动该视频(未示出)。现在，可以通过在步骤405期间通知该面对不符合标准面对，但是现在是正确的，来进行该处理。在这种实施例中，在可行的情况下，本地STB将偏好呈现具有正确面对的未翻动视频。应注意，在基于步骤406期间的“重新翻动”进行的处理后可能出现“未翻动”的情况下，通过展望和放弃两次翻动的计算成本来实现更高效率。
图5以流程图形式示出了用于向远程站点发送遥现视频的示例处理500。图5的处理500开始于步骤501，其中本地图像捕获设备(例如，227L和227R)、本地遥现监视器(例如，226L和226R)以及本地STB(例如，STB 221)就绪并通过通信信道130连接到一个或多个远程站点(例如，210、230)。在步骤502，本地STB获得面对数据，代表本地遥现监视器/图像捕获设备对(例如，监视器/图像捕获设备对226L/227L和226R/227R)的基本一致位置中的每个，例如，通过所显示的指令和获得的观看者输入，结合以上步骤402所述。例如，本地遥现监视器(例如，监视器226L)可以显示由本地STB(例如，STB 221)产生的箭头。本地观众成员(例如，本地观众成员223)可以使用他或她的遥控器(例如，遥控器225)根据需要进行调整，以便翻动箭头直到它向右指向内容监视器(例如，监视器222。类似地，本地观众成员将调整显示在本地遥现监视器(例如，监视器226R)上的箭头以便将箭头向左指向本地内容监视器(例如，监视器222))。本地STB(例如，STB 221)将所得到的面对数据记录在设置数据库513中以便指示在该示例中该监视器(例如，监视器226L)和对应本地图像捕获设备(例如，图像捕获设备227L)位于本地共享内容监视器(例如，监视器222)的左侧。
存在交换与本地或远程遥现监视器相对应的面对数据的需要，这种交换发生在步骤503。在表示远程遥现监视器(例如，监视器216和236)的面对的面对数据对于正确水平翻动对应界外视频信号(例如，本地图像捕获设备的图像)而言为必不可少的情况下，本地STB(例如，STB 221)将在步骤503期间接收这种面对数据并将该数据存储在数据库513中。在远程STB(例如，STB 211和231)或扇出服务器(未示出)用于从本地站点(例如，站点220)接收通用视频信号的情况下，本地STB(例如，STB 221)在步骤503期间从数据库513向远程站点(例如，站点210和230)发送针对本地遥现监视器(例如，监视器226L和226R)的面对数据。在一些实例中，面对数据可以作为所发送和接收的视频信号的元数据。或者，在遥现系统200中正发送的所有视频信号的有效面对具有假定的预定惯例面对的图像集合中，发送和接收站点二者将根据需要结合它们自己实际配置水平翻动界外或界内视频信号(如以上结合图2所述)。在这种情况下，步骤503变成非必须的，不改变数据库513。视频流可以包括指示图像(例如视频信号)是否经历水平翻动的元数据。在步骤504，本地STB(例如，STB 221)将从本地遥现图像捕获设备或设备(例如，图像捕获设备227L和227R)接受视频信号。
在发送站点(例如，图2的站点220)有义务提供为在一个远程遥现监视器(例如，监视器216和236)处进行显示而已被格式化的来自本地遥现图像捕获设备(例如，图像捕获设备227L和227R)的视频的情况下，在步骤505期间，本地STB(例如，STB 221)确定与每个远程监视器(例如，监视器216和236)相关联的面对数据是否指示这些监视器面对本地遥现图像捕获设备(例如，图像捕获设备227L和227R)。如果这样，则本地STB在步骤505和步骤507期间选择从对应相对图像捕获设备馈送的视频，在步骤507，本地STB(例如，STB 221)发送所选的相对朝向的视频流以便传输到该远程站点。例如，在左侧具有遥现监视器236的远程站点230将导致本地STB 221在步骤505选择来自右侧的本地图像捕获设备227R的视频流以便发送到远程站点230。如果在505发现在远程站点处没有相对面对的监视器，或惯例需要与在504进行本地捕获中提供的面对不同的面对，则水平翻动要在506发送的流。处理500结束于步骤508。
在图2的所示实施例中，如果从两侧对本地观众成员成像，与在通过图像捕获设备227L和227R从左右覆盖本地观众成员223的情况相同，本地STB(例如，STB 221)通常不需要执行步骤506，通常改为选择发送两个流中不需要翻动的流。相反，只有在第一侧(右侧)具有单个图像捕获设备(例如，图像捕获设备217)的站点(例如，站点210)处的本地STB需要执行步骤506，本地STB用于向在同一侧(未示出)具有遥现监视器的远程站点进行发送。例外发生在双监控站点(例如，220)处，例如在本地参与者(例如，223)指示偏好从特定侧进行成像的情况下，或例如在正确侧上的监视器已具有过多的向其分配的远程参与者图像的情况下。
在一些情况下，存在例外情况：全部所发送的遥现视频具有惯例面对数据，即，所有站点(例如，站点210、220和230)应根据需要翻动来自本地遥现图像捕获设备(例如，图像捕获设备217、227L、227R、237)的遥现视频，以便呈现出他们仿佛处于对应共享内容监视器(例如，监视器212、222和232)的预定相同侧(例如，右侧)。在这种例外情况下，通过确定图像捕获设备是否位于正确侧(与图像捕获设备217和227R相同)或图像捕获设备是否不位于预定相同侧(例如，左侧，与图像捕获设备227L和237相同)，来代替所述在步骤505发生的确定。当针对本地遥现监视器和对应图像捕获设备的面对数据已与惯例面对相匹配时，则本地STB(例如，STB 221)在步骤507期间发送所收集的图像(例如，来自图像捕获设备217和227R的视频流)。然而，如果本地面对数据不与惯例面对数据相匹配时，则在步骤506，本地STB在向远程站点发送这种图像之前将水平翻动本地遥现图像(与图像捕获设备227L和237的情况相同)。
当在步骤503期间本地STB(例如，221)向远程STB(例如，STB 211和231，预期这些远程STB将在显示接收到的视频流之前选择或格式化视频流)发送本地监视器(例如，监视器226L和/或226R)的面对数据的情况下，在步骤505进行的确定成为不必要的，处理进行到步骤507，由于远程站点STB将根据需要选择或操控在步骤504期间获得的视频，以便显示在远程遥现监视器(例如，监视器216和236)。备选地，在步骤505，本地STB(例如，STB 221)可以针对每个远程站点(例如，站点211和231)选择适合的图像(例如，视频流)。
至于图4的视频接收处理400和图5的视频发送处理500的多种可能性，做出的具体实施和所选的政策应达成一致，使得相对特定远程站点，针对哪个本地遥现监视器将显示远程遥现图像的选择，对应于针对哪个本地遥现图像捕获设备对用于由所述远程站点传输并显示的流进行成像的选择。这样确保当第一观众成员(例如，观众成员223)看向所显示的面向他或她的第二远程观众成员(例如，观众成员213)的遥现图像时，确保第二观众成员同样接收到转向他或他的第一观众成员的图像(而不是说，看到该观众成员的头的后部)，如图3呈现的若干示例所示。
图6和7分别描述了用于执行图2的系统200中的遥现行为的STB 221和231的一部分的示例实施例的示意图。参考图6，在站点220，遥现图像捕获设备227L和227R提供分别承载视频图像640L和640R的视频输出信号601L和601R。STB 221接收含有由界外视频缓冲器610获得的视频图像640L和640R的视频输出信号601L和601R(在该上下文中的术语“界外”表示去往远程站点的视频)。
界外视频控制器611根据存储在设置数据库613中的配置数据从视频缓冲器610获取视频数据。在该示例中，遥现监视器/图像捕获设备对226R/227R位于本地观众成员223的右侧，遥现监视器/图像捕获设备对226L/227L位于左侧(如图2所示)，是针对数据库613记录的配置的适合朝向。因此，界外视频控制器611将由图像捕获设备中的至少一个产生的视频传送给编码器612，以便优选地用关于图像640L和640R中哪个表示左侧图像和右侧图像的信息进行编码。根据具体实施例，界外视频控制器611可以基于这种信息翻动一个或另一个界外图像(或，在少数情况下，二者)。因此，编码视频图像641从编码器612传递到通信接口614，以便经由通信信道130分别传送到远程STB 211和231中的每一个，作为遥现图像流642和643。
在所示示例中，图像流642和643中的每个都包括编码视频图像641中的所选图像。在备选实施例中，流642和643之一或其二者可以包括两个编码视频图像641。类似地，流642和643之一或另一个可以包括水平翻动版本的对应图像。远程STB(例如，STB 211和231)中的每个分别经由通信信道130发送对应遥现图像流650和660，以便由本地STB(例如，STB 221)经由它的通信接口614接收。这些界内遥现图像从通信接口614传送到解码器615。解码器区分界内流650和660中的每个，并将它们分别处理为遥现图像数据651和661，以便分别写入界内视频缓冲器617A和617B。如果解码器615识别任何远程站点配置元数据616，则编码器将这种数据存储在数据库613中以便用于操作视频控制器611和618。
界内视频控制器618访问来自视频缓冲器617A和618B的视频数据中的至少一部分，以便写入视频输出缓冲器619。界内视频控制器618访问视频缓冲器617A、617B并根据来自数据库613的配置数据(具体包括界内图像651、661中的哪个(如果存在)是否需要水平翻动)来写入视频输出缓冲器619。视频缓冲器输出视频信号620L和620R，以便在对应遥现监视器226L和226R上分别显示为图像326L和326R。
考虑到STB 221的数据库613中记录的设置，在与图2和3相对应的示例实施例中，分别由遥现图像捕获设备227L和227R捕获到的图像640L和640R都不需要在传输到远程STB 211和231分别成为流642和643之前进行水平翻动。类似地，界内视频流650和660都不需要水平翻动，即使需要，该实施例应由界内视频控制器618在将视频数据从界内视频缓冲器617A和617B发送到视频输出缓冲器619期间施加水平翻动。如图3的图像集合320中的位置220所述，结果示出了在对应遥现屏幕226L和226R上的图像326L和326R内的远程本地观众成员210和233的面部看上去都看向共享屏幕222。
图7描述了与图2的站点230相关的并与图3所述的图像集合330相对应的STB 231的框架示意图。在站点230处，遥现图像捕获设备237提供承载视频图像740的视频输出信号701。STB 231接收该视频输出信号701使得由界外视频缓冲器710获取视频图像740。界外视频控制器711根据来自数据库713的配置数据从视频缓冲器710获取视频数据。在该示例中，遥现监视器/图像捕获设备对236/237位于本地观众成员(观众成员233，如图2所示)的左侧，与数据库613所列的配置相对应。因此，界外视频控制器711将视频传递到编码器712，而无需水平翻动。编码器712将编码视频图像741传递到通信接口714，以便经由通信信道130分别传输到远程STB(例如，STB 211和221)中的每个作为遥现图像流742和743。
远程STB(例如，STB 211和221)中的每个分别经由通信信道130向STB 231发送对应遥现图像流750和760，以便经由通信接口714接收。这些界内遥现流从通信接口714传递到解码器715。解码器715区分界内流750和760中的每个，将它们分别处理为遥现图像数据751和761，分别写入界内视频缓冲器717A和717B。如果解码器715识别任何远程站点配置元数据716，则解码器将数据存储在数据库713中以便用于操作视频控制器711、718。界内视频控制器718从视频缓冲器717A和717B获取视频数据中的至少一部分，以便写入视频输出缓冲器719。界内视频控制器718访问视频缓冲器717A和717B并根据来自数据库713的配置数据(具体包括界内图像651、661中的哪个(如果存在)需要水平翻动)来写入视频输出缓冲器719(在该示例中，不存在)。STB 231输出来自视频输出缓冲器719的视频信号，以便显示在遥现监视器236上作为图像336。
由于站点230仅具有一个遥现监视器236，来自相连的远程站点210、220的图像流750、760必须经历合成为同一图像336。尽管未示出，如图6之前所述，在例如两个或更多个远程站点具有相同配置(例如，站点具有它们的遥现监视器和位于对应本地观众成员右侧的图像捕获设备)的情况下，可以应用类似条件。在这种情况下，多个图像可以经历合成在一起出现在相对侧监视器226L上，除非在步骤407，左侧监视器已变得太拥挤，一个或多个遥现图像被指派到右侧监视器226R并经历水平翻动以便相对本地共享内容监视器222保持正确面对。
根据在数据库713的集合中记录的朝向信息(与图2和3所示的示例配置相一致)，由遥现图像捕获设备237捕获的图像740在传输到远程STB(例如，211和221)之前不接收水平翻动。类似地，针对该示例，界内视频流750和760二者具有正确的面对并且不需要水平翻动。如图3的图像集合330所示，针对图2的站点位置230的结果示出了在遥现平面236上的图像336中的远程观众成员213和223的面部通常面向本地共享内容屏幕232。
图6和7二者进一步示出了当一个本地遥现监视器显示来自特定远程站点的图像时，对应本地遥现图像捕获设备将提供发送的用于在该远程站点处进行显示的图像，如上所述。
以上描述了一种用于在遥现系统中实现改善性图像显示的技术。

Claims (18)

1.一种用于在遥现系统中处理图像的方法，包括以下步骤：
在遥现系统的第一站点处确立第一朝向数据，所述第一朝向数据指示第一用户相对第一站点处的第一和第二图像显示设备中的每一个的朝向；
在第一站点处接收来自遥现系统的第二站点的第二用户的输入第一图像，指示第二用户相对第二站点处的第一图像捕获设备的朝向的第二朝向数据是可用的；以及
根据第一和第二朝向数据处理第一图像，以便在第一和第二图像显示设备中的所选显示设备上进行显示，使得当显示在所选显示设备上时，第二用户的图像以遥现感应重叠方式呈现为与第一用户共存于相同环境内。
2.根据权利要求1所述的方法，其中所述第二朝向数据是预定的。
3.根据权利要求1所述的方法，还包括如下步骤：
在第一站点处接收来自第二站点的第二朝向数据。
4.根据权利要求3所述的方法，其中所述第二朝向数据包括与输入图像相关联的元数据。
5.根据权利要求1所述的方法，其中第一朝向数据的第一部分与第一和第二图像显示设备中的所选图像显示设备相对应；所述方法还包括以下步骤：
在第一站点处，根据第一和第二朝向数据处理第一图像；其中
如果第一部分与第二朝向数据相匹配，则所述处理包括水平翻动第一图像，但是如果第一部分不与第二朝向数据相匹配，则不发生翻动。
6.根据权利要求1所述的方法，还包括以下步骤：
从第二图像捕获设备捕获第一用户的第二图像，所述第二图像捕获设备与第一和第二图像显示设备中的所选图像显示设备相对应；以及
向第二站点发送第二图像。
7.根据权利要求6所述的方法，还包括以下步骤：
向第二站点发送第一朝向数据的至少一部分。
8.根据权利要求6所述的方法，其中所述第一朝向数据的第一部分与第二图像捕获设备相对应，所述方法还包括以下步骤：
在向第二站点发送之前，根据第一和第二朝向数据，在第一站点处处理第二图像；其中
如果第一部分与第二朝向数据相匹配，则所述处理包括水平翻动第一图像，但是如果第一部分不与第二朝向数据相匹配，则不发生翻动。
9.根据权利要求1所述的方法，其中所述处理步骤包括：
确定第一和第二图像显示设备中的每一个的状态；
基于每个图像显示设备的状态，选择第一和第二显示设备之一以显示第一图像；
取决于选择了第一和第二显示设备中的哪个显示设备，水平翻动第一图像。
10.一种用于在遥现系统中处理图像的第一站点处的装置，包括：
数据库，用于存储第一朝向数据，所述第一朝向数据指示第一用户相对第一站点处的第一和第二图像显示设备中的每一个的朝向；
通信接口，用于从遥现系统的第二站点接收第二用户的输入第一图像，指示第二用户相对第二站点处的第一图像捕获设备的朝向的第二朝向数据是可用的；以及
处理装置，用于根据第一和第二朝向数据处理第一图像，以便在第一和第二图像显示设备中的所选显示设备上进行显示，使得当显示时，第二用户的图像以遥现感应重叠方式呈现为与第一用户共存于相同环境内。
11.根据权利要求10所述的装置，其中所述第二朝向数据是预定的。
12.根据权利要求10所述的装置，其中所述通信接口还接收来自第二站点的第二朝向数据。
13.根据权利要求12所述的装置，其中所述第二朝向数据包括与输入图像相关联的元数据。
14.根据权利要求10所述的装置，其中第一朝向数据的第一部分与第一和第二图像显示设备中的所选图像显示设备相对应；以及
其中所述处理装置根据第一和第二朝向数据处理第一图像；以及如果第一部分与第二朝向数据相匹配，则所述处理装置水平翻动第一图像，但是如果第一部分不与第二朝向数据相匹配，则不发生翻动。
15.根据权利要求10所述的装置，其中所述处理装置从第二图像捕获设备捕获第一用户的第二图像，所述第二图像捕获设备与第一和第二图像显示设备中的所选图像显示设备相对应；以及向第二站点发送第二图像。
16.根据权利要求10所述的装置，其中所述处理装置向第二站点发送第一朝向数据的至少一部分。
17.根据权利要求10所述的装置，其中所述第一朝向数据的第一部分与第二图像捕获设备相对应，其中所述处理装置在向第二站点发送之前，根据第一和第二朝向数据，在第一站点处处理第二图像；以及如果第一部分与第二朝向数据相匹配，则所述处理装置水平翻动第一图像，但是如果第一部分不与第二朝向数据相匹配，则不发生翻动。
18.根据权利要求10所述的装置，其中所述处理装置(a)确定第一和第二图像显示设备中的每一个的状态；(b)基于每个图像显示设备的状态，选择第一和第二显示设备之一以显示第一图像；以及(c)取决于选择了第一和第二显示设备中的哪个显示设备，水平翻动第一图像。
CN201380071860.8A 2013-02-04 2013-02-04 双遥现机顶盒 Pending CN105009571A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2013/024614 WO2014120252A1 (en) 2013-02-04 2013-02-04 Dual telepresence set-top box

Publications (1)

Publication Number Publication Date
CN105009571A true CN105009571A (zh) 2015-10-28

Family

ID=47716180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380071860.8A Pending CN105009571A (zh) 2013-02-04 2013-02-04 双遥现机顶盒

Country Status (5)

Country Link
US (1) US20150341696A1 (zh)
EP (1) EP2951990A1 (zh)
KR (1) KR20150115753A (zh)
CN (1) CN105009571A (zh)
WO (1) WO2014120252A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104519305A (zh) * 2013-09-29 2015-04-15 中兴通讯股份有限公司 端点信息交互处理方法、装置及远程呈现端点

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030145324A1 (en) * 1997-12-05 2003-07-31 Jorge E. Caviedes Communication method and terminal
US20060248210A1 (en) * 2005-05-02 2006-11-02 Lifesize Communications, Inc. Controlling video display mode in a video conferencing system
CN101690205A (zh) * 2007-04-30 2010-03-31 惠普开发有限公司 具有对称参考的视频会议系统
CN102209228A (zh) * 2010-03-31 2011-10-05 宝利通公司 根据参会人员之间的交互作用调整cp布局的方法和系统
WO2012008972A1 (en) * 2010-07-16 2012-01-19 Hewlett-Packard Development Company, L.P. Methods and systems for establishing eye contact and accurate gaze in remote collaboration
US20120038742A1 (en) * 2010-08-15 2012-02-16 Robinson Ian N System And Method For Enabling Collaboration In A Video Conferencing System

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6653345B2 (en) 1997-09-16 2003-11-25 Toray Industries, Inc. C-C chemokine synthesis inhibitor
WO2002095534A2 (en) 2001-05-18 2002-11-28 Biowulf Technologies, Llc Methods for feature selection in a learning machine
US9160965B2 (en) * 2011-08-01 2015-10-13 Thomson Licensing Telepresence communications system and method
WO2014175876A1 (en) * 2013-04-24 2014-10-30 Thomson Licensing Social television telepresence system and method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030145324A1 (en) * 1997-12-05 2003-07-31 Jorge E. Caviedes Communication method and terminal
US20060248210A1 (en) * 2005-05-02 2006-11-02 Lifesize Communications, Inc. Controlling video display mode in a video conferencing system
CN101690205A (zh) * 2007-04-30 2010-03-31 惠普开发有限公司 具有对称参考的视频会议系统
CN102209228A (zh) * 2010-03-31 2011-10-05 宝利通公司 根据参会人员之间的交互作用调整cp布局的方法和系统
WO2012008972A1 (en) * 2010-07-16 2012-01-19 Hewlett-Packard Development Company, L.P. Methods and systems for establishing eye contact and accurate gaze in remote collaboration
US20120038742A1 (en) * 2010-08-15 2012-02-16 Robinson Ian N System And Method For Enabling Collaboration In A Video Conferencing System

Also Published As

Publication number Publication date
KR20150115753A (ko) 2015-10-14
WO2014120252A1 (en) 2014-08-07
US20150341696A1 (en) 2015-11-26
EP2951990A1 (en) 2015-12-09

Similar Documents

Publication Publication Date Title
US9160965B2 (en) Telepresence communications system and method
US20180316939A1 (en) Systems and methods for video processing, combination and display of heterogeneous sources
US20180316948A1 (en) Video processing systems, methods and a user profile for describing the combination and display of heterogeneous sources
US20180316947A1 (en) Video processing systems and methods for the combination, blending and display of heterogeneous sources
US9071628B2 (en) Method and apparatus for managing bandwidth by managing selected internet access by devices in a Wi-Fi linked audience
US9013546B2 (en) Adaptable media stream servicing two and three dimensional content
KR101326739B1 (ko) 정보처리 시스템 및 정보처리 장치
US20180316942A1 (en) Systems and methods and interfaces for video processing, combination and display of heterogeneous sources
US11284137B2 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
US20180316944A1 (en) Systems and methods for video processing, combination and display of heterogeneous sources
US20150124171A1 (en) Multiple vantage point viewing platform and user interface
US20110229106A1 (en) System for playback of ultra high resolution video using multiple displays
US20180316943A1 (en) Fpga systems and methods for video processing, combination and display of heterogeneous sources
CN106488254B (zh) 一种直播画面切换的方法和系统
US20180316946A1 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
DE112013002234T5 (de) Verbundenes Mehrfachbilschirm-Video
EP2563026A2 (en) Transmission of video content
CN103916699A (zh) 用于使用mvc产生360度视频记录的系统及方法
US20180227501A1 (en) Multiple vantage point viewing platform and user interface
US10547885B2 (en) Adaptively selecting content resolution
WO2002096104A2 (en) Configurable multi-video receiving method and apparatus
WO2018071781A2 (en) Systems and methods for video processing and display
US20180316940A1 (en) Systems and methods for video processing and display with synchronization and blending of heterogeneous sources
US9860487B2 (en) Video conference data generation
US20180316941A1 (en) Systems and methods for video processing and display of a combination of heterogeneous sources and advertising content

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151028