CN101123702A - 图像显示设备及其控制方法 - Google Patents

图像显示设备及其控制方法 Download PDF

Info

Publication number
CN101123702A
CN101123702A CNA2007100065650A CN200710006565A CN101123702A CN 101123702 A CN101123702 A CN 101123702A CN A2007100065650 A CNA2007100065650 A CN A2007100065650A CN 200710006565 A CN200710006565 A CN 200710006565A CN 101123702 A CN101123702 A CN 101123702A
Authority
CN
China
Prior art keywords
combining information
image display
video signal
information
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2007100065650A
Other languages
English (en)
Inventor
吴长勋
李宇炯
车淳佰
梁道俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN101123702A publication Critical patent/CN101123702A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H04L65/1104—Session initiation protocol [SIP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供了一种在多功能监视器中控制画中画(PIP)功能的图像显示设备及其方法。所述用于基于多个视频信号显示图像的图像显示设备包括：处理器，接收至少一种视频信号并显示图像；信号处理单元，从处理器接收结合信息，所述结合信息包括关于可由图像显示设备同时显示的多个视频信号的结合的信息；和网络单元，布置在信号处理单元中，用于通过外部通信网络发送结合信息。

Description

图像显示设备及其控制方法
本申请要求2006年8月10日在韩国知识产权局提交的第10-2006-0075869号韩国专利申请的优先权，该申请全部公开于此以资参考。
技术领域
根据本发明的设备和方法涉及一种基于多个视频信号来显示图像的图像显示设备及其控制方法，更具体地讲，涉及一种用于控制包括个人计算机(PC)监视器的多功能监视器(MFN)中的画中画(PIP)或并排画面(PBP)功能、TV和网络功能、以及经互联网协议的语音/视频(VoIP)的图像显示设备。
背景技术
PIP功能是根据运动图像技术和显示设备的发展结合很多监视器使用的多种屏幕再现方法中的一种。PIP功能将子屏幕放置在显示设备的主屏幕上，从而向观众提供主屏幕和子屏幕两个屏幕的内容。
根据监视器中的PIP功能的现有技术，根据用户的PIP ON或OFF输入，新屏幕显示在监视器屏幕上PIP区域中的另一屏幕上。也就是说，为了使用PIP功能，选择PIP源，然后如果选择PIP ON，则PIP源屏幕显示在PIP区域，同时在其下面于监视器上显示个人计算机(PC)屏幕。PIP功能具有这样的优点：可在监视器上的PIP区域中看到新屏幕。然而，不能观看由PIP画面覆盖的主屏幕的所述区域的内容。另外，在上述的多功能监视器的情况下，通过内部编解码器来显示来自多个外部输入信号终端的PIP画面和通过VoIP呼叫连接的另一端的包括人脸的屏幕。这样，很多屏幕一起显示并且屏幕中被挡住的部分增加。
VoIP呼叫使用VoIP技术能够进行语音呼叫，通过所述的VoIP技术，可通过基于互联网协议(IP)的数据网络，例如局域网(LAN)、广域网(WAN)、虚拟专用网络(VPN)来发送和接收语音或者视频数据。在现有技术的电话线中，一旦一条线被占用，那么其他呼叫数据不可能被连接到这条线上，因而这条线的可用性降低，成本也增加。然而，在VoIP的情况下，可共享数据线，从而成本低，简化了复杂的电话线布局，并且提供了很好的可伸缩性。另外，VoIP允许多方呼叫并可用于远程会议系统。
图1是示出根据现有技术的外部输入信号的连接状态的示图。
参照图1，在现有技术中，监视器仅显示每个外部输入信号是否被连接。当PIP功能和现有技术中的监视器一起使用时，监视器不能同时显示多个视频信号的所有可能的结合，而只能显示一些有限的结合。因此，由于用户不知道哪些视频信号可以与用户已将其选择为主屏幕的视频信号同时显示，所以用户必须逐个选择子屏幕并通过排除处理来确定哪个子屏幕可被使用。理想地，用户应该能够访问关于能够在监视器上同时显示的两个视频信号结合的信息。此外，该信息应该还被提供给通过VoIP连接的正在通信的另一端的人，以便这个人也可控制PIP屏幕。
图2A和图2B是示出根据现有技术的PIP屏幕的示图。
参照图2A，包括通过VoIP连接的会话的另一端的人的脸的屏幕210被布置为监视器屏幕的左下角的PIP屏幕。参照图2B，根据监视器外部输入信号的TV屏幕220被显示为监视器屏幕的右下角的PIP屏幕。在每种情况下，子屏幕叠盖了主屏幕的预定区域，从而不能观看主屏幕的该区域的内容。此外，在多功能监视器中，如果同时显示在图2A和图2B中示出的PIP屏幕，则PIP屏幕的叠盖可给观众带来很大不便。另外，在通过VoIP连接语音呼叫的情况下，呼叫另一端的人可能需要控制与同时观看很多文档的功能有关或者在视频会议中的很多PIP屏幕的布局。
发明内容
本发明的示例性实施例提供了这样一种设备及方法，通过所述设备及方法，如果连接了VoIP呼叫，则接收关于PIP屏幕的可能结合的结合信息并控制在呼叫的另一端的人PIP屏幕。
根据本发明的一方面，提供了一种基于多个视频信号来显示图像的图像显示设备，所述设备包括：处理器，接收至少一种视频信号并显示图像；信号处理单元，从处理器接收结合信息，所述结合信息包括关于可由图像显示设备同时显示的多个视频信号的结合的信息；和网络单元，其布置在信号处理单元中，用于通过外部通信网络发送结合信息。
可由所述设备同时显示的多个视频信号可包括主视频信号和子视频信号。
所述结合信息可以是关于基于所述设备接收的输入视频信号的可能结合的信息。
所述结合信息可包括与所述设备接收的子视频信号有关的位置信息。
所述设备还可包括：结合信息处理单元，其布置在处理器和信号处理单元之间，用于处理结合信息。结合信息处理单元包括：结合信息存储单元，存储结合信息；和处理器控制单元，根据通过外部通信网络发送的控制信号来控制主视频信号和子视频信号。
所述网络单元还可包括：消息控制单元，将从结合信息存储单元接收的结合信息处理为消息，以通过外部通信网络发送结合信息。
所述消息符合会话初始协议和会话描述协议。
根据本发明的另一方面，提供了一种图像显示设备，包括：网络单元，通过外部通信网络从外部图像显示设备接收结合信息，所述结合信息包括关于可由基于多个视频信号来显示图像的外部图像显示设备同时显示的多个视频信号的结合的信息；结合信息存储单元，存储结合信息；处理器，使用存储的结合信息发送控制命令；和处理器控制单元，根据所述控制命令来控制可由外部图像显示设备同时显示的多个视频信号。
可由外部图像显示设备同时显示的多个视频信号包括主视频信号和子视频信号。
所述结合信息可以是关于基于所述外部图像显示设备接收的输入视频信号的可能结合的信息。
所述结合信息可包括与所述外部图像显示设备接收的子视频信号有关的位置信息。
所述结合信息可以以消息形式被接收，并且所述网络单元还可包括：消息控制单元，提取从包括在通过外部通信网络接收的消息中的结合信息。
所述消息可符合会话初始协议和会话描述协议。
根据本发明的另一方面，提供了一种控制基于多个视频信号来显示图像的图像显示设备的方法，所述方法包括：识别所述多个视频信号的输入状态；通过使用输入视频信号信息，存储关于可由所述图像显示设备同时显示的多个视频信号的结合的结合信息；和通过外部通信网络发送结合信息。
所述识别多个视频信号的输入状态的步骤可包括识别所述多个视频信号的初始状态，和预置输入状态的改变中的一个。
如果识别出预置输入状态的改变，则在通过外部通信网络发送结合信息的过程中，可仅将关于下述结合的结合信息作为消息发送，所述结合与改变之前的先前结合不同。
可由图像显示设备同时显示的多个视频信号包括主视频信号和子视频信号。
所述结合信息可以是关于基于由所述图像显示设备接收的输入视频信号的可能结合的信息。
所述结合信息可包括与所述设备接收的子视频信号有关的位置信息。
以符合会话初始协议和会话描述协议的消息的形式来发送结合信息。
将结合信息添加到所述消息，和将允许稍后参考结合信息的URI添加到所述信息。
根据本发明的另一方面，提供了一种控制图像显示设备的方法，所述方法包括：通过外部通信网络从外部图像显示设备接收结合信息，所述结合信息是关于可由基于多个视频信号显示图像的外部图像显示设备同时显示的多个视频信号的结合的信息；存储结合信息；根据存储的结合信息控制可由外部图像显示设备同时显示的多个视频信号。
所述可由外部图像显示设备同时显示的多个视频信号可包括主视频信号和子视频信号。
所述结合信息可以是关于基于由外部图像显示设备接收的输入视频信号的可能结合的信息。
所述结合信息可包括与外部图像显示设备接收的子视频信号有关的位置信息。
结合消息可以以符合SIP和SDP的消息的形式被接收。
所述存储接收的结合信息的步骤可还包括：存储添加到消息主体的结合信息，或获得并存储允许参考接收的结合信息的统一资源标识符。
所述根据存储的结合信息来控制可由外部图像显示设备同时显示的所述多个视频信号的步骤可还包括：确认控制的有效权限。
通过使用结合信息可调整主视频信号和子视频信号的显示位置或者透明度。
根据本发明的另一方面，提供了一种实现有用于执行控制用于基于多个视频信号显示图像的图像显示设备的方法的计算机程序的计算机可读记录介质。
附图说明
通过下面参照附图对本发明示例性实施例的详细描述，本发明的上述和其他方面将会更清楚，其中：
图1是示出根据现有技术的外部输入信号的连接状态的示图；
图2A和图2B是示出根据现有技术的画中画(PIP)屏幕的示图；
图3是示出当使用外部通信网络召开视频会议时由图像显示设备显示的屏幕的示意图；
图4是示出根据本发明示例性实施例的图像显示设备的结构的示意性功能框图；
图5是示出根据本发明示例性实施例的用于图4中示出的处理器和信号处理单元之间通信的结构的详细功能框图；
图6是示出根据本发明示例性实施例的主屏幕信号和子屏幕信号之间的可能结合的示图；
图7A和图7B是示出根据本发明示例性实施例的控制图像显示设备的方法的流程图；其中，图7A示出了在发送方中执行的过程，图7B示出了在接收方中执行的过程；
图8是根据本发明示例性实施例的图7A中示出的操作730和图7B中示出的操作750的详细流程图；
图9是示出根据本发明示例性实施例的发送INVITE消息的顺序图；
图10是示出根据本发明示例性实施例的当发送图9所示的INVITE消息时会话描述协议(SDP)消息的源代码的示图；
图11是示出根据本发明另一示例性实施例的发送INFO消息的顺序图；
图12是示出根据本发明示例性实施例的图11所示的会话初始协议(SIP)INFO消息的源代码的示图；
图13是示出根据本发明示例性实施例的改变PIP控制模式的流程图；
图14是示出根据本发明示例性实施例的由经授权的人控制图像显示设备的方法的流程图；和
图15是示出根据本发明示例性实施例的当连接了会话时本地用户的PIP控制模式的流程图。
具体实施方式
将参照附图对本发明进行更全面的描述，本发明的示例性实施例将显示在附图中。
图3是当使用外部通信网络进行视频会议时由图像显示设备显示的屏幕的示意图。
参照图3，用户A、B和C处于他们可通过互联网进行连接的状态，并且在图3中，他们正在进行视频会议。在用户A的监视器310中，除了显示主屏幕311之外，用户B和C的脸作为PIP屏幕312被显示。根据会议情况可能有一个或者多个PIP屏幕。同样，在用户B的监视器320和用户C的监视器330中，除了显示主屏幕321和331之外，还显示PIP屏幕322和332。如果用户B连接到外部输入源323A，比如视频信号，那么视频信号的PIP屏幕323b可被显示在用户B的监视器320上。在这种情况下，例如，如果用户A是会议的主席，那么用户A没有办法知道在用户B的监视器上正在显示什么，因而用户A必定继续主持会议而意识不到这种情况。此时，由于根据外部输入源在用户B的监视器320上显示的视频信号的PIP屏幕区域与主屏幕321重叠，所以用户B不能观看主屏幕321中该区域的内容，因而会议可能不会顺利进行。
另外，用户B的监视器320上用户A的脸的屏幕322可能会被视频屏幕323b覆盖，这种情况可能是主席用户A不想发生的，在这种情况下，用户A需要能够适当地控制局面。根据本发明，在视频会议中，用户A可进行远程控制。现在将解释用于这种控制的图像显示设备的结构。
图4是根据本发明示例性实施例的图像显示设备的结构的示意性功能框图。
参照图4，图像显示设备400包括处理器420和信号处理单元460，并还可包括缩放器430和低压差分信令(LVDS)发送器440。如图所示，可以有多个缩放器430。所述一个或者多个缩放器根据处理器420的控制来适当地缩放视频信号的分辨率。LVDS发送器440是符合基于TIA/EIA-644和IEEE1596.3标准最大信号传输率为每秒655Mbit的数据传输标准的接口。
图像显示设备400可以是普通个人计算机监视器，还可包括能够在多媒体装置中处理视频信号的显示设备，比如个人数据助手(PDA)、笔记本电脑、和便携式多媒体播放器(PMP)。下面，图像显示设备400将被称作“监视器”。
外部输入源410是从监视器400外部提供输入信号的源，可包括15针的D-sub性能、DVI-D性能、CVBS性能、S-VIDEO性能、SCART Component性能和RFTuner性能。
处理器420可以是用于各种控制功能的嵌入在监视器400中的集成电路(IC)芯片，也可称作“micom”。处理器420接收外部输入信号并参与显示信号所需的图像处理(比如模拟数字(AD)转换和解码)的控制。
信号处理单元460根据从外部通信网络(比如会话初始协议(SIP)包450、实时传输协议(RTP)或者用户数据报协议(UDP)包)通过VoIP流入的消息或者语音/视频数据流处理信号产生。因此，信号处理单元460其内可具有嵌入式中央处理单元(CPU)和它自己的编解码器芯片以及存储器。例如，信号处理单元460可通过VoIP接收语音和/或视频数据流、用它自己的编解码器来对数据流进行解码、并在监视器上将数据流显示为PIP屏幕。这里，语音和/或视频数据流可作为RTP或者UDP包传送。由于应该对由处理器420产生的来自外部输入源410的PIP屏幕和信号处理单元460的PIP屏幕之间的关系进行控制，所以信号处理单元460与处理器420进行通信。现在将参照图5来更详细地解释信号处理单元460和处理器420之间的通信。
图5是示出根据本发明示例性实施例的用于在图4中示出的处理器420和信号处理单元460之间的通信的结构的详细功能框图。
参照图5，为了在监视器400的处理器420和信号处理单元460之间通信，结合信息处理单元510布置于处理器420和信号处理单元460之间。
将解释发送方发送关于可由监视器400同时显示的多个视频信号的结合的信息。
结合信息处理单元510处理关于可由监视器400同时显示的多个视频信号的结合的结合信息，并还可包括结合信息存储单元511和处理器控制单元512。信号处理单元460可还包括网络单元461和消息控制单元461-1。
结合信息存储单元511从处理器420读取上述的关于可由监视器400同时显示的多个视频信号的结合的信息并存储该信息。存储的结合信息通过布置在信号处理单元460中的网络单元461的消息控制单元461-1，通过外部通信网络，作为消息被发送到VoIP连接的另一方。另外，如果处理器420检测到新的外部输入信号并且事件发生，则对于该事件的新的结合信息被更新并被存储在结合信息存储单元511中。
网络单元461为外部通信网络提供接口，所述外部通信网络包括基于IP的数据网络，比如LAN、WAN和VPN。
通过网络单元461，可进行与另一监视器的通信。
消息控制单元461-1被布置在网络单元461中，并将从结合信息存储单元511接收到的结合信息处理为将通过外部通信网络发送的消息。所述消息符合会话初始协议(SIP)和会话描述协议(SDP)。另外，消息控制单元461-1可接收通过VoIP连接的另一端的经授权的人发出的控制消息。此时，消息控制单元461-1提取包括在所述消息中的控制源代码并将该代码传送到结合信息处理单元510中的处理器控制单元512。
根据从信号处理单元460接收到的消息的控制源代码的内容，处理器控制单元512控制监视器400的处理器420，并调整PIP屏幕的位置和透明度。PIP屏幕的位置可被限制于包括左上、左下、右上、右下和无的特定区域。另外，所述位置可由X、Y坐标、高度和宽度来确定。PIP屏幕的透明度可根据若干刻度，比如不透明、高、中和低、或者更详细的刻度0～100％来确定。
现在将解释由VoIP连接的另一端的监视器发送的关于可由监视器同时显示的多个视频信号的结合的信息的接收。在网络单元461中的消息控制单元461-1中提取包括在消息中的结合信息，并且将该结合信息传送到结合信息处理单元510中，然后将其存储在结合信息存储单元511中。通过使用存储的结合信息，处理器420发送用于另一端的监视器的PIP屏幕的位置和透明度的控制命令。根据处理器420的命令，处理器控制单元512执行AD转换及编码处理以控制可由另一端的监视器同时显示的多个视频信号。此时，消息控制单元461-1将控制命令处理为消息以通过外部通信网络来发送该控制命令。
图6是示出根据本发明示例性实施例的主屏幕信号和子屏幕信号的可能结合的示图。
参照图6，结合信息包括关于主屏幕(即主视频信号)和子屏幕(子视频信号)的信息，这作为MAIN和PIP的连接结合而示出。根据图6所示的示例，当“PC-Digital(DVI)”作为主屏幕显示时，仅“S-Video”和“高清晰度多媒体接口(HDMI)”可作为子屏幕同时显示。该信息被发送到另一端的监视器，接收方监视器可基于该结合信息来控制发送方监视器的PIP屏幕。
图7A和图7B是示出根据本发明示例性实施例的控制图像显示设备的方法的流程图。图7A示出在发送方执行的过程，图7B示出在接收方执行的过程。
参照图7A，根据本示例性实施例，控制基于多个视频信号显示图像的监视器的方法包括：在操作710中，识别多个视频信号的输入状态；在720中，使用输入视频信号信息，存储关于可由监视器同时显示的多个视频信号的结合的结合信息；在操作730中，通过外部通信网络发送结合信息。
在操作710中，识别多个视频信号的初始输入状态或者识别预置的输入状态的改变。也就是说，通过检查是否产生了连接到监视器的外部输入源的信号，来识别状态或者识别已经产生的信号的改变的ON或OFF状态。
在操作720中，关于可由监视器同时显示的多个视频信号的结合的结合信息通过处理器被读出并被存储。存储的结合信息包括关于可由监视器实质上同时显示的多个视频信号的结合的信息和关于基于实际产生的输入视频信号的可能的结合的信息。
在操作730中，以消息形式来发送存储的结合信息。可使用的典型协议包括SIP协议和SDP协议。将参照图8对操作730进行更详细的解释。
参照图7B，根据本示例性实施例，控制基于多个视频信号来显示图像的监视器的方法包括：在操作740中，通过外部通信网络接收关于可由监视器同时显示的多个视频信号的结合的结合信息；在操作750中，存储接收到的结合信息；并在操作760中，通过使用存储的结合信息来控制多个视频信号。
在操作740中，接收关于可由另一端的监视器同时显示的多个视频信号的结合的结合信息。
在操作750中，存储接收到的结合信息。稍后将参照图8对操作750进行更详细的解释。
在操作760中，通过使用存储的结合信息，来控制发送方的监视器的多个视频信号。也就是说，由于接收方的监视器可知道另一端监视器的外部输入源、连接状态和PIP屏幕的当前状态，所以接收方的监视器基于结合信息来调整发送方的监视器的主视频信号和子视频信号的显示位置或透明度。这里，为进行控制应进行确认控制权限(权力)的确认过程。
图8是根据本发明示例性实施例的图7A所示的操作730和图7B所示的操作750的详细的流程图。参照图8，为便于解释，可分开介绍包括结合信息的消息的发送和所述消息的接收。
在发送消息的情况下，当基于由系统A通过检查连接状态识别出的外部输入源的PIP结合信息被发送到系统B时，在操作820中，所述结合信息或允许稍后参考该结合信息的统一资源标识符(URI)被添加到SIP/SDP消息的主体。SIP协议是应用层的信令协议，该协议规定了想要在互联网上相互通信的智能终端彼此识别、找到彼此的位置、建立、终止和改变多媒体通信会话的过程。SIP协议具有控制建立、修改和终止多媒体服务会话(比如，基于互联网的视频会议、电话、语音邮件、事件通知和即时消息(短消息服务，SMS))的请求响应结构。
SIP协议可被用于TCP和UDP。SIP协议使用相似于电子邮件地址的SIPURI以区分每个用户，从而允许用户不根据IP地址来接收服务。作为一般示例，通过使用会话通知协议(SAP)，关于会话的信息被提供给感兴趣的一群人，并且通过SIP，可邀请期望与其通信的一方来参加会话。通过SDP，来交换关于期望使用的媒体类型的信息。另外，通过使用在SDP中描述的RTP，来提供实时多媒体服务。
在接收消息的情况下，在操作830中，存储接收的SIP/SDP消息的结合信息，或者如果包括允许稍后参考所述信息的URI，则存储URI。在URI的情况下，当稍后产生CallLeg时，使用URI可获得结合信息，并存储该结合信息。另外，在操作840中，当发送同意消息(200OK消息，即确认消息)时，接收方监视器的结合信息可有选择地一起发送。
图9是示出根据本发明示例性实施例的发送INVITE消息的顺序图。也就是说，图9是示出当试图建立初始呼叫连接时的示图。
当试图建立系统A到系统B的初始连接时，CallLegHdr和SDP MsgHDr通过使用SIP的INVITE方法将关于多个视频信号的当前可能的结合的信息，即PIP结合信息，添加到SDP主体。然后，SIP/SDP消息被传送到系统B。添加到SDP主体的源代码在图10中示出。
图10是示出根据本发明示例性实施例的当发送图9所示的INVITE消息时SDP消息的源代码的示图。参照图10，由虚线框指示的部分1010是指示关于在系统A中当前可能结合的PIP结合信息的部分。如图10中示出的示例，“AT”表示如上面参照图6所示的PC-Analog和TV的连接结合。另外，URI信息，“http://168.219.193.226”，是用于结合信息的可稍后由系统B参考的信息。
图11是根据本发明另一示例性实施例的当事件发生时发送SIPINFO消息的顺序图。也就是说，当输入信号的状态改变并且与此相关的事件发生时，使用消息仅发送与改变前的结合不同的结合信息。换句话说，添加发送方监视器的PIP结合信息的更新的源代码，并使用SIP INFO方法将其发送。在这种情况下，通过使用INFO方法，可有选择地发送控制消息。接收消息的监视器更新由该监视器保留的先前PIP结合信息或者执行与包括在结合信息中的控制消息相应的控制操作。然后，如图8所示的操作840所述，当发送同意消息(200OK)时，可一起发送接收方监视器的PIP结合信息。
事件发生并发送SIP INFO消息的情况的示例是这样的一种情况：当改变通过VoIP编解码器的PIP屏幕的位置时，如下所述的源代码的内容将被添加到消息主体并通过SIP INFO方法被通知到另一端。
  <？xml version＝″1.0″encoding＝″utf-8″？>//XML格式内容类型
  <root>
     <ScreenStyle>
  <ScreenSizeX>1366</ScreenSizeX>    //屏幕X轴大小
  <ScreenSizeY>768</ScreenSizeY>     //屏幕Y轴大小
  <ScreenStartPositionX>0</ScreenStartPositionX>  //屏幕X轴开始位置
  <ScreenStartPositionY>385</ScreenStartPositionY>  //屏幕Y轴开始位置
  <ScreenEndPositionX>676</ScreenEndPositionX>      //屏幕X轴结束位置
  <ScreenEndPositionY>768</ScreenEndPositionY>      //屏幕Y轴结束位置
  <PIPStartPositionX>10</PIPStartPositionX>     //PIP X轴开始位置
  <PIPStartPositionY>395</PIPStartPositionY>    //PIP Y轴开始位置
  <PIPEndPositionX>140</PIPEndPositionX>        //PIP X轴结束位置
  <PIPEndPositionY>475</PIPEndPositionY>  //PIP Y轴结束位置
     </ScreenStyle>
  </root>
图12是示出根据本发明示例性实施例的在图11中示出的SIP INFO消息的源代码的示例的示图。通过使用INFO方法，可使用如图12所示的内容型可扩展标记语言(XML)格式来通知该结合信息。如图12所示的示例，主屏幕是“S-VIDEO”，而子屏幕(PIP)是“PC-Analog”，或者主屏幕是“S-VIDEO”，而子屏幕是“PC-Digital”。
图13是示出根据本发明示例性实施例的PIP控制模式的改变的流程图。参照图13，在PIP控制模式下，在操作1320中确定是否连接了与另一系统的VoIP会话。如果没有建立连接，则在操作1310中继续执行普通PIP本地操纵。如果连接了会话，则从那一刻起，在操作1330中以PIP控制模式执行对话。如果在操作1340中终止了会话连接，则在操作1350中将操作模式改变成普通PIP本地控制模式。
稍后将参照图15来解释操作1330。
图14是示出根据本发明示例性实施例的由经授权的人来控制图像显示设备的方法的流程图。参照图14，在连接了会话的状态下，在操作1410中首先确定打算控制另一方的PIP屏幕的一方是否有控制权限。如果该方没有控制权限，则在操作1440中显示出错消息，如果该方具有控制权限，则在操作1420中显示PIP结合信息。通过参考显示的关于可能的结合的PIP信息列表，用户发出PIP控制命令，并在操作1430中通过使用SIP INFO方法将该命令作为控制消息发送到另一端的监视器。
图15是示出根据本发明示例性实施例的当连接了会话时本地用户的PIP控制模式的流程图。所述本地用户时想要控制他的/她的外部输入源的PIP屏幕的人。首先，在操作1510中确认该用户是否具有PIP控制权限。如果所述本地用户没有所述权限，则在操作1520中，显示指示不能操纵PIP的出错消息。在这种情况下，连接到该会话的另一用户具有权限。同时，如果本地用户具有权限，则在操作1530中确定在监视器屏幕的布局上期望操纵的监视器本身的PIP屏幕(即外部输入源的PIP屏幕)是否叠盖了通过VoIP编解码器的PIP屏幕。如果所述PIP屏幕没有相互叠盖，则在操作1540中，将期望移动的PIP屏幕移动到期望的位置。如果PIP屏幕叠盖，则在操作1550中确定哪个PIP屏幕具有较高的优先级。如果监视器本身的PIP屏幕具有较高优先级，则在操作1560中，它被移动到期望的位置。如果监视器本身的PIP屏幕具有较低的优先级，则在操作1570中，显示指示所述PIP屏幕操纵失败的出错消息，或者将所述PIP屏幕的位置移动到预定数目的区域(比如，左上、左下、右上及右下区域)中的下一区域。这样，可避免监视器本身的PIP屏幕和通过VoIP编解码器的PIP屏幕的叠盖。
根据如上所述的根据本发明示例性实施例的基于多个视频信号显示图像的图像显示设备及其控制方法，通过VoIP的视频会议的主席可在会议期间远程控制另一方的PIP屏幕。这样，主席可在主持会议的同时向视频会议的参与方提供最佳屏幕。视频会议的其他参与方可观看包括主席适当调整的PIP屏幕(即最佳屏幕)的屏幕。另外，通过使用SIP消息，可避免单独建立用于控制的通信线的过程。此外，当处理SIP INVITE消息时，大多数PIP结合信息被交换，后来使用SIP INFO消息仅必要信息部分地被交换，从而节省了网络带宽。
根据本发明示例性实施例的控制基于多个视频信号显示图像的图像显示设备的方法可作为计算机可读代码在计算机可读记录介质上实现。所述计算机可读记录介质是可存储稍后能由计算机系统读出的数据的任何数据存储装置。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置和载波(比如通过互联网的数据传输)。计算机可读记录介质还可分布在与计算机系统连接的网络上以便于以分布式的方式来存储及执行计算机可读代码。
尽管已经参照本发明的示例性实施例对本发明进行了具体的显示和描述，但是本领域的技术人员应该理解，在不脱离由权利要求限定的本发明的精神和范围的情况下，可对本发明进行各种形式和细节上的改变。这些示例性实施例应该认为是意在描述而非限制。因此，本发明的范围不由本发明的详细描述限定而由权利要求限定，所述范围内的所有差异应该被认为是包括在本发明中。

Claims (30)

1.一种图像显示设备，包括：
处理器，接收至少一种视频信号并显示图像；
信号处理单元，从处理器接收结合信息，所述结合信息包括关于可由图像显示设备同时显示的多个视频信号的结合的信息；和
网络单元，布置在信号处理单元中，用于通过外部通信网络发送结合信息。
2.如权利要求1所述的设备，其中，可由所述设备同时显示的多个视频信号包括主视频信号和子视频信号。
3.如权利要求2所述的设备，其中，所述结合信息包括关于基于所述图像显示设备接收的输入视频信号的可能结合的信息。
4.如权利要求3所述的设备，其中，所述结合信息包括与所述图像显示设备接收的子视频信号有关的位置信息。
5.如权利要求2所述的设备，还包括：结合信息处理单元，布置在处理器和信号处理单元之间，用于处理结合信息，
其中，结合信息处理单元包括：
结合信息存储单元，存储结合信息；和
处理器控制单元，根据通过外部通信网络发送的控制信号来控制主视频信号和子视频信号。
6.如权利要求5所述的设备，其中，所述网络单元还包括：消息控制单元，将从结合信息存储单元接收的结合信息处理为消息，并通过外部通信网络发送结合信息。
7.如权利要求6所述的设备，其中，所述消息符合会话初始协议和会话描述协议。
8.一种图像显示设备，包括：
网络单元，通过外部通信网络从外部显示设备接收结合信息，所述结合信息包括关于可由外部图像显示设备同时显示的多个视频信号的结合的信息；
结合信息存储单元，存储结合信息；
处理器，基于存储的结合信息发送控制命令；和
处理器控制单元，根据所述控制命令来控制可由外部图像显示设备同时显示的多个视频信号。
9.如权利要求8所述的设备，其中，可由外部图像显示设备同时显示的多个视频信号包括主视频信号和子视频信号。
10.如权利要求9所述的设备，其中，所述结合信息包括关于基于所述外部图像显示设备接收的输入视频信号的可能结合的信息。
11.如权利要求10所述的设备，其中，所述结合信息包括与所述外部图像显示设备接收的子视频信号有关的位置信息。
12.如权利要求8所述的设备，其中，所述结合信息以消息的形式被所述外部图像显示设备接收，并且
所述网络单元还包括：消息控制单元，从所述消息中提取结合信息。
13.如权利要求12所述的设备，其中，所述消息符合会话初始协议和会话描述协议。
14.一种控制基于多个视频信号来显示图像的图像显示设备的方法，所述方法包括：
识别所述多个视频信号的输入状态；
通过使用来自输入视频信号的信息，存储关于可由所述图像显示设备同时显示的多个视频信号的结合的结合信息；和
通过外部通信网络发送结合信息。
15.如权利要求14所述的方法，其中，所述识别所述多个视频信号的输入状态的步骤包括下述步骤之一：识别所述多个视频信号的输入的初始状态，和识别预置输入状态的改变。
16.如权利要求15所述的方法，其中，如果识别出预置输入状态的改变，则通过外部通信网络发送结合信息的步骤包括：发送关于下述结合的结合信息，所述结合与识别出的改变之前的先前结合不同。
17.如权利要求14所述的方法，其中，可由图像显示设备同时显示的多个视频信号包括主视频信号和子视频信号。
18.如权利要求17所述的方法，其中，所述结合信息包括关于基于由所述图像显示设备接收的输入视频信号的可能结合的信息。
19.如权利要求18所述的方法，其中，所述结合信息包括与所述设备接收的子视频信号有关的位置信息。
20.如权利要求14所述的方法，其中，所述通过外部通信网络发送结合信息的步骤包括：以符合会话初始协议和会话描述协议的消息的形式来发送结合信息。
21.如权利要求20所述的方法，其中，所述通过外部通信网络发送结合信息的步骤还包括下面所述的步骤之一：将结合信息添加到所述消息，和将允许稍后参考结合信息的统一资源标识符添加到所述消息。
22.一种控制图像显示设备的方法，所述方法包括：
通过外部通信网络从外部图像显示设备接收结合信息，所述结合信息包括关于可由基于多个视频信号显示图像的外部图像显示设备同时显示的多个视频信号的结合的信息；
存储结合信息；和
基于存储的结合信息控制可由外部图像显示设备同时显示的多个视频信号。
23.如权利要求22所述的方法，其中，可由外部图像显示设备同时显示的多个视频信号包括主视频信号和子视频信号。
24.如权利要求23所述的方法，其中，所述结合信息包括关于基于由外部图像显示设备接收的输入视频信号的可能结合的信息。
25.如权利要求24所述的方法，其中，所述结合信息包括与外部图像显示设备接收的子视频信号有关的位置信息。
26.如权利要求22所述的方法，其中，所述接收结合信息的步骤包括：以符合会话初始协议和会话描述协议的消息的形式接收所述结合消息。
27.如权利要求26所述的方法，其中，存储接收的结合信息的步骤还包括下述步骤之一：存储添加到消息主体的结合信息，和获得并存储允许参考接收的结合信息的统一资源标识符。
28.如权利要求22所述的方法，其中，控制可由外部图像显示设备同时显示的多个视频信号的步骤还包括：确认控制的有效权限。
29.如权利要求28所述的方法，其中，控制可同时显示的多个视频信号的步骤包括：通过使用结合信息，调整主视频信号和子视频信号的显示位置以及主视频信号和子视频信号的透明度之一。
30.一种实现有用于执行权利要求14所述的方法的计算机程序的计算机可读记录介质。
CNA2007100065650A 2006-08-10 2007-02-05 图像显示设备及其控制方法 Pending CN101123702A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060075869 2006-08-10
KR1020060075869A KR20080014329A (ko) 2006-08-10 2006-08-10 영상표시장치 및 그 제어방법과 프로그램이 기록된 기록매체

Publications (1)

Publication Number Publication Date
CN101123702A true CN101123702A (zh) 2008-02-13

Family

ID=38658072

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2007100065650A Pending CN101123702A (zh) 2006-08-10 2007-02-05 图像显示设备及其控制方法

Country Status (4)

Country Link
US (1) US20080036849A1 (zh)
EP (1) EP1887755A1 (zh)
KR (1) KR20080014329A (zh)
CN (1) CN101123702A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101867766A (zh) * 2010-05-05 2010-10-20 中兴通讯股份有限公司 一种会议电视终端辅视频源切换的方法及装置
CN102484697A (zh) * 2009-04-28 2012-05-30 夏普株式会社 显示设备、显示方法和用于执行该显示方法的程序
WO2012089018A1 (zh) * 2010-12-28 2012-07-05 华为技术有限公司 远程呈现会议业务处理方法及设备
CN102819284A (zh) * 2011-06-08 2012-12-12 天津三星电子有限公司 一种主板共用的显示器系统
CN103338340A (zh) * 2013-06-18 2013-10-02 北京汉博信息技术有限公司 实现多视频流帧画面自定义组合的画中画模块和方法
WO2014005488A1 (zh) * 2012-07-03 2014-01-09 中国移动通信集团公司 视频数据流的发送方法、终端及系统
CN104221366A (zh) * 2012-02-01 2014-12-17 玛格通讯有限公司 提供虚拟物理上下文的视频会议系统
CN110290269A (zh) * 2019-06-26 2019-09-27 努比亚技术有限公司 显示控制方法、移动终端及计算机可读存储介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7830459B2 (en) * 2006-02-03 2010-11-09 At&T Knowledge Ventures, L.P. System and method for parallel channel scanning
US8739214B2 (en) * 2007-11-08 2014-05-27 At&T Intellectual Property I, L.P. Methods, computer program products, and virtual servers for a virtual collaborative environment
KR101487434B1 (ko) * 2007-11-14 2015-01-29 삼성전자 주식회사 디스플레이장치 및 그 제어방법
JP5375338B2 (ja) * 2009-05-29 2013-12-25 セイコーエプソン株式会社 画像表示システム、画像表示装置、画像表示方法、画像供給装置、およびプログラム
US8631436B2 (en) * 2009-11-25 2014-01-14 Nokia Corporation Method and apparatus for presenting media segments
JP4772908B2 (ja) * 2010-01-29 2011-09-14 株式会社東芝 通信装置
US8917632B2 (en) * 2010-04-07 2014-12-23 Apple Inc. Different rate controller configurations for different cameras of a mobile device
CN102098443B (zh) * 2010-12-28 2013-06-05 华为终端有限公司 一种摄像设备、通信系统和相应的图像处理方法
CN102221959A (zh) * 2011-03-30 2011-10-19 合一网络技术(北京)有限公司 一种用于嵌入式媒体播放器多画面显示和控制的方法和系统及应用
US9462323B1 (en) * 2015-08-28 2016-10-04 Streamray Inc. Method and system for display of mixed media content on devices without standard video

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001157135A (ja) * 1999-11-29 2001-06-08 Toshiba Corp 外部入力連動映像切替えテレビ受信機
JP4612779B2 (ja) * 2001-06-14 2011-01-12 キヤノン株式会社 通信装置及び通信装置の映像表示制御方法
US20030023672A1 (en) * 2001-07-27 2003-01-30 Arthur Vaysman Voice over IP conferencing server system with resource selection based on quality of service
US20030058806A1 (en) * 2001-09-24 2003-03-27 Teleware, Inc. Multi-media communication system with advanced conference call management
US20030103075A1 (en) * 2001-12-03 2003-06-05 Rosselot Robert Charles System and method for control of conference facilities and equipment
KR20040044208A (ko) * 2002-11-19 2004-05-28 엘지전자 주식회사 디지털 텔레비젼 시스템에서 디지털 데이터 방송 표시 방법
KR100499034B1 (ko) * 2002-12-30 2005-07-01 엘지전자 주식회사 텔레비전의 입력화면 선택방법 및 장치
US20040150748A1 (en) * 2003-01-31 2004-08-05 Qwest Communications International Inc. Systems and methods for providing and displaying picture-in-picture signals
FR2852473A1 (fr) * 2003-03-13 2004-09-17 France Telecom Procede et systeme de controle d'une chaine video distante
US8081205B2 (en) * 2003-10-08 2011-12-20 Cisco Technology, Inc. Dynamically switched and static multiple video streams for a multimedia conference
EP1585327A1 (de) 2004-10-02 2005-10-12 Siemens Schweiz AG Verfahren zur Datenreduktion bei Videoübertragung eines Hauptbildes
US7492386B2 (en) * 2004-11-05 2009-02-17 Sony Ericsson Mobile Communications Ab Display management during a multi-party conversation
KR20060071113A (ko) * 2004-12-21 2006-06-26 주식회사 대우일렉트로닉스 텔레비전의 화면분할 녹화회로

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102484697A (zh) * 2009-04-28 2012-05-30 夏普株式会社 显示设备、显示方法和用于执行该显示方法的程序
CN102484697B (zh) * 2009-04-28 2015-07-08 夏普株式会社 显示设备和显示方法
CN101867766A (zh) * 2010-05-05 2010-10-20 中兴通讯股份有限公司 一种会议电视终端辅视频源切换的方法及装置
WO2012089018A1 (zh) * 2010-12-28 2012-07-05 华为技术有限公司 远程呈现会议业务处理方法及设备
CN102819284A (zh) * 2011-06-08 2012-12-12 天津三星电子有限公司 一种主板共用的显示器系统
CN102819284B (zh) * 2011-06-08 2015-06-03 天津三星电子有限公司 一种主板共用的显示器系统
CN104221366A (zh) * 2012-02-01 2014-12-17 玛格通讯有限公司 提供虚拟物理上下文的视频会议系统
WO2014005488A1 (zh) * 2012-07-03 2014-01-09 中国移动通信集团公司 视频数据流的发送方法、终端及系统
CN103533294A (zh) * 2012-07-03 2014-01-22 中国移动通信集团公司 视频数据流的发送方法、终端及系统
CN103338340A (zh) * 2013-06-18 2013-10-02 北京汉博信息技术有限公司 实现多视频流帧画面自定义组合的画中画模块和方法
CN103338340B (zh) * 2013-06-18 2016-06-22 北京汉博信息技术有限公司 实现多视频流帧画面自定义组合的画中画模块和方法
CN110290269A (zh) * 2019-06-26 2019-09-27 努比亚技术有限公司 显示控制方法、移动终端及计算机可读存储介质

Also Published As

Publication number Publication date
EP1887755A1 (en) 2008-02-13
US20080036849A1 (en) 2008-02-14
KR20080014329A (ko) 2008-02-14

Similar Documents

Publication Publication Date Title
CN101123702A (zh) 图像显示设备及其控制方法
US8300082B2 (en) Apparatus and method for video conferencing
US9025000B2 (en) System and method for initiating a video conferencing through a streaming device
EP1491044B1 (en) Telecommunications system
US20110131498A1 (en) Presentation method and presentation system using identification label
CN102859480B (zh) 屏幕共享
US7715872B2 (en) Video calling method capable of providing video through third display
US8081205B2 (en) Dynamically switched and static multiple video streams for a multimedia conference
EP2879379B1 (en) Methods, devices and system for media negotiation in a multi-stream meeting
US20060001737A1 (en) Video conference arrangement
US20070294263A1 (en) Associating independent multimedia sources into a conference call
US8643695B2 (en) Videoconferencing endpoint extension
US20150077509A1 (en) System for a Virtual Multipoint Control Unit for Unified Communications
WO2012009904A1 (zh) 移动终端远程控制方法及移动终端
WO2014101428A1 (zh) 画面控制的方法及终端、视频会议装置
US20140028778A1 (en) Systems and methods for ad-hoc integration of tablets and phones in video communication systems
US20130100348A1 (en) Method, terminal and system for caption transmission in telepresence
CN105763832A (zh) 一种视频互动、控制方法及装置
US8786631B1 (en) System and method for transferring transparency information in a video environment
US8593500B2 (en) Video conference device and method for using the same
CN102438119B (zh) 一种数字电视的音视频通讯系统
JP4939095B2 (ja) コンテンツ提供システムおよびコンテンツ切替方法
US8957939B1 (en) Method and apparatus for a videophone
WO2023185648A1 (zh) 一种通信方法、装置及系统
CN107786832A (zh) 视频播放控制的方法和终端及提供视频的方法和服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication