CN105264901A - 信号处理装置、信号处理方法、计算机程序以及图像传输系统 - Google Patents

信号处理装置、信号处理方法、计算机程序以及图像传输系统 Download PDF

Info

Publication number
CN105264901A
CN105264901A CN201480031060.8A CN201480031060A CN105264901A CN 105264901 A CN105264901 A CN 105264901A CN 201480031060 A CN201480031060 A CN 201480031060A CN 105264901 A CN105264901 A CN 105264901A
Authority
CN
China
Prior art keywords
image
video
stream processor
control information
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480031060.8A
Other languages
English (en)
Other versions
CN105264901B (zh
Inventor
小笠原好一
今西将之
丸山厚志
友永诚史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105264901A publication Critical patent/CN105264901A/zh
Application granted granted Critical
Publication of CN105264901B publication Critical patent/CN105264901B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64—Addressing
    • H04N21/6405—Multicasting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723—Monitoring of network processes or resources, e.g. monitoring of network load
    • H04N21/64738—Monitoring network characteristics, e.g. bandwidth, congestion level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746—Control signals issued by the network directed to the server or the client
    • H04N21/64753—Control signals issued by the network directed to the server or the client directed to the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746—Control signals issued by the network directed to the server or the client
    • H04N21/64761—Control signals issued by the network directed to the server or the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种信号处理装置，所述信号处理装置包括：控制信息获取单元，所述控制信息获取单元配置为获取关于图像的控制的图像控制信息；图像接收器，所述图像接收器配置为基于所述图像控制信息选择性地接收使用多播传输的一个或者多个图像；一个或者多个图像处理单元，所述一个或者多个图像处理单元配置为基于所述图像控制信息对由所述图像接收器接收的图像执行图像处理；以及图像发送器，所述图像发送器配置为基于所述图像控制信息传输经过由所述图像处理单元执行的所述图像处理的图像，所述图像使用多播传输。

Description

信号处理装置、信号处理方法、计算机程序以及图像传输系统
相关申请的交叉引用
本公开包含与2013年6月7日向日本专利局提交的日本优先权专利申请JP2013-120597所公开的主题有关的主题，该申请的全部内容以引用的方式并入本文。
技术领域
本公开涉及一种信号处理装置、信号处理方法、计算机程序以及图像传输系统。
背景技术
存在用于合成来自输出图像的多个图像输出装置(诸如，摄像机或者录音机)的图像并且显示合成后的图像的系统。近年来，还存在用于将多个图像显示装置共同连接为一个显示屏以实现将这种合成后的图像显示在大显示屏上的系统(见专利文件1)。
引用列表
[专利文件]
[PTL1]
WO08/056421
发明内容
[技术问题]
在现有技术中，将用于执行图像处理的一个处理器与一个图像显示装置一对一地相关联。为此，由于处理器的硬件制约，系统的灵活性较低，由此不易于灵活地处理其布局。另外，在用于执行图像处理的处理器与图像显示装置一对一地相关联的情况下，如果在任何一个处理器中发生了故障或者要提供另一图像显示装置，那么必须停止整个系统。
因此，本公开的实施例提供了信号处理装置、信号处理方法、计算机程序以及图像传输系统，其提高了合成并且显示多个图像的系统的可用性和可扩展性。
[问题的解决方案]
根据本公开的实施例，提供了一种信号处理装置，该信号处理装置包括控制信息获取单元，该控制信息获取单元配置为获取关于图像的控制的图像控制信息；图像接收器，该图像接收器配置为基于图像控制信息选择性地接收使用多播传输的一个或者多个图像；一个或者多个图像处理单元，该一个或者多个图像处理单元配置为基于图像控制信息对由图像接收器接收的图像执行图像处理；以及图像发送器，该图像发送器配置为基于图像控制信息传输经过由图像处理单元执行的图像处理的图像，该图像使用多播传输。
根据本公开的实施例，提供了一种信号处理方法，该信号处理方法包括获取关于图像的控制的图像控制信息；基于图像控制信息选择性地接收使用多播传输的一个或者多个图像；基于图像控制信息在选择性地接收到的图像上执行图像处理；以及基于图像控制信息传输经过图像处理的图像，该图像使用多播传输。
根据本公开的实施例，提供了一种计算机程序，该计算机程序用于使得计算机执行：获取关于图像的控制的图像控制信息；基于图像控制信息选择性地接收使用多播传输的一个或者多个图像；基于图像控制信息在选择性地接收到的图像上执行图像处理；以及基于图像控制信息传输经过图像处理的图像，该图像使用多播传输。
根据本公开的实施例，提供了一种图像处理系统，该图像处理系统包括图像控制装置、一个或者多个图像输出装置、一个或者多个图像处理装置、一个或者多个图像接收装置以及一个或者多个图像显示装置。信号处理装置包括：控制信息获取单元，该控制信息获取单元配置为从图像控制装置获取关于图像的控制的图像控制信息；图像接收器，该图像接收器配置为基于图像控制信息从一个或者多个图像输出装置选择性地接收使用多播传输的一个或者多个图像；一个或者多个图像处理单元，该一个或者多个图像处理单元配置为基于图像控制信息在由图像接收器接收的图像上执行图像处理，该图像处理用于将图像显示在一个或者多个图像显示装置上；以及图像发送器，该图像发送器配置为基于图像控制信息传输经过由图像处理单元执行的图像处理的图像以使图像被一个或者多个图像接收装置接收，该图像使用多播传输。
[本发明的有益效果]
根据上述的本公开的一个或者多个实施例，可以提供一种新颖的并且改进的信号处理装置、信号处理方法、计算机程序以及图像传输系统，其能够提高合成并且显示多个图像的系统的可用性和可扩展性。
附图说明
图1是图示了根据本公开的实施例的图像传输系统的示例性总体配置的阐释图。
图2A是图示了根据本公开的实施例的图像传输系统1的一般处理的阐释图。
图2B是图示了根据本公开的实施例的图像传输系统1的一般处理的阐释图。
图3是图示了显示在布局控制器10的屏幕上的示例性用户界面的阐释图。
图4是图示了根据本公开的实施例的图像传输系统1的一般处理的阐释图。
图5是图示了根据本公开的实施例的显示处理器100的示例性功能配置的阐释图。
图6是图示了根据本公开的实施例的图像传输系统1的示例性操作的流程图。
图7是图示了根据本公开的实施例的图像传输系统1的示例性操作的流程图。
图8是图示了根据本公开的实施例的基于图像传输系统1的示例性操作显示在图像显示系统45上的图像的示例的阐释图。
图9是图示了根据本公开的实施例的基于图像传输系统1的示例性操作显示在图像显示系统45上的图像的示例的阐释图。
图10是图示了根据本公开的实施例的基于图像传输系统1的示例性操作传输的图像的示例的阐释图。
图11是图示了根据本公开的实施例的基于图像传输系统1的示例性操作传输的图像的示例的阐释图。
图12是图示了根据本公开的实施例的由显示处理器100传输或者接收的图像控制的示例的阐释图。
图13是图示了根据本公开的实施例的由显示处理器100传输或者接收的图像控制的示例的阐释图。
图14是图示了根据本公开的实施例的由显示处理器100传输或者接收的图像控制的示例的阐释图。
图15是图示了根据本公开的实施例的由显示处理器100传输或者接收的图像控制的示例的阐释图。
图16是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图17A是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图17B是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图18是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图19是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图20是图示了在根据本公开的实施例的图像传输系统1中的图像的传输示例的阐释图。
图21是图示了图像显示系统45的修改示例的阐释图。
图22是图示了根据本公开的实施例的布局控制器10的示例性功能配置的阐释图。
图23是图示了根据本公开的实施例的图像传输系统1的示例性配置的阐释图。
图24是图示了存储在表保存单元11中的表的示例的阐释图。
图25是图示了存储在表保存单元11中的表的示例的阐释图。
图26是图示了存储在表保存单元11中的表的示例的阐释图。
具体实施方式
在下文中，将参照附图详细描述本发明的优选实施例。注意，在本说明书和附图中，用相同的附图标记表示具有基本上相同功能和结构的结构元件，并且，省略对这些结构元件的重复阐释。
将按照以下顺序进行说明。
<1、本公开的实施例>
(系统的示例性总体配置)
(系统的一般处理)
(显示处理器的示例性功能配置)
(图像传输系统的示例性操作)
<2、发明内容>
<1、本公开的实施例>
(系统的示例性总体配置)
将描述根据本公开的实施例的图像传输系统的示例性总体配置。图1是图示了根据本公开的实施例的图像传输系统1的示例性总体配置的阐释图。下面将参照图1描述根据本公开的实施例的图像传输系统1的示例性总体配置。
如图1所示，根据本公开的实施例的图像传输系统1配置为包括布局控制器10、图像发送终端20a至20d、图像接收终端30a至30d、图像输出终端40a至40d、图像显示系统45以及图像处理器100a至100d。布局控制器10、图像发送终端20a至20d以及图像接收终端30a至30d经由IP(互联网协议)网络2彼此连接。
图像发送终端20a至20d(在下文中，有时简称为图像发送终端20)用于发送图像的终端，诸如，摄像机或者录音机。另外，图像发送终端20a至20d是用于使用IP多播分发来传输图像的终端。
图像接收终端30a至30d(在下文中，有时简称为图像接收终端30)用于接收使用IP多播分发从图像发送终端20a至20d传来的图像。图像接收终端30a至30d在接收到图像时将接收到的图像发送至相应的图像输出终端40a至40d。
图像输出终端40a至40d(在下文中，有时简称为图像输出终端40)分别接收来自图像接收终端30a至30d的图像，并且将该图像输出至视频显示系统45。视频显示系统45由多个图像显示装置50a至50d组成，并且，图像显示装置50a至50d中的每一个都显示从相应的图像发送终端20a至20d输出的对应图像。
布局控制器10确定将从图像发送终端20a至20d输出的图像显示在图像显示系统45上的方式。布局控制器10不仅掌控图像发送终端20a至20d、图像接收终端30a至30d以及显示处理器100a至100d的配置，还掌控由图像显示装置50a至50d组成的图像显示系统45的形状和大小。布局控制器10适当地指示哪一个图像发送终端20a至20d输出图像、哪一个显示处理器100a至100d处理图像、以及哪一个图像接收终端30a至30d接收处理后的图像。
显示处理器100a至100d(在下文中，有时简称为显示处理器100)对从图像发送终端20a至20d输出的图像执行图像处理。显示处理器100a至100d对基于布局控制器10的指示接收到的图像执行先前指定的图像处理。然后，显示处理器100a至100d基于来自布局控制器10的指示使用IP多播来分发经过图像处理的图像。
在图1中图示的图像传输系统1中，显示处理器100a至100d对使用IP多播从图像发送终端20a至20d分发来的图像执行图像处理，并且，使用IP多播重新分发处理后的图像。另外，在图1中图示的图像传输系统1是如下系统：图像接收终端30a至30d接收使用IP多播从显示处理器100a至100d分发来的图像，并且，将接收到的图像提供至图像输出终端40a至40d，然后，图像显示装置50显示该图像。
由此，在图1中图示的图像传输系统1中，图像发送终端20a至20d仅基于预定设置或者基于来自布局控制器10的指示使用IP多播向IP网络2分发图像，而不是向特定图像显示装置输出图像。另外，显示处理器100a至100d从由图像发送终端20a至20d传来的图像中接收特定图像，并且，对该特定图像执行图像处理。在显示处理器100a至100d执行图像处理之后，基于预定设置或者基于来自布局控制器10的指示使用IP多播将处理后的图像分发至IP网络2。图像处理终端30a至30d接收该特定图像，并且将其发送到图像输出终端40a至40d。
图1图示了四个发送终端20a至20d、四个图像接收终端30a至30d以及四个显示处理器100a至100d与IP网络2连接的配置，但是本发明不限于本示例。在本发明的实施例中，使用IP多播分发经由IP网络2来传输图像，从而可以提高合成并且显示多个图像的系统的可用性和可扩展性。
而且，在图1中，图像接收终端30a至30d图示为不同于图像输出终端40a至40d的终端，但是本发明并不限于本示例。接收使用IP多播分发的图像的终端可以与向图像显示系统45输出图像的终端集成在一起。
上面参照图1描述了根据本公开的实施例的图像传输系统1的示例性总体配置。将描述根据本公开的实施例的图像传输系统1的一般处理。
(系统的一般处理)
图2A和图2B是图示了根据本公开的实施例的图像传输系统1的一般处理的阐释图。图2A和图2B图示了在图像传输系统1具有如图1所示的配置的情况下在图像传输系统1中的图像的流程的示例。下面将参照图2A和图2B描述根据本公开的实施例的图像传输系统1的一般处理。
基于预定设置或者来自布局控制器10的指示使用IP多播将从图像发送终端20a至20d传来的图像分发给IP网络2。布局控制器10根据由布局控制器10确定的布局将控制信号发送到相应的对应显示处理器100a至100d。该控制信号通过IP网络2从布局控制器10传输到相应的对应显示处理器100a至100d。
从布局控制器10传来的控制信号可以包括有关图像发送终端的信息、有关图像位置的信息、时间信息(图像切换定时信息)以及有关图像接收终端的信息。
有关图像发送终端的信息可以包括连接目的地信息(多播地址和端口号)以及编解码器信息。有关图像位置的信息可以包括图像显示系统45的显示器形状和大小、关于显示在图像显示系统45上的图像的位置、大小、显示角度、叠加等的信息、以及关于将由图像显示系统45管理的显示器的数量的信息。关于图像接收终端的信息可以包括输出目的地信息(多播地址和端口号)和编解码器信息。
图3是图示了显示在布局控制器10的屏幕上的用户界面的示例的阐释图。在图3所示的用户界面v10上示出了从图像发送终端20a至20d传来的图像的列表以及显示在图像显示系统45上的每一个图像的图像位置。布局控制器10的用户可以通过图3所示的用户界面v10确定待显示的图像以及图像的显示位置。图3图示了将图像显示在图像显示系统45上的情况的示例，在该图像显示系统45中，在水平方向上的六个屏幕以及在竖直方向上的四个屏幕以矩阵形式排列。
显示处理器100a至100d从图像发送终端20a至20d选择性地接收使用IP多播分发传输的图像，并且，基于控制信号对接收到的图像执行预定图像处理。
当显示处理器100a至100d执行图像处理时，每个显示处理器基于来自布局控制器10的指示使用IP多播将经过图像处理的图像分发给IP网络2。图像接收终端30a至30d基于来自布局控制器10的指示从显示处理器100a至100d选择性地接收使用IP多播分发的图像。每个图像接收终端30a至30d将接收到的图像发送到图像输出终端40a至40d。每个图像输出终端40a至40d将从图像接收终端30a至30d传来的图像输出到图像显示系统45，该图像显示系统45由图像显示装置50a至50d组成。
根据本公开的实施例的图像传输系统1传输如图2A和图2B所示的图像，从而可以提高合成并且显示多个图像的系统的可用性和可扩展性。
图4是图示了根据本公开的实施例的图像传输系统1的一般处理的阐释图。图4图示了将来自五个显示处理器100a至100e的使用IP多播分发的图像显示在图像显示系统45上的情况的示例。
在根据本公开的实施例的图像传输系统1中，彼此独立设置的显示处理器100a至100e生成待显示在图像显示系统45中的显示区域的对应部分上的图像，并且，使用IP多播来分发生成的图像。
在图4所示的示例中，显示处理器100a生成待显示在图像显示系统45的显示区域中的区域A上的图像。图像显示处理器100b生成待显示在图像显示系统45的显示区域中的区域B上的图像。图像显示处理器100c生成待显示在图像显示系统45的显示区域中的区域C上的图像。图像显示处理器100d生成待显示在图像显示系统45的显示区域中的区域D上的图像。图像显示处理器100e生成待显示在图像显示系统45的显示区域中的区域E上的图像。因此，显示处理器100a至100e中的每一个包括用于分配给显示处理器的相应区域中的每一个区域的帧缓冲器。
根据本公开的实施例的显示处理器100a至100e配置为：当将多个图像合成并且显示在图像显示系统45上时，基于来自布局控制器10的指示，选择性地接收图像，对接收到的图像执行图像处理，并且使用IP多播来分发经过图像处理的图像。
上面描述了根据本公开的实施例的图像传输系统1的一般处理。将描述根据本公开的实施例的显示处理器100a至100d(在下文中，有时简称为显示处理器100)的示例性功能配置。
(显示处理器的示例性功能配置)
图5是图示了根据本公开的实施例的显示处理器100的示例性功能配置的阐释图。将参照图5描述根据本公开的实施例的显示处理器100的示例性功能配置。
如图5所示，显示处理器100配置为包括控制信号控制单元102、多播接收控制单元104、图像编辑管理单元106、多播传输控制单元108、图像接收器110、解码器112a至112d、图像编辑处理单元114a和114b、编码器116a和116b以及图像发送器118。
控制信号控制单元102获取从布局控制器10传来的控制信号。然后，控制信号控制单元102基于获取到的控制信号控制多播接收控制单元104、图像编辑管理单元106、多播传输控制单元108以及解码器112a至112d的操作。
多播接收控制单元104基于控制信号控制单元102的控制来控制图像接收器110从使用IP多播分发给IP网络2的图像中接收由控制信号指定的图像。
图像编辑管理单元106基于控制信号控制单元102的控制来管理图像编辑处理单元114a和114b。更具体地说，图像编辑管理单元106基于控制信号控制单元102的控制来指示图像编辑处理单元114a和114b对由控制信号指定的内容执行编辑处理。例如，图像编辑管理单元106指示图像编辑处理单元114a和114b对图像接收器接收到的图像执行编辑处理，诸如，分割、缩放以及定位。
多播传输控制单元108基于控制信号控制单元102的控制来控制图像发送器118通过使用IP多播将图像分发给IP网络2。
图像接收器110接收正在使用IP多播分发给IP网络2的图像(编码图像)。具体地，图像接收器110从正在使用IP多播分发给IP网络2的图像中选择性地接收由多播接收控制单元104指定的图像。尽管图5图示了图像接收器110能够同时接收四个或者更多个图像，但是本发明不限于本示例。图像接收器110能够同时接收的图像的数量可以取决于IP网络2的带宽、待接收到的图像的带宽以及在显示处理器100中提供的解码器的数量等。图像接收器110在接收由多播接收控制单元104指定的图像时向解码器112a至112d发送接收到的图像。
解码器112a至112d解码由图像接收器110接收到的编码图像。解码器112a至112d在解码编码图像时向图像编辑处理单元114a和114b输出解码后的图像。基于预定设置或者控制信号控制单元102的控制，解码器112a至112d确定其各自的图像输出目的地。
基于图像编辑管理单元106的指示，图像编辑处理单元114a和114b对从解码器112a至112d输出的图像执行图像编辑处理。由图像编辑处理单元114a和114b执行的图像编辑处理可以包括对从解码器112a至112d输出的图像执行的分割、缩放以及定位等。图像编辑处理单元114a和114b在对图像执行图像编辑处理时分别向编码器116a和116b输出编辑后的图像。图5图示了显示处理器100包括两个图像编辑处理单元114a和114b的配置。然而，图像编辑处理单元114a和114b的数量可以与能够从图像发送器118传来的图像的数量相同。
编码器116a和116b编码分别从图像编辑处理单元114a和114b输出的图像。基于预定设置或者控制信号控制单元102的控制，编码器116a和116b向图像发送器118输出编码后的图像。
基于多播传输控制单元108的控制，图像发送器118使用IP多播分发向IP网络2发送由编码器116a和116b编码的图像。尽管图5图示了使用IP多播分发发送两个或更多个图像的图像发送器118，但是本发明不限于本示例。
上面参照图5描述了根据本公开的实施例的显示处理器100的示例性功能配置。将描述根据本公开的实施例的图像传输系统1的示例性操作。
(图像传输系统的示例性操作)
图6是图示了根据本公开的实施例的图像传输系统1的示例性操作的流程图。图6所示的流程图图示了从布局控制器10确定待显示在图像显示系统45上的图像的布局的时间到将图像显示在图像显示系统45上的时间的流，作为顺序图。下面将参照图6描述根据本公开的实施例的图像传输系统6的示例性操作。
布局控制器10请求开始向图像发送终端20传输图像(步骤S101)。图像发送终端20使用多播将图像分发给由布局控制器10指定的或者先前指定的传输目的地(多播地址)(步骤S102)。
随后，当布局控制器10通过如图3所示的用户界面基于用户操作确定显示在图像显示系统45上的图像的布局时(步骤S103)，布局控制器10基于确定的布局向显示处理器100发送请求(步骤S104)。该请求的意图是显示处理器100从图像发送终端20选择性地接收使用多播分配的图像，对接收到的图像执行图像处理，并且重新发送处理后的图像。在步骤S104中的该请求是通过允许布局控制器10向显示处理器100发送控制信号来进行的。
当显示处理器100从布局控制器10接收到请求时，基于来自布局控制器10的请求从图像发送终端20接收指定从使用多播分发的图像中接收的图像(步骤S105)。如上所述，控制信号包括关于连接目的地(诸如，多播地址和端口号)的信息，作为图像发送终端的信息。基于关于连接目的地(诸如，多播地址和端口号)的信息，显示处理器100可以选择待从流过IP网络2的图像中接收到的图像。
显示处理器100在于步骤S105中接收到图像时对接收到的图像执行图像处理。由显示处理器100执行的图像处理可以包括上述的对图像执行的分割、缩放以及定位等。然后，当显示处理器100对接收到的图像执行图像处理时，使用多播将图像分发给由布局控制器10指定的或者先前指定的传输目的地(多播地址)(步骤S106)。
布局控制器10向图像接收终端30发送开始接收通过显示处理器100基于确定的布局使用多播分发给IP网络2的图像的请求(步骤S107)。
图像接收终端30基于来自布局控制器10的请求选择性地接收待从使用多播分发给IP网络2的图像中接收的图像(步骤S108)。图像接收终端30向图像输出终端40输出接收到的图像(步骤S109)。图像输出终端40向图像显示系统45的相应的对应图像显示装置输出从图像接收终端30输出的图像。
根据本公开的实施例的图像传输系统1执行上述操作，由此，基于由布局控制器10确定的图像的布局，可以通过图像发送终端20在图像显示系统45上显示使用IP多播分发给IP网络2的图像。
当将图像显示在显示系统45上时，布局控制器10可以改变显示在图像显示系统45上的图像的布局。随后，将描述在当将图像显示在显示系统45上时布局控制器10可以改变显示在图像显示系统45上的图像的布局的情况下，根据本公开的实施例的图像传输系统1的示例性操作。
图7是图示了根据本公开的实施例的图像传输系统1的示例性操作的流程图。图7所示的流程图图示了在当将图像显示在显示系统45上时布局控制器10可以改变显示在图像显示系统45上的图像的布局的情况下的流，作为顺序图。现在将参照图7描述根据本公开的实施例的图像传输系统1的示例性操作。
图像发送终端20使用多播将图像分发给由布局控制器10指定的或者先前指定的传输目的地(多播地址)(步骤S111)。在这种状态下，当布局控制器10通过如图3所示的用户界面基于用户操作改变显示在图像显示系统45上的图像的布局时(步骤S112)，布局控制器10基于确定的布局向显示处理器100发送请求(步骤S112)。该请求的意图是显示处理器100从图像发送终端20选择性地接收使用多播分发的图像，对接收到的图像执行图像处理，并且重新发送处理后的图像。在步骤S113中的该请求是通过允许布局控制器10向显示处理器100发送控制信号来进行的。
布局控制器10获取布局改变事件，并且，通过将帧设置为最小值来执行布局改变处理。
在显示处理器100从布局控制器10接收到请求时，显示处理器100基于来自布局控制器10的请求接收图像，该图像被指定为根据布局改变从使用多播从图像发送终端20分发的图像中接收。此外，基于来自布局控制器10的请求，显示处理器100终止接收根据布局改变而不必要的图像(步骤S114)。
当显示处理器100对接收到的图像执行图像处理时，使用多播将图像分发给由布局控制器10指定的或者先前指定的传输目的地(多播地址)(步骤S115)。
布局控制器10向图像接收终端30发送开始接收通过显示处理器100基于确定的布局使用多播分发给IP网络2的图像的请求(步骤S116)。
基于来自布局控制器10的请求，图像接收终端30选择性地接收待从使用多播分发给IP网络2的图像中接收的图像(步骤S117)。图像接收终端30向图像输出终端40输出接收到的图像(步骤S118)。图像输出终端40向图像显示系统45的相应的对应图像显示装置输出从图像接收终端30输出的图像。
根据本公开的实施例的图像传输系统1执行上述操作，由此，基于由布局控制器10改变的图像布局，可以在将图像显示在图像显示系统45上的情况下通过图像发送终端20将使用IP多播分发给IP网络2的图像显示在图像显示系统45上。
上面描述了根据本公开的实施例的图像传输系统1的示例性操作。基于上述根据本公开的实施例的图像传输系统1的示例性操作，将更详细地描述待显示在图像显示系统45上的图像。
图8是图示了基于根据本公开的实施例的图像传输系统1的示例性操作而显示在图像显示系统45上的图像的示例的阐释图。图8图示了将从三个图像发送终端20a至20c传来的图像显示在由十六个显示器组成的图像显示系统45上的情况，该十六个显示器排列为四行四列的矩阵。在图8中，将图像发送终端20a至20c分别图示为电视摄像机。另外，图8还图示了四个显示处理器100a至100d。
假设，在图像显示系统45的显示器中，预先将显示处理器100a分发给在左上角(在图8中的区域A)的四个显示器，预先将显示处理器100b分发给在右上角(在图8中的区域B)的四个显示器，预先将显示处理器100c分发给在左下角(在图8中的区域C)的四个显示器，并且，预先将显示处理器100d分发给在右下角(在图8中的区域D)的四个显示器。预先分配这些显示处理器以负责其相应的图像处理。因此，显示处理器100a至100d中的每一个配置为能够同时输出四个图像。
应当考虑将从图像发送终端20a、图像发送终端20b以及图像发送终端20c输出的图像分别显示在区域A、区域B以及区域C上的情况，并且，这是由布局控制器10确定的。显示处理器100a负责区域A中的图像处理，因此，布局控制器10指示显示处理器100a从图像发送终端20a接收使用IP多播分发的图像。相似地，显示处理器100b负责区域B中的图像处理，因此，布局控制器10指示显示处理器100b从图像发送终端20B接收使用IP多播分发的图像。另外，相似地，显示处理器100c负责区域C中的图像处理，因此，布局控制器10指示显示处理器100c从图像发送终端20c接收使用IP多播分发的图像。同时，在区域D上没有显示任何事物，由此，布局控制器10不会指示显示处理器100d接收图像
当显示处理器100a从图像发送终端20a接收到使用IP多播分发的图像时，对接收到的图像执行图像处理，诸如分割或者放大，以便将接收到的图像显示在图像显示系统45的区域A中的四个显示器上。相似地，显示处理器100b和100c分别从图像发送终端20b和20c接收使用IP多播分发的图像，并且，对接收到的图像执行图像处理，诸如分割或者放大。另外，显示处理器100a至100c在每一个垂直扫描周期V内以像素为单元更新图像的位置。
显示处理器100a至100c通过关于图像发送终端的信息向指定的多播地址发送多播IGMP(因特网组管理协议)加入消息，该关于图像发送终端的信息包括在从布局控制器10接收的控制信号中，并且开始接收图像。待接收到的图像变成显示在由相应显示处理器100a至100c管理的每个区域上的图像的源。
随后，显示处理器100a至100c通过包括在从布局控制器10接收的控制信号中的图像位置信息获取如何在每个显示处理器负责显示图像的区域中排列图像。在图8所示的示例中，显示处理器100a至100c确定使用所有接收到的图像，而不是分割这些图像中的一些，这是因为所有图像都包括在显示处理器100a至100c负责显示图像的区域中。
在图8所示的示例中，显示处理器100a至100c中的每一个负责四个显示器。换句话说，显示处理器100a至100c中的每一个负责处理在四个图像接收终端30和四个图像输出终端40中的显示图像。由此，显示处理器100a至100c中的每一个根据从图像位置信息获取的参数来计算如何在四个显示器上排列接收到的图像，生成待传输到相应的图像输出终端40的图像，并且，向指定多播地址重新发送生成的图像。图像接收终端30对发往由布局控制器10指定的或者先前设置的多播地址的图像执行接收处理，并且，向图像输出终端40提供接收到的图像以供显示。
这样，从显示处理器100a至100c中的每一个输出的图像基于布局控制器10的指示而被图像接收终端30接收，并且被显示在图像显示系统45上。图像显示系统45可以通过简单地允许相应的显示器输出图像来根据由布局控制器10指定的布局显示图像。
图9是图示了基于根据本公开的实施例的图像传输系统1的示例性操作而显示在图像显示系统45上的图像的另一示例的阐释图。图9图示了将从一个图像发送终端20a传来的图像显示在由十六个显示器组成的图像显示系统45上的情况，该十六个显示器排列为四行四列的矩阵。图9将图像发送终端20a图示为电视摄像机。另外，图9还图示了四个显示处理器100a至100d。假设，显示处理器100a至100d负责图像处理的显示器与图8所示的显示器相同。
应当考虑布局控制器10确定允许从图像发送终端20输出的图像显示在区域A至D的情况。布局控制器10指示所有显示处理器100a至100d从图像发送终端20接收使用IP多播分发的图像。
当显示处理器100a基于布局控制器10的指示从图像发送终端20a接收到使用IP多播分发的图像时，对待显示在图像显示系统45中的区域A的四个显示器中的每一个上的接收到的图像执行图像处理，诸如分割或者放大。相似地，显示处理器100b，100c和100d中的每一个从图像发送终端20a接收使用IP多播分发的图像，并且对接收到的图像执行图像处理，诸如分割或者放大。
图9所示的示例是图像不仅显示在多个区域而且还显示在显示处理器100a至100d负责的区域的情况。按照与图8所示的示例相似的方式，显示处理器100a至100d通过关于图像发送终端的信息向指定多播地址发送多播IGMP加入消息，该关于图像发送终端的信息包括在从布局控制器10接收的控制信号中，并且开始接收图像，。
随后，显示处理器100a至100d中的每一个通过包括在从布局控制器10接收到的控制信号中的图像位置信息获取如何在每个显示处理器100a至100d负责显示的区域中排列图像。在图9所示的示例中，显示处理器100a至100d确定对接收到的图像中的一些执行分割处理，这是因为图像中的一些被放大并且用于显示处理器100a至100d负责显示的区域中。
例如，显示处理器100a至100d在对图像执行分割处理时可以执行两种过程。这两种过程中的一种是显示处理器100a至100d自己通过掌控显示处理器100a至100d负责图像显示系统45的整个显示的位置来执行该处理。例如，当图像显示系统45中的整个显示的坐标范围从(0，0)到(x，y)时，显示处理器100a至100d有必要提前掌控在坐标范围中由显示处理器100a至100d中的每一个负责的范围。当采用此方法时，显示处理器100a至100d从图像位置信息获取图像显示系统45的整个显示器的形状和大小，并且计算与图像显示系统45的整个显示器的坐标相对应的显示图像的位置。然后，显示处理器100a至100d识别显示处理器100a至100d负责显示的区域，并且执行分割处理，必要时，对显示在显示处理器100a至100d负责显示的区域中的图像执行分割处理。
另一种方法是布局控制器10执行对相应显示处理器100a至100d负责将图像显示在图像显示系统45的整个显示器上的区域的计算。例如，当图像显示系统45中的整个显示器的坐标范围从(0，0)到(x，y)时，显示处理器100a至100d有必要提前掌控在坐标范围中由显示处理器100a至100d中的每一个负责的范围。当采用此方法时，布局处理器10使图像位置信息包含关于图像显示区域连同显示位置的信息。显示处理器100a至100d基于从布局控制器10传来的关于图像显示区域的信息而执行图像分割处理。
同样在图9所示的示例中，显示处理器100a至100d中的每一个负责四个显示器。换句话说，显示处理器100a至100d中的每一个负责处理显示在四个图像接收终端30和四个图像输出终端40中的图像。因此，显示处理器100a至100d中的每一个根据从图像位置信息获取的参数计算如何在四个显示器中的每一个中排列接收到的图像，生成待传输到相应图像输出终端40的图像，并且，向指定多播地址重新发送生成的图像。图像接收终端30对发往由布局控制器10指定的或者先前设置的多播地址的图像执行接收处理，并且，向图像输出终端40提供接收到的图像以供显示。
如上所述，显示处理器100a至100d使用IP多播来分发经过图像处理的图像。基于布局控制器10的指示，从显示处理器100a至100d输出的图像被图像接收终端30接收，并且被显示在图像显示系统45上。图像显示系统45可以通过简单地允许相应的显示器输出图像来根据由布局控制器10指定的布局显示图像。
在上述两个示例中，描述了显示处理器100仅从一个图像发送终端20接收图像并且对接收到的图像执行图像处理的示例，但是本发明不限于本示例。显示处理器100可以从图像发送终端20同时接收图像，并且可以图像为单位执行图像处理。另外，显示处理器100可以对接收到的图像执行叠加处理(根据先前指定或者设置的叠加顺序执行图像叠加处理)。此外，显示处理器100可以对接收到的图像执行旋转处理。
这样，根据本公开的实施例的图像传输系统1允许将从图像发送终端20输出的图像根据由布局控制器10指定的布局显示在图像显示系统45上。然而，当显示处理器100输出图像时，如果图像的输出定时存在间隔，那么难以将图像正确显示在图像显示系统45上。由此，显示处理器100与另一个显示处理器100同步输出图像。
图10和图11是图示了基于根据本公开的实施例的图像传输系统1的示例性操作而传输的图像的示例的阐释图。图10和图11图示了三个图像发送终端20a至20c以及四个显示处理器100a至100d。在图10和图11所示的示例中，指示由显示处理器100a至100d接收从图像发送终端20a输出的图像，指示由显示处理器100c到100d接收从图像发送终端20b输出的图像，并且，指示由显示处理器100d接收从图像发送终端20c输出的图像。另外，显示处理器100a至100d中的每一个配置为能够以与图8和图9所示的示例相似的方式同时输出四个图像。
当执行如图10所示的图像传输和图像接收时，显示处理器100a至100d中的每一个与其他显示处理器100a至100d同步输出图像。
显示处理器100a至100d中的每一个接收从图像发送终端20a至20c输出的图像，但是可以根据IP网络2的情况不断改变其接收定时。图11图示了由相应的显示处理器100a至100d接收的图像的接收定时的示例。
显示处理器100a至100d输出与同步锁相(作为参照的同步信号)同步的图像。显示处理器100a至100d可以通过输出与同步锁相同步的图像来使图像输出定时与其他显示处理器100a至100d同步。
随后，将描述对从图像发送终端20传来的图像的传输和接收的控制。显示处理器100基于来自布局控制器10的控制信号执行该控制。
图12至图15是图示了由根据本公开的实施例的显示处理器100控制的图像发送或者图像接收的示例的阐释图。
图12图示了在显示处理器100接收到五个图像A、B、C、D和E的状态下图像C、D和E超出了由相应的对应显示处理器负责的相应区域的情况。当图像C、D和E超出了由相应的对应显示处理器负责的相应区域时，显示处理器100继续接收图像C、D和E，只要IP网络2的带宽允许，而不是立即停止接收图像C、D和E。在图12至图15所示的示例中，假设保留了五个图像的带宽。由此，显示处理器100可以继续接收五个图像A、B、C、D和E。
甚至当图像C、D和E超出由相应的对应显示处理器负责的相应区域时，显示处理器100继续接收图像C、D和，E只要IP网络2的带宽允许。这是因为当图像C、D和E再次包括在由各个对应的显示处理器负责的其各自的区域中时，旨在将这些图像立即显示在图像显示系统45上。
图13图示了旨在基于布局控制器10的指示接收图像F的情况。如果在IP网络2中存在可用带宽，那么显示处理器100可以配置为基于布局控制器10的指示接收图像F。然而，在如图12所示的已经接收到五个图像A、B、C、D和E的情况下，即使旨在基于来自布局控制器10的指示接收图像F，显示处理器100也难以立即开始接收图像F。由此，显示处理器100根据预定规则停止接收图像以为接收图像F保留带宽。作为预定规则的示例，在本示例中，描述了一种通过从尚未显示最长时间的图像起按照时间降序停止接收图像来保留用于接收新图像的带宽的方法。
例如，如果图像C是尚未显示最长时间的图像，那么显示处理器100发送IGMP离开(Leave)消息以停止接收图像C，如图13所示。例如，IGMP离开消息可以基于多播接收控制单元104的控制而由图像接收器110传输。
然后，显示处理器100使用通过停止接收图像C而保留的带宽开始接收图像。图14图示了显示处理器100发送IGMP加入消息以接收图像F的情况。例如，IGMP加入(Join)消息可以基于多播接收控制单元104的控制而由图像接收器110传输。图15图示了显示处理器100基于IGMP加入消息正在接收图像F的状态。
显示处理器100控制如图12至图15所示的图像传输和图像接收，由此可以在已经显示过一次的图像在短时间内返回区域时进行切换操作。另外，通过设置每个图像的优先级或者通过提供流量控制以便将一些图像维持在受保护情况下并且不停止接收图像，显示处理器100可以低时延控制开始显示或者停止显示特定图像(例如，旨在低时延显示的重要图像)。
在根据本公开的实施例的图像传输系统1中，使用IP多播来分发从显示处理器100传来的图像，由此可以使多个图像接收终端30同时接收图像。因此，根据本公开的实施例的图像传输系统1可以允许根据由布局控制器10确定的布局以相同的方式将图像显示在多个图像显示系统45上。
图16是图示了在根据本公开的实施例的图像传输系统1中传输图像的示例的阐释图。图16图示了在将从显示处理器100a至100d传来的图像显示在图像显示系统45a和图像显示系统45b上时在图像传输系统1中发送图像的示例。在图16中，图示了用于在图像显示系统45a上显示图像的图像接收终端30a至30d和图像输出终端40a至40d。在图16中，还图示了用于在图像显示系统45b上显示图像的图像接收终端30e至30h和图像输出终端40e至40h。另外，在图16中，图示了组成图像显示系统45a的图像显示装置50a至50d以及组成图像显示系统45b的图像显示装置50e至50h。
布局控制器10(未在图16中示出)指示图像接收终端30a和30e接收从显示处理器100a传来的图像。相似地，布局控制器10指示图像接收终端30b和30f接收从显示处理器100b传来的图像。相似地，布局控制器10指示图像接收终端30c和30g接收从显示处理器100c传来的图像。此外，相似地，布局控制器10指示图像接收终端30d和30h接收从显示处理器100d传来的图像。
布局控制器10指示图像接收终端30a至30h接收如上所述的相应图像，由此可以根据由布局控制器10确定的布局以相同的方式将图像显示在多个图像显示系统45a和45b上。
图16图示了将相同的图像显示在多个图像显示系统45a和45b上的示例，但是图像传输系统1可以允许根据由布局控制器10确定的布局将一些图像显示在另一个图像显示系统上。
图17A和图17B是图示了在根据本公开的实施例的图像传输系统1中传输图像的示例的阐释图。图17A和图17B图示了在将从显示处理器100a至100d传来的图像显示在图像显示系统45c、45d和45e上时在图像传输系统1中传输图像的示例。图17A图示了用于将图像显示在图像显示系统45c上的图像接收终端30a至30h和图像输出终端40a至40h。另外，图17B图示了用于将图像显示在图像显示系统45d上的图像接收终端30i至30l和图像输出终端40i至401，以及用于将图像显示在图像显示系统45e上的图像接收终端30m至30p和图像输出终端40m至40p。
在图17A和图17B所示的示例中，图像显示系统45d和45e中的每一个在竖直方向上具有与图像显示系统45c相同数量的显示器，但是在水平方向上具有是图像显示系统45c的显示器一半的显示器。另外，为了方便起见，在图17A和图17B的两个单独的表中图示了在根据本公开的实施例的图像传输系统1中传输图像的示例，但是在图17A中图示的图像传输与在图17B中图示的图像传输同时执行。
在图17A和图17B中图示的显示处理器100a至100d分别配置为可以使用IP多播分发来同时发送两个图像。
布局控制器10(未在图17A和图17B中示出)指示图像接收终端30a和30b分别接收从显示处理器100a传来的图像。相似地，布局控制器10指示图像接收终端30c和30d分别接收从显示处理器100b传来的图像。相似地，布局控制器10指示图像接收终端30e和30f分别接收从显示处理器100c传来的图像。此外，相似地，布局控制器10指示图像接收终端30g和30h分别接收从显示处理器100d传来的图像。
而且，布局控制器10指示图像接收终端30i和30j分别接收从显示处理器100a传来的图像。相似地，布局控制器10指示图像接收终端30k和30l分别接收从显示处理器100b传来的图像。相似地，布局控制器10指示图像接收终端30m和30n分别接收从显示处理器100c传来的图像。此外，相似地，布局控制器10指示图像接收终端30o和30p分别接收从显示处理器100d传来的图像。
这样，布局控制器10指示图像接收终端30a至30p分别接收图像，由此可以根据由布局控制器10确定的布局将图像显示在多个图像显示系统45c上，并且可以允许将显示在图像显示系统45c上的一部分图像显示在图像显示系统45d和45e上。
根据本公开的实施例的图像传输系统1传输如图17A和图17B所示的传输图像，由此可以根据图像显示系统的形式将图像显示在相应的图像显示系统45c、45d和45e上。例如，根据本公开的实施例的图像传输系统1可以允许将显示在图像显示系统45c上的图像的仅右半部分图像显示都在图像显示系统45d和45e上。另外，例如，根据本公开的实施例的图像传输系统1可以允许将显示在图像显示系统45c上的图像的仅右半部分图像和仅左半部分图像分别显示在图像显示系统45d和图像显示系统45e上。
组成根据本公开的实施例的图像传输系统1的图像发送终端20、显示处理器100以及图像接收终端30都与IP网络2连接。由此，只要将显示处理器100与IP网络2连接，就可以使用任何终端，而无需考虑物理环境，诸如安装位置或者显示处理器100到图像发送终端20和/或图像接收终端30的距离。因此，在根据本公开的实施例的图像传输系统1中，当特定显示处理器100由于故障等原因而不能正常工作时，可以容易地将现有路由切换到经由任何其他显示处理器输出图像的路由，无需改变布线连接。
例如，根据本公开的实施例的图像传输系统1可以提前将旁通路由(备份路由)保存为系统，由此可以通过在特定显示处理器100发生故障时将现有路由自动切换到预定旁通路由而继续操作。一种选择旁通路由的方法可以包括如下方法，例如，允许布局控制器10管理显示处理器100的状态，然后在布局控制器10检测到显示处理器100发生故障时，向待切换和操作的显示处理器100发送相当于由故障显示处理器100保存的控制信号的控制信号。切换的显示处理器100基于从布局控制器10接收的控制信号的内容开始操作，由此可以使图像接收终端30继续接收图像，而无需特别考虑显示处理器100的故障。
图18至图20是图示了在根据本公开的实施例的图像传输系统1中传输图像的示例的阐释图。图18至图20图示了，当在特定显示处理器100a中发生故障时，如何通过将路由转移到另一个显示处理器100b来继续从图像发送终端20向图像接收终端30传输图像。
图18至图20图示了如何使用三个图像发送终端20a至20c、两个显示处理器100a和100b以及一个图像接收终端30a配置图像传输系统1。假设，显示处理器100a在正常情况下运行，但是显示处理器100b在显示处理器100a发生故障时运行。
图18是图示了在正常情况下传输图像的示例的阐释图。在正常情况下，基于来自布局控制器10的控制信号，从图像发送终端20a至20c使用IP多播分发的图像假设由显示处理器100a接收并且处理，并且被传输至图像接收终端30a。布局控制器10然后向显示处理器100a和100b发送KeepAlive信号，并且检查显示处理器100a和100b是否正在运行。
图19是图示了显示处理器100发生故障的状态的阐释图。当显示处理器100a没有响应时，布局控制器10确定显示处理器100a已经发生了故障。当显示处理器100a发生故障时，布局控制器10指示显示处理器100b从图像发送终端20a至20c接收使用IP多播分发的图像。
图20是图示了因为显示处理器100a已经发生了故障所以指示显示处理器100b接收图像的状态的阐释图。布局控制器10向显示处理器100b发送相当于已经传输到显示处理器100a的控制信号的控制信号。显示处理器100b基于来自布局控制器10的控制信号从图像发送终端20a至20c接收使用IP多播分发的图像并且处理该图像。
这样，当在正常情况下运行的显示处理器100a发生故障时，根据本公开的实施例的图像传输系统1可以通过简单地从布局控制器10向其他显示处理器100b重新发送控制信号来继续执行从图像发送终端20a至20c向图像接收终端30传输图像。
在上述示例中，图像显示系统45是多个显示器排列在竖直方向和水平方向上的所有系统，但是本发明不限于本示例。例如，图像显示系统45可以配置为包括以斜面的方式排列的多个显示器。
图21是图示了图像显示系统45的修改示例的阐释图。如图21所述，图像显示系统45可以配置为包括以倾斜斜面的方式排列的多个显示器。另外，如图21所示，图像显示系统45可以配置为包括以倾斜斜面的方式排列的并且进一步彼此移位的多个显示器。
当如图21所示的将图像显示在图像显示系统45上时，显示处理器100可以执行使从图像发送终端20传来的图像旋转的图像处理，以便水平地显示该图像。图21图示了将两个图像A和B显示在图像显示系统45上并且通过显示处理器100对这两个图像A和B都执行旋转处理的状态。
布局控制器10获取关于与IP网络2连接的显示处理器100的信息，并且预先将该信息保存在布局控制器10中。如果改变了显示处理器100的处理顺序，那么布局控制器10通过使用预先获取的关于显示处理器100的信息来生成控制信号，并且将生成的控制信号发送给各个显示处理器100。
图22是图示了根据本公开的实施例的布局控制器10的功能配置的阐释图。如图22所示，根据本公开的实施例的布局控制器10配置为包括表保存单元11。表保存单元11以表的形式保存关于与IP网络2连接的显示处理器100的信息。
在本实施例中，尽管图示了布局控制器10保存关于与IP网络2连接的显示处理器100的信息的示例，但是本发明不限于本示例。可以将关于与IP网络2连接的显示处理器100的信息保存在可以从布局控制器10查阅的另一个装置中。
将描述存储在表保存单元11中的表的示例。首先图示了图像传输系统1的示例性配置，以描述存储在表保存单元11中的表的示例。图23是根据本公开的实施例的图像传输系统1的示例性配置，并且，本示例性旨在描述存储在表保存单元11中的表的示例。在图23中，图示了用于捕捉图像并且输出捕捉到的图像的图像发送终端20、显示处理器100、以及图像显示系统45。在图23中，尽管未图示图像接收终端30和图像输出终端40，但是假设它们包括在图像传输系统1中。
将描述在图23中指示的附图标记。NDn(n＝1，2，3，...)是用于管理节点的ID。MCn(n＝1，2，...)是用于管理在从每个节点输出图像时使用的多播地址的ID。RTn(n＝1，2，...)是用于管理节点之间的路由的ID。在图23所示的示例中，将图像发送终端20作为ND1管理，将显示处理器100作为ND2管理，并且，将图像显示系统45作为ND3管理。另外，将从图像发送终端20到显示处理器100的路由作为RT1管理，并且，将从显示处理器100到图像显示系统45的路由作为RT2管理。
此外，在图23所示的示例中，将图像从图像发送终端20输出到多播地址MC1，并且，将图像从显示处理器100输出到多播地址MC2。
图24是图示了存储在表保存单元11中的表的示例的阐释图。图24图示了用于管理多播地址的多播地址管理表T1的示例。将当从每个节点输出图像时管理多播地址的ID(序列号)注册在多播地址管理表T1的ID列中，并且将与每个ID相对应的多播地址注册在多播地址管理表T1的MulticastAddress列中。
图25是图示了存储在表保存单元11中的表的示例的阐释图。图25图示了用于管理节点的节点管理表T2的示例。在节点管理表T2中，管理了关于图像发送终端20、显示处理器100、图像接收终端等的节点的信息。将用于管理每个节点的ID(序列号)注册在节点管理表T2的ID列中，并且，将每个节点(摄像机、显示处理器、输出显示器等)的功能注册在节点管理表T2的Function列中，将关于接收图像的端口号的信息注册在节点管理表T2的ReceivePort列中，将关于传输图像的端口号的信息注册在节点管理表T2的SendPort列中，并且，将关于每个节点的设置参数的信息注册在节点管理表T2的Parameters列中。关于每个节点的设置参数的信息的示例可以包括图像的水平大小和竖直大小、关于每秒帧数(fps)的信息、关于编码解码器的信息、关于带宽的信息、以及关系色空间的信息等。另外，尽管未在图25中示出，但是可以将关于每个节点的处理能力上限的信息存储在节点管理表T2中。
图26是图示了存储在表保存单元11中的表的示例的阐释图。图26图示了用于管理路由的路由管理表T3的示例。路由管理表T3管理关于路由的信息，即，关于如何将图像从哪个节点传输至哪个节点的信息。将用于管理每条路由的ID(序列号)注册在路由管理表T3的ID列中，将管理在地址管理表T1中的ID(序列号)注册在路由管理表T3的MulticastAddressID列中，并且，将管理在节点管理表T2中的ID(序列号)注册在路由管理表T3的SenderNodeID列和ReceiverNodeID列中。将对应路由的传输源节点的ID注册在SenderNodeID列中，并且，将对应路由的传输目的地节点的ID注册在ReceiverNodeID列中。
在将图像从一个传输节点分发给多个接收节点的情况下，路由管理表T3存储有多行，每行具有相同的多播地址和传输节点，但是具有不同的接收节点。
图24至图26图示了在图像发送终端20(节点1)将图像发送到多播地址239.11.12.1(地址1)，具有换色功能的显示处理器100(节点2)接收从图像发送终端20传来的图像，对接收到的图像执行换色处理，并且将处理后的图像发送到多播地址239.11.12.2(地址2)，以及用于接收显示在图像显示系统45上的图像的图像接收终端30(节点3)接收从显示处理器100传来的图像并且显示接收到的图像时的每个表的示例。
如上所述，表保存单元11保存数据，由此，布局控制器10可以使显示处理器100接收从图像发送终端20输出的图像并且对接收到的图像执行换色处理，并且可以使图像接收终端30接收从显示处理器100输出的图像。
(2、发明内容)
如上所述，根据本公开的实施例，提供了显示处理器100，该显示处理器100基于来自布局控制器10的指示接收从图像发送终端20传来的图像，该图像发送终端20使用IP多播来分发图像。当显示处理器100从图像发送终端20接收到使用多播分发的图像时，对接收到的图像执行预定图像处理并且使用IP多播分发来重新发送处理后的图像。基于来自布局控制器10的指示，图像接收终端30从显示处理器100接收使用IP多播分发的图像，并且将该图像显示在图像显示系统45上。
另外，根据本公开的实施例，不仅可以使多个显示处理器100部分地负责图像处理，还可以使一个显示处理器完全负责图像处理。即使当增加了图像显示系统45的显示器的数量或者图像的可显示大小时，也可以通过使多个显示处理器100部分地负责图像处理来将图像显示在图像显示系统45上。
此外，在本公开的实施例中，显示处理器100与IP网络2连接，由此，即使当对系统进行扩展或者修改时，只要将显示处理器100与IP网络2连接，便无需切换布线连接。另外，在本公开的实施例中，显示处理器100与IP网络2连接，由此，即使当特定显示处理器100a发生故障时，也可以通过允许将发生故障的显示处理器容易地切换到另一个显示处理器100而继续执行图像传输。
在本公开的实施例中，经由IP网络2使用多播来分发从图像发送终端20传来的图像。显示处理器100仅仅接收指定图像，由此，在本公开的实施例中，可以通过使用多播分发有效地利用带宽。另外，在本公开的实施例中，必要时，可以通过允许多个显示处理器100部分地负责该处理来防止流量集中在特定显示处理器100上。
在本公开的实施例中，经由IP网络使用多播来分发经过显示处理器100执行的图像处理的图像。因此，在本公开的实施例中，多个图像显示系统45可以使用从显示处理器100输出的图像。
无需按照在顺序图或者流程图中的顺序以时间序列处理由本说明书中描述的每种装置执行的处理中的每个步骤。例如，由本说明书中描述的每种装置执行的处理中的每个步骤可以按照不同于流程图所述的顺序处理，或者可以并行处理。
而且，还可以创建计算机程序以使包含在每种装置中的硬件(诸如，CPU、ROM和RAM)发挥相当于上述每种装置的配置的功能。另外，还可以提供记录有计算机程序的记录介质。此外，可以通过硬件配置如硬件功能框图所示的每个功能块，来实施处理序列。
尽管参照附图详细描述了本发明的优选实施例，但是本发明的技术范围不限于此。本领域的技术人员应当理解，在所附权利要求书或其等效物的范围内，可以根据设计需要和其他因素作出各种修改、组合、子组合和更改。
另外，本技术还可以如下配置。
(1)
一种信号处理系统，该系统包括：
多个显示处理器，该多个显示处理器配置为使用多播传输分别传输图像信号；
多个图像接收器，该多个图像接收器配置为根据多播传输分别接收从显示处理器传来的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理图像信号以产生至少一个显示图像。
(2)
根据(1)的信号处理系统，其中，图像接收器的第一子组分别接收和处理用于第一显示图像的各个部分的图像信号，并且，图像接收器的第二子组分别接收和处理用于第二显示图像的各个部分的图像信号。
(3)
根据(2)的信号处理系统，其中，处理第一显示图像和第二显示图像以共同显示在显示帧上。
(4)
根据(2)的信号处理系统，其中，处理第一显示图像和第二显示图像以单独显示在相应的显示帧上。
(5)
根据(1)的信号处理系统，其中，至少一个显示处理器配置为接收和传输用于待显示在显示装置的各个显示区域中的各个显示图像的图像信号，以及其中，图像控制信息用于控制是否将根据带宽条件继续接收用于各个显示图像的图像信号。
(6)
根据(5)的信号处理系统，其中，所述控制包括：通过中断接收各个显示图像的第二图像来保留用于各个显示图像的第一图像的带宽。
(7)
根据(6)的信号处理系统，其中，根据预定规则，做出中断接收第二图像的确定。
(8)
根据(7)的信号处理系统，其中，预定规则包括确定各个显示图像中的哪一个尚未显示最长时间。
(9)
根据(7)的信号处理系统，其中，预定规则包括分别分发给各个显示图像的优先级信息。
(10)
根据(1)的信号处理系统，其中，显示处理器包括第一显示处理器和第二显示处理器，其中，第一显示处理器配置为将用于第一显示图像的图像信号传输至至少一个图像接收器，以及其中，当检测到第一显示处理器的故障条件时，将用于第一显示图像的图像信号的传输从第一显示处理器转移至第二显示处理器。
(11)
根据(1)的信号处理系统，其进一步包括：
控制器，该控制器配置为向至少一个显示处理器或者图像接收器提供图像控制信息，图像控制信息用于确定在来自显示处理器的多播传输中哪个图像接收器接收哪个图像信号。
(12)
根据(4)的信号处理系统，其进一步包括：
控制器，该控制器配置为向至少一个显示处理器或者图像接收器提供图像控制信息，图像控制信息用于确定在来自显示处理器的多播传输中哪个图像接收器接收哪个图像信号，其中，图像控制信息包括控制信号，该控制信号发往第二显示处理器以在检测到第一显示处理器的故障条件时参与用于第一显示图像的图像信号的传输。
(13)
一种图像接收系统，该图像接收系统包括：
多个图像接收器，该多个图像接收器配置为分别根据多播传输接收从至少一个显示处理器传来的图像信号，每一个图像信号对应于至少一个图像的至少一部分，并且配置为根据图像控制信息分别处理图像信号以产生至少一个显示图像。
(14)
根据(13)的信号接收系统，其中，图像接收器的第一子组分别接收和处理用于第一显示图像的各个部分的图像信号，并且，图像接收器的第二子组分别接收和处理用于第二显示图像的各个部分的图像信号。
(15)
根据(14)的信号接收系统，其中，处理第一显示图像和第二显示图像以共同显示在显示帧上。
(16)
根据(14)的信号接收系统，其中，处理第一显示图像和第二显示图像以单独显示在相应的显示帧上。
(17)
一种显示处理器，该显示处理器包括：
输出界面，该输出界面配置为使用多播传输来传输图像信号，图像信号对应于图像接收器，该等图像接收器配置为分别根据多播传输接收从显示处理器传来的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理图像信号以产生至少一个显示图像；以及
控制输入，该控制输入配置为接收图像控制信息，该图像控制信息用于确定在来自显示处理器的多播传输中哪个图像接收器接收哪个图像信号。
(18)
根据(17)的显示处理器，其中，显示处理器配置为接收和传输用于待显示在显示装置的各个显示区域中的各个显示图像的图像信号，以及其中，图像控制信息用于控制是否将根据带宽条件继续接收用于各个显示图像的图像信号。
(19)
根据(18)的显示处理器，其中，所述控制包括：通过中断接收各个显示图像的第二图像来保留用于各个显示图像的第一图像的带宽。
(20)
根据(19)的显示处理器，其中，根据预定规则，做出中断接收第二图像的确定。
(21)
根据(19)的显示处理器，其中，预定规则包括确定各个显示图像中的哪一个尚未显示最长时间。
(22)
根据(19)的显示处理器，其中，预定规则包括分别分发给各个显示图像的优先级信息。
(23)
根据(17)的显示处理器，其中，显示处理器是第一显示处理器和第二显示处理器中的一个，其中，第一显示处理器配置为将用于第一显示图像的图像信号传输至至少一个图像接收器，以及其中，当检测到第一显示处理器的故障条件时，将用于第一显示图像的图像信号的传输从第一显示处理器转移至第二显示处理器。
(24)
一种图像信号传输方法，该方法包括：
接收图像控制信息；以及
使用多播传输来传输图像信号，其中，图像信号对应于图像接收器，该等图像接收器配置为分别接收根据多播传输所传输的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理图像信号以产生至少一个显示图像。
(25)
一种图像信号接收方法，该方法包括：
接收图像控制信息；
通过多个图像接收器，根据多播传输分别接收从至少一个显示处理器传来的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分；以及
根据图像控制信息分别处理图像信号以产生至少一个显示图像。
(26)
一种信号处理装置，该信号处理装置包括：
控制信息获取单元，该控制信息获取单元配置为获取关于图像的控制的图像控制信息；
图像接收器，该图像接收器配置为基于图像控制信息选择性地接收使用多播传输的一个或者多个图像。
一个或者多个图像处理单元，该一个或者多个图像处理单元配置为基于图像控制信息对由图像接收器接收的图像执行图像处理；以及
图像发送器，该图像发送器配置为基于图像控制信息传输经过由图像处理单元执行的图像处理的图像，图像使用多播传输。
(27)
根据(26)的信号处理装置，其中，图像处理单元对显示使用多播传输的图像的区域的一部分执行图像处理。
(28)
根据(26)或者(27)的信号处理装置，其中，图像发送器基于图像控制信息来调节图像的输出定时。
(29)
根据(26)至(28)中任一项的信号处理装置，其中，即使当图像不再显示在图像发送器的传输目的地中时，图像接收器也继续选择性地接收从图像发送器传来的图像。
(30)
根据(29)的信号处理装置，其中，当在接收使用多播传输的附加图像时超出了带宽限制时，图像接收器停止选择性地接收在不再显示在图像发送器的传输目的地中的图像中尚未显示最长时间的图像。
(31)
根据(26)至(30)中任一项的信号处理装置，其中，图像处理单元的数量等于从图像发送器传来的图像的数量。
(32)
根据(26)至(31)中任一项的信号处理装置，其中，图像控制信息包括关于由图像接收器选择性地接收的图像的传输源的信息以及关于图像发送器的图像传输目的地的信息。
(33)
根据(26)至(32)中任一项的信号处理装置，其中，图像控制信息包括关于显示有从图像发送器传来的图像的位置的信息。
(34)
根据(33)的信号处理装置，其中，关于显示有图像的位置的信息包括：关于从图像发送器传来的图像的位置的信息。
(35)
一种信号处理方法，该信号处理方法包括：
获取关于图像的控制的图像控制信息的步骤；
基于图像控制信息选择性地接收使用多播传输的一个或者多个图像的选择性接收步骤；
基于图像控制信息对在选择性接收步骤中接收的图像执行图像处理的图像处理执行步骤；以及
基于图像控制信息传输经过图像处理执行步骤中的图像处理的图像的步骤，该图像使用多播传输。
(36)
一种计算机程序，该计算机程序使计算机执行：
获取关于图像的控制的图像控制信息的步骤；
基于图像控制信息选择性地接收使用多播传输的一个或者多个图像的选择性接收步骤；
基于图像控制信息对在选择性接收步骤中接收的图像执行图像处理的图像处理执行步骤；以及
基于图像控制信息传输经过图像处理执行步骤中的图像处理的图像的步骤，该图像使用多播传输。
(37)
一种图像处理系统，该图像处理系统包括：
图像控制装置；
一个或者多个图像输出装置；
一个或者多个信号处理装置；
一个或者多个图像接收装置；以及
一个或者多个图像显示装置；
其中，该信号处理装置包括：
控制信息获取单元，该控制信息获取单元配置为从图像控制装置获取关于图像的控制的图像控制信息；
图像接收器，该图像接收器配置为基于图像控制信息从一个或者多个图像输出装置选择性地接收使用多播传输的一个或者多个图像，
一个或者多个图像处理单元，该一个或者多个图像处理单元配置为基于图像控制信息对由图像接收器接收到的图像执行图像处理，该图像处理用于将图像显示在一个或者多个图像显示装置上，以及
图像发送器，该图像发送器配置为基于图像控制信息传输经过由图像处理单元执行的图像处理的图像以使该图像被一个或者多个图像接收装置接收，该图像使用多播传输。
[附图标记列表]
1图像传输系统
10布局控制器
20图像发送终端
30图像接收终端
40图像输出终端
45图像显示系统
50图像显示装置
100显示处理器
102控制信号控制单元
104多播接收控制单元
106图像编辑管理单元
108多播传输控制单元
110图像处理器
112a-112d解码器
114a、114b图像编辑处理单元
116a、116b编码器
118图像发送器

Claims (37)

1.一种信号处理系统，所述系统包括：
多个显示处理器，所述多个显示处理器配置为使用多播传输分别传输图像信号；
多个图像接收器，所述多个图像接收器配置为根据所述多播传输分别接收从所述显示处理器传来的所述图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理所述图像信号以产生所述至少一个显示图像。
2.根据权利要求1所述的信号处理系统，其中，所述图像接收器的第一子组分别接收和处理用于第一显示图像的各个部分的所述图像信号，并且，所述图像接收器的第二子组分别接收和处理用于第二显示图像的各个部分的所述图像信号。
3.根据权利要求2所述的信号处理系统，其中，处理所述第一显示图像和所述第二显示图像以共同显示在显示帧上。
4.根据权利要求2所述的信号处理系统，其中，处理所述第一显示图像和所述第二显示图像以单独显示在各自的显示帧上。
5.根据权利要求1所述的信号处理系统，其中，至少一个所述显示处理器配置为接收和传输用于待显示在显示装置的各个显示区域中的各个显示图像的所述图像信号，以及其中，所述图像控制信息用于控制是否将根据带宽条件继续接收用于所述各个显示图像的所述图像信号。
6.根据权利要求5所述的信号处理系统，其中，所述控制包括：通过中断接收所述各个显示图像的第二图像来保留用于所述各个显示图像的第一图像的带宽。
7.根据权利要求6所述的信号处理系统，其中，根据预定规则，做出中断接收所述第二图像的确定。
8.根据权利要求7所述的信号处理系统，其中，所述预定规则包括确定所述各个显示图像中的哪一个尚未显示最长时间。
9.根据权利要求7所述的信号处理系统，其中，所述预定规则包括分别分发给所述各个显示图像的优先级信息。
10.根据权利要求1所述的信号处理系统，其中，所述显示处理器包括第一显示处理器和第二显示处理器，其中，所述第一显示处理器配置为将用于第一显示图像的图像信号传输至至少一个所述图像接收器，以及其中，当检测到所述第一显示处理器的故障条件时，将用于所述第一显示图像的所述图像信号的传输从所述第一显示处理器转移至所述第二显示处理器。
11.根据权利要求1所述的信号处理系统，其进一步包括：
控制器，所述控制器配置为向至少一个所述显示处理器或者所述图像接收器提供所述图像控制信息，所述图像控制信息用于确定在来自所述显示处理器的所述多播传输中哪个图像接收器接收哪个图像信号。
12.根据权利要求10所述的信号处理系统，其进一步包括：
控制器，所述控制器配置为向至少一个所述显示处理器或者所述图像接收器提供所述图像控制信息，所述图像控制信息用于确定在来自所述显示处理器的所述多播传输中哪个图像接收器接收哪个图像信号，其中，所述图像控制信息包括控制信号，所述控制信号发往所述第二显示处理器以在检测到所述第一显示处理器的所述故障条件时参与用于所述第一显示图像的所述图像信号的传输。
13.一种图像接收系统，所述图像接收系统包括：
多个图像接收器，所述多个图像接收器配置为根据多播传输分别接收从至少一个显示处理器传来的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理所述图像信号以产生所述至少一个显示图像。
14.根据权利要求13所述的信号接收系统，其中，所述图像接收器的第一子组分别接收和处理用于第一显示图像的各个部分的所述图像信号，并且，所述图像接收器的第二子组分别接收和处理用于第二显示图像的各个部分的所述图像信号。
15.根据权利要求14所述的信号接收系统，其中，处理所述第一显示图像和所述第二显示图像以共同显示在显示帧上。
16.根据权利要求14所述的信号接收系统，其中，处理所述第一显示图像和所述第二显示图像以单独显示在各自的显示帧上。
17.一种显示处理器，所述显示处理器包括：
输出界面，所述输出界面配置为使用多播传输来传输图像信号，所述图像信号对应于图像接收器，所述图像接收器配置为根据所述多播传输分别接收从所述显示处理器传来的所述图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据图像控制信息分别处理所述图像信号以产生至少一个显示图像；以及
控制输入，所述控制输入配置为接收所述图像控制信息，所述图像控制信息用于确定在来自所述显示处理器的所述多播传输中哪个图像接收器接收哪个图像信号。
18.根据权利要求17所述的显示处理器，其中，所述显示处理器配置为接收和传输用于待显示在显示装置的各个显示区域中的各个显示图像的所述图像信号，以及其中，所述图像控制信息用于控制是否将根据带宽条件继续接收用于所述各个显示图像的所述图像信号。
19.根据权利要求18所述的显示处理器，其中，所述控制包括：通过中断接收所述各个显示图像的第二图像来保留用于所述各个显示图像的第一图像的带宽。
20.根据权利要求19所述的显示处理器，其中，根据预定规则，做出中断接收所述第二图像的确定。
21.根据权利要求19所述的显示处理器，其中，所述预定规则包括确定所述各个显示图像中的哪一个尚未显示最长时间。
22.根据权利要求19所述的显示处理器，其中，所述预定规则包括分别分发给所述各个显示图像的优先级信息。
23.根据权利要求17所述的显示处理器，其中，所述显示处理器是第一显示处理器和第二显示处理器中的一个，其中，所述第一显示处理器配置为将用于第一显示图像的图像信号传输至至少一个所述图像接收器，以及其中，当检测到所述第一显示处理器的故障条件时，将用于所述第一显示图像的所述图像信号的传输从所述第一显示处理器转移至所述第二显示处理器。
24.一种图像信号传输方法，所述方法包括：
接收图像控制信息；以及
使用多播传输来传输图像信号，其中，所述图像信号对应于图像接收器，所述图像接收器配置为分别接收根据所述多播传输所传输的所述图像信号，每一个图像信号对应于至少一个显示图像的至少一部分，并且配置为根据所述图像控制信息分别处理所述图像信号以产生所述至少一个显示图像。
25.一种图像信号接收方法，所述方法包括：
接收图像控制信息；
通过多个图像接收器，根据多播传输分别接收从至少一个显示处理器传来的图像信号，每一个图像信号对应于至少一个显示图像的至少一部分；以及
根据图像控制信息分别处理所述图像信号以产生所述至少一个显示图像。
26.一种信号处理装置，所述信号处理装置包括：
控制信息获取单元，所述控制信息获取单元配置为获取关于图像的控制的图像控制信息；
图像接收器，所述图像接收器配置为基于所述图像控制信息选择性地接收使用多播传输的一个或者多个图像；
一个或者多个图像处理单元，所述一个或者多个图像处理单元配置为基于所述图像控制信息对由所述图像接收器接收的图像执行图像处理；以及
图像发送器，所述图像发送器配置为基于所述图像控制信息传输经过由所述图像处理单元执行的所述图像处理的图像，使用多播传输所述图像。
27.根据权利要求26所述的信号处理装置，其中，所述图像处理单元对显示有使用多播传输的图像的区域的一部分执行所述图像处理。
28.根据权利要求26所述的信号处理装置，其中，所述图像发送器基于所述图像控制信息来调节所述图像的输出定时。
29.根据权利要求26所述的信号处理装置，其中，即使当所述图像不再显示在所述图像发送器的传输目的地中时，所述图像接收器也继续选择性地接收从所述图像发送器传来的图像。
30.根据权利要求29所述的信号处理装置，其中，当在接收使用多播传输的附加图像时超出了带宽限制时，所述图像接收器停止选择性地接收在不再显示在所述图像发送器的传输目的地中的图像中尚未显示最长时间的图像。
31.根据权利要求26所述的信号处理装置，其中，所述图像处理单元的数量等于从所述图像发送器传来的图像的数量。
32.根据权利要求26所述的信号处理装置，其中，所述图像控制信息包括关于由所述图像接收器选择性地接收的图像的传输源的信息以及关于所述图像发送器的图像的传输目的地的信息。
33.根据权利要求26所述的信号处理装置，其中，所述图像控制信息包括关于显示有从所述图像发送器传来的图像的位置的信息。
34.根据权利要求33所述的信号处理装置，其中，所述的关于显示有图像的位置的信息包括：关于从所述图像发送器传来的所述图像的位置的信息。
35.一种信号处理方法，所述信号处理方法包括：
获取关于图像的控制的图像控制信息；
基于所述图像控制信息选择性地接收使用多播传输的一个或者多个图像；
基于所述图像控制信息对所述选择性地接收到的图像执行图像处理；以及
基于所述图像控制信息传输经过所述图像处理的所述图像，所述图像使用多播传输。
36.一种计算机程序，所述计算机程序使计算机执行：
获取关于图像的控制的图像控制信息；
基于所述图像控制信息选择性地接收使用多播传输的一个或者多个图像；
基于所述图像控制信息对所述选择性地接收到的图像执行图像处理；以及
基于所述图像控制信息传输经过所述图像处理的所述图像，所述图像使用多播传输。
37.一种图像处理系统，所述图像处理系统包括：
图像控制装置；
一个或者多个图像输出装置；
一个或者多个信号处理装置；
一个或者多个图像接收装置；以及
一个或者多个图像显示装置；
其中，所述信号处理装置包括：
控制信息获取单元，所述控制信息获取单元配置为从所述图像控制装置获取关于图像的控制的图像控制信息；
图像接收器，所述图像接收器配置为基于所述图像控制信息从所述一个或者多个图像输出装置选择性地接收使用多播传输的一个或者多个图像，
一个或者多个图像处理单元，所述一个或者多个图像处理单元配置为基于所述图像控制信息对由所述图像接收器接收到的图像执行图像处理，所述图像处理用于将所述图像显示在所述一个或者多个图像显示装置上，以及
图像发送器，所述图像发送器配置为基于所述图像控制信息传输经过由所述图像处理单元执行的所述图像处理的图像以使所述图像被所述一个或者多个图像接收装置接收，所述图像使用多播传输。
CN201480031060.8A 2013-06-07 2014-05-28 信号处理装置、信号处理方法、计算机程序以及图像传输系统 Expired - Fee Related CN105264901B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-120597 2013-06-07
JP2013120597A JP2014239325A (ja) 2013-06-07 2013-06-07 信号処理装置、信号処理方法、コンピュータプログラム及び映像伝送システム
PCT/JP2014/002834 WO2014196170A1 (en) 2013-06-07 2014-05-28 Signal processing device, signal processing method, computer program, and image transmission system

Publications (2)

Publication Number Publication Date
CN105264901A true CN105264901A (zh) 2016-01-20
CN105264901B CN105264901B (zh) 2020-05-22

Family

ID=51014601

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480031060.8A Expired - Fee Related CN105264901B (zh) 2013-06-07 2014-05-28 信号处理装置、信号处理方法、计算机程序以及图像传输系统

Country Status (4)

Country Link
US (1) US10455273B2 (zh)
JP (1) JP2014239325A (zh)
CN (1) CN105264901B (zh)
WO (1) WO2014196170A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016007378A1 (en) * 2014-07-11 2016-01-14 mindHIVE Inc. System and methods for secure collaborative communication
JP6744876B2 (ja) * 2016-01-25 2020-08-19 オリンパス株式会社 画像送信装置、画像通信システム、画像送信方法、およびプログラム
CN108924624B (zh) * 2018-08-03 2021-08-31 百度在线网络技术（北京）有限公司 信息处理方法和装置
JPWO2023013072A1 (zh) * 2021-08-06 2023-02-09
WO2023203701A1 (ja) * 2022-04-20 2023-10-26 日本電信電話株式会社 制御装置、映像伝送システム、制御方法、及びプログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1118550A (zh) * 1994-03-30 1996-03-13 三星航空产业株式会社 多个图像信号处理装置
CN1122086A (zh) * 1994-07-21 1996-05-08 株式会社日立制作所 图像信息分配系统
CN1365229A (zh) * 1995-04-11 2002-08-21 松下电器产业株式会社 视频信息调节装置、视频信息发送装置以及视频信息接收装置
US20070033289A1 (en) * 2005-07-15 2007-02-08 Geert Nuyttens Network displays and method of their operation
CN101682748A (zh) * 2006-05-18 2010-03-24 杰显通系统公司 多数据流的互连机制
US20120302343A1 (en) * 2008-01-15 2012-11-29 Echostar Advanced Technologies L.L.C. System and method of managing multiple video players

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005244931A (ja) * 2004-01-26 2005-09-08 Seiko Epson Corp マルチ画面映像再生システム
US8553716B2 (en) 2005-04-20 2013-10-08 Jupiter Systems Audiovisual signal routing and distribution system
CN101529893B (zh) 2006-11-10 2011-03-09 三菱电机株式会社 网络影像合成显示系统
US20090237560A1 (en) 2008-03-18 2009-09-24 Cisco Technology, Inc. Networked ip video wall

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1118550A (zh) * 1994-03-30 1996-03-13 三星航空产业株式会社 多个图像信号处理装置
CN1122086A (zh) * 1994-07-21 1996-05-08 株式会社日立制作所 图像信息分配系统
CN1365229A (zh) * 1995-04-11 2002-08-21 松下电器产业株式会社 视频信息调节装置、视频信息发送装置以及视频信息接收装置
US20070033289A1 (en) * 2005-07-15 2007-02-08 Geert Nuyttens Network displays and method of their operation
CN101682748A (zh) * 2006-05-18 2010-03-24 杰显通系统公司 多数据流的互连机制
US20120302343A1 (en) * 2008-01-15 2012-11-29 Echostar Advanced Technologies L.L.C. System and method of managing multiple video players

Also Published As

Publication number Publication date
US20160105709A1 (en) 2016-04-14
US10455273B2 (en) 2019-10-22
WO2014196170A1 (en) 2014-12-11
JP2014239325A (ja) 2014-12-18
CN105264901B (zh) 2020-05-22

Similar Documents

Publication Publication Date Title
CN105264901A (zh) 信号处理装置、信号处理方法、计算机程序以及图像传输系统
US7176957B2 (en) Local video loopback method for a multi-participant conference system using a back-channel video interface
JP2014238537A (ja) 映像伝送システム及び映像伝送方法
JP5345081B2 (ja) 常駐会議を行うための方法およびシステム
US9088692B2 (en) Managing the layout of multiple video streams displayed on a destination display screen during a videoconference
US9154737B2 (en) User-defined content magnification and multi-point video conference system, method and logic
CN102177711B (zh) 用于在视频会议期间处理图像的方法、设备和计算机程序
US20110090970A1 (en) Terminal and relay node for video conference system
US9143443B2 (en) Robust multicast broadcasting
KR20140016154A (ko) 다양한 참가 디바이스의 화상회의 방법 및 시스템
US11594195B2 (en) Unlimited pixel canvas for LED video walls
WO2019233314A1 (zh) 一种电视墙图像回显方法、服务器件及电视墙系统
CN106612194A (zh) 一种iptv容灾方法、装置、系统及机顶盒
EP2661857B1 (en) Local media rendering
US11503085B2 (en) Multimedia composition in meeting spaces
US7453829B2 (en) Method for conducting a video conference
CN103051885A (zh) 一种模数混合视频综合监控系统及方法
ES2736725T3 (es) Procedimiento y sistema de gestión dinámica de transmisión de flujo en el seno de una pluralidad de terminales
US20200195360A1 (en) Video over IP based broadcast productions by combining a Broadcast Controller and a Processing Device
US11102451B2 (en) Videoconferencing server for providing multi-screen videoconferencing by using a plurality of videoconferencing terminals and method therefor
JP2016167676A (ja) 通信端末装置、通信管理システム、通信方法、及びプログラム
JP7114927B2 (ja) 通信装置、通信方法及び通信プログラム、管理装置
JPH0698030A (ja) 通信会議方式および装置
JP2006005526A (ja) 映像会議端末装置およびシステムおよび方法
JP2009165107A (ja) 複合ネットワークのテレプレゼンス会議の創設のための方法及びシステム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200522