CN1893624B - 影像数据发送系统 - Google Patents

Abstract

本发明涉及一种通过网络将影像数据发送到对方终端的影像数据发送系统。本发明的系统具有：发送用影像数据生成单元，从影像数据预先生成向网络发送时的线路传送形式影像数据；线路传送形式影像数据存储单元，存储所生成的线路传送形式影像数据；传送控制单元，在请求从对方终端发送影像数据时，并不从影像数据生成线路传送形式影像数据，即可发送存储在线路传送形式影像数据存储单元中的线路传送形式影像数据。

Description

影像数据发送系统

本发明涉及一种影像数据发送系统，例如可适用于向视频电话机发送教育用影像数据或者保养用影像数据等通用影像数据的系统。

对于可以接收IP视频电话机或视频电话机等的影像数据和声音数据两者的终端发送通用影像数据的系统正在进行各种开发、研究。例如，正在开发、研究这样的系统：用户可通过视频电话机取得表示某装置部件的更换方法(例如复印机的墨粉(toner)更换方法)的影像数据的保养服务系统、拍摄预定的讲义所获得的影像数据发送给视频电话机等的e学习系统等。

以往，为了通过通信将能够在Windows Media(微软公司的软件名)形式等的个人电脑等中再现的一般影像数据文件的内容输出到对方终端，如图2所示，在影像数据发送装置1中，以按照通信对方的H.263等压缩数据形式来对影像数据文件2进行重新编码的处理(S1)，并且，作为RTP等数据传送协议的有效数据(payload data)进行存储的处理(S2)之后，需要输出到网络上(例如，参考专利文件1)。

此外，图2举例示出了传送目的终端是视频电话机3或者IP视频电话机4的情形。视频电话机3通过进行ISDN网即视频电话网5、IP以及ISDN之间的格式变换等的网关6、LAN 7连接到影像数据发送装置1上，IP视频电话机4通过IP网8、LAN 7连接到影像数据发送装置1。

专利文献1：特开2005-039342号公报

但是，因为在现有的通用影像数据发送方式中，因为必须对每个通信信道进行影像数据文件的编码处理，所以，在发送通用影像数据的服务中，存在如下的问题：与发送影像数据的信道数目成比例地提供该服务的设备(个人电脑、服务器等计算机)的负荷增大。

此外，在通信信道确定之后，由于进行影像数据的编码处理，故从确定通信信道到在接收并显示视频电话机或IP视频电话机等影像数据的终端侧再现影像往往花费很多时间。

发明内容

因此，希望获得这样一种影像数据发送系统：能够减轻发送侧的处理负荷，同时，缩短从请求时刻到显示请求影像之间的时间。

本发明涉及一种通过因特网向对方终端发送影像数据的影像数据发送系统，其特征在于，包括：(1)发送影像数据生成单元，预先由上述影像数据生成发送到上述网络时的形式的线路传送形式影像数据(2)线路传送形式影像数据存储单元，将上述发送用影像数据生成单元生成的上述线路传送形式影像数据进行存储(3)传送控制单元，在请求从上述对方终端发送影像数据时，不从上述影像数据生成上述线路传送形式影像数据，而是发送上述线路传送形式影像数据存储单元中存储的上述线路传送形式影像数据。

根据本发明的影像数据发送系统，在请求发送影像数据之前，预先生成线路传送形式影像数据，在请求发送影像数据时，发送预先生成的线路发送形式影像数据，因而能够减轻发送侧处理负荷，同时，缩短从请求时刻到显示请求影像之间的时间。

附图说明

图1是表示一个实施方式的影像数据发送系统的总体结构的框图。

图2是现有的影像数据发送装置的处理的说明图。

图3是表示实施方式的发送用影像数据生成装置的功能结构的框图。

图4是说明实施方式的线路传送形式影像数据文件结构的示意图。

图5是表示实施方式的影像数据发送装置的功能结构的框图。

图6是表示实施方式的使视频电话机进行发送的线路传送形式影像数据文件的确定方法的一例说明图。

具体实施方式

(A)实施方式

下面，参考附图对本发明的影像数据发送系统的一个实施方式进行说明。

(A-1)实施方式的结构

图1示出了该实施方式的影像数据发送系统的整体结构，和上述图2相同，对应的部分使用相同的符号。

在图1中，该实施方式的影像数据发送系统10在功能上具有影像数据发送装置11和发送用影像数据生成装置12，在如图1所示的例子中，影像数据发送装置11和发送用影像数据生成装置12共同连接到LAN7上。

发送用影像数据生成装置12从由动画或静止影像构成的同一原影像数据文件OF中生成速率不同的多个种类(图1的实例中是3种，下面对3种进行说明)的线路传送形式影像数据文件(发送用影像数据文件)SFH、SFM、SFL。影像数据发送装置11将发送用影像数据生成装置12生成的3种线路传送形式影像数据文件SFH、SFM、SFL进行存储，并根据请求影像数据的用户装置能力等，从3种线路传送形式影像数据文件SFH、SFM、SFL中确定发送的文件并进行发送。

在此，如下所述，线路传送形式影像数据文件SFH、SFM、SFL使用其格式来保存发送到线路上的数据传送协议上的数据。

发送用影像数据生成装置12例如是由和构成影像数据发送装置11的服务器相同的服务器或者其他的服务器来构成的。此外，发送用影像数据生成装置12最好是作为影像数据发送装置11的客户机来构成。发送用影像数据生成装置12在硬件方面具有由CPU、ROM、RAM等构成的控制部、通信部、记录媒质存取部、输入部、显示部等，在功能上，具有如图3所示的结构。

在图3中，发送用影像数据生成装置12具有原影像数据文件存储部20、3种编码部21H、21M、21L，3种传送协议标题添加部22H、22M、22L，3种数据标题添加部23H、23M、23L，3种线路传送形式影像数据文件存储部24H、24M、24L以及文件传送部25。

原影像数据文件存储部20存储Windows Media形式或者位图形式等一般形式的原影像数据文件OF。原影像数据文件OF可以通过记录媒质输入，也可以从外部装置通过传送来输入，也可以在构成该发送用影像数据生成装置12的服务器上生成。

编码部21H、21M、21L分别是高速率、中速率、低速率的编码部，并且将原影像数据文件OF按照每一帧编码成H.263形式或者其他形式的压缩数据并添加有效负载标题.编码部21H、21M、21L如果比1帧的大小所使用的网络协议限制大时进行帧分割.该每个帧的数据(在分割的情况下，每个分割帧的数据)成为图4所示的线路传送形式影像数据文件SF(SFH、SFM、SFL)的1个数据单位的影像数据和该有效负载标题部R3.

传送协议标题添加部22H、22M、22L向对应的编码部21H、21M、21L所编码的帧单位(在分割后情况下，为分割帧单位)添加RTP标题或其以外的数据传送协议用标题。这成为图4所示的线路传送形式影像数据文件SF的1个数据单位的数据传送协议标题部。

数据标题添加部23H、23M、23L向对应的传送协议标题添加部22H、22M、22L所添加的数据传送协议标题单位添加数据标题。数据标题的添加内容成为在数据段落、1个单位数据的大小和数据发送间隔、影像数据发送装置11中的必要控制用数据。数据标题添加部23H、23M、23L将数据按照每个单位顺次写入到相应的线路传送形式影像数据文件存储部24H、24M、24L中。

线路传送形式影像数据文件存储部24H、24M、24L存储了所生成的线路传送形式影像数据文件SFH、SFM、SFL。另外，3种线路传送形式影像数据文件存储部24H、24M、24L不需要进行硬件分离，而可以采用功能性分离。

如图4所示那样，如上述那样在线路传送形式影像数据文件存储部24H、24M、24L中存储的线路传送形式影像数据文件SFH、SFM、SFL分别具有这样的个数：使由数据标题部R1、数据发送协议标题部R2、影像数据和该有效负载标题部R 3构成的数据的1个单位与原影像数据文件OF的容量相对应。

文件传送部25通过LAN7将线路传送形式影像数据文件存储部24H、24M、24L中存储的线路传送形式影像数据文件SFH、SFM、SFL传送到影像数据发送装置11中。在此，文件传送部25可以根据来自于影像数据发送装置11的请求进行传送，可以根据线路传送形式影像数据文件SFH、SFM、SFL的生成完成而自动地进行传送，也可以根据针对该发送影像数据生成装置12的操作者的操作进行传送。此外，可以使用存储媒质将线路传送形式影像数据文件SFH、SFM、SFL提供给影像数据发送装置11。

影像数据发送装置11例如由服务器构成，硬件上具有由CPU、ROM、RAM等构成的控制部、通信部、存储媒质存取部、输入部、显示部等，但是，从与实施方式的特征的关系来看，在功能上具有如图5所示的结构。

在图5中，影像数据发送装置11具有通信部30、传送控制部31、线路传送形式影像数据文件存储部32H、32M、32L和用户信息存储部33。为了可以向多个用户并列发送，这些结构要素被设置为合适的数目。

通信部30例如相当于LAN接口部等，在与LAN7之间接收通信数据(IP分组)。

发送控制部31根据来自于视频电话机3或IP视频电话机4侧的请求，将在线路传送形式影像数据文件存储部32H、32M、32L中存储的3种线路传送形式影像数据文件SFH、SFM、SFL中的任意一种发送到视频电话机3或者IP视频电话机4侧。发送控制部31例如在传送时读入线路传送形式影像数据文件，并将读入的内容按照每个数据单位依次作为UDP或者TCP等网络协议数据发送到线路(LAN7)上。发送控制部31内置有是否发送3种线路传送形式影像数据文件SFH、SFM、SFL中的任意一种的判定部31A。

此外，在通过文件传送从发送用影像数据生成装置12提供线路传送形式影像数据文件SFH、SFM、SFL的情况下，传送控制部31具有在线路传送形式影像数据文件存储部32H、32M、32L中存储所接收的线路传送形式影像数据文件SFH、SFM、SFL的功能.

线路传送形式影像数据文件存储部32H、32M、32L存储传送来的线路传送形式影像数据文件SFH、SFM、SFL。此处也没有必要对3种线路传送形式影像数据文件存储部32H、32M、32L进行硬件分离，而可以进行功能分离。

用户信息存储部33存储能够请求传送影像数据文件的用户信息。用户信息存储部33例如存储传送控制部31用于用户认证的信息。

(A-2)实施方式的动作

下面，对具有上述结构的实施方式的影像数据发送系统10的动作进行说明。

在实施方式的影像数据发送系统10中，首先，通过发送用影像数据生成装置12从原影像数据文件OF生成3种线路传送形式影像数据文件SFH、SFM、SFL，其次，通过影像数据发送装置11向线路发送任何一种线路传送形式影像数据文件SFH、SFM或SFL。

在发送用影像数据生成装置12中，取入一般形式的原影像数据文件OF，按每一帧将原影像数据文件OF编码为压缩数据，并添加有效负载标题。其次，对编码后的帧单位添加数据传送协议用标题。并且，对数据传送协议标题单位添加数据标题。并且，将数据按照每个单位排序的方式写入到线路传送形式影像数据文件中，以完成线路传送形式影像数据文件。

作为这种线路传送形式影像数据文件，生成速率不同的多个种类(该实施方式中是3种)，即，生成高速率的线路传送形式影像数据文件SFH、中速率的线路传送形式影像数据文件SFM和低速率的线路传送形式影像数据文件SFL。

生成的3种线路传送形式影像数据文件SFH、SFM、SFL从发送影像数据生成装置12文件传送到影像数据发送装置11。

影像数据发送装置11在存在来自视频电话机3或者IP视频电话机4侧的影像数据文件的发送请求时，进行用户认证之后，确定是否向视频电话机3或者IP视频电话机4侧发送3种线路传送形式影像数据文件SFH、SFM、SFL中的任意一种，并将确定的线路传送形式影像数据文件发送到线路上。

发送动作如下所述。影像数据发送装置11首先读出对应的线路传送形式影像数据文件SF(SFH、SFM或SFL)。其次，按每个图4所示的数据单位，取出数据发送协议标题部R2、影像数据和该有效负载标题部R3。然后，将所取出的数据设定为UDP或者TCP或其他网络协议数据部，并发送到线路上。此时，根据数据标题部R1中设定的时间戳(数据发送间隔或者距离最前面数据的时间)来发送数据。

图6是表示使视频电话机3发送的线路传送形式影像数据文件的确定方法之一例的说明书。此外，使IP视频电话机4发送的线路传送形式影像数据文件可以固定地(例如，高速率的线路传送形式影像数据文件SFH)确定，此外，和图6的情况基本相同，也可以确定发送的线路传送形式影像数据文件。

一旦确定了和视频电话机3的影像信道(S100)，影像数据发送装置11就定期地(例如每30秒)向对方终端侧发送单独的速率检验分组(例如回送(loopback)分组)(S101、S104、S107和S110)。对于这样的速率检验分组，和对IP分组进行终端处理(以LAN 7为终端)的网关6相对应，返送响应分组.影像数据发送装置11在接收到响应分组的时刻(S102、S105、S108、S111)，基于分组响应的时间间隔(从发送时刻到接收时刻的时间)，判定线路的速率(例如此时的通信量)，并发送和该判定速率相关的线路传送形式影像数据文件SFH、SFM或SFL的数据(S103、S106、S109、S112).例如，预先确定了判定高速率、中速率和低速率的响应时间间隔的范围，从而进行速率判定.

图6示出了4次判定结果是高速率、中速率、低速率和高速率的情形。在此，在中途切换供发送用的线路传送形式影像数据文件时，基于数据中各种标题部的信息，在补偿影像的连续性的同时实施切换。

代替使用如上所述的响应时间间隔的方法，作为影像数据发送装置11所发送的速率检查分组，向网关6送出回答线路速率的分组(如果是IP视频电话机7的情形(使用IP网络8的情形)，也可以使用RTCP)，基于回答分组所回答的线路速率，可以确定供发送用的线路传送形式影像数据文件。

此外，并不是如上所述地定期送出速率检查分组，亦可以在影像信道建立之后立即仅进行一次速率判定。

(A-3)实施方式的效果

根据该实施方式的影像数据发送系统，能够取得如下的效果。

在影像数据发送装置中，编码处理并不是必需的，能够谋求减轻装置的负荷，另外，可期待缩短从与对方终端(IP视频电话机或者视频电话机)建立通信信道到影像输出的时间。

在此，在发送用影像数据生成装置中，当生成线路传送形式影像数据文件SF时，按照所指定的编码参数(比特率、帧速率或画质)生成多个质量不同的影像数据，由此，在影像数据发送装置中，能够选择适合所连接线路的性能的线路传送形式影像数据文件并发送到线路上。

另外，即使在变更影像用压缩数据的压缩方法或数据传送协议的情况下，也不需要针对图象数据发送装置的变更，从而系统的升级(version up)等的变更变得容易。

此外，在建立通信信道之后，定期地检查连接对方的能力，选择最适当的数据文件，由此，能够发送适当速率的影像数据。

(B)其它实施例

在上述实施方式的说明中，虽然言及了各种变形实施方式，但是，也可以列举如下例示的变形实施例。

在上述实施方式中，虽然示出了从同一原影像数据文件生成3种线路传送形式影像数据文件的情形，但是，种类的数目不限于3，可以生成1或者1以上的任意数目的种类。

另外，在上述实施方式中，虽然示出了通过速率检查分组的发送以及响应分组的接收来确定是否发送哪一种线路传送形式影像数据文件，但是，可以采用其它的确定方法。例如，接收在建立影像信道时与对方终端的呼叫控制分组时，可以从对方终端获取指定速率。再例如，认证用的用户信息中包含指定速率信息，认证处理时，可以识别指定速率。

此外，虽然在上述实施方式中示出了原影像数据文件的种数是1种，但是，原影像数据文件的种类也可以是多种。在这种情况下，首先在建立影像信道时，在对方终端侧指定原影像数据文件的种类。在此，作为原影像数据文件，静止影像和动画可以混合，无论是哪一种，都能变换到图4所示数据结构的线路传送形式影像数据文件。

此外，在上述实施方式中，虽然示出了对方终端是视频电话机和IP视频电话机的情形，但是，由于是影像数据的通信，所以，也可以是不具备声音处理功能的终端(例如，没有搭载电话机功能等的个人计算机)。

在上述实施方式中，虽然示出了供发送用的原数据文件是影像数据文件的情况，但是也可以是影像、声音的复合数据文件。在这种情况下，将复合数据文件分离成影像数据文件和声音数据文件，对影像数据文件实施以上实施方式中所说明的生成处理。对于声音数据，以如下例示的两种方法进行对应。第一种是在线路传送形式影像数据文件的数据的1个单位末尾附加与该影像部分相对应的声音数据，声音数据也通过影像信道发送。第二种是建立与影像信道不同的声音信道，并行发送影像和声音数据。

另外，虽然在上述实施方式中示出了总是从预先生成的多种线路传送形式影像数据文件中选择一种进行发送的情况，但是，在对方终端的能力、规格等与预先生成的线路传送形式影像数据文件之间的匹配性能很差的等情况下，在特殊的情况下，在请求了影像数据文件之后，生成新的种类的线路传送形式影像数据文件并发送亦可。存储这样发送的新型种类的线路传送形式影像数据文件，并且，此后可以用于选择候补。

Claims (3)

1.一种影像数据发送系统，通过网络向对方终端发送影像数据，其特征在于，具有：

发送用影像数据生成单元，从所述影像数据中预先生成向所述网络发送时的形式的线路传送形式影像数据；

线路传送形式影像数据存储单元，对所述发送用影像数据生成单元所生成的所述线路传送形式影像数据进行存储；

传送控制单元，在从所述对方终端请求发送图象数据时，并不从所述发送用影像数据生成单元生成所述线路传送形式影像数据，即可发送存储在所述线路传送形式影像数据存储单元中的所述线路传送形式影像数据。

2.如权利要求1所述的影像数据发送系统，其特征在于，

所述发送用影像数据生成单元从同一个所述线路传送形式影像数据中生成多种线路传送形式影像数据；

所述传送形式影像数据存储单元存储该多种线路传送形式影像数据；

在从所述对方终端请求发送影像数据时，所述传送控制单元从存储在所述线路传送形式影像数据存储单元中的多种所述线路传送形式影像数据中选择一种并发送到所述对方终端。

3.如权利要求2所述的影像数据发送系统，其特征在于，所述传送控制单元实测通信信道的状态，并动态地重新评价所选择的所述线路传送形式影像数据的种类。

Images