CN101072212B

CN101072212B - 多媒体数据监视系统和多媒体数据监视方法

Info

Publication number: CN101072212B
Application number: CN200710101179XA
Authority: CN
Inventors: 松本晃一; 小泽一范
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2006-05-11
Filing date: 2007-05-09
Publication date: 2011-07-20
Anticipated expiration: 2027-05-09
Also published as: US8750317B2; CN101072212A; EP1855441A2; JP2007306317A; EP1855441A3; KR20070110194A; DE602007006096D1; US20070285205A1; EP1855441B1

Abstract

本发明的示范方面是一种数据监视系统，包括：数据监视设备；监视终端；第一网络；第二网络；与第一网络相连的第一通信设备以及与第二网络相连的第二通信设备，其中，数据监视设备包括呼叫处理电路，用于根据从第一通信设备和第二通信设备中的一个向另一个发送的呼叫处理信号，获取解码信息，并将解码信息发送到监视终端；以及数据处理电路，用于向监视终端发送具有语音数据或图像数据的数据，其中，第一通信设备和第二通信设备中的一个向另一个发送数据，并且监视终端包括用于根据解码信息来对数据进行解码的解码电路。

Description

多媒体数据监视系统和多媒体数据监视方法

本申请基于2006年5月11日递交的日本专利申请No.2006-132795，并要求其权益，将其内容一并在此作为参考。

技术领域

本发明涉及一种用于在连接多个网络的交换设备的通信期间、监视多媒体数据的多媒体数据监视系统和多媒体数据监视方法的发明，用于提供诸如电视电话通信的通信。

背景技术

将公共交换电话网络(下面称为PTSN)连接到IP网络(互联网协议)的交换设备能够在与PSTN相连的终端和与IP网络相连的终端之间进行音频通信。在日本待审专利公开No.2005-348163中公开了现有技术的交换设备。该现有技术涉及在通信期间监视音频的音频监视设备。

在日本待审专利公开No.2004-22200中公开了另一种现有技术。所述现有技术公开了能够在能够进行支持语音和视频的电视电话通信的第三代移动通信(下面称为3G-324M)终端和会话发起协议(下面称为SIP)终端之间进行电视电话通信的交换设备。该交换设备将3G-324M终端所连接的网络(例如3G网络)与SIP终端所连接的网络(例如IP网络)相连。

通过在通信期间监视语音，可以相对容易地监视多媒体数据质量。然而，例如，通过在通信期间监视音频或视频，不容易监视电视电话通信的多媒体数据质量，这是因为当传送通过将音频数据与视频数据复用而获得的复用数据时，除非获得复用信息，否则不能够对音频数据和视频数据进行解复用，因此不能够监视音频或视频。尽管可将复用数据解复用为音频数据和视频数据，除非获得作为对视频数据进行解码所需的参数信息的配置信息，否则不能够对视频数据进行解码。

发明内容

本发明的示范目的是提供一种多媒体数据监视系统，能够实时监视多个网络之间的包括音频数据或视频数据的多媒体数据。

根据本发明，可实时监视多个网络之间的包括音频数据或视频数据的多媒体数据。

附图说明

图1是示出应用了多媒体数据监视系统的通信设备的示例的系统图；

图2是示出了数据监视设备的第一示范实施例的系统图；

图3是示出了信息表单元中保存的信息示例的解释性视图；

图4是示出了数据监视设备和监视终端的操作的流程图；

图5是示出应用了多媒体数据监视系统的通信设备的另一示例的系统图；以及

图6是示出了数据监视设备的第二示范实施例的系统图。

具体实施方式

1.第一示范实施例

下面参考图1来描述根据本发明的第一示范实施例。图1是示出应用了根据本发明的多媒体数据监视系统的通信系统的示例的系统图。该通信系统包括：数据监视设备1，用于连接多个网络；监视终端2，用于解码和数据多媒体数据；3G网络3；IP网络4；3G-324M终端5，与3G网络3相连；SIP终端6，与IP网络4相连。在本实施例中，IP网络和3G网络用作示范性的不同类的网络。

数据监视设备1用作将3G网络3与IP网络4相连以实现由3G-324M终端5和SIP终端6所执行的电视电话通信的交换设备。数据监视设备1还确定与多媒体数据有关的复用信息(还将复用信息称为复用表信息)以及与视频有关的配置信息，并在转换呼叫处理信号的通信协议时将它们发送到监视终端2。与多媒体数据有关的复用信息以及与视频有关的配置信息是解码多媒体数据所需的信息。

图2是示出了根据本示范实施例的数据监视设备1的示例的图。如图2所示，数据监视设备1包括数据处理电路11、呼叫处理电路12、信息表单元13、3G网络处理电路14、IP网络处理电路15以及监视处理电路16。

3G网络处理电路14端接(terminate)从3G网络3接收到的数据。实际上，例如，3G网络处理电路14执行从接收数据中提取多媒体数据的处理。然后，如果从3G网络3接收到的数据是呼叫处理信号，则3G网络处理电路14将数据传递给呼叫处理电路12。当接收到的数据是多媒体数据时，其将数据传递给数据处理电路11。

呼叫处理电路12转换从3G-324M终端5或SIP终端6中的一个终端接收的呼叫处理信号的通信协议。例如，呼叫处理电路12根据SIP协议，将从3G网络处理电路14接收到的呼叫处理信号转换为信号，作为SIP终端6的呼叫处理信号。例如，当转换输入的呼叫处理信号的通信协议时，呼叫处理电路12从呼叫处理信号中提取与多媒体数据有关的复用信息或者与视频有关的配置信息。然后，其将所提取的复用信息或配置信息发送到信息表单元13或数据处理电路11。实际上，例如，其将根据H.245通过协商所确定的与多媒体数据有关的复用信息或与视频有关的配置信息发送到信息表单元13或数据处理电路11。

数据处理电路11根据从呼叫处理电路12发送来的复用信息或配置信息，转换从3G网络处理电路14或IP网络处理电路15输入的多媒体数据的格式。然后，数据处理电路11向3G网络处理电路14或IP网络处理电路15输出格式转换后的多媒体数据。

例如，对于UDP/IP，IP网络处理电路15转换从呼叫处理电路12输入的SIP协议信号，并将结果发送到IP网络4。此外，例如，对于RTP/UDP/IP，IP网络处理电路15转换从数据处理电路11输入的多媒体数据，并将结果发送到IP网络4。此外，IP网络处理电路15端接从IP网络4接收的数据。当从IP网络4接收的数据是呼叫处理信号时，IP网络处理电路15向呼叫处理电路12输出数据。当IP网络处理电路15接收到音频或视频数据时，其向数据处理电路11输出数据。

呼叫处理电路12根据H.245协议，将从IP网络处理电路15输入的呼叫处理信号转换为信号，作为3G-324M终端5的呼叫处理信号，并将结果输出到3G网络处理电路14。当呼叫处理电路12转换呼叫处理信号的通信协议时，其从SIP协议信号中提取与SIP终端6的视频有关的配置信息，作为SIP终端6的呼叫处理信号。然后，呼叫处理电路12向信息表单元13和数据处理电路11发送配置信息。

数据处理电路11根据与从呼叫处理电路12发送来的视频有关的配置信息，将从IP网络处理电路15输入的音频或视频数据的格式转换为3G网络3的数据格式。然后，数据处理电路11向3G网络处理电路14输出格式转换后的音频或视频数据。

3G网络处理电路14将例如从呼叫处理电路12接收的H.245协议信号复用为H.223，并将结果发送到3G网络3。3G网络处理电路14将例如从数据处理电路11接收到的音频或视频数据复用为H.223，并将结果发送到3G网络3。

当完成了3G-324M终端5和SIP终端6之间的电视电话通信的呼叫连接控制时，呼叫处理电路12向3G-324M终端5和SIP终端6发送信号，作为请求在预定时间周期内发送帧内编码帧(intra-frame)的请求。“帧内编码帧”是指仅使用同一个帧内的信息来执行压缩处理、与多个顺序排列图像(下面称为帧)中的前后帧无关的帧。当从呼叫处理电路12发出了请求发送帧内编码帧的请求时，3G-324M终端5和SIP终端6发送帧内编码帧。在上述实施例中，呼叫处理电路12具有以下配置：发出请求在预定时间周期内发送帧内编码帧的请求信号，但是不必在预定时间周期内发出请求发送帧内编码帧的请求信号，而可间歇地发出该请求信号。

当监视处理电路16从监视终端2接收到通信状态确认命令信号时，其确认信息表单元13所保存的信息。然后，其向监视终端2发送通过在电视电话通信期间复制信道号而获得的数据。此外，当监视处理电路16从监视终端2接收到监视对象的信道的名称时，其复制信息表单元13所保存的信息中的复用表信息或与所指定信道有关的配置信息，并将所复制的信息发送到监视终端2。然后，监视处理电路16复制来自3G网络处理电路14、从3G网络3接收到的多媒体数据，或者来自IP网络处理电路15、从IP网络4接收到的多媒体数据，并将所复制的数据发送到监视终端2。即，其启动将从3G网络3到IP网络4的多媒体数据或从IP网络4到3G网络3的多媒体数据发送到监视终端2的过程。

图3是示出了信息表单元13中保存的信息示例的解释性视图。如图3所示，在通信期间，在使信息与信道号相关联之后，信息表单元13存储每个通信终端的复用信息或者配置信息。然后，在呼叫连接期间，信息表单元13继续存储诸如复用信息、配置信息等的信息。在图3中，“LCN：0…”表示复用信息的内容示例，“000001B0080”表示配置信息的内容示例。

监视终端2可根据与所接收的多媒体数据有关的复用信息，将多媒体数据解复用为视频数据和音频数据。然后，监视终端2可根据与视频有关的配置信息，对视频数据进行解码，并输出结果。因此，监视终端2可实时执行多媒体数据的监视(从监视处理电路16接收到的多媒体数据中获取音频数据或视频数据，或者音频数据和视频数据，并根据所获取的数据，输出音频数据视频，或者输出音频和视频)。此外，监视终端2对在预定时间周期内从3G-324M终端5和SIP终端6接收的帧内编码帧进行解码。因此，监视终端2可在预定时间周期内输出清晰视频。此外，监视终端2向数据监视设备1发送通信状态确认命令信号，以确定在电视电话通信期间是否有呼叫。如果在监视终端2向数据监视设备1发送命令信号时已经启动了电视电话通信，则监视终端2可在接收到帧内编码帧时输出清晰视频，并且针对多媒体数据启动监视过程。

3G网络3和IP网络4是使用不同通信协议的网络。当在3G网络3和IP网络4之间传送数据时，数据监视设备1转换多媒体数据的通信协议，并对多媒体数据进行格式转换。

下面描述本示范实施例中数据监视设备1和监视终端2的操作。图4是根据本示范实施例的数据监视设备1和监视终端2的操作的流程图。

监视终端2向监视处理电路16发送通信状态确认命令信号，以查询在电视电话通信期间是否存在呼叫(步骤S1)。当接收到通信状态确认命令信号时，监视处理电路16确认信息表单元13所保存的信息。然后，监视处理电路16复制电视电话通信的信道号，并将所复制的号码发送到监视终端2(步骤S2)。当没有电视电话通信信道时，监视终端2终止多媒体数据监视。

当存在电视电话通信信道时，用户从电视电话通信信道中选择要监视的信道和监视对象(例如3G-324终端5或SIP终端6)(步骤S3)。监视终端向监视处理电路16发送表示所选择的监视对象和信道号的信息，作为命令信号。表示监视对象的信息参考了从3G-324M终端5接收的多媒体数据，或者从SIP终端6接收的多媒体数据。

当接收到指定信道号的信息时，监视处理电路16复制从信息表单元13监视到的复用信息或与信道号有关的配置信息，并将所复制的信息发送到监视终端2(步骤S4)。如果表示监视对象的信息参考3G-324M终端5，则监视处理电路16确认是否正在接收从3G网络3接收到的多媒体数据中的监视对象的信道号的多媒体数据。如果表示监视对象的信息参考SIP终端6，则监视处理电路16确认是否正在接收从IP网络4接收到的多媒体数据中要监视的信道号的多媒体数据(步骤S5)。当呼叫断开时，呼叫处理电路12删除存储在信息表单元13中的与监视对象的信道有关的信息。此外，监视表单元13向监视处理电路16通知已经断开了监视对象的信道的呼叫。因此，确认用户未接收到多媒体数据。

如果在特定信道上没有接收到多媒体数据，则监视处理电路16向监视终端2通知尚未接收到多媒体数据。如果监视终端2被通知尚未接收到多媒体数据，则其终止多媒体数据监视。

如果正在特定信道上接收多媒体数据，则监视处理电路16复制多媒体数据，并将其发送到监视终端2(步骤S6)。如果监视对象处于3G-324M终端5中，则监视处理电路16复制来自3G网络处理电路4的多媒体数据，并将所复制的数据发送到监视终端2。如果监视对象处于SIP终端6中，则监视处理电路16复制来自IP网络处理电路15的数据，并将所复制的数据发送到监视终端2。

如果监视对象处于3G-324M终端5中，则监视终端2接收多媒体数据，并根据已经获得的复用信息，将多媒体数据解复用为音频数据和视频数据(步骤S7)。然后，监视终端2对音频数据进行解码。此外，监视终端2根据已经获得的配置信息，对视频数据进行解码(步骤S8)。监视终端2根据所解码的音频数据，输出音频，或根据视频数据，输出视频(步骤S9)。用户可监视来自输出音频和视频的多媒体数据是否存在问题。信息表单元13未存储与IP网络4有关的多媒体数据的复用信息。因此，当SIP终端6包括监视对象时，不必执行步骤S7的步骤。

监视处理电路16复制来自3G网络处理电路14或IP网络处理电路15的多媒体数据，并继续发送数据，直到在特定信道上接收到多媒体数据为止。当在特定信道上未接收到多媒体数据时，监视处理电路16向监视终端2通知未接收到多媒体数据。当监视终端2被通知未接收到多媒体数据时，其终止多媒体数据监视。

在该示范实施例中，如果由于电视电话通信中对多媒体数据的监视过程而使多媒体数据质量下降，则可将多媒体数据质量下降怀疑部分分割。例如，如果在监视对象对于3G-324M终端5中时被监视的视频数据受到干扰，则认为从3G-324M终端5到3G网络处理电路14的某个地方可能存在干扰视频数据的因素，并可分割怀疑部分。如果监视对象处于SIP终端6中，并且被监视的视频数据受到干扰，则认为从SIP终端6到IP网络处理电路15的某个地方可能存在干扰视频数据的因素，并可分割怀疑部分。

在本示范实施例中，监视了音频和视频。然而，可通过仅监视两者之一，将多媒体数据的怀疑部分分割。

2.第二示范实施例

接下来，参考图5来描述本发明的第二示范实施例。图5是示出应用了多媒体数据监视系统的通信系统的另一示例的系统图。第二示范实施例与第一示范实施例的不同之处在于例如：ISDN(综合业务数字网络)7和PSTN8替换3G网络3，ISDN终端9替换3G-324M终端5，并且监视设备1A替换数据监视设备1。监视终端2、IP网络4以及SIP终端6的配置和操作与根据第一示范实施例的监视终端2、IP网络4以及SIP终端6的配置和操作相同。

在图5中，ISDN终端9可执行电视电话通信。数据监视设备1A将PSTN 8连接到IP网络4，以便能够通过ISDN 7，在ISDN终端9和SIP终端6之间进行电视电话通信。

图6是示出了数据监视设备1A的第二示范实施例的系统图。第二示范实施例与第一示范实施例的不同之处在于：PSTN处理电路17替换图2所示的3G网络处理电路14。数据处理电路11、呼叫处理电路12、信息表单元13、IP网络处理电路15以及监视处理电路16的配置和操作与根据第一示范实施例的数据处理电路11、呼叫处理电路12、信息表单元13、IP网络处理电路15以及监视处理电路16的配置和操作相同。

PSTN处理电路17端接从PSTN 8接收到的数据。实际上，PSTN处理电路17执行诸如从接收数据中提取多媒体数据的处理之类的处理。此外，在从PSTN 8接收到的数据是呼叫处理信号时，PSTN处理电路17将数据传递给呼叫处理电路12。当接收数据是多媒体数据时，其将数据传递给数据处理电路11。此外，PSTN处理电路17将例如从呼叫处理电路12输入的H.245协议信号复用为H.223，并将结果发送到PSTN 8。PSTN处理电路17还将从数据处理电路11输入的音频或视频数据复用为H.223，并将结果发送到PSTN 8。

接下来描述根据本发明第二示范实施例的操作。与根据第一示范实施例的操作相比，根据第二示范实施例的操作包括：ISDN终端9替换3G-324M终端5，ISDN7和PSTN 8替换3G网络3，以及PSTN处理电路17替换3G网络处理电路14。

在本示范实施例中，当由于对在电视电话通信中使用的多媒体数据的监视处理而引起多媒体数据质量下降时，可将质量下降的多媒体数据的怀疑部分分割。在第二示范实施例中，监视音频和视频，但是可通过正确地分割多媒体数据质量下降的怀疑部分，来监视两者之一。

在第一示范实施例中，3G网络3与IP网络4作为不同网络示出，但是，在第二示范实施例中，ISDN 7和PSTN以及IP网络作为不同网络示出。然而，不同网络并不局限于这些网络。即，本发明可应用于能够使用其它类型网络来执行诸如电视电话通信之类的通信的多媒体数据监视系统。例如，本发明还可应用于能够通过将ISDN与IP网络相连、将ISDN与互联网服务提供商(ISP)相连、或者将3G网络与ISP网络相连而执行电视电话通信的多媒体数据监视系统。此外，可由相同类型的网络来实现表示为不同网络的部分。

尽管上面描述了多媒体数据，但是本发明还可仅应用于音频数据等。

提供这些实施例的上述说明，以使本领域的技术人员能够做出并使用本发明。此外，对实施例的各种修改对于本领域技术人员而言是显而易见的，并且在不需要具备创造性的条件下，可将这些限定的通用原理和特定示例应用于其它实施例。因此，本发明并不受限于这里所述的实施例，而是根据由所附权利要求及其等同物所限定的最宽范围。

Claims

1.一种数据监视系统，包括：

使用不同通信协议的第一网络和第二网络；

数据监视设备，被配置成连接在所述第一网络和第二网络之间；

监视终端，被配置成对数据进行解码和输出；

与所述第一网络相连的第一通信设备；以及

与所述第二网络相连的第二通信设备，

其中，所述数据监视设备包括：

呼叫处理电路，被配置成根据从所述第一通信设备和所述第二通信设备中的一个向另一个发送的呼叫处理信号，获取解码信息，并将所述解码信息发送到所述监视终端；以及

数据处理电路，被配置成根据所述解码信息将从所述第一和第二网络中的一个输入的、具有语音数据或图像数据的数据的格式转换为另一个格式，并向所述监视终端发送所述的数据，

其中，所述第一通信设备和所述第二通信设备中的一个通过所述数据监视设备向另一个发送所述数据，并且

所述监视终端包括：

被配置成根据所述解码信息来对所述数据进行解码的解码电路。

2.根据权利要求1所述的数据监视系统，其中，所述数据监视设备还包括：

网络处理电路，被配置成将所述第一网络与所述第二网络相连，以及

其中，所述第一网络与所述第二网络不同。

3.根据权利要求2所述的数据监视系统，其中，所述呼叫处理电路向所述第一通信设备或所述第二通信设备请求以预定时间周期发送帧内编码帧。

4.根据权利要求2或3所述的数据监视系统，其中，所述监视终端还包括：

命令电路，被配置成向所述数据监视设备指示要监视的特定通信，

其中，所述呼叫处理电路向所述监视终端发送用于所述特定通信的所述解码信息，以及

其中，所述数据处理电路向所述监视终端发送用于所述特定通信的所述数据。

5.根据权利要求2、3或4所述的数据监视系统：

其中，所述第一通信设备和所述第二通信设备是第三代移动终端或会话发起协议终端。

6.一种连接使用不同通信协议的多个网络的数据监视设备，包括：

呼叫处理电路，被配置成从与所述多个网络中的一个相连的通信设备发送到与所述多个网络中的另一个相连的另一个通信设备的呼叫处理信号中获取解码信息，并将所述解码信息发送到监视终端；以及

数据处理电路，被配置成根据所述解码信息将从所述多个网络中的一个输入的、具有语音数据或图像数据的数据的格式转换成所述另一个网络的数据格式，并向所述监视终端发送具有语音数据或图像数据的数据，

其中，所述通信设备发送所述数据。

7.根据权利要求6所述的数据监视设备，还包括：

网络处理电路，被配置成将所述多个网络中的第一网络与所述多个网络中的第二网络相连；

其中，所述第一网络与所述第二网络不同，以及

其中，所述数据和所述解码信息针对由所述监视终端所指示的特定通信。

8.一种在数据监视系统中使用的方法，所述数据监视系统具有：使用不同通信协议的多个网络、用于在所述多个网络之间进行连接的数据监视设备、用于解码和输出数据的监视终端、与所述多个网络中的一个相连的第一通信设备和与所述多个网络中的另一个相连的第二通信设备，所述方法包括：

所述数据监视设备根据从所述第一通信设备和所述第二通信设备中的一个向另一个发送的呼叫处理信号，获取解码信息；

所述数据监视设备向所述监视终端发送所述解码信息；

所述数据监视设备根据所述解码信息将从所述多个网络中的第一网络和第二网络中的一个输入的、具有语音数据或图像数据的数据的格式转换为另一个网络的格式；

所述数据监视设备向所述监视终端发送所述数据；所述第一通信设备和所述第二通信设备中的一个向另一个发送所述数据；以及

所述监视终端根据所述解码信息来解码所述数据。