CN105357590A - 一种实现终端多媒体广播的方法及装置 - Google Patents

Abstract

本发明公开了一种实现终端多媒体广播的方法及装置，涉及通信技术领域，其方法包括以下步骤：建立包括发送终端和接收终端的对等无线局域网；所述发送终端将捕获的多媒体信息处理成流媒体；所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。本发明既能实现语音和视频的实时通讯，又没有任何的移动网络通讯费用。

Description

一种实现终端多媒体广播的方法及装置

技术领域

本发明涉及通信技术领域，特别涉及一种实现终端多媒体广播的方法及装置。

背景技术

语音和视频是信息社会中常见的通讯信息，在3G、4G时代取得了飞速的发展，通过移动网络实现了语音和视频数据的远距离传输。为了降低通讯费用和流量费用，出现VOIP(VoiceoverInternetProtocol，IP电话)实现语音的远距离通话，以及通过家庭wifi网关实现移动终端的数据业务，解决视频等大数据传输。以上是目前遇见的主要的应用场景。

另外，在某些局部范围内需要实现语音和视频的共享，比如在一个教室内，老师需要把语音传递给每个听众，同时还需要把PowerPoint显示的内容共享，此时语音和视频数据不是非常重要，只是需要实时传递。如果在这种情况下，还是通过移动网络实现数据的实时传递的话，由于时间长，数据量大，费用是很大的。

为解决上述问题，本发明提供了一种实现终端多媒体广播的方法及装置。

发明内容

本发明的目的在于提供一种实现终端多媒体广播的方法及装置，解决了现有技术中在通过移动网络实现语音和视频数据的实时传递时，所造成的传递时间长，数据量大，费用也大的问题。

根据本发明的一个方面，提供了一种实现终端多媒体广播的方法，包括以下步骤：

建立包括发送终端和接收终端的对等无线局域网；

所述发送终端将捕获的多媒体信息处理成流媒体；

所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。

优选地，所述的发送终端将捕获的多媒体信息处理成流媒体包括：

在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；

对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；

其中所述N是指正整数。

优选地，所述对等无线局域网包括：

通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

根据本发明的另一方面，提供了一种实现终端多媒体广播的方法，包括以下步骤：

建立包括发送终端和接收终端的对等无线局域网；

所述接收终端接收所述发送终端广播的流媒体；

所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。

优选地，在所述接收终端接收所述流媒体后，还包括：

对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；

根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；

若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；

若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。

根据本发明的另一方面，提供了一种实现终端多媒体广播的装置，包括：

建立模块，用于建立包括发送终端和接收终端的对等无线局域网；

处理模块，用于所述发送终端将捕获的多媒体信息处理成流媒体；

广播模块，用于所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。

优选地，所述的处理模块包括：

添加时间戳单元，用于在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；

处理单元，用于对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；

其中所述N是指正整数。

优选地，所述对等无线局域网包括：

通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

根据本发明的另一方面，提供了一种实现终端多媒体广播的装置，包括：

建立模块，用于建立包括发送终端和接收终端的对等无线局域网；

接收模块，用于所述接收终端接收所述发送终端广播的流媒体；

播放模块，用于所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。

优选地，所述的播放模块还包括：

解析子单元，用于对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；

判断子单元，用于根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；

填充子单元，用于若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；

补偿子单元，用于若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。

与现有技术相比较，本发明的有益效果在于：

本发明可以根据不同需求，利用智能终端捕捉语音和图片信息，组成类似流媒体数据或者单独的语音流，使之可以共享给局域网中每个用户，可以解决大部分人员的内部通讯，信息传递，而不需要增加任何的硬件费用，具有广泛的应用场景。

附图说明

图1是本发明提供的一种实现终端多媒体广播的方法流程图；

图2是本发明提供的一种实现终端多媒体广播的方法流程图；

图3是本发明提供的一种实现终端多媒体广播的装置示意图；

图4是本发明提供的一种实现终端多媒体广播的装置示意图；

图5是本发明实施例提供的终端的第一拓扑结构示意图；

图6是本发明实施例提供的终端的第二拓扑结构示意图；

图7是本发明实施例提供的发送终端的结构示意图；

图8是本发明实施例提供的接收终端的结构示意图；

图9是本发明实施例提供的语音和图片数据采集时间示意图；

图10是本发明实施例提供的音视频数据传输包示意图。

具体实施方式

以下结合附图对本发明的优选实施例进行详细说明，应当理解，以下所说明的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

图1显示了本发明提供的一种实现终端多媒体广播的方法流程图，如图1所示，包括以下步骤：

步骤S101：建立包括发送终端和接收终端的对等无线局域网；

所述对等无线局域网包括：通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

步骤S102：所述发送终端将捕获的多媒体信息处理成流媒体；

步骤S103：所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。

其中，所述的发送终端将捕获的多媒体信息处理成流媒体包括：在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；其中所述N是指正整数。

图2显示了本发明提供的一种实现终端多媒体广播的方法流程图，如图2所示，包括以下步骤：

步骤S201：建立包括发送终端和接收终端的对等无线局域网；

步骤S202：所述接收终端接收所述发送终端广播的流媒体；

步骤S203：所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。

在所述接收终端接收所述流媒体后，还包括：对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。

图3显示了本发明提供的一种实现终端多媒体广播的装置示意图，如图3所示，包括：建立模块301，用于建立包括发送终端和接收终端的对等无线局域网；处理模块302，用于所述发送终端将捕获的多媒体信息处理成流媒体；广播模块303，用于所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。其中，所述的处理模块202包括：添加时间戳单元，用于在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；处理单元，用于对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；其中所述N是指正整数。所述对等无线局域网包括：通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

图4显示了本发明提供的一种实现终端多媒体广播的装置示意图，如图4所示，包括：建立模块401，用于建立包括发送终端和接收终端的对等无线局域网；接收模块402，用于所述接收终端接收所述发送终端广播的流媒体；播放模块403，用于所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。其中所述播放模块403包括：解析子单元，用于对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；判断子单元，用于根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；填充子单元，用于若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；补偿子单元，用于若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。

本发明为了能够让局域网中的每个终端都具有UDP(UserDatagramProtocol，用户数据报协议)广播和UDP接收功能，需要构建对等的局域网节点，而不管终端是否是作为wifi热点使用，都必须要保证局域网中的每个智能终端都具有UDP广播或者多播功能，具体构建的对等网络方式如图5和图6所示。

图5显示了本发明实施例提供的终端的第一拓扑结构示意图，如图5所示，WiFi热点是专用无线猫，其他终端连接到该局域网，所有终端的UDP广播或者多播都会通过Wi-Fi无线路由器广播到局域网的每个终端，从而构成所有终端是对等的局域网。

图6显示了本发明实施例提供的终端的第二拓扑结构示意图，如图6所示，当WiFi热点是移动终端，其他移动终端连接该局域网，由于WiFi热点的移动终端作为路由器使用，与其他局域网终端相比不是对等的，因为只用一个方式无法让UDP广播或者多播在每个终端上是实现。必须对作为热点的终端和非热点终端分别作处理。由于当终端作为热点时，有很多参数需要设置，所以建立UDP广播或者多播通讯的时候，需要把热点参数考虑进去，才能实现UDP广播或者多播。非热点终端按常规处理就行。如此处理之后，就能实现该拓扑结构的所有终端是对等的。

图7显示了本发明实施例提供的发送终端的结构示意图，如图7所示，包括语音和视频捕捉模块701、数据预处理模块702以及数据发送模块703。其中，所述语音和视频捕捉模块701，用于利用智能终端捕捉音频流和视频流需要的帧图片，也就是说，用于捕捉语音和屏幕图片信息。具体地说，所述语音和视频捕捉模块701包括：屏幕图片捕捉子模块和语音捕捉子模块。所述屏幕图片捕捉子模块，用于每隔一小段时间采集所述终端上的屏幕图片，并保存在视频缓冲区，并增加时间戳信息，作为后续视频帧数据源；所述语音捕捉子模块，用于在一段时间连续捕捉所述终端接收到的语音信息，并保存到语音缓冲区，该连续时间的开始时间戳和结束时间戳需要跟屏幕图片采集时间戳匹配，即要求时序对齐。所述数据预处理模块702，用于连续捕捉屏幕图片和语音的视频化合成处理，即把屏幕图片信息和语音信息一定比例存在发送缓冲区中。也就是说，把连续的帧图片合成视频流，然后根据时序对齐，加入音频流，合成完整的流媒体，作为流媒体服务器的数据源，或者简单把音频流和视频流混合在一起传输，就是按顺序把数据放入UDP通讯发送缓冲区中，如图10所示。所述数据发送模块703，用于在对等网络基础上，依次从缓冲区取出数据通过UDPClient端进行广播或者多播，使局域网中的每个终端都可以收到该数据。也就是说，从发送缓冲区中取出数据，在局域网进行UDP广播或者多播。由于UDP广播没有重传机制，也就不会有缓冲区拥塞行为，即发送缓冲区写入数据量大于发送数据量，导致缓冲区溢出现象。

图8显示了本发明实施例提供的接收终端的结构示意图，如图8所示，包括数据接收模块801、数据解析模块802以及数据播放模块803。其中所述数据接收模块801，用于通过UDPServer接收UDP广播或多播数据，并把数据存入接收缓冲区；也就是说，把UDP广播接收到的数据存在接收缓冲区，并区分图片包和语音包，检查图片包和语音包的比例关系，比作补偿或者填充处理。所述数据解析模块802，用于按照已知固定比例把数据解析成语音流和视频流。由于是UDP通讯，可能会造成某个数据包丢失，需要进行一定的处理。由于发送端是N个图片包和1个语音包比例进行发送的，所以一旦发现接收比例不是N:1，可能进行补偿或者空包填充处理。如果是图片丢包，可以复制之前收到的最近的一张图片进行补偿处理，该处理对用户体验影响不大。如果是语音丢包，此时不适合进行补偿处理，就一个具有同样时间长度的没有声音的空包进行填充，保证图片和语音数据流时序对齐，最后按照N：1比例把数据分成语音流和视频流。所述数据播放模块803，用于显示接收到的音视频数据，即把解析出来的音频流和视频流进行单独播放。

此外，本发明还包括参数配置模块，用于捕捉操作和数据传输操作的参数配置，以及模块流程控制。也就是说，根据不同的应用场景和网络拓扑结构，确定需要传输的数据，是单独的语音流，还是单独的视频流，或者合成的音视频流；以及捕捉语音，视频帧图片的参数配置。

图9显示了本发明实施例提供的音视频数据传输包示意图，如图9所示，发送端的图片包和语音包比例是N:1，即在一个FIFO里边，每N个图片包之后有一个语音包。接收端的图片包和语音包也应该是N:1，如何在丢包的情况下，保持N:1比例上边以描述。

从以上的描述中，可以看出，在本发明实施例中，根据实际情况，把需要的语音信息和连续图片按照时序对齐方式先保存到FIFO(FirstInputFirstOutput，先入先出队列)，通过UDP广播或多播使之在局域网中共享给局域网中每个终端用户。改变投影仪共享模式，使共享用户变得没有强烈的地理位置要求，极大的提高语音和视频共享用户体验。

本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

综上所述，本发明具有以下技术效果：

本发明采用wifi局域网无线通讯系统，既能实现语音和视频的实时通讯，又没有任何的移动网络通讯费用，提高了用户体验。

尽管上文对本发明进行了详细说明，但是本发明不限于此，本技术领域技术人员可以根据本发明的原理进行各种修改。因此，凡按照本发明原理所作的修改，都应当理解为落入本发明的保护范围。

Claims (10)

1.一种实现终端多媒体广播的方法，其特征在于，包括以下步骤：

建立包括发送终端和接收终端的对等无线局域网；

所述发送终端将捕获的多媒体信息处理成流媒体；

所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。

2.根据权利要求1所述的方法，其特征在于，所述的发送终端将捕获的多媒体信息处理成流媒体包括：

在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；

对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；

其中所述N是指正整数。

3.根据权利要求1所述的方法，其特征在于，所述对等无线局域网包括：

通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

4.一种实现终端多媒体广播的方法，其特征在于，包括以下步骤：

建立包括发送终端和接收终端的对等无线局域网；

所述接收终端接收所述发送终端广播的流媒体；

所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。

5.根据权利要求4所述的方法，其特征在于，在所述接收终端接收所述流媒体后，还包括：

对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；

根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；

若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；

若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。

6.一种实现终端多媒体广播的装置，其特征在于，包括：

建立模块，用于建立包括发送终端和接收终端的对等无线局域网；

处理模块，用于所述发送终端将捕获的多媒体信息处理成流媒体；

广播模块，用于所述发送终端把所述流媒体广播给所述接收终端，以便所述接收终端在收到所述流媒体后，在所述接收终端播放所述流媒体中的多媒体信息。

7.根据权利要求6所述的装置，其特征在于，所述的处理模块包括：

添加时间戳单元，用于在所捕获的多媒体信息上添加语音时间戳信息和图片时间戳信息；

处理单元，用于对所述添加的语音时间戳信息和图片时间戳信息按照1：N的比例，将所捕获的多媒体信息处理成流媒体；

其中所述N是指正整数。

8.根据权利要求6所述的装置，其特征在于，所述对等无线局域网包括：

通过无线路由器将所述发送终端和所述接收终端连接到对等无线局域网中，使其所述发送终端的流媒体经由无线路由器广播到所述局域网中的接收终端。

9.一种实现终端多媒体广播的装置，其特征在于，包括：

建立模块，用于建立包括发送终端和接收终端的对等无线局域网；

接收模块，用于所述接收终端接收所述发送终端广播的流媒体；

播放模块，用于所述接收终端接收所述流媒体后，分别播放所述流媒体中的语音和图片信息。

10.根据权利要求9所述的装置，其特征在于，所述的播放模块还包括：

解析子单元，用于对所接收到的流媒体进行解析，得到所述流媒体中的多媒体信息；

判断子单元，用于根据所得到的多媒体信息，判断所述语音和图片信息是否丢包；

填充子单元，用于若判断结果为语音信息丢包，则以同样时间长度的无声音空包进行填充；

补偿子单元，用于若判断结果为图片信息丢包，则复制前一张图片信息进行补偿。