CN103974070B - 基于多用户输入输出的无线视频传输方法及系统 - Google Patents

Abstract

一种基于多用户输入输出的无线视频传输方法及系统，所述方法的步骤包括：获取同时上传或者同时下载的若干股视频流数据；对视频流数据进行相似度分析，当相似度分析结果大于或等于预设阀值时，对视频流数据进行共享基准帧的空间域压缩；在OFDM调制方式下对视频流数据进行无比率编码，并执行信道信源匹配后，通过无线信道发送视频流数据。本发明利用数据冗余，通过利用局部范围内用户视频流的相似度，对无线视频数据进行合理的压缩，在保障视频质量相对稳定的情况下，提高了视频流传输效率。

Description

基于多用户输入输出的无线视频传输方法及系统

技术领域

本发明涉及数据传输技术领域，尤其涉及一种基于多用户输入输出的无线视频传输方法及系统。

背景技术

目前，移动视频传输正在成为无线通信的主要网络负载。根据思科(Cisco)视频报表，点播视频的网络流量负载将在2015年增至现在的三倍。 然而，因为无线信道状况极其不稳定，移动视频流的质量很不理想。这个问题吸引了大量的研究兴趣，其目的是提高移动视频传输的性能。当下最前沿的文献提出了改善移动视频传输的几种新技术。这些方案的基本思想是通过解决高度数据冗余，实现较为优质的视频传输效果。

如今，MU-MIMO（多用户多输入多输出）系统可以支持多用户同时上传/下载视频。然而，几乎没有现有技术可以实现在MU-MIMO的WLAN （无线局域网络）实现较为理想的视频传输性能。主要的原因是由于高度的数据冗余可导致数据包冲突和丢包的概率增加，以至于限制了传输性能。

在日常生活中，用户经常会遇到如下两种很差的无线视频体验。一是在某些体育盛会（如：世界杯），很多人一起看相同的视频节目，从而导致了很多人的视频流会卡在某些画面，使得多人同时的视频流下载用户体验极差。二是当用户在上传拍摄的有趣事件的同时，其他在附近的人也会同时上传几乎相同的内容的视频流。这使得多人同时的视频流上传用户体验极差。 几乎没有现有的办法可以解决这两个经常发生在人们日常生活中的问题。这促使技术人员去设计出基于MU-MIMO的、更为高效的、可多人同时上传/下载的视频传输方案。另外，现在大多数的移动设备可以拍摄高清晰度（HD ）视频，以及许多近期发布的专业相机都支持Wi-Fi。这种高清视频流的无线传输会带来更重的无线网络负载，更使得实现这样一个有效的方案显得迫在眉睫。

当下的多人同时视频上传/下载的MU-MIMO的无线传输的性能难以改善，其困难主要为如下两点：1）经常改变无线信道状况；2）共享带宽。视频编解码器是专门设计为在一个相对固定的比特率工作，这个固定的比特率是根据当前信道条件的估算。然而，根据所测量的信道条件来调节比特率这种方法是不实际的。关键原因是，由于无线链路变化频繁，无法得到的瞬时信道质量的信息。此外，由于共享带宽，多人同时上载/下载高清视频与高度的数据冗余会带来更重的工作量，并导致冲突或丢包的概率很高。简而言之，在不断波动的信道条件下，如何高效的实现多人同时视频上传/下载是主要的困难。

发明内容

为了克服上述所指的现有技术中的不足之处，本发明提供一种基于多用户输入输出的无线视频传输方法及系统，以对多人同时上传/下载的视频流数据进行合理的压缩，在基本不影响视频传输质量的前提下，提高传输效率。

本发明是通过以下技术方案实现的：

一种基于多用户输入输出的无线视频传输方法，其步骤包括：

S1、获取同时上传或者同时下载的若干股视频流数据；

S2、对视频流数据进行相似度分析，当相似度分析结果大于或等于预设阀值时，对视频流数据进行共享基准帧的空间域压缩；

S3、在OFDM调制方式下对视频流数据进行无比率编码，并执行信道信源匹配后，通过无线信道发送视频流数据。

进一步地，在步骤S2中，所述相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析。

较佳地，在步骤S2中，对图像帧的相似度分析采用平均绝对差计算方式。

应用于多用户同时上传的若干股视频流数据，所述步骤S2包括：

S 21、发射端将同时上传的若干股视频流数据传输至接收端；

S 22、接收端对视频流数据在同一时间点的一图像帧进行相似度分析；

S 23、当相似度分析结果大于或等于预设阀值时，接收端广播反馈该图像帧作为共有的基准帧，否则终止空间域压缩；

S24、各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，接收端继续对该下一图像组的I帧进行相似度分析。

应用于多用户同时下载的若干股视频流数据，所述步骤S2包括：

S 21、发射端对同时下载的若干股视频流数据在同一时间点的一图像帧进行相似度分析；

S 22、当相似度分析结果大于或等于预设阀值时，发射端向各接收端广播反馈该图像帧作为共有的基准帧，并基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，否则终止空间域压缩；

S23、发射端继续对下一图像组的I帧进行相似度分析。

优选地，在步骤S2中，所述预设阀值设置为50%～70%。

本发明还公开了一种无线视频传输系统，包括：

数据获取模块，用于获取同时上传或者同时下载的若干股视频流数据；

数据压缩模块，用于对视频流数据进行相似度分析，当相似度分析结果大于或等于预设阀值时，对视频流数据进行共享基准帧的空间域压缩；

数据调制模块，用于在OFDM调制方式下对视频流数据进行无比率编码，并执行信道信源匹配；

数据发送模块，用于通过无线信道发送视频流数据。

所述数据压缩模块用于对视频流数据进行相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析。

应用于多用户同时上传的若干股视频流数据，所述数据压缩模块包括：

相似度分析单元，用于接收端对同时上传的若干股视频流数据在同一时间点的一图像帧进行相似度分析，当相似度分析结果大于或等于预设阀值时，接收端广播反馈该图像帧作为共有的基准帧，否则启动终止单元；

压缩单元，用于各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，通过相似度分析单元继续对该下一图像组的I帧进行相似度分析；

终止单元，用于终止空间域压缩。

应用于多用户同时下载的若干股视频流数据，所述数据压缩模块包括：

相似度分析单元，用于发射端对同时下载的若干股视频流数据在同一时间点的一图像帧进行相似度分析，当相似度分析结果大于或等于预设阀值时，发射端向各接收端广播反馈该图像帧作为共有的基准帧，否则启动终止单元；

压缩单元，用于发射端基于基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，通过相似度分析单元继续对该下一图像组的I帧进行相似度分析；

终止单元，用于终止空间域压缩。

与现有技术相比，本发明提出了一种高效的，基于多用户多输入多输出(MU-MIMO)，用来支持多人同时视频上传/下载的跨层无线传输设计，主要利用无线信道的频率分集(frequency diversity)和局部空间内用户浏览视频流的相似性为基础设计的。为了更进一步提高效率，利用数据冗余（即在同一局部区域内，同时段用户所下载或上传的视频流具有很高的相似度），除了关注视频传输过程，同时分析和关注客户行为。由于在特定的区域，大多数人同时上载/下载的视频流具有很高的相似度，因此通过利用局部范围内用户视频流的相似度，对无线视频数据进行合理的压缩。在保障视频质量相对稳定的情况下，提高了视频流传输效率。

附图说明

附图1为本发明一种实施例的基于多用户输入输出的无线视频传输方法的实现流程示意图；

附图2为本发明一种实施例的空间域压缩的实现流程示意图；

附图3为本发明一种实施例的接收端解码流程示意图；

附图4为本发明一种实施例的基于多用户输入输出的无线视频传输系统的架构示意图。

具体实施方式

为了便于本领域技术人员的理解，下面结合附图对本发明作进一步的描述。

一种基于多用户输入输出的无线视频传输方法，如附图1所示，其步骤包括：

S101、获取同时上传或者同时下载的若干股视频流数据；

S102、对视频流数据进行相似度分析，当相似度分析结果大于或等于预设阀值时，对视频流数据进行共享基准帧的空间域压缩；

S103、在OFDM调制方式下对视频流数据进行无比率编码；

S104、执行信道信源匹配；

S105、通过无线信道发送视频流数据。

其中，所述无线视频传输方法主要包含三部分，即空间域相似度压缩、无比率编码、信源信道匹配。在本发明的较佳实施例中，该无线视频传输方法还包括：S106、接收端反馈信道条件。在无比率编码和信道信源匹配过程中，视频流数据的发射端得到接收端的信道信息反馈。

本发明的方法是一种基于多用户多输入多输出(MU-MIMO)技术的高效无线视频传输设计，其目的是提高多用户同时上传/下载视频传输质量和效率，利用了局部范围内（比如局域网内）用户视频流相似度和正交频分复用技术(OFDM)的频率分集(FrequencyDiversity)，对无线视频流数据进行了合理的压缩和无比率编码。从而在保证视频流质量的前提下，降低了传输的冗余性，进而减少了无线路由器在多人同时上传/下载视频流时的调度代价，从而提高了多人上传/下载的视频流传输效率。

在步骤S101中，列举了本方法的两种实施环境，一是在多用户同时上传视频流的情况，二是获取在多用户同时下载视频流的情况，在以上两种实施环境中，所应用的本发明的无线视频传输原理是基本相同的，在本发明的实施例中，主要地是以多用户同时上传视频流的情况作为示例。

由于在同一局部区域内，同时段用户所下载或上传的视频流具有很高的相似度，因此，为了更进一步提高效率，利用数据冗余，除了关注视频传输过程，本发明也对客户行为进行了分析和关注，对多人同时上传/下载的视频流进行空间域相似度压缩，通过充分利用空间域的相似度，进一步压缩数据。

在步骤S102中，对多股同时上传/下载的视频流进行相似度匹配，若该多股视频流相似度达到一预设阀值，则可采用空间域压缩。以多人同时上传视频流为例，在首次进行空间域压缩前，接收端（即无线路由器）首先根据在某一较短的时间段内同时上传的视频流的相似度进行判定。所述相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析，判定过程是通过计算多股视频流同一时间的图像帧相似度。优选地，采用计算平均绝对差（Mean Absolute Difference）进行图像帧的相似度分析。优选地，所述步骤S102中的预设阀值设置为50%～70%，较佳地，可设置为60%。当该若干股视频流的相似度大于等于60%，则满足压缩条件，接收端广播反馈回一帧共同分享的基准帧（I-frame）；各发射端接收后，以此帧图像为基准，计算及上传基于此帧的后续变换帧图像（包含P帧、B帧等），并生成下一组图像组GOP（group of picture）（包含P帧、B帧等）。之后无线路由器通过分析后续GOP中I-frame的相似度来判定是否继续反馈公共基准帧，若相似度小于预设阈值，则可终止空间域压缩。比如，如果后续分析的GOP中I-frame的相似度大于60%，则依旧反馈公共基准帧，然后进行空间域压缩；反之，即相似度小于60%时，则不反馈公共基准帧，也不进行空间域压缩。在后续的图像组GOP传输过程中，所有上传用户基于共同分享的基准帧来发送后续的变换帧图像（包含P帧、B帧等）。

对于同时上传的若干股视频流数据，所述发射端为各用户端，接收端为路由器，其空间域压缩的实现流程如附图2所示，其步骤包括：

S 201、发射端将同时上传的多股视频流数据传输至接收端；

S 202、接收端对视频流数据在同一时间点的一图像帧进行相似度分析；

S 203、判断相似度分析结果是否大于或等于预设阀值，若是，执行步骤S204，否则，执行步骤S208；

S204、接收端广播反馈当前帧作为共有的基准帧；

S205、各发射端接收该基准帧，基于该基准帧计算及上传各视频流数据的后续帧，并生成下一图像组；

S206、对该下一图像组的I帧进行相似度分析；

S 207、判断相似度分析结果是否大于或等于预设阀值，若是，返回步骤S204，否则，执行步骤S208；

S208、终止空间域压缩。

本方法应用于同时下载的若干股视频流数据时，所述发射端为路由器，接收端为各用户端，其空间域压缩的实现流程与多用户同时上传视频流数据相似，其步骤包括：

S 211、发射端对同时下载的若干股视频流数据在同一时间点的一图像帧进行相似度分析；

S 212、当相似度分析结果大于或等于预设阀值时，发射端向所有接收端广播反馈该图像帧作为共有的基准帧，并基于该基准帧计算及传输各视频流的后续帧，生成下一图像组，否则终止空间域压缩；

S213、对该下一图像组的I帧进行相似度分析；

S214、当相似度分析结果大于或等于预设阀值时，继续广播该I帧作为共有的基准帧，发射端生成基于该基准帧的后续帧下发，并生成下一图像组，返回步骤S213，否则终止空间域压缩。

在上述空间域压缩的过程中，各接收端接收基准帧，基于接收到的基准帧，再根据各自收到的后续帧信息对接收到的视频流数据进行解码。

进一步地，在步骤S103中，在OFDM调制方式下利用频率分集改善了无比率编码传输冗余性，同时采用信道信源匹配编码。为了应对频繁变化的信道条件，本发明采用无比率码，以确保发射端以一个相对固定的比特率发送视频流。然而，当下最好的无比率码（即脊柱码spinal codes），不能直接应用在当下无线OFDM （正交频分复用）系统中，这是因为脊柱码无法利用频率分集，从而无法根据不同子载波状况来调节传输的效率。根据实验观察，由于频率选择性衰落，接收端上每个子载波的解码能力各不相同。因此，可以通过利用频率分集实现更高的信道容量，可以通过修改脊柱码，提出改进的细粒度脊柱码(F-spinal)。

基于F-spinal的无比率编码，其视频流编码具体分为离散余弦变换（DiscreteCosine Transform），量化分级（Quantization）以及本发明提出的F-spinal无比率编码。前两个步骤是标准的MPEG4视频编码格式操作，因此不再赘述。在此将传统MPEG4视频编码格式的第三步，即压缩（Compression），用本实施例的F-spinal无比率编码替代。而F-spinal无比率编码是基于脊柱码（spinal code）改进而来。传统的spinal code并没有考虑OFDM的频率分集特性，它直接将视频帧一个区块的数据流并行传输在所有OFDM子信道上。这样的话，在这个区块的信息被完全成功解码之前，所有子信道都在持续传输。在这个过程中，信道条件较好的有较高解码率的子信道则会不停的传输已经成功解码的冗余信息，因此信道的整体利用率较低。基于OFDM特有的频率分集特点，在此提出的改进版的F-spinal采用子信道独立编码传输。具体做法就是将每个区块的信息放在某个特定的子信道上传输，这样每个子信道上传输的内容就是相对独立的，即每个子信道解码不需要依靠其他子信道的解码信息。这样信道条件好，解码率高的子信道完成解码后，就可以在这种子信道上传输新的区块信息。

相比于传统无比率编码不需要发射端知道信道状况，本发明的F-spinal则需要接收端反馈哪些子信道已经成功完成当下信息传输，可以发射新的区块信息。鉴于此，本实施例提出了微反馈机制（Micro-ACK）。具体做法就是，在发射端每完成一轮信息传输。接收端会反馈给发射端一个字符（symbol）的信息，而不是发送一个传统较大的acknowledge包反馈。这个字符由N个bit组成，N表示当前传输所用的子信道个数。其中每个bit，采用BPSK的调制方式，1代表这个子信道已经成功解码这一轮信息解码，0代表未能正确解码。通过这个极为轻量级的信道条件反馈，从而可以满足发射端对于不同信道状况的子信道进行不同的数据包调度传输（比如让高解码率的子信道传输新的区块信息，低解码率的子信道仍旧传输之前未能解码信息）。

进一步地，只通过根据频率分集的无比率码并不能保证优质的无线视频传输性能。这是因为在无比率编码中，所有数据比特会被赋予同样的重要性级别，然而，一个视频帧的每个区块（chunk）的所包含的视频信息分布并不是均匀的，鉴于此，不能把每个区块以同等重要性来发射。因此在步骤S104中的信源和信道匹配过程，该信源信道匹配设计是基于这样一个事实：子通道的状态和信源每个区块所携带的视频信息都是非均匀分布的。如果用更可靠的子信道来传输信息含量高的区块，使用信道条件较差的子信道来传输信息含量低的区块，则可以利用频率分集来实现不等错误保护（英文简写为UEP，即unequal errorprotection）。传统的方法利用高数据冗余来实现UEP，本发明则是利用信源信道的相互匹配达到同样的目的，无需额外的冗余信息传输，而是利用F-spinal编码获得的微反馈（Micro-ACK）信息，来估计信道状况。具体做法是，根据连续的m轮传输得到的Micro–ACK信息，将每个子信道的m个bit的值叠加，然后由高到低排序（因为1代表成功解码，0代表未成功解码。所以一段时间内，1越多代表子信道条件越好的几率越大），这样完成了信道条件由好到差的估计。对于图像帧的区块对还原画面的重要性分析。通过计算均方误差MeanSquared Error（MSE）和利用F-spinal编码所计算的DCT 系数来衡量。MSE表示该区块对这个图像组GOP的影响，DCT系数表示该区块对当前画面帧的影响。具体做法就是将要同时传输的每个图像帧区块的MSE和DCT系数相乘，得到结果从高到底排序，越高代表该区块越重要，这样就完成了图像帧区块的重要性分析。然后用好的子信道传输重要的区块信息，从而完成了信源信道匹配过程，若不重要的图像帧区块，在信道条件差的子信道多轮传输仍无法正确解码，则选择舍弃该部分信息，进行后续传输。

本发明的空间域相似性压缩与F-spinal编码、信源信道匹配相结合，在信道条件较差的情况下，相比于传统方法（如：mpeg4）可以提高视频质量约为5 dB 的峰值信噪比PSNR（Peak Signal-to-Noise Ratio）。由于使用了改进版脊柱码，可以在丢包率高达10%的情况下，仍可保持较为优质的用户视频画质（约32 dB PSNR）；在保障视频质量相对稳定的情况下，提高了视频流传输效率；相比于传统视频编码方式（如：mpeg4），可使得网络吞吐率可以高达140% (信噪比SNR小于20 dB)，平均性能为传统编码方式的120%。

如附图3所示，为接收端的数据处理流程图。其工作流程基本为附图1的无线视频传输方法的实现过程的一个逆过程。在此不再赘述。

本发明还公开了一种无线视频传输系统，如附图4所示，包括：

数据获取模块41，用于获取同时上传或者同时下载的若干股视频流数据；

数据压缩模块42，用于对视频流数据进行相似度分析，当相似度分析结果大于或等于预设阀值时，对视频流数据进行共享基准帧的空间域压缩，所述预设阀值可设置为50%～70%，优选地，可设置为60%；

数据调制模块43，用于在OFDM调制方式下对视频流数据进行无比率编码，并执行信道信源匹配；

数据发送模块44，用于通过无线信道发送视频流数据。

进一步地，所述数据压缩模块42用于对视频流数据进行相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析。

较佳地，所述数据压缩模块42对图像帧的相似度分析是采用平均绝对差计算方式。

本发明应用于多用户同时上传若干股视频流数据的一种实施方式中，所述数据压缩模块42包括：

相似度分析单元，用于接收端对同时上传的若干股视频流数据在同一时间点的一图像帧进行相似度分析，当相似度分析结果大于或等于预设阀值时，接收端广播反馈该图像帧作为共有的基准帧，否则启动终止单元；

压缩单元，用于各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，通过相似度分析单元继续对该下一图像组的I帧进行相似度分析；

终止单元，用于终止空间域压缩。

本发明应用于多用户同时下载若干股视频流数据的一种实施方式中，所述数据压缩模块42包括：

相似度分析单元，用于发射端对同时下载的若干股视频流数据在同一时间点的一图像帧进行相似度分析，当相似度分析结果大于或等于预设阀值时，发射端向各接收端广播反馈该图像帧作为共有的基准帧，否则启动终止单元；

压缩单元，用于发射端基于基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，通过相似度分析单元继续对该下一图像组的I帧进行相似度分析；

终止单元，用于终止空间域压缩。

以上内容是结合具体的优选方式对本发明所作的进一步详细说明，不应认定本发明的具体实施只局限于以上说明。对于本技术领域的技术人员而言，在不脱离本发明构思的前提下，还可以作出若干简单推演或替换，均应视为由本发明所提交的权利要求确定的保护范围之内。

Claims (5)

1.一种基于多用户输入输出的无线视频传输方法，其步骤包括：

S1、发射端获取同时上传或者同时下载的若干股视频流数据；

S2、对视频流数据进行相似度分析，所述相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析，当相似度分析结果大于或等于预设阈值时，接收端广播反馈该图像帧作为共有的基准帧， 各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组；或者当相似度分析结果大于或等于预设阈值时，发射端向各接收端广播反馈该图像帧作为共有的基准帧，并基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组；

S3、在OFDM 调制方式下对视频流数据进行基于 F-spinal 的无比率编码，并执行信道信源匹配后，通过无线信道发送视频流数据，该信道信源匹配为用更可靠的子信道来传输信息含量高的区块，使用信道条件较差的子信道来传输信息含量低的区块。

2.根据权利要求1 所述的基于多用户输入输出的无线视频传输方法，其特征在于：在步骤S2 中，对图像帧的相似度分析采用平均绝对差计算方式。

3.根据权利要求1或2所述的基于多用户输入输出的无线视频传输方法，其特征在于：在步骤S2 中，所述预设阈值设置为50% ～70%。

4.一种无线视频传输系统，其特征在于，包括：

数据获取模块，用于获取同时上传或者同时下载的若干股视频流数据；

数据压缩模块，用于对视频流数据进行相似度分析，所述相似度分析是对若干股视频流的同一时间点的图像帧进行相似度分析，当相似度分析结果大于或等于预设阈值时，接收端广播反馈该图像帧作为共有的基准帧， 各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组；或者当相似度分析结果大于或等于预设阈值时，发射端向各接收端广播反馈该图像帧作为共有的基准帧，并基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组；

数据调制模块，用于在OFDM 调制方式下对视频流数据进行基于 F-spinal 的无比率编码，并执行信道信源匹配，该信道信源匹配为用更可靠的子信道来传输信息含量高的区块，使用信道条件较差的子信道来传输信息含量低的区块；

数据发送模块，用于通过无线信道发送视频流数据。

5.根据权利要求4所述的无线视频传输系统，其特征在于，所述数据压缩模块包括：

相似度分析单元，用于接收端对同时上传的若干股视频流数据在同一时间点的一图像帧进行相似度分析，当相似度分析结果大于或等于预设阈值时，接收端广播反馈该图像帧作为共有的基准帧，否则启动终止单元；

压缩单元，用于各发射端接收基准帧，基于该基准帧计算及传输各视频流数据的后续帧，并生成下一图像组，通过相似度分析单元继续对该下一图像组的I 帧进行相似度分析；

终止单元，用于终止空间域压缩。