CN114389976A - 视频帧传输网络传输管理方法及相关设备 - Google Patents

Abstract

本发明公开了一种视频帧传输网络传输管理方法及相关设备，涉及网络预测管理领域，主要为解决在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题。该方法包括：获取传输报文单元的当前丢包率，所述传输报文单元为所述视频帧拆分后得到的；基于所述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；获取所述传输报文单元的当前延时时间；基于多个所述传输报文单元的当前延时时间和所述上一时刻网络带宽预测值确定第二网络带宽预测值；基于所述第一网络带宽预测值和所述第二网络带宽预测值确定当前网络带宽。本发明用于视频帧传输网络传输管理过程。

Description

视频帧传输网络传输管理方法及相关设备

技术领域

本发明涉及网络预测管理领域，尤其涉及一种视频帧传输网络传输管理方法及相关设备。

背景技术

广域网（WAN，Wide Area Network）也称远程网（long haul network ）。通常跨接很大的物理范围，所覆盖的范围从几十公里到几千公里，它能连接多个城市或国家，或横跨几个洲并能提供远距离通信，形成国际性的远程网络。

广域网的环境复杂多变，为了保证视频帧的实时可靠的传输，必须对广域网的带宽进行预测，当广域网带宽增加时，增加编码码流，提高视频清晰度；当广域网的带宽减少时，降低编码码流，以降低视频质量为代价，保证视频的实时性。因此，能否准确预测带宽，显得尤为重要。

发明内容

鉴于上述问题，本发明提供一种视频帧传输网络传输管理方法及相关设备，主要目的在于解决在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题。

为解决上述至少一种技术问题，第一方面，本发明提供了一种视频帧传输网络传输管理方法，该方法包括：

获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；

基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

获取上述传输报文单元的当前延时时间；

基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；

基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。

可选的，上述基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，包括：

基于上述第一网络带宽预测值和上述第二网络带宽预测值通过公式Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)，确定当前网络带宽Bw，

其中，上述Bw1为第一网络带宽预测值，上述Bw2为第二网络带宽预测值，上述Bw_max为网络带宽预配置的码率上限，上述Bw_min为网络带宽预配置的码率下限。

可选的，上述获取传输报文单元的当前丢包率，包括：

在需要上述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元；

基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定上述当前丢包率。

可选的，上述基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，包括：

在上述当前丢包率小于预设丢包率的情况下，增加上述上一时刻网络带宽预测值，以确定第一网络带宽预测值；

在上述当前丢包率大于或等于预设丢包率的情况下，减小上述上一时刻网络带宽预测值，以确定第一网络带宽预测值。

可选的，上述基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，包括：

在上述当前延时时间大于或等于预设延时时长的情况下，减小上述上一时刻网络带宽预测值，以确定第二网络带宽预测值，否则将上述上一时刻网络带宽预测值确定为上述第二网络带宽预测值。

可选的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取上述人物的动作状态数据和交流状态数据；

在动作状态数据变化小于预设数据量的情况下，仅传输上述交流状态数据以及与上述交流状态数据同步的音频数据。

可选的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取每个人物在视频中的停留时间；

若存在单个人物在视频中的停留时间大于预定停留时间的情况下，在视频画面中剔除背景数据和除上述单个人物外的其余人物数据再进行视频帧传输。

第二方面，本发明实施例还提供了一种视频帧传输网络传输管理装置，包括：

第一获取单元，用于获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；

第一确定单元，用于基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

第二获取单元，用于获取上述传输报文单元的当前延时时间；

第二确定单元，用于基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；

第三确定单元，用于基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。

为了实现上述目的，根据本发明的第三方面，提供了一种计算机可读存储介质，上述计算机可读存储介质包括存储的程序，其中，在上述程序被处理器执行时实现上述的视频帧传输网络传输管理方法。

为了实现上述目的，根据本发明的第四方面，提供了一种电子设备，包括至少一个处理器、以及与上述处理器连接的至少一个存储器；其中，上述处理器用于调用上述存储器中的程序指令，执行上述的视频帧传输网络传输管理方法。

借由上述技术方案，本发明提供的视频帧传输网络传输管理方法及相关设备，对于在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题，本发明通过获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；获取上述传输报文单元的当前延时时间；基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。在上述方案中，将上述视频帧拆分后得到上述传输报文单元进而确定当前丢包率，当前丢包率为本方案第一网络带宽预测值的确定提供了数据基础，基于当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，即可以确定基于丢包率预测的带宽，基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，即可以确定基于延时预测的带宽，最终可以基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，上述基于丢包率和延时分别估算出一个带宽值，并结合其他数据估算出最终的带宽，通过这种方式估算出的带宽，确定当前网络的信息量传输能力，从而实现基于当前网络带宽及时的调整所需传输信息大小及质量，提高拥塞控制准确性和及时性，最终精准的实现当网络状态好时，广域网带宽增加，增加编码码流，提高视频清晰度；当网络状态差时，广域网的带宽减少，降低编码码流，以降低视频质量为代价，保证视频的实时性。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了本发明实施例提供的一种视频帧传输网络传输管理方法的流程示意图；

图2示出了本发明实施例提供的一种视频帧传输网络传输管理装置的组成示意框图；

图3示出了本发明实施例提供的一种视频帧传输网络传输管理电子设备的组成示意框图。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

为了解决在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题，本发明实施例提供了一种视频帧传输网络传输管理方法，如图1所示，该方法包括：

S101、获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；

示例性的，上述传输报文单元的报文(message)是网络中交换与传输的数据单元，即站点一次性要发送的数据块。报文包含了将要发送的完整的数据信息，其长短很不一致，长度不限且可变。例如在传输视频时，当视频数据发送量大于网络带宽时，网络就会发生拥塞，甚至是丢包。此时本方案提出将上述视频帧拆分，获取传输报文单元的当前丢包率，因视频帧比较大，一般都会大于一个MTU（Maximum Transmission Unit，最大传输单元），上述MTU用来通知对方所能接受数据服务单元的最大尺寸，说明发送方能够接受的有效载荷大小。本方案为了更准确的计算丢包率，通过在拆帧后的网络数据包添加对应字段即在协议头打标记的方法确定丢包率。因为当视频数据发送量大于网络带宽时，网络就会发生拥塞，甚至是丢包，故丢包率是评判网络带宽的一个参数，基于此方法确定的丢包率为后续方法的实现提供了数据基础。

S102、基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

示例性的，在发送方获取到当前丢包率后，结合上述当前丢包率确定当前网络状态即网络链路丢包率是否正常，并基于此确定增加还是减少带宽，即上述基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值。本方法确定的第一网络带宽预测值可以准确的反映出丢包率对应的网络状态，为后续计算提供数据支持。

S103、获取上述传输报文单元的当前延时时间；

示例性的，如果网络发送数据大于网络带宽，数据链路也会产生丢包，但是此情况下丢包前，数据包会先在网络产生拥塞，造成的结果就是接收端收到的数据包会产生延时。本发明还提供一种延时算法预测带宽，需要注意的是：由于视频帧的特殊性，每个视频帧拆分成网络数据包后，天然的可以划分为一组，为了防止一组数据过少，无法有效预测延时。本发送中只选用大于50KB的视频帧进行网络延时预测。

因为当视频数据发送量大于网络带宽时，网络就会发生拥塞，接收端收到的数据包会产生延时，故延时是评判网络带宽的一个参数，基于此方法确定的延时为后续方法的实现提供了数据基础。

S104、基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；

示例性的，基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，当延时时间较大时，其对应的第二网络带宽预测值就越小。 上述基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，可以在数据发生延时时，直接调整带宽，不必等到真正产生丢包，可以比基于丢包率的算法，更快的预测出带宽。

S105、基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。

示例性的，上述第一网络带宽预测值即为基于丢包率预测的带宽，上述第二网络带宽预测值即为基于延时预测的带宽。基于上述丢包率预测的带宽和上述基于延时预测的带宽确定的当前网络带宽更加精准准确。

借由上述技术方案，本发明提供的视频帧传输网络传输管理方法，对于在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题，本发明通过获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；获取上述传输报文单元的当前延时时间；基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。在上述方案中，将上述视频帧拆分后得到上述传输报文单元进而确定当前丢包率，当前丢包率为本方案第一网络带宽预测值的确定提供了数据基础，基于当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，即可以确定基于丢包率预测的带宽，基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，即可以确定基于延时预测的带宽，最终可以基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，上述基于丢包率和延时分别估算出一个带宽值，并结合其他数据估算出最终的带宽，通过这种方式估算出的带宽，确定当前网络的信息量传输能力，从而实现基于当前网络带宽及时的调整所需传输信息大小及质量，提高拥塞控制准确性和及时性，最终精准的实现当网络状态好时，广域网带宽增加，增加编码码流，提高视频清晰度；当网络状态差时，广域网的带宽减少，降低编码码流，以降低视频质量为代价，保证视频的实时性。

在一种实施例中，上述基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，包括：

基于上述第一网络带宽预测值和上述第二网络带宽预测值通过公式Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)，确定当前网络带宽Bw，

其中，上述Bw1为第一网络带宽预测值，上述Bw2为第二网络带宽预测值，上述Bw_max为网络带宽预配置的码率上限，上述Bw_min为网络带宽预配置的码率下限。

示例性的，上述第一网络带宽预测值即为基于丢包率预测的带宽，上述第二网络带宽预测值即为基于延时预测的带宽。上述发送方基于丢包率预测的带宽和基于延时预测的带宽确定当前网络带宽即最终带宽预测值，具体计算方式为：

Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)

其中：

Bw1为第一网络带宽预测值即基于丢包率预测的带宽；Bw2为第二网络带宽预测值即基于延时预测的带宽；Bw_max网络带宽预配置的码率上限；Bw_min为网络带宽预配置的码率下限；Bw为最终预测的带宽；在上述公式中：max(a, b)取a,b的较大值；min(a, b)取a,b的较小值。本方法根据丢包率和延时分别估算出带宽，然后结合预配置的带宽上下限，估算出最终的带宽准确性更高，将此带宽反馈到编码器之后，能够提高拥塞控制准确性和及时性。

当网络链路拥堵时，需要通过是否有延时来检测带宽是否超负担，基于延时预测可以比基于丢包率预测更能超前的检测带宽状态，因为有的网络缓冲区较小，可以通过基于丢包率预测，但有的网络缓冲区较大，当发送的数据超过该网络可以承受的能力范围时，该网络可以将其存储起来，故此时基于丢包率预测的方法不再准确，故延时预测方法比丢包更精确，本方法将二者结合可以更精准的预测出带宽，从而提高拥塞控制准确性和及时性。

在一种实施例中，上述获取传输报文单元的当前丢包率，包括：

在需要上述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元；

基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定上述当前丢包率。

示例性的，上述基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定上述当前丢包率的具体实施方式是：发送端将视频帧拆成小于MTU单元的包，在需要上述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元，通过在拆帧后的网络数据包添加对应字段即在协议头打标记的方法，计算出视频数据中重传数据所占的比例，本方法每秒统计一次，经过网络发送后，在接收端再组成完整视频帧。具体计算方式如下：

lost = lost_count/total_count*100

其中：

lost为丢包率；lost_count为1s内接收端收到的视频帧重传包的总个数；total_count为1s内接收端收到的视频帧包的总个数。重传包的判断在发送端检测到数据包需要重传时在协议头中设置一个重传标记。接收端根据该标记判断该数据包是否为重传包，接收端计算出丢包率后将其发送到发送端。

在一种实施例中，上述基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，包括：

在上述当前丢包率小于预设丢包率的情况下，增加上述上一时刻网络带宽预测值，以确定第一网络带宽预测值；

在上述当前丢包率大于或等于预设丢包率的情况下，减小上述上一时刻网络带宽预测值，以确定第一网络带宽预测值。

示例性的，在发送方获取到当前丢包率后，进行如下带宽预测算法：

当lost<2%时，认为网络链路为正常丢包率，此时增加带宽预测值,

B1(i) = Bw (i-1) * 1.05；

当lost>5%时，认为网络链路丢包率较高，网络链路较差，此时减少带宽预测值,

B1(i) = Bw (i-1) * (1-0.5*lost);

其他情况,

B1(i) = B(i-1)。

上述B1(i)为基于丢包率预测的当前网络带宽；Bw(i-1)为上一时刻预测的带宽；上述i为指预测的次数编号。

为了避免由于视频数据量少，丢包率低于2%，预测带宽一直上涨，与实际带宽不符的情况。预测带宽会结合当前的发送码流设定一个上涨差值。具体实施方式如下：

上述B1(i)-send_rate为当前实际发送的带宽，如果B1(i)-send_rate大于预设的上涨差值，例如5000KB，则B1(i) 不再继续增加。基于此方法确定的第一网络带宽预测值可以准确的反映出丢包率对应的网络状态，为后续计算提供数据支持。

在一种实施例中，上述基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，包括：

在上述当前延时时间大于或等于预设延时时长的情况下，减小上述上一时刻网络带宽预测值，以确定第二网络带宽预测值，否则将上述上一时刻网络带宽预测值确定为上述第二网络带宽预测值。

示例性的，在发送方获取到多个上述传输报文单元的当前延时时间后，进行如下带宽预测算法：

B2(i) = Bw (i-1)；

当D小于网络rtt时即当上述当前延时时间小于预设延时时长时，带宽值不变，即将上述上一时刻网络带宽预测值确定为上述第二网络带宽预测值。

B2(i) = 0.95*Bw (i-1)；

当上述当前延时时间大于或等于预设延时时长时，证明当前网络链路较差，减小上述上一时刻网络带宽预测值，然后确定上述第二网络带宽预测值。

上述Bw(i-1)为上一时刻预测的带宽；上述B2(i) 为基于延时预测的网络带宽；上述预设延时时长根据实际情况确定，在此不做过多限定。

本方法的为延时时长划分大小并基于延时时长确定上述第二网络带宽预测值，可以在数据发生延时时，直接调整带宽，不必等到真正产生丢包，可以比基于丢包率的算法，更快的预测出带宽。

在一种实施例中，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取上述人物的动作状态数据和交流状态数据；

在动作状态数据变化小于预设数据量的情况下，仅传输上述交流状态数据以及与上述交流状态数据同步的音频数据。

示例性的，在传输上述视频文件时，对视频进行检测，当检测到上述视频文件存在人物且上述当前网络带宽减小即网络链路较差的情况下，获取上述人物的动作状态数据和交流状态数据，当检测到上述动作状态数据变化小于预设数据量的情况下，证明上述人物动作变化极低甚至不动，上述预设数据量根据实际情况确定，在此不做过多限定，此时仅传输上述交流状态数据以及与上述交流状态数据同步的音频数据，不传输人物的动作状态数据，从而减少网络链路的传输负担，减少网络链路拥堵，增加视频流畅性。

在一种实施例中，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取每个人物在视频中的停留时间；

若存在单个人物在视频中的停留时间大于预定停留时间的情况下，在视频画面中剔除背景数据和除上述单个人物外的其余人物数据再进行视频帧传输。

示例性的，当检测到视频画面中存在人物且预测到上述当前网络带宽减小时，获取每个人物在视频中的停留时间，当检测到视频中的某个单个人物在视频中的停留时间大于预定停留时间时，证明上述单个人物在此段视频中为重点人物，此视频以上述单个人物为中心，此时在视频画面中剔除背景数据和除上述单个人物外的其余人物数据再进行视频帧传输，不再传输背景数据和除上述单个人物外的其余人物数据。从而降低了网络链路的传输负担，减少网络链路拥堵，增加视频流畅性。

进一步的，作为对上述图1所示方法的实现，本发明实施例还提供了一种视频帧传输网络传输管理装置，用于对上述图1所示的方法进行实现。该装置实施例与前述方法实施例对应，为便于阅读，本装置实施例不再对前述方法实施例中的细节内容进行逐一赘述，但应当明确，本实施例中的装置能够对应实现前述方法实施例中的全部内容。如图2所示，该装置包括：第一获取单元21、第一确定单元22、第二获取单元23、第二确定单元24及第三确定单元25，其中

第一获取单元21，用于获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；

第一确定单元22，用于基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

第二获取单元23，用于获取上述传输报文单元的当前延时时间；

第二确定单元24，用于基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；

第三确定单元25，用于基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。

示例性的，上述基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，包括：

基于上述第一网络带宽预测值和上述第二网络带宽预测值通过公式Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)，确定当前网络带宽Bw，

其中，上述Bw1为第一网络带宽预测值，上述Bw2为第二网络带宽预测值，上述Bw_max为网络带宽预配置的码率上限，上述Bw_min为网络带宽预配置的码率下限。

示例性的，上述获取传输报文单元的当前丢包率，包括：

在需要上述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元；

基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定上述当前丢包率。

示例性的，上述基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，包括：

在上述当前丢包率小于预设丢包率的情况下，增加上述上一时刻网络带宽预测值，以确定第一网络带宽预测值；

在上述当前丢包率大于或等于预设丢包率的情况下，减小上述上一时刻网络带宽预测值，以确定第一网络带宽预测值。

示例性的，上述基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，包括：

在上述当前延时时间大于或等于预设延时时长的情况下，减小上述上一时刻网络带宽预测值，以确定第二网络带宽预测值，否则将上述上一时刻网络带宽预测值确定为上述第二网络带宽预测值。

示例性的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取上述人物的动作状态数据和交流状态数据；

在动作状态数据变化小于预设数据量的情况下，仅传输上述交流状态数据以及与上述交流状态数据同步的音频数据。

示例性的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取每个人物在视频中的停留时间；

若存在单个人物在视频中的停留时间大于预定停留时间的情况下，在视频画面中剔除背景数据和除上述单个人物外的其余人物数据再进行视频帧传输。

借由上述技术方案，本发明提供的视频帧传输网络传输管理装置，对于在网络状况多变的情况下，缺少一种更好的预测网络带宽的方法的问题，本发明通过获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；获取上述传输报文单元的当前延时时间；基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。在上述方案中，将上述视频帧拆分后得到上述传输报文单元进而确定当前丢包率，当前丢包率为本方案第一网络带宽预测值的确定提供了数据基础，基于当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，即可以确定基于丢包率预测的带宽，基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，即可以确定基于延时预测的带宽，最终可以基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，上述基于丢包率和延时分别估算出一个带宽值，并结合其他数据估算出最终的带宽，通过这种方式估算出的带宽，确定当前网络的信息量传输能力，从而实现基于当前网络带宽及时的调整所需传输信息大小及质量，提高拥塞控制准确性和及时性，最终精准的实现当网络状态好时，广域网带宽增加，增加编码码流，提高视频清晰度；当网络状态差时，广域网的带宽减少，降低编码码流，以降低视频质量为代价，保证视频的实时性。

本发明实施例提供了一种计算机可读存储介质，上述计算机可读存储介质包括存储的程序，该程序被处理器执行时实现上述视频帧传输网络传输管理方法。

本发明实施例提供了一种处理器，上述处理器用于运行程序，其中，上述程序运行时执行上述视频帧传输网络传输管理方法。

本发明实施例提供了一种电子设备，上述电子设备包括至少一个处理器、以及与上述处理器连接的至少一个存储器；其中，上述处理器用于调用上述存储器中的程序指令，执行如上述的视频帧传输网络传输管理方法

本发明实施例提供了一种电子设备30，如图3所示，电子设备包括至少一个处理器301、以及与处理器连接的至少一个存储器302、总线303；其中，处理器301、存储器302通过总线303完成相互间的通信；处理器301用于调用存储器中的程序指令，以执行上述的视频帧传输网络传输管理方法。

本文中的智能电子设备可以是PC、PAD、手机等。

本申请还提供了一种计算机程序产品，当在流程管理电子设备上执行时，适于执行初始化有如下方法步骤的程序：获取传输报文单元的当前丢包率，上述传输报文单元为上述视频帧拆分后得到的；基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；获取上述传输报文单元的当前延时时间；基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值；基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽。

进一步的，上述基于上述第一网络带宽预测值和上述第二网络带宽预测值确定当前网络带宽，包括：

基于上述第一网络带宽预测值和上述第二网络带宽预测值通过公式Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)，确定当前网络带宽Bw，

其中，上述Bw1为第一网络带宽预测值，上述Bw2为第二网络带宽预测值，上述Bw_max为网络带宽预配置的码率上限，上述Bw_min为网络带宽预配置的码率下限。

进一步的，上述获取传输报文单元的当前丢包率，包括：

在需要上述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元；

基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定上述当前丢包率。

进一步的，上述基于上述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，包括：

在上述当前丢包率小于预设丢包率的情况下，增加上述上一时刻网络带宽预测值，以确定第一网络带宽预测值；

在上述当前丢包率大于或等于预设丢包率的情况下，减小上述上一时刻网络带宽预测值，以确定第一网络带宽预测值。

进一步的，上述基于多个上述传输报文单元的当前延时时间和上述上一时刻网络带宽预测值确定第二网络带宽预测值，包括：

在上述当前延时时间大于或等于预设延时时长的情况下，减小上述上一时刻网络带宽预测值，以确定第二网络带宽预测值，否则将上述上一时刻网络带宽预测值确定为上述第二网络带宽预测值。

进一步的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取上述人物的动作状态数据和交流状态数据；

在动作状态数据变化小于预设数据量的情况下，仅传输上述交流状态数据以及与上述交流状态数据同步的音频数据。

进一步的，上述方法还包括：

在预测上述当前网络带宽减小且视频画面中存在人物的情况下，

获取每个人物在视频中的停留时间；

若存在单个人物在视频中的停留时间大于预定停留时间的情况下，在视频画面中剔除背景数据和除上述单个人物外的其余人物数据再进行视频帧传输。

本申请是参照根据本申请实施例的方法、电子设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程流程管理电子设备的处理器以产生一个机器，使得通过计算机或其他可编程流程管理电子设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

在一个典型的配置中，电子设备包括一个或多个处理器(CPU)、存储器和总线。电子设备还可以包括输入/输出接口、网络接口等。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的计算机可读存储介质的例子包括，但不限于相变内存 (PRAM)、静态随机存取存储器 (SRAM)、动态随机存取存储器 (DRAM)、其他类型的随机存取存储器 (RAM)、只读存储器(ROM)、电可擦除可编程只读存储器 (EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器 (CD-ROM)、数字多功能光盘 (DVD) 或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储电子设备或任何其他非传输介质，可用于存储可以被计算电子设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体 (transitorymedia)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者电子设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者电子设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者电子设备中还存在另外的相同要素。

本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用计算机可读存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种视频帧传输网络传输管理方法，其特征在于，包括：

获取传输报文单元的当前丢包率，所述传输报文单元为所述视频帧拆分后得到的；

基于所述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

获取所述传输报文单元的当前延时时间；

基于多个所述传输报文单元的当前延时时间和所述上一时刻网络带宽预测值确定第二网络带宽预测值；

基于所述第一网络带宽预测值和所述第二网络带宽预测值确定当前网络带宽。

2.根据权利要求1所述的方法，其特征在于，所述基于所述第一网络带宽预测值和所述第二网络带宽预测值确定当前网络带宽，包括：

基于所述第一网络带宽预测值和所述第二网络带宽预测值通过公式Bw = max(min(min(Bw1, Bw2), Bw_max), Bw_min)，确定当前网络带宽Bw，

其中，所述Bw1为第一网络带宽预测值，所述Bw2为第二网络带宽预测值，所述Bw_max为网络带宽预配置的码率上限，所述Bw_min为网络带宽预配置的码率下限。

3.根据权利要求1所述的方法，其特征在于，所述获取传输报文单元的当前丢包率，包括：

在需要所述传输报文单元进行重传的情况下，通过发送端在需要重传的传输报文单元中加入重传标记，生成重传报文单元；

基于发送端在单位时间内发送的报文单元总数和接收端在单位时间内接收到的重传报文单元的数量确定所述当前丢包率。

4.根据权利要求1所述的方法，其特征在于，所述基于所述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值，包括：

在所述当前丢包率小于预设丢包率的情况下，增加所述上一时刻网络带宽预测值，以确定第一网络带宽预测值；

在所述当前丢包率大于或等于预设丢包率的情况下，减小所述上一时刻网络带宽预测值，以确定第一网络带宽预测值。

5.根据权利要求1所述的方法，其特征在于，所述基于多个所述传输报文单元的当前延时时间和所述上一时刻网络带宽预测值确定第二网络带宽预测值，包括：

在所述当前延时时间大于或等于预设延时时长的情况下，减小所述上一时刻网络带宽预测值，以确定第二网络带宽预测值，否则将所述上一时刻网络带宽预测值确定为所述第二网络带宽预测值。

6.根据权利要求1所述的方法，其特征在于，还包括：

在预测所述当前网络带宽减小且视频画面中存在人物的情况下，

获取所述人物的动作状态数据和交流状态数据；

在动作状态数据变化小于预设数据量的情况下，仅传输所述交流状态数据以及与所述交流状态数据同步的音频数据。

7.根据权利要求1所述的方法，其特征在于，还包括：

在预测所述当前网络带宽减小且视频画面中存在人物的情况下，

获取每个人物在视频中的停留时间；

若存在单个人物在视频中的停留时间大于预定停留时间的情况下，在视频画面中剔除背景数据和除所述单个人物外的其余人物数据再进行视频帧传输。

8.一种视频帧传输网络传输管理装置 ，其特征在于，包括：

第一获取单元，用于获取传输报文单元的当前丢包率，所述传输报文单元为所述视频帧拆分后得到的；

第一确定单元，用于基于所述当前丢包率和上一时刻网络带宽预测值确定第一网络带宽预测值；

第二获取单元，用于获取所述传输报文单元的当前延时时间；

第二确定单元，用于基于多个所述传输报文单元的当前延时时间和所述上一时刻网络带宽预测值确定第二网络带宽预测值；

第三确定单元，用于基于所述第一网络带宽预测值和所述第二网络带宽预测值确定当前网络带宽。

9.一种计算机可读存储介质 ，其特征在于，所述计算机可读存储介质包括存储的程序，其中，在所述程序被处理器执行时实现如权利要求1至权利要求7中任一项所述的视频帧传输网络传输管理方法。

10.一种电子设备 ，其特征在于，所述电子设备包括至少一个处理器、以及与所述处理器连接的至少一个存储器；其中，所述处理器用于调用所述存储器中的程序指令，执行如权利要求1至权利要求7中任一项所述的视频帧传输网络传输管理方法。

Images