CN105100675A - 一种终端视频通信的质量调节方法及系统 - Google Patents

一种终端视频通信的质量调节方法及系统 Download PDF

Info

Publication number
CN105100675A
CN105100675A CN201510579343.2A CN201510579343A CN105100675A CN 105100675 A CN105100675 A CN 105100675A CN 201510579343 A CN201510579343 A CN 201510579343A CN 105100675 A CN105100675 A CN 105100675A
Authority
CN
China
Prior art keywords
receiving terminal
code check
terminal
frame per
transmitting terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510579343.2A
Other languages
English (en)
Other versions
CN105100675B (zh
Inventor
洪瑜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TCL Corp
Original Assignee
TCL Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TCL Corp filed Critical TCL Corp
Priority to CN201510579343.2A priority Critical patent/CN105100675B/zh
Publication of CN105100675A publication Critical patent/CN105100675A/zh
Application granted granted Critical
Publication of CN105100675B publication Critical patent/CN105100675B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种终端视频通信的质量调节方法及系统,通过发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;计算发送终端与接收终端的帧率拟合度和码率拟合度及接收终端的平均时延和平均丢包率;根据所述拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果对应调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量;使得终端能在带宽波动时自动调整视频通信的编码参数,从而适应带宽的变化,保证了视频通信服务的实时性和稳定性。

Description

一种终端视频通信的质量调节方法及系统
技术领域
本发明涉及视频通信技术领域,尤其涉及的是一种终端视频通信的质量调节方法及系统。
背景技术
随着终端技术的不断发展,手机等移动终端的使用越来越普及。目前,人们使用频率最高的电子设备便是手机,用户利用手机进行通话、短信及视频通信等。随着网络速度越来越快,人们越来越多用终端进行视频通信。
视频通信涉及多媒体技术、网络技术与通信技术等多个领域,它能够为身处不同地域的人们提供一个近似面对面的协作环境,相较于传统的语音通信有明显的优越性。当前视频通信应用中的主要问题是由于通信链路的带宽不稳定、动态适应能力差而导致数据传输时出现的丢包、拥塞延时等现象,直接影响了视频通信服务的实时性和稳定性。现有的视频通信的传输质量较差,通信质量差,给用户带来了不便。
因此,现有技术还有待于改进和发展。
发明内容
本发明要解决的技术问题在于,提供一种终端视频通信的质量调节方法及系统,旨在解决现有技术中视频通信的实时性和稳定性差,传输质量低的问题。
本发明解决技术问题所采用的技术方案如下:
一种终端视频通信的质量调节方法,其中,包括:
A、当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;
B、根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;
C、根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。
所述的终端视频通信的质量调节方法,其中,所述步骤A具体包括:
A1、在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息;
A2、每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,统计预定次数K次,所述发送终端的发送码率依次为 发送终端的发送帧率依次为其中K为正整数;
A3、每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,统计预定次数K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
所述的终端视频通信的质量调节方法,其中,所述步骤B具体包括:
B11、根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate MSE b i t r a t e = 1 K Σ i = 1 K ( B i - B ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
B12、根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate MSE f r a m e r a t e = 1 K Σ i = 1 K ( F i - F ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
B13、计算接收终端的平均时延计算接收终端的平均丢包率其中,i=1,2,3…K;K为正整数。
所述的终端视频通信的质量调节方法,其中,所述步骤C具体包括:
C11、判断接收终端的平均时延是否大于预设的时延阈值,若为是则执行步骤C12;若为否则执行步骤C13;
C12、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤C14,若为否则执行步骤C15;
C13、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤C15,若为否则执行步骤C16;
C14、降低发送终端发送视频数据的图像分辨率和编码帧率;
C15、判断码率均方差是否大于码率均方差阈值,若为是,则执行步骤C17,若为否则执行步骤C18;
C16、保持发送终端发送的视频数据的参数不变;
C17、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤C19,若为否,则执行步骤C20;
C18、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤C20,若为否,则执行步骤C21;
C19、降低发送终端发送视频数据的图像分辨率;
C20、降低发送终端发送视频数据的编码帧率;
C21、降低发送终端发送视频数据的编码码率。
一种终端视频通信的质量调节系统,其中,包括:
统计模块,用于当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;
参数计算模块,用于根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;
质量调节模块,用于根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。
所述的终端视频通信的质量调节系统,其中,所述统计模块包括:
连接判断单元,用于在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息;
发送端统计单元,用于通每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,统计预定次数K次,所述发送终端的发送码率依次为发送终端的发送帧率依次为 其中K为正整数;
接收端统计单元,用于每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,统计预定次数K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
所述的终端视频通信的质量调节系统,其中,所述参数计算模块包括:
码率均方差获取单元,用于根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate其中,i=1,2,3…K;K为正整数;
帧率均方差获取单元,用于根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate MSE f r a m e r a t e = 1 K Σ i = 1 K ( F i - F ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
时延及丢包率获取单元,用于计算接收终端的平均时延 D e l a y ‾ = 1 K Σ i = 1 K D i ; 计算接收终端的平均丢包率 L o s s ‾ = 1 K Σ i = 1 K L i ; 其中,i=1,2,3…K;K为正整数。
所述的终端视频通信的质量调节系统,其中,所述质量调节模块包括:
时延判断单元,用于判断接收终端的平均时延是否大于预设的时延阈值,若为是则触发第一丢包率判断单元;若为否则触发第二丢包率判断单元;
第一丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行第一参数调节单元,若为否则执行码率均方差判断单元;
第二丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行码率均方差判断单元,若为否则执行第二参数调节单元;
第一参数调节单元,用于降低发送终端发送视频数据的图像分辨率和编码帧率;
码率均方差判断单元,用于判断码率均方差是否大于码率均方差阈值,若为是,则执行第一帧率均方差判断单元,若为否则执行第二帧率均方差判断单元;
第二参数调节单元,用于保持发送终端发送的视频数据的参数不变;
第一帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第三参数调节单元,若为否,则执行第四参数调节单元;
第二帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第四参数调节单元,若为否,则执行第五参数调节单元;
第三参数调节单元,用于降低发送终端发送视频数据的图像分辨率;
第四参数调节单元,用于降低发送终端发送视频数据的编码帧率;
第五参数调节单元,用于降低发送终端发送视频数据的编码码率。
本发明所提供的一种终端视频通信的质量调节方法及系统,有效地解决了现有技术中视频通信的实时性和稳定性差,传输质量低的问题,通过当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量;使得终端能在带宽波动时自动调整视频通信的编码参数,通过调节视频质量来保证通信质量,使得发送终端发送的数据量可以适应带宽的变化,保证了视频通信服务的实时性和稳定性,给用户带来了大大的方便。
附图说明
图1为本发明提供的终端视频通信的质量调节方法较佳实施例的流程图。
图2为本发明提供的终端视频通信的质量调节方法中发送终端的视频数据信息采样示意图。
图3为本发明提供的终端视频通信的质量调节方法中接收终端的视频数据信息采样示意图。
图4为本发明提供的终端视频通信的质量调节方法中采样窗口拟合示意图。
图5为本发明提供的终端视频通信的质量调节方法中调节逻辑应用实施例示意图。
图6为本发明提供的终端视频通信的质量调节系统较佳实施例的结构框图。
具体实施方式
本发明提供一种终端视频通信的质量调节方法及系统,为使本发明的目的、技术方案及优点更加清楚、明确,以下参照附图并举实施例对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
请参阅图1,图1为本发明提供的终端视频通信的质量调节方法较佳实施例的流程图,如图所示,所述方法包括以下步骤:
步骤S100、当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;
步骤S200、根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;
步骤S300、根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。
下面结合具体的实施例对上述步骤进行详细的描述。
本发明是在视频通信过程中,分别定时统计发送终端发送、接收终端接收到的数据,并将该统计时间段的接收信息反馈给发送终端;发送终端接收到接收终端反馈的接收信息后,与发送信息比较,通过分析二者之间的差异来判定当前通信网络的传输质量。并以此为依据来调节发送终端发送的视频质量。在实际应用时,由于发送终端和接收终端在视频通信时,是相互发送和接收数据的,同理,可调节各个终端。所述发送终端和接收终端可为手机、平板电脑、个人电脑等终端。
在步骤S100中,当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率。在实际应用时,在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息。在发送终端,每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,一共统计预定次数,所述预定次数为K次,所述发送终端的发送码率依次为发送终端的发送帧率依次为其中K为正整数。
在接收终端,每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,一共统计预定次数,所述预定次数为K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
在实际应用时,分别统计一段时间内终端发送和接收的视频数据,需要统计的视频数据信息包括数据量、帧数、帧率和码率。关于帧数、帧率和码率如何统计,此乃现有技术,此处不做详述。本发明是发送终端的数据统计信息,包含发送码率和发送帧率,可以看作是视频数据流在发送终端的信息采样,如图2所示,图2上面的坐标系示意码率采样,图2下面的坐标示意帧率采样,采样时间间隔为T。接收终端的数据统计信息,包含接收码率、接收帧率、时延和丢包率。其中,接收码率和接收帧率可以看作是视频数据流在发送端的信息采样,如图3所示,图3上面的坐标系示意码率采样,图3下面的坐标示意帧率采样,采样时间间隔为T。其中,bitrate为码率,framerate为帧率。
在步骤S200中,根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率。
在实际应用时,所述步骤S200具体包括:
S211、根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate其中,i=1,2,3…K;K为正整数;
S212、根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate MSE f r a m e r a t e = 1 K Σ i = 1 K ( F i - F ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
S213、计算接收终端的平均时延计算接收终端的平均丢包率其中,i=1,2,3…K;K为正整数。
具体来说,本发明是每隔预定时间T、采集K次发送终端和接收终端的视频数据信息。针对码率和帧率的统计信息分别计算接收端与发送端的码率拟合度和帧率拟合度。这里认为发送端的统计信息是原始采样值,也就是原始数据,而接收端的统计信息观测采样值,也就是观测数据,计算二者的均方差,均方差越小说明二者的拟合程度越高。下面以码率信息为例:假设接收端反馈的码率信息为{B1,B2,.....,BK},发送端记录的码率信息为则发送端记录的前K个值与接收端的均方差为 MSE b i t r a t e = 1 K Σ i = 1 K ( B i - B ^ i ) 2 , 其中,i=1,2,3…K;K为正整数,i为正整数,i∈[1,K]。这个均方差体现了上一段观测时间内接收端码率与发送端码率的拟合程度。均方差越小,拟合程度越高,说明接收端的码率变化与发送端的码率变化就越一致,通信网络的影响就越小。
同样的,计算出帧率信息的均方差这两个均方差无法直接表现出通信网络的质量,但在一定程度上可以反映出通信网络的带宽对视频数据传输的影响。
本发明就是反馈周期为K个的预定时间T,则K次接收数据的统计信息的反馈相当于视频流在接收端的一个时间窗口为KT的采样区间。在理想的通信网络下,接收端的这个采样区间应该与发送端的某个采样区间是完全拟合的。以码率信息为例,如图4所示。图4为理想的通信网络下,接收端与发送端的采样区间,采样时间间隔为T,图4上面的坐标表示发送端的在时间轴上任意的两个采样区间;图4下面两个坐标表示分别对应发送端的两个采样区间的接收端的采样区间。发送端的采样区间Window0对应如图4中箭头符号所指的接收端的区间,发送端的采样区间WindowX对应如图4中箭头符号所指的接收端的区间,显然发送端的这两个采样区间与接收端各自对应的两个采样区间是完全拟合的。
同时,时延和丢包率可以反映通信网络传输数据的拥塞延迟。时延越大,丢包率越大说明通信网络的传输质量越差。针对时延和丢包率的统计信息计算上一段观测时间内网络的平均时延和平均丢包率 L o s s ‾ = 1 K Σ i = 1 K L i .
然后便可分析通信网络的传输质量,网络中的节点在网络状况恶化时的策略一般有两种:一是排队,结果就是引起高时延,体现为平均时延较大,平均丢包率较小,同时MSEbitrate和MSEframerate都较大;二是丢弃,结果就是部分数据包缺失,体现为平均时延较小,平均丢包率较大,同时MSEbitrate和MSEframerate都较小。如果上述两种策略都存在的话,那么上述四个值都较大。
在步骤S300中,根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。具体来说,就是根据发送终端多次的发送码率和发送帧率与接收终端的接收码率和接收帧率,计算发送终端与接收终端的码率均方差和帧率均方差;根据接收终端多次的时延和丢包率计算接收终端的平均时延和平均丢包率。
在实际应用时,所述步骤S300具体包括:
S311、判断接收终端的平均时延是否大于预设的时延阈值,若为是则执行步骤S312;若为否则执行步骤S313;
S312、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤S314,若为否则执行步骤S315;
S313、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤S315,若为否则执行步骤S316;
S314、降低发送终端发送视频数据的图像分辨率和编码帧率;
S315、判断码率均方差是否大于码率均方差阈值,若为是,则执行步骤S317,若为否则执行步骤S318;
S316、保持发送终端发送的视频数据的参数不变;
S317、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤S319,若为否,则执行步骤S320;
S318、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤S320,若为否,则执行步骤S321;
S319、降低发送终端发送视频数据的图像分辨率;
S320、降低发送终端发送视频数据的编码帧率;
S321、降低发送终端发送视频数据的编码码率。
具体请参阅图5,根据分析结果调整视频质量,改善服务质量。视频质量的调整主要涉及下面三个编码参数:分辨率、帧率和码率。降低分辨率可以大幅降低视频数据量,但视频质量也会随之有明显降低;降低帧率可以有效降低数据发送频率,非动态场景时视频质量的降低不大;降低码率可以有效降低数据发送量,但视频质量会有一定程度的降低。本发明结合上面的分析结果,针对性对发送终端的视频参数做出调节,通过调节视频质量(也就是降低视频质量)来保证通信质量。关于图像分辨率、编码帧率和编码码率的调节,举例说明如下,视频通信时传输的视频数据为1080P,那么在带宽不够的情况下,可降为720P;同理,编码码率也可降低,例如:在720P的分辨率下由2Mb/s降为1.5Mb/s;编码帧率也可由30帧/s降为25帧/s,这里的降低幅度可根据需要进行设置。
本发明提供的终端视频通信的质量调节方法,在视频通信过程中,通过分析发送终端发送的数据与接收终端接收到的数据之间的差异来判定当前通信网络的传输质量。并以此为依据来调节发送的视频质量,通过调节视频质量来保证通信质量,在带宽波动时自动调整视频编码参数,使得发送的数据量可以适应带宽的变化,保证了视频通信服务的实时性和稳定性,避免了由于通信链路的带宽不稳定、动态适应能力差而导致数据传输时出现的丢包、拥塞延时等现象,提高了视频通信服务的实时性和稳定性。
基于上述终端视频通信的质量调节方法,本发明还提供了一种终端视频通信的质量调节系统,如图6所示,所述系统包括:
统计模块10,用于当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;具体如步骤S100所述;
参数计算模块20,用于根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;具体如步骤S200所述;
质量调节模块30,用于根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量;具体如步骤S300所述。
进一步地,所述统计模块10包括:
连接判断单元,用于在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息;
发送端统计单元,用于通每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,统计预定次数K次,所述发送终端的发送码率依次为发送终端的发送帧率依次为 其中K为正整数;
接收端统计单元,用于每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,统计预定次数K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
进一步地,所述参数计算模块20包括:
码率均方差获取单元,用于根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate其中,i=1,2,3…K;K为正整数;
帧率均方差获取单元,用于根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate MSE f r a m e r a t e = 1 K Σ i = 1 K ( F i - F ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
时延及丢包率获取单元,用于计算接收终端的平均时延 D e l a y ‾ = 1 K Σ i = 1 K D i ; 计算接收终端的平均丢包率 L o s s ‾ = 1 K Σ i = 1 K L i ; 其中,i=1,2,3…K;K为正整数。
进一步地,所述参数计算模块20包括:
参数计算单元,用于根据发送终端多次的发送码率和发送帧率与接收终端的接收码率和接收帧率,计算发送终端与接收终端的码率均方差和帧率均方差;根据接收终端多次的时延和丢包率计算接收终端的平均时延和平均丢包率。
进一步地,所述质量调节模块30包括:
时延判断单元,用于判断接收终端的平均时延是否大于预设的时延阈值,若为是则触发第一丢包率判断单元;若为否则触发第二丢包率判断单元;
第一丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行第一参数调节单元,若为否则执行码率均方差判断单元;
第二丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行码率均方差判断单元,若为否则执行第二参数调节单元;
第一参数调节单元,用于降低发送终端发送视频数据的图像分辨率和编码帧率;
码率均方差判断单元,用于判断码率均方差是否大于码率均方差阈值,若为是,则执行第一帧率均方差判断单元,若为否则执行第二帧率均方差判断单元;
第二参数调节单元,用于保持发送终端发送的视频数据的参数不变;
第一帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第三参数调节单元,若为否,则执行第四参数调节单元;
第二帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第四参数调节单元,若为否,则执行第五参数调节单元;
第三参数调节单元,用于降低发送终端发送视频数据的图像分辨率;
第四参数调节单元,用于降低发送终端发送视频数据的编码帧率;
第五参数调节单元,用于降低发送终端发送视频数据的编码码率。
综上所述,本发明提供的一种终端视频通信的质量调节方法及系统,通过调节视频质量来保证通信质量,在带宽波动时自动调整视频编码参数,使得发送的数据量可以适应带宽的变化,避免了由于通信链路的带宽不稳定、动态适应能力差而导致数据传输时出现的丢包、拥塞延时等现象,提高了视频通信服务的实时性和稳定性,使得终端能在带宽波动时自动调整视频通信的编码参数,给用户带来了大大的方便。
应当理解的是,本发明的应用不限于上述的举例,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (8)

1.一种终端视频通信的质量调节方法,其特征在于,包括:
A、当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;
B、根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;
C、根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。
2.根据权利要求1所述的终端视频通信的质量调节方法,其特征在于,所述步骤A具体包括:
A1、在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息;
A2、每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,统计预定次数K次,所述发送终端的发送码率依次为 发送终端的发送帧率依次为其中K为正整数;
A3、每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,统计预定次数K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
3.根据权利要求2所述的终端视频通信的质量调节方法,其特征在于,所述步骤B具体包括:
B11、根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate MSE b i t r a t e = 1 K Σ i = 1 K ( B i - B ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
B12、根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate MSE f r a m e r a t e = 1 K Σ i = 1 K ( F i - F ^ i ) 2 ; 其中,i=1,2,3…K;K为正整数;
B13、计算接收终端的平均时延计算接收终端的平均丢包率其中,i=1,2,3…K;K为正整数。
4.根据权利要求1所述的终端视频通信的质量调节方法,其特征在于,所述步骤C具体包括:
C11、判断接收终端的平均时延是否大于预设的时延阈值,若为是则执行步骤C12;若为否则执行步骤C13;
C12、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤C14,若为否则执行步骤C15;
C13、判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行步骤C15,若为否则执行步骤C16;
C14、降低发送终端发送视频数据的图像分辨率和编码帧率;
C15、判断码率均方差是否大于码率均方差阈值,若为是,则执行步骤C17,若为否则执行步骤C18;
C16、保持发送终端发送的视频数据的参数不变;
C17、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤C19,若为否,则执行步骤C20;
C18、判断帧率均方差是否大于帧率均方差阈值,若为是,则执行步骤C20,若为否,则执行步骤C21;
C19、降低发送终端发送视频数据的图像分辨率;
C20、降低发送终端发送视频数据的编码帧率;
C21、降低发送终端发送视频数据的编码码率。
5.一种终端视频通信的质量调节系统,其特征在于,包括:
统计模块,用于当发送终端与接收终端建立视频通信连接时,发送终端每隔预定时间统计发送视频数据的发送码率和发送帧率;接收终端每隔预定时间统计接收视频数据的接收码率、接收帧率、时延和丢包率;
参数计算模块,用于根据发送终端多次统计的发送码率和发送帧率与接收终端对应统计的接收码率和接收帧率,分别计算发送终端与接收终端的帧率拟合度和码率拟合度;根据接收终端多次统计的时延和丢包率计算接收终端的平均时延和平均丢包率;
质量调节模块,用于根据所述帧率拟合度、码率拟合度、平均时延和平均丢包率分析发送终端与接收终端的视频通信传输质量,得到对应的分析结果;根据所述分析结果调节发送终端的视频图像分辨率、编码帧率和/或编码码率,以提高视频通信的传输质量。
6.根据权利要求5所述的终端视频通信的质量调节系统,其特征在于,所述统计模块包括:
连接判断单元,用于在发送终端与接收终端建立视频通信连接后,分别统计发送终端和接收终端的视频数据信息;
发送端统计单元,用于通每隔预定时间T统计发送终端发送的视频数据对应的发送码率和发送帧率,统计预定次数K次,所述发送终端的发送码率依次为发送终端的发送帧率依次为 其中K为正整数;
接收端统计单元,用于每隔预定时间T统计接收终端接收所述视频数据对应的接收码率、接收帧率、时延和丢包率,统计预定次数K次,所述接收终端的接收码率依次为{B1,B2,.....,BK},所述接收终端的接收帧率依次为{F1,F2,.....,FK},所述接收终端的时延依次为{D1,D2,.....,DK},所述接收终端的丢包率依次为{L1,L2,.....,LK},其中K为正整数。
7.根据权利要求6所述的终端视频通信的质量调节系统,其特征在于,所述参数计算模块包括:
码率均方差获取单元,用于根据发送终端的发送码率和接收终端的接收码率,计算发送终端与接收终端的码率拟合度,所述码率拟合度为接收终端K次接收码率与发送终端K次发送码率的码率均方差,所述码率均方差MSEbitrate其中,i=1,2,3…K;K为正整数;
帧率均方差获取单元,用于根据发送终端的发送帧率和接收终端的接收帧率,计算发送终端与接收终端的帧率拟合度,所述帧率拟合度为接收终端K次接收帧率与发送终端K次发送帧率的帧率均方差,所述帧率均方差MSEframerate其中,i=1,2,3…K;K为正整数;
时延及丢包率获取单元,用于计算接收终端的平均时延计算接收终端的平均丢包率其中,i=1,2,3…K;K为正整数。
8.根据权利要求5所述的终端视频通信的质量调节系统,其特征在于,所述质量调节模块包括:
时延判断单元,用于判断接收终端的平均时延是否大于预设的时延阈值,若为是则触发第一丢包率判断单元;若为否则触发第二丢包率判断单元;
第一丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行第一参数调节单元,若为否则执行码率均方差判断单元;
第二丢包率判断单元,用于判断接收终端的平均丢包率是否大于预设的丢包率阈值,若为是,则执行码率均方差判断单元,若为否则执行第二参数调节单元;
第一参数调节单元,用于降低发送终端发送视频数据的图像分辨率和编码帧率;
码率均方差判断单元,用于判断码率均方差是否大于码率均方差阈值,若为是,则执行第一帧率均方差判断单元,若为否则执行第二帧率均方差判断单元;
第二参数调节单元,用于保持发送终端发送的视频数据的参数不变;
第一帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第三参数调节单元,若为否,则执行第四参数调节单元;
第二帧率均方差判断单元,用于判断帧率均方差是否大于帧率均方差阈值,若为是,则执行第四参数调节单元,若为否,则执行第五参数调节单元;
第三参数调节单元,用于降低发送终端发送视频数据的图像分辨率;
第四参数调节单元,用于降低发送终端发送视频数据的编码帧率;
第五参数调节单元,用于降低发送终端发送视频数据的编码码率。
CN201510579343.2A 2015-09-11 2015-09-11 一种终端视频通信的质量调节方法及系统 Expired - Fee Related CN105100675B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510579343.2A CN105100675B (zh) 2015-09-11 2015-09-11 一种终端视频通信的质量调节方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510579343.2A CN105100675B (zh) 2015-09-11 2015-09-11 一种终端视频通信的质量调节方法及系统

Publications (2)

Publication Number Publication Date
CN105100675A true CN105100675A (zh) 2015-11-25
CN105100675B CN105100675B (zh) 2019-07-09

Family

ID=54580106

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510579343.2A Expired - Fee Related CN105100675B (zh) 2015-09-11 2015-09-11 一种终端视频通信的质量调节方法及系统

Country Status (1)

Country Link
CN (1) CN105100675B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105681883A (zh) * 2016-01-07 2016-06-15 深圳Tcl数字技术有限公司 音频数据推送方法及系统
CN106937073A (zh) * 2015-12-29 2017-07-07 展讯通信(上海)有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN107770473A (zh) * 2016-08-16 2018-03-06 大唐移动通信设备有限公司 一种音视频数据传输控制方法和装置
CN108184166A (zh) * 2017-12-26 2018-06-19 桂林远望智能通信科技有限公司 一种视频质量分析方法及系统
CN108206925A (zh) * 2016-12-16 2018-06-26 展讯通信(上海)有限公司 多路视频通话的实现方法、装置及多通终端
CN108211352A (zh) * 2017-12-28 2018-06-29 深圳市创梦天地科技股份有限公司 一种调节画质的方法及终端
CN108347580A (zh) * 2018-03-27 2018-07-31 聚好看科技股份有限公司 一种处理视频帧数据的方法及电子设备
CN108377400A (zh) * 2018-03-07 2018-08-07 广州图普网络科技有限公司 一种图像传输优化方法、系统及其装置
CN108881780A (zh) * 2018-07-17 2018-11-23 聚好看科技股份有限公司 视频通话中动态调整清晰度模式的方法、服务器
CN109040830A (zh) * 2017-06-08 2018-12-18 武汉斗鱼网络科技有限公司 直播播放卡顿的预测方法、切换方法及装置
WO2019001154A1 (zh) * 2017-06-30 2019-01-03 深圳市九洲电器有限公司 智能网关动态转换码率的方法及系统
CN109157839A (zh) * 2018-10-16 2019-01-08 Oppo广东移动通信有限公司 帧率调控方法、装置、存储介质及终端
CN109819322A (zh) * 2019-03-15 2019-05-28 网易(杭州)网络有限公司 视频传输方法、装置、计算机可读存储介质及电子设备
CN110312150A (zh) * 2019-04-24 2019-10-08 网宿科技股份有限公司 一种视频帧传输方法、系统及服务器
CN110798738A (zh) * 2018-08-01 2020-02-14 Oppo广东移动通信有限公司 帧率控制方法、装置、终端及存储介质
CN111294546A (zh) * 2019-02-26 2020-06-16 展讯通信(上海)有限公司 一种用于视频通话的分辨率调整方法及装置
CN112752058A (zh) * 2019-10-31 2021-05-04 华为技术有限公司 调整视频流的属性的方法和装置
CN115065643A (zh) * 2022-07-14 2022-09-16 北京达佳互联信息技术有限公司 网络链路拥塞检测方法、装置、电子设备及存储介质
WO2022194140A1 (zh) * 2021-03-18 2022-09-22 上海达龙信息科技有限公司 远程视频传输方法、传输装置、存储介质及电子设备
CN118354029A (zh) * 2024-05-21 2024-07-16 深圳市金华威数码科技有限公司 基于智能协作的视频会议方法、装置、服务器及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2605459A1 (en) * 2010-08-12 2013-06-19 Sony Corporation Information processing device, method and program
CN104009819A (zh) * 2013-02-22 2014-08-27 中兴通讯股份有限公司 基于分层编码的抗丢包实时通信方法、系统及相关设备
CN104394486A (zh) * 2014-11-26 2015-03-04 中标软件有限公司 一种基于云桌面的视频流处理方法及装置
CN104519325A (zh) * 2014-12-29 2015-04-15 重庆邮电大学 一种基于4g网络的无线视频监控系统自适应保障方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2605459A1 (en) * 2010-08-12 2013-06-19 Sony Corporation Information processing device, method and program
CN104009819A (zh) * 2013-02-22 2014-08-27 中兴通讯股份有限公司 基于分层编码的抗丢包实时通信方法、系统及相关设备
CN104394486A (zh) * 2014-11-26 2015-03-04 中标软件有限公司 一种基于云桌面的视频流处理方法及装置
CN104519325A (zh) * 2014-12-29 2015-04-15 重庆邮电大学 一种基于4g网络的无线视频监控系统自适应保障方法

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106937073A (zh) * 2015-12-29 2017-07-07 展讯通信(上海)有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN106937073B (zh) * 2015-12-29 2019-10-15 展讯通信(上海)有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN105681883B (zh) * 2016-01-07 2019-05-31 深圳Tcl数字技术有限公司 音频数据推送方法及系统
CN105681883A (zh) * 2016-01-07 2016-06-15 深圳Tcl数字技术有限公司 音频数据推送方法及系统
CN107770473A (zh) * 2016-08-16 2018-03-06 大唐移动通信设备有限公司 一种音视频数据传输控制方法和装置
CN107770473B (zh) * 2016-08-16 2020-05-26 大唐移动通信设备有限公司 一种音视频数据传输控制方法和装置
CN108206925A (zh) * 2016-12-16 2018-06-26 展讯通信(上海)有限公司 多路视频通话的实现方法、装置及多通终端
CN109040830B (zh) * 2017-06-08 2020-07-31 武汉斗鱼网络科技有限公司 直播播放卡顿的预测方法、切换方法及装置
CN109040830A (zh) * 2017-06-08 2018-12-18 武汉斗鱼网络科技有限公司 直播播放卡顿的预测方法、切换方法及装置
WO2019001154A1 (zh) * 2017-06-30 2019-01-03 深圳市九洲电器有限公司 智能网关动态转换码率的方法及系统
CN108184166A (zh) * 2017-12-26 2018-06-19 桂林远望智能通信科技有限公司 一种视频质量分析方法及系统
CN108211352B (zh) * 2017-12-28 2021-11-23 深圳市创梦天地科技有限公司 一种调节画质的方法及终端
CN108211352A (zh) * 2017-12-28 2018-06-29 深圳市创梦天地科技股份有限公司 一种调节画质的方法及终端
CN108377400A (zh) * 2018-03-07 2018-08-07 广州图普网络科技有限公司 一种图像传输优化方法、系统及其装置
CN108347580A (zh) * 2018-03-27 2018-07-31 聚好看科技股份有限公司 一种处理视频帧数据的方法及电子设备
CN108881780A (zh) * 2018-07-17 2018-11-23 聚好看科技股份有限公司 视频通话中动态调整清晰度模式的方法、服务器
CN110798738A (zh) * 2018-08-01 2020-02-14 Oppo广东移动通信有限公司 帧率控制方法、装置、终端及存储介质
CN110798738B (zh) * 2018-08-01 2022-01-28 Oppo广东移动通信有限公司 帧率控制方法、装置、终端及存储介质
CN109157839B (zh) * 2018-10-16 2022-10-11 Oppo广东移动通信有限公司 帧率调控方法、装置、存储介质及终端
CN109157839A (zh) * 2018-10-16 2019-01-08 Oppo广东移动通信有限公司 帧率调控方法、装置、存储介质及终端
CN111294546B (zh) * 2019-02-26 2022-01-25 展讯通信(上海)有限公司 一种用于视频通话的分辨率调整方法及装置
CN111294546A (zh) * 2019-02-26 2020-06-16 展讯通信(上海)有限公司 一种用于视频通话的分辨率调整方法及装置
CN109819322A (zh) * 2019-03-15 2019-05-28 网易(杭州)网络有限公司 视频传输方法、装置、计算机可读存储介质及电子设备
CN110312150A (zh) * 2019-04-24 2019-10-08 网宿科技股份有限公司 一种视频帧传输方法、系统及服务器
CN110312150B (zh) * 2019-04-24 2022-04-05 网宿科技股份有限公司 一种视频帧传输方法、系统及服务器
CN112752058A (zh) * 2019-10-31 2021-05-04 华为技术有限公司 调整视频流的属性的方法和装置
CN112752058B (zh) * 2019-10-31 2022-10-04 华为技术有限公司 调整视频流的属性的方法和装置
WO2022194140A1 (zh) * 2021-03-18 2022-09-22 上海达龙信息科技有限公司 远程视频传输方法、传输装置、存储介质及电子设备
CN115065643A (zh) * 2022-07-14 2022-09-16 北京达佳互联信息技术有限公司 网络链路拥塞检测方法、装置、电子设备及存储介质
CN115065643B (zh) * 2022-07-14 2024-03-26 北京达佳互联信息技术有限公司 网络链路拥塞检测方法、装置、电子设备及存储介质
CN118354029A (zh) * 2024-05-21 2024-07-16 深圳市金华威数码科技有限公司 基于智能协作的视频会议方法、装置、服务器及存储介质

Also Published As

Publication number Publication date
CN105100675B (zh) 2019-07-09

Similar Documents

Publication Publication Date Title
CN105100675A (zh) 一种终端视频通信的质量调节方法及系统
CN101529901B (zh) 视频特性的动态修改
CN102802089B (zh) 一种基于体验质量预测的移动视频码率调整方法
WO2017148260A1 (zh) 语音编码发送方法和装置
US9137530B2 (en) Video communication method and system for dynamically modifying video encoding
CN102202210B (zh) 手机播放实时监控视频的方法及播放实时监控视频的手机
CN104427286B (zh) 一种进行视频通话的方法和系统
CN102547243B (zh) 基于3g网络的音视频远程监控方法及系统
CN101404778B (zh) 综合的无参考视频质量评价方法
TW201021576A (en) System and method for dynamic video encoding in multimedia streaming
CN106982371B (zh) 码流控制方法和系统、码流管理方法和系统,及终端设备
CN102710374A (zh) 无线流媒体传输中的速率控制方法
WO2023184929A1 (zh) 一种工业互联网多通道数据上传系统
CN106375790A (zh) 一种QoE驱动的多频道HAS码率自适应调度方法
CN107659827A (zh) 基于内容分析的桌面视频编码控制系统
CN103037391B (zh) 基于数据流预测的低功耗rrc协议优化控制方法
CN103716648A (zh) 远程教学系统的数据传输方法及远程教学系统
CN104253967A (zh) 一种实时视频通信传输控制方法
CN101917406B (zh) 数据传输方法及数据传输系统
Zhang et al. AoI and PAoI in the IoT-based multi-source status update system: Violation probabilities and optimal arrival rate allocation
CN104333763A (zh) 一种视频控制方法
CN104506453B (zh) 一种面向用户体验质量的码率分配方法
CN108062041A (zh) 一种针对电力无线业务的RaptorQ编码参量动态调整方法及装置
CN106656371A (zh) 基于接收端信噪比预测的无线速率选择方法及无线网络
CN107888931B (zh) 一种利用视频统计特征预测差错敏感度的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190709

CF01 Termination of patent right due to non-payment of annual fee