CN109714557A - 视频通话的质量评估方法、装置、电子设备和存储介质 - Google Patents
视频通话的质量评估方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN109714557A CN109714557A CN201711015783.0A CN201711015783A CN109714557A CN 109714557 A CN109714557 A CN 109714557A CN 201711015783 A CN201711015783 A CN 201711015783A CN 109714557 A CN109714557 A CN 109714557A
- Authority
- CN
- China
- Prior art keywords
- video
- quality
- audio
- determining
- distortion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 95
- 230000005540 biological transmission Effects 0.000 claims abstract description 152
- 238000012549 training Methods 0.000 claims description 68
- 230000003993 interaction Effects 0.000 claims description 38
- 238000006243 chemical reaction Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 13
- 238000013441 quality evaluation Methods 0.000 abstract description 49
- 238000011156 evaluation Methods 0.000 description 32
- 230000008447 perception Effects 0.000 description 20
- 238000013528 artificial neural network Methods 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 9
- 238000013210 evaluation model Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000012360 testing method Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 238000001303 quality assessment method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明实施例提供一种视频通话的质量评估方法、装置、电子设备和存储介质。所述方法包括根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；根据所述音频的失真参数，确定音频的质量；根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；根据所述视频的失真参数，确定视频的质量；根据所述音频的质量和所述视频的质量，确定视频通话的质量。所述方法通过考虑音频的编码参数，以及视频的编码参数，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
Description
技术领域
本发明实施例涉及一种通信技术领域，特别是一种视频通话的质量评估方法、装置、电子设备和存储介质。
背景技术
随着VoLTE(Voice Over LTE，基于LTE网络的语音业务)技术的成熟和完善，基于4G(4rd-Generation，第四代移动通信技术)的视频通话业务越来越受到用户的青睐。与此同时，视频通话的画面不清晰、卡顿、延迟高等一系列问题也逐步暴漏出来。
QoE(quality of experience，体验质量或感知质量)是用于评价用户对移动网络提供的业务性能的主观感受的指标，以一种量化的方式来反映用户对业务性能的满意程度。QoE的评价主体是用户，评价对象是业务和支撑业务的网络。QoE的量化指标可以用优秀、很好、好、一般、差5个级别来标识。
现有技术中针对VoLTE网络视频用户的QoE的评估方案是通过KPI(KeyPerformance Indicator，关键绩效指标)评价体系来实现的。
可选地，KPI评价体系包括QoS(quality of service，服务质量)的评价，但QoS只反映网络性能参数，如带宽、分组丢失率、时延、抖动等。主要负责从网络的角度进行业务管理，使得网络实体根据不同的质量需求来处理不同业务。
现有技术由视频通话质量的QoS来进行视频通话质量的QoE评估存在以下技术问题:
视频通话质量的QoS是面向网络，研究网络、网元性能对视频通话质量的影响。而视频通话质量的QoE是面向用户，研究用户主观体验视频通话的感受，可以理解的是，QoS的网络性能参数是影响用户感受的一个因素，但实际应用中，影响用户对视频通话是否满意的因素众多，仅根据QoS确定视频通话质量的QoE，表示用户的视频通话的真实的感受，准确性并不高。
目前，现有技术还没有相应的方法来解决上述问题。
发明内容
针对现有技术的缺陷，本发明实施例提供一种视频通话的质量评估方法、装置、电子设备和存储介质。
一方面，本发明实施例提供一种视频通话的质量评估方法，所述方法包括：
根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
根据所述音频的失真参数，确定音频的质量；
根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
根据所述视频的失真参数，确定视频的质量；
根据所述音频的质量和所述视频的质量，确定视频通话的质量。
另一方面，本发明实施例提供一种视频通话的质量评估装置，所述装置包括：
第一确定模块，用于根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
第二确定模块，用于根据所述音频的失真参数，确定音频的质量；
第三确定模块，用于根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
第四确定模块，用于根据所述视频的失真参数，确定视频的质量；
第五确定模块，用于根据所述音频的质量和所述视频的质量，确定视频通话的质量。
另一方面，本发明实施例还提供一种电子设备，包括存储器、处理器、总线以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现以上的步骤。
另一方面，本发明实施例还提供一种存储介质，其上存储有计算机程序，所述程序被处理器执行时实现以上的步骤。
由上述技术方案可知，本发明实施例提供的视频通话的质量评估方法、装置、电子设备和存储介质，所述方法通过考虑音频的编码参数，以及视频的编码参数，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
附图说明
图1为本发明实施例提供的一种视频通话的质量评估方法的流程示意图；
图2为本发明又一实施例提供的视频通话的质量评估方法的评估架构示意图；
图3为本发明又一实施例提供的视频通话的质量评估中音频评估的流程示意图；
图4为本发明又一实施例提供的视频通话的质量评估中视频评估的流程示意图；
图5为本发明又一实施例提供的视频通话的质量评估中映射体系示意图；
图6为本发明又一实施例提供的一种视频通话的质量评估装置的结构示意图；
图7为本发明又一实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本发明实施例一部分实施例，而不是全部的实施例。
在本发明实施例中，视频通话包括音频和视频，用户在安装有视频通话相关的APP(Application，应用程序)的终端上使用视频通话的业务。
可选地，视频通话相关的APP可基于互联网或移动网，提供终端之间实时传送语音和图像的业务。视频通话相关的APP包括本地功能模块和远端交互模块。
本地功能模块根据录制的声音得到音频，根据拍摄的多帧图像，得到视频，将音频和视频进行同步，远端交互模块实时传送到另一终端，从而实现视频通话。
图1示出了本发明实施例提供的一种视频通话的质量评估方法的流程示意图。
如图1所示，本发明实施例提供的方法具体包括以下步骤：
步骤11、根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
可选地，终端的本地功能模块采集音频的编码参数和第一网络传输参数，并通过远端交互模块将采集的数据发送至APP对应的后台服务器。
可选地，音频的编码参数是描述音频源本身的质量参数，音频源是由本地功能模块录制得到的音频信号。
可选地，第一网络传输参数用于描述无线网络的稳定性，以及无线网络的稳定性对音频的质量的影响，例如网络传输过程中的音频数据包的丢包率。
可选地，该后台服务器为本发明实施例的视频通话的质量评估装置，视频通话的质量评估装置实现对音频的编码参数和第一网络传输参数的处理、分析及数据结果。
可选地，视频通话的质量评估装置为第三方的服务器，视频通话的质量评估装置自后台服务器提取APP所上传的音频的编码参数和第一网络传输参数。
可选地，所述音频的失真参数表示音频在视频通话过程中引起的失真。
可选地，采用现有技术的方式根据音频的编码参数和第一网络传输参数，确定音频的失真参数。
步骤12、根据所述音频的失真参数，确定音频的质量；
可以理解的是，在视频通话过程中音频的失真参数与音频的质量相关，可采用现有技术的方式确定音频的质量。
可选地，通过建立音频质量模型来实现所述步骤11和步骤12。
可选地，所述音频质量模型采用现有技术的建模软件实现，例如Matlab建模软件。
可选地，根据预先获取的音频样本库，通过Matlab建模软件构建所述音频质量模型。
可选地，音频样本库包括音频的编码参数和第一网络传输参数，以及对应的评分。评分可通过在线测试的方式获得，例如在测试用户的视频通话完成后，视频通话的APP弹出评分窗口，使得测试用户对本次视频通话中的音频体验进行评分，根据收集得到的评分，结合本次通话的音频的编码参数和第一网络传输参数，建立大量视频通话的音频感知样本库。
可选地，建立所述音频质量模型后，得到输入为音频的编码参数和第一网络传输参数，输出为音频的质量的所述音频质量模型。其中，音频的质量表示对一次视频通话中的音频的满意程度。
可选地，应用所述音频质量模型时，仅需输入音频的编码参数和第一网络传输参数，可输出音频的质量。
应当说明的是，现有技术中仅考虑网络传输参数对于音频通话的影响，并未考虑的音频的编码参数对于视频通话的影响，在本发明实施例中，将音频的编码参数结合第一网络传输参数，进行视频通话的质量评估，能够提高视频通话的质量评估的准确性。
步骤13、根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
可选地，终端的本地功能模块采集视频的编码参数和第二网络传输参数，并通过远端交互模块将采集的数据发送至APP对应的后台服务器。
可选地，视频的编码参数是描述视频源本身的质量参数，视频源是由本地功能模块拍摄得到的有序图像。
可选地，第二网络传输参数用于描述无线网络的稳定性，以及无线网络的稳定性对视频的质量的影响，例如网络传输过程中的视频数据包的丢包率。
可选地，视频通话的质量评估装置自后台服务器提取APP所上传的视频的编码参数和第二网络传输参数。
可选地，所述视频的失真参数表示视频在视频通话过程中引起的失真。
可选地，采用现有技术的方式根据视频的编码参数和第二网络传输参数，确定视频的失真参数。
步骤14、根据视频的失真参数，确定视频的质量；
可以理解的是，在视频通话过程中视频的失真参数与视频的质量相关，可采用现有技术的方式确定音频的质量。
可选地，通过建立视频质量模型来实现所述步骤13和步骤14。
可选地，所述视频质量模型采用现有技术的建模软件实现，例如Matlab建模软件。
可选地，根据预先获取的视频样本库，通过Matlab建模软件构建所述视频质量模型。
可选地，视频样本库包括视频的编码参数和第二网络传输参数，以及对应的评分。评分可通过在线测试的方式获得，例如在测试用户的视频通话完成后，视频通话的APP弹出评分窗口，使得测试用户对本次视频通话中的视频体验进行评分，根据收集得到的评分，结合本次通话的视频的编码参数和第二网络传输参数，建立视频通话的视频感知的样本库。
可选地，建立所述视频质量模型后，得到输入为视频的编码参数和第二网络传输参数，输出为视频的质量的所述视频质量模型。其中，音频的质量表示对一次视频通话中的视频的满意程度。
可选地，应用所述视频质量模型时，仅需输入视频的编码参数和第二网络传输参数，可输出视频的质量。
应当说明的是，现有技术中仅考虑网络传输参数对于视频通话的影响，并未考虑的视频的编码参数对于视频通话的影响，在本发明实施例中，将视频的编码参数结合第二网络传输参数，进行视频通话的质量评估，能够提高视频通话的质量评估的准确性。
步骤15、根据所述音频的质量和所述视频的质量，确定视频通话的质量。
可选地，采用现有技术的方式根据所述音频的质量和所述视频的质量，确定视频通话的质量。
可选地，将所述音频的质量和所述视频的质量相加，得到视频通话的质量。
可选地，通过建立视频通话的质量评估模型来实现所述步骤15。
可选地，将所述音频的质量和所述视频的质量输入至视频通话的质量评估模型，输出视频通话的质量。
本实施例提供的视频通话的质量评估装置，通过考虑音频的编码参数，以及视频的编码参数，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述步骤12中根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数的方式可有多种，本发明实施例以其中一种为例进行说明。
所述根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数的步骤具体为：
根据所述音频的编码参数，确定音频的编码失真；
根据所述第一网络传输参数，确定音频的传输失真；
相应地，根据音频的失真参数，确定音频的质量的步骤具体为：
根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。
可选地，所述音频的编码失真表示音频的编码过程中受音频源的编码质量的影响引起的失真，具体为失真度，是一个无量纲的值。无量纲是没有单位的物理量。
可选地，所述音频的传输失真表示音频的传输过程中受网络质量的影响引起的失真，具体为失真度，是一个无量纲的值。
可选地，采用现有技术的方式根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。例如，获取音频的质量标准值，分别减去所述音频的编码失真以及所述音频的传输失真，得到音频的质量。
本发明实施例的其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，通过获取音频的编码失真，考虑音频源的编码质量对于视频通话的影响，能够进一步提高视频通话的质量评估的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述音频的编码参数包括音频的码率，确定音频的编码失真的方式可有多种，本发明实施例以其中一种为例进行说明。
相应地，所述根据所述音频的编码参数，确定音频的编码失真的步骤具体为：
对所述音频的码率进行无量纲转换，得到音频的编码失真。
可选地，音频的码率是是每秒钟音频的数据量，量纲是bit，可采用现有技术得到。
可选地，所述音频的码率通常为500以上，量纲为bit，而音频的编码失真为失真度，通常小于5％，是一个无量纲的值。
可选地，采用现有技术的方式将有量纲的物理量，进行无量纲化处理，即在选定了单位制之后，由单位制表达的函数式来描述有量纲的物理量。
本发明实施例的其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，通过将音频的码率进行无量纲转换，可得到无量纲的音频的编码失真，从而简化计算。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述第一网络传输参数包括第一丢包率和突发性丢包率，所述突发性丢包率是根据第一丢包率进行折算得到的。
确定音频的编码失真的方式可有多种，本发明实施例以其中一种为例进行说明。
相应地，所述根据所述第一网络传输参数，确定音频的传输失真的步骤具体为：
根据所述第一丢包率、所述突发性丢包率以及所述音频的编码失真，得到音频的传输失真。
可选地，第一丢包率是所丢失的音频的数据包数量占所发送数据组的比率，可根据现有技术的方式得到。
可选地，根据第一丢包率，进行折算，得到突发性丢包率。
可选地，采用现有技术的方式将两种不同的标量进行折算。
本实施例中突发性丢包率表示可能出现的突发的严重的丢包事件，针对这种情况，仅考虑第一丢包率对于音频传输的影响无法适应复杂的网络状况，因此额外考虑突发性丢包率对于音频的传输失真的影响。
由于网络传输过程中经过编码压缩的音频极易受丢包等网络状况的影响，且影响是否严重与所述音频的编码失真具有相关性，因此将音频的编码失真，结合网络状态的因素(所述第一丢包率、所述突发性丢包率)考虑视频通话过程中的音频的传输失真。
可选地，计算所述第一丢包率和所述突发性丢包率，与所述音频的编码失真的相关性，将相关性的计算结果取绝对值后作为音频的传输失真。
本实施例的其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，根据所述第一丢包率、突发性丢包率以及音频的编码失真，得到音频的传输失真，考虑音频的编码失真对音频的传输失真的影响，可提高计算音频的传输失真的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述步骤14中根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数的方式可有多种，本发明实施例以其中一种为例进行说明。
所述根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数的步骤具体为：
根据所述视频的编码参数，确定视频的编码失真；
根据所述第二网络传输参数，确定视频的传输失真；
相应地，根据视频的失真参数，确定视频的质量的步骤具体为：
根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。
可选地，所述视频的编码失真表示视频的编码过程中受视频源的编码质量的影响引起的失真，具体为失真度，是一个无量纲的值。
可选地，所述视频的传输失真表示视频的传输过程中受网络质量的影响引起的失真，具体为失真度，是一个无量纲的值。
可选地，采用现有技术的方式根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。例如，获取视频的质量标准值，分别减去所述视频的编码失真以及所述视频的传输失真，得到视频的质量。
本发明实施例的其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，通过获取视频的编码失真，考虑视频源的编码质量对于视频通话的影响，能够进一步提高视频通话的质量评估的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述视频的编码参数包括第一视频的码率和图像复杂度，所述图像复杂度是根据第一视频的码率以及预先获取的帧率得到的。
可选地，第一视频的码率是指每秒钟视频的数据量，量纲是bit，第一视频码率可采用现有技术得到。
可选地，所述帧率是指每秒钟刷新的图像的帧数，量纲为fps，即每秒有多少图像流过。
可选地，所述帧率根据I帧和P帧进行联合预测得到。I帧即帧内编码帧，是一种自带全部信息的独立帧，为视频序列中的第一个帧。P帧即帧间预测编码帧，表示当前帧画面与前一帧的差别。
可选地，根据现有技术的方式得到I帧和P帧。
可选地，所述图像复杂度是描述图像的复杂程度的量化值，根据图像灰度均匀性、图像所包含的信息量、纹理的清晰程度、局部变化程度，把图像复杂度分为不复杂、有点复杂和很复杂3个等级。图像复杂度是一个无量纲的值。
可选地，采用现有技术的方式根据所述帧率以及第一视频的码率，得到图像复杂度。
可选地，第一视频的码率与视频的编码失真具有相关性，通常第一视频的码率越高，视频的精度就越高，编码处理得到的图像就越接近原始图像，视频的编码失真越低。
可选地，图像复杂度与视频的编码失真具有相关性，通常图像复杂度越高，图像越复杂，编码处理得到的视频越容易出现失真，视频的编码失真越高。
可选地，通过现有技术的方式联合考虑第一视频的码率与图像复杂度对视频的编码失真的影响。
本实施例的其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，考虑第一视频的码率与图像复杂度对视频的编码失真的影响，可提高计算音频的传输失真的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述第二网络传输参数包括第二丢包率，所述视频的编码参数包括第一视频的码率，相应地，所述根据所述第二网络传输参数，确定视频的传输失真的步骤具体为：
根据所述第二丢包率和第一视频的码率，得到第二视频的码率；
根据第二视频的码率以及预先获取的帧率，得到视频的传输失真。
可选地，第二丢包率是所丢失的视频的数据包数量占所发送数据组的比率，可根据现有技术的方式得到，第二丢包率是直接反应网络状况的参数，丢包率越大，网络状况越差。
可选地，第一视频的码率是指每秒钟视频的数据量，量纲是bit，第一视频码率可采用现有技术得到。
应当说明的是，视频传输过程中对视频进行编码压缩，极易受网络状况如第二丢包率的影响，因此根据第一视频的码率以及第二丢包率，确定第二视频的码率，所述第二视频的码率描述第一视频的码率受视频传输的网络丢包(即第二丢包率)的影响程度。
可选地，所述帧率是指每秒钟刷新的图像的帧数，量纲为fps，即每秒有多少图像流过。
可选地，所述帧率根据I帧和P帧进行联合预测得到。I帧即帧内编码帧，是一种自带全部信息的独立帧，为视频序列中的第一个帧。P帧即帧间预测编码帧，表示当前帧与前一帧的差别。
可选地，根据现有技术的方式得到I帧和P帧。
可选地，通过现有技术的方式联合考虑第二视频的码率与帧率对视频的传输失真的影响。
本实施例其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，考虑第二视频的码率与帧率对视频的传输失真的影响，可提高计算音频的传输失真的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述根据视频的失真参数，确定视频的质量的步骤之后，所述方法还包括：
根据所述视频的质量和终端的屏幕参数，得到视频的联合质量；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及所述视频的联合质量，确定视频通话的质量。
可选地，获取所述视频的质量后，还考虑设备屏幕参数对视频通话质量的影响。
可选地，终端的屏幕参数包括终端的屏幕的分辨率及尺寸。
可以理解的是，同样一次视频通话在大屏幕上进行还是在小屏幕上进行，用户的感知肯定是不一样的。
可选地，针对视频通话这一指标而言，获取设备的屏幕参数在视频通话的整体评价中的相对重要程度，以及获取视频的质量在视频通话的整体评价中的相对重要程度，即获取视频的质量的权重。
可选地，将视频的质量以及权重、设备的屏幕参数以及权重，两者加权后相加得到的值作为视频联合质量。
其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，考虑设备的屏幕参数对于视频通话的质量的影响，可提高计算视频的联合质量的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，所述根据视频的失真参数，确定视频的质量的步骤之后，所述方法还包括：
根据互动性能参数，得到视频互动的质量，所述互动性能参数包括网络时延参数和/或音视频异步时长；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量、所述视频的质量以及所述视频互动的质量，确定视频通话的质量。
可选地，除了考虑音频的质量、视频的质量对于视频通话的质量的影响外，还考虑互动性能参数对视频通话的质量的影响。
可选地，网络时延参数为RTT(Round-Trip Time，往返时间)，表示从发送端发送数据开始，到发送端收到来自接收端的确认(假设接收端收到数据后便立即发送确认)总共经历的时间。
可以理解的是，网络时延参数反映网络拥塞程度，可采用现有技术的方式从当前网络中获得，网络时延参数越大，视频通话的质量越差。
可选地，音视频异步时长与终端设置的视频的时间戳相关，反映了接收端在播放视频时，基于图像的时间戳对播放视频的控制，也就是对视频数据早到或晚到采取不同的处理方法。
例如，发送端的视频的时间戳为0-10ms，在此过程中，即使收到了音频也不能立即播放，而必须等到10ms之后才可以，否则就会引起音视频不同步问题。若两终端设置的视频的时间戳不同步，则视频通话过程中将出现图像和声音不同的现象。
视频通话的两个终端的APP将视频的时间戳上报至后台服务器，本发明实施例的视频通话的质量评估装置获取两个终端的时间戳，并将两个终端的时间戳的差值作为音视频异步时长。
可以理解的是，视频通话不同于在线观看视频，两用户使用终端进行会话交互，若网络时延参数不理想，导致视频卡顿，或者，音视频异步时长差异较大，音画不同步，两用户会话不顺畅，视频互动的质量不好。
可选地，采用现有技术的方式根据互动性能参数，得到视频互动的质量。
可选地，针对视频通话这一指标而言，获取视频互动的质量在视频通话的整体评价中的相对重要程度，获取视频互动的质量的权重，获取所述音频的质量在视频通话的整体评价中的相对重要程度，获取音频的质量的权重，以及获取所述视频的质量在视频通话的整体评价中的相对重要程度，即获取视频的质量的权重，并将视频的质量以及权重、音频的质量以及权重，所述视频互动的质量以及权重，三者加权后相加得到的值作为视频通话的质量。
本实施例其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，考虑视频互动的质量对于视频通话的质量的影响，可提高计算视频通话的质量的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，根据所述音频的质量和所述视频的质量，确定视频通话的质量的方式有多种，本发明实施例以其中一种方式为例进行说明。
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量。
可选地，采用现有技术的方式确定音频的质量对视频通话的质量的影响，得到音频的权重，采用现有技术的方式确定视频的质量对视频通话的质量的影响，得到视频的权重，将音频的质量和视频的质量分别加权后再相加，得到视频通话的质量。
可选地，音频样本库包括每一视频通话提取的音频的编码参数和第一网络传输参数，以及用户对于本次视频通话中的音频的评分，通过采集的音频样本库，使用BP(Backpropagation，反向传输)神经网络进行训练，得出音频的质量对于视频通话的影响，即音频的权重。
可选地，视频样本库包括每一视频通话提取的视频的编码参数和第二网络传输参数，以及用户对于本次视频通话中的视频的评分，通过采集的视频样本库，使用BP神经网络进行训练，得出视频的质量对于视频通话的影响，即视频的权重。
可选地，将所述音频的质量与对应的权重进行乘积，将所述视频的质量与对应的权重进行乘积，两个乘积之和为所述视频通话的质量。
本实施例其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，考虑音频的质量以及对应的权重，视频的质量以及对应的权重，确定视频通话的质量，可提高计算视频通话的质量的准确性。
如图1所示，在上述实施例的基础上，本发明又一实施例提供的视频通话的质量评估方法，根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量的步骤之前，需先确定音频的质量对应的权重，以及视频的质量对应的权重。
确定音频的质量对应的权重，以及视频的质量对应的权重的方式有多种，本发明实施例以其中一种方式为例进行说明。
所述方法还包括：
根据预先确定的训练音频的质量以及对应的权重，以及训练视频的质量以及对应的权重，确定训练视频通话的质量；
将训练视频通话的质量与预先获取的用户评分进行比较；
将训练视频通话的质量与用户评分最接近时对应的训练音频的质量对应的权重，以及训练视频的质量对应的权重，作为所述音频的质量对应的权重，以及视频的质量对应的权重。
可选地，通过采集的音频样本库，结合POLQA(Perceptual Objective ListeningQuality Analysis，感知客观语音质量评估)算法，使用BP神经网络进行训练，得出训练音频的质量，以及训练音频的质量对应的权重。
相应地，通过采集的视频样本库，结合POLQA算法，使用BP神经网络进行训练，得出训练视频的质量，以及训练视频的质量对应的权重。
POLQA是一种用户感知评估算法，通过比较参考信号和待评估的劣化信号,输出感知质量的预估值,劣化信号是参考信号经过通信系统后的信号。它能够覆盖最新的语音编码和网络传输技术，对于LTE(Long Term Evolution，长期演进)系统和VoIP(Voice overInternet Protocol，由IP网络传送话音)网络有更高的准确度。
在初步获取训练音频的权重和训练视频的权重后，确定训练视频通话的质量，并将训练视频通话的质量与实际测试的用户对于视频通话的质量的评分进行对比。
若训练视频通话的质量与实际测试的用户对于视频通话的质量的评分接近，说明本次训练视频通话的质量评估准确。
可选地，通过多组训练音频的质量，以及训练音频的质量对应的权重，以及训练视频的质量，以及训练视频的质量对应的权重，得到多个训练视频通话的质量，分别与实际测试的用户对于视频通话的质量的评分进行比较，采用反馈迭代的方式，对训练音频的质量对应的权重和训练视频的质量对应的权重进行修正，直至得到训练视频通话的质量与测试用户评分最接近，并将最接近时对应的一组训练音频的质量对应的权重和训练视频的质量对应的权重，作为后续应用时音频的质量对应的权重和视频的质量对应的权重。
其他步骤与上述实施例的步骤相似，本发明实施例不再赘述。
本实施例提供的视频通话的质量评估方法，通过对训练音频的权重和训练视频的权重进行寻优的步骤，以提高所述音频的权重和所述视频的权重的准确性，从而更加真实、准确地反映用户对于视频通话的质量的感知。
为了更充分理解本发明的技术内容，在上述实施例的基础上，详细说明本实施例提供的视频通话的质量评估方法。
本发明通过研究VoLTE音视频编码失真、网络传输失真、交互时延、终端屏幕等对客户感知的影响，利用Matlab建模软件建立视频质量评估模块、音频质量评估模块、音视频质量联合模块。通过采集大量的主观客户感知数据并结合POLQA算法，使用神经网络训练得出视频通话质量评估体系的各评估模块的权重系数,构建其视频体验模型，进一步完成VoLTE视频用户体验感知质量(QoE)向KPI的映射，形成一套完整的VoLTE视频评估体系。
基于主观测试建立大量视频通话质量评估的感知样本库，同时深入研究了音视频质量、网络传输、交互时延、终端屏幕等因素对用户视频体验的影响，提出了视频通话质量评估体系的评估模型,使得视频体验感知得以量化。
图2为本发明又一实施例提供的视频通话的质量评估方法的评估架构示意图。
如图2所示，通过研究表明，用户视频通话的感知一般由以下几个方面构成：
音视频编码引起的失真：也就是音视频源的质量，主要受到分辨率、码率、编码方式等因素的影响；
网络传输时引起的失真：主要考虑无线网络不稳定造成的丢包导致解码时图像质量的降低；
终端屏幕影响：主要考虑终端屏幕的分辨率及尺寸，如同样一个视频在大屏幕上看和小屏幕上看其客户感知肯定是不一样的；
时延引起的客户感知下降：主要考虑交互时延及音画不同步的时延对客户感知造成的影响。
综合考虑上述影响，将评估模型分为7个模块，分别为视频质量评估模块、音频质量评估模块、音视频质量联合模块、视频质量与屏幕影响融合模块、交互时延评估模块、音视频异步评估模块以及视频通讯质量评估模块。
可选地，主要包括三个模型：音频质量模型、视频质量模型和视频通话的质量评估模型。
图3为本发明又一实施例提供的视频通话的质量评估中音频评估的流程示意图。
如图3所示，详细介绍音频质量模型：
可选地，根据音频码率，采用以下公式确定音频的编码失真。
QCodA＝a1·exp(a2·Br)+a3
式中，QCodA为音频的编码失真，Br为音频的码率，a2为Br的权重，a1为加权后音频码率Br以e为底的指数系数，a3为QCodA的修正补偿系数。
可选地，系数数据库是本发明实施例建立的一个数据库，包括音频评估模型的建模系数a1-a4。
可选地，根据以下公式得到音频的传输失真：
其中，QTransA为受丢包影响的音频质量失真，Pl为第一丢包率，Bl为突发丢包率，a4为综合计算Pl和Bl的质量失真系数。
可选地，根据以下公式得到音频的质量：
QA＝Qmax-QCodA-QTransA
其中，QMax为音频质量的最大值，若采用5分值评分，该值为5。
图4为本发明又一实施例提供的视频通话的质量评估中视频评估的流程示意图。
如图4所示，详细介绍视频质量模型：
可选地，根据以下公式得到编码失真：
式中，QCodV为视频的编码失真，σT为图像复杂度，v4为σT的加权系数，v5为加权后的σT的修正补偿系数，BR为第一视频的码率，v3为BR与修正补偿后的图像复杂度σT比值的指数系数。
其中，根据以下公式得到图像复杂度σT：
σT＝|RP/I-b′·BR|
σT＝|RP/I-b′·BR|
式中，Rp/I为基于预测的P帧和基于帧内压缩的I帧的联合压缩的帧速率，BR为第一视频的码率，b'为对BR的折算系数，目的是跟Rp/I进行单位统一。
可选地，根据以下公式得到传输失真：
其中，QTransV为传输失真，Rl为受丢包影响的第二视频的码率，Re为编码失真预测的帧速率,v7为Rl的指数系数，v8为Re的指数系数，v6为Rl指数和Re指数乘积的权重。
可选地，根据以下公式得到视频的质量：
QV＝Qmax-QCodV-QTransV
其中，QV为视频的质量，QMax为视频质量的最大值，若采用5分值评分，该值为5。
进一步地，根据视频的质量，结合设备屏幕参数，得到最终视频联合质量。
可选地，视频通话的质量评估模型表示为：
QAV＝p1xQV+p2xQA+p3xQAxQV+p4
式中，QV为最终视频联合的质量，QA为音频的质量，QAV为音视频联合质量，p1为QV的权重，p2为QA的权重，p3为QA和QV的乘积权重，p4为QAV的修正补偿系数。
针对上述模型，本发明利用BP神经网络训练出视频通话质量评估体系的各评估模块的权重系数，利用每一个视频流在收端提取的特征与用户评分做样本，用机器学习方法训练人工神经网络模型，得到用户主观感知评估的人工神经网络。同时，训练模型根据主观感知评估输出结果与实际用户评分进行对比，采用反馈迭代的方式对各参数的权重系数进行修正，寻找最优的加权参数，以更加真实、准确地反映客户的网络感知。
图5为本发明又一实施例提供的视频通话的质量评估中映射体系示意图。
如图5所示，视频通话质量评估体系跟踪客户端侧视频通话业务流，获得音视频编码、设备、网络等不同质量层的KPI特征参数向量，结合视频通话质量评估体系的评估模型实现了KPI->KQI->QoE的映射，从而输出视频通话的质量，将视频通话的质量作为用户的QoE指标。该评估体系具有感知指标精确度量、一次性业务质量主客观联合评价、便于工程使用的优势。
本发明实施例通过研究音视频质量、网络传输、交互时延、终端屏幕等因素对用户视频体验的影响，提出了视频通话质量评估体系的评估模型架构，建立了七个评估模块，形成了完整的视频通话的质量评估。同时深入探究了视频通话质量的评估模型与算法，包括语音分量评估模型流程与算法、视频分量评估模型流程与算法、音视频联合质量模型算法。同时利用BP神经网络训练出其各评估模块的权重，寻找最优的权重，以更加真实、准确地反映客户的网络感知。
与现有技术的方法相比，本发明实施例具有如下优点：
为VoLTE视频通话的质量评估提供了客观的评价标准。视频通话的质量评估体系在VoLTE视频通话通信场景上的应用，能够实时监控视频通信体验劣化，为优化团队提供定位VoLTE视频通信体验问题的评估优化工具，识别端到端视频通话的短板，构建端到端视频质量检测架构，从而帮助进行网络规划和优化，提升用户的视频通信体验。
图6示出了本发明又一实施例提供的一种视频通话的质量评估装置的结构示意图。
参照图6，在上述实施例的基础上，本实施例提供的视频通话的质量评估装置，所述装置包括第一确定模块61、第二确定模块62、第三确定模块63、第四确定模块64和第五确定模块65，其中：
第一确定模块61用于根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；第二确定模块62用于根据所述音频的失真参数，确定音频的质量；第三确定模块63用于根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；第四确定模块64用于根据所述视频的失真参数，确定视频的质量；第五确定模块65用于根据所述音频的质量和所述视频的质量，确定视频通话的质量。
第一确定模块61自后台服务器提取APP所上传的音频的编码参数和第一网络传输参数。
可选地，音频的编码参数是描述音频源本身的质量参数，音频源是由本地功能模块录制得到的音频信号。
可选地，第一网络传输参数用于描述无线网络的稳定性，以及无线网络的稳定性对音频的质量的影响，例如网络传输过程中的音频数据包的丢包率。
可选地，所述音频的失真参数表示音频在视频通话过程中引起的失真。可以理解的是，在视频通话过程中音频的失真参数与音频的质量相关，第二确定模块62可采用现有技术的方式确定音频的质量。
应当说明的是，现有技术中仅考虑网络传输参数对于音频通话的影响，并未考虑的音频的编码参数对于视频通话的影响，在本发明实施例中，将音频的编码参数结合第一网络传输参数，进行视频通话的质量评估，能够提高视频通话的质量评估的准确性。
第三确定模块63自后台服务器提取APP所上传的视频的编码参数和第二网络传输参数。
可选地，视频的编码参数是描述视频源本身的质量参数，视频源是由本地功能模块拍摄得到的有序图像。
可选地，第二网络传输参数用于描述无线网络的稳定性，以及无线网络的稳定性对视频的质量的影响，例如网络传输过程中的视频数据包的丢包率。
可选地，所述视频的失真参数表示视频在视频通话过程中引起的失真。可以理解的是，在视频通话过程中视频的失真参数与视频的质量相关，第四确定模块64可采用现有技术的方式确定音频的质量。
应当说明的是，现有技术中仅考虑网络传输参数对于视频通话的影响，并未考虑的视频的编码参数对于视频通话的影响，在本发明实施例中，将视频的编码参数结合第二网络传输参数，进行视频通话的质量评估，能够提高视频通话的质量评估的准确性。
第五确定模块65联合根据所述音频的质量和所述视频的质量，得到视频通话的质量。
第一确定模块61还用于根据所述音频的编码参数，确定音频的编码失真；根据所述第一网络传输参数，确定音频的传输失真。
第二确定模块62还用于根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。
所述音频的编码参数包括音频的码率，第一确定模块62还用于对所述音频的码率进行无量纲转换，得到音频的编码失真。
所述第一网络传输参数包括第一丢包率和突发性丢包率，所述突发性丢包率是根据第一丢包率进行折算得到的，第一确定模块61还用于根据所述第一丢包率、所述突发性丢包率以及所述音频的编码失真，得到音频的传输失真。
第三确定模块63还用于根据所述视频的编码参数，确定视频的编码失真；根据所述第二网络传输参数，确定视频的传输失真。
第四确定模块64还用于根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。
所述视频的编码参数包括第一视频的码率和图像复杂度，所述图像复杂度是根据第一视频的码率以及预先获取的帧率得到的。
所述第二网络传输参数包括第二丢包率，所述视频的编码参数包括第一视频的码率，第二确定模块64还用于根据所述第二丢包率和第一视频的码率，得到第二视频的码率；根据第二视频的码率以及预先获取的帧率，得到视频的传输失真。
第五确定模块65还用于根据所述视频的质量和终端的屏幕参数，得到视频的联合质量；根据所述音频的质量以及所述视频的联合质量，确定视频通话的质量。
第五确定模块65还用于根据互动性能参数，得到视频互动的质量，所述互动性能参数包括网络时延参数和/或音视频异步时长；根据所述音频的质量、所述视频的质量以及所述视频互动的质量，确定视频通话的质量。
第五确定模块65还用于根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量。
第五确定模块65还用于根据预先确定的训练音频的质量以及对应的权重，以及训练视频的质量以及对应的权重，确定训练视频通话的质量；
将训练视频通话的质量与预先获取的用户评分进行比较；
将训练视频通话的质量与用户评分最接近时对应的训练音频的质量对应的权重，以及训练视频的质量对应的权重，作为所述音频的质量对应的权重，以及视频的质量对应的权重。
本实施例提供的视频通话的质量评估装置，可用于执行上述方法实施例的方法，本实施不再赘述。
本实施例提供的视频通话的质量评估装置，通过第一确定模块考虑音频的编码参数，确定音频的失真参数，且第二确定模块确定音频的质量编码，第三确定模块考虑视频的编码参数，确定视频的失真参数，且第四确定模块确定视频的质量，第五确定模块根据所述音频的质量和所述视频的质量，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
图7示出了本发明又一实施例提供的一种电子设备的结构示意图。
参阅图7，本发明实施例提供的电子设备，所述电子设备包括存储器71、处理器72、总线73以及存储在存储器71上并可在处理器72上运行的计算机程序，所述处理器72执行所述计算机程序时实现以下的方法的步骤。其中，所述存储器71、处理器72通过所述总线73完成相互间的通信。
所述处理器72用于调用所述存储器71中的程序指令，以执行所述程序时实现如图1的方法。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数的步骤具体为：
根据所述音频的编码参数，确定音频的编码失真；
根据所述第一网络传输参数，确定音频的传输失真；
相应地，根据音频的失真参数，确定音频的质量的步骤具体为：
根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述音频的编码参数包括音频的码率，相应地，所述根据所述音频的编码参数，确定音频的编码失真的步骤具体为：
对所述音频的码率进行无量纲转换，得到音频的编码失真；
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述第一网络传输参数包括第一丢包率和突发性丢包率，所述突发性丢包率是根据第一丢包率进行折算得到的，相应地，所述根据所述第一网络传输参数，确定音频的传输失真的步骤具体为：
根据所述第一丢包率、所述突发性丢包率以及所述音频的编码失真，得到音频的传输失真。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数的步骤具体为：
根据所述视频的编码参数，确定视频的编码失真；
根据所述第二网络传输参数，确定视频的传输失真；
相应地，根据视频的失真参数，确定视频的质量的步骤具体为：
根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述视频的编码参数包括第一视频的码率和图像复杂度，所述图像复杂度是根据第一视频的码率以及预先获取的帧率得到的。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述第二网络传输参数包括第二丢包率，所述视频的编码参数包括第一视频的码率，相应地，所述根据所述第二网络传输参数，确定视频的传输失真的步骤具体为：
根据所述第二丢包率和第一视频的码率，得到第二视频的码率；
根据第二视频的码率以及预先获取的帧率，得到视频的传输失真。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
所述根据视频的失真参数，确定视频的质量的步骤之后，所述方法还包括：
根据所述视频的质量和终端的屏幕参数，得到视频的联合质量；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及所述视频的联合质量，确定视频通话的质量；
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
根据互动性能参数，得到视频互动的质量，所述互动性能参数包括网络时延参数和/或音视频异步时长；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量、所述视频的质量以及所述视频互动的质量，确定视频通话的质量。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量。
在另一种实施方式中，所述处理器执行所述程序时实现如下方法：
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量的步骤之前，所述方法还包括：
根据预先确定的训练音频的质量以及对应的权重，以及训练视频的质量以及对应的权重，确定训练视频通话的质量；
将训练视频通话的质量与预先获取的用户评分进行比较；
将训练视频通话的质量与用户评分最接近时对应的训练音频的质量对应的权重，以及训练视频的质量对应的权重，作为所述音频的质量对应的权重，以及视频的质量对应的权重。
本实施例提供的电子设备，可用于执行上述方法实施例的方法对应的程序，本实施不再赘述。
本实施例提供的电子设备，通过所述处理器执行所述程序时实现通过考虑音频的编码参数，以及视频的编码参数，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
本发明又一实施例提供的一种存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如图1的方法。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数的步骤具体为：
根据所述音频的编码参数，确定音频的编码失真；
根据所述第一网络传输参数，确定音频的传输失真；
相应地，根据音频的失真参数，确定音频的质量的步骤具体为：
根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。
在另一种实施方式中所述程序被处理器执行时实现如下方法：
所述音频的编码参数包括音频的码率，相应地，所述根据所述音频的编码参数，确定音频的编码失真的步骤具体为：
对所述音频的码率进行无量纲转换，得到音频的编码失真；
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述第一网络传输参数包括第一丢包率和突发性丢包率，所述突发性丢包率是根据第一丢包率进行折算得到的，相应地，所述根据所述第一网络传输参数，确定音频的传输失真的步骤具体为：
根据所述第一丢包率、所述突发性丢包率以及所述音频的编码失真，得到音频的传输失真。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数的步骤具体为：
根据所述视频的编码参数，确定视频的编码失真；
根据所述第二网络传输参数，确定视频的传输失真；
相应地，根据视频的失真参数，确定视频的质量的步骤具体为：
根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述视频的编码参数包括第一视频的码率和图像复杂度，所述图像复杂度是根据第一视频的码率以及预先获取的帧率得到的。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述第二网络传输参数包括第二丢包率，所述视频的编码参数包括第一视频的码率，相应地，所述根据所述第二网络传输参数，确定视频的传输失真的步骤具体为：
根据所述第二丢包率和第一视频的码率，得到第二视频的码率；
根据第二视频的码率以及预先获取的帧率，得到视频的传输失真。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
所述根据视频的失真参数，确定视频的质量的步骤之后，所述方法还包括：
根据所述视频的质量和终端的屏幕参数，得到视频的联合质量；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及所述视频的联合质量，确定视频通话的质量；
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
根据互动性能参数，得到视频互动的质量，所述互动性能参数包括网络时延参数和/或音视频异步时长；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量、所述视频的质量以及所述视频互动的质量，确定视频通话的质量。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量。
在另一种实施方式中，所述程序被处理器执行时实现如下方法：
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量的步骤之前，所述方法还包括：
根据预先确定的训练音频的质量以及对应的权重，以及训练视频的质量以及对应的权重，确定训练视频通话的质量；
将训练视频通话的质量与预先获取的用户评分进行比较；
将训练视频通话的质量与用户评分最接近时对应的训练音频的质量对应的权重，以及训练视频的质量对应的权重，作为所述音频的质量对应的权重，以及视频的质量对应的权重。
本实施例提供的存储介质，所述程序被处理器执行时实现上述方法实施例的方法，本实施不再赘述。
本实施例提供的存储介质，所述程序被处理器执行时实现通过考虑音频的编码参数，以及视频的编码参数，得到视频通话的质量，能够提高视频通话的质量评估的准确性。
本发明又一实施例公开一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法实施例所提供的方法，例如包括：
根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
根据所述音频的失真参数，确定音频的质量；
根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
根据所述视频的失真参数，确定视频的质量；
根据所述音频的质量和所述视频的质量，确定视频通话的质量。
本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。
本领域技术人员可以理解，实施例中的各步骤可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。
虽然结合附图描述了本发明的实施方式，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。
Claims (11)
1.一种视频通话的质量评估方法，其特征在于，所述方法包括：
根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
根据所述音频的失真参数，确定音频的质量；
根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
根据所述视频的失真参数，确定视频的质量；
根据所述音频的质量和所述视频的质量，确定视频通话的质量。
2.根据权利要求1所述的方法，其特征在于:所述根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数的步骤具体为：
根据所述音频的编码参数，确定音频的编码失真；
根据所述第一网络传输参数，确定音频的传输失真；
相应地，根据音频的失真参数，确定音频的质量的步骤具体为：
根据所述音频的编码失真以及所述音频的传输失真，确定音频的质量。
3.根据权利要求2所述的方法，其特征在于:
所述音频的编码参数包括音频的码率，相应地，所述根据所述音频的编码参数，确定音频的编码失真的步骤具体为：
对所述音频的码率进行无量纲转换，得到音频的编码失真；
或者，
所述第一网络传输参数包括第一丢包率和突发性丢包率，所述突发性丢包率是根据所述第一丢包率进行折算得到的，相应地，所述根据所述第一网络传输参数，确定音频的传输失真的步骤具体为：
根据所述第一丢包率、所述突发性丢包率以及所述音频的编码失真，得到音频的传输失真。
4.根据权利要求1所述的方法，其特征在于:所述根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数的步骤具体为：
根据所述视频的编码参数，确定视频的编码失真；
根据所述第二网络传输参数，确定视频的传输失真；
相应地，根据视频的失真参数，确定视频的质量的步骤具体为：
根据所述视频的编码失真以及所述视频的传输失真，确定视频的质量。
5.根据权利要求4所述的方法，其特征在于：所述视频的编码参数包括第一视频的码率和图像复杂度，所述图像复杂度是根据所述第一视频的码率以及预先获取的帧率得到的。
或者，
所述第二网络传输参数包括第二丢包率，所述视频的编码参数包括第一视频的码率，相应地，所述根据所述第二网络传输参数，确定视频的传输失真的步骤具体为：
根据所述第二丢包率和第一视频的码率，得到第二视频的码率；
根据所述第二视频的码率以及预先获取的帧率，得到视频的传输失真。
6.根据权利要求1所述的方法，其特征在于：所述根据视频的失真参数，确定视频的质量的步骤之后，所述方法还包括：
根据所述视频的质量和终端的屏幕参数，得到视频的联合质量；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及所述视频的联合质量，确定视频通话的质量；
或者；
根据互动性能参数，得到视频互动的质量，所述互动性能参数包括网络时延参数和/或音视频异步时长；
相应地，根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量、所述视频的质量以及所述视频互动的质量，确定视频通话的质量。
7.根据权利要求1所述的方法，其特征在于：根据所述音频的质量和所述视频的质量，确定视频通话的质量的步骤具体为：
根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量。
8.根据权利要求7所述的方法，其特征在于：根据所述音频的质量以及对应的权重，所述视频的质量以及对应的权重，确定视频通话的质量的步骤之前，所述方法还包括：
根据预先确定的训练音频的质量以及对应的权重，以及训练视频的质量以及对应的权重，确定训练视频通话的质量；
将所述训练视频通话的质量与预先获取的用户评分进行比较；
将所述训练视频通话的质量与用户评分最接近时对应的训练音频的质量对应的权重，以及训练视频的质量对应的权重，作为所述音频的质量对应的权重，以及视频的质量对应的权重。
9.一种视频通话的质量评估装置，其特征在于，所述装置包括：
第一确定模块，用于根据预先获取的音频的编码参数和第一网络传输参数，确定音频的失真参数；
第二确定模块，用于根据所述音频的失真参数，确定音频的质量；
第三确定模块，用于根据预先获取的视频的编码参数和第二网络传输参数，确定视频的失真参数；
第四确定模块，用于根据所述视频的失真参数，确定视频的质量；
第五确定模块，用于根据所述音频的质量和所述视频的质量，确定视频通话的质量。
10.一种电子设备，其特征在于，包括存储器、处理器、总线以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如权利要求1-8任意一项的步骤。
11.一种存储介质，其上存储有计算机程序，其特征在于：所述程序被处理器执行时实现如权利要求1-8任意一项的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711015783.0A CN109714557A (zh) | 2017-10-25 | 2017-10-25 | 视频通话的质量评估方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711015783.0A CN109714557A (zh) | 2017-10-25 | 2017-10-25 | 视频通话的质量评估方法、装置、电子设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109714557A true CN109714557A (zh) | 2019-05-03 |
Family
ID=66252747
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711015783.0A Pending CN109714557A (zh) | 2017-10-25 | 2017-10-25 | 视频通话的质量评估方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109714557A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110366043A (zh) * | 2019-08-20 | 2019-10-22 | 北京字节跳动网络技术有限公司 | 视频处理方法、装置、电子设备及可读介质 |
| CN112312135A (zh) * | 2020-10-23 | 2021-02-02 | 广州市百果园网络科技有限公司 | 一种视频发布方法、装置、计算机设备及存储介质 |
| CN113409799A (zh) * | 2021-06-23 | 2021-09-17 | 中移（杭州）信息技术有限公司 | 音频编码方法、装置、设备以及计算机可读存储介质 |
| CN113411218A (zh) * | 2021-06-22 | 2021-09-17 | 北京金山云网络技术有限公司 | 即时通信质量的评价方法、装置和电子设备 |
| CN113676599A (zh) * | 2021-08-20 | 2021-11-19 | 上海明略人工智能(集团)有限公司 | 网络通话质量检测方法、系统、计算机设备及存储介质 |
| CN113794874A (zh) * | 2021-11-15 | 2021-12-14 | 南京理工大学紫金学院 | 一种多摄像机拍摄视频的质量评估方法 |
| CN113840131A (zh) * | 2020-06-08 | 2021-12-24 | 中国移动通信有限公司研究院 | 视频通话质量评估方法、装置、电子设备及可读存储介质 |
| CN113949863A (zh) * | 2021-10-21 | 2022-01-18 | 上海复达兴智能技术有限公司 | 一种实时音视频通信的体验质量评价方法、系统及设备 |
| JP2022174918A (ja) * | 2021-05-12 | 2022-11-25 | 横河電機株式会社 | 装置、方法およびプログラム |
| CN117689611A (zh) * | 2023-08-02 | 2024-03-12 | 上海荣耀智慧科技开发有限公司 | 质量预测网络模型生成方法、图像处理方法及电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101547259A (zh) * | 2009-04-30 | 2009-09-30 | 华东师范大学 | 基于模拟数据流的VoIP测试方法 |
| CN102647591A (zh) * | 2012-04-17 | 2012-08-22 | 中国科学院声学研究所 | 基于ssim评价的容错率失真优化视频编码方法、装置 |
| WO2017054935A1 (en) * | 2015-09-29 | 2017-04-06 | Sony Mobile Communications Inc. | User equipment and media streaming network assistance node |
| CN104883563B (zh) * | 2011-04-11 | 2017-04-12 | 华为技术有限公司 | 一种视频数据质量评估方法和装置 |
| CN106878086A (zh) * | 2017-03-06 | 2017-06-20 | 北京理工大学 | 一种VoLTE视频通话用户体验质量评估方法 |
| CN109302603A (zh) * | 2017-07-25 | 2019-02-01 | 中国移动通信集团北京有限公司 | 一种视频通话质量评估方法和装置 |
-
2017
- 2017-10-25 CN CN201711015783.0A patent/CN109714557A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101547259A (zh) * | 2009-04-30 | 2009-09-30 | 华东师范大学 | 基于模拟数据流的VoIP测试方法 |
| CN104883563B (zh) * | 2011-04-11 | 2017-04-12 | 华为技术有限公司 | 一种视频数据质量评估方法和装置 |
| CN102647591A (zh) * | 2012-04-17 | 2012-08-22 | 中国科学院声学研究所 | 基于ssim评价的容错率失真优化视频编码方法、装置 |
| WO2017054935A1 (en) * | 2015-09-29 | 2017-04-06 | Sony Mobile Communications Inc. | User equipment and media streaming network assistance node |
| CN106878086A (zh) * | 2017-03-06 | 2017-06-20 | 北京理工大学 | 一种VoLTE视频通话用户体验质量评估方法 |
| CN109302603A (zh) * | 2017-07-25 | 2019-02-01 | 中国移动通信集团北京有限公司 | 一种视频通话质量评估方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| HAYASHI T等: "Multimedia quality integration function for videophone services", 《IEEE GLOBAL TELECOMMUNICATIONS CONFERENCE》 * |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110366043A (zh) * | 2019-08-20 | 2019-10-22 | 北京字节跳动网络技术有限公司 | 视频处理方法、装置、电子设备及可读介质 |
| CN113840131A (zh) * | 2020-06-08 | 2021-12-24 | 中国移动通信有限公司研究院 | 视频通话质量评估方法、装置、电子设备及可读存储介质 |
| CN112312135B (zh) * | 2020-10-23 | 2022-07-15 | 广州市百果园网络科技有限公司 | 一种视频发布方法、装置、计算机设备及存储介质 |
| CN112312135A (zh) * | 2020-10-23 | 2021-02-02 | 广州市百果园网络科技有限公司 | 一种视频发布方法、装置、计算机设备及存储介质 |
| JP2022174918A (ja) * | 2021-05-12 | 2022-11-25 | 横河電機株式会社 | 装置、方法およびプログラム |
| JP7424345B2 (ja) | 2021-05-12 | 2024-01-30 | 横河電機株式会社 | 装置、方法およびプログラム |
| CN113411218A (zh) * | 2021-06-22 | 2021-09-17 | 北京金山云网络技术有限公司 | 即时通信质量的评价方法、装置和电子设备 |
| CN113409799A (zh) * | 2021-06-23 | 2021-09-17 | 中移（杭州）信息技术有限公司 | 音频编码方法、装置、设备以及计算机可读存储介质 |
| CN113409799B (zh) * | 2021-06-23 | 2024-04-09 | 中移（杭州）信息技术有限公司 | 音频编码方法、装置、设备以及计算机可读存储介质 |
| CN113676599A (zh) * | 2021-08-20 | 2021-11-19 | 上海明略人工智能(集团)有限公司 | 网络通话质量检测方法、系统、计算机设备及存储介质 |
| CN113676599B (zh) * | 2021-08-20 | 2024-03-22 | 上海明略人工智能(集团)有限公司 | 网络通话质量检测方法、系统、计算机设备及存储介质 |
| CN113949863A (zh) * | 2021-10-21 | 2022-01-18 | 上海复达兴智能技术有限公司 | 一种实时音视频通信的体验质量评价方法、系统及设备 |
| CN113794874A (zh) * | 2021-11-15 | 2021-12-14 | 南京理工大学紫金学院 | 一种多摄像机拍摄视频的质量评估方法 |
| CN113794874B (zh) * | 2021-11-15 | 2022-02-01 | 南京理工大学紫金学院 | 一种多摄像机拍摄视频的质量评估方法 |
| CN117689611A (zh) * | 2023-08-02 | 2024-03-12 | 上海荣耀智慧科技开发有限公司 | 质量预测网络模型生成方法、图像处理方法及电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109714557A (zh) | 视频通话的质量评估方法、装置、电子设备和存储介质 | |
| Frnda et al. | Impact of packet loss and delay variation on the quality of real-time video streaming | |
| Singh et al. | Quality of experience estimation for adaptive HTTP/TCP video streaming using H. 264/AVC | |
| US9210419B2 (en) | System and method for diagnostic modeling of audio and video quality of service | |
| CN109120924B (zh) | 一种实时视频通信的质量评价方法 | |
| JP2010507324A (ja) | ビデオ画質の決定方法 | |
| CN105430383A (zh) | 一种视频流媒体业务的体验质量评估方法 | |
| Goudarzi et al. | Audiovisual quality estimation for video calls in wireless applications | |
| Ickin et al. | The effects of packet delay variation on the perceptual quality of video | |
| WO2017084256A1 (zh) | 一种视频质量评价方法及装置 | |
| JP4787210B2 (ja) | 映像品質推定方法、装置、およびプログラム | |
| Lubkowski et al. | The end-to-end rate adaptation application for real-time video monitoring | |
| Suárez et al. | Assessing the qoe in video services over lossy networks | |
| WO2021181681A1 (ja) | 数理モデル導出装置、数理モデル導出方法及びプログラム | |
| US20150365662A1 (en) | Method And Apparatus For Context-Based Video Quality Assessment | |
| JP2007135040A (ja) | ユーザ体感品質推定装置、方法、およびプログラム | |
| EP2954677B1 (en) | Method and apparatus for context-based video quality assessment | |
| JP4733071B2 (ja) | 映像品質推定方法および装置 | |
| Martínez et al. | Objective video quality metrics: A performance analysis | |
| Su et al. | Packet-layer quality assessment for networked video | |
| JP6511003B2 (ja) | 音声品質推定装置、音声品質推定方法、及びプログラム | |
| Casas et al. | End-2-end evaluation of ip multimedia services, a user perceived quality of service approach | |
| Mohamed et al. | On the Accuracy of PSNR and PSQA video quality measures | |
| Dadheech et al. | A call quality assessment and analysis framework for video telephony applications in enterprise networks | |
| Zhang et al. | QoE Models for Online Video Streaming |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190503 |