CN101635846B - 一种视频质量评估方法、系统及装置 - Google Patents

一种视频质量评估方法、系统及装置 Download PDF

Info

Publication number
CN101635846B
CN101635846B CN200910161628.9A CN200910161628A CN101635846B CN 101635846 B CN101635846 B CN 101635846B CN 200910161628 A CN200910161628 A CN 200910161628A CN 101635846 B CN101635846 B CN 101635846B
Authority
CN
China
Prior art keywords
video
parameter
frame
video quality
mass
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200910161628.9A
Other languages
English (en)
Other versions
CN101635846A (zh
Inventor
谢清鹏
杨付正
万帅
林四新
熊联欢
孙李娜
周梁
黄畅
李东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SnapTrack Inc
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN200910161628.9A priority Critical patent/CN101635846B/zh
Publication of CN101635846A publication Critical patent/CN101635846A/zh
Application granted granted Critical
Publication of CN101635846B publication Critical patent/CN101635846B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/152Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • H04N19/166Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明实施例公开了一种视频质量评估方法、系统及装置,用于提高视频质量评估的准确性。本发明实施例方法包括:获取传输视频信息;根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;根据所述视频帧参数计算视频帧质量参数。本发明实施例还提供一种视频质量评估装置以及系统。本发明实施例可以有效地提高在无参考下视频质量评估的准确性。

Description

一种视频质量评估方法、系统及装置
技术领域
本发明涉及通信技术领域,尤其涉及一种视频质量评估方法、系统及装置。
背景技术
随着网络技术的发展,影视点播、网络电视、可视电话等已成为宽带网络的主要业务,并且这些业务也将成为第三代(3G,the 3rd Generation)无线网络的主要业务。
影视点播,网络电视以及可视电话都会采用网络视频的数据传输方式,影视点播、网络电视、可视电话等业务的发展同时也带动了网络视频的迅速发展。
在网络视频迅速发展的背景下,如何对网络视频的质量进行便捷、有效的评估,便成为网络视频应用中一个迫切需要解决的重要问题。为了保证网络视频的服务质量,必须对网络视频的质量进行监控,以便及时采取相应的措施进行调节和保持,以保证网络视频的正常运行。网络视频的质量受到许多复杂因素的影响,首先需要考虑传输信道的服务质量(例如带宽、丢包、时延、抖动等),以及视频编解码端参数与传输信道的适配情况(例如编码方式、分辨率、抗误码强度、以及编解码端缓冲控制策略是否合适等)。另外,信道丢包、时延等引起视频数据丢失的位置不同,对于视频主观质量的影响也大不相同;信道时延、抖动等引起视频停顿或抖动也严重影响着视频的主观质量。
现有技术中一种视频质量评估方法是采用计算峰值信噪比(PSNR,PeakSignal to Noise Ratio)的方式检测视频质量,其方法流程大致包括:
获取原始参考视频以及终端视频;
对原始参考视频以及终端视频进行对比计算PSNR;
根据PSNR的具体数值确定视频质量。
但是,发明人在实现本发明的过程中,发现现有技术有如下缺点:
(1)对于网络视频来说,由于带宽的限制,获取原始参考视频需要大量的带宽以及传输时间,造成网络资源的浪费;
(2)PSNR数值体现的仅是终端视频信号与原始参考视频信号之间的信噪比,该信噪比并不能直观的体现用户观看网络视频时对网络视频的感受,因此现有技术中的视频质量评估方法所得到的检测结果并不准确。
发明内容
本发明实施例提供了一种视频质量评估方法、系统及装置,能够提高视频质量评估的准确性。
本发明实施例提供的视频质量评估方法,包括:获取传输视频信息;根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;根据所述视频帧参数计算视频帧质量参数。
本发明实施例提供的视频质量评估方法,包括:获取传输视频信息,所述视频帧信息至少包括所述视频帧的持续时间;根据所述传输视频信息解析得到视频帧参数;根据所述视频帧参数计算视频帧质量参数;对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量参数。
本发明实施例提供的视频质量评估装置,包括:视频帧获取单元,用于获取传输视频信息;视频帧参数计算单元,用于根据视频帧获取单元获取到的传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;视频帧质量参数计算单元,用于根据视频帧参数计算单元计算得到的视频帧参数计算视频帧质量参数。
本发明实施例提供的视频质量评估系统,包括:视频质量评估装置,用于获取传输视频信息,根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数,根据所述视频帧参数计算视频帧质量参数;发送装置,用于获取所述视频质量评估装置生成的视频帧质量参数,发送所述视频帧质量参数。
从以上技术方案可以看出,本发明实施例具有以下优点:
本发明实施例中,获取到传输视频信息之后,可以根据该传输视频信息计算得到压缩失真参数和/或数据包丢失视频质量失真参数,之后可以根据该压缩失真参数和/或数据包丢失视频质量失真参数计算视频帧质量参数,所以本发明实施例中只需要根据终端侧的传输视频信息即可计算视频帧的质量,无需获取原始参考视频,因此能够节省网络资源;
其次,由于本发明实施例中的视频帧质量参数与压缩失真参数和/或数据包丢失视频质量失真参数相关,即压缩失真参数是评价视频帧质量的指标,而该压缩失真参数和/或数据包丢失视频质量失真参数与视频帧质量之间存在线性关系,所以使用压缩失真参数和/或数据包丢失视频质量失真参数评价视频帧质量可以更加直观地体现用户观看网络视频时对网络视频的感受,进而提高视频质量评估的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中视频质量评估方法第一实施例示意图;
图2为本发明实施例中主观质量评分与压缩失真之间的线性关系图;
图3为本发明实施例中视频质量评估方法第二实施例示意图;
图4为本发明实施例中视频质量评估装置实施例示意图;
图5为本发明实施例中视频质量评估系统实施例示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供了一种视频质量评估方法、系统及装置,用于提高视频质量评估的准确性。
本发明实施例中视频质量评估方法包括:
1)获取传输视频信息;
本实施例中,检测视频质量的过程在终端侧完成,即视频质量评估装置可以作为终端的一部分,或独立存在,其只需获取终端侧的传输视频信息即可进行视频质量评估,而无需获取原始参考视频作为评价依据。
本实施例中的传输视频信息可以包括码率,视频编码的量化因子,或者还可以包括视频帧的持续时间等信息。可以理解的是,在实际应用中,除了上述信息之外,还可以获取其他类似的传输视频信息。
2)根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;
本实施例中根据上述步骤获取到的传输视频信息即可解析得到视频帧参数,该视频帧参数中可以包含压缩失真参数和/或数据包丢失视频质量失真参数。该压缩失真参数指当该视频帧仅存在压缩失真,而不存在其他类型的损耗时的质量信息,该数据包丢失视频质量失真参数是指当该视频帧仅存在丢包而不存在编码压缩时的损耗。
在实际应用中,本实施例中的视频帧参数还可以包括其他类型的参数,具体参数类型此处不做限定。
3)根据所述视频帧参数计算视频帧质量参数。
本实施例中的视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数,因此计算视频帧质量参数的过程与具体的视频帧参数相关,该计算得到的视频帧质量参数为视频质量的评价依据。
本实施例中,获取到传输视频信息之后,可以根据该传输视频信息计算得到压缩失真参数和/或数据包丢失视频质量失真参数,之后可以至少根据该压缩失真参数和/或数据包丢失视频质量失真参数计算视频帧质量参数,所以本发明实施例中只需要根据终端侧的传输视频信息即可计算视频帧的质量,无需获取原始参考视频,因此能够节省网络资源;
其次,由于本实施例中的视频帧质量参数与压缩失真参数和/或数据包丢失视频质量失真参数相关,即压缩失真参数和/或数据包丢失视频质量失真参数是评价视频帧质量的指标,而该压缩失真参数和/或数据包丢失视频质量失真参数与视频帧质量之间存在线性关系,所以使用压缩失真参数和/或数据包丢失视频质量失真参数评价视频帧质量可以更加直观地体现用户观看网络视频时对网络视频的感受,进而提高视频质量评估的准确性。
本发明实施例中的视频质量评估方式按照具体的视频帧参数的不同可以分为三种情况:
一、以压缩失真参数作为视频帧参数的情况:
本实施例中,若该视频的传输信道质量比较高,则可能不会造成数据包丢失视频质量失真,即不考虑视频数据包丢失的因素。但从目前的技术来看,网络视频由于网络带宽的限制,都会对视频进行编码压缩,则本实施例中仅以压缩失真参数作为视频质量的参考依据。
请参阅图1,本发明实施例中视频质量评估方法第一实施例包括:
101、获取传输视频信息;
本实施例中,检测视频质量的过程在终端侧完成,即视频质量评估装置可以作为终端的一部分,或独立存在,其只需获取终端侧的传输视频信息即可进行视频质量评估,而无需获取原始参考视频作为评价依据,当然本方案并不局限于终端侧,本方案可以运用于只要能获取视频信息的网络的任意节点。
本实施例中的传输视频信息可以包括码率,视频编码的量化因子(本文所提到的量化因子可以是通常所说的量化参数QP(quantization parameter),也可以是Qstep(quantization step)量化步长等控制不同量化程度的参数,以下的实例内容中都以量化参数QP表示,但对于量化步长Qstep等控制量化程度的参数同样适用),或者还可以包括视频帧的持续时间等信息。可以理解的是,在实际应用中,除了上述信息之外,还可以获取其他类似的传输视频信息。
102、根据所述传输视频信息计算压缩失真参数;
本实施例中,获取到传输视频信息之后,即可根据该传输视频信息计算压缩失真参数,具体过程为:
根据视频压缩的率失真公式
R ( D ) = ln 1 &alpha;D 0 < D < 1 &alpha; 0 D &GreaterEqual; 1 &alpha; - - - ( 1 )
其中,α为拉普拉斯分布的参数。采用平方失真测度,D=Q/4。因此,可以得到 R = ln 4 &alpha; &CenterDot; QP .
特别地,对于视频序列,α=k/σ,σ为视频的区域方差。
上述R为码率,QP为量化因子,根据传输视频即可计算得到R以及QP,具体的计算过程为现有技术,此处不做限定。
由上述公式可以得到:
&sigma; = c 1 &CenterDot; QP &CenterDot; e c 2 R - - - ( 2 )
对于固定的QP, &sigma; = c 1 &CenterDot; e c 2 R , 通常情况下,R的取值范围较小(小于0.3)而对于较小的R,σ与R近似为线性关系,即可以由上式(2)计算得到视频帧的空域复杂度参数以及时域活动度参数:
空域复杂度参数σS=c1+c2R;
时域活动度参数σT=c3+c4R;
上述c1,c2,c3,c4为常数,可以通过实验确定,且每个QP都对应有固定的c1,c2,c3,c4,即上述空域复杂度参数以及时域活动度参数是依据QP以及R计算得到。
其中,空域复杂度参数的计算以及时域活动度参数的计算分别是上述式(2)针对不同的视频帧所得到的,采用帧内模式编码的视频帧,σS反映了视频帧的空域复杂度,对于采用帧间模式编码的视频帧,σT反映了视频帧的时域活动度。
上述空域复杂度表示视频空间内容的复杂度,例如某一帧所包含的元素等,一般来说,元素越多越复杂,则该视频的空域复杂度越高;
上述时域活动度表示视频时域的运动特性,例如某一帧所持续的时间,或视频帧之间的交替程度,一般来说,交替程度越高,则该视频的时域活动度越高。
作为通用项,σS,n为第n个视频帧的空域复杂度,σT,n为第n个视频帧的时域活动度,Rn为第n个视频帧的码率,QPn为第n个视频帧的平均量化因子。
需要说明的是,对于采用帧内模式编码的视频帧,其时域活动度根据其相邻的采用帧间模式编码的视频帧的时域活动度预测得到;对于采用帧间模式编码的视频帧,其空域复杂度根据其相邻的采用帧内模式编码的视频帧的空域复杂度预测得到。
103、根据压缩失真参数计算视频帧质量参数。
上述步骤102中计算得到了视频帧的码率,量化因子,空域复杂度参数以及时域活动度参数,则可以根据参数计算视频帧质量参数。
在根据压缩失真参数计算视频帧质量参数之前,首先需要说明一下视频压缩与视频质量之间的关系:
视频压缩属于有损压缩,视频编码中的量化过程是引起视频压缩失真的根本原因。由于网络视频应用通常能够对大部分帧进行正确接收和解码,因此对于没有出错的视频帧来说,根据用户的视觉特性衡量量化失真就是评价视频质量的关键。
通过实验得到,视频帧的主观质量与QP或者量化步长有近似的线性关系,如图2所示。其中曲线201以及视频202分别表示两个不同的视频序列,图2展示的是不同的视频序列在只考虑压缩失真的情况的视频质量与QP之间的曲线关系。由图2可以看出,不同的视频序列的主观质量与QP之间的线性关系具有不同的特性(例如不同的截距、斜率),由此反映视频的内容特性,即视频的空域复杂度和时域活动度,则某视频帧在只考虑压缩失真的情况下,其质量参数与该视频帧的空域复杂度参数,时域活动度参数,码率以及量化因子有关,对于视频帧质量的计算本实施例提供两套方案。
方案1:具体地,视频编码器引起的压缩失真是由DCT系数量化引起的,因此量化因子与视频的压缩失真有直接关系。通过实验得到,视频帧的主观质量与QP有近似的线性关系,即
Q n F &prime; = a * QP + b - - - ( 3 )
其中,Qn F′表示视频帧n的主观质量,也称为视频帧质量基数,a以及b为常数,均通过实验得到,获取a,b的过程此处不做限定。
由于每一帧的质量与视频的内容即空域复杂度和时域活动度有关,因此根据上述式(3)对于视频帧质量基数Qn F′进行掩盖修正,得到下式:
Q n F = Q n F &prime; * ( 1 + ( &sigma; S a 1 ) b 1 ) * ( 1 + ( &sigma; T a 2 ) b 2 ) - - - ( 4 )
同理,上述式(4)中的a1,a2,b1以及b2为预置常数,均通过实验得到,获取a1,a2,b1以及b2的过程此处不做限定。
将前面计算得到的空域复杂度参数以及时域活动度参数代入式(4)即可消除空域复杂度参数以及时域活动度参数,而将式(4)转换为只包含码率以及量化因子的式子:
Q n F = Q n F &prime; * ( 1 + ( c 1 + c 2 R a 1 ) b 1 ) * ( 1 + ( c 3 + c 4 R a 2 ) b 2 ) - - - ( 5 )
由上式(5)即可得到该视频帧的质量参数,注意由于c1,c2,c3,c4是由QP的大小决定,所以实际上该公式表示的是视频质量和码率R,以及QP之间的关系。该质量参数是只考虑压缩失真情况下的视频帧质量参数。
方案2:在方案1的基础上,考虑将掩盖修正只加在失真部分上:
视频帧的主观质量与QP的关系表示为无压缩损伤情况下的最好质量a,减去由于量化导致的损伤:
Q n F &prime; = a - b * QP - - - ( 6 )
其中,Qn F′表示视频帧n的主观质量,也称为视频帧质量基数,a为无损伤质量常数,b为常数,均通过实验得到,获取a,b的过程此处不做限定。
但每一帧质量的失真由于人眼的掩盖效应,需要进行掩盖修正,即用视频的空域复杂度参数和时域活动度参数对掩盖前视频质量压缩失真参数b*QP进行掩盖,得到视频质量压缩失真参数,因此根据上述式(6)可以得到:
Q n F = Q n F &prime; + b * QP * ( ( &sigma; S a 1 ) b 1 + ( &sigma; T a 2 ) b 2 ) =
a - b * QP * ( 1 - ( ( &sigma; S a 1 ) b 1 + ( &sigma; T a 2 ) b 2 ) ) - - - ( 7 )
同理,上述式(4)中的a1,a2,b1以及b2为常数,均通过实验得到,获取a1,a2,b1以及b2的过程此处不做限定。
将前面计算得到的空域复杂度参数以及时域活动度参数代入式(7)即可消除空域复杂度参数以及时域活动度参数,而将式(7)转换为只包含码率以及量化因子的式子:
Q n F = Q n F &prime; + b * QP * ( ( c 1 + c 2 R a 1 ) b 1 + ( c 3 + c 4 R a 2 ) b 2 ) =
a - b * QP * ( 1 - ( ( c 1 + c 2 R a 1 ) b 1 + ( c 3 + c 4 R a 2 ) b 2 ) ) (8)
由上式(8)即可得到该视频帧的质量参数,注意由于c1,c2,c3,c4是由QP的大小决定,所以实际上该公式表示的是视频质量和码率R,以及QP之间的关系。该质量参数是只考虑压缩失真情况下的视频帧质量参数。
本实施例中,计算得到视频帧的质量参数之后,即可根据该视频帧的质量参数计算视频序列的质量参数,但是由于视频编码器的速率控制算法往往导致解码端视频帧率随时间变化。
另外,由于网络带宽的变化,视频的播放过程往往会出现短暂的停顿。因此,整个视频序列的质量不是每一帧质量的简单叠加或平均,对视频序列进行质量评估还需要考虑视频播放帧率、播放停顿等因素。
因此,本实施例中采用“视频帧对视频序列评分的贡献”的方式计算视频序列的质量参数。其中,“视频帧对视频序列评分的贡献”表示当显示整个视频序列时,每个视频帧对整个视频质量的影响,它与视频帧的质量和视频帧的持续时间有关。本实施例以及后续各个实施例中的持续时间均指视频帧之间的间隔时间,该时间间隔可以是连续的两个具有不同显示内容的帧之间的显示时间间隔,比如帧a显示后出现了缓存情况,缓存结束后才开始显示帧b,这时帧a和帧b间的持续时间就必须包括缓存时间;同时该时间还包括这种情况:帧a后面有若干帧丢失无法解码不能显示其真实内容,直到帧b才能解码并正确显示,这时a帧显示结束后,根据不同的错误掩盖方法会有不同的处理和显示策略,通常的处理方法是,后面每一丢失帧都使用a帧的内容来显示,然后b帧再显示,这时本文所指的时间间隔就是第一个a帧和b帧显示时间的差值。
具体地,第n个视频帧对视频序列评分的贡献Qn FoS与视频帧n的质量参数有关,且该视频帧的时域活动度参数,以及该视频帧的持续时间有关。
计算得到各视频帧对视频序列评分的贡献之后,可以通过时域加权的方式得到整个视频序列的质量参数。
本实施例中,获取到传输视频信息之后,可以根据该传输视频信息至少计算得到压缩失真参数,之后可以至少根据该压缩失真参数计算视频帧质量参数,所以本发明实施例中只需要根据终端侧的传输视频信息即可计算视频帧的质量,无需获取原始参考视频,因此能够节省网络资源;
其次,由于本实施例中的视频帧质量参数至少与压缩失真参数相关,即压缩失真参数是评价视频帧质量的指标,而该压缩失真参数与视频帧质量之间存在线性关系,所以使用压缩失真参数评价视频帧质量可以更加直观的体现用户观看网络视频时对网络视频的感受,进而提高视频质量评估的准确性。
二、以压缩失真参数以及数据包丢失视频质量失真参数作为视频帧参数的情况:
本实施例中,若该视频的传输信道质量不高,则可能会造成数据包丢失视频质量失真,即在计算视频帧质量参数时需要考虑视频帧丢失的因素。而从目前的技术来看,网络视频由于网络带宽的限制,都会对视频进行编码压缩,所以本实施例中同时以压缩失真参数以及数据包丢失视频质量失真参数作为视频质量的参考依据。
请参阅图3,本发明实施例中视频质量评估方法第二实施例包括:
301、获取传输视频信息;
本实施例中,以检测视频质量的过程在终端侧完成为例,即视频质量评估装置可以作为终端的一部分,或独立存在,其只需获取终端侧的传输视频信息即可进行视频质量评估,而无需获取原始参考视频作为评价依据,当然本方案并不局限于终端侧,本方案可以运用于只要能获取视频信息的网络的任意节点。
本实施例中的传输视频信息可以包括码率,视频编码的量化因子,或者还可以包括视频帧的持续时间等信息。可以理解的是,在实际应用中,除了上述信息之外,还可以获取其他类似的传输视频信息。
302、根据所述传输视频信息计算压缩失真参数以及数据包丢失视频质量失真参数;
本实施例中根据传输视频信息计算压缩失真参数的过程与前述第一实施例中计算压缩失真参数的过程相同,此处不再赘述。
此外,本实施例中还可以计算数据包丢失视频质量失真参数,对于网络视频,数据包丢失视频质量失真时影响视频质量的一个关键因素。视频数据的丢失会使解码器无法正常恢复相关的视频帧区域,造成恢复视频的失真。对于采用帧间预测模式编码的视频,参考视频帧的错误以及参考视频帧的丢失都会引起错误传播。另外,对于实时视频流,网络数据包的时延、抖动对视频终端的影响都体现为数据丢失。
本实施例中的数据包丢失视频质量失真参数dn表示数据丢失对视频帧质量的影响。需要说明的是,“片”是解码器解码的最小单位,对于“片”的丢失,解码器会进行误码掩盖,误码掩盖后视频的质量与视频的内容密切相关。因此,视频的空域时域相关性,即视频帧的空域复杂度和时域活动度是影响误码掩盖效果的关键因素。另外,没有数据丢失时视频帧的质量也是影响dn的一个关键因素。
因此,本实施例中的dn包括两个方面的参数,即第一视频质量失真参数de,n,表示直接遭受数据丢失引起视频帧质量下降的程度;第二视频质量失真参数dp,n,表示误码传播引起视频帧质量下降的程度。根据视频帧质量下降的不同原因,视频质量失真参数为这两个参数的加权和,即在数据丢包情况下视频质量公式为:
Q n F = Q n R - &beta; 1 * d e , n - &beta; 2 * d p , n - - - ( 9 )
Qn R表示没有误码情况下只考虑压缩损伤的视频帧质量参数。β1,β2分别表示由数据包丢失引起的误码和误码传播对于视频主观质量的不同损伤程度权重。对于丢包损伤的计算,本实施例提供四套方案:
方案1:
de,n的计算过程:
由于视频数据丢失越多,该视频帧受误码引起的失真就越大,所以包含有误码的视频帧的质量参数为:
Q n F = Q n R - num A - num R num A D n - - - ( 10 )
其中,numR表示为该帧接收到的有效包数(该数据包可以是实时传输协议包或者其他视频传输协议数据包,这里以实时传输协议为例,RTP,RealTime Protocol,),numA为该帧所有的RTP包数,Qn R表示完全无误码的视频帧质量参数,当当前帧完全丢失时,由于计算参数无法获取,Qn R可以根据解码端错误掩盖方法,通过预测得到,例如如果采用前一帧(参考帧)进行时域掩盖的方法,可以通过前一帧(参考帧)参数来预测当前帧,Dn为整帧丢失引起该视频帧的失真参数,其中,
D n = Q n R &CenterDot; ( &sigma; T a 3 ) b 3 - - - ( 11 )
由上式(10)以及(11)可知,
d e , n = ( num A - num R num A ) &CenterDot; Q n R &CenterDot; ( &sigma; T a 3 ) b 3 - - - ( 12 )
上述式(11)、(12)中σT是当前帧没有误码时的视频时域活动度参数,当有误码时可根据其前一参考帧得到,a3以及b3均为预置常数,可以通过实现得到,具体的获得方式此处不做限定。
其次说明dp,n的计算方式:
对于采用帧间预测模式编码的视频,参考视频中的误码以及视频帧的丢失都会引起误码传播,视频时间活动度越大,视频质量受误码的影响越严重。当第n个视频帧遭受误码传播时,视频帧的质量参数为:
Q n F = Q n R - D n - - - ( 13 )
Qn R表示完全无误码的视频帧质量参数,Dn为误码传播引起该视频帧的失真,即dp,n
D n = D n - 1 &CenterDot; ( 1 + ( &sigma; T a 4 ) b 4 ) - - - ( 14 )
其中,Dn-1为当前帧的前一帧(参考帧)由于误码引起失真的视频质量失真参数。当遇到第n个视频帧整帧丢失的情况时,由于采用帧间预测模式编码,Qn R可由前一帧(参考帧)的Qn-1 R近似代替。
其中,a4以及b4均为预置常数,可以通过实验得到,具体的获得方式此处不做限定。
上述介绍了计算de,n以及dp,n过程,将上述两个参数直接加权联合即可得到dn,即数据包丢失视频质量失真参数。
方案2:
de,n的计算过程:
由于视频数据丢失越多,该视频帧受误码引起的失真就越大,所以包含有误码的视频帧的质量参数为:
Q n F = Q n R - num A - num R num A D n - - - ( 15 )
其形式和方案1中一致,但考虑到整帧丢失引起该视频帧的失真,不仅仅和时域活动度相关,而且还与量化因子,空域复杂度相关,所以得到整帧丢失的失真参数为
D n = Q n R &CenterDot; ( &sigma; T a 3 &CenterDot; QP + a 4 &CenterDot; &sigma; S + a 5 ) b 3 - - - ( 16 )
由上式(15)以及(16)可知,
d e , n = ( num A - num R num A ) &CenterDot; Q n R &CenterDot; ( &sigma; T a 3 &CenterDot; QP + a 4 &CenterDot; &sigma; S + a 5 ) b 3 - - - ( 17 )
上述式(16)、(17)中σT是当前帧没有误码时的视频时域活动度参数,当有误码时可根据其前一参考帧得到,a3,a4,a5以及b3均为预置常数,可以通过实验得到,具体的获得方式此处不做限定。
其次说明dp,n的计算方式:
对于采用帧间预测模式编码的视频,参考视频中的误码以及视频帧的丢失都会引起误码传播,视频时域活动度越大,视频质量受误码的影响越严重。当第n个视频帧只遭受误码传播时,视频帧的质量参数为:
Q n F = Q n R - d n - - - ( 18 )
Qn R表示完全无误码的视频帧质量参数,dn为误码传播引起该视频帧的失真,即dp,n
dn=dn-1+dist_trans    (19)
dn-1为当前视频帧的前一帧(参考帧)由于误码引起失真的视频质量失真参数。dist_trans为传播失真参数,是由误码传播带来的比参考帧更多的失真。实验的结果表明,dist_trans与时域活动度、空域复杂度、参考帧的失真和QP有关。时域活动度越大的序列,失真传播越明显,而空域复杂度大或QP大的序列会使得失真可见性变小,同时,如果参考帧失真很大或此帧未丢包的分数较低时,失真的传播力度将会变小。因此dist_trans的公式如下式:
dist _ trans = a 6 &CenterDot; &sigma; T 3 + a 7 &CenterDot; &sigma; T 2 + a 8 &CenterDot; &sigma; T + a 9 a 10 &CenterDot; d n - 1 b 4 &CenterDot; QP + a 11 &CenterDot; &sigma; S - - - ( 20 )
其中,a6-a10,b4为预置常数,可以通过实验得到,具体的获得方式此处不做限定。
上述介绍了计算de,n以及dp,n的过程,将上述两个参数直接加权联合即可得到dn,即数据包丢失视频质量失真参数。
方案3:
在方案1和2的基础上,对于误码传播失真参数dp,n,其误码传播的程度都还只能根据时间延续传播下去,但在实际中GOP结构中,由于Intra块的增加,可以减少错误传播,甚至结束错误传播,所以这里加入了一个根据Intra块比例来减少或终止错误传播的优化方案:
d p , n &prime; = d p , n &CenterDot; ( 1 - R P R P &prime; &CenterDot; NoDnNum N ) - - - ( 21 )
R P &prime; = R I RateRatio ( QP I ) &CenterDot; RateRatio ( QP P ) - - - ( 22 )
式(21)中的dp,n′为更新后的误码传播失真参数;NoDnNum为持续无丢包的帧数的累加值、N为错误传播终止帧数、
Figure G2009101616289D00172
为当前帧Intra的比例。
通过统计全I帧的其余QP与最小QP的平均每像素编码比特数,即码率(R)的比率(RateRatio),来估算当前帧(P帧)编码为全Intra块时的码率RP′,再根据当前GOP的I帧的QP和R、P帧实际的码率R来估算P帧Intra的比例
Figure G2009101616289D00173
,统计丢包的帧后持续无丢包的帧数,由持续无丢包的帧数的累加值NoDnNum、错误传播终止帧数N、当前帧Intra的比例可以得到错误传播恢复参数 ( 1 - R P R P &prime; &CenterDot; NoDnNum N ) ,对当前帧的总失真进行修正。NoDnNum表示在丢包帧后持续无丢包的帧数的累加值,N是预定失真能够消失的持续帧数即错误传播终止帧数,比如在GOP非常长时可以是该GOP的长度。
方案4:
在方案1、2以及3的基础上,对数据包丢失失真参数必须是经过掩盖之后的结果,即:
Q n F = Q n R - ( d e , n + d p , n ) ( 1 - ( ( &sigma; S c 4 ) d 4 + ( QP c 5 ) d 5 ) ) - - - ( 23 )
在误码失真和误码传播失真的总和上加由于不同视频内容所带来的视觉掩盖,视觉掩盖因子由当前帧的失真、空域复杂度和量化因子计算得出。
其中,c4,d4,c5,d5为预置常数,通过实验得到,具体的获得方式此处不做限定。
303、根据压缩失真参数计算无丢包情况下视频帧质量参数;
本实施例中,具体计算无丢包情况下视频帧质量参数的步骤即为第一实施例中步骤203计算得到的结果,具体计算过程此处不再赘述。
304、根据无丢包情况下视频帧质量参数以及数据包丢失视频质量失真参数计算视频帧质量参数。
步骤302中获得了数据包丢失视频质量失真参数,步骤303中获得了无丢包情况下视频帧质量参数,则可将无丢包情况下视频帧质量参数与数据包丢失视频质量失真参数的差值作为视频帧质量参数。
本实施例中,计算得到视频帧的质量参数之后,即可根据该视频帧的质量参数计算视频序列的质量参数,但是由于视频编码器的速率控制算法往往导致解码端视频帧率随时间变化。
另外,由于网络带宽的变化,视频的播放过程往往会出现短暂的停顿。因此,整个视频序列的质量不是每一帧质量的简单叠加或平均,对视频序列进行质量评估还需要考虑视频播放帧率、播放停顿等因素。
因此,本实施例中采用“视频帧对视频序列评分的贡献”的方式计算视频序列的质量参数。其中,“视频帧对视频序列评分的贡献”表示当显示整个视频序列时,每个视频帧对整个视频质量的影响,它与视频帧的质量和视频帧的持续时间有关。
具体地,第n个视频帧对视频序列评分的贡献Qn FoS与视频帧n的质量参数有关,且该视频帧的时域活动度参数,以及该视频帧的持续时间有关。
计算得到各视频帧对视频序列评分的贡献之后,可以通过时域加权的方式得到整个视频序列的质量参数。
本实施例中,获取到传输视频信息之后,可以根据该传输视频信息至少计算得到压缩失真参数,之后可以至少根据该压缩失真参数计算视频帧质量参数,所以本发明实施例中只需要根据终端侧的传输视频信息即可计算视频帧的质量,无需获取原始参考视频,因此能够节省网络资源;
其次,由于本实施例中的视频帧质量参数至少与压缩失真参数相关,即压缩失真参数是评价视频帧质量的指标,而该压缩失真参数与视频帧质量之间存在线性关系,所以使用压缩失真参数评价视频帧质量可以更加直观的体现用户观看网络视频时对网络视频的感受,进而提高视频质量评估的准确性。
三、以数据包丢失视频质量失真参数作为视频帧参数的情况:
本实施例中,对于某些有特殊要求的视频,例如要求视频的播放质量需要尽可能的和原始质量相同,则可能不会对视频进行压缩或者压缩的比例很小,同时有些应用不考虑视频压缩损伤仅仅考虑网络损伤,在这种情况下,则可以只考虑视频帧参数包括数据包丢失视频质量失真参数的情况,之后可能再考虑进一步包括压缩失真的情况。
本实施例中计算数据包丢失视频质量失真参数的方式与上述第二实施例中计算数据包丢失视频质量失真参数的方式类似。
计算得到数据包丢失视频质量失真参数之后,可以按照预置的方式计算视频帧初始质量参数即不包括视频数据包丢失影响(具体的方式可以采用现有技术中的计算方式或其他类似的计算视频帧质量的方式,以及直接假定等方式),将视频帧初始质量参数与数据包丢失视频质量失真参数的差值作为视频帧质量参数。
同样的,在计算得到视频帧质量参数之后,可以按照前述实施例中的方式计算视频序列质量,方式类似,此处不再赘述。
需要说明的是,上述三个实施例中在计算得到视频帧质量参数之后同样可以根据视频帧质量参数以及该视频帧的持续时间进行加权运算得到视频序列的质量,可以理解的是,在实际应用中,对于已经获取到的视频帧质量参数而言,无论其采用何种方式计算得到(包括采用本发明实施例提供的方式,或采用现有技术的其他计算方式)之后,均可采用本发明实施例中的方式计算整个视频序列的质量,具体方式与前述实施例中的方式类似,此处不作限定。
下面介绍本发明实施例中的视频质量评估装置,请参阅图4,本发明实施例中的视频质量评估装置包括:
视频帧获取单元401,用于获取传输视频信息;
视频帧参数计算单元402,用于根据视频帧获取单元401获取到的传输视频信息解析得到视频帧参数,所述视频帧参数至少包括压缩失真参数或者数据包丢失参数;
视频帧质量参数计算单元404,用于根据视频帧参数计算单元402计算得到的视频帧参数计算视频帧质量参数。
本实施例中,按照视频帧参数所包含的内容可以将本实施例分为三种情况:
一、视频帧参数仅包含压缩失真参数:
此种情况下,本实施例中的视频质量评估装置包括:
视频帧获取单元401,用于获取传输视频信息;
视频帧参数计算单元402,用于根据视频帧获取单元401获取到的传输视频信息解析得到视频帧参数,所述视频帧参数至少包括压缩失真参数;
本实施例中的视频帧参数计算单元402中包含压缩失真计算单元4021,用于根据视频帧获取单元401获取到的传输视频信息计算压缩失真参数;
视频帧质量参数计算单元404,用于根据压缩失真计算单元4021计算得到的压缩失真参数计算视频帧质量参数。
视频序列质量计算单元405,用于获取所述视频帧的持续时间,对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量计算单元。
具体的计算方式与前述方法实施例中的计算方式一致,此处不再赘述。
二、视频帧参数仅包含数据包丢失失真参数:
此种情况下,本实施例中的视频质量评估装置包括:
视频帧获取单元401,用于获取传输视频信息;
视频帧参数计算单元402,用于根据视频帧获取单元401获取到的传输视频信息解析得到视频帧参数,所述视频帧参数至少包括数据包丢失视频质量失真参数;
本实施例中的视频帧参数计算单元402中包含数据包丢失计算单元4022,用于根据视频帧获取单元401获取到的传输视频信息计算数据包丢失视频质量失真参数;
视频帧质量参数计算单元404,用于根据数据包丢失计算单元4022计算得到的数据包丢失视频质量失真参数计算视频帧质量参数。
视频序列质量计算单元405,用于获取所述视频帧的持续时间,对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量计算单元。
具体的计算方式与前述方法实施例中的计算方式一致,此处不再赘述。
三、视频帧参数包含压缩失真参数以及数据包丢失视频质量失真参数:
此种情况下,本实施例中的视频质量评估装置包括:
视频帧获取单元401,用于获取传输视频信息;
视频帧参数计算单元402,用于根据视频帧获取单元401获取到的传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数以及数据包丢失视频质量失真参数;
本实施例中的视频帧参数计算单元402中包含压缩失真计算单元4021以及数据包丢失计算单元4022;
其中压缩失真计算单元4021用于根据视频帧获取单元401获取到的传输视频信息计算压缩失真参数;
其中数据包丢失计算单元4022用于根据视频帧获取单元401获取到的传输视频信息计算数据包丢失视频质量失真参数;
本实施例中的视频质量评估装置还包括:
无损码参数计算单元403,用于根据压缩失真计算单元4021计算得到的压缩失真参数计算无丢包情况下视频帧参数;
视频帧质量参数计算单元404,用于根据无损码参数计算单元403计算得到的无丢包情况下视频帧参数以及数据包丢失计算单元4022计算得到的数据包丢失视频质量失真参数计算视频帧质量参数。
视频序列质量计算单元405,用于获取所述视频帧的持续时间,对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量计算单元。
具体的计算方式与前述方法实施例中的计算方式一致,此处不再赘述。
本实施例中,获取到传输视频信息之后,可以根据该传输视频信息至少计算得到压缩失真参数,之后可以至少根据该压缩失真参数计算视频帧质量参数,所以本发明实施例中只需要根据终端侧的传输视频信息即可计算视频帧的质量,无需获取原始参考视频,因此能够节省网络资源;
其次,由于本实施例中的视频帧质量参数至少与压缩失真参数相关,即压缩失真参数是评价视频帧质量的指标,而该压缩失真参数与视频帧质量之间存在线性关系,所以使用压缩失真参数评价视频帧质量可以更加直观的体现用户观看网络视频时对网络视频的感受,进而提高视频质量评估的准确性。
下面介绍本发明实施例中的视频质量评估系统,请参阅图5,本发明实施例中的视频质量评估系统包括:
视频质量评估装置501,用于获取传输视频信息;根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;根据所述视频帧参数计算视频帧质量参数;
发送装置502,用于获取所述视频质量评估装置501生成的视频帧质量参数,发送所述视频帧质量参数。
本实施例中的视频质量评估系统还可以进一步包括:
显示装置503,用于接收所述发送装置502发送的视频帧质量参数,向用户展示所述视频帧质量参数。
本实施例中的视频质量评估系统还可以进一步包括:
存储装置504,用于存储所述发送装置502发送的视频帧质量参数。
可以理解的是,本实施例中的视频质量评估装置501的具体结构可采用前述图4中所示的视频质量评估装置的结构,该视频质量评估装置501的工作方式以及数据处理流程与前述图4中的工作方式以及数据处理流程类似,此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括如下步骤:
获取传输视频信息;
根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;
根据所述视频帧参数计算视频帧质量参数。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(ROM,Read-Only Memory)或随机存储记忆体(RAM,Random Access Memory)等。
以上对本发明所提供的一种视频质量评估方法及装置进行了详细介绍,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (33)

1.一种视频质量评估方法,其特征在于,包括:
获取传输视频信息;
根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;
根据所述视频帧参数计算视频帧质量参数。
2.根据权利要求1所述的方法,其特征在于,所述根据所述视频帧参数计算视频帧质量参数包括:
根据所述压缩失真参数计算所述视频帧质量参数;或者
根据所述数据包丢失视频质量失真参数计算所述视频帧质量参数;或者
根据所述压缩失真参数和所述数据包丢失视频质量失真参数计算所述视频帧质量参数。
3.根据权利要求1或2所述的方法,其特征在于,获取压缩失真参数的过程中至少使用所述传输视频信息的码率以及量化因子。
4.根据权利要求3所述的方法,其特征在于,所述根据所述传输视频信息解析得到视频帧参数中的压缩失真参数包括:
获取所述传输视频信息的码率以及量化因子;
根据所述码率以及量化因子计算所述视频帧对应的空域复杂度参数以及时域活动度参数,所述空域复杂度参数表示视频空间内容的复杂度,所述时域活动度参数表示视频时域的运动特性;
根据所述空域复杂度参数以及时域活动度参数计算所述压缩失真参数。
5.根据权利要求4所述的方法,其特征在于,根据视频帧参数中的压缩失真参数计算视频帧质量参数包括:
根据所述量化因子计算得到视频帧质量基数;
根据所述空域复杂度参数和时域活动度参数对所述视频帧质量基数进行掩盖修正获得视频帧质量参数。
6.根据权利要求4所述方法,其特征在于,根据视频帧参数中的压缩失真参数计算视频帧质量参数包括:
获取视频无损伤质量常数;
根据所述量化因子计算压缩失真参数;
通过视频无损伤质量常数和压缩失真参数得到视频帧质量参数。
7.根据权利要求6所述方法,其特征在于,所述压缩失真参数的获取过程包括:
根据所述量化因子计算掩盖前压缩失真参数;
根据所述空域复杂度参数和时域活动度参数对所述掩盖前压缩失真参数进行掩盖修正获得所述压缩失真参数。
8.根据权利要求2所述的方法,其特征在于,所述根据所述传输视频信息解析得到视频帧参数中的数据包丢失视频质量失真参数包括:
根据所述传输视频信息计算第一视频质量失真参数以及第二视频质量失真参数;
将所述第一视频质量失真参数以及第二视频质量失真参数的加权和作为所述数据包丢失视频质量失真参数,所述第一视频质量失真参数表示视频帧内丢失数据所造成的视频帧质量下降的程度,所述第二视频质量失真参数表示误码传播所造成的视频帧质量下降的程度。
9.根据权利要求8所述的方法,其特征在于,所述根据所述传输视频信息计算第一视频质量失真参数包括:
获取视频帧中有效数据包的数目以及所有数据包的数目;
将所述所有数据包的数目与所述有效数据包的数目的差与所述所有数据包的数目进行除法运算得到所述视频帧中失效数据包所占的比例;
将所述比例与视频帧整帧丢失的失真参数之间的乘积作为所述第一视频质量失真参数。
10.根据权利要求9所述的方法,计算视频帧整帧丢失的失真参数包括:
获取当前视频帧在没有误码时的视频帧质量参数;
根据当前帧没有误码时的视频时域活动度参数以及预置常数计算视频帧整帧丢失的失真参数。
11.根据权利要求9所述的方法,计算视频帧整帧丢失的失真参数包括:
获取当前视频帧在没有误码时的视频帧质量参数;
根据当前帧没有误码时的视频时域活动度参数、量化因子、空域复杂度参数以及预置常数计算视频帧整帧丢失的失真参数。
12.根据权利要求8所述的方法,其特征在于,所述根据所述传输视频信息计算第二视频质量失真参数包括:
获取当前视频帧的参考帧的视频质量失真参数;
根据所述参考帧的视频质量失真参数、时域活动度参数以及预置常数计算第二视频质量失真参数。
13.根据权利要求8所述的方法,其特征在于,所述根据所述传输视频信息计算第二视频质量失真参数包括:
获取当前视频帧的参考帧的视频质量失真参数;
计算当前视频帧与参考帧间的传播失真参数;
由当前视频帧的参考帧的视频质量失真参数与当前视频帧与参考帧间的传播失真参数获取第二视频质量失真参数。
14.根据权利要求13所述的方法,其特征在于,当前视频帧与参考帧间的传播失真参数是根据当前视频帧的参考帧的视频质量失真参数、时域活动度参数、以及量化因子计算得到。
15.根据权利要求8所述的方法,其特征在于,所述根据所述传输视频信息计算第二视频质量失真参数包括:
计算传播失真参数;
计算错误传播恢复参数;
通过传播失真参数和错误传播恢复参数获取第二视频质量失真参数。
16.根据权利要求15所述的方法,其特征在于,计算传播失真参数包括:
获取当前视频帧的参考帧的视频质量失真参数;
根据所述参考帧的视频质量失真参数、时域活动度参数以及预置常数计算传播失真参数。
17.根据权利要求15所述的方法,其特征在于,计算传播失真参数包括:
获取当前视频帧的参考帧的视频质量失真参数;
计算当前视频帧与参考帧间的传播失真参数;
由当前视频帧的参考帧的视频质量失真参数与当前视频帧与参考帧间的传播失真参数获取传播失真参数。
18.根据权利要求17所述的方法,其特征在于,当前视频帧与参考帧间的传播失真参数是根据当前视频帧的参考帧的视频质量失真参数、时域活动度参数、以及量化因子计算得到。
19.根据权利要求15所述的方法,其特征在于,计算错误传播恢复参数包括:
获取在丢包帧后持续无丢包的帧数的累加值;
获取预定的错误传播终止帧数;
计算当前帧的Intra块比例;
根据所述丢包帧后持续无丢包的帧数的累加值、错误传播终止帧数和当前帧的Intra块比例计算错误传播恢复参数。
20.根据权利要求19所述的方法,其特征在于,计算当前帧Intra块比例包括:
根据当前帧的量化因子计算当前帧编码为全Intra块时的码率;
根据当前帧的实际码率和全Intra块的码率的比例,计算当前帧Intra块比例。
21.根据权利要求8所述的方法,其特征在于,计算数据包丢失视频质量失真参数包括:
获取所述第一视频质量失真参数以及第二视频质量失真参数的加权和,作为掩盖前视频质量失真参数;
根据所述空域复杂度参数和量化因子以及常量对所述掩盖前视频质量失真参数进行掩盖,获取数据包丢失视频质量失真参数。
22.根据权利要求2或4或6所述的方法,其特征在于,根据所述压缩失真参数和所述数据包丢失视频质量失真参数计算所述视频帧质量参数包括:
根据所述压缩失真参数计算无丢包情况下视频帧质量参数;
获取数据包丢失视频质量失真参数;
根据所述无丢包情况下视频帧质量参数以及数据包丢失视频质量失真参数计算所述视频帧质量参数。
23.根据权利要求22所述的方法,其特征在于,所述根据所述无丢包情况下视频帧质量参数以及数据包丢失视频质量失真参数计算所述视频帧质量参数包括:
将所述无丢包情况下视频帧质量参数与所述数据包丢失视频质量失真参数之间的差值作为所述视频帧质量参数。
24.根据权利要求1、2、3至23中任一项所述的方法,其特征在于,所述根据所述视频帧参数计算视频帧质量参数之后包括:
获取视频帧的持续时间;
根据所述视频帧质量参数以及所述持续时间计算视频序列质量参数。
25.一种视频质量评估方法,其特征在于,包括:
获取传输视频信息,所述传输视频信息至少包括视频帧的持续时间;
根据所述传输视频信息解析得到视频帧参数;
根据所述视频帧参数计算视频帧质量参数;
对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量参数。
26.根据权利要求25所述的方法,其特征在于,所述视频帧参数包括:压缩失真参数和/或数据包丢失视频质量失真参数;
所述根据所述视频帧参数计算视频帧质量参数包括:
根据所述压缩失真参数计算所述视频帧质量参数;或者
根据所述数据包丢失视频质量失真参数计算所述视频帧质量参数;或者
根据所述压缩失真参数和所述数据包丢失视频质量失真参数计算所述视频帧质量参数。
27.根据权利要求25或26所述的方法,其特征在于,所述持续时间包括视频帧之间的间隔时间。
28.一种视频质量评估装置,其特征在于,包括:
视频帧获取单元,用于获取传输视频信息;
视频帧参数计算单元,用于根据视频帧获取单元获取到的传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数;
视频帧质量参数计算单元,用于根据视频帧参数计算单元计算得到的视频帧参数计算视频帧质量参数。
29.根据权利要求28所述的视频质量评估装置,其特征在于,所述视频质量评估装置还包括:
视频序列质量计算单元,用于获取视频帧的持续时间,对所述视频帧质量参数以及所述持续时间进行加权运算得到视频序列质量参数。
30.根据权利要求28或29所述的视频质量评估装置,其特征在于,所述视频帧参数计算单元包括:
压缩失真计算单元,用于根据视频帧获取单元获取到的传输视频信息计算压缩失真参数;
数据包丢失计算单元,用于根据视频帧获取单元获取到的传输视频信息计算数据包丢失视频质量失真参数。
31.一种视频质量评估系统,其特征在于,包括:
视频质量评估装置,用于获取传输视频信息,根据所述传输视频信息解析得到视频帧参数,所述视频帧参数包括压缩失真参数和/或数据包丢失视频质量失真参数,根据所述视频帧参数计算视频帧质量参数;
发送装置,用于获取所述视频质量评估装置生成的视频帧质量参数,发送所述视频帧质量参数。
32.根据权利要求31所述的视频质量评估系统,其特征在于,所述视频质量评估系统还包括:
显示装置,用于接收所述发送装置发送的视频帧质量参数,向用户展示所述视频帧质量参数。
33.根据权利要求32所述的视频质量评估系统,其特征在于,所述视频质量评估系统还包括:
存储装置,用于存储所述发送装置发送的视频帧质量参数。
CN200910161628.9A 2008-07-21 2009-07-20 一种视频质量评估方法、系统及装置 Expired - Fee Related CN101635846B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910161628.9A CN101635846B (zh) 2008-07-21 2009-07-20 一种视频质量评估方法、系统及装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN200810130787.8 2008-07-21
CN200810130787 2008-07-21
CN200910161628.9A CN101635846B (zh) 2008-07-21 2009-07-20 一种视频质量评估方法、系统及装置

Publications (2)

Publication Number Publication Date
CN101635846A CN101635846A (zh) 2010-01-27
CN101635846B true CN101635846B (zh) 2012-04-25

Family

ID=41570012

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910161628.9A Expired - Fee Related CN101635846B (zh) 2008-07-21 2009-07-20 一种视频质量评估方法、系统及装置

Country Status (4)

Country Link
US (2) US8917777B2 (zh)
EP (1) EP2296379A4 (zh)
CN (1) CN101635846B (zh)
WO (1) WO2010009637A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103428523A (zh) * 2012-05-22 2013-12-04 华为技术有限公司 评估视频质量的方法和装置
WO2014029315A1 (zh) 2012-08-21 2014-02-27 华为技术有限公司 一种获得视频编码压缩质量的方法及装置

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010009637A1 (zh) 2008-07-21 2010-01-28 华为技术有限公司 一种视频质量评估方法、系统及装置
CN101827280B (zh) * 2010-02-04 2012-03-21 深圳市同洲电子股份有限公司 视频输出质量的检测方法和装置
US9288071B2 (en) 2010-04-30 2016-03-15 Thomson Licensing Method and apparatus for assessing quality of video stream
EP2647199B1 (en) * 2010-11-30 2017-01-11 Thomson Licensing Method and apparatus for measuring quality of video based on frame loss pattern
WO2011150654A1 (zh) * 2010-12-31 2011-12-08 华为技术有限公司 视频质量的评估方法、终端、服务器及系统
CN102740108B (zh) * 2011-04-11 2015-07-08 华为技术有限公司 一种视频数据质量评估方法和装置
WO2012167416A1 (en) * 2011-06-07 2012-12-13 Huawei Technologies Co., Ltd. Monitoring device and method for monitoring a video session in a data network
CN102257831B (zh) * 2011-06-09 2013-08-07 华为技术有限公司 一种视频质量评估的方法和网络节点
EP2751990A4 (en) 2011-08-29 2015-04-22 Icvt Ltd CONTROL OF A VIDEO CONTENT SYSTEM
KR20140097199A (ko) * 2011-11-24 2014-08-06 톰슨 라이센싱 비디오 품질 측정
CN103188236B (zh) * 2011-12-30 2015-12-16 华为技术有限公司 媒体传输质量的评估方法和装置
CN103379358B (zh) * 2012-04-23 2015-03-18 华为技术有限公司 评估多媒体质量的方法和装置
CN103379360B (zh) * 2012-04-23 2015-05-27 华为技术有限公司 一种视频质量评估方法和装置
CN103458264B (zh) * 2012-05-28 2015-02-25 华为技术有限公司 一种媒体质量的评估方法及装置
CN103634577B (zh) 2012-08-22 2014-12-31 华为技术有限公司 多媒体质量的监控方法和设备
CN104539943B (zh) * 2012-08-22 2017-01-04 华为技术有限公司 多媒体质量的监控方法和设备
US20150170350A1 (en) * 2012-08-27 2015-06-18 Thomson Licensing Method And Apparatus For Estimating Motion Homogeneity For Video Quality Assessment
CN103813160B (zh) * 2012-11-12 2016-03-02 中国电信股份有限公司 视频质量监控方法和装置
CN103002287B (zh) * 2012-12-06 2015-09-02 深圳广晟信源技术有限公司 视频单元的复杂度生成方法及装置
CN103002285B (zh) * 2012-12-06 2015-07-08 深圳广晟信源技术有限公司 视频单元的复杂度生成方法及装置
CN102984541B (zh) * 2012-12-07 2015-01-14 浙江大学 一种基于像素域失真度估计的视频质量评价方法
CN103945213B (zh) * 2013-01-22 2016-12-28 中兴通讯股份有限公司 一种视频流质量监测方法及装置
CN103747237B (zh) 2013-02-06 2015-04-29 华为技术有限公司 视频编码质量的评估方法及设备
KR20150115771A (ko) * 2013-02-07 2015-10-14 톰슨 라이센싱 컨텍스트-기반 비디오 품질 평가를 위한 방법 및 장치
WO2014121572A1 (en) * 2013-02-07 2014-08-14 Thomson Licensing Method and apparatus for context-based video quality assessment
CN103747238B (zh) * 2013-02-20 2015-07-08 华为技术有限公司 视频静止失真程度评估方法和装置
CN103347195B (zh) * 2013-05-31 2016-04-06 Tcl集团股份有限公司 一种监测评估视频质量的系统及方法
CN104427383B (zh) * 2013-08-19 2018-08-10 联想(北京)有限公司 一种信息处理方法以及电子设备
CN103533367B (zh) * 2013-10-23 2015-08-19 传线网络科技(上海)有限公司 一种无参考视频质量评价方法及装置
CN104486092B (zh) * 2014-12-15 2018-04-06 北京国双科技有限公司 数据监控方法及装置
CN104581140B (zh) * 2014-12-26 2016-08-24 国家电网公司 一种会议电视的视频质量评估方法
CN106713901B (zh) * 2015-11-18 2018-10-19 华为技术有限公司 一种视频质量评价方法及装置
CN105812706A (zh) * 2016-03-17 2016-07-27 掌赢信息科技(上海)有限公司 一种视频通话质量评估方法及电子设备
CN107623847B (zh) * 2016-07-14 2020-02-18 中国移动通信集团重庆有限公司 一种视频业务的视频质量评估方法和装置
CN107786676B (zh) * 2016-08-24 2021-07-09 中国电信股份有限公司 中继通信方法、系统和用于中继通信的终端
CN106507101B (zh) * 2016-11-21 2018-12-28 中国联合网络通信集团有限公司 一种视频业务质量评价方法及装置
CN108271016B (zh) * 2016-12-30 2019-10-22 上海大唐移动通信设备有限公司 视频质量评估方法及装置
US20180278947A1 (en) * 2017-03-24 2018-09-27 Seiko Epson Corporation Display device, communication device, method of controlling display device, and method of controlling communication device
CN108809893B (zh) * 2017-04-27 2020-03-27 华为技术有限公司 一种视频质量评估方法和设备
CN107659806B (zh) * 2017-08-22 2019-08-16 华为技术有限公司 视频质量的评估方法和装置
JP6907880B2 (ja) * 2017-10-24 2021-07-21 オムロン株式会社 画像処理装置、画像処理システム、画像処理プログラム
CN110895794B (zh) * 2018-09-13 2022-11-25 浙江宇视科技有限公司 视频效果自修复方法和视频自修复装置
WO2020080623A1 (ko) * 2018-10-19 2020-04-23 삼성전자 주식회사 영상의 ai 부호화 및 ai 복호화 방법, 및 장치
CN109729433B (zh) * 2019-01-22 2021-05-07 北京奇艺世纪科技有限公司 一种视频播放评估方法及装置
IL274803B2 (en) * 2019-07-16 2023-06-01 Beamr Imaging Ltd System and method for subjective evaluation of video quality
CN110691238A (zh) * 2019-11-06 2020-01-14 苏州科达科技股份有限公司 一种视频重建质量测试方法、装置、设备及可读存储介质
CN112235598B (zh) * 2020-09-27 2022-09-20 深圳云天励飞技术股份有限公司 一种视频结构化处理方法、装置及终端设备
CN112995652B (zh) * 2021-02-01 2021-12-07 腾讯科技(深圳)有限公司 视频质量评估方法及装置
CN113709453B (zh) * 2021-09-13 2023-09-08 北京车和家信息技术有限公司 视频质量评估方法、装置、设备及介质
CN117354177B (zh) * 2023-12-06 2024-03-01 广州市森锐科技股份有限公司 一种基于信创一体机的数据处理方法和系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7948875B2 (en) * 1997-08-29 2011-05-24 AIP Acquisition, LLC IP exchange quality testing system and method
US6795580B1 (en) 1998-09-10 2004-09-21 Tektronix, Inc. Picture quality measurement using blockiness
US8204323B2 (en) * 2003-06-05 2012-06-19 Aware, Inc. Image quality control techniques
JP4194479B2 (ja) 2003-11-20 2008-12-10 キヤノン株式会社 画像処理装置及び方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
CN100505895C (zh) * 2005-01-17 2009-06-24 华为技术有限公司 一种视频质量评估方法
EP1727375A1 (en) * 2005-05-27 2006-11-29 Psytechnics Limited Assessment of perceived quality of a packetized video stream
US20060280242A1 (en) * 2005-06-13 2006-12-14 Nokia Corporation System and method for providing one-pass rate control for encoders
US7865035B2 (en) * 2005-10-06 2011-01-04 Samsung Electronics Co., Ltd. Video quality adaptive coding artifact reduction
US8159960B2 (en) * 2006-12-18 2012-04-17 Verizon Patent And Licensing Inc. Content processing device monitoring
US20100053300A1 (en) * 2007-02-02 2010-03-04 Einarsson Torbjoern Method And Arrangement For Video Telephony Quality Assessment
CN100574431C (zh) * 2007-12-10 2009-12-23 上海华为技术有限公司 在无线通信系统中实现视频业务的方法及网元设备
EP2106154A1 (en) * 2008-03-28 2009-09-30 Deutsche Telekom AG Audio-visual quality estimation
WO2010009637A1 (zh) 2008-07-21 2010-01-28 华为技术有限公司 一种视频质量评估方法、系统及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103428523A (zh) * 2012-05-22 2013-12-04 华为技术有限公司 评估视频质量的方法和装置
CN103428523B (zh) * 2012-05-22 2015-07-08 华为技术有限公司 评估视频质量的方法和装置
WO2014029315A1 (zh) 2012-08-21 2014-02-27 华为技术有限公司 一种获得视频编码压缩质量的方法及装置

Also Published As

Publication number Publication date
US20150085942A1 (en) 2015-03-26
WO2010009637A1 (zh) 2010-01-28
CN101635846A (zh) 2010-01-27
US8917777B2 (en) 2014-12-23
US20110085605A1 (en) 2011-04-14
US9723332B2 (en) 2017-08-01
EP2296379A4 (en) 2011-07-20
EP2296379A1 (en) 2011-03-16

Similar Documents

Publication Publication Date Title
CN101635846B (zh) 一种视频质量评估方法、系统及装置
CN102740108B (zh) 一种视频数据质量评估方法和装置
US10075710B2 (en) Video quality measurement
US9232217B2 (en) Method and apparatus for objective video quality assessment based on continuous estimates of packet loss visibility
EP2553935B1 (en) Video quality measurement
EP1958454A2 (en) Video quality measurement
CA2742716C (en) Method and system for determining a quality value of a video stream
US9077972B2 (en) Method and apparatus for assessing the quality of a video signal during encoding or compressing of the video signal
CN103988501A (zh) 考虑场景剪切伪像的视频质量评估
CN103747238B (zh) 视频静止失真程度评估方法和装置
US9118919B2 (en) Methods and systems for computing the quality of an MPEG-2 video stream
EP2888877B1 (en) Method and apparatus for estimating content complexity for video quality assessment
Koumaras et al. A framework for end-to-end video quality prediction of MPEG video
US20030161398A1 (en) Improving static picture quality in compressed video
CN101103634A (zh) 确定编码数据帧序列的损坏指示的方法
CN104081769A (zh) 失真/质量测量
CN104885452A (zh) 用于估计视频质量评估的内容复杂度的方法和装置
Del Tredici et al. Low-latency methods for wireless video transmission
KR20160002659A (ko) 비디오 품질 평가를 위해 콘텐츠 복잡성을 추정하기 위한 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160418

Address after: American California

Patentee after: Snaptrack, Inc.

Address before: Bantian Longgang District of Shenzhen City, Guangdong province 518129 HUAWEI headquarters

Patentee before: Huawei Technologies Co., Ltd.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120425

Termination date: 20180720

CF01 Termination of patent right due to non-payment of annual fee