CN110958448A - 一种视频质量评价方法、装置、介质及终端 - Google Patents
一种视频质量评价方法、装置、介质及终端 Download PDFInfo
- Publication number
- CN110958448A CN110958448A CN201911311489.3A CN201911311489A CN110958448A CN 110958448 A CN110958448 A CN 110958448A CN 201911311489 A CN201911311489 A CN 201911311489A CN 110958448 A CN110958448 A CN 110958448A
- Authority
- CN
- China
- Prior art keywords
- video
- sample
- segment
- marked
- video segment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明公开了一种视频质量评价方法、装置、介质及终端,所述方法包括获取样本视频,对每个所述样本视频进行预处理得到对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;将参考视频输入视频处理系统;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;确定所述待分析视频中的标记视频段,根据所述标记视频段确定待评价视频片段;根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。本发明可以根据帧对齐结果进行全参考质量评价而无需对视频处理系统进行侵入,可以应用于各种场景,并且能够达到全参考质量评价的精度。
Description
技术领域
本发明涉及视频质量评价领域,尤其涉及一种视频质量评价方法、装置、介质及终端。
背景技术
现有技术中,视频处理系统可以对视频进行获取、传输、分流、编解码、播放等至少一种处理,在各个处理环节中均可能产生视频的质量损失,因此有必要对经由视频处理系统处理的视频的质量进行客观准确的评估,以便于准确掌握视频处理系统在维护视频质量稳定方面的性能。现有技术中主要提出了两种对于视频质量进行评估的方法。
第一种方法,在现有视频处理系统中加入底层接口,直接获取处理前的视频作为参考,并直接在输出端获取待测视频。此时测试人员拥有并可控制输入与输出视频的时序信息,从而可以实现对待测视频的全参考质量评价。这种方案需要测试人员在视频处理系统中开发加入特定的数据接口、或者获取相关接口的使用权。增加了视频处理系统的开发成本,并且只能在掌握视频处理系统代码的前提下使用,使用局限性过大。
第二种方法,仅从视频处理系统中的输出端获取待测视频,对其进行无参考质量评价。这种方案使用无参考质量方法,但是无参考质量方法精度很低,而且对于不同的视频内容泛化性差、精度表现也不稳定。难以使用这种方法横向比较多个视频处理系统在维护视频质量稳定方面的性能。
发明内容
为了解决现有技术中全参考质量评价难以在非侵入的场景下使用,而无参考质量评价精度较低,从而导致现有技术难以为多种场景进行高精度质量评价的技术问题,本发明实施例提供一种视频质量评价方法、装置、介质及终端。
一方面,本发明提供了一种视频质量评价方法,所述方法包括:
获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
另一方面,本发明提供一种视频质量评价装置,所述装置包括:
参考视频生成模块,用于获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
待分析视频截获模块,用于将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
帧对齐模块,用于确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
全参考质量评价模块,用于根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
另一方面,本发明提供一种计算机存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述的一种视频质量评价方法。
另一方面,本发明提供一种视频质量评价设备,其特征在于,所述设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行上述的一种视频质量评价方法。
本发明提供了一种视频质量评价方法、装置、介质及终端,通过生成带有标记视频段和样本视频段的参考视频,将参考视频传输至需要被测试质量损失的视频处理系统中,获取到视频处理系统中输出的待分析视频,基于标记视频段在所述待分析视频中确定与所述参考视频中样本视频段对应的待评价视频片段,通过对待评价视频片段进行全参考质量评价即可精准得到待评价视频片段的视频质量,进而客观评价视频处理系统产生的视频质量损失。本发明通过为视频处理系统的输入视频加入特定标记,从而实现视频处理系统的输出视频与输入视频的帧对齐,根据帧对齐结果即可进行全参考质量评价而无需对视频处理系统进行侵入,因此不再受制于视频处理系统的限制,可以应用于各种场景,并且能够达到全参考质量评价的精度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1是本发明提供的一种视频质量评价方法的流程图;
图2是本发明提供的获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频流程图;
图3是本发明提供的根据所述标准样本视频生成样本视频段流程图;
图4是本发明提供的直播系统场景中视频质量评价方法执行示意图;
图5是本发明提供的在所述视频处理系统的输出端截获待分析视频流程图;
图6是本发明提供的确定所述待分析视频中的标记视频段流程图;
图7是本发明提供的根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段流程图;
图8是本发明提供的根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价流程图;
图9是本发明提供的视频处理系统横向比较示意图;
图10是本发明提供一种视频质量评价方法框图;
图11是本发明提供的一种用于实现本发明实施例所提供的方法的设备的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了使本发明实施例公开的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明实施例进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本发明实施例,并不用于限定本发明实施例。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。为了便于理解本发明实施例所述的技术方案及其产生的技术效果,本发明实施例首先对于相关专业名词进行解释:
图像质量评价/监控:此处图像质量指视频画面被人所感知的质量。这类工作专注于评价/监控能被肉眼感受到画面失真,而忽略客观存在却无法被肉眼分辨的画面失真。
源视频/参考视频:指不含失真或可达到的质量最好的视频。在视频质量评价场景下,这类视频用来作为参照物,用于作为测试人员或者质量评估算法的评估参考,从而客观评价待测视频的质量。
待测视频:被评价的视频,通常包含失真。
全参考质量评价(算法):这类算法是在同时有源视频(参考视频)和待测视频的情况下,对两者进行比较,从而得出待测视频的质量的算法。
无参考质量评价(算法):这类算法是在仅有待测视频的情况下,判断画面被肉眼感知到的质量,从而得出待测视频的质量的算法。
PSNR:Peak Signal to Noise Ratio,即峰值信噪比,是一种评价图像的客观标准。
SSIM:Structural Similarity Index,即结构相似性,是一种衡量两幅图像相似度的指标。
VMAF:Visual Multimethod Assessment Fusion,视频质量多方法评价融合。
现有技术中,全参考质量评价只有在获取视频处理系统的代码的情况下才能获取到参考视频进而对待测视频进行质量评价,因此这种全参考质量评价需要改动视频处理系统的代码为其添加相关接口,这种侵入式的评价方法难以在无法添加相关接口的场景中使用;无参考质量评价虽然使用门槛较低,具有较好的场景适应性,但是评价精度较低。
为了解决现有技术中全参考质量评价难以在非侵入的场景下使用,而无参考质量评价精度较低,从而导致现有技术难以为多种场景进行高精度质量评价的技术问题,本发明实施例提供一种视频质量评价方法。本发明实施例中的待测视频由视频处理系统输出,因此,视频的评价结果即可反应视频处理系统各个视频处理环节产生的视频质量损失。本发明实施例并不限定视频处理系统的具体功能和具体组成,其可以是直播平台、点播平台、视频分享平台等各种视频服务平台。
请参考图1,其示出了一种视频质量评价方法的流程图,所述方法可以包括:
S101.获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频。
本发明实施例中样本视频用于作为所述视频质量评价方法的参考数据源,通过对所述样本视频进行处理可以得到进行全参考质量评价方法所需的参考视频。
在一个可行的实施例中,所述样本视频可以是无损视频,或即将输入视频处理系统的视频。以视频处理系统为待测目标为例,通过以即将输入视频处理系统的视频作为样本视频得到参考视频,并将视频处理系统的输出的视频中与参考视频相对应的视频作为待评价对象进行评价,则评价结果即可反应作为待测目标的视频处理系统中参与到参考视频处理的各个环节对视频质量产生的综合损失。
样本视频的选取可以根据实际情况进行确定。为了达到较好的对于待测目标中产生的视频质量损失进行评估的目的,可以选取多场景多类型的视频为样本视频,提升样本视频的覆盖度。以所述待测目标为某个直播平台为例,可以选取广告直播,赛事直播,明星直播等多种直播场景中的视频作为样本视频,进一步地,样本视频的类型也可以是不同的。
具体地,所述获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,如图2所示,包括:
S1011.获取样本数据源,从所述样本数据源中截取样本视频。
S1013.对所述样本视频进行格式裁剪和帧率裁剪得到所述样本视频对应的标准样本视频。
具体地,本发明实施例中可以将样本视频均统一成具有相同分辨率和相同帧率的标准样本视频。
S1015.根据所述标准样本视频生成样本视频段。
为了更为客观的对视频进行评价,从而更为准确的评估待测目标产生的视频质量损失,本发明一个优选的实施例中可以从标准样本视频中截取多段视频得到更能覆盖各种视频情况的样本视频段。具体地,所述根据所述标准样本视频生成样本视频段,如图3所示,包括:
S10151.在标准样本视频中的不同时间点开始截取视频,得到多个视频片段。
S10513.按照视频片段发生的时间顺序拼接视频片段得到样本视频段。
比如,在标准样本视频中10个不同时间点各截取了15秒的视频片段,则将这些视频片段拼接后可以得到一条完整的150秒的样本视频段。
S1017.生成标记视频段。
标记视频段主要用于在视频质量评价时可以准确的提取与之关联的样本视频段,因此标记视频段的具体设置方式可以根据实际需要进行设定,以易生成易提取为目的设定即可。
在一个可行的实施例中,所述标记视频段可以为黑屏视频段或白屏视频段。
S1019.拼接所述标记视频段和所述样本视频段得到所述样本视频对应的参考视频。
标记视频段与样本视频段被拼接在一起,所述参考视频的时长为标记视频段与样本视频段的时长综合值,若标记视频段为10秒的黑屏,样本视频段时长为150秒,则参考视频时长为160秒。在视频质量评价时,通过识别标记视频段,即可准确提取出与之时序相邻的样本视频段。
在一个优选的实施例中,可以将在样本视频段的开始及结束的位置均分别拼接标记视频段,得到参考视频。
S103.将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频。
所述参考视频在所述视频处理系统中进行流转,可能参与到所述视频处理系统的各个环节,比如,编解码,传输,播放等等,在这些环节中参考视频对应的数据流会产生损失,最终在视频处理系统给的输出端被输出,本发明实施例将输出端输出的数据称为参考视频对应的目标视频。通过对目标视频中与参考视频的样本数据段对应的视频片段进行质量评价,即可得到参考视频在视频处理系统中产生的损失。
视频处理系统的输出端可以输出待分析视频也可以输出其它视频,本发明实施例在截获环节并不必精准截获目标视频,而只需截获包含完整目标视频的待分析视频即可。
以视频处理系统为直播系统为例,如图4所示,测试人员可以以主播身份(或使用专门的主播客户端)将所述参考视频推送至直播服务器,从而实现直播过程的模拟,并在直播的用户客户端对直播内容进行播放,截取待分析视频。具体地,所述在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频,如图5所示,包括:
S1031.第一直播客户端(主播客户端)推送所述参考视频至直播服务器。
S1033.所述直播服务器向订阅所述第一直播客户端的至少一个第二直播客户端推送包含所述参考视频的直播数据流。
S1035.所述至少一个第二直播客户端循环播放所述直播数据流产生播放数据流。
S1037.所述至少一个第二直播客户端截取所述播放数据流,得到待分析视频。
为了确保所述待分析视频中含有完整的目标视频,本发明实施例对于待分析视频的时长进行限制,经过相关测试,本发明实施例限定所述待分析视频的最低时长为标记视频段的时长与二倍的样本视频段的时长的总计值,时长不低于最低时长的待分析视频中含有完整的目标视频。
S105.确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段。
标记视频段的获取方法与标记视频段的设置方法有关,本发明以标记视频段为预设时长的黑屏视频为例,所述确定所述待分析视频中的标记视频段,如图6所示,包括:
S1051.从所述待分析视频中提取图像,得到图像序列。
在本发明一个可行的实施例中,在参考视频的生成环节通过对样本视频进行频率裁剪和格式裁剪使得生成的参考视频具有相同的分辨率和帧率,因此,在步骤S1051中只需按照所述帧率进行图像提取即可得到多个具有相同分辨率的图像。
S1053.对所述图像序列中的各个图像进行黑屏检测,确定所述图像序列中的全部黑屏图像。
具体地,可以通过判断黑色像素占图像全部像素的比例来确定所述图像是否为黑屏图像。当黑色像素超过预设比例(预设比例可调整,比如将其设定为99%)时,确定所述图像为黑屏图像。
S1055.根据所述全部黑屏图像得到至少一个黑屏片段,所述黑屏片段中的相邻的黑屏图像在所述图像序列中相邻。
S1057.根据所述黑屏片段的时长确定标记视频段。
具体地,可以首先过滤时长小于第一预设时长的黑屏片段,得到疑似标记视频段,从所述疑似标记视频段中确定出标记视频段。比如,若标记视频段为10秒,而有的黑屏片段只有2秒,3秒,则可以确定这个黑屏片段并不是标记视频段。
进一步地,还可将时长大于或等于标记视频段时长的黑屏片段确定为标记视频段。
所述根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段,如图7所示,包括:
S1059.确定相邻的第一标记视频段和第二标记视频段。
S10511.确定所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点。
S10513.将所述待分析视频中所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点之间的视频片段确定为待评价视频片段。
S107.根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
本发明实施例中为了得到准确的评价结果,以所述参考视频的样本视频段作为全参考质量评价算法的参考,进而对待评价视频片段进行评价,本发明实施例并不对全参考质量评价算法的具体方案进行限制,比如可选用常见的开源算法,如PSNR,SSIM,VMAF等进行全参考质量评价。
在一个可行的实施例中,所述根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价,如图8所示,包括:
S1071.根据预设的全参考质量评价方法基于所述参考视频的样本视频段为所述待评价视频片段中的每一帧画面计算质量分,得到待评价视频片段对应的质量分集合。
在一个可行的实施例中,所述根据预设的全参考质量评价方法基于所述参考视频的样本视频为所述待评价视频片段中的每一帧画面计算质量分,包括:
S3.将所述第一特征值的平均值作为所述画面的质量分。
在另一个可行的实施例中,所述根据预设的全参考质量评价方法基于所述参考视频的样本视频为所述待评价视频片段中的每一帧画面计算质量分,包括:
S6.将所述第二特征值的平均值作为所述画面的质量分。
S1073.移除所述质量分集合中数值大于第一预设分值的质量分和数值小于第二预设分值的质量分。
S1075.根据所述质量分集合中的各个质量分计算平均数,以所述平均数作为所述待评价视频片段的质量分。
本发明实施例中将待评价片段的质量量化为质量分,可以通过监控视频处理系统中不断产生的视频的质量分,判断当前的视频处理系统视频质量是否稳定。
具体地,所述参考视频可以流经不同的视频处理平台,或者流入相同的视频处理平台的不同的视频处理组件,从而得到对应于参考视频的样本视频段的不同的待评价视频片段,对各个待评价视频片段进行评价得到质量分,即可根据质量分对不同的视频处理平台,或视频处理组件进行横向比较。如图9所示,参考视频分别流入直播系统1,直播系统2和直播系统3,通过对直播系统输出的视频进行评分,即可知晓三个直播系统在直播时产生的质量损失。
本发明实施例公开了一种视频质量评价方法的流程图,通过生成带有标记视频段和样本视频段的参考视频,将参考视频传输至需要被测试质量损失的视频处理系统中,获取到视频处理系统中输出的待分析视频,基于标记视频段在所述待分析视频中确定与所述参考视频中样本视频段对应的待评价视频片段,通过对待评价视频片段进行全参考质量评价即可精准得到待评价视频片段的视频质量,进而客观评价视频处理系统产生的视频质量损失。本发明实施例通过为视频处理系统的输入视频加入特定标记,从而实现视频处理系统的输出视频与输入视频的帧对齐,根据帧对齐结果即可进行全参考质量评价而无需对视频处理系统进行侵入,因此不再受制于视频处理系统的限制,可以应用于各种场景,并且能够达到全参考质量评价的精度。
本发明实施例还提供一种视频质量评价装置,如图10所示,所述装置包括:
参考视频生成模块201,用于获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
待分析视频截获模块203,用于将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
帧对齐模块205,用于确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
全参考质量评价模块207,用于根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
本发明实施例所述的一种视频质量评价装置与方法实施例基于相同的发明构思,详情请参见方法实施例,在此不再赘述。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质可以存储有多条指令。所述指令可以适于由处理器加载并执行本发明实施例所述一种视频质量评价方法,所述方法至少包括下述步骤:
一种视频质量评价方法,所述方法包括:
获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
在一个可行的实施例中,所述获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,包括:
获取样本数据源,从所述样本数据源中截取样本视频;
对所述样本视频进行格式裁剪和帧率裁剪得到所述样本视频对应的标准样本视频;
根据所述标准样本视频生成样本视频段;
生成标记视频段;
拼接所述标记视频段和所述样本视频段得到所述样本视频对应的参考视频。
在一个可行的实施例中,所述根据所述标准样本视频生成样本视频段,包括:
在标准样本视频中的不同时间点开始截取视频,得到多个视频片段;
按照视频片段发生的时间顺序拼接视频片段得到样本视频段。
在一个可行的实施例中,所述在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频,包括:
第一直播客户端推送所述参考视频至直播服务器;
所述直播服务器向订阅所述第一直播客户端的至少一个第二直播客户端推送包含所述参考视频的直播数据流;
所述至少一个第二直播客户端循环播放所述直播数据流产生播放数据流;
所述至少一个第二直播客户端截取所述播放数据流,得到待分析视频;所述待分析视频的最低时长为标记视频段的时长与二倍的样本视频段的时长的总计值。
在一个可行的实施例中,若标记视频段为预设时长的黑屏视频,所述确定所述待分析视频中的标记视频段,包括:
从所述待分析视频中提取图像,得到图像序列;
对所述图像序列中的各个图像进行黑屏检测,确定所述图像序列中的全部黑屏图像;
根据所述全部黑屏图像得到至少一个黑屏片段,所述黑屏片段中的相邻的黑屏图像在所述图像序列中相邻;
根据所述黑屏片段的时长确定标记视频段。
在一个可行的实施例中,所述根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段,包括:
确定相邻的第一标记视频段和第二标记视频段;
确定所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点;
将所述待分析视频中所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点之间的视频片段确定为待评价视频片段。
在一个可行的实施例中,所述根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价,包括:
根据预设的全参考质量评价方法基于所述参考视频的样本视频段为所述待评价视频片段中的每一帧画面计算质量分,得到待评价视频片段对应的质量分集合;
移除所述质量分集合中数值大于第一预设分值的质量分和数值小于第二预设分值的质量分;
根据所述质量分集合中的各个质量分计算平均数,以所述平均数作为所述待评价视频片段的质量分。
进一步地,图11示出了一种用于实现本发明实施例所提供的方法的设备的硬件结构示意图,所述设备可以参与构成或包含本发明实施例所提供的装置或系统。如图11所示,设备10可以包括一个或多个(图中采用102a、102b,……,102n来示出)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输装置106。除此以外,还可以包括:显示器、输入/输出接口(I/O接口)、通用串行总线(USB)端口(可以作为I/O接口的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解,图11所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,设备10还可包括比图11中所示更多或者更少的组件,或者具有与图11所示不同的配置。
应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件或其他任意组合。此外,数据处理电路可为单个独立的处理模块,或全部或部分的结合到设备10(或移动设备)中的其他元件中的任意一个内。如本申请实施例中所涉及到的,该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻终端路径的选择)。
存储器104可用于存储应用软件的软件程序以及模块,如本发明实施例中所述的方法对应的程序指令/数据存储装置,处理器102通过运行存储在存储器104内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的一种视频质量评价方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至设备10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括设备10的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(NetworkInterfaceController,NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(RadioFrequency,RF)模块,其用于通过无线方式与互联网进行通讯。
显示器可以例如触摸屏式的液晶显示器(LCD),该液晶显示器可使得用户能够与设备10(或移动设备)的用户界面进行交互。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置和服务器实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种视频质量评价方法,其特征在于,所述方法包括:
获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
2.根据权利要求1所述的方法,其特征在于,所述获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,包括:
获取样本数据源,从所述样本数据源中截取样本视频;
对所述样本视频进行格式裁剪和帧率裁剪得到所述样本视频对应的标准样本视频;
根据所述标准样本视频生成样本视频段;
生成标记视频段;
拼接所述标记视频段和所述样本视频段得到所述样本视频对应的参考视频。
3.根据权利要求2所述的方法,其特征在于,所述根据所述标准样本视频生成样本视频段,包括:
在标准样本视频中的不同时间点开始截取视频,得到多个视频片段;
按照视频片段发生的时间顺序拼接视频片段得到样本视频段。
4.根据权利要求1或2所述的方法,其特征在于,所述在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频,包括:
第一直播客户端推送所述参考视频至直播服务器;
所述直播服务器向订阅所述第一直播客户端的至少一个第二直播客户端推送包含所述参考视频的直播数据流;
所述至少一个第二直播客户端循环播放所述直播数据流产生播放数据流;
所述至少一个第二直播客户端截取所述播放数据流,得到待分析视频;所述待分析视频的最低时长为标记视频段的时长与二倍的样本视频段的时长的总计值。
5.根据权利要求1或2所述的方法,其特征在于,若标记视频段为预设时长的黑屏视频,所述确定所述待分析视频中的标记视频段,包括:
从所述待分析视频中提取图像,得到图像序列;
对所述图像序列中的各个图像进行黑屏检测,确定所述图像序列中的全部黑屏图像;
根据所述全部黑屏图像得到至少一个黑屏片段,所述黑屏片段中的相邻的黑屏图像在所述图像序列中相邻;
根据所述黑屏片段的时长确定标记视频段。
6.根据权利要求5所述的方法,其特征在于,所述根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段,包括:
确定相邻的第一标记视频段和第二标记视频段;
确定所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点;
将所述待分析视频中所述第一标记视频段的截止时间点和所述第二标记视频段的开始时间点之间的视频片段确定为待评价视频片段。
7.根据权利要求1或2所述的方法,其特征在于,所述根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价,包括:
根据预设的全参考质量评价方法基于所述参考视频的样本视频段为所述待评价视频片段中的每一帧画面计算质量分,得到待评价视频片段对应的质量分集合;
移除所述质量分集合中数值大于第一预设分值的质量分和数值小于第二预设分值的质量分;
根据所述质量分集合中的各个质量分计算平均数,以所述平均数作为所述待评价视频片段的质量分。
8.一种视频质量评价装置,其特征在于,所述装置包括:
参考视频生成模块,用于获取至少一个样本视频,对每个所述样本视频进行预处理得到所述样本视频对应的参考视频,所述参考视频包括样本视频段和标记视频段,所述样本视频段中的视频数据指向所述参考视频对应的样本视频;
待分析视频截获模块,用于将所述参考视频输入视频处理系统,以便于所述视频处理系统对所述参考视频进行处理,输出所述参考视频对应的目标视频;在所述视频处理系统的输出端截获待分析视频,所述待分析视频中包含所述目标视频;
帧对齐模块,用于确定所述待分析视频中的标记视频段,根据所述标记视频段确定所述目标视频中与样本视频段对应的待评价视频片段;
全参考质量评价模块,用于根据所述参考视频的样本视频段对所述待评价视频片段进行全参考质量评价。
9.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如权利要求1-7任一项所述的一种视频质量评价方法。
10.一种视频质量评价设备,其特征在于,所述设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行如权利要求1-7任一项所述的一种视频质量评价方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911311489.3A CN110958448B (zh) | 2019-12-18 | 2019-12-18 | 一种视频质量评价方法、装置、介质及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911311489.3A CN110958448B (zh) | 2019-12-18 | 2019-12-18 | 一种视频质量评价方法、装置、介质及终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110958448A true CN110958448A (zh) | 2020-04-03 |
CN110958448B CN110958448B (zh) | 2021-04-20 |
Family
ID=69982551
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911311489.3A Active CN110958448B (zh) | 2019-12-18 | 2019-12-18 | 一种视频质量评价方法、装置、介质及终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110958448B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112233075A (zh) * | 2020-09-30 | 2021-01-15 | 腾讯科技(深圳)有限公司 | 视频清晰度评估方法、装置、存储介质及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0789497A2 (en) * | 1996-02-12 | 1997-08-13 | Tektronix, Inc. | Progammable instrument for automatic measurement of compressed video quality |
JP4492992B2 (ja) * | 2001-02-21 | 2010-06-30 | Kddi株式会社 | 画質評価のためのマーカ信号劣化検出方法および画質評価装置 |
CN102378041A (zh) * | 2011-10-25 | 2012-03-14 | 中兴通讯股份有限公司 | 一种图像质量检测方法及装置 |
CN105979289A (zh) * | 2015-12-03 | 2016-09-28 | 乐视致新电子科技(天津)有限公司 | 一种视频的生成、播放方法和装置 |
CN107454389A (zh) * | 2017-08-30 | 2017-12-08 | 苏州科达科技股份有限公司 | 待测系统的视频质量评价方法及系统 |
-
2019
- 2019-12-18 CN CN201911311489.3A patent/CN110958448B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0789497A2 (en) * | 1996-02-12 | 1997-08-13 | Tektronix, Inc. | Progammable instrument for automatic measurement of compressed video quality |
JP4492992B2 (ja) * | 2001-02-21 | 2010-06-30 | Kddi株式会社 | 画質評価のためのマーカ信号劣化検出方法および画質評価装置 |
CN102378041A (zh) * | 2011-10-25 | 2012-03-14 | 中兴通讯股份有限公司 | 一种图像质量检测方法及装置 |
CN105979289A (zh) * | 2015-12-03 | 2016-09-28 | 乐视致新电子科技(天津)有限公司 | 一种视频的生成、播放方法和装置 |
CN107454389A (zh) * | 2017-08-30 | 2017-12-08 | 苏州科达科技股份有限公司 | 待测系统的视频质量评价方法及系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112233075A (zh) * | 2020-09-30 | 2021-01-15 | 腾讯科技(深圳)有限公司 | 视频清晰度评估方法、装置、存储介质及电子设备 |
CN112233075B (zh) * | 2020-09-30 | 2024-02-20 | 腾讯科技(深圳)有限公司 | 视频清晰度评估方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN110958448B (zh) | 2021-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108933935B (zh) | 视频通信系统的检测方法、装置、存储介质和计算机设备 | |
CN108337505B (zh) | 信息获取方法和装置 | |
WO2018054360A1 (zh) | 一种在线直播视频质量测试方法和装置 | |
CN108632666B (zh) | 一种视频检测方法及视频检测设备 | |
CN111105392B (zh) | 显示性能测试方法、装置及存储介质 | |
CN110958448B (zh) | 一种视频质量评价方法、装置、介质及终端 | |
CN114666636B (zh) | 音画同步检测方法及计算机可读存储介质 | |
CN114095722A (zh) | 清晰度的确定方法、装置及设备 | |
CN110120039B (zh) | 一种花屏检测方法、检测装置、电子设备及可读存储介质 | |
CN113391741B (zh) | 操作校验方法和装置、存储介质及电子设备 | |
CN114419502A (zh) | 一种数据分析方法、装置及存储介质 | |
CN110602481B (zh) | 一种视频监控系统中视频质量检测方法及装置 | |
CN112738527A (zh) | 一种视频解码检测方法、装置、电子设备及存储介质 | |
CN115761567A (zh) | 视频处理方法、装置、电子设备及计算机可读存储介质 | |
EP1952580B1 (fr) | Procédé de test de réseau de communication par l'intermédiaire d'un terminal | |
CN112770080B (zh) | 一种抄表方法、抄表装置及电子设备 | |
CN113923443A (zh) | 一种网络录像机测试方法、装置及计算机可读存储介质 | |
Mizdos et al. | How to reuse existing annotated image quality datasets to enlarge available training data with new distortion types | |
Leszczuk et al. | Quality assessment in video surveillance | |
Zhang et al. | A Subjective Quality Assessment Database for Mobile Video Coding | |
CN112907540A (zh) | 一种拼接异常检测方法、装置、设备及介质 | |
CN114827754B (zh) | 视频首帧时间检测方法及装置 | |
CN112995650A (zh) | 用于检测摄像头的视频连续性的方法和装置 | |
CN110108448A (zh) | 一种动态logo的缺陷自动检测方法 | |
Chen et al. | No-reference video quality assessment on mobile devices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40021705 Country of ref document: HK |
|
GR01 | Patent grant | ||
GR01 | Patent grant |