CN110290381A - 视频质量评估方法、装置、电子设备及计算机存储介质 - Google Patents
视频质量评估方法、装置、电子设备及计算机存储介质 Download PDFInfo
- Publication number
- CN110290381A CN110290381A CN201910708532.3A CN201910708532A CN110290381A CN 110290381 A CN110290381 A CN 110290381A CN 201910708532 A CN201910708532 A CN 201910708532A CN 110290381 A CN110290381 A CN 110290381A
- Authority
- CN
- China
- Prior art keywords
- video
- quality
- transcoding
- video quality
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 76
- 238000003860 storage Methods 0.000 title claims abstract description 23
- 238000013441 quality evaluation Methods 0.000 title claims abstract description 18
- 238000012545 processing Methods 0.000 claims abstract description 38
- 238000013210 evaluation model Methods 0.000 claims description 30
- 230000008569 process Effects 0.000 claims description 18
- 238000001303 quality assessment method Methods 0.000 claims description 6
- 238000004458 analytical method Methods 0.000 claims description 5
- 230000002452 interceptive effect Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 238000011156 evaluation Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000005611 electricity Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 235000008434 ginseng Nutrition 0.000 description 2
- 230000005291 magnetic effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本公开提供了一种视频质量评估方法、装置、电子设备及计算机存储介质，该方法包括：获取第一视频以及第二视频，第二视频是对第一视频进行失真处理后的视频；确定第一视频的第一视频质量，以及第一视频和第二视频的视频质量差异；根据第一视频质量和视频质量差异，确定第二视频的第二视频质量。本公开的实施例中，可基于第一视频的视频质量，结合第一视频与第二视频之间的视频质量差异，确定第二视频的视频质量，通过该方案，在没有第二视频对应的原始视频的前提下，将第一视频作为第二视频的参考视频，将第一视频与第二视频之间的视频质量差异和第一视频的视频质量作为评估第二视频的视频质量的因子，使得确定得到的第二视频的视频质量更加准确。
Description
技术领域
本公开涉及视频处理技术领域，具体而言，本公开涉及一种视频质量评估方法、装置、电子设备及计算机存储介质。
背景技术
现有技术中，在一些视频交互平台中，通常需要对上传至视频交互平台中的视频进行失真处理处理，以使得处理后的视频满足实际应用需求。在实际应用中，为了保证发布视频的视频质量，有时需要评估转码处理后的视频的视频质量，以基于转码后的视频的视频质量，优化失真处理的过程以及视频传输的过程。但是，目前上传至视频交互平台的视频通常是经过视频编码处理的视频，视频交互平台通常无法获取到编码前的原始视频，从而导致平台无法较好的评估转码后的视频的质量。
发明内容
本公开的目的旨在至少能解决上述的技术缺陷之一，提高评估转码后视频的视频质量的准确性。本公开采用的技术方案如下：
第一方面，本公开提供了一种视频质量评估方法，该方法包括：
获取第一视频以及第二视频，第二视频是对第一视频进行失真处理后的视频；
确定第一视频的第一视频质量，以及第一视频和第二视频的视频质量差异；
根据第一视频质量和视频质量差异，确定第二视频的第二视频质量。
本公开第一方面的实施例中，所述失真处理为转码处理，则所述第一视频为转码前视频，所述第二视频为转码后视频。
本公开第一方面的实施例中，根据第一视频质量和视频质量差异，确定第二视频的第二视频质量，包括：
基于第一视频质量以及视频质量差异，通过质量评估模型，确定第二视频的第二视频质量；
其中，质量评估模型表征了转码前视频的视频质量、转码后视频的视频质量、转码前视频与转码后视频之间的视频质量差异之间的关系。
本公开第一方面的实施例中，质量评估模型是通过对样本视频对进行分析确定出的，样本视频对包括转码前视频以及对应的转码后视频。
本公开第一方面的实施例中，质量评估模型是通过以下方式确定的：
确定初始评估模型，初始评估模型中包括待确定的用于调节关系的待确定的质量调节系数；
获取样本视频对；
基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数；
将确定出质量调节系数的取值的初始评估模型作为质量评估模型。
本公开第一方面的实施例中，基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数，包括：
基于多对样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定多个待确定的质量调节系数；
对多个待确定的质量调节系数进行数据拟合处理，将数据拟合处理后的质量调节系数作为初始评估模型的质量调节系数。
本公开第一方面的实施例中，初始评估模型为：
其中，α、β、∈和ρ为待确定的质量调节系数，DT为所述转码后视频的视频质量，DRT为所述转码前视频和所述转码后视频之间的视频质量差异，DR为所述转码前视频的视频质量。
本公开第一方面的实施例中，第一视频为第一视频为用户上传的视频。
第二方面，本公开提供了一种视频质量评估装置，该装置包括：
视频获取模块，用于获取第一视频以及第二视频，第二视频是对第一视频进行失真处理后的视频；
视频处理模块，用于确定第一视频的第一视频质量，以及第一视频和第二视频的视频质量差异；
视频质量确定模块，用于根据第一视频质量和第一视频和第二视频的视频质量差异，确定第二视频的第二视频质量。
本公开第二方面的实施例中，所述失真处理为转码处理，则所述第一视频为转码前视频，所述第二视频为转码后视频。
本公开第二方面的实施例中，视频质量确定模块在根据第一视频质量和视频质量差异，确定第二视频的第二视频质量时，具体用于：
基于第一视频质量以及视频质量差异，通过质量评估模型，确定第二视频的第二视频质量；
其中，质量评估模型表征了转码前视频的视频质量、转码后视频的视频质量、转码前视频与转码后视频之间的视频质量差异之间的关系。
本公开第二方面的实施例中，质量评估模型是通过对样本视频对进行分析确定出的，样本视频对包括转码前视频以及对应的转码后视频。
本公开第二方面的实施例中，该装置还包括：
模型确定模块，用于确定质量评估模型，质量评估模型是通过以下方式确定的：
确定初始评估模型，初始评估模型中包括待确定的用于调节关系的待确定的质量调节系数；
获取样本视频对；
基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数；
将确定出质量调节系数的取值的初始评估模型作为质量评估模型。
本公开第二方面的实施例中，模型确定模块在基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数时，具体用于：
基于多对样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定多个待确定的质量调节系数；
对多个待确定的质量调节系数进行数据拟合处理，将数据拟合处理后的质量调节系数作为初始评估模型的质量调节系数。
本公开第二方面的实施例中，初始评估模型为：
其中，α、β、∈和ρ为待确定的质量调节系数，DT为所述转码后视频的视频质量，DRT为所述转码前视频和所述转码后视频之间的视频质量差异，DR为所述转码前视频的视频质量。
本公开第二方面的实施例中，第一视频为第一视频为用户上传的视频。
第三方面，本公开提供了一种电子设备，该电子设备包括：
处理器和存储器；
存储器，用于存储计算机操作指令；
处理器，用于通过调用计算机操作指令，执行如本公开的第一方面的任一实施例中所示的方法。
第四方面，本公开提供了一种计算机可读存储介质，该存储介质存储有至少一条指令、至少一段程序、代码集或指令集，至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如本公开的第一方面的任一实施例中所示的方法。
本公开实施例提供的技术方案带来的有益效果是：
本公开实施例的视频质量评估方法、装置、电子设备及计算机存储介质，可以基于第一视频的视频质量，结合第一视频与第二视频之间的视频质量差异，确定第二视频的视频质量，通过该方案，在没有第二视频对应的原始视频的前提下，将第一视频作为第二视频的参考视频，将第一视频与第二视频之间的视频质量差异和第一视频的视频质量作为评估第二视频的视频质量的因子，使得确定得到的第二视频的视频质量更加准确。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对本公开实施例描述中所需要使用的附图作简单地介绍。
图1为本公开的实施例提供的一种视频质量评估方法的流程示意图；
图2为本公开的实施例提供的一种视频质量评估装置的结构示意图；
图3为本公开的实施例提供的一种电子设备的结构示意图。
具体实施方式
下面详细描述本公开的实施例，该实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本公开的技术方案，而不能解释为对本公开的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”和“该”也可包括复数形式。应该进一步理解的是，本公开的说明书中使用的措辞“包括”是指存在该特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为了更好的理解及说明本发明实施例的方案，下面对本发明实施例中所涉及到的一些技术用语进行简单说明。
失真视频：失真又称“畸变”,指信号在传输过程中与原有信号或标准相比所发生的偏差。本发明中，失真视频指的是相较于拍摄得到的原始视频，该视频为经过相关处理后的视频，比如，经过视频编码处理后的视频。
无损视频：无损，即无损数据压缩，指数据经过压缩后，信息不受损失，还能完全恢复到压缩前的原样。本发明中，无损视频指的是拍摄得到的原始视频，该视频未经过任何压缩处理，比如，未经过视频编码处理。
现有技术中，在一些视频交互平台中，平台通常需要对上传至视频交互平台(平台对应的服务器)中的视频进行视频转码处理，以使得处理后的视频满足实际应用需求，在实际应用中，为了保证发布视频的视频质量，有时需要评估转码处理后的视频的视频质量，以基于转码处理后的视频的视频质量，优化视频转码的过程以及视频传输的过程。但是，目前上传至视频交互平台的视频通常为经过视频编码处理的视频，比如，经过视频编码处理后的UGC(User Generated Content，用户原创内容)视频，UGC视频可以是用户通过手机拍摄的视频，对于视频交互平台而言，该视频交互平台中仅有上传至平台的经过视频编码处理的UGC视频，通常无法获取到用户上传至平台前的原始视频，比如，用户通过手机拍摄的未经视频编码处理的UGC视频，进而基于上传至平台的经过视频编码处理的UGC视频，无法通过全参考质量评价方法评估经过视频转码处理后的视频的视频质量。
下面以具体地实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本公开的实施例进行描述。
针对上述技术问题，本公开的实施例提供的一种视频质量评估方法，如图1所示，该方法可以包括：
步骤S110,获取第一视频以及第二视频，第二视频是对第一视频进行失真处理后的视频。
具体的，在上传至视频交互平台之前，为了符合平台的实际需求，需要对上传前的视频进行视频编码处理，则第一视频可以为已经经过视频编码处理后的视频，比如，用户通过终端设备拍摄后经过编码处理上传至视频交互平台的视频。终端设备是具有拍照功能的电子设备，比如，手机，平板电脑等。
步骤S120，确定获取第一视频的第一视频质量，以及第一视频和第二视频的视频质量差异。
具体的，视频质量差异指的是第一视频的视频质量与第二视频的视频质量之间的质量差距，第一视频的第一视频质量可以基于现有技术中的视频质量评价方法确定，比如，无参考质量评价方法，视频质量差异也可以基于现有技术中的视频质量评价方法确定，比如，全参考质量评价方法。
步骤S130，根据第一视频质量和第一视频和第二视频的视频质量差异，确定第二视频的第二视频质量。
本公开的实施例中的方案，可以基于第一视频的视频质量，结合第一视频与第二视频之间的视频质量差异，确定第二视频的视频质量，通过该方案，在没有第二视频对应的原始视频的前提下，将第一视频作为第二视频的参考视频，将第一视频与第二视频之间的视频质量差异和第一视频的视频质量作为评估第二视频的视频质量的因子，使得确定得到的第二视频的视频质量更加准确。
本公开的实施例中，所述失真处理为转码处理，则所述第一视频为转码前视频，所述第二视频为转码后视频。
具体的，转码通常为进行格式转换处理，对第一视频进行转码处理，目的是使得转码后的第二视频可以符合视频格式需求。
本公开的实施例中，步骤S130中，根据第一视频质量和第一视频和第二视频的视频质量差异，确定第二视频的第二视频质量，可以包括：
基于第一视频质量以及第一视频和第二视频的视频质量差异，通过质量评估模型，确定第二视频的第二视频质量。
其中，质量评估模型为表征了转码前视频的视频质量、转码后视频的视频质量、转码前视频与转码后视频之间的视频质量差异之间的关系。
具体的，质量评估模型可以是预先训练好的模型，该模型的输入可以是转码前视频(转码前的视频)和对应的转码后视频(转码后的视频)，输出为转码后视频的视频质量。
本公开的实施例中，质量评估模型是通过对样本视频对进行分析确定出的，样本视频对包括转码前视频以及对应的转码后视频。
具体的，质量评估模型可以是基于样本视频对，预先训练好的模型，其中，样本视频对中可以包括至少一对转码前视频以及对应的转码后视频。
本公开的实施例中，第一视频为用户上传的视频。
具体的，用户上传的视频可以为UGC视频，UGC视频通常为由非专业用户拍摄的原创内容的视频，其视频时长短于传统视频的时长，比如，UGC视频的视频时长通常为1分钟，传统视频的时长通常为几分钟或几十分钟，为了满足拍摄用户的需求，UGC视频中可以包含视频特效等其他信息，用户在拍摄完UGC视频后，通常在用户的终端上将该UGC视频进行视频编码，然后上传至视频交互平台，以通过该平台分享给其他用户，则对于视频分享平台来说，该平台无法获取到用户拍摄的原始UGC视频，只能获取到上传至平台中的经过视频编码的视频，即第一视频，则在视频分享平台中，通过本方案的方法，基于第一视频和对第一视频进行失真处理处理后的第二视频，可以确定得到第二视频的视频质量。
本公开的实施例中，质量评估模型是通过以下方式确定的：
确定初始评估模型，初始评估模型中包括待确定的用于调节关系的待确定的质量调节系数；
获取样本视频对；
基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数；
将确定出质量调节系数的取值的初始评估模型作为质量评估模型。
具体的，可以将初始评估模型理解为一个函数关系，质量调节系数相当于该函数关系中的系数，转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异和无损视频的视频质量相当于该函数关系中的变量，则通过该函数关系，可通过系数(质量调节系数)体现出各个变量之间的关系，相应的，基于已知的转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，可以确定出未知的质量调节系数，从而得到已知质量调节系数的初始评估模型。
本公开的实施例中，在选择样本视频对时，可以将无损视频作为转码前视频，该无损视频对应的失真视频作为转码后视频。则无损视频的视频质量可以作为初始评估模型中的转码前视频的视频质量，对应的失真视频的视频质量可以作为初始评估模型中的转码后视频的视频质量。
本公开的实施例中，初始评估模型为：
其中，α、β、∈和ρ为待确定的质量调节系数，DT为所述转码后视频的视频质量，DRT为所述转码前视频和所述转码后视频之间的视频质量差异，DR为所述转码前视频的视频质量。
具体的，转码前视频的视频质量DR、转码前视频和所述转码后视频之间的视频质量差异DRT、转码后视频的视频质量DT之间的关系可以通过以下公式表示：
其中，如果转码前视频通过VR表示，转码后视频通过VT表示，则通过该公式可知，转码前视频VR作为转码后视频VT的参考视频，VT的视频质量是由参考视频VR的视频质量DR和参考视频和转码后视频(VT)的视频质量差距DRT来决定，参考视频的视频质量越差，则转码后视频VT的视频质量越差。同样，参考视频和转码后视频的视频质量差距DRT越大，转码后视频VT的视频质量越差，通过上述公式可知，若已知质量调节系数，转码前视频的视频质量DR以及转码前视频和对应的转码后视频之间的视频质量差异DRT，可以计算得到转码后视频的视频质量DT，因此，本公开中基于初始评估模型，通过样本视频对中的转码前视频和对应的转码后视频，可以确定出上述公式中的待确定的质量调节系数。
具体的，在基于初始评估模型，通过样本视频对中的转码前视频和对应的转码后视频，求解上述公式中的待确定的质量调节系数时，具体过程如下：
1、选取样本视频对中多个转码前视频和对应的转码后视频；
2、通过全参考质量评价方法确定出转码前视频和对应的转码后视频之间的视频质量差异DRT；
3、通过无参考质量评价方法确定出转码后视频的视频质量DT；
4、基于确定出的多个视频质量差异DRT和多个转码后视频的视频质量DT，求解出公式计中的未知系数，即待确定的质量调节系数α、β、∈和ρ。
需要说明的是，本公开实施例中，不限定上述求解质量调节系数的步骤中步骤2和步骤3的执行顺序，例如步骤2和步骤3可以同时执行，也可以分别执行，本领域技术人员可以根据实际情况进行设置。
其中，在上述步骤2中，通过全参考质量评价方法确定出转码前视频和对应的转码后视频之间的视频质量差异时，需要分别提取转码前视频中图像的图像特征和转码后视频中图像的图像特征，在步骤3中，通过无参考质量评价方法确定出转码后视频的视频质量时，也需要提取转码后视频的图像特征，在本公开实施例中，可以采用现有技术中的特征提取方法，也可以通过神经网络提取特征，比如，通过已标注好图像特征的视频训练特征提取器，通过特征提取器来提取特征，本公开不限定图像特征的具体实现方式。
本公开的实施例中，基于样本视频对中的转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数，可以包括：
基于多对样本视频对中的转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定多个待确定的质量调节系数；
对多个待确定的质量调节系数进行数据拟合处理，将数据拟合处理后的质量调节系数作为初始评估模型的质量调节系数。
具体的，在上述求解质量调节系数的过程中，可以基于多个转码前视频和对应的转码后视频求解质量调节系数，即基于多对样本视频对求解质量调节系数，若基于多对样本视频对求解出的质量调节系数为多个不同的值，则可以对同一个调节参数对应的多个不同的值进行数据拟合处理，比如，求平均值，或者，可以按照各个调节系数对应的权重对求解出的质量调节系数进行调节，使得最终得到的质量调节系数更加准确，进而可使得确定得到的转码后视频的视频质量更加准确。
本公开的实施例中，样本视频对中的转码后视频为不同失真程度的视频。
具体的，样本视频对中的转码后视频可以为不同类型的转码后视频，则基于不同类型的转码后视频可以使得训练得到的质量评估模型的预测更加准确，该转码后视频可以是基于不同的图像质量评价方法确定得到的视频。其中，图像质量评价方法包括结构相似性SSIM(structural similarity index measurement)图像质量评价方法、特征相似性FSIM(Feature Similarity Index measurement)图像质量评价方法、峰值信噪比PSNR(Peak Signal to Noise Ratio)图像质量评价方法和均方误差MSE(Mean Squared Error)图像质量评价方法中的至少一项。
不同类型的转码后视频还可以是基于不同的失真处理方法对转码前视频进行处理得到的视频，其中，失真处理方法包括高斯模糊、加性高斯白噪声、JPEG(JointPhotographic Experts Group，联合图像专家组)压缩、JPEG2000压缩和快速衰落中的至少一种。
其中，视频的失真程度可以通过Distortion map衡量，Distortion map是一种衡量图像局部失真的方式。
下面以具体事例对本方案进行说明：
第一视频为V1，第二视频为V2，第一视频V1是用户上传至视频交互平台的视频，该视频可以为经过视频编码的视频，第二视频V2是通过该平台对第一视频V1进行视频转码处理后的视频，基于第一视频V1，通过无参考质量评价方法确定的第一视频质量为DR，基于第一视频V1和第二视频V2，通过全参考质量评价方法确定的第一视频V1和第二视频V2之间的视频质量差异为DRT，基于质量评估模型中的公式可以计算出第二视频V2的第二视频质量DT。
通过本公开中将第一视频作为第二视频的参考视频，结合第一视频与第二视频之间的视频质量差异确定第二视频的视频质量的方案，相较于将第一视频作为第二视频的参考视频，通过全参考质量评价方法确定的第二视频的视频质量，以及通过无参考质量评价方法直接确定第二视频的视频质量的方案所得到的第二视频质量更加准确。在得到第二视频质量后，可以基于第二视频质量对视频转码处理以及第二视频的传输进行优化处理。
基于与图1中所示方法相同的原理，本公开的实施例中还提供了一种装置20，如图2所示，该装置20可以包括：视频获取模块210，视频处理模块220以及视频质量确定模块230，其中，
视频获取模块210，用于获取第一视频以及第二视频，第二视频是对第一视频进行失真处理后的视频；
视频处理模块220，用于确定第一视频的第一视频质量，以及第一视频和第二视频的视频质量差异；
视频质量确定模块230，用于根据第一视频质量和第一视频和第二视频的视频质量差异，确定第二视频的第二视频质量。
本公开的实施例中的方案，可以基于第一视频的视频质量，结合第一视频与第二视频之间的视频质量差异，确定第二视频的视频质量，通过该方案，在没有第二视频对应的原始视频的前提下，将第一视频作为第二视频的参考视频，将第一视频与第二视频之间的视频质量差异和第一视频的视频质量作为评估第二视频的视频质量的因子，使得确定得到的第二视频的视频质量更加准确。
本公开的实施例中，所述失真处理为转码处理，则所述第一视频为转码前视频，所述第二视频为转码后视频。
本公开的实施例中，视频质量确定模块在根据第一视频质量和视频质量差异，确定第二视频的第二视频质量时，具体用于：
基于第一视频质量以及视频质量差异，通过质量评估模型，确定第二视频的第二视频质量；
其中，质量评估模型表征了转码前视频的视频质量、转码后视频的视频质量、转码前视频与转码后视频之间的视频质量差异之间的关系。
本公开的实施例中，质量评估模型是通过对样本视频对进行分析确定出的，样本视频对包括转码前视频以及对应的转码后视频。
本公开的实施例中，该装置还可以包括：
模型确定模块，用于确定质量评估模型，质量评估模型是通过以下方式确定的：
确定初始评估模型，初始评估模型中包括待确定的用于调节关系的待确定的质量调节系数；
获取样本视频对；
基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数；
将确定出质量调节系数的取值的初始评估模型作为质量评估模型。
本公开的实施例中，模型确定模块在基于样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定待确定的质量调节系数时，具体用于：
基于多对样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定多个待确定的质量调节系数；
对多个待确定的质量调节系数进行数据拟合处理，将数据拟合处理后的质量调节系数作为初始评估模型的质量调节系数。
本公开的实施例中，初始评估模型为：
其中，α、β、∈和ρ为待确定的质量调节系数，DT为转码后视频的视频质量，DRT为转码前视频和对应的转码后视频之间的视频质量差异，DR为转码前视频的视频质量。
本公开实施例的视频质量评估装置可执行图1所示的一种视频质量评估方法，其实现原理相类似，本公开各实施例中的视频质量评估装置中的各模块所执行的动作是与本公开各实施例中的视频质量评估方法中的步骤相对应的，对于视频质量评估装置的各模块的详细功能描述具体可以参见前文中所示的对应的视频质量评估方法中的描述，此处不再赘述。
基于与本公开的实施例中的方法相同的原理，本公开提供了一种电子设备，该电子设备包括处理器和存储器；存储器，用于存储操作指令；处理器，用于通过调用操作指令，执行如本公开的方法中的任一实施例中所示的方法。
基于与本公开的实施例中的方法相同的原理，本公开提供了一种计算机可读存储介质，该存储介质存储有至少一条指令、至少一段程序、代码集或指令集，至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如本公开的数据处理方法中的任一实施例中所示的方法。
本公开的实施例中，如图3所示，其示出了适于用来实现本公开实施例的电子设备50(例如实现图1中所示的方法的终端设备或服务器)的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图3示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图3所示，电子设备50可以包括处理装置(例如中央处理器、图形处理器等)501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中，还存储有电子设备30操作所需的各种程序和数据。处理装置501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常，以下装置可以连接至I/O接口505：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507；包括例如磁带、硬盘等的存储装置508；以及通信装置509。通信装置509可以允许电子设备50与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备50，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置509从网络上被下载和安装，或者从存储装置508被安装，或者从ROM 502被安装。在该计算机程序被处理装置501执行时，执行本公开实施例的方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备执行上述方法实施例所示的方法；或者，上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备执行上述方法实施例所示的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定，例如，第一获取单元还可以被描述为“获取至少两个网际协议地址的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (11)
1.一种视频质量评估方法，其特征在于，包括：
获取第一视频以及第二视频，所述第二视频是对所述第一视频进行失真处理后的视频；
确定所述第一视频的第一视频质量，以及所述第一视频和第二视频的视频质量差异；
根据所述第一视频质量和所述视频质量差异，确定所述第二视频的第二视频质量。
2.根据权利要求1所述的方法，其特征在于，所述失真处理为转码处理，则所述第一视频为转码前视频，所述第二视频为转码后视频。
3.根据权利要求2所述的方法，其特征在于，所述根据所述第一视频质量和所述视频质量差异，确定所述第二视频的第二视频质量，包括：
基于所述第一视频质量以及所述视频质量差异，通过质量评估模型，确定所述第二视频的第二视频质量；
其中，所述质量评估模型表征了转码前视频的视频质量、转码后视频的视频质量、转码前视频与转码后视频之间的视频质量差异之间的关系。
4.根据权利要求3所述的方法，其特征在于，所述质量评估模型是通过对样本视频对进行分析确定出的，所述样本视频对包括转码前视频以及对应的转码后视频。
5.根据权利要求4所述的方法，其特征在于，所述质量评估模型是通过以下方式确定的：
确定初始评估模型，所述初始评估模型中包括待确定的用于调节所述关系的待确定的质量调节系数；
获取样本视频对；
基于所述样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定所述待确定的质量调节系数；
将确定出所述质量调节系数的取值的所述初始评估模型作为所述质量评估模型。
6.根据权利要求5所述的方法，其特征在于，所述基于所述样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量以及所述转码前视频与所述转码后视频之间的视频质量差异，确定所述待确定的质量调节系数，包括：
基于多对所述样本视频对中的所述转码前视频的视频质量、所述转码后视频的视频质量，以及所述转码前视频与所述转码后视频之间的视频质量差异，确定多个所述待确定的质量调节系数；
对所述多个所述待确定的质量调节系数进行数据拟合处理，将数据拟合处理后的质量调节系数作为所述初始评估模型的质量调节系数。
7.根据权利要求5所述的方法，其特征在于，所述初始评估模型为：
其中，α、β、∈和ρ为所述待确定的质量调节系数，DT为所述转码后视频的视频质量，DRT为所述转码前视频和所述转码后视频之间的视频质量差异，DR为所述转码前视频的视频质量。
8.根据权利要求1至7中任一项所述的方法，其特征在于，所述第一视频为用户上传的视频。
9.一种视频质量评估装置，其特征在于，包括：
视频获取模块，用于获取第一视频以及第二视频，所述第二视频是对所述第一视频进行失真处理后的视频；
视频处理模块，用于确定所述第一视频的第一视频质量，以及所述第一视频和第二视频的视频质量差异；
视频质量确定模块，用于根据所述第一视频质量和所述第一视频和所述第二视频的视频质量差异，确定所述第二视频的第二视频质量。
10.一种电子设备，其特征在于，包括：
处理器和存储器；
所述存储器，用于存储计算机操作指令；
所述处理器，用于通过调用所述计算机操作指令，执行权利要求1至8中任一项所述的方法。
11.一种计算机可读存储介质，其特征在于，所述存储介质存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现权利要求1至8中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910708532.3A CN110290381B (zh) | 2019-08-01 | 2019-08-01 | 视频质量评估方法、装置、电子设备及计算机存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910708532.3A CN110290381B (zh) | 2019-08-01 | 2019-08-01 | 视频质量评估方法、装置、电子设备及计算机存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110290381A true CN110290381A (zh) | 2019-09-27 |
| CN110290381B CN110290381B (zh) | 2020-10-30 |
Family
ID=68024522
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910708532.3A Active CN110290381B (zh) | 2019-08-01 | 2019-08-01 | 视频质量评估方法、装置、电子设备及计算机存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110290381B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110996131A (zh) * | 2020-03-02 | 2020-04-10 | 腾讯科技（深圳）有限公司 | 视频编码方法、装置、计算机设备及存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101695141A (zh) * | 2009-10-20 | 2010-04-14 | 浙江大学 | 一种视频质量评估方法和装置 |
| US20110013830A1 (en) * | 2008-04-30 | 2011-01-20 | Nec Corporation | Image quality evaluation system, method and program |
| CN103634591A (zh) * | 2013-11-20 | 2014-03-12 | 华为技术有限公司 | 一种视频质量评估的方法、装置和系统 |
| CN104318562A (zh) * | 2014-10-22 | 2015-01-28 | 百度在线网络技术（北京）有限公司 | 一种用于确定互联网图像的质量的方法和装置 |
| CN107659806A (zh) * | 2017-08-22 | 2018-02-02 | 华为技术有限公司 | 视频质量的评估方法和装置 |
| CN108109145A (zh) * | 2018-01-02 | 2018-06-01 | 中兴通讯股份有限公司 | 图像质量检测方法、装置、存储介质和电子装置 |
-
2019
- 2019-08-01 CN CN201910708532.3A patent/CN110290381B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110013830A1 (en) * | 2008-04-30 | 2011-01-20 | Nec Corporation | Image quality evaluation system, method and program |
| CN101695141A (zh) * | 2009-10-20 | 2010-04-14 | 浙江大学 | 一种视频质量评估方法和装置 |
| CN103634591A (zh) * | 2013-11-20 | 2014-03-12 | 华为技术有限公司 | 一种视频质量评估的方法、装置和系统 |
| CN104318562A (zh) * | 2014-10-22 | 2015-01-28 | 百度在线网络技术（北京）有限公司 | 一种用于确定互联网图像的质量的方法和装置 |
| CN107659806A (zh) * | 2017-08-22 | 2018-02-02 | 华为技术有限公司 | 视频质量的评估方法和装置 |
| CN108109145A (zh) * | 2018-01-02 | 2018-06-01 | 中兴通讯股份有限公司 | 图像质量检测方法、装置、存储介质和电子装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110996131A (zh) * | 2020-03-02 | 2020-04-10 | 腾讯科技（深圳）有限公司 | 视频编码方法、装置、计算机设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110290381B (zh) | 2020-10-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110213573B (zh) | 一种视频质量评估方法、装置和电子设备 | |
| JP2020096342A (ja) | 動画を処理するための方法および装置 | |
| WO2020248889A1 (zh) | 一种视频质量预测方法、装置和电子设备 | |
| CN111831855B (zh) | 用于匹配视频的方法、装置、电子设备和介质 | |
| CN110738657B (zh) | 视频质量评估方法、装置、电子设备及存储介质 | |
| CN112954354B (zh) | 视频的转码方法、装置、设备和介质 | |
| WO2017094847A1 (ja) | 体感品質最適化装置、ネットワーク品質推定装置、モバイル端末、体感品質最適化方法、ネットワーク品質推定方法、及びプログラム | |
| CN112153415B (zh) | 一种视频转码方法、装置、设备及存储介质 | |
| CN114389975B (zh) | 网络带宽预估方法、装置、系统、电子设备及存储介质 | |
| CN114861790B (zh) | 联邦学习压缩通信的优化方法、系统及装置 | |
| CN110418134B (zh) | 基于视频质量的视频编码方法、装置及电子设备 | |
| CN113542856B (zh) | 在线录像的倒放方法、装置、设备和计算机可读介质 | |
| CN110290381A (zh) | 视频质量评估方法、装置、电子设备及计算机存储介质 | |
| CN112261349A (zh) | 图像处理方法、装置和电子设备 | |
| CN117241092A (zh) | 一种视频处理方法、装置、存储介质及电子设备 | |
| CN113329226B (zh) | 数据的生成方法、装置、电子设备及存储介质 | |
| CN111737575B (zh) | 内容分发方法、装置、可读介质及电子设备 | |
| CN117115070A (zh) | 图像评估方法、装置、设备、存储介质和程序产品 | |
| CN110209851A (zh) | 模型训练方法、装置、电子设备及存储介质 | |
| CN113705386A (zh) | 视频分类方法、装置、可读介质和电子设备 | |
| CN111680754A (zh) | 图像分类方法、装置、电子设备及计算机可读存储介质 | |
| CN112488947A (zh) | 模型训练和图像处理方法、装置、设备和计算机可读介质 | |
| CN112203039A (zh) | 在线会议的处理方法、装置、电子设备及计算机存储介质 | |
| CN111343245A (zh) | 上传线路调度方法、装置、电子设备及可读存储介质 | |
| CN112312200A (zh) | 视频封面生成方法、装置和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP01 | Change in the name or title of a patent holder | ||
| CP01 | Change in the name or title of a patent holder |
Address after: Room 1401, 14th floor, Donghui Commercial Building, 109-111 Gloucester Avenue, Wanchai, Hong Kong, China Patentee after: Tiktok Group (Hong Kong) Co.,Ltd. Address before: Room 1401, 14th floor, Donghui Commercial Building, 109-111 Gloucester Avenue, Wanchai, Hong Kong, China Patentee before: Byte Jump (Hong Kong) Ltd. |