CN108933935B - 视频通信系统的检测方法、装置、存储介质和计算机设备 - Google Patents

Abstract

本发明涉及一种视频通信系统的检测方法、装置、存储介质和计算机设备。其中，该方法包括：获取视频通信系统根据样本视频生成的待测视频；从所述待测视频中提取多个待测图片；识别每个待测图片中包含的帧序号；获取每个帧序号对应的样本图片，所述样本图片是从所述样本视频中提取的帧图片；计算每个待测图片和对应的样本图片之间的第一相似度；根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。通过上述视频通信系统的检测方法、装置、存储介质和计算机设备，避免了遗漏有质量问题的待测图片，提高了对待测视频图像质量检测的精确度，从而提高了视频通信系统的检测效率。

Description

视频通信系统的检测方法、装置、存储介质和计算机设备

技术领域

本发明涉及多媒体技术领域，特别是涉及一种视频通信系统的检测方法、装置、存储介质和计算机设备。

背景技术

随着互联网技术的发展，视频通信技术在视频电话、互动电视、视频会议、电子监控及远程视频教育等领域有着广泛的应用。在视频通信系统的研发生产及质量评估等各个阶段，需要对通过视频通信系统编解码处理后的视频进行检测，根据检测到的处理后的视频存在的问题，比如视频图像色彩还原度低、图像冻结、图像花屏、黑屏及蓝屏等，对视频通信系统进行完善。

然而，传统的视频通信系统的检测是通过专业人员对待测视频进行观测并进行主观判断，得出视频通信系统存在的视频处理问题，这种方式需要耗费大量的人力和时间，而且容易出现漏看或察觉不到细微差别等问题，导致视频通信系统的检测效率较低。

发明内容

基于此，有必要针对传统的视频处理应用的检测效率较低的问题，提供一种视频处理应用的检测方法、装置、存储介质和计算机设备。

一种视频通信系统的检测方法，包括：

获取视频通信系统根据样本视频生成的待测视频；

从所述待测视频中提取多个待测图片；

识别每个待测图片中包含的帧序号；

获取每个帧序号对应的样本图片，所述样本图片是从所述样本视频中提取的帧图片；

计算每个待测图片和对应的样本图片之间的第一相似度；

根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

一种视频通信系统的检测装置，包括：

待测视频获取模块，用于获取视频通信系统根据样本视频生成的待测视频；

待测图片提取模块，用于从所述待测视频中提取多个待测图片；

帧序号识别模块，用于识别每个待测图片中包含的帧序号；

样本图片获取模块，用于获取每个帧序号对应的样本图片，所述样本图片是从所述样本视频中提取的帧图片；

相似度计算模块，用于计算每个待测图片和对应的样本图片之间的第一相似度；

视频处理问题确定模块，用于根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现所述视频通信系统的检测方法。

一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现所述视频通信系统的检测方法。

上述的视频通信系统的检测方法、装置、存储介质和计算机设备，通过从所述待测视频中提取多个待测图片，识别每个待测图片中包含的帧序号之后，根据待测图片中的帧序号获取待测图片对应的样本图片，通过帧序号关联待测图片和样本图片，提高了查找相应的样本图片的准确性，节约了查找赝本图片的时间。通过计算每个待测图片和对应的样本图片之间的第一相似度来确定视频通信系统是否存在视频处理问题，避免了遗漏有质量问题的待测图片，并且通过计算图片相似度的方式，提高了对待测视频图像质量检测的精确度，提高了视频通信系统的检测效率。

附图说明

图1为一个实施例中视频通信系统的检测方法的应用场景图；

图2为一个实施例中视频通信系统检测设备的内部结构图；

图3为一个实施例中视频通信系统的检测方法的流程图；

图4为另一个实施例中视频通信系统的检测方法的流程图；

图5为又一个实施例中视频通信系统的检测方法的流程图；

图6为再一个实施例中视频通信系统的检测方法的流程图；

图7为一个实施例中视频通信系统的检测装置的结构框图；

图8为另一个实施例中视频通信系统的检测装置的结构框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例所提供的视频通信系统的检测方法，可应用于如图1所示的应用环境中。如图1所示，视频通信系统检测设备110和视频通信系统120连接，其中，视频通信系统120中包括第一终端122和第二终端124，视频通信系统120可为视频电话、互动电视、视频会议、电子监控及远程视频教育等应用场景所采用的视频通信系统。第一终端122和第二终端124可通过网络进行数据传输。在视频通信系统120中，第一终端122可作为样本视频的发送终端，第二视频124可作为样本视频的接收终端。第一终端122在接收视频通信系统检测设备110发送的用于检测视频通信系统的样本视频之后，对样本视频进行编码，并将编码后的样本视频发送至第二终端124。第二终端124在接收到编码后的样本视频时，可按照对应的解码方式，解码生成相应的待测视频。其中，编解码标准包括但不限于H264、H264HP、H265等。视频通信系统检测设备110可获取该待测视频并检测。可以理解的是，在其他场景下，第一终端122也可以作为样本视频的接收终端，第二终端124则作为样本视频的发送终端，第二终端124将样本视频编码后发送到第一终端122进行解码生成相应的待测视频。

在一个实施例中，视频通信系统检测设备110和视频通信系统120可在同一个终端上。具体地，该终端可以获取样本片源生成样本视频，通过该终端内置的视频通信应用，可以将样本视频编码、传输、解码，生成待测视频。比如说，可以在终端上下载需要被检测的视频电话软件，同时登陆两个账号，将其中一个账号作为第一终端122，另一个账号作为第二终端124，该终端可以通过获取第一终端122发送的样本视频和第二终端124接收的待测视频，对该样本视频和待测视频进行分析，从而对该视频电话软件进行检测。

在一个实施例中，如图2所示，为一个实施例中视频通信系统检测设备的内部结构图。该通信系统检测设备110包括通过系统总线连接的处理器、非易失性存储介质、内存储器、和显示屏。其中，该视频通信系统检测设备的处理器用于提供计算和控制能力，支撑整个服务器的运行。该视频通信系统检测设备的非易失性存储介质存储有操作系统和计算机可执行指令，该计算机可执行指令可被处理器所执行，以用于实现以下各实施例提供的一种视频通信系统检测方法。该内存储器为非易失性存储介质中的操作系统、计算机可执行指令提供高速缓存的运行环境。该网络接口用于和外部的终端进行通信，实现数据的传输，比如发送样本视频至第一终端和从第二终端获取待测视频。显示屏可用于显示视频画面。

本领域技术人员可以理解，图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的移动终端的限定，具体的视频通信系统检测设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。比如，该视频通信系统检测设备还可包括摄像头，用于对可视区域进行扫描，生成样本片源。

在一个实施例中，如图3所示，提供了一种视频通信系统的检测方法，该方法可应用于如图1所示的应用环境中，包括：

步骤S302，获取视频通信系统根据样本视频生成的待测视频。

本实施例中，视频通信系统是一种传递视频信息的通信系统，通过多媒体技术和网络通信技术的支持，为不同地域的人们提供了类似面对面的交流方式。其中，通信系统可为借助电磁波在自由空间的传播的无线通信系统，或者在导引媒体中来传输信息的有线通信系统。比如，视频通信系统可为视频电话系统、互动电视系统、视频会议系统、电子监控系统及远程视频教育系统等，但不限于此。样本视频是指用于检测视频通信系统的视频。具体地，样本视频的每个帧图片上都含有帧序号，相应的，通过视频通信系统根据样本视频生成的待测视频的每个帧图片上也都含有帧序号。视频通信系统中的发送端在对样本视频进行编码之后，可通过网络传输将该样本视频发送至一个或多个接收端，该一个或多个接收端可按照对应的解码方式，将编码后的样本视频解码生成相应的待测视频，可获取该待测视频以进行下一步的检测。

在一个实施例中，视频通信系统可为视频会议系统，视频会议系统是指两个或两个以上不同地方的个人或群体，通过传输线路及多媒体设备，将声音、影像及文件资料互传，实现即时且互动的沟通，以实现会议目的的系统设备。可以通过视频会议系统将第一会议场景的会议视频发送到第二会议场景的显示屏进行展示，通过获取在第二会议场景的显示屏上展示的视频进行下一步的检测。

步骤S304，从待测视频中提取多个待测图片。

本实施例中，待测图片为待测视频中的帧图片。可以从待测视频中提取每个帧图片作为待测图片，也可以从待测视频中提取部分帧图片作为待测图片，比如，按照预设的时间间隔从待测视频中提取帧图片作为待测图片。具体地，预设的时间间隔为秒级，比如，每1秒或2秒从待测视频中提取帧图片作为待测图片。进一步地，还可以预设待测图片的数量，以避免遗漏短时间内出现的图像问题，包括但不限于瞬时花屏。举例来说，若按照每2秒的时间间隔所获得的待测图片的数量小于预设待测图片的数量，则可以将时间间隔缩短至1秒以获得更多的待测图片。

本实施例中通过按照预设的时间间隔从待测视频中提取帧图片作为待测图片节约了资源，通过预设的时间间隔为秒级可以防止遗漏视频出现的问题，通过预设待测图片的数量以提高对待测视频分析的精准度。

步骤S306，识别每个待测图片中包含的帧序号。

本实施例中，帧序号是指用于标识帧图片的视频图片的编号，帧序号可为数字、字母和标点符号等其中一种或多种的组合。帧序号不可重复，每个帧序号都对应唯一一个帧图片。

具体地，若样本视频中的帧图片包含帧序号，则通过视频通信系统生成的待测视频中的相应帧图片也会包含相同的帧序号。在视频通信系统不存在视频处理问题的情况下，则样本视频中的帧图片和待测视频中的帧图片为一一对应，每个帧序号可对应一个本视频中的帧图片和一个待测视频中的帧图片，帧序号可用来关联样本视频和待测视频中的帧图片，可通过识别待测图片中包含的帧序号查询到相应的样本视频中的帧图片。

进一步地，可通过图像识别技术直接识别待测图片中包含的帧序号。比如说，可通过阈值分割方法、区域提取方法、纹理图像分割法等方法将待测图片中的帧序号分割出来，对帧序号中的字符一个一个进行识别。还可存储样本视频中所有帧图片包含的帧序号作为帧序号库，将待测图片中包含的帧序号分割出来之后，将分割后的帧序号整体与帧序号库中的帧序号进行匹配来确定待测图片中包含的帧序号。

在一个实施例中，识别待测图片中帧序号所耗费的时间可为毫秒级。还可以通过神经网络训练帧序号识别模型，将识别准确率提高至99％以上，以此来提高视频通信系统检测的准确性，减少检测所需的时间。

步骤S308，获取每个帧序号对应的样本图片，样本图片是从样本视频中提取的帧图片。

本实施例中，样本图片为样本视频中的帧图片，每个样本图片经过视频通信系统的转化可生成一个相应的待测图片，且样本图片包含的帧序号与待测图片包含的帧序号也是相应的。可根据待测视频的帧序号查询到与该帧序号唯一对应的样本图片。举例来说，若识别到待测图片中的帧序号为12345，则获取样本视频中帧序号为12345的样本图片。

步骤S310，计算每个待测图片和对应的样本图片之间的第一相似度。

本实施例中，第一相似度为通过图片对比算法计算得到的每个待测图片和对应的样本图片之间的相似度。其中，图像对比算法可为通过比较两个图片的每个对应像素点的特征值，比如，RGB(Red、Green、Blue，三原色，通过其取值可表达像素点的颜色)，从而得到两个图片相似度的算法。也可为通过匹配两个图片的内容、特征、结构、关系、纹理及灰度等其中一种或多种的组合，从而得到两个图片相似度的算法。比如，通过灰度直方图得出两个图片相似度的直方图改进算法。

在一个实施例中，计算每个待测图片和对应的样本图片之间的第一相似度之后，判断该第一相似度是否低于第一阈值。其中，第一阈值为判定待测图片是否存在质量问题的相似度阈值，比如，90％或95％。若是，则判定待测图像存在质量问题。比如说，当待测图片和对应的样本图片之间的第一相似度为89％，而第一阈值为90％时，判定该待测图片存在质量问题。

在一个实施例中，可以预设多个图像对比算法，通过多个图像对比算法计算每个待测图片和样本图片之间的第一相似度。具体地，当通过第一图像对比算法计算得出的第一相似度低于第一阈值之后，再通过第二图像对比算法计算每个待测图片与样本图片之间的相似度来进行检验。进一步地，若通过第二图像对比算法计算得出的相似度仍低于第一阈值，则判定待测图片存在质量问题；若通过第二图像对比算法计算得出的相似度高于第一阈值，则判定两张图片一致，待测图片不存在质量问题，并将该高于第一阈值的相似度作为第一相似度。

步骤S312，根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

本实施例中，每个待测图片和对应的样本图片之间都可以计算的得出第一相似度，通过汇总每个待测图片和对应的样本图片之间的第一相似度来分析确定视频通信系统是否存在视频处理问题。其中，视频处理问题包括蓝屏、黑屏、花屏、偏色等其中一种或多种的组合。具体地，通过预设的分析算法分析低于第一阈值的第一相似度所对应的待测图片，可以得出待测图片所存在的图像问题，将所有的待测图片存在的图像问题进行汇总来确定视频通信系统是否存在蓝屏、黑屏、花屏、偏色等其中一种或多种的组合的问题。

上述的视频通信系统的检测方法，通过从待测视频中提取多个待测图片，识别每个待测图片中包含的帧序号，再根据帧序号获取待测图片对应的样本图片，通过帧序号关联待测图片和样本图片，提高了查找相应的样本图片的准确性，通过计算每个待测图片和对应的样本图片之间的第一相似度来确定视频通信系统是否存在视频处理问题，避免了遗漏有质量问题的待测图片，节约了视频通信系统的检测时间，提高了视频通信系统的检测效率。

在一个实施例中，如图4所示，获取视频通信系统根据样本视频生成的待测视频之前，还包括：

步骤S402，获取用于检测视频通信系统的样本片源。

本实施例中，样本片源是最原始的用于检测视频通信系统的视频，该样本片源可为已存在的视频，还可为通过摄像头扫描生成的视频，还可为桌面窗口上显示的画面。进一步地，可根据视频通信系统的应用场景选取相应类别的样本片源。举例来说，当被检测的视频通信系统为视频会议系统时，则可选取场景为会议状态的视频作为样本片源。再比如，当被检测的视频通信系统为电子监控视频时，除了选取白天场景的样本片源，还可以选取处于夜晚场景的样本片源。

在一个实施例中，可调用摄像头对可视区域进行扫描，按照预设的帧率生成视频，并实时地呈现在显示屏上。针对该实时呈现的原始视频，可按照小于或等于该帧率的采样频率进行帧图片的采集，将所采集的帧图片的集合作为待处理的样本片源。

步骤S404，通过在样本片源的每个帧图片上添加帧序号生成样本视频。

本实施例中，样本视频是指用于导入视频通信系统以进行检测的视频，可通过在样本片源的每个帧图片上添加帧序号生成该样本视频。其中，添加帧序号的方式可为在样本片源的每个帧图片上叠加一个帧序号用来标识这个帧图片。

步骤S406，提取样本视频中的帧图片，生成样本图片。

在一个实施例中，提取样本视频中的帧图片，生成样本图片，包括：将样本视频的每个帧图片保存为样本图片，获取每个样本图片中包含的帧序号，根据帧序号命名对应的样本图片。其中，可以通过图像识别技术识别样本图片中包含的帧序号，将对应的样本图片命名为该序号。

在一个实施例中，步骤S404和步骤S406可同时进行，在将帧序号添加到样本片源每个帧图片的同时，保存该帧图片，并将帧图片命名为对应的帧序号，省去再去识别样本图片中包含的帧序号的步骤，可以节约生成样本图片的时间。

本实施例中，通过将样本图片命名为对应的帧序号，减少了查找样本图片的时间，提高了查找样本图片的准确性。

在一个实施例中，根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题，包括：根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。具体地，可以预设一个数量阈值，判断低于第一阈值的第一相似度对应的待测图片的数量是否高于该数量阈值，若是，则判定该视频通信系统存在视频处理问题。其中，该数量阈值可以为一个固定的值，也可以通过计算待测图片总数量值的百分比得出动态的数量阈值。

在确定视频通信系统是否存在视频处理问题一个实施例中，如图5所示，步骤S502，根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题之后，还包括：

步骤S504，当确定视频通信系统存在视频处理问题时，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，偏差待测图片是低于第一阈值的第一相似度对应的待测图片。

本实施例中，偏差待测图片是指低于第一阈值的第一相似度对应的待测图片，根据偏差待测图片可确定视频待测系统存在的具体的视频处理问题。偏差图片是指存在质量问题的图片，包括但不限于蓝屏图片和黑屏图片，可用于检测偏差待测图片是否存在相同的问题，如蓝屏或黑屏的问题。第二相似度为通过图片对比算法计算得到的每个偏差待测图片和预设的偏差图片之间相似度。其中，图片对比算法可与计算第一相似度的方式相同。

在一个实施例中，偏差图片可为多个，计算偏差待测图片与每个偏差图片的顺序不做限定，当检测到偏差待测图片与其中一个偏差图片之间的第二相似度高于第二阈值时，不用再计算该偏差待测图片与其他偏差图片之间的第二相似度。举例来说，偏差图片为黑屏图片和蓝屏图片，若检测到偏差待测图片与黑屏图片的第二相似度高于第二阈值时，无须再计算该偏差待测图片与蓝屏图片的第二相似度；若检测到偏差待测图片与黑屏图片的第二相似度低于第二阈值，则计算该偏差待测图片与蓝屏图片的第二相似度。

步骤S506，判断第二相似度是否高于第二阈值。

本实施例中，第二阈值为判定偏差待测图片是否存在偏差图片质量问题的相似度阈值。进一步地，当第二相似度高于第二阈值时，则执行步骤S508，当第二相似度低于第二阈值时，则执行步骤S510。

步骤S508，判定视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题。

本实施例中，偏差图片包括但不限于蓝屏和黑屏，当第二相似度高于第二阈值时，则判定偏差待测图片存在与偏差图片相同的质量问题。其中，只要偏差待测图片和蓝屏图片或者黑屏图片等其中一种偏差图片的相似度高于第二阈值，则判定该偏差待测图片存在相应的偏差图片的问题。比如，若偏差待测图片与黑屏图片的第二相似度高于第二阈值，则判定该偏差相似图片与黑屏图片一致，视频处理问题包括黑屏。

步骤S510，判定视频通信系统存在的视频处理问题包括花屏或偏色的问题。

本实施例中，当第二相似度低于第二阈值时，判定偏差待测图片和偏差图片不一致，则视频处理问题包括但不限于花屏或偏色等其中一种或多种的组合。

在一个实施例中，通过上述方法判定偏差待测图片存在的图像质量问题之后，还包括：将偏差待测图片进行分类保存。举例来说，可以将所有的偏差待测图片按照黑屏、蓝屏、花屏、偏色等类别进行分类，并按照相应类别保存所有的偏差待测图片。

在一个实施例中，将偏差待测图片进行分类保存，还包括：获取偏差待测图片在待测视频中的定位标识，将所有的偏差待测图片命名为对应的定位标识。其中，定位标识是指能够定位偏差待测图片在待测视频中的位置的标识，定位标识包括但不限于偏差待测图片在待测视频中的进度时间或进度百分比等。本实施例中，通过将偏差待测图片命名为定位标识，提高了查找样本视频对应位置的样本图片的准确性，从而提高了进一步分析和确认偏差待测图片所存在问题的效率。

在一个实施例中，根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题之后，包括：判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致，若是，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。本实施例中，图像冻结是指待测视频中所有的待测图片的帧序号是一致的，图像卡顿是指待测视频中有一段视频所对应的待测图片的帧序号是一致的，而后续视频所对应的待测图片的帧序号不一致。高于第一阈值的第一相似度对应的待测图片本身不存在图像质量问题，若检测到该待测图片与相邻的待测图片的帧序号一致，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。进一步地，还可以检测低于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致，若是，则视频通信系统存在的视频处理问题包括图像质量问题以及图像冻结或图像卡顿问题。

在一个实施例中，可以检测所有的待测图片中是否存在帧序号相同的待测图片，由于样本视频中样本图片的帧序号是不重复的字符串，若检测到相同帧序号的待测图片，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

在一个实施例中，还可以在识别每个待测图片的帧序号之后，将所有的帧序号按照提取时间顺序进行汇总。比较待测视频所有的帧序号与相应的按照相同方式汇总的样本视频所有的帧序号是否一致，若否，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

在一个实施例中，获取每个帧序号对应的样本图片，包括：根据待测图片的分辨率查找具有相同分辨率的样本图片，在具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。其中，分辨率是用来表示图像精密度的值，包括但不限于4K、2K、1080K、720P等。视频的分辨率是指视频图像的单位英寸中所包含的像素点数，像素点越多，画面就越精细。样本视频的分辨率是指样本视频中样本图片的分辨率，待测视频的分辨率是指待测视频中待测图片的分辨率。

具体地，用于检测视频通信系统的样本视频的分辨率与视频通信系统生成的待测视频的分辨率相同。根据待测视频中待测图片的分辨率查找到相同分辨率所对应的样本图片之后，在所查找到的样本图片中获取每个待测图片的帧序号所对应的样本图片。本实施例中，通过在相应分辨率的样本图片中查找每个待测图片的帧序号所对应的样本图片，降低了查找样本照片的难度，提高了获取相应的样本图片的效率。

在一个实施例中，可以将样本片源生成多个相应的样本视频对不同的视频通信系统进行检测。具体地，可以通过编解码的方式，将原始样本视频转换成不同分辨率的样本视频。比如说，可以将高分辨率的样本视频转换为低分辨率的样本视频，高分辨率的样本视频用来检测具有相应的高输出分辨率的视频通信系统，低分辨率的样本视频用来检测具有相应的低输出分辨率的视频通信系统。进一步地，还可以将每个样本视频转换成具有多个预设分辨率的样本视频，以实现对多个具有不同输出分辨率的视频通信系统的检测。具体地，根据样本图片的分辨率将具有相同分辨率的样本图片保存为一个路径，不同分辨率的样本图片存放在对应的不同路径下构成样本库，通过待测视频的分辨率可以查找到相应的具有该分辨率的样本图片所在的路径，通过该路径可以查找到具有相应分辨率的样本图片。本实施例中，根据样本图片的分辨率将样本图片存储在相应的路径下，由此可以根据待测视频的分辨率查找相应的样本图片，提高了管理样本图片的便利性，降低了查找样本照片的难度，提高了获取相应的样本图片的效率。

在一个实施例中，如图6所示，提供了另一种视频通信系统检测方法。该方法可应用于如图1所示的应用环境中，包括：

步骤S601，获取用于检测视频通信系统的样本片源，通过在样本片源的每个帧图片上添加帧序号生成样本视频。

本实施例中，可根据视频通信系统的应用场景选取相应类别的样本片源。比如，当被检测的视频通信系统为视频会议系统时，由于视频会议的应用场景通常是会议室，且会出现较多的人脸图像，则选取的样本片源的特征可以是处于封闭的场景、包含较多人脸图像等。可以在每个帧图片的底部边缘叠加一个帧序号，或者，还可在通过编辑样本片源，延伸样本片源的每个帧图片的底部边缘形成一个黑边，在黑边上叠加帧序号，以降低对帧图片本身的干扰。

步骤S602，提取样本视频中的帧图片，生成样本图片。

本实施例中，可以通过图像识别技术识别样本图片中包含的帧序号，将样本图片保存，并命名为对应的序号。

步骤S603，获取视频通信系统根据样本视频生成的待测视频。

本实施例中，视频通信系统中的发送端在对样本视频进行编码之后，可通过网络传输将该样本视频发送至一个或多个接收端，该一个或多个接收端可按照对应的解码方式，将编码后的样本视频解码生成相应的待测视频，获取该待测视频以进行下一步的检测。

步骤S604，从待测视频中提取多个待测图片。

本实施例中，按照预设的时间间隔从待测视频中提取帧图片作为待测图片，比如，每隔1秒从待测视频中提取帧图片作为待测图片。

在一个实施例中，从待测视频中提取多个待测图片之后，还包括判断提取的待测图片的数量是否高于预设数量。具体地，若提取的待测图片的数量高于预设数量，则进行下一步的检测；若提取的待测图片的数量低于预设数量，则重复本步骤提取更多的待测图片，比如说，通过按照更高的提取频率从待测视频中提取更多待测图片。

步骤S605，识别每个待测图片中包含的帧序号。

本实施例中，帧序号可为连续不重复的字符串。比如，对于一个包含1500个帧图片的视频，帧序号可按照帧图片的顺序从10001到11500。或者，帧图片的帧序号可不按照帧序号的顺序，而是任意排序的不重复的字符串。再比如，帧序号可采取二进制编码的形式，只用0和1两个数字标识帧图片，降低识别帧序号的难度，提高识别帧序号的准确率。

步骤S606，根据待测图片的分辨率查找具有相同分辨率的样本图片，在具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。

本实施例中，通过视频通信系统生成的待测视频的分辨率可为该视频通信系统的最高输出分辨率，相应的，用于该检测视频通信系统的样本视频的分辨率也与视频通信系统的最高输出分辨率相同。可在根据待测视频的分辨率或者待测图片的分辨率，查找具有相应分辨率的样本图片，在所查找到的样本图片中查找与待测图片的帧序号所对应的样本图片。

步骤S607，计算每个待测图片和对应的样本图片之间的第一相似度。

本实施例中，可以通过对比待测图片和样本图片的每对相应像素RGB计算得出第一相似度，判定该第一相似度是否低于第一阈值，若是，将该待测图片和样本图片通过直方图改进算法进行检验。若通过直方图改进算法计算得出相似度仍低于第一阈值，则判定待测图片存在质量问题；若通过直方图改进算法计算得出相似度高于第一阈值，则判定两张图片一致，待测图片不存在质量问题，并将高于第一阈值的相似度作为第一相似度。

步骤S608，根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

本实施例中，可以预设数量阈值为1，则只要存在低于第一阈值的第一相似度对应的待测图片，就判定该视频通信系统存在视频处理问题。再比如，可以预设数量阈值为待测图片总数量的0.1％，对于总数量为5000个的待测图片，则当低于第一阈值的第一相似度对应的待测图片的数量大于5个，判定该视频通信系统存在视频处理问题。具体地，当确定视频通信系统存在视频处理问题时，则执行步骤S609，若否，则执行步骤S613。

步骤S609，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，偏差待测图片是低于第一阈值的第一相似度对应的待测图片。

步骤S610，判断第二相似度是否高于第二阈值。

本实施例中，第二阈值为判定偏差待测图片是否存在偏差图片质量问题的相似度阈值。具体地，当第二相似度高于第二阈值时，则执行步骤S611，当第二相似度低于第二阈值时，则执行步骤S612。

步骤S611，判定视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题。

步骤S612，判定视频通信系统存在的视频处理问题包括花屏或偏色的问题。

步骤S613，判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致。

本实施例中，当高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号一致时，执行步骤S614，若否，则执行步骤S615。

步骤S614，判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

步骤S615，判定视频通信系统不存在黑屏、蓝屏、花屏或偏色的问题。

在一个实施例中，步骤S611、步骤S612、步骤S614和步骤S615之后，还包括：根据判定结果，将偏差待测图片按照对应的类别进行保存。其中，类别包括但不限于黑屏、蓝屏、花屏、偏色等。视频通信系统的检测报告是指通过汇总偏差待测图片的数量、类别等信息，不限于此，生成的反映视频通信系统存在的视频处理问题的报告。进一步地，还可以将偏差待测图片命名为该偏差待测图片在待测视频中的进度时间，可以根据该进度时间查找样本视频中相应进度时间的样本图片，以进行下一步的分析和确认。

本实施例中，通过计算第一相似度并判断第一相似度是否低于第一阈值，从而确认待测图片是否存在图像质量问题，计算第二相似度并判断第二相似度是否高于阈值，从而确认待测图片存在的具体问题，将视频通信系统存在的视频处理问题逐步细化，提高了视频待测系统检测的精确度。通过判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致，避免了忽略图像质量问题之外的图像冻结或图像卡顿的问题，提高了检测待测视频的准确度，从而提高了视频通信系统的检测效率。

在一个实施例中，如图7所示，提供了一种视频通信系统的检测装置，包括：

待测视频获取模块702，用于获取视频通信系统根据样本视频生成的待测视频。

待测图片提取模块704，用于从待测视频中提取多个待测图片。

帧序号识别模块706，用于识别每个待测图片中包含的帧序号。

样本图片获取模块708，用于获取每个帧序号对应的样本图片，样本图片是从样本视频中提取的帧图片。

相似度计算模块710，用于计算每个待测图片和对应的样本图片之间的第一相似度。

视频处理问题确定模块712，用于根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

在一个实施例中，如图8所示，该装置还包括：

样本视频生成模块701，用于获取用于检测视频通信系统的样本片源，通过在样本片源的每个帧图片上添加帧序号生成样本视频。

样本图片生成模块716，用于提取样本视频中的帧图片，生成样本图片。

在一个实施例中，样本图片生成模块716还用于将样本视频的每个帧图片保存为样本图片；获取每个样本图片中包含的帧序号；根据帧序号命名对应的样本图片。

在一个实施例中，视频处理问题确定模块712还用于根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

在一个实施例中，相似度计算模块710还用于当确定视频通信系统存在视频处理问题时，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，偏差待测图片是低于第一阈值的第一相似度对应的待测图片；视频处理问题确定模块712还用于当第二相似度高于第二阈值时，则判定视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题，当第二相似度低于第二阈值时，则判定视频通信系统存在的视频处理问题包括花屏或偏色的问题。

在一个实施例中，视频处理问题确定模块712还用于判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致；若是，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

在一个实施例中，样本图片获取模块708还用于根据待测图片的分辨率查找具有相同分辨率的样本图片；在具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。

上述的视频通信系统的检测装置，通过从待测视频中提取多个待测图片，识别每个待测图片中包含的帧序号，再根据帧序号获取待测图片对应的样本图片，通过帧序号关联待测图片和样本图片，提高了查找相应的样本图片的准确性，通过计算每个待测图片和对应的样本图片之间的第一相似度来确定视频通信系统是否存在视频处理问题，避免了遗漏有质量问题的待测图片，节约了视频通信系统的检测时间，提高了视频通信系统的检测效率。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现以下步骤：获取视频通信系统根据样本视频生成的待测视频；从待测视频中提取多个待测图片；识别每个待测图片中包含的帧序号；获取每个帧序号对应的样本图片，样本图片是从样本视频中提取的帧图片；计算每个待测图片和对应的样本图片之间的第一相似度；根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

在一个实施例中，该程序被处理器执行时，在实现获取视频通信系统根据样本视频生成的待测视频的步骤之前，还实现以下步骤：获取用于检测视频通信系统的样本片源；通过在样本片源的每个帧图片上添加帧序号生成样本视频；提取样本视频中的帧图片，生成样本图片。

在一个实施例中，该程序被处理器执行时，在实现提取样本视频中的帧图片，生成样本图片的步骤时，包括实现以下步骤：将样本视频的每个帧图片保存为样本图片；获取每个样本图片中包含的帧序号；根据帧序号命名对应的样本图片。

在一个实施例中，该程序被处理器执行时，在实现根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题的步骤时，包括实现以下步骤：根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

在一个实施例中，该程序被处理器执行时，在实现根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题的步骤之后，还实现以下步骤：当确定视频通信系统存在视频处理问题时，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，偏差待测图片是低于第一阈值的第一相似度对应的待测图片；当第二相似度高于第二阈值时，则判定视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题；当第二相似度低于第二阈值时，则判定视频通信系统存在的视频处理问题包括花屏或偏色的问题。

在一个实施例中，该程序被处理器执行时，在实现根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题的步骤之后，还实现以下步骤：判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致；若是，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

在一个实施例中，该程序被处理器执行时，在实现获取每个帧序号对应的样本图片的步骤时，包括实现以下步骤：根据待测图片的分辨率查找具有相同分辨率的样本图片；在具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。

在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，处理器执行程序时实现以下步骤：获取视频通信系统根据样本视频生成的待测视频；从待测视频中提取多个待测图片；识别每个待测图片中包含的帧序号；获取每个帧序号对应的样本图片，样本图片是从样本视频中提取的帧图片；计算每个待测图片和对应的样本图片之间的第一相似度；根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题。

在一个实施例中，上述的处理器执行程序时，在实现获取视频通信系统根据样本视频生成的待测视频的步骤之前，还实现以下步骤：获取用于检测视频通信系统的样本片源；通过在样本片源的每个帧图片上添加帧序号生成样本视频；提取样本视频中的帧图片，生成样本图片。

在一个实施例中，上述的处理器执行程序时，在实现提取样本视频中的帧图片，生成样本图片的步骤时，包括实现以下步骤：将样本视频的每个帧图片保存为样本图片；获取每个样本图片中包含的帧序号；根据帧序号命名对应的样本图片。

在一个实施例中，上述的处理器执行程序时，在实现根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题的步骤时，包括实现以下步骤：根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

在一个实施例中，上述的处理器执行程序时，在实现根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题的步骤之后，还实现以下步骤：当确定视频通信系统存在视频处理问题时，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，偏差待测图片是低于第一阈值的第一相似度对应的待测图片；当第二相似度高于第二阈值时，则判定视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题；当第二相似度低于第二阈值时，则判定视频通信系统存在的视频处理问题包括花屏或偏色的问题。

在一个实施例中，上述的处理器执行程序时，在实现根据每个待测图片和对应的样本图片之间的第一相似度确定视频通信系统是否存在视频处理问题的步骤之后，还实现以下步骤：判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致；若是，则判定视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

在一个实施例中，上述的处理器执行程序时，在实现获取每个帧序号对应的样本图片的步骤时，包括实现以下步骤：根据待测图片的分辨率查找具有相同分辨率的样本图片；在具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述程序可存储于一计算机可读取存储介质中，如本发明实施例中，该程序可存储于计算机系统的存储介质中，并被该计算机系统中的至少一个处理器执行，以实现包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (9)

1.一种视频通信系统的检测方法，所述方法包括：

获取视频通信系统根据样本视频生成的待测视频；

从所述待测视频中提取多个待测图；

识别每个待测图片中包含的帧序号；

获取每个帧序号对应的样本图片，所述样本图片是从所述样本视频中提取的帧图片；

计算每个待测图片和对应的样本图片之间的第一相似度，当所述第一相似度低于第一阈值时，对所述第一相似度进行检验，得到检验结果；

若所述检验结果为所述第一相似度低于所述第一阈值，则根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

2.根据权利要求1所述的视频通信系统的检测方法，其特征在于，在所述获取视频通信系统根据样本视频生成的待测视频之前，还包括：

获取用于检测视频通信系统的样本片源；

通过在样本片源的每个帧图片上添加帧序号生成样本视频；

提取所述样本视频中的帧图片，生成样本图片。

3.根据权利要求2所述的视频通信系统的检测方法，其特征在于，所述提取所述样本视频中的帧图片，生成样本图片，包括：

将所述样本视频的每个帧图片保存为样本图片；

获取每个样本图片中包含的帧序号；

根据所述帧序号命名对应的样本图片。

4.根据权利要求1所述的视频通信系统的检测方法，其特征在于，所述根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题之后，还包括：

当确定视频通信系统存在视频处理问题时，计算每个偏差待测图片和预设的偏差图片之间的第二相似度，所述偏差待测图片是低于第一阈值的第一相似度对应的待测图片；

当所述第二相似度高于第二阈值时，则判定所述视频通信系统存在的视频处理问题包括蓝屏或黑屏的问题；

当所述第二相似度低于第二阈值时，则判定所述视频通信系统存在的视频处理问题包括花屏或偏色的问题。

5.根据权利要求1所述的视频通信系统的检测方法，其特征在于，所述根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题之后，包括：

判断高于第一阈值的第一相似度对应的待测图片包含的帧序号与相邻的待测图片包含的帧序号是否一致；

若是，则判定所述视频通信系统存在的视频处理问题包括图像冻结或图像卡顿的问题。

6.根据权利要求1所述的视频通信系统的检测方法，其特征在于，所述获取每个帧序号对应的样本图片，包括：

根据所述待测图片的分辨率查找具有相同分辨率的样本图片；

在所述具有相同分辨率的样本图片中获取与每个待测图片的帧序号所对应的样本图片。

7.一种视频通信系统的检测装置，其特征在于，所述装置包括：

待测视频获取模块，用于获取视频通信系统根据样本视频生成的待测视频；

待测图片提取模块，用于从所述待测视频中提取多个待测图片；

帧序号识别模块，用于识别每个待测图片中包含的帧序号；

样本图片获取模块，用于获取每个帧序号对应的样本图片，所述样本图片是从所述样本视频中提取的帧图片；

相似度计算模块，用于计算每个待测图片和对应的样本图片之间的第一相似度，当所述第一相似度低于第一阈值时，对所述第一相似度进行检验，得到检验结果；

视频处理问题确定模块，用于若所述检验结果为所述第一相似度低于所述第一阈值，则根据低于第一阈值的第一相似度对应的待测图片的数量确定视频通信系统是否存在视频处理问题。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至6中任意一项所述方法的步骤。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至6中任意一项所述方法的步骤。

Images