CN112153378B - 一种视频审核能力的测试方法及其系统 - Google Patents

Abstract

本发明提供了一种视频审核能力的测试方法，所述测试方法为：步骤S1、保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；步骤S2、对测试集中的视频的文件信息进行任务调度配置及测试执行；步骤S3、将各个视频测试结果进行统计汇总生成对应的测试报告。本发明能实现多个视频同时进行审核测试，效率远远高于人工的测试效率。

Description

一种视频审核能力的测试方法及其系统

技术领域

本发明涉及计算机通讯技术领域，特别是一种视频审核能力的测试方法及其系统。

背景技术

随着互联网的快速发展和科技进步，让短视频富有活力，从原有的极个别化转为全民化。审核视频的内容质量一直是不可缺少的一个环节，早期的视频审核主要由视频审核员来做人工审核，伴随着短视频的火爆，人工审核无法满足这庞大的数据量级，需要通过AI+人工的方式打造一个高效的视频审核能力。虽然通过AI进行视频审核大大提高了审核的效率，但是AI进行视频审核能力的可靠性备受争议。假设由于AI视频审核本身能力不足导致没有识别出部分敏感内容，就会给产品带来不好的影响，所以评估AI的视频审核能力是否准确性就变得尤为重要。判断视频审核能力是否准确，目前主要还是通过人工收集样本进行测试的方式去评估能力的一个准确性。

缺点一，针对视频内容审核的能力，一般都是由测试人员进行测试。首先测试人员需要收集敏感的内容，比如：色情、暴恐、政治敏感、违禁品、广告等，再通过上传对应的内容视频到视频审核能力进行验证，通过查看对应的内容是否被检测出来对应的敏感内容，从而判断该能力是否满足要求。但是如果都由人工的方式来进行视频审核能力评估的话，那无疑需要投入非常大的人力成本，另外一方面，视频内容的丰富性，仅由人工验证的样本不能代表视频审核能力的真实识别能力。

缺点二，为更好的去衡量视频的一个审核能力的准确性，需要使用到大量的视频内容，而视频内容大部分由人工来进行制作或收集的。因此在视频内容收集上就会产生较多的人力投入。

缺点三，视频审核是一个迭代成长的能力，随着训练数据的新增，能力识别度的提升，往往会影响性能，甚至功能。在回归迭代的过程中，以人工的方式是无法实现快速的一个能力迭代测试。

发明内容

为克服上述问题，本发明的目的是提供一种视频审核能力的测试方法，进行视频审核的准确率测试，测试人员可以实现一次性配置，此后执行将由程序自动进行执行，无需手工进行视频审核操作；提高了测试效率。

本发明采用以下方案实现：一种视频审核能力的测试方法，所述测试方法包括如下步骤：

步骤S1、保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；

步骤S2、对测试集中的视频的文件信息进行任务调度配置及测试执行；

步骤S3、将各个视频测试结果进行统计汇总生成对应的测试报告。

进一步的，所述步骤S1进一步具体为：用户上传完对应的视频之后，能配置对应视频所包含的审核维度，所述审核维度包括：色情、暴恐、政治敏感、广告、以及违禁品；即对上传的视频进行选择要审核哪些维度；选择完维度后，针对对应维度补充视频存在对于审核维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位，如果视频中多处时间处都存在维度内容，则能新增时间段，并填写起始时间和结束时间；配置完时间段后，视频将会被上传到文件存储服务器作为测试集，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构内容包括：数据字段id，文件名称file_name，文件的存储下载地址file_path，视频文件相关信息file_info，所述视频文件相关信息包括：审核维度、审核维度的开始时间、审核维度的结束时间。

进一步的，所述步骤S2进一步具体为：选择要进行测试的审核维度，即选择测试范围，确认要测试的审核维度后，选择该具体维度下的视频，创建执行任务，即配置请求参数，该请求参数用于请求测试服务所用的请求数据，请求数据包括具体的维度、文件名称file_name、以及文件的存储下载地址file_path；配置完请求参数后即执行任务创建完成；

配置视频审核服务的URL，根据开发提测的环境来选择测试所请求的对应服务的URL地址；创建好任务并配置好测试服务地址，即能选择对应的测试服务地址，然后发起任务执行对视频进行测试。

进一步的，任务执行过程中，程序会分配支持的线程topThread执行测试，并获取线程的数量；每个线程执行前都会去文件存储服务器中待执行的数据列表中取一个测试视频文件，完成测试后将结果存储到数据库中，测试结果的数据结构包括：测试记录id、配置的任务id，视频文件file_id、访问接口返回的测试结果file_result以及当次视频审核所消耗的时间time_line；然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，进行测试结果的整合。

进一步的，所述步骤S3进一步具体为：通过视频文件file_id关联到数据库的视频文件信息中的file_info，依次对比每个视频文件下的测试结果；具体操作如下：

读取任务执行所配置测试的维度内容，针对该视频下的维度内容进行检验；

针对视频文件信息只有配置维度，但没有审核维度的时间段信息，则只检测是否存在对应的维度，如果存在，则表示通过；

针对视频文件信息不仅有配置维度，还有每个检测项的时间范围的，检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，平均响应时间，最长响应时间，最短响应时间，并且能浏览每个维度检测失败的记录详情；

如果该任务第一次执行，则还会与上一次识别结果的概览进行对比，显示出本次测试比上次在各个维度上的一个变化，当完成数据处理之后，会推送报告链接至对应的人员。

本发明还提供了一种视频审核能力的测试系统，所述系统包括视频数据管理模块、视频审核执行模块、以及视频审核汇总模块；

所述视频数据管理模块，用于保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；

所述视频审核执行模块，用于对测试集中的视频的文件信息进行任务调度配置及测试执行；

所述视频审核汇总模块，用于将各个视频测试结果进行统计汇总生成对应的测试报告。

进一步的，所述视频数据管理模块的实现方式进一步具体为：用户上传完对应的视频之后，能配置对应视频所包含的审核维度，所述审核维度包括：色情、暴恐、政治敏感、广告、以及违禁品；即对上传的视频进行选择要审核哪些维度；选择完维度后，针对对应维度补充视频存在对于审核维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位，如果视频中多处时间处都存在维度内容，则能新增时间段，并填写起始时间和结束时间；配置完时间段后，视频将会被上传到文件存储服务器作为测试集，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构内容包括：数据字段id，文件名称file_name，文件的存储下载地址file_path，视频文件相关信息file_info，所述视频文件相关信息包括：审核维度、审核维度的开始时间、审核维度的结束时间。

进一步的，所述视频审核执行模块的实现方式进一步具体为：选择要进行测试的审核维度，即选择测试范围，确认要测试的审核维度后，选择该具体维度下的视频，创建执行任务，即配置请求参数，该请求参数用于请求测试服务所用的请求数据，请求数据包括具体的维度、文件名称file_name、以及文件的存储下载地址file_path；配置完请求参数后即执行任务创建完成；

配置视频审核服务的URL，根据开发提测的环境来选择测试所请求的对应服务的URL地址；创建好任务并配置好测试服务地址，即能选择对应的测试服务地址，然后发起任务执行对视频进行测试。

进一步的，任务执行过程中，程序会分配支持的线程topThread执行测试，并获取线程的数量；每个线程执行前都会去文件存储服务器中待执行的数据列表中取一个测试视频文件，完成测试后将结果存储到数据库中，测试结果的数据结构包括：测试记录id、配置的任务id，视频文件file_id、访问接口返回的测试结果file_result以及当次视频审核所消耗的时间time_line；然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，进行测试结果的整合。

进一步的，所述视频审核汇总模块的实现方式进一步具体为：通过视频文件file_id关联到数据库的视频文件信息中的file_info，依次对比每个视频文件下的测试结果；具体操作如下：

读取任务执行所配置测试的维度内容，针对该视频下的维度内容进行检验；

针对视频文件信息只有配置维度，但没有审核维度的时间段信息，则只检测是否存在对应的维度，如果存在，则表示通过；

针对视频文件信息不仅有配置维度，还有每个检测项的时间范围的，检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，平均响应时间，最长响应时间，最短响应时间，并且能浏览每个维度检测失败的记录详情；

如果该任务第一次执行，则还会与上一次识别结果的概览进行对比，显示出本次测试比上次在各个维度上的一个变化，当完成数据处理之后，会推送报告链接至对应的人员。

本发明的有益效果在于：1、通过本专利提供的方式进行视频审核的准确率测试，测试人员可以实现一次性配置，此后执行将由程序自动进行执行，在测试集合不变的情况下，只需要一键执行。

2、通过本专利提供的方式进行视频审核测试，测试人员只需要完成测试集合的收集与配置即可完成测试任务，无需手工进行视频审核操作。

3、通过本专利提供的方式进行视频审核测试，可以实现多个视频同时进行审核测试，效率远远高于人工的测试效率。

4、通过本专利提供的报告统计，可以快速分析出每个版本优化的具体效果及可能产生的其他影响和遗留问题列表，可以辅助开发更好的进行问题优化和解决。

5、通过本专利提供的报告，可以快速的判断每个版本优化之后对应性能响应上的一个变化，为项目在性能方面是否需要增加硬件投入或优化算法提供依据。

附图说明

图1是本发明的方法流程示意图。

图2是本发明的系统原理框图。

图3是本发明实施例视频数据管理模块实现的流程示意图。

图4是本发明实施例视频审核执行模块实现的流程示意图。

图5是本发明实施例视频审核汇总模块实现的流程示意图。

具体实施方式

下面结合附图对本发明做进一步说明。

请参阅图1所示，本发明的一种视频审核能力的测试方法，所述测试方法包括如下步骤：

步骤S1、保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；

步骤S2、对测试集中的视频的文件信息进行任务调度配置及测试执行；

步骤S3、将各个视频测试结果进行统计汇总生成对应的测试报告。

其中，所述步骤S1进一步具体为：用户上传完对应的视频之后，能配置对应视频所包含的审核维度，所述审核维度包括：色情、暴恐、政治敏感、广告、以及违禁品；即对上传的视频进行选择要审核哪些维度；选择完维度后，针对对应维度补充视频存在对于审核维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位，如果视频中多处时间处都存在维度内容，则能新增时间段，并填写起始时间和结束时间；配置完时间段后，视频将会被上传到文件存储服务器作为测试集，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构内容包括：数据字段id，文件名称file_name，文件的存储下载地址file_path，视频文件相关信息file_info，所述视频文件相关信息包括：审核维度、审核维度的开始时间、审核维度的结束时间。

所述步骤S2进一步具体为：选择要进行测试的审核维度，即选择测试范围，确认要测试的审核维度后，选择该具体维度下的视频，创建执行任务，即配置请求参数，该请求参数用于请求测试服务所用的请求数据，请求数据包括具体的维度、文件名称file_name、以及文件的存储下载地址file_path；配置完请求参数后即执行任务创建完成；

配置视频审核服务的URL，根据开发提测的环境来选择测试所请求的对应服务的URL地址；创建好任务并配置好测试服务地址，即能选择对应的测试服务地址，然后发起任务执行对视频进行测试。

任务执行过程中，程序会分配支持的线程topThread执行测试，并获取线程的数量；每个线程执行前都会去文件存储服务器中待执行的数据列表中取一个测试视频文件，完成测试后将结果存储到数据库中，测试结果的数据结构包括：测试记录id、配置的任务id，视频文件file_id、访问接口返回的测试结果file_result以及当次视频审核所消耗的时间time_line；然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，进行测试结果的整合。

另外，所述步骤S3进一步具体为：通过视频文件file_id关联到数据库的视频文件信息中的file_info，依次对比每个视频文件下的测试结果；具体操作如下：

读取任务执行所配置测试的维度内容，针对该视频下的维度内容进行检验；

针对视频文件信息只有配置维度，但没有审核维度的时间段信息，则只检测是否存在对应的维度，如果存在，则表示通过；

针对视频文件信息不仅有配置维度，还有每个检测项的时间范围的，检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，平均响应时间，最长响应时间，最短响应时间，并且能浏览每个维度检测失败的记录详情；

如果该任务第一次执行，则还会与上一次识别结果的概览进行对比，显示出本次测试比上次在各个维度上的一个变化，当完成数据处理之后，会推送报告链接至对应的人员。

下面结合应用场景对本发明进行说明：场景一：

同学小A所在的公司是一家短视频的公司，小A负责一个线上用户发布视频的内容进行校验，避免出现涉黄、涉毒等视频内容的发布，但是由于公司产品的业务越来越受到市场的欢迎，用户数量明显提高，小A与公司商量后，决定通过人工智能来实现短视频的快速审核，在第一时间通过程序的方式进行违规视频的发现，并进行对于的处理。小B是负责该项目能力测试的负责人，他需要针对视频审核能力进行评估，保证视频审核能力的有效性。但是由于测试人员有限，且视频内容的丰富多彩，小B团队通过人工审核的方式评估视频审核能力的效率不高，导致验证的范围较为狭隘，上线之后，原本小A是期望能够释放掉一部分的人工审核时间，所以在人工智能审核上线之后，降低的了线上人工审核的投入，但是最终却由于人工智能审核能力差的问题，没有及时的下架违规视频内容，导致产品频繁被投诉，甚至被有关单位约谈。最终导致小A对小B团队的测试能力产生了质疑，因为让人工智能审核出漏检了一些之前人工审核就已经出现过的违规视频。

通过本专利的方案，小B只需要找到小A团队，要求提供历史以来审核过的违规视频，上传到本专利所提供的后台进行维度分类及标识。就可以通过一键执行的方式在短时间内完成校验，如果视频审核不能够发现历史上存在的视频问题，就会生成对应的报告，继而由程序进一步进行完善，这样的话至少能够保证审核能力能够覆盖历史以来的所有违规内容，针对类似之前出现过的视频就可以由程序第一时间发现，并不会漏检测。

场景二：

同学小C负责一款视频相关业务的产品测试，小C的项目负责人为了减少在视频审核方面的人工投入，新增了视频自动化审核的功能，但是前期小C的项目负责人针对程序审核的可靠性有一定的质疑，要求小C作为该项目的测试负责人，需要针对视频审核能力需要进行验收评估，以保证程序能够有效的替代人工审核。小C安排了测试同学进行了对应的测试视频收集，并验证了第一版本的视频自动化审核程序的结果，发现结果并不理想，通过率不足20％，此结果不足以支持当前产品的需要，程序解释是测试数据量级少，不足以代表整体上的识别率，当然程序也有一定的优化空间。故此，小C继续收集测试数据，并由程序修复优化后继续提测，其中由于识别率结果未满足预期，所以多次进行程序优化。可是随着测试数据量级的提高，测试人员觉得这种人工验证的方式显得很效率非常低下，也影响到了测试员的积极性。

通过本专利的方案，同学小C只需要求测试员进行对应数据的收集，标识，此后不管开发优化修复多少次内容，都只需要一键点击进行测试即可，与此同时，可以与之前的测试结果进行对比，清晰的发现当前版本同之前版本之间的提升率，以及目前还有哪些方面的内容还是属于检测不出来的情况，进而提高给程序同学进行修复，此举不仅提高了测试效率，也使得视频审核能力测试的人工执行得到解放。

场景三：

同学小D负责一款视频审核能力的测试，该视频审核能力是作为基础能力提供到各个产品进行集成，为了能够更好的支持每个产品的业务，该视频审核能力支持产品自定义配置(举例：产品A是需要针对涉黄、涉毒、涉广告推广的内容进行检测，但是产品B只需要针对涉黄、涉毒的内容进行检测)。导致小D要对这每种组合产品就行测试集合的分类，并进行对应的测试，小D觉得这种组合的产品太过于复杂，管理上面也相对的不便。

通过本专利的方案，小D只需要在上传文件进行标识的时候，标识好对应文件的所属维度，然后在测试的时候，勾选需要测试的维度的内容，并选择需要测试范围就可以完成对应的测试，由程序进行对应发测试集分类，并发起对应的测试，并生产对应的测试报告。

请参阅图2所示，本发明还提供了一种视频审核能力的测试系统，所述系统包括视频数据管理模块、视频审核执行模块、以及视频审核汇总模块；

所述视频数据管理模块，用于保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；

所述视频审核执行模块，用于对测试集中的视频的文件信息进行任务调度配置及测试执行；

所述视频审核汇总模块，用于将各个视频测试结果进行统计汇总生成对应的测试报告。

下面结合一具体实施例对本发明作进一步说明：

一种视频审核能力的测试系统，主要包含视频数据管理模块、视频审核执行模块、视频审核汇总模块；其中视频数据管理模块负责测试视频的分类、上传、标识；视频审核执行模块则负责视频审核的调度配置及测试执行；而视频审核汇总模块则反馈整个视频审核测试结果的一个统计及输出。

请参阅图3所示，视频数据管理模块包含如下内容：

1、提供一个视频审核维度的管理模块，用于增、删、改、查视频审核维度。维度指审核视频内容的维度，包含但不局限于：色情、暴恐、政治敏感、广告、违禁品等；

2、提供一个视频文件上传的功能，可以由用户进行对应的文件上传；

3、继上，用户上传完对应的视频之后，可以配置对应视频所包含的待审核维度。例如：该视频中包含了色情和暴恐两个维度的内容，则勾选色情和暴恐两个维度(此步骤即标识视频文件的维度信息，一个文件内可以同时包含多个维度)；

4、继上，当用户配置了某个维度之后，可以针对对应维度补充视频存在对于检测维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位(举例：一个视频中5-6秒中存在色情片段，那边需要填写开始时间：5，结束时间6)，如果视频中存在多处时间段存在色情，则可以新增时间段，并填写起始时间和结束时间；

5、继上，除了可以人工补充视频检测维度下的时间段之外，本专利仍能提供一个可以自动生成检测类型时间节点的功能，支持对接现有的视频审核能力，通过程序直接输出每个类型的时间节点，并可以进一步的进行人工调整(即通过待测系统的能力进行初步的标记，然后再人工的方式做进一步补充)；

6、当完成上述配置之后，该视频将会被上传到文件存储服务，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构主要内容如下(表1数据字段释义:id指数据库自增id，file_name指上传文件的名称，file_path指文件的存储下载地址，file_info指该文件的相关信息，其中示例数据的pron和violent分别指色情和暴恐，begin_time则是指对应维度检测开始的时间，end_time即结束时间)：

表1(file表)

请参阅图4所示，视频审核执行模块包含如下内容：

在执行视频审批执行测试之前，需要创建执行任务，并配置视频审核的一些相关参数信息；

1.1、首先，支持测试维度的自定义配置(针对不同的产品的过滤需求可能不一样这样)，选择测试维度，勾选视频审核维度类型。例如：勾选色情、暴恐两个维度；

1.2、再则，选择测试范围，在勾选维度之后，可以点开具体维度下的测试集合，默认选择当前维度下的所有测试视频，系统支持用户自定义勾选或取消部分测试视频；

1.3、最后，配置请求参数(本专利提供配置请求参数指的是用于请求测试服务所用的请求数据，包含但不局限于json格式，以json为例，假设服务检测需要传维度及测试视频两个字段，且字段分别：维度为dimension、测试视频为file，那么可以配置为{“dimension”:“pron,violent”,“file”:“{path}”},dimension即代表测试维度，pron,violent则代表测试维度：暴恐、色情，file则指测试的视频文件，程序会自动将{path}替代成对应的文件进行接口调用)，完成配置后点击保存任务即任务创建完成；

提供请求url地址配置模块，用于配置视频审核服务的URL，可以根据开发提测的环境来选择自动化测试所请求的对应服务的URL地址；

继上，创建好了任务并配置好测试服务地址，用户就可以选择对应的测试服务地址，然后发起任务执行；

4、较优的，任务执行过程中，程序会自动计算当前计算机仍可分配支持的线程数，提供包含但不局限于num＝topThread*0.8(0.8的阈值是可以根据用户自定义设置，topThread为线程)为并发线程数，用于提高测试效率。

5、每个线程执行前都会去待执行的数据列表中取一个测试文件，完成测试后将结果存储到数据库中(测试结果的主要数据结构如表2所述，其中id是指该任务文件测试的记录id，task_id指1中所配置的任务id，file_id指测试的视频文件id(即表1中的主键id)，file_result则指访问接口返回的测试结果，time_line则指当次视频审核所消耗的时间)，然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，会开始调用视频审核汇总模块进行数据整合；

id	task_id	file_id	file_result	time_line
					1	2	1	{“pron”:[{“begin_time”:5,“end_time”:6}]}	200ms
2	2	2	{“pron”:[{“begin_time”:5,“end_time”:6}]}	300ms
					2	2	3	{“pron”:[{“begin_time”:5,“end_time”:6}]}	300ms
3	2	4	{“violent”:[{“begin_time”:5,“end_time”:6}]}	300ms

表2(record表)

请参阅图5所示，视频审核汇总模块包含如下内容：

1、当视频审核执行模块完成任务执行之后，将由视频审核汇总模块来进行进一步发数据处理；

2、首先，通过file_id将关联file表(表1)中的file_info，依次对比每个视频文件下的测试结果。较优的，针对每个视频的信息完整度，进行不同层度的对比，具体操作如下：

2.1、读取任务执行所配置测试的维度内容，比如本次测试的内容只有涉黄维度，即只针对该视频下的涉黄维度进行检验，即使测试文件存在其他维度的内容；

2.2、针对视频文件信息只有配置维度，但没有其他信息补充的，例如：{“violent”:[]}，系统将只检测是否存在对应的维度，如果存在，则表示通过；

2.3、针对视频文件信息不仅有维度，还有每个检测项的时间范围的，系统检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

3、再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，及平均响应时间，最长响应时间，最短响应时间，并且可以浏览每个维度检测失败的记录详情；

4、继上，如果该任务第一次执行，则还会与上一次识别结果的概览进行比对，显示出本次测试比上次在各个维度上的一个变化(变化内容包含测试结果概览中的所有内容，比如：色情检测准确率提升5％,平均响应时间下降5秒)，当完成数据处理之后，会推送报告链接至对应的人员。

以上所述仅为本发明的较佳实施例，凡依本发明申请专利范围所做的均等变化与修饰，皆应属本发明的涵盖范围。

Claims (4)

1.一种视频审核能力的测试方法，其特征在于：所述测试方法包括如下步骤：

步骤S1、保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；所述步骤S1进一步具体为：用户上传完对应的视频之后，能配置对应视频所包含的审核维度，所述审核维度包括：色情、暴恐、政治敏感、广告、以及违禁品；即对上传的视频进行选择要审核哪些维度；选择完维度后，针对对应维度补充视频存在对于审核维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位，如果视频中多处时间处都存在维度内容，则能新增时间段，并填写起始时间和结束时间；配置完时间段后，视频将会被上传到文件存储服务器作为测试集，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构内容包括：数据字段id，文件名称file_name，文件的存储下载地址file_path，视频文件相关信息file_info，所述视频文件相关信息包括：审核维度、审核维度的开始时间、审核维度的结束时间；

步骤S2、对测试集中的视频的文件信息进行任务调度配置及测试执行；所述步骤S2进一步具体为：选择要进行测试的审核维度，即选择测试范围，确认要测试的审核维度后，选择该具体维度下的视频，创建执行任务，即配置请求参数，该请求参数用于请求测试服务所用的请求数据，请求数据包括具体的维度、文件名称file_name、以及文件的存储下载地址file_path；配置完请求参数后即执行任务创建完成；

配置视频审核服务的URL，根据开发提测的环境来选择测试所请求的对应服务的URL地址；创建好任务并配置好测试服务地址，即能选择对应的测试服务地址，然后发起任务执行对视频进行测试；

步骤S3、将各个视频测试结果进行统计汇总生成对应的测试报告；

所述步骤S3进一步具体为：通过视频文件file_id关联到数据库的视频文件信息中的file_info，依次对比每个视频文件下的测试结果；具体操作如下：

读取任务执行所配置测试的维度内容，针对该视频下的维度内容进行检验；

针对视频文件信息只有配置维度，但没有审核维度的时间段信息，则只检测是否存在对应的维度，如果存在，则表示通过；

针对视频文件信息不仅有配置维度，还有每个检测项的时间范围的，检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，平均响应时间，最长响应时间，最短响应时间，并且能浏览每个维度检测失败的记录详情；

如果该任务第一次执行，则还会与上一次识别结果的概览进行对比，显示出本次测试比上次在各个维度上的一个变化，当完成数据处理之后，会推送报告链接至对应的人员。

2.根据权利要求1所述的一种视频审核能力的测试方法，其特征在于：任务执行过程中，程序会分配支持的线程topThread执行测试，并获取线程的数量；每个线程执行前都会去文件存储服务器中待执行的数据列表中取一个测试视频文件，完成测试后将结果存储到数据库中，测试结果的数据结构包括：测试记录id、配置的任务id，视频文件file_id、访问接口返回的测试结果file_result以及当次视频审核所消耗的时间time_line；然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，进行测试结果的整合。

3.一种视频审核能力的测试系统，其特征在于：所述系统包括视频数据管理模块、视频审核执行模块、以及视频审核汇总模块；

所述视频数据管理模块，用于保存各类待审核的视频的文件信息，并进行分类、上传作为测试集；

所述视频数据管理模块的实现方式进一步具体为：用户上传完对应的视频之后，能配置对应视频所包含的审核维度，所述审核维度包括：色情、暴恐、政治敏感、广告、以及违禁品；即对上传的视频进行选择要审核哪些维度；选择完维度后，针对对应维度补充视频存在对于审核维度的时间段，时间段包含开始和结束两个时间节点，时间节点以秒为计量单位，如果视频中多处时间处都存在维度内容，则能新增时间段，并填写起始时间和结束时间；配置完时间段后，视频将会被上传到文件存储服务器作为测试集，同时视频文件相关信息将被保存到数据库中，存入数据库中的数据结构内容包括：数据字段id，文件名称file_name，文件的存储下载地址file_path，视频文件相关信息file_info，所述视频文件相关信息包括：审核维度、审核维度的开始时间、审核维度的结束时间；

所述视频审核执行模块，用于对测试集中的视频的文件信息进行任务调度配置及测试执行；所述视频审核执行模块的实现方式进一步具体为：选择要进行测试的审核维度，即选择测试范围，确认要测试的审核维度后，选择该具体维度下的视频，创建执行任务，即配置请求参数，该请求参数用于请求测试服务所用的请求数据，请求数据包括具体的维度、文件名称file_name、以及文件的存储下载地址file_path；配置完请求参数后即执行任务创建完成；

配置视频审核服务的URL，根据开发提测的环境来选择测试所请求的对应服务的URL地址；创建好任务并配置好测试服务地址，即能选择对应的测试服务地址，然后发起任务执行对视频进行测试；

所述视频审核汇总模块，用于将各个视频测试结果进行统计汇总生成对应的测试报告；

所述视频审核汇总模块的实现方式进一步具体为：通过视频文件file_id关联到数据库的视频文件信息中的file_info，依次对比每个视频文件下的测试结果；具体操作如下：

读取任务执行所配置测试的维度内容，针对该视频下的维度内容进行检验；

针对视频文件信息只有配置维度，但没有审核维度的时间段信息，则只检测是否存在对应的维度，如果存在，则表示通过；

针对视频文件信息不仅有配置维度，还有每个检测项的时间范围的，检测将针对所有每个维度及维度下的个数及每个检测范围的时间点进行比对，校验其一致性；

再则，当本次所有记录都完成对比之后会生成一份当前的测试结果概览，包含每个维度的检测通过率，平均响应时间，最长响应时间，最短响应时间，并且能浏览每个维度检测失败的记录详情；

如果该任务第一次执行，则还会与上一次识别结果的概览进行对比，显示出本次测试比上次在各个维度上的一个变化，当完成数据处理之后，会推送报告链接至对应的人员。

4.根据权利要求3所述的一种视频审核能力的测试系统，其特征在于：任务执行过程中，程序会分配支持的线程topThread执行测试，并获取线程的数量；每个线程执行前都会去文件存储服务器中待执行的数据列表中取一个测试视频文件，完成测试后将结果存储到数据库中，测试结果的数据结构包括：测试记录id、配置的任务id，视频文件file_id、访问接口返回的测试结果file_result以及当次视频审核所消耗的时间time_line；然后再去待执行列表中领取新的测试文件，当线程发现没有待测试文件之后，该线程会标识结束并释放，当全部线程执行完毕之后，进行测试结果的整合。

Images