CN115118616B - 展示结果测试方法、装置、计算机设备和存储介质 - Google Patents

Abstract

本申请涉及一种展示结果测试方法、装置、计算机设备、存储介质和计算机程序产品。可应用于地图领域，所述方法可以在获取展示环境标识、展示位置标识以及展示内容标识后；查找待测展示内容数据以及与待测展示内容数据的相似的线上展示内容数据；而后分别对待测展示内容数据以及线上展示内容数据进行内容展示，得到待测内容展示结果，以及线上内容展示结果；基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果；根据规则校验结果以及对比校验结果，得到针对展示结果的测试结果。本申请的方案可以有效提高展示结果测试的测试准确率。

Description

展示结果测试方法、装置、计算机设备和存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种展示结果测试方法、装置、计算机设备、存储介质和计算机程序产品。

背景技术

随着计算机技术与网络技术的发展，各种基于互联网的网络信息推送服务也随之迅猛增长。例如可以通过远程播放的方式来进行网络信息推送，而为了保证推送的网络信息可以准确的进行展示，可以在网络信息推送之前先对其测试，以测试结果预测网络信息的展示结果。

目前，对于网络信息推送展示的测试，一般可以通过配置代理服务器来进行，测试用的播放终端请求先走到代理服务器，代理服务器再转发给信息展示系统，信息展示系统所返回的网络信息展示内容也会先到代理服务器，然后以文档的形式从代理服务器中拷贝网络信息展示内容，从而检查这些网络信息展示内容是否符合预期，如果没问题，再在播放终端进行展示和交互验证。然而这种测试方式需要借助代理服务器进行，测试规则无法存储，测试结果也无法继承，因此无法保证测试的准确性。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高测试准确性的展示结果测试方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

第一方面，本申请提供了一种展示结果测试方法。所述方法包括：

获取展示环境标识、展示位置标识以及展示内容标识；

根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据；

基于所述展示环境标识以及所述展示位置标识，分别对所述待测展示内容数据以及所述线上展示内容数据进行内容展示，得到所述待测展示内容数据对应的待测内容展示结果，以及所述线上展示内容数据对应的线上内容展示结果；

基于预设校验规则对所述待测内容展示结果进行规则校验，得到规则校验结果，基于所述线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果；

根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

第二方面，本申请还提供了一种展示结果测试装置。所述装置包括：

数据获取模块，用于获取展示环境标识、展示位置标识以及展示内容标识；

数据查找模块，用于根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据；

内容展示模块，用于基于所述展示环境标识以及所述展示位置标识，分别对所述待测展示内容数据以及所述线上展示内容数据进行内容展示，得到所述待测展示内容数据对应的待测内容展示结果，以及所述线上展示内容数据对应的线上内容展示结果；

内容校验模块，用于基于预设校验规则对所述待测内容展示结果进行规则校验，得到规则校验结果，基于所述线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果；

测试结果识别模块，用于根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

获取展示环境标识、展示位置标识以及展示内容标识；

根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据；

基于所述展示环境标识以及所述展示位置标识，分别对所述待测展示内容数据以及所述线上展示内容数据进行内容展示，得到所述待测展示内容数据对应的待测内容展示结果，以及所述线上展示内容数据对应的线上内容展示结果；

基于预设校验规则对所述待测内容展示结果进行规则校验，得到规则校验结果，基于所述线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果；

根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：

获取展示环境标识、展示位置标识以及展示内容标识；

根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据；

基于所述展示环境标识以及所述展示位置标识，分别对所述待测展示内容数据以及所述线上展示内容数据进行内容展示，得到所述待测展示内容数据对应的待测内容展示结果，以及所述线上展示内容数据对应的线上内容展示结果；

基于预设校验规则对所述待测内容展示结果进行规则校验，得到规则校验结果，基于所述线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果；

根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

第五方面，本申请还提供了一种计算机程序产品。所述计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现以下步骤：

获取展示环境标识、展示位置标识以及展示内容标识；

根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据；

基于所述展示环境标识以及所述展示位置标识，分别对所述待测展示内容数据以及所述线上展示内容数据进行内容展示，得到所述待测展示内容数据对应的待测内容展示结果，以及所述线上展示内容数据对应的线上内容展示结果；

基于预设校验规则对所述待测内容展示结果进行规则校验，得到规则校验结果，基于所述线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果；

根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

上述展示结果测试方法、装置、计算机设备、存储介质和计算机程序产品，可以在获取展示环境标识、展示位置标识以及展示内容标识后；先根据所获取展示内容标识，查找待测展示内容数据以及与待测展示内容数据的相似度满足相似条件的线上展示内容数据；而后基于展示环境标识以及展示位置标识，分别对待测展示内容数据以及线上展示内容数据进行内容展示，从而得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果；并基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果；最终根据规则校验结果以及对比校验结果，通过规则校验以及对比校验来对展示结果测试请求所请求的展示结果进行测试，得到针对展示结果的测试结果，可以有效地在已有的内容展示结果的基础上进行展示效果校验，从而有效提高展示结果测试的测试准确率。

附图说明

图1为一个实施例中展示结果测试方法的应用环境图；

图2为一个实施例中展示结果测试方法的流程示意图；

图3为一个实施例中对展示结果进行对比校验步骤的流程示意图；

图4为一个实施例中广告串测平台的结构图；

图5为一个实施例中对广告进行测试的时序流程图；

图6为一个实施例中规则管理界面的示意图；

图7为一个实施例中数据录入界面的示意图；

图8为一个实施例中展示结果测试装置的结构框图；

图9为一个实施例中计算机设备的内部结构图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

本申请实施例提供的展示结果测试方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上，也可以放在云上或其他服务器上。终端102向服务器104发送展示环境标识、展示位置标识以及展示内容标识，以请求服务器104进行展示结果测试，服务器104获取展示环境标识、展示位置标识以及展示内容标识；根据展示内容标识，查找待测展示内容数据以及与待测展示内容数据的相似度满足相似条件的线上展示内容数据；基于展示环境标识以及展示位置标识，分别对待测展示内容数据以及线上展示内容数据进行内容展示，得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果；基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果；根据规则校验结果以及对比校验结果，得到针对展示结果的测试结果。其中，终端102可以但不限于是各种台式计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备，物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。

在一个实施例中，如图2所示，提供了一种展示结果测试方法，以该方法应用于图1中的服务器104为例进行说明，包括以下步骤：

步骤201，获取展示环境标识、展示位置标识以及展示内容标识。

其中，展示环境标识用于指示获取展示结果的测试环境，一般用于指定后台服务器。而展示位置标识则是指在展示环境中的那个位置进行展示，一般终端在进行内容展示时，会包含有许多的展示位。如对于广告内容的展示，在一个应用中可以包含多个广告位，例如启动页广告位等。而对于拓展内容的展示，则在一个网页页面上可以预留有多个用于拓展内容展示的展示位。而展示位置标识则是用于在众多的展示位中，为需要测试的展示内容指示一个展示位置，从而得到展示内容在指定的展示环境以及展示位置下的展示结果。展示内容标识则是用于指示具体的待测展示内容数据，服务器104可以根据展示内容标识，通过相应的数据接口从预设内容数据库中查找并得到相应的待测展示内容数据。

具体地，在终端102需要进行展示结果测试时，可以通过向服务器发送携带有展示环境标识、展示位置标识以及展示内容标识的请求，以通过这些标识数据来指示服务器104开始展示结果测试，而服务器104在得到展示环境标识、展示位置标识以及展示内容标识后。可以基于展示环境标识查找对应的后台服务器，从而构建出用于展示结果测试的测试环境，并基于展示内容标识从数据库中提取出相应的展示内容在展示位置标识对应的展示位置进行内容展示，并获得展示流程对应的展示结果。在其中一个实施例中，本申请的展示结果测试方法可以用于对广告的展示效果进行测试，此时展示环境标识用于指示后台服务器的CGI(Common Gateway Interface，公共网关)接口，而展示位置标识则用于指示广告的环境中的播放位置，展示内容标识用于指示具体地广告内容，如可以包括需要展示的广告在数据库内的序号或者是存储位置。

步骤203，根据展示内容标识，查找待测展示内容数据以及与待测展示内容数据的相似度满足相似条件的线上展示内容数据。

其中，待测展示内容数据具体是指展示结果测试所要测试的还未上线的展示内容，待测展示内容数据具体可以为一张图片或者一段视频等，可以在展示位置标识对应的位置上进行内容展示。而与待测展示内容数据的相似度满足相似条件的线上展示内容数据，则具体是指与待测展示内容数据相似且已经在线上公开的展示内容。相似度满足相似条件则具体是指两者之间一些预设的关键参数的相似度高与预设阈值。这部分内容可以用于实现对展示结果的对比测试。通过对比待测展示内容数据与线上展示内容数据的展示结果，可以有效确定待测展示内容是否在关键项目上与类似的线上展示内容数据存在差别，从而对待测展示内容的展示结果进行分析。

具体地，在得到展示内容标识后，需要根据展示内容标识来查找并获取当前展示内容标识相应的待测展示内容数据。在其中一个实施例中，展示内容标识具体可以为待测展示内容数据在预设内容数据库中的身份标识，此时，可以根据展示内容标识，直接从预设内容数据库中提取出相应的待测展示内容数据。而在得到待测展示内容数据后，可以用待测展示内容数据作为基准，在预设内容数据库的已上线内容中，进行相似度匹配，从而获得与待测展示内容数据的相似度满足相似条件的线上展示内容数据。

步骤205，基于展示环境标识以及展示位置标识，分别对待测展示内容数据以及线上展示内容数据进行内容展示，得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果。

其中，内容展示具体是指在展示环境标识以及展示位置标识所指示的环境中，将待测展示内容数据以及线上展示内容数据进行展示，在展示后则可以得到展示结果的报告。对待测展示内容数据进行内容展示所得到的是待测内容展示结果，而对线上展示内容数据进行展示，所得到的是线上内容展示结果。待测内容展示结果以及线上内容展示结果具体可以包括展示过程的各种参数字段的具体属性值。而分别对待测展示内容数据以及线上展示内容数据进行内容展示，可以是基于不同的数据处理线程同步处理来实现，也可以是异步处理。

具体地，为了获取展示结果，在获得待测展示内容数据以及线上展示内容数据后，可以通过内容展示的方式对待测展示内容数据以及线上展示内容数据进行处理。将其在展示环境标识所指示的后台环境，以及展示位置标识所指示的位置中，将待测展示内容数据以及线上展示内容数据进行实际的内容展示，在内容展示完成后，还可以同步生成展示结果的报告，即可以得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果。

步骤207，基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果。

步骤209，根据规则校验结果以及对比校验结果，得到针对展示结果的测试结果。

其中，预设校验规则具体是指预先构建的，用于判断待测内容展示结果是否达到预期效果的一组规则，预设校验规则具体可以是对线上内容展示结果中的各个字段的数值进行校验，确定这些参数数值是否在预先设置的范围内，从而得到规则校验的结果，同时还可以包含对参数数值之间的关系进行限定的规则。预设校验规则具体可以根据实际的展示需求由用户指定，还可以基于机器学习技术，通过学习已有的线上展示内容来构建。而对于对比校验，则是通过对比线上内容展示结果对待测内容展示结果中，相同字段数值的对比结果来获取对比校验结果。展示结果测试结果则是根据规则校验结果以及对比校验结果所确定的一个最终结果。

具体地，在进行展示结果测试时，为了得到对展示结果的测试结果，可以考虑基于预设校验规则对待测内容展示结果其自身进行校验，得到规则校验结果，来作为校验的一种方式。此外，为了保证结果校验的准确性，除了规则校验外，还可以通过对比校验来获取对比文件结果，此时可以将线上内容展示结果与待测内容展示结果进行对比，得到相应的对比校验结果。在一个实施例中，只有在规则校验结果表征规则校验通过，且对比校验结果表征对比校验通过的情况下，最终的展示结果测试结果才会是测试通过，其中任意一个校验结果表征未通过时，最终的展示结果测试结果为测试不通过。在一个实施例中，规则校验结果表征规则校验通过是指，待测内容展示结果中所有的参数字段的字段值都符合预设校验规则的要求，而对比校验结果表征对比校验通过，则是指线上内容展示结果与待测内容展示结果两者的对比结果中，预设对比字段的字段值都相等，而其余字段都为空或者都不为空。

上述展示结果测试方法，可以在获取展示环境标识、展示位置标识以及展示内容标识后；先根据所获取展示内容标识，查找待测展示内容数据以及与待测展示内容数据的相似度满足相似条件的线上展示内容数据；而后基于展示环境标识以及展示位置标识，分别对待测展示内容数据以及线上展示内容数据进行内容展示，从而得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果；并基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果；最终根据规则校验结果以及对比校验结果，通过规则校验以及对比校验来对展示结果测试请求所请求的展示结果进行测试，得到针对展示结果的测试结果，可以有效地在已有的内容展示结果的基础上进行展示效果校验，从而有效提高展示结果测试的测试准确率。

在一个实施例中，步骤207之前，还包括：获取已发布的展示内容数据，以及已发布的展示内容数据所对应的展示位置、展示环境以及展示结果；基于已发布的展示内容数据，以及已发布的展示内容数据所对应的展示位置、展示环境以及展示结果生成预设校验规则。

其中，已发布的展示内容数据具体是指已经在网络上公开的展示内容，其展示效果可以得到了市场的验证，因此可以基于这些已上线的大量展示内容数据，来总结出用于对待测内容展示结果进行规则校验的校验规则，而在获取已发布的展示内容数据时，还需要结合展示内容数据所对应的展示位置和展示环境来综合分析，因此，还需要获取其对应的展示环境和展示位置。

具体地，本申请的方案中，可以通过校验规则来对展示结果进行校验，从而得到针对展示结果的测试结果。而预设校验规则具体可以通过总结已发布的展示内容数据来构建生成。在获取预设校验规则时，服务器104可以从预设内容数据库中，查找出哪些展示内容数据为已发布的内容数据，并获得这些已发布的展示内容数据所对应的展示位置和展示环境，来构建出一组用于生成预设校验规则的数据。通过综合海量的展示内容数据，可以逐渐生成并完善预设校验规则，从而保证校验结果的准确性。本实施例中，基于已发布的展示内容数据来生成预设校验规则，从而可以有效保证预设校验规则的可用性。

在其中一个实施例中，基于已发布的展示内容数据生成预设校验规则包括：通过预设关联规则挖掘模型对已发布的展示内容数据进行处理，得到展示内容数据在展示环境以及展示位置下，得到的展示结果所对应的频繁项集，频繁项集由展示结果中同时出现且满足预设最小支持度的字段数据组成；根据展示结果所对应的频繁项集构建预设校验规则。

其中，预设关联规则挖掘模型用于找出数据库中项集的关系，以形成规则。项集，即项的集合。如果某项集满足最小支持度(项集中数据同时出现的概率)，则称它为频繁项集,对于本申请，项是指展示结果中的各个字段的字段值，项集即为展示结果中的各个字段的字段值所构成的集合，而预设最小支持度则可以根据实际的展示需要进行来训练获取。在其中一个实施例中，预设关联规则挖掘模型具体可以为基于Apriori算法所构建的关联规则挖掘模型，其可以利用逐层搜索的迭代方法找出数据中项集的关系。

具体地，本申请的方案可以通过机器学习的方法来进行预设校验规则的构建。在得到已发布的展示内容数据后，通过关联规则挖掘来得到其展示结果中的频繁项集，从而生成对展示结果的预设校验规则。通过预设关联规则挖掘模型来实现预设校验规则的构建时，首先需要获取到基础数据，这部分基础数据包括了已发布的展示内容数据，还有该已发布的展示内容数据所对应的展示位置、展示环境以及展示结果。服务器104在得到这些数据后，可以通过特征工程来提取出数据所对应的特征，而后基于预设关联规则挖掘模型来进行预设校验规则的挖掘。在一个具体的实施例中，服务器104可以基于预设关联规则挖掘模型，通过Apriori(先验)算法来进行逐层搜索的迭代，从而确定满足最小支持度的频繁项集，在得到频繁项集后，即可基于频繁项集中的各项数据之间的关联关系，构建出用于对展示结果进行校验的预设校验规则。同时，在预设关联规则挖掘模型的使用过程中，可以不断获取数据，从而不断更新模型与预设校验规则，提高预设关联规则挖掘模型的有效性，同时保证预设校验规则的合理性。本实施例中，通过结合机器学习算法来进行预设校验规则的构建，可以有效确保预设校验规则可以对已发布的展示内容数据进行学习，从而保证校验结果的准确性。

在其中一个实施例中，步骤207之前，还包括：获取待测内容展示结果中各字段对应的规则设置数据；根据规则设置数据构建预设校验规则。

其中，规则设置数据可以由用户根据实际的展示需要向服务器104提供。规则设置数据具体需要设置的内容包括规则内容以及规则编号、规则名称、协议类型、规则内容、内容类型、规则类型、规则状态等中的至少一项。

具体地，除了通过机器学习模型来学习已发布的展示内容数据外，也可以由用户根据实际的展示需要，来人工制定预设校验规则。本申请的方案提供有规则管理的功能，用户通过可以在规则管理功能中进行预设校验规则的新建和管理。而在新建预设校验规则时，用户可以通过填写规则编号、规则名称、协议类型、规则内容、内容类型、规则类型以及规则状态等中的至少一项数据来新建相应的预设校验规则，其中规则内容可用于待测内容展示结果中各字段的取值范围进行限制，还可以用于对待测内容展示结果中字段之间的关系进行限定。而后则可以根据待测内容展示结果中字段的具体值以及预设校验规则的取值范围来进行规则校验。在一个具体实施例中，可以结合预设关联规则挖掘模型与人工规则设置两种预设校验规则的设置方法，两者之间互相补充，从而构造出更加合理有效的预设校验规则。本实施例中，通过接收获取待测内容展示结果中各字段对应的规则设置数据可以人工设置校验规则，从而可以更方便地对展示结果的校验规则进行补充，生成更加合理的预设校验规则。

在其中一个实施例中，线上内容展示结果包括第一线上内容展示结果以及第二线上内容展示结果，步骤207中基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果包括：基于第一线上内容展示结果对待测内容展示结果进行对比校验，得到原始对比校验结果；基于第一线上内容展示结果对第二线上内容展示结果进行对比校验，得到噪声对比校验结果；基于原始对比校验结果与噪声对比校验结果，得到对比校验结果。

具体地，在进行对比校验时，为了避免因噪声形成的误差，可以获取两个与当前待测内容展示结果相类似的线上内容展示结果，即第一线上内容展示结果以及第二线上内容展示结果，其中，第一线上内容展示结果与第二线上内容展示结果可以是展示位置不同，也可以是展示内容不同，也可以是两者都不相同。而在对比校验时，通过将第一线上内容展示结果对待测内容展示结果进行对比，可以得到待测内容展示结果对比第一线上内容展示结果的参数对比结果，从而确定相对于线上的第一线上内容展示结果，待测内容展示结果是否正常。同时，因为引入的第一线上内容展示结果其对应的展示环境为线上环境，为了避免因待测内容展示结果的测试环境与线上环境所造成的误差，可以引入同样属于线上环境的第二线上内容展示结果，通过将第一线上内容展示结果对第二线上内容展示结果进行对比校验，得到相应的一组对比校验结果，最后结合原始对比校验结果与噪声对比校验结果，得到对比校验结果。在结合原始对比校验结果与噪声对比校验结果时，具体可以排除掉原始对比校验结果中的噪声结果，得到最终的对比校验结果。本实施例中，通过对比两个不同的线上内容展示结果，来获取噪声对比校验结果，从而通过噪声对比校验结果来减少原始对比校验结果的误差，从而可以有效提高对比校验的准确性。

在其中一个实施例中，基于第一线上内容展示结果对待测内容展示结果进行对比校验，得到原始对比校验结果包括：获取第一线上内容展示结果中预设对比字段以及待测内容展示结果中预设对比字段的字段值；对比第一线上内容展示结果中预设对比字段以及待测内容展示结果中预设对比字段的字段值，得到原始字段值对比结果；根据原始字段值对比结果，得到原始对比校验结果。

具体地，第一线上内容展示结果与待测内容展示结果都由多个对比字段组成，其中包含有用于实现对比的预设对比字段，可以通过对比这些预设对比字段的字段值，来获取最终的对比校验结果。而在原始字段值对比结果时，预设对比字段的字段值必须严格相等，而其余字段的字段值必须同为空或者同不为空。在其中一个实施例中，展示内容具体为广告，此时参照图3所示，可以通过对比被测环境中的被测新广告与线上环境中的同类型老广告，得出原始的对比结果，所得的原始对比结果具体为{A＝1，A’＝2，B＝3，B’＝4}，而通过对比线上环境中的两个同类型老广告，可以得到噪声对比结果，噪声对比结果具体为{B＝4，B’＝5}，因此，在基于原始对比结果与噪声对比结果时，可以将原始对比结果中的对比字段B去掉，最终的对比校验结果为{B＝3，B’＝4}。本实施例中，通过对比预设对比字段的字段值来获取原始对比校验结果，可以有效对待测内容展示结果进行对比校验，保证对比校验的准确性。

在其中一个实施例中，步骤203包括：根据展示内容标识，查找待测展示内容数据；提取待测展示内容数据的关键字段值；基于关键字段值，查找与待测展示内容数据相似度满足相似条件的线上展示内容数据。

其中，关键字段值用于表征待测展示数据的各种特征，如当待测展示数据为广告数据时，其对应的关键字段值可以从广告相关的表中提取得到，如广告表中包含的字段值有：广告内容，广告编号，广告素材编号，广告定向编号，广告索引编号，广告扣费类型等中的至少一项；对于素材表，则包含素材编号，广告编号，图片，标题等；还有广告回包内容表，包括：广告编号，广告主编号，素材URL(uniform resource locator，统一资源定位系统)，广告主标识，广告标题，曝光URL，点击URL，尺寸，类型等。

具体地，在查找与待测展示内容相似的线上展示内容数据时，用户可以指定待测展示内容数据中的关键字段值，而后服务器104根据用户所指定的关键字段值在预设内容数据库中进行查找，如对于广告，可以选取广告素材、曝光URL，点击URL，尺寸，类型等作为关键字段值，来在预设内容数据库中进行查找，即可得到这些关键字段值与当前待测展示内容数据相类似的线上展示内容数据，而后即可基于线上展示内容数据来对展示结果进行对比测试。本实施例中，通过对比关键字段值数据来查找线上展示内容数据，可以高效地从预设内容数据库中提取出相似度满足相似条件的线上展示内容数据，保证线上展示内容数据的有效性，进而保证对比校验的准确性。

本申请还提供一种应用场景，该应用场景应用上述的展示结果测试方法。

具体地，该展示结果测试方法在该应用场景的应用如下：

在网络广告上线具体的网页时，为了确保广告播放的效果，可以在广告播放之前，对广告进行测试，此时，可以通过基于本申请的展示结果测试方法所构建的广告串测平台来进行测试。其结构图可以参照图4所示，而整体的工作时序流程图可以参照图5所示，首先，用户在使用广告串测平台，其具体可以通过终端来录入对广告进行校验的校验规则，广告串测平台所提供的规则管理界面具体可以参照图6所示，用户可以在对应的栏位中填入数据来构建校验规则，平台的规则生成模块将其录入到规则库中。除此之外，还可以通过机器学习的方法来生成校验规则，平台的规则生成模块分别从数据仓库以及数据查询接口中获取用于模型训练的线上广告数据，包括广告内容以及广告播放结果，而后生成校验规则，再把校验规则写入到数据库中。而在规则构建完成后，用户可以通过终端来实现对广告播放结果的测试。如图7所示，用户可以向终端输入广告位置、广告编号和被测展示平台的标识。而后数据中转模块会向数据库插入一条广告测试的任务记录，而后根据广告编号，基于数据查询接口获取待测广告对应的广告内容数据(广告相关的表)，而后基于广告内容数据中的关键字段，在网络中匹配到两个已经上线的相似广告。而后基于广告位置在展示平台中发起强拉，得到针对待测广告的展示结果1，针对相似广告的展示结果2以及展示结果3，而后基于展示结果1来在规则库中提取相应服务类型校验规则，从而进行规则校验，同时，对展示结果1、展示结果2、展示结果3做对比校验得到对比校验结果，最后基于对比校验的校验结果与规则校验的校验结果来得到最终的校验结果。如此循环多次，便可获取针对多个广告的测试结果，而在结果查验时，用户可以通过终端向服务器请求测试任务的相关数据，而后拉取任务列表，并获取这些任务的执行结果，得到生成针对广告播放测试的测试结果报告。

应该理解的是，虽然如上的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。

基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的展示结果测试方法的展示结果测试装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个展示结果测试装置实施例中的具体限定可以参见上文中对于展示结果测试方法的限定，在此不再赘述。

在一个实施例中，如图8所示，提供了一种展示结果测试装置，包括

数据获取模块801，用于获取展示环境标识、展示位置标识以及展示内容标识。

数据查找模块803，用于根据展示内容标识，查找待测展示内容数据以及与待测展示内容数据的相似度满足相似条件的线上展示内容数据。

内容展示模块805，用于基于展示环境标识以及展示位置标识，分别对待测展示内容数据以及线上展示内容数据进行内容展示，得到待测展示内容数据对应的待测内容展示结果，以及线上展示内容数据对应的线上内容展示结果。

内容校验模块807，用于基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对待测内容展示结果进行对比校验，得到对比校验结果。

测试结果识别模块809，用于根据规则校验结果以及对比校验结果，得到针对展示结果的测试结果。

在一个实施例中，还包括规则构建模块，用于：获取已发布的展示内容数据，以及已发布的展示内容数据所对应的展示位置、展示环境以及展示结果；基于已发布的展示内容数据，以及已发布的展示内容数据所对应的展示位置、展示环境以及展示结果生成预设校验规则。

在一个实施例中，规则构建模块还用于：基于预设关联规则挖掘模型对已发布的展示内容数据进行关联规则挖掘处理，得到展示内容数据在展示环境以及展示位置下，得到的展示结果所对应的频繁项集，所述频繁项集由展示结果中同时出现且满足预设最小支持度的字段数据组成；根据展示结果所对应的频繁项集构建预设校验规则。

在一个实施例中，规则构建模块还用于：获取待测内容展示结果中各字段对应的规则设置数据；根据规则设置数据构建预设校验规则。

在一个实施例中，内容校验模块807具体用于：基于第一线上内容展示结果对待测内容展示结果进行对比校验，得到原始对比校验结果；基于第一线上内容展示结果对第二线上内容展示结果进行对比校验，得到噪声对比校验结果；基于原始对比校验结果与噪声对比校验结果，得到对比校验结果。

在一个实施例中，内容校验模块807具体用于：获取第一线上内容展示结果中预设对比字段以及待测内容展示结果中预设对比字段的字段值；对比第一线上内容展示结果中预设对比字段以及待测内容展示结果中预设对比字段的字段值，得到原始字段值对比结果；根据原始字段值对比结果，得到原始对比校验结果。

在一个实施例中，数据查找模块803具体用于：根据展示内容标识，查找待测展示内容数据；提取待测展示内容数据的关键字段值；基于关键字段值，查找与待测展示内容数据相似度满足相似条件的线上展示内容数据。。

上述展示结果测试装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图9所示。该计算机设备包括处理器、存储器、输入/输出接口(Input/Output，简称I/O)和通信接口。其中，处理器、存储器和输入/输出接口通过系统总线连接，通信接口通过输入/输出接口连接到系统总线。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储展示结果测试相关的数据。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种展示结果测试方法。

本领域技术人员可以理解，图9中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，还提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。

在一个实施例中，提供了一种计算机可读存储介质，存储有计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。

在一个实施例中，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各方法实施例中的步骤。

需要说明的是，本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。

Claims (17)

1.一种展示结果测试方法，其特征在于，应用于服务器，所述方法包括：

获取终端提供的展示环境标识、展示位置标识以及展示内容标识，所述展示环境为获取展示结果的测试环境服务器；

根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据，所述线上展示内容数据为与所述待测展示内容数据相似且已经在线上公开的展示内容数据；

基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果，所述对比校验结果为对比所述线上内容展示结果与所述待测内容展示结果中，预设对比字段的字段值之间的参数对比结果，所述预设校验规则基于机器学习技术，通过学习已有的线上展示内容构建；所述待测内容展示结果基于所述展示环境标识以及所述展示位置标识，于测试环境服务器对所述待测展示内容数据进行内容展示得到，所述线上内容展示结果基于所述展示环境标识以及所述展示位置标识，于测试环境服务器对所述线上展示内容数据进行内容展示得到；

根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

2.根据权利要求1所述的方法，其特征在于，所述基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果之前，还包括：

获取已发布的展示内容数据，以及所述已发布的展示内容数据所对应的展示位置、展示环境以及展示结果；

基于所述已发布的展示内容数据，以及所述已发布的展示内容数据所对应的展示位置、展示环境以及展示结果生成预设校验规则。

3.根据权利要求2所述的方法，其特征在于，所述基于所述已发布的展示内容数据，以及所述已发布的展示内容数据所对应的展示位置、展示环境以及展示结果生成预设校验规则包括：

基于预设关联规则挖掘模型对所述已发布的展示内容数据进行关联规则挖掘处理，得到所述展示内容数据在所述展示环境以及所述展示位置下，得到的所述展示结果所对应的频繁项集，所述频繁项集由展示结果中同时出现且满足预设最小支持度的字段数据组成；

根据所述展示结果所对应的频繁项集构建预设校验规则。

4.根据权利要求1所述的方法，其特征在于，所述基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果之前，还包括：

获取待测内容展示结果中各字段对应的规则设置数据；

根据所述规则设置数据构建预设校验规则。

5.根据权利要求1所述的方法，其特征在于，所述线上内容展示结果包括第一线上内容展示结果以及第二线上内容展示结果，所述第一线上内容展示结果和所述第二线上内容展示结果是，为了避免因噪声形成的误差，与当前待测内容展示结果相类似的线上内容展示结果；

所述基于线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果包括：

基于所述第一线上内容展示结果对所述待测内容展示结果进行对比校验，得到原始对比校验结果；

基于所述第一线上内容展示结果对所述第二线上内容展示结果进行对比校验，得到噪声对比校验结果；

基于所述原始对比校验结果与所述噪声对比校验结果，得到对比校验结果。

6.根据权利要求5所述的方法，其特征在于，所述基于所述第一线上内容展示结果对所述待测内容展示结果进行对比校验，得到原始对比校验结果包括：

获取所述第一线上内容展示结果中预设对比字段以及所述待测内容展示结果中预设对比字段的字段值；

对比所述第一线上内容展示结果中预设对比字段以及所述待测内容展示结果中预设对比字段的字段值，得到原始字段值对比结果；

根据所述原始字段值对比结果，得到原始对比校验结果。

7.根据权利要求1所述的方法，其特征在于，所述根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据包括：

根据所述展示内容标识，查找待测展示内容数据；

提取所述待测展示内容数据的关键字段值；

基于所述关键字段值，查找与所述待测展示内容数据相似度满足相似条件的线上展示内容数据。

8.一种展示结果测试装置，其特征在于，设置于服务器，所述装置包括：

数据获取模块，用于获取终端提供的展示环境标识、展示位置标识以及展示内容标识，所述展示环境为获取展示结果的测试环境服务器；

数据查找模块，用于根据所述展示内容标识，查找待测展示内容数据以及与所述待测展示内容数据的相似度满足相似条件的线上展示内容数据，所述线上展示内容数据为与所述待测展示内容数据相似且已经在线上公开的展示内容数据；

内容校验模块，用于基于预设校验规则对待测内容展示结果进行规则校验，得到规则校验结果，基于线上内容展示结果对所述待测内容展示结果进行对比校验，得到对比校验结果，所述对比校验结果为对比所述线上内容展示结果与所述待测内容展示结果中，预设对比字段的字段值之间的参数对比结果，所述预设校验规则基于机器学习技术，通过学习已有的线上展示内容构建；所述待测内容展示结果基于所述展示环境标识以及所述展示位置标识，于测试环境服务器对所述待测展示内容数据进行内容展示得到，所述线上内容展示结果基于所述展示环境标识以及所述展示位置标识，于测试环境服务器对所述线上展示内容数据进行内容展示得到；

测试结果识别模块，用于根据所述规则校验结果以及所述对比校验结果，得到针对展示结果的测试结果。

9.根据权利要求8所述的装置，其特征在于，还包括规则构建模块，用于：获取已发布的展示内容数据，以及所述已发布的展示内容数据所对应的展示位置、展示环境以及展示结果；基于所述已发布的展示内容数据，以及所述已发布的展示内容数据所对应的展示位置、展示环境以及展示结果生成预设校验规则。

10.根据权利要求9所述的装置，其特征在于，所述规则构建模块还用于：基于预设关联规则挖掘模型对所述已发布的展示内容数据进行关联规则挖掘处理，得到所述展示内容数据在所述展示环境以及所述展示位置下，得到的所述展示结果所对应的频繁项集，所述频繁项集由展示结果中同时出现且满足预设最小支持度的字段数据组成；根据所述展示结果所对应的频繁项集构建预设校验规则。

11.根据权利要求8所述的装置，其特征在于，所述规则构建模块还用于：获取待测内容展示结果中各字段对应的规则设置数据；根据所述规则设置数据构建预设校验规则。

12.根据权利要求8所述的装置，其特征在于，所述线上内容展示结果包括第一线上内容展示结果以及第二线上内容展示结果，所述第一线上内容展示结果和所述第二线上内容展示结果是，为了避免因噪声形成的误差，与当前待测内容展示结果相类似的线上内容展示结果；

所述内容校验模块具体用于：基于所述第一线上内容展示结果对所述待测内容展示结果进行对比校验，得到原始对比校验结果；基于所述第一线上内容展示结果对所述第二线上内容展示结果进行对比校验，得到噪声对比校验结果；基于所述原始对比校验结果与所述噪声对比校验结果，得到对比校验结果。

13.根据权利要求12所述的装置，其特征在于，所述内容校验模块具体包括：获取所述第一线上内容展示结果中预设对比字段以及所述待测内容展示结果中预设对比字段的字段值；对比所述第一线上内容展示结果中预设对比字段以及所述待测内容展示结果中预设对比字段的字段值，得到原始字段值对比结果；根据所述原始字段值对比结果，得到原始对比校验结果。

14.根据权利要求8所述的装置，其特征在于，所述数据查找模块具体用于：根据所述展示内容标识，查找待测展示内容数据；提取所述待测展示内容数据的关键字段值；基于所述关键字段值，查找与所述待测展示内容数据相似度满足相似条件的线上展示内容数据。

15.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。

16.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。

17.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。