CN103218298A - 搜索引擎的测试用例筛选、相关性策略测试方法和装置 - Google Patents
搜索引擎的测试用例筛选、相关性策略测试方法和装置 Download PDFInfo
- Publication number
- CN103218298A CN103218298A CN2013101824305A CN201310182430A CN103218298A CN 103218298 A CN103218298 A CN 103218298A CN 2013101824305 A CN2013101824305 A CN 2013101824305A CN 201310182430 A CN201310182430 A CN 201310182430A CN 103218298 A CN103218298 A CN 103218298A
- Authority
- CN
- China
- Prior art keywords
- strategy
- search engine
- test
- test case
- screening
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Testing Of Engines (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提出一种搜索引擎的测试用例筛选方法和装置,其中该方法包括以下步骤:搜索引擎服务器接收多个测试用例和筛选信息;搜索引擎服务器分别执行多个测试用例,并获取执行多个测试用例时所命中的策略的策略标识信息;以及搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行筛选。根据本发明实施例方法,可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。本发明还提出一种搜索引擎的相关性策略测试方法和装置。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种搜索引擎的测试用例筛选方法和装置以及搜索引擎的相关性策略测试方法和装置。
背景技术
随着搜索引擎的不断发展,搜索引擎中相关性策略改进的重心更多的从基础检索后移至在线特征统计与计算,同时搜索引擎的国际化改造更强调在线执行时动态选择策略的机制,使得相关性策略测试复杂度大大增加。
目前搜索引擎的相关性策略测试方法主要有三种:第一种测试方法是利用模块内部调试日志方法,用于策略功能的验证、bug追查分析、自动化用例的输出结果预期;第二种测试方法是利用路径分支覆盖方法,针对所有的代码分支,统计代码的覆盖率情况,根据代码覆盖率变化以判断相关性策略的耦合影响;第三种测试方法是利用新旧结果对比测试方法,取同一份万级数据量的随机请求,对比新旧模块版本的运行结果,通过对比新旧结果的不同以验证升级策略的相关性效果是否符合预期。
目前存在的问题是:第一种测试方法调试日志量庞大,杂乱无序,不易筛选出有用信息,无法得到模块的策略执行路径,不能快速把问题定位在代码策略、分支级别,不灵活,且维护成本大;第二种测试方法针对所有的代码分支,路径数目达到天文数字,虽然可从代码整体上查看覆盖率多少,但分支重要性无法区分;第三种测试方法盲目,依赖于随机请求的策略覆盖率情况,容易遗漏策略耦合影响问题。
发明内容
本发明旨在至少解决上述技术问题之一。
为此,本发明的第一个目的在于提出一种搜索引擎的测试用例筛选方法。该方法可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。
本发明的第二个目的在于提出一种搜索引擎的相关性策略测试方法。
本发明的第三个目的在于提出一种搜索引擎的测试用例筛选装置。
本发明的第四个目的在于提出一种搜索引擎的相关性策略测试装置。
为了实现上述目的,本发明第一方面实施例的搜索引擎的测试用例筛选方法包括以下步骤:搜索引擎服务器接收多个测试用例和筛选信息;所述搜索引擎服务器分别执行所述多个测试用例,并获取执行所述多个测试用例时所命中的策略的策略标识信息;以及所述搜索引擎服务器根据所述筛选信息和所述策略标识信息对所述多个测试用例进行筛选。
根据本发明实施例的搜索引擎的测试用例筛选方法,搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行筛选,可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例输入数据,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。
为了实现上述目的,本发明第二方面实施例的搜索引擎的相关性策略测试方法包括以下步骤:测试服务器获取根据本发明第一方面实施例的搜索引擎的测试用例筛选方法筛选后的多个测试用例和预设策略条件;所述测试服务器针对所述预设策略条件对所述多个测试用例进行筛选,以获得与所述预设策略条件相关的测试用例集合,其中,所述预设策略条件包括至少一个策略;以及所述测试服务器根据所述测试用例集合针对所述至少一个策略进行相关性策略的测试。
根据本发明实施例的搜索引擎的相关性策略测试方法,测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合,并根据测试用例集合针对至少一个策略进行相关性策略的测试,实现了快速将问题定位在策略、分支级别,方便问题的追查分析。
为了实现上述目的,本发明第三方面实施例的搜索引擎的测试用例筛选装置,包括:第一接收模块,用于接收多个测试用例和筛选信息;执行模块,用于分别执行所述多个测试用例;第二获取模块,用于获取执行所述多个测试用例时所命中的策略的策略标识信息;以及筛选模块,用于根据所述筛选信息和所述策略标识信息对所述多个测试用例进行筛选。
根据本发明实施例的搜索引擎的测试用例筛选装置,第一接收模块可接收多个测试用例和筛选信息,第二获取模块通过测试探针获取在执行模块执行多个测试用例时所命中的策略的策略标识信息,筛选模块根据筛选信息和策略标识信息对多个测试用例进行筛选,可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例输入数据,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。
为了实现上述目的,本发明第四方面实施例的搜索引擎的相关性策略测试装置,包括:获取模块,用于获取根据本发明第三方面实施例的搜索引擎的测试用例筛选装置筛选后的多个测试用例和预设策略条件;筛选模块,用于针对所述预设策略条件对所述多个测试用例进行筛选,以获得与所述预设策略条件相关的测试用例集合,其中,所述预设策略条件包括至少一个策略;以及测试模块,用于根据所述测试用例集合针对所述至少一个策略进行相关性策略的测试。
根据本发明实施例的搜索引擎的相关性策略测试装置,测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合,并根据测试用例集合针对至少一个策略进行相关性策略的测试,实现了快速将问题定位在策略、分支级别,方便问题的追查分析。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中,
图1是根据本发明一个实施例的搜索引擎的测试用例筛选方法的流程图;
图2是根据本发明另一个实施例的搜索引擎的测试用例筛选方法的流程图;
图3是根据本发明一个实施例的搜索引擎的相关性策略测试方法的流程图;
图4是根据本发明一个实施例的搜索引擎的测试用例筛选装置的结构框图;
图5是根据本发明另一个实施例的搜索引擎的测试用例筛选装置的结构框图;
图6是根据本发明又一个实施例的搜索引擎的测试用例筛选装置的结构框图;
图7是根据本发明再一个实施例的搜索引擎的测试用例筛选装置的结构框图;
图8是根据本发明一个实施例的搜索引擎的相关性策略测试装置的结构框图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
在本发明的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
下面参考附图描述根据本发明实施例的搜索引擎的测试用例筛选方法和装置、搜索引擎的相关性策略测试方法和装置。
目前搜索引擎的相关性策略测试方法主要有三种:第一种测试方法是利用模块内部调试日志方法,该方法调试日志量庞大,杂乱无序,不易筛选出有用信息,无法得到模块的策略执行路径,不能快速把问题定位在代码策略、分支级别,不灵活,且维护成本大;第二种测试方法是利用路径分支覆盖方法,该方法针对所有的代码分支,路径数目达到天文数字,虽然可从代码整体上查看覆盖率多少,但分支重要性无法区分;第三种测试方法是利用新旧结果对比测试方法,该方法盲目,依赖于随机请求的策略覆盖率情况,容易遗漏策略耦合影响问题。
为此,本发明提出一种搜索引擎的测试用例筛选方法,包括以下步骤:搜索引擎服务器接收多个测试用例和筛选信息;搜索引擎服务器分别执行多个测试用例,并获取执行多个测试用例时所命中的策略的策略标识信息;以及搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行筛选。
图1是根据本发明一个实施例的搜索引擎的测试用例筛选方法的流程图。
如图1所示,搜索引擎的测试用例筛选方法包括以下步骤。
S101,搜索引擎服务器接收多个测试用例和筛选信息。
其中,测试用例可包括查询命令Query请求等,筛选信息可包括标识码、命令码和条件数据等中的一种或多种。
在本发明的一个实施例中,标识码可包括策略标识、分支标识和条件标识等中的一种或多种。具体地,策略标识(Sid),标识相关性策略的最终生效位置,query处理流程经过了策略标识,就表明该相关性策略已经生效;分支标识(Bid),一个相关性策略一般包含多个重要的大分支,分支从属于策略,分支标识是为了补充策略标识粗粒度的缺点,用更细的分支粒度来标识策略的正确执行;条件标识(Cid),满足一定筛选条件的标识,例如:筛选前3条搜索结果同时命中了指定的多种策略,前3就是条件数据,对其的标识为条件标识。
在本发明的一个实施例中,命令码可包括筛选、无条件保存、停止筛选、停止保存和查询等中的一种或多种。具体地,筛选:有筛选条件的筛选,输入包括标识码、命令码、条件标识,可支持输入多个标识码;无条件保存:无条件的保存,不筛选,直接输出采集的数据;停止筛选或保存:停止筛选或保存的命令;查询:查看筛选工作状态信息的命令。
S102,搜索引擎服务器分别执行多个测试用例,并获取执行多个测试用例时所命中的策略的策略标识信息。
在本发明的一个实施例中,在搜索引擎服务器中植入测试探针,其中,测试探针用于在搜索引擎服务器分别执行多个测试用例时,获取所命中的策略的策略标识信息。
S103,搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行筛选。
具体地,搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行判断,并根据判断结果对对应的多个测试用例进行筛选。
根据本发明实施例的搜索引擎的测试用例筛选方法,搜索引擎服务器根据筛选信息和策略标识信息对多个测试用例进行筛选,可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例输入数据,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。
图2是根据本发明另一个实施例的搜索引擎的测试用例筛选方法的流程图。
为了提高搜索引擎的测试用例筛选方法的准确度,搜索引擎服务器可判断策略标识信息中的标识码和筛选信息中的标识码是否一致,如果不一致,则搜索引擎服务器将对应的多个测试用例进行滤除,具体地,如图2所示,搜索引擎的测试用例筛选方法包括以下步骤。
S201,搜索引擎服务器接收多个测试用例和筛选信息。
其中,测试用例可包括查询命令Query请求等,筛选信息可包括标识码、命令码和条件数据等中的一种或多种。
在本发明的一个实施例中,标识码可包括策略标识、分支标识和条件标识等中的一种或多种。具体地,策略标识(Sid),标识相关性策略的最终生效位置,query处理流程经过了策略标识,就表明该相关性策略已经生效;分支标识(Bid),一个相关性策略一般包含多个重要的大分支,分支从属于策略,分支标识是为了补充策略标识粗粒度的缺点,用更细的分支粒度来标识策略的正确执行;条件标识(Cid),满足一定筛选条件的标识,例如:筛选前3条搜索结果同时命中了指定的多种策略,前3就是条件数据,对其的标识为条件标识。
在本发明的一个实施例中,命令码可包括筛选、无条件保存、停止筛选、停止保存和查询等中的一种或多种。具体地,筛选:有筛选条件的筛选,输入包括标识码、命令码、条件标识,可支持输入多个标识码;无条件保存:无条件的保存,不筛选,直接输出采集的数据;停止筛选或保存:停止筛选或保存的命令;查询:查看筛选工作状态信息的命令。
S202,搜索引擎服务器分别执行多个测试用例,并获取执行多个测试用例时所命中的策略的策略标识信息。
在本发明的一个实施例中,在搜索引擎服务器中植入测试探针,其中,测试探针用于在搜索引擎服务器分别执行多个测试用例时,获取所命中的策略的策略标识信息。举例来说,植入测试探针过程可如下代码所示:
测试探针在搜索引擎服务器分别执行多个测试用例时,获取执行多个测试用例时所命中的策略的策略标识信息,例如,对于搜索词baidu,搜索引擎服务器在搜索baidu时,测试探针获取执行搜索词baidu时所命中的策略的策略标识信息,并将其保存为策略路径文件,一个策略路径文件的格式如下:
其中,test_Sid_1、test_Sid_2表示策略标识,test_Bid_1、test_Bid_2、test_Bid_3表示分支标识,test_Cid_1表示条件标识名称,其分号之后对应的编码表示对应的标识码,例如,0x2000表示策略标识的标识码。
S203,搜索引擎服务器判断策略标识信息中的标识码和筛选信息中的标识码是否一致。
例如,搜索引擎服务器判断获取的策略文件中的标识码和筛选信息中的标识码是否一致。
S204,如果不一致,则搜索引擎服务器将对应的多个测试用例进行滤除。
S205,如果一致,则搜索引擎服务器输出对应的策略标识信息。
例如,输出对应的策略路径文件。
根据本发明实施例的搜索引擎的测试用例筛选方法,搜索引擎服务器可判断获取到的策略标识信息中的标识码和筛选信息中的标识码是否一致,如果不一致,则搜索引擎服务器将对应的多个测试用例进行滤除,提高了搜索引擎的测试用例筛选方法的准确度,可快速筛选所命中的策略或策略分支,进一步节省了数据准备的时间,降低了维护成本。
在本发明的一个实施例中,搜索引擎服务器可提供接口模块,接口模块可接收多个测试用例和筛选信息。提供接口模块至少包括以下优点:(1)接口模块可灵活控制流量及筛选过程,获取筛选工作状态,筛选操作过程简单;(2)完善的筛选信息输入,包括策略标识、分支标识、条件标识,可以满足绝大部分流量筛选需求;(3)由于筛选信息数据量小,影响输入/输出IO小,测试探针对模块性能几乎无影响,理论上支持进行在线流量筛选,可以适具体应用场景选择在线筛选。
为了使得测试用例筛选过程更加简单化,搜索引擎服务器可通过接口模块返回筛选的状态信息。在本发明的一个实施例中,如果命令码为查询时,搜索引擎服务器通过接口模块返回筛选的状态信息。其中,状态信息可包括筛选数、拒绝数、无结果数、流量总数、筛选是否成功等。由此,如果命令码为查询时,搜索引擎服务器可通过接口模块返回筛选的状态信息,简化了测试用例筛选过程,提高了搜索引擎的测试用例筛选方法的准确度。
另外,本发明还提出一种搜索引擎的相关性策略测试方法。
一种搜索引擎的相关性策略测试方法,包括以下步骤:测试服务器获取根据本发明上述实施例所述的搜索引擎的测试用例筛选方法筛选后的多个测试用例和预设策略条件,其中,预设策略条件包括至少一个策略;测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合;以及测试服务器根据测试用例集合针对至少一个策略进行相关性策略的测试。
图3是根据本发明一个实施例的搜索引擎的相关性策略测试方法的流程图。
如图3所示,搜索引擎的相关性策略测试方法包括以下步骤。
S301,测试服务器获取根据本发明上述实施例所述的搜索引擎的测试用例筛选方法筛选后的多个测试用例和预设策略条件,其中,预设策略条件可包括至少一个策略。
在本发明的一个实施例中,测试用例可包括Query请求等。
S302,测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合。
在本发明的一个实施例中,测试用例包括命中的至少一个策略。具体地,根据预设策略条件可以对每个测试用例的至少一个策略进行匹配,并获取匹配成功的测试用例,以及根据多个匹配成功的测试用例构成测试用例集合。
在本发明的一个实施例中,在搜索引擎服务器中植入测试探针并执行测试用例,其中,测试探针在搜索引擎服务器执行测试用例时,获取测试用例所命中的至少一个策略。其中,具体的执行过程如上述实施例所述。
S303,测试服务器根据测试用例集合针对至少一个策略进行相关性策略的测试。
根据本发明实施例的搜索引擎的相关性策略测试方法,测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合,并根据测试用例集合针对至少一个策略进行相关性策略的测试,实现了快速将问题定位在策略、分支级别,方便问题的追查分析。
为了实现上述实施例,本发明还提出一种搜索引擎的测试用例筛选装置。
一种搜索引擎的测试用例筛选装置,包括:第一接收模块,用于接收多个测试用例和筛选信息;执行模块,用于分别执行多个测试用例;第二获取模块,用于获取执行多个测试用例时所命中的策略的策略标识信息;以及筛选模块,用于根据筛选信息和策略标识信息对多个测试用例进行筛选。
图4是根据本发明一个实施例的搜索引擎的测试用例筛选装置的结构框图。
如图4所示,搜索引擎的测试用例筛选装置包括:第一接收模块110、执行模块120、第二获取模块130和筛选模块140。
具体地,第一接收模块110用于接收多个测试用例和筛选信息。
在本发明的一个实施例中,标识码可包括策略标识、分支标识和条件标识等中的一种或多种。具体地,策略标识(Sid),标识相关性策略的最终生效位置,query处理流程经过了策略标识,就表明该相关性策略已经生效;分支标识(Bid),一个相关性策略一般包含多个重要的大分支,分支从属于策略,分支标识是为了补充策略标识粗粒度的缺点,用更细的分支粒度来标识策略的正确执行;条件标识(Cid),满足一定筛选条件的标识,例如:筛选前3条搜索结果同时命中了指定的多种策略,前3就是条件数据,对其的标识为条件标识。
在本发明的一个实施例中,命令码可包括筛选、无条件保存、停止筛选、停止保存和查询等中的一种或多种。具体地,筛选:有筛选条件的筛选,输入包括标识码、命令码、条件标识,可支持输入多个标识码;无条件保存:无条件的保存,不筛选,直接输出采集的数据;停止筛选或保存:停止筛选或保存的命令;查询:查看筛选工作状态信息的命令。
执行模块120用于分别执行多个测试用例。
在本发明的一个实施例中,在搜索引擎服务器中植入测试探针,其中,测试探针用于在搜索引擎服务器分别执行多个测试用例时,获取所命中的策略的策略标识信息。举例来说,植入测试探针过程可如下代码所示:
第二获取模块130用于获取执行多个测试用例时所命中的策略的策略标识信息。更具体地,测试探针在执行模块120分别执行多个测试用例时,第二获取模块130获取执行多个测试用例时所命中的策略的策略标识信息,例如,对于搜索词baidu,搜索引擎服务器在搜索baidu时,第二获取模块130获取执行搜索词baidu时所命中的策略的策略标识信息,策略标识信息的格式如下:
其中,test_Sid_1、test_Sid_2表示策略标识,test_Bid_1、test_Bid_2、test_Bid_3表示分支标识,test_Cid_1表示条件标识名称,其分号之后对应的编码表示对应的标识码,例如,0x2000表示策略标识的标识码。
筛选模块140用于根据筛选信息和策略标识信息对多个测试用例进行筛选。更具体地,筛选模块140根据筛选信息和策略标识信息对多个测试用例进行判断,并根据判断结果对对应的多个测试用例进行筛选。
根据本发明实施例的搜索引擎的测试用例筛选装置,第一接收模块可接收多个测试用例和筛选信息,第二获取模块通过测试探针获取在执行模块执行多个测试用例时所命中的策略的策略标识信息,筛选模块根据筛选信息和策略标识信息对多个测试用例进行筛选,可快速筛选所命中的策略或策略分支,节省了数据准备的时间,并且通过筛选获取测试用例输入数据,并且通过筛选获取测试用例与架构改造、策略升级、接口调整无关,降低了维护成本。
图5是根据本发明另一个实施例的搜索引擎的测试用例筛选装置的结构框图。
如图5所示,搜索引擎的测试用例筛选装置包括:第一接收模块110、执行模块120、第二获取模块130、筛选模块140、判断单元141和滤除单元142。其中,筛选模块140包括:判断单元141和滤除单元142。
具体地,判断单元141用于判断策略标识信息中的标识码和筛选信息中的标识码是否一致,例如,搜索引擎服务器判断获取的策略文件中的标识码和筛选信息中的标识码是否一致。
滤除单元142用于判断单元141判断策略标识信息中的标识码和筛选信息中的标识码不一致时,将对应的多个测试用例进行滤除。其中,如果一致,则搜索引擎服务器输出对应的策略标识信息,例如,输出对应的策略路径文件等。
根据本发明实施例的搜索引擎的测试用例筛选装置,判断单元可判断策略标识信息中的标识码和筛选信息中的标识码是否一致,如果不一致,则滤除单元将对应的多个测试用例进行滤除,提高了搜索引擎的测试用例筛选方法的准确度,可快速筛选所命中的策略或策略分支,进一步节省了数据准备的时间,降低了维护成本。
图6是根据本发明又一个实施例的搜索引擎的测试用例筛选装置的结构框图。
如图6所示,在图5所示实施例的基础上搜索引擎的测试用例筛选装置还包括提供模块150。
具体地,提供模块150用于提供接口模块,接口模块可接收多个测试用例和筛选信息。提供模块150提供接口模块至少包括以下优点:(1)接口模块可灵活控制流量及筛选过程,获取筛选工作状态,筛选操作过程简单;(2)完善的筛选信息输入,包括策略标识、分支标识、条件标识,可以满足绝大部分流量筛选需求;(3)由于筛选信息数据量小,影响输入/输出IO小,测试探针对模块性能几乎无影响,理论上支持进行在线流量筛选,可以适具体应用场景选择在线筛选。
图7是根据本发明再一个实施例的搜索引擎的测试用例筛选装置的结构框图。
如图7所示,在图6所示实施例的基础上搜索引擎的测试用例筛选装置还包括返回模块160。
具体地,返回模块160用于如果命令码为查询时返回筛选的状态信息。更具体地,命令码可包括筛选、无条件保存、停止筛选、停止保存和查询中的一种或多种,如果命令码为查询时,返回模块160可通过接口子模块返回筛选的状态信息。其中,状态信息可包括筛选数、拒绝数、无结果数、流量总数、筛选是否成功等。
根据本发明实施例的搜索引擎的测试用例筛选装置,筛选模块根据筛选信息和策略标识信息对多个测试用例进行筛选,由此,如果命令码为查询时,返回模块返回筛选的状态信息,简化了测试用例筛选过程,提高了搜索引擎的测试用例筛选方法的准确度。
为了实现上述实施例,本发明又提出一种搜索引擎的相关性策略测试装置。
一种搜索引擎的相关性策略测试装置,包括:获取模块,用于获取根据本发明上述实施例所述的搜索引擎的测试用例筛选装置筛选后的多个测试用例和预设策略条件,其中,预设策略条件包括至少一个策略;筛选模块,用于针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合;以及测试模块,用于根据测试用例集合针对至少一个策略进行相关性策略的测试。
图8是根据本发明一个实施例的搜索引擎的相关性策略测试装置的结构框图。
如图8所示,搜索引擎的相关性策略测试装置包括:获取模块210、筛选模块220和测试模块230。
具体地,获取模块210用于获取根据本发明上述实施例所述的搜索引擎的测试用例筛选装置筛选后的多个测试用例和预设策略条件,其中,预设策略条件包括至少一个策略。
在本发明的一个实施例中,测试用例可包括Query请求等。
筛选模块220用于针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合。
在本发明的一个实施例中,测试用例包括命中的至少一个策略。具体地,筛选模块220根据预设策略条件可以对每个测试用例的至少一个策略进行匹配,并获取匹配成功的测试用例,以及根据多个匹配成功的测试用例构成测试用例集合。
在本发明的一个实施例中,在搜索引擎服务器中植入测试探针并执行测试用例,其中,测试探针在搜索引擎服务器执行测试用例时,获取测试用例所命中的至少一个策略。其中,具体的执行过程如上述方法对应的实施例所述。
测试模块230用于根据测试用例集合针对至少一个策略进行相关性策略的测试。
根据本发明实施例的搜索引擎的相关性策略测试装置,测试服务器针对预设策略条件对多个测试用例进行筛选,以获得与预设策略条件相关的测试用例集合,并根据测试用例集合针对至少一个策略进行相关性策略的测试,实现了快速将问题定位在策略、分支级别,方便问题的追查分析。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。
Claims (20)
1.一种搜索引擎的测试用例筛选方法,其特征在于,包括以下步骤:
搜索引擎服务器接收多个测试用例和筛选信息;
所述搜索引擎服务器分别执行所述多个测试用例,并获取执行所述多个测试用例时所命中的策略的策略标识信息;以及
所述搜索引擎服务器根据所述筛选信息和所述策略标识信息对所述多个测试用例进行筛选。
2.根据权利要求1所述的方法,其特征在于,在所述搜索引擎服务器中植入测试探针,其中,所述测试探针用于在所述搜索引擎服务器分别执行所述多个测试用例时,获取所命中的策略的策略标识信息。
3.根据权利要求1或2所述的方法,其特征在于,所述筛选信息包括标识码、命令码和条件数据中的一种或多种,其中,所述标识码包括策略标识、分支标识和条件标识中的一种或多种。
4.根据权利要求3所述的方法,其特征在于,所述搜索引擎服务器根据所述筛选信息和所述策略标识信息对所述多个测试用例进行筛选,进一步包括:
所述搜索引擎服务器判断所述策略标识信息中的标识码和所述筛选信息中的所述标识码是否一致;以及
如果不一致,则所述搜索引擎服务器将对应的多个测试用例进行滤除。
5.根据权利要求1-4任一项所述的方法,其特征在于,还包括:
所述搜索引擎服务器提供接口模块,其中,所述接口模块用于接收所述多个测试用例和所述筛选信息。
6.根据权利要求5所述的方法,其特征在于,所述命令码包括筛选、无条件保存、停止筛选、停止保存和查询中的一种或多种。
7.根据权利要求6所述的方法,其特征在于,还包括:
如果所述命令码为所述查询时,所述搜索引擎服务器通过所述接口模块返回筛选的状态信息。
8.一种搜索引擎的相关性策略测试方法,其特征在于,包括以下步骤:
测试服务器获取根据权利要求1-7任一项所述的方法筛选后的多个测试用例和预设策略条件,其中,所述预设策略条件包括至少一个策略;
所述测试服务器针对所述预设策略条件对所述多个测试用例进行筛选,以获得与所述预设策略条件相关的测试用例集合;以及
所述测试服务器根据所述测试用例集合针对所述至少一个策略进行相关性策略的测试。
9.根据权利要求8所述的方法,其特征在于,所述测试用例包括命中的至少一个策略。
10.根据权利要求8或9所述的方法,其特征在于,在搜索引擎服务器中植入测试探针并执行所述测试用例,其中,所述测试探针在所述搜索引擎服务器执行所述测试用例时,获取所述测试用例所命中的至少一个策略。
11.一种搜索引擎的测试用例筛选装置,其特征在于,包括:
第一接收模块,用于接收多个测试用例和筛选信息;
执行模块,用于分别执行所述多个测试用例;
第二获取模块,用于获取执行所述多个测试用例时所命中的策略的策略标识信息;以及
筛选模块,用于根据所述筛选信息和所述策略标识信息对所述多个测试用例进行筛选。
12.根据权利要求11所述的装置,其特征在于,在搜索引擎服务器中植入测试探针,其中,所述测试探针用于在所述搜索引擎服务器分别执行所述多个测试用例时,获取所命中的策略的策略标识信息。
13.根据权利要求11或12所述的装置,其特征在于,所述筛选信息包括标识码、命令码和条件数据中的一种或多种,其中,所述标识码包括策略标识、分支标识和条件标识中的一种或多种。
14.根据权利要求13所述的装置,其特征在于,所述筛选模块包括:
判断单元,用于判断所述策略标识信息中的标识码和所述筛选信息中的所述标识码是否一致;以及
滤除单元,用于所述判断单元判断所述策略标识信息中的标识码和所述筛选信息中的所述标识码不一致时,将对应的多个测试用例进行滤除。
15.根据权利要求11-14任一项所述的装置,其特征在于,还包括:
提供模块,用于提供接口模块,其中,所述接口模块用于接收所述多个测试用例和所述筛选信息。
16.根据权利要求15所述的装置,其特征在于,所述命令码包括筛选、无条件保存、停止筛选、停止保存和查询中的一种或多种。
17.根据权利要求16所述的装置,其特征在于,还包括:
返回模块,用于如果所述命令码为所述查询时返回筛选的状态信息。
18.一种搜索引擎的相关性策略测试装置,其特征在于,包括:
获取模块,用于获取根据权利要求11-17任一项所述的装置筛选后的多个测试用例和预设策略条件,其中,所述预设策略条件包括至少一个策略;
筛选模块,用于针对所述预设策略条件对所述多个测试用例进行筛选,以获得与所述预设策略条件相关的测试用例集合;以及
测试模块,用于根据所述测试用例集合针对所述至少一个策略进行相关性策略的测试。
19.根据权利要求18所述的装置,其特征在于,所述测试用例包括命中的至少一个策略。
20.根据权利要求18或19所述的装置,其特征在于,在搜索引擎服务器中植入测试探针并执行所述测试用例,其中,所述测试探针在所述搜索引擎服务器执行所述测试用例时,获取所述测试用例所命中的至少一个策略。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310182430.5A CN103218298B (zh) | 2013-05-16 | 2013-05-16 | 搜索引擎的测试用例筛选、相关性策略测试方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310182430.5A CN103218298B (zh) | 2013-05-16 | 2013-05-16 | 搜索引擎的测试用例筛选、相关性策略测试方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103218298A true CN103218298A (zh) | 2013-07-24 |
CN103218298B CN103218298B (zh) | 2016-12-28 |
Family
ID=48816116
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310182430.5A Active CN103218298B (zh) | 2013-05-16 | 2013-05-16 | 搜索引擎的测试用例筛选、相关性策略测试方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103218298B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108776641A (zh) * | 2018-05-28 | 2018-11-09 | 北京五八信息技术有限公司 | 应用程序的热词测试方法、装置及电子设备 |
CN111078560A (zh) * | 2019-12-18 | 2020-04-28 | 北京嘀嘀无限科技发展有限公司 | 基于流量剪枝的测试方法、装置、电子设备及存储介质 |
CN112559321A (zh) * | 2020-11-18 | 2021-03-26 | 贝壳技术有限公司 | 准入测试用例确定方法、系统、电子设备和存储介质 |
CN114422501A (zh) * | 2021-12-30 | 2022-04-29 | 北京杰思安全科技有限公司 | 基于静态文件的策略下发方法、服务平台及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1885273A (zh) * | 2005-06-21 | 2006-12-27 | 华为技术有限公司 | 一种逻辑测试的功能覆盖率分析方法 |
US20070226691A1 (en) * | 2006-02-23 | 2007-09-27 | Microsoft Corporation | Associating attribute tags with test cases |
CN101355457A (zh) * | 2008-06-19 | 2009-01-28 | 腾讯科技(北京)有限公司 | 测试方法及测试设备 |
CN101887438A (zh) * | 2009-05-11 | 2010-11-17 | 富士通株式会社 | 确定网页的搜索引擎优化规则的方法和设备 |
-
2013
- 2013-05-16 CN CN201310182430.5A patent/CN103218298B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1885273A (zh) * | 2005-06-21 | 2006-12-27 | 华为技术有限公司 | 一种逻辑测试的功能覆盖率分析方法 |
US20070226691A1 (en) * | 2006-02-23 | 2007-09-27 | Microsoft Corporation | Associating attribute tags with test cases |
CN101355457A (zh) * | 2008-06-19 | 2009-01-28 | 腾讯科技(北京)有限公司 | 测试方法及测试设备 |
CN101887438A (zh) * | 2009-05-11 | 2010-11-17 | 富士通株式会社 | 确定网页的搜索引擎优化规则的方法和设备 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108776641A (zh) * | 2018-05-28 | 2018-11-09 | 北京五八信息技术有限公司 | 应用程序的热词测试方法、装置及电子设备 |
CN111078560A (zh) * | 2019-12-18 | 2020-04-28 | 北京嘀嘀无限科技发展有限公司 | 基于流量剪枝的测试方法、装置、电子设备及存储介质 |
CN112559321A (zh) * | 2020-11-18 | 2021-03-26 | 贝壳技术有限公司 | 准入测试用例确定方法、系统、电子设备和存储介质 |
CN114422501A (zh) * | 2021-12-30 | 2022-04-29 | 北京杰思安全科技有限公司 | 基于静态文件的策略下发方法、服务平台及存储介质 |
CN114422501B (zh) * | 2021-12-30 | 2024-02-09 | 北京杰思安全科技有限公司 | 基于静态文件的策略下发方法、服务平台及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN103218298B (zh) | 2016-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109032825B (zh) | 一种故障注入方法、装置及设备 | |
CN109614391B (zh) | 数据库诊断系统、数据库诊断方法及非临时性机器可读介质 | |
CN107832230B (zh) | 基于数据调优的测试方法、设备以及系统 | |
CN105426310B (zh) | 一种检测目标进程的性能的方法和装置 | |
US9910766B2 (en) | Whitebox network fuzzing | |
CN104699601A (zh) | 用于执行状态机驱动的注入的方法和系统 | |
CN103034575B (zh) | 崩溃分析方法和装置 | |
CN111897724A (zh) | 一种适用于云平台的自动化测试方法及装置 | |
CN109271359B (zh) | 日志信息处理方法、装置、电子设备及可读存储介质 | |
US10860465B2 (en) | Automatically rerunning test executions | |
CN110188036A (zh) | 一种软件测试方法及装置 | |
CN109492406A (zh) | 监测内核漏洞攻击的方法、装置和系统 | |
CN107003931B (zh) | 将测试验证从测试执行分离 | |
CN103218298A (zh) | 搜索引擎的测试用例筛选、相关性策略测试方法和装置 | |
CN107391362A (zh) | 应用测试方法、移动终端及存储介质 | |
CN109992506B (zh) | 调度测试方法、装置、计算机设备和存储介质 | |
US20170139818A1 (en) | Validation using scenario runners | |
US10079738B1 (en) | Using a network crawler to test objects of a network document | |
CN105589928A (zh) | 用于分布式数据处理系统的模拟测试方法 | |
US20160364310A1 (en) | Managing a set of tests based on other test failures | |
US20140304556A1 (en) | Performing Automated System Tests | |
CN112799940A (zh) | 回归测试方法、装置、计算机系统和计算机可读存储介质 | |
CN112835808A (zh) | 接口测试方法、装置、计算机设备及存储介质 | |
CN110134598B (zh) | 一种批量处理方法、装置及系统 | |
CN107679423A (zh) | 分区完整性检查方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |