CN103023711A - 服务可靠性验证方法及系统 - Google Patents
服务可靠性验证方法及系统 Download PDFInfo
- Publication number
- CN103023711A CN103023711A CN2011102839493A CN201110283949A CN103023711A CN 103023711 A CN103023711 A CN 103023711A CN 2011102839493 A CN2011102839493 A CN 2011102839493A CN 201110283949 A CN201110283949 A CN 201110283949A CN 103023711 A CN103023711 A CN 103023711A
- Authority
- CN
- China
- Prior art keywords
- test
- server
- result
- service
- returned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000012360 testing method Methods 0.000 claims abstract description 199
- 238000012795 verification Methods 0.000 claims abstract description 55
- 238000004891 communication Methods 0.000 claims abstract description 11
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Computer And Data Communications (AREA)
Abstract
一种服务可靠性验证系统，包括配置服务器、测试服务器、分析服务器和测试端，其中，所述配置服务器、测试服务器、分析服务器分别与测试端之间建立通信通道；所述配置服务器用于根据测试服务生成相应的请求串，并将所述请求串发送给所述测试端；所述测试端用于获取用户操作，并根据所述用户操作发送所述请求串到测试服务器，还用于判断是否在预定时间内接收到所述测试服务器返回的测试结果，根据判断结果得到测试信息，并将所述测试信息上报到所述分析服务器；所述分析服务器用于分析所述测试信息。上述服务可靠性验证系统及方法，能较准确的模拟用户使用的真实系统环境及网络环境，使得测试服务可靠性的验证更加全面、客观。
Description
【技术领域】
本发明涉及网络服务验证领域，特别涉及一种服务可靠性验证方法及系统。
【背景技术】
服务是指部署在服务器上对客户端或网页请求进行响应的程序。服务可靠性是指服务对客户端在不同系统环境和网络环境下的请求是否进行响应，响应的速度、响应的正确性以及对并发请求的响应能力的综合性评估。
开发人员在完成服务的开发之后，难以模仿真实的用户环境对服务进行验证。传统的验证方式有两种，一种是根据服务完成的任务，对各个功能点进行验证，但难以模拟用户使用的真实系统环境；另一种是编写程序模拟用户发送大量请求，但难以模拟用户的真实网络环境及采集服务的性能指标，如网络延迟、网络相应速度等。
【发明内容】
基于此，有必要提供一种能较准确的模拟用户使用的真实系统环境及网络环境的服务可靠性验证方法。
一种服务可靠性验证系统，包括配置服务器、测试服务器、分析服务器和测试端，其中，所述配置服务器、测试服务器、分析服务器分别与测试端之间建立通信通道；
所述配置服务器用于根据测试服务生成相应的请求串，并将所述请求串发送给所述测试端；
所述测试端用于获取用户操作，并根据所述用户操作发送所述请求串到测试服务器，还用于判断是否在预定时间内接收到所述测试服务器返回的测试结果，根据判断结果得到测试信息，并将所述测试信息上报到所述分析服务器；
所述分析服务器用于分析所述测试信息。
优选地，所述判断结果为在预定时间内接收到返回的测试结果时，所述测试信息包括返回的测试结果、查询时间及验证系统环境信息。
优选地，所述分析服务器还用于分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力、以及不同验证系统环境对测试服务的影响。
优选地，所述判断结果为在预定时间内未接收到返回的测试结果时，所述测试信息包括超时状况和验证系统环境信息。
优选地，所述测试端上运行的客户端为浏览器时，所述配置服务器还用于将所述请求串内嵌在所述浏览器产生的新的页面中。
此外，还有必要提供一种能较准确的模拟用户使用的真实系统环境及网络环境的服务可靠性验证系统。
一种服务可靠性验证方法，包括以下步骤：
建立配置服务器、测试服务器、分析服务器分别与测试端之间的通信通道；
通过所述配置服务器根据测试服务生成请求串，并将所述请求串发送给所述测试端；
通过所述测试端获取用户操作，并根据所述用户操作发送所述请求串到测试服务器，判断是否在预定时间内接收到所述测试服务器返回的测试结果，根据判断结果得到测试信息，并将所述测试信息上报到所述分析服务器；
通过所述分析服务器分析所述测试信息。
优选地，所述判断结果为在预定时间内接收到返回的测试结果时，所述测试信息包括返回的测试结果、查询时间及验证系统环境信息。
优选地，通过所述分析服务器分析所述测试信息的步骤具体为：通过所述分析服务器分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力、以及不同验证系统环境对测试服务的影响。
优选地，所述判断结果为在预定时间内未接收到返回的测试结果时，所述测试信息包括超时状况和验证系统环境信息。
优选地，在所述测试端上运行的客户端为浏览器时，通过所述配置服务器将所述请求串发送给所述测试端的步骤为：通过所述配置服务器将所述请求串内嵌在所述浏览器产生的新的页面中。
上述服务可靠性验证系统及方法，由测试端根据用户操作发送请求串，判断是否在预定时间内接收测试服务器对请求串响应返回的测试结果，并将测试信息上报到分析服务器，由分析服务器分析测试信息得到测试服务的可靠性，如此能较准确的模拟用户使用的真实系统环境及网络环境，使得测试服务可靠性的验证更加全面、客观。
【附图说明】
图1为一个实施例中服务可靠性验证系统的结构示意图；
图2为一个实施例中服务可靠性验证方法的流程图。
【具体实施方式】
下面结合具体的实施例及附图对服务可靠性验证系统及方法的技术方案进行详细的描述。
如图1所示，在一个实施例中，一种服务可靠性验证系统，包括配置服务器110、测试服务器120、分析服务器130和测试端140。其中，
配置服务器110、测试服务器120、分析服务器130分别与测试端140之间建立通信通道。测试端140上运行的客户端为非浏览器的应用程序时，通过socket与各个服务器建立通信通道；测试端140上运行的客户端为浏览器时，通过CGI(Common Gateway Interface，通用网关接口)与各个服务器建立通信通道。
配置服务器110用于根据测试服务生成相应的请求串，并将该请求串发送给测试端140。配置服务器110根据不同的测试服务生成不同的请求串。该请求串可为二进制请求串、八进制请求串、十六进制请求串等。其中，该二进制请求串是测试服务器120正常识别网络包的二进制编码，如测试服务的功能是拉取用户的即时通讯好友，则相应的二进制请求串是系统根据测试服务生成的测试服务器120拉取某个即时通讯好友的请求指令串。
当测试端140上运行的客户端为浏览器时，配置服务器110将该二进制请求串内嵌在浏览器产生的新的页面中。
测试端140用于获取用户操作，并根据该用户操作发送该请求串到测试服务器120，还用于判断是否在预定时间内接收到测试服务器120返回的测试结果，根据判断结果得到测试信息，并将该测试信息上报到分析服务器130。
用户操作可为点击客户端运行程序或打开某个网页等，具体可由测试服务提供的服务确定。该请求串定义了发送到测试服务器120的请求包和触发发送条件。触发发送条件可由系统确定，如触发时间等。
分析服务器130用于分析该测试信息。分析服务器130对测试信息进行分析，从而得到该测试服务的可靠性。
在优选的实施例中，当判断结果为在预定时间内接收到返回的测试结果，该测试信息包括返回的测试结果、查询时间及验证系统环境信息。其中，该预定时间由验证系统设定，如5秒。查询时间是指请求发起的时间和接收测试服务器120返回测试结果的时间。验证系统环境信息包括验证系统版本、验证系统补丁版本、客户端版本或浏览器版本等。验证系统版本包括配置服务器上的配置软件的版本、测试服务器上的测试软件的版本、分析服务器上的分析软件的版本等。
分析服务器130还用于分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力、以及不同验证系统环境对测试服务的影响。此外，分析服务器130还用于分析在大量请求下，测试服务器120的响应状况。
当判断结果为在预定时间内无返回结果时，测试信息包括超时状况和验证系统环境信息。超时状况是指在预定时间内测试服务器对测试端发送的请求无响应，导致超时。分析服务器130还用于根据超时状况和验证系统环境信息进行分析，得到测试服务的可靠性。
如图2所示，在一个实施例中，一种服务可靠性验证方法，包括以下步骤：
步骤S210，建立配置服务器、测试服务器、分析服务器分别与测试端之间的通信通道。
测试端140上运行的客户端为非浏览器的应用程序时，通过socket与各个服务器建立通信通道；测试端140上运行的客户端为浏览器时，通过CGI(Common Gateway Interface，通用网关接口)与各个服务器建立通信通道。
步骤S220，通过配置服务器根据测试服务生成请求串，并将该请求串通过发送给测试端。
配置服务器110根据不同的测试服务生成不同的请求串。该请求串可为二进制请求串、八进制请求串、十六进制请求串等。其中，该二进制请求串是测试服务器120正常识别网络包的二进制编码，如测试服务的功能是拉取用户的即时通讯好友，则相应的二进制请求串是系统根据测试服务生成的测试服务器120拉取某个即时通讯好友的请求指令串。
当测试端140上运行的客户端为浏览器时，配置服务器110将该请求串发送给测试端140的步骤为：配置服务器110将该请求串内嵌在所述浏览器产生的新的页面中。
步骤S230，通过测试端获取用户操作，并根据该用户操作发送该请求串到测试服务器。
用户操作可为点击客户端运行程序或打开某个网页等，具体可由测试服务提供服务确定。该二进制请求串定义了发送到测试服务器120的请求包和触发发送条件。触发发送条件可由系统确定，如触发时间等。
步骤S240，判断是否在预定时间内接收到所述测试服务器返回的测试结果，若是，执行步骤S250，若否，执行步骤S270。
该预定时间由系统设定，如5秒。
判断是否在预定时间内接收到测试服务器返回的测试结果，根据判断结果得到测试信息，并将测试信息上报到分析服务器130。通过分析服务器130分析测试信息。当判断结果为在预定时间内接收到测试服务器返回的测试结果，则测试信息包括返回的测试结果、查询时间及验证系统环境信息；当判断结果为在预定时间内未接收到测试服务器返回的测试结果，则测试信息包括超时状况和验证系统环境信息。
步骤S250，得到返回的测试结果、查询时间及验证系统环境信息，并将返回的测试结果、查询时间及验证系统环境信息上报到该分析服务器。
查询时间是指请求发起的时间和接收测试服务器120返回结果的时间。验证系统环境信息包括验证系统版本、验证系统补丁版本、客户端版本或浏览器版本等。验证系统环境信息包括验证系统版本、验证系统补丁版本、客户端版本或浏览器版本等。验证系统版本包括配置服务器上的配置软件的版本、测试服务器上的测试软件的版本、分析服务器上的分析软件的版本等。
步骤S260，通过分析服务器对返回的测试结果、查询时间及验证系统环境信息进行分析。
步骤S260具体为：通过分析服务器分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力，以及不同验证系统环境对测试服务的影响。此外，分析服务器130还用于分析在大量请求下，测试服务器120的响应状况。
步骤S270，得到超时状况和验证系统环境信息，并将超时状况及验证系统环境信息上报该分析服务器。
步骤S280，通过分析服务器对超时状况及验证系统环境信息进行分析。
超时状况是指在预定时间内测试服务器对测试端发送的请求无响应，导致超时。
上述服务可靠性验证系统及方法，由测试端根据用户操作发送请求串，判断是否在预定时间内接收测试服务器对请求串响应返回的测试结果，根据判断结果得到测试信息，并将测试信息上报到分析服务器，由分析服务器分析测试信息得到测试服务的可靠性，如此能较准确的模拟用户使用的真实系统环境及网络环境，使得测试服务可靠性的验证更加全面、客观。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种服务可靠性验证系统，其特征在于，包括配置服务器、测试服务器、分析服务器和测试端，其中，所述配置服务器、测试服务器、分析服务器分别与测试端之间建立通信通道；
所述配置服务器用于根据测试服务生成相应的请求串，并将所述请求串发送给所述测试端；
所述测试端用于获取用户操作，并根据所述用户操作发送所述请求串到测试服务器，还用于判断是否在预定时间内接收到所述测试服务器返回的测试结果，根据判断结果得到测试信息，并将所述测试信息上报到所述分析服务器；
所述分析服务器用于分析所述测试信息。
2.根据权利要求1所述的服务可靠性验证系统，其特征在于，所述判断结果为在预定时间内接收到返回的测试结果时，所述测试信息包括返回的测试结果、查询时间及验证系统环境信息。
3.根据权利要求2所述的服务可靠性验证系统，其特征在于，所述分析服务器还用于分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力、以及不同验证系统环境对测试服务的影响。
4.根据权利要求1所述的服务可靠性验证系统，其特征在于，所述判断结果为在预定时间内未接收到返回的测试结果时，所述测试信息包括超时状况和验证系统环境信息。
5.根据权利要求1至4中任一项所述的服务可靠性验证系统，其特征在于，所述测试端上运行的客户端为浏览器时，所述配置服务器还用于将所述请求串内嵌在所述浏览器产生的新的页面中。
6.一种服务可靠性验证方法，包括以下步骤：
建立配置服务器、测试服务器、分析服务器分别与测试端之间的通信通道；
通过所述配置服务器根据测试服务生成请求串，并将所述请求串发送给所述测试端；
通过所述测试端获取用户操作，并根据所述用户操作发送所述请求串到测试服务器，判断是否在预定时间内接收到所述测试服务器返回的测试结果，根据判断结果得到测试信息，并将所述测试信息上报到所述分析服务器；
通过所述分析服务器分析所述测试信息。
7.根据权利要求6所述的服务可靠性验证方法，其特征在于，所述判断结果为在预定时间内接收到返回的测试结果时，所述测试信息包括返回的测试结果、查询时间及验证系统环境信息。
8.根据权利要求7所述的服务可靠性验证方法，其特征在于，通过所述分析服务器分析所述测试信息的步骤具体为：通过所述分析服务器分析返回的测试结果是否与预设的结果一致、根据查询时间分析测试服务器的服务能力、以及不同验证系统环境对测试服务的影响。
9.根据权利要求6所述的服务可靠性验证方法，其特征在于，所述判断结果为在预定时间内未接收到返回的测试结果时，所述测试信息包括超时状况和验证系统环境信息。
10.根据权利要求6至9中任一项所述的服务可靠性验证方法，其特征在于，在所述测试端上运行的客户端为浏览器时，通过所述配置服务器将所述请求串发送给所述测试端的步骤为：通过所述配置服务器将所述请求串内嵌在所述浏览器产生的新的页面中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110283949.3A CN103023711B (zh) | 2011-09-22 | 2011-09-22 | 服务可靠性验证方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110283949.3A CN103023711B (zh) | 2011-09-22 | 2011-09-22 | 服务可靠性验证方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103023711A true CN103023711A (zh) | 2013-04-03 |
| CN103023711B CN103023711B (zh) | 2015-07-01 |
Family
ID=47971864
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110283949.3A Active CN103023711B (zh) | 2011-09-22 | 2011-09-22 | 服务可靠性验证方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103023711B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015089732A1 (zh) * | 2013-12-17 | 2015-06-25 | 华为技术有限公司 | 业务测试方法、设备和系统、网络节点及质量处理节点 |
| WO2017181591A1 (zh) * | 2016-04-20 | 2017-10-26 | 乐视控股（北京）有限公司 | 测试方法及系统 |
| CN115484200A (zh) * | 2022-09-21 | 2022-12-16 | 北京沃东天骏信息技术有限公司 | 一种埋点测试方法、装置、服务器、存储介质和系统 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1755643A (zh) * | 2004-09-27 | 2006-04-05 | 华为技术有限公司 | 一种软件测试的方法 |
| CN101193007A (zh) * | 2006-11-28 | 2008-06-04 | 国际商业机器公司 | 统一资源定位符命令测试方法、场景测试方法和相应设备 |
-
2011
- 2011-09-22 CN CN201110283949.3A patent/CN103023711B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1755643A (zh) * | 2004-09-27 | 2006-04-05 | 华为技术有限公司 | 一种软件测试的方法 |
| CN101193007A (zh) * | 2006-11-28 | 2008-06-04 | 国际商业机器公司 | 统一资源定位符命令测试方法、场景测试方法和相应设备 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015089732A1 (zh) * | 2013-12-17 | 2015-06-25 | 华为技术有限公司 | 业务测试方法、设备和系统、网络节点及质量处理节点 |
| CN105009625A (zh) * | 2013-12-17 | 2015-10-28 | 华为技术有限公司 | 业务测试方法、设备和系统、网络节点及质量处理节点 |
| WO2017181591A1 (zh) * | 2016-04-20 | 2017-10-26 | 乐视控股（北京）有限公司 | 测试方法及系统 |
| CN115484200A (zh) * | 2022-09-21 | 2022-12-16 | 北京沃东天骏信息技术有限公司 | 一种埋点测试方法、装置、服务器、存储介质和系统 |
| CN115484200B (zh) * | 2022-09-21 | 2024-05-17 | 北京沃东天骏信息技术有限公司 | 一种埋点测试方法、装置、服务器、存储介质和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103023711B (zh) | 2015-07-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110414242B (zh) | 用于检测业务逻辑漏洞的方法、装置、设备及介质 | |
| CN108650149B (zh) | 服务器的测试方法、装置、设备及计算机可读存储介质 | |
| US10642985B2 (en) | Method and device for vulnerability scanning | |
| US9075914B2 (en) | Analytics driven development | |
| CN111211934B (zh) | 集群远程通信测试方法以及系统 | |
| CN103428042B (zh) | 对服务器进行压力测试的方法及系统 | |
| CN111027070B (zh) | 恶意应用检测方法、介质、设备及装置 | |
| CN109885496B (zh) | 测试日志管理方法及系统 | |
| JP6932494B2 (ja) | 集約されたケーブル試験結果データを適用するためのシステム及び方法、並びにクラウドベースのコンピュータサーバ | |
| CN101013968A (zh) | 自动接口测试框架 | |
| KR100931559B1 (ko) | 변전자동화시스템 리포트 통신 시험 장치 및 그 방법 | |
| CN110209559B (zh) | 一种非侵入式监测方法、控制设备及存储介质 | |
| CN107220169B (zh) | 一种模拟服务器返回定制化数据的方法和设备 | |
| CN103023711B (zh) | 服务可靠性验证方法及系统 | |
| CN105117340B (zh) | 用于iOS浏览器应用质量评估的URL检测方法和装置 | |
| US20170024305A1 (en) | Client application profiling | |
| CN106972983B (zh) | 网络接口的自动化测试装置及方法 | |
| KR101472012B1 (ko) | 소프트웨어 기반의 네트워크 시뮬레이터 | |
| CN108363922B (zh) | 一种自动化恶意代码仿真检测方法及系统 | |
| RU2012146822A (ru) | Способ получения данных при оценке ресурсов сети и устройство для осуществления способа | |
| KR20130126830A (ko) | 실시간 응용 시그니쳐 생성 장치 및 방법 | |
| CN111722943B (zh) | 基于边缘计算的大数据处理方法及中心云服务器 | |
| CN112838938B (zh) | 一种物联网平台的测试系统 | |
| CN113014443B (zh) | 一种cdn资源是否命中缓存的测试方法及其系统 | |
| US20210303427A1 (en) | System for testing a blockchain enabled device-under-test |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |