CN107943626A - 一种交易系统的性能测试方法及相关服务器 - Google Patents
一种交易系统的性能测试方法及相关服务器 Download PDFInfo
- Publication number
- CN107943626A CN107943626A CN201711092093.5A CN201711092093A CN107943626A CN 107943626 A CN107943626 A CN 107943626A CN 201711092093 A CN201711092093 A CN 201711092093A CN 107943626 A CN107943626 A CN 107943626A
- Authority
- CN
- China
- Prior art keywords
- performance test
- application server
- server
- performance
- monitoring report
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2294—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing by remote test
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/26—Functional testing
- G06F11/263—Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明实施例提供一种交易系统的性能测试方法及相关服务器,性能测试服务器发送N条性能测试交易至应用服务器,其中N>0;性能测试服务器接收应用服务器发送的监测报告,根据监测报告判断应用服务器在处理N条性能测试交易的过程中运行状态是否正常。若运行状态正常,则根据监测报告确定是否调整发送至应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向应用服务器发送M条性能测试交易,其中M>0。由于上述性能测试的过程是通过性能测试服务器与应用服务器进行交互实现的,而不需要人工进行性能测试,节约了人力成本和时间成本,同时提高了性能测试的准确性。
Description
技术领域
本发明实施例涉及系统性能测试领域,尤其涉及一种交易系统的性能测试方法及相关服务器。
背景技术
联机交易系统经常需要进行性能测试,通常是项目成员在晚上或者周末加班期间,手工启动资源监控工具,手动设定发送给联机交易系统的每秒事务处理量(Transaction Per Second,简称TPS)。等待运行一段之间后,人工依据系统资源的使用率,调整联机系统的关键进程的数量、发送性能交易的TPS,再次进行新一轮的测试,直到中央处理器(Central Processing Unit,简称CPU)繁忙程度或磁盘繁忙程度达到预期值。对于这种常规的性能测试工作,依赖人工来完成不仅浪费人力成本和时间成本,同时也影响性能测试的精度。
发明内容
本发明实施例提供一种交易系统的性能测试方法及相关服务器,用于解决现有技术中依赖人工进行联机交易系统的性能测试既浪费成本又影响测试精度的问题。
本发明实施例提供了一种交易系统的性能测试方法,包括:
性能测试服务器发送N条性能测试交易至应用服务器,其中N>0;
所述性能测试服务器接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
所述性能测试服务器根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;
若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;
若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。
可选地,所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量,包括:
所述性能测试服务器根据所述监测报告确定所述应用服务器在处理所述N条性能测试交易过程中处理器和数据库的使用率;
所述性能测试服务器在确定所述应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送所述应用服务器的性能测试交易量;
否则,所述性能测试服务器需要调整发送所述应用服务器的性能测试交易量。
可选地,还包括:
所述性能测试服务器根据所述监测报告确定所述应用服务在处理所述N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至所述应用服务器;所述监测报告为所述应用服务在处理所述N条性能测试交易的过程中发现异常时发送的;
所述性能测试服务器根据所述监测报告确定所述应用服务器异常运行状态的类型。
可选地,所述应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常;
所述进程状态异常为所述应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错;
所述传输线路异常为所述性能测试服务器通过传输线路向所述应用服务器传输性能测试交易时,所述传输线路实际传输的性能测试交易量与预设范围不匹配;
所述性能异常为处理器性能异常或数据库性能异常,所述处理器性能异常为所述处理器的使用率小于第一阈值,所述数据库性能异常为所述数据库的使用率小于第二阈值。
本发明实施例提供了一种交易系统的性能测试方法,包括:
应用服务器接收性能测试服务器发送N条性能测试交易,其中N>0;
所述应用服务器对所述N条性能测试交易进行处理并生成监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
所述应用服务器将所述监测报告发送至所述性能测试服务器。
可选地,所述应用服务器对所述N条性能测试交易进行处理并生成监测报告,包括:
所述应用服务器对所述N条性能测试交易进行处理并监测处理过程中所述应用服务器的运行状态;
所述应用服务器定期判断所述运行状态是否异常;
若是,则所述应用服务器生成所述异常运行状态对应的监测报告;
否则所述应用服务器在确定处理完所述N条性能测试交易之后,生成对应的监测报告。
相应地,本发明实施例提供了一种性能测试服务器,包括:
发送模块,用于发送N条性能测试交易至应用服务器,其中N>0;
接收模块,用于接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
处理模块,用于根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。
可选地,所述处理模块具体用于:
根据所述监测报告确定所述应用服务器在处理所述N条性能测试交易过程中处理器和数据库的使用率;
在确定所述应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送所述应用服务器的性能测试交易量;
否则需要调整发送所述应用服务器的性能测试交易量。
可选地,所述处理模块还用于:
根据所述监测报告确定所述应用服务在处理所述N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至所述应用服务器;所述监测报告为所述应用服务在处理所述N条性能测试交易的过程中发现异常时发送的;根据所述监测报告确定所述应用服务器异常运行状态的类型。
可选地,所述应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常;
所述进程状态异常为所述应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错;
所述传输线路异常为通过传输线路向所述应用服务器传输性能测试交易时,所述传输线路实际传输的性能测试交易量与预设范围不匹配;
所述性能异常为处理器性能异常或数据库性能异常,所述处理器性能异常为所述处理器的使用率小于第一阈值,所述数据库性能异常为所述数据库的使用率小于第二阈值。
本发明实施例提供了一种应用服务器,包括:
接收模块,用于接收性能测试服务器发送N条性能测试交易,其中N>0;
处理模块,用于对所述N条性能测试交易进行处理并生成监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
发送模块,用于将所述监测报告发送至所述性能测试服务器。
可选地,所述处理模块具体用于:
对所述N条性能测试交易进行处理并监测处理过程中所述应用服务器的运行状态;
定期判断所述运行状态是否异常;
若是,则生成所述异常运行状态对应的监测报告;
否则在确定处理完所述N条性能测试交易之后,生成对应的监测报告。
本发明实施例提供了一种计算设备,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行上述任一项所述的方法。
本发明实施例提供了一种计算机存储介质,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行上述任一项所述的方法。
本发明实施例表明,性能测试服务器发送N条性能测试交易至应用服务器,其中N>0;所述性能测试服务器接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;所述性能测试服务器根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。由于上述性能测试的过程是通过性能测试服务器与应用服务器进行交互实现的,而不需要人工进行性能测试,节约了人力成本和时间成本。另一方面,相较于通过人工对监测的数据进行分析,通过性能测试服务器对监测报告进行分析确定应用服务器的性能的方法能提高性能测试的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种交易系统的性能测试方法的流程示意图;
图2为本发明实施例提供的一种监测报告生成方法的流程示意图;
图3为本发明实施例提供的一种调整性能测试交易量的方法的流程示意图;
图4为本发明实施例提供的一种性能测试服务器的结构示意图;
图5为本发明实施例提供的一种应用服务器的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例涉及的服务器包括性能测试服务器和应用服务器,其中应用服务器为性能监测的对象,比如联机交易系统。应用服务器中至少包括处理器和数据库。具体实施中,处理器和数据库可以都位于应用服务器,也可以是处理器位于应用服务器,数据库为独立的服务器,本发明实施例对此不做具体的限定。
图1示例性示出了本发明实施例提供的一种交易系统的性能测试方法的流程,该流程可以由性能测试服务器和应用服务器配合执行。
如图1所示,该流程的具体步骤包括:
步骤S101,性能测试服务器发送N条性能测试交易至应用服务器,其中N>0。
步骤S102,应用服务器对N条性能测试交易进行处理并生成监测报告。
步骤S103,应用服务器将监测报告发送至性能测试服务器。
步骤S104,性能测试服务器根据监测报告判断应用服务器在处理N条性能测试交易的过程中运行状态是否正常。
步骤S105,若运行状态正常,则性能测试服务器根据监测报告确定是否调整发送至应用服务器的性能测试交易量。
步骤S106,若需要调整,则根据调整后的性能测试交易量向应用服务器发送M条性能测试交易,其中M>0。
具体地,在步骤S101中,性能测试服务器可同时对一台或多台应用服务器进行性能测试。当对多台应用服务器进行性能测试时,通过多条传输线路将性能测试交易发生至各个应用服务器,发送至各个应用服务器的性能测试交易量可根据具体情况确定。比如将N条性能测试交易发送至4台应用服务器,可以向每台应用服务器发送N/4条性能测试交易。应用服务器在接收到性能测试交易后,向性能测试服务器反馈通过传输线路实际接收的性能测试交易量,性能测试服务器根据应用服务器反馈的各传输线路实际传输的性能测试交易量和各传输线路预期传输的性能测试交易量确定各传输线路的状态。除上述方法之外,性能测试服务器也可以将传输线路预期传输的性能测试交易量发送至应用服务器,由各应用服务器根据传输线路实际传输的性能测试交易量和传输线路预期传输的性能测试交易量确定各传输线路的状态。
具体判断过程为:在确定传输线路实际传输的性能测试交易量与预设范围不匹配时,则传输线路异常。比如,设定预设范围是[A*(1-5%),A*(1+5%)],其中A为线路预期传输的性能测试交易量,定期统计传输线路实际传输的性能测试交易量B并判断是否符合下述公式(1),当传输线路实际传输的性能测试交易量B连续多次(比如5次)不符合下述公式(1)时,传输线路异常,否则传输线路正常,公式(1)具体为:
A*(1-5%)≤B≤A*(1+5%)
在步骤S102和步骤S103中,监测报告为应用服务器处理N条性能测试交易的过程数据,具体来说,应用服务器接收性能测试服务器发送N条性能测试交易之后生成监测报告的过程具体包括以下步骤,如图2所示:
步骤S201,应用服务器对N条性能测试交易进行处理并监测处理过程中应用服务器的运行状态。
步骤S202,应用服务器定期判断运行状态是否异常。
步骤S203,若是,则应用服务器生成异常运行状态对应的监测报告。
步骤S204,否则应用服务器在确定处理完N条性能测试交易之后,生成对应的监测报告。
具体实施中,应用服务器实时监测的运行状态包括:进程状态、传输线路的状态、处理器性能、数据库性能。下面具体介绍应用服务器监测上述运行状态的过程。
应用服务器监测进程状态分为监测进程之间的消息队列的状态以及监测进程的数量和报错信息。在监测进程之间的消息队列的状态时,实时读取配置信息,定期获取需要监控的消息队列中的消息个数,同时判断消息个数是否超过阈值。当连续设定次数(比如3次)判断消息队里的消息个数超过阈值(比如500),则确定该消息队列堵塞,即进程状态异常,否则确定消息队列不堵塞,即进程状态正常。当监测进程的报错信息时,读取配置信息,获取进程日志路径和报错的关键字段。定期解析日志文件,通过报错的关键字段,抓取日志报错信息。如果发现报错信息,则进程状态异常,否则进程状态正常。当监测进程的数量时,从共享内存中获取进程数量和进程号的预期值,定期获取进程信息(数量和进程号),与共享内存中的预期值比较。若一致,则进程状态正常,否则进程状态异常。
应用服务器监测处理器性能的过程为:通过nmon工具或者自主研发监控工具,监控处理器的繁忙程度,定期(比如5s)获取处理器的使用率并计算平均使用率,当处理器的平均使用率小于第一阈值,比如50%,则处理器性能异常。或者将每次计算得到的处理器的平均使用率与上一次计算得到的处理器的平均使用率进行比较,当连续设定次数(比如5次)当前处理器的平均使用率小于上一次计算得到的处理器的平均使用率时,确定处理器性能异常。
应用服务器监测数据库性能的过程为:通过nmon工具或者自主研发监控工具,监控数据库的繁忙程度,定期(比如5s)获取数据库的使用率并计算数据库的平均使用率,当数据库的平均使用率小于第二阈值,比如50%,则数据库性能异常。或者将每次计算得到的数据库的平均使用率与上一次计算得到的数据库的平均使用率进行比较,当连续设定次数(比如5次)当前数据库的平均使用率小于上一次计算得到的数据库的平均使用率时,确定数据库性能异常。
监测传输线路的状态的过程已经在前文中进行介绍,此处不再赘述。当应用服务器监测到上述任意一种运行状态异常时,生成异常运行状态对应的监测报告并将监测报告发送至性能测试服务器。若应用服务器处理完N条性能测试交易之后也没有监测到上述任意一种运行状态异常,则在处理N条性能测试交易之后生成对应的监测报告。
在步骤S104中,性能测试服务器判断监测报告中是否包含应用服务器运行状态异常的消息,若包括,则服务器在处理N条性能测试交易的过程中运行状态异常,否则服务器在处理N条性能测试交易的过程中运行状态正常。
由于上述性能测试的过程通过性能测试服务器与应用服务器进行交互就能实现,而不需要人工进行性能测试,节约了人力成本和时间成本。另一方面,相较于通过人工对监测的数据进行分析,通过性能测试服务器对监测报告进行分析确定应用服务器的性能的方法能提高性能测试的准确性。
进一步地,一方面,性能测试服务器根据监测报告确定应用服务在处理N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至应用服务器同时结束整个性能测试。然后根据监测报告确定应用服务器异常运行状态的类型,应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常。进程状态异常为应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错。传输线路异常为性能测试服务器通过传输线路向应用服务器传输性能测试交易时,传输线路实际传输的性能测试交易量与预设范围不匹配。性能异常为处理器性能异常或数据库性能异常。
性能测试服务器在确定应用服务器异常运行状态的类型之后,对各类异常运行状态进行分析和处理。针对进程状态异常,当确定进程状态异常是进程报错时,说明应用逻辑在高压力下出现异常,此时需要人工介入分析,则通知相关工作人员。当确定进程状态异常为消息队列堵塞时,说明产生消息的进程速度过快,处理消息的进程速度过慢,此时性能测试服务器发送调整指令至应用服务器,应用服务器根据指令增加处理消息的进程,增加的进程数量可根据具体情况确定。应用服务器中调整进程的接口主要包括进程名称、增加/减少标志、增加/减少数量。应用服务器在收到调整指令并解析后,调用当前系统增减进程的方法,完成进程的调整。例如当前系统是通过直接启动可执行文件来增加进程数或者直接杀掉进程来减少进程数量。或者,如果当前系统基于分布式操作扩展之后的Unix事务系统(Transaction for Unix has been Extended for Distributed Operation,简称TUXEDO)架构,则通过动态修改终极公告板(Ultimate Bulletin Board,简称UBB)或者脚本修改UBB来完成进程调整。调整完成后,将当前各个进程的数量更新到共享内存中,便于应用服务器对进程数量进行监控。性能测试服务器在确定应用服务器增加进程数后,重新进行性能测试。针对传输线路异常和性能异常,首先根据监测报告判断应用服务器中是否存在不属于性能测试的进程,若存在且这些进程长时间占用应用服务器的数据库和处理器,则先删除不属于性能测试的进程,并重新进行性能测试。若应用服务器中并不存在不属于性能测试的进程,则说明传输线路、处理器以及数据库是由于系统在高压力下出现的异常,需要人工介入分析,则通知相关工作人员。由于性能测试服务器根据监测报告确定应用服务器的运行状态异常时,停止性能测试并分析异常类型,针对不同的异常类型采用不同的处理方案,故性能测试服务器能高效准确地确定应用服务器的异常类型,提高了性能测试的效率。
另一方面,性能测试服务器根据监测报告确定应用服务在处理N条性能测试交易的过程中运行状态正常时,性能测试服务器根据应用服务器在处理N条性能测试交易过程中处理器和数据库的使用率判断是否调整发送至应用服务器的性能测试交易量,具体过程包括以下步骤,如图3所示:
步骤S301,性能测试服务器根据监测报告确定应用服务器在处理N条性能测试交易过程中处理器和数据库的使用率。
步骤S302,性能测试服务器在确定应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送应用服务器的性能测试交易量。
步骤S303,否则性能测试服务器需要调整发送应用服务器的性能测试交易量。
具体实施中,针对处理器,预设条件为处理器的实际使用率中超过或接近处理器的预期使用率的占比是否大于或等于预设阈值。判断处理器的使用率是否符合预设条件的过程为:预先设置处理器的预期使用利率,定期采集处理器的实际使用率,设定共采集了n个时刻处理器的实际使用率。根据处理器的预期使用率和采集的n个处理器的实际使用率计算处理器的实际使用率中超过或接近处理器的预期使用率的占比,具体符合公式(1)和公式(2):
其中,CPUd为处理器的实际使用率的判决结果,CPUp为处理器的实际使用率,CPUe为处理器的预期使用利率,CPUt为预设误差范围。在具体实施中,处理器的预期使用利率可根据实际情况进行设定,比如80%、85%或90%等,误差范围也可根据实际情况进行设定,比如5%、8%、10%等。
其中,CPUp为处理器的实际使用率中超过或接近处理器的预期使用率的占比,CPUd为处理器的实际使用率的判决结果,n为采样点的个数。当CPUp大于等于预设阈值时,说明处理器的使用率符合预设条件,整个性能测试结束,其中预设阈值可根据具体情况进行设定,比如90%、95%、98%等。然后将此次性能测试中性能测试服务器发送至应用服务器的性能测试交易量作为应用服务的性能指标。
针对数据库,预设条件为数据库的实际使用率中超过或接近数据库的预期使用率的占比是否大于或等于预设阈值。判断数据库的使用率是否符合预设条件的过程为:预先设置数据库的预期使用利率,定期采集数据库的实际使用率,设定共采集了m个时刻数据库的实际使用率。根据数据库的预期使用率和采集的数据库的实际使用率,计算数据库的实际使用率中超过或接近数据库的预期使用率的占比,具体符合公式(3)和公式(4):
其中,DISKd为数据库的实际使用率的判决结果,DISKp为数据库的实际使用率,DISKe为数据库的预期使用利率,CPUt为预设误差范围。在具体实施中,数据库的预期使用利率可根据实际情况进行设定,比如80%、85%或90%等,误差范围也可根据实际情况进行设定,比如5%、8%、10%等。
其中,DISKp为数据库的实际使用率中超过或接近数据库的预期使用率的占比,DISKd为数据库的实际使用率的判决结果,m为采样点的个数。当DISKp大于等于预设阈值时,说明数据库的使用率符合预设条件,整个性能测试结束,其中预设阈值可根据具体情况进行设定,比如90%、95%等。然后将此次性能测试中性能测试服务器发送至应用服务器的性能测试交易量作为应用服务的性能指标。
当应用服务器中处理器的使用率和数据库的使用率均不符合预设条件时,则说明需要增加性能测试交易量并重新进行性能测试,每次增加的性能测试量可根据实际情况预先设定,比如每次增加100条性能测试交易。由于性能测试服务器在分析监测报告确定应用服务器状态正常时,进一步根据采集的处理器和数据库的使用率数据判断是否调整性能测试交易量,若需要调整,则调整性能测试交易量之后重新进行性能测试,直到数据库的使用率或处理器的使用率符合预设条件,而不需要人工对性能监测数据进行分析并人工调整性能测试交易量,从而节约了人力成本,提高了性能测试的效率。
为了更好的解释本发明实施例,下面结合具体的实施场景描述本发明实施例提供的一种交易系统的性能测试方法的流程。设定应用服务器为4台、数据库为2台,性能测试服务器为1台。每个应用服务器上均部署一个系统调整模块、运行监控模块、性能监控模块。系统调整模块用于调整应用服务器上的进程数量,应用服务器上预先配置的核心进程包括交易分发进程、交易请求进程、交易应答进程、交易发送进程。运行监控模块用于监测进程的运行状态。性能监控模块用于监控应用服务器的处理器的性能。每个数据库上均部署一个性能监控模块,用于监控数据库的性能。性能测试服务器部署了性能管理模块和性能收发模块,性能管理模块用于控制性能监控的过程以及分析监测报告,性能收发模块用于根据性能管理模块的指令通过传输线路向4台应用服务器发送性能测试交易。
下面以上述设定的各个模块为基础介绍性能测试的过程:性能管理模块启动监控,向运行监控模块和性能监控模块发送启动指令。收到两个模块的启动成功消息后,向性能收发模块发送启动测试指令,其中启动测试指令中包括性能测试交易量。性能收发模块根据启动测试指令确定发送至4台应用服务器的性能测试交易量,然后通过传输线路向4台应用服务器发送性能测试交易。各应用服务器接收到性能测试交易后,启动进程对性能测试交易进行处理同时向性能收发模块反馈实际接收到的性能测试交易量。性能收发模块根据应用服务器反馈的数据定期(比如每隔5s)判断传输线路实际传输的性能测试交易量是否与预设范围匹配,若不匹配,则发送“传输线路异常”的状态消息至性能管理模块,否则发送“传输线路正常”的状态消息至性能管理模块。
应用服务器中的进程对性能测试交易进行处理的过程中,运行监控模块实时监测进程的运行状态,定期判断进程之间的消息队列的消息是否超过阈值,设定消息队列监控的阈值为800,连续超过阈值的次数配置为3次。当连续监控到3次进程之间的消息队列的消息个数大于800,则发送“进程状态异常”的状态消息至性能管理模块。运行监控模块同时定期监测进程是否报错以及进程数量是否符合预设值,当监测到进程报错或者进程数量不符合预设值时,发送“进程状态异常”的状态消息至性能管理模块。当运行监控模块没有监测到上述任意一种进程异常状态,则定期发送“进程状态正常”的状态消息至性能管理模块。
应用服务器对性能测试交易进行处理的过程中,性能监控模块定期(比如每隔5s)计算处理器的平均使用率,若连续设定次数(比如5次)当前计算的处理器的平均使用率低于上一次计算得到的处理器的平均使用率,则发送“处理器性能异常”的状态消息至性能管理模块,否则发送“处理器性能正常”的状态消息至性能管理模块。数据库中的性能监控模块定期(比如每隔5s)计算数据库的平均使用率,若连续设定次数(比如5次)当前计算的数据库的平均使用率低于上一次计算得到的数据库的平均使用率,则发送“数据库性能异常”的状态消息至性能管理模块,否则发送“数据库性能正常”的状态消息至性能管理模块。
性能管理模块定期接收运行监控模块、性能监控模块、性能收发模块发送的状态消息,在确定上述任意一个模块发送的状态消息为异常状态消息时,停止性能测试并发送性能测试结束指令至运行监控模块、性能监控模块、性能收发模块。否则在性能测试一段时间(比如2小时、4小时等)后发送性能测试结束指令至运行监控模块、性能监控模块、性能收发模块。运行监控模块、性能监控模块、性能收发模块在接收到性能测试结束指令之后,生成监测报告并将监测报告发送至性能管理模块。性能管理模块在对监测报告进行分析之前,判断性能测试是正常结束还是在接收到异常运行状态的消息后结束。
若是正常结束,则根据监测报告确定是否调整发送至各应用服务器的性能测试交易量,若需要调整,则根据预设的调整量(比如每次增加100条性能测试交易)调整性能测试交易量并重新进行性能测试。若不需要调整,则将此次性能测试发送的性能测试交易量确定为应用服务器的性能指标。
若是在接收到异常运行状态的消息后结束,则根据异常运行状态的消息以及监测报告确定异常运行状态的类型,异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常。然后对不同的异常状态进行分析和处理,若分析后确定解决异常状态的方法是增加线程,则发送进程调整指令至系统管理模块,系统调整模块根据进程调整指令调整线程的数量,比如增加1个进程。
本发明实施例表明,性能测试服务器发送N条性能测试交易至应用服务器,其中N>0;所述性能测试服务器接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;所述性能测试服务器根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。由于上述性能测试的过程是通过性能测试服务器与应用服务器进行交互实现的,而不需要人工进行性能测试,节约了人力成本和时间成本。另一方面,相较于通过人工对监测的数据进行分析,通过性能测试服务器对监测报告进行分析确定应用服务器的性能的方法能提高性能测试的准确性。
基于相同构思,图4示例性的示出了本发明实施例提供的一种性能测试服务器的结构,该性能测试服务器可以执行交易系统的性能测试方法的流程。
如图4所示,包括:
发送模块401,用于发送N条性能测试交易至应用服务器,其中N>0;
接收模块402,用于接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
处理模块403,用于根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。
可选地,所述处理模块403具体用于:
根据所述监测报告确定所述应用服务器在处理所述N条性能测试交易过程中处理器和数据库的使用率;
在确定所述应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送所述应用服务器的性能测试交易量;
否则需要调整发送所述应用服务器的性能测试交易量。
可选地,所述处理模块403还用于:
根据所述监测报告确定所述应用服务在处理所述N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至所述应用服务器;所述监测报告为所述应用服务在处理所述N条性能测试交易的过程中发现异常时发送的;根据所述监测报告确定所述应用服务器异常运行状态的类型。
可选地,所述应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常;
所述进程状态异常为所述应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错;
所述传输线路异常为通过传输线路向所述应用服务器传输性能测试交易时,所述传输线路实际传输的性能测试交易量与预设范围不匹配;
所述性能异常为处理器性能异常或数据库性能异常,所述处理器性能异常为所述处理器的使用率小于第一阈值,所述数据库性能异常为所述数据库的使用率小于第二阈值。
基于相同构思,图5示例性的示出了本发明实施例提供的一种应用服务器的结构,该应用服务器可以执行交易系统的性能测试方法的流程。
如图5所示,该应用服务器包括:
接收模块501,用于接收性能测试服务器发送N条性能测试交易,其中N>0;
处理模块502,用于对所述N条性能测试交易进行处理并生成监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
发送模块503,用于将所述监测报告发送至所述性能测试服务器。
可选地,所述处理模块502具体用于:
对所述N条性能测试交易进行处理并监测处理过程中所述应用服务器的运行状态;
定期判断所述运行状态是否异常;
若是,则生成所述异常运行状态对应的监测报告;
否则在确定处理完所述N条性能测试交易之后,生成对应的监测报告。
本发明实施例提供了一种计算设备,该计算设备具体可以为桌面计算机、便携式计算机、智能手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)等。该计算设备可以包括中央处理器(Center Processing Unit,CPU)、存储器、输入/输出设备等,输入设备可以包括键盘、鼠标、触摸屏等,输出设备可以包括显示设备,如液晶显示器(Liquid Crystal Display,LCD)、阴极射线管(Cathode Ray Tube,CRT)等。
存储器,可以包括只读存储器(ROM)和随机存取存储器(RAM),并向处理器提供存储器中存储的程序指令和数据。在本发明实施例中,存储器可以用于存储交易系统的性能测试方法的程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行交易系统的性能测试方法。
本发明实施例提供了一种计算机存储介质,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使所述计算机执行交易系统的性能测试方法。
本领域内的技术人员应明白,本发明的实施例可提供为方法、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (14)
1.一种交易系统的性能测试方法,其特征在于,包括:
性能测试服务器发送N条性能测试交易至应用服务器,其中N>0;
所述性能测试服务器接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
所述性能测试服务器根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;
若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;
若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。
2.如权利要求1所述的方法,其特征在于,所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量,包括:
所述性能测试服务器根据所述监测报告确定所述应用服务器在处理所述N条性能测试交易过程中处理器和数据库的使用率;
所述性能测试服务器在确定所述应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送所述应用服务器的性能测试交易量;
否则,所述性能测试服务器需要调整发送所述应用服务器的性能测试交易量。
3.如权利要求1所述的方法,其特征在于,还包括:
所述性能测试服务器根据所述监测报告确定所述应用服务在处理所述N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至所述应用服务器;所述监测报告为所述应用服务在处理所述N条性能测试交易的过程中发现异常时发送的;
所述性能测试服务器根据所述监测报告确定所述应用服务器异常运行状态的类型。
4.如权利要求3所述的方法,其特征在于,所述应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常;
所述进程状态异常为所述应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错;
所述传输线路异常为所述性能测试服务器通过传输线路向所述应用服务器传输性能测试交易时,所述传输线路实际传输的性能测试交易量与预设范围不匹配;
所述性能异常为处理器性能异常或数据库性能异常,所述处理器性能异常为所述处理器的使用率小于第一阈值,所述数据库性能异常为所述数据库的使用率小于第二阈值。
5.一种交易系统的性能测试方法,其特征在于,包括:
应用服务器接收性能测试服务器发送N条性能测试交易,其中N>0;
所述应用服务器对所述N条性能测试交易进行处理并生成监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
所述应用服务器将所述监测报告发送至所述性能测试服务器。
6.如权利要求5所述的方法,其特征在于,所述应用服务器对所述N条性能测试交易进行处理并生成监测报告,包括:
所述应用服务器对所述N条性能测试交易进行处理并监测处理过程中所述应用服务器的运行状态;
所述应用服务器定期判断所述运行状态是否异常;
若是,则所述应用服务器生成所述异常运行状态对应的监测报告;
否则所述应用服务器在确定处理完所述N条性能测试交易之后,生成对应的监测报告。
7.一种性能测试服务器,其特征在于,包括:
发送模块,用于发送N条性能测试交易至应用服务器,其中N>0;
接收模块,用于接收所述应用服务器发送的监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
处理模块,用于根据所述监测报告判断所述应用服务器在处理所述N条性能测试交易的过程中运行状态是否正常;若运行状态正常,则所述性能测试服务器根据所述监测报告确定是否调整发送至所述应用服务器的性能测试交易量;若需要调整,则根据调整后的性能测试交易量向所述应用服务器发送M条性能测试交易,其中M>0。
8.如权利要求7所述的性能测试服务器,其特征在于,所述处理模块具体用于:
根据所述监测报告确定所述应用服务器在处理所述N条性能测试交易过程中处理器和数据库的使用率;
在确定所述应用服务器中处理器的使用率符合预设条件或数据库的使用率符合预设条件时,不需要调整发送所述应用服务器的性能测试交易量;
否则需要调整发送所述应用服务器的性能测试交易量。
9.如权利要求7所述的性能测试服务器,其特征在于,所述处理模块还用于:
根据所述监测报告确定所述应用服务在处理所述N条性能测试交易的过程中运行状态出现异常时,发送性能测试结束指令至所述应用服务器;所述监测报告为所述应用服务在处理所述N条性能测试交易的过程中发现异常时发送的;根据所述监测报告确定所述应用服务器异常运行状态的类型。
10.如权利要求9所述的性能测试服务器,其特征在于,所述应用服务器异常运行状态的类型至少包括进程状态异常、传输线路异常、性能异常;
所述进程状态异常为所述应用服务器在处理性能测试交易的过程中进程之间的消息队列出现堵塞或者进程在处理性能测试交易时报错;
所述传输线路异常为通过传输线路向所述应用服务器传输性能测试交易时,所述传输线路实际传输的性能测试交易量与预设范围不匹配;
所述性能异常为处理器性能异常或数据库性能异常,所述处理器性能异常为所述处理器的使用率小于第一阈值,所述数据库性能异常为所述数据库的使用率小于第二阈值。
11.一种应用服务器,其特征在于,包括:
接收模块,用于接收性能测试服务器发送N条性能测试交易,其中N>0;
处理模块,用于对所述N条性能测试交易进行处理并生成监测报告,所述监测报告为所述应用服务器处理所述N条性能测试交易的过程数据;
发送模块,用于将所述监测报告发送至所述性能测试服务器。
12.如权利要求11所述的应用服务器,其特征在于,所述处理模块具体用于:
对所述N条性能测试交易进行处理并监测处理过程中所述应用服务器的运行状态;
定期判断所述运行状态是否异常;
若是,则生成所述异常运行状态对应的监测报告;
否则在确定处理完所述N条性能测试交易之后,生成对应的监测报告。
13.一种计算设备,其特征在于,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行权利要求1至4任一项所述的方法或权利要求5至6任一项所述的方法。
14.一种计算机存储介质,其特征在于,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行权利要求1至4任一项所述的方法或权利要求5至6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711092093.5A CN107943626A (zh) | 2017-11-08 | 2017-11-08 | 一种交易系统的性能测试方法及相关服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711092093.5A CN107943626A (zh) | 2017-11-08 | 2017-11-08 | 一种交易系统的性能测试方法及相关服务器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107943626A true CN107943626A (zh) | 2018-04-20 |
Family
ID=61934535
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711092093.5A Pending CN107943626A (zh) | 2017-11-08 | 2017-11-08 | 一种交易系统的性能测试方法及相关服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107943626A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109542746A (zh) * | 2018-11-23 | 2019-03-29 | 北京车和家信息技术有限公司 | 压力测试方法、系统以及服务器压力测试系统 |
CN109636543A (zh) * | 2018-12-25 | 2019-04-16 | 北京云测网络科技有限公司 | 一种区块链测试方法和装置 |
CN111045902A (zh) * | 2018-10-10 | 2020-04-21 | 中国移动通信集团浙江有限公司 | 服务器的压力测试方法及装置 |
CN111130926A (zh) * | 2019-12-03 | 2020-05-08 | 中国建设银行股份有限公司 | 适用于加密机的状态监控方法、系统、装置及存储介质 |
CN111159029A (zh) * | 2019-12-24 | 2020-05-15 | 中信银行股份有限公司 | 自动化测试方法、装置、电子设备及计算机可读存储介质 |
CN111447120A (zh) * | 2020-03-30 | 2020-07-24 | 中国建设银行股份有限公司 | 基于Tuxedo的压力测试方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101540701A (zh) * | 2008-03-18 | 2009-09-23 | 中国移动通信集团公司 | 一种服务器测试系统以及测试方法和装置 |
CN102075384A (zh) * | 2010-12-20 | 2011-05-25 | 创新科存储技术有限公司 | 一种性能测试系统及方法 |
CN102710458A (zh) * | 2012-05-08 | 2012-10-03 | 华为技术有限公司 | 测试过程的监控方法、测试管理服务器和测试服务器 |
CN105279064A (zh) * | 2015-09-11 | 2016-01-27 | 浪潮电子信息产业股份有限公司 | 一种基于Windows平台Exchange Server压力测试方法 |
CN105446846A (zh) * | 2015-11-30 | 2016-03-30 | 中电科华云信息技术有限公司 | 基于云桌面的性能测试方法 |
CN106470133A (zh) * | 2015-08-20 | 2017-03-01 | 阿里巴巴集团控股有限公司 | 系统压力测试方法及装置 |
US20170085458A1 (en) * | 2015-09-18 | 2017-03-23 | Fmr Llc | Real-Time Monitoring of Computer System Processor and Transaction Performance During an Ongoing Performance Test |
-
2017
- 2017-11-08 CN CN201711092093.5A patent/CN107943626A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101540701A (zh) * | 2008-03-18 | 2009-09-23 | 中国移动通信集团公司 | 一种服务器测试系统以及测试方法和装置 |
CN102075384A (zh) * | 2010-12-20 | 2011-05-25 | 创新科存储技术有限公司 | 一种性能测试系统及方法 |
CN102710458A (zh) * | 2012-05-08 | 2012-10-03 | 华为技术有限公司 | 测试过程的监控方法、测试管理服务器和测试服务器 |
CN106470133A (zh) * | 2015-08-20 | 2017-03-01 | 阿里巴巴集团控股有限公司 | 系统压力测试方法及装置 |
CN105279064A (zh) * | 2015-09-11 | 2016-01-27 | 浪潮电子信息产业股份有限公司 | 一种基于Windows平台Exchange Server压力测试方法 |
US20170085458A1 (en) * | 2015-09-18 | 2017-03-23 | Fmr Llc | Real-Time Monitoring of Computer System Processor and Transaction Performance During an Ongoing Performance Test |
CN105446846A (zh) * | 2015-11-30 | 2016-03-30 | 中电科华云信息技术有限公司 | 基于云桌面的性能测试方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111045902A (zh) * | 2018-10-10 | 2020-04-21 | 中国移动通信集团浙江有限公司 | 服务器的压力测试方法及装置 |
CN109542746A (zh) * | 2018-11-23 | 2019-03-29 | 北京车和家信息技术有限公司 | 压力测试方法、系统以及服务器压力测试系统 |
CN109636543A (zh) * | 2018-12-25 | 2019-04-16 | 北京云测网络科技有限公司 | 一种区块链测试方法和装置 |
CN111130926A (zh) * | 2019-12-03 | 2020-05-08 | 中国建设银行股份有限公司 | 适用于加密机的状态监控方法、系统、装置及存储介质 |
CN111159029A (zh) * | 2019-12-24 | 2020-05-15 | 中信银行股份有限公司 | 自动化测试方法、装置、电子设备及计算机可读存储介质 |
CN111447120A (zh) * | 2020-03-30 | 2020-07-24 | 中国建设银行股份有限公司 | 基于Tuxedo的压力测试方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107943626A (zh) | 一种交易系统的性能测试方法及相关服务器 | |
CN108376112B (zh) | 压力测试方法、装置及可读介质 | |
US10346779B2 (en) | Systems and methods for incident queue assignment and prioritization | |
CN106959894B (zh) | 资源分配方法和装置 | |
US20150085746A1 (en) | Selective utilization of consumer shared access points to facilitate optimized wireless communications | |
US20210390029A1 (en) | Method and apparatus for testing stress based on cloud service | |
CN109154937A (zh) | 查询响应的动态流式传输 | |
CN107992415A (zh) | 一种交易系统的故障定位和分析方法及相关服务器 | |
CN108683605A (zh) | 一种服务调用的限流方法和装置 | |
CN110166271A (zh) | 一种检测网络节点异常的方法和装置 | |
CN109491754A (zh) | 虚拟服务器的性能测试方法和装置 | |
CN111275415A (zh) | 资源通道的切换方法、装置、设备及存储介质 | |
CN110417614A (zh) | 云服务器自检方法、装置、设备及计算机可读存储介质 | |
CN115685109A (zh) | 一种对毫米波雷达测试的方法、装置、设备及存储介质 | |
CN114924745A (zh) | 深度学习编译器的运行方法、装置及电子设备 | |
CN110413419A (zh) | 一种规则执行的方法和装置 | |
CN114301760A (zh) | 一种测试方法、装置、电子设备及存储介质 | |
CN113204467B (zh) | 线上业务系统的监控方法、装置、设备及存储介质 | |
CN107608688A (zh) | 终端设备分时升级方法及计算机可读存储介质 | |
CN110389885A (zh) | 高频交易监控方法及装置 | |
CN111831503A (zh) | 一种基于监控代理的监控方法和监控代理装置 | |
US9378503B2 (en) | Methods of routing for networks with feedback | |
US20200142746A1 (en) | Methods and system for throttling analytics processing | |
CN114090247A (zh) | 用于处理数据的方法、装置、设备以及存储介质 | |
CN114647499A (zh) | 异步作业任务并发控制方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180420 |
|
RJ01 | Rejection of invention patent application after publication |