CN111881057A - 测试方法、测试装置、测试系统及介质 - Google Patents

测试方法、测试装置、测试系统及介质 Download PDF

Info

Publication number
CN111881057A
CN111881057A CN202010785929.5A CN202010785929A CN111881057A CN 111881057 A CN111881057 A CN 111881057A CN 202010785929 A CN202010785929 A CN 202010785929A CN 111881057 A CN111881057 A CN 111881057A
Authority
CN
China
Prior art keywords
virtual
virtual accounts
accounts
account
testing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010785929.5A
Other languages
English (en)
Other versions
CN111881057B (zh
Inventor
胡嘉裕
黄威
龚静秋
冯岚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial and Commercial Bank of China Ltd ICBC
Original Assignee
Industrial and Commercial Bank of China Ltd ICBC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial and Commercial Bank of China Ltd ICBC filed Critical Industrial and Commercial Bank of China Ltd ICBC
Priority to CN202010785929.5A priority Critical patent/CN111881057B/zh
Publication of CN111881057A publication Critical patent/CN111881057A/zh
Application granted granted Critical
Publication of CN111881057B publication Critical patent/CN111881057B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本公开提供了一种测试方法、测试装置、测试系统及介质,用于对基于账户的业务系统进行测试,可应用于金融领域或其他领域。所述业务系统包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数。所述测试方法包括:开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数;从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同;以及基于所述X个虚拟账户,对所述业务系统进行测试。

Description

测试方法、测试装置、测试系统及介质
技术领域
本公开涉及互联网技术领域,更具体地,涉及一种测试方法、测试装置、测试系统及介质。
背景技术
在“双十一”等极端高并发秒杀场景中,商业银行单个交易需要支撑高于日常5~10倍的并发。需要提前对诸如银行系统、第三方支付系统、电商平台等的业务系统进行全流程性能验收测试,以确保高并发情况下的系统稳定。
现有技术中,对常规的集中式系统如主机系统进行测试时,针对主机性能进行模拟测试就可以基本接近生产环境。然而,对常规的分布式系统进行测试时,目前主要通过测试分布式系统内单个服务器的性能水平,然后折算得到整个分布式集群的性能水平,这会导致测试环境与生产环境下的设备情况以及数据处理流程存在差异。更进一步地,对于复杂系统例如同时包含了集中式系统和分布式系统的软件系统,现有技术更是难以在测试环境中完整地模拟生产环境下的数据处理和业务流程。
发明内容
有鉴于此,本公开实施例提供了一种复用生产环境的设备以及运行逻辑对业务系性能测试的测试方法、测试装置、测试系统及介质。
本公开实施例的一个方面提供了一种测试方法,用于对基于账户的业务系统进行测试。所述业务系统包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数。所述测试方法包括:开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数;从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同;以及基于所述X个虚拟账户,对所述业务系统进行测试。
根据本公开的实施例,所述从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户包括:将第一虚拟账户按照每个所述子系统的路由规则分配到每个所述子系统的S个服务器的其中之一;当N个所述子系统的每个所述子系统中被分配到所述第一虚拟账户的服务器的账户数量均未超出服务器的测试负载上限时,选择所述第一虚拟账户;或者当N个所述子系统的至少一个子系统中被分配到所述第一虚拟账户的服务器的账户数量超过服务器的测试负载上限时,丢弃所述第一虚拟账户。其中,所述第一虚拟账户为Y个虚拟账户中的任意一个。
根据本公开的实施例,所述从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户还包括,对所述Y个虚拟账户进行随机排序,并按顺序逐次从所述Y个虚拟账户中抽取出一个虚拟账户作为所述第一虚拟账户。
根据本公开的实施例,所述方法还包括设置X的目标值,所述目标值为小于等于Y的正整数,以及基于所述目标值、以及每个所述子系统的S个服务器在生产环境下真实账户的数量分布比例,确定在每个所述子系统中各个服务器的测试负载上限。
根据本公开的实施例,所述在基于所述X个虚拟账户,对所述业务系统进行测试之前,所述方法还包括当X不等于所述目标值时,重复执行从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户的操作,直到X达到所述目标值,或者直到循环次数达到预定次数,然后选择最接近或达到所述目标值的一轮循环中得到的X个虚拟账户,作为最终选择出的所述X个虚拟账户。
根据本公开的实施例,所述基于所述X个虚拟账户,对所述业务系统进行测试包括,将所述X个虚拟账户经由每个所述子系统的路由规则部署在每个所述子系统的各个服务器上,以及通过所述N个子系统处理基于所述X个虚拟账户的交易,以对所述业务系统进行测试。
根据本公开的实施例,所述基于所述X个虚拟账户,对所述业务系统进行测试包括,对基于所述X个虚拟账户产生的交易的交易序列号添加特定的标记,以将测试交易与真实交易区分开来。
根据本公开的实施例,所述X个虚拟账户在所述每个子系统中的存储逻辑与真实账户在每个所述子系统中的存储逻辑一致。
根据本公开的实施例,所述开设用于测试的Y个虚拟账户包括,按照真实账户的开户逻辑开设所述Y个虚拟账户,以及设置所述Y个虚拟账户的功能,以隔离所述Y个虚拟账户与生产环境中的真实业务。
本公开的实施例的另一方面提供了一种测试装置,用于对基于账户的业务系统进行测试。所述业务系统包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数。其中,所述测试装置包括账户开设模块、筛选模块、以及测试模块。账户开设模块用于开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数。筛选模块用于从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同。测试模块用于基于所述X个虚拟账户,对所述业务系统进行测试。
根据本公开的实施例,所述测试装置还包括测试目标设置模块。所述测试目标设置模块用于设置X的目标值,所述目标值为小于等于Y的正整数,以及基于所述目标值、以及每个所述子系统的S个服务器在生产环境下真实账户的数量分布比例,确定在每个所述子系统中各个服务器的测试负载上限。
根据本公开的实施例,所述测试装置还包括循环模块、以及确定模块。所述循环模块用于在基于所述X个虚拟账户,对所述业务系统进行测试之前,当X不等于所述目标值时,触发所述筛选模块重复执行从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户的操作,直到X达到所述目标值,或者直到循环次数达到预定次数。所述确定模块用于选择最接近或达到所述目标值的一轮循环中得到的X个虚拟账户,作为最终选择出的所述X个虚拟账户。
本公开的实施例的另一方面提供了一种测试系统。所述测试系统包括一个或多个存储器、以及一个或多个处理器。所述存储器上存储有计算机可执行指令。所述处理器执行所述指令,以实现如上所述的方法。
本公开实施例的另一方面提供了一种计算机可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开实施例的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
上述一个或多个实施例具有如下优点或益效果:可以至少部分克服了测试环境无法提供足量相同型号的设备,无法完全模拟生产环境条件的问题,可以使用全量生产服务器达到全量服务器支撑测试的目的,可以适应各种类型的系统架构。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的在生产环境下业务系统的应用场景;
图2示意性示出了根据本公开实施例的测试方法的流程图;
图3示意性示出了根据本公开一实施例的测试方法中从Y个虚拟账户中筛选出X个虚拟账户的流程图;
图4示意性示出了根据本公开另一实施例的筛选出X接近或达到目标值的X个虚拟账户的流程图;
图5示意性示出了根据本公开实施例的测试装置的框图;以及
图6示意性示出了适于实现根据本公开实施例的测试方法的计算机系统的方框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
本公开的各个实施例提供了一种复用生产环境的设备以及运行逻辑对业务系统进行测试的测试方法、测试装置、测试系统及介质,可以对各种类型的业务系统进行全流程高并发场景测试。其中,业务系统为基于账户的系统,包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数。该测试方法包括首先开设用于测试的Y个虚拟账户,然后从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户。一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同,之后基于所述X个虚拟账户,对所述业务系统进行测试。
需要说明的是,本公开实施例的测试方法、测试装置、测试系统及介质可用于金融领域,也可用于除金融领域之外的任意领域(例如,物流、电商),本公开对该测试方法、测试装置、测试系统及介质的应用领域不做限定。
图1示意性示出了根据本公开实施例的在生产环境下业务系统的应用场景100。需要注意的是,图1所示仅为可以应用本公开实施例的系统架构的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的应用场景100可以包括业务系统101、第三方支付系统102、以及用户终端103。业务系统101被示例为银行系统,可以包括例如A、B、C三个子系统,其中A、B、C三个子系统例如分别可以是银行系统与第三方支付系统的前端对接系统、银行内部的账户检查系统、以及银行内部的账务处理系统。
业务系统101可以是基于账户的系统。例如,商业银行业务系统普遍是基于客户的业务系统,无论是集中式系统架构还是分布式系统架构,实际是对客户信息存放和客户交易处理的差异。其中,在业务系统中客户信息以及客户交易可以账户来标识。
结合应用场景100,以双11场景下的高并发的实时扣款交易为例,在生产环境下业务系统101的运行逻辑示例如下:消费者通过用户终端103与第三方支付系统进行交互,发起扣款交易请求——>该扣款交易请求由第三方支付系统103发送到业务系统101——>业务系统101通过内部的A、B、C三个子系统的协作,进行信息查验、账户可用性筛查、账户扣款等操作——>业务系统101将扣款信息同步反馈给第三方支付系统102,再由第三方支付系统102反馈给用户终端101,从而消费者可以通过用户终端101实时查看到扣款情况。
本公开实施例的测试方法可以复用生产环境下的业务系统101。具体而言,相比于应用场景100而言,本公开实施例在测试场景中可以通过第三方支付系统102的模拟来替代第三方支付系统102与用户终端103的交互,同时通过业务系统101开设虚拟账户来替代真实账户对业务系统101的工作流程进行完整模拟和测试。其中,本公开实施例可以复用生产环境下业务系统101的全量设备,并在复用业务系统101中的各个子系统各自的路由规则的基础上,使虚拟账户在业务系统101中的各个子系统中的分布情况与生产环境下业务系统101中的各个子系统中真实账户的分布情况相当或相同,以此方式可以对业务系统101以类似与生产环境的方式运行,达到对业务系统101的工作流程达到近乎完全真实的模拟。
在对业务系统101进行测试时,可以安排在生产业务低峰期进行,以实现资源隔离。例如,商业银行大多为7*24小时系统,一般不可停机安排测试。在这种情况下可以选取凌晨业务低峰期,推迟批量业务,避免生产业务场景与测试场景互相影响。
由此可见,根据本公开实施例可以使用真实的生产环境进行测试,即测试使用的设备与实际业务开展后使用的设备完全一致,可以确保设备的真实性,从而可以提供可靠的性能测试数据。
图2示意性示出了根据本公开实施例的测试方法的流程图。
如图2所示,根据本公开的实施例该测试方法可以包括操作S210~操作S230。该测试方法可以用于对基于账户的业务系统101进行测试,业务系统101包括N个子系统(例如,3个子系统),每个子系统包括S个服务器,N、S分别为大于等于1的整数。
在操作S210,开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数。
例如,可以按照真实账户的开户逻辑开设Y个虚拟账户,并且设置Y个虚拟账户的功能,以隔离Y个虚拟账户与生产环境中的真实业务。
为了确保测试用虚拟账户不会与生产系统内的真实账户发生账务关系。虚拟账户可以采用只开卡不开实体且用户名以测试加数字的方式进行开立,杜绝发生临柜业务。可以设置虚拟账户开立后无法签订协议,杜绝线上业务。虚拟账户所属协议可以设置为仅通过后台变更方式进行签订,确保虚拟账户只能使用于测试场景的业务,以此方式可以避免混淆测试数据和生产数据的问题。
在操作S220,从Y个虚拟账户中筛选出同时满足N个子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数。其中,一个子系统的账户分布规则为X个虚拟账户经子系统的路由规则分配之后,在子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同。
例如,假设在生产环境下,业务系统101中经过A子系统的路由规则后在A子系统中的各个服务器的真实账户的分布比例为100:400:500,经过B子系统的路由规则后在B子系统中的各个服务器的真实账户的分布比例为100∶200∶300∶400,经过C子系统的路由规则后在C子系统中的各个服务器的真实账户的分布比例为200∶200∶300∶300。那么从Y个虚拟账户筛选出的这X个虚拟账户,就需要在各个子系统中经过各子系统各自的路由规则之后,能够满足相应的分布比例,达到同时在不同子系统下都能实现负载均衡的效果,实现虚拟账户的分布与真实账户的分布相同或一致,使测试过程更为真实有效。
在操作S230,基于X个虚拟账户,对业务系统101进行测试。
具体地,例如将X个虚拟账户经由每个子系统的路由规则部署在每个子系统的各个服务器上,然后通过N个子系统处理基于X个虚拟账户的交易,以对业务系统101进行测试。
测试可以包括负载测试和压力测试。负载测试可以确定在各种工作负载下系统的性能,目标是测试当负载逐渐增加时,系统各项性能指标的变化情况。压力测试是通过确定一个系统的瓶颈或者不能接受的性能点,来获得系统能提供的最大服务级别的测试。在测试过程中,可以使用生产监控策略对压测过程中生产环境进行监控并分析。
本公开实施例通过使用全量生产服务器达到全量服务器支撑测试的目的,可以适应各种类型的系统架构,可同时使用在集中式的系统架构和分布式系统架构中,具有普适性。可以复用生产系统的设备以及运行逻辑,对于系统侵入性较小,无需大幅度改造系统。
根据本公开的实施例,X个虚拟账户在每个子系统中的存储逻辑与真实账户在每个子系统中的存储逻辑一致。
本公开实施例的测试方法使用的是真实的生产环境,所使用的数据表和数据表中的背景数据(即,真实账户数据)都为生产数据,和生产完全一致,可确保背景数据真实。由此可见,相比于现有技术中通过提取生产数据变形造数,数据基础存在片面性,本公开实施例可以确保背景数据无限接近真实,而且可以近似模拟生产实际的数据存储分布情况。
在进行测试时可以对基于X个虚拟账户产生的交易的交易序列号添加特定的标记,以将测试交易与真实交易区分开来。例如,通过在每一笔订单的末尾加上测试专用的英文标志,一方面确保测试交易可纳入整个对账系统,测试交易涉及的交易及金额可被实际统计,另一方面也可以区分出正常交易和测试交易,实现对账隔离。
图3示意性示出了根据本公开一实施例的测试方法中从Y个虚拟账户中筛选出X个虚拟账户的流程图。
如图3所示,根据本公开实施例操作S220可以包括操作S301~操作S308,其中操作S302~操作S306循环执行,直到Y个虚拟账户全部被抽取过为止。
在操作S301,对Y个虚拟账户进行随机排序。
然后在操作S302~操作S306中按顺序逐次抽取出一个虚拟账户并按照各个子系统的账户分布规则进行筛选。
具体地,在操作S302,每次按顺序从Y个虚拟账户中抽取出一个虚拟账户作为第一虚拟账户。
然后在操作S303,将第一虚拟账户按照每个子系统的路由规则分配到每个子系统的S个服务器的其中之一。
接下来在操作S304,判断N个子系统中被分配到第一虚拟账户的服务器是否存在有账户数量超过该服务器的测试负载上限的情形。如果有则执行操作S305,丢弃当前作为第一虚拟账户的该虚拟账户。如果没有则执行操作S306,选择该当前作为第一虚拟账户的该虚拟账户。
每个服务器的测试负载上限值可以是在测试之初,根据所期望的测试用虚拟账户的目标数量、以及每个子系统的S个服务器在生产环境下真实账户的数量分布比例来确定的。例如,根据本公开的一个实施例,可以设置X的目标值,然后基于目标值、以及每个子系统的S个服务器在生产环境下真实账户的数量分布比例,确定在每个子系统中各个服务器的测试负载上限。
接着在操作S307中判断Y个虚拟账户中是否还有未被抽取过的虚拟账户。如果有则重复执行操作S302~操作S306;如果没有则执行操作S308,将选择的虚拟账户汇集得到X个虚拟账户。
例如,假设Y为25000,设置X的目标值为5000。在应用场景100中,A子系统中的各个服务器的真实账户的分布比例为100∶400∶500,B子系统中的各个服务器的真实账户的分布比例为100∶200∶300∶400,C子系统中的各个服务器的真实账户的分布比例为600∶400。从而,A子系统的一个服务器(例如,标记为a1)的测试负载上限为500个账户。那么,假设在某次抽取到一个虚拟账户在各个子系统中按照路由规则进行分配,其中,在A子系统中该虚拟账户被分配到了服务器a1,而这时服务器a1上的虚拟账户的数量达到了501,超出了服务器a1的测试负载上限,那么该虚拟账户将会被丢弃。以此方式,从25000个虚拟账户中不断筛选,将不能够同时满足所有子系统的账户分布规则的虚拟账户筛除,保留下来的虚拟账户则可以用于测试,满足数据分布的真实性要求。
图4示意性示出了根据本公开另一实施例的筛选出X接近或达到目标值的X个虚拟账户的流程图。
如图4所示,根据本公开的实施例,当按照图3示意的操作S301~操作S308对Y个虚拟账户从头到尾筛选过一轮之后,得到的虚拟账户的个数X不满足设定的目标值时,可以循环执行操作S301~操作S308的从Y个虚拟账户中筛选X个虚拟账户的过程,并在每一轮筛选结束后通过操作S401和操作S402的判断是否需要再次循环,如不需要再次循环时执行操作S403。
具体地,在每一轮循环执行参考图3所示的操作S301~操作S308时均对Y个虚拟账户进行随机排序,这样就会改变从Y个虚拟账户中抽取虚拟账户的顺序,从而会改变各个虚拟账户被分配到各个子系统的服务器的顺序,进而有可能在不同的循环中筛选出不同的虚拟账户。
在操作S301~操作S308的每一轮循环之后执行操作S401~操作S403。
在操作S401,判断本轮从Y个虚拟账户中筛选出的X个虚拟账户的数量X是否达到目标值。若是则终止循环并执行操作S403;若否则执行操作S402。
在操作S402,判断截止当前操作S301~操作S308的循环次数是否达到预定次数(例如,1000次)。如果是,则终止循环并执行操作S403;否则执行新一轮的循环操作S301~操作S308,
在操作S403,选择X最接近或达到目标值的一轮循环中得到的X个虚拟账户,作为最终选择出的X个虚拟账户。
以下再以业务系统101为例进行更为形象地示例性说明。
业务系统101存在A、B、C三个子系统。经过调查A的子系统中的各个服务器的真实账户的数量分布比例为a1∶a2∶a3,B的子系统中的各个服务器的真实账户的数量分布比例为b1∶b2∶b3∶b4,C的子系统中的各个服务器的真实账户的数量分布比例为c1∶c2。
需要从Y个虚拟账户中筛选出在复用各个子系统各自的路由规则的前提下,还要满足各个子系统的账户数量分布比例的X个虚拟账户,假设设置X的目标值为M。那么A子系统中不同服务器的测试负载上限(即,所需的虚拟账户的数量)分别为为M*a1/(a1+a2+a3)、M*a2/(a1+a2+a3)、M*a3/(a1+a2+a3);B子系统中不同服务器的测试负载上限分别M*b1/(b1+b2+b3+b4)、M*b2/(b1+b2+b3+b4)、M*b3/(b1+b2+b3+b4)、M*b3/(b1+b2+b3+b4),C子系统中不同服务器的测试负载上限分别M*c1/(c1+c2)、M*c2/(c1+c2)。
进行筛选时,第一步,对Y个虚拟账户随机排序。
第二步,抽取第1个虚拟账户,若在A子系统中路由至服务器ak,则服务器ak中需要的虚拟账户数量的上限减少1;若在B子系统中路由至服务器bn,则服务器bn中需要的虚拟账户数量的上限减少1;若在C子系统中路由至服务器cm,则服务器cm中需要的虚拟账户数量的上限减少1。
第三步,接下来循环上述第二步的操作,每次按顺序从Y个虚拟账户中抽取出一个虚拟账户,在A、B、C三个子系统中进行分配。从一个虚拟账户被分配到的服务器所需的虚拟账户数量上限变为0时,丢弃该虚拟账户。
第四步,当Y个虚拟账户全部使用完后,筛选出的X个虚拟账户的数量达不到目标值M时,记录当前筛选出的X个虚拟账户,并重复上述第一步~第三步,以重复筛选。
第五步,当某一轮循环中筛选出的虚拟账户的数量X=M时,循环停止。或者,极端情况下,反复重Y个虚拟账户中筛选的虚拟账户数量X总是无法达到M时,循环至较高的次数(如10000次)终止循环,以最接近M的一组虚拟账户作为最终筛选出的X个虚拟账户。
图5示意性示出了根据本公开实施例的测试装置500的框图。
如图5所示,根据本公开的实施例该测试装置500可以包括账户开设模块510、筛选模块520、以及测试模块530。根据本公开的另一些实施例,该测试装置500还可以进一步包括测试目标设置模块540、循环模块550、以及确定模块560。该测试装置500可以用于对基于账户的业务系统进行测试。业务系统包括N个子系统,每个子系统包括S个服务器,N、S分别为大于等于1的整数。该测试装置500可以用于实现参考图2~图4所描述的测试方法。
账户开设模块510用于开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数。
筛选模块520用于从Y个虚拟账户中筛选出同时满足N个子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个子系统的账户分布规则为X个虚拟账户经子系统的路由规则分配之后,在子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同。
测试模块530用于基于X个虚拟账户,对业务系统进行测试。
测试目标设置模块540用于设置X的目标值,目标值为小于等于Y的正整数,以及基于目标值、以及每个子系统的S个服务器在生产环境下真实账户的数量分布比例,确定在每个子系统中各个服务器的测试负载上限。
循环模块550用于在基于X个虚拟账户,对业务系统进行测试之前,当X不等于目标值时,触发筛选模块520重复执行上述操作S301~操作S308,从Y个虚拟账户中筛选出同时满足N个子系统各自的账户分布规则的X个虚拟账户的操作,直到X达到目标值,或者直到循环次数达到预定次数。
确定模块560用于选择最接近或达到目标值的一轮循环中得到的X个虚拟账户,作为最终选择出的X个虚拟账户。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,账户开设模块510、筛选模块520、测试模块530、目标设置模块540、循环模块550、以及确定模块560中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,账户开设模块510、筛选模块520、测试模块530、目标设置模块540、循环模块550、以及确定模块560中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,账户开设模块510、筛选模块520、测试模块530、目标设置模块540、循环模块550、以及确定模块560中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图6示意性示出了适于实现根据本公开实施例的测试方法的计算机系统的方框图。图6示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,根据本公开实施例的计算机系统600包括处理器601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 603中,存储有计算机系统600操作所需的各种程序和数据。处理器601、ROM602以及RAM 603通过总线604彼此相连。处理器601通过执行ROM 602和/或RAM 603中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 602和RAM 603以外的一个或多个存储器中。处理器601也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,计算机系统600还可以包括输入/输出(I/O)接口605,输入/输出(I/O)接口605也连接至总线604。系统600还可以包括连接至I/O接口605的以下部件中的一项或多项:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被处理器601执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 602和/或RAM 603和/或ROM 602和RAM 603以外的一个或多个存储器。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。电应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。

Claims (12)

1.一种测试方法,用于对基于账户的业务系统进行测试,所述业务系统包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数;其中,所述测试方法包括:
开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数;
从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同;以及
基于所述X个虚拟账户,对所述业务系统进行测试。
2.根据权利要求1所述的方法,其中,所述从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户包括:
将第一虚拟账户按照每个所述子系统的路由规则分配到每个所述子系统的S个服务器的其中之一;以及
当N个所述子系统的每个所述子系统中被分配到所述第一虚拟账户的服务器的账户数量均未超出服务器的测试负载上限时,选择所述第一虚拟账户;或者当N个所述子系统的至少一个子系统中被分配到所述第一虚拟账户的服务器的账户数量超过服务器的测试负载上限时,丢弃所述第一虚拟账户;
其中,
所述第一虚拟账户为Y个虚拟账户中的任意一个。
3.根据权利要求2所述的方法,其中,所述从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户还包括:
对所述Y个虚拟账户进行随机排序;以及
按顺序逐次从所述Y个虚拟账户中抽取出一个虚拟账户作为所述第一虚拟账户。
4.根据权利要求3所述的方法,其中,所述方法还包括:
设置X的目标值,所述目标值为小于等于Y的正整数;以及
基于所述目标值、以及每个所述子系统的S个服务器在生产环境下真实账户的数量分布比例,确定在每个所述子系统中各个服务器的测试负载上限。
5.根据权利要求4所述的方法,其中,所述在基于所述X个虚拟账户,对所述业务系统进行测试之前,所述方法还包括:
当X不等于所述目标值时,重复执行从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户的操作,直到X达到所述目标值,或者直到循环次数达到预定次数;
选择最接近或达到所述目标值的一轮循环中得到的X个虚拟账户,作为最终选择出的所述X个虚拟账户。
6.根据权利要求1所述的方法,其中,所述基于所述X个虚拟账户,对所述业务系统进行测试包括:
将所述X个虚拟账户经由每个所述子系统的路由规则部署在每个所述子系统的各个服务器上;以及
通过所述N个子系统处理基于所述X个虚拟账户的交易,以对所述业务系统进行测试。
7.根据权利要求1所述的方法,其中,所述基于所述X个虚拟账户,对所述业务系统进行测试包括:
对基于所述X个虚拟账户产生的交易的交易序列号添加特定的标记,以将测试交易与真实交易区分开来。
8.根据权利要求1所述的方法,其中,所述X个虚拟账户在所述每个子系统中的存储逻辑与真实账户在每个所述子系统中的存储逻辑一致。
9.根据权利要求1所述的方法,其中,所述开设用于测试的Y个虚拟账户包括:
按照真实账户的开户逻辑开设所述Y个虚拟账户;以及
设置所述Y个虚拟账户的功能,以隔离所述Y个虚拟账户与生产环境中的真实业务。
10.一种测试装置,用于对基于账户的业务系统进行测试,所述业务系统包括N个子系统,每个所述子系统包括S个服务器,N、S分别为大于等于1的整数;其中,所述测试装置包括:
账户开设模块,用于开设用于测试的Y个虚拟账户,其中,Y为大于等于1的整数;
筛选模块,用于从所述Y个虚拟账户中筛选出同时满足N个所述子系统各自的账户分布规则的X个虚拟账户,其中,X为小于等于Y的整数;其中,一个所述子系统的账户分布规则为所述X个虚拟账户经所述子系统的路由规则分配之后,在所述子系统的S个服务器中的数量分布比例与在生产环境下真实账户的数量分布比例相同;以及
测试模块,用于基于所述X个虚拟账户,对所述业务系统进行测试。
11.一种测试系统,包括:
一个或多个存储器,其上存储有计算机可执行指令;
一个或多个处理器,所述处理器执行所述指令,以实现根据权利要求1~9中任一项所述的方法。
12.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~9中任一项所述的方法。
CN202010785929.5A 2020-08-06 2020-08-06 测试方法、测试装置、测试系统及介质 Active CN111881057B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010785929.5A CN111881057B (zh) 2020-08-06 2020-08-06 测试方法、测试装置、测试系统及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010785929.5A CN111881057B (zh) 2020-08-06 2020-08-06 测试方法、测试装置、测试系统及介质

Publications (2)

Publication Number Publication Date
CN111881057A true CN111881057A (zh) 2020-11-03
CN111881057B CN111881057B (zh) 2023-08-15

Family

ID=73210997

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010785929.5A Active CN111881057B (zh) 2020-08-06 2020-08-06 测试方法、测试装置、测试系统及介质

Country Status (1)

Country Link
CN (1) CN111881057B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113535574A (zh) * 2021-07-26 2021-10-22 工银科技有限公司 一种测试用户数据的自动生成方法、装置、设备和介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015000117A1 (zh) * 2013-07-01 2015-01-08 华为技术有限公司 一种模拟拨测用户侧和网络侧的方法及设备
CN106528426A (zh) * 2016-11-21 2017-03-22 北京蓝海讯通科技股份有限公司 一种测试指标的分布式计算系统
CN107179986A (zh) * 2016-03-10 2017-09-19 阿里巴巴集团控股有限公司 业务系统的压力测试方法和装置
CN108075951A (zh) * 2017-12-26 2018-05-25 珠海金山网络游戏科技有限公司 一种基于玩家分布的服务器压力测试方法和装置
CN111309594A (zh) * 2020-01-17 2020-06-19 腾讯科技(深圳)有限公司 一种系统测试方法、装置、设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015000117A1 (zh) * 2013-07-01 2015-01-08 华为技术有限公司 一种模拟拨测用户侧和网络侧的方法及设备
CN107179986A (zh) * 2016-03-10 2017-09-19 阿里巴巴集团控股有限公司 业务系统的压力测试方法和装置
CN106528426A (zh) * 2016-11-21 2017-03-22 北京蓝海讯通科技股份有限公司 一种测试指标的分布式计算系统
CN108075951A (zh) * 2017-12-26 2018-05-25 珠海金山网络游戏科技有限公司 一种基于玩家分布的服务器压力测试方法和装置
CN111309594A (zh) * 2020-01-17 2020-06-19 腾讯科技(深圳)有限公司 一种系统测试方法、装置、设备及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113535574A (zh) * 2021-07-26 2021-10-22 工银科技有限公司 一种测试用户数据的自动生成方法、装置、设备和介质
CN113535574B (zh) * 2021-07-26 2022-07-19 工银科技有限公司 一种测试用户数据的自动生成方法、装置、设备和介质

Also Published As

Publication number Publication date
CN111881057B (zh) 2023-08-15

Similar Documents

Publication Publication Date Title
CN103544064B (zh) 云计算方法、云管理平台和客户端
CN110377520B (zh) 交易场景的测试方法及装置、电子设备和可读存储介质
CN110262977A (zh) 一种全链路性能测试方法、装置、计算设备及存储介质
US7328134B1 (en) Enterprise integration test tool
CN110389903B (zh) 测试环境部署方法和装置、电子设备和可读存储介质
KR102232866B1 (ko) 인공지능 학습데이터 생성을 위한 크라우드소싱 기반 프로젝트의 기능요소 단위 작업 분배 방법
US9971662B2 (en) Compare point detection in multi-threaded computing environments
CA3059719C (en) Payment processing method, device, medium and electronic device
US20170200113A1 (en) Platform configuration selection based on a degraded makespan
CN111881057A (zh) 测试方法、测试装置、测试系统及介质
CN109739700A (zh) 一种接口测试方法和装置
CN114817050A (zh) 任务执行方法及装置、电子设备和计算机可读存储介质
CN110635961B (zh) 服务器的压测方法、装置和系统
CN112257362B (zh) 逻辑代码的验证方法、验证装置以及存储介质
WO2019104844A1 (zh) 货币基金系统自动性能测试方法、装置、设备及存储介质
CN112785287A (zh) 用于计费结算的方法、装置、计算机系统及介质
CN115048255A (zh) 一种自动化测试方法、装置,主机及存储介质
CN110737572B (zh) 大数据平台资源抢占测试方法、系统、终端及存储介质
KR102155747B1 (ko) 인공지능 학습데이터 생성을 위한 크라우드소싱 기반 프로젝트의 반려된 오브젝트 수에 기반하여 최소 재작업 및 재검수 시간을 설정하는 방법
US7917407B1 (en) Computer-implemented system and method for defining architecture of a computer system
CN114500514B (zh) 用于云存储的文件传输方法及装置、电子设备和存储介质
CN112084106B (zh) 测试数据选取的方法、装置、计算设备及计算机存储介质
CN114666256B (zh) 灰度测试方法、装置、设备、介质
CN112579046B (zh) 用户故事分析方法、装置、电子设备及存储介质
CN116974744B (zh) 一种用于共享空间的交互控制系统与交互控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant