CN117439928A - 业务系统的链路测试方法、装置、电子设备及存储介质 - Google Patents

业务系统的链路测试方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN117439928A
CN117439928A CN202310800609.6A CN202310800609A CN117439928A CN 117439928 A CN117439928 A CN 117439928A CN 202310800609 A CN202310800609 A CN 202310800609A CN 117439928 A CN117439928 A CN 117439928A
Authority
CN
China
Prior art keywords
description text
node
differential
link
nodes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310800609.6A
Other languages
English (en)
Inventor
富巍
高铮
吴翠雁
刘桢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial and Commercial Bank of China Ltd ICBC
Original Assignee
Industrial and Commercial Bank of China Ltd ICBC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial and Commercial Bank of China Ltd ICBC filed Critical Industrial and Commercial Bank of China Ltd ICBC
Priority to CN202310800609.6A priority Critical patent/CN117439928A/zh
Publication of CN117439928A publication Critical patent/CN117439928A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level
    • H04L43/0882Utilisation of link capacity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823Errors, e.g. transmission errors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种业务系统的链路测试方法、装置、电子设备及存储介质,可以应用于大数据技术领域。该方法包括:获取业务系统的节点数据,其中,业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本;根据第一描述文本和第二描述文本,确定M个差异链路,M≥1;以及根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。

Description

业务系统的链路测试方法、装置、电子设备及存储介质
技术领域
本公开涉及大数据技术领域,更具体地涉及一种业务系统的链路测试方法、装置、电子设备及存储介质。
背景技术
随着计算机技术的不断发展,用于提供服务的业务系统框架的复杂度也不断提升。相关技术中,一般通过灰度发布平滑业务系统的版本升级过程。灰度发布是指:一部分用户使用旧版本业务系统,另一部分用户使用新版本业务系统,在新版本业务系统测试无误的情况下逐步扩大新版本业务系统的使用范围,直至针对完成业务系统升级的过程。
在实现上述发明构思的过程中,发明人发现:针对复杂度较高的业务系统,通过人工定位新增的业务系统链路、并对新增的业务系统链路进行测试时,存在链路定位不准确、测试效果不好、测试效率低的技术问题。
发明内容
鉴于上述问题,本公开提供了一种业务系统的链路测试方法、装置、电子设备及存储介质。
根据本公开的第一个方面,提供了一种业务系统的链路测试方法,包括:
获取业务系统的节点数据,其中,业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;
根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,其中,第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,第二描述文本用于描述在新版本环境下多个第二节点的数据结构;
根据第一描述文本和第二描述文本,确定M个差异链路,其中,差异链路表征仅存在第一描述文本或第二描述文本内的节点构成的链路,M≥1;以及
根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。
根据本公开的实施例,其中,根据第一描述文本和第二描述文本,确定M个差异链路,包括:
对第一描述文本进行拆分,得到P个第一比较因子,其中,第一比较因子表征由至少一个第一节点构成的链路,P≥1;
将P个第一比较因子与第二描述文本进行匹配,得到针对P个第一比较因子的P个第一匹配结果;以及
根据P个第一匹配结果,确定M个差异链路。
根据本公开的实施例,其中,对第一描述文本进行拆分,得到P个第一比较因子,包括:
基于T个拆分长度对第一描述文本进行T轮拆分,得到P个第一比较因子,其中,每轮拆分基于一个拆分长度进行,T个拆分长度从单个第一节点开始,朝着第一描述文本包括的全部第一节点的数量方向变化,T≥1。
根据本公开的实施例,其中,根据P个第一匹配结果,确定M个差异链路,包括:针对每个第一匹配结果,
响应于确定第一匹配结果表征第一比较因子与第二描述文本不匹配,将第一比较因子确定为差异链路。
根据本公开的实施例,其中,根据P个第一匹配结果,确定M个差异链路,还包括:
响应于确定N个第一匹配结果表征第一比较因子与第二描述文本不匹配,确定N个第一差异链路,P≥N≥1;
对第二描述文本进行拆分,得到Q个第二比较因子,其中,第二比较因子表征第二描述文本中由至少一个第二节点构成的链路,Q≥1;
将Q个第二比较因子与第一描述文本进行匹配,得到针对Q个第二比较因子的Q个第二匹配结果;
根据Q个第二匹配结果,确定L个第二差异链路,Q≥L≥1;以及
根据第一差异链路和第二差异链路的数量关系,从第一差异链路或第二差异链路中确定差异链路。
根据本公开的实施例,其中,第一关联关系包括第一节点的第一父节点和第一子节点,第二关联关系包括第二节点的第二父节点和第二子节点;
根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,包括:
根据多个第一节点的第一父节点、第一子节点和根节点数据,生成第一异构树形业务链,其中,第一异构树形业务链表征在旧版本环境下多个第一节点构成的业务链;
根据多个第二节点的第二父节点、第二子节点和根节点数据,生成第二异构树形业务链,其中,第二异构树形业务链表征在新版本环境下多个第二节点构成的业务链;
将第一异构树形业务链转换为第一描述文本;以及
将第二异构树形业务链转换为第二描述文本。
根据本公开的实施例,其中,将第一异构树形业务链转换为第一描述文本,包括:
将第一异构树形业务链中的每个第一节点转换为节点描述文本;以及
根据多个第一节点之间的第一关联关系,组合每个第一节点的节点描述文本,得到第一描述文本。
根据本公开的实施例,该方法还包括:
获取业务系统的操作日志,其中,操作日志包括追踪指针和多个执行节点;以及
基于操作日志,将追踪指针相同的至少一个执行节点串联起来,得到实际执行链路。
根据本公开的实施例,其中,根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果,包括:
将M个差异链路和实际执行链路进行比较,确定实际执行链路包括的S个重复差异链路,其中,M个差异链路包括S个重复差异链路和(M-S)个未重复差异链路,M≥S≥1;
针对重复差异链路,根据重复差异链路的技术指标值,确定第一测试结果;以及
针对未重复差异链路,根据未重复差异链路的业务指标值和技术指标值,确定第二测试结果。
根据本公开的实施例,其中,业务指标值包括以下至少其中之一:新增案例执行率和存量案例执行率;
技术指标值包括以下至少其中之一:监控报警数、交易平均响应时长、交易成功率、交易类型覆盖率、新版本流量、数据库异常报错数和系统性能指标值。
本公开的第二方面提供了一种业务系统的链路测试装置,包括:
获取模块,用于获取业务系统的节点数据,其中,所述业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,所述节点数据包括多个所述第一节点之间的第一关联关系、多个所述第二节点之间的第二关联关系和表征起始位置的根节点数据;
第一确定模块,用于根据所述第一关联关系、所述第二关联关系和所述根节点数据,确定第一描述文本和第二描述文本,其中,所述第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,所述第二描述文本用于描述在新版本环境下多个第二节点的数据结构;
第二确定模块,用于根据所述第一描述文本和所述第二描述文本,确定M个差异链路,其中,所述差异链路表征仅存在所述第一描述文本或所述第二描述文本内的节点构成的链路,M≥1;以及
第三确定模块,用于根据M个所述差异链路和所述业务系统的实际执行链路,确定针对每个所述差异链路的测试结果。
本公开的第三方面提供了一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得一个或多个处理器执行上述业务系统的链路测试方法。
本公开的第四方面还提供了一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行上述业务系统的链路测试方法。
本公开的第五方面还提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述业务系统的链路测试方法。
本公开的实施例由于从新版本业务系统和旧版本业务系统两方面出发,确定第一描述文本和第二描述文本,并基于第一描述文本和第二描述文本确定差异链路,因此,能够快速、准确、清晰地确定新旧版本之间的差异链路,实现新增链路的精准提炼。由于差异链路是根据静态的节点数据获取的、实际执行链路表征动态的实际执行信息,因此,根据差异链路和实际执行链路确定每个差异链路的测试结果可以提高测试准确率。
本公开的实施例通过获取业务系统的节点数据,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本;根据第一描述文本和第二描述文本,确定M个差异链路;根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果,能够提高业务系统链路测试的准确性和测试效率,从而避免新版本业务系统上线后出现风险的可能性、提升业务系统可用率和业务连续性、避免影响用户体验。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述内容以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的业务系统的链路测试方法的应用场景;
图2示意性示出了根据本公开实施例的业务系统的链路测试方法的流程图;
图3示意性示出了根据本公开实施例的确定差异链路方法的流程图;
图4示意性示出了根据本公开实施例的确定差异链路的应用场景图;
图5示意性示出了根据本公开实施例的确定第一描述文本和第二描述文本方法的流程图;
图6示意性示出了根据本公开一具体实施例的业务系统的链路测试流程图;
图7示意性示出了根据本公开实施例的链路测试系统框架;
图8示意性示出了根据本公开实施例的业务系统的链路测试装置的结构框图;以及
图9示意性示出了根据本公开实施例的适于业务系统的链路测试方法的电子设备的方框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
需要说明的是,本公开的业务系统的链路测试确定的方法和装置可用于金融领域在大数据技术领域,也可用于除金融领域之外的任意领域,如测试领域,本公开业务系统的链路测试的方法和装置的应用领域不做限定。
在本公开的技术方案中,所涉及的数据(如包括但不仅限于用户个人信息)的收集、存储、使用、加工、传输、提供、公开和应用等处理,均符合相关法律法规的规定,采取了必要保密措施,且不违背公序良俗。
在实际应用过程中,版本上线普遍采取灰度发布形式,以便在灰度版本期间,也即新版本运行期间,提前发现版本或系统配置问题。例如,开发人员通过分析业务系统的系统框架,定位新版本业务系统中新增的业务系统链路,并对新增的业务系统链路进行测试、以确定是否可以继续扩大新版本的使用范围。
然而,随着业务系统架构复杂度的不断提升,开发人员需要花费更多的时间了解、分析业务系统,以定位、测试新增的链路。由于定位、测试新增的链路的操作都是由人工实现的,因此,相关技术中存在链路定位不准确、测试效果不好、测试效率低的技术问题。
在链路定位不准确时,利用新版本业务系统提供的业务服务会出现多种错误,导致业务系统的安全风险增加,进而影响业务系统的可用率、业务连续性、以及影响用户的使用体验。
本公开的实施例提供了一种业务系统的链路测试方法,包括:获取业务系统的节点数据,其中,业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,其中,第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,第二描述文本用于描述在新版本环境下多个第二节点的数据结构;根据第一描述文本和第二描述文本,确定M个差异链路,其中,差异链路表征仅存在第一描述文本或第二描述文本内的节点构成的链路,M≥1;以及根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。
图1示意性示出了根据本公开实施例的业务系统的链路测试方法的应用场景。
如图1所示,根据该实施例的应用场景100可以包括第一终端设备101、第二终端设备102、第三终端设备103、网络104和服务器105。网络104用以在第一终端设备101、第二终端设备102、第三终端设备103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用第一终端设备101、第二终端设备102、第三终端设备103中的至少一个通过网络104与服务器105交互,以接收或发送消息等。第一终端设备101、第二终端设备102、第三终端设备103上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。
例如,用户可以使用第一终端设备101、第二终端设备102、第三终端设备103中安装的银行客户端,向配备业务系统的服务器105发送业务请求。
第一终端设备101、第二终端设备102、第三终端设备103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器,例如对用户利用第一终端设备101、第二终端设备102、第三终端设备103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理,并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。
例如,服务器105可以是分布式服务器、云服务器和集中式服务器。服务器105可以同时安装有旧版本业务系统和新版本业务服务器,并对业务系统的链路进行测试。
需要说明的是,本公开实施例所提供的业务系统的链路测试方法一般可以由服务器105执行。相应地,本公开实施例所提供的业务系统的链路测试装置一般可以设置于服务器105中。本公开实施例所提供的业务系统的链路测试方法也可以由不同于服务器105且能够与第一终端设备101、第二终端设备102、第三终端设备103和/或服务器105通信的服务器或服务器集群执行。相应地,本公开实施例所提供的业务系统的链路测试装置也可以设置于不同于服务器105且能够与第一终端设备101、第二终端设备102、第三终端设备103和/或服务器105通信的服务器或服务器集群中。
例如,服务器105从第一终端设备101、第二终端设备102、第三终端设备103中任意一个获取业务系统的节点数据,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,其中,第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,第二描述文本用于描述在新版本环境下多个第二节点的数据结构;根据第一描述文本和第二描述文本,确定M个差异链路,其中,差异链路表征仅存在第一描述文本或第二描述文本内的节点构成的链路,M≥1;以及根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
以下将基于图1描述的场景,通过图2~图6对公开实施例的业务系统的链路测试方法进行详细描述。
图2示意性示出了根据本公开实施例的业务系统的链路测试方法的流程图。
如图2所示,该方法200包括操作S210~S240。
在操作S210,获取业务系统的节点数据,其中,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据。
根据本公开的实施例,业务系统用于向用户提供多种业务。
例如,业务系统可以是向用户提供交易业务的系统,如,手机银行客户端的业务系统、手机银行网页端的业务系统。业务系统还可以是向用户提供其他业务的系统,例如,提供购物业务的系统、提供通信业务的系统、提供办公业务的系统等。
根据本公开的实施例,业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点。具体地,可以根据多个第一节点之间的第一关联关系,调用至少一个第一节点执行至少一个旧版本业务。还可以根据多个第二节点之间的第二关联关系,调用至少一个第二节点执行至少一个新版本业务
根据本公开的实施例,新版本业务系统用于执行新版本业务,旧版本业务系统用于执行旧版本业务。新版本业务系统与旧版本业务系统之间一般只存在部分业务区别。
例如,新版本业务系统的升级操作包括:升级查询业务A、新增投资业务、优化交易业务流程等。由此,用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点可以存在相同的节点。
例如,新版本业务系统与旧版本业务系统相比,新增了投资业务,其他业务均未发生变化。其中,用于执行投资业务的节点包括节点1、节点2和节点3。因此,多个第二节点包括多个第一节点、以及新增的节点1、节点2和节点3。
在操作S220,根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本。
根据本公开的实施例,第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,第二描述文本用于描述在新版本环境下多个第二节点的数据结构。
根据本公开的实施例,旧版本环境可以理解为利用旧版本业务系统提供业务服务的环境,新版本环境可以理解为利用新版本业务系统提供业务服务环境。
根据本公开的实施例,根节点数据包括业务链的起始节点,也即根节点。
根据本公开的实施例,基于第一关联关系,可以将多个第一节点串联为多个业务链,多个业务链可以构成一个业务树,其中,由多个第一节点构成的业务树可以执行至少一个旧版本业务。第一描述文本用于描述由多个第一节点构成的业务树的数据结构。
根据本公开的实施例,基于第二关联关系,可以将多个第二节点串联为多个业务链,多个业务链可以构成一个业务树,其中,由多个第二节点构成的业务树可以执行至少一个新版本业务。第二描述文本用于描述由多个第二节点构成的业务树的数据结构。
例如,将节点4作为根节点,可以将节点4、节点5、节点6和节点7串联得为业务链“节点4-节点5-节点6”和“节点4-节点7”,用于执行业务A。
在操作S230,根据第一描述文本和第二描述文本,确定M个差异链路,M≥1。
根据本公开的实施例,差异链路表征仅存在所述第一描述文本或所述第二描述文本内的节点构成的链路。
根据本公开的实施例,相比于旧版本业务系统,新版本业务系统可以增加节点或减少节点。因此,通过比对第一描述文本和第二描述文本,可以确定新版本业务系统和旧版本业务系统之间的差异节点、以及由差异节点构成的差异链路。
例如,在新版本业务系统增加节点的情况下,差异节点均为新版本业务系统中新增的第二节点,差异链路为由增加节点构成的链路。在新版本业务系统减少节点的情况下,差异节点均为旧版本业务系统中未删除的第一节点,差异链路为由未删除的第一节点构成的链路。
根据本公开的实施例,在新版本业务系统或旧版本业务系统中,由于业务系统架构的复杂度较高,多个业务之间存在关联,由此,可以从一个节点处产生两个分支,构成两个业务链路。因此,通过比对第一描述文本和第二描述文本得到的多个差异节点可以构成多个差异链路。
在操作S240,根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。
根据本公开的实施例,在灰度发布中,可以向用户群体A开放新版本业务系统的使用权限,也即用户群体A处于新版本环境中。用户群体A中的用户可以向新版本业务系统请求多种业务服务。在实际使用过程中,用户群体A中的用户可能会使用到新版本业务环境升级或新增的业务,也可能不会使用到上述升级或新增的业务。
根据本公开的实施例,实际执行链路用于表征新版本业务系统中被使用过的业务链。
例如,新版本业务系统中新增了查询业务A,查询业务A包括业务链1和业务链2。实际执行链路表征只有业务链1被使用过,业务链2没有被使用过。
根据本公开的实施例,在版本升级上线的场景中,如果升级或新增业务、业务链没有被使用过,也就表示针对升级或新增业务的测试没有实际意义;如果升级或新增业务、业务链被使用过,但使用用户较少,也无法准确地确定测试结果。因此,通过引入实际执行链路,并将实际执行链路与差异链路进行比对,以便针对不同的比对情况确定不同的转正策略,即扩大/不改变/缩小新版本业务系统的使用范围。
本公开的实施例由于从新版本业务系统和旧版本业务系统两方面出发,确定第一描述文本和第二描述文本,并基于第一描述文本和第二描述文本确定差异链路,因此,能够快速、准确、清晰地确定新旧版本之间的差异链路,实现新增链路的精准提炼。由于差异链路是根据静态的节点数据获取的、实际执行链路表征动态的实际执行信息,因此,根据差异链路和实际执行链路确定每个差异链路的测试结果可以提高测试准确率。
本公开的实施例通过获取业务系统的节点数据,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据;根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本;根据第一描述文本和第二描述文本,确定M个差异链路;根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果,能够提高业务系统链路测试的准确性和测试效率,从而避免新版本业务系统上线后出现风险的可能性、提升业务系统可用率和业务连续性、避免影响用户体验。
根据本公开的实施例,第一描述文本和第二描述文本可以是线性描述文本,用于描述从根节点开始的多个业务链。例如,第一描述文本和第二描述文本可以是线性字符串。
根据本公开的实施例,第一描述文本和第二描述文本中对每个节点的描述文本可以为字符串。通过表征多个节点的多个字符串串接得到线性字符串,其中,上述节点可以为第一描述文本中的第一节点,也可以为第二描述文本中的第二节点。
例如,单独节点a的字符串为node(a)=”[”+info(a)+”]”。对于包括两个2个子节点a1、a2的节点a,节点a的字符串为node(a)=”[”+info(a)+”[”+node(a1)+”]”+”[”+node(a2)+”]”+”]”=[info(a)[info(a1)][info(a2)]],可以理解,“a-a1”和“a-a2”为两个业务链。
对于具有一个根节点a,两个子节点a1、a2,且a1有1个子节点b1的数据结构S的线性字符串为:S=node(a)=”[”+info(a)+”[”+info(a1)+node(b1)+”]”+”[”+info(a2)+”]”+”]”=”[”+info(a)+”[”+info(a1)+”[”+info(b1)+”]”+”]”+”[”+info(a2)+”]”+”]”=[info(a)[info(a1)[info(b1)]][info(a2)]]。
图3示意性示出了根据本公开实施例的确定差异链路方法的流程图。
如图3所示,该实施例的确定差异链路方法300包括操作S331~操作S333,可以作为操作S230的一个具体实施例。
在操作S331,对第一描述文本进行拆分,得到P个第一比较因子,其中,第一比较因子表征由至少一个第一节点构成的链路,P≥1。
根据本公开的实施例,第一描述文本可以包括多个第一节点,可以根据多个第一节点之间的第一关联关系,将第一描述文本中所有的链路都拆分出来,得到第一比较因子。其中,第一比较因子也包括由单个第一节点构成的孤立链路。
例如,第一描述文本包括业务链“A1-B1-C1”和“A1-D1”,其中,节点A1、B1、C1、D1均为第一节点。第一比较因子包括“A1”、“B1”、“C1”、“D1”、“A1-B1”、“B1-C1”、“A1-D1”和“A1-B1-C1”。
根据本公开的实施例,由于第一描述文本可以是线性字符串,因此,拆分得到的多个第一比较因子也可以为表征至少一个节点构成的链路的线性字符串。
在操作S332,将P个第一比较因子与第二描述文本进行匹配,得到针对P个第一比较因子的P个第一匹配结果。
根据本公开的实施例,将P个第一比较因子与第二描述文本进行匹配包括:将每个第一比较因子都与第二描述文本进行匹配,得到与该比较因子对应的第一匹配结果。其中,第一匹配结果表征第二描述文本存在或不存在该第一比较因子。
根据本公开的实施例,匹配的方法可以包括:以第一比较因子为查询单元,在第二描述文本中查询是否存在与第一比较因子完全相同的查询单元。根据本公开的实施例,第一比较因子可以为线性字符串,查询单元可以为查询字符串。
在操作S333,根据P个第一匹配结果,确定M个差异链路。
根据本公开的实施例,在确定针对P个第一比较因子的P个第一匹配结果之后,可以根据第一匹配结果将第一比较因子确定为差异链路。还可以通过二次查询等操作,对第一匹配结果对应的第一比较因子进行筛选,以得到差异链路。
根据本公开的实施例,由于第一描述文本和第二描述文本均可以为线性字符串,因此,通过比较线性字符串的形式可以高效、快速、准确地确定第一匹配结果。在复杂度较高的业务系统的场景下,利用线性字符串的形式进行匹配,可以很大程度地降低匹配时间,提高匹配效率。
根据本公开的实施例,对第一描述文本进行拆分,得到P个第一比较因子包括:基于T个拆分长度对第一描述文本进行T轮拆分,得到P个第一比较因子,其中,每轮拆分基于一个拆分长度进行,T个拆分长度从单个第一节点开始,朝着第一描述文本包括的全部第一节点的数量方向变化,T≥1。
根据本公开的实施例,基于T个拆分长度对第一描述文本进行T轮拆分,得到P个第一比较因子包括:重复以下步骤,直至拆分长度与第一描述文本包括的全部第一节点的数量相同:
针对第t轮拆分,将t作为拆分长度;以拆分长度为基础,遍历第一描述文本,拆分得到包括t个第一节点的至少一个业务链,得到第t轮拆分的至少一个第一比较因子,t大于等于1,且t小于等于第一描述文本包括的全部第一节点的数量。
根据本公开的实施例,针对第1轮拆分,可以将单个第一节点作为拆分长度。
根据本公开的实施例,可以通过迭代识别算法实现比较因子的拆分。
根据本公开的实施例,以[info(a)[info(a1)[info(b1)][info(b2)]][info(a2)]]为例,迭代识别算法的逻辑为:以“[”和“]”为解析符,迭代自动化识别在[]内的所有可能节点子串,从而得到比较因子为info(a)、info(a1)、info(a2)、info(b1)、info(b2)、[info(a)[info(a1)、[info(a)info(a2)]、[info(a1)[info(b1)、[info(a1)info(b2)]、[info(a)[info(a1)[info(b1)]、[info(a)[info(a1)[info(b2)]共11个。其中,“[”和“]”为区分父子及父孙归属关系的重要符号,若在一个[]里则表示两个节点间存在链路。
在本公开的实施例,由于第一比较因子包括从单个节点构成的链路到第一描述文本中全部第一节点构成链路,因此,将拆分得到的P个第一比较因子与第二描述文本进行比对,能够最小化确定完全差异链路,降低链路分析数据量,提高后续测试效率。此外,由于第一比较因子是通过T轮迭代拆分得到的,因此,可以准确地拆分得到第一比较因子,以便基于第一比较因子精准提炼得到差异链路。
根据本公开的实施例,根据P个第一匹配结果,确定M个差异链路,包括:针对每个第一匹配结果,响应于确定第一匹配结果表征第一比较因子与第二描述文本不匹配,将第一比较因子确定为差异链路。
根据本公开的实施例,从P个第一比较因子中选取表征与第二描述文本不匹配的M个第一比较因子,并将M个第一比较因子作为M个差异链路。
根据本公开的实施例,根据P个第一匹配结果,确定M个差异链路,还包括:响应于确定N个第一匹配结果表征第一比较因子与第二描述文本不匹配,确定N个第一差异链路,P≥N≥1;对第二描述文本进行拆分,得到Q个第二比较因子,其中,第二比较因子表征第二描述文本中由至少一个第二节点构成的链路,Q≥1;将Q个第二比较因子与第一描述文本进行匹配,得到针对Q个第二比较因子的Q个第二匹配结果;根据Q个第二匹配结果,确定L个第二差异链路,Q≥L≥1;以及根据第一差异链路和第二差异链路的数量关系,从第一差异链路或第二差异链路中确定差异链路。
根据本公开的实施例,拆分第二比较因子的过程与拆分第一比较因子的过程类似。基于T’个拆分长度对第二描述文本进行T’轮拆分,得到Q个第二比较因子,其中,每轮拆分基于一个拆分长度进行,T’个拆分长度从单个第二节点开始,朝着第二描述文本包括的全部第二节点的数量方向变化,T’≥1。
根据本公开的实施例,确定第二匹配结果的方法与确定第一匹配结果的方法类似,在此不再赘述。根据Q个第二匹配结果,确定L个第二差异链路包括:针对每个第二匹配结果,响应于确定第二匹配结果表征第二比较因子与第一描述文本不匹配,将第二比较因子确定为第二差异链路。
根据本公开的实施例,根据第一差异链路和第二差异链路的数量关系,从第一差异链路或第二差异链路中确定差异链路包括:根据第一差异链路和第二差异链路的数量关系,将N个第一差异链路或L个第二差异链路确定为M’个待选差异链路;基于第一比较因子或第二比较因子,从M’个待选差异链路中筛选M个差异链路,M’=N或L。
根据本公开的实施例,根据第一差异链路和第二差异链路的数量关系,将N个第一差异链路或L个第二差异链路确定为待选差异链路包括:在N小于L的情况下,将L个第二差异链路确定为M’个待选差异链路,M’=L;在N大于L的情况下,将N个第一差异链路确定为M’个待选差异链路,M’=N。在N等于L的情况下,可以将N个第一差异链路或L个第二差异链路确定为M’个待选差异链路,此时,M’=L=N。
根据本公开的实施例,基于第一比较因子或第二比较因子,从M’个待选差异链路中筛选M个差异链路包括:在待选差异链路是第一差异链路的情况下,针对第m’个待选差异链路,在第m’个待选差异链路包括第二比较因子的情况下,删除第m’个待选差异链路;在第m’个待选差异链路不包括第二比较因子的情况下,将第m’个待选差异链路确定为差异链路。
图4示意性示出了根据本公开实施例的确定差异链路的应用场景图。
如图4所述,第一描述文本401为S=[info(A)[info(B)[info(C)]][info(E)]],包括第一节点A、B、C、E,第二描述文本403为S’=[info(A)[info(B)[info(C)][info(D)]][info(E)]],包括第二节点A、B、C、D、E。其中,第一描述文本401和第二描述文本402中的节点A、B、C、E相同。
第一比较因子402包括A、B、C、E、AB、AE、BC、ABC,第二比较因子404包括A、B、C、D、E、AB、AE、BC、BD、ABC,ABD。
将第一比较因子402与第二描述文本403进行比较,得到第一差异链路405,在本公开的实施例中,第一差异链路405不包括业务链。将第二比较因子404与第一描述文本401进行比较,得到第二差异链路406,在本公开的实施例中,第二差异链路406包括业务链D、BD、ABD,也即第二比较因子D、BD、ABD。
通过比较第一差异链路405和第二差异链路406,将第二差异链路406作为待选差异链路D、BD、ABD。由于待选差异链路ABD中包括第一比较因子AB,因此,最终得到的差异链路407仅包括D、BD,不包括ABD。
根据本公开的实施例,差异链路为第一描述文本和第二描述文本中的完全差异链路,不包括存在部分重叠业务链的链路。
在本公开的实施例中,以第一比较因子为基准得到第一差异链路,以第二比较因子为基准得到第二差异链路,通过两次匹配,从而从两个方向确定完全差异链路,能够提高确定完全差异链路的准确率。
根据本公开的实施例,第一关联关系包括第一节点的第一父节点和第一子节点,第二关联关系包括第二节点的第二父节点和第二子节点。
根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,包括:根据多个第一节点的第一父节点、第一子节点和根节点数据,生成第一异构树形业务链,其中,第一异构树形业务链表征在旧版本环境下多个第一节点构成的业务链;根据多个第二节点的第二父节点、第二子节点和根节点数据,生成第二异构树形业务链,其中,第二异构树形业务链表征在新版本环境下多个第二节点构成的业务链;将第一异构树形业务链转换为第一描述文本;以及将第二异构树形业务链转换为第二描述文本。
根据本公开的实施例,第一关联关系和第二关联关系可以从节点关联表中获取,根节点数据可以从根节点登记表中获取。其中,表1为节点关联表,表2为根节点登记表。
表1
表2
节点名称 应用名称 所属业务种类
XX 手机银行 电子银行-手机银行业务
其中,节点关联表包括当前节点的节点名称、群组名称、服务名称、程序名、网络地址信息、父节点、子节点和所属环境。根节点记录表包括属于根节点的节点名称、应用名称、所属业务种类。
根据本公开的实施例,节点关联表可以通过探活操作预先获取,根节点记录表可以从业务系统的设计表中获取。
根据本公开的实施例,每个节点都可以向其父节点和子节点发送探活请求,以便其他节点获取当前节点的探活请求。每个节点可以接收来自其他节点发送的、与探活请求对应的信号,获取与当前节点存在关联关系的关联节点信息,之后将当前节点的信息、获取的关联节点的信息存储至节点关联表。
需要说明的是,旧版本环境的第一节点或新版本环境的第二节点都可以执行上述探活操作,并将第一节点或第二节点的信息、获取的关联节点的信息存储至节点关联表。
根据本公开的实施例,可以通过线性语言转换算法,根据多个第一节点的第一父节点、第一子节点和根节点数据生成第一异构树形业务链,以及根据多个第二节点的第二父节点、第二子节点和根节点数据生成第二异构树形业务链。
根据本公开的实施例,线性语言转换算法的原理可以是,从根节点开始,串接根节点的所有子节点;针对每个子节点,获取该子节点的父节点和子节点,在父节点与上述根节点匹配的情况下,串接该子节点的子节点,直至完成所有节点的串接操作,生成第一异构树形业务链或第二异构树形业务链。
根据本公开的实施例,将第一异构树形业务链转换为第一描述文本,包括:将第一异构树形业务链中的每个第一节点转换为节点描述文本;以及根据多个第一节点之间的第一关联关系,组合每个第一节点的节点描述文本,得到第一描述文本。
根据本公开的实施例,节点描述文本可以为字符串,例如,节点a的字符串为node(a)=”[”+info(a)+”]”。对于包括两个2个子节点a1、a2的节点a,节点a的字符串为node(a)=”[”+info(a)+”[”+node(a1)+”]”+”[”+node(a2)+”]”+”]”=[info(a)[info(a1)][info(a2)]]。
根据本公开的实施例,将第二异构树形业务链转换为第二描述文本的方法与上述转换第一描述文本的方法类似,在此不再赘述。
在本公开的实施例中,由于已经生成包括节点之间的第一关联关系的第一异构树形业务链,因此,只需将节点形式转换为节点描述文本,能够快速将树形业务链转换为描述文本,提高转换效率。
图5示意性示出了根据本公开实施例的确定第一描述文本和第二描述文本方法的流程图。
如图5所示,确定第一描述文本和第二描述文本方法的流程图500包括第一异构树形业务链501、第一描述文本502、第二异构树形业务链503和第一描述文本504。
根据本公开的实施例,该方法还包括:在根据M个所述差异链路和所述业务系统的实际执行链路,确定针对每个所述差异链路的测试结果之前获取实际执行链路。
根据本公开的实施例,实际执行链路可以从数据库直接获取,还可以实时探测新版本环境中实际的链路执行情况。
根据本公开的实施例,生成实际执行链路的方法包括:获取业务系统的操作日志,其中,操作日志包括追踪指针和多个执行节点;以及基于操作日志,将追踪指针相同的至少一个执行节点串联起来,得到实际执行链路。
例如,可以利用指针染色跟踪机制,获取实际生产业务流量的技术链路。如,追踪指针可以为traceid,以traceid作为唯一标识,将后台操作日志中具有相同traceid的执行节点串接起来,生成当前交易请求的完整的交易链路。
根据本公开的实施例,利用多个追踪指针,可以串联得到至少一个实际执行链路。在本公开的实施例中,通过追踪指针,可以快速、准确地将实际的执行节点串联起来,以便后续基于实际执行链路和差异链路进行测试。
根据本公开的实施例,可以将确定的实际执行链路存储至技术链路动态染色识别表,以便在执行操作S240之前从技术链路动态染色识别表中获取实际执行链路。
表3
traceid 实际执行链路 交易场景
20230603XXXXX812 ABC 转账汇款
20230603XXXXX815 ABD 基金申购
表3示意性示出了技术链路动态染色识别表,技术链路动态染色识别表包括追踪指针traceid、实际执行链路以及实际执行链路对应的交易场景。
根据本公开的实施例,根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果,包括:将M个差异链路和实际执行链路进行比较,确定实际执行链路包括的S个重复差异链路,其中,M个差异链路包括S个重复差异链路和(M-S)个未重复差异链路,M≥S≥1;针对重复差异链路,根据重复差异链路的技术指标值,确定第一测试结果;以及针对未重复差异链路,根据未重复差异链路的业务指标值和技术指标值,确定第二测试结果。
根据本公开的实施例,在M个差异链路与实际执行链路之间存在交易的情况下,交集中的差异链路可以理解为重复差异链路;仅在M个差异链路中、不在实际执行链路中的差异链路可以理解为未重复差异链路。
需要说明的是,由于实际执行链路是根据实际执行的操作日志确定,重复差异链路为被使用过的差异链路,因此,在使用过程中,已经完成了重复差异链路的业务逻辑的测试。由此,针对重复差异链路,仅需根据技术指标值确定最终的第一测试结果。由于未重复差异链路没有被使用过,无法确定其业务逻辑是否正确,因此,需要根据技术指标值和业务指标值确定最终的第二测试结果。
根据本公开的实施例,业务指标值包括以下至少其中之一:新增案例执行率和存量案例执行率。
根据本公开的实施例,技术指标值包括以下至少其中之一:监控报警数、交易平均响应时长、交易成功率、交易类型覆盖率、新版本流量、数据库异常报错数和系统性能指标值。
根据本公开的实施例,系统性能指标值可以包括内存占用情况和存储器(CPU)占用情况。
根据本公开的实施例,针对重复差异链路,根据重复差异链路的技术指标值,确定第一测试结果,包括:在业务指标值达到标准值的情况下,确定第一测试结果为通过;否则,第一测试结果为不通过。针对未重复差异链路,根据未重复差异链路的业务指标值和技术指标值,确定第二测试结果包括:在业务指标值和技术指标值均达到标准值的情况下,确定第二测试结果为通过;否则,第二测试结果为不通过。
表4
表5
其中,表4示意性示出了仅包括业务指标值的测试结果风险评估表。表5示意性示出了仅包括技术指标值的测试结果风险评估表。
需要说明的是,业务指标值和技术指标值可以在同一个表中展示,也可以在不同的表中展示。测试结果风险评估表的通用字段包括节点名称、是否为新增的新版本业务链、是否为实际执行链路、测试结果。根据“是否为实际执行链路”和“是否为新增的新版本业务链”可以确定是否为重复差异链路。
如表4所示,业务指标值可以同时包括新增案例执行率和存量案例执行率。如表5所示,技术指标值可以同时包括监控报警数、交易平均响应时长、交易成功率、新版本流量、CPU占用情况和内存占用情况。
例如,在节点B属于重复差异链路且技术指标值均达标的情况下,节点B的第一测试结果为通过。在节点A属于未重复差异链路、技术指标值均达标,表4表征节点B的新增案例执行率和存量案例执行率均达到标准值,如80%,此时,节点A的第一测试结果为通过。在节点C属于未重复差异链路,表4表征节点C的新增案例执行率和存量案例执行率均未达到标准值,如80%,此时,节点C的第一测试结果为不通过。
图6示意性示出了根据本公开一具体实施例的业务系统的链路测试流程图。
如图6所示,该实施例的业务系统的链路测试流程图600包括操作S601~操作S616。
在操作S601,节点探活。具体地,通过探活操作,获取节点数据。
在操作S602,旧版本环境接入树形结构静态链路识别系统。具体地,旧版本环境是指采用旧版本业务系统向用户提供服务。可以向树形结构静态链路识别系统发送表征采用旧版本业务系统的环境标识,实现接入树形结构静态链路识别系统。树形结构静态链路识别系统用于生成第一描述文本或第二描述文本。
在操作S603,生成第一描述文本。
在操作S604,节点探活。与操作S601相同,用于获取节点数据。
在操作S605,新版本环境接入树形结果静态链路识别系统。
在操作S606,生成第二描述文本。
在操作S607,生成比较因子。具体地,针对第一描述文本,可以生成多个第一比较因子,针对第二描述文本,可以生成多个第二比较因子。
在操作S608,确定差异链路。
在操作S609,获取实际执行链路。
在操作S610,比较差异链路和实际执行链路。
在操作S611,是否为重复差异链路。在差异链路为重复差异链路的情况下,进入操作S612;在差异链路为未重复差异链路的情况下,进入操作S614。
在操作S612,获取技术指标值。
在操作S613,根据技术指标值,确定第一测试结果。
在操作S614,获取业务指标值和技术指标值。
在操作S615,根据业务指标值和技术指标值,确定第二测试结果。
在操作S616,决策。具体的,在第一测试结果或第二测试结果表征通过对情况下,做出扩大新版本业务系统的使用范围的决策;在第一测试结果或第二测试结果表征不通过对情况下,做出不改变或回退新版本业务系统的使用范围的决策。
为了更好地理解操作S601~S616,以下通过统一描述陈述上述过程。新版本环境及旧版本环境都可分别视为一个立体树形结构,每个环境的每个节点通过探活感知节点本身与其他节点的关系,并将关联关系存入至内存中。接着构建异构树形结构静态识别系统,分别将旧版本环境及新版本环境接入此系统。根据异构树形结构线性描述语言,将旧版本业务系统描述为S,新版本业务系统描述为S’。通过自行迭代的方式,以”[”及”]”解析符识别存在父子、父孙等亲属关系的节点,并以子串的形式展现出来,作为在S中构建的第一比较因子Q1、Q2...Qn,将Q1、Q2...Qn逐一在S’中比对,若Q1在S’中有相同结构的因子,则表明此因子包含节点及链路在旧版本环境及新版本环境中都存在,若Q1在S’中没有找到匹配成功的结构因子,则说明Q1包含节点及链路在S’中不存在,从而Q1就为差异节点或链路。基于技术链路染色技术,识别出实际灰度流量下的动态业务链路M1、M2...Mn,将之前识别出的新增链路Q1在实际执行链路中逐一匹配,若Q1是实际执行链路中任意一条链路的子集,则说明新增链路Q1已被实际执行链路覆盖,新版本业务系统已得到生产流量的检验;若未找到包含Q1的实际执行链路,则说明新增链路未真正被用户使用。基于新版本业务系统的新增链路Q1是否被实际执行链路覆盖,再分别参考业务指标值和技术指标值,最终量化评估得到表征Q1是否通过测试的测试结果。
例如,以第一描述文本为S=[info(a)[info(a1)[info(b1)]][info(a2)]],第二描述文本为S’=[info(a)[info(a1)[info(b1)][info(b2)]][info(a2)]]为例。通过自行迭代的方式,以”[”及”]”成对解析符作为鉴别依据,识别出存在父子、父孙等亲属关系的节点线性描述子串,这些关联信息以线性子字符串的形式将第二描述文本S’拆解为11个“第二比较因子”:info(a)、info(a1)、info(a2)、info(b1)、info(b2)、[info(a)[info(a1)、[info(a)info(a2)]、[info(a1)[info(b1)、[info(a1)info(b2)]、[info(a)[info(a1)[info(b1)]、[info(a)[info(a1)[info(b2)]。将这11个第二比较因子逐个与第一描述文本为S进行匹配,最终得到info(b2)、[info(a1)info(b2)]两个第二比较因子在S中未找到匹配,因此这两个比较因子所表达的节点b2及a1-b2的链路就为新增节点及链路。根据操作日志,识别出两条实际执行链路a-a1-b1、a-a1-b2。通过刚才比对出的info(b2)、[info(a1)info(b2)]两个差异链路,可知a1-b2是a-a1-b2的子集,因此得到差异链路a1-b2已承接生产实际流量,即a1-b2为重复差异链路。
图7示意性示出了根据本公开实施例的链路测试系统框架。
如图7所示,链路测试系统框架700包括四大子系统:系统关联关系构建子系统、树形结构静态链路识别及描述子系统、灰度链路覆盖分析子系统、灰转正实施评估子系统。
需要说明的是,灰度可以理解为本公开中的新版本,非灰度可以理解为本公开中的旧版本。
系统关联关系构建子系统主要通过关联关系探知技术获取多系统互联架构体系下的关联关系,根据探知发起及接收端标识构建多节点关系视图。系统关联关系构建子系统包括关联关系探知模块和关联关系构建模块。
关联关系探知模块包括:定义系统节点关联表单元、非灰度环境接入单元、探活单元和感知单元。定义系统节点关联表单元主要建立关联矩阵,第一维为当前节点信息;第二维为父亲节点信息;第三维为儿子节点信息。非灰度环境接入单元主要将非灰度环境接入至关联关系感知模块。探活单元:每个节点部署信号发射模块,通过信号发射后接收到的信息,获取与当前节点关联的节点信息。感知单元:相邻节点接收到其他节点发出的探活请求,返回当前节点信息,节点信息包括节点名称、群组名称、服务名称、程序名、网络地址。
关联关系构建模块包括:关联信息登记单元、灰度环境接入单元、关联关系探知及登记单元。关联信息登记单元根据探活及感知单元获取节点关联关系,将父节点、子节点信息登记至系统节点关联表中。灰度环境接入单元主要将新版本灰度环境接入至关联关系感知模块。关联关系探知及登记单元:在新版本灰度环境接入后,再次迭代调用关联关系探知模块完成新版本灰度环境的各节点关系探知,并将探知结果登记至节点关联表。
树形结构静态链路识别及描述子系统主要通过线性语言描述转换算法,实现立体树形结构的线性描述,再通过异形系统拓扑结构比较分析算法,实现异构树形结构差异链路的提炼。树形结构静态链路识别及描述子系统包括异构树形结构线性语言描述转换模块和异构迭代比较模块。
异构树形结构线性语言描述转换模块包括根节点(渠道接入节点)识别单元,用于接入根节点数据;非灰度环境树形结构线性描述单元,用于生成第一描述文本;灰度环境树形结构线性描述单元,用于生成第二描述文本。异构迭代比较模块包括比较因子单元,用于批量生成比较因子;正向迭代比较单元,用于正向迭代比较生成第一差异链路;反向迭代比较单元,用于反向迭代比较生成第二差异链路。
灰度链路覆盖分析子系统借助技术链路染色算法,通过将提炼出的差异链路与实际生产链路对比,识别并评估灰度分支在灰度运行期间灰度流量实际承载情况。
灰度链路覆盖分析子系统包括技术链路染色模块、新增灰度链路与染色链路比较分析模块。技术链路染色模块,此模块利用指针染色跟踪机制,获取实际生产业务流量的技术链路。新增灰度链路与染色链路比较分析模块,此模块将静态差异链路结果与动态实际链路结果比较,确定实际流量真实覆盖灰度新增分支的情况。
灰转正实施评估子系统包括灰度链路业务风险分析模块、灰度链路技术风险分析模块,分别用于评估业务指标值和技术指标值。
图8示意性示出了根据本公开实施例的业务系统的链路测试装置的结构框图。
如图8所示,该实施例的业务系统的链路测试装置800包括获取模块810、第一确定模块820、第二确定模块830和第三确定模块840。
获取模块810,用于获取业务系统的节点数据,其中,业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,节点数据包括多个第一节点之间的第一关联关系、多个第二节点之间的第二关联关系和表征起始位置的根节点数据。在一实施例中,获取模块810,可以用于执行前文描述的操作S210,在此不再赘述。
第一确定模块820,用于根据第一关联关系、第二关联关系和根节点数据,确定第一描述文本和第二描述文本,其中,第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,第二描述文本用于描述在新版本环境下多个第二节点的数据结构。在一实施例中,第一确定模块820可以用于执行前文描述的操作S220,在此不再赘述。
第二确定模块830,用于根据第一描述文本和第二描述文本,确定M个差异链路,其中,差异链路表征仅存在第一描述文本或第二描述文本内的节点构成的链路,M≥1。在一实施例中,第二确定模块830可以用于执行前文描述的操作S230,在此不再赘述。
第三确定模块840,用于根据M个差异链路和业务系统的实际执行链路,确定针对每个差异链路的测试结果。在一实施例中,第三确定模块840可以用于执行前文描述的操作S240,在此不再赘述。
根据本公开的实施例,第二确定模块830包括第一确定单元、第二确定单元和第三确定单元。
第一确定单元用于对第一描述文本进行拆分,得到P个第一比较因子,其中,第一比较因子表征由至少一个第一节点构成的链路,P≥1。在一实施例中,第一确定单元可以用于执行前文描述的操作S331,在此不再赘述。
第二确定单元用于将P个第一比较因子与第二描述文本进行匹配,得到针对P个第一比较因子的P个第一匹配结果。在一实施例中,第二确定单元可以用于执行前文描述的操作S332,在此不再赘述。
第三确定单元用于根据P个第一匹配结果,确定M个差异链路。在一实施例中,第二确定单元可以用于执行前文描述的操作S333,在此不再赘述。
根据本公开的实施例,第一确定单元包括第一确定子单元,用于基于T个拆分长度对第一描述文本进行T轮拆分,得到P个第一比较因子,其中,每轮拆分基于一个拆分长度进行,T个拆分长度从单个第一节点开始,朝着第一描述文本包括的全部第一节点的数量方向变化,T≥1。
根据本公开的实施例,第三确定单元包括第二确定子单元,用于响应于确定第一匹配结果表征第一比较因子与第二描述文本不匹配,将第一比较因子确定为差异链路。
根据本公开的实施例,第三确定单元还包括第三确定子单元、第四确定子单元、第五确定子单元、第六确定子单元和第七确定子单元。
第三确定子单元用于响应于确定N个第一匹配结果表征第一比较因子与第二描述文本不匹配,确定N个第一差异链路,P≥N≥1。
第四确定子单元用于对第二描述文本进行拆分,得到Q个第二比较因子,其中,第二比较因子表征第二描述文本中由至少一个第二节点构成的链路,Q≥1。
第五确定子单元用于将Q个第二比较因子与第一描述文本进行匹配,得到针对Q个第二比较因子的Q个第二匹配结果。
第六确定子单元用于根据Q个第二匹配结果,确定L个第二差异链路,Q≥L≥1。
第七确定子单元用于根据第一差异链路和第二差异链路的数量关系,从第一差异链路或第二差异链路中确定差异链路。
根据本公开的实施例,第一关联关系包括第一节点的第一父节点和第一子节点,第二关联关系包括第二节点的第二父节点和第二子节点。
根据本公开的实施例,第一确定模块820还包括第四确定单元、第五确定单元、第六确定单元和第七确定单元。
第四确定单元用于根据多个第一节点的第一父节点、第一子节点和根节点数据,生成第一异构树形业务链,其中,第一异构树形业务链表征在旧版本环境下多个第一节点构成的业务链。
第五确定单元用于根据多个第二节点的第二父节点、第二子节点和根节点数据,生成第二异构树形业务链,其中,第二异构树形业务链表征在新版本环境下多个第二节点构成的业务链。
第六确定单元用于将第一异构树形业务链转换为第一描述文本。
第七确定单元用于将第二异构树形业务链转换为第二描述文本。
根据本公开的实施例,第六确定单元还包括第八确定子单元和第九确定子单元。
第八确定子单元,用于将第一异构树形业务链中的每个第一节点转换为节点描述文本。
第九确定子单元,用于根据多个第一节点之间的第一关联关系,组合每个第一节点的节点描述文本,得到第一描述文本。
根据本公开的实施例,业务系统的链路测试装置800包括日志获取模块和实际执行链路确定模块。
日志获取模块用于获取业务系统的操作日志,其中,操作日志包括追踪指针和多个执行节点。
实际执行链路确定模块用于基于操作日志,将追踪指针相同的至少一个执行节点串联起来,得到实际执行链路。
根据本公开的实施例,第三确定模块840包括比较单元、第一测试单元和第二测试单元。
比较单元用于将M个差异链路和实际执行链路进行比较,确定实际执行链路包括的S个重复差异链路,其中,M个差异链路包括S个重复差异链路和(M-S)个未重复差异链路,M≥S≥1。
第一测试单元用于针对重复差异链路,根据重复差异链路的技术指标值,确定第一测试结果。
第二测试单元用于针对未重复差异链路,根据未重复差异链路的业务指标值和技术指标值,确定第二测试结果。
根据本公开的实施例,业务指标值包括以下至少其中之一:新增案例执行率和存量案例执行率;技术指标值包括以下至少其中之一:监控报警数、交易平均响应时长、交易成功率、交易类型覆盖率、新版本流量、数据库异常报错数和系统性能指标值。
根据本公开的实施例,获取模块810、第一确定模块820、第二确定模块830和第三确定模块840中的任意多个模块可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。
根据本公开的实施例,获取模块810、第一确定模块820、第二确定模块830和第三确定模块840中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,获取模块810、第一确定模块820、第二确定模块830和第三确定模块840中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图9示意性示出了根据本公开实施例的适于业务系统的链路测试方法的电子设备的方框图。
如图9所示,根据本公开实施例的电子设备900包括处理器901,其可以根据存储在只读存储器(ROM)902中的程序或者从存储部分908加载到随机访问存储器(RAM)903中的程序而执行各种适当的动作和处理。处理器901例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC))等等。处理器901还可以包括用于缓存用途的板载存储器。处理器901可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 903中,存储有电子设备900操作所需的各种程序和数据。处理器901、ROM902以及RAM 903通过总线904彼此相连。处理器901通过执行ROM 902和/或RAM 903中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 902和RAM 903以外的一个或多个存储器中。处理器901也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,电子设备900还可以包括输入/输出(I/O)接口905,输入/输出(I/O)接口905也连接至总线904。电子设备900还可以包括连接至输入/输出I/O接口905的以下部件中的一项或多项:包括键盘、鼠标等的输入部分906;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分907;包括硬盘等的存储部分908;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分909。通信部分909经由诸如因特网的网络执行通信处理。驱动器910也根据需要连接至I/O接口905。可拆卸介质911,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器910上,以便于从其上读出的计算机程序根据需要被安装入存储部分908。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 902和/或RAM 903和/或ROM 902和RAM 903以外的一个或多个存储器。
本公开的实施例还包括一种计算机程序产品,其包括计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。当计算机程序产品在计算机系统中运行时,该程序代码用于使计算机系统实现本公开实施例所提供上述方法。
在该计算机程序被处理器901执行时执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例,上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。
在一种实施例中,该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中,该计算机程序也可以在网络介质上以信号的形式进行传输、分发,并通过通信部分909被下载和安装,和/或从可拆卸介质911被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
在这样的实施例中,该计算机程序可以通过通信部分909从网络上被下载和安装,和/或从可拆卸介质911被安装。在该计算机程序被处理器901执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
根据本公开的实施例,可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码,具体地,可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java,C++,python,“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上所述的具体实施例,对本公开的目的、技术方案和有益效果进行了进一步详细说明,应理解的是,以上所述仅为本公开的具体实施例而已,并不用于限制本公开,凡在本公开的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本公开的保护范围之内。

Claims (14)

1.一种业务系统的链路测试方法,包括:
获取业务系统的节点数据,其中,所述业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,所述节点数据包括多个所述第一节点之间的第一关联关系、多个所述第二节点之间的第二关联关系和表征起始位置的根节点数据;
根据所述第一关联关系、所述第二关联关系和所述根节点数据,确定第一描述文本和第二描述文本,其中,所述第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,所述第二描述文本用于描述在新版本环境下多个第二节点的数据结构;
根据所述第一描述文本和所述第二描述文本,确定M个差异链路,其中,所述差异链路表征仅存在所述第一描述文本或所述第二描述文本内的节点构成的链路,M≥1;以及
根据M个所述差异链路和所述业务系统的实际执行链路,确定针对每个所述差异链路的测试结果。
2.根据权利要求1所述的方法,其中,所述根据所述第一描述文本和所述第二描述文本,确定M个差异链路,包括:
对所述第一描述文本进行拆分,得到P个第一比较因子,其中,所述第一比较因子表征由至少一个所述第一节点构成的链路,P≥1;
将P个所述第一比较因子与所述第二描述文本进行匹配,得到针对P个所述第一比较因子的P个第一匹配结果;以及
根据P个所述第一匹配结果,确定M个所述差异链路。
3.根据权利要求2所述的方法,其中,所述对所述第一描述文本进行拆分,得到P个第一比较因子,包括:
基于T个拆分长度对所述第一描述文本进行T轮拆分,得到P个所述第一比较因子,其中,每轮拆分基于一个拆分长度进行,所述T个拆分长度从单个第一节点开始,朝着所述第一描述文本包括的全部第一节点的数量方向变化,T≥1。
4.根据权利要求2所述的方法,其中,所述根据P个所述第一匹配结果,确定M个所述差异链路,包括:针对每个第一匹配结果,
响应于确定所述第一匹配结果表征所述第一比较因子与所述第二描述文本不匹配,将所述第一比较因子确定为所述差异链路。
5.根据权利要求2所述的方法,其中,所述根据P个所述第一匹配结果,确定M个所述差异链路,还包括:
响应于确定N个所述第一匹配结果表征所述第一比较因子与所述第二描述文本不匹配,确定N个第一差异链路,P≥N≥1;
对所述第二描述文本进行拆分,得到Q个第二比较因子,其中,所述第二比较因子表征所述第二描述文本中由至少一个所述第二节点构成的链路,Q≥1;
将Q个所述第二比较因子与所述第一描述文本进行匹配,得到针对Q个所述第二比较因子的Q个第二匹配结果;
根据Q个所述第二匹配结果,确定L个第二差异链路,Q≥L≥1;以及
根据所述第一差异链路和所述第二差异链路的数量关系,从所述第一差异链路或所述第二差异链路中确定所述差异链路。
6.根据权利要求1所述的方法,其中,所述第一关联关系包括所述第一节点的第一父节点和第一子节点,所述第二关联关系包括所述第二节点的第二父节点和第二子节点;
所述根据所述第一关联关系、所述第二关联关系和所述根节点数据,确定第一描述文本和第二描述文本,包括:
根据多个所述第一节点的第一父节点、第一子节点和所述根节点数据,生成第一异构树形业务链,其中,所述第一异构树形业务链表征在旧版本环境下多个所述第一节点构成的业务链;
根据多个所述第二节点的第二父节点、第二子节点和所述根节点数据,生成第二异构树形业务链,其中,所述第二异构树形业务链表征在新版本环境下多个所述第二节点构成的业务链;
将所述第一异构树形业务链转换为所述第一描述文本;以及
将所述第二异构树形业务链转换为所述第二描述文本。
7.根据权利要求6所述的方法,其中,所述将所述第一异构树形业务链转换为所述第一描述文本,包括:
将所述第一异构树形业务链中的每个第一节点转换为节点描述文本;以及
根据多个所述第一节点之间的第一关联关系,组合每个所述第一节点的节点描述文本,得到所述第一描述文本。
8.根据权利要求1所述的方法,还包括:
获取所述业务系统的操作日志,其中,所述操作日志包括追踪指针和多个执行节点;以及
基于所述操作日志,将所述追踪指针相同的至少一个所述执行节点串联起来,得到所述实际执行链路。
9.根据权利要求1或8所述的方法,其中,所述根据M个所述差异链路和所述业务系统的实际执行链路,确定针对每个所述差异链路的测试结果,包括:
将M个所述差异链路和所述实际执行链路进行比较,确定所述实际执行链路包括的S个重复差异链路,其中,M个所述差异链路包括S个所述重复差异链路和(M-S)个未重复差异链路,M≥S≥1;
针对所述重复差异链路,根据所述重复差异链路的技术指标值,确定第一测试结果;以及
针对所述未重复差异链路,根据所述未重复差异链路的业务指标值和技术指标值,确定第二测试结果。
10.根据权利要求9所述的方法,其中,所述业务指标值包括以下至少其中之一:新增案例执行率和存量案例执行率;
所述技术指标值包括以下至少其中之一:监控报警数、交易平均响应时长、交易成功率、交易类型覆盖率、新版本流量、数据库异常报错数和系统性能指标值。
11.一种业务系统的链路测试装置,包括:
获取模块,用于获取业务系统的节点数据,其中,所述业务系统包括用于执行旧版本业务的多个第一节点和用于执行新版本业务的多个第二节点,所述节点数据包括多个所述第一节点之间的第一关联关系、多个所述第二节点之间的第二关联关系和表征起始位置的根节点数据;
第一确定模块,用于根据所述第一关联关系、所述第二关联关系和所述根节点数据,确定第一描述文本和第二描述文本,其中,所述第一描述文本用于描述在旧版本环境下多个第一节点的数据结构,所述第二描述文本用于描述在新版本环境下多个第二节点的数据结构;
第二确定模块,用于根据所述第一描述文本和所述第二描述文本,确定M个差异链路,其中,所述差异链路表征仅存在所述第一描述文本或所述第二描述文本内的节点构成的链路,M≥1;以及
第三确定模块,用于根据M个所述差异链路和所述业务系统的实际执行链路,确定针对每个所述差异链路的测试结果。
12.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行根据权利要求1~10中任一项所述的方法。
13.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~10中任一项所述的方法。
14.一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现根据权利要求1~10中任一项所述的方法。
CN202310800609.6A 2023-06-30 2023-06-30 业务系统的链路测试方法、装置、电子设备及存储介质 Pending CN117439928A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310800609.6A CN117439928A (zh) 2023-06-30 2023-06-30 业务系统的链路测试方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310800609.6A CN117439928A (zh) 2023-06-30 2023-06-30 业务系统的链路测试方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN117439928A true CN117439928A (zh) 2024-01-23

Family

ID=89555964

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310800609.6A Pending CN117439928A (zh) 2023-06-30 2023-06-30 业务系统的链路测试方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN117439928A (zh)

Similar Documents

Publication Publication Date Title
US10282197B2 (en) Open application lifecycle management framework
CN112187558B (zh) 数据校验方法、装置、电子设备
US10289706B2 (en) Repairing corrupted references
CN108959965B (zh) 数据合规性审查方法和装置
CN105868050A (zh) 基于json数据的验证方法及装置
CN113392024B (zh) 存储过程的测试方法、装置、设备及介质
CN113032244A (zh) 接口测试方法、装置、计算机系统和计算机可读存储介质
CN114491536B (zh) 基于知识图谱的代码分析方法及装置
CN115061874A (zh) 日志信息验证方法、装置、设备及介质
CN115346686A (zh) 关系图谱生成方法及装置、存储介质及电子设备
CN113869904B (zh) 可疑数据识别方法、装置、电子设备、介质和计算机程序
CN110719200A (zh) 信息识别方法和装置
CN113238940B (zh) 一种接口测试结果的比对方法、装置、设备和存储介质
CN113360365B (zh) 一种流程测试方法和流程测试系统
CN116775620B (zh) 基于多方数据的风险识别方法、装置、设备及存储介质
CN117439928A (zh) 业务系统的链路测试方法、装置、电子设备及存储介质
CN117493208A (zh) 软件测试方法、装置、电子设备及存储介质
CN117435189A (zh) 金融系统接口的测试用例分析方法、装置、设备及介质
CN116932774A (zh) 一种知识图谱的构建方法、装置、设备及存储介质
CN116737535A (zh) 接口测试方法、装置、计算机设备和存储介质
CN114942905A (zh) 一种迁移数据验证方法、装置、设备和存储介质
CN114911770A (zh) 数据库迁移的评估方法、装置、设备及介质
CN113448822A (zh) 测试方法、装置、计算机可读介质及电子设备
CN111813691B (zh) 测试问题排查方法、装置、电子设备和介质
CN113360380B (zh) 基于流程图生成数据案例的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination