CN113315828A - 一种流量录制方法、装置及流量录制设备、存储介质 - Google Patents

一种流量录制方法、装置及流量录制设备、存储介质 Download PDF

Info

Publication number
CN113315828A
CN113315828A CN202110574862.5A CN202110574862A CN113315828A CN 113315828 A CN113315828 A CN 113315828A CN 202110574862 A CN202110574862 A CN 202110574862A CN 113315828 A CN113315828 A CN 113315828A
Authority
CN
China
Prior art keywords
request
recording
intermediate component
data processing
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110574862.5A
Other languages
English (en)
Other versions
CN113315828B (zh
Inventor
华军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Bank Co Ltd
Original Assignee
Ping An Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Bank Co Ltd filed Critical Ping An Bank Co Ltd
Priority to CN202110574862.5A priority Critical patent/CN113315828B/zh
Publication of CN113315828A publication Critical patent/CN113315828A/zh
Application granted granted Critical
Publication of CN113315828B publication Critical patent/CN113315828B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/50Testing arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请实施例公开了一种流量录制方法、装置及流量录制设备、存储介质,其中所述方法包括:通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,通过目标组件监测模块记录目标中间组件的调用响应信息;当通过入口模块检测到计算设备对数据处理请求的响应结束时,将数据处理请求携带的第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域,可高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。本申请涉及区块链技术,如可将录制流量写入区块链。

Description

一种流量录制方法、装置及流量录制设备、存储介质
技术领域
本申请涉及计算机技术领域,尤其涉及一种流量录制方法、装置及流量录制设备、存储介质,尤其涉及一种流量录制方法,流量录制装置、流量录制设备以及计算机可读存储介质。
背景技术
随着互联网行业的业务规模不断扩大,系统设计也越来越复杂。在业务复杂度的系统上进行业务快速迭代时,对系统的鲁棒性、兼容性、测试覆盖率以及实效性也提出了更高的要求。人人往往通过更多的自动化回归脚本和人工编写的脚本,来适应这种要求。但是,由于系统每时每刻都在演化,自动化回归脚本的正确性和实效性很难得到保证,同时人工编写的脚本不能有效地覆盖大量的真实业务场景。
为了减缓复杂度之熵对系统迭代造成的影响,通常需要采用流量回放技术来保障在业务场景、服务架构复杂下的系统测试,将线上真实的数据流转化为覆盖全面的回归测试用例。流量回放技术,是指对生产环境下的业务流量执行录制,并将录制后的业务流量用于在生产环境或测试环境中进行回放的一种测试技术。
目前,针对一个请求的流量录制,可以录制该请求携带的请求参数和响应该请求所返回的信息,对于响应该请求内部依赖(例如中间组件)的相关信息却无法录制,一旦请求响应有误,用户无法准确定位问题。
因此在流量录制过程中,如何高效的对响应请求内部依赖的相关信息进行录制,成为一个亟待解决的问题。
发明内容
本申请实施例提供了一种流量录制方法、装置及流量录制设备、存储介质,可以在流量录制过程中,高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。
一方面,本申请实施例提供了一种流量录制方法,该方法由流量录制装置执行,所述流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测所述流量录制设备中的任一中间组件,该方法包括:
通过所述入口模块检测向所述流量录制设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
通过所述链路关联模块响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
通过各中间组件监测模块监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
通过所述链路关联模块将接收到的所述调用响应信息存储至所述录制链路存储区域;
当通过所述入口模块检测到所述流量录制设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
通过所述链路关联模块响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
在一个实施例中,目标中间组件的调用响应信息包括:所述目标中间组件的组件信息和所述目标中间组件响应所述数据处理请求向第三方接口发送的请求参数,以及所述第三方接口返回的响应信息。
在一个实施例中,还可以通过所述入口模块检测向所述流量录制设备发送的mock请求,所述mock请求中携带有第二请求参数;从所述目标存储区域中获取与所述第二请求参数匹配的目标历史数据处理请求对应的历史录制流量,并调用所述链路关联模块确定所述mock请求对应的回放链路存储区域,在所述回放链路存储区域中存储所述历史录制流量;当检测到所述计算设备调用任一中间组件以响应所述mock请求时,通过所述链路关联模块查询所述历史录制流量中是否包括所述任一中间组件的调用响应信息;若是,则将所述任一中间组件的调用响应信息返回所述mock请求对应的发送端。
在一个实施例中,若所述历史录制流量中不包括所述任一中间组件的调用响应信息,则还可以通过所述任一中间组件对应的中间组件监测模块记录所述任一中间组件的调用响应信息,并将记录的所述任一中间组件的调用响应信息,返回所述mock请求对应的发送端。
在一个实施例中,所述将记录的所述任一中间组件的调用响应信息,返回所述mock请求的发送端的具体实施方式为:
对所述记录的所述任一中间组件的调用响应信息,添加回放异常标记;
将添加有所述回放异常标记的调用响应信息返回至所述mock请求对应的发送端。
在一个实施例中,所述将所述录制流量存储至目标存储区域之后,还可以对所述录制链路存储区域中存储的所述第一请求参数和所述目标中间组件的调用响应信息,进行销毁处理。
在一个实施例中,当通过所述入口模块检测到所述计算设备对所述mock请求的响应结束时,还可以将目标历史数据处理请求对应的历史录制流量返回所述mock请求对应的发送端。
另一方面,本申请实施例提供了一种流量录制装置,所述流量录制装置设置于流量录制设备,所述流量录制设备部署在计算设备中,所述流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测所述计算设备中的任一中间组件,其中:
所述入口模块,用于检测向所述计算设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
所述链路关联模块,用于响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
各中间组件监测模块,用于监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
所述链路关联模块,还用于将接收到的所述调用响应信息存储至所述录制链路存储区域;
所述入口模块,还用于当检测到所述计算设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
所述链路关联模块,还用于响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
再一方面,本申请实施例提供了一种流量录制设备,该流量录制设备中设置有流量录制装置,该流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测计算设备中的任一中间组件,流量录制设备包括处理器、存储装置和通信接口,所述处理器、存储装置和通信接口相互连接,其中,所述存储装置用于存储支持流量录制设备执行上述方法的计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如下步骤:
通过所述入口模块检测向所述流量录制设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
通过所述链路关联模块响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
通过各中间组件监测模块监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
通过所述链路关联模块将接收到的所述调用响应信息存储至所述录制链路存储区域;
当通过所述入口模块检测到所述流量录制设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
通过所述链路关联模块响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
又一方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述流量录制方法。
本申请实施例中,可通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,该链路存储请求携带有第一请求参数。进一步地,通过链路关联模块响应所述链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。进一步地,通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。进一步地,当通过入口模块检测到计算设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求,通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。实施本申请实施例,可高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例的一种流量录制方法的流程示意图;
图2是本申请实施例的另一种流量录制方法的流程示意图;
图3是本申请实施例的一种页面的示意图;
图4是本申请实施例的一种流量录制装置的结构示意图;
图5是本申请实施例的一种流量录制设备的结构示意图。
具体实施方式
本申请实施例提出了一种流量录制方法,该方法应用于部署在计算设备中的流量录制装置,流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测计算设备中的任一中间组件。其中,上述计算设备可以指终端设备,例如智能手机、智能平板、台式计算机或笔记本计算机等,也可以指服务器,该服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。请参见图1,本申请实施例的所述方法包括如下步骤:
S101:通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,链路存储请求携带有第一请求参数。
其中,上述数据处理请求可以指任何类型的http请求,例如,可以为get,post,put,delete等类型的http请求。其中,get请求是用来获取数据的,只是用来查询数据,不对计算设备的数据做任何的修改,新增,删除等操作;post请求一般是对计算设备的数据做改变,常用来数据的提交、新增操作等;put请求与post请求一样都会改变计算设备的数据,但是put的侧重点在于对于数据的修改操作,post侧重于对于数据的增加;delete请求用来删除计算设备的资源。
具体实现中,计算设备可以通过不同的业务接口对应不同的业务系统,计算设备可以通过业务接口接收来自不同业务系统的数据处理请求,每一个数据处理请求均携带有请求参数(即上述第一请求参数)。针对不同类型的数据请求,携带的请求参数也不同,例如,一个数据处理请求为一个get请求,用于从计算设备中查询数据A,那么该get请求携带的请求参数可以包括数据A的数据标识,以及用于指示查询动作的动作标识。
其中,当计算设备通过业务接口接收到任一数据处理请求时,流量录制装置中的入口模块均可以检测到该任一数据处理请求,流量录制装置可获取该任一数据处理请求携带的第一请求参数,并将添加有第一请求参数的链路存储请求发送至链路关联模块。
S102:通过链路关联模块响应链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。
具体实现中,流量录制装置可以通过链路关联模块从存储空间中划分任一空闲存储区域作为上述录制链路存储区域,在针对上述数据处理请求的流量录制全流程中,该录制链路存储区域为该数据处理请求的专属区域,用于存储本次流量录制全流程所产生的所有数据。其中,此处的存储空间可以为计算设备的本地存储空间。
S103:通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,目标组件监测模块为各中间组件监测模块中的任一个或者多个。
S104:通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。
其中,上述计算设备的中间组件可以包括httpclient(http外部请求调用)、mybatis(数据库读写)、redis(缓存读写)、cache(缓存读写)等等组件。流量录制中的每一个中间组件监测模块,用于监测计算设备中的任一中间组件。例如,中间组件监测模块和中间组件的对应关系可以如表1所示,每一个中间组件被调用,其对应的中间组件监测模块均可以检测到。
表1
Figure BDA0003082216560000071
Figure BDA0003082216560000081
具体实现中,流量录制装置可通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若任一个或者多个中间组件监测模块监测到其对应的目标中间组件被调用,则可以将该任一个或者多个中间组件监测模块确定为目标中间组件监测模块。进一步地,可通过目标中间组件监测模块记录对应目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。
其中,上述目标中间组件的调用响应信息包括:目标中间组件的组件信息和目标中间组件响应数据处理请求向第三方接口发送的请求参数,以及第三方接口返回的响应信息。其中,上述组件信息可以为用于表征目标中间组件为何种组件的标识信息。
示例性地,假设计算设备的中间组件包括httpclient组件、mybatis组件、redis组件和cache组件,各中间组件与各中间组件监测模块的对应关系如上述表1所示,步骤S101中的数据处理请求为一个get请求,即一个数据查询请求,用于从计算设备中查询数据A。这种情况下,当流量录制装置通过入口模块检测到该数据查询请求时,可以获取数据查询请求中携带的第一请求参数,向链路关联模块发送该第一请求参数,通过链路关联模块确定数据查询请求对应的录制链路存储区域,并在录制链路存储区域中存储该第一请求参数。
进一步,计算设备响应数据查询请求,首先会触发调用mybatis组件向数据库发送关于数据A的查询请求。此时,预先部署的mybatis组件对应的第二中间组件监测模块,会监测到计算设备对mybatis组件的调用行为,获取上述查询请求中携带的请求参数(即上述向第三方接口发送的请求参数),以及数据库返回的数据(即上述第三方接口返回的响应信息),并将该mybatis组件的组件信息、查询请求中携带的请求参数、以及数据库返回的数据作为mybatis组件的调用响应信息,发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。在此实例中,上述mybatis组件对应的第二中间组件监测模块即为上述目标中间组件监测模块,mybatis组件即为目标中间组件。
S105:当通过入口模块检测到流量录制设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求。
S106:通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。
具体实现中,当流量录制装置通过入口模块检测到流量录制设备对数据处理请求的响应结束时,则意味针对数据处理请求对应的流量录制全流程已经结束。这种情况下,流量录制装置可以向链路关联模块发送针对数据处理请求的录制流量获取请求,链路关联模块接收到该录制流量获取请求后,可以从录制链路存储区域中获取预先存储的上述第一请求参数和目标中间组件的调用响应信息,并将第一请求参数和调用响应信息确定为该数据处理请求的录制流量,并将录制流量存储至目标存储区域。
其中,此处的目标存储区可以指除上述录制链路存储区域以外的本地存储区,也可以指与计算设备具有通信连接的远程服务器,还可以指区块链中的节点。
区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块每一个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层。区块链底层平台可以包括用户管理、基础服务、智能合约以及运营监控等处理模块。其中,用户管理模块负责所有区块链参与者的身份信息管理,包括维护公私钥生成(账户管理)、密钥管理以及用户真实身份和区块链地址对应关系维护(权限管理)等,并且在授权的情况下,监管和审计某些真实身份的交易情况,提供风险控制的规则配置(风控审计);基础服务模块部署在所有区块链节点设备上,用来验证业务请求的有效性,并对有效请求完成共识后记录到存储上,对于一个新的业务请求,基础服务先对接口适配解析和鉴权处理(接口适配),然后通过共识算法将业务信息加密(共识管理),在加密之后完整一致的传输至共享账本上(网络通信),并进行记录存储;智能合约模块负责合约的注册发行以及合约触发和合约执行,开发人员可以通过某种编程语言定义合约逻辑,发布到区块链上(合约注册),根据合约条款的逻辑,调用密钥或者其它的事件触发执行,完成合约逻辑,同时还提供对合约升级注销的功能;运营监控模块主要负责产品发布过程中的部署、配置的修改、合约设置、云适配以及产品运行中的实时状态的可视化输出,例如:告警、监控网络情况、监控节点设备健康状态等。平台产品服务层提供典型应用的基本能力和实现框架,开发人员可以基于这些基本能力,叠加业务的特性,完成业务逻辑的区块链实现。应用服务层提供基于区块链方案的应用服务给业务参与方进行使用。本申请实施例,可以通过区块链存储数据处理请求的录制流量,有利于防止数据处理请求的录制流量被篡改。
在一个实施例中,在将录制流量存储至目标存储区域之后,还可以对录制链路存储区域中存储的第一请求参数和目标中间组件的调用响应信息,进行销毁处理,从而释放存储空间,后续该录制存储区域可以用于存储其它数据处理请求对应的录制流量。
在一个实施例中,在将录制流量存储至目标存储区域之后,还可以将录制流量返回至上述数据处理请求对应的发送端,发送端用户可以查看该录制流量,便于后续业务需求。
在本申请实施例中,上述流量录制装置可以理解为一个用于提供流量录制功能的外部插件和功能接口,当用户想要对计算设备的流量进行录制时,可以安装该外部插件或者调用该功能接口,从而执行上述步骤S101~步骤S106,完成针对数据处理请求的流量录制,无需开发人员介入改动计算设备接口的代码,可以辅助计算设备快速高效地完成流量录制。
本申请实施例中,可通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,该链路存储请求携带有第一请求参数。进一步地,通过链路关联模块响应所述链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。进一步地,通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。进一步地,当通过入口模块检测到计算设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求,通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。实施本申请实施例,可高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。
再请参见图2,是本申请实施例的另一种流量录制方法,该流量录制方法由上述流量录制装置执行,请参见图2,本申请实施例的所述方法包括如下步骤。
S201:通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,链路存储请求携带有第一请求参数。
S202:通过链路关联模块响应链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。
S203:通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,目标组件监测模块为各中间组件监测模块中的任一个或者多个。
S204:通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。
S205:当通过入口模块检测到流量录制设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求。
S206:通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。其中,步骤S201~步骤S206的具体实施方式,可以参见上述实施例中针对步骤S101~步骤S106的相关描述,此处不再赘述。
S207:通过入口模块检测向流量录制设备发送的mock请求,该mock请求中携带有第二请求参数。其中,入口模块可以将携带有mock特殊标识的请求判定为mock请求,所谓的mock是指在测试过程中,对于某些不容易构造或者不容易获取的对象,用一个虚拟的对象来创建以便测试的测试方法,这个虚拟的对象就是mock对象,mock对象就是真实对象在调试期间的代替品。相应地,此处的mock请求可以理解为在业务系统调试期间所发出的代替真实数据处理请求的请求,mock请求与真实的数据处理请求作用相同,唯一区别在于:计算设备响应mock请求不执行具体的业务逻辑,只根据输入参数不同,返回事先已经准备好的结果数据。
S208:从目标存储区域中获取与第二请求参数匹配的目标历史数据处理请求对应的历史录制流量,并调用链路关联模块确定该mock请求对应的回放链路存储区域,在回放链路存储区域中存储历史录制流量。
可以理解的是,通过执行上述步骤S201~步骤S206,可以完成针对数据处理请求的流量录制,并将数据处理请求对应的录制流量存储至目标存储区域,相应地,随着时间推移,目标存储区域中将会存储多个历史数据处理请求对应的历史录制流量。这种情况下,当通过入口模块检测向流量录制设备发送的mock请求时,可首先确定目标存储区域中是否存在与mock请求携带的第二请求参数相同的历史数据处理请求,若是,则将这个历史数据处理请求确定为与第二请求参数匹配的目标历史数据请求(可以理解为与当前这个mock请求相同的请求),并获取目标历史数据请求对应的历史录制流量。
进一步地,流量录制装置可以通过链路关联模块从存储空间中划分任一空闲存储区域作为回放链路存储区域,并在回放链路存储区域中存储上述历史录制流量,此处的存储空间可以为计算设备的本地存储空间,用于存储本次流量回放全流程所需要的录制流量。
在一个实施例中,计算设备还可以依照预设分类规则,对存储于上述目标存储区的各历史数据处理请求对应的历史录制流量进行分类展示,以便于测试人员查看各分类下的历史录制流量。其中,当计算设备具有显示功能时,可以由自身进行显示;当计算设备不具有显示功能时,可以通过具有显示功能的设备进行显示,例如计算设备为服务器,那么上述历史录制流量可以由与服务器建立通信连接的终端进行显示。
其中,预设分类规则可以是基于录制流量的存储时间,或者数据处理请求来自的接口类别。可以理解的是,每一个数据处理请求可能来自于不同的应用或者业务系统,不同的应用或者不同的业务系统对应的不同接口(一个接口对应一个接口类别),在进行录制流量的分类展示时,可以将来自同一个接口的数据处理请求的录制流量归为一类。或者,也可以依照录制流量的存储时间,将各数据处理请求的录制流量划分至指定数量的各时间区间(例如划分至3个时间区间),一个时间区间对应一种类别。其中,时间区间的设定可以依照实验数据预先设定,本申请对此不作具体限定。
S209:当检测到流量录制设备调用任一中间组件以响应该mock请求时,通过链路关联模块查询历史录制流量中是否包括任一中间组件的调用响应信息。
S210:若历史录制流量中是否包括任一中间组件的调用响应信息,则将该任一中间组件的调用响应信息返回mock请求对应的发送端,从而完成流量的回放。
具体实现中,与上述流量录制过程中计算设备响应数据请求的过程类似,计算设备在接收到mock请求后,也会响应mock请求,在响应mock请求的过程中同样会涉及对一个或者多个中间组件的调用,在此过程中,流量录制装置可以通过中间组件监测模块检测计算设备对各自对应的中间组件的调用,当流量录制装置检测到计算设备调用任一中间组件以响应该mock请求时,可以通过链路关联模块查询历史录制流量中是否包括该任一中间组件的调用响应信息,若是,则表征与该mock请求匹配的目标历史数据请求在流量录制过程中也调用了该任一中间组件,那么,流量录制装置可以将该任一中间组件的调用响应信息直接返回mock请求对应的发送端,从而完成针对该任一中间组件的流量回放。
或者,在另一个实施例中,若历史录制流量中不包括任一中间组件的调用响应信息,则表征与该mock请求匹配的目标历史数据请求在流量录制过程中并未调用该任一中间组件,那么,可以任一中间组件对应的中间组件监测模块记录任一中间组件的调用响应信息,并将记录的任一中间组件的调用响应信息,返回Mock请求对应的发送端。
由于mock请求和与其匹配的目标历史数据处理请求,理论上是同一个请求,那么,计算设备响应这两个请求所调用的各中间组件理论上应该完全相同,如果存在差异,那么必然存在一定的问题。因此,若历史录制流量中不包括任一中间组件的调用响应信息,那么则表征计算设备响应目标历史数据处理请求时,并未调用该任一中间组件。这种情况下,本申请实施例在执行上述将记录的任一中间组件的调用响应信息,返回mock请求的发送端时,可以对记录的任一中间组件的调用响应信息,添加回放异常标记,将添加有回放异常标记的调用响应信息返回至mock请求对应的发送端。其中,该回放异常标记用于指示针对该任一中间组件的调用并未在流量录制过程中出现,本次调用为首次调用。发送端对应的用户查看该调用响应信息后,确定本次mock请求调用的哪一个或者多个中间组件与录制时调用的中间组件不同,可以排查相应的问题。
在一个实施例中,当通过入口模块检测到计算设备对mock请求的响应结束时,还可以将目标历史数据处理请求对应的历史录制流量返回mock请求对应的发送端。发送端可以对比显示流量录制和回放过程,计算设备响应mock请求,和与mock请求匹配的目标历史数据请求过程中内部依赖的相关信息,该相关信息包括所调用目标中间组件的组件信息,以及目标中间组件的调用响应信息(该调用响应信息包括:目标中间组件的组件信息和目标中间组件响应请求(mock请求和上述目标历史数据请求)向第三方接口发送的请求参数,以及第三方接口返回的响应信息)等等。采用这样的方式,可以便于发送端的用户查看流量录制和回放过程中,计算设备响应同一个请求(即上述mock请求,和与mock请求匹配的目标历史数据请求)内部依赖的相关信息是否相同。
示例性地,假设mock请求和与mock请求匹配的目标历史数据,均为一个数据修改请求,该数据修改请求用于指示:将XX用户在目标业务系统中的余额更新为XX,发送端对比显示流量录制和回放过程,计算设备响应mock请求,和与mock请求匹配的目标历史数据请求过程中内部依赖的相关信息的页面,可以如图3所示。图3中调用中间组件1所依赖的相关信息可以包括:中间组件1响应数据处理请求向第三方接口发送的请求参数,以及第三方接口返回的响应信息;相应地,图3中调用中间组件2、中间组件3所依赖的相关信息也具有类似的含义,此处不作赘述。发送端对应的用户,可以通过图3所示的页面查看,确定本次mock请求调用的哪一个或者多个中间组件与录制时调用的中间组件不同,便于快速排查相应的问题。
本申请实施例中,可通过入口模块检测向流量录制设备发送的携带有第二请求参数的mock请求,从目标存储区域中获取与第二请求参数匹配的目标历史数据处理请求对应的历史录制流量,并调用链路关联模块确定该mock请求对应的回放链路存储区域,在回放链路存储区域中存储历史录制流量。进一步地,当检测到流量录制设备调用任一中间组件以响应该mock请求时,通过链路关联模块查询历史录制流量中是否包括任一中间组件的调用响应信息,若历史录制流量中是否包括任一中间组件的调用响应信息,则将该任一中间组件的调用响应信息返回mock请求对应的发送端,从而完成流量的回放。采用这样的方式,可以高效地回放对响应mock请求的全流程中内部依赖的相关信息。
本申请实施例还提供了一种计算机存储介质,该计算机存储介质中存储有程序指令,该程序指令被执行时,用于实现上述实施例中描述的相应方法。
再请参见图4,是本申请实施例的一种流量录制装置的结构示意图,该流量录制装置设置于流量录制设备,流量录制设备部署在计算设备中,所述流量录制装置包括入口模块40、链路关联模块41以及一个或者多个中间组件监测模块42,任一中间组件监测模块用于监测所述计算设备中的任一中间组件。
本申请实施例的所述装置的一个实现方式中,所述装置包括如下结构。
入口模块40,用于检测向所述计算设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
链路关联模块41,用于响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
各中间组件监测模块42,用于监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
链路关联模块41,还用于将接收到的所述调用响应信息存储至所述录制链路存储区域;
入口模块40,还用于当检测到所述计算设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
链路关联模块41,还用于响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
在一个实施例中,所述目标中间组件的调用响应信息包括:所述目标中间组件的组件信息和所述目标中间组件响应所述数据处理请求向第三方接口发送的请求参数,以及所述第三方接口返回的响应信息。
在一个实施例中,入口模块40,还用于检测向所述流量录制设备发送的mock请求,所述mock请求中携带有第二请求参数;从所述目标存储区域中获取与所述第二请求参数匹配的目标历史数据处理请求对应的历史录制流量;链路关联模块41,还用于确定所述mock请求对应的回放链路存储区域,在所述回放链路存储区域中存储所述历史录制流量;入口模块40,还用于当检测到所述计算设备调用任一中间组件以响应所述mock请求时,通过所述链路关联模块查询所述历史录制流量中是否包括所述任一中间组件的调用响应信息;若是,则将所述任一中间组件的调用响应信息返回所述mock请求对应的发送端。
在一个实施例中,入口模块40,还用于若所述历史录制流量中不包括所述任一中间组件的调用响应信息,则可以通过所述任一中间组件对应的中间组件监测模块记录所述任一中间组件的调用响应信息,并将记录的所述任一中间组件的调用响应信息,返回所述mock请求对应的发送端。
在一个实施例中,所述入口模块40,还具体用于:
对所述记录的所述任一中间组件的调用响应信息,添加回放异常标记;
将添加有所述回放异常标记的调用响应信息返回至所述mock请求对应的发送端。
在一个实施例中,链路关联模块41,还用于对所述录制链路存储区域中存储的所述第一请求参数和所述目标中间组件的调用响应信息,进行销毁处理。
在一个实施例中,所述入口模块40,还具体用于:当检测到所述计算设备对所述Mock请求的响应结束时,将目标历史数据处理请求对应的历史录制流量返回所述Mock请求对应的发送端。
在本申请实施例中,上述各个模块的具体实现可参考前述各个附图所对应的实施例中相关内容的描述。
本申请实施例中,流量录制装置可通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,该链路存储请求携带有第一请求参数。进一步地,通过链路关联模块响应所述链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。进一步地,通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。进一步地,当通过入口模块检测到计算设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求,通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。实施本申请实施例,可高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。
再请参见图5,是本申请实施例的一种流量录制设备的结构示意图,流量录制设备中设置有流量录制装置,该流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测计算设备中的任一中间组件,本申请实施例的所述流量录制设备包括供电模块等结构,并包括处理器601、存储装置602以及通信接口603。所述处理器601、存储装置602以及通信接口603之间可以交互数据,由处理器601实现相应的流量录制功能。
所述存储装置602可以包括易失性存储器(volatile memory),例如随机存取存储器(random-access memory,RAM);存储装置602也可以包括非易失性存储器(non-volatilememory),例如快闪存储器(flash memory),固态硬盘(solid-state drive,SSD)等;所述存储装置602还可以包括上述种类的存储器的组合。
所述处理器601可以是中央处理器601(central processing unit,CPU)。在一个实施例中,所述处理器601还可以是图形处理器601(Graphics Processing Unit,GPU)。所述处理器601也可以是由CPU和GPU的组合。在所述流量录制设备中,可以根据需要包括多个CPU和GPU进行相应的流量录制。在一个实施例中,所述存储装置602用于存储程序指令。所述处理器601可以调用所述程序指令,实现如本申请实施例中上述涉及的各种方法。
在第一个可能的实施方式中,所述流量录制设备的所述处理器601,调用所述存储装置602中存储的程序指令,用于通过所述入口模块检测向所述计算设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
通过所述链路关联模块响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
通过各中间组件监测模块监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
通过所述链路关联模块将接收到的所述调用响应信息存储至所述录制链路存储区域;
当通过所述入口模块检测到所述计算设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
通过所述链路关联模块响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
在一个实施例中,所述目标中间组件的调用响应信息包括:所述目标中间组件的组件信息和所述目标中间组件响应所述数据处理请求向第三方接口发送的请求参数,以及所述第三方接口返回的响应信息。
在一个实施例中,所述处理器601,还用于通过所述入口模块检测向所述流量录制设备发送的mock请求,所述mock请求中携带有第二请求参数;从所述目标存储区域中获取与所述第二请求参数匹配的目标历史数据处理请求对应的历史录制流量,并调用所述链路关联模块确定所述mock请求对应的回放链路存储区域,在所述回放链路存储区域中存储所述历史录制流量;当检测到所述计算设备调用任一中间组件以响应所述mock请求时,通过所述链路关联模块查询所述历史录制流量中是否包括所述任一中间组件的调用响应信息;若是,则将所述任一中间组件的调用响应信息返回所述mock请求对应的发送端。
在一个实施例中,所述处理器601,还用于若所述历史录制流量中不包括所述任一中间组件的调用响应信息,则可以通过所述任一中间组件对应的中间组件监测模块记录所述任一中间组件的调用响应信息,并将记录的所述任一中间组件的调用响应信息,返回所述Mock请求对应的发送端。
在一个实施例中,所述处理器601,具体用于:
对所述记录的所述任一中间组件的调用响应信息,添加回放异常标记;
将添加有所述回放异常标记的调用响应信息返回至所述mock请求对应的发送端。
在一个实施例中,所述处理器601,还用于对所述录制链路存储区域中存储的所述第一请求参数和所述目标中间组件的调用响应信息,进行销毁处理。
在一个实施例中,所述处理器601,还用于当通过所述入口模块检测到所述计算设备对所述mock请求的响应结束时,将目标历史数据处理请求对应的历史录制流量返回所述mock请求对应的发送端。
本申请实施例中,流量录制设备可通过入口模块检测向计算设备发送的数据处理请求,并获取数据处理请求携带的第一请求参数,向链路关联模块发送与数据处理请求关联的链路存储请求,该链路存储请求携带有第一请求参数。进一步地,通过链路关联模块响应所述链路存储请求,确定数据处理请求对应的录制链路存储区域,并在录制链路存储区域中存储第一请求参数。进一步地,通过各中间组件监测模块监测数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过目标组件监测模块记录目标中间组件的调用响应信息,并将调用响应信息发送至链路关联模块,通过链路关联模块将接收到的调用响应信息存储至录制链路存储区域。进一步地,当通过入口模块检测到计算设备对数据处理请求的响应结束时,向链路关联模块发送针对数据处理请求的录制流量获取请求,通过链路关联模块响应录制流量获取请求,从录制链路存储区域中获取第一请求参数和目标中间组件的调用响应信息,将第一请求参数和调用响应信息确定为数据处理请求的录制流量,并将录制流量存储至目标存储区域。实施本申请实施例,可高效地录制计算设备响应数据处理请求的全流程中内部依赖的相关信息。
其中,本申请所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块,每一个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本申请的部分实施例而已,当然不能以此来限定本申请之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本申请权利要求所作的等同变化,仍属于本申请所涵盖的范围。

Claims (10)

1.一种流量录制方法,其特征在于,所述方法应用于部署在计算设备中的流量录制装置,所述流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测所述计算设备中的任一中间组件,所述方法包括:
通过所述入口模块检测向所述计算设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
通过所述链路关联模块响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
通过各中间组件监测模块监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
通过所述链路关联模块将接收到的所述调用响应信息存储至所述录制链路存储区域;
当通过所述入口模块检测到所述计算设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
通过所述链路关联模块响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
2.如权利要求1所述的方法,其特征在于,所述目标中间组件的调用响应信息包括:所述目标中间组件的组件信息和所述目标中间组件响应所述数据处理请求向第三方接口发送的请求参数,以及所述第三方接口返回的响应信息。
3.如权利要求1或2所述的方法,其特征在于,所述方法还包括:
通过所述入口模块检测向所述流量录制设备发送的mock请求,所述mock请求中携带有第二请求参数;
从所述目标存储区域中获取与所述第二请求参数匹配的目标历史数据处理请求对应的历史录制流量,并调用所述链路关联模块确定所述mock请求对应的回放链路存储区域,在所述回放链路存储区域中存储所述历史录制流量;
当检测到所述计算设备调用任一中间组件以响应所述mock请求时,通过所述链路关联模块查询所述历史录制流量中是否包括所述任一中间组件的调用响应信息;
若是,则将所述任一中间组件的调用响应信息返回所述mock请求对应的发送端。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
若所述历史录制流量中不包括所述任一中间组件的调用响应信息,则可以通过所述任一中间组件对应的中间组件监测模块记录所述任一中间组件的调用响应信息,并将记录的所述任一中间组件的调用响应信息,返回所述mock请求对应的发送端。
5.如权利要求4所述的方法,其特征在于,所述将记录的所述任一中间组件的调用响应信息,返回所述mock请求的发送端,包括:
对所述记录的所述任一中间组件的调用响应信息,添加回放异常标记;
将添加有所述回放异常标记的调用响应信息返回至所述mock请求对应的发送端。
6.如权利要求1所述的方法,其特征在于,所述将所述录制流量存储至目标存储区域之后,所述方法还包括:
对所述录制链路存储区域中存储的所述第一请求参数和所述目标中间组件的调用响应信息,进行销毁处理。
7.如权利要求3所述的方法,其特征在于,所述方法还包括:
当通过所述入口模块检测到所述计算设备对所述mock请求的响应结束时,将目标历史数据处理请求对应的历史录制流量返回所述mock请求对应的发送端。
8.一种流量录制装置,其特征在于,所述流量录制装置设置于流量录制设备,所述流量录制设备部署在计算设备中,所述流量录制装置包括入口模块、链路关联模块以及一个或者多个中间组件监测模块,任一中间组件监测模块用于监测所述计算设备中的任一中间组件,其中:
所述入口模块,用于检测向所述计算设备发送的数据处理请求,并获取所述数据处理请求携带的第一请求参数,向所述链路关联模块发送与所述数据处理请求关联的链路存储请求,所述链路存储请求携带有所述第一请求参数;
所述链路关联模块,用于响应所述链路存储请求,确定所述数据处理请求对应的录制链路存储区域,并在所述录制链路存储区域中存储所述第一请求参数;
各中间组件监测模块,用于监测所述数据处理请求对各自对应中间组件的调用,若目标组件监测模块对应的目标中间组件被调用,则通过所述目标组件监测模块记录所述目标中间组件的调用响应信息,并将所述调用响应信息发送至所述链路关联模块,所述目标组件监测模块为所述各中间组件监测模块中的任一个或者多个;
所述链路关联模块,还用于将接收到的所述调用响应信息存储至所述录制链路存储区域;
所述入口模块,还用于当检测到所述计算设备对所述数据处理请求的响应结束时,向所述链路关联模块发送针对所述数据处理请求的录制流量获取请求;
所述链路关联模块,还用于响应所述录制流量获取请求,从所述录制链路存储区域中获取所述第一请求参数和所述目标中间组件的调用响应信息,将所述第一请求参数和所述调用响应信息确定为所述数据处理请求的录制流量,并将所述录制流量存储至目标存储区域。
9.一种流量录制设备,其特征在于,包括处理器、存储装置和通信接口,所述处理器、所述存储装置和所述通信接口相互连接,其中,所述存储装置用于存储计算机程序指令,所述处理器被配置用于执行所述程序指令,实现如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序指令,所述计算机程序指令被处理器执行时,用于执行如权利要求1-7任一项所述的方法。
CN202110574862.5A 2021-05-25 2021-05-25 一种流量录制方法、装置及流量录制设备、存储介质 Active CN113315828B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110574862.5A CN113315828B (zh) 2021-05-25 2021-05-25 一种流量录制方法、装置及流量录制设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110574862.5A CN113315828B (zh) 2021-05-25 2021-05-25 一种流量录制方法、装置及流量录制设备、存储介质

Publications (2)

Publication Number Publication Date
CN113315828A true CN113315828A (zh) 2021-08-27
CN113315828B CN113315828B (zh) 2022-11-29

Family

ID=77374748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110574862.5A Active CN113315828B (zh) 2021-05-25 2021-05-25 一种流量录制方法、装置及流量录制设备、存储介质

Country Status (1)

Country Link
CN (1) CN113315828B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113742228A (zh) * 2021-09-02 2021-12-03 杭州网易云音乐科技有限公司 测试、数据回放及录制方法、系统、装置、设备及介质
CN113923146A (zh) * 2021-10-11 2022-01-11 南京邮电大学 一种可视化区块链共识算法性能测试方法
CN114884844A (zh) * 2022-06-14 2022-08-09 上海幻电信息科技有限公司 流量录制方法及系统
CN117240925A (zh) * 2023-11-13 2023-12-15 广州品唯软件有限公司 流量录制方法、装置、存储介质及计算机设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170277616A1 (en) * 2016-03-25 2017-09-28 Linkedin Corporation Replay-suitable trace recording by service container
US10146675B1 (en) * 2016-12-29 2018-12-04 EMC IP Holding Company LLC Automated code upgrade testing utilizing a copy data manager
CN111625452A (zh) * 2020-05-22 2020-09-04 上海哔哩哔哩科技有限公司 流量回放方法和系统
CN112463605A (zh) * 2020-11-26 2021-03-09 杭州网易云音乐科技有限公司 自动化测试方法及装置、存储介质、电子设备
CN112637005A (zh) * 2020-12-08 2021-04-09 广州品唯软件有限公司 流量回放方法、装置、计算机设备和存储介质
CN112702436A (zh) * 2020-12-29 2021-04-23 广州品唯软件有限公司 流量录制方法、装置、计算机设备和存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170277616A1 (en) * 2016-03-25 2017-09-28 Linkedin Corporation Replay-suitable trace recording by service container
US10146675B1 (en) * 2016-12-29 2018-12-04 EMC IP Holding Company LLC Automated code upgrade testing utilizing a copy data manager
CN111625452A (zh) * 2020-05-22 2020-09-04 上海哔哩哔哩科技有限公司 流量回放方法和系统
CN112463605A (zh) * 2020-11-26 2021-03-09 杭州网易云音乐科技有限公司 自动化测试方法及装置、存储介质、电子设备
CN112637005A (zh) * 2020-12-08 2021-04-09 广州品唯软件有限公司 流量回放方法、装置、计算机设备和存储介质
CN112702436A (zh) * 2020-12-29 2021-04-23 广州品唯软件有限公司 流量录制方法、装置、计算机设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
阎志军 等: ""基于客户端SDK的全链路压测方案的设计与实现"", 《新型工业化》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113742228A (zh) * 2021-09-02 2021-12-03 杭州网易云音乐科技有限公司 测试、数据回放及录制方法、系统、装置、设备及介质
CN113742228B (zh) * 2021-09-02 2023-12-15 杭州网易云音乐科技有限公司 测试、数据回放及录制方法、系统、装置、设备及介质
CN113923146A (zh) * 2021-10-11 2022-01-11 南京邮电大学 一种可视化区块链共识算法性能测试方法
CN113923146B (zh) * 2021-10-11 2024-05-03 南京邮电大学 一种可视化区块链共识算法性能测试方法
CN114884844A (zh) * 2022-06-14 2022-08-09 上海幻电信息科技有限公司 流量录制方法及系统
CN114884844B (zh) * 2022-06-14 2023-12-26 上海幻电信息科技有限公司 流量录制方法及系统
CN117240925A (zh) * 2023-11-13 2023-12-15 广州品唯软件有限公司 流量录制方法、装置、存储介质及计算机设备
CN117240925B (zh) * 2023-11-13 2024-03-19 广州品唯软件有限公司 流量录制方法、装置、存储介质及计算机设备

Also Published As

Publication number Publication date
CN113315828B (zh) 2022-11-29

Similar Documents

Publication Publication Date Title
CN113315828B (zh) 一种流量录制方法、装置及流量录制设备、存储介质
CN110263585B (zh) 测试监管方法、装置、设备及存储介质
CN109598505B (zh) 一种基于区块链的质量数据处理方法和装置
CN110990183B (zh) 数据库集群的异常检测方法、装置、计算机可读存储介质
CN113489713B (zh) 网络攻击的检测方法、装置、设备及存储介质
US11182873B2 (en) Multiple source watermarking for surveillance
CN111090581A (zh) 智能合约测试方法、装置、计算机设备和存储介质
CN112613288B (zh) 结算单生成方法、装置、计算机设备和存储介质
CN109542764B (zh) 网页自动化测试方法、装置、计算机设备和存储介质
CN111813418B (zh) 分布式链路跟踪方法、装置、计算机设备及存储介质
CN110866265A (zh) 一种基于区块链的数据存储方法、设备及存储介质
CN108366132B (zh) 服务器间的服务管理方法、装置、计算机设备和存储介质
CN110598476A (zh) 基于区块链的作品存证方法、装置和计算机可读存储介质
CN116662987A (zh) 业务系统监控方法、装置、计算机设备及存储介质
CN116739596A (zh) 基于区块链的交易监管方法、装置、设备、介质和产品
CN110598374A (zh) 基于区块链的作品登记方法、装置和计算机可读存储介质
CN112579413B (zh) 服务器运行记录变更方法、装置、计算机设备和存储介质
CN115168489B (zh) 基于区块链的数据存证方法和装置
CN117171235B (zh) 基于工业标识的数据解析方法及相关设备
CN115203063B (zh) 基于实时录制的生产流量重跑风险程序的回放方法及系统
CN111899016B (zh) 一种基于区块链的质量数据处理方法和装置
CN117251341A (zh) 缓存服务集群实时监控方法、装置、电子设备及介质
CN117093468A (zh) 测试用例生成方法、装置、设备、介质及计算机程序产品
CN118860717A (zh) 一种智能合约运行方法和装置
CN117040855A (zh) 风险因子集生成和风险行为监测方法、装置、介质及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant