CN116069840A - 业务重构迁移中接口重放方法、装置和计算机设备 - Google Patents
业务重构迁移中接口重放方法、装置和计算机设备 Download PDFInfo
- Publication number
- CN116069840A CN116069840A CN202211516006.5A CN202211516006A CN116069840A CN 116069840 A CN116069840 A CN 116069840A CN 202211516006 A CN202211516006 A CN 202211516006A CN 116069840 A CN116069840 A CN 116069840A
- Authority
- CN
- China
- Prior art keywords
- interface
- request
- preset
- replayed
- analysis value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000013508 migration Methods 0.000 title claims abstract description 29
- 230000005012 migration Effects 0.000 title claims abstract description 28
- 238000004573 interface analysis Methods 0.000 claims abstract description 77
- 238000012545 processing Methods 0.000 claims abstract description 73
- 238000004590 computer program Methods 0.000 claims description 40
- 230000009467 reduction Effects 0.000 claims description 10
- 238000001914 filtration Methods 0.000 claims description 8
- 238000010276 construction Methods 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 description 9
- 230000001174 ascending effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000013507 mapping Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
- G06F16/2445—Data retrieval commands; View definitions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及一种业务重构迁移中接口重放方法、装置和计算机设备。所述方案包括:获取旧系统的日志文件;对所述日志文件进行解析,得到接口解析值;将待重放接口的接口解析值写入至预设接口重放表中;获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。采用本方案能够不易导致系统业务处理出错。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种业务重构迁移中接口重放方法、装置、计算机设备、存储介质和计算机程序产品。
背景技术
在对旧系统进行重构开发或者系统功能迁移时,为了确保业务平稳过渡,一般需要对新系统进行线上试运行。试运行阶段新/旧系统同时运行,相关业务操作需在新旧系统执行,然后采用数据对比的方式监控新系统功能是否运行正常。
目前常用方案一般有两种方式,一是开发一个网关层,同时向新/旧系统发送业务请求;二是对旧系统逻辑进行改造,在处理完业务请求后同时向新系统发送业务处理请求。
开发网关层或修改旧系统代码逻辑,需要修改原来的业务处理流程或者修改旧系统代码,其容易导致系统业务处理出错。
发明内容
基于此,有必要针对上述技术问题,提供一种不易导致系统业务处理出错的业务重构迁移中接口重放方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
第一方面,本申请提供了一种业务重构迁移中接口重放方法。所述方法包括:
获取旧系统的日志文件;
对所述日志文件进行解析,得到接口解析值;
将待重放接口的接口解析值写入至预设接口重放表中;
获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
在其中一个实施例中,所述对所述日志文件进行解析,得到接口解析值包括:
逐行读取所述日志文件;
对读取的所述日志文件的内容进行分割,得到接口解析值。
在其中一个实施例中,所述将待重放接口的接口解析值写入至预设接口重放表中之前,还包括:
对所述接口解析值进行降噪处理;
对降噪的接口解析值进行转码处理。
在其中一个实施例中,所述将待重放接口的接口解析值写入至预设接口重放表中包括:
获取预设接口列表;
根据所述预设接口列表,过滤出待重放接口的接口解析值;
将所述待重放接口的接口解析值写入至预设接口重放表中。
在其中一个实施例中,上述业务重构迁移中接口重放方法还包括:
读取所述预设接口重放表中待重放接口;
判断所述待重放接口是否存在接口重放失败记录;
若否,则获取所述待重放接口中处理状态为初始化状态的接口记录;
若是,则退出判断处理程序。
在其中一个实施例中,所述构造所述接口记录对应的接口请求参数,向新系统发送接口请求之后还包括:
根据新系统接收接口请求的处理结果,更改所述预设接口重放表中接口记录。
第二方面,本申请还提供了一种业务重构迁移中接口重放装置。所述装置包括:
日志文件获取模块,用于获取旧系统的日志文件;
接口解析值获取模块,用于对所述日志文件进行解析,得到接口解析值;
接口解析值写入模块,用于将待重放接口的接口解析值写入至预设接口重放表中;
接口记录获取模块,用于获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
接口请求参数构造模块,用于构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
第三方面,本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取旧系统的日志文件;
对所述日志文件进行解析,得到接口解析值;
将待重放接口的接口解析值写入至预设接口重放表中;
获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
第四方面,本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取旧系统的日志文件;
对所述日志文件进行解析,得到接口解析值;
将待重放接口的接口解析值写入至预设接口重放表中;
获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
第五方面,本申请还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现以下步骤:
获取旧系统的日志文件;
对所述日志文件进行解析,得到接口解析值;
将待重放接口的接口解析值写入至预设接口重放表中;
获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
上述业务重构迁移中接口重放方法、装置、计算机设备、存储介质和计算机程序产品,通过获取旧系统的日志文件;对日志文件进行解析,得到接口解析值;将待重放接口的接口解析值写入至预设接口重放表中;获取预设接口重放表中处理状态为初始化状态的接口记录;构造接口记录对应的接口请求参数,向新系统发送接口请求。本方案中,通过按旧系统的接口请求时间升序排序,查询获取预设接口重放表中处理状态为初始化状态的接口记录,然后构造接口记录对应的接口请求参数,向新系统发送接口请求,以实现旧系统业务重构迁移,能避免修改旧系统的代码逻辑,不易导致系统业务处理出错。
附图说明
图1为一个实施例中业务重构迁移中接口重放方法的应用环境图;
图2为一个实施例中业务重构迁移中接口重放方法的流程示意图;
图3另为一个实施例中业务重构迁移中接口重放方法的流程示意图;
图4为业务重构迁移中接口重放的主要流程示意图;
图5为一个实施例中业务重构迁移中接口重放装置的结构框图;
图6为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的业务重构迁移中接口重放方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他网络服务器上。终端102获取旧系统的日志文件,服务器104对日志文件进行解析,得到接口解析值,将待重放接口的接口解析值写入至预设接口重放表中,获取预设接口重放表中处理状态为初始化状态的接口记录,构造接口记录对应的接口请求参数,向新系统发送接口请求。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种业务重构迁移中接口重放方法,以该方法应用于图1中的服务器104为例进行说明。
S100,获取旧系统的日志文件。
其中,日志文件是nginx日志文件,它记录着旧系统中接口请求相关信息,可以根据旧系统中接口请求相关信息,向新系统构造接口请求参数。
具体地,nginx日志文件access.log会记录所有经过nginx代理的POST(向指定资源提交数据进行处理请求)/GET(向特定资源发出请求)请求信息,但是,nginx默认情况下不会记录请求参数,需要手动修改配置文件nginx.conf中的日志文件输出格式,以json格式输出,nginx日志默认以空格分割每个信息项。
S200,对日志文件进行解析,得到接口解析值。
其中,解析是以空格对日志文件内容进行分割,以得到接口请求相关参数值;接口解析值是从日志文件中解析出的接口请求相关参数值,包括接口请求时间、请求方式(POST(向指定资源提交数据进行处理请求)/GET(向特定资源发出请求))、请求url、请求处理状态、请求参数字段。
具体地,采用java代码逐行读取日志文件,对日志文件的内容进行分割,得到接口请求时间、请求方式、请求url、请求处理状态、请求参数对应的值。
S300,将待重放接口的接口解析值写入至预设接口重放表中。
其中,接口重放表是数据库中用来存储待重放接口请求参数字段的表,包括接口请求时间、url等各个字段。
具体地,获取预设接口列表,根据预设接口列表,从解析的日志文件中,过滤出待重放接口相关的字段信息,将待重放接口相关的字段信息写入至预设接口重放表中。
S400,获取预设接口重放表中处理状态为初始化状态的接口记录。
其中,处理状态是接口重放处理状态,取值有:I-初始化,P-处理中,S-处理成功,F-处理失败,K-跳过,通过处理状态可以得到接口重放的结果。
具体地,按接口请求时间升序排序,查询预设接口重放表中待重放接口,判断待重放接口是否存在接口重放失败记录,若否,则获取待重放接口中处理状态为初始化状态的接口记录,若是,则退出处理程序,需人工处理。
S500,构造接口记录对应的接口请求参数,向新系统发送接口请求。
其中,接口请求参数是客户端在发送请求时,带给服务器的接口数据;接口请求是客户端调用接口时发送给服务器的请求,接口请求方式包括POST和GET请求。
具体地,若是预设接口重放表中处理状态为初始化状态的接口记录,根据解析的日志文件中旧系统接口请求参数,构造出新系统接口所需参数,向新系统发送接口请求。
上述业务重构迁移中接口重放方法中,获取旧系统的日志文件,对日志文件进行解析,得到接口解析值,将待重放接口的接口解析值写入至预设接口重放表中,获取预设接口重放表中处理状态为初始化状态的接口记录,构造接口记录对应的接口请求参数,向新系统发送接口请求,避免修改旧系统的代码逻辑,不易导致系统业务处理出错。
在一个实施例中,对日志文件进行解析,得到接口解析值包括:
逐行读取日志文件;对读取的日志文件的内容进行分割,得到接口解析值。
具体地,采用java代码逐行读取日志文件,对每行内容调用java的String的split方法以空格对内容进行分割,根据日志文件格式配置及日志文件输出格式确定需要解析的内容对应的字段,得到需要解析的请求信息与日志文件的映射关系如表1所示:
表1需解析的请求信息与日志文件的映射关系表
需解析接口字段 | 日志文件映射信息 |
接口请求时间 | 取日志文件的空格分割后的第4列,即[17/Oct/2022:09:36:09 |
请求方式 | 取日志文件的空格分割后的第6列,即"GET |
请求url | 取日志文件的空格分割后的第7列 |
请求状态 | 取日志文件的空格分割后的第9列,即200 |
请求参数 | 取日志文件的空格分割后的第14列及以后的数据 |
其中,因为有的接口没有参数,因此不一定存在请求参数,在解析时需要对spilt后的字符串数组做长度判断,如果长度大于等于14,则解析请求参数,否则请求参数解析结果为空。
本实施例中,通过逐行读取日志文件,对读取的日志文件的内容进行分割,得到接口解析值,能获取待重放接口的接口参数值。
在一个实施例中,将待重放接口的接口解析值写入至预设接口重放表中之前,还包括:
对接口解析值进行降噪处理;对降噪的接口解析值进行转码处理。
其中,降噪是去除解析值中多余字符;转码是将请求中的URL编码进行解码处理,例如,Nginx对接口Url进行了编码,需要调用URLDecoder.decode解码处理。
具体地,对接口解析值做“降噪”,去除多余字符,因为使用空格分割后,有的解析值包含多余的信息,因此需要对值进行裁剪处理等;对降噪的接口解析值进行转码处理。
本实施例中,通过对接口解析值进行降噪处理,对降噪的接口解析值进行转码处理,能获取更加准确的待重放接口的解析值。
在一个实施例中,将待重放接口的接口解析值写入至预设接口重放表中包括:
获取预设接口列表;根据预设接口列表,过滤出待重放接口的接口解析值;将待重放接口的接口解析值写入至预设接口重放表中。
其中,接口列表是人为配置在数据库的,用来存储旧系统中需要重放的接口请求相关参数值。
具体地,因为只有在接口列表中的接口才进行重放,可以根据接口列表,过滤掉不需要重放的接口解析值,得到待重放接口的接口解析值,将待重放接口的接口解析值写入至预设接口重放表中,表名记为t_intf_replay,接口重放表结构主要字段如表2所示:
表2接口重放表
本实施例中,通过获取预设接口列表,根据预设接口列表,过滤出待重放接口的接口解析值,将待重放接口的接口解析值写入至预设接口重放表中,能根据待重放接口的接口解析值,构造接口请求参数,向新系统发送接口请求。
在一个实施例中,如图3所示,S400包括:
S420,读取预设接口重放表中待重放接口。
S440,判断待重放接口是否存在接口重放失败记录。
S460,若否,则获取待重放接口中处理状态为初始化状态的接口记录。
S480,若是,则退出判断处理程序。
具体地,按接口请求时间Request_time升序排序从数据库接口重放表中查询待重放接口是否存在失败的记录,即接口重放处理状态为F的记录,如可以通过Select语句,查询在接口重放表t_intf_replay中Process_status=’F’的记录。
若待重放接口没有存在接口重放失败记录,接口重放程序会定时从数据库查询接口重放表处理状态为初始化状态的记录,查询结果以请求时间升序排序,如可以通过Select语句,查询在接口重放表t_intf_replay中Process_status=’I’的记录;若待重放接口存在接口重放失败记录,则退出判断处理程序。
本实施例中,通过读取预设接口重放表中待重放接口,判断待重放接口是否存在接口重放失败记录,若否,则获取待重放接口中处理状态为初始化状态的接口记录,若是,则退出判断处理程序,能根据待重放接口中处理状态为初始化状态的接口记录,构造对应的接口请求参数。
在一个实施例中,构造接口记录对应的接口请求参数,向新系统发送接口请求之后还包括:
根据新系统接收接口请求的处理结果,更改预设接口重放表中接口记录。
具体地,如果重放结果处理成功,则更新对应记录表Process_status=’S’;处理失败则更新Process_status=’F’,并退出重放程序,待人工介入手动处理,人工处理时,如果是程序bug,可以修正后手动发起;如果需要丢弃,则可手动标记Process_status=’K’,表示手动跳过,无需处理;则自动重放程序会忽略该记录。
本实施例中,通过根据新系统接收接口请求的处理结果,更改预设接口重放表中接口记录,可以根据接口重放表中接口记录,判断是否进行手动处理。
为详细说明本申请业务重构迁移中接口重放方法的技术方案及其效果,下面将采用具体应用实例展开描述。在实际应用中,图4为业务重构迁移中接口重放的主要流程,整个业务重构迁移中接口重放方法包括以下步骤:
1、采用java代码逐行读取日志文件,对每行内容调用java的String的split方法以空格对内容进行分割。
2、根据日志文件格式配置及日志文件输出格式确定需要解析的内容对应的字段(这里以上面的配置举例说明),则得到需要解析的请求信息与日志文件的映射关系。
3、对解析值做“降噪”,去除多余字符。因为使用空格分割后,有的解析值包含多余的信息,比如第4列的请求时间,前面多了个“[”字符,第6列的请求方式前面多了一个双引号,因此需要对值进行裁剪处理等。
4、对解析值进行转码处理。如Nginx对接口Url进行了编码,需要调用URLDecoder.decode解码处理;另外对回车换行符、双引号等也转为了十六进制编码(如\x0A\x0A\x22,\x0A为回车换行,\x22为双引号)。
5、解析Get请求的查询字符串,查询字符串在url中以字符“?”开头,是key-value的形式,多个查询参数以&分割,如日志文件格式中的“?orderNo=3334094455140704256&name=%E6%B5%8B%E8%AF%95”,解析时截取url中字符“?”以后的字符串当成Query_string,且接口url修正为字符“?”之前的字符串。
6、定义需要在新系统进行重放的接口列表,并存储到缓存中,便于后续查找处理,因为并非所有旧系统接口都需要在新系统做重放,只有在重放接口列表中的接口才进行重放,可以提高程序处理效率。
7、使用数据库表存储接口请求时间、url等各个字段。
8、检查数据库接口重放表中是否存在失败的记录,如果存在则退出处理程序,需人工处理。从数据库中按Request_time升序排序查询状态为F的记录。
9、接口重放程序定时任务从数据库查询处理状态为初始化状态的记录,查询结果以请求时间升序排序,
10、根据接口名称编写新系统中对应的接口请求处理逻辑,编写代码构造请求参数,如果老的接口为Get请求,则需要从query_string中解析构造出新接口所需参数,如果是POST请求,则从Request_params中构造请求参数,向新系统发送请求,并更新Process_status=’P’。
11、如果重放结果处理成功,则更新对应记录表Process_status=’S’;处理失败则更新Process_status=’F’,并退出重放程序,待人工介入手动处理。
12、人工处理时,如果是程序bug,可以修正后手动发起;如果需要丢弃,则可手动标记Process_status=’K’,表示手动跳过,无需处理;则自动重放程序会忽略该记录。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的业务重构迁移中接口重放方法的接口重放装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个接口重放装置实施例中的具体限定可以参见上文中对于业务重构迁移中接口重放方法的限定,在此不再赘述。
在一个实施例中,如图5所示,提供了一种业务重构迁移中接口重放装置,包括:日志文件获取模块100、接口解析值获取模块200、接口解析值写入模块300、接口记录获取模块400和接口请求参数构造模块500,其中:
日志文件获取模块100,用于获取旧系统的日志文件;
接口解析值获取模块200,用于对日志文件进行解析,得到接口解析值;
接口解析值写入模块300,用于将待重放接口的接口解析值写入至预设接口重放表中;
接口记录获取模块400,用于获取预设接口重放表中处理状态为初始化状态的接口记录,预设接口重放表中接口记录按接口请求时间排序;
接口请求参数构造模块500,用于构造接口记录对应的接口请求参数,向新系统发送接口请求,接口请求携带接口请求参数。
在一个实施例中,接口解析值获取模块200还用于逐行读取日志文件;对读取的日志文件的内容进行分割,得到接口解析值。
在一个实施例中,接口解析值写入模块300还用于获取预设接口列表;根据预设接口列表,过滤出待重放接口的接口解析值;将待重放接口的接口解析值写入至预设接口重放表中。
在一个实施例中,接口记录获取模块400还用于读取预设接口重放表中待重放接口;判断待重放接口是否存在接口重放失败记录;若否,则获取待重放接口中处理状态为初始化状态的接口记录;若是,则退出判断处理程序。
上述业务重构迁移中接口重放装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储日志文件数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种业务重构迁移中接口重放方法。
本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取旧系统的日志文件;对日志文件进行解析,得到接口解析值;将待重放接口的接口解析值写入至预设接口重放表中;获取预设接口重放表中处理状态为初始化状态的接口记录,预设接口重放表中接口记录按接口请求时间排序;构造接口记录对应的接口请求参数,向新系统发送接口请求,接口请求携带接口请求参数。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
逐行读取日志文件;对读取的日志文件的内容进行分割,得到接口解析值。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
对接口解析值进行降噪处理;对降噪的接口解析值进行转码处理。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取预设接口列表;根据预设接口列表,过滤出待重放接口的接口解析值;将待重放接口的接口解析值写入至预设接口重放表中。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
读取预设接口重放表中待重放接口;判断待重放接口是否存在接口重放失败记录;若否,则获取待重放接口中处理状态为初始化状态的接口记录;若是,则退出判断处理程序。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
根据新系统接收接口请求的处理结果,更改预设接口重放表中接口记录。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取旧系统的日志文件;对日志文件进行解析,得到接口解析值;将待重放接口的接口解析值写入至预设接口重放表中;获取预设接口重放表中处理状态为初始化状态的接口记录,预设接口重放表中接口记录按接口请求时间排序;构造接口记录对应的接口请求参数,向新系统发送接口请求,接口请求携带接口请求参数。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
逐行读取日志文件;对读取的日志文件的内容进行分割,得到接口解析值。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
对接口解析值进行降噪处理;对降噪的接口解析值进行转码处理。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取预设接口列表;根据预设接口列表,过滤出待重放接口的接口解析值;将待重放接口的接口解析值写入至预设接口重放表中。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
读取预设接口重放表中待重放接口;判断待重放接口是否存在接口重放失败记录;若否,则获取待重放接口中处理状态为初始化状态的接口记录;若是,则退出判断处理程序。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据新系统接收接口请求的处理结果,更改预设接口重放表中接口记录。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现以下步骤:
获取旧系统的日志文件;对日志文件进行解析,得到接口解析值;将待重放接口的接口解析值写入至预设接口重放表中;获取预设接口重放表中处理状态为初始化状态的接口记录,预设接口重放表中接口记录按接口请求时间排序;构造接口记录对应的接口请求参数,向新系统发送接口请求,接口请求携带接口请求参数。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
逐行读取日志文件;对读取的日志文件的内容进行分割,得到接口解析值。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
对接口解析值进行降噪处理;对降噪的接口解析值进行转码处理。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取预设接口列表;根据预设接口列表,过滤出待重放接口的接口解析值;将待重放接口的接口解析值写入至预设接口重放表中。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
读取预设接口重放表中待重放接口;判断待重放接口是否存在接口重放失败记录;若否,则获取待重放接口中处理状态为初始化状态的接口记录;若是,则退出判断处理程序。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
根据新系统接收接口请求的处理结果,更改预设接口重放表中接口记录。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (10)
1.一种业务重构迁移中接口重放方法,其特征在于,所述方法包括:
获取旧系统的日志文件;
对所述日志文件进行解析,得到接口解析值;
将待重放接口的接口解析值写入至预设接口重放表中;
获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
2.根据权利要求1所述的方法,其特征在于,所述对所述日志文件进行解析,得到接口解析值包括:
逐行读取所述日志文件;
对读取的所述日志文件的内容进行分割,得到接口解析值。
3.根据权利要求1所述的方法,其特征在于,所述将待重放接口的接口解析值写入至预设接口重放表中之前,还包括:
对所述接口解析值进行降噪处理;
对降噪的接口解析值进行转码处理。
4.根据权利要求1所述的方法,其特征在于,所述将待重放接口的接口解析值写入至预设接口重放表中包括:
获取预设接口列表;
根据所述预设接口列表,过滤出待重放接口的接口解析值;
将所述待重放接口的接口解析值写入至预设接口重放表中。
5.根据权利要求1所述的方法,其特征在于,还包括:
读取所述预设接口重放表中待重放接口;
判断所述待重放接口是否存在接口重放失败记录;
若否,则获取所述待重放接口中处理状态为初始化状态的接口记录;
若是,则退出判断处理程序。
6.根据权利要求1所述的方法,其特征在于,所述构造所述接口记录对应的接口请求参数,向新系统发送接口请求之后,还包括:
根据新系统接收接口请求的处理结果,更改所述预设接口重放表中接口记录。
7.一种业务重构迁移中接口重放装置,其特征在于,所述装置包括:
日志文件获取模块,用于获取旧系统的日志文件;
接口解析值获取模块,用于对所述日志文件进行解析,得到接口解析值;
接口解析值写入模块,用于将待重放接口的接口解析值写入至预设接口重放表中;
接口记录获取模块,用于获取所述预设接口重放表中处理状态为初始化状态的接口记录,所述预设接口重放表中所述接口记录按接口请求时间排序;
接口请求参数构造模块,用于构造所述接口记录对应的接口请求参数,向新系统发送接口请求,所述接口请求携带所述接口请求参数。
8.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211516006.5A CN116069840A (zh) | 2022-11-30 | 2022-11-30 | 业务重构迁移中接口重放方法、装置和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211516006.5A CN116069840A (zh) | 2022-11-30 | 2022-11-30 | 业务重构迁移中接口重放方法、装置和计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116069840A true CN116069840A (zh) | 2023-05-05 |
Family
ID=86182902
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211516006.5A Pending CN116069840A (zh) | 2022-11-30 | 2022-11-30 | 业务重构迁移中接口重放方法、装置和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116069840A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018201978A1 (zh) * | 2017-05-04 | 2018-11-08 | 平安科技(深圳)有限公司 | 接口调用数据处理方法、装置、计算机设备和存储介质 |
CN109344100A (zh) * | 2018-08-17 | 2019-02-15 | 北京奇虎科技有限公司 | 一种辅助系统接口迁移的方法及装置 |
CN113220666A (zh) * | 2021-05-24 | 2021-08-06 | 中国工商银行股份有限公司 | 数据库迁移后批量处理日志回放方法、装置及系统 |
CN113821254A (zh) * | 2021-09-29 | 2021-12-21 | 平安普惠企业管理有限公司 | 接口数据处理方法、装置、存储介质及设备 |
CN115168312A (zh) * | 2022-07-14 | 2022-10-11 | 中国银行股份有限公司 | 基于交易日志重放的压力测试方法及装置 |
-
2022
- 2022-11-30 CN CN202211516006.5A patent/CN116069840A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018201978A1 (zh) * | 2017-05-04 | 2018-11-08 | 平安科技(深圳)有限公司 | 接口调用数据处理方法、装置、计算机设备和存储介质 |
CN109344100A (zh) * | 2018-08-17 | 2019-02-15 | 北京奇虎科技有限公司 | 一种辅助系统接口迁移的方法及装置 |
CN113220666A (zh) * | 2021-05-24 | 2021-08-06 | 中国工商银行股份有限公司 | 数据库迁移后批量处理日志回放方法、装置及系统 |
CN113821254A (zh) * | 2021-09-29 | 2021-12-21 | 平安普惠企业管理有限公司 | 接口数据处理方法、装置、存储介质及设备 |
CN115168312A (zh) * | 2022-07-14 | 2022-10-11 | 中国银行股份有限公司 | 基于交易日志重放的压力测试方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111177302B (zh) | 业务单据处理方法、装置、计算机设备和存储介质 | |
US9426219B1 (en) | Efficient multi-part upload for a data warehouse | |
CN111026568B (zh) | 数据和任务关系构建方法、装置、计算机设备及存储介质 | |
CN107391544B (zh) | 列式存储数据的处理方法、装置、设备及计算机储存介质 | |
CN112199344B (zh) | 一种日志分类的方法和装置 | |
CN114722119A (zh) | 数据同步方法及系统 | |
CN110928941B (zh) | 一种数据分片抽取方法及装置 | |
CN112463880A (zh) | 一种区块链数据存储方法及相关装置 | |
CN111124883A (zh) | 一种基于树形表格的测试用例库引入方法、系统及设备 | |
CN116069840A (zh) | 业务重构迁移中接口重放方法、装置和计算机设备 | |
CN115858471A (zh) | 业务数据变更记录方法、装置、计算机设备及介质 | |
CN115658680A (zh) | 数据存储方法、数据查询方法和相关装置 | |
CN113282347B (zh) | 插件运行方法、装置、设备及存储介质 | |
CN113268483A (zh) | 请求处理方法和装置、电子设备和存储介质 | |
CN113760875A (zh) | 一种数据处理方法、装置、电子设备和存储介质 | |
CN113612832A (zh) | 流式数据分发方法与系统 | |
CN115115433B (zh) | 订单数据处理方法、装置、计算机设备和存储介质 | |
CN112364007B (zh) | 基于数据库的海量数据交换方法、装置、设备和存储介质 | |
CN116932779B (zh) | 知识图谱的数据处理方法和装置 | |
CN117251384B (zh) | 一种接口自动化测试用例生成方法及系统 | |
CN111241437B (zh) | 数据处理方法、装置、服务端以及存储介质 | |
CN115629958A (zh) | 一种针对不同业务接口的通用字段级自动校验方法和装置 | |
CN117785674A (zh) | 接口用例生成方法、装置、计算机设备和存储介质 | |
CN116401323A (zh) | 指标数据处理方法、装置及计算机设备 | |
CN118152504A (zh) | 非结构化数据的索引方法、装置、设备、介质和程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |