CN115422026A - 一种基于准生产环境的生产回放验证方法及存储介质 - Google Patents

一种基于准生产环境的生产回放验证方法及存储介质 Download PDF

Info

Publication number
CN115422026A
CN115422026A CN202211053637.8A CN202211053637A CN115422026A CN 115422026 A CN115422026 A CN 115422026A CN 202211053637 A CN202211053637 A CN 202211053637A CN 115422026 A CN115422026 A CN 115422026A
Authority
CN
China
Prior art keywords
playback
production
production environment
simulation
time point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211053637.8A
Other languages
English (en)
Inventor
汪东伟
磨柑竹
程雪林
徐俊霞
董勤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Pudong Development Bank Co Ltd
Original Assignee
Shanghai Pudong Development Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Pudong Development Bank Co Ltd filed Critical Shanghai Pudong Development Bank Co Ltd
Priority to CN202211053637.8A priority Critical patent/CN115422026A/zh
Publication of CN115422026A publication Critical patent/CN115422026A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3457—Performance evaluation by simulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • G06F11/3093—Configuration details thereof, e.g. installation, enabling, spatial arrangement of the probes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3447—Performance evaluation by modeling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/865—Monitoring of software

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及一种基于准生产环境的生产回放验证方法及存储介质，所述方法运行于一仿真实验室中，所述仿真实验室为按照实际生产配置1：1搭建获得，所述方法包括以下步骤：选取生产环境数据，所述生产环境数据包括生产环境中时间点A和时间点B的数据库切片、时间点A的批量文件以及A、B时间段内的交易报文；基于所述生产环境数据进行联机模拟回放或批量模拟回放，获得模拟回放数据切片；将所述模拟回放数据切片与所述时间点B的数据库切片进行比对验证。与现有技术相比，本发明具有提高测试效率、降低人力消耗等优点。

Description

一种基于准生产环境的生产回放验证方法及存储介质
技术领域
本发明涉及金融风控技术领域，尤其是涉及一种基于准生产环境的生产回放验证方法及存储介质。
背景技术
近年来，小微企业贷款、消费信贷相关业务增长迅猛，由此带来的逾期资产的贷后催收管理问题日益突出，主要矛盾体现在不良贷款总量不断扩大与催收人力资源不足。智能信用卡催收系统现状日均处理在催案件在300万件以上，包括多种催收作业，工作量较大。现有的催收系统主要分为批处理以及联机作业两大块功能，涉及数据量也较大。
为保证催收系统的正常工作，需要定期开展回归测试，目前在回归测试中存在的技术问题包括：
1、为确保催收系统每月常规迭代版本投产质量，需要针对催收重点核心功能进行回归测试，每次回归涉及2200个测试案例，投入1人月，但因测试案例不够丰富，难以保证回归测试功能覆盖率。
2、催收系统架构升级类需求功能验证，需要对全量功能进行回归测试，全量回归测试涉及案例数量较大，投入人力时间较长，测试人力成本巨大。
3、催收系统需要定期进行blaze策略变更，目前在数据验证区进行策略预验证，因数据验证区服务器配置为低配虚拟机，与生产环境硬件配置差异较大，所以需要较大人力协助才能完成测试工作。
4、催收系统数据验证区当前服务器硬件配置与生产环境差异较大，一些重要架构升级进行性能测试之前需要立项申请POC临时硬件资源进行测试，影响整个测试流程的效率。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种提高测试效率、降低人力消耗的基于准生产环境的生产回放验证方法及存储介质。
本发明的目的可以通过以下技术方案来实现：
一种基于准生产环境的生产回放验证方法，该方法运行于一仿真实验室中，所述仿真实验室为按照实际生产配置1：1搭建获得，所述方法包括以下步骤：
选取生产环境数据，所述生产环境数据包括生产环境中时间点A和时间点B的数据库切片、时间点A的批量文件以及A、B时间段内的交易报文；
基于所述生产环境数据进行联机模拟回放或批量模拟回放，获得模拟回放数据切片；
将所述模拟回放数据切片与所述时间点B的数据库切片进行比对验证。
进一步地，采用异步存储方式获得所述交易报文。
进一步地，所述异步存储方式具体为：
在生产环境中添加报文拦截，拦截获得的报文通过MQ异步方式存储于磁盘上，并在接收到指定位置数据请求时传送对应数据。
进一步地，所述联机模拟回放具体包括：
接收所述交易报文，通过报文模拟器生成模拟报文，将所述模拟报文通过模拟网关传入测试微服务模块，获得模拟回放数据切片。
进一步地，所述报文模拟器依次对所述交易报文进行报文筛选和报文转换后，发送至所述模拟网关。
进一步地，所述批量模拟回放具体包括：
获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行批处理，得到模拟回放数据切片。
进一步地，该方法还包括：
基于比对验证结果，更新待部署的业务策略。
进一步地，该方法还包括：
通过策略模拟验证方式判断更新后的业务策略是否适用，所述策略模拟验证具体包括：
获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行催收批处理，并基于所述更新后的业务策略获得决策结果。
进一步地，通过自动化验证脚本实现所述模拟回放数据切片与所述时间点B的数据库切片的比对验证。
本发明还提供一种计算机可读存储介质，包括供电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行如上所述基于准生产环境的生产回放验证方法的指令。
与现有技术相比，本发明具有以下有益效果：
1、本发明使用一按照实际生产配置1：1搭建的仿真实验室进行模拟回放测试，方便实现更高效的测试结果，大大减少人力成本。经测试，人力成本可由200人月下降至1人月。
2、通过升级催收系统数据验证区服务器资源配置，提升blaze策略预验证效率，人力成本由7人天下降至2人天。
3、通过升级催收系统数据验证区服务器资源配置，后续催收系统性能测试工作可部署至数据验证区进行，确保性能测试指标真实以及准确性。
附图说明
图1为本发明的总体原理示意图；
图2为本发明联机模拟回放过程示意图；
图3为本发明批量模拟回放过程示意图；
图4为本发明策略模拟验证过程示意图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例1
如图1所示，本实施例提供一种基于准生产环境的生产回放验证方法，该方法运行于一仿真实验室中，所述仿真实验室为按照实际生产配置1：1搭建获得，所述方法包括以下步骤：选取生产环境数据，所述生产环境数据包括生产环境中时间点A和时间点B的数据库切片、时间点A的批量文件以及A、B时间段内的交易报文；基于所述生产环境数据进行联机模拟回放或批量模拟回放，获得模拟回放数据切片；将所述模拟回放数据切片与所述时间点B的数据库切片进行比对验证。在具体实施方式中，可通过自动化验证脚本实现所述模拟回放数据切片与所述时间点B的数据库切片的比对验证。
如图2所示，在联机模拟回放过程中，采用异步存储方式获得所述交易报文。所述异步存储方式具体为：
在生产环境中添加报文拦截，拦截获得的报文通过MQ异步方式存储于磁盘上，并在接收到指定位置数据请求时传送对应数据。
如图2所示，基于上述异步获取数据的联机模拟回放具体为：
在实际生产系统中，全部联机报文都会通过三大网关(内网网关、互联网网关和Api网关)发送到后台服务，当需要进行模拟回放时，在系统中打开开关，指定记录报文的时间段，利用异步存储，在不影响生产交易的情况下，将实际生产发生的交易以报文的形式做持久化。通过文传将文件传输到模拟回放环境，模拟回放环境以生产环境异步报文持久化开始前的时间点作为铺底数据，待异步报文在模拟回放环境进行回放后，将该环境的结果与生产环境报文持久化后时间点的数据进行比对验证。具体地，模拟回放环境接收异步存储的交易报文，通过报文模拟器生成模拟报文，可以方便的利用模拟回放环境的生产数据的丰富性，将所述模拟报文通过模拟网关传入测试微服务模块，获得模拟回放数据切片。
其中，模拟网关与前文所述三大网关相同。报文模拟器依次对所述交易报文进行报文筛选和报文转换后，发送至所述模拟网关。
如图3所示，批量模拟回放具体包括：
获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行批处理，得到模拟回放数据切片。
优选地，可在做批量模拟回放之前，将催收系统生产全库备份切片同步到模拟回放环境。
上述方法通过仿真实验室以更真实地模拟实际生产环境，形成一种准生产环境，可以有效提高测试效率。
实施例2
本实施例提供的基于准生产环境的生产回放验证方法中，还包括：基于比对验证结果，更新待部署的业务策略。
进一步地，该方法还可以对更新的业务策略进行验证，可通过策略模拟验证方式判断更新后的业务策略是否适用，所述策略模拟验证具体包括：获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行催收批处理，并基于所述更新后的业务策略获得决策结果。
上述方法可以方便的利用模拟回放环境的生产数据的丰富性，并利用生产交易报文，在催收模拟回放环境进行批量、联机、策略等功能的验证，降低催收系统的功能、策略投产的风险。
上述方法如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。

Claims (10)

1.一种基于准生产环境的生产回放验证方法，其特征在于，该方法运行于一仿真实验室中，所述仿真实验室为按照实际生产配置1：1搭建获得，所述方法包括以下步骤：
选取生产环境数据，所述生产环境数据包括生产环境中时间点A和时间点B的数据库切片、时间点A的批量文件以及A、B时间段内的交易报文；
基于所述生产环境数据进行联机模拟回放或批量模拟回放，获得模拟回放数据切片；
将所述模拟回放数据切片与所述时间点B的数据库切片进行比对验证。
2.根据权利要求1所述的基于准生产环境的生产回放验证方法，其特征在于，采用异步存储方式获得所述交易报文。
3.根据权利要求2所述的基于准生产环境的生产回放验证方法，其特征在于，所述异步存储方式具体为：
在生产环境中添加报文拦截，拦截获得的报文通过MQ异步方式存储于磁盘上，并在接收到指定位置数据请求时传送对应数据。
4.根据权利要求2所述的基于准生产环境的生产回放验证方法，其特征在于，所述联机模拟回放具体包括：
接收所述交易报文，通过报文模拟器生成模拟报文，将所述模拟报文通过模拟网关传入测试微服务模块，获得模拟回放数据切片。
5.根据权利要求3所述的基于准生产环境的生产回放验证方法，其特征在于，所述报文模拟器依次对所述交易报文进行报文筛选和报文转换后，发送至所述模拟网关。
6.根据权利要求1所述的基于准生产环境的生产回放验证方法，其特征在于，所述批量模拟回放具体包括：
获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行批处理，得到模拟回放数据切片。
7.根据权利要求1所述的基于准生产环境的生产回放验证方法，其特征在于，该方法还包括：
基于比对验证结果，更新待部署的业务策略。
8.根据权利要求7所述的基于准生产环境的生产回放验证方法，其特征在于，该方法还包括：
通过策略模拟验证方式判断更新后的业务策略是否适用，所述策略模拟验证具体包括：
获取时间点A的数据库切片和时间点A的批量文件，同步至数据验证区，执行催收批处理，并基于所述更新后的业务策略获得决策结果。
9.根据权利要求1所述的基于准生产环境的生产回放验证方法，其特征在于，通过自动化验证脚本实现所述模拟回放数据切片与所述时间点B的数据库切片的比对验证。
10.一种计算机可读存储介质，其特征在于，包括供电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行如权利要求1-9任一所述基于准生产环境的生产回放验证方法的指令。
CN202211053637.8A 2022-08-31 2022-08-31 一种基于准生产环境的生产回放验证方法及存储介质 Pending CN115422026A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211053637.8A CN115422026A (zh) 2022-08-31 2022-08-31 一种基于准生产环境的生产回放验证方法及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211053637.8A CN115422026A (zh) 2022-08-31 2022-08-31 一种基于准生产环境的生产回放验证方法及存储介质

Publications (1)

Publication Number Publication Date
CN115422026A true CN115422026A (zh) 2022-12-02

Family

ID=84200192

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211053637.8A Pending CN115422026A (zh) 2022-08-31 2022-08-31 一种基于准生产环境的生产回放验证方法及存储介质

Country Status (1)

Country Link
CN (1) CN115422026A (zh)

Similar Documents

Publication Publication Date Title
US8938719B2 (en) System and method for performance assurance of applications
Rigby et al. Open source software peer review practices: a case study of the apache server
CN110321339B (zh) 一种数据迁移方法、装置、设备和存储介质
CN101221503A (zh) 软件测试方法及装置
CN106803799B (zh) 一种性能测试方法和装置
CN102158373A (zh) 面向银行中间业务的高端服务器性能评测系统
CN112488652A (zh) 工单审核方法、系统、终端和存储介质
CN114626069A (zh) 威胁建模方法及装置
CN112907346A (zh) 一种对账数据处理方法及装置
CN110659870A (zh) 业务审核测试方法、装置、设备及存储介质
CN112597015A (zh) 一种系统测试方法、装置、计算机设备和存储介质
CN115757150A (zh) 一种生产环境测试方法、装置、设备及存储介质
CN114281784A (zh) 分布式核心系统的交易日志回放方法、装置、设备和介质
Jin et al. FinExpert: Domain-specific test generation for FinTech systems
CN117194242A (zh) 交易系统的日志回放方法及其装置、电子设备、存储介质
CN111639916A (zh) 一种基于区块链技术及深度学习的在线审计方法、系统和可读存储介质
CN115422026A (zh) 一种基于准生产环境的生产回放验证方法及存储介质
CN111274138B (zh) 一种并账功能的测试方法及装置
CN110389752A (zh) 一种与数据逻辑分离的金融业务逻辑代码实现方法
CN115701591A (zh) 业务流程测试方法、装置、介质及电子设备
CN108427614B (zh) 一种基于Admitester工具的接口测试方法及装置
CN112907254A (zh) 欺诈交易识别、模型训练方法、装置、设备及存储介质
CN112634006A (zh) 对账处理方法、装置、电子设备及存储介质
CN113360387B (zh) 银行支付结算模拟器
Kim et al. The new approach to IT testing: real transaction-based automated validation solution

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination