CN112015651A - 数据处理方法及装置 - Google Patents
数据处理方法及装置 Download PDFInfo
- Publication number
- CN112015651A CN112015651A CN202010888556.4A CN202010888556A CN112015651A CN 112015651 A CN112015651 A CN 112015651A CN 202010888556 A CN202010888556 A CN 202010888556A CN 112015651 A CN112015651 A CN 112015651A
- Authority
- CN
- China
- Prior art keywords
- test
- data
- database
- field
- test data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000012360 testing method Methods 0.000 claims abstract description 340
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000012545 processing Methods 0.000 claims description 20
- 238000011084 recovery Methods 0.000 claims description 15
- 238000003780 insertion Methods 0.000 claims description 11
- 230000037431 insertion Effects 0.000 claims description 11
- 238000012217 deletion Methods 0.000 claims description 5
- 230000037430 deletion Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 8
- 238000010276 construction Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000001303 quality assessment method Methods 0.000 description 1
- 238000000275 quality assurance Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3664—Environments for testing or debugging software
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种数据处理方法及装置。其中，该方法包括：接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。本发明解决了现有技术中基于测试环境构造测试数据的操作较为复杂且构造数据消耗的时间较多的技术问题。
Description
技术领域
本发明涉及数据处理领域，具体而言，涉及一种数据处理方法及装置。
背景技术
在测试过程中需要预先准备好测试依赖的测试数据，如果通过调用接口或者通过其他业务流程构建数据，则需要依赖稳定的测试环境并对业务流程比较熟悉，但是由于实际情况中并不是每个DEV(DEV-Development：软件开发人员)或者QA(QA-QualityAssurance：品质保证人员)均可以完全掌握业务流程，因此，基于测试环境构造测试数据的操作较为复杂且构造数据消耗的时间较多。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据处理方法及装置，以至少解决现有技术中基于测试环境构造测试数据的操作较为复杂且构造数据消耗的时间较多的技术问题。
根据本发明实施例的一个方面，提供了一种数据处理方法，包括：接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
可选的，在将上述测试数据插入至测试数据库中之前，上述方法还包括：获取上述测试数据中的待替换字段，其中，上述待替换字段包括以下至少之一：敏感字段、用户标识字段、待恢复分表字段；对上述待替换字段进行替换处理，得到替换后字段；其中，上述替换处理包括以下至少之一：将上述敏感字段替换为对应的非敏感字段、将上述用户标识字段替换为对应的私密标识字段、将上述待恢复分表字段替换为恢复后分表字段。
可选的，将上述测试数据插入至测试数据库中，包括：基于上述测试数据生成插入语句；确定与上述插入语句对应的测试流程；基于上述测试流程将上述插入语句插入至上述测试数据库。
可选的，在将上述测试数据插入至测试数据库中之前，上述方法还包括：删除上述测试数据库中存储的历史数据。
可选的，在接收数据查询请求之前，上述方法还包括：在上述线上数据库中配置数据分表，其中，上述数据分表用于存储上述测试数据；从请求应用中心接口获取上述测试数据，其中，上述请求应用中心接口用于基于上述测试环境配置上述测试数据；将上述测试数据存储至上述数据分表中，并记录上述测试数据与上述数据分表的对应关系。
可选的，从线上数据库中获取与上述数据标识信息对应的测试数据，包括：依据上述数据标识信息和上述对应关系，从上述数据分表中获取上述测试数据。
可选的，在从线上数据库中获取与上述数据标识信息对应的测试数据之前，上述方法还包括：获取测试用户登录信息；校验上述测试用户登录信息中的用户测试标识是否已执行数据恢复；若检验结果为是，则对上述用户测试标识设置删除标记并删除与上述用户测试标识对应的测试数据；若检验结果为否，则校验目标测试环境的测试库信息，以确定是否建立有上述测试数据库，其中，当存在上述测试数据库时执行数据恢复流程；当不存在上述测试数据库时则建立上述测试数据库并开始数据恢复。
根据本发明实施例的另一方面，还提供了一种数据处理装置，包括：接收模块，用于接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；获取模块，用于从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；插入模块，用于将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
根据本发明实施例的另一方面，还提供了一种非易失性存储介质，上述非易失性存储介质存储有多条指令，上述指令适于由处理器加载并执行任意一项的数据处理方法。
根据本发明实施例的另一方面，还提供了一种电子设备，包括：处理器和存储器；其中，上述存储器存储有计算机程序，上述计算机程序适于由上述处理器加载并执行任意一项的数据处理方法。
在本发明实施例中，通过接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据，达到了降低测试环境构造数据的复杂度和减少构造数据消耗的时间的目的，从而实现了快速提供测试过程中所需的测试数据的技术效果，进而解决了现有技术中基于测试环境构造测试数据的操作较为复杂且构造数据消耗的时间较多的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的一种数据处理方法的流程图；
图2是根据本发明实施例的一种可选的数据处理方法的流程图；
图3是根据本发明实施例的一种可选的数据处理方法的流程图；
图4是根据本发明实施例的一种可选的数据处理装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例，提供了一种数据处理方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种数据处理方法的流程图，如图1所示，该方法包括如下步骤：
步骤S102，接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；
步骤S104，从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；
步骤S106，将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
在本发明实施例中，通过接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据，达到了降低测试环境构造数据的复杂度和减少构造数据消耗的时间的目的，从而实现了快速提供测试过程中所需的测试数据的技术效果，进而解决了现有技术中基于测试环境构造测试数据的操作较为复杂且构造数据消耗的时间较多的技术问题。
在本申请实施例中，用户可以通过测试网页或测试客户端中提供的测试数据获取界面中输入数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；服务器在接收到上述数据查询请求之后，从线上数据库中获取与上述数据标识信息对应的测试数据，将上述测试数据插入至测试数据库中。通过本申请实施例可以降低测试环境构造数据的复杂度和减少构造数据消耗的时间，从而实现了快速提供测试过程中所需的测试数据的技术效果。
其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
在一种可选的实施例中，在将上述测试数据插入至测试数据库中之前，上述方法还包括：
步骤S202，获取上述测试数据中的待替换字段，其中，上述待替换字段包括以下至少之一：敏感字段、用户标识字段、待恢复分表字段；
步骤S204，对上述待替换字段进行替换处理，得到替换后字段；
其中，上述替换处理包括以下至少之一：将上述敏感字段替换为对应的非敏感字段、将上述用户标识字段替换为对应的私密标识字段、将上述待恢复分表字段替换为恢复后分表字段。
在本申请实施例中，由于需要避免测试数据中出现敏感字段、用户标识字段和待恢复字段，在将上述测试数据插入至测试数据库中之前，获取上述测试数据中的待替换字段，并对上述待替换字段进行替换处理，得到替换后字段。
在上述可选的实施例中，上述待替换字段包括以下至少之一：敏感字段、用户标识字段、待恢复分表字段；其中，上述替换处理包括以下至少之一：将上述敏感字段替换为对应的非敏感字段、将上述用户标识字段替换为对应的私密标识字段、将上述待恢复分表字段替换为恢复后分表字段。
在一种可选的实施例中，将上述测试数据插入至测试数据库中，包括：
步骤S302，基于上述测试数据生成插入语句；
步骤S304，确定与上述插入语句对应的测试流程；
步骤S306，基于上述测试流程将上述插入语句插入至上述测试数据库。
作为一种可选的实施例，本申请实施例中具体可以基于上述测试数据生成对应的插入语句；并确定待插入上述插入语句对应的测试流程，根据上述测试流程将上述插入语句插入至上述测试数据库，即在处于上述测试流程中将上述插入语句插入至上述测试数据库。
在一种可选的实施例中，在将上述测试数据插入至测试数据库中之前，上述方法还包括：删除上述测试数据库中存储的历史数据。
在一种可选的实施例中，在接收数据查询请求之前，上述方法还包括：
步骤S402，在上述线上数据库中配置数据分表，其中，上述数据分表用于存储上述测试数据；
步骤S404，从请求应用中心接口获取上述测试数据，其中，上述请求应用中心接口用于基于上述测试环境配置上述测试数据；
步骤S406，将上述测试数据存储至上述数据分表中，并记录上述测试数据与上述数据分表的对应关系。
在上述可选的实施例中，在接收数据查询请求之前，需要预先对线上数据库进行配置，例如，在上述线上数据库中配置用于存储上述测试数据的数据分表；从请求应用中心接口获取上述测试数据，将上述测试数据存储至上述数据分表中，并记录上述测试数据与上述数据分表的对应关系。
作为一种可选的实施例，上述请求应用中心接口用于基于上述测试环境配置上述测试数据。
作为另一种可选的实施例，本申请实施例还可以获取线上数据库及数据分表的表信息，并配置数据分表的表字段信息，请求线上数据库查询接口获取数据分表的表信息并存储到线上数据库中，此外，本申请实施例还可以在配置页面中配置敏感信息、查询、待替换字段等。
在本申请实施例中，由于生成测试环境测试库及线上数据库之间也存在有对应关系，进而可以请求应用中心接口获取测试数据库对应的测试数据，存储至线上数据库中，创建测试环境用户信息，并添加测试环境用户信息至线上数据库中，实现用户的实名、绑卡等操作，并且可以绑定交叉用户，恢复数据到测试环境，通过web方式进行信息配置和恢复操作，操作简单便捷，节省学习成本，一键获取用户完整业务流程需要的数据，测试环境用户可以一键实名绑卡，无需其他辅助工具，方便测试自己关注的业务。
在一种可选的实施例中，从线上数据库中获取与上述数据标识信息对应的测试数据，包括：
步骤S502，依据上述数据标识信息和上述对应关系，从上述数据分表中获取上述测试数据。
在一种可选的实施例中，在从线上数据库中获取与上述数据标识信息对应的测试数据之前，上述方法还包括：
步骤S602，获取测试用户登录信息；
步骤S604，校验上述测试用户登录信息中的用户测试标识是否已执行数据恢复；
步骤S606，若检验结果为是，则对上述用户测试标识设置删除标记并删除与上述用户测试标识对应的测试数据；
步骤S608，若检验结果为否，则校验目标测试环境的测试库信息，以确定是否建立有上述测试数据库，其中，当存在上述测试数据库时执行数据恢复流程；当不存在上述测试数据库时则建立上述测试数据库并开始数据恢复。
如图2所示，在线上数据库中添加用户信息时，可以获取登录系统用户信息，并判断用户的源用户标识(cid)是否已有本人添加，如果被他人添加则弹出提示错误信息，若未添加或本人已添加，则检测身份证是否已被占用，若被他人占用则弹出提示错误信息，若否则调用支付中心http接口实名绑卡，并保存或更新用户信息及映射表信息。
在上述实施例中，如图3所示，在从线上数据库中获取与上述数据标识信息对应的测试数据之前，获取测试用户登录信息，并请求参数校验；校验上述测试用户登录信息中的原始用户测试标识是否已被其他用户执行数据恢复；若检验结果为是，则对上述用户测试标识设置删除标记并删除与上述用户测试标识对应的测试数据；若检验结果为否，则校验目标测试环境的测试库信息，以确定是否建立有上述测试数据库，其中，当存在上述测试数据库时执行数据恢复流程；当不存在上述测试数据库时则建立上述测试数据库并开始数据恢复，即根据源用户标识(cid)获取线上用户的平台用户标识(pid)列表和源用户标识(cid)列表，并获取测试环境beta用户的平台用户标识(pid)列表和源用户标识(cid)列表，并获取待恢复数据库列表，判断处理分表是否需要拉取数据，并组装查询数据库，再查询线上数据，若判断结果为是，则执行本申请实施例所提供的数据处理方法。
实施例2
根据本发明实施例，还提供了一种用于实施上述数据处理方法的装置实施例，图4是根据本发明实施例的一种数据处理装置的结构示意图，如图4所示，上述数据处理装置，包括：接收模块40、获取模块42和插入模块44，其中：
接收模块40，用于接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；获取模块42，用于从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；插入模块44，用于将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，例如，对于后者，可以通过以下方式实现：上述各个模块可以位于同一处理器中；或者，上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是，上述接收模块40、获取模块42和插入模块44对应于实施例1中的步骤S102至步骤S106，上述模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在计算机终端中。
需要说明的是，本实施例的可选或优选实施方式可以参见实施例1中的相关描述，此处不再赘述。
上述的数据处理装置还可以包括处理器和存储器，上述接收模块40、获取模块42和插入模块44等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元，上述内核可以设置一个或以上。存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
根据本申请实施例，还提供了一种非易失性存储介质实施例。可选地，在本实施例中，上述非易失性存储介质包括存储的程序，其中，在上述程序运行时控制上述非易失性存储介质所在设备执行上述任意一种数据处理方法。
可选地，在本实施例中，上述非易失性存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中，或者位于移动终端群中的任意一个移动终端中，上述非易失性存储介质包括存储的程序。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：获取上述测试数据中的待替换字段，其中，上述待替换字段包括以下至少之一：敏感字段、用户标识字段、待恢复分表字段；对上述待替换字段进行替换处理，得到替换后字段；其中，上述替换处理包括以下至少之一：将上述敏感字段替换为对应的非敏感字段、将上述用户标识字段替换为对应的私密标识字段、将上述待恢复分表字段替换为恢复后分表字段。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：基于上述测试数据生成插入语句；确定与上述插入语句对应的测试流程；基于上述测试流程将上述插入语句插入至上述测试数据库。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：删除上述测试数据库中存储的历史数据。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：在上述线上数据库中配置数据分表，其中，上述数据分表用于存储上述测试数据；从请求应用中心接口获取上述测试数据，其中，上述请求应用中心接口用于基于上述测试环境配置上述测试数据；将上述测试数据存储至上述数据分表中，并记录上述测试数据与上述数据分表的对应关系。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：依据上述数据标识信息和上述对应关系，从上述数据分表中获取上述测试数据。
可选地，在程序运行时控制非易失性存储介质所在设备执行以下功能：获取测试用户登录信息；校验上述测试用户登录信息中的用户测试标识是否已执行数据恢复；若检验结果为是，则对上述用户测试标识设置删除标记并删除与上述用户测试标识对应的测试数据；若检验结果为否，则校验目标测试环境的测试库信息，以确定是否建立有上述测试数据库，其中，当存在上述测试数据库时执行数据恢复流程；当不存在上述测试数据库时则建立上述测试数据库并开始数据恢复。
根据本申请实施例，还提供了一种处理器实施例。可选地，在本实施例中，上述处理器用于运行程序，其中，上述程序运行时执行上述任意一种数据处理方法。
本申请实施例提供了一种电子设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：接收数据查询请求，其中，上述数据查询请求中至少携带有数据标识信息；从线上数据库中获取与上述数据标识信息对应的测试数据，其中，上述线上数据库用于存储测试数据，上述测试数据为基于测试环境配置得到并应用于测试流程中的数据；将上述测试数据插入至测试数据库中，其中，上述测试数据库用于为测试接口提供与测试流程对应的测试数据。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取非易失性存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个非易失性存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的非易失性存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种数据处理方法，其特征在于，包括：
接收数据查询请求，其中，所述数据查询请求中至少携带有数据标识信息；
从线上数据库中获取与所述数据标识信息对应的测试数据，其中，所述线上数据库用于存储测试数据，所述测试数据为基于测试环境配置得到并应用于测试流程中的数据；
将所述测试数据插入至测试数据库中，其中，所述测试数据库用于为测试接口提供与测试流程对应的测试数据。
2.根据权利要求1所述的方法，其特征在于，在将所述测试数据插入至测试数据库中之前，所述方法还包括：
获取所述测试数据中的待替换字段，其中，所述待替换字段包括以下至少之一：敏感字段、用户标识字段、待恢复分表字段；
对所述待替换字段进行替换处理，得到替换后字段；
其中，所述替换处理包括以下至少之一：将所述敏感字段替换为对应的非敏感字段、将所述用户标识字段替换为对应的私密标识字段、将所述待恢复分表字段替换为恢复后分表字段。
3.根据权利要求2所述的方法，其特征在于，将所述测试数据插入至测试数据库中，包括：
基于所述测试数据生成插入语句；
确定与所述插入语句对应的测试流程；
基于所述测试流程将所述插入语句插入至所述测试数据库。
4.根据权利要求1所述的方法，其特征在于，在将所述测试数据插入至测试数据库中之前，所述方法还包括：删除所述测试数据库中存储的历史数据。
5.根据权利要求1所述的方法，其特征在于，在接收数据查询请求之前，所述方法还包括：
在所述线上数据库中配置数据分表，其中，所述数据分表用于存储所述测试数据；
从请求应用中心接口获取所述测试数据，其中，所述请求应用中心接口用于基于所述测试环境配置所述测试数据；
将所述测试数据存储至所述数据分表中，并记录所述测试数据与所述数据分表的对应关系。
6.根据权利要求5所述的方法，其特征在于，从线上数据库中获取与所述数据标识信息对应的测试数据，包括：
依据所述数据标识信息和所述对应关系，从所述数据分表中获取所述测试数据。
7.根据权利要求1所述的方法，其特征在于，在从线上数据库中获取与所述数据标识信息对应的测试数据之前，所述方法还包括：
获取测试用户登录信息；
校验所述测试用户登录信息中的用户测试标识是否已执行数据恢复；
若检验结果为是，则对所述用户测试标识设置删除标记并删除与所述用户测试标识对应的测试数据；
若检验结果为否，则校验目标测试环境的测试库信息，以确定是否建立有所述测试数据库，其中，当存在所述测试数据库时执行数据恢复流程；当不存在所述测试数据库时则建立所述测试数据库并开始数据恢复。
8.一种数据处理装置，其特征在于，包括：
接收模块，用于接收数据查询请求，其中，所述数据查询请求中至少携带有数据标识信息；
获取模块，用于从线上数据库中获取与所述数据标识信息对应的测试数据，其中，所述线上数据库用于存储测试数据，所述测试数据为基于测试环境配置得到并应用于测试流程中的数据；
插入模块，用于将所述测试数据插入至测试数据库中，其中，所述测试数据库用于为测试接口提供与测试流程对应的测试数据。
9.一种非易失性存储介质，其特征在于，所述非易失性存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1至7中任意一项的数据处理方法。
10.一种电子设备，其特征在于，包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行权利要求1至7中任意一项的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010888556.4A CN112015651B (zh) | 2020-08-28 | 2020-08-28 | 数据处理方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010888556.4A CN112015651B (zh) | 2020-08-28 | 2020-08-28 | 数据处理方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112015651A true CN112015651A (zh) | 2020-12-01 |
| CN112015651B CN112015651B (zh) | 2023-10-27 |
Family
ID=73502406
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010888556.4A Active CN112015651B (zh) | 2020-08-28 | 2020-08-28 | 数据处理方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112015651B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112667513A (zh) * | 2020-12-31 | 2021-04-16 | 长沙市到家悠享网络科技有限公司 | 测试方法、装置、测试设备及存储介质 |
| CN116303696A (zh) * | 2023-05-18 | 2023-06-23 | 上海孤波科技有限公司 | 半导体测试数据的处理方法、装置、电子设备及存储介质 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106095624A (zh) * | 2016-06-28 | 2016-11-09 | 北京金山安全软件有限公司 | 一种数据恢复方法、装置、终端设备及服务器 |
| CN106407843A (zh) * | 2016-10-17 | 2017-02-15 | 深圳中兴网信科技有限公司 | 数据脱敏方法和数据脱敏装置 |
| CN107329890A (zh) * | 2017-06-06 | 2017-11-07 | 北京金山安全软件有限公司 | 基于Mock的测试方法、装置及服务器 |
| US20180267888A1 (en) * | 2015-09-08 | 2018-09-20 | Hewlett Packard Enterprise Development Lp | Automatic regression identification |
| CN108804548A (zh) * | 2018-05-21 | 2018-11-13 | 上海陆家嘴国际金融资产交易市场股份有限公司 | 测试数据查询方法、装置、计算机设备和存储介质 |
| CN109308258A (zh) * | 2018-08-21 | 2019-02-05 | 中国平安人寿保险股份有限公司 | 测试数据的构造方法、装置、计算机设备和存储介质 |
| CN110096432A (zh) * | 2019-03-21 | 2019-08-06 | 平安普惠企业管理有限公司 | 测试文本替换方法、装置、计算机设备和存储介质 |
| CN110674029A (zh) * | 2019-08-26 | 2020-01-10 | 平安科技（深圳）有限公司 | 自动生成测试数据方法、装置、电子设备及存储介质 |
| CN111274149A (zh) * | 2020-02-06 | 2020-06-12 | 中国建设银行股份有限公司 | 测试数据的处理方法及装置 |
-
2020
- 2020-08-28 CN CN202010888556.4A patent/CN112015651B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180267888A1 (en) * | 2015-09-08 | 2018-09-20 | Hewlett Packard Enterprise Development Lp | Automatic regression identification |
| CN106095624A (zh) * | 2016-06-28 | 2016-11-09 | 北京金山安全软件有限公司 | 一种数据恢复方法、装置、终端设备及服务器 |
| CN106407843A (zh) * | 2016-10-17 | 2017-02-15 | 深圳中兴网信科技有限公司 | 数据脱敏方法和数据脱敏装置 |
| CN107329890A (zh) * | 2017-06-06 | 2017-11-07 | 北京金山安全软件有限公司 | 基于Mock的测试方法、装置及服务器 |
| CN108804548A (zh) * | 2018-05-21 | 2018-11-13 | 上海陆家嘴国际金融资产交易市场股份有限公司 | 测试数据查询方法、装置、计算机设备和存储介质 |
| CN109308258A (zh) * | 2018-08-21 | 2019-02-05 | 中国平安人寿保险股份有限公司 | 测试数据的构造方法、装置、计算机设备和存储介质 |
| CN110096432A (zh) * | 2019-03-21 | 2019-08-06 | 平安普惠企业管理有限公司 | 测试文本替换方法、装置、计算机设备和存储介质 |
| CN110674029A (zh) * | 2019-08-26 | 2020-01-10 | 平安科技（深圳）有限公司 | 自动生成测试数据方法、装置、电子设备及存储介质 |
| CN111274149A (zh) * | 2020-02-06 | 2020-06-12 | 中国建设银行股份有限公司 | 测试数据的处理方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 焦伟 等: ""测试数据脱敏技术框架的研究与探讨"", 《中国金融电脑》, pages 40 - 47 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112667513A (zh) * | 2020-12-31 | 2021-04-16 | 长沙市到家悠享网络科技有限公司 | 测试方法、装置、测试设备及存储介质 |
| CN116303696A (zh) * | 2023-05-18 | 2023-06-23 | 上海孤波科技有限公司 | 半导体测试数据的处理方法、装置、电子设备及存储介质 |
| CN116303696B (zh) * | 2023-05-18 | 2023-09-19 | 上海孤波科技有限公司 | 半导体测试数据的处理方法、装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112015651B (zh) | 2023-10-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106843978B (zh) | 一种sdk接入方法及系统 | |
| CN107908553B (zh) | 关联测试方法、应用服务器及计算机可读存储介质 | |
| CN112015651B (zh) | 数据处理方法及装置 | |
| CN111767704A (zh) | Excel表格模板生成方法及装置 | |
| CN111371645B (zh) | 业务连通性的测试方法、系统、计算机设备和存储介质 | |
| CN110597662B (zh) | 备份数据自动验证方法、装置、用户设备及存储介质 | |
| CN105187399A (zh) | 资源处理方法及装置 | |
| CN108509582B (zh) | 一种信息的回复方法、终端设备及计算机可读存储介质 | |
| CN110795674B (zh) | 一种配置更新方法及装置 | |
| CN113703735B (zh) | 基于独立代码块编排的应用生成方法、装置、设备及介质 | |
| CN114282913A (zh) | 一种多主体线上签约的方法及装置 | |
| CN110795388B (zh) | 一种二进制文件的处理方法、系统、设备及可读存储介质 | |
| CN110221952B (zh) | 业务数据的处理方法及装置、业务数据处理系统 | |
| CN114187107A (zh) | 一种多元错误提示信息处理方法及装置 | |
| CN113986747A (zh) | 一种数据生成方法、装置、电子设备及存储介质 | |
| CN113051178A (zh) | 测试数据构造方法、装置、设备及介质 | |
| CN114371866A (zh) | 业务系统的版本重构测试方法、装置和设备 | |
| CN108595924B (zh) | 一种业务权限管理方法、装置、计算机设备及存储介质 | |
| CN113094048A (zh) | 数据显示规则确定方法、显示方法、装置、设备及介质 | |
| CN110727416A (zh) | 开发框架的生成方法及相关装置 | |
| CN111225075A (zh) | 物联网定向访问业务的配置方法及装置 | |
| CN108460575B (zh) | 一种书面文件生成方法、装置、终端设备及存储介质 | |
| CN114281459B (zh) | 资源获取方法及相关产品 | |
| CN114519090B (zh) | 一种停用词的管理方法、装置及电子设备 | |
| CN112561455B (zh) | 一种业务申办控制系统及业务申办控制方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |