CN110489320A - 测试数据的还原方法、装置、终端设备及介质 - Google Patents

测试数据的还原方法、装置、终端设备及介质 Download PDF

Info

Publication number
CN110489320A
CN110489320A CN201910603935.1A CN201910603935A CN110489320A CN 110489320 A CN110489320 A CN 110489320A CN 201910603935 A CN201910603935 A CN 201910603935A CN 110489320 A CN110489320 A CN 110489320A
Authority
CN
China
Prior art keywords
backup
data
test data
classification
test
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910603935.1A
Other languages
English (en)
Inventor
孙云雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Smart Technology Co Ltd
Original Assignee
OneConnect Smart Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Smart Technology Co Ltd filed Critical OneConnect Smart Technology Co Ltd
Priority to CN201910603935.1A priority Critical patent/CN110489320A/zh
Publication of CN110489320A publication Critical patent/CN110489320A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明适用于数据处理技术领域,提供了一种测试数据的还原方法、装置、终端设备及介质,通过解析数据库中的各个测试数据表的配置说明,确定各个测试数据表所属的表类别;调取并根据各个备份维护数据,确定各个表类别对应的备份方式;当检测到用户对测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对被修改的测试数据表进行重新备份;调取各条测试指令与数据流转的对应关系;在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定目标数据表,并根据目标数据表的最新备份数据仅对目标数据表中出现数据变化的字段进行还原,以提高测试数据复用性。

Description

测试数据的还原方法、装置、终端设备及介质
技术领域
本发明属于数据处理技术领域,尤其涉及一种测试数据的还原方法、装置、终端设备及介质。
背景技术
在自动化测试过程中,为了节省测试成本以及满足测试的统一性要求,测试人员一般会使用一组相同的测试用例数据对多个产品进行测试,这就要求测试用例数据要具有可复用性。
然而,在实际情况中,有些测试过程中的测试用例数据是难以被重复使用的。原因在于如果测试用例数据中的一条测试数据在某些测试过程中被操作后,该测试数据中某些字段发生改变,则发生改变的测试数据就难以在接下来的测试过程中对其他产品进行测试了。
发明内容
有鉴于此,本发明实施例提供了一种测试数据的还原方法、装置、终端设备及介质,以解决现有技术存在的测试数据的复用性差的问题。
本发明实施例的第一方面提供了一种测试数据的还原方法,包括:解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式;当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份;调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息;在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原。
本发明实施例的第二方面提供了一种测试数据的还原装置,包括:
解析模块,用于解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;确定模块,用于调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式;备份模块,用于当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份;调取模块,用于调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息;还原模块,用于在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据对所述目标数据表中出现数据变化的字段进行还原。
本发明实施例的第三方面提供了一种终端设备,包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现本发明实施例的第一方面提供的方法的步骤。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现本发明实施例的第一方面提供的方法的步骤。
在本发明实施例中,通过解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式,从而结合个测试数据表的属性以及表类别的实际维护情况这两方面参数确定合理的备份方式;以同时兼顾备份的容灾性能以及备份所耗费的资源;当检测到用户对测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份,提高备份的及时性,调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原,以提高数据还原的针对性,减少还原时所涉及的数据量,从而最终提高测试数据复用的成功率以及减少复用的数据还原阶段所耗费的计算资源。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施一例提供的测试数据的还原方法的实现流程图;
图2是本发明实施例一提供的测试数据的还原方法S101的具体实现流程图;
图3是本发明实施例一提供的测试数据的还原方法S102的具体实现流程图;
图4是本发明实施例二提供的测试数据的还原方法的具体实现流程图;
图5是本发明实施例三提供的测试数据的还原装置的结构框图;
图6是本发明实施例三提供的终端设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一
图1示出了本发明实施例提供的测试数据的还原方法的实现流程,该方法流程包括步骤S101至S105。各步骤的具体实现原理如下。
在S101中,解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别。
可以理解地,在自动化测试过程中,需要根据不同的测试任务使用不同的测试用例,在本发明实施例中,这些测试用例在初始录入时,以测试数据表的形式存储于本地终端的数据库中。当然,在后续的备份过程中可能根据备份方式的不同,有一些测试数据表也会在远程服务器中进行备份,具体备份方式和选择将在下文详述。
显然,不同的测试数据表可能对应不同的表类别,在本发明实施例中,每个测试数据表有其对应的一个配置说明,本地终端需要根据配置说明中的数据确定测试数据表所属的表类别。其中,配置说明中包含多个参数类型以及各个参数类型对应的参数值,参数类型包括:测试数据的变异者级别代号、测试数据的目标测试任务、测试数据的编译时间、测试数据的失效时间等。
作为本发明的一个实施例,如图2所示,上述S101包括:
S1011,从所述测试数据表的配置说明中提取预设参数类型对应的参数值,并基于各个所述预设参数类型对应的参数值,生成所述测试数据表对应的配置矩阵。
示例性地,如上文所示,假设测试数据表中的参数类型包括:测试数据的变异者级别代号、测试数据的目标测试任务、测试数据的编译时间、测试数据的失效时间。首先需要从测试数据表中提取出上述各个参数类型对应的参数值。并基于预设的参数类型与矩阵位置的对应关系,将各个参数类型对应的参数值存入矩阵中,生成表征测试数据表的配置矩阵。
S1012,调取第三预设时间段内获取的多个参考矩阵,其中,每个所述参考矩阵均对应一个表类别。
S1013,计算全部的所述参考矩阵的多个聚类中心,并计算所述配置矩阵与各个所述聚类中心的相似度,将与所述配置矩阵的相似度最高的聚类中心作为所述目标聚类中心,将归属于所述目标聚类中心的所述参考矩阵均作为目标参考矩阵。
可选地,通过现有的K均值算法计算全部的参考矩阵的K个聚类中心,显然,根据K均值算法可知每个参考矩阵属于一个聚类中心,而聚类中心可以反映其对应的多个参考矩阵的整体情况。
可以理解地,将配置矩阵与各个聚类中心的欧式距离的倒数,作为配置矩阵与各个聚类中心的相似度,从而确定出与配置矩阵最接近的目标聚类中心。又由于每个聚类中心均对应多个参考矩阵,在此将归属于目标聚类中心的参考矩阵均作为目标参考矩阵。
S1014,统计各个表类别对应所述目标参考矩阵的个数,并计算各个表类别对应目标参考矩阵的个数占全部的所述目标参考矩阵总个数的比例,将比例最高的表类别作为所述测试数据表的表类别。
示例性地,假设目标聚类中心一共对应有100个目标参考矩阵,根据S1013的计算,其中,表类别1对应80个目标参考矩阵,表类别2对应10个目标参考矩阵,表类别3对应10个目标参考矩阵。显然,由于表类别1对应目标参考矩阵的个数占全部的所述目标参考矩阵总个数的比例高达80%,则将表类别1作为配置矩阵对应的测试数据表的表类别。
在S102中,调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式。
在本发明实施例中,第一预设时间段内表类别对应的备份维护数据为:在第一预设时间段内,反应归属于该表类别的测试数据表在备份及维护情况的数据。因此,一个表类别会对应有多个备份维护数据,其中,每个备份维护数据包含平均异常次数以及平均维护时长。
作为本发明的一个实施例,如图3所示,上述S102包括:
S1021,从各个所述备份维护数据中分别提取平均异常次数以及平均维护时长。
可以理解地,在测试数据表的存储和数据调用过程中,可能由于各类软硬件原因,导致对测试数据表的调用出现异常,或者测试数据表本身的表结构遭到破坏改变,因此可以统计出每个测试数据表在第一预设时间段内的异常次数以及每次维护的维护时长,又由于属于一个表类别的测试数据表有多个,因此可以计算出该表类别的平均异常次数以及平均维护时长。
S1022,根据预设的类别与类别系数的对应关系,确定各个所述表类别对应的类别系数。
在本发明实施例中,为了便于后续的数值计算,会根据预设的对应关系为各个表类别确定一个类别系数。
S1023,通过系数计算公式计算各个所述表类别的备份系数。
可选地,所述系数计算公式为:其中,Pi表示表类别i的备份系数,Classi表示表类别i对应的等级系数,AbNumi表示表类别i对应的平均异常次数,TotalNum表示所有的表类别的平均异常次数的总和,timei表示表类别i的平均维护时长,所述T表示所述第一预设时间段的时长。
可以理解地,在本发明实施例中,备份系数分别与平均异常次数以及平均维护时长成反比,此外由于在计算过程中平均异常次数会与所有的表类别的平均异常次数的总和相除,所以增加了最后备份系数的统一性,且通过指数形式削弱了平均异常次数对于最终备份系数计算结果的影响。
S1024,根据预设的备份方式与备份系数的对应关系,确定各个表类别的备份系数对应的备份方式,作为各个表类别对应的备份方式。
可选地,本发明实施例的备份方式包括本地整体备份、远程整体备份以及双侧整体备份等。其中,本地整体备份为在用户新输入或修改一个测试数据表后,将该测试数据表的全部数据在本地终端进行备份,远程整体备份为在用户新输入或修改一个测试数据表后,将该测试数据表的全部数据在远程服务器进行备份,双侧整体备份为在用户新输入或修改一个测试数据表后,将该测试数据表的全部数据在本地终端和远程服务器进行备份。
其他的一些特殊的备份方式将在下文详述。
可以理解地,本发明实施例通过结合三类参数(等级系数、平均维护时长以及平均异常次数)可以更加准确客观的选定适当的备份方式。
在S103中,当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份。
可以理解地,当一个测试数据表生成后,用户可能随时对测试数据表中的某些字段进行修改,以提升后续测试的准确性。显然,当测试数据表被用户修改后(值得注意地,并非是在测试过程中通过被测试程序进行修改),测试数据表的版本出现实质性更新,所以之前对该测试数据表的备份无法反应当前该测试数据表的数据,所以每当检测到用户对所述测试数据表进行修改操作时,需要再次对被修改的测试数据表进行重新备份。
如上文实施例所述,本发明实施例的备份方式包括本地整体备份、远程整体备份以及双侧整体备份等,上述这些备份方式已在上文详述,在此着重介绍两个特殊的备份方式,分别是双侧备份方式以及容灾备份方式。
可选地,若所述被修改的测试数据表所属的表类别对应的备份方式为预设的双侧备份方式,则确定出所述被修改的测试数据表中被修改的字段,作为目标字段,将所述目标字段以及其对应的目标字段标识发送至远程服务器进行增量备份,并将所述被修改的测试数据表在本地进行整体备份,并同步覆盖所述测试数据表原先的本地备份数据。
在双侧备份方式中,由于考虑到本地终端可能由于各类软硬件问题导致最新被修改的测试数据表中最新被修改的字段在本地服务器中出现丢失和错误的问题,所以将被修改的字段在远程服务器中进行备份。但是,由于在远程备份过程中需要占用比较大的传输带宽以及远程服务器的存储资源,所以只将被修改的字段发送至远程服务器,以进行增量备份。另一方面,考虑到在测试数据表后续还原过程中的还原速率,除了将目标字段标识发送至远程服务器进行增量备份以外,还会在本地终端对测试数据表的全部数据进行整体备份,从而省去在测试数据表需要还原时耗费的数据拼接以及数据远程调用的时间。
可以理解地,如果一个测试数据表是选用双侧备份方式进行备份的,则在后续的测试数据表还原时,首先通过本地终端中整体备份的数据对测试数据表进行还原,若被还原的测试数据表在实际测试任务中出现测试异常,则从远程服务器中调取该测试数据表对应的增量备份数据,并与该测试数据表的上一个版本的整体备份的数据进行数据拼接和数据替换,从而生成完整的修改后的测试数据表。
可选地,若所述被修改的测试数据表所属的表类别对应的备份方式为预设的容灾备份方式,则将所述被修改的测试数据表进行本地整体备份,同步覆盖所述测试数据表原先的本地备份数据,并在所述本地整体备份的期间实时检测本地终端是否出现预设的运行异常,当检测到所述本地终端出现预设的运行异常时,则在所述被修改的测试数据表对应的已完成所述本地整体备份的数据末端插入断点标签,并将所述被修改的测试数据表中在所述断点标签之后的数据同时进行本地备份和远程备份,覆盖所述测试数据表原先的远程备份数据。
可选地,在所述本地整体备份的期间实时检测本地终端是否出现预设的运行异常,包括:方式一:实时检测本地终端的运行负荷,若运行负荷高于预设的符合阈值,则判定本地终端出现预设的运行异常。方式二:实时检测本地终端的可用于存储测试数据表的存储空间,若存储空间小于预设的空间阈值,则判定本地终端出现预设的运行异常。此外,本地终端中运行的监控软件还可以检测出其他种类的运行异常,由于监控方式采用现有技术,因此不进行具体限定。
在容灾备份方式,原本是单独对被修改的测试数据表进行本地整体备份,但是一旦在备份的过程中检测到本地终端异常,考虑到之后的本地备份可能出现数据的错漏,因此在本地终端异常的时刻之后在所述被修改的测试数据表对应的已完成所述本地整体备份的数据末端插入断点标签,并将所述被修改的测试数据表中在所述断点标签之后的数据同时进行本地备份和远程备份,从而保证被修改的测试数据表的正常存储,提高容灾能力。
可以理解地,端点标签用于在后续的数据还原过程中帮助本地终端确定哪些数据是本地终端异常前备份的,哪些数据是本地终端异常后备份的。
在S104中,调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息。
可以理解地,本地终端在接收到一条测试指令后会执行一个测试任务,可能在执行该测试任务时会对其应用的测试数据表造成数据变化。因此,本发明实施例根据第二预设时间段内的统计情况,通过一个数据流转记录一个测试指令导致哪些测试数据中的哪些字段出现数据变化。
在S105中,在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原。
值得注意地,在本发明实施例中,并不是没有针对性地根据备份数据对多个测试数据表进行整体回滚,而是根据S104中调取的数据流转,确定出现数据变化的数据测试表以及出现数据变化的字段,并有针对性地仅对目标数据表中出现数据变化的字段进行还原。
显然,经过还原的目标数据表可用于对下一个产品的测试。
可以理解地,通过解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式,从而结合个测试数据表的属性以及表类别的实际维护情况这两方面参数确定合理的备份方式;以同时兼顾备份的容灾性能以及备份所耗费的资源;当检测到用户对测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行备份,提高备份的及时性,调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的备份数据仅对所述目标数据表中出现数据变化的字段进行还原,以提高数据还原的针对性,减少还原时所涉及的数据量,从而最终提高测试数据复用的成功率以及减少复用的数据还原阶段所耗费的计算资源。
实施例二
如上文实施例所述,在备份阶段,被修改的测试数据表可以通过容灾备份方式进行备份,具体的容灾备份方式的介绍说明已在上文详述,在此着重介绍:在接收并执行用户输入的测试指令后,若根据上文实施例确定的目标数据表的表类别对应的备份方式为容灾备份方式,则根据所述目标数据表的备份数据仅对所述目标数据表中出现数据变化的字段进行还原的步骤如图4所示,详述如下:
S401,检测所述目标数据表对应的最新本地备份数据中是否含有断点标签。
如上文实施例所述,在容灾备份方式中,原本是单独对被修改的测试数据表进行本地整体备份,但是一旦在备份的过程中检测到本地终端异常,考虑到之后的本地备份可能出现数据的错漏,因此在本地终端异常的时刻之后在所述被修改的测试数据表对应的已完成所述本地整体备份的数据末端插入断点标签。所以可以理解地,通过检测目标数据表对应的本地备份数据中是否含有断点标签可以判断出目标数据表在容灾备份方式中的本地备份时是否出现本地终端异常,同时判定目标数据表对应的本地备份数据是否可以直接用于对目标数据表进行还原。
S402,若所述目标数据表对应的本地备份数据中不含有断点标签,则通过所述目标数据表对应的最新本地备份数据对所述目标数据表中出现数据变化的字段进行还原。
可以理解地,如果在目标数据表对应的本地备份数据中没有检测到端点标签,则证明目标数据表在容灾备份方式中的本地备份时未出现本地终端异常,同时判定目标数据表对应的本地备份数据可以直接用于对目标数据表中出现数据变化的字段进行还原。
S403,若所述目标数据表对应的最新本地备份数据中含有断点标签,则比较所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量是否相等。
可以理解地,如果在目标数据表对应的最新本地备份数据中检测到端点标签,则证明目标数据表在容灾备份方式中的本地备份时出现了本地终端异常,同时判定目标数据表对应的最新本地备份数据不可以在未经验证的情况下直接用于对目标数据表中出现数据变化的字段进行还原。
在这种情况下,需要进一步判断是否可以使用目标数据表对应的最新本地备份数据用于对目标数据表的还原。在本发明实施例中,判断的依据是比较目标数据表对应的最新本地备份数据在所述断点标签之后的数据量与远程备份数据的数据量是否相同。
可以理解地,之所以选择上述这种方法进行验证,第一是:这样验证所需调用和计算的数据量较少,而如果将本地备份数据中在所述断点标签之后的数据和远程备份数据中的字段一一比对,计算量很大且消耗时间较长。第二是:如果假设在目标数据表的本地备份数据中端点标签后的数据出现错漏,则该部分数据的数据量极小可能与远程备份数据的数据量相同,所以这种便捷的判断方式的准确性是可以得到一定程度保证的。
S404,若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量相等,则通过所述目标数据表对应的最新本地备份数据对所述目标数据表中出现数据变化的字段进行还原。
可以理解地,在这种情况下,证明目标数据表在容灾备份方式中的本地备份时虽然出现本地终端异常,但是目标数据表对应的本地备份数据没有异常和错漏,仍然可以直接用于对目标数据表中出现数据变化的字段进行还原。
S405,若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量不相等,则将所述目标数据表对应的最新本地备份数据中在所述断点标签之前的数据与所述目标数据表对应的最新远程备份数据进行叠加,生成所述目标数据表对应的最新整合备份数据。
可以理解地,在这种情况下,证明目标数据表对应的本地备份数据出现异常或错漏,不用于对目标数据表中出现数据变化的字段进行还原。所以只能耗费一些传输资源、远程服务器计算资源以及本地终端计算资源从远程服务器调取该目标数据表对应的远程备份数据,并将其与目标数据表对应的本地备份数据中在所述断点标签之前的数据进行叠加,生成整合备份数据。显然上述操作舍弃了与目标数据表对应的本地备份数据中在所述断点标签之后的数据。
S406,通过所述目标数据表对应的最新所述整合备份数据对所述目标数据表中出现数据变化的字段进行还原。
可以理解地,本发明实施例可以有效利用通过容灾备份方式进行备份的目标数据表的数据,保证数据还原的准确性。
实施例三
对应于上文实施例所述的测试数据的还原方法,图5示出了本发明实施例提供的测试数据的还原装置的结构框图,为了便于说明,仅示出了与本发明实施例相关的部分。
参照图5,该装置包括:
解析模块501,用于解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;
确定模块502,用于调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式;
备份模块503,用于当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份;
调取模块504,用于调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息;
还原模块505,用于在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原。
可选地,所述解析模块,具体用于:
从所述测试数据表的配置说明中提取预设参数类型对应的参数值,并基于各个所述预设参数类型对应的参数值,生成所述测试数据表对应的配置矩阵;
调取第三预设时间段内获取的多个参考矩阵,其中,每个所述参考矩阵均对应一个表类别;
计算全部的所述参考矩阵的多个聚类中心,并计算所述配置矩阵与各个所述聚类中心的相似度,将与所述配置矩阵的相似度最高的聚类中心作为所述目标聚类中心,将归属于所述目标聚类中心的所述参考矩阵均作为目标参考矩阵;
统计各个表类别对应所述目标参考矩阵的个数,并计算各个表类别对应目标参考矩阵的个数占全部的所述目标参考矩阵总个数的比例,将比例最高的表类别作为所述测试数据表的表类别。
可选地,所述确定模块,具体用于:
从各个所述备份维护数据中分别提取平均异常次数以及平均维护时长;
根据预设的类别与类别系数的对应关系,确定各个所述表类别对应的类别系数;
通过公式:计算各个所述表类别的备份系数,其中,Pi表示表类别i的备份系数,Classi表示表类别i对应的等级系数,AbNumi表示表类别i对应的平均异常次数,TotalNum表示所有的表类别的平均异常次数的总和,timei表示表类别i的平均维护时长,所述T表示所述第一预设时间段的时长;根据预设的备份方式与备份系数的对应关系,确定各个表类别的备份系数对应的备份方式,作为各个表类别对应的备份方式。
可选地,备份模块,具体用于:
所述通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份,包括:
若所述被修改的测试数据表所属的表类别对应的备份方式为预设的双侧备份方式,则确定出所述被修改的测试数据表中被修改的字段,作为目标字段,将所述目标字段以及其对应的目标字段标识发送至远程服务器进行增量备份,并将所述被修改的测试数据表在本地进行整体备份,并覆盖所述测试数据表原先的本地备份数据;
若所述被修改的测试数据表所属的表类别对应的备份方式为预设的容灾备份方式,则将所述被修改的测试数据表进行本地整体备份,覆盖所述测试数据表原先的本地备份数据,并在所述本地整体备份的期间实时检测本地终端是否出现预设的运行异常;
当检测到所述本地终端出现预设的运行异常时,则在所述被修改的测试数据表对应的已完成所述本地整体备份的数据末端插入断点标签,并将所述被修改的测试数据表中在所述断点标签之后的数据同时进行本地备份和远程备份,覆盖所述测试数据表原先的远程备份数据。
可选地,所述还原模块,具体用于:
若所述目标数据表所属的表类别对应的备份方式为所述容灾备份方式,则检测所述目标数据表对应的最新本地备份数据中是否含有断点标签;
若所述目标数据表对应的最新本地备份数据中含有断点标签,则比较所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量是否相等;
若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量相等,则通过所述目标数据表对应的最新本地备份数据对所述目标数据表中出现数据变化的字段进行还原;
若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量不相等,则将所述目标数据表对应的最新本地备份数据中在所述断点标签之前的数据与所述目标数据表对应的最新远程备份数据进行叠加,生成所述目标数据表对应的最新整合备份数据;
通过所述目标数据表对应的所述最新整合备份数据对所述目标数据表中出现数据变化的字段进行还原。
可以理解地,通过解析数据库中的各个测试数据表的配置说明,确定各个测试数据表所属的表类别;调取并根据各个备份维护数据,确定各个表类别对应的备份方式;当检测到用户对测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对被修改的测试数据表进行备份;调取各条测试指令与数据流转的对应关系;在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定目标数据表,并根据目标数据表的备份数据仅对目标数据表中出现数据变化的字段进行还原,以提高测试数据复用的成功率并减少复用的数据还原阶段所耗费的计算资源。
图5是本发明一实施例提供的终端设备的示意图。如图5所示,该实施例的终端设备5包括:处理器50、存储器51以及存储在所述存储器51中并可在所述处理器50上运行的计算机程序52,例如测试数据的还原程序。所述处理器50执行所述计算机程序52时实现上述各个测试数据的还原方法实施例中的步骤,例如图1所示的步骤101至105。或者,所述处理器50执行所述计算机程序52时实现上述各装置实施例中各模块/单元的功能,例如图4所示单元401至405的功能。
示例性的,所述计算机程序52可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器51中,并由所述处理器50执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序52在所述终端设备5中的执行过程。
所述终端设备5可以是桌上型计算机、笔记本、掌上电脑及云端终端设备等计算设备。所述终端设备可包括,但不仅限于,处理器50、存储器51。本领域技术人员可以理解,图5仅仅是终端设备5的示例,并不构成对终端设备5的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器50可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器51可以是所述终端设备5的内部存储单元,例如终端设备5的硬盘或内存。所述存储器51也可以是所述终端设备5的外部存储设备,例如所述终端设备5上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器51还可以既包括所述终端设备5的内部存储单元也包括外部存储设备。所述存储器51用于存储所述计算机程序以及所述终端设备所需的其他程序和数据。所述存储器51还可以用于暂时地存储已经输出或者将要输出的数据。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部的单元来实现本实施例方案的目的。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部的或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (10)

1.一种测试数据的还原方法,其特征在于,包括:
解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;
调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式;
当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份;
调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息;
在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原。
2.如权利要求1所述的测试数据的还原方法,其特征在于,所述解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别,包括:
从所述测试数据表的配置说明中提取预设参数类型对应的参数值,并基于各个所述预设参数类型对应的参数值,生成所述测试数据表对应的配置矩阵;
调取第三预设时间段内获取的多个参考矩阵,其中,每个所述参考矩阵均对应一个表类别;
计算全部的所述参考矩阵的多个聚类中心,并计算所述配置矩阵与各个所述聚类中心的相似度,将与所述配置矩阵的相似度最高的聚类中心作为所述目标聚类中心,将归属于所述目标聚类中心的所述参考矩阵均作为目标参考矩阵;
统计各个表类别对应所述目标参考矩阵的个数,并计算各个表类别对应目标参考矩阵的个数占全部的所述目标参考矩阵总个数的比例,将比例最高的表类别作为所述测试数据表的表类别。
3.如权利要求1所述的测试数据的还原方法,其特征在于,所述基于所述备份维护数据,确定各个所述表类别对应的备份方式,包括:
从各个所述备份维护数据中分别提取平均异常次数以及平均维护时长;
根据预设的类别与类别系数的对应关系,确定各个所述表类别对应的类别系数;
通过公式:计算各个所述表类别的备份系数,其中,Pi表示表类别i的备份系数,Classi表示表类别i对应的等级系数,AbNumi表示表类别i对应的平均异常次数,TotalNum表示所有的表类别的平均异常次数的总和,timei表示表类别i的平均维护时长,所述T表示所述第一预设时间段的时长,e为自然常数;
根据预设的备份方式与备份系数的对应关系,确定各个表类别的备份系数对应的备份方式,作为各个表类别对应的备份方式。
4.如权利要求1所述的测试数据的还原方法,其特征在于,所述通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份,包括:
若所述被修改的测试数据表所属的表类别对应的备份方式为预设的双侧备份方式,则确定出所述被修改的测试数据表中被修改的字段,作为目标字段,将所述目标字段以及其对应的目标字段标识发送至远程服务器进行增量备份,并将所述被修改的测试数据表在本地进行整体备份,并覆盖所述测试数据表原先的本地备份数据;
若所述被修改的测试数据表所属的表类别对应的备份方式为预设的容灾备份方式,则将所述被修改的测试数据表进行本地整体备份,覆盖所述测试数据表原先的本地备份数据,并在所述本地整体备份的期间实时检测本地终端是否出现预设的运行异常;
当检测到所述本地终端出现预设的运行异常时,则在所述被修改的测试数据表对应的已完成所述本地整体备份的数据末端插入断点标签,并将所述被修改的测试数据表中在所述断点标签之后的数据同时进行本地备份和远程备份,覆盖所述测试数据表原先的远程备份数据。
5.如权利要求4所述的测试数据的还原方法,其特征在于,所述根据所述目标数据表的最新备份数据仅对所述目标数据表中出现数据变化的字段进行还原,包括:
若所述目标数据表所属的表类别对应的备份方式为所述容灾备份方式,则检测所述目标数据表对应的最新本地备份数据中是否含有断点标签;
若所述目标数据表对应的最新本地备份数据中含有断点标签,则比较所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量是否相等;
若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量相等,则通过所述目标数据表对应的最新本地备份数据对所述目标数据表中出现数据变化的字段进行还原;
若所述目标数据表对应的最新本地备份数据在所述断点标签之后的数据量以及所述目标数据表对应的最新远程备份数据的数据量不相等,则将所述目标数据表对应的最新本地备份数据中在所述断点标签之前的数据与所述目标数据表对应的最新远程备份数据进行叠加,生成所述目标数据表对应的最新整合备份数据;
通过所述目标数据表对应的所述最新整合备份数据对所述目标数据表中出现数据变化的字段进行还原。
6.一种测试数据的还原装置,其特征在于,所述装置包括:
解析模块,用于解析数据库中的各个测试数据表的配置说明,确定各个所述测试数据表所属的表类别;
确定模块,用于调取第一预设时间段内各个所述表类别对应的备份维护数据,并基于各个所述备份维护数据,确定各个所述表类别对应的备份方式;
备份模块,用于当检测到用户对所述测试数据表进行修改操作时,通过被修改的测试数据表所属的表类别对应的备份方式对所述被修改的测试数据表进行重新备份;
调取模块,用于调取在第二预设时间段内生成的各条测试指令与数据流转的对应关系,所述数据流转记录有因执行所述测试指令导致的一个以上的测试数据表的数据变化信息;
还原模块,用于在接收并执行用户输入的测试指令后,通过该测试指令对应的数据流转确定会发生数据变化的测试数据表作为目标数据表,并根据所述目标数据表的最新备份数据对所述目标数据表中出现数据变化的字段进行还原。
7.如权利要求6所述的测试数据的还原装置,其特征在于,所述解析模块,具体用于:
从所述测试数据表的配置说明中提取预设参数类型对应的参数值,并基于各个所述预设参数类型对应的参数值,生成所述测试数据表对应的配置矩阵;
调取第三预设时间段内获取的多个参考矩阵,其中,每个所述参考矩阵均对应一个表类别;
计算全部的所述参考矩阵的多个聚类中心,并计算所述配置矩阵与各个所述聚类中心的相似度,将与所述配置矩阵的相似度最高的聚类中心作为所述目标聚类中心,将归属于所述目标聚类中心的所述参考矩阵均作为目标参考矩阵;
统计各个表类别对应所述目标参考矩阵的个数,并计算各个表类别对应目标参考矩阵的个数占全部的所述目标参考矩阵总个数的比例,将比例最高的表类别作为所述测试数据表的表类别。
8.如权利要求6所述的测试数据的还原装置,其特征在于,所述确定模块,具体用于:
从各个所述备份维护数据中分别提取平均异常次数以及平均维护时长;
根据预设的类别与类别系数的对应关系,确定各个所述表类别对应的类别系数;
通过公式:计算各个所述表类别的备份系数,其中,Pi表示表类别i的备份系数,Classi表示表类别i对应的等级系数,AbNumi表示表类别i对应的平均异常次数,TotalNum表示所有的表类别的平均异常次数的总和,timei表示表类别i的平均维护时长,所述T表示所述第一预设时间段的时长;
根据预设的备份方式与备份系数的对应关系,确定各个表类别的备份系数对应的备份方式,作为各个表类别对应的备份方式。
9.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法的步骤。
CN201910603935.1A 2019-07-05 2019-07-05 测试数据的还原方法、装置、终端设备及介质 Pending CN110489320A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910603935.1A CN110489320A (zh) 2019-07-05 2019-07-05 测试数据的还原方法、装置、终端设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910603935.1A CN110489320A (zh) 2019-07-05 2019-07-05 测试数据的还原方法、装置、终端设备及介质

Publications (1)

Publication Number Publication Date
CN110489320A true CN110489320A (zh) 2019-11-22

Family

ID=68546636

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910603935.1A Pending CN110489320A (zh) 2019-07-05 2019-07-05 测试数据的还原方法、装置、终端设备及介质

Country Status (1)

Country Link
CN (1) CN110489320A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111078719A (zh) * 2019-12-31 2020-04-28 北京互金新融科技有限公司 数据的恢复方法及装置、存储介质和处理器
CN112363920A (zh) * 2020-11-06 2021-02-12 广州品唯软件有限公司 测试用例的修复方法、装置、计算机设备和存储介质
CN112506802A (zh) * 2021-01-09 2021-03-16 杭银消费金融股份有限公司 测试数据的管理方法及系统
CN113127363A (zh) * 2021-04-23 2021-07-16 中国工商银行股份有限公司 参数调整方法、参数调整装置、电子设备及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160378644A1 (en) * 2015-06-23 2016-12-29 International Business Machines Corporation Flexible configuration and control of a testing system
US9588871B1 (en) * 2015-04-14 2017-03-07 Don Estes & Associates, Inc. Method and system for dynamic business rule extraction
CN109376079A (zh) * 2018-09-26 2019-02-22 深圳壹账通智能科技有限公司 接口调用的测试方法及服务器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9588871B1 (en) * 2015-04-14 2017-03-07 Don Estes & Associates, Inc. Method and system for dynamic business rule extraction
US20160378644A1 (en) * 2015-06-23 2016-12-29 International Business Machines Corporation Flexible configuration and control of a testing system
CN109376079A (zh) * 2018-09-26 2019-02-22 深圳壹账通智能科技有限公司 接口调用的测试方法及服务器

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐述书;叶桦;仰燕兰;: "GPS定位监控系统数据库的分区优化及其实现", 东南大学学报(自然科学版), no. 1 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111078719A (zh) * 2019-12-31 2020-04-28 北京互金新融科技有限公司 数据的恢复方法及装置、存储介质和处理器
CN112363920A (zh) * 2020-11-06 2021-02-12 广州品唯软件有限公司 测试用例的修复方法、装置、计算机设备和存储介质
CN112506802A (zh) * 2021-01-09 2021-03-16 杭银消费金融股份有限公司 测试数据的管理方法及系统
CN112506802B (zh) * 2021-01-09 2023-06-27 杭银消费金融股份有限公司 测试数据的管理方法及系统
CN113127363A (zh) * 2021-04-23 2021-07-16 中国工商银行股份有限公司 参数调整方法、参数调整装置、电子设备及可读存储介质
CN113127363B (zh) * 2021-04-23 2024-02-23 中国工商银行股份有限公司 参数调整方法、参数调整装置、电子设备及可读存储介质

Similar Documents

Publication Publication Date Title
CN110489320A (zh) 测试数据的还原方法、装置、终端设备及介质
US6678639B2 (en) Automated problem identification system
CN103201724B (zh) 在高可用性虚拟机环境中提供高可用性应用程序
US7934071B2 (en) Method of managing storage capacity in a storage system, a storage device and a computer system
US9424157B2 (en) Early detection of failing computers
US20130197863A1 (en) Performance and capacity analysis of computing systems
CN104903866A (zh) 对事件根本原因的分析予以支援的管理系统以及方法
CN102129372A (zh) 通过事件相关来进行根本原因问题标识
US10084662B2 (en) Optimizing application availability
CN104598341B (zh) 用于确定在互连/控制器之间的故障的位置的方法和系统
CN104615476A (zh) 用于所选择的虚拟机复制和虚拟机重新启动的方法和系统
CN108388507A (zh) 批量脚本测试方法及装置
US20060112308A1 (en) Selection of status data from synchronous redundant devices
US9164857B2 (en) Scalable structured data store operations
Kanoun et al. Reliability growth of fault-tolerant software
CN109614227A (zh) 任务资源调配方法、装置、电子设备及计算机可读介质
EP3829112B1 (en) Testing and maintaining outage resilience of server resources
CN110291505A (zh) 减少应用的恢复时间
CN109408361A (zh) Monkey测试复原方法、装置、电子设备及计算机可读存储介质
CN117978678A (zh) 一种通信机柜的远程监测方法、系统、设备以及介质
CN109614257A (zh) 程序异常的处理方法、装置、计算机存储介质及电子设备
US20160117622A1 (en) Shared risk group management system, shared risk group management method, and shared risk group management program
CN102868594B (zh) 一种消息处理方法和装置
Oppermann et al. Anomaly Detection Approaches for Secure Cloud Reference Architectures in Legal Metrology.
CN114385453A (zh) 数据库集群异常处理方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
AD01 Patent right deemed abandoned

Effective date of abandoning: 20240621