CN110262961A - 工作流管理系统的测试方法、装置、存储介质及终端设备 - Google Patents

工作流管理系统的测试方法、装置、存储介质及终端设备 Download PDF

Info

Publication number
CN110262961A
CN110262961A CN201910423186.4A CN201910423186A CN110262961A CN 110262961 A CN110262961 A CN 110262961A CN 201910423186 A CN201910423186 A CN 201910423186A CN 110262961 A CN110262961 A CN 110262961A
Authority
CN
China
Prior art keywords
test
order
circulation path
management system
tested
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910423186.4A
Other languages
English (en)
Inventor
孙云雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Smart Technology Co Ltd
Original Assignee
OneConnect Smart Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Smart Technology Co Ltd filed Critical OneConnect Smart Technology Co Ltd
Priority to CN201910423186.4A priority Critical patent/CN110262961A/zh
Publication of CN110262961A publication Critical patent/CN110262961A/zh
Priority to PCT/CN2020/086842 priority patent/WO2020233347A1/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/103—Workflow collaboration or project management

Abstract

本发明属于计算机技术领域，尤其涉及一种工作流管理系统的测试方法、装置、计算机可读存储介质及终端设备。所述方法提取测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径；从数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录；据此分别计算各个测试订单各次测试的偏差度，并分别计算各个测试订单的优先指数；将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试，确保在有限的时间内发现尽可能多的系统缺陷。

Description

工作流管理系统的测试方法、装置、存储介质及终端设备
技术领域
本发明属于计算机技术领域，尤其涉及一种工作流管理系统的测试方法、装置、计算机可读存储介质及终端设备。
背景技术
工作流管理系统是一个软件系统，它完成工作流的定义和管理，并按照在计算机中预先定义好的工作流逻辑推进工作流实例的执行。以某一业务的审批过程为例，申请订单被用户在工作流管理系统中提交之后，按照预设的流转路径依次经过各级人员或者部门(每个人员或者部门均作为工作流管理系统中的一个节点)的审批或处理(可以是人工处理，也可以是自动化处理)，从而完成整个业务审批流程。随着业务的不断发展，往往需要对工作流管理系统不断地进行升级更新，为了保证后续版本的工作流管理系统在开发过程中不引入新的系统缺陷，每次在新版本投入使用前，均需要通过测试订单对其进行测试，这一过程往往会涉及到大量的测试订单的执行，耗费大量的测试时间。而在新版本投入使用前，可用于系统测试的时间是有限的，通常难以对所有的测试订单进行完整的测试，导致难以发现新的系统缺陷。
发明内容
有鉴于此，本发明实施例提供了一种工作流管理系统的测试方法、装置、计算机可读存储介质及终端设备，以解决现有的办公应用程序操作比较繁琐，用户体验较差的问题。
本发明实施例的第一方面提供了一种工作流管理系统的测试方法，可以包括：
提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
本发明实施例的第二方面提供了一种工作流管理系统的测试装置，可以包括：
测试订单提取模块，用于提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
历史测试记录获取模块，用于从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
偏差度计算模块，用于根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
优先指数计算模块，用于根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
测试集构造模块，用于将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
本发明实施例的第三方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可读指令，所述计算机可读指令被处理器执行时实现如下步骤：
提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
本发明实施例的第四方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现如下步骤：
提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
本发明实施例与现有技术相比存在的有益效果是：本发明实施例首先提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，然后从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度，并根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数，最后将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。本发明实施例引入了优先指数来对各个测试订单的重要性进行评估，而且该优先指数是根据对工作量管理系统的历史版本的测试记录计算得到的，为所述工作流管理系统当前更新版本的测试订单的选取提供了可靠的依据，在系统测试时间是有限的情况下，只选取优先指数较高的若干个测试订单对所述工作流管理系统的当前更新版本进行测试，确保在有限的时间内在当前更新版本中发现尽可能多的系统缺陷。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例中一种工作流管理系统的测试方法的一个实施例流程图；
图2为选取优先指数最高的若干个测试订单构造当前测试的测试集的示意流程图；
图3为本发明实施例中一种工作流管理系统的测试装置的一个实施例结构图；
图4为本发明实施例中一种终端设备的示意框图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1，本发明实施例中一种工作流管理系统的测试方法的一个实施例可以包括：
步骤S101、提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径。
所述测试订单库可以由测试人员预先进行构建，具体地，本实施例中可以提供给测试人员用于生成测试订单的交互界面，测试人员在其中根据实际需求填写如申请类型标识(ID)、客户三户信息等关键不能重复的信息关键字段，其中，申请类型标识为各个申请类型的唯一标识，可以对不同的申请类型进行区分，不同的申请类型在工作流管理系统中的处理过程各不相同。客户三户信息包括：客户姓名、手机号、身份证号。其它字段信息可以根据测试所需具体情况进行填写，在测试人员填写完成，下发执行指令之后，测试终端设备(本实施例的实施主体)将自动抓取这些数据流，提取出其中的各个字段信息，并将这些字段信息组合为所需的测试订单，并为其自动分配订单编号。
在生成测试订单之后，测试人员还可以为其配置对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径。工作流管理系统在业务中往往跨多个部门和多个层级，并且根据其具体部门和具体业务岗位，有着不同的审批权限，而每个步骤节点有多种操作，每种操作的约束条件不同，根据每个订单中各个字段的差异，其在工作流管理系统中的流转路径也会不同。测试人员可以根据实际情况为每个测试订单配置与之对应的基准流转路径，也即当工作流管理系统正常运行时测试订单所应当经过的路径，将其作为对工作流管理系统进行测试的依据。以某一业务的审批过程为例，申请订单被用户在工作流管理系统中提交之后，当工作流管理系统正常运行时，该订单需要依次经过部门A(节点1)、部门B(节点2)、部门C(节点3)这三个工作流节点的审批或处理，则其基准流转路径为节点1→节点2→节点3。根据实际需求，可以预先生成众多的测试订单，并将其构建成所述测试订单库，以备后续对工作流管理系统进行测试时使用。
步骤S102、从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录。
所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径，所述流转时长为测试订单从输入到所述工作流管理系统到从所述工作流管理系统输出结果之间所耗费的时长。
本实施例中，将每次对所述工作流管理系统进行测试所得到的历史测试记录都保存至指定的测试记录数据库中，当有需要时，测试终端设备则从该测试记录数据库中获取这些历史测试记录。
步骤S103、根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度。
在本实施例的一种具体实现中，可以首先将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第一节点数、第二节点数和第三节点数，所述第一节点数为实际流转路径经过的工作流节点总数，所述第二节点数为基准流转路径经过的工作流节点总数，所述第三节点数为实际流转路径和基准流转路径共同经过的工作流节点总数。
然后，根据下式分别计算各个测试订单各次测试的偏差度：
其中，n为各个测试订单的序号，1≤n≤N，N为所述测试订单库中的测试订单总数，t为各次对所述工作流管理系统进行测试的次数序号，1≤t≤T，T为各次对所述工作流管理系统进行测试的总次数，FtNodeNn,t为第n个测试订单第t次测试的第一节点数，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，TdNodeNn,t为第n个测试订单第t次测试的第三节点数，Max为求最大值函数，DevDegn,t为第n个测试订单第t次测试的偏差度。
由该式可以看出，当实际流转路径和基准流转路径越一致，则其对应的偏差度会越小，特殊地，当两者完全一致时，对应的偏差度为0，当实际流转路径和基准流转路径越不一致，则其对应的偏差度会越大，特殊地，当两者完全不一致时(无任何共同经过的工作流节点)，对应的偏差度为1。一般情况下，偏差度的取值介于0和1之间。
若第n个测试订单并未在对所述工作流管理系统进行的第t次测试中使用，则可直接将其偏差值设置为0。
在本实施例的另一种具体实现中，可以首先将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第二节点数和分叉节点序号，所述分叉节点序号为实际流转路径和基准流转路径在出现第一次分叉时共同经过的最后一个工作流节点在基准流转路径中的序号。
例如，若某一基准流转路径为：
节点120(序号1)→节点75(序号2)→节点9(序号3)→节点38(序号4)→节点91(序号5)；
而其对应的实际流转路径为：
节点120(序号1)→节点75(序号2)→节点9(序号3)→节点77(序号4)→节点58(序号5)；
则可以看出，两者在前三个节点是一致的，但是在第四个节点出现不一致(即分叉)，分叉节点序号为4。
然后，可以根据下式分别计算各个测试订单各次测试的偏差度：
其中，nn为第n个测试订单第t次测试的基准流转路径经过的各个工作流节点的序号，1≤nn≤SdNodeNn,t，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号，ImpVal(nn)为第n个测试订单第t次测试的基准流转路径经过的第nn个工作流节点的预设权值，，每个工作流节点的具体权重可以根据实际情况进行设置，本实施例在此不做具体限制，只需满足ImpVal(nn)>ImpVal(nn+1)，即序号在前的工作流节点的权值大于序号在后的工作流节点的权值即可，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号。
步骤S104、根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数。
具体地，可以根据下式分别计算各个测试订单的优先指数：
其中，Periodn,t为第n个测试订单第t次测试的流转时长，测试订单的流转时长反映了该测试订单的测试效率，在测试过程中，由于测试时限的约束，测试订单通常不能全部执行，通常优选选取测试效率较高的测试订单，测试订单的流转时长越短，则其优先指数越高。Weightt为预设的权重系数，且PriIndexn为第n个测试订单的优先指数。
步骤S105、将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
具体地，所述测试集的构造过程可以包括如图2所示的步骤：
步骤S1051、构造测试订单序列。
具体地，可以将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序排列为如下的测试订单序列：
OrderSet＝{Order1,Order2,......,Ordersn,......,OrderN}
其中，OrderSet为所述测试订单序列，Ordersn为所述测试订单序列中第sn个测试订单，1≤sn≤N，且PriIndexsn≥PriIndexsn+1，PriIndexsn为Ordersn的优先指数。
步骤S1052、确定构成所述测试集中的测试订单的个数。
具体地，可以将满足下式的R的取值确定为构成所述测试集中的测试订单的个数：
其中，Tblanksn为在对所述工作流管理系统进行的T次测试中，Ordersn未被使用的次数，Periodsn,t为Ordersn第t次测试的流转时长，若Ordersn在第t次测试中未被使用，则Periodsn,t＝0，MaxPeriod为所述测试时限，该测试时限可以由测试人员预先根据实际情况进行设置，例如，可以将其设置为30分钟、1小时、2小时或者其它取值。
步骤S1053、从所述测试订单序列中选取排序中的前R个测试订单构造所述测试集。
在构造出所述测试集之后，即可使用所述测试集对所述工作流管理系统的当前更新版本进行测试。由于所述测试集中各个测试订单是综合考虑了测试订单在对历史版本的测试过程中发现系统缺陷的能力以及效率等因素所确定出的最佳测试订单，通过所述测试集可以在有限的测试时限内取得最佳的测试效果。
综上所述，本发明实施例本发明实施例首先提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，然后从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度，并根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数，最后将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。本发明实施例引入了优先指数来对各个测试订单的重要性进行评估，而且该优先指数是根据对工作量管理系统的历史版本的测试记录计算得到的，为所述工作流管理系统当前更新版本的测试订单的选取提供了可靠的依据，在系统测试时间是有限的情况下，只选取优先指数较高的若干个测试订单对所述工作流管理系统的当前更新版本进行测试，确保在有限的时间内在当前更新版本中发现尽可能多的系统缺陷。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
对应于上文实施例所述的一种工作流管理系统的测试方法，图3示出了本发明实施例提供的一种工作流管理系统的测试装置的一个实施例结构图。
本实施例中，一种工作流管理系统的测试装置可以包括：
测试订单提取模块301，用于提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
历史测试记录获取模块302，用于从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
偏差度计算模块303，用于根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
优先指数计算模块304，用于根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
测试集构造模块305，用于将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
可选地，所述偏差度计算模块可以包括：
第一路径比对单元，用于将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第一节点数、第二节点数和第三节点数，所述第一节点数为实际流转路径经过的工作流节点总数，所述第二节点数为基准流转路径经过的工作流节点总数，所述第三节点数为实际流转路径和基准流转路径共同经过的工作流节点总数；
第一偏差度计算单元，用于根据下式分别计算各个测试订单各次测试的偏差度：
其中，n为各个测试订单的序号，1≤n≤N，N为所述测试订单库中的测试订单总数，t为各次对所述工作流管理系统进行测试的次数序号，1≤t≤T，T为各次对所述工作流管理系统进行测试的总次数，FtNodeNn,t为第n个测试订单第t次测试的第一节点数，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，TdNodeNn,t为第n个测试订单第t次测试的第三节点数，Max为求最大值函数，DevDegn,t为第n个测试订单第t次测试的偏差度。
可选地，所述偏差度计算模块可以包括：
第二路径比对单元，用于将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第二节点数和分叉节点序号，所述第二节点数为基准流转路径经过的工作流节点总数，所述分叉节点序号为实际流转路径和基准流转路径在出现第一次分叉时共同经过的最后一个工作流节点在基准流转路径中的序号；
第二偏差度计算单元，用于根据下式分别计算各个测试订单各次测试的偏差度：
其中，nn为第n个测试订单第t次测试的基准流转路径经过的各个工作流节点的序号，1≤nn≤SdNodeNn,t，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号，ImpVal(nn)为第n个测试订单第t次测试的基准流转路径经过的第nn个工作流节点的预设权值，且ImpVal(nn)>ImpVal(nn+1)，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号，DevDegn,t为第n个测试订单第t次测试的偏差度。
进一步地，所述优先指数计算模块具体用于根据下式分别计算各个测试订单的优先指数：
其中，Periodn,t为第n个测试订单第t次测试的流转时长，Weightt为预设的权重系数，且PriIndexn为第n个测试订单的优先指数。
进一步地，所述测试集构造模块可以包括：
测试订单序列排列单元，用于将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序排列为如下的测试订单序列：
OrderSet＝{Order1,Order2,......,Ordersn,......,OrderN}
其中，OrderSet为所述测试订单序列，Ordersn为所述测试订单序列中第sn个测试订单，1≤sn≤N，且PriIndexsn≥PriIndexsn+1，PriIndexsn为Ordersn的优先指数；
测试订单个数确定单元，用于将满足下式的R的取值确定为构成所述测试集中的测试订单的个数：
其中，Tblanksn为在对所述工作流管理系统进行的T次测试中，Ordersn未被使用的次数，Periodsn,t为Ordersn第t次测试的流转时长，MaxPeriod为所述测试时限；
测试集构造单元，用于从所述测试订单序列中选取排序中的前R个测试订单构造所述测试集。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置，模块和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
图4示出了本发明实施例提供的一种终端设备的示意框图，为了便于说明，仅示出了与本发明实施例相关的部分。
在本实施例中，所述终端设备4可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该终端设备4可包括：处理器40、存储器41以及存储在所述存储器41中并可在所述处理器40上运行的计算机可读指令42，例如执行上述的工作流管理系统的测试方法的计算机可读指令。所述处理器40执行所述计算机可读指令42时实现上述各个工作流管理系统的测试方法实施例中的步骤，例如图1所示的步骤S101至S105。或者，所述处理器40执行所述计算机可读指令42时实现上述各装置实施例中各模块/单元的功能，例如图3所示模块301至305的功能。
示例性的，所述计算机可读指令42可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器41中，并由所述处理器40执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机可读指令段，该指令段用于描述所述计算机可读指令42在所述终端设备4中的执行过程。
所述处理器40可以是中央处理单元(Central Processing Unit，CPU)，还可以是其它通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是所述终端设备4的内部存储单元，例如终端设备4的硬盘或内存。所述存储器41也可以是所述终端设备4的外部存储设备，例如所述终端设备4上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器41还可以既包括所述终端设备4的内部存储单元也包括外部存储设备。所述存储器41用于存储所述计算机可读指令以及所述终端设备4所需的其它指令和数据。所述存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干计算机可读指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储计算机可读指令的介质。
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种工作流管理系统的测试方法，其特征在于，包括：
提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
2.根据权利要求1所述的测试方法，其特征在于，所述根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度包括：
将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第一节点数、第二节点数和第三节点数，所述第一节点数为实际流转路径经过的工作流节点总数，所述第二节点数为基准流转路径经过的工作流节点总数，所述第三节点数为实际流转路径和基准流转路径共同经过的工作流节点总数；
根据下式分别计算各个测试订单各次测试的偏差度：
其中，n为各个测试订单的序号，1≤n≤N，N为所述测试订单库中的测试订单总数，t为各次对所述工作流管理系统进行测试的次数序号，1≤t≤T，T为各次对所述工作流管理系统进行测试的总次数，FtNodeNn,t为第n个测试订单第t次测试的第一节点数，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，TdNodeNn,t为第n个测试订单第t次测试的第三节点数，Max为求最大值函数，DevDegn,t为第n个测试订单第t次测试的偏差度。
3.根据权利要求1所述的测试方法，其特征在于，所述根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度包括：
将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第二节点数和分叉节点序号，所述第二节点数为基准流转路径经过的工作流节点总数，所述分叉节点序号为实际流转路径和基准流转路径在出现第一次分叉时共同经过的最后一个工作流节点在基准流转路径中的序号；
根据下式分别计算各个测试订单各次测试的偏差度：
其中，nn为第n个测试订单第t次测试的基准流转路径经过的各个工作流节点的序号，1≤nn≤SdNodeNn,t，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号，ImpVal(nn)为第n个测试订单第t次测试的基准流转路径经过的第nn个工作流节点的预设权值，且ImpVal(nn)>ImpVal(nn+1)，NodeSqn,t为第n个测试订单第t次测试的分叉节点序号，DevDegn,t为第n个测试订单第t次测试的偏差度。
4.根据权利要求2或3所述的测试方法，其特征在于，所述根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数包括：
根据下式分别计算各个测试订单的优先指数：
其中，Periodn,t为第n个测试订单第t次测试的流转时长，Weightt为预设的权重系数，且PriIndexn为第n个测试订单的优先指数。
5.根据权利要求1至3中任一项所述的测试方法，其特征在于，所述将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集包括：
将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序排列为如下的测试订单序列：
OrderSet＝{Order1,Order2,......,Ordersn,......,OrderN}
其中，OrderSet为所述测试订单序列，Ordersn为所述测试订单序列中第sn个测试订单，1≤sn≤N，且PriIndexsn≥PriIndexsn+1，PriIndexsn为Ordersn的优先指数；
将满足下式的R的取值确定为构成所述测试集中的测试订单的个数：
其中，Tblanksn为在对所述工作流管理系统进行的T次测试中，Ordersn未被使用的次数，Periodsn,t为Ordersn第t次测试的流转时长，MaxPeriod为所述测试时限；
从所述测试订单序列中选取排序中的前R个测试订单构造所述测试集。
6.一种工作流管理系统的测试装置，其特征在于，包括：
测试订单提取模块，用于提取预设的测试订单库中的各个测试订单，并确定与各个测试订单分别对应的基准流转路径，所述基准流转路径为测试订单在预设的工作流管理系统中预期的流转路径；
历史测试记录获取模块，用于从预设的数据库中获取各次对所述工作流管理系统的历史版本进行测试所得到的历史测试记录，所述历史测试记录包括各个测试订单在所述工作流管理系统的历史版本中的流转时长和实际流转路径；
偏差度计算模块，用于根据各个测试订单各次测试的实际流转路径和基准流转路径分别计算各个测试订单各次测试的偏差度；
优先指数计算模块，用于根据各个测试订单各次测试的偏差度和流转时长分别计算各个测试订单的优先指数；
测试集构造模块，用于将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序进行排序，根据预设的测试时限从所述测试订单库中选取排序中的前指定数量个测试订单构造当前测试的测试集，并使用所述测试集对所述工作流管理系统的当前更新版本进行测试。
7.根据权利要求6所述的工作流管理系统的测试装置，其特征在于，所述偏差度计算模块包括：
第一路径比对单元，用于将各个测试订单各次测试的实际流转路径和基准流转路径分别进行比对，得到各个测试订单各次测试的第一节点数、第二节点数和第三节点数，所述第一节点数为实际流转路径经过的工作流节点总数，所述第二节点数为基准流转路径经过的工作流节点总数，所述第三节点数为实际流转路径和基准流转路径共同经过的工作流节点总数；
第一偏差度计算单元，用于根据下式分别计算各个测试订单各次测试的偏差度：
其中，n为各个测试订单的序号，1≤n≤N，N为所述测试订单库中的测试订单总数，t为各次对所述工作流管理系统进行测试的次数序号，1≤t≤T，T为各次对所述工作流管理系统进行测试的总次数，FtNodeNn,t为第n个测试订单第t次测试的第一节点数，SdNodeNn,t为第n个测试订单第t次测试的第二节点数，TdNodeNn,t为第n个测试订单第t次测试的第三节点数，Max为求最大值函数，DevDegn,t为第n个测试订单第t次测试的偏差度。
8.根据权利要求6或7所述的工作流管理系统的测试装置，其特征在于，所述测试集构造模块包括：
测试订单序列排列单元，用于将所述测试订单库中的各个测试订单按照优选指数从高到低的顺序排列为如下的测试订单序列：
OrderSet＝{Order1,Order2,......,Ordersn,......,OrderN}
其中，OrderSet为所述测试订单序列，Ordersn为所述测试订单序列中第sn个测试订单，1≤sn≤N，且PriIndexsn≥PriIndexsn+1，PriIndexsn为Ordersn的优先指数；
测试订单个数确定单元，用于将满足下式的R的取值确定为构成所述测试集中的测试订单的个数：
其中，Tblanksn为在对所述工作流管理系统进行的T次测试中，Ordersn未被使用的次数，Periodsn,t为Ordersn第t次测试的流转时长，MaxPeriod为所述测试时限；
测试集构造单元，用于从所述测试订单序列中选取排序中的前R个测试订单构造所述测试集。
9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可读指令，其特征在于，所述计算机可读指令被处理器执行时实现如权利要求1至5中任一项所述的测试方法的步骤。
10.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，其特征在于，所述处理器执行所述计算机可读指令时实现如权利要求1至5中任一项所述的测试方法的步骤。
CN201910423186.4A 2019-05-21 2019-05-21 工作流管理系统的测试方法、装置、存储介质及终端设备 Pending CN110262961A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910423186.4A CN110262961A (zh) 2019-05-21 2019-05-21 工作流管理系统的测试方法、装置、存储介质及终端设备
PCT/CN2020/086842 WO2020233347A1 (zh) 2019-05-21 2020-04-24 工作流管理系统的测试方法、装置、存储介质及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910423186.4A CN110262961A (zh) 2019-05-21 2019-05-21 工作流管理系统的测试方法、装置、存储介质及终端设备

Publications (1)

Publication Number Publication Date
CN110262961A true CN110262961A (zh) 2019-09-20

Family

ID=67914955

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910423186.4A Pending CN110262961A (zh) 2019-05-21 2019-05-21 工作流管理系统的测试方法、装置、存储介质及终端设备

Country Status (2)

Country Link
CN (1) CN110262961A (zh)
WO (1) WO2020233347A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110991907A (zh) * 2019-12-05 2020-04-10 江苏艾佳家居用品有限公司 一种基于有限状态自动机的订单服务质量评估方法
CN111815401A (zh) * 2020-06-16 2020-10-23 上海悦易网络信息技术有限公司 一种订单流程控制的方法及设备
WO2020233347A1 (zh) * 2019-05-21 2020-11-26 深圳壹账通智能科技有限公司 工作流管理系统的测试方法、装置、存储介质及终端设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140297452A1 (en) * 2013-03-29 2014-10-02 International Business Machines Corporation Computing system predictive build
US20140364984A1 (en) * 2013-06-06 2014-12-11 International Business Machines Corporation Replacement of suspect or marginally defective computing system components during fulfillment test of build-to-order test phase
CN107943705A (zh) * 2017-12-08 2018-04-20 中国银行股份有限公司 一种流程审批类系统的测试方法及装置
CN109062802A (zh) * 2018-08-13 2018-12-21 深圳壹账通智能科技有限公司 一种软件测试方法、计算机可读存储介质及终端设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040205560A1 (en) * 2001-11-06 2004-10-14 Polk George A. Method and apparatus for testing embedded examples in documentation
CN106326105A (zh) * 2015-07-09 2017-01-11 富士通株式会社 生成应用程序的测试用例的方法和装置
CN107783893B (zh) * 2016-08-26 2019-05-03 上海计算机软件技术开发中心 一种基于场景描述的自动测试系统及其实现方法
CN106874199B (zh) * 2017-02-10 2022-10-18 腾讯科技（深圳）有限公司 测试用例处理方法和装置
CN109344055B (zh) * 2018-09-07 2020-05-19 武汉达梦数据库有限公司 一种测试方法以及测试装置
CN110262961A (zh) * 2019-05-21 2019-09-20 深圳壹账通智能科技有限公司 工作流管理系统的测试方法、装置、存储介质及终端设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140297452A1 (en) * 2013-03-29 2014-10-02 International Business Machines Corporation Computing system predictive build
US20140364984A1 (en) * 2013-06-06 2014-12-11 International Business Machines Corporation Replacement of suspect or marginally defective computing system components during fulfillment test of build-to-order test phase
CN107943705A (zh) * 2017-12-08 2018-04-20 中国银行股份有限公司 一种流程审批类系统的测试方法及装置
CN109062802A (zh) * 2018-08-13 2018-12-21 深圳壹账通智能科技有限公司 一种软件测试方法、计算机可读存储介质及终端设备

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
陈庆元;管志强;: "基于测试路径集运算的类回归测试策略研究", 雷达与对抗, no. 01 *
颜乐鸣;: "基于工作流的软件测试过程模型研究", 软件, no. 05 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020233347A1 (zh) * 2019-05-21 2020-11-26 深圳壹账通智能科技有限公司 工作流管理系统的测试方法、装置、存储介质及终端设备
CN110991907A (zh) * 2019-12-05 2020-04-10 江苏艾佳家居用品有限公司 一种基于有限状态自动机的订单服务质量评估方法
CN110991907B (zh) * 2019-12-05 2022-07-26 江苏艾佳家居用品有限公司 一种基于有限状态自动机的订单服务质量评估方法
CN111815401A (zh) * 2020-06-16 2020-10-23 上海悦易网络信息技术有限公司 一种订单流程控制的方法及设备
CN111815401B (zh) * 2020-06-16 2024-02-13 上海万物新生环保科技集团有限公司 一种订单流程控制的方法及设备

Also Published As

Publication number Publication date
WO2020233347A1 (zh) 2020-11-26

Similar Documents

Publication Publication Date Title
CN106549772B (zh) 资源预测方法、系统和容量管理装置
US7778720B2 (en) Method and system for product line management (PLM)
CN106575246A (zh) 机器学习服务
CN111078544B (zh) 一种软件缺陷预测方法、装置、设备及存储介质
CN110262961A (zh) 工作流管理系统的测试方法、装置、存储介质及终端设备
CN103733194A (zh) 动态组织云计算资源以便于发现
CN112465011B (zh) 基于项目研发过程的项目风险预测方法和系统
CN107688591A (zh) 一种精算处理方法和装置
CN109615280A (zh) 员工数据处理方法、装置、计算机设备和存储介质
CN110276618A (zh) 生成洗钱案宗预测模型、预测洗钱案宗的方法及系统
CN111563703A (zh) 项目管理系统、方法、计算机设备和计算机可读存储介质
George-Williams et al. Extending the survival signature paradigm to complex systems with non-repairable dependent failures
CN105868956A (zh) 一种数据处理方法及装置
CN109828750A (zh) 自动配置数据埋点的方法、装置、电子设备及存储介质
CN113283936A (zh) 一种销量预测方法、销量预测装置及电子设备
CN109213729A (zh) 结果驱动的案例管理
CN111444073A (zh) 用于测试金融数据库性能的方法、装置和系统
CN110362481A (zh) 自动测试方法及终端设备
CN104335161B (zh) 使用图对网络鲁棒性的有效评估
CN112882956A (zh) 一种通过数据组合计算自动生成全场景自动化测试案例的方法、装置、存储介质及电子设备
CN112631889A (zh) 针对应用系统的画像方法、装置、设备及可读存储介质
CN116308826A (zh) 保险产品上线方法、装置、设备及存储介质
CN109767333A (zh) 选基方法、装置、电子设备及计算机可读存储介质
CN115796585A (zh) 一种企业经营风险评估方法及系统
Le Lay et al. Automated generation of patient population for discrete-event simulation using process mining

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination