CN108833298A - 报文分组发送方法、装置以及存储介质 - Google Patents

Abstract

本发明提供了一种报文分组发送方法、装置以及存储介质。该方法包括：根据报文字段、字段值、报文构建关联关系映射表，根据所述关联关系映射表和关键字段值构建至少两个目标报文组，使用时序调度控制对所述目标报文组组内报文进行顺序发送，对所述目标报文组组间报文进行并行发送。本发明提供的报文分组发送方法和装置，既保证了相关报文的时序，又使得不相关报文能够并行发送，显著提高了测试环境中报文模拟发送的效率。

Description

报文分组发送方法、装置以及存储介质

技术领域

本发明涉及报文发送领域，更为具体而言，涉及一种报文分组发送方法、装置以及存储介质。

背景技术

在金融领域，由于业务比较复杂，IT(Information Technology，信息技术)系统一般由渠道层、接入层、总线、核心系统等组成。账务类数据一般都存储在核心系统中，核心系统稳定正确的运行是保证金融系统稳定的核心关键。

由于核心系统经常需要进行新增功能或变更功能，为了能更好的保证老功能的正确性，需要大量的测试。传统方法是需要进行大量的人工或自动化回归测试，另外一种方法是模拟生产，将生产上某天的核心系统实际请求报文同步复制下来，然后在测试环境模拟当天的交易情况，验证系统功能的正确性。

由于生产上一天的交易一般都比较大(一般都在百万级以上)，而且有些不同请求报文之间是有先后发生顺序的，在现有技术中，未记载有对报文进行分组及模拟时序控制的方案。基于金融报文的特征，如何快速将大批量生产报文进行回放，既能够保证请求报文原有时序，又能够尽可能快速的将报文模拟发送出去是需要解决的一个重要问题。

发明内容

本发明的目的在于提供一种报文分组发送方法、装置以及存储介质，通过按关联性对报文进行分组，对具有关联性的组内报文进行顺序发送，对不具有关联性的组间报文进行并行发送，实现既保证生产时序，又尽可能快速将报文模拟发送出去。

本发明实施例的第一方面，提供了一种报文分组发送方法，所述方法包括：按关联性对待发送的报文进行分组，得到至少两个目标报文组；使用时序调度控制对所述目标报文组进行组间并行发送。

具体地，所述待发送的报文包含与报文关联性相关的报文字段、字段值。

进一步地，所述按关联性对待发送的报文进行分组包括：根据所述报文字段、字段值和报文构建关联关系映射表；根据关联关系映射表和关键字段值构建至少两个目标报文组。

具体地，在所述构建关联关系映射表过程中，如果同一报文字段、同一字段值在一个报文中出现多次，所述关联关系映射表只记录一次。

进一步地，所述根据关联关系映射表和关键字段值构建目标报文组包括：构建空目标报文组；读取关键字段列表及关键字段值；根据关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；将所述第一暂放报文组中的报文放进目标报文组。

进一步地，所述根据关联关系映射表和关键字段值构建目标报文组还包括：将与所述第一暂放报文组中的报文关联的报文放进目标报文组。

进一步地，，所述将与所述第一暂放报文组中的报文关联的报文放进目标报文组包括：

S1、根据所述关键字段列表得到第一暂放报文组中报文的关键字段值集合；

S2、根据所述关键字段值集合中的关键字段值、所述关联关系映射表构建包含所述关键字段值集合中的关键字段值的报文的第二暂放报文组；

S3、判断所述第二暂放报文组中的报文是否全部包含在目标报文组中，若是，对所述关键字段值集合中的下一关键字段值，执行步骤S2；若否，则执行步骤S4；

S4、将所述第二暂放报文组中的报文放进目标报文组。

所述使用时序调度控制对所述目标报文组进行组间并行发送包括：

根据发送者的实际个数，对各目标报文组的报文，按照各目标报文组之间并行发送的方式进行发送。

进一步地，对于每一个目标报文组内的报文，进行顺序发送。

本发明实施例的第二方面，提供了一种报文分组发送装置，所述装置包括：报文分组模块，用于按关联性对待发送的报文进行分组，得到至少两个目标报文组；报文发送模块，使用时序调度控制对所述目标报文组进行组间并行发送。

具体地，所述报文分组发送装置中待发送的报文包含以下信息：与报文关联性相关的报文字段、字段值。

进一步地，所述报文分组模块包括：关联分析子模块，用于根据所述报文字段、字段值和报文构建关联关系映射表；报文分组实现子模块，用于根据关联关系映射表和关键字段值构建至少两个目标报文组。

具体地，在关联分析子模块构建关联关系映射表的过程中，如果同一报文字段、同一字段值在一个报文中出现多次，所述关联关系映射表只记录一次。

进一步地，所述报文分组实现子模块包括：目标报文组构建单元，用于构建空目标报文组；关键字段读取单元，用于读取关键字段列表及关键字段值；第一暂放报文组构建单元，用于根据所述关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；目标报文组存储单元，用于存储目标报文组；第一报文转移单元，用于将所述第一暂放报文组中的报文放进目标报文组。

进一步地，所述报文分组实现子模块还包括：关联报文获取单元，用于获取与所述第一暂放报文组中的报文关联的报文，将所述获取的报文放进目标报文组。

具体地，所述关联报文获取单元包括：

报文关键字段值获取子单元，用于根据所述关键字段列表得到第一暂放报文组中报文的关键字段值集合；

第二暂放报文组构建子单元，用于根据所述关键字段值集合中的关键字段值、所述关联关系映射表构建包含所述关键字段值集合中的关键字段值的报文的第二暂放报文组；

判断子单元，用于判断所述第二暂放报文组中的报文是否全部包含在目标报文组中；

第二报文转移子单元，用于将所述第二暂放报文组中的报文放进目标报文组。

进一步地，所述报文发送模块包括：

发送者数量获取子模块，用于获取发送者的实际个数；

组内报文发送子模块，用于对每一个目标报文组内的报文，进行顺序发送；

时序调度控制子模块，用于根据获取的发送者的实际个数，对多个组内报文发送子模块进行时序调度控制，来执行下述操作：对各目标报文组的报文，按照各目标报文组之间并行发送、目标报文组之内的报文顺序发送的方式进行发送。

本发明实施例的第三方面，提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行实现本发明实施例所述的任一种报文分组发送方法。

本发明的有益效果是：通过本发明提供的报文分组发送方法、装置以及存储介质，既能保证报文原有时序，又能使得不相关的报文能够并行发送，实现大批量报文的快速发送。

附图说明

图1是根据本发明实施例的报文分组发送方法的流程示意图；

图2是根据本发明实施例的关联关系映射示意图；

图3是根据本发明实施例的构建目标报文组的流程图；

图4是根据本发明实施例的将第一暂放报文组的关联报文放进目标报文组的流程图；

图5是根据本发明实施例的目标报文组组间并行发送示意图；

图6为根据本发明实施例的报文分组发送装置的装置示例框图；

图7为根据本发明实施例的报文分组发送装置的另一装置示例框图。

具体实施方式

为了便于理解本发明技术方案的各个方面、特征以及优点，下面结合附图对本发明进行具体描述。应当理解，下述的各种实施方式只用于举例说明，而非用于限制本发明的保护范围。

图1是根据本发明实施例的一种报文分组发送方法的流程示意图。参照图1，所述报文分组发送方法如下：

S11：按照关联性对待发送的报文进行分组，得到至少两个目标报文组；

S12：使用时序调度控制对所述目标报文组进行组间并行发送。

具体地，所述待发送的报文包含但不限于以下信息：报文字段、字段值，所述报文字段与字段值与报文关联性相关。具体而言，如果一个报文的关键字段值出现在不同报文中，就认为所述的不同报文是相关的。换句话说，不同的报文包含相同的关键字段，则所述不同的报文是相关的。

进一步地，在处理S11中，所述按关联性对待发送的报文进行分组可以包括：根据所述报文字段、字段值和报文构建关联关系映射表；根据关联关系映射表和关键字段值构建至少两个目标报文组。图2示出了根据本发明实施例的一种关联关系映射表的示意图。现参照图2，详细描述根据所述报文字段、字段值和报文构建关联关系映射表的过程。

具体地，从待发送的报文集合中读取一个报文，读取所述报文中所有报文字段的字段值，按照“字段-值-报文”的格式记录在关联关系映射表中。例如，报文1中的报文字段为字段1、字段2，字段1的字段值为在字段值1，字段2的字段值为字段值2，则报文1与报文1中的字段、字段值可建立如图2所示的关联映射。在金融领域，进行模拟生产测试时，将生产上某天的核心系统实际请求报文同步复制下来，该实际请求报文的集合即可作为一个待发送的报文集合，可以从该实际请求报文集合中读取一个报文，然后读取报文中每个报文字段的字段值，按照“字段-值-报文”的格式记录在关联关系映射表中。

具体地，例如，如果同一报文字段、同一字段值在一个报文中出现了多次，在关联关系映射表中可以只记录一次。对所有报文都进行上述处理，完成关联关系映射表的构建，所述关联关系映射表可用于后续的报文分组。

构建好关联关系映射表之后，根据所述关联关系映射表和关键字段值构建至少两个目标报文组。具体而言，所述关键字段值可以为预先设定的，也可以为根据报文的应用业务特点确定。例如，在金融领域，金融报文的账号、客户号等通常为分组的关键字段，则账号号码、客户号号码即为关键字段值，如果相同的账号号码或客户号号码出现在不同的报文中，则这些报文是相关的。对报文按关联性进行分组得到至少两个目标报文组之后，就可以使用时序调度控制对所述目标报文组进行组间并行发送。

进一步地，所述根据关联关系映射表和关键字段值构建目标报文组包括：构建空目标报文组；读取关键字段列表及关键字段值；根据关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；将所述第一暂放报文组中的报文放进目标报文组。图3是根据本发明实施例的一种构建目标报文组的流程图。现参照图3，详细描述根据关联关系映射表和关键字段值构建目标报文组的过程。该过程包括如下处理：

S31：获取关联关系映射表。具体地，获取根据本发明实施例构建的关联关系映射表。

S32：构建空目标报文组。具体地，所述空目标报文组用于存放分组后的报文。

S33：读取关键字段列表和关键字段值。

S34：构建第一暂放报文组。具体地，根据读取的关键字段列表和关键字段值获取所有的关键字段值，对于每一个关键字段值，从构建的关联关系映射表中查找包含所述关键字段值的报文，所有包含所述关键字段值的报文可以构建成为第一暂放报文组。

S35：将第一暂放报文组的报文放进目标报文组。可选地，若第一暂放报文组中的报文没有关联报文，则将第一暂放报文组的报文放进目标报文组后，即可得到一个完整的目标报文组，无需进行步骤S36，步骤S36为可选步骤。

S36：将第一暂放报文组的关联报文放进目标报文组。

图4示出了一种将第一暂放报文组的关联报文放进目标报文组的流程图。，进一步地，参照图4，S36可以根据以下步骤递归实现：

S361、获得报文包含的关键字段值。具体而言，对于第一暂放报文组中的报文，根据读取的关键字段列表获取报文所有的关键字段值，与所述报文对应的关键字段值集合。

S362、构建第二暂放报文组。具体而言，对于与报文对应的字段值集合中的字段值，从关联关系映射表中查找包含所述关键字段值的报文，查找到的报文可构建成为第二暂放报文组。

S363、判断第二暂放报文组中的报文是否已经全部包含在目标报文组中，若是，该处理流程结束。具体而言，若是，目标报文组中已经包含第一暂放报文组中报文的所有关联的报文，所述目标报文组已经构建完成，无需将第二暂放报文组中的报文放进目标报文组中。

若否，则执行S364。

S364、将第二暂放报文组中没有包含在目标报文组中的报文放进目标报文组。

具体而言，将第一暂放报文组的关联报文放进目标报文组是一个多层递归的过程。在步骤S362构建第二暂放报文组的过程中，对每一个报文对应的关键字段值集合中的每一个关键字段值，从关联关系映射表中查找包含所述关键字段值的报文，查找到的所有报文可构建成为第二暂放报文组。对第二暂放报文组中的报文，重复步骤S361到步骤S364，查找与第二暂放报文组中的报文相关联的报文，对于查找到的与第二暂放报文组中的报文相关联的报文，一直重复步骤S361到步骤S364直到目标报文组中没有新报文加入为止。

可选的，将第一暂放报文组的关联报文放进目标报文组也可以通过其他递归方式来实现。例如：对第一暂放报文组中一个报文，查找该报文所有关联的报文，对所述查找到的报文递归查找与所述查找到的报文有关联的报文。然后查找下一报文的所有关联报文，直到第一暂放报文组中的所有报文的关联报文都被查找完毕为止。将所有具有关联的报文分为一组，即可获得一个目标报文组。对使用如何递归的方式，本发明不做限定，所述的例子仅仅是为了说明。

在构建了一个目标报文组之后，从剩余的待发送的报文中取出一条报文，根据关键字段列表读取该报文包含的关键字段值，按照本发明实施例的方法，根据所述的关键字段值和关联关系映射表构建新的目标报文组，直到待发送的报文中没有剩余报文为止。

图5是根据本发明实施例的一种目标报文组组间并行发送示意图。现参照图5，详细说明图1中的步骤S12使用时序调度控制对所述目标报文组进行组间并行发送。

将待发送的报文分成若干目标报文组后，使用时序调度控制对目标报文组进行组间并行发送。具体的，例如：假设待发送的报文被分成多个目标报文组，发送者的实际个数为N个，则调度者根据发送者的实际个数N，建立N个发送队列。然后在目标报文组中，任意选择N个目标报文组，建立和N个发送队列的对应关系，并将报文发送到对应的发送队列，例如将目标报文组1到目标报文组N中的报文按照组间并行的方式分别发送到发送者e1到发送者eN对应的发送队列。每一个目标报文组的报文全部发送到发送队列中后，调度者给对应的发送者发送一个END_GROUP控制消息，表明该组报文已经调度完毕。当对应的发送者处理到END_GROUP消息时，表明该组报文已经处理完成，发送者通知调度者可以发送下一组报文。当调度者分发完所有分组后，向所有队列发送END_GROUPS消息，表明本次发送结束。以这种方式，能够使得目标报文组的组间报文进行并行发送，并且通过控制消息能够保证发送者工作处于均匀状态，提高并行速度。

进一步地，在对目标报文组的组内报文进行发送时，按照报文发生的时间进行排序，对组内报文进行顺序发送。例如：目标报文组1中的报文a,b,c,d按照报文发送的时间进行排序，然后依次发送到发送者e1对应的发送队列。以这种方式，保证了报文的时序。

图6为根据本发明实施例的一种报文分组发送装置的装置示例框图。现参照图6，详细描述本发明实施例的报文分组发送装置。

如图6所示，所述报文分组发送装置60包括：报文分组模块61和报文发送模块62。所述报文分组模块61用于按关联性对待发送的报文进行分组，得到至少两个目标报文组；所述报文发送模块62使用时序调度控制对所述目标报文组进行组间并行发送。

具体地，所述待发送的报文包含但不限于以下信息：报文字段、字段值，所述报文字段与字段值与报文关联性相关。具体而言，如果一个报文的关键字段值出现在不同报文中，就认为所述的不同报文是相关的。

图7示出了本发明实施例所述的报文分组发送装置的另一种实施方式。如图7所示，报文分组模块61包括：关联分析子模块611和报文分组实现子模块612，所述关联分析子模块611用于根据所述报文字段、字段值和报文构建关联关系映射表；所述报文分组实现子模块612用于根据关联关系映射表和关键字段值构建至少两个目标报文组。

具体地，在关联分析子模块构建关联关系映射表的过程中，如果同一报文字段、同一字段值在一个报文中出现多次，所述关联关系映射表只记录一次。

进一步地，在本实施例的一种实现方式中，报文分组实现子模块612包括：目标报文组构建单元，用于构建空目标报文组；关键字段读取单元，用于读取关键字段列表及关键字段值；第一暂放报文组构建单元，用于根据所述关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；目标报文组存储单元，用于存储目标报文组；第一报文转移单元，用于将所述第一暂放报文组中的报文放进目标报文组。

进一步地，在本实施例的一种实现方式中，报文分组实现子模块612还包括：关联报文获取单元，用于获取与所述第一暂放报文组中的报文关联的报文，将所述获取的报文放进目标报文组。

进一步地，在实施例的一种实现方式中，关联报文获取单元包括：报文关键字段值获取子单元，用于根据所述关键字段列表得到第一暂放报文组中报文的关键字段值集合；第二暂放报文组构建子单元，用于根据所述关键字段值集合中的关键字段值、所述关联关系映射表构建包含所述关键字段值集合中的关键字段值的报文的第二暂放报文组；判断子单元，用于判断所述第二暂放报文组中的报文是否全部包含在目标报文组中；第二报文转移子单元，用于将所述第二暂放报文组中未包含在目标报文组中的报文放进目标报文组。

进一步地，在本实施例的一种实现方式中，报文发送模块62包括：发送者数量获取子模块621，用于获取发送者的实际个数；组内报文发送子模块622，用于对每一个目标报文组内的报文，进行顺序发送；时序调度控制子模块623，用于根据获取的发送者的实际个数，对多个组内报文发送子模块进行时序调度控制，来执行下述操作：对各目标报文组的报文，按照各目标报文组之间并行发送、目标报文组之内的报文顺序发送的方式进行发送。

所述领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置、模块、单元的具体工作过程，可以参考前述方法实施例中对应的过程，在此不再赘述。

根据本发明的实施例，还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行可以实现前述方法实施例中任一种方法。

本发明提供的一种报文分组发送方法和装置，能够通过按关联性对报文进行分组，对分组后的报文组使用时序调度控制报文组组内报文顺序发送，报文组组间报文并行发送，保证了具有关联的报文之间的时序，提高了不相关联的报文并行发送的速度。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (18)

1.一种报文分组发送方法，其特征在于，包括：

按关联性对待发送的报文进行分组，得到至少两个目标报文组；

使用时序调度控制对所述目标报文组进行组间并行发送。

2.根据权利要求1所述的方法，其特征在于，所述待发送的报文包含以下信息：

与报文关联性相关的报文字段、字段值。

3.根据权利要求2所述的方法，其特征在于，所述按关联性对待发送的报文进行分组包括：

根据所述报文字段、字段值和报文构建关联关系映射表；

根据关联关系映射表和关键字段值构建至少两个目标报文组。

4.根据权利要求3所述的方法，其特征在于，在所述构建关联关系映射表过程中，如果同一报文字段、同一字段值在一个报文中出现多次，所述关联关系映射表只记录一次。

5.根据权利要求3所述的方法，其特征在于，所述根据关联关系映射表和关键字段值构建目标报文组包括：

构建空目标报文组；

读取关键字段列表及关键字段值；

根据关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；

将所述第一暂放报文组中的报文放进目标报文组。

6.根据权利要求3所述的方法，其特征在于，所述根据关联关系映射表和关键字段值构建目标报文组还包括：

将与所述第一暂放报文组中的报文关联的报文放进目标报文组。

7.根据权利要求6所述的方法，其特征在于，将与所述第一暂放报文组中的报文关联的报文放进目标报文组包括：

S1、根据所述关键字段列表得到第一暂放报文组中报文的关键字段值集合；

S2、根据所述关键字段值集合中的关键字段值、所述关联关系映射表构建包含所述关键字段值集合中的关键字段值的报文的第二暂放报文组；

S3、判断所述第二暂放报文组中的报文是否全部包含在目标报文组中，若是，对所述关键字段值集合中的下一关键字段值，执行步骤S2；若否，则执行步骤S4；

S4、将第二暂放报文组中没有包含在目标报文组中的报文放进目标报文组。

8.根据权利要求1所述的方法，其特征在于，所述使用时序调度控制对所述目标报文组进行组间并行发送包括：

根据发送者的实际个数，对各目标报文组的报文，按照各目标报文组之间并行发送的方式进行发送。

9.根据权利要求8所述的方法，其特征在于，

对于每一个目标报文组内的报文，进行顺序发送。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行以实现权利要求1至9任一项所述方法的步骤。

11.一种报文分组发送装置，其特征在于，包括，

报文分组模块，用于按关联性对待发送的报文进行分组，得到至少两个目标报文组；

报文发送模块，使用时序调度控制对所述目标报文组进行组间并行发送。

12.根据权利要求11所述的装置，其特征在于，所述报文分组发送装置中待发送的报文包含以下信息：

与报文关联性相关的报文字段、字段值。

13.根据权利要求12所述的装置，其特征在于，所述报文分组模块包括：

关联分析子模块，用于根据所述报文字段、字段值和报文构建关联关系映射表；

报文分组实现子模块，用于根据关联关系映射表和关键字段值构建至少两个目标报文组。

14.根据权利要求13所述的装置，其特征在于，在关联分析子模块构建关联关系映射表的过程中，如果同一报文字段、同一字段值在一个报文中出现多次，所述关联关系映射表只记录一次。

15.根据权利要求13所述的装置，其特征在于，所述报文分组实现子模块包括：

目标报文组构建单元，用于构建空目标报文组；

关键字段读取单元，用于读取关键字段列表及关键字段值；

第一暂放报文组构建单元，用于根据所述关联关系映射表构建包含所述关键字段值的报文的第一暂放报文组；

目标报文组存储单元，用于存储目标报文组；

第一报文转移单元，用于将所述第一暂放报文组中的报文放进目标报文组。

16.根据权利要求13所述的装置，其特征在于，所述报文分组实现子模块还包括：

关联报文获取单元，用于获取与所述第一暂放报文组中的报文关联的报文，将所述获取的报文放进目标报文组。

17.根据权利要求16所述的装置，其特征在于，所述关联报文获取单元包括：

报文关键字段值获取子单元，用于根据所述关键字段列表得到第一暂放报文组中报文的关键字段值集合；

第二暂放报文组构建子单元，用于根据所述关键字段值集合中的关键字段值、所述关联关系映射表构建包含所述关键字段值集合中的关键字段值的报文的第二暂放报文组；

判断子单元，用于判断所述第二暂放报文组中的报文是否全部包含在目标报文组中；

第二报文转移子单元，用于将所述第二暂放报文组中未包含在目标报文组中的报文放进目标报文组。

18.根据权利要求11所述的装置，其特征在于，所述报文发送模块包括：

发送者数量获取子模块，用于获取发送者的实际个数；

组内报文发送子模块，用于对每一个目标报文组内的报文，进行顺序发送；

时序调度控制子模块，用于根据获取的发送者的实际个数，对多个组内报文发送子模块进行时序调度控制，来执行下述操作：对各目标报文组的报文，按照各目标报文组之间并行发送、目标报文组之内的报文顺序发送的方式进行发送。