CN115658337A - 一种消息全生命周期处理方法及分布式消息系统 - Google Patents

Abstract

本发明公开了一种消息全生命周期处理方法及分布式消息系统，方法包括：获取外部系统下发消息，投递所述消息到消息队列；从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；对所述提交报告进行入库保存；获取运营商的消息回执；提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。本发明通过消息队列实现消息的流转，可以解决由于数据库写入的性能瓶颈，影响消息下发的速度的问题；并对提交报告的入库保存，进而通过提取所述入库保存的提交报告与消息回执进行匹配,能够解决集群模式下消息回执的匹配问题，可广泛应用于通信技术领域。

Description

一种消息全生命周期处理方法及分布式消息系统

技术领域

本发明涉及通信技术领域，尤其是一种消息全生命周期处理方法及分布式消息系统。

背景技术

分布式消息系统需要处理从消息下发、提交报告返回、消息回执返回、回执匹配以及消息入库等等的操作。由于系统是分布式的，消息从下发到入库，是由不同的模块去负责。需要保证消息在多个模块间流转时，消息不丢失；消息回执返回时，提交报告要能和消息回执匹配得上；能够做到水平扩容，提升系统整体性能；出现单点问题时，整个系统依旧正常运行。

而现有技术为了保证消息不丢失，会先将消息保存入数据库，再将消息发送到运营商。运营商返回的提交报告会保存在内存。等运营商的消息回执返回后，会和内存中的提交报告进行匹配，最终得到这条消息完整的信息。但是现有技术存在以下问题：

1、消息回执匹配的模块，只能单点部署。因为提交报告是放在模块的内存中，如果将模块进行集群部署的话，消息回执返回后，就可能匹配不上提交报告。

2、消息先保存入数据库，会让消息下发的速度受到写入数据库性能影响。

发明内容

有鉴于此，本发明实施例提供了一种高效的，一种消息全生命周期处理方法及分布式消息系统。

一方面，本发明实施例提供了一种消息全生命周期处理方法，包括：

获取外部系统下发消息，投递所述消息到消息队列；

从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；

对所述提交报告进行入库保存；

获取运营商的消息回执；

提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。

可选地，所述获取运营商的响应结果，生成提交报告，包括：

获取运营商的响应结果，与所述消息组合，生成提交报告；

其中，所述提交报告包括终端号、消息内容、消息id和消息响应结果。

可选地，还包括：

投递所述提交报告到消息队列。

可选地，所述对所述提交报告进行入库保存，包括：

将所述提交报告存储到数据库；

和，将所述提交报告保存到分布式缓存。

可选地，还包括：

投递所述消息回执到消息队列。

可选地，所述提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息，包括：

提取所述入库保存的所述提交报告；

其中，所述提交报告包括终端号、消息内容、消息id和消息响应结果；

从所述消息队列消费所述消息回执；

其中，所述消息回执包括消息id和最终送达结果；

通过所述消息id，对所述消息回执和所述提交报告进行匹配，生成所述消息的完整信息；

其中，所述完整信息包括终端号、消息内容、消息id和最终送达结果。

可选地，还包括：

将所述完整信息存储到数据库。

第二方面，本发明实施例提供了一种消息全生命周期处理系统，包括：

请求接收模块，用于获取外部系统下发的消息请求，投递所述消息请求到消息队列；

渠道对接模块，用于从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；和，获取运营商的消息回执；

数据入库模块，用于对所述提交报告进行入库保存；

回执匹配模块，用于提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。

另一方面，本发明实施例提供了一种消息全生命周期处理装置，包括处理器以及存储器；

所述存储器用于存储程序；

所述处理器执行所述程序实现如前面所述的方法。

另一方面，本发明实施例提供了一种计算机可读存储介质，所述存储介质存储有程序，所述程序被处理器执行实现如前面所述的方法。

本发明实施例还公开了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器可以从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行前面的方法。

本发明的实施例首先获取外部系统下发消息，投递所述消息到消息队列；从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；对所述提交报告进行入库保存；获取运营商的消息回执；提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。本发明通过消息队列实现消息的流转，实现了消息下发和提交报告入库保存的隔离，进而能够实现消息下发与提交报告入库互不影响的进行，可以解决由于数据库写入的性能瓶颈，影响消息下发的速度的问题；并对提交报告的入库保存，进而通过提取所述入库保存的提交报告与消息回执进行匹配,能够解决集群模式下消息回执的匹配问题。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的消息全生命周期处理方法的整体步骤流程示意图；

图2为本发明实施例提供的分布式消息系统的示意图；

图3为本发明实施例提供的消息全生命周期处理装置的示意图；

图4为本发明实施例提供的消息下发流程的时序示意图；

图5为本发明实施例提供的回执返回以及匹配流程的时序示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

为了使本申请内容及技术方案更加清楚明白，对相关术语及含义进行说明：

消息的全生命周期：消息下发、提交报告返回、消息回执返回、回执匹配以及消息入库。这些流程组合在一起就是消息的全生命周期。

消息下发：消息从消息系统下发到运营商上。

提交报告：消息下发到运营商，运营商接收到消息后会返回响应结果，消息系统会将响应结果和消息本身组合，生成提交报告。提交报告包含终端号、消息内容、消息id以及消息响应结果。

消息回执：消息送达给到终端用户后，运营商会返回消息的最终送达结果。包含消息id以及最终送达结果。

回执匹配：由于消息回执只包含消息id以及消息状态。需要将消息回执和提交报告通过消息id进行匹配，才能得到这条消息完整的信息：终端号、消息内容、消息id、最终送达结果。

针对现有技术存在的问题，一方面，本发明提供了一种消息全生命周期处理方法，如图1所示，方法包括以下步骤：

S100、获取外部系统下发消息，投递消息到消息队列；

S200、从消息队列消费消息，发送消息到运营商；获取运营商的响应结果，生成提交报告；

需要说明的是，获取运营商的响应结果，生成提交报告，包括：获取运营商的响应结果，与消息组合，生成提交报告；其中，提交报告包括终端号、消息内容、消息id和消息响应结果。

一些实施例中，还包括：投递提交报告到消息队列。

S300、对提交报告进行入库保存；

需要说明的是，对提交报告进行入库保存，包括：将提交报告存储到数据库；和，将提交报告保存到分布式缓存。

具体地，一些实施例中，先消费消息队列的提交报告，再对提交报告进行入库保存。

S400、获取运营商的消息回执；

一些实施例中，还包括：投递消息回执到消息队列。

S500、提取入库保存的提交报告与消息回执进行匹配，生成消息的完整信息。

需要说明的是，提取入库保存的提交报告；其中，提交报告包括终端号、消息内容、消息id和消息响应结果；从消息队列消费消息回执；其中，消息回执包括消息id和最终送达结果；通过消息id，对消息回执和提交报告进行匹配，生成消息的完整信息；其中，完整信息包括终端号、消息内容、消息id和最终送达结果。

一些实施例中，还包括：将完整信息存储到数据库。

另一方面，参照图2，本发明实施例提供了一种分布式消息系统600，包括请求接收模块610、渠道对接模块620、数据入库模块630和回执匹配模块640；请求接收模块610，用于获取外部系统下发的消息请求，投递消息请求到消息队列；渠道对接模块620，用于从消息队列消费消息，发送消息到运营商；获取运营商的响应结果，生成提交报告；和，获取运营商的消息回执；数据入库模块630，用于对提交报告进行入库保存；回执匹配模块640，用于提取入库保存的提交报告与消息回执进行匹配，生成消息的完整信息。

本发明方法实施例的内容均适用于本系统实施例，本系统实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法达到的有益效果也相同。

参照图3，本发明实施例的另一方面还提供了一种消息全生命周期处理装置700，包括处理器710以及存储器720；存储器710用于存储程序；处理器720执行程序实现如前面的方法。

本发明方法实施例的内容均适用于本装置实施例，本装置实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法达到的有益效果也相同。

本发明实施例的另一方面还提供了一种计算机可读存储介质，存储介质存储有程序，程序被处理器执行实现如前面的方法。

本发明方法实施例的内容均适用于本计算机可读存储介质实施例，本计算机可读存储介质实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法达到的有益效果也相同。

本发明实施例还公开了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器可以从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行前面的方法。

下面结合分布式消息系统详细描述本发明的消息全生命周期处理的实现原理，下述是对本发明技术方案的解释而不是限定：

本发明的分布式消息系统分为4个模块，请求接收模块(acceptor)、渠道对接模块(channel)、回执匹配模块(match-report)以及数据入库模块(repository)。模块之间通过消息队列进行消息流转。

请求接收模块(acceptor)：负责接收外部系统发送过来的请求(即下发消息)，并将请求发送到消息队列。

渠道对接模块(channel)：负责从消息队列消费消息，并将消息发送给运营商，接收运营返回的响应结果，以及消息回执。

回执匹配模块(match-report)：负责将channel返回的提交报告和消息回执进行匹配，生成这条消息的完整信息。

数据入库模块(repository)：负责将提交报告和完整信息保存到数据库。

如图4所示，基于分布式消息系统的消息下发流程如下：

步骤1：外部系统下发消息给acceptor模块；

步骤2：accptor模块接收到数据后，将消息投递到消息队列；

步骤3：channel模块会从消息队列消费消息；

步骤4：channel模块将消息发送到运营商；

步骤5：运营商会返回响应；

步骤6：channel模块生成提交报告后；

步骤7：channel模块将提交报告投递到消息队列；

步骤8：repository模块消费消息队列的提交报告；

步骤8.1：repository模块将提交报告入库；

步骤8.2：repository模块将提交报告保存到分布式缓存，用于消息回执匹配。

其中，先将提交报告投递到消息队列，再同时进行入库以及保存到分布式缓存。即步骤8.1和8.2是同时进行。

如图5所示，基于分布式消息系统的回执返回以及匹配流程如下：

步骤1：运营商将消息送达终端用户后，会给channel模块返回消息回执；

步骤2：channel模块拿到消息回执后，会将消息回执投递到消息队列；

步骤3：由match-report模块消费消息回执；

步骤4：match-report模块根据消息回执从分布式缓存中获取提交报告；

步骤5：match-report模块将消息回执和提交报告进行匹配。匹配完成后，生成这条消息完整的信息；

步骤6：match-report模块将这条消息完整的信息投递到消息队列；

步骤7：repository模块从消息队列消费消息；

步骤8：repository模块将完整信息入库。

在一些具体实施例中，以短信下发流程为例：

1)acceptor模块先接收到短信的消息体，包含手机号码、短信内容。将短信的消息体投递到消息队列RocketMQ中。

2)channel模块从RocketMQ中消费消息，将短信的消息体发送给运营商。

3)运营商返回响应，channel模块生成提交报告，包含手机号码、短信内容、消息id。

4)channel模块将提交报告投递到RocketMQ，repository模块拿到提交报告后，写入mysql数据库。同时，channel模块将提交报告保存到redis(分布式缓存)中。

5)等运营商将消息回执返回channel模块后，channel从消息回执中，拿到消息id，去redis中找到对应的提交报告。

6)将消息回执和提交报告进行匹配，得到完整的内容：手机号码、短信内容、消息id以及短信最终送达结果。

7)channel模块将完整的短信内容发送到RocketMQ，由repository模块从RocketMQ消费消息并写入mysql数据库。

综上所述，本发明基于消息队列的分布式架构设计；通过消息队列实现了，消息下发与消息入库(提交报告入库，提交报告包括消息内容和消息id等)的分离，其中，在多消息的处理流程中，由于消息下发和入库的隔离，前面消息的入库并不会影响后续消息下发的处理，进而实现消息下发和消息入库的同时进行，提高消息处理效率；通过分布式缓存以及消息队列实现了集群模式下消息回执的匹配。最终实现了消息全生命周期的处理。通过本发明的技术方案可以解决分布式消息系统的消息回执匹配问题、性能问题以及水平扩容的问题。本发明的有益效果包括：

1、解决了集群模式下消息回执的匹配问题；

2、能够实现消息下发和数据入库同时进行且互不影响，提高消息的处理效率，可以解决由于数据库写入的性能瓶颈，影响消息的下发速度的问题；

3、支持通过水平扩容来提升系统的整体性能。

在一些可选择的实施例中，在方框图中提到的功能/操作可以不按照操作示图提到的顺序发生。例如，取决于所涉及的功能/操作，连续示出的两个方框实际上可以被大体上同时地执行或所述方框有时能以相反顺序被执行。此外，在本发明的流程图中所呈现和描述的实施例以示例的方式被提供，目的在于提供对技术更全面的理解。所公开的方法不限于本文所呈现的操作和逻辑流程。可选择的实施例是可预期的，其中各种操作的顺序被改变以及其中被描述为较大操作的一部分的子操作被独立地执行。

此外，虽然在功能性模块的背景下描述了本发明，但应当理解的是，除非另有相反说明，所述的功能和/或特征中的一个或多个可以被集成在单个物理装置和/或软件模块中，或者一个或多个功能和/或特征可以在单独的物理装置或软件模块中被实现。还可以理解的是，有关每个模块的实际实现的详细讨论对于理解本发明是不必要的。更确切地说，考虑到在本文中公开的装置中各种功能模块的属性、功能和内部关系的情况下，在工程师的常规技术内将会了解该模块的实际实现。因此，本领域技术人员运用普通技术就能够在无需过度试验的情况下实现在权利要求书中所阐明的本发明。还可以理解的是，所公开的特定概念仅仅是说明性的，并不意在限制本发明的范围，本发明的范围由所附权利要求书及其等同方案的全部范围来决定。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。

计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。

以上是对本发明的较佳实施进行了具体说明，但本发明并不限于所述实施例，熟悉本领域的技术人员在不违背本发明精神的前提下还可做出种种的等同变形或替换，这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (10)

1.一种消息全生命周期处理方法，其特征在于，包括：

获取外部系统下发消息，投递所述消息到消息队列；

从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；

对所述提交报告进行入库保存；

获取运营商的消息回执；

提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。

2.根据权利要求1所述的一种消息全生命周期处理方法，其特征在于，所述获取运营商的响应结果，生成提交报告，包括：

获取运营商的响应结果，与所述消息组合，生成提交报告；

其中，所述提交报告包括终端号、消息内容、消息id和消息响应结果。

3.根据权利要求2所述的一种消息全生命周期处理方法，其特征在于，还包括：

投递所述提交报告到消息队列。

4.根据权利要求1所述的一种消息全生命周期处理方法，其特征在于，所述对所述提交报告进行入库保存，包括：

将所述提交报告存储到数据库；

和，将所述提交报告保存到分布式缓存。

5.根据权利要求1所述的一种消息全生命周期处理方法，还包括：

投递所述消息回执到消息队列。

6.根据权利要求5所述的一种消息全生命周期处理方法，其特征在于，所述提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息，包括：

提取所述入库保存的所述提交报告；

其中，所述提交报告包括终端号、消息内容、消息id和消息响应结果；

从所述消息队列消费所述消息回执；

其中，所述消息回执包括消息id和最终送达结果；

通过所述消息id，对所述消息回执和所述提交报告进行匹配，生成所述消息的完整信息；

其中，所述完整信息包括终端号、消息内容、消息id和最终送达结果。

7.根据权利要求1所述的一种消息全生命周期处理方法，其特征在于，还包括：

将所述完整信息存储到数据库。

8.一种分布式消息系统，其特征在于，包括：

请求接收模块，用于获取外部系统下发的消息请求，投递所述消息请求到消息队列；

渠道对接模块，用于从所述消息队列消费所述消息，发送所述消息到运营商；获取运营商的响应结果，生成提交报告；和，获取运营商的消息回执；

数据入库模块，用于对所述提交报告进行入库保存；

回执匹配模块，用于提取所述入库保存的所述提交报告与所述消息回执进行匹配，生成所述消息的完整信息。

9.一种消息全生命周期处理装置，其特征在于，包括处理器以及存储器；

所述存储器用于存储程序；

所述处理器执行所述程序实现如权利要求1至7中任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述存储介质存储有程序，所述程序被处理器执行实现如权利要求1至7中任一项所述的方法。

Images