CN115103017A - 一种消息中间件处理系统及方法 - Google Patents
一种消息中间件处理系统及方法 Download PDFInfo
- Publication number
- CN115103017A CN115103017A CN202210663476.8A CN202210663476A CN115103017A CN 115103017 A CN115103017 A CN 115103017A CN 202210663476 A CN202210663476 A CN 202210663476A CN 115103017 A CN115103017 A CN 115103017A
- Authority
- CN
- China
- Prior art keywords
- message
- message middleware
- middleware
- messages
- different
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 18
- 238000000034 method Methods 0.000 title claims abstract description 11
- 238000004891 communication Methods 0.000 claims abstract description 11
- 238000012544 monitoring process Methods 0.000 claims abstract description 4
- 238000003860 storage Methods 0.000 claims description 9
- 238000003672 processing method Methods 0.000 claims description 6
- 238000009826 distribution Methods 0.000 claims description 4
- 238000003825 pressing Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 claims description 3
- 238000012795 verification Methods 0.000 claims description 3
- 238000011161 development Methods 0.000 abstract description 11
- 230000006872 improvement Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 230000008878 coupling Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 4
- 238000005859 coupling reaction Methods 0.000 description 4
- 238000003032 molecular docking Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000001503 joint Anatomy 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Landscapes
- Computer And Data Communications (AREA)
- Multi Processors (AREA)
Abstract
本发明公开了一种消息中间件处理系统及方法,包括:生产者系统,设有多种不同消息中间件的生产者;消费者系统,响应于多个业务系统的业务需求,向消息中间件系统发送调用请求;监听消息中间件系统中的不同消息中间件的消息队列的消息,将监听到的消息分发给对应的业务系统;消息中间件系统,用于接收并保存不同生产者对应的消息中间件的消息队列,响应于消费者系统的消息中间件调用请求,反馈相应的消息中间件的消息队列给所述消费者系统;还设置接收分发协议,并提供接收分发协议配置接口。本发明具有统一对接不同的消息中间件,减少代码的冗余,降低开发成本,能统一管理、处理、分发消息,解决多系统间消息中间件不一致导致通信困难等特点。
Description
技术领域
本发明涉及数据处理技术领域,特别是一种消息中间件处理系统及方法。
背景技术
在现有业务技术背景下,为提高业务灵活度及峰值处理能力,解决业务系统代码解耦性,提高客户使用系统过程中的体验度,因此系统和系统之间多使用消息中间件的形式进行业务对接。但市面上现有消息队列技术栈繁杂,各业务系统针对各自业务会选取不同消息队列对系统业务进行相关实现,因此在与多业务系统对接的业务服务中需要选用不同技术栈实施对接方案,从而增加了系统的维护性及维护成本。
还有多系统间消息中间件不一致导致通信困难,系统重复开发对接,造成开发成本的浪费,系统间容易产生耦合,远程调用时,数据传输的可靠性和高效性低。
发明内容
为了克服现有技术的系统间消息中间件不一致时通信困难,系统间容易产生耦合,现有消息队列技术栈繁杂,接入多种不同消息队列需要多种技术栈、重复开发对接、开发成本大等上述缺点,本发明的目的是提供一种消息中间件处理系统及方法。
本发明解决其技术问题所采用的技术方案是:一种消息中间件处理系统,包括:
生产者系统,设有多种不同消息中间件的生产者,不同生产者通过不同的配置信息和接口与消息中间件系统连接通信;
消费者系统,响应于多个业务系统的业务需求,向消息中间件系统发送调用请求;监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统,用于接收并保存不同生产者对应的消息中间件的消息队列,响应于消费者系统的消息中间件调用请求,反馈相应的消息中间件的消息队列给所述消费者系统;还设置接收分发协议,并提供接收分发协议配置接口。
作为本发明的进一步改进:所述生产者创建消息,且通过点对点模式或者广播模式将消息发送到对应的消息中间件所处的服务器上。
作为本发明的进一步改进:所述消息中间件系统还包括:接收不同生产者通过所述接收分发协议配置接口提交的根据所述接收分发协议确定的配置信息,及根据所述配置信息接收不同生产者提交的消息,压入对应的消息中间件的消息队列上。
作为本发明的进一步改进:所述接收分发协议包括:不同生产者对应的消息中间件的连接地址、验证数据、队列名、调用分发方法、交换器标识。
作为本发明的进一步改进:所述消息中间件系统,用于接收并保存不同消息中间件的消息队列包括:所述生产者系统与所述消息中间件系统建立连接后,消息中间件系统对不同生产者发送的消息进行分布式存储,并通知生产者消息发送成功。
作为本发明的进一步改进:所述消息中间件系统还包括:响应于所述消费者系统的调用请求,匹配相应的消息中间件对应的消息队列的消息。
作为本发明的进一步改进:所述消费者系统还包括:消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
作为本发明的进一步改进:所述消息中间件包括但不限于RocketMQ、kafka、RabbitMQ。
一种消息中间件处理方法,包括:
生产者系统中的不同生产者通过不同的配置信息与消息中间件系统建立通信连接后,消息中间件系统接收生产者创建的消息,且根据接收分发协议确定的配置信息接收不同生产者提交的信息,压入不同的消息中间件的消息队列上;
消费者系统响应于多个业务系统的业务需求,向消息中间件系统发送调用请求,监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统响应于消费者系统的调用请求,反馈相应的消息中间件的消息队列给所述消费者系统。
作为本发明的进一步改进:所述消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
与现有技术相比,本发明的有益效果是:
通过该消息中间件处理系统接入多种消息中间件,避免业务系统重复开发,降低业务系统之间的耦合;无需关注消息中间件的实现,只关注自身系统的业务逻辑即可,避免造成开发成本的浪费,避免了远程过程调用,保证了数据传输的可靠性和高效性。
通过该系统完成对消息队列的集合,支持消息队列扩展,可接入不同消息队列技术栈,对业务系统及系统之间进行解耦,解决多系统间消息中间件不一致导致的通信困难问题。
附图说明
图1为本发明系统的组成框图。
图2为本发明系统的流程图。
图3为本发明系统的消息结构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了解决现有技术中的系统间消息中间件不一致时通信困难,系统间容易产生耦合,现有消息队列技术栈繁杂,接入多种不同消息队列需要多种技术栈、重复开发对接、开发成本大等技术问题,以建立一套完成可行的业务对接系统与外部系统对接完成后续业务操作。现结合附图说明与实施例对本发明进一步说明:
实施例1:如图1-图3所示,本实施例公开了一种消息中间件处理系统,包括:
生产者系统,设有多种不同消息中间件的生产者,不同生产者通过不同的配置信息和接口与消息中间件系统连接通信;
消费者系统,响应于多个业务系统的业务需求,向消息中间件系统发送调用请求;监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统,用于接收并保存不同生产者对应的消息中间件的消息队列,响应于消费者系统的消息中间件调用请求,反馈相应的消息中间件的消息队列给所述消费者系统;还设置接收分发协议,并提供接收分发协议配置接口。
当生产者有消息生成,会发送其服务器上面的消息中间件的队列,消费者监听对应的队列,拉取消息;持久化到数据库中,防止消息的丢失,和重新发送消费,而后可根据业务系统需求,可将消息转换转发至已有的消息服务器,或通过微服务之间的调用来消费消息;在将消息数据发送给业务系统;发送成功后,有应答机制,反馈消息是否消费成功,将数据库中的消息更新状态。
通过该系统来统一对接不同的消息中间件。减少代码的冗余,降低了开发成本,能统一管理、处理消息,按需分发给对应的业务系统。减小业务系统的开发难度,只需关注于自己业务的实现。
采用消息的方式,可以避免不同系统间通信之间的差异,同时为分布式系统中其他系统提供了伸缩性和扩展性。降低了系统之间的耦合度,异步通信能力也使无需等待自己内部系统的操作,提供用户的体验性。
作为本发明的优选实施例:所述生产者创建消息,且通过点对点模式或者广播模式将消息发送到对应的消息中间件所处的服务器上。
作为本发明的优选实施例:所述消息中间件系统还包括:接收不同生产者通过所述接收分发协议配置接口提交的根据所述接收分发协议确定的配置信息,及根据所述配置信息接收不同生产者提交的消息,压入对应的消息中间件的消息队列上。
作为本发明的优选实施例:所述接收分发协议包括:不同生产者对应的消息中间件的连接地址、验证数据、队列名、调用分发方法、交换器标识。
作为本发明的优选实施例:所述消息中间件系统,用于接收并保存不同消息中间件的消息队列包括:所述生产者系统与所述消息中间件系统建立连接后,消息中间件系统对不同生产者发送的消息进行分布式存储,并通知生产者消息发送成功。
作为本发明的优选实施例:所述消息中间件系统还包括:响应于所述消费者系统的调用请求,匹配相应的消息中间件对应的消息队列上的消息。
作为本发明的优选实施例:所述消费者系统还包括:消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
作为本发明的优选实施例:所述消息中间件包括但不限于RocketMQ、kafka、RabbitMQ。
实施例2:一种消息中间件处理方法,包括:
生产者系统中的不同生产者通过不同的配置信息与消息中间件系统建立通信连接后,消息中间件系统接收生产者创建的消息,且根据接收分发协议确定的配置信息接收不同生产者提交的信息,压入不同的消息中间件的消息队列上;
消费者系统响应于多个业务系统的业务需求,向消息中间件系统发送调用请求,监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统响应于消费者系统的调用请求,反馈相应的消息中间件的消息队列给所述消费者系统。
作为本发明的优选实施例:所述消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
需要注意的是,图3中使用了流程图用来说明根据本申请的实施例所执行的操作。应当理解的是,前面或下面操作不一定按照顺序来精确地执行。相反,可以按照倒序或同时处理各种步骤。同时,或将其他操作添加到这些过程中,或从这些过程移除某一步或数步操作。
结合本文中公开的实施例描述的方法或算法的步骤可直接在硬件中、在由处理器执行的软件模块中、或在这两者的组合中体现。软件模块可驻留在RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动盘、CD-ROM、或本领域中所知的任何其他形式的存储介质中。示例性存储介质耦合到处理器以使得该处理器能从/向该存储介质读取和写入信息。在替换方案中,存储介质可以被整合到处理器。处理器和存储介质可驻留在ASIC中。ASIC可驻留在用户终端中。在替换方案中,处理器和存储介质可作为分立组件驻留在用户终端中。
以上所述仅是本发明的具体实施例,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种消息中间件处理系统,其特征在于,包括:
生产者系统,设有多种不同消息中间件的生产者,不同生产者通过不同的配置信息和接口与消息中间件系统连接通信;
消费者系统,响应于多个业务系统的业务需求,向消息中间件系统发送调用请求;监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统,用于接收并保存不同生产者对应的消息中间件的消息队列,响应于消费者系统的消息中间件调用请求,反馈相应的消息中间件的消息队列给所述消费者系统;还设置接收分发协议,并提供接收分发协议配置接口。
2.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述生产者创建消息,且通过点对点模式或者广播模式将消息发送到对应的消息中间件所处的服务器上。
3.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述消息中间件系统还包括:接收不同生产者通过所述接收分发协议配置接口提交的根据所述接收分发协议确定的配置信息,及根据所述配置信息接收不同生产者提交的消息,压入对应的消息中间件的消息队列上。
4.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述接收分发协议包括:不同生产者对应的消息中间件的连接地址、验证数据、队列名、调用分发方法、交换器标识。
5.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述消息中间件系统,用于接收并保存不同消息中间件的消息队列包括:所述生产者系统与所述消息中间件系统建立连接后,消息中间件系统对不同生产者发送的消息进行分布式存储,并通知生产者消息发送成功。
6.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述消息中间件系统还包括:响应于所述消费者系统的调用请求,匹配相应的消息中间件对应的消息队列上的消息。
7.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述消费者系统还包括:消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
8.根据权利要求1所述的一种消息中间件处理系统,其特征在于,所述消息中间件包括但不限于RocketMQ、kafka、RabbitMQ。
9.一种消息中间件处理方法,其特征在于,包括:
生产者系统中的不同生产者通过不同的配置信息与消息中间件系统建立通信连接后,消息中间件系统接收生产者创建的消息,且根据接收分发协议确定的配置信息接收不同生产者提交的信息,压入不同的消息中间件的消息队列上;
消费者系统响应于多个业务系统的业务需求,向消息中间件系统发送调用请求,监听消息中间件系统中的不同消息中间件的消息队列上的消息,将监听到的消息分发给对应的业务系统;
消息中间件系统响应于消费者系统的调用请求,反馈相应的消息中间件的消息队列给所述消费者系统。
10.根据权利要求9所述的一种消息中间件处理方法,其特征在于,所述消费者系统将监听到对应消息队列的消息存储到数据库中,及将监听到的消息成功发送给业务系统后,反馈消息消费成功,更新数据库中的消息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210663476.8A CN115103017B (zh) | 2022-06-13 | 2022-06-13 | 一种消息中间件处理系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210663476.8A CN115103017B (zh) | 2022-06-13 | 2022-06-13 | 一种消息中间件处理系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115103017A true CN115103017A (zh) | 2022-09-23 |
CN115103017B CN115103017B (zh) | 2023-12-08 |
Family
ID=83291541
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210663476.8A Active CN115103017B (zh) | 2022-06-13 | 2022-06-13 | 一种消息中间件处理系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115103017B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116132309A (zh) * | 2023-02-08 | 2023-05-16 | 浪潮通信信息系统有限公司 | 一种网管资源的批量业务处理方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112181677A (zh) * | 2020-09-02 | 2021-01-05 | 珠海格力电器股份有限公司 | 业务的处理方法和装置、存储介质、电子装置 |
CN113282426A (zh) * | 2021-04-27 | 2021-08-20 | 北京皮尔布莱尼软件有限公司 | 一种消息处理系统、方法及计算设备 |
CN113360301A (zh) * | 2021-07-02 | 2021-09-07 | 北京奇艺世纪科技有限公司 | 一种消息传输系统及方法 |
CN113687956A (zh) * | 2021-07-23 | 2021-11-23 | 上海浦东发展银行股份有限公司 | 消息路由分发方法、装置、计算机设备及存储介质 |
CN113703997A (zh) * | 2021-08-16 | 2021-11-26 | 北京图菱视频科技有限公司 | 集成多种消息代理的双向异步通信中间件系统及实现方法 |
-
2022
- 2022-06-13 CN CN202210663476.8A patent/CN115103017B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112181677A (zh) * | 2020-09-02 | 2021-01-05 | 珠海格力电器股份有限公司 | 业务的处理方法和装置、存储介质、电子装置 |
CN113282426A (zh) * | 2021-04-27 | 2021-08-20 | 北京皮尔布莱尼软件有限公司 | 一种消息处理系统、方法及计算设备 |
CN113360301A (zh) * | 2021-07-02 | 2021-09-07 | 北京奇艺世纪科技有限公司 | 一种消息传输系统及方法 |
CN113687956A (zh) * | 2021-07-23 | 2021-11-23 | 上海浦东发展银行股份有限公司 | 消息路由分发方法、装置、计算机设备及存储介质 |
CN113703997A (zh) * | 2021-08-16 | 2021-11-26 | 北京图菱视频科技有限公司 | 集成多种消息代理的双向异步通信中间件系统及实现方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116132309A (zh) * | 2023-02-08 | 2023-05-16 | 浪潮通信信息系统有限公司 | 一种网管资源的批量业务处理方法及系统 |
CN116132309B (zh) * | 2023-02-08 | 2024-04-26 | 浪潮通信信息系统有限公司 | 一种网管资源的批量业务处理方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115103017B (zh) | 2023-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6134599A (en) | System and method for organizing devices in a network into a tree using suitability values | |
US8769025B2 (en) | Cluster server of an instant messaging system and messaging method between clusters | |
US20160088107A1 (en) | Server cluster and method for push notification service | |
CN110601903B (zh) | 一种基于消息队列中间件的数据处理方法及装置 | |
CN101582861B (zh) | 一种im特定客服呼叫的方法、服务器、客户端和系统 | |
CN110677282B (zh) | 一种分布式系统的热备份方法及分布式系统 | |
CN115103017B (zh) | 一种消息中间件处理系统及方法 | |
CN110808948A (zh) | 远程过程调用方法、装置及系统 | |
CN111416823A (zh) | 一种数据传输方法和装置 | |
CN100596123C (zh) | 一种网关系统及其消息业务处理方法 | |
CN111124717A (zh) | 消息投递方法、系统及计算机存储介质 | |
CN113259408A (zh) | 数据传输方法和系统 | |
CN116800787A (zh) | 一种基于以太网通讯协议的车载通信方法及系统 | |
CN111314213A (zh) | 一种跨局域网络的通讯网关系统 | |
CN114598662A (zh) | 消息队列集群联邦管理系统以及方法 | |
CN112492019B (zh) | 消息推送方法、装置、电子设备及存储介质 | |
CN113452603A (zh) | 一种数据传输方法及相关装置 | |
JP2002169738A (ja) | ファイル配信方法 | |
CN101656726A (zh) | 一种数据传输方法、服务器和数据传输系统 | |
CN113079108B (zh) | 一种提高网络架构通信效率的方法及系统 | |
CN110716827A (zh) | 适用于分布式系统的热备份方法及分布式系统 | |
KR100331752B1 (ko) | 네트워크서비스시스템및방법 | |
CN111371780B (zh) | 一种报文传输方法、系统及装置 | |
CN112822238B (zh) | 一种主节点的切换方法以及计算机可读存储介质 | |
CN110022352B (zh) | 一种消息推送的应答方法及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |