CN107273228A - 基于星型拓扑架构的消息传输方法 - Google Patents
基于星型拓扑架构的消息传输方法 Download PDFInfo
- Publication number
- CN107273228A CN107273228A CN201710570341.6A CN201710570341A CN107273228A CN 107273228 A CN107273228 A CN 107273228A CN 201710570341 A CN201710570341 A CN 201710570341A CN 107273228 A CN107273228 A CN 107273228A
- Authority
- CN
- China
- Prior art keywords
- message
- node
- queue
- offset amount
- middleware module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/547—Remote procedure calls [RPC]; Web services
- G06F9/548—Object oriented; Remote method invocation [RMI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/44—Star or tree networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/541—Client-server
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/547—Messaging middleware
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/548—Queue
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Small-Scale Networks (AREA)
Abstract
基于星型拓扑架构的消息传输方法,1)设置消息传递的源头和目的;2)按照非中心节点的数目,构建并配置中心节点和非中心节点之间的中间件模块,用于实现从源节点拉取同步数据,并按照指定传输方向发送同步数据至目标节点;3)启动各个中间件子模块,按照2)中的配置内容,明确有数据同步需求的非中心节点;4)中间件模块的消息拉取子模块实时获取消费者消息队列即第二消息队列中的消息;5)通过比对第二消息队列的消息偏移量和第一消息队列的消息偏移量,6)中间件模块将消费者消息队列的消息偏移量经由中心节点,提交至生产者;7)生产者结合自身队列的消息偏移量和消费者消息队列的消息偏移量,并将新增数据传送至中心节点。
Description
技术领域
本发明属于软件技术中的数据传输领域,具体涉及到基于星型拓扑架构的消息传输方法。
背景技术
现今,分布式环境优势凸显使越来越多企业选择搭建分布式系统,但无疑也面临着因数据集成和系统整合带来的数据管理问题,尤以分布式数据调用备受关注;随之,分布式对象调用技术,比如ORBA、DCOM、RMI等RPC中间件技术应运而生。RPC指基于远程过程调用(Remote Procedure Call,RPC)的中间件,允许一个应用程序中的过程调用远程应用程序中的过程,就好像它们是本地调用一样。该中间件实现一个查找远程过程的链接机制并使调用方能够以透明方式使用这些过程。以前,这种类型的中间件处理基于过程的程序;现在,它还包括基于对象的组件。RPC中间件技术采用客户机/服务器模式:请求程序是一个客户机,而服务提供程序是一个服务器;首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息到达为止;当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息,最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。虽然RPC同步处理技术能有效解决跨区域的数据同步问题,但面对大规模的复杂分布式系统,RPC同步处理在性能、健壮性、可扩展性上等方面都存在局限性。
传统的跨数据中心数据同步传输如图1所示,现有A、B、C、D四个数据中心,为了保证数据在这四个数据中心内的同步,共需要建立12条复制传输通道;按这样的构造方式,若后期还有增加一个新站点的需求,则需要再增加8条复制传输通道,才能完成各点的数据同步,这样无限制的增加通道,无疑降低了数据传输的稳定,影响数据传输效率。
星型拓扑结构是指各工作站以星型方式连接成网,网络的中央节点和其他节点直接相连,又称为“集中式网络”。在星型拓扑结构中,网络中的各节点通过点到点的方式连接到一个中央节点(又称中央转接站)上,并由该中央节点向目的节点传送信息。星型网中任何两个节点要进行通信都必须经过中央节点控制,对中心节点依赖性强。
发明内容
本发明的目的是,提供一种基于星型拓扑架构的消息传输方法,通过按照星型拓扑结构构建消息队列的中心节点和非中心节点,形成以中心节点为传输中介的消息同步结构;同时在各中心节点和非中心节点配置中间程序,用于控制同步数据的传递方向,负责从消息源端获取数据,发送至消息目的地。
本发明的技术方案如下:基于星型拓扑架构的消息传输方法,具体流程包括:
步骤1:设置消息传递的源头和目的,包括:
步骤101:按照星型拓扑结构的特征,构建中心节点和非中心节点,非中心节点通过中心节点进行消息同步;消息传递的源头构建中心节点、消息传递的目的地构建非中心节点即目标节点;
步骤102:根据消息传递的源头和目的即消息同步传输方向,为非中心节点配置节点角色,包括源节点和目标节点;所述源节点为消息发送方,目标节点为消息接收方;
步骤2:按照非中心节点的数目,构建并配置中心节点和非中心节点之间的中间件模块,用于实现从源节点拉取同步数据,并按照指定传输方向发送同步数据至目标节点;
特别地,每一个作为目标节点的非中心节点,均有一个中间件模块;作为数据传输中介的中间节点是各个非中心节点的目标节点,中间节点内的中间件模块配置与非中心节点的保持对应,包括中间件模块数量和非中心节点数量一致,且中间件模块和非中心节点一一对应;
特别地,中间件模块包括消息拉取子模块和消息发送子模块,所述子模块配置的内容包括:
(1)定义各个非中心节点之间需要执行同步的队列名称;
(2)定义需要数据同步的非中心节点和中心节点的地址;
(3)配置异常情况的报警人信息;
步骤3:启动各个中间件子模块,按照步骤2中的配置内容,明确有数据同步需求的非中心节点;并根据中间件模块所在的节点位置,确定消息的生产者和消费者,其中源节点是消息的生产者,目标节点是消息的消费者;分别对应消息传递的源头和目的;
步骤4:中间件模块的消息拉取子模块实时获取消费者消息队列(下文称:第二消息队列)中的消息,并记录消息偏移量;同时,中间件模块的消息拉取子模块主动抓取生产者消息队列(下文称:第一消息队列)中的消息,记录消息偏移量;
所述消息偏移量是消息队列中当前读取消息的位置与队列中初始位置的差值;
所述消息队列是用于在消息传输过程中保存消息的容器;
步骤5:通过比对第二消息队列的消息偏移量和第一消息队列的消息偏移量,如果消息偏移量保持一致,说明源节点没有新产生数据;如果消息偏移量不一致,确定本次数据同步过程中的消息数据,具体见步骤6;
步骤6:中间件模块将消费者消息队列的消息偏移量经由中心节点,提交至生产者;
步骤7:生产者结合自身队列的消息偏移量和消费者消息队列的消息偏移量,计算获得自身队列中的新增数据,并将新增数据通过中心节点内的中间件模块,传送至中心节点;
步骤8:当中心节点收到新增数据后,配置在消费者端的中间件模块从中心节点中
自动抽取新增数据至消费者的消息队列中;
步骤9:配置在目标节点处的中间件模块持续地抓取生产者和消费者的消息队列,
循环执行
步骤4-步骤8;
特别地,生产者端发送消息和消费者端接收消息是异步进行,一个生产者端能同时向多个消费者端发送消息;
本发明与现有技术相比,其有益效果:
(1)本发明通过在源节点和目标节点之间配置中间件模块,借助中间件模块自动抽取源节点的更新数据,自动识别消息生产者和消费者,并通过比对双方的消息队列,实时控制同步数据的消息传递,有效地实现多节点间的大数据量实时同步问题;
(2)本发明利用星型拓扑结构的特征构建消息队列的中心节点和非中心节点,形成以中心节点为传输中介的消息同步结构,本发明有助于解决传统点对点传输模式带来的大量重复数据传输问题,解决传统数据同步结构中的链路繁杂的问题,极大降低数据节点间的同步消息链路数,有效节省带宽和机器资源。
附图说明
图1为本发明实施例中传统的跨数据中心数据同步传输结构图;
图2为本发明实施例中基于星型拓扑架构的消息传输结构图;
图3为本发明实施例中基于星型拓扑结构的跨数据中心数据同步传输结构图;
图4为本发明实施例中基于星型拓扑架构的消息传输流程示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,首先对本发明实施中的术语做以解释:
所述消息偏移量是消息队列中当前读取消息的位置与队列中初始位置的差值;
所述消息队列是用于在消息传输过程中保存消息的容器(中的数据序列);
接下来,结合附图和具体实施例对本发明进行详细描述。
图2为本发明实施例中基于星型拓扑架构的消息传输结构图,按照星型拓扑结构的特征构构建中心节点C和非中心节点A、B、D;其中,每一个非中心内分别配置中间件模块,中间件模块包括如下子模块,依次为中间件模块A、中间件模块B、中间件模块D;
每一个中间件模块包括消息拉取子模块和消息发送子模块,提前配置的内容包括:
(1)定义各个非中心节点之间需要执行同步的消息队列名称;
(2)定义需要数据同步的非中心节点和中心节点的地址;
(3)配置异常情况的报警人信息;
中间节点内按照非中心节点的数量,配置与非中心节点相对应的中间件模块A、B、D,用于从各非中心节点A、B、C中拉取有数据同步需求的数据;各中心节点内的中间件模块用于从中心节点C内拉取需要同步至自身的数据;
本发明实施例适用于多种数据同步情景下,图3为本发明实施例中基于星型拓扑结构的跨数据中心数据同步传输结构图,图示中的标识为“MM”的是中间件模块,用来同步各节点间的消息。图中共4个节点,以Tc为中国电信的数据中心,Local为国内数据中心,Usa为美国数据中心,Cnc为中国网通的数据中心;当在国内数据中心Local产生的数据需要同步至美国数据中心时,先由中国电信数据中心内的中间件模块从Local中自动抽取已更新的数据,并分析应同步到的数据中心地址,即美国数据中心Usa,然后再由中国电信数据中心发送至美国数据中心。这样做的目的是减少和Usa创建过多的链路,降低网络不稳定的风险。同时由于中间件模块不依赖于各个节点,所以中间程序可以任意部署,拓扑结构可以任意构建。
图4为本发明实施例中基于星型拓扑架构的消息传输流程示意图,通过按照星型拓扑结构构建消息队列的中心节点和非中心节点,形成以中心节点为传输中介的消息同步结构;同时在各中心节点和非中心节点配置中间程序,用于控制同步数据的传递方向,负责从消息源端获取数据,发送至消息目的地,具体步骤包括:
步骤401:设置消息传递的源头和目的,包括:
步骤401-1:按照星型拓扑结构的特征,构建中心节点和非中心节点,非中心节点通过中心节点进行消息同步;
步骤401-2:根据消息同步传输方向,为非中心节点配置节点角色,包括源节点和目标节点;所述源节点为消息发送方,目标节点为消息接收方;
步骤402:按照非中心节点的数目,构建并配置中心节点和非中心节点之间的中间件模块,用于实现从源节点拉取同步数据,并按照指定传输方向发送同步数据至目标节点;
步骤403:启动各个中间件模块,按照步骤2中的配置内容,明确有数据同步需求的非中心节点;并根据中间件模块所在的节点位置,确定消息的生产者和消费者,其中源节点是消息的生产者,目标节点是消息的消费者;
步骤404:中间件模块的消息拉取子模块实时获取消费者消息队列(下文称:第二消息队列)中的消息,并记录消息偏移量;同时,中间件模块的消息拉取子模块主动抓取生产者消息队列(下文称:第一消息队列)中的消息,记录消息偏移量;
步骤405:通过比对第二消息队列的消息偏移量和第一消息队列的消息偏移量,如果消息偏移量保持一致,说明源节点没有新产生数据;如果消息偏移量不一致,确定本次数据同步过程中的消息数据,具体见步骤6;
步骤406:中间件模块将消费者消息队列的消息偏移量经由中心节点,提交至生产者;
步骤407:生产者结合自身队列的消息偏移量和消费者消息队列的消息偏移量,计算获得自身队列中的新增数据,并将新增数据通过中心节点内的中间件模块,传送至中心节点;
步骤408:当中心节点收到新增数据后,配置在消费者端的中间件模块从中心节点中自动抽取新增数据至消费者的消息队列中。
以上说明和描述了本发明的基本原理、主要方法,实施例并非限定保护范围,本发明方法的保护范围以权利要求及相关解释为准。
Claims (3)
1.基于星型拓扑架构的消息传输方法,其特征是流程如下:
步骤1:设置消息传递的源头和目的,包括:
步骤101:按照星型拓扑结构的特征,构建中心节点和非中心节点,非中心节点通过中心节点进行消息同步;消息传递的源头构建中心节点、消息传递的目的地构建非中心节点即目标节点;
步骤102:根据消息传递的源头和目的即消息同步传输方向,为非中心节点配置节点角色,包括源节点和目标节点;所述源节点为消息发送方,目标节点为消息接收方;
步骤2:按照非中心节点的数目,构建并配置中心节点和非中心节点之间的中间件模块,用于实现从源节点拉取同步数据,并按照指定传输方向发送同步数据至目标节点;
步骤2中,,中间件模块包括消息拉取子模块和消息发送子模块,所述子模块配置的内容包括:
(1)定义各个非中心节点之间需要执行同步的队列名称;
(2)定义需要数据同步的非中心节点和中心节点的地址;
(3)配置异常情况的报警人信息;
步骤3:启动各个中间件子模块,按照步骤2中的配置内容,明确有数据同步需求的非中心节点;并根据中间件模块所在的节点位置,确定消息的生产者和消费者,其中源节点是消息的生产者,目标节点是消息的消费者;分别对应消息传递的源头和目的;
步骤4:中间件模块的消息拉取子模块实时获取消费者消息队列即第二消息队列中的消息,并记录消息偏移量;同时,中间件模块的消息拉取子模块主动抓取生产者消息队列即第一消息队列中的消息,记录消息偏移量;
所述消息偏移量是消息队列中当前读取消息的位置与队列中初始位置的差值;
所述消息队列是用于在消息传输过程中保存消息的容器;
步骤5:通过比对第二消息队列的消息偏移量和第一消息队列的消息偏移量,如果消息偏移量保持一致,说明源节点没有新产生数据;如果消息偏移量不一致,确定本次数据同步过程中的消息数据,具体见步骤6;
步骤6:中间件模块将消费者消息队列的消息偏移量经由中心节点,提交至生产者;
步骤7:生产者结合自身队列的消息偏移量和消费者消息队列的消息偏移量,计算获得自身队列中的新增数据,并将新增数据通过中心节点内的中间件模块,传送至中心节点;
步骤8:当中心节点收到新增数据后,配置在消费者端的中间件模块从中心节点中自动抽取新增数据至消费者的消息队列中;
步骤9:配置在目标节点处的中间件模块持续地抓取生产者和消费者的消息队列,循环执行步骤4-步骤8。
2.根据权利要求要求1所述的基于星型拓扑架构的消息传输方法,其特征是步骤2中,每一个作为目标节点的非中心节点,均有一个中间件模块;作为数据传输中介的中间节点是各个非中心节点的目标节点,中间节点内的中间件模块配置与非中心节点的保持对应,包括中间件模块数量和非中心节点数量一致,且中间件模块和非中心节点一一对应。
3.根据权利要求要求1所述的基于星型拓扑架构的消息传输方法,其特征是生产者端发送消息和消费者端接收消息是异步进行,一个生产者端能同时向多个消费者端发送消息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710570341.6A CN107273228B (zh) | 2017-07-13 | 2017-07-13 | 基于星型拓扑架构的消息传输方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710570341.6A CN107273228B (zh) | 2017-07-13 | 2017-07-13 | 基于星型拓扑架构的消息传输方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107273228A true CN107273228A (zh) | 2017-10-20 |
CN107273228B CN107273228B (zh) | 2020-09-04 |
Family
ID=60073401
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710570341.6A Active CN107273228B (zh) | 2017-07-13 | 2017-07-13 | 基于星型拓扑架构的消息传输方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107273228B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108833544A (zh) * | 2018-06-15 | 2018-11-16 | 甘肃万维信息技术有限责任公司 | 一种动态数据共享交换方法 |
CN109343974A (zh) * | 2018-09-14 | 2019-02-15 | 珠海国芯云科技有限公司 | 基于容器的虚拟桌面的进程间通信方法及装置 |
CN110071949A (zh) * | 2018-01-23 | 2019-07-30 | 阿里巴巴集团控股有限公司 | 一种跨地理区域管理计算应用的系统、方法和装置 |
CN111158928A (zh) * | 2019-12-18 | 2020-05-15 | 东软集团股份有限公司 | 分布式系统及通信方法 |
CN112269337A (zh) * | 2020-10-21 | 2021-01-26 | 深圳昆仑通态科技有限责任公司 | 一种用于运行scada系统的方法、系统及存储介质 |
CN112434111A (zh) * | 2020-11-26 | 2021-03-02 | 平安普惠企业管理有限公司 | 基础数据同步方法、装置、设备及存储介质 |
CN112822690A (zh) * | 2021-03-15 | 2021-05-18 | 广西电网有限责任公司柳州供电局 | 一种星型网络多中心节点合并方法 |
CN113312187A (zh) * | 2021-06-02 | 2021-08-27 | 福建天晴数码有限公司 | 基于双向链表的消息多线程消费顺序确认的方法及装置 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030115366A1 (en) * | 2001-12-18 | 2003-06-19 | Robinson Brian R. | Asynchronous message delivery system and method |
CN1783129A (zh) * | 2004-11-15 | 2006-06-07 | 国际商业机器公司 | 企业工厂控制方法和系统 |
US7127507B1 (en) * | 2001-09-27 | 2006-10-24 | Sprint Communications Company L.P. | Method and apparatus for network-level monitoring of queue-based messaging systems |
US20110239226A1 (en) * | 2010-03-23 | 2011-09-29 | Cesare Placanica | Controlling congestion in message-oriented middleware |
US20120266184A1 (en) * | 2002-12-17 | 2012-10-18 | Stragent, Llc | System, method method and computer program product for sharing information in a distributed framework |
US20150003296A1 (en) * | 2012-01-04 | 2015-01-01 | Hongbing Fan | System and method for providing p2p based reconfigurable computing and structured data distribution |
CN104424186A (zh) * | 2013-08-19 | 2015-03-18 | 阿里巴巴集团控股有限公司 | 一种流计算应用中实现持久化的方法及装置 |
CN104468831A (zh) * | 2014-12-26 | 2015-03-25 | 山东中创软件商用中间件股份有限公司 | 一种基于网络拓扑结构的消息服务网络集群 |
CN104486107A (zh) * | 2014-12-05 | 2015-04-01 | 曙光信息产业(北京)有限公司 | 一种日志采集装置及方法 |
CN106293968A (zh) * | 2016-08-04 | 2017-01-04 | 华中科技大学 | 一种基于Kafka消息中间件的双向通信系统及方法 |
CN106598762A (zh) * | 2016-12-29 | 2017-04-26 | 上海理想信息产业(集团)有限公司 | 一种消息同步方法及系统 |
CN106649766A (zh) * | 2016-12-27 | 2017-05-10 | 北京锐安科技有限公司 | 一种基于kafka的消息处理方法 |
CN106709069A (zh) * | 2017-01-25 | 2017-05-24 | 焦点科技股份有限公司 | 高可靠性的大数据日志采集与传输方法 |
CN106897159A (zh) * | 2017-01-20 | 2017-06-27 | 武汉华信联创技术工程有限公司 | 一种用于采集自动气象站数据的系统及方法 |
-
2017
- 2017-07-13 CN CN201710570341.6A patent/CN107273228B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7127507B1 (en) * | 2001-09-27 | 2006-10-24 | Sprint Communications Company L.P. | Method and apparatus for network-level monitoring of queue-based messaging systems |
US20030115366A1 (en) * | 2001-12-18 | 2003-06-19 | Robinson Brian R. | Asynchronous message delivery system and method |
US20120266184A1 (en) * | 2002-12-17 | 2012-10-18 | Stragent, Llc | System, method method and computer program product for sharing information in a distributed framework |
CN1783129A (zh) * | 2004-11-15 | 2006-06-07 | 国际商业机器公司 | 企业工厂控制方法和系统 |
US20110239226A1 (en) * | 2010-03-23 | 2011-09-29 | Cesare Placanica | Controlling congestion in message-oriented middleware |
US20150003296A1 (en) * | 2012-01-04 | 2015-01-01 | Hongbing Fan | System and method for providing p2p based reconfigurable computing and structured data distribution |
CN104424186A (zh) * | 2013-08-19 | 2015-03-18 | 阿里巴巴集团控股有限公司 | 一种流计算应用中实现持久化的方法及装置 |
CN104486107A (zh) * | 2014-12-05 | 2015-04-01 | 曙光信息产业(北京)有限公司 | 一种日志采集装置及方法 |
CN104468831A (zh) * | 2014-12-26 | 2015-03-25 | 山东中创软件商用中间件股份有限公司 | 一种基于网络拓扑结构的消息服务网络集群 |
CN106293968A (zh) * | 2016-08-04 | 2017-01-04 | 华中科技大学 | 一种基于Kafka消息中间件的双向通信系统及方法 |
CN106649766A (zh) * | 2016-12-27 | 2017-05-10 | 北京锐安科技有限公司 | 一种基于kafka的消息处理方法 |
CN106598762A (zh) * | 2016-12-29 | 2017-04-26 | 上海理想信息产业(集团)有限公司 | 一种消息同步方法及系统 |
CN106897159A (zh) * | 2017-01-20 | 2017-06-27 | 武汉华信联创技术工程有限公司 | 一种用于采集自动气象站数据的系统及方法 |
CN106709069A (zh) * | 2017-01-25 | 2017-05-24 | 焦点科技股份有限公司 | 高可靠性的大数据日志采集与传输方法 |
Non-Patent Citations (1)
Title |
---|
马浩然: ""基于NS3的分布式消息系统Kafka的仿真实现"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110071949A (zh) * | 2018-01-23 | 2019-07-30 | 阿里巴巴集团控股有限公司 | 一种跨地理区域管理计算应用的系统、方法和装置 |
CN110071949B (zh) * | 2018-01-23 | 2022-05-24 | 阿里巴巴集团控股有限公司 | 一种跨地理区域管理计算应用的系统、方法和装置 |
CN108833544B (zh) * | 2018-06-15 | 2021-08-20 | 中电万维信息技术有限责任公司 | 一种动态数据共享交换方法 |
CN108833544A (zh) * | 2018-06-15 | 2018-11-16 | 甘肃万维信息技术有限责任公司 | 一种动态数据共享交换方法 |
CN109343974A (zh) * | 2018-09-14 | 2019-02-15 | 珠海国芯云科技有限公司 | 基于容器的虚拟桌面的进程间通信方法及装置 |
CN111158928A (zh) * | 2019-12-18 | 2020-05-15 | 东软集团股份有限公司 | 分布式系统及通信方法 |
CN111158928B (zh) * | 2019-12-18 | 2024-04-05 | 东软集团股份有限公司 | 分布式系统及通信方法 |
CN112269337A (zh) * | 2020-10-21 | 2021-01-26 | 深圳昆仑通态科技有限责任公司 | 一种用于运行scada系统的方法、系统及存储介质 |
CN112434111A (zh) * | 2020-11-26 | 2021-03-02 | 平安普惠企业管理有限公司 | 基础数据同步方法、装置、设备及存储介质 |
CN112822690A (zh) * | 2021-03-15 | 2021-05-18 | 广西电网有限责任公司柳州供电局 | 一种星型网络多中心节点合并方法 |
CN112822690B (zh) * | 2021-03-15 | 2023-04-07 | 广西电网有限责任公司柳州供电局 | 一种星型网络多中心节点合并方法 |
CN113312187A (zh) * | 2021-06-02 | 2021-08-27 | 福建天晴数码有限公司 | 基于双向链表的消息多线程消费顺序确认的方法及装置 |
CN113312187B (zh) * | 2021-06-02 | 2023-06-16 | 福建天晴数码有限公司 | 基于双向链表的消息多线程消费顺序确认的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107273228B (zh) | 2020-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107273228A (zh) | 基于星型拓扑架构的消息传输方法 | |
KR101706008B1 (ko) | 통신 실패에 따라서 분산된 릴레이 제어 프로토콜 〔drcp〕 동작을 지원하기 위한 방법 및 시스템 | |
CN104125087B (zh) | 一种告警信息处理方法及装置 | |
US20130070788A1 (en) | Method and Apparatus for Interchanging Data, and Network | |
CN114189444B (zh) | 纳管工业端设备的方法、时间敏感网络控制器及系统 | |
CN110324165A (zh) | 网络设备的管理方法、装置及系统 | |
CN101971572A (zh) | 支持多个远程访问的UPnP(通用即插即用)RAS(远程访问服务器)设备及其方法 | |
CN101304340A (zh) | 一种资源状态监控方法及装置以及通信网络 | |
CN106453541A (zh) | 一种数据同步的方法、服务器以及数据同步系统 | |
CN110351141B (zh) | FlexE接口管理方法、装置及网元 | |
CN109428766A (zh) | 交换机自动部署的软件定义网络系统及其方法 | |
CN109660753A (zh) | 资源同步方法和装置 | |
CN103973489B (zh) | 一种异构设备集中监控系统 | |
CN113535232B (zh) | 暖通云边协同系统 | |
WO2006058490A1 (fr) | Procede de negociation automatique de largeur de bande de canal de communication de donnees | |
CN109167729A (zh) | 拓扑发现方法、装置及多业务传输网络系统 | |
CN110300055A (zh) | 异构现场总线用网关系统 | |
CN105323112B (zh) | 一种分组传送网管的一致性处理的快速方法 | |
WO2020108161A1 (zh) | 一种基于ros主从节点管理器的通信方法和系统 | |
CN106533775A (zh) | 虚拟化成员设备及邻居发现方法 | |
CN109687985B (zh) | 一种变电站过程层网络自动配置方法及系统 | |
WO2012065452A1 (zh) | 一种家庭自动化系统、控制方法及信息处理中心设备 | |
CN116055394A (zh) | 一种基于矢量化骨干网的边缘路由编排系统 | |
CN104753747B (zh) | 一种连接网关与设备的方法、装置及网关设备 | |
CN110635986B (zh) | 一种网络接入的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |