CN106980643A - 变更消息的发送方法、装置及电子设备 - Google Patents

Abstract

本发明实施例提供了一种变更消息的发送方法、装置及电子设备，其中，方法包括：模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。本发明实施例的方案可实现将发送变更消息的过程从业务方解耦。

Description

变更消息的发送方法、装置及电子设备

技术领域

本申请涉及计算机技术领域，尤其涉及一种变更消息的发送方法、装置及电子设备。

背景技术

现有技术通过在数据变更的业务流程中埋入数据变更消息通知代码，在业务处理完成后将变更消息发送至消息中心供订阅者订阅。

现有的技术缺点：

由于现有技术中变更消息的发送过程需要将变更消息通知与业务代码高度耦合，且需要在业务流程中通过埋点来发送消息，随着数据变更点的增多，在业务流程中设置的埋点逻辑也会随之增多而且会变得零散，一旦变更消息发送失败还可能导致正常的业务处理流程被中断。

发明内容

本申请提供了一种变更消息的发送方法、装置及电子设备，以实现将发送变更消息的过程从业务方解耦。

为达到上述目的，本发明的实施例采用如下技术方案：

第一方面，提供了一种变更消息的发送方法，包括：

模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。

第二方面，提供了一种变更消息的发送装置，包括：

信息获取模块，用于模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

信息发送模块，用于根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。

第三方面，提供了一种电子设备，包括：

存储器，用于存储程序；

处理器，耦合至所述存储器，用于执行所述程序，以用于：

模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。

本发明提供的变更消息的发送方法、装置及电子设备，通过模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；并根据变更数据的信息形成变更消息，通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新，从而实现将发送变更消息的过程从业务方解耦。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本申请的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1为本发明实施例的发送变更消息的业务流程；

图2为本发明实施例的发送变更消息的系统的结构示意图；

图3为本发明实施例一的变更消息的发送方法的流程示意图；

图4为本申请实施例二的变更消息的发送装置的结构示意图一；

图5为本申请实施例二的信息发送模块的结构示意图；

图6为本申请实施例二的变更消息的发送装置的结构示意图二；

图7为本申请实施例三的电子设备的结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

本发明从数据变更的最底层即数据库着手，直接监听数据库的变更，不需要关注业务，业务本身也无需处理数据的变更通知，订阅方只需订阅关注的数据(可精确到数据表字段)，统一由监听中心处理发送变更通知以及变更的数据，从而与业务方解耦。

现有技术中，以关系型数据库(MySQL)中的binlog(二进制日志)数据为例，主数据库(master)与从数据库(slave)之间数据的同步原理为：slave向master发送binlog dump命令，master接收该命令后向slave发送binlog数据，在slave接收到该数据后，slave根据binlog的协议将binlog数据解析为数据操作语言(DML)的语句，并在本地数据库执行，从而达到主从数据库中数据同步的目的。

根据binlog的这一特定用途，可以模拟一个slave接收master发送的binlog数据，并在解析该数据后以消息的方式发送给订阅方，以从应用层剥离，从数据库层面感知数据变更，不需侵入业务流程。

具体地，基于这种思想，本发明实施例提供了如图1所示的发送变更消息的业务流程，包括：

当APP通过在master本地执行DML语句，对master中的数据进行变更后，模拟slave(不是真正意义上的数据库，可以不具备数据存储功能)可以模拟一个正常的slave向master发送binlog dump命令，并接收master发送的binlog数据(data)，并在解析该数据生成变更数据后，将变更数据通过消息中心(MSG Center)以消息的方式发送给订阅方(push过程)；同时，MSG Center也可以接收订阅方的订阅请求(sub过程)，以根据订阅请求中指定的数据更新业务内容推送对应的变更消息至订阅方。

如图2所示，本发明的技术方案可以应用于例如图2所示的网络服务平台中，该网络服务平台可以为购物平台、支付平台或者新闻订阅平台等。其中，在该网络服务平台中，可以设置有用于执行本发明的变更消息的发送方法的变更消息的发送装置。网络服务平台包括变更消息的发送装置和消息中心，其中变更消息的发送装置又进一步包括：信息获取模块和信息发送模块。

信息获取模块，用于模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息。

其中，从数据库即为现有技术中的slave，主数据库对应为图1中的master，信息获取模块对应为图1中的模拟slave。信息获取模块可以模拟现有技术的slave感知主数据库中数据变更的操作，并从主数据库中获取变更数据的信息，该信息可以是记录对主数据库进行操作的二进制日志binlog数据。其中，对主数据库进行数据变更操作可以是，通过前端的应用APP主动修改主数据库中的数据的操作。

信息发送模块，用于根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新。在信息获取模块获得变更数据的信息后，信息发送模块可对该更数据的信息进行解析，从中得到变更数据，并将变更数据通过消息中心发送给订阅方。例如，当以binlog数据作为变更数据的信息时，信息发送模块可将对binlog数据进行解析后，生成的数据操纵语言DML作为变更数据携带在变更消息中，通过消息中心发送给订阅方。当然，消息中心也可接收订阅方的订阅请求，所述订阅请求中包含订阅方欲订阅的数据更新业务内容；基于不同订阅方所关注的数据更新业务内容的不同，消息中心可以有针对性的，将与数据更新业务内容相对应的变更消息发送至指定的订阅方。

下面通过多个实施例来进一步说明本发明的技术方案。

实施例一

如图3所示，其为本发明实施例一的变更消息的发送方法的流程示意图，该方法包括：

310、模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息。该步骤可以由图2所示的网络服务平台中的变更消息的发送装置来执行，其中，对主数据库进行数据变更操作可以是，通过前端的应用APP主动修改主数据库中的数据的操作；变更数据的信息可以是用于描述变更操作行为的信息，也可以变更数据内容的信息。

320、根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新。该步骤可以由图2所示的网络服务平台中的变更消息的发送装置来执行。

具体地，根据变更数据的信息可以解析出变更数据内容的信息；或者根据变更数据的信息可以先解析出执行变更操作的行为的信息，然后根据行为的信息进一步解析出变更数据内容的信息。但不管是哪一种方式，其最终的结果都是可以解析得到变更数据内容的信息。

在形成变更消息时，可在变更消息中携带变更操作的行为的信息，和/或变更数据内容的信息。然后通过消息中心将变更消息发送给订阅方，以使得订阅方根据变更消息对其本地数据进行更新。其中，消息中心可以为设置在网络服务平台中的用于提供变更消息的发送装置与外部订阅方之间进行通信往来的中转站。

进一步地，上述的主数据库和从数据库可以分别为关系型数据库中的主数据库和从数据库，相应的，模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息的步骤可以具体为：向主数据库发送binlog dump命令，并接收主数据库返回的binlog数据，该binlog数据为主数据库上记录的二进制日志。其中，该binlog数据属于前面提及的变更操作的行为的信息。

进一步地，基于获取的变更数据的信息为binlog数据，则根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方可具体为：对binlog数据进行解析，生成数据操纵语言DML；将DML发送至消息中心，以指示消息中心将携带有DML的变更消息发送至订阅方。

其中，对binlog数据进行解析，生成数据操纵语言DML的过程，与现有技术中从数据库从主数据库获取binlog数据进行解析，生成数据操纵语言DML的过程相同。在根据变更数据的信息形成变更消息时，可以将上述解析后生成的DML发送给消息中心，然后指示消息中心对该DML进行打包，形成变更消息发送给订阅方。订阅方收到该变更消息后，可在本地数据库中，执行变更消息中携带的DML以完成本地的数据更新。

进一步地，消息中心还可以接收订阅方发送的订阅请求，该订阅请求中包含订阅方欲订阅的数据更新业务内容；依据不同订阅者所订阅的数据更新业务内容的不同，消息中心可将与数据更新业务内容相对应的变更消息发送至订阅方，从而完成由针对性的发送变更消息。

这里需要说明的是，消息中心作为变更消息的发送装置与订阅方之间的信息交互中转站，其具有一般消息中心的打包数据、形成待发送消息，接收订阅者订阅请求，根据订阅者订阅请求有针对性的发送消息至订阅方的全部功能。因此，本实施例中的变更消息的发送装置在执行步骤：根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方时，可以根据变更数据的信息形成变更消息中携带的主体数据，如上述的DML，然后可指示消息中心再根据该主体数据形成完整的变更消息发送给订阅方。

以下通过具体举例，对上述实施例中的变更消息的发送方法进行具体说明：

假设业务系统A要操作dbA的tb_a表(简称dbA.tb_a)(位于主数据库中)，同时系统A要异步通知外界系统(订阅方)自己变更了dbA.tb_a。按照传统的方式，那么A系统在对dbA.tb_a进行变更后，紧接着就需要一段发送数据变更的代码嵌入系统A中，并且可能还需要关注消息的发送结果，没有成功还需要加入重试的流程。

而采用本实施例中的方案，业务系统A只管操作dbA.tb_a的数据，不再需要后续的自己发送消息的流程。数据变更的感知由业务系统B(本方案中的网络业务平台)执行，即由变更消息的发送装置感知dbA.tb_b表的变更，并发送变更消息至需要数据同步的订阅方。

具体地，系统A在对dbA.tb_a进行变更后由变更消息的发送装置模拟slave直接从数据库层面解析到dbA.tb_a的变更数据，并将此数据以一定的格式(DML语言的格式)发送给消息中心供需要关心该数据变更的系统(订阅方)使用。

举一个变更消息内容的样例：

这条变更消息的意思是：主数据库db_test的tb_test表发生了一次数据变更操作(update)，变更的数据主键id为123456，变更的字有：cl_a，变更前的值为old_value，变更后的值为now_value，字段cl_b同理。

订阅方通过在本地数据库中执行上述DML即可完成数据更新。

本实施例提供的变更消息的发送方法，通过模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；并根据变更数据的信息形成变更消息，通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新，从而实现将发送变更消息的过程从业务方解耦。

实施例二

如图4所示，为本发明实施例二的变更消息的发送装置的结构示意图一，其包括：

信息获取模块410，用于模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

信息发送模块420，用于根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新。

其中，主数据库和从数据库可分别为关系型数据库中的主数据库和从数据库。相应的，信息获取模块410，可具体用于，向主数据库发送binlog dump命令，并接收主数据库返回的binlog数据，该binlog数据为主数据库上记录的二进制日志。

进一步地，如图5所示，信息发送模块420可具体包括：

数据解析单元421，用于对binlog数据进行解析，生成数据操纵语言DML；

数据发送单元422，用于将DML发送至消息中心，以指示消息中心将携带有DML的变更消息发送至订阅方。

进一步地，如图6所示，在图4所示结构的基础上，上述变更消息的发送装置还可包括：

请求接收模块430，用于通过消息中心接收订阅方发送的订阅请求，该订阅请求中包含订阅方欲订阅的数据更新业务内容；相应的，消息中心将携带有DML的变更消息发送至订阅方的步骤可为：消息中心将与数据更新业务内容相对应的变更消息发送至订阅方。

本实施例提供的变更消息的发送装置，通过模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；并根据变更数据的信息形成变更消息，通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新，从而实现将发送变更消息的过程从业务方解耦

实施例三

前面描述了变更消息的发送装置的内部功能和结构，该装置可实现为一种电子设备，如图7所示，其为本发明实施例三的电子设备的结构示意图，具体包括：存储器710和处理器720。

存储器710，用于存储程序。

除上述程序之外，存储器710还可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。

存储器710可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

处理器720，耦合至存储器710，用于执行存储器710中的程序，以用于：

模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

根据变更数据的信息形成变更消息，并将变更消息通过消息中心发送至订阅方，以供订阅方根据变更消息对本地数据进行更新。

上述的具体处理操作已经在前面实施例中进行了详细说明，在此不再赘述。

进一步，如图7所示，电子设备还可以包括：通信组件730、电源组件740、音频组件750、显示器760等其它组件。图7中仅示意性给出部分组件，并不意味着电子设备只包括图7所示组件。

通信组件730被配置为便于电子设备和其他设备之间有线或无线方式的通信。电子设备可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件730经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，通信组件730还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

电源组件740，为电子设备的各种组件提供电力。电源组件740可以包括电源管理系统，一个或多个电源，及其他与为电子设备生成、管理和分配电力相关联的组件。

音频组件750被配置为输出和/或输入音频信号。例如，音频组件750包括一个麦克风(MIC)，当电子设备处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器710或经由通信组件730发送。在一些实施例中，音频组件750还包括一个扬声器，用于输出音频信号。

显示器760包括屏幕，其屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (10)

1.一种变更消息的发送方法，其特征在于，包括：

模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。

2.根据权利要求1所述的方法，其特征在于，所述主数据库和所述从数据库分别为关系型数据库中的主数据库和从数据库，所述模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息包括：

向所述主数据库发送binlog dump命令，并接收所述主数据库返回的binlog数据，所述binlog数据为所述主数据库上记录的二进制日志。

3.根据权利要求2所述的方法，其特征在于，所述根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方包括：

对所述binlog数据进行解析，生成数据操纵语言DML；

将所述DML发送至所述消息中心，以指示所述消息中心将携带有所述DML的变更消息发送至所述订阅方。

4.根据权利要求3所述的方法，其特征在于，所述供订阅方根据所述变更消息对本地数据进行更新包括：

所述订阅方在本地数据库中，执行所述DML进行数据更新。

5.根据权利要求1-4中任一项所述的方法，其特征在于，所述方法还包括：

通过所述消息中心接收所述订阅方发送的订阅请求，所述订阅请求中包含所述订阅方欲订阅的数据更新业务内容；

所述消息中心将携带有所述DML的变更消息发送至所述订阅方包括：

所述消息中心将与所述数据更新业务内容相对应的所述变更消息发送至所述订阅方。

6.一种变更消息的发送装置，其特征在于，包括：

信息获取模块，用于模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

信息发送模块，用于根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。

7.根据权利要求6所述的装置，其特征在于，所述主数据库和所述从数据库分别为关系型数据库中的主数据库和从数据库，所述信息获取模块具体用于，

向所述主数据库发送binlog dump命令，并接收所述主数据库返回的binlog数据，所述binlog数据为所述主数据库上记录的二进制日志。

8.根据权利要求7所述的装置，其特征在于，所述信息发送模块具体包括：

数据解析单元，用于对所述binlog数据进行解析，生成数据操纵语言DML；

数据发送单元，用于将所述DML发送至所述消息中心，以指示所述消息中心将携带有所述DML的变更消息发送至所述订阅方。

9.根据权利要求6-8中任一项所述的装置，其特征在于，所述装置还包括：

请求接收模块，用于通过所述消息中心接收所述订阅方发送的订阅请求，所述订阅请求中包含所述订阅方欲订阅的数据更新业务内容；

所述消息中心将携带有所述DML的变更消息发送至所述订阅方包括：

所述消息中心将与所述数据更新业务内容相对应的所述变更消息发送至所述订阅方。

10.一种电子设备，其特征在于，包括：

存储器，用于存储程序；

处理器，耦合至所述存储器，用于执行所述程序，以用于：

模拟从数据库感知主数据库中数据变更的操作，从主数据库获取变更数据的信息；

根据所述变更数据的信息形成变更消息，并将所述变更消息通过消息中心发送至订阅方，以供订阅方根据所述变更消息对本地数据进行更新。