CN105516364A - 一种云存储的异构消息处理方法及装置 - Google Patents

Abstract

本发明公开了一种云存储的异构消息处理方法及装置，该方法包括：第一通信端向第二通信端发送通信请求；所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。本发明通过消息中间件对多种协议的支持，使得集群内节点/进程间可通过不同协议传输异构消息，而应用层无需关心底层数据的传输细节。在降低了集群的部署成本的同时，提高了数据传输的效率，降低了数据在网络中的延迟，充分发挥了节点在网络中的通讯能力。

Description

一种云存储的异构消息处理方法及装置

技术领域

本发明涉及计算机云存储技术领域，特别是涉及一种云存储的异构消息处理方法及装置。

背景技术

云计算在全球范围内的迅速发展以及普及的过程中，其支持的应用涉及领域进一步扩大，同时数据计算的规模也在高速的增长。对于提供服务的集群性能的要求也越来越高，集群的规模也随之增大。这对集群内的通信、消息处理的能力提出了更高的要求。即要提供高速的通信处理能力，同时也要满足与不同应用的兼容，能够同时为多种服务提供支持。

由于TCP/IP协议在应用层广泛的使用，因此大多数的集群通信采用了此种方式，但是TCP/IP具有效率低、延迟大以及带宽低等缺点，难以满足高性能计算的需求。而针对大量数据的计算，RDMA通信往往能够获得低延迟、高带宽以及高效的传输效率，因此成为性能提升的热点技术。

然而，传统的通讯方式仅支持单一的通讯协议，无法在同时获得高传输效率以及高兼容性。同时，这样的通信方式往往为集群的实际部署提高了难度，增加了实施的成本。

发明内容

本发明的目的是提供一种云存储的异构消息处理方法及装置，目的在于解决现有的通讯方式中仅支持单一的通讯协议，无法同时获得高传输效率以及高兼容性、以及实施成本较高的问题。

为解决上述技术问题，本发明提供一种云存储的异构消息处理方法，包括：

第一通信端向第二通信端发送通信请求；

所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

可选地，所述根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信包括：

所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；

如果否，则创建从所述第一信使模型到所述第二信使模型的连接；

如果是，则根据所述连接进行数据的通信。

可选地，所述创建从所述第一信使模型到所述第二信使模型的连接包括：

创建用于发送以及接收的两个线程，单独处理对应的消息。

可选地，所述通过对应支持的通信协议进行数据的通信包括：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。

可选地，所述通信协议包括TCP/IP通信协议或RDMA通信协议。

本发明还提供了一种云存储的异构消息处理装置，包括：

发送模块，用于第一通信端向第二通信端发送通信请求；

获取模块，用于所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

通信模块，用于根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

可选地，所述通信模块包括：

查询单元，用于所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；

通信单元，用于当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建从所述第一信使模型到所述第二信使模型的连接；当所述第一信使模型的内部连接表中存在到所述第二信使模型的连接时，则根据所述连接进行数据的通信。

可选地，所述通信单元具体用于：

当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建用于发送以及接收的两个线程，单独处理对应的消息。

可选地，所述通信模块具体用于：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。

可选地，所述通信协议包括TCP/IP通信协议或RDMA通信协议。

本发明所提供的云存储的异构消息处理方法及装置，通过第一通信端向第二通信端发送通信请求；第一通信端通过第一信使模型获取第二通信端的第二信使模型的信息；信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；根据第一信使模型到第二信使模型的连接，通过对应支持的通信协议进行数据的通信。可见，本发明所提供的云存储的异构消息处理方法及装置，通过消息中间件对多种协议的支持，使得集群内节点/进程间可通过不同协议传输异构消息，而应用层无需关心底层数据的传输细节。在降低了集群的部署成本的同时，提高了数据传输的效率，降低了数据在网络中的延迟，充分发挥了节点在网络中的通讯能力。

附图说明

为了更清楚的说明本发明实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明所提供的云存储的异构消息处理方法的一种具体实施方式的流程图；

图2为本发明所提供的云存储的异构消息处理方法的另一种具体实施方式的流程图；

图3为本发明实施例提供的云存储的异构消息处理装置的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明所提供的云存储的异构消息处理方法的一种具体实施方式的流程图如图1所示，该方法包括：

步骤S101：第一通信端向第二通信端发送通信请求；

步骤S102：所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

不同消息通信的实体将实现一个对应的信使模型。信使模型中将包含对应实体到其他实体间的连接，连接用于消息的发送与接收。消息发送或者接收时，仅需要通过信使模型并通知信使模型消息发送或者接收的对端信使模型信息。

具体地，上层应用可根据自己支持的通信协议注册对应类型的信使模型，这样信使模型将根据其注册的协议类型选用底层的通信协议进行数据的发送与接收。应用无需关心底层的实现，并且其选择的信使模型仅涉及该模型本身消息处理所采用的协议类型，而不影响其他信使模型的协议类型。这样对于集群内部的不同组件，可根据自身的需要注册属于自己的信使模型，不同的信使模型上可同时发送与接收不同协议类型的异构消息。

步骤S103：根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

本发明所提供的云存储的异构消息处理方法，通过第一通信端向第二通信端发送通信请求；第一通信端通过第一信使模型获取第二通信端的第二信使模型的信息；信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；根据第一信使模型到第二信使模型的连接，通过对应支持的通信协议进行数据的通信。可见，本发明所提供的云存储的异构消息处理方法，通过消息中间件对多种协议的支持，使得集群内节点/进程间可通过不同协议传输异构消息，而应用层无需关心底层数据的传输细节。在降低了集群的部署成本的同时，提高了数据传输的效率，降低了数据在网络中的延迟，充分发挥了节点在网络中的通讯能力。

本发明所提供的云存储的异构消息处理方法中通信协议可以具体为TCP/IP通信协议或RDMA通信协议，当然还可以扩展为其他协议，这均不影响本发明的实现。

需要指出的是，本发明中上层应用可以根据自身需求使用任意一种通信方式访问集群，集群内部亦可以有选择的使用任意协议进行通信，并且多种协议类型的数据可以同时被处理，而无需上层应用的修改。

具体地，消息处理底层接口需针对两种协议提供两套通信处理接口，可保证两种协议的消息均可以被各自的通信接口所处理。两套接口互不影响，并且无资源共享，可同时被调用。

在上述实施例的基础上，本发明所提供的云存储的异构消息处理方法的另一种具体实施方式的流程图如图2所示，该方法包括：

步骤S201：第一通信端向第二通信端发送通信请求；

步骤S202：所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

步骤S203：所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；如果是，则进入步骤S204：如果否，则进入步骤S205；

步骤S204：创建从所述第一信使模型到所述第二信使模型的连接；

步骤S205：通过所述连接进行数据的通信。

具体地，信使模型根据获得的对端信使模型信息从内部连接表内查询到对应的连接，若不存在对应的连接，可以确定此为首次通信，则启动连接的创建。当获得到对应的连接后，则可以通过连接将数据发送或接受到指定信使模型。

优选地，在创建从所述第一信使模型到所述第二信使模型的连接时，可创建用于发送以及接收的两个线程，单独处理对应的消息。

这样设置能够保证消息处理的效率。上层应用所发送的消息被送入消息队列缓冲池内则返回；具体的消息收发是由控制线程从消息队列中取出对应的消息，完成实际的处理工作。实际处理消息的发送与接收时，将根据注册信使的类型选用对应的底层协议接口进行通信，实现了上层应用的协议与底层传输协议的匹配。

在通过对应支持的通信协议进行数据的通信中可进一步包括：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。信使模型当接受到来自某一连接上的消息时，需要将消息进行分发。根据消息的不同类型(与上层应用相关)，消息将进入分发队列，并被处理消息分发的线程分发到对应的应用中。至此，消息被成功发送到目的位置，消息发送完成。

本发明实施例将具体的通讯协议对通信的实体透明，使得在通信过程中，消息的发送既可以选用TCP/IP方式进行，也可以采用RDMA协议进行通信；两种协议并存于集群内部通信架构中，而无需在应用层做其他修改。应用在云存储领域，大大提高了集群部署的灵活性，对应用层具有更高的兼容性，同时在集群内部可通过RDMA高效的传输效率来获得更高的性能。

下面对本发明实施例提供的云存储的异构消息处理装置进行介绍，下文描述的云存储的异构消息处理装置与上文描述的云存储的异构消息处理方法可相互对应参照。

图3为本发明实施例提供的云存储的异构消息处理装置的结构框图，参照图3云存储的异构消息处理装置可以包括：

发送模块100，用于第一通信端向第二通信端发送通信请求；

获取模块200，用于所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

通信模块300，用于根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

可选地，本发明所提供的云存储的异构消息处理装置中通信模块300可以具体包括：

查询单元，用于所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；

通信单元，用于当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建从所述第一信使模型到所述第二信使模型的连接；当所述第一信使模型的内部连接表中存在到所述第二信使模型的连接时，则根据所述连接进行数据的通信。

可选地，本发明所提供的云存储的异构消息处理装置中上述通信单元具体用于：

当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建用于发送以及接收的两个线程，单独处理对应的消息。

可选地，本发明所提供的云存储的异构消息处理装置中上述通信模块300具体用于：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。

可选地，本发明所提供的云存储的异构消息处理装置中通信协议可以具体包括TCP/IP通信协议或RDMA通信协议。

综上所述，本发明所提供的云存储的异构消息处理方法及装置，将具体的通讯协议对通信的实体透明，使得在通信过程中，无需应用层的参与，实现异构消息的处理。本发明大大提高了集群部署的灵活性，降低了实施成本，获得了对应用层更高的兼容性，高效的发挥了网络带宽的性能，为集群间通信提供了高效的传输能力。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上对本发明所提供的云存储的异构消息处理方法以及装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种云存储的异构消息处理方法，其特征在于，包括：

第一通信端向第二通信端发送通信请求；

所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

2.如权利要求1所述的云存储的异构消息处理方法，其特征在于，所述根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信包括：

所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；

如果否，则创建从所述第一信使模型到所述第二信使模型的连接；

如果是，则根据所述连接进行数据的通信。

3.如权利要求2所述的云存储的异构消息处理方法，其特征在于，所述创建从所述第一信使模型到所述第二信使模型的连接包括：

创建用于发送以及接收的两个线程，单独处理对应的消息。

4.如权利要求1至3任一项所述的云存储的异构消息处理方法，其特征在于，所述通过对应支持的通信协议进行数据的通信包括：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。

5.如权利要求4所述的云存储的异构消息处理方法，其特征在于，所述通信协议包括TCP/IP通信协议或RDMA通信协议。

6.一种云存储的异构消息处理装置，其特征在于，包括：

发送模块，用于第一通信端向第二通信端发送通信请求；

获取模块，用于所述第一通信端通过第一信使模型获取所述第二通信端的第二信使模型的信息；其中，信使模型为不同消息通信的实体根据支持的通信协议预先注册的对应类型的模型；

通信模块，用于根据所述第一信使模型到所述第二信使模型的连接，通过对应支持的通信协议进行数据的通信。

7.如权利要求6所述的云存储的异构消息处理装置，其特征在于，所述通信模块包括：

查询单元，用于所述第一信使模型从内部连接表中查询是否存在到所述第二信使模型的连接；

通信单元，用于当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建从所述第一信使模型到所述第二信使模型的连接；当所述第一信使模型的内部连接表中存在到所述第二信使模型的连接时，则根据所述连接进行数据的通信。

8.如权利要求7所述的云存储的异构消息处理装置，其特征在于，所述通信单元具体用于：

当所述第一信使模型的内部连接表中不存在到所述第二信使模型的连接时，创建用于发送以及接收的两个线程，单独处理对应的消息。

9.如权利要求6至8任一项所述的云存储的异构消息处理装置，其特征在于，所述通信模块具体用于：

根据消息的类型，将通信消息发送至分发队列，通过处理消息分发的线程分发到对应的应用中。

10.如权利要求9所述的云存储的异构消息处理装置，其特征在于，所述通信协议包括TCP/IP通信协议或RDMA通信协议。