CN110300067B - 队列调整方法、装置、设备及计算机可读存储介质 - Google Patents

Abstract

本发明涉及金融科技领域，并公开了一种队列调整方法，该方法包括：当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。本发明还公开了一种队列调整装置、设备和一种计算机可读存储介质。本发明实现了根据订阅Topic的消息消费者数量的变动自适应调整Topic的队列数量。

Description

队列调整方法、装置、设备及计算机可读存储介质

技术领域

本发明涉及金融科技(Fintech)技术领域，尤其涉及队列调整方法、装置、设备及计算机可读存储介质。

背景技术

随着计算机技术的发展，越来越多的技术(大数据、分布式、区块链Blockchain、人工智能等)应用在金融领域，传统金融业正在逐步向金融科技(Fintech)转变，但由于金融行业的安全性、实时性要求，也对技术提出了更高的要求。

在目前的金融领域，普遍采用消息中间件实现不同系统之间的解耦，以提高整体服务弹性，具体方式是producer(消息生产者)生产消息并发送到消息中间件的Topic(主题)，Consumer(消息消费者)订阅Topic，并消费Topic中的消息。为了提升消息的读写性能，当某个Topic的消息量较大时，可以在该Topic下设置多个Queue(队列)，每个队列为一个独立的逻辑分区，且对于一个消费组，每个队列同时只能被消费组中一个消费者使用，当配置的队列个数比消费者个数少的时候，会有消费者分不到队列，当配置的队列个数比消费者个数多的时候，在每个队列的流量均等的情况下，分到队列多的消费者的负载会比其他消费者高，因此，当Topic队列个数和消费者个数不一致时，需要将Topic队列个数调整为和消费者个数相等，以实现负载均衡。

然而，目前的Topic队列数量调整只能通过人工介入调整，即通过消息中间件提供的接口修改Topic队列配置，这种方式操作较为繁琐，无法实现对Topic队列个数的自适应调整。

发明内容

本发明的主要目的在于提出一种队列调整方法、装置、设备及计算机可读存储介质，旨在实现根据订阅Topic的消费者数量的变动自适应调整Topic的队列数量。

为实现上述目的，本发明提供一种方法，所述方法包括如下步骤：

当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；

若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。

优选地，所述根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic的步骤包括：

判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；

若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

优选地，所述对所述新订阅的Topic执行队列扩展操作的步骤包括：

获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；

当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；

异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；

当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

优选地，所述对所述取消订阅的Topic执行队列缩减操作的步骤包括：

获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；

当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；

异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；

当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；

若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

优选地，所述队列调整方法还包括：

当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；

对所述Topic订阅列表中的Topic执行队列缩减操作。

此外，为实现上述目的，本发明还提供一种队列调整装置，所述队列调整装置包括：

第一获取模块，用于当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

判断模块，用于根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

扩展模块，用于若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；

第一缩减模块，用于若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。

优选地，所述判断模块还用于：

判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；

若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

优选地，所述扩展模块还用于：

获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；

当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；

异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；

当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

优选地，所述第一缩减模块还用于：

获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；

当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；

异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；

当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；

若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

优选地，所述队列调整装置还包括：

第二获取模块，用于当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；

第二缩减模块，还用于对所述Topic订阅列表中的Topic执行队列缩减操作。

此外，为实现上述目的，本发明还提供一种队列调整设备，所述队列调整设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的队列调整程序，所述队列调整程序被所述处理器执行时实现如上所述的队列调整方法的步骤。

此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有队列调整程序，所述队列调整程序被处理器执行时实现如上所述的队列调整方法的步骤。

本发明当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。通过这种方式，当消息消费者有新订阅的Topic，即订阅Topic的消息消费者数量增加时，能够自适应进行Topic队列扩展，当消息消费者有取消订阅的Topic，即订阅Topic的消息消费者数量减少时，能够自适应进行Topic队列缩减，从而本发明实现了根据订阅Topic的消息消费者数量的变动自适应调整Topic的队列数量。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图；

图2为本发明队列调整方法第一实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

如图1所示，图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图。

本发明实施例队列调整设备可以是PC机、服务器等设备。

如图1所示，该队列调整设备可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的设备结构并不构成对设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及队列调整程序。

在图1所示的设备中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的队列调整程序，并执行下述队列调整方法实施例中的操作。

基于上述硬件结构，提出本发明队列调整方法实施例。

参照图2，图2为本发明队列调整方法第一实施例的流程示意图，所述方法包括：

步骤S10，当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

在目前的金融领域，普遍采用消息中间件实现不同系统之间的解耦，以提高整体服务弹性。以RocketMQ(Message Queue，消息队列)为例，RocketMQ是一款纯java、分布式、队列模型的开源消息中间件，在各类金融交易中承担着重要的角色，比如在活期账户转出服务场景中，出于安全考虑，每笔用户活期账户转出都要发送一条短信通知，在部署了RocketMQ的情况下，账户转出系统不用关注其他系统对它的依赖，而只需要产生账户转出事件的消息并发送到RocketMQ，其他有需要的服务(比如反欺诈服务)各自去RocketMQ订阅这个消息就行了，由此实现了不同系统之间的解耦。

本实施例队列调整方法应用于队列调整设备，该队列调整设备作为分布式系统的一部分，其上部署有消息中间件，该消息中间件可以是当前常见的消息中间件，比如RabbitMQ、Kafka、ActiveMQ、RocketMQ等，也可以是其他消息中间件，本实施例对此不作限定。在分布式系统中，消息传递模式为：producer(消息生产者，也即产生具体主题的消息的客户端)生产消息并发送到消息中间件的Topic(主题)，Consumer(消息消费者，也即消费某个或若干个具体主题的消息的客户端)订阅Topic，并消费Topic中的消息。其中Topic为同一类消息的分类名称，一个Topic存储了一类相同的消息。

具体地，本实施例队列调整方法可以通过Broker实现，Broker是消息中间件负责消息存储和转发的核心组件，当消息消费者正常上线时，会向Broker发送心跳信号注册它所订阅的Topic，当消息消费者正常下线时，会向Broker发送心跳信号去掉在Broker上注册的Topic订阅信息。

在本实施例中，Broker可以实时检测是否接收到消息消费者的心跳，当检测到消息消费者的心跳信号时，获取该心跳信号中携带的Topic订阅信息，该Topic订阅信息包括消息消费者所请求订阅的Topic。

步骤S20，根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

该步骤中，Broker根据上述获取到的Topic订阅信息，判断该消息消费者是否有新订阅的Topic或取消订阅的Topic。

在一实施方式中，该步骤S20可以包括：判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

具体地，Broker首先判断消息中间件上是否预先注册有该消息消费者的Topic订阅信息，若消息中间件上预先注册有该消息消费者的Topic订阅信息，则将当前获取到的Topic订阅信息与预先注册的Topic订阅信息进行比对，以判断该消息消费者当前是否有新订阅的Topic或取消订阅的Topic，比如，若预先注册的Topic订阅信息包括Topic1、Topic2，当前获取到的Topic订阅信息包括Topic1、Topic2、Topic3，则可以判定Topic3为当前新订阅的Topic。

若所述消息消费者有新订阅的Topic，则执行步骤S30，对所述新订阅的Topic执行队列扩展操作；

该步骤中，队列(Queue)是对Topic的逻辑划分，每个队列为一个独立的逻辑分区。根据现有的负载均衡原则，对于一个消费组(Consumer Group)，每个队列同时只能被该消费组中的一个消息消费者使用。

由于现有技术中，消息生产者向Topic队列发送消息是轮询的方式，因此可以认为每个队列的消息量是均等的。本实施例中，当判断上述消息消费者当前有新订阅的Topic时，说明新订阅的Topic对应的消息消费者数量增加，此时需要对新订阅的Topic执行队列扩展操作，其中，扩展指的是扩展队列的个数，扩展方式优选为：扩展队列，以使新订阅的Topic的队列个数和当前订阅了该Topic的消息消费者个数相等，如此，可以使得每个消息消费者分到的队列是均等的，从而均衡每个消息消费者的流量负载，提升消息的读写性能。

若所述消息消费者有取消订阅的Topic，则执行步骤S40，对所述取消订阅的Topic执行队列缩减操作。

该步骤中，当判断上述消息消费者当前有取消订阅的Topic时，说明取消订阅的Topic对应的消息消费者数量减少，此时需要对取消订阅的Topic执行队列缩减操作，其中，缩减指的是缩减队列的个数，缩减方式优选为：缩减队列，以使取消订阅的Topic的队列个数和当前订阅了该Topic的消息消费者个数相等，如此，也可以使得每个消息消费者分到的队列是均等的，从而均衡每个消息消费者的流量负载，提升消息的读写性能。

本实施例通过上述方式，当消息消费者有新订阅的Topic，即订阅Topic的消息消费者数量增加时，能够自适应进行Topic队列扩展，当消息消费者有取消订阅的Topic，即订阅Topic的消息消费者数量减少时，能够自适应进行Topic队列缩减，从而本实施例实现了根据订阅Topic的消息消费者数量的变动自适应调整Topic的队列数量。

进一步地，基于本发明队列调整方法第一实施例，提出本发明队列调整方法第二实施例。

在本实施例中，对所述新订阅的Topic执行队列扩展操作的步骤具体可以包括：获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

其中，可读队列个数指的是能够被消息消费者读取消息的队列，可写队列指的是能够被消息生产者写入消息的队列，为防止消息生产者在某一队列中写入消息而该队列没有被任何消息消费者监听的情况发生，对于一个Topic，应在任何时候满足“可读队列个数大于或等于可写队列个数”。

在本实施例中，当消息消费者个数增加时，需要扩展Topic队列，扩展具体分为以下步骤：

a、从Broker上获取当前Topic的可读队列个数Nr1，以及消息消费者所属的消息消费者分组中的消费者个数Nc1，并将两者进行比较；

b、若Nc1>Nr1，则将Nr1修改为Nc1；

c、异步等待第一预设时长后，从Broker上获取当前Topic的可写队列个数Nw、可读队列个数Nr2，以及消息消费者分组中的消费者个数Nc2，并将三者进行比较；

其中，第一预设时长可以灵活设置，比如10s；异步等待第一预设时长的目的为：保证消息消费者监听到了步骤b所扩展的可读队列后再对应扩展可写队列，从而防止扩展了可写队列但没有消息消费者监听的情况发生。

d、当Nc2>Nw且Nc2≤Nr2时，将Nw修改为Nc2。

上述方式通过首先扩展可读队列，并确保消息消费者监听到了所扩展的可读队列后，再对应扩展可写队列，实现了在消息消费者个数增加时，自适应扩展Topic的可读队列个数和可写队列个数，且满足了扩展后的可读队列个数等于消息消费者个数，且大于或等于可写队列个数的要求。

进一步地，基于本发明队列调整方法第二实施例，提出本发明队列调整方法第三实施例。

在本实施例中，对所述取消订阅的Topic执行队列缩减操作的步骤具体可以包括：获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

在本实施例中，当消息消费者个数减少时，需要缩减Topic队列，缩减具体分为以下步骤：

a’、从Broker上获取当前Topic的可写队列个数Nw，以及消息消费者所属的消息消费者分组中的消费者个数Nc1，并将两者进行比较；

b’、若Nw>Nc1，则确定待缩减的可写队列，并将Nw修改为Nc1；

其中，确定待缩减的可写队列的方式可以为从现有可写队列中随机选择，也可以是按预定规则选择，本实施例对此不作限定。

c’、异步等待第二预设时长后，从Broker上获取当前Topic的可读队列个数Nr，以及消息消费者分组中的消费者个数Nc2，并将两者进行比较；

其中，第二预设时长可以灵活设置，在一实施方式中，该第二预设时长可以设置得较长，比如5分钟，如此在5分钟内，若消息消费者重新上线(重启)则实际消息消费者个数前后并无变化，此时无需对Topic执行队列缩减操作；异步等待第二预设时长的目的为：保证消息生产者获知到了步骤b’所缩减的可写队列后再对应缩减可读队列，从而防止消息生产者仍向缩减了的可写队列写消息的情况发生。

d’、当Nr>Nc2时，判断上述待缩减的可写队列上的消息是否被消费完；

e’、若上述待缩减的可写队列上的消息被消费完，则将Nw修改为Nc2。

需要说明的是，若上述待缩减的可写队列上的消息未被消费完，则可以返回步骤c’，直至判断待缩减的可写队列上的消息被消费完后，再将Nw修改为Nc2。

上述方式通过首先缩减可写队列，并确保消息生产者获知到了所缩减的可写队列后，再对应缩减可读队列，实现了在消息消费者个数减少时，自适应缩减Topic的可读队列个数和可写队列个数，且满足了缩减后的可读队列个数等于消息消费者个数，且大于或等于可写队列个数的要求。

进一步地，基于本发明队列调整方法第一实施例，提出本发明队列调整方法第四实施例。

在本实施例中，所述队列调整方法还可以包括：当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；对所述Topic订阅列表中的Topic执行队列缩减操作。

在本实施例中，当消息消费者发生故障，没有正常下线或者假死的时候，可以依靠Broker对消息消费者存活性的检查，发现异常停机的消息消费者和该消息消费者订阅的Topic列表，然后对该Topic订阅列表中的Topic执行队列缩减操作。由此，保证了当消息消费者发生故障时，也能够自适应调整Topic的队列数量。

本发明还提供一种队列调整装置。所述队列调整装置包括：

第一获取模块，用于当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

判断模块，用于根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

扩展模块，用于若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；

第一缩减模块，用于若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。

进一步地，所述判断模块还用于：

判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；

若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

进一步地，所述扩展模块还用于：

获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；

当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；

异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；

当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

进一步地，所述第一缩减模块还用于：

获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；

当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；

异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；

当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；

若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

进一步地，所述队列调整装置还包括：

第二获取模块，用于当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；

第二缩减模块，还用于对所述Topic订阅列表中的Topic执行队列缩减操作。

上述各程序模块所执行的方法可参照本发明队列调整方法各个实施例，此处不再赘述。

本发明还提供一种计算机可读存储介质。

本发明计算机可读存储介质上存储有队列调整程序，所述队列调整程序被处理器执行时实现如上所述的队列调整方法的步骤。

其中，在所述处理器上运行的队列调整程序被执行时所实现的方法可参照本发明队列调整方法各个实施例，此处不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个计算机可读存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (12)

1.一种队列调整方法，其特征在于，所述队列调整方法包括如下步骤：

当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；

若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。

2.如权利要求1所述的队列调整方法，其特征在于，所述根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic的步骤包括：

判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；

若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

3.如权利要求1或2所述的队列调整方法，其特征在于，所述对所述新订阅的Topic执行队列扩展操作的步骤包括：

获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；

当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；

异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；

当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

4.如权利要求3所述的队列调整方法，其特征在于，所述对所述取消订阅的Topic执行队列缩减操作的步骤包括：

获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；

当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；

异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；

当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；

若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

5.如权利要求1所述的队列调整方法，其特征在于，所述队列调整方法还包括：

当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；

对所述Topic订阅列表中的Topic执行队列缩减操作。

6.一种队列调整装置，其特征在于，所述队列调整装置包括：

第一获取模块，用于当检测到消息消费者的心跳信号时，获取所述心跳信号中携带的主题Topic订阅信息；

判断模块，用于根据获取到的所述Topic订阅信息，判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic；

扩展模块，用于若所述消息消费者有新订阅的Topic，则对所述新订阅的Topic执行队列扩展操作；

第一缩减模块，用于若所述消息消费者有取消订阅的Topic，则对所述取消订阅的Topic执行队列缩减操作。

7.如权利要求6所述的队列调整装置，其特征在于，所述判断模块还用于：

判断消息中间件上是否预先注册有所述消息消费者的Topic订阅信息；

若是，则将获取到的所述Topic订阅信息与预先注册的所述Topic订阅信息进行比对，以判断所述消息消费者当前是否有新订阅的Topic或取消订阅的Topic。

8.如权利要求6或7所述的队列调整装置，其特征在于，所述扩展模块还用于：

获取当前所述新订阅的Topic的第一可读队列个数，以及所述消息消费者所属的消费者分组中的第一消费者个数，将所述第一可读队列个数与所述第一消费者个数进行比较；

当所述第一消费者个数大于所述第一可读队列个数时，将所述第一可读队列个数修改为所述第一消费者个数；

异步等待第一预设时长后，获取当前所述新订阅的Topic的第一可写队列个数、第二可读队列个数，以及所述消息消费者分组中的第二消费者个数，将所述第一可写队列个数、第二可读队列个数分别与所述第二消费者个数进行比较；

当所述第二消费者个数大于所述第一可写队列个数，且小于或等于所述第二可读队列个数时，将所述第一可写队列个数修改为所述第二消费者个数。

9.如权利要求8所述的队列调整装置，其特征在于，所述第一缩减模块还用于：

获取当前所述取消订阅的Topic的第二可写队列个数，以及所述消息消费者分组中的第三消费者个数，将所述第二可写队列个数与所述第三消费者个数进行比较；

当所述第二可写队列个数大于所述第三消费者个数时，确定待缩减的可写队列，并根据所述待缩减的可写队列将所述第二可写队列个数修改为所述第三消费者个数；

异步等待第二预设时长后，获取当前所述取消订阅的Topic的第三可读队列个数，以及所述消息消费者分组中的第四消费者个数，将所述第三可读队列个数与所述第四消费者个数进行比较；

当所述第三可读队列个数大于所述第四消费者个数时，判断所述待缩减的可写队列上的消息是否被消费完；

若所述待缩减的可写队列上的消息被消费完，则将所述第三可读队列个数修改为所述第四消费者个数。

10.如权利要求6所述的队列调整装置，其特征在于，所述队列调整装置还包括：

第二获取模块，用于当检测到所述消息消费者异常停机时，获取所述消息消费者当前的Topic订阅列表；

第二缩减模块，还用于对所述Topic订阅列表中的Topic执行队列缩减操作。

11.一种队列调整设备，其特征在于，所述队列调整设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的队列调整程序，所述队列调整程序被所述处理器执行时实现如权利要求1至5中任一项所述的队列调整方法的步骤。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有队列调整程序，所述队列调整程序被处理器执行时实现如权利要求1至5中任一项所述的队列调整方法的步骤。

Images