CN114661720A - 基于消息队列按权限分发数据的方法及系统 - Google Patents

Abstract

本发明公开了基于消息队列按权限分发数据的方法及系统，属于数据管理技术领域，要解决的技术问题为如何为用户解决公共数据的区分管理。包括如下步骤：配置用于存储数据的数据表并保存至数据库中；为每个数据库表配置专属的消息队列主题，消费者订阅消息队列主题并形成订阅关系；对于生产者发送的数据，通过数据管理服务指定消息队列主题编码，并将数据对应的主键数据和表名称发送至消息队列服务器；消息队列服务器基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；数据权限管理服务器访问数据库，查询出对应消费者的数据字段，将查询出的数据字段发送至对应的消费者。

Description

基于消息队列按权限分发数据的方法及系统

技术领域

本发明涉及数据管理技术领域，具体地说是基于消息队列按权限分发数据的方法及系统。

背景技术

用户需要管理不同下属机构对公共基础数据的不同需求，如不同地域的下属单位只需要管理其辖区范围内的实体或数据，或不同部门间只管理其部门下辖的人员物料等数据。传统的数据处理未能处理此种需求，需要一种方式对数据的不同字段和记录进行筛选，以实现数据个性化管理的需求。

如何为用户解决公共数据的区分管理，是需要解决的技术问题。

发明内容

本发明的技术任务是针对以上不足，提供基于消息队列按权限分发数据的方法及系统，来解决如何为用户解决公共数据的区分管理的技术问题。

第一方面，本发明的基于消息队列按权限分发数据的方法，包括如下步骤：

配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；

为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系；

对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称；

消息队列服务器基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；

数据权限管理服务器访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

作为优选，数据管理服务通过其放开的rest接口接收数据，或者，数据管理服务器通过其前端界面录入数据。

作为优选，还包括配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签；

所述订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

作为优选，对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将所述数据对应的主键数据和表名称发送至消息队列服务器；

消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

作为优选，所述存储于消息队列服务器中的订阅关系对应有回调接口，所述消息队列服务器用于基于所述回调接口访问数据权限管理服务器，所述回调接口中配置有对应的消费者ID和表名称；

所述数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

第二方面，本发明的基于消息队列按权限分发数据的系统，通过如第一方面任一项所述的基于消息队列按权限分发数据的方法进行数据分发，所述系统包括：

数据库；

配置模块，所述配置模块用于配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；

并用于为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系；

数据管理服务模块，所述数据管理服务模块用于对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称；

消息队列服务器，所述消息队列服务器用于基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；

数据权限管理服务器，所述数据权限管理服务器用于访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

作为优选，所述数据管理服务模块通过其放开的rest接口接收数据，或者，数据管理服务器通过其前端界面录入数据。

作为优选，所述配置模块用于配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签；

所述订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

作为优选，对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将所述数据对应的主键数据和表名称发送至消息队列服务器；

消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

作为优选，所述存储于消息队列服务器中的订阅关系对应有回调接口，所述消息队列服务器用于基于所述回调接口访问数据权限管理服务器，所述回调接口中配置有对应的消费者ID和表名称；

所述数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

本发明的基于消息队列按权限分发数据的方法及系统具有以下优点：

1、通过消息队列分发，字段权限精准控制的方式，实现数据的精准消费，适用于公共数据的个性化定制。如统一的人员表在集团不同部门之间的使用，原料表在不同生产部门间的使用，供应商在不同地区代理之间的使用等，使用此管理方式可以避免数据的分散管理，以及分散管理导致的数据冲突，重复，管理成本高等问题；

2、采用传送数据主键，由权限管理服务重新查询数据的方式，可以避免由于消息队列消息丢失的情况下传送过时数据的错误。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

下面结合附图对本发明进一步说明。

图1为实施例1基于消息队列按权限分发数据的方法的流程框图。

具体实施方式

下面结合附图和具体实施例对本发明作进一步说明，以使本领域的技术人员可以更好地理解本发明并能予以实施，但所举实施例不作为对本发明的限定，在不冲突的情况下，本发明实施例以及实施例中的技术特征可以相互结合。

本发明实施例提供基于消息队列按权限分发数据的方法及系统，用于解决如何为用户解决公共数据的区分管理的技术问题。

实施例1：

本发明基于消息队列按权限分发数据的方法，包括如下步骤：

S100、配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；

为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系；

S200、对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称；

S300、消息队列服务器基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；

S400、数据权限管理服务器访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

本实施例步骤S100为环境准备，每个数据模型在确立时，会生成一个专属的消息队列主题。需要接收该数据模型的数据的消费者应用，需要事先订阅需要接受数据的主题。

步骤S200数据可以经由数据管理服务开放的rest接口接收，也可由数据管理服务的前端界面录入，检验数据合规，生产成功后数据入库，并经由数据管理程序确定数据模型的主键，将只包含主键的数据连同模型名称以及对应消息队列主题发送至消息队列服务器。

步骤S300消息队列服务器访问数据库，根据订阅关系调用相应的回调接口，访问数据权限管理服务器。

步骤S400权限管理服务器接收到消息队列服务器的调用后，根据主键数据、表名称以及预配置于数据库中的数据权限，查询出包含符合对应消费者权限的数据的字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者，完成数据传送。

存储于数据库内的订阅关系和存储于消息队列服务器内的订阅关系不完全相同。消费者订阅消息队列主题形成订阅关系的时候，在消息队列服务器中存在有对应的回调接口，所述回调接口中包括对应的消费者ID和表名称，可反映消费者和消息队列主题也即数据表的对应关系，消息队列服务器用于基于所述回调接口访问数据权限管理服务器。

存储于数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

存储于数据库中的数据权限为预配置的，用于记录消费者有权限查看的数据字段。

因此，数据权限管理服务器访问数据库，根据数据对应的主键数据和表名称以及数据权限可以查询处符合消费者权限的数据字段，同时基于回调接口可从数据库中查询到对应消费者的消费者真实回调接口，以便于将查询出的数据字段发送至对应的消费者。

作为本实施例改进，步骤S100还配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签。订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

步骤S200对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将所述数据对应的主键数据和表名称发送至消息队列服务器。

步骤S300消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

本实施例的方法按照权限筛选发送对象和发送内容的方法，通过数据库记录的用户获取数据权限和信息内容权限，只发送给拥有权限的用户以符合其权限的数据，实现发送对象和内容的可控制。可灵活的针对不同用户进行数据获取内容的筛选。

实施例2：

本发明基于消息队列按权限分发数据的系统，包括数据库、配置模块、数据管理服务模块、消息队列服务器、数据权限管理服务器。

配置模块用于配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；并用于为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系。

数据管理服务模块用于对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称。

消息队列服务器用于基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

数据权限管理服务器用于访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

数据管理服务模块通过其放开的rest接口接收数据，或者，数据管理服务器通过其前端界面录入数据。

存储于数据库内的订阅关系和存储于消息队列服务器内的订阅关系不完全相同。消费者订阅消息队列主题形成订阅关系的时候，在消息队列服务器中存在有对应的回调接口，所述回调接口中包括对应的消费者ID和表名称，可反映消费者和消息队列主题也即数据表的对应关系，消息队列服务器用于基于所述回调接口访问数据权限管理服务器。

存储于数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

存储于数据库中的数据权限为预配置的，用于记录消费者有权限查看的数据字段。

因此，数据权限管理服务器访问数据库，根据数据对应的主键数据和表名称以及数据权限可以查询处符合消费者权限的数据字段，同时基于回调接口可从数据库中查询到对应消费者的消费者真实回调接口，以便于将查询出的数据字段发送至对应的消费者。

作为改进，配置模块用于配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签；订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将数据对应的主键数据和表名称发送至消息队列服务器。消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

本实施例的系统可执行实施例1公开的方法。

上文通过附图和优选实施例对本发明进行了详细展示和说明，然而本发明不限于这些已揭示的实施例，基与上述多个实施例本领域技术人员可以知晓，可以组合上述不同实施例中的手段得到本发明更多的实施例，这些实施例也在本发明的保护范围之内。

Claims (10)

1.基于消息队列按权限分发数据的方法，其特征在于包括如下步骤：

配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；

为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系；

对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称；

消息队列服务器基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；

数据权限管理服务器访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

2.根据权利要求1所述的基于消息队列按权限分发数据的方法，其特征在于数据管理服务通过其放开的rest接口接收数据，或者，数据管理服务器通过其前端界面录入数据。

3.根据权利要求1所述的基于消息队列按权限分发数据的方法，其特征在于还包括配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签；

所述订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

4.根据权利要求3所述的基于消息队列按权限分发数据的方法，其特征在于对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将所述数据对应的主键数据和表名称发送至消息队列服务器；

消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

5.根据权利要求1-4任一项所述的基于消息队列按权限分发数据的方法，其特征在于所述存储于消息队列服务器中的订阅关系对应有回调接口，所述消息队列服务器用于基于所述回调接口访问数据权限管理服务器，所述回调接口中配置有对应的消费者ID和表名称；

所述数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

6.基于消息队列按权限分发数据的系统，其特征在于通过如权利要求1-5任一项所述的基于消息队列按权限分发数据的方法进行数据分发，所述系统包括：

数据库；

配置模块，所述配置模块用于配置用于存储数据的数据表并保存至数据库中，所述数据表的内容包括字段名和数据，提取字段名形成有主键，所述数据表中主键对应的数据作为主键数据；

并用于为每个数据库表配置专属的消息队列主题，所述消息队列主题对应有消息队列主题编码作为其唯一标识码，消费者订阅消息队列主题并形成订阅关系，所述订阅关系存储于数据库及消息队列服务器中，所述订阅关系用于反映消息队列主题和消费者之间的映射关系；

数据管理服务模块，所述数据管理服务模块用于对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码，并将所述数据对应的主键数据和表名称发送至消息队列服务器，所述表名称为所述数据对应数据表的名称；

消息队列服务器，所述消息队列服务器用于基于数据管理服务指定的消息队列主题编码和对应的订阅关系，调用相应的回调接口访问数据权限管理服务器；

数据权限管理服务器，所述数据权限管理服务器用于访问数据库，基于所述数据对应的主键数据、表名称以及预配置于数据库内的数据权限，查询出对应消费者的数据字段，并调用预存储于数据库内的消费者真实回调接口将查询出的数据字段发送至对应的消费者。

7.根据权利要求6所述的基于消息队列按权限分发数据的系统，其特征在于所述数据管理服务模块通过其放开的rest接口接收数据，或者，数据管理服务器通过其前端界面录入数据。

8.根据权利要求7所述的基于消息队列按权限分发数据的系统，其特征在于所述配置模块用于配置用于生产数据的生产者的权限、配置用于接收数据的消费者的权限、以及配置订阅标签；

所述订阅标签用于限定数据在生产者和消费者之间传送权限，生产者发送的数据中配置有订阅标签，与所述数据对应消息队列主题存在订阅关系的消费者配置有相同的订阅标签。

9.根据权利要求8所述的基于消息队列按权限分发数据的系统，其特征在于对于生产者发送的数据，通过数据管理服务验证后存储至数据库对应的数据表中，通过数据管理服务指定消息队列主题编码和订阅标签，并将所述数据对应的主键数据和表名称发送至消息队列服务器；

消息队列服务器基于数据管理服务指定的消息队列主题编码、订阅标签以及应的订阅关系，调用相应的回调接口访问数据权限管理服务器。

10.根据权利要求6-9任一项所述的基于消息队列按权限分发数据的系统，其特征在于所述存储于消息队列服务器中的订阅关系对应有回调接口，所述消息队列服务器用于基于所述回调接口访问数据权限管理服务器，所述回调接口中配置有对应的消费者ID和表名称；

所述数据库中的订阅关系用于记录消费者真实回调接口和消费者ID之间的映射关系。

Images