CN115914376A - 物联网数据处理方法、装置、设备和计算机可读存储介质 - Google Patents

Abstract

本申请提供一种物联网数据处理方法、装置、设备和计算机可读存储介质；本申请的方法应用于设置物联网数据处理框架的设备，方法包括：获取待处理的物联网数据，将所述物联网数据发送至消息中间件；通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据；本申请中物联网数据处理框架将消息中间件和发布订阅消息平台的接口进行集成，物联网数据处理框架借助消息中间件和发布订阅消息平台将物联网数据进行采集后处理，可以实现多种类物联网数据的处理，保证数据处理的便捷性和实时性。

Description

物联网数据处理方法、装置、设备和计算机可读存储介质

技术领域

本申请涉及物联网技术领域，具体涉及一种物联网数据处理方法、装置、设备和计算机可读存储介质。

背景技术

随着通信技术的发展，物联网(英语全称：Internet of Things，英文简称：IoT)发展一日千里，“物联网+”逐渐取代了“互联网+”的方案。

物联网平台可以实现底层终端设备的“管、控、营”一体化，为上层提供应用开发和统一接口，构建终端设备和业务的端到端通道；随着AI人工智能、机器学习等技术的进一步成熟，物联网平台为用户提供更为强大的商业分析功能。

众所周知，物联网端到端会涉及不同种类的设备，从设备采集的上行数据种类繁多，包含了众多事件的处理，不同设备的通信协议不同，物联网数据传输标准不同，物联网数据种类不同，物联网数据处理规则不同，在物联网端对端交互是一项极为庞大复杂的工程。

发明内容

本申请提供一种物联网数据处理方法、装置、设备和计算机可读存储介质，旨在解决现有的物联网端对端时，物联网数据处理困难的技术问题。

一方面，本申请提供一种物联网数据处理方法，所述物联网数据处理方法应用于物联网数据处理设备，所述物联网数据处理设备设置框架；

所述物联网数据处理方法包括：

获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

在本申请一些实施例中，所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件之前，所述方法包括：

设置消息中间件的接口信息和发布订阅消息平台的接口信息；

设置所述发布订阅消息平台关联的数据处理策略，所述数据处理策略是处理物联网数据的处理规则；

构建预设数据库，用于保存所述发布订阅消息平台处理后的物联网数据；

将所述消息中间件的接口信息、所述发布订阅消息平台的接口信息、所述数据处理策略和所述预设数据库的数据库信息进行封装，形成物联网数据处理框架。

在本申请一些实施例中，所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件，包括：

获取待处理的物联网数据，以及所述物联网数据的数量类型；

将所述物联网数据按照所述物联网数据的数据类型分批发送至消息中间件；

所述物联网数据包括：标准物联网数据、私有协议物联网数据、设备状态消息、设备确认消息、OTA数据和设备影子功能数据至少一种。

在本申请一些实施例中，所述通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台，包括：

若所述物联网数据为标准物联网数据和/或私有协议物联网数据，则将所述物联网数据进行标准化处理，得到包含数据头部和数据主体的标准化的物联网数据；

通过所述消息中间件识别所述物联网数据的数据头部，得到所述物联网数据的数据类型；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型对应的发布订阅消息平台。

在本申请一些实施例中，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

通过预设的数据消费网关获取预设策略库中各所述发布订阅消息平台对应的数据处理策略；

对每一所述发布订阅消息平台中的所述物联网数据，按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

在本申请一些实施例中，所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件之后，所述方法包括：

若所述物联网数据为设备下线数据，则在检测到设备消息下发时，将所述设备消息保存至预设的缓存数据库中；

若所述物联网数据为设备上线数据，则触发消息发送指令，将预设的缓存数据库中的设备消息发送至所述设备消息对应的目标设备。

在本申请一些实施例中，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为设备确认消息，则按照所述发布订阅消息平台对应的数据处理策略将所述设备确认消息发送至预设数据库；

所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据之后，所述方法包括：

对所述预设数据库中所述设备确认消息对应的目标设备进行实时监控。

在本申请一些实施例中，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为OTA数据，则将所述OTA数据对应的OTA升级结果反馈至预设数据库。

在本申请一些实施例中，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为设备影子数据，则按照所述设备影子数据对应的数据处理策略将所述设备影子数据中的属性数据进行更新；

所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据之后，所述方法包括：

将所述设备影子数据与预先设置的期望值进行比对；

若所述设备影子数据与预先设置的期望值不同，则将所述设备影子数据发送至设备影子对应的目标设备。

另一方面，本申请还提供所述物联网数据处理装置设置于物联网数据处理设备，所述物联网数据处理装置包括：

获取模块，用于获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

发送模块，用于通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

处理模块，用于按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

另一方面，本申请还提供一种物联网数据处理设备，所述物联网数据处理设备包括：

一个或多个处理器；

存储器；以及

一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现所述的物联网数据处理方法。

另一方面，本申请还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行所述的物联网数据处理方法中的步骤。

本申请提供的物联网数据处理方法应用于设置有物联网数据处理框架的物联网数据处理设备；本申请实施例中物联网数据处理框架将消息中间件和发布订阅消息平台的接口进行集成，物联网数据处理框架借助消息中间件将不同种类的物联网数据分流到对应的发布订阅消息平台，使得发布订阅消息平台按照各自数据处理策略对物联网数据进行后处理，保证了物联网数据处理的便捷性和实时性，实现了海量物联网数据的处理，同时降低了对物联网数据处理设备性能的要求，与此同时，由于物联网数据处理框架可以对多种类物联网数据的处理实现了数据处理的兼容，同时实现了物联网中不同设备的兼容。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例中提供的物联网数据处理方法的一个具体场景示意图；

图2为本申请实施例中提供的物联网数据处理方法中框架搭建的一个实施例流程示意图；

图3为本申请实施例中提供的物联网数据处理方法中物联网数据处理的一个实施例流程示意图；

图4为本申请实施例中提供的物联网数据处理方法中标准物联网数据和/或私有协议物联网数据处理的一个实施例流程示意图；

图5为本申请实施例中提供的物联网数据处理方法中标准物联网数据和/或私有协议物联网数据处理的一个实施例的具体场景示意图；

图6是本申请实施例中提供的物联网数据处理方法中设备状态数据处理的一个实施例的流程示意图；

图7为本申请实施例中提供的物联网数据处理方法中设备状态数据处理的一个实施例的具体场景示意图；

图8是本申请实施例中提供的物联网数据处理方法中设备确认消息处理的一个实施例的流程示意图；

图9是本申请实施例中提供的物联网数据处理方法中设备影子数据处理的一个实施例的流程示意图；

图10是本申请实施例中提供的物联网数据处理方法中设备影子数据处理的一个实施例的具体场景示意图；

图11是本申请实施例中提供的物联网数据处理装置的一个实施例结构示意图；

图12是本申请实施例中提供的物联网数据处理设备的一个实施例结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明包含的范围。

在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

在本申请中，“示例性”一词用来表示“用作例子、例证或说明”。本申请中被描述为“示例性”的任何实施例不一定被解释为比其它实施例更优选或更具优势。为了使本领域任何技术人员能够实现和使用本发明，给出了以下描述。在以下描述中，为了解释的目的而列出了细节。应当明白的是，本领域普通技术人员可以认识到，在不使用这些特定细节的情况下也可以实现本发明。在其它实例中，不会对公知的结构和过程进行详细阐述，以避免不必要的细节使本发明的描述变得晦涩。因此，本发明并非旨在限于所示的实施例，而是与符合本申请所公开的原理和特征的最广范围相一致。

本申请实施例提供一种物联网数据处理方法、装置、设备及计算机可读存储介质，以下分别进行详细说明。

本发明实施例中的物联网数据处理方法应用于物联网数据处理装置，物联网数据处理装置设置于物联网数据处理设备，物联网数据处理设备中设置有一个或多个处理器、存储器，以及一个或多个应用程序，其中一个或多个应用程序被存储于存储器中，并配置为由处理器执行以实现物联网数据处理方法；物联网数据处理设备可以是终端，例如，手机或平板电脑，物联网数据处理设备还可以是一台服务器，或者多台服务器组成的服务集群。

如图1所示，图1为本申请实施例中物联网数据处理方法的场景示意图，本发明实施例中物联网数据处理场景中包括物联网数据处理设备100(物联网数据处理设备100中集成有物联网数据处理装置)，物联网数据处理设备100中运行物联网数据处理对应的计算机可读存储介质，以执行物联网数据处理的步骤。

可以理解的是，图1所示物联网数据处理方法的场景中的物联网数据处理设备，或者物联网数据处理设备中包含的装置并不构成对本发明实施例的限制，即，物联网数据处理方法的场景中包含的设备数量、设备种类，或者各个设备中包含的装置数量、装置种类不影响本发明实施例中技术方案整体实现，均可以算作本发明实施例要求保护技术方案的等效替换或衍生。

本发明实施例中物联网数据处理设备100设置，图像轮廓管理设备100主要用于：获取待处理的物联网数据，将所述物联网数据发送至消息中间件；通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

本发明实施例中该物联网数据处理设备100可以是独立的物联网数据处理设备，也可以是物联网数据处理设备组成的物联网数据处理设备网络或物联网数据处理设备集群，例如，本发明实施例中所描述的物联网数据处理设备100，其包括但不限于计算机、网络主机、单个网络物联网数据处理设备、多个网络物联网数据处理设备集或多个物联网数据处理设备构成的云物联网数据处理设备。其中，云物联网数据处理设备由基于云计算(Cloud Computing)的大量计算机或网络物联网数据处理设备构成。

本领域技术人员可以理解，图1中示出的应用环境，仅仅是与本申请方案一种应用场景，并不构成对本申请方案应用场景的限定，其他的应用环境还可以包括比图1中所示更多或更少的物联网数据处理设备，或者物联网数据处理设备网络连接关系，例如图1中仅示出1个物联网数据处理设备，可以理解的，该物联网数据处理方法的场景还可以包括一个或多个其他物联网数据处理设备，具体此处不作限定；该物联网数据处理设备100中还可以包括存储器，用于存储物联网数据。

此外，本申请物联网数据处理方法的场景中物联网数据处理设备100可以设置显示装置，或者物联网数据处理设备100中不设置显示装置与外接的显示装置200通讯连接，显示装置200用于输出物联网数据处理设备中物联网数据处理方法执行的结果。物联网数据处理设备100可以访问后台数据库300(后台数据库可以是物联网数据处理设备的本地存储器中，后台数据库还可以设置在云端)，后台数据库300中保存有物联网数据处理相关的信息。

需要说明的是，图1所示的物联网数据处理方法的场景示意图仅仅是一个示例，本发明实施例描述的物联网数据处理方法的场景是为了更加清楚的说明本发明实施例的技术方案，并不构成对于本发明实施例提供的技术方案的限定。

基于上述物联网数据处理方法的场景，提出了物联网数据处理方法的实施例，本实施例中物联网数据处理方法包括：

获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

本实施例中物联网数据处理方法应用在物联网数据处理设备，物联网数据处理设备设置有物联网数据处理框架，物联网数据处理设备预先搭建物联网数据处理框架，如图2所示，图2为本申请实施例中物联网数据处理方法中框架搭建的一个实施例流程示意图，具体地，框架搭建的步骤包括步骤201-204：

201，设置消息中间件的接口信息和发布订阅消息平台的接口信息。

本实施例中的物联网数据处理方法应用在物联网数据处理设备，物联网数据处理设备的种类不作具体限定，物联网数据处理设备可以是服务器或者终端。

物联网数据处理设备接收物联网数据处理框架搭建请求，物联网数据处理框架搭建请求的触发方式不作具体限定，即，物联网数据处理框架搭建请求可以是用户主动触发的，例如，用户根据业务需求输入框架信息，触发物联网数据处理框架搭建请求；此外，物联网数据处理框架搭建请求还可以是物联网数据处理设备自动触发的，例如，物联网数据处理设备中预先设置在接收到业务开发需求时，自动触发物联网数据处理框架搭建请求。

物联网数据处理设备接收物联网数据处理框架搭建请求之后，物联网数据处理设备输出消息中间件设置页面，以供用户设置处理物联网数据的消息中间件的接口信息；物联网数据处理设备输出发布订阅消息平台设置页面，以供用户设置处理物联网数据的发布订阅消息平台的接口信息；接口信息包括接口标识信息、接口传输协议等等。

202，设置所述发布订阅消息平台关联的数据处理策略，所述数据处理策略是处理物联网数据的处理规则。

物联网数据处理设备输出策略制定页面，以供用户设置发布订阅消息平台关联的数据处理策略，数据处理策略是指不同物联网数据的数据处理规则，数据处理策略包括：标准物联网数据的处理规则、私有协议物联网数据的处理规则、物联网中各个设备的设备上下线信息的处理规则等等。

203，构建预设数据库，用于保存所述发布订阅消息平台处理后的物联网数据。

物联网数据处理设备触发数据库创建指令，构建数据库中各个数据表的格式、数据库的接口和数据库位置等等，以完成预设数据库的构建，预设数据库用于保存发布订阅消息平台处理后的物联网数据，方便用户查看，或者后期物联网数据的利用。

204，将所述消息中间件的接口信息、所述发布订阅消息平台的接口信息、所述数据处理策略和所述预设数据库的数据库信息进行封装，形成物联网数据处理框架。

物联网数据处理设备根据消息中间件的接口信息、发布订阅消息平台的接口信息、数据处理策略和预设数据库的数据库信息，将消息中间件的接口、发布订阅消息平台的接口、数据处理策略的访问接口和预设数据库的访问接口进行封装，形成物联网数据处理框架。本实施例中物联网数据处理框架，将物联网数据能够在保证物联网数据处理性能的前提下，降低物联网平台的复杂性，同时数据处理框架能够横向扩展，提升数据的处理能力。

如图3所示，图3为本申请实施例中提供的物联网数据处理方法中物联网数据处理的一个实施例流程示意图。

本实施例中物联网数据处理方法包括步骤301～303：

301，获取待处理的物联网数据，将所述物联网数据发送至消息中间件。

本实施例中的物联网数据处理设备中搭载物联网数据处理框架，物联网数据处理框架获取待处理的物联网数据，物联网数据处理框架将物联网数据发送至消息中间件，以通过消息中间件将物联网数据分流到不同的发布订阅消息平台，通过发布订阅消息平台关联的数据处理策略对物联网数据进行处理，这样可以实现不同数量类型物联网数据的处理。

即，物联网数据处理设备获取待处理的物联网数据，以及物联网数据的数量类型；物联网数据处理设备将物联网数据发送至消息中间件；物联网数据包括：标准物联网数据、私有协议物联网数据、设备状态消息、设备确认消息、平台功能类数据(平台功能类数据包括OTA数据和设备影子功能数据)至少一种；其中：

标准物联网数据是指符合平台定义平台可以解析的标准物联网数据；通常物联网平台会有固定的数据格式，标准物联网数据用户上传数据的协议符合平台所定义的协议，或者明文数据符合平台的数据字段标准。通常标准物联网数据需要通过物联网平台的标准网关进行数据的采集和转发。

私有协议物联网数据是指不符合平台要求用户自定义的数据，私有协议的物联网数据不能够通过标准网关进行采集；私有协议物联网数据需要和标准物联网数据进行拆分，以防止数据混乱造成消息消费混乱的情况。

设备状态数据是指设备上下线状态数据，传统物联网平台对于设备状态判断，依赖于设备主动上报设备状态数据到物联网数据处理框架，设备主动上报设备状态数据的时间通常为1小时，物联网数据处理框架通常采用最后一条上报设备状态数据的确定设备状态；也就是说，现有的物联网数据处理框架不能做到分钟级别的设备状态监控。同时由于设备状态的判断依赖于设备状态数据的上报。因此对于每条上传的数据都需要进行处理和判断；会影响网关处理数据的性能。

平台功能类数据涉及到平台类功能的处理和反控，平台功能类数据，例如，ota、设备影子的相关数据；平台功能类数据和普通上报的物联网数据不同，平台功能类数据需要根据在平台侧的功能要求，对平台功能类数据的比对、计算等处理逻辑，根据平台功能类数据对设备进行相应控制。

设备确认数据是指设备对数据传输的反馈消息，设备确认数据包括消息ack返回信息；通常物联网平台下发消息到设备，对于设备是否收到消息无法判断。因此也无法对下发的消息进行缓存。为了保证下发消息能够正常到达，物联网数据需要根据设备是否在线来对下发消息进行判断；这样设备确认数据类型的物联网数据效率和性能都较低。为了能够确保设备收到消息，设备端往往需要在业务层面进行数据的回报。这类消息确认的ack也属于一类特殊的消息，也是就是说当前物联网设备发送的设备确认数据需要进行额外的转发和处理。

由于物联网数据的数据类型较多，各类型物联网数据的处理逻辑不同，若直接将全部的物联网数据发送至消息中间件，会导致数据处理较为混乱，本实施例中物联网数据处理设备按照物联网数据的数据类型分批发送物联网数据，使得物联网数据处理更加便捷，具体地，包括：

(1)获取待处理的物联网数据，以及所述物联网数据的数量类型；

(2)将所述物联网数据按照所述物联网数据的数据类型分批发送至消息中间件；所述物联网数据包括：标准物联网数据、私有协议物联网数据、设备状态消息、设备确认消息、OTA数据和设备影子功能数据至少一种。

本实施例中将物联网数据按照物联网数据的数据类型进行分批发送处理，可以实现不同种类物联网数据的快速处理，有效避免数据混乱的问题，保证物联网数据处理的准确性。

302，通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台。

物联网数据处理设备将物联网数据发送至消息中间件之后，通过消息中间件将物联网数据发送至物联网数据的数据类型的发布订阅消息平台，以通过发布订阅消息平台进行物联网数据处理，即，物联网数据处理设备对物联网数据进行识别，得到物联网数据的数量类型，消息中间件按照物联网数据的数据类型将物联网数据发送至各个发布订阅消息平台。

303，按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

物联网数据处理设备按照发布订阅消息平台对应的数据处理策略处理物联网数据，得到处理后的物联网数据，可以实现物联网数据的个性化处理，具体地，包括：

(1)通过预设的数据消费网关获取预设策略库中各所述发布订阅消息平台对应的数据处理策略；

(2)对每一所述发布订阅消息平台中的所述物联网数据，按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

即，物联网数据处理设备通过预设的数据消费网关访问预设策略库，预设策略库中保存有预先设置的各个数据类型对应物联网数据的处理规则，例如，私有协议物联网数据转化为xxx格式，物联网数据处理设备获取预设策略库中各发布订阅消息平台对应的数据处理策略；物联网数据处理设备对每一发布订阅消息平台接收到的物联网数据，按照所述发布订阅消息平台对应的数据处理策略处理物联网数据，得到处理后的物联网数据。

本申请实施例中物联网数据处理框架将消息中间件和发布订阅消息平台的接口进行集成，物联网数据处理框架借助消息中间件将不同种类的物联网数据分流到对应的发布订阅消息平台，使得发布订阅消息平台按照各自数据处理策略对物联网数据进行后处理，保证了物联网数据处理的便捷性和实时性，实现了海量物联网数据的处理，同时降低了对物联网数据处理设备性能的要求，与此同时，由于物联网数据处理框架可以对多种类物联网数据的处理实现了数据处理的兼容，同时实现了物联网中不同设备的兼容。

现有技术中物联网数据处理方法中对物联网数据处理，若物联网数据上传数据量过大，网关处理能力会受到限制，从而网关导致通信中断，物联网数据会出现订阅失效的问题，本实施例中以标准物联网数据和私有协议物联网数据为例，通过物联网数据处理框架处理标准物联网数据和私有协议物联网数据可以规避网关订阅失效的问题。

如图4所示，图4为本申请实施例中提供的物联网数据处理方法中标准物联网数据和/或私有协议物联网数据处理的一个实施例流程示意图。

在本申请一些实施例中，物联网数据处理方法中标准物联网数据和/或私有协议物联网数据处理包括如下步骤401～403：

401，若所述物联网数据为标准物联网数据和/或私有协议物联网数据，则将所述物联网数据进行标准化处理，得到包含数据头部和数据主体的标准化的物联网数据。

若物联网数据为标准物联网数据和/或私有协议物联网数据，物联网数据处理设备则将物联网数据进行格式转换，得到包含数据头部和数据主体的标准化的物联网数据，以方便物联网数据处理。

402，通过所述消息中间件识别所述物联网数据的数据头部，得到所述物联网数据的数据类型。

403，通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型对应的发布订阅消息平台。

物联网数据处理设备通过消息中间件识别物联网数据的数据头部，得到物联网数据的数据类型；物联网数据处理设备通过消息中间件将物联网数据发送至物联网数据的数据类型对应的发布订阅消息平台，以进行物联网数据的处理。

参照图5，图5为本申请实施例中提供的物联网数据处理方法中标准物联网数据和/或私有协议物联网数据处理的一个实施例的具体场景示意图。

本实施例中给出物联网标准协议和私有协议物联网数据通过消息中间件broker进行上报，物联网数据处理框架会将所有接入平台的数据会转换成统一化的json数据；该json数据包含两个部分:分别为topic信息和payload信息；其中topic信息为该条数据是通过哪个topic上报，topic信息在后台会关联相关的产品信息，通过topic信息后台可以知道如何处理消息内容‘json’另外一个字段则为payload对应的值为该物联网数据的二进制包，为了能够保障该值的不丢失此处payload采用了base64编码，对原始二进制包进行转码。

标准化的json数据会根据后台消费的flink任务的个数，分别传递到不同的kafkatopic中，此处传递多个kafka topic主要是为了能够对后续的flink任务进行扩展，当后续flink任务消费能力不足时，或者当上报的物联网标准协议和私有协议物联网数据达到kafka发送的一定瓶颈时，对物联网数据处理框架进行横向的扩展，来提高整体的消费性能。

图5中Flink-gateway为一个统一的数据消费网关，该网关消费所有上报的物联网数据，并根据后续用户配置的规则将数据转发至相应的位置；Flink-gateway根据mysql库中记录的数据处理策略，对标准物联网数据和私有协议物联网数据进行解析，其中标准物联网数据会转化成对应的json数据，私有协议物联网数据则维持原有的base64信息，私有协议物联网数据还会添加上报时间，上报设备号等信息。组装成标准的json格式数据发送至下游。本实施例中将标准物联网数据和/或私有协议物联网数据进行处理，实现了标准物联网数据和私有协议物联网数据的高效处理。

参照图6，图6是本申请实施例中提供的物联网数据处理方法中设备状态数据处理的一个实施例的流程示意图。

在本申请一些实施例中，物联网数据处理设备在获取待处理的物联网数据，将所述物联网数据发送至消息中间件之后，包括如下步骤501～502：

501，若所述物联网数据为设备下线数据，则在检测到设备消息下发时，将所述设备消息保存至预设的缓存数据库中；

502，若所述物联网数据为设备上线数据，则触发消息发送指令，将预设的缓存数据库中的设备消息发送至所述设备消息对应的目标设备。

物联网数据处理设备将物联网数据发送至消息中间件，物联网数据处理设备确定物联网数据的类型，若物联网数据的数据类型为设备状态数据，设备状态数据包括设备上线数据和设备下线数据，物联网数据处理设备根据物联网数据的数据类型，确定数据处理方式，具体地，若物联网数据为设备下线数据，物联网数据处理设备则在检测到设备消息下发时，将设备消息保存至预设的缓存数据库中，以防止设备消息丢失，同时方便后期再次发送；若物联网数据为设备上线数据，物联网数据处理设备则触发消息发送指令，将预设的缓存数据库中的设备消息发送至设备消息对应的目标设备。

参照图7，图7为本申请实施例中提供的物联网数据处理方法中设备状态数据处理的一个实施例的具体场景示意图；本实施例中设备上下线消息是通过通用的sys-gateway的flink任务来处理，对于设备上下线消息，由消息中间件broker进行采集到kafka中，其中设备上线消息还会对下发消息进行触发，用户进行设备消息下发时，首先消息会写入redis中；当设备在线时，会将消息直接推送给设备，但当设备不在线时，消息会暂时保存在redis中，当设备上线后触发下发消息将Redis中的数据下发给设备。

本实施例中根据设备状态数据，确定设备消息的处理方式，使得物联网数据处理和设备消息发送同步，不需要因此对于每条上传的设备信息都进行设备状态的判断，提高了物联网网关处理数据的效率，减少设备性能消耗。

参照图8，图8是本申请实施例中提供的物联网数据处理方法中设备确认消息处理的一个实施例的流程示意图。

在本申请一些实施例中，具体说明了查询医学图像轮廓还包括如下步骤601-602:

601，若所述物联网数据为设备确认消息，则按照所述发布订阅消息平台对应的数据处理策略将所述设备确认消息发送至预设数据库；

602，对所述预设数据库中所述设备确认消息对应的目标设备进行实时监控。

若物联网数据为设备确认消息，物联网数据处理设备则按照发布订阅消息平台对应的数据处理策略将设备确认消息发送至预设数据库；物联网数据处理设备对预设数据库中所述设备确认消息对应的目标设备进行实时监控，以实现设备实时监控的目的。

继续参考图7，本实施例中对于满足消息协议等级高的设备，按照mqtt协议底层的约定，设备会响应一个ack给消息中间件broker；Broker将ack消息进行采集并推送到相应的kafka中；Sys-gateway统一消费ack和设备上下消息并将消息写入到mysql表中，实现对设备状态分钟级别的实时监控，并且对于下发消息也实现了小时级别的缓存，能够有效提高下发消息到设备端的成功率。

本实施例中在物联网数据为设备确认消息时，物联网数据处理框架根据设备确认消息，确定设备的重要等级，物联网数据处理框架将重要的设备确认消息保存至预设数据库，后期可以对预设数据库中设备确认消息对应的目标设备进行实时监控，这样可以实现设备实时监控。

在本申请一些实施例中，物联网数据处理框架还可以对OTA数据((Over-the-AirTechnology，空间下载技术)进行处理，具体地：

若所述物联网数据为OTA数据，则将所述OTA数据对应的OTA升级结果反馈至预设数据库。物联网数据处理框架将OTA数据对应的OTA升级结果反馈至预设数据库，以根据OTA数据进行设备反控。

参照图9，图9是本申请实施例中提供的物联网数据处理方法中设备影子数据处理的一个实施例的流程示意图。

在本申请一些实施例中，具体说明了物联网数据中的设备影子数据处理包括如下步骤701-703:

701，若所述物联网数据为设备影子数据，则按照所述设备影子数据对应的数据处理策略将所述设备影子数据中的属性数据进行更新；

702，将所述设备影子数据与预先设置的期望值进行比对；

703，若所述设备影子数据与预先设置的期望值不同，则将所述设备影子数据发送至设备影子对应的目标设备。

若所述物联网数据为设备影子数据，物联网数据处理框架按照设备影子数据对应的数据处理策略将设备影子数据中的属性数据进行更新；物联网数据处理框架将所述设备影子数据与预先设置的期望值进行比对；若设备影子数据与预先设置的期望值不同，则将所述设备影子数据发送至设备影子对应的目标设备。

具体地，参照图10，图10是本申请实施例中提供的物联网数据处理方法中设备影子数据处理的一个实施例的具体场景示意图；图10中对于设备影子上报消息，flink任务首先会将属性数据进行更新，并针对用户提前设置的相关预期值进行比对，将差异部分下发给设备。Function flink任务同时还具备横向扩展和功能扩展的功能，当上报数据量较大时，可以增加并行度提高任务的消费速率；当平台新增类似的交互功能时，通过对functionflink任务的新增编写；也可以实现对新功能的添加。本实施例中物联网数据处理设备对设备影子数据进行处理，可以保证物联网设备数据之间的数据同步。

如图11所示，图11是物联网数据处理装置的一个实施例结构示意图。

为了更好实施本申请实施例中物联网数据处理方法，在物联网数据处理方法基础之上，本申请实施例中还提供一种物联网数据处理装置，所述物联网数据处理装置包括以下模块801-803：

所述物联网数据处理装置设置于物联网数据处理设备，所述物联网数据处理设备设置有物联网数据处理框架；

所述物联网数据处理装置包括：

获取模块801，用于获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

发送模块802，用于通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

处理模块803，用于按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

在本申请一些实施例中，物联网数据处理装置包括：

设置消息中间件的接口信息和发布订阅消息平台的接口信息；

设置所述发布订阅消息平台关联的数据处理策略，所述数据处理策略是处理物联网数据的处理规则；

构建预设数据库，用于保存所述发布订阅消息平台处理后的物联网数据；

将所述消息中间件的接口信息、所述发布订阅消息平台的接口信息、所述数据处理策略和所述预设数据库的数据库信息进行封装，形成物联网数据处理框架。

在本申请一些实施例中，获取模块801包括：

获取待处理的物联网数据，以及所述物联网数据的数量类型；

将所述物联网数据按照所述物联网数据的数据类型分批发送至消息中间件；

所述物联网数据包括：标准物联网数据、私有协议物联网数据、设备状态消息、设备确认消息、OTA数据和设备影子功能数据至少一种。

在本申请一些实施例中，发送模块802，包括：

若所述物联网数据为标准物联网数据和/或私有协议物联网数据，则将所述物联网数据进行标准化处理，得到包含数据头部和数据主体的标准化的物联网数据；

通过所述消息中间件识别所述物联网数据的数据头部，得到所述物联网数据的数据类型；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型对应的发布订阅消息平台。

在本申请一些实施例中，处理模块803，包括：

通过预设的数据消费网关获取预设策略库中各所述发布订阅消息平台对应的数据处理策略；

对每一所述发布订阅消息平台中的所述物联网数据，按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

在本申请一些实施例中，物联网数据处理装置包括：

若所述物联网数据为设备下线数据，则在检测到设备消息下发时，将所述设备消息保存至预设的缓存数据库中；

若所述物联网数据为设备上线数据，则触发消息发送指令，将预设的缓存数据库中的设备消息发送至所述设备消息对应的目标设备。

在本申请一些实施例中，处理模块803，包括：

若所述物联网数据为设备确认消息，则按照所述发布订阅消息平台对应的数据处理策略将所述设备确认消息发送至预设数据库；

所述物联网数据处理装置还包括：

对所述预设数据库中所述设备确认消息对应的目标设备进行实时监控。

在本申请一些实施例中，处理模块803，包括：

若所述物联网数据为OTA数据，则将所述OTA数据对应的OTA升级结果反馈至预设数据库。

在本申请一些实施例中，处理模块803，包括：

若所述物联网数据为设备影子数据，则按照所述设备影子数据对应的数据处理策略将所述设备影子数据中的属性数据进行更新；

所述物联网数据处理装置还包括：

将所述设备影子数据与预先设置的期望值进行比对；

若所述设备影子数据与预先设置的期望值不同，则将所述设备影子数据发送至设备影子对应的目标设备。

本申请实施例中提供的物联网数据处理装置设置于物联网数据处理设备，物联网数据处理设备中设置物联网数据处理框架；本申请实施例中物联网数据处理框架将消息中间件和发布订阅消息平台的接口进行集成，物联网数据处理框架借助消息中间件将不同种类的物联网数据分流到对应的发布订阅消息平台，使得发布订阅消息平台按照各自数据处理策略对物联网数据进行后处理，保证了物联网数据处理的便捷性和实时性，实现了海量物联网数据的处理，同时降低了对物联网数据处理设备性能的要求，与此同时，由于物联网数据处理框架可以对多种类物联网数据的处理实现了数据处理的兼容，同时实现了物联网中不同设备的兼容。

本发明实施例还提供一种物联网数据处理设备，如图12所示，图12本申请实施例中提供的物联网数据处理设备的一个实施例结构示意图。

物联网数据处理设备集成了本发明实施例所提供的任一种物联网数据处理装置，所述物联网数据处理设备包括：

一个或多个处理器；

存储器；以及

一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行上述物联网数据处理方法实施例中任一实施例中所述的物联网数据处理方法中的步骤。

具体来讲：物联网数据处理设备可以包括一个或者一个以上处理核心的处理器901、一个或一个以上计算机可读存储介质的存储器902、电源903和输入单元904等部件。本领域技术人员可以理解，图12中示出的物联网数据处理设备结构并不构成对物联网数据处理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

处理器901是该物联网数据处理设备的控制中心，利用各种接口和线路连接整个物联网数据处理设备的各个部分，通过运行或执行存储在存储器902内的软件程序和/或模块，以及调用存储在存储器902内的数据，执行物联网数据处理设备的各种功能和处理数据，从而对物联网数据处理设备进行整体监控。可选的，处理器901可包括一个或多个处理核心；优选的，处理器901可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器901中。

存储器902可用于存储软件程序以及模块，处理器901通过运行存储在存储器902的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器902可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、训练播放功能等)等；存储数据区可存储根据物联网数据处理设备的使用所创建的数据等。此外，存储器902可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器902还可以包括存储器控制器，以提供处理器901对存储器902的访问。

物联网数据处理设备还包括给各个部件供电的电源903，优选的，电源903可以通过电源管理系统与处理器901逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源903还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

该物联网数据处理设备还可包括输入单元904，该输入单元904可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。

尽管未示出，物联网数据处理设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，物联网数据处理设备中的处理器901会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器902中，并由处理器901来运行存储在存储器902中的应用程序，从而实现各种功能，如下：

获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。

为此，本发明实施例提供一种计算机可读存储介质，该计算机可读存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random AccessMemory)、磁盘或光盘等。其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行本发明实施例所提供的任一种物联网数据处理方法中的步骤。例如，所述计算机程序被处理器进行加载可以执行如下步骤：

获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见上文针对其他实施例的详细描述，此处不再赘述。

具体实施时，以上各个单元或结构可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个单元或结构的具体实施可参见前面的方法实施例，在此不再赘述。

以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

以上对本申请实施例所提供的一种物联网数据处理方法进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (12)

1.一种物联网数据处理方法，其特征在于，所述方法应用于设置有物联网数据处理框架的物联网数据处理设备，所述方法包括：

获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

2.根据权利要求1所述的物联网数据处理方法，其特征在于，所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件之前，所述方法包括：

设置消息中间件的接口信息和发布订阅消息平台的接口信息；

设置所述发布订阅消息平台关联的数据处理策略，所述数据处理策略是处理物联网数据的处理规则；

构建预设数据库，用于保存所述发布订阅消息平台处理后的物联网数据；

将所述消息中间件的接口信息、所述发布订阅消息平台的接口信息、所述数据处理策略和所述预设数据库的数据库信息进行封装，形成物联网数据处理框架。

3.根据权利要求1所述的物联网数据处理方法，其特征在于，所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件，包括：

获取待处理的物联网数据，以及所述物联网数据的数量类型；

将所述物联网数据按照所述物联网数据的数据类型分批发送至消息中间件；

所述物联网数据包括：标准物联网数据、私有协议物联网数据、设备状态消息、设备确认消息、OTA数据和设备影子功能数据至少一种。

4.根据权利要求1所述的物联网数据处理方法，其特征在于，所述通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台，包括：

若所述物联网数据为标准物联网数据和/或私有协议物联网数据，则将所述物联网数据进行标准化处理，得到包含数据头部和数据主体的标准化的物联网数据；

通过所述消息中间件识别所述物联网数据的数据头部，得到所述物联网数据的数据类型；

通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型对应的发布订阅消息平台。

5.根据权利要求1所述的物联网数据处理方法，其特征在于，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

通过预设的数据消费网关获取预设策略库中各所述发布订阅消息平台对应的数据处理策略；

对每一所述发布订阅消息平台中的所述物联网数据，按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

6.根据权利要求1所述的物联网数据处理方法，其特征在于，所述物联网数据包括设备状态数据，设备状态数据包括设备上线数据和设备下线数据；

所述获取待处理的物联网数据，将所述物联网数据发送至消息中间件之后，所述方法包括：

若所述物联网数据为设备下线数据，则在检测到设备消息下发时，将所述设备消息保存至预设的缓存数据库中；

若所述物联网数据为设备上线数据，则触发消息发送指令，将预设的缓存数据库中的设备消息发送至所述设备消息对应的目标设备。

7.根据权利要求1所述的物联网数据处理方法，其特征在于，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为设备确认消息，则按照所述发布订阅消息平台对应的数据处理策略将所述设备确认消息发送至预设数据库；

所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据之后，所述方法包括：

对所述预设数据库中所述设备确认消息对应的目标设备进行实时监控。

8.根据权利要求1所述的物联网数据处理方法，其特征在于，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为OTA数据，则将所述OTA数据对应的OTA升级结果反馈至预设数据库。

9.根据权利要求1-8任意一项所述的物联网数据处理方法，其特征在于，所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据，包括：

若所述物联网数据为设备影子数据，则按照所述设备影子数据对应的数据处理策略将所述设备影子数据中的属性数据进行更新；

所述按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据之后，所述方法包括：

将所述设备影子数据与预先设置的期望值进行比对；

若所述设备影子数据与预先设置的期望值不同，则将所述设备影子数据发送至设备影子对应的目标设备。

10.一种物联网数据处理装置，其特征在于，所述物联网数据处理装置设置于物联网数据处理设备，所述物联网数据处理设备设置有物联网数据处理框架；

所述物联网数据处理装置包括：

获取模块，用于获取待处理的物联网数据，将所述物联网数据发送至消息中间件；

发送模块，用于通过所述消息中间件将所述物联网数据发送至所述物联网数据的数据类型的发布订阅消息平台；

处理模块，用于按照所述发布订阅消息平台对应的数据处理策略处理所述物联网数据，得到处理后的物联网数据。

11.一种物联网数据处理设备，其特征在于，所述物联网数据处理设备包括：

一个或多个处理器；

存储器；以及

一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现权利要求1至9任一项所述的物联网数据处理方法中的步骤。

12.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行权利要求1至9任一项所述的物联网数据处理方法中的步骤。

Images