CN115658788A - 一种物联网实时数据查询方法和系统 - Google Patents
一种物联网实时数据查询方法和系统 Download PDFInfo
- Publication number
- CN115658788A CN115658788A CN202211341109.2A CN202211341109A CN115658788A CN 115658788 A CN115658788 A CN 115658788A CN 202211341109 A CN202211341109 A CN 202211341109A CN 115658788 A CN115658788 A CN 115658788A
- Authority
- CN
- China
- Prior art keywords
- real
- time data
- internet
- things
- logic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Computer And Data Communications (AREA)
Abstract
本发明提出一种物联网实时数据查询方法和系统,通过将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式,创建条件过滤逻辑reactorQL,并利用所述reactorQL对消息总线中的实时数据进行过滤,根据所述reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码,执行所述业务逻辑代码并判断是否有输出,在某些实施过程中可实现包括但不限于提高用户可使用性,避免因为需求经常变化带来的开发成本增加、开发周期变长的问题。
Description
技术领域
本发明涉及到物联网技术领域,特别涉及到一种物联网实时数据查询方法和系统。
背景技术
随着物联网行业的发展,越来越多的业务逻辑需要支持消息实时处理。设备上报数据到物联网平台,物联网平台根据上报的数据实时判断是否复合预值、权限、趋势等,然后根据对实时数据的条件过滤进行一些列的业务逻辑处理,例如,物联网平台可根据温度传感器上报的实时温度数据来判断是否需要开启或者关闭空调。
以往的物联网平台对实时数据的业务处理,主要依赖于根据固定需求编写固定的业务逻辑代码,使用相对固化的流程对数据进行实时处理。例如不同的物联网设备(湿度传感器、温度传感器等)所发送到物联网平台的消息格式不尽相同,需要根据特定的物联网设备编写对应的,这样的处理方式对于物联网行业千变万化的实时数据处理需求来说。灵活性比较差,只要需求稍微有变动,就需要重新进行编码。同时,因为需要根据变化的需求重新编码,带来的功能实现周期长,成本高,需要重启生产环境的系统等问题也对用户非常不友好。
发明内容
本发明提出一种物联网实时数据查询方法和系统,主要解决的技术问题是:以往的物联网平台对实时数据的业务处理,主要依赖于根据固定需求编写固定的业务逻辑代码,使用相对固化的流程对数据进行实时处理,灵活性比较差,功能实现周期长,成本高,对用户非常不友好。
为解决上述技术问题,本发明实施例提供了一种物联网实时数据查询方法,包括如下步骤:
步骤1、将平台收到的实时数据推送到消息总线中,并设置实时数据的发布格式;步骤2、创建条件过滤逻辑reactorQL,并利用reactorQL对消息总线中的实时数据进行过滤;步骤3、根据 reactorQL所表达的逻辑,将reactorQL字符串解析为业务逻辑代码;步骤4、执行业务逻辑代码并判断是否有输出。
在本发明的一种实施例中,条件过滤逻辑reactorQL是在平台的可视化界面中创建的。
在本发明的一种实施例中,将reactorQL字符串解析为业务逻辑代码,包括:利用开源SQL 解析器,将reactorQL字符串解析为多个逻辑片段。
在本发明的一种实施例中,执行步骤1之前,还包括:初始化消息总线。
本发明实施例还提供了一种物联网实时数据查询系统,包括:推送模块,用于将平台收到的实时数据推送到消息总线中,并设置实时数据的发布格式;过滤模块,用于根据条件过滤逻辑reactorQL对消息总线中的实时数据进行过滤;解析模块,用于根据条件过滤逻辑reactorQL 所表达的逻辑,将reactorQL字符串解析为业务逻辑代码;执行模块,用于执行业务逻辑代码并判断是否有输出。
在本发明的一种实施例中,上述物联网实时数据查询系统还包括条件设定模块,用于在平台的可视化界面中创建条件过滤逻辑reactorQL。
在本发明的一种实施例中,解析模块中包括开源SQL解析器,用于将reactorQL字符串解析为多个逻辑片段。
在本发明的一种实施例中,上述物联网实时数据查询系统还包括初始化模块,用于初始化消息总线。
本发明实施例还提供了一种计算机可读存储介质,该计算机可读存储介质存储有一个或者多个计算机程序,该一个或者多个计算机程序可被一个或者多个处理器执行,以实现上述的物联网实时数据查询方法的步骤。
本发明的有益技术效果是:
本发明提供的物联网实时数据查询方法和系统,通过将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式,创建条件过滤逻辑reactorQL,并利用所述reactorQL 对消息总线中的实时数据进行过滤,根据所述reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码,执行所述业务逻辑代码并判断是否有输出,在某些实施过程中可实现包括但不限于提高用户可使用性,避免因为需求经常变化带来的开发成本增加、开发周期变长的问题。
附图说明
附图1为本发明中的物联网实时数据查询方法的流程图;
附图2为本发明中的物联网实时数据查询系统的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例一
为了解决相关技术中,物联网平台对实时数据的业务处理,主要依赖于根据固定需求编写固定的业务逻辑代码,使用相对固化的流程对数据进行实时处理,灵活性比较差,功能实现周期长,成本高,对用户非常不友好的问题,本发明实施例提供一种物联网实时数据查询方法。
如图1所示,一种物联网实时数据查询方法,包括以下步骤:
S101:将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式。
消息总线可对实时数据进行订阅和推送。在该步骤中,设置所述实时数据的发布格式具体为设置实时数据的推送topic。Topic是消息发布(Pub)者和订阅(Sub)者之间的传输中介。设备可通过Topic实现消息的发送和接收,从而实现服务端与设备端的通信。为方便海量设备基于Topic进行通信,简化授权操作,物联网平台定义了产品Topic类和设备Topic,可以通过消息解码插件得到的,插件将消息解析完成后,根据消息根据类型,设置不同的topic,这个 topic是平台内置的。如插件解析消息发现是一条设备上报类型的消息,就会设置topic为 xxx/xxx/property-report.Topic指向消息。后续操作依赖的是topic指向的消息。也有部分逻辑是依赖于topic里面的信息。比如根据topic里面的设备id做路由找到设备对应的产品。
下面以一个具体实例进行说明:
物联网平台收到了一条设备上报的温度为30度的消息,则使用如下格式发布到消息总线中:
Topic:/device/message/{设备ID}/property-report
Data:{“temprature”:“30”}。
S102:创建条件过滤逻辑reactorQL,并利用所述reactorQL对消息总线中的实时数据进行过滤。
JetLinks(JetLinks是一个物联网基础平台,用于快速建立物联网相关业务系统)封装了一套使用SQL来进行实时数据处理的工具包,通过将SQL翻译为reactor来进行数据处理。规则引擎中的数据转发以及可视化规则中的ReactorQL节点均使用此工具包实现。通过写sql的方式来对实时数据过滤处理,使得用户可使用性更高。
下面以一个具体实例进行说明:
需要过滤所有设备上报的温度大于20度的实时数据的写法如下:
select*from/device/message/*/property-report where temperature>20。
作为本发明实施例中的一个优选的方案,上述条件过滤逻辑reactorQL的创建是在物联网平台的可视化界面中动态加载完成的,避免服务器重新启动造成的设备大批量下线、数据丢失等问题。
S103:根据所述reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码。
物联网平台程序会根据reactorQL所表达的逻辑,将reactorQL字符串渲染为计算机能够理解的业务逻辑代码,其中,将reactorQL字符串渲染为计算机能够理解的业务逻辑代码具体通过使用开源(JSqlparser)SQL解析器(JSqlParser是一个SQL语句解析器。它将SQL转换为Java类的可遍历层次结构。支持Oracle,SqlServer,MySQL,PostgreSQL等常用数据库),将reactorQL解析为多个逻辑片段。
ReactorQL支持多条件嵌套过滤实时数据,通过程序渲染为代码逻辑后,和程序员编写出来的代码效果相同。同时因为支持将reactorQL动态渲染为代码逻辑,可以避免因为需求经常变化带来的开发成本、开发周期问题。
下面以一个具体实例进行说明:
对“select*from/device/message/*/property-report where temperature>20”的解析如表1所示:
表1
S104:执行所述业务逻辑代码并判断是否有输出。
通过reactorQL过滤后的实时数据如果有输出,则代表输出的数据满足了过滤条件,物联网平台即可以基于此输出做后续业务逻辑处理,例如进行设备控制、通知预警等。
作为本发明实施例中的一个优选的方案,在执行上述步骤S101之前,还包括对消息总线进行初始化。
实施例二
为了解决相关技术中,物联网平台对实时数据的业务处理,主要依赖于根据固定需求编写固定的业务逻辑代码,使用相对固化的流程对数据进行实时处理,灵活性比较差,功能实现周期长,成本高,对用户非常不友好的问题,本发明实施例提供一种物联网实时数据查询方法。
如图2所示,一种物联网实时数据查询系统,包括:
推送模块,用于将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式。
消息总线可对实时数据进行订阅和推送。在该步骤中,设置所述实时数据的发布格式具体为设置实时数据的推送topic。Topic是消息发布(Pub)者和订阅(Sub)者之间的传输中介。设备可通过Topic实现消息的发送和接收,从而实现服务端与设备端的通信。为方便海量设备基于Topic进行通信,简化授权操作,物联网平台定义了产品Topic类和设备Topic。
下面以一个具体实例进行说明:
物联网平台收到了一条设备上报的温度为30度的消息,则使用如下格式发布到消息总线中:
Topic:/device/message/{设备ID}/property-report
Data:{“temprature”:“30”}。
过滤模块,用于根据条件过滤逻辑reactorQL对所述消息总线中的实时数据进行过滤。
JetLinks(JetLinks是一个物联网基础平台,用于快速建立物联网相关业务系统)封装了一套使用SQL来进行实时数据处理的工具包,通过将SQL翻译为reactor来进行数据处理。规则引擎中的数据转发以及可视化规则中的ReactorQL节点均使用此工具包实现。
下面以一个具体实例进行说明:
需要过滤所有设备上报的温度大于20度的实时数据的写法如下:
select*from/device/message/*/property-report where temperature>20。
作为本发明实施例中的一个优选的方案,上述物联网实时数据查询系统还包括条件设定模块,用于在物联网平台的可视化界面中完成对条件过滤逻辑reactorQL的动态加载。
解析模块,用于根据所述条件过滤逻辑reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码。
物联网平台程序会根据reactorQL所表达的逻辑,将reactorQL字符串渲染为计算机能够理解的业务逻辑代码,其中,将reactorQL字符串渲染为计算机能够理解的业务逻辑代码具体通过使用开源(JSqlparser)SQL解析器(JSqlParser是一个SQL语句解析器。它将SQL转换为Java类的可遍历层次结构。支持Oracle,SqlServer,MySQL,PostgreSQL等常用数据库),将reactorQL解析为多个逻辑片段。
下面以一个具体实例进行说明:
对“select*from/device/message/*/property-report where temperature>20”的解析如表1所示:
表1
执行模块,用于执行所述业务逻辑代码并判断是否有输出。
通过reactorQL过滤后的实时数据如果有输出,则代表输出的数据满足了过滤条件,物联网平台即可以基于此输出做后续业务逻辑处理,例如进行设备控制、通知预警等
作为本发明实施例中的一个优选的方案,上述物联网实时数据查询系统还包括初始化模块,用于对消息总线进行初始化。
实施例三
本实施例还提供了一种计算机可读存储介质,该计算机可读存储介质包括在用于存储信息 (诸如计算机可读指令、数据结构、计算机程序模块或其他数据)的任何方法或技术中实施的易失性或非易失性、可移除或不可移除的介质。计算机可读存储介质包括但不限于RAM(Random Access Memory,随机存取存储器),ROM(Read-Only Memory,只读存储器),EEPROM(Electrically Erasable Programmable read only memory,带电可擦可编程只读存储器)、闪存或其他存储器技术、CD-ROM(Compact Disc Read-Only Memory,光盘只读存储器),数字多功能盘(DVD) 或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。
本实施例中的计算机可读存储介质可用于存储一个或者多个计算机程序,其存储的一个或者多个计算机程序可被处理器执行,以实现上述实施例一中的物联网实时数据查询方法中的至少一个步骤。
可见,本领域的技术人员应该明白,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件(可以用计算装置可执行的计算机程序代码来实现)、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。
此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、计算机程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。所以,本发明不限制于任何特定的硬件和软件结合。
以上内容是结合具体的实施方式对本发明实施例所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。
Claims (9)
1.一种物联网实时数据查询方法,其特征在于,包括如下步骤:
步骤1、将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式;
步骤2、创建条件过滤逻辑reactorQL,并利用所述reactorQL对消息总线中的实时数据进行过滤;
步骤3、根据所述reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码;
步骤4、执行所述业务逻辑代码并判断是否有输出。
2.如权利要求1所述的物联网实时数据查询方法和系统,其特征在于,所述条件过滤逻辑reactorQL是在平台的可视化界面中创建的。
3.如权利要求1所述的物联网实时数据查询方法和系统,其特征在于,所述将reactorQL字符串解析为业务逻辑代码,包括:利用开源SQL解析器,将reactorQL字符串解析为多个逻辑片段。
4.如权利要求1所述的物联网实时数据查询方法和系统,其特征在于,执行所述步骤1之前,还包括:初始化所述消息总线。
5.一种物联网实时数据查询系统,其特征在于,包括:
推送模块,用于将平台收到的实时数据推送到消息总线中,并设置所述实时数据的发布格式;
过滤模块,用于根据条件过滤逻辑reactorQL对所述消息总线中的实时数据进行过滤;
解析模块,用于根据所述条件过滤逻辑reactorQL所表达的逻辑,将所述reactorQL字符串解析为业务逻辑代码;
执行模块,用于执行所述业务逻辑代码并判断是否有输出。
6.如权利要求5所述的物联网实时数据查询系统,其特征在于,还包括条件设定模块,用于在平台的可视化界面中创建所述条件过滤逻辑reactorQL。
7.如权利要求5所述的物联网实时数据查询系统,其特征在于,所述解析模块中包括开源SQL解析器,用于将reactorQL字符串解析为多个逻辑片段。
8.如权利要求5所述的物联网实时数据查询系统,其特征在于,还包括初始化模块,用于初始化所述消息总线。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个计算机程序,所述一个或者多个计算机程序可被一个或者多个处理器执行,以实现如权利要求1-4中任一项所述的物联网实时数据查询方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211341109.2A CN115658788A (zh) | 2022-10-30 | 2022-10-30 | 一种物联网实时数据查询方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211341109.2A CN115658788A (zh) | 2022-10-30 | 2022-10-30 | 一种物联网实时数据查询方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115658788A true CN115658788A (zh) | 2023-01-31 |
Family
ID=84993500
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211341109.2A Pending CN115658788A (zh) | 2022-10-30 | 2022-10-30 | 一种物联网实时数据查询方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115658788A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116074357A (zh) * | 2023-04-06 | 2023-05-05 | 四川九通智路科技有限公司 | 基于物联网隧道照明系统数据可视化监测分析控制平台 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080082577A1 (en) * | 2006-09-29 | 2008-04-03 | Rockwell Automation Technologies, Inc. | Module classification and searching for industrial control systems |
CN101894317A (zh) * | 2010-06-08 | 2010-11-24 | 用友软件股份有限公司 | 数据变化驱动业务逻辑的方法和系统 |
CN111460000A (zh) * | 2020-03-27 | 2020-07-28 | 谭凌 | 一种基于关系型数据库的回溯数据查询方法及系统 |
-
2022
- 2022-10-30 CN CN202211341109.2A patent/CN115658788A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080082577A1 (en) * | 2006-09-29 | 2008-04-03 | Rockwell Automation Technologies, Inc. | Module classification and searching for industrial control systems |
CN101894317A (zh) * | 2010-06-08 | 2010-11-24 | 用友软件股份有限公司 | 数据变化驱动业务逻辑的方法和系统 |
CN111460000A (zh) * | 2020-03-27 | 2020-07-28 | 谭凌 | 一种基于关系型数据库的回溯数据查询方法及系统 |
Non-Patent Citations (2)
Title |
---|
JETLINKS企业版: "ReactorQL,使用SQL处理实时数据", 《HTTPS://WWW.BOOKSTACK.CN/READ/JETLINKS-1》, pages 1 - 4 * |
闫佼;陈建江;: "基于消息总线及内存数据库的物联网设备接入云平台", 微型电脑应用, no. 06 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116074357A (zh) * | 2023-04-06 | 2023-05-05 | 四川九通智路科技有限公司 | 基于物联网隧道照明系统数据可视化监测分析控制平台 |
CN116074357B (zh) * | 2023-04-06 | 2023-06-20 | 四川九通智路科技有限公司 | 基于物联网隧道照明系统数据可视化监测分析控制平台 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10831826B2 (en) | Validation of schema and schema conformance verification | |
CN109117209B (zh) | 序列化和反序列化方法及装置 | |
CN109104405B (zh) | 二进制协议编码、解码方法和装置 | |
CN109194736B (zh) | 消息去重方法、装置、电子设备、介质和无人车 | |
CN110166463B (zh) | 一种报文传输转换方法及装置 | |
WO2019168599A1 (en) | Data retention handling for data object stores | |
CN110362547B (zh) | 日志文件的编码、解析、存储方法和装置 | |
CN115658788A (zh) | 一种物联网实时数据查询方法和系统 | |
EA019680B1 (ru) | Способ и система доступа к сервису | |
CN113596017B (zh) | 一种协议解析方法、装置、软网关和存储介质 | |
CN112417515A (zh) | 组态软件协议处理方法及系统 | |
CN111881385A (zh) | 推送内容生成方法、装置、设备和可读存储介质 | |
CN114020272A (zh) | 一种序列化编码、解码方法、装置及电子设备 | |
CN111754268A (zh) | 基于ott大数据的用户标签生成方法、管理系统及存储介质 | |
CN111142849B (zh) | 流程处理方法、装置、存储介质及处理器 | |
US10620950B2 (en) | Message parsing in a distributed stream processing system | |
CN109977052B (zh) | 协议转换方法及应用该方法的系统、介质、芯片与电子设备 | |
CN103379145B (zh) | 信息处理的方法、设备和系统 | |
CN113132371A (zh) | 报文转换的方法、装置、计算机可读存储介质与处理器 | |
CN106330519B (zh) | 一种网管系统间报文的通信方法及系统 | |
CN115514656B (zh) | 一种物模型适配方法及装置 | |
CN103646015A (zh) | 发送、接收以及传输xml报文的方法和系统 | |
US7853724B2 (en) | Automatic identification, negotiation, synchronization, and update of system interfaces | |
KR20190069960A (ko) | 산업용 통신 시스템 및 방법 | |
CN109756550B (zh) | 一种智能网联驾驶车云通信方法、装置以及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |