CN112911024A - 一种物联网数据采集的方法、系统、电子装置和存储介质 - Google Patents

一种物联网数据采集的方法、系统、电子装置和存储介质 Download PDF

Info

Publication number
CN112911024A
CN112911024A CN202110493266.4A CN202110493266A CN112911024A CN 112911024 A CN112911024 A CN 112911024A CN 202110493266 A CN202110493266 A CN 202110493266A CN 112911024 A CN112911024 A CN 112911024A
Authority
CN
China
Prior art keywords
data
transmission unit
platform
sensor
data transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110493266.4A
Other languages
English (en)
Other versions
CN112911024B (zh
Inventor
王雷雷
张国宏
龙文件
赵宪鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Jianjie Iot Technology Co ltd
Original Assignee
Zhejiang Jianjie Iot Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Jianjie Iot Technology Co ltd filed Critical Zhejiang Jianjie Iot Technology Co ltd
Priority to CN202110493266.4A priority Critical patent/CN112911024B/zh
Publication of CN112911024A publication Critical patent/CN112911024A/zh
Application granted granted Critical
Publication of CN112911024B publication Critical patent/CN112911024B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L25/00Baseband systems
    • H04L25/38Synchronous or start-stop systems, e.g. for Baudot code
    • H04L25/40Transmitting circuits; Receiving circuits
    • H04L25/49Transmitting circuits; Receiving circuits using code conversion at the transmitter; using predistortion; using insertion of idle bits for obtaining a desired frequency spectrum; using three or more amplitude levels ; Baseband coding techniques specific to data transmission systems
    • H04L25/4906Transmitting circuits; Receiving circuits using code conversion at the transmitter; using predistortion; using insertion of idle bits for obtaining a desired frequency spectrum; using three or more amplitude levels ; Baseband coding techniques specific to data transmission systems using binary codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请涉及一种物联网数据采集的方法、系统、电子装置和存储介质,其中,该方法包括:IOT数据平台通过数据传输单元向传感器发起下行请求数据,数据传输单元接收IOT数据平台发起的JSON请求数据,并通过Lua脚本将JSON请求数据编码为二进制数据,再发送该二进制数据到传感器;传感器根据下行请求数据触发上行请求响应,并通过数据传输单元向IOT数据平台上报上行请求响应,数据传输单元接收传感器发送的二进制采样数据,并通过Lua脚本将二进制采样数据解码为JSON响应数据,按照服务标识将JSON响应数据上报到IOT数据平台;数据传输单元包括Lua脚本,Lua脚本在DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改。通过本申请,提高了效率并降低了成本。

Description

一种物联网数据采集的方法、系统、电子装置和存储介质
技术领域
本申请涉及计算机领域,特别是涉及一种物联网数据采集的方法、系统、电子装置和存储介质。
背景技术
随着物联网IoT技术的快速发展,越来越多的行业领域采用物联网技术,然而,传感器行业技术尚且不能及时对接各类五花八门的物联网平台。因此,市面上往往采用的方式是,传感器配合数据传输单元(Data Transfer unit,简称DTU)将数据直接接入云端服务器,由云端服务器完成解析二进制协议数据的工作,然而,采用DTU将传感器接入云端的方案有着很多的弊端。首先,从连接特性上分析,采用DTU会使数据采集的链路变长,增加了数据丢失的风险和数据采集耗费的流量;接着,从信息还原方面分析,信息还原指二进制数据的解码/编码由后台程序员通过硬编码实现增加设备类型的目的,然而设备接入效率非常低下。此外,由于平台中心化的特点,在增加新设备或需要后期维护调试时,工作人员需要在成千上万的设备中查询线索,调试非常困难;最后,从易用性上分析,采用DTU方案,缺少远程配置管理,任何修改都需要工程师到现场进行配置调试。
目前针对相关技术中,通过物联网系统采集传感器数据时,存在的采集数据丢失风险高,传感器设备接入效率低和缺少远程配置管理的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了物联网数据采集的方法、系统、电子装置和存储介质,至少解决相关技术中通过物联网系统采集传感器数据时,存在的采集数据丢失风险高,传感器设备接入效率低和缺少远程配置管理的问题。
第一方面,本申请实施例提供了一种数据采集的方法,应用于物联网系统中,所述系统包括:云平台、数据传输单元和传感器,其中所述云平台包括IOT数据平台和DTU+管理平台,所述数据采集方法包括:
所述数据传输单元包括Lua脚本,所述Lua脚本在所述DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;
所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据,所述数据传输单元接收所述IOT数据平台发起的JSON请求数据,并通过所述Lua脚本将所述JSON请求数据编码为二进制数据,再发送所述二进制数据到所述传感器;
所述传感器根据所述下行请求数据触发上行请求响应,并通过所述数据传输单元向所述IOT数据平台上报所述上行请求响应,所述数据传输单元接收所述传感器发送的二进制采样数据,并通过所述Lua脚本将所述二进制采样数据解码为JSON响应数据,按照服务标识将所述JSON响应数据上报到所述IOT数据平台,其中,所述服务标识是基于业务属性分类数据的消息流。
在其中一些实施例中,在所述IOT数据平台没有下发请求数据的情况下,所述方法包括:
所述传感器通过所述数据传输单元向所述IOT数据平台主动发送采样数据,所述数据传输单元获取所述传感器主动发送的二进制采样数据,并将所述二进制采样数据解码为JSON数据,按照事件标识将所述JSON数据上报到所述IOT数据平台。
在其中一些实施例中,所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据包括:
所述IOT数据平台配置自动调用周期,并通过所述数据传输单元按照所述调用周期向所述传感器下发所述下行请求数据。
在其中一些实施例中,所述根据传感器协议进行远程修改包括:
所述数据传输单元通过MQTT消息向所述DTU+管理平台上报DTU+信息,所述DTU+管理平台接收所述DTU+信息,并在关联的配置组中进行配置;
所述DTU+管理平台下发所述配置组中的配置信息给所述数据传输单元,所述数据传输单元在收到所述配置信息后自动替换本地配置并立即生效。
第二方面,本申请实施例提供了一种物联网数据采集的系统,应用于物联网系统中,所述系统包括:云平台、数据传输单元和传感器,其中所述云平台包括IOT数据平台和DTU+管理平台,
所述数据传输单元包括Lua脚本,所述Lua脚本在所述DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;
所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据,所述数据传输单元接收所述IOT数据平台发起的JSON请求数据,并通过所述Lua脚本将所述JSON请求数据编码为二进制数据,再发送所述二进制数据到所述传感器;
所述传感器根据所述下行请求数据触发上行请求响应,并通过所述数据传输单元向所述IOT数据平台上报所述上行请求响应,所述数据传输单元接收所述传感器发送的二进制采样数据,并通过所述Lua脚本将所述二进制采样数据解码为JSON响应数据,按照服务标识将所述JSON响应数据上报到所述IOT数据平台,其中,所述服务标识是基于业务属性分类数据的消息流。
在其中一些实施例中,在所述IOT数据平台没有下发请求数据的情况下,所述方法包括:
所述传感器通过所述数据传输单元向所述IOT数据平台主动发送采样数据,所述数据传输单元获取所述传感器主动发送的二进制采样数据,并将所述二进制采样数据解码为JSON数据,按照事件标识将所述JSON数据上报到所述IOT数据平台。
在其中一些实施例中,所述IOT数据平台配置自动调用周期,并通过所述数据传输单元按照所述调用周期向所述传感器下发所述下行请求数据。
在其中一些实施例中,所述数据传输单元通过MQTT消息向所述DTU+管理平台上报DTU+信息,所述DTU+管理平台接收并回复在所述DTU+管理平台上关联的配置组;
所述DTU+管理平台下发所述配置组中的配置给所述数据传输单元,所述数据传输单元在收到配置后自动替换本地配置并立即生效。
第三方面,本申请实施例提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项所述的物联网数据采集的方法。
第四方面,本申请实施例提供了一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项所述的物联网数据采集的方法。
相比于相关技术,本申请实施例提供的一种物联网数据采集的方法,应用于物联网系统中,其中,该系统包括:云平台、数据传输单元和传感器,其中云平台包括IOT数据平台和DTU+管理平台;数据传输单元包括Lua脚本,Lua脚本在DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;IOT数据平台通过数据传输单元向传感器发起下行请求数据,数据传输单元接收IOT数据平台发起的JSON请求数据,并通过Lua脚本将JSON请求数据编码为二进制数据,再发送该二进制数据到传感器;传感器根据下行请求数据触发上行请求响应,并通过数据传输单元向IOT数据平台上报上行请求响应,数据传输单元接收传感器发送的二进制采样数据,并通过Lua脚本将二进制采样数据解码为JSON响应数据,按照服务标识将JSON响应数据上报到IOT数据平台,其中,服务标识是基于业务属性分类数据的消息流。解决了相关技术中通过物联网系统采集传感器数据时,存在的采集数据丢失风险高,传感器设备接入效率低和缺少远程配置管理的问题,降低了采集数据丢失风险,提高了设备接入和后期维护的效率,从而有效降低了成本。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请实施例的数据采集方法的流程图;
图2是根据本申请实施例的数据采集系统的结构框图;
图3是根据本申请实施例的数据采集和DTU+配置管理的系统示意图
图4是根据本申请实施例的一种应用于物联网系统的数据采集系统示意图;
图5是根据本申请实施例的JSON数据到二进制数据的数据转换示意图;
图6是根据本申请实施例的二进制数据到JSON数据的数据转换示意图;
图7是根据本申请实施例的电子设备的内部结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请提供的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,还可以理解的是,虽然这种开发过程中所做出的努力可能是复杂并且冗长的,然而对于与本申请公开的内容相关的本领域的普通技术人员而言,在本申请揭露的技术内容的基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本申请公开的内容不充分。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是,本申请所描述的实施例在不冲突的情况下,可以与其它实施例相结合。
除非另作定义,本申请所涉及的技术术语或者科学术语应当为本申请所属技术领域内具有一般技能的人士所理解的通常意义。本申请所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制,可表示单数或复数。本申请所涉及的术语“包括”、“包含”、“具有”以及它们任何变形,意图在于覆盖不排他的包含;例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可以还包括没有列出的步骤或单元,或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电气的连接,不管是直接的还是间接的。本申请所涉及的“多个”是指大于或者等于两个。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本申请所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象,不代表针对对象的特定排序。
本申请实施例提供了一种物联网数据采集的方法,应用于物联网系统中,该系统包括:云平台、数据传输单元和传感器,其中云平台包括IOT数据平台和DTU+管理平台,图1是根据本申请实施例的数据采集方法的流程图,如图1所示,该流程包括如下步骤:
步骤S101,数据传输单元包括Lua脚本,Lua脚本在DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;需要说明的是,物联网平台和后台通讯均采用JSON字符串,而传感器能识别的数据为二进制数据,因此,为了实现传感器接入物联网平台进行数据的采集的目的,本实施例基于Lua虚拟机和OpenCPU进行数据转换,将不便于平台工程师处理的二进制数据流通过自定义Lua脚本转为易读的JSON数据。其中,自定义Lua脚本中动态变化的代码通过MQTT消息在在DTU+管理平台进行更新编辑,而脚本核心的逻辑在使用中一直不变,该核心逻辑主要完成系统中的共有的特性,如数据轮询、协议相关的协议体处理、数据平台的逻辑和DTU+的配置。在自定义Lua脚本中用户的可变代码至少包含但不限于三条Lua函数:init()、decode()和encode(),其中init()函数的作用是初始化变量,初始化需要自动发送请求数据的timer变量;decode()函数的作用是将二进制数据增加字段名后转json数据结构;encode()函数的作用是将json数据中取出的每个字段的数值合并转为二进制的格式。
本实施例中用于实现解析转换数据的Lua脚本能由更了解嵌入式特性的嵌入式工程师编写,而不再需要由后端工程师编写,这样更便于开发人员进行代码的开发编写,有效的降低了开发成本。此外,由于Lua脚本在云平台编辑,并能根据传感器协议进行远程修改,因此,无需工作人员到工程现场进行操作调试,能远程配置管理,易用性高。
优选的,根据传感器协议进行远程修改包括:数据传输单元通过MQTT消息向DTU+管理平台上报DTU+信息,DTU+管理平台接收DTU+信息,并在关联的配置组中进行配置;DTU+管理平台下发配置组中的配置信息给数据传输单元,数据传输单元在收到配置信息后自动替换本地配置并立即生效。本实施例中用户只需根据上报的DTU+信息,在DTU+管理平台修改相关配置组内的配置信息,那么远端的DTU+配置也会相应的自动改变。如果该配置需要立即生效,只需在管理平台远程发送重启命令即可触发立即更新配置,不需要工程师到现场进行逐个修改,大大提高了工作效率。
步骤S102,IOT数据平台通过数据传输单元向传感器发起下行请求数据,数据传输单元接收IOT数据平台发起的JSON请求数据,并通过Lua脚本将JSON请求数据编码为二进制数据,再发送二进制数据到传感器;其中,本实施例中的数据传输单元是基于4G模组OpenCPU开发而来的,以下简称为DTU+,DTU+区别于市面上现有的数据传输单元(DataTransfer unit,简称DTU),本实施例中的DTU+中移植了Lua虚拟机和Lua工具类,以Lua 协程为基本结构,实现多任务处理逻辑。此外,通过Lua脚本将编解码代码运行于Lua的一个协程中,能实现二进制数据和JSON通用数据的转换;进一步地,DTU+的所有接口配置,以及实现二进制数据和JSON通用数据编解码转换的Lua脚本都在DTU+管理平台编辑,并通过云端远程配置后下发DTU+。且用户可以根据传感器协议在云端远程管理、修改Lua脚本配置并使之生效,不需要工程师到现场进行逐个修改,相比于使用相关技术DTU的诸多弊端,采用本实施例的DTU+传输数据能有效的提高效率,降低人工成本,便于工程师进行设备的接入和后期维护调试。
图5是根据本申请实施例的JSON数据到二进制数据的数据转换示意图,具体地,本实施例中通过Lua脚本函数将JSON请求数据编码为二进制数据的数据编码过程如图5所示,例如,对三个json数据 “K1”=5、“K2”=7、“K3”=3进行编码,首先根据init数据项信息创建cache,接着遍历init表,读取init表中数组[index] key的值分别为K1、K2、K3,然后用此值作为json数据的key,并找出对应的value值,读取init表中数组[index]reg/offset的值分别为0、1、2,最后将value值分别写入cache的reg/offset为0、1、2的位置中,得到二进制数据分别为0x05、0x07、0x03,通过上述过程,完成json数据到二进制的数据转换。
步骤S103,传感器根据下行请求数据触发上行请求响应,并通过数据传输单元向IOT数据平台上报上行请求响应,数据传输单元接收传感器发送的二进制采样数据,并通过Lua脚本将二进制采样数据解码为JSON响应数据,按照服务标识将JSON响应数据上报到IOT数据平台,其中,服务标识是基于业务属性分类数据的消息流。可选的,每个服务包由一条下行数据流和一条上行数据流组成,本实施例中下行数据流由IOT数据平台调用发起,每次下行数据流触发的上行数据流会按照服务标识上报到IOT数据平台。
图6是根据本申请实施例的二进制数据到JSON数据的数据转换示意图,具体地,本实施例中通过Lua脚本函数将二进制采样数据编码为JSON响应数据的数据解码过程如图6所示,例如,对三个二进制数据0x05、0x07、0x03进行解码,首先根据init数据项信息创建cache,接着遍历init表,读取init表中数组[index]reg/offset的值分别为0、1、2,按init表中format= uint8,截取二进制数据中reg/offset位置的数据后,读取init表中数组[index]key的值分别为K1、K2、K3,最后用数组[index] key的值作为输出json数据的key,用截取并格式化的数据作为json数据的value值,得到json数据分别是“K1”=5、“K2”=7、“K3”=3,通过上述过程,完成二进制到json数据的数据转换。
在其中一些实施例中,在IOT数据平台没有下发请求数据的情况下,传感器通过数据传输单元向IOT数据平台主动发送采样数据,数据传输单元获取传感器主动发送的二进制采样数据,并将该二进制采样数据解码为JSON数据,最后,按照事件标识将JSON数据上报到IOT数据平台。可选的,每个事件只要一条上行数据流,若是没有任何下行数据流触发,那么上行数据流会按照事件标识上报到云平台,因此,本实施例中,在IOT数据平台没有下发请求数据的情况下,传感器主动上传的采样数据会按照事件标识进行上报,其中,事件标识同样是基于业务属性分类数据的消息流。
由上述可知,本实施例通过引入服务/事件的概念,将上报数据进行不同业务属性的划分, 例如,由下行数据流触发的上行数据流按照服务标识进行上报;没有任何下行数据流触发的上行数据流按照事件标识上报。基于业务属性分类的消息流便于后端工程师理解调用,提高工作效率。
在其中一些实施例中,当传感器不会主动上报数据的情况下,IOT数据平台通过数据传输单元向传感器发起下行请求数据,还可以指定自动调用周期,即在IOT数据平台配置自动调用周期,并通过数据传输单元按照周期向传感器下发下行请求数据,用来调用传感器采集数据。可选的,IOT数据平台根据设定的自动调用周期向传感器下发请求数据,该请求数据经由数据传输单元DTU+进行数据转换,即将JSON请求数据解码为传感器可以识别的二进制请求数据;传感器获取该二进制请求数据,进行相关设备数据的采样,并按照周期进行上行二进制采样数据的回复;该二进制采样数据通过数据传输单元DTU+的编码转换为JSON响应数据,按照服务标识该JSON响应数据被上报到云平台。整个过程实现了数据的自动周期性采集。
通过上述步骤S101至步骤S103,相对于现有技术中,采用DTU将传感器接入云端的方案中存在的诸多弊端,例如数据采集的链路长,增加了数据丢失的风险和数据采集耗费的流量;设备接入效率非常低下,且由于平台中心化的特点,在增加新设备或需要后期维护调试时,工作人员需要在成千上万的设备中查询线索,调试非常困难;以及缺少远程配置管理,任何修改都需要工程师到现场进行配置调试等问题。本实施例开发了新的数据传输单元DTU+,通过DTU+将传感器接入物联网系统的云平台,实现设备的快速接入和数据的完整采集,解决了相关技术中通过物联网系统采集传感器数据时,存在的采集数据丢失风险高,传感器设备接入效率低和缺少远程配置管理的问题,降低了采集数据的丢失风险,提高了设备接入和后期维护的效率,从而有效降低了设备成本和人工成本。
需要说明的是,在上述流程中或者附图的流程图中示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本实施例还提供了一种物联网数据采集的系统,该系统用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图2是根据本申请实施例的数据采集系统的结构框图,如图2所示,该系统包括IOT数据平台20、DTU+管理平台21、数据传输单元22和传感器23:
数据传输单元22包括Lua脚本,Lua脚本在DTU+管理平台21通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;
IOT数据平台20通过数据传输单元22向传感器23发起下行请求数据,数据传输单元22接收IOT数据平台20发起的JSON请求数据,并将JSON请求数据编码为二进制数据,再发送二进制数据到传感器23;
传感器23根据下行请求数据触发上行请求响应,并通过数据传输单元22向IOT数据平台20上报上行请求响应,数据传输单元22接收传感器23发送的二进制采样数据,并将二进制采样数据解码为JSON响应数据,按照服务标识将JSON响应数据上报到IOT数据平台20,其中,服务标识是基于业务属性分类数据的消息流。
在其中一些实施例中,在IOT数据平台20没有下发请求数据的情况下,传感器23通过数据传输单元22向IOT数据平台20主动发送采样数据,数据传输单元22获取传感器23主动发送的二进制采样数据,并将该二进制采样数据解码为JSON数据,最后,按照事件标识将JSON数据上报到IOT数据平台20。可选的,每个事件只要一条上行数据流,若是没有任何下行数据流触发,那么上行数据流会按照事件标识上报到IOT数据平台,因此,本实施例中,在IOT数据平台没有下发请求数据的情况下,传感器主动上传的采样数据会按照事件标识进行上报。
在其中一些实施例中,当传感器23不会主动上报数据的情况下,IOT数据平台20通过数据传输单元22向传感器23发起下行请求数据,还可以指定自动调用周期,即在IOT数据平台20配置自动调用周期,并通过数据传输单元22按照周期向传感器23下发下行请求数据,用来调用传感器23采集数据。可选的,IOT数据平台20根据设定的自动调用周期向传感器23下发请求数据,该请求数据经由数据传输单元DTU+进行数据转换,即将JSON请求数据解码为传感器23可以识别的二进制请求数据;传感器23获取该二进制请求数据,进行相关设备数据的采样,并按照周期进行上行二进制采样数据的回复;该二进制采样数据通过数据传输单元DTU+的编码转换为JSON响应数据,按照服务标识该JSON响应数据被上报到IOT数据平台。整个过程实现了数据的自动周期性采集。
在其中一些实施例中,根据传感器协议进行远程修改包括:数据传输单元22通过MQTT消息向DTU+管理平台21上报DTU+信息,DTU+管理平台21接收DTU+信息,并在关联的配置组中进行配置;DTU+管理平台21下发配置组中的配置信息给数据传输单元22,数据传输单元22在收到配置信息后自动替换本地配置并立即生效。本实施例中用户只需根据上报的DTU+信息,在DTU+管理平台21修改相关配置组内的配置信息,那么远端的DTU+配置也会相应的自动改变。如果该配置需要立即生效,只需在管理平台远程发送重启命令即可触发立即更新配置,不需要工程师到现场进行逐个修改,大大提高了工作效率。
图3是根据本申请实施例的数据采集和DTU+配置管理的系统示意图,如图3所示,整个系统通过自主开发的DTU+将传感器接入物联网系统的IOT数据平台,实现设备的快速接入和数据的完整采集,并通过MQTT消息上报和回复DTU+配置信息,在DTU+管理平台对Lua脚本进行远程更新和修改,解决了相关技术中通过物联网系统采集传感器数据时,存在的采集数据丢失风险高,传感器设备接入效率低和缺少远程配置管理的问题,降低了采集数据的丢失风险,提高了设备接入和后期维护的效率,从而有效降低了设备成本和人工成本。
下面结合应用场景对本发明进行详细的说明。
本发明的目的是提供一种数据采集的方法和系统,图4是根据本申请实施例的一种应用于物联网系统的数据采集系统示意图,如图4所示,本实施例中数据采集的技术方案的流程步骤包括:
S1,云平台发起下行请求数据,或直接配置自动调用周期;
S2,数据传输单元接收该下行请求数据,并通过Lua脚本将其从JSON数据转换为二进制数据,发送到外部传感器;
S3,外部传感器获取云平台发起的下行请求数据触发上行请求响应,或在云平台没有下发请求数据的情况下转步骤S5;
S4,数据传输单元接收传感器回复的上行请求响应,并通过Lua脚本将其从二进制数据转换为JSON数据,最后按照服务标识将JSON响应数据上报到云平台;
S5,数据传输单元接收传感器主动发送的采样二进制数据,并通过Lua脚本将其从二进制数据转换为JSON数据,最后按照事件标识将JSON数据上报到云平台。
本实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
另外,结合上述实施例中的物联网数据采集的方法,本申请实施例可提供一种存储介质来实现。该存储介质上存储有计算机程序;该计算机程序被处理器执行时实现上述实施例中的任意一种物联网数据采集的方法。
在一个实施例中,图7是根据本申请实施例的电子设备的内部结构示意图,如图7所示,提供了一种电子设备,该电子设备可以是服务器,其内部结构图可以如图7所示。该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该电子设备的数据库用于存储数据。该电子设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种物联网数据采集的方法。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的电子设备的限定,具体的电子设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink) DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域的技术人员应该明白,以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种物联网数据采集的方法,应用于物联网系统中,其特征在于,所述系统包括:云平台、数据传输单元和传感器,其中所述云平台包括IOT数据平台和DTU+管理平台,所述数据采集方法包括:
所述数据传输单元包括Lua脚本,所述Lua脚本在所述DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;
所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据,所述数据传输单元接收所述IOT数据平台发起的JSON请求数据,并通过所述Lua脚本将所述JSON请求数据编码为二进制数据,再发送所述二进制数据到所述传感器;
所述传感器根据所述下行请求数据触发上行请求响应,并通过所述数据传输单元向所述IOT数据平台上报所述上行请求响应,所述数据传输单元接收所述传感器发送的二进制采样数据,并通过所述Lua脚本将所述二进制采样数据解码为JSON响应数据,按照服务标识将所述JSON响应数据上报到所述IOT数据平台,其中,所述服务标识是基于业务属性分类数据的消息流。
2.根据权利要求1所述的方法,其特征在于,在所述IOT数据平台没有下发请求数据的情况下,所述方法包括:
所述传感器通过所述数据传输单元向所述IOT数据平台主动发送采样数据,所述数据传输单元获取所述传感器主动发送的二进制采样数据,并将所述二进制采样数据解码为JSON数据,按照事件标识将所述JSON数据上报到所述IOT数据平台。
3.根据权利要求1所述的方法,其特征在于,所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据包括:
所述IOT数据平台配置自动调用周期,并通过所述数据传输单元按照所述调用周期向所述传感器下发所述下行请求数据。
4.根据权利要求1所述的方法,其特征在于,所述根据传感器协议进行远程修改包括:
所述数据传输单元通过MQTT消息向所述DTU+管理平台上报DTU+信息,所述DTU+管理平台接收所述DTU+信息,并在关联的配置组中进行配置;
所述DTU+管理平台下发所述配置组中的配置信息给所述数据传输单元,所述数据传输单元在收到所述配置信息后自动替换本地配置并立即生效。
5.一种物联网数据采集的系统,应用于物联网系统中,其特征在于,所述系统包括:云平台、数据传输单元和传感器,其中所述云平台包括IOT数据平台和DTU+管理平台,
所述数据传输单元包括Lua脚本,所述Lua脚本在所述DTU+管理平台通过MQTT消息进行更新编辑,并能根据传感器协议进行远程修改;
所述IOT数据平台通过所述数据传输单元向所述传感器发起下行请求数据,所述数据传输单元接收所述IOT数据平台发起的JSON请求数据,并通过所述Lua脚本将所述JSON请求数据编码为二进制数据,再发送所述二进制数据到所述传感器;
所述传感器根据所述下行请求数据触发上行请求响应,并通过所述数据传输单元向所述IOT数据平台上报所述上行请求响应,所述数据传输单元接收所述传感器发送的二进制采样数据,并通过所述Lua脚本将所述二进制采样数据解码为JSON响应数据,按照服务标识将所述JSON响应数据上报到所述IOT数据平台,其中,所述服务标识是基于业务属性分类数据的消息流。
6.根据权利要求5所述的系统,其特征在于,在所述IOT数据平台没有下发请求数据的情况下,
所述传感器通过所述数据传输单元向所述IOT数据平台主动发送采样数据,所述数据传输单元获取所述传感器主动发送的二进制采样数据,并将所述二进制采样数据解码为JSON数据,按照事件标识将所述JSON数据上报到所述IOT数据平台。
7.根据权利要求5所述的系统,其特征在于,
所述IOT数据平台配置自动调用周期,并通过所述数据传输单元按照所述调用周期向所述传感器下发所述下行请求数据。
8.根据权利要求5所述的系统,其特征在于,
所述数据传输单元通过MQTT消息向所述DTU+管理平台上报DTU+信息,所述DTU+管理平台接收并回复在所述DTU+管理平台上关联的配置组;
所述DTU+管理平台下发所述配置组中的配置给所述数据传输单元,所述数据传输单元在收到配置后自动替换本地配置并立即生效。
9.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至4中任一项所述的物联网数据采集的方法。
10.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行权利要求1至4中任一项所述的物联网数据采集的方法。
CN202110493266.4A 2021-05-07 2021-05-07 一种物联网数据采集的方法、系统、电子装置和存储介质 Active CN112911024B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110493266.4A CN112911024B (zh) 2021-05-07 2021-05-07 一种物联网数据采集的方法、系统、电子装置和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110493266.4A CN112911024B (zh) 2021-05-07 2021-05-07 一种物联网数据采集的方法、系统、电子装置和存储介质

Publications (2)

Publication Number Publication Date
CN112911024A true CN112911024A (zh) 2021-06-04
CN112911024B CN112911024B (zh) 2021-08-06

Family

ID=76109020

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110493266.4A Active CN112911024B (zh) 2021-05-07 2021-05-07 一种物联网数据采集的方法、系统、电子装置和存储介质

Country Status (1)

Country Link
CN (1) CN112911024B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113138562A (zh) * 2021-06-22 2021-07-20 武汉慧联无限科技有限公司 基于物联网的终端控制系统及终端控制方法
WO2024000117A1 (zh) * 2022-06-27 2024-01-04 西门子股份公司 边缘计算设备、方法和物联网系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102638826A (zh) * 2011-02-12 2012-08-15 苏州达联信息科技有限公司 一种铁路轨道监测传感器节点远程配置更新方法
CN103024059A (zh) * 2012-12-19 2013-04-03 北京时代凌宇科技有限公司 一种物联网中间件系统
CN105245445A (zh) * 2015-09-08 2016-01-13 浙江风向标科技有限公司 一种物联网网关
CN205049934U (zh) * 2015-10-21 2016-02-24 贵州电网公司信息通信分公司 一种实现监控系统业务逻辑在线修改的装置
US20180262388A1 (en) * 2006-09-25 2018-09-13 Weaved, Inc. Remote device deployment
CN109814915A (zh) * 2018-12-29 2019-05-28 天津字节跳动科技有限公司 基于lua的参数配置方法、装置、介质和电子设备
CN110989381A (zh) * 2019-11-29 2020-04-10 合肥美的电冰箱有限公司 家用电器及其控制方法、服务器及其控制方法和客户端
CN111654498A (zh) * 2020-06-03 2020-09-11 深圳市信锐网科技术有限公司 设备添加方法及物联网平台
CN112380428A (zh) * 2020-10-29 2021-02-19 浙江简捷物联科技有限公司 云边协调的边缘计算的方法、系统、电子装置和存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180262388A1 (en) * 2006-09-25 2018-09-13 Weaved, Inc. Remote device deployment
CN102638826A (zh) * 2011-02-12 2012-08-15 苏州达联信息科技有限公司 一种铁路轨道监测传感器节点远程配置更新方法
CN103024059A (zh) * 2012-12-19 2013-04-03 北京时代凌宇科技有限公司 一种物联网中间件系统
CN105245445A (zh) * 2015-09-08 2016-01-13 浙江风向标科技有限公司 一种物联网网关
CN205049934U (zh) * 2015-10-21 2016-02-24 贵州电网公司信息通信分公司 一种实现监控系统业务逻辑在线修改的装置
CN109814915A (zh) * 2018-12-29 2019-05-28 天津字节跳动科技有限公司 基于lua的参数配置方法、装置、介质和电子设备
CN110989381A (zh) * 2019-11-29 2020-04-10 合肥美的电冰箱有限公司 家用电器及其控制方法、服务器及其控制方法和客户端
CN111654498A (zh) * 2020-06-03 2020-09-11 深圳市信锐网科技术有限公司 设备添加方法及物联网平台
CN112380428A (zh) * 2020-10-29 2021-02-19 浙江简捷物联科技有限公司 云边协调的边缘计算的方法、系统、电子装置和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡涛等: ""边缘设备接入技术的研究"", 《计算机时代》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113138562A (zh) * 2021-06-22 2021-07-20 武汉慧联无限科技有限公司 基于物联网的终端控制系统及终端控制方法
CN113138562B (zh) * 2021-06-22 2021-09-24 武汉慧联无限科技有限公司 基于物联网的终端控制系统及终端控制方法
WO2024000117A1 (zh) * 2022-06-27 2024-01-04 西门子股份公司 边缘计算设备、方法和物联网系统

Also Published As

Publication number Publication date
CN112911024B (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN112911024B (zh) 一种物联网数据采集的方法、系统、电子装置和存储介质
CN112738216B (zh) 一种设备适配方法、装置、设备和计算机可读存储介质
CN105786998A (zh) 数据库中间件系统及利用其处理数据的方法
CN111343020A (zh) 多协议物联网设备的统一管理方法和装置
CN109768623A (zh) 电力系统的监控方法、装置、计算机设备和存储介质
CN110719296B (zh) 一种终端通信协议内的报文数据自动解析的方法
CN104219316A (zh) 一种分布式系统中的调用请求处理方法及装置
CN112685248A (zh) 智能网卡监控日志获取方法、装置、电子设备及存储介质
CN108363588B (zh) 实现web与原生功能交互的方法、电子装置及可读存储介质
CN109104405B (zh) 二进制协议编码、解码方法和装置
CN111552838A (zh) 数据处理方法及装置、计算机设备、存储介质
CN109639737A (zh) 协议发生装置、数据采集终端的协议转换方法和配置方法
CN107562426B (zh) 无埋点式云端收集分析浏览器Trace的方法及系统
CN115329170A (zh) 网页抓取方法、装置、设备以及存储介质
CN114025027B (zh) 数据传输脚本的运行方法、装置、存储介质和电子装置
CN113783860B (zh) 一种基于可视化配置的报文处理方法、装置、设备及存储介质
CN107480182A (zh) 一种航天器遥测数据溯源方法及系统
CN113839902B (zh) 通信协议适配方法、装置、计算机设备和存储介质
CN117499380A (zh) 一种自定义协议数据采集方法
CN117348900A (zh) 电能表匹配升级方法及相关设备
CN104468702B (zh) 一种通用虚拟试验实物设备接入系统
CN105407133A (zh) 一种移动应用自动化发布方法和系统
CN113746850B (zh) 一种物联网多通道数据采集方法
CN109981674B (zh) 一种远程过程调用方法、装置、设备及介质
CN103685377A (zh) 一种web优化加速方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant