CN113645131A - 数据处理方法、装置、电子设备及存储介质 - Google Patents
数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113645131A CN113645131A CN202110829637.1A CN202110829637A CN113645131A CN 113645131 A CN113645131 A CN 113645131A CN 202110829637 A CN202110829637 A CN 202110829637A CN 113645131 A CN113645131 A CN 113645131A
- Authority
- CN
- China
- Prior art keywords
- internet
- things
- equipment
- data
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/66—Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer And Data Communications (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Communication Control (AREA)
Abstract
本发明提供了一种数据处理方法、装置、电子设备及存储介质;所述方法应用于网关设备,包括:从第一设备获取传输数据;根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;将完成数据格式转换后的所述传输数据,发送给所述第二设备。
Description
技术领域
本发明涉及物联网技术领域,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
背景技术
当前物联网产业中的系统架构主要可以分为感知层,平台层和应用层。其中感知层由具备多种多样传输协议的智能设备构成,智能设备通过5G(5th Generation MobileCommunication Technology,第五代移动通信技术),NB-IoT(Narrow Band Internet ofThings,窄带物联网),LoRaWAN(Long Range Wide Area Network,远程广域网络),Zigbee和以太网等传输协议接入到物联网平台,再有应用开发商基于物联网平台,获取到感知层物联网设备的数据,进行进一步的应用开发。物联网平台扮演了连接智能设备与物联网应用的桥梁角色。
物联网平台接入各类物联网设备是物联网系统的基础功能之一,当前主要有两类接入方案:
1、物联网平台提供标准的设备接入协议规范,接入平台的各类物联网设备在固件开发时,需要适配物联网平台的接入协议规范进行适配开发,完成数据接入。
2、物联网平台针对所要接入的物联网设备协议进行适配开发,主动适配各类物联网设备。
可见,目前要实现物联网平台对各类物联网设备的接入,就需要物联网平台或物联网设备进行适配性的开发,存在较高的工作量和适配性开发所带来的不稳定性和安全性的隐患。
发明内容
本发明实施例提供一种数据处理方法、装置、电子设备及存储介质。
本发明实施例的技术方案是这样实现的:
本发明实施例提供一种数据处理方法,应用于网关设备,包括:
从第一设备获取传输数据;
根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
将完成数据格式转换后的所述传输数据,发送给所述第二设备。
上述方案中,所述设备型号包括:物联网设备的型号;
在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据;
在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。
上述方案中,所述方法还包括:
在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本;
建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本。
上述方案中,所述方法还包括:
接收所述物联网平台下发的物联网设备接入信息;其中所述物联网设备接入信息携带有物联网设备的型号、所述物联网设备的网络协议以及所述物联网设备对应的接入脚本;
根据所述物联网设备接入信息,创建与所述物联网设备的型号对应的处理线程,其中,所述处理线程用于处理所述物联网设备发送的上行数据和/或对发送至所述物联网设备的下行数据。
上述方案中,所述在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式,包括:
当所述传输数据需格式转换时,根据所述设备型号对应的处理线程,调用与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式。
本发明实施例还提供一种数据处理装置,应用于网关设备,包括:
接收单元,用于从第一设备获取传输数据;
确定单元,用于根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
转换单元,用于在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
发送单元,用于将完成数据格式转换后的所述传输数据,发送给所述第二设备。
上述方案中,所述设备型号包括:物联网设备的型号;
在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据;
在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。
上述方案中,所述装置还包括:存储单元,用于建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本;
所述接收单元还用于在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本。
本发明实施例还提供一种电子设备,所述设备至少包括:处理器和配置为存储可执行指令的存储介质,其中:处理器配置为执行存储的可执行指令,所述可执行指令配置为执行上述实施例提供的数据处理方法。
本发明实施例还提供一种计算机可读存储介质,存储有可执行指令,所述可执行指令被处理器执行时,实现本发明实施例提供的数据处理方法。
本发明实施例通过在第一设备发送的数据与第二设备支持的数据格式不一致时,网关设备利用脚本文件将第一设备发送的数据转换为第二设备支持的格式,通过在不改变第一设备和第二设备的硬件和业务应用的情况下,通过简单的脚本操作就实现了第一设备和第二设备之间的通信的适配,减少了设备供应商或开发商为实现不同设备之间通信所做的二次开发。若该方法应用于物联网系统,利用网关设备连接物联网设备和物联网平台,通过网关中的脚本文件实现物联网设备与物联网平台之间数据格式的转换,一方面,实现了物联网设备的供应商或者开发商无需针对物联网平台适配性的开发,降低了设备重新进行固件开发带来的高昂成本和稳定性风险;另一方面,实现了物联网设备接入与物联网平台的解耦,通过简单的插件式更新,在不影响物联网平台的其他业务功能和其他物联网设备接入的情况下实现将物联网设备快速接入物联网平台。
附图说明
图1是本发明实施例提供的数据处理方法的流程示意图;
图2是本发明实施例提供的协议转换云网关在物联网系统中应用的示意图;
图3是本发明实施例提供的协议转换云网关的架构示意图;
图4是本发明实施例提供的线程管理模块结构示意图;
图5是本发明实施例提供的协议转换云网关的处理线程创建流程示意图;
图6是本发明实施例提供的协议转换云网关处理流程的流程示意图;
图7是本发明实施例提供的数据处理装置的结构示意图;
图8是本发明实施例提供的电子设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,所描述的实施例不应视为对本发明的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
在以下的描述中,所涉及的术语“第一\第二\第三”仅仅是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本发明实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本发明实施例的目的,不是旨在限制本发明。
下面说明本发明实施例提供的数据处理方法。参见图1,图1是本发明实施例提供的数据处理方法的流程示意图;在一些实施例中,该数据处理方法可应用于网关设备,所述网关设备包括但不限于LoRaWAN网关;本发明实施例提供的数据处理方法包括:
步骤S110:从第一设备获取传输数据;
步骤S120:根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
步骤S130:在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
步骤S140:将完成数据格式转换后的所述传输数据,发送给所述第二设备。
在一实施例中,设备型号唯一指示该设备的设备类型,其中设备类型指示设备厂商和规格型号均相同的设备,例如:A厂家型号为A001的电表和B厂家型号为B002的电表属于两种不同类型(即不同的设备型号)的物联网设备。又例如:A厂家型号为A001的电表和A厂家型号为A002的电表也属于两种不同类型(即不同的设备型号)的设备。
在一实施例中,所述设备的型号包括但不限于:物联网设备的型号。
在一实施例中,所述传输数据中携带有设备型号,所述设备型号可为第一设备的型号或第二设备的型号,或第一设备和第二设备的型号。
当多个设备与第二设备建立连接时,传输数据中携带的设备型号为第一设备的型号。当多个设备与第一设备建立连接时,传输数据中携带的设备型号为第二设备的型号。当多个设备互相连接时,传输数据中携带的设备型号为第二设备的型号以及第一设备的型号。
在一些实施例中,在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据。此时,应用于所述网关设备的数据处理方法包括:
步骤1:接收物联网设备发送的上行数据;
步骤2:根据所述物联网设备的型号,确定是否需要进行所述上行数据的格式转换;
步骤3:在所述上行数据需要格式转换时,根据与所述物联网设备的型号对应的接入脚本将所述上行数据转换为物联网平台对应的公共数据格式;其中,所述接入脚本为:所述物联网设备通过所述网关设备接入所述物联网平台时确定的;
步骤4:将完成数据格式转换后的所述上行数据,发送给所述物联网平台。此处完成数据格式转换后的上行数据,即为公共数据格式的上行数据。
在一实施例中,物联网平台对应的公共数据格式为物联网平台支持识别的数据格式。
在一实施例中,网关设备内存储有需要进行数据转换的物联网设备的型号对应的接入脚本以及接入脚本与物联网设备型号之间的对应关系。网关设备在接收物联网设备发送的上行数据后,会查询物联网设备的型号是否为网关设备内存储的型号,若查询到网关设备内存储有该型号,则调用与物联网设备的型号对应的接入脚本,对该上行数据进行重新封装转换为物联网平台能够识别的公共数据格式,然后发送到物联网平台。
在一实施例中,上行数据中携带有物联网设备的型号的信息,包括但不限于用于指示物联网设备型号的设备型号标识。
在一实施例中,上行数据中携带有物联网设备的设备标识,设备标识用于唯一标识物联网设备,即物联网设备与设备标识一一对应。设备标识用于供物联网平台确定其接收数据的来源,从而便于数据的分类管理。
在一实施例中,与物联网设备的型号对应的接入脚本能对物联网设备的数据进行解析,并将解析后的数据重新封装成物联网平台对应的公共数据格式。
本实施例通过在物联网设备上传的数据与物联网平台支持的数据格式不一致时,不需要应用层的支持,而是直接在中间件层利用脚本文件将物联网设备上传的数据转换为物联网平台支持的格式,一方面,实现了物联网设备无需针对物联网平台适配性的开发,降低了设备重新进行固件开发带来的高昂成本和稳定性风险;另一方面,实现了物联网设备接入与物联网平台解耦,可以通过简单的插件式更新,在不影响物联网平台的其他业务功能和其他设备接入的情况下实现设备快速接入。
在一些实施例中,在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。此时,应用于所述网关设备的数据处理方法包括:
接收所述物联网平台下发的下行数据;其中,所述下行数据携带有所述物联网设备的型号;
根据所述物联网设备的型号,确定是否需要进行所述下行数据的格式转换;
在所述下行数据需要格式转换时,根据与所述物联网设备的型号对应的接入脚本将所述下行数据转换为所述物联网设备对应的数据格式;
将完成数据格式转换后的所述下行数据,发送给对应的物联网设备。
在一实施例中,下行数据中携带有物联网设备的型号的信息,包括但不限于用于指示物联网设备型号的设备型号标识。
在一实施例中,下行数据中携带有物联网设备的设备标识,设备标识用于唯一标识物联网设备。网关设备可根据设备标识确定下行数据的发送对象。
在一实施例中,网关设备将物联网设备的型号与网关设备内存储的设备的型号进行对比,若网关设备内存储有该型号,则调用该型号对应的接入脚本(解析脚本)对下行数据进行处理,对下行数据进行格式转换。此处完成数据格式转换后的下行数据,即为物联网设备支持的数据格式的下行数据。
在一实施例中,网关设备能利用接入脚本同时对上行数据和下行数据进行处理,将接收的上行数据转换为物联网平台对应的公共数据格式的数据,将接收的下行数据的数据格式转换为物联网设备支持的数据格式。
在一实施例中,网关设备利用接入脚本(解析脚本)对下行数据进行处理和封装,组装成物联网设备可识别的信息。
本实施例通过网关设备中的中间件层利用存储的脚本对物联平台下发到物联网设备的数据进行格式转换,将物联网平台下发的数据转换为物联网设备支持识别的数据格式,一方面减少物联网平台和物联网设备为实现相互之间的通信连接而进行的适配性开发所带来的大量的开发工作量和稳定性风险,另一方面,也减少了物联网设备适配开发与物联网设备的业务功能的耦合现象,降低了开发管理难度。
在一些实施例中,所述方法还包括:
在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本;
建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本。
本实施例通过在网关中进行接入脚本的存储和更新,采用接入脚本将新接入的物联网设备上传的数据格式变换为物联网平台支持的数据格式,就能实现新接入的物联网设备和物联网平台之间的数据传输,实现适配。
在一实施例中,当有物联网设备需要通过网关设备接入物联网平台时,物联网平台向网关设备发送接入的物联网设备的型号以及与该物联网设备型号对应的接入脚本,其中,所述接入脚本是根据物联网设备的型号对应的数据格式编写的,该接入脚本能解析对应型号的物联网设备发送的数据。
在一实施例中,网关接收到物联网平台下发的接入脚本和物联网设备的型号后,会先确定是否有存储该设备的型号对应的脚本,若存储有该设备的型号对应的脚本,则采用接收到的接入脚本替换原存储的脚本,以实现接入脚本的更新。
在一实施例中,在物联网设备通过网关设备接入物联网平台时,网关设备支持接收和存储用户上传的接入脚本,并建立该物联网设备的型号与接入脚本的对应关系。其中,用户上传接入脚本,包括但不限于:通过与网关设备建立有无线或有线连接的移动终端上传的接入脚本。所述移动终端包括但不限于手机或电脑。
在一些实施例中,所述方法还包括:
接收所述物联网平台下发的物联网设备接入信息;其中所述物联网设备接入信息携带有物联网设备的型号、所述物联网设备的网络协议以及所述物联网设备对应的接入脚本;
根据所述物联网设备接入信息,创建与所述物联网设备的型号对应的处理线程,其中,所述处理线程用于处理所述物联网设备发送的上行数据和/或对发送至所述物联网设备的下行数据。
在一实施例中,在物联网设备在接入物联网平台时,物联网平台会先确定所述物联网设备的型号和物联网设备的网络协议,并上传与该型号对应的接入脚本。然后物联网平台会将所述物联网设备的型号、网络协议以及其对应的接入脚本发送至网关设备。网关设备根据物联网设备的型号创建该物联网设备的处理线程。
在一实施例中,在物联网设备在接入物联网平台时,物联网平台还会自动生成该物联网设备的接入地址,并将接入地址发送至网关设备,网关设备根据接入地址和网络协议,启动对应的请求接收服务。
在一实施例中,物联网设备的接入地址与物联网设备型号对应,即接入地址、物联网设备型号和处理线程之间存在对应关系,当接收请求服务在该接入地址接收到数据请求后,可直接执行与接入地址对应的处理线程对数据进行处理。在一些实施例中,在所述上行数据需要格式转换时,根据与所述物联网设备的型号对应的接入脚本将所述上行数据转换为物联网平台对应的公共数据格式,包括:
当所述上行数据需要格式转换时,根据所述物联网设备的型号对应的处理线程,调用与所述物联网设备的型号对应的接入脚本将所述上行数据转换为物联网平台对应的公共数据格式。
在所述下行数据需要格式转换时,根据与所述物联网设备的型号对应的接入脚本将所述下行数据转换为物联网设备对应的数据格式,包括:
当所述下行数据需要格式转换时,根据所述物联网设备的型号对应的处理线程,调用与所述物联网设备的型号对应的接入脚本将所述下行数据转换为物联网设备对应的数据格式。
在一实施例中,物联网设备型号与线程一一对应,每个线程中存储有与物联网设备型号对应的接入脚本。当所述物联网设备在接入物联网平台时,网关设备根据所述物联网设备的型号调用与其型号对应的线程进行该物联网设备上行数据和/或下行数据的处理,线程执行的过程中调用其存储的接入脚本将所述上行数据转换为物联网平台对应的公共数据格式和/或将下行数据转换为物联网设备对应的数据格式。
在一实施例中,当多个物联网设备接入,网关设备同时接收到多个型号的物联网设备的上行数据时,和/或物联网平台向多个型号的物联网设备发送下行数据时,网关设备可同时调用多个与所述物联网设备型号对应的线程进行数据的并行处理。
本实施例,通过在调用脚本进行数据转换的基础上,进一步的,采用设备型号对应的专属线程对该型号设备的数据进行处理,通过多条专属线程的并行执行,大大提高了数据转换的效率,从而提升了物联网设备与物联网平台之间的通信性能。以下结合上述实施例提供一个具体示例:
通过对当前物联网平台设备接入方案的研究,发现在实际项目中会遇到以下的实际情况:
1.物联网技术更新迭代迅速,传输协议更新频繁,造成了新旧物联网设备会采用大量不相同的传输技术。
2.物联网设备行业程度低,缺乏标准规范,导致使用相同、相似传输技术的物联网设备厂商根据自身需要定义了各不相同的传输协议和规范。
3.物联网设备往往资源有限,升级困难,并且工作在复杂的生产场景中,其固件开发和调试难度远高于物联网应用软件开发;设备一旦开发完毕,再次修改设备固件进行协议适配带来的开发工作量和稳定性风险巨大。
4.物联网应用中出现了越来越多的多传感融合的应用场景,单一物联网应用中需要使用多大数十种不同厂商,不同传输协议的物联网设备。
由于存在以上问题,若采用当前的物联网平台针对不同物联网设备进行适配性开发的方案或物联网设备针对不同的物联网平台进行适配性开发的方案以实现物联网设备接入物联网平台,则会存在以下缺点:
1.对于物联网平台提供标准接入协议的方式,除了头部物联网平台外,其余平台难以驱动物联网设备厂商进行适配开发。
2.对于物联网平台提供标准接入协议的方式,设备厂商进行物联网设备固件修改,带来了很高的开发工作量以及稳定性风险。
3.对于物联网平台适配开发的方式,平台针对大量的物联网设备适配开发,带来了平台的不稳定性,且平台更新将会对其他设备的工作业务带来影响。
4.物联网设备适配开发与物联网平台的其余业务功能耦合严重,开发管理难度高。
经过大量的工程实践,研究发现物联网设备接入工作存在以下共性:
1.使用各类不同传输技术的物联网设备,在与物联网云平台对接时往往将协议转为基于TCP(Transmission Control Protocol,传输控制协议)、UDP(User DatagramProtocol,用户数据报协议)、HTTP(Hypertext Transfer Protocol,超文本传输协议)和MQTT(MQ Telemetry Transport,遥测传输)这四类互联网通信协议。
2.使用各类不同传输技术的设备,在数据格式上各不相同,但均具备设备唯一标识和业务数据两大类数据,并且物联网设备接入物联网均需要解析出设备的唯一标识进行设备寻址,以及设备业务数据进行业务处理。
基于以上共性,本示例在物联网设备与物联网平台之间设置了一款多协议兼容的协议转换云网关。图2为该协议转换云网关在物联网系统中应用的示意图。该协议转换云网关系统具备以下功能:
1.将各类不同传输协议的物联网设备的上下行数据,进行统一的格式封装提供给物联网平台,新的类型的设备接入时物联网平台无需再进行适配修改。
2.该协议转换网关系统支持使用JavaScript(一种具有函数优先的轻量级、解释型或即时编译型的编程语言)编写的接入脚本,在系统不进行更新的情况下进行设备快速接入。
3.将复杂的物联网设备接入工作,简化为格式化的JavaScript接入脚本编写,大大降低了设备接入开发难度。
图3为本示例提供的协议转换云网关的架构示意图。如图3所示,协议转换云网关由6大部分组成:
1.线程管理模块:该模块负责与物联网平台协同,在物联网平台创建一款需接入物联网平台的设备时,在对应的接入模块中创建处理线程。
2.通信调度模块:该模块负责与物联网平台进行数据通信,将云网关接入的物联网设备数据转发至物联网平台,将物联网平台下发的数据分发到云网关对应的处理线程。
3.TCP接入模块:处理使用TCP协议的物联网设备数据接入任务。
4.UDP接入模块:处理使用UDP协议的物联网设备数据接入任务。
5.HTTP接入模块:处理使用HTTP协议的物联网设备数据接入任务。
6.MQTT接入模块:处理使用MQTT协议的物联网设备数据接入任务。
每一个处理模块中能包含多个处理线程,处理线程与接入云网关的设备型号一一对应(设备型号指相同规格的一类设备,例如A厂家型号为A001的电表等),处理对应型号的物联网设备的数据接入。
其中,线程管理模块中创建有TCP、UDP、HTTP和MQTT等4类接入线程,如图4所示,其结构分别如下:
1.TCP处理线程:存储该型号设备接入的JavaScript接入脚本,存储TCP会话信息,监听指定端口的TCP数据报文。
2.UDP处理线程:存储该型号设备接入的JavaScript接入脚本,存储UDP会话信息,监听指定端口的UDP数据报文。
3.HTTP处理线程:存储该型号设备接入的JavaScript接入脚本,存储HTTP会话信息,监听指定URL的HTTP请求。
4.MQTT处理线程:存储该型号设备接入的JavaScript接入脚本,存储该型号设备与MQTT服务器之间的主题信息,服务质量参数等信息参数,并订阅设备的上行消息主题。
对于本示例的协议转换云网关,是通过创建处理线程和接入脚本来完成对物联网设备接入工作:
其中,协议转换云网关的处理线程创建流程,如图5所示,包括:
1.HTTP接入类型设备:
(1)在物联网平台端创建产品(设备型号维度),需定义该款物联网产品的型号唯一标识,选择接入模式HTTP接入模式,并上传编写好的接入脚本;
(2)物联网平台自动生成设备接入地址,并将接入地址,型号唯一标识,接入脚本等发送给协议转换云网关的线程管理模块;
(3)协议转换云网关线程管理模块根据接收到的型号唯一标识,创建HTTP处理线程;根据接收到的接入地址,启动HTTP请求接收服务;
(4)协议转换云网关线程管理模块根据接收到的接入脚本,将接入脚本标识为对应型号的物联网设备HTTP处理线程的接入脚本,完成处理线程创建。
2.TCP/UDP接入类型设备:
(1)在物联网平台端创建产品(型号维度),需定义该款物联网产品的型号唯一标识,选择接入模式TCP/UDP接入模式,并上传编写好的接入脚本;
(2)物联网平台自动分配监听设备数据的端口,并将端口信息,型号唯一标识,接入脚本等发送给云网关的线程管理模块;
(3)协议转换云网关线程管理模块根据接收到的型号唯一标识,创建TCP/UDP处理线程;根据接收到的接入端口,TCP/UDP报文监听功能,并根据后续设备上报的数据维护TCP/UDP会话信息;
(4)协议转换云网关线程管理模块根据接收到的接入脚本,将接入脚本标识为对应型号的物联网设备TCP/UDP处理线程的接入脚本,完成处理线程创建。
3.MQTT接入类型设备:
(1)在物联网平台端创建产品(型号维度),需定义该款物联网产品的型号唯一标识,选择接入模式MQTT接入模式,并上传编写好的接入脚本;
(2)在物联网平台端录入改款产品对接使用的MQTT服务器地址,账号密码,数据通信使用的主题,以及服务质量等参数;
(3)对于数据通信使用的MQTT主题,要求格式为:服务器地址/#/型号唯一标识/(设备唯一标识);
(4)协议转换云网关线程管理模块根据接收到的型号唯一标识,创建MQTT处理线程;根据MQTT服务器地址和账号密码连接对应的MQTT服务器,根据通信主题订阅对应型号的设备数据;
(5)协议转换云网关线程管理模块根据接收到的接入脚本,将接入脚本标识为对应型号的物联网设备MQTT处理线程的接入脚本,完成处理线程创建。
协议转换云网关对设备(物联网设备)上报数据的处理流程,如图6所示,包括:
(1)处理线程创建后,即可以接收到对应型号设备上报的所有数据;
(2)处理线程接收到设备数据后,调用对应的JavaScript接入脚本对设备数据进行脚本处理;
(3)JavaScript接入脚本中的代码需要根据对应设备的数据格式进行对应编写处理,在上行处理函数中解析出设备的唯一标识和业务数据;
(4)如果该产品的上行数据需要进行响应处理,则JavaScript接入脚本中的下行解析函数开始工作,组装对应的响应数据,并发送给设备;
(5)完成JavaScript脚本上行数据处理后,处理线程将结果传递至通信调度模块,组装成与物联网平台之间的标准数据格式;
(6)通信调度模块将数据转发至物联网平台。
协议转换云网关下发数据至设备处理流程,如图6所示,包括:
(1)物联网平台使用与协议转换云网关之间的标准数据格式和接口,将包含设备唯一标识,设备型号唯一标识和设备业务数据的请求发送给协议转换云网关的通信调度模块;
(2)通信调度模块根据设备型号唯一标识,查询到型号对应的处理线程,并将设备唯一标识和业务数据发送给对应的处理线程;
(3)处理线程调用JavaScript接入脚本,使用脚本中的下行解析函数对设备唯一标识和业务数据进行处理和封装,组装成设备可识别的报文;
(4)JavaScript接入脚本中的下行解析函数,需要针对对应型号的物联网设备的数据格式,进行针对性的适配和代码开发;
(5)处理线程将JavaScript接入脚本处理后的数据,发送至设备。
基于上述内容,本示例还提出了一种物联网数据处理方法,应用于协议转换云网关,本示例提出的物联网数据处理方法包括:
S1:接收物联网平台端下发的待连接的物联网产品的型号唯一标识、接入地址、接入模式和接入脚本。其中,接入地址是物联网平台端根据物联网产品自动生成的设备接入地址。接入模式是基于物联网产品所使用的通信协议,例如:若使用的是http互联网通信协议,则接入模式为http模式。
S2:根据接收的型号唯一标识和接入模式,创建与型号唯一标识对应的基于该接入模式的处理线程,且将接收的接入脚本标识为该物联网产品型号对应的处理线程的接入脚本,并根据接入地址,启动基于该接入模式的请求接收服务。
S3:采用与物联网产品型号对应的处理线程接收物联网产品上传的数据,通过调用与处理线程对应的接入脚本将接收的数据格式转换为物联网平台支持的数据格式。
S4:接收物联网平台端向物联网产品下发的数据,采用与物联网产品型号对应的处理线程接收物联网平台端下发的数据,通过调用与处理线程对应的接入脚本将接收的数据格式转换为物联网产品支持的数据格式。
下面继续说明本发明实施例提供的数据处理装置,在一些实施例中,数据处理装置可采用软件模块的方式实现。参见图7,图7是本发明实施例提供的数据处理装置的结构示意图,本发明实施例提供的数据处理装置700,可应用于网关设备,包括:
接收单元710,从第一设备获取传输数据;
确定单元720,用于根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
转换单元730,用于在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
发送单元740,用于将完成数据格式转换后的所述传输数据,发送给所述第二设备。
在一些实施例中,所述设备型号包括:物联网设备的型号;
在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据;
在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。
在一些实施例中,所述装置还包括:存储单元,用于建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本;
所述接收单元还用于在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本。
在一些实施例中,所述接收单元,还用于接收所述物联网平台下发的物联网设备接入信息;其中所述物联网设备接入信息携带有物联网设备的型号、所述物联网设备的网络协议以及所述物联网设备对应的接入脚本;
所述装置还包括:创建单元,用于根据所述物联网设备接入信息,创建与所述物联网设备的型号对应的处理线程,其中,所述处理线程用于处理所述物联网设备发送的上行数据和/或对发送至所述物联网设备的下行数据。
在一些实施例中,所述转换单元,还用于当所述传输数据需格式转换时,根据所述设备型号对应的处理线程,调用与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式。
在一些实施例中,本发明实施例还提供一种电子设备,所述设备至少包括:处理器和配置为存储可执行指令的存储介质,其中:
处理器配置为执行存储的可执行指令,所述可执行指令配置为执行本发明实施例提供的数据处理方法。
需要说明的是,图8为本申请实施例提供的一种电子设备结构示意图,如图8所示,该设备800至少包括:处理器810、通信接口820和存储器830,其中:
处理器810通常控制设备800的总体操作。
通信接口820可以使设备通过网络与其他设备通信。
存储器830配置为存储由处理器810可执行的指令和应用,还可以缓存待处理器810以及设备800中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random Access Memory,RAM)实现。
需要说明的是,本申请实施例中,如果以软件功能模块的形式实现上述数据处理方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台服务器执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本申请实施例不限制于任何特定的硬件和软件结合。
对应地,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例提供的数据处理方法中的步骤。
这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请存储介质和设备实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
当然,本申请实施例中的装置还可有其他类似的协议交互实现案例,在不背离本申请精神及其实质的情况下,本领域的技术人员当可根据本申请实施例做出各种相应的改变和变形,但这些相应的改变和变形都应属于本申请方法所附的权利要求的保护范围。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的设备。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令设备的制造品,该指令设备实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个模块或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或模块的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的模块可以是、或也可以不是物理上分开的,作为模块显示的部件可以是、或也可以不是物理模块;既可以位于一个地方,也可以分布到多个网络模块上;可以根据实际的需要选择其中的部分或全部模块来实现本实施例方案的目的。
以上所述,仅为本申请的实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种数据处理方法,应用于网关设备,其特征在于,包括:
从第一设备获取传输数据;
根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
将完成数据格式转换后的所述传输数据,发送给所述第二设备。
2.根据权利要求1所述的方法,其特征在于,所述设备型号包括:物联网设备的型号;
在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据;
在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本;
建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
接收所述物联网平台下发的物联网设备接入信息;其中所述物联网设备接入信息携带有物联网设备的型号、所述物联网设备的网络协议以及所述物联网设备对应的接入脚本;
根据所述物联网设备接入信息,创建与所述物联网设备的型号对应的处理线程,其中,所述处理线程用于处理所述物联网设备发送的上行数据和/或对发送至所述物联网设备的下行数据。
5.根据权利要求1所述的方法,其特征在于,所述在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式,包括:
当所述传输数据需格式转换时,根据所述设备型号对应的处理线程,调用与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式。
6.一种数据处理装置,应用于网关设备,其特征在于,所述装置包括:
接收单元,用于从第一设备获取传输数据;
确定单元,用于根据所述传输数据携带的设备型号,确定是否需要进行所述传输数据的格式转换;
转换单元,用于在所述传输数据需要格式转换时,根据与所述设备型号对应的接入脚本将所述传输数据转换为第二设备对应的数据格式;其中,所述接入脚本为:所述第一设备与所述第二设备建立连接时确定的;
发送单元,用于将完成数据格式转换后的所述传输数据,发送给所述第二设备。
7.根据权利要求6所述的装置,其特征在于,所述设备型号包括:物联网设备的型号;
在所述第一设备为物联网设备,所述第二设备为物联网平台的情况下,所述传输数据包括:所述物联网设备通过所述网关设备发送至所述物联网平台的上行数据;
在所述第一设备为物联网平台,所述第二设备为物联网设备的情况下,所述传输数据包括:所述物联网平台通过所述网关设备发送至所述物联网设备的下行数据。
8.根据权利要求7所述的装置,其特征在于,
所述装置还包括:存储单元,用于建立所述物联网设备的型号与所述接入脚本之间的对应关系,并存储所述接入脚本;
所述接收单元,还用于在所述物联网设备通过所述网关设备接入所述物联网平台时,接收所述物联网平台下发的接入脚本。
9.一种电子设备,其特征在于,所述设备至少包括:处理器和配置为存储可执行指令的存储介质,其中:
处理器配置为执行存储的可执行指令,所述可执行指令配置为执行上述权利要求1至5任一项提供的数据处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令配置为执行上述权利要求1至5任一项提供的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110829637.1A CN113645131B (zh) | 2021-07-22 | 2021-07-22 | 数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110829637.1A CN113645131B (zh) | 2021-07-22 | 2021-07-22 | 数据处理方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113645131A true CN113645131A (zh) | 2021-11-12 |
CN113645131B CN113645131B (zh) | 2023-10-10 |
Family
ID=78418023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110829637.1A Active CN113645131B (zh) | 2021-07-22 | 2021-07-22 | 数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113645131B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114979212A (zh) * | 2022-05-23 | 2022-08-30 | 京东方科技集团股份有限公司 | 设备接入物联网平台的代理服务构建方法、装置和系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1091536A2 (en) * | 1999-10-04 | 2001-04-11 | Microsoft Corporation | Methods and systems for conversion of data format |
CN110971614A (zh) * | 2019-12-17 | 2020-04-07 | 软通动力信息技术(集团)有限公司 | 物联网适配方法、系统、计算机设备及存储介质 |
CN111083225A (zh) * | 2019-12-19 | 2020-04-28 | 远景智能国际私人投资有限公司 | 在物联网平台中的数据处理方法、装置及物联网平台 |
CN113067811A (zh) * | 2021-03-17 | 2021-07-02 | 北京自如信息科技有限公司 | 协议转换方法、装置、系统、电子设备及存储介质 |
-
2021
- 2021-07-22 CN CN202110829637.1A patent/CN113645131B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1091536A2 (en) * | 1999-10-04 | 2001-04-11 | Microsoft Corporation | Methods and systems for conversion of data format |
CN110971614A (zh) * | 2019-12-17 | 2020-04-07 | 软通动力信息技术(集团)有限公司 | 物联网适配方法、系统、计算机设备及存储介质 |
CN111083225A (zh) * | 2019-12-19 | 2020-04-28 | 远景智能国际私人投资有限公司 | 在物联网平台中的数据处理方法、装置及物联网平台 |
CN113067811A (zh) * | 2021-03-17 | 2021-07-02 | 北京自如信息科技有限公司 | 协议转换方法、装置、系统、电子设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114979212A (zh) * | 2022-05-23 | 2022-08-30 | 京东方科技集团股份有限公司 | 设备接入物联网平台的代理服务构建方法、装置和系统 |
Also Published As
Publication number | Publication date |
---|---|
CN113645131B (zh) | 2023-10-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107450899B (zh) | 终端控制脚本的生成方法和装置 | |
CN109842656B (zh) | 智能兼容多协议的车联网服务方法、车联网网关系统 | |
CN111585958A (zh) | 物联网平台异构设备自适应接入方法、系统 | |
CN112688967B (zh) | 一种物联网数据处理方法、装置、设备及存储介质 | |
CN111835786A (zh) | 一种对多规约设备数据采集、设备控制的系统及实现方法 | |
CN108376078A (zh) | 设备的升级方法、装置以及家电设备 | |
CN111651351B (zh) | 一种基于Jenkins的软件性能测试方法及计算机主设备 | |
CN103491522B (zh) | 终端适配方法和装置 | |
CN104412566A (zh) | 用于处理资源的地址的方法和节点 | |
CN103701867A (zh) | 一种处理调用请求的方法、系统及中心服务器 | |
CN116708558B (zh) | 全链路追踪系统代理方法、装置、计算机设备及存储介质 | |
CN113556359A (zh) | 一种通讯协议转换方法、设备、系统及网关设备 | |
CN115412602A (zh) | 一种数字孪生的数据解析流转方法、装置、设备及介质 | |
CN105099769A (zh) | 业务平台的异常操作处理方法、设备和系统 | |
CN103488696A (zh) | Cpe的业务查询方法、装置及系统、acs和cpe | |
CN112511631B (zh) | 智能设备的控制系统和方法 | |
CN105141653A (zh) | 业务平台的数据交互方法、设备和系统 | |
CN110830466B (zh) | 一种基于xml的dl/t645规约报文的组帧方法及装置 | |
CN113645131B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN104753804A (zh) | 一种数据流传输控制方法、装置及系统 | |
CN111832273A (zh) | 目的报文的确定方法及装置、存储介质、电子装置 | |
CN101964742B (zh) | 一种网络开放能力使用方法、系统和装置 | |
CN102281584A (zh) | 一种物联网能力的实现方法及系统 | |
KR20130056539A (ko) | 미디어 전송 프로토콜을 지원하는 디바이스와 통신을 수행하기 위한 휴대용 단말기의 장치 및 방법 | |
CN103840858B (zh) | 数据获取方法和通用信息模型cim服务端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |