CN107948005B - 物联网协议的更新方法及装置 - Google Patents
物联网协议的更新方法及装置 Download PDFInfo
- Publication number
- CN107948005B CN107948005B CN201711498426.4A CN201711498426A CN107948005B CN 107948005 B CN107948005 B CN 107948005B CN 201711498426 A CN201711498426 A CN 201711498426A CN 107948005 B CN107948005 B CN 107948005B
- Authority
- CN
- China
- Prior art keywords
- protocol
- protocol data
- data
- updated
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/06—Notations for structuring of protocol data, e.g. abstract syntax notation one [ASN.1]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer And Data Communications (AREA)
- Communication Control (AREA)
Abstract
本申请公开了一种物联网协议的更新方法及装置,涉及物联网技术领域,解决了相关技术中用户在更新接入协议过程中无法使用各项服务的问题。所述方法包括:根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。本申请适用于物联网协议的更新。
Description
技术领域
本发明涉及物联网技术领域,尤其是涉及到物联网协议的更新方法及装置。
背景技术
物联网是指通过信息感知节点,按照相互约定的协议将传感器、执行器或者嵌入式设备与互联网连接起来,进行信息交换与通信,以实现智能化识别、定位、跟踪、监控和管理。近年来,随着物联网技术的迅速发展,智能交通、智能安防、智能楼宇、智能汽车、智能家电等智能终端设备已广泛应用到各行各业中。
在物联网环境中,分布着成千上万的数据节点,每个节点都在不停地更新数据。由于数据信息完全分散,在物联网应用中有很多协议的接入工作,支持节点数据传输的物联网协议不尽相同,需要进行协议更新,如增加不同的协议或者修改已有的协议,给数据收集、数据查询带来很大的难度。
现有技术在增加不同的协议或者修改已有的协议过程中,需要对新增协议接入组件进行部署,使得部署后的新协议具有解析能力,然而在部署过程中需要关闭服务,导致用户在更新协议过程中无法使用各项服务,影响用户使用物联网服务的体验。
发明内容
本发明实施例提供了物联网协议的更新方法及装置,解决了相关技术中用户在更新接入协议过程中无法使用各项服务的问题。
根据本发明实施例的一个方面,提供一种物联网协议的更新方法,包括:根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。
进一步地,在所述根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对未处理的协议数据进行解析之前,所述方法还包括:当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;将携带有特征标签的协议数据放入消息队列。
进一步地,所述根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析包括:通过数据处理平台定时从消息队列中获取未处理协议数据;根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;根据所述协议数据的解析任务对所述未处理协议数据进行解析。
进一步地,所述解析任务包括解析协议以及解析工具包,所述根据所述协议数据的解析任务对所述未处理协议数据进行解析包括:建立所述特征标签与所述解析工具包之间的解析映射表;通过识别所述未处理协议数据的特征标签,从所述解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包;根据所述解析工具包对所述未处理协议数据进行解析。
进一步地,所述当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包包括:当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点,所述新增的协议节点中携带有更新协议数据以及所述更新协议数据的解析任务包;通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包。
进一步地,当需要协议更新为新增协议时,通过协议发布服务向协议管理集群中新增协议节点;当需要协议更新为修改协议时,在所述通过协议发布服务向协议管理集群中新增协议节点之后,所述方法还包括:从所述协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点。
根据本发明实施例的另一方面,提供一种物联网协议的更新装置,包括:生成单元,用于根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;注册单元,用于当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;解析单元,用于根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。
进一步地,所述装置还包括:增加单元,用于当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;存储单元,用于将携带有特征标签的协议数据放入消息队列。
进一步地,所述生成单元包括:获取模块,用于通过数据处理平台定时从消息队列中获取未处理协议数据;生成模块,用于根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;解析模块,用于根据所述协议数据的解析任务对所述未处理协议数据进行解析。
进一步地,所述解析模块,具体用于建立所述特征标签与所述解析工具包之间的解析映射表;所述解析模块,具体还用于通过识别所述未处理协议数据的特征标签,从所述解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包;所述解析模块,具体还用于根据所述解析工具包对所述未处理协议数据进行解析。
进一步地,所述注册单元包括:新增模块,用于当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点,所述新增的协议节点中携带有更新协议数据以及所述更新协议数据的解析任务包;注册模块,用于通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包。
进一步地,当需要协议更新为新增协议时,所述新增模块,具体用于通过协议发布服务向协议管理集群中新增协议节点;当需要协议更新为修改协议时,所述新增模块,具体还用于在所述通过协议发布服务向协议管理集群中新增协议节点之后,从所述协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点。
通过本发明,当需要协议更新时,从消息队列中获取更新协议数据,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,利用数据处理平台框架下的任务分配器动态为不同特征标签的协议数据分配解析任务,以使得数据处理平台可以根据更新协议数据的解析任务包对更新协议数据进行协议,无需在更新协议过程中关闭服务。与现有技术中更新协议过程需要中断服务的物联网协议的更新方法相比,本发明实施例在增加不同协议或者修改已有协议过程中,通过数据处理平台动态向任务分配器动态注册增加协议或者修改协议的解析任务包,由于数据处理平台框架具有动态注册新增协议或者已有协议分配解析任务的功能,使得在部署协议过程中无需中断服务也可以完成新协议的接入以及已有协议的修改。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的物联网协议的更新方法的流程图一;
图2是根据本发明实施例的物联网协议的更新方法的流程图二;
图3是根据本发明实施例的物联网协议的更新方法的实现框图
图4是根据本发明实施例的物联网协议的更新装置的结构框图一;
图5是根据本发明实施例的物联网协议的更新装置的结构框图二。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
在本实施例中提供了一种物联网协议的更新方法,图1是根据本发明实施例的物联网协议的更新方法的流程图一,如图1所示,该流程包括如下步骤:
步骤S101,根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;
其中,消息队列是在消息的传输过程中保存处理任务的容器,在物联网平台下,大量未处理协议数据的解析任务如果同时达到数据处理平台,数据处理平台无法同时执行,甚至最后在数据处理平台堆积过多的解析任务,从而导致平台瘫痪。通过消息队列将数据处理平台还未处理的解析任务按照先后顺序存储起来,缓解数据处理平台的压力。
对于本发明实施例,在将解析任务放入消息队列之前,为了保证解析任务与协议数据分配的准确性,可以针对不同协议数据增加特征标签,该特征标签与协议数据一一对应,通过识别协议数据的特征标签,可以获取与特征标签相匹配的协议数据对应的协议解析任务,进一步根据协议解析任务对未处理协议数据进行解析。
需要说明的是,协议数据下可能对应有多个协议节点,相同协议节点下的特征标签相同,例如,ZigBee协议是一种近距离、低复杂度、低功耗、低成本的双向通信技术,该ZigBee协议可能对应有多个协议服务节点,每个协议服务节点均配置有ZigBee协议的特征标签,同理对于其他协议数据下的服务节点对应相同的特征标签。
本发明实施例通过使用消息队列来保存未处理协议数据的解析任务,保证未处理协议数据的解析任务处理的有序性,进一步按照消息队列中解析任务的顺序对未处理协议数据进行解析,完成协议数据的解析。
步骤S102,当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;
对于本发明实施例,协议更新可以为对物联网平台新增协议,也可以为对物联网平台中已有的协议进行修改,由于消息队列中存储有未处理协议数据,当需要协议更新时,更新协议数据也会被存储在消息队列中,以便于在需要协议更新时,数据处理平台可以从消息队列中获取到更新协议数据。
由于不同协议数据都有一定的适用范围,例如,AMQP、JMS、REST/HTTP都是以太网,COAP协议是专门为资源受限设备开发的协议,所以不同协议数据的解析方式不同,为了方便数据处理平台对不通过协议数据进行解析,在数据处理平台从消息队列中获取更新协议数据后,会通过数据处理平台动态注册更新协议数据的特征标签,为更新协议数据进行标记,以便于后续对更新协议数据的解析,并且动态注册更新协议数据的解析包,更新协议的解析包中写有解析更新协议数据的方法以及协议格式等信息,从而根据更新协议解析包对更新协议数据进行解析。
本发明实施例中的数据处理平台可以为基于Spark框架下的大数据处理引擎,以更好地适用于数据挖掘与机器学习等需要迭代的编程算法。Spark处理平台采用的是资源动态分配的方式,通过动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,在分配好资源后进行协议数据解析,当有解析任务的时候直接就可以使用分配的资源进行协议数据解析,节省Spark处理平台中内存的占用空间。
步骤S103,根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。
对于本发明实施例,由于更新协议的解析包中写有解析更新协议的方法以及更新协议格式等信息,具体可以通过更新协议解析包中解析更新协议的方法对更新协议的格式进行解析,进而为物联网平台提供数据交换规则、标准或者约定等,通过通信信道和设备互连起来的多个不同地理位置的数据通信系统,使其能协同工作实现信息交换和资源共享。
本发明实施例提供的一种物联网协议的更新方法,当需要协议更新时,从消息队列中获取更新协议数据,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,利用数据处理平台框架下的任务分配器动态为不同特征标签的协议数据分配解析任务,以使得数据处理平台可以根据更新协议数据的解析任务包对更新协议数据进行协议,无需在更新协议过程中关闭服务。与现有技术中更新协议过程需要中断服务的物联网协议的更新方法相比,本发明实施例在增加不同协议或者修改已有协议过程中,通过数据处理平台动态向任务分配器动态注册增加协议或者修改协议的解析任务包,由于数据处理平台框架具有动态注册新增协议或者已有协议分配解析任务的功能,使得在部署协议过程中无需中断服务也可以完成新协议的接入以及已有协议的修改。
图2是根据本发明实施例的物联网协议的更新方法的流程图二,如图2所示,该流程包括如下步骤:
步骤S201,当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;
其中,协议管理集群可以对不同节点数据传输的物联网协议进行管理,如对协议数据添加特征标签,或者对协议数据进行分类等,由于不同物联网协议的部署方式以及运行环境等有所不同,通过协议管理集群对物联网协议进行管理,对不同协议数据添加特征标签,以识别不同协议数据。
例如,Modbus协议是应用于电子控制器上的一种通用语言。通过此协议,控制器相互之间、控制器经由网络(例如以太网)和其它设备之间可以通信。它已经成为一种通用工业标准。有了它,不同厂商生产的控制设备可以连成工业网络,进行集中监控。此协议定义了一个控制器能认识使用的消息结构,而不管它们是经过何种网络进行通信的。它描述了一个控制器请求访问其它设备的过程,如何回应来自其它设备的请求,以及怎样侦测错误并记录。它制定了消息域格局和内容的公共格式。MQTT(Message Queuing TelemetryTransport,消息队列遥测传输)是IBM开发的一个即时通讯协议,有可能成为物联网的重要组成部分。该协议支持所有平台,几乎可以把所有联网物品和外部连接起来,被用来当作传感器和制动器(比如通过Twitter让房屋联网)的通信协议。
对于本发明实施例,当协议通过网络连接协议管理集群后,协议管理集群可以接收不同协议数据,并为每个协议数据增加特征标签,以便于后续识别不同协议数据,方便对协议数据的管理。
步骤S202,将携带有特征标签的协议数据放入消息队列;
对于本发明实施例,在对协议数据增加特征标签后,将携带有特征标签的协议数据放入消息队列,这里的消息队列作为协议管理集群与数据处理平台的中间桥梁,以便于数据处理平台从消息队列中获取解析请求,再一并对获取到的解析请求进行处理,可以避免过多待处理协议数据直接堆放到消息处理平台,占用数据处理平台的存储空间,影响数据处理平台的运行速度。
需要说明的是,消息队列中的协议数据会不断被数据处理平台取出,同时也可能会有新的协议数据的放入,为了保证消息队列中不会出现协议数据过多而产生消息阻塞情况,本发明实施例在将携带有特征标签的协议数据放入消息队列后,可以对消息队列的容量设置数据存储上限,以便于消息队列中协议数据传输的稳定性。
步骤S203,通过数据处理平台定时从消息队列中获取未处理协议数据;
对于本发明实施例,为了保证数据处理平台中协议数据解析过程的稳定性,通过数据处理平台定时从消息队列中获取未处理协议数据,从而均衡消息队列中未处理协议数据的解析任务以及数据处理平台中未处理协议数据的解析任务,以保证协议数据解析任务的处理速度。
需要说明的是,本发明实施例对定时的时间间隔不进行限定,具体可以根据数据处理平台中协议数据的解析效率实时进行调整,如果当前数据处理平台中未处理协议数据的解析任务较少,可以缩短定时的时间间隔,反之,如果当前数据处理平台中未处理协议数据的解析任务较多,可以增加定时时间间隔。
步骤S204,根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;
对于本发明实施例,数据处理平台中的任务分配器可以根据从消息队列中获取的未处理协议数据对应的特征标签生成该协议数据的解析任务,需要说明的是,由于不同特征标签的未处理协议数据对应协议格式不相同,如点灯、音响等可能有很多协议,所以不同特征标签的未处理协议数据对应有不同的解析任务,通过任务分配器为不同特征标签的未处理数据生成解析任务,以方便后续识别不同特征标签的未处理协议数据对应的解析任务,对协议数据进行解析。
步骤S205,根据所述协议数据的解析任务对所述未处理协议数据进行解析;
需要说明的是,协议数据的解析任务包含解析协议以及解析工具包,解析工具包中提供有解析该协议的方法,通过解析工具包可以实现对协议数据的解析,不同解析协议包用于解析不同格式的协议。
对于本发明实施例,根据协议数据的解析任务对未处理协议数据进行解析的具体可以包括但不局限于下述实现方式;首先建立特征标签与解析工具包之间的解析映射表,该解析映射表中存储有未处理协议数据特征标签与解析协议包之间的一一映射关系,通过识别未处理协议数据的特征标签,从解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包,该解析工具包中存储有解析协议的方法,进而根据解析工具包对未处理协议数据进行解析。
步骤S206,当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点;
对于本发明实施例,当需要协议更新时,协议发布服务会向协议管理集群中增加协议节点,新增的协议节点中携带有更新协议数据以及更新协议数据的解析任务包,通过将更新协议数据放入消息队列以及将更新协议数据的解析包同步发布到数据处理平台中的任务分配器,进一步任务分配器会根据更新协议数据对应的特征标签为更新协议数据分配对应的解析任务包。
需要说明的是,当需要协议更新为新增协议时,说明需要新增一个消息队列为存储过的协议,可以直接通过协议发布服务向协议管理集群中新增协议节点,当需要协议更新为修改协议时,说明原始协议在实现过程中存在错误或者由于其他原因需要被替换,可以在通过协议发布服务向协议管理集群中新增协议节点之后,进一步从协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点,从而保证协议管理集群中协议数据的一致性。
步骤S207,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;
在物联网平台应用过程中,需要很多协议接入工作,中间存在了新增协议或者修改已有协议的过程,而在部署新增协议过程中需要中断物联网服务,使得用户在更新协议过程中无法使用各项服务。
由于数据处理平台具有动态任务分配的功能,本发明实施例通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,从而为更新协议数据完成动态人物分配,使得在进行物联网协议更新过程中,无需中断物联网服务,即可完成新增协议的接入以及已有协议的修改,提高用户在使用物联网过程中的体验。
步骤S208,根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。
在数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包后,通过更新协议数据的特征标签可以识别出更新协议数据的解析任务包,进一步根据更新协议数据的解析任务包对更新协议数据进行解析。
对于本发明实施例,可以使用Spark Streaming引擎作为基础,具体物联网协议的更新方法的实现框图如图3所示,当协议通过网络连接协议管理集群后,通过协议管理集群为每个协议数据新增一个特征标签,并放入消息队列中,Spark定时从消息队列中获取未处理的协议数据,并通过Spark中的任务分配器对未处理的协议数据进行解析任务分配,每个特征标签的协议数据对应有一个协议解析任务,通过Spark的调用机制对不同特征标签的协议数据的协议解析任务进行调用,从而对未处理协议数据进行解析。
需要说明的是,上述流程为在不存在协议更新情况下协议解析的过程,当需要新增协议时,通过协议发布服务向协议管理集群中新增协议节点,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,进而根据更新协议数据的解析任务包对更新协议数据进行解析,当需要修改协议时,通过协议发布服务向协议管理集群中新增协议节点,并从协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点,保证协议管理集群中协议数据的一致性,进一步根据更新协议数据的解析任务包对更新协议数据进行解析。
本发明实施例的另一种物联网协议的更新方法,当需要协议更新时,从消息队列中获取更新协议数据,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,利用数据处理平台框架下的任务分配器动态为不同特征标签的协议数据分配解析任务,以使得数据处理平台可以根据更新协议数据的解析任务包对更新协议数据进行协议,无需在更新协议过程中关闭服务。与现有技术中更新协议过程需要中断服务的物联网协议的更新方法相比,本发明实施例在增加不同协议或者修改已有协议过程中,通过数据处理平台动态向任务分配器动态注册增加协议或者修改协议的解析任务包,由于数据处理平台框架具有动态注册新增协议或者已有协议分配解析任务的功能,使得在部署协议过程中无需中断服务也可以完成新协议的接入以及已有协议的修改。
图4是根据本发明实施例的物联网协议的更新装置的结构框图一,如图4所示,该装置包括:
生成单元31,可以用于根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;
注册单元32,可以用于当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;
解析单元33,可以用于根据所述更新协议数据的解析任务包对所述更新协议数据进行解析。
本发明实施例提供的一种物联网协议的更新装置,当需要协议更新时,从消息队列中获取更新协议数据,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,利用数据处理平台框架下的任务分配器动态为不同特征标签的协议数据分配解析任务,以使得数据处理平台可以根据更新协议数据的解析任务包对更新协议数据进行协议,无需在更新协议过程中关闭服务。与现有技术中更新协议过程需要中断服务的物联网协议的更新方法相比,本发明实施例在增加不同协议或者修改已有协议过程中,通过数据处理平台动态向任务分配器动态注册增加协议或者修改协议的解析任务包,由于数据处理平台框架具有动态注册新增协议或者已有协议分配解析任务的功能,使得在部署协议过程中无需中断服务也可以完成新协议的接入以及已有协议的修改。
作为图4中所示物联网协议的更新装置的进一步说明,图5是根据本发明实施例的物联网协议的更新装置的结构框图二,如图5所示,该装置还包括:
增加单元34,可以用于当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;
存储单元35,可以用于将携带有特征标签的协议数据放入消息队列。
进一步地,所述生成单元31包括:
获取模块311,可以用于通过数据处理平台定时从消息队列中获取未处理协议数据;
生成模块312,可以用于根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;
解析模块313,可以用于根据所述协议数据的解析任务对所述未处理协议数据进行解析。
进一步地,所述解析模块313,具体可以用于建立所述特征标签与所述解析工具包之间的解析映射表;
所述解析模块313,具体还可以用于通过识别所述未处理协议数据的特征标签,从所述解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包;
所述解析模块313,具体还可以用于根据所述解析工具包对所述未处理协议数据进行解析。
进一步地,所述注册单元32包括:
新增模块321,可以用于当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点,所述新增的协议节点中携带有更新协议数据以及所述更新协议数据的解析任务包;
注册模块322,可以用于通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包。
进一步地,当需要协议更新为新增协议时,所述新增模块321,具体可以用于通过协议发布服务向协议管理集群中新增协议节点;
当需要协议更新为修改协议时,所述新增模块321,具体还可以用于在所述通过协议发布服务向协议管理集群中新增协议节点之后,从所述协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点。
本发明实施例提供的另一种物联网协议的更新装置,当需要协议更新时,从消息队列中获取更新协议数据,通过数据处理平台动态注册更新协议数据的特征标签以及更新协议数据的解析任务包,利用数据处理平台框架下的任务分配器动态为不同特征标签的协议数据分配解析任务,以使得数据处理平台可以根据更新协议数据的解析任务包对更新协议数据进行协议,无需在更新协议过程中关闭服务。与现有技术中更新协议过程需要中断服务的物联网协议的更新方法相比,本发明实施例在增加不同协议或者修改已有协议过程中,通过数据处理平台动态向任务分配器动态注册增加协议或者修改协议的解析任务包,由于数据处理平台框架具有动态注册新增协议或者已有协议分配解析任务的功能,使得在部署协议过程中无需中断服务也可以完成新协议的接入以及已有协议的修改。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包括在本发明的保护范围之内。
Claims (8)
1.一种物联网协议的更新方法,其特征在于,包括:
根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;
通过消息队列将数据处理平台还未处理的解析任务按照先后顺序存储起来,缓解数据处理平台的压力;
当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;
根据所述更新协议数据的解析任务包对所述更新协议数据进行解析;
其中,所述当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包, 包括:
当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点,所述新增的协议节点中携带有更新协议数据以及所述更新协议数据的解析任务包,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包,当需要协议更新为新增协议时,通过协议发布服务向协议管理集群中新增协议节点,当需要协议更新为修改协议时,在所述通过协议发布服务向协议管理集群中新增协议节点之后,从所述协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点。
2.根据权利要求1所述的方法,其特征在于,在所述根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对未处理的协议数据进行解析之前,所述方法还包括:
当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;
将携带有特征标签的协议数据放入消息队列。
3.根据权利要求1所述的方法,其特征在于,所述根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析包括:
通过数据处理平台定时从消息队列中获取未处理协议数据;
根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;
根据所述协议数据的解析任务对所述未处理协议数据进行解析。
4.根据权利要求3所述的方法,其特征在于,所述解析任务包括解析协议以及解析工具包,所述根据所述协议数据的解析任务对所述未处理协议数据进行解析包括:
建立所述特征标签与所述解析工具包之间的解析映射表;
通过识别所述未处理协议数据的特征标签,从所述解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包;
根据所述解析工具包对所述未处理协议数据进行解析。
5.一种物联网协议的更新装置,其特征在于,包括:
生成单元,用于根据消息队列中未处理协议数据的特征标签为每个协议数据生成协议解析任务,并对所述未处理协议数据进行解析;
注册单元,用于当需要协议更新时,从所述消息队列中获取更新协议数据,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包;
解析单元,用于根据所述更新协议数据的解析任务包对所述更新协议数据进行解析;
注册单元,还用于当需要协议更新时,通过协议发布服务向协议管理集群中新增协议节点,所述新增的协议节点中携带有更新协议数据以及所述更新协议数据的解析任务包,通过数据处理平台动态注册所述更新协议数据的特征标签以及所述更新协议数据的解析任务包,当需要协议更新为新增协议时,通过协议发布服务向协议管理集群中新增协议节点,当需要协议更新为修改协议时,在所述通过协议发布服务向协议管理集群中新增协议节点之后,从所述协议管理集群中查找修改协议对应的协议节点,关闭所述修改协议对应的协议节点。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
增加单元,用于当协议通过网络连接协议管理集群后,通过所述协议管理集群为每个协议数据增加特征标签;
存储单元,用于将携带有特征标签的协议数据放入消息队列。
7.根据权利要求5所述的装置,其特征在于,所述生成单元包括:
获取模块,用于通过数据处理平台定时从消息队列中获取未处理协议数据;
生成模块,用于根据所述数据处理平台中的任务分配器为所述消息队列中不同特征标签的未处理协议数据生成协议数据的解析任务;
解析模块,用于根据所述协议数据的解析任务对所述未处理协议数据进行解析。
8.根据权利要求7所述的装置,其特征在于,
所述解析模块,具体用于建立所述特征标签与解析工具包之间的解析映射表;
所述解析模块,具体还用于通过识别所述未处理协议数据的特征标签,从所述解析映射表中调取出与未处理协议数据的特征标签对应的解析工具包;
所述解析模块,具体还用于根据所述解析工具包对所述未处理协议数据进行解析。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711498426.4A CN107948005B (zh) | 2017-12-29 | 2017-12-29 | 物联网协议的更新方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711498426.4A CN107948005B (zh) | 2017-12-29 | 2017-12-29 | 物联网协议的更新方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107948005A CN107948005A (zh) | 2018-04-20 |
CN107948005B true CN107948005B (zh) | 2021-08-06 |
Family
ID=61938245
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711498426.4A Active CN107948005B (zh) | 2017-12-29 | 2017-12-29 | 物联网协议的更新方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107948005B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111586081B (zh) * | 2019-02-18 | 2022-01-11 | 宁波方太厨具有限公司 | 一种基于物模型的物联网实现方法 |
CN111586171B (zh) * | 2020-05-07 | 2023-05-30 | 广州虎牙信息科技有限公司 | 服务器运行方法和装置、电子设备及存储介质 |
CN111930705B (zh) * | 2020-07-07 | 2023-03-14 | 中国电子科技集团公司电子科学研究院 | 二进制消息协议数据处理方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104202222A (zh) * | 2014-08-20 | 2014-12-10 | 惠州Tcl移动通信有限公司 | 智能家居控制器及其通信方法 |
CN106790206A (zh) * | 2017-01-05 | 2017-05-31 | 厦门中控生物识别信息技术有限公司 | 业务系统的协议解析方法及装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8432919B2 (en) * | 2009-02-25 | 2013-04-30 | Cisco Technology, Inc. | Data stream classification |
CN103825811A (zh) * | 2013-10-11 | 2014-05-28 | 江苏飞尚安全监测咨询有限公司 | 一种接入传感器协议自识别的物联网网关实现方案 |
CN104579823B (zh) * | 2014-12-12 | 2016-08-24 | 国家电网公司 | 一种基于大数据流的网络流量异常检测系统及方法 |
US10299091B2 (en) * | 2016-06-22 | 2019-05-21 | Intel Corporation | Internet of things protocol handler |
-
2017
- 2017-12-29 CN CN201711498426.4A patent/CN107948005B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104202222A (zh) * | 2014-08-20 | 2014-12-10 | 惠州Tcl移动通信有限公司 | 智能家居控制器及其通信方法 |
CN106790206A (zh) * | 2017-01-05 | 2017-05-31 | 厦门中控生物识别信息技术有限公司 | 业务系统的协议解析方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107948005A (zh) | 2018-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3798833B1 (en) | Methods, system, articles of manufacture, and apparatus to manage telemetry data in an edge environment | |
CN104125208B (zh) | 数据传输方法及装置 | |
FI125393B (en) | Procedure, device and system for use in a web service | |
CN111182089B (zh) | 容器集群系统和访问大数据组件的方法、装置及服务器 | |
CN107948005B (zh) | 物联网协议的更新方法及装置 | |
US20130104135A1 (en) | Data center operation | |
CN109829287A (zh) | Api接口权限访问方法、设备、存储介质及装置 | |
CN103843308A (zh) | 跨越多个计算设备分布的应用的执行 | |
CN115516840B (zh) | 一种信息处理方法、设备、系统、介质、芯片及程序产品 | |
CN112583797B (zh) | 多协议数据处理方法、装置、设备及计算机可读存储介质 | |
CN104412566A (zh) | 用于处理资源的地址的方法和节点 | |
CN110912782A (zh) | 一种数据采集方法、装置及存储介质 | |
US20160134474A1 (en) | Method and apparatus for model-driven, affinity-based, network functions | |
CN111240772B (zh) | 一种基于区块链的数据处理方法、装置及存储介质 | |
US11687063B2 (en) | Semantics-based internet of things device data processing-related application installation method and apparatus | |
US11943801B2 (en) | Method and apparatus for abstracting network resources to support end user mobility | |
CN110287070B (zh) | Esb专用协议接口测试方法、服务器及计算机可读存储介质 | |
US11074255B2 (en) | System independent configuration management database identification system | |
CN112688884B (zh) | 加密流量自定义应用识别方法、系统、装置及存储介质 | |
CN107453950A (zh) | 一种信息处理方法及监控系统 | |
Pereira et al. | UFCity: a software architecture to create data ecosystem in smart cities | |
Papageorgiou et al. | Efficient auto-configuration of energy-related parameters in cloud-based iot platforms | |
CN110719303B (zh) | 一种容器化nrf的方法及系统 | |
Farnbauer-Schmidt et al. | Combining the concepts of semantic data integration and edge computing | |
US10761900B1 (en) | System and method for secure distributed processing across networks of heterogeneous processing nodes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |