CN114584594A - 一种接收物联网设备数据的方法及系统 - Google Patents
一种接收物联网设备数据的方法及系统 Download PDFInfo
- Publication number
- CN114584594A CN114584594A CN202210485076.2A CN202210485076A CN114584594A CN 114584594 A CN114584594 A CN 114584594A CN 202210485076 A CN202210485076 A CN 202210485076A CN 114584594 A CN114584594 A CN 114584594A
- Authority
- CN
- China
- Prior art keywords
- internet
- things equipment
- message data
- interceptor
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y30/00—IoT infrastructure
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明涉及无线传输技术领域,具体而言,涉及一种接收物联网设备数据的方法及系统,该方法的步骤包括:获取物联网设备的报文数据,将物联网设备的报文数据输入至拦截器处,拦截器根据物联网设备的标识对物联网设备的报文数据进行汇聚,并将汇聚后的物联网设备报文数据传输至业务方处;业务方对汇聚后的物联网设备报文数据进行有效性校验,判断汇聚后的物联网设备报文数据的有效性是否达到预期值,并将校验结果转交至拦截器处,拦截器根据校验结果进行开关状态变更,之后根据拦截器的开关状态判断是否接收物联网设备的报文数据,完成物联网设备数据的粗粒度筛选。
Description
技术领域
本发明涉及无线传输技术领域,具体而言,涉及一种接收物联网设备数据的方法及系统。
背景技术
就目前而言,现有的物联网设备通常为大批量的设置在各个区域内,并向指定的设备上传数据,然而,由于物联网设备的安装环境相对而言较为复杂,通常并不是在理想环境中运行,因此常常会有部分物联网设备因为各种原因出现故障,而一直上传无效数据,一方面由于物联网设备数据校验方面的欠缺,只能通过人工校验的方式对物联网设备数据进行粗略筛选,不仅效率低下,而且极为浪费精力;另一方面,且物联网设备在正常运行时,所上传的大部分数据均为有效数据,仅会因为电压不稳等物理因素而上传部分无效数据,进而导致人工校验物联网设备时,容易出现校验疏漏等情况。针对上述问题,我们设计了一种接收物联网设备数据的方法及系统。
发明内容
本发明的目的在于提供一种接收物联网设备数据的方法及系统,其用于解决上述技术问题。
本发明的实施例通过以下技术方案实现:
一种接收物联网设备数据的方法,包括如下内容:
获取物联网设备的报文数据,将物联网设备的报文数据输入至拦截器处,拦截器根据物联网设备的标识对物联网设备的报文数据进行汇聚,并将汇聚后的物联网设备报文数据传输至业务方处;
业务方对汇聚后的物联网设备报文数据进行有效性校验,判断汇聚后的物联网设备报文数据的有效性是否达到预期值,并将校验结果转交至拦截器处,拦截器根据校验结果进行开关状态变更,之后根据拦截器的开关状态判断是否接收物联网设备的报文数据,完成物联网设备数据的粗粒度筛选。
可选的,所述物联网设备报文数据的有效性判断过程具体为:若物联网设备报文数据的有效性达到预期值,则将物联网设备报文数据转交至业务处理步骤,流程结束;若否,业务方将校验结果传输至错误收集器处,通过错误收集器对校验结果进行错误收集,并将校验结果转交至拦截器处。
可选的,所述拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处。
可选的,所述拦截器的开关状态包括:全开状态、半开状态以及关闭状态。
可选的,当物联网设备的报文数据首次输入拦截器时,此时拦截器进入全开状态,拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处;
若物联网设备报文数据的有效性校验通过时,将校验结果反馈至拦截器处,此时拦截器进入全开状态,并放行此物联网设备后续的全部报文数据。
可选的,若物联网设备报文数据的有效性校验失败时,将校验结果反馈至拦截器处,此时拦截器进入半开状态,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对物联网设备的部分报文数据进行有效性校验。
可选的,在拦截器处于半开状态时,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对此物联网设备的部分报文数据进行有效性校验,若物联网设备的部分报文数据的有效性校验失败或有效性校验时长超过阈值时,将校验结果反馈至拦截器处,此时拦截器进入关闭状态,阻断此物联网设备后续的全部报文数据。
可选的,若关闭状态的拦截器阻断物联网设备报文数据的时间超过阈值,此时拦截器重新进入半开状态。
一种接收物联网设备数据的系统,应用上述任意一项所述的一种接收物联网设备数据的方法,包括:输入单元、拦截器、有效性校验单元、错误收集器、输出单元;所述输入单元、有效性校验单元、错误收集器、输出单元分别与所述拦截器连接,所述错误收集器、输出单元分别与所述有效性校验单元连接。
一种电子设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上述任意一项所述的一种接收物联网设备数据的方法的步骤。
本发明实施例的技术方案至少具有如下优点和有益效果:
本发明增大了数据库数据的有效性,减少了后期基于IOT数据做分析处理时的数据清洗的工作量,减少了磁盘存储的成本,在相同成本投入的情况下提高了对于IOT设备接入的处理能力。
附图说明
图1为本发明提供的一种接收物联网设备数据的方法的流程示意图;
图2为本发明提供的拦截器开关状态的逻辑示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
如图1所示,本发明提供了其中一种实施例:一种接收物联网设备数据的方法,包括如下内容:
获取物联网设备的报文数据,将物联网设备的报文数据输入至拦截器处,拦截器根据物联网设备的标识对物联网设备的报文数据进行汇聚,并将汇聚后的物联网设备报文数据传输至业务方处;
业务方对汇聚后的物联网设备报文数据进行有效性校验,判断汇聚后的物联网设备报文数据的有效性是否达到预期值,并将校验结果转交至拦截器处,拦截器根据校验结果进行开关状态变更,之后根据拦截器的开关状态判断是否接收物联网设备的报文数据,完成物联网设备数据的粗粒度筛选。
在本实施例中,拦截器:按设备唯一标识对同一设备数据进行汇聚并按该设备历史报文错误率放行、阻断新的报文传递。
所述物联网设备报文数据的有效性判断过程具体为:若物联网设备报文数据的有效性达到预期值,则将物联网设备报文数据转交至业务处理步骤,流程结束;若否,业务方将校验结果传输至错误收集器处,通过错误收集器对校验结果进行错误收集,并将校验结果转交至拦截器处。
在本实施例中,错误收集器:集成在物联网设备数据处理业务层中,主要收集业务系统对设备报文数据的错误统计。
所述拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处。
在本实施例的流程上,主要包含以下步骤:报文汇聚、拦截器状态判断、报文转交、错误收集、报文拒绝。
设备报文到达拦截器后,拦截器按设备唯一标识进行报文汇聚,汇聚到一定条件(由业务方配置,时间或数量维度先达到阈值)后进行报文,业务方收到报文后按业务定义的数据有效性进行数据校验,并将校验结果告诉错误收集器,错误收集器收到业务方数据有效性校验结果后转交给拦截器。校验数据会触发拦截器的开关状态变更,而后续同一设备的报文数据到来时拦截器根据自身开关状态决定放行、阻断此次报文。
如图2所示,所述拦截器的开关状态包括:全开状态、半开状态以及关闭状态。
当物联网设备的报文数据首次输入拦截器时,此时拦截器进入全开状态,拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量的物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处;
若物联网设备报文数据的有效性校验通过时,将校验结果反馈至拦截器处,此时拦截器进入全开状态,并放行此物联网设备后续的全部报文数据。
若物联网设备报文数据的有效性校验失败时,将校验结果反馈至拦截器处,此时拦截器进入半开状态,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对物联网设备的部分报文数据进行有效性校验。
在拦截器处于半开状态时,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对此物联网设备的部分报文数据进行有效性校验,若物联网设备的部分报文数据的有效性校验失败或有效性校验时长超过阈值时,将校验结果反馈至拦截器处,此时拦截器进入关闭状态,阻断此物联网设备后续的全部报文数据。
若关闭状态的拦截器阻断物联网设备报文数据的时间超过阈值,此时拦截器重新进入半开状态。
一种接收物联网设备数据的系统,应用上述任意一项所述的一种接收物联网设备数据的方法,包括:输入单元、拦截器、有效性校验单元、错误收集器、输出单元;所述输入单元、有效性校验单元、错误收集器、输出单元分别与所述拦截器连接,所述错误收集器、输出单元分别与所述有效性校验单元连接。
一种电子设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上述任意一项所述的一种接收物联网设备数据的方法的步骤。
本发明所提供的实施例具体应用在某平台中的数据开发业务中进行了实践,在使用本发明后数据库中的无效IOT数据较使用前显著降低了12%左右。
基于上述,本实施例增大了数据库数据的有效性,减少了后期基于IOT数据做分析处理时的数据清洗的工作量,减少了磁盘存储的成本,在相同成本投入的情况下提高了对于IOT设备接入的处理能力。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种接收物联网设备数据的方法,其特征在于,包括如下内容:
获取物联网设备的报文数据,将物联网设备的报文数据输入至拦截器处,拦截器根据物联网设备的标识对物联网设备的报文数据进行汇聚,并将汇聚后的物联网设备报文数据传输至业务方处;
业务方对汇聚后的物联网设备报文数据进行有效性校验,判断汇聚后的物联网设备报文数据的有效性是否达到预期值,并将校验结果转交至拦截器处,拦截器根据校验结果进行开关状态变更,之后根据拦截器的开关状态判断是否接收物联网设备的报文数据,完成物联网设备数据的粗粒度筛选。
2.根据权利要求1所述的接收物联网设备数据的方法,其特征在于,所述物联网设备报文数据的有效性判断过程具体为:若物联网设备报文数据的有效性达到预期值,则将物联网设备报文数据转交至业务处理步骤,流程结束;若否,业务方将校验结果传输至错误收集器处,通过错误收集器对校验结果进行错误收集,并将校验结果转交至拦截器处。
3.根据权利要求2所述的接收物联网设备数据的方法,其特征在于,所述拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处。
4.根据权利要求3所述的接收物联网设备数据的方法,其特征在于,所述拦截器的开关状态包括:全开状态、半开状态以及关闭状态。
5.根据权利要求4所述的接收物联网设备数据的方法,其特征在于,
当物联网设备的报文数据首次输入拦截器时,此时拦截器进入全开状态,拦截器按照预存配置将设定量的物联网设备报文数据进行聚合,将聚合后的设定量物联网设备报文数据传输至业务方处,或按批次对物联网设备报文数据进行划分,并间隔设定时长依次将划分后的物联网设备报文数据传输至业务方处;
若物联网设备报文数据的有效性校验通过时,将校验结果反馈至拦截器处,此时拦截器进入全开状态,并放行此物联网设备后续的全部报文数据。
6.根据权利要求5所述的接收物联网设备数据的方法,其特征在于,
若物联网设备报文数据的有效性校验失败时,将校验结果反馈至拦截器处,此时拦截器进入半开状态,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对物联网设备的部分报文数据进行有效性校验。
7.根据权利要求6所述的接收物联网设备数据的方法,其特征在于,
在拦截器处于半开状态时,拦截器按照预设的概率对此物联网设备后续的部分报文数据进行选取,并输入至业务方处,对此物联网设备的部分报文数据进行有效性校验,若物联网设备的部分报文数据的有效性校验失败或有效性校验时长超过阈值时,将校验结果反馈至拦截器处,此时拦截器进入关闭状态,阻断此物联网设备后续的全部报文数据。
8.根据权利要求7所述的接收物联网设备数据的方法,其特征在于,
若关闭状态的拦截器阻断物联网设备报文数据的时间超过阈值,此时拦截器重新进入半开状态。
9.一种接收物联网设备数据的系统,应用上述权利要求1-8任意一项所述的一种接收物联网设备数据的方法,其特征在于,包括:输入单元、拦截器、有效性校验单元、错误收集器、输出单元;所述输入单元、有效性校验单元、错误收集器、输出单元分别与所述拦截器连接,所述错误收集器、输出单元分别与所述有效性校验单元连接。
10.一种电子设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1-8任意一项所述的一种接收物联网设备数据的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210485076.2A CN114584594B (zh) | 2022-05-06 | 2022-05-06 | 一种接收物联网设备数据的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210485076.2A CN114584594B (zh) | 2022-05-06 | 2022-05-06 | 一种接收物联网设备数据的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114584594A true CN114584594A (zh) | 2022-06-03 |
CN114584594B CN114584594B (zh) | 2022-09-02 |
Family
ID=81769397
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210485076.2A Active CN114584594B (zh) | 2022-05-06 | 2022-05-06 | 一种接收物联网设备数据的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114584594B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103336510A (zh) * | 2013-06-27 | 2013-10-02 | 山东华戎信息产业有限公司 | 一种物联网综合运维管理系统 |
US20150222517A1 (en) * | 2014-02-05 | 2015-08-06 | Apple Inc. | Uniform communication protocols for communication between controllers and accessories |
CN105493036A (zh) * | 2013-08-16 | 2016-04-13 | 星火Cs有限公司 | 用于拦截外围设备与软件应用之间的信号的数据处理方法和系统 |
CN110868349A (zh) * | 2019-11-27 | 2020-03-06 | 河钢数字技术股份有限公司 | 物联网环境下分布式高并发数据采集与处理方法及系统 |
CN110968825A (zh) * | 2019-11-30 | 2020-04-07 | 信联科技(南京)有限公司 | 一种web页面细粒度权限控制方法 |
EP3754528A1 (en) * | 2019-06-21 | 2020-12-23 | Secure Thingz Limited | Secure provision of programmable devices |
CN112910679A (zh) * | 2020-12-31 | 2021-06-04 | 上海遨有信息技术有限公司 | 一种电力物联网多层次远程升级方法 |
CN113268642A (zh) * | 2021-06-25 | 2021-08-17 | 浪潮云信息技术股份公司 | 一种实现物联设备数据精细化存取的方法 |
-
2022
- 2022-05-06 CN CN202210485076.2A patent/CN114584594B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103336510A (zh) * | 2013-06-27 | 2013-10-02 | 山东华戎信息产业有限公司 | 一种物联网综合运维管理系统 |
CN105493036A (zh) * | 2013-08-16 | 2016-04-13 | 星火Cs有限公司 | 用于拦截外围设备与软件应用之间的信号的数据处理方法和系统 |
US20150222517A1 (en) * | 2014-02-05 | 2015-08-06 | Apple Inc. | Uniform communication protocols for communication between controllers and accessories |
EP3754528A1 (en) * | 2019-06-21 | 2020-12-23 | Secure Thingz Limited | Secure provision of programmable devices |
CN110868349A (zh) * | 2019-11-27 | 2020-03-06 | 河钢数字技术股份有限公司 | 物联网环境下分布式高并发数据采集与处理方法及系统 |
CN110968825A (zh) * | 2019-11-30 | 2020-04-07 | 信联科技(南京)有限公司 | 一种web页面细粒度权限控制方法 |
CN112910679A (zh) * | 2020-12-31 | 2021-06-04 | 上海遨有信息技术有限公司 | 一种电力物联网多层次远程升级方法 |
CN113268642A (zh) * | 2021-06-25 | 2021-08-17 | 浪潮云信息技术股份公司 | 一种实现物联设备数据精细化存取的方法 |
Non-Patent Citations (1)
Title |
---|
杨洁等: "基于MongoDB的物联网开放平台用户信息管理", 《现代电子技术》 * |
Also Published As
Publication number | Publication date |
---|---|
CN114584594B (zh) | 2022-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102396255B (zh) | 动态移动网络通信控制 | |
US8914455B2 (en) | Systems and methods for processing emails | |
CN105530278A (zh) | 消息推送方法和装置 | |
CN109002424B (zh) | 文件格式转换方法、装置、计算机设备及存储介质 | |
CN111290696A (zh) | 一种应用程序组件的流控方法及装置 | |
WO2017152765A1 (zh) | 一种自动熔断的消息发送方法、装置及系统 | |
JP2006519559A (ja) | 非永続的メモリ内のキューを用いる電子メール | |
CN107135088A (zh) | 云计算系统中处理日志的方法和装置 | |
CN115242745B (zh) | 基于5g通信网络的短信推送系统及方法 | |
CN111782486A (zh) | 一种基于动态配置的告警实现方法及其系统 | |
CN109450691A (zh) | 服务网关监控方法、设备及计算机可读存储介质 | |
CN114584594B (zh) | 一种接收物联网设备数据的方法及系统 | |
US9252974B2 (en) | Mail gateway, mail delivery method, and program | |
CN111309442B (zh) | 微服务容器数量的调整方法、装置、系统、介质及设备 | |
CN107463487B (zh) | 一种分布式主机性能采集系统及性能采集方法 | |
CN115883330B (zh) | 告警事件处理方法、系统、设备及存储介质 | |
CN116842090A (zh) | 一种对账系统、方法、设备及存储介质 | |
CN110706003A (zh) | 一种客户反馈工单生成的方法、装置、设备以及存储介质 | |
CN116708219A (zh) | 一种基于dpi平台的数据获取方法及装置 | |
CN110365551A (zh) | 网络信息采集方法、装置、设备及介质 | |
CN110460487A (zh) | 服务节点的监控方法及系统、服务节点 | |
CN109815027A (zh) | 一种基于Storm-Kafka实现数据顺序处理的方法及其系统 | |
EP2988476A1 (en) | Method and apparatus for processing operation on endpoint peripheral | |
CN110943921B (zh) | 一种智能路由配置的方法 | |
JP5965720B2 (ja) | メールシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |