CN112995339A - 一种基于动态字节码技术自动适配传感器数据解析方法 - Google Patents
一种基于动态字节码技术自动适配传感器数据解析方法 Download PDFInfo
- Publication number
- CN112995339A CN112995339A CN202110409855.XA CN202110409855A CN112995339A CN 112995339 A CN112995339 A CN 112995339A CN 202110409855 A CN202110409855 A CN 202110409855A CN 112995339 A CN112995339 A CN 112995339A
- Authority
- CN
- China
- Prior art keywords
- data
- analysis
- checker
- sensor
- dynamic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 238000007405 data analysis Methods 0.000 title claims abstract description 17
- 238000005516 engineering process Methods 0.000 title claims abstract description 17
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 9
- 238000004458 analytical method Methods 0.000 claims abstract description 17
- 238000012795 verification Methods 0.000 claims abstract description 9
- 238000012545 processing Methods 0.000 claims abstract description 8
- 238000006243 chemical reaction Methods 0.000 claims description 11
- 238000000354 decomposition reaction Methods 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 abstract description 5
- 238000012423 maintenance Methods 0.000 abstract description 4
- 230000006978 adaptation Effects 0.000 abstract description 3
- 238000011161 development Methods 0.000 abstract description 2
- 230000000694 effects Effects 0.000 abstract description 2
- 238000004364 calculation method Methods 0.000 description 4
- 238000013524 data verification Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 235000010627 Phaseolus vulgaris Nutrition 0.000 description 1
- 244000046052 Phaseolus vulgaris Species 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/12—Applying verification of the received information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/75—Indicating network or usage conditions on the user display
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Computer Security & Cryptography (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Stored Programmes (AREA)
Abstract
本发明提供了一种基于动态字节码技术自动适配传感器数据解析方法，包括以下步骤：数据相关配置项；前置校验适配器；数据处理分解器；后置数据规则解析器；后置数据校验器。解析结构遵循程序开发“开闭原则”，每一类处理器都有默认通用解析规则进行标准适配，同样每一类处理器都可自定义扩展更丰富处理规则。本发明根据大量不同类型、不同厂家传感器设备数据传输特点，采用动态代理、动态字节码技术、前置适配器以及后置数据处理器对不同传感器数据进行配置适配数据解析，通过配置能轻松解决不同厂家、不同类型传感器数据规则解析以及校验，从而达到高效、易维护、可扩展等效果，最大程度增加数据接入开发效率。
Description
技术领域
本发明涉及数据解析技术领域，具体涉及一种基于动态字节码技术自动适配传感器数据解析方法。
背景技术
随着物联网、人工智能的迅速崛起，同时智能设备迅速普及，越来越多的行业依赖于使用传感器设备完成自动化、智能化。
由于传感器数据主要依靠网络传输数据，考虑到数据安全性以及数据传输速度，传感器生产厂家都有各自数据传输标准以及自定义加密方式。
传感器多样化以及没有统一标准导致下游数据收集系统接入传感器数据需要兼容各种标准，数据接入工作繁琐而且不易于扩展和后期维护。
目前大部分系统开发主要存在以下缺点：
（1）数据接入类型过多，每一种一个规则，维护成本高。
（2）主要采取字符串截取方式获取数据地址，截取错误率高，不利于问题排查。
（3）对传感器数据计算没有统一计算规则。
（4）在数据接收过程中产生大量数据实体，代码公用性差。
（5）由于大量静态规则与数据计算，导致无法在线实时接入，需要停机更新，增加运维成本。
综上所述，急需一种基于动态字节码技术自动适配传感器数据解析方法以解决现有技术中存在的问题。
发明内容
本发明目的在于提供一种基于动态字节码技术自动适配传感器数据解析方法，以解决不同厂家、不同类型传感器数据规则解析以及校验。
为实现上述目的，本发明提供了一种基于动态字节码技术自动适配传感器数据解析方法，包括以下步骤：
步骤一：数据相关配置项；定义数据实体基类，根据不同类型、不同厂家传感器配置相关属性以及解析、校验规则；
步骤二：前置校验适配器；根据传感器配置动态产生步骤一中的传感器类型的数据实体代理类；通过读取代理类中配置信息进行数据长度、结构、类型和数据阈值的校验；
步骤三：数据处理分解器；利用数据代理类中的字段配置信息进行数据类型分解，并将分解数据存入数据实体代理类中；
步骤四：后置数据规则解析器；将步骤三中分解后的数据通过数值分析进行数据类型转换，将转换完成后得到的传感器真实数据值存入数据实体代理类中；
步骤五：后置数据校验器；通过正则或数据规则引擎对存入数据实体代理类中的数据进行数据长度、结构、类型和数据阈值的校验。
进一步地，所述前置校验适配器能够自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
进一步地，所述数据处理分解器能够自定义扩展数据分解器，在调用默认校验器之后，数据流向自定义扩展分解器。
进一步地，所述后置数据规则解析器能够自定义扩展解析器，在调用默认校验器之后，数据流向自定义扩展解析器。
进一步地，所述后置数据校验器能够自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
进一步地，所述默认校验器通过系统配置方式，获取数据转化16进制进行字符串截取或正则表达式进行匹配。
进一步地，所述定义数据实体基类是以JAVA语言动态代理以及动态字节码技术为基础，在JAVA数据解析系统中定义的。
应用本发明的技术方案，具有以下有益效果：
（1）本发明根据大量不同类型、不同厂家传感器设备数据传输特点，采用动态代理、动态字节码技术、前置适配器以及后置数据处理器对不同传感器数据进行配置适配数据解析，通过配置能轻松解决不同厂家、不同类型传感器数据规则解析以及校验，从而达到高效、易维护、可扩展等效果，最大程度增加数据接入开发效率。
（2）本发明在数据解析过程中可通过配置自定义数据计算公式（数值分析）进行动态数据转换，同时也可通过正则、数据规则引擎等进行数据校验，降低开发人员技术实现难度。
（3）本发明在解析技术中可配置默认规则，也可扩展自定义解析器，从而能覆盖市面大部分传感器数据结构，可提高系统代码复用性、扩展性和持续维护性。
（4）采用本发明所述的方法，系统开发者同样可自定义开发配套配置界面，从而更加降低数据接入工作专业性，提高现场传感器接入效率。
除了上面所描述的目的、特征和优点之外，本发明还有其它的目的、特征和优点。下面将参照图，对本发明作进一步详细的说明。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是传感器数据解析方法的流程图；
图2是数据流程图。
具体实施方式
以下结合附图对本发明的实施例进行详细说明，但是本发明可以根据权利要求限定和覆盖的多种不同方式实施。
实施例1：
参见图1~图2，一种基于动态字节码技术自动适配传感器数据解析方法，包括以下步骤：
步骤一：数据相关配置项；定义数据实体基类，根据不同类型、不同厂家传感器配置相关属性以及解析、校验规则。
步骤二：前置校验适配器；根据传感器配置动态产生步骤一中的传感器类型的数据实体代理类。数据通过读取代理类中配置信息进行数据长度、结构、类型和数据阈值等多维度校验。可自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
步骤三：数据处理分解器；利用数据代理类中的字段配置信息进行数据类型分解，并将分解数据存入数据实体代理类中。可自定义扩展数据分解器，在调用默认校验器之后，数据流向自定义扩展分解器。
步骤四：后置数据规则解析器；将步骤三中分解后的数据根据数值分析进行数据类型转换，将转换完成后得到的传感器真实数据值存入数据实体代理类中。可自定义扩展解析器器，在调用默认校验器之后，数据流向自定义扩展解析器。默认解析器通过系统配置方式，获取数据转化16进制进行字符串截取或正则表达式进行匹配。
步骤五：后置数据校验器；通过正则或数据规则引擎对存入数据实体代理类中的数据进行数据长度、结构、类型和数据阈值的校验。可自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
基于上述数据解析方法进行分步模拟实验：
（1）通过Javassit字节码结束动态生成数据类。
（2）根据长度、特殊位置特殊值正则匹配校验、反射扩展校验；且适配制定分解器。
（3）分解后字节数据自定义各种类型数据解析器（主要包括16进制转换、高地位调换、CRC校验等）。
（4）采用jexl2技术针对解析后的数据进行公式匹配运算。
（5）通过后置正则配置、反射扩展校验校验数据合法性。
实验结果表明，本发明方法能够解决不同厂家、不同类型传感器数据规则解析以及校验。本发明以JAVA语言动态代理以及动态字节码技术为基础，在JAVA数据解析系统中定义传感器数据基类，在JAVA运行时环境中基于字节码动态产生不同类型传感器数据代理类。本发明数据解析解析方法的主要实现思路借鉴Spring Bean管理流程，针对不同实体类型进行动态代理；在类实例化过程中切入不同类型的数据处理器达到对不同数据实体进行实例管理。本发明数据解析流程主要分为：前置校验适配器、前置数据分解器、后置数据规则解析器、后置数据校验器。解析结构遵循程序开发“开闭原则”，每一类处理器都有默认通用解析规则进行标准适配，同样每一类处理器都可自定义扩展更丰富处理规则。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (7)
1.一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，包括以下步骤：
步骤一：数据相关配置项；定义数据实体基类，根据不同类型、不同厂家传感器配置相关属性以及解析、校验规则；
步骤二：前置校验适配器；根据传感器配置动态产生步骤一中传感器类型的数据实体代理类；通过读取代理类中配置信息进行数据长度、结构、类型和数据阈值的校验；
步骤三：数据处理分解器；利用数据代理类中的字段配置信息进行数据类型分解，并将分解数据存入数据实体代理类中；
步骤四：后置数据规则解析器；将步骤三中分解后的数据通过数值分析进行数据类型转换，将转换完成后得到的传感器真实数据值存入数据实体代理类中；
步骤五：后置数据校验器；通过正则或数据规则引擎对存入数据实体代理类中的数据进行数据长度、结构、类型和数据阈值的校验。
2.根据权利要求1所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述前置校验适配器能够自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
3.根据权利要求2所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述数据处理分解器能够自定义扩展数据分解器，在调用默认校验器之后，数据流向自定义扩展分解器。
4.根据权利要求3所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述后置数据规则解析器能够自定义扩展解析器，在调用默认校验器之后，数据流向自定义扩展解析器。
5.根据权利要求4所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述后置数据校验器能够自定义扩展校验适配器，在调用默认校验器之后，数据流向自定义扩展校验器。
6.根据权利要求1~5任意一项所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述默认校验器通过系统配置方式，获取数据转化16进制进行字符串截取或正则表达式进行匹配。
7.根据权利要求6所述的一种基于动态字节码技术自动适配传感器数据解析方法，其特征在于，所述定义数据实体基类是以JAVA语言动态代理以及动态字节码技术为基础，在JAVA数据解析系统中定义的。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110409855.XA CN112995339B (zh) | 2021-04-16 | 2021-04-16 | 一种基于动态字节码技术自动适配传感器数据解析方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110409855.XA CN112995339B (zh) | 2021-04-16 | 2021-04-16 | 一种基于动态字节码技术自动适配传感器数据解析方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112995339A true CN112995339A (zh) | 2021-06-18 |
| CN112995339B CN112995339B (zh) | 2021-08-03 |
Family
ID=76340707
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110409855.XA Active CN112995339B (zh) | 2021-04-16 | 2021-04-16 | 一种基于动态字节码技术自动适配传感器数据解析方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112995339B (zh) |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6070152A (en) * | 1997-08-14 | 2000-05-30 | International Business Machines Corporation | Framework for business applications providing financial integration |
| US20050193377A1 (en) * | 2004-01-29 | 2005-09-01 | Kenji Seto | Method and apparatus for translation of process models to facilitate usage by plural simulation applications |
| US20060130015A1 (en) * | 2004-11-30 | 2006-06-15 | Griffin Catherine S | Defining expressions in a meta-object model of an application |
| CN108388640A (zh) * | 2018-02-26 | 2018-08-10 | 北京环境特性研究所 | 一种数据转换方法、装置以及数据处理系统 |
| US10146515B1 (en) * | 2015-03-10 | 2018-12-04 | Twitter, Inc. | Live code updates |
| US20190163799A1 (en) * | 2017-11-30 | 2019-05-30 | Hitachi, Ltd. | Database management system and database management method |
| CN110196868A (zh) * | 2019-06-06 | 2019-09-03 | 四川新网银行股份有限公司 | 基于分布式的工单流程监控方法 |
| CN110557462A (zh) * | 2019-07-26 | 2019-12-10 | 北京天元特通科技有限公司 | 一种基于公共代理的分布式接入系统 |
| CN111177753A (zh) * | 2019-12-24 | 2020-05-19 | 广州极点三维信息科技有限公司 | 一种对Java内容仓库数据的加密处理方法、装置和设备 |
| CN111309402A (zh) * | 2018-12-11 | 2020-06-19 | 阿里巴巴集团控股有限公司 | 数据监测及针对应用程序的处理方法、装置及设备 |
| CN111353279A (zh) * | 2020-03-04 | 2020-06-30 | 海南金盘智能科技股份有限公司 | 字符编码的转换方法、装置和计算机存储介质 |
| CN112235132A (zh) * | 2020-09-27 | 2021-01-15 | 广州视源电子科技股份有限公司 | 动态配置服务的方法、装置、介质以及服务器 |
-
2021
- 2021-04-16 CN CN202110409855.XA patent/CN112995339B/zh active Active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6070152A (en) * | 1997-08-14 | 2000-05-30 | International Business Machines Corporation | Framework for business applications providing financial integration |
| US20050193377A1 (en) * | 2004-01-29 | 2005-09-01 | Kenji Seto | Method and apparatus for translation of process models to facilitate usage by plural simulation applications |
| US20060130015A1 (en) * | 2004-11-30 | 2006-06-15 | Griffin Catherine S | Defining expressions in a meta-object model of an application |
| US10146515B1 (en) * | 2015-03-10 | 2018-12-04 | Twitter, Inc. | Live code updates |
| US20190163799A1 (en) * | 2017-11-30 | 2019-05-30 | Hitachi, Ltd. | Database management system and database management method |
| CN108388640A (zh) * | 2018-02-26 | 2018-08-10 | 北京环境特性研究所 | 一种数据转换方法、装置以及数据处理系统 |
| CN111309402A (zh) * | 2018-12-11 | 2020-06-19 | 阿里巴巴集团控股有限公司 | 数据监测及针对应用程序的处理方法、装置及设备 |
| CN110196868A (zh) * | 2019-06-06 | 2019-09-03 | 四川新网银行股份有限公司 | 基于分布式的工单流程监控方法 |
| CN110557462A (zh) * | 2019-07-26 | 2019-12-10 | 北京天元特通科技有限公司 | 一种基于公共代理的分布式接入系统 |
| CN111177753A (zh) * | 2019-12-24 | 2020-05-19 | 广州极点三维信息科技有限公司 | 一种对Java内容仓库数据的加密处理方法、装置和设备 |
| CN111353279A (zh) * | 2020-03-04 | 2020-06-30 | 海南金盘智能科技股份有限公司 | 字符编码的转换方法、装置和计算机存储介质 |
| CN112235132A (zh) * | 2020-09-27 | 2021-01-15 | 广州视源电子科技股份有限公司 | 动态配置服务的方法、装置、介质以及服务器 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112995339B (zh) | 2021-08-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20240168735A1 (en) | System and method for compiling high-level language code into a script executable on a blockchain platform | |
| CN110609693B (zh) | 基于数据标准化的代码更新方法、装置及终端设备 | |
| CN109753288B (zh) | 一种适用于形式化验证的智能合约编译方法 | |
| US8838653B2 (en) | Translating an object-oriented data model to a YANG data model | |
| US7849509B2 (en) | Detection of security vulnerabilities in computer programs | |
| US20080091409A1 (en) | Customizable mathematic expression parser and evaluator | |
| US8572574B2 (en) | Solving hybrid constraints to validate specification requirements of a software module | |
| US20040205720A1 (en) | Augmenting debuggers | |
| CN114238948A (zh) | 一种应用程序检测方法、装置、电子设备及存储介质 | |
| CN114428728A (zh) | 信息物理测试协议处理系统及方法 | |
| CN112995339B (zh) | 一种基于动态字节码技术自动适配传感器数据解析方法 | |
| CN113885876A (zh) | 一种参数校验方法、装置、存储介质及计算机系统 | |
| CN117234517A (zh) | 接口参数校验方法、装置、设备及存储介质 | |
| WO2023123111A1 (zh) | 编译方法以及用于编译的装置 | |
| CN112069052A (zh) | 一种异常对象检测方法、装置、设备及存储介质 | |
| CN115292676A (zh) | 一种可编程数据平面程序验证方法及装置 | |
| CN115292178A (zh) | 测试数据搜索方法、装置、存储介质以及终端 | |
| CN115150483A (zh) | 一种网络数据包解析方法、系统及可读存储介质 | |
| Yang et al. | CrossFuzz: Cross-contract fuzzing for smart contract vulnerability detection | |
| WO2022035476A1 (en) | Representing asynchronous state machine in intermediate code | |
| CN107451050B (zh) | 函数获取方法和装置、服务器 | |
| Xia et al. | An Empirical Study of C to Rust Transpilers | |
| Brooks et al. | A method for specifying, implementing, and verifying media access control protocols | |
| US11805001B2 (en) | Managing data schema differences by path deterministic finite automata | |
| US20060101415A1 (en) | Service logic program tracing |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
| PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: A method for automatically adapting sensor data analysis based on dynamic bytecode technology Effective date of registration: 20220920 Granted publication date: 20210803 Pledgee: China Everbright Bank Co.,Ltd. Changsha Huafeng Sub branch Pledgor: Hunan Lianzhi Technology Co.,Ltd. Registration number: Y2022430000088 |
|
| PC01 | Cancellation of the registration of the contract for pledge of patent right | ||
| PC01 | Cancellation of the registration of the contract for pledge of patent right |
Date of cancellation: 20231106 Granted publication date: 20210803 Pledgee: China Everbright Bank Co.,Ltd. Changsha Huafeng Sub branch Pledgor: Hunan Lianzhi Technology Co.,Ltd. Registration number: Y2022430000088 |