CN114710572A - 数据处理方法、装置及计算机存储介质 - Google Patents
数据处理方法、装置及计算机存储介质 Download PDFInfo
- Publication number
- CN114710572A CN114710572A CN202210334448.1A CN202210334448A CN114710572A CN 114710572 A CN114710572 A CN 114710572A CN 202210334448 A CN202210334448 A CN 202210334448A CN 114710572 A CN114710572 A CN 114710572A
- Authority
- CN
- China
- Prior art keywords
- data
- target
- message
- data processing
- format
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 26
- 238000004458 analytical method Methods 0.000 claims abstract description 30
- 238000006243 chemical reaction Methods 0.000 claims abstract description 8
- 230000015654 memory Effects 0.000 claims description 34
- 238000000034 method Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 13
- 230000006855 networking Effects 0.000 claims 1
- 230000001360 synchronised effect Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 239000012634 fragment Substances 0.000 description 4
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 229940004975 interceptor Drugs 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000013467 fragmentation Methods 0.000 description 1
- 238000006062 fragmentation reaction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2474—Sequence data queries, e.g. querying versioned data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请公开了一种数据处理方法、装置及计算机存储介质，包括：获取目标设备上报的数据报文；根据所述数据报文的报文格式，确定对所述数据报文的解析方式；基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；将所述目标数据存储至预设的时序数据库中。如此，通过将使用不同网络协议的不同设备上报的数据的格式进行统一，提高了数据的完整性和可靠性，同时方便管理不同设备。
Description
技术领域
本发明涉及信息处理技术领域，特别是涉及一种数据处理方法、装置及计算机存储介质。
背景技术
在物联网时代，设备之间可实现互联。目前，普通硬件设备与平台之间间或者普通硬件设备与边缘网关设备之间串口设备传输的协议不一致，而受到外界因素影响，很容易造成普通硬件设备上传和接收的信息被丢失、数据不同步、数据不一致性等问题，影响数据的完整性和可靠性。
发明内容
本发明的目的在于提供一种数据处理方法、装置及计算机存储介质，能够提高数据的完整性和可靠性，同时方便管理不同设备。
为达到上述目的，本发明的技术方案是这样实现的：
第一方面，本发明实施例提供了一种数据处理方法，应用于物联网平台，包括：
获取目标设备上报的数据报文；
根据所述数据报文的报文格式，确定对所述数据报文的解析方式；
基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；
将所述目标数据存储至预设的时序数据库中。
作为其中一种实施方式，所述根据所述数据报文的报文格式，确定对所述数据报文的解析方式之前，还包括以下步骤：
获取所述目标设备标识；
根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
作为其中一种实施方式，所述将所述目标数据存储至预设的时序数据库中，包括以下步骤：
将所述目标数据与所述目标设备标识绑定后存储至预设的时序数据库中。
作为其中一种实施方式，所述方法还包括以下步骤：
接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
第二方面，本发明实施例提供了一种数据处理装置，应用于物联网平台，所述装置包括：
获取模块，用于获取目标设备上报的数据报文；
认证模块，用于根据所述数据报文的报文格式，确定对所述数据报文的解析方式；
处理模块，用于基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；
存储模块，用于将所述目标数据存储至预设的时序数据库中。
作为其中一种实施方式，所述装置还包括查询模块；
所述获取模块，还用于获取所述目标设备标识；
所述查询模块，用于根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
作为其中一种实施方式，所述存储模块，具体用于：将所述目标数据与所述目标设备标识绑定后存储至预设的时序数据库中。
作为其中一种实施方式，所述处理模块，还用于接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
第三方面，本发明实施例提供了一种数据处理装置，包括：处理器和存储有计算机程序的存储器，在所述处理器运行所述计算机程序时，实现上述所述的数据处理方法。
第四方面，本发明实施例提供了一种计算机存储介质，存储有计算机程序，所述计算机程序被处理器执行时，实现第一方面所述的数据处理方法。
本发明实施例提供的数据处理方法、装置及计算机存储介质，包括：获取目标设备上报的数据报文；根据所述数据报文的报文格式，确定对所述数据报文的解析方式；基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；将所述目标数据存储至预设的时序数据库中。如此，通过将使用不同网络协议的不同设备上报的数据的格式进行统一，提高了数据的完整性和可靠性，同时方便管理不同设备。
附图说明
图1为本发明实施例提供的一种数据处理方法的流程示意图；
图2为本发明实施例提供的一种数据处理装置的结构示意图一；
图3为本发明实施例提供的一种数据处理方法的应用场景示意图；
图4为本发明实施例提供的一种数据处理方法的框架示意图；
图5为本发明实施例提供的一种数据处理装置的结构示意图二。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的设备和方法的例子。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者设备中还存在另外的相同要素，此外，本申请不同实施例中具有同样命名的部件、特征、要素可能具有相同含义，也可能具有不同含义，其具体含义需以其在该具体实施例中的解释或者进一步结合该具体实施例中上下文进行确定。
应当理解，尽管在本文可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本文范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语"如果"可以被解释成为"在……时"或"当……时"或"响应于确定"。再者，如同在本文中所使用的，单数形式“一”、“一个”和“该”旨在也包括复数形式，除非上下文中有相反的指示。应当进一步理解，术语“包含”、“包括”表明存在所述的特征、步骤、操作、元件、组件、项目、种类、和/或组，但不排除一个或多个其他特征、步骤、操作、元件、组件、项目、种类、和/或组的存在、出现或添加。此处使用的术语“或”和“和/或”被解释为包括性的，或意味着任一个或任何组合。因此，“A、B或C”或者“A、B和/或C”意味着“以下任一个：A；B；C；A和B；A和C；B和C；A、B和C”。仅当元件、功能、步骤或操作的组合在某些方式下内在地互相排斥时，才会出现该定义的例外。
应该理解的是，虽然本申请实施例中的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
需要说明的是，在本文中，采用了诸如S101、S102等步骤代号，其目的是为了更清楚简要地表述相应内容，不构成顺序上的实质性限制，本领域技术人员在具体实施时，可能会先执行S102后执行S101等，但这些均应在本申请的保护范围之内。
应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或者“单元”的后缀仅为了有利于本申请的说明，其本身没有特定的意义。因此，“模块”、“部件”或者“单元”可以混合地使用。
参阅图1，为本申请实施例提供的一种数据处理方法，该方法可以由本申请实施例提供的一种数据处理装置来执行，该装置可以采用软件和/或硬件的方式来实现，该装置具体可以是物联网平台等设备，本实施例提供的数据处理方法包括以下步骤：
步骤S101：获取目标设备上报的数据报文。
可选地，所述目标设备可为与物联网平台连接的任一设备，包括但不限于边缘网关设备、普通硬件设备，所述边缘网关设备可为智能网关、边缘计算单元等设备，所述普通硬件设备可为浊度仪、水质计、摄像头等设备。所述目标设备可以通过主动方式或被动方式向物联网平台上报数据报文。
步骤S102：根据所述数据报文的报文格式，确定对所述数据报文的解析方式。
可选地，对于不同设备以不同网络协议上报的数据报文，所述数据报文对应的报文格式相应不同。需要说明的是，数据报文的报文格式可以看作是上报所述数据报文所使用的网络协议格式，所述网络协议包括但不限于MQTT、HTTP、TCP、UDP、PS、MODBUS等协议。对于不同报文格式的数据报文，需要采用不同的解析方式进行解析，以获得准确且完整的解析结果。
在一实施方式中，所述根据所述数据报文的报文格式，确定对所述数据报文的解析方式之前，还包括以下步骤：
获取所述目标设备标识；
根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
可选地，不同设备在与物联网平台连接后，可将自身标识以及使用的报文格式上传至物联网平台，以由物联网平台建立并存储不同设备标识与报文格式之间的对应关系。物联网平台在获取目标设备上报的数据报文后，可根据所述数据报文携带的目标设备标识获取所述目标设备标识，也可进一步与所述目标设备进行交互操作而所述目标设备标识。由于所述目标设备标识对应的报文格式为所述目标设备向物联网平台上报数据报文采用的报文格式，因此，可直接将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。如此，通过查询设备标识与报文格式之间的对应关系，快速获得数据报文的报文格式，提高了数据处理效率。
步骤S103：基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据。
可选地，物联网平台在获取到目标设备上报的数据报文的解析方式后，基于所述解析方式对所述数据报文进行解析，从而获得对所述数据报文解析后的数据；接着，将对所述数据报文解析后的数据转换为目标格式，从而获取目标格式的目标数据。需要说明的是，对于不同设备上报的不同报文格式的数据报文，所述目标格式是统一的。
步骤S104：将所述目标数据存储至预设的时序数据库中。
在一实施方式中，所述将所述目标数据存储至预设的时序数据库中，包括以下步骤：将所述目标数据与所述目标设备标识或所述目标设备的上级设备标识绑定后存储至预设的时序数据库中。
可以理解，为了方便后续查找不同设备上报的数据，或者方便物联网平台或者上报数据报文的目标设备的上级设备信息，物联网平台可将所述目标数据与所述目标设备标识绑定或将所述目标数据与所述目标设备的上级设备标识绑定后，存储至预设的时序数据库中。
综上，上述实施例提供的数据处理方法中，通过将使用不同网络协议的不同设备上报的数据的格式进行统一，提高了数据的完整性和可靠性，同时方便管理不同设备。
在一实施方式中，所述方法还包括：
接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
可选地，物联网平台在接收到数据展示请求后，可直接从所述时序数据库中读取并输出所述数据展示请求所请求的数据，如将所述数据展示请求所请求的数据发送给具有显示装置的输出设备，以由该输出设备显示所述数据展示请求所请求的数据，从而可展示不同设备的真实情况，比如是否异常、是否在线离线、数据是否正常上报等。
基于前述实施例相同的发明构思，参阅图2，为本申请实施例提供的一种语言处理装置，应用于物联网平台，包括：
获取模块，用于获取目标设备上报的数据报文；
认证模块，用于根据所述数据报文的报文格式，确定对所述数据报文的解析方式；
处理模块，用于基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；
存储模块，用于将所述目标数据存储至预设的时序数据库中。
可选地，所述目标设备可为与物联网平台连接的任一设备，包括但不限于边缘网关设备、普通硬件设备，所述边缘网关设备可为智能网关、边缘计算单元等设备，所述普通硬件设备可为浊度仪、水质计、摄像头等设备。所述目标设备可以通过主动方式或被动方式向物联网平台上报数据报文。
可选地，对于不同设备以不同网络协议上报的数据报文，所述数据报文对应的报文格式相应不同。需要说明的是，数据报文的报文格式可以看作是上报所述数据报文所使用的网络协议格式，所述网络协议包括但不限于MQTT、HTTP、TCP、UDP、PS、MODBUS等协议。对于不同报文格式的数据报文，需要采用不同的解析方式进行解析，以获得准确且完整的解析结果。
可选地，物联网平台在获取到目标设备上报的数据报文的解析方式后，基于所述解析方式对所述数据报文进行解析，从而获得对所述数据报文解析后的数据；接着，将对所述数据报文解析后的数据转换为目标格式，从而获取目标格式的目标数据。需要说明的是，对于不同设备上报的不同报文格式的数据报文，所述目标格式是统一的。
在一实施方式中，所述装置还包括查询模块；
所述获取模块，还用于获取所述目标设备标识；
所述查询模块，用于根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
可选地，不同设备在与物联网平台连接后，可将自身标识以及使用的报文格式上传至物联网平台，以由物联网平台建立并存储不同设备标识与报文格式之间的对应关系。物联网平台在获取目标设备上报的数据报文后，可根据所述数据报文携带的目标设备标识获取所述目标设备标识，也可进一步与所述目标设备进行交互操作而所述目标设备标识。由于所述目标设备标识对应的报文格式为所述目标设备向物联网平台上报数据报文采用的报文格式，因此，可直接将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。如此，通过查询设备标识与报文格式之间的对应关系，快速获得数据报文的报文格式，提高了数据处理效率。
在一实施方式中，所述存储模块，具体用于：将所述目标数据与所述目标设备标识或所述目标设备的上级设备标识绑定后存储至预设的时序数据库中。
可以理解，为了方便后续查找不同设备上报的数据，或者方便物联网平台或者上报数据报文的目标设备的上级设备信息，物联网平台可将所述目标数据与所述目标设备标识绑定或将所述目标数据与所述目标设备的上级设备标识绑定后，存储至预设的时序数据库中。
在一实施方式中，所述处理模块，还用于接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
可选地，物联网平台在接收到数据展示请求后，可直接从所述时序数据库中读取并输出所述数据展示请求所请求的数据，如将所述数据展示请求所请求的数据发送给具有显示装置的输出设备，以由该输出设备显示所述数据展示请求所请求的数据，从而可展示不同设备的真实情况，比如是否异常、是否在线离线、数据是否正常上报等。
综上，上述实施例提供的数据处理装置中，通过将使用不同网络协议的不同设备上报的数据的格式进行统一，提高了数据的完整性和可靠性，同时方便管理不同设备。
基于前述实施例相同的发明构思，下面通过具体场景对前述实施例进行具体说明。
参阅图3，为本申请实施例提供的数据处理方法的应用场景示意图，包括普通硬件设备、平台或边缘网关设备和物联网平台，普通硬件设备与平台或边缘网关设备之间通过网络协议传输数据报文，物联网平台封装了网络通信，对使用不同网络协议的设备上报的数据统一由消息协议进行解析。其中，消息协议(Protocol Support)主要由认证器(Authenticator)、消息编解码器(Device Message Codec)、消息发送拦截器(DeviceMessage Sender Interceptor)以及配置元数据(Config Metadata)等函数组成，目的是解析不同设备上报的数据，然后封装统一数据格式来存储。
参阅图4，为本申请实施例提供的数据处理方法的框架示意图，其中，普通硬件设备可为浊度仪、水质计、摄像头等设备；边缘网关设备可为7G边缘计算单元、智能网关等设备；物联网平台可为7G物联平台且7G物联平台包括消息中间件(RabbitMQ)和数据存储(时序数据库InfluxDB)。
普通硬件设备连接平台或边缘网关设备后，由于各个设备使用的网络协议不同，处理数据的方式也不同，消息中间件接收各个设备上报的数据后由消息协议进行解析。例如，摄像头设备以MODBUS协议上报数据，水质计设备以HTTP协议上报数据，浊度仪设备以TCP协议上报数据，7G边缘计算单元(网关)以MQTT协议上报数据。
7G物联平台封装了网络通信，但是具体的消息由消息协议进行解析，其中：
认证器是用于在收到设备请求数据(例如MQTT)时，对客户端即设备进行认证，会根据设备不同的网络协议(Transport)使用不同的认证器。
消息编解码器用于将7G物联平台统一的消息(Message)与设备端能处理的消息(Encoded Message)进行互相转换。
7G物联平台统一消息定义，将设备抽象为由属性(property)、功能(function)、事件(event)组成。
消息发送拦截器可以拦截消息发送和返回的动作，通过修改参数等操作实现自定义逻辑，如：当设备离线时，将消息缓存到设备配置中，等到设备上线时再重发。
配置元数据用于7G物联平台中，在使用此协议的时候，需要添加一些自定义配置到设备配置(Device Operator.setConfig)中。
下面通过具体示例进行详细说明，平台或边缘网关设备以7G边缘计算单元为例，普通硬件设备以摄像头为例。
(1)、7G边缘计算单元请求(以MQTT协议)7G物联平台服务器时，就会调用封装了网络通信的平台，由消息协议来接受MQTT协议的报文进行解析。
(2)、消息协议中的认证器就会识别到MQTT协议，会根据实际情况转换为对应的类型来获取设备的配置返回认证结果。
(3)、消息编码器就会对数据进行编码或解码。编码可以从上下文MessageEncodeContext中获取当前设备操作接口以及平台统一的设备消息Message。根据设备侧定义的协议转换为对应的EncodeMessage。解码可以从上下文MessageDecodeContextzhong获取设备操作接口以及设备消息EncodeMessage，然后将消息转换为平台统一的消息。
(4)、平台统一消息定义是为了更好统一管理各个设备情况。7G物联平台将设备抽象为由属性(property)、功能(function)、事件(event)组成。消息数据主要由deviceId、messageId、headers组成。deviceId为设备的唯一标识，messageId为消息的唯一标识，headers为消息头，通常用于自定义消息处理的行为，如是否异步消息，是否分片消息等。
常用的headers包括：
1)aysnc是否异步，boolean类型；
2)timeout指定超时时间，毫秒；
3)frag_msg_id分片主消息ID，为下发消息的messageId；
4)frag_num分片总数；
5)frag_part当前分片索引；
6)frag_last是否为最后一个分片，当无法确定分片数量的时候，可以将分片设置到足够大，最后一个分片设置frag_last＝true来完成返回；
7)keepOnline与DeviceOnlineMessage配合使用，在TCP短链接，保持设备一直在线状态，连接断开不会设置设备离线。
(5)、解码后数据就会转换为平台统一数据格式，然后存入7G物联平台时序数据库(InfluxDB)中，即数据最终存入时序数据库中存储备份。
(6)、最终7G物联平台就会直接从时序数据库中获取数据来展示设备的真实情况(是否异常，是否在线离线，数据是否正常上报等)。
(7)、普通硬件设备(摄像头)上报数据解析流程也是以上六步操作，唯一不同的是当数据解码后转换平台统一数据格式之后，得绑定网关设备7G边缘计算单元的deviceId，才存入到时序数据库中存储备份，目的是在7G物联平台可以知道普通硬件设备隶属于哪个平台/边缘网关设备的子设备。
综上，本实施例提供的数据处理方法中，通过对使用不同协议的多个设备上报数据统一消息协议来解析数据、收集数据，可以更高效的防止消息数据错乱，丢失等问题，还能提高代码冗余质量。同时，数据传输更高效，程序性能更流畅。
基于前述实施例相同的发明构思，本发明实施例提供了一种数据处理装置，如5所示，该装置包括：处理器310和存储有计算机程序的存储器311；其中，图5中示意的处理器310并非用于指代处理器310的个数为一个，而是仅用于指代处理器310相对其他器件的位置关系，在实际应用中，处理器310的个数可以为一个或多个；同样，图5中示意的存储器311也是同样的含义，即仅用于指代存储器311相对其他器件的位置关系，在实际应用中，存储器311的个数可以为一个或多个。在所述处理器310运行所述计算机程序时，实现应用于上述装置的所述数据处理方法。
该装置还可包括：至少一个网络接口312。该装置中的各个组件通过总线系统313耦合在一起。可理解，总线系统313用于实现这些组件之间的连接通信。总线系统313除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图5中将各种总线都标为总线系统313。
其中，存储器311可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(ROM，Read Only Memory)、可编程只读存储器(PROM，Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM，Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM，Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM，ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM，Compact Disc Read-Only Memory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM，Random AccessMemory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(SRAM，Static Random Access Memory)、同步静态随机存取存储器(SSRAM，Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM，Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM，SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM，Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM，SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM，Direct Rambus Random Access Memory)。本发明实施例描述的存储器311旨在包括但不限于这些和任意其它适合类型的存储器。
本发明实施例中的存储器311用于存储各种类型的数据以支持该装置的操作。这些数据的示例包括：用于在该装置上操作的任何计算机程序，如操作系统和应用程序；联系人数据；电话簿数据；消息；图片；视频等。其中，操作系统包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。这里，实现本发明实施例方法的程序可以包含在应用程序中。
基于前述实施例相同的发明构思，本实施例还提供了一种计算机存储介质，所述计算机存储介质中存储有计算机程序，计算机存储介质可以是磁性随机存取存储器(FRAM，ferromagnetic random access memory)、只读存储器(ROM，Read Only Memory)、可编程只读存储器(PROM，Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM，Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM，Electrically Erasable Programmable Read-Only Memory)、快闪存储器(FlashMemory)、磁表面存储器、光盘、或只读光盘(CD-ROM，Compact Disc Read-Only Memory)等存储器；也可以是包括上述存储器之一或任意组合的各种设备，如移动电话、计算机、平板设备、个人数字助理等。所述计算机存储介质中存储的计算机程序被处理器运行时，实现应用于上述装置的所述数据处理方法。所述计算机程序被处理器执行时实现的具体步骤流程请参考图1所示实施例的描述，在此不再赘述。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，除了包含所列的那些要素，而且还可包含没有明确列出的其他要素。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种数据处理方法，应用于物联网平台，其特征在于，所述方法包括以下步骤：
获取目标设备上报的数据报文；
根据所述数据报文的报文格式，确定对所述数据报文的解析方式；
基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；
将所述目标数据存储至预设的时序数据库中。
2.根据权利要求1所述的数据处理方法，所述根据所述数据报文的报文格式，确定对所述数据报文的解析方式之前，还包括以下步骤：
获取所述目标设备标识；
根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
3.根据权利要求1所述的数据处理方法，所述将所述目标数据存储至预设的时序数据库中，包括以下步骤：
将所述目标数据与所述目标设备标识或所述目标设备的上级设备标识绑定后存储至预设的时序数据库中。
4.根据权利要求1所述的数据处理方法，所述方法还包括以下步骤：
接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
5.一种数据处理装置，应用于物联网平台，其特征在于，所述装置包括：
获取模块，用于获取目标设备上报的数据报文；
认证模块，用于根据所述数据报文的报文格式，确定对所述数据报文的解析方式；
处理模块，用于基于所述解析方式对所述数据报文进行解析，并将解析获得的数据进行目标格式转换处理，获得目标数据；
存储模块，用于将所述目标数据存储至预设的时序数据库中。
6.根据权利要求5所述的数据处理装置，所述装置还包括查询模块；
所述获取模块，还用于获取所述目标设备标识；
所述查询模块，用于根据所述目标设备标识查询设置的不同设备标识与报文格式之间的对应关系，将与所述目标设备标识对应的报文格式确定为所述数据报文的报文格式。
7.根据权利要求5所述的数据处理装置，所述存储模块，具体用于：将所述目标数据与所述目标设备标识绑定后存储至预设的时序数据库中。
8.根据权利要求5所述的数据处理装置，所述处理模块，还用于接收到数据展示请求后，从所述时序数据库中读取并输出所述数据展示请求所请求的数据。
9.一种数据处理装置，其特征在于，包括：处理器和存储有计算机程序的存储器，在所述处理器运行所述计算机程序时，实现权利要求1至4中任一项所述的数据处理方法。
10.一种计算机存储介质，其特征在于，存储有计算机程序，所述计算机程序被处理器执行时，实现权利要求1至4中任一项所述的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210334448.1A CN114710572A (zh) | 2022-03-31 | 2022-03-31 | 数据处理方法、装置及计算机存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210334448.1A CN114710572A (zh) | 2022-03-31 | 2022-03-31 | 数据处理方法、装置及计算机存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114710572A true CN114710572A (zh) | 2022-07-05 |
Family
ID=82170581
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210334448.1A Pending CN114710572A (zh) | 2022-03-31 | 2022-03-31 | 数据处理方法、装置及计算机存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114710572A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115720243A (zh) * | 2022-11-22 | 2023-02-28 | 协鑫电港云科技(海南)有限公司 | 换电设备状态确定方法、装置、电子设备及存储介质 |
| CN116055577A (zh) * | 2023-01-28 | 2023-05-02 | 东方合智数据科技(广东)有限责任公司 | 协议转换方法、装置、设备及存储介质 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013127191A1 (zh) * | 2012-02-28 | 2013-09-06 | 重庆和航科技股份有限公司 | 物联网协议转换系统及转换方法 |
| US20160182446A1 (en) * | 2013-09-09 | 2016-06-23 | Computer Network Information Center, Chinese Academy Of Sciences | Method and system for resolving Internet of Things heterogeneous identifiers |
| CN110022289A (zh) * | 2018-01-10 | 2019-07-16 | 北龙中网（北京）科技有限责任公司 | 数据传输方法、装置及系统 |
| CN110933095A (zh) * | 2019-12-04 | 2020-03-27 | 锐捷网络股份有限公司 | 一种报文解析方法及装置 |
| CN111083225A (zh) * | 2019-12-19 | 2020-04-28 | 远景智能国际私人投资有限公司 | 在物联网平台中的数据处理方法、装置及物联网平台 |
| CN112688967A (zh) * | 2021-03-11 | 2021-04-20 | 武汉慧联无限科技有限公司 | 一种物联网数据处理方法、装置、设备及存储介质 |
| CN113179269A (zh) * | 2021-04-27 | 2021-07-27 | 深圳市麦斯杰网络有限公司 | 基于物联网的协议数据解析方法、系统、介质及程序产品 |
| CN114036216A (zh) * | 2021-10-29 | 2022-02-11 | 中国联合网络通信集团有限公司 | 一种数据处理方法、装置和存储介质 |
| CN114168218A (zh) * | 2021-11-30 | 2022-03-11 | 深圳市名竹科技有限公司 | 数据处理方法、装置、计算机设备和存储介质 |
| CN114172979A (zh) * | 2021-12-02 | 2022-03-11 | 上海电力设计院有限公司 | 一种报文解析方法、平台、网关及存储介质 |
-
2022
- 2022-03-31 CN CN202210334448.1A patent/CN114710572A/zh active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013127191A1 (zh) * | 2012-02-28 | 2013-09-06 | 重庆和航科技股份有限公司 | 物联网协议转换系统及转换方法 |
| US20160182446A1 (en) * | 2013-09-09 | 2016-06-23 | Computer Network Information Center, Chinese Academy Of Sciences | Method and system for resolving Internet of Things heterogeneous identifiers |
| CN110022289A (zh) * | 2018-01-10 | 2019-07-16 | 北龙中网（北京）科技有限责任公司 | 数据传输方法、装置及系统 |
| CN110933095A (zh) * | 2019-12-04 | 2020-03-27 | 锐捷网络股份有限公司 | 一种报文解析方法及装置 |
| CN111083225A (zh) * | 2019-12-19 | 2020-04-28 | 远景智能国际私人投资有限公司 | 在物联网平台中的数据处理方法、装置及物联网平台 |
| CN112688967A (zh) * | 2021-03-11 | 2021-04-20 | 武汉慧联无限科技有限公司 | 一种物联网数据处理方法、装置、设备及存储介质 |
| CN113179269A (zh) * | 2021-04-27 | 2021-07-27 | 深圳市麦斯杰网络有限公司 | 基于物联网的协议数据解析方法、系统、介质及程序产品 |
| CN114036216A (zh) * | 2021-10-29 | 2022-02-11 | 中国联合网络通信集团有限公司 | 一种数据处理方法、装置和存储介质 |
| CN114168218A (zh) * | 2021-11-30 | 2022-03-11 | 深圳市名竹科技有限公司 | 数据处理方法、装置、计算机设备和存储介质 |
| CN114172979A (zh) * | 2021-12-02 | 2022-03-11 | 上海电力设计院有限公司 | 一种报文解析方法、平台、网关及存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| HENG WANG: ""A Protocol Conversion Scheme Between WIA-PA Networks and Time-Sensitive Networks"", 《2019 CHINESE AUTOMATION CONGRESS (CAC)》 * |
| 陈俊峰: ""物联网异构设备接入协议解析与特征识别的研究与实现"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115720243A (zh) * | 2022-11-22 | 2023-02-28 | 协鑫电港云科技(海南)有限公司 | 换电设备状态确定方法、装置、电子设备及存储介质 |
| CN116055577A (zh) * | 2023-01-28 | 2023-05-02 | 东方合智数据科技(广东)有限责任公司 | 协议转换方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114710572A (zh) | 数据处理方法、装置及计算机存储介质 | |
| CN108512821B (zh) | 数据传输方法、装置和系统，网闸，交易数据存储方法 | |
| CN111756674B (zh) | 网络通信方法、系统、设备及计算机可读存储介质 | |
| CN110417783B (zh) | 一种基于物联网的数据传输方法、装置、储存介质及终端 | |
| CN112822276B (zh) | 一种变电站站控层通信方法、系统、电子设备及存储介质 | |
| US20070226483A1 (en) | System and method for storing and/or transmitting emulated network flows | |
| EA019680B1 (ru) | Способ и система доступа к сервису | |
| CN112765103A (zh) | 一种文件解析方法、系统、装置及设备 | |
| CN115733894A (zh) | 一种电力系统多协议数据接入管理方法、装置及设备 | |
| CN112416512A (zh) | 一种镜像构建方法、服务器、客户机、存储介质及系统 | |
| US7010790B2 (en) | Modular method and device for the tracing of a multimedia message through a telecommunications network | |
| US20140013007A1 (en) | Access log management method | |
| CN111884905A (zh) | 一种消息管理方法及系统 | |
| CN102859970A (zh) | 被表示为互联网协议地址的值 | |
| CN114301988A (zh) | 分布式调用方法、装置、存储介质及电子设备 | |
| CN113220481A (zh) | 请求处理及反馈方法、装置、计算机设备及可读存储介质 | |
| CN116684703A (zh) | 基于邻近服务通信协议的流媒体数据传输方法及相关设备 | |
| CN113051202A (zh) | 接口适配方法、装置、电子设备和计算机可读存储介质 | |
| CN102263796B (zh) | 基于简单网络管理协议的数据传输方法 | |
| CN115514771A (zh) | 数据传输方法、装置、电子设备及计算机可读存储介质 | |
| CN114595115A (zh) | 模型数据提取方法、系统、电子设备及计算机存储介质 | |
| CN112769741B (zh) | 一种消息通信方法及电子设备 | |
| CN109634931B (zh) | 一种日志上传方法及装置 | |
| CN113037848A (zh) | 文件上传方法和系统 | |
| CN112597119A (zh) | 一种处理日志的生成方法、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |