CN114640900A - 一种信息联网系统的数据管理方法、装置及存储介质 - Google Patents
一种信息联网系统的数据管理方法、装置及存储介质 Download PDFInfo
- Publication number
- CN114640900A CN114640900A CN202210248956.8A CN202210248956A CN114640900A CN 114640900 A CN114640900 A CN 114640900A CN 202210248956 A CN202210248956 A CN 202210248956A CN 114640900 A CN114640900 A CN 114640900A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- layer
- real
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000006855 networking Effects 0.000 title claims abstract description 64
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000013523 data management Methods 0.000 title claims abstract description 35
- 230000003993 interaction Effects 0.000 claims abstract description 38
- 230000008447 perception Effects 0.000 claims abstract description 26
- 238000007726 management method Methods 0.000 claims description 85
- 238000013500 data storage Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 34
- 238000010586 diagram Methods 0.000 description 12
- 230000007246 mechanism Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000002265 prevention Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种信息联网系统的数据管理方法、装置及存储介质，所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述数据管理方法，包括：根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。本发明提供的方案能够避免服务器和数据库对不重要数据的储存和处理，减少了上报数据量大小。
Description
技术领域
本发明涉及控制领域，尤其涉及一种信息联网系统的数据管理方法、装置及存储介质。
背景技术
在信息联网系统中，包括工业互联网、能源互联网等系统，数据采集、数据处理的过程中，有大量的非必要、非实时性数据产生，对于这部分数据的处理，若储存到服务器，则产生较大的浪费，不仅占用服务器的资源，还影响其他重要数据的处理速度，降低了整体系统的数据调用效率；若将这些数据丢弃，又会产生其他问题。
发明内容
本发明的主要目的在于克服上述相关技术的缺陷，提供一种信息联网系统的数据管理方法、装置及存储介质，以解决相关技术中信息联网系统的数据采集或数据处理的过程中有大量的非必要、非实时性数据产生占用服务器的资源的问题。
本发明一方面提供了一种信息联网系统的数据管理方法，所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述方法，包括：根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
可选地，根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理，包括：若所述数据为实时性数据，信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行存储，并将所述数据上报到信息管理层，信息管理层根据所述数据的重要性确定是否存储所述数据，其中，若所述数据为重要数据，则存储所述数据，若所述数据为不重要数据，则不存储所述数据；所述信息感知层不存储所述数据；若所述数据为非实时性数据，信息感知层获取所述数据之后，对所述数据进行存储，并根据所述数据的重要性确定是否将所述数据上报到信息控制层，信息控制层根据所述数据的重要性确定是否上报到信息管理层进行存储；其中，若所述数据为重要数据，则上报到信息管理层进行存储，若所述数据为不重要数据，则不主动上报所述数据。
可选地，根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理，包括：确定所述信息联网系统的信息感知层获取的数据所属的类别；其中，所述类别按照实时性要求和/或上层交互需求的重要性进行划分；基于所述数据所属的类别，按照设定方式对所述数据进行管理。
可选地，所述数据的类别，包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。
可选地，基于所述数据所属的类别，按照设定方式对所述数据进行管理，包括：若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储，同时，信息控制层对所述数据进行存储，并存储第一预设时间；所述信息感知层不存储所述数据；若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据；若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据；若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间，所述信息感知层和信息管理层不存储所述数据。
本发明另一方面提供了一种信息联网系统的数据管理装置，所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述装置，包括：管理单元，用于根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
可选地，所述管理单元，根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理，包括：若所述数据为实时性数据，信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行存储，并将所述数据上报到信息管理层，信息管理层根据所述数据的重要性确定是否存储所述数据，其中，若所述数据为重要数据，则存储所述数据，若所述数据为不重要数据，则不存储所述数据；所述信息感知层不存储所述数据；若所述数据为非实时性数据，信息感知层获取所述数据之后，对所述数据进行存储，并根据所述数据的重要性确定是否将所述数据上报到信息控制层，信息控制层根据所述数据的重要性确定是否上报到信息管理层进行存储；其中，若所述数据为重要数据，则上报到信息管理层进行存储，若所述数据为不重要数据，则不主动上报所述数据。
可选地，所述管理单元，包括：确定子单元，用于确定所述信息联网系统的信息感知层获取的数据所属的类别；其中，所述类别按照实时性要求和/或上层交互需求的重要性进行划分；管理子单元，用于基于所述数据所属的类别，按照设定方式对所述数据进行管理。
可选地，所述数据的类别，包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。
可选地，所述管理子单元基于所述数据所属的类别，按照设定方式对所述数据进行管理，包括：若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储，同时，信息控制层对所述数据进行存储，并存储第一预设时间；所述信息感知层不存储所述数据；若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据；若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据；若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间，所述信息感知层和信息管理层不存储所述数据。
本发明又一方面提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现前述任一所述方法的步骤。
根据本发明的技术方案，根据数据的实时性要求和/或上层交互需求的重要性对数据进行管理，采用了分布式的数据管理机制，根据不同的需求将数据分别储存在信息感知层(底层采集设备)、信息控制层(数据处理网关)，可以极大的减少数据储存压力，节约成本；同时，通过合理的数据分布，既保证了数据的实时获取，又能提高服务器数据获取速度，以及增强了数据的防丢失性能、可恢复性能。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明提供的信息联网系统的数据管理方法的一具体实施例的方法示意图；
图2示出了根据本发明一具体实施方式的数据分类示意图；
图3示出了分布式数据管理示意图；
图4示出了根据本发明一具体实施方式的信息联网系统架构示意图；
图5是本发明提供的信息联网系统的数据管理装置的一具体实施例的结构框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明提供一种信息联网系统的数据管理方法。所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述方法具体包括：根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
所述信息联网系统，包括能源系统(例如智慧园区能源系统、工厂能源管理系统或智慧楼宇能源系统)和/或工业互联网系统。所述信息联网系统包含信息感知层、信息控制层以及信息管理层。其中，信息感知层包括采集模块和/或监测模块；信息控制层包括数据处理网关、中央网关和/或智慧网关；信息管理层包括服务器、数据库等。所述信息联网系统包括信息感知层、信息控制层和信息管理层。所述信息联网系统的数据信息由信息感知层采集获取，传输到信息控制层处理(信息控制层根据获取的信息进行逻辑判断对相关设备进行调节控制)，再进一步上传至信息管理层实现人机交互。
在一种具体实施方式中，若所述数据为实时性数据，信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行存储，并将所述数据上报到信息管理层，信息管理层根据所述数据的重要性确定是否存储所述数据，其中，若所述数据为重要数据，则存储所述数据，若所述数据为不重要数据，则不存储所述数据；所述信息感知层不存储所述数据；若所述数据为非实时性数据，信息感知层获取所述数据之后，对所述数据进行存储，并根据所述数据的重要性确定是否将所述数据上报到信息控制层，信息控制层根据所述数据的重要性确定是否上报到信息管理层进行存储；其中，若所述数据为重要数据，则上报到信息管理层进行存储，若所述数据为不重要数据，则不主动上报所述数据。例如可以参考图3所示的分布式数据管理机制示意图。
优选地，根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理，包括：确定所述信息联网系统的信息感知层获取的数据所属的类别；基于所述数据所属的类别，按照设定方式对所述数据进行管理。
图1是本发明提供的信息联网系统的数据管理方法的一具体实施例的方法示意图。
如图1所示，根据本发明的一个实施例，所述信息联网系统的分布式数据管理方法至少包括步骤S110和步骤S120。
步骤S110，确定所述信息联网系统的信息感知层获取的数据所属的类别。
根据信息联网系统的数据需求，对数据进行分布式的管理、储存。将底层采集数据按照实时性要求和上层交互需求的重要性进行分类。具体地，所述类别按照实时性要求和/或上层交互需求的重要性进行划分。
在一种具体实施方式中，所述类别包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。对于不同类别的数据采用不同的处理方式和/或储存方式，从而实现进行数据的灵活性管理。
例如，图2示出了根据本发明一具体实施方式的数据分类示意图。参考图2所示，将底层(信息感知层)采集数据按照四象限分类，第一象限数据是重要实时性数据，第二象限数据是重要非实时性数据，第三象限数据是不重要非实时性数据，第四象限是不重要实时性数据；并将不同象限类别的数据采用不同的处理和储存方法，进行数据的灵活性管理。
步骤S120，基于所述数据所属的类别，按照设定的数据处理方式对所述数据进行处理。
具体地，对于非重要数据，存储至所述信息联网系统的信息感知层和/或信息控制层，当上层需要时再从所述信息感知层和/或信息控制层获取；对于重要数据，分布式备份存储至所述信息联网系统的各层级。
图3示出了分布式数据管理示意图。结合图3所示，在一种具体实施方式中，基于所述数据所属的类别，按照设定的数据处理方式对所述数据进行处理，具体可以包括如下方式：
若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行处理(信息控制层根据获取的信息进行逻辑判断对相关设备进行调节控制)并将所述数据实时上报到信息管理层进行数据存储及人机交互显示，同时，信息控制层对所述数据进行存储，并存储第一预设时间(例如可以为时长第一预设时间的周期)；所述信息感知层不存储所述数据。
若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据。即仅做上传处理不存储。
若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间(例如可以为时长第二预设时间的周期)，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据。例如，信息管理层需要时向所述信息控制层获取，信息控制层向所述信息感知层获取所述数据，而信息控制层需要时向所述信息感知层获取所述数据。
若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间(例如可以为时长第三预设时间的周期)，所述信息感知层和信息管理层不存储所述数据。
图4示出了根据本发明一具体实施方式的信息联网系统架构示意图。如图4所示，信息感知层，即通过各类传感器、采集模块、监测模块，将物理世界的物理量信号(例如包括电流、电压、功率、温度、湿度、质量中的至少之一)转化为二进制数字信号，其通过内部存储芯片或寄存器单元实现对数据的分类处理，采用储存芯片、保持寄存器或是临时变量等方式实现不同的数据存储时长，并通过各类现场总线规约实现与信息控制层通讯。在信息感知层，分布式数据管理机制以实时性作为数据处理的判断关键。例如，电流、电压、瞬时流速等实时性数据，采用实时刷新的方式，不保留、不备份；用电量、累计时间、累计流量等累计量非实时数据，采用备份可追溯可恢复的处理方式。
信息控制层，即通过各类网关模块运用各类现场总线规约从信息感知层获取数据，其对数据的获取方式是以帧为单位获取，每一帧数据都可表示一个或一个以上的物理量。在获取数据时便以帧为单位将数据进行筛选分类，分类依据为信息感知层设备的通讯规约以及上层显示要求。网关模块按照分布式数据管理机制对数据进行筛选、打包、分发及储存，对实时性数据快速转发给上层并将其储存，在信息传输丢失时可以依据上层反馈的丢失信息进行重发。重要非实时性数据做数据透传处理，非重要非实时性数据，依据上层下发的命令获取并上报。网关模块具体可以指在本信息联网系统架构中运用的一种类DDC模块，可以实现协议转换、数据计算存储、发出控制信号等功能的控制器，包含中央数据处理网关、智能网关以及边缘计算网关等。
信息管理层，包括服务器、数据库等硬件设施及其运行算法。在信息管理层，分布式数据管理机制以重要性作为数据处理的判断关键。将重要性数据存储入库，非重要性数据不做存储处理。在交互页面需要的数据会发起请求获取。通过信息控制层与信息管理层之间定制的通讯协议实现对数据的定义。
通过上述的数据分布式管理方式，将不重要的数据储存在底层的相关设备，需要时再进行获取，可以避免服务器、数据库对不重要数据的储存和处理，减少了上报数据量大小，减轻了服务器的建设成本，同时又不会导致不重要数据的丢失、缺失。
本发明还提供一种信息联网系统的数据管理装置。所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述装置，包括：数据管理单元，用于根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
所述信息联网系统，包括能源系统(例如智慧园区能源系统、工厂能源管理系统或智慧楼宇能源系统)和/或工业互联网系统。所述信息联网系统包含信息感知层、信息控制层以及信息管理层。其中，信息感知层包括采集模块和/或监测模块；信息控制层包括数据处理网关、中央网关和/或智慧网关；信息管理层包括服务器、数据库等。所述信息联网系统包括信息感知层、信息控制层和信息管理层。所述信息联网系统的数据信息由信息感知层采集获取，传输到信息控制层处理(信息控制层根据获取的信息进行逻辑判断对相关设备进行调节控制)，再进一步上传至信息管理层实现人机交互。
在一种具体实施方式中，所述数据管理单元根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理包括：若所述数据为实时性数据，信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行存储，并将所述数据上报到信息管理层，信息管理层根据所述数据的重要性确定是否存储所述数据，其中，若所述数据为重要数据，则存储所述数据，若所述数据为不重要数据，则不存储所述数据；所述信息感知层不存储所述数据；若所述数据为非实时性数据，信息感知层获取所述数据之后，对所述数据进行存储，并根据所述数据的重要性确定是否将所述数据上报到信息控制层，信息控制层根据所述数据的重要性确定是否上报到信息管理层进行存储；其中，若所述数据为重要数据，则上报到信息管理层进行存储，若所述数据为不重要数据，则不主动上报所述数据。例如可以参考图3所示的分布式数据管理机制示意图。
图5是本发明提供的信息联网系统的数据管理装置的一具体实施例的结构框图。如图5所示，所述数据管理装置包括数据管理单元100。所述数据管理单元包括确定子单元110和管理子单元120。
确定子单元110用于确定所述信息联网系统的信息感知层获取的数据所属的类别。
在一种具体实施方式中，所述类别包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。对于不同类别的数据采用不同的处理方式和/或储存方式，从而实现进行数据的灵活性管理。
例如，参考图2所示，将底层采集数据按照四象限分类，第一象限数据是重要实时性数据，第二象限数据是重要非实时性数据，第三象限数据是不重要非实时性数据，第四象限是不重要实时性数据；并将不同象限类别的数据采用不同的处理和储存方法，进行数据的灵活性管理。管理子单元120用于基于所述数据所属的类别，按照设定方式对所述数据进行管理。
具体地，对于非重要数据，存储至所述信息联网系统的信息感知层和/或信息控制层，当上层需要时再从所述信息感知层和/或信息控制层获取；对于重要数据，分布式备份存储至所述信息联网系统的各层级。
图3示出了分布式数据管理示意图。结合图3所示，在一种具体实施方式中，管理子单元基于所述数据所属的类别，按照设定的数据处理方式对所述数据进行处理，具体可以包括如下方式：
若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层对所述数据进行处理并将所述数据实时上报到信息管理层进行数据存储及人机交互显示，同时，信息控制层对所述数据进行存储，并存储第一预设时间(例如可以为时长第一预设时间的周期)；所述信息感知层不存储所述数据。
若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据。即仅做上传处理不存储。
若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间(例如可以为时长第二预设时间的周期)，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据。例如，信息管理层需要时向所述信息控制层获取，信息控制层向所述信息感知层获取所述数据，而信息控制层需要时向所述信息感知层获取所述数据。
若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间(例如可以为时长第三预设时间的周期)，所述信息感知层和信息管理层不存储所述数据。
图4示出了根据本发明一具体实施方式的信息联网系统架构示意图。如图4所示，信息感知层，即通过各类传感器、采集模块、监测模块，将物理世界的物理量信号(例如包括电流、电压、功率、温度、湿度、质量中的至少之一)转化为二进制数字信号，其通过内部存储芯片或寄存器单元实现对数据的分类处理，采用储存芯片、保持寄存器或是临时变量等方式实现不同的数据存储时长，并通过各类现场总线规约实现与信息控制层通讯。在信息感知层，分布式数据管理机制以实时性作为数据处理的判断关键。例如，电流、电压、瞬时流速等实时性数据，采用实时刷新的方式，不保留、不备份；用电量、累计时间、累计流量等累计量非实时数据，采用备份可追溯可恢复的处理方式。
信息控制层，即通过各类网关模块运用各类现场总线规约从信息感知层获取数据，其对数据的获取方式是以帧为单位获取，每一帧数据都可表示一个或一个以上的物理量。在获取数据时便以帧为单位将数据进行筛选分类，分类依据为信息感知层设备的通讯规约以及上层显示要求。网关模块按照分布式数据管理机制对数据进行筛选、打包、分发及储存，对实时性数据快速转发给上层并将其储存，在信息传输丢失时可以依据上层反馈的丢失信息进行重发。重要非实时性数据做数据透传处理，非重要非实时性数据，依据上层下发的命令获取并上报。网关模块具体可以指在本信息联网系统架构中运用的一种类DDC模块，可以实现协议转换、数据计算存储、发出控制信号等功能的控制器，包含中央数据处理网关、智能网关以及边缘计算网关等。
信息管理层，包括服务器、数据库等硬件设施及其运行算法。在信息管理层，分布式数据管理机制以重要性作为数据处理的判断关键。将重要性数据存储入库，非重要性数据不做存储处理。在交互页面需要的数据会发起请求获取。通过信息控制层与信息管理层之间定制的通讯协议实现对数据的定义。
通过上述的数据分布式管理方式，将不重要的数据储存在底层的相关设备，需要时再进行获取，可以避免服务器、数据库对不重要数据的储存和处理，减少了上报数据量大小，减轻了服务器的建设成本，同时又不会导致不重要数据的丢失、缺失。
对于有效数据、重要数据，通过在各层级分布式地备份储存，极大地加强了数据的防丢失性能和可恢复性能，在上报数据过程中可能因为通讯原因导致的数据丢失、丢包等问题都可通过分布式储存的数据备份进行恢复。不重要的数据在上层交互不需要使用时，在分布式数据管理机制下不会占用数据上报的资源，提高底层信息上传效率，提高服务器数据调用效率。信息感知层或信息控制层设备损坏更换时，能有效保障数据不丢失，可以从损坏设备的储存中导出数据转移到新设备。
本发明还提供对应于所述信息联网系统的数据管理方法的一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现前述任一所述方法的步骤。
据此，本发明提供的方案，根据数据的实时性要求和/或上层交互需求的重要性对数据进行管理，采用了分布式的数据管理机制，根据不同的需求将数据分别储存在信息感知层(底层采集设备)、信息控制层(数据处理网关)，可以极大的减少数据储存压力，节约成本；同时，通过合理的数据分布，既保证了数据的实时获取，又能提高服务器数据获取速度，以及增强了数据的防丢失性能、可恢复性能。
本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施，那么可将功能作为一或多个指令或代码存储于计算机可读媒体上或经由计算机可读媒体予以传输。其它实例及实施方案在本发明及所附权利要求书的范围及精神内。举例来说，归因于软件的性质，上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外，各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为控制装置的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对相关技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的权利要求范围之内。
Claims (9)
1.一种信息联网系统的数据管理方法，其特征在于，所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述方法，包括：
根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
2.根据权利要求1所述的方法，其特征在于，根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理，包括：
确定所述信息联网系统的信息感知层获取的数据所属的类别；其中，所述类别按照实时性要求和/或上层交互需求的重要性进行划分；
基于所述数据所属的类别，按照设定方式对所述数据进行管理。
3.根据权利要求2所述的方法，其特征在于，所述数据的类别，包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。
4.根据权利要求3所述的方法，其特征在于，基于所述数据所属的类别，按照设定方式对所述数据进行管理，包括：
若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储，同时，信息控制层对所述数据进行存储，并存储第一预设时间；所述信息感知层不存储所述数据；
若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据；
若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据；
若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间，所述信息感知层和信息管理层不存储所述数据。
5.一种信息联网系统的数据管理装置，其特征在于，所述信息联网系统包括：信息感知层、信息控制层和信息管理层，所述装置，包括：
管理单元，用于根据所述信息联网系统的信息感知层获取的数据的实时性要求和/或上层交互需求的重要性对所述数据进行管理。
6.根据权利要求5所述的装置，其特征在于，所述管理单元，包括：
确定子单元，用于确定所述信息联网系统的信息感知层获取的数据所属的类别；其中，所述类别按照实时性要求和/或上层交互需求的重要性进行划分；
管理子单元，用于基于所述数据所属的类别，按照设定方式对所述数据进行管理。
7.根据权利要求6所述的装置，其特征在于，所述数据的类别，包括：重要实时性数据、重要非实时性数据、不重要非实时性数据和不重要实时性数据。
8.根据权利要求7所述的装置，其特征在于，所述管理子单元基于所述数据所属的类别，按照设定方式对所述数据进行管理，包括：
若所述数据为重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储，同时，信息控制层对所述数据进行存储，并存储第一预设时间；所述信息感知层不存储所述数据；
若所述数据为重要非实时性数据，则信息感知层获取所述数据之后对所述数据进行存储，并将所述数据上报到信息控制层，信息控制层将所述数据上报到信息管理层进行数据存储及人机交互显示；所述信息控制层不存储所述数据；
若所述数据为不重要非实时性数据，则信息感知层获取所述数据之后进行存储，并存储第二预设时间，当信息管理层和/或信息控制层需要时再从所述信息感知层获取所述数据；
若所述数据为不重要实时性数据，则信息感知层获取所述数据之后，将所述数据实时上报到信息控制层，信息控制层将所述数据实时上报到信息管理层进行人机交互显示，信息控制层对所述数据进行存储备份，并存储第三预设时间，所述信息感知层和信息管理层不存储所述数据。
9.一种存储介质，其特征在于，其上存储有计算机程序，所述程序被处理器执行时实现权利要求1-4任一所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210248956.8A CN114640900B (zh) | 2022-03-14 | 2022-03-14 | 一种信息联网系统的数据管理方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210248956.8A CN114640900B (zh) | 2022-03-14 | 2022-03-14 | 一种信息联网系统的数据管理方法、装置及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114640900A true CN114640900A (zh) | 2022-06-17 |
| CN114640900B CN114640900B (zh) | 2024-05-24 |
Family
ID=81946980
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210248956.8A Active CN114640900B (zh) | 2022-03-14 | 2022-03-14 | 一种信息联网系统的数据管理方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114640900B (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102752322A (zh) * | 2011-04-18 | 2012-10-24 | 中国科学院声学研究所 | 一种物联网中分布式数据存储和查询的方法 |
| CN102932382A (zh) * | 2011-08-08 | 2013-02-13 | 中兴通讯股份有限公司 | 安全按需供给方法及系统、业务类型获取方法 |
| US20180367617A1 (en) * | 2015-12-24 | 2018-12-20 | Intel Corporation | System to monitor and control sensor devices |
| CN111107144A (zh) * | 2019-12-17 | 2020-05-05 | 南京曦光信息科技有限公司 | 一种基于边缘计算的综合传感网测试平台 |
| CN111145896A (zh) * | 2020-03-04 | 2020-05-12 | 大连理工大学 | 一种分布式的5g医疗物联网健康监测方法 |
| CN112165511A (zh) * | 2020-09-07 | 2021-01-01 | 天地（常州）自动化股份有限公司 | 煤矿监控系统、方法及计算机存储介质 |
| CN112202840A (zh) * | 2020-09-07 | 2021-01-08 | 天地（常州）自动化股份有限公司 | 基于边缘计算模式的煤矿火灾报警系统、方法及存储介质 |
| CN112887917A (zh) * | 2020-11-27 | 2021-06-01 | 清研讯科（北京）科技有限公司 | 监控数据的处理系统及方法 |
-
2022
- 2022-03-14 CN CN202210248956.8A patent/CN114640900B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102752322A (zh) * | 2011-04-18 | 2012-10-24 | 中国科学院声学研究所 | 一种物联网中分布式数据存储和查询的方法 |
| CN102932382A (zh) * | 2011-08-08 | 2013-02-13 | 中兴通讯股份有限公司 | 安全按需供给方法及系统、业务类型获取方法 |
| US20180367617A1 (en) * | 2015-12-24 | 2018-12-20 | Intel Corporation | System to monitor and control sensor devices |
| CN111107144A (zh) * | 2019-12-17 | 2020-05-05 | 南京曦光信息科技有限公司 | 一种基于边缘计算的综合传感网测试平台 |
| CN111145896A (zh) * | 2020-03-04 | 2020-05-12 | 大连理工大学 | 一种分布式的5g医疗物联网健康监测方法 |
| CN112165511A (zh) * | 2020-09-07 | 2021-01-01 | 天地（常州）自动化股份有限公司 | 煤矿监控系统、方法及计算机存储介质 |
| CN112202840A (zh) * | 2020-09-07 | 2021-01-08 | 天地（常州）自动化股份有限公司 | 基于边缘计算模式的煤矿火灾报警系统、方法及存储介质 |
| CN112887917A (zh) * | 2020-11-27 | 2021-06-01 | 清研讯科（北京）科技有限公司 | 监控数据的处理系统及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114640900B (zh) | 2024-05-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104639374B (zh) | 一种应用程序部署管理系统 | |
| CN102231850B (zh) | 一种数字电视终端管理系统及方法 | |
| CN104966006A (zh) | 基于云变平台的智能人脸识别系统 | |
| CN109547240B (zh) | 基于边缘计算的智能设备以及接入与设备的解析方法 | |
| CN109391647B (zh) | 存储资源回收方法、装置及系统 | |
| CN103312544A (zh) | 一种控制终端上报日志文件的方法、设备和系统 | |
| CN108763026A (zh) | 一种磁盘监控告警方法、系统、设备及计算机存储介质 | |
| CN107065813A (zh) | 一种车间设备数据监控系统及方法 | |
| CN106383668A (zh) | 一种信息存储方法、存储管理设备及客户端 | |
| CN102591594B (zh) | 一种数据的处理方法和设备 | |
| JP2023530996A (ja) | クラスタの容量縮小・拡張方法及びシステム、容量縮小・拡張制御端末、及び媒体 | |
| CN102082677B (zh) | 一种告警信息处理方法和装置及系统 | |
| CN208046653U (zh) | 一种电力监控系统网络安全监测主站平台系统 | |
| CN104836679B (zh) | 通信异常处理方法及网元设备 | |
| CN104734895A (zh) | 业务监控系统及业务监控方法 | |
| CN114640900A (zh) | 一种信息联网系统的数据管理方法、装置及存储介质 | |
| CN102655480B (zh) | 相似邮件处理系统和方法 | |
| CN104866410B (zh) | 一种基于iec 61850的状态监测日志存储及访问方法 | |
| CN111698120B (zh) | 存储节点隔离方法和装置 | |
| CN116805940A (zh) | 基于可扩展边缘计算的数据采集系统及方法 | |
| CN108011785A (zh) | 一种基于云政务自助终端开机率计算方法 | |
| CN115081679A (zh) | 基于cdc的工业数据动态变化自动感知处理系统 | |
| CN103870499A (zh) | 输电网的隐患信息处理方法和装置 | |
| CN102238022A (zh) | 一种网络管理系统及数据采集方法 | |
| CN207283172U (zh) | 无功补偿控制组网系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |