CN112749158A - 能源系统数据处理方法和装置 - Google Patents
能源系统数据处理方法和装置 Download PDFInfo
- Publication number
- CN112749158A CN112749158A CN201911048064.8A CN201911048064A CN112749158A CN 112749158 A CN112749158 A CN 112749158A CN 201911048064 A CN201911048064 A CN 201911048064A CN 112749158 A CN112749158 A CN 112749158A
- Authority
- CN
- China
- Prior art keywords
- data
- target
- target data
- source
- standardized
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000006243 chemical reaction Methods 0.000 claims abstract description 70
- 238000012545 processing Methods 0.000 claims abstract description 46
- 238000000034 method Methods 0.000 claims abstract description 38
- 238000003860 storage Methods 0.000 claims description 17
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 5
- 230000000694 effects Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 12
- 238000004590 computer program Methods 0.000 description 10
- 238000010606 normalization Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000005265 energy consumption Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000004134 energy conservation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2291—User-Defined Types; Storage management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Human Resources & Organizations (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- Public Health (AREA)
- Water Supply & Treatment (AREA)
- Computer Networks & Wireless Communication (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种能源系统数据处理方法和装置。该方法包括:获取能源系统接收的目标数据,目标数据中携带有数据标识;根据目标数据的数据标识,确定目标数据的数据结构及数据来源;通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。通过本发明,达到了提高智慧能源系统的数据处理效率的效果。
Description
技术领域
本发明涉及数据领域,具体而言,涉及一种能源系统数据处理方法和装置。
背景技术
智慧能源系统(简称:能源系统)是利用物联网大数据技术,将建筑能源消耗、设备运行状态、室内空气品质等数据结合一体构成的信息管理平台。而平台的最基础的任务之一就是接入设备数据,能否接入多种数据来源和对不同数据的处理能力决定了平台的适用范围。
相关技术中,在需要处理多种数据来源时,需要人工将数据进行标准化处理后才能接入智慧能源系统来使用,数据处理效率低。
针对相关技术中智慧能源系统数据处理效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明的主要目的在于提供一种能源系统数据处理方法和装置,以解决智慧能源系统数据处理效率低的问题。
为了实现上述目的,根据本发明的一个方面,提供了一种能源系统数据处理方法,该方法包括:获取所述能源系统接收的目标数据,所述目标数据中携带有数据标识;根据所述目标数据的数据标识,确定所述目标数据的数据结构及数据来源;通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
进一步地,所述数据标识包括类型标识,根据所述目标数据的数据标识,确定所述目标数据的数据结构,包括:根据所述类型标识,确定所述目标数据对应的数据类型;根据所述数据类型,确定所述目标数据的数据结构;和/或,所述数据标识包括来源标识,根据所述目标数据的数据标识,确定所述目标数据的数据来源,包括:根据所述来源标识,确定所述目标数据的数据来源;和/或,当与同一数据来源预先约定多个数据结构转换协议,且每个数据结构转换协议分别用于对不同结构的数据进行标准化处理时,所述通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:根据所述目标数据的数据结构,从所述多个数据结构转换协议中确定用于对所述目标数据的数据结构进行标准化处理的目标数据结构转换协议;通过所述目标数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据。
进一步地,所述数据类型包括以下至少一种:设备数据、点位数据和实时数据;和/或,所述数据来源包括以下至少一种:Mqtt数据、BA系统数据、Sql数据。
进一步地,在所述目标数据的数据来源为Mqtt数据的情况下,通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据包括:从Mqtt服务器中拉取Mqtt数据,所述Mqtt数据由硬件设备发送至所述Mqtt服务器;通过Mqtt解析器中的数据结构转换协议对拉取的所述Mqtt数据进行标准化处理,得到所述标准化结构的数据,所述Mqtt解析器中预先配置有相应的数据结构转换协议。
进一步地,在所述目标数据的数据来源为BA系统的情况下,所述获取所述能源系统接收的目标数据包括:判断所述能源系统连接的所述BA系统是否支持nHayStack数据传输协议;如果判断结果为是,则在所述BA系统中安装并启动nHayStack驱动包;通过nHayStack解析器调用驱动包中的预设Api接口获取所述BA系统中的数据,得到所述目标数据;和/或,通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:通过nHayStack解析器中的数据结构转换协议对所述目标数据进行标准化处理,得到所述标准化结构的数据,所述nHayStack解析器中预先配置有相应的数据结构转换协议。
进一步地,在所述目标数据的数据来源为Sql数据的情况下,通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:通过Sql解析器从Sql数据库中获取Sql数据,得到目标数据;通过所述Sql解析器中的数据结构转换协议对所述目标数据进行标准化处理,得到所述标准化结构的数据,所述Sql解析器中预先配置有相应的数据结构转换协议。
进一步地,同一数据类型的数据,对应的标准化结构的数据的数据结构相同;和/或,当所述数据类型为设备数据时,所述标准化结构的数据的数据结构至少包括:设备ID、设备名称、设备类型、设备描述、设备采购时间、设备位置、设备标识标签和设备财产标签中的至少两种;和/或,所述数据类型为点位数据时,所述标准化结构的数据的数据结构至少包括:点位ID、点位名称、点位类型、点位描述、点位属性、虚拟点位ID和物理点位ID中的至少两种;和/或,所述数据类型为实时数据时,所述标准化结构的数据的数据结构至少包括:设备ID、时间戳、版本号、点位、对象ID、实时数据的名称、实时数据的数值中的至少两种。
为了实现上述目的,根据本发明的另一方面,还提供了一种能源系统数据处理装置,该装置包括:获取单元,用于获取所述能源系统接收的目标数据,所述目标数据中携带有数据标识;确定单元,用于根据所述目标数据的数据标识,确定所述目标数据的数据结构及数据来源;处理单元,用于通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
为了实现上述目的,根据本发明的另一方面,还提供了一种存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行本发明所述的能源系统数据处理方法。
为了实现上述目的,根据本发明的另一方面,还提供了一种设备至少包括一个处理器,以及与所述处理器连接的至少一个存储器、总线,其中,所述处理器、所述存储器通过所述总线完成相互间的通信,所述处理器用于调用所述存储器中的程序指令,以执行本发明所述的能源系统数据处理方法。
本发明通过获取能源系统接收的目标数据,目标数据中携带有数据标识;根据目标数据的数据标识,确定目标数据的数据结构及数据来源;通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议,解决了智慧能源系统数据处理效率低的问题,进而达到了提高智慧能源系统的数据处理效率的效果。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的能源系统数据处理方法的流程图;
图2是根据本发明实施例的数据处理过程的示意图;
图3是根据本发明实施例的能源系统数据处理装置的示意图;以及
图4是根据本发明实施例的设备框图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供了一种能源系统数据处理方法。
图1是根据本发明实施例的能源系统数据处理方法的流程图,如图1所示,该方法包括以下步骤:
步骤S102:获取能源系统接收的目标数据,目标数据中携带有数据标识;
步骤S104:根据目标数据的数据标识,确定目标数据的数据结构及数据来源;
步骤S106:通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
该实施例通过获取能源系统接收的目标数据,目标数据中携带有数据标识;根据目标数据的数据标识,确定目标数据的数据结构及数据来源;通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议,解决了智慧能源系统数据处理效率低的问题,进而达到了提高智慧能源系统的数据处理效率的效果。
本发明实施例的技术方案可以作为一种智慧能源系统中多种数据接入的标准化处理方法,智慧能源系统将建筑的能源消耗、设备运行状态、室内空气品质等数据结合一体的信息管理平台,平台所接入的设备数据是多种来源的,不同来源的数据由于数据传输协议不同,因此数据类型和格式不同,因此来自不同来源的数据是无法直接使用的,需要进行数据标准化处理,在获取到能源系统接收的目标数据的时候,由于目标数据中携带有数据标识,因此可以通过数据标识判断当前获取到的数据的数据结构和数据来源,由于不用数据来源预先已经和能源系统约定好了对应于不同数据结构的数据结构转换协议,因此可以根据数据结构和对目标数据进行标准化处理,这样,可以得到标准化结构的数据,同一个数据来源里,对于不同的数据结构,具有不同的数据结构转换协议,不同数据来源转换后的标准化结构的数据的数据结构都是相同的,这样,后续能源系统在使用数据时,无需再次处理,也无需关注数据来源,可以通过标准化结构的数据对能源系统的节能进行控制,例如优化能源使用方向,或者查看能源配置情况等,因而可以提高智慧能源系统的数据处理效率。
可选地,数据标识包括类型标识,根据目标数据的数据标识,确定目标数据的数据结构可以是根据类型标识确定目标数据对应的数据类型;根据数据类型,确定目标数据的数据结构,数据标识包括来源标识,根据目标数据的数据标识,确定目标数据的数据来源,可以是根据来源标识,确定目标数据的数据来源。同一类型对应的数据结构相同,由于不同类型的数据所包含的信息项目不同,因此不同类型对应的数据结构不同。
一个数据来源如果会产生多种数据结构的数据,则可以与同一数据来源预先约定多个数据结构转换协议,且每个数据结构转换协议分别用于对不同结构的数据进行标准化处理,这种情况下,通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据可以是:根据目标数据的数据结构,从多个数据结构转换协议中确定用于对目标数据的数据结构进行标准化处理的目标数据结构转换协议,通过目标数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据。
可选地,数据类型包括以下至少一种:设备数据、点位数据和实时数据;数据来源包括以下至少一种:Mqtt数据、BA系统数据、Sql数据。
消息队列遥测传输协议数据,Message Queuing Telemetry Transport(简称为Mqtt)数据,是一种基于发布/订阅(publish/subscribe)模式的"轻量级"通讯协议,该协议构建于TCP/IP协议上,MQTT最大优点在于,可以以极少的代码和有限的带宽,为连接远程设备提供实时可靠的消息服务,作为一种低开销、低带宽占用的即时通讯协议,在物联网、小型设备、移动应用等方面有较广泛的应用。
BA系统数据,楼宇设备自控(Building Automation,简称BA)系统,主要包括建筑物的变配电设备、应急备用电源设备、给排水设备、空调设备、通风设备等。本实施例中的BA系统数据可以是第三方BA系统数据,例如在楼宇接入智能楼控系统之前,已经具有的一些第三方的智能控制设备等,这些设备产生的数据可以作为第三方BA系统数据接入本申请的智能楼控系统来使用。
结构化查询语言数据库的数据,Structured Query Language(简称为Sql)数据库的数据,是一种特殊目的的编程语言,是一种数据库查询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统。
需要说明的是,本实施例中,标准化处理过程可以在解析器中完成,也可以是从三种数据来源中接收到目标数据后,在解析器之外配置标准化处理来完成标准化处理过程,解析器只是识别标准化处理的结果。
可选地,Mqtt数据是直接来自于硬件的数据,与硬件厂商之间协定好数据传输结构后,硬件设备按照标准格式向Mqtt服务器发送数据,系统从Mqtt服务器拉取数据后进行解析,在目标数据的数据来源为Mqtt数据的情况下,通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据包括:从Mqtt服务器中拉取Mqtt数据,Mqtt数据由硬件设备发送至Mqtt服务器;通过Mqtt解析器中的数据结构转换协议对拉取的Mqtt数据进行标准化处理,得到标准化结构的数据,Mqtt解析器中预先配置有相应的数据结构转换协议。
可选地,在目标数据的数据来源为BA系统的情况下,获取能源系统接收的目标数据包括以下步骤:判断能源系统连接的BA系统是否支持nHayStack数据传输协议;如果判断结果为是,则在BA系统中安装并启动nHayStack驱动包;通过nHayStack解析器调用驱动包中的预设Api接口获取BA系统中的数据,得到目标数据。
通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据包括:通过nHayStack解析器中的数据结构转换协议对目标数据进行标准化处理,得到标准化结构的数据,其中,nHayStack解析器中预先配置有相应的数据结构转换协议。
如果能源系统连接的BA系统支持nHaystack协议数据传输,只需在BA系统中安装、启动nHayStack的驱动包,系统中的nHayStack解析器调用驱动包中的api接口获取设备数据;如果连接的BA系统不支持nHaystack协议,可以部署系统提供的BA系统来直接对接硬件,然后通过nHaystack协议方式对接BA系统来获取并解析设备数据,这样可以保证对接各种BA系统。
可选地,在目标数据的数据来源为Sql数据的情况下,通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,可以是:通过Sql解析器从Sql数据库中获取Sql数据,得到目标数据;通过Sql解析器中的数据结构转换协议对目标数据进行标准化处理,得到标准化结构的数据,Sql解析器中预先配置有相应的数据结构转换协议。
针对Sql数据,配置Sql解析器来对目标数据进行标准化处理,解析器中预先配置有对应的数据结构转换协议。
可选地,不同数据来源中的同一数据类型的数据,对应的标准化结构的数据的数据结构相同。
当数据类型为设备数据时,标准化结构的数据的数据结构至少包括:设备ID、设备名称、设备类型、设备描述、设备采购时间、设备位置、设备标识标签和设备财产标签中的至少两种。
数据类型为点位数据时,标准化结构的数据的数据结构至少包括:点位ID、点位名称、点位类型、点位描述、点位属性、虚拟点位ID和物理点位ID中的至少两种。
数据类型为实时数据时,标准化结构的数据的数据结构至少包括:设备ID、时间戳、版本号、点位、对象ID、实时数据的名称、实时数据的数值中的至少两种。
不同的数据结构的顺序可以根据具体使用的应用场景更改调换。
本发明实施例还提供了一种优选方案,下面结合该优选方案对本申请的技术方案进行说明。
本实施例主要阐述mqtt协议数据接入、第三方BA系统数据接入、SQL数据库接入三种数据接入方式及接入数据的标准化处理方法。
图2是根据本发明实施例的数据处理过程的示意图,如图2所示,数据接入方式包括:Mqtt数据接入、第三方BA系统数据接入和Sql数据库接入。
Mqtt数据接入:该种方式主要直接对接硬件,与硬件厂商之间协定好数据传输结构,硬件设备按照标准格式向mqtt服务器发送数据,系统从mqtt服务器拉取数据后进行解析。
第三方BA系统数据接入:如果第三方BA系统支持nHaystack协议数据传输,只需在第三方BA系统中安装、启动nHayStack的驱动包,系统中的nHayStack解析器调用驱动包中的api接口获取设备数据;如果第三方BA系统不支持nHaystack协议,可以部署系统提供的支持nHaystack协议的通用BA系统来直接对接硬件,然后通过nHaystack协议方式对接通用BA系统来获取并解析设备数据,这样可以保证对接各种BA系统。
Sql数据库接入:还有一种特殊情况,已有的第三方系统采用私有协议与硬件设备对接,且自身不对外提供数据接口,但可以开放数据库查询权限,这种情况可以采用直连sql数据库的方式接入数据。由于要面对的数据库可能是多个,所以sql解析器程序要可以根据配置动态切换数据来源,实现多数据来源数据采集。
数据的标准化处理:
多种接入方式接收上来的数据格式千差万别,需要再各自的解析器中做标准化处理,使各解析器出来的数据具有统一的结构,后续的服务和应用无需关注数据来源。
本实施例中,处理后的数据结构可以按照如下顺序:
设备数据结构为:设备ID、设备名称、设备类型、设备描述、设备采购时间、设备位置、设备标识标签和设备财产标签等,其中的某一项或几项可以缺失或者使用默认值来填充。
点位数据结构为:点位ID、点位名称、点位类型、点位描述、点位属性、虚拟点位ID和物理点位ID等。
实时数据结构为:设备ID、时间戳、版本号、点位、对象ID、实时数据的名称、实时数据的数值等。
经过处理后的数据结构按照上述顺序排列,这样后续使用这些数据的设备无需关注数据来源,直接使用数据即可,方便快捷。
经过处理的数据结构可以如下:
设备数据结构:
点位数据结构:
实时数据结构:
本实施例的技术方案可以快速对接新项目、改造项目、正在使用的项目中的设备数据,为智慧能源系统优化设备控制逻辑、降低能源消耗提供数据支持。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本发明实施例提供了一种能源系统数据处理装置,该装置可以用于执行本发明实施例的能源系统数据处理方法。
图3是根据本发明实施例的能源系统数据处理装置的示意图,如图3所示,该装置包括:
获取单元10,用于获取能源系统接收的目标数据,目标数据中携带有数据标识;
判断单元20,用于根据目标数据的数据标识,确定目标数据的数据结构及数据来源;
处理单元30,用于通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
该实施例采用获取单元10,用于获取能源系统接收的目标数据,目标数据中携带有数据标识,判断单元20,用于根据目标数据的数据标识,确定目标数据的数据结构及数据来源;处理单元30,用于通过与数据来源预先约定的数据结构转换协议对目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议,从而解决了智慧能源系统数据处理效率低的问题,进而达到了提高智慧能源系统的数据处理效率的效果。
所述能源系统数据处理装置包括处理器和存储器,上述获取单元、处理单元等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来提高智慧能源系统的数据处理效率。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本发明实施例提供了一种存储介质,其上存储有程序,该程序被处理器执行时实现所述能源系统数据处理方法。
本发明实施例提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行所述能源系统数据处理方法。
本发明实施例提供了一种设备,如图4所示,本发明实施例提供了一种设备,设备包括至少一个处理器、以及与处理器连接的至少一个存储器、总线;其中,处理器、存储器通过总线完成相互间的通信;处理器用于调用存储器中的程序指令,以执行上述的能源系统数据处理方法。本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:获取所述能源系统接收的目标数据,所述目标数据中携带有数据标识;根据所述目标数据的数据标识,确定所述目标数据的数据结构及数据来源;通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种能源系统数据处理方法,其特征在于,包括:
获取所述能源系统接收的目标数据,所述目标数据中携带有数据标识;
根据所述目标数据的数据标识,确定所述目标数据的数据结构及数据来源;
通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
2.根据权利要求1所述的方法,其特征在于,所述数据标识包括类型标识,根据所述目标数据的数据标识,确定所述目标数据的数据结构,包括:
根据所述类型标识,确定所述目标数据对应的数据类型;
根据所述数据类型,确定所述目标数据的数据结构;和/或,
所述数据标识包括来源标识,根据所述目标数据的数据标识,确定所述目标数据的数据来源,包括:
根据所述来源标识,确定所述目标数据的数据来源;和/或,
当与同一数据来源预先约定多个数据结构转换协议,且每个数据结构转换协议分别用于对不同结构的数据进行标准化处理时,所述通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:
根据所述目标数据的数据结构,从所述多个数据结构转换协议中确定用于对所述目标数据的数据结构进行标准化处理的目标数据结构转换协议;
通过所述目标数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据。
3.根据权利要求2所述的方法,其特征在于:
所述数据类型包括以下至少一种:设备数据、点位数据和实时数据;和/或,
所述数据来源包括以下至少一种:Mqtt数据、BA系统数据、Sql数据。
4.根据权利要求3所述的方法,其特征在于,在所述目标数据的数据来源为Mqtt数据的情况下,通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据包括:
从Mqtt服务器中拉取Mqtt数据,所述Mqtt数据由硬件设备发送至所述Mqtt服务器;
通过Mqtt解析器中的数据结构转换协议对拉取的所述Mqtt数据进行标准化处理,得到所述标准化结构的数据,所述Mqtt解析器中预先配置有相应的数据结构转换协议。
5.根据权利要求3所述的方法,其特征在于,在所述目标数据的数据来源为BA系统的情况下,所述获取所述能源系统接收的目标数据包括:
判断所述能源系统连接的所述BA系统是否支持nHayStack数据传输协议;
如果判断结果为是,则在所述BA系统中安装并启动nHayStack驱动包;
通过nHayStack解析器调用驱动包中的预设Api接口获取所述BA系统中的数据,得到所述目标数据;和/或,
通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:
通过nHayStack解析器中的数据结构转换协议对所述目标数据进行标准化处理,得到所述标准化结构的数据,所述nHayStack解析器中预先配置有相应的数据结构转换协议。
6.根据权利要求3所述的方法,其特征在于,在所述目标数据的数据来源为Sql数据的情况下,通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,包括:
通过Sql解析器从Sql数据库中获取Sql数据,得到目标数据;
通过所述Sql解析器中的数据结构转换协议对所述目标数据进行标准化处理,得到所述标准化结构的数据,所述Sql解析器中预先配置有相应的数据结构转换协议。
7.根据权利要求3所述的方法,其特征在于:
同一数据类型的数据,对应的标准化结构的数据的数据结构相同;和/或,
当所述数据类型为设备数据时,所述标准化结构的数据的数据结构至少包括:
设备ID、设备名称、设备类型、设备描述、设备采购时间、设备位置、设备标识标签和设备财产标签中的至少两种;和/或,
所述数据类型为点位数据时,所述标准化结构的数据的数据结构至少包括:
点位ID、点位名称、点位类型、点位描述、点位属性、虚拟点位ID和物理点位ID中的至少两种;和/或,
所述数据类型为实时数据时,所述标准化结构的数据的数据结构至少包括:
设备ID、时间戳、版本号、点位、对象ID、实时数据的名称、实时数据的数值中的至少两种。
8.一种能源系统数据处理装置,其特征在于,包括:
获取单元,用于获取所述能源系统接收的目标数据,所述目标数据中携带有数据标识;
确定单元,用于根据所述目标数据的数据标识,确定所述目标数据的数据结构及数据来源;
处理单元,用于通过与所述数据来源预先约定的数据结构转换协议对所述目标数据的数据结构进行标准化处理,得到标准化结构的数据,其中,与同一数据来源至少预先约定一个数据结构转换协议。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至7中任意一项所述的能源系统数据处理方法。
10.一种设备,其特征在于,所述设备至少包括一个处理器,以及与所述处理器连接的至少一个存储器、总线,其中,所述处理器、所述存储器通过所述总线完成相互间的通信,所述处理器用于调用所述存储器中的程序指令,以执行权利要求1至7中任意一项所述的能源系统数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911048064.8A CN112749158A (zh) | 2019-10-30 | 2019-10-30 | 能源系统数据处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911048064.8A CN112749158A (zh) | 2019-10-30 | 2019-10-30 | 能源系统数据处理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112749158A true CN112749158A (zh) | 2021-05-04 |
Family
ID=75641477
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911048064.8A Pending CN112749158A (zh) | 2019-10-30 | 2019-10-30 | 能源系统数据处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112749158A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114095584A (zh) * | 2021-11-29 | 2022-02-25 | 重庆忽米网络科技有限公司 | 工业设备数据的模型转换与构建方法及可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106407380A (zh) * | 2016-09-13 | 2017-02-15 | 国家电网公司 | 一种基于数据源的大数据采集方法 |
CN106603565A (zh) * | 2016-12-30 | 2017-04-26 | 上海浦东软件园汇智软件发展有限公司 | 一种数据传输、显示的方法及设备 |
US20180129699A1 (en) * | 2016-11-09 | 2018-05-10 | Ab Initio Technology Llc | Systems and methods for determining relationships among data elements |
CN110263024A (zh) * | 2019-05-20 | 2019-09-20 | 平安普惠企业管理有限公司 | 数据处理方法、终端设备及计算机存储介质 |
-
2019
- 2019-10-30 CN CN201911048064.8A patent/CN112749158A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106407380A (zh) * | 2016-09-13 | 2017-02-15 | 国家电网公司 | 一种基于数据源的大数据采集方法 |
US20180129699A1 (en) * | 2016-11-09 | 2018-05-10 | Ab Initio Technology Llc | Systems and methods for determining relationships among data elements |
CN106603565A (zh) * | 2016-12-30 | 2017-04-26 | 上海浦东软件园汇智软件发展有限公司 | 一种数据传输、显示的方法及设备 |
CN110263024A (zh) * | 2019-05-20 | 2019-09-20 | 平安普惠企业管理有限公司 | 数据处理方法、终端设备及计算机存储介质 |
Non-Patent Citations (1)
Title |
---|
B. SCOTT MUENCH: ""An Introduction to Haystack for Facility Managers (Part 1)"", Retrieved from the Internet <URL:https://www.j2inn.com/blog/an-introduction-to-haystack-for-facility-managers-part-1> * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114095584A (zh) * | 2021-11-29 | 2022-02-25 | 重庆忽米网络科技有限公司 | 工业设备数据的模型转换与构建方法及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10241839B2 (en) | Method and system for generating a virtual device resource accessible by an application | |
CN112491604B (zh) | 物联网设备的远程管理实现方法、装置及系统 | |
CN112087423A (zh) | 用于终端设备云边协同管理的方法、装置和系统 | |
CN109582547A (zh) | 电子装置、监控数据告警方法及存储介质 | |
CN111666145A (zh) | 消息队列的消息处理方法、系统和计算机设备 | |
CN109639598A (zh) | 基于微服务的请求处理方法、服务器、存储介质及装置 | |
CN110798462B (zh) | 一种智慧家居系统及设备接入方法 | |
CN114690723A (zh) | 异构系统的设备控制方法、装置、服务器及存储介质 | |
CN112749158A (zh) | 能源系统数据处理方法和装置 | |
CN114025027A (zh) | 数据传输脚本的运行方法、装置、存储介质和电子装置 | |
CN107948005B (zh) | 物联网协议的更新方法及装置 | |
CN113765777A (zh) | 设备控制方法、消息中转方法、设备、可读介质和物联网 | |
CN112799908A (zh) | 基于边缘计算的智能终端安全监控方法、设备和介质 | |
CN105324728A (zh) | 用于监控自动化工厂的工业控制系统 | |
CN113791766B (zh) | 组合数据接口的方法、电子设备和可读存储介质 | |
CN102904739A (zh) | 一种实现事件转发的方法及通用信息模型cim服务器 | |
CN115314518A (zh) | 物联网管理方法、系统及计算机可读存储介质 | |
CN115733894A (zh) | 一种电力系统多协议数据接入管理方法、装置及设备 | |
CN110875945A (zh) | 用于在通用服务实体上进行任务处理的方法、装置和介质 | |
CN115374086A (zh) | 一种基于消息队列的数据迁移方法、装置、设备及介质 | |
EP3910911B1 (en) | Method for service decision distribution among multiple terminal devices and system | |
CN113627862A (zh) | 一种基于一本账的甲供物资的全过程管理方法和装置 | |
CN114443293A (zh) | 一种大数据平台的部署系统及方法 | |
CN112860292A (zh) | 一种基于应用的配置管理方法及装置 | |
US10291424B1 (en) | Device representation management using representation types |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |