CN105701738A - 一种区域建筑能耗平台数据采集处理方法及装置 - Google Patents

一种区域建筑能耗平台数据采集处理方法及装置 Download PDF

Info

Publication number
CN105701738A
CN105701738A CN201610192294.1A CN201610192294A CN105701738A CN 105701738 A CN105701738 A CN 105701738A CN 201610192294 A CN201610192294 A CN 201610192294A CN 105701738 A CN105701738 A CN 105701738A
Authority
CN
China
Prior art keywords
data
energy consumption
building energy
data acquisition
queue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610192294.1A
Other languages
English (en)
Inventor
王兴荣
曹文龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Siic-Longchuang Smarter Energy Technology Co Ltd
Original Assignee
Shanghai Siic-Longchuang Smarter Energy Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Siic-Longchuang Smarter Energy Technology Co Ltd filed Critical Shanghai Siic-Longchuang Smarter Energy Technology Co Ltd
Priority to CN201610192294.1A priority Critical patent/CN105701738A/zh
Publication of CN105701738A publication Critical patent/CN105701738A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/08—Construction

Landscapes

  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Storage Device Security (AREA)

Abstract

本发明涉及一种区域建筑能耗平台数据采集处理方法，该方法包括彼此独立的数据采集过程和数据处理过程；所述的数据采集过程具体包括以下步骤：S11，采集一条建筑能耗数据；S12，将建筑能耗数据存放至待处理数据队列，并返回步骤S 11；所述的数据处理过程具体包括以下步骤：S21，判断待处理数据队列中是否有待处理数据，若是，则进入步骤S22，若否，则在设定时长后返回本步骤起点；S22，从待处理数据队列中读取一条建筑能耗数据进行处理，并判断待处理数据队列中是否有待处理数据，若是，则返回本步骤起点，若否，则进入步骤S23；S23，将处理完成的数据写入建筑能耗数据库文件中，并返回步骤S21。与现有技术相比，本发明具有运行顺畅、速度快的优点。

Description

一种区域建筑能耗平台数据采集处理方法及装置
技术领域
本发明涉及一种数据采集处理方法及装置，尤其是涉及一种区域建筑能耗平台数据采集处理方法及装置。
背景技术
随着办公建筑和公共建筑的大型化，建筑内部能源消耗设备的管理需要一个自动管理平台来实现，作为整体节能解决方案的重要组成部分，区域建筑能效管理平台能够提供完整的能量数据监测、设备运行监测、能耗预测和报警以及能源管理策略管理以及优化功能，在区域建筑能耗监测平台中，建筑能耗采集和处理是一项重要的技术之一。由于是平台级的应用，上百栋甚至上千栋的建筑能耗数据汇总到平台，瞬时上传数据量会非常多，传统的处理方式是上传一条数据同步处理一条数据，一旦上传的速度大于数据处理速度，能耗数据处理就会发生堵塞，造成系统无法正常相应采集器的数据上传请求，严重的时候甚至会造成系统崩溃。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种系统运行顺畅、速度快的区域建筑能耗平台数据采集处理方法及装置。
本发明的目的可以通过以下技术方案来实现：
一种区域建筑能耗平台数据采集处理方法，其特征在于，该方法包括彼此独立的数据采集过程和数据处理过程；
所述的数据采集过程具体包括以下步骤：
S11，采集一条建筑能耗数据；
S12，将建筑能耗数据存放至待处理数据队列，并返回步骤S11；
所述的数据处理过程具体包括以下步骤：
S21，判断待处理数据队列中是否有待处理数据，若是，则进入步骤S22，若否，则在设定时长后返回本步骤起点；
S22，从待处理数据队列中读取一条建筑能耗数据进行处理，并判断待处理数据队列中是否有待处理数据，若是，则返回本步骤起点，若否，则进入步骤S23；
S23，将处理完成的数据写入建筑能耗数据库文件中，并返回步骤S21。
所述的步骤S11具体包括以下步骤：
S111，采集一条建筑能耗原始数据，所述的建筑能耗原始数据为加密过的数据；
S112，对建筑能耗原始数据进行解密、解析，获得相应的建筑能耗数据。
所述的建筑能耗数据中包含建筑归属信息，即建筑的编码或编号，所述的待处理数据队列设置多个，且与所述的建筑归属信息一一对应，步骤S12中，根据建筑归属信息将建筑能耗数据存放至相应的待处理数据队列。
所述的步骤S22中，对建筑能耗数据的处理包括数据校验和数据修补。
一种实现所述的数据采集处理方法的装置，其特征在于，包括用于采集建筑能耗数据的数据采集模块、用于存储待处理数据队列的缓存器、用于处理建筑能耗数据的数据处理引擎和用于存储建筑能耗数据库文件的汇总数据存储器，所述的数据采集模块与缓存器连接，所述的数据处理引擎分别与缓存器和汇总数据存储器连接。
所述的数据采集模块包括用于产生建筑能耗原始数据的数据采集器和用于解析建筑能耗原始数据的数据采集引擎，所述的数据采集引擎分别与数据采集器和缓存器连接。
所述的数据采集器设置多个。
所述的数据处理引擎设置多个。
与现有技术相比，本发明具有以下优点：
(1)使用待处理数据队列实现建筑能耗数据的缓存，使数据采集过程和数据处理过程彼此独立，分开进行，互不影响，两个过程处理速度不一致时，避免系统堵塞问题，从而提高数据采集速度。
(2)建筑能耗原始数据为加密过的数据，保证系统安全性。
(3)待处理数据队列设置多个，且与建筑能耗数据中的建筑归属信息一一对应，因此每次写入的数据文件只对应一个建筑归属，避免一次性写入过大的数据文件，提高运行速度。
(4)对建筑能耗数据的处理包括数据校验和数据修补，弥补数据采集过程中的中间缺失，方便工作人员及时判断建筑能耗设备运行状况。
(5)数据采集器和数据处理引擎可设置多个，实现装置的数据采集能力及处理能力的扩展。
附图说明
图1为本发明方法数据采集过程的流程示意图；
图2为本发明方法数据处理过程的流程示意图；
图3为本发明装置的结构框图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例
如图1所示，一种区域建筑能耗平台数据采集处理方法，该方法包括彼此独立的数据采集过程和数据处理过程；
系统启动后，数据采集过程具体包括以下步骤：
S11，采集一条建筑能耗数据，具体包括以下步骤：
S111，采集一条建筑能耗原始数据，建筑能耗数据中包含建筑归属信息，用以将其归入相应队列中；
S112，对建筑能耗原始数据进行解密、解析，获得相应的建筑能耗数据；
S12，将建筑能耗数据存放至与建筑归属信息对应的待处理数据队列，并返回步骤S11。
系统启动后，数据处理过程具体包括以下步骤：
S21，判断待处理数据队列中是否有待处理数据，若是，则进入步骤S22，若否，则在设定时长后返回本步骤起点；
S22，从待处理数据队列中读取一条建筑能耗数据进行处理，包括数据校验和数据修补，并判断待处理数据队列中是否有待处理数据，若是，则返回本步骤起点，若否，则进入步骤S23；
S23，将处理完成的数据写入建筑能耗数据库文件中，并返回步骤S21。
如图2所示，一种实现上述数据采集处理方法的装置，包括用于采集建筑能耗数据的数据采集模块、用于存储待处理数据队列的缓存器2、用于处理建筑能耗数据的数据处理引擎3和用于存储建筑能耗数据库文件的汇总数据存储器4，数据采集模块与缓存器2连接，数据处理引擎3分别与缓存器2和汇总数据存储器4连接。
数据采集模块包括用于多个产生建筑能耗原始数据的数据采集器11和用于解析建筑能耗原始数据的数据采集引擎12，数据采集引擎12分别与数据采集器11和缓存器2连接，数据采集器11向数据采集引擎12发送建筑能耗原始数据的发送请求，数据采集引擎12响应后，数据采集器11向数据采集引擎12发送建筑能耗原始数据，然后数据采集引擎12对收到的建筑能耗原始数据进行解密、解析，并存放至对应的待处理数据队列中。
当数据采集器11数量增多时，数据处理引擎3可相应的增加数量，以实现数据处理能力的扩展。数据采集器11为能耗监测仪表。数据采集引擎12和数据处理引擎3可为单片机或DSP芯片。

Claims (8)

1.一种区域建筑能耗平台数据采集处理方法，其特征在于，该方法包括彼此独立的数据采集过程和数据处理过程；
所述的数据采集过程具体包括以下步骤：
S11，采集一条建筑能耗数据；
S12，将建筑能耗数据存放至待处理数据队列，并返回步骤S11；
所述的数据处理过程具体包括以下步骤：
S21，判断待处理数据队列中是否有待处理数据，若是，则进入步骤S22，若否，则在设定时长后返回本步骤起点；
S22，从待处理数据队列中读取一条建筑能耗数据进行处理，并判断待处理数据队列中是否有待处理数据，若是，则返回本步骤起点，若否，则进入步骤S23；
S23，将处理完成的数据写入建筑能耗数据库文件中，并返回步骤S21。
2.根据权利要求1所述的一种区域建筑能耗平台数据采集处理方法，其特征在于，所述的步骤S11具体包括以下步骤：
S111，采集一条建筑能耗原始数据；
S112，对建筑能耗原始数据进行解密、解析，获得相应的建筑能耗数据。
3.根据权利要求1所述的一种区域建筑能耗平台数据采集处理方法，其特征在于，所述的建筑能耗数据中包含建筑归属信息，所述的待处理数据队列设置多个，且与所述的建筑归属信息一一对应，步骤S12中，根据建筑归属信息将建筑能耗数据存放至相应的待处理数据队列。
4.根据权利要求1所述的一种区域建筑能耗平台数据采集处理方法，其特征在于，所述的步骤S22中，对建筑能耗数据的处理包括数据校验和数据修补。
5.一种实现权利要求1～4任一所述的数据采集处理方法的装置，其特征在于，包括用于采集建筑能耗数据的数据采集模块、用于存储待处理数据队列的缓存器(2)、用于处理建筑能耗数据的数据处理引擎(3)和用于存储建筑能耗数据库文件的汇总数据存储器(4)，所述的数据采集模块与缓存器(2)连接，所述的数据处理引擎(3)分别与缓存器(2)和汇总数据存储器(4)连接。
6.根据权利要求5所述的装置，其特征在于，所述的数据采集模块包括用于产生建筑能耗原始数据的数据采集器(11)和用于解析建筑能耗原始数据的数据采集引擎(12)，所述的数据采集引擎(12)分别与数据采集器(11)和缓存器(2)连接。
7.根据权利要求6所述的装置，其特征在于，所述的数据采集器(11)设置多个。
8.根据权利要求5所述的装置，其特征在于，所述的数据处理引擎(3)设置多个。
CN201610192294.1A 2016-03-30 2016-03-30 一种区域建筑能耗平台数据采集处理方法及装置 Pending CN105701738A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610192294.1A CN105701738A (zh) 2016-03-30 2016-03-30 一种区域建筑能耗平台数据采集处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610192294.1A CN105701738A (zh) 2016-03-30 2016-03-30 一种区域建筑能耗平台数据采集处理方法及装置

Publications (1)

Publication Number Publication Date
CN105701738A true CN105701738A (zh) 2016-06-22

Family

ID=56218070

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610192294.1A Pending CN105701738A (zh) 2016-03-30 2016-03-30 一种区域建筑能耗平台数据采集处理方法及装置

Country Status (1)

Country Link
CN (1) CN105701738A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106780107A (zh) * 2016-11-22 2017-05-31 上海建筑设计研究院有限公司 一种区域建筑功能混合配比方法
CN108009048A (zh) * 2017-11-27 2018-05-08 上海上实龙创智慧能源科技股份有限公司 一种工业能耗监控平台数据的修补方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1829159A (zh) * 2005-03-01 2006-09-06 华为技术有限公司 一种实现电子工单排队的方法
CN101553803A (zh) * 2006-07-31 2009-10-07 威瑞森全球商务有限责任公司 用于提供基于网络的事务度量的方法和系统
CN103139104A (zh) * 2011-12-05 2013-06-05 深圳迈瑞生物医疗电子股份有限公司 网络传输服务级别调整方法、数据终端和网络服务器
CN103530825A (zh) * 2012-07-04 2014-01-22 广州科创节能科技服务有限公司 一种建筑能耗监测软件系统及实现方法
CN105045820A (zh) * 2015-06-25 2015-11-11 浙江立元通信技术股份有限公司 一种处理海量级数据的视频图像信息的方法及数据库系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1829159A (zh) * 2005-03-01 2006-09-06 华为技术有限公司 一种实现电子工单排队的方法
CN101553803A (zh) * 2006-07-31 2009-10-07 威瑞森全球商务有限责任公司 用于提供基于网络的事务度量的方法和系统
CN103139104A (zh) * 2011-12-05 2013-06-05 深圳迈瑞生物医疗电子股份有限公司 网络传输服务级别调整方法、数据终端和网络服务器
CN103530825A (zh) * 2012-07-04 2014-01-22 广州科创节能科技服务有限公司 一种建筑能耗监测软件系统及实现方法
CN105045820A (zh) * 2015-06-25 2015-11-11 浙江立元通信技术股份有限公司 一种处理海量级数据的视频图像信息的方法及数据库系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王颖纯: ""天津市能耗管理信息系统的分析与设计"", 《天津理工大学学报》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106780107A (zh) * 2016-11-22 2017-05-31 上海建筑设计研究院有限公司 一种区域建筑功能混合配比方法
CN106780107B (zh) * 2016-11-22 2020-08-25 上海建筑设计研究院有限公司 一种区域建筑功能混合配比方法
CN108009048A (zh) * 2017-11-27 2018-05-08 上海上实龙创智慧能源科技股份有限公司 一种工业能耗监控平台数据的修补方法
CN108009048B (zh) * 2017-11-27 2020-08-11 上海上实龙创智能科技股份有限公司 一种工业能耗监控平台数据的修补方法

Similar Documents

Publication Publication Date Title
CN103412916B (zh) 一种监控系统的多维度数据存储、检索方法及装置
KR20170008152A (ko) 불휘발성 메모리 장치에서의 데이터 특성 기반 데이터 배치
US10606806B2 (en) Method and apparatus for storing time series data
CN103699660B (zh) 一种大规模网络流式数据缓存写入的方法
CN103399942B (zh) 一种支持SaaS多租户的数据引擎系统及其工作方法
CN101673192B (zh) 时序化的数据处理方法、装置及系统
CN106330963A (zh) 一种跨网络多节点日志采集的方法
CN101060436A (zh) 一种用于通信设备的故障分析方法及装置
CN103812939A (zh) 一种大数据存储系统
CN102541884B (zh) 数据库优化方法和装置
CN107784108A (zh) 一种数据存储管理方法、装置及设备
CN103714004A (zh) Jvm在线内存泄露分析方法及系统
US20140082316A1 (en) Selecting pages implementing leaf nodes and internal nodes of a data set index for reuse
US20130246859A1 (en) Integrated circuit and method for monitoring bus status in integrated circuit
CN1924816A (zh) 提高多核系统访问临界资源速度的方法和装置
CN103716384A (zh) 跨数据中心实现云存储数据同步的方法和装置
CN105915377A (zh) 一种Flume与SparkStreaming整合的方法及系统
CN105701738A (zh) 一种区域建筑能耗平台数据采集处理方法及装置
WO2014010038A1 (ja) 情報処理システム
CN103473169B (zh) 一种日志文件收集方法及装置
KR101666440B1 (ko) 환형큐 기반의 인-메모리 데이터베이스 시스템에서의 데이터 처리방법
CN107704362A (zh) 一种基于Ambari监控大数据组件的方法及装置
CN102375886A (zh) 一种多通道高速数据比对方法
CN205721967U (zh) 一种区域建筑能耗平台数据采集处理装置
CN107179883A (zh) 一种基于SSD和HDD的混合存储系统的Spark架构优化方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160622

RJ01 Rejection of invention patent application after publication