CN111414355A - 一种海上风电场数据监测存储系统及方法、装置 - Google Patents
一种海上风电场数据监测存储系统及方法、装置 Download PDFInfo
- Publication number
- CN111414355A CN111414355A CN202010198973.6A CN202010198973A CN111414355A CN 111414355 A CN111414355 A CN 111414355A CN 202010198973 A CN202010198973 A CN 202010198973A CN 111414355 A CN111414355 A CN 111414355A
- Authority
- CN
- China
- Prior art keywords
- data
- monitoring
- offshore wind
- wind farm
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/06—Electricity, gas or water supply
Abstract
本发明公开了一种海上风电场数据监测存储系统,包括中心服务器、数据库以及至少一个海上风电场数据采集点;所述数据库用于以表格形式存储结构化数据、半结构化数据、非结构化数据;所述海上风电场数据采集点用于采集监测数据;所述中心服务器,用于获取海上风电场的监测数据;对所述监测数据进行筛选与分类;检测并消除异常、重复记录的监测数据;所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。本发明提供了一种海上风电场数据监测存储系统及方法、装置,能够增加数据存储容量,从而为海上风电场的运维提供数据支撑。
Description
技术领域
本发明涉及电子信息技术领域,尤其是涉及一种海上风电场数据监测存储系统及方法、装置。
背景技术
海上风电的运行和维护具有自身的特殊性,海上风电面对潮湿、盐雾、台风等恶劣环境,其运行和维护面临众多的技术难题与困难,运维成本约为陆上风电的两倍。目前,我国海上风电的发展还相对滞后,很多技术尚不成熟,仍然处于起步阶段,尚未形成一套完整的检测、制造、安装、施工、运行和维护体系。
存储海量的海上风电场的数据,才能对海上风电场的运维提供数据支撑。但是目前国内已投产的海上风电场刚建成不久,尚未对海上风电场运行维护进行统一处理,同时对海上风电场的数据,仅通过传统的oralce数据库进行存储,不能实现海量的数据存储和调用。
发明内容
针对上述技术问题,本发明提供了一种海上风电场数据监测存储系统及方法、装置,能够增加数据存储容量,从而为海上风电场的运维提供数据支撑。所述技术方案如下:
本发明实施例提供了一种海上风电场数据监测存储系统,包括中心服务器、数据库以及至少一个海上风电场数据采集点;
所述数据库用于以表格形式存储结构化数据、半结构化数据、非结构化数据;
所述海上风电场数据采集点用于采集监测数据;
所述中心服务器用于:
获取海上风电场的监测数据;
对所述监测数据进行筛选与分类;
检测并消除异常、重复记录的监测数据;
所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
作为优选方案,所述中心服务器还用于:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
作为优选方案,所述中心服务器还用于:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
作为优选方案,所述海上风电场数据监测存储系统,还包括数据仓库;
所述数据仓库,用于将结构化的数据文件映射为一张数据库表,以及将sql语句转换为大规模数据集的并行运算的任务。
为了解决相同的技术问题,本发明实施例提供了一种海上风电场数据监测存储方法,步骤包括:
获取海上风电场的监测数据;
对所述监测数据进行筛选与分类;
检测并消除异常、重复记录的监测数据;
所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
作为优选方案,所述海上风电场数据监测存储方法,将监测数据存储到存储介质后,还包括:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
作为优选方案,所述获取海上风电场的监测数据,具体包括:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
作为优选方案,所述获取海上风电场的监测数据,还包括:
传输所述监测数据;当所述监测数据的传输过程中发生网络故障,将所述监测数据保存到缓存,并且在网络正常后对所述监测数据进行断点续传,以完成所述监测数据的传输过程。
作为优选方案,所述传输所述监测数据,还包括:
当网络异常或者数据传输过程出现错误,报警并以短信形式通知管理员。
此外,本发明实施例提供了一种海上风电场数据监测存储装置,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如上所述的海上风电场数据监测存储方法。
相比于现有技术,本发明实施例具有如下有益效果:
本发明提供一种海上风电场数据监测存储系统及方法、装置,所述海上风电场数据监测存储系统,包括中心服务器、数据库、海上风电场数据采集点。在充分考虑海上风电数据分布散、种类多等特点,利用海上风电场数据采集点采集监测数据,并且采用Hadoop作为大数据存储平台的支撑数据库,以满足系统未来大容量数据的存储需要和海上风电大数据中心的需求。所述中心服务器用于获取海上风电场的监测数据;对所述监测数据进行筛选与分类;检测并消除异常、重复记录的监测数据;所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库,从而实现实时数据和必要的非实时数据的采集、处理、存储,进而为后续的数据分析、故障诊断等打下坚实的数据基础。
附图说明
图1是本发明实施例中的一种海上风电场数据监测存储系统的架构示意图;
图2是本发明实施例中的一种海上风电场数据监测存储系统及方法、装置的并行计算原理图;
图3是本发明实施例中的一种海上风电场数据监测存储方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参见图1,本发明提供一种示例性实施例,一种海上风电场数据监测存储系统,包括中心服务器、数据库以及至少一个海上风电场数据采集点;
所述数据库用于以表格形式存储结构化数据、半结构化数据、非结构化数据;
所述海上风电场数据采集点用于采集监测数据;
所述中心服务器用于:
获取海上风电场的监测数据;所述监测数据包括实时数据、计算后数据、转换后数据等;监测数据,例如时间、风速、温度等数据,机组性能、限电、故障停机等将数据;
对所述监测数据进行筛选与分类;
检测并消除异常、重复记录的监测数据;
所述检测并消除异常、重复记录的监测数据,采用统计方法来检测数值型属性,计算字段值的均值和标准差,考虑每个字段的置信区间来识别异常字段和记录。将数据挖掘方法引入数据清理,如聚类方法用于检测异常记录、模型方法发现不符合现有模式的异常记录、关联规则方法发现数据集中不符合具有高置信度和支持度规则的异常数据。对重复记录进行清洗。消除数据集中的近似重复记录问题是目前数据清洗领域中研究最多的内容。为了从数据集中消除重复记录,首要的问题就是如何判断两条记录是否近似重复。利用风机各运行数据间的关系、风机运行数据和风机状态间的关系,对冗余数据进行状态估计,过滤掉错误的数据。
所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
在本实施例中,所述海上风电场数据监测存储系统使用分布式文件系统(HDFS)对海量数据进行存储。HDFS采用master/slave架构。一个HDFS集群是由多个Namenode和一定数目的Datanodes组成。Namenode是一个中心服务器,负责管理文件系统的名字空间(namespace)以及客户端对文件的访问。
所述数据库为分布式数据库,采用面向列的分布式数据库Hbase,以表格的形式维护数据,能够存储数亿条数据。其特点是行可以数亿行,列可达数亿列。海上风电场数据存储平台使用HBASE对海量数据进行存储。
优选地,所述海上风电场数据监测存储系统使用MySQL关系数据库来保存历史数据、用软件数据或其它数据。MySQL数据库系统具有安全性高、处理速度快、保存容量大、具有标准开放的SQL数据访问接口等特点。
所述中心服务器还用于:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
所述海上风电场监测数据存储系统具备数据的在线查询能力。支持设备、属性、数据段为条件的即席查询。对于即席查询操作,平台对数据需支持物理文件的分区、分表技术,以保障查询的效率。
所述中心服务器还用于:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
请参见图2,所述海上风电场监测数据存储系统具备大规模并行计算能力,能有效的分解任务,进行并行计算,并支持计算结果的迭代计算。可对TB级的数据进行有效分析,并输出计算结果。
分布式计算将一个需要强大计算能力才能解决的问题分解为许多小的部分,然后再将这些部分分给多个计算机处理,最后把结果综合起来得到最终结果。
内存计算技术是将数据全部放在内层中进行操作的计算技术,该技术克服了对磁盘读写操作时的大量时间消耗,计算速度得到几个数量级的大幅提升。中间的计算结果可以临时存在内存或磁盘中,计算最终结果支持存储在海上风电场数据存储平台。
另外,随着海上风电场的数据量不断增长,对实时性的要求也越来越高,将数据流技术应用于海上风电也是可以为决策者提供即时依据,满足实时在线分析需求。
所述海上风电场数据监测存储系统,还包括数据仓库;
所述数据仓库,用于将结构化的数据文件映射为一张数据库表,以及将sql语句转换为大规模数据集的并行运算的任务。
所述数据仓库为基于Hadoop的一个数据仓库工具hive,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。
所述海上风电场数据监测存储系统,还包括:
可添加或删除的用于启动或停止各项服务的服务器节点。
可以理解的是,管理中心能够提供节点服务器的添加、删除等功能,并提供基于节点机架的数据副本平衡能力。
所述海上风电场数据监测存储系统整合当前主流的大数据服务,包括但不限于MapReduce2、HBase、Hive、Pig、Kafka、Spark、R语言等,管理中心提供服务的安装、卸载,并可实现服务启动、停止等功能。
可以理解的是,所述海上风电场数据监测存储系统对外提供各种开发接口,包括完全兼容Hadoop生态圈开源各个组件API接口,REST访问接口包括WebHDFS以及StarGate/HyperbaseREST接口;同时通过支持SQL2003标准以及PL/SQL,提供JDBC/ODBC接口,能够使传统业务场景向海上风电场数据存储平台上进行平滑迁移;此外,海上风电场数据存储系统为数据挖掘提供JAVA API以及R语言接口。通过接口,用户可以直接使用R语言与SQL进行交互式数据挖掘探索,同时可以通过开放的API进行二次开发,通过JDBC/ODBC接口给上层用进行SQL查询。此外,Inceptor中还包含了基础的并行统计挖掘算法库的JAVA API,用户可以通过并行算法库进行数据挖掘的二次开发。
请参见图3,本发明还提供一种示例性实施例,一种海上风电场数据监测存储方法,步骤包括:
S101、获取海上风电场的监测数据;所述监测数据包括实时数据、计算后数据、转换后数据等;监测数据,例如时间、风速、温度等数据,机组性能、限电、故障停机等将数据;
S102、对所述监测数据进行筛选与分类;
S103、检测并消除异常、重复记录的监测数据;
S104、所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
S105、通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
所述检测并消除异常、重复记录的监测数据,采用统计方法来检测数值型属性,计算字段值的均值和标准差,考虑每个字段的置信区间来识别异常字段和记录。将数据挖掘方法引入数据清理,如聚类方法用于检测异常记录、模型方法发现不符合现有模式的异常记录、关联规则方法发现数据集中不符合具有高置信度和支持度规则的异常数据。利用风机各运行数据间的关系、风机运行数据和风机状态间的关系,对冗余数据进行状态估计,过滤掉错误的数据。
所述海上风电场数据监测存储方法,将监测数据存储到存储介质后,还包括:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
海上风电场数据监测存储系统具备数据的在线查询能力。支持设备、属性、数据段为条件的即席查询。对于即席查询操作,平台对数据需支持物理文件的分区、分表技术,以保障查询的效率。传统数据库是基于行查询设计的,查询时需要全表或全区扫描;HBase是基于列查询设计的,查询时只需扫描指定的列,大大缩短了查询时间,对于亿级数据查询均能实现毫秒查询。
所述获取海上风电场的监测数据,具体包括:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
请参见图2,所述海上风电场监测数据存储系统具备大规模并行计算能力,能有效的分解任务,进行并行计算,并支持计算结果的迭代计算。可对TB级的数据进行有效分析,并输出计算结果。
分布式计算将一个需要强大计算能力才能解决的问题分解为许多小的部分,然后再将这些部分分给多个计算机处理,最后把结果综合起来得到最终结果。
内存计算技术是将数据全部放在内层中进行操作的计算技术,该技术克服了对磁盘读写操作时的大量时间消耗,计算速度得到几个数量级的大幅提升。中间的计算结果可以临时存在内存或磁盘中,计算最终结果支持存储在海上风电场数据存储平台。
另外,随着海上风电场的数据量不断增长,对实时性的要求也越来越高,将数据流技术应用于海上风电也是可以为决策者提供即时依据,满足实时在线分析需求。
所述获取海上风电场的监测数据,还包括:
传输所述监测数据;当所述监测数据的传输过程中发生网络故障,将所述监测数据保存到缓存,并且在网络正常后对所述监测数据进行断点续传,以完成所述监测数据的传输过程。
所述传输所述监测数据,还包括:
当网络异常或者数据传输过程出现错误,报警并以短信形式通知管理员。
当前告警监视画面以列表方式实时展示最新的告警信息,不同级别的告警用不同背景或字体加以区分,当有新来告警时,能以声、光等形式提醒;画面还提供按告警类型、告警级别、告警来源等方式进行过滤筛选,方便监控人员快速浏览,支持将当前告警信息导出至Excel。
一种海上风电场数据监测存储方法,步骤包括:
可视化展示所述海上风电场数据监测存储系统的所有硬件设备节点、所有组件状态、各节点的资源占用情况、各任务进程、任务的完成时间、完成任务的记录,平台故障报警的Log日志。
在一个具体的本实施例中,所述可视化展示包括:设备管理和可视化(CPU、内存、网络、磁盘I/O等资源的管理调配,及状态可视化监控);服务管理和可视化(NameNode、DataNode、PIG、Hive、HBASE、YARN、SPARK、Zeppelin等服务资源的管理调配,及状态可视化监控);任务管理和可视化(多作业任务资源消耗的管理调配,及作业进度、作业否完成、作业用时等状态可视化监控)。
本发明实施例提供了一种海上风电场数据监测存储装置,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如上所述的海上风电场数据监测存储方法。
本发明提供一种海上风电场数据监测存储系统及方法、装置,所述海上风电场数据监测存储系统,包括中心服务器、数据库、海上风电场数据采集点。在充分考虑海上风电数据分布散、种类多等特点,利用海上风电场数据采集点采集监测数据,并且采用Hadoop作为大数据存储平台的支撑数据库,以满足系统未来大容量数据的存储需要和海上风电大数据中心的需求。所述中心服务器用于获取海上风电场的监测数据;对所述监测数据进行筛选与分类;检测并消除异常、重复记录的监测数据;所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库,从而实现实时数据和必要的非实时数据的采集、处理、存储,进而为后续的数据分析、故障诊断等打下坚实的数据基础。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。
Claims (10)
1.一种海上风电场数据监测存储系统,其特征在于,包括中心服务器、数据库以及至少一个海上风电场数据采集点;
所述数据库用于以表格形式存储结构化数据、半结构化数据、非结构化数据;
所述海上风电场数据采集点用于采集监测数据;
所述中心服务器用于:
获取海上风电场的监测数据;
对所述监测数据进行筛选与分类;
检测并消除异常、重复记录的监测数据;
所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
2.如权利要求1所述的海上风电场数据监测存储系统,其特征在于,所述中心服务器还用于:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
3.如权利要求1所述的海上风电场数据监测存储系统,其特征在于,所述中心服务器还用于:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
4.如权利要求1所述的海上风电场数据监测存储系统,其特征在于,还包括数据仓库;
所述数据仓库,用于将结构化的数据文件映射为一张数据库表,以及将sql语句转换为大规模数据集的并行运算的任务。
5.一种海上风电场数据监测存储方法,其特征在于,步骤包括:
获取海上风电场的监测数据;
对所述监测数据进行筛选与分类;
检测并消除异常、重复记录的监测数据;
所述监测数据经过筛选与分类并消除异常、重复记录的监测数据后,对将要存储的监测数据进行压缩;
通过数据存储引擎按照时间顺序将经过压缩的监测数据存储到数据库。
6.如权利要求5所述的海上风电场数据监测存储方法,其特征在于,所述海上风电场数据监测存储方法,将监测数据存储到存储介质后,还包括:
获取包含检索条件的查询指令;
根据所述查询指令的检索条件,扫描数据库中对应的数据列;
从所述数据列中找出指定数据文件。
7.如权利要求5所述的海上风电场数据监测存储方法,其特征在于,所述获取海上风电场的监测数据,具体包括:
将所述监测数据进行分块;
将分块后的监测数据送至对应的任务区进行处理并按键值存储到数据库;
需要输出时按键值提取监测数据进行汇总。
8.如权利要求5所述的海上风电场数据监测存储方法,其特征在于,所述获取海上风电场的监测数据,还包括:
传输所述监测数据;当所述监测数据的传输过程中发生网络故障,将所述监测数据保存到缓存,并且在网络正常后对所述监测数据进行断点续传,以完成所述监测数据的传输过程。
9.如权利要求8所述的海上风电场数据监测存储方法,其特征在于,所述传输所述监测数据,还包括:
当网络异常或者数据传输过程出现错误,报警并以短信形式通知管理员。
10.一种海上风电场数据监测存储装置,其特征在于,包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求5至9任一项所述的海上风电场数据监测存储方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010198973.6A CN111414355A (zh) | 2020-03-19 | 2020-03-19 | 一种海上风电场数据监测存储系统及方法、装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010198973.6A CN111414355A (zh) | 2020-03-19 | 2020-03-19 | 一种海上风电场数据监测存储系统及方法、装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111414355A true CN111414355A (zh) | 2020-07-14 |
Family
ID=71493138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010198973.6A Pending CN111414355A (zh) | 2020-03-19 | 2020-03-19 | 一种海上风电场数据监测存储系统及方法、装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111414355A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112559462A (zh) * | 2020-12-14 | 2021-03-26 | 深圳供电局有限公司 | 一种数据压缩方法、装置、计算机设备和存储介质 |
CN116628437A (zh) * | 2023-04-13 | 2023-08-22 | 南京轩果基础建筑工程有限公司 | 一种污水循环深度净化处理的数据监测方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140122800A1 (en) * | 2012-10-31 | 2014-05-01 | General Electric Company | Method, system, and device for monitoring operations of a system asset |
CN106202566A (zh) * | 2016-08-02 | 2016-12-07 | 山东鲁能软件技术有限公司 | 一种基于大数据的海量用电数据混合存储系统及方法 |
CN106649496A (zh) * | 2016-10-10 | 2017-05-10 | 国信优易数据有限公司 | 一种政务数据采集共享系统与方法 |
-
2020
- 2020-03-19 CN CN202010198973.6A patent/CN111414355A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140122800A1 (en) * | 2012-10-31 | 2014-05-01 | General Electric Company | Method, system, and device for monitoring operations of a system asset |
CN106202566A (zh) * | 2016-08-02 | 2016-12-07 | 山东鲁能软件技术有限公司 | 一种基于大数据的海量用电数据混合存储系统及方法 |
CN106649496A (zh) * | 2016-10-10 | 2017-05-10 | 国信优易数据有限公司 | 一种政务数据采集共享系统与方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112559462A (zh) * | 2020-12-14 | 2021-03-26 | 深圳供电局有限公司 | 一种数据压缩方法、装置、计算机设备和存储介质 |
CN116628437A (zh) * | 2023-04-13 | 2023-08-22 | 南京轩果基础建筑工程有限公司 | 一种污水循环深度净化处理的数据监测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2017202873B2 (en) | Efficient query processing using histograms in a columnar database | |
CN107315776B (zh) | 一种基于云计算的数据管理系统 | |
CN108039959B (zh) | 一种数据的态势感知方法、系统及相关装置 | |
CN111984499A (zh) | 一种大数据集群的故障检测方法和装置 | |
CN108255712A (zh) | 数据系统的测试系统和测试方法 | |
CN112181960B (zh) | 一种基于AIOps的智能运维框架系统 | |
CN111639114A (zh) | 一种基于物联网平台的分布式数据融合管理系统 | |
CN111314158B (zh) | 大数据平台监控方法、装置及设备、介质 | |
CN114416855A (zh) | 一种基于电力大数据的可视化平台及方法 | |
CN111159180A (zh) | 一种基于数据资源目录构建的数据处理方法及系统 | |
CN111459698A (zh) | 一种数据库集群故障自愈方法及装置 | |
CN113420009B (zh) | 一种基于大数据的电磁数据分析装置、系统及方法 | |
CN111159165A (zh) | 基于云平台的电力井下低功耗边缘计算系统及其方法 | |
CN114791846B (zh) | 一种针对云原生混沌工程实验实现可观测性的方法 | |
CN112884452A (zh) | 一种智能运维多源数据采集可视化分析系统 | |
CN111046022A (zh) | 一种基于大数据技术的数据库审计方法 | |
CN112148578A (zh) | 基于机器学习的it故障缺陷预测方法 | |
CN113468159A (zh) | 一种数据应用全链路管控方法及系统 | |
CN111414355A (zh) | 一种海上风电场数据监测存储系统及方法、装置 | |
CN116662441A (zh) | 一种分布式数据血缘构建及展现方法 | |
CN115344207A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN114138612A (zh) | 多地多活数据中心的应用监控系统及方法 | |
CN113704178A (zh) | 大数据管理方法、系统、电子设备及存储介质 | |
CN111708895B (zh) | 一种知识图谱系统的构建方法及装置 | |
CN115391286A (zh) | 一种链路追踪数据管理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |