CN105574204B - 分布式电网调控运行数据的检索方法及系统 - Google Patents
分布式电网调控运行数据的检索方法及系统 Download PDFInfo
- Publication number
- CN105574204B CN105574204B CN201610009588.6A CN201610009588A CN105574204B CN 105574204 B CN105574204 B CN 105574204B CN 201610009588 A CN201610009588 A CN 201610009588A CN 105574204 B CN105574204 B CN 105574204B
- Authority
- CN
- China
- Prior art keywords
- retrieval
- power grid
- data
- operation data
- control operation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000007246 mechanism Effects 0.000 claims abstract description 62
- 238000012545 processing Methods 0.000 claims abstract description 57
- 238000005259 measurement Methods 0.000 claims abstract description 40
- 238000004458 analytical method Methods 0.000 claims abstract description 30
- 230000005540 biological transmission Effects 0.000 claims abstract description 11
- 230000006870 function Effects 0.000 claims description 47
- 238000003860 storage Methods 0.000 claims description 21
- 238000012797 qualification Methods 0.000 claims description 6
- 238000005070 sampling Methods 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 230000001276 controlling effect Effects 0.000 claims 1
- 230000001105 regulatory effect Effects 0.000 claims 1
- 238000007405 data analysis Methods 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 2
- 206010037660 Pyrexia Diseases 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010017 direct printing Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
- G06F16/24532—Query optimisation of parallel queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2272—Management thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Supply And Distribution Of Alternating Current (AREA)
Abstract
本发明公开了一种分布式电网调控运行数据的检索方法及系统，其中该方法包括：接收用户输入的检索请求，其中，检索请求包括：量测点表达式；解析量测点表达式，得到电网量测点；基于检索请求和预先建立的倒排索引库，对电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，倒排索引库存储在检索服务器中，省级调度机构和地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输；输出检索结果。本发明在调度机构设置检索服务器，管理各调度机构的数据，各检索服务器间可进行数据传输，基于倒排索引库进行并行检索和处理，提高检索效率，且能够基于检索得到的数据进行处理分析，增强了数据分析能力。
Description
技术领域
本发明涉及电力系统调度自动化技术领域，尤其涉及一种分布式电网调控运行数据的检索方法及系统。
背景技术
随着智能电网调度技术支持系统D5000平台的建设，经过一段时间的运行，省调和地调D5000历史库里都已经积累了海量的电网调度生产运行数据，形成了丰富的信息资源，这些数据记录了电力系统长期的运行状况，蕴涵着电力系统运行的历史特性。
但是，目前这些数据各自独立存储在省地两级数据库中，当需要综合分析和考虑来源于两个或者更多调度机构的数据时，往往无法从统一的、有组织的数据源中，通过合适的工具获取所需要的综合信息。同时，面对海量的电网调控运行历史数据，采用常规的检索分析手段，会出现检索速度慢、效率低等问题。
在数据的应用上，为满足电网调度生产需求，调度控制中心通过各类报表定制工具为各专业提供数据查询手段。从最终用户角度分析，定制报表优点是操作简单(例如，选择日期、单位、类型，点击查询)，结果格式固定(例如，直接打印或汇报)；定制报表缺点同样明显，查询内容已固定，面对临时性数据查询需求，缺乏用户定义的手段。
针对上述问题，目前尚未提出有效的解决方案。
发明内容
本发明提供了一种分布式电网调控运行数据的检索方法及系统，以至少解决现有的省地两级电网调控运行数据分别各自独立存储在省地两级数据库中，检索效率低，且用户体验不高的问题。
根据本发明的一个方面，提供了一种分布式电网调控运行数据的检索方法，包括：接收用户输入的检索请求，其中，所述检索请求包括：量测点表达式；解析所述量测点表达式，得到电网量测点；基于所述检索请求和预先建立的倒排索引库，对所述电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，所述倒排索引库存储在检索服务器中，省级调度机构和地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输；输出所述检索结果。
在一个实施例中，所述检索请求还包括：检索的时间范围、指标范围和数据的采样周期。
在一个实施例中，在接收用户输入的检索请求之前，所述方法还包括通过以下步骤建立所述倒排索引库：建立电力领域词汇库，并存储该词汇库，其中每个词汇对应唯一编号；对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；建立电网量测点的倒排列表，其中，所述倒排列表中记录有所述词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；对所述倒排列表进行压缩，并分块存储所述倒排列表。
在一个实施例中，对所述电网量测点的电网调控运行数据进行并行检索和处理，包括：将所述检索请求中的时间范围划分为多个时间段；按照所述多个时间段，对所述多个时间段对应的电网调控运行数据进行并行检索和处理；将所述多个时间段的检索结果进行合并；根据所述电网量测点所属的调度机构，将所述检索请求划分为多个查询请求；将所述多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与所述查询请求对应的电网调控运行数据；所述省级调度机构的检索服务器对获取的电网调控运行数据进行合并。
在一个实施例中，所述量测点表达式所使用的函数包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数。
在一个实施例中，对所述电网量测点的电网调控运行数据进行并行检索和处理，包括：按照用户选择的处理方式对检索到的数据进行处理，其中，所述处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线。
根据本发明的另一个方面，提供了一种分布式电网调控运行数据的检索系统，包括：省级调度机构和多个地级调度机构；所述省级调度机构和所述多个地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输；所述检索服务器包括：接收单元，用于接收用户输入的检索请求，其中，所述检索请求包括：量测点表达式；解析单元，用于解析所述量测点表达式，得到电网量测点；检索单元，用于基于所述检索请求和预先建立的倒排索引库，对所述电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，所述倒排索引库存储在检索服务器中；输出单元，用于输出所述检索结果。
在一个实施例中，所述检索请求还包括：检索的时间范围、指标范围和数据的采样周期。
在一个实施例中，所述检索服务器还包括：建立单元，用于建立所述倒排索引库；所述建立单元包括：第一建立模块，用于建立电力领域词汇库；第一存储模块，用于存储该词汇库，其中每个词汇对应唯一编号；转换模块，用于对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；第二建立模块，用于建立电网量测点的倒排列表，其中，所述倒排列表中记录有所述词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；第二存储模块，用于对所述倒排列表进行压缩，并分块存储所述倒排列表。
在一个实施例中，所述检索单元包括：第一划分模块，用于将所述检索请求中的时间范围划分为多个时间段；检索模块，用于按照所述多个时间段，对所述多个时间段对应的电网调控运行数据进行并行检索和处理；合并模块，用于将所述多个时间段的检索结果进行合并；第二划分模块，用于根据所述电网量测点所属的调度机构，将所述检索请求划分为多个查询请求；获取模块，用于将所述多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与所述查询请求对应的电网调控运行数据，并由所述省级调度机构的检索服务器对获取的电网调控运行数据进行合并。
在一个实施例中，所述量测点表达式所使用的函数包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数。
在一个实施例中，所述检索单元包括：处理模块，用于按照用户选择的处理方式对检索到的数据进行处理，其中，所述处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线。
通过本发明的分布式电网调控运行数据的检索方法及系统，在调度机构设置检索服务器，管理各个调度机构的历史数据，各检索服务器之间可以进行数据传输，基于倒排索引库进行并行检索和处理，在用户接受的时间范围内检索大量的数据并反馈，提高了电网调控运行数据的检索效率，且能够基于检索得到的数据进行处理分析，增强了数据分析能力，由此实现用户对分布式省地两级电网调控运行数据的自主检索分析，提高了检索效率，也提高了用户体验。同时，电网调控运行数据的检索公式能够自定义且提供对应的解析技术，实现了数据查询条件、查询内容的自主定义，快速响应用户的临时数据查询和分析需求，提高专业业务运转效率。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的限定。在附图中：
图1是本发明实施例的分布式存储的系统架构示意图；
图2是本发明实施例的分布式电网调控运行数据的检索方法的流程图；
图3是本发明实施例的倒排索引库的数据结构示意图；
图4是本发明实施例的分布式电网调控运行数据的检索系统的结构框图；
图5是本发明实施例的检索服务器的结构框图；
图6是本发明实施例的系统逻辑架构图。
具体实施方式
下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明的保护范围。
本发明实施例提供了一种分布式电网调控运行数据的检索方法，该方法所基于的系统架构如图1所示，包括：省级调度机构和多个地级调度机构。省级调度机构和地级调度机构均设置有历史数据服务器10、配置数据服务器20和检索服务器30，其中，历史数据服务器10可以是基于D5000平台，检索服务器30也可以称为自主分析查询应用服务器，可以读取其所属的调度机构的历史数据和配置信息。各调度机构之间的数据传输可以通过广域服务总线40实现。省级调度机构的检索服务器30作为中心节点，实现对分布式存储的管理，以及对分布式并行计算任务的分发与结果合并，并对用户提供数据展示等服务。
基于现有的省地两级多调度机构分散存储的情况，本发明基于分布式存储技术，提供了多地存储管理模块(即位于省级调度机构的检索服务器)，实时监控多地数据的可用性和稳定性，对多地存储的电网运行数据进行统一管理，对外提供安全稳定的接口，为电网运行数据的查询和分析提供数据基础。
图2是本发明实施例的分布式电网调控运行数据的检索方法的流程图，如图2所示，该方法包括以下步骤：
步骤S201，接收用户输入的检索请求，其中，检索请求可以包括：量测点表达式、检索的时间范围、指标范围和数据的采样周期。例如，检索的时间范围可以选择开始时间和结束时间，可定义年、季度、月、周、日等周期范围，也可以定义节假日、高负荷、枯水期、峰谷平时段、突发事件、截至目前等时间范围。指标范围可以量测点的经济指标为基础，定义多个范围，统计在不同范围内量测点的发生时间。数据的采集周期(或称为时间粒度)可选择1分钟、5分钟、15分钟、60分钟等。
步骤S202，解析量测点表达式，得到电网量测点。
步骤S203，基于检索请求和预先建立的倒排索引库，对电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，倒排索引库存储在检索服务器中，省级调度机构和地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输。
步骤S204，输出检索结果。具体的，可以逐条展示检索结果，也可以通过表格或曲线展示检索结果。
通过上述方法，在调度机构设置检索服务器，管理各个调度机构的历史数据，各检索服务器之间可以进行数据传输，基于倒排索引库进行并行检索和处理，在用户接受的时间范围内检索大量的数据并反馈，提高了电网调控运行数据的检索效率，且能够基于检索得到的数据进行处理分析，增强了数据分析能力，由此实现用户对分布式省地两级电网调控运行数据的自主检索分析，提高了检索效率，也提高了用户体验。同时，电网调控运行数据的检索公式能够自定义且提供对应的解析技术，实现了数据查询条件、查询内容的自主定义，快速响应用户的临时数据查询和分析需求，提高专业业务运转效率。
在步骤S201之前，上述方法还包括通过以下步骤建立倒排索引库：建立电力领域词汇库，并存储该词汇库(可以存储在内存中)，其中每个词汇对应唯一编号，例如，词汇可以是“滦河”、“唐热”等电力词汇；对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；建立电网量测点的倒排列表，其中，倒排列表中记录有词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；对倒排列表进行压缩，并分块存储倒排列表(可以存储在磁盘中)。
本实施例中，考虑到在查询电网调控运行数据的过程中，电网量测点有很高的检索频率，建立以单词词典和倒排列表为核心的索引结构，从而所有对量测点的检索均可以基于该电力领域词汇的倒排索引实现，提高大量电网量测点的检索速度。
图3是本发明实施例的倒排索引库的数据结构示意图，如图3所示，将单词链表组成词典放在内存中，每个单词对应一个倒排列表，倒排列表分块存储在磁盘的倒排文件里。
步骤S203中对电网量测点的电网调控运行数据进行并行检索和处理，其中的并行指的是时间并行检索与处理、存储并行检索与处理。
具体的，时间并行检索与处理包括：将检索请求中的时间范围划分为多个时间段；按照多个时间段，对多个时间段对应的电网调控运行数据进行并行检索和处理；将多个时间段的检索结果进行合并。例如，将某个量测点一个月的数据查询，分解为该量测点1号到10号、11号到20号、20号到31号这三个时间段，并行对这三个时间段进行查询和分析，最后对查询分析结果进行合并。
存储并行检索与处理包括：根据电网量测点所属的调度机构，将检索请求划分为多个查询请求；将多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与查询请求对应的电网调控运行数据；省级调度机构的检索服务器对获取的电网调控运行数据进行合并。即将查询请求分解到每个存储服务器本地，在分布式存储的数据本地建立应用服务，对应的检索服务负责处理本地的查询请求，中心服务器(即省级调度机构的检索服务器)再对每个应用服务的查询分析结果进行合并。
最终，通过时间并行检索与处理、存储并行检索与处理的结合时间，提高电网调控运行数据的查询和分析速度。
本发明中用户可以对量测点表达式进行自定义。对量测点电网运行数据的查询和分析能够解决大部分的查询分析需求，但是，还有部分查询分析需要多个量测点进行数学公式的组合，形成一个新的量测点，基于该新的量测点进行查询和分析。本发明以计算器的原理为基础，对量测点表达式进行自定义，量测点表达式所使用的函数包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数。其中，可以通过Java对加减乘除等计算规则进行封装，并提供自定义函数的接口，例如，绝对值函数、四舍五入函数、正弦函数、余弦函数等。计算分量涵盖D5000系统量测范围，包括：有功、无功、功率因数、电压、电流、分接头位置、频率等。对应于自定义的量测点表达式，需要对其进行正确解析。由此，实现了量测点公式的自定义和解析，解决了临时量测点定义的问题。
对电网量测点的电网调控运行数据进行并行检索和处理，可以包括：按照用户选择的处理方式对检索到的数据进行处理，其中，处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线。通过上述处理手段可以实现对电网运行数据的分析，为电网调度的决策提供支持。
上述方法基于倒排索引库，对量测点进行快速查询，然后采用并行计算技术，分解查询请求，对分布式存储的电网运行数据进行查询，最终将电网运行数据的查询结果进行合并，然后可以通过表格进行展示，同时可以提供曲线对比等可视化展示手段。
基于同一发明构思，本发明实施例还提供了一种分布式电网调控运行数据的检索系统，可以用于实现上述实施例所描述的方法。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的系统较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。例如，如果用硬件来实现，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
图4是本发明实施例的分布式电网调控运行数据的检索系统的结构框图，如图4所示，该系统包括：省级调度机构100和多个地级调度机构200；省级调度机构100和多个地级调度机构200均设置有检索服务器300，各检索服务器300之间通过广域服务总线400进行数据传输。参考图1，各调度机构还设置有历史数据服务器和配置数据服务器，供检索服务器300读取数据。
如图5所示，检索服务器300包括：
接收单元301，用于接收用户输入的检索请求，其中，检索请求包括：量测点表达式；
解析单元302，用于解析量测点表达式，得到电网量测点；
检索单元303，用于基于检索请求和预先建立的倒排索引库，对电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，倒排索引库存储在检索服务器中；
输出单元304，用于输出检索结果。
通过上述系统，在调度机构设置检索服务器，管理各个调度机构的历史数据，各检索服务器之间可以进行数据传输，基于倒排索引库进行并行检索和处理，在用户接受的时间范围内检索大量的数据并反馈，提高了电网调控运行数据的检索效率，且能够基于检索得到的数据进行处理分析，增强了数据分析能力，由此实现用户对分布式省地两级电网调控运行数据的自主检索分析，提高了检索效率，也提高了用户体验。同时，电网调控运行数据的检索公式能够自定义且提供对应的解析技术，实现了数据查询条件、查询内容的自主定义，快速响应用户的临时数据查询和分析需求，提高专业业务运转效率。
上述检索请求还可以包括：检索的时间范围、指标范围和数据的采样周期。
检索服务器300还包括：建立单元，用于建立倒排索引库。具体的，建立单元包括：第一建立模块，用于建立电力领域词汇库；第一存储模块，用于存储该词汇库，其中每个词汇对应唯一编号；转换模块，用于对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；第二建立模块，用于建立电网量测点的倒排列表，其中，倒排列表中记录有词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；第二存储模块，用于对倒排列表进行压缩，并分块存储倒排列表。
在一个实施例中，检索单元303包括：第一划分模块，用于将检索请求中的时间范围划分为多个时间段；检索模块，用于按照多个时间段，对多个时间段对应的电网调控运行数据进行并行检索和处理；合并模块，用于将多个时间段的检索结果进行合并；第二划分模块，用于根据电网量测点所属的调度机构，将检索请求划分为多个查询请求；获取模块，用于将多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与查询请求对应的电网调控运行数据，并由省级调度机构的检索服务器对获取的电网调控运行数据进行合并。
上述量测点表达式所使用的函数可以包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数。
检索单元303可以包括：处理模块，用于按照用户选择的处理方式对检索到的数据进行处理，其中，处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线。
当然，上述模块划分只是一种示意划分，本发明并不局限于此。只要能实现本发明的目的的模块划分，均应属于本发明的保护范围。
图6是本发明实施例的系统逻辑架构图，如图6所示，在逻辑架构上，系统自下而上分为存储层、数据层、计算层和应用层。其中，存储层包括D5000模型数据、多级调度分布式历史数据、配置信息库以及量测点倒排索引库。数据层访问存储层的数据，然后对计算层提供数据接口服务。计算层主要实现倒排索引的管理、分布式存储的管理、并行计算、公式定义和解析等核心功能。应用层主要提供时间自主定义、范围自主定义、公式自主定义、电网运行数据的查询和分析、数据的展示等功能，为用户提供最终的展示服务。
综上所述，本发明提供的分布式电网调控运行数据的检索方法及系统，基于电网设备模型和两级调度海量电网运行历史数据，以及厂站、设备与模拟信号量测之间的关系，采用了分布式存储计算技术，提供了电网量测点索引技术、电网历史数据并行计算技术、电网调控运行数据公式自定义与解析技术，解决了海量电网调度运行数据的自主公式定义、快速检索、自主分析的问题。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (4)
1.一种分布式电网调控运行数据的检索方法，其特征在于，包括：
接收用户输入的检索请求，其中，所述检索请求包括：用户自定义的量测点表达式；
解析所述量测点表达式，得到电网量测点；
基于所述检索请求和预先建立的倒排索引库，对所述电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，所述倒排索引库存储在检索服务器中，省级调度机构和地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输；
输出所述检索结果；
所述量测点表达式所使用的函数包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数；
对所述电网量测点的电网调控运行数据进行并行检索和处理，包括：
按照用户选择的处理方式对检索到的数据进行处理，其中，所述处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线；
所述检索请求还包括：检索的时间范围、指标范围和数据的采样周期；
在接收用户输入的检索请求之前，所述方法还包括通过以下步骤建立所述倒排索引库：
建立电力领域词汇库，并存储该词汇库，其中每个词汇对应唯一编号；
对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；
建立电网量测点的倒排列表，其中，所述倒排列表中记录有所述词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；
对所述倒排列表进行压缩，并分块存储所述倒排列表。
2.根据权利要求1所述的方法，其特征在于，对所述电网量测点的电网调控运行数据进行并行检索和处理，包括：
将所述检索请求中的时间范围划分为多个时间段；
按照所述多个时间段，对所述多个时间段对应的电网调控运行数据进行并行检索和处理；
将所述多个时间段的检索结果进行合并；
根据所述电网量测点所属的调度机构，将所述检索请求划分为多个查询请求；
将所述多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与所述查询请求对应的电网调控运行数据；
所述省级调度机构的检索服务器对获取的电网调控运行数据进行合并。
3.一种分布式电网调控运行数据的检索系统，其特征在于，包括：省级调度机构和多个地级调度机构；所述省级调度机构和所述多个地级调度机构均设置有检索服务器，各检索服务器之间通过广域服务总线进行数据传输；
所述检索服务器包括：
接收单元，用于接收用户输入的检索请求，其中，所述检索请求包括：用户自定义的量测点表达式；
解析单元，用于解析所述量测点表达式，得到电网量测点；
检索单元，用于基于所述检索请求和预先建立的倒排索引库，对所述电网量测点的电网调控运行数据进行并行检索和处理，得到检索结果，其中，所述倒排索引库存储在检索服务器中；
输出单元，用于输出所述检索结果；
所述量测点表达式所使用的函数包括：加、减、乘、除以及自定义的绝对值函数、三角函数、四舍五入函数、正弦函数、余弦函数；
所述检索单元包括：
处理模块，用于按照用户选择的处理方式对检索到的数据进行处理，其中，所述处理方式包括以下至少之一：求最大值、求最小值、求平均值、求积分值、求合格率、求波动率、获取数据曲线；
所述检索请求还包括：检索的时间范围、指标范围和数据的采样周期；
所述检索服务器还包括：建立单元，用于建立所述倒排索引库；
所述建立单元包括：
第一建立模块，用于建立电力领域词汇库；
第一存储模块，用于存储该词汇库，其中每个词汇对应唯一编号；
转换模块，用于对已知电网量测点进行分词，将每个电网量测点转换成由词汇序列构成的数据流；
第二建立模块，用于建立电网量测点的倒排列表，其中，所述倒排列表中记录有所述词汇库中的词汇与倒排列表的对应关系以及词汇在电网量测点中出现的位置信息；
第二存储模块，用于对所述倒排列表进行压缩，并分块存储所述倒排列表。
4.根据权利要求3所述的系统，其特征在于，所述检索单元包括：
第一划分模块，用于将所述检索请求中的时间范围划分为多个时间段；
检索模块，用于按照所述多个时间段，对所述多个时间段对应的电网调控运行数据进行并行检索和处理；
合并模块，用于将所述多个时间段的检索结果进行合并；
第二划分模块，用于根据所述电网量测点所属的调度机构，将所述检索请求划分为多个查询请求；
获取模块，用于将所述多个查询请求分发到对应的调度机构，由调度机构的检索服务器获取与所述查询请求对应的电网调控运行数据，并由所述省级调度机构的检索服务器对获取的电网调控运行数据进行合并。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610009588.6A CN105574204B (zh) | 2016-01-08 | 2016-01-08 | 分布式电网调控运行数据的检索方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610009588.6A CN105574204B (zh) | 2016-01-08 | 2016-01-08 | 分布式电网调控运行数据的检索方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105574204A CN105574204A (zh) | 2016-05-11 |
| CN105574204B true CN105574204B (zh) | 2020-07-24 |
Family
ID=55884335
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610009588.6A Active CN105574204B (zh) | 2016-01-08 | 2016-01-08 | 分布式电网调控运行数据的检索方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105574204B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110119417A (zh) * | 2019-06-11 | 2019-08-13 | 广东电网有限责任公司 | 一种变电站远动数据智能校核分析系统及校核分析方法 |
| CN111666342B (zh) * | 2020-06-04 | 2023-08-18 | 重庆英楼维兴信息科技有限公司 | 一种基于微服务架构的数据采样方法及相关装置 |
| CN115034568B (zh) * | 2022-05-18 | 2023-06-27 | 湖南鸿业变压器有限公司 | 一种分布式智能电网处理系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103377229A (zh) * | 2012-04-25 | 2013-10-30 | 国家电网公司 | 电网设备和设施的信息的提供方法与提供装置 |
| CN104239447A (zh) * | 2014-09-01 | 2014-12-24 | 江苏瑞中数据股份有限公司 | 电网时序大数据存储方法 |
| CN104317966A (zh) * | 2014-11-18 | 2015-01-28 | 国家电网公司 | 一种用于电力大数据快速组合查询的动态索引方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9275306B2 (en) * | 2013-11-13 | 2016-03-01 | Canon Kabushiki Kaisha | Devices, systems, and methods for learning a discriminant image representation |
-
2016
- 2016-01-08 CN CN201610009588.6A patent/CN105574204B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103377229A (zh) * | 2012-04-25 | 2013-10-30 | 国家电网公司 | 电网设备和设施的信息的提供方法与提供装置 |
| CN104239447A (zh) * | 2014-09-01 | 2014-12-24 | 江苏瑞中数据股份有限公司 | 电网时序大数据存储方法 |
| CN104317966A (zh) * | 2014-11-18 | 2015-01-28 | 国家电网公司 | 一种用于电力大数据快速组合查询的动态索引方法 |
Non-Patent Citations (4)
| Title |
|---|
| 《电网调度广域分布式实时数据库系统体系架构和关键技术》;翟明玉等;《电力系统自动化》;20130125;第37卷(第2期);正文第67-71页 * |
| 《电网调度省地一体化试点工程关键技术方案》;赵家庆等;《电力系统自动化》;20121210;第36卷(第23期);正文第120-125页 * |
| 《面向多级调度管理的融合型搜索引擎》;丁杰等;《电力系统自动化》;20140210;第38卷(第3期);正文第150-154页 * |
| 丁杰等.《面向多级调度管理的融合型搜索引擎》.《电力系统自动化》.2014,第38卷(第3期),正文第150-154页. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105574204A (zh) | 2016-05-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107402976B (zh) | 一种基于多元异构模型的电网多源数据融合方法及系统 | |
| CN113064866B (zh) | 一种电力业务数据整合系统 | |
| CN111552813A (zh) | 一种基于电网全业务数据的电力知识图谱构建方法 | |
| CN101566981A (zh) | 分析处理系统中建立动态虚拟数据仓库的方法 | |
| CN105574204B (zh) | 分布式电网调控运行数据的检索方法及系统 | |
| CN112632025A (zh) | 一种基于paas平台的电网企业管理决策支持应用系统 | |
| CN108876154B (zh) | 一种电网规划大数据分析系统 | |
| CN111382155B (zh) | 一种数据仓库的数据处理方法、电子设备及介质 | |
| CN110706125A (zh) | 水利大数据分析信息服务系统和平台服务系统 | |
| CN115934856A (zh) | 一种构造综合能源数据资产的方法和系统 | |
| CN105574188A (zh) | 一种数据分维度分层次管理的方法及系统 | |
| CN117573646A (zh) | 一种基于维度建模的数据管理方法及系统 | |
| CN103226794A (zh) | 一种输配电线路数据处理的方法 | |
| CN112540987A (zh) | 一种基于数据集市的配用电大数据管理系统 | |
| Dong et al. | Research on Architecture of Power Big Data High-Speed Storage System for Energy Interconnection | |
| CN111078731A (zh) | 基于Hbase的电网运行数据协同查询方法、设备及存储介质 | |
| CN113515515B (zh) | 客户数据和电网设备数据融合方法、装置、设备及介质 | |
| Viharos et al. | ” Big Data” Initiative as an IT Solution for Improved Operation and Maintenance of Wind Turbines | |
| CN112055065A (zh) | 一种基于调控云的继电保护SaaS层应用数据处理方法 | |
| Jia et al. | Research on real time data warehouse architecture | |
| Qi et al. | Network electronic record management based on linked data | |
| CN109242301A (zh) | 一种基于大数据架构的土地绩效交互式实时分析方法 | |
| CN113706060B (zh) | 电网调控数据资产处理方法、系统、设备及存储介质 | |
| CN116303475B (zh) | 一种多源指标数据智能存储的管理方法及装置 | |
| Qian et al. | Architecture and business model of power grid marketing and distribution integration system based on middle platform technology |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |