CN103955492A - 一种电力系统中数据存储的方法 - Google Patents

一种电力系统中数据存储的方法 Download PDF

Info

Publication number
CN103955492A
CN103955492A CN201410152621.1A CN201410152621A CN103955492A CN 103955492 A CN103955492 A CN 103955492A CN 201410152621 A CN201410152621 A CN 201410152621A CN 103955492 A CN103955492 A CN 103955492A
Authority
CN
China
Prior art keywords
value
data
key
plant stand
sqlcondition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410152621.1A
Other languages
English (en)
Inventor
王小立
温靖华
罗美玲
王辉
于乐
王康
夏芸
龚仁敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING JOIN BRIGHT ELECTRIC POWER TECHNOLOGY Co Ltd
State Grid Ningxia Electric Power Co Ltd
Original Assignee
BEIJING JOIN BRIGHT ELECTRIC POWER TECHNOLOGY Co Ltd
State Grid Ningxia Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING JOIN BRIGHT ELECTRIC POWER TECHNOLOGY Co Ltd, State Grid Ningxia Electric Power Co Ltd filed Critical BEIJING JOIN BRIGHT ELECTRIC POWER TECHNOLOGY Co Ltd
Priority to CN201410152621.1A priority Critical patent/CN103955492A/zh
Publication of CN103955492A publication Critical patent/CN103955492A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06—Energy or water supply

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Public Health (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种电力系统中数据存储的方法，属于电力系统自动化的技术领域。该方法在缓存服务器上采用Redis进行存储，通过周期性地把更新的数据写入磁盘或把修改操作写入追加的记录文件，保证了数据的持久化，防止在线校核中数据的丢失；其Maste-S1ave(主从)同步的方式提供了高可用性和可靠的平台；同时由于文件上传在内存中进行，大幅度缩短了文件上传的响应时间，缩短了在线校核整体计算的时间。

Description

一种电力系统中数据存储的方法
技术领域
本发明属于电力系统自动化的技术领域，具体地涉及一种电力系统中数据存储的方法。
背景技术
继电保护定值在线校核是从智能调度技术支持系统（下文记为SG-OSS）导出数据进行校核，根据建设要求，基于SG-OSS平台的定值在线校核系统中没有自身专门数据库，需要采用内存的数据缓冲层来替代原来的数据库操作，即所谓的NoSQL（Not Only SQL）数据存储。NoSQL不需要固定的表结构，通常也不存在连接操作。在大数据存取上具备快速和占用内存少的优势。Redis(Remote Dictionary Server)属于NoSQL的一种，与Memcache相似，采用Key-value的存储模式，加速了键值和内容的快速定位和排序。但Redis支持更多的数据类型，包括字符串(String)、链表(List)、集合(set)、有序集合(Zset)、哈希(Hash)等。为了保证效率，Redis数据都是缓存在内存中，与Memcache只是用来做缓存相比Redis适用的场景更多，并且可以直接用于数据存储服务。Radis以高效的读写效率及其丰富的数据类所带来的快速开发和作为缓存的安全性得到使用。
本发明将Redis数据存储方法用于电力系统的数据存储领域。
发明内容
为了克服上述现有技术的不足，本发明提供一种电力系统中数据存储的方法。
本发明的技术解决方案是：基于SG-OSS平台的定值在线校核系统中没有自身专门数据库，需要采用内存的数据缓冲层来替代原来的数据库操作。由于大量数据的处理和在线校核时间的要求，必须减少查询数据库的时间，使得关系型数据库难以满足要求，需采用非关系型数据库。Redis以其高速的读写性能，以及支持多种数据类型而得到应用。并且对于单表的查询建立查询对象，减少查询次数。
与现有技术相比，本发明的有益效果是：在缓存服务器上采用Redis进行存储，通过建立Key-value存储模式的方法，能够提高查找的效率，从而提高了计算机的运算率。同时通过采用SQL语句按照SqlStringModel的格式建立对象，为此可以减少查询次数，提高效率。
附图说明
图1为根据本发明的电力系统中数据存储的方法的流程图。
图2为建立SQL时以SqlStringModel的格式建立对象结构图。
具体实施方式
如图1所示，这种电力系统中数据存储的方法，该方法包括以下步骤：
（1）建立Key-value的存储模式；
（2）在数据缓冲层获得到对应在数据缓冲层的表；
（3）将SQL语句按照约定的格式建立对象；
（4）对获得数据缓冲层的表进行查询，得到返回条件的行数组；
（5）对每行数据操作，得到要操作的列，并取到该列的值。
以下详细说明本发明的内容。
Redis的数据在内存中始终是以key值作为索引，value则使用字符串。所以在电力系统中，首先需要确定的是定义key的值的格式。
根据关系型数据库的表字段定义，我们可以仿照其表名和字段名的方法，用下面的格式来对key进行定义：
键值对名称：索引标示：value的字段名
比如一个键值对的名称是A，这个键值对保存所有区域信息。因此对于这个键值对中的索引标示就是区域的ID，如果某个区域的ID是区域A，它有N个厂站，那这个键值对的key格式就用
key=A：“区域A”：Area value=所有厂站ID
由于ID=“区域A”是个唯一的标示，所以对于这个key也是唯一。
在一个电力系统结构中，按照包含关系可以分为区域、厂站和厂站内元件几类。
区域与厂站关系键值对A=[key=区域ID，value=厂站ID]，这样就可以查找一个区域内的所有厂站，若要查找厂站所属区域，将key和value互相颠倒即可。
这样设定的键值对就存在两种key，可以使用约定的键值样式设计，如下：
键值对名称：索引标示：区域ID
键值对名称：索引标示：厂站ID
再比如ID标示为区域B的一个区域的拥有一个ID为厂站B的一个厂站，那内存中就保存如下形式：
[key B：“区域B”：StationID，value=“厂站B”]
对于所有的厂站的详细信息，仍然可以通过增加一个Key-value对来实现。
[key C：“厂站C”：StationID，value=元件信息]
其中，元件信息包括线路、变压器和发电机等。
对于元件的详细信息如节点、电压等级、阻抗信息等。采用NoSQL文档型数据来保存永久值，当需要数据时，再进行查询和返回信息。
当对表进行多条件查询时，可以采用将多条件的处理层级关系为2层关系。
SqlCondition类：对应SQL语句中的小的判断语句，类中记录字段、操作符、比较值。
其中几个字段的表示的内容如下：
sFiled（string）对应数据库中的字段名称；
sOperatorSign（string）中比较符号：能支持的有>、<、>=、<=、=、like等；
sCompareValue（string）为做对比的值；
多个条件存在时，每个条件对应成一个SqlCondition类。
SqlConditionGroup类：SqlCondition的集合类。对应SQL语句中的一组小语句。每个SqlConditionGroup可以有几个SqlCondition组成，并记录这几个SqlCondition的操作符是and或or，当SqlConditionGroup中的SqlCondition个数是1个时，操作符没有意义。
多个SqlConditionGroup可以集合为一个SqlStringModel类，并记录这几个SqlConditionGroup之间的操作符是and或or。
这样就可以通过建立对象的方式查找到负荷条件的表，然后对表格进行select查询，获得行数组，再得到所要操作的列，及所要查询的值。
以查找宁夏.青铜峡站.大铜II线为例，首先采用两个Key-value语句
[key=“宁夏”，value=“青铜峡站”]
[key=“青铜峡站”，value=“线路”]
找到所有符合区域和厂站信息的线路；
然后Select*from Table
Where A=“大铜II线”即可获得所有有关大铜II线的信息，通过列定位选取所需信息，为在线校核做好数据准备。
以上所述，仅是本发明的较佳实施例，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属本发明技术方案的保护范围。

Claims (3)

1.一种电力系统中数据存储的方法，其特征在于：该方法包括以下步骤： 
（1）建立Key-value的存储模式； 
（2）在数据缓冲层获得到对应在数据缓冲层的表； 
（3）将SQL语句按照约定的格式建立对象； 
（4）对获得数据缓冲层的表进行查询，得到返回条件的行数组； 
（5）对每行数据操作，得到要操作的列，并取到该列的值。 
2.根据权利要求1所述的一种电力系统中数据存储的方法，其特征在于：建立Key-value存储模式的方法，具体包括以下步骤： 
（a1）通过区域查找厂站，key=区域ID，value=厂站ID； 
（a2）通过厂站查找元件，key=厂站ID，value=元件ID。 
3.根据权利要求1所述的一种电力系统中数据存储的方法，其特征在于：将SQL语句按照SqlStringModel的格式建立对象，具体包括以下步骤： 
（a1）建立SqlCondition类，包括sFiled对应数据库中的字段名称；sOperatorSign中比较符号，sCompareValue为做对比的值； 
（a2）建立SqlConditionGroup类，由多个SqlCondition组成，并且记录这几个SqlCondition的操作符是and或or； 
（a3）建立SqlStringModel类，由多个SqlConditionGroup组成，并且记录这几个SqlCondition的操作符是and或or。 
CN201410152621.1A 2014-04-17 2014-04-17 一种电力系统中数据存储的方法 Pending CN103955492A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410152621.1A CN103955492A (zh) 2014-04-17 2014-04-17 一种电力系统中数据存储的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410152621.1A CN103955492A (zh) 2014-04-17 2014-04-17 一种电力系统中数据存储的方法

Publications (1)

Publication Number Publication Date
CN103955492A true CN103955492A (zh) 2014-07-30

Family

ID=51332767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410152621.1A Pending CN103955492A (zh) 2014-04-17 2014-04-17 一种电力系统中数据存储的方法

Country Status (1)

Country Link
CN (1) CN103955492A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105956006A (zh) * 2016-04-21 2016-09-21 贵州电网有限责任公司信息中心 一种键值对数据存储的结构化查询系统
CN106503038A (zh) * 2016-09-19 2017-03-15 福建天泉教育科技有限公司 一种自动缓存网络请求返回数据的方法及系统
CN106597968A (zh) * 2016-12-24 2017-04-26 大连尚能科技发展有限公司 一种基于Redis的变流器高速实时监控系统和方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120078978A1 (en) * 2010-09-28 2012-03-29 Yiftach Shoolman System, methods, and media for compressing non-relational database objects
CN102426582A (zh) * 2011-09-29 2012-04-25 用友软件股份有限公司 数据操作管理装置和数据操作管理方法
CN103473267A (zh) * 2013-08-09 2013-12-25 深圳市中科新业信息科技发展有限公司 数据存储查询方法及系统
CN103530335A (zh) * 2013-09-30 2014-01-22 广东电网公司汕头供电局 电力计量采集系统的入库操作方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120078978A1 (en) * 2010-09-28 2012-03-29 Yiftach Shoolman System, methods, and media for compressing non-relational database objects
CN102426582A (zh) * 2011-09-29 2012-04-25 用友软件股份有限公司 数据操作管理装置和数据操作管理方法
CN103473267A (zh) * 2013-08-09 2013-12-25 深圳市中科新业信息科技发展有限公司 数据存储查询方法及系统
CN103530335A (zh) * 2013-09-30 2014-01-22 广东电网公司汕头供电局 电力计量采集系统的入库操作方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
阿姆斯特朗: "深入ASP.NET2.0开发", 《北京.人民邮电出版社》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105956006A (zh) * 2016-04-21 2016-09-21 贵州电网有限责任公司信息中心 一种键值对数据存储的结构化查询系统
CN106503038A (zh) * 2016-09-19 2017-03-15 福建天泉教育科技有限公司 一种自动缓存网络请求返回数据的方法及系统
CN106597968A (zh) * 2016-12-24 2017-04-26 大连尚能科技发展有限公司 一种基于Redis的变流器高速实时监控系统和方法

Similar Documents

Publication Publication Date Title
CN107423422B (zh) 基于网格的空间数据分布式存储及检索方法和系统
CN104252536B (zh) 一种基于hbase的上网日志数据查询方法及装置
CN106202112A (zh) 缓存目录刷新方法和装置
CN105740295B (zh) 一种分布式数据的处理方法及装置
CN103577440A (zh) 一种非关系型数据库中的数据处理方法和装置
CN106708993A (zh) 基于大数据技术的空间数据存储处理中间件框架实现方法
CN104536904A (zh) 一种数据管理的方法、设备与系统
CN104331446A (zh) 一种基于内存映射的海量数据预处理方法
CN104484131B (zh) 多磁盘服务器的数据处理装置及对应的处理方法
CN105389367A (zh) 基于Mongo数据库的电网图形多时态多级分布式存储方法
CN104035956A (zh) 一种基于分布式列存储的时间序列数据存储方法
CN109271449A (zh) 一种基于文件的分布式存储查询系统及查询方法
CN105373621A (zh) 一种快速的跨数据库系统的数据增量迁移方法
CN101963993B (zh) 一种数据库单表记录快速查找的方法
CN107798062A (zh) 一种变电站历史数据统一存储方法和系统
CN106649652A (zh) 基于Hadoop的变电站主设备在线监测系统构架方法
CN107741947A (zh) 基于hdfs文件系统的随机数密钥的存储与获取方法
CN110888878A (zh) 一种面向业务的主数据管理方法及系统
CN107609151A (zh) 基于Redis实现XBRL实例文档缓存的方法
CN104636401A (zh) 一种scada系统数据回滚的方法及装置
CN103279489A (zh) 一种元数据的存储方法、装置
CN109739854A (zh) 一种数据存储方法及装置
CN103365987A (zh) 一种基于共享磁盘架构的集群数据库系统及数据处理方法
CN103955492A (zh) 一种电力系统中数据存储的方法
CN110134511A (zh) 一种OpenTSDB共享存储优化方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140730