CN105303292A - 配电数据存储方法和装置 - Google Patents
配电数据存储方法和装置 Download PDFInfo
- Publication number
- CN105303292A CN105303292A CN201510596124.5A CN201510596124A CN105303292A CN 105303292 A CN105303292 A CN 105303292A CN 201510596124 A CN201510596124 A CN 201510596124A CN 105303292 A CN105303292 A CN 105303292A
- Authority
- CN
- China
- Prior art keywords
- data
- power dispatching
- analysis result
- stored
- storage mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E40/00—Technologies for an efficient electrical power generation, transmission or distribution
- Y02E40/70—Smart grids as climate change mitigation technology in the energy generation sector
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Supply And Distribution Of Alternating Current (AREA)
Abstract
本发明公开了一种配电数据存储方法和装置。该配电数据存储方法包括:获取配电数据,其中,配电数据为目标电力系统的运行数据;解析配电数据,得到解析结果;以及根据解析结果将配电数据以分布式存储方式存储到预设区域。通过本发明,达到了提高电力系统运营效率的效果。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种配电数据存储方法和装置。
背景技术
目前,随着企业计算机技术应用的不断深入,针对某专业或者某方面管理需求而引入的各种应用系统,比如,用于配电网建设的用电信息采集系统、配电自动化系统和调度自动化系统以及各业务管理系统,在单个业务领域的管理上有自己的特点。各电力系统之间的配网规划、运行调度、设备检修、营销客服等专业的电力系统功能需要不断完善,比如,集成用电信息采集系统、配电自动化系统和调度自动化系统以及各业务管理系统的数据,优化配网规划方案的评估,完善配网负荷预测模型,细化实时线损的管理,增强配网故障的诊断,提升配网设备运维的水平,提升客户服务支撑的能力等。
对于一个完整的电力信息系统,有自己的信息数据中心、操作系统、应用软件和用户界面。要对电力信息系统的数据和数据环境进行统一管理和监控,各信息系统之间的联机事务处理、联机分析处理数据需要紧密地结合。
但是,由于电力系统无法面向整个业务过程,不同软件之间,不同电力系统之间的信息数据不能共享和交换,从而使电力系统的设计、管理,生产的数据不能交流,进一步使各个电力系统之间难以紧密集成。另一方面,企业紧密相连的业务被这些分散的电力系统分隔开来,企业运作的基本元素包括人力、财力、物力、信息和流程,不能统一被管理,并在突破各种屏障和边界的工作环境下进行系统地调配和紧密地整合,产生“信息孤岛”,使得企业不得不花费大量的人力、物力在不同的电力系统之间进行切换,从而导致电力系统的运营迟缓,电力运营效率低,难以为企业进行一致性地协作和服务。
针对相关技术中电力运营效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明的主要目的在于提供一种配电数据存储方法和装置,以至少解决电力系统运营效率低的问题。
为了实现上述目的,根据本发明的一个方面,提供了一种配电数据存储方法。该配电数据存储方法包括:获取配电数据,其中,配电数据为目标电力系统的运行数据;解析配电数据,得到解析结果;以及根据解析结果将配电数据以分布式存储方式存储到预设区域。
进一步地,解析配电数据包括:解析配电数据,得到通用数据的解析结果,其中,通用数据为目标电力系统的基本运行数据,根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据通用数据的解析结果将通用数据以分布式存储方式存储到通用数据存储区,其中,通用数据存储区是用于存储目标电力系统的基本运行数据的区域。
进一步地,根据通用数据的解析结果将通用数据以分布式存储方式存储到通用数据存储区包括:确定通用数据的存储模型;扩展存储模型,得到扩展后的存储模型;根据扩展后的存储模型将通用数据存储区按照通用数据的主题进行分域,得到多个分域存储区;以及将通用数据存储到对应的分域存储区。
进一步地,解析配电数据包括:解析配电数据,得到实时数据的解析结果,根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区。
进一步地,根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区之后,该配电数据存储方法还包括:获取实时数据的时序数据;对时序数据进行计算,得到计算结果;确定数据服务接口;以及根据数据服务接口对计算结果进行查询。
进一步地,解析配电数据包括:解析配电数据,得到历史数据的解析结果,根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区。
进一步地,根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区之后,该配电数据存储方法还包括:确定历史数据的查询接口;分析查询接口,得到分析结果;以及根据分析结果对历史数据进行查询。
进一步地,解析配电数据包括:统计配电数据的使用频率,判断使用频率是否大于预设阈值,如果判断出配电数据小于预设阈值,则确定配电数据为历史数据,根据解析结果将配电数据以分布式存储方式存储到预设区域包括:将历史数据存储到历史数据存储区。
进一步地,在根据解析结果将配电数据以分布式存储方式存储到预设区域之后,该配电数据存储方法还包括:从预设区域获取配电数据;在内存中对配电数据进行实时计算,得到数据视图,其中,数据视图用于展示配电数据的计算结果;分析数据视图,得到分析结果;以及输出分析结果。
为了实现上述目的,根据本发明的另一方面,还提供了一种配电数据存储装置。该配电数据存储装置包括:获取单元,用于获取配电数据,其中,配电数据为目标电力系统的运行数据;解析单元,用于解析配电数据,得到解析结果;以及存储单元,用于根据解析结果将配电数据以分布式存储方式存储到预设区域。
通过本发明,采用获取配电数据,其中,配电数据为目标电力系统的运行数据,然后解析配电数据,得到解析结果,再根据解析结果将配电数据以分布式存储方式存储到预设区域,解决了电力系统运营效率低的问题,进而达到了提高电力系统运营效率的效果。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的配电数据存储方法的流程图;以及
图2是根据本发明实施例的配电数据存储装置的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供了一种配电数据存储方法。
图1是根据本发明实施例的配电数据存储方法的流程图。如图1所示,该配电数据存储方法包括以下步骤:
步骤S102,获取配电数据,其中,配电数据为目标电力系统的运行数据。
配电数据可以是结构化数据、非结构化数据、实时数据、地理信息系统(GeographicInformationService,简称为GIS)数据。结构化数据包括建立在信息技术基础上的企业资源计划系统(EnterpriseResourcePlanning,简称为ERP)数据、生产的现状数据、营销的短期电费数据等,其中,结构化数据具有高速存储、数据备份、数据共享、数据容灾的存储需求。非结构化数据包括视频、音频、图片、文档、文本等形式的数据。实时数据是各项业务应用在实时采集时的能够准确反映当前电力生产运行状况的数据,包括主配网运行数据、用电信息、电网安全数据、输电在线监测和气象数据等。GIS数据是对空间信息进行分析和处理所得到的地理分布数据。
获取配电数据,可选地,通过实时采集、定时采集、批量采集的方式获取配电数据。实时采集,也即,采集当前电力系统运行时产生的配电数据。定时采集,也即,在预设时间或者预设时间内采集电力系统运行时产生的配电数据。批量采集,也即,当电力系统运行时产生的配电数据达到预设数量时,对预设数量的电力系统的配电数据进行采集。采集到的配电数据为目标电力系统的运行数据,比如,生产的现状数据、营销的短期电费数据、生产设备的检修历史电费数据、营销的历史电费数据、历史气象数据等。
步骤S104,解析配电数据,得到解析结果。
在获取配电数据之后,对采集到的配电数据进行解析。可选地,根据配电数据的性质对配电数据进行解析。优选地,根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到通用数据的解析结果。通用数据为目标电力系统的基本运行数据。比如,生产现状数据、营销数据的短期电费数据等为通用数据。
优选地,根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到的通过实时采集方式获取的实时数据。实时数据是各业务系统运行时,实时产生的运行数据,包括时序数据,能够反映当前电力系统的运行状况。可选地,实时数据由海量数据管理平台接入,采用分布式服务来满足电力系统的性能和扩展要求。
优选地,根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到的历史数据。历史数据是随着时间的推移,不断积累沉淀下来的带有时间标识的生产数据,由实时数据转换而来,可以为结构化数据,也可以为非结构化数据。非结构化的数据更适合在大数据分析的场合中应用,比如,生产设备的检修历史电费数据、营销的历史电费数据、历史气象数据等为历史数据。可选地,根据业务实际需求,将不常用的配电数据定期划为历史数据。具体而言,解析配电数据包括:统计配电数据的使用频率,判断配电数据的使用频率是否大于预设阈值,其中,预设阈值为判断配电数据是否经常使用的使用频率标准。如果判断出配电数据的使用频率小于预设阈值,则配电数据不经常使用,确定配电数据为历史数据,如果判断出配电数据大于预设阈值,则配电数据经常使用,确定配电数据不为历史数据。
步骤S106,根据解析结果将配电数据以分布式存储方式存储到预设区域。
在解析配电数据,得到配电数据之后,对解析结果进行计算并存储。根据解析结果将配电数据以分布式存储方式存储到预设区域,具体而言,将计算后的解析结果存储到通用数据存储区、实时数据存储区和历史数据存储区。
优选地,根据解析结果将数据以分布式存储方式存储到预设区域包括:根据通用数据的解析结果将通用数据以分布式存储方式存储到通用数据存储区,其中,通用数据存储区是用于存储目标电力系统的基本运行数据的区域,比如,通用数据存储区存储生产的现状数据,营销的短期电费数据等。在向通用数据存储区存储通用数据之前,确定通用数据的存储模型,可选地,通用数据存储区实现结构化公共信息模型(CommonInformationModel,简称为CIM)的模型数据存储,并且可以与其他数据进行交换处理,以适应电力系统的运行环境;在确定通用数据的存储模型之后,扩展存储模型,得到扩展后的存储模型,扩展后的存储模型包括实时数据库中的测点模型,从而建立测点与用户、设备之间的关联关系;根据扩展后的存储模型,将通用数据存储区按照通用数据的主题进行分域,得到多个分域存储区,多个分域存储区不包括历史数据的存储,从而可以对通用数据存储区按照通用数据的主题对通用数据量进行预估;最后,将通用数据按照不同主题存储到对应的分域存储区。可选地,通用数据存储区从访问量方面考虑,存储有访问频率最高的数据,分域存储区有利于对通用数据存储区进行扩展以存储访问频率最高的数据,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换。
优选地,根据解析结果将数据以分布式存储方式存储到预设区域包括:根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区。可选地,实时数据由海量数据平台来存储,实现海量时序数据的存储。海量实时数据管理平台可以对生产运行过程中各业务应用生成的实时数据进行存储、集中、整合、共享和分析的平台,同时为各实时数据提供标准统一的访问方式,是为智能电网和国家电网企业资源计划(StatesGridEnterpriseResourcePlanning,简称为SG-ERP)的各业务应用,优选地,跨专业跨部门的综合业务应用在实时数据层面提供了技术支撑的信息基础设施。海量实时数据管理平台不仅实现了实时数据的集中和共享,而且支持基于实时数据的状态监测,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,进一步地提高了电力系统运营的效率。
根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区之后,获取实时数据的时序数据;对时序数据进行计算,也即,针对实时数据的时序数据进行二次加工处理计算,通过建立基于实时数据库的时序计算服务,完成对时序数据的基本运算处理,得到计算结果,可选地,可以通过实时数据库对实时数据的时序数据进行计算,得到计算结果;建立基于CIM模型的数据交互服务,确定数据服务接口,可选地,采用高速数据访问和时间序列数据访问的数据服务接口满足大量实时数据的高速访问需求,根据数据服务接口对实时数据的计算结果进行查询,从而访问到主配网运行数据、用电信息、电网安全数据、输电在线监测和气象数据等实时数据。
访问实时数据由数据中心提供,其中,数据中心为特定的网络设备,用来在网络基础设施上对数据信息进行传递、加速、展示、计算、存储,包括原系统、采集层、存储和计算、服务层和应用层。其中,原系统包括结构化数据、非结构化数据、实时数据和GIS;采集层包括实时采集、定时采集和批量采集;存储和计算包括通用数据存储区的CIM模型服务、实时存储区的时序计算服务、历史数据存储区的分布式并行计算,业务分析区的内存计算;服务层包括实时分析服务、消息订阅/发布服务、信息集成平台、交互查询服务、高速数据访问/时间序列数据访问等服务;应用层包括入口、业务查询和移动终端等应用。随着电力系统工作时间的延长,接入到海量数据管理平台的实时数据越来越多,采用分布式服务满足海量数据管理平台存储实时数据和数据中心对数据进行访问的要求。
优选地,根据解析结果将数据以分布式存储方式存储到预设区域包括:根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区。具体而言,在统计配电数据的使用频率,判断使用频率是否大于预设阈值,如果判断出配电数据小于预设阈值,确定配电数据为历史数据之后,根据解析结果将配电数据以分布式存储方式存储到预设区域包括:将历史数据存储到历史数据存储区。历史数据存储区可以实现全量数据的分布式存储,历史数据存储区可以存储结构化数据,也可以存储非结构化数据。分布式存储方式满足了历史数据的大规模存储,在降低成本的同时实现了线性扩展能力和高可用性的效果,进一步提高了电力系统运营的效率。
分布式存储并行计算保证了对数据处理和访问的实时性要求,根据业务实际,将不常用的数据定期转移到历史数据存储区,比如,将生产设备检修历史数据、营销的历史电费数据、历史气象数据等,采用非结构化的形式存储到历史数据存储区。海量实时数据管理平台可以对生产运行过程中各业务应用生成的历史数据进行存储、集中、整合、共享和分析的平台,同时为各历史数据提供标准统一的访问方式,优选地,跨专业跨部门的综合业务应用在历史数据层面提供了技术支撑的信息基础设施。海量实时数据管理平台不仅实现了历史数据的集中和共享,而且支持基于历史数据的状态回访和基于历史数据的分析挖掘等应用,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,进一步提高了电力系统运营的效率。
根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区之后,确定历史数据的查询接口,可选地,通过标准的结构化查询语言(StructuredQueryLanguage,简称为SQL)查询接口;分析查询接口,得到分析结果,可选地,利用非结构化数据平台的数据索引服务对文档、图形类数据进行接口分析等,确保数据利用方式的一致性;根据分析结果对历史数据进行查询,可选地,历史数据存储的同时满足对历史数据的结构化交互查询的需要,从而提高了电力系统运营的效率。
历史数据存储区的模型可以采用CIM、国家电网公司公共信息模型(StatesGridCommonInformationModel,简称为SG-CIM)、E语言等目前电力行业通用的模型标准。这些存储模型存储成本较低,方便扩展,可以方便地同现有的非结构化数据中心进行数据交互。对于基于需要大量历史数据的分析应用,非结构化的数据更适合大数据分析。
在根据解析结果将配电数据以分布式存储方式存储到预设区域之后,也即,根据解析结果将通用数据以分布式存储方式存储到通用数据存储区,将实时数据以分布式存储方式存储到实时数据存储区,将历史数据以分布式存储方式存储到历史数据存储区之后,从预设区域获取配电数据;在内存中对配电数据进行实时计算,得到数据视图,其中,数据视图用于展示配电数据的计算结果,提供标准的SQL接口,与外部进行数据交换;根据业务需要,定制企业通用算法服务,分析数据视图,得到分析结果;在得到分析结果之后,输出分析结果。可选地,实时分析数据视图,得到分析结果,并且实时输出分析结果,由数据中心的业务分析区来完成。业务分析区可以实现数据视图的生成并提供快速访问的服务,由业务需求驱动的,可以为需要对大数据进行分析的应用需求,比如,负荷预测、线损分析等,这部分数据需要从历史数据存储区和通用数据存储区获取,采用基于内存的计算技术,从而达到了对电力系统的配电数据的高速访问效果。
可选地,在步骤S102,步骤S104和步骤S106中,完善数据共享模型,在基于CIM标准的基础上,增加低压电网设备属性模型、用户模型表达模型和低压配网拓扑模型,构建完整的“站-线-变-箱-户”一体化电网资源数据共享模型,为营配调业务融合、设备管理等提供数据访问服务。在对于模型规范管理方面,分析设备模型的使用现状、进行差异比对分析,比如,分析北京设备模型的使用现状、进行差异比对分析,使北京CIM模型和国网SG_CIM模型兼容,并使北京CIM模型逐步向国网SG_CIM模型过渡。PMS2.0电力系统在北京实施的过程中,保证各业务应用系统原有设备接口正常运行。
本发明实施例的配电数据存储方法采用获取配电数据,其中,配电数据为目标电力系统的运行数据,然后解析配电数据,得到解析结果;再根据解析结果将配电数据以分布式存储方式存储到预设区域,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,使信息与业务流程接轨,提高电力系统运营的效率。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本发明实施例还提供了一种配电数据存储装置。需要说明的是,该装置可用于执行本发明实施例的配电数据存储方法。
图2是根据本发明实施例的配电数据存储装置的示意图。如图2所示,该装置包括:获取单元10,解析单元20和存储单元30。
获取单元10,用于获取配电数据,其中,配电数据为目标电力系统的运行数据。
配电数据可以是结构化数据、非结构化数据、实时数据、地理信息系统GIS数据。结构化数据包括建立在信息技术基础上的企业资源计划系统ERP数据、生产的现状数据、营销的短期电费数据等,其中,结构化数据具有高速存储、数据备份、数据共享、数据容灾的存储需求。非结构化数据包括视频、音频、图片、文档、文本等形式的数据。实时数据是各项业务应用在实时采集时的能够准确反映当前电力生产运行状况的数据,包括主配网运行数据、用电信息、电网安全数据、输电在线监测和气象数据等。GIS数据是对空间信息进行分析和处理所得到的地理分布数据。
获取单元10获取配电数据,可选地,获取单元10通过实时采集、定时采集、批量采集的方式获取配电数据。实时采集,也即,采集当前电力系统运行时产生的配电数据。定时采集,也即,在预设时间或者预设时间内采集电力系统运行时产生的配电数据。批量采集,也即,当电力系统运行时产生的配电数据达到预设数量时,对预设数量的电力系统的配电数据进行采集。获取单元10采集到的配电数据为目标电力系统的运行数据,比如,生产的现状数据、营销的短期电费数据、生产设备的检修历史电费数据、营销的历史电费数据、历史气象数据等。
解析单元20,用于解析配电数据,得到解析结果。具体而言,解析单元20解析配电数据,得到通用数据的解析结果,其中,通用数据为目标电力系统的基本运行数据;解析单元20解析配电数据,得到实时数据的解析结果;解析单元20解析配电数据,得到历史数据的解析结果。
在获取单元获取配电数据之后,解析单元20对采集到的配电数据进行解析。可选地,解析单元20根据配电数据的性质对配电数据进行解析。优选地,解析单元20根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到通用数据的解析结果。通用数据为目标电力系统的基本运行数据。比如,生产现状数据、营销数据的短期电费数据等为通用数据。
优选地,解析单元20根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到的通过实时采集方式获取的实时数据。实时数据是各业务系统运行时,实时产生的运行数据,包括时序数据,能够反映当前电力系统的运行状况。可选地,实时数据由海量数据管理平台接入,采用分布式服务来满足电力系统的性能和扩展要求。
优选地,解析单元20根据配电数据的性质对配电数据进行解析包括对配电数据进行解析之后,得到的历史数据。历史数据是随着时间的推移,不断积累沉淀下来的带有时间标识的生产数据,由实时数据转换而来,可以为结构化数据,也可以为非结构化数据。非结构化的数据更适合在大数据分析的场合中应用,比如,生产设备检修历史电费的数据、营销的历史电费数据、历史气象数据等为历史数据。可选地,根据业务实际需求,将不常用的配电数据定期划为历史数据。
解析单元20包括统计模块,判断模块和第一确定模块。具体而言,解析单元20通过统计模块统计配电数据的使用频率,通过判断模块判断配电数据的使用频率是否大于预设阈值,其中,预设阈值为判断配电数据是否经常使用的使用频率标准。如过判断模块判断出配电数据的使用频率小于预设阈值,则配电数据不经常使用,通过第一确定模块确定配电数据为历史数据,如果判断模块判断出配电数据大于预设阈值,则配电数据经常使用,通过第一确定模块确定配电数据不为历史数据。解析单元20将历史数据存储到历史数据存储区。
存储单元30,用于根据解析结果将配电数据以分布式存储方式存储到预设区域。
优选地,存储单元30根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据通用数据的解析结果将通用数据以分布式存储方式存储到通用数据存储区,其中,通用数据存储区是用于存储目标电力系统的基本运行数据的区域,存储单元30包括第二确定模块,扩展模块和分域模块。通过第二确定模块确定通用数据的存储模型,然后通过扩展模块扩展存储模型,得到扩展后的存储模型,再通过分域模块根据扩展后的存储模型将通用数据存储区按照通用数据的主题进行分域,得到多个分域存储区;最后通过存储单元30将通用数据存储到对应的分域存储区。
具体而言,存储单元30根据通用数据的解析结果将通用数据以分布式存储方式存储到通用数据存储区,其中,通用数据存储区是用于存储目标电力系统的基本运行数据的区域,比如,通用数据存储区存储生产的现状数据,营销的短期电费数据等。在向通用数据存储区存储通用数据之前,第二确定模块确定通用数据的存储模型,可选地,通用数据存储区实现结构化公共信息模型CIM的模型数据存储,并且可以与其他数据进行交换处理,以适应电力系统的运行环境;在第二确定模块确定通用数据的存储模型之后,通过扩展模块扩展存储模型,得到扩展后的存储模型,扩展后的存储模型包括实时数据库中的测点模型,从而建立测点与用户、设备之间的关联关系;根据扩展后的存储模型,分域模块将通用数据存储区按照通用数据的主题进行分域,得到多个分域存储区,多个分域存储区不包括历史数据的存储,从而可以对通用数据存储区按照通用数据的主题对通用数据量进行预估;最后,存储单元30将通用数据按照不同主题存储到对应的分域存储区。可选地,通用数据存储区从访问量方面考虑,存储有访问频率最高的数据,分域存储区有利于对通用数据存储区进行扩展以存储访问频率最高的数据,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换。
优选地,存储单元30根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区。存储单元30包括获取模块,计算模块,第三确定模块和第一查询模块。通过获取模块获取实时数据的时序数据,然后通过计算模块对时序数据进行计算,得到计算结果,再通过第三确定模块确定数据服务接口,最后通过第一查询模块根据数据服务接口对计算结果进行查询。
具体而言,存储单元30根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区。可选地,实时数据由海量数据平台来存储,实现海量时序数据的存储。海量实时数据管理平台可以对生产运行过程中各业务应用生成的实时数据进行存储、集中、整合、共享和分析的平台,同时为各实时数据提供标准统一的访问方式,优选地,跨专业跨部门的综合业务应用在实时数据层面提供了技术支撑的信息基础设施。海量实时数据管理平台不仅实现了实时数据的集中和共享,而且支持基于实时数据的状态监测,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,进一步地提高了电力系统运营的效率。存储单元30根据实时数据的解析结果将实时数据以分布式存储方式存储到实时数据存储区之后,存储单元30的获取模块获取实时数据的时序数据;计算模块对时序数据进行计算,也即,计算模块针对实时数据的时序数据进行二次加工处理计算,通过建立基于实时数据库的时序计算服务,完成对时序数据的基本运算处理,得到计算结果,可选地,计算模块可以通过实时数据库对实时数据的时序数据进行计算,得到计算结果;建立基于CIM模型的数据交互服务,第三确定模块确定数据服务接口,可选地,采用高速数据访问和时间序列数据访问的数据服务接口满足大量实时数据的高速访问需求,第一查询模块根据数据服务接口对实时数据的计算结果进行查询,从而访问到主配网运行数据、用电信息、电网安全数据、输电在线监测和气象数据等实时数据。
优选地,存储单元30根据解析结果将配电数据以分布式存储方式存储到预设区域包括:根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区。存储单元30包括第四确定模块,分析模块和第二查询模块。通过第四确定模块确定历史数据的查询接口,通过分析模块分析查询接口,得到分析结果,再通过第二查询模块根据分析结果对历史数据进行查询。具体而言,存储单元30根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区之后,通过第四确定模块确定历史数据的查询接口,可选地,通过标准的SQL查询接口;通过分析模块分析查询接口,得到分析结果,可选地,利用非结构化数据平台的数据索引服务对文档、图形类数据进行接口分析等,确保数据利用方式的一致性;通过第二查询模块根据分析结果对历史数据进行查询,可选地,历史数据存储的同时满足对历史数据的结构化交互查询的需要,从而提高了电力系统运营的效率。
优选地,解析单元20根据历史数据的解析结果将历史数据以分布式存储方式存储到历史数据存储区。具体而言,在统计模块统计配电数据的使用频率,判断模块判断使用频率是否大于预设阈值,如果判断模块判断出配电数据小于预设阈值,第一确定模块确定配电数据为历史数据之后,存储单元30将历史数据存储到历史数据存储区。历史数据存储区可以实现全量数据的分布式存储,历史数据存储区可以存储结构化数据,也可以存储非结构化数据。分布式存储方式满足了历史数据的大规模存储,在降低成本的同时实现了线性扩展能力和高可用性的效果,进一步提高了电力系统运营的效率。
分布式存储并行计算保证了对数据处理和访问的实时性要求,根据业务实际,存储单元30将不常用的数据定期存储到历史数据存储区,比如,将生产设备检修历史数据、营销的历史电费数据、历史气象数据等,采用非结构化的形式存储到历史数据存储区。海量实时数据管理平台可以对生产运行过程中各业务应用生成的历史数据进行存储、集中、整合、共享和分析的平台,同时为各历史数据提供标准统一的访问方式,优选地,跨专业跨部门的综合业务应用在历史数据层面提供了技术支撑的信息基础设施。海量实时数据管理平台不仅实现了历史数据的集中和共享,而且支持基于历史数据的状态回访和基于历史数据的分析挖掘等应用,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,进一步提高了电力系统运营的效率。
在根据解析结果将配电数据以分布式存储方式存储到预设区域之后,该配电数据存储装置的获取单元10还用于从预设区域获取配电数据;该装置还包括计算单元,用于在内存中对配电数据进行实时计算,得到数据视图,其中,数据视图用于展示配电数据的计算结果;该装置还包括分析单元,用于分析数据视图,得到分析结果;该装置还包括输出单元,用于输出分析结果。具体而言,在存储单元30根据解析结果将配电数据以分布式存储方式存储到预设区域之后,也即,存储单元30根据解析结果将通用数据以分布式存储方式存储到通用数据存储区,将实时数据以分布式存储方式存储到实时数据存储区,将历史数据以分布式存储方式存储到历史数据存储区之后,通过获取单元10从预设区域获取配电数据,通过计算单元在内存中对配电数据进行实时计算,得到数据视图,其中,数据视图用于展示配电数据的计算结果,提供标准的SQL接口,与外部进行数据交换;根据业务需要,定制企业通用算法服务,分析单元分析数据视图,得到分析结果;在得到分析结果之后,通过输出单元输出分析结果。可选地,分析单元实时分析数据视图,得到分析结果,并且输出单元实时输出分析结果,由数据中心的业务分析区来完成。业务分析区可以实现数据视图的生成并提供快速访问的服务,由业务需求驱动的,可以为需要对大数据进行分析的应用需求,比如,负荷预测、线损分析等,这部分数据需要从历史数据存储区和通用数据存储区获取,采用基于内存的计算技术,从而达到了对电力系统的配电数据的高速访问效果。
本发明实施例的配电数据存储装置通过获取单元10获取配电数据,其中,配电数据为目标电力系统的运行数据,然后通过解析单元20解析配电数据,得到解析结果,再通过存储单元30根据解析结果将配电数据以分布式存储方式存储到预设区域,从而使电力系统之间在功能上相互关联,实现各电力系统的信息共享和信息交换,使信息与业务流程接轨,从而提高电力系统运营的效率。
本发明实施例可以扩充数据中心存储容量,优化数据存储性能。充分利用大数据、云计算、资源池等多种技术,来实现从集中存储到分布式存储的过渡,从而降低硬件设备投资、优化数据存储,为构建统一的企业数据管理平台提供重要的技术支撑。
本发明实施例可以通过对数据中心软硬件资源进行整合,提升数据中心数据处理和计算能力,为提升大数据平台的实时处理能力提供有力支撑。结合实时数据采集工具,充分利用分布式数据处理与分析技术,强化数据采集、数据存储、实时流处理、数据分析处理、数据应用、数据安全、数据运维等大数据的关键处理环节,从而提升数据处理能力。
本发明实施例可以完善数据共享模型,基于CIM标准,增加低压电网、用户模型表达,构建“站-线-变-箱-户”一体化电网资源数据共享模型,为营配调业务融合、设备管理、电网图模互操作等提供数据访问服务。扩展企业服务总线服务,根据相关业务系统集成需求,扩充不同业务的服务范围,为业务系统集成提供实时的数据访问服务,从而完善数据访问服务。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种配电数据存储方法,其特征在于,包括:
获取配电数据,其中,所述配电数据为目标电力系统的运行数据;
解析所述配电数据,得到解析结果;以及
根据所述解析结果将所述配电数据以分布式存储方式存储到预设区域。
2.根据权利要求1所述的方法,其特征在于,
解析所述配电数据包括:解析所述配电数据,得到通用数据的解析结果,其中,所述通用数据为所述目标电力系统的基本运行数据,
根据所述解析结果将所述配电数据以分布式存储方式存储到所述预设区域包括:根据所述通用数据的解析结果将所述通用数据以所述分布式存储方式存储到通用数据存储区,其中,所述通用数据存储区是用于存储所述目标电力系统的基本运行数据的区域。
3.根据权利要求2所述的方法,其特征在于,根据所述通用数据的解析结果将所述通用数据以所述分布式存储方式存储到所述通用数据存储区包括:
确定所述通用数据的存储模型;
扩展所述存储模型,得到扩展后的存储模型;
根据所述扩展后的存储模型将所述通用数据存储区按照所述通用数据的主题进行分域,得到多个分域存储区;以及
将所述通用数据存储到对应的分域存储区。
4.根据权利要求1所述的方法,其特征在于,
解析所述配电数据包括:解析所述配电数据,得到实时数据的解析结果,
根据所述解析结果将所述配电数据以所述分布式存储方式存储到所述预设区域包括:根据所述实时数据的解析结果将所述实时数据以所述分布式存储方式存储到实时数据存储区。
5.根据权利要求4所述的方法,其特征在于,根据所述实时数据的解析结果将所述实时数据以所述分布式存储方式存储到所述实时数据存储区之后,所述方法还包括:
获取所述实时数据的时序数据;
对所述时序数据进行计算,得到计算结果;
确定数据服务接口;以及
根据所述数据服务接口对所述计算结果进行查询。
6.根据权利要求1所述的方法,其特征在于,
解析所述配电数据包括:解析所述配电数据,得到历史数据的解析结果,
根据所述解析结果将所述配电数据以所述分布式存储方式存储到所述预设区域包括:根据所述历史数据的解析结果将所述历史数据以所述分布式存储方式存储到历史数据存储区。
7.根据权利要求6所述的方法,其特征在于,根据所述历史数据的解析结果将所述历史数据以所述分布式存储方式存储到所述历史数据存储区之后,所述方法还包括:
确定所述历史数据的查询接口;
分析所述查询接口,得到分析结果;以及
根据所述分析结果对所述历史数据进行查询。
8.根据权利要求1所述的方法,其特征在于,
解析所述配电数据包括:统计所述配电数据的使用频率,判断所述使用频率是否大于预设阈值,如果判断出所述配电数据小于所述预设阈值,则确定所述配电数据为历史数据,
根据所述解析结果将所述配电数据以分布式存储方式存储到所述预设区域包括:将所述历史数据存储到所述历史数据存储区。
9.根据权利要求1所述的方法,其特征在于,在根据所述解析结果将所述配电数据以所述分布式存储方式存储到所述预设区域之后,所述方法还包括:
从所述预设区域获取所述配电数据;
在内存中对所述配电数据进行实时计算,得到数据视图,其中,所述数据视图用于展示所述配电数据的计算结果;
分析所述数据视图,得到分析结果;以及
输出所述分析结果。
10.一种配电数据存储装置,其特征在于,包括:
获取单元,用于获取配电数据,其中,所述配电数据为目标电力系统的运行数据;
解析单元,用于解析所述配电数据,得到解析结果;以及
存储单元,用于根据所述解析结果将所述配电数据以分布式存储方式存储到预设区域。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510596124.5A CN105303292A (zh) | 2015-09-17 | 2015-09-17 | 配电数据存储方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510596124.5A CN105303292A (zh) | 2015-09-17 | 2015-09-17 | 配电数据存储方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105303292A true CN105303292A (zh) | 2016-02-03 |
Family
ID=55200529
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510596124.5A Pending CN105303292A (zh) | 2015-09-17 | 2015-09-17 | 配电数据存储方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105303292A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106294644A (zh) * | 2016-08-02 | 2017-01-04 | 山东鲁能软件技术有限公司 | 一种基于大数据技术的海量时序数据收集处理装置及方法 |
CN109284346A (zh) * | 2018-09-20 | 2019-01-29 | 南方电网科学研究院有限责任公司 | 一种基于云计算的配电网规划方法及装置 |
CN110555010A (zh) * | 2019-09-11 | 2019-12-10 | 中国南方电网有限责任公司 | 一种电网实时运行数据存储系统 |
CN110659270A (zh) * | 2019-08-19 | 2020-01-07 | 苏宁金融科技(南京)有限公司 | 一种数据处理及传输方法和装置 |
CN111080479A (zh) * | 2019-12-12 | 2020-04-28 | 北京中电普华信息技术有限公司 | 一种电网统一数据模型的创建方法及装置 |
CN114048215A (zh) * | 2022-01-11 | 2022-02-15 | 北京易联通达科技有限公司 | 一种用电信息采集终端抄表成功率统计方法与装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103268231A (zh) * | 2013-06-04 | 2013-08-28 | 北京中电普华信息技术有限公司 | 一种电力信息系统组件接口的实现系统及方法 |
CN104462314A (zh) * | 2014-11-28 | 2015-03-25 | 国家电网公司 | 电网数据处理方法及装置 |
CN104636084A (zh) * | 2015-01-21 | 2015-05-20 | 广东电网有限责任公司电力科学研究院 | 一种对电力大数据进行合理高效分布存储的装置和方法 |
CN104820670A (zh) * | 2015-03-13 | 2015-08-05 | 国家电网公司 | 一种电力信息大数据的采集和存储方法 |
-
2015
- 2015-09-17 CN CN201510596124.5A patent/CN105303292A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103268231A (zh) * | 2013-06-04 | 2013-08-28 | 北京中电普华信息技术有限公司 | 一种电力信息系统组件接口的实现系统及方法 |
CN104462314A (zh) * | 2014-11-28 | 2015-03-25 | 国家电网公司 | 电网数据处理方法及装置 |
CN104636084A (zh) * | 2015-01-21 | 2015-05-20 | 广东电网有限责任公司电力科学研究院 | 一种对电力大数据进行合理高效分布存储的装置和方法 |
CN104820670A (zh) * | 2015-03-13 | 2015-08-05 | 国家电网公司 | 一种电力信息大数据的采集和存储方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106294644A (zh) * | 2016-08-02 | 2017-01-04 | 山东鲁能软件技术有限公司 | 一种基于大数据技术的海量时序数据收集处理装置及方法 |
CN106294644B (zh) * | 2016-08-02 | 2019-06-14 | 山东鲁能软件技术有限公司 | 一种基于大数据技术的海量时序数据收集处理装置及方法 |
CN109284346A (zh) * | 2018-09-20 | 2019-01-29 | 南方电网科学研究院有限责任公司 | 一种基于云计算的配电网规划方法及装置 |
CN110659270A (zh) * | 2019-08-19 | 2020-01-07 | 苏宁金融科技(南京)有限公司 | 一种数据处理及传输方法和装置 |
CN110555010A (zh) * | 2019-09-11 | 2019-12-10 | 中国南方电网有限责任公司 | 一种电网实时运行数据存储系统 |
CN110555010B (zh) * | 2019-09-11 | 2022-04-05 | 中国南方电网有限责任公司 | 一种电网实时运行数据存储系统 |
CN111080479A (zh) * | 2019-12-12 | 2020-04-28 | 北京中电普华信息技术有限公司 | 一种电网统一数据模型的创建方法及装置 |
CN114048215A (zh) * | 2022-01-11 | 2022-02-15 | 北京易联通达科技有限公司 | 一种用电信息采集终端抄表成功率统计方法与装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105303292A (zh) | 配电数据存储方法和装置 | |
CN107402976B (zh) | 一种基于多元异构模型的电网多源数据融合方法及系统 | |
CN110022226B (zh) | 一种基于面向对象的数据采集系统及采集方法 | |
CN106203890B (zh) | 基于cim模型的营配调一体化数据建模方法 | |
CN102722764B (zh) | 一体化电网优化辅助决策分析系统 | |
CN109638964B (zh) | 一种基于边缘计算架构的多元电网信息交互系统及方法 | |
CN109582667A (zh) | 一种基于电力调控大数据的多数据库混合存储方法及系统 | |
CN113435923B (zh) | 用电量的预测方法、装置及电子设备 | |
CN116993227B (zh) | 一种基于人工智能的供热分析评估方法、系统及存储介质 | |
Potdar et al. | Big energy data management for smart grids—Issues, challenges and recent developments | |
CN112365366A (zh) | 一种基于智能化5g切片的微电网管理方法及系统 | |
CN103489139A (zh) | 城市配电网规划综合分析与管理系统 | |
CN108001282B (zh) | 一种基于大数据实现电价动态调整的充电装置及方法 | |
CN206863115U (zh) | 一种能源互联网用电非侵入式测量系统 | |
CN115511656A (zh) | 一种基于挖掘电网数据价值的需求规划辅助决策系统 | |
CN115908046A (zh) | 基于航站楼bim的可视化配电系统 | |
CN112613790A (zh) | 应用于多站融合环境下的协同数据处理方法、设备及介质 | |
CN113361935B (zh) | 一种电力能源调度的方法、装置及能源调度系统 | |
CN116402187A (zh) | 一种基于电力大数据的企业排污预测方法 | |
CN115934856A (zh) | 一种构造综合能源数据资产的方法和系统 | |
Ju et al. | The use of edge computing-based internet of things big data in the design of power intelligent management and control platform | |
CN110543499A (zh) | 一种基于多源数据融合的反窃电定位跟踪设备 | |
CN113888053A (zh) | 一种基于多目标条件的电网可用资源最优匹配方法 | |
CN112231381A (zh) | 基于webgis的空间数据信息协作平台及其搭建方法 | |
CN116776543A (zh) | 一种面向智能电网的电力大数据应用方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160203 |
|
RJ01 | Rejection of invention patent application after publication |