CN107256158A - 电力系统负荷削减量的检测方法和系统 - Google Patents

电力系统负荷削减量的检测方法和系统 Download PDF

Info

Publication number
CN107256158A
CN107256158A CN201710423891.5A CN201710423891A CN107256158A CN 107256158 A CN107256158 A CN 107256158A CN 201710423891 A CN201710423891 A CN 201710423891A CN 107256158 A CN107256158 A CN 107256158A
Authority
CN
China
Prior art keywords
power system
load reduction
load
program
operation interval
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710423891.5A
Other languages
English (en)
Other versions
CN107256158B (zh
Inventor
陆国俊
章磊
栾乐
胡金星
肖天为
郭媛君
李光茂
何兵
许中
刘晟东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Institute of Advanced Technology of CAS
Guangzhou Power Supply Bureau of Guangdong Power Grid Co Ltd
Original Assignee
Shenzhen Institute of Advanced Technology of CAS
Guangzhou Power Supply Bureau Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Institute of Advanced Technology of CAS, Guangzhou Power Supply Bureau Co Ltd filed Critical Shenzhen Institute of Advanced Technology of CAS
Priority to CN201710423891.5A priority Critical patent/CN107256158B/zh
Publication of CN107256158A publication Critical patent/CN107256158A/zh
Application granted granted Critical
Publication of CN107256158B publication Critical patent/CN107256158B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/20Software design
    • G06F8/22Procedural
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0635Risk analysis of enterprise or organisation activities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/06Electricity, gas or water supply

Abstract

本发明涉及一种电力系统负荷削减量的检测方法和系统。上述电力系统负荷削减量的检测方法包括:将电力数据输入软件开发程序,将软件开发程序提供的jar文件导入Java平台,在Java平台编写与输入软件开发程序的电力数据相对应的数据结构;在计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据任务数目将所述数据结构平均分配至各个工作区间;分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;执行计算引擎的收集操作,将负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。其提高了获取电力系统负荷削减量的效率,可以降低负荷相应检测成本。

Description

电力系统负荷削减量的检测方法和系统
技术领域
本发明涉及电力技术领域,特别是涉及一种电力系统负荷削减量的检测方法和系统。
背景技术
随着社会经济的飞速发展和国民生活水平的迅速提高,社会对电网供电可靠性和系统安全性的要求也越来越高。分析电网运行安全风险,并通过预防校正控制以及状态检修等辅助决策手段调控电网是关系到国家电力安全保障的重大课题。负荷损失(负荷削减)是风险分析中衡量风险后果的重要方面,能够客观量化设备故障后的电网实际损失,同时在基于风险分析的检修及更换辅助策略研究中,也需要计算各节点不同负荷类型的负荷削减量,以评估停运检修和带病运行期间的间接损失。电网运行风险评估考虑的预想故障场景数量众多,对每一故障场景都要进行潮流分析、负荷削减计算等工作,在风险评估中,潮流分析和负荷削减计算占据了大量时间,如何有效提高负荷削减模型的计算效率,是实现电网运行风险在线评估中需要解决的一个关键问题。
传统的电力系统负荷削减量的确定通常是通过电气并行计算实现,电气并行计算是快速分析电网运行、设备状态、气象环境等海量多元异构数据的基础。目前电力分析的并行计算一般分为:实现并行化算法和数据计算并行化。对算法实现并行化,虽然一个计算任务的时间效率提高了,但是一个大型的电力辅助系统的负荷削减计算常常具有几十万个任务、每个任务有几十次迭代计算、10分钟之内就要出结果,这几十万个任务频繁的使用“mapand reduce”这样的操作,对系统的开销也非常大;再者系统需要采用非常多的复杂算法,如果将这些算法都去并行化,对计算机技能和电气专业知识要求很高;另外如果新加入一个算法,都需要去实现并行化算法,那么花费的时间和精力是巨大的,这样便导致检测电力系统负荷削减量的成本高。
发明内容
基于此,有必要针对传统方案导致检测电力系统负荷削减量成本高的技术问题,提供一种电力系统负荷削减量的检测方法和系统。
一种电力系统负荷削减量的检测方法,包括如下步骤:
将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
一种电力系统负荷削减量的检测系统,包括:
输入模块,用于将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
划分模块,用于在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
计算模块,用于分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
获取模块,用于执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
上述电力系统负荷削减量的检测方法和系统,可以将用于计算电力系统负荷削减量的电力数据输入软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写电力数据相对应的数据结构,在计算引擎上划分多个计算能力相同的工作区间,统计上述电力数据对应的数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间,再分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量,再执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,以获取电力系统的负荷削减总量,有效提高了获取电力系统负荷削减量的效率,可以降低上述负荷削减量的检测成本。
一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上所述的电力系统负荷削减量的检测方法。
上述计算机可读存储介质上存储的计算机程序,将用于计算电力系统负荷削减量的电力数据对应的数据结构平均分配至各个工作区间,分别在各个工作区间执行并行处理操作,并引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量,以便获取电力系统的负荷削减总量,提高了上述负荷削减总量的获取效率,降低了相应的获取成。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上所述的电力系统负荷削减量的检测方法。
上述计算机设备中,处理器执行所述程序时可以实现如上所述的电力系统负荷削减量的检测方法,有效提高了获取电力系统负荷削减量的效率,可以降低上述负荷削减量的检测成本。
附图说明
图1为一个实施例的电力系统负荷削减量的检测方法流程图;
图2为一个实施例的电力系统负荷削减量的检测系统结构示意图;
图3为一个实施例的计算机设备结构示意图。
具体实施方式
下面结合附图对本发明的电力系统负荷削减量的检测方法和系统的具体实施方式作详细描述。
参考图1,图1所示为一个实施例的电力系统负荷削减量的检测方法流程图,包括如下步骤:
S10,将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
上述软件开发程序可以包括Matlab软件等用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式软件。软件开发程序提供的jar文件可以为“javabuilder.jar”等Matlab builder for Java这样将软件开发程序中文件打包为Java平台所对应文件的工具。在Java平台编写与输入软件开发程序的电力数据相对应的数据结构,使上述数据结构可以完整地表征输入软件开发程序,且用于计算电力系统负荷削减量的电力数据。
S20,在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
上述计算引擎可以包括Spark等专为大规模数据处理而设计的快速通用的计算引擎。若计算引擎为Spark,则可以选择Spark上的开发语言为Scala,在Spark上继承org.apache.spark.Partitioner这个类来实现自定义分区功能,实现多个计算能力相同的工作区间(worker)的划分,为了确保每个worker的计算能力相同,可是使各个worker具有相同的CPU核数目和内存大小。
S30,分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
上述并行处理操作可以包括mapPartitions操作等高效率并行操作。上述Scala语言为一种类似java的编程语言其可以对Java平台产生的相关数据进行无缝衔接,以保证对电力数据对应的数据结构进行相应处理的顺利性。上述步骤分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量,在保证所计算的负荷削减分量的准确性的基础上,有效提高了上述负荷削减分量的获取效率。
S40,执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
上述计算引擎的收集操作可以为Spark的collect操作。执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,以此确定电力系统的负荷削减总量,使确定的负荷削减总量具有较高的准确性,大幅度提高了上述负荷削减总量的确定效率,简化了其确定流程。
本实施例提供的电力系统负荷削减量的检测方法,可以将用于计算电力系统负荷削减量的电力数据输入软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写电力数据相对应的数据结构,在计算引擎上划分多个计算能力相同的工作区间,统计上述电力数据对应的数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间,再分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量,再执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,以获取电力系统的负荷削减总量,有效提高了获取电力系统负荷削减量的效率,可以降低上述负荷削减量的检测成本。
在一个实施例中,上述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程之前,还可以包括:
利用软件开发程序将其中的串行算法封装成一个Java类,将所述Java类发布为jar包;
通过所述jar包编写所述电力数据对应的Java语言计算程序,并生成所述Java语言计算程序对应的Scala语言计算程序。
若上述软件开发程序为Matlab软件,则Matlab软件可以将Matlab串行算法封装成一个Java类,再发布为一个完整的jar包,还可以记录串行Matlab软件的输入和输出数据(电力数据的输入和输出)的值和类型;针对Matlab软件的输入(电力数据的输入),在Java中编写和Matlab相对应的数据结构,得到上述输入的电力数据所对应的数据结构。
上述Java语言计算程序以及Scala语言计算程序均可以对相应的数据结构进行处理,获取其处理的数据结构所对应的负荷削减量。
作为一个实施例,上述通过所述jar包编写所述电力数据对应的Java语言计算程序的过程之后,还可以包括:
将所述数据结构传入所述Java语言计算程序,读取所述Java语言计算程序输出的第一测试结果;
通过软件开发程序计算所述数据结构对应的第二测试结果;
若所述第一测试结果和所述第二测试结果不相等,则在所述Java平台更新与所述电力数据相对应的数据结构。
本实施例将第一测试结果和第二测试结果进行对比,验证Java语言计算程序输出的第一测试结果与软件开发程序计算所述数据结构对应的第二测试结果是否一样,如果不相同极有可能是数据结构构造错误,需要在所述Java平台更新与所述电力数据相对应的数据结构,以保证后续所确定的负荷削减量的准确性。
在一个实施例中,上述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程可以包括:
分别在各个工作区间上利用设定运算平台将所述Scala语言计算程序分解成多个内核,每个内核交由一个网格完成,将各个网格再划分多个块,每个块再创建多个线程,分别利用各个线程执行计算所述工作区间负荷削减分量的任务。
上述设定运算平台包括cuda等通用并行计算架构,使GPU(图形处理器)能够解决复杂计算问题的运算平台。本实施例具有较高的计算效率。
作为一个实施例,若设定运算平台为cuda,计算引擎为Spark。这样,每个worker分区(工作区间)上的计算可以利用cuda来加速,cuda将计算分解成一个个内核(kernel),每个kernel交由一个Grid(网格)完成,每个Grid再划分一个个的Block(块),每个Block再创建多个Thread(线程),执行任务。这样每一个worker分区上的负荷削减分量是并行计算的,具有较高的计算效率。
作为一个实施例,cuda的加速由C语言编写,而spark上面不能直接支持C语言,此时可以通过如下2种方法使spark的各worker分区分别实现负荷削减分量的计算:第一种是使用能够以java作为开发语言的JCuda,JCuda提供了和Cuda C相似的api(应用程序编程接口),这样只需按照Cuda C的方式开发即可;第二种就是使用JNI(Java本地接口):首先,编写带有native声明的方法的java类,只需要声明方法,不需要实现,具体的实现在C中实现;其次,利用javac命令编译所写的java类;接着,利用javah命令来编译生成.h的头文件,以便导入到C程序中;然后,实现C的本地方法,即编写CUDA kernel程序,在程序中导入生成的.h文件,并把c程序保存在以.cu为后缀名的文件中。最后,将包含CUDA程序的.cu文件编译生成动态链接库(.so文件)。最后要把JNI需要的一些头文件路径(系统的jdk路径)添加进去,实现Java调用cuda程序。
在一个实施例中,上述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程之后,还可以包括:
压缩在各个工作区间获取的负荷削减分量,将压缩处理得到的结果缓存成弹性分布式数据集。
本实施例在各个工作区间上分别计算相应的负荷削减分量后,每个工作区间中的计算结果对应Matlab等软件开发程序中的Struct类型,在Spark这些计算引擎中无法实现自动序列化,需要对Struct中的每个部分自定义序列化对象,并且采用先进的压缩算法(如kyro、snappy等等)对各个工作区间获取的负荷削减分量进行压缩处理,若上述工作区间的计算结果需要在下一个阶段继续使用,则可以将结果缓存成RDD(Resilient DistributedDatasets,弹性分布式数据集),以保证后续使用的便利性。
在一个实施例中,上述将用于计算电力系统负荷削减量的电力数据输入软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构的过程之前,还可以包括:
安装设定显卡、硬件驱动程序以及设定运算平台的开发环境,建立分布式系统基础架构和计算引擎集群,搭建图形处理器集群,构建计算引擎-设定运算平台集群,将下载的MCR编译器安装到每个运行节点(如X86PC的每个节点)上。
上述设定显卡可以为NVIDIA显卡,设定运算平台可以为CUDA8.0;安装NVIDIA显卡和硬件驱动程序以及CUDA8.0的开发环境,使GPU能够解决复杂的计算问题,以替代CPU(中央处理器)完成并行电气计算任务,增大加速比。
上述分布式系统基础架构可以为Hadoop,计算引擎集群可以为Spark集群,图形处理器集群可以为GPU集群,计算引擎-设定运算平台集群可以为Spark-Cuda集群,MCR编译器可以为在Matlab官网下载linux版本的MCR,其可以配置环境变量LD_LIBRARY_PATH。
在一个实施例中,上述执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量的过程之后,还可以包括:
构建文件传输协议服务(ftp服务)获取所述电力数据和负荷削减总量,通过分布式系统基础架构(hadoop)的应用程序编程接口(API)将所述电力数据存储至分布式文件系统中,通过计算引擎的应用程序编程接口将所述负荷削减总量存储至分布式文件系统(HDFS)中。
具体地,本实施例可以通过apache ftpserver构建ftp服务从生产调度系统中获取数据,然年使用hadoop的API将ftp收到的数据存储到HDFS中,并且计算结果通过Spark的API存储到HDFS中,以分布式文件系统HDFS实现对电气计算的输入数据(计算电力系统负荷削减量的电力数据)、输出数据(负荷削减量数据)的存储,保证所存储的数据的完整性。
在一个实施例中,若上述软件开发程序为Matlab软件,还可以在电力系统负荷削减量的检测端安装一组独立的共享库Matlab Runtime,其可以给编译后的Matlab文件执行提供一个环境,确保不安装Matlab软件,也能运行Matlab的程序,提供电气串行Matlab程序的可执行性。还可以在Matlab官网下载linux版本的MCR安装,同时配置环境变量LD_LIBRARY_PATH。
作为一个实施例,还可以对上述电力系统负荷削减量的检测端进行基于内存计算和DAG(新组件)的优化,将计算的输入数据变成RDD,结合Spark的分布式并行计算的特点,实施大规模并行实时的电气计算;进行Matlab Runtime和CDH Spark的整合,即在yarn-site.xml的NodeManager高级配置代码段(安全阀)配置Matlab的读写目录,以避免后续处理过程中出现权限不足的问题。
本实施例提供的电力系统负荷削减量的检测方法中,在电力系统负荷削减量的检测端融合集成HDFS、Matlab Runtime、Spark、Cuda的电力大数据平台系统,对输入的电力数据进行融合Spark和CUDA的实时高效电网负荷削减并行计算,能够很好的支持电力系统运行风险评估及其辅助决策,配合X86计算集群,完成负荷削减计算量大、迭代次数多、实时性要求高的任务。
参考图2所示,图2为一个实施例的电力系统负荷削减量的检测系统结构示意图,包括:
输入模块10,用于将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
划分模块20,用于在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
计算模块30,用于分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
获取模块40,用于执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
本发明提供的电力系统负荷削减量的检测系统与本发明提供的电力系统负荷削减量的检测方法一一对应,在所述电力系统负荷削减量的检测方法的实施例阐述的技术特征及其有益效果均适用于电力系统负荷削减量的检测系统的实施例中,特此声明。
基于如上所述的示例,一个实施例中还提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上所述的电力系统负荷削减量的检测方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性的计算机可读取存储介质中,如本发明实施例中,该程序可存储于计算机系统的存储介质中,并被该计算机系统中的至少一个处理器执行,以实现包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
基于如上所述的示例,参考图3所示,本发明还提供一种计算机设备60,该计算机设备包括存储器61、处理器62及存储在存储器62上并可在处理器61上运行的计算机程序,所述处理器61执行所述程序时实现如上述各实施例中的任意一种电力系统负荷削减量的检测方法。
上述计算机设备60可以包括电脑等智能处理设备。本领域普通技术人员可以理解存储器61存储的计算机程序,与上述电力系统负荷削减量的检测方法实施例中的描述相对应,处理器62还可用于执行存储器61所存储的其他可执行指令。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种电力系统负荷削减量的检测方法,其特征在于,包括如下步骤:
将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
2.根据权利要求1所述的电力系统负荷削减量的检测方法,其特征在于,所述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程之前,还包括:
利用软件开发程序将其中的串行算法封装成一个Java类,将所述Java类发布为jar包;
通过所述jar包编写所述电力数据对应的Java语言计算程序,并生成所述Java语言计算程序对应的Scala语言计算程序。
3.根据权利要求2所述的电力系统负荷削减量的检测方法,其特征在于,所述通过所述jar包编写所述电力数据对应的Java语言计算程序的过程之后,还包括:
将所述数据结构传入所述Java语言计算程序,读取所述Java语言计算程序输出的第一测试结果;
通过软件开发程序计算所述数据结构对应的第二测试结果;
若所述第一测试结果和所述第二测试结果不相等,则在所述Java平台更新与所述电力数据相对应的数据结构。
4.根据权利要求1所述的电力系统负荷削减量的检测方法,其特征在于,所述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程包括:
分别在各个工作区间上利用设定运算平台将所述Scala语言计算程序分解成多个内核,每个内核交由一个网格完成,将各个网格再划分多个块,每个块再创建多个线程,分别利用各个线程执行计算所述工作区间负荷削减分量的任务。
5.根据权利要求1所述的电力系统负荷削减量的检测方法,其特征在于,所述分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量的过程之后,还包括:
压缩在各个工作区间获取的负荷削减分量,将压缩处理得到的结果缓存成弹性分布式数据集。
6.根据权利要求1至5任一项所述的电力系统负荷削减量的检测方法,其特征在于,所述将用于计算电力系统负荷削减量的电力数据输入软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构的过程之前,还包括:
安装设定显卡、硬件驱动程序以及设定运算平台的开发环境,建立分布式系统基础架构和计算引擎集群,搭建图形处理器集群,构建计算引擎-设定运算平台集群,将下载的MCR编译器安装到每个运行节点上。
7.根据权利要求1至5任一项所述的电力系统负荷削减量的检测方法,其特征在于,所述执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量的过程之后,还包括:
构建文件传输协议服务获取所述电力数据和负荷削减总量,通过分布式系统基础架构的应用程序编程接口将所述电力数据存储至分布式文件系统中,通过计算引擎的应用程序编程接口将所述负荷削减总量存储至分布式文件系统中。
8.一种电力系统负荷削减量的检测系统,其特征在于,包括:
输入模块,用于将计算电力系统负荷削减量的电力数据输入设定的软件开发程序,将所述软件开发程序提供的jar文件导入Java平台,在所述Java平台编写与输入软件开发程序的电力数据相对应的数据结构;
划分模块,用于在预置的计算引擎上通过划分多个计算能力相同的工作区间,统计所述数据结构对应的任务数目,根据所述任务数目将所述数据结构平均分配至各个工作区间;
计算模块,用于分别在各个工作区间执行并行处理操作,引入预设的Scala语言计算程序分别计算各个工作区间对应的负荷削减分量;
获取模块,用于执行计算引擎的收集操作,将所述负荷削减分量返回到计算引擎的主程序,获取电力系统的负荷削减总量。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至7任意一项所述的电力系统负荷削减量的检测方法。
10.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任意一项所述的电力系统负荷削减量的检测方法。
CN201710423891.5A 2017-06-07 2017-06-07 电力系统负荷削减量的检测方法和系统 Active CN107256158B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710423891.5A CN107256158B (zh) 2017-06-07 2017-06-07 电力系统负荷削减量的检测方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710423891.5A CN107256158B (zh) 2017-06-07 2017-06-07 电力系统负荷削减量的检测方法和系统

Publications (2)

Publication Number Publication Date
CN107256158A true CN107256158A (zh) 2017-10-17
CN107256158B CN107256158B (zh) 2021-06-18

Family

ID=60024604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710423891.5A Active CN107256158B (zh) 2017-06-07 2017-06-07 电力系统负荷削减量的检测方法和系统

Country Status (1)

Country Link
CN (1) CN107256158B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023115272A1 (zh) * 2021-12-20 2023-06-29 华为技术有限公司 一种芯片管理装置及相关方法

Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102135888A (zh) * 2011-03-26 2011-07-27 陈永胜 一种用描述语言编程的编程平台系统
CN102222012A (zh) * 2010-04-14 2011-10-19 微软公司 针对外部数据源的静态类型检查
CN103034534A (zh) * 2011-09-29 2013-04-10 阿尔斯通电网公司 基于网格计算的电力系统分析并行计算方法和系统
CN103246546A (zh) * 2013-05-07 2013-08-14 山东大学 基于云技术的开放式电力系统数值仿真系统及其仿真方法
CN103631730A (zh) * 2013-11-01 2014-03-12 深圳清华大学研究院 内存计算的缓存优化方法
CN103838847A (zh) * 2014-03-06 2014-06-04 中国科学院软件研究所 一种面向海云协同网络计算环境的数据组织方法
CN104360903A (zh) * 2014-11-18 2015-02-18 北京美琦华悦通讯科技有限公司 Spark作业调度系统中实现任务数据解耦的方法
CN105184670A (zh) * 2015-08-26 2015-12-23 山东鲁能软件技术有限公司 一种基于电力应用的大数据管理分析系统及其方法
WO2016035098A2 (en) * 2014-09-05 2016-03-10 Chitkara University Portable and smart intensive care unit
CN105550296A (zh) * 2015-12-10 2016-05-04 深圳市华讯方舟软件技术有限公司 一种基于spark-SQL大数据处理平台的数据导入方法
CN105678398A (zh) * 2015-12-24 2016-06-15 国家电网公司 基于大数据技术的电力负荷预测方法及基于该方法的研究应用系统
CN105786996A (zh) * 2016-02-18 2016-07-20 国网智能电网研究院 一种用电信息数据质量分析系统
CN105830049A (zh) * 2013-12-17 2016-08-03 阿提乔有限责任公司 自动化实验平台
CN105930373A (zh) * 2016-04-13 2016-09-07 北京思特奇信息技术股份有限公司 一种基于spark streaming的大数据流处理方法和系统
CN106127409A (zh) * 2016-07-04 2016-11-16 中国科学院深圳先进技术研究院 一种基于智能眼镜的远程电力协同交互方法及系统
CN106227790A (zh) * 2016-07-19 2016-12-14 北京北信源软件股份有限公司 一种使用Apache Spark分类与解析海量日志的方法
CN106445676A (zh) * 2015-08-05 2017-02-22 杭州海康威视系统技术有限公司 一种分布式数据计算的任务分配方法和任务分配装置
CN106484809A (zh) * 2016-09-23 2017-03-08 华北电力大学(保定) 一种基于Spark的能源互联网信息平台及其应用
CN106547537A (zh) * 2016-10-10 2017-03-29 国网新疆电力公司经济技术研究院 一种基于qml技术实现可组装的电力应用软件方法
CN106780111A (zh) * 2016-11-24 2017-05-31 广州供电局有限公司 输电电缆综合状态评估方法和系统

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102222012A (zh) * 2010-04-14 2011-10-19 微软公司 针对外部数据源的静态类型检查
CN102135888A (zh) * 2011-03-26 2011-07-27 陈永胜 一种用描述语言编程的编程平台系统
CN103034534A (zh) * 2011-09-29 2013-04-10 阿尔斯通电网公司 基于网格计算的电力系统分析并行计算方法和系统
CN103246546A (zh) * 2013-05-07 2013-08-14 山东大学 基于云技术的开放式电力系统数值仿真系统及其仿真方法
CN103631730A (zh) * 2013-11-01 2014-03-12 深圳清华大学研究院 内存计算的缓存优化方法
CN105830049A (zh) * 2013-12-17 2016-08-03 阿提乔有限责任公司 自动化实验平台
CN103838847A (zh) * 2014-03-06 2014-06-04 中国科学院软件研究所 一种面向海云协同网络计算环境的数据组织方法
WO2016035098A2 (en) * 2014-09-05 2016-03-10 Chitkara University Portable and smart intensive care unit
CN104360903A (zh) * 2014-11-18 2015-02-18 北京美琦华悦通讯科技有限公司 Spark作业调度系统中实现任务数据解耦的方法
CN106445676A (zh) * 2015-08-05 2017-02-22 杭州海康威视系统技术有限公司 一种分布式数据计算的任务分配方法和任务分配装置
CN105184670A (zh) * 2015-08-26 2015-12-23 山东鲁能软件技术有限公司 一种基于电力应用的大数据管理分析系统及其方法
CN105550296A (zh) * 2015-12-10 2016-05-04 深圳市华讯方舟软件技术有限公司 一种基于spark-SQL大数据处理平台的数据导入方法
CN105678398A (zh) * 2015-12-24 2016-06-15 国家电网公司 基于大数据技术的电力负荷预测方法及基于该方法的研究应用系统
CN105786996A (zh) * 2016-02-18 2016-07-20 国网智能电网研究院 一种用电信息数据质量分析系统
CN105930373A (zh) * 2016-04-13 2016-09-07 北京思特奇信息技术股份有限公司 一种基于spark streaming的大数据流处理方法和系统
CN106127409A (zh) * 2016-07-04 2016-11-16 中国科学院深圳先进技术研究院 一种基于智能眼镜的远程电力协同交互方法及系统
CN106227790A (zh) * 2016-07-19 2016-12-14 北京北信源软件股份有限公司 一种使用Apache Spark分类与解析海量日志的方法
CN106484809A (zh) * 2016-09-23 2017-03-08 华北电力大学(保定) 一种基于Spark的能源互联网信息平台及其应用
CN106547537A (zh) * 2016-10-10 2017-03-29 国网新疆电力公司经济技术研究院 一种基于qml技术实现可组装的电力应用软件方法
CN106780111A (zh) * 2016-11-24 2017-05-31 广州供电局有限公司 输电电缆综合状态评估方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李江曼: ""电力云平台内存集群计算研究"", 《中国优秀硕士学位论文全文数据库 工程科技II辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023115272A1 (zh) * 2021-12-20 2023-06-29 华为技术有限公司 一种芯片管理装置及相关方法

Also Published As

Publication number Publication date
CN107256158B (zh) 2021-06-18

Similar Documents

Publication Publication Date Title
US11243816B2 (en) Program execution on heterogeneous platform
Bavoil et al. Vistrails: Enabling interactive multiple-view visualizations
JP5209059B2 (ja) ソース・コード処理方法、システム、及びプログラム
US11915101B2 (en) Numerical quantum experimentation
CN106354729A (zh) 一种图数据处理方法、装置和系统
CN106484623A (zh) 一种软件测试的方法、装置及系统
CN114546868A (zh) 代码覆盖率测试方法、装置和电子设备
CN103186463B (zh) 确定软件的测试范围的方法和系统
Hryszko et al. Assessment of the software defect prediction cost effectiveness in an industrial project
CN108363660B (zh) 一种测试程序生成方法和装置
CN109710514B (zh) 测试用例优先级排序中的tie-breaking的解决方法及系统
CN107679701A (zh) 负荷削减并行计算方法及装置
Zhang et al. Accelerating SWAT Simulations Using An In-Memory NoSQL Database.
CN107256158A (zh) 电力系统负荷削减量的检测方法和系统
Li et al. Is bug severity in line with bug fixing change complexity?
WO2020114311A1 (zh) 一种基于机器学习的CPU与GPU异构SoC性能刻画方法
Hryszko et al. Cost effectiveness of software defect prediction in an industrial project
CN110413482A (zh) 检测方法和装置
US20230065994A1 (en) Offload server, offload control method, and offload program
WO2013161057A1 (ja) ソースコード検査方法及び装置
Liu et al. SEER: A Time Prediction Model for CNNs from GPU Kernel's View
CN112395167A (zh) 一种作业故障预测方法、装置及电子设备
Al-Azzoni et al. Performance evaluation for software migration
Jankovsky et al. Recent Analysis and Capability Enhancements to the ADAPT Dynamic Event Tree Driver.
Dahab et al. A software measurement framework guided by support vector machines

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231022

Address after: 510620, No. two, No. 2, Tianhe South Road, Guangzhou, Guangdong, Tianhe District

Patentee after: Guangzhou Power Supply Bureau of Guangdong Power Grid Co.,Ltd.

Patentee after: SHENZHEN INSTITUTES OF ADVANCED TECHNOLOGY CHINESE ACADEMY OF SCIENCES

Address before: 510620, No. two, No. 2, Tianhe South Road, Guangzhou, Guangdong, Tianhe District

Patentee before: GUANGZHOU POWER SUPPLY Co.,Ltd.

Patentee before: SHENZHEN INSTITUTES OF ADVANCED TECHNOLOGY CHINESE ACADEMY OF SCIENCES