CN115543608A - 有序用电用户基准负荷快速核算方法及装置 - Google Patents
有序用电用户基准负荷快速核算方法及装置 Download PDFInfo
- Publication number
- CN115543608A CN115543608A CN202211082499.6A CN202211082499A CN115543608A CN 115543608 A CN115543608 A CN 115543608A CN 202211082499 A CN202211082499 A CN 202211082499A CN 115543608 A CN115543608 A CN 115543608A
- Authority
- CN
- China
- Prior art keywords
- accounting
- reference load
- data
- task queue
- thread pool
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/5033—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering data affinity
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请涉及有序用电用户基准负荷快速核算方法及装置,本申请方法包括:根据数据源获取用电用户列表,所述数据源为数据库或数据文件;将所述用电用户列表作为配置参数创建线程池并生成所述线程池的核算任务队列;基于所述线程池执行所述核算任务队列;利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷;基于所述用电用户基准负荷输出交叉验证后的数据集。本方法通过优化的线程池技术可以快速核算出大批量有序用电用户某时段的基准负荷明细,有效提高了核算效率。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及有序用电用户基准负荷快速核算方法及装置。
背景技术
随着用电负荷的迅速增长、叠加来水偏枯以及电煤供应不足等因素,全网电力供应持续紧张。来水偏枯及水电蓄能低、燃煤燃气机组非停减出力等因素没有改善,全网电力供应缺口可能进一步扩大,电力供应供需不平衡加剧,有序用电成为常态。
现有技术中,有序用电用户基准负荷采用excel表进行核算,其中采用excel表核算过程中由于excel表格内置的函数有限,难以拓展,当新增功能需求时,需要依赖人工手动生成,另外,excel表无法与数据源直接交互,初始数据需经过中间媒介传导至excel软件,使得核算效率很低,操作不便。
发明内容
本发明的目的在于提供有序用电用户基准负荷快速核算方法及装置,用于提高有序用电用户基准负荷的核算效率。
本发明第一方面提供了有序用电用户基准负荷快速核算方法,包括:
根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
将所述用电用户列表作为配置参数创建线程池并生成所述线程池的核算任务队列;
基于所述线程池执行所述核算任务队列;
利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷;
基于所述用电用户基准负荷输出交叉验证后的数据集。
可选的,所述基于所述线程池执行所述核算任务队列,包括:
启动空闲线程读取所述核算任务队列中的一项任务;
对所述任务进行处理完成后执行下一项任务直到所述任务队列为空。
可选的,在所述基于所述线程池执行所述核算任务队列之后,所述方法还包括:
判断所述核算任务队列中的所有任务是否核算完成,若是,则执行下一步操作。
可选的,所述判断所述核算任务队列中的所有任务是否核算完成,包括:
若否,则重新读取所述核算任务队列中的剩余项任务并执行所述剩余项任务,所述剩余项任务包括一项或者多项任务。
可选的,在所述利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷之前,所述方法还包括:
对所述执行完成后的核算数据进行数据处理,所述数据处理包括数据清理和数据整合。
可选的,所述基准负荷算法包括均值法、最大值法、最小值法以及比率法。
本发明第二方面提供了有序用电用户基准负荷快速核算装置,包括:
获取单元,用于根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
生成单元,用于将所述用电用户列表作为配置参数创建线程池并生成所述线程池的核算任务队列;
执行单元,用于基于所述线程池执行所述核算任务队列;
计算单元,用于利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷;
输出单元,用于基于所述用电用户基准负荷输出交叉验证后的数据集。
可选的,所述执行单元包括:
第一读取模块,用于读取所述核算任务队列中的一项任务;
执行模块,用于对所述任务进行处理完成后执行下一项任务直到所述任务队列为空。
可选的,在所述执行单元之后,所述装置还包括:
判断单元,用于判断所述核算任务队列中的所有任务是否核算完成,若是,则执行下一步操作。
可选的,所述判断单元包括:
第二读取模块,用于当所述核算任务队列中的所有任务没有核算完成,则重新读取所述核算任务队列中的剩余项任务并执行所述剩余项任务,所述剩余项任务包括一项或者多项任务。
可选的,在所述计算单元之前,所述装置还包括:
数据处理单元,用于对所述执行完成后的核算数据进行数据处理,所述数据处理包括数据清理和数据整合。
从上述技术方案可以看出,本发明提供有序用电用户基准负荷快速核算方法及装置,通过优化后的线程池技术,根据获取到的用电用户数据源创建线程池,以核算出用电用户的基准负荷为任务,用户的列表参数为任务队列,同步执行该任务队列,再按照基准负荷算法计算用户用电基准负荷,最后生成用电用户基准负荷的数据集,本发明针对有序用电的大批量用户基准负荷快速核算,可以快速计算出大批量用户某时段(日、周或月)内的负荷明细,有效提高了核算效率。
附图说明
图1为本发明中序用电用户基准负荷快速核算方法的一个实施例流程示意图;
图2为本发明中序用电用户基准负荷快速核算方法的另一个实施例流程示意图;
图3为本发明中序用电用户基准负荷快速核算装置的一个实施例结构示意图。
具体实施方式
本申请实施例提供了有序用电用户基准负荷快速核算方法及装置,用于提高有序用电用户基准负荷的核算效率。
本实施例中核算方法可在系统中实现,可以在服务器实现,也可以在终端实现,具体不做明确限定。
请参阅图1,本申请实施例使用系统举例描述,本申请实施例中有序用电用户基准负荷快速核算方法一个实施例包括:
101、根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
本实施例中采用JavaDatabaseConnectivity技术直联访问用电用户电能量数据源,其中数据源包括数据库或者数据文件。其中数据库或者数据文件中的数据内容包括用户用电类别、供电区域、电压等级、基准起始日期、基准结束日期、异常数据处理方式和基准负荷算法等。
102、将用电用户列表作为配置参数创建线程池并生成线程池的核算任务队列;
本实施例中根据线程池的技术原理对有序用电用户基准负荷进行快速核算,具体包括同时对多个用户进行核算,因此此处线程池技术也是一个以上的线程或者线程并发执行。系统在启动核算阶段需要根据获取到的用电用户列表作为配置参数创建线程池,本实施例中线程池包括线程池管理器、工作线程、任务队列以及任务接口,其中线程池管理器用于创建并维护线程池,根据需要调整线程池的大小,并监控线程泄漏现象;工作线程为一个可以循环执行任务的线程,没有任务时处于等待状态,新任务到达时可以唤醒;任务队列为缓冲机制,用于临时存放待处理的任务,同时作为并发线程的查询对象;任务接口为每个任务必须实现的接口,工作线程通过该接口调度任务的执行。需要说明的是,针对有序用电用户背景下任务是核算出用电用户的基准负荷,在获取到用电用户列表后确定线程数量,再根据用电用户的户号列表是确定核算任务队列。
103、基于线程池执行核算任务队列;
基于上述创建线程池后将一定数量的线程放入到线程池中,并且让线程处于阻塞状态,当接收到核算请求时,唤醒一个线程去执行该核算任务,线程依序获得队列中的户号后,将户号作为程序输入参数启动线程执行核算任务,任务完成后线程不终止,继续到任务队列中获得户号,所有的线程都同步运作,这样并发的形式提高了核算效率。
104、利用基准负荷算法计算执行完成后的核算数据对应的用电用户基准负荷;
本实施例中的基准负荷算法指的是如何确定基准负荷,具体包括均值法、最大值法、最小值法以及比率法等。均值法是以用电用户在基准日期里的日平均负荷确定基准负荷,最大值法则是以用电用户在基准日中的日最大负荷确定基准负荷,最小值法则是以用电用户在基准日中的日最小负荷确定基准负荷,比率法则是用电用户在基准日中的负荷乘以比率确定基准负荷。
105、基于用电用户基准负荷输出交叉验证后的数据集;
本实施例中将计算后的用户池中每一个用电用户的基准负荷合成一个电子数据集,对数据集的内容进行交叉验证,对基准负荷异常告警,形成可信的结构。其中交叉验证为在用户池中所有用户的基准负荷抽取大部分样本数据进行建模型,留小部分样本数据用刚建立的模型进行预报,并求这小部分样本的预报误差,记录它们的平方加和。例如,将参与基准负荷核算的用电用户分成四份,随机取三份作为核算用户,剩余一份作为验证用户。此处交叉验证可反复开展,确定验证准确率最高的基准负荷算法。
请参阅图2,本申请实施例使用系统举例描述,本申请实施例中有序用电用户基准负荷快速核算方法另一个实施例包括:
201、根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
本实施例中的步骤201与前述实施例中的步骤101类似,此处不做赘述。
202、读取核算任务队列中的一项任务;
本实施例中每一项任务都有唯一用户的户号,则在执行任务之前都要读取任务中户号是否正确,确认后则才开始执行任务。
203、对任务进行处理完成后执行下一项任务直到任务队列为空;
本实施例中线程池还包括线程管理,线程管理用于当空闲线程少于某一定量时,线程管理就开始创建线程,当空闲线程大于某一数值时,管理线程就开始销毁线程,系统在对任务进行处理时线程管理实时查询空闲线程数量,直到任务为空。
204、判断核算任务队列中的所有任务是否核算完成,若是,则执行下一步操作;
当任务队列中没有任务后,线程不会终止,系统还会再一次判断核算任务队列中是否所有任务都核算完成,若是,则执行下一步操作。
205、对执行完成后的核算数据进行数据处理,数据处理包括数据清理和数据整合;
本实施例中数据清理工作的目的是不让有错误或有问题的数据进入运算过程,包括数据有效范围的清理、数据逻辑一致性的清理和数据质量的抽查。例如,远超计量范围的异常电压就要清理。
数据整合是将若干个类似的属性整合起来,减少属性的数量,例如用户类别和用户类型这样本质上有对应关系的两个属性数据,可以整合为一个,即只留下一个属性数据。
206、利用基准负荷算法计算执行完成后的核算数据对应的用电用户基准负荷;
207、基于用电用户基准负荷输出交叉验证后的数据集。
本实施例中的步骤206至207与上述实施例中的步骤104至105类似,此处不做赘述。
208、当核算任务队列中的所有任务没有核算完成,则重新获取核算任务队列中的剩余项任务并执行剩余项任务,剩余项任务包括一项或者多项任务;
当核算任务队列中的所有任务没有核算完成,系统会重新获取核算任务队列中的剩余项任务并执行剩余项任务,其中剩余项任务包括一项或者多项任务。
请参阅图3,本申请实施例中有序用电用户基准负荷快速核算装置一个实施例包括:
获取单元301,用于根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
生成单元302,用于将用电用户列表作为配置参数创建线程池并生成线程池的核算任务队列;
执行单元303,用于基于线程池执行核算任务队列;
判断单元304,用于判断核算任务队列中的任务是否核算完成;
读取单元305,用于重新读取核算任务队列中的剩余项任务并执行剩余项任务,剩余项任务包括一项或者多项任务;
计算单元306,用于当核算任务队列中的任务核算完成后利用基准负荷算法计算执行完成后的核算数据对应的用电用户基准负荷;
输出单元307,用于基于用电用户基准负荷输出交叉验证后的数据集。
执行单元303包括第一读取模块3031和执行模块3032。
第一读取模块3031,用于读取核算任务队列中的一项任务;
执行模块3032,用于对任务进行处理完成后执行下一项任务直到任务队列为空。
判断单元304包括第二读取模块3041。
第二读取模块3041,用于当核算任务队列中的所有任务没有核算完成,则重新读取核算任务队列中的剩余项任务并执行剩余项任务,剩余项任务包括一项或者多项任务。
可选的,本实施例中的单元和模块的功能描述与前述图1至图2所示实施例中的步骤对应,此处不做赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,read-onlymemory)、随机存取存储器(RAM,random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (7)
1.有序用电用户基准负荷快速核算方法,其特征在于,包括:
根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
将所述用电用户列表作为配置参数创建线程池并生成所述线程池的核算任务队列;
基于所述线程池执行所述核算任务队列;
利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷;
基于所述用电用户基准负荷输出交叉验证后的数据集。
2.根据权利要求1所述的方法,其特征在于,所述基于所述线程池执行所述核算任务队列,包括:
启动空闲线程读取所述核算任务队列中的一项任务;
对所述任务进行处理完成后执行下一项任务直到所述任务队列为空。
3.根据权利要求2所述的方法,其特征在于,在所述基于所述线程池执行所述核算任务队列之后,所述方法还包括:
判断所述核算任务队列中的所有任务是否核算完成,若是,则执行下一步操作。
4.根据权利要求3所述的方法,其特征在于,所述判断所述核算任务队列中的所有任务是否核算完成,包括:
若否,则重新读取所述核算任务队列中的剩余项任务并执行所述剩余项任务,所述剩余项任务包括一项或者多项任务。
5.根据权利要求1所述的方法,其特征在于,在所述利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷之前,所述方法还包括:
对所述执行完成后的核算数据进行数据处理,所述数据处理包括数据清理和数据整合。
6.根据权利要求5所述的方法,其特征在于,所述基准负荷算法包括均值法、最大值法、最小值法以及比率法。
7.序用电用户基准负荷快速核算装置,其特征在于,包括:
获取单元,用于根据数据源获取用电用户列表,所述数据源为数据库或数据文件;
生成单元,用于将所述用电用户列表作为配置参数创建线程池并生成所述线程池的核算任务队列;
执行单元,用于基于所述线程池执行所述核算任务队列;
计算单元,用于利用基准负荷算法计算所述执行完成后的核算数据对应的用电用户基准负荷;
输出单元,用于基于所述用电用户基准负荷输出交叉验证后的数据集。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211082499.6A CN115543608A (zh) | 2022-09-06 | 2022-09-06 | 有序用电用户基准负荷快速核算方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211082499.6A CN115543608A (zh) | 2022-09-06 | 2022-09-06 | 有序用电用户基准负荷快速核算方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115543608A true CN115543608A (zh) | 2022-12-30 |
Family
ID=84726445
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211082499.6A Pending CN115543608A (zh) | 2022-09-06 | 2022-09-06 | 有序用电用户基准负荷快速核算方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115543608A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116257365A (zh) * | 2023-05-15 | 2023-06-13 | 建信金融科技有限责任公司 | 数据入库方法、装置、设备、存储介质及程序产品 |
CN117032996A (zh) * | 2023-10-09 | 2023-11-10 | 湖南中青能科技有限公司 | 一种电力元数据管理方法及系统 |
-
2022
- 2022-09-06 CN CN202211082499.6A patent/CN115543608A/zh active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116257365A (zh) * | 2023-05-15 | 2023-06-13 | 建信金融科技有限责任公司 | 数据入库方法、装置、设备、存储介质及程序产品 |
CN116257365B (zh) * | 2023-05-15 | 2023-08-22 | 建信金融科技有限责任公司 | 数据入库方法、装置、设备、存储介质 |
CN117032996A (zh) * | 2023-10-09 | 2023-11-10 | 湖南中青能科技有限公司 | 一种电力元数据管理方法及系统 |
CN117032996B (zh) * | 2023-10-09 | 2023-12-22 | 湖南中青能科技有限公司 | 一种电力元数据管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115543608A (zh) | 有序用电用户基准负荷快速核算方法及装置 | |
Tejada-Arango et al. | Which unit-commitment formulation is best? A comparison framework | |
Poncelet et al. | The importance of integrating the variability of renewables in long-term energy planning models | |
US20180307594A1 (en) | System, method and storage device for cim/e model standard compliance test | |
CN111047369B (zh) | 一种电力现货市场监测分析装置及系统 | |
Zhang et al. | A comparison of energy bugs for smartphone platforms | |
CN112488745A (zh) | 一种智能费控管理方法、装置、设备和存储介质 | |
CN116544999B (zh) | 储能系统的装机容量确定方法、装置、设备和介质 | |
CN115495702B (zh) | 一种模型训练能耗计算方法、装置、系统及可读存储介质 | |
CN110472871A (zh) | 一种针对管理线损异常原因的排查方法 | |
CN113807553A (zh) | 预约服务的数量分析方法、装置、设备及存储介质 | |
CN105245351A (zh) | 一种计费方法及装置 | |
CN117745502A (zh) | 碳排放的计算方法、装置、电子设备及存储介质 | |
CN112381583A (zh) | 一种基于分布式内存计算技术的电力量费计算方法及装置 | |
CN112016009A (zh) | 数据处理方法、余额获取方法、装置、设备和存储介质 | |
CN112598534A (zh) | 评估电力消费量与国内生产总值相关性的方法及装置 | |
Song et al. | Compress blocks or not: Tradeoffs for energy consumption of a big data processing system | |
CN114897394A (zh) | 用电量监管系统及方法 | |
CN108595552A (zh) | 数据立方体发布方法、装置、电子设备和存储介质 | |
CN114971187A (zh) | 一种基于机器人流程自动化的供用电合同生成方法和系统 | |
CN107748711A (zh) | 自动优化Storm并行度的方法、终端设备及存储介质 | |
CN110635984A (zh) | 一种获取电表的通讯地址的方法、装置及系统 | |
CN112464085A (zh) | 一种房源推荐的方法、装置、电子设备及存储介质 | |
CN117196696B (zh) | 一种基于市场供需关系和机组行为的电价预测方法 | |
CN112329387B (zh) | 一种公式模板配置方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |