CN106341467B - 基于大数据并行计算的用电信息采集设备状态分析方法 - Google Patents
基于大数据并行计算的用电信息采集设备状态分析方法 Download PDFInfo
- Publication number
- CN106341467B CN106341467B CN201610765691.3A CN201610765691A CN106341467B CN 106341467 B CN106341467 B CN 106341467B CN 201610765691 A CN201610765691 A CN 201610765691A CN 106341467 B CN106341467 B CN 106341467B
- Authority
- CN
- China
- Prior art keywords
- data
- type
- computation
- acquisition terminal
- priority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 13
- 238000013468 resource allocation Methods 0.000 claims abstract description 4
- 230000005611 electricity Effects 0.000 abstract description 11
- 238000012544 monitoring process Methods 0.000 abstract description 4
- 238000000034 method Methods 0.000 abstract description 3
- 230000002159 abnormal effect Effects 0.000 abstract description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008014 freezing Effects 0.000 description 2
- 238000007710 freezing Methods 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01R—MEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
- G01R31/00—Arrangements for testing electric properties; Arrangements for locating electric faults; Arrangements for electrical testing characterised by what is being tested not provided for elsewhere
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Health & Medical Sciences (AREA)
- Marketing (AREA)
- Theoretical Computer Science (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Water Supply & Treatment (AREA)
- Primary Health Care (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Public Health (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Remote Monitoring And Control Of Power-Distribution Networks (AREA)
Abstract
本发明公开了一种基于大数据并行计算的用电信息采集设备状态分析方法,包括:1)以采集终端为单位,主站接收采集终端所采集到的数据,并对数据进行分类;2)对每一个类型的数据进行分布式缓存;3)资源动态分配服务根据当前每个数据类型的数据量、数据计算复杂度、数据优先级以及计算资源针对每种类型数据的处理速度实施动态的资源分配,本发明解决了现有采集设备运行状态分析的速度,通过大数据并行计算技术,给出采集设备运行状态的方法。可以分析用户用电行为,提高异常的响应速度;防止窃电行为,监测用户的供电质量和实时线损确保电网运行安全、提高供电可靠率。
Description
技术领域
本发明属于电力大数据计算技术领域,尤其涉及一种基于大数据并行计算的用电信息采集设备状态分析方法。
背景技术
目前集设备运行状态在线监测采用计算队列数量平均分配的原则实现,存在大量计算负责度较高的数据分配在同一个计算队列中,从而导致设备运行状态在线监测数据结果计算时间较长,不利于及时计量差错的排查,用户用电行为分析,窃电行为的处理,电网运行安全的保障,有序用电的分析,配变状态的获取的及时性有所降低。
发明内容
针对现有技术存在的问题,本发明提供一种基于大数据并行计算的用电信息采集设备状态分析方法,运用大数据并行计算技术在线监测采集设备运行状态,直观简单快速发现计量故障并及时检查消缺。
本发明的上述技术问题主要是通过下述技术方案得以解决的,
基于大数据并行计算的用电信息采集设备状态分析方法,包括如下步骤:
步骤1、以采集终端为单位,主站接收采集终端所采集到的数据,并对数据进行分类;
步骤2、对每一个类型的数据进行分布式缓存;
步骤3、资源动态分配服务根据当前每个数据类型的数据量、数据计算复杂度、数据优先级以及计算资源针对每种类型数据的处理速度实施动态的资源分配。
进一步的,所述步骤3通过资源动态分配服务根据当前每个数据类型的数据量、数据计算复杂度、数据优先级以及计算资源针对每种类型数据的处理速度实施动态的资源分配具体为:
3a)根据采集设备的运行状态个数来设置数据计算复杂度;
3b)计算出所有数据类型计算复杂度的最小公倍数,再用最小公倍数除以各类型数据的计算复杂度得到所对应的数据类型的优先级;
3c)通过数据类型查询当前数据量;根据数据类型的优先级结合当前可计算资源,分配采集终端的数据到对应的计算队列中。
进一步的,:所述分配采集终端的数据到对应的计算队列中的分配规则如下:实时刷新当前可计算资源,包括服务器编号、可用队列数以及所需等待时间复杂度;分配优先级最高的数据类型到所需等待时间复杂度最小服务器的缓存队列中,再实时刷新可计算资源,直到数据全部分配完毕。
本发明的有益效果是:解决了现有采集设备运行状态分析的速度,通过大数据并行计算技术,给出采集设备运行状态的方法。可以分析用户用电行为,提高异常的响应速度;防止窃电行为,监测用户的供电质量和实时线损确保电网运行安全、提高供电可靠率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明的逻辑架构示意图。
具体实施方式
下面结合附图对本发明的优选实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
如图1所示,一种基于大数据并行计算的用电信息采集设备状态分析方法,包括如下步骤:
步骤1、以采集终端为单位,主站接收采集终端所采集到的数据,并对数据进行分类,这里的数据类型主要包括冻结示数(每日0点冻结的电表示数)、电压,电流,心跳报文,电表时钟,功率,事件以及电表参数。
步骤2、对每一个类型的数据进行分布式缓存,以提高数据读取的速度,所存储的数据格式当中包括电表局编号、数据类型以及采集设备状态等,以便于后续的异常设备资产定位;
步骤3、资源动态分配服务根据当前每个数据类型的数据量、数据计算复杂度、数据优先级以及计算资源针对每种类型数据的处理速度实施动态的资源分配,具体包括:
3a)根据采集设备的运行状态个数来设置数据计算复杂度(数据计算复杂度的设置见表1,采集设备状态的个数越多,数据计算复杂度越高);
3b)计算出所有数据类型计算复杂度的最小公倍数,再用最小公倍数除以各类型数据的计算复杂度得到所对应的数据类型的优先级(优先级高的数据先计算);
3c)通过数据类型查询当前数据量;根据数据类型的优先级结合当前可计算资源,分配采集终端的数据到对应的计算队列中(每个采集终的端数据类型属于对应采集设备状态中的哪一个,是通过计算队列计算得出的),分配原则如下:实时刷新当前可计算资源,包括服务器编号,可用队列数以及所需等待时间复杂度(累加对应数据类型队列缓存数乘以相应的计算复杂度);分配优先级最高的数据类型到所需等待时间复杂度最小服务器的缓存队列中,再实时刷新可计算资源,直到数据全部分配完毕。
采集设备状态计算规则(采集终端数据所属采集设备状态的判断规则)如下:电能示值下降:(昨日冻结示数-当日冻结示数)>1且(前日冻结示数-昨日日冻结示数)>1且三天内无换表记录;
电能表飞走:当日电量>电能表额定容量*50小时,仅针对10-100A电表;
电能表示数突增:(当日冻结示数-昨日冻结示数<11,但当日冻结示数>前日冻结示数
电能表反接线:反向示数>5且反向电量>0.5且反向电量>正向电量,
电表反向有功电能示值超限:反向有功日冻结示数>5(反向电量白名单中的用户及光伏用户不生成用此判断)
用户用电量突增:用户日电量>50度且>上月月电量的1/3
失压:电表的失压状态字判断;
欠压:电表的欠压状态字判断;
过压:电表的过压状态字判断;
电压逆向序:电表的电压逆向序状态字判断;
电压不平衡:
智能三相表(直接式)、低压侧三相四线:
三相电压[1±22%Un]不平衡度超限[大于7%]日时长占比超20%;
高压侧三相四线:
三相电压[1±22%Un]不平衡度超限[大于5%]日时长占比超20%;
高压侧三相三线:
A/C相电压[1±22%Un]不平衡度超限[大于5%]日时长占比超20%;
失流:电表的失流状态字判断;
欠流:电表的欠流状态字判断;
电流逆向序:电表的电流逆向序状态字判断;
电流不平衡:三相不平衡度>0.5(三相不平衡度:三相电流曲线中的最大电流出现时,(MAX(A、B、C)-MIN(A、B、C))/MAX(A、B、C));
终端不在线:(当前时间-最新心跳报文时间)>30分钟
时钟超差:电表时钟>5分钟;
功率曲线有负值:日有功功率曲线有负值。
表1
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何不经过创造性劳动想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书所限定的保护范围为准。
Claims (2)
1.基于大数据并行计算的用电信息采集设备状态分析方法,其特征在于,包括如下步骤:
以采集终端为单位,主站接收采集终端所采集到的数据,并对数据进行分类;
对每一个类型的数据进行分布式缓存;
资源动态分配服务根据当前每个数据类型的数据量、数据计算复杂度、数据优先级以及计算资源针对每种类型数据的处理速度实施动态的资源分配,具体为:
3a)将数据计算复杂度设置为等于采集设备的运行状态指标个数;
3b)计算出所有数据类型计算复杂度的最小公倍数,再用最小公倍数除以各类型数据的计算复杂度得到所对应的数据类型的优先级;
3c) 通过数据类型查询当前数据量;根据数据类型的优先级结合当前可计算资源,分配采集终端的数据到对应的计算队列中。
2.根据权利要求1所述的基于大数据并行计算的用电信息采集设备状态分析方法,其特征在于:所述分配采集终端的数据到对应的计算队列中的分配规则如下:实时刷新当前可计算资源,包括服务器编号、可用队列数以及所需等待时间复杂度;分配优先级最高的数据类型到所需等待时间复杂度最小服务器的缓存队列中,再实时刷新可计算资源,直到数据全部分配完毕。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610765691.3A CN106341467B (zh) | 2016-08-30 | 2016-08-30 | 基于大数据并行计算的用电信息采集设备状态分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610765691.3A CN106341467B (zh) | 2016-08-30 | 2016-08-30 | 基于大数据并行计算的用电信息采集设备状态分析方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106341467A CN106341467A (zh) | 2017-01-18 |
CN106341467B true CN106341467B (zh) | 2019-11-29 |
Family
ID=57823992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610765691.3A Active CN106341467B (zh) | 2016-08-30 | 2016-08-30 | 基于大数据并行计算的用电信息采集设备状态分析方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106341467B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107622078B (zh) * | 2017-07-27 | 2021-07-13 | 国网辽宁省电力有限公司 | 一种实时监控用电信息采集设备健康状态的方法 |
CN107368016B (zh) * | 2017-09-04 | 2019-11-08 | 云南电网有限责任公司电力科学研究院 | 一种换流站监控系统运行的优化方法及装置 |
CN110019361B (zh) * | 2017-10-30 | 2021-10-15 | 北京国双科技有限公司 | 一种数据的缓存方法及装置 |
CN114679460B (zh) * | 2022-05-26 | 2022-09-20 | 天津理工大学 | 建筑运维监控报警系统 |
CN117061170B (zh) * | 2023-08-14 | 2024-04-30 | 长沙诺邦机电设备有限公司 | 一种基于特征选择的智能制造工业大数据分析方法 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102521056A (zh) * | 2011-12-28 | 2012-06-27 | 用友软件股份有限公司 | 任务分配装置和任务分配方法 |
CN103268336A (zh) * | 2013-05-13 | 2013-08-28 | 刘峰 | 一种快数据和大数据结合的数据处理方法及其系统 |
CN103383755A (zh) * | 2013-06-25 | 2013-11-06 | 浙江百唐网络技术有限公司 | 基于云计算的农产品大规模质量监管平台 |
CN103902838A (zh) * | 2014-04-17 | 2014-07-02 | 北京泰乐德信息技术有限公司 | 一种基于云计算的tmis车流测定方法及系统 |
CN104036357A (zh) * | 2014-06-12 | 2014-09-10 | 国家电网公司 | 用户用电窃电行为模式的分析方法 |
CN104077552A (zh) * | 2014-07-07 | 2014-10-01 | 北京泰乐德信息技术有限公司 | 一种基于云计算的轨道交通信号综合运维方法及系统 |
CN104268219A (zh) * | 2014-09-24 | 2015-01-07 | 国家电网公司 | 一种海量用电信息采集数据的管理方法及其系统 |
CN104636397A (zh) * | 2013-11-15 | 2015-05-20 | 阿里巴巴集团控股有限公司 | 用于分布式计算的资源分配方法、计算加速方法以及装置 |
CN104657497A (zh) * | 2015-03-09 | 2015-05-27 | 国家电网公司 | 一种基于分布式计算的海量用电信息并行计算系统及方法 |
CN105205729A (zh) * | 2015-09-22 | 2015-12-30 | 许继集团有限公司 | 一种基于云计算的电力系统能效公共服务云平台 |
CN105760459A (zh) * | 2016-02-04 | 2016-07-13 | 四川嘉宝资产管理集团股份有限公司 | 一种分布式数据处理系统及方法 |
CN105786996A (zh) * | 2016-02-18 | 2016-07-20 | 国网智能电网研究院 | 一种用电信息数据质量分析系统 |
-
2016
- 2016-08-30 CN CN201610765691.3A patent/CN106341467B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102521056A (zh) * | 2011-12-28 | 2012-06-27 | 用友软件股份有限公司 | 任务分配装置和任务分配方法 |
CN103268336A (zh) * | 2013-05-13 | 2013-08-28 | 刘峰 | 一种快数据和大数据结合的数据处理方法及其系统 |
CN103383755A (zh) * | 2013-06-25 | 2013-11-06 | 浙江百唐网络技术有限公司 | 基于云计算的农产品大规模质量监管平台 |
CN104636397A (zh) * | 2013-11-15 | 2015-05-20 | 阿里巴巴集团控股有限公司 | 用于分布式计算的资源分配方法、计算加速方法以及装置 |
CN103902838A (zh) * | 2014-04-17 | 2014-07-02 | 北京泰乐德信息技术有限公司 | 一种基于云计算的tmis车流测定方法及系统 |
CN104036357A (zh) * | 2014-06-12 | 2014-09-10 | 国家电网公司 | 用户用电窃电行为模式的分析方法 |
CN104077552A (zh) * | 2014-07-07 | 2014-10-01 | 北京泰乐德信息技术有限公司 | 一种基于云计算的轨道交通信号综合运维方法及系统 |
CN104268219A (zh) * | 2014-09-24 | 2015-01-07 | 国家电网公司 | 一种海量用电信息采集数据的管理方法及其系统 |
CN104657497A (zh) * | 2015-03-09 | 2015-05-27 | 国家电网公司 | 一种基于分布式计算的海量用电信息并行计算系统及方法 |
CN105205729A (zh) * | 2015-09-22 | 2015-12-30 | 许继集团有限公司 | 一种基于云计算的电力系统能效公共服务云平台 |
CN105760459A (zh) * | 2016-02-04 | 2016-07-13 | 四川嘉宝资产管理集团股份有限公司 | 一种分布式数据处理系统及方法 |
CN105786996A (zh) * | 2016-02-18 | 2016-07-20 | 国网智能电网研究院 | 一种用电信息数据质量分析系统 |
Also Published As
Publication number | Publication date |
---|---|
CN106341467A (zh) | 2017-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106341467B (zh) | 基于大数据并行计算的用电信息采集设备状态分析方法 | |
CN101534021B (zh) | 应用于电力自动化系统中的多态数据采集及处理方法 | |
CN103532745A (zh) | 基于电力用户用电信息采集系统的计量在线监测系统 | |
CN104219315A (zh) | 一种用电信息采集系统的运行监控系统及其监控方法 | |
CN107622342B (zh) | 一种基于mvc架构的配网台区数据分析系统 | |
CN110276511A (zh) | 一种基于电量与线损关联性的线变关系异常判别方法 | |
CN103995962A (zh) | 一种配用电线损实时在线计算分析方法 | |
WO2013150405A1 (en) | Smoothing power output from a wind farm | |
CN108197774A (zh) | 一种分布式光伏发电量异常诊断的方法及装置 | |
CN110703009A (zh) | 台区线损率异常分析及处理方法 | |
CN107907759A (zh) | 电力设备的电量监控系统及方法 | |
CN103853131A (zh) | 电力监控装置及其电力分析方法 | |
CN115236395B (zh) | 变电站碳排放计量方法、装置、计算机设备和存储介质 | |
CN110472871A (zh) | 一种针对管理线损异常原因的排查方法 | |
CN107895017A (zh) | 一种基于大数据技术的电能质量监测系统构建方法 | |
CN114528951A (zh) | 一种配网线路单线图异常诊断分析方法、系统及装置 | |
CN109165045A (zh) | 一种调整服务器的硬件配置的方法和装置 | |
CN116937569A (zh) | 光伏发电智能储能方法、装置及电子设备 | |
CN110929115A (zh) | 一种基于用电特性的用电安全监测方法及系统 | |
US7991567B1 (en) | Centralized operating meter for energy technologies | |
CN113434496A (zh) | 配变重过载实时监测系统方法、系统及计算机介质 | |
CN107729218A (zh) | 一种监控处理计算资源设备的系统及方法 | |
CN112986884B (zh) | 用户计量倍率档案校验方法及系统 | |
CN202190122U (zh) | 一种配电网低压台区理论线损率分析系统 | |
TWM631771U (zh) | 能源整合管理系統 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |