CN114049036A - 数据计算平台、方法、设备及存储介质 - Google Patents

数据计算平台、方法、设备及存储介质 Download PDF

Info

Publication number
CN114049036A
CN114049036A CN202111406927.1A CN202111406927A CN114049036A CN 114049036 A CN114049036 A CN 114049036A CN 202111406927 A CN202111406927 A CN 202111406927A CN 114049036 A CN114049036 A CN 114049036A
Authority
CN
China
Prior art keywords
index
data
power
module
calculation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111406927.1A
Other languages
English (en)
Inventor
阮国恒
江嘉铭
黄一捷
陈韵
温锐
张锦军
谢国财
张琪瑶
黄悦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Power Grid Energy Investment Co ltd
Guangdong Power Grid Co Ltd
Qingyuan Power Supply Bureau of Guangdong Power Grid Co Ltd
Original Assignee
Guangdong Power Grid Energy Investment Co ltd
Guangdong Power Grid Co Ltd
Qingyuan Power Supply Bureau of Guangdong Power Grid Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Power Grid Energy Investment Co ltd, Guangdong Power Grid Co Ltd, Qingyuan Power Supply Bureau of Guangdong Power Grid Co Ltd filed Critical Guangdong Power Grid Energy Investment Co ltd
Priority to CN202111406927.1A priority Critical patent/CN114049036A/zh
Publication of CN114049036A publication Critical patent/CN114049036A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/906—Clustering; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06—Energy or water supply
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Development Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • Data Mining & Analysis (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Computational Linguistics (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例公开了一种数据计算平台、方法、设备及存储介质。该数据计算平台包括：监管平台、数据处理模块以及指标计算模块；所述监管平台，用于通过自动化任务组件，从各个业务系统中获取电力数据；所述数据处理模块，用于对所述电力数据进行处理，得到电力指标数据；所述指标计算模块，用于根据预设计算方式对所述电力指标数据进行计算，得到指标结果表。本发明实施例的技术方案，通过一种新的数据计算平台,提高对电力数据的处理效率。

Description

数据计算平台、方法、设备及存储介质
技术领域
本发明实施例涉及计算机技术领域，尤其涉及一种数据计算平台、方法、设备及存储介质。
背景技术
在大数据背景下，电力领域的业务需求越来越丰富，需要处理的电力数据也越来越庞大。但是现有的电力系统往往是针对局部区域的数据处理系统，只能获取局部区域的电力数据，以及对电力数据进行数据监测、故障分析预警等处理，无法满足海量、高维数据的处理需求，导致电力数据的处理效率低。
发明内容
本发明实施例提供一种数据计算平台、方法、设备及存储介质，以实现提高对电力数据的处理效率。
第一方面，本发明实施例提供了一种数据计算平台，数据计算平台包括：监管平台、数据处理模块以及指标计算模块；
监管平台，用于通过自动化任务组件，从各个业务系统中获取电力数据；
数据处理模块，用于对电力数据进行处理，得到电力指标数据；
指标计算模块，用于根据预设计算方式对电力指标数据进行计算，得到指标结果表。
可选的，监管平台，用于：通过自动化任务组件，从能监办受电平台和电力代维系统中获取工单数据和生产数据；
其中，工单数据至少包括：运行工单流程数据和运行资料数据；生产数据至少包括：电压合格率和供电可靠率。
可选的，数据处理模块，包括：
指标信息表生成模块，用于根据电力数据生成相应的电力指标数据，并将电力指标数据存入指标信息表；电力指标数据包括指标名称、指标编码、组织机构和指标取值范围；
指标节点管理模块，用于根据指标节点类型对电力指标数据进行分类，得到指标分类信息表和指标与分类关系表；
指标标签管理模块，用于根据业务领域将电力指标数据进行分类，生成指标与标签关系表；
指标计算规则管理模块，用于根据电力指标数据和预设的指标计算公式，生成计算公式信息表、计算公式参数配置表、指标与计算公式关联关系表和计算公式执行日志表。
可选的，指标计算模块，用于：根据预设计算规则或预设计算公式，对电力指标数据进行量化计算，并按照日、月、季度、半年、年周期存入相应的指标结果表。
可选的，还包括：指标得分计算模块，用于根据预设的指标评分规则、预设阈值和各指标权重比例，将电力指标数据转换为指标得分。
可选的，还包括：指标预警模块，用于将电力指标数据与相应的指标预警阈值进行比较，得到指标预警信息。
可选的，还包括：流程预警模块，用于根据电力业扩报装流程和相应的流程阈值，得到流程预警信息。
可选的，还包括：稽查评价模块，用于根据选定的电力指标项以及各指标预设权重，计算稽查得分。
可选的，监管平台，还包括：可视化模块，用于响应于指标收藏操作，将待收藏的电力指标项添加至数据区，并根据电力指标项的历史数据生成可视化的指标趋势图表；
响应于对指标趋势图表的节点点击操作，通过系统弹窗显示指标明细数据记录。
可选的，还包括：指标明细数据查询模块，用于获取待查询指标的指标编码，并查询与指标编码对应的计算方式，根据计算方式以及请求频度，获取指标明细数据。
第二方面，本发明实施例还提供了一种数据计算方法，应用于数据计算平台，数据计算平台包括：监管平台、数据处理模块以及指标计算模块，该方法包括：
通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；
通过数据处理模块，对电力数据进行处理，得到电力指标数据；
通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表。
第三方面，本发明实施例还提供了一种计算机设备，计算机设备中部署有如本发明任意实施例提供的数据计算平台，设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现本发明任意实施例提供的数据计算方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例提供的数据计算方法。
本发明实施例的技术方案，数据计算平台包括：监管平台、数据处理模块以及指标计算模块；通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；通过数据处理模块，对电力数据进行处理，得到电力指标数据；通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表，解决了现有技术中电力数据的处理效率低的问题，提高了对电力数据的处理效率。
附图说明
图1a是本发明实施例一中的一种数据计算平台的结构示意图；
图1b是本发明实施例一中的一种计算公式信息表；
图1c是本发明实施例一中的一种计算公式参数配置表；
图1d是本发明实施例一中的一种指标与计算公式关联关系表；
图1e是本发明实施例一中的一种计算公式执行日志表；
图1f是本发明实施例一中的一种指标得分计算模块的结构示意图；
图1g是本发明实施例一中的一种自动化任务的原理图；
图1h是本发明实施例一中的一种指标明细数据查询的实现流程图；
图2是本发明实施例二中的一种数据计算方法的流程图；
图3是本发明实施例三中的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1a是本发明实施例一中的一种数据计算平台的结构示意图，本实施例可适用于对海量电力数据进行高效处理的情况，该平台可以部署在提供数据计算服务的计算机设备上。如图1a所示，数据计算平台包括：监管平台110、数据处理模块120以及指标计算模块130；
监管平台110，用于通过自动化任务组件，从各个业务系统中获取电力数据；
数据处理模块120，用于对电力数据进行处理，得到电力指标数据；
指标计算模块130，用于根据预设计算方式对电力指标数据进行计算，得到指标结果表。
本实施例中，监管平台可通过自动化任务组件进行数据仓库原始数据抽取，通过动态配置任务项，可从各业务系统中灵活提取电力数据。自动化任务支持集群、高可用模式，提高任务容错率。
本实施例中，自动化任务采用平台组件的方式抽象出定时任务组件服务，不同维度的任务可并行执行互不影响，如果任务之间有依赖、先后顺序关系，可通过定时任务cron表达式定义时间周期进行控制。所有任务均需记录运行日志。
其中，自动化任务的功能项模块包括：(1)查询任务模块：用于提供定时任务查询功能，支持任务名称、任务分组等条件过滤。(2)新增任务模块：用于提供定时任务新增功能，可实现任务执行周期、抽取数据对象等灵活可配置。(3)编辑任务模块：用于提供定时任务修改功能，实现任务属性修改。(4)删除任务模块：用于提供删除任务功能。(5)启动任务模块：用于提供任务启动功能。(6)停止任务模块：用于提供任务停止功能。(7)数据仓库日志模块：用于提供查看原业务系统向数据仓库提交数据操作日志记录；提供监管平台从数据仓库抽取业务数据操作的日志记录。
可选的，监管平台110，用于：通过自动化任务组件，从能监办受电平台和电力代维系统中获取工单数据和生产数据；其中，工单数据至少包括：运行工单流程数据和运行资料数据；生产数据至少包括：电压合格率和供电可靠率。
本实施例中，可以从能监办受电平台与电力代维系统中获取工单数据，并检查工单数据是否完整。能监办受电平台的数据获取只能通过系统平台功能导入，在实际应用中，可预先准备好EXCEL模板，利用系统平台功能提供的EXCEL数据导入功能将符合EXCEL模板的工单数据导入监管平台。
其中，工单数据包括运行工单流程数据和运行资料数据等。进一步的，本发实施例是根据“获得电力”评价指标体系，结合业务监管要求，获取业扩报装全业务流程等数据并存储的。其中，运行工单流程数据是通过调用监管平台接口写入或者实时通过消息中间件形式写入的。而运行资料数据是通过监管平台通过接口定时抽取或者电力代维系统定时写入消息中间件获取的。
其中，还可以从能监办受电平台和电力代维系统中获取生产数据，包括电压合格率、供电可靠率等。需要说明的是，本发明的生产数据是根据“获得电力”评价指标体系，结合业务监管要求，获取电压合格率、供电可靠率等数据并存储的。其数据获取方式为监管平台通过接口定时抽取或者电力代维系统定时写入消息中间件。
在实际应用中，可能存在相互之间工单编号重复的现象，监管平台在抽取数据时，需要以组织机构代码+编号作为唯一标识。
可选的，数据处理模块120，可以包括：
指标信息表生成模块，用于根据电力数据生成相应的电力指标数据，并将电力指标数据存入指标信息表；电力指标数据包括指标名称、指标编码、组织机构和指标取值范围；
指标节点管理模块，用于根据指标节点类型对电力指标数据进行分类，得到指标分类信息表和指标与分类关系表；
指标标签管理模块，用于根据业务领域将电力指标数据进行分类，生成指标与标签关系表；
指标计算规则管理模块，用于根据电力指标数据和预设的指标计算公式，生成计算公式信息表、计算公式参数配置表、指标与计算公式关联关系表和计算公式执行日志表。
本实施例中，指标信息表生成模块，用于执行计算规则将电力数据转化为相应的电力指标数据，并存储至指标信息表中。电力指标数据包括指标名称、指标编码、组织机构和指标取数范围。指标信息表主要用于存储指标实际业务数据信息，根据不同业务进行区分。定义指标信息表后，自动创建指标信息表，不同的指标信息表使用统一结构，但表名不同。指标信息表中设置有数据唯一标识，并以指标编码、指标版本、组织机构、维度值1、维度值2、维度值3作为唯一标识。进一步的，指标信息表包括指标主键、指标编码、指标版本、组织机构、频度(日、月、季度、半年、年)、统计周期(时间，与频度对应，如日频度，则统计周期为20210410)、提供方式(手工，抽取)、当前值、同期值、累计值、维度编码1、维度值编码1、维度值标识1、维度值1、维度值2、维度值3、来源系统、计算标识、是否历史接入、历史导入数据、无计算来源、是否最新数据等信息。其中，指标维度是从数据字典中抽取相关数据与指标进行关联。指标维度定义三个层级，且不同层级对应的数据字典类别不能重复。指标维度从码表明细项中选择需要使用的码表内容，指标计算规则根据维度顺序组合。
本实施例中，指标节点管理模块，用于对电力指标数据进行分类得到指标分类信息表和指标与分类关系表，指标分类信息表和指标与分类关系表是基于指标节点类型构建的，包括节点名称、节点编码、编码路径、名称路径、上级分类和节点类型。其中，指标节点类型分为分支和节点；节点下可以关联指标，分支下可以关联指标实体数据存储表。
本实施例中，指标标签管理模块，用于根据业务领域将电力指标数据进行分类，生成指标与标签关系表。指标标签是对指标的业务领域进行特定区分的信息，用于定义在不同维度上的指标查询时，进行快速过滤。其中，标签编码和标签名称不能重复。
本实施例中，指标计算规则管理模块，用于根据电力指标数据和预设的指标计算公式生成计算公式信息表、计算公式参数配置表、指标与计算公式关联关系表和计算公式执行日志表。指标计算公式是通过选择计算公式中的计算因子(已有指标)编写计算公式，通过加减乘除或者更复杂的数据公式进行计算。在创建计算公式时，需要编写公式内容并选择指标定义(指定频度)。
其中，计算公式信息表(im_calc_formula)可以如图1b所示；计算公式参数配置表(im_calc_formula_params)可以如图1c所示；指标与计算公式关联关系表(im_idx_calc_formula_rela)可以如图1d所示；计算公式执行日志表(im_calc_formula_excute_record)可以如图1e所示。
可选的，指标计算模块130，用于：根据预设计算规则或预设计算公式，对电力指标数据进行量化计算，并按照日、月、季度、半年、年周期存入相应的指标结果表。
本实施例中，可根据抽象的指标信息，在规定时间内对电力指标数据进行量化计算，比如，运行的时限长度：2天，用户办理业务资料完整度：0无，1完整，然后按照日、月、季度、半年、年周期存入相应的指标结果表中，以方便查看各指标在不同时间频度下的周期性变化。
可选的，还包括：指标得分计算模块，用于根据预设的指标评分规则、预设阈值和各指标权重比例，将电力指标数据转换为指标得分。
本实施例中，如图1f所示，指标得分计算模块用于根据预设的指标评分规则、预设阈值和各指标权重比例将电力指标数据值转换为指标得分。例如，电量权重为5％，如果电量没有超过预设阈值就得五分，如果超过阈值10％扣一分，直至扣完为止。
可选的，还包括：指标预警模块，用于将电力指标数据与相应的指标预警阈值进行比较，得到指标预警信息。
本实施例中，为了实时监督各指标是否异常，可以将电力指标数据与相应指标预警阈值进行比较得到指标预警信息，并通过短信平台、微信、移动作业终端等渠道通知到各相关人员，以及时对异常指标进行处理。此处预警有两层含义：(1)指标将要达到阈值的预警；(2)指标已超出阈值。例如当每个月的用电量超出预设阈值之后，就会发起告警。
可选的，还包括：流程预警模块，用于根据电力业扩报装流程和相应的流程阈值，得到流程预警信息。
本实施例中，为了保证流程有效进行，及时发现流程故障，可以根据电力业扩报装流程和相应的流程阈值得到流程预警信息。例如在实际工作中，业扩报装流程有10个环节，每个环节根据设定的完成标准期限为2天，然后系统自动计算各流程环节发起时间到处理完成时间，并判断中间的时间是否大于2天，如果大于两天就会发出预警。
可选的，还包括：稽查评价模块，用于根据选定的电力指标项以及各指标预设权重，计算稽查得分。
本实施例中，为了能够对员工进行业绩考核，可以根据各指标预设权重计算稽查得分，通过稽查得分来评估员工的业绩水平。具体的，根据系统启动的计划流程和选定的指标项，稽查人员现场稽查、评价打分后录入系统，系统根据各指标权重(可以在稽查计划重新赋值)计算本次稽查得分。稽查计划的指标项一般需要人工线下查验真伪，比如用户身份证扫描件的真实性，计算公式为：稽查得分＝∑(各指标人工打分*权重)。
可选的，监管平台，还包括：可视化模块，用于响应于指标收藏操作，将待收藏的电力指标项添加至数据区，并根据电力指标项的历史数据生成可视化的指标趋势图表；响应于对指标趋势图表的节点点击操作，通过系统弹窗显示指标明细数据记录。
本实施例中，为了迎合各人对不同数据的关注度以及数据处理习惯，可以将个人常用或关注程度较高的电力指标项添加到收藏，后续用户可快速添加自己收藏的指标到数据区，进行对应数据的分析。其中，大数据分析页面可以提供指标查询功能，用户可根据指标名称或者标签查询定位电力指标数据，添加至数据区进行分析。在将指标选至数据区后，每个指标可根据中间表的历史数据，形成可视化的趋势图表，并根据配置条件(如组织、时间)展示对应的形状(折线、柱状、饼状等)。其中，可视化图表对应的时间单位可以是天、月等，用户可根据需求进行调整。在可视化图表中，每个节点均会显示指定的值(X,Y)及其他说明，用户点击该节点，可以通过弹出系统弹窗展示指标明细数据记录。
本实施例中，如图1g所示，可利用自动化任务抽象出定时任务引擎组件，单独组成微服务应用实例，方便进行任务组件集群管理，提高任务容错率。自动化任务一共有3大类：数据抽取任务、指标计算任务、测评任务。自动化任务采用分组方式，分别对上述3种任务进行管理，任务采用平台组件的方式抽象出定时任务组件服务，不同维度的任务可并行执行互不影响，如果任务之间有依赖、先后顺序关系，可通过定时任务cron表达式定义时间周期进行控制。任务调度采用spring-quartz组件进行搭建，组件引擎数据项采用spring-quartz clusters模式下的数据项，主要包括：任务名称、任务分组、执行任务类、执行任务方法、执行任务周期表达式、任务状态、任务描述、任务业务参数等。具体业务任务数据项需根据具体业务参数抽象出任务数据项，数据抽取、指标计算、模板测评抽象出公共任务数据项，包括：任务名称、任务类型、管理业务ID、周期表达式、任务描述、组织机构、任务状态等。
可选的，还包括：指标明细数据查询模块，用于获取待查询指标的指标编码，并查询与指标编码对应的计算方式，根据计算方式以及请求频度，获取指标明细数据。
本实施例中，如图1h所示，当用户要获取指标明细数据时，可以获取待查询指标的指标编码，根据指标编码查询对应指标的计算方式，若对应指标的计算方式为计算规则且请求频度为最低频度，例如按年份查询，则调用抽取规则节点引擎，获取指标明细数据；若对应指标的计算方式为计算规则且请求频度为非最低频度，例如日、月、季度、半年等，则查询指标结果表获取明细数据；若对应指标的计算方式为计算公式且请求频度为最低频度，则查询对应计算公式，递归循环查询所有子指标的明细数据汇总成指标的明细数据；若对应指标的计算方式为计算公式且请求频度为非最低频度，则查询指标结果表获取明细数据。
本发明实施例的技术方案，数据计算平台包括：监管平台、数据处理模块以及指标计算模块；通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；通过数据处理模块，对电力数据进行处理，得到电力指标数据；通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表，解决了现有技术中电力数据的处理效率低的问题，提高了对电力数据的处理效率。
实施例二
图2是本发明实施例二中的一种数据计算方法的流程图，本实施例可适用于对海量电力数据进行高效处理的情况，该方法可以由数据计算平台来执行，该平台可以部署在提供数据计算服务的计算机设备上。如图2所示，该方法应用于数据计算平台，数据计算平台包括：监管平台、数据处理模块以及指标计算模块，该方法包括：
步骤210、通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据。
可选的，通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据，可以包括：通过自动化任务组件，从能监办受电平台和电力代维系统中获取工单数据和生产数据；其中，工单数据至少包括：运行工单流程数据和运行资料数据；生产数据至少包括：电压合格率和供电可靠率。
步骤220、通过数据处理模块，对电力数据进行处理，得到电力指标数据。
可选的，通过数据处理模块，对电力数据进行处理，得到电力指标数据，包括：根据电力数据生成相应的电力指标数据，并将电力指标数据存入指标信息表；电力指标数据包括指标名称、指标编码、组织机构和指标取值范围；
根据指标节点类型对电力指标数据进行分类，得到指标分类信息表和指标与分类关系表；
根据业务领域将电力指标数据进行分类，生成指标与标签关系表；
根据电力指标数据和预设的指标计算公式，生成计算公式信息表、计算公式参数配置表、指标与计算公式关联关系表和计算公式执行日志表。
步骤230、通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表。
可选的，通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表，包括：根据预设计算规则或预设计算公式，对电力指标数据进行量化计算，并按照日、月、季度、半年、年周期存入相应的指标结果表。
可选的，在根据预设计算方式对电力指标数据进行计算，得到指标结果表之后，还包括：根据预设的指标评分规则、预设阈值和各指标权重比例，将电力指标数据转换为指标得分。
可选的，在根据预设计算方式对电力指标数据进行计算，得到指标结果表之后，还包括：将电力指标数据与相应的指标预警阈值进行比较，得到指标预警信息。
可选的，还包括：根据电力业扩报装流程和相应的流程阈值，得到流程预警信息。
可选的，在根据预设计算方式对电力指标数据进行计算，得到指标结果表之后，还包括：根据选定的电力指标项以及各指标预设权重，计算稽查得分。
可选的，还包括：响应于指标收藏操作，将待收藏的电力指标项添加至数据区，并根据电力指标项的历史数据生成可视化的指标趋势图表；响应于对指标趋势图表的节点点击操作，通过系统弹窗显示指标明细数据记录。
可选的，还包括：获取待查询指标的指标编码，并查询与指标编码对应的计算方式，根据计算方式以及请求频度，获取指标明细数据。其中，若对应指标的计算方式为计算规则且请求频度为最低频度，则调用抽取规则节点引擎，获取指标明细数据；若对应指标的计算方式为计算规则且请求频度为非最低频度，则查询指标结果表，作为指标明细数据；若对应指标的计算方式为计算公式且请求频度为最低频度，则查询对应计算公式，递归循环查询所有子指标的明细数据汇总成指标的明细数据；若对应指标的计算方式为计算公式且请求频度为非最低频度，则查询指标结果表，作为指标明细数据。
本发明实施例的技术方案，数据计算平台包括：监管平台、数据处理模块以及指标计算模块；通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；通过数据处理模块，对电力数据进行处理，得到电力指标数据；通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表，解决了现有技术中电力数据的处理效率低的问题，提高了对电力数据的处理效率。
实施例三
图3是本发明实施例三中的一种计算机设备的结构示意图，图3示出了适于用来实现本发明实施方式的示例性设备12的框图。图3显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图3所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图3未显示，通常称为“硬盘驱动器”)。尽管图3中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的一种数据计算方法，应用于数据计算平台，数据计算平台包括：监管平台、数据处理模块以及指标计算模块，该方法包括：
通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；
通过数据处理模块，对电力数据进行处理，得到电力指标数据；
通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表。
实施例四
本发明实施例四还公开了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现一种数据计算方法，应用于数据计算平台，数据计算平台包括：监管平台、数据处理模块以及指标计算模块，该方法包括：
通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；
通过数据处理模块，对电力数据进行处理，得到电力指标数据；
通过指标计算模块，根据预设计算方式对电力指标数据进行计算，得到指标结果表。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是，但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言，诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种数据计算平台，其特征在于，所述数据计算平台包括：监管平台、数据处理模块以及指标计算模块；
所述监管平台，用于通过自动化任务组件，从各个业务系统中获取电力数据；
所述数据处理模块，用于对所述电力数据进行处理，得到电力指标数据；
所述指标计算模块，用于根据预设计算方式对所述电力指标数据进行计算，得到指标结果表。
2.根据权利要求1所述的数据计算平台，其特征在于，所述监管平台，用于：
通过自动化任务组件，从能监办受电平台和电力代维系统中获取工单数据和生产数据；
其中，所述工单数据至少包括：运行工单流程数据和运行资料数据；所述生产数据至少包括：电压合格率和供电可靠率。
3.根据权利要求1所述的数据计算平台，其特征在于，所述数据处理模块，包括：
指标信息表生成模块，用于根据所述电力数据生成相应的电力指标数据，并将所述电力指标数据存入指标信息表；所述电力指标数据包括指标名称、指标编码、组织机构和指标取值范围；
指标节点管理模块，用于根据指标节点类型对所述电力指标数据进行分类，得到指标分类信息表和指标与分类关系表；
指标标签管理模块，用于根据业务领域将所述电力指标数据进行分类，生成指标与标签关系表；
指标计算规则管理模块，用于根据所述电力指标数据和预设的指标计算公式，生成计算公式信息表、计算公式参数配置表、指标与计算公式关联关系表和计算公式执行日志表。
4.根据权利要求1所述的数据计算平台，其特征在于，所述指标计算模块，用于：
根据预设计算规则或预设计算公式，对所述电力指标数据进行量化计算，并按照日、月、季度、半年、年周期存入相应的指标结果表。
5.根据权利要求1所述的数据计算平台，其特征在于，还包括：
指标得分计算模块，用于根据预设的指标评分规则、预设阈值和各指标权重比例，将电力指标数据转换为指标得分。
6.根据权利要求1所述的数据计算平台，其特征在于，还包括：
指标预警模块，用于将电力指标数据与相应的指标预警阈值进行比较，得到指标预警信息。
7.根据权利要求1所述的数据计算平台，其特征在于，还包括：
流程预警模块，用于根据电力业扩报装流程和相应的流程阈值，得到流程预警信息。
8.根据权利要求1所述的数据计算平台，其特征在于，还包括：
稽查评价模块，用于根据选定的电力指标项以及各指标预设权重，计算稽查得分。
9.根据权利要求1所述的数据计算平台，其特征在于，所述监管平台，还包括：
可视化模块，用于响应于指标收藏操作，将待收藏的电力指标项添加至数据区，并根据所述电力指标项的历史数据生成可视化的指标趋势图表；
响应于对所述指标趋势图表的节点点击操作，通过系统弹窗显示指标明细数据记录。
10.根据权利要求3所述的数据计算平台，其特征在于，还包括：
指标明细数据查询模块，用于获取待查询指标的指标编码，并查询与所述指标编码对应的计算方式，根据计算方式以及请求频度，获取指标明细数据。
11.一种数据计算方法，其特征在于，应用于数据计算平台，所述数据计算平台包括：监管平台、数据处理模块以及指标计算模块，该方法包括：
通过监管平台，调用自动化任务组件，从各个业务系统中获取电力数据；
通过数据处理模块，对所述电力数据进行处理，得到电力指标数据；
通过指标计算模块，根据预设计算方式对所述电力指标数据进行计算，得到指标结果表。
12.一种计算机设备，其特征在于，所述计算机设备中部署有如权利要求1-10中任一项所述的数据计算平台，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求11所述的数据计算方法。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求11所述的数据计算方法。
CN202111406927.1A 2021-11-24 2021-11-24 数据计算平台、方法、设备及存储介质 Pending CN114049036A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111406927.1A CN114049036A (zh) 2021-11-24 2021-11-24 数据计算平台、方法、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111406927.1A CN114049036A (zh) 2021-11-24 2021-11-24 数据计算平台、方法、设备及存储介质

Publications (1)

Publication Number Publication Date
CN114049036A true CN114049036A (zh) 2022-02-15

Family

ID=80210844

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111406927.1A Pending CN114049036A (zh) 2021-11-24 2021-11-24 数据计算平台、方法、设备及存储介质

Country Status (1)

Country Link
CN (1) CN114049036A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117312319A (zh) * 2023-10-09 2023-12-29 中科院成都信息技术股份有限公司 基于元数据的数据存储方法、装置、设备及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104809655A (zh) * 2015-03-10 2015-07-29 江苏省电力公司淮安供电公司 一种电网监控辅助分析方法
CN106096865A (zh) * 2016-06-29 2016-11-09 国网浙江省电力公司 一种电力营销业扩全流程信息公开与实施管控系统集成方法
CN106203782A (zh) * 2016-06-29 2016-12-07 国网浙江省电力公司 一种电力营销业扩全流程过程管控实时展示方法
CN107292470A (zh) * 2016-04-10 2017-10-24 国网山东省电力公司经济技术研究院 可视化电网现状诊断分析系统
CN108876154A (zh) * 2018-06-22 2018-11-23 国网辽宁省电力有限公司朝阳供电公司 一种电网规划大数据分析系统
CN109409702A (zh) * 2018-10-10 2019-03-01 武汉华飞智能电气科技有限公司 一种电网运行指标分析系统
WO2019100504A1 (zh) * 2017-11-22 2019-05-31 北京科东电力控制系统有限责任公司 构建基于大数据技术的电力交易指标体系的方法
KR20190079124A (ko) * 2017-12-27 2019-07-05 한국전력공사 전력설비의 수명 예측 장치 및 그 방법
CN110956441A (zh) * 2019-11-12 2020-04-03 广州供电局有限公司 业扩客户服务系统及方法
CN112037083A (zh) * 2020-07-15 2020-12-04 北京华电天仁电力控制技术有限公司 一种电厂生产数据报表化系统
CN113010595A (zh) * 2021-03-18 2021-06-22 国网福建省电力有限公司宁德供电公司 一种电力能源数据分析与监控方法及系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104809655A (zh) * 2015-03-10 2015-07-29 江苏省电力公司淮安供电公司 一种电网监控辅助分析方法
CN107292470A (zh) * 2016-04-10 2017-10-24 国网山东省电力公司经济技术研究院 可视化电网现状诊断分析系统
CN106096865A (zh) * 2016-06-29 2016-11-09 国网浙江省电力公司 一种电力营销业扩全流程信息公开与实施管控系统集成方法
CN106203782A (zh) * 2016-06-29 2016-12-07 国网浙江省电力公司 一种电力营销业扩全流程过程管控实时展示方法
WO2019100504A1 (zh) * 2017-11-22 2019-05-31 北京科东电力控制系统有限责任公司 构建基于大数据技术的电力交易指标体系的方法
KR20190079124A (ko) * 2017-12-27 2019-07-05 한국전력공사 전력설비의 수명 예측 장치 및 그 방법
CN108876154A (zh) * 2018-06-22 2018-11-23 国网辽宁省电力有限公司朝阳供电公司 一种电网规划大数据分析系统
CN109409702A (zh) * 2018-10-10 2019-03-01 武汉华飞智能电气科技有限公司 一种电网运行指标分析系统
CN110956441A (zh) * 2019-11-12 2020-04-03 广州供电局有限公司 业扩客户服务系统及方法
CN112037083A (zh) * 2020-07-15 2020-12-04 北京华电天仁电力控制技术有限公司 一种电厂生产数据报表化系统
CN113010595A (zh) * 2021-03-18 2021-06-22 国网福建省电力有限公司宁德供电公司 一种电力能源数据分析与监控方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
TANG, JH 等: "Study on power grid characteristics in summer based on Linear regression analysis", 《2018 2ND INTERNATIONAL WORKSHOP ON RENEWABLE ENERGY AND DEVELOPMENT (IWRED 2018)》, vol. 153, 25 October 2018 (2018-10-25), pages 042040 *
车权;张建梅;: "基于大数据的电网调度运行综合评估体系", 电工技术, no. 04, 10 April 2017 (2017-04-10) *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117312319A (zh) * 2023-10-09 2023-12-29 中科院成都信息技术股份有限公司 基于元数据的数据存储方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
US10977293B2 (en) Technology incident management platform
CN108197132B (zh) 一种基于图数据库的电力资产画像构建方法及装置
US20190228296A1 (en) Significant events identifier for outlier root cause investigation
CN111401777B (zh) 企业风险的评估方法、装置、终端设备及存储介质
CN111339175B (zh) 数据处理方法、装置、电子设备及可读存储介质
EP3916584A1 (en) Information processing method and apparatus, electronic device and storage medium
CN114356940B (zh) 电网数据治理系统及方法
CN112181967B (zh) 源数据质量的监测方法、装置、计算机设备及介质
CN114461644A (zh) 一种数据采集方法、装置、电子设备及存储介质
CN115640300A (zh) 一种大数据管理方法、系统、电子设备和存储介质
CN114049036A (zh) 数据计算平台、方法、设备及存储介质
CN111950623B (zh) 数据稳定性监控方法、装置、计算机设备及介质
CN111831528A (zh) 一种计算机系统日志关联方法及相关装置
US11227288B1 (en) Systems and methods for integration of disparate data feeds for unified data monitoring
CN115408236A (zh) 一种日志数据审计系统、方法、设备及介质
CN114443437A (zh) 告警根因输出方法、装置、设备、介质和程序产品
CN112784129A (zh) 一种泵站设备运维数据监管平台
CN113537519A (zh) 一种识别异常设备的方法和装置
CN112003369A (zh) 基于云平台的电网自动化设备运行监视及统计分析方法
CN111258865B (zh) 处理器、多信息化系统的告警数据管理系统及方法
CN115392660A (zh) 一种数据处理方法、装置、设备及存储介质
CN118113710A (zh) 一种数据落库方法、装置、计算机设备及存储介质
CN115511324A (zh) 风险监控方法、装置、设备、介质及计算机程序产品
CN113554329A (zh) 一种运维可视化的规则配置审批管理系统
CN113989003A (zh) 标准统计报表的数据处理方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination