CN113568928B - 一种应用于能源产业链预警系统的数据管理系统 - Google Patents
一种应用于能源产业链预警系统的数据管理系统 Download PDFInfo
- Publication number
- CN113568928B CN113568928B CN202110853267.5A CN202110853267A CN113568928B CN 113568928 B CN113568928 B CN 113568928B CN 202110853267 A CN202110853267 A CN 202110853267A CN 113568928 B CN113568928 B CN 113568928B
- Authority
- CN
- China
- Prior art keywords
- data
- early warning
- energy industry
- industry chain
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013523 data management Methods 0.000 title claims abstract description 26
- 238000007418 data mining Methods 0.000 claims abstract description 27
- 238000012545 processing Methods 0.000 claims abstract description 8
- 230000000007 visual effect Effects 0.000 claims abstract description 4
- 230000004927 fusion Effects 0.000 claims description 29
- 238000005065 mining Methods 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 11
- 238000013079 data visualisation Methods 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 239000003245 coal Substances 0.000 claims description 5
- 238000013139 quantization Methods 0.000 claims description 5
- 238000012512 characterization method Methods 0.000 claims description 4
- 238000004140 cleaning Methods 0.000 claims description 4
- 238000013075 data extraction Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 4
- 238000012163 sequencing technique Methods 0.000 claims description 4
- 238000002309 gasification Methods 0.000 claims description 3
- 230000010354 integration Effects 0.000 claims description 3
- 230000009467 reduction Effects 0.000 claims description 3
- 230000007613 environmental effect Effects 0.000 claims 1
- 238000012544 monitoring process Methods 0.000 abstract description 6
- 230000006870 function Effects 0.000 abstract description 4
- 238000000034 method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 238000007500 overflow downdraw method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2465—Query processing support for facilitating data mining operations in structured databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/26—Visual data mining; Browsing structured data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
- G06F2216/03—Data mining
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E40/00—Technologies for an efficient electrical power generation, transmission or distribution
- Y02E40/70—Smart grids as climate change mitigation technology in the energy generation sector
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Water Supply & Treatment (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Probability & Statistics with Applications (AREA)
- Software Systems (AREA)
- Public Health (AREA)
- Quality & Reliability (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种应用于能源产业链预警系统的数据管理系统,涉及电力系统技术领域。数据管理系统包括数据采集模块、数据服务模块和数据挖掘模块;所述数据采集模块,用于获取能源产业链预警系统的初始数据;所述数据服务模块,用于对所述初始数据进行分类存储,得到结果信息,并对所述结果信息进行可视化处理;所述数据挖掘模块,用于根据所述结果信息,匹配预设的数据挖掘组件。本发明提供的数据管理系统包括数据采集模块、数据服务模块和数据挖掘模块,能够完善优化能源产业链监测预警系统的功能。
Description
技术领域
本发明涉及电力系统技术领域,尤其涉及一种应用于能源产业链预警系统的数据管理系统。
背景技术
能源电力产业链是以电力行业为核心环节的,涵盖一次能源供应、电能生产、传输、交易和消费的全环节链条。当前能源电力产业协调链条长、横纵向信息融合度差,风险暗藏且环环相扣,能源产业链预警系统的开发迫在眉睫。能源电力产业链预警监测所需的数据信息量来源众多,数据类型、特征多样,数据信息冗余、噪音、残缺情况突出,数据信息处理的精准度较低。多源异构数据的采集、存储、使用和挖掘是能源产业链预警系统开发的关键难点之一。针对能源产业链预警系统的特点,多源异构数据管理系统的研发是很有必要的。
能源产业链的监测预警涉及多个行业的多个主体,当前针对多源异构数据的处理多通过多方主体手动进行数据转换,规整和输入,效率低下且十分容易出错。
发明内容
本发明目的在于,提供一种应用于能源产业链预警系统的数据管理系统,以完善优化能源产业链监测预警系统的功能。
为实现上述目的,本发明实施例提供一种应用于能源产业链预警系统的数据管理系统,包括数据采集模块、数据服务模块和数据挖掘模块;
所述数据采集模块,用于获取能源产业链预警系统的初始数据;
所述数据服务模块,用于对所述初始数据进行分类存储,得到结果信息,并对所述结果信息进行可视化处理;
所述数据挖掘模块,用于根据所述结果信息,匹配预设的数据挖掘组件。
优选地,所述初始数据包括气化站数据、电力市场数据、气象数据、燃气电厂数据、燃煤电厂数据和电网运行数据。
优选地,所述数据采集模块,还用于通过数据库接口采集方式,获取能源产业链预警系统的初始数据。
优选地,所述数据采集模块,还用于通过文件数据采集方式,获取能源产业链预警系统的初始数据。
优选地,所述数据服务模块包括数据融合子模块,所述数据融合子模块包括:决策支持度计算单元,用于根据所述初始数据的决策属性,获取对应的维度数据,并计算所述初始数据对预警决策的支持度值;OWA算子权重向量计算单元,用于根据预设的模糊语义量化准则确定度量算子;数据转换与排序单元,用于根据所述支持度值和所述度量算子进行数据融合,得到决策值。
优选地,所述数据服务模块包括数据索引子模块,所述数据索引子模块包括供需层、环境层和市场层。
优选地,所述数据服务模块包括数据可视化子模块,所述数据可视化子模块包括柱状图、饼图、地图标注、折线走势图、表格中在的至少一中。
优选地,所述数据挖掘模块包括关联性分析组件,所述关联性分析组件包括频繁预警指标组合挖掘和预警周期模式挖掘。
优选地,所述数据挖掘模块包括时序分析组件,所述时序分析组件包括时序关系挖掘和时序预测。
优选地,所述数据挖掘模块包括表征学习组件,所述表征学习组件包括特征提取、特征学习和高维特征降维。
与现有技术相比,本发明具有以下有益效果:
本发明提供的应用于能源产业链预警系统的数据管理系统,包括数据采集模块、数据服务模块和数据挖掘模块;所述数据采集模块,用于获取能源产业链预警系统的初始数据;所述数据服务模块,用于对所述初始数据进行分类存储,得到结果信息,并对所述结果信息进行可视化处理;所述数据挖掘模块,用于根据所述结果信息,匹配预设的数据挖掘组件。相较于现有的能源产业链的监测预警系统,针对多源异构数据的处理多通过多方主体手动进行数据转换,规整和输入,效率低下且十分容易出错等问题,本发明提供的数据管理系统包括数据采集模块、数据服务模块和数据挖掘模块,能够完善优化能源产业链监测预警系统的功能。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施方式中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明某一实施例提供的应用于能源产业链预警系统的数据管理系统的流程示意图;
图2是本发明某一实施例提供的数据采集流程示意图;
图3是本发明某一实施例提供的多源异构数据融合结构模型的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,文中所使用的步骤编号仅是为了方便描述,不作为对步骤执行先后顺序的限定。
应当理解,在本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
请参阅图1,图1是本发明某一实施例提供的应用于能源产业链预警系统的数据管理系统的结构示意图。在本实施例中,应用于能源产业链预警系统的数据管理系统包括数据采集模块110、数据服务模块120和数据挖掘模块130;
所述数据采集模块110,用于获取能源产业链预警系统的初始数据;
所述数据服务模块120,用于对所述初始数据进行分类存储,得到结果信息,并对所述结果信息进行可视化处理;
所述数据挖掘模块130,用于根据所述结果信息,匹配预设的数据挖掘组件。
在本发明实施例中,所述初始数据包括气化站数据、电力市场数据、气象数据、燃气电厂数据、燃煤电厂数据和电网运行数据。
在某一具体实施例中,根据能源产业链预警系统数据来源主要来源于LNG站数据、电力市场数据、气象数据、燃气电厂数据、燃煤电厂数据和电网运行数据,具有多行业多主体多时间尺度的特点。因此数据采集采用数据库接口采集和文件数据采集。数据采集流程如图2所示。
在本发明实施例中,所述数据采集模块,还用于通过数据库接口采集方式,获取能源产业链预警系统的初始数据。
能源产业链预警所需的电网数据、气象数据等可通过接口从各方的数据库接入,设计SCADA系统、WAMS系统、OMS系统、GIS系统、中国气象数据系统等。根据数据库是否在同一主机上可以分为直接融合和间接融合。在同一服务器上的数据库,配置其访问权限,直接进行数据融合;在不同服务器上的数据库,利用外围数据库进行链接,配置其访问权限进行数据融合,从而获取完整的预测预警所需数据。
在本发明实施例中,所述数据采集模块,还用于通过文件数据采集方式,获取能源产业链预警系统的初始数据。
除了通过数据库直接接入获取的数据,能源产业链预警系统还需要提取包含大量通过上传的数据,通常使用EXCEL或SVM等电子文档格式保存。通常使用数据库语言SQL或Python等工具将文件数据导入本地系统。
在本发明实施例中,所述数据服务模块包括数据融合子模块,所述数据融合子模块包括:
决策支持度计算单元,用于根据所述初始数据的决策属性,获取对应的维度数据,并计算所述初始数据对预警决策的支持度值;
OWA算子权重向量计算单元,用于根据预设的模糊语义量化准则确定度量算子;
数据转换与排序单元,用于根据所述支持度值和所述度量算子进行数据融合,得到决策值。
在本发明实施例中,所述数据服务模块包括数据索引子模块,所述数据索引子模块包括供需层、环境层和市场层。
在本发明实施例中,所述数据服务模块包括数据可视化子模块,所述数据可视化子模块包括柱状图、饼图、地图标注、折线走势图、表格中的至少一种。
在某一实施例中,为了实现能源产业链预警系统的多源异构数据,包括:
(1)数据抽取
数据抽取是指在不同数据库和不同服务平台中获取数据时,有挑选地查抄和复制每一个数据源中的数据。不同于结构化的数据可以通过字段分类提取,半结构化数据需要通过结构化处理才能够进行之后的指标计算和统计建模分析。
(2)数据清洗
通过数据源抽取的数据需要经过数据清洗,包含:①清洗不精确的数据。首先使用统计学方法识别出数据中的异常,具体地,对每个属性字段值的平均值和标准差进行统计,据此为每个属性建立一个置信区间,通过查看属性值是否在置信区间内来判断属性是否异常;②清洗重复数据。数据库中常见的数据质量问题就包含相似重复数据,不同数据通道的集成和操作一般会导致大量重复记录生产。通过判断两条数据是否相似或相同对相似重复数据进行集中的清洗。
(3)数据融合
多源异构数据融合操作按照操作级别可分为数据级融合、特征级融合以及决策级融合。其中
数据级融合对数据信息的完整性和稳定性会造成负面影响。
特征级预警数据融合作为数据处理的中间环节,运用人工神经网络手段对原始数据特征进行信息提取,将提取后的电力大数据进行有效融合,特征级融合提升能源产业链预警数据信息融合的准确程度。
决策级预警数据融合在对个体信息进行决策和识别后方可进行数据融合,能够保证预警数据的整体性和统一性。决策级数据融合方法能够对大量数据进行压缩,具有良好的数据容错性。
本发明提出的多源异构数据融合结构模型如图3所示。模型中的数据融合子模块包括决策支持度计算、OWA算子权重向量计算和数据转换与排序4个单元。
(a)本地数据库在经过前述的数据抽取、数据清洗之后实现了对数据的初步集成、消除了数据的异构性和差异性,为数据融合提供数据源。
(b)决策支持度计算单元根据决策属性从数据仓库获取相关维度的数据,并计算各数据源对预警决策的支持度值sij(数据源i对第j预警的支持度);支持度的计算如下:
设μ为数据x的均值,σ为数据x的标准差,则令:
x0=μ-3σ (1)
若数据x越大,对预警决策j的支持度也越大,将区间[μ-3σ,μ+3σ]进行n等分,i表示第i个区间。数据x对预警决策j支持度可定义为:
s(x,j)表示数据x越大,对预警决策j的支持度也越大时,数据x对第j预警的支持度,μ为数据x的均值,σ为数据x的标准差,n为对[μ-3σ,μ+3σ]区间的等分数。
若数据x越小,对预警j的决策支持度越大,则支持度表示为:
s'(x,j)=(1,1,1)-s(x,j) (4)
s'(x,j)表示数据x越小,对预警j的决策支持度越大时,数据x对第j预警的支持度。
(c)计算OWA算子权重向量
设:F:Rn→R,有一个与F相关联的n维加权向量w=(w1,w2…wn),wi∈[0,1],1≤i≤n,且并使得:
式中,bi是ai中第i个最大的元素,则F称为n维OWA算子。
OWA权重向量w=(w1,w2…wn)由下面的公式确定:
wi=f(1/n)-f((i-1)/n) (6)
wi为权重向量w中第i个元素值。
其中f为模糊语义量化算子:
其中x,a,b∈[0,1]。模糊语义量化算子中的a、b值根据模糊语义原则“大多数”、“至少一半”、“尽可能多”分别取值为(0.3,0.8)、(0,0.5)、(0.5,1)。
(d)依据OWA算子权重向量和预警决策支持度对数据进行融合,并计算各预警决策值:
其中:bij为(s1,j,s2,j,…sn,j)中第i个最大元素。
(4)数据索引
在多源异构数据库的基础上,为了保障数据查询和分析效率,建立了不同专业领域知识下的数据索引“能源产业链预警数据概念层次网络”。按照供需、环境、市场三个方面进行第一层次划分,得到第一层层次节点;在第一层层次节点上,按照数据衡量的主体范围,如电力市场、碳市场、燃气电厂、燃煤电厂、LNG站、电网公司等进行第二层划分,得到第二层层次节点;根据数据的实际用途可以根据需要拓展更多的层次节点。
(5)数据查询
本发明提出的应用于能源产业链预警系统的多源异构数据管理系统一方面提供精确查询、模糊查询等数据库查询的功能;另一方面,利用推荐系统算法进行用户画像,提供相关和相似查询。例如某一方面的数据被持续关注和查询,意味着此项数据较为关键或者较容易出错。与精准查询、模糊查询不同,相似查询依赖于用户操作数据库的记录,推荐结果因不同兴趣的用户也不同,有着较强的专业性、安全性。
(6)数据可视化
本发明提出的应用于能源产业链预警系统的多源异构数据管理系统支持对预警结果及过程数据进行可视化。可视化形式包括使用柱状图、饼图、地图标注、折线走势图、表格、文字、图标中的至少一种,对全省从全局预警结果到综合指标体系预警统计分布结果进行展示。
在本发明实施例中,所述数据挖掘模块包括关联性分析组件,所述关联性分析组件包括频繁预警指标组合挖掘和预警周期模式挖掘。
在本发明实施例中,所述数据挖掘模块包括时序分析组件,所述时序分析组件包括时序关系挖掘和时序预测。
在本发明实施例中,所述数据挖掘模块包括表征学习组件,所述表征学习组件包括特征提取、特征学习和高维特征降维。
在某一实施例中,结合能源产业链预警多源异构数据库的数据服务内容,针对预警指标体系的内容与历史预警结果,设计数据挖掘方向。例如,设计了预警指标数据中频繁预警指标组合挖掘、预警周期模式挖掘等关联性分析组件;设计了时序数据中的时序关系挖掘、时序预测等时序分析组件;设计了多环节、多方面数据的特征提取、特征学习、高维特征降维等的表征学习组件;设计了多行业、多平台的回归模型、分类模型、聚类模型等机器学习方案。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。
Claims (9)
1.一种应用于能源产业链预警系统的数据管理系统,其特征在于,包括数据采集模块、数据服务模块和数据挖掘模块;
所述数据采集模块,用于获取能源产业链预警系统的初始数据;
所述数据服务模块,用于对所述初始数据进行分类存储,得到结果信息,并对所述结果信息进行可视化处理;
所述数据挖掘模块,用于根据所述结果信息,匹配预设的数据挖掘组件;
所述数据服务模块包括数据融合子模块,所述数据融合子模块包括:
决策支持度计算单元,用于根据所述初始数据的决策属性,获取对应的维度数据,并计算所述初始数据对预警决策的支持度值;
OWA算子权重向量计算单元,用于根据预设的模糊语义量化准则确定度量算子;
数据转换与排序单元,用于根据所述支持度值和所述度量算子进行数据融合,得到决策值;
本地数据库在经过前述的数据抽取、数据清洗之后实现了对数据的初步集成、消除了数据的异构性和差异性,为数据融合提供数据源;
决策支持度计算单元,还用于根据决策属性从数据仓库获取相关维度的数据,并计算各数据源对预警决策的支持度值sij;
数据x对预警决策j支持度可定义为:
s(x,j)表示数据x越大,对预警决策j的支持度也越大时,数据x对第j预警的支持度,μ为数据x的均值,σ为数据x的标准差,n为对[μ-3σ,μ+3σ]区间的等分数;
OWA算子权重向量计算单元,具体用于计算OWA算子权重向量,并依据OWA算子权重向量和预警决策支持度对数据进行融合,并计算各预警决策值:
其中:bij为(s1,j,s2,j,…sn,j)中第i个最大元素。
2.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述初始数据包括气化站数据、电力市场数据、气象数据、燃气电厂数据、燃煤电厂数据和电网运行数据。
3.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据采集模块,还用于通过数据库接口采集方式,获取能源产业链预警系统的初始数据。
4.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据采集模块,还用于通过文件数据采集方式,获取能源产业链预警系统的初始数据。
5.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据服务模块包括数据索引子模块,所述数据索引子模块包括供需层、环境层和市场层。
6.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据服务模块包括数据可视化子模块,所述数据可视化子模块包括柱状图、饼图、地图标注、折线走势图、表格中的至少一个。
7.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据挖掘模块包括关联性分析组件,所述关联性分析组件包括频繁预警指标组合挖掘和预警周期模式挖掘。
8.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据挖掘模块包括时序分析组件,所述时序分析组件包括时序关系挖掘和时序预测。
9.根据权利要求1所述的应用于能源产业链预警系统的数据管理系统,其特征在于,所述数据挖掘模块包括表征学习组件,所述表征学习组件包括特征提取、特征学习和高维特征降维。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110853267.5A CN113568928B (zh) | 2021-07-27 | 2021-07-27 | 一种应用于能源产业链预警系统的数据管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110853267.5A CN113568928B (zh) | 2021-07-27 | 2021-07-27 | 一种应用于能源产业链预警系统的数据管理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113568928A CN113568928A (zh) | 2021-10-29 |
CN113568928B true CN113568928B (zh) | 2024-03-08 |
Family
ID=78168245
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110853267.5A Active CN113568928B (zh) | 2021-07-27 | 2021-07-27 | 一种应用于能源产业链预警系统的数据管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113568928B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114493078A (zh) * | 2021-11-22 | 2022-05-13 | 广东电网有限责任公司 | 一种能源电力产业链的风险预警方法、系统、设备和介质 |
CN114722094A (zh) * | 2022-03-28 | 2022-07-08 | 天津大学 | 一种基于kano-g1的供应链业务多源异构数据融合方法 |
CN114648078B (zh) * | 2022-05-23 | 2022-09-13 | 山东省地质矿产勘查开发局八〇一水文地质工程地质大队(山东省地矿工程勘察院) | 一种地热清洁能源深浅联动降碳增效监控系统 |
CN115269704B (zh) * | 2022-08-02 | 2023-08-18 | 贵州财经大学 | 一种多元异构农业数据管理系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109816161A (zh) * | 2019-01-14 | 2019-05-28 | 中国电力科学研究院有限公司 | 一种配电网运行辅助决策分析系统及其应用方法 |
CN110336703A (zh) * | 2019-07-12 | 2019-10-15 | 河海大学常州校区 | 基于边缘计算的工业大数据监测系统 |
CN110633855A (zh) * | 2019-09-17 | 2019-12-31 | 江南大学 | 一种桥梁健康状态检测与管养决策系统及方法 |
CN112782788A (zh) * | 2019-11-06 | 2021-05-11 | 中国科学院国家空间科学中心 | 一种区域大气水文耦合预警决策系统及方法 |
CN112885462A (zh) * | 2021-03-02 | 2021-06-01 | 南京邮电大学 | 一种面向多源信息融合的智慧健康关联分析方法 |
CN113051249A (zh) * | 2021-03-22 | 2021-06-29 | 江苏杰瑞信息科技有限公司 | 一种基于多源异构大数据融合的云服务平台设计方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130126814A (ko) * | 2012-04-26 | 2013-11-21 | 한국전자통신연구원 | 데이터마이닝을 이용한 트래픽 폭주 공격 탐지 및 심층적 해석 장치 및 방법 |
-
2021
- 2021-07-27 CN CN202110853267.5A patent/CN113568928B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109816161A (zh) * | 2019-01-14 | 2019-05-28 | 中国电力科学研究院有限公司 | 一种配电网运行辅助决策分析系统及其应用方法 |
CN110336703A (zh) * | 2019-07-12 | 2019-10-15 | 河海大学常州校区 | 基于边缘计算的工业大数据监测系统 |
CN110633855A (zh) * | 2019-09-17 | 2019-12-31 | 江南大学 | 一种桥梁健康状态检测与管养决策系统及方法 |
CN112782788A (zh) * | 2019-11-06 | 2021-05-11 | 中国科学院国家空间科学中心 | 一种区域大气水文耦合预警决策系统及方法 |
CN112885462A (zh) * | 2021-03-02 | 2021-06-01 | 南京邮电大学 | 一种面向多源信息融合的智慧健康关联分析方法 |
CN113051249A (zh) * | 2021-03-22 | 2021-06-29 | 江苏杰瑞信息科技有限公司 | 一种基于多源异构大数据融合的云服务平台设计方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113568928A (zh) | 2021-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113568928B (zh) | 一种应用于能源产业链预警系统的数据管理系统 | |
CN113935562B (zh) | 一种电力设备健康状况智能评级与自动预警方法 | |
CN109165294B (zh) | 一种基于贝叶斯分类的短文本分类方法 | |
CN114048870A (zh) | 一种基于日志特征智能挖掘的电力系统异常监测方法 | |
CN113435652A (zh) | 一种一次设备缺陷诊断与预测方法 | |
CN116894152B (zh) | 一种多源数据调研与实时分析方法 | |
CN111552813A (zh) | 一种基于电网全业务数据的电力知识图谱构建方法 | |
CN114218402B (zh) | 一种计算机硬件故障更换件推荐的方法 | |
CN111639850A (zh) | 多源异构数据的质量评估方法与系统 | |
Yin et al. | Sentence-bert and k-means based clustering technology for scientific and technical literature | |
CN115130847A (zh) | 一种设备画像建模方法及系统 | |
CN117892820A (zh) | 一种基于大语言模型的多级数据建模方法及系统 | |
CN117909455A (zh) | 一种基于大语言模型的水利知识库系统 | |
CN117171244A (zh) | 基于数据中台构建的企业数据管理系统及其数据分析方法 | |
CN116109185A (zh) | 一种应用于电力系统碳排放核算的碳量测系统 | |
CN113835964B (zh) | 基于小样本学习的云数据中心服务器能耗预测方法 | |
Duan et al. | Toward a framework of extracting typical machining process routines based on knowledge representation learning | |
CN114064886A (zh) | 基于深度学习的矿山项目风险应对措施推荐方法及系统 | |
Wang et al. | Power load forecasting using data mining and knowledge discovery technology | |
CN112270563A (zh) | 一种产品服务系统设计方法 | |
Li et al. | Multi-source heterogeneous log fusion technology of power information system based on big data and imprecise reasoning theory | |
CN118246749B (zh) | 一种基于大模型代理的财务数据风险分析方法及系统 | |
CN113377746B (zh) | 一种试验报告数据库构建和智能诊断分析系统 | |
CN117708720B (zh) | 一种基于知识图谱的设备故障诊断系统 | |
CN118133051B (zh) | 一种要素评估模型的构建方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |