CN106850249A - 基于大数据分析的通信网络预警分析系统 - Google Patents

基于大数据分析的通信网络预警分析系统 Download PDF

Info

Publication number
CN106850249A
CN106850249A CN201610949249.6A CN201610949249A CN106850249A CN 106850249 A CN106850249 A CN 106850249A CN 201610949249 A CN201610949249 A CN 201610949249A CN 106850249 A CN106850249 A CN 106850249A
Authority
CN
China
Prior art keywords
data
analysis
resource
communication network
platform
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610949249.6A
Other languages
English (en)
Inventor
张筱筠
司富轩
张韶华
程崟峰
李雄
李文萃
舒新建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Electric Power Equipment and Technology Co Ltd
Original Assignee
China Electric Power Equipment and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Electric Power Equipment and Technology Co Ltd filed Critical China Electric Power Equipment and Technology Co Ltd
Priority to CN201610949249.6A priority Critical patent/CN106850249A/zh
Publication of CN106850249A publication Critical patent/CN106850249A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0631Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471Distributed queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/254Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/142Network analysis or design using statistical or mathematical methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Probability & Statistics with Applications (AREA)
  • Mathematical Physics (AREA)
  • Economics (AREA)
  • Algebra (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Fuzzy Systems (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • Mathematical Analysis (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于大数据分析的通信网络预警分析系统,通过SOA架构把骨干传输网分为网络控制和数据采集层、平台层、管理应用层,实现不同级骨干传输网的全面管理,并通过SOA架构之间的系统互联,完成通信管理系统同级之间及上下级之间中不同级骨干传输网的信息横向共享和应用协同,综合通信管理系统的履历信息、台帐信息、业务使用信息及根据通信网络资源占用的层级分布,从光纤资源、复用段资源、通道资源等多方面综合分析资源的利用情况,实时对通信设备和通信光缆的资源使用情况的数据进行储存;通过对不同层级的通信资源占用分析,利用大数据技术对现有的海量历史运行维护数据进行综合分析,从而能够提前预知通信网络中可能存在潜在的隐患。

Description

基于大数据分析的通信网络预警分析系统
技术领域:
本发明涉及一种通讯网络预警分析系统,特别是涉及一种基于大数据分析的通信网络预警分析系统。
背景技术:
电力系统通信是电力系统不可缺少的重要组成部分,是电网调度自动化和生产管理现代化的基础,是确保电网安全、经济、稳定运行的重要技术手段。电力通信网络作为构建统一坚强智能电网和企业信息化的基础支撑,为整个电力系统中的电网调度、自动化、继电保护、安全自动控制、电力市场交易以及企业信息化等提供安全的信息传输通道,它的优质化管理是整个电网保持顺畅的关键。随着以特高压电网为核心、各级电网协调发展的统一坚强智能电网建设,要求作为电网化智能基础支撑的电力通信基础传输网络高速发展。电力通信网络规模的不断扩大,传输网层次的逐渐增多以及网络结构的日趋复杂,对电力通信系统的综合监视与运维管理提出了新的挑战。
随着云时代的来临,大数据(Big data)也吸引了越来越多的关注。相比于传统的数据仓库应用,具有数据量大、查询分析复杂等特点。大数据作为数据分析的前沿技术,可以从各种各样类型的数据中,快速获得有价值的信息。
2012年3月,奥巴马政府公布“大数据研发计划”,旨在提高和改进人们从海量、复杂的数据中获取知识的能力,发展收集、储存、保留、管理、分析和共享海量数据所需要的核心技术,大数据成为继集成电路和互联网之后信息科技关注的重点。
与国外相比,国内起步稍晚,还未形成整体力量,企业使用数据挖掘技术尚不普遍,但近几年出现了蓬勃发展的态势。目前,国内相关技术主要集中于数据挖掘相关算法、实际应用及有关理论方面的研究,涉及行业比较广泛,包括金融业、电信业、网络相关行业、零售业、制造业、医疗保健、制药业及科学领域,单位集中在部分高等院校、研究所和公司,特别是在IT等新兴领域,华为、阿里巴巴、百度等对技术进步起到了很大的推动作用。
电力领域,自2010年以来,国家电网公司在大数据技术方向共开展了海量实时数据管理平台、PI数据库应用、非结构化数据快速检索、高通量事件即时处理、分布式实时数据库管理系统研发与应用、信息系统的性能测试与验证方法等研究,取得了海量实时数据库管理平台、性能测试测评等成果,但是在通讯网络预警领域还没有涉及。
发明内容:
本发明所要解决的技术问题是:克服现有技术的不足,通过SOA的架构,提升对通信设备和通信光缆的资源使用效率,通过对不同层级的通信资源占用分析,利用大数据技术对现有的海量历史运行维护数据进行综合分析,实现对海量运行数据的时序趋势判定,从而能够提前预知通信网络中可能存在潜在隐患的基于大数据分析的通信网络预警分析系统。
本发明的技术方案是:一种基于大数据分析的通信网络预警分析系统,其步骤是:
A、通过SOA架构把骨干传输网分为网络控制和数据采集层、平台层、管理应用层,实现不同级骨干传输网的全面管理,并通过SOA架构之间的系统互联,完成通信管理系统同级之间及上下级之间中不同级骨干传输网的信息横向共享和应用协同;
B、综合通信管理系统的履历信息、台帐信息、业务使用信息及根据通信网络资源占用的层级分布,从光纤资源、复用段资源、通道资源等多方面综合分析资源的利用情况,实时对通信设备和通信光缆的资源使用情况的数据进行储存;
C、数据的采集、导入与预处理:对通信管理系统、客户端、通信设备和通信光缆的数据进行采集,对采集的数据通过对象化并行计算框架在一个集中的大型分布式数据库或者分布式存储集群中进行负载均衡或分片储存,在储存过程中使用来自Twitter的Storm来对采集的数据进行流式计算;
D、数据的统计与分析:通过基于云计算的用电信息采集与数据分析平台,并利用分布式数据库或分布式计算集群,通过EMC的GreenPlum、Oracle的Exadata以及基于MySQL的列式存储Infobright和基于半结构化数据需求使用的Hadoop,对存储的海量数据进行普通的分析和分类汇总,以满足大多数常见的分析需求;
E、数据的挖掘:使用Hadoop的Mahout对现有存储的数据进行用于聚类的Kmeans计算、用于统计学习的SVM计算、用于分类的NaiveBayes计算,从而实现一些高级别数据分析的需求,从而起到预测的效果;
所述对象化并行计算框架将业务数据对象化,用对象取代二维表,并采用对象化并行计算技术,将计算功能封装在对象内部并通过对象接口对外服务,通过调用不同对象服务器上的对象接口,实现并行计算,将大数据上的统计分析转化为小数据的统计分析,小数据的统计分析又借助于内存优于磁盘的计算性能进行计算。
所述对象化并行计算框架是基于数据缓存技术,将各类数据以对象形式缓存到数据库中,提供对象的高效索引及访问,并具有数据横向扩展技术,通过在线扩展对象服务器来缓存增加的数据,提供基于对象的数据计算服务。
所述基于云计算的用电信息采集与数据分析平台采用增加索引、进行数据分区、优化SQL代码等形式,优化现有关系型数据库系统的处理性能;并通过ETL的手段,实现关系型数据库与非关系型数据处理环境之间的数据共享和互补协作,实现现有系统向云计算环境下的平稳迁移和可持续发展。
所述基于云计算的用电信息采集与数据分析平台包括一个平台和六个核心应用,所述一个平台为用电信息采集系统的云计算平台,所述六个核心应用包括用户抄表数据与电量数据的存储和查询、用户电量计算统计、台区线损计算分析、报文数据分析、低压数据完整率计算分析、档案类数据ETL。所述客户端包括Web、App或者传感器。
本发明的有益效果是:
1、本发明通过SOA的架构,提升对通信设备和通信光缆的资源使用效率,通过对不同层级的通信资源占用分析,利用大数据技术对现有的海量历史运行维护数据进行综合分析,实现对海量运行数据的时序趋势判定,从而能够提前预知通信网络中可能存在潜在的隐患。
2、本发明通过ETL的手段,实现了关系型数据库与非关系型数据处理环境之间的数据共享和互补协作,实现现有系统向云计算环境下的平稳迁移和可持续发展。
3、本发明通过SOA的架构,实现电网通信管理系统上下级之间、与其他系统横向之间的信息共享和应用协同,全面提升通信全程全网故障定位处理能力。
4、本发明大数据技术中运用各种算法,克服了用于挖掘数据算法复杂,并且计算涉及的数据量和计算量都很大的问题,并应用Fayyad等人设计的多处理阶段模型。
5、本发明运用基于云计算的用电信息采集与数据分析平台,解决了大数据技术中数据统计与分析这部分中分析涉及的数据量大,其对系统资源,特别是I/O会有极大的占用的问题。
6、本发明运用对象化并行计算框架解决了大数据技术中数据导入与预处理过程中存在导入的数据量大的问题,实现每秒钟导入百兆,甚至千兆级。
附图说明:
图1为基于大数据分析的通信网络预警分析系统的结构框图。
具体实施方式:
实施例:参见图1。
基于大数据分析的通信网络预警分析系统,其步骤是:
A、通过SOA架构把骨干传输网分为网络控制和数据采集层、平台层、管理应用层,实现不同级骨干传输网的全面管理,并通过SOA架构之间的系统互联,完成通信管理系统同级之间及上下级之间中不同级骨干传输网的信息横向共享和应用协同;
B、综合通信管理系统的履历信息、台帐信息、业务使用信息及根据通信网络资源占用的层级分布,从光纤资源、复用段资源、通道资源等多方面综合分析资源的利用情况,实时对通信设备和通信光缆的资源使用情况的数据进行储存;
C、数据的采集、导入与预处理:对通信管理系统、客户端、通信设备和通信光缆的数据进行采集,对采集的数据通过对象化并行计算框架在一个集中的大型分布式数据库或者分布式存储集群中进行负载均衡或分片储存,在储存过程中使用来自Twitter的Storm来对采集的数据进行流式计算;
D、数据的统计与分析:通过基于云计算的用电信息采集与数据分析平台,并利用分布式数据库或分布式计算集群,通过EMC的GreenPlum、Oracle的Exadata以及基于MySQL的列式存储Infobright和基于半结构化数据需求使用的Hadoop,对存储的海量数据进行普通的分析和分类汇总,以满足大多数常见的分析需求;
E、数据的挖掘:使用Hadoop的Mahout对现有存储的数据进行用于聚类的Kmeans计算、用于统计学习的SVM计算、用于分类的NaiveBayes计算,从而实现一些高级别数据分析的需求,从而起到预测的效果;
对象化并行计算框架将业务数据对象化,用对象取代二维表,并采用对象化并行计算技术,将计算功能封装在对象内部并通过对象接口对外服务,通过调用不同对象服务器上的对象接口,实现并行计算,将大数据上的统计分析转化为小数据的统计分析,小数据的统计分析又借助于内存优于磁盘的计算性能进行计算。
对象化并行计算框架是基于数据缓存技术,将各类数据以对象形式缓存到数据库中,提供对象的高效索引及访问,并具有数据横向扩展技术,通过在线扩展对象服务器来缓存增加的数据,提供基于对象的数据计算服务。
基于云计算的用电信息采集与数据分析平台采用增加索引、进行数据分区、优化SQL代码等形式,优化现有关系型数据库系统的处理性能;并通过ETL的手段,实现关系型数据库与非关系型数据处理环境之间的数据共享和互补协作,实现现有系统向云计算环境下的平稳迁移和可持续发展。
基于云计算的用电信息采集与数据分析平台包括一个平台和六个核心应用,一个平台为用电信息采集系统的云计算平台,六个核心应用包括用户抄表数据与电量数据的存储和查询、用户电量计算统计、台区线损计算分析、报文数据分析、低压数据完整率计算分析、档案类数据ETL。客户端包括Web、App或者传感器,六个核心应用通过处理器和储存在处理器中的软件进行实现。
大数据技术主要可分为:数据采集,数据存取,基础架构,数据处理,统计分析,数据挖掘,模型预测,结果呈现等8种技术,但大数据不只是指海量的信息,更强调的是人类对信息的筛选、处理,因此本申请大数据处理流程,可以概括为四步,分别是采集、导入和预处理、统计和分析,最后是数据挖掘。
在大数据的采集过程中,其主要特点和挑战是并发数高,因为同时有可能会有成千上万的用户来进行访问和操作,比如火车票售票网站和淘宝,它们并发的访问量在峰值时达到上百万,所以需要在采集端部署大量数据库才能支撑。因此在这些数据库之间进行负载均衡和分片储存设计。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (5)

1.一种基于大数据分析的通信网络预警分析系统,其步骤是:
A、通过SOA架构把骨干传输网分为网络控制和数据采集层、平台层、管理应用层,实现不同级骨干传输网的全面管理,并通过SOA架构之间的系统互联,完成通信管理系统同级之间及上下级之间中不同级骨干传输网的信息横向共享和应用协同;
B、综合通信管理系统的履历信息、台帐信息、业务使用信息及根据通信网络资源占用的层级分布,从光纤资源、复用段资源、通道资源多方面综合分析资源的利用情况,实时对通信设备和通信光缆的资源使用情况的数据进行储存;
C、数据的采集、导入与预处理:对通信管理系统、客户端、通信设备和通信光缆的数据进行采集,对采集的数据通过对象化并行计算框架在一个集中的大型分布式数据库或者分布式存储集群中进行负载均衡或分片储存,在储存过程中使用来自Twitter的Storm来对采集的数据进行流式计算;
D、数据的统计与分析:通过基于云计算的用电信息采集与数据分析平台,并利用分布式数据库或分布式计算集群,通过EMC的GreenPlum、Oracle的Exadata以及基于MySQL的列式存储Infobright和基于半结构化数据需求使用的Hadoop,对存储的海量数据进行普通的分析和分类汇总,以满足大多数常见的分析需求;
E、数据的挖掘:使用Hadoop的Mahout对现有存储的数据进行用于聚类的Kmeans计算、用于统计学习的SVM计算、用于分类的NaiveBayes计算,从而实现一些高级别数据分析的需求,从而起到预测的效果;
所述对象化并行计算框架将业务数据对象化,用对象取代二维表,并采用对象化并行计算技术,将计算功能封装在对象内部并通过对象接口对外服务,通过调用不同对象服务器上的对象接口,实现并行计算,将大数据上的统计分析转化为小数据的统计分析,小数据的统计分析又借助于内存优于磁盘的计算性能进行计算。
2.根据权利要求1所述的基于大数据分析的通信网络预警分析系统,其特征是:所述对象化并行计算框架是基于数据缓存技术,将各类数据以对象形式缓存到数据库中,提供对象的高效索引及访问,并具有数据横向扩展技术,通过在线扩展对象服务器来缓存增加的数据,提供基于对象的数据计算服务。
3.根据权利要求1所述的基于大数据分析的通信网络预警分析系统,其特征是:所述基于云计算的用电信息采集与数据分析平台采用增加索引、进行数据分区、优化SQL代码等形式,优化现有关系型数据库系统的处理性能;并通过ETL的手段,实现关系型数据库与非关系型数据处理环境之间的数据共享和互补协作,实现现有系统向云计算环境下的平稳迁移和可持续发展。
4.根据权利要求1所述的基于大数据分析的通信网络预警分析系统,其特征是:所述基于云计算的用电信息采集与数据分析平台包括一个平台和六个核心应用,所述一个平台为用电信息采集系统的云计算平台,所述六个核心应用包括用户抄表数据与电量数据的存储和查询、用户电量计算统计、台区线损计算分析、报文数据分析、低压数据完整率计算分析、档案类数据ETL。
5.根据权利要求1所述的基于大数据分析的通信网络预警分析系统,其特征是:所述客户端包括Web、App或者传感器。
CN201610949249.6A 2016-10-26 2016-10-26 基于大数据分析的通信网络预警分析系统 Pending CN106850249A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610949249.6A CN106850249A (zh) 2016-10-26 2016-10-26 基于大数据分析的通信网络预警分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610949249.6A CN106850249A (zh) 2016-10-26 2016-10-26 基于大数据分析的通信网络预警分析系统

Publications (1)

Publication Number Publication Date
CN106850249A true CN106850249A (zh) 2017-06-13

Family

ID=59146204

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610949249.6A Pending CN106850249A (zh) 2016-10-26 2016-10-26 基于大数据分析的通信网络预警分析系统

Country Status (1)

Country Link
CN (1) CN106850249A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108092410A (zh) * 2017-12-22 2018-05-29 国网河北省电力有限公司安平县供电分公司 数据云线损分析平台
WO2019006721A1 (zh) * 2017-07-05 2019-01-10 深圳市樊溪电子有限公司 一种基于云计算的风电大数据分析系统
CN109495578A (zh) * 2018-12-05 2019-03-19 贵州电网有限责任公司 一种针对用电采集系统的分层集群处理系统
CN110109973A (zh) * 2019-04-30 2019-08-09 温州职业技术学院 一种云计算系统数据处理方法
CN110245163A (zh) * 2019-01-17 2019-09-17 国网浙江德清县供电有限公司 一种电力系统运行隐患排查方法
CN111984714A (zh) * 2020-08-13 2020-11-24 孙小丽 基于智能在线通信和大数据的信息生成方法及云服务平台
CN112731818A (zh) * 2020-12-21 2021-04-30 深圳供电局有限公司 一种计量装置通信仿真系统及方法
CN112887157A (zh) * 2021-03-08 2021-06-01 国网冀北电力有限公司信息通信分公司 电力通信传输网资源预警分析方法及装置
CN115481183A (zh) * 2022-09-20 2022-12-16 河北网新科技集团股份有限公司 一种实时数据处理方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
韩司: "基于SOA架构的宁东供电公司通信管理系统应用研究" *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019006721A1 (zh) * 2017-07-05 2019-01-10 深圳市樊溪电子有限公司 一种基于云计算的风电大数据分析系统
CN108092410A (zh) * 2017-12-22 2018-05-29 国网河北省电力有限公司安平县供电分公司 数据云线损分析平台
CN109495578A (zh) * 2018-12-05 2019-03-19 贵州电网有限责任公司 一种针对用电采集系统的分层集群处理系统
CN110245163A (zh) * 2019-01-17 2019-09-17 国网浙江德清县供电有限公司 一种电力系统运行隐患排查方法
CN110109973A (zh) * 2019-04-30 2019-08-09 温州职业技术学院 一种云计算系统数据处理方法
CN111984714A (zh) * 2020-08-13 2020-11-24 孙小丽 基于智能在线通信和大数据的信息生成方法及云服务平台
CN112731818A (zh) * 2020-12-21 2021-04-30 深圳供电局有限公司 一种计量装置通信仿真系统及方法
CN112887157A (zh) * 2021-03-08 2021-06-01 国网冀北电力有限公司信息通信分公司 电力通信传输网资源预警分析方法及装置
CN115481183A (zh) * 2022-09-20 2022-12-16 河北网新科技集团股份有限公司 一种实时数据处理方法和系统

Similar Documents

Publication Publication Date Title
CN106850249A (zh) 基于大数据分析的通信网络预警分析系统
Diamantoulakis et al. Big data analytics for dynamic energy management in smart grids
CN106651633B (zh) 一种基于大数据技术的用电信息采集系统及其采集方法
CN109272155A (zh) 一种基于大数据的企业行为分析系统
CN107679192A (zh) 多集群协同数据处理方法、系统、存储介质及设备
CN104820670A (zh) 一种电力信息大数据的采集和存储方法
CN106339509A (zh) 一种基于大数据技术的电网运营数据共享系统
CN105677842A (zh) 基于Hadoop大数据处理技术的日志分析系统
Liu et al. Real-time complex event processing and analytics for smart grid
CN103955509A (zh) 一种海量电力计量数据的快速检索方法
CN102929961A (zh) 基于构建快速数据分级通道的数据处理方法及其装置
Balar et al. Forecasting consumer behavior with innovative value proposition for organizations using big data analytics
CN107103064A (zh) 数据统计方法及装置
CN107046557A (zh) 移动云计算环境下动态Skyline查询的智能医疗呼叫查询系统
CN107832344A (zh) 一种基于storm流计算框架的食品安全网络舆情分析方法
Guan et al. Modeling and simulation of collaborative dispatching of disaster relief materials based on urgency
Cui et al. A k-means++ based user classification method for social e-commerce
CN110706141A (zh) 电子政务大数据服务系统
Zhao et al. A short-term trend prediction model of topic over Sina Weibo dataset
Kim et al. Development of the big data management system on national virtual power plant
Choi et al. Implementation of the big data management system for demand side energy management
Lee et al. A big data management system for energy consumption prediction models
Wan et al. Research on key success factors model for innovation application of Internet of Things with grounded theory
Zhou et al. [Retracted] Spatiotemporal Pattern Evolution in Global Green Trade Networks: Implications for Health Economics
Liu et al. Tourist behavior pattern mining model based on context

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170613