CN109660524A - 一种基于Linux内核的epoll大并发数据通信接系统 - Google Patents

一种基于Linux内核的epoll大并发数据通信接系统 Download PDF

Info

Publication number
CN109660524A
CN109660524A CN201811475007.3A CN201811475007A CN109660524A CN 109660524 A CN109660524 A CN 109660524A CN 201811475007 A CN201811475007 A CN 201811475007A CN 109660524 A CN109660524 A CN 109660524A
Authority
CN
China
Prior art keywords
module
data
communication
epoll
welding system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811475007.3A
Other languages
English (en)
Inventor
欧家祥
代湘蓉
张俊玮
黄宇
丁超
王蓝苓
王扬
胡厚鹏
李航峰
宋强
杨婧
王俊融
安江
吴才远
林晓庆
付卿卿
文良文
余飞娅
唐贤敏
石云晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guizhou Power Grid Co Ltd
Original Assignee
Guizhou Power Grid Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guizhou Power Grid Co Ltd filed Critical Guizhou Power Grid Co Ltd
Priority to CN201811475007.3A priority Critical patent/CN109660524A/zh
Publication of CN109660524A publication Critical patent/CN109660524A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08Protocols for interworking; Protocol conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/141Setup of application sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/51Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)

Abstract

本发明公开了一种基于Linux内核的epoll大并发数据通信接系统,所述基于Linux内核的epoll大并发数据通信接系统包括设备层、通信层和核心处理层。以解决现有技术处理大量并发数据易阻塞的问题。

Description

一种基于Linux内核的epoll大并发数据通信接系统
技术领域
本发明涉及电力设备领域,尤其涉及一种基于Linux内核的epoll大并发数据通信接系统。
背景技术
电是关乎民生的三个重要能源行业,涉及千家万户,数据的采集占用老百姓的时间,抄表工作也牵扯了大量的人力物力,在实际工作中也表现出来种种弊端。住宅小区的智能化、系统化、网络化已成为国内住宅建设的发展方向,远程抄表列为智能住宅小区的基本配置,特别是随着经济社会的发展,人们对服务质量的要求也越来越高,现有的电力公司派人手工抄表表,这一传统的抄表方式已经不能满足现代社会需求。而且,在大数据时代的背景下,智能化、集约化、网络化推行水、电、气一体化采集工作,有利于社会资源整合利用。因此出现了智能抄表的电表,可以远程采集数据。
随着大量用户的接入,数据处理量越来越大,对数据的采集和处理提出了越来越高的要求。现有的技术直接将数据传输到电力管理中心数据库,一旦遇到大量并发数据,极易造成数据阻塞,这种方式越来越不适用于处理大量数据。
发明内容
本发明要解决的技术问题是:提供一种基于Linux内核的epoll大并发数据通信接系统,以解决现有技术处理大量并发数据易阻塞的问题。
本发明的技术方案是:一种基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述基于Linux内核的epoll大并发数据通信接系统包括设备层、通信层和核心处理层;
设备层,用于采集数据;
通信层,用于提供各种可用的有线和无线通信信道,为计量系统和装置设备之间的信息交互提供通道,与设备层信号连接;
核心处理层,用于处理通信层发送过来的数据,与通信层数据连接。
进一步地,所述通信层包括LB模块、多表合一网关模块、服务监听模块、规约解析模块、数据安全认证模块和数据入列执行模块;
LB模块,用于接收来自通信层的数据;
多表合一网关模块,用于将LB模块协议转换成核心处理层协议,与LB模块数据连接;
服务监听模块,用于接收LB模块数据,与LB模块和多表合一网关模块数据连接;
规约解析模块,用于将LB模块协议下的数据转换成核心处理层协议下的数据,与服务监听模块数据连接;
数据安全认证模块,用于检查规约解析模块的数据,与规约解析模块数据连接;
数据入列执行模块,用于将数据排序和暂存,与数据安全认证模块数据连接。
进一步地,所述通信层还包括规约组装模块,用于将数据安全认证模块返回数据从核心处理层协议下的数据转换成LB模块协议下的数据,与数据安全认证模块和服务监听模块数据连接。
进一步地,所述核心处理层包括Redis MQ模块、Redis缓存模块和实时计算模块;
Redis MQ模块,用于接收通信通信层数据,与通信层数据连接;
Redis缓存模块,用于缓存Redis MQ模块的数据,与Redis MQ模块数据连接;
实时计算模块,用于处理Redis缓存模块的数据,与Redis缓存模块数据连接。
本发明的有益效果是:
与现有技术相比,本发明通过在采用设备层、通信层和核心处理层的构架设计,避免了大量数据并发输入数据库造成阻塞。本发明能够接收和处理大量并发数据,特别实用于自动抄表。
附图说明
图1为本发明的结构示意图;
图中:1设备层、2通信层、201 LB模块、202多表合一网关模块、203服务监听模块、204规约解析模块、205规约组装模块、206数据安全认证模块、207数据入列执行模块、3核心处理层、301 Redis MQ模块、302 Redis缓存模块、303实时计算模块。
具体实施方式
下面结合附图及具体的实施例对发明进行进一步介绍:
参考图1,一种基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述基于Linux内核的epoll大并发数据通信接系统包括设备层1、通信层2和核心处理层3;
设备层1,用于采集数据;
通信层2,用于提供各种可用的有线和无线通信信道,为计量系统和装置设备之间的信息交互提供通道,与设备层信号连接;
核心处理层3,用于处理通信层发送过来的数据,与通信层数据连接。
3层构架设计,使得系统能够处理大量并发数据。
进一步地,所述通信层包括LB模块201、多表合一网关模块202、服务监听模块203、规约解析模块204、数据安全认证模块206和数据入列执行模块207;
LB模块201,用于接收来自通信层1的数据;
多表合一网关模块202,用于将LB模块201协议转换成核心处理层3协议,与LB模块201数据连接;
服务监听模块203,用于接收LB模块201数据,与LB模块201和多表合一网关模块202数据连接;
规约解析模块204,用于将LB模块201协议下的数据转换成核心处理层3协议下的数据,与服务监听模块203数据连接;
数据安全认证模块206,用于检查规约解析模块204的数据,与规约解析模块204数据连接;
数据入列执行模块207,用于将数据排序和暂存,与数据安全认证模块206数据连接。
进一步地,所述通信层2还包括规约组装模块205,用于将数据安全认证模块206返回数据从核心处理层3协议下的数据转换成LB模块201协议下的数据,与数据安全认证模块206和服务监听模块203数据连接。规约组装模块205可以实现向采集对象设备1发送数据的功能。
进一步地,所述核心处理层3包括Redis MQ模块301、Redis缓存模块302和实时计算模块303;
Redis MQ模块301,用于接收通信通信层2数据,与通信层2数据连接;
Redis缓存模块302,用于缓存Redis MQ模块302的数据,与Redis MQ模块301数据连接;
实时计算模块303,用于处理Redis缓存模块302的数据,与Redis缓存模块302数据连接。
增强了系统的大数据并发处理能力。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。

Claims (4)

1.一种基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述基于Linux内核的epoll大并发数据通信接系统包括设备层(1)、通信层(2)和核心处理层(3);
设备层(1),用于采集数据;
通信层(2),用于提供各种可用的有线和无线通信信道,为计量系统和装置设备之间的信息交互提供通道,与设备层信号连接;
核心处理层(3),用于处理通信层发送过来的数据,与通信层数据连接。
2.根据权利要求1所述的基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述通信层包括LB模块(201)、多表合一网关模块(202)、服务监听模块(203)、规约解析模块(204)、数据安全认证模块(206)和数据入列执行模块(207);
LB模块(201),用于接收来自通信层(1)的数据;
多表合一网关模块(202),用于将LB模块(201)协议转换成核心处理层(3)协议,与LB模块(201)数据连接;
服务监听模块(203),用于接收LB模块(201)数据,与LB模块(201)和多表合一网关模块(202)数据连接;
规约解析模块(204),用于将LB模块(201)协议下的数据转换成核心处理层(3)协议下的数据,与服务监听模块(203)数据连接;
数据安全认证模块(206),用于检查规约解析模块(204)的数据,与规约解析模块(204)数据连接;
数据入列执行模块(207),用于将数据排序和暂存,与数据安全认证模块(206)数据连接。
3.根据权利要求2所述的基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述通信层(2)还包括规约组装模块(205),用于将数据安全认证模块(206)返回数据从核心处理层(3)协议下的数据转换成LB模块(201)协议下的数据,与数据安全认证模块(206)和服务监听模块(203)数据连接。
4.根据权利要求1所述的基于Linux内核的epoll大并发数据通信接系统,其特征在于:所述核心处理层(3)包括RedisMQ模块(301)、Redis缓存模块(302)和实时计算模块(303);
Redis MQ模块(301),用于接收通信通信层(2)数据,与通信层(2)数据连接;
Redis缓存模块(302),用于缓存Redis MQ模块(302)的数据,与Redis MQ模块(301)数据连接;
实时计算模块(303),用于处理Redis缓存模块(302)的数据,与Redis缓存模块(302)数据连接。
CN201811475007.3A 2018-12-04 2018-12-04 一种基于Linux内核的epoll大并发数据通信接系统 Pending CN109660524A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811475007.3A CN109660524A (zh) 2018-12-04 2018-12-04 一种基于Linux内核的epoll大并发数据通信接系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811475007.3A CN109660524A (zh) 2018-12-04 2018-12-04 一种基于Linux内核的epoll大并发数据通信接系统

Publications (1)

Publication Number Publication Date
CN109660524A true CN109660524A (zh) 2019-04-19

Family

ID=66112343

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811475007.3A Pending CN109660524A (zh) 2018-12-04 2018-12-04 一种基于Linux内核的epoll大并发数据通信接系统

Country Status (1)

Country Link
CN (1) CN109660524A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN200972702Y (zh) * 2006-09-29 2007-11-07 王建宁 远程抄表系统
CN102215181A (zh) * 2011-06-13 2011-10-12 航天科工深圳(集团)有限公司 基于网关的海量数据处理方法
CN102387040A (zh) * 2011-11-01 2012-03-21 深圳市航天泰瑞捷电子有限公司 一种前置机保持高速稳定运行的方法及系统
US8769139B2 (en) * 2010-01-29 2014-07-01 Clarendon Foundation, Inc. Efficient streaming server
CN104243481A (zh) * 2014-09-24 2014-12-24 国家电网公司 一种用电信息采集前置数据处理的方法及系统
CN107566380A (zh) * 2017-09-12 2018-01-09 国网四川省电力公司成都供电公司 多表合一远程抄表系统
CN207037899U (zh) * 2017-04-26 2018-02-23 国网浙江省电力公司湖州供电公司 一种多表采集设备
CN107920228A (zh) * 2017-04-26 2018-04-17 国网浙江省电力公司湖州供电公司 一种多表采集设备
CN207518633U (zh) * 2017-11-16 2018-06-19 积成电子股份有限公司 支持dlms/cosem协议的电表数据采集终端

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN200972702Y (zh) * 2006-09-29 2007-11-07 王建宁 远程抄表系统
US8769139B2 (en) * 2010-01-29 2014-07-01 Clarendon Foundation, Inc. Efficient streaming server
CN102215181A (zh) * 2011-06-13 2011-10-12 航天科工深圳(集团)有限公司 基于网关的海量数据处理方法
CN102387040A (zh) * 2011-11-01 2012-03-21 深圳市航天泰瑞捷电子有限公司 一种前置机保持高速稳定运行的方法及系统
CN104243481A (zh) * 2014-09-24 2014-12-24 国家电网公司 一种用电信息采集前置数据处理的方法及系统
CN207037899U (zh) * 2017-04-26 2018-02-23 国网浙江省电力公司湖州供电公司 一种多表采集设备
CN107920228A (zh) * 2017-04-26 2018-04-17 国网浙江省电力公司湖州供电公司 一种多表采集设备
CN107566380A (zh) * 2017-09-12 2018-01-09 国网四川省电力公司成都供电公司 多表合一远程抄表系统
CN207518633U (zh) * 2017-11-16 2018-06-19 积成电子股份有限公司 支持dlms/cosem协议的电表数据采集终端

Similar Documents

Publication Publication Date Title
CN1477540A (zh) 基于移动通信的远程仪表读取系统和方法
CN103226890A (zh) 远程集抄智能用电系统及其集抄方法
WO2016004652A1 (zh) 基于ami与j2ee的智能用电数据管理方法及系统
CN104091434A (zh) 基于电力系统的费控信息通信方法和系统
CN101593978A (zh) 一种对配电网进行高低压线损分析方法及分析系统
CN107798489A (zh) 一种基于微信平台的电网作业现场安全管理方法
CN109241065B (zh) 一种智能变电站电缆运行信息识别系统及其识别方法
CN202600765U (zh) 智能化供电系统数据综合管理系统
CN117614141B (zh) 一种用于配电网的多电压层级协调管理方法
CN106682461A (zh) 一种采用计算机验证码技术的大数据分析系统
CN106530653B (zh) 用电信息采集方法
CN113902583B (zh) 利用低压网络设备数据的配网侧运维方法及系统
CN105227639A (zh) 一种变电站远程画面传送方法和一种变电站告警直传方法
CN207817517U (zh) 一种火电机组煤耗在线监测架构
CN103676669A (zh) 一种运动信息的校核方法及校核系统
CN109660524A (zh) 一种基于Linux内核的epoll大并发数据通信接系统
CN105321331A (zh) 电表信息的处理方法、装置及系统
CN204010291U (zh) 基于电力系统的费控信息通信系统
CN107706914B (zh) 一种智能变电站二次系统状态估计方法及装置
CN204883798U (zh) 一种带电检测作业管理系统
CN210015512U (zh) 一种线损统计分析装置和系统
CN202838674U (zh) 台区客户信息检测系统
CN111817437A (zh) 一种智能变电站智能录波器建模方法
Liu et al. [Retracted] Design and Implementation of Large‐Scale Public Building Energy Consumption Monitoring Platform Based on BP Neural Network
CN206075311U (zh) 煤样三级二维码加密防作弊系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190419