CN108989116B - 大数据收集分析系统及方法 - Google Patents

大数据收集分析系统及方法 Download PDF

Info

Publication number
CN108989116B
CN108989116B CN201810827856.4A CN201810827856A CN108989116B CN 108989116 B CN108989116 B CN 108989116B CN 201810827856 A CN201810827856 A CN 201810827856A CN 108989116 B CN108989116 B CN 108989116B
Authority
CN
China
Prior art keywords
equipment
big data
network equipment
data collection
analysis module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810827856.4A
Other languages
English (en)
Other versions
CN108989116A (zh
Inventor
曹伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hebei Huawo Communication Technology Co ltd
Original Assignee
Hebei Huawo Communication Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hebei Huawo Communication Technology Co ltd filed Critical Hebei Huawo Communication Technology Co ltd
Priority to CN201810827856.4A priority Critical patent/CN108989116B/zh
Publication of CN108989116A publication Critical patent/CN108989116A/zh
Application granted granted Critical
Publication of CN108989116B publication Critical patent/CN108989116B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/04Processing captured monitoring data, e.g. for logfile generation

Abstract

本发明适用于数据收集处理技术领域,提供了一种大数据收集分析系统及方法,所述系统包括:大数据收集单元,在监听到网络设备发送的设备信息时,接收网络设备发送的设备信息,大数据收集单元包括多个信息收集信道;大数据分析单元中的业务、流量高峰分析模块,根据网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;设备区域密度分析模块,根据网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;区域设备运营商信号分析模块,根据网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度,解决现有平台无法获取各个网络设备的相关数据,造成巨大的资源浪费的问题。

Description

大数据收集分析系统及方法
技术领域
本发明属于数据收集处理技术领域,尤其涉及一种大数据收集分析系统及方法。
背景技术
随着多个领域采购网络设备数量的急速增加,提供统一管理这些数以千计的网络设备的平台已被急切的需要。各个网络设备的厂商相应推出了专门管理网络设备的平台,但是这些平台,只是对所有接入平台设备进行传统的管理、监控。
在如今信息大爆炸的时代下,大数据收集越发迫切的时代背景下,这些部署在各个区域的网络设备,已为大数据收集提供了基础设施基础,但现有平台无法获取各个网络设备的相关数据,造成巨大的资源浪费。
发明内容
有鉴于此,本发明实施例提供了一种大数据收集分析系统及方法,以解决现有平台无法获取各个网络设备的相关数据,造成巨大的资源浪费的问题。
本发明实施例的第一方面提供了一种大数据收集分析系统,包括:
大数据收集单元,用于在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据,所述大数据收集单元包括多个信息收集信道,其中,多台网络设备根据预设时间间隔发送设备信息;
大数据分析单元包括业务、流量高峰分析模块、设备区域密度分析模块和区域设备运营商信号分析模块;所述业务、流量高峰分析模块,用于根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述设备区域密度分析模块,用于根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述区域设备运营商信号分析模块,用于根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
本发明实施例的第二方面提供了一种大数据收集分析方法,包括:
多台网络设备根据预设时间间隔发送设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据;
大数据收集单元在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述大数据收集单元包括多个信息收集信道;
大数据分析单元中的业务、流量高峰分析模块根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述大数据分析单元中的设备区域密度分析模块根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述大数据分析单元中的区域设备运营商信号分析模块根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
本发明实施例与现有技术相比存在的有益效果是:本发明实施例采集网络设备发送的设备信息,形成信息网络,数以千计的网络设备上传的信息汇总成整个大区域内的信息汇总网络,同时对整个区域内的数据进行分析,产生了巨大的附加价值,如分析区出整个大区域内的用户集中使用高峰期,哪个区域设备信号强度最弱等,为后期产品设计、专项优化等提供宝贵的数据分析。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种大数据收集分析系统的示意性框图;
图2是本发明另一实施例提供的一种大数据收集分析系统示意性框图;
图3是本发明实施例提供的一种大数据收集分析方法的示意流程图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
参见图1,图1是本发明实施例提供的一种大数据收集分析系统的示意性框图,解决以往网络设备发送的信息收集不充分、信息未产生额外附加价值、未形成海量信息收集网络、宝贵信息资源浪费等问题。如图1所示,本实施例的大数据收集分析系统100包括大数据收集单元101和大数据分析单元102,大数据分析单元102包括业务、流量高峰分析模块1021、设备区域密度分析模块1022和区域设备运营商信号分析模块1023。
其中,大数据收集单元101,用于在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据,所述大数据收集单元101包括多个信息收集信道,哪条信息收集信道相对空闲,便由哪条处理网络设备发来的信息,各信道间自动负载均衡,其中,多台网络设备根据预设时间间隔发送设备信息。
这里,遍布各个区域的网络终端根据预设时间间隔发送设备信息,预设时间间隔可以为网络设备出厂预设的,也可以由用户自定义修改,即可以根据实际需要设置预设时间间隔,增加了用户可自定义设备信息发送时间间隔的机制。
大数据收集单元在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,具体地,多个信息收集信道时刻监听网络设备发送的信息,一条数据信息只会有一个信道接收到,一条数据某个信道接收后,其它信道不会再获取到该条信息,可以有效减轻多个台网络设备同时并发数据时一个信道的超大压力,而且对大数据信息进行有效分流,为分别存储提供可能性,避免海量大数据过于集中,给存储造成压力。
所述业务、流量高峰分析模块1021,用于根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述设备区域密度分析模块1022,用于根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述区域设备运营商信号分析模块1023,用于根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
具体地,大数据分析模块有以下三个:
业务、流量高峰分析模块,对用户使用网络设备办理业务的集中时段、产生流量高峰时段进行汇总分析,从而汇总出哪个区域办理业务的人员更多,哪个区域相对较少,各区域集中办理业务主要集中在哪个时段。这对于网络设备的设计,区域是否增加设备或减少设备,用户业务集中区域是否增长业务点,业务过少区域是否减少业务点等问题,提供了至关重要的数据分析支撑。
设备区域密度分析模块,分析出网络设备在各个城市或地区的分布情况,为市场销售提供重要数据分析。从侧面分析出某个区域人员密度、更适合使用哪种类型的网络设备。结合网管平台,根据网络设备用户的不同用途,从侧面反应出该项业务在某个区域的活跃度。
区域设备运营商信号分析模块,分析网络设备在各个区域的信号强度,观察在某个区域哪个运营商的信号最好、哪个运营商的信号最差,从而为部署在该区域的网络设备选择运营商时提供建议,以让用户业务达到更好的效果。为后期产品设计、专项优化等提供宝贵的数据分析。
后期可以根据需要可以扩展更多其它的大数据分析模块。
从以上描述可知,本发明实施例大数据收集分析系统,采集网络设备发送的设备信息,形成信息网络,数以千计的网络设备上传的信息汇总成整个大区域内的信息汇总网络,同时对整个区域内的数据进行分析,产生了巨大的附加价值,如分析区出整个大区域内的用户集中使用高峰期,哪个区域设备信号强度最弱等,为后期产品设计、专项优化等提供宝贵的数据分析。
参见图2,图2是本发明另一实施例提供的另一种大数据收集分析系统的示意性框图。本实施例的大数据收集分析系统200包括大数据收集单元201、大数据分析单元202、数据存储中心203、定时单元204、汇总服务器205、数据库206和数据接口207,大数据分析单元202包括业务、流量高峰分析模块2021、设备区域密度分析模块2022和区域设备运营商信号分析模块2023。
其中,大数据收集单元201和大数据分析单元202具体请参阅图1及图1对应的实施例中大数据收集单元101和大数据分析单元102的相关描述,此处不赘述。
进一步的,所述大数据收集单元201,还用于将接收的网络设备发送的设备信息发送至数据存储中心203。所述数据存储中心203,用于存储网络设备发送的设备信息,所述数据存储中心203包括多个服务器,组成服务器集群,集群对外可理解为一台大型服务器,服务器可设置一条或多条信息收集信道,哪条信息收集信道相对空闲,便由哪条处理网络设备发来的信息,各信道间自动负载均衡,信道位于哪个服务器就将收集到数据存储在哪台服务器上。
这里,为了使各信道最大化工作,不造成任何额外负担,大数据收集单元201监听信道收集到信息后,可以不做任何处理,直接传递给数据存储中心203。数据存储中心203由服务器集群中的多个服务器构成,服务器可设置一条或多条信息收集信道,分别独立存储接收到的海量数据信息,一条数据一个服务器接收到后,其它服务器不会在接收到。数据存储中心203的所有服务器存储的所有信息,构成大数据的整体。每台服务器存储大数据的一部分。后期随着数据的增量,可以在集群中随时扩展增加新服务器。数据收集及存储的流程自此完成,数据产生的到存储的过程是自下而上传递形成的。
进一步的,所述定时单元204包括第一定时器2041、第二定时器2042和第三定时器2043。
所述第一定时器2041,用于发送第一汇总分析指令至所述业务、流量高峰分析模块2021,所述业务、流量高峰分析模块2021根据所述第一汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段的步骤。
所述第二定时器2042,用于发送第二汇总分析指令至所述设备区域密度分析模块2022,所述设备区域密度分析模块2022根据所述第二汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况的步骤。
所述第三定时器2043,用于发送第三汇总分析指令至所述区域设备运营商信号分析模块2023,所述区域设备运营商信号分析模块2023根据所述第三汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
具体地,定时器为每个大数据分析模块设置汇总分析指令,各个定时器执行时间各不相同,以避免同一时间分析数据给集群造成压力。如果某一个大数据汇总分析,可以产生两个模块(或以上)的汇总结果,那这几个模块共同使用一个定时器,避免多次执行造成的资源浪费。
进一步的,汇总服务器205,用于将所述业务、流量高峰分析模块2021确定的网络设备办理业务的集中时段和产生的流量高峰时段,所述设备区域密度分析模块2022确定的网络设备在预设区域的分布情况,以及所述区域设备运营商信号分析模块2023确定的网络设备在预设区域的信号强度,进行汇总,并将汇总后的结果发送至数据库206。
所述数据库206,用于保存所述汇总服务器汇总后的结果。
这里,汇总服务器汇总业务、流量高峰分析模块、设备区域密度分析模块和区域设备运营商信号分析模块的分析结果,可以对汇总的结果再次进行分析汇总,产生出总的分析结果,将该结果发送至数据库,将结果持久化到数据库。
进一步的,所述数据接口207,用于外接第三方平台,第三方平台(如网管平台)在获取授权后,获取相应模块的汇总数据结果。
从以上描述可知,本发明实施例提供一种大数据收集分析技术,采集网络设备发送的设备信息,形成信息网络,数以千计的网络设备上传的信息汇总成整个大区域内的信息汇总网络,同时对整个区域内的数据进行分析,产生了巨大的附加价值,如分析区出整个大区域内的用户集中使用高峰期,哪个区域设备信号强度最弱等,为后期产品设计、专项优化等提供宝贵的数据分析。
对应于上文实施例所述的大数据收集分析系统,图3示出了本发明实施例提供的一种大数据收集分析方法的示意流程图。上述实施例的大数据收集分析系统100包括的各单元用于执行图3对应的实施例中的各步骤,具体请参阅图1及图1对应的实施例中的相关描述,此处不赘述。
如图3所示,在该实施例中,可以包括以下步骤:
S301:多台网络设备根据预设时间间隔发送设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据。
S302:大数据收集单元在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述大数据收集单元包括多个信息收集信道,哪条信息收集信道相对空闲,便由哪条处理网络设备发来的信息,各信道间自动负载均衡。
S303:大数据分析单元中的业务、流量高峰分析模块根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述大数据分析单元中的设备区域密度分析模块根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述大数据分析单元中的区域设备运营商信号分析模块根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
从以上描述可知,本发明实施例大数据收集分析方法,采集网络设备发送的设备信息,形成信息网络,数以千计的网络设备上传的信息汇总成整个大区域内的信息汇总网络,同时对整个区域内的数据进行分析,产生了巨大的附加价值,如分析区出整个大区域内的用户集中使用高峰期,哪个区域设备信号强度最弱等,为后期产品设计、专项优化等提供宝贵的数据分析。
此外,在一个具体示例中,上述大数据收集分析方法,还包括:
所述大数据收集单元将接收的网络设备发送的设备信息发送至数据存储中心;
所述数据存储中心存储网络设备发送的设备信息,所述数据存储中心包括多个服务器,组成服务器集群,集群对外可理解为一台大型服务器,服务器可设置一条或多条信息收集信道,哪条信息收集信道相对空闲,便由哪条处理网络设备发来的信息,各信道间自动负载均衡,信道位于哪个服务器就将收集到数据存储在哪台服务器上。
此外,在一个具体示例中,上述大数据收集分析方法,还包括:
定时单元中的第一定时器发送第一汇总分析指令至所述业务、流量高峰分析模块,所述业务、流量高峰分析模块根据所述第一汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段的步骤;
所述定时单元中的第二定时器发送第二汇总分析指令至所述设备区域密度分析模块,所述设备区域密度分析模块根据所述第二汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况的步骤;
所述定时单元中的第三定时器发送第三汇总分析指令至所述区域设备运营商信号分析模块,所述区域设备运营商信号分析模块根据所述第三汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
此外,在一个具体示例中,上述大数据收集分析方法,还包括:
汇总服务器将所述业务、流量高峰分析模块确定的网络设备办理业务的集中时段和产生的流量高峰时段,所述设备区域密度分析模块确定的网络设备在预设区域的分布情况,以及所述区域设备运营商信号分析模块确定的网络设备在预设区域的信号强度,进行汇总,并将汇总后的结果发送至数据库;
所述数据库保存所述汇总服务器汇总后的结果。
此外,在一个具体示例中,上述大数据收集分析方法,还包括:
数据接口,外接第三方平台,在第三方平台获取授权后,与第三方平台进行信息交互。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (8)

1.一种大数据收集分析系统,其特征在于,包括:
大数据收集单元,用于在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据,所述大数据收集单元包括多个信息收集信道,其中,多台网络设备根据预设时间间隔发送设备信息;
大数据分析单元包括业务、流量高峰分析模块、设备区域密度分析模块和区域设备运营商信号分析模块;所述业务、流量高峰分析模块,用于根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述设备区域密度分析模块,用于根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述区域设备运营商信号分析模块,用于根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度;
所述系统还包括定时单元,所述定时单元包括第一定时器、第二定时器和第三定时器;
所述第一定时器,用于发送第一汇总分析指令至所述业务、流量高峰分析模块,所述业务、流量高峰分析模块根据所述第一汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段的步骤;
所述第二定时器,用于发送第二汇总分析指令至所述设备区域密度分析模块,所述设备区域密度分析模块根据所述第二汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况的步骤;
所述第三定时器,用于发送第三汇总分析指令至所述区域设备运营商信号分析模块,所述区域设备运营商信号分析模块根据所述第三汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
2.如权利要求1所述的大数据收集分析系统,其特征在于,所述大数据收集单元,还用于将接收的网络设备发送的设备信息发送至数据存储中心;
所述数据存储中心,用于存储网络设备发送的设备信息,所述数据存储中心包括多个服务器,组成服务器集群,服务器中设置一条或多条信息收集信道。
3.如权利要求1所述的大数据收集分析系统,其特征在于,还包括:
汇总服务器,用于将所述业务、流量高峰分析模块确定的网络设备办理业务的集中时段和产生的流量高峰时段,所述设备区域密度分析模块确定的网络设备在预设区域的分布情况,以及所述区域设备运营商信号分析模块确定的网络设备在预设区域的信号强度,进行汇总,并将汇总后的结果发送至数据库;
所述数据库,用于保存所述汇总服务器汇总后的结果。
4.如权利要求1所述的大数据收集分析系统,其特征在于,还包括数据接口,所述数据接口,用于外接第三方平台。
5.一种大数据收集分析方法,其特征在于,包括:
多台网络设备根据预设时间间隔发送设备信息,所述设备信息包括心跳数据、流量数据、设备标识、设备位置和状态数据;
大数据收集单元在监听到网络设备发送的设备信息时,接收监听到的网络设备发送的设备信息,所述大数据收集单元包括多个信息收集信道;
大数据分析单元中的业务、流量高峰分析模块根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段;所述大数据分析单元中的设备区域密度分析模块根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况;所述大数据分析单元中的区域设备运营商信号分析模块根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度;
所述方法还包括:
定时单元中的第一定时器发送第一汇总分析指令至所述业务、流量高峰分析模块,所述业务、流量高峰分析模块根据所述第一汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的心跳数据和流量数据,确定网络设备办理业务的集中时段和产生的流量高峰时段的步骤;
所述定时单元中的第二定时器发送第二汇总分析指令至所述设备区域密度分析模块,所述设备区域密度分析模块根据所述第二汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备标识和设备位置,确定网络设备在预设区域的分布情况的步骤;
所述定时单元中的第三定时器发送第三汇总分析指令至所述区域设备运营商信号分析模块,所述区域设备运营商信号分析模块根据所述第三汇总分析指令执行所述根据所述大数据收集单元接收的网络设备的设备位置和状态数据,确定网络设备在预设区域的信号强度。
6.如权利要求5所述的大数据收集分析方法,其特征在于,还包括:
所述大数据收集单元将接收的网络设备发送的设备信息发送至数据存储中心;
所述数据存储中心存储网络设备发送的设备信息,所述数据存储中心包括多个服务器,组成服务器集群,服务器中设置一条或多条信息收集信道。
7.如权利要求5所述的大数据收集分析方法,其特征在于,还包括:
汇总服务器将所述业务、流量高峰分析模块确定的网络设备办理业务的集中时段和产生的流量高峰时段,所述设备区域密度分析模块确定的网络设备在预设区域的分布情况,以及所述区域设备运营商信号分析模块确定的网络设备在预设区域的信号强度,进行汇总,并将汇总后的结果发送至数据库;
所述数据库保存所述汇总服务器汇总后的结果。
8.如权利要求5所述的大数据收集分析方法,其特征在于,还包括:
数据接口,外接第三方平台,在第三方平台获取授权后,与第三方平台进行信息交互。
CN201810827856.4A 2018-07-25 2018-07-25 大数据收集分析系统及方法 Active CN108989116B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810827856.4A CN108989116B (zh) 2018-07-25 2018-07-25 大数据收集分析系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810827856.4A CN108989116B (zh) 2018-07-25 2018-07-25 大数据收集分析系统及方法

Publications (2)

Publication Number Publication Date
CN108989116A CN108989116A (zh) 2018-12-11
CN108989116B true CN108989116B (zh) 2021-05-25

Family

ID=64551152

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810827856.4A Active CN108989116B (zh) 2018-07-25 2018-07-25 大数据收集分析系统及方法

Country Status (1)

Country Link
CN (1) CN108989116B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112559531B (zh) * 2020-12-22 2023-07-25 平安银行股份有限公司 数据收集方法、装置、电子设备及存储介质
CN113098924A (zh) * 2021-03-05 2021-07-09 广东电力信息科技有限公司 一种基于网络大数据流量分析方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105357699A (zh) * 2015-12-15 2016-02-24 珠海市经纬天地通讯技术有限公司 无线网络质量监测系统及方法
CN106780248A (zh) * 2016-11-29 2017-05-31 特斯联(北京)科技有限公司 基于大数据技术的城市物联网设备运营控制系统及方法
CN107333234A (zh) * 2017-06-09 2017-11-07 国政通科技股份有限公司 数据上报方法和装置、数据调度方法和装置及数据系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106205130A (zh) * 2016-08-18 2016-12-07 四川省艾普网络股份有限公司 一种大数据采集分析系统
CN108171617A (zh) * 2017-12-08 2018-06-15 全球能源互联网研究院有限公司 一种电网大数据分析方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105357699A (zh) * 2015-12-15 2016-02-24 珠海市经纬天地通讯技术有限公司 无线网络质量监测系统及方法
CN106780248A (zh) * 2016-11-29 2017-05-31 特斯联(北京)科技有限公司 基于大数据技术的城市物联网设备运营控制系统及方法
CN107333234A (zh) * 2017-06-09 2017-11-07 国政通科技股份有限公司 数据上报方法和装置、数据调度方法和装置及数据系统

Also Published As

Publication number Publication date
CN108989116A (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
CN110312279B (zh) 一种网络数据的监测方法及装置
CN107645562A (zh) 数据传输处理方法、装置、设备及系统
CN101420714B (zh) 用于对从通信网络中的元件收集关键性能指示器进行调度的方法
CN102739802A (zh) 面向业务应用的it集中运维分析系统
CN108334557B (zh) 一种聚合数据分析方法、装置、存储介质及电子设备
CN107147521B (zh) 一种投诉业务预警监控方法
CN108989116B (zh) 大数据收集分析系统及方法
CN108108445A (zh) 一种智能数据处理方法和系统
CN109359019A (zh) 应用程序性能监控方法、装置、电子设备及存储介质
CN110855481B (zh) 数据采集系统及方法
CN108924007A (zh) 通信运营信息的大数据采集及存储系统和方法
CN107463490B (zh) 一种应用于平台开发中的集群日志集中收集方法
CN102075964A (zh) 网管系统获取性能数据的方法和设备
EP2863597A1 (en) Computer-implemented method, computer system, computer program product to manage traffic in a network
CN110609761B (zh) 确定故障源的方法、装置、存储介质和电子设备
CN108093075A (zh) 一种应用系统灰度发布的实现方法
CN109246282B (zh) 通话信息的存储方法及装置、存储介质、电子装置
CN111324583B (zh) 一种业务日志的分类方法及装置
CN111506409B (zh) 一种数据处理方法及系统
CN107371141B (zh) 一种垃圾信息监控方法、装置及通信系统
CN115080363A (zh) 一种基于业务日志的系统容量评估方法及装置
CN115081679A (zh) 基于cdc的工业数据动态变化自动感知处理系统
CN100403273C (zh) 基于双向信息流的分布式监控方法
CN114070707A (zh) 一种互联网性能监控方法及系统
CN111949246A (zh) 新能源电力行业应用的创建方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant