CN107948280A - 一种结合探点和镜像分光流量的监控系统 - Google Patents

一种结合探点和镜像分光流量的监控系统 Download PDF

Info

Publication number
CN107948280A
CN107948280A CN201711188570.8A CN201711188570A CN107948280A CN 107948280 A CN107948280 A CN 107948280A CN 201711188570 A CN201711188570 A CN 201711188570A CN 107948280 A CN107948280 A CN 107948280A
Authority
CN
China
Prior art keywords
data
monitoring system
visited
mirror image
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711188570.8A
Other languages
English (en)
Inventor
赵丽
马勇
殷德军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuxi South China New Energy Electric Technology Development Co Ltd
Original Assignee
Wuxi South China New Energy Electric Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi South China New Energy Electric Technology Development Co Ltd filed Critical Wuxi South China New Energy Electric Technology Development Co Ltd
Priority to CN201711188570.8A priority Critical patent/CN107948280A/zh
Publication of CN107948280A publication Critical patent/CN107948280A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/75—Indicating network or usage conditions on the user display

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及一种结合探点和镜像分光流量的监控系统，分别为在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出给监控系统处理，以及在云主机中安装probe方式采集数据给监控系统处理，最后将处理分析的结果发送给用户或者在Web用户界面上展示给用户。本发明的采用两种监控方式相辅相成的结合，对于任何一个用户端发起的在线服务请求，做到全程的端到端的追踪，确认每个服务请求都获得了实时处理。并且由于监测过程中捕获了所有的所需记录，对于大数据分析来说就是一个十分容易从中提炼出数据的商业价值。

Description

一种结合探点和镜像分光流量的监控系统
技术领域
本发明涉及远程监控技术领域，尤其涉及一种结合探点和镜像分光流量的监控系统。
背景技术
现在全世界每天通过互联网产生的在线服务请求次数平均达到了800亿次，在线服务的健康和安全是所有互联网企业的生命线。在线服务必须具备可靠性(满足用户服务体验)、可用性(遵循服务级合约)、可服务性(提供数据取证)和安全性(防范安全攻击)。
因此数据中心内部必须部署实时监测系统，对服务健康进行不间断地监控。一旦发现服务出现健康隐患时，需要马上报警，提供可信的故障分析，使服务商及时采取对应措施，消除不良的商业后果。
服务器是网络中不可缺少的关键部分，起着保存各种信息数据、提供各种服务的重要作用。如在大部分网络游戏中，都是通过公司所架设的服务器来提供游戏，玩家则通过公司所提供的客户端来连上这些服务器以进行游戏。
这些服务器都是根据区域进行设置的，即不同区域设置专门针对该区域用户的服务器。继续以网络游戏为例，游戏运营公司都会根据区域的不同设置相应的服务器，例如提供华南服务器针对华南地区，提供华东服务器针对华东地区等。
由于服务器都是分散分布的，如何保证每个服务器正常工作是一个困难的任务。以往技术中，服务器的异常一般都是要靠用户发现然后联系客服进行维护，这种方式效率底下，花费时间长，极大地影响了服务的正常提供工作
现有技术下，对软件或者硬件进行监控的监控系统包括监控代理和监控服务器，其中监控代理由监控启动器、监控点、监控逻辑代码以及监控数据存储等四个部分组成，这四个部分是固化在监控代理的代码实现中的。在分布式多种应用同时存在的情况下，现有的监控代理给监控系统的部署和维护带来了极大的难度和不可扩展的局限性，并且为了对多种类型的软硬件进行监控，监控代理中需将有大量的监控不同软硬件的监控逻辑代码、监控点等信息，导致监控代理中的实现代码很大，浪费了很多资源。
发明内容
本发明的目的在于：针对现有技术中存在的上述技术问题，提供一种结合探点和镜像分光流量的监控系统。
本发明是通过以下技术放案实现的：一种结合探点和镜像分光流量的监控系统，分别为在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出给监控系统处理，以及在云主机中安装probe方式采集数据给监控系统处理，最后将处理分析的结果发送给用户或者在Web界面上展示给用户。
进一步，所述的在云主机中安装probe方式的系统包括：数据采集子系统、分布式消息队列、数据存储子系统和数据处理分析子系统；
所述的数据采集子系统包括网络流量收集模块和网络流量预处理模块；
所述的数据处理分析子系统由实时处理模块、批处理/NRT处理模块、离线处理模块和查询引擎/作业调度系统组成。
批处理/NRT处理模块接收来自查询引擎的用户的查询请求，负责将网络数据处理模块/协议识别模块传过来的特定格式的网络统计数据保存到文件中，传过来的自定义格式的CDR(主要用于保存一些应用层的和事务相关的信息)保存到数据库中。按照用户指定的条件检索出相应信息以特定格式回送给查询引擎。
这个模块最重要的功能是如何让用户能够随心所欲地查询信息，支持多维度，多条件的查询，维度和条件用户可以自由指定。用户采用SQL语言进行查询。为了提高查询的速度和效率，以及处理能力的可扩展性，这个模块采用分布式内存计算系统实现。
离线处理模块主要做低优先级的数据聚合工作。在基础数据保存的同时，统计聚合引擎会实时对基础数据进行两次统计，生成分钟、小时、天粒度的聚合统计数据，同时也会统计基于如URL/Host/IP等等用户关心的域的统计信息。聚合结果以JSON格式保存到分布式文件系统中。数据聚合程序需要实时对基础数据进行统计，然后分成不同时间粒度把聚合数据进行保存。时间粒度主要是分钟、小时、天等几种，具体值可以自定义。数据聚合程序通过Hadoop工作调度工具，在时间间隔的尾时间点自动唤醒，然后对周期数据进行分类聚合。另外，数据分析查询模块还有任务调度子模块，负责所有分析查询请求的运行调度。
查询引擎负责接收来自用户的查询请求，翻译成相应的查询语言(当前版本为SQL)，通过HTTP RESTful接口提交给数据分析查询模块，获取查询结果后，再把结果转换成用户需要的格式返回给用户。
Web用户界面这个模块负责把分析后的结果在Web界面上展示给用户。包括一个Web server及上面的Web用户界面。
如果是流计算实时更新的信息，要采用一种机制动态从查询引擎处获取信息，比如node.js+socket.io，来实时更新用户页面上的信息。
进一步，所述的数据采集子系统会将收集到的网络流量数据先交由预处理模块进行初步分析，然后将分析的结果推送到分布式消息队列中；分布式消息队列中的数据一方面会及时交由数据处理分析子系统中的实时处理模块进行处理，另一方面也会交由数据存储子系统中的一个数据保存模块进行定期同步存储。
进一步，所述的网络流量收集模块为布置于云主机中的probe，所述probe采集的网络流量保存为pcap格式的文件。
进一步，所述的网络流量预处理模块对网络流量进行解析；包括对IP、TCP以及应用层的特征进行初步统计，提取相关的信息。这个模块还负责把分析出来的结果，包括流量特征、应用层相关信息等，通过特定格式(例如NetFlow/IPFIX或JSON)的消息、或者CDR等通过消息队列或分布式文件系统传递给数据分析查询模块。
进一步，所述的在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出的步骤为：
S1主动访问的步骤，在监控端远程访问数据中心的服务器，获取所需的数据；
S2判断的步骤，将获取所需的数据送入监控系统处理。
进一步，S2判断的步骤具体包括：
S21访问信息记录的步骤，将所有的服务器访问信息存储；
S22访问信息分析的步骤，将所需的数据送入监控系统处理。
进一步，所述的S2判断的步骤之后还包括S3通知的步骤，将处理分析的结果信息远程传送给Web用户界面。
综上所述，由于采用了上述技术放案，本发明的有益效果是：
1、用户既有自己的数据中心，又使用了公有云服务商提供的云服务；通过在自己的数据中心里采用流量镜像，或者分光，将流量直接导出给监控系统处理，在公有云中采用在云主机中安装probe的方式来做些监控的两种方式相结合来监控，填补了现有监控技术的空白。
2、本发明的监控系统对于任何一个用户端发起的在线服务请求，做到全程的端到端的追踪，确认每个服务请求都获得了实时处理。并且由于监测过程中捕获了所有的所需记录，对于大数据分析来说就是一个十分容易从中提炼出数据的商业价值。
3、本发明系统这样细到毫微的全流量监测系统由于高难的技术挑战，是过去所没有的，但是却满足客户越来越精细化的监测和分析。
附图说明
本发明将通过例子并参照附图的放式说明，其中：
图1为本发明系统总体框架示意图；
图2为本发明probe方式采集数据的总体示意图；
图3为本发明probe方式采集数据的系统示意图；
图4为本发明采用流量镜像或者分光方式系统流程示意图；
图5为本发明采用流量镜像或者分光方式系统示意图。
具体实施放式
本说明书中公开的所有特征，或公开的所有放法或过程中的步骤，除了互相排斥的特征和/或步骤以外，均可以以任何放式组合。
本说明书(包括任何附加权利要求、摘要和附图)中公开的任一特征，除非特别叙述，均可被其他等效或具有类似目的的替代特征加以替换。即，除非特别叙述，每个特征只是一系列等效或类似特征中的一个例子而已。
如图1所示的，一种结合探点和镜像分光流量的监控系统，分别为在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出给监控系统处理，以及在云主机中安装probe方式采集数据给监控系统处理，最后将处理分析的结果发送给用户或者在Web界面上展示给用户。
如图2和3所述的，在云主机中安装probe方式的系统包括：数据采集子系统、分布式消息队列、数据存储子系统和数据处理分析子系统；
所述的数据采集子系统包括网络流量收集模块和网络流量预处理模块；
所述的数据处理分析子系统由实时处理模块、批处理/NRT处理模块、离线处理模块和查询引擎/作业调度系统组成。
批处理/NRT处理模块接收来自查询引擎的用户的查询请求，负责将网络数据处理模块/协议识别模块传过来的特定格式的网络统计数据保存到文件中，传过来的自定义格式的CDR(主要用于保存一些应用层的和事务相关的信息)保存到数据库中。按照用户指定的条件检索出相应信息以特定格式回送给查询引擎。
这个模块最重要的功能是如何让用户能够随心所欲地查询信息，支持多维度，多条件的查询，维度和条件用户可以自由指定。用户采用SQL语言进行查询。为了提高查询的速度和效率，以及处理能力的可扩展性，这个模块采用分布式内存计算系统实现。
离线处理模块主要做低优先级的数据聚合工作。在基础数据保存的同时，统计聚合引擎会实时对基础数据进行两次统计，生成分钟、小时、天粒度的聚合统计数据，同时也会统计基于如URL/Host/IP等等用户关心的域的统计信息。聚合结果以JSON格式保存到分布式文件系统中。数据聚合程序需要实时对基础数据进行统计，然后分成不同时间粒度把聚合数据进行保存。时间粒度主要是分钟、小时、天等几种，具体值可以自定义。数据聚合程序通过Hadoop工作调度工具，在时间间隔的尾时间点自动唤醒，然后对周期数据进行分类聚合。另外，数据分析查询模块还有任务调度子模块，负责所有分析查询请求的运行调度。
查询引擎负责接收来自用户的查询请求，翻译成相应的查询语言(当前版本为SQL)，通过HTTP RESTful接口提交给数据分析查询模块，获取查询结果后，再把结果转换成用户需要的格式返回给用户。
Web用户界面这个模块负责把分析后的结果在Web界面上展示给用户。包括一个Web server及上面的Web用户界面。
如果是流计算实时更新的信息，要采用一种机制动态从查询引擎处获取信息，比如node.js+socket.io，来实时更新用户页面上的信息。
具体地，所述的数据采集子系统会将收集到的网络流量数据先交由预处理模块进行初步分析，然后将分析的结果推送到分布式消息队列中；分布式消息队列中的数据一方面会及时交由数据处理分析子系统中的实时处理模块进行处理，另一方面也会交由数据存储子系统中的一个数据保存模块进行定期同步存储。
具体地，所述的网络流量收集模块为布置于云主机中的probe，所述probe采集的网络流量保存为pcap格式的文件。
具体地，所述的网络流量预处理模块对网络流量进行解析；包括对IP、TCP以及应用层的特征进行初步统计，提取相关的信息。这个模块还负责把分析出来的结果，包括流量特征、应用层相关信息等，通过特定格式(例如NetFlow/IPFIX或JSON)的消息、或者CDR等通过消息队列或分布式文件系统传递给数据分析查询模块。
如图4和5所示的，在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出的监控步骤为：
S1主动访问的步骤，在监控端远程访问数据中心的服务器，获取所需的数据；
S2判断的步骤，将获取所需的数据送入监控系统处理。
具体地，S2判断的步骤具体包括：
S21访问信息记录的步骤，将所有的服务器访问信息存储；
S22访问信息分析的步骤，将所需的数据送入监控系统处理。
具体地，所述的S2判断的步骤之后还包括S3通知的步骤，将处理分析的结果信息远程传送给Web用户界面。
采用流量镜像或者分光方式将流量直接导出的监控系统包括监控机以及监控系统。监控机的数量根据所需检测自己数据中服务器的数量进行设置。
监控机设置在监控端，监控机远程访问各地的服务器，获取所需的信息。这种信息可以包括服务器是否能够访问、访问速度、服务器负荷等等。
监控系统接收监控机获取的服务器访问结果，根据服务器的访问结果判断服务器工作是否正常。监控系统还包括数据存储单元，其中数据存储单元所有的服务器访问信息存储，监控系统对数据存储单元存储的服务器访问信息进行分析，
判断服务器工作是否正常。判断的结果不限于服务器是否能够连上，还可以包括访问速度、服务器负荷等等。
以上所述的具体实施例，对本发明的目的、技术放案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限制本发明。本发明扩展到任何在本说明书中披露的新特征或任何新的组合，以及披露的任一新的放法或过程的步骤或任何新的组合。

Claims (10)

1.一种结合探点和镜像分光流量的监控系统，其特征在于：分别为在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出给监控系统处理，以及在云主机中安装probe方式采集数据给监控系统处理，最后将处理分析的结果发送给用户或者在Web用户界面上展示给用户。
2.根据权利要求1所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的在云主机中安装probe方式的系统包括：数据采集子系统、分布式消息队列、数据存储子系统和数据处理分析子系统；
所述的数据采集子系统包括网络流量收集模块和网络流量预处理模块；
所述的数据处理分析子系统由实时处理模块、批处理/NRT处理模块、离线处理模块和查询引擎/作业调度系统组成。
3.根据权利要求2所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的数据采集子系统会将收集到的网络流量数据先交由预处理模块进行初步分析，然后将分析的结果推送到分布式消息队列中；分布式消息队列中的数据一方面会及时交由数据处理分析子系统中的实时处理模块进行处理，另一方面也会交由数据存储子系统中的一个数据保存模块进行定期同步存储。
4.根据权利要求2所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的网络流量收集模块为布置于云主机中的probe，所述probe采集的网络流量保存为pcap格式的文件。
5.根据权利要求2所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的网络流量预处理模块对网络流量进行解析；包括对IP、TCP以及应用层的特征进行初步统计，提取相关的信息。
6.根据权利要求1所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的在自己的数据中心服务器里采用流量镜像或者分光方式将流量直接导出的步骤为：
S1主动访问的步骤，在监控端远程访问数据中心的服务器，获取所需的数据；
S2判断的步骤，将获取所需的数据送入监控系统处理。
7.根据权利要求1所述的结合探点和镜像分光流量的监控系统，其特征在于，所述S2判断的步骤具体包括：
S21访问信息记录的步骤，将所有的服务器访问信息存储；
S22访问信息分析的步骤，将所需的数据送入监控系统处理。
8.根据权利要求6或7所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的S2判断的步骤之后还包括S3通知的步骤，将处理分析的结果信息远程传送给Web用户界面。
9.根据权利要求1所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的Web用户界面采用一种机制动态从查询引擎处获取信息，来实时更新用户页面上的信息。
10.根据权利要求1所述的结合探点和镜像分光流量的监控系统，其特征在于，所述的一种机制动态为node.js+socket.io。
CN201711188570.8A 2017-11-24 2017-11-24 一种结合探点和镜像分光流量的监控系统 Pending CN107948280A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711188570.8A CN107948280A (zh) 2017-11-24 2017-11-24 一种结合探点和镜像分光流量的监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711188570.8A CN107948280A (zh) 2017-11-24 2017-11-24 一种结合探点和镜像分光流量的监控系统

Publications (1)

Publication Number Publication Date
CN107948280A true CN107948280A (zh) 2018-04-20

Family

ID=61948594

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711188570.8A Pending CN107948280A (zh) 2017-11-24 2017-11-24 一种结合探点和镜像分光流量的监控系统

Country Status (1)

Country Link
CN (1) CN107948280A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111343037A (zh) * 2019-08-19 2020-06-26 海通证券股份有限公司 云平台负载按应用的流量监控方法、装置、计算机设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101286895A (zh) * 2008-05-22 2008-10-15 上海交通大学 可动态配置的分布式网络数据监控系统及方法
CN101986274A (zh) * 2010-11-11 2011-03-16 东软集团股份有限公司 一种私有云环境下资源调配系统及资源调配方法
CN102984004A (zh) * 2012-12-03 2013-03-20 珠海金山网络游戏科技有限公司 服务端监控方法及监控系统
US8954553B1 (en) * 2008-11-04 2015-02-10 Appcelerator, Inc. System and method for developing, deploying, managing and monitoring a web application in a single environment
CN104657250A (zh) * 2014-12-16 2015-05-27 无锡华云数据技术服务有限公司 一种对云主机进行性能监控的监控方法
CN106817262A (zh) * 2017-03-01 2017-06-09 郑州云海信息技术有限公司 一种日志分析装置
CN107171818A (zh) * 2016-03-07 2017-09-15 阿里巴巴集团控股有限公司 用于混合云的控制方法、系统和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101286895A (zh) * 2008-05-22 2008-10-15 上海交通大学 可动态配置的分布式网络数据监控系统及方法
US8954553B1 (en) * 2008-11-04 2015-02-10 Appcelerator, Inc. System and method for developing, deploying, managing and monitoring a web application in a single environment
CN101986274A (zh) * 2010-11-11 2011-03-16 东软集团股份有限公司 一种私有云环境下资源调配系统及资源调配方法
CN102984004A (zh) * 2012-12-03 2013-03-20 珠海金山网络游戏科技有限公司 服务端监控方法及监控系统
CN104657250A (zh) * 2014-12-16 2015-05-27 无锡华云数据技术服务有限公司 一种对云主机进行性能监控的监控方法
CN107171818A (zh) * 2016-03-07 2017-09-15 阿里巴巴集团控股有限公司 用于混合云的控制方法、系统和装置
CN106817262A (zh) * 2017-03-01 2017-06-09 郑州云海信息技术有限公司 一种日志分析装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111343037A (zh) * 2019-08-19 2020-06-26 海通证券股份有限公司 云平台负载按应用的流量监控方法、装置、计算机设备
CN111343037B (zh) * 2019-08-19 2022-05-31 海通证券股份有限公司 云平台负载按应用的流量监控方法、装置、计算机设备

Similar Documents

Publication Publication Date Title
CN107992398B (zh) 一种业务系统的监控方法和监控系统
US7801985B1 (en) Data transfer for network interaction fraudulence detection
CN106709003A (zh) 基于Hadoop的海量日志数据处理方法
Imbrenda et al. Analyzing cacheable traffic in isp access networks for micro cdn applications via content-centric networking
CN1327351C (zh) 用于事务流水线分解的方法和系统
CN106487596A (zh) 分布式服务跟踪实现方法
CN107888452B (zh) 一种24小时分布式网站性能监测和实时告警方法
CN105490854B (zh) 实时日志收集方法、系统和应用服务器集群
CN110554856A (zh) 一种微服务治理系统
CN107273267A (zh) 基于elastic组件的日志分析方法
US20170339173A1 (en) Data transfer for network interaction fraudulence detection
Qiao et al. Characterizing flow, application, and user behavior in mobile networks: A framework for mobile big data
CN103414608B (zh) 快速的web流量采集统计系统和方法
CN106201754A (zh) 任务信息分析方法及装置
CN104753732A (zh) 一种基于分布式的网络流量分析系统及方法
US20090248803A1 (en) Apparatus and method of analyzing service processing status
Bumgardner et al. Scalable hybrid stream and hadoop network analysis system
CN104486116A (zh) 多维度查询流量数据的方法及系统
CN105069029B (zh) 一种实时etl系统及方法
CN106559498A (zh) 风控数据收集平台及其收集方法
CN102123056B (zh) 端到端Web服务质量监测方法
Bezboruah et al. Performance evaluation of hierarchical SOAP based web service in load balancing cluster-based and non-cluster-based web server
CN107948280A (zh) 一种结合探点和镜像分光流量的监控系统
CN110633191B (zh) 实时监控软件系统业务健康度的方法和系统
Rong et al. Locating the clues of declining success rate of service calls

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180420

WD01 Invention patent application deemed withdrawn after publication