CN108259492A - 一种流量数据的留存方法、设备和计算机可读存储介质 - Google Patents
一种流量数据的留存方法、设备和计算机可读存储介质 Download PDFInfo
- Publication number
- CN108259492A CN108259492A CN201810035075.1A CN201810035075A CN108259492A CN 108259492 A CN108259492 A CN 108259492A CN 201810035075 A CN201810035075 A CN 201810035075A CN 108259492 A CN108259492 A CN 108259492A
- Authority
- CN
- China
- Prior art keywords
- data
- flows
- collection point
- module
- memory module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
- H04L63/1425—Traffic logging, e.g. anomaly detection
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提出了一种流量数据的留存方法、设备和计算机可读存储介质,该方法包括:通过分别设置在各个采集点的采集模块获取流量数据;将各个采集模块获取到的流量数据发送至存储模块;通过所述存储模块对流量数据进行存储。本发明将流量数据抓取和流量数据存储分离,解决了网络留存中的抓包问题和存储性能低下的问题。
Description
技术领域
本发明涉及网络安全技术领域,尤其涉及一种流量数据的留存方法、设备和计算机可读存储介质。
背景技术
网络安全领域分为事前预防、事中控制、事后追踪等几大块,其中事后追踪需要一种设备能够将真实网络的流量数据存储下来,以便当出现安全事故时可以进行原始流量数据的提取,从而进一步进行分析处理。如图1所示,在现有技术中通常采用单台独立设备的存储方案,即将流量数据的采集和存储集成在一台设备内。采用单台独立设备的存储方案的逻辑简单且易于实现,但是由于流量数据抓取和流量数据存储是在同一台设备上进行的,会受限于单台独立设备性能的影响,从而不能进行大流量的扩容。另外,目前采用的单台独立设备的存储方案不支持第三方查询检索接口。因此,目前采用的单台独立设备的存储方案无法适应复杂的网络环境。
发明内容
本发明要解决的技术问题是,提供一种流量数据的留存方法、设备和计算机可读存储介质,将流量数据抓取和流量数据存储分离,解决了网络留存中的抓包问题和存储性能低下的问题。
为实现上述目的,本发明提供了一种流量数据的留存方法,所述方法包括:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
可选的,在所述通过分别设置在各个采集点的采集模块获取流量数据之后,并在所述将各个采集模块获取到的流量数据发送至存储模块之前,所述方法还包括:
通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
可选的,所述将各个采集模块获取到的流量数据发送至存储模块,包括:
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包;
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
可选的,所述通过所述存储模块对流量数据进行存储,包括:
通过所述存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
可选的,在所述通过所述存储模块对流量数据进行存储之后,所述方法还包括:
向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并将查找到的流量数据导出;其中,所述历史流量查询指令包括待查询流量数据的采集时间信息和IP地址信息。
本发明还提供一种流量数据的留存设备,包括:处理器、存储器及通信总线;
所述通信总线用于实现所述处理器和所述存储器之间的连接通信;
所述处理器用于执行所述存储器中存储的流量数据的留存程序,以实现以下步骤:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
可选的,所述处理器还用于执行所述存储器中存储的流量数据的留存程序,以实现以下步骤:
通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
可选的,所述处理器在执行所述将各个采集模块获取到的流量数据发送至存储模块的步骤时,具体包括:
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包;
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
可选的,所述处理器在执行所述通过所述存储模块对流量数据进行存储的步骤时,具体包括:
通过所述存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有流量数据的留存程序;
当所述流量数据的留存程序被至少一个处理器执行时,导致所述至少一个处理器执行上述介绍的流量数据的留存方法的步骤。
采用上述技术方案,本发明至少具有下列优点:
本发明所述的流量数据的留存方法、设备和计算机可读存储介质,基于分层设计思想,将高效抓包和快速存储分离,不仅可以通过增加硬件(CPU或内容)的方式快速扩容,还能够提供第三方查询检索接口,对任意时间段内的流量数据进行检索和导出。解决了复杂网络环境下的抓包问题以及解决了网络留存中的存储性能低下的问题。
附图说明
图1为现有技术的采用单台独立设备的存储方案的示例图;
图2为本发明第一实施例的流量数据的留存方法的流程图;
图3为本发明第二实施例的流量数据的留存方法的流程图;
图4为本发明第三实施例的流量数据的留存方法的流程图;
图5为本发明第四实施例的流量数据的留存系统的流程图;
图6为本发明第五实施例的流量数据的留存设备的组成结构示意图。
具体实施方式
为更进一步阐述本发明为达成预定目的所采取的技术手段及功效,以下结合附图及较佳实施例,对本发明进行详细说明如后。
本发明第一实施例,一种流量数据的留存方法,如图2所示,所述方法具体包括以下步骤:
步骤S201:通过分别设置在各个采集点的采集模块获取流量数据。
具体的,该采集点可以设置于一台设备上或设置于多台设备上,并在每个采集点处设置一个采集模块。控制各个采集点的采集模块,以通过采集模块获取流量数据。
进一步的,采集模块利用DPDK(Data Plane Development Kit,数据平面开发套件)技术通过预先配置的端口快速获取流量数据。
步骤S202:将各个采集模块获取到的流量数据发送至存储模块。
具体的,在本发明实施例中,一个存储模块管辖多个采集点的多个采集模块。同时控制各个采集模块,以将各个采集模块获取到的流量数据发送至一个存储模块。
步骤S203:通过所述存储模块对流量数据进行存储。
具体的,在本发明实施例中,多个采集模块获取到的流量数据统一存储到一个存储模块中。控制存储模块,以通过存储模块对流量数据进行存储。
进一步的,所述方法还包括:
向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并导出查找到的流量数据。
本发明实施例采用了流量数据的采集和存储的分层设计,通过分布式获取流量数据和分布式存储流量数据的方法提升了流量数据采集的灵活性,并解决了流量数据存储的瓶颈。
本发明第二实施例,一种流量数据的留存方法,如图3所示,所述方法具体包括以下步骤:
步骤S301:通过分别设置在各个采集点的采集模块获取流量数据。
具体的,该采集点可以设置于一台设备上或设置于多台设备上,并在每个采集点处设置一个采集模块。
进一步的,采集模块利用DPDK技术通过预先配置的端口快速获取流量数据。
步骤S302:按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
具体的,在每个采集点上设置有多个缓冲区,当采集点上的采集模块获取到流量数据后,采集模块按照预设的缓冲规则,将获取到的流量数据存储到该采集点上的对应的缓冲区中。
进一步的,缓冲区的大小和个数可以根据设备的实际内存大小进行配置。
步骤S303:通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据发送至存储模块。
具体的,在每个采集点上还设置有转存模块,转存模块依次轮询采集点上的各个缓冲区,当发现任一缓冲区被写满时,转存模块将被写满的缓冲区中的全部流量数据发送至存储模块,从而释放该缓冲区。
步骤S304:通过所述存储模块对流量数据进行存储。
具体的,在本发明实施例中,存储模块采用分布式的存储方式,存储模块可基于发布和订阅机制,监控存储模块中的各个分布式存储区的存储状态,并对流量数据进行分块、分区的存储。
进一步的,所述方法还包括:
向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并导出查找到的流量数据。
在本发明实施例中,通过流量数据采集和流量数据存储的分离,提高了采集流量数据的灵活性,并解决了网络留存中的存储性能低下的问题。本发明实施例还提供了历史流量数据的查询接口。
本发明第三实施例,一种流量数据的留存方法,如图4所示,所述方法具体包括以下步骤:
步骤S401:通过分别设置在各个采集点的采集模块获取流量数据。
具体的,该采集点可以设置于一台设备上或设置于多台设备上,并在每个采集点处设置一个采集模块。
进一步的,采集模块利用DPDK技术通过预先配置的端口快速获取流量数据。
步骤S402:通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
具体的,在每个采集点上设置有多个缓冲区,当采集点上的采集模块获取到流量数据后,采集模块按照预设的缓冲规则,将获取到的流量数据存储到该采集点上的对应的缓冲区中。
进一步的,缓冲区的大小和个数可以根据设备的实际内存大小进行配置。
步骤S403:通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包。
具体的,在每个采集点上设置有转存模块以及与该转存模块对应的多个客户端。转存模块依次轮询采集点上的各个缓冲区,当发现任一缓冲区被写满时,转存模块按照预设的配置规则将被写满的缓冲区中的全部流量数据发送至对应的客户端。客户端用于将流量数据压缩为数据包。
步骤S404:通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
步骤S405:通过存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
具体的,存储模块采用分布式的存储方式,在存储模块中设置有多个分布式的存储区。存储模块根据采集时间信息将流量数据存储到对应的存储区中,并建立流量数据、采集时间信息和IP地址信息之间的对应关系,以提供基于采集时间信息和IP地址信息的查询流量数据和导出流量数据的功能。
进一步的,所述方法还包括:
向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并将查找到的流量数据导出;其中,所述历史流量查询指令包括待查询流量数据的采集时间信息和IP地址信息。
由于存储模块在存储流量数据的时候建立了流量数据、采集时间信息和IP地址信息之间的对应关系,所以存储模块可以根据历史流量查询指令中的采集时间信息和IP地址信息快速查找到对应的流量数据,并导出查找到的流量数据。
在本发明实施例中,存储模块可以基于消息发布、订阅机制,提供存储、查询和导出的功能。
本发明第四实施例,一种流量数据的留存系统,如图5所示,所述系统具体包括以下组成部分:
采集模块501、内存缓冲队列502、转存模块503、客户端504、存储模块505。
其中,采集模块501、内存缓冲队列502、转存模块503、客户端504设置于采集点上。
采集模块501,用于获取流量数据,并按照预设的缓冲规则,将获取到的流量数据存储到内存缓冲队列502中对应的缓冲区中;
具体的,采集模块501,还用于:
为获取到的流量数据添加采集时间信息。
进一步的,内存缓冲队列502包括多个缓冲区。
转存模块503,用于轮询内存缓冲队列502中的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至对应的客户端504。
客户端504,用于将流量数据压缩为数据包。
具体的,转存模块503,还用于轮询各个客户端504,当客户端504上存储的数据包的数量达到预设阈值时,将客户端504上的全部数据包发送至存储模块505。
存储模块505,用于对流量数据进行存储。
具体的,存储模块505,用于:
对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
进一步的,存储模块505,还用于:
接收历史流量查询指令,并根据历史流量查询指令查找到对应的流量数据,并将查找到的流量数据导出;其中,所述历史流量查询指令包括待查询流量数据的采集时间信息和IP地址信息。
本发明第五实施例,一种流量数据的留存设备,如图6所示,所述设备包括:处理器601、存储器602及通信总线;
通信总线用于实现处理器601和存储器602之间的连接通信;
处理器601用于执行存储器602中存储的流量数据的留存程序,以实现以下步骤:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
具体的,处理器601还用于执行存储器602中存储的流量数据的留存程序,以实现以下步骤:
通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
进一步的,处理器601在执行所述将各个采集模块获取到的流量数据发送至存储模块的步骤时,具体包括:
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包;
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
进一步的,处理器601在执行所述通过所述存储模块对流量数据进行存储的步骤时,具体包括:
通过所述存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
更进一步的,处理器601还用于执行存储器602中存储的流量数据的留存程序,以实现以下步骤:
在所述通过所述存储模块对流量数据进行存储之后,向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并将查找到的流量数据导出;其中,所述历史流量查询指令包括待查询流量数据的采集时间信息和IP地址信息。
本发明第六实施例,提出了一种计算机可读存储介质,所述计算机可读存储介质存储有流量数据的留存程序;
当所述流量数据的留存程序被至少一个处理器执行时,导致所述至少一个处理器执行以下步骤操作:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
本发明实施例中介绍的流量数据的留存方法、设备和计算机可读存储介质,基于分层设计思想,将高效抓包和快速存储分离,不仅可以通过增加硬件(CPU或内容)的方式快速扩容,还能够提供第三方查询检索接口,对任意时间段内的流量数据进行检索和导出。解决了复杂网络环境下的抓包问题以及解决了网络留存中的存储性能低下的问题。
通过具体实施方式的说明,应当可对本发明为达成预定目的所采取的技术手段及功效得以更加深入且具体的了解,然而所附图示仅是提供参考与说明之用,并非用来对本发明加以限制。
Claims (10)
1.一种流量数据的留存方法,其特征在于,所述方法包括:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
2.根据权利要求1所述的流量数据的留存方法,其特征在于,在所述通过分别设置在各个采集点的采集模块获取流量数据之后,并在所述将各个采集模块获取到的流量数据发送至存储模块之前,所述方法还包括:
通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
3.根据权利要求2所述的流量数据的留存方法,其特征在于,所述将各个采集模块获取到的流量数据发送至存储模块,包括:
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包;
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
4.根据权利要求3所述的流量数据的留存方法,其特征在于,所述通过所述存储模块对流量数据进行存储,包括:
通过所述存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
5.根据权利要求4所述的流量数据的留存方法,其特征在于,在所述通过所述存储模块对流量数据进行存储之后,所述方法还包括:
向所述存储模块发送历史流量查询指令,以供所述存储模块根据所述历史流量查询指令查找到对应的流量数据,并将查找到的流量数据导出;其中,所述历史流量查询指令包括待查询流量数据的采集时间信息和IP地址信息。
6.一种流量数据的留存设备,其特征在于,所述设备包括:处理器、存储器及通信总线;
所述通信总线用于实现所述处理器和所述存储器之间的连接通信;
所述处理器用于执行所述存储器中存储的流量数据的留存程序,以实现以下步骤:
通过分别设置在各个采集点的采集模块获取流量数据;
将各个采集模块获取到的流量数据发送至存储模块;
通过所述存储模块对流量数据进行存储。
7.根据权利要求6所述的流量数据的留存设备,其特征在于,所述处理器还用于执行所述存储器中存储的流量数据的留存程序,以实现以下步骤:
通过采集模块为获取到的流量数据添加采集时间信息,并按照预设的缓冲规则,将获取到的流量数据存储到设置在对应采集点上的对应的缓冲区中。
8.根据权利要求7所述的流量数据的留存设备,其特征在于,所述处理器在执行所述将各个采集模块获取到的流量数据发送至存储模块的步骤时,具体包括:
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个缓冲区,将被写满的缓冲区中的全部流量数据按照预设的配置规则发送至设置在对应采集点上的对应的客户端,以供所述客户端将所述全部流量数据压缩为数据包;
通过分别设置在各个采集点的转存模块,轮询对应采集点上的各个客户端,当客户端上存储的数据包的数量达到预设阈值时,将所述客户端上的全部数据包发送至所述存储模块。
9.根据权利要求8所述的流量数据的留存设备,其特征在于,所述处理器在执行所述通过所述存储模块对流量数据进行存储的步骤时,具体包括:
通过所述存储模块对接收到的数据包进行解压操作,以获取数据包中的流量数据、采集时间信息和IP地址信息,根据所述采集时间信息进行存储,并建立所述流量数据、采集时间信息和IP地址信息之间的对应关系。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有流量数据的留存程序;
当所述流量数据的留存程序被至少一个处理器执行时,导致所述至少一个处理器执行权利要求1至5中任一项所述的流量数据的留存方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810035075.1A CN108259492B (zh) | 2018-01-15 | 2018-01-15 | 一种流量数据的留存方法、设备和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810035075.1A CN108259492B (zh) | 2018-01-15 | 2018-01-15 | 一种流量数据的留存方法、设备和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108259492A true CN108259492A (zh) | 2018-07-06 |
CN108259492B CN108259492B (zh) | 2021-07-20 |
Family
ID=62727036
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810035075.1A Active CN108259492B (zh) | 2018-01-15 | 2018-01-15 | 一种流量数据的留存方法、设备和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108259492B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110380914A (zh) * | 2019-08-22 | 2019-10-25 | 北京世纪互联宽带数据中心有限公司 | 一种流量监控方法及系统 |
CN113271336A (zh) * | 2021-04-21 | 2021-08-17 | 湖南大学 | 基于dpdk的机器人中间件dds数据传输方法、电子设备及计算机可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130067034A1 (en) * | 2011-03-08 | 2013-03-14 | Riverbed Technology, Inc. | Accessing Network Traffic Data at Multiple Time Scales and Levels of Detail |
CN104639393A (zh) * | 2015-01-07 | 2015-05-20 | 烽火通信科技股份有限公司 | 一种无源光网络流量全网采集装置及其方法 |
CN105681397A (zh) * | 2015-12-30 | 2016-06-15 | 曙光信息产业(北京)有限公司 | 一种网络流量数据存储方法及系统、查询方法及装置 |
CN106713332A (zh) * | 2016-12-30 | 2017-05-24 | 山石网科通信技术有限公司 | 网络数据的处理方法、装置和系统 |
CN107122422A (zh) * | 2017-04-06 | 2017-09-01 | 山东建筑大学 | 面向服务的智慧住区实时数据库系统及其工作方法 |
CN107239553A (zh) * | 2017-06-08 | 2017-10-10 | 北京匡恩网络科技有限责任公司 | 工控设备的数据处理方法和装置 |
-
2018
- 2018-01-15 CN CN201810035075.1A patent/CN108259492B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130067034A1 (en) * | 2011-03-08 | 2013-03-14 | Riverbed Technology, Inc. | Accessing Network Traffic Data at Multiple Time Scales and Levels of Detail |
CN104639393A (zh) * | 2015-01-07 | 2015-05-20 | 烽火通信科技股份有限公司 | 一种无源光网络流量全网采集装置及其方法 |
CN105681397A (zh) * | 2015-12-30 | 2016-06-15 | 曙光信息产业(北京)有限公司 | 一种网络流量数据存储方法及系统、查询方法及装置 |
CN106713332A (zh) * | 2016-12-30 | 2017-05-24 | 山石网科通信技术有限公司 | 网络数据的处理方法、装置和系统 |
CN107122422A (zh) * | 2017-04-06 | 2017-09-01 | 山东建筑大学 | 面向服务的智慧住区实时数据库系统及其工作方法 |
CN107239553A (zh) * | 2017-06-08 | 2017-10-10 | 北京匡恩网络科技有限责任公司 | 工控设备的数据处理方法和装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110380914A (zh) * | 2019-08-22 | 2019-10-25 | 北京世纪互联宽带数据中心有限公司 | 一种流量监控方法及系统 |
CN113271336A (zh) * | 2021-04-21 | 2021-08-17 | 湖南大学 | 基于dpdk的机器人中间件dds数据传输方法、电子设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108259492B (zh) | 2021-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104158699B (zh) | 一种基于优先级和分段的数据采集方法 | |
CN109002424B (zh) | 文件格式转换方法、装置、计算机设备及存储介质 | |
CN103226768B (zh) | 一种实验室原始记录单的实时自动生成系统及方法 | |
JP5560936B2 (ja) | 構成情報取得方法、仮想プローブおよび構成情報取得制御装置 | |
CN108259492A (zh) | 一种流量数据的留存方法、设备和计算机可读存储介质 | |
CN108415962A (zh) | 一种云存储系统 | |
CN107820052A (zh) | 基于评标业务数据和视频数据的融合方法及系统 | |
CN113225339A (zh) | 网络安全监测方法、装置、计算机设备及存储介质 | |
CN107301084B (zh) | 集群服务器的虚拟机迁移方法、装置、服务器及存储介质 | |
CN113872810A (zh) | 一种业务仿真方法、装置、电子设备及存储介质 | |
EP2940600A1 (en) | Data scanning method and device | |
CN107463487B (zh) | 一种分布式主机性能采集系统及性能采集方法 | |
CN111797150B (zh) | 一种高并发数据对接转发的方法及系统 | |
CN107783728A (zh) | 数据存储方法、装置和设备 | |
CN105975521A (zh) | 一种流式数据上传方法及装置 | |
CN110308873B (zh) | 一种数据存储方法、装置、设备及介质 | |
CN110958294B (zh) | 基于雾计算的输变电巡检视频处理方法 | |
WO2016197659A1 (zh) | 网络媒体流收包方法、装置及系统 | |
CN109922083B (zh) | 一种网络协议流量控制系统 | |
CN111737082A (zh) | 容器及容器应用的监控方法、装置、设备和介质 | |
CN108024222A (zh) | 流量话单生成方法和装置 | |
CN106302201A (zh) | 流量控制方法、设备和系统 | |
CN110971826A (zh) | 视频前端监控装置及方法 | |
CN104660506B (zh) | 一种数据包转发的方法、装置及系统 | |
CN110045924A (zh) | 分级存储方法、装置、电子设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |