CN110247858A - 一种基于dpi的数据上传方法及系统 - Google Patents

一种基于dpi的数据上传方法及系统 Download PDF

Info

Publication number
CN110247858A
CN110247858A CN201910665969.3A CN201910665969A CN110247858A CN 110247858 A CN110247858 A CN 110247858A CN 201910665969 A CN201910665969 A CN 201910665969A CN 110247858 A CN110247858 A CN 110247858A
Authority
CN
China
Prior art keywords
dpi
data
threshold
uploaded
cloud server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910665969.3A
Other languages
English (en)
Other versions
CN110247858B (zh
Inventor
袁晓静
翟京卿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China United Network Communications Group Co Ltd
Original Assignee
China United Network Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China United Network Communications Group Co Ltd filed Critical China United Network Communications Group Co Ltd
Priority to CN201910665969.3A priority Critical patent/CN110247858B/zh
Publication of CN110247858A publication Critical patent/CN110247858A/zh
Application granted granted Critical
Publication of CN110247858B publication Critical patent/CN110247858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
    • H04L47/2483—Traffic characterised by specific attributes, e.g. priority or QoS involving identification of individual flows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/29—Flow control; Congestion control using a combination of thresholds
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H04L67/5651—Reducing the amount or size of exchanged application data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种基于DPI的数据上传的方法及系统，其中，该方法包括：获取数据流；采用DPI对所述数据流进行识别，并获得经过识别的DPI数据；根据预设规则将所述DPI数据上传至DPI云端服务器。本发明本提供的技术方案根据预先设定的数据传输规则实现对DPI数据的上传，使得DPI数据可以在适当的时机进行数据处理及传输，避免智能家庭网关在资源占用较多时，智能家庭网关因实时上传DPI数据消耗过多网络资源所导致的智能家庭网关性能降低、网络拥堵以及影响用户终端上网速率等问题。

Description

一种基于DPI的数据上传方法及系统
技术领域
本发明涉及通信技术领域，尤其涉及一种基于DPI的数据上传方法，以及一种基于DPI的数据上传系统。
背景技术
随着通信技术的不断发展，智能化家居涌入我们的生活。智能家庭网关作为智能化家居服务的核心，具备智能家居控制枢纽及无线路由两大功能，各种家庭网络终端在通过智能家庭网关实现设备互联的同时，还通过家庭网关访问宽带IP网络，并与宽带IP网络上的业务平台或其它各类终端配合，进一步为用户提供更广泛的家庭网络业务能力。
随着网关集成插件DPI技术的发展，运营商通过网关内置DPI插件技术，可以实现对通过网关的数据流的精准识别，DPI技术将网络数据报文根据五元组分为一个个的应用流，并通过识别技术对应用流中的特定报文进行探测，从而确定应用和用户的行为特征。DPI在进行数据检测时，需要进行数据分析，甚至需要进行高精度的应用识别，为了节省数据传输所需的系统资源，DPI插件将采集的数据字段进行压缩处理后再上传数据。
目前DPI插件在上传数据时，需要对数据进行压缩处理，按照设定的周期或设定文件的大小进行实时上报，而DPI插件在进行高精度的应用识别和数据分析时可能会消耗设备中大量的处理器资源，同时网关在处理用户上网请求时也会消耗很多资源，那么在资源占用较高时，DPI插件继续处理数据并上传服务器时，很有可能会造成网关设备性能的下降和网络的拥堵。
发明内容
本发明提供一种基于DPI的数据上传方法及系统，以解决DPI处理以及上传数据时，可能消耗过多处理器资源从而导致的网关设备性能下降以及网络拥堵等问题。
为了实现上述目的，本发明提供一种基于DPI的数据上传的方法，包括：
获取数据流；
采用DPI对所述数据流进行识别，并获得经过识别的DPI数据；
根据预设规则将所述DPI数据上传至DPI云端服务器。
可选地，在根据预设规则将所述DPI数据上传至DPI云端服务器前，还包括：
设定处理器资源占用率的第一阈值；
所述根据预设规则将所述DPI数据上传至DPI云端服务器，包括：
判断处理器的资源占用率是否低于第一阈值；
若处理器的资源占用率低于第一阈值，则将所述DPI数据上传至所述DPI云端服务器；
若处理器的资源占用率不低于第一阈值，则暂停将所述DPI数据上传至所述DPI云端服务器，而是将所述DPI数据存储于本地。
可选地，在根据预设规则将所述DPI数据上传至DPI云端服务器前，还包括：
设定处理器资源占用率的第二阈值，且第一阈值大于第二阈值；
所述根据预设规则将所述DPI数据上传至DPI云端服务器，还包括：
判断处理器的资源占用率是否低于第二阈值；
若处理器的资源占用率低于第二阈值，则继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器；
若处理器的资源占用率低于第一阈值且不低于第二阈值，则继续将所述DPI数据上传至所述DPI云端服务器。
可选地，所述将本地存储的DPI数据上传至DPI云端服务器，包括：
对所述本地存储的DPI数据进行数据压缩；
与所述DPI云端服务器建立传输连接；
将经过数据压缩的DPI数据上传到DPI云端服务器。
可选地，所述对所述本地存储的DPI数据进行数据压缩，具体为：
根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
为实现上述目的，本发明还提供一种基于DPI的数据上传系统，包括：
数据获取模块，用于获取数据流；
DPI数据识别模块，用于对所述数据流进行识别，并获得经过识别的DPI数据；
DPI数据上传模块，用于根据预设规则将所述DPI数据上传至DPI云端服务器。
可选地，所述系统还包括：
第一阈值设定模块，用于设定处理器资源占用率的第一阈值；
所述DPI数据上传模块包括：
第一判断单元，用于判断处理器的资源占用率是否低于第一阈值；
第一数据上传单元，用于当处理器的资源占用率低于第一阈值时，将所述DPI数据上传至所述DPI云端服务器
数据暂停上传与存储单元，用于当处理器的资源占用率不低于第一阈值时，暂停将所述DPI数据上传至所述DPI云端服务器，而是将所述DPI数据存储于本地。
可选地，所述系统还包括：
第二阈值设定模块，用于设定处理器资源占用率的第二阈值，且第一阈值大于第二阈值；
所述DPI数据上传模块还包括：
第二判断单元，用于判断处理器的资源占用率是否低于第二阈值；
第二数据上传单元，用于当处理器的资源占用率低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器；
所述第一数据上传单元还用于当处理器的资源占用率低于第一阈值且不低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器。
可选地，所述数据上传单元包括：
数据压缩子单元，用于对所述本地存储的DPI数据进行数据压缩；
传输连接建立子单元，用于与所述DPI云端服务器建立传输连接；
数据上传子单元，用于将经过数据压缩的DPI数据上传到DPI云端服务器。
可选地，所述数据压缩子单元具体用于，根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
有益效果：
与现有技术相比，本发明提供的数据上传方法及系统通过获取数据流，然后采用DPI识别数据流并获得DPI数据，最后根据预设规则将DPI数据上传至DPI远端服务器中，本发明提供的技术方案根据预先设定的规则实现对DPI数据的上传，使得DPI数据可以在适当的时机进行数据处理及传输，避免智能家庭网关在资源占用较多时，智能家庭网关因实时上传DPI数据消耗过多网络资源所导致的智能家庭网关性能降低、网络拥堵以及影响用户终端上网速率等问题。
附图说明
图1为本发明实施例一提供的一种基于DPI的数据上传方法流程图；
图2为本发明实施例一提供的一种基于DPI的数据上传方法中智能家庭网关的结构示意图；
图3为本发明实施例二提供的一种基于DPI的数据上传方法流程图；
图4为本发明实施例二提供的一种基于DPI的数据上传方法的信令交互图；
图5为本发明实施例三提供的一种基于DPI的数据上传系统结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，以下结合附图对本发明的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本发明，并不用于限制本发明。
实施例一
请参照图1，图1为本发明实施例一提供的一种基于DPI的数据上传方法流程图，本实施例的应用主体可以为集成有DPI(Deep Packet Inspection，深度包检测技术)插件的智能网关，其中，DPI是指一种基于数据包的应用层流量检测和控制技术，其针对数据包的不同层信息进行深度检测和分析，从而得到整个数据流或数据包的应用层信息，然后按照系统定义的策略对流量进行统计分析和控制，采用DPI可以准确地获取并识别数据流，并将识别后的DPI数据上传至服务器。具体地，该方法包括步骤S101-S103：
步骤S101：获取数据流；
用户终端接入到智能家庭网关时，智能家庭网关获取数据流，具体地，数据流流入到智能网关DPI插件，DPI插件获取流经智能家庭网关的数据流。
步骤S102：采用DPI对所述数据流进行识别，并获得经过识别的DPI数据；
本实施例中，智能家庭网关中的DPI插件中对数据流进行识别，其中DPI插件中包括数据识别模块，并通过数据识别模块对数据流进行识别，根据获取到的数据流识别用户终端的各种应用以及业务类别等，并根据对应的业务规则进行数据处理，以获得经过识别的DPI数据。
需要说明的是，其中根据获取到的数据流识别用户终端的各种应用以及业务类别具体为，利用DPI技术将网络数据报文根据五元组分为一个个的应用流，并通过识别技术对应用流中的特定报文进行探测，从而确定用户终端的应用以及行为特征，以此确定用户终端的业务类型。
步骤S103：根据预设规则将所述DPI数据上传至DPI云端服务器。
目前DPI插件在上传数据时，需要对数据进行压缩处理，按照设定的周期或设定文件的大小进行实时上报，而DPI插件在进行高精度的应用识别和数据分析时可能会消耗设备中大量的处理器资源，同时网关在处理用户上网请求时也会消耗很多资源，那么在资源占用较高时，可能会造成网关设备性能的下降和网络的拥堵。
为了解决上述技术问题，本发明实时例预先设定相应的规则，在将DPI数据上传至DPI云端服务器时根据该预设规则上传DPI数据，预设规则可以根据智能家庭网关的处理能力的不同进行自定义设置，旨在解决智能家庭网关资源占用较高时与DPI进行数据处理与数据上传需要消耗大量资源所导致的智能家庭网关性能下降以及网络拥堵，影响用户上网体验等问题。
具体地，本实施例根据预设规则上传DPI数据可以通过以下方式实现，但不限于以下方式：
本实施例中预设规则可以为根据智能家庭网关处理器的资源占用情况决定是否上传以及何时上传DPI数据，结合图2，图2为本实施例智能家庭网关/DPI插件的结构示意图，具体地，本实施例在智能家庭网关200中设置数据流识别模块210、监测模块220、判断模块240、存储模块250以及数据处理模块260，通过上述各个模块的运行规则实现在保障智能家庭网关性能以及网络通畅的情况下对DPI数据的数据传输，使得家庭智能网关在资源占用较大时能够自适应能力调整，根据预先设定的规则选择适当的时机进行数据处理和传输。
具体地，数据流识别模块210：集成在网关内的DPI插件，能够获取流经网关的数据流，识别各种应用，实现各种控制功能，将识别到的数据上传到服务器，进一步的，可以在实际部署中根据数据的设定时间和数据大小等进行实时上传；
监测模块220：监测模块负责对网关性能进行监测，预先设置处理器的资源占用阈值，数值可以根据网关的实际性能和实际部署情况进行设定，例如，第一设定阈值可以设置为当处理器的资源占用达到80％以上时，将DPI数据进行本地存储，以释放DPI插件的占用资源，而第二设定阈值可以为处理器资源占用低于70％时，实现对本地存储数据的上传；
分析模块230：用于对实际系统的性能进行实时分析，分析是否根据实际需求进行数据传输，对缓存的本地数据进行处理，根据系统的存储容量判断是否可以上传数据，以使系统性能达到最佳状态；
判断模块240：根据监测模块监测的数据判断处理器的资源占用是否达到第一阈值和第二阈值要求的数据时，触发相关的处理机制，由于系统性能可能出现不稳定的情况，具体地，可以采取在连续几个周期内的平均资源占用是否达到相应的阈值；
存储模块250：当系统资源占用达到第一设定阈值时，将数据存储到本地，存储模块用于暂时存储DPI插件采集到的数据；
数据处理模块260：当系统资源占用达到第一设定阈值时数据处理模块对DPI插件采集到的数据进行本地处理，将不在向服务器发送数据；当系统资源占用低于第二设定阈值时将本地数据发送到服务器，建立与服务器之间的传输通道，对要传输的数据进行特定格式的压缩，压缩后进行传输，以节省数据传输所需的系统资源。
本实施例提供的数据上传方法首先获取流经智能家庭网关的获取数据流，然后采用DPI识别数据流并获得DPI数据，最后根据预设规则将DPI数据上传至DPI远端服务器中，本实施例提供的技术方案根据预先设定的规则实现对DPI数据的上传，使得DPI数据可以在适当的时机进行数据处理及传输，避免智能家庭网关在资源占用较多时，智能家庭网关因实时上传DPI数据消耗过多网络资源所导致的智能家庭网关性能降低、网络拥堵以及影响用户终端上网速率等问题。
实施例二
请参照图3-4，图3为实施例二提供的一种基于DPI的数据上传方法流程图，本实施例的应用主体可以为集成有DPI插件的智能家庭网关，智能家庭网关通过设定处理器资源占用率的第一阈值和第二阈值，实时监测处理器的占用情况，并根据处理器的占用情况实现对DPI数据的上传或存储，以解决智能家庭网关资源占用较高时与DPI进行数据处理与数据上传需要消耗大量资源所导致的智能家庭网关性能下降以及网络拥堵，影响用户上网体验等问题，该方法包括步骤S201-S206：
步骤S201：获取数据流；
步骤S202：采用DPI对所述数据流进行识别，并获得经过识别的DPI数据；
步骤S203：设定处理器的资源占用率的第一阈值；
具体地，可以在集成了DPI插件的家庭网关中部署监测模块，用于监测处理器的资源占用情况，设定处理器资源占用率的第一阈值，例如，第一阈值可以设置为0.8，当处理器的资源占用率达到0.8时，说明此时处理器已占用大部分资源，如果智能家庭网关继续上传DPI数据容易导致网络拥堵，其中，第一阈值可以根据处理器的处理能力进行自定义设置。
步骤S204：设定处理器的资源占用率的第二阈值，其中所述第一阈值大于第二阈值；
对应上述第一阈值的设定数值，本实施例第二阈值可以设定为处理器资源占用低于0.7时，实现对本地存储数据的上传功能，具体如下。
步骤S205：判断处理器的资源占用率是否低于第一阈值；若处理器的资源占用率不低于第一阈值，则进入步骤S207，否则，进入步骤S206或步骤S208。
步骤S206：将所述DPI数据发送至DPI云端服务器；
当处理器的资源占用率低于第一阈值，表示当前处理器的资源占用情况可以满足DPI数据的实时上传，此时，将DPI数据实时上传至DPI云端服务器中，不会造成网络的拥堵以及影响终端的上网速率。
步骤S207：暂停将所述上传所述DPI数据上传至所述DPI云端服务器，并将所述DPI数据存储于本地；
当处理器的资源占用率高于或等于第一阈值，表示当前处理器的资源占用较大，此时暂停上传DPI数据，并将DPI数据存储于本地。具体地，可以指示DPI功能单元暂停对DPI数据的实时上传，即关闭与云端服务器之间的连接通道，以释放占用资源，以提高用户终端的上网能力，并将DPI数据缓存至本地中，当处理器有相应的处理能力时，再将缓存的DPI数据上传，以实现DPI的数据处理功能，同时解决智能家庭网关处理器的网络拥堵问题。
步骤S208：判断处理器的资源占用率是否低于第二阈值，若低于第二阈值，则进入步骤S209，否则，返回步骤S205；步骤S209：继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器。
为了提高数据传输质量，本实施例在处理器资源占用率低于第一阈值后还进行判断是否低于第二阈值，在低于第二阈值情况时实现本地存储数据的传输。智能家庭网关监测到处理器的资源占用率低于第二阈值时，说明此时处理器的资源占用情况较小，例如，处理器的资源占用率低于0.7时，处理器还可以满足数据上传的网络速率并且不会出现网络拥堵等问题，此时指示DPI功能单元开启对应的处理能力，将本地存储的DPI数据上传至DPI云端服务器，另一方面，处理器在低于第二阈值时，说明此时处理器处理能力较强，网络速率也相应更快，此时将本地存储的DPI数据上传至DPI远端服务器，更加高效。
可选地，所述将本地存储的DPI数据上传至DPI云端服务器，包括：
对所述本地存储的DPI数据进行数据压缩；
具体地，所述对所述本地存储的DPI数据进行数据压缩，具体为：
根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
与所述DPI云端服务器建立传输连接；
将经过数据压缩的DPI数据上传到DPI云端服务器。
本实施例中，DPI插件在上传数据时，需要对数据进行压缩处理，以节省数据传输所需的系统资源，重新与DPI云端服务器建立连接，并按照数据对应的业务类型采用对应地传输协议并根据预先规定的格式以及设定的周期或设定文件的大小上传至DPI云端服务器，
为更好的对上述流程进行说明，请参照图4，图4为实施例二提供的一种数据上传方法的信令交互图，具体包括以下步骤：
Sa.用户通过家庭网关上网，实现各种数据业务，DPI插件对数据流进行识别，根据业务规则进行数据处理；
Sb.监测功能模块开启，监测处理器的资源占用情况，预先设定处理器的资源占用阈值；
Sc.判定资源占用是否低于第一阈值，若是，则向DPI功能单元发送指令，指示对DPI数据不进行实时处理；
Sd.若低于第一阈值，则实时上传DPI数据至DPI云端服务器；
Se指示对DPI数据不进行处理，将采集到的数据进行本地存储，关闭与DPI云端服务器的传送通道，释放处理器资源；
Sf.继续对系统资源占用进行监测，判断处理器资源占用是否低于第二阈值；
Sg.若低于第二阈值，则指示DPI功能单元对本地DPI数据进行处理，压缩后向DPI服务器传送；
Sh.建立DPI插件与DPI云端服务器的传输通道，上传本地存储的DPI数据，本地数据传输完成后，可以同时恢复DPI数据实时上传能力。
本实施例提供的数据上传方法可以实时监测处理器的资源占用情况，通过设定处理器资源占用率的第一阈值，当处理器资源占用率低于第一阈值时实时传输DPI数据，当处理器资源占用率不低于第一阈值时，暂停上传所述DPI数据并将所述DPI数据存储于本地，以释放处理器资源，提高用户终端的上网速率；进一步的，设定处理器资源占用率的第二阈值，当处理器资源占用率低于第二阈值时，继续上传DPI数据，同时将本地存储的DPI数据上传至DPI云端服务器，当处理器资源占用率低于第二阈值但不低于第一阈值时，继续上传DPI数据。本实施例可以使得DPI数据在适当的时机进行数据处理及传输，在实现DPI数据上传功能时，同时避免智能家庭网关在资源占用较多时，智能家庭网关因实时上传DPI数据消耗过多网络资源所导致的智能家庭网关性能降低、网络拥堵以及影响用户终端上网速率等问题。
请参照图5，图5为实施例三提供的一种基于DPI的数据上传的系统结构图，包括：
数据获取模块10，用于获取数据流；
DPI数据识别模块20，用于对所述数据流进行识别，并获得经过识别的DPI数据；
DPI数据上传模块30，用于根据预设规则将所述DPI数据上传至DPI云端服务器。
可选地，所述系统还包括：
第一阈值设定模块40，用于设定处理器资源占用率的第一阈值；
所述DPI数据上传模块30包括：
第一判断单元31，用于判断处理器的资源占用率是否低于第一阈值；
第一数据上传单元32，用于当处理器的资源占用率低于第一阈值时，将所述DPI数据上传至所述DPI云端服务器；
数据暂停上传与存储单元33，用于当处理器的资源占用率不低于第一阈值时，暂停将所述DPI数据上传至所述DPI云端服务器，而是将所述DPI数据存储于本地。
可选地，所述系统还包括：
第二阈值设定模块50，用于设定处理器资源占用率的第二阈值，且第一阈值大于第二阈值；
所述DPI数据上传模块30还包括：
第二判断单元34，用于判断处理器的资源占用率是否低于第二阈值；
第二数据上传单元35，用于当处理器的资源占用率低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器；
所述第一数据上传单元33还用于当处理器的资源占用率低于第一阈值且不低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器。
可选地，所述数据上传单元包括：
数据压缩子单元，用于对所述本地存储的DPI数据进行数据压缩；
传输连接建立子单元，用于与所述DPI云端服务器建立传输连接；
数据上传子单元，用于将经过数据压缩的DPI数据上传到DPI云端服务器。
可选地，所述数据压缩子单元具体用于，根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
本实施例提供的数据上传系统通过数据获取模块获取数据流，然后通过DPI数据识别模块对所述数据流进行识别并获得经过识别的DPI数据，最后通过DPI数据上传模块根据预设规则将所述DPI数据上传至DPI云端服务器，本实施例根据预先设定的规则实现对DPI数据的上传，使得DPI数据可以在适当的时机进行数据处理及传输，避免智能家庭网关在资源占用较多时，智能家庭网关因实时上传DPI数据消耗过多网络资源所导致的智能家庭网关性能降低、网络拥堵以及影响用户终端上网速率等问题；进一步的，本实施例可以通过第一阈值设定模块设定处理器资源占用率的第一阈值，以及第二阈值设定模块设定处理器资源占用率的第二阈值，智能家庭网关实时监测处理器资源占用情况，当处理器资源占用率达到一定占用阈值时，暂停DPI数据上传或启动DPI数据上传功能，实现智能家庭网关的自适应调节能力，可以满足DPI数据上传的同时，解决智能家庭网关的网络拥堵等问题。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于DPI的数据上传方法，其特征在于，包括：
获取数据流；
采用DPI对所述数据流进行识别，并获得经过识别的DPI数据；
根据预设规则将所述DPI数据上传至DPI云端服务器。
2.根据权利要求1所述的方法，其特征在于，在根据预设规则将所述DPI数据上传至DPI云端服务器前，还包括：
设定处理器资源占用率的第一阈值；
所述根据预设规则将所述DPI数据上传至DPI云端服务器，包括：
判断处理器的资源占用率是否低于第一阈值；
若处理器的资源占用率低于第一阈值，则将所述DPI数据上传至所述DPI云端服务器；
若处理器的资源占用率不低于第一阈值，则暂停将所述DPI数据上传至所述DPI云端服务器，而是将所述DPI数据存储于本地。
3.根据权利要求2所述的方法，其特征在于，在根据预设规则将所述DPI数据上传至DPI云端服务器前，还包括：
设定处理器资源占用率的第二阈值，且第一阈值大于第二阈值；
所述根据预设规则将所述DPI数据上传至DPI云端服务器，还包括：
判断处理器的资源占用率是否低于第二阈值；
若处理器的资源占用率低于第二阈值，则继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器；
若处理器的资源占用率低于第一阈值且不低于第二阈值，则继续将所述DPI数据上传至所述DPI云端服务器。
4.根据权利要求3所述的方法，其特征在于，所述将本地存储的DPI数据上传至DPI云端服务器，包括：
对所述本地存储的DPI数据进行数据压缩；
与所述DPI云端服务器建立传输连接；
将经过数据压缩的DPI数据上传到DPI云端服务器。
5.根据权利要求4所述的方法，其特征在于，所述对所述本地存储的DPI数据进行数据压缩，具体为：
根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
6.一种基于DPI的数据上传系统，其特征在于，包括：
数据获取模块，用于获取数据流；
DPI数据识别模块，用于对所述数据流进行识别，并获得经过识别的DPI数据；
DPI数据上传模块，用于根据预设规则将所述DPI数据上传至DPI云端服务器。
7.根据权利要求6所述的系统，其特征在于，还包括：
第一阈值设定模块，用于设定处理器资源占用率的第一阈值；
所述DPI数据上传模块包括：
第一判断单元，用于判断处理器的资源占用率是否低于第一阈值；
第一数据上传单元，用于当处理器的资源占用率低于第一阈值时，将所述DPI数据上传至所述DPI云端服务器
数据暂停上传与存储单元，用于当处理器的资源占用率不低于第一阈值时，暂停将所述DPI数据上传至所述DPI云端服务器，而是将所述DPI数据存储于本地。
8.根据权利要求7所述的系统，其特征在于，还包括：
第二阈值设定模块，用于设定处理器资源占用率的第二阈值，且第一阈值大于第二阈值；
所述DPI数据上传模块还包括：
第二判断单元，用于判断处理器的资源占用率是否低于第二阈值；
第二数据上传单元，用于当处理器的资源占用率低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器，同时将本地存储的DPI数据上传至DPI云端服务器；
所述第一数据上传单元还用于当处理器的资源占用率低于第一阈值且不低于第二阈值时，继续将所述DPI数据上传至所述DPI云端服务器。
9.根据权利要求8所述的系统，其特征在于，所述数据上传单元包括：
数据压缩子单元，用于对所述本地存储的DPI数据进行数据压缩；
传输连接建立子单元，用于与所述DPI云端服务器建立传输连接；
数据上传子单元，用于将经过数据压缩的DPI数据上传到DPI云端服务器。
10.根据权利要求9所述的系统，其特征在于，所述数据压缩子单元具体用于，根据对应的传输协议以预设格式对所述本地存储的DPI数据进行数据压缩。
CN201910665969.3A 2019-07-23 2019-07-23 一种基于dpi的数据上传方法及系统 Active CN110247858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910665969.3A CN110247858B (zh) 2019-07-23 2019-07-23 一种基于dpi的数据上传方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910665969.3A CN110247858B (zh) 2019-07-23 2019-07-23 一种基于dpi的数据上传方法及系统

Publications (2)

Publication Number Publication Date
CN110247858A true CN110247858A (zh) 2019-09-17
CN110247858B CN110247858B (zh) 2022-11-18

Family

ID=67893244

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910665969.3A Active CN110247858B (zh) 2019-07-23 2019-07-23 一种基于dpi的数据上传方法及系统

Country Status (1)

Country Link
CN (1) CN110247858B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110868358A (zh) * 2019-10-16 2020-03-06 武汉绿色网络信息服务有限责任公司 一种基于应用识别自学习的数据包处理方法和装置
CN112511456A (zh) * 2020-12-21 2021-03-16 北京百度网讯科技有限公司 流量控制方法、装置、设备、存储介质和计算机程序产品
CN111562973B (zh) * 2020-04-24 2024-02-06 蘑菇车联信息科技有限公司 一种地图数据任务执行方法及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120324123A1 (en) * 2011-06-15 2012-12-20 Ortiva Wireless, Inc. Method and apparatus for session bandwidth estimation and rate control
US20130195457A1 (en) * 2012-01-30 2013-08-01 Broadlight, Ltd Method and system for performing distributed deep-packet inspection
US20130294449A1 (en) * 2012-05-03 2013-11-07 Lsi Corporation Efficient application recognition in network traffic
US20140198789A1 (en) * 2013-01-11 2014-07-17 Lsi Corporation Low latency in-line data compression for packet transmission systems
US20150163328A1 (en) * 2013-12-10 2015-06-11 Cisco Technology, Inc. Interactive Dynamic Ordering of Deep Packet Inspection Rules
US20170374082A1 (en) * 2016-06-22 2017-12-28 Cisco Technology, Inc. Dynamic packet inspection plan system
GB201821189D0 (en) * 2018-12-24 2019-02-06 British Telecomm Packet analysis and filtering

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120324123A1 (en) * 2011-06-15 2012-12-20 Ortiva Wireless, Inc. Method and apparatus for session bandwidth estimation and rate control
US20130195457A1 (en) * 2012-01-30 2013-08-01 Broadlight, Ltd Method and system for performing distributed deep-packet inspection
US20130294449A1 (en) * 2012-05-03 2013-11-07 Lsi Corporation Efficient application recognition in network traffic
US20140198789A1 (en) * 2013-01-11 2014-07-17 Lsi Corporation Low latency in-line data compression for packet transmission systems
US20150163328A1 (en) * 2013-12-10 2015-06-11 Cisco Technology, Inc. Interactive Dynamic Ordering of Deep Packet Inspection Rules
US20170374082A1 (en) * 2016-06-22 2017-12-28 Cisco Technology, Inc. Dynamic packet inspection plan system
GB201821189D0 (en) * 2018-12-24 2019-02-06 British Telecomm Packet analysis and filtering

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110868358A (zh) * 2019-10-16 2020-03-06 武汉绿色网络信息服务有限责任公司 一种基于应用识别自学习的数据包处理方法和装置
CN110868358B (zh) * 2019-10-16 2022-11-08 武汉绿色网络信息服务有限责任公司 一种基于应用识别自学习的数据包处理方法和装置
CN111562973B (zh) * 2020-04-24 2024-02-06 蘑菇车联信息科技有限公司 一种地图数据任务执行方法及电子设备
CN112511456A (zh) * 2020-12-21 2021-03-16 北京百度网讯科技有限公司 流量控制方法、装置、设备、存储介质和计算机程序产品
CN112511456B (zh) * 2020-12-21 2024-03-22 北京百度网讯科技有限公司 流量控制方法、装置、设备、存储介质和计算机程序产品

Also Published As

Publication number Publication date
CN110247858B (zh) 2022-11-18

Similar Documents

Publication Publication Date Title
CN110247858A (zh) 一种基于dpi的数据上传方法及系统
CN103299679B (zh) 准入控制方法及设备
CN103262597B (zh) 基于业务状况的调度请求触发方法及用户装置
CN103404102B (zh) 一种承载创建方法、装置和系统
CN112953848B (zh) 一种基于严格优先级的流量监管方法、系统及设备
CN111586120B (zh) 物联网网关设备、数据传输方法、存储介质及安装方法
CN103685072B (zh) 一种网络流量快速分配的方法
CN109698760A (zh) 一种流量处理方法和用户面装置以及终端设备
CN102891877B (zh) 实现终端应用的在线处理系统及方法
CN102142990B (zh) 业务用量监控方法及设备
CN102984077B (zh) 网络拥塞的控制方法及系统
CN102811176B (zh) 一种数据流量控制方法和装置
CN107306192A (zh) 一种业务数据传输方法、装置和系统
CN102316483B (zh) 一种EVDO系统中保证应用业务QoS的方法及装置
US20220053373A1 (en) Communication apparatus, communication method, and program
CN104468152A (zh) 一种网络传输方法和装置
CN113747102A (zh) 视频通话处理方法、装置、设备及存储介质
CN103167028A (zh) 节省传输带宽并能增大并发量的用户收敛方法
CN117076117A (zh) 一种基于新通信架构的媒体会场智能调度方法及系统
CN103747481A (zh) 一种网络拥塞提醒和接入控制方法及装置
CN109089281B (zh) 一种集群通信方法、终端设备及存储介质
CN105450480B (zh) 一种信息处理方法和装置
CN104780471B (zh) 一种全光交换网络边缘节点光分组数据组帧方法
CN206224223U (zh) 一种基于knx和mqtt协议的智能家居控制系统
CN110459046A (zh) 一种可靠油田仪表通信系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant