CN108108253A - 一种面向多数据流的异常状态检测方法 - Google Patents
一种面向多数据流的异常状态检测方法 Download PDFInfo
- Publication number
- CN108108253A CN108108253A CN201711434818.4A CN201711434818A CN108108253A CN 108108253 A CN108108253 A CN 108108253A CN 201711434818 A CN201711434818 A CN 201711434818A CN 108108253 A CN108108253 A CN 108108253A
- Authority
- CN
- China
- Prior art keywords
- mrow
- data
- msub
- data stream
- outlier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000002159 abnormal effect Effects 0.000 title claims abstract description 32
- 238000001514 detection method Methods 0.000 title claims abstract description 21
- 238000000034 method Methods 0.000 claims abstract description 17
- 238000004364 calculation method Methods 0.000 claims description 10
- 238000012544 monitoring process Methods 0.000 claims description 7
- 238000013139 quantization Methods 0.000 claims description 3
- 238000013450 outlier detection Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 238000011031 large-scale manufacturing process Methods 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 206010000117 Abnormal behaviour Diseases 0.000 description 1
- ZAMOUSCENKQFHK-UHFFFAOYSA-N Chlorine atom Chemical compound [Cl] ZAMOUSCENKQFHK-UHFFFAOYSA-N 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 229910052801 chlorine Inorganic materials 0.000 description 1
- 239000000460 chlorine Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/006—Identification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Testing And Monitoring For Control Systems (AREA)
Abstract
本发明提供的一种面向多数据流的异常状态检测方法，可以实时高效的检测出各个数据流在各个时刻的状态变化。该方法包括以下步骤：1对多数据流数据参数进行收集；2对检测算法进行初始化；3在单数据流滑动窗口中查找当前时刻到达的数据对象的k邻域集合并计算其局部离群系数；4更新各个数据流当前数据对象的邻域对象的局部离群系数；5计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值；6计算基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值；7计算各数据流当前的离群系数；8判定当前时刻各数据流的异常状态；9更新数据流的滑动窗口数据集和数据快照集。
Description
技术领域
本发明涉及一种面向多数据流的异常状态检测方法，属于计算机科学技术领域。
背景技术
随着社会信息化程度和数据采集自动化程度的不断提高，许多的应用领域出现了海量的、连续到达的、快速的数据流。数据流中的离群点所蕴含的挖掘价值受到了研究者和工业界广泛的关注。作为一种基础且重要的数据挖掘手段，基于数据流的离群检测已经成为一个研究热点，并取得了一系列的研究成果。目前数据流的离群检测广泛应用于网络安全、信用卡欺诈、工业损检等。传统的数据流离群检测技术主要是针对单数据流，而多数据流的离群检测技术还较少。随着各种自动化生产规模的不断扩大和传感器技术的不断发展，由大规模系统监测产生的多数据流异常监测的应用越来越广泛，如大规模机群系统的稳定性管理，大规模科学观察、网络日志分析和安全监控系统等。
在多数据流中查找出现的异常行为是异常检测需要处理的问题。在多数据流管理系统中，各条数据流之间往往并非完全独立，而是存在相关性的。比如对于同一水源的供水网络，在正常情况下在各个用户的出水口氯浓度相似。而大规模的机群系统各个节点共同支撑着系统的各种分布式存储与计算，同时各个节点的物理配置和负载量也往往相似。因此对于相互关联的数据流来说，一旦发现它们之间的相关性被破坏，则可断定在这些数据流中存在有异常情况。同时对于独立的单数据流，由于自身就是一个连续的变化过程，因此各个时刻的数据存在着自身的关联性。因此对于独立的单数据流，当它自身的关联性被破坏的时候，则可以判定该数据流发生异常情况。另外，对于多数据流系统，它们的历史状态信息对当前时刻状态的判断具有重要的参考价值，充分考虑历史时刻的状态信息将提高算法的准确性。但是现有的多数据流离群检测算法主要是通过监测多数据流间的相关性来检测异常，而忽略单数据流自身的关联性和历史数据的状态信息的参考价值。因此，本发明综合考虑多数据流之间的相关性，单数据流内部的关联性和各个数据流数据的历史状态信息，利用基于滑动窗口和基于数据快照的离群检测技术，研究一种基于多数据流的异常检测方法。
发明内容
本发明提供一种面向多数据流的异常状态检测方法，同时考虑多数据流之间的相关性和单数据流内部的关联性，并综合参考历史数据的离群信息来量化各个数据流的离群值。对于单数据流，采用基于滑动窗口模型对当前的数据信息进行离群量化，并通过结合指数衰减函数来表示窗口中历史数据的离群信息对当前异常状态判定的参考价值。对于多数据流，采用基于数据快照模型对当前的各个数据流数据进行离群量化，并通过指数衰减函数来表示各个数据流在历史的快照数据集中的离群信息对当前状态判定的参考价值。
具体来说，本发明提供了一种面向多数据流的异常状态检测方法，该方法包括：
步骤1，对多数据流数据参数进行收集；
步骤2，对检测算法进行初始化；
步骤3，在单数据流滑动窗口中查找当前时刻到达的数据对象的k邻域集合并计算其局部离群系数；
步骤4，更新各个数据流当前数据对象的邻域对象的局部离群系数；
步骤5，计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值；
步骤6，计算基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值；
步骤7，计算各数据流当前的离群系数；
步骤8，判定当前时刻各数据流的异常状态；
步骤9，更新数据流的滑动窗口数据集和数据快照集。
其中，步骤1的对多数据流数据参数进行收集包括：
步骤11，为每一个数据流生成一个基于滑动窗口的正常数据集；
步骤12，生成一个基于各个时刻的多数据流数据快照集。
其中，步骤2的对检测算法进行初始化包括：
步骤21，为了保证后续到达的数据对象的可对比对象都是正常的数据对象，对于任意一个数据流Sj(0<j<n)，首先取X(w<X<2w)个时刻的数据进行局部离群量化计算，并计算各个时刻各个数据流的离群系数，然后从w到X中选取最近的该数据流处于正常状态的w个数据对象做为初始的滑动窗口w为滑动窗口的大小，n为数据流的数量；
步骤22，从w到X中选取最近的w个数据快照做为初始的数据快照集St＝[S(t-w),S(t -w+1),…,S(t)]，在每一个数据快照中计算各个数据对象的局部离群系数[Ij(t-w),Ij(t-w+1),…,Ijt](0<j<n)，w为滑动窗口的大小，n为数据流的数量。
其中，步骤4的更新各个数据流当前数据对象的邻域对象的局部离群系数可表示为：
对于任一数据流当前的数据对象sjt的任意一个邻域对象的局部离群系数k表示邻域搜索氛围的大小，和表示对象当前时刻和前一个时刻的离群系数。
其中，步骤5的计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值pjt可表示为：
λ1是控制滑动窗口中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
其中，步骤6的计算基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值Qjt可表示为：
λ2是控制数据快照集中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
其中，步骤7的计算各数据流当前的离群系数Njt可表示为：
Njt＝(1-δ)Pjt+δQjt(0≤δ≤1)
δ是表示各个数据流之间相关性的大小。
其中，步骤9的更新数据流的滑动窗口数据集和数据快照集包括：
步骤91，如果数据流Sj(1<j<n)当前时刻处于正常状态，用当前时刻的监测参数sjt替换中最早时刻的参数值sj(t-w-1)，否则保存滑动窗口的数据集不变；
步骤92，用当前时刻的数据快照S(t)替换数据快照集St-1中最早的数据快照S(t -w-1)。
本发明的有益功效在于：本发明面向多数据流的异常状态检测，根据局部离群系数和数据流异常检测的特性研究一种实时的异常状态检测方法。该方法充分利用单数据流自身的相关性和多数据流之间的关联性，可以实时高效的检测出各个数据流在各个时刻的状态变化。可以促进各种大规模生产管理的自动化和智能化，具有重要的理论意义和应用价值。
附图说明
图1是本发明的多数据流异常状态检测结构图。
图2是本发明的一种面向多数据流的异常状态检测方法的流程图。
具体实施方式
为使本发明的目的、技术方案和优点表达得更加清楚明白，下面结合附图及具体实施例对本发明再作进一步详细的说明。
对于n个数据流S＝[S1,S2,…,Sn]，当前时刻t的数据快照S(t)＝[s1t,s2t,…,snt]，各个数据流中基于时间窗口的数据集其中w为时间窗口的大小。本发明的主要思想是充分的利用单数据流自身的相关性和多数据流之间的关联性来判断各个数据流当前时刻的异常状态的变化情况。该方法得到的各个数据流的离群系数的变化可以准确的反应各个数据流的异常状态的变化，可以有效的应用到各种大规模生产管理系统的实时异常检测。
下面以n个数据流S＝[S1,S2,…,Sn]及其任意一个时刻t的异常状态检测分别详细说明每一步骤：
步骤1，对n个数据流S＝[S1,S2,…,Sn]数据参数进行收集；
步骤11，对各个数据流数据进行单独收集，为每一个数据流生成一个基于滑动窗口的数据集其中w为滑动窗口的大小；
步骤12，对多数据流数据进行收集生成一个基于各个时刻的多数据流数据快照集St＝[S(t-w),S(t-w+1),…,S(t)]，其中S(t)＝[s1t,s2t,…,snt]，w为滑动窗口的大小。
步骤2，对检测算法进行初始化；
步骤21，为了保证后续到达的数据对象的可对比对象都是正常的数据对象，对于任意一个数据流Sj(0<j<n)，首先取X(w<X<2w)个时刻的数据进行局部离群量化计算，并计算各个时刻各个数据流的离群系数，然后从w到X中选取最近的该数据流处于正常状态的w个数据对象做为初始的滑动窗口w为滑动窗口的大小，n为数据流的数量；
步骤22，从w到X中选取最近的w个数据快照做为初始的数据快照集St＝[S(t-w),S(t -w+1),…,S(t)]，在每一个数据快照中计算各个数据对象的局部离群系数[Ij(t-w),Ij(t-w+1),…,Ijt](0<j<n)，w为滑动窗口的大小，n为数据流的数量。
步骤3，对于任意一个数据流Sj(1<j<n)，从滑动窗口中查找当前时刻到达的数据对象sjt的k邻域集合并计算其局部离群系数Ijt；
步骤4，对于任意一个数据流Sj(1<j<n)，更新当前数据对象sjt的k邻域对象的局部离群系数
其中，步骤4的更新各个数据流当前数据对象的邻域对象的局部离群系数可表示为：
对于任一数据流当前的数据对象sjt的任意一个邻域对象的局部离群系数k表示邻域搜索氛围的大小，和表示对象当前时刻和前一个时刻的离群系数。
步骤5，对于任意一个数据流Sj(1<j<n)，计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值Pjt；
进一步的，其中，计算Pjt可表示为：
λ1是控制滑动窗口中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
步骤6，对于任意一个数据流Sj(1<j<n)，计算当前时刻sjt在数据快照S(t)中的离群系数Jjt，并量化基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值Qjt；
进一步的，其中，计算Qjt可表示为：
λ2是控制数据快照集中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
步骤7，计算各数据流当前的离群系数Njt；
进一步的，其中，计算Njt可表示为：
Njt＝(1-δ)Pjt+δQjt(0≤δ≤1)
其中δ是表示各个数据流之间相关性的大小。
步骤8，判定当前时刻各数据流的异常状态；
步骤9，更新数据流的滑动窗口数据集和数据快照集。
步骤91，如果数据流Sj(1<j<n)当前时刻处于正常状态，用当前时刻的监测参数sjt替换中最早时刻的参数值sj(t-w-1)，否则保存滑动窗口的数据集不变；
步骤92，用当前时刻的数据快照S(t)替换数据快照集St-1中最早的数据快照S(t -w-1)。
当然，本发明还可有其它多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明做出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (8)
1.一种面向多数据流的异常状态检测方法，其特征在于，包括以下步骤：
步骤1，对多数据流数据参数进行收集；
步骤2，对检测算法进行初始化；
步骤3，在单数据流滑动窗口中查找当前时刻到达的数据对象的k邻域集合并计算其局部离群系数；
步骤4，更新各个数据流当前数据对象的邻域对象的局部离群系数；
步骤5，计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值；
步骤6，计算基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值；
步骤7，计算各数据流当前的离群系数；
步骤8，判定当前时刻各数据流的异常状态；
步骤9，更新数据流的滑动窗口数据集和数据快照集。
2.根据权利要求1所述的方法，其中，步骤1的对多数据流数据参数进行收集包括：
步骤11，为每一个数据流生成一个基于滑动窗口的正常数据集；
步骤12，生成一个基于各个时刻的多数据流数据快照集。
3.根据权利要求1所述的方法，其中，步骤2的对检测算法进行初始化包括：
步骤21，为了保证后续到达的数据对象的可对比对象都是正常的数据对象，对于任意一个数据流Sj(0<j<n)，首先取X(w<X<2w)个时刻的数据进行局部离群量化计算，并计算各个时刻各个数据流的离群系数，然后从w到X中选取最近的该数据流处于正常状态的w个数据对象做为初始的滑动窗口w为滑动窗口的大小，n为数据流的数量；
步骤22，从w到X中选取最近的w个数据快照做为初始的数据快照集St＝[S(t-w),S(t -w+1),…,S(t)]，在每一个数据快照中计算各个数据对象的局部离群系数[Ij(t-w),Ij(t-w+1),…,Ijt](0<j<n)，w为滑动窗口的大小，n为数据流的数量。
4.根据权利要求1所述的方法，其中，步骤4的更新各个数据流当前数据对象的邻域对象的局部离群系数可表示为：
对于任一数据流当前的数据对象sjt的任意一个邻域对象的局部离群系数k表示邻域搜索氛围的大小，和表示对象当前时刻和前一个时刻的离群系数。
5.根据权利要求1所述的方法，其中，步骤5的计算基于单数据流的离群信息对数据流当前时刻异常状态判断的参考价值pjt可表示为：
<mrow>
<msub>
<mi>p</mi>
<mrow>
<mi>j</mi>
<mi>t</mi>
</mrow>
</msub>
<mo>=</mo>
<msub>
<mi>I</mi>
<mrow>
<mi>j</mi>
<mi>t</mi>
</mrow>
</msub>
<mo>+</mo>
<msub>
<mi>I</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<msub>
<mi>&lambda;</mi>
<mn>1</mn>
</msub>
</mrow>
</msup>
<mo>+</mo>
<msub>
<mi>I</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mn>2</mn>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<mn>2</mn>
<msub>
<mi>&lambda;</mi>
<mn>1</mn>
</msub>
</mrow>
</msup>
<mo>...</mo>
<mo>+</mo>
<msub>
<mi>I</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mi>w</mi>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<msub>
<mi>w&lambda;</mi>
<mn>1</mn>
</msub>
</mrow>
</msup>
</mrow>
λ1是控制滑动窗口中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
6.根据权利要求1所述的方法，其中，步骤6的计算基于数据快照的多数据流离群信息对数据流当前时刻异常状态判断的参考价值Qjt可表示为：
<mrow>
<msub>
<mi>Q</mi>
<mrow>
<mi>j</mi>
<mi>t</mi>
</mrow>
</msub>
<mo>=</mo>
<msub>
<mi>J</mi>
<mrow>
<mi>j</mi>
<mi>t</mi>
</mrow>
</msub>
<mo>+</mo>
<msub>
<mi>J</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<msub>
<mi>&lambda;</mi>
<mn>2</mn>
</msub>
</mrow>
</msup>
<mo>+</mo>
<msub>
<mi>J</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mn>2</mn>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<mn>2</mn>
<msub>
<mi>&lambda;</mi>
<mn>2</mn>
</msub>
</mrow>
</msup>
<mn>...</mn>
<mo>+</mo>
<msub>
<mi>J</mi>
<mrow>
<mi>j</mi>
<mrow>
<mo>(</mo>
<mrow>
<mi>t</mi>
<mo>-</mo>
<mi>w</mi>
</mrow>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msup>
<mi>e</mi>
<mrow>
<mo>-</mo>
<msub>
<mi>w&lambda;</mi>
<mn>2</mn>
</msub>
</mrow>
</msup>
</mrow>
λ2是控制数据快照集中历史数据离群信息对当前时刻状态判断的参考价值随时间的推移衰减速度的快慢。
7.根据权利要求1所述的方法，其中，步骤7的计算各数据流当前的离群系数Njt可表示为：
Njt＝(1-δ)Pjt+δQjt(0≤δ≤1)
δ是表示各个数据流之间相关性的大小。
8.根据权利要求1所述的方法，其中，步骤9的更新数据流的滑动窗口数据集包括：
步骤91，如果数据流Sj(1<j<n)当前时刻处于正常状态，用当前时刻的监测参数sjt替换中最早时刻的参数值sj(t-w-1)，否则保存滑动窗口的数据集不变；
步骤92，用当前时刻的数据快照S(t)替换数据快照集St-1中最早的数据快照S(t-w-1)。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711434818.4A CN108108253A (zh) | 2017-12-26 | 2017-12-26 | 一种面向多数据流的异常状态检测方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711434818.4A CN108108253A (zh) | 2017-12-26 | 2017-12-26 | 一种面向多数据流的异常状态检测方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108108253A true CN108108253A (zh) | 2018-06-01 |
Family
ID=62211662
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711434818.4A Pending CN108108253A (zh) | 2017-12-26 | 2017-12-26 | 一种面向多数据流的异常状态检测方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108108253A (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109214355A (zh) * | 2018-09-29 | 2019-01-15 | 西安交通大学 | 一种基于核估计lof的机械监测数据异常段检测方法 |
| CN109727446A (zh) * | 2019-01-15 | 2019-05-07 | 华北电力大学（保定） | 一种用电数据异常值的识别与处理方法 |
| CN110058977A (zh) * | 2019-01-14 | 2019-07-26 | 阿里巴巴集团控股有限公司 | 基于流式处理的监控指标异常检测方法、装置及设备 |
| CN110086860A (zh) * | 2019-04-19 | 2019-08-02 | 武汉大学 | 一种物联网大数据环境下的数据异常检测方法及装置 |
| CN112101969A (zh) * | 2020-09-27 | 2020-12-18 | 西安交通大学 | 一种基于时序滑动窗口离散系数的环保数据造假检测方法 |
| CN112711541A (zh) * | 2021-01-20 | 2021-04-27 | 广西师范大学 | 基于数据流局部离群因子的无监督软件老化检测方法 |
| CN117650995A (zh) * | 2023-11-28 | 2024-03-05 | 佛山科学技术学院 | 一种基于离群检测的数据传输异常识别方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104123448A (zh) * | 2014-07-14 | 2014-10-29 | 南京理工大学 | 基于上下文的多数据流异常检测方法 |
| CN105844102A (zh) * | 2016-03-25 | 2016-08-10 | 中国农业大学 | 一种自适应无参空间离群点检测算法 |
| CN106338981A (zh) * | 2016-09-23 | 2017-01-18 | 沈阳化工大学 | 动态多向局部离群因子算法的间歇过程在线故障检测方法 |
| US20170206466A1 (en) * | 2016-01-20 | 2017-07-20 | Fair Isaac Corporation | Real Time Autonomous Archetype Outlier Analytics |
-
2017
- 2017-12-26 CN CN201711434818.4A patent/CN108108253A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104123448A (zh) * | 2014-07-14 | 2014-10-29 | 南京理工大学 | 基于上下文的多数据流异常检测方法 |
| US20170206466A1 (en) * | 2016-01-20 | 2017-07-20 | Fair Isaac Corporation | Real Time Autonomous Archetype Outlier Analytics |
| CN105844102A (zh) * | 2016-03-25 | 2016-08-10 | 中国农业大学 | 一种自适应无参空间离群点检测算法 |
| CN106338981A (zh) * | 2016-09-23 | 2017-01-18 | 沈阳化工大学 | 动态多向局部离群因子算法的间歇过程在线故障检测方法 |
Non-Patent Citations (2)
| Title |
|---|
| SHUBIN SU等: ""N2DLOF: A New Local Density-Based Outlier"", 《2017 IEEE 19TH INTERNATIONAL CONFERENCE ON HIGH PERFORMANCE COMPUTING AND COMMUNICATIONS; IEEE 15TH INTERNATIONAL》 * |
| 魏中贺等: ""一种基于密度的数据流检测算法SWKLoF"", 《科学技术与工程》 * |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109214355A (zh) * | 2018-09-29 | 2019-01-15 | 西安交通大学 | 一种基于核估计lof的机械监测数据异常段检测方法 |
| CN110058977A (zh) * | 2019-01-14 | 2019-07-26 | 阿里巴巴集团控股有限公司 | 基于流式处理的监控指标异常检测方法、装置及设备 |
| CN110058977B (zh) * | 2019-01-14 | 2020-08-14 | 阿里巴巴集团控股有限公司 | 基于流式处理的监控指标异常检测方法、装置及设备 |
| CN109727446A (zh) * | 2019-01-15 | 2019-05-07 | 华北电力大学（保定） | 一种用电数据异常值的识别与处理方法 |
| CN110086860A (zh) * | 2019-04-19 | 2019-08-02 | 武汉大学 | 一种物联网大数据环境下的数据异常检测方法及装置 |
| CN112101969A (zh) * | 2020-09-27 | 2020-12-18 | 西安交通大学 | 一种基于时序滑动窗口离散系数的环保数据造假检测方法 |
| CN112101969B (zh) * | 2020-09-27 | 2024-04-02 | 西安交通大学 | 一种基于时序滑动窗口离散系数的环保数据造假检测方法 |
| CN112711541A (zh) * | 2021-01-20 | 2021-04-27 | 广西师范大学 | 基于数据流局部离群因子的无监督软件老化检测方法 |
| CN112711541B (zh) * | 2021-01-20 | 2023-07-18 | 广西师范大学 | 基于数据流局部离群因子的无监督软件老化检测方法 |
| CN117650995A (zh) * | 2023-11-28 | 2024-03-05 | 佛山科学技术学院 | 一种基于离群检测的数据传输异常识别方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108108253A (zh) | 一种面向多数据流的异常状态检测方法 | |
| Choi et al. | Deep learning for anomaly detection in time-series data: Review, analysis, and guidelines | |
| CN108038044A (zh) | 一种面向连续被监测对象的异常检测方法 | |
| CN104166787B (zh) | 一种基于多阶段信息融合的航空发动机剩余寿命预测方法 | |
| CN110895526A (zh) | 一种大气监测系统中数据异常的修正方法 | |
| Qi et al. | Phase II monitoring of generalized linear profiles using weighted likelihood ratio charts | |
| CN107480440A (zh) | 一种基于两阶段随机退化建模的剩余寿命预测方法 | |
| CN104914723B (zh) | 基于协同训练偏最小二乘模型的工业过程软测量建模方法 | |
| JP6723439B2 (ja) | 複数のデータストリームにリアルタイムアナリティクスを実行する方法及びシステム | |
| CN110008508B (zh) | 基于时空条件动态建模的三维温度场监测方法 | |
| Niaki et al. | A particle swarm optimization approach on economic and economic-statistical designs of MEWMA control charts | |
| CN106845447A (zh) | 一种工作面瓦斯浓度预测预警方法 | |
| US20150012255A1 (en) | Clustering based continuous performance prediction and monitoring for semiconductor manufacturing processes using nonparametric bayesian models | |
| CN110851422A (zh) | 一种基于机器学习的数据异常监测模型构建方法 | |
| CN107642347A (zh) | 页岩气压裂井下事故预测预警方法及装置 | |
| CN107122520A (zh) | 一种基于时空动态耦合的三维温度传感数据分析方法 | |
| CN114881167A (zh) | 异常检测方法、装置、电子设备和介质 | |
| CN106971058A (zh) | 一种泵站运行监控数据异常点检测方法 | |
| CN105675320A (zh) | 一种基于声学信号分析的机械系统运行状态实时监控方法 | |
| CN105718733B (zh) | 基于模糊贴近度和粒子滤波的故障预报方法 | |
| CN112308338A (zh) | 电力数据处理方法及装置 | |
| CN106778252A (zh) | 基于粗糙集理论与waode算法的入侵检测方法 | |
| CN107480647B (zh) | 基于归纳式一致性异常检测的异常行为实时检测方法 | |
| Li et al. | Remaining useful life prediction of bearings using a trend memory attention-based GRU network | |
| CN117743429A (zh) | 一种工业互联网数据采集系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180601 |