CN106445772B - 一种多数据关联分析方法及系统 - Google Patents
一种多数据关联分析方法及系统 Download PDFInfo
- Publication number
- CN106445772B CN106445772B CN201510496228.9A CN201510496228A CN106445772B CN 106445772 B CN106445772 B CN 106445772B CN 201510496228 A CN201510496228 A CN 201510496228A CN 106445772 B CN106445772 B CN 106445772B
- Authority
- CN
- China
- Prior art keywords
- data
- group
- module
- nth
- display threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012097 association analysis method Methods 0.000 title claims abstract description 12
- 238000012216 screening Methods 0.000 claims abstract description 20
- 230000000737 periodic effect Effects 0.000 claims abstract description 17
- 238000001914 filtration Methods 0.000 claims abstract description 11
- 238000004458 analytical method Methods 0.000 claims description 12
- 238000000034 method Methods 0.000 claims description 9
- 238000012098 association analyses Methods 0.000 claims description 7
- 238000010219 correlation analysis Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Images
Landscapes
- Debugging And Monitoring (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种多数据关联分析方法，包括步骤：S1，获取第一组数据；S2，将S1中获取得到的第一组数据按周期性时间顺序排列，得到第一数据分布图；S3，调整所述第一组数据的显示阈值，滤除所述第一组数据中的无用数据，得到第一数据筛选结果图；S4，获取第二组数据；S5，将S4中获取得到的第二组数据按所述周期性时间顺序排列，并叠加于所述第一数据筛选结果图，得到双数据叠加图；S6，调整所述第二组数据的显示阈值，滤除所述第二组数据中的无用数据，得到叠加数据筛选结果图。通过本发明可以快速建立运行数据的关联，整体分析IT运行系统的运行状态，非常直观的看到系统运行数据之间的关联性。
Description
技术领域
本发明涉及IT运行管理领域，尤其涉及一种多数据关联分析方法及系统。
背景技术
在IT系统运行管理中，每天都会有大量的系统运行数据，但针对于大量的运行数据逐项去汇总分析会耗费大量人力和时间，而且由于是数据都是独立汇总分析，所以很难发现各数据之间的相关性，当系统出现问题时很难找出故障原因，在IT系统运行中也很难发现系统的薄弱点无法提前预防和减少故障的出现。
发明内容
本发明的目的在于提供一种多数据关联分析方法及系统，从而解决现有技术中存在的前述问题。
为了实现上述目的，本发明采用的技术方案如下：
一种多数据关联分析方法，包括以下步骤：
S1，获取第一组数据；
S2，将S1中获取得到的第一组数据按周期性时间顺序排列，得到第一数据分布图；
S3，调整所述第一组数据的显示阈值，滤除所述第一组数据中的无用数据，得到第一数据筛选结果图；
S4，获取第二组数据；
S5，将S4中获取得到的第二组数据按所述周期性时间顺序排列，并叠加于所述第一数据筛选结果图，得到双数据叠加图；
S6，调整所述第二组数据的显示阈值，滤除所述第二组数据中的无用数据，得到叠加数据筛选结果图。
优选的，S6后还包括：
S7，获取第N组数据；其中N为大于2的自然数；
S8，将S7中获取得到的第N组数据按所述周期性时间顺序排列，并叠加于所述双数据叠加图，得到多数据叠加图；
S9，调整第N组数据的显示阈值，滤除所述第N组数据中的无用数据，得到新的数据筛选结果图。
优选的，还包括如下步骤：
将得到数据筛选结果图中的数据重叠区块突出显示，形成最终分析结果。
优选的，所述数据重叠区块是包含二个以上数据的区块。
优选的，所述第一组数据是指定时间区间内的各时间点的CPU负载值，所述第二组数据是所述指定时间区间内的各时间点的IO等待时间值。
优选的，所述第N组数据是所述指定时间区间内的各时间点的指定数据值。
一种多数据关联分析系统，包括数据获取模块、数据排列模块、数据显示阈值调整模块和叠加显示模块；
所述数据获取模块，用于获取第一组数据、第二组数据；
所述数据排列模块，用于按周期性时间顺序排列所述第一组数据、所述第二组数据；
所述数据显示阈值调整模块，用于调整所述第一组数据、所述第二组数据的显示阈值；
所述叠加显示模块，用于叠加显示所述第一组数据、所述第二组数据。
优选的，
所述数据获取模块，还用于获取第N组数据；
所述数据排列模块，还用于按周期性时间顺序排列所述第N组数据；
所述数据显示阈值调整模块，还用于调整所述第N组数据的显示阈值；
所述叠加显示模块，还用于叠加显示所述第N组数据。
优选的，还包括突出显示模块，所述突出显示模块用于突出显示数据重叠区块。
优选的，所述数据重叠区块是包含二个以上数据的区块。
本发明的有益效果是：
通过使用本发明的多数据关联分析方法及系统，可以快速建立运行数据的关联，整体分析IT运行系统的运行状态，非常直观的看到系统运行数据之间的关联性，通过数据之间的关联就可以很容易发现系统的薄弱点，从而可以提前对薄弱点进行加强和修补，防止故障发生。
附图说明
图1是一周的CPU负载数据图；
图2是调整中的CPU负载数据图；
图3是滤掉了CPU负载较低的时间段的CPU负载数据图；
图4是叠加有IO等待指标值和CPU负载值的叠加分析图；
图5是滤掉了IO等待指标较短的时间段的最终关联分析结果图；
图6是本发明的方法步骤流程图。
具体实施方式
为了使本发明所解决的技术问题、技术方案及有益效果更加清楚明白，以下结合附图，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不用于限定本发明。
一种多数据关联分析方法，其特征在于包括以下步骤：
S1，获取第一组数据；
S2，将S1中获取得到的第一组数据按周期性时间顺序排列，得到第一数据分布图；
S3，调整所述第一组数据的显示阈值，滤除所述第一组数据中的无用数据，得到第一数据筛选结果图；
S4，获取第二组数据；
S5，将S4中获取得到的第二组数据按所述周期性时间顺序排列，并叠加于所述第一数据筛选结果图，得到双数据叠加图；
S6，调整所述第二组数据的显示阈值，滤除所述第二组数据中的无用数据，得到叠加数据筛选结果图。
当然，本发明的多数据关联分析方法不仅可以处理两种数据，依照以上方法能够无限叠加分析以及跨域关联分析，如性能与事件等；以下以第N组数据来代表后续叠加的其他组数据。
S6后还包括以下步骤：
S7，获取第N组数据；其中N为大于2的自然数；
S8，将S7中获取得到的第N组数据按所述周期性时间顺序排列，并叠加于所述双数据叠加图，得到多数据叠加图；
S9，调整第N组数据的显示阈值，滤除所述第N组数据中的无用数据，得到新的数据筛选结果图。
还包括如下步骤：
将得到数据筛选结果图中的数据重叠区块突出显示，形成最终分析结果；之所以突出显示，主要是为了更直观的看到叠加的数据，另外在突出显示的区块上还可以悬浮显示重叠的多个数据值；所述多个数据值可以同时显示也可以交替轮流显示。
所述数据重叠区块是包含二个以上数据的区块。所述第一组数据是指定时间区间内的各时间点的CPU负载值，所述第二组数据是所述指定时间区间内的各时间点的IO等待时间值。所述第N组数据是所述指定时间区间内的各时间点的指定数据值。
一种多数据关联分析系统，包括数据获取模块、数据排列模块、数据显示阈值调整模块和叠加显示模块；所述数据获取模块，用于获取第一组数据、第二组数据；所述数据排列模块，用于按周期性时间顺序排列所述第一组数据、所述第二组数据；所述数据显示阈值调整模块，用于调整所述第一组数据、所述第二组数据的显示阈值；所述叠加显示模块，用于叠加显示所述第一组数据、所述第二组数据。所述数据获取模块，还用于获取第N组数据；所述数据排列模块，还用于按周期性时间顺序排列所述第N组数据；所述数据显示阈值调整模块，还用于调整所述第N组数据的显示阈值；所述叠加显示模块，还用于叠加显示所述第N组数据。还包括突出显示模块，所述突出显示模块用于突出显示数据重叠区块。所述数据重叠区块是包含二个以上数据的区块。
以下为按本发明的多数据关联分析方法对CPU负载和IO等待时间进行关联分析的实例：
首先如图1所示，取出一周的CPU负载数据，提取一周的分时数据(周一到周五，每天24小时)并进行展现；在图1中，通过颜色区分，很容易发现CPU负载偏高的时间段，以及具体的CPU负载率。
然后如图2所示，拖动色块进行快速筛选，通过拖动色标块，调整显示阈值，可以快速筛选CPU负载偏高的分布情况；同时也过滤掉了我们不关心的CPU负载较低的时间段；
如图3所示，筛选后负载较高的清晰可见，我们通过把低值选择块移动到80，可以轻松观察这些情况出现的规律，如在周几，在那些时间段等。
下面进行IO情况的叠加分析，
接收到进行叠加分析指令后，将获取对应时间段的IO等待指标数据并显示在叠加分析图上，如图4所示。
在IO叠加分析图上，高CPU负载带有C标签，在图上，我们可以看到前面高CPU负载的对应时间段中，都附有C字样的标签，可以一目了然地知道IO等待指标的分布情况和CPU负载较高的分布情况。移动鼠标到对应时间段内，可以看到对应时间段上CPU的负载值和IO等待指标值。
接下来，进一步筛选IO较高的时间段，同样移动高值或低值选择块，调整显示阈值，就能快速筛选IO等待指标较长的分布情况；同时也过滤掉了我们不关心的IO等待指标较短的时间段，如图5所示，就形成了最终的关联分析结果图，从而就能轻松掌握CPU负载及IO等待指标较长的时间分布情况及关联情况，为了使显示更突出，此时可以使叠加区块高亮显示。随后就可以针对分析结果图所展示出来的问题进行有针对性的解决。
同理，本发明的多数据关联分析方法能够处理无限叠加分析以及跨域关联分析，如性能与事件等。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。
Claims (6)
1.一种多数据关联分析方法，其特征在于包括以下步骤：
S1，获取第一组数据；
S2，将S1中获取得到的第一组数据按周期性时间顺序排列，得到第一数据分布图；
S3，调整所述第一组数据的显示阈值，滤除所述第一组数据中的无用数据，得到第一数据筛选结果图；
S4，获取第二组数据；
S5，将S4中获取得到的第二组数据按所述周期性时间顺序排列，并叠加于所述第一数据筛选结果图，得到双数据叠加图；
S6，调整所述第二组数据的显示阈值，滤除所述第二组数据中的无用数据，得到叠加数据筛选结果图；
S7，获取第N组数据；其中N为大于2的自然数；
S8，将S7中获取得到的第N组数据按所述周期性时间顺序排列，并叠加于所述双数据叠加图，得到多数据叠加图；
S9，调整第N组数据的显示阈值，滤除所述第N组数据中的无用数据，得到新的数据筛选结果图；
将得到数据筛选结果图中的数据重叠区块突出显示，形成最终分析结果；
所述第一组数据是指定时间区间内的各时间点的CPU负载值，所述第二组数据是所述指定时间区间内的各时间点的IO等待时间值；
所述第N组数据是所述指定时间区间内的各时间点的指定数据值。
2.根据权利要求1所述的多数据关联分析方法，其特征在于，所述数据重叠区块是包含二个以上数据的区块。
3.一种多数据关联分析系统，该系统用于实现权利要求1-2任一所述方法，其特征在于，包括数据获取模块、数据排列模块、数据显示阈值调整模块和叠加显示模块；
所述数据获取模块，用于获取第一组数据、第二组数据；
所述数据排列模块，用于按周期性时间顺序排列所述第一组数据、所述第二组数据；
所述数据显示阈值调整模块，用于调整所述第一组数据、所述第二组数据的显示阈值；
所述叠加显示模块，用于叠加显示所述第一组数据、所述第二组数据。
4.根据权利要求3所述的多数据关联分析系统，其特征在于，
所述数据获取模块，还用于获取第N组数据；
所述数据排列模块，还用于按周期性时间顺序排列所述第N组数据；
所述数据显示阈值调整模块，还用于调整所述第N组数据的显示阈值；
所述叠加显示模块，还用于叠加显示所述第N组数据。
5.根据权利要求3或4任一所述的多数据关联分析系统，其特征在于，还包括突出显示模块，所述突出显示模块用于突出显示数据重叠区块。
6.根据权利要求5所述的多数据关联分析系统，其特征在于，所述数据重叠区块是包含二个以上数据的区块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510496228.9A CN106445772B (zh) | 2015-08-13 | 2015-08-13 | 一种多数据关联分析方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510496228.9A CN106445772B (zh) | 2015-08-13 | 2015-08-13 | 一种多数据关联分析方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106445772A CN106445772A (zh) | 2017-02-22 |
| CN106445772B true CN106445772B (zh) | 2020-04-24 |
Family
ID=58093856
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510496228.9A Active CN106445772B (zh) | 2015-08-13 | 2015-08-13 | 一种多数据关联分析方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106445772B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107301113A (zh) * | 2017-05-26 | 2017-10-27 | 北京小度信息科技有限公司 | 任务监控方法及装置 |
| CN110514982B (zh) | 2019-08-22 | 2022-03-22 | 上海兆芯集成电路有限公司 | 性能分析系统与方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7072773B2 (en) * | 2002-05-31 | 2006-07-04 | Waters Investments Limited | Method of using data binning in the analysis of chromatography/spectrometry data |
| CN101216798A (zh) * | 2008-01-14 | 2008-07-09 | 浙江大学 | 一种基于看门狗和定时器的周期任务可靠性的监控方法 |
| CN103745291A (zh) * | 2013-11-12 | 2014-04-23 | 国家电网公司 | 基于用电特性的多目标有序用电排序方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8745633B2 (en) * | 2010-05-11 | 2014-06-03 | Lsi Corporation | System and method for managing resources in a partitioned computing system based on resource usage volatility |
-
2015
- 2015-08-13 CN CN201510496228.9A patent/CN106445772B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7072773B2 (en) * | 2002-05-31 | 2006-07-04 | Waters Investments Limited | Method of using data binning in the analysis of chromatography/spectrometry data |
| CN101216798A (zh) * | 2008-01-14 | 2008-07-09 | 浙江大学 | 一种基于看门狗和定时器的周期任务可靠性的监控方法 |
| CN103745291A (zh) * | 2013-11-12 | 2014-04-23 | 国家电网公司 | 基于用电特性的多目标有序用电排序方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106445772A (zh) | 2017-02-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE112015003769B4 (de) | Anzeigen von anzeigebezogenem always-on-inhalt | |
| DE102014213556B4 (de) | Tracking-Unterstützungsvorrichtung, Tracking-Unterstützungssystem und Tracking-Unterstützungsverfahren | |
| CN104348667B (zh) | 基于告警信息的故障定位方法 | |
| US9305383B2 (en) | Chart layout which highlights event occurrence patterns | |
| AU2011352414B2 (en) | Inference engine for video analytics metadata-based event detection and forensic search | |
| DE102016108197A1 (de) | Verfahren und Vorrichtung zur Ermittlung der Fehlerursachen von Alarmmustern in Prozessleitsystemen | |
| US20160117059A1 (en) | User Interface for Fleet Management | |
| CN106445772B (zh) | 一种多数据关联分析方法及系统 | |
| DE112013005195T5 (de) | Verfahren und Vorrichtung zur Auswahl eines Videoanalyse-Algorithmus, basierend auf historischen Ereignisdaten | |
| WO2013081835A3 (en) | Temporal visualization of query results | |
| CN104504200A (zh) | 一种用于旋转机械在线振动监测的趋势曲线图显示方法 | |
| CN111460611A (zh) | 水环境污染分析方法、装置、设备及存储介质 | |
| CN104965501A (zh) | 一种生产车间智能管理系统 | |
| MX2013011648A (es) | Aparato y metodo de especificacion y seleccion de componentes utilizando interfaz de seleccion tipo de grafico inteligente. | |
| CN107064159A (zh) | 一种依据植物黄叶检测判断生长趋势的装置及系统 | |
| CN110490077A (zh) | 一种智能违章识别方法和系统 | |
| WO2015154428A1 (zh) | 网管告警显示方法和装置 | |
| CN110928942A (zh) | 指标数据监控管理方法及装置 | |
| CN110958422B (zh) | 一种在可见光图像中展示红外检测信息的方法和设备 | |
| CN104700532A (zh) | 一种视频报警方法和装置 | |
| CN103699845B (zh) | 显示扫描进度的方法及装置 | |
| Sundermier et al. | Applying waveform correlation to aftershock sequences using a global sparse network | |
| CN101621672B (zh) | 一种视频清晰度分析方法及装置 | |
| CN104461838B (zh) | 一种数据监控方法及设备 | |
| Harden et al. | What Causes Faint Solar Coronal Jets from Emerging Flux Regions in Coronal Holes? |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20231228 Address after: Room 1203, 12th Floor, Building A2, No.10 Kegu 1st Street, Daxing District, Beijing, 100176 Patentee after: Beijing Bigger Big Data Operations Co.,Ltd. Address before: Room 610, Building A, No. 4 Xizhao Temple Middle Street, Chongwen District, Beijing, 100061 Patentee before: BEIJING HENGAN YONGTONG TECHNOLOGY Co.,Ltd. |