CN116701548A - 数据分类处理方法、装置、设备及存储介质 - Google Patents
数据分类处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN116701548A CN116701548A CN202310731798.6A CN202310731798A CN116701548A CN 116701548 A CN116701548 A CN 116701548A CN 202310731798 A CN202310731798 A CN 202310731798A CN 116701548 A CN116701548 A CN 116701548A
- Authority
- CN
- China
- Prior art keywords
- data classification
- field
- classification result
- result
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000001514 detection method Methods 0.000 claims abstract description 271
- 238000012545 processing Methods 0.000 claims abstract description 111
- 238000000034 method Methods 0.000 claims abstract description 52
- 238000012216 screening Methods 0.000 claims abstract description 36
- 230000002159 abnormal effect Effects 0.000 claims description 50
- 230000008569 process Effects 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 9
- 230000010365 information processing Effects 0.000 abstract description 3
- 238000004891 communication Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000003556 assay Methods 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 238000007619 statistical method Methods 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 229920001971 elastomer Polymers 0.000 description 2
- 239000000806 elastomer Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供的一种数据分类处理方法,涉及数据处理技术领域。该方法通过从数据库中获取原始数据信息;以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;将所述第三数据分类结果添加至数据库中。采用本技术方案,能够不使用脚本工具,并且能够对大数据量的数据信息进行分析,提高数据信息处理的效率。
Description
技术领域
本申请涉及数据处理技术领域,尤其涉及数据分类处理方法、装置、设备及存储介质。
背景技术
目前,银行内系统的业务众多,所需要处理的数据信息也很多。目前,业内并没有出现比较完善的多维度数据统计分析方法。一般需要做多维度数据统计时,往往通过一些脚本、手工Excel等方式实现,但是这种处理方式只关注到了某一时刻的数据,而无法对往期数据进行回溯,并且目前存在的脚本工具存在以下几点不足:只能做简单的数据统计分析,无法完成更加复杂的业务逻辑。在实际的使用场景中,数据的提取范围、检测规则、数据纬度都相对复杂,且会根据实际工作的需求对上述变量进行较大的调整;脚本化工具对大数据量的数据统计分析性能不佳,对千万级以上数据的分析时间往往很长;脚本化工具的操作复杂性高,使用脚本化工具,使用者需要具备一定的系统知识,对数据分析工具也要有一定的了解,脚本执行后,需要做大量的汇总工作。
因此,亟需一种数据分类处理方法,能够不使用脚本工具,并且能够对大数据量的数据信息进行分析,提高数据处理的效率。
发明内容
本申请提供一种数据分类处理方法、装置、设备及存储介质,能够不使用脚本工具,并且能够对大数据量的数据信息进行分析,提高数据处理的效率。
第一方面,本申请提供一种数据分类处理方法,所述方法包括:
从数据库中获取原始数据信息;其中,所述原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,所述原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;所述检测类型、所述批次、所述协议地址、部署单元和所述系统具备层级关系;所述系统包括多个部署单元;每一个所述部署单元包括多个协议地址;每一个所述协议地址包括多个批次;每一个所述批次包括多种检测类型;
以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;
以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;
以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;
将所述第三数据分类结果添加至数据库中;其中,所述数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
在一个示例中,所述以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果,包括:
以所述协议地址下预设批次的检测类型为初始筛选条件,从所述原始数据信息中获取所述协议地址下预设批次的检测类型的检测结果;
根据所述协议地址下预设批次的检测类型的检测结果,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果。
在一个示例中,所述根据所述协议地址下预设批次的检测类型的检测结果,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果,包括:
若所述协议地址下预设批次的检测类型的检测结果均为正常,则将所述检测结果分类至第一字段下,得到第一字段数据分类结果;
若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,则将所述检测结果分类至第二字段下,得到第二字段数据分类结果;
若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常,则将所述检测结果分类至第三字段下,得到第三字段数据分类结果;
将所述第一字段数据分类结果、所述第二字段数据分类结果和所述第三字段数据分类结果的集合确定为所述第一数据分类结果。
在一个示例中,所述若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,包括:
若所述协议地址下最后一个批次中存在一种检测类型的检测结果为异常,则所述协议地址下最后一个批次检测结果为异常。
在一个示例中,所述对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果,包括:
若所述第一数据分类结果中均为第一字段数据分类结果,则将所述第一字段数据分类结果分类至第四字段下,作为第四字段数据分类结果;
若所述第一数据分类结果中不均为第一字段数据分类结果,则将所述第一数据分类结果分类至第五字段下,作为第五字段数据分类结果;
将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
在一个示例中,所述对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果,包括:
若所述第二数据分类结果中均为第四字段数据分类结果,则将所述第四字段数据分类结果分类至第六字段下,作为第六字段数据分类结果;
若所述第二数据分类结果中不均为第四字段数据分类结果,则将所述第二数据分类结果分类至第七字段下,作为第七字段数据分类结果;
将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
在一个示例中,所述预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段;
其中,所述第一字段用于查询第一字段数据分类结果,所述第一字段数据分类结果表征协议地址下预设批次的检测类型的检测结果均为正常;
所述第二字段用于查询第二字段数据分类结果,所述第二字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为异常;
所述第三字段用于查询第三字段数据分类结果,所述第三字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常;
第四字段用于查询第四字段数据分类结果,所述第四字段数据分类结果表征第一数据分类结果中均为第一字段数据分类结果;
所述第五字段用于查询第五字段数据分类结果,所述第五字段数据分类结果表征第一数据分类结果中不均为第一字段数据分类结果;
所述第六字段用于查询第六字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中均为第四字段数据分类结果;
所述第七字段用于查询第七字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中不均为第四字段数据分类结果。
第二方面,本申请提供一种数据分类处理装置,包括:
获取单元,用于从数据库中获取原始数据信息;其中,所述原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,所述原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;所述检测类型、所述批次、所述协议地址、部署单元和所述系统具备层级关系;所述系统包括多个部署单元;每一个所述部署单元包括多个协议地址;每一个所述协议地址包括多个批次;每一个所述批次包括多种检测类型;
第一分类处理单元,用于以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;
第二分类处理单元,用于以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;
第三分类处理单元,用于以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;
添加单元,用于将所述第三数据分类结果添加至数据库中;其中,所述数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
在一个示例中,第一分类处理单元,包括:
获取模块,用于以所述协议地址下预设批次的检测类型为初始筛选条件,从所述原始数据信息中获取所述协议地址下预设批次的检测类型的检测结果;
第一分类处理模块,用于根据所述协议地址下预设批次的检测类型的检测结果,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果。
在一个示例中,第一分类处理模块,包括:
第一分类子模块,用于若所述协议地址下预设批次的检测类型的检测结果均为正常,则将所述检测结果分类至第一字段下,得到第一字段数据分类结果;
第二分类子模块,用于若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,则将所述检测结果分类至第二字段下,得到第二字段数据分类结果;
第三分类子模块,用于若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常,则将所述检测结果分类至第三字段下,得到第三字段数据分类结果;
确定子模块,用于将所述第一字段数据分类结果、所述第二字段数据分类结果和所述第三字段数据分类结果的集合确定为所述第一数据分类结果。
在一个示例中,所述若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,包括:
若所述协议地址下最后一个批次中存在一种检测类型的检测结果为异常,则所述协议地址下最后一个批次检测结果为异常。
在一个示例中,第二分类处理单元,包括:
第二分类处理模块,用于若所述第一数据分类结果中均为第一字段数据分类结果,则将所述第一字段数据分类结果分类至第四字段下,作为第四字段数据分类结果;
第三分类处理模块,用于若所述第一数据分类结果中不均为第一字段数据分类结果,则将所述第一数据分类结果分类至第五字段下,作为第五字段数据分类结果;
第一确定模块,用于将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
在一个示例中,第三分类处理单元,包括:
第四分类处理模块,用于若所述第二数据分类结果中均为第四字段数据分类结果,则将所述第四字段数据分类结果分类至第六字段下,作为第六字段数据分类结果;
第五分类处理模块,用于若所述第二数据分类结果中不均为第四字段数据分类结果,则将所述第二数据分类结果分类至第七字段下,作为第七字段数据分类结果;
第二确定模块,用于将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
在一个示例中,所述预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段;
其中,所述第一字段用于查询第一字段数据分类结果,所述第一字段数据分类结果表征协议地址下预设批次的检测类型的检测结果均为正常;
所述第二字段用于查询第二字段数据分类结果,所述第二字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为异常;
所述第三字段用于查询第三字段数据分类结果,所述第三字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常;
第四字段用于查询第四字段数据分类结果,所述第四字段数据分类结果表征第一数据分类结果中均为第一字段数据分类结果;
所述第五字段用于查询第五字段数据分类结果,所述第五字段数据分类结果表征第一数据分类结果中不均为第一字段数据分类结果;
所述第六字段用于查询第六字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中均为第四字段数据分类结果;
所述第七字段用于查询第七字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中不均为第四字段数据分类结果。
第三方面,本申请提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如第一方面所述的方法。
第四方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如第一方面所述的方法。
第五方面,本申请提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如第一方面所述的方法。
本申请提供的一种数据分类处理方法,通过从数据库中获取原始数据信息;以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;将所述第三数据分类结果添加至数据库中。采用本技术方案,能够不使用脚本工具,并且能够对大数据量的数据信息进行分析,提高数据信息处理的效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1是根据本申请实施例一提供的一种数据分类处理方法的流程示意图;
图2a是根据本申请实施例二提供的一种数据分类处理方法的流程示意图;
图2b是根据本申请实施例二提供的一种第一数据分类结果的过程示意图;
图2c是根据本申请实施例二提供的一种第二数据分类结果的过程示意图;
图2d是根据本申请实施例二提供的一种第三数据分类结果的过程示意图;
图3是根据本申请实施例三提供的一种数据分类处理装置的结构示意图;
图4是根据本申请实施例四提供的一种数据分类处理装置的结构示意图;
图5是根据一示例性实施例示出的一种电子设备的框图。
通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
本申请提供的一种数据分类处理方法、装置、设备及存储介质,旨在解决现有技术的如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
图1是根据本申请实施例一提供的一种数据分类处理方法的流程示意图。实施例一中包括如下步骤:
S101、从数据库中获取原始数据信息;其中,原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;检测类型、批次、协议地址、部署单元和系统具备层级关系;系统包括多个部署单元;每一个部署单元包括多个协议地址;每一个协议地址包括多个批次;每一个批次包括多种检测类型。
在一个示例中,数据库可以为Elastic Search数据库。Elastic Search数据库是位于Elastic Stack核心的分布式搜索和分析引擎。Elastic Search数据库为所有类型的数据提供近乎实时的搜索和分析。原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息,其中,运行结果信息中可以呈现出多种数据信息,包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;检测类型、批次、协议地址、部署单元和系统具备层级关系;系统包括多个部署单元;每一个部署单元包括多个协议地址;每一个协议地址包括多个批次;每一个批次包括多种检测类型。
本实施例中,检测类型可以为基础环境检测。
S102、以协议地址下预设批次的检测类型为初始筛选条件,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
在一个示例中,协议地址下预设批次的检测类型是指同一个IP下预设批次的检测类型。例如,同批次检测会有多条检测的原始数据,例如检测类型为基础环境检测,批次A中基础环境内存检测数据为检测成功,基础环境CPU检测数据为检测失败,基础环境磁盘存储检测数据为检测成功,那么以IP下的检测类型进行数据分析后,会得出基础环境检测失败,即该IP检测类型中某批次有检测失败数据,即认为该批次检测失败。
本实施例中,预设批次可以为3次。进一步地,通过协议地址下预设批次的检测类型为初始筛选条件,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
S103、以部署单元名称为第二次筛选条件,对第一数据分类结果进行数据分类处理,得到第二数据分类结果。
在一个示例中,部署单元包括多个协议地址,通过上一层级筛选数据信息后,得到第一数据分类结果,本实施例中,通过部署单元名称对第一数据分类结果进行数据分类处理,得到第二数据分类结果。进一步地,第二数据分类结果包括检测结果正常、检测结果异常或者检测结果异常已恢复。
S104、以系统名称为第三次筛选条件,对第二数据分类结果进行数据分类处理,得到第三数据分类结果。
在一个示例中,系统为部署单元的上一个层级,通过系统名称对第二数据分类结果进行筛选后,得到第三数据分类结果。进一步地,第三数据分类结果包括检测结果正常、检测结果异常或者检测结果异常已恢复,但是检测结果正常、检测结果异常或者检测结果异常已恢复这三种类型下的数据信息不同。
S105、将第三数据分类结果添加至数据库中;其中,数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
在一个示例中,将第三数据分类结果添加至数据库中,通过第三数据分类结果完成数据查询处理。在用户通过前端发送查询请求时,可以根据预设的字段进行数据查询处理。
本申请提供的一种数据分类处理方法,通过从数据库中获取原始数据信息;以协议地址下预设批次的检测类型为初始筛选条件,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果;以部署单元名称为第二次筛选条件,对第一数据分类结果进行数据分类处理,得到第二数据分类结果;以系统名称为第三次筛选条件,对第二数据分类结果进行数据分类处理,得到第三数据分类结果;将第三数据分类结果添加至数据库中。采用本技术方案,能够不使用脚本工具,并且能够对大数据量的数据信息进行分析,提高数据信息处理的效率。
图2a是根据本申请实施例二提供的一种数据分类处理方法的流程示意图。实施例二中包括如下步骤:
S201、从数据库中获取原始数据信息;其中,原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;检测类型、批次、协议地址、部署单元和系统具备层级关系;系统包括多个部署单元;每一个部署单元包括多个协议地址;每一个协议地址包括多个批次;每一个批次包括多种检测类型。
示例性地,本步骤可以参见上述步骤S101,不再赘述。
S202、以协议地址下预设批次的检测类型为初始筛选条件,从原始数据信息中获取协议地址下预设批次的检测类型的检测结果。
本实施例中,先是从原始数据信息中筛选出协议地址下的数据信息,然后再筛选该协议地址下预设批次的数据信息,然后再在协议地址下预设批次下筛选预设检测类型的检测结果。
S203、根据协议地址下预设批次的检测类型的检测结果,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
在一个示例中,根据协议地址下预设批次的检测类型的检测结果,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果,包括:
若协议地址下预设批次的检测类型的检测结果均为正常,则将检测结果分类至第一字段下,得到第一字段数据分类结果;
若协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,则将检测结果分类至第二字段下,得到第二字段数据分类结果;
若协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常,则将检测结果分类至第三字段下,得到第三字段数据分类结果;
将第一字段数据分类结果、第二字段数据分类结果和第三字段数据分类结果的集合确定为第一数据分类结果。
本实施例中,第一字段可以为IP索引为2,第二字段可以为IP索引为0,第三字段可以为IP索引为1。进一步地,检测结果的逻辑可以为如下内容:最近的三个批次检测中,若最近的检测结果异常,则检测结果为检测异常;若三次检测结果均正常,则检测结果为检测正常;若最近的检测结果正常,三次检测结果中有检测结果异常的情况,则本次检测结果为异常已恢复。若为检测结果正常,则将检测结果分类至2下;若为检测结果异常,则将检测结果分类至0下;若为检测结果异常已恢复,则将检测结果分类至1下。进一步地,第一数据分类结果中包括检测结果分类为0的情况,分为检测结果分类为1的情况,以及检测结果分类为2的情况。为了更好地说明,则可以参见图2b示出的一种第一数据分类结果的过程示意图。
在一个示例中,若协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,包括:
若协议地址下最后一个批次中存在一种检测类型的检测结果为异常,则协议地址下最后一个批次检测结果为异常。
在一个示例中,一个IP检测类型下同批次任意一个检测结果异常即认为该IP该批次检测类型异常。
S204、以部署单元名称为第二次筛选条件,对第一数据分类结果进行数据分类处理,得到第二数据分类结果。
在一个示例中,对第一数据分类结果进行数据分类处理,得到第二数据分类结果,包括:
若第一数据分类结果中均为第一字段数据分类结果,则将第一字段数据分类结果分类至第四字段下,作为第四字段数据分类结果;
若第一数据分类结果中不均为第一字段数据分类结果,则将第一数据分类结果分类至第五字段下,作为第五字段数据分类结果;
将第四字段数据分类结果和第五字段数据分类结果的集合确定为第二数据分类结果。
在一个示例中,一个系统下如果任意一个部署单元异常,即认为该系统异常;一个部署单元下任意一个IP检测类型异常即认为该部署单元异常;一个IP检测类型下同批次任意一个检测结果异常即认为该IP该批次检测类型异常。
在一个示例中,第四字段为部署单元索引为2,第五字段可以为部署单元索引为0。为了更好地说明,则可以参见图2c示出的一种第二数据分类结果的过程示意图。
S205、以系统名称为第三次筛选条件,对第二数据分类结果进行数据分类处理,得到第三数据分类结果。
在一个示例中,对第二数据分类结果进行数据分类处理,得到第三数据分类结果,包括:
若第二数据分类结果中均为第四字段数据分类结果,则将第四字段数据分类结果分类至第六字段下,作为第六字段数据分类结果;
若第二数据分类结果中不均为第四字段数据分类结果,则将第二数据分类结果分类至第七字段下,作为第七字段数据分类结果;
将第四字段数据分类结果和第五字段数据分类结果的集合确定为第二数据分类结果。
本实施例中,第六字段为系统索引为2,第七字段可以为系统索引为0。为了更好地说明,则可以参见图2d示出的一种第三数据分类结果的过程示意图。
S206、将第三数据分类结果添加至数据库中;其中,数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
在一个示例中,预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段;
其中,第一字段用于查询第一字段数据分类结果,第一字段数据分类结果表征协议地址下预设批次的检测类型的检测结果均为正常;
第二字段用于查询第二字段数据分类结果,第二字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为异常;
第三字段用于查询第三字段数据分类结果,第三字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常;
第四字段用于查询第四字段数据分类结果,第四字段数据分类结果表征第一数据分类结果中均为第一字段数据分类结果;
第五字段用于查询第五字段数据分类结果,第五字段数据分类结果表征第一数据分类结果中不均为第一字段数据分类结果;
第六字段用于查询第六字段数据分类结果,第七字段数据分类结果表征第二数据分类结果中均为第四字段数据分类结果;
第七字段用于查询第七字段数据分类结果,第七字段数据分类结果表征第二数据分类结果中不均为第四字段数据分类结果。
本实施例中,预设的字段存储在Elastic Search数据库中。具体的,第一数据分类结果得到sum索引,第二数据分类结果得到unit索引,第三数据分类结果得到system索引。其中,sum索引其他字段数据则从原始数据信息获取,unit索引其他字段数据则从sum数据获取,system索引其他字段数据则从sum数据获取。
本申请提供的一种数据分类处理方法,通过预设的字段完成数据查询处理,其中,预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段。采用本技术方案,能够应对海量服务器中海量数据的聚合统计分析需求。
图3是根据本申请实施例三提供的一种数据分类处理装置的结构示意图。具体的,实施例三的装置30中包括:
获取单元301,用于从数据库中获取原始数据信息;其中,原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;检测类型、批次、协议地址、部署单元和系统具备层级关系;系统包括多个部署单元;每一个部署单元包括多个协议地址;每一个协议地址包括多个批次;每一个批次包括多种检测类型。
第一分类处理单元302,用于以协议地址下预设批次的检测类型为初始筛选条件,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
第二分类处理单元303,用于以部署单元名称为第二次筛选条件,对第一数据分类结果进行数据分类处理,得到第二数据分类结果。
第三分类处理单元304,用于以系统名称为第三次筛选条件,对第二数据分类结果进行数据分类处理,得到第三数据分类结果。
添加单元305,用于将第三数据分类结果添加至数据库中;其中,数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
图4是根据本申请实施例四提供的一种数据分类处理装置的结构示意图。具体的,实施例四的装置40中包括:
获取单元401,用于从数据库中获取原始数据信息;其中,原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;检测类型、批次、协议地址、部署单元和系统具备层级关系;系统包括多个部署单元;每一个部署单元包括多个协议地址;每一个协议地址包括多个批次;每一个批次包括多种检测类型。
第一分类处理单元402,用于以协议地址下预设批次的检测类型为初始筛选条件,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
第二分类处理单元403,用于以部署单元名称为第二次筛选条件,对第一数据分类结果进行数据分类处理,得到第二数据分类结果。
第三分类处理单元404,用于以系统名称为第三次筛选条件,对第二数据分类结果进行数据分类处理,得到第三数据分类结果。
添加单元405,用于将第三数据分类结果添加至数据库中;其中,数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
在一个示例中,第一分类处理单元402,包括:
获取模块4021,用于以协议地址下预设批次的检测类型为初始筛选条件,从原始数据信息中获取协议地址下预设批次的检测类型的检测结果。
第一分类处理模块4022,用于根据协议地址下预设批次的检测类型的检测结果,对原始数据信息中的检测结果进行数据分类处理,得到第一数据分类结果。
在一个示例中,第一分类处理模块4022,包括:
第一分类子模块40221,用于若协议地址下预设批次的检测类型的检测结果均为正常,则将检测结果分类至第一字段下,得到第一字段数据分类结果。
第二分类子模块40222,用于若协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,则将检测结果分类至第二字段下,得到第二字段数据分类结果。
第三分类子模块40223,用于若协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常,则将检测结果分类至第三字段下,得到第三字段数据分类结果。
确定子模块40224,用于将第一字段数据分类结果、第二字段数据分类结果和第三字段数据分类结果的集合确定为第一数据分类结果。
在一个示例中,若协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,包括:
若协议地址下最后一个批次中存在一种检测类型的检测结果为异常,则协议地址下最后一个批次检测结果为异常。
在一个示例中,第二分类处理单元403,包括:
第二分类处理模块4031,用于若第一数据分类结果中均为第一字段数据分类结果,则将第一字段数据分类结果分类至第四字段下,作为第四字段数据分类结果。
第三分类处理模块4032,用于若第一数据分类结果中不均为第一字段数据分类结果,则将第一数据分类结果分类至第五字段下,作为第五字段数据分类结果。
第一确定模块4033,用于将第四字段数据分类结果和第五字段数据分类结果的集合确定为第二数据分类结果。
在一个示例中,第三分类处理单元404,包括:
第四分类处理模块4041,用于若第二数据分类结果中均为第四字段数据分类结果,则将第四字段数据分类结果分类至第六字段下,作为第六字段数据分类结果。
第五分类处理模块4042,用于若第二数据分类结果中不均为第四字段数据分类结果,则将第二数据分类结果分类至第七字段下,作为第七字段数据分类结果。
第二确定模块4043,用于将第四字段数据分类结果和第五字段数据分类结果的集合确定为第二数据分类结果。
在一个示例中,预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段;
其中,第一字段用于查询第一字段数据分类结果,第一字段数据分类结果表征协议地址下预设批次的检测类型的检测结果均为正常;
第二字段用于查询第二字段数据分类结果,第二字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为异常;
第三字段用于查询第三字段数据分类结果,第三字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常;
第四字段用于查询第四字段数据分类结果,第四字段数据分类结果表征第一数据分类结果中均为第一字段数据分类结果;
第五字段用于查询第五字段数据分类结果,第五字段数据分类结果表征第一数据分类结果中不均为第一字段数据分类结果;
第六字段用于查询第六字段数据分类结果,第七字段数据分类结果表征第二数据分类结果中均为第四字段数据分类结果;
第七字段用于查询第七字段数据分类结果,第七字段数据分类结果表征第二数据分类结果中不均为第四字段数据分类结果。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
图5是根据一示例性实施例示出的一种电子设备的框图,该设备可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
装置500可以包括以下一个或多个组件:处理组件502,存储器504,电源组件506,多媒体组件508,音频组件510,输入/输出(I/O)接口512,传感器组件514,以及通信组件516。
处理组件502通常控制装置500的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理组件502可以包括多媒体模块,以方便多媒体组件508和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在装置500的操作。这些数据的示例包括用于在装置500上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件506为装置500的各种组件提供电力。电源组件506可以包括电源管理系统,一个或多个电源,及其他与为装置500生成、管理和分配电力相关联的组件。
多媒体组件508包括在装置500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件508包括一个前置摄像头和/或后置摄像头。当装置500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当装置500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
I/O接口512为处理组件502和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为装置500提供各个方面的状态评估。例如,传感器组件514可以检测到装置500的打开/关闭状态,组件的相对定位,例如所述组件为装置500的显示器和小键盘,传感器组件514还可以检测装置500或装置500一个组件的位置改变,用户与装置500接触的存在或不存在,装置500方位或加速/减速和装置500的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件516被配置为便于装置500和其他设备之间有线或无线方式的通信。装置500可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器504,上述指令可由装置500的处理器520执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当该存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行上述电子设备的一种数据分类处理方法。
本申请还公开了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如本实施例中所述的一种数据分类处理方法。
本申请以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本申请的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或电子设备上执行。
在本申请的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据电子设备)、或者包括中间件部件的计算系统(例如,应用电子设备)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和电子设备。客户端和电子设备一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-电子设备关系的计算机程序来产生客户端和电子设备的关系。电子设备可以是云电子设备,又称为云计算电子设备或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务("Virtual Private Server",或简称"VPS")中,存在的管理难度大,业务扩展性弱的缺陷。电子设备也可以为分布式系统的电子设备,或者是结合了区块链的电子设备。应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本申请公开的技术方案所期望的结果,本文在此不进行限制。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。
Claims (11)
1.一种数据分类处理方法,其特征在于,所述方法包括:
从数据库中获取原始数据信息;其中,所述原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,所述原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;所述检测类型、所述批次、所述协议地址、部署单元和所述系统具备层级关系;所述系统包括多个部署单元;每一个所述部署单元包括多个协议地址;每一个所述协议地址包括多个批次;每一个所述批次包括多种检测类型;
以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;
以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;
以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;
将所述第三数据分类结果添加至数据库中;其中,所述数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
2.根据权利要求1所述的方法,其特征在于,所述以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果,包括:
以所述协议地址下预设批次的检测类型为初始筛选条件,从所述原始数据信息中获取所述协议地址下预设批次的检测类型的检测结果;
根据所述协议地址下预设批次的检测类型的检测结果,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果。
3.根据权利要求2所述的方法,其特征在于,所述根据所述协议地址下预设批次的检测类型的检测结果,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果,包括:
若所述协议地址下预设批次的检测类型的检测结果均为正常,则将所述检测结果分类至第一字段下,得到第一字段数据分类结果;
若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,则将所述检测结果分类至第二字段下,得到第二字段数据分类结果;
若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常,则将所述检测结果分类至第三字段下,得到第三字段数据分类结果;
将所述第一字段数据分类结果、所述第二字段数据分类结果和所述第三字段数据分类结果的集合确定为所述第一数据分类结果。
4.根据权利要求3所述的方法,其特征在于,所述若所述协议地址下预设批次的检测类型中最后一个批次的检测结果为异常,包括:
若所述协议地址下最后一个批次中存在一种检测类型的检测结果为异常,则所述协议地址下最后一个批次检测结果为异常。
5.根据权利要求3所述的方法,其特征在于,所述对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果,包括:
若所述第一数据分类结果中均为第一字段数据分类结果,则将所述第一字段数据分类结果分类至第四字段下,作为第四字段数据分类结果;
若所述第一数据分类结果中不均为第一字段数据分类结果,则将所述第一数据分类结果分类至第五字段下,作为第五字段数据分类结果;
将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
6.根据权利要求5所述的方法,其特征在于,所述对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果,包括:
若所述第二数据分类结果中均为第四字段数据分类结果,则将所述第四字段数据分类结果分类至第六字段下,作为第六字段数据分类结果;
若所述第二数据分类结果中不均为第四字段数据分类结果,则将所述第二数据分类结果分类至第七字段下,作为第七字段数据分类结果;
将所述第四字段数据分类结果和所述第五字段数据分类结果的集合确定为所述第二数据分类结果。
7.根据权利要求1-6中任一项所述的方法,其特征在于,所述预设的字段包括:第一字段、第二字段、第三字段、第四字段、第五字段、第六字段和第七字段;
其中,所述第一字段用于查询第一字段数据分类结果,所述第一字段数据分类结果表征协议地址下预设批次的检测类型的检测结果均为正常;
所述第二字段用于查询第二字段数据分类结果,所述第二字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为异常;
所述第三字段用于查询第三字段数据分类结果,所述第三字段数据分类结果表征协议地址下预设批次的检测类型中最后一个批次的检测结果为正常,但是存在至少一个批次的检测结果为异常;
第四字段用于查询第四字段数据分类结果,所述第四字段数据分类结果表征第一数据分类结果中均为第一字段数据分类结果;
所述第五字段用于查询第五字段数据分类结果,所述第五字段数据分类结果表征第一数据分类结果中不均为第一字段数据分类结果;
所述第六字段用于查询第六字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中均为第四字段数据分类结果;
所述第七字段用于查询第七字段数据分类结果,所述第七字段数据分类结果表征第二数据分类结果中不均为第四字段数据分类结果。
8.一种数据分类处理装置,其特征在于,所述装置包括:
获取单元,用于从数据库中获取原始数据信息;其中,所述原始数据信息表征同一个检测环境下系统运行过程中所生成的运行结果信息;其中,所述原始数据信息中包括:检测类型、批次、协议地址、部署单元名称、系统名称和检测结果;所述检测类型、所述批次、所述协议地址、部署单元和所述系统具备层级关系;所述系统包括多个部署单元;每一个所述部署单元包括多个协议地址;每一个所述协议地址包括多个批次;每一个所述批次包括多种检测类型;
第一分类处理单元,用于以所述协议地址下预设批次的检测类型为初始筛选条件,对所述原始数据信息中的所述检测结果进行数据分类处理,得到第一数据分类结果;
第二分类处理单元,用于以所述部署单元名称为第二次筛选条件,对所述第一数据分类结果进行数据分类处理,得到第二数据分类结果;
第三分类处理单元,用于以所述系统名称为第三次筛选条件,对所述第二数据分类结果进行数据分类处理,得到第三数据分类结果;
添加单元,用于将所述第三数据分类结果添加至数据库中;其中,所述数据库中的第三数据分类结果用于根据预设的字段完成数据查询处理。
9.一种电子设备,其特征在于,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现如权利要求1-7中任一项所述的方法。
11.一种计算机程序产品,其特征在于,包括计算机程序,该计算机程序被处理器执行时实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310731798.6A CN116701548A (zh) | 2023-06-19 | 2023-06-19 | 数据分类处理方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310731798.6A CN116701548A (zh) | 2023-06-19 | 2023-06-19 | 数据分类处理方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116701548A true CN116701548A (zh) | 2023-09-05 |
Family
ID=87825413
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310731798.6A Pending CN116701548A (zh) | 2023-06-19 | 2023-06-19 | 数据分类处理方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116701548A (zh) |
-
2023
- 2023-06-19 CN CN202310731798.6A patent/CN116701548A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110941942B (zh) | 电路原理图检查方法、装置及系统 | |
US20200012701A1 (en) | Method and apparatus for recommending associated user based on interactions with multimedia processes | |
CN111046040A (zh) | 确定索引的方法、装置、电子设备及存储介质 | |
CN116069612A (zh) | 一种异常定位方法、装置和电子设备 | |
CN112256563A (zh) | 安卓应用稳定性测试方法、装置、电子设备及存储介质 | |
CN110020082B (zh) | 一种搜索方法及装置 | |
CN112333233B (zh) | 事件信息的上报方法、装置、电子设备及存储介质 | |
CN112883073B (zh) | 数据筛选方法、装置、设备、可读存储介质以及产品 | |
CN116701548A (zh) | 数据分类处理方法、装置、设备及存储介质 | |
CN110502484B (zh) | 在移动终端显示文件信息的方法、装置及介质 | |
CN111724398A (zh) | 一种图像显示方法及装置 | |
CN111611470A (zh) | 一种数据处理方法、装置和电子设备 | |
CN110119471B (zh) | 一种搜索结果一致性的检查方法及装置 | |
CN113965476B (zh) | 基于应用的巡检方法、装置和设备 | |
CN116562999A (zh) | 金融制品资产类别确定方法、设备及存储介质 | |
CN118193603A (zh) | 标签管理方法、装置、终端及存储介质 | |
CN117472931A (zh) | 数据库执行语句的调用方法、装置、设备及存储介质 | |
CN116600011A (zh) | 数据信息获取方法、装置、设备及存储介质 | |
CN111818019B (zh) | 网络劫持数据或网络劫持的确定方法、装置、设备及介质 | |
CN112732098B (zh) | 一种输入的方法及相关装置 | |
CN110020244B (zh) | 一种对网址信息进行纠错的方法及装置 | |
CN118283203A (zh) | 录像数据的补录方法、装置、电子设备及存储介质 | |
CN113987247A (zh) | 训练数据搜索方法及装置、电子设备和存储介质 | |
CN116820984A (zh) | 性能场景测试方法、装置、设备及存储介质 | |
CN118245522A (zh) | 数据处理方法、装置、终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |