CN116909811A - 一种数据分析处理方法、装置、电子设备及存储介质 - Google Patents
一种数据分析处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116909811A CN116909811A CN202310837582.8A CN202310837582A CN116909811A CN 116909811 A CN116909811 A CN 116909811A CN 202310837582 A CN202310837582 A CN 202310837582A CN 116909811 A CN116909811 A CN 116909811A
- Authority
- CN
- China
- Prior art keywords
- index
- data analysis
- value
- data
- target index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007405 data analysis Methods 0.000 title claims abstract description 141
- 238000003672 processing method Methods 0.000 title claims abstract description 28
- 238000000034 method Methods 0.000 claims abstract description 59
- 238000012545 processing Methods 0.000 claims abstract description 29
- 230000008569 process Effects 0.000 claims abstract description 23
- 238000004458 analytical method Methods 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 13
- 230000002159 abnormal effect Effects 0.000 claims description 10
- 238000012216 screening Methods 0.000 claims description 7
- 238000004140 cleaning Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000011156 evaluation Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000009286 beneficial effect Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000012372 quality testing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1479—Generic software techniques for error detection or fault masking
- G06F11/1487—Generic software techniques for error detection or fault masking using N-version programming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Computer Hardware Design (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开一种数据分析处理方法、装置、电子设备及存储介质,属于数据处理技术领域,该方法包括:根据用户的数据分析指令确定本次数据分析的目标指标;根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值;根据关联基础指标的值确定目标指标的值;以及根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果。本发明实施例能够以较低代码的方案进行数据分析处理,可以缓解服务器以及数据库的压力。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种数据分析处理方法、装置、电子设备及存储介质。
背景技术
现有技术对数据进行分析处理时,例如,对区域政务数据进行处理的时候,由于数据量较大,分析指标较多,会对数据库以及服务器的造成较大的压力,可能会出现数据库或者服务器响应故障,从而导致对数据的分析和处理进行得不及时,影响正常业务,并在数据出现异常时不能对异常数据进行处理。
发明内容
本发明实施例提供一种数据分析处理方法、装置、电子设备及存储介质,能够以较低代码的方案进行数据分析处理,可以缓解服务器以及数据库的压力。
第一方面,本发明实施例提供一种数据分析处理方法,包括:
根据用户的数据分析指令确定本次数据分析的目标指标;
根据所述目标指标确定与所述目标指标关联的关联基础指标,并基于预先创建的基础指标库获取所述关联基础指标的值;所述基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于所述采集数据统计表计算每个基础指标的值的第一确定方法;
根据所述关联基础指标的值确定所述目标指标的值;以及
根据与所述目标指标对应的数据分析规则对所述目标指标的值进行分析得到本次数据分析结果。
第二方面,本发明实施例提供一种数据分析处理装置,包括:目标指标确定模块,用于根据用户的数据分析指令确定目标指标;
关联基础指标值获取模块,用于根据所述目标指标确定与所述目标指标关联的关联基础指标,并基于预先创建的基础指标库获取所述关联基础指标的值;所述基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于所述采集数据统计表计算每个基础指标的值的确定方法;
目标指标值确定模块,用于根据所述关联基础指标的值确定所述目标指标的值;以及
分析模块,用于根据与所述目标指标对应的数据分析规则对所述目标指标的值进行分析得到本次数据分析结果。
第三方面,本发明实施例还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如本发明实施例中任一所述的数据分析处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例中任一所述的数据分析处理方法。
本发明提供的一种数据分析处理方法、装置、电子设备及存储介质,通过利用预先创建的包括基础指标确定方法的基础指标库确定关联基础指标的值,并进一步根据关联基础指标的值确定本次分析的目标指标的值,最后再根据对应的数据分析规则对目标指标的值进行分析,使得数据分析处理的过程被拆解为多个步骤,能够以较低代码的方案对数据进行分析处理,有利于缓解服务器以及数据库的压力,从而及时对数据进行分析和处理,避免对正常业务产生影响,并对异常数据进行及时处理。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1是本发明实施例提供的数据分析处理方法的一个流程示意图;
图2是本发明实施例提供的数据分析处理方法的另一个流程示意图;
图3是本发明实施例提供的数据分析处理方法的另一个流程示意图;
图4是本发明实施例提供的数据分析处理装置的一个结构示意图;
图5是本发明实施例提供的电子设备的一个结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
图1为本发明实施例提供的数据分析处理方法的一个流程示意图,该方法可以由本发明实施例提供的数据分析处理装置来执行,该装置可采用软件和/或硬件的方式实现。在一个具体的实施例中,该装置可以集成在电子设备中,电子设备比如可以是计算机、服务器等。以下实施例将以该装置集成在电子设备中为例进行说明。参考图1,该方法具体可以包括如下步骤:
步骤101,根据用户的数据分析指令确定本次数据分析的目标指标,能够利于根据本次数据分析的目标指标确定关联基础指标及关联基础指标的值。
具体的,上述用户的数据分析指令可以是用户在需要进行数据分析的时候手动发出的数据分析指令,也可以根据用户设定的发送周期,每隔预定时长自动发出的自动发出的数据分析指令,还可以是根据用户设定的指令发送阈值,在相关数据表中的预选字段的数据超出阈值并触发自动发送数据分析指令机制后,自动发送的数据分析指令。
具体的,上述本次数据分析的目标指标,可以是预设的多个目标中的一个或多个目标指标。例如分析政务办理数据时的“政务评价得分”等指标。
步骤102,根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值;基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于采集数据统计表计算每个基础指标的值的第一确定方法,能够利于根据关联基础指标的值确定得到目标指标的值,进而利于对目标指标的值进行分析得到分析结果。
具体的,本申请数据分析处理方法应用于政务办理数据分析处理时,上述基础指标例如可以是:“办件量”、“在线办理率”、“一次通办率”“即时办理率”以及“满意率”等指标中的一个或者多个。
在本发明的可选具体实施例中,上述基于采集数据统计表利用与关联基础指标对应的第一确定方法确定关联基础指标的值的过程包括:根据预设的筛选条件对采集数据统计表中预选字段范围内的值进行筛选得到本次分析相关数据;以及利用预设的计算方法对本次分析相关数据进行计算得到关联基础指标的值。
具体的,上述预设的计算方法可以是统计数量、累加求和、求平均值等计算方法。
在本发明的可选具体实例中,从采集数据统计表中的“工单编码”对应的字段中,按照筛选条件为“办件时间是2022年,地区为预先地区”筛选后,采用统计数量的计算方法得到2022年全部的办件量的值。
在本发明的可选具体实施例中,上述根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值的过程包括:根据目标指标从预先创建的目标指标库中获取与目标指标关联的关联基础指标;以及基于采集数据统计表利用与关联基础指标对应的第一确定方法确定关联基础指标的值。
在本发明的可选具体实施例中,上述预先创建的目标指标库包括根据数据分析需求确定的多个数据分析目标指标,与每个数据分析目标指标关联的基础指标,以及基于与每个数据分析目标指标关联的基础指标的值,确定每个数据分析目标指标的第二确定方法。
具体的,上述目标库中的数据分析目标可以包括“政务评价得分”、“一次通办率”等。
具体的,上述与目标库中的每个数据分析目标指标关联的基础指标,可以是一个基础指标也可以是多个基础指标。例如,当上述数据分析目标指标为“在线办理率”时,其只与“在线办理率”这一个基础指标关联,当上述数据分析目标指标为“政务评价得分”时,其关联的基础指标可以包括“在线办理率”、“一次通办率”、“即时办理率”以及“满意率”。
具体的,上述第二确定方法可以包括把多个基础指标的值进行标准化,基于百分制形成分数。
在本发明的可选具体实施例中,上述预先创建的目标指标库还可以包括利用每个数据分析目标指标的对应第二确定方法以及关联基础指标,搭建得到每个数据分析目标指标的分析模型。
步骤103,根据关联基础指标的值确定目标指标的值,能够利于对目标指标的值进行分析得到分析结果。
在本发明的可选具体实施例中,上述根据关联基础指标的值确定目标指标的值的过程包括:基于关联基础指标的值,利用与目标指标对应的第二确定方法确定目标指标的值。
具体例如,对于目标指标“政务评价得分”,可以对与其关联的关联基础指标“在线办理率”、“一次通办率”、“即时办理率”以及“满意率”的值,基于百分制进行加权求和,得到“政务评价得分”的值。
在本发明的可选具体实施例中,上述根据关联基础指标的值确定目标指标的值的过程包括:将关联基础指标的值确定为目标指标的值。
具体例如,对于目标指标“在线办理率”,直接将与其关联的关联基础指标“在线办理率”的值确定为目标指标“在线办理率”的值。
在本发明的可选具体实施例中,上述根据关联基础指标的值确定目标指标的值的过程包括,基于每个数据分析目标指标的分析模型,利用对应的关联基础指标的值计算得到对应的目标指标的值。
步骤104,根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果。这样就能够在步骤102-103的基础上将数据分析处理的过程被拆解为多个步骤,能够以较低代码的方案对数据进行分析处理,有利于缓解服务器以及数据库的压力,从而及时对数据进行分析和处理,避免对正常业务产生影响,并对异常数据进行及时处理。
在本发明的可选具体实施例中,上述根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果的过程包括:对目标指标的值是否属于预设的标准范围进行判断,若属于则将本次数据分析结果输出为正常,否则将本次数据分析结果输出为异常。
具体例如,若一个地区的“政务评价得分”不小于60分,则将该地区的“政务评价得分”的数据分析结果数输出为正常,若小于60份,则将该地区的“政务评价得分”的数据结果输出为异常。
在本发明的可选具体实施例中,上述根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果的过程包括:对目标指标的值按照从大到小的顺序进行排序。
具体例如,对多个地区“政务评价得分”的值按照从大到小的顺序进行排序,并将排序结果输出作为本次数据分析结果。
下面进一步介绍另一实施例中的数据分析处理方法,前述采集数据统计表由如图2所示的获取方法获取,具体包括:
步骤201,根据数据分析需求,对不同业务系统中存储的采集数据进行抽取、汇聚、质检以及清洗转换得到多个合规采集数据表。
具体的,上述不同业务系统可以是同一单位的不同业务系统,也可以是不同单位的业务系统。
具体的,对上述采集数据进行抽取的方式可以包括增量抽取的方式和/或全量抽取的方式。
具体的,也可以对不同业务系统中存储的采集数据进行主动推送,之后进行汇聚、之间以及清洗转换。
具体的,对上述采集数据进行推送的方式可以包括增量推送的方式和/或全量推送的方式。
可选的,上述对采集数据进行质检的过程包括:对上述采集数据中不符合预设规范的数据进行检查。
可选的,上述对采集数据进行清洗转换的过程包括:对上述采集数据中不符合预设规范的数据进行删除。
可选的,上述对采集数据进行清洗转换的过程包括:对上述采集数据中前述数据分析需求中不涉及的数据进行删除。
可选的,上述对采集数据进行清洗转换的过程包括:将上述采集数据中的数据空值替换为有效数据或者进行删除。
步骤202,将多个合规采集数据表进行合并得到采集数据统计表。
具体的,可以将不同业务数据场景的数据表,根据关联字段进行合表映射,得出一张可以进行统计分析的宽表。
本发明实施例能够利于后续基于采集数据统计表计算每个基础指标的值,进一步利于计算本次数据分析的目标指标的值,进而进行数据分析得到本次数据分析结果。
下面进一步介绍另一实施例中的数据分析处理方法,如图3所示,可以包括如下步骤:
步骤301,根据用户的数据分析指令确定本次数据分析的目标指标。
步骤302,根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值;基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于采集数据统计表计算每个基础指标的值的第一确定方法。
步骤303,根据关联基础指标的值确定目标指标的值。
步骤304,根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果。
步骤305,根据本次数据分析结果对相关人员进行相应提示。
在本发明的可选具体实施例中,上述根据本次数据分析结果对相关人员进行相应提示的过程包括:创建提示任务处理流程并利用提示任务流程向相关人员发送本次提示信息,或者利用预先创建的提示任务处理流程向相关人员发送本次提示信息。
本次提示信息包括本次提示的目的,本次提示所涉及的数据以及与本次提示所涉及的数据对应的标准数据。
具体的,上述提示任务处理流程可以包括该流程的起点、处理节点以及重点涉,各节点属性中可以设置所涉及的相关人员的信息以及处理时间等。
可选的,上述创建提示任务处理流程的过程包括利用预先设置的提示任务处理流程创建框架进行创建。
可选的,上述本次提示信息,可以为按照预设格式根据本次数据分析结果自动生成的提示信息。
本发明实施例能够使得相关人员及时获知本次数据分析结果,以利于根据本次数据分析结果进行决策或者对异常数据进行处理。
图4是本发明实施例提供的数据分析处理装置的一个结构图,该装置适用于执行本发明实施例提供的数据分析处理方法。如图4所示,该装置具体可以包括:
目标指标确定模块401,用于根据用户的数据分析指令确定本次数据分析的目标指标,能够利于根据本次数据分析的目标指标确定关联基础指标及关联基础指标的值。
关联基础指标值获取模块402,用于根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值。能够利于根据关联基础指标的值确定得到目标指标的值,进而利于对目标指标的值进行分析得到分析结果。
具体的,基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于采集数据统计表计算每个基础指标的值的确定方法。
目标指标值确定模块403,用于根据关联基础指标的值确定目标指标的值,能够利于对目标指标的值进行分析得到分析结果。
分析模块404,用于根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果,能够联合模块402-403,将数据分析处理的过程被拆解为多个步骤,能够以较低代码的方案对数据进行分析处理,有利于缓解服务器以及数据库的压力,从而及时对数据进行分析和处理,避免对正常业务产生影响,并对异常数据进行及时处理。
可选的,上述关联基础指标值获取模块402能够具体用于根据目标指标从预先创建的目标指标库中获取与目标指标关联的关联基础指标;以及基于采集数据统计表利用与关联基础指标对应的第一确定方法确定关联基础指标的值。
预先创建的目标指标库包括根据数据分析需求确定的多个数据分析目标指标,与每个数据分析目标指标关联的基础指标,以及基于与每个数据分析目标指标关联的基础指标的值,确定每个数据分析目标指标的第二确定方法。
可选的,上述关联基础指标值获取模块402能够具体用于根据预设的筛选条件对采集数据统计表中预选字段范围内的值进行筛选得到本次分析相关数据;以及利用预设的计算方法对本次分析相关数据进行计算得到关联基础指标的值。
可选的,上述目标指标值确定模块403能够具体用于基于关联基础指标的值,利用与目标指标对应的第二确定方法确定目标指标的值。
可选的,上述目标指标值确定模块403能够具体用于将关联基础指标的值确定为目标指标的值。
可选的,上述分析模块404能够具体用于对目标指标的值是否属于预设的标准范围进行判断,若属于则将本次数据分析结果输出为正常,否则将本次数据分析结果输出为异常。
在本发明的可选具体实施例中,本发明的数据分析处理装置还包括:提示模块,用于根据本次数据分析结果向对相关人员进行相应提示。
可选的,上述提示模块能够具体用于创建提示任务处理流程并利用提示任务流程向相关人员发送本次提示信息,或者利用预先创建的提示任务处理流程向相关人员发送本次提示信息;本次提示信息包括本次提示的目的,本次提示所涉及的数据以及与本次提示所涉及的数据对应的标准数据。
本领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述功能模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本发明实施例还提供了一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现上述任一实施例提供的数据分析处理方法。
本发明实施例还提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现上述任一实施例提供的数据分析处理方法。
下面参考图5,其示出了适于用来实现本发明实施例的电子设备的计算机系统500的结构示意图。图5示出的电子设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示,计算机系统500包括中央处理单元(CPU)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中,还存储有系统500操作所需的各种程序和数据。CPU 501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
以下部件连接至I/O接口505:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的计算机程序根据需要被安装入存储部分508。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(CPU)501执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块和/或单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块和/或单元也可以设置在处理器中,例如,可以描述为:一种处理器包括目标指标确定模块、关联基础指标值获取模块、目标指标值确定模块和分析模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备可以实现包括:根据用户的数据分析指令确定本次数据分析的目标指标;根据目标指标确定与目标指标关联的关联基础指标,并基于预先创建的基础指标库获取关联基础指标的值;基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于采集数据统计表计算每个基础指标的值的第一确定方法;根据关联基础指标的值确定目标指标的值;以及根据与目标指标对应的数据分析规则对目标指标的值进行分析得到本次数据分析结果。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (11)
1.一种数据分析处理方法,其特征在于,包括:
根据用户的数据分析指令确定本次数据分析的目标指标;
根据所述目标指标确定与所述目标指标关联的关联基础指标,并基于预先创建的基础指标库获取所述关联基础指标的值;所述基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于所述采集数据统计表计算每个基础指标的值的第一确定方法;
根据所述关联基础指标的值确定所述目标指标的值;以及
根据与所述目标指标对应的数据分析规则对所述目标指标的值进行分析得到本次数据分析结果。
2.根据权利要求1所述的数据分析处理方法,其特征在于,还包括:
根据所述本次数据分析结果对相关人员进行相应提示。
3.根据权利要求1所述的数据分析处理方法,其特征在于,所述根据所述目标指标确定与所述目标指标关联的关联基础指标,并基于预先创建的基础指标库获取所述关联基础指标的值的过程包括:
根据所述目标指标从预先创建的目标指标库中获取与所述目标指标关联的关联基础指标;以及基于所述采集数据统计表利用与所述关联基础指标对应的所述第一确定方法确定所述关联基础指标的值;
所述预先创建的目标指标库包括根据所述数据分析需求确定的多个数据分析目标指标,与每个数据分析目标指标关联的基础指标,以及基于与所述每个数据分析目标指标关联的基础指标的值,确定所述每个数据分析目标指标的第二确定方法;
所述根据所述关联基础指标的值确定所述目标指标的值的过程包括:
基于所述关联基础指标的值,利用与所述目标指标对应的所述第二确定方法确定所述目标指标的值。
4.根据权利要求1所述的数据分析处理方法,其特征在于,所述根据所述关联基础指标的值确定所述目标指标的值的过程包括:
将所述关联基础指标的值确定为所述目标指标的值。
5.根据权利要求1所述的数据分析处理方法,其特征在于,所述采集数据统计表由以下方法获取:
根据所述数据分析需求,对不同业务系统中存储的采集数据进行抽取、汇聚、质检以及清洗转换得到多个合规采集数据表;以及
将所述多个合规采集数据表进行合并得到所述采集数据统计表。
6.根据权利要求3所述的数据分析处理方法,其特征在于,所述基于所述采集数据统计表利用与所述关联基础指标对应的所述第一确定方法确定所述关联基础指标的值的过程包括:
根据预设的筛选条件对所述采集数据统计表中预选字段范围内的值进行筛选得到本次分析相关数据;以及
利用预设的计算方法对所述本次分析相关数据进行计算得到所述关联基础指标的值。
7.根据权利要求1所述的数据分析处理方法,其特征在于,所述根据与所述目标指标对应的数据分析规则对所述目标指标的值进行分析得到本次数据分析结果的过程包括:
对所述目标指标的值是否属于预设的标准范围进行判断,若属于则将所述本次数据分析结果输出为正常,否则将本次数据分析结果输出为异常。
8.根据权利要求2所述的数据分析处理方法,其特征在于,所述根据所述本次数据分析结果对相关人员进行相应提示的过程包括:
创建提示任务处理流程并利用所述提示任务流程向所述相关人员发送本次提示信息,或者利用预先创建的提示任务处理流程向所述相关人员发送本次提示信息;
所述本次提示信息包括本次提示的目的,本次提示所涉及的数据以及与所述本次提示所涉及的数据对应的标准数据。
9.一种数据分析处理装置,其特征在于,包括:
目标指标确定模块,用于根据用户的数据分析指令确定本次数据分析的目标指标;
关联基础指标值获取模块,用于根据所述目标指标确定与所述目标指标关联的关联基础指标,并基于预先创建的基础指标库获取所述关联基础指标的值;所述基础指标库包括根据采集数据统计表以及数据分析需求确定的多个基础指标,以及基于所述采集数据统计表计算每个基础指标的值的确定方法;
目标指标值确定模块,用于根据所述关联基础指标的值确定所述目标指标的值;以及
分析模块,用于根据与所述目标指标对应的数据分析规则对所述目标指标的值进行分析得到本次数据分析结果。
10.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至8中任一所述的数据分析处理方法。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至8中任一所述的数据分析处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310837582.8A CN116909811A (zh) | 2023-07-07 | 2023-07-07 | 一种数据分析处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310837582.8A CN116909811A (zh) | 2023-07-07 | 2023-07-07 | 一种数据分析处理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116909811A true CN116909811A (zh) | 2023-10-20 |
Family
ID=88354258
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310837582.8A Pending CN116909811A (zh) | 2023-07-07 | 2023-07-07 | 一种数据分析处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116909811A (zh) |
-
2023
- 2023-07-07 CN CN202310837582.8A patent/CN116909811A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107168854B (zh) | 互联网广告异常点击检测方法、装置、设备及可读存储介质 | |
CN108063699B (zh) | 网络性能监控方法、装置、电子设备、存储介质 | |
CN110163457B (zh) | 一种业务指标的异常定位方法和装置 | |
CN107908550B (zh) | 一种软件缺陷统计处理方法及装置 | |
CN109634941B (zh) | 医疗数据处理方法、装置、电子设备及存储介质 | |
CN112491611A (zh) | 故障定位系统、方法、装置、电子设备和计算机可读介质 | |
CN111402017A (zh) | 一种基于大数据的信用评分方法和系统 | |
CN110647447A (zh) | 用于分布式系统的异常实例检测方法、装置、设备和介质 | |
CN117952100A (zh) | 数据处理的方法、装置、电子设备和存储介质 | |
CN116074183B (zh) | 一种基于规则引擎的c3超时分析方法、装置及设备 | |
CN113723747A (zh) | 分析报告生成方法、电子设备及可读存储介质 | |
CN113138906A (zh) | 一种调用链数据采集方法、装置、设备及存储介质 | |
CN111835566A (zh) | 一种系统故障管理方法、装置及系统 | |
CN111506455A (zh) | 服务发布结果的查验方法及装置 | |
CN116909811A (zh) | 一种数据分析处理方法、装置、电子设备及存储介质 | |
CN116185856A (zh) | 一种软件系统健康检测方法、装置、存储介质及设备 | |
CN116432069A (zh) | 信息处理方法、服务提供方法、装置、设备及介质 | |
CN115994093A (zh) | 测试用例推荐方法和装置 | |
CN115599687A (zh) | 一种软件测试场景的确定方法、装置、设备及介质 | |
CN115344495A (zh) | 批量任务测试的数据分析方法、装置、计算机设备及介质 | |
CN113900902A (zh) | 日志处理方法、装置、电子设备及存储介质 | |
CN107357703A (zh) | 一种终端应用耗电检测方法及服务器 | |
CN114706856A (zh) | 故障处理方法及装置、电子设备和计算机可读存储介质 | |
CN111275466B (zh) | 一种超期单量预警的方法和装置 | |
CN113052509A (zh) | 模型评估方法、模型评估装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |