CN112181957A - 一种档案数据的监管处理方法、装置及电子设备 - Google Patents
一种档案数据的监管处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN112181957A CN112181957A CN202010936518.1A CN202010936518A CN112181957A CN 112181957 A CN112181957 A CN 112181957A CN 202010936518 A CN202010936518 A CN 202010936518A CN 112181957 A CN112181957 A CN 112181957A
- Authority
- CN
- China
- Prior art keywords
- archive data
- target
- data
- stage
- target archive
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title description 10
- 238000001514 detection method Methods 0.000 claims abstract description 119
- 238000013441 quality evaluation Methods 0.000 claims abstract description 67
- 238000012545 processing Methods 0.000 claims abstract description 48
- 238000000034 method Methods 0.000 claims abstract description 27
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012360 testing method Methods 0.000 claims description 9
- 230000000977 initiatory effect Effects 0.000 claims 1
- 238000013523 data management Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000032683 aging Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000005067 remediation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Debugging And Monitoring (AREA)
Abstract
本说明书实施例提供一种档案数据的监管处理方法、装置及电子设备,属于数据合规监管技术领域。其中,方法包括:基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测。基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果。基于所述目标档案数据在所属阶段对应的质量评估结果,确定所述目标档案数据在所属阶段对应的监管处理策略。基于所述目标档案数据在所属阶段对应的监管处理策略,对所述目标档案数据执行监管处理操作。
Description
技术领域
本文件涉及数据处理技术领域,尤其涉及一种档案数据的监管处理方法、装置及电子设备。
背景技术
随着网络业务的发展及广泛应用,业务系统中的档案数据越来越庞大,导致数据管理任务也越来越繁重。目前,在业务系统庞大的档案数据中,除正常数据之外,还存在一部分如超出合理取值范围、格式非法、业务逻辑含糊等缺陷的脏数据。脏数据是一种对实际业务毫无意义的数据,一旦导入业务系统,则会加剧数据管理成本,后续进行处理也需要花费较长的周期及大量人力。
有鉴于此,当前急需一种针对档案数据的合规监管方案,以保障业务系统中档案数据的质量。
发明内容
本说明书实施例目的是提供一种档案数据的监管处理方法、装置及电子设备,能够档案数据生命周期内的不同阶段执行相符合的合规检测,进而根据合规检测结果执行监管处理操作,以保障向业务系统中档案数据的质量。
为了实现上述目的,本说明书实施例是这样实现的:
第一方面,提供一种档案数据的监管处理方法,包括:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
基于所述目标档案数据在所属阶段对应的质量评估结果,确定所述目标档案数据在所属阶段对应的监管处理策略;
基于所述目标档案数据在所属阶段对应的监管处理策略,对所述目标档案数据执行监管处理操作。
第二方面,提供一种档案数据的监管处理装置,包括:
合规检测模块,基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
质量评估模块,基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
监管执行模块,对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
第三方面,提供一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
第四方面,提供一种算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
本说明书实施例的方案针对档案数据生命周期内的不同阶段设置专属的合规检测策略,并对需要监管的目标档案数据执行所属阶段相匹配的合规检测,以评估目标档案数据在所属阶段对应的质量,并基于质量评估结果执行相匹配的监管处理操作,从而实现档案数据全生命周期的合规监管,保障了业务系统中的档案数据质量,可降低业务系统的数据管理成本。
附图说明
为了更清楚地说明本说明书实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书实施例中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本说明书实施例提供的档案数据的监管处理方法的流程示意图。
图2为本说明书实施例提供的档案数据的监管处理装置的结构示意图。
图3为本说明书实施例提供的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
如前所述,随着网络业务的发展及广泛应用,业务系统中的档案数据越来越庞大,导致数据管理任务也越来越繁重。目前,在业务系统庞大的档案数据中,除正常数据之外,还存在一部分如超出合理取值范围、格式非法、业务逻辑含糊等缺陷的脏数据。脏数据是一种对实际业务毫无意义的数据,一旦导入业务系统,则会加剧数据管理成本,后续进行补救处理也需要花费较长的周期及大量人力。为此,比文件旨在提供一种针对档案数据的合规监管方案,用于保障业务系统中档案数据的质量。
图1是本说明书实施例档案数据的监管处理方法的流程图。图1所示的方法可以由下文相对应的装置执行,包括如下步骤:
S102,基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与目标档案数据所属阶段相匹配的合规检测。
具体地,本说明实施例中,档案数据生命周期至少包括:投用前的准入阶段和投用后的运营阶段。
其中:
若目标档案数据属于准入阶段,则表示目标档案数据尚未导入业务运营数据库中,也就是未投用使用。针对准入阶段的特点,可以但不限于对目标档案数据进行数据层维度的合规检测。比如:基于档案数据在不同维度下的数据类型所对应的特征基线进行合规检测的逻辑,也就是对档案数据的数据规范(取值范围、表达格式、字段长度)进行检测;基于档案数据中的预期消费字段占比进行合规检测的逻辑,也就是对档案数据的预期价值进行检测;基于档案数据产出时效进行合规检测的逻辑,也就是对档案数据的时效进行检测。
若目标档案数据属于运营阶段,则表示目标档案数据已导入业务运营数据库中投用。针对运营阶段的特点,可以但不限于对目标档案数据定期进行运营层维度的合规检测。比如:基于目标档案数据在运营阶段对应的实际消费频率(消费可以但不限制是指被业务请求)进行合规检测;基于目标档案数据在运营阶段对应的实际消费字段数量进行合规检测等。
S104,基于目标档案数据在所属阶段对应的合规检测结果,对目标档案数据进行质量评估,得目标档案数据在所属阶段对应的质量评估结果。
具体地,不同阶段的合规检测策略包括有多个合规检测项目,本步骤可以根据目标档案数据在所属阶段对应的所有合规检测项目的合规检测结果综合进行质量评估。应理解,质量评估的具体方式并不唯一,本说明实施例不作具体限定。
S106,对目标档案数据执行与目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
作为示例性介绍:
若所述目标档案数据属于准入阶段,且在准入阶段对应的质量评估结果达到第一预设标准,则本步骤将目标档案数据导入至业务运营数据库中,以投入应用。反之,则拒绝导入至业务运营数据库。
若所述目标档案数据属于运营阶段,且在运营阶段对应的质量评估结果未达到第二预设标准,则本步骤将目标档案数据从业务运营数据库(存储有包含所述目标档案数据在内的属于运营阶段的档案数据)中移除,和/或,针对业务运营数据库中的目标档案数据发起质量异常报警。
基于图1所示的方法可以知道,本说明书实施例的方案针对档案数据生命周期内的不同阶段设置专属的合规检测策略,并对需要监管的目标档案数据执行所属阶段相匹配的合规检测,以评估目标档案数据在所属阶段对应的质量,并基于质量评估结果执行相匹配的监管处理操作,从而实现档案数据全生命周期的合规监管,保障了业务系统中的档案数据质量,可降低业务系统的数据管理成本。
下面对本说明书实施例的监管处理方法进行详细介绍。
本说明书实施例的方法中,档案数据生命周期内主要包括:准入阶段和运营阶段。其中,准入阶段顾名思义,是将产出的档案数据导入业务运营数据库前的阶段。运营阶段则是档案数据导入业务运营数据库后投入应用(如提供业务查询服务)的阶段。
针对准入阶段:
本说明书实施例的监管处理方法可以基于针对准入阶段设置的合规检测策略,对准入阶段的档案数据进行如下合规检测项目:
1)基于档案数据在不同维度下的数据类型所对应的特征基线进行合规检测。
具体地,可以基于针对不同数据类型预先刻画的特征参数,对准入阶段的档案数据集进行数据分类,确定准入阶段的档案数据集中个档案数据的数据类别。之后,基于针对准入阶段的档案数据集中各档案数据的数据类别预先设置的特征基线,对档案数据集中各档案数据进行合规检测,也就是判断档案数据是否不符合其数据类别所对应的特征基线。如果符合特征基线,则合规检测通过;反之,合规检测未通过。
2)基于档案数据中的预期消费字段占比进行合规检测的逻辑。
具体地,针对预测一些有价值的消费字段,并计算准入阶段的档案数据集中各档案数据的预期消费字段与全量字段的比值。如果,比值达到一定阈值,则合规检测通过;反之,合规检测未通过。
3)基于档案数据产出时效进行合规检测的逻辑。
具体地,根据当前时间以及准入阶段的档案数据集中各档案数据的产出时间,计算准入阶段的档案数据集中各档案数据的产出时效。如果档案数据距的产出时间与当前时间的差值未超出时效要求,则合规检测通过;反之,合规检测未通过。
在合规检测完成后,针对准入阶段的档案数据集中的每个档案数据,根据对应的合规检测项目覆盖率和合规检测项目通过率,来进行质量评估,得到准入阶段的每个档案数据的质量评估结果。
之后,将准入阶段的档案数据集中质量评估达到第一预设标准的档案数据导入至业务运营数据库以实现投用。而其余档案数据则可以打回处理,以追溯不合规的原因。
针对运营阶段:
本说明书实施例的监管处理方法可以基于针对运营阶段设置的合规检测策略,对业务运营数据库中的档案数据定期进行如下合规检测项目:
1)基于档案数据对应的实际消费频率进行合规检测。
具体地,根据业务运营数据库的档案数据请求记录,来计算业务运营数据库中的各档案数据的实际消费频率。也就是说,档案数据的被业务请求越频繁,则对应的实际消费频率也越高。本说明书实施例中,如果档案数据的实际消费频率达到一定标准,则合规检测通过;反之,合规检测未通过。
2)基于档案数据对应的实际消费字段数量进行合规检测。
具体地,根据业务运营数据库的档案数据请求记录,来统计业务运营数据库中的各档案数据的实际消费字段数量。也就是说,档案数据中被业务请求过的字段数量。本说明书实施例中,如果档案数据的实际消费字段数量达到一定标准,则合规检测通过;反之,合规检测未通过。
3)基于业务层需求对档案数据进行合规检测。
具体地,可以以业务逻辑为标准,对档案数据进行合规检测。比如,确定档案数据中业务价值较高的字段的数量、占比等。如果档案数据的业务价值较高的字段的数量、占比达到一定标准,则合规检测通过;反之,合规检测未通过。
应理解,本说明书实施例中业务系统可以对运营阶段的合规检测项目以及相关的合规检测逻辑进行更新。因此,在运营阶段的本次合规检测完成后,可以针对业务运营数据库的每个档案数据,根据对应的合规检测项目覆盖率、合规检测项目通过率以及合规检测时效(即距最近一次合规检测的时间),进行质量评估,得到业务运营数据库中每个档案数据的质量评估结果。
之后,将业务运营数据库中的质量评估结果未达到第二预设标准档案数据移除出去,以实现脏数据清洗。或者,针对业务运营数据库中的质量评估结果未达到第二预设标准档案数发起质量异常报警,以追溯不合规的原因。
综上所述,本说明书实施例的监管处理方法在档案数据导入业务运营数据库前的准入阶段,进行数据层维度的合规监管,以防止对无意义的脏数据污染业务系统。同时,在运营阶段,对业务运营数据库的档案数据进行定期的合规监管,从而根据业务环境的变化,自适应处理业务运营数据库中低质量的档案数据。
以上是对本说明书实施例的方法的介绍。应理解,在不脱离本文上述原理基础之上,还可以进行适当的变化,这些变化也应视为本说明书实施例的保护范围。
与上述图1所示的监管处理方法相对应地,本说明书实施例还提供一种档案数据的监管处理装置。图2是本说明书实施例监管处理装置200的结构图,包括:
合规检测模块210,基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检。
质量评估模块220,基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果。
监管执行模块230,对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
本说明书实施例的装置针对档案数据生命周期内的不同阶段设置专属的合规检测策略,并对需要监管的目标档案数据执行所属阶段相匹配的合规检测,以评估目标档案数据在所属阶段对应的质量,并基于质量评估结果执行相匹配的监管处理操作,从而实现档案数据全生命周期的合规监管,保障了业务系统中的档案数据质量,可降低业务系统的数据管理成本。
可选地,本说明书实施例的装置中,所述至少两个阶段包括:档案数据投用前的准入阶段和档案数据投用后的运营阶段。
其中,针对准入阶段设置的的合规检测策略包括以下至少一者:
基于档案数据在不同维度下的数据类型所对应的特征基线进行合规检测的逻辑;
基于档案数据中的预期消费字段占比进行合规检测的逻辑
基于档案数据产出时效进行合规检测的逻辑。
针对运营阶段设置的的合规检测策略包括以下至少一者:
基于目标档案数据在所述运营阶段对应的实际消费频率进行合规检测的逻辑;
基于目标档案数据在所述运营阶段对应的实际消费字段数量进行合规检测的逻辑。
可选地,本说明书实施例的装置中,若所述目标档案数据属于准入阶段,则监管执行模块230可以在目标档案数据对应所述准入阶段的质量评估结果达到第一预设标准时,将该目标档案数据导入至业务运营数据库中,以投入应用。若所述目标档案数据属于运营阶段,则监管执行模块230可以在所述目标档案数据对应所述运营阶段对应的质量评估结果未达到第二预设标准时,将所述目标档案数据从业务运营数据库中移除,和/或,针对所述业务运营数据库中的所述目标档案数据发起质量异常报警,其中,所述业务运营数据库存储有包含所述目标档案数据在内的属于运营阶段的档案数据。
可选地,本说明书实施例的装置中,针对所述运营阶段的合规检测策略为周期性执行,质量评估模块220可以基于所述目标档案数据的在所述运营阶段对应的合规检测结果以及所述目标档案数据在所述运营阶段对应的合规检测时效性,对所述目标档案数据进行质量评估。
可选地,本说明书实施例的装置中,各阶段的合规检测策略包括有多个合规检测项目,其中,所述目标档案数据在所属阶段对应的合规检测结果指示有目标待监管档案数据在所属阶段对应的合规检测项目覆盖率和合规检测项目通过率。
显然,本说明书实施例的监管处理装置可以作为上述图1所示的监管处理方法的执行主体,因此能够实现监管处理方法在图1所实现的功能。由于原理相同,本文不再赘述。
图3是本说明书的一个实施例电子设备的结构示意图。请参考图3,在硬件层面,该电子设备包括处理器,可选地还包括内部总线、网络接口、存储器。其中,存储器可能包含内存,例如高速随机存取存储器(Random-Access Memory,RAM),也可能还包括非易失性存储器(non-volatile memory),例如至少1个磁盘存储器等。当然,该电子设备还可能包括其他业务所需要的硬件。
处理器、网络接口和存储器可以通过内部总线相互连接,该内部总线可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(PeripheralComponent Interconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图3中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
存储器,用于存放程序。具体地,程序可以包括程序代码,所述程序代码包括计算机操作指令。存储器可以包括内存和非易失性存储器,并向处理器提供指令和数据。
处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成问答对数据挖掘装置。处理器,执行存储器所存放的程序,并具体用于执行以下操作:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测。
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果。
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
本说明书实施例的电子设备能够针对档案数据生命周期内的不同阶段设置专属的合规检测策略,并对需要监管的目标档案数据执行所属阶段相匹配的合规检测,以评估目标档案数据在所属阶段对应的质量,并基于质量评估结果执行相匹配的监管处理操作,从而实现档案数据全生命周期的合规监管,保障了业务系统的档案数据的质量,可节省业务系统的数据管理成本。
上述如本说明书图1所示实施例揭示的监管处理方法可以应用于处理器中,或者由处理器实现。处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本说明书实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本说明书实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
应理解,本说明书实施例的电子设备可以实现上述监管处理装置在图1和图2所示的实施例的功能,本文不再赘述。
当然,除了软件实现方式之外,本说明书的电子设备并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
此外,本说明书实施例还提出了一种计算机可读存储介质,该计算机可读存储介质存储一个或多个程序,该一个或多个程序包括指令,该指令当被包括多个应用程序的便携式电子设备执行时,能够使该便携式电子设备执行图1所示实施例的方法,并具体用于执行以下方法:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测。
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果。
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
应理解,上述指令当被包括多个应用程序的便携式电子设备执行时,能够使上文所述的监管处理装置实现图1所示实施例的功能,本文不再赘述。
本领域技术人员应明白,本说明书的实施例可提供为方法、系统或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
以上仅为本说明书的实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。此外,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本文件的保护范围。
Claims (11)
1.一种档案数据的监管处理方法,包括:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
2.根据权利要求1所述的方法,
所述至少两个阶段包括:档案数据投用前的准入阶段和档案数据投用后的运营阶段。
3.根据权利要求2所述的方法,
针对准入阶段设置的的合规检测策略包括以下至少一者:
基于档案数据在不同维度下的数据类型所对应的特征基线进行合规检测的逻辑;
基于档案数据中的预期消费字段占比进行合规检测的逻辑
基于档案数据产出时效进行合规检测的逻辑。
4.根据权利要求2所述的方法,
若所述目标档案数据属于准入阶段,则对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作,包括:
若所述目标档案数据在所述准入阶段对应的质量评估结果达到第一预设标准,则将所述目标档案数据导入至业务运营数据库中,以投入应用。
5.根据权利要求2所述的方法,
针对运营阶段设置的的合规检测策略包括以下至少一者:
基于目标档案数据在所述运营阶段对应的实际消费频率进行合规检测的逻辑;
基于目标档案数据在所述运营阶段对应的实际消费字段数量进行合规检测的逻辑。
6.根据权利要求2所述的方法,
若所述目标档案数据属于运营阶段,则对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作,包括:
若所述目标档案数据在所述运营阶段对应的质量评估结果未达到第二预设标准,则将所述目标档案数据从业务运营数据库中移除,和/或,针对所述业务运营数据库中的所述目标档案数据发起质量异常报警,其中,所述业务运营数据库存储有包含所述目标档案数据在内的属于运营阶段的档案数据。
7.根据权利要求2中所述的方法,
针对所述运营阶段的合规检测策略为周期性执行,若所述目标档案数据属于运营阶段,则所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,包括:
基于所述目标档案数据的在所述运营阶段对应的合规检测结果以及所述目标档案数据在所述运营阶段对应的合规检测时效性,对所述目标档案数据进行质量评估。
8.根据权利要求1-7中任一项所述的方法,
所述至少两个阶段中各阶段的合规检测策略包括有多个合规检测项目,其中,所述目标档案数据在所属阶段对应的合规检测结果指示有目标待监管档案数据在所属阶段对应的合规检测项目覆盖率和合规检测项目通过率。
9.一种档案数据的监管处理装置,包括:
合规检测模块,基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
质量评估模块,基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
监管执行模块,对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
10.一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
11.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
基于针对档案数据生命周期内的至少两个阶段预先设置的合规检测策略,对目标档案数据执行与所述目标档案数据所属阶段相匹配的合规检测;
基于所述目标档案数据在所属阶段对应的合规检测结果,对所述目标档案数据进行质量评估,得到所述目标档案数据在所属阶段对应的质量评估结果;
对所述目标档案数据执行与所述目标档案数据在所属阶段对应的质量评估结果相匹配的监管处理操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010936518.1A CN112181957B (zh) | 2020-09-08 | 2020-09-08 | 一种档案数据的监管处理方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010936518.1A CN112181957B (zh) | 2020-09-08 | 2020-09-08 | 一种档案数据的监管处理方法、装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112181957A true CN112181957A (zh) | 2021-01-05 |
CN112181957B CN112181957B (zh) | 2024-04-12 |
Family
ID=73925406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010936518.1A Active CN112181957B (zh) | 2020-09-08 | 2020-09-08 | 一种档案数据的监管处理方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112181957B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103761651A (zh) * | 2013-10-21 | 2014-04-30 | 远光软件股份有限公司 | 基于多种监控方式的业务稽核方法及系统 |
CN104838416A (zh) * | 2012-09-30 | 2015-08-12 | 惠普发展公司,有限责任合伙企业 | 具有可定制的合规策略的电子健康记录系统 |
CN105515963A (zh) * | 2015-12-03 | 2016-04-20 | 中国联合网络通信集团有限公司 | 数据网关装置和大数据系统 |
CN107958049A (zh) * | 2017-11-28 | 2018-04-24 | 航天科工智慧产业发展有限公司 | 一种数据质量稽查管理系统 |
CN108108459A (zh) * | 2017-12-29 | 2018-06-01 | 长威信息科技发展股份有限公司 | 多源融合及环路关联的动态数据清洗方法及电子设备 |
CN108460680A (zh) * | 2018-04-18 | 2018-08-28 | 汇智创为网络科技(深圳)有限公司 | 一种金融投资的智能化管理系统 |
CN109102407A (zh) * | 2018-08-10 | 2018-12-28 | 中募网络科技(北京)股份有限公司 | 一种私募公司合规检查与监测方法和系统 |
US20190065461A1 (en) * | 2017-08-29 | 2019-02-28 | Promontory Financial Group, Llc | Natural language processing of unstructured data |
CN110633893A (zh) * | 2019-08-14 | 2019-12-31 | 阿里巴巴集团控股有限公司 | 一种策略效能监控方法、装置以及计算机设备 |
-
2020
- 2020-09-08 CN CN202010936518.1A patent/CN112181957B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104838416A (zh) * | 2012-09-30 | 2015-08-12 | 惠普发展公司,有限责任合伙企业 | 具有可定制的合规策略的电子健康记录系统 |
CN103761651A (zh) * | 2013-10-21 | 2014-04-30 | 远光软件股份有限公司 | 基于多种监控方式的业务稽核方法及系统 |
CN105515963A (zh) * | 2015-12-03 | 2016-04-20 | 中国联合网络通信集团有限公司 | 数据网关装置和大数据系统 |
US20190065461A1 (en) * | 2017-08-29 | 2019-02-28 | Promontory Financial Group, Llc | Natural language processing of unstructured data |
CN107958049A (zh) * | 2017-11-28 | 2018-04-24 | 航天科工智慧产业发展有限公司 | 一种数据质量稽查管理系统 |
CN108108459A (zh) * | 2017-12-29 | 2018-06-01 | 长威信息科技发展股份有限公司 | 多源融合及环路关联的动态数据清洗方法及电子设备 |
CN108460680A (zh) * | 2018-04-18 | 2018-08-28 | 汇智创为网络科技(深圳)有限公司 | 一种金融投资的智能化管理系统 |
CN109102407A (zh) * | 2018-08-10 | 2018-12-28 | 中募网络科技(北京)股份有限公司 | 一种私募公司合规检查与监测方法和系统 |
CN110633893A (zh) * | 2019-08-14 | 2019-12-31 | 阿里巴巴集团控股有限公司 | 一种策略效能监控方法、装置以及计算机设备 |
Non-Patent Citations (2)
Title |
---|
HAN XIAO; CHAO WANG; NA FENG: "Research on Remote Monitoring and Control System Key Techniques Based on Data Point Table", 《2008 INTERNATIONAL CONFERENCE ON INTELLIGENT INFORMATION HIDING AND MULTIMEDIA SIGNAL PROCESSING》 * |
宋立华;: "档案数字化外包实践中的风险与对策", 机电兵船档案, no. 02 * |
Also Published As
Publication number | Publication date |
---|---|
CN112181957B (zh) | 2024-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107844567B (zh) | 一种业务经验包推荐系统和方法 | |
US10664390B2 (en) | Optimizing execution order of system interval dependent test cases | |
CN110708204A (zh) | 一种基于运维知识库的异常处理方法、系统、终端及介质 | |
CN112311611B (zh) | 数据异常的监测方法、装置和电子设备 | |
CN110515795B (zh) | 一种大数据组件的监控方法、装置、电子设备 | |
EP3682324A1 (en) | Method and apparatus for finding long methods in code | |
CN106033574B (zh) | 一种作弊行为的识别方法及装置 | |
CN111651595A (zh) | 一种异常日志处理方法及装置 | |
US9043746B2 (en) | Conducting verification in event processing applications using formal methods | |
CN111865665A (zh) | 一种网络设备故障自愈方法和装置 | |
CN111090593A (zh) | 确定崩溃归属的方法、装置、电子设备及存储介质 | |
CN111813535A (zh) | 一种资源配置确定方法、装置及电子设备 | |
CN109325167B (zh) | 特征分析方法、装置、设备、计算机可读存储介质 | |
CN112181957A (zh) | 一种档案数据的监管处理方法、装置及电子设备 | |
CN113448807A (zh) | 告警监测方法、系统、电子设备及计算机可读存储介质 | |
CN110634018A (zh) | 一种流失用户的特征刻画方法、识别方法及相关装置 | |
CN115658646A (zh) | 一种二进制特征数据库构建方法及装置 | |
US10242315B2 (en) | Finite state machine forming | |
CN111694673B (zh) | 内存处理方法、装置、电子设备及计算机可读存储介质 | |
CN107729022B (zh) | 卸载应用程序的方法、装置和移动终端 | |
CN111046909A (zh) | 一种负荷预测的方法及装置 | |
CN112183952A (zh) | 一种指标质量的监管处理方法、装置和电子设备 | |
CN110708414A (zh) | 一种电话号码的排序方法、装置及电子设备 | |
CN114936113B (zh) | 一种任务雪崩恢复方法、装置、电子设备及存储介质 | |
CN117236617B (zh) | 一种企业业务管理方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |